全部产品
弹性计算 会员服务 网络 安全 移动云 数加·大数据分析及展现 数加·大数据应用 管理与监控 云通信 阿里云办公 培训与认证 更多
存储与CDN 数据库 域名与网站(万网) 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 智能硬件
文件存储

CPFS并行文件系统

更新时间:2018-04-28 15:54:05

CPFS是一种并行文件系统,数据存储到群集中的多个数据节点,多个客户端可以同时访问这些数据,为大型高性能计算机集群提供高IOPS、高吞吐、低时延的数据存储服务。

随着高性能并行计算大规模商业化时代的到来,传统并行文件系统面临诸多挑战,存储资源的急剧增长、成本高、运维管理复杂度大、大规模存储系统的稳定性、性能随规模无法完全线性扩展等一系列问题困扰广大客户,CPFS应运而生。

CPFS特性

  • 超高吞吐和IOPS

    CPFS为您提供高达1亿IOPS和1TBps吞吐的能力。

    CPFS将数据条带化后均匀分布在整个存储集群上,允许client并行访问,吞吐和IOPS随存储节点的数量实现线性增长,整个存储集群对外提供超高的聚合带宽和IOPS。同时,CPFS采用融合以太网的RDMA协议(RoCE),缩短I/O访问的网络时延,进一步提高I/O访问速度。

    cpfs-1

  • 超高的数据可靠性

    单个CPFS文件系统容量高达100PB。

    CPFS持久化存储基于飞天盘古分布式存储系统构架,多份数据拷贝,10个9的数据可靠性,远高于传统存储厂商提供的磁盘阵列RAID的可靠性。

    cpfs-3

  • 深度优化的高可用性

    传统的并行文件系统一般提供两节点HA的模式,需在部署前配置,并且两个节点同时异常时需要手动恢复,影响文件系统的可用性。CPFS基于Paxos Ring的仲裁调度,自动检测服务节点异常,并在分钟级别切换到其它节点重新提供服务,提供3个9的高可用性。

  • 安全性

    具备ACL安全访问控制、网络隔离、主子账号授权等安全特性,保障客户数据安全隔离

  • 全局命名空间

    整个集群单一、全局命名空间,多客户端之间数据无缝访问。

  • 数据生命周期管理

    基于业务场景,客户数据可以在阿里云不同存储产品之间自由流动,包括CPFS并行文件系统、NAS和OSS。

  • 标准POSIX、MPI数据访问接口

    提供标准的POSIX和MPI接口,您的应用程序无需任何修改即可无缝上云。同时可以结合数据专线,构建云下数据生成、云上数据处理的混合云高性价并行计算解决方案。

  • 按需扩展、按量付费

    云上弹性能力能够让您根据业务按需扩展存储节点,并且按量付费,在降低TCO的同时,保障了业务的突发需求和高效率。

适用场景

CPFS并行文件系统,提供高性能、高可用、高可靠、高可扩展性的能力,适用各种高性能计算场景:

  • 高校、科研、医学

  • 传统大型制造业、汽车、航空

  • 基因、大数据、IoT等复杂的计算场景

本文导读目录