全部产品
存储与CDN 数据库 域名与网站(万网) 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 钉钉智能硬件
文件存储

什么是CPFS并行文件系统.

更新时间:2018-01-30 20:05:13

CPFS是一种并行文件系统,数据存储到群集中多个数据节点,多个客户端可以同时访问这些数据,为大型高性能计算机集群提供高IOPS、高吞吐,低时延的数据存储服务。

随着高性能并行计算大规模商业化时代的到来,传统并行文件系统面临诸多挑战,存储资源的急剧增长,成本高,运维管理复杂度大,大规模存储系统的稳定性,性能随规模无法完全线性扩展等一系列问题困扰广大客户,CPFS应运而生。

产品特点:

CPFS为您提供高达1亿IOPS和1TBps吞吐的能力,具体特性如下:cpfs-1

  • 超高吞吐和IOPS

CPFS将数据条带化后均匀分布在整个存储集群上,允许client并行访问,吞吐和IOPS随存储节点的数量实现线性增长,整个存储集群对外提供超高的聚合带宽和IOPS。同时,CPFS采用融合以太网的 RDMA 协议 (RoCE),缩短IO访问的网络时延,进一步提高IO访问速度。cpfs-1

  • 超高的数据可靠性

CPFS持久化存储基于飞天盘古分布式存储系统构架,多份数据拷贝,10个9的数据可靠性,远高于传统存储厂商提供的磁盘阵列raid的可靠性。cpfs-3

  • 深度优化的高可用性

传统的并行文件系统一般提供两节点HA的模式,需在部署前配置,并且两个节点同时异常时需要手动恢复,影响文件系统的可用性。CPFS基于paxos ring的仲裁调度,自动检测服务节点异常,并在分钟级别切换到其它节点重新提供服务,提供3个9的高可用性。

  • 安全性、全局命名空间

具备ACL安全访问控制,网络隔离,主子账号授权等安全特性,保障客户数据安全隔离。整个集群单一、全局命名空间,多客户端之间数据无缝访问。

  • 数据生命周期管理

基于业务场景,客户数据可以在阿里云不同存储产品之间自由流动,包括CPFS并行文件系统、NAS、OSS。

  • 标准POSIX、MPI数据访问接口

标准的POSIX和MPI接口,客户的业务应用无需任何修改即可无缝上云。同时可以结合数据专线,构建云下数据生成,云上数据处理的混合云高性价并行计算解决方案。

  • 按需扩展、按量付费

同阿里云NAS文件存储其他产品一样,云上弹性能力给予了客户根据业务按需扩展和按量付费的能力,在降低TCO的同时,保障了业务的突发需求和高效率。

适用业务场景

CPFS并行文件系统,提供高性能、高可用、高可靠、高可扩展性的能力,适用各种高性能计算场景:

  • 高校、科研、医学
  • 传统大型制造业、汽车、航空
  • 基因、大数据、IOT等复杂的计算场景。
本文导读目录