阿里云AI存储全面升级,CPFS 容量提升500%
2024-08-07 16:28:11AI云资讯17369
8月7日,阿里云面向AI推出全新升级的存储系统CPFS智算版,单文件系统容量提升500%达到6PB级别,在大规模训练场景中,可支持更大的数据量和更高性能。同时,CPFS全新升级系统智能引擎,冷热数据流动带宽提升20倍,可大幅降低存储成本,更好支撑大模型训练及推理。

随着大模型参数和数据集规模的迅速增长,包含更多数据量的多模态大模型也成为趋势,大模型训练对存储的要求更高,需要更快的数据读写、传输和更大的存储空间。阿里云CPFS是专为AI和高性能计算而设计的存储产品。CPFS通过创新的分布式并行存储架构设计,自研的高性能RoCE RDMA网络协议和虚拟存储通道技术,多级缓存的弹性客户端,最终实现高吞吐、低延迟、Serverless化的高性能存储能力。
为更好满足模型训练不断增长的数据量和计算密度需求,CPFS单文件系统容量从1PB提升至6PB,单计算节点可支持40个容器同时挂载。同时,通过智能数据流动引擎的升级,冷热数据可以100GB/s的高带宽实现流动:在训练前将数据从对象存储OSS中快速导入到CPFS,更好满足训练时数据高并发读取;在训练结束后,将生成的结果数据从CPFS导出到OSS,大幅降低存储成本。
针对大模型训练中的数据安全问题,CPFS通过高性能虚拟化存储通道保障数据访问安全,提供租户权限鉴权、数据隔离和性能隔离,增强端到端安全隔离和数据保护能力。CPFS集成日志服务SLS提供的日志审计能力和云备份CloudBackup自动挂载备份功能也即将上线。
复旦大学、小鹏汽车、零一万物、百川智能、元戎启行等公司和机构已经使用阿里云进行AI训练和应用,通过阿里云CPFS提供的高吞吐带宽和百亿级小文件的高性能访问,数据集的并发读取和checkpoint写效率大幅提升,为模型训练和推理提速。比如,元戎启行基于阿里云的灵骏智算和CPFS分布式存储,完成了高性能的智能驾驶训练,训练效率提升120%,并通过冷热数据的分层存储方案实现大幅成本节省。
Forrester全球AI基础设施解决方案最新报告指出,阿里云AI Infra综合产品力居全球第二。此次CPFS智算版的全新升级,是阿里云存储在面向多模态等AI发展趋势做出的新探索。在存储领域,阿里云曾获中国电子学会科学技术特等奖、世界互联网领先科技成果奖,盘古分布式存储技术还曾荣获中国发明专利金奖。
相关文章
- 阿里云AI Landing Zone正式发布,助力企业从“上好云”到“用好AI”的战略升级
- 爱诗科技与阿里云达成全栈AI合作 AI视频服务全球化再启航
- 快鹭科技新品入驻阿里云云市场:以AI赋能办公解决方案,开启企业智能协作新时代
- 融云与阿里云联手,共同按下“AI+通信云”生态加速键
- AI火花集|阿里云携手心智互动,为视障群体打开娱乐场景
- 延锋国际 X 阿里云:全栈AI加速汽车产业智能升级!
- 级数AI与阿里云达成全栈AI战略合作
- 工程师变身AI“指挥者”,吉利与阿里云的软件开发变革实验
- 无万卡,不VLA:元戎启行与阿里云的“想法”和“解法”
- 破解高并发困局,阿里云数据库MongoDB版助力爱奇艺积分系统构筑数据基石
- 阿里云与天猫启动“AI新品类联合计划” ,支持智能硬件规模化发展
- 阿里云与Omdia联合发布AI安全报告,引领构建全新AI安全范式
- 阿里云 2025首届「AI安全」全球挑战赛完美收官,展现大模型安全攻防新高度
- 模型即服务,应用即未来:阿里云助力中小企业AI应用规模化落地
- 叫叫与阿里云达成全栈AI战略合作 让教育更“懂孩子”
- Zenlayer 亮相 2025 云栖大会,荣获阿里云首批云网络产品能力认证伙伴
人工智能企业
更多>>人工智能硬件
更多>>- CES 2026 机器人最大黑马!让“个人机器人”从概念变现实
- 光本位科技研发出玻璃光计算芯片,算力有望超传统AI推理芯片的千倍
- 拓斯达荣膺高工金球奖“工业具身全面布局标杆企业”,领跑人形机器人产业化赛道
- CES 2026 爆火出圈,Vbot超能机器狗开启全球消费级具身智能时代
- 韶音CES 2026新品发布:OpenFit Pro推出开放式滤噪新方案
- MUNIK秒尼科助力芯洲科技荣获ISO26262 ASIL-C功能安全产品认证证书
- 迈向AGI时代,网络运力新保障,沐创发布100G智能网络控制器芯片 N20
- MUNIK秒尼科助力导远科技MEMS芯片成功通过ISO 26262 ASIL-D汽车功能安全产品认证









