{dede:global.cfg_webname/}

当前位置: 首页 > 科技 > 科技快讯 > 正文

筑牢数据存储底座 天翼云HPFS赋能企业高效“掘金”数据

来源:互联网    时间:2024-08-12 14:27:40

  近年来,随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展,气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算(HPC)场景和智算场景(AI)不仅对算力需求激增,也产生了图片、视频等大规模非结构性数据,企业在实践中面临着数据量大、存储性能不足等问题,导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下,企业需要不断创新和优化存储系统技术架构,以便实现更加高效、可靠和灵活的存储解决方案。

  作为云服务国家队,天翼云坚持科技创新,不断加快推进数据存储基础设施建设,创新推出并行文件服务HPFS(CT-HPFS,High Performance File Storage),助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络,并融入RDMA技术,可提供最高千万IOPS和TBps吞吐,同时保证亚毫秒时延。该产品具有高性能、高可靠性、高可扩展性的特点,可充分满足企业在HPC和AI等场景下的存储需求。

  天翼云HPFS具备共享访问、弹性扩展、安全可信、性能优越四大产品优势。在共享访问方面,HPFS支持数千台客户端挂载同一文件系统,从而实现共享访问;无缝适配主流应用程序进行数据读写,满足多客户端并行计算场景需求。在弹性扩展方面,HPFS元数据采用集群架构,单文件系统文件数量可达百亿级别,文件系统支持在线扩展。在安全方面,HPFS采用多种EC纠删码方式、热备盘备份来保证数据的可靠性,同时,支持HA,故障时自动切换,服务可用性在99.90%以上,有效保障数据安全。在性能方面,HPFS使用100G以太网或IB、RoCE网络,性能随文件系统容量增长呈线性提升,同时可保证亚毫秒时延。

  天翼云HPFS在高性能并行文件存储方向持续突破,面向HPC/AI场景大规模非结构化数据及性能深度优化,保障用户数据安全、实现高效存储。

  在HPC场景,天翼云HPFS支持并行计算MPI-I/O(Message Passing Interface)接口,在多客户端同一时间并发读写同一个文件时,通过字节粒度锁机制,保证文件一致性,大幅提高多客户端读写同一文件的性能。

  在AI应用领域,天翼云HPFS支持万亿参数大模型,助力客户构建高速大模型训练平台,根据不同AI业务流程特点,灵活调用存储服务能力,满足数据预处理、训练、仿真等数据存储能力的要求,并大幅提升训练数据读取和checkpoint回写速度,降低企业AI训练成本投入,加速模型迭代。

  未来,天翼云将继续加大数据存储产品技术创新,以扎实的数据存储能力,为客户打造高性能存储底座,持续推动技术创新与产业协同发展,为构建安全、高效的数据基础设施贡献力量。

声明:来源非IT商业科技网的作品均转载自其它媒体,转载请尊重版权保留出处,一切法律责任自负。文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。转载稿件或作者投稿可能会经编辑修改或者补充, 如有异议可投诉至:Email:342 4350 938@qq.com

频道精选
共建汽车“芯”生态! 2024紫光同芯合作伙伴大会汽车电子创新技术论坛热点抢先看

共建汽车“芯”生态! 2024紫光同芯合作伙伴大会汽车电子创新技术论坛热点抢先看

  当前,汽车产业正处于前所未有的变革期,如何通过技术突破与产业协同加快向电动化、智能化、网联化方向升级?8月22日,2024紫光同芯合作
2024-08-12
XR新品频出行业急剧升温 Meta/谷歌/微美全息蓄势待发持续聚焦行业前沿

XR新品频出行业急剧升温 Meta/谷歌/微美全息蓄势待发持续聚焦行业前沿

  2024年,大模型持续打开AI新世界,Vision Pro引领空间计算……科技圈浪潮依然奔涌不停。  日前,Meta宣布其核心广告业务表现出强劲
2024-08-12
极米Z7X高亮版投影仪预售 采用哈曼卡顿音响

极米Z7X高亮版投影仪预售 采用哈曼卡顿音响

  原标题:极米 Z7X 高亮版投影仪预售:880 CVIA 流明、MT9669 2999 元  8 月 12 日消息,极米 Z7X 高亮版投影仪现已开启 1
2024-08-12
机械革命新款无界14X暴风雪上架 电池容量80Wh

机械革命新款无界14X暴风雪上架 电池容量80Wh

  原标题:机械革命新款无界 14X 暴风雪上架:R7-8845HS、32G+1T,4499 元  8 月 12 日消息,机械革命新款无界 14X 暴风雪笔记
2024-08-12
Redmi显示器A27U开售 支持60Hz刷新率

Redmi显示器A27U开售 支持60Hz刷新率

  原标题:Redmi 显示器 A27U 开售:27 英寸 4K IPS,到手价 1199 元  8 月 12 日消息,Redmi 显示器 A27U 今日开售,到
2024-08-12
TUXEDO推出InfinityFlex 14二合一Linux笔记本 屏幕支持360°开合

TUXEDO推出InfinityFlex 14二合一Linux笔记本 屏幕支持360°开合

  原标题:TUXEDO 推出 InfinityFlex 14 二合一 Linux 笔记本,配 i5-1335U  8 月 12 日消息,Linux 硬件企业 TUXEDO 当
2024-08-12
联想小新27p显示器开售 采用三边窄边框设计

联想小新27p显示器开售 采用三边窄边框设计

  原标题:联想小新 27p 显示器开售:27 英寸 4K、65W 供电,1399 元  8 月 12 日消息,联想小新 27p 显示器现已开售,这款
2024-08-12
开普云深度优化RAG流程 重构“智库秘书”智能体验

开普云深度优化RAG流程 重构“智库秘书”智能体验

  开普云智库秘书产品,是提供高效、精准智能问答、智能写作和文件解读等服务的人工智能工具,帮助用户快速获取知识和高效创作内容,是企
2024-08-12
欧美销量口碑双冠 VITURE推出旗舰级XR眼镜VITURE Pro

欧美销量口碑双冠 VITURE推出旗舰级XR眼镜VITURE Pro

  欧美销量和口碑双冠的XR眼镜定义级品牌VITURE,在北京三里屯举行"真Pro,真旗舰VITURE Pro玩家畅玩会。上架即脱销,海外屡屡卖爆的旗
2024-08-12

2017-2019 Copyright © IT商业科技网 备案许可证号粤ICP备2022153948号 豫公网安备110102003388号

紧急处理QQ:133 4673 445@qq.com