华为云AI-Native智算存储,引领AI时代数据存储变革

2024-06-23 15:26:57     来源:

6月23日,在华为开发者大会 2024上,“AI-Native智算存储,引领AI时代数据存储变革”高峰论坛成功举办。华为云存储服务产品部邀请知名学者、专家、企业家,共同探讨AI时代的前沿存储技术,分享成功实践、联合创新及智能化经验,见证智能世界的日新月异,携手共建AI时代数据存储的坚实底座。

紧抓云存储机遇,找准方向破局

清华大学舒继武教授在《AI大模型时代,云存储发展的机遇与挑战》 的主题演讲中解读了AI大模型时代的云存储的发展趋势、面临的机遇与挑战,并指出了破局思路:用AI原生的文件存储服务应对海量文件管理的挑战,用以GPU为中心的模型数据存储服务应对大模型训练推理过程中的存储扩容、显存容错与显存扩容的挑战。

清华大学教授 舒继武

AI-Native智算存储,引领AI时代数据存储变革

“AI时代正在全业务流重塑对云存储的关键需求,云存储成为算力之外的第二生产力。”华为云存储服务产品部部长林超在《AI-Native智算存储,引领AI时代数据存储变革》演讲中指出。

华为云存储服务产品部部长 林超

华为云存储提供面向AI的全业务流存储产品对象存储OBS、文件存储SFS Turbo、内存存储EMS、知识湖存储LMS,通过以存助算/强算/代算/补算,全面引领产业变革:

数据加载:OBS+SFS Turbo联动,海量小文件快速预热,10亿条小文件训练原始数据0.5h加载完成。

模型训练:SFS Turbo三级缓存加速,任务快照数据秒级恢复,节省AI算力资源。

推理问答:业界首创EMS弹性内存存储服务,打破AI内存墙,实现显存扩展,NPU算力节省50%;实现算力卸载,KV计算卸载至CPU+EMS,吞吐量提升100%;实现以存代算,缓存和复用历史KV计算结果,首Token时延降低80%。

RAG:LMS读写算分离+Memory Index打造千亿规模知识湖,实现千亿数据毫秒级查询,成本降低50%。

AIGC:OBS智能分级助力热温冷存储成本降低20%,Storage lens存储指标分析平台使能数据管理效率提升20%。

AI-Native智算存储存储白皮书 发布仪式

会上华为云存储服务产品部部长与发言嘉宾共同发布了《AI-Native智算存储存储白皮书》。白皮书阐述了对AI时代数据存储技术趋势的深刻洞察和前瞻思考。

携手华为云存储加速迈进AI新时代

华为流程IT首席存储架构师叶飞在《AI-Native智算存储助力华为IT智能化升级》主题演讲中指出,华为IT紧抓AI大模型技术变革的机遇,全面拥抱AIGC,构建统一AI流水线和AI资源工具链,服务1+6+1可和1+6+N产业颗粒智能化升级,提升各领域的作业效率和质量,打造万物互联的智能华为。华为IT系统应用SFS Turbo助力算力集群存储秒级快速恢复,为模型训练提速,实现4000万RMB/年节约。在代码检视中,华为IT与华为云存储联合创新,应用EMS助力显存扩展,增强AI辅助IT研发能力,提升代码检视准确性。在Welink云空间应用中,面临空间数据种类多、数据量大的挑战,华为IT应用LMS使能高效向量化检索实现海量文件内容的精准获取。

华为流程IT首席存储架构师 叶飞

“AI时代,AI数字人是一种新质生产力,被广泛应用于娱乐、旅游、零售等各行各业。华为云存储为硅基数字人提供高并发保障,降低300%成本。”南京硅基智能科技有限公司生态运营总监葛军分享《硅基生命崛起,AIGC数字人行业应用》时表示。硅基智能应用SFS Turbo+OBS使能数字人模型高效多Region分发,额外增加SFS Turbo带宽性能为AI数字人推理提速。在AI数字人实时对话场景中,硅基智能与华为云存储EMS联合创新,以存代算,缓存和复用历史KV计算结果,节省算力、降低首Token时延,提高数字人交互体验。

南京硅基智能科技有限公司生态运营总监 葛军

杭州波形智能科技有限公司联合创始人&CTO 周王春澍在《AI-Native智算存储加速WEAVER大模型训练推理》主题演讲中指出,在WEAVER大模型无限长文本生成场景中,EMS有效扩展显存,以存代算,节省算力,加速蛙蛙写作应答,为用户提供了更优的创作体验。在WEAVER大模型的训练场景中,SFS-Turbo为垂域大模型的训练提供了高效、稳定、低成本的存储侧解决方案。

杭州波形智能科技有限公司联合创始人&CTO 周王春澍

江苏赞奇科技股份有限公司研发总监张鹏在《华为云存储加速渲云云渲染》主题演讲中指出,赞奇科技依托华为云底层优势资源,携手把更好国产SaaS带给行业伙伴。在渲云云渲染的实际业务中,SFS Turbo有效支撑了渲染素材并发读取,支持同时挂载8000+计算节点,并已有效运行5年。在渲染虚拟机批量创建场景中,EVS(云硬盘)镜像缓存使能分钟级上千台虚拟机并发启动、高效渲染环境初始化、本地100GB+缓存并发读写,高效保障了渲染虚拟机批量创建。

江苏赞奇科技股份有限公司研发总监 张鹏

AI时代,数据正以超越想象的方式产生和应用。当昨天的不可思议,变得习以为常,数据的存储方式,必将再次变革。从“数据湖存储 ”向“AI-Native智算存储”跃迁,正在开启AI时代数据存储新纪元。携手华为云AI-Native智算存储,加速迈进AI新时代!

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

纯血鸿蒙!致远互联移动办公平台M3首批上架鸿蒙NEXT系统
华为云提出五大举措加速AI落地,携手21家企业发布联合创新方案
华为开发者大会2024确定性运维论坛召开 AI护航千行万业行稳智远
华为云吕阳明:盘古媒体大模型,重塑数字内容生产、处理及联接
华为云联合中国软件行业协会等单位发布《应用现代化实践指南》
中软国际携手深开鸿深度参与HDC2024,与华为共建鸿蒙生态
红火云生态,华为云携手伙伴赢领智能新产业
亮相重百家电节盛典,三星打造“有AI的科技·艺术·家”的理想生活空间
HDC2024 | 软通动力成功举办“云云协同,以新质动力驱动智能化跃进”分论坛
华为云首发AI原生应用引擎,为AI应用创新而生
共赴云深处|华为开发者大会2024中软国际主办分论坛圆满举办,以AI筑行业数智发展新机遇
格力集团携手华为,共绘珠海“云上智城”人工智能产业新蓝图
“齐”过生日,Cleer×任贤齐为你献上限量免费生日蛋糕!
华为开发者大会2024举办,东莞松山湖为之注入新活力
政企合作又有新范本?这家大国品牌为何获得频频点赞
以技术驱动全屋智慧场景创新,华为全屋智能2024解决方案赋能空间高级感
音数协敖然:小而不凡、简而有韵 小游戏有望中国文化建设发展的新力量
TCL李东生:制造业不能只依靠成本效率,一定要往技术创新上走
鄂尔多斯市数字投资有限公司与华为云联合发布《矿山产业集群大模型运营最佳实践》
鸿蒙先锋共筑星河 | 大手拉小手,鸿蒙原生应用的开发“节奏”不断档
鸿蒙先锋共筑星河 |南京大学教授刘钦,HarmonyOS NEXT教学的探索与实践
鸿蒙先锋共筑星河丨HarmonyOS NEXT走进医疗行业,革新运动康复体验
鄂尔多斯市数字投资有限公司与华为云联合发布《矿山产业集群大模型运营最佳实践》
华为云发布大模型混合云十大创新技术
DTW24 | 华为联合多家运营商打造以业务为中心的新一代智能运维,斩获TM Forum催化剂两项大奖
华为云键值存储服务KVS:以简驭繁,开启数据存储新体验
华为云开发者大会|性能倍增、体验跃级,华为云Flexus云服务正式发布
应用现代化产业峰会2024:未来应用,“智能”进化
探索全场景智慧新体验,现场直击华为开发者大会2024
双庆瓷砖新品 | 阿尔卑斯·峰峦系列 11复刻原生之美_中华网