浙江联通打造 AI 敏感数据“本地存储,异地训练”算力网络服务新模式
2024-12-25 09:17:57爱云资讯阅读量:313
12月23日,由中国信息通信研究院主办,以“打造超弹性无损智算IP广域网,加速迈向智能时代”为主题的智算IP广域网产业交流会在北京成功举办。会上,浙江联通建设发展部总经理汤滢琪受邀发表了《打造高通量、高性能、高智能算网一体的算力智联网,探索存算拉远服务新模式》的主题演讲,深入分享了浙江联通在算力智联网AINet建设方面的阶段性创新成果及实践经验。
汤滢琪介绍到,当前AI智算需求旺盛,海量样本数据处理过程中存在两大挑战:一是数据多存储于企业端,部分安全性要求较高的数据不便外迁;二是样本数据量激增,AI智算中心在具备强大算力的同时,还需额外配备存储资源,显著提升了建设成本。
针对上述挑战,业内对实现“存算分离拉远、样本随训随拉”的需求迫切。存算分离技术是指将存储数据的仓库和对数据进行计算的加工厂独立开来,在训练时远端存储设备中的样本数据通过广域网,直接被传送到智算中心的智算服务器内存中进行计算,而不需要先存储到本地的磁盘里再进行处理,可以有效保证用户数据的安全性和一致性。
汤滢琪接着分享到,在联通服装制造军团“衣瞳行业模型”训练场景中,原始数据主要基于服装多模态数据,服装生产厂家使用“衣瞳行业模型”可实现实时检测,但是很多服装厂家的服装数据需要产权保护不愿公开,而基于存算分离的创新训练模式,刚好完美契合了用户需求。
针对这种AI敏感数据的本地存储异地训练的场景,浙江联通提出了创新的业务模式。基于中国联通全新的算力智联网AINet,依托“网络+平台”两大基础底座和高通量、高性能、高智能的“三高”核心能力,同时采用华为下一代路由器系列产品,浙江联通成功在杭州与金华两地间实施了业界首次30TB样本数据的跨200公里存算分离拉远训练,经过实际测算,训练效率高达97%。本次存算拉远测试项目取得的主要创新成果包括:
首先,以跨地市AI大模型训练能力创新重构智算训练模式。传统的智算集中训练模式,需要用户将样本上传到智算中心进行落盘训练,但是部分用户对隐私样本落盘存在安全顾虑。浙江联通通过IP广域无损方案,实现了杭州存、金华训的“数据不落盘”拉远训练,以算网协同的能力,为企业用户隐私样本训练探索出了一条新路。
其次,样本数据总量达30TB,传输距离超200公里,计算拉远效率大于97%。通过联通服装制造军团“衣瞳行业模型”的AI训练存算分离现网测试。充分验证了针对AI训练业务存算拉远的技术可行性,未来有相关数据敏感业务需求的用户可通过运营商算力服务,完成隐私样本不出园区的拉远训练,实现成本与安全的最佳平衡。
最后,汤滢琪表示,浙江联通将继续深化数字融合战略,持续推动传统产业转型升级,特别是打造“高通量、高性能、高智能”的算力智联网AINet,积极探索弹性带宽、任务式服务、数据快递、无损传输等创新服务模式。通过这些创新服务模式,赋能千行百业的数字化转型升级,为构建AI智能时代的新生态贡献力量。
相关文章
- 杭州何以为新?从打破算力瓶颈开始 ——浙江移动为算力共享出大力
- 信通院云计算与大数据研究所李洁:算力跟着能源跑,能源跟着算力跑,业务跟着绿算跑
- 信通院云计算与大数据研究所栗蔚:探索算力互联网体系架构,构建算力服务大市场
- 浙江联通打造 AI 敏感数据“本地存储,异地训练”算力网络服务新模式
- 一场面向算力产业的超大规模会议|第十九届中国IDC产业年度大典圆满闭幕!
- 北京数字经济算力中心获重磅荣誉,北电数智践行绿色低碳发展理念
- 低碳存储助力算力产业 富士胶片首次亮相IDC大会
- 北电数智前进·AI异构计算平台:重塑国产算力生态,驱动行业创新发展
- 信通院栗蔚:低空智联算力网驱动低空产业迈入智能时代
- 博大数据张永健出席中国IDC产业年度大典,洞见算力跃迁下的基础设施Interplay与重构
- 首个国产算力PoC平台正式开放,北电数智助推国产算力商业化落地
- 中国移动率先完成基于SRv6 DOH方案的跨设备厂商随流检测现网试点,算力网络迈向高阶业务质量感知
- 引领智能算力发展新范式,英博数科发布多款“英博云”智算产品与服务
- 北京电信聚焦“上云用数” 推动国产算力应用与智算创新发展
- AI时代如何构建智算中心?维谛技术(Vertiv)全链智算解决方案让算力触手可及
- 筑牢算力底座,九章云极DataCanvas公司赋能大湾区激活新质生产力