麻省理工学院提出更环保的AI训练方式,可降低碳排放
2020-05-08 22:48:14爱云资讯阅读量:732
去年美国马萨诸塞州大学阿默斯特分校的研究人员曾表示,训练一台大型AI机器产生的碳,平均是一个人终其一生驾驶汽车制造的排放量5倍。除此之外,还存在很多其他方面的能源消耗。因此AI未来如何实现可持续发展,仍是亟需解决的问题。
近期,在麻省理工一篇最新论文中显示,其提出了一种比以前更环保的方式来训练和运行AI模型的系统。论文中显示,该方案被称为是种“一劳永逸”的网络,它训练一个大型模型,该模型由许多不同大小的预训练子模型组成,这些子模型可以在不需要再训练的情况下针对一系列平台进行定制。每个子模型都可以在推理时独立运行而无需重新训练,系统根据与目标硬件的功率和速度限制相关的精度和延迟权衡来确定最佳子模型。
“渐进收缩”算法有效地训练大模型,同时支持所有子模型。先训练大模型,再利用大模型训练较小的子模型,使其同时学习,最后所有子模型都得到了支持。
在实验中,研究人员发现,用他们的方法训练一个包含超过10个五分之一建筑环境的计算机视觉模型,最终比花几个小时训练每个子网络要有效得多。此外,它并没有影响模型的准确性或效率——当使用通用基准(ImageNet)进行测试时,该模型在移动设备上达到了理想准确性,在推理方面比领先的分类系统快1.5到2.6倍。
也许更令人印象深刻的是,研究人员声称,与当今流行的模型搜索技术相比,计算机视觉模型在训练时需要大约1/1300的碳排放量。IBM研究员、麻省理工学院沃森人工智能实验室成员谈到这项研究时表示:“如果人工智能要继续快速发展,我们就需要减少其对环境的影响。”
相关文章
- AI赋能 智创未来 2024中国(黄石)工业互联网创新发展大会成功举办
- 高通李俨展望6G技术的标准发展:AI将成为6G终端的重要特性,或将改变终端和通信系统的设计方式
- GET大会 | 猿编程创始人李翊:揭秘AI时代科技少年成长之路
- 声网钟声:分布式端边云结合将成为实时 AI 基础设施的
- AI领航,智造跃升,格创东智与您相约2024中国5G+工业互联网大会
- 火山引擎AI for Science研讨会与Bio-OS大赛收官,“四驱飞轮”助力科研提效
- 苹果计划进军XR智能眼镜市场,微美全息发挥AI拓展能力促AR市场爆发
- 移动AI时代,天线数字化是网络智能化演进的必然选择
- 马化腾再次表态投入AI 腾讯Q3研发投入同比增9%达179亿
- 融入字节豆包AI,“I系搭子” FIIL首款实用型 AI耳机GS Links即将上市
- OpenAI计划于2025年1月推出新型智能体Operator
- 《The Power of Datafication》作者郭为:以AI为特征的数字化时代已经到来
- 李彦宏:智能体是AI应用的最主流形态,即将迎来爆发点
- 英特尔® 酷睿™ Ultra 处理器显著增强边缘 AI 和图形处理性能
- 钉钉上线工单等六大场景AI助理,AI继续深入到业务中
- 荣获国家级备案!深演智能AI技术发展迈入新阶段