网易伏羲蝉联CVPR两项冠军,AI助推《绝对演绎》首创“情绪迁移”玩
2022-04-15 10:27:40爱云资讯阅读量:999
近日,国际AI顶会CVPR 2022公布第三届人脸表情国际挑战赛结果,网易伏羲虚拟人团队从全球129只顶尖科研队伍中脱颖而出,连续两年拿下人脸表情动作单元检测(AU)、人脸情绪识别赛道(EXPR)的双料冠军,并率先将科研成果应用于产业创新。基于网易伏羲的AI人脸情绪识别技术,手游《绝对演绎》在国内首创表情情绪互动式玩法,将真人表情实时迁移至游戏人物,沉浸式还原演员磨炼演技的趣味体验,创下8天超7300万次的面部表情练习纪录。
(国际AI顶级会议CVPR 2022近日放榜)
让AI更好地识别、描述人类情感,并将前沿研究落地应用,是国际学术界长期关注、力争突破的重要课题。作为计算机视觉三大国际顶级会议之一,CVPR举办的第三届人脸表情国际挑战赛聚焦AI人脸表情分析领域的落地价值,考验参赛队伍AI模型识别人脸情绪的抗干扰和泛化能力。本次赛事共吸引129只全球一流高校和企业科研团队同台竞技。
在此次竞赛中,网易伏羲虚拟人提出基于自研表情表征技术和基于transformer的多模态情绪分析框架,最终在人脸表情动作单元检测(AU)获得F1 49.89%、人脸情绪识别赛道(EXPR)获得F1 35.87%,连续两年蝉联双料冠军。
(网易伏羲虚拟人团队连续两年斩获CVPR竞赛双料冠军)
目前,网易伏羲的AI人脸表情迁移、情绪识别等研究成果已投入应用,AI情绪识别技术更是首次应用于游戏玩法。去年底上线的娱乐圈题材“黑马”手游《绝对演绎》,就基于网易伏羲在人脸表情情绪领域的前沿AI技术,在国内首创表情情绪互动式玩法。玩家根据文字提示做出各种表情后,AI会将真人表情实时迁移至游戏角色中,并一键判断玩家的演绎是否到位。
(基于网易伏羲AI技术,《绝对演绎》国内首创表情情绪互动式玩法)
沉浸式磨炼演技的新颖玩法,叠加实时的效果展示,极大地提升了玩家的代入感体验,广受好评。去年10月,《绝对演绎》曾展开“视镜之旅”公测,演艺圈的“奋斗咖”在8天内进行了超7300万次面部表情练习,杀青了超2.5万场戏,玩家的事业心之强让网友直呼“提高内娱内卷质量,还看《绝对演绎》”。据悉,该项技术甚至收到了娱乐圈业内人士的关注,用以判断演员的演技。
(玩家晒出《绝对演绎》“练表情”神同步成果)
除了在虚拟人科研领域的深度耕耘,网易伏羲还拥有智能捏脸、动画迁移、动画合成、语音合成、语音转换等完善的虚拟人产品矩阵,为众多虚拟人公司以及麦当劳、网易云音乐、网易严选等快消、文娱、电商、金融等行业提供虚拟人技术解决方案。
网易伏羲成立于2017年,是国内专业从事游戏与泛娱乐AI研究和应用的顶尖机构。网易伏羲已经发表100多篇AI顶会论文,拥有200多项发明专利,以及数字人、智能捏脸、AI创作、AI反外挂、AI推荐匹配、AI竞技机器人等多个领域的领先技术。目前,网易伏羲正在向游戏、文旅、文娱等产业开放AI技术及产品,目前已服务超200家客户,应用日均调用量数亿次。
相关文章
- 云音乐上市公司拟更名为网易云音乐股份有限公司 上月被纳入港股通
- 网易云信IM、腾讯云IM、融云IM等社交类SDK适配原生鸿蒙, 助力应用提升用户粘性
- 网易伏羲范长杰:群体智能引领AI通向物理世界|2024具身智能大会
- 华为全联接大会:网易伏羲受邀展示AOP技术创新实践成果
- 网易伏羲-灵动工程机器人亮相2024数博会华为云展区
- 网易伏羲AI Agent分享:揭秘AOP框架在《永劫无间》手游Copilot的应用实践
- 网易伏羲亮相AICon 2024,分享全球首创游戏Copilot AI队友创新实践
- 华为游戏中心携网易等伙伴参展CJ,鸿蒙原生游戏成最大看点之一
- 网易伏羲有灵平台亮相WAIC 2024,探索人机共生新纪元
- 网易有灵将为百万人提供人机协作就业岗位,“产模一体化”效果显著
- WAIC 2024|网易伏羲赵增:AI向群体智能演进,多模态学习成热点
- 智汇WAIC 2024:网易伏羲核心产品齐亮相,共鉴智能新纪元
- 网易游戏与人民文学出版社签署战略合作 探索“原创数字IP+文化原创”
- 网易云音乐携手MANNER推出联名主题活动,引领城市生活新风尚
- 网易伏羲有灵平台荣登《China Daily》,人机协作开辟灵活用工新篇章
- 网易云音乐携手耐克,启动“撒开脚丫女孩不止于此”乐评征集活动