刚刚落幕的2022年世界人工智能大会,让大家看到人工智能技术的愿景变得更加宏大,但也更加清晰。
作为2022年世界人工智能大会的延伸活动之一,世界人工智能创新大赛(AIWIN)今年再次和SMG旗下融媒体中心、技术中心(上海东方传媒技术有限公司)以及AR/VR技术及应用国家工程实验室联手打造“文本语音驱动数字人表情口型竞赛”。
在“元宇宙”赛道和“数字人”技术领域有着丰富经验的SMT作为本次竞赛的主办方和出题官,为竞赛提供应用场景数据集。
全国各地上百支参赛队伍角逐竞答此题,共同探讨AI技术如何在元宇宙数字人的语音驱动面部表情口型方面更智能细腻。
▲ 文本驱动数字人表情口型竞赛现场
和AIWIN大赛的二次合作,是SMT在构建产学研融合新生态上的又一次成功实践,产学研深度融合关键还是要在“用”上下功夫,破解痛点才是真正的赋能。
作为主办方的东方传媒技术有限公司(SMT),希望通过AIWIN这样的原创性比赛,打造创新型平台,实现“赛题、需求、人才”的聚合,真正实现驱动AI技术在文化传媒领域的成果落地与商用。
随着“元宇宙”概念的火爆,数字人越来越多出现在我们生活的方方面面。SMG在2020年推出了虚拟二次元新闻主播“申䒕雅”,并在2022年转正有了写实风格的数字人形象。
创造一个数字人需要大量时间和经历,虚拟人物的创造包括:人物原型、建模、生成、渲染等;虚拟人物的驱动方式包括:手动制作动画、动作捕捉技术、AI智能驱动技术。
随着AI技术的发展,越来越多人开始用AI来控制数字人的动态行为。作为人机交互的重要组成部分,表情和口型驱动广泛用于游戏、电影、人机对话、虚拟主播等。
不同于传统的动画和游戏,元宇宙的世界对表情和口型有更高的要求,从而使数字人表情更加丰富、细腻;口型与表达的内容更加吻合,以提升元宇宙情感体验。
所以2022年SMT出的赛题即为实际应用中的研究课题之一:如何让数字人可能基于对文本语音的理解,有更真实的表情和口型的表现力。通过比赛,实验室的创新成果立刻可以赋能数字人。
赛题自7月5日发布以来,历时两个月,来自全球的255位选手报名赛事,历经招募、A榜打榜、B榜打榜、审核、终评答辩,从报名选手中决出赛题的前10榜单。
竞赛奖项在2022WAIC世界人工智能大会的“AIWIN五周年盛典暨AI开发者培育与成长”论坛上为大家揭晓,下面我们请出SMG数字主播“申䒕雅”公布前三名的奖项名单,让我们一起来看看吧!
这次比赛,SMT旗下RDC和子午工作室强强联手,运用先进的AI 智能绑定和渲染技术,对申䒕雅的虚拟数字人造型的进行制作,提供其中之人大量动捕数据供机器学习,形成一套AI算法来通过文本语音驱动数字人表情口型。
SMT作为主办方,还克服了疫情的影响,把所有的评比都改在云端进行,为了让参赛的团队参评体验最佳,团队在训练集、测试集、关键节点时间拟定、提交要求等大赛的每个环节都反复考量、精心准备,确保大赛的公平、优质、完美。
AIWIN 除设立奖金池之外,在 2022 春季也联动上海东方传媒技术有限公司等命题企业,对于优秀的同学给予企业实习绿色通道的邀请。
作为往年“AI 菁英实训营”的升级版,AIWIN组委会今年同步配套推出“AI 人才特训营”。吸引到近41位优秀学员投递SMT岗位,经由面试考核,最终录取6位学员进入SMT实习。
连续策划、筹办两届赛事的SMT总经理助理陆趣告诉我们:"未来,SMT将持续探索构建产学研融合的各种创新模式,为广电行业吸引更多与全媒体时代相适应的AI人才服务,并不断提升SMT科创能力,研发出更多前沿的AI应用场景,为融合媒体转型赋能。”