Page 34 - AV_202204
P. 34
策划
这位主播冯小殊不是人类,
而是由中国气象局华风气象传媒
集团联合小冰公司共同创造、诞
生于小冰框架的 AI 虚拟气象主
播。这也是小冰框架虚拟人技术
解锁的又一场景。
冯小殊以中国天气主持人冯
殊为训练目标,依托小冰框架数
字孪生虚拟人技术构建而成。
他的训练时间仅为一周,背后
是小冰深度神经网络渲染技术
(Xiaoice Neural Rendering,
XNR)及小样本学习技术。即使
用少量样本,冯小殊的面容、表
拓尔思“小思”
情、肢体动作的整体自然度就达到了与真人十分相似的
程度。
拓尔思旗下的虚拟数字人“小思”在冬奥会期间
在语音专家模型、嘴型专家模型及人脸渲染专家模
连续进行冬奥热点播报的同时,还正式加盟了本届冬奥
型的训练下,冯小殊学习了冯殊本人的嘴部动作、眼部
会宣传报道的重要媒体之一——国家体育总局官方媒体
及脸部肌肉之间的协同关系,最终呈现出这一自然、逼
《中国体育报》。据悉,小思可以实现自动采编、智能
真的效果。
写稿、虚拟播报等全自动功能。
背后的科技力量
科大讯飞“3D虚拟冰冰”
在这些虚拟人背后,百度和腾讯技术功不可没。其
科大讯飞派出的“3D虚拟冰冰”,在专属H5中
中百度主要为央视电视直播提供手语翻译服务,腾讯的
带领大家说冬奥。凭借酷似央视主播王冰冰的眉眼和
聆语主要为央视频提供手语翻译服务,并上线小聪在腾
神韵,“3D虚拟冰冰”迅速赢得了众多网友的拥趸。
讯体育上进行手语翻译。
“3D虚拟冰冰”还解锁了东北话、英语等多达31种语
AI手语翻译的主要困难在于,手语也有自己的
言技能。
“语法”,语序也并不一定与汉语相同,且手语也存
在“方言”,即便是真人手语翻译师也难以保障百分
小冰AI虚拟气象主播冯小殊
百的可懂度。因此AI手语虚拟主播本质上仍是一个即
时翻译功能。
早在冬奥会开幕前十天,中国天气 WAP 华为站、
由百度开发的AI手语虚拟主播由其数字人平台曦灵
张家口气象公众号等新媒体平台上,一位气象主播冯小
打造,主要是通过语音识别、自然语言理解等人工智能
殊就已经正式上岗。
技术构建手语翻译引擎,再通过专为手语优化的自然动
作引擎奖授予实时演绎为数字人
的表情动作。
“聆语”则由腾讯云小微联合
PCG AI等技术团队共同打造,通
过整合多模态交互技术、3D数字
人建模、机器翻译、语音识别和自
然语言理解等技术优化手语翻译。
相关报道显示,百度通过百
度智能云构建手语翻译引擎,可
懂度达到85%以上,聆语词汇和
语句覆盖量超过160万,手语翻译
的可懂度可达90%,基本可以满
足电视直播手语翻译的需要。
34