全球首个3D AI合成主播亮相：中国女记者为原型

5月21日，搜狗联合新华社推出的全球首个3D AI合成主播“新小微”正式亮相，基于搜狗人工智能核心技术，为全国观众带来最新的两会新闻资讯报道。

早在2018年，基于搜狗分身技术，搜狗就推出全球首个AI合成主播“新小浩”，已在新华社客户端上持续为观众服务500多天，先后产出13000多条新闻报道，累计时长超过35000分钟。

而此次的3D AI合成主播就是搜狗分身最新的突破性成果。较之前的2D AI合成主播，3D“新小微”不仅立体、灵活，可控，还具有同时支持多机位多景深，360°任意角度呈现内容等能力，在应用空间上拥有更多的可能性，为新闻节目多样化制作和呈现带来了更多选择。

据了解，“新小微”以新华社记者赵琬微为原型，基于超写实3D数字人建模、多模态识别及生成、实时面部动作生成及驱动、迁移学习等多项人工智能前沿技术，使机器可以基于输入文本生成逼真度极高的3D数字人视频内容。

3D AI合成主播结合了原力科技提供的业界领先的扫描还原、面部肌肉驱动、表情肢体捕捉等技术，生产出了高度还原真人发肤、形象逼真的数字人模型。

同时基于搜狗分身领先的端到端多模态建模技术，使用语音、图像、文本、3D肌肉运动数据等多模态信息完成联合建模训练。

在AI算法的驱动下，只需输入文本内容，“新小微”就能根据语义实时播报新闻，其表情唇动、肢体动作和语音表达高度契合、自然逼真。

搜狗表示，不久的将来，3D AI合成主播还会走出演播厅，支持外景播报和互动采访，为观众带来最前沿的新闻讯息。