全球首个AI合成主播亮相!能全年24小时工作

 ·  2018-11-08 11:01:49  ·  北京瑞铭安普科技有限公司
11月7日,在第五届世界互联网大会上,有这样一场发布会,让发布会的主持人倍感压力和“虐心”。

当天,搜狗公司CEO王小川、新华社副社长刘思扬等嘉宾和著名主持人邱浩联合带来了一场跨界产品发布会:搜狗与新华社合作开发、全球第一个全仿真智能虚拟主持人——“AI合成主播”正式亮相。

这让合成主播原型且作为现场主持人的邱浩不禁感慨:“一个真实的主播,站在现在这个地方来主持一个合成主播的发布会,而且还要向世人去宣告,这样一个合成主播有多么的强大,简直虐心啊!我觉得这需要非常强大的勇气!”

“AI合成主播”到底是什么?主播长什么样?

全球第一个全仿真智能合成主持人由搜狗与新华社合作开发。观众只要输入一句既有的新闻文本,屏幕上就会出现一位虚拟的新华社新闻主播,他不仅会用和真人一样的声音进行播报,连唇形、面部表情也能完全吻合。这样的视频效果,无论看上去还是听起来,都与现实中的新华社主播的本人播报没有太大差别。

主持人快下岗了?全球首个AI合成主播亮相!能全年24小时工作

据了解,在合成主播的开发过程中,搜狗公司的相关技术人员同新华社的新闻主播一同进行了各种探索尝试,在“搜狗分身”技术的支持下,通过人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术,并结合语音、图像等多模态信息进行联合建模训练。在现实应用中,只需要一位真人主播面对镜头录制播报1个小时的新闻,再通过“搜狗分身”技术,将真人主播提供视频和语音数据进行特征提取,这个过程就像提取人类的DNA一样,再通过语音合成、唇形合成以及深度学习等技术,使虚拟主播具备了和真人主播一样的播报能力。