AI合成突破!新华社联合搜狗推出两名AI主播
2018年11月12日 由 浅浅 发表
862948
0
在建社87周年之际,新华社联合搜狗公布了记者团队的最新成员:两名AI主播。运用最新AI技术,“克隆”出与真人主播拥有同样播报能力的“分身”。这不仅在全球AI合成领域实现了技术创新和突破,更是在新闻领域开创了实时音视频与AI真人形象合成的先河。
这两个主播,一个用英语说话,另一个用中文说话,但他们的声音,面部表情和嘴巴动作都是用深度学习技巧和动画合成的。
新华社表示,“AI主播已正式成为新华社报道团队的成员,他们将与其他主播合作,提供中英文的权威,及时,准确的新闻信息。”
新华社的英文和中文应用,电视网页和微信公众账号都能捕获AI主持的身影。搜狗正在为其提供AI背后的技术。
AI合成主播是通过提取真人主播新闻播报视频中的声音、唇形、表情动作等特征,运用语音、唇形、表情合成以及深度学习等技术联合建模训练而成。该项技术能够将所输入的中英文文本自动生成相应内容的视频,并确保视频中音频和表情、唇动保持自然一致,展现与真人主播无异的信息传达效果。
[video width="1280" height="720" mp4="https://www.atyun.com/uploadfile/2018/11/Xinhuas-first-English-AI-anchor-makes-debut.mp4"][/video]
新华社表示,它的AI可以传递与人类记者“相同”的新闻。但视频中,你非常清楚你正在观看一个非人类的主播,因为嘴巴的动作和面部表情并不像人类。但正如最近的研究表明的那样,操纵视频使图像说出你想要的东西,同时仍然看起来非常自然,也并不太难。
此外,新华社的AI可以全天候工作,因此新闻机构表示,它们可以提高生产效率并降低成本。