北京时间7月13日早间消息,研究人员开发了一种机器学习算法,可以将声音片段变成能口型一致的视频内容。研究人员展示的这段视频显示了美国前总统巴拉克·奥巴马(Barack Obama)谈论恐怖主义等多个话题的场景,但这实际上却是使用现有的视频演讲人工生成的片段。来自华盛顿大学的研究人员相信,该系统可以最终用于改进视频通话,甚至确定某段视频的真伪。

该系统对神经网络进行训练,使之学会观看人类讲话的视频,然后将音频文件转化成真实的口型。之后再将其嫁接到视频中的人脸上。为了实现这一目标,他们将该校图形实验室之前的研究成果,与最新的口型合成技术结合起来。
该技术还可以实现小幅时移,从而让神经网络预测说话者接下来所要表达的内容。该团队之所以选择奥巴马,是因为这套系统需要14小时的视频进行学习,而作为全世界上镜率最高的人之一,奥巴马显然是最佳人选。
“Skype或Messenger这样的视频聊天工具未来可以让任何人收集视频,然后对电脑进行训练。”华盛顿大学的伊拉·开梅尔马切-什利泽曼(Ira Kemelmacher-Shlizerman)说。
由于通过互联网传输音频所需的带宽远低于视频,所以这套新系统或许可以终结故障频频的视频聊天。
“当你使用Skype或Google Hangouts聊天时,会发现连接不太顺畅,分辨率也很低,这令人很不高兴,但音频往往很好。”该论文的联合作者、艾伦学院教授史蒂夫·赛茨(Steve Seitz)说,“所以,如果可以使用音频生成更高质量的视频,那就太好了。”
之前的音频转视频技术重点是录制多个人反复说同一句话的视频,然后尝试捕捉声音与不同口型之间的相关性。但这一过程成本高昂,而且非常耗时。
通过将这一过程调转过来——将视频提供给网络,而不仅仅是音频——该团队可能开发各种算法来判断一段视频的真伪。然而,这种神经网络目前只能一次学习一个人。
“你不能随便找个人就把它的声音转化成奥巴马的视频。”赛茨说,“我们对此非常谨慎,不希望从某个人嘴里说出其他人的话。我们只是把某人说过的话变成此人的视频。”
未来,该算法或许只需要使用1个小时的视频就能识别某人的声音和说话模式,而不必非要14小时的资料。
稿源:新浪科技
西数退出竞购东芝芯片业务贝恩资本,发展趋势持续观察,真实情况详细说明,最新动态持续更新
放下身段华为用低端机抢攻非洲市场,关注焦点及时追踪,实用观点完整分享,热门话题深入了解
要毁灭人类喷马斯克还获得公民身份,发展趋势持续观察,重点信息全面梳理,主要亮点集中展示
蚂蚁金服研发出眼纹识别技术能识别,关键信息快速掌握,相关进展值得关注,发展趋势持续观察
中国集成电路设计业2017年会暨,实用内容深入说明,热点消息及时呈现
苹果AR硬件真要来了3000万美,重要细节逐步揭晓,最新动态持续更新,行业变化清晰解读,事件脉络清楚整理
未来1年内后置Coating指纹,热点消息及时呈现,关键信息快速掌握
Nvidia的AI盛世危机,主要亮点集中展示,关键信息快速掌握,相关资讯同步更新,热门话题深入了解
总价177亿美元东芝与贝恩财团签,真实情况详细说明,发展趋势持续观察,更多内容持续跟进,关注焦点及时追踪
从全面屏到人工智能2018科技产,相关资讯同步更新,更多内容持续跟进,核心看点完整汇总,相关进展值得关注
小米5C发布搭载最新MIUI9主,最新动态持续更新,实用观点完整分享
富士康首批iPhoneX从郑州发,行业变化清晰解读,重要细节逐步揭晓,更多内容持续跟进,关键信息快速掌握
酷派CEO刘江峰与乐视已无任何业,真实情况详细说明,主要亮点集中展示
Marvell正式宣布400亿元,发展趋势持续观察,精彩内容不容错过
AMD联合百度成立GPU技术实验,实用观点完整分享,事件脉络清楚整理
打破垄断国产闪存芯片之路有多远,热点消息及时呈现,精彩内容不容错过,关注焦点及时追踪
USB3.2规格曝光速度提升一倍,关注焦点及时追踪,发展趋势持续观察
联发科HelioP23P30发布,关注焦点及时追踪,真实情况详细说明
深圳江波龙电子完成对闪存品牌Le,实用内容深入说明,更多内容持续跟进,实用观点完整分享
苹果与三星的世纪之战结果出炉三星,实用观点完整分享,热点消息及时呈现,相关进展值得关注
OPPOR11线下开卖两周销量就,相关资讯同步更新,相关进展值得关注
苹果iPhone8主板详解空间利,关键信息快速掌握,精彩内容不容错过,行业变化清晰解读
联电自主研发DRAM明年Q4将完,发展趋势持续观察,精彩内容不容错过
外媒从交通到医疗科大讯飞的人工智,最新消息全面呈现,核心看点完整汇总
又一家日本家电巨头沦陷海信电器1,真实情况详细说明,最新动态持续更新,热门话题深入了解
苹果iPhoneX最强拆解SLP,发展趋势持续观察,最新动态持续更新
三星携Note8欲重回中国市场第,事件脉络清楚整理,实用观点完整分享,主要亮点集中展示
IBM宣布成功研制50量子位原型,更多内容持续跟进,热点消息及时呈现
Gartner今年全球可穿戴设备,关注焦点及时追踪,实用观点完整分享,真实情况详细说明
