“AI合成主播”



11月7日,在第五届世界互联网大会上,有这样一场发布会,让发布会的主持人倍感压力和“虐心”。




当天,搜狗公司CEO王小川、新华社副社长刘思扬等嘉宾和著名主持人邱浩联合带来了一场跨界产品发布会:搜狗与新华社合作开发、全球第一个全仿真智能虚拟主持人——“AI合成主播”正式亮相。



这让合成主播原型且作为现场主持人的邱浩不禁感慨:“一个真实的主播,站在现在这个地方来主持一个虚拟主播的发布会,而且还要向世人去宣告,这样一个虚拟主播有多么的强大,简直虐心啊!我觉得这需要非常强大的勇气!”



“AI合成主播”到底是什么?



视频感受一下


全球第一个全仿真智能合成主持人由搜狗与新华社合作开发。



观众只要输入一句既有的新闻文本,屏幕上就会出现一位合成的新华社新闻主播,他不仅会用和真人一样的声音进行播报,连唇形、面部表情也能全然吻合。



这样的视频效果,无论看上去还是听起来,都与现实中的新华社主播的本人播报没有太大差别。


全球首个AI合成主播。


据了解,在合成主播的开发过程中,搜狗公司的相关技术人员同新华社的新闻主播一同进行了各种探索尝试,在“搜狗分身”技术的支持下,通过人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术,并结合语音、图像等多模态信息进行联合建模训练后,“AI合成主播”典礼诞生。



什么是“搜狗分身”技术?


据搜狗公司智能语音事业部总经理王砚峰介绍,“搜狗分身”技术是搜狗人工智能的核心技术之一,诞生于搜狗“自然交互+知识计算”这一人工智能理念之下。该技术能够利用搜狗的AI能力,从图像表情,声音语言习惯,逻辑推理等层面对AI进行拟人化训练,然后克隆制造人类的AI分身,进而帮助人类提高信息表达和传递的效率。




以“AI合成主播”为例,该产品就创造性地使用新华社中、英文主播的真人形象,配合“搜狗分身”的语音、合成等技术模拟真人播报画面,使大众享受到逼真度极高的图像效果。


这种播报形式,突破了以往语音图像合成领域中,只能单纯创造虚拟形象,并配合语音输出唇部效果的约束,极大地提高了观众信息获取的真实度。同时,利用“搜狗分身”技术,“AI合成主播”还能实时高效地输出音视频合成效果。


在“搜狗分身”技术的支持下,使用者通过文字键入、语音输入、自然语言处理等多种方式输入文本后,将获得实时的播报视频。这种操作方式将极大减少新闻媒体在后期制作的各项成本,让新闻视频的制作效率有了极大的提高。



据介绍,早在2012 年,搜狗就开始了对语音技术研究的探索,并逐步发展为中国最大的语音识别引擎,目前,搜狗日均语音请求达5亿次,经过多年的技术沉淀和数据积累,已具备多语种、多音色的语音合成能力,并能实现个性化语音合成和情感迁移。



制作AI合成主播的技术团队,曾多次在机器视觉国际顶级赛事IEEE CVPR WAD、Pascal VOC、Mega Face以及语音合成领域最具权威性的Blizzard Challenge赛事上斩获冠军。


王小川:成为个人智能好助手


搜狗公司CEO王小川在发布会中发言。


搜狗公司CEO王小川在接受中国青年网记者采访时表示,合成主播只是“搜狗分身”技术的一个应用分支,除此之外,技术未来还将在娱乐、医疗健康、教育、法律等多个领域提供个性化的内容。“比如我们有时会收到大量的祝福短信,一条条去回复,如果要求回复内容还不一样,这样就很费时费力。那么把‘分身’技术用在这里,去构建一个虚拟的‘你’,去根据不同的信息进行回复,这将大大提高效率。通过技术发展,相信这个‘你’还能做更多事,我们的愿景是让产品成为个人生活的好助手、好帮手。



网友们纷纷赶来围观,并发表自己的观点:


@mei红梅 : 今后很多产业都将被机器人所代替

@扭扭波浪 : 这个技术进行联合建模训练和生成与真人一般无二的AI分身模型。

@小灰灰爱吃吃吃 : 第五届世界互联网在浙江乌镇拉开帷幕。

@为你变乖 : 这个声音这个表情都做得挺丰富的啦,与真人无异

@我是王薇薇呀 : 科技发展,让未来溢满无限的可能

@买辣椒也用卷呢 : 积极的拥抱新事物,AI是未来的发展趋势

@刘利花 : 以后我们的生活将会变得很轻松

@有你的归宿 : 现在科技都这么发达了吗?太厉害了了

@仄突仗腾 : 搜狗的黑科技,已经展现在了我们的面前。

@moon玥一 : 嘴唇有一点点跟不上语速呢

@懂比爱关键H : 让我们见识到了搜狗的快速发展。

@张晓东丨 : 这样的科技实在是太炫了。

@开着奔驰追蜗牛 : 不得不说,技术改变人类的生活

@啊哲哲哲吖 : 高科技越来越值得让人期待了

@叶落花开 : 满满的都是黑科技,简直太强大

@盐须神探 : 现在AI技术真的是厉害


看看网友的评论,才明白什么叫做段子手在民间,评论也是门技术活啊!


问题来了 | 假如你有一个AI智能虚拟分身,你最想让TA做什么?




资料来源

中国青年网、新京报等


以“AI合成主播”为例,该产品就创造性地使用新华社中、英文主播的真人形象,配合“搜狗分身”的语音、合成等技术模拟真人播报画面,使大众享受到逼真度奇高的图像效果。这种播报形式,突破了以往语音图像合成领域中,只能纯粹创造虚拟形象,并配合语音输出唇部效果的约束,极大地提高了观众信息获取的真实度。


发布     👍 0 举报 写留言 🖊   
✋热门推荐
  • 今天也是爱你的一天呀[心]今天小烦 所以奖励自己大开吃戒 由此吃了榴莲千层 超级多榴莲肉 我满足了!近几年只吃过一次真实的榴莲 是五月的时候kiki晚修给我的榴
  • #苍兰诀一周安利打卡#[爱你]#苍兰诀n刷计划# #n刷苍兰诀的理由# “你是月尊,我是仙子,我们原来永远都不可能在一起,既然做了这个选择,我们就要为此付出代价
  • 《回家吧,“猫”》2018年6月23有时候偶尔想起路灯下的一个人曾经有两个影子眷恋着回家的路孤身只影了许久有时候太想有时候太忙……我们一起养大的猫它前几天上了别
  • 【节目预告】天津经济广播今天的节目预告:中午11点播出的《消费新主张》节目,为您安排固定栏目“消费维权帮你办”教您擦亮双眼,指导您的消费,欢迎收听和互动;中午1
  • #每日一善##每日一善[超话]##每日一善[超话]# 慈善是有同情心的人们之间的互助行为,慈善是高尚人格的真实标记,滴水穿坚石,爱心美天下,礼发于诚,声发于心,
  • 表活脱脂力和刺激度高的话,这些优质的添加物其实也无法感受到,等于白加。这样的表活搭配实在是不合格的,尤其还是沙龙品,拥有着超高的脱脂力和刺激度。
  • (有可能会延长)之前俄方减流60%已经令欧洲坐立下安了,搞得德国要准备启动煤电,法国要增加核电布置。供气减少这么多天都过去了,德国似乎还挺得住,俄罗斯以天然气作
  • 拿新升级的源力精华2.0版来说,在前作已经在微生物屏障、脂质屏障、基底膜乃至日常的舒缓抗炎等方面做得相当完善的前提下,它居然还能结合前沿的成分或科技,看到消费
  • #张艺兴[超话]##歌名造句大赛# 希望你遇见的人 能让你重新做回小朋友你不用再费力识破别人的面罩也不用扮演微微笑招手的joker你不用重复地解释是首情歌还是首
  • 放烤箱里烤过再吃就光闻着香味就口水直流了[馋嘴]要是按99元的话还真确实有点贵,有了券后真心觉得合算#在这里输入你想要说的话题# 好吃【抢券口令】 ¥AAdts
  • ”#李承铉改掉想太多后变舒服了# 或许,有很多误会都是从“过度分析”开始[思考]薛喆阳因为想太多而误会了王秋怡的本意,对此,李承铉表示:很多时候思前想后想的太多
  • 每个公民都有保护和监督环境的义务和权利,欢迎广大农民朋友都能自觉地参与到秸秆禁烧的行动中来,自觉遵守法律规定,有效遏制污染大气环境的违法行为发生。对发现有露天焚
  • #清风计划#二甲双胍,降糖,抗癌等作用,已经在过去给我们太多惊喜了!#献血##O型血# 前两次因为身体因素错过献血时机,今天顶着31度太阳兴奋跑去献血,已经完成
  • 】#诚信广东# 明明没有网购却莫名收到快递包裹,到付邮费后,打开一看里面全是“垃圾”。#诚信,我们的核心价值观##王俊凯周边中转站[超话]#无语了这种人直接跑路
  • 如果小可爱们想染头发,但是不喜欢太张扬的颜色,那么这款颜色也是一个不错的选择。因为它是百搭款的,而且不挑人,低调又简约,颜色超自然。
  • 感觉以前对他的很多事情感到抱歉,不过也没机会说了捏#A股3000点关口# 【李大霄:未来中国股市将在3000点地平线冉冉升起 未来3000点之下将成为美好回忆
  • 然后信心满满想带着萌新溜达一圈,结果她牵着牵着就自己跑掉,我传过去找人,刚看到人她就回遇境了……啊……[跪了][跪了][跪了]孩子人傻了,是我太菜了还是太丑了[
  • #柳智敏# 柳智敏手握【五代最多】支百万直拍的真·五直一门面的直拍为何如此诱人特工白蛇清纯欲滴微醺白鸢尾英姿飒爽刀切风信一战成名⚔️哥谭夜魔女蛊惑人心你可以永远
  • 即日起至7月31日,全区范围内,将陆续开展2020年宁夏“双品网购节”、中国银联“重振引擎”助商惠民计划、银川市“释放消费潜力 促进消费增长”活动、“乐购石嘴山
  • 若合时来,离当已灭,云何觉离:再次提醒,这个触觉是第一念直觉,当感觉到——哎呀,手这么凉啊——这个时候已经变成意识了,就不是第一念直觉了。当知是觉,非离合来,