凭声音可以描绘出人脸 听起来似乎匪夷所思

2019-06-26 14:55
  至诚网(tech.zhicheng.com)6月26日讯

  仅凭声音就可以描绘出人脸,这听起来似乎匪夷所思。现在一个名为Speech2Face的自主智能学习系统已经将其变为现实。

凭声音描绘出人脸

  据麻省理工学院的研究人员称,这个系统实际上就是一个神经网络。他们搜集了来自YouTube等网站上的海量视频,而所有视频内容都是人在讲话。随后他们利用这些资料对这个能够自主智能学习的神经网络加以训练。

  通过训练,这个系统学习到了声音和面部特征的相关联系,掌握了讲话者的一些基本特征,例如年龄、性别、种族和音色等。

  报道称,自主智能学习系统能够利用声音与面部特征的关系,根据少量声音片段大致推测出一个从未见过的讲话者的面容。

  值得一提的是,该系统并不能准确还原一个讲话者的面容,而是只能根据学习到的基本特征大致模拟人脸图像。

  研究人员指出,这是因为该系统的训练方向就是捕捉与年龄、性别等特征相关的视觉特点,而这些特点属于多位讲话者的共性。在海量资料的基础上,该系统只有在从未见过的讲话者身上找到足够多的共性之后,才能大致模拟出一幅人脸图像。因此这幅图像无法做到精确还原讲话者的面容。

  此外,虽然该系统的资料库规模庞大,但毕竟无法涵盖全世界所有人,因此该系统模拟出来的图像仍需要进一步调整和完善。

  目前该系统面临的最大挑战就是如何给这个资料库扩容,进而使其描绘的讲话者面容更加接近原型,但这项任务绝非易事,仍需研究人员进一步努力。

相关推荐

科学家发现迄今最小恐龙 有约百颗牙齿比蜂鸟还小

中国空气中的二氧化氮含量显著下降 一定程度上与疫情相关

安徽黄山发现两个哺乳类新物种 分别是哪两种新物种?

相关阅读
拓展阅读
3月12日,中美加科学家团队在《自然》杂志上刊登了最新发现的或为史上最小恐龙(鸟类)的研究成果。团队发起人邢立达副教授向记者介绍,这一头骨化石显示该生物比蜂鸟小,有约百颗牙齿。
2020-03-12 18:24:02
美国航天局(NASA)和欧洲航天局(ESA)卫星监测到,中国各地空气中的二氧化氮含量明显减少,这在一定程度上和新冠肺炎疫情相关。
2020-03-05 12:53:32
科研人员近日在安徽黄山风景区发现的麝鼩(qú)属物种,经研究确认,为两种哺乳类新物种,分别命名为“安徽麝鼩”和“黄山小麝鼩”。
2020-03-03 14:44:36
3月,天象精彩。天文专家介绍,“月合毕宿五”“年度第二大满月”“三星会月”“水星西大距”“金星东大距”等天象将轮番上演。
2020-02-28 14:42:41
北京时间2月27日凌晨,国际科学期刊《科学·进展》在线发表了中国科学院国家天文台科研团队在月球深空探测领域取得的重大发现。
2020-02-27 10:56:00
快讯
热门文章
热点专题