游戏传奇首页
游戏我的天下首页
最好看的新闻,最实用的信息
04月20日 16.9°C-18.7°C
澳元 : 人民币=4.65
悉尼
今日澳洲app下载
登录 注册

《狂飙》孟德海原台词到底是啥?看个剧还得会唇语?

2023-01-31 来源: 搜狐 原文链接 评论0条

这个春节,你《狂飙》了吗?

这部口碑好剧,却在昨天突然变成“乱飙”,剧情(罕见地)无法自圆其说。大量的后期配音,使得孟德海“说话和口型对不上”。

观众将剧情混乱归结于后期的剧本改动,并努力读唇语对口型,试图找回原本的走向。因为这关系着重要任务“孟德海”是白还是黑,是大义灭亲的好书记,还是黑社会的保护伞。

狂飙一下变乱飙,大家都猜起原剧情了|@七百里加急递煎饼/weibo

比如劝说女婿杨健自首这一段,配音为“必须要为自己犯过的错负责”,而口型更像“这也是没办法”……

孟德海你到底说了啥啊!|《狂飙》

读唇语,读的不止是唇

猜原剧情走向是唇读应用的新型场景。实际上,对于有听觉障碍的朋友来说,唇读是一种重要的交流方式。哪怕有助听器的帮助,视觉辅助也可以让他们“听”得更清楚。听力正常的人也常常会用到唇读——想一想,在嘈杂的餐馆里,为了听清楚别人说的话,你是不是也会不自觉地盯着对方看。

唇读要读的并不止是口唇,说话人的肌肉活动和面部表情也会提供许多信息;听者将这些视觉信息与大脑中储存的词语相联系和比较,从而理解说话人的语义。

说是“理解”,但在实际操作中却可能是“误解”,许多因素都会影响唇读的正确率。例如,以聋校学生为对象的几项研究发现,读出韵母比读出声母更容易;而对于/a/、/i/、/e/这样的不圆唇音,判断正确率则比/o/、/u/、/ü/这样的圆唇音更高。

仅仅判断单个声母或韵母已经很难了,研究显示准确率通常仅为50%~70%。实际场景中的应用更复杂:汉语里的4个声调,无法通过口唇形状判断;上下文的联系,需要读唇语的人靠语言理解能力和判断推理能力自行推测。

唇读是聋校教学的内容之一,需要的不仅是视觉感受能力和语言理解能力,还有培养判断推理能力;而且需要注意力高度集中才能完成。既然人工学习困难重重,那人工智能能不能助一臂之力呢?

AI读唇语

准确率高达93.4%?

在学唇语上,AI确实已经比普通人牛掰不少了。2016年11月,牛津大学训练了一个AI,叫Lipnet。Lipnet在唇读测试中达到了93.4%的准确度,远远把人类52.3%的成绩甩在身后;而且,它还能几乎实时地将无声视频处理成文本。

Lipnet的表现看起来很不错,但其实,它更像是一个只会一项指定动作的AI。训练Lipnet的数据集有严重的局限性,这个数据集里虽然有成千上万个短视频,但视频高度相似——都是统一由志愿者念的,每个视频只有3秒钟,连打光都差不多。更“作弊”的是,每个句子都遵循以下的模式:

命令+颜色+介词+字母+数字+副词

Place red at C zero again

Set blue by A four please

这样的傻瓜句型让AI能快速掌握规律。所以,即便测试的结果很不错,也有很多人不买帐。

仍在进化的唇读AI

立即找唇语翻译去!

参考文献

[2]Assael, Y. M., Shillingford, B., Whiteson, S., & De Freitas, N. (2016). Lipnet: End-to-end sentence-level lipreading. arXiv preprint arXiv:1611.01599.

[6]https://ai.sogou.com/product/lip_recognition/

https://en.wikipedia.org/wiki/Lip_reading

[10]雷江华, 鲍博. (2018). 我国听障学生唇读认知实验研究进展. 中国听力语言康复科学杂志, 16(3), 165-169.

[11]徐诚. (2013). 唇读研究回顾:从聋人到正常人. 华东师范大学学报(教育科学版), 31(1): 56-61.

作者:小毛巾,麦麦、Luna

编辑:Luna、刘可、小毛巾

一个AI

剧组要不你把原剧情泄露给我吧我一定不告诉别人

如有需要请联系sns@guokr.com

今日评论 网友评论仅供其表达个人看法,并不表明网站立场。
最新评论(0)
暂无评论


Copyright Media Today Group Pty Ltd.隐私条款联系我们商务合作加入我们

分享新闻电话: (02) 8999 8797

联系邮箱: info@sydneytoday.com 商业合作: business@sydneytoday.com网站地图

法律顾问:AHL法律 – 澳洲最大华人律师行新闻爆料:news@sydneytoday.com

友情链接: 华人找房 到家 今日支付Umall今日优选