首页> 外文会议>日本音響学会;日本音響学会研究発表会 >Lip reading のためのクロスモーダルTeacher-Student 学習
【24h】

Lip reading のためのクロスモーダルTeacher-Student 学習

机译:跨模式师生学习唇读

获取原文

摘要

人間は発話内容を理解する際,種々の情報を統合的に利用している.音声が聞き取り難い場合,発話者の顔,特に唇の動きに注目して発話内容を理解しようとし,逆に,唇の動きと音声が不一致の場合,唇の動きに影響されて発話内容を誤って理解してしまうこともある.これは,McGurk effect (マガーク効果) と呼ばれ,音韻知覚が音声の聴覚情報のみで決まるのではなく,唇の動きといった視覚情報からも影響を受けることが報告されている.このように人間による発話内容の理解には,唇の画像と音声の情報の統合的利用が極めて重要である.
机译:人们在理解话语内容时会整合各种信息 它用作目标。如果很难听见声音,请说 通过注意人脸(尤其是嘴唇)的运动来理解发声的内容 如果嘴唇的运动和声音不匹配,则嘴唇 我受到运动的影响 可能会发生。这就是麦格克效应 语音感知仅由语音的听觉信息确定。 它也受到视觉信息的影响,例如嘴唇运动 据悉已收到。像这样的人 要了解发话的内容 的综合使用非常重要。

著录项

相似文献

  • 外文文献
  • 中文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号