Study reveals what people see when they read lips
12 days ago
- #visemes
- #speech-perception
- #lip-reading
- 堪萨斯大学的新研究运用网络科学来探索唇读误差，聚焦于视觉特征（视素）而非声音。
- 一份约两万个英语单词的视觉图谱显示，人们常混淆外观相似的单词；约三分之一的单词至少与另一个单词外形相近。
- 误差并非随机发生，当视觉网络中相近的单词外形相似时，误差更易出现，这使得某些单词更难通过唇读识别。
- 研究发现表明，唇读准确率低于预期，误差通常仅偏离一两个视素。
- 应用包括通过追踪误差减少来改进唇读训练，以及通过整合视觉数据来增强人工智能转录系统（如Zoom）。
- 未来研究旨在探索机器学习应用及辅助言语理解的技术。