Suvana: An Integrated Platform for Two-Way Deaf–Hearing Communication in Sri Lankan Sign Language
本文介绍了 Suvana，这是一个用于斯里兰卡手语的集成平台，它统一了四个不同的组件以实现双向通信与学习，同时透明地解决了其在当前评估中存在的技术集成挑战、性能限制以及聋人验证缺失的关键问题。
原始论文采用 CC BY 4.0 许可（https://creativecommons.org/licenses/by/4.0/）。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性，请参阅原始论文。 阅读完整免责声明
在世界许多地方，沟通是一种在能够听见的人与不能听见的人之间自然发生的、共享且流动的交换。但对于斯里兰卡的聋人社区而言，这种交换往往因资源的匮乏而被阻断。由于缺乏专业的翻译人员来弥合差距，且该国尚未形成一个所有人都能认可的、完全标准化的手语版本，这种情况变得更加严峻。尽管技术在辅助沟通方面取得了巨大进步，但大多数工具都是为美国手语（ASL）构建的，导致像斯里兰卡手语这样的本土语言在开发者眼中被忽视了。这造成了一种局面：那些最需要这些工具的人却无法获得它们，而现有的技术也往往无法理解斯里兰卡人通过双手和面部表情表达自身的独特方式。
一位研究人员致力于通过一个名为 Suvana 的新数字平台来填补这一空白。研究者并没有试图从头开始构建一个庞大的单一应用程序，而是将四个分别开发的软件工具缝合在一起，形成了一个无缝的整体体验。其目标并非声称自己已经彻底解决了沟通障碍的问题，而是为了证明这些不同的组件可以作为一个单一产品协同工作。该平台包含一个能将手势转化为口语僧罗语（Sinhala）的工具，一个能将口语僧罗语转换为数字虚拟人回传手势的功能，一个能提醒用户注意汽车鸣笛或玻璃破碎等重要声音的移动应用，以及一个面向希望学习该语言的有声人士的练习导师。这项项目的显著之处不仅在于这些工具的结合，更在于研究者在报告其成就时所表现出的诚实，或许更重要的是，他们对于自己尚未证明的部分所持有的坦诚态度。
这项工作的最重要发现来自于那个旨在帮助学习者练习手势并对其表现提供反馈的练习导师工具。研究者构建了一个系统，将学习者的手部动作与一名熟练手语者的参考视频进行对比。为此，他们使用了一种能够对齐两个动作序列在时间上的方法，允许速度上的差异，从而确保一个虽然缓慢但正确的动作不会因为速度慢而被扣分。然而，在测试过程中，他们发现这项技术存在一个关键的局限性。他们发现，有些完全不同的手势在计算机看来可能极其相似，而两个人在正确执行同一个手势时，表现出的样子却可能大相径庭。
因此，研究者意识到，如果计算机事先不知道使用者应该做哪个手势，那么该系统就无法安全地去猜测使用者正在做出的手势。如果系统尝试识别一个未知的动作，它很可能会出错，因为两个不同手势之间的“距离”有时甚至比同一个手势两次正确尝试之间的“距离”还要小。相反，该系统的设计逻辑是：学习者被要求练习一个特定的手势，而计算机仅仅是评估他们在执行该特定手势时的表现如何。这种方法避免了猜错单词的陷阱。研究者测量了系统区分正确尝试与错误尝试的能力，发现它能够以显著优于随机概率的准确度来辨别两者，尽管仍远非完美。
研究者对于关于平台其他部分的陈述也非常谨慎。对于将手势转化为语音的工具，他们指出，当签名者与计算机训练时的签名者相同时，系统表现良好，但他们并未声称该系统适用于任何人。他们明确表示，由于数据有限，目前还无法确定该系统是否适用于从未见过的陌生人。同样，对于将语音转化为签名虚拟人的部分，他们明确说明该数字角色的动作是由一名听力正常的学生创作的，尚未经过聋人签名者的校验。他们将这个虚拟人呈现为一个展示技术如何运作的演示，而非一种经过验证的沟通方式，并承认如果没有聋人社区的投入，他们无法确定这些手势是否真正可理解。
论文中最核心的部分在于作者对自己在这项项目中所扮演角色的描述。四位研究人员全部都是听力正常的人，这意味着他们并不具备聋人的生活经验。他们公开承认，自己缺乏判断所构建系统对于目标受众是否真正有用或可接受的专业能力与文化背景。他们指出，在无障碍技术领域，听力正常的研究者在缺乏聋人社区充分参与的情况下构建工具是一种普遍现象，这种做法可能导致产品偏离初衷。他们将目前的工作描述为迈向解决方案的一步，但强调下一步必须让聋人签名者直接参与其中。这意味着需要使用聋人教师录制的新的参考视频，并由他们来验证系统给出的反馈。
研究者总结道，虽然他们已成功将这四个工具整合进一个平台并将评分系统基于真实数据进行了校准，但这项工作远未完成。他们已经根据一组录制好的视频测量了系统的表现，但尚未测量它在真实学习者身上的表现，也尚未测试它在实际教学中的效果。他们还没有在多样化的签名者群体中测试该系统，也没有通过聋人社区来验证其内容。他们的发现为当前技术所能达到的高度以及尚不明确的领域绘制了一张清晰的地图。他们认为，未来的路径在于超越单纯的技术构建，转而确保那些将要使用它的人能够引导其发展过程。在此之前，该系统仍然是一个极具前景的原型，而非完整的解决方案；研究者也明确表示，只有当聋人签名者参与到每一个阶段的过程中时，这项工作的真正考验才会到来。
您所在领域的论文太多了？
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要，使用您的语言。