韩国的研究人员开发了一种创新的可穿戴系统,该系统通过佩戴七枚智能戒指,捕捉手指和手部动作,实现美国手语(ASL)和国际手语(ISL)的实时翻译为文本。该系统旨在消除聋哑人与非手语者之间的沟通障碍,无需依赖人工翻译。

根据发表在《Science Advances》期刊上的研究,这套系统在测试中准确识别了100个ASL和ISL单词。它对未曾接触过的用户同样表现出良好的识别能力,且无需为每位用户重新校准。由于系统能够顺序检测单词,因此无需额外的语法训练即可实现句子级别的翻译。

ASL和ISL是全球超过7200万聋哑及听力障碍人士的日常交流语言,但大多数听力正常的人对这些手语知之甚少,甚至只掌握基础词汇。这种沟通鸿沟使得在餐厅点餐或寻求帮助等日常场景中交流变得困难。

现有的手语翻译设备多依赖笨重的手套,这不仅影响手部自然动作,还可能令佩戴者感到不适,限制了实际应用。基于摄像头的技术虽然在受控环境中表现良好,但受限于摄像头的视线范围和安装位置。

为解决这些问题,研究团队设计了适用于每根手指的智能戒指,能够精准捕捉手指位置和动作,同时保证手部自然灵活。该系统既能识别动态手势,如“跳舞”、“飞翔”和“太阳”,也能识别静态手势,如“我”和“你”。

研究人员在论文中指出,这项技术有望实现面向未知用户的无障碍公共翻译系统和日常辅助界面。

参与该研究的机构包括延世大学、韩国外国语大学和韩国科学技术研究院等。虽然该技术仍处于实验阶段,但研究人员认为它有潜力显著缓解沟通困难。此外,该技术的核心理念也可应用于虚拟现实(VR)和增强现实(AR)等领域的控制系统。

研究团队表示:“除了手语翻译,基于无线连接的戒指式模块化架构还可拓展至其他手势驱动的应用,如虚拟或增强现实控制、无接触设备界面以及需要精细手部动作追踪的康复监测系统。”