内容提要
英国初创公司Signapse开发了生成式AI手语翻译软件,将书面文本实时翻译为美国手语和英国手语。他们与辛辛那提/北肯塔基国际机场合作,在屏幕上投放手语翻译,提供欢迎、安全、出发、到达等信息。Signapse希望将服务拓展到教育等场景,并支持用户自定义虚拟手语翻译员的外观。其他公司如百度智能云曦灵和SLAIT也提供类似的手语产品。AI手语产品正在改变听障人士获取公共信息的方式,让手语成为数字世界的通用语言。
延伸解读
AI手语翻译的现状与局限
文章指出,AI手语产品仍处于补充阶段,无法完全替代真人翻译员。全球约7000万人使用手语,但Signapse目前仅覆盖美国和英国手语的少部分人,且场景有限。在美国,听障用户与手语翻译员的比例约为50比1,真人翻译严重不足。AI手语产品虽能弥补部分缺口,但覆盖范围小、垂直场景有限,且翻译质量参差不齐,仍需听障人士参与改进。
手语翻译的技术路径与数据挑战
Signapse基于大型手语数据集,利用生成对抗网络和深度学习创建虚拟手语翻译员,并与交通数据集成实现实时更新。然而,手语种类繁多,全球有300多种,数据收集和标注成本高。SLAIT因缺乏数据和资金,转而从手语教学切入。Google发起Kaggle竞赛,利用300多万个手指拼写字符改进识别模型。这些案例显示,数据是AI手语翻译发展的关键瓶颈。
从公共信息到个性化交互的拓展
AI手语翻译正从机场、车站等公共信息场景,向教育、网站、视频流媒体等线上场景延伸。Signapse希望拓展到教育领域,并支持用户自定义虚拟翻译员外观。百度智能云曦灵的平台也能满足医院、车站、银行等不同场景的快速翻译需求。这些拓展旨在让听障人士更主动地获取信息,提升参与感,但个性化服务仍处于早期阶段。
无障碍产品需要听障人士参与
文章强调,无障碍产品的开发需要听障人士的参与,以确保有效性和实用性。例如,SignLLM多语言手语生成模型的研究人员提醒外界不要夸大成果,演示视频并非模型直接输出,且听障专家指出翻译质量参差不齐、缺乏面部表情。这呼应了“没有我们的参与,就没有关于我们的决策”的理念。只有让听障用户共同完善产品,才能避免从健听人逻辑出发的误区。
Q&A
Signapse的AI手语翻译软件是如何工作的?
Signapse的AI手语翻译软件基于大型手语数据集,利用生成对抗网络(GAN)和深度学习技术,实时将书面文本翻译为美国和英国手语。
AI手语产品如何改善听障人士的生活?
AI手语产品增强了听障人士在公共场合的参与感,提升了他们获取信息的能力,从而改善了生活质量。
Signapse与哪些机构合作提供手语翻译服务?
Signapse与辛辛那提/北肯塔基国际机场合作,在机场提供手语翻译服务。
AI手语翻译产品的局限性是什么?
AI手语翻译产品仍处于补充阶段,无法完全替代真人翻译员,且目前仅覆盖美国和英国手语的少部分人。
有哪些公司也在开发手语翻译产品?
除了Signapse,百度智能云曦灵和SLAIT等公司也在开发手语翻译产品,满足不同场景的需求。
AI手语产品如何支持用户自定义翻译员?
Signapse希望未来的服务能够支持用户自定义虚拟手语翻译员的外观,以满足个性化需求。