导航菜单

科技向善,信息无障碍研究会联合腾讯优图发布AI手语翻译机

5月16日,在全球无障碍宣传日之际,信息无障碍研究会和腾讯Youtu实验室发布了“Youtu AI手语翻译”。这一克服人工智能手语识别的技术挑战致力于通过人工智能技术为听力障碍者建立一个无障碍的交流平台。

深圳市信息无障碍研究会秘书长华阳表示,腾讯优图提供的技术可以在一定程度上缓解听障人士的沟通障碍,为听障人士提供更好的服务。

危急情况服务,研究会加入腾讯成立“人工智能听力障碍联合项目团队”

“优图团队将继续拓展语料库,优化算法,进一步探索在机场、民政等公共服务领域的部署,提供无障碍沟通解决方案,为听力障碍人群的日常沟通提供便利。”腾讯杰出科学家贾佳亚教授说。

为了进一步接触听障群体,理解手语,优化数据和识别算法,腾讯优图实验室和深圳市信息无障碍研究会联合成立了人工智能手语识别联合项目团队。双方将在手语数据收集和产品算法优化的基础上进行长期深入的合作。通过与听力受损或手语用户的进一步接触,将扩大数据容量,改进数据规格,并努力促进后续产品和服务部署。

(信息无障碍研究协会和Youtu AI听力障碍联合项目组)

根据Youtu实验室人工智能手语识别项目组研究员杨兆阳的说法,Youtu AI手语翻译器使用普通摄像头作为手语采集设备,依靠高性能计算机进行后台操作。用户只需面对摄像头就可以完成手语表达,翻译器的屏幕界面可以快速将手语转换成文本,帮助听力受损和健康的人正常交流。未来,预计将在机场、高速铁路、民政窗口等公共场所部署应用程序,帮助建设信息无障碍城市。

(Youtu AI手语翻译界面)

克服手语识别问题,用自主开发的算法解决交流障碍

根据世界卫生组织的最新数据,目前世界上约有4.66亿人患有听力障碍,占世界人口的5%以上;据估计,到2050年,这一数字将达到9亿,世界上约十分之一的人口将因残疾而失聪。中国有7200万听力受损者,其中2700万人需要通过手语和其他方式交流。

尽管中国在信息无障碍领域的投资正在逐步增加,但听力受损人群的一些需求仍未得到满足,特别是在公共环境设施和服务经验方面。根据相关统计,我国只有大约1万人专门为听力受损者提供专业服务。大多数公共服务没有配备特殊设施。这些是听力受损者长期以来面临的迫切需求。

为了应对这一社会痛点,Youtu团队首次将计算机视觉人工智能技术应用于手语识别场景。此次发布的“优图人工手语翻译(Youtu AI Sign Language Interpreter)”产品使用普通摄像头和高性能电脑来识别听力受损人群的手语,并快速识别和翻译成文字。

腾讯优图研究员杨兆阳表示,手语翻译的核心技术是手语识别(SLR)。通过计算机算法,它可以自动区分手语表达中的各种手势、动作以及手势和动作之间的切换,最终将手语翻译成文字。一些团队以前曾探索过使用人工智能技术来缓解听力受损人群的交流障碍,但他们经常需要使用一些额外的设备或传感器,这不仅增加了使用门槛,而且不能保证复杂手语表达的识别率。此外,手语独特的地域性、复杂性和多样性使手语成为一种语言

这不是双方在人工智能无障碍建设方面的首次合作。2013年,研究会和腾讯等科技企业将共同建立信息无障碍产品联盟。腾讯一直在推动“谁也不能少”和“信息无障碍”概念的传播和落地。到目前为止,大多数产品,如QQ、QQ Space、微信、腾讯、腾讯新闻、应永宝和企鹅调频都已经针对无障碍用户进行了优化。

研究所一直致力于提供专业的信息无障碍解决方案。在与腾讯的合作中,腾讯的各种产品将从社会互动、娱乐和新闻等多个角度共同努力,为残疾人建设一个友好的信息社会。2018年12月3日,腾讯因在信息无障碍领域的杰出成就获得联合国教科文组织数字技术授权奖。

我们相信,在腾讯和其他企业、组织和个人的共同努力下,科技的无障碍边界必将迎来一个更加广阔的世界。