腾讯优图AI手语翻译机落地医院,听障患者医院看病更方便了互联网

2019-10-29

[摘要]经过半年多的技术攻坚,结合对听障患者真实需求的洞察,不断完善医院细分场景的手语语料,最终实现AI手语翻译机在医院的试点落地。

腾讯科技讯 10月25日消息,近日,深圳市人民医院来了两位特殊的“志愿者”,听障患者只需面对“志愿者”完成手语表达,“志愿者”就能实时翻译成文字,并反馈给医院工作人员。在医院工作人员用语音回复后,又能把语音实时翻译成文字,反馈给听障患者,实现双向沟通。

10月25日,由腾讯优图实验室研发部署,与深圳市信息无障碍协会、深圳市聋人协会、腾讯公益联合发布的AI手语翻译机在深圳市人民医院率先试点落地,用两台普通的平板电脑,搭建起了听障患者和医护人员沟通的桥梁,希望在医院这一场景中为听障人士提供更好的服务。

今年5月16日,全球无障碍宣传日之际,腾讯优图正式对外公布了在手语识别算法上的突破。经过半年多的技术攻坚,结合对听障患者真实需求的洞察,不断完善医院细分场景的手语语料,最终实现AI手语翻译机在医院的试点落地。

手语实时翻译成文字,帮助听障患者缓解就医沟通障碍

在深圳市人民医院的一楼门诊台附近,优图AI手语翻译机引来了不少群众围观体验。

“人在生病的时候,心理比较脆弱。不清楚看病流程却不知道怎么求助、无法准确向医生描述症状等等综合原因,导致许多听障朋友生病了却不想去医院,就这么拖着。”腾讯优图手语识别负责人阳赵阳介绍道。过去的很长一段时间,他经常出入特殊学校、机构,与听障者、手语老师沟通交流,希望更深入的了解听障者在医院场景的需求、痛点。

有了腾讯优图的AI手语翻译机,就能把听障患者的手语翻译成文字,并在工作人员语音回复后实时翻译成文字,反馈给患者,在就医的多个环节中辅助双方完成沟通,为听障患者解决许多以前看病过程中遇到的窘迫,缓解沟通障碍。

(优图AI手语翻译机使用界面)

此前,为了提升手语翻译机的使用体验和识别效果,深圳市信息无障碍协会、深圳市聋人协会、腾讯公益邀请了多位听障志愿者到医院多次进行测试体验,亲自体验了优图AI手语翻译机使用全流程。

参与测试后,听障志愿者梁先生表示,以前每次来医院都很焦虑,担心表达不清楚自己的需求,AI手语翻译机能够在一定程度上缓解自己看病时的沟通障碍。

在多次测试中,固定句式测试近1000次,涵盖不同句子的多种表达,总体正确率达到80%以上。听障志愿者们均表示,优图AI手语翻译机识别准确率不错,能够帮助自己在医院进行沟通。

(听障志愿者在深圳市人民医院进行测试体验)

“以前遇到听障患者来看病,我们往往会花很多时间在沟通上,经常沟通半天却弄错了对方的意思,双方都很着急。”小钟是深圳市人民医院的一名护士,在帮助一位听障患者使用AI手语翻译机进行挂号后,她表示,“手语翻译机能提升我们和听障患者的沟通效率,让我们更好地为听障患者服务。”

践行科技向善,用科技助力社会无障碍建设

据北京听力协会2017年预估数据,我国听力障碍人士已达7200万,其中有2700万听障者需通过手语等方式进行沟通交流。尽管我国在信息无障碍建设上的投入逐渐增加,但听障人群在许多场景下的沟通障碍仍然亟待解决。

优图AI手语翻译机通过自研算法实现了对复杂手语表达的识别技术突破,该算法融合了先进的手势识别、动作识别和序列翻译等技术,考虑了手语的地域性和多样性表达,包含了不同的表达习惯和速度。AI手语翻译机在深圳市人民医院的试点落地,从医院场景着手,帮助听障人群缓解沟通障碍,让他们看病更方便。

目前AI手语翻译机仍会出现一些误识别的情况,腾讯优图仍在联合深圳市信息无障碍协会、深圳市聋人协会,持续对算法效果进行提升,力图为听障人群带来更好的服务,助力社会无障碍建设。“前沿技术的落地不是一件简单的事情,但它是我们不断在探求的方向”,阳赵阳表示,“这次的翻译机落地是一次扎实的尝试,需要提升的地方还有很多,我们希望陪伴它继续进步,也希望翻译机能够为听障患者带来实际的便利。”

科技是手段,向善是选择,科技发展助力社会信息无障碍建设。AI手语翻译机是腾讯在计算机视觉人工智能领域的又一重大技术突破,也是腾讯践行“科技向善”理念的又一体现。

实际上,这并不是腾讯在AI+无障碍建设上的首次尝试,腾讯一直在坚持推动“一个都不能少”和“信息无障碍”理念的传播与落地。从2009年起,腾讯在信息无障碍方面率展开探索,截至目前,旗下QQ、QQ空间、微信、腾讯网、腾讯新闻、应用宝、企鹅FM等大部分产品已针对障碍用户实现专门优化。腾讯旗下各类产品从社交、娱乐、新闻等多维度出发,共同努力,为障碍人士构建友好的信息社会。2018年12月3日,获得“联合国教科文组织数字技术增强残疾人权能奖”。

阅读延展

1
3