腾讯联合深圳市信息无障碍研究会，发布优图AI手语翻译机

5月16日，全球无障碍宣传日之际，腾讯优图实验室宣布攻克AI手语识别技术挑战，联合深圳市信息无障碍研究会发布“优图AI手语翻译机”，致力于通过人工智能技术为听障人群搭建无障碍沟通平台。

据优图实验室AI手语识别项目组研究员阳赵阳介绍，优图AI手语翻译机以普通摄像头作为手语采集装置，依托高性能计算机进行后台运算，用户只需面对摄像头完成手语表达，翻译机屏幕界面就能快速把手语转换为文字，帮助听障人士和普通人进行正常交流，未来有望在机场、高铁、民政窗口等公共场所部署应用，助力信息无障碍城市建设。

这也是继本月初优图实验室宣布通过人工智能技术帮助警方寻回多名被拐超过10年儿童之后，腾讯践行“ 科技 向善”理念的又一体现，也是腾讯在计算机视觉人工智能领域的又一重大技术突破。

（优图AI手语翻译机界面）

攻克手语识别难题，自研算法解决沟通障碍

据世界卫生组织最新数据显示，目前全球约有4.66亿人患有残疾性听力损失，超过全世界人口的5%；据估计，到2050年这一数字将达到9亿，全球将有约十分之一的人出现残疾性听力损失。据北京听力协会2017年预估数据，国内残疾性听力障碍人士已达7200万。

虽然我国在信息无障碍领域的投入在逐渐增加，但听障人群的一些需求仍得不到满足，尤其在公共环境设施、服务体验等方面。据相关数据统计，我国目前致力于听障者专业服务的人士只有大约一万名，大部分公共服务并没有配备专门的便利设施，这些都是听障者长久以来面临的迫切需求。

针对这一社会痛点，优图团队首次将计算机视觉人工智能技术应用到手语识别场景，而此次发布的“优图AI手语翻译机”产品，通过一台搭载高性能计算机的终端，可以识别听障人士的手语，并快速识别翻译成文字。

据腾讯优图研究员阳赵阳介绍，手语翻译的核心技术是手语识别（SLR），通过计算机算法，自动区分手语表达中的各类手势、动作、手势和动作之间的切换，最后将手语翻译成为文字。此前也有一些团队探索人工智能技术在听障无障碍方面的技术探索，但往往需要借助于一些额外的设备或传感器，不仅增加了使用门槛并且无法对复杂手语表达的识别率。但受限于手语特有的地域性、复杂性和多样性，使得这些手语识别研究即使在深度学习的帮助下也依然存在很大的挑战，难以被实际应用。

（手语识别算法总体框架图）

此次优图AI手语翻译机产品，通过自研算法实现了对复杂手语表达的识别技术突破，参考了先进的手势识别、动作识别和序列翻译等技术，考虑了手语的地域性和多样性表达，包含了不同的表达习惯和速度。

据介绍，优图AI手语翻译机的数据集覆盖了近千句日常表达，900个常用词汇，同时对数据进行进一步的分析和归纳，是最大的中文手语识别数据集。与此同时，优图AI手语翻译机能够实现整句的识别和翻译，用户表达的时候可以连贯将整个句子表达完。也不需要设定特定的结束或起始动作，而是直接对用户的动作与否进行判断。

践行科技向善，腾讯携手无障碍协会攻坚场景服务

“优图团队将继续进行语料库拓展和算法优化，进一步探索在机场、民政等公共服务领域部署，提供无障碍沟通解决方案，方便听障人日常交流提供便利。”腾讯杰出科学家贾佳亚教授表示。

为进一步深入接触听障群体，了解手语和优化数据和识别算法，目前腾讯优图实验室已和深圳市信息无障碍研究会成立AI手语识别联合项目组，双方将基于手语数据采集、产品算法优化等展开长期深度的合作，通过与听障者或手语使用者进一步接触，扩充数据容量，完善数据规范，致力于推动后续的产品和服务部署。

深圳市信息无障碍研究会秘书长杨晔表示，腾讯优图提供的这项技术，可以在一定程度上缓解听障者的沟通障碍，为听障者提供更好的服务。

（优图和深圳信息无障碍研究会AI听障无障碍联合项目组）

实际上，这并不是腾讯在AI+无障碍建设上的首次尝试，腾讯一直在坚持推动“一个都不能少”和“信息无障碍”理念的传播与落地。从2009年起，腾讯在信息无障碍方面率展开探索，截至目前，旗下QQ、QQ空间、 微信 、腾讯网、腾讯新闻、应用宝、企鹅FM等大部分产品已针对障碍用户实现专门优化。腾讯旗下各类产品从 社交 、娱乐、新闻等多维度出发，共同努力，为障碍人士构建友好的信息社会。2018年12月3日，获得“联合国教科文组织数字技术增强残疾人权能奖”。

根据世界卫生组织的调查，全世界有超过十亿人生活在因残障引起的不便中，也就是说，地球上每七个人中就约有一人需要无障碍设施的帮助。为了让更多的人关注到这群残障人士，每年五月的第三个星期四也被设立为了全球无障碍宣传日。