ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

科技向善助力无障碍沟通,腾讯优图发布AI手语翻译机

时间:2019-05-16 14:07:57来源:互联网编辑:星辉

5月16日,全球无障碍宣传日之际,腾讯优图实验室宣布攻克AI手语识别技术挑战,联合深圳市信息无障碍研究会发布“优图AI手语翻译机”,致力于通过人工智能技术为听障人群搭建无障碍沟通平台。

据优图实验室AI手语识别项目组研究员阳赵阳介绍,优图AI手语翻译机以普通摄像头作为手语采集装置,依托高性能计算机进行后台运算,用户只需面对摄像头完成手语表达,翻译机屏幕界面就能快速把手语转换为文字,帮助听障人士和普通人进行正常交流,未来有望在机场、高铁、民政窗口等公共场所部署应用,助力信息无障碍城市建设。

这也是继本月初优图实验室宣布通过人工智能技术帮助警方寻回多名被拐超过10年儿童之后,腾讯践行“科技向善”理念的又一体现,也是腾讯在计算机视觉人工智能领域的又一重大技术突破。

图片1.jpg

(优图AI手语翻译机界面)

攻克手语识别难题,自研算法解决沟通障碍

据世界卫生组织最新数据显示,目前全球约有4.66亿人患有残疾性听力损失,超过全世界人口的5%;据估计,到2050年这一数字将达到9亿,全球将有约十分之一的人出现残疾性听力损失。据北京听力协会2017年预估数据,国内残疾性听力障碍人士已达7200万。

虽然我国在信息无障碍领域的投入在逐渐增加,但听障人群的一些需求仍得不到满足,尤其在公共环境设施、服务体验等方面。据相关数据统计,我国目前致力于听障者专业服务的人士只有大约一万名,大部分公共服务并没有配备专门的便利设施,这些都是听障者长久以来面临的迫切需求。

针对这一社会痛点,优图团队首次将计算机视觉人工智能技术应用到手语识别场景,而此次发布的“优图AI手语翻译机”产品,通过一台搭载高性能计算机的终端,可以识别听障人士的手语,并快速识别翻译成文字。

据腾讯优图研究员阳赵阳介绍,手语翻译的核心技术是手语识别(SLR),通过计算机算法,自动区分手语表达中的各类手势、动作、手势和动作之间的切换,最后将手语翻译成为文字。此前也有一些团队探索人工智能技术在听障无障碍方面的技术探索,但往往需要借助于一些额外的设备或传感器,不仅增加了使用门槛并且无法对复杂手语表达的识别率。但受限于手语特有的地域性、复杂性和多样性,使得这些手语识别研究即使在深度学习的帮助下也依然存在很大的挑战,难以被实际应用。

图片2.jpg

(手语识别算法总体框架图)

此次优图AI手语翻译机产品,通过自研算法实现了对复杂手语表达的识别技术突破,参考了先进的手势识别、动作识别和序列翻译等技术,考虑了手语的地域性和多样性表达,包含了不同的表达习惯和速度。

据介绍,优图AI手语翻译机的数据集覆盖了近千句日常表达,900个常用词汇,同时对数据进行进一步的分析和归纳,是最大的中文手语识别数据集。与此同时,优图AI手语翻译机能够实现整句的识别和翻译,用户表达的时候可以连贯将整个句子表达完。也不需要设定特定的结束或起始动作,而是直接对用户的动作与否进行判断。

践行科技向善,腾讯携手无障碍协会攻坚场景服务

“优图团队将继续进行语料库拓展和算法优化,进一步探索在机场、民政等公共服务领域部署,提供无障碍沟通解决方案,方便听障人日常交流提供便利。”腾讯杰出科学家贾佳亚教授表示。

为进一步深入接触听障群体,了解手语和优化数据和识别算法,目前腾讯优图实验室已和深圳市信息无障碍研究会成立AI手语识别联合项目组,双方将基于手语数据采集、产品算法优化等展开长期深度的合作,通过与听障者或手语使用者进一步接触,扩充数据容量,完善数据规范,致力于推动后续的产品和服务部署。

深圳市信息无障碍研究会秘书长杨晔表示,腾讯优图提供的这项技术,可以在一定程度上缓解听障者的沟通障碍,为听障者提供更好的服务。

图片3.jpg

(优图和深圳信息无障碍研究会AI听障无障碍联合项目组)

实际上,这并不是腾讯在AI+无障碍建设上的首次尝试,腾讯一直在坚持推动“一个都不能少”和“信息无障碍”理念的传播与落地。从2009年起,腾讯在信息无障碍方面率展开探索,截至目前,旗下QQ、QQ空间、微信、腾讯网、腾讯新闻、应用宝、企鹅FM等大部分产品已针对障碍用户实现专门优化。腾讯旗下各类产品从社交、娱乐、新闻等多维度出发,共同努力,为障碍人士构建友好的信息社会。2018年12月3日,获得“联合国教科文组织数字技术增强残疾人权能奖”。

根据世界卫生组织的调查,全世界有超过十亿人生活在因残障引起的不便中,也就是说,地球上每七个人中就约有一人需要无障碍设施的帮助。为了让更多的人关注到这群残障人士,每年五月的第三个星期四也被设立为了全球无障碍宣传日。

更多热门内容
摩托罗拉Edge 50 Ultra配备1.5K OLED屏和125W快充
【ITBEAR科技资讯】4月13日消息,今天知名博主@数码闲聊站曝光了摩托罗拉即将发布的新款手机——Edge 50 Ultra的详细规格参数。这款手机预计将配备顶级的骁龙8S Gen3处理器,展现出强大的性能。摩托罗拉Edge 50 Ultra在设计上采用了金属中框与玻璃机身的组合,不仅保证

2024-04-13

5月初大升级:三星Galaxy AI适配S22/S21,One UI 6.1来袭
【ITBEAR科技资讯】4月13日消息,近日,三星电子在其韩国社区宣布,将会为Galaxy S22、S21等系列机型推送One UI 6.1更新,此次更新将带来Galaxy AI的部分功能。更新的时间定于5月初,但国行版的具体推送时间尚未公布。这次更新的覆盖范围相当广泛,不仅包括Galaxy S21、

2024-04-13

谷歌Pixel 8a全新渲染图流出:四色机身加双摄,设计感十足
【ITBEAR科技资讯】4月13日消息,随着Google I/O开发者大会的日益临近,科技爱好者们的焦点逐渐聚集在了谷歌即将推出的新品Pixel 8a系列上。Pixel 7a的成功发布与热销无疑为这款新品奠定了坚实的基础,而现在,我们有幸得以一窥Pixel 8a的初步信息。根据外媒AndroidHead

2024-04-13

保护未成年,英国拟禁售智能手机给16岁以下人群
【ITBEAR科技资讯】4月12日消息,为了应对青少年过度使用手机的问题,英国正计划立法禁止向16岁以下的未成年人出售智能手机。这一措施获得了大多数英国家长的支持,被视为是遏制青少年沉迷手机的有效手段。今年2月,英国政府已经发布了关于在学校中使用智能手机的官方指

2024-04-12

荣耀Magic6升级MagicOS 8.0.0.126,智能识别通知内容引领新体验
【ITBEAR科技资讯】4月12日消息,荣耀Magic6系列手机近日获得了MagicOS 8.0.0.126版本的更新。这次更新中引入了一项名为“智能显示通知内容”的功能,该功能在保护用户隐私方面表现出色。据ITBEAR科技资讯了解,除了智能显示功能外,此次更新还针对手机的拍照效果、性能

2024-04-12

iQOO Neo9s Pro等多款vivo新机通过国家3C认证
【ITBEAR科技资讯】4月12日消息,近日,多款vivo新机纷纷亮相CQC中国质量认证中心,并已成功通过国家3C质量认证。这些新机均由vivo自主研发,型号各异,具备不同的技术规格和特点。其中,vivo V2339FA手机备受瞩目。这款手机与iQOO Neo 9 Pro(V2339A)在型号上颇为相似,

2024-04-12