微信邦

 找回密碼
 立即注冊

QQ登錄

只需一步,快速開始

掃一掃,訪問微社區

返回列表 發新帖
查看: 1639|回復: 0
打印 上一主題 下一主題

這一次,騰訊用AI讓手語“發聲”

[復制鏈接]
跳轉到指定樓層
樓主
發表于 2019-5-16 16:53:29 | 只看該作者 |只看大圖 回帖獎勵 |倒序瀏覽 |閱讀模式
生活圈制作
5月16日,全球無障礙宣傳日之際,騰訊優圖實驗室宣布攻克AI手語識別技術挑戰,聯合深圳市信息無障礙研究會發布“優圖AI手語翻譯機”,致力于通過人工智能技術為聽障人群搭建無障礙溝通平臺。

AI手語翻譯機以普通攝像頭作為手語采集裝置,依托高性能計算機進行后臺運算,能夠實時地將手語表達翻譯成文字。用戶不需要攜帶任何額外裝置,只要面對攝像頭完成手語表達,就能從翻譯機中得到反饋回來的識別結果。

未來, AI手語翻譯機有望在機場、高鐵、民政窗口等公共場所部署應用,助力信息無障礙城市建設。

這也是繼本月初優圖實驗室宣布通過人工智能技術幫助警方尋回多名被拐超過10年兒童之后,騰訊對“科技向善”理念的又一踐行,也是我們在計算機視覺人工智能領域的又一重大技術突破。

“有溫度的科技”,助力無聲世界“發聲”
深圳市信息無障礙研究會的雷老師隨機對著攝像頭比出“你很聰明”、“人人都有夢想”“很高興認識你”等手語,通過AI手語翻譯機均實現了準確的文字翻譯。

優圖實驗室邀請了許多像雷老師一樣的志愿者來進行親身測試,只為無聲世界的這群人能夠更好的 “發聲”。

據世界衛生組織最新數據顯示,目前全球約有4.66億人患有殘疾性聽力損失,據北京聽力協會2017年公開數據,估計中國殘疾性聽力障礙人士已達7200萬。而《2017年百城無障礙設施調查體驗報告》顯示,我國無障礙設施整體普及率僅為40.6%

對于聽障者來說,手語是更易于使用和接受的交流方式,而我國目前致力于聽障者專業服務的人士只有大約一萬名,大部分公共服務并沒有配備專門的便利設施。

目前,針對解決聽障人群溝通問題的研究方向多集中在講文字轉化成手語,而“針對聽障人群的手語識別轉化成文字”的方向因為技術難度極大,尚鮮有技術方案落地。

那么,騰訊如何用AI升溫?

據優圖實驗室研究員陽趙陽介紹,手語翻譯的核心技術是手語識別(SLR),通過計算機算法,自動區分手語表達中的各類手勢、動作、手勢和動作之間的切換,最后將手語翻譯成為文字。


相比于此前的手語識別相關的產品和技術方案,優圖實驗室手語識別算法有以下幾大突破點:

讓交流“不受限”,隨時隨地AI手語翻譯
手語表達極具復雜性,一個手勢或者動作幅度的小變化就可能會造成表達意思上很大的不同。

以往很多產品或方法往往需要借助于一些額外的設備,例如借助手套、手環來獲取手臂和手掌的活動信息。這些額外的設備無形之中增加了使用的門檻,同時也帶來了一定的不便利性。

AI手語翻譯機不需要任何額外設備的幫助,用戶只需要一個普通的攝像頭(如手機或普通網絡攝像頭)對手語表達者的表達過程進行拍攝,翻譯機就可以完成識別翻譯的過程。

尊重手語使用習慣,支持多樣性表達
手語極具地域性和多樣性。地域性即指不同地區(如深圳和廣州)對同一個詞可能存在不同的表達方式,同時因個人習慣而已,即便是在同一個標準下,動作的呈現也可能不盡相同。

我們首次將多樣性的問題考慮到了算法識別的過程中,支持常見的多樣性表達,用戶不需要針對翻譯機學習某種特定的詞與動作之間的映射,可以根據自己平時的表達習慣進行表達即可。

不單是字句翻譯,而是助力流暢“交流”
聽障人士進行手語表達往往以句子為單位,表達完一個完整的句子之后才會出現停頓,但以往諸多許多產品或算法實際上是以單個詞為單位進行識別的,需要在詞與詞之間做出明顯的停頓。這很大程度限制了使用的靈活性和流暢度。

AI手語翻譯機能夠實現整句的識別和翻譯,用戶表達的時候可以連貫將整個句子表達完。也不需要設定特定的結束或起始動作,而是直接對用戶的動作與否進行判斷。

目前,優圖實驗室手語識別數據集覆蓋了近千句日常表達,900個常用詞匯,是最大的中文手語識別數據集。

科技向善,用AI消除溝通障礙
深圳市信息無障礙研究會秘書長楊驊表示,騰訊優圖提供的這項技術,可以在一定程度上緩解聽障者的溝通障礙,為聽障者提供更好的服務。
優圖和深圳信息無障礙研究會AI聽障無障礙聯合項目組

實際上, 這并不是騰訊在AI+無障礙建設上的首次嘗試,騰訊一直在堅持推動“一個都不能少”和“信息無障礙”理念的傳播與落地。

騰訊自 2009 年起在信息無障礙方面率展開探索,截至目前,旗下QQ、QQ空間、微信、騰訊網、騰訊新聞、應用寶、企鵝FM等大部分產品已針對障礙用戶實現專門優化。騰訊旗下各類產品從社交、娛樂、新聞等多維度出發,共同努力,為障礙人士構建友好的信息社會。

2018年12月3日,騰訊獲得了“聯合國教科文組織數字技術增強殘疾人權能獎”。

秉承“科技向善”的技術價值觀,騰訊一直致力于通過AI等技術手段解決人類面臨的社會問題。

用AI消除障礙,做有溫度的科技、無差別的科技,騰訊一直在路上。

分享到:  QQ好友和群QQ好友和群 QQ空間QQ空間 騰訊微博騰訊微博 騰訊朋友騰訊朋友 微信微信
收藏收藏
回復

使用道具 舉報

您需要登錄后才可以回帖 登錄 | 立即注冊

本版積分規則

微信邦網聯系QQ|Archiver|手機版|小黑屋|魯公網安備 37082802000167號|微信邦 ( 魯ICP備19043418號-5

GMT+8, 2019-11-12 23:22 , Processed in 0.266344 second(s), 27 queries .

Powered by Discuz! X3.2

© 2001-2013 Wxuse Inc. | Style by ytl QQ:1400069288

快速回復 返回頂部 返回列表
赛马会图标