1. 程式人生 > 其它 >Insights直播回顧——手語服務,助力溝通無障礙

Insights直播回顧——手語服務,助力溝通無障礙

HMS Core Insights第九期直播–手語服務,助力溝通無障礙,已於12月29日圓滿結束,本期直播與小夥伴們一同瞭解了HMS Core手語服務的亮點特性、底層技術以及演進規劃,下面我們一起來回顧本次直播的精彩內容吧!

【內容回顧】

1、 亮點特性——中文手語生成與虛擬形象展示。

2、 刨根問底——支撐手語服務功能實現的技術細節。

3、 循序漸進——手語服務在語種、詞庫以及手語識別上的演進規劃。

【專家觀點】

Andy, 華為AI演算法專家

華為在很早之前就開始了無障礙溝通方面的探索,經過不斷地積累與探索,我們將HMS Core手語服務這套能力開放出來,讓更多開發者能夠一起為無障礙溝通環境的建設添磚加瓦,也能在持續的應用與反饋中,不斷完善手語服務的各項功能。

Jason,華為計算機視覺演算法專家

HMS Core手語服務中,手語動作清晰、準確的表達是核心。我們基於業界領先的深度神經網路技術,實時將輸入文字翻譯為時序穩定、連貫且符合聽障人群中手語使用者表達習慣的手語動作資料,同時,手語生成不僅包括手部動作和身體姿態,還支援10種面部表情的生成,力求準確表達。

鄭璇,手語語言學顧問

無障礙溝通環境的建設目前已經成為了社會趨勢,HMS Core手語服務通過先進技術的運用,為無障礙溝通環境的建設提供了技術基礎,也讓更多的開發者有能力,用科技幫助聽障人群中手語使用者更好更便捷地生活。

【精彩答疑】

Q1:手語服務目前都有哪些亮點特性?

A:HMS Core手語服務是華為面向開發者提供的手語生成能力,其能夠將文字實時翻譯為流暢、自然且符合聽障人群表達習慣的手語動作資料。此外,手語服務還能夠通過數字人形象,清晰準確地表達包括手部動作、身體姿態以及面部表情在內的手語動作。

Q2:手語服務的功能是基於哪些技術實現的?

A: 手語服務的功能實現主要由基於機器翻譯的手語轉寫模組和基於多模態融合的手語動作表情生成模組組成。通過自研中文預訓練語言模型、整體替代機制以及加速技術整體提升了手語轉寫的精度及速度;通過多模態動作表情融合生成技術,手語服務能夠實現自然連貫的手語動作生成,在高質量動捕資料較少的情況下,提高生成動作的準確性、平滑性。

Q3:開發者可以通過手語服務在哪些場景下應用?

A: 手語服務覆蓋日常生活詞彙,滿足和家人、朋友在聊天、就餐、購物等應用場景,實現溝通無障礙;手語服務還完全遵循《國家通用手語詞典》所列出的語法規則,不僅會《國家通用手語詞典》裡的8214個常用詞,還會許多高頻詞彙,幫助普及國家通用手語標準,幫助聽障兒童學習閱讀,實現手語教學,此外手語服務還能夠豐富聽障人群的社會資訊獲取途徑,拉近聽障人群和社會的距離。

Q4:手語服務未來的演進規劃是什麼?

A: 針對現有能力,手語服務會進一步擴充詞彙覆蓋,滿足更多場景應用,同時也將豐富數字人表情姿態,讓手語動畫更全面準確。手語服務還將進一步開放新功能,為更多的聽障人士建立無障礙溝通環境。

【瞭解更多】

如果你還想回顧更多直播精彩瞬間,歡迎登入華為開發者學堂檢視直播回放

如果你對手語服務感興趣,歡迎登入手語服務首頁瞭解更多技術細節。

瞭解更多詳情>>

訪問華為開發者聯盟官網
獲取開發指導文件
華為移動服務開源倉庫地址:GitHubGitee

關注我們,第一時間瞭解 HMS Core 最新技術資訊~