人民網
人民網>>金報

游戲AI能讓聽障人士用自己的聲音“說話”?

2023年07月21日17:01 | 來源:人民網-金報
小字號

近日,網易集團、網易公益聯合浙江省殘疾人福利基金會發起“人生第一句”聲音復原公益計劃,利用網易互娛AI Lab的iSpeech技術打造AI復原聽障人士原聲的工具——聽障人士僅需上傳2分鐘沒有完整語義的發聲片段,之后在產品中輸入想要表達的文字,就可以用原本的聲音說出來。目前該產品已向全國聽障人士免費開放,幫助他們無障礙、有情感地與外界交流,用自己的聲音說出“人生第一句”。

據介紹,作為亞運圓夢計劃之一,“人生第一句”公益計劃在杭州2022年第4屆亞洲殘疾人運動會組委會、中國殘疾人事業新聞宣傳促進會、浙江省殘疾人聯合會的指導下發起,基於致敬亞運、助力亞殘運、助力殘障人士社會融合的大背景,通過AI技術幫助聽障人士實現“親口說話”的人生夢想,號召更多人“益”起來關注殘障人士,關注無障礙環境建設。

AI聲音復原工具,免費開放給全國聽障人士

不久前,浙江省殘疾人福利基金會面向浙江特殊教育職業學院的學生和音書APP的部分用戶開展調研,調研結果顯示,僅有十分之一的受訪對象能夠通過簡單的口語與身邊的人進行交流,他們中的大多數人經歷過太多想說但說不出的自卑與懊惱,最大的夢想便是能說出“人生第一句”。

是否能運用最新的人工智能技術幫助聽障人士向他人傳遞自己的真實想法和真誠態度?網易互娛AI Lab的技術團隊展開了研究。研究發現,目前市場上絕大多數語音克隆產品需要輸入完整講話採集數據,對於無法正常發出語義的聽障人士來說並不適用,而且面向聽障人士的交流工具,大多也隻有文字轉語音功能,他們無法用自有的音色表達。

因此,網易互娛AI Lab研發團隊利用iSpeech技術,基於海量數據的預訓練模型,加上聽障人士極少量的純語音數據快速微調算法模型,在快速克隆新的說話人音色的同時保留基礎模型的內容發音能力,研發聽障人士聲音復原工具,實現隻需輸入文字就可實時用原聲流暢表達,讓聽障人士能圓夢“人生第一句”。

目前該聲音復原工具已經在音書APP上線,供聽障人群免費使用,並且在浙江省杭州市馬塍路殘疾人融合就業街區試點應用,幫助聽障咖啡師、面包師等更好地工作。據了解,殘疾人融合就業街區也是杭州亞殘運會期間對外展示的窗口,通過科技助力,街區的工作人員從被助者變為助人者,可以便捷流暢地與各方來客交流,為游客提供更好的服務,向世界展示中國殘疾人群體的新風貌。

近七成聽障人士表示希望使用音色復原技術

在調研中,有超過67%的受訪對象表示“願意使用音色復原技術”,超過一半的受訪對象表示“願意將音色復原技術推薦給身邊有需要的人”,也有部分受訪對象表示除了手機 APP 軟件以外,希望音色復原技術應用於在公交、出租、飯店、超市、銀行等公共場所。

浙江省殘疾人福利基金會理事長趙小飛表示,浙江省共有持証殘疾人133.7萬人,其中聽力殘疾20.8萬人、言語殘疾1.7萬人,希望通過這一AI技術幫助他們用自己的音色向他人傳遞內心真實想法,進而推動解決該群體在和健聽人溝通交流過程中存在的障礙問題,改變他們的生活、學習和工作環境狀況及相應的能力水平,使他們真正能夠平等參與社會生活,實現人生價值。

網易AI技術加速落地普惠

網易持續利用游戲技術助力打造無障礙社會。據了解,此次運用的iSpeech技術原本是由網易互娛AI Lab針對游戲場景推出的AI創作工具,已落地服務於《大話西游》《一夢江湖》《荒野行動》等10余項游戲項目產品中,相關技術可以進行交互界面的朗讀播報,輔助視覺障礙人士玩游戲。

隨著AI浪潮的興起,網易除了加快人工智能技術在產業的落地應用外,也致力於讓更多人能夠享受到新技術發展的紅利,實現技術的普惠。例如,在鄉村振興方面,網易利用人工智能等技術,打造線上線下結合的智慧文旅元宇宙,為22個縣域新增游客300萬﹔在工業生產方面,網易伏羲將人工智能、游戲化交互、游戲仿真等能力遷移到工程機械領域,推出國內首台無人裝載機器人和挖掘機器人,參與到礦山、鐵路等一線場景的建設。

接下來,網易將和浙江省殘疾人福利基金會一起把這項技術提供給更多有需要的人。網易還將不斷探索游戲技術外溢價值,賦予游戲更多的社會價值和可能。

(責編:王誼帆、沈光倩)

分享讓更多人看到

返回頂部