AI技術如何幫助聽障人士「聽更清」?

2020.11.19

你有沒有試過想像自己活在沒有聲音的世界?聽不到清晨的鳥鳴,享受不了音樂的優美,甚至從未聽過親人的聲音。現實裡有很多人就像這樣,一直生活在無聲的世界。

15歲的曉婷便是其中之一。她從小就夢想成為舞蹈家,但這個夢想對於有聽力障礙的她而言格外困難:聽不到舞蹈配樂,踩不中節拍。即使已植入人工耳蝸,她能聽到的聲音也非常嘈雜,無法清楚辨別不同的聲音。

但在科技的幫助下,曉婷得以圓夢了。我們與中國最大的人工耳蝸廠商之一諾爾康(Nurotron)合作,基於騰訊天籟AI音訊技術,推出「手機伴侶+人工耳蝸」解決方案,通過AI降噪演算法改善聽障人士的聽覺體驗,讓他們真正聽清世界。

這對曉婷來說無疑是個福音,她終於能夠清楚地聽到音樂和節拍,也能辨別出各種聲音的區別,讓她舞蹈家的夢想成為了可能。「能聽清聲音後,她的眼睛裡有光了。」曉婷的媽媽說,「我們都能看得見,她的性格變得開朗、自信了。」

曉婷,15歲,在騰訊天籟行動的幫助下,她聽到了聲音,得以重拾舞蹈家的夢想

天籟行動,用AI助聽

根據世界衛生組織(WHO)數據顯示,全球約有11億年青人(12-35歲)面臨聽力損失的風險,約4.66億人患有殘疾性聽力損失。儘管安裝了費用高昂的人工耳蝸,但在機場、商場等嘈雜環境中依然會面臨「聽不清」的困擾。

騰訊多媒體實驗室聯合騰訊公益慈善基金會、深圳市資訊無障礙研究會等機構宣布發起「天籟行動」,向公益開發者、設備廠商和公益行業等免費開放騰訊天籟AI音訊技術,幫助解決人工耳蝸的降噪難題,改善佩戴者的使用體驗,進而呼籲社會關注聽障人士身心康復,構建資訊無障礙環境。

商世東,騰訊多媒體實驗室高級總監,專注音訊技術領域已逾20年。他一直心繫聽障人群所面對的挑戰,也了解人工耳蝸固有的問題,所以尋求與諾爾康共同發掘解決辦法,經過長達半年的研發調試,商世東團隊最終敲定了「手機伴侶+人工耳蝸」的聯合解決方案,實現了語音清晰度和可懂度提升40%的效果。

「先是在手機上,利用手機強大的處理能力,對採集到的語音信號進行預處理,通過多種技術提升語音的清晰度和可懂度。」商世東介紹說,「然後把處理過後的乾淨語音,通過無線傳輸的方式送達到人工耳蝸,在人工耳蝸上進行二次加工,最後刺激人耳聽覺神經,達到改善聽覺的效果。」

諾爾康的實驗檢測資料顯示,騰訊天籟AI音訊技術與人工耳蝸的結合能讓場景識別準確率達到96%,其中帶噪語音辨識率為93%,環境噪音中聲音識別率達到94%。

在新冠疫情期間,「天籟技術」也起到了關鍵的作用,被運用到騰訊會議中,解決各種不同會議場景下的噪音問題。

科技向善,助力無障礙社會建設

作為全球最大的互聯網科技公司之一,騰訊秉持「科技向善」的願景,致力於通過科技,不斷提升人類生活品質。

「互聯網、智能手機、雲計算、人工智能、大數據等新技術,增強了人類理解世界的能力,讓我們看到、聽到、想到更多。」騰訊高級執行副總裁、雲與智慧產業事業群總裁湯道生表示。

在今年99公益日期間,騰訊基金會啟動「科技公益互助計劃」,旨在倡導和促進更多以科技手段解決社會痛點的公益項目,而「天籟行動」正是該計劃的代表案例之一。

如今,曉婷的人生充滿更多可能,甚至計劃要考上大學讀計算機科學。她陽光的性格也讓許多人備受鼓舞,在獲得各界人士幫助的同時,曉婷也非常積極地幫助其他有困難的人,把公益互助的理念付諸實踐。

「我們得到了很多,所以如果可以盡自己的一點力去回饋社會,我非常樂意。」