你是否遇到過這樣的場景——公交車上、餐廳里兩個人在用手語快速交流??萍及l(fā)展日新月異,數(shù)字技術(shù)不斷創(chuàng)新,應該給包括聽障人士在內(nèi)的所有人創(chuàng)造美好,不讓任何一個人在數(shù)字世界掉隊。能為聽障人士做些什么呢?
為幫助聽障人在日常生活中自如交流,更方便地融入社會生活,有一群來自華中科技大學的青年學子通過大量實際調(diào)研并利用專業(yè)所學開發(fā)出了知音App,可通過語音識別、手語手勢識別等AI技術(shù)將語音轉(zhuǎn)文字讓聽障人看到或?qū)⑽淖洲D(zhuǎn)語音讓健聽人聽到。團隊還在App中嵌入了專業(yè)手語客服視頻在線,希望未來能隨時隨地幫助聽障人交流。
團隊聽障者馮桂杰的真實反饋讓知音App不斷優(yōu)化,更貼近聽障人需求
“我們希望通過科技的力量幫助聽障人士解除生活靜音鍵,感受生活煙火、蟲鳴鳥叫和清風細雨。”秉持著這種信念,這群年輕人希望幫助聽障人活得有聲有色。對于這樣一個傾注了團隊熱情和心血的產(chǎn)品,團隊希望能借助更多的外部力量讓更多有需要的人了解并使用到知音App。而在產(chǎn)品二次優(yōu)化過程中,知音App非常重要的體驗改進則來自華為HMS Core提供的語音識別與合成等技術(shù)支持。如今,知音App已經(jīng)參加了2021華為HMS全球應用創(chuàng)新大賽,同時也加入了華為耀星計劃,這讓團隊有了更多動力和信心將知音App持續(xù)推向市場惠及更多聽障人群。
置身于聽障者日常生活,傾聽來自他們的“聲音”
“社會在飛速發(fā)展,聽障人群卻往往在溝通中遇到諸多障礙。很多看似日常的小事,對他們來說都格外奢侈,而他們又是非常渴望交流的。”知音App團隊對聽障人群有著特別的關(guān)注,這要源于他們長期在聾人學校做志愿服務的經(jīng)歷,不會手語和聾人兒童溝通非常麻煩。朱佳怡作為團隊一員,則講述了一次去養(yǎng)老院做義工的經(jīng)歷,“當時遇到一位后天聽障老人,有著意料之外的開朗熱情,每次看到義工們,他就會特別開心地跑過來比手勢,想要交流。后來了解到由于聽障,他和家人疏于交流,長期在養(yǎng)老院的生活也讓他日顯孤單。我特別難過,覺得這部分群體不應該被忽略。”很多類似經(jīng)歷讓團隊越來越清晰地了解到聽障人群的社會現(xiàn)狀,并深受觸動。于是,這群定期探訪聽障人群的年輕人一拍即合,希望發(fā)揮各自力量開發(fā)出一款能真正幫助聽障人群交流的產(chǎn)品。他們分別來自信息系統(tǒng)專業(yè)、產(chǎn)品設計專業(yè)、市場營銷專業(yè)等,專業(yè)不同初衷相同的青年學子為此傾注著滿滿精力和熱情。
知音App希望幫助聽障人群建立信心,更好融入社會生活
“產(chǎn)品的實用性一定要通過目標用戶的不斷體驗加以驗證,好的應用一定是能滿足用戶需求的。而要想開發(fā)出好的聽障輔助應用,就要深入到聽障人群當中。”為此,團隊與聽障人群保持著長期溝通,項目創(chuàng)始人周江南更曾跟聽障人群同吃同住過一段時間,有很強的同理心,因此非常熟悉他們的需求,這也是保證產(chǎn)品實用性的關(guān)鍵因素。團隊中的馮桂杰是一名聽障者,同時擔任產(chǎn)品體驗官,對知音進行更細致更真實的反饋,并提出針對性的建議,從而確保產(chǎn)品的精準優(yōu)化。他坦言:在知音不僅學到了很多技術(shù)和知識,還感受到了愛和力量。
此外,為促進聽障人交流溝通速度,更方便地享受生活,團隊目前在研發(fā)一款AR智能眼鏡,由話筒、鏡片屏幕、攝像頭、喇叭等組件構(gòu)成。借助技術(shù)手段,話筒可捕捉健聽人語音,AI手語客服將語音轉(zhuǎn)化為文字顯示在屏幕上讓聽障人看見,同時攝像頭可獲取聽障人手語,AI算法將其轉(zhuǎn)化為語音通過喇叭播放。目前相關(guān)功能均在完善中。
授人以魚不如授人以漁,華為HMS讓知音App更懂聽障人
從成員招募、調(diào)研、志愿服務、設計,熱愛聽障公益事業(yè)且具備同理心是知音團隊不變的堅守,也是團隊像知音朋友一樣和聽障人群對話并幫助建立自信的初衷。而數(shù)字化時代,公益和科技有著更深層次的相輔相成關(guān)系,為開發(fā)出更契合聽障者的產(chǎn)品,知音團隊一直在積極尋找更具針對性的先進技術(shù)支撐。
“調(diào)研過程中,我們第一個想到的便是華為,因為語音識別與合成是產(chǎn)品的核心功能之一,這方面團隊無法自己完成,依托華為HMS Core的語音識別合成技術(shù)進行擴展是最優(yōu)解。”知音App團隊介紹道,“集成HMS Core的ML Kit后,我們的產(chǎn)品有了更為具體的優(yōu)化。比如聲音場景識別,可以充當聽障人的耳朵,幫助聽障人識別周圍的場景,而語音識別合成是非??焖俚募桑沙洚斪彀桶l(fā)出聲音,從而產(chǎn)品更為理想化。”具體而言,語音識別、語音合成和聲音識別等頁面是知音App的核心功能頁面的一部分。聽障人可在聲音識別頁面按住“開始”按鈕,把說話人的實時語音轉(zhuǎn)化為文字;可在語音合成頁面輸入文字,點擊“開始合成”按鈕把文字轉(zhuǎn)化為個性化語音播放出來。在產(chǎn)品測試過程中,集成HMS Core的ML Kit的則讓知音App對場景語音識別更精準,語音合成更快速,交流體驗更順暢。
說起集成HMS Core的ML Kit,團隊還分享道,“在這之前,我們對AI技術(shù)和機器學習的底層技術(shù)不太了解。加入華為開發(fā)者聯(lián)盟后,我們得以瀏覽到很多華為開發(fā)者文檔,對AI技術(shù)有了更深入的了解,其中聲音場景的識別幫助我們優(yōu)化了很多解決方案。”目前,二次優(yōu)化已進入技術(shù)收尾階段,不久將在華為應用市場上線。
如果沒有聲音,我們的世界會變成怎樣呢?城市沒有喧囂、森林沒有鳥叫,圍繞我們的或許是一片沉寂。“聽障人群不應陷入沉寂。知音App愿意搭建起聽障人信息交流的橋梁,與他們有更好溝通并建立他們的信心,讓每一位聽障人士得以自由交流、表達感受、分享快樂。我們覺得這是一件特別有意義特別酷的事情。”知音App團隊年輕的聲音里洋溢著堅定和憧憬。
(免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )