以開發(fā)之名|華為校園開發(fā)者:為美好“發(fā)聲”,讓聽障者交流更順暢

你是否遇到過這樣的場景——公交車上、餐廳里兩個(gè)人在用手語快速交流。科技發(fā)展日新月異,數(shù)字技術(shù)不斷創(chuàng)新,應(yīng)該給包括聽障人士在內(nèi)的所有人創(chuàng)造美好,不讓任何一個(gè)人在數(shù)字世界掉隊(duì)。能為聽障人士做些什么呢?

為幫助聽障人在日常生活中自如交流,更方便地融入社會生活,有一群來自華中科技大學(xué)的青年學(xué)子通過大量實(shí)際調(diào)研并利用專業(yè)所學(xué)開發(fā)出了知音App,可通過語音識別、手語手勢識別等AI技術(shù)將語音轉(zhuǎn)文字讓聽障人看到或?qū)⑽淖洲D(zhuǎn)語音讓健聽人聽到。團(tuán)隊(duì)還在App中嵌入了專業(yè)手語客服視頻在線,希望未來能隨時(shí)隨地幫助聽障人交流。

以開發(fā)之名

團(tuán)隊(duì)聽障者馮桂杰的真實(shí)反饋?zhàn)屩鬉pp不斷優(yōu)化,更貼近聽障人需求

“我們希望通過科技的力量幫助聽障人士解除生活靜音鍵,感受生活煙火、蟲鳴鳥叫和清風(fēng)細(xì)雨。”秉持著這種信念,這群年輕人希望幫助聽障人活得有聲有色。對于這樣一個(gè)傾注了團(tuán)隊(duì)熱情和心血的產(chǎn)品,團(tuán)隊(duì)希望能借助更多的外部力量讓更多有需要的人了解并使用到知音App。而在產(chǎn)品二次優(yōu)化過程中,知音App非常重要的體驗(yàn)改進(jìn)則來自華為HMS Core提供的語音識別與合成等技術(shù)支持。如今,知音App已經(jīng)參加了2021華為HMS全球應(yīng)用創(chuàng)新大賽,同時(shí)也加入了華為耀星計(jì)劃,這讓團(tuán)隊(duì)有了更多動(dòng)力和信心將知音App持續(xù)推向市場惠及更多聽障人群。

置身于聽障者日常生活,傾聽來自他們的“聲音”

“社會在飛速發(fā)展,聽障人群卻往往在溝通中遇到諸多障礙。很多看似日常的小事,對他們來說都格外奢侈,而他們又是非常渴望交流的。”知音App團(tuán)隊(duì)對聽障人群有著特別的關(guān)注,這要源于他們長期在聾人學(xué)校做志愿服務(wù)的經(jīng)歷,不會手語和聾人兒童溝通非常麻煩。朱佳怡作為團(tuán)隊(duì)一員,則講述了一次去養(yǎng)老院做義工的經(jīng)歷,“當(dāng)時(shí)遇到一位后天聽障老人,有著意料之外的開朗熱情,每次看到義工們,他就會特別開心地跑過來比手勢,想要交流。后來了解到由于聽障,他和家人疏于交流,長期在養(yǎng)老院的生活也讓他日顯孤單。我特別難過,覺得這部分群體不應(yīng)該被忽略。”很多類似經(jīng)歷讓團(tuán)隊(duì)越來越清晰地了解到聽障人群的社會現(xiàn)狀,并深受觸動(dòng)。于是,這群定期探訪聽障人群的年輕人一拍即合,希望發(fā)揮各自力量開發(fā)出一款能真正幫助聽障人群交流的產(chǎn)品。他們分別來自信息系統(tǒng)專業(yè)、產(chǎn)品設(shè)計(jì)專業(yè)、市場營銷專業(yè)等,專業(yè)不同初衷相同的青年學(xué)子為此傾注著滿滿精力和熱情。

以開發(fā)之名

知音App希望幫助聽障人群建立信心,更好融入社會生活

“產(chǎn)品的實(shí)用性一定要通過目標(biāo)用戶的不斷體驗(yàn)加以驗(yàn)證,好的應(yīng)用一定是能滿足用戶需求的。而要想開發(fā)出好的聽障輔助應(yīng)用,就要深入到聽障人群當(dāng)中。”為此,團(tuán)隊(duì)與聽障人群保持著長期溝通,項(xiàng)目創(chuàng)始人周江南更曾跟聽障人群同吃同住過一段時(shí)間,有很強(qiáng)的同理心,因此非常熟悉他們的需求,這也是保證產(chǎn)品實(shí)用性的關(guān)鍵因素。團(tuán)隊(duì)中的馮桂杰是一名聽障者,同時(shí)擔(dān)任產(chǎn)品體驗(yàn)官,對知音進(jìn)行更細(xì)致更真實(shí)的反饋,并提出針對性的建議,從而確保產(chǎn)品的精準(zhǔn)優(yōu)化。他坦言:在知音不僅學(xué)到了很多技術(shù)和知識,還感受到了愛和力量。

此外,為促進(jìn)聽障人交流溝通速度,更方便地享受生活,團(tuán)隊(duì)目前在研發(fā)一款A(yù)R智能眼鏡,由話筒、鏡片屏幕、攝像頭、喇叭等組件構(gòu)成。借助技術(shù)手段,話筒可捕捉健聽人語音,AI手語客服將語音轉(zhuǎn)化為文字顯示在屏幕上讓聽障人看見,同時(shí)攝像頭可獲取聽障人手語,AI算法將其轉(zhuǎn)化為語音通過喇叭播放。目前相關(guān)功能均在完善中。

授人以魚不如授人以漁,華為HMS讓知音App更懂聽障人

從成員招募、調(diào)研、志愿服務(wù)、設(shè)計(jì),熱愛聽障公益事業(yè)且具備同理心是知音團(tuán)隊(duì)不變的堅(jiān)守,也是團(tuán)隊(duì)像知音朋友一樣和聽障人群對話并幫助建立自信的初衷。而數(shù)字化時(shí)代,公益和科技有著更深層次的相輔相成關(guān)系,為開發(fā)出更契合聽障者的產(chǎn)品,知音團(tuán)隊(duì)一直在積極尋找更具針對性的先進(jìn)技術(shù)支撐。

“調(diào)研過程中,我們第一個(gè)想到的便是華為,因?yàn)檎Z音識別與合成是產(chǎn)品的核心功能之一,這方面團(tuán)隊(duì)無法自己完成,依托華為HMS Core的語音識別合成技術(shù)進(jìn)行擴(kuò)展是最優(yōu)解。”知音App團(tuán)隊(duì)介紹道,“集成HMS Core的ML Kit后,我們的產(chǎn)品有了更為具體的優(yōu)化。比如聲音場景識別,可以充當(dāng)聽障人的耳朵,幫助聽障人識別周圍的場景,而語音識別合成是非??焖俚募?,可充當(dāng)嘴巴發(fā)出聲音,從而產(chǎn)品更為理想化。”具體而言,語音識別、語音合成和聲音識別等頁面是知音App的核心功能頁面的一部分。聽障人可在聲音識別頁面按住“開始”按鈕,把說話人的實(shí)時(shí)語音轉(zhuǎn)化為文字;可在語音合成頁面輸入文字,點(diǎn)擊“開始合成”按鈕把文字轉(zhuǎn)化為個(gè)性化語音播放出來。在產(chǎn)品測試過程中,集成HMS Core的ML Kit的則讓知音App對場景語音識別更精準(zhǔn),語音合成更快速,交流體驗(yàn)更順暢。

說起集成HMS Core的ML Kit,團(tuán)隊(duì)還分享道,“在這之前,我們對AI技術(shù)和機(jī)器學(xué)習(xí)的底層技術(shù)不太了解。加入華為開發(fā)者聯(lián)盟后,我們得以瀏覽到很多華為開發(fā)者文檔,對AI技術(shù)有了更深入的了解,其中聲音場景的識別幫助我們優(yōu)化了很多解決方案。”目前,二次優(yōu)化已進(jìn)入技術(shù)收尾階段,不久將在華為應(yīng)用市場上線。

如果沒有聲音,我們的世界會變成怎樣呢?城市沒有喧囂、森林沒有鳥叫,圍繞我們的或許是一片沉寂。“聽障人群不應(yīng)陷入沉寂。知音App愿意搭建起聽障人信息交流的橋梁,與他們有更好溝通并建立他們的信心,讓每一位聽障人士得以自由交流、表達(dá)感受、分享快樂。我們覺得這是一件特別有意義特別酷的事情。”知音App團(tuán)隊(duì)年輕的聲音里洋溢著堅(jiān)定和憧憬。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )