就多任務(wù)處理、多語(yǔ)言識(shí)別等問(wèn)題,蘋果在論文中給出了自己不同的想法。
最近,蘋果發(fā)布了一系列論文來(lái)闡釋語(yǔ)音助手的重要工作機(jī)理,公開揭秘Siri,向業(yè)界貢獻(xiàn)了自己在設(shè)計(jì)上的不同想法。
在第一篇論文中,蘋果就語(yǔ)音助手中的多任務(wù)處理問(wèn)題進(jìn)行了闡釋,它指出在Siri中,喚醒處理通常需要兩個(gè)步驟:AI首先必須確定輸入音頻中的語(yǔ)音內(nèi)容是否與觸發(fā)短語(yǔ)的語(yǔ)音內(nèi)容匹配(語(yǔ)音觸發(fā)檢測(cè)),然后必須確定說(shuō)話者的語(yǔ)音是否與一個(gè)或多個(gè)注冊(cè)用戶的語(yǔ)音相匹配(說(shuō)話者驗(yàn)證)。一般方法是將兩項(xiàng)任務(wù)分別來(lái)處理,蘋果則認(rèn)為可以用一個(gè)神經(jīng)網(wǎng)絡(luò)模型同時(shí)解決兩項(xiàng)任務(wù),同時(shí)它表示,經(jīng)過(guò)驗(yàn)證,該方法各方面性能可以達(dá)到預(yù)期。
在該論文中,研究人員給出了模型示例。他們?cè)诎?6000小時(shí)帶注釋樣本的數(shù)據(jù)集中訓(xùn)練了基于兩種思路下設(shè)計(jì)的模型,其中5000小時(shí)的音頻帶有語(yǔ)音標(biāo)簽,其余均只有揚(yáng)聲器標(biāo)簽。相比于一般訓(xùn)練模型去獲取多個(gè)標(biāo)簽的思路,蘋果通過(guò)將不同任務(wù)的訓(xùn)練數(shù)據(jù)進(jìn)行級(jí)聯(lián)來(lái)訓(xùn)練多個(gè)相關(guān)任務(wù)的模型。結(jié)果發(fā)現(xiàn),在性能表現(xiàn)相同的情況下,蘋果新提出的模型反而更適合應(yīng)用,它能夠在兩個(gè)任務(wù)之間共享計(jì)算,大大節(jié)省了設(shè)備上的內(nèi)存空間,同時(shí)計(jì)算時(shí)間或等待時(shí)間以及所消耗的電量/電池?cái)?shù)量都將降低。
在另一篇論文中,蘋果還介紹了多語(yǔ)言演講場(chǎng)景的演講者識(shí)別系統(tǒng)設(shè)計(jì)——知識(shí)圖譜輔助聽寫系統(tǒng)決策。以聲學(xué)子模型為例,它可以基于語(yǔ)音信號(hào)傳輸痕跡來(lái)進(jìn)行預(yù)測(cè),并且其上下文感知的預(yù)測(cè)組件考慮了各種交互上下文信號(hào),其中上下文信號(hào)包含有關(guān)發(fā)出命令的條件信息、已安裝的命令語(yǔ)言環(huán)境、當(dāng)前選擇的命令語(yǔ)言環(huán)境以及用戶在發(fā)出請(qǐng)求之前是否切換命令語(yǔ)言環(huán)境的信息。
結(jié)果顯示,這一設(shè)計(jì)的優(yōu)勢(shì)在于,它們可以在語(yǔ)音信號(hào)太短而無(wú)法通過(guò)聲學(xué)模型產(chǎn)生可靠預(yù)測(cè)的情況下提供幫助。
此外,蘋果還提出了一項(xiàng)補(bǔ)充研究,緩解錯(cuò)誤觸發(fā)問(wèn)題,即忽略不適合語(yǔ)音助手(Siri)的語(yǔ)音?;趫D結(jié)構(gòu)設(shè)計(jì)AI模型的思路,研究人員提出了一種圖神經(jīng)網(wǎng)絡(luò)(GNN),其中每個(gè)節(jié)點(diǎn)都與標(biāo)簽相連。結(jié)果顯示,該模型減少了87%的錯(cuò)誤觸發(fā)。
作者:Lynn
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )