還記得燃爆抖音短劇春節(jié)檔的動(dòng)畫短劇《觀復(fù)貓》嗎?它又回來(lái)了!
6月1日17:00起,這部“喵”趣橫生、寓教于“樂(lè)”的動(dòng)畫短劇將以煥然一新的“AI英文配音版”再次與觀眾見(jiàn)面。值得一提的是,本次全12集的英文配音均由訊飛智作提供AI譯制同聲配音技術(shù)支持,這也是動(dòng)畫配音領(lǐng)域的一大創(chuàng)新性進(jìn)步。
動(dòng)畫短劇《觀復(fù)貓》由馬未都先生首個(gè)動(dòng)畫卡通形象“馬霸霸”, 與七只以觀復(fù)博物館中“貓館長(zhǎng)”為原型塑造的貓貓共同演繹。8個(gè)角色聲音風(fēng)格迥異,說(shuō)話韻律各有特色,保證音色、韻律的恢復(fù)度就已頗具挑戰(zhàn),更別提還要讓8個(gè)角色流利開(kāi)口說(shuō)英文。
作為本次動(dòng)畫短劇煥新的關(guān)鍵“角色”,AI譯制同聲配音技術(shù)是如何巧妙應(yīng)對(duì)這一難題?
1句話復(fù)刻,“還原”角色音色韻律
從前,想要復(fù)刻、模擬一個(gè)人的聲音,至少需要這個(gè)人錄制長(zhǎng)達(dá)一周的時(shí)間,才能積累足夠多的聲音數(shù)據(jù)支持機(jī)器學(xué)習(xí)?,F(xiàn)在,借助AI譯制同聲配音技術(shù),僅需1句話,短短10s就能實(shí)現(xiàn)聲音的復(fù)刻,不僅保留每個(gè)角色獨(dú)特的音色、韻律,還能高度還原各自的風(fēng)格特征。
這項(xiàng)由訊飛智作提供的AI譯制同聲配音技術(shù),通過(guò)分析語(yǔ)音片段中不同角色的發(fā)聲特征并進(jìn)行聚類,經(jīng)過(guò)語(yǔ)音切片、說(shuō)話人向量提取、聚類等一系列處理后,為每個(gè)角色生成對(duì)應(yīng)的語(yǔ)音標(biāo)簽。
得益于大模型在通用任務(wù)上的卓越表現(xiàn),在學(xué)習(xí)海量的人聲數(shù)據(jù)之后,即使是很少的聲音數(shù)據(jù),大模型也能模仿出和原聲極為相近的聲音效果。在訊飛星火大模型的加持下,AI譯制同聲配音技術(shù)使1句話復(fù)刻角色聲音成為可能。
聲音復(fù)刻大模型,跨語(yǔ)種配音輕松實(shí)現(xiàn)
AI譯制的挑戰(zhàn)不僅在于要還原不同角色聲音特性,還需克服跨語(yǔ)種翻譯帶來(lái)的重重挑戰(zhàn)。
動(dòng)畫短劇《觀復(fù)貓》中囊括了四大發(fā)明、圍棋、戲劇臉譜等中國(guó)民俗、國(guó)粹及歷史文化知識(shí),AI翻譯既要用外語(yǔ)“原汁原味”地傳達(dá)中國(guó)傳統(tǒng)文化知識(shí)與內(nèi)涵,又要盡量保證文本長(zhǎng)度與中文版接近以適應(yīng)畫面節(jié)奏,還要保證英文發(fā)音標(biāo)準(zhǔn)、正確。翻譯本身并不復(fù)雜,但追求高質(zhì)量的翻譯成果無(wú)疑充滿技術(shù)含量。
基于訊飛跨語(yǔ)種聲音復(fù)刻大模型,AI譯制同聲配音技術(shù)可實(shí)現(xiàn)中英跨語(yǔ)種配音,英文發(fā)音標(biāo)準(zhǔn)流利。此外,AI譯制同聲技術(shù)還支持時(shí)間戳匹配和語(yǔ)速微調(diào)等功能,精準(zhǔn)控制音頻與畫面的匹配,實(shí)現(xiàn)跨語(yǔ)種配音的“無(wú)縫切換”。
AI譯制同聲配音技術(shù)不僅為影視行業(yè)譯制配音帶來(lái)革命性創(chuàng)新,在企業(yè)及產(chǎn)品的海外營(yíng)銷推廣場(chǎng)景也能實(shí)現(xiàn)快速的助力,通過(guò)跨語(yǔ)種的音視頻傳播,進(jìn)一步加快海外市場(chǎng)的拓展。除了AI譯制同聲配音技術(shù),訊飛智作最新上線的超擬人聲音,更是具有超高的自然度和表現(xiàn)力,擬人度達(dá)到83%+,情緒表達(dá)的可感知度達(dá)85%+,可以為用戶提供更有溫度的語(yǔ)音體驗(yàn)。當(dāng)前訊飛智作提供的海量高品質(zhì)音庫(kù),可滿足新聞播報(bào)、教育培訓(xùn)、廣告宣傳、有聲讀物等多元場(chǎng)景需求。此外,平臺(tái)還提供2D真人、3D超寫實(shí)、卡通、美型等多種風(fēng)格的虛擬人形象,匹配不同應(yīng)用場(chǎng)景,助力內(nèi)容創(chuàng)作,
當(dāng)下,語(yǔ)音合成技術(shù)已經(jīng)成為人們?nèi)粘9ぷ?、生活中不可或缺的部分,伴隨技術(shù)的迭代升級(jí),期待未來(lái)解鎖更豐富的使用場(chǎng)景,為用戶提供更加美好的語(yǔ)音交互體驗(yàn)。
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )