在6月21日的華為開發(fā)者大會(HDC 2024)上,華為云發(fā)布了盤古大模型5.0,其創(chuàng)新的多模態(tài)生成能力,可以為自動駕駛領(lǐng)域提供更高質(zhì)量的數(shù)據(jù)支持。
華為常務(wù)董事、華為云CEO張平安表示,盤古5.0通過創(chuàng)新的可控時(shí)空生成,大規(guī)模的生成和實(shí)際場景相一致的駕駛視頻數(shù)據(jù),有機(jī)會重塑自動駕駛的開發(fā)。
華為云盤古大模型5.0可控時(shí)空生成技術(shù)(STCG),賦予了模型理解并遵循物理規(guī)律的能力,這意味著,生成的視頻不僅在視覺上逼真,更重要的是在車輛行為、環(huán)境互動等方面與現(xiàn)實(shí)情況保持高度同步。例如,車輛在不同攝像頭視角間的平滑過渡,以及在不同天氣和光照條件下行駛的自然表現(xiàn),都顯示了模型對空間和時(shí)間維度精準(zhǔn)把握的能力。
通過盤古大模型生成的六攝像頭視角視頻,自動駕駛系統(tǒng)可以直接獲取到全方位、高仿真度的訓(xùn)練素材。這些視頻涵蓋了從無車街道到復(fù)雜多車交互的不同場景,甚至包括不同氣候條件下的行車情況,極大地豐富了訓(xùn)練數(shù)據(jù)集的多樣性。尤為值得注意的是,模型在生成雨天視頻時(shí),還能細(xì)膩地模擬出車輛尾燈因光線昏暗而開啟的細(xì)節(jié),體現(xiàn)了其對真實(shí)世界復(fù)雜規(guī)律的深刻理解和學(xué)習(xí)能力。
張平安表示:未來,盤古的多模態(tài)生成還會支持更多的場景,更好的為自動駕駛服務(wù)。
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )