9月2日至6日,2023中國國際服務貿易交易會在北京舉辦,作業(yè)幫受邀參展,并正式發(fā)布自研銀河大模型。在服貿會現(xiàn)場,銀河大模型在智能解題、知識問答、中英文寫作及AI伴學等方面的出色表現(xiàn)吸引了大量現(xiàn)場觀眾的互動體驗。
同時作業(yè)幫公布了銀河大模型在C-Eval、CMMLU兩大權威大語言模型評測基準的成績。數(shù)據顯示,作業(yè)幫銀河大模型表現(xiàn)卓越,以平均分73.7分位居C-Eval榜首;同時在CMMLU榜單Five-shot和Zero-shot測評中分別以平均分74.03分及73.85分位列第一,成為首個同時在上述兩大權威榜單平均分排名第一的教育大模型。
銀河大模型作為作業(yè)幫自主研發(fā)的大語言模型,深度融合作業(yè)幫多年的AI算法沉淀和教育數(shù)據積累,是一款專為教育領域量身打造的覆蓋多學科、多學段、多場景的教育大模型。它不僅具備高度的多學科知識解答能力,更能協(xié)助不同學段學生進行創(chuàng)意寫作,同時還能夠實現(xiàn)自主提問、陪伴式輔導等,助力學生個性化學習與成長。
作業(yè)幫銀河大模型的綜合實力在權威測評榜單中得到驗證。作為全球最具影響力的中文評測集之一,C-Eval是由清華大學、上海交通大學和愛丁堡大學合作構建的面向中文語言模型的綜合性考試評測集,包含13948道多項選擇題,涵蓋52個不同學科和四個難度級別。根據C-Eval排行榜的最新數(shù)據顯示,作業(yè)幫銀河大模型以平均分為73.7分位居榜首。
在由MBZUAI、上海交通大學、微軟亞洲研究院共同推出的CMMLU榜單中,作業(yè)幫銀河大模型表現(xiàn)同樣出色,在Five-shot和Zero-shot 測試中分別以74.03分及73.85分占據榜首。
據了解,CMMLU共涵蓋了67個主題,涉及自然科學、社會科學、工程、人文以及常識等。在CMMLU榜單中的卓越表現(xiàn),再次印證了作業(yè)幫銀河大模型在知識儲備和語言理解方面的突出實力。
作業(yè)幫銀河大模型不僅在中文方面表現(xiàn)優(yōu)異,在英文方面表現(xiàn)同樣不俗。由美國加州大學伯克利分校、哥倫比亞大學、芝加哥大學等高校聯(lián)合打造的全球性大規(guī)模多任務語言理解評測基準MMLU,在集合了科學、工程、數(shù)學、人文、社會科學等領域的57個科目的評測中,作業(yè)幫銀河大模型平均分高達71.88分,體現(xiàn)了其在英文領域的專業(yè)能力和問題解決能力。
作業(yè)幫表示,作業(yè)幫銀河大模型即將在作業(yè)幫APP等學習工具、智能硬件、智能圖書、教育數(shù)字化等業(yè)務場景中實現(xiàn)應用,同時將持續(xù)優(yōu)化銀河大模型性能與多模態(tài)能力,加速推進在更多教育場景的落地實踐。
(免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現(xiàn)的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )