日前,成都曉多科技有限公司與哥倫比亞大學信息處理實驗室合作發(fā)表論文《Dynamic Updating of the Knowledge Base for a Large-Scale Question Answering System》被ACM Digital Library收錄。論文提出了一種針對知識庫問答系統(tǒng)的自動學習方案(英文簡稱:ALKB-QA),它采用了深度學習的方法來解決基于知識庫的問答系統(tǒng)在電子商務領域?qū)崿F(xiàn)大規(guī)模高質(zhì)量的應答所面臨的主要問題和挑戰(zhàn),是曉多科技的重要創(chuàng)新成果,也是曉多智能客服機器人的重大進步。
ACM(Association for Computing Machinery,美國計算機學會)創(chuàng)立于1947年,是全球歷史最悠久和最大的計算機教育和科研機構(gòu)。The ACM Digital Library數(shù)據(jù)庫收錄了美國計算機協(xié)會(Association for Computing Machinery)的各種電子期刊、會議錄、快報等文獻的全文信息,還可以看到出版物信息?!禗ynamic Updating of the Knowledge Base for a Large-Scale Question Answering System》這篇論文內(nèi)容詳實,創(chuàng)造性和落地實用性強。試驗數(shù)據(jù)和真實應用的反饋數(shù)據(jù)都是其在知識庫問答領域的領先性和突破性的最好佐證,該論文為智能機器人的發(fā)展提供了優(yōu)秀的、先進的方案。以上應該是論文被收錄的主要原因。
如今,基于知識庫的問答系統(tǒng)有望在電子商務領域?qū)崿F(xiàn)大規(guī)模高質(zhì)量的應答。但這樣的知識庫問答系統(tǒng)目前面臨兩個挑戰(zhàn)。一是為數(shù)以萬計的商家提供機器人應答服務時效果很難得以保證;二是知識庫自身更新的成本比較高。該論文提出了一種針對知識庫問答系統(tǒng)的自動學習方案,采用深度學習的方法來解決上述的兩個主要挑戰(zhàn)。
基于自動學習方案的知識庫問答系統(tǒng)(ALKB-QA system),主要分為離線學習模塊和在線服務模塊。離線學習模塊中,文中提出了一種新的知識庫模型——問答知識庫(QA-KB),問答知識庫(QA-KB)中存儲了問答對及商品相關(guān)信息與問答對之間存在的錯綜復雜的關(guān)系,方便用于高效準確的檢索問答對及相關(guān)知識。
另外自動學習方法主要包括處理海量聊天數(shù)據(jù)獲取問答對、用匹配模型對問答對進行價值判別、匹配模型利用反饋進行再次訓練與知識庫更新這幾個步驟。結(jié)合針對知識庫問答系統(tǒng)提出的自動學習方案,我們能高效的從海量的歷史聊天數(shù)據(jù)中挖掘出的大量的高質(zhì)量問答對,并將其自動更新到知識庫中。
在線服務模塊中,主要利用了傳統(tǒng)的信息檢索技術(shù)和深度學習匹配模型,針對買家的問題,先在問答知識庫(QA-KB)中檢索到相關(guān)問答對,將答案作為候選,再用離線學習模塊中的匹配模型對候選答案進行相關(guān)性排序,最終會將知識庫中最相關(guān)的答案回復給買家。
論文參與者、曉多科技CEO江嶺表示,該論文的數(shù)據(jù)支撐離不開曉多科技的大數(shù)據(jù)和實戰(zhàn)經(jīng)驗的支持,針對基于自動學習方法的知識庫問答系統(tǒng)(ALKB-QA system),我們通過對比實驗和線上實際應用反饋進行了一系列的客觀評估。據(jù)論文參與者劉小洋(目前在美國哥倫比亞大學博士后研究站工作、曉多科技有限公司算法顧問)和廖宇康(曉多科技算法工程師)介紹:在試驗環(huán)節(jié),我們從一批聊天數(shù)據(jù)中構(gòu)造了1801019個問答對,并利用自動學習方法從中篩選出了69079個高質(zhì)量問答對,通過人工抽樣評估,結(jié)果表明,相對于一般方法,自動學習方法的準確率(Precision)提升了17%,召回率(Recall)提升了12.5%,綜合性能指標F1提升了13.6%。同時,我們將基于自動學習方法的知識庫問答系統(tǒng)(ALKB-QA system)應用于商家客服的真實聊天場景,將系統(tǒng)產(chǎn)生的答案用于提示供客服工作人員進行點擊采納。通過60天的數(shù)據(jù)統(tǒng)計,基于自動學習方法的知識庫問答系統(tǒng)(ALKB-QA system)提供的答案的采納率呈明顯的持續(xù)上升趨勢,而由人工維護的知識庫問答系統(tǒng)所提供的的答案的采納率則無明顯變化。
目前,基于自動學習方法的知識庫問答系統(tǒng)(ALKB-QA system)已成功運用于曉多智能客服機器人系統(tǒng)中,機器人在輔助客服應答的同時主動地學習客服的回答,通過輕松的點擊“審核通過”之后可以更方便的更新知識庫中的答案,與逐條配置相比,自動學習功能幫助用戶極大的節(jié)省配置成本,讓商家可以快速的配置出適應自己業(yè)務的、專業(yè)的曉多智能客服機器人。
- 為什么年輕人不愛換手機了
- 柔宇科技未履行金額近億元被曝已6個月發(fā)不出工資
- 柔宇科技被曝已6個月發(fā)不出工資 公司回應欠薪有補償方案
- 第六座“綠動未來”環(huán)保公益圖書館落地貴州山區(qū)小學
- 窺見“新紀元”,2021元宇宙產(chǎn)業(yè)發(fā)展高峰論壇“廣州啟幕”
- 以人為本,景悅科技解讀智慧城市發(fā)展新理念
- 紐迪瑞科技/NDT賦能黑鯊4 Pro游戲手機打造全新一代屏幕壓感
- 清潔家電新老玩家市場定位清晰,攜手共進,核心技術(shù)決定未來
- 新思科技與芯耀輝在IP產(chǎn)品領域達成戰(zhàn)略合作伙伴關(guān)系
- 芯耀輝加速全球化部署,任命原Intel高管出任全球總裁
免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。