“‘維科杯’·OFweek 2020（第五屆）人工智能行業(yè)年度評選”活動由高科技行業(yè)門戶OFweek維科網主辦，OFweek人工智能網承辦，活動旨在表彰人工智能領域具有突出貢獻的優(yōu)秀產品、技術及企業(yè)，鼓勵更多企業(yè)投入技術創(chuàng)新；同時為行業(yè)輸送更多創(chuàng)新產品、前沿技術，一同暢享人工智能的未來。
2020人工智能行業(yè)年度評選“OFweek （5th．） AI Awards 2020”將于2020年9月21日－10月10日進入網絡投票階段，頒獎典禮將于10月28日在深圳舉辦。
目前，活動正處于火熱的報名評審階段，業(yè)內企業(yè)積極響應。瑞萊智慧已正式參評“維科杯·OFweek2020（第五屆）人工智能行業(yè)優(yōu)秀產品應用獎”。
瑞萊智慧RealAI是依托清華大學人工智能研究院設立的人工智能企業(yè)，是國內首家安全可控人工智能技術及行業(yè)解決方案提供商，先后推出RealBox魯棒機器學習平臺、RealSafe人工智能安全平臺等自研平臺以及更加安全可靠的行業(yè)解決方案，致力于建設安全可控人工智能應用新生態(tài)。
參賽產品／項目名稱：RealSafe人工智能安全平臺
推出年份：2020／04
開發(fā)背景：近年來，以機器學習尤其是深度學習為代表的人工智能技術的取得了快速發(fā)展與廣泛應用。然而，當前以數(shù)據(jù)驅動為代表的第二代人工智能技術還存在著巨大的安全風險，當前人工智能系統(tǒng)被入侵的風險主要是對抗樣本攻擊與模型攻擊。
（1）對抗樣本攻擊
對抗樣本（Adversarial Examples）是指在數(shù)據(jù)集中故意添加細微的干擾所形成的輸入樣本，會導致模型以高置信度給出錯誤的輸出，從而導致AI系統(tǒng)判斷失準。如圖1所示，通過對圖像添加微小的擾動，構造對抗樣本，從而欺騙在正常樣本上工作良好的深度學習圖像分類模型，被攻擊過的熊貓圖像被深度學習模型以高置信度認為是長臂猿。
圖1：對抗樣本
（2）模型攻擊
通過在訓練數(shù)據(jù)中添加少量投毒數(shù)據(jù)的方式在模型中埋藏后門，埋藏好的后門通過攻擊者預先設定的觸發(fā)器激發(fā)。在后門未被激發(fā)時，被攻擊的模型具有和正常模型類似的表現(xiàn)；當模型中埋藏的后門被攻擊者激活時，模型給出錯誤的輸出。如圖2所示，通過事先修改訓練數(shù)據(jù)在模型中埋藏后門，模型在正常樣本上表現(xiàn)正常，一旦遇到黃色像素塊、炸彈、花朵圖案作為觸發(fā)器后門被激發(fā)，就會將停車標志錯認為減速標志。
圖2：模型攻擊
為了提升人工智能系統(tǒng)的安全性，有效抵御對抗樣本攻擊、模型攻擊等風險，RealAI推出RealSafe 人工智能安全平臺，通過集成主流及獨有世界領先對抗樣本攻擊與防御、模型后門檢測算法，提供業(yè)界首個可視化零編碼模型安全測評及防御升級升級平臺。
核心技術介紹：
RealSafe人工智能安全平臺包括大功能模塊：模型安全評測、防御解決方案，支持用戶創(chuàng)建和管理自定義的數(shù)據(jù)集用于模型安全測評與防御升級。
模型安全評測模塊提供對抗樣本風險檢測與模型后門檢測兩大功能，在進行對抗樣本安全風險測評時，平臺將基于多種算法生成對抗樣本模擬攻擊，并綜合在不同算法、迭代次數(shù)、擾動量大小的攻擊下模型效果的變化，給出被測AI模型的安全評分及詳細的測評報告；在進行模型后門檢測時，平臺將通過高維空間搜索的方式，檢查模型是否存在后門，若存在后門，還支持還原出模型學習到的觸發(fā)器信息。
模型安全評測結果，用戶可自行選擇合適的防御方案，一鍵提升模型安全性。目前RealSafe平臺支持五種去除對抗樣本噪聲的通用防御方法，可實現(xiàn)對輸入數(shù)據(jù)的自動去噪處理，破壞攻擊者惡意添加的對抗噪聲。
RealSafe平臺提供從安全測評到防御加固整體解決方案，目前可用于發(fā)現(xiàn)包括人臉比對、圖像分類、目標檢測等應用場景下常用算法模型可能出錯的極端情形，同時也能預防潛在的對抗攻擊、模型惡意攻擊。
參評述說／理由：
在人工智能技術快速發(fā)展與廣泛應用的當下，人工智能安全問題變得尤為緊迫。雖然AI安全仍是一個新興領域，但對抗樣本、數(shù)據(jù)投毒等攻擊手段在開源社區(qū)、工具包的加持下變得愈發(fā)可實現(xiàn)，甚至于實質性的危害已經開始產生，但與之相對的，相關防御手段的普及和推廣卻一直沒有跟上，主要原因在于對抗樣本等安全攻防技術存在較高的技術壁壘，只有極少部分的頂尖算法人才掌握這部分的能力。在這一背景下，RealSafe平臺作為一款自動化檢測工具，大大降低了模型安全檢測與防御升級的技術難度，能夠幫助大部分不具備該領域專業(yè)技能的企業(yè)與組織高效應對日益增長的惡意攻擊，有效提升人工智能系統(tǒng)的安全性、可靠性。從這一角度來看，RealSafe平臺可以說是劃時代的顛覆性產品。
本屆“‘維科杯’·OFweek 2020（第五屆）人工智能行業(yè)年度評選”活動將于9月21日進入網絡投票階段，歡迎各位踴躍投票！
（免責聲明：本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網站出現(xiàn)的信息，均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時，應及時向本網站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內容或斷開相關鏈接。 ）
