假期剛過(guò)，易鑫集團(tuán)產(chǎn)品部經(jīng)理王楊一大早就坐在電腦前，開(kāi)始整理十一期間的運(yùn)營(yíng)數(shù)據(jù)。各條事業(yè)線(xiàn)、上百個(gè)產(chǎn)品、不同渠道，還有一些重要的測(cè)試期產(chǎn)品需要呈現(xiàn)更多細(xì)節(jié)。這個(gè)工作量，以往需要一個(gè)數(shù)據(jù)分析團(tuán)隊(duì)花費(fèi)一整天的時(shí)間才能完成，而在易鑫智能數(shù)據(jù)倉(cāng)庫(kù)(以下簡(jiǎn)稱(chēng)“智能數(shù)倉(cāng)”)的支持下，只要短短30分鐘。

“智能數(shù)倉(cāng)”的作用不僅在提升數(shù)據(jù)分析的效率。作為一家專(zhuān)業(yè)的汽車(chē)金融交易平臺(tái)，易鑫集團(tuán)累計(jì)實(shí)現(xiàn)的汽車(chē)金融交易量已超過(guò)200萬(wàn)臺(tái)，是數(shù)十家銀行等金融機(jī)構(gòu)的合作伙伴。在平臺(tái)紛繁忙碌的日常運(yùn)營(yíng)中，“智能數(shù)倉(cāng)”的存在猶如“核心大腦”，為多業(yè)務(wù)體系穩(wěn)定高效的運(yùn)行提供了最強(qiáng)有力的科技保障。

從“散裝”數(shù)據(jù)，到自建“智能數(shù)倉(cāng)”

徐飛是易鑫“智能數(shù)倉(cāng)”項(xiàng)目的第一位員工。彼時(shí)的易鑫，還沒(méi)有一個(gè)真正意義上的“數(shù)據(jù)倉(cāng)庫(kù)”，眾多業(yè)務(wù)數(shù)據(jù)被“散裝”在幾十個(gè)互不相通的業(yè)務(wù)操作系統(tǒng)中，只能通過(guò)手工報(bào)表導(dǎo)入信息。數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一，靠“手工”管理的表格極易出現(xiàn)錯(cuò)漏，嚴(yán)重制約了業(yè)務(wù)的進(jìn)一步發(fā)展。

作為國(guó)內(nèi)首批從事大數(shù)據(jù)平臺(tái)建設(shè)、應(yīng)用研發(fā)的專(zhuān)業(yè)人員，徐飛不僅參與過(guò)多家大型互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)中心構(gòu)建，還有一段不短的創(chuàng)業(yè)經(jīng)歷，幫助過(guò)眾多中小型互聯(lián)網(wǎng)公司構(gòu)建獨(dú)立中心數(shù)據(jù)倉(cāng)庫(kù)，這使得他在自建易鑫“智能數(shù)倉(cāng)”的工作中，能給出更精準(zhǔn)的設(shè)計(jì)和前瞻性的戰(zhàn)略布局。

“和互聯(lián)網(wǎng)公司匯集海量用戶(hù)的行為數(shù)據(jù)不同，易鑫是以業(yè)務(wù)數(shù)據(jù)為主，對(duì)數(shù)據(jù)平臺(tái)的安全性、穩(wěn)定性和數(shù)據(jù)精準(zhǔn)度、可用易用性要求更高;同時(shí)，公司多業(yè)務(wù)并行，數(shù)據(jù)橫跨多個(gè)系統(tǒng)、鏈條拉得很長(zhǎng)，口徑不統(tǒng)一、標(biāo)準(zhǔn)不兼容，第三方商業(yè)數(shù)據(jù)庫(kù)沒(méi)法完全滿(mǎn)足需求;作為一家平臺(tái)化發(fā)展的企業(yè)，系統(tǒng)必須具備支持多項(xiàng)目運(yùn)行的復(fù)雜運(yùn)算和無(wú)限擴(kuò)容的能力，以滿(mǎn)足隨著業(yè)務(wù)增長(zhǎng)、未來(lái)數(shù)據(jù)處理量幾倍、甚至上百倍增長(zhǎng)的要求。”

徐飛說(shuō)：“綜合考察各種商業(yè)數(shù)據(jù)庫(kù)的方案，也參考了互聯(lián)網(wǎng)企業(yè)經(jīng)驗(yàn)，我們發(fā)現(xiàn)自建數(shù)倉(cāng)是最‘慢’、最‘費(fèi)力’，但也最‘扎實(shí)’的解決方案。”

上圖：易鑫“智能數(shù)倉(cāng)”團(tuán)隊(duì)在工作中

構(gòu)建深入業(yè)務(wù)的“核心大腦”

同一團(tuán)隊(duì)的老秦曾參與過(guò)新浪等互聯(lián)網(wǎng)公司的數(shù)據(jù)倉(cāng)庫(kù)建設(shè)。在他眼中，易鑫自建“智能數(shù)倉(cāng)”，至少要具備三方面能力：首先，有統(tǒng)一的輸入輸出標(biāo)準(zhǔn)，能夠支持海量多源異構(gòu)數(shù)據(jù)的靈活存儲(chǔ)和高效計(jì)算;其次，能夠構(gòu)建橫跨多個(gè)業(yè)務(wù)系統(tǒng)的通用數(shù)據(jù)標(biāo)準(zhǔn)，實(shí)現(xiàn)對(duì)跨平臺(tái)數(shù)據(jù)的有效組織和貫通;第三，具備加工數(shù)據(jù)產(chǎn)品和提供數(shù)據(jù)服務(wù)的能力，有支持統(tǒng)計(jì)、分析、挖掘等的中臺(tái)操作模塊，可以基于SLA標(biāo)準(zhǔn)對(duì)外穩(wěn)定輸出。

為了解決存儲(chǔ)和擴(kuò)容問(wèn)題，團(tuán)隊(duì)用互聯(lián)網(wǎng)公司標(biāo)準(zhǔn)，搭建了基于Hadoop框架的分布式計(jì)算存儲(chǔ)平臺(tái)，輔以領(lǐng)域內(nèi)先進(jìn)的Flink/Spark實(shí)時(shí)計(jì)算引擎，建立起包含100多個(gè)節(jié)點(diǎn)的服務(wù)器布局，讓系統(tǒng)可以無(wú)限擴(kuò)容的同時(shí)，還具有了大批量的離線(xiàn)數(shù)據(jù)處理及“秒級(jí)”計(jì)算能力。然后，系統(tǒng)抓取易鑫近百個(gè)系統(tǒng)中的源數(shù)據(jù)，并進(jìn)行全面“清洗”，再根據(jù)業(yè)務(wù)邏輯將數(shù)據(jù)按照“業(yè)務(wù)對(duì)象”、“業(yè)務(wù)周期”、“用戶(hù)”等不同主題模型化，進(jìn)行分門(mén)別類(lèi)的存儲(chǔ)。“就像把不同工廠(chǎng)生產(chǎn)的衣物鞋帽，按照上衣、下裝、鞋襪、配件等打上分類(lèi)標(biāo)簽，或者按照男人、女人、小孩等適用場(chǎng)景分到不同倉(cāng)庫(kù)中，讓數(shù)據(jù)井然有序。”老秦解釋說(shuō)。

“當(dāng)中最難的，是如何將分屬不同系統(tǒng)中的數(shù)據(jù)，劃歸到統(tǒng)一的標(biāo)準(zhǔn)口徑下。”作為“智能數(shù)倉(cāng)”核心數(shù)據(jù)工程師的馬維直言，來(lái)易鑫之前，自己從未如此貼近過(guò)業(yè)務(wù)：“互聯(lián)網(wǎng)公司的數(shù)據(jù)，都是IP、瀏覽等定義清晰的字段。但在易鑫，各個(gè)汽車(chē)金融業(yè)務(wù)之間并沒(méi)有百分百的對(duì)應(yīng)關(guān)系，每當(dāng)業(yè)務(wù)系統(tǒng)出現(xiàn)一個(gè)新字段，都需要重新定義。”

她舉例說(shuō)，比如客戶(hù)流失率，易鑫風(fēng)控審核的多級(jí)漏斗是一個(gè)自行設(shè)計(jì)的業(yè)務(wù)流程，很難從歷史數(shù)據(jù)庫(kù)中找到準(zhǔn)確匹配的字段。系統(tǒng)按照自定義的內(nèi)容提供了客戶(hù)流失數(shù)據(jù)，很快被業(yè)務(wù)部門(mén)發(fā)現(xiàn)不符合常理。經(jīng)過(guò)“智能數(shù)倉(cāng)”技術(shù)團(tuán)隊(duì)和業(yè)務(wù)端反復(fù)比對(duì)數(shù)據(jù)源后，最終找到了原因，隨后又從源頭重新定義數(shù)據(jù)指標(biāo)，這才得出了合理結(jié)果。“因?yàn)闆](méi)有歷史參照，數(shù)據(jù)指標(biāo)很難一次性定義得非常準(zhǔn)確，我們需要大量的數(shù)據(jù)做驗(yàn)證。這在小型汽車(chē)金融企業(yè)是無(wú)法辦到的。”馬維說(shuō)。

目前，易鑫“智能數(shù)倉(cāng)”每天接收并處理來(lái)自近百個(gè)業(yè)務(wù)系統(tǒng)的大約1.5TB數(shù)據(jù)，并行處理超過(guò)1萬(wàn)個(gè)計(jì)算任務(wù);多種維度的數(shù)據(jù)，可以通過(guò)手機(jī)、PC端實(shí)時(shí)展示，或處理為既定指標(biāo)和數(shù)據(jù)包，定期發(fā)送到各個(gè)業(yè)務(wù)端，以支持公司各個(gè)層面的業(yè)務(wù)運(yùn)作，成為名副其實(shí)的“核心大腦”。

上圖：易鑫“智能數(shù)倉(cāng)”團(tuán)隊(duì)在討論問(wèn)題

　　從數(shù)據(jù)平臺(tái)到數(shù)據(jù)服務(wù)中臺(tái)

福珍是易鑫資產(chǎn)管理部經(jīng)理，需要以日為單位統(tǒng)計(jì)資產(chǎn)質(zhì)量情況。之前她只能通過(guò)手工表格的方式傳遞信息，現(xiàn)在只需在系統(tǒng)中輕輕一點(diǎn)，“智能數(shù)倉(cāng)”中的BI模塊就能按照她設(shè)定的規(guī)則，隨時(shí)展現(xiàn)匯總結(jié)果。這一切得益于“智能數(shù)倉(cāng)”開(kāi)發(fā)的數(shù)據(jù)中臺(tái)服務(wù)。

為滿(mǎn)足業(yè)務(wù)部門(mén)對(duì)數(shù)據(jù)的使用要求，目前“智能數(shù)倉(cāng)”提供了三種形式的數(shù)據(jù)服務(wù)。通過(guò)易鑫的“通天曉”服務(wù)端，用戶(hù)可以看到上百種不同維度、不同口徑的數(shù)據(jù)，滿(mǎn)足各個(gè)業(yè)務(wù)部門(mén)對(duì)定制數(shù)據(jù)的要求;而在BI平臺(tái)提供的數(shù)據(jù)中臺(tái)，福珍這樣的業(yè)務(wù)人員可根據(jù)需要自定義數(shù)據(jù)規(guī)則，設(shè)計(jì)屬于自己的數(shù)據(jù)報(bào)表。此外，“智能數(shù)倉(cāng)”還支持向公司十?dāng)?shù)個(gè)業(yè)務(wù)系統(tǒng)提供統(tǒng)一標(biāo)準(zhǔn)的數(shù)據(jù)接口，按照既定規(guī)則自動(dòng)向業(yè)務(wù)系統(tǒng)派發(fā)作業(yè)任務(wù)。

“我們希望將‘技術(shù)’數(shù)倉(cāng)向‘業(yè)務(wù)’數(shù)倉(cāng)轉(zhuǎn)變。為此，我們正在搭建業(yè)務(wù)中臺(tái)，開(kāi)發(fā)各種輔助工具讓普通業(yè)務(wù)人員經(jīng)過(guò)簡(jiǎn)單技能培訓(xùn)，就能更方便地通過(guò)‘智能數(shù)倉(cāng)’進(jìn)行工作。”徐飛介紹，目前易鑫已開(kāi)發(fā)出多項(xiàng)輔助支持工具，如“數(shù)詢(xún)”，可以讓使用者快速查詢(xún)獲取數(shù)據(jù);“數(shù)語(yǔ)”提供所有數(shù)據(jù)的精確描述，能夠幫助業(yè)務(wù)人員追索數(shù)據(jù)源頭和流向;“數(shù)診”則能根據(jù)自定義規(guī)則對(duì)字段內(nèi)容準(zhǔn)確性進(jìn)行評(píng)估、診斷、預(yù)警等。

更多使用者，意味著更大的風(fēng)險(xiǎn)存在。汽車(chē)金融行業(yè)的特性，要求系統(tǒng)對(duì)消費(fèi)者個(gè)人信息進(jìn)行嚴(yán)格的保護(hù)。為此，易鑫從2018年開(kāi)始就嚴(yán)格規(guī)范系統(tǒng)內(nèi)對(duì)消費(fèi)者個(gè)人信息的使用。在業(yè)務(wù)端，所有個(gè)人信息提取都必須進(jìn)過(guò)授權(quán)，進(jìn)入“智能數(shù)倉(cāng)”系統(tǒng)內(nèi)的消費(fèi)者敏感信息都進(jìn)行了分級(jí)、加密和脫敏處理，所有對(duì)外輸出信息都用加密字段進(jìn)行傳輸，最大可能地保護(hù)了數(shù)據(jù)的安全使用和消費(fèi)者信息不外泄。

在徐飛心中，“智能數(shù)倉(cāng)”不是一種產(chǎn)品而是一種服務(wù)，是易鑫在服務(wù)200多萬(wàn)客戶(hù)基礎(chǔ)上，錘煉出的一種基于汽車(chē)金融場(chǎng)景的智能數(shù)據(jù)服務(wù)。它的高效、穩(wěn)定運(yùn)營(yíng)，可精準(zhǔn)展現(xiàn)各個(gè)業(yè)務(wù)的關(guān)鍵環(huán)節(jié)信息，幫助業(yè)務(wù)端更快、更高效地服務(wù)于消費(fèi)者。

上圖：易鑫“智能數(shù)倉(cāng)”團(tuán)隊(duì)部分成員

數(shù)據(jù)賦能業(yè)務(wù)，驅(qū)動(dòng)企業(yè)成長(zhǎng)

數(shù)據(jù)賦能業(yè)務(wù)的成果正在展現(xiàn)。借助“智能數(shù)倉(cāng)”提供的數(shù)據(jù)支持，易鑫的技術(shù)部門(mén)重新定義了風(fēng)控標(biāo)準(zhǔn)，將原本“一刀切”的審核標(biāo)準(zhǔn)改為基于一定風(fēng)險(xiǎn)系數(shù)配比的綜合考量模型。經(jīng)評(píng)估，客戶(hù)的履約表現(xiàn)明顯優(yōu)于同期行業(yè)整體水平;易鑫產(chǎn)品部也在依托資方分析模塊的數(shù)據(jù)，和資方合作伙伴一起探討新的金融方案，比如向客戶(hù)提供更有彈性的汽車(chē)融資方案，以滿(mǎn)足多元化、個(gè)性化的消費(fèi)者需求。

“‘智能數(shù)倉(cāng)’是易鑫智能商業(yè)的基礎(chǔ)設(shè)施。自確定‘Tech+Fin’的發(fā)展戰(zhàn)略以來(lái)，易鑫一直致力于將‘數(shù)據(jù)提供的知識(shí)’應(yīng)用到經(jīng)營(yíng)分析和管理決策中，將汽車(chē)金融業(yè)務(wù)的運(yùn)營(yíng)由傳統(tǒng)的‘人治’變?yōu)橛蓹C(jī)器和算法管理的新模式。”易鑫CTO賈志峰說(shuō)：“就我們所調(diào)研和了解的范圍來(lái)看，易鑫‘智能數(shù)倉(cāng)’的業(yè)務(wù)和服務(wù)能力已經(jīng)能夠滿(mǎn)足現(xiàn)有汽車(chē)金融企業(yè)的各項(xiàng)需求，甚至具備相當(dāng)程度的跨行業(yè)數(shù)據(jù)管理能力。我們也正在和行業(yè)頭部的金融機(jī)構(gòu)、汽車(chē)廠(chǎng)商，和互聯(lián)網(wǎng)公司開(kāi)拓新的業(yè)務(wù)模式，希望提高彼此的運(yùn)營(yíng)效率，達(dá)到行業(yè)共贏。”

沿著“Tech+Fin”的核心發(fā)展思路，易鑫正在積極從行業(yè)‘先行者’往‘播種者’的角色轉(zhuǎn)換，通過(guò)輸出技術(shù)能力，來(lái)提升汽車(chē)金融行業(yè)整體數(shù)據(jù)智能化管理水平，將是易鑫的下一個(gè)目標(biāo)。

（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 ）