數(shù)字經(jīng)濟時代已經(jīng)到來,如何用大數(shù)據(jù)技術(shù)幫助企業(yè)提升效率成為了當下的關(guān)鍵命題。對于尋求數(shù)字化轉(zhuǎn)型的企業(yè)而言,究竟該如何打造數(shù)字化基礎(chǔ)設(shè)施,才能夠有效達成數(shù)據(jù)驅(qū)動業(yè)務(wù)的目標?
?在過去的一個月中,高考牽動著中國千萬考生和家長的神經(jīng)。
6月23日晚8點,上海高考成績開放查詢。短短一個小時內(nèi),一萬兩千多名考生,如潮水般涌入上海招生考試院網(wǎng)站和微信公眾號查詢分數(shù)。
此時據(jù)上海招生考試院拿到上海市所有考生成績,剛剛過去8小時。要在如此短的時間內(nèi)準備好線上成績查詢應(yīng)用,并隨時準備應(yīng)對高并發(fā)的訪問流量,絕不是一件容易的事。
在這個緊急關(guān)口,上海市今年初建設(shè)的數(shù)據(jù)共享交換平臺起到了關(guān)鍵作用,此平臺能夠支撐包括一網(wǎng)通辦在內(nèi)的多個應(yīng)用系統(tǒng)運行,快速上線一款高考成績查詢應(yīng)用也就不在話下。
值得注意的是,上海數(shù)據(jù)共享交換平臺背后的基礎(chǔ)技術(shù)支撐,全部來自星環(huán)科技數(shù)據(jù)云平臺Transwarp Data Cloud。
大數(shù)據(jù)3.0時代的再進化
說起星環(huán)科技,在大數(shù)據(jù)領(lǐng)域無人不知。這家炙手可熱的技術(shù)創(chuàng)新企業(yè),在2018年通過了全球首個TPC-DS基準測試。
該測試被視為數(shù)據(jù)庫界最難的一個測試標準,從而打破了該領(lǐng)域12年來沒有公司通過該項測試的局面。這一記錄直接將星環(huán)科技推向了全球數(shù)據(jù)庫領(lǐng)域的最高峰。
?事實上,在長達幾十年的時間里,由于國產(chǎn)數(shù)據(jù)庫市場啟動較晚,國外巨頭一直占據(jù)絕對領(lǐng)先優(yōu)勢,全世界數(shù)據(jù)庫市場基本上被Oracle,IBM/DB2,Microsoft/SQL Server壟斷。
直到2010年之前,數(shù)據(jù)處理領(lǐng)域都還是傳統(tǒng)關(guān)系型數(shù)據(jù)庫的天下。由于數(shù)據(jù)增長緩慢,系統(tǒng)較為孤立,用傳統(tǒng)數(shù)據(jù)庫就基本可以滿足各類應(yīng)用開發(fā),這一時期被稱之為大數(shù)據(jù)1.0時代。
隨著互聯(lián)網(wǎng)的出現(xiàn)和快速發(fā)展,數(shù)據(jù)呈爆發(fā)式增長,數(shù)據(jù)也從結(jié)構(gòu)化轉(zhuǎn)向了以非結(jié)構(gòu)、半結(jié)構(gòu)化為主,傳統(tǒng)數(shù)據(jù)庫對這類需求和應(yīng)用無論在技術(shù)上還是功能上,都幾乎束手無策。
而之后出現(xiàn)的Hadoop,Spark等大數(shù)據(jù)技術(shù),則很好的解決了結(jié)構(gòu)化數(shù)據(jù)和實時數(shù)據(jù)處理的問題,從而真正開啟了大數(shù)據(jù)2.0時代。
2012年,國內(nèi)大數(shù)據(jù)市場進入白熱化階段,這一時期的大數(shù)據(jù)技術(shù)百花齊放,光是基于Hadoop的SQL引擎就多達20多種。
2013年,星環(huán)科技憑借敏銳的技術(shù)嗅覺,在眾多SQL引擎中選擇了Spark進行創(chuàng)業(yè)。如今,Spark是市場上僅有的四種主流技術(shù)之一,而星環(huán)科技也因在處理大型數(shù)據(jù)量和兼容上千種數(shù)據(jù)庫方面的卓越表現(xiàn)而快速崛起。
從2015年發(fā)展至今,隨著企業(yè)業(yè)務(wù)的云化演進,企業(yè)對數(shù)據(jù)的需求越來越多,再一次推動了大數(shù)據(jù)技術(shù)的迭代與進化。
一方面,在線業(yè)務(wù)的快速發(fā)展,讓企業(yè)面臨的數(shù)據(jù)量已經(jīng)超越上一代至少一個數(shù)量級,圖像、視頻、語音等非結(jié)構(gòu)化數(shù)據(jù)暴增。
同時,云計算、AI、IoT、5G等新技術(shù)的先后涌現(xiàn),使得數(shù)據(jù)的應(yīng)用層出不窮,也產(chǎn)生了新的數(shù)據(jù)形態(tài)、新的部署環(huán)境和新的應(yīng)用模式。
另一方面,企業(yè)更加關(guān)注大數(shù)據(jù)分析與挖掘產(chǎn)生的業(yè)務(wù)價值,這就對數(shù)據(jù)分析平臺的性能和分析能力提出了新的要求,從此大數(shù)據(jù)技術(shù)開始進入3.0時代。
?與上一代相比,大數(shù)據(jù)3.0時期最為顯著的特征在于,數(shù)據(jù)在企業(yè)中的角色從支持業(yè)務(wù)轉(zhuǎn)變?yōu)轵?qū)動業(yè)務(wù)。
對此有人認為,大數(shù)據(jù)的商業(yè)價值不可否認,但真正能夠通過大數(shù)據(jù)實現(xiàn)業(yè)務(wù)價值的企業(yè)卻少之又少,其中很大的一個原因就在于數(shù)據(jù)的整合、打通、共享很難。
當下大部分的行業(yè)和企業(yè)不僅內(nèi)外部數(shù)據(jù)尚未打通,自己內(nèi)部的數(shù)據(jù)也還沒有實現(xiàn)整合和標準化,開發(fā)和利用更是無從談起,數(shù)據(jù)孤島現(xiàn)象屢見不鮮。
在星環(huán)科技看來,數(shù)據(jù)驅(qū)動業(yè)務(wù)絕不是一句空談。為了讓數(shù)據(jù)發(fā)揮出最大價值,前提必須有一個高性能的、彈性的、融合的云平臺來支撐數(shù)據(jù)的快速處理、應(yīng)用和交互,為企業(yè)創(chuàng)造更加簡單和靈活的數(shù)據(jù)開發(fā)運維環(huán)境,讓數(shù)據(jù)工程師將精力集中在更能釋放其價值的工作中。
這對于傳統(tǒng)的虛擬化平臺和云平臺而言,確實是一個巨大的挑戰(zhàn)。
傳統(tǒng)的虛擬化技術(shù)太過笨重,資源消耗過高,傳統(tǒng)的應(yīng)用開發(fā)采用單體建設(shè)的方式,會出現(xiàn)代碼維護難度高,重復(fù)開發(fā)多,部署不靈活,性能不足,擴展性不夠,開發(fā)效率低等問題。
而以O(shè)penStack為代表的云計算技術(shù),雖然滿足了資源的擴展性、靈活性等需求,但是這種以資源管理為中心的方式,卻很難在云平臺上打通應(yīng)用和數(shù)據(jù)。
那么,大數(shù)據(jù)3.0時代下的大數(shù)據(jù)平臺,到底應(yīng)該是什么樣子?對此,星環(huán)科技給出了自己的答案。
TDC數(shù)據(jù)云:新一代數(shù)字化基礎(chǔ)設(shè)施
2015年,星環(huán)科技啟動Transwarp Data Cloud(TDC)數(shù)據(jù)云平臺的研發(fā);2018年,發(fā)布TDC 1.0版本;2019年5月,再次發(fā)布TDC 2.0版本。
對于星環(huán)科技而言,TDC數(shù)據(jù)云平臺是大數(shù)據(jù)3.0時代最佳的詮釋,它是為了滿足企業(yè)對于數(shù)據(jù)云需求而打造的云原生平臺,采用容器技術(shù),以數(shù)據(jù)為中心,通過提供完整的數(shù)據(jù)、應(yīng)用和智能的開發(fā)工具,實現(xiàn)數(shù)據(jù)和應(yīng)用互通互聯(lián)。
?從架構(gòu)上看,TDC數(shù)據(jù)云平臺分為三層:
底層是星環(huán)科技自研的容器操作系統(tǒng)TCOS,負責計算、內(nèi)存、存儲、網(wǎng)絡(luò)等資源的調(diào)度。
中間層是三個中心PaaS服務(wù),包括分析PaaS、數(shù)據(jù)PaaS、應(yīng)用PaaS:分析PaaS滿足數(shù)據(jù)分析服務(wù)內(nèi)外開放的需求,數(shù)據(jù)PaaS提供了數(shù)據(jù)處理和開發(fā)所需的數(shù)據(jù)庫服務(wù),應(yīng)用PaaS提供了應(yīng)用開發(fā)的各種框架以及中間件。
上層用來支撐各種應(yīng)用建設(shè),比如審批管理流程、用戶中心、訂單中心等業(yè)務(wù)應(yīng)用。
除此之外,TDC數(shù)據(jù)云平臺還提供專門的安全管理模塊,以及滿足多云管理、運維、計費等管理需求的云管平臺。
不難發(fā)現(xiàn),與傳統(tǒng)云平臺相比,TDC數(shù)據(jù)云平臺有著顯著不同:
第一,建設(shè)方式以數(shù)據(jù)為中心,而不是以資源為中心。TDC所有的架構(gòu)都是圍繞數(shù)據(jù)使用和管理的需求來設(shè)計的,通過提供數(shù)據(jù)資產(chǎn)服務(wù)、應(yīng)用開發(fā)和數(shù)據(jù)分析的完整工具鏈,來實現(xiàn)以數(shù)據(jù)驅(qū)動應(yīng)用的發(fā)展。
當企業(yè)去開發(fā)一個新應(yīng)用的時候,開發(fā)者只需關(guān)注自身的業(yè)務(wù)邏輯,開發(fā)模塊都可以從數(shù)字業(yè)務(wù)中心找到并直接使用。
第二,采用容器化技術(shù)替代傳統(tǒng)虛擬化技術(shù)。如今微服務(wù)開發(fā)模式廣受推崇,在互聯(lián)網(wǎng)企業(yè)覆蓋率已達到近90%,而容器技術(shù)能夠很好的滿足微服務(wù)所需要的輕量級、彈性、快速迭代的能力,同樣也可以支持包括分布式數(shù)據(jù)庫在內(nèi)的復(fù)雜業(yè)務(wù)系統(tǒng),對企業(yè)來說進一步降低了開發(fā)運維的難度。
因此,星環(huán)科技早在2016年就率先把大數(shù)據(jù)和容器化技術(shù)結(jié)合在一起,通過容器技術(shù)提供大數(shù)據(jù)的基礎(chǔ)服務(wù)。
第三,提供構(gòu)建數(shù)據(jù)和應(yīng)用互聯(lián)互通的混合云技術(shù)。無論數(shù)據(jù)、服務(wù)是構(gòu)建在邊緣端,還是在公有云或其他私有云,TDC都可以實現(xiàn)統(tǒng)一管理和調(diào)度,無需關(guān)注部署落地細節(jié)。
第四,以業(yè)務(wù)為導向,提供層次化設(shè)計的應(yīng)用開發(fā)方式。TDC在容器云上同時支持大數(shù)據(jù)和AI應(yīng)用,通過提供完整的數(shù)據(jù)、應(yīng)用和智能的開發(fā)工具,積累出企業(yè)的數(shù)據(jù)業(yè)務(wù)中心,從而滿足不同業(yè)務(wù),不同角色的工作需求,為企業(yè)打造出能夠支撐各種工作復(fù)雜的基礎(chǔ)平臺。
總體而言,TDC數(shù)據(jù)云致力于打造新一代的數(shù)字化基礎(chǔ)設(shè)施,它以數(shù)據(jù)為中心,讓大數(shù)據(jù)基礎(chǔ)架構(gòu)變得極度簡化的同時,也讓大數(shù)據(jù)向應(yīng)用化的方向邁出了重要的一步,從而為企業(yè)向數(shù)字化3.0演進提供了一個切實可落地的方案。
?數(shù)據(jù)驅(qū)動業(yè)務(wù)戰(zhàn)略下的大數(shù)據(jù)建設(shè)
大數(shù)據(jù)3.0看似剛剛開啟,其實離企業(yè)的真實業(yè)務(wù)場景并不遙遠。越來越多的業(yè)務(wù),不僅歷史數(shù)據(jù)需要在線化,當下的數(shù)據(jù)也需要實時分析。如今業(yè)界廣泛討論的“數(shù)據(jù)中臺”,其核心正是數(shù)據(jù)在線化。
大家有所不知的是,數(shù)據(jù)中臺其實需要一個完善的底層Pass平臺,這個平臺需要全品類的工具、分布式計算能力、數(shù)據(jù)建模能力等等,并且通過很好的應(yīng)用方式提供服務(wù)。星環(huán)科技的TDC數(shù)據(jù)云平臺,就是這樣一個可以支撐數(shù)據(jù)中臺的數(shù)字化基礎(chǔ)設(shè)施。
在未來,越來越多的企業(yè)轉(zhuǎn)向數(shù)據(jù)驅(qū)動業(yè)務(wù)戰(zhàn)略,擁有強大的數(shù)字化基礎(chǔ)設(shè)施將成為一種標配。大數(shù)據(jù)將不再以項目模式進行建設(shè),而是通過統(tǒng)一的數(shù)據(jù)平臺和標準化的應(yīng)用服務(wù)來提升業(yè)務(wù)效率。
這正是星環(huán)科技TDC數(shù)據(jù)云所擅長的,通過簡單、高效的方式進行大數(shù)據(jù)基礎(chǔ)設(shè)施的技術(shù)輸出,大幅降低大數(shù)據(jù)應(yīng)用門檻,將大數(shù)據(jù)技術(shù)真正落地到行業(yè)應(yīng)用和業(yè)務(wù)場景中。未來即使是幾個人的大數(shù)據(jù)技術(shù)團隊,也可以支持幾千業(yè)務(wù)人員快速變化的應(yīng)用需求。
對于大型企業(yè)來說,他們將是星環(huán)科技TDC數(shù)據(jù)云的首批受益者。由于此前已經(jīng)探索了大數(shù)據(jù)技術(shù)和具體的業(yè)務(wù)場景,嘗到了大數(shù)據(jù)技術(shù)帶來的“甜頭”,他們將更加堅定的應(yīng)用領(lǐng)先的大數(shù)據(jù)技術(shù),成為邁進大數(shù)據(jù)3.0的先行者。
對于更廣泛的中小企業(yè),星環(huán)科技也將構(gòu)建屬于他們的賦能方案,打通數(shù)據(jù)和業(yè)務(wù)之間的聯(lián)系,幫助這些企業(yè)更好的利用大數(shù)據(jù)技術(shù)。
不可否認的是,駕馭大數(shù)據(jù)的能力正在成為企業(yè)的核心競爭力,隨著企業(yè)自身數(shù)據(jù)價值觀念的轉(zhuǎn)變,對技術(shù)的接納將更加開放。
對于星環(huán)科技而言,其領(lǐng)先的技術(shù)能力和出色的行業(yè)服務(wù)能力,將助力企業(yè)循序漸進地完成數(shù)據(jù)賦能,順利實現(xiàn)數(shù)字化轉(zhuǎn)型。
【科技云報道原創(chuàng)】微信公眾賬號:科技云報道
來源:科技云報道
免責聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 蘋果開啟年終大促,降價1200元,被國產(chǎn)手機嚇怕了?
- 長三角,如何把數(shù)據(jù)要素變成新長江?
- 大模型,在內(nèi)卷中尋找出口
- 比亞迪“天神之眼”重磅升級:無圖城市領(lǐng)航功能全國開通
- 不愿成為微信的支付寶,注定失敗
- 大廠年終獎全靠猜?京東帶頭透明化
- MediaTek 發(fā)布天璣 8400 移動芯片,開啟高階智能手機全大核計算時代
- 榮耀攜手“哪吒”鬧新春,2025魔法科技年貨節(jié)同步開啟
- 榮耀Magic7系列全面升級大王影像,AI超級長焦讓百倍望遠也清晰
- 2024中國互聯(lián)網(wǎng)哈哈榜之2: 十大事件
免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。