我們正處在一個(gè)數(shù)據(jù)高速增長的“大數(shù)據(jù)”時(shí)代,海量數(shù)據(jù)呈指數(shù)性增長,但當(dāng)前客戶的業(yè)務(wù)數(shù)據(jù)呈現(xiàn)煙囪式分布,業(yè)務(wù)分析需求日益增長,傳統(tǒng)的開發(fā)模式成本高、分析慢、靈活性低,該如何存儲管理與應(yīng)用這些數(shù)據(jù)面臨著新的挑戰(zhàn)與機(jī)遇。
河南云帆電子科技有限公司(以下簡稱“云帆”)自成立以來,始終緊扣客戶需求和技術(shù)發(fā)展趨勢,依托云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)及視頻圖像分析等技術(shù),為客戶提供從頂層設(shè)計(jì)、方案規(guī)劃、定制開發(fā)、項(xiàng)目實(shí)施、運(yùn)維服務(wù)全方位一站式軟硬件整體解決方案,內(nèi)容包括:主機(jī)、存儲、備份、容災(zāi)、云計(jì)算等信息系統(tǒng)基礎(chǔ)架構(gòu)建設(shè),結(jié)構(gòu)化/非結(jié)構(gòu)化數(shù)據(jù)管理、大數(shù)據(jù)管理、數(shù)據(jù)挖掘等數(shù)據(jù)管理方案,樹立起了以服務(wù)和技術(shù)為核心的業(yè)務(wù)主導(dǎo)模式。
云帆開發(fā)的數(shù)據(jù)魔方系統(tǒng)是一款基于大規(guī)模并行數(shù)據(jù)庫的數(shù)據(jù)應(yīng)用工具,是一款通用數(shù)據(jù)查詢、分析軟件。
通過可視化建模方式,圖形化地反應(yīng)數(shù)據(jù)分析思路,滿足多層次用戶的通用數(shù)據(jù)查詢、分析軟件。從而實(shí)現(xiàn)了精準(zhǔn)數(shù)據(jù)篩選、靈活碰撞分析,滿足不同無技術(shù)背景用戶對數(shù)據(jù)的應(yīng)用需求,從根本上改變了傳統(tǒng)軟件的開發(fā)模式,讓新需求在短時(shí)間內(nèi)得到實(shí)現(xiàn)。
技術(shù)架構(gòu):
技術(shù)架構(gòu)
在計(jì)算分析層,通過部署多臺華為TaiShan服務(wù)器,組成計(jì)算集群。華為TaiShan服務(wù)器是基于鯤鵬處理器的高性能數(shù)據(jù)中心處理器,采用多核計(jì)算架構(gòu),主要應(yīng)用于大數(shù)據(jù)、分布式存儲、ARM原生應(yīng)用等場景。鯤鵬處理器擁有64個(gè)內(nèi)核,主頻可達(dá)2.6GHz,支持8通道DDR4,內(nèi)存帶寬可以超過主流46%,集成100G RoCE以太網(wǎng)卡功能,具有高性能、高吞吐、高集成、高能效等特點(diǎn),滿足數(shù)據(jù)魔方系統(tǒng)對于計(jì)算和分析需求。
在大數(shù)據(jù)層面,部署華為Gauss DB 數(shù)據(jù)庫軟件,它采用Shared Nothing 的列式數(shù)據(jù)存儲 MPP 架構(gòu),在TaiShan服務(wù)器多線程、高性能特性支持下,基于分布式多協(xié)調(diào)節(jié)點(diǎn)的集群架構(gòu),支持全分布式并行執(zhí)行,提升并發(fā)性能和可靠性,支持協(xié)調(diào)節(jié)點(diǎn)的負(fù)載均衡能力;支持SQL92、 SQL2003 標(biāo)準(zhǔn),支持 JDBC、 ODBC、ADO.NET、 Python 等標(biāo)準(zhǔn)訪問接口;支持基本的通過 SQL語句增、刪、改(對任何列)功能。數(shù)據(jù)魔方系統(tǒng)的成功融合,證明了華為TaiShan服務(wù)器在計(jì)算性能、穩(wěn)定性等方面已滿足大數(shù)據(jù)應(yīng)用的要求,對于十億級的數(shù)據(jù)統(tǒng)計(jì)分析實(shí)現(xiàn)了結(jié)果秒級展現(xiàn)。
使用TaiShan服務(wù)器的優(yōu)勢
²高性能:基于鯤鵬多核架構(gòu)+多核調(diào)度優(yōu)化算法,在OLAP數(shù)據(jù)庫場景下,性能提升40%;
²高吞吐:基于華為智能網(wǎng)卡的RoCE方案,卸載CPU負(fù)載;在OLTP數(shù)據(jù)庫場景下,網(wǎng)絡(luò)數(shù)據(jù)吞吐能力提升25%;通過在數(shù)據(jù)鎖、原子寫等基礎(chǔ)的優(yōu)化,以及基于鯤鵬處理器的高性能庫,如DMA的memory庫、達(dá)到IO加速的目的。
數(shù)據(jù)魔方的方案價(jià)值
²快速統(tǒng)一數(shù)據(jù)源,實(shí)現(xiàn)對各類資源的匯聚,打破數(shù)據(jù)壁壘;
²源于靈活、便捷產(chǎn)品特點(diǎn),用戶基于自己思路將數(shù)據(jù)重新的組合,實(shí)現(xiàn)可視化數(shù)據(jù)自主分析;
²與華為TaiShan服務(wù)器深度融合,采用分布式部署,加速數(shù)據(jù)的分析性能,從而能夠整體上提升公安辦公效能;
²降低數(shù)據(jù)分析的技術(shù)門檻,通過模型共享,實(shí)現(xiàn)用戶所思所想,同時(shí),經(jīng)驗(yàn)得到積累和分享。
云帆公司表示,面對著云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)及視頻圖像技術(shù)等應(yīng)用的不斷普及和深化,面對著機(jī)遇和挑戰(zhàn),云帆將繼續(xù)基于TaiShan服務(wù)器硬件基礎(chǔ)和生態(tài),不斷開發(fā)出分析能力強(qiáng)、靈活性高的數(shù)據(jù)管理、數(shù)據(jù)挖掘等數(shù)據(jù)管理產(chǎn)品和方案,打造出更多更好的大數(shù)據(jù)產(chǎn)品。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- LG新能源南京總部啟動(dòng),智能電池生產(chǎn)引領(lǐng)綠色未來
- 東芝涅槃:退市裁員后重回盈利,改革之路如何重塑輝煌?
- 大眾汽車管理層降薪風(fēng)暴:獎(jiǎng)金縮水,未來兩年減薪10%,求真還需看業(yè)績表現(xiàn)
- 知乎預(yù)測未來:黑神話悟空領(lǐng)銜,諾貝爾物理學(xué)獎(jiǎng)成焦點(diǎn)
- 蘋果新智能門鈴:帶Face ID、自研W-Fi芯片,安全與科技完美結(jié)合
- 天馬科技果鏈新身份:蘋果HomePod供應(yīng)商,LCD屏成本僅10美元,真實(shí)揭秘
- OpenAI GPT-5研發(fā)遭遇困境:成本高投入低,預(yù)期效果不盡人意
- 保時(shí)捷將重新評估電動(dòng)汽車計(jì)劃:銷量下滑,市場挑戰(zhàn)加劇
- 美團(tuán)旗下微信社群團(tuán)購業(yè)務(wù)年底停運(yùn),揭秘行業(yè)變局
- 李斌直言不諱:螢火蟲三重奏大燈設(shè)計(jì)拒絕iPhone影響,彰顯獨(dú)特魅力
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。