存儲產(chǎn)業(yè)正在發(fā)生顛覆性的變化,主要有兩大推手:一個是新一代存儲介質(zhì)SSD;另一個是分布式存儲的演進(jìn),以SDS(軟件定義存儲)為代表。
根據(jù)IDC預(yù)計,2017年~2021年期間,全球軟件定義存儲市場的復(fù)合年增長率將達(dá)到13.5%,到2021年市場規(guī)??山咏?62億美元。在SDS市場中,主要細(xì)分市場為塊、文件、對象和超融合基礎(chǔ)設(shè)施(HCI)。IDC預(yù)計,SDS市場未來五年復(fù)合增長率為28.8%,超融合市場為24.7%。
應(yīng)用如何過渡、遷移?
分布式存儲技術(shù)首先成功應(yīng)用在互聯(lián)網(wǎng)企業(yè)的應(yīng)用場景。
鑒于無法預(yù)計的互聯(lián)網(wǎng)訪問流量,互聯(lián)網(wǎng)迫切需要一種彈性十足的IT基礎(chǔ)架構(gòu),傳統(tǒng)磁盤陣列以Scale Up為主,且價格昂貴,難以滿足需求。對此,互聯(lián)網(wǎng)企業(yè)不得不尋求更加具有成本競爭力的方案。
以成本優(yōu)異的x86工業(yè)標(biāo)準(zhǔn)服務(wù)器為基礎(chǔ),通過強(qiáng)大的軟件調(diào)度管理能力,互聯(lián)網(wǎng)企業(yè)成功踐行了分布式軟件定義存儲,從而開辟了以Scale Out為特征的分布式存儲應(yīng)用。
但是與互聯(lián)網(wǎng)企業(yè)不同,傳統(tǒng)企業(yè)以往多采用集中部署模式,例如存儲以磁盤陣列為主,屬于Scale Up模式,上層應(yīng)用也是建立在這個模式基礎(chǔ)上的。
換句話說,與互聯(lián)網(wǎng)企業(yè)相比,傳統(tǒng)行業(yè)企業(yè)有歷史的包袱,存在兼容性的問題。此外,行業(yè)性質(zhì)以及監(jiān)管不同,較之互聯(lián)網(wǎng)企業(yè),傳統(tǒng)行業(yè)企業(yè)用戶對于可靠性、穩(wěn)定性有更高的需求。
如今,云計算是產(chǎn)業(yè)發(fā)展的潮流和趨勢,對于傳統(tǒng)企業(yè)來說,云環(huán)境部署更加復(fù)雜。如今,有一種觀點認(rèn)為:OpenStack作為私有云標(biāo)準(zhǔn)大局已定。與之相適應(yīng),有觀點認(rèn)為,較之Sheepdog、MooseFS等開源系統(tǒng),以及眾多自主研發(fā)的系統(tǒng),作為OpenStack認(rèn)證對接的分布式存儲,Ceph才是最為理想的選擇。
真的是這樣的嗎?
有關(guān)“塊”的問題
所謂OpenStack認(rèn)證對接的分布式存儲,并不意味Ceph就是最好的選擇,Ceph并不是OpenStack環(huán)境的標(biāo)配,Ceph只是適逢其會。如果了解Ceph就會知道,其絕大部分核心代碼都出自Inktank團(tuán)隊,如今已經(jīng)被Redhat整體收購。它只是一種分布式存儲的開源架構(gòu),并沒有充分考慮企業(yè)級應(yīng)用的需求。而且Ceph設(shè)計之初就定位為“分布式文件系統(tǒng)”,并沒有關(guān)注“塊設(shè)備”應(yīng)用環(huán)境低延遲、高性能的特性。
換句話說:在“塊設(shè)備”應(yīng)用的場景,Ceph本身是不擅長的。
鵬云網(wǎng)絡(luò)創(chuàng)始人陳靚博士
原AWS核心架構(gòu)師、S3、Glacier存儲項目團(tuán)隊負(fù)責(zé)人,華裔科學(xué)家陳靚先生表示:傳統(tǒng)企業(yè)應(yīng)用上云,在存儲方面需要解決:
1)可用性與可靠性,這是用戶最為關(guān)心的問題,當(dāng)節(jié)點或磁盤故障時,業(yè)務(wù)不停,數(shù)據(jù)不丟是必須的。但限于crush機(jī)制,Ceph系統(tǒng)在節(jié)點當(dāng)機(jī)時會造成IO中斷,前端業(yè)務(wù)會受到一定影響。
2)性能。Ceph基于對象存儲,IO延遲長,而傳統(tǒng)業(yè)務(wù)系統(tǒng)對IO延遲比較敏感。
3)應(yīng)提供豐富的企業(yè)級存儲服務(wù)功能,例如,快照/克隆技術(shù)提供快速數(shù)據(jù)恢復(fù)、以及多用途數(shù)據(jù)副本等能力;在線遷移能夠根據(jù)實際需求為業(yè)務(wù)系統(tǒng)調(diào)整存儲資源配置;QoS功能在多業(yè)務(wù)系統(tǒng)復(fù)雜環(huán)境下充分保證關(guān)鍵業(yè)務(wù)系統(tǒng)的存儲性能供給。
以上這些問題,用戶都可以在產(chǎn)品測試過程中進(jìn)行實際的驗證和考察,眼見為實。
ZettaStor和原生塊存儲
作為原AWS核心架構(gòu)師、S3、Glacier存儲項目團(tuán)隊負(fù)責(zé)人,陳靚先生非常了解對象存儲應(yīng)對塊數(shù)據(jù)需求的不足。
機(jī)緣巧合,2012年,陳靚應(yīng)南京市政府的感召歸國創(chuàng)業(yè),創(chuàng)辦了南京鵬云網(wǎng)絡(luò)科技有限公司,并推出了從最底層開始研發(fā)的ZettaStor DBS軟件定義分布式存儲系統(tǒng),提出了原生塊存儲的概念。
它是以裸設(shè)備方式直接管理底層硬盤,并整合成為塊存儲資源供上層應(yīng)用來訪問使用,由于并不存在對象存儲的中間轉(zhuǎn)換過程,因此能夠?qū)崿F(xiàn)低延遲的高I/O訪問效率。
考慮到傳統(tǒng)企業(yè)級應(yīng)用對于功能的需求,ZettaStor DBS還提供了自動精簡配置、快照/克隆、分級存儲、數(shù)據(jù)復(fù)制和遷移、SSD緩存加速、QoS管理、訪問控制、多路徑冗余等完整的功能。ZettaStor DBS所具有的機(jī)房多級容災(zāi)、故障域隔離、雙活容災(zāi)解決方案可以很好滿足企業(yè)級用戶業(yè)務(wù)的需求。
ZettaStor DBS以標(biāo)準(zhǔn)的iSCSI/SCSI協(xié)議和私有的LBD協(xié)議對外提供存儲服務(wù),并可以通過對接Cinder API、標(biāo)準(zhǔn)REST接口,可以為OpenStack等云計算管理平臺的統(tǒng)一管理提供技術(shù)支持!
ZettaStor DBS產(chǎn)品架構(gòu)圖
測試中的 “貓膩”
談到原生塊存儲,陳靚表示:其實概念并不重要。在擔(dān)任AWS核心架構(gòu)師期間,其內(nèi)部很少談?wù)摳拍?,更多是專注在要解決哪些技術(shù)問題。用戶應(yīng)該更加專注需要解決的問題,而不應(yīng)該盲從于概念、標(biāo)準(zhǔn)或者趨勢。其實,關(guān)注問題不同,著眼點也不同。
對于原生塊存儲、非原生塊存儲,測試和驗證將是一個非常重要的方法。但是在測試過程中,也應(yīng)該結(jié)合實際,謹(jǐn)防被一些“貓膩”手段所蒙蔽。
以可靠性測試為例,重點要考察的是:當(dāng)集群中磁盤或節(jié)點發(fā)生故障時,數(shù)據(jù)會不會丟失?業(yè)務(wù)會不會中斷?中斷的時長是多少?
很多SDS的容錯域都是提前配置好的。以3副本9個節(jié)點為例,通常會配置3個容錯域A\B\C、每個容錯域各3個節(jié)點,每個容錯域保存獨立的副本數(shù)據(jù)。例如當(dāng)以一個容錯域A的3臺機(jī)器都故障時,還有兩2個副本存在,數(shù)據(jù)不會丟失,業(yè)務(wù)照常運行,這就是通常所說的能容忍1/3節(jié)點宕機(jī)。這樣的要求大多數(shù)廠家都能做到,但如果同時B域或者C域也有機(jī)器down機(jī)呢?
這就是測試中,用戶需要仔細(xì)考察和驗證的。
再以性能測試為例,SSD緩存對性能測試有很大的影響,特別在小數(shù)據(jù)量時,看不出來系統(tǒng)的差異,但在實際中,當(dāng)數(shù)據(jù)量、負(fù)載加大,SSD存在被穿透的可能,這時數(shù)據(jù)就需要落盤(寫到硬盤),這個時候良莠不齊,高低立判。這就是為什么很多以ceph為基礎(chǔ)二次開發(fā)的系統(tǒng)把SSD緩存做為標(biāo)配的原因,因為一旦沒有SSD加速性能會變得很差。
當(dāng)系統(tǒng)發(fā)生磁盤/節(jié)點故障,恢復(fù)數(shù)據(jù)是否會影響系統(tǒng)性能表現(xiàn)。以Ceph為例,其元數(shù)據(jù)管理和尋址采用的是Crush算法,在節(jié)點動蕩時,元數(shù)據(jù)(其實是ceph內(nèi)部保存的資源列表)發(fā)生變化,會導(dǎo)致大量的沒有必要的數(shù)據(jù)遷移,不僅導(dǎo)致網(wǎng)絡(luò)帶寬擁擠,嚴(yán)重時會導(dǎo)致業(yè)務(wù)系統(tǒng)訪問受影響。
小結(jié)
傳統(tǒng)企業(yè)沒有辦法和互聯(lián)網(wǎng)企業(yè)相比,無論IT管理模式,技術(shù)水平,還是發(fā)展階段,二者完全不同。所謂橘生淮南則為橘,生于淮北則為枳,無論對于互聯(lián)網(wǎng)企業(yè)、云計算服務(wù)商,還是對于傳統(tǒng)企業(yè)用戶,服務(wù)的對象,面臨場景不同,其選擇也就不同,切不可為商業(yè)化的宣傳所誤導(dǎo)!
- 為什么年輕人不愛換手機(jī)了
- 柔宇科技未履行金額近億元被曝已6個月發(fā)不出工資
- 柔宇科技被曝已6個月發(fā)不出工資 公司回應(yīng)欠薪有補(bǔ)償方案
- 第六座“綠動未來”環(huán)保公益圖書館落地貴州山區(qū)小學(xué)
- 窺見“新紀(jì)元”,2021元宇宙產(chǎn)業(yè)發(fā)展高峰論壇“廣州啟幕”
- 以人為本,景悅科技解讀智慧城市發(fā)展新理念
- 紐迪瑞科技/NDT賦能黑鯊4 Pro游戲手機(jī)打造全新一代屏幕壓感
- 清潔家電新老玩家市場定位清晰,攜手共進(jìn),核心技術(shù)決定未來
- 新思科技與芯耀輝在IP產(chǎn)品領(lǐng)域達(dá)成戰(zhàn)略合作伙伴關(guān)系
- 芯耀輝加速全球化部署,任命原Intel高管出任全球總裁
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。