今年的雙十一感覺就是在拼記錄。根據(jù)阿里巴巴集團(tuán)披露的數(shù)據(jù),截至11日24時(shí),天貓“雙十一”全天交易額達(dá)912.17億元,其中無線交易額為626.42億元,占比68.67%;而在零點(diǎn)開始的搶購階段里,系統(tǒng)交易創(chuàng)建峰值達(dá)到每秒鐘14萬筆,支付峰值達(dá)到每秒鐘8.59萬筆。
好吧。對于不斷刷新記錄這件事兒,我們已經(jīng)習(xí)慣了。但是在一天的瘋狂購物中,阿里巴巴能夠穩(wěn)定支撐這么大的高并發(fā)交易,沒有因?yàn)橛脩舻寞偪顸c(diǎn)擊而陷入癱瘓——想想前陣子你們搶購iphone6s造成的官網(wǎng)登陸不上就知道這種事情多么容易出現(xiàn)了——還真的是值得我們點(diǎn)三十二個(gè)贊,所以這里難免還是要分析一下,阿里云的技術(shù)到底有多牛?為什么這么牛?
.壹.
.異地多活:
橫跨1000公里的高可靠性和高可用性.
多活指的多活體,也就是說多個(gè)服務(wù)器(通常是數(shù)據(jù)中心里的集群)同時(shí)運(yùn)行支撐業(yè)務(wù)運(yùn)行,打個(gè)比方就是多個(gè)人同時(shí)完成一個(gè)大項(xiàng)目,目的是什么呢?
一是保證高可靠性——簡單說不會(huì)說一個(gè)數(shù)據(jù)中心掛了,整個(gè)網(wǎng)站業(yè)務(wù)就停了,或者在主備(冷)模式下,主數(shù)據(jù)中心關(guān)了,最新數(shù)據(jù)沒同步,普通的歷史數(shù)據(jù)備份也就是算了(慢慢導(dǎo)),但這種高頻、實(shí)時(shí)的交易業(yè)務(wù)信息怎么辦?
二是保證高可用性——也就是說系統(tǒng)運(yùn)行順暢,客戶快快的訪問,少少的延時(shí),按照阿里巴巴技術(shù)保障部研究員林昊的說法,1000公里以上的網(wǎng)絡(luò)延遲來回一次是30毫秒左右,用戶其實(shí)沒有感受,但是當(dāng)用戶打開一個(gè)淘寶頁面的時(shí)候,一次點(diǎn)擊背后大概有100多次以上的后端交互,如果全部跨地域完成的話,就意味著頁面的響應(yīng)時(shí)間將增加3秒,不僅用戶絕對會(huì)有明顯感受,很多頁面也會(huì)因?yàn)槌瑫r(shí)出不來了。
反映到“多活”工作中,就要解決掉距離帶來的延時(shí)問題,以及多點(diǎn)寫入時(shí)對外數(shù)據(jù)顯示一致性的問題。怎么做?按照阿里大牛們的解釋,大概是這樣的思路,首先,在一個(gè)機(jī)房內(nèi)完成一次頁面訪問的整個(gè)操作,因?yàn)闆]有跨域,所以基本不存在延時(shí)的問題;其次,把業(yè)務(wù)劃成了各種各樣的單元,按照用戶維度、業(yè)務(wù)性質(zhì)等等進(jìn)行切分,單元封閉之后,讓單元內(nèi)的應(yīng)用訪問和數(shù)據(jù)的讀寫操作全部處于封閉狀態(tài),在一個(gè)單元里完成相應(yīng)的數(shù)據(jù)處理事務(wù),這樣解決數(shù)據(jù)對外顯示一致性的問題。
等一下?這看起來不還是單活的處理思路嗎?嗯。所以阿里云當(dāng)然還有最關(guān)鍵的一個(gè)核心技術(shù)產(chǎn)品,數(shù)據(jù)遷移服務(wù)DTS,實(shí)現(xiàn)異地?cái)?shù)據(jù)中心的數(shù)據(jù)同步,解決掉多活體之間的數(shù)據(jù)一致問題。據(jù)說在2015年“雙十一”中,所有數(shù)據(jù)同步控制在1秒以內(nèi)!
所以,阿里云牛的地方,不僅在于實(shí)現(xiàn)了多活(不僅是2個(gè)哦),還在于異地多活,以及橫跨1000公里的異地多活(這意味著在全國任意一個(gè)城市來部署同步協(xié)調(diào)支持?jǐn)?shù)據(jù)中心了)。
.貳.
.分布式關(guān)系數(shù)據(jù)庫:
支付寶的秘密武器.
今年雙十一,支付寶整個(gè)核心鏈路是運(yùn)行在OceanBase上面的,數(shù)字呢,一個(gè)是上面提到的14萬每秒的訂單創(chuàng)建,8.59萬筆每秒的支付,還有就是一天10TB左右的數(shù)據(jù)庫寫入量。
數(shù)字是不是看起來仍然已經(jīng)無感?我們來說OceanBase,這個(gè)由阿里巴巴自主研發(fā)的中國首個(gè)具有自主知識(shí)產(chǎn)權(quán)的數(shù)據(jù)庫,也是全球首個(gè)應(yīng)用在金融業(yè)務(wù)的分布式關(guān)系數(shù)據(jù)庫。
傳統(tǒng)關(guān)系型數(shù)據(jù)庫,比如Oracle或者M(jìn)ySQL功能已經(jīng)很完善,但數(shù)據(jù)庫本身不可擴(kuò)展,隨著數(shù)據(jù)量的增大和業(yè)務(wù)內(nèi)容的豐富,需要拆庫拆表,然后再進(jìn)行訪問路由,將相應(yīng)的SQL解析路由到指定的數(shù)據(jù)庫中,比如阿里就曾經(jīng)研發(fā)出TDDL這個(gè)通用數(shù)據(jù)訪問層,但隨著數(shù)據(jù)量的一直增長,這種拆庫拆表的做法對性能有著明顯的影響。
而OceanBase相當(dāng)于加持了擴(kuò)展(Scalability)屬性的關(guān)系型數(shù)據(jù)庫。
傳說中的OceanBase的架構(gòu)
OceanBase的做法是保持相對穩(wěn)定的主體數(shù)據(jù)(基準(zhǔn)數(shù)據(jù))不變,將把一段時(shí)間內(nèi)的增刪改等修改操作以增量形式記錄下來,放在內(nèi)存中處理?;鶞?zhǔn)數(shù)據(jù)按照主鍵分段后保存在到多臺(tái)機(jī)器(ChunkServer) 并且由于按主鍵分塊連續(xù)存放,因此OceanBase按主鍵的范圍查詢對應(yīng)著連續(xù)的磁盤讀,十分高效;而由于增刪改等動(dòng)態(tài)數(shù)據(jù)相對較小,通常情況下,OceanBase把它保存在獨(dú)立的服務(wù)器UpdateServer的內(nèi)存中,這樣極大地提高了系統(tǒng)寫事務(wù)的性能,在修改凍結(jié)后,保存到SSD固態(tài)硬盤上釋放內(nèi)存空間。
其他組件中,MergeServer結(jié)合ChunkServer和UpdateServer,獲得最新數(shù)據(jù),實(shí)現(xiàn)數(shù)據(jù)一致性;而RootServer進(jìn)行機(jī)器故障檢測、負(fù)載平衡計(jì)算、負(fù)載遷移調(diào)度等工作。
問題來了,內(nèi)存掉電,數(shù)據(jù)丟失咋辦?
OceanBase有著可靠的數(shù)據(jù)庫操作日志記錄,如果出現(xiàn)掉電或故障,可以通過日志回訪出來。這樣,在內(nèi)存里進(jìn)行相應(yīng)的數(shù)據(jù)查詢、修改,然后定期把大量的數(shù)據(jù)跟增量的修改做合并,不停滾動(dòng)的話數(shù)據(jù)庫就一直更新,保證在內(nèi)存里的數(shù)據(jù)永遠(yuǎn)是少量的,做到很高的性能。
OceanBase 2010年誕生,2014年支撐了10%的雙11交易流量。今年6月,網(wǎng)商銀行開業(yè),底層數(shù)據(jù)庫全部采用OceanBase,是第一家完全擺脫商業(yè)數(shù)據(jù)庫的金融機(jī)構(gòu)。
與傳統(tǒng)數(shù)據(jù)庫相比,OceanBase的系統(tǒng)維護(hù),不需要昂貴的共享存儲(chǔ)設(shè)備和高性能服務(wù)器,還能節(jié)省數(shù)據(jù)庫軟件的許可費(fèi),和常用的商業(yè)數(shù)據(jù)庫相比,成本不到其一半。同時(shí),分布式的系統(tǒng),可以更好地應(yīng)對雙11這類大流量沖擊:彈性能力可保證大促之前完成一鍵擴(kuò)容、大促之后實(shí)現(xiàn)一鍵縮容。
據(jù)說,OceanBase也計(jì)劃于明年通過阿里云的公共云計(jì)算平臺(tái)對外界開放。
.叁.
.混合云架構(gòu)實(shí)踐:
10000個(gè)阿里的河源.
回到我們開篇那句看起來似乎有些問題的話,為什么好好說著阿里巴巴的銷售記錄,特意轉(zhuǎn)到阿里云的技術(shù)呢?是因?yàn)?,根?jù)介紹,今年雙十一淘寶天貓核心交易鏈條和支付寶核心支付鏈條的部分流量,直接切換到阿里云的公共云計(jì)算平臺(tái)上。通過將公共云和專有云無縫連接的模式——也就是大家熟知的混合云模式,全面支撐雙十一。
按照阿里云總裁胡曉明的說法,阿里巴巴希望在自身最重要商業(yè)實(shí)踐中,驗(yàn)證云計(jì)算的安全性、可靠性,向世界證明云計(jì)算的優(yōu)勢。也正是基于這種混合云模式,阿里巴巴能夠充分利用云計(jì)算的彈性優(yōu)勢,隨時(shí)調(diào)度資源。而在雙十一之后,又能快速歸還資源,避免高峰期過后的閑置浪費(fèi)。
從以往的經(jīng)驗(yàn)來看,無論是在余額寶、花唄的誕生,還是OceanBase的誕生等等,都是阿里巴巴被現(xiàn)實(shí)需求及不給力的合作環(huán)境倒逼出來的業(yè)務(wù)創(chuàng)新。如果不去做業(yè)務(wù)創(chuàng)新,新的業(yè)務(wù)需求無法滿足,或者無法以符合成本效率的條件滿足,所以阿里巴巴、阿里云開發(fā)出一個(gè)個(gè)具有核心競爭力的突破性的技術(shù)。
從目前的情況來看,阿里云正在把這些技術(shù)一個(gè)個(gè)開放出來,供更多的企業(yè)使用,如胡曉明強(qiáng)調(diào)的,“這一混合云架構(gòu)完全基于阿里云官網(wǎng)在售的標(biāo)準(zhǔn)化產(chǎn)品搭建的。也就是說,你通過這些標(biāo)準(zhǔn)化的產(chǎn)品,也可以搭建一個(gè)像淘寶、天貓這樣的萬億級企業(yè)應(yīng)用,滿足任何極端的業(yè)務(wù)挑戰(zhàn)?!?/p>
為了更好的支持企業(yè)使用阿里云的各種技術(shù),阿里云還推出了“一鍵建站技術(shù)”,在基礎(chǔ)設(shè)施具備的條件下,通過阿里自研的自動(dòng)化軟件,將中間件、數(shù)據(jù)庫、商品交易系統(tǒng)、商品展示系統(tǒng)等上百個(gè)電商核心系統(tǒng),像搭積木一樣部署完成。整個(gè)過程一鍵完成,基本無需人工干預(yù),所需時(shí)間不到90分鐘——即使像今年的淘寶、天貓交易單元,也是在90分鐘之內(nèi)自動(dòng)化完成的。
所以,如果企業(yè)能夠采用混合云的模式,將核心系統(tǒng)運(yùn)行在云里,使用阿里云開發(fā)出來的各種能力,快速發(fā)展成另一個(gè)阿里巴巴,也不能說是一種奢望。從這個(gè)角度看,這次的雙十一混合云架構(gòu)實(shí)踐,是未來中國更多巨型企業(yè)成型的河源,也是大大有可能的。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 美媒聚焦比亞迪“副業(yè)”:電子代工助力蘋果,下個(gè)大計(jì)劃瞄準(zhǔn)AI機(jī)器人
- 微信零錢通新政策:銀行卡轉(zhuǎn)入資金提現(xiàn)免手續(xù)費(fèi)引熱議
- 消息稱塔塔集團(tuán)將收購和碩印度iPhone代工廠60%股份 并接管日常運(yùn)營
- 蘋果揭秘自研芯片成功之道:領(lǐng)先技術(shù)與深度整合是關(guān)鍵
- 英偉達(dá)新一代Blackwell GPU面臨過熱挑戰(zhàn),交付延期引發(fā)市場關(guān)注
- 馬斯克能否成為 AI 部部長?硅谷與白宮的聯(lián)系日益緊密
- 余承東:Mate70將在26號(hào)發(fā)布,意外泄露引發(fā)關(guān)注
- 無人機(jī)“黑科技”亮相航展:全球首臺(tái)低空重力測量系統(tǒng)引關(guān)注
- 賽力斯發(fā)布聲明:未與任何伙伴聯(lián)合開展人形機(jī)器人合作
- 賽力斯觸及漲停,汽車整車股盤初強(qiáng)勢拉升
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。