-
阿里CTO張建鋒:雙11背后是中國(guó)唯一自研的飛天云
最后更新: 2019-11-12 06:53:11(觀察者網(wǎng)訊)
“不是任何一朵云都能撐住這個(gè)流量。如果說(shuō)中國(guó)有兩朵云,一朵是阿里云,一朵是其他云?!?1月11日晚,阿里巴巴集團(tuán)CTO張建鋒表示,“阿里云不一樣,10年前我們從第一行代碼寫起,構(gòu)建了中國(guó)唯一自研的云操作系統(tǒng)飛天。”
2019天貓雙11再次刷新世界紀(jì)錄,訂單創(chuàng)新峰值達(dá)到54.4萬(wàn)筆/秒,單日數(shù)據(jù)處理量達(dá)到970PB。今年阿里巴巴核心系統(tǒng)100%上云,撐住了雙11的世界級(jí)流量洪峰。
“阿里巴巴是一架高速飛行中的飛機(jī),我們成功在此過(guò)程中換上了全新的引擎。”張建鋒說(shuō),用公共云來(lái)承載這樣一個(gè)萬(wàn)億規(guī)模的核心系統(tǒng),阿里云是第一個(gè)做到的,“很多云廠商自己的業(yè)務(wù)系統(tǒng),不在自己的云上,今后阿里全部系統(tǒng)都在阿里云上?!?
據(jù)了解,阿里巴巴是全球首家將核心系統(tǒng)100%運(yùn)行在公共云上的大型互聯(lián)網(wǎng)公司。同為云計(jì)算巨頭的亞馬遜、微軟、Google,都尚未邁出這一步。
——附錄:張建鋒演講核心觀點(diǎn)
從去年開(kāi)始,我們決定把整個(gè)阿里巴巴核心系統(tǒng)全部上云,上云還要加一個(gè)定語(yǔ),是上“阿里云”,并不是上任何一朵云都能撐得住這個(gè)流量。在中國(guó),我們經(jīng)常說(shuō)中國(guó)有兩朵云,一朵叫做“阿里云”,還有一朵叫做“其它云”。
為什么講阿里云跟其它云不一樣?因?yàn)樵谥袊?guó)只有阿里云是完全從頭研發(fā)的一朵云,從頭是從每一行代碼,從十年前開(kāi)始寫,今年是阿里云的第10年,所以我們的云有一個(gè)特別的名字,叫做“飛天操作系統(tǒng)”,當(dāng)初王堅(jiān)博士創(chuàng)辦阿里云的時(shí)候,對(duì)我們這個(gè)云下面的調(diào)度系統(tǒng),整個(gè)云的基礎(chǔ)平臺(tái),取名叫做“飛天操作系統(tǒng)”。
我們的云完全是中國(guó)自研的一朵云,其它很多云從開(kāi)源軟件改造過(guò)來(lái)的,這是非常大的不一樣。
第二個(gè),今年雙11,阿里仍然是一家在高速飛行中的飛機(jī),我們成功的在這個(gè)過(guò)程中換上了全新的引擎。以前大家把非核心負(fù)載放在云上,現(xiàn)在阿里巴巴最核心的系統(tǒng)放在了云上?,F(xiàn)在我們的云把原來(lái)專用的技術(shù)變成公共云,大家都可以來(lái)享受普惠服務(wù)。我們有最好的系統(tǒng),你們也可以在上面跟我們一樣使用。
阿里云承載阿里巴巴自己100%的核心系統(tǒng),這個(gè)是我們?nèi)虻谝粋€(gè)做到的。很多云廠商自己也有業(yè)務(wù)系統(tǒng),但是自己的系統(tǒng)不在自己的云上。我們以后所有阿里系統(tǒng)全部都在阿里云的飛天操作系統(tǒng)上面。
大家一定會(huì)想,這是一個(gè)簡(jiǎn)單的替換還是技術(shù)上非常大的一個(gè)進(jìn)步、非常大的挑戰(zhàn)?我簡(jiǎn)單說(shuō)一下,我們有幾個(gè)方面做得非常好,它不是簡(jiǎn)單的替換,上云之后性能有了一個(gè)非常大的提高。
今天大家可能有感覺(jué),我們前十分鐘,基本上消費(fèi)者沒(méi)有感受到任何抖動(dòng),大家購(gòu)物非常順暢。
第一、我們?cè)诤诵奶摂M機(jī)系統(tǒng)上,自研神龍架構(gòu),用自研的服務(wù)器來(lái)做虛擬化。一般的服務(wù)器隨著壓力增長(zhǎng),最終負(fù)載能力會(huì)慢慢下降,它不是線性的。我們神龍服務(wù)器壓力越大,輸出也是非常線性的,這是非常難做到的。
第二、我們自研了云原生的數(shù)據(jù)庫(kù)。今年有兩個(gè)數(shù)據(jù)庫(kù),一個(gè)是自研的OceanBase,大家知道我們?cè)赥PC-C測(cè)試?yán)锩婺孟铝巳虻谝?。第二是PolarDB,也廣泛用在這次雙11上,沒(méi)有任何問(wèn)題,我們每秒峰值也是遠(yuǎn)遠(yuǎn)超越于原來(lái)Oracle這樣傳統(tǒng)的數(shù)據(jù)庫(kù)。
第三、我們的計(jì)算與存儲(chǔ)做了分離,現(xiàn)在阿里巴巴存儲(chǔ)是有一個(gè)地方專門存數(shù)據(jù)。數(shù)據(jù)都是從遠(yuǎn)端存取的,所以存儲(chǔ)可以很方便的擴(kuò)容,因?yàn)樗幸粋€(gè)專門的池。原來(lái)做不到。因?yàn)樵瓉?lái)遠(yuǎn)端存儲(chǔ),訪問(wèn)網(wǎng)絡(luò)速度就跟不上。
第四、之所以現(xiàn)在能夠做到在遠(yuǎn)端存儲(chǔ),能夠比本地讀寫磁盤更快,是因?yàn)槲覀冏隽薘DMA網(wǎng)絡(luò),這是全球第一個(gè)大規(guī)模做RDMA網(wǎng)絡(luò)的公司。
我們這四個(gè)方面都做了核心突破。
今天,飛天操作系統(tǒng)能夠在10萬(wàn)臺(tái)級(jí)別以上的服務(wù)器里面做調(diào)度,今天雙11有非常多的應(yīng)用,但是它并不是說(shuō)每一個(gè)時(shí)間點(diǎn),所有應(yīng)用負(fù)載都是一樣的。我們?cè)诹泓c(diǎn)把大部分計(jì)算機(jī)資源分配給交易等應(yīng)用,過(guò)了一點(diǎn)之后,我們把數(shù)據(jù)分配給數(shù)據(jù)處理系統(tǒng)。數(shù)據(jù)處理今年創(chuàng)了一個(gè)新高,2017年當(dāng)天處理了300PB的數(shù)據(jù),2018年處理了600PB的數(shù)據(jù),今年要處理970P左右的數(shù)據(jù)。
大家可能沒(méi)有概念,一個(gè)P到底有多少數(shù)據(jù),我上次跟央視的人交流,央視拍了這么多年電視新聞節(jié)目,幾十年下來(lái)他了大概80P的數(shù)據(jù)。雙11一天,我們要處理970P的數(shù)據(jù),非常大的量,沒(méi)有一個(gè)先進(jìn)的系統(tǒng)是撐不住的。
第二個(gè)是非常實(shí)時(shí),大家看到了,今天在秒殺,在會(huì)場(chǎng)全部都是個(gè)性化、千人千面的,這里的數(shù)據(jù)不僅是大,而且是要做到非常實(shí)時(shí)。到目前為止,我們菜鳥(niǎo)物流系統(tǒng)已經(jīng)產(chǎn)生了超過(guò)10億筆的物流單,這個(gè)數(shù)據(jù)還在很快的上漲,這些都需要依靠阿里云背后大量的計(jì)算能力。
我們今年的數(shù)據(jù),除了批處理之外,還有流處理,就是實(shí)時(shí)處理所有數(shù)據(jù),就像你們看到的交易數(shù)據(jù),每分鐘、每秒鐘都在變,它并不是從數(shù)據(jù)庫(kù)里面統(tǒng)計(jì)出來(lái)的,它是每生成一筆訂單,系統(tǒng)自動(dòng)一層層把數(shù)據(jù)匯集上來(lái)。我們這個(gè)系統(tǒng)每秒能處理25億筆記錄,這是流式的系統(tǒng)。
我們這么多服務(wù)器,要把它全部管理起來(lái),除了飛天系統(tǒng)之外,還要管理所有的消息流轉(zhuǎn),所以我們自己開(kāi)發(fā)了一個(gè)叫做MQ的消息系統(tǒng),這也是全球目前最大的一個(gè)消息系統(tǒng)。
今天,從飛天系統(tǒng)、大數(shù)據(jù)處理平臺(tái)到智能化應(yīng)用,這些技術(shù)疊加起來(lái)打造了一個(gè)新的分布式的基于云的平臺(tái),才使得阿里整個(gè)經(jīng)濟(jì)體所有核心應(yīng)用都能夠跑在上面。
最后,我們今年發(fā)布了自研的芯片含光800。明年雙11,阿里大量人工智能應(yīng)用都會(huì)跑在自研芯片上面。
今天從飛天云操作系統(tǒng)到神龍服務(wù)器、數(shù)據(jù)庫(kù)、交換機(jī)、交換機(jī)操作系統(tǒng)、RDMA網(wǎng)絡(luò),全部是阿里自研的。我們今天已經(jīng)積累了非常豐富、非常強(qiáng)的能力,從硬件、數(shù)據(jù)庫(kù)、云計(jì)算操作系統(tǒng),到上面的核心應(yīng)用平臺(tái),四位一體,這是這次雙11跟往年最大不一樣的地方。
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 原標(biāo)題:京東11月1日-11日累計(jì)下單金額達(dá)2044億元
- 責(zé)任編輯: 弘毅 
-
蘋果供貨商良品率低遭棄?回應(yīng):不實(shí),臺(tái)媒炒作6月舊事
2019-11-11 12:34 股市 -
鄔賀銓:中國(guó)5G輻射遠(yuǎn)低于歐美 但老百姓愛(ài)看養(yǎng)生節(jié)目
2019-11-10 22:44 5G -
石墨烯再“立功”!中國(guó)科學(xué)家成功研制高速晶體管
2019-11-10 21:02 科技前沿 -
川藏鐵路拉林段跨雅魯藏布江大橋合龍,明年鋪軌
2019-11-10 17:11 科技前沿 -
日本數(shù)碼巨頭奧林巴斯將退出相機(jī)市場(chǎng) 三星or索尼接盤
2019-11-10 16:25 科技前沿 -
華為入場(chǎng),能否幫中國(guó)破局車載雷達(dá)市場(chǎng)?
2019-11-10 09:30 汽車工業(yè) -
國(guó)內(nèi)首套!華工科技向印度出口大型激光切焊一體機(jī)
2019-11-09 20:31 -
華為Mate X不能在-5℃及低于該溫度的環(huán)境下彎折
2019-11-08 21:06 -
從差1萬(wàn)到反超20萬(wàn),平板電腦銷量冠軍3個(gè)季度后易主
2019-11-08 17:10 消費(fèi) -
華為在華優(yōu)勢(shì)擴(kuò)大之際,聯(lián)想將手機(jī)下個(gè)戰(zhàn)場(chǎng)放往歐洲
2019-11-08 13:59 手機(jī) -
不止是導(dǎo)航!北斗高精準(zhǔn)燃?xì)庑孤z測(cè)系統(tǒng)首發(fā)
2019-11-08 13:56 北斗照耀 -
中國(guó)新一代智能B型地鐵通過(guò)無(wú)人駕駛測(cè)試 內(nèi)置“黑科技”
2019-11-08 11:09 -
我科學(xué)家研獲高性能柔性有機(jī)太陽(yáng)能電池
2019-11-07 07:39 科技前沿 -
我國(guó)正式啟動(dòng)6G研發(fā)
2019-11-06 19:59 科技前沿 -
直播:任正非對(duì)話?cǎi)R凱碩
2019-11-06 16:21 華為 -
三星折疊屏手機(jī)國(guó)行上架,不支持5G,售價(jià)15999元
2019-11-06 13:24 手機(jī) -
我國(guó)開(kāi)發(fā)出高能量密度的柔性鈉離子微型超級(jí)電容器
2019-11-05 21:53 -
并列DxOMark第一,雷軍:有友商華為,是小米最大幸運(yùn)
2019-11-05 20:43 手機(jī) -
任正非:研發(fā)基層管理不改革,我們就是下一個(gè)惠普
2019-11-05 10:23 華為
相關(guān)推薦 -
“我們目前世界領(lǐng)先,但中國(guó)人正敲開(kāi)我們的大門” 評(píng)論 61“不止美德,北約至少七國(guó)反對(duì)” 評(píng)論 58134條!金磚通過(guò)《喀山宣言》,“將在聯(lián)合國(guó)分發(fā)” 評(píng)論 166他拒談2000億英鎊奴隸制賠償:就不能往前看? 評(píng)論 252關(guān)鍵時(shí)期,歐盟單獨(dú)約談個(gè)別車企妄圖分化中方 評(píng)論 374最新聞 Hot
-
“我們目前世界領(lǐng)先,但中國(guó)人正敲開(kāi)我們的大門”
-
“我不太喜歡談?wù)摳?jìng)爭(zhēng),但我開(kāi)的是小米”
-
盧卡申科評(píng)“朝軍援俄”:胡說(shuō)八道,普京不是這性格
-
“不止美德,北約至少七國(guó)反對(duì)”
-
華裔老板拒絕“背書”哈里斯,加州第一大報(bào)編委辭職
-
英高級(jí)外交官搶、奪、撕...扎哈羅娃怒斥
-
連他都不敢說(shuō),“怕被特朗普?qǐng)?bào)復(fù)”
-
134條!金磚通過(guò)《喀山宣言》,“將在聯(lián)合國(guó)分發(fā)”
-
“我們?cè)缸鲆磺蟹现袊?guó)利益的事”
-
“重要盟友”想加入金磚,北約回應(yīng)
-
果然,她開(kāi)始攪局…
-
他拒談2000億英鎊奴隸制賠償:就不能往前看?
-
巴菲特:我誰(shuí)也不支持
-
民主黨集體發(fā)聲:對(duì),他是法西斯
-
談到金磚,她提醒美歐“保持警惕”
-
美司法部警告馬斯克:你可能犯法了
-