外星人馬云又發(fā)話了:云端(Cloud +App)將是未來(lái)移動(dòng)互聯(lián)網(wǎng)的關(guān)鍵;阿里巴巴將全面從云打到端,ALL IN移動(dòng)電商;未來(lái)十年,建立DT數(shù)據(jù)時(shí)代中國(guó)商業(yè)發(fā)展的基礎(chǔ)設(shè)施。
關(guān)于“端”,移動(dòng)大戰(zhàn)已經(jīng)打得如火如荼,話題不少。不過(guò)阿里的云除了專業(yè)人士關(guān)注得卻并不多。
而據(jù)我了解,阿里云正在成為中國(guó)云計(jì)算第一平臺(tái),其擁有基礎(chǔ)云、服務(wù)云、個(gè)人云等多種服務(wù),是中國(guó)最大的基礎(chǔ)云計(jì)算品牌之一。除了普通的開發(fā)者、創(chuàng)業(yè)者越來(lái)越傾向于將應(yīng)用部署到阿里云之外,中國(guó)最大的IT服務(wù)商?hào)|軟集團(tuán)與阿里達(dá)成合作,逐步將其為客戶提供的應(yīng)用系統(tǒng)遷移到阿里云。
企業(yè)越來(lái)越青睞成熟的公有云服務(wù),而阿里的電商業(yè)務(wù)也日益增長(zhǎng)。阿里“云梯1”和“云梯2”的計(jì)算和存儲(chǔ)能力已經(jīng)快要被耗光的情況下,必須進(jìn)行擴(kuò)容。否則完全無(wú)法滿足業(yè)務(wù)增長(zhǎng)要求,與數(shù)據(jù)相關(guān)的一切業(yè)務(wù),例如淘寶運(yùn)營(yíng)活動(dòng)、淘數(shù)據(jù)、量子業(yè)務(wù)、阿里小貸均會(huì)受到影響,甚至無(wú)法開展。
阿里最終選擇了一條難度很大甚至充滿風(fēng)險(xiǎn)的擴(kuò)容方案。在不到3個(gè)月的時(shí)間,同時(shí)對(duì)云梯1和云梯2進(jìn)行擴(kuò)容,單集群規(guī)模均將達(dá)到5000臺(tái),并都實(shí)現(xiàn)跨機(jī)房處理能力。這是中國(guó)人從來(lái)沒(méi)有嘗試的事情。
在1年前,GigaOM分析師、知名大數(shù)據(jù)專家Derrick Harris在訪問(wèn)中國(guó)之后,在Gigaom上發(fā)表了一篇對(duì)中國(guó)互聯(lián)網(wǎng)巨頭的看法的文章。
他的核心觀點(diǎn)是,中國(guó)擁有不少用戶群十分龐大且增長(zhǎng)迅速的互聯(lián)網(wǎng)企業(yè),但是比起它們的美國(guó)同行卻有著更少的技術(shù)革新。他們每年花費(fèi)巨資添置服務(wù)器設(shè)備,阿里2012年購(gòu)入的服務(wù)器超過(guò)了以前5年購(gòu)入的數(shù)量,百度正在建設(shè)世界最大數(shù)據(jù)中心,騰訊每年需添置10萬(wàn)臺(tái)以上的服務(wù)器,它的云計(jì)算中心建設(shè)正如火如荼地開展。但是中國(guó)公司如果想在云計(jì)算上有所建樹的話(阿里巴巴和新浪明顯有這個(gè)想法),它們必須有匹配自己巨大規(guī)模的技術(shù)實(shí)力。
現(xiàn)在,阿里巴巴成功實(shí)施的飛天5000集群,不知道他做何感想?阿里云梯1的跨機(jī)房實(shí)施方案,有Facebook和Google這兩位唯一的先行者,但他們沒(méi)有公布細(xì)節(jié),阿里得靠自己摸索。而云梯2從1500直接擴(kuò)容到5000臺(tái)并且實(shí)現(xiàn)跨機(jī)房,F(xiàn)B和Google也會(huì)致敬。
因?yàn)檫@確實(shí)很難。大規(guī)模集群對(duì)容錯(cuò)性、網(wǎng)絡(luò)通信、調(diào)度和存儲(chǔ)性能、可運(yùn)維性、穩(wěn)定性、預(yù)防臟數(shù)據(jù)甚至硬件能力都帶來(lái)挑戰(zhàn)??鐧C(jī)房的集群由于突破了物理空間的限制,對(duì)上述要求又提高了一個(gè)級(jí)別。而阿里所承載的電商和金融業(yè)務(wù)的性質(zhì),對(duì)于狀態(tài)同步、數(shù)據(jù)干凈和業(yè)務(wù)健壯要求更高。需要在保障生產(chǎn)的前提下順利完成擴(kuò)容和數(shù)據(jù)遷移,又增加了難度系數(shù)。
這需要?jiǎng)?chuàng)新的架構(gòu)設(shè)計(jì),針對(duì)其開發(fā)新的服務(wù)器軟件,并為之制定專屬的項(xiàng)目實(shí)施方案。一旦實(shí)現(xiàn)跨機(jī)房,便可以突破了5000臺(tái)的容量天花板,建設(shè)一個(gè)超大規(guī)模的離線存儲(chǔ)和計(jì)算集群。
業(yè)界已經(jīng)有成熟的集群服務(wù)器架構(gòu)和軟件,Hadoop,并且是開源的。不過(guò),Hadoop生態(tài)圈還沒(méi)有成熟的大規(guī)模集群跨機(jī)房解決方案。阿里必須親自動(dòng)手。最后,阿里升級(jí)并發(fā)布了Apsara 0.11版本,該版本是支持5000臺(tái)規(guī)模并達(dá)到生產(chǎn)標(biāo)準(zhǔn)的第一個(gè)飛天版本,同時(shí)支持跨集群計(jì)算。
設(shè)計(jì)新架構(gòu)、開發(fā)新版本Apsara、完成服務(wù)器采購(gòu)、部署、數(shù)據(jù)遷移等,阿里云團(tuán)隊(duì)一共只用了3個(gè)月??瓷先ゲ豢赡芡瓿傻娜蝿?wù),阿里云能完成驗(yàn)證了它在云計(jì)算上的技術(shù)實(shí)力。事后,F(xiàn)acebook Hadoop團(tuán)隊(duì)發(fā)郵件邀請(qǐng)阿里云同學(xué)分享跨機(jī)房集群的經(jīng)驗(yàn)。誰(shuí)敢再說(shuō)中國(guó)云計(jì)算是只花錢采購(gòu)但計(jì)算實(shí)力不強(qiáng)的土豪?
阿里之所以如此重視云端平臺(tái),與其在移動(dòng)互聯(lián)網(wǎng)時(shí)代的戰(zhàn)略有關(guān)。
一方面,阿里也是All In移動(dòng)電商的戰(zhàn)斗狀態(tài),而云+端是不可分割的,云是移動(dòng)的一部分。另一方面,阿里的“金融+數(shù)據(jù)+平臺(tái)”對(duì)云也提出剛性需求。
金融的本質(zhì)是數(shù)據(jù)的處理交換,而阿里擁有全球最大的商品、用戶、交易數(shù)據(jù)庫(kù);全球最大的支付平臺(tái),信用體系,是不折不扣的大數(shù)據(jù)公司,這需要云平臺(tái)來(lái)承載。
阿里在大數(shù)據(jù)上的思路也是建設(shè)平臺(tái),建設(shè)數(shù)據(jù)交易市場(chǎng),做大數(shù)據(jù)流通的管道。平臺(tái)戰(zhàn)略則意味著,它不只是可以將電商、金融、信用這些數(shù)據(jù)以合理的形式開放出來(lái),還可以讓其他擁有數(shù)據(jù)的企業(yè)提交數(shù)據(jù)到其平臺(tái)進(jìn)行流通、共享和交易。它要做大數(shù)據(jù)的市場(chǎng),只有云才能承載這些“大數(shù)據(jù)內(nèi)容”。
從基因來(lái)看,阿里成為云計(jì)算老大也很合理。
亞馬遜,美國(guó)的電商巨頭,是IaaS(基礎(chǔ)設(shè)施即服務(wù))的奠基者,也是云計(jì)算的先驅(qū)。它做云計(jì)算的初衷便是,需要為了促銷訂單峰值擴(kuò)容服務(wù)器,但平時(shí)這些計(jì)算能力是閑置的。云計(jì)算則可以將這些計(jì)算能力分享出去。
阿里的云平臺(tái)是它發(fā)達(dá)的電商業(yè)務(wù)必然伴隨的附加品?,F(xiàn)在看來(lái)這個(gè)附加品的價(jià)值正在日益成長(zhǎng),成為阿里在移動(dòng)時(shí)代的核心競(jìng)爭(zhēng)力之一,成為移動(dòng)互聯(lián)網(wǎng)十分重要的基礎(chǔ)設(shè)施,也是中國(guó)在云計(jì)算領(lǐng)域技術(shù)實(shí)力大幅提升的表現(xiàn)。