2014年6月16日,中國(guó)的存儲(chǔ)廠商一直在跟隨或追隨國(guó)際存儲(chǔ)大廠的步伐,面臨當(dāng)前新的市場(chǎng)與行業(yè)變數(shù),曙光存儲(chǔ)強(qiáng)調(diào)中國(guó)式存儲(chǔ)的顛覆與突破,這種意識(shí)代表著眾多的國(guó)產(chǎn)存儲(chǔ)廠商的想法,但曙光存儲(chǔ)不光想到這點(diǎn),同時(shí)也為此推出了相關(guān)的云存儲(chǔ)戰(zhàn)略,以EB 級(jí)云存儲(chǔ)實(shí)驗(yàn)室在北京中關(guān)村軟件園36號(hào)樓曙光大廈的落地,來(lái)告訴大家一個(gè)新的信息:曙光已經(jīng)全面發(fā)力云存儲(chǔ),也將引領(lǐng)新的發(fā)展格局。就此,曙光云存儲(chǔ)也引發(fā)了眾多業(yè)界專(zhuān)家、分析師與媒體的關(guān)注與討論。
用戶(hù)需求驅(qū)動(dòng)存儲(chǔ)新進(jìn)化
中國(guó)計(jì)算機(jī)學(xué)會(huì)信息存儲(chǔ)專(zhuān)業(yè)委員熊勁表示,新的計(jì)算模式帶來(lái)數(shù)據(jù)存取的共同特征,比如集中化、數(shù)據(jù)量大、增長(zhǎng)快、種類(lèi)多、I/O性能高,這些特點(diǎn)要求存儲(chǔ)廠商帶來(lái)新的存儲(chǔ)方案。(一種有別于傳統(tǒng)存儲(chǔ)的方式,比如云存儲(chǔ)。)
對(duì)此,她指出,現(xiàn)階段的傳統(tǒng)存儲(chǔ)系統(tǒng)存在一些問(wèn)題:存儲(chǔ)系統(tǒng)多而復(fù)雜,帶來(lái)成本增長(zhǎng)和管理問(wèn)題;數(shù)據(jù)訪問(wèn)通路長(zhǎng),從而其性能也受到影響。
因此,這也加速了新型存儲(chǔ)器件的快速發(fā)展,比如存儲(chǔ)級(jí)內(nèi)存方式,其訪問(wèn)速度接近DRAM,非易失、集成度高、無(wú)靜態(tài)能耗。
另外,新的挑戰(zhàn)凸顯,支持?jǐn)?shù)據(jù)處理、支持混合類(lèi)型應(yīng)用(桌面云、數(shù)據(jù)流、在線服務(wù)、在線和離線數(shù)據(jù)分析、應(yīng)用性能I/O需求不同)、使用多種存儲(chǔ)器件(SCM、Flash、Disk)。這些挑戰(zhàn)和傳統(tǒng)存儲(chǔ)存在的一些問(wèn)題都在加速存儲(chǔ)廠商需要提供一種更新、更快、更適合用戶(hù)現(xiàn)階段需求的存儲(chǔ)系統(tǒng)。
軟件定義存儲(chǔ)與軟件定義云存儲(chǔ)
IDC企業(yè)級(jí)研究部研究經(jīng)理張小強(qiáng)指出,第三平臺(tái)是ICT技術(shù)的未來(lái),而中國(guó)將在2020年的數(shù)據(jù)量將占據(jù)全球的18%份額,中國(guó)在全球的位置越來(lái)越重要。為此,IDC定義的軟件定義的存儲(chǔ)從中發(fā)揮出的作用將會(huì)更大,軟件定義存儲(chǔ)含義包括了數(shù)據(jù)類(lèi)型、數(shù)據(jù)存儲(chǔ)、存儲(chǔ)服務(wù)和交付模式四個(gè)方面。數(shù)據(jù)類(lèi)型包括塊數(shù)據(jù)、文件、對(duì)象;數(shù)據(jù)存儲(chǔ)包括了NAS、SAN等,IDC分析的結(jié)果顯示,中國(guó)NAS市場(chǎng)中Scale-out NAS增長(zhǎng)迅速。
張小強(qiáng)也強(qiáng)調(diào):軟件定義存儲(chǔ)需要關(guān)注技能和用戶(hù)化之間的產(chǎn)局,需要著重考慮成套系統(tǒng)的價(jià)值,需要關(guān)注開(kāi)源帶來(lái)的變化,需要注重如何與獨(dú)立軟件供應(yīng)商建立更好的生態(tài)關(guān)系??梢?jiàn),存儲(chǔ)不僅僅是一個(gè)存儲(chǔ)系統(tǒng),需要考量與存儲(chǔ)相關(guān)的生態(tài)系統(tǒng)將成為未來(lái)廠商關(guān)注的重點(diǎn)方向。
對(duì)此,曙光重視的方向就是軟件定義云存儲(chǔ),軟件是整個(gè)云存儲(chǔ)的核心,對(duì)于數(shù)據(jù)和I/O是可控,曙光可以做到借助存儲(chǔ)系統(tǒng)的核心,通過(guò)軟件控制異常網(wǎng)絡(luò)通信、網(wǎng)絡(luò)數(shù)據(jù)傳輸?shù)惹闆r。
云存儲(chǔ)的前瞻思考
曙光存儲(chǔ)事業(yè)部總工苗艷超博士認(rèn)為,存儲(chǔ)系統(tǒng)需求主要在于容量無(wú)限大,想寫(xiě)就寫(xiě);安全、可靠、永久保存;數(shù)據(jù)不丟、不錯(cuò);廉價(jià);高效訪問(wèn)數(shù)據(jù);任意時(shí)刻、任意地點(diǎn),訪問(wèn)無(wú)限制。存儲(chǔ)分類(lèi)主要包括按介質(zhì)分類(lèi)、按連接形式分類(lèi)、按接口方式分類(lèi)、按應(yīng)用重要程度分類(lèi)。
需要指出的是:關(guān)鍵應(yīng)用如銀行、券商的核心交易系統(tǒng);重要應(yīng)用如政府、企業(yè)用戶(hù)的重要應(yīng)用。這些應(yīng)用對(duì)于存儲(chǔ)的要求越來(lái)越苛刻,云存儲(chǔ)可帶來(lái)的幫助與價(jià)值,值得這些應(yīng)用行業(yè)的用戶(hù)所考量。
不過(guò),苗艷超博士進(jìn)一步指出,云存儲(chǔ)就是一種服務(wù),而云計(jì)算中的存儲(chǔ)系統(tǒng)是一種集群存儲(chǔ)系統(tǒng),曙光的定位于提供云存儲(chǔ)設(shè)備與云存儲(chǔ)解決方案。“未來(lái)的存儲(chǔ)系統(tǒng)應(yīng)該提供對(duì)象、文件、塊存儲(chǔ),是一種融合的集群存儲(chǔ)系統(tǒng)。”苗艷超博士所前瞻的是曙光未來(lái)的存儲(chǔ)發(fā)展方向,但當(dāng)前,曙光存儲(chǔ)在云存儲(chǔ)方面還是非常專(zhuān)注許多特殊行業(yè)領(lǐng)域數(shù)據(jù)變化的存儲(chǔ)需求。
高能物理研究的云存儲(chǔ)需求
中國(guó)科學(xué)院高能物理研究所計(jì)算中心主任孫功星指出高能物理云存儲(chǔ)的特點(diǎn)在于數(shù)量增長(zhǎng)迅速,也一直在尋找合適的文件系統(tǒng)來(lái)做存儲(chǔ),但目前主要采用基本單元是ext2\ext3……,以及磁盤(pán)全局文件信息,整合多個(gè)分布式文件系統(tǒng),形成磁盤(pán)池系統(tǒng)。采用磁帶庫(kù)全局名字空間、磁盤(pán)池名字空間……從而形成分布式的存儲(chǔ)模式。
目前所里面采用的是開(kāi)源軟件,他認(rèn)為自主研發(fā)的軟件使用很不方便,軟件維護(hù)難度逐漸增大。但目前對(duì)存儲(chǔ)性能I/O和IOPS有著更高要求。現(xiàn)在底層采用RAID6模式,整個(gè)存儲(chǔ)系統(tǒng)的運(yùn)維還是比較麻煩。
從現(xiàn)實(shí)情況來(lái)看,高能物理領(lǐng)域科學(xué)家測(cè)試開(kāi)源軟件,再進(jìn)行二次開(kāi)發(fā)或者干脆使用商業(yè)軟件。顯然,高能物理研究的云存儲(chǔ)需求非常明顯,“所里已經(jīng)采用曙光的ParaStor進(jìn)行測(cè)試。”事實(shí)上,曙光云存儲(chǔ)在科研、云中心領(lǐng)域已經(jīng)有了成功案例,正在部署測(cè)試的用戶(hù)也不斷涌現(xiàn)。
曙光ParaStor并行存儲(chǔ)系統(tǒng)的特點(diǎn)
談到ParaStor,對(duì)于曙光ParaStor相信大家不會(huì)十分陌生,早在2010年就已經(jīng)出現(xiàn)在用戶(hù)面前。“中科曙光機(jī)群文件系統(tǒng)就是一個(gè)并行文件系統(tǒng),是曙光ParaStor的基石。”中國(guó)計(jì)算機(jī)學(xué)會(huì)信息存儲(chǔ)專(zhuān)業(yè)委員熊勁也提到,曙光ParaStor的前身還是很有歷史的。
來(lái)自曙光官方資料顯示:曙光ParaStor并行存儲(chǔ)系統(tǒng)通過(guò)網(wǎng)絡(luò)技術(shù)將大量基本存儲(chǔ)單元整合起來(lái)協(xié)同工作,對(duì)外提供統(tǒng)一數(shù)據(jù)存儲(chǔ)服務(wù)。ParaStor針對(duì)云計(jì)算環(huán)境進(jìn)行了性能優(yōu)化,并采用了副本、集群等大量容錯(cuò)技術(shù),各項(xiàng)技術(shù)性能指標(biāo)可以達(dá)到主流中高端存儲(chǔ)陣列水平。
曙光ParaStor并行存儲(chǔ)系統(tǒng)是一款針對(duì)海量數(shù)據(jù)存儲(chǔ)應(yīng)用而設(shè)計(jì)的大規(guī)模通用集群存儲(chǔ)系統(tǒng)。采用通用硬件設(shè)備作為基本構(gòu)建單元,可為用戶(hù)提供全局統(tǒng)一的系統(tǒng)映像和完全POSIX兼容的API接口。值得注意的是,ParaStor并行存儲(chǔ)系統(tǒng)所擁有的動(dòng)態(tài)可擴(kuò)展技術(shù),可使用戶(hù)以按需擴(kuò)展的需求來(lái)存儲(chǔ)容量,無(wú)需一次性投入大量成本來(lái)構(gòu)建存儲(chǔ)系統(tǒng),可有效降低用戶(hù)投資風(fēng)險(xiǎn)。
曙光ParaStor并行存儲(chǔ)系統(tǒng)方案主要基于高性能計(jì)算系統(tǒng)所采用的高速I(mǎi)nfiniband網(wǎng)絡(luò),與曙光在Infiniband方面合作的是Mellanox Technologies公司,可將整個(gè)系統(tǒng)中的大量計(jì)算節(jié)點(diǎn)、I/O節(jié)點(diǎn)、管理服務(wù)器、磁盤(pán)陣列連接起來(lái),并通過(guò)存儲(chǔ)管理軟件和并行文件系統(tǒng)來(lái)實(shí)現(xiàn)對(duì)服務(wù)器和存儲(chǔ)的訪問(wèn)保護(hù)進(jìn)行管理控制,從而有效地提高了整個(gè)存儲(chǔ)系統(tǒng)的性能和擴(kuò)展性。
除此之外,曙光并行存儲(chǔ)產(chǎn)品的性能還超越了所有SAN存儲(chǔ),可面向大文件和大數(shù)據(jù)量實(shí)現(xiàn)I/O優(yōu)化,帶寬可達(dá)幾十GB/s甚至幾百GB/s;而在無(wú)需停機(jī)、無(wú)需停應(yīng)用的前提下就可實(shí)現(xiàn)在線擴(kuò)展,隨著I/O節(jié)點(diǎn)數(shù)量的增長(zhǎng),系統(tǒng)的容量和性能也在接近線性增長(zhǎng);同時(shí),存儲(chǔ)系統(tǒng)擁有與網(wǎng)絡(luò)無(wú)關(guān)的數(shù)據(jù)存儲(chǔ)及恢復(fù)機(jī)制,具備高可靠的元數(shù)據(jù)保護(hù)模式,能夠保證整個(gè)存儲(chǔ)系統(tǒng)的高可用性。另外,該存儲(chǔ)系統(tǒng)的各組件設(shè)備均經(jīng)過(guò)整合測(cè)試優(yōu)化,網(wǎng)絡(luò)設(shè)備兼容十分廣泛。
中國(guó)式存儲(chǔ)的顛覆與突破
曙光ParaStor具備的這些特點(diǎn),正好也是曙光云存儲(chǔ)發(fā)展的基礎(chǔ)和核心,這也是曙光要做中國(guó)式存儲(chǔ)的顛覆與突破的前提所在。
或許大家會(huì)問(wèn),中國(guó)式存儲(chǔ)的顛覆與突破的關(guān)鍵在哪里呢?
不論用戶(hù)需求如何變化,不論存儲(chǔ)形式如何變化,作為中國(guó)存儲(chǔ)廠商如何獲得新的發(fā)展,一直是國(guó)內(nèi)存儲(chǔ)業(yè)內(nèi)人士考慮的重點(diǎn)。對(duì)此,曙光存儲(chǔ)產(chǎn)品事業(yè)部總經(jīng)理惠潤(rùn)海分析認(rèn)為,中國(guó)市場(chǎng)上,本地化存儲(chǔ)廠商占據(jù)市場(chǎng)的份額還是比較低,那么中國(guó)存儲(chǔ)企業(yè)如何找到一個(gè)新路,并成為市場(chǎng)主流,成為大家思考的重點(diǎn),曙光認(rèn)為中國(guó)式存儲(chǔ)是出路。必須做到兩點(diǎn),一是顛覆,顛覆傳統(tǒng)架構(gòu)的產(chǎn)品研發(fā)、顛覆傳統(tǒng)研發(fā)思維、顛覆保守的研發(fā)思路;二是突破,突破技術(shù)壁壘,變跟隨為領(lǐng)先,在新技術(shù)的架構(gòu)中實(shí)現(xiàn)價(jià)值,實(shí)現(xiàn)自主可控。
為此,曙光認(rèn)為云存儲(chǔ)是發(fā)展機(jī)會(huì)之一,云存儲(chǔ)的發(fā)展已經(jīng)不可逆轉(zhuǎn)。云存儲(chǔ)的市場(chǎng)在私有云、互聯(lián)網(wǎng)、視頻和語(yǔ)音、科學(xué)和科研數(shù)據(jù)領(lǐng)域潛力很大。私有云方面如云中心、智慧城市、交通云、醫(yī)療云等;互聯(lián)網(wǎng)方面如公有云存儲(chǔ)服務(wù)、備份服務(wù)、社交媒體等;視頻和語(yǔ)音方面如媒資平臺(tái)、遠(yuǎn)程教育平臺(tái)、視頻監(jiān)控等;科學(xué)和科研數(shù)據(jù)如生物科學(xué)研究、高能物理研究、環(huán)境研究、氣象研究、飛行器設(shè)計(jì)等。