數(shù)據(jù)存儲“簡化”的昨天和今天

責(zé)任編輯:editor006

2013-03-18 11:42:07

摘自:ZDNet存儲頻道

OEM存儲廠商正在被迫“簡化”存儲,因?yàn)槲覀儧]有能很好應(yīng)對目前各種復(fù)雜性的存儲人才。

OEM存儲廠商正在被迫“簡化”存儲,因?yàn)槲覀儧]有能很好應(yīng)對目前各種復(fù)雜性的存儲人才。問題是,簡化存儲對于我們大多數(shù)人來說到底是件好事還是壞事?

對于客戶來說當(dāng)然是好的。在不久以前,我們有了使用VERITAS卷管理器和文件系統(tǒng)(VxVM和VxFS)的SAN文件系統(tǒng),用于許多商用站點(diǎn)和各種各樣的應(yīng)用。今天,世界完全不同了,越來越簡單。在我看來,這一切都是從NFS和NAS存儲開始的。

那么,這種向簡化存儲的變化,只是循環(huán)周期的一部分嗎?還是長期的發(fā)展方向?

存儲簡化的歷史

有句老話:IT里沒有新的工程設(shè)計(jì)問題,而是解決老問題的新工程師。目前的存儲趨勢是向一體機(jī)的發(fā)展。我猜測,這種趨勢之所以會發(fā)生,是因?yàn)榇鎯芾韱T和架構(gòu)師的匱乏。

這個趨勢也源自于其他市場因素,例如缺乏標(biāo)準(zhǔn)。我們有針對互聯(lián)網(wǎng)標(biāo)準(zhǔn)的IETF,但是對于服務(wù)器端的存儲,幾乎沒有任何主導(dǎo)的標(biāo)準(zhǔn)。我們有OpenGroup和SNIA,但而二者在開發(fā)廣泛的管理標(biāo)準(zhǔn)方向都不是很成功,雖然SNIA出臺了Storage Management Initiative Specification (SMI-S),但是我認(rèn)為有點(diǎn)遲了?,F(xiàn)在我們有一個共同商定的網(wǎng)絡(luò)管理通用架構(gòu),但不是適用于所有文件系統(tǒng)的,從像XFS、EXT-4和NTFS這樣的本地系統(tǒng),一直到像GPFS和Lustre這樣的大規(guī)模并行文件系統(tǒng)。

坦率地說,在我看來,廠商在20世紀(jì)90年代沒有把握機(jī)會聯(lián)合起來是一件很遺憾的事情。缺乏合作驅(qū)動的創(chuàng)新行為,這是我認(rèn)為NAS將在21世紀(jì)初期NAS崛起的主要原因。NAS易于使用且易于配置、管理和升級。

我記得,早在20世紀(jì)90年代末和21世紀(jì)初的時候,SAN管理員和架構(gòu)師極其吃香,薪水高得竟然。即使是在互聯(lián)網(wǎng)泡沫破滅之后,SAN管理員和架構(gòu)師的薪資仍然高于其他IT職位的平均薪資水平,因?yàn)檫@方面的人才實(shí)在太匱乏了。

像EMC、惠普、IBM、Sun和Veritas這樣的公司都試圖通過提供認(rèn)證和教育機(jī)會搶奪SAN人才。但是對于客戶來說,這種認(rèn)證需要時間和金錢,每年或者每次發(fā)布之后都需要進(jìn)行培訓(xùn)。最糟糕的是,你獲得了Sun認(rèn)證,但對EMC認(rèn)證并沒有多大幫助。唯一的共同點(diǎn)可能是在光纖通道交換機(jī)方面。因此,如果客戶希望或者需要一個混合的環(huán)境,那么不得不讓技術(shù)人員把大量的時間花在接受培訓(xùn)上。

在21世紀(jì)初期,大概是因?yàn)閬碜钥蛻舻膲毫Γ芏郤AN廠商開始有所覺醒。而且,這個時期也開始了SAN公司的整合,減少了培訓(xùn)課目的數(shù)量,同時廠商也在嘗試著開發(fā)類似SMI-S這樣的通用SAN管理框架。

為時太晚

在同一時期,NAS市場飛速發(fā)展著。NAS的管理、配置、升級和培訓(xùn)都非常簡單,接口采用的是NFS。

但是缺少兩件事:

1、在流處理I/O方面,NAS的性能還無法與SAN相提并論。但是,很多人發(fā)現(xiàn),大多數(shù)I/O都不是流式的,但是IOPS,NAS廠商是通過增加讀緩存解決的。

2、擴(kuò)展NAS是個問題,因?yàn)樾阅懿⒉荒茈S之?dāng)U展。因此,這使得文件系統(tǒng)的大小局限在一個NAS框架內(nèi)。雖然NAS覆蓋了相當(dāng)一部分市場,但卻無法覆蓋到更高端的市場。

除了少數(shù)例外,大部分大型SAN文件系統(tǒng)廠商的市場份額正在被NAS廠商奪走。今天,SAN文件系統(tǒng)市場正在迅速小時,被取代。當(dāng)你想要一個多PB的命名空間時,你只有幾個POSIX文件系統(tǒng)的選擇,但卻有很多基于REST/SOAP接口的選擇。不過,成為一位了解現(xiàn)有文件系統(tǒng)的文件系統(tǒng)專家,要求非常嚴(yán)格的訓(xùn)練,尤其是考慮到主機(jī)、網(wǎng)絡(luò)、存儲設(shè)備以及映射到數(shù)百個文件系統(tǒng)可調(diào)參數(shù)的復(fù)雜性。

我們的未來是什么樣的?

我們已經(jīng)走到了這樣一個地步,存儲復(fù)雜性已經(jīng)超過了人才的儲備量。而且現(xiàn)在仍然沒有一個通用的管理框架,我們有新的應(yīng)用、設(shè)備和方法。我們看到,一體機(jī)市場正在崛起,這種產(chǎn)品不需要高端存儲的管理人員和專家。

例如,大多數(shù)并行文件系統(tǒng)群體已經(jīng)轉(zhuǎn)向了操作簡單的一體機(jī)。大多數(shù)HPC環(huán)境的采購人群也已經(jīng)迅速接受這種技術(shù),因?yàn)槲募到y(tǒng)不僅成本高而且培訓(xùn)時間長。

當(dāng)然,這只是硬幣的一面。同樣的事情正發(fā)生在存儲設(shè)備和管理對象接口的軟件上。這些硬件和軟件正變得越來越易于使用,只有在極大規(guī)模的情況下才要求有高成本的管理人員。

所以,如果你是一位經(jīng)驗(yàn)豐富的資深管理員,那么你打算怎么做才不會讓自己的薪水大幅縮水?

我認(rèn)為答案是用于數(shù)據(jù)分析的一體機(jī)(在這里我不談Hadoop,因?yàn)樵谶@個領(lǐng)域的很多架構(gòu)設(shè)計(jì)已經(jīng)完成)?,F(xiàn)在,數(shù)據(jù)分析一體機(jī)正處于初期階段,需要大量精力去開發(fā),數(shù)據(jù)分析的類型也很復(fù)雜。例如,你可能會對一張圖像進(jìn)行去像素畫,并創(chuàng)建一個地理位置的數(shù)據(jù)庫,讓圖像分辨率規(guī)范化,這會隨著技術(shù)的改進(jìn)而發(fā)生變化。然后,你可能會利用這些圖像數(shù)據(jù)預(yù)測天氣和氣候。這與將業(yè)務(wù)數(shù)據(jù)進(jìn)行分析、嘗試將其與價格和收入聯(lián)系起來使利潤最大化是完全不同的。

曾經(jīng)很困難的事情如今正在變得越來越簡單。但是我猜測還會有新的更復(fù)雜的一體機(jī)出現(xiàn)用于解決各種各樣的問題,要求大量的調(diào)優(yōu)和配置工作。必須對收集和處理的信息進(jìn)行構(gòu)建,這樣當(dāng)試圖將這些信息進(jìn)行關(guān)聯(lián)、處理并提供結(jié)果給決策者的時候,數(shù)據(jù)信息的訪問變得更加有效。

最后的思考

文件系統(tǒng)的存儲復(fù)雜性問題大多數(shù)已經(jīng)被解決,目前仍然有少數(shù)問題仍然擺在那里,但是已經(jīng)不像以前那么多了。

不過,現(xiàn)在擺在我們面前的是一系列全新的、更加復(fù)雜的難題。這些難題要求我們對用戶使用存儲、他們?nèi)绾卧L問數(shù)據(jù)以創(chuàng)建作為決策依據(jù)的信息進(jìn)行深入的了解。這些工作都將是高回報(bào)的工作,要求廣泛的技能和技術(shù)。但是這些技術(shù)與現(xiàn)有的SAN和NAS所要求的技能是不同的,必須直接與應(yīng)用開發(fā)者和用戶進(jìn)行溝通。

試想一下,這聽起來有點(diǎn)像在1996年和1997年當(dāng)SAN文件系統(tǒng)開始問世的時候一樣。我們必須與負(fù)責(zé)各個部分的技術(shù)人員溝通,更快速高效地掌握所有技能。我相信,今天我們?nèi)匀恍枰@種方法。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號-6京公網(wǎng)安備 11010502049343號