隨著物聯(lián)網(wǎng)的發(fā)展,攝像頭、感應(yīng)器等產(chǎn)品的使用,數(shù)據(jù)中心正面臨巨大挑戰(zhàn)。這些設(shè)備加起來所創(chuàng)建的數(shù)據(jù)將是前所未有的。物聯(lián)網(wǎng)和大數(shù)據(jù)將會(huì)繼續(xù)推動(dòng)新的存儲(chǔ)技術(shù)的研發(fā)。這是正在舉行的2014年中國(guó)互聯(lián)網(wǎng)大會(huì)相關(guān)論壇提出的產(chǎn)業(yè)走勢(shì)判斷。
物聯(lián)網(wǎng)快速發(fā)展推動(dòng)數(shù)據(jù)增長(zhǎng)
“全球聯(lián)網(wǎng)設(shè)備正在迅速增長(zhǎng):2003年,是5億臺(tái);2015年,將達(dá)到250億臺(tái);到2020年,將增至500億臺(tái);未來,人類所需的設(shè)備數(shù)將遠(yuǎn)遠(yuǎn)大于人口數(shù)。MB、GB、TB已經(jīng)無法滿足我們的存儲(chǔ)需求,社會(huì)將進(jìn)入zettabyte時(shí)代,存儲(chǔ)空間將以PB、EB計(jì)量。”在 2014年中國(guó)互聯(lián)網(wǎng)大會(huì)上HGST亞太區(qū)產(chǎn)品營(yíng)銷總監(jiān)黃慶民如此表示。幾年前,一個(gè)人平均用的設(shè)備是兩臺(tái),幾年之后預(yù)估是每一個(gè)人平均所用的設(shè)備會(huì)超過 7臺(tái),而這些設(shè)備所創(chuàng)建的數(shù)據(jù)將是前所未見的巨大。從對(duì)個(gè)人生活的改變來說,當(dāng)我們?cè)谕獬鲂修k公時(shí),不需要拷貝一大堆文件,只需要攜帶一個(gè)移動(dòng)終端即可。
七牛云存儲(chǔ)總裁呂桂華也表示,數(shù)據(jù)的增長(zhǎng)、網(wǎng)絡(luò)的普及使得云服務(wù)如同空氣和水一樣成為人們生存不可或缺的部分,云服務(wù)也將成為和水力和電網(wǎng)一樣的社會(huì)基礎(chǔ)設(shè)施。
為什么說物聯(lián)網(wǎng)會(huì)推動(dòng)數(shù)據(jù)爆炸?有兩個(gè)理由:一是移動(dòng)網(wǎng)絡(luò)和智能終端的迅速普及;二是物聯(lián)網(wǎng)的快速發(fā)展對(duì)于數(shù)據(jù)處理有更高要求。
黃慶民介紹,地球上每分鐘發(fā)送電子郵件15TB;每天上傳到頂尖的社交網(wǎng)站照片1.8PB;地鐵攝像頭每分鐘可以收集1.5TB的數(shù)據(jù)。
物聯(lián)網(wǎng)已經(jīng)成為我們生活的一部分。物聯(lián)網(wǎng)的使用會(huì)持續(xù)產(chǎn)生數(shù)據(jù),例如快遞服務(wù)。智能電腦、智能手機(jī)、可穿戴設(shè)備、甚至家中的無線監(jiān)控、健身器材、智能家居、道路上的數(shù)字標(biāo)牌、自動(dòng)販賣機(jī)、交通攝像頭、汽車傳感器等都在每分每秒收集數(shù)據(jù)。個(gè)人的生活數(shù)據(jù)被實(shí)時(shí)收集上傳,技術(shù)的突破將使傳感器的體積越來越微型,小到可以出現(xiàn)在生活的每一個(gè)角落。傳感器像空氣一樣無處不在,個(gè)體的健康、飲食、出行、家居、購(gòu)物等每一個(gè)行為將被采集,并會(huì)基于歷史數(shù)據(jù)為人們提供個(gè)性化的智能決策。
數(shù)據(jù)爆炸時(shí)代:數(shù)據(jù)生數(shù)據(jù) 數(shù)據(jù)中心超負(fù)荷
數(shù)據(jù)是未來社會(huì)的核心,人的任何行為甚至情緒都可以進(jìn)行數(shù)據(jù)化管理。
呂桂華認(rèn)為,數(shù)據(jù)可以分為三類:第一類是數(shù)據(jù)庫(kù)里放的數(shù)據(jù),即關(guān)系型數(shù)據(jù);第二類是日志,即你的行為軌跡,比如你在電商網(wǎng)站的登陸瀏覽以及購(gòu)買記錄,這個(gè)過程被完整地記錄下來,記在日志文件中;第三類是文件型數(shù)據(jù),通俗來說,就是以文件方式存在的音頻、視頻、圖片、文檔以及其它各類二進(jìn)制的文件。三種類型的數(shù)據(jù)各自所需要的計(jì)算是不同的。
呂桂華認(rèn)為,海量數(shù)據(jù)的持續(xù)收集就會(huì)出現(xiàn)大數(shù)據(jù)分析以及存儲(chǔ)的問題,做好原始數(shù)據(jù)的管理非常重要。大數(shù)據(jù)的工作流程主要分成四個(gè)。首先是原始數(shù)據(jù)的收集,第二是原始數(shù)據(jù)的創(chuàng)建,第三和第四是做有關(guān)連接跟內(nèi)容分析。通過對(duì)于原始數(shù)據(jù)的挖掘處理會(huì)產(chǎn)生許多有價(jià)值的數(shù)據(jù),而互聯(lián)網(wǎng)連接所產(chǎn)生的互動(dòng)、機(jī)器與機(jī)器間的通信,也會(huì)產(chǎn)生許多數(shù)據(jù)。所以,大數(shù)據(jù)的普遍化會(huì)導(dǎo)致數(shù)據(jù)中心的工作超負(fù)荷問題出現(xiàn)。
黃慶民認(rèn)為,因?yàn)閿?shù)據(jù)中心容量瓶頸,高容量的硬盤未來幾年會(huì)非常穩(wěn)健地成長(zhǎng)。