破解數(shù)據(jù)暴漲下的三大存儲(chǔ)挑戰(zhàn) 亞馬遜云科技加速云端存儲(chǔ)服務(wù)創(chuàng)新

責(zé)任編輯:shjiaz

作者:查士加

2022-07-18 09:15:48

來(lái)源:企業(yè)網(wǎng)D1Net

原創(chuàng)

伴隨數(shù)字化轉(zhuǎn)型升級(jí)和新技術(shù)的普及應(yīng)用,數(shù)據(jù)成為創(chuàng)新應(yīng)用的基礎(chǔ)和驅(qū)動(dòng)力,與此同時(shí)全球數(shù)據(jù)量每?jī)赡暌苑兜乃俣仍鲩L(zhǎng),預(yù)計(jì)到2025年,企業(yè)數(shù)據(jù)會(huì)在現(xiàn)有的基礎(chǔ)上增長(zhǎng)到3倍,87%的企業(yè)數(shù)據(jù)會(huì)存儲(chǔ)在公8有云上,海量數(shù)據(jù)的存儲(chǔ)成為信息產(chǎn)業(yè)的新挑戰(zhàn)。如何存儲(chǔ)龐大的數(shù)據(jù),是企業(yè)和云廠(chǎng)商面臨的首要問(wèn)題

伴隨數(shù)字化轉(zhuǎn)型升級(jí)和新技術(shù)的普及應(yīng)用,數(shù)據(jù)成為創(chuàng)新應(yīng)用的基礎(chǔ)和驅(qū)動(dòng)力,與此同時(shí)全球數(shù)據(jù)量每?jī)赡暌苑兜乃俣仍鲩L(zhǎng),預(yù)計(jì)到2025年,企業(yè)數(shù)據(jù)會(huì)在現(xiàn)有的基礎(chǔ)上增長(zhǎng)到3倍,87%的企業(yè)數(shù)據(jù)會(huì)存儲(chǔ)在公8有云上,海量數(shù)據(jù)的存儲(chǔ)成為信息產(chǎn)業(yè)的新挑戰(zhàn)。如何存儲(chǔ)龐大的數(shù)據(jù),是企業(yè)和云廠(chǎng)商面臨的首要問(wèn)題。

在近日舉辦的亞馬遜云科技存儲(chǔ)服務(wù)媒體溝通會(huì)上,亞馬遜云科技宣布加速云端存儲(chǔ)服務(wù)創(chuàng)新,通過(guò)智能分層、專(zhuān)門(mén)構(gòu)建以及統(tǒng)一數(shù)據(jù)保護(hù)三大層面,幫助企業(yè)進(jìn)一步應(yīng)對(duì)海量數(shù)據(jù)上云面臨的諸多存儲(chǔ)挑戰(zhàn),重塑云中數(shù)據(jù)活力。

數(shù)據(jù)爆漲帶來(lái)三大存儲(chǔ)挑戰(zhàn)

亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建在主題演講中提到:“數(shù)據(jù)的爆發(fā)性增長(zhǎng),尤其是云上的數(shù)據(jù)增長(zhǎng)已經(jīng)是新常態(tài),數(shù)據(jù)增長(zhǎng)也會(huì)帶來(lái)諸多挑戰(zhàn)。”

一是敏捷與成本,如何應(yīng)對(duì)海量數(shù)據(jù)增長(zhǎng)所帶來(lái)的成本急速上升,與數(shù)據(jù)存儲(chǔ)服務(wù)敏捷性能之間根深蒂固的矛盾。

二是多樣化需求,如何設(shè)計(jì)不同的存儲(chǔ)服務(wù)滿(mǎn)足不同業(yè)務(wù)的需求。

三是數(shù)據(jù)保護(hù),數(shù)據(jù)安全與合規(guī)問(wèn)題也是企業(yè)考慮的重中之重。

為破解上述挑戰(zhàn),重塑云中數(shù)據(jù)活力,亞馬遜云科技僅在2021年就發(fā)布了130多項(xiàng)存儲(chǔ)新服務(wù)和功能特性,如今,其存儲(chǔ)服務(wù)已經(jīng)全面覆蓋了對(duì)象存儲(chǔ)、塊存儲(chǔ)、文件存儲(chǔ)、數(shù)據(jù)備份、數(shù)據(jù)容災(zāi)、以及數(shù)據(jù)傳輸與邊緣處理各個(gè)方面,客戶(hù)可根據(jù)自身需求靈活選擇,在云端開(kāi)展業(yè)務(wù)創(chuàng)新。

亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理 陳曉建

亞馬遜云科技存儲(chǔ)服務(wù)的持續(xù)創(chuàng)新

一、智能分層——成本與敏捷的自動(dòng)平衡

為平衡敏捷與成本之間的矛盾,亞馬遜云科技就存儲(chǔ)服務(wù)的成本與敏捷性開(kāi)展持續(xù)創(chuàng)新。以Amazon S3這一經(jīng)典的對(duì)象存儲(chǔ)產(chǎn)品為例,從2006至2022年的16年間,整個(gè)存儲(chǔ)成本降低了7倍。

2021年12月,借助于更智能的存儲(chǔ)分層技術(shù),亞馬遜云科技將全球九大可用區(qū)域的兩款主要產(chǎn)品Amazon S3標(biāo)準(zhǔn)非頻繁訪(fǎng)問(wèn)層(Amazon S3 Standard-Infrequent Access)和Amazon S3單區(qū)非頻繁訪(fǎng)問(wèn)層(Amazon S3 One Zone-Infrequent Access)的存儲(chǔ)價(jià)格降低了31%,可見(jiàn)降低用戶(hù)的存儲(chǔ)成本一直是其努力的重要方向。

根據(jù)數(shù)據(jù)被使用的不同頻率,可以簡(jiǎn)單把數(shù)據(jù)分為熱、溫、冷、凍四個(gè)層次,而亞馬遜云科技已開(kāi)發(fā)了8層存儲(chǔ)層級(jí),用戶(hù)可以根據(jù)自己的數(shù)據(jù)類(lèi)型、需要的讀寫(xiě)性能、可接受的成本,選擇合適的存儲(chǔ)層級(jí)應(yīng)對(duì)業(yè)務(wù)需求。

為滿(mǎn)足醫(yī)療影像數(shù)據(jù)這類(lèi)實(shí)時(shí)性高、數(shù)據(jù)很大、訪(fǎng)問(wèn)頻率低的數(shù)據(jù)存儲(chǔ)需求,亞馬遜云科技在幾個(gè)月前推出Amazon S3 Glacier Instant Retrieval即時(shí)檢索歸檔存儲(chǔ),與普通歸檔存儲(chǔ)產(chǎn)品不同的是,采用這款產(chǎn)品用戶(hù)數(shù)的取回速度達(dá)到毫秒級(jí),可以把冷數(shù)據(jù)當(dāng)成熱數(shù)據(jù)來(lái)處理,讓音頻視頻、手機(jī)相冊(cè)、日志歸檔、影像資料等數(shù)據(jù)以低成本實(shí)現(xiàn)歸檔數(shù)據(jù)的快速檢索。

數(shù)據(jù)的冷熱并非是一成不變的,如果業(yè)務(wù)要上線(xiàn)新功能,數(shù)據(jù)冷熱發(fā)生較大變化,存儲(chǔ)邏輯勢(shì)必要大改。為了滿(mǎn)足這類(lèi)需求,亞馬遜云科技于2018年推出Amazon S3智能分層功能,專(zhuān)門(mén)面向未知訪(fǎng)問(wèn)模式的海量數(shù)據(jù)而設(shè)計(jì)。據(jù)悉,Amazon S3可以根據(jù)數(shù)據(jù)的實(shí)際訪(fǎng)問(wèn)智能判斷合適的存儲(chǔ)層級(jí),自動(dòng)在不同層級(jí)的存儲(chǔ)之間移動(dòng)數(shù)據(jù),既降低了用戶(hù)運(yùn)營(yíng)的復(fù)雜性,又將運(yùn)營(yíng)成本大幅降低,至多可節(jié)省68%的成本。據(jù)悉,智能分層功能現(xiàn)已拓展到了共享文件存儲(chǔ)Amazon EFS。Amazon EFS提供四種存儲(chǔ)等級(jí),可節(jié)省高達(dá)72%的存儲(chǔ)成本。

Nagarro(奈佳羅)是一家從事軟件服務(wù)和咨詢(xún)的公司。Nagarro中國(guó)區(qū)的首席架構(gòu)師郭亮在會(huì)上提到:構(gòu)建數(shù)據(jù)資產(chǎn)SaaS平臺(tái)面臨存儲(chǔ)成本、傳輸效率、容量預(yù)測(cè)、可靠性和災(zāi)備、數(shù)據(jù)安全五大方面的挑戰(zhàn),Nagarro通過(guò)使用Amazon S3智能分層功能,解決了構(gòu)建數(shù)字資產(chǎn)SaaS平臺(tái)過(guò)程中的諸多挑戰(zhàn),覆蓋了客戶(hù)所需存儲(chǔ)的全部類(lèi)型,支持全球多區(qū)域部署確保了數(shù)據(jù)的持久性和可靠性;無(wú)需關(guān)心數(shù)據(jù)如何分層存儲(chǔ),讓業(yè)務(wù)人員能夠更專(zhuān)注于應(yīng)用,同時(shí)還節(jié)省了70%的存儲(chǔ)費(fèi)用,實(shí)現(xiàn)成本和敏捷的自動(dòng)平衡。目前,Nagarro的數(shù)字資產(chǎn)SaaS平臺(tái)已服務(wù)于5,000多家企業(yè)級(jí)用戶(hù)。

此外,結(jié)合Amazon S3,Nagarro還通過(guò)使用亞馬遜云科技AI服務(wù),智能挖掘數(shù)據(jù)價(jià)值。Amazon S3的海量存儲(chǔ)為Nagarro未來(lái)打造數(shù)據(jù)湖倉(cāng)奠定了基礎(chǔ),郭亮透露:“我們數(shù)字資產(chǎn)產(chǎn)品未來(lái)的方向是CaaS(內(nèi)容即服務(wù)),Nagarro會(huì)繼續(xù)加深和亞馬遜云科技的合作,進(jìn)一步深度挖掘數(shù)據(jù)潛力。我們也希望亞馬遜云科技能推出更多更好的功能,為我們節(jié)省成本,提供更好的服務(wù)。”

二、專(zhuān)門(mén)構(gòu)建——滿(mǎn)足多樣化的上云需求

如今,數(shù)據(jù)類(lèi)型多種多樣,既有云原生應(yīng)用產(chǎn)生的數(shù)據(jù),也有傳統(tǒng)應(yīng)用產(chǎn)生的數(shù)據(jù),而這兩類(lèi)應(yīng)用所需要的云存儲(chǔ)服務(wù)也不盡相同。

針對(duì)云原生現(xiàn)代化應(yīng)用,企業(yè)客戶(hù)可以使用云原生Serverless文件存儲(chǔ)Amazon EFS,獲得簡(jiǎn)單、無(wú)管理成本、海量彈性擴(kuò)展、高度集成、自動(dòng)優(yōu)化的體驗(yàn)。

針對(duì)ERP等傳統(tǒng)的企業(yè)級(jí)應(yīng)用,如果應(yīng)用上云時(shí)需要按照云存儲(chǔ)產(chǎn)品的接口重新改寫(xiě)代碼,沒(méi)有企業(yè)用戶(hù)愿意這樣做,保證兼容性對(duì)企業(yè)和云廠(chǎng)商而言都是非常重要的工作。為此,針對(duì)ERP/CRM、數(shù)據(jù)庫(kù)、自動(dòng)駕駛、混合云等云端企業(yè)級(jí)應(yīng)用,亞馬遜云科技提供了Amazon EBS IO2 BX和Amazon FSx系列服務(wù),前者為運(yùn)行在線(xiàn)下數(shù)據(jù)中心SAN存儲(chǔ)上的應(yīng)用而設(shè)計(jì),而后者是為各類(lèi)企業(yè)應(yīng)用而專(zhuān)門(mén)構(gòu)建的共享文件存儲(chǔ)。

考慮到不同行業(yè)、各類(lèi)不同的業(yè)務(wù)場(chǎng)景對(duì)共享存儲(chǔ)的不同要求,亞馬遜云科技將企業(yè)應(yīng)用分為四個(gè)類(lèi)別:一是以Windows為主的應(yīng)用,底層服務(wù)要完全滿(mǎn)足Windows的環(huán)境,包括ACL文件訪(fǎng)問(wèn)控制權(quán)限,以及Active Directory兼容等;二是高性能計(jì)算,對(duì)整個(gè)存儲(chǔ)的性能和吞吐率有著非常高的要求;三是各類(lèi)企業(yè)應(yīng)用,上云時(shí)必須完美的兼容和支持之前的功能;四是大數(shù)據(jù)環(huán)境,往往需要高吞吐、低延時(shí)等技術(shù)支持。

為滿(mǎn)足以上四類(lèi)場(chǎng)景的不同需求,亞馬遜云科技專(zhuān)門(mén)構(gòu)建了一個(gè)場(chǎng)景化應(yīng)用FSx家族,目前可提供四種Amazon FSx產(chǎn)品:一是Amazon FSx for windows;二是為支持高性能計(jì)算特別設(shè)計(jì)的Amazon FSx for Lustre;三是全方位、全托管的云上存儲(chǔ)Amazon FSx for NetApp ONTAP,可支持各類(lèi)企業(yè)應(yīng)用;四是面向大數(shù)據(jù)分析Linux工作負(fù)載而設(shè)計(jì)的Amazon FSx for OpenZFS,提供高達(dá)1百萬(wàn)IOPS ,而延遲僅有幾百微秒,非常適合運(yùn)行機(jī)器學(xué)習(xí)、音視頻實(shí)時(shí)處理等數(shù)據(jù)密集型的工作負(fù)載。

陳曉建提到:全球領(lǐng)先的風(fēng)電智能化服務(wù)商金風(fēng)慧能采用亞馬遜云科技的HPC集群和Amazon FSx for Lustre高性能共享文件系統(tǒng),在一周內(nèi)完成氣象預(yù)測(cè)系統(tǒng)搭建,整個(gè)系統(tǒng)讓金風(fēng)慧能的氣象數(shù)據(jù)計(jì)算時(shí)間縮短了1/3, 每年節(jié)約了70%的成本,并且大大簡(jiǎn)化了運(yùn)維過(guò)程。

ONTAP是聯(lián)想凌拓母公司之一NetApp的文件存儲(chǔ)系統(tǒng),聯(lián)想凌拓產(chǎn)品管理與營(yíng)銷(xiāo)高級(jí)總監(jiān)林佑聲在會(huì)上提到:“聯(lián)想凌拓專(zhuān)注于智能數(shù)據(jù)管理領(lǐng)域,幫助客戶(hù)最大限度地挖掘數(shù)據(jù)價(jià)值。ONTAP及其數(shù)據(jù)管理功能在許多關(guān)鍵工作任務(wù)中發(fā)揮著不可或缺的作用。我們通過(guò)Amazon FSx for NetApp ONTAP,將NetApp廣受信賴(lài)的文件存儲(chǔ)和數(shù)據(jù)管理能力帶到了亞馬遜云科技上。由亞馬遜云科技支持、運(yùn)行和銷(xiāo)售的全面托管服務(wù),讓客戶(hù)能夠輕松地將ONTAP的強(qiáng)大功能部署于幾乎所有應(yīng)用程序。”

全球領(lǐng)先的物流提供商嘉里物流采用Amazon FSx for NetApp ONTAP公有云方案, 通過(guò)系統(tǒng)自帶的SnapMirror功能,快速把線(xiàn)下數(shù)據(jù)中心NetApp ONTAP的數(shù)據(jù)遷移到亞馬遜云科技上,在云上,利用Amazon FSx for ONTAP Snapshots 做跨區(qū)域?yàn)?zāi)備,實(shí)現(xiàn)關(guān)鍵數(shù)據(jù)的快速備份保護(hù),并利用亞馬遜云科技實(shí)現(xiàn)存儲(chǔ)空間和備份空間的按需使用,隨時(shí)擴(kuò)容;同時(shí)也免除了復(fù)雜的管理開(kāi)銷(xiāo),方便的實(shí)現(xiàn)了業(yè)務(wù)數(shù)據(jù)在各個(gè)國(guó)家不同部門(mén)之間的安全快速共享,提升了嘉里物流業(yè)務(wù)系統(tǒng)的安全性和可靠性。

三、統(tǒng)一數(shù)據(jù)保護(hù)——一站式數(shù)據(jù)備份服務(wù)

為了保障業(yè)務(wù)的連續(xù)性以及數(shù)據(jù)安全,企業(yè)對(duì)數(shù)據(jù)備份的重視程度越來(lái)越高,然而很多數(shù)據(jù)備份系統(tǒng)十分復(fù)雜,大多數(shù)企業(yè)都面臨著管理復(fù)雜、安全合規(guī)以及成本高昂三大挑戰(zhàn)。

為有效解決以上三大挑戰(zhàn),亞馬遜云科技將Amazon Backup擴(kuò)展至Amazon S3和VMware工作負(fù)載,讓客戶(hù)使用統(tǒng)一的數(shù)據(jù)保護(hù)策略,即可配置、管理和監(jiān)督數(shù)據(jù)的備份與恢復(fù)。Amazon Backup 一站式備份服務(wù)現(xiàn)已支持15種以上的數(shù)據(jù)源備份,包括全部的存儲(chǔ)服務(wù)(塊、文件、對(duì)象),以及各類(lèi)數(shù)據(jù)庫(kù),計(jì)算和存儲(chǔ)網(wǎng)關(guān)。

為降低備份管理的復(fù)雜度,Amazon Backup一站式備份服務(wù)提供圖形化管理控制臺(tái),幫助用戶(hù)簡(jiǎn)化備份管理,降低了整體運(yùn)維的成本,同時(shí)用戶(hù)還可以通過(guò)預(yù)設(shè)的備份策略進(jìn)行自動(dòng)化備份,從而大幅降低手動(dòng)備份可能帶來(lái)的諸多問(wèn)題。

在安全合規(guī)方面,Amazon Backup深度集成了亞馬遜云科技自帶的KMS數(shù)據(jù)加密服務(wù),備份操作權(quán)限和數(shù)據(jù)訪(fǎng)問(wèn)權(quán)限都可以通過(guò)IAM進(jìn)行細(xì)顆粒度監(jiān)控,可滿(mǎn)足個(gè)人信息安全規(guī)范、等保等安全合規(guī)要求。此外,利用Amazon Backup的集中數(shù)據(jù)備份,以及備份庫(kù)鎖定功能,可有效防止勒索病毒的攻擊,將生產(chǎn)數(shù)據(jù)備份到備份庫(kù),設(shè)置備份庫(kù)鎖定功能,病毒或惡意操作都無(wú)法改變或者刪除備份庫(kù)中的數(shù)據(jù)。

據(jù)悉,澳大利亞領(lǐng)先的獨(dú)立石油和天然氣生產(chǎn)商Santos起初將數(shù)據(jù)放在塊存儲(chǔ)服務(wù)Amazon EBS上,通過(guò)Amazon Lambda腳本做手動(dòng)備份,但是隨著業(yè)務(wù)的發(fā)展,數(shù)據(jù)量激增,手動(dòng)備份的時(shí)間越來(lái)越長(zhǎng),整個(gè)備份的成功率只有80%左右。經(jīng)過(guò)再三考量,Santos選擇Amazon Backup,通過(guò)自動(dòng)設(shè)定備份策略在后臺(tái)由系統(tǒng)進(jìn)行備份,極大減輕了IT人員的工作負(fù)擔(dān),不僅備份時(shí)間減少了80%,相關(guān)運(yùn)營(yíng)成本也降低了50%,最重要的是,備份任務(wù)的成功率從 80% 提高到 100%,完全滿(mǎn)足了企業(yè)數(shù)據(jù)的合規(guī)需求。

助力全球各行業(yè)用戶(hù)開(kāi)展業(yè)務(wù)創(chuàng)新

陳曉建提到:“亞馬遜云科技存儲(chǔ)服務(wù)已經(jīng)成為IT行業(yè)的‘水’和‘電’,讓各行各業(yè)的業(yè)務(wù)都能從存儲(chǔ)服務(wù)中獲得價(jià)值。”據(jù)悉,亞馬遜云科技存儲(chǔ)服務(wù)覆蓋制造業(yè)、化工、媒體、社交網(wǎng)站、視頻、汽車(chē)、航空航天等行業(yè),廣泛服務(wù)于全球各地、各個(gè)行業(yè)、各個(gè)規(guī)模的企業(yè)客戶(hù),同時(shí)為國(guó)內(nèi)嘉里物流、金風(fēng)慧能、蘇泊爾、OPPO、首汽約車(chē),中集集團(tuán)、金蝶,桐樹(shù)基因、我愛(ài)我家等客戶(hù)提供廣泛存儲(chǔ)服務(wù)。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號(hào)-6京公網(wǎng)安備 11010502049343號(hào)