近年來(lái),大數(shù)據(jù)所帶來(lái)的挑戰(zhàn)推動(dòng)了計(jì)算技術(shù)的快速發(fā)展,催生了分布式并行處理平臺(tái)Hadoop、軟硬件一體化數(shù)據(jù)庫(kù)服務(wù)器Exadata等一批新產(chǎn)品。對(duì)于電信運(yùn)營(yíng)商這樣的大型企業(yè)而言,需要思考如何應(yīng)用這些新技術(shù),解決在大數(shù)據(jù)時(shí)代背景下所面臨的挑戰(zhàn),從而提升企業(yè)價(jià)值。
數(shù)據(jù)處理面臨5個(gè)挑戰(zhàn)
當(dāng)前,電信運(yùn)營(yíng)商通過(guò)多年的信息化建設(shè),已建成各種各樣的業(yè)務(wù)系統(tǒng)和IT支撐系統(tǒng),而隨著業(yè)務(wù)規(guī)模、用戶需求的不斷提升以及移動(dòng)互聯(lián)網(wǎng)應(yīng)用的快速發(fā)展,在數(shù)據(jù)處理上正面臨著各種挑戰(zhàn)。其存在的問題主要包括5個(gè)層面。
一是需要處理的數(shù)據(jù)量日益龐大,難以實(shí)現(xiàn)海量數(shù)據(jù)的高效存儲(chǔ)和訪問。電信運(yùn)營(yíng)商僅一個(gè)省公司一個(gè)月的計(jì)費(fèi)清單量就多達(dá)數(shù)十億條記錄,使用傳統(tǒng)的數(shù)據(jù)處理方法效率往往低下乃至不可忍受。而運(yùn)營(yíng)數(shù)據(jù)的日?qǐng)?bào)、月報(bào)和實(shí)時(shí)營(yíng)銷等需求,更是令統(tǒng)計(jì)、分析、挖掘、營(yíng)銷等系統(tǒng)不堪重負(fù)。
二是無(wú)法應(yīng)對(duì)高并發(fā)讀寫的需求。當(dāng)前的業(yè)務(wù)環(huán)境中,一些營(yíng)銷優(yōu)惠活動(dòng),例如網(wǎng)廳的秒殺活動(dòng)、iPhone首發(fā)優(yōu)惠辦理等,容易引發(fā)一些難以預(yù)估的短時(shí)間內(nèi)極端高并發(fā)讀寫需求,并往往達(dá)到每秒上萬(wàn)次讀寫請(qǐng)求,這使得傳統(tǒng)技術(shù)難以承受如此巨大的負(fù)載。
三是數(shù)據(jù)模型擴(kuò)展困難。在目前激烈競(jìng)爭(zhēng)的行業(yè)環(huán)境下,電信業(yè)務(wù)變化頻繁,部分?jǐn)?shù)據(jù)如客戶特征信息、客戶聯(lián)系方式等,經(jīng)常出現(xiàn)數(shù)據(jù)模型擴(kuò)展需求,對(duì)傳統(tǒng)的技術(shù)而言,數(shù)據(jù)模型的變更涉及的工作復(fù)雜而龐大。
四是需要處理的數(shù)據(jù)類型趨于多樣化,除了話單這樣的傳統(tǒng)格式化文本之外,還有圖片、音頻甚至視頻等,另外即使是文本,也可能是大段落的文本,難以進(jìn)行格式化處理。
五是大量的中小行業(yè)應(yīng)用服務(wù)器,一方面占用了相當(dāng)規(guī)模的硬件資源和維護(hù)工作量,另一方面對(duì)行業(yè)應(yīng)用快速發(fā)展時(shí),傳統(tǒng)的體系架構(gòu)難以方便地實(shí)現(xiàn)橫向擴(kuò)展。
內(nèi)部:基礎(chǔ)設(shè)施完善
因此,應(yīng)用大數(shù)據(jù)技術(shù)解決當(dāng)前的各種挑戰(zhàn),對(duì)電信運(yùn)營(yíng)商有著重要意義。在此過(guò)程中電信運(yùn)營(yíng)商面臨著什么樣的機(jī)遇和挑戰(zhàn)?可利用SWOT方法(如圖所示)探知。
從企業(yè)內(nèi)部看,電信運(yùn)營(yíng)商具備IT基礎(chǔ)設(shè)施完善、資金和人員充足、信息獲取便捷等自身優(yōu)勢(shì)。電信運(yùn)營(yíng)商從80年代起進(jìn)行信息化建設(shè),目前已建成了業(yè)務(wù)系統(tǒng)、支撐系統(tǒng)等眾多信息化平臺(tái),信息化基礎(chǔ)設(shè)施非常完善,積累了豐富的數(shù)據(jù)。運(yùn)營(yíng)商在信息化建設(shè)方面的投入資金每年都達(dá)數(shù)十億元,而且擁有龐大的IT研發(fā)、支撐和運(yùn)營(yíng)團(tuán)隊(duì),能為大數(shù)據(jù)技術(shù)的研究、應(yīng)用提供資金和人力的保障。
另外,運(yùn)營(yíng)商作為信息服務(wù)的管道,是用戶享用信息服務(wù)的必經(jīng)之路,具備獲取各種信息的天然優(yōu)勢(shì),能夠相對(duì)容易地獲取用戶行為數(shù)據(jù)。
當(dāng)然,運(yùn)營(yíng)商作為傳統(tǒng)企業(yè),在運(yùn)作上相對(duì)保守,一般傾向于使用比較成熟、可靠的技術(shù),因此對(duì)新技術(shù)的研究力度不足,技術(shù)創(chuàng)新能力也有待提高。而同時(shí),運(yùn)營(yíng)商作為大型的國(guó)企,企業(yè)組織在地域、業(yè)務(wù)和IT等維度的條塊分割比較嚴(yán)重,地域上劃分為全國(guó)、省和地市三個(gè)層級(jí),業(yè)務(wù)部門劃分為政企客戶、公眾客戶、市場(chǎng)營(yíng)銷、客服等多個(gè)部門,技術(shù)部門也劃分為業(yè)務(wù)網(wǎng)絡(luò)、無(wú)線網(wǎng)絡(luò)、支撐系統(tǒng)等多個(gè)部門,這些部門之間的互相溝通協(xié)作存在著一定的障礙,而大數(shù)據(jù)應(yīng)用往往要求從客戶的角度綜合統(tǒng)籌各種信息,一般都涉及跨地域、跨部門的協(xié)調(diào)。所有這些都是運(yùn)營(yíng)商應(yīng)用大數(shù)據(jù)技術(shù)時(shí)需要處理好的內(nèi)部不足。
外部:技術(shù)條件成熟
從企業(yè)外部環(huán)境看,大數(shù)據(jù)處理的軟硬件技術(shù)經(jīng)過(guò)近幾年的快速發(fā)展,已日益成熟。例如,針對(duì)關(guān)系數(shù)據(jù)庫(kù)模型過(guò)于簡(jiǎn)單,不便表達(dá)復(fù)雜嵌套的需求以及支持?jǐn)?shù)據(jù)類型有限等局限性,從數(shù)據(jù)模型入手出現(xiàn)了高可靠、高可用、最終一致的非結(jié)構(gòu)化數(shù)據(jù)庫(kù)理論和相關(guān)產(chǎn)品;基于開源的分布式并行計(jì)算技術(shù),使用廉價(jià)的計(jì)算設(shè)備解決海量數(shù)據(jù)、極高并發(fā)、高可用性、高擴(kuò)展性等技術(shù)難題;采用軟硬件一體化設(shè)計(jì)技術(shù)提高數(shù)據(jù)處理效率;采用大型機(jī)x86虛擬化技術(shù)在兼容現(xiàn)有系統(tǒng)的同時(shí),降低主機(jī)運(yùn)營(yíng)維護(hù)管理成本;采用FLASH盤等新型存儲(chǔ)技術(shù)提升IO吞吐量;采用云計(jì)算技術(shù)構(gòu)建資源池,提供面向多租戶按需分配的主機(jī)云、數(shù)據(jù)庫(kù)云服務(wù)等。
與此同時(shí),近年來(lái)智能移動(dòng)終端應(yīng)用快速發(fā)展,據(jù)《經(jīng)濟(jì)學(xué)家》雜志去年估計(jì):目前人們儲(chǔ)存的數(shù)據(jù)足夠填充60000家美國(guó)國(guó)會(huì)圖書館;全世界有40億手機(jī)用戶(其中12%的人擁有智能手機(jī))已經(jīng)將他們自己變成了數(shù)據(jù)流;智能手機(jī)的數(shù)量以每年20%的速度增長(zhǎng),而傳感器數(shù)量的增長(zhǎng)率為30%。所有這些都意味著數(shù)據(jù)極速膨脹,而用戶的信息化需求則日益增長(zhǎng)。
另外,新浪、騰迅、百度等互聯(lián)網(wǎng)巨頭對(duì)大數(shù)據(jù)技術(shù)的探索,也為運(yùn)營(yíng)商提供了寶貴的參考例案。
可見,運(yùn)營(yíng)商應(yīng)用大數(shù)據(jù)技術(shù)具有技術(shù)日益成熟、用戶信息化需求日益增長(zhǎng)和存在可供參考案例等不可多得的外部機(jī)遇。
當(dāng)然,在進(jìn)行大數(shù)據(jù)處理、提供數(shù)據(jù)服務(wù)的同時(shí),也存在著如何界定和規(guī)避用戶隱私,如何解決用戶數(shù)據(jù)安全以及當(dāng)前部分互聯(lián)網(wǎng)企業(yè)已捷足先登,提供了主機(jī)云、數(shù)據(jù)庫(kù)云等服務(wù)的問題。
但總體而言,大數(shù)據(jù)背景下的電信運(yùn)營(yíng)商是機(jī)遇和挑戰(zhàn)并存,并且更多的是機(jī)遇。運(yùn)營(yíng)商在大數(shù)據(jù)技術(shù)研究和應(yīng)用已被互聯(lián)網(wǎng)行業(yè)拋離的趨勢(shì)下,必須緊抓有限的時(shí)間窗口奮起直追,避免徹底淪為管道的尷尬,真正轉(zhuǎn)型為綜合信息服務(wù)提供商。