2016 年大數(shù)據(jù)領(lǐng)域會發(fā)生什么情況?考慮到如今在深層神經(jīng)網(wǎng)絡(luò)和規(guī)范性分析方面取得的進(jìn)展,你可能覺得這個問題很好回答。而實際上,來自業(yè)界的大數(shù)據(jù)預(yù)測大不相同,本文精選出了最值得關(guān)注的 33 個預(yù)測,為您開啟未知的 2016!
數(shù)據(jù)平民崛起
甲骨文公司預(yù)測一種新型用戶:數(shù)據(jù)平民(Data Civilian)會崛起。該公司稱:“雖然復(fù)雜的數(shù)據(jù)統(tǒng)計可能仍局限于數(shù)據(jù)科學(xué)家,但數(shù)據(jù)驅(qū)動的決策不會是這樣。在未來一年,更簡單的大數(shù)據(jù)發(fā)現(xiàn)工具讓業(yè)務(wù)分析員可以尋找企業(yè) Hadoop 集群中的數(shù)據(jù)集,將它們重新做成新的混搭組合,甚至運用探索性機(jī)器學(xué)習(xí)方法來分析它們。
“大數(shù)據(jù)”會消亡
Nucleus Research 公司公開發(fā)表了不同意見,預(yù)測我們所知道的大數(shù)據(jù)會消亡。該公司稱:“在過去兩年,每家公司及其人員似乎都推出了某種形式的大數(shù)據(jù)解決方案。是該告別新奇事物綜合癥(shiny object syndrome)的時候了。用戶會像對待任何數(shù)據(jù)那樣對待和訪問大數(shù)據(jù),而不是著手解決大數(shù)據(jù)分析這一項龐大又艱巨的任務(wù)。
風(fēng)險投資公司更關(guān)注大數(shù)據(jù)給出的結(jié)論
據(jù) Opera Solutions 公司的高級副總裁 Keri Smith 聲稱,由于風(fēng)險投資公司往數(shù)據(jù)初創(chuàng)公司紛紛投入資金,是時候開始提出尖銳的問題了。Smith 問道:“大數(shù)據(jù)解決方案真正的投資回報率(ROI)如何?公司如何才能跨過部門級部署這個階段,讓大數(shù)據(jù)在整個企業(yè)創(chuàng)造的價值實現(xiàn)最大化?又有哪些有意義的使用場合適用于眾多垂直領(lǐng)域?要是貴公司現(xiàn)在沒有提出這類問題、積極尋求答案,應(yīng)該很快就會。
機(jī)器學(xué)習(xí)和人的洞察力組合滲透新行業(yè)
Spare5 公司的首席執(zhí)行官 Matt Bencke 表示,我們在 2016 年會看到數(shù)據(jù)絕地武士(Data Jedis)的興起。他寫道:“將來被人工智能改變的工作會比以往任何時候都要多,‘數(shù)據(jù)絕地武士’會變成最搶手的員工。機(jī)器學(xué)習(xí)和人的洞察力這對組合會滲透到新行業(yè),包括醫(yī)療保健和安全行業(yè),員工需要靈活適應(yīng)以提供不同服務(wù),不然就會落在后面。
數(shù)據(jù)科學(xué)在銀行界大放光彩
數(shù)據(jù)科學(xué)咨詢公司 Profusion 的首席執(zhí)行官 Mike Weston 預(yù)測,數(shù)據(jù)科學(xué)在銀行界會大放光彩。他寫道:“金融業(yè)是率先采用數(shù)據(jù)科學(xué)技術(shù)/方法的行業(yè)之一。不過,所有銀行服務(wù)公司采用數(shù)據(jù)科學(xué)的步調(diào)遠(yuǎn)遠(yuǎn)沒有統(tǒng)一。2016 年,我預(yù)計這種局面會有所改變。更好地利用數(shù)據(jù)和服務(wù)個性化會從金融市場進(jìn)入到零售銀行領(lǐng)域。這會給市場營銷、客戶服務(wù)和產(chǎn)品開發(fā)帶來深遠(yuǎn)影響。”
人工智能和認(rèn)知計算讓個性化醫(yī)療成為現(xiàn)實
先進(jìn)的人工智能引起機(jī)器人成為統(tǒng)治者,這種場景嚇壞了 Elon Musk。不過據(jù) Franz 公司的認(rèn)知科學(xué)家兼首席執(zhí)行官 Jans Aasman 聲稱,應(yīng)該將人工智能歸為“友好的技術(shù)”這一列。他說:“2016 年及以后,人工智能和認(rèn)知計算將使個性化醫(yī)療成為現(xiàn)實,幫助拯救患有罕見疾病的病人,并改善整體的醫(yī)療保健狀況。”
首席數(shù)據(jù)官將成為信息技術(shù)領(lǐng)域的“新寵兒”
Blazent 公司首席技術(shù)官辦公室負(fù)責(zé)人 Michael Ludwig 認(rèn)為,首席數(shù)據(jù)官(CDO)會成為信息技術(shù)領(lǐng)域的“新寵兒”,永遠(yuǎn)讓辦公室政治更顯錯綜復(fù)雜。他寫道:“正是由于大數(shù)據(jù)很復(fù)雜,又需要完整而準(zhǔn)確的數(shù)據(jù),首席數(shù)據(jù)官會變得越來越重要。因而,首席技術(shù)官和首席信息官需要給首席數(shù)據(jù)官讓出地方,除非確立了明確界定的角色,并成立了相關(guān)團(tuán)隊,否則高層管理團(tuán)隊當(dāng)中會出現(xiàn)緊張局勢。”
首席洞察官成為大數(shù)據(jù)整理過程的關(guān)鍵領(lǐng)導(dǎo)者
但不是每個人都這么認(rèn)為,其中包括 PROS 公司的首席遠(yuǎn)見官 Craig Zawada。“2016 年,我們會開始看到被任命的首席數(shù)據(jù)官日漸式微,這是過去的一種角色。相反,2016 年會出現(xiàn)首席洞察官,這類人將成為大數(shù)據(jù)整理過程中的關(guān)鍵領(lǐng)導(dǎo)者。”
云服務(wù)被充分利用
但是頗有勢力的 CIO 能重新發(fā)號施令嗎?Cazena 公司創(chuàng)始人兼首席執(zhí)行官 Prat Moghe 預(yù)測會這樣。他寫道:“2016 年,CIO 們會充分利用企業(yè)就緒的云服務(wù),作為中間人提供這樣的云服務(wù),既滿足 IT 部門在治理、合規(guī)和安全等方面的要求,又滿足業(yè)務(wù)部門在敏捷性和響應(yīng)能力等方面的要求。”
流分析逐漸成熟
DataTorrent 公司的首席執(zhí)行官兼聯(lián)合創(chuàng)始人 Phu Hoang 預(yù)測,流分析(streaming analytics)會開始成熟起來,并在大數(shù)據(jù)陣營中證明其價值。他說:“雖然許多公司已經(jīng)認(rèn)可了實時流非常重要這一點,但我們會看到用戶希望更進(jìn)一步,確定流分析使用場合。在接下來一年,使用流分析工具的客戶會變得更加成熟,要求流分析有明確的投資回報率。”
實時分析異?;鸨?/strong>
實時分析在明年會很火爆,這個我們懂。不過據(jù) MongoDB 公司的戰(zhàn)略和產(chǎn)品營銷副總裁 Kelly Stirman 聲稱,一項技術(shù):Apache Kafka 比其余技術(shù)更惹人注目。Stirman 寫道:“Kafka 將成為企業(yè)數(shù)據(jù)基礎(chǔ)設(shè)施的一個重要集成點,為構(gòu)建智能分布式系統(tǒng)提供便利。Kafka 及其他流分析系統(tǒng)(比如 Spark 和 Storm)會補(bǔ)充數(shù)據(jù)庫,成為跨應(yīng)用程序和數(shù)據(jù)中心管理數(shù)據(jù)的整個企業(yè)堆棧的關(guān)鍵部分。”
大數(shù)據(jù)讓娛樂更加“娛樂”
喜歡鼓樂?FirstFuel Software 公司的首席數(shù)據(jù)科學(xué)家 Badril Raghavan 表示,那么你一定會愛上 2016 年。“在今后幾個月,我們會看到企業(yè)和個人利用數(shù)據(jù)和分析工具,面對包括能源、體育、社會公益和音樂在內(nèi)的眾多行業(yè),提供個性化、引人入勝的體驗。比如說,人們將來可以利用數(shù)據(jù),根據(jù)個人喜好(例如偏愛鼓樂)改編歌曲。”
物聯(lián)網(wǎng)影響半導(dǎo)體行業(yè)
物聯(lián)網(wǎng)會如何影響半導(dǎo)體行業(yè)?IT 傳奇人物 Ray Zinn 對此有幾點看法。他寫道:“你會看到設(shè)計和制造出現(xiàn)更明顯的分工。晶圓廠的使命就是擴(kuò)大規(guī)模,服務(wù)于幾十億消費者和新興的物聯(lián)網(wǎng)市場。設(shè)計將會與制造脫離開來,分擔(dān)市場風(fēng)險。創(chuàng)新將是設(shè)計公司的生存之道,而不斷提高效率才是晶圓廠的致勝秘訣。問題是,接下來會出現(xiàn)什么?到時難免會出現(xiàn)新的市場和設(shè)備,從而推動行業(yè)呈現(xiàn)新的井噴式增長。物聯(lián)網(wǎng)好比是沉睡的巨人,不過我覺得它只是在打盹而已。”
機(jī)器學(xué)習(xí)、大數(shù)據(jù)自動化和人工智能大放異彩
Infosys 公司高級副總裁兼平臺、大數(shù)據(jù)和分析部門主管 Abdul Razack 表示,機(jī)器學(xué)習(xí)、大數(shù)據(jù)自動化和人工智能在 2015 年大出風(fēng)頭,明年會出更大的風(fēng)頭。Razack 說:“2016 年,企業(yè)更廣泛地采用人工智能技術(shù)替代人工重復(fù)性任務(wù)的步伐會快速加快。”他提到,豐田公司最近往人工智能方面投入了 10 億美元。大數(shù)據(jù)自動化已經(jīng)在發(fā)展,不過明年“會得到更廣泛的應(yīng)用,人的獨特能力(即拿來復(fù)雜問題后給出創(chuàng)造性的解決辦法)顯得更重要。”特斯拉的無人駕駛汽車內(nèi)置了機(jī)器學(xué)習(xí)技術(shù),但明年,“機(jī)器學(xué)習(xí)會悄悄進(jìn)入到千家萬戶,讓我們身邊的物件不僅僅是聯(lián)網(wǎng)而已。”
合并興起的關(guān)鍵年
許多人預(yù)計 2016 年大數(shù)據(jù)領(lǐng)域會出現(xiàn)激動人心的事情。Logi Analytics 公司的解決方案工程和服務(wù)副總裁 Charles Caldwell 卻不這么認(rèn)為。“如果我展望 2016 年,并不覺得會出現(xiàn)許多激動人心的事情。其他廠商已給出了云計算、視覺分析和移動等方面的預(yù)測,但是那些大多是安定下來的舊趨勢。在我看來,2016 年會是合并興起和為下一大熱門打基礎(chǔ)的一年。”
副本數(shù)據(jù)管理(CDM)迎來春天
“最想象不到獎”授予 Catalogic Software 公司的產(chǎn)品營銷高級經(jīng)理 Peter Eicher。我們倒不是指他的這一預(yù)測:副本數(shù)據(jù)管理(CDM)“是迎來大好時期的技術(shù)――不僅這個領(lǐng)域出現(xiàn)新廠商,老派廠商也在跟風(fēng),這就是最好的佐證。”這完全合情合理。不,我們之所以提名 Peter 是因為他的這一瘋狂預(yù)測:紐約尼克斯隊會奪得 NBA 總冠軍。他承認(rèn):“是的,結(jié)果不是。我不可能一直預(yù)測正確。不過話又說回來,這個預(yù)測已連續(xù)錯了 42 年。”
大數(shù)據(jù)泄密事件頻發(fā)
大數(shù)據(jù)領(lǐng)域的“沮喪的黛比”( Debbie Downer)獎授予 BlueTalon 公司的首席執(zhí)行官 Eric Tilenius,因為他預(yù)測,大企業(yè)爆出大數(shù)據(jù)泄密事件的步伐可能會加快。他寫道:“2016 年,缺乏統(tǒng)一的數(shù)據(jù)治理,可能會導(dǎo)致企業(yè)界迄今面臨的最大的安全方面沖擊――這相當(dāng)于移動技術(shù)的問世給傳統(tǒng)企業(yè)邊界帶來的沖擊。依賴支離破碎的方法來控制數(shù)據(jù)訪問,即面對不斷變化的數(shù)據(jù)格局采用不一致的政策,只會在企業(yè)數(shù)據(jù)保護(hù)方面留下大洞。”
微服務(wù)架構(gòu)有所突破
你在搞微服務(wù)嗎?據(jù) SaaS 廠商 Workday 聲稱,如果你現(xiàn)在沒搞,很快會搞。該公司聲稱:“很顯然,內(nèi)部部署與云之爭已結(jié)束,云贏了。不過,并非構(gòu)建的所有云架構(gòu)都一個樣。微服務(wù)架構(gòu)會突破 Netflix 等消費者互聯(lián)網(wǎng)設(shè)計領(lǐng)域,成為自向云轉(zhuǎn)變以來企業(yè)應(yīng)用軟件領(lǐng)域最重大的架構(gòu)進(jìn)步。”
大數(shù)據(jù)分析擴(kuò)大領(lǐng)域
TARGIT 公司首席技術(shù)官 Ulrik Pederson 表示,大數(shù)據(jù)有難度,許多公司在明年會竭力搞好大數(shù)據(jù)。他寫道:“2016 年大數(shù)據(jù)分析會擴(kuò)大領(lǐng)域,一些工具讓企業(yè)用戶有可能在需要時對大數(shù)據(jù)執(zhí)行全面的自助式探索,不需要 IT 部門的大力指導(dǎo)。對應(yīng)于我的第一個預(yù)測,我預(yù)計先進(jìn)分析項目在眾多行業(yè)會大幅增加。然而,這并不意味著它們會成功……要是聽到許多廠商和客 在成功實施項目上遇到困難,我也不會覺得驚訝。”
認(rèn)知技術(shù)、數(shù)據(jù)科學(xué)會有進(jìn)展
國際數(shù)據(jù)分析研究所(International Institute of Analytics)預(yù)測便于嵌入式分析的分析微服務(wù)會大行其道。這家獨立研究和咨詢公司還預(yù)測,認(rèn)知技術(shù)、數(shù)據(jù)科學(xué)和數(shù)據(jù)精選等領(lǐng)域會取得進(jìn)展。哦,該組織表示,由于許多大學(xué)開設(shè)新課程,分析人才危機(jī)有望得到緩解。
非數(shù)據(jù)專業(yè)人才也會投身大數(shù)據(jù)
OLAP-on-Hadoop 提供商 AtScale 公司的首席營銷官 Bruno Aziza 表示,不是數(shù)據(jù)專業(yè)人才的那些人也會積極投身于大數(shù)據(jù)。他寫道:“隨著 Hadoop 變得更容易被非數(shù)據(jù)專業(yè)人才訪問,營銷人員會開始訪問更多的數(shù)據(jù),以便做出更合理的決策??梢越柚?Hadoop 更深入更全面地了解數(shù)據(jù),這讓營銷人員能夠洞察消費行為、從而做出決策,并了解客戶消費旅程背后的流程。”
高性能計算漸成主流
存儲巨頭 DDN 預(yù)測,我們會看到更多的高性能計算技術(shù)進(jìn)入到主流,特別是由于它涉及存儲。該公司表示:“2016 年,來自高性能計算行業(yè)的存儲、數(shù)據(jù)管理和應(yīng)用程序加速等技術(shù)會繼續(xù)以更快的速度被利用起來,以滿足企業(yè)對性能和規(guī)模越來越高的要求,因而會以更快的速度取代傳統(tǒng)的 IT 基礎(chǔ)設(shè)施。”
開源大數(shù)據(jù)遍地開花
開源大數(shù)據(jù)技術(shù)給你留下了深刻印象?Pentaho 公司的首席執(zhí)行官 Quentin Gallivan 表示,你還沒有看到任何實際東西。Gallivan 寫道:“像 Spark、Docker、Kafka 和 Solr 這些很酷的新工具會遍地開花,這些新興的開源工具旨在能夠?qū)?PB 級數(shù)據(jù)進(jìn)行大規(guī)模大批量的分析,它們會從‘青春期’階段進(jìn)入到‘壯年期’階段。”
Spark 淘汰 MapReduce,拯救 Hadoop
RDBMS-on-Hadoop 廠商 Splice Machine 公司的聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Monte Zweben 表示,Spark 會淘汰 MapReduce,但是會拯救 Hadoop。他寫道:“MapReduce 相當(dāng)深奧。具有速度慢、批處理的特性,又加上非常復(fù)雜,因而對許多企業(yè)來說毫無吸引力。由于速度快,Spark 要自然得多,對程序員來說很方便。Spark 會給 Hadoop 注入活力;2016 年,基于 Hadoop 的項目十之八九會是與 Spark 有關(guān)的項目。”
云廠商發(fā)布自己的 Spark 平臺即服務(wù)解決方案
Snowflake Computing 公司的首席執(zhí)行官 Bob Muglia 表示,但是這并不意味著每個 Spark 項目會涉及 Hadoop。“如今,Spark 是 Hadoop 發(fā)行版的一部分,與 Hadoop 有著廣泛的聯(lián)系。隨著 Spark 獨自行動,建立一個獨立的、有活力的生態(tài)系統(tǒng),預(yù)計這種情況在 2016 年會發(fā)生變化。實際上,可以預(yù)計各大云計算廠商會發(fā)布各自的 Spark 平臺即服務(wù)(PaaS)解決方案。我們會看到 Elastic Spark 嗎?可能性很大。”
Apache Hadoop 將被重置,并非丟棄
Teradata 公司的企業(yè)系統(tǒng)總經(jīng)理 Dan Graham 表示,企業(yè)組織會對 Apache Hadoop 進(jìn)行重置處理。“隨著 Hadoop 及相關(guān)開源技術(shù)跨過收集知識的早期階段、炒作漸漸消退,企業(yè)會對部署的 Hadoop 按重置鍵、而不是丟棄,運用汲取的經(jīng)驗教訓(xùn),尤其是治理、數(shù)據(jù)集成、安全和可靠性方面的經(jīng)驗教訓(xùn)。”
主數(shù)據(jù)管理(MDM)派上用場
雜物抽屜問題是 Hadoop 社區(qū)面臨的最大挑戰(zhàn)之一。但根本不用害怕――主數(shù)據(jù)管理(MDM)派得上用場!Reltio 公司的首席執(zhí)行官兼創(chuàng)始人 Manish Sood 寫道:“MDM 會變得無處不在。長期以來,MDM 這門技術(shù)只有大公司才用得起,大公司擁有龐大的 IT 團(tuán)隊,又有硬件、軟件和為期多年的實施項目所需的龐大預(yù)算。新一批數(shù)據(jù)驅(qū)動的應(yīng)用程序會內(nèi)置 MDM 作為基本要求。由于同時提供操作功能和分析功能,每個應(yīng)用程序可靠的數(shù)據(jù)基礎(chǔ)由 MDM 引擎來支撐。”
Hadoop 將處于十字路口
2016 年,Hadoop 將處于十字路口,它會往哪個方向走?Altiscale 公司的首席運營官 Mike Maciag 給出了他的預(yù)測。“2016 年,我們會看到 Hadoop 行業(yè)標(biāo)準(zhǔn)得到鞏固。2015 年年初,我們看到開放數(shù)據(jù)平臺計劃(ODPi)正式啟動,該計劃制定了標(biāo)準(zhǔn),為大數(shù)據(jù)生態(tài)系統(tǒng)的關(guān)鍵項目如何協(xié)同運行指明了方向。由于標(biāo)準(zhǔn)化給客戶帶來的好處變得更加顯而易見,ODPi 的成員數(shù)量在這一年翻番。我們預(yù)計,2016 年 Hadoop 會得到更大的發(fā)展和認(rèn)可,讓新的技術(shù)和應(yīng)用程序得以滿足由 ODPi 制定的 Hadoop 生態(tài)系統(tǒng)標(biāo)準(zhǔn)。”
物聯(lián)網(wǎng) 2.0 出現(xiàn)
Zebra Technologies 公司預(yù)測,我們會看到物聯(lián)網(wǎng) 2.0 出現(xiàn)。“物聯(lián)網(wǎng)市場會由過去的閉源、專有的第一代解決方案,變成更成熟、基于行業(yè)標(biāo)準(zhǔn)、可靈活適應(yīng)的解決方案。借助開源方法,企業(yè)組織能夠從數(shù)量更多的服務(wù)提供商及其各自的 API 當(dāng)中作一個選擇。”
后稀缺經(jīng)濟(jì)(post-scarcity economy)日漸興起
OpenText 公司首席執(zhí)行官 Mark Barrenechea 預(yù)測,物聯(lián)網(wǎng)可能預(yù)示著后稀缺經(jīng)濟(jì)(post-scarcity economy)日漸興起。他寫道:“可以將算法想象成這種應(yīng)用程序,對物聯(lián)網(wǎng)及我們生活中方方面面的數(shù)十億個互聯(lián)設(shè)備生成的彼此關(guān)聯(lián)的海量信息進(jìn)行大數(shù)據(jù)分析。擁有數(shù)據(jù)、分析數(shù)據(jù)、改進(jìn)和創(chuàng)新成為企業(yè)成功的關(guān)鍵――這一切得益于互聯(lián)數(shù)字化社會。”
生產(chǎn)工作負(fù)載與分析技術(shù)充分結(jié)合
MapR Technologies 公司的首席執(zhí)行官 John Schroeder 預(yù)測,能夠同時處理分析型工作負(fù)載和事務(wù)型工作負(fù)載的融合平臺會迎來巨大飛躍。“2016 年,由于各大領(lǐng)先公司獲得將生產(chǎn)工作負(fù)載與分析技術(shù)結(jié)合起來,迅速調(diào)整,以適應(yīng)客戶偏好、競爭壓力和商業(yè)環(huán)境所帶來的好處,我們會看到融合方法成為主流方法。這種融合加快了企業(yè)組織“從數(shù)據(jù)到行動”的周期,并縮短了數(shù)據(jù)分析到業(yè)務(wù)影響之間的時間差。”
小眾解決方案吃香
看好 2016 年會出現(xiàn)單一架構(gòu)的另一個支持者是 Datameer 公司的首席執(zhí)行官 Stefan Groschupf。他寫道:“某個技術(shù)類別是新類別時,會出現(xiàn)眾多公司,各自的產(chǎn)品旨在為這個領(lǐng)域的一小部分提供解決方案。這樣一來,客戶只好購買多個工具,試圖弄清楚如何結(jié)合使用這些工具。最后,這種方法根本行不通,客戶傾向于單一廠商提供的集成產(chǎn)品架構(gòu)――或者覆蓋范圍廣泛的產(chǎn)品。2016 年將標(biāo)志著大數(shù)據(jù)產(chǎn)品開始出現(xiàn)這種轉(zhuǎn)型。”
外包大行其道
大數(shù)據(jù)服務(wù)提供商 Absolutdata 公司的首席執(zhí)行官 Anil Kaul 預(yù)測,外包在 2016 年會大行其道。他寫道:“我們可以從大數(shù)據(jù)獲得眾多有價值的信息,可是訪問這些信息頗具挑戰(zhàn)性,而且通常不在平常商業(yè)智能的范圍之內(nèi)。如今許多公司在與第三方合作,制定并執(zhí)行大數(shù)據(jù)分析策略。將外部專家整合到大數(shù)據(jù)團(tuán)隊當(dāng)中,也許是公司在這個迅速變化的領(lǐng)域保持領(lǐng)先一步的最佳途徑。”