如今，大數(shù)據(jù)越來越重要，因?yàn)槠髽I(yè)需要處理來自多個(gè)來源的不斷增長的存儲(chǔ)數(shù)據(jù)。

采用大數(shù)據(jù)可以稱之為一場完美風(fēng)暴。廉價(jià)的存儲(chǔ)和大量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的大量涌入，導(dǎo)致了諸多的大型數(shù)據(jù)工具得以開發(fā)，幫助企業(yè)“解鎖”他們積累的數(shù)據(jù)，從客戶記錄到產(chǎn)品性能的結(jié)果等更多的數(shù)據(jù)。

像傳統(tǒng)的商業(yè)智能（BI），這些新的大數(shù)據(jù)工具可以分析過去的趨勢，并幫助企業(yè)識(shí)別重要模式，如特定的銷售趨勢。許多大數(shù)據(jù)工具現(xiàn)在提供了一個(gè)新一代預(yù)測和規(guī)范性的見解，以及深埋在企業(yè)數(shù)據(jù)中心的所有數(shù)據(jù)。

對(duì)于人們面臨的挑戰(zhàn)，調(diào)查機(jī)構(gòu)Gartner公司分析師道格·蘭尼表示，人們還是不要用擴(kuò)展的基礎(chǔ)設(shè)施來處理所有這些數(shù)據(jù)，而是從各種數(shù)據(jù)本身進(jìn)行處理。

“對(duì)于真正的挑戰(zhàn)，企業(yè)對(duì)自己和客戶的交易數(shù)據(jù)進(jìn)行處理、整合，并共同構(gòu)建和理解輸入，加上來自合作伙伴和供應(yīng)商的數(shù)據(jù)，還有一些外源性數(shù)據(jù)，如社會(huì)媒體的開放數(shù)據(jù)和聚合數(shù)據(jù)等等，而這些只是觸及了表面。”蘭尼在一封電子郵件中說表示。

大數(shù)據(jù)是一個(gè)大問題：您的網(wǎng)絡(luò)準(zhǔn)備好了嗎？

盡管Gartner的客戶端通過一個(gè)2比1的比例說明各種數(shù)據(jù)是一個(gè)更大的問題，對(duì)他們來說數(shù)據(jù)增長的速度越來越快，而數(shù)據(jù)處理供應(yīng)商將會(huì)繼續(xù)提供資金更大、更快的解決方案。

ConstellationResearch公司分析師道格·亨森特表示，大數(shù)據(jù)解決方案肯定是不斷發(fā)展變化的。

“在我的書中，2014年是發(fā)布SQLHadoop公告的一年，但今年企業(yè)和銷售商開始認(rèn)識(shí)到大數(shù)據(jù)的機(jī)會(huì)不只是擴(kuò)大傳統(tǒng)的BI和數(shù)據(jù)庫。”亨森特說，“因此，ApacheSpark開源框架和其他的分析方案已在2015年超越了SQL。2015年，數(shù)百家供應(yīng)商和大公司開始采用ApacheSpark開源框架，IIBM公司擁抱是倡導(dǎo)其他分析選項(xiàng)最明顯的廠商，而其他致力于數(shù)據(jù)集成和大數(shù)據(jù)平臺(tái)的很多企業(yè)加入這個(gè)行列。”

事實(shí)上，大數(shù)據(jù)浪潮似乎來臨，每天都會(huì)供應(yīng)商推出的各種解決方案，其中也包括一些相對(duì)全面的設(shè)計(jì)。盡管很難得到一個(gè)全面的名單，這四個(gè)工具應(yīng)該出在用戶的應(yīng)用清單中。

（1）數(shù)據(jù)科學(xué)家的H2O.ai

H2O.ai是初創(chuàng)公司Oxdata在2014年底推出的一個(gè)獨(dú)立開源機(jī)器學(xué)習(xí)平臺(tái)，主要服務(wù)于數(shù)據(jù)科學(xué)家和開發(fā)者，為其應(yīng)用提供快速機(jī)器學(xué)習(xí)引擎。Oxdata公司表示，可以在商用硬件上對(duì)任何來源（如Hadoop，SQL）的數(shù)據(jù)進(jìn)行處理分析，甚至在上千個(gè)網(wǎng)絡(luò)節(jié)點(diǎn)或亞馬遜的AWS云運(yùn)行。個(gè)人可以嘗試并繼續(xù)免費(fèi)使用H2O.ai。Oxdata公司將收取企業(yè)用戶的費(fèi)用。

“很多公司使用Spark代替Hadoop短期記憶，這就像大數(shù)據(jù)的內(nèi)存一樣。”H2O公司市場營銷和增長副總裁奧列格·羅格斯科說，“在讀取你的短期記憶方面，h20.ai的功能超越了Spark，基本上提供了超快速的分析能力。”

羅格斯科說，H2O.ai是旨在提供預(yù)測分析的數(shù)據(jù)工具的一個(gè)新品種。他指出，SQL幫助推動(dòng)了描述性數(shù)據(jù)分析的早期階段或“告訴我發(fā)生了什么”，其次是“預(yù)測期”的產(chǎn)品，看看發(fā)生了什么事，盡量幫助客戶預(yù)測接下來會(huì)發(fā)生什么-例如：庫存用完或產(chǎn)品突破等。

“我們?cè)谖磥韼啄陮⒖吹降谌齻€(gè)階段是指令性的階段發(fā)揮作用，這個(gè)系統(tǒng)說，‘這是我的教訓(xùn)，我認(rèn)為未來會(huì)發(fā)生什么，你應(yīng)該最大限度地實(shí)現(xiàn)目標(biāo)。’”羅格斯科說，他還指出，谷歌地圖的主動(dòng)建議替代路線的能力就是一個(gè)規(guī)范性解決方案的例子。

H20.ai將自己定位為各種行業(yè)數(shù)據(jù)科學(xué)家使用的一個(gè)預(yù)測工具和“盒子”。例如，網(wǎng)絡(luò)巨頭思科公司有6萬款預(yù)測購買決策的模型，該公司使用H2O.ai對(duì)這些模型評(píng)分。思科公司首席數(shù)據(jù)科學(xué)家表示，“其結(jié)果是太棒了，我們看到H2O.ai比我們的同類產(chǎn)品的性能要好3到7倍。在單獨(dú)建模評(píng)分方面，h2o.ai環(huán)境是upwards的10到15倍。”

（2）ThoughtSpot3–大數(shù)據(jù)應(yīng)用

借助谷歌公司這樣的搜索引擎，很容易在網(wǎng)上搜到用戶需要的社交數(shù)據(jù)和網(wǎng)絡(luò)數(shù)據(jù)，但企業(yè)數(shù)據(jù)一般難以查找，也更難以利用。為此，7位工程師共同成立了ThoughtSpot公司，目標(biāo)是開發(fā)一個(gè)類似于谷歌的搜索引擎，用于查找商業(yè)數(shù)據(jù)。

該公司在谷歌公司成立初期就為其提供硬件設(shè)備，在企業(yè)啟用防火墻后提供超快搜索功能。ThoughtSpot結(jié)合了新搜索引擎的應(yīng)用，它的功能是通過一個(gè)快速內(nèi)存數(shù)據(jù)庫來搜尋海量信息。該公司還計(jì)劃提供一個(gè)基于云的服務(wù)。

ThoughtSpot3起始售價(jià)為90000美元，是一種為企業(yè)快速尋找大數(shù)據(jù)的數(shù)據(jù)科學(xué)家依賴的工具。“我們已經(jīng)看到企業(yè)使用該產(chǎn)品的數(shù)據(jù)科學(xué)家正在增加。”ThoughtSpot公司營銷副總裁史葛霍爾頓說，“二十億人都在搜索，但在工作中，我們?nèi)匀灰蕾囉跀?shù)據(jù)專家。”

霍爾頓在加利福尼亞公司總部PaloAlto進(jìn)行了一個(gè)演示，顯示系統(tǒng)使用熟悉的搜索欄界面是如何工作的.剛剛發(fā)布的ThoughtSpot3.0具有一些新功能，包括“DataRank”的工作方式，類似于谷歌的PageRank和typeahead。該軟件使用機(jī)器學(xué)習(xí)算法建議的關(guān)鍵詞為客戶搜索，以加快這一進(jìn)程。

Popcharts無疑是最酷的新功能。當(dāng)你在搜索框中輸入“由東海岸銷售......”ThoughtSpot瞬間創(chuàng)建基于查詢相關(guān)的圖表，并利用機(jī)器學(xué)習(xí)給出10多個(gè)可以選擇的圖表。

另一個(gè)“即時(shí)”功能是AutoJoins，其目的是為一般都有數(shù)百個(gè)數(shù)據(jù)源的企業(yè)導(dǎo)航。AutoJoins使用ThoughtSpot的數(shù)據(jù)索引，通過索引模式和機(jī)器學(xué)習(xí)，以了解表格是否相關(guān)，并在一秒內(nèi)呈現(xiàn)研究結(jié)果。

霍爾頓說，ThoughtSpot更側(cè)重于對(duì)歷史數(shù)據(jù)的傳統(tǒng)BI分析（速度超快，使用十分方便），其預(yù)測性和規(guī)范性分析功能會(huì)在未來的軟件中體現(xiàn)。

（3）Connotate軟件

Connotate公司是一家為美聯(lián)社、路透社、道瓊斯等大型公司對(duì)全球上千個(gè)網(wǎng)站的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行實(shí)時(shí)分類和分析的企業(yè)。在Web數(shù)據(jù)抽取和監(jiān)控上，Connotate軟件是世界上最簡單、最合算的解決方案，以有效地利用海量數(shù)據(jù)，從中挖掘出對(duì)企業(yè)增長有價(jià)值的信息，并可以進(jìn)行高度可擴(kuò)展性的數(shù)據(jù)監(jiān)控和數(shù)據(jù)收集。

Gartner公司分析師道格·萊尼表示，Connotate和BrightPlanet在他所列的大數(shù)據(jù)工具名單上，因?yàn)樗鼈冇兄趶钠髽I(yè)自身的數(shù)據(jù)庫和互聯(lián)網(wǎng)上收割和構(gòu)建豐富多彩的內(nèi)容。

“隨著數(shù)字化和經(jīng)濟(jì)增長，企業(yè)認(rèn)識(shí)到只關(guān)注自己的數(shù)據(jù)不再是萬無一失的創(chuàng)新良方，他們?cè)絹碓蕉嗟剞D(zhuǎn)向外源數(shù)據(jù)（即公司外部的數(shù)據(jù)）。”萊尼說。

Connotate公司表示，其從網(wǎng)頁抽取內(nèi)容的專利技術(shù)遠(yuǎn)遠(yuǎn)超出了網(wǎng)頁抓取或自定義腳本。取而代之的是對(duì)于網(wǎng)站工作如何使用機(jī)器學(xué)習(xí)采用一種直觀的視覺理解，Connotate公司表示，使其內(nèi)容提取“準(zhǔn)確可靠，并且可擴(kuò)展。”

據(jù)該公司介紹，Connotate平臺(tái)”可以很容易處理成百上千的網(wǎng)站和百萬兆字節(jié)。”并提供與業(yè)務(wù)相關(guān)的有針對(duì)性的信息。其提供的內(nèi)容采集平均成本比傳統(tǒng)方法少55％。

例舉一個(gè)使用案例，Connotate幫助銷售情報(bào)提供者從數(shù)千個(gè)醫(yī)院網(wǎng)站提取聯(lián)系人資料（姓名，職務(wù)，電話，電子郵件和隸屬關(guān)系），并建立一個(gè)全國性的醫(yī)生檔案數(shù)據(jù)庫。

Connotate公司表示，其大數(shù)據(jù)解決方案賣給了幾家大型制藥公司，并沒有花費(fèi)額外的硬件或IT資源。大數(shù)據(jù)提取的規(guī)?；?，甚至可以提供50萬名醫(yī)生的數(shù)據(jù)。

（4）BrightPlanet工具

BrightPlanet公司也從網(wǎng)絡(luò)中提取數(shù)據(jù)，該公司宣稱其搜索具有所謂的“深網(wǎng)”見解的能力。其深網(wǎng)可以挖掘那些具有密碼保護(hù)的網(wǎng)站和通常不會(huì)被傳統(tǒng)的搜索引擎索引的其他網(wǎng)站的數(shù)據(jù)。

BrightPlanet公司表示，其收集的數(shù)據(jù)條目數(shù)以百萬計(jì)，其中包括推特和新聞數(shù)據(jù)庫和醫(yī)學(xué)期刊的數(shù)據(jù)，并可以根據(jù)企業(yè)的具體需求和條件進(jìn)行過濾。

該公司為使用該軟件的數(shù)據(jù)采集工程師提供一個(gè)免費(fèi)的數(shù)據(jù)即服務(wù)（DaaS）咨詢，并介紹他們的服務(wù)是一個(gè)不錯(cuò)的選擇。咨詢的目的是幫助企業(yè)數(shù)據(jù)中心找到合適的收集數(shù)據(jù)，并得到正確的格式，這樣客戶可以得到一個(gè)好主意的過程和結(jié)果。

最終用戶或客戶可以選擇哪些網(wǎng)站收獲的內(nèi)容。反過來，BrightPlanet公司又將其內(nèi)容進(jìn)行充實(shí)。例如，像在社交媒體網(wǎng)站評(píng)論這樣的非結(jié)構(gòu)化數(shù)據(jù)，通過一個(gè)自定義格式設(shè)計(jì)，使其在更便于使用的客戶端提交。