在Big Data LDN的一個開場主題演講中,Cloudera首席架構師Doug Cutting討論了數據轉型在追求數字化轉型中的重要性。
不要對任何科技產品抱得太緊;要時常想想怎樣才能取代它。畢竟,改變才是新常態(tài)。
企業(yè)和個人都在數據的旅途上
這一數據歷程代表了我們在社會和商業(yè)中所做的大部分工作,包括娛樂,商業(yè),政府和企業(yè)等的數字化轉型的開始。這些不同的領域正在以驚人的速度采用技術,這是摩爾定律50年的頂峰,畢竟現在硬件和軟件已經便宜到可以廣泛使用。然而,從商業(yè)和消費者的角度來看,我們還沒有充分利用這一點。事實上,我們才剛剛開始。這是科技領域最激動人心的時刻,就像工業(yè)革命時期的機械化一樣;但是發(fā)生得更快,而且遍及社會的各個方面。
數據軟件
數據軟件是這場技術革命的核心,但是,它最近一直在變化。僅僅在十年前,軟件的主導風格表示國家數據庫才是王道。今天,情況完全不同了。由于我們有來自不同來源的大量數據,關系數據庫現在是受到限制的,因此這種風格僅限于難以連接的孤立系統(tǒng)。Cloudera的首席架構師ddoug Cutting在大數據LDN的主題演講中表示“顛覆的時機已經成熟,需求已經存在。但是,很難設計出一種解決方案,并在第一次就把它做好。事實證明,數據軟件的迭代方法更好。”
開源
開源軟件提供了一種更好的方法,可以通過協作為更通用的目的開發(fā)軟件。它創(chuàng)造了巨大的優(yōu)勢,通過削減后被稱為“軟件采用的類固醇”。重要的是,開源可以被企業(yè)使用,他們逐漸意識到了這一點。“現在的環(huán)境已經和十年前不同了” Cutting表示。
在hadoop之上,現在有很多工具可以對其進行補充和替換——例如Apache Spark。而且,還有其他的存儲引擎。一個生態(tài)系統(tǒng)正在開發(fā),它有一個共同的線程來支持更好的軟件開發(fā)。這些新工具適用于我們現有的各種數據——例如物聯網、傳感器數據、網絡數據。這些不是事務性數據源,因此關系數據庫可能不是最好的工具。“現在的進步是一種更有成效的方式。”Cutting繼續(xù)說道。
軟件開發(fā)公司的崛起
每個行業(yè)都是由軟件驅動的,每個企業(yè)都需要成為某種軟件開發(fā)公司。這種能力或稱為轉型,將為企業(yè)及其客戶提供獨特的價值,以應對顛覆。這通常與數據軟件有關。例如,亞馬遜(Amazon)和特斯拉(Tesla)(以及其他顛覆者)圍繞數據系統(tǒng)打造自己的公司。數據將是未來商業(yè)發(fā)展的核心。
充分利用你的數據
將人工智能方法附加到數據系統(tǒng)中可能有效,但是有很多更簡單的事情可以更快速地完成:分析(“基本上是計數”)、大規(guī)模的數據倉庫、數據科學(“花式計數,聰明的數學”)、機器學習(“用反饋和迭代來計算計數 - 相當進化的用例”)。你需要有良好的數據,并理解這些數據,以便上述任何一項都能發(fā)揮作用,并提供真正的見解——它告訴了你什么,而沒有告訴你什么。”大多數人都建議慢慢來而不是一下子跳進深淵。
最根本的挑戰(zhàn)
許多組織,甚至是政府,都把不斷增長的技能視為需要攀登的大山。然而,據Cutting說,“人們可以學得相當快速。技能差距不是一個深層次的問題。”
行業(yè)知識,你知道如何改進你的業(yè)務,需要數年的成長和發(fā)展:你可以在幾周內采用技術,但需要時間來了解這種技術如何與業(yè)務目標保持一致并解決常規(guī)挑戰(zhàn)。
然而,根本的挑戰(zhàn)圍繞著思維方式的商業(yè)文化更好的利用新技術。
人們低估了組織的結構:IT是如何管理的,誰擁有等等。要充分利用這一優(yōu)勢,就必須重新思考組織、實踐和理念。
至關重要的是,企業(yè)應該授權整個組織的人使用技術來做出決策。這種自助服務系統(tǒng)的理念與數十年來的IT文化背道而馳。
問題是:企業(yè)能夠適應并利用這種優(yōu)勢嗎?
新公司發(fā)展如此之快,是因為他們從一開始就有這種需要的心態(tài)——這是對更成熟的傳統(tǒng)行業(yè)的根本挑戰(zhàn)。
相關的挑戰(zhàn)是以一種道德的方式調整組織;維護用戶的信任,并且不背叛用戶。
這只是開始
企業(yè)和政府才剛剛開始考慮如何有效地整合這些技術。重要的是,需要有更多的監(jiān)管,科技公司也需要推動。Cutting說:“如果我們想成為我們想要的數字化社會,我們就需要關注人們的權利。云計算是一個擺脫傳統(tǒng)IT組織都會遇到的限制和文化問題的好方法——它可以讓很多事情變得更簡單,并加速轉型。”
數據的旅程
在組織踏上數據之旅之際,重要的是不要把目標定得過高。商業(yè)領袖需要用這些技術展望未來,但不是一夜之間。這是一場緩慢的革命,一場長期的革命。“讓迭代式的成功成長和傳播,”Cutting說,首先是個小的勝利。有必要讓高層參與進來,并允許項目進行——這些轉型項目需要以開放的方式進行。這最終是一個過程,但完美是無法實現的。這將永遠是一個持續(xù)的旅程。“不要太緊地擁抱任何科技產品;而是需要時常想想我們怎樣才能取代它,保持前進。畢竟,改變才是新常態(tài)。
這是數據旅程和數字化轉型工作的開始,它將使組織得以改進; 通過獲取數據,理解數據并使用它來優(yōu)化流程。