——我認為,企業(yè)的“小數(shù)據(jù)”一樣可以發(fā)揮大作用。
以下都是個人拙見,不當之處望大家批評指正。
現(xiàn)在地球人都知道大數(shù)據(jù)是好東西,什么是大數(shù)據(jù)?我們?yōu)槭裁匆愦髷?shù)據(jù)?如何構建符合企業(yè)戰(zhàn)略發(fā)展的大數(shù)據(jù)體系?
帶著問題我們一一進行探討。這就需要回到大數(shù)據(jù)的誕生來看,簡單來說,一些數(shù)據(jù)表面看就是一堆毫無關聯(lián)的數(shù)據(jù)集合,這些數(shù)據(jù)之間乍一看也沒什么關聯(lián)關系,但是通過技術手段關聯(lián)起來分析就會發(fā)現(xiàn)一些潛在的價值,再深入的挖掘又能為我們指明方向,大數(shù)據(jù)的含義就是這樣來的。
大數(shù)據(jù)都有哪些特點呢?
首先數(shù)據(jù)容量大,數(shù)據(jù)量要有一定的規(guī)模,這個容易理解,現(xiàn)在無論是互聯(lián)網(wǎng)、國家政務網(wǎng)還是企業(yè),無時無刻都在產(chǎn)生著大量的數(shù)據(jù),歷年累計的數(shù)據(jù)都會達到巨大的量級(注:通過大量的數(shù)據(jù)探索、模型訓練,不斷的推倒驗證、重建的過程才能構建科學的數(shù)據(jù)模型,就是說跟算命一樣,你要信息量大我才能算出東西,越多越準,要做到科學、準確,所以數(shù)據(jù)量必須要大);
數(shù)據(jù)種類多,結(jié)構化、非結(jié)構化、半結(jié)構化的數(shù)據(jù)多種多樣,這也是大數(shù)據(jù)區(qū)別于普通信息系統(tǒng)的特點,容納了大量的多異構數(shù)據(jù),數(shù)據(jù)比較全面(注:大數(shù)據(jù)不僅僅是各類系統(tǒng)中的結(jié)構化數(shù)據(jù),還存在著大量的圖片、語音、視頻、文檔等非結(jié)構化數(shù)據(jù),煤礦企業(yè)中智慧礦山的過程數(shù)據(jù),設備、傳感器數(shù)據(jù)也占了較大的比重,這些數(shù)據(jù)結(jié)構比較單一,相對來說也不復雜。
但是,這些數(shù)據(jù)涉及的廠家較多,同一個系統(tǒng)就要兩三個廠家來做,單一系統(tǒng)的集成都存在問題,何況是大數(shù)據(jù)要將所有系統(tǒng)都集成到一起,沒有統(tǒng)籌規(guī)劃,沒有標準規(guī)范,沒有組織、沒有專業(yè)人才的支撐能行嗎?同時,各個礦井和各單位在系統(tǒng)建設初期也缺乏集團的總體指導規(guī)劃,所有也沒有標準可言,都是按照自己怎么方便怎么建設的原則,所以這些都對后期的利用提出了要求。還有這些數(shù)據(jù)要利用好的大前提也要符合現(xiàn)場管理的合理性,就是數(shù)據(jù)要可用,如果業(yè)務系統(tǒng)都是個擺設,再整一堆沒用的數(shù)據(jù),你再分析也起不到作用);
速度,數(shù)據(jù)從產(chǎn)生到加工再到結(jié)果的呈現(xiàn)要有時效性,速率要有保證,否則等你分析完了,黃花菜都涼了,股票都賠了,意義就不大了(注:要狠抓源頭,從源頭上保證底層數(shù)據(jù)的產(chǎn)生效率,不管是報表還是現(xiàn)場傳感器、設備都要保證數(shù)據(jù)能夠高效的產(chǎn)生、能夠快速穩(wěn)定的獲取,管理和技術上都要雙保證);
真實性,數(shù)據(jù)要從源頭上保證是貨真價實的,否則你再分析必將是南轅北轍,這也是最最基本的,(注:企業(yè)內(nèi)部,看似樣樣數(shù)據(jù)都有,看似真實。但是,大量的經(jīng)營管理數(shù)據(jù)都是以統(tǒng)計為主,數(shù)據(jù)、報表在各個部門之間傳遞,具體起到什么作用任誰也說不清,反正上面要什么數(shù)據(jù)我就報什么數(shù)據(jù),是否合理,做什么用一概不管。大量的人力、精力都浪費在了某些數(shù)據(jù)的毫無價值的流轉(zhuǎn)、上報、處理過程中。其實,這也從側(cè)面反映了信息化存在的一些致命問題,例如缺乏信息戰(zhàn)略規(guī)劃,信息系統(tǒng)沒有以真實需求為出發(fā),滿足不了業(yè)務。礦井生產(chǎn)過程中產(chǎn)生的大量數(shù)據(jù),也是未來大數(shù)據(jù)分析的底層基礎數(shù)據(jù),一定要保證數(shù)據(jù)的真實、可靠、可用。
當前,我們的礦井地質(zhì)條件太復雜,給設備的投入帶來不少難題,我們還處在機械化向智能化轉(zhuǎn)變的過程,設備我們投入了,怎么保證設備的穩(wěn)定運行,有沒有發(fā)揮真正的作用,設備的整體運行狀態(tài),都是我們關心的。礦井的真實安全狀態(tài)如何,我的液壓支架、重點采掘面的設備是否穩(wěn)定?重點區(qū)域的井下各種安全監(jiān)測設備的數(shù)據(jù)能否真實反映當前安全狀態(tài)?這些都需要真實的數(shù)據(jù)做支撐。
我們當前,以統(tǒng)計為主的業(yè)務系統(tǒng)過多,以業(yè)務為主的系統(tǒng)太少了,例如礦井內(nèi)部市場化延伸的成本精細化管理,這種工作出力不討好,但是又最重要,要做到大數(shù)據(jù)分析又不能沒有,例如你要分析礦井某一個工作面的成本,那你要的數(shù)據(jù)財務沒有、生產(chǎn)系統(tǒng)沒有,這些數(shù)據(jù)很大一部分在現(xiàn)場各部門業(yè)務人員日常工作中,沒有專業(yè)的系統(tǒng)支撐,這時候就需要建系統(tǒng)去完善了,我們要明確一點大數(shù)據(jù)其實是建立在成熟的業(yè)務系統(tǒng)的基礎上的,大數(shù)據(jù)是位于業(yè)務的最頂層,需要大量的數(shù)據(jù)做支撐,數(shù)據(jù)沒有或者不全,這時候就需要用大數(shù)據(jù)的思維模式再去完善,該優(yōu)化業(yè)務流程的就要去優(yōu)化。
沒有數(shù)據(jù)治理概念、缺乏數(shù)據(jù)標準、業(yè)務系統(tǒng)之間關聯(lián)度極低(注:系統(tǒng)之間該有的業(yè)務關聯(lián)沒有關聯(lián),流程缺失,例如:設備的全生命周期管理,從設備選型、招投標、采購、合同簽訂、資產(chǎn)入賬、入庫、使用、維護、轉(zhuǎn)移、報廢涉及多個部門、多個系統(tǒng),但是這些系統(tǒng)都沒有將設備的信息關聯(lián)起來,造成了各取所需,各管個人的一攤子,這么重要的事情,不能因為涉及的部門多、利益多,就沒人管,確實需要有人去綜合考慮,例如設備選型是否合理,那你要了解設備的在不同地點的使用情況、設備的綜合投入、設備的綜合利用情況等等,這就需要我們用大數(shù)據(jù)的思維去優(yōu)化甚至重建業(yè)務流程,倒逼管理部門用信息化的技術手段去實現(xiàn)業(yè)務融合,做到數(shù)據(jù)只出自一個源頭,又可以利用到其他多個源頭)等,如何從源頭上保證數(shù)據(jù)的真實可靠、可用,這是需要管理者思考的問題,也是需要同管理相結(jié)合去深入探討,也是大數(shù)據(jù)的基本保障。
價值,很好理解,這些數(shù)據(jù)看似沒有關聯(lián)一旦我們認真對待,深入探索了,我們就會發(fā)現(xiàn)一些意想不到的價值,我們正是看到了這些數(shù)據(jù)存在的潛在價值,才如此大費周章的將數(shù)據(jù)一步一步的轉(zhuǎn)換為價值資產(chǎn)。(注:數(shù)據(jù)是業(yè)務的直接體現(xiàn),如何發(fā)現(xiàn)企業(yè)數(shù)據(jù)的價值值得思考,特別是煤炭行業(yè),數(shù)據(jù)涉及經(jīng)營管控的人財物產(chǎn)供銷;安全生產(chǎn)的水火瓦斯頂板、沖擊地壓;礦井的沖壓提排運輸、智慧化工區(qū)、智能工作面;煤炭外部市場環(huán)境、國家政策走向,這些事情的樁樁件件背后都有著大量的數(shù)據(jù)支撐,怎么將這些數(shù)據(jù)利用起來,發(fā)揮作用,就是我們企業(yè)需要思考的問題。
這些數(shù)據(jù)涉及企業(yè)經(jīng)營管理和安全生產(chǎn)的方方面面,有一定的數(shù)據(jù)容量、數(shù)據(jù)種類也多種多樣,存在一定的潛在價值,反映的企業(yè)真實情況,作為老板關注的都是企業(yè)生死攸關的大事情,他恐怕最想知道的就是企業(yè)是否在按照我的管理思路在運行,哪些地方出現(xiàn)了偏差?下面的真實情況到底是什么樣?這些都需要一個強有力的數(shù)據(jù)做支撐,有了大數(shù)據(jù)做決策依據(jù),領導也不會偏聽偏信,只聽匯報,說的再好,你的數(shù)據(jù)在那塊擺著呢。
企業(yè)內(nèi)部的數(shù)據(jù)量是無法和互聯(lián)網(wǎng)以及國家政務數(shù)據(jù)相比擬的我想也可以稱之為“小數(shù)據(jù)”,但是麻雀雖小五臟俱全,我們應該以大數(shù)據(jù)體系的標準去謀劃企業(yè)的大數(shù)據(jù)戰(zhàn)略。
當前,大數(shù)據(jù)在國家、民生、工業(yè)、經(jīng)濟等方面都發(fā)揮著巨大的作用,而且國家層面也不斷的宣傳大數(shù)據(jù),政務大數(shù)據(jù)、交通大數(shù)據(jù)、民生大數(shù)據(jù)遍地開花,國家領導人也是非常重視國家大數(shù)據(jù)戰(zhàn)略發(fā)展,提出適時的提出了,大數(shù)據(jù)+民生,改變生活提升幸福感(注:這是將大數(shù)據(jù)同國家戰(zhàn)略相結(jié)合,同國家行政服務和國家施政管理相結(jié)合,將大數(shù)據(jù)作為國家的頭等大事來抓,大數(shù)據(jù)將涉及到民生的方方面面都做了各種應用并不斷推廣,確實起到了一舉多得的作用)。
國家在大數(shù)據(jù)方面是真金白銀的投入,也確實收到了良好的效果,確立大數(shù)據(jù)的國家戰(zhàn)略地位,構建規(guī)范可控的大數(shù)據(jù)生態(tài)體系,成立大數(shù)據(jù)主管部門,設立各地方和各行業(yè)大數(shù)據(jù)管理中心,真正將數(shù)據(jù)作為資產(chǎn)管理了起來,利用了起來。同時根據(jù)各行業(yè)和部門特點,出臺各種數(shù)據(jù)管理規(guī)范和措施,目的就是將數(shù)據(jù)從源頭管理起來,規(guī)范起來,有序有效的利用(注:企業(yè)大數(shù)據(jù)也需要這樣,首先要明確一點,企業(yè)大數(shù)據(jù)是為企業(yè)的戰(zhàn)略發(fā)展和經(jīng)營管控服務,所有大數(shù)據(jù)既要契合企業(yè)的管理又要同企業(yè)的現(xiàn)場實際相結(jié)合,一句話符合企業(yè)的基本利益,同時要有規(guī)劃、有方向目標、有組織制度、有人才儲備)。
國家通過行政干預和技術升級雙管齊下,將國家各個部門的數(shù)據(jù)和業(yè)務都打通了,將社保、醫(yī)療、交通、稅務等關系到國計民生的方方面面數(shù)據(jù)都共享匯聚了,方便了管理、方便了企業(yè)、方便了個人,國家對下面的情況更加了解了,企業(yè)和個人在辦理各種業(yè)務也方便了,國家在管理方面更加透明,也更加有依據(jù)?;ヂ?lián)網(wǎng)企業(yè)在大數(shù)據(jù)方面更是發(fā)展迅速,阿里、騰訊、華為圍繞客戶作了大量的數(shù)據(jù)準備和分析工作,通過大數(shù)據(jù)知道你喜歡什么就給你推薦什么,同時這些數(shù)據(jù)也為產(chǎn)品研發(fā)提供了依據(jù),這些都產(chǎn)生了不可估量的經(jīng)濟和社會效益。
煤炭企業(yè)大數(shù)據(jù)怎么搞?這些需要根據(jù)企業(yè)的實際情況,量體裁衣,將現(xiàn)在比較成熟的大數(shù)據(jù)體系引入企業(yè)。當然,技術現(xiàn)在都很成熟,關鍵是理念、是思路,怎么建設符合企業(yè)實際現(xiàn)狀和長期發(fā)展的大數(shù)據(jù)之路。有的人說大數(shù)據(jù)就是個軟件平臺,可以幫助我們解決正常信息化系統(tǒng)無法解決的問題。這么說也對也不對,大數(shù)據(jù)從技術角度看就是將主流的分布式軟件構架和一些算法、新技術等融合到一起構建的全新架構。但是,我想說的大數(shù)據(jù)不僅如此,大數(shù)據(jù)應該是個完整的體系,是一套方法論。企業(yè)有著自己的數(shù)據(jù)生態(tài),數(shù)據(jù)量相對較少,數(shù)據(jù)的產(chǎn)生都是圍繞具體業(yè)務產(chǎn)生,由于歷史原因和信息化從業(yè)的水平建設的信息化參差不齊,業(yè)務之間缺乏關聯(lián),沒有規(guī)劃,存在數(shù)據(jù)的嚴重失真等問題,在這樣的生態(tài)下做大數(shù)據(jù),可想難度之大。
在網(wǎng)上找的一片文章,總結(jié)的挺好的分享一下。當前,不少煤炭企業(yè)也已經(jīng)上了大數(shù)據(jù)項目,但是都是在前期的業(yè)務優(yōu)化和數(shù)據(jù)準備階段,都沒有實質(zhì)的進展。從大數(shù)據(jù)系統(tǒng)架構看,存在四個階段:數(shù)據(jù)生成、獲取、存儲、分析。煤炭企業(yè)的大數(shù)據(jù)發(fā)展多集中于前三個階段,在數(shù)據(jù)分析上是比較薄弱的,而且大多也只是對數(shù)據(jù)進行簡單的存儲,很少建立專門的數(shù)據(jù)中心。
從大數(shù)據(jù)應用范圍來看,多集中在安全、生產(chǎn)、運銷、財務、人力資源等方面,數(shù)據(jù)雖多,分布卻極散,各個業(yè)務系統(tǒng)的數(shù)據(jù)沒有打通,缺乏統(tǒng)一的數(shù)據(jù)規(guī)范,業(yè)務系統(tǒng)數(shù)據(jù)按照各自的口徑和理解習慣上報,沒有標準化的體系和上報協(xié)議,難以構建高質(zhì)量的數(shù)據(jù)倉庫。從大數(shù)據(jù)管理來看,多停留在數(shù)據(jù)統(tǒng)計、生成報表、儀表監(jiān)測、即時查詢等簡單應用上,缺乏數(shù)據(jù)分析人才,無法合理設定管理框架,存儲基礎設施及技術不完備,不能建立各種適合的模型,難以深入整理挖掘數(shù)據(jù)價值,效率原理難以體現(xiàn),無法發(fā)揮數(shù)據(jù)預警預判作用,對領導決策輔助作用不強。
煤炭企業(yè)“大數(shù)據(jù)”終極思考。如何構建符合企業(yè)戰(zhàn)略發(fā)展的大數(shù)據(jù)體系?四個方面,要有思想認識,有目標規(guī)劃、有組織制度,有人才儲備。
一、管理者要建立大數(shù)據(jù)大管理理念。現(xiàn)在是一個信息化數(shù)據(jù)爆發(fā)的時代,企業(yè)的運行無時無刻不在產(chǎn)生著依靠著數(shù)據(jù),作為管理者必須建立大數(shù)據(jù)大管理的理念,掌控好大數(shù)據(jù),依托大數(shù)據(jù)實現(xiàn)大管理,決策才能更具戰(zhàn)略性和前瞻性。
二、頂層規(guī)劃、統(tǒng)籌設計。
三、企業(yè)內(nèi)部要建立大數(shù)據(jù)中心。
四、大數(shù)據(jù)復合型人才隊伍的建設。煤炭企業(yè)涉及的面比較廣,各方面都比較專業(yè),需要一批既熟悉掌握數(shù)據(jù)分析技術、又對煤炭行業(yè)非常了解的人才,才能挖掘出規(guī)律,準確預警形勢,前瞻預判前景。