《企業(yè)網(wǎng)D1Net》6月23日訊
在大數(shù)據(jù)時代下,視頻監(jiān)控的發(fā)展已經(jīng)進入快速時期,如此同時,大數(shù)據(jù)與視頻監(jiān)控結(jié)合趨勢更加明顯,對于大數(shù)據(jù)的視頻監(jiān)控處理,我們根據(jù)數(shù)據(jù)的特點,基于大數(shù)據(jù)的架構(gòu),幾種視頻監(jiān)控數(shù)據(jù)在處理起來的時候更加的方便。
第一,架構(gòu)更加靈活,伸縮彈性更大
對于一些中大型項目,由于起點的差異,缺乏視頻監(jiān)控架構(gòu)的頂層設(shè)計,后期的擴容升級難免尾大不掉,如在建設(shè)初期就引入面向大數(shù)據(jù)的架構(gòu),為業(yè)務(wù)擴張和管理帶來好處。
第二,以廉價通用硬件迎合視頻監(jiān)控數(shù)據(jù)的爆發(fā)性增長
在面向大數(shù)據(jù)的架構(gòu)中,可根據(jù)視頻監(jiān)控業(yè)務(wù)的部署需要,設(shè)立多個HDFS集群組成,采集的流數(shù)據(jù)會被劃分成段,并分布于數(shù)據(jù)節(jié)點,這些數(shù)據(jù)節(jié)點可以采用廉價通用型的硬件,由軟件技術(shù)保證其高可靠性,這種方式避免采用傳統(tǒng)高端硬件的模式,大大降低投資成本。
第三,通過高速并行計算實現(xiàn)智能分析和數(shù)據(jù)挖掘
對于金礦來講,唯有熠熠發(fā)光的金子才是有價值,視頻監(jiān)控數(shù)據(jù)就猶如這樣一座金礦,傳統(tǒng)人工和串行的數(shù)據(jù)篩選方式已在大數(shù)據(jù)時代不能滿足要求。面向大數(shù)據(jù)的架構(gòu)原理就是將海量數(shù)據(jù)分解為較小的更易訪問的批量數(shù)據(jù),在多臺服務(wù)器上并行分析處理,從而大大加快視頻數(shù)據(jù)的處理進程。
結(jié)合視頻監(jiān)控業(yè)務(wù)特點,引入Hadoop的架構(gòu),以頂層設(shè)計的視角來構(gòu)建面向大數(shù)據(jù)視頻監(jiān)控架構(gòu),將對未來視頻監(jiān)控業(yè)務(wù)的規(guī)劃設(shè)計產(chǎn)生深遠的影響。下面簡要描述下大數(shù)據(jù)視頻監(jiān)控邏輯架構(gòu)。
數(shù)據(jù)源層,包括實時數(shù)據(jù)和非實時數(shù)據(jù)。實時數(shù)據(jù)指IP攝像頭和傳感器產(chǎn)生的實時流媒體數(shù)據(jù)。非實時數(shù)據(jù)指從DVR、編碼器、第三方系統(tǒng)導入的媒體數(shù)據(jù)。
大數(shù)據(jù)存儲層,采用了HDFS和HBASE,實現(xiàn)數(shù)據(jù)低成本、高可靠的管理。把采集的視頻流保存在HDFS集群內(nèi),并通過HBase建立訪問的索引。把傳統(tǒng)NVR和專用存儲進行重構(gòu),納入到整體的分布式文件系統(tǒng)中來。
大數(shù)據(jù)計算層,實現(xiàn)智能分析和數(shù)據(jù)挖掘。通過MapReduce把對大視頻的分析進行分解,充分利用閑置資源,把計算任務(wù)交由多臺服務(wù)器進行并行計算分析,另外一方面,根據(jù)智能分析產(chǎn)生的視頻元數(shù)據(jù),通過Hive挖掘視頻元數(shù)據(jù)的價值信息。業(yè)務(wù)及管理層,實現(xiàn)設(shè)備和業(yè)務(wù)管理?;赯ookeeper組成的服務(wù)器集群,可以保證業(yè)務(wù)系統(tǒng)的無故障運營,基于Ganglia實現(xiàn)對攝像頭等設(shè)備的監(jiān)管。
D1Net評論:
由此可見,基于大數(shù)據(jù)的視頻架構(gòu),本質(zhì)上是把視頻數(shù)據(jù)作為最有價值的資產(chǎn),以數(shù)據(jù)作為核心來構(gòu)建的技術(shù)架構(gòu),重點解決了海量的視頻數(shù)據(jù)分散和集中式存儲并存、多級分布問題,極大提升了非結(jié)構(gòu)化視頻數(shù)據(jù)讀寫的效率,為視頻監(jiān)控的快速檢索、智能分析提供了端到端的解決方案。