IBM Insight 2015大數(shù)據(jù)分析峰會的最后一個演講是由寶信軟件研發(fā)部總經(jīng)理董文生帶來的,時間雖然靠后,但是內(nèi)容同樣精彩,在主題演講中,寶信帶來了另一個與民生密切相關(guān)的案例故事,那就是交通。
交通是城市發(fā)展的命脈,在各地智慧城市建設(shè)過程中,智慧交通都處于非常重要的位置。而想要管好交通,就要同時管好車和路。這就要用到近年大熱的一項(xiàng)技術(shù)——車聯(lián)網(wǎng)。車聯(lián)網(wǎng)通過各種信息傳感設(shè)備,利用RFID、GPS、移動通信、無線網(wǎng)絡(luò)等接入技術(shù)和網(wǎng)絡(luò)服務(wù)支撐技術(shù),實(shí)現(xiàn)人、車、路、環(huán)境之間的智能協(xié)同,實(shí)現(xiàn)在信息網(wǎng)絡(luò)平臺上對汽車的屬性和靜動態(tài)信息,進(jìn)行提取、利用并提供綜合服務(wù)。簡單說,車聯(lián)網(wǎng)的本質(zhì)就是汽車通過移動互聯(lián)網(wǎng)與外界發(fā)生關(guān)系,從而提高效率,最終為人們的出行提供便利。車聯(lián)網(wǎng)技術(shù)可以打通車輛制造、銷售、服務(wù)、管理每個單元,達(dá)到對車輛的有效管理;而通過智能交通技術(shù),特別是大數(shù)據(jù)與分析優(yōu)化來管理套牌車輛監(jiān)察、疏通擁堵,提升車輛通行效率。
傳統(tǒng)解決方案之困
介紹完背景,現(xiàn)在就來說說本文的主人公,寶信軟件與IBM大數(shù)據(jù)分析之間的故事。為保證新能源車的行駛安全,上海政府要求監(jiān)控所有新能源車的行駛數(shù)據(jù),而上海的新能源車監(jiān)控中心正是由寶信軟件參與共建的。
據(jù)董文生介紹,目前,有1.75萬輛車的數(shù)據(jù)要進(jìn)入該監(jiān)控中心,到2017年,這個數(shù)字會上升到5萬輛。粗略地算一下,一臺車的監(jiān)控點(diǎn)不少于70個,再乘以5萬臺,那么,兩年后該監(jiān)控中心的收錄數(shù)據(jù)點(diǎn)將達(dá)到350萬點(diǎn),且這些數(shù)據(jù)的匯報頻率都是秒級的。這給寶信軟件帶來了很大挑戰(zhàn),因?yàn)?,傳統(tǒng)解決方案大多使用集中式關(guān)系型數(shù)據(jù)庫,這種數(shù)據(jù)庫的存儲數(shù)據(jù)量無法不斷拓展,且對于一些新型數(shù)據(jù),如地理位置數(shù)據(jù)、圖像數(shù)據(jù),關(guān)系型數(shù)據(jù)庫也不能有效快速的支持。因此,如何搭建一個性能更好的后臺系統(tǒng),保證上海新能源車監(jiān)控中心在數(shù)據(jù)量激增的情況下,實(shí)時監(jiān)控車輛數(shù)據(jù)就成了寶信軟件的緊要任務(wù)。
還有另一個大數(shù)據(jù)分析場景,那就是智能交通。據(jù)介紹,寶信軟件參與了很多上海和杭州市的智能交通系統(tǒng)項(xiàng)目,其中就包括卡口系統(tǒng)??谙到y(tǒng)是對所有通過該卡口點(diǎn)的機(jī)動車輛進(jìn)行拍攝、記錄與處理的一種道路交通現(xiàn)場監(jiān)測系統(tǒng),該系統(tǒng)可自動識別通過卡口的車輛號牌、顏色等特征,驗(yàn)證出車輛的合法身份,自動核對黑名單庫,從而進(jìn)行自動報警。
上海市約有270萬輛車,需要監(jiān)控的數(shù)據(jù)量之大可想而知。寶信軟件需要匯總這些海量交通信息,對卡口情況進(jìn)行自動監(jiān)控與管理,包括出入卡口車輛信息查詢,套牌識別等等,以便于交警以及相關(guān)人員做出正確的判斷,從而實(shí)現(xiàn)對交通違法車輛、肇事車輛、逃逸車輛等進(jìn)行處罰,實(shí)現(xiàn)全天候監(jiān)控。
在以上的兩個場景中,數(shù)據(jù)不僅體量極大,且分布非常廣泛,更重要的一點(diǎn)是,這些數(shù)據(jù)中大多是讓傳統(tǒng)數(shù)據(jù)庫無能為力的非結(jié)構(gòu)化數(shù)據(jù)。因此,在經(jīng)過縝密思考和測試后,寶信軟件選擇了IBM的NoSQL數(shù)據(jù)庫Cloudant,與IBM一同應(yīng)對這些城市交通發(fā)展難題。
IBM Cloudant優(yōu)化寶信軟件車聯(lián)網(wǎng)方案
Cloudant是IBM在去年2月收購的初創(chuàng)公司,Cloudant軟件基于開源數(shù)據(jù)庫軟件CouchDB,用于處理JSON格式的信息,其搜索用的是Apache Lucene,提供跨區(qū)域復(fù)制,有強(qiáng)大的數(shù)據(jù)持久性,并且支持單租戶和多租戶集群。董文生表示:“IBM Cloudant可以實(shí)時分析多類型復(fù)雜數(shù)據(jù),通過它可以實(shí)現(xiàn)諸如套牌車輛識別等艱巨的任務(wù)。”
董文生介紹了三個Cloudant吸引寶信的功能:
寶信對Cloudant進(jìn)行了測試,將一臺120核、128G內(nèi)存的服務(wù)器虛擬出6臺機(jī)器,測試內(nèi)容包括數(shù)據(jù)插入性能、二級索引、復(fù)制、Rest API、MapReduce及查詢性能。
測試結(jié)果如下:
董文生稱,性能測試基于四種模式進(jìn)行,性能表現(xiàn)完全符合寶信的要求。
董文生強(qiáng)調(diào),Cloudant的地理位置信息特別優(yōu)化,在搜尋一個空間,比如查套牌車時,表現(xiàn)非常友好。還有一點(diǎn),Cloudant支持各種部署模式,不管是公有云、私有云還是本地部署都可以,這也是寶信在很多項(xiàng)目中都在考慮部署Cloudant的重要原因。
在會后采訪中,記者采訪到了IBM中國開發(fā)中心信息管理總經(jīng)理朱輝,這位CDL高管再次強(qiáng)調(diào)了IBM開放的技術(shù)合作形態(tài)。朱輝表示,“通過大數(shù)據(jù)的創(chuàng)新型思維來改變傳統(tǒng)企業(yè)、傳統(tǒng)行業(yè)進(jìn)行新的轉(zhuǎn)型,是IBM在跟市場結(jié)合的方式上的戰(zhàn)略性轉(zhuǎn)變。未來在中國市場,IBM會將自身的技術(shù)沉淀,跟像寶信這樣的企業(yè)一同合作,通過兩家公司的合力共同創(chuàng)新,推動像寶信這樣的中國企業(yè)創(chuàng)造出新的價值,走上一條真正由大數(shù)據(jù)驅(qū)動企業(yè)決策、企業(yè)轉(zhuǎn)型的新模式上來。”