平安城市的建設從最初2004年6月第一批21個科技強警示范城市建設開始,到現(xiàn)在已經(jīng)整整10個年頭。
在這十年里,平安城市的建設已經(jīng)在新技術的推動下,從模擬到數(shù)字,從數(shù)字到高清,快速發(fā)展了三代。平安城市建設的效果也初步體現(xiàn),監(jiān)控覆蓋范圍越來越廣,城市管理和治安對視頻監(jiān)控的依賴度逐漸加大。
比如在杭州,平安杭州項目已經(jīng)全面啟動,監(jiān)控系統(tǒng)設計規(guī)模達5萬個監(jiān)控點。這也是迄今為止最大規(guī)模的平安工程項目。新的社會治安監(jiān)控系統(tǒng),用科技手段來保障社會安定,不僅讓平安杭州成為規(guī)模之最,也為美麗的杭州描繪了一幅宏大的平安“畫卷”
比如在遵義圖像綜合應用系統(tǒng),建設高清攝像機數(shù)量達到3000個,存儲資源達到10PB,通過構建遵義市應急處置業(yè)務應用模型,滿足突發(fā)事件應急處置決策指揮需要,達到“一點感知,處處可知;聞警而動,處處協(xié)同;有備而戰(zhàn),臨危不亂”的狀態(tài)。
在這些平安城市項目建設后,產(chǎn)生了大量的視頻數(shù)據(jù),數(shù)據(jù)量每天都可以用PB級去衡量。已經(jīng)達到與國際數(shù)據(jù)巨頭媲美的地步。我們知 道,對于數(shù)據(jù)最有發(fā)言權的應該是互聯(lián)網(wǎng)巨頭google,google一天全世界產(chǎn)生的數(shù)據(jù)量為10PB,量級是一個平安城市產(chǎn)生的數(shù)據(jù)量10倍。但是我 們來看一下google利用這每天10PB的數(shù)據(jù)量一年的產(chǎn)值吧:超過500億美金!而平安城市通過擁有谷歌十分之一的數(shù)據(jù)量產(chǎn)生了多少價值呢?這是一個 無解的值,甚至很多時候我們并不能量化價值產(chǎn)出。
那么谷歌如何讓這些數(shù)據(jù)產(chǎn)生價值的呢?
大數(shù)據(jù)就是谷歌讓數(shù)據(jù)產(chǎn)生價值的核心,大數(shù)據(jù)是一個籠統(tǒng)的概念,是把多元化、無任何連接關系的數(shù)據(jù)進行清理,分析出數(shù)據(jù)之間的關 系,得到我們想要的、關心的結果。比如通過城市數(shù)據(jù)分析我們能夠得到城市出行狀態(tài)、消費狀態(tài)、人口分布、市民交際狀態(tài)、公共資源應用狀態(tài)等一系列數(shù)據(jù),這 些數(shù)據(jù)可以為我們城市管理作為優(yōu)化依據(jù),也可以作為提高城市商業(yè)和競爭力的關鍵指導。
要實現(xiàn)大數(shù)據(jù),首先需要通過數(shù)據(jù)采集進行大量的數(shù)據(jù)積累,讓數(shù)據(jù)量足夠多,足夠找出數(shù)據(jù)之間的規(guī)律。業(yè)界對大數(shù)據(jù)總結出四大特點: 數(shù)據(jù)量大、類型多、速度快、價值高。宇視根據(jù)大數(shù)據(jù)概念的四大特點,結合獨有的電信級技術優(yōu)勢,形成了一整套大數(shù)據(jù)應用架構,分為四層對大數(shù)據(jù)進行了闡述 和規(guī)劃。
第一層為數(shù)據(jù)采集層,實現(xiàn)大數(shù)據(jù)的數(shù)據(jù)量大、類型多的特點。視頻監(jiān)控完全具備了此種特點,數(shù)據(jù)量巨大,所含有的信息類型眾多。但是 行業(yè)內對于視頻錄像一直有兩個共識:視頻監(jiān)控的數(shù)據(jù),90%以上是無用的。另外一個共識是:視頻監(jiān)控的錄像數(shù)據(jù),超過1個星期后其價值就降低了90%。雖 說這些數(shù)據(jù)有一些夸張,但是這兩個共識也真實的反映了大量視頻監(jiān)控錄像的尷尬境遇。要實現(xiàn)大數(shù)據(jù),關鍵是能否能把視頻進行結構化,進行語義化描述,讓類型 數(shù)據(jù)能夠提取出來,。這就涉及到視頻智能分析了。也是數(shù)據(jù)倉儲層的數(shù)據(jù)分類工作。
數(shù)據(jù)采集之后,數(shù)據(jù)在數(shù)據(jù)倉庫中對多樣化數(shù)據(jù)進行存儲和基礎分類。在數(shù)據(jù)倉儲層,對數(shù)據(jù)的分類采用智能分析集群,其具備以下特點:
分布式計算,將不同I幀圖像分布式計算,充分利用前端DSP和中心CPU、GPU計算資源;
特征數(shù)據(jù)結構化管理,以圖搜圖快速檢索錄像只需提取目標圖片特征數(shù)據(jù),然后比對特征數(shù)據(jù)即可完成以圖搜圖,大大提高檢索速度;
機器智能學習矯正,將分析錯誤結果反饋給樣本庫,自動調整樣本庫,以提高準確率
得到語義化和分類數(shù)據(jù)之后,就可以對數(shù)據(jù)中隱藏的寶藏進行挖掘了。數(shù)據(jù)分析與挖掘,能夠對數(shù)據(jù)進行定制化清洗,能夠智能化自學習優(yōu)化清洗算法,實現(xiàn)數(shù)據(jù)的價值挖掘。
宇視大數(shù)據(jù)測試環(huán)境測試結果
宇視數(shù)據(jù)分析和挖掘采用基于hadoop架構優(yōu)化的Unihadoop架構。Hadoop起源于處理網(wǎng)頁類數(shù)據(jù)的,而安防數(shù)據(jù)由時間,空 間,誰,及事件特征組成的,有行業(yè)特殊性,而宇視經(jīng)過試驗得到數(shù)據(jù),對數(shù)據(jù)組織進行優(yōu)化,實現(xiàn)性能的大幅度提升,不僅優(yōu)化了工具,更重要的在Hadoop 的基礎上,實現(xiàn)了時空數(shù)據(jù)庫,來優(yōu)化安防數(shù)據(jù)的存儲,最終性能遠好于標準版Hadoop。
大大數(shù)據(jù)只是底層架構,數(shù)據(jù)的搜集、分析和挖掘都是為了以業(yè)務為主體的數(shù)據(jù)呈現(xiàn),只有貼合實際的業(yè)務進行數(shù)據(jù)呈現(xiàn),才能體現(xiàn)大數(shù)據(jù)的價值。
數(shù)宇視對于數(shù)據(jù)可視化進行了深度研究,能夠提供多樣化的直觀可視化展現(xiàn),包括電子地圖整合、3D地圖綜合顯示,移動顯示等,通過這些數(shù)據(jù)的整合展現(xiàn),實現(xiàn)了車輛可疑軌跡分析,車輛套牌分析,案件現(xiàn)場還原等一系列業(yè)務功能,真正做到業(yè)務定制化,達到顯示即所需。
視頻監(jiān)控數(shù)據(jù)是一個寶藏,怎么去挖掘這個寶藏,如何挖掘寶藏將是未來平安城市建設的另一個重點。在這個方向上,大數(shù)據(jù)具備天然的概念優(yōu)勢和極適配的架構優(yōu)勢。通過大數(shù)據(jù)的手段去挖掘視頻中的有效信息,是最具備可行性的手段。