
大數(shù)據(jù)、云技術(shù)在公安實(shí)戰(zhàn)系統(tǒng)中的應(yīng)用趨勢
目前,業(yè)內(nèi)人士對大數(shù)據(jù)、云技術(shù)恐怕是耳熟能詳,但究竟什么是大數(shù)據(jù)、云技術(shù)?對于公安實(shí)戰(zhàn)系統(tǒng)來說,大數(shù)據(jù)、云技術(shù)又能帶來哪些便利?是概念的炒作還是真的能融入到公安業(yè)務(wù)中,并內(nèi)化為公安實(shí)戰(zhàn)系統(tǒng)的技術(shù)和工具?本文中,我們一起探討大數(shù)據(jù)、云技術(shù)在公安實(shí)戰(zhàn)系統(tǒng)中的應(yīng)用趨勢。
一、常規(guī)數(shù)據(jù)庫無法滿足公安實(shí)戰(zhàn)業(yè)務(wù)需求
近年來,平安城市建設(shè)飛速發(fā)展,各個街道、十字路口隨處可見各種攝像機(jī)設(shè)備。它們?yōu)楣驳娜粘V伟埠蛡刹檗k案提供了很大的方便。但隨著設(shè)備數(shù)量的增加,視頻分辨率的提高,公安搜集到的視頻和圖片的數(shù)據(jù)量呈幾何倍增長。再加上視頻分辨率的不斷提高對服務(wù)器處理能力和使用率提出了更高的要求。這樣,視頻圖像的調(diào)閱、存儲、計(jì)算在技術(shù)上都面臨巨大挑戰(zhàn)。因此,公安干警如何能快速在日益增長的海量數(shù)據(jù)中獲得有價(jià)值的信息就成為了亟待解決的問題。
以卡口數(shù)據(jù)為例,目前普通的二線城市每天的車輛通行記錄就有1000萬以上,存儲半年就有18億條數(shù)據(jù),而存儲一年的數(shù)據(jù)量就有36億。而一線城市的數(shù)據(jù)還要比這個高很多。這些卡口數(shù)據(jù)包括了車牌號、車身顏色、車型等一系列結(jié)構(gòu)化信息以及卡口圖片。公安用戶在對嫌疑車輛排查時(shí),想在動輒幾十億條的數(shù)據(jù)中進(jìn)行檢索,常規(guī)的數(shù)據(jù)庫是無法滿足用戶實(shí)戰(zhàn)需求的。想象一下,如果公安干警查詢一個嫌疑車牌號就需要幾十秒甚至更長的時(shí)間,如何能實(shí)現(xiàn)快速定位和抓捕?
二、大數(shù)據(jù)技術(shù)使得海量數(shù)據(jù)的快速檢索和數(shù)據(jù)挖掘成為可能
大數(shù)據(jù)是指無法在可承受的時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合(維基百科)?,F(xiàn)在公安業(yè)務(wù)中海量的視頻和圖片也在逐漸變?yōu)槌R?guī)軟件工具難以處理的數(shù)據(jù)集合了。大數(shù)據(jù)技術(shù)目前在公安行業(yè)中的應(yīng)用還主要在卡口數(shù)據(jù)中。這是因?yàn)楦鱾€城市的卡口建設(shè)已非常成熟,而卡口每天產(chǎn)生的數(shù)據(jù)量龐大。
如前文所述,要想處理海量的卡口數(shù)據(jù),并進(jìn)行各個維度的檢索,就需要大數(shù)據(jù)技術(shù)的支持。另外,由于車輛特征識別技術(shù)已非常成熟,卡口的結(jié)構(gòu)化數(shù)據(jù)準(zhǔn)確度非常高,這些數(shù)據(jù)已經(jīng)具備給公安提供可靠數(shù)據(jù)參考的基礎(chǔ)?;谝陨蠗l件,卡口系統(tǒng)最先引進(jìn)了大數(shù)據(jù)技術(shù)。
大數(shù)據(jù)技術(shù)可以為公安業(yè)務(wù)帶來的第一個便利是檢索。它可以在幾十億甚至上百億的卡口數(shù)據(jù)中實(shí)現(xiàn)秒級的檢索速度,還可以提供車型、車輛類型、車輛顏色、車牌顏色、精確車牌和模糊車牌等多個維度的檢索,可以真正的滿足公安用戶的實(shí)戰(zhàn)需求。
第二個便利是大數(shù)據(jù)技術(shù)可以在海量的卡口數(shù)據(jù)中進(jìn)行數(shù)據(jù)挖掘,提取出對公安用戶真正有價(jià)值的信息。例如軌跡分析、跟車分析、碰撞分析、晝伏夜出等。大數(shù)據(jù)技術(shù)可以實(shí)現(xiàn)以前技術(shù)無法實(shí)現(xiàn)的快速檢索和大數(shù)據(jù)挖掘,真正實(shí)現(xiàn)了公安對卡口大數(shù)據(jù)的有效利用。
除了在卡口系統(tǒng)中的應(yīng)用,視圖庫對大數(shù)據(jù)也有很大的需求。首先,隨著攝像機(jī)的不斷增多,平臺存儲的視頻越來越多,能夠快速處理大量視頻文件的需求也越來越大。其次,與卡口一樣,大量視頻中的結(jié)構(gòu)化信息會形成海量的數(shù)據(jù),在海量的視頻數(shù)據(jù)中進(jìn)行檢索和數(shù)據(jù)挖掘也是公安的一個巨大需求。但目前對海量視頻的大數(shù)據(jù)處理技術(shù)并不成熟,而且各級公安所建的視圖庫很多還沒有被充分的利用起來或各部門的視圖庫并沒有統(tǒng)一。這些都暫時(shí)限制了視圖庫大數(shù)據(jù)的快速發(fā)展。
但隨著技術(shù)的發(fā)展和公安對視圖庫的標(biāo)準(zhǔn)化,視圖庫大數(shù)據(jù)應(yīng)用必然是日后大數(shù)據(jù)技術(shù)在公安業(yè)務(wù)中應(yīng)用的趨勢。在視頻處理方面,隨著視頻數(shù)量的不斷增多、分辨率的提高,對視頻處理的速度提出了更高的要求。而大數(shù)據(jù)技術(shù)產(chǎn)生于互聯(lián)網(wǎng)領(lǐng)域,但在處理視頻文件方面并不是最適合的。
以Hadoop為例,MapReduce是一個產(chǎn)生于互聯(lián)網(wǎng)的編程模型,將任務(wù)切分也可以移植到對視頻文件的處理上。將視頻文件切分為多個視頻片段分配給各個計(jì)算節(jié)點(diǎn)處理,從而大大的縮減視頻處理的時(shí)間,提高公安工作效率。因此,將大數(shù)據(jù)技術(shù)轉(zhuǎn)變?yōu)檫m合處理視頻文件的技術(shù)是未來技術(shù)發(fā)展的趨勢。
三、云技術(shù)能夠提高資源使用率和數(shù)據(jù)安全性
傳統(tǒng)的平臺部署方式是純粹的物理機(jī),并且每個機(jī)器上部署不同的軟件來實(shí)現(xiàn)不同的功能。很多時(shí)候都會出現(xiàn)某個功能平時(shí)需求不大時(shí)它所占用的硬件資源會有剩余,但在業(yè)務(wù)需求很大的某些時(shí)段,硬件資源又會經(jīng)常不夠用。這是因?yàn)閭鹘y(tǒng)的硬件資源會死板的劃分為各個孤島,資源之間沒有任務(wù)聯(lián)系,更沒有能夠動態(tài)調(diào)配資源的能力。這樣的資源低使用率和資源的僵化死板已經(jīng)越來越成為限制公安實(shí)戰(zhàn)業(yè)務(wù)的瓶頸之一。
云技術(shù)是最近幾年互聯(lián)網(wǎng)行業(yè)廣泛應(yīng)用的技術(shù),它包括云計(jì)算技術(shù)和云儲存技術(shù)兩部分。云計(jì)算是一種按使用量付費(fèi)的模式,這種模式提供可用的、便捷的、按需的網(wǎng)絡(luò)訪問,進(jìn)入可配置的計(jì)算資源共享池,這些資源能夠被快速提供,只需投入很少的管理工作或與服務(wù)供應(yīng)商進(jìn)行很少的交互。
這是NIET(美國國家標(biāo)準(zhǔn)與技術(shù)研究院)給出的云計(jì)算的定義,主要是突出云計(jì)算可提高資源的使用率和便捷快速的特點(diǎn)。云計(jì)算技術(shù)現(xiàn)在已經(jīng)在各級公安的平臺中獲得了一定的使用。云計(jì)算可實(shí)現(xiàn)物理資源虛擬化,可將所有的硬件資源虛擬為一個資源池,所有的硬件資源都可以按需分配。當(dāng)需要資源時(shí),用戶可按照需求創(chuàng)建符合性能要求的虛擬機(jī)。例如,當(dāng)用戶對布防布控需求高時(shí),可創(chuàng)建出多臺虛擬機(jī)支撐。當(dāng)布防布控的需求變少時(shí),多出的虛擬機(jī)可回歸資源池支持別的功能。實(shí)現(xiàn)整個資源池的資源動態(tài)分配,大大提高了系統(tǒng)的資源使用率。
在公安行業(yè),隨著攝像機(jī)數(shù)量的增長和分辨率的提高,對視頻的存儲空間需求也在增長。而視頻的快存快取、數(shù)據(jù)的安全性、存儲池的動態(tài)擴(kuò)展對存儲系統(tǒng)提出了新的需求。云存儲是在云計(jì)算概念上延伸和發(fā)展出來的一個新的概念,是一種新興的網(wǎng)絡(luò)存儲技術(shù),是指通過集群應(yīng)用、網(wǎng)絡(luò)技術(shù)或分布式文件系統(tǒng)等功能,將網(wǎng)絡(luò)中大量各種不同類型的存儲設(shè)備通過應(yīng)用軟件集合起來協(xié)同工作,共同對外提供數(shù)據(jù)存儲和業(yè)務(wù)訪問功能的一個系統(tǒng)。
云存儲采用數(shù)據(jù)切片存儲和并行讀寫的特點(diǎn)滿足了視頻快存快取的需求。云存儲的跨節(jié)點(diǎn)冗余備份機(jī)制可以進(jìn)一步提高系統(tǒng)數(shù)據(jù)的安全性。最后,云存儲橫向動態(tài)擴(kuò)展的特性保證了系統(tǒng)在不改變的情況下,可以任意添加存儲資源到資源池中,極大的提高了系統(tǒng)的可擴(kuò)展性。
云計(jì)算和云存儲擁有著諸多的優(yōu)點(diǎn),雖然目前在公安的平臺中使用率還不高,但隨著技術(shù)的進(jìn)一步成熟,必將成為公安實(shí)戰(zhàn)系統(tǒng)的未來發(fā)展趨勢。
四、結(jié)語
大數(shù)據(jù)和云技術(shù)起源于互聯(lián)網(wǎng),它們天生擁有著眾多的優(yōu)點(diǎn),而這些優(yōu)點(diǎn)又恰恰能為公安的實(shí)戰(zhàn)應(yīng)用提供多方面的便利和好處。相信隨著技術(shù)不斷的從互聯(lián)網(wǎng)向公安行業(yè)的定制化移植,大數(shù)據(jù)、云技術(shù)必將成為公安實(shí)戰(zhàn)系統(tǒng)的技術(shù)發(fā)展趨勢。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時(shí)代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03