
如何使用大數(shù)據(jù)幫助抓捕罪犯
最近波士頓馬拉松賽恐怖襲擊的余波尚在,我偶然看到了FCW的一篇有趣的文章,它對政府機(jī)構(gòu)中部署的最新技術(shù)和IT技術(shù)趨勢進(jìn)行了深入分析。在之前的博客文章中,我曾多次提到“大數(shù)據(jù)”的使用比以往更加普及了。大數(shù)據(jù)可以簡單地定義成一種從大量的數(shù)據(jù)中集中整理出所需信息,并將其用于戰(zhàn)略和戰(zhàn)術(shù)行動的手段。實(shí)際上,看到大數(shù)據(jù)被用于幫助抓捕罪犯并不稀奇,原因很簡單,在當(dāng)今這個反恐時代,“防火墻之后”的事件幾乎與實(shí)際犯罪現(xiàn)場發(fā)生的事件同樣重要。
從根本上說,大家所看到的FBI調(diào)查只是大數(shù)據(jù)和數(shù)據(jù)分析實(shí)踐的冰山一角,這只不過是萬里長征的第一步。以下是這篇文章的幾條要點(diǎn)。
在4月15日的波士頓馬拉松賽中,兩場爆炸造成了3人死亡和數(shù)十人受傷,這之后不到24小時FBI就編譯了10TB的數(shù)據(jù),希望通過大海撈針的方式找出嫌疑人的蛛絲馬跡。
FBI主導(dǎo)的這一調(diào)查對海量的手機(jī)基站日志、短信、社交媒體數(shù)據(jù)、照片和視頻監(jiān)控錄像進(jìn)行了分析,希望快速找出嫌疑人。
調(diào)查使用了面部識別軟件將照片和視頻上的面孔與護(hù)照、簽證、駕照和其它數(shù)據(jù)上的照片進(jìn)行對比。
調(diào)查人員收集的10TB數(shù)據(jù)不過是滄海一粟(聯(lián)邦政府通常處理的是PB級的數(shù)據(jù)),調(diào)查工作實(shí)際上進(jìn)行了大量的數(shù)據(jù)削減,主要原因是數(shù)據(jù)量過大,數(shù)據(jù)介質(zhì)類型龐雜,要處理的數(shù)據(jù)的整體復(fù)雜度過高,以及分析數(shù)據(jù)能夠利用的時間很有限。
處理TB級數(shù)據(jù)或更多的視頻、數(shù)字圖像、文字信息和手機(jī)記錄就已經(jīng)十分復(fù)雜了。不難想象,如果再把社交媒體加入進(jìn)來這會是一個多么漫無邊際、深不見底的泥潭。我發(fā)現(xiàn)這篇文章中最有意思的一點(diǎn)是,調(diào)查公司借助一家名為Topsy的公司的服務(wù)對數(shù)十億條tweet進(jìn)行了篩選。Topsy保存有2010年7月以來的所有tweet,在恐怖分子調(diào)查中,這使調(diào)查人員能夠?qū)εc波士頓相關(guān)的tweet進(jìn)行大數(shù)據(jù)分析,而不必去分析上千億條過去和現(xiàn)在的消息。Topsy的數(shù)據(jù)庫分析軟件使調(diào)查人員能夠用關(guān)鍵詞“bomb”(炸彈)搜索特定區(qū)域(包括波士頓以及鄰近郊區(qū))Twitter上的所有評述。
最終,這種細(xì)致搜索從兩個嫌疑人的Twitter賬戶上檢查出了包含“bomb”的內(nèi)容。這種對公共記錄的搜索很可能發(fā)現(xiàn)其它一些事實(shí)上不利于調(diào)查的線索,包括有些用戶轉(zhuǎn)發(fā)了提到炸彈的信息,或者參與了作為嫌疑人定罪證據(jù)的聊天等等。此外,Topsy的“地理位置推測”(
Geo-inferencing)技術(shù)也使調(diào)查人員能夠?qū)Πl(fā)出tweet信息的具體地點(diǎn)進(jìn)行準(zhǔn)確映射(考慮到僅有1%的Twitter用戶在發(fā)tweet時使用了地理位置標(biāo)簽,這項(xiàng)推測技術(shù)相當(dāng)了得)。據(jù)Topsy稱,這些功能比標(biāo)準(zhǔn)的Twitter位置數(shù)據(jù)的準(zhǔn)確度高20倍。
Emulex能夠“掌控”大數(shù)據(jù)
在Emulex,我們認(rèn)為解決大數(shù)據(jù)問題的核心在于企業(yè)網(wǎng)絡(luò)的框架。這里有大量的服務(wù)器進(jìn)行著平行處理來創(chuàng)造價值,這些服務(wù)器通過以太網(wǎng)和光纖通道協(xié)議相互通訊。因此,網(wǎng)絡(luò)流量的延時和吞吐速度是快速實(shí)現(xiàn)大數(shù)據(jù)部署的關(guān)鍵問題。Emulex之所以能夠解決這些延時問題,并獲得全球眾多企業(yè)的選用,是因?yàn)槲覀兲峁┝四軌蜃畲笙薅鹊財U(kuò)大數(shù)據(jù)集群的I/O解決方案,使大數(shù)據(jù)解決方案能夠?qū)崿F(xiàn)無縫部署。
不幸的是,在一些變態(tài)狂的影響下,我們的世界充滿著動蕩、恐懼,甚至是屠殺。但是同樣讓我們難以忘懷的是,我們的社會仍能在需要的時候展現(xiàn)出巨大的仁慈和愛心,正像波士頓的公民在這次恐怖襲擊之后所展現(xiàn)出來的。盡管大數(shù)據(jù)為調(diào)查提供了重要幫助,但我們不要忘記最終還是一位公民提供的線索把調(diào)查人員引向了兩名兇犯。歸根結(jié)底,沒有任何技術(shù)——無論其多么先進(jìn)——能夠取代人類的善良和不屈不撓的意志。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03