
大數(shù)據(jù)時(shí)代下的意圖搜索 個(gè)性化服務(wù)是關(guān)鍵
一、目的意義
大數(shù)據(jù)時(shí)代,任何網(wǎng)絡(luò)行為所留下的“蛛絲馬跡”都以數(shù)據(jù)的形式隱藏在大數(shù)據(jù)中,正所謂“存在就有痕跡,聯(lián)系就有信息”,通過應(yīng)用物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等技術(shù),構(gòu)建網(wǎng)絡(luò)空間中行為事件、思想事件等模型。在實(shí)體空間和虛擬空間中全面收集、甄別、過濾、分類、整合人的存在痕跡和聯(lián)系信息,關(guān)注人物或事件間聯(lián)系鏈,從而實(shí)現(xiàn)網(wǎng)絡(luò)空間中存在的各種意圖,完成對(duì)意圖產(chǎn)生源頭、傳播途徑和發(fā)展趨勢(shì)的全方位描述,達(dá)到對(duì)個(gè)人和組織的所思所想行為所在的全面搜索和分析。做到提前預(yù)警、智能決策。
2013年的“棱鏡門”事件為國(guó)家安全敲響警鐘的同時(shí)我們也看到正是有了“大數(shù)據(jù)”的存在,才讓“棱鏡”項(xiàng)目得以實(shí)施。目前,我國(guó)面臨的安全形勢(shì)嚴(yán)峻,反恐問題更是當(dāng)前國(guó)際面臨的重要安全問題,大數(shù)據(jù)環(huán)境下的意圖搜索將能積極應(yīng)對(duì)新時(shí)期各種安全威脅,運(yùn)用大數(shù)據(jù)技術(shù)和人工智能技術(shù)進(jìn)行深入分析,實(shí)現(xiàn)對(duì)安全事件的準(zhǔn)確識(shí)別和提前預(yù)警,有力提升我國(guó)基于大數(shù)據(jù)的國(guó)家安全防護(hù)能力。
二、關(guān)鍵技術(shù)
1、人工智能技術(shù):意圖搜索引擎構(gòu)建了人與信息的意識(shí)主動(dòng)化的連接,通過不斷的交換學(xué)習(xí),形成模擬人腦的智能系統(tǒng),從而實(shí)現(xiàn)人與機(jī)器的相互了解,因此人工智能技術(shù)將是意圖所搜的核心技術(shù)。主要相關(guān)的人工智能技術(shù)有:機(jī)器深度學(xué)習(xí)、計(jì)算機(jī)神經(jīng)網(wǎng)絡(luò)、腦機(jī)接口、自然語(yǔ)言處理等技術(shù)。
2、大數(shù)據(jù)技術(shù):而對(duì)數(shù)據(jù)進(jìn)行收集、存儲(chǔ)、處理、挖掘分析是搜索技術(shù)的基本環(huán)節(jié),因此以數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)挖掘等技術(shù)為主的大數(shù)據(jù)技術(shù)也是意圖搜索的關(guān)鍵技術(shù)之一。主要相關(guān)的大數(shù)據(jù)技術(shù)有:數(shù)據(jù)采集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、數(shù)據(jù)挖掘與分析技術(shù)等。
3、物聯(lián)網(wǎng)技術(shù):隨著傳感器的發(fā)展和移動(dòng)化的能力,意圖搜索也呈現(xiàn)多樣化的形態(tài)。因此,以傳感器技術(shù)為主的物聯(lián)網(wǎng)技術(shù)也是意圖搜索的關(guān)鍵技術(shù)之一。
4、其他信息技術(shù):此外,搜索實(shí)現(xiàn)從傳統(tǒng)搜索到人工智能的過渡,還需要分詞技術(shù)、硬件存儲(chǔ)、云計(jì)算、超級(jí)計(jì)算、知識(shí)圖譜等相關(guān)技術(shù)的成熟。
三、目標(biāo)成果
大數(shù)據(jù)環(huán)境下的意圖搜索技術(shù)將是構(gòu)建一個(gè)構(gòu)建虛擬空間信息社會(huì)雷達(dá)系統(tǒng)。該系統(tǒng)的主體是搭建一個(gè)完整的知識(shí)庫(kù),開發(fā)意圖搜索引擎系統(tǒng)、并構(gòu)建云計(jì)算與大數(shù)據(jù)的基礎(chǔ)設(shè)施平臺(tái)。
搜索引擎系統(tǒng):搜集器、控制器、索引器、檢索器、用戶接口、處理分析系統(tǒng)
技術(shù)成果:人工智能、智能推理及知識(shí)研發(fā)、信息提取與分析技術(shù)、虛擬化工具、系統(tǒng)運(yùn)行保障研發(fā)、系統(tǒng)算法、信息檢索能力研發(fā)等技術(shù)上的突破成果。
四、國(guó)內(nèi)外狀況
1、美國(guó)
(1)美國(guó)技術(shù)優(yōu)勢(shì)明顯
以微軟和Google為代表的互聯(lián)網(wǎng)巨頭技術(shù)和應(yīng)用皆處于領(lǐng)先地位。微軟亞洲研究院的人立方關(guān)系搜索提供的搜索結(jié)果中,將所有信息都按照“人”進(jìn)行重新整合,以人與人之間的關(guān)系為紐帶,將埋藏在網(wǎng)絡(luò)信息海洋中的“人”的信息連接匯總,圖文并茂地展現(xiàn)出來,開啟的意圖搜索的新篇章。棱鏡門事件以來,NSA的全球監(jiān)控行為遭到各國(guó)政府和人民的譴責(zé),但美國(guó)情報(bào)部門所展現(xiàn)的大數(shù)據(jù)和信息安全技術(shù)實(shí)力不容忽視。Accumulo數(shù)據(jù)庫(kù)系統(tǒng)是NSA企業(yè)架構(gòu)的核心。大多數(shù)NSA的關(guān)鍵分析應(yīng)用都運(yùn)行在Accumulo上,從技術(shù)角度看,NSA已經(jīng)能夠識(shí)別網(wǎng)絡(luò)上的各種可疑行為和個(gè)人,可以說美國(guó)政府在相關(guān)技術(shù)已走到了Google、微軟等互聯(lián)網(wǎng)巨頭之前。
(2)政府支持力度大
美國(guó)在相關(guān)技術(shù)的研發(fā)上給予高度重視。奧巴馬政府大數(shù)據(jù)研究和發(fā)展倡議中推出的XDATA項(xiàng)目將在四年里耗費(fèi)2500萬(wàn)美元來開發(fā)計(jì)算技術(shù)和防護(hù)數(shù)據(jù)軟件。2014年美國(guó)國(guó)防高級(jí)研究計(jì)劃局(DARPA)啟動(dòng)其“大機(jī)理”項(xiàng)目,目的是發(fā)展可以發(fā)現(xiàn)隱藏在大數(shù)據(jù)中的因果關(guān)系模型。美國(guó)國(guó)防部每年投入2.5億美元資助利用海量數(shù)據(jù)的新方法研究,并將傳感、感知和決策支持結(jié)合在一起,制造能自己運(yùn)行和做出決策的自治系統(tǒng),為軍事行動(dòng)提供更好的支持。NSA在大數(shù)據(jù)項(xiàng)目的規(guī)模、可擴(kuò)展性、安全性在很多方面甚至超過了Google、亞馬遜和蘋果這樣的大型互聯(lián)網(wǎng)企業(yè)。NSA旗下的風(fēng)險(xiǎn)投資公司In-Q-Tel迄今已經(jīng)投資了200多個(gè)云計(jì)算、大數(shù)據(jù)、搜索與分析創(chuàng)業(yè)項(xiàng)目。美國(guó)國(guó)土安全部正在開展“可視化和數(shù)據(jù)分析卓越中心”項(xiàng)目,通過對(duì)大規(guī)模異構(gòu)數(shù)據(jù)的研究,使應(yīng)急救援人員能夠解決人為或自然災(zāi)害、恐怖主義事件、網(wǎng)絡(luò)威脅等方面的問題。
(3)美軍利用大數(shù)據(jù)搜索提升偵查和反恐能力
美軍正在開發(fā)的新一代大數(shù)據(jù)系統(tǒng),能夠通過計(jì)算機(jī)的速度和精度以及人的敏捷性,來理解和解釋現(xiàn)實(shí)世界,協(xié)助指揮官和分析人員將以100倍于當(dāng)前的速度來理解傳感器收集的海量數(shù)據(jù)。例如,當(dāng)阿富汗境內(nèi)的大毒梟準(zhǔn)備為基地組織等恐怖分子提供資金時(shí),美軍的情報(bào)分析人員能夠借助大數(shù)據(jù)技術(shù),把作戰(zhàn)方案庫(kù)里的數(shù)據(jù)與有關(guān)基地組織情況庫(kù)里的資金數(shù)據(jù)進(jìn)行實(shí)時(shí)、自主關(guān)聯(lián),指導(dǎo)美軍先敵一步采取行動(dòng)。
在美國(guó)國(guó)防部的資助下,美國(guó)“記錄未來”公司,專門研究如何通過分析互聯(lián)網(wǎng)信息,特別是“臉譜”、“推特”等社交網(wǎng)站,預(yù)先察知恐怖襲擊等重大事件。2013年6月,美國(guó)國(guó)家安全局局長(zhǎng)兼美國(guó)賽博司令部司令亞歷山大在參加眾議院特設(shè)情報(bào)委員會(huì)聽證會(huì)時(shí)承認(rèn),通過秘密進(jìn)行的“棱鏡”等監(jiān)視項(xiàng)目,美國(guó)政府至少挫敗了50起恐怖襲擊事件。這是大數(shù)據(jù)技術(shù)運(yùn)用的成功案例。
2、我國(guó)的發(fā)展現(xiàn)狀
在我國(guó)百度、搜狗、360等互聯(lián)網(wǎng)公司以及海康威視等安防企業(yè)處于技術(shù)和應(yīng)用的前沿。從整體上來看,在商業(yè)開放和應(yīng)用方面尚具備一定的國(guó)際競(jìng)爭(zhēng)力,但從大數(shù)據(jù)智能搜索應(yīng)用于國(guó)家安全防護(hù)上來看,我國(guó)在此方面與美國(guó)尚存在著較大的差距。
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
AI 浪潮下的生存與進(jìn)階: CDA數(shù)據(jù)分析師—開啟新時(shí)代職業(yè)生涯的鑰匙(深度研究報(bào)告、發(fā)展指導(dǎo)白皮書) 發(fā)布機(jī)構(gòu):CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長(zhǎng)度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長(zhǎng)序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠(chéng)摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡(jiǎn)稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測(cè)分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢(shì)預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測(cè)分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭(zhēng)搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢(shì)性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢(shì)性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢(shì)與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢(shì)變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國(guó)內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對(duì)策略? 長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場(chǎng)調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場(chǎng)調(diào)研是企業(yè)洞察市場(chǎng)動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場(chǎng)調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04