
引力波數(shù)據(jù)分析中的人工智能技術(shù)
最近國內(nèi)各種媒體廣泛報道了備受矚目的引力波被人類直接探測到的事件,引起了人們對基礎(chǔ)科學(xué)研究的極大興趣。早在100年前,愛因斯坦的廣義相對論發(fā)布后,就預(yù)言了引力波的存在。從文獻(xiàn)中我們可以知道,目前宇宙中最有可能存在的引力波源以及幾種引力波探測方式如下:
隨機(jī)背景輻射:包括在宇宙早期電磁輻射演化到今天變成宇宙微波背景輻射(CMB)。通過對CMB 的相關(guān)測量可測量宇宙早期的引力波,這樣的探測器包括BICEP 等。
宇宙中的星體,如脈沖星、地球等。通過測量脈沖星與地球間的距離變化測量引力波。包括脈沖星計時測量等測量方式。
通過懸掛或者無拖拽等先進(jìn)技術(shù)讓測試質(zhì)量沿測地線運動,同時通過激光干涉測量測試質(zhì)量間的距離變化也可達(dá)到引力波測量的目的。這種方式包括正在運行的LIGO 等地面干涉儀和計劃中的空間引力波探測計劃eLISA 和天琴計劃等。
引力波和物體相互作用,在適當(dāng)?shù)那闆r下可以導(dǎo)致物體共振,例如韋伯型共振棒測量引力波。
通過測量引力波對高斯型微波光子流的影響也可以達(dá)到引力波探測的目的。微波頻帶高頻引力波探測器等采用的測量方式。
從實際探測的角度看,這些探測器具有不同的測量頻段。但是在人類能夠感知的尺度下,引力是一個非常弱的相互作用。只有靠天文中大質(zhì)量的星體的運動,例如致密雙星互繞及合并事件,才能產(chǎn)生相對比較強(qiáng)一些的引力波。這次LIGO探測到的就是雙黑洞合并事件激發(fā)的引力波。
LIGO(Laser Interferometer Gravitational-Wave Observatory),即激光干涉引力波天文臺。 LIGO探測器由10個子系統(tǒng)組成,其中之一是數(shù)據(jù)和計算系統(tǒng)(Data and ComputingSystems, DSC)。
LIGO獲取的數(shù)據(jù)不但包括激光干涉儀引力波探測器輸出的數(shù)據(jù),還包括了各種獨立的對探測器的環(huán)境和探測器設(shè)備狀態(tài)進(jìn)行監(jiān)控的探測器和紀(jì)錄儀,對諸如溫度﹑氣壓﹑風(fēng)力﹑大雨﹑冰雹﹑地表震動﹑聲響﹑電場﹑磁場等環(huán)境條件進(jìn)行監(jiān)測,以及對引力波探測器內(nèi)部的平面鏡和透鏡的位置等探測器自身狀態(tài)進(jìn)行監(jiān)測的數(shù)據(jù)。在數(shù)據(jù)獲取方面,例如在初級LIGO漢福德天文臺,DAQ的H1和H2干涉儀記錄共12733個通道,其中1279個是快速通道(數(shù)字化速率在2048 Sa /秒或16384 Sa秒)。升級的LIGO的設(shè)計為記錄大于300000個通道的數(shù)據(jù)采集,其中大約3000個快速通道。 (https://www.advancedligo.mit.edu/daq.html)
這是典型的大數(shù)據(jù)分析處理問題,需要強(qiáng)大的計算資源與先進(jìn)的算法,才能有效處理如此巨大的數(shù)據(jù)量。其中一些人工智能技術(shù)被應(yīng)用到LIGO的DSC,例如Einstein@home項目(http://einsteinathome.org/)。該項目的長期目標(biāo)是能首次直接檢測旋轉(zhuǎn)中子星(脈沖中子星)的引力波發(fā)射,目前采用了分布式計算技術(shù),即利用大眾的計算機(jī)閑暇機(jī)時來搜尋較弱的引力波信號。這可以看做是一種眾包技術(shù),將人腦與計算機(jī)結(jié)合起來,是群體智能技術(shù)的具體應(yīng)用。
清華大學(xué)的曹軍威研究團(tuán)隊探索了將人工智能技術(shù)應(yīng)用到引力波數(shù)據(jù)噪聲的分析中。他們應(yīng)用了隨機(jī)森林算法(random forest)、人工神經(jīng)網(wǎng)絡(luò)(artificial neural network)和支持向量機(jī)(Support Vector Machine)等三種不同的算法,來分析引力波數(shù)據(jù)道中的噪音,對引力波數(shù)據(jù)道上捕捉到的事件進(jìn)行分類。他們的結(jié)論是雖然這三種機(jī)器學(xué)習(xí)的方法各有千秋,但是經(jīng)過調(diào)優(yōu)之后,它們在引力波數(shù)據(jù)噪音分析和事件分類上表現(xiàn)出來的能力基本相同.這個結(jié)論很有意思.它告訴我們,機(jī)器學(xué)習(xí)方法在應(yīng)用中所能達(dá)到的效果,很大程度上決定于數(shù)據(jù)質(zhì)量,與具體采用哪種方法關(guān)系不太大。在對分類的效率改進(jìn)因此可能來自包括其他有用的信息來源,而不是對算法本身的改進(jìn)。
這次LIGO公布的GW150914事件,在線觸發(fā)延遲是大約3 min,用了5個離線分析流水線,消耗的CPU 時間大約是5千萬小時(=20,000PCs 運行100 天)。如此的計算強(qiáng)度與海量的數(shù)據(jù)以及采用的分析算法有關(guān)。在搜尋引力波信號中,采用的是匹配濾波技術(shù)。匹配濾波是基于波形分析的技術(shù),要求對引力波波源建立合理的物理模型,根據(jù)模型產(chǎn)生成千上萬的模板,用這些模板去匹配引力波數(shù)據(jù)中信號,從而找到相關(guān)的事件。從中我們可以看出匹配濾波技術(shù)使用的前提條件是已知引力波的理論模型,即需要對引力波波源進(jìn)行建模。但是,對引力波波源建模涉及的是引力波的動力學(xué),需要求解愛因斯坦方程,而且是針對宇宙中實際的天體求解愛因斯坦方程。目前在引力波波源建模問題中大多采用了數(shù)值計算的方法,典型的方法是蒙特卡洛計算法。但是對于愛因斯坦方程,即使是數(shù)值計算也非常困難。近些年發(fā)展起來的數(shù)值相對論成為廣義相對論一個獨立的研究方向,但是基普? 索恩(KipThorne)認(rèn)為數(shù)值相對論比引力波探測本身還難。這導(dǎo)致在引力波探測中,大量事件的波形是未知的,如超新星爆發(fā)及質(zhì)量巨大的星體核的坍塌等,它們就不能用匹配濾波器技術(shù)來分析了?;谏鲜鲈?,這次探測到的事件是雙黑洞并合事件,這是由于雙黑洞系統(tǒng)是理論上知道得最清楚的引力波源。對有無其他引力波源產(chǎn)生的信號,目前對數(shù)據(jù)仍在分析處理中。
事實上,我們可以考慮將人工智能技術(shù)應(yīng)用于引力波大數(shù)據(jù)分析處理上,發(fā)展相應(yīng)的算法,提高處理引力波大數(shù)據(jù)的速度與精度。大數(shù)據(jù)對計算智能的發(fā)展提出了新的機(jī)遇和挑戰(zhàn),這里我們探討將人工智能應(yīng)用于引力波大數(shù)據(jù)分析處理上,至少有幾個方面值得我們?nèi)パ芯俊?/span>
有監(jiān)督學(xué)習(xí):匹配濾波器法需要知道信號的波形,這次引力波應(yīng)變數(shù)據(jù)分析是與海量波形庫中的波形匹配,顯然是一個計算工作量巨大的過程。如何提高搜索效率,降低對計算資源的消耗,無疑是值得去深入研究的。事實上,根據(jù)我們在反卷積抽譜方面的研究經(jīng)驗,對天文學(xué)家認(rèn)為需要高性能計算機(jī)才可進(jìn)行的巨型矩陣的計算,通過發(fā)展有效的算法,在普通的PC機(jī),甚至是筆記本電腦上也可實現(xiàn)反卷積抽譜的計算工作。我們知道人工智能是一個“算法為王”的研究領(lǐng)域,將智能搜索算法應(yīng)用于引力波數(shù)據(jù),將會極大提高其效率。例如在人工智能研究領(lǐng)域,最近較為熱門的事件是谷歌人工智能系統(tǒng)AlphaGo(阿爾法圍棋)將于3月9號在韓國首爾和韓國圍棋選手李世石九段進(jìn)行比賽。AlphaGo采用了深度學(xué)習(xí)和增強(qiáng)學(xué)習(xí),這是當(dāng)前人工智能界最前沿的研究方向。原先的圍棋軟件多數(shù)采用了蒙特卡洛樹搜索(MCTS)技術(shù),使用蒙特卡洛算法的模擬結(jié)果來估算一個搜索樹中每一個狀態(tài)值。隨著進(jìn)行了越來越多的模擬,搜索樹會變得越來越龐大,而相關(guān)的值也會變得越來越精確。通過選取值更高的子樹,用于選擇行動的策略概率在搜索的過程中會一直隨著時間而有所改進(jìn)。這是一種用窮舉搜索法尋找最優(yōu)解的策略,(匹配濾波也可以看成是一種窮舉搜索法),但是圍棋的走法是個天文數(shù)字——有250^150種,這超過了我們可觀測宇宙中的所有原子數(shù)量,可想而知通常的計算機(jī)已經(jīng)無法計算了。AlphaGo采用的方法是Value Networks(價值網(wǎng)絡(luò))和 Policy Networks(策略網(wǎng)絡(luò)),以及蒙特卡洛樹搜索算法。通過有監(jiān)督學(xué)習(xí)訓(xùn)練價值網(wǎng)絡(luò)和策略網(wǎng)絡(luò),分別降低搜索的深度和搜索的寬度。再結(jié)合蒙特卡洛法讓搜索達(dá)到深度的極限、沒有任何分支樹。在引力波波型搜索中,我們也可以考慮采用類似的搜索策略,以及結(jié)合深度學(xué)習(xí)與強(qiáng)化學(xué)習(xí),發(fā)展高效的算法,將引力波事件的模式快速識別出來。
無監(jiān)督學(xué)習(xí):在引力波探測中, 大量事件的波形是未知的,對于超新星和旋轉(zhuǎn)中子星,目前的天文觀測積累還無法給出一個它們所釋放引力波強(qiáng)度的理論估計。這需要采用無監(jiān)督學(xué)習(xí)算法來發(fā)現(xiàn)引力波數(shù)據(jù)中未知的模式。這種學(xué)習(xí)方式也是對人工智能發(fā)展的最大挑戰(zhàn)。在人工智能領(lǐng)域,Google X 實驗室開發(fā)了一個稱為GoogleBrain 的系統(tǒng),該系統(tǒng)由1000臺計算機(jī)、16000個芯片組成。系統(tǒng)“學(xué)習(xí)了”從YouTube 視頻中提取的 1000 萬個靜態(tài)圖像,將線條、亮度、邊界、色彩等多個特征分類。經(jīng)過3天尋找重復(fù)出現(xiàn)的模式后,Google Brain憑自身判斷,它可以識別一些特定的重復(fù)類別:人類面孔和人類身體,甚至是貓。Google Brain使用的是正是無監(jiān)督學(xué)習(xí)的方法。但是,它的精確度還沒有達(dá)到可以使用的水平。Facebook人工智能研究組主管Yann LeCun說,如果人工智能要滿足人們更大的野心,就必須弄清楚軟件如何才能完成那些對人類嬰兒來說十分容易的事情。他說:“我們都知道,最終的答案就是無監(jiān)督學(xué)習(xí)。解決了無監(jiān)督學(xué)習(xí)的問題,將把我們帶向更高的級別?!?nbsp;目前在無監(jiān)督學(xué)習(xí)方面已經(jīng)有了一些探索,通過概率程序歸納實現(xiàn)人類級別的概念學(xué)習(xí),即僅從一個例子就形成概念。但是迄今為止,這些探索都尚未揭示出一條能讓無監(jiān)督學(xué)習(xí)達(dá)到人類水平的路徑,或者說,算法還不能僅通過經(jīng)歷或?qū)嶒灳蛯W(xué)會與真實世界有關(guān)的復(fù)雜東西。百度硅谷AI實驗室主任AdamCoates認(rèn)為“目前,我們似乎缺失了某個關(guān)鍵的思想?!?nbsp;在引力波潛在模式發(fā)現(xiàn)中,如何發(fā)展高效的無監(jiān)督學(xué)習(xí)算法,仍需要進(jìn)行深入研究。也許需要結(jié)合認(rèn)知學(xué)習(xí),類腦學(xué)習(xí)等多學(xué)科的研究成果,才有可能彌補(bǔ)這個缺失的關(guān)鍵環(huán)節(jié),從而形成重大突破。
集成學(xué)習(xí)策略:這次探測到的雙黑洞并合的引力波之外的連續(xù)引力波、原初引力波等等其他類型的引力波還沒有被探測到。例如來自旋轉(zhuǎn)中子星的連續(xù)引力波,除了對探測器的靈敏度要求更高之外,對數(shù)據(jù)分析的能力也提出極高的要求。有個別連續(xù)引力波項目,需要1萬臺電腦跑一年才能得到結(jié)果。因此除了Einstein@Home項目采用的眾包技術(shù)外,我們還應(yīng)該結(jié)合有監(jiān)督學(xué)習(xí),無監(jiān)督學(xué)習(xí),半監(jiān)督學(xué)習(xí),增強(qiáng)學(xué)習(xí),遷移學(xué)習(xí)等學(xué)習(xí)策略,發(fā)展高效的引力波數(shù)據(jù)分析算法,加速發(fā)現(xiàn)更多引力波事件的過程。
MIT校長就這次引力波發(fā)現(xiàn)致全校信中說道:我們今天所慶祝的這項發(fā)現(xiàn)很好地體現(xiàn)了基礎(chǔ)科學(xué)中的悖論:基礎(chǔ)科學(xué)的研究是艱苦、嚴(yán)格且緩慢的——但與此同時,它也是激動人心的、革命性的和具有催化作用的。如果沒有基礎(chǔ)科學(xué),我們最好的猜想將不能得到任何改進(jìn),而“創(chuàng)新”也只能是周圍的邊緣修修補(bǔ)補(bǔ)。只有隨著基礎(chǔ)科學(xué)的進(jìn)步,社會也才能進(jìn)步。這說出了對基礎(chǔ)科學(xué)研究意義。對信息技術(shù)等學(xué)科而言,研究引力波大數(shù)據(jù)分析處理技術(shù),是向基礎(chǔ)自然科學(xué)研究領(lǐng)域的應(yīng)用,不像其他大數(shù)據(jù)有可能涉及到企業(yè)的核心商業(yè)利益、國家安全、公民隱私、法律法規(guī)等諸多問題,天文大數(shù)據(jù)完全可以在全球范圍內(nèi)實現(xiàn)數(shù)據(jù)資源的公開和共享。
雖說研究引力波數(shù)據(jù)分析技術(shù)沒有直接的商業(yè)價值,但后續(xù)可考慮技術(shù)(算法)遷移,將發(fā)展的大數(shù)據(jù)分析處理技術(shù)應(yīng)用到其他商業(yè)領(lǐng)域,或者其他學(xué)術(shù)研究上。引力波數(shù)據(jù)分析大部分是采用了一維信號處理技術(shù),這可遷移到光譜數(shù)據(jù)分析,F(xiàn)AST探測數(shù)據(jù)分析。腦電數(shù)據(jù)分析等方面。
探索人工智能領(lǐng)域的技術(shù)在引力波數(shù)據(jù)分析中應(yīng)用,發(fā)展新的算法,將會促進(jìn)人工智能研究領(lǐng)域的發(fā)展。對天文學(xué)而言,所發(fā)展的技術(shù)若能以更快的速度、更高的精度實時處理得到引力波源的方向、位置等信息,就能為相應(yīng)的研究爭取寶貴的天文觀測時間,進(jìn)而形成以引力波觀測為觸發(fā)的全新天文觀測方法——多信使天文學(xué)(Multimessenger Astronomy)。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03