
研究人員將統(tǒng)計和符號人工智能技術結合起來,以加快學習速度和提高透明度。
Researchers combine statistical and symbolic artificial intelligence techniques to speed learning and improve transparency.
Kim Martineau | 麻省理工學院 探索智能
本文由CDA數據分析研究院編譯出品,轉載需授權
研究人員訓練了一個混合人工智能模型來回答這樣的問題:“綠色立方體左邊的紅色物體與紫色啞光物體形狀相同嗎?”“通過給它提供包含顏色和形狀的樣本,然后是涉及多對象比較的更復雜的場景。該模型可以將這些知識轉移到新的場景中,也比使用部分訓練數據的進行訓練的最先進的模型要好。
一個從未見過粉紅大象的孩子仍然可以描述一只粉紅色的大象---“不像電腦”。麻省理工學院(MIT)博士生吳嘉君(Jiajun Wu)說:“計算機是從數據中學習的?!薄皩C器來說,能夠概括和識別你從未見過的東西,比如粉紅色的大象-是非常困難的?!?/span>
深度學習系統(tǒng)通過挑選出數據中包含的某種統(tǒng)計信息來解釋世界。這種機器學習方式現在隨處可見,在Facebook上給朋友自動貼上標簽,講述亞歷克莎最新的天氣預報,并通過谷歌搜索提供有趣的事情。但是統(tǒng)計學習有其局限性。它需要大量的數據,很難解釋為什么會是這樣的,并且很難將過去的知識應用到新的環(huán)境中;比如它無法理解一只粉紅而不是灰色的大象。
為了讓計算機有能力像我們一樣進行推理,人工智能(AI)的研究人員又回到了抽象的或象征性的編程模式中。20世紀50年代和60年代,符號AI將規(guī)則和邏輯連接起來,允許機器進行比較,并解釋物體和實體之間的聯(lián)系。符號AI使用較少的數據,記錄它所采取的一系列步驟來達成一個決定,當它與統(tǒng)計神經網絡的野蠻處理能力相結合時,它甚至可以在復雜的圖像理解測試中擊敗人類。
麻省理工學院IBM沃森人工智能實驗室和DeepMind的一組研究人員進行的一項新研究表明,將統(tǒng)計人工智能和符號人工智能結合在一起是有希望的。在麻省理工學院腦和認知科學系以及計算機科學和人工智能實驗室的教授吳宇森和 Joshua Tenenbaum 的帶領下,研究表明,其混合模型可以學習與物體相關的概念,如顏色和形狀,并利用這些知識來解釋場景中復雜的物體關系。他們的模型只需要很少的訓練數據,沒有明確的編程,就可以將模型遷移到更大的場景中,并能回答越來越棘手的問題,甚至比其最先進的同行更好。該小組在5月舉行的國際學習代表大會上介紹了其成果。
“孩子們學習概念的一種方式是把文字和圖像聯(lián)系起來,”該研究的主要作者、清華大學的本科生、麻省理工學院的訪問學者毛家源說?!澳軌蛞酝瑯拥姆绞綄W習的機器需要的數據少得多,而且能夠更好地將其知識遷移到新的場景中?!?/span>
雅各布·安德烈亞斯(Jacob Andreas)說,這項研究是回歸抽象程序方法的有力論據,他是加利福尼亞大學伯克利分校(University of California at Berkeley)的一名畢業(yè)生,今年秋天開始在麻省理工學院(MIT)擔任助理教授,并未參與這項工作。他說:“事實證明,訣竅在于增加更多的符號結構,并向神經網絡提供一種世界的表示,這種世界被劃分為對象和屬性,而不是給它提供原始圖像?!薄斑@項工作讓我們了解在語言學習成為可能之前,機器需要了解什么?!?/span>
研究小組將他們的模型訓練在與相關問題和答案配對的圖像上,這是斯坦福大學開發(fā)的CLEVR圖像理解測試的一部分。隨著模型的學習,問題越來越難回答,“物體的顏色是什么?”“到”綠色圓柱體右側有多少個物體,與藍色小球的材質相同嗎?“一旦掌握了對象級的概念,模型就開始學習如何將對象及其屬性相互關聯(lián)。
像其他混合人工智能模型一樣,麻省理工的工作就是將任務分解。神經網絡的感知模塊對每幅圖像中的像素進行處理,并繪制出物體的地圖。語言模塊,也由神經網絡組成,從每個句子中的單詞中提取意義,并創(chuàng)建符號程序或指令,告訴機器如何回答問題。第三個推理模塊在現場運行符號程序并給出答案,當模型出錯時更新模型。
團隊方法的關鍵是一個感知模塊,它將圖像轉換為基于對象的表示,使程序更容易執(zhí)行。同樣獨特的是他們所說的課程學習,或選擇性地訓練模式的概念和場景,逐步增長的難度。事實證明,以合乎邏輯的方式而不是隨意地輸入數據有助于模型更快地學習,同時提高準確性。
一旦模型有了堅實的基礎,它就可以解釋新的場景和概念,以及越來越難的問題,這幾乎是完美的。被要求回答一個不熟悉的問題,比如,“大黃色物體的形狀是什么?”它的訓練數據比斯坦福大學和附近的麻省理工林肯實驗室的同行要少,但是效果上是更好的。
當其他模型接受了70000張圖片和700000個問題的完整CLEVR數據集進行訓練時,MIT-IBM模型使用了5000張圖片和100000個問題。由于模型建立在先前學習的概念之上,它吸收了每個問題的基礎程序,所以加快了訓練過程。
雖然在統(tǒng)計上,深度學習模型現在已經嵌入日常生活中,但它們的決策過程中的大部分仍然隱藏在視野之外。由于缺乏透明度,很難預測系統(tǒng)易受操縱、錯誤或偏差的影響。添加一個符號層可以打開黑匣子,解釋混合人工智能系統(tǒng)日益增長的興趣。
林肯實驗室研究員大衛(wèi)·馬斯卡卡(David Mascharka)說:“將任務分解,讓程序完成一些工作,是將可解釋性構建成深度學習模型的關鍵?!彼幕旌夏P汀巴该髟O計網絡”(Transparency by Design Network)是麻省理工學院-IBM研究的基準。
MIT-IBM團隊現在正致力于改進模型在真實照片上的性能,并將其擴展到視頻理解和機器人操作。這項研究的其他作者分別是麻省理工學院-IBM沃森人工智能實驗室和DeepMind的研究員莊根(Chuang Gan)和普希梅特·科利(Pushmeet Kohli)。
原標題:Teaching machines to reason about what they see
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經網絡(RNN)家族中,長短期記憶網絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數據分析師報考條件詳解與準備指南? ? 在數據驅動決策的時代浪潮下,CDA 數據分析師認證愈發(fā)受到矚目,成為眾多有志投身數 ...
2025-07-11數據透視表中兩列相乘合計的實用指南? 在數據分析的日常工作中,數據透視表憑借其強大的數據匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數據分析師:連接數據與業(yè)務的價值轉化者? ? 在大數據與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數據查詢到趨勢預判? ? 在數據驅動決策的時代,預測分析作為挖掘數據潛在價值的核心手段,正被廣泛 ...
2025-07-10數據查詢結束后:分析師的收尾工作與價值深化? ? 在數據分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數 ...
2025-07-10CDA 數據分析師考試:從報考到取證的全攻略? 在數字經濟蓬勃發(fā)展的今天,數據分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數據背后的時間軌跡? 在數據分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數據類型:時間維度的精準切片? ? 在數據的世界里,時間是最不可或缺的維度之一,而year_month數據類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數據分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數據分析師認證考試中,Python 作為數據處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數據趨勢與突變分析的有力工具? ? ? 在數據分析的廣袤領域中,準確捕捉數據的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數據分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數據分析師認證作為國內權威的數據分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網絡(LSTM)作為循環(huán)神經網絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調研數據中的深度應用? 市場調研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調研數 ...
2025-07-07CDA數據分析師證書考試全攻略? 在數字化浪潮席卷全球的當下,數據已成為企業(yè)決策、行業(yè)發(fā)展的核心驅動力,數據分析師也因此成為 ...
2025-07-07剖析 CDA 數據分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數據分析師考試作為衡量數據專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉日期:解鎖數據處理的關鍵技能? 在數據處理與分析工作中,數據格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數據分析師視角:從數據迷霧中探尋商業(yè)真相? 在數字化浪潮席卷全球的今天,數據已成為企業(yè)決策的核心驅動力,CDA(Certifie ...
2025-07-04CDA 數據分析師:開啟數據職業(yè)發(fā)展新征程? ? 在數據成為核心生產要素的今天,數據分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03