
作者 | 硅谷洞察
來(lái)源 | guigudiyixian
贏得人工智能先機(jī)的三大法寶:數(shù)據(jù)+算法+算力。
人工智能是一種變革性的技術(shù)浪潮,能夠幫助每個(gè)行業(yè)的用戶解決大大小小的問(wèn)題,從探索宇宙奧秘的科學(xué)研究、到惠及民生的健康和精準(zhǔn)醫(yī)療,再到與生活息息相關(guān)的運(yùn)輸和自動(dòng)駕駛汽車。
人工智能的應(yīng)用場(chǎng)景大到結(jié)合大數(shù)據(jù)和深度學(xué)習(xí)分析大型強(qiáng)子對(duì)撞機(jī)產(chǎn)生的大量原始數(shù)據(jù);小到給語(yǔ)音助手裝上耳朵和腦袋聽(tīng)懂用戶的語(yǔ)句,并實(shí)現(xiàn)簡(jiǎn)單的對(duì)話或互動(dòng)。
人工智能那么遠(yuǎn),又那么近。
可以說(shuō),隨著技術(shù)的不斷成熟和普及,人工智能能夠賦能我們來(lái)應(yīng)對(duì)各種人類的挑戰(zhàn),科學(xué)家可以借助人工智能提高科研的生產(chǎn)力,加快造福全人類的進(jìn)程;企業(yè)也可以通過(guò)人工智能的無(wú)限潛力創(chuàng)造新的收入來(lái)源并提高他們的底線;消費(fèi)者也能繼續(xù)看到更多新的應(yīng)用程序。
今天硅谷洞察就來(lái)給大家分析一下,人工智能已經(jīng)為各種行業(yè)領(lǐng)域帶來(lái)了哪些轉(zhuǎn)型影響。
超級(jí)計(jì)算機(jī)是什么?
提到宇宙研究就不得不提用于科學(xué)研究的超級(jí)計(jì)算機(jī)。小探最初聽(tīng)到超算這個(gè)概念是在《三體》的小說(shuō)中,大劉有這么一段描述。
(2008年出版科幻小說(shuō)《三體II:黑暗森林》片段)
浮點(diǎn)運(yùn)算的次數(shù)代表著計(jì)算機(jī)的計(jì)算實(shí)力。而11年前的科幻小說(shuō)早已被現(xiàn)實(shí)超越。在剛剛落幕的國(guó)際超算大會(huì)公布,位于田納西州能源部橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室(ORNL) 由 IBM 制造的超級(jí)計(jì)算機(jī) Summit 以 148.6 PetaFlops (千萬(wàn)億次)的HPL記錄獲得了世界最強(qiáng)的超級(jí)計(jì)算機(jī)稱號(hào)。簡(jiǎn)單算一下,Summit計(jì)算速度已經(jīng)達(dá)到《三體》中超級(jí)計(jì)算機(jī)的近300倍。
科學(xué)技術(shù)的發(fā)展已經(jīng)超乎我們的想象,曾經(jīng)遙不可及的未來(lái)也已經(jīng)到來(lái)。
超級(jí)計(jì)算機(jī),其實(shí)是指眾多高性能計(jì)算機(jī)節(jié)點(diǎn)連接在一起,統(tǒng)一調(diào)度管理,從而實(shí)現(xiàn)強(qiáng)大的計(jì)算功能。簡(jiǎn)單的說(shuō)就是價(jià)格在10萬(wàn)元以上的服務(wù)器。這些機(jī)器主要分布在大學(xué)或者科研機(jī)構(gòu)服務(wù)的領(lǐng)域非常高精尖,都是關(guān)系著人類發(fā)展的重要領(lǐng)域,例如全球氣候變化,宇宙探測(cè)分析、大腦仿真、開(kāi)發(fā)新材料、生物醫(yī)藥、智慧城市等實(shí)際問(wèn)題。
可以看得出來(lái),這些研究的特點(diǎn)是大量數(shù)據(jù)需要分析模擬得出規(guī)律,從而進(jìn)行預(yù)測(cè)。如果你需要模擬一大堆無(wú)厘頭的物體之間的相互關(guān)系,就一定需要“高性能計(jì)算”。
舉個(gè)例子,歐洲核子研究中心歐洲核子研究中心的大型強(qiáng)子對(duì)撞機(jī)(LHC)周長(zhǎng)27公里,超過(guò)6,000個(gè)超導(dǎo)磁體,是世界上最大的機(jī)器和最先進(jìn)的科學(xué)儀器。大型強(qiáng)子對(duì)撞機(jī)能夠?qū)①|(zhì)子加速到99.9999991%的光速,并產(chǎn)生非常高的能量碰撞,在某些情況下比我們的太陽(yáng)核心高出100,000倍。
這些實(shí)驗(yàn)產(chǎn)生了大量的原始數(shù)據(jù)。大型強(qiáng)子對(duì)撞機(jī)每秒發(fā)生多達(dá)10億次碰撞,每秒產(chǎn)生多達(dá)1 PB(1,024太字節(jié)或100萬(wàn)千兆字節(jié))的數(shù)據(jù)流經(jīng)歐洲核子研究中心的系統(tǒng)——遠(yuǎn)遠(yuǎn)超過(guò)世界上最重要的研究機(jī)構(gòu)所能存儲(chǔ)的數(shù)據(jù)。就需要使用專有軟件以及超強(qiáng)的計(jì)算力才能過(guò)濾此數(shù)據(jù)。
氣候預(yù)測(cè)同樣需要高性能計(jì)算。氣候預(yù)測(cè),廣泛來(lái)看就是對(duì)全球氣流、洋流等等的預(yù)測(cè),局限來(lái)看就是天氣預(yù)報(bào)。天氣預(yù)報(bào)的基本原理,就是通過(guò)氣象衛(wèi)星捕捉地圖上每一個(gè)點(diǎn)的云層和氣流運(yùn)動(dòng)軌跡,然后通過(guò)大量的計(jì)算推導(dǎo)出他們未來(lái)的走向。
高性能計(jì)算與人工智能深度融合
超算與人工智能的融合將引領(lǐng)下一代計(jì)算機(jī)體系結(jié)構(gòu)和系統(tǒng)軟件應(yīng)用的發(fā)展。
研究表明,運(yùn)行大型高性能計(jì)算應(yīng)用程序可以通過(guò)向現(xiàn)有高性能計(jì)算機(jī)群(High Performance Computing,簡(jiǎn)稱HPC)工作流程添加深度學(xué)習(xí)功能來(lái)實(shí)現(xiàn)顯著的效率。深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)固有的并行性非常適合高度并行的HPC環(huán)境,其中極端的計(jì)算性能,大容量?jī)?nèi)存池和優(yōu)化的節(jié)點(diǎn)間通信結(jié)構(gòu)可以顯著擴(kuò)展深度學(xué)習(xí)網(wǎng)絡(luò)識(shí)別結(jié)構(gòu)和模式的能力。
美國(guó)能源部科學(xué)辦公室與加州大學(xué)伯克利分校選擇與英特爾合作,將深度學(xué)習(xí)與HPC基礎(chǔ)設(shè)施相結(jié)合,創(chuàng)建了一個(gè)15-PetafFlop深度學(xué)習(xí)系統(tǒng),用于解決科學(xué)模式分類問(wèn)題。
這個(gè)深度學(xué)習(xí)系統(tǒng)將單個(gè)深度學(xué)習(xí)模型的訓(xùn)練擴(kuò)展到科里(Cori)超級(jí)計(jì)算機(jī)上多達(dá) 9600 個(gè)基于英特爾至強(qiáng)融核處理器的節(jié)點(diǎn)。該模型能夠更有效地從在數(shù)據(jù)多達(dá) 15TB 的氣候數(shù)據(jù)集中提取天氣模式。結(jié)果證明,處理大型復(fù)雜數(shù)據(jù)集時(shí),將深度學(xué)習(xí)培訓(xùn)優(yōu)化并擴(kuò)展到多核HPC系統(tǒng)具有顯著優(yōu)勢(shì)。
科里(Cori)超級(jí)計(jì)算機(jī)
除了幫助處理極其復(fù)雜的數(shù)據(jù)之外,使用HPC基礎(chǔ)設(shè)施進(jìn)行深度學(xué)習(xí)的第二個(gè)主要好處是大大改善了深度學(xué)習(xí)算法訓(xùn)練的響應(yīng)時(shí)間。
被評(píng)為全球第五快的超級(jí)計(jì)算機(jī),德克薩斯高級(jí)計(jì)算中心 (TACC) 將使用英特爾至強(qiáng)鉑金 8200 處理器為自己的 Frontera 系統(tǒng)提供動(dòng)力,支持國(guó)家科學(xué)基金會(huì)資助開(kāi)展的多層面先進(jìn)研究。
Frontera 還將整合超過(guò) 100TB 的英特爾傲騰數(shù)據(jù)中心級(jí)持久內(nèi)存,這是該技術(shù)第一次在如此大的規(guī)模上得到應(yīng)用。這種將持久內(nèi)存置于高性能計(jì)算系統(tǒng)附近的做法將能夠?qū)崿F(xiàn)極其復(fù)雜的模擬、人工智能算法和內(nèi)存分析。Frontera 將有助于展現(xiàn)在高性能計(jì)算系統(tǒng)上進(jìn)行大規(guī)模并行人工智能推理的可能性。
位于德克薩斯高級(jí)計(jì)算中心的超級(jí)計(jì)算機(jī)Frontera被評(píng)為全球第五快的超級(jí)計(jì)算機(jī)
不僅在前端的超算中心的應(yīng)用,瞄準(zhǔn)“數(shù)據(jù)”,勾畫(huà)AI全棧解決方案的英特爾AI加速技術(shù)在商用領(lǐng)域也廣泛應(yīng)用。
科大訊飛是中國(guó)最具創(chuàng)新力的公司之一,為通信、音樂(lè)和智能玩具等行業(yè)中應(yīng)用的眾多語(yǔ)音產(chǎn)品提供支持?!罢Z(yǔ)音引擎”無(wú)疑是科大訊飛的拳頭產(chǎn)品之一,它已占據(jù)中文語(yǔ)音技術(shù)市場(chǎng)70%以上的份額。但更重要的秘訣,其實(shí)是科大訊飛的 AI 核心戰(zhàn)略:打造以人工智能為核心的開(kāi)放平臺(tái)。
語(yǔ)音識(shí)別想要獲得更好的識(shí)別效果,就需要對(duì)框架進(jìn)行大量的數(shù)據(jù)訓(xùn)練,這將帶來(lái)海量的計(jì)算工作量。在一項(xiàng)數(shù)據(jù)訓(xùn)練中,每一萬(wàn)小時(shí)的語(yǔ)音數(shù)據(jù)約產(chǎn)生6000PetaFlops的計(jì)算量,這個(gè)計(jì)算量即便是用超級(jí)計(jì)算機(jī)Summit,也需要近1個(gè)小時(shí)的工作時(shí)長(zhǎng)。
人工智能三要素是數(shù)據(jù)、算法和算力。
對(duì)于已經(jīng)有了大量的數(shù)據(jù)基礎(chǔ)的訊飛AI開(kāi)放平臺(tái),科大訊飛19年的語(yǔ)音研發(fā)歷程,讓他們有自己一套獨(dú)特的算法。自研了FSMN、DFCNN 等創(chuàng)新的語(yǔ)音識(shí)別框架在神經(jīng)網(wǎng)絡(luò)、數(shù)據(jù)結(jié)構(gòu)模型、數(shù)據(jù)處理方式上,也相當(dāng)老道。
剩下的核心關(guān)鍵,就是計(jì)算力了。海量用戶上傳來(lái)數(shù)據(jù)后,深度學(xué)習(xí)需要對(duì)數(shù)據(jù)進(jìn)行大量的訓(xùn)練。這將帶來(lái)巨大的計(jì)算工作量。科大訊飛意識(shí)到深度學(xué)習(xí)的發(fā)展不僅需要頂層應(yīng)用的精進(jìn),也離不開(kāi)底層平臺(tái)在計(jì)算、數(shù)據(jù)處理和算法優(yōu)化上的支持。
科大訊飛很清楚,除了傳統(tǒng)的深度學(xué)習(xí)計(jì)算平臺(tái)外,還希望構(gòu)建更多的、基于不同技術(shù)方案的深度學(xué)習(xí)計(jì)算平臺(tái),增加選擇上的多樣性。他們需要一套深度定制的人工神經(jīng)網(wǎng)絡(luò)專屬芯片系統(tǒng)才能支撐住這個(gè)巨無(wú)霸平臺(tái)既然找芯片層面的合作商,英特爾成了他們的不二選擇。
經(jīng)過(guò)了三年,與英特爾的合作從最開(kāi)始的硬件與基礎(chǔ)設(shè)施的支持逐步加深,科大訊飛發(fā)現(xiàn)英特爾在人工智能、深度學(xué)習(xí)上的硬件技術(shù)優(yōu)勢(shì)和能力強(qiáng)大之外,英特爾通過(guò)不斷地對(duì)核心計(jì)算和存儲(chǔ)產(chǎn)品更新迭代,對(duì)深度訓(xùn)練應(yīng)用和算法優(yōu)化,對(duì)訊飛AI平臺(tái)的改進(jìn)提供了重要助力。在訊飛AI云的真實(shí)環(huán)境測(cè)試中,第二代英特爾至強(qiáng)可擴(kuò)展處理器已經(jīng)能讓CPU達(dá)到甚至超過(guò)原來(lái)GPU的性能。
現(xiàn)在,雙方的深度合作在代碼層級(jí)展開(kāi),不僅可以推動(dòng)科大訊飛訓(xùn)練平臺(tái)的優(yōu)化,提升其工作效率,其反饋的需求和經(jīng)驗(yàn),也促進(jìn)了用于人工智能的新一代英特爾至強(qiáng)融核處理器(Knights Mill),以及其他英特爾深度學(xué)習(xí)軟件工具和庫(kù)的優(yōu)化。
不得不說(shuō),懂算法的科大訊飛與懂計(jì)算的英特爾強(qiáng)強(qiáng)聯(lián)合的模式,構(gòu)建了一個(gè)業(yè)界頂級(jí)的人工智能開(kāi)放平臺(tái)。離能看會(huì)想,能聽(tīng)會(huì)講的人工智能,越來(lái)越近了。
英特爾打破AI理論與現(xiàn)實(shí)的壁壘
對(duì)于如何更高效地利用和處理數(shù)據(jù),全世界范圍內(nèi)的服務(wù)提供商和最終用戶都看到了人工智能帶來(lái)的諸多益處。
英特爾對(duì)數(shù)據(jù)處理很有信心,認(rèn)為從數(shù)據(jù)科學(xué)工作站到云端,最后再到推理設(shè)備,一整套完備的工作流程至關(guān)重要,因?yàn)檫@不僅關(guān)系到數(shù)據(jù)處理,也關(guān)系到數(shù)據(jù)的移動(dòng)和存儲(chǔ)。
從硬實(shí)力到軟實(shí)力,英特爾不斷在自己的全套肌肉中融入智能,加速AI的實(shí)踐應(yīng)用。就像他們不斷聲明的一樣,英特爾正積極的向人工智能公司轉(zhuǎn)型。
在剛剛結(jié)束的Hot Chips 2019上,英特爾公布了首款A(yù)I芯片Nervana 神經(jīng)網(wǎng)絡(luò)處理器的技術(shù)細(xì)節(jié)。兩款處理器都將用于數(shù)據(jù)中心,NNP-T 用于云端訓(xùn)練,NNP-I 用于云端推理。
隨著AI芯片的推出,以全面AI優(yōu)化的全棧式解決方案押寶人工智能未來(lái),英特爾的版圖似乎更加完整了。
你覺(jué)得贏下人工智能時(shí)代,企業(yè)最需要哪些技巧和實(shí)力?歡迎大家留言討論。
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無(wú)論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫(kù)管理中,“大表” 始終是性能優(yōu)化繞不開(kāi)的話題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫(kù)表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開(kāi)始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫(kù)表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫(kù))處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場(chǎng)景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對(duì)象的 text 與 content:區(qū)別、場(chǎng)景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請(qǐng)求開(kāi)發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫(kù)表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請(qǐng)求工具對(duì)比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請(qǐng)求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問(wèn)題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問(wèn)題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營(yíng)問(wèn)題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過(guò)程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營(yíng)銷案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見(jiàn)頂” 的當(dāng)下,精準(zhǔn)營(yíng)銷成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價(jià)值 在數(shù)據(jù)驅(qū)動(dòng)決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類分析:從操作實(shí)踐到業(yè)務(wù)價(jià)值挖掘 在數(shù)據(jù)分析場(chǎng)景中,聚類分析作為 “無(wú)監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計(jì)模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價(jià)值導(dǎo)向 統(tǒng)計(jì)模型作為數(shù)據(jù)分析的核心工具,并非簡(jiǎn)單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10