百度大數(shù)據(jù)在預(yù)測領(lǐng)域的應(yīng)用_數(shù)據(jù)分析師考試

大數(shù)據(jù)對于很多人來說并不陌生，這一說法常常在我們生活中也是屢見不鮮。但是大數(shù)據(jù)到底能在中國已經(jīng)發(fā)展到什么階段了呢？美國麻省理工的阿萊克斯?彭特蘭(Alex Pentland)教授在百度The BIG Talk活動上認(rèn)為，中國擁有百度這樣的公司，政府部門的興趣，使得中國的大數(shù)據(jù)發(fā)展?fàn)顩r良好。
　　彭特蘭認(rèn)為，深度學(xué)習(xí)技術(shù)比傳統(tǒng)人工智能更加高級，能夠通過數(shù)據(jù)的搜集和發(fā)掘幫助人類更好地做出決定。而百度精確預(yù)測世界杯，是一次深度學(xué)習(xí)(Deep Learning)技術(shù)運用的成功案例，百度的大數(shù)據(jù)產(chǎn)品將幫助人們在更多的預(yù)測領(lǐng)域做出更好的選擇。
　　百度大數(shù)據(jù)在預(yù)測領(lǐng)域的應(yīng)用已經(jīng)涵蓋了城市預(yù)測、景點預(yù)測、高考預(yù)測、疾病預(yù)測等多個領(lǐng)域。未來，百度還將推出房地產(chǎn)預(yù)測、票房預(yù)測、就業(yè)預(yù)測和金融預(yù)測等大數(shù)據(jù)預(yù)測產(chǎn)品。
　　在今年4月24日的百度技術(shù)開放日上，百度CEO李彥宏推出了百度大數(shù)據(jù)引擎。百度大數(shù)據(jù)引擎一共分三個部分。
　　開放云：百度的大規(guī)模分布式計算和超大規(guī)模存儲云。過去的百度云主要面向開發(fā)者，大數(shù)據(jù)引擎的開放云則是面向有大數(shù)據(jù)存儲和處理需求的“大開發(fā)者”。
　　百度的開放云擁有超過1.2萬臺的單集群，超過阿里飛天計劃的5k集群。百度開放云還擁有CPU利用率高、彈性高、成本低等特點。百度是全球首家大規(guī)模商用ARM服務(wù)器的公司，而ARM架構(gòu)的特征是能耗小和存儲密度大，同時百度還是首家將GPU(圖形處理器)應(yīng)用在機(jī)器學(xué)習(xí)領(lǐng)域的公司，實現(xiàn)了能耗節(jié)省的目的。
　　數(shù)據(jù)工廠：開放云是基礎(chǔ)設(shè)施和硬件能力，你可以把數(shù)據(jù)工廠理解為百度將海量數(shù)據(jù)組織起來的軟件能力。就像數(shù)據(jù)庫軟件的位置一樣。只不過數(shù)據(jù)工廠是被用作處理TB級甚至更大的數(shù)據(jù)。
　　百度數(shù)據(jù)工廠支持單詞百TB異構(gòu)數(shù)據(jù)查詢，支持SQL-like以及更復(fù)雜的查詢語句，支持各種查詢業(yè)務(wù)場景。同時百度數(shù)據(jù)工廠還將承載對于TB級別大表的并發(fā)查詢和掃描，大查詢、低并發(fā)時每秒可達(dá)百GB，在業(yè)界已經(jīng)是很領(lǐng)先的能力了。
　　百度大腦：有了大數(shù)據(jù)處理和存儲的基礎(chǔ)之后，還得有一套能夠應(yīng)用這些數(shù)據(jù)的算法。圖靈獎獲得者N.Wirth(沃斯)提出過“程序=數(shù)據(jù)結(jié)構(gòu)+算法”的理論。如果說百度大數(shù)據(jù)引擎是一個程序，那么它的數(shù)據(jù)結(jié)構(gòu)就是數(shù)據(jù)工廠+開放云，而算法則對應(yīng)到百度大腦。
　　百度大腦將百度此前在人工智能方面的能力開放出來，主要是大規(guī)模機(jī)器學(xué)習(xí)能力和深度學(xué)習(xí)能力。此前它們被應(yīng)用在語音、圖像、文本識別，以及自然語言和語義理解方面，被應(yīng)用在不少App，還通過百度Inside等平臺開放給了智能硬件?，F(xiàn)在這些能力將被用來對大數(shù)據(jù)進(jìn)行智能化的分析、學(xué)習(xí)、處理、利用。百度深度神經(jīng)網(wǎng)絡(luò)擁有200億個參數(shù)，是全球規(guī)模最大的，它擁有獨立的深度學(xué)習(xí)研究院(IDL)和較早的布局，在人工智能上百度已經(jīng)快了一步，現(xiàn)在貢獻(xiàn)給業(yè)界表明了它要開放的決心。
　　彭特蘭在評價百度大數(shù)據(jù)產(chǎn)品時說，百度已經(jīng)逐漸找到了如何把紙上談兵的數(shù)據(jù)轉(zhuǎn)化為具有實際運用價值的產(chǎn)品的有效方式。
　　他還指出，百度是世界人口最多國家的第一大搜索引擎，因而在發(fā)展大數(shù)據(jù)領(lǐng)域具有非常好的天然優(yōu)勢，并且百度本身是一個強(qiáng)大的公司，擁有強(qiáng)大的技術(shù)和市場作為支撐，也正是基于此，他們成了這個行業(yè)的翹楚之一。
　　百度大數(shù)據(jù)也吸引了世界上最大的組織：聯(lián)合國。近期聯(lián)合國與百度宣布啟動戰(zhàn)略合作，共建大數(shù)據(jù)聯(lián)合實驗室，這也成為聯(lián)合國開發(fā)計劃署在全球范圍內(nèi)首次攜手科技企業(yè)建立大數(shù)據(jù)實驗室。據(jù)悉，聯(lián)合國開發(fā)計劃署與百度大數(shù)據(jù)聯(lián)合實驗室的目標(biāo)是探索利用大數(shù)據(jù)解決全球性問題的創(chuàng)新模式。
　　近期，現(xiàn)階段，實驗室的研究重點是環(huán)保、健康兩大領(lǐng)域，未來還將針對教育、災(zāi)害管理等人類發(fā)展的眾多議題展開深入研究。
　　百度攜手聯(lián)合國開發(fā)計劃署共建大數(shù)據(jù)聯(lián)合實驗室，意味著百度大數(shù)據(jù)已成為政府、國際組織、環(huán)保、醫(yī)療等各個領(lǐng)域真正的“火眼金睛”。不僅為可持續(xù)問題提供解決方案，更為建立持續(xù)跨界合作營造了全新機(jī)制。
　　就目前而言，大數(shù)據(jù)作為一種顛覆性的新型產(chǎn)業(yè)，產(chǎn)業(yè)估值僅為200億美元左右，與產(chǎn)業(yè)的整體支出尚不成比例。
　　因此，盡管大數(shù)據(jù)時代已經(jīng)到來，但大數(shù)據(jù)的黃金時代還尚未完全到來，至少在某些應(yīng)用領(lǐng)域大數(shù)據(jù)還存在諸多不確定性，但是以百度的大數(shù)據(jù)聯(lián)合實驗室為轉(zhuǎn)折點，一個大數(shù)據(jù)應(yīng)用的全新模式已經(jīng)開啟，這也意味著一個大數(shù)據(jù)引領(lǐng)的新時代的來臨。