一句話,認(rèn)識(shí)到大數(shù)據(jù)時(shí)代的到來(lái)

1，什么是大數(shù)據(jù)

大數(shù)據(jù)，是大數(shù)據(jù)文件，還是大量的數(shù)據(jù)文件?要多大，KB，MB，GB，TB，PB，EB?還是說(shuō)是大范圍的數(shù)據(jù)，包括文本，圖像，視頻。。。

至少到2014年，大數(shù)據(jù)還沒(méi)有一個(gè)準(zhǔn)確的范疇定義。這是IEEE關(guān)于大數(shù)據(jù)的特別報(bào)告集里的說(shuō)法。這里的問(wèn)題就在于，一個(gè)大字，每天都在變：更多的設(shè)備被應(yīng)用到日常生活，每天都有超越以往所有的比特在網(wǎng)絡(luò)產(chǎn)生，流動(dòng)，湮滅，同樣，每天都有更多的超越以往的對(duì)這些比特流的使用，應(yīng)用在發(fā)生，而這樣的使用，應(yīng)用，又進(jìn)一步產(chǎn)生更大量的數(shù)據(jù)流。

那么，就是大數(shù)據(jù)是什么?

2，大數(shù)據(jù)是各種 IT 技術(shù)發(fā)展的匯聚點(diǎn)

2.1，光纖通信，DSL接入，Wifi，LTE，等等等等的通信連接轉(zhuǎn)換設(shè)備，越來(lái)越多的帶寬，越來(lái)越低廉的價(jià)格，使得網(wǎng)絡(luò)大數(shù)據(jù)傳輸成為可能。

2.2，光學(xué)技術(shù)與半導(dǎo)體集成電路技術(shù)使得大規(guī)模的數(shù)據(jù)存儲(chǔ)成為可能。

2.3，各種 sensor 技術(shù)使得數(shù)據(jù)的日常獲取越來(lái)越便捷。

2.4，數(shù)據(jù)庫(kù)技術(shù)的長(zhǎng)時(shí)間發(fā)展與廣泛應(yīng)用提供了足夠的，初始的結(jié)構(gòu)化數(shù)據(jù)的來(lái)源，并提供了新數(shù)據(jù)處理方式的原始脈絡(luò)。

2.5，人工智能技術(shù)，包括圖像視頻文本的理解分析，原始數(shù)據(jù)的結(jié)構(gòu)化挖掘，自然語(yǔ)言處理，機(jī)器學(xué)習(xí)等等等，使得從已有數(shù)據(jù)中獲得新的驚喜知識(shí)成為每天都在發(fā)生的事情。

2.6，摩爾定律使得數(shù)據(jù)處理的成本越來(lái)越低廉，但是效率卻越來(lái)越高。

2.7，移動(dòng)通信技術(shù)使得每個(gè)人每個(gè)時(shí)刻在每個(gè)地方都在為數(shù)據(jù)的越來(lái)越大做出貢獻(xiàn)。

2.8，網(wǎng)絡(luò)信息檢索技術(shù)，使得數(shù)據(jù)/知識(shí)的應(yīng)用與分布越來(lái)越扁平化。

2.9，基于上述各項(xiàng)技術(shù)的發(fā)展，越來(lái)越多的應(yīng)用領(lǐng)域得到了新的推動(dòng)助力。。。

3，我們能夠從大數(shù)據(jù)中得到什么?

2007年一月11日，Jim Gray，微軟的資深科學(xué)家，在給美國(guó)國(guó)家研究委員會(huì)的報(bào)告中，提出了一種新的科學(xué)研究范式：密集數(shù)據(jù)里的科學(xué)發(fā)現(xiàn)。這是自觀察，實(shí)驗(yàn)，計(jì)算機(jī)模擬后的又一種科學(xué)研究范式。

換句話說(shuō)，人類(lèi)有了一種新的知識(shí)獲取的方式。而這個(gè)方式是自生產(chǎn)的：數(shù)據(jù)，數(shù)據(jù)中獲得知識(shí)，知識(shí)本身就是數(shù)據(jù)，從數(shù)據(jù)中再獲得知識(shí)，。。。以此遞進(jìn)，這是一種自生產(chǎn)，自組織的，自我成長(zhǎng)的，知識(shí)體系。

3.1，舉例而言，你問(wèn)過(guò)自己下面三個(gè)問(wèn)題嗎?

你喜歡恐怖片么?你曾經(jīng)獨(dú)自去外國(guó)旅行過(guò)么?覺(jué)得去駕駛帆船好玩么?

好吧，告訴你為什么你可以問(wèn)問(wèn)自己這么三個(gè)問(wèn)題。這是美國(guó)一個(gè)社交網(wǎng)站總結(jié)出來(lái)的，如果你想找能夠相守一生的伴侶的話，這三個(gè)問(wèn)題的答案可以作為參考。(我覺(jué)得在中國(guó)可能不靠譜)。

3.2，那么來(lái)一個(gè)靠譜一點(diǎn)的吧：你和女友/老婆經(jīng)常吵架為了什么?錢(qián)么?缺錢(qián)么?。。。。

大數(shù)據(jù)分析結(jié)果是：不是因?yàn)槿卞X(qián)，而是因?yàn)槟銈儌z對(duì)如何花錢(qián)不一致(這不是廢話么)。

4，大數(shù)據(jù)下的挑戰(zhàn)

首先是數(shù)據(jù)安全。誰(shuí)能使用，誰(shuí)應(yīng)該擁有，誰(shuí)能夠維護(hù)我們的數(shù)據(jù)，并保證這樣的數(shù)據(jù)應(yīng)用不會(huì)給我們帶來(lái)安全上的問(wèn)題?

然后是個(gè)人的隱私，你懂的

而且人工智能還不那么靠譜吧。。。連我的 l n 不分都分辨不出來(lái)

難道我們就能夠依賴(lài)?yán)浔臋C(jī)器，網(wǎng)絡(luò)，和數(shù)據(jù)嗎?還要人干嗎?

5，毋庸置疑，大數(shù)據(jù)時(shí)代已經(jīng)來(lái)到了。你我都在其中。

互聯(lián)網(wǎng)上每秒鐘都在不停地刷新上傳下載流通各種數(shù)據(jù)。你知道你不是用并不意味著你不在其中。

互聯(lián)網(wǎng)上每秒鐘都在產(chǎn)生海量的信息流動(dòng)以滿足各種應(yīng)用的需求，而這些海量的信息流動(dòng)就是知識(shí)的流動(dòng)與生產(chǎn)，并進(jìn)一步產(chǎn)生數(shù)據(jù)，知識(shí)，這已經(jīng)就是一種新的智能的存在。

大數(shù)據(jù)意味著統(tǒng)計(jì)，預(yù)測(cè)，結(jié)構(gòu)化的信息隨時(shí)隨地都在發(fā)生，產(chǎn)生，應(yīng)用，這是我們?nèi)祟?lèi)新的智能體系。

新的時(shí)代已經(jīng)來(lái)了。

6，你我如何做?

投身于IT嗎?去做大數(shù)據(jù)嗎?

No。因?yàn)樵诎ぬ叩南氚ぬ叩萌颂嗔耍蝗币粋€(gè)你，也不缺一個(gè)我。

干自己的活，讓大數(shù)據(jù)為你我而服務(wù)，用大數(shù)據(jù)提升你我，用大數(shù)據(jù)改善自己的生活，推動(dòng)自己的事業(yè)，僅此就足夠你我忙不過(guò)來(lái)了。

一句話，認(rèn)識(shí)到大數(shù)據(jù)時(shí)代的到來(lái)，站穩(wěn)自己的領(lǐng)域，將兩者結(jié)合起來(lái)，就是你我在大數(shù)據(jù)下的選擇。