客觀利用"大數(shù)據(jù)" 不要變成"大錯(cuò)誤"_數(shù)據(jù)分析師

大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨，但大數(shù)據(jù)并非無(wú)所不能。其核心不在規(guī)模大，它蘊(yùn)含的是計(jì)算和思維方式的轉(zhuǎn)變，過(guò)于樂(lè)觀和簡(jiǎn)單的理解，都可能助長(zhǎng)“大數(shù)據(jù)迷信”

得益于移動(dòng)互聯(lián)網(wǎng)以及智能手機(jī)、智能穿戴產(chǎn)品的發(fā)展，人們的行為、位置甚至身體的生理特征等數(shù)據(jù)都可以便捷地被記錄，使得大數(shù)據(jù)的采集成為可能。

這一新的數(shù)據(jù)形態(tài)產(chǎn)生的價(jià)值，比如神奇的趨勢(shì)預(yù)測(cè)能力被公眾廣泛討論，成為不少商家宣傳營(yíng)銷的賣點(diǎn)。從汽車、化妝品到體育，似乎所有行業(yè)都可以借助大數(shù)據(jù)，精確定位、找到消費(fèi)者，預(yù)測(cè)趨勢(shì)、贏得未來(lái)。

在支持者看來(lái)，大數(shù)據(jù)的能耐在于每一個(gè)數(shù)據(jù)點(diǎn)都可以被捕捉到。分析大數(shù)據(jù)就能推導(dǎo)出驚人準(zhǔn)確的結(jié)果，經(jīng)典的抽樣統(tǒng)計(jì)方法面臨淘汰。同時(shí)，數(shù)據(jù)已經(jīng)大到能夠自己說(shuō)話，“數(shù)據(jù)背后的原因不再重要，人們只需要知道數(shù)據(jù)之間有統(tǒng)計(jì)相關(guān)性就行”，理論可能就此終結(jié)。

毋庸置疑，規(guī)模更大、更新更快的大數(shù)據(jù)擁有深刻的洞察力，也將帶來(lái)價(jià)值，但認(rèn)為有了大數(shù)據(jù)就無(wú)所不能，卻過(guò)于樂(lè)觀和簡(jiǎn)單。

首先，幾百年的統(tǒng)計(jì)學(xué)發(fā)展史已經(jīng)告訴我們，通過(guò)統(tǒng)計(jì)數(shù)據(jù)來(lái)認(rèn)知現(xiàn)實(shí)世界從來(lái)都不能盡善盡美，現(xiàn)實(shí)中存在的樣本誤差和偏差等種種“陷阱”，不是單單依靠更大、更新、更快的數(shù)據(jù)就可以解決。

其次，大數(shù)據(jù)價(jià)值密度低、內(nèi)容混雜，找到“貨真價(jià)實(shí)”的信息已屬不易。而“知其然，不求知其所以然”，只考慮純粹相關(guān)性，不注重?cái)?shù)據(jù)與結(jié)論之間因果關(guān)系的分析方法，在現(xiàn)實(shí)中往往經(jīng)不起推敲。比如，理論上可以通過(guò)分析上的每一次發(fā)言，推斷出某一事件引發(fā)的公共情緒，但不可忽視的是，微博活躍用戶只能代表他們自己，并不代表更廣泛的群體。

尤其不能忽視的是，目前許多數(shù)據(jù)仍處于“孤島”狀態(tài)，單一或少數(shù)領(lǐng)域的大數(shù)據(jù)不僅價(jià)值有限，還存在片面性的危險(xiǎn)。只有數(shù)據(jù)跨越了行業(yè)領(lǐng)域間的界限，關(guān)聯(lián)性加強(qiáng)時(shí)，數(shù)據(jù)的準(zhǔn)確性才會(huì)提高。打通數(shù)據(jù)“孤島”，融合數(shù)據(jù)還要走很長(zhǎng)的路。另外，數(shù)據(jù)的收集、存儲(chǔ)和搬運(yùn)雖然越來(lái)越便利，但從技術(shù)上看，如何從海量數(shù)據(jù)中淘出有價(jià)值的信息，還缺少?gòu)?qiáng)大的工具。

毫無(wú)疑問(wèn)，大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨，但大數(shù)據(jù)并非無(wú)所不能。大數(shù)據(jù)的核心不在規(guī)模大，它蘊(yùn)含的是計(jì)算和思維方式的轉(zhuǎn)變，過(guò)于樂(lè)觀和簡(jiǎn)單的理解，都可能助長(zhǎng)“大數(shù)據(jù)迷信”。比較切實(shí)的態(tài)度或許是，在尊重傳統(tǒng)的統(tǒng)計(jì)經(jīng)驗(yàn)基礎(chǔ)上，在不矮化大數(shù)據(jù)是“舊瓶裝新酒”的同時(shí)，不迷信大數(shù)據(jù)，善用大數(shù)據(jù)。否則，帶著“數(shù)據(jù)自己可以說(shuō)出結(jié)論”的謬識(shí)，就可能掉進(jìn)了數(shù)據(jù)的“陷阱”，從而使大數(shù)據(jù)產(chǎn)生“大錯(cuò)誤”。