大數(shù)據(jù)對社會創(chuàng)新的作用_數(shù)據(jù)分析師培訓(xùn)

“大數(shù)據(jù)”一語用來描述數(shù)據(jù)的日益增長和我們不斷加強的有效利用數(shù)據(jù)的的能力，并且大數(shù)據(jù)已經(jīng)在科學(xué)和商業(yè)領(lǐng)域獲得了極大的應(yīng)用。但是在社會領(lǐng)域“大數(shù)據(jù)”的應(yīng)用卻是滯后的。

大數(shù)據(jù)所提供的信息和幫助解決社會問題之間存在巨大的鴻溝。有一些社會問題可以通過大數(shù)據(jù)來解決，例如利用交通流量數(shù)據(jù)來緩解高速公路交通擁堵問題；但另一些社會問題的解決卻沒那么容易，例如如何利用數(shù)據(jù)來解決無家可歸者的問題，或者販賣人口的問題？

社會問題之所以復(fù)雜，是因為涉及的利益相關(guān)者眾多，所以目標(biāo)也是多重的。不像技術(shù)問題一樣，目標(biāo)往往是單一的，比如說優(yōu)化。但在社會問題上，到底什么叫“優(yōu)化”呢？尤其是社會問題往往涉及政府的公共政策和行政機構(gòu)的介入，使得社會問題又不單純是社會問題，而成為政治問題。

大數(shù)據(jù)使用的問題

另一個問題與大數(shù)據(jù)本身的使用有關(guān)系。事實上，但切入一個社會問題時，你可能會遇上不上數(shù)字，但這些數(shù)字往往不是結(jié)構(gòu)化的，很難被調(diào)用。結(jié)構(gòu)化的大數(shù)據(jù)相對缺乏有四個主要的原因：數(shù)據(jù)淹沒在行政系統(tǒng)、數(shù)據(jù)管理標(biāo)準缺乏、數(shù)據(jù)往往不可靠以及數(shù)據(jù)可能導(dǎo)致意想不到的后果。

比如說，全球每年被販賣的人口估計高達3000萬人次，這是個約320億美元的“產(chǎn)業(yè)”。要打擊人口販子，大數(shù)據(jù)當(dāng)然可以幫忙。但問題是人口販子用的手機、社交媒體、在線廣告和其他網(wǎng)絡(luò)平臺產(chǎn)生的數(shù)據(jù)，并沒有被系統(tǒng)的收集，更遑論共享給相關(guān)的組織。當(dāng)然原始數(shù)據(jù)本身的收集就很難，并且各個組織之間的數(shù)據(jù)共享做得也不到位。

更糟的是，打擊人口販賣的各家機構(gòu)經(jīng)?；ハ酄帄Z的稀缺資源：無論資金、捐贈還是來自媒體和社會的認同。因為這種競爭，各機構(gòu)之間的數(shù)據(jù)共享幾乎不可能。例如，北極星項目（the Polaris Project）一直致力于打擊人口販賣。2003年至2006年，Polaris為被販賣的幸存者提供熱線電話。2007年，美國衛(wèi)生和公眾服務(wù)部選定Polaris作為全國首個國家販賣人口資源熱線。多年來，Polaris記錄了75000多個呼叫；然而，獲得這些數(shù)據(jù)受到限制，其可靠性和來源鮮為人知。

如果Polaris信息向公眾開放，并結(jié)合其他數(shù)據(jù)源，如經(jīng)濟指標(biāo)、運輸路線、教育統(tǒng)計和受害者服務(wù)等，能更加有效幫助打擊人口販賣。2012年Google Giving（谷歌捐贈）授予Polaris和另外兩家國際反人口販賣組織300萬美元以資助將他們?nèi)龡l電話熱線收集到的數(shù)據(jù)予以整合，并發(fā)展為國際熱線。目前，三個組織都已在全球人口販運熱線網(wǎng)絡(luò)（Global Human Trafficking Hotline Network）下聯(lián)合起來。這是一個積極的跡象，但是這次的合作成果仍有待觀察。

增加大數(shù)據(jù)使用的步驟

大數(shù)據(jù)于決策時充分了解信息以幫助解決世界上最棘手的社會問題有著巨大潛力。但是要做到這一點，有關(guān)數(shù)據(jù)的收集、組織和分析的問題必須首先得到解決。下列四項建議有助于創(chuàng)建數(shù)據(jù)集，并以此為據(jù)進行決策。

首先，在關(guān)鍵問題上建立全球數(shù)據(jù)銀行。全球需要對復(fù)雜的問題，如販賣人口、全球饑餓和貧窮創(chuàng)建大型數(shù)據(jù)銀行。數(shù)據(jù)銀行有處理不同數(shù)據(jù)格式和描述數(shù)據(jù)集的元數(shù)據(jù)的能力。為了做到這一點，促進專題問題的數(shù)據(jù)共享需要創(chuàng)建多部門的聯(lián)盟。

其次，讓公民參與和公民科學(xué)。大數(shù)據(jù)不是專業(yè)人士的地盤。公民也可以參與幫助創(chuàng)建和分析這些數(shù)據(jù)集。隨著通過開放的數(shù)據(jù)平臺數(shù)據(jù)激增，越來越多的公民通過“公民科學(xué)”來開創(chuàng)新理念和產(chǎn)品。

再次，建立數(shù)據(jù)管理人和分析人的框架。今天，我們不僅缺乏可以解決社會問題的數(shù)據(jù)管理人和分析師，對于接受必要培訓(xùn)和能力的現(xiàn)有人員，我們的途徑也是有限。在大多數(shù)情況下，我們將數(shù)據(jù)科學(xué)留給了科學(xué)界和商界。社會科學(xué)往往給學(xué)生提供簡單的統(tǒng)計基礎(chǔ)知識。如果我們要利用大數(shù)據(jù)，這種做法是不可接受的。我們需要讓學(xué)生和分析人員掌握必要技能，以管理數(shù)據(jù)同時也創(chuàng)建大型數(shù)據(jù)集。我們要開發(fā)課程，讓學(xué)生了解數(shù)據(jù)的組織、保存、可視化、搜索和檢索以及使用。除了這些技能，要讓學(xué)生能更多地思考能利用數(shù)據(jù)做什么是至關(guān)重要。考慮數(shù)據(jù)集之間的網(wǎng)絡(luò)關(guān)系，以及如何發(fā)現(xiàn)數(shù)據(jù)集中的潛在模式，是需要開發(fā)的能力。

最后，促進虛擬實驗平臺。為了提高我們對如何使用大數(shù)據(jù)解決社會問題的理解，我們需要推動更多的實驗。虛擬實驗平臺，允許個人交流思想、與別人的想法交流、攜手合作以找到解決問題的方法或利用機會，它能夠?qū)⒏鱾€感興趣的相關(guān)方聚集在一起共同打造大型數(shù)據(jù)集、開發(fā)創(chuàng)新算法來分析和可視化的數(shù)據(jù)，并開發(fā)新知識。如果我們要使用大數(shù)據(jù)解決社會挑戰(zhàn)，虛擬實驗平臺是必不可少的。