淘寶網(wǎng)推出人口遷徙數(shù)據(jù) 大數(shù)據(jù)技術(shù)揭秘_數(shù)據(jù)分析師

日前，淘寶公布了人口遷徙數(shù)據(jù)，正是利用大數(shù)據(jù)技術(shù)的普及，普通人才能窺探出哪些城市是用工的熱門(mén)城市，同鄉(xiāng)都喜歡去哪些城市工作。實(shí)際上，隨著移動(dòng)互聯(lián)網(wǎng)的普及，越來(lái)越多的人利用網(wǎng)絡(luò)購(gòu)物、消費(fèi)、娛樂(lè)……也正是每個(gè)人無(wú)處不在的網(wǎng)絡(luò)活動(dòng)，構(gòu)成了大數(shù)據(jù)，讓大數(shù)據(jù)得出的結(jié)論方便我們的生活。

最熱應(yīng)用 互聯(lián)網(wǎng)公司推人口遷徙數(shù)據(jù)

伴隨著春運(yùn)，人口遷徙圖成為今年春節(jié)最熱門(mén)的互聯(lián)網(wǎng)應(yīng)用之一。在正月十五的前夕，淘寶網(wǎng)推出了人口遷移數(shù)據(jù)。

據(jù)淘寶網(wǎng)介紹，其中涉及的遷徙用戶中，85%的人是18-34歲的青壯年。雖然近年來(lái)“逃離北上廣”的聲音不絕于耳，但淘寶的數(shù)據(jù)顯示，北京、上海、廣州等大城市的人口依舊呈“正向”流入的趨勢(shì)。而去年遷徙人口位居首位的省份為廣東，說(shuō)明廣東依然是對(duì)務(wù)工人員最有吸引力的地區(qū)?！斑@主要是因?yàn)橹槿鞘谴笠?guī)模勞動(dòng)密集型產(chǎn)業(yè)地區(qū)，以及以往的‘路徑依賴’決定的。”北京大學(xué)中國(guó)社會(huì)與發(fā)展研究中心主任邱澤奇解釋了該數(shù)據(jù)。但同時(shí)難以忽略的是，流入北上廣一線大城市的人口增幅正在收窄，其中以北京為最。根據(jù)淘寶遷徙數(shù)據(jù)顯示，去年北京新增遷移人口比2012年少了三分之二。

來(lái)自淘寶的遷移數(shù)據(jù)還顯示，大部分地區(qū)的人選擇遷徙的目的地，都是離自己原所在地相對(duì)較近的地區(qū)。如安徽人最愛(ài)前往的地方是江蘇和浙江；河北人則更多遷往北京和天津；湖南、湖北、江西人，則選擇廣東作為“下一站”；寧夏人則選擇陜西的較多。

實(shí)際上，不僅是淘寶，此前百度在春運(yùn)期間對(duì)網(wǎng)民開(kāi)放了“百度遷徙”網(wǎng)頁(yè)，所有網(wǎng)民都可以訪問(wèn)該專題頁(yè)面，通過(guò)可視化大數(shù)據(jù)的方式，了解全國(guó)春運(yùn)的最新動(dòng)態(tài)，包括全國(guó)春運(yùn)最熱的線路，最熱門(mén)的遷出城市、遷入城市等。而阿里旗下的支付寶也利用大數(shù)據(jù)發(fā)布了《支付寶用戶春運(yùn)報(bào)告》。

五花八門(mén) 互聯(lián)網(wǎng)應(yīng)用暗藏大數(shù)據(jù)

除了上述人口遷徙利用了大數(shù)據(jù)外，其實(shí)在網(wǎng)民使用的各種網(wǎng)絡(luò)應(yīng)用中，都會(huì)或多或少見(jiàn)到大數(shù)據(jù)的身影，像打車軟件、互聯(lián)網(wǎng)金融創(chuàng)新、網(wǎng)購(gòu)消費(fèi)等。

在手機(jī)打車市場(chǎng)，阿里巴巴的快的和騰訊的嘀嘀激戰(zhàn)正酣?！氨砻嫔峡?，阿里和騰訊搶的是打車軟件和移動(dòng)支付市場(chǎng)，實(shí)際上，他們更大的目的在于大數(shù)據(jù)和O2O市場(chǎng)?！币晃环治鋈耸空J(rèn)為，通過(guò)這些軟件打車，司乘人員的信息都很透明，互聯(lián)網(wǎng)公司可以通過(guò)對(duì)用戶打車習(xí)慣、打車路徑等數(shù)據(jù)的積累、分析，疊加地圖服務(wù)、生活信息服務(wù)等內(nèi)容，實(shí)現(xiàn)多重服務(wù)提供，增加客戶黏度，從而與商家以及消費(fèi)者形成合作，實(shí)現(xiàn)贏利。

比如，某一位乘客經(jīng)常打車到某一目的地，互聯(lián)網(wǎng)企業(yè)掌握這一數(shù)據(jù)后，可以在該用戶使用地圖軟件時(shí)，載入周邊的商場(chǎng)、餐館等信息，實(shí)現(xiàn)精準(zhǔn)營(yíng)銷。

而電商在銷售商品時(shí)也會(huì)用到大數(shù)據(jù)，除了根據(jù)用戶搜索數(shù)據(jù)推送相關(guān)商品外，還應(yīng)用大數(shù)據(jù)推出適合消費(fèi)者的產(chǎn)品。日前京東推出的“JDPhone”計(jì)劃，就是通過(guò)大數(shù)據(jù)挖掘用戶真實(shí)需求，深度整合產(chǎn)業(yè)鏈資源，為用戶打造最具性價(jià)比、超出期望的精品手機(jī)。

在去年“雙12”時(shí)，淘寶也曾運(yùn)用大數(shù)據(jù)技術(shù)進(jìn)行促銷。淘寶根據(jù)不同的人群需求，劃分出200多個(gè)購(gòu)物場(chǎng)景。“場(chǎng)景購(gòu)物”意味著消費(fèi)者可以只憑著一個(gè)模糊的想法，甚至只是一個(gè)感覺(jué)，就能找到所需商品并一站購(gòu)齊。

此外，在“雙12”時(shí)，淘寶在購(gòu)物的各個(gè)環(huán)節(jié)為消費(fèi)者提供購(gòu)物預(yù)測(cè)。根據(jù)消費(fèi)者在過(guò)去一年的消費(fèi)特征，將所有紅包、秒殺商品經(jīng)過(guò)個(gè)性化數(shù)據(jù)匹配后，推薦給用戶。

在互聯(lián)網(wǎng)金融方面，日前京東推出的“白條”業(yè)務(wù)，是消費(fèi)者在京東購(gòu)物消費(fèi)時(shí)，享受“先消費(fèi)、后付款”的延后付款或“分期0元購(gòu)”的分期付款服務(wù)?！斑@一業(yè)務(wù)是通過(guò)對(duì)消費(fèi)、金融和大數(shù)據(jù)的深入分析和理解，對(duì)用戶的消費(fèi)記錄、配送信息、退貨信息、購(gòu)物評(píng)價(jià)等數(shù)據(jù)進(jìn)行風(fēng)險(xiǎn)評(píng)級(jí)，建立信用體系，為消費(fèi)者提供的信用服務(wù)?！本〇|消費(fèi)金融業(yè)務(wù)相關(guān)負(fù)責(zé)人表示。

技術(shù)揭秘 大數(shù)據(jù)是怎么來(lái)的

對(duì)于淘寶推出的人口遷徙數(shù)據(jù)，淘寶網(wǎng)有關(guān)負(fù)責(zé)人介紹，此次數(shù)據(jù)統(tǒng)計(jì)是根據(jù)用戶180天內(nèi)，默認(rèn)收貨地址信息的分析得出的。而百度相關(guān)人士介紹，百度遷徙是在“春運(yùn)人口遷徙密集、中國(guó)手機(jī)滲透率高”的背景下，通過(guò)抓取分析手機(jī)網(wǎng)民定位信息的大數(shù)據(jù)，繪制出人群的遷徙軌跡。

“通俗地說(shuō)是位置的變化，比如現(xiàn)在在這里使用手機(jī)，過(guò)了幾個(gè)小時(shí)以后，我們發(fā)現(xiàn)你在上海使用了手機(jī)。我們知道你的位置在這幾個(gè)小時(shí)的時(shí)間里發(fā)生了變化?！卑俣萀BS(位置信息服務(wù))技術(shù)總監(jiān)顧維灝解釋春運(yùn)數(shù)據(jù)的獲得。

據(jù)透露，支撐百度遷徙的LBS開(kāi)放平臺(tái)聚集了超過(guò)40萬(wàn)開(kāi)發(fā)者，為數(shù)十萬(wàn)款A(yù)PP提供定位服務(wù)，覆蓋數(shù)億部手機(jī)，每天產(chǎn)生35億次的定位請(qǐng)求，每秒就有4萬(wàn)次的定位請(qǐng)求。

與百度通過(guò)定位方式獲得大數(shù)據(jù)不同的是，支付寶方面的春運(yùn)數(shù)據(jù)，則是基于支付寶的實(shí)名用戶，并利用大數(shù)據(jù)技術(shù)交叉分析得出。小微金服數(shù)據(jù)實(shí)驗(yàn)室有關(guān)負(fù)責(zé)人表示，其是通過(guò)實(shí)名注冊(cè)用戶的出生地(通過(guò)身份證號(hào)碼前幾位來(lái)判斷)與現(xiàn)居地(比如常用收貨地址)之間的關(guān)系，并對(duì)比其他模型數(shù)據(jù)，從而描繪出在春運(yùn)期間支付寶用戶的一些行為特征。

應(yīng)用前景 大數(shù)據(jù)如何造福社會(huì)

對(duì)于網(wǎng)購(gòu)大數(shù)據(jù)應(yīng)用，消費(fèi)者能感受到購(gòu)物的便捷。而像人口遷徙等大數(shù)據(jù)的應(yīng)用，是否只為滿足人們的好奇心，還是有其社會(huì)價(jià)值呢？

以百度遷徙為例，百度方面表示，百度遷徙是一個(gè)社會(huì)公益項(xiàng)目，百度期望這一項(xiàng)目能服務(wù)于政府部門(mén)的科學(xué)決策，賦予社會(huì)學(xué)等科學(xué)研究以新的觀察視角和方法工具?！氨本┦腥丝诂F(xiàn)在到底是什么狀態(tài)，通過(guò)以往的方法，我們很難準(zhǔn)確研判。”有業(yè)內(nèi)人士表示，“但大數(shù)據(jù)解讀就可以分析人口流動(dòng)趨勢(shì)、交通擁堵情況等細(xì)節(jié)，為城市管理提供支撐平臺(tái)?！?

人口遷徙的另一個(gè)價(jià)值是商圈分析。比如北京中關(guān)村的商圈，通過(guò)軌跡分析，可以看到一些購(gòu)物中心人非常多，而一些購(gòu)物中心的顧客流量并不是很大，這些數(shù)據(jù)可以幫助優(yōu)化商圈，更好地配置資源。實(shí)際上，目前，阿里巴巴已經(jīng)在利用大數(shù)據(jù)技術(shù)提供阿里信用貸款與淘寶數(shù)據(jù)魔方。騰訊則通過(guò)社交網(wǎng)絡(luò)數(shù)據(jù)挖掘打造全新?tīng)I(yíng)銷平臺(tái)，為廣告主實(shí)現(xiàn)精準(zhǔn)營(yíng)銷。百度建立了百度指數(shù)、司南、風(fēng)云榜、數(shù)據(jù)研究中心、百度統(tǒng)計(jì)等五大數(shù)據(jù)體系平臺(tái)，提供企業(yè)實(shí)時(shí)數(shù)據(jù)服務(wù)。

目前在數(shù)據(jù)價(jià)值的發(fā)揮上，京東、天貓、易訊等電商已展開(kāi)與第三方機(jī)構(gòu)的合作，試圖通過(guò)對(duì)用戶各種數(shù)據(jù)分析，展示各自在網(wǎng)購(gòu)市場(chǎng)上的優(yōu)勢(shì)。但據(jù)業(yè)內(nèi)人士透露，電商對(duì)供應(yīng)商數(shù)據(jù)分享并未完全開(kāi)放。

個(gè)人隱私 法規(guī)保護(hù)個(gè)人信息

數(shù)據(jù)越來(lái)越大，擔(dān)憂似乎也越來(lái)越多。在電子化時(shí)代，所有跟我們個(gè)人信息相關(guān)的數(shù)據(jù)，幾乎都流淌在網(wǎng)絡(luò)中。未來(lái)，也許一個(gè)節(jié)點(diǎn)的數(shù)據(jù)泄露，就是個(gè)人甚至周邊人的整個(gè)人生的信息曝光……

對(duì)于個(gè)人隱私問(wèn)題，剛剛公布的即將于今年3月15日起實(shí)行的《網(wǎng)絡(luò)交易管理辦法》，就對(duì)保護(hù)消費(fèi)者的個(gè)人信息做了規(guī)定。該辦法規(guī)定：網(wǎng)絡(luò)商品經(jīng)營(yíng)者、有關(guān)服務(wù)經(jīng)營(yíng)者在經(jīng)營(yíng)活動(dòng)中收集、使用消費(fèi)者或者經(jīng)營(yíng)者信息，應(yīng)當(dāng)遵循合法、正當(dāng)、必要的原則，明示收集、使用信息的目的、方式和范圍，并經(jīng)被收集者同意。網(wǎng)絡(luò)商品經(jīng)營(yíng)者、有關(guān)服務(wù)經(jīng)營(yíng)者收集、使用消費(fèi)者或者經(jīng)營(yíng)者信息，應(yīng)當(dāng)公開(kāi)其收集、使用規(guī)則，不得違反法律、法規(guī)的規(guī)定和雙方的約定收集、使用信息。

網(wǎng)絡(luò)商品經(jīng)營(yíng)者、有關(guān)服務(wù)經(jīng)營(yíng)者及其工作人員對(duì)收集的消費(fèi)者個(gè)人信息或者經(jīng)營(yíng)者商業(yè)秘密的數(shù)據(jù)信息必須嚴(yán)格保密，不得泄露、出售或者非法向他人提供。網(wǎng)絡(luò)商品經(jīng)營(yíng)者、有關(guān)服務(wù)經(jīng)營(yíng)者應(yīng)當(dāng)采取技術(shù)措施和其他必要措施，確保信息安全，防止信息泄露、丟失。在發(fā)生或者可能發(fā)生信息泄露、丟失的情況時(shí)，應(yīng)當(dāng)立即采取補(bǔ)救措施。

什么是大數(shù)據(jù)

形象地說(shuō)，以去年“雙11”為例，淘寶當(dāng)日達(dá)成近兩億筆交易，總交易額達(dá)創(chuàng)紀(jì)錄的350余億元，這些交易記錄就形成了那天瘋狂網(wǎng)購(gòu)的大數(shù)據(jù)。

IBM公司在其大數(shù)據(jù)網(wǎng)站首頁(yè)上說(shuō)，最近兩年產(chǎn)生了人類社會(huì)誕生以來(lái)90%的數(shù)據(jù)量。

這些數(shù)據(jù)來(lái)自方方面面:傳感器采集的氣候信息、網(wǎng)站上的帖子、數(shù)字照片和視頻、購(gòu)物交易記錄、手機(jī)GPS信號(hào)等。盡管尚無(wú)統(tǒng)一定義，但這些無(wú)比龐大的數(shù)據(jù)被稱為“大數(shù)據(jù)”。

我們?cè)谒阉饕嬷忻恳淮嗡阉鞯挠涗?、在電子商城中每一次的商品瀏覽和購(gòu)買記錄、每一次電子支付的數(shù)據(jù)……這些看似不相干的龐雜數(shù)據(jù)，匯總在一起，經(jīng)過(guò)分析提煉，一般即可描繪出這個(gè)人的行為習(xí)慣概況，并對(duì)未來(lái)可能采取的行為作出概率相當(dāng)高的預(yù)測(cè)。

利用大數(shù)據(jù)技術(shù)，將上述眾多無(wú)頭緒的信息編織在一起，經(jīng)過(guò)分析篩查，就能夠精確地指向潛在客戶，這也是大數(shù)據(jù)被商家們寄予厚望的原因所在。