2016年大數(shù)據(jù)將走下神壇擁抱生活 資本青睞創(chuàng)業(yè)機(jī)會多

2016年，大數(shù)據(jù)在國防、氣候、保險(xiǎn)、醫(yī)療、農(nóng)業(yè)、制造業(yè)、城市建設(shè)、公共服務(wù)等領(lǐng)域都將有著實(shí)質(zhì)性的落地應(yīng)用。大數(shù)據(jù)將走下神壇，擁抱我們的生活，直接影響著我們?nèi)粘Ｉ钫盏囊率匙⌒泻筒衩子望}醬醋茶。大數(shù)據(jù)行業(yè)會發(fā)展得越來越健全，讓我們的生活更加智能化和更加美好。

文|劉金玲（36大數(shù)據(jù)創(chuàng)始人 ）歡迎轉(zhuǎn)載，但請標(biāo)明作者和來源。

每逢跨年，“年度總結(jié)”和“新的一年預(yù)測”文章都是最熱門的PR之一。36大數(shù)據(jù)近期也刊登了眾多來自大數(shù)據(jù)行業(yè)的年度總結(jié)以及2016年行業(yè)預(yù)測文章，有來自國內(nèi)專家學(xué)者的，也有來自行業(yè)從業(yè)人員的，還有來自各個(gè)咨詢機(jī)構(gòu)的等等。到底誰的總結(jié)比較到位，誰的預(yù)測又較為精準(zhǔn)，其實(shí)沒有統(tǒng)一的標(biāo)準(zhǔn)。關(guān)鍵在于，作為從業(yè)人員、作為讀者的你，你更傾向于選擇相信誰?！皺M看成嶺側(cè)成峰，遠(yuǎn)近高低各不同?！庇捎诹龅牟煌?，角度的不同，大家的看法肯定也不同。不過沒關(guān)系，大數(shù)據(jù)本身就具有“包容”的特質(zhì)，整體的數(shù)據(jù)、全量的數(shù)據(jù)才能更好的詮釋問題，相信觀點(diǎn)和看法也一樣。

所以，今天，我想站在一個(gè)媒體人客觀中立角度，來說說我對2016年大數(shù)據(jù)行業(yè)的預(yù)測和洞察。也許觀點(diǎn)和言詞偶有偏頗，但仍然感謝大家來看我的文章。鞠躬ing。

預(yù)測一：數(shù)據(jù)獲取更加困難

數(shù)據(jù)和知識產(chǎn)權(quán)是息息相關(guān)的。在2015年間，我們看到了很多通過爬取公共數(shù)據(jù)來獲得盈利的新創(chuàng)企業(yè)。比如說爬取社交媒體數(shù)據(jù)做輿情分析的，爬取網(wǎng)站數(shù)據(jù)來做分析報(bào)告的等等。其實(shí)這其中就存在“授權(quán)”的問題。一如36大數(shù)據(jù)的網(wǎng)站數(shù)據(jù)，全天候24小時(shí)被多家同業(yè)媒體及科技新聞媒體在爬取，部分有過授權(quán)，但是更多的是惡意爬取，通過攻擊服務(wù)器來進(jìn)行爬取等等。相信很多站長對惡意數(shù)據(jù)爬取都深痛惡覺，所以，我們相信，也大膽的預(yù)測，在2016年，防止網(wǎng)站數(shù)據(jù)爬取將變成一種生意。我們也期望未來在網(wǎng)站安全防數(shù)據(jù)爬取等方面，有更多的科技創(chuàng)新產(chǎn)品。

說到防網(wǎng)站數(shù)據(jù)爬取將變成一種生意，也從側(cè)面說明我們的另外一個(gè)預(yù)測，那就網(wǎng)站更加注重安全性，且更多的網(wǎng)站會使用https協(xié)議。2015年3月21日，百度全站使用了https。2015年4月，據(jù)Builtwith調(diào)查數(shù)據(jù)顯示，在排名TOP 10000的網(wǎng)站中，只有4.2%的站點(diǎn)默認(rèn)使用HTTPS加密訪問模式。再將范圍放大到TOP 100萬個(gè)網(wǎng)站，這個(gè)百分比則降到了1.9%。目前，包括谷歌、百度和搜狗等在內(nèi)的搜索引擎都對HTTPS協(xié)議網(wǎng)站出臺了相關(guān)的“優(yōu)待”策略，這個(gè)百分比未來應(yīng)該會有所上升。

2016年，越來越多的網(wǎng)站會使用https協(xié)議，那么除了爬蟲，網(wǎng)絡(luò)上的數(shù)據(jù)還能夠從哪里獲得呢？API接口。目前，據(jù)36大數(shù)據(jù)所知，高德地圖、新浪微博、淘寶、騰訊云分析等多家網(wǎng)站，都開放了數(shù)據(jù)API接口。這會成為未來大數(shù)據(jù)行業(yè)的一個(gè)重要趨勢，基于知識產(chǎn)權(quán)的商業(yè)數(shù)據(jù)源API將取代爬蟲，成為傳統(tǒng)企業(yè)獲取網(wǎng)絡(luò)數(shù)據(jù)的重要渠道。

翻尋過往關(guān)于“數(shù)據(jù)爬取”的官司，最著名的莫過于2013年百度就“違反Robots協(xié)議”向360巨額索賠的案件。該案件已于2014年8月在北京市第一中級人民法院進(jìn)行一審宣判。法院審理判決360不正當(dāng)競爭行為成立，賠償百度經(jīng)濟(jì)損失共計(jì)70萬元。在大數(shù)據(jù)時(shí)代，數(shù)據(jù)就是資產(chǎn)，是生產(chǎn)力也是洞察力。我們預(yù)測在2016年，關(guān)于數(shù)據(jù)爬取、授權(quán)、數(shù)據(jù)安全方面，將會出現(xiàn)越來越多關(guān)于“數(shù)據(jù)知識產(chǎn)權(quán)”糾紛的案子。

小結(jié)一下第一部分的觀點(diǎn)：

①數(shù)據(jù)爬取更加困難，防網(wǎng)站數(shù)據(jù)爬取將變成一種生意；
②網(wǎng)站更注重安全性，更多網(wǎng)站使用https協(xié)議
③數(shù)據(jù)API或?qū)⑷〈老x
④欲將出現(xiàn)更多關(guān)于“數(shù)據(jù)知識產(chǎn)權(quán)”糾紛的案子。

預(yù)測二：數(shù)據(jù)分析基礎(chǔ)人才缺口更大，2016年下半年將會迎來第一批高等院校的數(shù)據(jù)專業(yè)實(shí)習(xí)生

在36大數(shù)據(jù)出品過的文章里，我們曾多次寫到人才。根據(jù)中國商業(yè)聯(lián)合會數(shù)據(jù)分析專業(yè)委員會統(tǒng)計(jì)，未來中國基礎(chǔ)性數(shù)據(jù)分析人才缺口將達(dá)到1400萬，而在BAT企業(yè)招聘的職位里，60%以上都在招大數(shù)據(jù)人才。

放眼全球，根據(jù)WANTED Analytics和福布數(shù)據(jù)分析斯雜志剛剛公布的2015年數(shù)據(jù)來看，易安信、IBM、思科、甲骨文在2015年招聘的“大數(shù)據(jù)”人才最多。就崗位數(shù)量而言，需要“大數(shù)據(jù)”技能的崗位空缺呈現(xiàn)高速增長，其中“大數(shù)據(jù)”解決方案的銷售人員、計(jì)算機(jī)系統(tǒng)分析師、管理分析師、IT項(xiàng)目經(jīng)理、和信息安全分析師崗位的增幅都在100%以上。這一增長趨勢也將延續(xù)至2016年。

不過，值得慶幸的是，在2016年下半年，中國大數(shù)據(jù)人才市場將迎來第一批高等院校的數(shù)據(jù)專業(yè)實(shí)習(xí)生。其中幾個(gè)值得關(guān)注的院校為中國航空航天大學(xué)、北京大學(xué)、中國人民大學(xué)、中國科學(xué)院大學(xué)等。

2013年3月4日，中國航空航天大學(xué)軟件學(xué)院設(shè)立大數(shù)據(jù)專業(yè)。隨后，

北京大學(xué)、中國人民大學(xué) 、中國科學(xué)院大學(xué)、首都對外經(jīng)濟(jì)貿(mào)易大學(xué)以及中央財(cái)經(jīng)大學(xué)五校合辦了大數(shù)據(jù)分析方向的應(yīng)用統(tǒng)計(jì)專碩，2014年是第一屆學(xué)生。

到2016年下半年，預(yù)計(jì)第一批高等院校的大數(shù)據(jù)專業(yè)人才將會進(jìn)入相關(guān)大數(shù)據(jù)企業(yè)實(shí)習(xí)。大數(shù)據(jù)人才萬金難求，如何搶到這一批大數(shù)據(jù)人才，將會寫進(jìn)大數(shù)據(jù)企業(yè)HR2016年的工作計(jì)劃中。

預(yù)測三：資本更加青睞大數(shù)據(jù)

“2015年，大數(shù)據(jù)產(chǎn)業(yè)在國家和資本的推動下進(jìn)入了全面爆發(fā)，2015年宣稱自己是大數(shù)據(jù)企業(yè)的大概有將近400家，其中典型的大數(shù)據(jù)企業(yè)有200多家。拿到融資的大概有五十多家，整體融資額超過50億元，其中拿到億元融資以上的企業(yè)有17家，最高融資額為7以人民幣，估值超過三十億元人民幣的有十家以上，初創(chuàng)一年之內(nèi)的大數(shù)據(jù)企業(yè)的起始估值大概在10億元人民幣左右。撥開泡沫，我們也看到了大數(shù)據(jù)企業(yè)發(fā)展理智的一面，大多數(shù)大數(shù)據(jù)企業(yè)都獲得了資本市場都青睞。資本的眼光是毒辣的，沒有商業(yè)價(jià)值的企業(yè)，資本是不會主動投資的。2015年，50%以上大數(shù)據(jù)企業(yè)的業(yè)績增長超過了幾倍以上，人員增長超過了50%?！?/span>

以上內(nèi)容引自鮑忠鐵發(fā)表在36大數(shù)據(jù)的《2016大數(shù)據(jù)產(chǎn)業(yè)從數(shù)據(jù)思維和場景應(yīng)用開始》一文。

拋開融資額和融資成功的企業(yè)來看，但從36大數(shù)據(jù)接觸的投資人來看，2013年投資人是好奇大數(shù)據(jù)，2014年有部分資本開始試著投資大數(shù)據(jù)，而在2015年間，資本已經(jīng)行動起來并且成功投資了多家大數(shù)據(jù)企業(yè)，且投資的金額和量級都是上億人民幣的。資本的眼光的毒辣的，我們相信，資本對大數(shù)據(jù)的熱情不會減淡，到2016年，這一現(xiàn)象還會更加加劇。對此，36大數(shù)據(jù)也做了一個(gè)重要的決定，我們將從2016年3月，每月6日舉辦一個(gè)新創(chuàng)項(xiàng)目與資本的對接沙龍，盡請期待。

預(yù)測四：數(shù)據(jù)安全、數(shù)據(jù)交易等相關(guān)法規(guī)會逐漸出臺

這一點(diǎn)怎么講呢？大家可以參考2015年修訂的廣告法。為什么不是先有健全的法規(guī)政策，才有數(shù)據(jù)交易、數(shù)據(jù)隱私、數(shù)據(jù)安全等問題呢？法規(guī)也是在行業(yè)不斷的成長和發(fā)展中建立起來的，只有這個(gè)行業(yè)不斷的發(fā)展，才會有健全的法律法規(guī)。一如網(wǎng)絡(luò)游戲一樣，網(wǎng)絡(luò)游戲在中國發(fā)展近10年之久，到2007年4月15日，國家才出臺了針對未成年人的“防沉迷系統(tǒng)”。國家對大數(shù)據(jù)的重視程度遠(yuǎn)遠(yuǎn)超于網(wǎng)絡(luò)游戲。我們相信，在2016年，中國關(guān)于大數(shù)據(jù)方面的法律法規(guī)會逐漸出臺，并且下達(dá)到各個(gè)單位。關(guān)于數(shù)據(jù)知識產(chǎn)權(quán)的保護(hù)只會越來越多。

預(yù)測五：新創(chuàng)企業(yè)會越來越多

其實(shí)這都不算是一個(gè)預(yù)測。未來所有的企業(yè)都是大數(shù)據(jù)企業(yè)，所有的企業(yè)都會重視大數(shù)據(jù)。而新創(chuàng)的大數(shù)據(jù)項(xiàng)目將更加注重與生活、人文和文化的結(jié)合。未來在所有企業(yè)里，大數(shù)據(jù)都是基礎(chǔ)設(shè)施，大數(shù)據(jù)的應(yīng)用場景將和商業(yè)模式融合在一起。大數(shù)據(jù)創(chuàng)業(yè)的處女田仍然很多，別說藍(lán)海，紅海都還沒到，創(chuàng)業(yè)機(jī)會遍地都是。那大數(shù)據(jù)創(chuàng)業(yè)將從什么地方開始呢？我們認(rèn)為是從消費(fèi)者需求和解決問題開始。

預(yù)測六：新三板的熱度將會降低 預(yù)計(jì)會有新創(chuàng)大數(shù)據(jù)企業(yè)在深圳創(chuàng)業(yè)板上市

截止到目前，在中國新三板掛的企業(yè)已逾5000家；新三板真的好嗎？對于獨(dú)角獸類型的大數(shù)據(jù)企業(yè)來說，新三板滿足得了他們的胃口嗎？這是仁者見仁智者見智的問題。放眼全球，目前在納斯達(dá)克成功上市的大數(shù)據(jù)企業(yè)里，除了IBM、HP等老牌企業(yè)外，新創(chuàng)大數(shù)據(jù)企業(yè)也只有Hortonworks和Splunk兩家。我們期望2016年在中國，會有新創(chuàng)的大數(shù)據(jù)企業(yè)在創(chuàng)業(yè)板上市。

預(yù)測七：數(shù)據(jù)可視化將成為傳播的主要素材

這一條很好理解。微博時(shí)代，數(shù)據(jù)信息圖成為了熱門的傳播素材。在未來，基于報(bào)刊、雜志、電影、電視、網(wǎng)絡(luò)信息等載體，數(shù)據(jù)可視化將會應(yīng)用得更加廣泛。數(shù)據(jù)的客觀性無可取代。第一財(cái)經(jīng)、搜狐新聞、網(wǎng)易新聞、鳳凰網(wǎng)新聞都開通了“數(shù)據(jù)圖說”等頻道。預(yù)計(jì)2016年，這一熱潮將會延續(xù)到更多的領(lǐng)域應(yīng)用。未來的媒體平臺，除了文字、視頻編輯之外，數(shù)據(jù)編輯、數(shù)據(jù)可視化設(shè)計(jì)師也是熱門職位。

預(yù)測八：更多的開源大數(shù)據(jù)工具 Spark使用率會超過Hadoop

2009年6月，Yahoo公布了Hadoop的源代碼，由此，開創(chuàng)了一個(gè)新的時(shí)代，一個(gè)技術(shù)與數(shù)據(jù)的狂歡時(shí)代，一個(gè)被稱之為“大數(shù)據(jù)時(shí)代”的時(shí)代。要問什么是促進(jìn)大數(shù)據(jù)健康穩(wěn)步向前發(fā)展的必要因素？“開源”和“技術(shù)”必不可少。技術(shù)的開源直接意味著行業(yè)門檻的降低，同時(shí)也推動著技術(shù)不斷的邁向成熟。今天我們再回過頭來看前幾年Big Data Landscape圖就會發(fā)現(xiàn)，大數(shù)據(jù)整條產(chǎn)業(yè)鏈上的玩家們，都是大數(shù)據(jù)開源技術(shù)的獲利者。2015年下半年，微軟、雅虎、IBM、亞馬遜、阿里巴巴、百度都紛紛開源了旗下大數(shù)據(jù)、機(jī)器學(xué)習(xí)、數(shù)據(jù)庫等技術(shù)，我們相信在2016年，更多的企業(yè)會把成熟的大數(shù)據(jù)工具和技術(shù)實(shí)現(xiàn)開源，共同促進(jìn)這個(gè)行業(yè)的發(fā)展。

同時(shí)，盡管有開源的強(qiáng)大支持，但是大數(shù)據(jù)技術(shù)仍然存在很高的門檻。在中國這樣的市場上，目前迫切需要的是一款“門檻較低、傻瓜式”的大數(shù)據(jù)處理工具，一個(gè)如同Word、Excel這樣辦公室office人員就能使用的工具。

另外，據(jù)Apache軟件基金會調(diào)查顯示：目前，已經(jīng)有超過500個(gè)組織在生產(chǎn)中使用Spark，其中包括亞馬遜，eBay，美國航空航天局，雅虎，IBM和許多其他公司。我們不覺得未來Spark會取代Hadoop，但是我們認(rèn)為，Spark使用率會超過Hadoop。

預(yù)測九：政府將會開放更多的數(shù)據(jù)

政府?dāng)?shù)據(jù)源一直都是大數(shù)據(jù)公司最想要的數(shù)據(jù)。因有棱鏡門的前車之鑒，政府?dāng)?shù)據(jù)是不會一下子全部開放的，只能說是一部分一部分的開放。目前我們已知的是，上海作為表率，已于2015年6月開放了政府?dāng)?shù)據(jù)，大家可以到http://www.datashanghai.gov.cn/home!toHomePage.action 查看到上海市經(jīng)濟(jì)建設(shè)、資源環(huán)境、衛(wèi)生健康、民生服務(wù)等數(shù)據(jù)。相信在2016年，更多的城市也將逐步開放政府?dāng)?shù)據(jù)。

預(yù)測十：大數(shù)據(jù)推動全民“征信”時(shí)代來臨

說到“征信”，想先和朋友們說一個(gè)我生活中的小事情。昨天晚上我和我的閨蜜們聊天，她們和我說起了京東白條和支付寶“借唄”，還說到了信用卡還款等事情。我的閨蜜因?yàn)閷〇|白條的額度不滿向我抱怨了幾句。我勸她謹(jǐn)慎的使用互聯(lián)網(wǎng)金融產(chǎn)品和信用卡，因?yàn)檫@些數(shù)據(jù)，以后都會影響著她一生的“信用”，和她生活中買房、買車等需要貸款的地方息息相關(guān)。

2015年7月，在鳳凰財(cái)經(jīng)金融工作室攜手中國領(lǐng)先個(gè)人金融門戶網(wǎng)站我愛卡發(fā)布《2015中國信用卡行業(yè)報(bào)告》中，根據(jù)國內(nèi)4家國有銀行、11家股份制銀行和2家城市商業(yè)銀行的官方2014年業(yè)務(wù)數(shù)據(jù)顯示：截止2014年底，全國累計(jì)發(fā)行信用卡4.55億張。全國人均持有信用卡0.34張，較上年末增長17.24%。

征信是依托大數(shù)據(jù)來做授信的。在大數(shù)據(jù)強(qiáng)有力的支撐下，信用卡、互聯(lián)網(wǎng)信用產(chǎn)品都會得到普及，預(yù)計(jì)在2016年，中國信用卡發(fā)行數(shù)量將達(dá)到7.8億張，我們所有人的生活都將和大數(shù)據(jù)直接掛鉤，全民征信時(shí)代來臨。

除此之外，2016年，大數(shù)據(jù)在國防、氣候、保險(xiǎn)、醫(yī)療、農(nóng)業(yè)、制造業(yè)、城市建設(shè)、公共服務(wù)等領(lǐng)域都將有著實(shí)質(zhì)性的落地應(yīng)用。大數(shù)據(jù)將走下神壇，擁抱我們的生活，直接影響著我們?nèi)粘Ｉ钫盏囊率匙⌒泻筒衩子望}醬醋茶。大數(shù)據(jù)行業(yè)會發(fā)展得越來越健全，讓我們的生活更加智能化和更加美好。