大數(shù)據(jù)發(fā)展遇瓶頸 應(yīng)用創(chuàng)新是王道

2016年5月12日-14日，第七屆中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)(DTCC 2016)在北京國(guó)際會(huì)議中心拉開帷幕。作為國(guó)內(nèi)數(shù)據(jù)庫(kù)與大數(shù)據(jù)領(lǐng)域最大規(guī)模的技術(shù)盛宴，在為期三天的會(huì)議中，大會(huì)將圍繞MySQL、NoSQL、Oracle、緩存技術(shù)、云端數(shù)據(jù)庫(kù)、智能數(shù)據(jù)平臺(tái)、大數(shù)據(jù)安全、數(shù)據(jù)治理、大數(shù)據(jù)和開源、大數(shù)據(jù)創(chuàng)業(yè)、大數(shù)據(jù)深度學(xué)習(xí)等領(lǐng)域的前瞻性熱點(diǎn)話題與技術(shù)展開深入探討，并邀請(qǐng)一大批國(guó)內(nèi)頂尖的技術(shù)專家來進(jìn)行分享，以滿足廣大從業(yè)人士和行業(yè)用戶的迫切需要。

本屆是大會(huì)創(chuàng)辦以來，規(guī)模最大，參會(huì)人次、參展合作伙伴最多的一次盛會(huì)，云集了來自五湖四海的5000余名IT精英，相聚在這里，共話數(shù)據(jù)庫(kù)技術(shù)發(fā)展潮流，共赴大數(shù)據(jù)浪潮之巔。在“大數(shù)據(jù)基礎(chǔ)設(shè)施”專場(chǎng)，人大金倉(cāng)大數(shù)據(jù)業(yè)務(wù)部總監(jiān)白蕓進(jìn)行了題為《數(shù)據(jù)之道 篤行拓新》的主題演講

作為數(shù)據(jù)庫(kù)技術(shù)大會(huì)上為數(shù)不多的女嘉賓，而且又這么高顏值，那小編先818美女嘉賓簡(jiǎn)介吧——【畢業(yè)于中國(guó)人民大學(xué)信息學(xué)院，獲得計(jì)算機(jī)及應(yīng)用專業(yè)碩士學(xué)位。 畢業(yè)后進(jìn)入北京人大金倉(cāng)信息技術(shù)股份有限公司，參與金倉(cāng)數(shù)據(jù)庫(kù)產(chǎn)品的研發(fā)，曾任咨詢服務(wù)部總監(jiān)、產(chǎn)品中心總監(jiān)，現(xiàn)任大數(shù)據(jù)業(yè)務(wù)部總監(jiān)，負(fù)責(zé)大數(shù)據(jù)系列產(chǎn)品研發(fā)，以及大數(shù)據(jù)解決方案的咨詢和實(shí)施服務(wù)。】

自主可控?cái)?shù)據(jù)管理下的大數(shù)據(jù)業(yè)務(wù)

當(dāng)前，“互聯(lián)網(wǎng)+”、大數(shù)據(jù)、云計(jì)算成了各個(gè)傳統(tǒng)行業(yè)追逐的焦點(diǎn)，在這些關(guān)鍵詞的背后，無不體現(xiàn)著“網(wǎng)絡(luò)強(qiáng)國(guó)”的宏觀戰(zhàn)略部署。隨著大數(shù)據(jù)發(fā)展上升為國(guó)家戰(zhàn)略，作為一個(gè)老牌國(guó)產(chǎn)數(shù)據(jù)庫(kù)企業(yè)，人大金倉(cāng)又是如何開展這項(xiàng)業(yè)務(wù)呢?白蕓在數(shù)據(jù)庫(kù)大會(huì)的演講中介紹了人大金倉(cāng)的大數(shù)據(jù)業(yè)務(wù)：

【解決方案】提供360度全景大數(shù)據(jù)解決方案，包括項(xiàng)目全流程支持—提供大數(shù)據(jù)規(guī)劃、實(shí)施、運(yùn)維全流程的技術(shù)支持;數(shù)據(jù)全生命周期管理—數(shù)據(jù)產(chǎn)生、獲取、處理、存儲(chǔ)、治理、分析、應(yīng)用。

【核心產(chǎn)品】提供提供全棧大數(shù)據(jù)產(chǎn)品線，結(jié)合實(shí)際業(yè)務(wù)場(chǎng)景需求，形成最合適的大數(shù)據(jù)解決方案。全方位產(chǎn)品支撐：數(shù)據(jù)采集、存儲(chǔ)管理、分析挖掘、數(shù)據(jù)利用。

產(chǎn)品包括——大數(shù)據(jù)平臺(tái)KingbaseDP;數(shù)據(jù)資源管理平臺(tái)KingbaseDRP;數(shù)據(jù)整合工具KingbaseDI;商業(yè)智能平臺(tái)KingbaseSmartBI

【實(shí)施服務(wù)】依托專業(yè)服務(wù)實(shí)施團(tuán)隊(duì)，憑借多年數(shù)據(jù)領(lǐng)域經(jīng)驗(yàn)，助理客戶大數(shù)據(jù)應(yīng)用順利上線。

人大金倉(cāng)大數(shù)據(jù)中心基礎(chǔ)架構(gòu)

先來看看傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)與大數(shù)據(jù)中心的差別，如下圖：

接著是數(shù)據(jù)倉(cāng)庫(kù)向大數(shù)據(jù)中心的演進(jìn)：集成大數(shù)據(jù)和數(shù)據(jù)倉(cāng)庫(kù)能力以增加數(shù)據(jù)資產(chǎn)價(jià)值，提高數(shù)據(jù)運(yùn)營(yíng)能力。低成本的高可靠硬件平臺(tái)，采用x86平臺(tái)可節(jié)省大量成本及后期維護(hù)費(fèi)用;集成的數(shù)據(jù)采集平臺(tái)提供對(duì)結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行批量、實(shí)時(shí)的采集處理能力，并能提供無限制的擴(kuò)展和高性能處理能力;優(yōu)化海量數(shù)據(jù)存儲(chǔ)于處理平臺(tái)基于Hadoop技術(shù)的實(shí)現(xiàn)，優(yōu)化的產(chǎn)品級(jí)海量數(shù)據(jù)存儲(chǔ)于處理平臺(tái)，實(shí)現(xiàn)對(duì)于各類大數(shù)據(jù)的低成本的存儲(chǔ)和分析，具備無限制的擴(kuò)展能力;增強(qiáng)的分析能力體系可在原來傳統(tǒng)數(shù)據(jù)分析的基礎(chǔ)上增加如文本、圖像、視頻等分析功能。

大數(shù)據(jù)中心基礎(chǔ)架構(gòu)圖

在這里，小編只是截圖了一個(gè)基礎(chǔ)架構(gòu)圖示，具體的技術(shù)架構(gòu)展示部分，可以到《DTCC2016數(shù)據(jù)庫(kù)技術(shù)大會(huì)PPT文集》中查看或下載。

數(shù)據(jù)、技術(shù)、應(yīng)用三層面分析大數(shù)據(jù)發(fā)展所遇瓶頸

在演講結(jié)束后，小編對(duì)白蕓進(jìn)行了專訪，在采訪時(shí)問到目前國(guó)內(nèi)政府大數(shù)據(jù)發(fā)展面臨的諸多瓶頸，白蕓從三個(gè)層面進(jìn)行了分析。

“政府部門的數(shù)據(jù)來源于內(nèi)部和外部?！睆臄?shù)據(jù)層面面臨的困境看，政府內(nèi)部數(shù)據(jù)其實(shí)遠(yuǎn)遠(yuǎn)不止局限各部門掌握的自身業(yè)務(wù)數(shù)據(jù)，還須清楚地認(rèn)識(shí)到不同系統(tǒng)數(shù)據(jù)的內(nèi)在關(guān)系，數(shù)據(jù)結(jié)構(gòu)是否存有冗余，數(shù)據(jù)存儲(chǔ)是否是“信息孤島”。

此外，就外部數(shù)據(jù)而言，不同的政府部門在大數(shù)據(jù)建設(shè)過程中，究竟還需要哪些外部數(shù)據(jù)?外部數(shù)據(jù)通過什么方式獲得?數(shù)據(jù)獲取過程中需建立怎樣的合理機(jī)制?在白蕓看來，以上種種疑難都是政府大數(shù)據(jù)建設(shè)過程中考量的焦點(diǎn)?！氨热纾〗ú块T根據(jù)自身數(shù)據(jù)只能了解房屋的售出率，如需分析售房屋的空置率，或許就要參閱房屋的水表、電表信息，這就需要協(xié)調(diào)水務(wù)、電力等部門的數(shù)據(jù)?！?

而在大數(shù)據(jù)的應(yīng)用方面，白蕓認(rèn)為，現(xiàn)在很多應(yīng)用場(chǎng)景并沒能逃離以往的場(chǎng)景設(shè)計(jì)?！罢嬲拇髷?shù)據(jù)應(yīng)用并不是僅僅根據(jù)現(xiàn)有數(shù)據(jù)繪制一份報(bào)表、一個(gè)曲線圖，就能稱之為大數(shù)據(jù)產(chǎn)品，這些依舊是一種傳統(tǒng)的統(tǒng)計(jì)和數(shù)據(jù)分析。”

從數(shù)據(jù)到具體應(yīng)用場(chǎng)景的實(shí)現(xiàn)過程，大數(shù)據(jù)技術(shù)的重要性自然不言而喻。而隨著具體應(yīng)用場(chǎng)景的細(xì)化和復(fù)雜度加深，數(shù)據(jù)操作方如何采集數(shù)據(jù)?如何對(duì)原始數(shù)據(jù)脫敏、加密?如何進(jìn)行數(shù)據(jù)建模?白蕓認(rèn)為，這些挑戰(zhàn)都需要在技術(shù)層面的不斷加強(qiáng)。

總結(jié)

“目前，國(guó)內(nèi)大數(shù)據(jù)行業(yè)在數(shù)據(jù)和技術(shù)方面發(fā)展程度與國(guó)外步伐相近，但與國(guó)外大數(shù)據(jù)應(yīng)用方面還存在很大差距?！卑资|在采訪中說道。

隨著國(guó)內(nèi)信息化的進(jìn)步以及系統(tǒng)替代人工進(jìn)程加快，信息化將逐步解決業(yè)務(wù)加速和職能高效的問題。在此基礎(chǔ)上，大數(shù)據(jù)應(yīng)用也將呈現(xiàn)出從無到有、再到優(yōu)化和增值的趨勢(shì)。在這個(gè)過程中，應(yīng)用方自然會(huì)探索自身業(yè)務(wù)產(chǎn)生的數(shù)據(jù)究竟有多少價(jià)值，還能創(chuàng)造多少價(jià)值。