大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)變革

數(shù)據(jù)庫市場成形于上個(gè)世紀(jì)80年代。近年來隨著云計(jì)算、大數(shù)據(jù)應(yīng)用的興起，面對(duì)爆發(fā)式增長的海量數(shù)據(jù)，傳統(tǒng)數(shù)據(jù)庫已難以應(yīng)對(duì);面對(duì)以視頻、圖片、文字等非結(jié)構(gòu)化數(shù)據(jù)為主的大數(shù)據(jù)，傳統(tǒng)商業(yè)智能系統(tǒng)和數(shù)據(jù)分析軟件缺少有效地分析工具和方法。大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)變革，國產(chǎn)數(shù)據(jù)庫迎來三十年不遇的戰(zhàn)略機(jī)遇期。

在激烈的市場競爭中，國產(chǎn)數(shù)據(jù)庫廠商逐漸壯大起來，目前已經(jīng)形成了以南大通用為首的國產(chǎn)數(shù)據(jù)庫四大品牌。在新型數(shù)據(jù)庫領(lǐng)域，國產(chǎn)技術(shù)已經(jīng)與國外品牌站在了同一起跑線上。

2013年4月，相關(guān)媒體發(fā)布《中國數(shù)據(jù)庫市場發(fā)展趨勢報(bào)告》。通過深入分析大數(shù)據(jù)對(duì)于數(shù)據(jù)庫市場的沖擊，剖析OldSQL、NewSQL和NoSQL三類數(shù)據(jù)庫技術(shù)的優(yōu)缺點(diǎn)，梳理了中國數(shù)據(jù)庫市場的發(fā)展特點(diǎn)、發(fā)展趨勢，發(fā)展機(jī)遇、市場競爭環(huán)境等，從而為國產(chǎn)數(shù)據(jù)庫廠商應(yīng)對(duì)大數(shù)據(jù)時(shí)代的戰(zhàn)略發(fā)展規(guī)劃提供了重要的參考和建議。

一、大數(shù)據(jù)時(shí)代企業(yè)級(jí)數(shù)據(jù)處理需求

大數(shù)據(jù)可以分為行業(yè)大數(shù)據(jù)和互聯(lián)網(wǎng)大數(shù)據(jù)兩個(gè)類型，其中行業(yè)大數(shù)據(jù)又可分為四類：經(jīng)營類、管理類、監(jiān)管類和專業(yè)類。從占比上看，目前我們所說的大數(shù)據(jù)，有80%是來源于互聯(lián)網(wǎng)大數(shù)據(jù);從體量上看，行業(yè)大數(shù)據(jù)的體量與互聯(lián)網(wǎng)大數(shù)據(jù)的體量相當(dāng)，兩者基本位于同一數(shù)量級(jí)上;從價(jià)值上看，行業(yè)大數(shù)據(jù)的價(jià)值密度高于互聯(lián)網(wǎng)數(shù)據(jù)。

在未來3到5年，行業(yè)應(yīng)用數(shù)據(jù)分析將成為大數(shù)據(jù)應(yīng)用主戰(zhàn)場。真正能夠利用好大數(shù)據(jù)、并將其價(jià)值轉(zhuǎn)化成生產(chǎn)力的企業(yè)必將具備強(qiáng)勁有力的競爭優(yōu)勢，從而成為行業(yè)的領(lǐng)導(dǎo)者。目前來看，政府、金融、電信、零售等將是最先使用大數(shù)據(jù)工具的行業(yè)。

表 1 大數(shù)據(jù)時(shí)代企業(yè)級(jí)數(shù)據(jù)處理需求

項(xiàng)目 業(yè)務(wù)特征 應(yīng)用趨勢

政府 公安 公安機(jī)關(guān)部門、警種繁多，造就了數(shù)據(jù)的海量化和類型的多樣化。 利用對(duì)大數(shù)據(jù)的分析、挖掘，實(shí)現(xiàn)對(duì)人像，指紋比對(duì)，卡口等數(shù)據(jù)融合處理，從而為領(lǐng)導(dǎo)指揮決策，各情報(bào)分析提供支撐。

信息

安全 宏觀上的網(wǎng)絡(luò)安全態(tài)勢感知和微觀上的發(fā)現(xiàn)安全威脅，需要對(duì)海量日志信息進(jìn)行定期的關(guān)系分析。 通過自動(dòng)化分析處理與深度挖掘，將之前很多時(shí)候亡羊補(bǔ)牢式的事中、事后處理，轉(zhuǎn)向事前自動(dòng)評(píng)估預(yù)測、應(yīng)急處理，讓安全防護(hù)主動(dòng)起來。

氣象 數(shù)據(jù)包括溫度和氣壓讀數(shù)、風(fēng)速、圖像以及來自衛(wèi)星、氣球、船只和飛機(jī)的觀測結(jié)果，而這些數(shù)據(jù)將以每天TB級(jí)的量級(jí)增長。 通過合理的梳理數(shù)據(jù)流，可提供更有價(jià)值、更加及時(shí)的氣象信息，同時(shí)更好、更精確和更具預(yù)測性地進(jìn)行環(huán)境預(yù)測。

交通

管理 系統(tǒng)性，數(shù)據(jù)量大;復(fù)雜性，涉及多方面數(shù)據(jù);動(dòng)態(tài)性，信息實(shí)時(shí)處理要求高。 對(duì)各種交通數(shù)據(jù)進(jìn)行大量采集和系統(tǒng)分析，實(shí)現(xiàn)對(duì)道路和交通狀況的全天候和全天時(shí)感知。

稅務(wù) 稅收信息包含種類繁多，人員涉及廣泛。 通過稅收數(shù)據(jù)的集中處理，真實(shí)、實(shí)時(shí)、全面地掌握稅收工作各項(xiàng)數(shù)據(jù)和整體情況。

社保

管理 社?！耙豢ㄍā睂a(chǎn)生的海量數(shù)據(jù)信息，并且呈現(xiàn)出幾何式增長態(tài)勢。 對(duì)于海量信息進(jìn)行合理分類、科學(xué)分析、有效預(yù)測。

電信行業(yè) 數(shù)據(jù)量激增，保存時(shí)間長;受眾群體大，市場飽和度高。 數(shù)據(jù)流量暴增，向智能化管道轉(zhuǎn)型;規(guī)避同質(zhì)化競爭，尋找差異化經(jīng)營“藍(lán)海”。

金融行業(yè) 設(shè)備先進(jìn)，功能齊全;自動(dòng)化程度高，安全保密性強(qiáng)。 金融智能決策、金融服務(wù)創(chuàng)新。

零售行業(yè) 零售行業(yè)需要及時(shí)響應(yīng)客戶需求，實(shí)現(xiàn)精準(zhǔn)營銷。 個(gè)性化精準(zhǔn)營銷要求零售企業(yè)對(duì)消費(fèi)者消費(fèi)行為、天氣等進(jìn)行大數(shù)據(jù)分析，結(jié)合客戶的購物習(xí)慣，提供一致的個(gè)性化購物體驗(yàn)，以提高客戶忠誠度。

二、大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)技術(shù)變革

大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)架構(gòu)創(chuàng)新。美國著名數(shù)據(jù)庫科學(xué)家邁克爾?斯通布雷克(Michael Stonebraker)指出，行業(yè)技術(shù)的發(fā)展趨勢是由一種架構(gòu)支持所有應(yīng)用轉(zhuǎn)變?yōu)橛枚喾N架構(gòu)支持多類應(yīng)用。在大數(shù)據(jù)和云計(jì)算的背景下，這一理論導(dǎo)致了數(shù)據(jù)庫市場的大裂變：數(shù)據(jù)庫市場分化為三大陣營，包括OldSQL(傳統(tǒng)數(shù)據(jù)庫)、NewSQL(新型數(shù)據(jù)庫)和NoSQL(非關(guān)系型數(shù)據(jù)庫)。為了提升性能，NewSQL陣營普遍采用了列存儲(chǔ)技術(shù);NoSQL陣營普遍采用了KV技術(shù)。三個(gè)陣營都不同程度地采用了分布式計(jì)算、分布式文件系統(tǒng)、內(nèi)存計(jì)算技術(shù)，并積極地使用新的硬件技術(shù)，如大內(nèi)存、Flash、SSD和高速網(wǎng)絡(luò)連接(萬兆交換機(jī)和Infiniband)等。

三者在數(shù)據(jù)管理能力、數(shù)據(jù)的價(jià)值密度以數(shù)據(jù)處理的實(shí)時(shí)性等方面各有所長，從而勢必造成在未來的數(shù)據(jù)庫軟件市場上出現(xiàn)結(jié)構(gòu)混搭、多種技術(shù)并存，并且和諧相處的局面。然而，由于受數(shù)據(jù)管理能力所限，伴隨數(shù)據(jù)量逐年增加，OldSQL生命活力受到極大影響，未來將呈現(xiàn)不斷弱化的趨勢;在NoSQL領(lǐng)域，雖然其在數(shù)據(jù)管理能力方面具備先天優(yōu)勢，但是因?yàn)镹oSQL處理的大多為互聯(lián)網(wǎng)數(shù)據(jù)，其價(jià)值密度較低，因此其市場活力呈現(xiàn)較為穩(wěn)定的態(tài)勢;在NewSQL領(lǐng)域，其數(shù)據(jù)管理能力高于OldSQL，又面向數(shù)據(jù)價(jià)值密度較高的行業(yè)大數(shù)據(jù)，促使其具備較高的市場活力，雖然其進(jìn)入市場時(shí)間較晚，但是未來其市場活力必將超越OldSQL、NoSQL，成為在數(shù)據(jù)處理技術(shù)領(lǐng)域新的“王者”。

面對(duì)大數(shù)據(jù)，傳統(tǒng)的行式存儲(chǔ)數(shù)據(jù)庫已經(jīng)盡顯頹態(tài)，數(shù)據(jù)庫軟件巨頭也通過加強(qiáng)研發(fā)、收購等方式加強(qiáng)自己在大數(shù)據(jù)領(lǐng)域的影響力，紛紛推出自己的面向大數(shù)據(jù)庫的新型數(shù)據(jù)庫解決方案。而在新型數(shù)據(jù)庫中，以列式存儲(chǔ)為主的數(shù)據(jù)庫如Sybase IQ，GBase 8a，Vertica等表現(xiàn)優(yōu)異，成為NewSQL的典型代表。

三、應(yīng)對(duì)大數(shù)據(jù)，國產(chǎn)數(shù)據(jù)庫迎來新機(jī)遇

由于國家信息化建設(shè)的需求，電子政務(wù)正處于深化應(yīng)用階段，對(duì)數(shù)據(jù)的開發(fā)利用將成為新的方向，這樣就給國產(chǎn)數(shù)據(jù)庫發(fā)展帶來非常好的市場機(jī)會(huì)。特別是由于政府、能源等關(guān)鍵行業(yè)比較注重信息安全保障，因此國產(chǎn)數(shù)據(jù)庫軟件獲得政府青睞。

經(jīng)過十多年的刻苦發(fā)展，國產(chǎn)數(shù)據(jù)庫在技術(shù)研發(fā)方面取得了長足進(jìn)步，產(chǎn)品日趨成熟。與國外數(shù)據(jù)庫軟件相比，國產(chǎn)數(shù)據(jù)庫企業(yè)借助安全、本土化優(yōu)勢已在政府和行業(yè)領(lǐng)域擊敗國外競爭對(duì)手。作為國產(chǎn)數(shù)據(jù)庫代表，南大通用以新型數(shù)據(jù)庫研發(fā)作為其戰(zhàn)略核心，成為第一家支持列式存儲(chǔ)和MPP架構(gòu)的國產(chǎn)數(shù)據(jù)庫廠商。其GBASE系列數(shù)據(jù)庫已經(jīng)成功應(yīng)用到電信、金融、政務(wù)等多個(gè)行業(yè)和領(lǐng)域。在新型數(shù)據(jù)庫領(lǐng)域已經(jīng)具備與世界主流廠商在大數(shù)據(jù)分析類應(yīng)用中直接競爭的能力，躍升成為國內(nèi)新型數(shù)據(jù)庫領(lǐng)域的前三強(qiáng)廠商。

大數(shù)據(jù)給國產(chǎn)數(shù)據(jù)庫廠商帶來了“天時(shí)、地利、人和”三者同時(shí)齊備的三十年不遇的戰(zhàn)略機(jī)遇期。國內(nèi)數(shù)據(jù)庫廠商應(yīng)當(dāng)充分認(rèn)識(shí)到未來三年，將是決定國產(chǎn)數(shù)據(jù)庫在大數(shù)據(jù)領(lǐng)域成敗的關(guān)鍵時(shí)期。如果國內(nèi)企業(yè)能抓住這一機(jī)遇，在技術(shù)、商業(yè)模式上主動(dòng)突破，形成自己的優(yōu)勢，在某些行業(yè)率先開辟出應(yīng)用示范案例，那么在大數(shù)據(jù)時(shí)代，國產(chǎn)數(shù)據(jù)庫廠商就能有效應(yīng)對(duì)國際大廠商的強(qiáng)勢壓力和競爭，在市場上取得突破性的發(fā)展。