大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)變革

數(shù)據(jù)庫市場成形于上個世紀80年代。近年來隨著云計算、大數(shù)據(jù)應(yīng)用的興起，面對爆發(fā)式增長的海量數(shù)據(jù)，傳統(tǒng)數(shù)據(jù)庫已難以應(yīng)對;面對以視頻、圖片、文字等非結(jié)構(gòu)化數(shù)據(jù)為主的大數(shù)據(jù)，傳統(tǒng)商業(yè)智能系統(tǒng)和數(shù)據(jù)分析軟件缺少有效地分析工具和方法。大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)變革，國產(chǎn)數(shù)據(jù)庫迎來三十年不遇的戰(zhàn)略機遇期。

在激烈的市場競爭中，國產(chǎn)數(shù)據(jù)庫廠商逐漸壯大起來，目前已經(jīng)形成了以南大通用為首的國產(chǎn)數(shù)據(jù)庫四大品牌。在新型數(shù)據(jù)庫領(lǐng)域，國產(chǎn)技術(shù)已經(jīng)與國外品牌站在了同一起跑線上。

2013年4月，相關(guān)媒體發(fā)布《中國數(shù)據(jù)庫市場發(fā)展趨勢報告》。通過深入分析大數(shù)據(jù)對于數(shù)據(jù)庫市場的沖擊，剖析OldSQL、NewSQL和NoSQL三類數(shù)據(jù)庫技術(shù)的優(yōu)缺點，梳理了中國數(shù)據(jù)庫市場的發(fā)展特點、發(fā)展趨勢，發(fā)展機遇、市場競爭環(huán)境等，從而為國產(chǎn)數(shù)據(jù)庫廠商應(yīng)對大數(shù)據(jù)時代的戰(zhàn)略發(fā)展規(guī)劃提供了重要的參考和建議。

一、大數(shù)據(jù)時代企業(yè)級數(shù)據(jù)處理需求

大數(shù)據(jù)可以分為行業(yè)大數(shù)據(jù)和互聯(lián)網(wǎng)大數(shù)據(jù)兩個類型，其中行業(yè)大數(shù)據(jù)又可分為四類：經(jīng)營類、管理類、監(jiān)管類和專業(yè)類。從占比上看，目前我們所說的大數(shù)據(jù)，有80%是來源于互聯(lián)網(wǎng)大數(shù)據(jù);從體量上看，行業(yè)大數(shù)據(jù)的體量與互聯(lián)網(wǎng)大數(shù)據(jù)的體量相當，兩者基本位于同一數(shù)量級上;從價值上看，行業(yè)大數(shù)據(jù)的價值密度高于互聯(lián)網(wǎng)數(shù)據(jù)。

在未來3到5年，行業(yè)應(yīng)用數(shù)據(jù)分析將成為大數(shù)據(jù)應(yīng)用主戰(zhàn)場。真正能夠利用好大數(shù)據(jù)、并將其價值轉(zhuǎn)化成生產(chǎn)力的企業(yè)必將具備強勁有力的競爭優(yōu)勢，從而成為行業(yè)的領(lǐng)導(dǎo)者。目前來看，政府、金融、電信、零售等將是最先使用大數(shù)據(jù)工具的行業(yè)。

表 1 大數(shù)據(jù)時代企業(yè)級數(shù)據(jù)處理需求

項目 業(yè)務(wù)特征 應(yīng)用趨勢

政府 公安 公安機關(guān)部門、警種繁多，造就了數(shù)據(jù)的海量化和類型的多樣化。 利用對大數(shù)據(jù)的分析、挖掘，實現(xiàn)對人像，指紋比對，卡口等數(shù)據(jù)融合處理，從而為領(lǐng)導(dǎo)指揮決策，各情報分析提供支撐。

信息

安全 宏觀上的網(wǎng)絡(luò)安全態(tài)勢感知和微觀上的發(fā)現(xiàn)安全威脅，需要對海量日志信息進行定期的關(guān)系分析。 通過自動化分析處理與深度挖掘，將之前很多時候亡羊補牢式的事中、事后處理，轉(zhuǎn)向事前自動評估預(yù)測、應(yīng)急處理，讓安全防護主動起來。

氣象 數(shù)據(jù)包括溫度和氣壓讀數(shù)、風速、圖像以及來自衛(wèi)星、氣球、船只和飛機的觀測結(jié)果，而這些數(shù)據(jù)將以每天TB級的量級增長。 通過合理的梳理數(shù)據(jù)流，可提供更有價值、更加及時的氣象信息，同時更好、更精確和更具預(yù)測性地進行環(huán)境預(yù)測。

交通

管理 系統(tǒng)性，數(shù)據(jù)量大;復(fù)雜性，涉及多方面數(shù)據(jù);動態(tài)性，信息實時處理要求高。 對各種交通數(shù)據(jù)進行大量采集和系統(tǒng)分析，實現(xiàn)對道路和交通狀況的全天候和全天時感知。

稅務(wù) 稅收信息包含種類繁多，人員涉及廣泛。 通過稅收數(shù)據(jù)的集中處理，真實、實時、全面地掌握稅收工作各項數(shù)據(jù)和整體情況。

社保

管理 社保“一卡通”將產(chǎn)生的海量數(shù)據(jù)信息，并且呈現(xiàn)出幾何式增長態(tài)勢。 對于海量信息進行合理分類、科學(xué)分析、有效預(yù)測。

電信行業(yè) 數(shù)據(jù)量激增，保存時間長;受眾群體大，市場飽和度高。 數(shù)據(jù)流量暴增，向智能化管道轉(zhuǎn)型;規(guī)避同質(zhì)化競爭，尋找差異化經(jīng)營“藍?！?。

金融行業(yè) 設(shè)備先進，功能齊全;自動化程度高，安全保密性強。 金融智能決策、金融服務(wù)創(chuàng)新。

零售行業(yè) 零售行業(yè)需要及時響應(yīng)客戶需求，實現(xiàn)精準營銷。 個性化精準營銷要求零售企業(yè)對消費者消費行為、天氣等進行大數(shù)據(jù)分析，結(jié)合客戶的購物習慣，提供一致的個性化購物體驗，以提高客戶忠誠度。

二、大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)技術(shù)變革

大數(shù)據(jù)引發(fā)數(shù)據(jù)庫行業(yè)架構(gòu)創(chuàng)新。美國著名數(shù)據(jù)庫科學(xué)家邁克爾?斯通布雷克(Michael Stonebraker)指出，行業(yè)技術(shù)的發(fā)展趨勢是由一種架構(gòu)支持所有應(yīng)用轉(zhuǎn)變?yōu)橛枚喾N架構(gòu)支持多類應(yīng)用。在大數(shù)據(jù)和云計算的背景下，這一理論導(dǎo)致了數(shù)據(jù)庫市場的大裂變：數(shù)據(jù)庫市場分化為三大陣營，包括OldSQL(傳統(tǒng)數(shù)據(jù)庫)、NewSQL(新型數(shù)據(jù)庫)和NoSQL(非關(guān)系型數(shù)據(jù)庫)。為了提升性能，NewSQL陣營普遍采用了列存儲技術(shù);NoSQL陣營普遍采用了KV技術(shù)。三個陣營都不同程度地采用了分布式計算、分布式文件系統(tǒng)、內(nèi)存計算技術(shù)，并積極地使用新的硬件技術(shù)，如大內(nèi)存、Flash、SSD和高速網(wǎng)絡(luò)連接(萬兆交換機和Infiniband)等。

三者在數(shù)據(jù)管理能力、數(shù)據(jù)的價值密度以數(shù)據(jù)處理的實時性等方面各有所長，從而勢必造成在未來的數(shù)據(jù)庫軟件市場上出現(xiàn)結(jié)構(gòu)混搭、多種技術(shù)并存，并且和諧相處的局面。然而，由于受數(shù)據(jù)管理能力所限，伴隨數(shù)據(jù)量逐年增加，OldSQL生命活力受到極大影響，未來將呈現(xiàn)不斷弱化的趨勢;在NoSQL領(lǐng)域，雖然其在數(shù)據(jù)管理能力方面具備先天優(yōu)勢，但是因為NoSQL處理的大多為互聯(lián)網(wǎng)數(shù)據(jù)，其價值密度較低，因此其市場活力呈現(xiàn)較為穩(wěn)定的態(tài)勢;在NewSQL領(lǐng)域，其數(shù)據(jù)管理能力高于OldSQL，又面向數(shù)據(jù)價值密度較高的行業(yè)大數(shù)據(jù)，促使其具備較高的市場活力，雖然其進入市場時間較晚，但是未來其市場活力必將超越OldSQL、NoSQL，成為在數(shù)據(jù)處理技術(shù)領(lǐng)域新的“王者”。

面對大數(shù)據(jù)，傳統(tǒng)的行式存儲數(shù)據(jù)庫已經(jīng)盡顯頹態(tài)，數(shù)據(jù)庫軟件巨頭也通過加強研發(fā)、收購等方式加強自己在大數(shù)據(jù)領(lǐng)域的影響力，紛紛推出自己的面向大數(shù)據(jù)庫的新型數(shù)據(jù)庫解決方案。而在新型數(shù)據(jù)庫中，以列式存儲為主的數(shù)據(jù)庫如Sybase IQ，GBase 8a，Vertica等表現(xiàn)優(yōu)異，成為NewSQL的典型代表。

三、應(yīng)對大數(shù)據(jù)，國產(chǎn)數(shù)據(jù)庫迎來新機遇

由于國家信息化建設(shè)的需求，電子政務(wù)正處于深化應(yīng)用階段，對數(shù)據(jù)的開發(fā)利用將成為新的方向，這樣就給國產(chǎn)數(shù)據(jù)庫發(fā)展帶來非常好的市場機會。特別是由于政府、能源等關(guān)鍵行業(yè)比較注重信息安全保障，因此國產(chǎn)數(shù)據(jù)庫軟件獲得政府青睞。

經(jīng)過十多年的刻苦發(fā)展，國產(chǎn)數(shù)據(jù)庫在技術(shù)研發(fā)方面取得了長足進步，產(chǎn)品日趨成熟。與國外數(shù)據(jù)庫軟件相比，國產(chǎn)數(shù)據(jù)庫企業(yè)借助安全、本土化優(yōu)勢已在政府和行業(yè)領(lǐng)域擊敗國外競爭對手。作為國產(chǎn)數(shù)據(jù)庫代表，南大通用以新型數(shù)據(jù)庫研發(fā)作為其戰(zhàn)略核心，成為第一家支持列式存儲和MPP架構(gòu)的國產(chǎn)數(shù)據(jù)庫廠商。其GBASE系列數(shù)據(jù)庫已經(jīng)成功應(yīng)用到電信、金融、政務(wù)等多個行業(yè)和領(lǐng)域。在新型數(shù)據(jù)庫領(lǐng)域已經(jīng)具備與世界主流廠商在大數(shù)據(jù)分析類應(yīng)用中直接競爭的能力，躍升成為國內(nèi)新型數(shù)據(jù)庫領(lǐng)域的前三強廠商。

大數(shù)據(jù)給國產(chǎn)數(shù)據(jù)庫廠商帶來了“天時、地利、人和”三者同時齊備的三十年不遇的戰(zhàn)略機遇期。國內(nèi)數(shù)據(jù)庫廠商應(yīng)當充分認識到未來三年，將是決定國產(chǎn)數(shù)據(jù)庫在大數(shù)據(jù)領(lǐng)域成敗的關(guān)鍵時期。如果國內(nèi)企業(yè)能抓住這一機遇，在技術(shù)、商業(yè)模式上主動突破，形成自己的優(yōu)勢，在某些行業(yè)率先開辟出應(yīng)用示范案例，那么在大數(shù)據(jù)時代，國產(chǎn)數(shù)據(jù)庫廠商就能有效應(yīng)對國際大廠商的強勢壓力和競爭，在市場上取得突破性的發(fā)展。