大數(shù)據(jù)增長為數(shù)據(jù)存儲系統(tǒng)帶來新挑戰(zhàn)

分析機(jī)構(gòu)Gartner副總裁Donald Feinberg表示，數(shù)據(jù)存儲的角色之所以會有所轉(zhuǎn)變，其中一項因素就是數(shù)據(jù)不僅在數(shù)量上變多，而且日益復(fù)雜，對于5到10年前所設(shè)計出來的數(shù)據(jù)存儲系統(tǒng)來說，就必須要能處理資源的多樣性、復(fù)雜性、巨大的容量而且系統(tǒng)反應(yīng)速度要即時等特性。而他認(rèn)為，雖然大數(shù)據(jù)對不同產(chǎn)業(yè)都有不同的意義，但基本上，大數(shù)據(jù)代表的就是大量、復(fù)雜和非結(jié)構(gòu)化的數(shù)據(jù)。

但是，對于擅長處理結(jié)構(gòu)化數(shù)據(jù)的關(guān)聯(lián)式數(shù)據(jù)庫管理系統(tǒng)來說，是很難去處理大數(shù)據(jù)的。因此，Donald Feinberg表示，目前大部分的企業(yè)會特別打造一個空間或是平臺來存放非結(jié)構(gòu)化數(shù)據(jù)或是大數(shù)據(jù)。

應(yīng)用大數(shù)據(jù)的來臨，Donald Feinberg表示，未來邏輯數(shù)據(jù)存儲的概念將會浮現(xiàn)，也就是將不同性質(zhì)的數(shù)據(jù)存放在不同的數(shù)據(jù)庫中，就可以用適當(dāng)?shù)墓ぞ邅慝@取正確的資源，同時，邏輯數(shù)據(jù)存儲會利用適當(dāng)?shù)暮笤O(shè)數(shù)據(jù)連結(jié)所有數(shù)據(jù)存儲系統(tǒng)中不同的數(shù)據(jù)。

Donald Feinberg也表示，有許多工具都是用來處理巨量而非結(jié)構(gòu)化的數(shù)據(jù)，但是，將有很多應(yīng)用程式是使用MapReduce技術(shù)開發(fā)。

數(shù)據(jù)存儲廠商面臨必須快速回應(yīng)查詢的挑戰(zhàn)

大數(shù)據(jù)影響層面之廣，IDC軟件市場分析師鍾翠玲表示，大數(shù)據(jù)對于各方廠商都是新的戰(zhàn)場，其中也包含了存儲廠商，像是EMC買下數(shù)據(jù)存儲軟件業(yè)者Greenplum就是一例。原因正是，她認(rèn)為，數(shù)據(jù)存儲的確是可應(yīng)用大數(shù)據(jù)的主力。

不過，對數(shù)據(jù)存儲廠商來說，還是有不少挑戰(zhàn)存在，首當(dāng)其沖的是，他們必須要強(qiáng)化關(guān)聯(lián)式數(shù)據(jù)庫的效能，增加數(shù)據(jù)管理和數(shù)據(jù)壓縮的功能。

因為過往關(guān)聯(lián)性數(shù)據(jù)庫產(chǎn)品處理大量數(shù)據(jù)時的運算速度都不快，需要引進(jìn)新技術(shù)來加速數(shù)據(jù)查詢的功能。另外，數(shù)據(jù)存儲的廠商也開始嘗試不只采用傳統(tǒng)硬盤來存儲數(shù)據(jù)，像是使用快速閃存的數(shù)據(jù)庫、閃存數(shù)據(jù)庫等，都逐漸產(chǎn)生。

另一個挑戰(zhàn)就是傳統(tǒng)關(guān)聯(lián)性數(shù)據(jù)庫無法分析非結(jié)構(gòu)化數(shù)據(jù)，因此，并購具有分析非結(jié)構(gòu)化數(shù)據(jù)的廠商以及數(shù)據(jù)管理廠商，是目前數(shù)據(jù)存儲大廠擴(kuò)展實力的方向。

數(shù)據(jù)管理的影響主要是數(shù)據(jù)安全的考量。IDC軟件市場分析師吳乃沛表示，大數(shù)據(jù)對于存儲技術(shù)與資源安全也都會產(chǎn)生沖擊。首先，快照、重復(fù)數(shù)據(jù)刪除等技術(shù)在大數(shù)據(jù)時代都很重要，就衍生了數(shù)據(jù)權(quán)限的管理。

舉例來說，現(xiàn)在企業(yè)后端與前端所看到的數(shù)據(jù)模式并不一樣，當(dāng)企業(yè)要處理非結(jié)構(gòu)化數(shù)據(jù)時，就必須制定出是IT部門還是業(yè)務(wù)單位才是數(shù)據(jù)管理者。而吳乃沛表示，由于這牽涉的不僅是技術(shù)問題，還有公司政策的制定，因此界定出數(shù)據(jù)管理者是企業(yè)目前最頭痛的問題。