
小白學(xué)數(shù)據(jù):一篇文章看懂NoSQL數(shù)據(jù)庫
如果你關(guān)注大數(shù)據(jù)科技動(dòng)向,可能聽說過一個(gè)叫NoSQL數(shù)據(jù)庫的名詞,這可能讓人有些云里霧里。其實(shí)我們處在一個(gè)激動(dòng)人心的技術(shù)更迭時(shí)代,以甲骨文為代表的SQL數(shù)據(jù)庫已經(jīng)稱霸了企業(yè)市場30年,而近年來的NoSQL則是強(qiáng)有力的更新?lián)Q代的競爭者。這篇文章就通過問答的方式來給小白解釋NoSQL數(shù)據(jù)庫系統(tǒng)是什么,無論你的技術(shù)背景如何都能看得懂。對于數(shù)據(jù)分析從業(yè)人員來說,了解數(shù)據(jù)庫的趨勢可以讓你的職業(yè)生涯如虎添翼;而對于工程師來說,了解新的基礎(chǔ)系統(tǒng)更是必不可少的行業(yè)知識(shí)。
幾個(gè)基本問題
小白問:數(shù)據(jù)庫是什么東西,可以吃嗎?
答:……不可以。數(shù)據(jù)庫呢,就是存儲(chǔ)數(shù)據(jù)的地方,就像冰箱是存儲(chǔ)食物的地方一樣。
小白問:誒?我的數(shù)據(jù)就存儲(chǔ)在自己電腦里面的excel表里里,還要數(shù)據(jù)庫干嘛?
答:自己的數(shù)據(jù)的確很方便,但是對于企業(yè)來說就不一樣了。一個(gè)公司里面可能有成千上萬的Excel表格,還在不同的電腦上,而他們的員工和客戶需要實(shí)時(shí)看到企業(yè)給他們提供的所有數(shù)據(jù),這種文件管理的方法就很麻煩,總不能每分鐘都把一個(gè)新的巨大無比的excel文件發(fā)給所有客戶呀!而且數(shù)據(jù)庫更有用的是進(jìn)行查詢,企業(yè)會(huì)給內(nèi)部或者客戶開發(fā)不同的應(yīng)用,而這些應(yīng)用需要數(shù)據(jù)的時(shí)候可以直接實(shí)用數(shù)據(jù)庫的查詢語句快速得到結(jié)果。
小白問:哦,那是說所有的人都直接在這個(gè)系統(tǒng)上查數(shù)據(jù)和改數(shù)據(jù)嗎?
答:是的,數(shù)據(jù)庫也會(huì)幫助你處理“并發(fā)”,也就是如果多個(gè)人同時(shí)在改數(shù)據(jù)的情況。比如你在支付寶給小灰轉(zhuǎn)賬,而小灰這個(gè)時(shí)候又偏偏剛好在給你轉(zhuǎn)賬,這時(shí)候數(shù)據(jù)庫系統(tǒng)就要保證你們兩個(gè)人最后余額都是正確的,并且在你們進(jìn)行交易的時(shí)候別人如果同時(shí)查詢你們倆人的余額都會(huì)得到精確的結(jié)果。在一個(gè)企業(yè)系統(tǒng)中,一秒鐘可能有成千上萬個(gè)這樣的查詢和改動(dòng)發(fā)生呢。
小白問:那SQL又是什么鬼?
答:SQL是一種可以查詢關(guān)系型數(shù)據(jù)庫的語言,關(guān)系型數(shù)據(jù)庫也叫SQL數(shù)據(jù)庫。
所謂關(guān)系型數(shù)據(jù)庫就是數(shù)據(jù)是以表格的形式進(jìn)行存儲(chǔ)的,就和你電腦上的Excel表一樣,數(shù)據(jù)是一行一列整整齊齊的躺著的。表格之間有著這樣或那樣的關(guān)系,可以通過某信息連接在一起 。想查這些表格里的任何數(shù)據(jù)的程序員們就可以把他們想要的數(shù)據(jù)形式轉(zhuǎn)化成SQL語句然后發(fā)給數(shù)據(jù)庫,得到數(shù)據(jù)結(jié)果。比如你可以有一個(gè)食物管理的數(shù)據(jù)庫,里面有兩個(gè)表(食物表和主人表),長成下面的這個(gè)樣子:
食物編號(hào)食物名稱數(shù)量 喜愛程度主人編號(hào)
1 獼猴桃 4 53
2 菠菜 10 2 2
3巧克力 99 1001
主人編號(hào)主人姓名 主人性別
1小白 女
2小黑 男
3小灰 男
我們可以寫一句簡單的SQL語句直接調(diào)出所有男主人擁有的食品及數(shù)量。
SELECT 主人姓名,食物名稱,數(shù)量
FROM 食物表,主人表
WHERE 食物表.主人編號(hào)=主人表.主人編號(hào) AND 主人性別=‘男’
=>
主人姓名食物名稱數(shù)量
小黑菠菜10
小灰獼猴桃 4
深入聊聊
小白問:哦,那NoSQL到底有什么過人之處呢?
答:因?yàn)榻陙砥髽I(yè)要處理的數(shù)據(jù)越來越多,越來越復(fù)雜,就出現(xiàn)了兩個(gè)之前關(guān)系型數(shù)據(jù)庫解決不了的問題:快速增長的數(shù)據(jù)規(guī)模和日漸復(fù)雜的數(shù)據(jù)模型。
第一個(gè)問題就是數(shù)據(jù)越來越多,公司以前買的裝關(guān)系型數(shù)據(jù)庫的那臺(tái)電腦放不下了,那這個(gè)時(shí)候就有兩種選擇:
一種就是直接去買一臺(tái)更大空間的計(jì)算機(jī)取代現(xiàn)有的機(jī)器。這個(gè)方法是有限制的,因?yàn)檫@種機(jī)器的價(jià)格一般非常昂貴,而且這個(gè)空間總是有一個(gè)上限的。
另外一種選擇就是再買一臺(tái)機(jī)器,然后把新的數(shù)據(jù)放到新機(jī)器里的另外一個(gè)SQL數(shù)據(jù)庫里面,這個(gè)過程也叫“分片”(sharding)。 這個(gè)時(shí)候程序員要開始杯具的加班了。因?yàn)檫@個(gè)轉(zhuǎn)換的過程非常容易出問題,而且會(huì)給使用數(shù)據(jù)庫的應(yīng)用增加很多的復(fù)雜度。比如我們之前的例子,在查詢食品和數(shù)量的語句的時(shí)候我們要將同樣的語句同時(shí)發(fā)給兩個(gè)服務(wù)器,然后把最后的結(jié)果綜合起來,給應(yīng)用的開發(fā)增加了很多不必要的負(fù)擔(dān)。分片還有很多別的缺點(diǎn)我就不一一贅述了。
而NoSQL數(shù)據(jù)庫的服務(wù)器本身就支持很多個(gè)機(jī)器存儲(chǔ)數(shù)據(jù)進(jìn)行分布式查詢,這樣當(dāng)空間不夠用的時(shí)候就直接去扛一臺(tái)新的機(jī)器回來連接到已有的計(jì)算機(jī)集群上裝好數(shù)據(jù)庫即可,程序員可以回家睡個(gè)好覺啦。
小白問:明白了,那另外一個(gè)關(guān)系型數(shù)據(jù)庫沒有解決的問題呢?
答:另外的一個(gè)問題就是把數(shù)據(jù)放到SQL數(shù)據(jù)之前要進(jìn)行數(shù)據(jù)建模,也就是要考慮好每一個(gè)表里面每一列都代表什么,不同的表格之間要怎樣相互關(guān)聯(lián)起來。這對很多公司來說是一件非常耗費(fèi)時(shí)間和精力的事情,因?yàn)樗麄兊臄?shù)據(jù)源的種類太多了。而且在數(shù)據(jù)進(jìn)入數(shù)據(jù)庫之后,如果在表中增加新的一列(比如想把食物的種類加進(jìn)第一個(gè)表中)或者是要改變某一列的特性的話,對于系統(tǒng)來說是非常困難的,因?yàn)楸碇械臄?shù)據(jù)已經(jīng)一行行的存好了。
而NoSQL數(shù)據(jù)庫就減輕了數(shù)據(jù)建模的負(fù)擔(dān),比如上面的表里面的一行可以變成下面JSON文檔的樣子:
{
食物名稱:獼猴桃,
數(shù)量:4,
喜愛程度:5,
主人:{
姓名:小灰,
性別:男
}
}
這樣很方便的可以修改數(shù)據(jù)模型的樣子,而且從源數(shù)據(jù)不需要怎么改就可以放入數(shù)據(jù)庫。目前用有一個(gè)行業(yè)叫做ETL,就是專門做數(shù)據(jù)形狀轉(zhuǎn)化的:他們將不同的源數(shù)據(jù)打磨到想要的表格的模子里,然后放入關(guān)系型數(shù)據(jù)庫。這個(gè)行業(yè)價(jià)值好幾十億美元呢,很瘋狂吧?用了NoSQL,公司可以節(jié)省好多時(shí)間和人民幣呢。
答:NoSQL其實(shí)有很多不同的種類的,適用在不同的情況中并且分別有不同的存儲(chǔ)方法。JSON是文檔類NoSQL的典型格式,我們平時(shí)使用的word和pdf文件都可以很容易放入文檔型數(shù)據(jù)庫進(jìn)行查詢。而其他種類的NoSQL也可能是用圖或者哈希表的模型來存儲(chǔ)數(shù)據(jù)。如果你的數(shù)據(jù)存儲(chǔ)的是一個(gè)社交網(wǎng)絡(luò)類型的應(yīng)用,那么對你來說用一個(gè)基于圖的數(shù)據(jù)庫可能更加合適,因?yàn)槟汴P(guān)心的社交網(wǎng)絡(luò)場景中的問題都可以得到比較快速的回答。
答:哪有,NoSql其實(shí)是Not Only SQL,就是不僅僅是SQL,有一些NoSQL數(shù)據(jù)庫還支持直接用SQL來做查詢呢。兩者的區(qū)別主要是我上面提到的兩點(diǎn): 1.對數(shù)據(jù)建模的要求不同:NoSQL的建模程序比較簡單靈活;2.對數(shù)據(jù)增加的處理方式不同:使用NoSQL可以直接進(jìn)行分布式處理。在數(shù)據(jù)規(guī)模增長需要增加新的機(jī)器的時(shí)候,不需要程序員對使用數(shù)據(jù)庫的應(yīng)用進(jìn)行代碼進(jìn)行改動(dòng),直接在數(shù)據(jù)庫集群中增加一臺(tái)新的計(jì)算機(jī)就可以啦。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03