1. 程式人生 > >NoSQL資料庫的基礎知識

NoSQL資料庫的基礎知識

關係型資料庫和NoSQL資料庫

什麼是NoSQL

大家有沒有聽說過“NoSQL”呢?近年,這個詞極受關注。看到“NoSQL”這個詞,大家可能會誤以為是“No!SQL”的縮寫,並深感憤怒:“SQL怎麼會沒有必要了呢?”但實際上,它是“Not Only SQL”的縮寫。它的意義是:適用關係型資料庫的時候就使用關係型資料庫,不適用的時候也沒有必要非使用關係型資料庫不可,可以考慮使用更加合適的資料儲存。 

為彌補關係型資料庫的不足,各種各樣的NoSQL資料庫應運而生。

為了更好地瞭解本書所介紹的NoSQL資料庫,對關係型資料庫的理解是必不可少的。那麼,就讓我們先來看一看關係型資料庫的歷史、分類和特徵吧。

關係型資料庫簡史

1969年,埃德加•弗蘭克•科德(Edgar Frank Codd)發表了劃時代的論文,首次提出了關係資料模型的概念。但可惜的是,刊登論文的《IBM Research Report》只是IBM公司的內部刊物,因此論文反響平平。1970年,他再次在刊物《Communication of the ACM》上發表了題為“A Relational Model of Data for Large Shared Data banks”(大型共享資料庫的關係模型)的論文,終於引起了大家的關注。

科德所提出的關係資料模型的概念成為了現今關係型資料庫的基礎。當時的關係型資料庫由於硬體效能低劣、處理速度過慢而遲遲沒有得到實際應用。但之後隨著硬體效能的提升,加之使用簡單、效能優越等優點,關係型資料庫得到了廣泛的應用。

通用性及高效能

雖然本書是講解NoSQL資料庫的,但有一個重要的大前提,請大家一定不要誤解。這個大前提就是“關係型資料庫的效能絕對不低,它具有非常好的通用性和非常高的效能”。毫無疑問,對於絕大多數的應用來說它都是最有效的解決方案。 

突出的優勢
關係型資料庫作為應用廣泛的通用型資料庫,它的突出優勢主要有以下幾點:   

  • 保持資料的一致性(事務處理)  
  • 由於以標準化為前提,資料更新的開銷很小(相同的欄位基本上都只有一處)
  • 可以進行JOIN等複雜查詢
  • 存在很多實際成果和專業技術資訊(成熟的技術) 

這其中,能夠保持資料的一致性是關係型資料庫的最大優勢。在需要嚴格保證資料一致性和處理完整性的情況下,用關係型資料庫是肯定沒有錯的。但是有些情況不需要JOIN,對上述關係型資料庫的優點也沒有什麼特別需要,這時似乎也就沒有必要拘泥於關係型資料庫了。

關係型資料庫的不足

不擅長的處理
就像之前提到的那樣,關係型資料庫的效能非常高。但是它畢竟是一個通用型的資料庫,並不能完全適應所有的用途。具體來說它並不擅長以下處理: 

  • 大量資料的寫入處理  
  • 為有資料更新的表做索引或表結構(schema)變更
  • 欄位不固定時應用
  • 對簡單查詢需要快速返回結果的處理   

。。。。。。

NoSQL資料庫

為了彌補關係型資料庫的不足(特別是最近幾年),NoSQL資料庫出現了。關係型資料庫應用廣泛,能進行事務處理和JOIN等複雜處理。相對地,NoSQL資料庫只應用在特定領域,基本上不進行復雜的處理,但它恰恰彌補了之前所列舉的關係型資料庫的不足之處。 

易於資料的分散
如前所述,關係型資料庫並不擅長大量資料的寫入處理。原本關係型資料庫就是以JOIN為前提的,就是說,各個資料之間存在關聯是關係型資料庫得名的主要原因。為了進行JOIN處理,關係型資料庫不得不把資料儲存在同一個伺服器內,這不利於資料的分散。相反,NoSQL資料庫原本就不支援JOIN處理,各個資料都是獨立設計的,很容易把資料分散到多個伺服器上。由於資料被分散到了多個伺服器上,減少了每個伺服器上的資料量,即使要進行大量資料的寫入操作,處理起來也更加容易。同理,資料的讀入操作當然也同樣容易。

提升效能和增大規模
下面說一點題外話,如果想要使伺服器能夠輕鬆地處理更大量的資料,那麼只有兩個選擇:一是提升效能,二是增大規模。下面我們來整理一下這兩者的不同。 

首先,提升效能指的就是通過提升現行伺服器自身的效能來提高處理能力。這是非常簡單的方法,程式方面也不需要進行變更,但需要一些費用。若要購買效能翻倍的伺服器,需要花費的資金往往不只是原來的2倍,可能需要多達5到10倍。這種方法雖然簡單,但是成本較高。 

另一方面,增大規模指的是使用多臺廉價的伺服器來提高處理能力。它需要對程式進行變更,但由於使用廉價的伺服器,可以控制成本。另外,以後只要依葫蘆畫瓢增加廉價伺服器的數量就可以了。 

不對大量資料進行處理的話就沒有使用的必要嗎?
NoSQL資料庫基本上來說為了“使大量資料的寫入處理更加容易(讓增加伺服器數量更容易)”而設計的。但如果不是對大量資料進行操作的話,NoSQL資料庫的應用就沒有意義嗎? 

答案是否定的。的確,它在處理大量資料方面很有優勢。但實際上NoSQL資料庫還有各種各樣的特點,如果能夠恰當地利用這些特點將會是非常有幫助。具體的例子將會在第2章和第3章進行介紹,這些用途將會讓你感受到利用NoSQL的好處。 

  • 希望順暢地對資料進行快取(Cache)處理
  • 希望對陣列型別的資料進行高速處理
  • 希望進行全部儲存

多樣的NoSQL資料庫
NoSQL資料庫存在著“key-value儲存”、“文件型資料庫”、“列儲存資料庫”等各種各樣的種類,每種資料庫又包含各自的特點。下一節讓我們一起來了解一下NoSQL資料庫的種類和特點。

NoSQL資料庫是什麼

NoSQL說起來簡單,但實際上到底有多少種呢?我在提筆的時候,到NoSQL的官方網站上確認了一下,竟然已經有122種了。另外官方網站上也介紹了本書沒有涉及到的圖形資料庫和物件資料庫等各個類別。不知不覺間,原來已經出現了這麼多的NoSQL資料庫啊。 

本節將為大家介紹具有代表性的NoSQL資料庫。

key-value儲存

這是最常見的NoSQL資料庫,它的資料是以key-value的形式儲存的。雖然它的處理速度非常快,但是基本上只能通過key的完全一致查詢獲取資料。根據資料的儲存方式可以分為臨時性、永久性和兩者兼具三種。

臨時性
memcached屬於這種型別。所謂臨時性就是 “資料有可能丟失”的意思。memcached把所有資料都儲存在記憶體中,這樣儲存和讀取的速度非常快,但是當memcached停止的時候,資料就不存在了。由於資料儲存在記憶體中,所以無法操作超出記憶體容量的資料(舊資料會丟失)。 

  • 在記憶體中儲存資料
  • 可以進行非常快速的儲存和讀取處理
  • 資料有可能丟失

永久性
Tokyo Tyrant、Flare、ROMA等屬於這種型別。和臨時性相反,所謂永久性就是“資料不會丟失”的意思。這裡的key-value儲存不像memcached那樣在記憶體中儲存資料,而是把資料儲存在硬碟上。與memcached在記憶體中處理資料比起來,由於必然要發生對硬碟的IO操作,所以效能上還是有差距的。但資料不會丟失是它最大的優勢。 

  • 在硬碟上儲存資料
  • 可以進行非常快速的儲存和讀取處理(但無法與memcached相比)
  • 資料不會丟失

兩者兼具
Redis屬於這種型別。Redis有些特殊,臨時性和永久性兼具,且集合了臨時性key-value儲存和永久性key-value儲存的優點。Redis首先把資料儲存到記憶體中,在滿足特定條件(預設是15分鐘一次以上,5分鐘內10個以上,1分鐘內10000個以上的key發生變更)的時候將資料寫入到硬碟中。這樣既確保了記憶體中資料的處理速度,又可以通過寫入硬碟來保證資料的永久性。這種型別的資料庫特別適合於處理陣列型別的資料。

  • 同時在記憶體和硬碟上儲存資料
  • 可以進行非常快速的儲存和讀取處理
  • 儲存在硬碟上的資料不會消失(可以恢復)
  • 適合於處理陣列型別的資料

面向文件的資料庫

MongoDB、CouchDB屬於這種型別。它們屬於NoSQL資料庫,但與key-value儲存相異。 

不定義表結構
面向文件的資料庫具有以下特徵:即使不定義表結構,也可以像定義了表結構一樣使用。關係型資料庫在變更表結構時比較費事,而且為了保持一致性還需修改程式。然而NoSQL資料庫則可省去這些麻煩(通常程式都是正確的),確實是方便快捷。 

可以使用複雜的查詢條件
跟key-value儲存不同的是,面向文件的資料庫可以通過複雜的查詢條件來獲取資料。雖然不具備事務處理和JOIN這些關係型資料庫所具有的處理能力,但除此以外的其他處理基本上都能實現。這是非常容易使用的NoSQL資料庫。 

  • 不需要定義表結構
  • 可以利用複雜的查詢條件

面向列的資料庫

Cassandra、Hbase、HyperTable屬於這種型別。由於近年來資料量出現爆發性增長,這種型別的NoSQL資料庫尤其引人注目。 

面向行的資料庫和麵向列的資料庫
普通的關係型資料庫都是以行為單位來儲存資料的,擅長進行以行為單位的讀入處理,比如特定條件資料的獲取。因此,關係型資料庫也被稱為面向行的資料庫。相反,面向列的資料庫是以列為單位來儲存資料的,擅長以列為單位讀入資料。 

高擴充套件性
面向列的資料庫具有高擴充套件性,即使資料增加也不會降低相應的處理速度(特別是寫入速度),所以它主要應用於需要處理大量資料的情況。另外,利用面向列的資料庫的優勢,把它作為批處理程式的儲存器來對大量資料進行更新也是非常有用的。但由於面向列的資料庫跟現行資料庫儲存的思維方式有很大不同,應用起來十分困難。 

  • 高擴充套件性(特別是寫入處理)
  • 應用十分困難

最近,像Twitter和Facebook這樣需要對大量資料進行更新和查詢的網路服務不斷增加,面向列的資料庫的優勢對其中一些服務是非常有用的,但是由於這與本書所要介紹的內容關係不大,就不進行詳細介紹了。

總結:

NoSQL並不是No-SQL,而是指Not Only SQL。

NoSQL的出現是為了彌補SQL資料庫因為事務等機制帶來的對海量資料、高併發請求的處理的效能上的欠缺。

NoSQL不是為了替代SQL而出現的,它是一種替補方案,而不是解決方案的首選。

絕大多數的NoSQL產品都是基於大記憶體和高效能隨機讀寫的(比如具有更高效能的固態硬碟陣列),一般的小型企業在選擇NoSQL時一定要慎重!不要為了NoSQL而NoSQL,可能會導致花了冤枉錢又耽擱了專案程序。

NoSQL不是萬能的,但在大型專案中,你往往需要它!


相關推薦

程式設計師教程-6章-資料庫基礎知識

  目錄結構:   6.1 基本概念     6.1.1 資料庫系統     6.1.2 資料庫管理技術的發展       1 人工管理階段       2 檔案系統階段       3 資料庫系統階段     6.1.3 大資料       1 大資料產生背景       2 大資料的特徵

ORACLE資料庫基礎知識總結

1、RMAN全備備份檔案的順序 備份歸檔日誌、所有的資料檔案、控制檔案、spfile、再次備份歸檔日誌 2、redo日誌丟失恢復 redo日誌的三種狀態是current、active、inactive inactive,可以重建 clear log active、current不能變成inactive,只能通

資料庫基礎知識資料庫中的約束和三大正規化

一.資料庫中的正規化:   正規化, 英文名稱是 Normal Form,它是英國人 E.F.Codd(關係資料庫的老祖宗)在上個世紀70年代提出關係資料庫模型後總結出來的,正規化是關係資料庫理論的基礎,也是我們在設計資料庫結構過程中所要遵循的規則和指導方法,以下就是對

MySQL資料庫基礎知識三(事務處理)

事務指的是一組SQL語句,它們是一個執行單位,且在必要時還可以取消。事務處理是通過使用提交和回滾功能來實現的。 另一個用途確保某個操作所涉及的行不會在你正在使用它們時被其他客戶端修改。事務把多條語句定義為一個執行單位,防止在多客戶端環境裡可能會發生的併發問題。 事務系統通

MySQL資料庫基礎知識四(外來鍵和引用)

級聯刪除,級聯更新 外來鍵維護資料的一致性。 下面是幾條術語: 父表:包含原始鍵值的表。 子表:引用了父表中鍵值的相關表。 建立父表和子表關聯案例 父表: create table parent { par_id INT NOT NULL, PRIMAR

MySQL資料庫基礎知識五(檢視和儲存程式)

使用檢視 檢視是一個虛表,它是在表或其他檢視的基礎上,使用SELECT語句來定義的。 建立檢視: create view view_name as select last_name,first_name from president;//建立虛表view_name,表為

資料庫基礎知識

資料庫也是計算機類筆試面試中不可避免會遇到的考點,尤其是銀行和部分傳統軟體類公司。這裡根據整理的資料,對資料庫的相關知識也做個總結吧。希望學過資料庫但長時間不用的同學根據這些知識能夠回憶和重拾,沒學過的同學能掌握一些資料庫的基礎知識。 第一節       一、相關概念

基礎技能-Oracle資料庫基礎知識

一、 Oracle Database 又名Oracle RDBMS,簡稱Oracle。是甲骨文公司的一款關係資料庫管理系統。它是在資料庫領域一直處於領先地位的產品。可以說Oracle資料庫系統是目前世界上流行的關係資料庫管理系統,系統可移植性好、使

資料庫基礎知識(1)--資料庫正規化

設計關係資料庫時,遵從不同的規範要求,設計出合理的關係型資料庫,這些不同的規範要求被稱為不同的正規化,各種正規化呈遞次規範,越高的正規化資料庫冗餘越小。 目前關係資料庫有六種正規化:第一正規化(1NF)、第二正規化(2NF)、第三正規化(3NF)、巴斯-科德正規化(BCNF

oracle資料庫基礎知識學習筆記

一、SQL語言分類: 1.DDL(資料定義語言):  create(建立)    alter(修改)  drop(刪除)------------主要是對錶操作。 2.DML(資料操作語言):  insert(插入)    delete(刪除)  update(更新)  

mysql資料庫基礎知識

sql:結構化查詢語句 rdbms:關係型資料庫管理系統 資料庫設計三大正規化: 1:原子性。資料庫的欄位都是具有單一屬性的,不可再分。 2:唯一性。每個非主屬性都完全函式依賴於鍵碼。記錄具有唯一標識。每列都跟主鍵有關係。(以一對多為例) 3:消除傳遞依賴。每個非主屬性

資料庫--基礎知識

          alter table table_name drop primary key    //primary key 只有一個,所以不用指定索引名,如果沒有建立PRIMARY KEY索引,但表具有一                                              

資料庫基礎知識(一)-sql常見操作

create table if not exists userservice ( serviceid int(4) NOT NULL AUTO_INCREMENT comment '某項id設定主鍵自增', userid int(4) NOT NULL comment '所屬使用者',

SQL資料庫基礎知識總結(三)---物件

一:資料庫物件有:              關係圖,表,檢視,儲存過程,角色,使用者,規則,預設,使用者自定義資料型別,和使用者自定義函式等。              其中,表是最基本的物件。表是用來儲存物理資料的。為了方便快速查詢、瀏覽多張表的資料,因此建立了檢

資料庫基礎知識彙總(一)

五個基本的關係代數操作 並、差、笛卡爾積、選擇、投影 資料庫語言四大類 DQL(Data Query Language):資料庫查詢語言。 DDL(Data Definition Language):資料庫定義語言。定義關係模式、刪除關係、修改關

資料庫基礎知識總結

資料庫編碼經驗總結:在命令列中顯示中文時,先將操作碼轉換為gbk碼,然後在進行插入資料的操作。(否則會亂碼)用php新增中文,必須以utf8的格式輸入,php統一使用utf8插入和查詢資料,這和命令列中的操作碼無關。1.如何啟動資料庫:1).我的電腦右鍵-> 管理 -&

MYSQL資料庫基礎知識及操作

一、資料庫基礎知識 在任何一個關係資料庫中,第一正規化是對關係模式的基本要求,不滿足第一正規化的資料庫就不是關係資料庫 第二正規化定義:若關係模式R∈1NF,且關係模式R的每個非主屬性完全函式依賴於

資料庫基礎知識複習

1.     資料檢視與資料模型 資料抽象共有三個層次:物理層、邏輯層和檢視層。在邏輯層使用的資料模型包括兩類:一類是概念資料模型,主要用於資料庫設計,它能被一般的使用者理解,與人的思維表達方式比較接

db2資料庫基礎知識

1,db2資料庫特點 (1)具有很好的並行性(DB2把資料庫管理擴充到了並行的,多節點的環境;資料庫分割槽是資料庫的一部分,包含自己的資料,索引,配置檔案和事務日誌; 資料庫分割槽有時被稱為節點)。 (2)獲得最高認證級別的ISO標準認證。 (3

Oracle資料庫基礎知識

Oracle的體系結構一個Oracle server是由Oracle例項(instance)和資料庫兩部分組成的。例項 = 記憶體結構 + 一組後臺程序一個Oracle資料庫是一個數據單位的集合,只要目的是為了儲存和讀取資訊。Oracle資料庫可以分為邏輯結構和物理結構。表空