1. 程式人生 > >為什麼說Redis是單執行緒的以及Redis為什麼這麼快?

為什麼說Redis是單執行緒的以及Redis為什麼這麼快?

一、前言

近乎所有與Java相關的面試都會問到快取的問題,基礎一點的會問到什麼是“二八定律”、什麼是“熱資料和冷資料”,複雜一點的會問到快取雪崩、快取穿透、快取預熱、快取更新、快取降級等問題,這些看似不常見的概念,都與我們的快取伺服器相關,一般常用的快取伺服器有Redis、Memcached等,而筆者目前最常用的也只有Redis這一種。

如果你在以前面試的時候還沒有遇到過面試官問你《為什麼說Redis是單執行緒的以及Redis為什麼這麼快!》,那麼你看到這篇文章的時候,你應該覺得是一件很幸運的事情!如果你剛好是一位高逼格的面試官,你也可以拿這道題去面試對面“望穿秋水”般的小夥伴,測試一下他的掌握程度。

好啦!步入正題!我們先探討一下Redis是什麼,Redis為什麼這麼快、然後在探討一下為什麼Redis是單執行緒的?

二、Redis簡介

Redis是一個開源的記憶體中的資料結構儲存系統,它可以用作:資料庫、快取和訊息中介軟體

它支援多種型別的資料結構,如字串(String),雜湊(Hash),列表(List),集合(Set),有序集合(Sorted Set或者是ZSet)與範圍查詢,Bitmaps,Hyperloglogs 和地理空間(Geospatial)索引半徑查詢。其中常見的資料結構型別有:String、List、Set、Hash、ZSet這5種。

Redis 內建了複製(Replication),LUA指令碼(Lua scripting), LRU驅動事件(LRU eviction),事務(Transactions) 和不同級別的磁碟持久化(Persistence),並通過 Redis哨兵(Sentinel)和自動分割槽(Cluster)提供高可用性(High Availability)。

Redis也提供了持久化的選項,這些選項可以讓使用者將自己的資料儲存到磁碟上面進行儲存。根據實際情況,可以每隔一定時間將資料集匯出到磁碟(快照),或者追加到命令日誌中(AOF只追加檔案),他會在執行寫命令時,將被執行的寫命令複製到硬盤裡面。您也可以關閉持久化功能,將Redis作為一個高效的網路的快取資料功能使用。

Redis不使用表,他的資料庫不會預定義或者強制去要求使用者對Redis儲存的不同資料進行關聯。

資料庫的工作模式按儲存方式可分為:硬碟資料庫和記憶體資料庫。Redis 將資料儲存在記憶體裡面,讀寫資料的時候都不會受到硬碟 I/O 速度的限制,所以速度極快。

(1)硬碟資料庫的工作模式:

     

       

(2)記憶體資料庫的工作模式:

     

      

看完上述的描述,對於一些常見的Redis相關的面試題,是否有所認識了,例如:什麼是Redis、Redis常見的資料結構型別有哪些、Redis是如何進行持久化的等。

三、Redis到底有多快

Redis採用的是基於記憶體的採用的是單程序單執行緒模型的 KV 資料庫由C語言編寫,官方提供的資料是可以達到100000+的QPS(每秒內查詢次數)。這個資料不比採用單程序多執行緒的同樣基於記憶體的 KV 資料庫 Memcached 差!有興趣的可以參考官方的基準程式測試《How fast is Redis?》(https://redis.io/topics/benchmarks

     

       

橫軸是連線數,縱軸是QPS。此時,這張圖反映了一個數量級,希望大家在面試的時候可以正確的描述出來,不要問你的時候,你回答的數量級相差甚遠!

四、Redis為什麼這麼快

1、完全基於記憶體,絕大部分請求是純粹的記憶體操作,非常快速。資料存在記憶體中,類似於HashMap,HashMap的優勢就是查詢和操作的時間複雜度都是O(1);

2、資料結構簡單,對資料操作也簡單,Redis中的資料結構是專門進行設計的;

3、採用單執行緒,避免了不必要的上下文切換和競爭條件,也不存在多程序或者多執行緒導致的切換而消耗 CPU,不用去考慮各種鎖的問題,不存在加鎖釋放鎖操作,沒有因為可能出現死鎖而導致的效能消耗;

4、使用多路I/O複用模型,非阻塞IO;

5、使用底層模型不同,它們之間底層實現方式以及與客戶端之間通訊的應用協議不一樣,Redis直接自己構建了VM 機制 ,因為一般的系統呼叫系統函式的話,會浪費一定的時間去移動和請求;

以上幾點都比較好理解,下邊我們針對多路 I/O 複用模型進行簡單的探討:

(1)多路 I/O 複用模型

多路I/O複用模型是利用 select、poll、epoll 可以同時監察多個流的 I/O 事件的能力,在空閒的時候,會把當前執行緒阻塞掉,當有一個或多個流有 I/O 事件時,就從阻塞態中喚醒,於是程式就會輪詢一遍所有的流(epoll 是隻輪詢那些真正發出了事件的流),並且只依次順序的處理就緒的流,這種做法就避免了大量的無用操作。

這裡“多路”指的是多個網路連線,“複用”指的是複用同一個執行緒。採用多路 I/O 複用技術可以讓單個執行緒高效的處理多個連線請求(儘量減少網路 IO 的時間消耗),且 Redis 在記憶體中操作資料的速度非常快,也就是說記憶體內的操作不會成為影響Redis效能的瓶頸,主要由以上幾點造就了 Redis 具有很高的吞吐量。

五、那麼為什麼Redis是單執行緒的

我們首先要明白,上邊的種種分析,都是為了營造一個Redis很快的氛圍!官方FAQ表示,因為Redis是基於記憶體的操作,CPU不是Redis的瓶頸,Redis的瓶頸最有可能是機器記憶體的大小或者網路頻寬。既然單執行緒容易實現,而且CPU不會成為瓶頸,那就順理成章地採用單執行緒的方案了(畢竟採用多執行緒會有很多麻煩!)。

       

      

可以參考:https://redis.io/topics/faq

看到這裡,你可能會氣哭!本以為會有什麼重大的技術要點才使得Redis使用單執行緒就可以這麼快,沒想到就是一句官方看似糊弄我們的回答!但是,我們已經可以很清楚的解釋了為什麼Redis這麼快,並且正是由於在單執行緒模式的情況下已經很快了,就沒有必要在使用多執行緒了!

但是,我們使用單執行緒的方式是無法發揮多核CPU 效能,不過我們可以通過在單機開多個Redis 例項來完善!

警告1:這裡我們一直在強調的單執行緒,只是在處理我們的網路請求的時候只有一個執行緒來處理,一個正式的Redis Server執行的時候肯定是不止一個執行緒的,這裡需要大家明確的注意一下!例如Redis進行持久化的時候會以子程序或者子執行緒的方式執行(具體是子執行緒還是子程序待讀者深入研究);例如我在測試伺服器上檢視Redis程序,然後找到該程序下的執行緒:

      

ps命令的“-T”引數表示顯示執行緒(Show threads, possibly with SPID column.)“SID”欄表示執行緒ID,而“CMD”欄則顯示了執行緒名稱。

警告2:在上圖中FAQ中的最後一段,表述了從Redis 4.0版本開始會支援多執行緒的方式,但是,只是在某一些操作上進行多執行緒的操作!所以該篇文章在以後的版本中是否還是單執行緒的方式需要讀者考證!

六、注意點

1、我們知道Redis是用”單執行緒-多路複用IO模型”來實現高效能的記憶體資料服務的,這種機制避免了使用鎖,但是同時這種機制在進行sunion之類的比較耗時的命令時會使redis的併發下降。因為是單一執行緒,所以同一時刻只有一個操作在進行,所以,耗時的命令會導致併發的下降,不只是讀併發,寫併發也會下降。而單一執行緒也只能用到一個CPU核心,所以可以在同一個多核的伺服器中,可以啟動多個例項,組成master-master或者master-slave的形式,耗時的讀命令可以完全在slave進行。

需要改的redis.conf項:

pidfile /var/run/redis/redis_6377.pid  #pidfile要加上埠號
port 6377  #這個是必須改的
logfile /var/log/redis/redis_6377.log #logfile的名稱也加上埠號
dbfilename dump_6377.rdb  #rdbfile也加上埠號

2、“我們不能任由作業系統負載均衡,因為我們自己更瞭解自己的程式,所以,我們可以手動地為其分配CPU核,而不會過多地佔用CPU,或是讓我們關鍵程序和一堆別的程序擠在一起。”。

CPU 是一個重要的影響因素,由於是單執行緒模型,Redis 更喜歡大快取快速 CPU, 而不是多核

在多核 CPU 伺服器上面,Redis 的效能還依賴NUMA 配置和處理器繫結位置。最明顯的影響是 redis-benchmark 會隨機使用CPU核心。為了獲得精準的結果,需要使用固定處理器工具(在 Linux 上可以使用 taskset)。最有效的辦法是將客戶端和服務端分離到兩個不同的 CPU 來高校使用三級快取。

七、擴充套件

以下也是你應該知道的幾種模型,祝你的面試一臂之力!

1、單程序多執行緒模型:MySQL、Memcached、Oracle(Windows版本);

2、多程序模型:Oracle(Linux版本);

3、Nginx有兩類程序,一類稱為Master程序(相當於管理程序),另一類稱為Worker程序(實際工作程序)。啟動方式有兩種:

(1)單程序啟動:此時系統中僅有一個程序,該程序既充當Master程序的角色,也充當Worker程序的角色。

相關推薦

redis面試題集錦 Redis為什麼使用程序執行方式也這麼

1為什麼Redis需要把所有資料放到記憶體中? Redis為了達到最快的讀寫速度將資料都讀到記憶體中,並通過非同步的方式將資料寫入磁碟。所以Redis具有快速和資料持久化的特性。如果不將資料放到記憶體中,磁碟的I/O速度會嚴重影響redis的效能。在記憶體越來越便宜的今天,redis將會越來越受歡迎。如果設

redis執行處理,以及執行的優缺點

Redis快的主要原因是: 完全基於記憶體 資料結構簡單,對資料操作也簡單 使用多路 I/O 複用模型 單程序單執行緒好處 程式碼更清晰,處理邏輯更簡單 不用去考慮各種鎖的問題,不存在加鎖釋放鎖操作,沒有因為可能出現死鎖而導致的效能消耗 不存在

Redis執行為何速度如此之

Redis之所以執行速度很快,主要依賴於以下幾個原因: (一)純記憶體操作,避免大量訪問資料庫,減少直接讀取磁碟資料,redis 將資料儲存在記憶體裡面,讀寫資料的時候都不會受到硬碟 I/O 速度的限制,所以速度快; (二)單執行緒操作,避免了不必要的上下文切換和競爭條件

redis執行,為什麼那麼

完全基於記憶體,絕大部分請求是純粹的記憶體操作,非常快速。 資料結構簡單,對資料操作也簡單,Redis 中的資料結構是專門進行設

《【面試突擊】— Redis篇》-- Redis執行模型瞭解嗎?為啥執行效率還這麼高?

能堅持別人不能堅持的,才能擁有別人未曾擁有的。關注程式設計大道公眾號,讓我們一同堅持心中所想,一起成長!! 《【面試突擊】— Redis篇》-- Redis的執行緒模型瞭解嗎?為啥單執行緒效率還這麼高? 在這個系列裡,我會整理一些面試題與大家分享,幫助年後和我一樣想要在金三銀四準備

Redis執行的原因

一、前言 近乎所有與Java相關的面試都會問到快取的問題,基礎一點的會問到什麼是“二八定律”、什麼是“熱資料和冷資料” ,複雜一點的會問到快取雪崩、快取穿透、快取預熱、快取更新、快取降級等問題,這些看似不常見的概念,都與我們的快取伺服器相關,一般常用的快取伺服器有Redis、Memcached等

Redis執行理解

簡介 從接觸Redis到現在,一直被它的單執行緒問題困擾,這對於一個苛求原理的我來說是種折磨,今天吃飯途中看了幾篇部落格,茅塞頓開。 個人理解         redis分客戶端和服務端,一次完整的redis請求事件

為什麼說Redis執行效率高

Redis效率高的主要原因有下面幾個: 基於記憶體操作,速度非常快 採用單執行緒,避免了上下文的切換導致消耗CPU 採用單執行緒,不用去考慮各種加鎖釋放鎖的問題 使用IO多路複用模型,非阻塞IO Redis採用的是基於記憶體的採用的是單程序單執行緒模型的

redis執行模型分析

redis原理 redis採用自己實現的事件分離器,效率比較高,內部採用非阻塞的執行方式,吞吐能力比較大。 不過,因為一般的記憶體操作都是簡單存取操作,執行緒佔用時間相對較短,主要問題在io上,因此,redis這種模型是合適的,但是如果某一個執行緒出現問題導致執行緒佔用很長時間,那麼reids的單

程序執行Redis如何能夠高併發

1、基本原理 採用多路 I/O 複用技術可以讓單個執行緒高效的處理多個連線請求(儘量減少網路IO的時間消耗) (1)為什麼不採用多程序或多執行緒處理?多執行緒處理可能涉及到鎖 多執行緒處理會涉及到執行緒切換而消耗CPU(2)單執行緒處理的缺點?無法發揮多核CPU效能,不過可以

關於redis執行的分析

redis為什麼那麼快?結論有三點,大家都知道,這裡主要是分析。 首先第一點 redis是記憶體訪問的,所以快 當然這個大家都知道,所以不是重點   io密集型和cpu密集型 一般我們把任務分為io密集型和cpu密集型   io密集型 IO密集型指的是系統的CPU效能相對硬碟、記憶體要

執行Redis有哪些慢動作?

持續原創輸出,點選上方藍字關注我 目錄 前言為什麼 Redis 這麼火?鍵和值的儲存形式?為什麼雜湊表操作變慢了?集合的操作效率? 有哪些資料結構?不同操作的複雜度? 總結 前言 現在一提到Redis的第一反應就是快、單執行緒,但是Redis真的快嗎?真的是單執行緒嗎? 你有沒有深入瞭解一下Redis

為什麼說Redis執行以及Redis為什麼這麼

一、前言 近乎所有與Java相關的面試都會問到快取的問題,基礎一點的會問到什麼是“二八定律”、什麼是“熱資料和冷資料”,複雜一點的會問到快取雪崩、快取穿透、快取預熱、快取更新、快取降級等問題,這些看似不常見的概念,都與我們的快取伺服器相關,一般常用的快取伺服器有Redis、Memcached等,而筆者目

為什麼redis執行以及為什麼這麼

### 官網的說法 ![](https://img2020.cnblogs.com/blog/1534147/202004/1534147-20200427212506756-1345118511.png) 我們先來認真看一下官網的說法。翻譯過來大意如下: CPU並不是您使用Redis的瓶頸,因為通常Redi

Redis執行的,為什麼這麼

近乎所有與Java相關的面試都會問到快取的問題,基礎一點的會問到什麼是“二八定律”、什麼是“熱資料和冷資料”,複雜一點的會問到快取雪崩、快取穿透、快取預熱、快取更新、快取降級等問題,這些看似不常見的概念,都與我們的快取伺服器相關,一般常用的快取伺服器有Redis、Memcached等,而筆者目前最常

redis為什麼是執行設計,以及Redis為什麼

1 redis快的原因 1、完全基於記憶體,絕大部分請求是純粹的記憶體操作,非常快速。資料存在記憶體中,類似於HashMap,HashMap的優勢就是查詢和操作的時間複雜度都是O(1); 2、資料結構簡單,對資料操作也簡單,Redis中的資料結構是專門進

Redis執行模型

Redis客戶端對服務端的每次呼叫都經歷了傳送命令,執行命令,返回結果三個過程。其中執行命令階段,由於Redis是單執行緒來處理命令的,所有每一條到達服務端的命令不會立刻執行,所有的命令都會進入一個佇列中,然後逐個被執行。並且多個客戶端傳送的命令的執行順序是不確定的。但是可以確定的是不會有兩條命

Redis面試題(一): Redis到底是多執行還是執行

0. redis單執行緒問題     單執行緒指的是網路請求模組使用了一個執行緒(所以不需考慮併發安全性),即一個執行緒處理所有網路請求,其他模組仍用了多個執行緒。   1

Redis核心技術---執行

以前一直有個誤區,以為:高效能伺服器 一定是 多執行緒來實現的 原因很簡單因為誤區二導致的: 多執行緒 一定比 單執行緒 效率高。其實不然。 redis 核心就是 如果我的資料全都在記憶體裡,我單執行緒的去操作 就是效率最高的,為什麼呢,因為多執行緒的本質就是 CPU 模擬出來多個

Redis執行

一、前言 近乎所有與Java相關的面試都會問到快取的問題,基礎一點的會問到什麼是“二八定律”、什麼是“熱資料和冷資料” ,複雜一點的會問到快取雪崩、快取穿透、快取預熱、快取更新、快取降級等問題,這些看似不常見的概念,都與我們的快取伺服器相關,一般常用的快取伺服器有Redis、Memcached等