1. 程式人生 > >linux性能查看調優

linux性能查看調優

打開 新的 3.1 查看內存 user 情況 ESS cPanel 取數據

一 linux服務器性能查看
1.1 cpu性能查看
1、查看物理cpu個數:cat /proc/cpuinfo |grep "physical id"|sort|uniq|wc -l
2、查看每個物理cpu中的core個數:cat /proc/cpuinfo |grep "cpu cores"|wc -l
3、邏輯cpu的個數:cat /proc/cpuinfo |grep "processor"|wc -l物理cpu個數*核數=邏輯cpu個數(不支持超線程技術的情況下)
1.2 內存查看
1、查看內存使用情況:#free -m total used free shared buffers cachedMem: 3949 2519 1430 0 189 1619-/+ buffers/cache: 710 3239Swap: 3576 0 3576
total:內存總數
used:已經使用的內存數
free:空閑內存數shared:多個進程共享的內存總額
- buffers/cache:(已用)的內存數,即used-buffers-cached+ buffers/cache:(可用)的內存數,即free+buffers+cachedBuffer Cache用於針對磁盤塊的讀寫;
Page Cache用於針對文件inode的讀寫,這些Cache能有效地縮短I/O系統調用的時間。對操作系統來說free/used是系統可用/占用的內存;對應用程序來說-/+ buffers/cache是可用/占用內存,因為buffers/cache很快就會被使用。我們工作時候應該從應用角度來看。
1.3 硬盤查看
1、查看硬盤及分區信息:fdisk -l
2、查看文件系統的磁盤空間占用情況:df -h
3、查看硬盤的I/O性能(每隔一秒顯示一次,顯示5次):iostat -x 1 5iostat是含在套裝systat中的,可以用yum -y install systat來安裝。
常關註的參數:
如%util接近100%,說明產生的I/O請求太多,I/O系統已經滿負荷,該磁盤可能存在瓶頸。如idle小於70%,I/O的壓力就比較大了,說明讀取進程中有較多的wait。
4、查看linux系統中某目錄的大小:du -sh /root如發現某個分區空間接近用完,可以進入該分區的掛載點,用以下命令找出占用空間最多的文件或目錄,然後按照從大到小的順序,找出系統中占用最多空間的前10個文件或目錄:
du -cksh *|sort -rn|head -n 10
1.4 查看平均負載有時候系統響應很慢,但又找不到原因,這時就要查看平均負載了,看它是否有大量的進程在排隊等待。
最簡單的命令:
uptime--查看過去的1分鐘、5分鐘和15分鐘內進程隊列中的平均進程數量。還有動態命令top
我們只關心以下部分:
top - 21:33:09 up 1:00, 1 user, load average: 0.00, 0.01, 0.05如果每個邏輯cpu當前的活動進程不大於3,則系統性能良好;如果每個邏輯cpu當前的活動進程不大於4,表示可以接受;如果每個邏輯cpu當前的活動進程大於5,則系統性能問題嚴重。一般計算方法:負載值/邏輯cpu個數
還可以結合vmstat命令來判斷系統是否繁忙,其中:
procsr:等待運行的進程數。b:處在非中斷睡眠狀態的進程數。w:被交換出去的可運行的進程數。memeoryswpd:虛擬內存使用情況,單位為KB。free:空閑的內存,單位為KB。buff:被用來作為緩存的內存數,單位為KB。swapsi:從磁盤交換到內存的交換頁數量,單位為KB。so:從內存交換到磁盤的交換頁數量,單位為KB。iobi:發送到塊設備的塊數,單位為KB。bo:從塊設備接受的塊數,單位為KB。systemin:每秒的中斷數,包括時鐘中斷。cs:每秒的環境切換次數。cpu按cpu的總使用百分比來顯示。us:cpu使用時間。sy:cpu系統使用時間。id:閑置時間。
1.5 其他參數查看內核版本號:uname -a簡化命令:uname -r查看系統是32位還是64位的:file /sbin/init查看發行版:cat /etc/issue或lsb_release -a查看系統已載入的相關模塊:lsmod查看pci設置:lspci二 Linux服務器性能評估2.1.1 影響Linux服務器性能的因素1. 操作系統級CPU內存磁盤I/O帶寬網絡I/O帶寬
2. 程序應用級
2.1.2 系統性能評估標準[td]

影響性能因素 糟糕
CPU user% + sys%< 70% user% + sys%= 85% user% + sys% >=90%
內存 Swap In(si)=0 Swap Out(so)=0 Per CPU with 10 page/s More Swap In & Swap Out
磁盤 iowait % < 20% iowait % =35% iowait % >= 50%

其中:
%user:表示CPU處在用戶模式下的時間百分比。%sys:表示CPU處在系統模式下的時間百分比。%iowait:表示CPU等待輸入輸出完成時間的百分比。swap in:即si,表示虛擬內存的頁導入,即從SWAP DISK交換到RAMswap out:即so,表示虛擬內存的頁導出,即從RAM交換到SWAP DISK
2.1.3 系統性能分析工具
1.常用系統命令Vmstat、sar、iostat、netstat、free、ps、top等
2.常用組合方式vmstat、sar、iostat檢測是否是CPU瓶頸free、vmstat檢測是否是內存瓶頸iostat檢測是否是磁盤I/O瓶頸netstat檢測是否是網絡帶寬瓶頸2.1.4 Linux性能評估與優化
系統整體性能評估(uptime命令)
uptime

16:38:00 up 118 days, 3:01, 5 users,load average: 1.22, 1.02, 0.91

註意:

  • load average三值大小一般不能大於系統CPU的個數。
    系統有8個CPU,如load average三值長期大於8,說明CPU很繁忙,負載很高,可能會影響系統性能。
  • 但偶爾大於8,一般不會影響系統性能。
  • 如load average輸出值小於CPU個數,則表示CPU有空閑時間片,比如本例中的輸出,CPU是非常空閑的

2.2.1 CPU性能評估
1.利用vmstat命令監控系統CPU顯示系統各種資源之間相關性能簡要信息,主要看CPU負載情況。
下面是vmstat命令在某個系統的輸出結果:
[root@node1 ~]#vmstat 2 3procs ———–memory———- —swap– —–io—- –system– —–cpu——r b swpd freebuff cache si so bi bo incs us sy idwa st0 0 0 162240 8304 67032 0 0 13 21 1007 23 0 1 98 0 00 0 0 162240 8304 67032 0 0 1 0 1010 20 0 1 100 0 00 0 0 162240 8304 67032 0 0 1 1 1009 18 0 1 99 0 0Procsr--運行和等待cpu時間片的進程數,這個值如果長期大於系統CPU的個數,說明CPU不足,需要增加CPU
b--在等待資源的進程數,比如正在等待I/O、或者內存交換等。
CPUus用戶進程消耗的CPU 時間百分比。
us的值比較高時,說明用戶進程消耗的cpu時間多,但是如果長期大於50%,就需要考慮優化程序或算法。
sy內核進程消耗的CPU時間百分比。Sy的值較高時,說明內核消耗的CPU資源很多。
根據經驗,us+sy的參考值為80%,如果us+sy大於 80%說明可能存在CPU資源不足。
2.利用sar命令監控系統CPUsar對系統每方面進行單獨統計,但會增加系統開銷,不過開銷可以評估,對系統的統計結果不會有很大影響。
下面是sar命令對某個系統的CPU統計輸出:
[root@webserver ~]# sar -u 3 5Linux 2.6.9-42.ELsmp (webserver) 11/28/2008_i686_ (8 CPU)11:41:24 AM CPU %user %nice%system %iowait %steal %idle11:41:27 AM all 0.88 0.00 0.29 0.00 0.00 98.8311:41:30 AM all 0.13 0.00 0.17 0.21 0.00 99.5011:41:33 AM all 0.04 0.00 0.04 0.00 0.00 99.9211:41:36 AM all 90.08 0.00 0.13 0.16 0.00 9.6311:41:39 AM all 0.38 0.00 0.17 0.04 0.00 99.41Average: all 0.34 0.00 0.16 0.05 0.00 99.45輸出解釋如下:
%user列顯示了用戶進程消耗的CPU 時間百分比。%nice列顯示了運行正常進程所消耗的CPU 時間百分比。%system列顯示了系統進程消耗的CPU時間百分比。%iowait列顯示了IO等待所占用的CPU時間百分比%steal列顯示了在內存相對緊張的環境下pagein強制對不同的頁面進行的steal操作 。%idle列顯示了CPU處在空閑狀態的時間百分比。問題你是否遇到過系統CPU整體利用率不高,而應用緩慢的現象?

在一個多CPU的系統中,如果程序使用了單線程,會出現這麽一個現象,CPU的整體使用率不高,但是系統應用卻響應緩慢,這可能是由於程序使用單線程的原因,單線程只使用一個CPU,導致這個CPU占用率為100%,無法處理其它請求,而其它的CPU卻閑置,這就導致了整體CPU使用率不高,而應用緩慢現象的發生。

2.3.1 內存性能評估
1.利用free指令監控內存free是監控Linux內存使用狀況最常用的指令,看下面的一個輸出:
[root@webserver ~]# free -mtotal used freeshared buffers cachedMem: 8111 7185 926 0 243 6299 -/+ buffers/cache: 643 7468Swap: 8189 0 8189經驗公式:
應用程序可用內存/系統物理內存>70%,表示系統內存資源非常充足,不影響系統性能;
應用程序可用內存/系統物理內存<20%,表示系統內存資源緊缺,需要增加系統內存;
20%<應用程序可用內存/系統物理內存<70%,表示系統內存資源基本能滿足應用需求,暫時不影響系統性能
2.利用vmstat命令監控內存
[root@node1 ~]# vmstat 2 3procs ———–memory———- —swap– —–io—- –system– —–cpu——r b swpd freebuff cache si so bi bo incs us sy idwa st0 0 0 162240 8304 67032 0 0 13 21 1007 23 0 1 98 0 00 0 0 162240 8304 67032 0 0 1 0 1010 20 0 1 100 0 00 0 0 162240 8304 67032 0 0 1 1 1009 18 0 1 99 0 0memory
swpd--切換到內存交換區的內存數量(k為單位)。如swpd值偶爾非0,不影響系統性能free--當前空閑的物理內存數量(k為單位)buff--buffers cache的內存數量,一般對塊設備的讀寫才需要緩沖cache--page cached的內存數量

一般作為文件系統cached,頻繁訪問的文件都會被cached,如cache值較大,說明cached的文件數較多,如果此時IO中bi比較小,說明文件系統效率比較好。

swap
si--由磁盤調入內存,也就是內存進入內存交換區的數量。so--由內存調入磁盤,也就是內存交換區進入內存的數量。si、so的值長期不為0,表示系統內存不足。需增加系統內存。
2.4.1磁盤I/O性能評估
1.磁盤存儲基礎頻繁訪問的文件或數據盡可能用內存讀寫代替直接磁盤I/O,效率高千倍。
將經常進行讀寫的文件與長期不變的文件獨立出來,分別放置到不同的磁盤設備上。

對於寫操作頻繁的數據,可以考慮使用裸設備代替文件系統。

裸設備優點:
數據可直接讀寫,不需經過操作系統級緩存,節省內存資源,避免內存資源爭用;避免文件系統級維護開銷,如文件系統需維護超級塊、I-node等;避免了操作系統cache預讀功能,減少了I/O請求使用裸設備的缺點是:

數據管理、空間管理不靈活,需要很專業的人來操作。

2.利用iostat評估磁盤性能
[root@webserver ~]# iostat -d 2 3Linux 2.6.9-42.ELsmp (webserver) 12/01/2008_i686_ (8 CPU) Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 1.87 2.58 114.12 6479462 286537372 Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 0.00 0.00 0.00 0 0 Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 1.00 0.00 12.00 0 24解釋如下:
Blk_read/s--每秒讀取數據塊數Blk_wrtn/s--每秒寫入數據塊數Blk_read--讀取的所有塊數Blk_wrtn--寫入的所有塊數可通過Blk_read/s和Blk_wrtn/s值對磁盤的讀寫性能有一個基本的了解.
如Blk_wrtn/s值很大,表示磁盤寫操作頻繁,考慮優化磁盤或程序,
如Blk_read/s值很大,表示磁盤直接讀操作很多,可將讀取的數據放入內存
規則遵循:

長期的、超大的數據讀寫,肯定是不正常的,這種情況一定會影響系統性能。

3.利用sar評估磁盤性能
通過“sar –d”組合,可以對系統的磁盤IO做一個基本的統計,請看下面的一個輸出:
[root@webserver ~]# sar -d 2 3Linux 2.6.9-42.ELsmp (webserver) 11/30/2008_i686_ (8 CPU)11:09:33 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:35 PM dev8-0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.0011:09:35 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:37 PM dev8-0 1.00 0.00 12.00 12.00 0.00 0.00 0.00 0.0011:09:37 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:39 PM dev8-0 1.99 0.00 47.76 24.00 0.00 0.50 0.25 0.05Average: DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %utilAverage: dev8-0 1.00 0.00 19.97 20.00 0.00 0.33 0.17 0.02參數含義:
await--平均每次設備I/O操作等待時間(毫秒)svctm--平均每次設備I/O操作的服務時間(毫秒)%util--一秒中有百分之幾的時間用於I/O操作對磁盤IO性能評判標準:
正常svctm應小於await值,而svctm和磁盤性能有關,CPU、內存負荷也會對svctm值造成影響,過多的請求也會間接的導致svctm值的增加。
await值取決svctm和I/O隊列長度以及I/O請求模式,如果svctm的值與await很接近,表示幾乎沒有I/O等待,磁盤性能很好,如果await的值遠高於svctm的值,則表示I/O隊列等待太長,系統上運行的應用程序將變慢,此時可以通過更換更快的硬盤來解決問題。%util--衡量磁盤I/O重要指標,

如%util接近100%,表示磁盤產生的I/O請求太多,I/O系統已經滿負荷工作,該磁盤可能存在瓶頸。

可優化程序或者 通過更換 更高、更快的磁盤。
2.5.1. 網絡性能評估
(1)通過ping命令檢測網絡的連通性
(2)通過netstat –i組合檢測網絡接口狀況
(3)通過netstat –r組合檢測系統的路由表信息
(4)通過sar –n組合顯示系統的網絡運行狀態三
Linux服務器性能調優
1.為磁盤I/O調整Linux內核電梯算法選擇文件系統後,該算法可以平衡低延遲需求,收集足夠數據,有效組織對磁盤讀寫請求。
2.禁用不必要的守護進程,節省內存和CPU資源許多守護進程或服務通常非必需,消耗寶貴內存和CPU時間。將服務器置於險地。禁用可加快啟動時間,釋放內存。減少CPU要處理的進程數一些應被禁用的Linux守護進程,默認自動運行:
序號 守護進程 描述
1 Apmd 高級電源管理守護進程
2 Nfslock 用於NFS文件鎖定
3 Isdn ISDN Moderm支持
4 Autofs 在後臺自動掛載文件系統(如自動掛載CD-ROM)
5 Sendmail 郵件傳輸代理
6 Xfs X Window的字體服務器
3.關掉GUI4、清理不需要的模塊或功能服務器軟件包中太多被啟動的功能或模塊實際上是不需要的(如Apache中的許多功能模塊),禁用掉有助於提高系統內存可用量,騰出資源給那些真正需要的軟件,讓它們運行得更快。
5、禁用控制面板在Linux中,有許多流行的控制面板,如Cpanel,Plesk,Webmin和phpMyAdmin等,禁用釋放出大約120MB內存,內存使用量大約下降30-40%。
6、改善Linux Exim服務器性能使用DNS緩存守護進程,可降低解析DNS記錄需要的帶寬和CPU時間,DNS緩存通過消除每次都從根節點開始查找DNS記錄的需求,從而改善網絡性能。
Djbdns是一個非常強大的DNS服務器,它具有DNS緩存功能,Djbdns比BIND DNS服務器更安全,性能更好,可以直接通過http://cr.yp.to/下載,或通過Red Hat提供的軟件包獲得。
7、使用AES256增強gpg文件加密安全為提高備份文件或敏感信息安全,許多Linux系統管理員都使用gpg進行加密,在使用gpg時,最好指定gpg使用AES256加密算法,AES256使用256位密鑰,它是一個開放的加密算法,美國國家安全局(NSA)使用它保護絕密信息。
8、遠程備份服務安全安全是選擇遠程備份服務最重要的因素,大多數系統管理員都害怕兩件事:(黑客)可以刪除備份文件,不能從備份恢復系統。
為了保證備份文件100%的安全,備份服務公司提供遠程備份服務器,使用scp腳本或RSYNC通過SSH傳輸數據,這樣,沒有人可以直接進入和訪問遠程系統,因此,也沒有人可以從備份服務刪除數據。在選擇遠程備份服務提供商時,最好從多個方面了解其服務強壯性,如果可以,可以親自測試一下。
9、更新默認內核參數設置為了順利和成功運行企業應用程序,如數據庫服務器,可能需要更新一些默認的內核參數設置,例如,2.4.x系列內核消息隊列參數msgmni有一個默認值(例如,共享內存,或shmmax在Red Hat系統上默認只有33554432字節),它只允許有限的數據庫並發連接,下面為數據庫服務器更好地運行提供了一些建議值(來自IBM DB2支持網站):
kernel.shmmax=268435456 (32位)
kernel.shmmax=1073741824 (64位)
kernel.msgmni=1024
fs.file-max=8192
kernel.sem=”250 32000 32 1024″
10、優化TCP優化TCP協議有助於提高網絡吞吐量,跨廣域網的通信使用的帶寬越大,延遲時間越長時,建議使用越大的TCP Linux大小,以提高數據傳輸速率,TCP Linux大小決定了發送主機在沒有收到數據傳輸確認時,可以向接收主機發送多少數據。
11、選擇正確的文件系統

使用ext4文件系統取代ext3

● Ext4是ext3文件系統的增強版,擴展了存儲限制
●具有日誌功能,保證高水平的數據完整性(在非正常關閉事件中)
●非正常關閉和重啟時,它不需要檢查磁盤(這是一個非常耗時的動作)
●更快的寫入速度,ext4日誌優化了硬盤磁頭動作
12、使用noatime文件系統掛載選項在文件系統啟動配置文件fstab中使用noatime選項,如果使用了外部存儲,這個掛載選項可以有效改善性能。
13、調整Linux文件描述符限制Linux限制了任何進程可以打開的文件描述符數量,默認限制是每進程1024,這些限制可能會阻礙基準測試客戶端(如httperf和apachebench)和Web服務器本身獲得最佳性能,Apache每個連接使用一個進程,因此不會受到影響,但單進程Web服務器,如Zeus是每連接使用一個文件描述符,因此很容易受默認限制的影響。
打開文件限制是一個可以用ulimit命令調整的限制,ulimit -aS命令顯示當前的限制,ulimit -aH命令顯示硬限制(在未調整/proc中的內核參數前,你不能增加限制)。
Linux第三方應用程序性能技巧
對於運行在Linux上的第三方應用程序,一樣有許多性能優化技巧,這些技巧可以幫助你提高Linux服務器的性能,降低運行成本。
14、正確配置MySQL為了給MySQL分配更多的內存,可設置MySQL緩存大小,要是MySQL服務器實例使用了更多內存,就減少緩存大小,如果MySQL在請求增多時停滯不動,就增加MySQL緩存。
15、正確配置Apache檢查Apache使用了多少內存,再調整StartServers和MinSpareServers參數,以釋放更多的內存,將有助於你節省30-40%的內存。
16、分析Linux服務器性能提高系統效率最好的辦法是找出導致整體速度下降的瓶頸並解決掉,下面是找出系統關鍵瓶頸的一些基本技巧:
● 當大型應用程序,如OpenOffice和Firefox同時運行時,計算機可能會開始變慢,內存不足的出現幾率更高。
● 如果啟動時真的很慢,可能是應用程序初次啟動需要較長的加載時間,一旦啟動好後運行就正常了,否則很可能是硬盤太慢了。
●CPU負載持續很高,內存也夠用,但CPU利用率很低,可以使用CPU負載分析工具監控負載時間。
17、學習5個Linux性能命令使用幾個命令就可以管理Linux系統的性能了,下面列出了5個最常用的Linux性能命令,包括
top、vmstat、iostat、free和sar,它們有助於系統管理員快速解決性能問題。
(1)top當前內核服務的任務,還顯示許多主機狀態的統計數據,默認情況下,它每隔5秒自動更新一次。
如:當前正常運行時間,系統負載,進程數量和內存使用率,
此外,這個命令也顯示了那些使用最多CPU時間的進程(包括每個進程的各種信息,如運行用戶,執行的命令等)。
(2)vmstatVmstat命令提供當前CPU、IO、進程和內存使用率的快照,它和top命令類似,自動更新數據,如:
$ vmstat 10
(3)iostatIostat提供三個報告:CPU利用率、設備利用率和網絡文件系統利用率,使用-c,-d和-h參數可以分別獨立顯示這三個報告。
(4)free顯示主內存和交換空間內存統計數據,指定-t參數顯示總內存,指定-b參數按字節為單位,使用-m則以兆為單位,默認情況下千字節為單位。
Free命令也可以使用-s參數加一個延遲時間(單位:秒)連續運行,如:
$ free -s 5
(5)sar收集,查看和記錄性能數據,這個命令比前面幾個命令歷史更悠久,它可以收集和顯示較長周期的數據。
其它
下面是一些歸類為其它的性能技巧:
18、將日誌文件轉移到內存中當一臺機器處於運行中時,最好是將系統日誌放在內存中,當系統關閉時再將其復制到硬盤,當你運行一臺開啟了syslog功能的筆記本電腦或移動設備時,ramlog可以幫助你提高系統電池或移動設備閃存驅動器的壽命,使用ramlog的一個好處是,不用再擔心某個守護進程每隔30秒向syslog發送一條消息,放在以前,硬盤必須隨時保持運轉,這樣對硬盤和電池都不好。
19、先打包,後寫入在內存中劃分出固定大小的空間保存日誌文件,這意味著筆記本電腦硬盤不用一直保持運轉,只有當某個守護進程需要寫入日誌時才運轉,註意ramlog使用的內存空間大小是固定的,否則系統內存會很快被用光,如果筆記本使用固態硬盤,可以分配50-80MB內存給ramlog使用,ramlog可以減少許多寫入周期,極大地提高固態硬盤的使用壽命。
20、一般調優技巧盡可能使用靜態內容替代動態內容,如果你在生成天氣預告,或其它每隔1小時就必須更新的數據,最好是寫一個程序,每隔1小時生成一個靜態的文件,而不是讓用戶運行一個CGI動態地生成報告。
為動態應用程序選擇最快最合適的API,CGI可能最容易編程,但它會為每個請求產生一個進程,通常,這是一個成本很高,且不必要的過程,FastCGI是更好的選擇,和Apache的mod_perl一樣,都可以極大地提高應用程序的性能 --------------------- 本文來自 工程師WWW 的CSDN 博客 ,全文地址請點擊:https://blog.csdn.net/weiwangchao_/article/details/79000329?utm_source=copy

linux性能查看調優