MySQL - 如何提高SQL的查詢效率(where條件優化)
目錄
說在前面
整天說SQL優化,SQL優化,到底怎麼才算是SQL優化呢,下面從百度總結了一些關於Oracle裡常用的一些有效的優化方法。僅供參考,文章內容來源於網路。
35條優化規則
(1)優先考慮建立索引
對查詢進行優化,應儘量避免全表掃描,首先應考慮在 where 及 order by 涉及的列上建立索引。
(2)需要當心的WHERE子句
應儘量避免在 where 子句中使用!=或<>操作符,否則將引擎放棄使用索引而進行全表掃描。
-
‘!=' 將不使用索引。記住, 索引只能告訴你什麼存在於表中, 而不能告訴你什麼不存在於表中
-
‘||'是字元連線函式。就象其他函式那樣, 停用了索引。
-
‘+'是數學函式。就象其他數學函式那樣, 停用了索引。
-
相同的索引列不能互相比較,這將會啟用全表掃描。
(3)避免在索引列上使用IS NULL和IS NOT NULL
應儘量避免在 where 子句中對欄位進行 null 值判斷,否則將導致引擎放棄使用索引而進行全表掃描,如:
低效: (索引失效)
select id from t where num is null;
高效:(索引有效)
可以在num上設定預設值0,確保表中num列沒有null值,然後這樣查詢:
select id from t where num = 0;
(4)用UNION替換OR (適用於索引列)
應儘量避免在 where 子句中使用 or 來連線條件,否則將導致引擎放棄使用索引而進行全表掃描,如:
低效: (索引失效)
select id from t where num=10 or num=20;
高效:(索引有效)
可以這樣查詢:
select id from t where num=10
union all
select id from t where num=20
(5)模糊查詢也將會導致全表掃描
select id from t where name like '%abc%';
若要提高效率,可以考慮全文檢索。
(6)IN 和 NOT IN 也要謹慎使用
否則會導致全表掃描
低效:
select id from t where num in(1,2,3);
高效:
對於連續的數值,能用 between 就不要用 in 了:
select id from t where num between 1 and 3;
(7)避免在WHERE 子句中使用引數
如果在 where 子句中使用引數,也會導致全表掃描。因為SQL只有在執行時才會解析區域性變數,但優化程式不能將訪問計劃的選擇推遲到執行時;它必須在編譯時進行選擇。然而,如果在編譯時建立訪問計劃,變數的值還是未知的,因而無法作為索引選擇的輸入項。如下面語句將進行全表掃描:
低效:
select id from t where [email protected]
高效:
可以改為強制查詢使用索引:
select id from t with(index(索引名)) where [email protected]
(8)避免在 WHERE 子句中對欄位進行表示式操作
這將導致引擎放棄使用索引而進行全表掃描。如:
低效:select id from t where num/2=100;
高效: select id from t where num=100*2;
(9)避免在WHERE 子句中對欄位進行函式操作
這將導致引擎放棄使用索引而進行全表掃描。如:
低效:
name以abc開頭的id :select id from t where substring(name,1,3)='abc'
'2005-11-30'生成的id:select id from t where datediff(day,createdate,'2005-11-30')=0
高效:
select id from t where name like 'abc%'
select id from t where createdate>='2005-11-30' and createdate<'2005-12-1'
(10)不要在 WHERE 子句中的“=”左邊進行運算
包括不限於函式、算術運算或其他表示式運算,否則系統將可能無法正確使用索引。
(11)複合索引注意事項
在使用索引欄位作為條件時,如果該索引是複合索引,那麼必須使用到該索引中的第一個欄位作為條件時才能保證系統使用該索引,否則該索引將不會被使用,並且應儘可能的讓欄位順序與索引順序相一致。
(12)不要寫一些沒有意義的查詢
如需要生成一個空表結構:
select col1,col2 into #t from t where 1=0
這類程式碼不會返回任何結果集,但是會消耗系統資源的,應改成這樣:
create table #t(...)
(13)用EXISTS替代IN、用NOT EXISTS替代NOT IN
在許多基於基礎表的查詢中,為了滿足一個條件,往往需要對另一個表進行聯接。在這種情況下,使用EXISTS(或NOT EXISTS)通常將提高查詢的效率。在子查詢中,NOT IN子句將執行一個內部的排序和合並。無論在哪種情況下,NOT IN都是最低效的 (因為它對子查詢中的表執行了一個全表遍歷)。為了避免使用NOT IN ,我們可以把它改寫成外連線(Outer Joins)或NOT EXISTS。
低效: select num from a where num in(select num from b)
高效: select num from a where exists(select 1 from b where num=a.num)
(14)當索引數目大於一定比例時,索引則無效
並不是所有索引對查詢都有效,SQL是根據表中資料來進行查詢優化的,當索引列有大量資料重複時,SQL查詢可能不會去利用索引,如一表中有欄位sex,male、female幾乎各一半,那麼即使在sex上建了索引也對查詢效率起不了作用。
(15)索引數目最好保持在6個左右
索引並不是越多越好,索引固然可以提高相應的 select 的效率,但同時也降低了 insert 及 update 的效率,因為 insert 或 update 時有可能會重建索引,所以怎樣建索引需要慎重考慮,視具體情況而定。一個表的索引數最好不要超過6個,若太多則應考慮一些不常使用到的列上建的索引是否有必要。
(16)避免更新 clustered 索引資料列
應儘可能的避免更新 clustered 索引資料列,因為 clustered 索引資料列的順序就是表記錄的物理儲存順序,一旦該列值改變將導致整個表記錄的順序的調整,會耗費相當大的資源。若應用系統需要頻繁更新 clustered 索引資料列,那麼需要考慮是否應將該索引建為 clustered 索引。
(17)儘量使用數字型欄位
若只含數值資訊的欄位儘量不要設計為字元型,這會降低查詢和連線的效能,並會增加儲存開銷。這是因為引擎在處理查詢和連線時會逐個比較字串中每一個字元,而對於數字型而言只需要比較一次就夠了。
(18)使用 varchar/nvarchar 代替 char/nchar
因為首先變長欄位儲存空間小,可以節省儲存空間,其次對於查詢來說,在一個相對較小的欄位內搜尋效率顯然要高些。
(19)SELECT子句中避免使用‘*’
任何地方都不要使用 select * from t ,用具體的欄位列表代替“*”,不要返回用不到的任何欄位。
(20)儘量使用表變數來代替臨時表
如果表變數包含大量資料,請注意索引非常有限(只有主鍵索引)。
(21)避免頻繁建立和刪除臨時表
以減少系統表資源的消耗。
(22)適當的使用臨時表
臨時表並不是不可使用,適當地使用它們可以使某些例程更有效,例如:
當需要重複引用大型表或常用表中的某個資料集時。但是,對於一次性事件,最好使用匯出表。
(23)使用 select into 代替 create table
在新建臨時表時,如果一次性插入資料量很大,那麼可以使用 select into 代替 create table,避免造成大量 log ,以提高速度;如果資料量不大,為了緩和系統表的資源,應先create table,然後insert。
(24)顯式刪除臨時表
如果使用到了臨時表,在儲存過程的最後務必將所有的臨時表顯式刪除,先 truncate table ,然後 drop table ,這樣可以避免系統表的較長時間鎖定。
(25)儘量避免使用遊標
因為遊標的效率較差,如果遊標操作的資料超過1萬行,那麼就應該考慮改寫。
(26)基於集的方法通常更有效
使用基於遊標的方法或臨時表方法之前,應先尋找基於集的解決方案來解決問題,基於集的方法通常更有效。
(27)根據情況去使用遊標
與臨時表一樣,遊標並不是不可使用。對小型資料集使用 FAST_FORWARD 遊標通常要優於其他逐行處理方法,尤其是在必須引用幾個表才能獲得所需的資料時。在結果集中包括“合計”的例程通常要比使用遊標執行的速度快。如果開發時間允許,基於遊標的方法和基於集的方法都可以嘗試一下,看哪一種方法的效果更好。
(28)無需在執行儲存過程和觸發器的每個語句後向客戶端傳送 DONE_IN_PROC 訊息
在所有的儲存過程和觸發器的開始處設定 SET NOCOUNT ON ,在結束時設定 SET NOCOUNT OFF 。無需在執行儲存過程和觸發器的每個語句後向客戶端傳送 DONE_IN_PROC 訊息。
(29)儘量避免向客戶端返回大資料量
若資料量過大,應該考慮相應需求是否合理。
(30)儘量避免大事務操作
儘量避免大事務操作,提高系統併發能力。
(31)不要輕易用order by rand()
絕對不要輕易用order by rand() ,很可能會導致mysql的災難!!
(32)每個表都應該設定一個ID主鍵
每個表都應該設定一個ID主鍵,最好的是一個INT型,並且設定上自動增加的 AUTO_INCREMENT標誌,這點其實應該作為設計表結構的第一件必然要做的事!!
(33)拆分大的 DELETE 或 INSERT 語句
因為這兩個操作是會鎖表的,表一鎖住了,別的操作都進不來了,就我來說 有時候我寧願用for迴圈來一個個執行這些操作。
(34)永遠別要用複雜的mysql語句來顯示你的聰明
就我來說,看到一次關聯了三,四個表的語句,只會讓人覺得很不靠譜。
(35)什麼情況下無法使用索引
- 以%開頭的like查詢;
- 資料型別出現隱式轉換的時候也不會使用索引,特別是當列型別是字串,那麼一定記得在where條件中把字串常量值用引號引起來,否則即便這個列上有索引,MySQL也不會用到,因為MySQL預設把輸入的常量值進行轉換以後才進行檢索;
- 複合索引的情況下,如果查詢條件不包含索引列的最左邊部分,即不滿足最左字首原則,則不會使用索引;
- 如果mysql估計使用索引掃描比全表掃描更慢,則不使用索引。(掃描資料超過30%,都會走全表);
- 用or分割開的條件,如果 or前的條件中的列有索引,而後面的列中沒有索引,那麼涉及的索引都不會被用到;
- 欄位使用函式,將無法使用索引;
- Join 語句中 Join 條件欄位型別不一致的時候 MySQL 無法使用索引。
總結
以上優化,包括不限於Where條件語句優化,以及在where時索引如何使用,哪些失效以及避免產生的問題的總結。不僅僅適用於MySQL,本文僅根據 MySQL 為栗子。
關於Oracle 查詢優化,這裡個人總結了34條優化規則,可以點選: