1. 程式人生 > >超詳細Python正則表達式操作指南(re使用),一

超詳細Python正則表達式操作指南(re使用),一

恢復 類別 這也 inline cti 防止 lib 解釋 事物

Python 自1.5版本起增加了re 模塊,它提供 Perl 風格的正則表達式模式。Python 1.5之前版本則是通過 regex 模塊提供 Emecs 風格的模式。Emacs 風格模式可讀性稍差些,而且功能也不強,因此編寫新代碼時盡量不要再使用 regex 模塊,當然偶爾你還是可能在老代碼裏發現其蹤影。

就其本質而言,正則表達式(或 RE)是一種小型的、高度專業化的編程語言,(在Python中)它內嵌在Python中,並通過 re 模塊實現。使用這個小型語言,你可以為想要匹配的相應字符串集指定規則;該字符串集可能包含英文語句、e-mail地址、TeX命令或任何你想搞定的東西。然後你可以問諸如“這個字符串匹配該模式嗎?”或“在這個字符串中是否有部分匹配該模式呢?”。你也可以使用 RE 以各種方式來修改或分割字符串。

正則表達式模式被編譯成一系列的字節碼,然後由用 C 編寫的匹配引擎執行。在高級用法中,也許還要仔細留意引擎是如何執行給定 RE ,如何以特定方式編寫 RE 以令生產的字節碼運行速度更快。本文並不涉及優化,因為那要求你已充分掌握了匹配引擎的內部機制。

正則表達式語言相對小型和受限(功能有限),因此並非所有字符串處理都能用正則表達式完成。當然也有些任務可以用正則表達式完成,不過最終表達式會變得異常復雜。碰到這些情形時,編寫 Python 代碼進行處理可能反而更好;盡管 Python 代碼比一個精巧的正則表達式要慢些,但它更易理解。

簡單模式

我們將從最簡單的正則表達式學習開始。python學習交流-719-139-688由於正則表達式常用於字符串操作,那我們就從最常見的任務:字符匹配 下手。

有關正則表達式底層的計算機科學上的詳細解釋(確定性和非確定性有限自動機),你可以查閱編寫編譯器相關的任何教科書。

字符匹配

大多數字母和字符一般都會和自身匹配。例如,正則表達式 test 會和字符串“test”完全匹配。(你也可以使用大小寫不敏感模式,它還能讓這個 RE 匹配“Test”或“TEST”;稍後會有更多解釋。)

這個規則當然會有例外;有些字符比較特殊,它們和自身並不匹配,而是會表明應和一些特殊的東西匹配,或者它們會影響到 RE 其它部分的重復次數。本文很大篇幅專門討論了各種元字符及其作用。

這裏有一個元字符的完整列表;其含義會在本指南餘下部分進行討論。

. ^ $ *+ ? { [ ] | ( )

我們首先考察的元字符是"[" 和 "]"。它們常用來指定一個字符類別,所謂字符類別就是你想匹配的一個字符集。字符可以單個列出,也可以用“-”號分隔的兩個給定字符來表示一個字符區間。例如,[abc] 將匹配"a", "b", 或 "c"中的任意一個字符;也可以用區間[a-c]來表示同一字符集,和前者效果一致。如果你只想匹配小寫字母,那幺 RE 應寫成 [a-z].

元字符在類別裏並不起作用。例如,[akm$]將匹配字符"a", "k", "m", 或 "\(" 中的任意一個;"\)"通常用作元字符,但在字符類別裏,其特性被除去,恢復成普通字符。

你可以用補集來匹配不在區間範圍內的字符。其做法是把"^"作為類別的首個字符;其它地方的"^"只會簡單匹配 "^"字符本身。例如,[^5] 將匹配除 "5" 之外的任意字符。

也許最重要的元字符是反斜杠"""。 做為 Python 中的字符串字母,反斜杠後面可以加不同的字符以表示不同特殊意義。它也可以用於取消所有的元字符,這樣你就可以在模式中匹配它們了。舉個例子,如果你需要匹配字符 "[" 或 """,你可以在它們之前用反斜杠來取消它們的特殊意義: "[ 或 ""。

一些用 """ 開始的特殊字符所表示的預定義字符集通常是很有用的,象數字集,字母集,或其它非空字符集。下列是可用的預設特殊字符:

比較詳細Python正則表達式操作指南(re使用),一

這樣特殊字符都可以包含在一個字符類中。如,["s,.]字符類將匹配任何空白字符或","或"."。

本節最後一個元字符是 . 。它匹配除了換行字符外的任何字符,在 alternate 模式(re.DOTALL)下它甚至可以匹配換行。"." 通常被用於你想匹配“任何字符”的地方。

重復

正則表達式第一件能做的事是能夠匹配不定長的字符集,而這是其它能作用在字符串上的方法所不能做到的。 不過,如果那是正則表達式唯一的附加功能的話,那麽它們也就不那麽優秀了。它們的另一個功能就是你可以指定正則表達式的一部分的重復次數。

我們討論的第一個重復功能的元字符是 並不匹配字母字符 "*";相反,它指定前一個字符可以被匹配零次或更多次,而不是只有一次。

舉個例子,ca*t 將匹配 "ct" (0 個 "a" 字符), "cat" (1 個 "a"), "caaat" (3 個 "a" 字符)等等。RE 引擎有各種來自 C 的整數類型大小的內部限制,以防止它匹配超過2億個 "a" 字符;你也許沒有足夠的內存去建造那麽大的字符串,所以將不會累計到那個限制。

象 * 這樣地重復是“貪婪的”;當重復一個 RE 時,匹配引擎會試著重復盡可能多的次數。如果模式的後面部分沒有被匹配,匹配引擎將退回並再次嘗試更小的重復。

一步步的示例可以使它更加清晰。讓我們考慮表達式 a[bcd]*b。它匹配字母 "a",零個或更多個來自類 [bcd]中的字母,最後以 "b" 結尾。現在想一想該 RE 對字符串 "abcbd" 的匹配。

比較詳細Python正則表達式操作指南(re使用),一

RE 的結尾部分現在可以到達了,它匹配 "abcb"。這證明了匹配引擎一開始會盡其所能進行匹配,如果沒有匹配然後就逐步退回並反復嘗試 RE 剩下來的部分。直到它退回嘗試匹配 [bcd] 到零次為止,如果隨後還是失敗,那麽引擎就會認為該字符串根本無法匹配 RE 。

另一個重復元字符是 +,表示匹配一或更多次。請註意 * 和 + 之間的不同;*匹配零或更多次,所以根本就可以不出現,而 + 則要求至少出現一次。用同一個例子,ca+t 就可以匹配 "cat" (1 個 "a"), "caaat" (3 個 "a"), 但不能匹配 "ct"。

還有更多的限定符。問號 ? 匹配一次或零次;你可以認為它用於標識某事物是可選的。例如:home-?brew 匹配 "homebrew" 或 "home-brew"。

最復雜的重復限定符是 {m,n},其中 m 和 n 是十進制整數。該限定符的意思是至少有 m 個重復,至多到 n 個重復。舉個例子,a/{1,3}b 將匹配 "a/b","a//b" 和 "a///b"。它不能匹配 "ab" 因為沒有斜杠,也不能匹配 "a////b" ,因為有四個。

你可以忽略 m 或 n;因為會為缺失的值假設一個合理的值。忽略 m 會認為下邊界是 0,而忽略 n 的結果將是上邊界為無窮大 -- 實際上是先前我們提到的 2 兆,但這也許同無窮大一樣。

細心的讀者也許註意到其他三個限定符都可以用這樣方式來表示。 {0,} 等同於 ,{1,} 等同於 +,而{0,1}則與 ? 相同。如果可以的話,最好使用 ,+,或?。很簡單因為它們更短也再容易懂。

使用正則表達式

現在我們已經看了一些簡單的正則表達式,那麽我們實際在 Python 中是如何使用它們的呢? re 模塊提供了一個正則表達式引擎的接口,可以讓你將 REs 編譯成對象並用它們來進行匹配。

編譯正則表達式

正則表達式被編譯成 RegexObject 實例,可以為不同的操作提供方法,如模式匹配搜索或字符串替換。

比較詳細Python正則表達式操作指南(re使用),一

re.compile() 也接受可選的標誌參數,常用來實現不同的特殊功能和語法變更。我們稍後將查看所有可用的設置,但現在只舉一個例子:

比較詳細Python正則表達式操作指南(re使用),一

RE 被做為一個字符串發送給 re.compile()。REs 被處理成字符串是因為正則表達式不是 Python 語言的核心部分,也沒有為它創建特定的語法。(應用程序根本就不需要 REs,因此沒必要包含它們去使語言說明變得臃腫不堪。)而 re 模塊則只是以一個 C 擴展模塊的形式來被 Python 包含,就象 socket 或 zlib 模塊一樣。

將 REs 作為字符串以保證 Python 語言的簡潔,但這樣帶來的一個麻煩就是象下節標題所講的。

反斜杠的麻煩

在早期規定中,正則表達式用反斜杠字符 (""") 來表示特殊格式或允許使用特殊字符而不調用它的特殊用法。這就與 Python 在字符串中的那些起相同作用的相同字符產生了沖突。

讓我們舉例說明,你想寫一個 RE 以匹配字符串 ""section",可能是在一個 LATEX 文件查找。為了要在程序代碼中判斷,首先要寫出想要匹配的字符串。接下來你需要在所有反斜杠和元字符前加反斜杠來取消其特殊意義。

比較詳細Python正則表達式操作指南(re使用),一

簡單地說,為了匹配一個反斜杠,不得不在 RE 字符串中寫 ‘‘,因為正則表達式中必須是 "",而每個反斜杠按 Python 字符串字母表示的常規必須表示成 ""。在 REs 中反斜杠的這個重復特性會導致大量重復的反斜杠,而且所生成的字符串也很難懂。

解決的辦法就是為正則表達式使用 Python 的 raw 字符串表示;在字符串前加個 "r" 反斜杠就不會被任何特殊方式處理,所以 r" " 就是包含"" 和 "n" 的兩個字符,而 " " 則是一個字符,表示一個換行。正則表達式通常在 Python 代碼中都是用這種 raw 字符串表示。

比較詳細Python正則表達式操作指南(re使用),一

超詳細Python正則表達式操作指南(re使用),一