代码视界

Hanpeng Chen的个人博客

Python从小白到攻城狮(16)——正则表达式

Python Python教程 正则表达式 2019/11/06

本文于 1605 天之前发表，文中内容可能已经过时。

基础

正则表达式(Regular Expression)是一个特殊的字符序列，它能帮助我们方便地检查一个字符串是否与某种模式匹配。

正则表达式的设计思想是用一种描述性的语言来给字符串定义一个规则，凡是符合规则的字符串，我们就认为它“匹配”了，否则，该字符串就是不合法的。

因为正则表达式也是用字符串表示的，所以，我们要首先了解如何用字符串来描述字符。

在正则表达式中，如果直接给出字符，就是精确匹配。用\d可以匹配一个数字，\w可以匹配一个字母或数字。.可以匹配任意字符。

在正则表达式中，要匹配边长的字符，可以用*表示任意个字符（包括0个），+表示至少一个字符，?表示0个或1个字符，用{n}表示n个字符，用{n,m}表示n-m个字符。

我们一起来看个例子：

1
\d{3}\s+\d{3,8}

我们来从左到右解读一下：

\d{3}表示匹配3个数字，例如’010’；

\s可以匹配一个空格（也包括Tab等空白符），所以\s+表示至少有一个空格，例如匹配’ ‘，’ ‘等；

\d{3,8}表示3-8个数字，例如’1234567’。

综合起来，上面的正则表达式可以匹配以任意个空格隔开的带区号的电话号码。

如果要匹配 010-12345 这样的号码呢？由于 - 是特殊字符，在正则表达式中，要用 \ 转义，所以，上面的正则是\d{3}\-\d{3,8}。

进阶

要做更精确地匹配，可以用[]表示范围，比如：

[0-9a-zA-Z_]可以匹配一个数字、字母或者下划线；

[0-9a-zA-Z_]+可以匹配至少由一个数字、字母或者下划线组成的字符串，比如’a100’，’0_Z’，’Py3000’等等；

[a-zA-Z_][0-9a-zA-Z_]*可以匹配由字母或下划线开头，后接任意个由一个数字、字母或者下划线组成的字符串，也就是Python合法的变量；

[a-zA-Z_][0-9a-zA-Z_]{0, 19}更精确地限制了变量的长度是1-20个字符（前面1个字符+后面最多19个字符）。

A|B可以匹配A或B，所以(P|p)ython可以匹配’Python’或者’python’。

^表示行的开头，^\d表示必须以数字开头。

$表示行的结束，\d$表示必须以数字结束。

re模块

Python从1.5版本开始增加了re模块，该模块提供了Perl风格的正则表达式模式。

re模块使Python语言拥有全部的正则表达式功能。

compile函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式匹配和替换。

re模块也提供了与这些方法功能完全一致的函数，这些函数使用一个模式字符串作为它们的第一个参数。

re.match函数

re.match 尝试从字符串的起始位置匹配一个模式。匹配成功方法返回一个匹配的对象，否则返回none。

函数语法：

1
re.match(pattern, string, flags=0)

函数参数说明：

  • pattern：匹配的正则表达式
  • string：要匹配的字符串
  • flags：标志位，用于控制正则表达式的匹配方式，如：是否区分大小写，多行匹配等等。

我们可以使用group(num) 或groups()匹配对象函数来获取匹配表达式。

  • group(num)：匹配的整个表达式的字符串，group()可以一次输入多个组号，在这种情况下将返回一个包含那些组所对应值的元组。
  • groups()：返回一个包含所有小组字符串的元组，从1到所含的小组号。

实例：

1
2
3
4
5
6
7
8
9
10
11
12
13
import re
print(re.match('www', 'www.chenhanpeng.com').span())  # 在起始位置匹配
print(re.match('com', 'www.chenhanpeng.com'))      # 不在起始位置匹配

line = "Cats are smarter than dogs"
# .* 表示任意匹配除换行符（\n、\r）之外的任何单个或多个字符
matchObject = re.match( r'(.*) are (.*?) .*', line, re.M|re.I)
if matchObject:
    print('matchObject.group() :', matchObject.group())
    print('matchObject.group(1) :', matchObject.group(1))
    print('matchObject.group(2) :', matchObject.group(2))
else:
    print('no match')

re.search方法

re.search()扫描整个字符串并返回第一个成功的匹配对象，否则返回None。
语法：

1
re.search(pattern, string, flags=0)

我们可以使用group(num)或groups()匹配对象函数来获取匹配表达式。

实例：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
import re
print(re.search('www', 'www.chenhanpeng.com').span())
print(re.search('www', 'www.chenhanpeng.com').span())

line = "Cats are smarter than dogs";
 
searchObj = re.search( r'(.*) are (.*?) .*', line, re.M|re.I)
 
if searchObj:
   print ("searchObj.group() : ", searchObj.group())
   print ("searchObj.group(1) : ", searchObj.group(1))
   print ("searchObj.group(2) : ", searchObj.group(2))
else:
   print ("Nothing found!!")

re.match和re.search的区别

re.match只匹配字符串的开始，如果字符串开始不符合正则表达式，则匹配失败，函数返回None；而re.search匹配整个字符串，直到找到一个匹配。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
import re
 
line = "Cats are smarter than dogs";
 
matchObj = re.match( r'dogs', line, re.M|re.I)
if matchObj:
   print ("match --> matchObj.group() : ", matchObj.group())
else:
   print ("No match!!")
 
matchObj = re.search( r'dogs', line, re.M|re.I)
if matchObj:
   print ("search --> matchObj.group() : ", matchObj.group())
else:
   print ("No match!!")

实例执行结果如下：

1
2
No match!!
search --> matchObj.group() :  dogs

检索和替换

re模块提供了re.sub用于替换字符串中的匹配项。

语法：

1
re.sub(pattern, repl, string, count=0, flags=0)

参数：

  • pattern : 正则中的模式字符串。
  • repl : 替换的字符串，也可为一个函数。
  • string : 要被查找替换的原始字符串。
  • count : 模式匹配后替换的最大次数，默认 0 表示替换所有的匹配。
  • flags : 编译时用的匹配模式，数字形式。
    前三个为必选参数，后两个为可选参数。

实例：

1
2
3
4
5
6
7
8
9
10
import re

phone = '010-23123453 # 这是一个电话号码'

# 删除注释
num = re.sub(r'#.*$', '', phone)
print(num)

num1 = re.sub(r'\D', '', phone)
print(num1)

实例运行结果：

1
2
010-23123453
01023123453

repl参数是一个函数

re.compile函数

compile函数用于编译正则表达式，生成一个正则表达式（Pattern）对象，供match()和search()方法使用。

语法如下：

1
re.compile(pattern[, flags])

参数：

  • pattern : 一个字符串形式的正则表达式
  • flags 可选，表示匹配模式，比如忽略大小写，多行模式等，具体参数为：
  • re.I 忽略大小写
  • re.L 表示特殊字符集 \w, \W, \b, \B, \s, \S 依赖于当前环境
  • re.M 多行模式
  • re.S 即为’ . ‘并且包括换行符在内的任意字符（’ . ‘不包括换行符）
  • re.U 表示特殊字符集 \w, \W, \b, \B, \d, \D, \s, \S 依赖于 Unicode 字符属性数据库
  • re.X 为了增加可读性，忽略空格和’ # ‘后面的注释

re.findall

在字符串中找到正则表达式所匹配的所有子串，并返回一个列表；如果没有找到，返回空列表。

注意：match和search是匹配一次，而findall是匹配所有。

语法格式如下：

1
re.findall(string[, pos[, endpos]])

参数：

  • string：待匹配的字符串
  • pos：可选参数，指定字符串的起始位置，默认为0
  • endpos：可选参数，指定字符串的结束位置，默认字符串的长度。

实例：查找字符串中的所有数字。

1
2
3
4
5
6
7
8
import re

str = 'hello 12356 world! 0'
pattern = re.compile(r'\d+')
result1 = pattern.findall(str)
result2 = pattern.findall(str, 0, 8)
print(result1)
print(result2)

代码执行结果如下：

1
2
['12356', '0']
['12']

re.finditer

和 findall 类似，在字符串中找到正则表达式所匹配的所有子串，并把它们作为一个迭代器返回。

语法：

1
re.finditer(pattern, string, flags=0)

实例如下：

1
2
3
4
5
import re
 
it = re.finditer(r"\d+","12a32bc43jf3") 
for match in it: 
    print (match.group() )

执行结果如下：

1
2
3
4
12
32
43
3

re.split

split 方法按照能够匹配的子串将字符串分割后返回列表，它的使用形式如下：

语法：

1
re.split(pattern, string[, maxsplit=0, flags=0])

参数：

  • pattern：匹配的正则表达式
  • string：待匹配的字符串
  • maxsplit：分隔次数，maxsplit=1 表示分隔一次，默认为0，不限制次数。

实例：

1
2
3
4
5
6
import re
print(re.split('\W+', 'runoob, runoob, runoob.'))
print(re.split('(\W+)', ' runoob, runoob, runoob.'))
print(re.split('\W+', ' runoob, runoob, runoob.', 1))
 
print(re.split('a*', 'hello world'))   # 对于一个找不到匹配的字符串而言，split 不会对其作出分割

正则表达式对象

re.RegexObject

re.compile()返回RegexObject对象。

re.MatchObject

group()返回被RE匹配的字符串。

  • start()：返回匹配开始的位置
  • end()：返回匹配结束的位置
  • span()：返回一个元组包含匹配（开始，结束）的位置

正则表达式修饰符-可选标志

正则表达式可以包含一些可选标志修饰符来控制匹配的模式。修饰符被指定为一个可选的标志。多个标志可以通过按位OR(|)来指定。如：re.I | re.M 被设置为I和M标志。

修饰符有下面几个：

  • re.I ： 使匹配对大小写不敏感
  • re.L ： 做本地化识别（locale-aware）匹配
  • re.M ： 多行匹配，影响 ^ 和 $
  • re.S ： 使 . 匹配包括换行在内的所有字符
  • re.U ： 根据Unicode字符集解析字符。这个标志影响 \w, \W, \b, \B.
  • re.X ： 该标志通过给予你更灵活的格式以便你将正则表达式写得更易于理解。

正则表达式模式

模式字符串使用特殊的语法来表示一个正则表达式：

字母和数字表示他们自身。一个正则表达式模式中的字母和数字匹配同样的字符串。

多数字母和数字前加一个反斜杠时会拥有不同的含义。

标点符号只有被转义时才匹配自身，否则它们表示特殊的含义。

反斜杠本身需要使用反斜杠转义。

由于正则表达式通常都包含反斜杠，所以你最好使用原始字符串来表示它们。模式元素(如 r’\t’，等价于 \t )匹配相应的特殊字符。

下表列出了正则表达式模式语法中的特殊元素。如果你使用模式的同时提供了可选的标志参数，某些模式元素的含义会改变。

模式 描述
^ 匹配字符串的开头
$ 匹配字符串的末尾。
. 匹配任意字符，除了换行符，当re.DOTALL标记被指定时，则可以匹配包括换行符的任意字符。
[…] 用来表示一组字符,单独列出：[amk] 匹配 ‘a’，’m’或’k’
[^…] 不在[]中的字符：[^abc] 匹配除了a,b,c之外的字符。
re* 匹配0个或多个的表达式。
re+ 匹配1个或多个的表达式。
re? 匹配0个或1个由前面的正则表达式定义的片段，非贪婪方式
re{ n} 匹配n个前面表达式。例如，”o{2}”不能匹配”Bob”中的”o”，但是能匹配”food”中的两个o。
re{ n,} 精确匹配n个前面表达式。例如，”o{2,}”不能匹配”Bob”中的”o”，但能匹配”foooood”中的所有o。”o{1,}”等价于”o+”。”o{0,}”则等价于”o*”。
re{ n, m} 匹配 n 到 m 次由前面的正则表达式定义的片段，贪婪方式
a | b 匹配a或b
(re) 匹配括号内的表达式，也表示一个组
(?imx) 正则表达式包含三种可选标志：i, m, 或 x 。只影响括号中的区域。
(?-imx) 正则表达式关闭 i, m, 或 x 可选标志。只影响括号中的区域。
(?: re) 类似 (…), 但是不表示一个组
(?imx: re) 在括号中使用i, m, 或 x 可选标志
(?-imx: re) 在括号中不使用i, m, 或 x 可选标志
(?#…) 注释.
(?= re) 前向肯定界定符。如果所含正则表达式，以 … 表示，在当前位置成功匹配时成功，否则失败。但一旦所含表达式已经尝试，匹配引擎根本没有提高；模式的剩余部分还要尝试界定符的右边。
(?! re) 前向否定界定符。与肯定界定符相反；当所含表达式不能在字符串当前位置匹配时成功。
(?> re) 匹配的独立模式，省去回溯。
\w 匹配数字字母下划线
\W 匹配非数字字母下划线
\s 匹配任意空白字符，等价于 [\t\n\r\f]。
\S 匹配任意非空字符
\d 匹配任意数字，等价于 [0-9]。
\D 匹配任意非数字
\A 匹配字符串开始
\Z 匹配字符串结束，如果是存在换行，只匹配到换行前的结束字符串。
\z 匹配字符串结束
\G 匹配最后匹配完成的位置。
\b 匹配一个单词边界，也就是指单词和空格间的位置。例如， ‘er\b’ 可以匹配”never” 中的 ‘er’，但不能匹配 “verb” 中的 ‘er’。
\B 匹配非单词边界。’er\B’ 能匹配 “verb” 中的 ‘er’，但不能匹配 “never” 中的 ‘er’。
\n, \t, 等。 匹配一个换行符。匹配一个制表符, 等
\1…\9 匹配第n个分组的内容。
\10 匹配第n个分组的内容，如果它经匹配。否则指的是八进制字符码的表达式。
欢迎关注微信公众号： 『前端极客技术』『代码视界』
赏
支付宝打赏 微信打赏

赞赏是不耍流氓的鼓励

转载声明： 商业转载请联系作者获得授权,非商业转载请注明出处 © 代码视界
Copyright © 2019 | Powered by Hexo | Theme by Snippet