2019-03-27

什么是正则表达式

  • 正则表达式是字符串匹配工具,它是为了在某些需求下可以更方便、更快速的处理字符串

怎么使用正则处理字符串

  • python通过提供re模块来支持正则表达式
  • re.fullmatch(正则表达式, 字符串) - 让正则表达式和字符串进行完全匹配,返回匹配结果,如果匹配不成功返回None

怎么写正则表达式

  • python中正则表达式是放在字符串中,并且这个字符串一般会在最前面加r/R。
  • r'正则'

正则语法

  • 普通字符 - 代表字符本身
re_str = r'abc123'
result = re.fullmatch(re_str, 'abc123')
print(result)
  • . - 匹配一个任意字符
"""
一个.代表一个字符, 匹配的是任意字符
"""
# 匹配一个字符串,长度是4,第一个字符是任意字符,后面三位是'abc'
re_str = r'.abc'
result = re.fullmatch(re_str, '+abc')
print(result)
  • \w - 匹配一个ASCII表中字母、数字、下划线, 还可以配一个所有的非ASCII表字符
re_str = r'.\w'
result = re.fullmatch(re_str, '=\u4e00')
print(result)
  • \s - 匹配一个空白字符
"""
空白字符包括: 空格、回车、制表符
"""
# 匹配一个字符串有四个字符,第一个字符是空白,后面三个任意字符
re_str = r'\s...'
result = re.fullmatch(re_str, '\nyou')
print(result)
  • \d - 匹配一个数字字符
# 匹配一个字符串长度是5,前面三个字符是'年龄:', 后面是两个任意数字
re_str = r'年龄:\d\d'
result = re.fullmatch(re_str, '年龄:12')
print(result)
  • \b - 检测单词边界(检测\b所在的位置是否是单词边界)
"""
单词边界: 所有能够标志一个单词结束的符号都是单词边界,例如: 空格、换行、标点符号等,字符串开头、字符串结束
how are you? i am fine
thank you!
"""
# 匹配一个字符串是否是'how,are',并且要求w的后面是一个单词边界
re_str = r'\bhow\b,are\b'
result = re.fullmatch(re_str, 'how,are')
print(result)

re_str = r'\byou\b'
result = re.search(re_str, 'hoyouw areyou you')
print(result)
  • ^ - 检测是否是字符串开头
# 匹配两个数字字符的字符串,并且检测这个字符串是否是字符串开头
re_str = r'^\d\d'
result = re.fullmatch(re_str, '23')
print(result)

result = re.findall(r'^\d\d', '89金额: 23,100 年龄:89')
print(result)
  • $ - 检测是否是字符串结尾
result = re.findall(r'\d\d$', '89金额: 23,100 年龄:81')
print(result)
  • \大写字母 - 对'\小写字母'功能的否定
"""
\W   -  匹配非数字、字母、下划线
\S   -  匹配非空白字符
\D   -  匹配非数字字符
\B   -  检测是否是非单词边界
"""
re_str = '\W\S\D'
result = re.fullmatch(re_str, '/nl')
print(result)
  • [字符集] - 匹配[]中任意的一个字符
"""
a. 取出字符集中的一个
[普通字符集]  -  匹配[]中任意的一个字符
[abc]、 [ab\d]、[123]

b. 用-表示范围
[字符1-字符2]  -  匹配编码值在字符1编码到字符2编码之间的任意一个字符 (ord(字符1)<ord(字符2))
[0-9]  - 所有数字字符中的一个,相当于\d
[2-9]  - 数字字符'2'到'9'中的一个
[一-龥] - 所有中文字符中的一个
[a-zA-Z] - 所有字母
[a-zA-Z\d_]  - 数字、字母、下划线

c.[]内容中的最前面加^,表示否定(^只有放在[]里面的最前面才有意义,在[]里面的其他位置就是表示普通字符'^')
[^abc]   -  匹配除了'a','b','c'以外的任意一个字符
[^a-z]   -  匹配除了小写字母以外的任意一个字符
"""

# 匹配一个字符串长度是4,后3位是'123', 第一位是'a','b','c'中的任意一个
re_str = r'[abc]123'
result = re.fullmatch(re_str, 'b123')
print(result)

# 第一个字符'a'或者'b'或者任意一个数字字符
re_str = r'[ab\d]123'
result = re.fullmatch(re_str, '4123')
print(result)

re_str = r'[a-zA-Z][一-龥][1-4]abc'
result = re.fullmatch(re_str, 'a余2abc')
print(result)

re_str = r'[a-zA-Z一-龥1-4]abc'
result = re.fullmatch(re_str, '3abc')
print(result)


# 第一个字符是a或者z或者-
re_str = r'[az-]abc'
result = re.fullmatch(re_str, '-abc')
print(result)

re_str = r'[a-z]abc'
result = re.fullmatch(re_str, 'dabc')
print(result)

# 匹配第一个字符不是字母
re_str = r'[^a-zA-Z]abc'
result = re.fullmatch(re_str, '9abc')
print(result)

# 匹配第一个字符是字母或者'^'
re_str = r'[a-z^A-Z]abc'
result = re.fullmatch(re_str, '^abc')
print(result)
  • 转义符号 - 将正则中有特殊意义或者特殊功能的符号,表示符号本身(让特殊意义和功能消失)
"""
a. 在中括号外面
在特殊意义的符号前加'\'让其特殊意义消失

b.在中括号里面
单独的有特殊意义的符号,除了'^'在最前面, '-'在两个字符之间,其他的都不需要转义,特殊意义自动消失
"""
re_str = r'\d\d\.\d\d'   # 12.45, 45.78
result = re.fullmatch(re_str, '12.34')
print(result)

re_str = r'\d\d[.]\d\d'   # 12.45, 45.78
result = re.fullmatch(re_str, '12a34')
print(result)

re_str = r'abc\\d'       # abc\d
result = re.fullmatch(re_str, 'abc\d')
print(result)

re_str = r'abc\$'        # abc$
result = re.fullmatch(re_str, 'abc$')
print(result)

re_str = r'abc[$]'        # abc$
result = re.fullmatch(re_str, 'abc$')
print(result)


re_str = r'a\+'
result = re.fullmatch(re_str, 'a+')
print(result)

re_str = r'[\\d19[\].]abc'
result = re.fullmatch(re_str, ']abc')
print(result)

# 写一个正则,匹配一个金额,金额要求小数点后面保存两位小数
# 1.23、 10.34、 100.66 、1002.99 ....
r'[1-9]\d\d\.\d\d'

# 密码: 由数字和字母组成,长度是8位,第一位是字母
re_str = r'[a-zA-Z][a-zA-Z\d]{5,7}'
result = re.fullmatch(re_str, 'q789s')
print(result)

=============匹配次数===========

  • - 匹配0次或者多次
"""
r'a*bc'  -  匹配一次字符串,'bc'前有0个或者多个a, 例如: 'bc', 'abc', 'aaabc'....
r'\d*'   -  匹配一个字符串由0个或者多个任意数字字符组成,例如:'','1','12', '234'
r'[abc\d]*-'  -    '-','aac34-', 'b-', 'c-', '2acbb456-'
"""
re_str = r'a\d*b'
result = re.fullmatch(re_str, 'a1129b')
print(result)

# 练习: 写一个正则表达式能够匹配所有的小数
# 012.12
re_str = r'\d\d*\.\d\d*'    
result = re.fullmatch(re_str, '02.0')
print(result)
  • + - 匹配一次或者多次(至少一次)
"""
r'\d+'  - 数字出现一次或者多次
r'[abc]+'   - 匹配一个字符串有一个或者多个字符,每一个字符是abc中的一个

"""
re_str = r'a+bc'
result = re.fullmatch(re_str, 'aabc')
print(result)

re_str = r'[abc]+1'
result = re.fullmatch(re_str, 'abcabc1')
print(result)
  • {}
"""
{N}    -  匹配N次, {3}-匹配3次
{M,N}  -  匹配M到N次
{M,}   -  匹配至少M次
{,N}   -  匹配最多N次
"""
re_str = r'[a-z]\d{3}'
result = re.fullmatch(re_str, 'z782')
print(result)

re_str = r'[a-zA-Z][a-zA-Z\d]{5,11}'
result = re.fullmatch(re_str, 'Z8uejs2sGdds')
print(result)

re_str = r'a{3,}'
result = re.fullmatch(re_str, 'aaaa')
print(result)

re_str = r'a{,3}'
result = re.fullmatch(re_str, '')
print(result)
  • ? - 匹配0次或者1次
? = {0,1}

===================2.贪婪和非贪婪================

  • 贪婪和非贪婪
  • 以上是贪婪匹配: 匹配次数不确定的时候,尽可能多的匹配
  • 非贪婪:
"""
在匹配次数不确定的符号后加? - 尽可能少的匹配
*?
+?
{M,N}?
{M,}?
{,N}?
??
"""
re_str = r'a{3,}'
result = re.search(re_str, 'how aaaaaaaaaa')
print(result)

re_str = r'a{3,}?'
result = re.search(re_str, 'aaaaaaaaaa')
print(result)

result = re.findall(r'\d\d', 'ahskhf34askdhfj89khjs90sss')
print(result)

with open('data', encoding='utf-8') as f:
    content = f.read()
    result = re.findall(r'"name":".+?",', content)
    print(result)

================分之/选择:|==============

"""
正则1|正则2     -   先用正则1去匹配,如果匹配成功就成功,匹配不成功再使用正则2去匹配
                  (字符串能够和正则1和正则2中的任意一个匹配成功就成功)
"""
# 要求用户名全部都是数字或者全部都是字母,长度是6-12
re_str = r'\d{6,12}|[a-zA-Z]{6,12}'
result = re.fullmatch(re_str, 'ahsjdkew')
print(result)

re_str = r'1a|\d+|c'    # 1a, \d+, c
result = re.fullmatch(re_str, '123')
print(result)

===================分组:()===============

"""
a. 将小括号中的内容作为一个整体操作

b. \数字   --  重复第几个分组匹配结果
"""
# 用户名是7-13位,最后两位必须是aa或者bb或者cc
re_str = r'[a-zA-Z\d]{5,11}(aa|bb|cc)'
result = re.fullmatch(re_str, 'hsu23bb')
print(result)

re_str = r'(ab){3}\d{3}'    # ababab
result = re.fullmatch(re_str, 'ababab789')
print(result)

re_str = r'(\d{3})\1([a-z]{3})-\2\1\1*'
result = re.fullmatch(re_str, '246246abc-abc246246246')
print(result)

完全匹配 - 让字符串长度和字符串每个字符的值和正则表达式完全匹配

"""
re.fullmatch(正则表达式, 字符串)  - 匹配成功返回匹配对象, 匹配失败返回None

当需要对整个字符串进行条件判断的时候使用: 例如,检查账号是否合法、密码是否符号要求等
"""
result = re.fullmatch(r'(\d{3})=([a-z]{3})', '234=haj')
print(result)    #<re.Match object; span=(0, 7), match='234=haj'>
# 1) 匹配到的内容在原字符串中的位置
print(result.span())      # 整个正则表达式匹配结果的范围    # (0, 7)
print(result.span(1))     # 正则表达式中第一个分组匹配结果的范围     # (0, 3)
print(result.span(2))     # 正则表达式中第二个分组匹配结果的范围     # (4 7)

print(result.start(2), result.end(2))     # 4 7

# 2) 获取匹配到的值
print(result.group())    # 整个正则表达式的匹配结果     # 234=haj
print(result.group(1))     # 234
print(result.group(2))     # haj

# 3) 获取原字符串
print(result.string)     # 234=haj

匹配字符串开头

"""
re.match(正则表达式, 字符串)   -  判断字符串的开头是否和正则表达式相匹配。匹配成功返回匹配对象,匹配失败返回None

只检测字符串开头是否满足要求
"""
result = re.match(r'\d{3}', '234abc')
print(result, result.span(), result.group())

search

"""
re.search(正则表达式, 字符串)  - 在字符串中查找是否有和正则表达式匹配的子串, 如果没有返回None,
                              如果有就返回第一个匹配结果
"""
result = re.search(r'(\d{3})=([a-z]{3})', 'how 237=abced8239=abc===')
print(result, result.span(1), result.group(1))    # <re.Match object; span=(4, 11), match='237=abc'> (4, 7) 237

findal

"""
re.findall(正则表达式, 字符串)   - 获取字符串中所有满足正则表达式的子串,以列表的形式返回

注意: 正则表达式中有没有分组
没有分组 - 整个正则表达式匹配的结果作为列表元素(列表元素是字符串)
有一个分组  -  这个分组匹配到的结果作为列表元素(列表元素是字符串)
多个分组   -  将元祖作为列表元素,每个分组匹配到的结果作为元祖的元素(列表元素是元祖)
"""
result = re.findall(r'(\d+)([a-z])', 'are 89he ks902 ans78ooh!w9end9009ooo')
print(result)      # [('89', 'h'), ('78', 'o'), ('9', 'e'), ('9009', 'o')]

result = re.findall(r'abc(\d|[A-Z]{2})', 'abc4-abcHD===')
print(result)      # ['4', 'HD']

finditer

"""
re.finditer(正则表达式,字符串)   -  获取子串中所有能够和正则表达式匹配的子串的匹配结果。
                                 返回值是一个迭代器,迭代器中的元素是匹配对象
"""
result = re.finditer(r'abc(\d|[A-Z]{2})', 'abc4-abcHD===')
print(result)
for item in result:
    print(item.group(), item.span())
    print(item.group(1))

# 练习: 计算一个字符串中所有数字的和
# 例如: are 89he ks90.2 ans78oo1.23h!w9end9009ooo   结果是: 89+90.2+78+1.23+9+9009=?
"""
\d+\.?\d*
"""
nums = re.findall(r'\d+\.?\d*', 'are 89he ks90.2 ans78oo1.23h!w9end9009ooo')
sum1 = 0
print(nums)
for num in nums:

    sum1 += float(num)
print(sum1)

# 短路操作
nums = re.findall(r'\d+\.\d+|\d+', 'are 89he ks90.2 ans78oo1.23h!w9end9009ooo')
print(nums)

split

"""
re.split(正则表达式,字符串)   -  将字符串按照满足正则表达式的子串进行切割
"""
result = re.split(r'[=/-]', 'aaa=hhh-jjj/kkk')
print(result)     # ['aaa', 'hhh', 'jjj', 'kkk']

sub

"""
re.sub(正则表达式, 新字符串, 字符串, 替换次数)   -  将字符串中满足正则表达式的子串替换成新字符串

替换次数不赋值,表示全部替换
"""
result = re.sub(r'\d+', '=', 'abc12kkk123m0mnm1ooo23ppp', 2)
print(result)     # abc=kkk=m0mnm1ooo23ppp
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,670评论 5 460
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,928评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,926评论 0 320
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,238评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,112评论 4 356
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,138评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,545评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,232评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,496评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,596评论 2 310
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,369评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,226评论 3 313
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,600评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,906评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,185评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,516评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,721评论 2 335

推荐阅读更多精彩内容