Python与正则
原文链接,作者总结的太好了,膜拜。
一、正则表达式先导
1.1 正则基础知识
^`:匹配行首
`$`:匹配结尾
`*`:(**贪婪**)前面字符匹配任意多次
`+`:(**懒惰**)前面字符匹配1或者更多次
`?`:前面字符匹配0或1次,还作为懒惰限定符使用,详看后面
`{m}`:前面字符匹配m次
`{m,n}`:前面字符匹配m~n次
`{m,}`:前面字符匹配m或更多次
`{,n}`:前面字符匹配0~n次
`|`:或,必须加括号
`.`:匹配除换行符以外的任意字符
`[1357]`:匹配1,3,5,7中其中一个数字,当然也可以是字母
`[0-9]`:匹配0到9的其中一个数字,类似用法还有:[a-zA-Z]
`[\u4E00-\u9FA5]`:匹配中文
`[^012]`:表示除012外的任意字符,包括3-9,a-z,A-Z,等等
注意:[]里面的.和*等一些特殊字符都失去特殊意义,只表示本身。
`\s`:匹配空格
`\S`:匹配除空格外的任意字符
`\w`:相当于[0-9a-zA-Z_]
`\W`:和\w刚好相反,包括空格,换行符
`\d`:匹配数字,相当于[0-9]
`\D`:匹配非数字
`\b`:匹配单词的边界(开头或结尾)
`\B`:匹配非单词边界
1.2 分组的捕获
import re
str = 'booy123'
regex = '((boy|booy)123)'
# 如果有多个括号,则从最外面往里算,从1开始
re_match = re.match(regex, str)
re_match.group(1)
# 'booy123'
re_match.group(2)
# 'booy'
1.3 懒惰限定符
如果有多个贪婪,则第一个最贪婪
*?
:重复任意次,但尽可能少重复
+?
:重复1次或更多次,但尽可能少重复
??
:重复0次或1次,但尽可能少重复
{n,m}?
:重复n到m次,但尽可能少重复
{n,}?
: 重复n次以上,但尽可能少重复
二、Python中的正则
在Python中,自带了re模块,这是专门用来做正则表达式的匹配的。
正则表达式的匹配有两种方法
re.compile()
第一种:先用re.compile创建SRE_Pattern对象,再进行匹配
import re
str = 'boboy'
re_obj = re.compile('(^b.*?b).*')
re_obj.match(str).group(1)
re.match()
第二种:直接执行匹配函数,把规则作为参数传入
import re
str = 'boboy'
re_obj.match('(^b.*?b).*', str).group(1)
以上两种都可以,可以按照自己的习惯选择。
返回匹配到的对象(compile必须加括号,括号里的才能被捕获到,然后用group查询)
import re
str = 'abooabbapds aboksldap'
obj = re.compile('(ab.*?ap)')
match_list = obj.match(str)
# match_list -> SRE_Match对象,需要用group(n)查询
print(match_list.re)
# re.compile('(ab.*?ap)')
print(match_list.string)
# abooabbapds aboksldap
print(match_list.group(1))
# abooabbap
# compile只有一个括号,所以group只有一个
re.findall()
返回匹配到的所有字符串,返回的是list(compile无需加括号)
import re
str = 'abooabbapds aboksldap'
obj = re.compile('ab.*?ap') #注意用非贪婪匹配,不然list里只有一个
match_list = obj.findall(str) #match_list是一个list
# match_list -> ['abooabbap','aboksldap']
for match in match_list:
print(match)
# 输出
# abooabbap
# aboksldap
re.finditer()
返回的是迭代器对象
import re
str = 'abooabbapds aboksldap'
obj = re.compile('ab.*?ap')
match_list = obj.finditer(str)
# match_list -> callable_iterator对象,需要用group()查询
for match in match_list:
print(match.group())
# abooabbap
# aboksldap
start(),end(),end()
返回被re匹配的字符串开始,结束,(开始,结束)的位置
import re
str = '012345'
obj = re.compile('\d{3}')
match = obj.match(str)
match.start()
# 0
match.end()
# 3
match.span()
(0, 3)
三、检验表达式
3.1 校验数字
1. 数字:^[0-9]*$
2. n位的数字:^d{n}$
3. 至少n位的数字:^d{n,}$
4. m-n位的数字:^d{m,n}$
5. 零和非零开头的数字:^(0|[1-9][0-9]*)$
6. 非零开头的最多带两位小数的数字:^([1-9][0-9]*)+(.[0-9]{1,2})?$
7. 带1-2位小数的正数或负数:^(-)?d+(.d{1,2})?$
8. 正数、负数、和小数:^(-|+)?d+(.d+)?$
9. 有两位小数的正实数:^[0-9]+(.[0-9]{2})?$
10. 有1~3位小数的正实数:^[0-9]+(.[0-9]{1,3})?$
11. 非零的正整数:^[1-9]d*$ 或 ^([1-9][0-9]*){1,3}$ 或 ^+?[1-9][0-9]*$
12. 非零的负整数:^-[1-9][]0-9"*$ 或 ^-[1-9]d*$
13. 非负整数:^d+$ 或 ^[1-9]d*|0$
14. 非正整数:^-[1-9]d*|0$ 或 ^((-d+)|(0+))$
15. 非负浮点数:^d+(.d+)?$ 或 ^[1-9]d*.d*|0.d*[1-9]d*|0?.0+|0$
16. 非正浮点数:^((-d+(.d+)?)|(0+(.0+)?))$ 或 ^(-([1-9]d*.d*|0.d*[1-9]d*))|0?.0+|0$
17. 正浮点数:^[1-9]d*.d*|0.d*[1-9]d*$ 或 ^(([0-9]+.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*.[0-9]+)|([0-9]*[1-9][0-9]*))$
18. 负浮点数:^-([1-9]d*.d*|0.d*[1-9]d*)$ 或 ^(-(([0-9]+.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*.[0-9]+)|([0-9]*[1-9][0-9]*)))$
19. 浮点数:^(-?d+)(.d+)?$ 或 ^-?([1-9]d*.d*|0.d*[1-9]d*|0?.0+|0)$
3.2 校验字符
1. 汉字:^[\u4e00-\u9fa5]{0,}$
2. 英文和数字:^[A-Za-z0-9]+$ 或 ^[A-Za-z0-9]{4,40}$
3. 长度为3-20的所有字符:^.{3,20}$
4. 由26个英文字母组成的字符串:^[A-Za-z]+$
5. 由26个大写英文字母组成的字符串:^[A-Z]+$
6 由26个小写英文字母组成的字符串:^[a-z]+$
7. 由数字和26个英文字母组成的字符串:^[A-Za-z0-9]+$
8. 由数字、26个英文字母或者下划线组成的字符串:^w+$ 或 ^w{3,20}$
9. 中文、英文、数字包括下划线:^[\u4E00-\u9FA5A-Za-z0-9_]+$
10. 中文、英文、数字但不包括下划线等符号:^[\u4E00-\u9FA5A-Za-z0-9]+$ 或 ^[\u4E00-\u9FA5A-Za-z0-9]{2,20}$
11. 可以输入含有^%&',;=?$"等字符:[^%&',;=?$\x22]+
12. 禁止输入含有~的字符:[^~\x22]+
3.3 特殊需求
1. Email地址:^w+([-+.]w+)*@w+([-.]w+)*.w+([-.]w+)*$
2. 域名:[a-zA-Z0-9][-a-zA-Z0-9]{0,62}(/.[a-zA-Z0-9][-a-zA-Z0-9]{0,62})+/.?
3. InternetURL:[a-zA-z]+://[^s]* 或 ^http://([w-]+.)+[w-]+(/[w-./?%&=]*)?$
4 手机号码:^(13[0-9]|14[5|7]|15[0|1|2|3|5|6|7|8|9]|18[0|1|2|3|5|6|7|8|9])d{8}$
5. 电话号码("XXX-XXXXXXX"、"XXXX-XXXXXXXX"、"XXX-XXXXXXX"、"XXX-XXXXXXXX"、"XXXXXXX"和"XXXXXXXX):^((d{3,4}-)|d{3.4}-)?d{7,8}$
6. 国内电话号码(0511-4405222、021-87888822):d{3}-d{8}|d{4}-d{7}
7. 身份证号(15位、18位数字):^d{15}|d{18}$
8. 短身份证号码(数字、字母x结尾):^([0-9]){7,18}(x|X)?$ 或 ^d{8,18}|[0-9x]{8,18}|[0-9X]{8,18}?$
9. 帐号是否合法(字母开头,允许5-16字节,允许字母数字下划线):^[a-zA-Z][a-zA-Z0-9_]{4,15}$
10. 密码(以字母开头,长度在6~18之间,只能包含字母、数字和下划线):^[a-zA-Z]w{5,17}$
11. 强密码(必须包含大小写字母和数字的组合,不能使用特殊字符,长度在8-10之间):^(?=.*d)(?=.*[a-z])(?=.*[A-Z]).{8,10}$
12. 日期格式:^d{4}-d{1,2}-d{1,2}
13. 一年的12个月(01~09和1~12):^(0?[1-9]|1[0-2])$
14. 一个月的31天(01~09和1~31):^((0?[1-9])|((1|2)[0-9])|30|31)$
15. 钱的输入格式:
16. 有四种钱的表示形式我们可以接受:"10000.00" 和 "10,000.00", 和没有 "分" 的 "10000" 和 "10,000":^[1-9][0-9]*$
17. 这表示任意一个不以0开头的数字,但是,这也意味着一个字符"0"不通过,所以我们采用下面的形式:^(0|[1-9][0-9]*)$
18. 一个0或者一个不以0开头的数字.我们还可以允许开头有一个负号:^(0|-?[1-9][0-9]*)$
19. 这表示一个0或者一个可能为负的开头不为0的数字.让用户以0开头好了.把负号的也去掉,因为钱总不能是负的吧.下面我们要加的是说明可能的小数部分:^[0-9]+(.[0-9]+)?$
20. 必须说明的是,小数点后面至少应该有1位数,所以"10."是不通过的,但是 "10" 和 "10.2" 是通过的:^[0-9]+(.[0-9]{2})?$
21. 这样我们规定小数点后面必须有两位,如果你认为太苛刻了,可以这样:^[0-9]+(.[0-9]{1,2})?$
22. 这样就允许用户只写一位小数.下面我们该考虑数字中的逗号了,我们可以这样:^[0-9]{1,3}(,[0-9]{3})*(.[0-9]{1,2})?$
23. 1到3个数字,后面跟着任意个 逗号+3个数字,逗号成为可选,而不是必须:^([0-9]+|[0-9]{1,3}(,[0-9]{3})*)(.[0-9]{1,2})?$
24. 备注:这就是最终结果了,别忘了"+"可以用"*"替代如果你觉得空字符串也可以接受的话(奇怪,为什么?)最后,别忘了在用函数时去掉去掉那个反斜杠,一般的错误都在这里
25. xml文件:^([a-zA-Z]+-?)+[a-zA-Z0-9]+\.[x|X][m|M][l|L]$
26. 中文字符的正则表达式:[\u4e00-\u9fa5]
27. 双字节字符:[^\x00-\xff] (包括汉字在内,可以用来计算字符串的长度(一个双字节字符长度计2,ASCII字符计1))
28. 空白行的正则表达式: s* (可以用来删除空白行)
29. HTML标记的正则表达式:<(S*?)[^>]*>.*?</>|<.*? /> (网上流传的版本太糟糕,上面这个也仅仅能部分,对于复杂的嵌套标记依旧无能为力)
30. 首尾空白字符的正则表达式:^s*|s*$或(^s*)|(s*$) (可以用来删除行首行尾的空白字符(包括空格、制表符、换页符等等),非常有用的表达式)
31. 腾讯QQ号:[1-9][0-9]{4,} (腾讯QQ号从10000开始)
32. 中国邮政编码:[1-9]d{5}(?!d) (中国邮政编码为6位数字)
33. IP地址:d+.d+.d+.d+ (提取IP地址时有用)
34. IP地址:((?:(?:25[0-5]|2[0-4]\d|[01]?\d?\d)\.){3}(?:25[0-5]|2[0-4]\d|[01]?\d?\d))