- 什么是正則表達(dá)式
正則表達(dá)式是對字符串操作的一種邏輯共識王滤,就是用事先定義好的一些特定字符以及這些特定字符的組合,組成一個(gè)規(guī)則字符串狰挡,這個(gè)規(guī)則字符串用來表達(dá)對字符串的一種過濾邏輯
需要注意的是捂龄,正則表達(dá)式非Python獨(dú)有释涛,在Python中通過re模塊來實(shí)現(xiàn) - 樣例展示
正則表達(dá)式常用規(guī)則 - 用法詳解
1.常見模式
模式 | 描述 |
---|---|
\w | 匹配字母數(shù)字以及下劃線 |
\W | 匹配非字母數(shù)字下劃線 |
\s | 匹配任意空白字符,等價(jià)于[\t\n\r\f]. |
\S | 匹配任意非空白字符 |
\d | 匹配任意數(shù)字倦沧,等價(jià)于[0-9] |
\D | 匹配任意非數(shù)字 |
\A | 匹配字符串開始 |
\Z | 匹配字符串結(jié)束唇撬,如果存在換行,只匹配到換行錢的結(jié)束字符串 |
\z | 匹配字符串結(jié)束 |
\G | 匹配最后匹配完成的位置 |
\n | 匹配一個(gè)換行符 |
\t | 匹配一個(gè)制表符 |
^ | 匹配字符串的開頭 |
$ | 匹配字符串的末尾 |
. | 匹配任意字符展融,除了換行符窖认,宕re.DOTALL標(biāo)記被指定時(shí),則可以匹配包括換行符的任意字符 |
[...] | 用來表示一組字符告希,單獨(dú)列出:[amk]匹配'a','m'或者'k' |
[^...] | 不在[]中的字符:[^abc]匹配除了a,b,c之外的字符 |
* | 匹配0個(gè)或者多個(gè)的表達(dá)式 |
+ | 匹配1個(gè)或者多個(gè)的表達(dá)式 |
? | 匹配0個(gè)或者1個(gè)由前面正則表達(dá)式定義的片段扑浸,非貪婪模式 |
{n} | 精確匹配n個(gè)前面表達(dá)式 |
{n,m} | 匹配n到m次由前面的正則表達(dá)式定義的片段,貪婪模式 |
a|b | 匹配a或b |
() | 匹配括號內(nèi)的表達(dá)式燕偶,也表示一個(gè)組 |
2.re.match
re.match嘗試從字符串的起始位置匹配一個(gè)模式喝噪,如果不是起始位置匹配成功的話,match()就返回None,用法如下所示
re.match(pattern, string, flag=0)
# 最常規(guī)的用法
import re
content = 'Hello 123 4567 World_This is a Regex Demo'
result = re.match('^Hello\s\d\d\d\s\d{4}\s\w{10}.*Demo$', content)
print(result)
print(result.span()) # span輸出匹配結(jié)果的范圍
print(result.group()) # group返回匹配結(jié)果
# # 泛匹配(.*就可以把中間字符匹配到指么,但是必須制定起始位置)
result1 = re.match('^Hello.*Demo$',content)
print(result1)
print(result1.group())
print(result1.span())
content1 = 'Hello 1234567 World_This is a Regex Demo'
result2 = re.match('^Hello\s(\d+)\sWorld.*Demo$', content1)
print(result2)
print(result2.group(1)) # 將第一括號括起來的內(nèi)容打印出來酝惧,依次可推group(2)
print(result2.span())
# 貪婪匹配
result3 = re.match('^He.*(\d+).*Demo$',content)
print(result3)
print(result3.group(1)) # 打印結(jié)果為7,意味著‘.*’將前面的數(shù)字全部包含了
#
# 非貪婪匹配
result4 = re.match('^He.*?(\d+).*Demo$',content)#注意看我的細(xì)節(jié):“伯诬?”
print(result4)
print(result4.group(1))
# 匹配模式
content = '''Hello 1234567 World_This
is a
Regex
Demo
'''
result5 = re.match('^He.*?(\d+).*?Demo$',content)#無視換行的下場
print(result5)
result6 = re.match('^He.*?(\d+).*?Demo$',content,re.S)#添加參數(shù)re.S就可以無視換行
print(result6)
#轉(zhuǎn)義
content2 = 'price is $5.00'
result7 = re.match('price is \$5\.00',content2)#添加‘\’即可把特殊字符進(jìn)行轉(zhuǎn)義
print(result7)
#總結(jié):盡量使用泛匹配晚唇,使用括號得到匹配目標(biāo),盡量使用非貪婪模式盗似、有換行符就用re.S#re.search(掃描整個(gè)字符串并返回第一個(gè)成功的匹配)
content3 = 'Extra stings Hello 123232 World_This is a Regex Demo Extra stings'
result8 = re.match('Hello.*?(\d+).*?Demo',content3)
print(result8)#結(jié)果為None哩陕,說明從開始就匹配失敗
result9 = re.search('Hello.*?(\d+).*?Demo',content3)#re.search不管開頭是否相符,只要條件滿足就可以找到
print(result9)
print(result9.group(1))
#總的來說赫舒,能用search就不用match
#匹配演練
html = '''<div id="songs-list">
<h2 class="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list"class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href="/2.mp3"singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4"class="active">
<a href="/3.mp3"singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view="6"><a href="/4.mp3"singer="begoud">光輝歲月</a></li>
<li data-view="5"><a href="/5.mp3"singer="陳慧琳">記事本</a><li>
<li data-view="5">
<a href="/6.mp3"singer="鄧麗君"><li class="fa fa-user">但愿人長久</a>
</li>
</ul>
</div>'''
result = re.search('<li.*?active.*?singer="(.*?)">(.*?)</a>',html,re.S)
print(result.group(1),result.group(2))
#
result1 = re.search('<li.*?singer="(.*?)">(.*?)</a>',html,re.S)
print(result1.group(1),result1.group(2))
#
result2 = re.search('<li.*?singer="(.*?)">(.*?)</a>',html)
if result2:
print(result2.group(1),result2.group(2))#re.search()只找尋一個(gè)結(jié)果
#
#re.findall(搜索字符悍及,以列表的形式返回全部匹配的字符串)
result3 = re.findall('<li.*?href="(.*?)".*?singer="(.*?)">(.*?)</a>',html,re.S)
#
print(result3)#以元組的形式將所有值輸出
print(type(result3))
for result3 in result3:
print(result3)
print(result3[0],result3[1],result3[2])
# #關(guān)于換行問題,“(<a.*?>)?”括號內(nèi)表示一個(gè)組接癌,“并鸵?”表示a標(biāo)簽可能有
result4 = re.findall('<li.*?>\s*?(<a.*?>)?(\w+)(</a>)?\s*?</li>',html,re.S)
#
print(result4)
for result4 in result4:
print(result4[1])
#re.sub(替換字符串中每一個(gè)匹配的字符串后返回替換后的字符串)
#re.sub(正則表達(dá)式,要替換成的字符串扔涧,原字符串)
content6 = 'Extra stings Hello 1234567 World_This is a Regex Demo Extra stings'
content5 = re.sub('\d+','Replacement',content6)
print(content5)
#在原來的基礎(chǔ)上增加
content4 = re.sub('(\d+)',r'\1 45545',content6)
print(content4)
html = '''<div id="songs-list">
<h2 class="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list"class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href="/2.mp3"singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4"class="active">
<a href="/3.mp3"singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view="6"><a href="/4.mp3"singer="begoud">光輝歲月</a></li>
<li data-view="5"><a href="/5.mp3"singer="陳慧琳">記事本</a></li>
<li data-view="5">
<a href="/6.mp3"singer="鄧麗君"><li class="fa fa-user">但愿人長久</a>
</li>
</ul>
</div>'''
html2 = re.sub('<a.*?>|</a>','',html)#把a(bǔ)標(biāo)簽替換掉
result10 = re.findall('<li.*?>(.*?)</li>',html2,re.S)
print(result10)
#
for result10 in result10:
print(result10.strip())#去掉換行符
#re.compile(將正則字符串編譯成正則表達(dá)式對象园担,以便于復(fù)用該匹配對象)
content8 = '''
hello
1234545
World_This
is a
Regex
Demo
'''
pattern = re.compile('hello.*Demo',re.S)
result12 = re.match(pattern,content8)
print(result12)
result13 = re.match('hello.*Demo',content8,re.S)
print(result13)
- 實(shí)例講解
爬取豆瓣讀書內(nèi)容
import re
import requests
content = requests.get('https://book.douban.com/').text
pattern = re.compile(
'<li.*?"cover">.*?href="(.*?)" title="(.*?)".*?"more-meta".*?"author">(.*?)</span>.*?"year">(.*?)</span>.*?</li>',
re.S)
result88 = re.findall(pattern, content)
# print(result88)
for result in result88:
url, name, author, date = result
author = re.sub('\s', '', author) # 使用re.sub將(\n)代替
date = re.sub('\s', '', author)
print(url, name, author, date)