個人學(xué)習(xí)筆記踩娘,方便自己查閱,僅供參考,歡迎交流
正則表達(dá)式
1.簡單示例
開源中國提供的正則表達(dá)式測試網(wǎng)址:http://tool.oschina.net/regex/
正表達(dá)式匹配续语,就是用一定的規(guī)則將特定的文本提取出來襟己。
對于URL引谜,開頭是協(xié)議類型,然后是冒號加雙斜線擎浴,最后是域名加路徑员咽。
正則表達(dá)式:[a-zA-z]+://[^\s]*
a-z代表匹配任意的小寫字母; \s表示匹配任意的空白字符退客;*就代表匹配前面的字符任意多個骏融。
Python的re庫提供了整個正則表達(dá)式的實現(xiàn),利用這個庫萌狂,可以在Python 中使用正則表達(dá)式档玻。正則表達(dá)式不是Python獨有的,它也可以用在其他編程語言茫藏。
2.match()
- match()方法會嘗試從字符串的起始位置匹配正則表達(dá)式误趴,如果匹配,就返回匹配成功的結(jié)果务傲;如果不匹配凉当,就返回None。
- match ()方法在使用時需要考慮到開頭的內(nèi)容售葡,做匹配時并不方便,它更適合用來檢測某個字符串是存符合某個正則表達(dá)式的規(guī)則看杭。
- 在 match()方法中,第一個參數(shù)傳入了正則表達(dá)式挟伙,第二個參數(shù)傳入了要匹配的字符串楼雹。
import re
content = 'Hello 123 4567 World_This is a Regex Demo'
print(len(content))
result = re.match('^Hello\s\d\d\d\s\d{4}\s\w{10}',content)
print(result)
print(result.group())
print(result.span())
輸出結(jié)果:41
<_sre.SRE_Match object; span=(0, 25), match='Hello 123 4567 World_This'>
Hello 123 4567 World_This
(0, 25)
輸出的結(jié)果是SRE_Match對象,證明成功匹配尖阔。該對象有兩個方法:group()方法可以輸出匹配到的內(nèi)容贮缅,span()方法可以輸出匹配的范圍,結(jié)果是(0,25)介却,是匹配到的結(jié)果字符串在原字符串中的位置范圍谴供。
首先聲明了一個字符串,其中包含英文字母齿坷、空白字符桂肌、數(shù)字等数焊。
content = 'Hello 123 4567 World_This is a Regex Demo'
正則表達(dá)式:^Hello\s\d\d\d\s\d{4}\s\w{10}
^是匹配字符串的開頭;\s匹配空白字符轴或;\d匹配數(shù)字昌跌,\w{10}匹配10個字母以下劃線。
-
匹配目標(biāo)
若想把字符串中的1234567提取出來照雁,可以將數(shù)字部分的正則表達(dá)式用()括起來蚕愤,然后調(diào)用了group(1)獲取匹配結(jié)果。正則表達(dá)式后面還有()包括的內(nèi) 容饺蚊,那么可以依次用 group(2)萍诱,group(3)等來獲取。
import re
content = 'Hello 1234567 World_This is a Regex Demo'
print(len(content))
result = re.match('^Hello\s(\d+)\sWorld',content)
#():匹配括號內(nèi)的表達(dá)式污呼,也表示一個組裕坊。
print(result)
print(result.group())
print(result.group(1))
print(result.span())
-
通用匹配
通用匹配符號,就是 .*(點星)燕酷,其中.(點)可以匹配任意字符(除換行符)籍凝,*(星)代表匹配前面的字符無限次,所以組合在一起就可以匹配任意字符了苗缩。
import re
content = 'Hello 123 4567 World_This is a Regex Deno'
result = re.match('^Hello.*Deno$',content)
#$符號:匹配一行字符串的結(jié)尾
print(result)
print(result.group())
print(result.span())
輸出結(jié)果:
<_sre.SRE_Match object; span=(0, 41), match='Hello 123 4567 World_This is a Regex Deno'>
Hello 123 4567 World_This is a Regex Deno
(0, 41)
-
貪婪與非貪婪
在貪婪匹配下饵蒂,. *(點星)會匹配盡可能多的字符。非貪婪匹配:. *?(點星問號)酱讶,盡可能匹配少的字符 退盯。
在做匹配的時候,字符串中間盡量使用非貪婪匹配泻肯,也就是用:. *?(點星問號)渊迁,來代替. *(點星),以免出現(xiàn)匹配結(jié)果缺失的情況灶挟。
import re
content = 'Hello 1234567 World_This is a Regex Deno'
result = re.match('^He.*(\d+).*Deno$',content)
#.*:貪婪匹配
result1 = re.match('^He.*?(\d+).*Deno$',content)
#.*琉朽?:非貪婪匹配
print(result)
print(result.group(1))
print(result1)
print(result1.group(1))
輸出結(jié)果:
<_sre.SRE_Match object; span=(0, 40), match='Hello 1234567 World_This is a Regex Deno'>
7
<_sre.SRE_Match object; span=(0, 40), match='Hello 1234567 World_This is a Regex Deno'>
1234567
需要注意,如果匹配的結(jié)果在字符串結(jié)尾稚铣,.*箱叁?就有可能匹配不到任何內(nèi)容了,因為它匹配盡可能少的字符榛泛。
import re
content = 'http:weibo.com/comment/kEraCN'
result1 = re.match('http.*?comment/(.*?)',content)
result2 = re.match('http.*?comment/(.*)',content)
print('result1',result1.group(1))
print('result2',result2.group(1))
輸出結(jié)果:
result1
result2 kEraCN
-
修飾符
網(wǎng)頁匹配中,較為常用修飾符的有 re.S 和re.I噩斟。
re.S:使.匹配包括換行符在內(nèi)的所有字符曹锨。
re.I:使匹配對大小寫不敏感。
import re
content = '''Hello 1234567 World_This
is a Regex Demo
'''
#result = re.match('^He.*?(\d+).*?Demo$',content)
#會報錯
result1 = re.match('^He.*?(\d+).*?Demo$',content,re.S)
#re.S:使.匹配包括換行符在內(nèi)的所有字符剃允。
#print(result.group(1))
print(result1.group(1))
-
轉(zhuǎn)義匹配
遇到用于正則匹配模式的特殊字符時沛简,在前面加反斜線轉(zhuǎn)義一下即可齐鲤。
import re
content ='(百度)www.baidu.com'
result = re.match('\(百度\)www\.baidu\.com',content)
print(result)
3.search()
- match()方法是從字符串的開頭開始匹配的,一旦開頭不匹配椒楣,那么整個匹配就失敗给郊。
- search ()方法匹配時會掃描整個字符串,然后返回第一個成功匹配的結(jié)果捧灰。
import re
content = 'EXtra stings Hello 1234567 World This a regex Demo EXtra stings'
result = re.match('Hello.*?(\d+).*?Demo',content)
print(result)
result1 = re.search('Hello.*?(\d+).*?Demo',content)
print(result1)
輸出結(jié)果:None
<_sre.SRE_Match object; span=(13, 50), match='Hello 1234567 World This a regex Demo'>
import re
html ='''<div id="songs-list" >
<h2 class ="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list" class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href ="/2.mp3 singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4" class="active">
<a href ="/3.mp3" singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view ="6">< href="/4.mp3 singer="beyond">光輝歲月 </a></li>
<li data-view ="5">< a href="/S.mp3 singer="陳慧琳">記事本</a></li>
<li data-view ="5">
href ="/6.mp3 singer ="鄧麗君">但愿人長久</a>
</li>
</ul>
</div>'''
result = re.search('<li.*?active.*?singer="(.*?)">(.*?)</a>',html,re.S)
result1 = re.search('<li.*?singer="(.*?)">(.*?)</a>',html,re.S)
result2 = re.search('<li.*?singer="(.*?)">(.*?)</a>',html)
print(result.group(1),result.group(2))
print(result1.group(1),result1.group(2))
print(result2.group(1),result2.group(2))
輸出結(jié)果:
齊秦 往事隨風(fēng)
任賢齊 滄海一聲笑
beyond 光輝歲月
4.findall()
- search()方法可以返回匹配正則表達(dá)式的第一個內(nèi)容淆九。
- findall()方法可以獲取匹配正則表達(dá)式的所有內(nèi)容。
import re
html ='''<div id="songs-list" >
<h2 class ="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list" class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href="/2.mp3" singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4" class="active">
<a href="/3.mp3" singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view ="6">< href="/4.mp3" singer="beyond">光輝歲月 </a></li>
<li data-view ="5">< a href="/5.mp3" singer="陳慧琳">記事本</a></li>
<li data-view ="5">< href="/6.mp3" singer="鄧麗君">但愿人長久</a></li>
</ul>
</div>'''
results = re.findall('<li.*?href="(.*?)".*?singer="(.*?)">(.*?)</a>',html,re.S)
print(results)
print(type(results))
for result in results:
print(result)
print(result[0],result[1],result[2])
輸出結(jié)果:
[('/2.mp3', '任賢齊', '滄海一聲笑'), ('/3.mp3', '齊秦', '往事隨風(fēng)'), ('/4.mp3', 'beyond', '光輝歲月 '), ('/5.mp3', '陳慧琳', '記事本'), ('/6.mp3', '鄧麗君', '但愿人長久')]
<class 'list'>
('/2.mp3', '任賢齊', '滄海一聲笑')
/2.mp3 任賢齊 滄海一聲笑
('/3.mp3', '齊秦', '往事隨風(fēng)')
/3.mp3 齊秦 往事隨風(fēng)
('/4.mp3', 'beyond', '光輝歲月 ')
/4.mp3 beyond 光輝歲月
('/5.mp3', '陳慧琳', '記事本')
/5.mp3 陳慧琳 記事本
('/6.mp3', '鄧麗君', '但愿人長久')
/6.mp3 鄧麗君 但愿人長久
5.sub()
#把文本中的所有數(shù)字都去掉
import re
content = '54aKS4yrsoiRS4ixSL2g'
content = re.sub('\d+','',content)
#\d:匹配任意空白字符毛俏,等價于[0-9]
print(content)
- 獲取li節(jié)點的歌名炭庙,findall寫法:
import re
html ='''<div id="songs-list" >
<h2 class ="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list" class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href="/2.mp3" singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4" class="active">
<a href="/3.mp3" singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view ="6">< href="/4.mp3" singer="beyond">光輝歲月 </a></li>
<li data-view ="5">< a href="/5.mp3" singer="陳慧琳">記事本</a></li>
<li data-view ="5">< href="/6.mp3" singer="鄧麗君">但愿人長久</a></li>
</ul>
</div>'''
results = re.findall('<li.*?>\s*?(<a.*?>)?(\w+)(</a>)?\s*?</li>',html,re.S)
for result in results:
print(result[1])
輸出結(jié)果:一路上有你
滄海一聲笑
往事隨風(fēng)
記事本
但愿人長久
- 獲取li節(jié)點的歌名,使用sub()寫法:
import re
html ='''<div id="songs-list" >
<h2 class ="title">經(jīng)典老歌</h2>
<p class="introduction">
經(jīng)典老歌列表
</p>
<ul id="list" class="list-group">
<li data-view="2">一路上有你</li>
<li data-view="7">
<a href="/2.mp3" singer="任賢齊">滄海一聲笑</a>
</li>
<li data-view="4" class="active">
<a href="/3.mp3" singer="齊秦">往事隨風(fēng)</a>
</li>
<li data-view ="6"><a href="/4.mp3" singer="beyond">光輝歲月 </a></li>
<li data-view ="5"><a href="/5.mp3" singer="陳慧琳">記事本</a></li>
<li data-view ="5"><a href="/6.mp3" singer="鄧麗君">但愿人長久</a></li>
</ul>
</div>'''
html = re.sub('<a.*?>|</a>','',html)
#print(html)
results = re.findall('<li.*?>(.*?)</li>',html,re.S)
for result in results:
print(result.strip())
6.compile()
compile()方法煌寇,可以將正則字符串編譯成正則表達(dá)式對象焕蹄,以便在后面的匹配中復(fù)用。
import re
content1 = '2016-12-15 12:00'
content2 = '2016-12-17 12:55'
content3 = '2016-12-22 13:21'
pattern = re.compile('\d{2}:\d{2}')
result1 = re.sub(pattern,'',content1)
result2 = re.sub(pattern,'',content2)
result3 = re.sub(pattern,'',content3)
print(result1,result2,result3)