pyQuery解析器的使用

什么是pyquery泉蝌?

  • 是jquery的python的python實(shí)現(xiàn)昆庇,同樣可以從html文檔中提取數(shù)據(jù) 末贾,易用性和解讀行都很好。

安裝pyquery
使用 pip 可以安裝整吆。

pip3 install pyquery

注:由于 pyquery 依賴于 lxml 拱撵,要先安裝 lxml ,否則會提示失敗表蝙。

pip3 install lxml  安裝lxml

初始化 有 4 種方法可以進(jìn)行初始化: 可以通過傳入 字符串拴测、lxml、文件 或者 url 來使用PyQuery府蛇。

from pyquery import PyQuery as pq
from lxml import etree

#傳入字符串
d = pq("<html></html>")
#傳入lxml
d = pq(etree.fromstring("<html></html>"))
#傳入url
d = pq(url='http://google.com/') 
#傳入文件
d = pq(filename=path_to_html_file) 
現(xiàn)在集索,d 就像 jQuery 中的 $ 一樣了。

1汇跨、.html()和.text()* 獲取相應(yīng)的 HTML 塊或者文本內(nèi)容务荆,

p=pq("<head><title>Hello World!</title></head>")

 # 獲取相應(yīng)的 HTML 塊
 print (p('head').html())

# 獲取相應(yīng)的文本內(nèi)容
print (p('head').text())

輸出:
'''
<title>hello Word</title>
Hello World!
'''

2、(selector):通過選擇器來獲取目標(biāo)內(nèi)容

d = pq(
    "<div><p id='item-0'>test 1</p><p class='item-1'>test 2</p></div>"
)

# 獲取 <div> 元素內(nèi)的 HTML 塊
print (d('div').html())

# 獲取 id 為 item-0 的元素內(nèi)的文本內(nèi)容
print (d('#item-0').text())

# 獲取 class 為 item-1 的元素的文本內(nèi)容
print (d('.item-1').text())

'''輸出:
<p id="item-0">test 1</p><p class="item-1">test 2</p>
test 1
test 2
'''

3穷遂、.eq(index):根據(jù)索引號獲取指定元素(index 從 0 開始)

d = pq(
    "<div><p id='item-0'>test 1</p><p class='item-1'>test 2</p></div>"
)

# 獲取第二個 p 元素的文本內(nèi)容
print (d('p').eq(1).text())

'''輸出
test 2
'''

4函匕、.find():查找嵌套元素,

d = pq("<div><p id='item-0'>test 1</p><p class='item-1'>test 2</p></div>")

# 查找 <div> 內(nèi)的 p 元素
print d('div').find('p') 

# 查找 <div> 內(nèi)的 p 元素蚪黑,輸出第一個 p 元素
print d('div').find('p').eq(0) 

'''輸出:
<p id="item-0">test 1</p><p class="item-1">test 2</p>
<p id="item-0">test 1</p>
'''

5浦箱、.filter():根據(jù) class、id 篩選指定元素

d = pq("<div><p id='item-0'>test 1</p><p class='item-1'>test 2</p></div>")

# 查找 class 為 item-1 的 p 元素
print d('p').filter('.item-1')

# 查找 id 為 item-0 的 p 元素
print d('p').filter('#item-0') 

'''輸出:
<p class="item-1">test 2</p>
<p id="item-0">test 1</p>
'''

6祠锣、.attr():獲取酷窥、修改屬性值

d = pq("<div><p id='item-0'>test 1</p><a class='item-1'>test 2</p></div>")

# 獲取 <p> 標(biāo)簽的屬性 id
print(d('p').attr('id'))

# 修改 <a> 標(biāo)簽的 class 屬性為 new
print(d('a').attr('class','new'))

'''輸出:
item-0
<a class="new">test 2</a>
'''

7、其他操作:

 #添加 class
.addClass(value):
 #判斷是否包含指定的 class伴网,返回 True 或 False
.hasClass(value):
 #獲取子元素
.children():
 #獲取父元素
.parents():
 #獲取下一個元素
.next():
 #獲取后面全部元素塊
.nextAll():
 #獲取所有不匹配該選擇器的元素
.not_(selector):
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末蓬推,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子澡腾,更是在濱河造成了極大的恐慌沸伏,老刑警劉巖糕珊,帶你破解...
    沈念sama閱讀 219,270評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異毅糟,居然都是意外死亡红选,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,489評論 3 395
  • 文/潘曉璐 我一進(jìn)店門姆另,熙熙樓的掌柜王于貴愁眉苦臉地迎上來喇肋,“玉大人,你說我怎么就攤上這事迹辐〉溃” “怎么了?”我有些...
    開封第一講書人閱讀 165,630評論 0 356
  • 文/不壞的土叔 我叫張陵明吩,是天一觀的道長间学。 經(jīng)常有香客問我,道長印荔,這世上最難降的妖魔是什么低葫? 我笑而不...
    開封第一講書人閱讀 58,906評論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮仍律,結(jié)果婚禮上嘿悬,老公的妹妹穿的比我還像新娘。我一直安慰自己染苛,他們只是感情好鹊漠,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,928評論 6 392
  • 文/花漫 我一把揭開白布主到。 她就那樣靜靜地躺著茶行,像睡著了一般。 火紅的嫁衣襯著肌膚如雪登钥。 梳的紋絲不亂的頭發(fā)上畔师,一...
    開封第一講書人閱讀 51,718評論 1 305
  • 那天,我揣著相機(jī)與錄音牧牢,去河邊找鬼看锉。 笑死,一個胖子當(dāng)著我的面吹牛塔鳍,可吹牛的內(nèi)容都是我干的伯铣。 我是一名探鬼主播,決...
    沈念sama閱讀 40,442評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼轮纫,長吁一口氣:“原來是場噩夢啊……” “哼腔寡!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起掌唾,我...
    開封第一講書人閱讀 39,345評論 0 276
  • 序言:老撾萬榮一對情侶失蹤放前,失蹤者是張志新(化名)和其女友劉穎忿磅,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體凭语,經(jīng)...
    沈念sama閱讀 45,802評論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡葱她,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,984評論 3 337
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了似扔。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片吨些。...
    茶點(diǎn)故事閱讀 40,117評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖虫几,靈堂內(nèi)的尸體忽然破棺而出锤灿,到底是詐尸還是另有隱情,我是刑警寧澤辆脸,帶...
    沈念sama閱讀 35,810評論 5 346
  • 正文 年R本政府宣布但校,位于F島的核電站,受9級特大地震影響啡氢,放射性物質(zhì)發(fā)生泄漏状囱。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,462評論 3 331
  • 文/蒙蒙 一倘是、第九天 我趴在偏房一處隱蔽的房頂上張望亭枷。 院中可真熱鬧,春花似錦搀崭、人聲如沸叨粘。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,011評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽升敲。三九已至,卻和暖如春轰传,著一層夾襖步出監(jiān)牢的瞬間驴党,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,139評論 1 272
  • 我被黑心中介騙來泰國打工获茬, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留港庄,地道東北人。 一個月前我還...
    沈念sama閱讀 48,377評論 3 373
  • 正文 我出身青樓恕曲,卻偏偏與公主長得像鹏氧,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子佩谣,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,060評論 2 355

推薦閱讀更多精彩內(nèi)容