Python爬蟲(chóng):Xpath語(yǔ)法筆記

一亚亲、選取節(jié)點(diǎn)

常用的路勁表達(dá)式:

表達(dá)式描述實(shí)例

nodename選取nodename節(jié)點(diǎn)的所有子節(jié)點(diǎn)xpath('//div')選取了div節(jié)點(diǎn)的所有子節(jié)點(diǎn)

/從根節(jié)點(diǎn)選取xpath('/div')從根節(jié)點(diǎn)上選取div節(jié)點(diǎn)

//選取所有的當(dāng)前節(jié)點(diǎn),不考慮他們的位置xpath('//div')選取所有的div節(jié)點(diǎn)

.選取當(dāng)前節(jié)點(diǎn)xpath('./div')選取當(dāng)前節(jié)點(diǎn)下的div節(jié)點(diǎn)

..選取當(dāng)前節(jié)點(diǎn)的父節(jié)點(diǎn)xpath('..')回到上一個(gè)節(jié)點(diǎn)

@選取屬性xpath('//@calss')選取所有的class屬性

二乙濒、謂語(yǔ)

謂語(yǔ)被嵌在方括號(hào)內(nèi)赞咙,用來(lái)查找某個(gè)特定的節(jié)點(diǎn)或包含某個(gè)制定的值的節(jié)點(diǎn)

實(shí)例:

表達(dá)式結(jié)果

xpath('/body/div[1]')選取body下的第一個(gè)div節(jié)點(diǎn)

xpath('/body/div[last()]')選取body下最后一個(gè)div節(jié)點(diǎn)

xpath('/body/div[last()-1]')選取body下倒數(shù)第二個(gè)div節(jié)點(diǎn)

xpath('/body/div[positon()<3]')選取body下前兩個(gè)div節(jié)點(diǎn)

xpath('/body/div[@class]')選取body下帶有class屬性的div節(jié)點(diǎn)

xpath('/body/div[@class="main"]')選取body下class屬性為main的div節(jié)點(diǎn)

xpath('/body/div[price>35.00]')選取body下price元素值大于35的div節(jié)點(diǎn)

三责循、通配符

Xpath通過(guò)通配符來(lái)選取未知的XML元素

表達(dá)式結(jié)果

xpath('/div/*')選取div下的所有子節(jié)點(diǎn)

xpath('/div[@*]')選取所有帶屬性的div節(jié)點(diǎn)

四、取多個(gè)路徑

使用“|”運(yùn)算符可以選取多個(gè)路徑

表達(dá)式結(jié)果

xpath('//div|//table')選取所有的div和table節(jié)點(diǎn)

五攀操、Xpath軸

軸可以定義相對(duì)于當(dāng)前節(jié)點(diǎn)的節(jié)點(diǎn)集

軸名稱表達(dá)式描述

ancestorxpath('./ancestor::*')選取當(dāng)前節(jié)點(diǎn)的所有先輩節(jié)點(diǎn)(父院仿、祖父)

ancestor-or-selfxpath('./ancestor-or-self::*')選取當(dāng)前節(jié)點(diǎn)的所有先輩節(jié)點(diǎn)以及節(jié)點(diǎn)本身

attributexpath('./attribute::*')選取當(dāng)前節(jié)點(diǎn)的所有屬性

childxpath('./child::*')返回當(dāng)前節(jié)點(diǎn)的所有子節(jié)點(diǎn)

descendantxpath('./descendant::*')返回當(dāng)前節(jié)點(diǎn)的所有后代節(jié)點(diǎn)(子節(jié)點(diǎn)、孫節(jié)點(diǎn))

followingxpath('./following::*')選取文檔中當(dāng)前節(jié)點(diǎn)結(jié)束標(biāo)簽后的所有節(jié)點(diǎn)

following-sibingxpath('./following-sibling::*')選取當(dāng)前節(jié)點(diǎn)之后的兄弟節(jié)點(diǎn)

parentxpath('./parent::*')選取當(dāng)前節(jié)點(diǎn)的父節(jié)點(diǎn)

precedingxpath('./preceding::*')選取文檔中當(dāng)前節(jié)點(diǎn)開(kāi)始標(biāo)簽前的所有節(jié)點(diǎn)

preceding-siblingxpath('./preceding-sibling::*')選取當(dāng)前節(jié)點(diǎn)之前的兄弟節(jié)點(diǎn)

selfxpath('./self::*')選取當(dāng)前節(jié)點(diǎn)

六速和、功能函數(shù)????

使用功能函數(shù)能夠更好的進(jìn)行模糊搜索

函數(shù)用法解釋

starts-withxpath('//div[starts-with(@id,"ma")]')選取id值以ma開(kāi)頭的div節(jié)點(diǎn)

containsxpath('//div[contains(@id,"ma")]')選取id值包含ma的div節(jié)點(diǎn)

andxpath('//div[contains(@id,"ma") and?contains(@id,"in")]')選取id值包含ma和in的div節(jié)點(diǎn)

text()xpath('//div[contains(text(),"ma")]')選取節(jié)點(diǎn)文本包含ma的div節(jié)點(diǎn)

歡迎加入我的QQ群`923414804`與我一起學(xué)習(xí)歹垫,群里有我學(xué)習(xí)過(guò)程中整理的大量學(xué)習(xí)資料。加群即可免費(fèi)獲取

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末颠放,一起剝皮案震驚了整個(gè)濱河市排惨,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌碰凶,老刑警劉巖暮芭,帶你破解...
    沈念sama閱讀 222,681評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異欲低,居然都是意外死亡辕宏,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,205評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門砾莱,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)瑞筐,“玉大人,你說(shuō)我怎么就攤上這事腊瑟【奂伲” “怎么了块蚌?”我有些...
    開(kāi)封第一講書(shū)人閱讀 169,421評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)膘格。 經(jīng)常有香客問(wèn)我峭范,道長(zhǎng),這世上最難降的妖魔是什么瘪贱? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 60,114評(píng)論 1 300
  • 正文 為了忘掉前任虎敦,我火速辦了婚禮,結(jié)果婚禮上政敢,老公的妹妹穿的比我還像新娘。我一直安慰自己胚迫,他們只是感情好喷户,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,116評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著访锻,像睡著了一般褪尝。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上期犬,一...
    開(kāi)封第一講書(shū)人閱讀 52,713評(píng)論 1 312
  • 那天河哑,我揣著相機(jī)與錄音,去河邊找鬼龟虎。 笑死璃谨,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的鲤妥。 我是一名探鬼主播佳吞,決...
    沈念sama閱讀 41,170評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼棉安!你這毒婦竟也來(lái)了底扳?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 40,116評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤贡耽,失蹤者是張志新(化名)和其女友劉穎衷模,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體蒲赂,經(jīng)...
    沈念sama閱讀 46,651評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡阱冶,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,714評(píng)論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了凳宙。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片熙揍。...
    茶點(diǎn)故事閱讀 40,865評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖氏涩,靈堂內(nèi)的尸體忽然破棺而出届囚,到底是詐尸還是另有隱情有梆,我是刑警寧澤,帶...
    沈念sama閱讀 36,527評(píng)論 5 351
  • 正文 年R本政府宣布意系,位于F島的核電站泥耀,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏蛔添。R本人自食惡果不足惜痰催,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,211評(píng)論 3 336
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望迎瞧。 院中可真熱鬧夸溶,春花似錦、人聲如沸凶硅。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,699評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)足绅。三九已至捷绑,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間氢妈,已是汗流浹背粹污。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,814評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留首量,地道東北人壮吩。 一個(gè)月前我還...
    沈念sama閱讀 49,299評(píng)論 3 379
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像蕾总,于是被迫代替她去往敵國(guó)和親粥航。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,870評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容