java爬蟲(chóng)問(wèn)題二: 使用jsoup爬取數(shù)據(jù)class選擇器中空格多選擇怎么解決

問(wèn)題描述:

在使用jsoup爬取其他網(wǎng)站數(shù)據(jù)的時(shí)候,發(fā)現(xiàn)class是帶空格的多選擇,如果直接使用doc.getElementsByClass(“class的值”),這種方法獲取不到想要的數(shù)據(jù)撵渡。

爬取網(wǎng)站頁(yè)面結(jié)構(gòu)如下:

其中文章列表的div為:

我們可以看到其class的值為:am-cf inner_li inner_li_abtest。帶空格的。多值的爪喘。

如果我們還是用getElementsByClass()這個(gè)方法獲取的話,是獲取不到的纠拔。eclipse中斷點(diǎn)如下:

可以看到獲取的值的長(zhǎng)度size=0秉剑。沒(méi)有獲取到數(shù)據(jù)。

經(jīng)過(guò)各方搜索稠诲,發(fā)現(xiàn)解決方案:使用的不是getElementsByClass()方法侦鹏,可以使用其他方法。

先上成功后截圖:

我們可以看到數(shù)據(jù)的長(zhǎng)度size=20了臀叙。說(shuō)明獲取到數(shù)據(jù)了略水。

下面講解select方法使用:

Elements?org.jsoup.nodes.Element.select(String?cssQuery)

樣式選擇器。

查看源碼:

我們知道這個(gè)可以多個(gè)劝萤。

在看看我們案例中使用的是:div.am-cf.inner_li.inner_li_abtest渊涝。為什么要這么寫(xiě)呢?

查看需要爬取文章的頁(yè)面結(jié)構(gòu):

?

這下就明白了為什么這么用了吧床嫌。

凱哥微信id:kaigejava

個(gè)人網(wǎng)站:www.kaigejava.com

凱哥網(wǎng)站地址:http://kaigejava.com/article/detail/121

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末跨释,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子厌处,更是在濱河造成了極大的恐慌鳖谈,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,729評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件阔涉,死亡現(xiàn)場(chǎng)離奇詭異缆娃,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)瑰排,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,226評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén)贯要,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人椭住,你說(shuō)我怎么就攤上這事郭毕。” “怎么了函荣?”我有些...
    開(kāi)封第一講書(shū)人閱讀 169,461評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵显押,是天一觀的道長(zhǎng)扳肛。 經(jīng)常有香客問(wèn)我,道長(zhǎng)乘碑,這世上最難降的妖魔是什么挖息? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 60,135評(píng)論 1 300
  • 正文 為了忘掉前任,我火速辦了婚禮兽肤,結(jié)果婚禮上套腹,老公的妹妹穿的比我還像新娘。我一直安慰自己资铡,他們只是感情好电禀,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,130評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著笤休,像睡著了一般尖飞。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上店雅,一...
    開(kāi)封第一講書(shū)人閱讀 52,736評(píng)論 1 312
  • 那天政基,我揣著相機(jī)與錄音,去河邊找鬼闹啦。 笑死沮明,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的窍奋。 我是一名探鬼主播荐健,決...
    沈念sama閱讀 41,179評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼琳袄!你這毒婦竟也來(lái)了江场?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 40,124評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤挚歧,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后吁峻,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體滑负,經(jīng)...
    沈念sama閱讀 46,657評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,723評(píng)論 3 342
  • 正文 我和宋清朗相戀三年用含,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了矮慕。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,872評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡啄骇,死狀恐怖痴鳄,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情缸夹,我是刑警寧澤痪寻,帶...
    沈念sama閱讀 36,533評(píng)論 5 351
  • 正文 年R本政府宣布螺句,位于F島的核電站,受9級(jí)特大地震影響橡类,放射性物質(zhì)發(fā)生泄漏蛇尚。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,213評(píng)論 3 336
  • 文/蒙蒙 一顾画、第九天 我趴在偏房一處隱蔽的房頂上張望取劫。 院中可真熱鬧,春花似錦研侣、人聲如沸谱邪。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,700評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)惦银。三九已至,卻和暖如春灌砖,著一層夾襖步出監(jiān)牢的瞬間璧函,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,819評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工基显, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留蘸吓,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 49,304評(píng)論 3 379
  • 正文 我出身青樓撩幽,卻偏偏與公主長(zhǎng)得像库继,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子窜醉,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,876評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容