直播網(wǎng)站爬蟲

本人phper一名鲸沮,從第一次接觸php到現(xiàn)在一共也就不到一年的時間纫雁,別的需要也不會逞力,鑒于工作的需要曙寡,看別人用python爬了一遍直播平臺,感覺php應(yīng)該也能實現(xiàn)寇荧,于是乎不停的尋找举庶,終于讓我找到了一些簡便的方法,特此記錄一下

項目地址
http://git.oschina.net/chenggx/onlive_spider

使用ThinkPHP3.2框架作為爬蟲的框架揩抡,配合HtmlDomParser户侥,QueryList獲得html代碼,并機械Dom元素峦嗤。
其中 QueryList是我無意中發(fā)下的一個php擴展蕊唐。(感覺很強大,可是不太會用烁设,在dom解析的時候不知道是什么原因無法獲取替梨,后來就換成HtmlDomParser。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末装黑,一起剝皮案震驚了整個濱河市副瀑,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌恋谭,老刑警劉巖糠睡,帶你破解...
    沈念sama閱讀 221,406評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異疚颊,居然都是意外死亡狈孔,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,395評論 3 398
  • 文/潘曉璐 我一進店門串稀,熙熙樓的掌柜王于貴愁眉苦臉地迎上來除抛,“玉大人,你說我怎么就攤上這事母截。” “怎么了橄教?”我有些...
    開封第一講書人閱讀 167,815評論 0 360
  • 文/不壞的土叔 我叫張陵清寇,是天一觀的道長。 經(jīng)常有香客問我护蝶,道長华烟,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,537評論 1 296
  • 正文 為了忘掉前任持灰,我火速辦了婚禮盔夜,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己喂链,他們只是感情好返十,可當(dāng)我...
    茶點故事閱讀 68,536評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著椭微,像睡著了一般洞坑。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上蝇率,一...
    開封第一講書人閱讀 52,184評論 1 308
  • 那天迟杂,我揣著相機與錄音,去河邊找鬼本慕。 笑死排拷,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的锅尘。 我是一名探鬼主播攻泼,決...
    沈念sama閱讀 40,776評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼鉴象!你這毒婦竟也來了忙菠?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,668評論 0 276
  • 序言:老撾萬榮一對情侶失蹤纺弊,失蹤者是張志新(化名)和其女友劉穎牛欢,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體淆游,經(jīng)...
    沈念sama閱讀 46,212評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡傍睹,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,299評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了犹菱。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片拾稳。...
    茶點故事閱讀 40,438評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖腊脱,靈堂內(nèi)的尸體忽然破棺而出访得,到底是詐尸還是另有隱情,我是刑警寧澤陕凹,帶...
    沈念sama閱讀 36,128評論 5 349
  • 正文 年R本政府宣布悍抑,位于F島的核電站,受9級特大地震影響杜耙,放射性物質(zhì)發(fā)生泄漏搜骡。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,807評論 3 333
  • 文/蒙蒙 一佑女、第九天 我趴在偏房一處隱蔽的房頂上張望记靡。 院中可真熱鬧谈竿,春花似錦、人聲如沸摸吠。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,279評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽蜕便。三九已至劫恒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間轿腺,已是汗流浹背两嘴。 一陣腳步聲響...
    開封第一講書人閱讀 33,395評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留族壳,地道東北人憔辫。 一個月前我還...
    沈念sama閱讀 48,827評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像仿荆,于是被迫代替她去往敵國和親贰您。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,446評論 2 359

推薦閱讀更多精彩內(nèi)容

  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,275評論 25 707
  • 你爬了嗎拢操? 要玩大數(shù)據(jù)锦亦,沒有數(shù)據(jù)怎么玩?這里推薦一些33款開源爬蟲軟件給大家令境。 爬蟲杠园,即網(wǎng)絡(luò)爬蟲,是一種自動獲取網(wǎng)...
    Albert新榮閱讀 2,229評論 0 8
  • 33款可用來抓數(shù)據(jù)的開源爬蟲軟件工具 要玩大數(shù)據(jù)舔庶,沒有數(shù)據(jù)怎么玩抛蚁?這里推薦一些33款開源爬蟲軟件給大家。 爬蟲惕橙,即...
    visiontry閱讀 7,337評論 1 99
  • 老爸明天生日瞧甩,可能因為侄女高三,課比較緊弥鹦,明天估計要返校了肚逸,他們就提前給老爸過生日了,我本來計劃回去的惶凝,可補習(xí)班臨...
    尐燕峝學(xué)閱讀 442評論 0 1
  • 公交吼虎、地鐵不是一般的寬敞,一座難求成為笑談苍鲜。 道路也是異常空曠和順暢玷犹。時而有的士或摩托呼嘯而過混滔,看得出是去團年的趕...
    若水Dewlight閱讀 198評論 0 1