【RTube-2】用R自動抓取和分析網(wǎng)頁

互聯(lián)網(wǎng)上有非常多的數(shù)據(jù)可供數(shù)據(jù)玩家們挖掘汇竭，有些網(wǎng)站會提供API供程序訪問葱蝗，但是很多情況下需要自己寫一些爬蟲程序去自動抓取和分析網(wǎng)頁上的內(nèi)容(也叫做Web Scraping)。現(xiàn)在比較流行的是用Python來寫爬蟲细燎，但是作為一名Rapper两曼，學(xué)會用R來寫爬蟲也是必須的。

已經(jīng)有人用R開發(fā)出了一個專門做Web scraping的包rvest：
https://github.com/hadley/rvest
https://cran.r-project.org/web/packages/rvest/index.html

rvest使用起來比較方便玻驻，有一定HTML基礎(chǔ)的同學(xué)看看github上的文檔和CRAN上的vignettes很快就能學(xué)會寫一些基本的爬蟲程序悼凑。

我在YouTube上找了幾個rvest相關(guān)的視頻，選擇了1個還比較不錯的和大家分享。
http://v.qq.com/x/page/x0318p23una.html

看過之后是不是也想自己寫個爬蟲來玩呢户辫？在下一期的“R圖秀”中渐夸，我會給大家展示如何用R來抓取和分析網(wǎng)站上的數(shù)據(jù)，敬請關(guān)注渔欢！

最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 人面猴
    序言：七十年代末墓塌，一起剝皮案震驚了整個濱河市，隨后出現(xiàn)的幾起案子膘茎，更是在濱河造成了極大的恐慌桃纯，老刑警劉巖，帶你破解...
    沈念sama閱讀 217,907評論 6贊 506
  • 死咒
    序言：濱河連續(xù)發(fā)生了三起死亡事件披坏，死亡現(xiàn)場離奇詭異态坦，居然都是意外死亡，警方通過查閱死者的電腦和手機(jī)棒拂，發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,987評論 3贊 395
  • 救了他兩次的神仙讓他今天三更去死
    文/潘曉璐 我一進(jìn)店門伞梯，熙熙樓的掌柜王于貴愁眉苦臉地迎上來，“玉大人帚屉，你說我怎么就攤上這事谜诫。” “怎么了攻旦？”我有些...
    開封第一講書人閱讀 164,298評論 0贊 354
  • 道士緝兇錄：失蹤的賣姜人
    文/不壞的土叔 我叫張陵喻旷，是天一觀的道長。 經(jīng)常有香客問我牢屋，道長且预，這世上最難降的妖魔是什么？ 我笑而不...
    開封第一講書人閱讀 58,586評論 1贊 293
  • ?港島之戀（遺憾婚禮）
    正文 為了忘掉前任烙无，我火速辦了婚禮锋谐，結(jié)果婚禮上，老公的妹妹穿的比我還像新娘截酷。我一直安慰自己涮拗，他們只是感情好，可當(dāng)我...
    茶點故事閱讀 67,633評論 6贊 392
  • 惡毒庶女頂嫁案：這布局不是一般人想出來的
    文/花漫 我一把揭開白布迂苛。 她就那樣靜靜地躺著三热，像睡著了一般。 火紅的嫁衣襯著肌膚如雪三幻。 梳的紋絲不亂的頭發(fā)上就漾，一...
    開封第一講書人閱讀 51,488評論 1贊 302
  • 城市分裂傳說
    那天，我揣著相機(jī)與錄音赌髓，去河邊找鬼。 笑死，一個胖子當(dāng)著我的面吹牛锁蠕，可吹牛的內(nèi)容都是我干的夷野。 我是一名探鬼主播，決...
    沈念sama閱讀 40,275評論 3贊 418
  • 雙鴛鴦連環(huán)套：你想象不到人心有多黑
    文/蒼蘭香墨 我猛地睜開眼掉丽，長吁一口氣：“原來是場噩夢啊……” “哼米酬！你這毒婦竟也來了照激？” 一聲冷哼從身側(cè)響起，我...
    開封第一講書人閱讀 39,176評論 0贊 276
  • 萬榮殺人案實錄
    序言：老撾萬榮一對情侶失蹤妒貌，失蹤者是張志新（化名）和其女友劉穎，沒想到半個月后铸豁，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體灌曙，經(jīng)...
    沈念sama閱讀 45,619評論 1贊 314
  • ?護(hù)林員之死
    正文 獨居荒郊野嶺守林人離奇死亡，尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,819評論 3贊 336
  • ?白月光啟示錄
    正文 我和宋清朗相戀三年节芥，在試婚紗的時候發(fā)現(xiàn)自己被綠了在刺。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,932評論 1贊 348
  • 活死人
    序言：一個原本活蹦亂跳的男人離奇死亡头镊，死狀恐怖蚣驼，靈堂內(nèi)的尸體忽然破棺而出，到底是詐尸還是另有隱情相艇，我是刑警寧澤颖杏，帶...
    沈念sama閱讀 35,655評論 5贊 346
  • ?日本核電站爆炸內(nèi)幕
    正文 年R本政府宣布，位于F島的核電站坛芽，受9級特大地震影響留储，放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜靡馁，卻給世界環(huán)境...
    茶點故事閱讀 41,265評論 3贊 329
  • 男人毒藥：我在死后第九天來索命
    文/蒙蒙 一欲鹏、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧臭墨，春花似錦赔嚎、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,871評論 0贊 22
  • 一樁弒父案尤误，背后竟有這般陰謀
    文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至结缚，卻和暖如春损晤，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背红竭。 一陣腳步聲響...
    開封第一講書人閱讀 32,994評論 1贊 269
  • 情欲美人皮
    我被黑心中介騙來泰國打工尤勋， 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留喘落，地道東北人。 一個月前我還...
    沈念sama閱讀 48,095評論 3贊 370
  • 代替公主和親
    正文 我出身青樓最冰，卻偏偏與公主長得像瘦棋，于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子暖哨，可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,884評論 2贊 354

推薦閱讀更多精彩內(nèi)容

  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,127評論 25贊 707
  • 你爬了嗎赌朋？ 要玩大數(shù)據(jù)，沒有數(shù)據(jù)怎么玩篇裁？這里推薦一些33款開源爬蟲軟件給大家沛慢。 爬蟲，即網(wǎng)絡(luò)爬蟲达布，是一種自動獲取網(wǎng)...
    Albert新榮閱讀 2,227評論 0贊 8
  • 喜歡微博上的一首小詩： 我和我的貓都很想你 哈哈哈 我是騙你的 我沒有貓 也沒有你 從來...
    漂泊旳貓閱讀 343評論 0贊 2
  • 今天再次陷入處理細(xì)節(jié)事務(wù)的思維當(dāng)中往枣，當(dāng)一天快結(jié)束時伐庭，發(fā)現(xiàn)自己很多事情還沒有做，整個一天都在忙活一件事分冈，那就是統(tǒng)計參...
    digman閱讀 164評論 0贊 0
  • 凈空法師語音答疑 身體健康的就很得意雕沉，身體衰弱的又很苦惱集乔，都是不平。這個世界誰能把這樁事情做得真平等坡椒？阿彌陀佛有這...
    拜托啦師父閱讀 282評論 1贊 2