昨晚發(fā)現(xiàn)放在騰訊云主機上通過crontab定時執(zhí)行用以爬去斗魚分類頁面數(shù)據(jù)的爬蟲在執(zhí)行的時候速度特別慢赴捞，于是想通過多線程來提高效率频丘。打開瀏覽器，...

原本打算使用selenium給這個小項目做自動化測試的俱病，沒成想selenium功能如此強大官疲，那就順勢做個自動搶魚丸的小工具吧袱结。 Selenium...

在擁有了數(shù)據(jù)獲取和存儲的能力之后，如何利用好這些數(shù)據(jù)成為一個問題途凫。本來也一直打算把之前學習的flask框架用起來垢夹，現(xiàn)在有了這些數(shù)據(jù)，我打算利用這...

在上一篇文章中颖榜，主要講了我獲取斗魚彈幕和某些靜態(tài)頁面的方法棚饵，在數(shù)據(jù)獲取到之后，如何有效的組織和存儲數(shù)據(jù)直接關系到后續(xù)數(shù)據(jù)能否可以背有效使用掩完。為了...

距離上次更新又有一段時間了噪漾，畢業(yè)答辯之后，確實和同學們一起出去嗨了一段時間且蓬，由于還沒入職欣硼，在家清凈的環(huán)境中可以好好學一下一直感興趣的東西啦。 一...

<small>本文永久鏈接</small> 最近在準備找工作的過程中恶阴，復習以前學習的計算機網絡诈胜，由于以前學習的時候也是走馬觀花，所以現(xiàn)在很有必要...