2021年的第一篇文章徙赢,本想寫點(diǎn)新的題材字柠,卻沒想到重操舊業(yè),這次還是分享一些好玩狡赐、有趣的技術(shù)窑业。 技術(shù),改變生活枕屉。有趣常柄,豐富人生。
2020
回顧我自己的2020, 我發(fā)現(xiàn)在網(wǎng)上消費(fèi)這件事上西潘,無論是吃穿住行卷玉,我都花了比以前多得多的時間,和金錢喷市。一個原因相种,自然是可支配收入實現(xiàn)了從無到有的質(zhì)的飛躍,另外一個原因品姓,自然也和方便快捷的網(wǎng)購生態(tài)密切相關(guān)蚂子。
尤其在2020年的艱難環(huán)境下,有琳瑯滿目的淘寶店為我們提供了日用品的供給缭黔,有大大小小的網(wǎng)約車平臺為我們的出行提供便捷食茎,有美團(tuán)餓了嗎等軟件一直關(guān)心著我們的肚子,也有各式各樣的網(wǎng)課讓孩子和打工人能一邊臥床一邊學(xué)習(xí)馏谨。 基本上别渔,足不出戶,我們就可以完成幾乎所有的日常生活和工作惧互。哦哎媚,差點(diǎn)忘了,還有KEEP提供在家健身的專業(yè)指導(dǎo)喊儡。從此拨与,房間雖小,五臟俱全艾猜。
[圖片上傳失敗...(image-d91be3-1615123005614)]
但是买喧,隨著網(wǎng)購的蓬勃發(fā)展,各式各樣的商品也使出十八班武藝匆赃,各種精修的產(chǎn)品圖片淤毛,鬼使神差的產(chǎn)品介紹,暗藏玄機(jī)的營銷文案以及花里胡哨促銷方式算柳,令人目不暇接低淡。
為了更加方便的比較價格,或者更加直觀 瞬项,清楚地了解一類商品在市場上的價格分布蔗蹋,爬蟲登場了,隨之而來映入大家視野的還有Python這么可親可愛的編程語言囱淋≈砗迹可是網(wǎng)上的python爬蟲各種各樣,質(zhì)量也是參差不齊绎橘,沒有基礎(chǔ)的小白若是如果修行不當(dāng)胁孙,雖不至于走火入魔唠倦,但也容易喪失信心和興趣。那么涮较,有沒有一種高效又強(qiáng)大的爬蟲工具呢稠鼻?有,而且我們非常熟悉狂票,那就是Excel-VBA候齿。
用python寫過爬蟲的同學(xué)應(yīng)該知道,大多數(shù)網(wǎng)站是有反扒機(jī)制的闺属,而使用python網(wǎng)絡(luò)庫來處理各種反扒慌盯,處理各種動態(tài)網(wǎng)站,其實并不容易掂器,所以很多時候亚皂,我們往往通過代碼控制瀏覽器來爬取數(shù)據(jù),不需要處理很多細(xì)節(jié)国瓮,直接高效灭必。但兜兜轉(zhuǎn)轉(zhuǎn),我近期竟然發(fā)現(xiàn)乃摹,EXCEL居然是最簡單禁漓、方便、移植性最好的爬蟲神器孵睬。
用EXCEL逛京東
這次帶來的小栗子播歼,叫 用EXCEL逛京東,實現(xiàn)的功能是掰读,在指定單元格中輸入想要購買的東西(即搜索關(guān)鍵字)秘狞,即可讓EXCEL自動上網(wǎng)爬取結(jié)果,并在表格中羅列出來磷支,名稱谒撼,價格食寡,連接雾狈,圖片,應(yīng)有盡有抵皱,爬取上百條上千條數(shù)據(jù)善榛,輕松找到最低價。
我們來看一下效果:
為什么要搞這個玩意兒
就在我寫完代碼呻畸,看著屏幕上的畫面不斷閃爍跳動的時候移盆,一件很奇怪的事發(fā)生了。我發(fā)現(xiàn)伤为,除了內(nèi)心的那么一絲絲喜悅咒循,我盡然有些失落据途。那是一種那有如何的失落。
功能是實現(xiàn)了叙甸,但是后來呢颖医,工具有什么用呢,我為什么要花這幾個小時搞這個玩意兒裆蒸?會有人購物比價的時候使用這個工具嗎熔萧? 京東自己的排序不好用嗎?
非也僚祷,京東的排序很好用佛致,用這個爬蟲來比價格自然也有些雞肋,那么辙谜,它的價值在哪里俺榆?
對于有技術(shù)情結(jié)的朋友來說,這是一個很好的基礎(chǔ)装哆,我能爬取京東肋演,也能爬取淘寶,拼夕夕烂琴,或者別的任何網(wǎng)站爹殊,能比較價格,自然也能爬取優(yōu)惠信息奸绷,說不定還能去12306訂票梗夸,EXCEL VBA驅(qū)動IE,能使用低廉的成本爬取大量的數(shù)據(jù)号醉,自動化上網(wǎng)流程反症,還可以非常輕松的復(fù)制給同事朋友使用。優(yōu)秀畔派,簡便铅碍,而又不簡單
對于實用主義者來說,他可能真的不是那么實用线椰,但是這個小程序稍加改造胞谈,就可以從京東爬取上千上萬條數(shù)據(jù),能讓我們快速了解市場價格的分布憨愉,價格烦绳,銷量之間的走勢、關(guān)系等等配紫,說不定也正好提供了一種方法径密。
轉(zhuǎn)自公眾號“小魔方S”
2021-01-03