用Python爬取淘寶1000多商品,只想為老父親做點(diǎn)事

本文來自我們小密圈的一位非常鐵桿的粉絲皆撩,這位粉絲看我的文章大概有2年多了扣墩,非常樸實(shí)的一位鐵桿哲银,希望大家耐心看完這篇文章!

北靠黃河南靠山呻惕,我家住在老潼關(guān)荆责。

對,就是那個(gè)雞鳴啼三恃谴唷(秦晉豫)的陜西東大門潼關(guān)做院。就是那個(gè)“山河表里潼關(guān)路”中的潼關(guān)。

家有五畝薄田濒持,田地由老父親打理键耕,前幾年當(dāng)?shù)匕傩臻_始種植黃花菜』,父親在家也種了一些柑营。

(咱家五畝地)

(剛拍的核桃花是不是也很美屈雄?)

(往年黃花菜長這樣)

一直以來存在一個(gè)問題,終端市場菜價(jià)并不便宜官套,但是菜農(nóng)卻沒有議價(jià)能力酒奶,往往一手優(yōu)質(zhì)菜源,卻賣不上好價(jià)格奶赔,而在終端市場消費(fèi)者朋友又未必能吃到“好”菜惋嚎。(倒金的尋不著販銀的?)如果你在學(xué)習(xí)Python的過程當(dāng)中有遇見任何問題站刑,可以加入我的python交流學(xué)習(xí)qq群:250933691另伍,多多交流問題,互幫互助笛钝,群里有不錯(cuò)的學(xué)習(xí)教程和開發(fā)工具质况。學(xué)習(xí)python有任何問題(學(xué)習(xí)方法愕宋,學(xué)習(xí)效率玻靡,如何就業(yè)),可以隨時(shí)來咨詢我中贝,如果你準(zhǔn)備學(xué)習(xí)大數(shù)據(jù)囤捻,也歡迎加入大數(shù)據(jù)學(xué)習(xí)交流qq群458345782,每天與大家分享學(xué)習(xí)資源哦邻寿。

眼看又快到黃花菜的采摘季了蝎土,我也一直在思考有沒有一種可能將農(nóng)戶和終端消費(fèi)者朋友直接對接起來進(jìn)行提前預(yù)售,來解決兩個(gè)問題:

穩(wěn)定菜價(jià)绣否,菜農(nóng)能賣上差不多的價(jià)格誊涯,增加收入。

終端消費(fèi)者花同樣的價(jià)格能吃到優(yōu)質(zhì)安全的一手放心菜蒜撮。

我想暴构,應(yīng)該是一個(gè)雙贏的局面跪呈。

那如何定一個(gè)合理的價(jià)格呢?

想到了萬能的淘寶取逾,于是我考慮用 Python 抓取淘寶目前在售的黃花菜商品進(jìn)行價(jià)格分析耗绿,為自家的黃花菜定價(jià)做一個(gè)參考。

數(shù)據(jù)采集

在淘寶搜索關(guān)鍵『黃花菜』砾隅,搜索結(jié)果一共有 100 頁误阻,第一頁返回 48 個(gè)商品,再往后翻頁每頁有 44 個(gè)商品晴埂。

翻到最后一頁查看究反,返回的商品已經(jīng)與黃花菜沒多少關(guān)系了,基本上都是家具或者黃花魚等商品儒洛。

用二分法向前翻頁奴紧,翻頁到 25 頁的時(shí)候返回結(jié)果種已經(jīng)只有個(gè)別的黃花菜商品了。

所以只需要采集前 25 頁的搜索結(jié)果晶丘。

最終采集到的數(shù)據(jù)如下圖:

25 頁搜索結(jié)果黍氮,一共采集到 1104 條商品數(shù)據(jù),25*44+4 = 1104浅浮。

1104 條數(shù)據(jù)中仍然包含一些其他商品沫浆,所以需要對采集回來的數(shù)據(jù)進(jìn)行進(jìn)一步清洗。

需要注意的是黃花菜不同于其他商品滚秩,每個(gè)商品的價(jià)格其實(shí)是和凈含量是對應(yīng)的专执。

所以采集數(shù)據(jù)的時(shí)候需要將商品詳情頁凈含量數(shù)據(jù)一同采集回來。

數(shù)據(jù)清洗

數(shù)據(jù)清洗的思路就是郁油,首先將標(biāo)題中不包含『黃花菜』的所有行過濾掉本股。

然后再將標(biāo)題中包含魚、蝦桐腌、腐竹之類的行過濾掉拄显。

最后就是將凈含量為空的商品過濾掉,一共有 8 個(gè)商品案站,全部是天貓超市的商品躬审,查看商品詳情頁確實(shí)與其他商品詳情頁不同,所以采集數(shù)據(jù)時(shí)使用的正則沒能提取到商品凈含量蟆盐。

因?yàn)槊總€(gè)商品的凈含量不同承边,無法直接進(jìn)行價(jià)格對比,所以最后根據(jù)商品價(jià)格石挂、運(yùn)費(fèi)博助、凈含量計(jì)算出每個(gè)商品的單價(jià)即每斤多少元。計(jì)算公式為:

(商品價(jià)格+運(yùn)費(fèi))/ 凈含量 = 商品單價(jià)

經(jīng)過一番清洗后痹愚,只剩下 704 條商品數(shù)據(jù)了富岳,數(shù)據(jù)結(jié)構(gòu)如下:

價(jià)格分析

按照采集到的不完全數(shù)據(jù)罗心,我們來進(jìn)行一些粗略統(tǒng)計(jì):

總共有 549 個(gè)店鋪:

其中 119 個(gè)店鋪有超過1個(gè)商品在出售,430 個(gè)店鋪只有 1 個(gè)商品在售城瞎。

天貓店鋪 73 個(gè)渤闷,C店 476 個(gè)。

704個(gè)商品銷售地分布在 147 個(gè)地區(qū)脖镀,其中商品最多的地區(qū)前 5 為:

吉林? ? ? ? ? ? ? 39 個(gè)商品

湖南 衡陽 ? ? ? 36 個(gè)商品

甘肅 慶陽 ? ? ? 34?個(gè)商品

上海? ? ? ? ? ? ? 25?個(gè)商品

山西 大同 ? ? ? 22?個(gè)商品

我所在的地區(qū)陜西渭南有 17 個(gè)商品在售飒箭,看到福建莆田也有 10 個(gè)商品在售,如下:

從商品標(biāo)題來看蜒灰,福建莆田銷售的黃花菜產(chǎn)地多為山西大同弦蹂。

其實(shí)淘寶有很多商家并非原產(chǎn)地直銷,黃花菜也基本上都是經(jīng)手了多層經(jīng)銷商了强窖。

接下來我們重點(diǎn)來看一下銷售單價(jià):

最貴的黃花菜:

根據(jù)單價(jià)篩選出了排名前 5 的商品凸椿,最貴的單價(jià)居然是?39000元/斤,仔細(xì)看了一下脑漫,這個(gè)商品是一個(gè)帶禮盒包裝的商品,凈含量為1g咙崎,實(shí)際上標(biāo)題中注明了凈含量為 500g,因此其單價(jià)應(yīng)該是 78 元/斤褪猛。

進(jìn)行修正后重新排序网杆,得到最貴的 5 個(gè)商品為:

平均單價(jià)在 150 元以上。

最便宜的黃花菜:

最便宜的菜有 3 個(gè)單價(jià) 10 元以下的商品伊滋,這 3 個(gè)商品是水泡菜碳却,并非干菜,過濾掉之后笑旺,最便宜的菜就是 12.8元昼浦。

12.8元,我不太清楚運(yùn)費(fèi)能夠做到多低燥撞,這么低的價(jià)格座柱,估計(jì)商家在虧本出售吧迷帜。

最貴的菜一斤的價(jià)格物舒,能買最低的價(jià)格 10 斤還多,您會(huì)選擇買那種菜吃戏锹?

整體價(jià)格情況:

704 個(gè)商品冠胯,平均單價(jià)為 50 元左右,不同的定價(jià)多達(dá) 300 個(gè)锦针,其中定價(jià)最多的商品也是 50荠察,有 17 個(gè)商品單價(jià)為 50元每斤置蜀,見下圖:

銷量最多的商品:

根據(jù)已付款人數(shù)和凈含量計(jì)算出銷售量,上圖顯示銷售量最多的三個(gè)商品定價(jià)分別為:18悉盆、20盯荤、30,基本上就是 20元焕盟、30元的樣子秋秤。

淘寶搜索結(jié)果中顯示的已付款人數(shù)應(yīng)該是指最近 30 天已付款人數(shù),按照這樣計(jì)算銷售前三的三個(gè)商品近一個(gè)月來銷售量在萬余斤脚翘。

單價(jià)區(qū)間銷售量統(tǒng)計(jì):

所有商品近一個(gè)月銷量為38252?斤灼卢,銷售前三的商品占到了銷售總量的?26.82%,統(tǒng)計(jì)了一下單價(jià)區(qū)間的銷售量:

單價(jià)大于100的商品銷售量:128.18

單價(jià)80(含)-100的商品銷售量:448.908

單價(jià)60(含)-80的商品銷售量:877.35

單價(jià)50(含)-60的商品銷售量:1137.388

單價(jià)40(含)-50的商品銷售量:1571.0

單價(jià)30(含)-40的商品銷售量:1453.69

單價(jià)20(含)-30的商品銷售量:14729.32

單價(jià)10(含)-20的商品銷售量:17346.4

可以看到明顯的趨勢,價(jià)格越便宜銷量越多来农,而在?30-40?與?40-50?兩個(gè)區(qū)間銷量相當(dāng)鞋真,甚至?40-50?價(jià)格區(qū)間的銷量比?30-40?之間的還能高一點(diǎn)點(diǎn)。

同樣沃于,可以看到不管是便宜到?12.8涩咖,還是貴到?210,都有朋友購買繁莹,前者便宜過菜農(nóng)的成本很多抠藕,后者顯然多了很多溢價(jià)。

存在即合理蒋困,不多說盾似。

那如果是您,您會(huì)選擇那個(gè)價(jià)位的黃花菜雪标?我想自然首選安全放心的黃花菜零院。

幾乎所有商家都在標(biāo)榜自家的菜無硫,源自農(nóng)家自產(chǎn)村刨,這似乎是一句完全正確的廢話告抄。(此廢話非彼廢話)

任何商家所有的菜最終的源頭都是來自于菜農(nóng),但是可能買到的一斤菜中有N多家菜農(nóng)的菜嵌牺,想象一下商販在鄉(xiāng)村收菜的情景打洼,不是說質(zhì)量會(huì)一定有問題,而是說質(zhì)量自然難以把控逆粹。

當(dāng)然募疮,704 個(gè)商品中肯定也有農(nóng)戶自營的商品,農(nóng)戶自營商品自然能夠完全把控品質(zhì)僻弹,但是要注意的是其一阿浓,農(nóng)戶自己做零售成本會(huì)更高,其次蹋绽,數(shù)量絕對有限芭毙,因此價(jià)格絕不會(huì)很低筋蓖。更重要的是,您如何能從 704 個(gè)商品中選擇出來退敦?

總結(jié)下來粘咖,就是要選到放心安全的黃花菜著實(shí)不易。

看到這篇文章的朋友侈百,恭喜您涂炎,不用再去糾結(jié)選擇了,如果有需要的話设哗,我想答案已經(jīng)不言而喻了唱捣。

因?yàn)椋蚁朐谶@里對自家的 2 畝黃花菜以及本家二叔家的黃花菜進(jìn)行預(yù)售网梢,合計(jì)約 6 畝黃花菜震缭,預(yù)計(jì)干菜產(chǎn)量 1000 斤左右,尋找 1000 位有緣朋友战虏。

關(guān)于售價(jià)

關(guān)于黃花菜的采摘:

可能很多朋友不了解拣宰,這里簡單說一下,采摘在 6 月中旬左右開始烦感,為期 40 天左右巡社,無論陰雨天晴,黃花菜必須每天采摘手趣,否則開花以后就不能吃了晌该。

采摘期間,一般下午 14绿渣、15時(shí)左右開始朝群,采摘時(shí)長約4-5個(gè)小時(shí),迎著烈日汗滴禾下土中符,若為陰雨天則身披雨衣冒雨采摘姜胖。

采摘過后需要蒸制,蒸制完成后自然晾曬后為成品干菜淀散。

的確是粒粒皆辛苦右莱。

關(guān)于成本:

黃花菜蒸制過后要靠晴天自然晾曬,如果遇到陰雨天氣档插,一般會(huì)入冷庫存放慢蜓,需要一定的費(fèi)用,其次陰雨天氣也會(huì)有一定的損耗阀捅。(如果采摘賣鮮菜不會(huì)有這些問題)

旺盛時(shí)期一般采摘不過來的時(shí)候都需要雇用人手胀瞪,18年日工資約 60 元,每天每人采摘鮮菜(綠菜)平均 40-50斤饲鄙,按照 6 斤鮮菜曬一斤干菜計(jì)算凄诞,一斤干菜人工采摘成本約 7 元左右,7 元意味著菜農(nóng)沒落到一毛錢忍级。

其次帆谍,因?yàn)閮H售自己家的黃花菜,能做好品質(zhì)的把控轴咱,自然產(chǎn)量也有限汛蝙,一年僅售一次,售完即止朴肺。

最終定價(jià):

綜合成本以及淘寶在售黃花菜平均價(jià)格窖剑,本次預(yù)售價(jià)格計(jì)劃定為?51.88元/斤含運(yùn)費(fèi)

其一戈稿,寓意我要發(fā)發(fā)西土。

其次,價(jià)格唯一鞍盗。目前在 51-52 元區(qū)間在售的 16 個(gè)商品需了,沒有定價(jià)為 51.88 元的商品。

預(yù)售規(guī)則

此次預(yù)售采用全款預(yù)售(穩(wěn)定售價(jià))般甲,從即日起開始至 2019 年 8 月 15 結(jié)束肋乍,開始采摘后按照訂單順序陸續(xù)發(fā)貨。

4 月 2 日特意回家到田間拍了些照片敷存,田間地頭景色很迷人墓造,一起來欣賞一下?(更多圖片淘寶商品詳情頁)

(鳥有語锚烦,花有香)

希望通過此次預(yù)售能解決賣菜難的問題滔岳,在建立個(gè)人品牌信譽(yù)同時(shí),能與各位朋友直接建立長期聯(lián)系和友誼挽牢。

更為重要的是谱煤,能讓您吃到絕對新鮮、絕對無添加的優(yōu)質(zhì)黃花菜禽拔,讓您省心安心刘离。

異 想

目前,在農(nóng)村務(wù)農(nóng)的基本上都是5睹栖、6十歲的老農(nóng)民硫惕,其實(shí)我也有思考過再過十年后農(nóng)村的地誰來種?

我個(gè)人的看法野来,一方面隨著農(nóng)村土地確權(quán)為土地流轉(zhuǎn)打好基礎(chǔ)恼除,發(fā)展的方向自然是土地流轉(zhuǎn)到少數(shù)人手中進(jìn)行規(guī)模化經(jīng)營。

同時(shí)另一方面會(huì)不會(huì)產(chǎn)生一些與終端消費(fèi)直連的高端經(jīng)營模式豁辉?為高端消費(fèi)者打造一個(gè)專屬菜園或者果園令野?

按照這個(gè)方向和思路,假如農(nóng)村一對小兩口在家經(jīng)營五畝田地徽级,按照每人每月4000元工資計(jì)算气破,一年工資約十萬元,那么應(yīng)該種植些什么餐抢,又該如何經(jīng)營呢现使?

如果你在學(xué)習(xí)Python的過程當(dāng)中有遇見任何問題,可以加入我的python交流學(xué)習(xí)qq群:250933691旷痕,多多交流問題碳锈,互幫互助,群里有不錯(cuò)的學(xué)習(xí)教程和開發(fā)工具欺抗。學(xué)習(xí)python有任何問題(學(xué)習(xí)方法售碳,學(xué)習(xí)效率,如何就業(yè))佩迟,可以隨時(shí)來咨詢我团滥,如果你準(zhǔn)備學(xué)習(xí)大數(shù)據(jù),也歡迎加入大數(shù)據(jù)學(xué)習(xí)交流qq群458345782报强,每天與大家分享學(xué)習(xí)資源哦

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末灸姊,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子秉溉,更是在濱河造成了極大的恐慌力惯,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,734評論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件召嘶,死亡現(xiàn)場離奇詭異父晶,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)弄跌,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評論 3 394
  • 文/潘曉璐 我一進(jìn)店門甲喝,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人铛只,你說我怎么就攤上這事埠胖。” “怎么了淳玩?”我有些...
    開封第一講書人閱讀 164,133評論 0 354
  • 文/不壞的土叔 我叫張陵直撤,是天一觀的道長。 經(jīng)常有香客問我蜕着,道長谋竖,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,532評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮蓖乘,結(jié)果婚禮上锤悄,老公的妹妹穿的比我還像新娘。我一直安慰自己驱敲,他們只是感情好铁蹈,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,585評論 6 392
  • 文/花漫 我一把揭開白布宽闲。 她就那樣靜靜地躺著众眨,像睡著了一般。 火紅的嫁衣襯著肌膚如雪容诬。 梳的紋絲不亂的頭發(fā)上娩梨,一...
    開封第一講書人閱讀 51,462評論 1 302
  • 那天,我揣著相機(jī)與錄音览徒,去河邊找鬼狈定。 笑死,一個(gè)胖子當(dāng)著我的面吹牛习蓬,可吹牛的內(nèi)容都是我干的纽什。 我是一名探鬼主播,決...
    沈念sama閱讀 40,262評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼躲叼,長吁一口氣:“原來是場噩夢啊……” “哼芦缰!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起枫慷,我...
    開封第一講書人閱讀 39,153評論 0 276
  • 序言:老撾萬榮一對情侶失蹤让蕾,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后或听,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體探孝,經(jīng)...
    沈念sama閱讀 45,587評論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,792評論 3 336
  • 正文 我和宋清朗相戀三年誉裆,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了顿颅。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,919評論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡足丢,死狀恐怖粱腻,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情霎桅,我是刑警寧澤栖疑,帶...
    沈念sama閱讀 35,635評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站滔驶,受9級特大地震影響遇革,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,237評論 3 329
  • 文/蒙蒙 一萝快、第九天 我趴在偏房一處隱蔽的房頂上張望锻霎。 院中可真熱鬧,春花似錦揪漩、人聲如沸旋恼。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,855評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽冰更。三九已至,卻和暖如春昂勒,著一層夾襖步出監(jiān)牢的瞬間蜀细,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,983評論 1 269
  • 我被黑心中介騙來泰國打工戈盈, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留奠衔,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,048評論 3 370
  • 正文 我出身青樓塘娶,卻偏偏與公主長得像归斤,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子刁岸,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,864評論 2 354

推薦閱讀更多精彩內(nèi)容