最近用Python寫了一個簡書用戶的爬蟲形入,單機耗時30小時抓取了簡書30萬用戶的數(shù)據(jù)(設(shè)置了適當(dāng)?shù)南螺d延遲昆淡,所以耗時較長忆家。當(dāng)然了衙耕,主要是避免簡書服務(wù)器造成不必要的壓力)吩愧。簡書...

IP屬地:山東
最近用Python寫了一個簡書用戶的爬蟲形入,單機耗時30小時抓取了簡書30萬用戶的數(shù)據(jù)(設(shè)置了適當(dāng)?shù)南螺d延遲昆淡,所以耗時較長忆家。當(dāng)然了衙耕,主要是避免簡書服務(wù)器造成不必要的壓力)吩愧。簡書...