Python多線程批量驗(yàn)證HTTP代理


環(huán)境要求 :


  1. Python 2.7
  2. Requests庫 pip install requests

驗(yàn)證腳本 :


#!/usr/bin/env python 
# -*- coding: utf-8 -*- 

import threading
import requests

# config-start
testUrl = "http://1212.ip138.com/ic.asp" # 利用了ip138的IP查詢接口
timeout = 5 # 設(shè)置超時(shí)
threadNumber = 50 # 設(shè)置線程數(shù)
proxiesFileName = "proxies.txt"
successFileName = "success.txt"
# config-end

def testOnline(ip,port):
    '''
    測試HTTP代理是否可用
        利用IP138的接口 , 在響應(yīng)的頁面中尋找本機(jī)IP , 如果找到 , 則說明代理可以成功連接
    '''
    global successFileName
    global testUrl
    global timeout
    keyWord = ip
    proxies = {"http":"http://"+ip+":"+port}
    try:
        content=requests.get(testUrl,proxies=proxies,timeout=timeout).text
        if keyWord in content:
            print ip+":"+port
            file=open(successFileName,"a+")
            file.write(ip+":"+port+"\n")
            file.close()
        else:
            print "Proxy Error..."
    except Exception as e:
        print "NetWork Error..."

class myThread (threading.Thread):
    def __init__(self, ip, port):
        threading.Thread.__init__(self)
        self.ip = ip
        self.port = port
    def run(self):
        testOnline(self.ip,self.port)

proxies=open(proxiesFileName,"r")

threads = [] # 線程池

for proxy in proxies:
    line = proxy[0:-1]
    ip = line.split(":")[0] # 獲取IP
    port = line.split(":")[1]
    threads.append(myThread(ip,port))

for t in threads:
    t.start()
    while True:
        if(len(threading.enumerate())<threadNumber):
            break

測試代理IP數(shù)據(jù) :


60.31.185.90:8080
218.108.89.245:808
222.82.222.242:9999
60.206.222.157:3128
60.207.180.1:3128
61.168.162.3:80
218.76.106.78:3128
223.68.1.38:8000
1.82.216.134:80
220.160.22.115:80
122.72.18.160:80
58.217.195.141:80
223.67.136.218:80
60.206.113.252:3128
60.206.60.153:3128
122.72.33.138:80
124.133.230.254:80
1.82.216.135:80
114.215.101.42:3128
202.107.238.51:3128
114.215.150.13:3128
60.207.239.247:3128
203.70.11.186:80
211.153.17.151:80
60.207.189.250:3128
60.207.239.245:3128
111.204.0.194:9999
60.207.239.246:3128
218.56.132.157:8080
183.63.110.202:3128
123.65.217.151:9797
203.91.121.74:3128
218.67.126.15:3128
118.144.213.85:3128
115.231.219.202:3128
60.206.183.249:3128
113.200.159.155:9999
218.56.132.154:8080
202.105.179.164:3128
60.207.135.221:3128
162.105.80.111:3128
124.206.111.158:3128
60.207.175.2:3128
123.57.180.234:3128
118.144.154.253:3128
122.224.227.202:3128
218.56.132.158:8080
218.56.132.156:8080
60.206.148.135:3128
60.206.229.152:3128
221.204.11.8:8080
115.238.228.9:8080
60.191.160.20:3128
113.102.153.123:9999
61.163.39.70:9999
60.191.164.226:3128
123.57.58.164:80
124.88.67.54:80
122.226.255.254:3128
123.139.59.85:9999
58.242.248.5:80
60.191.164.83:3128
119.10.72.33:8088
122.224.215.14:3128
14.119.46.231:9999
218.75.149.207:3128
112.95.56.37:9999
27.46.48.137:8888
221.219.230.62:9000
119.129.96.39:9797
119.29.103.13:8888
123.5.57.136:9999
61.52.129.79:9999
123.15.44.40:9999
14.119.40.131:8080

結(jié)果 :


Paste_Image.png
122.72.33.138:80
58.217.195.141:80
1.82.216.135:80
220.160.22.115:80
1.82.216.134:80
122.72.18.160:80
114.215.101.42:3128
114.215.150.13:3128
123.65.217.151:9797
58.242.248.5:80
61.168.162.3:80
122.224.227.202:3128
223.68.1.38:8000
124.88.67.54:80
202.107.238.51:3128
218.56.132.154:8080
183.63.110.202:3128
203.91.121.74:3128
162.105.80.111:3128
115.231.219.202:3128
123.5.57.136:9999
60.191.164.83:3128
218.67.126.15:3128
122.72.33.138:80
1.82.216.134:80
58.217.195.141:80
1.82.216.135:80
122.72.18.160:80
220.160.22.115:80
122.224.227.202:3128
58.242.248.5:80
221.204.11.8:8080
223.68.1.38:8000
124.88.67.54:80
114.215.150.13:3128
114.215.101.42:3128
122.72.33.138:80
58.217.195.141:80
1.82.216.135:80
1.82.216.134:80
220.160.22.115:80
122.72.18.160:80
114.215.150.13:3128
58.242.248.5:80
61.168.162.3:80
223.68.1.38:8000
122.224.227.202:3128
119.29.103.13:8888
202.107.238.51:3128
123.5.57.136:9999
114.215.101.42:3128
123.57.180.234:3128
202.105.179.164:3128
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市鬓长,隨后出現(xiàn)的幾起案子嵌施,更是在濱河造成了極大的恐慌泊柬,老刑警劉巖叠萍,帶你破解...
    沈念sama閱讀 212,294評論 6 493
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件夭禽,死亡現(xiàn)場離奇詭異贡茅,居然都是意外死亡城菊,警方通過查閱死者的電腦和手機(jī)备燃,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,493評論 3 385
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來凌唬,“玉大人并齐,你說我怎么就攤上這事】退埃” “怎么了冀膝?”我有些...
    開封第一講書人閱讀 157,790評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長霎挟。 經(jīng)常有香客問我窝剖,道長,這世上最難降的妖魔是什么酥夭? 我笑而不...
    開封第一講書人閱讀 56,595評論 1 284
  • 正文 為了忘掉前任赐纱,我火速辦了婚禮,結(jié)果婚禮上熬北,老公的妹妹穿的比我還像新娘疙描。我一直安慰自己,他們只是感情好讶隐,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,718評論 6 386
  • 文/花漫 我一把揭開白布起胰。 她就那樣靜靜地躺著,像睡著了一般巫延。 火紅的嫁衣襯著肌膚如雪效五。 梳的紋絲不亂的頭發(fā)上地消,一...
    開封第一講書人閱讀 49,906評論 1 290
  • 那天,我揣著相機(jī)與錄音畏妖,去河邊找鬼脉执。 笑死,一個(gè)胖子當(dāng)著我的面吹牛戒劫,可吹牛的內(nèi)容都是我干的半夷。 我是一名探鬼主播,決...
    沈念sama閱讀 39,053評論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼迅细,長吁一口氣:“原來是場噩夢啊……” “哼巫橄!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起茵典,我...
    開封第一講書人閱讀 37,797評論 0 268
  • 序言:老撾萬榮一對情侶失蹤湘换,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后敬尺,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,250評論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡贴浙,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,570評論 2 327
  • 正文 我和宋清朗相戀三年砂吞,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片崎溃。...
    茶點(diǎn)故事閱讀 38,711評論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡蜻直,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出袁串,到底是詐尸還是另有隱情概而,我是刑警寧澤,帶...
    沈念sama閱讀 34,388評論 4 332
  • 正文 年R本政府宣布囱修,位于F島的核電站赎瑰,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏破镰。R本人自食惡果不足惜餐曼,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,018評論 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望鲜漩。 院中可真熱鬧源譬,春花似錦、人聲如沸孕似。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,796評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽喉祭。三九已至养渴,卻和暖如春雷绢,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背厚脉。 一陣腳步聲響...
    開封第一講書人閱讀 32,023評論 1 266
  • 我被黑心中介騙來泰國打工习寸, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人傻工。 一個(gè)月前我還...
    沈念sama閱讀 46,461評論 2 360
  • 正文 我出身青樓霞溪,卻偏偏與公主長得像,于是被迫代替她去往敵國和親中捆。 傳聞我的和親對象是個(gè)殘疾皇子鸯匹,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,595評論 2 350

推薦閱讀更多精彩內(nèi)容

  • 環(huán)境管理管理Python版本和環(huán)境的工具。p–非常簡單的交互式python版本管理工具泄伪。pyenv–簡單的Pyth...
    MrHamster閱讀 3,788評論 1 61
  • # Python 資源大全中文版 我想很多程序員應(yīng)該記得 GitHub 上有一個(gè) Awesome - XXX 系列...
    aimaile閱讀 26,454評論 6 428
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理殴蓬,服務(wù)發(fā)現(xiàn),斷路器蟋滴,智...
    卡卡羅2017閱讀 134,633評論 18 139
  • GitHub 上有一個(gè) Awesome - XXX 系列的資源整理,資源非常豐富染厅,涉及面非常廣。awesome-p...
    若與閱讀 18,630評論 4 418
  • 22年12月更新:個(gè)人網(wǎng)站關(guān)停津函,如果仍舊對舊教程有興趣參考 Github 的markdown內(nèi)容[https://...
    tangyefei閱讀 35,170評論 22 257