最近在學(xué)習(xí)爬蟲程序,反爬時非常缺少代理IP,本來網(wǎng)上的有效免費代理就少,何況我需要的還必須支持HTTPS,就更少了,于是只能硬著頭皮網(wǎng)上搜了,功夫負有心人,讓我找到一些可用的地址,現(xiàn)將他們一一列舉出來,有需要者可以免去尋找的煩惱了。
挑了幾個比較好爬的,使用python 2.7
爬取HTTPS代理并寫入MySQL數(shù)據(jù)庫(5.6)的代碼見Github地址:https://github.com/whaike/HTTPSProxy/blob/master/httpsProxys.py
在網(wǎng)上看到一個比較好的代理IP池更新方案,每次校驗之后對于數(shù)據(jù)庫中的代理進行打分,合格的加分,失敗的減分,分數(shù)高的保留,分數(shù)低的刪除,最近實現(xiàn)了一個簡易的,不好的地方請指正。詳見Github一個帶有打分機制的代理IP池
代理地址最后驗證日期:2017-8-28
純真
66免費代理網(wǎng) #推薦
西刺免費代理IP
酷伯伯HTTP代理
快代理
proxy360.cn
站大爺
Free Proxy List
年少#不穩(wěn)定
全網(wǎng)代理IP
IP海
每日代理 #渣渣
360代理IP
流年免費HTTP代理IP 24小時自助提取系統(tǒng) #推薦
云代理
秘密代理IP #渣渣
迷惘網(wǎng)絡(luò)IP代理
敲代碼 免費代理IP網(wǎng) #不穩(wěn)定
代理IP檢測平臺,100免費代理IP
瑤瑤代理IP
米撲代理
httpdaili
螞蟻代理
風(fēng)云代理IP#不穩(wěn)定
開心代理
訊代理
急速IP #渣渣
最后附上一篇關(guān)于代理IP的知識 [中國百科網(wǎng) 代理IP是如何獲取的] (http://www.chinabaike.com/t/10475/2016/0530/5239251.html)