PTT數位生活區 / Python

[閒聊] 請問有人用過免費Proxy寫爬蟲嗎?

看板Python作者 (匈牙利=Hungary)時間6年前 (2019/07/19 14:21), 6年前編輯推噓0(0推 0噓 4→)
留言4則, 4人參與, 6年前最新討論串1/1
http://tinyw.in/lOA8 附上網址 最近再用BeautifulSoup寫爬蟲，但老問題就是遇到防火牆規則 相同IP重複挖取被擋下來了 就想說用跳板來抓 看到這一篇是抓可以用的免費Proxy來抓 Code分成兩大部分 第一部分就是一個小爬蟲去爬免費Proxy 不知道有沒有人玩過這個呢? 分享給大家 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 125.230.119.225 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1563517298.A.DAA.html ※ 編輯: philipwen (125.230.119.225 臺灣), 07/19/2019 14:27:31
→
07/19 14:37, 6年前 , 1F
問一下 有沒有人死在proxies=Next(proxy_pool)呢
07/19 14:37, 1F
→
07/19 21:43, 6年前 , 2F
先把proxy4free列表裡的刷一次看哪些能用~
07/19 21:43, 2F
→
07/20 00:24, 6年前 , 3F
就一個 for 迴圈和一個 get 去檢查能不能用...
07/20 00:24, 3F
→
07/21 10:32, 6年前 , 4F
proxybroker
07/21 10:32, 4F
‣ 更多 philipwen 的文章
文章代碼(AID): #1TCM5osg (Python)
Python 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 philipwen 的文章
文章代碼(AID): #1TCM5osg (Python)