PTT數位生活區 / Python

[問題] 爬蟲網頁

看板Python作者 (Nightshift24)時間7年前 (2018/06/11 17:26), 7年前編輯推噓1(1推 0噓 8→)
留言9則, 5人參與, 7年前最新討論串1/1
小的是剛學python的新手 想請教一下 如果要一次爬很多網頁收集成資料庫的話 讀取網頁的code 是用for迴圈的方式嗎 還是有什麼比較常用的方法 謝謝 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 42.73.46.173 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1528709200.A.936.html
→
06/11 17:37, 7年前 , 1F
YT有很多教學 先從簡單的開始
06/11 17:37, 1F
→
06/11 23:33, 7年前 , 2F
先學會逛github stackoverflow
06/11 23:33, 2F
→
06/12 01:28, 7年前 , 3F
除了迴圈還能怎麼做...
06/12 01:28, 3F
→
06/12 01:29, 7年前 , 4F
我是把要爬的網頁做成一個list，然後for each 一個一個
06/12 01:29, 4F
→
06/12 01:29, 7年前 , 5F
慢慢抓。
06/12 01:29, 5F
→
06/12 01:30, 7年前 , 6F
另一個不是動態網頁，則是直接改url的編號，一個一個抓
06/12 01:30, 6F
→
06/12 01:31, 7年前 , 7F
我寫過2個爬蟲，一個抓即時價格，一個載圖圖。
06/12 01:31, 7F
謝謝分享 用了一天終於跑完了 for迴圈滿快的!
→
06/12 08:43, 7年前 , 8F
yield
06/12 08:43, 8F
※ 編輯: piyieen (42.72.123.55), 06/12/2018 17:14:18
推
06/13 19:58, 7年前 , 9F
用while loop阿然後DFS or BFS爬
06/13 19:58, 9F
‣ 更多 piyieen 的文章
文章代碼(AID): #1R7a1Gas (Python)
Python 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 piyieen 的文章
文章代碼(AID): #1R7a1Gas (Python)