[問題] 爬取infinite scrolling web

看板Python作者 (里歐)時間10年前 (2015/06/30 12:28), 編輯推噓0(002)
留言2則, 1人參與, 最新討論串1/1
有不用selenium可以爬infinite scrolling web的方法嗎? 有些page selenium沒有辦法爬(ex:quora),而且selenium很慢 有沒有其他方式可以background trigger infinite scrolling 讓我可以爬到整個網頁呢? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 60.250.185.98 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1435638486.A.BC2.html

07/08 08:31, , 1F
查他的js呼叫那一隻api,然後組參數呼叫。 這種方式
07/08 08:31, 1F

07/08 08:31, , 2F
如何
07/08 08:31, 2F
文章代碼(AID): #1LaXhMl2 (Python)
文章代碼(AID): #1LaXhMl2 (Python)