[問題] ptt 爬蟲疑問

看板Python作者 (緒風)時間1月前 (2024/09/26 00:29), 編輯推噓3(304)
留言7則, 5人參與, 1月前最新討論串1/1
請教各位爬蟲大大,若遇到爬ptt文章時,遇到檔案太大,無法完全顯示留言的問題時,要如何解決呢? 目前看了各家網頁都無法全部顯示留言 好像只能登錄term.ptt.cc 才能查看,只是這邊對小弟來說就進入未知的領域, 請問各位爬蟲大師有辦法直接用python讀取term.ptt.cc上的資訊嗎? ----- Sent from JPTT on my iPhone -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 118.169.224.144 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1727281746.A.086.html

09/26 05:04, 1月前 , 1F
網頁版ptt不就一次顯示所有留言了嗎
09/26 05:04, 1F

09/26 07:21, 1月前 , 2F
是無法完全顯示即時留言吧?我記得有相關套件可用
09/26 07:21, 2F

09/27 14:25, 1月前 , 3F
後來用pyptt 解決了 網頁版我看都無法全部顯示欸
09/27 14:25, 3F

09/28 18:10, 1月前 , 4F
pyptt比較像模擬你是一個終端機上bbs的方式提取資料
09/28 18:10, 4F

09/28 18:11, 1月前 , 5F
網頁版因為有做cache機制設定,不同步是正常的
09/28 18:11, 5F

10/07 10:03, 1月前 , 6F
(飄過~
10/07 10:03, 6F

10/08 21:43, 1月前 , 7F
樓上作者XD
10/08 21:43, 7F
文章代碼(AID): #1cz3fI26 (Python)
文章代碼(AID): #1cz3fI26 (Python)