[問題] python前端串接與scrapy翻頁
各位版上的前輩們好，我最近開始初學爬蟲。是這樣的，我想要抓一個電商平台的fb留
言資訊來做統計。現在遇到的問題是
1.用selenium加上webdriver，可以執行成功，數據也都沒錯。但是在跟我前端的網頁串
在一起的時候就會有問題，我是用shell_exec的方式來呼叫我的程式，但他會一直等待直
到網頁逾時。打開工作管理員的話，也可以看到chromedriver這筆，但就是無法繼續執行
下面的程式碼。
2.用scrapy，因為上述的問題，所以我想說用scrapy試看看，但卻在翻頁時遇到問題。在
網路上爬了很多文，大部分都是教說在JS或是XHR中找，但是也一直看不出甚麼端倪。
想請教前輩們有沒有甚麼建議或解決方法，謝謝!
想爬的網站:
https://goo.gl/uoVx5Y
feedback所在的iframe網址:
https://goo.gl/Drkthm
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 175.182.23.27
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1547371379.A.D80.html
→
01/14 22:09,
6年前
, 1F
01/14 22:09, 1F
→
01/14 22:10,
6年前
, 2F
01/14 22:10, 2F
→
01/14 22:10,
6年前
, 3F
01/14 22:10, 3F
推
01/17 11:50,
6年前
, 4F
01/17 11:50, 4F
Python 近期熱門文章
PTT數位生活區 即時熱門文章
