[問題] 想請問有關爬蟲問題

看板Python作者rennmin84 (rennmin84)時間6年前 (2018/12/23 15:55)推噓1(1推 0噓 6→)

留言7則, 5人參與討論串1/1

大家好好好！最近想要寫爬蟲程式來蒐集一些股票資訊（例如某個股的每季本益比或ROE），雖然財報狗已經把數據整理的很漂亮，可是想說當作練習就來抓取上面的資料。不過現在遇到的一個問題是找不到完整的tag資訊，我的程式碼和網站原始碼如下： import requests from bs4 import BeautifulSoup URL = 'https://statementdog.com/analysis/tpe/2912/financial-structure-ratio' resp = requests.get(URL).text soup = BeautifulSoup(resp, 'html5lib') data = soup.find('ul', {'id': 'datasheet'}) https://i.imgur.com/evMuXjH.jpg

在標籤屬性為{'id': 'datasheet'}的ul標籤當中還有很多資料，可是用我上面的程式碼都找不到裡面的資料，然後data這個變數值只有<ul id="datasheet"></ul>。想請問大家我的程式碼是哪邊出問題了，感謝感謝～ -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 115.43.135.35 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1545551729.A.103.html ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:01:13 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:01:52 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:10:23 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:15:37 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:15:53 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:19:11 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:19:31 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:23:21 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:23:51 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:26:51 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:28:13 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:28:30 ※ 編輯: rennmin84 (115.43.135.35), 12/23/2018 16:29:02

→

dododavid006

12/23 17:10, 6年前 , 1^F

12/23 17:10, 1^F

對耶沒有考慮過登入的問題，感謝回覆！我來試試看！

→

InfinityGate

12/23 18:26, 6年前 , 2^F

12/23 18:26, 2^F

不好意思我有點菜..請問動態的資料用BeautifulSoup就看不到嗎？那不是要用Selenium?

→

TakiDog