Re: [問題]我寫的爬蟲只會爬到第一個符合條件的
※ 引述《elmo56 (小樹芽)》之銘言：
: 大家好
: 我的問題主要是在爬資料的時候
: 設定好要抓的tag後 只會抓第一筆
: pagelink=url.strip()
: request_get=requests.get(pagelink)
: soup_post=BeautifulSoup(request_get.text.encode('utf-8'))
: data = h.unescape(soup_post.find('td',{'itemprop':'actor'}).text) +',' +
: h.unescape(soup_post.find('td',{'class':'character'}).text)
: 要抓的頁面中符合這個tag的有非常多筆
: 但只會抓到最上面的第一筆
: 就跳出
: 接下來要怎麼寫呢
: 謝謝大家
我猜你是要爬imdb
要抓多筆資料可以用findAll
先抓上一層tr 再抓演員跟角色tag
data = [ h.unescape(case.find('td',{'itemprop':'actor'}).text) +',' +
h.unescape(case.find('td',{'class':'character'}).text)
for case in soup_post.find('table',{'class':'cast_list'}).findAll('tr')]
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.224.138.98
※ 文章網址: http://www.ptt.cc/bbs/Python/M.1419070531.A.3DE.html
→
12/23 00:31, , 1F
12/23 00:31, 1F
討論串 (同標題文章)
本文引述了以下文章的的內容：
完整討論串 (本文為第 2 之 2 篇)：
Python 近期熱門文章
PTT數位生活區 即時熱門文章
