※ 引述《elmo56 (小樹芽)》之銘言:
: 大家好
: 我的問題主要是在爬資料的時候
: 設定好要抓的tag後 只會抓第一筆
: pagelink=url.strip()
: request_get=requests.get(pagelink)
: soup_post=BeautifulSoup(request_get.text.encode('utf-8'))
: data = h.unescape(soup_post.find('td',{'itemprop':'actor'}).text) +',' +
: h.unescape(soup_post.find('td',{'class':'character'}).text)
: 要抓的頁面中符合這個tag的有非常多筆
: 但只會抓到最上面的第一筆
: 就跳出
: 接下來要怎麼寫呢
: 謝謝大家
我猜你是要爬imdb
要抓多筆資料可以用findAll
先抓上一層tr 再抓演員跟角色tag
data = [ h.unescape(case.find('td',{'itemprop':'actor'}).text) +',' +
h.unescape(case.find('td',{'class':'character'}).text)
for case in soup_post.find('table',{'class':'cast_list'}).findAll('tr')]