为什么通过url爬取到的直播图片显示不出来
#encoding=utf-8import urllib
import re
from bs4 import BeautifulSoup
url='http://www.douyu.com/directory'
html=urllib.urlopen(url).read()
soup=BeautifulSoup(html)
j=0
a=soup.find_all('img',src=re.compile(u'http.*?\.jpg'))
for i in a:
urllib.urlretrieve(i['src'],'%d.jpg'%j)
j+=1
回答:
一个模块是 <img class="preview" data-original="http://staticlive.douyutv.com/upload/game_cate/c543faae97189c529c37b7741906d5a1.jpg" src="http://staticlive.douyutv.com/common/douyu/images/game_cate.jpg"/>
所以爬取的attribute不应该要 src 而应该 要 data-original
改为 urllib.urlretrieve(i['data-original'], '%d.jpg' % j)
实例结果可行
回答:
其实src和data-original其实都是可以获取图片的,一般网站都会有防爬虫的措施
以上是 为什么通过url爬取到的直播图片显示不出来 的全部内容, 来源链接: utcz.com/a/159850.html