为什么通过url爬取到的直播图片显示不出来

图片描述

#encoding=utf-8

import urllib

import re

from bs4 import BeautifulSoup

url='http://www.douyu.com/directory'

html=urllib.urlopen(url).read()

soup=BeautifulSoup(html)

j=0

a=soup.find_all('img',src=re.compile(u'http.*?\.jpg'))

for i in a:

urllib.urlretrieve(i['src'],'%d.jpg'%j)

j+=1

回答:

一个模块是 <img class="preview" data-original="http://staticlive.douyutv.com/upload/game_cate/c543faae97189c529c37b7741906d5a1.jpg" src="http://staticlive.douyutv.com/common/douyu/images/game_cate.jpg"/>

所以爬取的attribute不应该要 src 而应该 要 data-original

改为 urllib.urlretrieve(i['data-original'], '%d.jpg' % j)


实例结果可行c543faae97189c529c37b7741906d5a1.jpg

回答:

其实src和data-original其实都是可以获取图片的,一般网站都会有防爬虫的措施

以上是 为什么通过url爬取到的直播图片显示不出来 的全部内容, 来源链接: utcz.com/a/159850.html

回到顶部