各位前辈我的这段代码是不是少了什么,为什么输出的结果会是一个空的列表?
回答
这个网站是动态加载的数据,所以直接用requests模块请求网页内容是请求不到任何数据的,获取动态网页数据的方法:
一是利用python 的 selenium
模块,
二是分析网站的接口,可以获取到想到的数据
以下是分析接口,然后请求获取的数据
import requestsurl = 'https://careers.tencent.com/tencentcareer/api/post/Query?countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex=1&pageSize=10&language=zh-cn&area=cn'
headers = {
"User-Agent":"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)",
"Referer": "https: // careers.tencent.com / search.html",
"Host":"careers.tencent.com",
"TE":"Trailers",
"Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8",
"Accept-Encoding":"gzip, deflate, br",
"Cache-Control":"max-age=0",
"Upgrade-Insecure-Requests":"1"
}
res = requests.get(url=url,headers=headers)
print(res.json())
以上是 各位前辈我的这段代码是不是少了什么,为什么输出的结果会是一个空的列表? 的全部内容, 来源链接: utcz.com/a/64793.html