scrapy无法爬取数据,并且不能创建txt文件

Image
Image
Image
Image
图片描述

回答:

是xpath解析路径的问题,谢谢大家

回答:

应该是写入模式有问题,试试 ab.

回答:

在linux运行的吧,是不是有权限问题?

回答:

看日志输出好像scrapy遇到robot.txt提前退出了,在settings中将ROBOTSTXT_OBEY改为ROBOTSTXT_OBEY = False试试。还不行就打断点调试吧

以上是 scrapy无法爬取数据,并且不能创建txt文件 的全部内容, 来源链接: utcz.com/a/161105.html

回到顶部