Scrapy:存储数据
我是python和scrapy的新手。我打算遵循Scrapy教程,但是我不了解存储步骤的逻辑。
scrapy crawl spidername -o items.json -t jsonscrapy crawl spidername --set FEED_URI=output.csv --set FEED_FORMAT=csv
我不了解的含义:
- -o
- -t
- –set
谢谢你的帮助
回答:
你可以通过scrapy crawl -h
在项目目录中键入来查看可用命令的列表。
scrapy crawl spidername -o items.json -t json
- -o 指定转储项目的输出文件名(items.json)
- -t 指定转储项目的格式(json)
scrapy crawl spidername --set FEED_URI=output.csv --set FEED_FORMAT=csv
--se
t 用于设置/覆盖设置FEED_URI
用于设置物料转储的存储后端。在这种情况下,将其设置为“ output.csv”,它使用本地文件系统,即简单的输出文件。(对于当前示例-output.csv)FEED_FORMAT
用于设置(输出)提要的序列化格式,即(对于当前示例csv)
以上是 Scrapy:存储数据 的全部内容, 来源链接: utcz.com/qa/414532.html