需要示例 Scrapy feed_export 到 FTP 站点
我有一个简单的Scrapy项目,它正在解析一个网站,并在本地生成一个JSON文件(通过命令行操作)。我想进一步改进这个项目,让它能够把这个JSON文件导出到一个FTP网站上。我查阅了Scrapy的文档和一些论坛,了解到这可以通过FEED_EXPORT来实现,但我不知道从哪里开始。
有没有人能给我一个例子或者教程让我参考一下呢?
1 个回答
0
比如你可以试试这个:
scrapy crawl spidername --set FEED_URI=ftp://user:pass@ftp.example.com/path/to/export.csv
你也可以在设置文件里设置 FEED_URI
:
FEED_URI="ftp://user:pass@ftp.example.com/path/to/export.csv"