一个高级的web爬行和web抓取框架
Scrapy3的Python项目详细描述
摘要
这是一把给斯皮里的叉子。最适合在Python3中使用
概述
scrapy是一个快速的高级web抓取和web抓取框架,用于 抓取网站并从网页中提取结构化数据。它可以用来 用途广泛,从数据挖掘到监控和自动化测试。
有关更多信息,包括功能列表,请访问Scrapy主页: https://scrapy.org
要求
- Python3.4+
- 适用于Linux、Windows、Mac OSX、BSD
文档
文档可在https://doc.scrapy.org/和^{tt1}上在线获得。$ 目录。
释放量
社区(博客、Twitter、邮件列表、IRC)
贡献
见https://doc.scrapy.org/en/master/contributing.html
行为准则
请注意,此项目发布时附带了参与者行为准则 (见https://github.com/scrapy/scrapy/blob/master/CODE_OF_CONDUCT.md)。
通过参与这个项目,你同意遵守它的条款。 请向opensource@scrapinghub.com报告不可接受的行为。