安装好了Scrapyd之后,我们可以直接请求它提供的API来获取当前主机的Scrapy任务运行状况。比如,某台主机的IP为192.168.1.1,则可以直接运行如下命令获取当前主机的所有Scrapy项目:curl http://localhost:[email protected]继续阅读 » 搞java代码 3个月前 (05-24) 1浏览 0评论0个赞
Scrapyd是一个用于部署和运行Scrapy项目的工具,有了它,你可以将写好的Scrapy项目上传到云主机并通过API来控制它的运行。既然是Scrapy项目部署,基本上都使用Linux主机,所以本节的安装是针对于Linux主机的。1. 相关链接GitHub:https://github.com/scrapy/scrapydPyPI:https://……继续阅读 » 搞java代码 3个月前 (05-24) 1浏览 0评论0个赞