经验拾忆(纯手工)=> Scrapyd
我之前做的项目:一直用的 Linux的Screen会话工具+ Scrapy的JOBDIR来控制爬虫开关。但是有后来想到用 Web 来控制爬虫的开关。所以我想到了用Scrapyd服务实现。安装scrapyd服务pip install scr
2024-11-16
在linux下安装并运行scrapyd
系统:centos7.4安装scrapyd:pip isntall scrapyd因为我腾讯云上是python2与python3并存的 所以我执行的命令是:pip3 isntall scrapyd安装后新建一个配置文件: sudo mkd
2024-11-16