安装scrapyd-client解决后期爬虫部署上线,打包成egg的方案

Posted 2021-02-04 songdongdong6

1.安装依赖库:

pip install scrapyd-client

2.验证是否成功

任意doc窗口打开

运行: scrapyd-deploy -h

如出现下图则证明成功:

?

?

1.png

错误处理:

报错: ‘scrapyd-deploy‘ 不是内部或外部命令，也不是可运行的程序或批处理文件

解决:

1.进入自己电脑安装python 的位置,找到Scripts文件夹,进入

2.创建文件 scrapy.bat

利用文本编辑器打开,添加内容:(注:拷贝粘贴即可,将路径改成自己电脑的)

@echo off C:UsersAdministratorAppDataLocalProgramsPythonPython36python.exe C:UsersAdministratorAppDataLocalProgramsPythonPython36Scriptsscrapy %*

3.创建文件 scrapyd-deploy.bat

利用文本编辑器打开,添加内容:(注:拷贝粘贴即可,将路径改成自己电脑的)

@echo off C:UsersAdministratorAppDataLocalProgramsPythonPython36python.exe C:UsersAdministratorAppDataLocalProgramsPythonPython36Scriptsscrapyd-deploy %*

保存以上两个文件

然后运行 scrapyd-deploy -h即可

(注意:一定要指到自己的python.exe才行)