Windows和Linux下scrapy框架的安装

Posted 2020-12-31

windows下安装:

1.安装Anaconda环境管理工具

也可以使用pip安装,值得注意的是如果你使用的是pip安装，你需要解决相应的包依赖（解决依赖一般会让你怀疑人生、怀疑scrapy，建议还是用Anaconda安装，少年！）

Anaconda 下载地址:https://www.anaconda.com/download/    里面有不同的平台，不同的版本，根据您的平台进行下载即可！这里的话建议大家下载Anaconda全包，而不是Miniconda，因为后者虽然小巧，但会出现一些问题，如果你怕填坑就请下载Anaconda，500M左右，这里再说一点，python是不用安装的，当然装了也没关系！

 

下载完成后可以开始傻瓜式安装,下一步下一步..... 下载路径这里注意不要带空格,

Advanced Options这一步两个都勾选,第一个是加入环境变量,下面是默认安装python3.6为默认的python解释器,然后下一步下一步...,最后安装完成.

 

2.安装scrapy

安装完成后开始菜单中会出现Anaconda Navigator，点击启动Anaconda，稍等片刻，正在启动

启动后点击左侧:Environments

右侧有个not installed选项,未安装的包 , 在右侧搜索框输入scrapy

选中搜索到的包,点击Apply安装, 出现安装依赖包,点击安装就可以了  

 

Linux下安装:

需要安装大量的依赖包(否则安装scrapy会报错),下面我把命令发出来,具体为什么安装这些,我就不解释了

傻瓜式命令输入:

yum -y install epel-release

yum install python-pip -y

pip install --upgrade pip

yum install gcc -y

yum install gcc libffi-devel python-devel openssl-devel -y

pip install scrapy

 

安装完成后打开命令行输入scrapy 如果不报错,安装就成功啦

到这里安装教程就完了,声明本篇博客借鉴了scrapy中文网的内容,大家可以百度搜索一下 scrapy中文网,教程很基础,也很有意思