scrapy安装

Posted naniandiam

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了scrapy安装相关的知识,希望对你有一定的参考价值。

1.安装Python
安装完了记得配置环境,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。在cmd中输入python如果出现版本信息说明配置完毕

2.安装lxml
lxml是一种使用 Python 编写的库,可以迅速、灵活地处理 XML。网址https://pypi.python.org/pypi/lxml/3.3.1选择对应的Python版本安装。

3.安装zope.interface
直接使用pip命令下载

4.安装Twisted
Twisted是用Python实现的基于事件驱动的网络引擎框架,可以直接pip安装
5.安装pyOpenSSL
pyOpenSSL是Python的OpenSSL接口,直接pip安装
6.安装win32py
下载地址:https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/,这里特别注意pywin必须与python版本对应,python -v查看python版本,py3.6 win32版本只能用pywin32  3.6 32位的安装包

7.最后直接pip install scrapy,完成安装

以上是关于scrapy安装的主要内容,如果未能解决你的问题,请参考以下文章

python爬虫随笔-scrapy框架——scrapy框架的安装和结构介绍

Scrapy框架——安装以及新建scrapy文件

Scrapy框架----- 配置安装

scrapy 和 scrapy_redis 安装

Windows下安装Scrapy方法及常见安装问题总结——Scrapy安装教程

scrapy入门:安装scrapy