安装scrapy框架

Posted 破晓

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了安装scrapy框架相关的知识,希望对你有一定的参考价值。

前提安装好python、setuptools。

  1. 1.安装Python

        安装完了记得配置环境,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。在cmd中输入python如果出现版本信息说明配置完毕(如下面截图)。python下载网站,https://www.python.org/downloads/。请选择对应的Python版本安装。我装了2.7

    (记得设置环境变量)

  2.  

    2.安装lxml    lxml是一种使用 Python 编写的库,可以迅速、灵活地处理 XML。下载地址 https://pypi.python.org/pypi/lxml/3.3.1,可用pip下载,

    下载命令:python -m pip install lxml

  3.  

    3.安装setuptools  一般都已经安装了的,可在cmd中用 python -m pip list 查看是否已经安装,如果没安装,用下载命令:python -m pip install setuptools安装,下载地址https://pypi.python.org/packages/2.7/s/setuptools/

  4.  

    4.安装zope.interface

    可在cmd中用下载命令:python -m pip install zope.interface

     也可以使用第三步下载的setuptools来安装egg文件,现在也有exe版本,点击https://pypi.python.org/pypi/zope.interface/4.1.0#downloads下载。

  5.  

      5.安装Twisted

        可在cmd中用下载命令:python -m pip install Twisted,它是用Python实现的基于事件驱动的网络引擎框架。下载地址:

    http://twistedmatrix.com/trac/wiki/Downloads

  6.  

     6.安装pyOpenSSL  

     pyOpenSSL是Python的OpenSSL接口, 可在cmd中用下载命令:python -m pip install pyOpenSSL安装,下载地址:https://launchpad.net/pyopenssl

  7.  

    7.安装win32py          提供win32api,下载地址:https://sourceforge.net/projects/pywin32/files/

      

  8.  

     8.安装Scrapy

        直接在cmd中输入easy_install scrapy回车即可。安装后在cmd命令行输入scrapy,如果出现下图,则安装成功。

以上是关于安装scrapy框架的主要内容,如果未能解决你的问题,请参考以下文章

[爬虫框架scrapy]scrapy的安装

爬虫scrapy框架介绍

Scrapy框架----- 配置安装

scrapy框架之crawl问题解决

爬虫篇 | 高级爬虫:Scrapy爬虫框架的安装

框架---Scrapy (框架安装)