爬虫框架scrapy安装

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫框架scrapy安装相关的知识,希望对你有一定的参考价值。

花了将近一下午才装好#scrapy#,我也真是毙了狗了

------------------------------------------------
上为背景,其中的艰难困苦自不必题。
问题:
1·缺少python依赖的c++库,按照上述文档2中的链接下载安装,不题。
2·安装lxml不成功,一下午都用在这里了
用了很多方法都不行,最后按照stackoverflow上的方法
从这里“You can do the steps from Flak‘s answer, or you can simply download the Windows installer, double click to launch it, and be on your way”.
下载了lxml2.7对应的whl;
pip install wheel;安装工具wheel以安装lxml.xxxx.whl安装包;
wheel install lxml.xxxx.whl;
set STATICBUILD=true && pip install lxml
(ok,终于把lxml安装好了)
最后执行pip install Scrapy;


何其艰难呀!
 

以上是关于爬虫框架scrapy安装的主要内容,如果未能解决你的问题,请参考以下文章

Python之Scrapy安装

Python爬虫框架Scrapy安装使用步骤

爬虫篇 | 高级爬虫:Scrapy爬虫框架的安装

初识scrapy爬虫框架

python的scrapy框架爬虫基础

python爬虫随笔-scrapy框架——scrapy框架的安装和结构介绍