安装Scrapy过程中遇到的几个问题总结

Posted smartwen666

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了安装Scrapy过程中遇到的几个问题总结相关的知识,希望对你有一定的参考价值。

安装Scrapy  

1.https://www.lfd.uci.edu/~gohlke/pythonlibs/下载 Twisted

安装 Twisted-19.10.0-cp37-cp37m-win_amd64.whl  

这里有许多坑 需要分别从https://pypi.org/project/zope.interface/#files

下载wheel文件 包含:incremental-17.5.0-py2.py3-none-any.whl

zope.interface-4.7.1-cp37-cp37m-win_amd64.whl

Scrapy-1.8.0-py2.py3-none-any.whl

 

2.安装Scrapy

pip3 install  Scrapy-1.8.0-py2.py3-none-any.whl又报错坑爹 

 继续下载安装以下文件

queuelib-1.5.0-py2.py3-none-any.whl

parsel-1.5.2-py2.py3-none-any.whl

最终发现一个非常好的解决下载文件慢超时失败的问题,就是下载国内的镜像

pip3 install scrapy   -i https://pypi.tuna.tsinghua.edu.cn/simple

 

搞定大工搞成  

第五步:测试

参考https://blog.csdn.net/weixin_43012220/article/details/83755488

https://www.cnblogs.com/yebaofang/p/9820860.html

以上是关于安装Scrapy过程中遇到的几个问题总结的主要内容,如果未能解决你的问题,请参考以下文章

python安装scrapy小问题总结

Windows下安装Scrapy方法及常见安装问题总结——Scrapy安装教程

Genymotion 安装apk过程中遇到的问题总结

Python 搭建webdriver环境遇到的问题总结

windows 安装Scrapy常见错误总结

vagrant 1.8.6 安装过程及总结遇到的坑