Python之scrapy安装

Posted 风清扬001

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python之scrapy安装相关的知识,希望对你有一定的参考价值。

1.按照网上教程一步步实验,运行时报错:

htmlResponse‘ object has no attribute ‘xpath‘ in scrapy

个人使用的是scrapy0.14.4,搜索得到的答案是scrapy版本过低,于是乎个人又去官网下载最新版scrapy,下载的source文件。

安装过程中又提示错误:

UnicodeDecodeError: ‘ascii’ codec can’t decode byte 0xb0 in position 1: ordinal not in range(128)

坑不是一般的多啊,解决方法:

在python的Libsite-packages文件夹下新建一个sitecustomize.py,内容如下:

import sys
sys.setdefaultencoding(‘gb2312‘)

最后终于安装成功了。

 

以上是关于Python之scrapy安装的主要内容,如果未能解决你的问题,请参考以下文章

scrapy按顺序启动多个爬虫代码片段(python3)

python3.5 之Scrapy环境安装

Python之scrapy安装

Python爬虫进阶之Scrapy框架安装配置

转载python3安装scrapy之windows32位爬坑

python爬虫之scrapy安装