学习爬虫Scrapy遇到的错误

Posted 魔女小溪,冲!冲!冲!

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了学习爬虫Scrapy遇到的错误相关的知识,希望对你有一定的参考价值。

1、

这个问题是由于路径中含有中文,导致编码格式出错的问题,

查看错误方法,进入到ntpath.py文件中去,找到85行,然后,print 一下result_path,因为后面报出的错误,就是因为这段路径中包含中文才造成的,通过打印出,就可以知道是哪的路径包含中文,然后去修改过来

 

2、cmd中查看环境变量

查看打印:echo %PATH%

刷新:set PATH=

P:这里有个window 系统的bug,我在系统环境变量中改了,然后,也刷新过了,还是总是显示为之前包含中文的路径,解决的方法,就是,直接删除你配置的环境变量,然后,在重新添加,就可以了

以上是关于学习爬虫Scrapy遇到的错误的主要内容,如果未能解决你的问题,请参考以下文章

Scrapy爬虫中遇到问题"Filtered offsite request"

python3.7版本使用scrapy遇到invalid syntax

爬虫(scrapy中的ImagesPipeline)

Python爬虫Scrapy框架IP代理的配置与调试

Python爬虫框架Scrapy学习笔记

Python3.5安装Scrapy遇到的错误及解决方法