scrapy框架编写向redis数据库中存储数据的相关代码时报错解决办法

Posted lys666

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了scrapy框架编写向redis数据库中存储数据的相关代码时报错解决办法相关的知识,希望对你有一定的参考价值。

技术图片

错误信息:redis.exceptions.DataError: Invalid input of type: ‘dict‘. Convert to a byte, string or number first.

 

解决办法:python中redis包更新导致的问题,变更了srem方法的输入。使用旧版本pip install redis==2.10.6,即可解决

技术图片

 

以上是关于scrapy框架编写向redis数据库中存储数据的相关代码时报错解决办法的主要内容,如果未能解决你的问题,请参考以下文章

走近代码之Python--爬虫框架Scrapy

Scrapy框架基于scrapy-redis实现分布式爬虫 򓮘

scrapy专题:scrapy-redis 框架分析

scrapy框架

Scrapy-redis实现分布式爬取的过程与原理

Python的爬虫框架都有哪些?