python爬虫实现分布式——redist数据库的使用

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫实现分布式——redist数据库的使用相关的知识,希望对你有一定的参考价值。

1.redis数据库的下载

    1.1打开浏览器,访问redist官网https://redis.io/download

    技术分享

 

    1.2如图所示:点击windows目录下的learn morn进入github下载界面

     技术分享

      1.3如下图所示:点击clone or download下载源码压缩包

      技术分享

 

 

2.redis的安装及验证

2.1解压及安装过程省略,安装后目录

技术分享

 各文件的含义

文件名 简要
redis-benchmark.exe 基准测试
redis-check-aof.exe aof
redischeck-dump.exe dump
redis-cli.exe 客户端
redis-server.exe 服务器
redis.windows.conf 配置文件

 

 

 

 

 

 

2.2点击redis-server.exe开始服务端,点击redis-cli.exe开启客户端

技术分享

A为客户端,B为服务端,划线部分表示客户端链接服务端成功

2.3redis数据库的验证:

在客户端输入赋值命令:set aaa hello

点击enter键,输出ok

输入命令:get aaa

点击enter键,输出aaa的值 “hello”

说明数据库安装成功,可以成功,储存数据,获取数据

技术分享

 

 

注:本文系自己边学边总结,写下来的心血,如有错误,欢迎指正!

 

以上是关于python爬虫实现分布式——redist数据库的使用的主要内容,如果未能解决你的问题,请参考以下文章

Python3爬虫学习分布式爬虫第一步--Redis分布式爬虫初体验

python网络爬虫——分布式爬虫

Python分布式爬虫原理

Python3爬虫爬取美女图新姿势--Redis分布式爬虫初体验

python分布式爬虫打造搜索引擎--------scrapy实现

python分布式爬虫打造搜索引擎--------scrapy实现