redis理论知识

Posted 2020-08-07

Redis理论

 

Redis 和memcached 基本类似，只是redis可以把数据同步到磁盘

Redis是一个开源，内存存储的数据结构服务器，可用作数据库，高速缓存和消息队列代理。

云数据库RDS 是一个稳定可靠。可弹性伸缩的在线数据服务库服务。基于飞天分布式系统和全SSD盘高性能存储，支持mysql sql server PPAS(兼容ORICAL)

 

redis 是一个高性能的 key-value 数据库。 redis 的出现,很大程度补偿了memcached 这类 key:value 存储的不足,在部分场合可以对关系数据库起到很好的补充作用。它提供了 java,C,C++,perl,javascript,Python,Ruby,Erlang,php 等客户端,使用很方便。

Redis与memcached一样所有数据都是保存在内存中,不同的是redis不定期的通过异步方式保存到磁盘上 (这称为“半持久化模式”);也可以把每一次数据变化都写入到一个 append only file(aof)里面(这称为“全持久化模式”)。

Redis支持主从同步，数据可以从master向任意数量的slave上同步，slave可以是关联其他slave的master。

 

Redis的优点

1.redis不仅仅支持简单的key-values类型的数据，也支持list set zset hash等数据类型的存储

2.Redis支持数据的备份,master-slave模式的数据备份

3.Redis 支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载使用

Redis只会缓存所有的key信息，如果redis发现内存的使用超过了一定的阀值，将触发swap的操作，根据计算得出哪些key对应的values需要swap到磁盘，同时在内存中清除。这种特性可以使得redis保持超过其机器本身内存大小的数据。当然，机器本身的内存必须要能够保持所有的key，这些数据是不会进行swap操作的。同时，由于将内存中的数据swap到了磁盘中的时候，提供服务的主线程和进行swap操作的子线程会共享这部分内存，所以，如果需要更新，则会阻塞这个操作，直到swap完成操作后才会进行修改。

当从redis中读取数据的时候，若是需要从swap中加载相应的数据，再返回给请求方，这里就存在一个IO线程池的问题。在默认情况下，redis会出现阻塞，即完成swap加载后，才会响应。所以，设置适当的IO线程池的大小，从swap中加载数据的读取请求做并发处理，减小阻塞的时间。

 

Redis Sentinel 提供高可用

Redis Cluster 提供自动分区

 

 

Gearman

利用gearman实现redis缓存mysql

Gearman 是一个支持分布式的任务分发框架:

Gearman Job Server:Gearman 核心程序,需要编译安装并以守护进程形式运行在后台。后台守护进程，维护一个队列。

Gearman Client:可以理解为任务的请求者。

Gearman Worker:任务的真正执行者,一般需要自己编写具体逻辑并通过守护进程方式运行,Gearman Worker 接收到 Gearman Client 传递的任务内容后,会按顺序处理。

大致流程:下面要编写的 mysql 触发器,就相当于 Gearman 的客户端。修改表,插入表就相当于直接下发任务。然后通过 lib_mysqludf_json UDF(user defined functions) 库函数将关系数据映射为 JSON 格式,然后在通过 gearman-mysql-udf 插件将任务加入到 Gearman 的任务队列中,最后通过redis_worker.php（worker.php将mysql数据异步复制到redis）,也就是 Gearman 的 worker 端来完成 redis 数据库的更新。

Mysql 要实现与外部程序互通的最好方式通过mysql UDF(user defined functions)来实现。为了让mysql能将数据传入到gearman中，这里使用了lib_mysqludf_json UDF库函数将关系数据映射为 JSON 格式（gearman只接受字符串作为入口参数）,然后在通过 gearman-mysql-udf 插件将任务加入到 Gearman 的任务队列中。

本文出自 “11841085” 博客，转载请与作者联系！