redis pipe管道

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了redis pipe管道相关的知识,希望对你有一定的参考价值。

redis pipe管道

redis命令在从提交到返回处理结果的过程中,消耗的时间我们称之为RTT(往返时间)。

在需要批量执行redis 命令的场景下,如果命令单条逐个执行,那么总共花费的时间是命令条数 N * RTT。

redis 提供了管道技术来提高批量执行效率,即将多个命令打包发送给redis服务端,所有命令执行完后,再将所有结果打包返回。

在所有命令执行结束前,redis服务器会缓存已执行结束的结果。

在redis-cli命令行中,

使用redis管道技术时,我们通常将待执行的命令放到一个文本里,比如commands.txt,然后使用命令:

cat commands.txt | redis-cli --pipe

去读取文本里的命令,然后打包已pipe管道的方式发送给redis服务端。

如果命令需要带参数,我们可以根据redis官方提供的命令协议格式:

*<number of arguments> CR LF

$<number of bytes of argument 1> CR LF

<argument data> CR LF

...

$<number of bytes of argument N> CR LF

<argument data> CR LF

额,上面这段是不是很烦?是的,其实没有这么复杂,你可以直接将多个redis命令写到一个文件commands.txt里,记住是每个命令占一行。

然后执行:cat commands.txt |redis-cli --pipe

以管道方式执行。

你以为就万事大吉了?no!你很可能会遇到这个错误:

ERR unknown command ‘et‘

即执行了第一条命令,剩下的都报错了。原因是redis-cli中只支持dos格式的换行符 \r\n ,因此你需要对文件进行转码:unix2dos commands.txt

然后再执行上面的命令。


附:安装unix2dos:

macOS: 

brew install unix2dos -y


以上是关于redis pipe管道的主要内容,如果未能解决你的问题,请参考以下文章

StackExchange.Redis 管道 批量 高性能插入数据

Linux管道命令(pipe)

5.管道 Pipe

11NIO--管道Pipe

Linux进程间通信之管道(pipe)命名管道(FIFO)与信号(Signal)

linux管道pipe详解