redis通过pipe 批量插入数据

本文介绍了如何在Linux环境下,通过Redis的pipe功能批量插入20w+条数据。由于线上环境的redis-cli命令未配置,作者首先将其复制到bin目录,并解决了授权问题。使用`redis-cli -a password --pipe`命令结合数据文件实现批量同步,整个过程在2秒内完成。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

【背景】
线上的redis缓存中大量数据和数据库对应不上,需要统一同步一次,数据量在20w+左右
了解到redis有一个上传牛逼的方式pipe管道方式
官方说明:(https://redis.io/topics/mass-insert)
在这里插入图片描述
在这里插入图片描述
下面是实际操作:

首先发现线上环境
redis-cli命令不支持,最后发现是当前命令没有配置到环境中
把redis的redis-cli 相关内容复制到bin目录下
sudo cp src/redis-cli /usr/local/bin/
可以使用redis-cli命令了
但是执行命令的时候,需要授权
在这里插入图片描述
所以需要加上密码
在这里插入图片描述
这样就连接上了
但是我们需要使用的命令,通过官网知道是
cat data.txt | redis-cli --pipe
所以这个命令也是需要带密码认证的
可以使用:
用法࿱

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值