工作中遇到一个问题,redis中存储了大量的key,而且没有设置时效,其中很大一部分后来都没用了,导致redis体积庞大,查询缓慢。服务器版本为windows,网上搜索到很多批量删除的方法都是Linux下的,几番寻找,终于找到了在windows下批量删除超大量key的方法。
首先贴一下Linux下的方法:
|
|
//如果redis-cli没有设置成系统变量,需要指定redis-cli的完整路径,加入redis-cli的安装路径如下:
那么在gitbash上模拟的linux命令则如下:
|
|
原理就是通过xargs工具将前半部分的查询结果借助管道传递给后面的删除命令,进而实现循环删除,达到批量删除的结果。
But,测试的时候趣发现这条命令不好使,测试结果如下图所示,具体的原因不明:
作为替代方案,我找到了windows、Linux下均试用的方法:
使用lua脚本:
|
|
但这种处理方式,量大的情况下,lua函数unpack会出现问题,会报错误
(error) ERR Error running script (call to f_e177a091510d969af3b388ee986dbe6658df6b57): user_script:1: too many results to unpack
解决方法:
一次性unpack太多会出问题,那就干脆一次5000吧,这样就不会有问题了,实测速度非常快哦。
|
|
所以最终实现我的需求的代码就是:
|
|
上述语句的执行原理其实是递归调用,通过递归最终实现了批量删除。
在redis集群中可以借助脚本实现集群上的批量删除,这个还没测试过。参考文章如下:
redis集群批量删除指定的key
本文参考文章:
redis批量删除key (windows适用)