关于redis:记一次向redis中插入上千万key

背景

从海量key里查问出某一固定前缀的key

要解决这个问题首先须要有海量的key

向redis插入上千万数据

Linux下执行Bash

批量生成redis测试数据
1.Linux Bash上面执行
  for((i=1;i<=20000000;i++)); do echo "set k$i v$i" >> /tmp/redisTest.txt ;done;
  生成2千万条redis批量设置kv的语句(key=kn,value=vn)写入到/tmp目录下的redisTest.txt文件中
2.用vim去掉行尾的^M符号,应用形式如下::
  vim /tmp/redisTest.txt
    :set fileformat=dos #设置文件的格局,通过这句话去掉每行结尾的^M符号
    ::wq #保留退出
3.通过redis提供的管道--pipe模式,去跑redis,传入文件的指令批量灌数据,须要花10分钟左右
  cat /tmp/redisTest.txt | 门路/redis-5.0.0/src/redis-cli -h 主机ip -p 端口号 --pipe

第三步这我的是
cat /tmp/redisTest.txt | /usr/local/redis/bin/redis-cli –pipe

评论

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

这个站点使用 Akismet 来减少垃圾评论。了解你的评论数据如何被处理