之前相关联文章:
redis学习之一SDS
redis学习之二链表
一 字典相干的数据结构
哈希表定义:
typedef struct dictht{ //哈希表数组 dictEntry **table; //哈希表大小 unsigned long size; //哈希表大小掩码,用于计算索引值,总是等于size -1 unsigned long sizemask; //该哈希表已有节点的数量 unsigned long used;}dictht;
哈希表节点定义:
typedef struct dictEntry{ //键 void *key; //值 union{ void *val; uint64_t u64; int64_t s64; }v; //指向下个哈希表节点,造成链表 struct dictEntry *next;}dictEntry;
字典定义:
typedef struct dict{ //类型函数 dictType *type; //公有数据 void *private; //哈希表 dictht ht[2]; //rehash索引,当rehash不再进行时值为-1, //每次进行rehash时,rehashidx的值就是对应ht[0]里dictht中dictEntry数组的索引 int rehashidx;}dict;
上面是没有进行rehash的字典意识图:
redis应用MurmurHash2算法来计算键的哈希值,应用链地址法解决键抵触。
rehash与渐进式rehash
二 扩容与缩容过程
当哈希表保留的键值对数量太多或太少的时候,哈希表会进行扩大或膨胀。rehash的步骤如下:
- 为字典ht[1]调配空间。
扩容:ht[1]的大小为第一个大于等于ht[0].used*2的2的n次幂;
缩容:ht[1]的大小为第一个大于等于ht[0].used的2的n次幂。 - 将保留在ht[0]中的所有键值对rehash到ht[1]下面,在这个过程中会从新计算键的哈希值与索引值。
- 当ht[0]所有键值都迁徙到了ht[1]之后,开释ht[0],将ht[1]设置为ht[0],并在ht[1]新创建一个空白哈希表,为下次rehash做筹备。
三 扩容与缩容的机会
- 服务器没有执行BGSAVE或BGREWRITEAOF命令,且哈希表的负载因子大于等于1。
- 服务器正在执行BGSAVE或BGREWRITEAOF命令,且哈希表的负载因子大于等于5。
- 哈希表的负载因子小于0.1。
四 渐进式rehash
思考到redis服务性能,rehash并不是一次性集中进行而是分屡次渐进式进行的,步骤如下:
- 为ht[1]调配空间,让字典同时持有ht[0] ht[1]两个哈希表。
- 将下面定义的dict构造里的rehashidx值设置为0,示意rehash开始进行。
- 每次对字典进行增加、删除、查找或更新时,除了进行这些操作外,还会将ht[0]在rehashidx索引上的所有键值对rehash到ht[1],rehash的过程上中rehashidx值为增1。
- ht[0]里所有键值对rehash到ht[1]后,将rehashidx值置为-1,rehash完结。
上面是两rehash的过程图:
这个还没进行rehash,所以这里的rehashidx值为-1,留神ht[0]里dictEntry里的值。
这里rehashidx值为3,这是在对ht[0]里dictEntry里第3个键值对(k1,v1)进行rehash。
此文大部分内容都来自于黄健宏《Redis设计与实现》一书