• 欢迎访问搞代码网站,推荐使用最新版火狐浏览器和Chrome浏览器访问本网站!
  • 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏搞代码吧

redis源码阅读之quicklist

redis 海叔叔 22小时前 4次浏览 已收录 0个评论

说实话,当我看见这两个文件的时候,内心深处的想法是崩溃的(哦谢特麻惹法克),你说你一个redis搞那么多list干啥。。。但是当我看到它的注释的时候,心里稍微好受了一点

真香!!!貌似这东西是一个双向链表,而链表的每个元素就是之前介绍过的ziplist,这样梳理一下,貌似一个东西刚刚讲过,还热乎,另一个是常规双向链表,有搞头了,嘿嘿嘿~~~
目前来讲的话这边提供了五中数据结构quicklistNode, quicklistLZF, quicklist,quicklistIter, quicklistEntry,它们的具体定义以及说明如下:
quicklistNode

struct quicklistNode共占用32字节,定义中可以明确地看到使用了bit fields这种东西,字段当中:
字段 描述
count:16 ziplist当中的items
encoding:2 这里需要注意的是quicklist会使用一种名叫LZF的压缩算法来对ziplist压缩,如果压缩,该字段值为2;如果不压缩,该字段值为1。算法的具体实现见lzf的3个文件(lzf.h,lzf_c.c, lzf_d.c)。
container 存放数据的容器:1位NONE;2位ziplist,现阶段应该都是这个。
recompress:1 表示该节点是否为临时解压,若是,稍后会被压缩回去
attempted_compress:1 节点太小,不能被压缩
extra:10 保留当整个节点没有被LZF压缩的时候,quicklistNode当中的zl会指向一个ziplist,但是,当该节点压缩之后,quicklistNode当中的zl会指向一个quicklistLZF结构体,其中的sz保存压缩后的字节数:

quicklist是一个40字节的结构体,其结构如下,其中各个字段的值如代码中所示

其中需要多说一下的字段是fill和compress,链表会根据fill字段的值来决定每个节点当中存放的元素个数,会参照上面的optimization_level的数组

fill值 描述
整数m 每个节点上的ziplist最多包含m个数据项
n = [-5,-1] 根据(-n)-1的值来确定下标,取下标对应的optimization_level数组中的元素来当做最大的数据项,默认值为-2

而compress字段表示当前quicklist当中两端各有多少个节点不压缩,若取0,则表示整个链表不压缩;若取2,则两端各有2个节点不进行压缩。
剩下的就是quicklistIter和quicklistEntry了,代码如下:

由于这个链表当中涉及到压缩,但是如果被压缩的数据量过小的话,产生的结果可能比被压缩之前的数据还要占用空间,所以redis是定义了一些宏来避免这种情况的发生

由于quicklist结构的特殊性(大链表套小链表,期间还存在压缩解压等操作),其操作的代码也就比较繁琐(不算测试部分1400+行),但是如果将各个字段的含义搞明白之后,看起来就有人犹豫了,都是些结合其自身元素特性的一些组合,这里也就不再赘述了。


喜欢 (0)
[搞代码]
分享 (0)
发表我的评论
取消评论

表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址