设为首页 收藏本站
查看: 949|回复: 0

[经验分享] redis源码阅读笔记(3)——dict

[复制链接]

尚未签到

发表于 2016-12-20 09:32:04 | 显示全部楼层 |阅读模式
1.高层视角解读
字典, 又称符号表(symbol table)、关联数组(associative array)或者映射(map), 是一种用于保存键值对(key-value pair)的抽象数据结构。
请先看关于字典的一组文章
http://www.redisbook.com/en/latest/toc.html里面的第4章——字典。
字典的数据结构如图所示。


2.底层代码
代码在dict.h, dict.c这两个文件里。稍微多了一点,1600行代码。
如果读者读过java里的HashMap的源代码的话,可以发现两者的实现思路竟是惊人的相似。

2.1 hashFunction是一个可以由用户自己实现的函数,相当于java里的Object.hashCode方法。

2.2 redis自带一个哈希算法MurmurHash算法。目前的最新版本为 MurmurHash3 , 而 Redis 使用的是 MurmurHash2 。
关于MurmurHash算法的更多信息可以参考该算法的主页: http://code.google.com/p/smhasher/
在java里有一个库guava也实现了MurmurHash算法
https://code.google.com/p/guava-libraries/wiki/HashingExplained

2.3 哈希冲突的处理和java一样,采用一个链表来解决冲突,将多个哈希值相同的节点串连在一起。
因为 dictEntry 节点组成的链表没有指向链表表尾的指针, 所以为了速度考虑, 程序总是将新节点添加到链表的表头位置(复杂度为 O(1)), 排在其他已有节点的前面。
java里也是这样。

2.4 rehash和java也是惊人的相似。
负载因子(load factor)>=1时才rehash,这个似乎不太好,java里是>=0.75,因为负载因子达到某个值以后哈希冲突的概率就相当大了。

2.5 渐进式rehash是redis特有的特性,可以防止一次性rehash造成服务器停止工作。但是这个特性也使得代码到处都要考虑当前是否正在进行渐进式rehash,增加了复杂度。

2.6 字典的收缩也是redis特有的特性。
何时收缩?
t_hash.c文件中hashTypeDelete被执行时(HDEL命令)
先执行dictDelete
再执行htNeedsResize判断,如果负载因子小于10%,则调用dictResize缩小哈希表。

2.7 字典里有2个哈希表,使得rehash的时候如果遍历哈希表需要同时遍历2个哈希表。

3. 疑难点解惑
Q:dictEntry **table中**的含义?
A:**在C语言里含义是指向指针的指针,在这里的技巧含义是等价于定义了一个动态数组table中,这个数组里每个元素都是一个指针,每个指针指向一个dictEntry结构体。
table[1]的写法等价于*(table+1),也就是访问数组中的第二个元素。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-316801-1-1.html 上篇帖子: Hyperdex宣称全面超越Redis和mongoDB 下篇帖子: Redis 主从复制各种环境下测试
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表