设为首页 收藏本站
查看: 1181|回复: 0

[经验分享] ServiceStack.Redis的PooledRedisClientManager蛋痛的设计

[复制链接]

尚未签到

发表于 2015-7-20 07:26:29 | 显示全部楼层 |阅读模式
  PooledRedisClientManager是ServiceStack.Redis的连接池管理类,通过连接池可以实现更高效的Redis操作.但PooledRedisClientManager相关GetClient的设计似乎存在一些问题,如果你只Pool只指向一台Redis这倒不会有什么问题,但如果指向多台Redis那就可能产生悲剧的事情.下面解释一下指向多台Redis存在的一些问题.

具体代码



1 ///
2         /// Called within a lock
3         ///
4         ///
5         private RedisClient GetInActiveWriteClient()
6         {
7             var desiredIndex = WritePoolIndex % writeClients.Length;
8             //this will loop through all hosts in readClients once even though there are 2 for loops
9             //both loops are used to try to get the prefered host according to the round robin algorithm
10             for (int x = 0; x < ReadWriteHosts.Count; x++)
11             {
12                 var nextHostIndex = (desiredIndex + x) % ReadWriteHosts.Count;
13                 var nextHost = ReadWriteHosts[nextHostIndex];
14                 for (var i = nextHostIndex; i < writeClients.Length; i += ReadWriteHosts.Count)
15                 {                    
16                     if (writeClients != null && !writeClients.Active && !writeClients.HadExceptions)
17                         return writeClients;
18                     else if (writeClients == null || writeClients.HadExceptions)
19                     {
20                         if (writeClients != null)
21                             writeClients.DisposeConnection();
22                         var client = RedisClientFactory.CreateRedisClient(nextHost.Host, nextHost.Port);
23
24                         if (nextHost.RequiresAuth)
25                             client.Password = nextHost.Password;
26
27                         client.Id = RedisClientCounter++;
28                         client.ClientManager = this;
29                         client.NamespacePrefix = NamespacePrefix;
30                         client.ConnectionFilter = ConnectionFilter;
31                        
32                         writeClients = client;
33
34                         return client;
35                     }
36                 }
37             }
38             return null;
39         }
工作原理
  以上代码的原理非常简单,就是轮循不同host下的可用连接,如果相关连接可用测直接返回.如果连接损耗则释放重新创建.

存在问题
  如果只使用一个host倒没什么问题,但使用多个host的时候那你会发现如果其中一台的redis服务异常那对应的host还是会被轮循到,那就会导致轮循到应该服务的操作所有都异常,还有更悲剧的情况就是当一台服务器挡机了,就会导致连接到对应host的连接创建超时导致程序长时间等待然后报错,这情况对于并发应来说算是一个非常悲剧的事情.

解决方法
  其实可以针对host来划分节点,每个节点存自有的连接池.当相关host的连接操作出现网络异常的时候,应该把host从当前轮循机制中排除.这样可以快速地保证操作会马上迁移到正常的host上面去.
  建立一个host恢复机制,PooledRedisClientManager应该存在一个内部机制对损坏的host 进行检测,通过connect到redis执行ping指令来确认host是否正常,如果正常马上把host恢复到轮循范围内.

思考
  作者在连接的存储上并没有使用Stack,其实使用Stack在设计和管理上更简单,也是许是为不想在连接push到池中存在线程同步处理环节的开销.

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-88361-1-1.html 上篇帖子: redis搭建实战记录 下篇帖子: spring redis入门
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表