设为首页 收藏本站
查看: 2440|回复: 0

[经验分享] Spring Data操作Redis时,发现key值出现 \xac\xed\x00\x05t\x00\tb

[复制链接]

尚未签到

发表于 2015-11-12 12:49:51 | 显示全部楼层 |阅读模式

最近在研究redis,以及spring data对redis的支持发现了一个奇怪的现象


先说现象吧,通过redisTemplate下的opsForHash方法存储hash类型的值,操作成功以后,去redis控制台显示keys * 的时候,发现一个奇怪的现象,插入的hash类型的key前面会有一堆的\xac\xed\x00\x05t\x00\tb 这种东西,见图1




DSC0000.jpg



(图1)




看见了吗?就是第二行那一串自己冒出来的东西,分析spring-data的org.springframework.data.redis.core.RedisTemplate源代码以后发现:




[java] view
plaincopy



  • private RedisSerializer<?> defaultSerializer = new JdkSerializationRedisSerializer();  

  •   

  • private RedisSerializer keySerializer = null;  

  • private RedisSerializer valueSerializer = null;  

  • private RedisSerializer hashKeySerializer = null;  

  • private RedisSerializer hashValueSerializer = null;  

  • private RedisSerializer<String> stringSerializer = new StringRedisSerializer();  


发现了一个:




[java] view
plaincopy



  • private RedisSerializer<?> defaultSerializer = new JdkSerializationRedisSerializer();  




因为spring操作redis是在jedis客户端基础上进行的,而jedis客户端与redis交互的时候协议中定义是用byte类型交互,jedis中提供了string类型转为byte[]类型,但是看到spring-data-redis中RedisTemplate<K, V>在操作的时候k,v是泛型的,所以RedisTemplate中有了上面那段代码,在没有特殊定义的情况下,spring默认采用defaultSerializer = new JdkSerializationRedisSerializer();来对key,value进行序列化操作,在经过查看JdkSerializationRedisSerializer中对序列化的一系列操作,发现如下代码:



[java] view
plaincopy



  • private Converter<Object, byte[]> serializer = new SerializingConverter();  

  • public byte[] serialize(Object object) {  

  •     if (object == null) {  

  •         return SerializationUtils.EMPTY_ARRAY;  

  •     }  

  •     try {  

  •         return serializer.convert(object);  

  •     } catch (Exception ex) {  

  •         throw new SerializationException(&quot;Cannot serialize&quot;, ex);  

  •     }  

  • }  




序列化支持的是Object对象,调用了SerializingConverter类下的convert方法转换对象,转换对象的方法是:




[java] view
plaincopy



  • private final Serializer<Object> serializer;  

  • /**

  • * Serializes the source object and returns the byte array result.

  • */  

  • public byte[] convert(Object source) {  

  •     ByteArrayOutputStream byteStream = new ByteArrayOutputStream(128);  

  •     try  {  

  •         this.serializer.serialize(source, byteStream);  

  •         return byteStream.toByteArray();  

  •     }  

  •     catch (Throwable ex) {  

  •         throw new SerializationFailedException(&quot;Failed to serialize object using &quot; &#43;  

  •                 this.serializer.getClass().getSimpleName(), ex);  

  •     }  

  • }  




原因其实就出现在这里,解决的办法就是手动定义序列化的方法,spring-data-redis中还提供了一个序列化的类专门针对string类型的序列化org.springframework.data.redis.serializer.StringRedisSerializer这个类,可以在xml里面指定:




[html] view
plaincopy



  • <bean id=&quot;redisTemplate&quot; class=&quot;org.springframework.data.redis.core.RedisTemplate&quot;  

  •     p:connection-factory-ref=&quot;jedisConnectionFactory&quot;>  

  •     <property name=&quot;keySerializer&quot;>  

  •         <bean class=&quot;org.springframework.data.redis.serializer.StringRedisSerializer&quot; />  

  •     </property>  

  •     <property name=&quot;valueSerializer&quot;>  

  •         <bean class=&quot;org.springframework.data.redis.serializer.StringRedisSerializer&quot; />  

  •     </property>  

  •     <property name=&quot;hashKeySerializer&quot;>  

  •         <bean class=&quot;org.springframework.data.redis.serializer.StringRedisSerializer&quot; />  

  •     </property>  

  •     <property name=&quot;hashValueSerializer&quot;>  

  •         <bean class=&quot;org.springframework.data.redis.serializer.StringRedisSerializer&quot; />  

  •     </property>  

  • </bean>  




其中我将redis中基础类型的key,value和hash类型的key,value都指定为StringRedisSerializer类来进行序列化,然后发现又报错了,找了一会发现我的代码中:




[java] view
plaincopy



  • public void setBank(final Bank bank) {  

  •     // TODO setBank  

  •     final String key = String.format(&quot;bank:%s&quot;, bank.getId());  

  •     final Map<String, Object> properties = new HashMap<String, Object>();  

  •       

  •     properties.put(&quot;id&quot;, bank.getId());  

  •     properties.put(&quot;name&quot;, bank.getBank_name());  

  •       

  •     redisTemplate.opsForHash().putAll(key, properties);  

  • }  




bank.getId是Integer类型的,因为Hashmap中的key和value也会进行序列化操作,而StringRedisSerializer中的serialize方法只接收String类型的&#20540;,如下:




[java] view
plaincopy



  • public byte[] serialize(String string) {  

  •     return (string == null ? null : string.getBytes(charset));  

  • }  




所以这里的类型转换报错了,二话不说直接bank.getId().toString(),执行成功,然后进入redis控制台打开查看发现那堆恶心巴拉的\xac\xed\x00\x05t\x00\tb没有了,大功告成了


         


DSC0001.jpg



(红色部分)





其实redis在使用中,必须要提前考虑的就是内存的占用问题(博客中另外一篇文章很经典,阐述了一个外国人做的测试,同样的存储可以节约几十G的内存【Redis 内存优化】节约内存:Instagram的Redis实践),在设计的时候使用hash可以节约很多的内存,而存储的时候如果每条数据就放一堆\xac\xed\x00\x05t\x00\tb这个东西,肯定是无法直视的



------------------------------------------------------------------------------------------------



以上是个人的拙见,如有哪里分析的不对的地方,欢迎拍砖






原文地址:http://blog.iyunv.com/yunhaibin/article/details/9001198

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-138332-1-1.html 上篇帖子: Redis在windows的安装使用 下篇帖子: Redis 3.0.0 正式版出炉,高性能 K/V 服务
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表