Redis 分布式锁遇到的序列化问题

作者: jaxer 2021-03-24 08:41:38开发前端分布式Redis 最近使用 Redis 遇到了一个类似分布式锁的场景,跟 Redis 实现分布式锁类比一下,就是释放锁失败,也就是缓存删不掉。又踩了一个 Redis 的坑……本文主要对此做个复盘。

[[389269]]

场景描述

最近使用 Redis 遇到了一个类似分布式锁的场景,跟 Redis 实现分布式锁类比一下,就是释放锁失败,也就是缓存删不掉。又踩了一个 Redis 的坑……

这是什么个情况、又是怎样排查的呢?

本文主要对此做个复盘。

问题排查

既然是释放锁有问题,那就先看看释放锁的代码吧。

释放锁

释放锁使用了 Lua 脚本,代码逻辑和 Lua 脚本如下:

释放锁示例代码

    publicObjectrelease(Stringkey,Stringvalue){ObjectexistedValue=stringRedisTemplate.opsForValue().get(key);log.info("key:{},value:{},redis旧值:{}",key,value,existedValue);DefaultRedisScript<Long>redisScript=newDefaultRedisScript<>(COMPARE_AND_DELETE,Long.class);returnstringRedisTemplate.execute(redisScript,Collections.singletonList(key),value);}

释放锁使用的 Lua 脚本

    ifredis.call('get',KEYS[1])==ARGV[1]thenreturnredis.call('del',KEYS[1])elsereturn0end;

删除脚本中,会先获取 Redis key 的旧值,并与入参 value 比较,二者相等时才会删除。

如果释放成功,也就是 Redis 缓存删除成功,返回值为 1,否则失败返回为 0。

乍一看代码似乎没啥问题,测一下试试?

不过既然要释放锁,在此之前肯定要加锁,先看看加锁的逻辑吧。

加锁

说到加锁这里的逻辑,代码里有两种实现方式:

示例代码一

    publicObjectlock01(Stringkey,Stringvalue){log.info("lock01,key={},value={}",key,value);returnredisTemplate.opsForValue().setIfAbsent(key,value,LOCKED_TIME,TimeUnit.SECONDS);}

示例代码二

    publicObjectlock02(Stringkey,Stringvalue){log.info("lock02,key={},value={}",key,value);returnstringRedisTemplate.opsForValue().setIfAbsent(key,value,LOCKED_TIME,TimeUnit.SECONDS);}

其实它们的区别就在于前者使用了 RedisTemplate,而后者使用的是 StringRedisTemplate。

Q: 等等……为什么会有两个 template??A: 憋说了,是我挖的坑,RedisTemplate 是我加的……现在回想都没想明白当初为什么这样搞,可能真是脑子一时抽风了。

先测试一下这两个方法?

测试一下

使用两种方式分别加锁,其中:lock01 为 k1 和 v1,lock02 为 k2 和 v2。

分别看下 k1、k2 的值(使用工具:RDM, Redis Desktop Manager):

可以看到 v1 是有双引号的,而 v2 没有。

猜测应该是序列化的问题,看看 Redis 配置?

RedisTemplate 配置

加锁那里可以看到,k1 使用了 RedisTemplate,而 k2 是 StringRedisTemplate,它们两个的配置有什么区别呢?

其中 RedisTemplate 的配置是自定义的,如下:

    @Configuration@AutoConfigureAfter(RedisAutoConfiguration.class)publicclassRedisConfig{@BeanpublicRedisTemplate<String,Object>redisTemplate(RedisConnectionFactoryredisConnectionFactory){RedisTemplate<String,Object>redisTemplate=newRedisTemplate<>();redisTemplate.setConnectionFactory(redisConnectionFactory);//使用Jackson2JsonRedisSerialize替换默认序列化Jackson2JsonRedisSerializer<Object>jackson2JsonRedisSerializer=newJackson2JsonRedisSerializer<>(Object.class);ObjectMapperobjectMapper=newObjectMapper();objectMapper.setVisibility(PropertyAccessor.ALL,JsonAutoDetect.Visibility.ANY);objectMapper.enableDefaultTyping(ObjectMapper.DefaultTyping.NON_FINAL);objectMapper.configure(DeserializationFeature.FAIL_ON_UNKNOWN_PROPERTIES,false);jackson2JsonRedisSerializer.setObjectMapper(objectMapper);//设置key、value的序列化规则(尤其是value)redisTemplate.setKeySerializer(newStringRedisSerializer());redisTemplate.setValueSerializer(jackson2JsonRedisSerializer);redisTemplate.afterPropertiesSet();returnredisTemplate;}}

StringRedisTemplate 的配置是 SpringBoot 默认的,即:

    @Configuration@ConditionalOnClass({RedisOperations.class})@EnableConfigurationProperties({RedisProperties.class})@Import({LettuceConnectionConfiguration.class,JedisConnectionConfiguration.class})publicclassRedisAutoConfiguration{publicRedisAutoConfiguration(){}@Bean@ConditionalOnMissingBeanpublicStringRedisTemplatestringRedisTemplate(RedisConnectionFactoryredisConnectionFactory)throwsUnknownHostException{StringRedisTemplatetemplate=newStringRedisTemplate();template.setConnectionFactory(redisConnectionFactory);returntemplate;}}

PS: SpringBoot 版本为 2.1.13.RELEASE

点进去 StringRedisTemplate 看下:

    publicclassStringRedisTemplateextendsRedisTemplate<String,String>{publicStringRedisTemplate(){//注意这里的序列化设置setKeySerializer(RedisSerializer.string());setValueSerializer(RedisSerializer.string());setHashKeySerializer(RedisSerializer.string());setHashValueSerializer(RedisSerializer.string());}//...}

注意下序列化设置,继续跟进,看到底是什么方式:

    publicinterfaceRedisSerializer<T>{staticRedisSerializer<String>string(){returnStringRedisSerializer.UTF_8;}}

    publicclassStringRedisSerializerimplementsRedisSerializer<String>{publicstaticfinalStringRedisSerializerUTF_8=newStringRedisSerializer(StandardCharsets.UTF_8);//...}

可以看到,StringRedisTemplate 的 key 和 value 默认都是用 StringRedisSerializer(StandardCharsets.UTF_8) 进行序列化的。

而 RedisTemplate 的 key 使用 StringRedisSerializer,value 使用的是 Jackson2JsonRedisSerializer 序列化(至于为什么用这个,这里就不是我写的了)。

到这里,基本可以定位到问题所在了:就是 RedisTemplate 的 value 序列化和 StringRedisTemplate 不一致。

如果改成一致就可以了吗?验证一下试试。

验证推论

把 RedisTemplate 的 value 序列化方式修改为 StringRedisSerializer:

    @Configuration@AutoConfigureAfter(RedisAutoConfiguration.class)publicclassRedisConfig{@BeanpublicRedisTemplate<String,Object>redisTemplate(RedisConnectionFactoryredisConnectionFactory){RedisTemplate<String,Object>redisTemplate=newRedisTemplate<>();//...redisTemplate.setKeySerializer(newStringRedisSerializer());redisTemplate.setValueSerializer(newStringRedisSerializer());//...returnredisTemplate;}}

再调用两种加锁逻辑,看下 k1、k2 的值:

可以看到,v1 的双引号没了,释放锁的服务也能正常删掉了。

嗯,就是这里的问题。

至于两者序列化的源码,有兴趣的盆友们可以继续研究,这里就不再深入探讨了。

小结

本文遇到的这个问题,主要是因为使用了不同的 RedisTemplate 来加锁和释放锁,而这两个 template 使用了不同的序列化方式,最终还是序列化带来的问题。

当初真是草率了,而且一时还没测出来……

对于生产环境,还是要慎之又慎:如临深渊,如履薄冰。