经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 数据库/运维 » Redis » 查看文章
【进阶篇】基于 Redis 实现分布式锁的全过程
来源:cnblogs  作者:CodeBlogMan  时间:2024/5/6 16:15:29  对本文有异议

前言

这一篇文章拖了有点久,虽然在项目中使用分布式锁的频率比较高,但整理成文章发布出来还是花了一点时间。在一些移动端、用户量大的互联网项目中,经常会使用到 Redis 分布式锁作为控制访问高并发的工具。

一、关于分布式锁

总结:分布式锁是一种在分布式系统中用于控制并发访问的机制。

在分布式系统中,多个客户端同时对一个资源进行操作时,容易影响数据的一致性。分布式锁的主要作用就是确保同一时刻只有一个客户端能够对某个资源进行操作,以避免数据不一致的问题。

主要应用场景:

  • 数据库并发控制:在分布式数据库中,多个线程同时对某张表进行操作时,可能会出现并发冲突问题,使用分布式锁可以确保同一时刻只有一个线程能够对该表进行操作,避免并发冲突。
  • 分布式缓存:在分布式缓存中,如果多个线程同时对某个缓存进行操作,可能会出现缓存数据不一致的问题。使用分布式锁可以确保同一时刻只有一个线程能够对该缓存进行操作,保证缓存数据的一致性。
  • 分布式任务调度:在分布式任务调度中,多个线程同时执行某个任务,可能出现任务被重复执行的问题,使用分布式锁可以确保同一时刻只有一个线程能够执行该任务,避免任务被重复执行。

目前主流的分布式锁实现方案是基于 Redis 来实现的,今天要分享的有 2 种实现: 基于 RedLock 红锁和基于 setIfAbsent() 方法


二、RedLock 红锁(不推荐)

RedLock 对于多节点(集群)的分布式锁算法使用了多个实例来存储锁信息,这种方式可以提高获取锁的速度和成功率,从而可以有效地防止单点故障;

但由于 RedLock 的实现比较复杂,且容易因为配置不正确而导致锁无法获取。此外,如果 Redis 服务宕机,也会导致锁无法正常使用。

RedLock 简单图示

RedLock 会对集群的每个节点进行加锁,如果大多数(N/2+1)加锁成功了,则认为获取锁成功。这个过程中可能会因为网络问题,或节点超时的问题,影响加锁的性能,故而在最新的 Redisson 版本中中已经正式宣布废弃 RedLock。

以下是一个简易的 demo 实现:

包括两部分:暴露给业务系统逻辑层使用的静态方法、锁的底层实现。思路用代码和注释说得比较清楚了,大家可以看一下:

  1. /**
  2. * 尝试获取锁,业务系统用
  3. * @param key key
  4. * @param requestId 唯一请求标识,用于解锁
  5. * @param expireTime 过期时间
  6. * @param timeUnit 过期时间单位
  7. * @return
  8. */
  9. public static boolean getLock(String key, String requestId, long expireTime, TimeUnit timeUnit) {
  10. RedisSetArgs redisSetArgs = RedisSetArgs.instance().nx().px((int) timeUnit.toMillis(expireTime));
  11. //CacheFactory 为缓存的抽象类,set() 为具体实现
  12. String result = CacheFactory.getCache().set(key, requestId, redisSetArgs);
  13. if (LOCK_SUCCESS.equals(result)) {
  14. return true;
  15. }
  16. return false;
  17. }
  18. /**
  19. * 具体的底层实现
  20. * @param key key
  21. * @param value value
  22. * @param redisSetArgs set 参数对象
  23. * @return 返回值
  24. */
  25. @Override
  26. public String set(String key, String value, RedisSetArgs redisSetArgs) {
  27. //这里引入的是 Jedis 的客户端,后来被抛弃了,Redis 推荐的是 Redission
  28. try (Jedis jedis = getJedis()) {
  29. SetParams setParams = new SetParams();
  30. if (redisSetArgs.isNx()) {
  31. setParams.nx();
  32. } else if (redisSetArgs.isXx()) {
  33. setParams.xx();
  34. }
  35. if (Objects.nonNull(redisSetArgs.getEx())) {
  36. setParams.ex(redisSetArgs.getEx());
  37. } else if (Objects.nonNull(redisSetArgs.getPx())) {
  38. setParams.px(redisSetArgs.getPx());
  39. }
  40. return jedis.set(SafeEncoder.encode(buildKey(key)), SafeEncoder.encode(value), setParams);
  41. }
  42. }
  43. /**
  44. * 解锁,业务系统用
  45. * @param key key
  46. * @param requestId 唯一请求标识
  47. * @return
  48. */
  49. public static boolean unlock(String key, String requestId) {
  50. //使用 Lua 脚本保证原子性:RELEASE_LOCK_LUA_SCRIPT = "if redis.call('get',KEYS[1]) == ARGV[1] then return redis.call('del',KEYS[1]) else return 0 end";
  51. Object result = CacheFactory.getCache().loose(RELEASE_LOCK_LUA_SCRIPT, Collections.singletonList(key), Collections.singletonList(requestId));
  52. if (NumberUtils.LONG_ONE.equals(result)) {
  53. return true;
  54. }
  55. return false;
  56. }
  57. /**
  58. * 执行解锁脚本(底层实现)
  59. * @param script 脚本
  60. * @param keys keys
  61. * @param args 参数
  62. * @return 返回对象
  63. */
  64. @Override
  65. public Object loose(String script, List<String> keys, List<String> args) {
  66. try (Jedis jedis = getJedis()) {
  67. return jedis.eval(SafeEncoder.encode(script), keys.stream().map(this::buildKey).map(SafeEncoder::encode).collect(Collectors.toList()),
  68. args.stream().map(SafeEncoder::encode).collect(Collectors.toList()));
  69. }
  70. }

三、基于 setIfAbsent() 方法

以下推荐的是在分布式集群环境中的最佳实践,其实无论是单机还是集群,保证原子性都是第一位的,如果能同时保证性能和高可用,那么就是一个可靠的分布式锁解决方案。

主要思路是:设置锁时,使用 setIfAbsent() 方法,因为其底层实际包含了 setnx 、expire 的功能,起到了原子操作的效果。给 key 设置随机且唯一的值,并且只有在 key 不存在时才设置成功返回 True,并且设置 key 的过期时间(最好是毫秒级别)。

RedLock 简单图示
基于 setIfAbsent() 方法简单图示

以下同样给出一个简单的示例,包括两部分:暴露给业务系统逻辑层使用的静态方法、锁的底层实现。注释写得比较清楚了:

  1. /**
  2. * 获取锁,业务系统用
  3. * @return 解锁唯一标识
  4. */
  5. public String getLock() {
  6. try {
  7. // 获取锁的超时时间,超过这个时间则取锁失败
  8. long end = System.currentTimeMillis() + acquireTimeout;
  9. // 随机生成一个 value 作为解锁的唯一标识
  10. this.unLockIdentify = UUID.randomUUID().toString();
  11. while (System.currentTimeMillis() < end) {
  12. Boolean result = iCache.setIfAbsent(lockKey, this.unLockIdentify, Duration.ofMillis(expireTime));
  13. if (result) {
  14. return this.unLockIdentify;
  15. }
  16. try {
  17. //再休眠 100 微秒
  18. TimeUnit.MICROSECONDS.sleep(100);
  19. } catch (InterruptedException e) {
  20. Thread.currentThread().interrupt();
  21. }
  22. }
  23. } catch (Exception e) {
  24. logger.error("error info", e);
  25. }
  26. return null;
  27. }
  28. /**
  29. * 具体的 setIfAbsent() 底层实现
  30. * @param key 键
  31. * @param value 值
  32. * @param timeout 超时时间
  33. * @return 是否设置成功
  34. */
  35. public Boolean setIfAbsent(String key, String value, Duration timeout) {
  36. return this.redisTemplate.opsForValue().setIfAbsent(key, value, timeout);
  37. }
  38. /**
  39. * 释放锁,业务系统用
  40. * @param unLockIdentify 解锁唯一标识
  41. * @return 是否解锁成功
  42. */
  43. public Boolean loose(String unLockIdentify) {
  44. if (unLockIdentify == null) {
  45. return Boiolfalse;
  46. }
  47. try {
  48. if (iCache.deleteIfEquals(lockKey, unLockIdentify)) {
  49. return Boolean.TRUE;
  50. }
  51. } catch (Exception e) {
  52. logger.error("error info", e);
  53. }
  54. return Boolean.FALSE;
  55. }
  56. /**
  57. * 具体判断方法实现(底层实现)
  58. * @param key 键
  59. * @param expectedValue 期望的值
  60. * @return 是否相等
  61. */
  62. public Boolean deleteIfEquals(String key, String expectedValue) {
  63. //Lua 脚本保证原子性
  64. String script = "if redis.call('get', KEYS[1]) == ARGV[1] then return redis.call('del', KEYS[1]) else return 0 end";
  65. RedisScript<Long> redisScript = new DefaultRedisScript<>(script, Long.class);
  66. Long result = redisTemplate.execute(redisScript, Collections.singletonList(key), expectedValue);
  67. return result != null && result == 1;
  68. }

四、使用示例

下面分别给出两个使用示例分别来介绍怎么在具体的业务场景中去使用的 demo,一般来说针对数据库的并发操作和多线程的并发任务操作,会使用得比较多。

至于为什么不使用分布式锁去保证缓存数据的一致性,其实是有专门的分布式缓存方案的:https://www.cnblogs.com/CodeBlogMan/p/18022719

4.1RedLock 使用

  1. @Test
  2. public void testRedLock(){
  3. final String requestId = UUIDUtils.generateUUID();
  4. if (RedisRedLock.attemptLock("xxxSys.insert.xxxId(唯一)", requestId, 3L, TimeUnit.SECONDS)) {
  5. try {
  6. //todo: 数据库并发插入操作
  7. log.info("并发插入成功!");
  8. } catch (Throwable e) {
  9. //底层没有加 try catch,所以这里加一下
  10. log.error("并发插入失败! error", e);
  11. } finally {
  12. RedisRedLock.unlock("xxxSys.insert.xxxId(唯一)", requestId);
  13. }
  14. }
  15. }

4.2setIfAbsent() 方法使用

  1. @Test
  2. public void testDistributedLock(){
  3. //这里是抽像类和接口,具体使用可以更加灵活
  4. DistributedLock distributedLock = CacheFactory.getDistributedLock("xxxSys.insert.xxxId(唯一)" ,3,1);
  5. Assert.hasText(distributedLock.getLock(), "操作频繁,请稍后重试");
  6. //todo: 多线程的并发任务操作
  7. if (distributedLock.loose("xxxSys.insert.xxxId(唯一)")){
  8. //这里是为了演示才加的日志,其实底层已经加过了
  9. log.info("释放锁成功!");
  10. }
  11. }

五、文章小结

到这里基于 Redis 实现分布式锁的全过程就分享完了,其实基于 Redis 实现分布式锁还有许多底层和实际应用的情况没有展开来说。目前笔者虽然在日常项目里有较多使用,但还是感到技术的海洋深不见底:学到的越多就感觉到自己的不足越多。

最后,如果文章有不足和错误,还请大家指正。或者你有其它想说的,也欢迎大家在评论区里交流!

原文链接:https://www.cnblogs.com/CodeBlogMan/p/18097343

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号