大纲
1.Redisson联锁MultiLock概述
2.Redisson联锁MultiLock的加锁与释放锁
3.Redisson红锁RedLock的算法原理
4.Redisson红锁RedLock的源码分析
1.Redisson联锁MultiLock概述
(1)MultiLock的简介
(2)MultiLock的使用
(3)MultiLock的初始化
(1)MultiLock的简介
一.一次性要锁定多个资源的场景
比如锁定一个库存 + 锁定一个订单 + 锁定一个积分,一次性锁定多个资源,这些被锁定的多个资源都不能让其他线程随意修改。然后当前线程一次性更新这些资源后,再逐一释放多个锁。
二.Redisson分布式锁是支持MultiLock机制的
可以将多个锁合并为一个大锁,对大锁进行统一的加锁申请以及锁释放。即一次性锁定多个资源,再去处理一些事情,然后处理完后再一次性释放所有资源对应的锁。
三.Redisson的RedissonMultiLock
Redisson的RedissonMultiLock,可以将多个RLock关联为一个联锁,每个RLock对象实例可以来自于不同的Redisson实例。
(2)MultiLock的使用- //联锁
- RedissonClient redissonInstance1 = Redisson.create(config);
- RedissonClient redissonInstance2 = Redisson.create(config);
- RedissonClient redissonInstance3 = Redisson.create(config);
- RLock lock1 = redissonInstance1.getLock("lock1");
- RLock lock2 = redissonInstance2.getLock("lock2");
- RLock lock3 = redissonInstance3.getLock("lock3");
- RedissonMultiLock lock = new RedissonMultiLock(lock1, lock2, lock3);
- //同时加锁:lock1 lock2 lock3,所有的锁都上锁成功才算成功
- lock.lock();
- //同时释放锁
- lock.unlock();
- ------------------------------------------------------------------
- //给lock1、lock2、lock3加锁;如果没有主动释放锁的话,10秒后将会自动释放锁
- lock.lock(10, TimeUnit.SECONDS);
- //加锁等待最多是100秒;加锁成功后如果没有主动释放锁的话,锁会在10秒后自动释放
- boolean res = lock.tryLock(100, 10, TimeUnit.SECONDS);
- lock.unlock();
复制代码 (3)MultiLock的初始化- public class RedissonMultiLock implements RLock {
- final List<RLock> locks = new ArrayList<>();
- ...
- public RedissonMultiLock(RLock... locks) {
- if (locks.length == 0) {
- throw new IllegalArgumentException("Lock objects are not defined");
- }
- this.locks.addAll(Arrays.asList(locks));
- }
- ...
- }
复制代码
2.Redisson联锁MultiLock的加锁与释放锁
(1)联锁的获取(超时时间限制 + 加锁失败数限制)
(2)联锁的释放(依次释放锁 + 同步等待锁释放完毕)
(1)联锁的获取(超时时间限制 + 加锁失败数限制)
一.RedissonMultiLock的lockInterruptibly()方法每次while循环获取所有锁
加锁的时候,首先会调用RedissonMultiLock的lock()方法,接着会调用RedissonMultiLock的lockInterruptibly()方法。
在RedissonMultiLock的lockInterruptibly()方法中,会先根据联锁的个数来计算获取锁时的等待时间waitTime,然后通过while循环不停地尝试调用tryLock()方法去获取所有的锁。只有获取到所有的锁,while循环才会退出。
二.RedissonMultiLock的tryLock()方法获取锁有超时时间限制 + 加锁失败数限制
在RedissonMultiLock的tryLock()方法中,会依次遍历需要获取的锁,然后调用RLock的tryLock()方法尝试获取每个锁。比如调用可重入锁RedissonLock.tryLock()方法来尝试获取每个锁。
假设传入的leaseTime = -1,waitTime = 4500,计算出remainTime = 4500。那么传入RedissonLock的tryLock()方法中的参数waitTime为4500,即指定了获取每个锁时的等待超时时间为4500毫秒。如果在4500毫秒内获取不到这个锁,就退出并标记为获取锁失败。此外传入RedissonLock的tryLock()方法中的参数newLeaseTime为-1。表示获取到锁之后,这个锁在多长时间内会自动释放。由于leaseTime是-1,所以newLeaseTime也是-1。所以如果获取到了锁,会启动一个WatchDog在10秒之后去检查锁的持有情况。
在RedissonMultiLock的tryLock()方法的遍历获取锁的for循环中,有两个限制。
限制一:超时时间限制
当获取锁成功时,就将该锁实例添加到一个列表。但不管获取锁成功还是失败,都会递减remainTime。其实remainTime就是获取MultiLock的超时时间,默认每个锁1500毫秒。当发现remainTime小于0,则表示此次获取联锁失败,需释放获取的锁。此时RedissonMultiLock的tryLock()方法便会返回false,继续下一轮尝试。
限制二:加锁失败数限制
当获取锁失败时,先判断是否达到加锁成功的最少数量。如果达到,就可以退出循环,并进行返回。如果还没达到,就对failedLocksLimit递减。当发现failedLocksLimit为0,则表示此次获取联锁失败,需释放获取的锁,同时重置failedLocksLimit的值+清空acquiredLocks+复位锁列表的迭代器,为下一次尝试获取全部锁做准备。也就是RedissonMultiLock.tryLock()方法会返回false,继续下一轮尝试。
三.RedissonMultiLock的tryLock()方法获取所有锁失败会继续重试
当RedissonMultiLock的tryLock()方法返回false时,在RedissonMultiLock的lockInterruptibly()方法的while循环中,会再次调用RedissonMultiLock的tryLock()方法来尝试获取联锁。
四.总结
假设要获取的联锁中有n把锁,那么可能会循环很多次去尝试获取这n把锁。默认情况下,每次获取这n把锁的时候,会有一个超时时间为1500*n毫秒。也就是说,如果第一次获取这n把锁时,在1500*n毫秒内无法获取这n把锁。那么就会继续调用tryLock方法进行下一次尝试,重新再来获取这n把锁。直到某一次成功在1500*n毫秒内获取到这n把锁,那么就会退出循环。- public class RedissonMultiLock implements RLock {
- final List<RLock> locks = new ArrayList<>();
- public RedissonMultiLock(RLock... locks) {
- ...
- this.locks.addAll(Arrays.asList(locks));
- }
-
- @Override
- public void lock() {
- ...
- lockInterruptibly();
- ...
- }
-
- @Override
- public void lockInterruptibly() throws InterruptedException {
- lockInterruptibly(-1, null);
- }
-
- @Override
- public void lockInterruptibly(long leaseTime, TimeUnit unit) throws InterruptedException {
- //根据联锁的个数来计算获取锁时的等待时间waitTime
- //此时MutiLock中有3个锁,leaseTime=-1,baseWaitTime=4500,waitTime=4500
- long baseWaitTime = locks.size() * 1500;
- long waitTime = -1;
- if (leaseTime == -1) {
- //传入的leaseTime为-1,将baseWaitTime赋值给waitTime
- waitTime = baseWaitTime;
- } else {
- ...
- }
- //不停地尝试去获取所有的锁
- while (true) {
- //只有获取到所有的锁,while循环才会退出
- if (tryLock(waitTime, leaseTime, TimeUnit.MILLISECONDS)) {
- return;
- }
- }
- }
-
- @Override
- public boolean tryLock(long waitTime, long leaseTime, TimeUnit unit) throws InterruptedException {
- //此时传入的leaseTime=-1,waitTime=4500,计算出remainTime=4500
- long newLeaseTime = -1;
- ...
- //time=当前时间
- long time = System.currentTimeMillis();
- long remainTime = -1;
- if (waitTime != -1) {
- //remainTime=4500
- remainTime = unit.toMillis(waitTime);
- }
- //RedissonRedLock会重载calcLockWaitTime()方法,缩短了获取每个小锁的超时时间
- //比如RedissonRedLock.calcLockWaitTime()方法返回1500
- //RedissonMultiLock.calcLockWaitTime()方法返回4500
- long lockWaitTime = calcLockWaitTime(remainTime);
- //RedissonRedLock会重载failedLocksLimit()方法,返回可以允许最多有多少个锁获取失败
- //比如RedissonMultiLock.failedLocksLimit()方法返回0,表示不允许存在某个锁获取失败
- int failedLocksLimit = failedLocksLimit();
- //acquiredLocks用来保存已获取到的锁
- List<RLock> acquiredLocks = new ArrayList<>(locks.size());
- //依次遍历要获取的锁
- for (ListIterator<RLock> iterator = locks.listIterator(); iterator.hasNext();) {
- RLock lock = iterator.next();
- boolean lockAcquired;
- ...
- if (waitTime == -1 && leaseTime == -1) {
- lockAcquired = lock.tryLock();
- } else {
- //awaitTime=4500
- long awaitTime = Math.min(lockWaitTime, remainTime);
- //获取锁的核心方法RLock.tryLock(),比如RedissonLock.tryLock()方法
- //如果在awaitTime=4500毫秒内获取不到这个锁,就退出并标记为获取锁失败
- lockAcquired = lock.tryLock(awaitTime, newLeaseTime, TimeUnit.MILLISECONDS);
- }
- ...
- if (lockAcquired) {
- //成功获取锁,就将锁实例添加到acquiredLocks
- acquiredLocks.add(lock);
- } else {
- if (locks.size() - acquiredLocks.size() == failedLocksLimit()) {
- break;
- }
- //获取锁失败,就对failedLocksLimit递减,直到failedLocksLimit为0就返回false
- if (failedLocksLimit == 0) {
- //此次获取联锁失败,需释放获取的锁
- unlockInner(acquiredLocks);
- if (waitTime == -1) {
- return false;
- }
- //重置failedLocksLimit的值,为下一次尝试获取全部锁做准备
- failedLocksLimit = failedLocksLimit();
- //清空acquiredLocks,为下一次尝试获取全部锁做准备
- acquiredLocks.clear();
- //复位锁列表的迭代器
- while (iterator.hasPrevious()) {
- iterator.previous();
- }
- } else {
- //递减failedLocksLimit
- failedLocksLimit--;
- }
- }
- //递减remainTime,如果remainTime小于0,表示获取联锁失败
- if (remainTime != -1) {
- remainTime -= System.currentTimeMillis() - time;
- time = System.currentTimeMillis();
- //如果发现remainTime小于0,则表示此次获取联锁失败
- if (remainTime <= 0) {
- unlockInner(acquiredLocks);
- return false;
- }
- }
- }
- if (leaseTime != -1) {
- acquiredLocks.stream()
- .map(l -> (RedissonLock) l)
- .map(l -> l.expireAsync(unit.toMillis(leaseTime), TimeUnit.MILLISECONDS))
- .forEach(f -> f.toCompletableFuture().join());
- }
-
- return true;
- }
- ...
- }
复制代码 (2)联锁的释放(依次释放锁 + 同步等待锁释放完毕)
释放锁就是依次调用每个锁的释放逻辑,同步等待每个锁释放完毕才返回。- public class RedissonMultiLock implements RLock {
- ...
- @Override
- public void unlock() {
- List<RFuture<Void>> futures = new ArrayList<>(locks.size());
- //依次调用每个锁的释放逻辑
- for (RLock lock : locks) {
- futures.add(lock.unlockAsync());
- }
- for (RFuture<Void> future : futures) {
- //同步等待每个锁释放完毕
- future.toCompletableFuture().join();
- }
- }
- ...
- }
复制代码
3.Redisson红锁RedLock的算法原理
(1)RedLock算法的具体流程
(2)RedLock算法的四个要点总结
(1)RedLock算法的具体流程
步骤一:客户端先获取当前时间戳T1。
步骤二:客户端依次向这5个节点发起加锁请求,且每个请求都会设置超时时间。超时时间是毫秒级的,要远小于锁的有效时间,而且一般是几十毫秒。如果某一个节点加锁失败,包括网络超时、锁被其它线程持有等各种情况,那么就立即向下一个Redis节点申请加锁。
步骤三:如果客户端从3个以上(过半)节点加锁成功,则再次获取当前时间戳T2。如果T2 - T1 < 锁的过期时间,则认为客户端加锁成功,否则加锁失败。
步骤四:如果加锁失败,要向全部节点发起释放锁的请求。如果加锁成功,则去操作共享资源。
(2)RedLock算法的四个要点总结
一.客户端在多个Redis节点上申请加锁
二.必须保证大多数节点加锁成功
三.大多数节点加锁的总耗时 < 锁设置的过期时间
四.释放锁时要向全部节点发起释放锁的请求
4.Redisson红锁RedLock的源码分析
(1)RedLock的使用简介
(2)RedLock的实现
(3)RedissonRedLock的源码总结
(1)RedLock的使用简介- //红锁
- RedissonClient redissonInstance1 = Redisson.create(config);
- RedissonClient redissonInstance2 = Redisson.create(config);
- RedissonClient redissonInstance3 = Redisson.create(config);
- RLock lock1 = redissonInstance1.getLock("lock1");
- RLock lock2 = redissonInstance2.getLock("lock2");
- RLock lock3 = redissonInstance3.getLock("lock3");
- RedissonRedLock lock = new RedissonRedLock(lock1, lock2, lock3);
- //同时加锁:lock1 lock2 lock3
- //红锁在大部分节点上加锁成功就算成功
- lock.lock();
- lock.unlock();
- ---------------------------------------------------------------
- //给lock1、lock2、lock3加锁;如果没有主动释放锁的话,10秒后将会自动释放锁
- lock.lock(10, TimeUnit.SECONDS);
- //加锁等待最多是100秒;加锁成功后如果没有主动释放锁的话,锁会在10秒后自动释放
- boolean res = lock.tryLock(100, 10, TimeUnit.SECONDS);
- lock.unlock();
复制代码 (2)RedLock的实现
RedissonRedLock锁的实现非常简单,因为RedissonRedLock是RedissonMultiLock的一个子类,所以RedLock的算法是依赖MultiLock的机制来实现的。
RedissonRedLock主要会通过方法的重载,来改变RedissonMultiLock中的几个特殊行为。
一.RedissonRedLock重载了RedissonMultiLock的failedLocksLimit()方法
failedLocksLimit()方法会返回允许最多有多少个锁获取失败。其中failedLocksLimit()方法会调用minLocksAmount()方法,而minLocksAmount()方法便会返回加锁成功的最少数量,即过半数。锁的总数减去加锁成功的最少数量,便是允许最多有多少个锁获取失败。
RedissonMultiLock的failedLocksLimit()方法是返回0的,即RedissonMultiLock是不允许存在某个锁获取失败。
具体的处理就是在RedissonMultiLock的tryLock()方法中,当获取锁失败时,先判断是否达到加锁成功的最少数量。如果达到,就可以退出循环,并进行返回。如果还没达到,就对failedLocksLimit递减。当发现failedLocksLimit为0,则表示此次获取联锁失败,需要释放获取的锁,同时重置failedLocksLimit的值 + 清空acquiredLocks + 复位锁列表的迭代器,为下一次尝试获取全部锁做准备。也就是RedissonMultiLock的tryLock()方法会返回false,继续下一轮尝试。
二.RedissonRedLock重载了RedissonMultiLock的calcLockWaitTime()方法
calcLockWaitTime()方法会返回对每个lock进行加锁时的超时时间。例如当waitTime = 4500毫秒、remainTime = 4500毫秒时:RedissonMultiLock的calcLockWaitTime()方法会返回4500,RedissonRedLock的calcLockWaitTime()方法会返回1500。
RedissonMultiLock中对每个lock尝试加锁的超时时间为4500毫秒,RedissonRedLock中对每个lock尝试加锁的超时时间为1500毫秒。如果在超时时间内没获取到锁,那么就认为对lock的加锁失败。- public class RedissonRedLock extends RedissonMultiLock {
- public RedissonRedLock(RLock... locks) {
- super(locks);
- }
-
- //可以允许最多有多少个锁获取失败
- @Override
- protected int failedLocksLimit() {
- return locks.size() - minLocksAmount(locks);
- }
-
- //获取锁成功的数量最少要多少个:过半
- protected int minLocksAmount(final List<RLock> locks) {
- return locks.size()/2 + 1;
- }
-
- @Override
- protected long calcLockWaitTime(long remainTime) {
- return Math.max(remainTime / locks.size(), 1);
- }
-
- @Override
- public void unlock() {
- unlockInner(locks);
- }
- }
- public class RedissonMultiLock implements RLock {
- ...
- @Override
- public void lockInterruptibly(long leaseTime, TimeUnit unit) throws InterruptedException {
- //根据联锁的个数来计算获取锁时的等待时间waitTime
- //此时MutiLock中有3个锁,leaseTime=-1,baseWaitTime=4500,waitTime=4500
- long baseWaitTime = locks.size() * 1500;
- long waitTime = -1;
- if (leaseTime == -1) {
- //传入的leaseTime为-1,将baseWaitTime赋值给waitTime
- waitTime = baseWaitTime;
- } else {
- ...
- }
- //不停地尝试去获取所有的锁
- while (true) {
- //只有获取到所有的锁,while循环才会退出
- if (tryLock(waitTime, leaseTime, TimeUnit.MILLISECONDS)) {
- return;
- }
- }
- }
-
- @Override
- public boolean tryLock(long waitTime, long leaseTime, TimeUnit unit) throws InterruptedException {
- //此时传入的leaseTime=-1,waitTime=4500,计算出remainTime=4500
- long newLeaseTime = -1;
- ...
- //time=当前时间
- long time = System.currentTimeMillis();
- long remainTime = -1;
- if (waitTime != -1) {
- //remainTime=4500
- remainTime = unit.toMillis(waitTime);
- }
- //RedissonRedLock会重载calcLockWaitTime()方法,缩短了获取每个小锁的超时时间
- //比如RedissonRedLock.calcLockWaitTime()方法返回1500
- //RedissonMultiLock.calcLockWaitTime()方法返回4500
- long lockWaitTime = calcLockWaitTime(remainTime);
- //RedissonRedLock会重载failedLocksLimit()方法,返回可以允许最多有多少个锁获取失败
- //比如RedissonMultiLock.failedLocksLimit()方法返回0,表示不允许存在某个锁获取失败
- int failedLocksLimit = failedLocksLimit();
- //acquiredLocks用来保存已获取到的锁
- List<RLock> acquiredLocks = new ArrayList<>(locks.size());
- //依次遍历要获取的锁
- for (ListIterator<RLock> iterator = locks.listIterator(); iterator.hasNext();) {
- RLock lock = iterator.next();
- boolean lockAcquired;
- ...
- if (waitTime == -1 && leaseTime == -1) {
- lockAcquired = lock.tryLock();
- } else {
- //awaitTime=4500
- long awaitTime = Math.min(lockWaitTime, remainTime);
- //获取锁的核心方法RLock.tryLock(),比如RedissonLock.tryLock()方法
- //如果在awaitTime=4500毫秒内获取不到这个锁,就退出并标记为获取锁失败
- lockAcquired = lock.tryLock(awaitTime, newLeaseTime, TimeUnit.MILLISECONDS);
- }
- ...
- if (lockAcquired) {
- //成功获取锁,就将锁实例添加到acquiredLocks
- acquiredLocks.add(lock);
- } else {
- //如果达到加锁成功的最少数量,就可以退出循环,进行返回了
- if (locks.size() - acquiredLocks.size() == failedLocksLimit()) {
- break;
- }
- //获取锁失败,就对failedLocksLimit递减,直到failedLocksLimit为0就返回false
- if (failedLocksLimit == 0) {
- //此次获取联锁失败,需释放获取的锁
- unlockInner(acquiredLocks);
- if (waitTime == -1) {
- return false;
- }
- //重置failedLocksLimit的值,为下一次尝试获取全部锁做准备
- failedLocksLimit = failedLocksLimit();
- //清空acquiredLocks,为下一次尝试获取全部锁做准备
- acquiredLocks.clear();
- //复位锁列表的迭代器
- while (iterator.hasPrevious()) {
- iterator.previous();
- }
- } else {
- //递减failedLocksLimit
- failedLocksLimit--;
- }
- }
- //递减remainTime,如果remainTime小于0,表示获取联锁失败
- if (remainTime != -1) {
- remainTime -= System.currentTimeMillis() - time;
- time = System.currentTimeMillis();
- //如果发现remainTime小于0,则表示此次获取联锁失败
- if (remainTime <= 0) {
- unlockInner(acquiredLocks);
- return false;
- }
- }
- }
- if (leaseTime != -1) {
- acquiredLocks.stream()
- .map(l -> (RedissonLock) l)
- .map(l -> l.expireAsync(unit.toMillis(leaseTime), TimeUnit.MILLISECONDS))
- .forEach(f -> f.toCompletableFuture().join());
- }
-
- return true;
- }
- ...
- }
- public class RedissonMultiLock implements RLock {
- ...
- protected int failedLocksLimit() {
- return 0;
- }
-
- protected long calcLockWaitTime(long remainTime) {
- return remainTime;
- }
-
- @Override
- public void unlock() {
- List<RFuture<Void>> futures = new ArrayList<>(locks.size());
- for (RLock lock : locks) {
- futures.add(lock.unlockAsync());
- }
- for (RFuture<Void> future : futures) {
- future.toCompletableFuture().join();
- }
- }
-
- protected void unlockInner(Collection<RLock> locks) {
- locks.stream().map(RLockAsync::unlockAsync)
- .forEach(f -> {
- f.toCompletableFuture().join();
- }
- );
- }
- ...
- }
复制代码 (3)RedissonRedLock的源码总结
针对多个lock进行加锁,每个lock都有一个1500毫秒的加锁超时时间。
如果在1500*n毫秒内,成功对n / 2 + 1个lock加锁成功了。那么就可以认为这个RedLock加锁成功,不要求所有的lock都加锁成功。
问题:RedLock本应该是一个锁,只不过是在不同的Master节点上进行加锁。但是Redisson的RedLock实现中却通过合并多个小lock来实现,这是否与RedLock的设计不一致了?
当使用Redis Cluster时,其实是一样的。假设有3个Master实例,那么就使用lock1、lock2、lock3三个key去加锁。这3个锁key会按照CRC16得出Hash值然后再取模分布到这3个Master节点,效果等同于让各个Master节点使用名为lock的key进行加锁。
来源:程序园用户自行投稿发布,如果侵权,请联系站长删除
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作! |