0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

数据库如何实现分布式锁

科技绿洲 来源:Java技术指北 作者:Java技术指北 2023-10-08 16:12 次阅读

1. 前言

分布式应用中,有时我们需要一个方法在同一时间只能被一个线程执行。此时我们有可能会使用到分布式锁。

分布式锁需要具备以下特征:

  • 互斥性 同一时刻锁只能被一个线程持有。
  • 超时释放 超时释放主要是用来避免死锁,防止不必要的线程等待和资源浪费
  • 可重入性 一个线程在持有锁的情况下,可以再次请求加锁
  • 高性能,高可用 加锁释放锁的操作尽量使用更少的资源,提高性能。同时也要保证高可用,防止分布式锁意外失效

目前比较多的分布式锁有下面的方案:

  • 基于数据库实现分布式锁
  • 基于缓存(redis, Hazelcast)等实现分布式锁
  • 基于Zookeeper实现分布式锁

2. 数据库分布式锁

2.1基于表记录的分布式锁

在数据库中创建一个锁表,并且在需要的字段上创建唯一索引,使用锁的时候就插入数据,插入成功则获得锁,执行结束后,就删除数据。也可以加上version控制,使之成为乐观锁。

  • 获取锁:成功插入数据
  • 执行业务逻辑
  • 释放锁:删除数据

2.2基于数据库行锁的分布式锁

使用select * For update来获取数据库数据锁, where之后的条件加入唯一索引,则表示使用了行锁。其分布式锁使用顺序如下。

  • 获取锁:SELECT * FROM database_lock WHERE id = 1 FOR UPDATE;。
  • 执行业务逻辑。
  • 释放锁:COMMIT。

3 Zookeeper分布式锁

Zookeepe可以实现分布式锁主要是因为多个线程去Zookpeeper中创建同一个节点时,只有一个线程可以创建成功。

Zookeeper中有临时节点,持久化节点。其中临时节点在服务端session失效后,节点就会被删除。相对而言,持久化节点在服务端session失效后,也不会被删除,而是需要客户端主动删除。

在上述类型系节点之后增加一个数字后缀,即路径+数字后缀,这样可以保证其唯一性和有序性。

其分布式锁实现原理如下:

  • 创建一个lock目录给分布式锁使用
  • 某个线程想要获取锁就在此目录下创建临时顺序节点
  • 获取此目录下的所有子节点,然后查找比自己序号小的节点,如果不存在,则当前线程创建的节点是最小节点,此时获得锁。
  • 其他线程想要获取锁,同样是创建临时有序节点,如果是最小序号节点则获得锁,否则监听比自己小的次小节点。
  • 持有分布式锁的线程操作完成之后,删除自己的临时节点,次大节点监听到变更事件之后,判断自己是最小序号节点的话,则获得锁。

Zookeeper实现分布式锁具有高可用,可重入,阻塞等特点,由于临时节点在客户端断开的时候就会被自动删除,所以不用担心死锁问题。但是频繁删除和创建节点,性能上会比Redis分布式锁低。

4 Redis分布式锁

4.1 SETNX

setnx命令只会在key不存在的情况下将key设置为value值, 其中key和 value值均可以设置成和业务相关的的命名。但是不满足超时释放的要求。

如果使用expire设置过期时间,也有可能在setnx成功后,由于各种原因,expire没有执行成功,从而导致锁不能超时释放。

4.2 SETNX 扩展命令

set key value [EX seconds] [PX milliseconds] [NX|XX]
 #EX 设置过期时间,单位为秒  set lock VALUE EX 10
 #PX 设置过期时间,单位为毫秒 set lock VALUE PX 10000
 #NX key不存在时才设置key的值  set lock VALUE EX 10 NX
 #XX key存在时才设置key SET lock VALUE EX 10 XX

set 扩展命令可以完全取代 SETNX, SETEX, PSETEX 等功能。

可以使用set扩展功能完成设置过期时间, 并且是原子操作。

上述分布式锁也有一些问题:

  • 如果线程获取锁之后,执行时间过长,锁提前释放。
  • 如果线程A未执行完操作,锁超时释放,此时线程B又获取了锁。线程B持有锁,但是A线程有可能执行DEL操作释放锁。

需要避免在长时间执行的任务中使用上述分布式锁,而且未按时执行完的线程不影响其最终结果。另外可以在锁的value设置一些唯一值,删除key之前验证是否持有锁。并且验证和删除需要使用Lua脚本保证其删除操作的原子性。

上述分布式锁还需要解决一个可重入性的问题。

4.3 Redisson 分布式锁

Redisson是基于Redis的Java内存数据网格,充分利用了Redis键值数据库提供的一系列优势。同时提供功能丰富的分布式锁。

Resisson内部会有一个监控锁的守护线程,在redisson实例被关闭前,不断延长锁的有效期。并且可以自定义超时检查时间间隔,同时还可以指定加锁时间。另外还支持公平锁(Fair Lock),联锁(MultiLock),红锁(RedLock),读写锁(ReadWriteLock)以及RSemaphore和RCountDownLatch等类似Java提供的各种多线程工具等。

其中RedLock是基于多个Redis集群关联的锁,可以大大提高锁的可用性及安全性。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据
    +关注

    关注

    8

    文章

    6511

    浏览量

    87600
  • 数据库
    +关注

    关注

    7

    文章

    3591

    浏览量

    63369
  • 分布式
    +关注

    关注

    1

    文章

    754

    浏览量

    74088
  • 线程
    +关注

    关注

    0

    文章

    489

    浏览量

    19495
  • 服务端
    +关注

    关注

    0

    文章

    61

    浏览量

    6871
收藏 人收藏

    评论

    相关推荐

    分布式软件系统

    降到最低。负载在各处理机之间分担,可以避免临界瓶颈。 4、当现有机构中已存在几个数据库系统,而且实现全局应用的必要性增加时,就可以由这些数据库自下而上构成分布式数据库系统。 5、相等规
    发表于 07-22 14:53

    小白求教:labview连接分布式数据库

    我用Hadoop搭建了一个分布式数据库,想让labview作为client向数据库中写数据,应该怎么实现
    发表于 12-13 10:18

    2017双11技术揭秘—X-DB支撑双11进入分布式数据库时代

    对MySQL生态下的运维系统/工具、知识体系也实现了兼容,整个MySQL时代的支撑平台,支撑人员都可以平滑的过度到分布式数据库时代,拥有了支撑下一代数据库的能力,这个是非常难得的。跨Region/全球强同步
    发表于 12-29 15:06

    分布式数据库中间件之分库分表   

        在分布式数据库中,可以通过分库分表存储方式,轻松解决大数据量单表容量达到单机数据库存储上线的瓶颈。但是分库存储后,需要尽量避免跨JOIN操作带来的性能与资源消耗问题。    
    发表于 08-02 20:19

    浅谈分布式缓存技术

    存储成本分布式缓存应用场景1,用于缓存网页的内容片段,包括HTML,CSS和图像等,主要用于社交网站;2,缓存系统作为ORM框架的二级缓存提供外部服务,减轻了数据库的负载压力,加快了应用访问;3.缓存
    发表于 11-16 15:45

    Hbase分布式非关系型数据库安装部署步骤

    Hbase分布式非关系型数据库安装与部署
    发表于 09-19 08:50

    分布式数据库有什么优缺点?

    分布式数据库系统(DDBS)是数据库技术和网络技术两者相互渗透和有机结合的结果。涉及数据库基本理论和网络通信理论。分布式数据库由一组数据组成
    发表于 09-24 09:13

    HarmonyOS分布式数据库,为啥这么牛?

    和维护,这个对于应用开发是非常友好的。 HarmonyOS 系统级的数据库同步,让开发者省去了同步管理、数据收发控制、数据一致性解决等问题的解决,让开发者能够更迅速的
    发表于 11-19 15:38

    【木棉花】分布式数据库

    同步,为用户提供在多种终端设备上一致的数据访问体验。” 那通俗易懂的来讲就是分布式数据库除了可以存储数据,还是可以让多台设备共用一个数据库,它和轻量级偏好
    发表于 09-05 10:43

    HarmonyOS教程—基于分布式数据接口,实现多种设备上一致的数据访问体验

    实现分布式数据库需要申请的权限为了实现分布式数据库,需要在entry\src\main\config.json中申请ohos.permission.DISTRIBUTED_DATAS
    发表于 09-26 11:40

    请问一下HarmonyOS的分布式数据库是存在每个设备上的吗

    请问一下HarmonyOS的分布式数据库是存在每个设备上的吗?数据同步时数据又是怎么存储的?求解答
    发表于 03-18 11:14

    【学习打卡】OpenHarmony的分布式数据管理介绍

    中,精心设计的架构为数据库和其他数据平台提供了一个模型,在该模型上将部署特定技术以适应各个应用程序。分布式数据管理作为OpenHarmony系统的模块之一,它建立在
    发表于 07-15 15:49

    分布式数据库,什么是分布式数据库

    分布式数据库,什么是分布式数据库 分布式数据库系统是在集中式数据库系统成熟技术的基础上发展起来的,但不是简单地把集中式数
    发表于 03-18 15:25 3959次阅读

    深入理解redis分布式

    系统不同进程共同访问共享资源的一种锁的实现。如果不同的系统或同一个系统的不同主机之间共享了某个临界资源,往往需要互斥来防止彼此干扰,以保证一致性。 业界流行的分布式实现,一般有这3种方式: 基于
    的头像 发表于 10-08 14:13 572次阅读
    深入理解redis<b class='flag-5'>分布式</b>锁

    分布式锁的三种实现方式

    锁,下面将分别介绍三种常见的实现方式。 一、基于数据库实现分布式锁 在分布式系统中,数据库是最
    的头像 发表于 12-28 10:01 334次阅读