`

基于zookeeper的分布式锁

 
阅读更多

网上看了一些zookeeper对于分布式的实现,基本思路都是zookeeper顺序的临时节点,然后取最小的节点编号的方式,释放锁就是把这个临时节点删除,这个实现思路基本上正确的,但是有一些细节却可能出问题,zookeeper都是基于watcher的方式实现回调,watcher监听路径确很关键,有一种思路是watcher监听他的离他最近的节点路径,有一种思路是监听他的父亲节点路径,第一种方式在高并发的时候会非常大的问题,第一种方式的基本实现思路的伪代码如下

 

getchildren(父亲节点路径)

sort(list)

获取当前节点在list中的位置

if (位置0)

  执行业务方法

否则

  订阅  当前位置-1 的兄弟节点路径

 

这种方式最大的问题就是getchildren(父亲节点路径)和订阅之间存在时间差距,如果在高并发的时候有可能订阅的节点已经不存在,假设当前的位置为1,当他订阅位置0的时候,位置0的节点已经被其他进程删除了,如果这时候还订阅就等于永远都不会执行到回调函数里面,即使代码写在一起也有可能有问题,所以虽然第一种方式在消息的广播范围更小,而且对于zookeeper的压力更小,但是隐患还是很大

 

所以我采用第二种方式,代码如下,代码基于LockSupport可以实现

获得分布式锁

执行业务方法

释放分布式锁

这个流程比较符合编程习惯

增加一个状态控制,private volatile int state,控制多线程之间状态同步

通过先订阅后创建,

 

 

import java.util.Collections;

import java.util.List;

import java.util.concurrent.locks.LockSupport;

 

import org.I0Itec.zkclient.IZkChildListener;

import org.I0Itec.zkclient.ZkClient;

import org.apache.zookeeper.CreateMode;

 

public class DistributedClient {

 

    private  String hosts = "zookeeper地址";

    private String subNode = "sub";

    private static String parentNode = "locks";

    

    private   ZkClient zkclient = new ZkClient(hosts);

    

    private String thisPath;

    

    private Thread currentThread = null;

    

    private IZkChildListener listener = null;

    

    private volatile int state;

    

    public void acqureDistributeLocks(final String groupNode) throws Exception {

   

    final String parentNodePath = "/" + parentNode +"/"+groupNode;

   

if (!zkclient.exists(parentNodePath))

zkclient.createPersistent(parentNodePath);

 

currentThread = Thread.currentThread();

 

listener = new IZkChildListener() {

 

@Override

public void handleChildChange(String parentPath, List<String> currentChilds)

throws Exception {

     if (thisPath == null)

          return;

     List<String> childrenNodes = zkclient.getChildren(parentNodePath);

     String thisNode = thisPath.substring((parentNodePath + "/").length());

     Collections.sort(childrenNodes);

     int index = childrenNodes.indexOf(thisNode);

     

     if (index == 0) {

   setState(1);

   LockSupport.unpark(currentThread);

     }

 

}

};

 

        zkclient.subscribeChildChanges(parentNodePath, listener);

   

    thisPath = zkclient.create(parentNodePath + "/" + subNode, null, CreateMode.EPHEMERAL_SEQUENTIAL);

   

    if(getState() == 0) {

    LockSupport.park(this);

    }

    }

    

    

 

    public int getState() {

return state;

}

 

 

public void setState(int state) {

this.state = state;

}

 

public void releaseDistributeLocks(String groupNode) throws Exception {

    String parentNodePath = "/" + parentNode +"/"+groupNode;

    zkclient.unsubscribeChildChanges(parentNodePath, listener);

    zkclient.delete(this.thisPath);

     

    }

    

       

    

    public static void main(String[] args) throws Exception {

        for (int i = 0; i < 10; i++) {

            new Thread() {

                public void run() {

                    try {

                        DistributedClient dl = new DistributedClient();

                        dl.acqureDistributeLocks("test");

                        System.out.println(Thread.currentThread().getName() + " work finish");

                        

                        dl.releaseDistributeLocks("test");

                        

                    } catch (Exception e) {

                        e.printStackTrace();

                    }

                }

            }.start();

        }

        

        long begin = System.currentTimeMillis();

        DistributedClient dl = new DistributedClient();

        for (int i = 0; i < 100; i++) {

            dl.acqureDistributeLocks("cnf");

            System.out.println(Thread.currentThread().getName() + " work finish " + i);

            dl.releaseDistributeLocks("cnf");

}

        long end = System.currentTimeMillis();

        

        System.out.println(end - begin);

        

        System.in.read();

    }

 

}

 

 

分享到:
评论

相关推荐

    C#基于zookeeper分布式锁的实现源码

    总之,C#中基于ZooKeeper的分布式锁实现涉及对ZooKeeper的操作,包括创建临时顺序节点、监听节点变化以及正确释放锁。这样的实现方式保证了在分布式环境下的并发控制和数据一致性,同时具备良好的扩展性和容错性。...

    基于zookeeper的分布式锁简单实现

    实现基于Zookeeper的分布式锁,主要涉及以下核心概念: 1. **节点创建**:在Zookeeper中,每个锁可以表示为一个临时节点。当客户端需要获取锁时,会在特定路径下创建一个临时节点。由于Zookeeper的顺序性,创建的...

    基于zookeeper的分布式锁实现demo

    **Zookeeper分布式锁的关键特性包括:** 1. **顺序一致性:** Zookeeper中的节点被创建顺序是全局唯一的,这有助于实现锁的唯一性。 2. **原子性:** 创建和删除节点的操作在Zookeeper中都是原子性的,这保证了...

    基于zookeeper实现分布式锁

    zooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是集群的管理者。提供了文件系统和通知机制。...在开发项目的过程中,很多大型项目都是分布式部署的,那么我们现在使用zookeeper实现一个分布式锁。

    zookeeper做分布式锁

    基于一致性模型,ZooKeeper确保了数据的一致性和有序性,使其成为构建分布式锁的理想选择。 **2. 分布式锁原理** 分布式锁的目的是在多个节点之间实现对共享资源的互斥访问。在ZooKeeper中,通常通过创建临时顺序...

    从Paxos到Zookeeper分布式一致性原理与实践PDF

    《从Paxos到Zookeeper分布式一致性原理与实践》是一本深入探讨分布式系统一致性问题的著作,其中重点讲解了Paxos算法与Zookeeper在实际应用中的理论与实践。Paxos是分布式计算领域中著名的共识算法,为解决分布式...

    zookeeper分布式锁实例源码

    ZooKeeper 提供的分布式锁通常基于其原子的创建、删除节点和监视事件机制来实现。 1. **不可重入锁(Non-Recursive Lock)**: 不可重入锁不允许同一个线程再次获取已持有的锁。在ZooKeeper中,实现不可重入锁通常...

    从PAXOS到ZOOKEEPER分布式一致性原理与实践

    2. 分布式锁:利用ZNODE的创建、删除操作,实现跨节点的互斥访问控制。 3. 配置管理:集中式存储和分发系统的配置信息,保证所有节点访问的配置是一致的。 4. 命名服务:为分布式组件提供全局唯一的ID或名称,简化...

    ZooKeeper分布式过程协同技术详解_new.pdf

    《ZooKeeper分布式过程协同技术详解》是一本深入解析ZooKeeper核心技术的书籍,适合所有对分布式系统和ZooKeeper有研究兴趣的读者。ZooKeeper是Apache软件基金会的一个开源项目,它为分布式应用程序提供了一个高效、...

    从Paxos到Zookeeper分布式一致性原理与实践 + ZooKeeper-分布式过程协同技术详解 pdf

    ZooKeeper基于Paxos等一致性算法,实现了简单易用的接口,使得开发者无需关心底层复杂的共识机制,就能轻松实现诸如命名服务、配置管理、集群同步、分布式锁等功能。ZooKeeper的数据模型是一个层次化的命名空间,...

    从Paxos到Zookeeper分布式一致性原理与实践包括源码

    Zookeeper基于Paxos和其他一致性算法的实现,为分布式应用程序提供了命名服务、配置管理、分布式锁、群组服务等功能。Zookeeper通过ZNode(类似于文件系统的节点)来存储和操作数据,并采用观察者模式来实时监控数据...

    一文彻底理解ZooKeeper分布式锁的实现原理

    《彻底理解ZooKeeper分布式锁实现原理》 ZooKeeper,简称zk,作为一个高可用的分布式协调服务,常被用于构建分布式系统中的各种组件,如分布式锁。在本篇文章中,我们将深入探讨如何利用Curator这个流行的开源框架...

    zk分布式锁1

    ZooKeeper分布式锁的实现基于ZooKeeper的节点机制。ZooKeeper的节点可以分为四种类型:持久节点、临时节点、顺序节点和ephemeral节点。其中,临时节点和ephemeral节点可以被用来实现分布式锁。 临时节点实现分布式...

    springboot zookeeper 分布式锁

    以下是一个简单的基于Zookeeper的分布式锁实现示例: ```java @Service public class ZookeeperDistributedLock { @Autowired private CuratorFramework curatorFramework; private String lockPath = "/...

    浅谈Java(SpringBoot)基于zookeeper的分布式锁实现

    Java(SpringBoot)基于zookeeper的分布式锁实现 本文主要介绍了Java(SpringBoot)基于zookeeper的分布式锁实现,通过示例代码详细介绍了分布式锁的实现过程,对大家的学习或者工作具有一定的参考学习价值。 分布式锁...

    吊打面试官之基于zookeeper实现分布式锁源码

    总结,基于ZooKeeper实现的分布式锁方案,充分利用了ZooKeeper的特性,提供了高可用、高性能的锁服务。在SpringCloud框架下,可以轻松地整合ZooKeeper,简化分布式系统的开发。不过,在实际应用中,还需要根据业务...

    redis和zookeeper实现分布式锁的区别

    **Zookeeper分布式锁** Zookeeper是一个高可用的分布式协调服务,它维护了一致的命名空间和分布式事件通知。Zookeeper中的分布式锁通常通过创建临时节点(ephemeral nodes)来实现。当客户端创建一个临时节点并持有...

    ZookeeperNet实现分布式锁

    通过深入理解Zookeeper的工作原理以及ZookeeperNet库的使用,开发者可以有效地在C#环境中实现高可用的分布式锁,保障多节点之间的协同工作和数据一致性。在实际项目中,分布式锁可以广泛应用于数据库操作、并发任务...

    使用zookeeper实现分布式共享锁

    Zookeeper的分布式锁主要基于两种数据结构:临时节点(ephemeral nodes)和顺序节点(sequential nodes)。 首先,临时节点是当客户端断开连接时会被自动删除的节点。这种特性使得Zookeeper可以检测到节点的存活...

Global site tag (gtag.js) - Google Analytics