网上看了一些zookeeper对于分布式的实现,基本思路都是zookeeper顺序的临时节点,然后取最小的节点编号的方式,释放锁就是把这个临时节点删除,这个实现思路基本上正确的,但是有一些细节却可能出问题,zookeeper都是基于watcher的方式实现回调,watcher监听路径确很关键,有一种思路是watcher监听他的离他最近的节点路径,有一种思路是监听他的父亲节点路径,第一种方式在高并发的时候会非常大的问题,第一种方式的基本实现思路的伪代码如下
getchildren(父亲节点路径)
sort(list)
获取当前节点在list中的位置
if (位置0)
执行业务方法
否则
订阅 当前位置-1 的兄弟节点路径
这种方式最大的问题就是getchildren(父亲节点路径)和订阅之间存在时间差距,如果在高并发的时候有可能订阅的节点已经不存在,假设当前的位置为1,当他订阅位置0的时候,位置0的节点已经被其他进程删除了,如果这时候还订阅就等于永远都不会执行到回调函数里面,即使代码写在一起也有可能有问题,所以虽然第一种方式在消息的广播范围更小,而且对于zookeeper的压力更小,但是隐患还是很大
所以我采用第二种方式,代码如下,代码基于LockSupport可以实现
获得分布式锁
执行业务方法
释放分布式锁
这个流程比较符合编程习惯
增加一个状态控制,private volatile int state,控制多线程之间状态同步
通过先订阅后创建,
import java.util.Collections;
import java.util.List;
import java.util.concurrent.locks.LockSupport;
import org.I0Itec.zkclient.IZkChildListener;
import org.I0Itec.zkclient.ZkClient;
import org.apache.zookeeper.CreateMode;
public class DistributedClient {
private String hosts = "zookeeper地址";
private String subNode = "sub";
private static String parentNode = "locks";
private ZkClient zkclient = new ZkClient(hosts);
private String thisPath;
private Thread currentThread = null;
private IZkChildListener listener = null;
private volatile int state;
public void acqureDistributeLocks(final String groupNode) throws Exception {
final String parentNodePath = "/" + parentNode +"/"+groupNode;
if (!zkclient.exists(parentNodePath))
zkclient.createPersistent(parentNodePath);
currentThread = Thread.currentThread();
listener = new IZkChildListener() {
@Override
public void handleChildChange(String parentPath, List<String> currentChilds)
throws Exception {
if (thisPath == null)
return;
List<String> childrenNodes = zkclient.getChildren(parentNodePath);
String thisNode = thisPath.substring((parentNodePath + "/").length());
Collections.sort(childrenNodes);
int index = childrenNodes.indexOf(thisNode);
if (index == 0) {
setState(1);
LockSupport.unpark(currentThread);
}
}
};
zkclient.subscribeChildChanges(parentNodePath, listener);
thisPath = zkclient.create(parentNodePath + "/" + subNode, null, CreateMode.EPHEMERAL_SEQUENTIAL);
if(getState() == 0) {
LockSupport.park(this);
}
}
public int getState() {
return state;
}
public void setState(int state) {
this.state = state;
}
public void releaseDistributeLocks(String groupNode) throws Exception {
String parentNodePath = "/" + parentNode +"/"+groupNode;
zkclient.unsubscribeChildChanges(parentNodePath, listener);
zkclient.delete(this.thisPath);
}
public static void main(String[] args) throws Exception {
for (int i = 0; i < 10; i++) {
new Thread() {
public void run() {
try {
DistributedClient dl = new DistributedClient();
dl.acqureDistributeLocks("test");
System.out.println(Thread.currentThread().getName() + " work finish");
dl.releaseDistributeLocks("test");
} catch (Exception e) {
e.printStackTrace();
}
}
}.start();
}
long begin = System.currentTimeMillis();
DistributedClient dl = new DistributedClient();
for (int i = 0; i < 100; i++) {
dl.acqureDistributeLocks("cnf");
System.out.println(Thread.currentThread().getName() + " work finish " + i);
dl.releaseDistributeLocks("cnf");
}
long end = System.currentTimeMillis();
System.out.println(end - begin);
System.in.read();
}
}
相关推荐
总之,C#中基于ZooKeeper的分布式锁实现涉及对ZooKeeper的操作,包括创建临时顺序节点、监听节点变化以及正确释放锁。这样的实现方式保证了在分布式环境下的并发控制和数据一致性,同时具备良好的扩展性和容错性。...
实现基于Zookeeper的分布式锁,主要涉及以下核心概念: 1. **节点创建**:在Zookeeper中,每个锁可以表示为一个临时节点。当客户端需要获取锁时,会在特定路径下创建一个临时节点。由于Zookeeper的顺序性,创建的...
**Zookeeper分布式锁的关键特性包括:** 1. **顺序一致性:** Zookeeper中的节点被创建顺序是全局唯一的,这有助于实现锁的唯一性。 2. **原子性:** 创建和删除节点的操作在Zookeeper中都是原子性的,这保证了...
zooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是集群的管理者。提供了文件系统和通知机制。...在开发项目的过程中,很多大型项目都是分布式部署的,那么我们现在使用zookeeper实现一个分布式锁。
基于一致性模型,ZooKeeper确保了数据的一致性和有序性,使其成为构建分布式锁的理想选择。 **2. 分布式锁原理** 分布式锁的目的是在多个节点之间实现对共享资源的互斥访问。在ZooKeeper中,通常通过创建临时顺序...
《从Paxos到Zookeeper分布式一致性原理与实践》是一本深入探讨分布式系统一致性问题的著作,其中重点讲解了Paxos算法与Zookeeper在实际应用中的理论与实践。Paxos是分布式计算领域中著名的共识算法,为解决分布式...
ZooKeeper 提供的分布式锁通常基于其原子的创建、删除节点和监视事件机制来实现。 1. **不可重入锁(Non-Recursive Lock)**: 不可重入锁不允许同一个线程再次获取已持有的锁。在ZooKeeper中,实现不可重入锁通常...
2. 分布式锁:利用ZNODE的创建、删除操作,实现跨节点的互斥访问控制。 3. 配置管理:集中式存储和分发系统的配置信息,保证所有节点访问的配置是一致的。 4. 命名服务:为分布式组件提供全局唯一的ID或名称,简化...
《ZooKeeper分布式过程协同技术详解》是一本深入解析ZooKeeper核心技术的书籍,适合所有对分布式系统和ZooKeeper有研究兴趣的读者。ZooKeeper是Apache软件基金会的一个开源项目,它为分布式应用程序提供了一个高效、...
ZooKeeper基于Paxos等一致性算法,实现了简单易用的接口,使得开发者无需关心底层复杂的共识机制,就能轻松实现诸如命名服务、配置管理、集群同步、分布式锁等功能。ZooKeeper的数据模型是一个层次化的命名空间,...
Zookeeper基于Paxos和其他一致性算法的实现,为分布式应用程序提供了命名服务、配置管理、分布式锁、群组服务等功能。Zookeeper通过ZNode(类似于文件系统的节点)来存储和操作数据,并采用观察者模式来实时监控数据...
《彻底理解ZooKeeper分布式锁实现原理》 ZooKeeper,简称zk,作为一个高可用的分布式协调服务,常被用于构建分布式系统中的各种组件,如分布式锁。在本篇文章中,我们将深入探讨如何利用Curator这个流行的开源框架...
ZooKeeper分布式锁的实现基于ZooKeeper的节点机制。ZooKeeper的节点可以分为四种类型:持久节点、临时节点、顺序节点和ephemeral节点。其中,临时节点和ephemeral节点可以被用来实现分布式锁。 临时节点实现分布式...
以下是一个简单的基于Zookeeper的分布式锁实现示例: ```java @Service public class ZookeeperDistributedLock { @Autowired private CuratorFramework curatorFramework; private String lockPath = "/...
Java(SpringBoot)基于zookeeper的分布式锁实现 本文主要介绍了Java(SpringBoot)基于zookeeper的分布式锁实现,通过示例代码详细介绍了分布式锁的实现过程,对大家的学习或者工作具有一定的参考学习价值。 分布式锁...
总结,基于ZooKeeper实现的分布式锁方案,充分利用了ZooKeeper的特性,提供了高可用、高性能的锁服务。在SpringCloud框架下,可以轻松地整合ZooKeeper,简化分布式系统的开发。不过,在实际应用中,还需要根据业务...
**Zookeeper分布式锁** Zookeeper是一个高可用的分布式协调服务,它维护了一致的命名空间和分布式事件通知。Zookeeper中的分布式锁通常通过创建临时节点(ephemeral nodes)来实现。当客户端创建一个临时节点并持有...
通过深入理解Zookeeper的工作原理以及ZookeeperNet库的使用,开发者可以有效地在C#环境中实现高可用的分布式锁,保障多节点之间的协同工作和数据一致性。在实际项目中,分布式锁可以广泛应用于数据库操作、并发任务...
Zookeeper的分布式锁主要基于两种数据结构:临时节点(ephemeral nodes)和顺序节点(sequential nodes)。 首先,临时节点是当客户端断开连接时会被自动删除的节点。这种特性使得Zookeeper可以检测到节点的存活...