前段时间细节的了解了Jedis的使用,Jedis是redis的java版本的客户端实现。
本文做个总结,主要分享如下内容:
【pipeline】【分布式的id生成器】【分布式锁【watch】【multi】】【redis分布式】
好了,一个一个来。
一、 Pipeline
官方的说明是:starts a pipeline,which is a very efficient way to send lots of command and read all the responses when you finish sending them。简单点说pipeline适用于批处理。当有大量的操作需要一次性执行的时候,可以用管道。
示例:
Jedis jedis = new Jedis(String, int);
Pipeline p = jedis.pipelined();
p.set(key,value);//每个操作都发送请求给redis-server
p.get(key,value);
p.sync();//这段代码获取所有的response
这里我进行了20w次连续操作(10w读,10w写),不用pipeline耗时:187242ms,用pipeline耗时:1188ms,可见使用管道后的性能上了一个台阶。看了代码了解到,管道通过一次性写入请求,然后一次性读取响应。也就是说jedis是:request response,request response,...;pipeline则是:request request... response response的方式。这样无需每次请求都等待server端的响应。
二、 跨jvm的id生成器
谈到这个话题,首先要知道redis-server端是单线程来处理client端的请求的。
这样来实现一个id生成器就非常简单了,只要简单的调用jdeis.incr(key);就搞定了。
你或许会问,incr是原子操作吗,能保证不会出现并发问题吗,不是说了吗,server端是单线程处理请求的。
三、 【跨jvm的锁实现【watch】【multi】】
首先说下这个问题的使用场景,有些时候我们业务逻辑是在不同的jvm进程甚至是不同的物理机上的jvm处理的。这样如何来实现不同jvm上的同步问题呢,其实我们可以基于redis来实现一个锁。
具体事务和监听请参考文章:redis学习笔记之事务
暂时找到三种实现方式:
1. 通过jedis.setnx(key,value)实现
import java.util.Random;
import org.apache.commons.pool.impl.GenericObjectPool.Config;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool;
import redis.clients.jedis.Transaction;
/**
* @author Teaey
*/
public class RedisLock {
//加锁标志
public static final String LOCKED = "TRUE";
public static final long ONE_MILLI_NANOS = 1000000L;
//默认超时时间(毫秒)
public static final long DEFAULT_TIME_OUT = 3000;
public static JedisPool pool;
public static final Random r = new Random();
//锁的超时时间(秒),过期删除
public static final int EXPIRE = 5 * 60;
static {
pool = new JedisPool(new Config(), "host", 6379);
}
private Jedis jedis;
private String key;
//锁状态标志
private boolean locked = false;
public RedisLock(String key) {
this.key = key;
this.jedis = pool.getResource();
}
public boolean lock(long timeout) {
long nano = System.nanoTime();
timeout *= ONE_MILLI_NANOS;
try {
while ((System.nanoTime() - nano) < timeout) {
if (jedis.setnx(key, LOCKED) == 1) {
jedis.expire(key, EXPIRE);
locked = true;
return locked;
}
// 短暂休眠,nano避免出现活锁
Thread.sleep(3, r.nextInt(500));
}
} catch (Exception e) {
}
return false;
}
public boolean lock() {
return lock(DEFAULT_TIME_OUT);
}
// 无论是否加锁成功,必须调用
public void unlock() {
try {
if (locked)
jedis.del(key);
} finally {
pool.returnResource(jedis);
}
}
}
2. 通过事务(multi)实现
由于采纳第一张方法,第二种跟第三种实现只贴了关键代码,望谅解。^_^
public boolean lock_2(long timeout) {
long nano = System.nanoTime();
timeout *= ONE_MILLI_NANOS;
try {
while ((System.nanoTime() - nano) < timeout) {
Transaction t = jedis.multi();
// 开启事务,当server端收到multi指令
// 会将该client的命令放入一个队列,然后依次执行,知道收到exec指令
t.getSet(key, LOCKED);
t.expire(key, EXPIRE);
String ret = (String) t.exec().get(0);
if (ret == null || ret.equals("UNLOCK")) {
return true;
}
// 短暂休眠,nano避免出现活锁
Thread.sleep(3, r.nextInt(500));
}
} catch (Exception e) {
}
return false;
}
3. 通过事务+监听实现
public boolean lock_3(long timeout) {
long nano = System.nanoTime();
timeout *= ONE_MILLI_NANOS;
try {
while ((System.nanoTime() - nano) < timeout) {
jedis.watch(key);
// 开启watch之后,如果key的值被修改,则事务失败,exec方法返回null
String value = jedis.get(key);
if (value == null || value.equals("UNLOCK")) {
Transaction t = jedis.multi();
t.setex(key, EXPIRE, LOCKED);
if (t.exec() != null) {
return true;
}
}
jedis.unwatch();
// 短暂休眠,nano避免出现活锁
Thread.sleep(3, r.nextInt(500));
}
} catch (Exception e) {
}
return false;
}
最终采用第一种实现,因为加锁只需发送一个请求,效率最高。
四、 【redis分布式】
最后一个话题,jedis的分布式。在jedis的源码里发现了两种hash算法(MD5,MURMUR Hash(默认)),也可以自己实现redis.clients.util.Hashing接口扩展。
List<JedisShardInfo> hosts = new ArrayList<JedisShardInfo>();
//server1
JedisShardInfo host1 = new JedisShardInfo("", 6380, 2000);
//server2
JedisShardInfo host2 = new JedisShardInfo("", 6381, 2000);
hosts.add(host1);
hosts.add(host2);
ShardedJedis jedis = new ShardedJedis(hosts);
jedis.set("key", "");
相关推荐
《Jedis使用总结:Pipeline、分布式ID生成器与分布式锁》 Jedis是Redis的Java客户端,它提供了丰富的API来与Redis服务器进行交互。本文将深入探讨Jedis在Pipeline、分布式ID生成器以及分布式锁(包括watch和multi...
Jedis使用总结 前段时间细节的了解了Jedis的使用,Jedis是redis的java版本的客户端实现。 本文做个总结,主要分享如下内容: 【pipeline】【分布式的id生成器】【分布式锁【watch】【multi】】【redis分布式】 好了...
总结来说,Jedis作为Java与Redis交互的重要工具,提供了丰富的功能和良好的性能。无论是Jedis 2.0还是2.1.0,都能满足大部分开发需求,但随着Redis服务的扩展和功能的增强,更新到更高版本的Jedis可以更好地利用...
总结,Jedis作为Redis的主要Java客户端,提供了丰富的功能和高度的灵活性,通过Pipeline和Transaction可以实现高效的数据操作,而对象池配置则有助于优化性能。对于大型项目或需要处理复杂数据结构的场景,了解并...
Jedis是Java开发的一款高效的Redis...总结,Jedis是Java开发者与Redis交互的重要工具,它涵盖了Redis的大部分功能,并且具有良好的性能。了解并熟练使用Jedis,能帮助你在开发中充分利用Redis的数据存储和处理能力。
总结来说,这三个JAR文件构成了一个完整的Jedis 3.0.0版本,为Java开发者提供了与Redis交互的强大工具,无论是简单的键值存储还是复杂的数据库操作,都可以通过Jedis轻松完成。同时,提供的文档和源代码资源有助于...
总结来说,Jedis 2.7.2版本为Java开发者提供了强大的工具,便于他们在各种项目中充分利用Redis的特性,实现高效的缓存管理和数据操作。通过熟练掌握Jedis的使用,开发者可以构建出更加高效、可扩展的分布式系统。
总结来说,Jedis 是一个功能丰富的 Redis 客户端,无论是在单机还是集群环境中,都能有效地支持多种 Redis 操作。正确理解和使用 Jedis 可以帮助我们构建高效、可扩展的 Redis 集成方案。在实际项目中,要根据需求...
总结,Jedis 2.9.0 API为Java开发者提供了全面且高效的Redis操作手段,涵盖了Redis的所有基本数据类型和高级特性。理解并熟练使用这些API,能有效地提升应用的性能和可靠性。通过不断的实践和优化,开发者可以更好地...
总结,Java通过Jedis连接Redis提供了高效的数据交互手段,Jedis连接池能优化资源利用,而对字符串和哈希的操作满足了多种存储需求。在Linux环境中,如CentOS7,可以便捷地部署和管理Redis服务器,从而在实际项目中...
总结来说,"jedis-3.3.0.jar"和"commons-pool2-2.9.0.jar"的结合使用,为Java开发者提供了高效、稳定的Redis连接和资源管理方案,通过Jedis的API可以便捷地操作Redis,而Apache Commons Pool 2则确保了连接资源的...
总结来说,使用Jedis操作Redis时,正确处理对象的序列化和反序列化是关键。结合Apache Commons库,我们可以方便地实现这一过程,并充分利用Redis的高性能存储特性。在开发过程中,要根据具体需求选择合适的序列化...
Jedis是Java社区中广泛使用的Redis客户端,提供了丰富的API接口,用于操作Redis的各种数据结构。本文将深入剖析Jedis 3.0.0的源码,揭示其在集群和管道模式下的实现机制,帮助读者更好地理解和应用这一强大工具。 ...
**Jedis 2.0.0:Java 集成 ...总结,Jedis 2.0.0 是 Java 开发者与 Redis 交互的首选工具,其丰富的 API 和特性使得 Redis 的功能得以充分利用。通过正确地集成和使用 Jedis,开发者可以构建高效、可靠的分布式应用。
总结来说,这个资源包提供了使用Jedis进行Redis操作所需的jar文件,并包含连接池实现,使得在Java应用中能够高效、稳定地与Redis服务器通信。在实际开发中,结合Jedis和连接池,可以构建高性能的Redis客户端。
总结,Jedis作为Java连接Redis的重要工具,提供了连接池管理、多种数据类型操作以及事务处理等功能,极大地简化了与Redis的交互。理解并熟练运用这些特性,能够帮助开发者更高效地利用Redis进行数据存储和处理。
Jedis是Java社区中广泛使用的Redis客户端库,它提供了丰富的API,使得开发者能够轻松地在Java应用中操作Redis数据库。Jedis 2.1.0是这个库的一个版本,包含了源代码和对应的Jar包,方便开发者进行学习、调试和部署。...
总结,Jedis和Apache Commons Pool的结合使用,可以大大提高Redis操作的效率和系统的资源利用率。通过正确配置和使用连接池,可以确保在高并发环境下,系统能够稳定、高效地处理Redis操作。在实际项目中,我们还需要...
总结起来,Jedis是一个功能强大的Java Redis客户端,其jar包包含了完整的功能,可以方便地集成到Java项目中,进行高效的数据操作。正确地使用和管理Jedis,能帮助开发者充分利用Redis的高性能特性,提升应用程序的...
总结来说,"Jedis最新版本jar包"是一个全面的资源集合,不仅提供了最新版本的Jedis库,还包含了源码和文档,便于开发者深入理解Jedis的工作原理,并快速地在项目中集成和使用Redis。无论是初学者还是经验丰富的...