`

Jedis 与 ShardedJedis 设计

 
阅读更多
原文地址:http://yychao.iteye.com/blog/1751583


Jedis设计
Jedis作为推荐的java语言redis客户端,其抽象封装为三部分:

对象池设计:Pool,JedisPool,GenericObjectPool,BasePoolableObjectFactory,JedisFactory
面向用户的redis操作封装:BinaryJedisCommands,JedisCommands,BinaryJedis,Jedis
面向redis服务器的操作封装:Commands,Client,BinaryClient,Connection,Protocol

其类设计图如下:




关于common-pool的相关内容,可以参见:http://macrochen.iteye.com/blog/320077

其他类的设计作用如下:


类名 职责
Pool 抽象Jedis对象池操作;并委托给操作给GenericObjectPool
JedisPool 实现Pool并提供JedisFactory工厂
JedisFactory 实现BasePoolableObjectFactory,提供创建,销毁Jedis方法
BinaryJedisCommands 抽象面向客户端操作的Redis命令;key,value都为序列化后的byte数组
JedisCommands 抽象面向客户端操作的Redis命令;提供String类型的key,value
BinaryJedis 实现BinaryJedisCommands接口,并将实际操作委托给Client
Jedis 实现JedisCommands接口,并将操作委托给Client
Commands 抽象Redis操作接口,提供String类型的key,value操作;被Jedis调用
Connection 抽象了Redis连接;包括host,port,pass,socket,inputstream,outputstream,protocol 完成与Redis服务器的通信
Protocol 抽象了Redis协议处理
BinaryClient 继承Connection类,封装了基于Byte[]的key,value操作
Client 继承BinaryClient同时实现了Commands,对上层提供基于String类型的操作


ShardedJedis实现分析
ShardedJedis是基于一致性哈希算法实现的分布式Redis集群客户端;ShardedJedis的设计分为以下几块:

对象池设计:Pool,ShardedJedisPool,ShardedJedisFactory
面向用户的操作封装:BinaryShardedJedis,BinaryShardedJedis
一致性哈希实现:Sharded
关于ShardedJedis设计,忽略了Jedis的设计细节,设计类图如下:



关于ShardedJedis类图设计,省略了对象池,以及Jedis设计的以下细节介绍:
类名 职责
Sharded
抽象了基于一致性哈希算法的划分设计,设计思路

基于hash算法划分redis服务器
保持每台Redis服务器的Jedis客户端
提供基于Key的划分方法;提供了ShardKeyTag实现
BinaryShardedJedis 同BinaryJedis类似,实现BinaryJedisCommands对外提供基于Byte[]的key,value操作
ShardedJedis 同Jedis类似,实现JedisCommands对外提供基于String的key,value操作


Sharded一致性哈希实现
shared一致性哈希采用以下方案:


Redis服务器节点划分:将每台服务器节点采用hash算法划分为160个虚拟节点(可以配置划分权重)
将划分虚拟节点采用TreeMap存储
对每个Redis服务器的物理连接采用LinkedHashMap存储
对Key or KeyTag 采用同样的hash算法,然后从TreeMap获取大于等于键hash值得节点,取最邻近节点存储;当key的hash值大于虚拟节点hash值得最大值时,存入第一个虚拟节点
sharded采用的hash算法:MD5 和 MurmurHash两种;默认采用64位的MurmurHash算法;有兴趣的可以研究下,MurmurHash是一种高效,低碰撞的hash算法;参考地址:
http://blog.csdn.net/yfkiss/article/details/7337382
https://sites.google.com/site/murmurhash/ 
分享到:
评论

相关推荐

    ShardedJedis如何实现redis的锁

    `ShardedJedis`是Jedis库的一个扩展,用于处理多Redis实例的分片操作,它可以提高对大量数据的并发访问效率。本文将详细介绍如何使用`ShardedJedis`实现Redis的锁机制,以及如何设置缓存的失效时间。 首先,我们...

    jedis jedis.jar

    Jedis是Java开发的一款高效、轻量级的Redis客户端,专为处理Redis数据库服务而设计。Redis是一款开源的、高性能的键值存储系统,常用于数据缓存、消息队列、分布式锁等场景。Jedis提供了丰富的API,使得开发者能够...

    jedis2.8 与 spring3.2 整合

    而Jedis是Java语言的一个客户端,用于与Redis服务器进行交互,提供了丰富的API来操作Redis的各种数据结构。 首先,我们要了解Redis 3.0.7的集群部署。在Redis 3.0.7版本中,引入了集群功能,允许用户将数据分布到多...

    jedis相关jar包

    Jedis是一个高效、轻量级的Java客户端,它使得Java开发者能够方便地与Redis进行交互,执行各种数据操作。 描述中提到了两个具体的jar包:“commons-pool2-2.3.jar”和“jedis-2.7.0.jar”。这两个jar包是Jedis运行...

    jedis-2.9.0.jar和commons-pool2-2.6.0.jar下载(jedis连接redis数据库)

    描述中的内容与标题相同,强调了这两个JAR文件的作用,即通过Jedis连接到Redis数据库。 **Jedis详解** Jedis是一个开源的Java Redis客户端,提供了丰富的Redis命令支持。它允许Java开发者方便地在应用程序中使用...

    Jedis2.1.0源码与Jar包

    5. **复制与Sentinel支持**:Jedis可以与Redis的复制和Sentinel哨兵系统配合,实现高可用性。 ### Jedis 2.1.0源码分析 Jedis的源码可以帮助我们深入了解其内部工作原理,例如: 1. **连接管理**:包括连接建立、...

    使用redisson替代jedis

    在Java开发领域,开发者可以选择多种客户端来与Redis进行交互,其中最常用的是Jedis和Redisson。本文将详细介绍如何使用Redisson来替代Jedis,并对两者之间的对应方法进行详细对比。 #### Jedis简介 Jedis是用Java...

    各种版本的redis+Jedis驱动包

    1. **Redis Windows 32位与64位安装包**:Redis原本是为Unix-like系统设计的,但为了满足Windows用户的需求,社区提供了兼容的Windows版本。32位和64位版本分别适用于不同的操作系统环境。32位版本适用于内存有限的...

    Jedis API中文使用文档.-比较详细

    Jedis API中文使用文档详解 Jedis 是 Redis 官方首选的 Java 客户端开发包,用于操作 Redis 数据库。下面是 Jedis API 的详细使用文档,适合新手和老程序员进行复习。 Jedis 的基本使用 Jedis 提供了多种方式来...

    jedis-2.9.0.jar

    jedis-2.9.0.jar jedis-2.9.0 jar 包,不包含源码,源码下载地址: http://download.csdn.net/download/tan3739/9993938 测试代码: 导入依赖包: commons-lang-2.5.jar commons-pool2-2.4.2.jar jedis-2.9.0 jar ...

    jedis依赖jar包

    1. **连接与关闭**:通过`Jedis jedis = new Jedis("localhost", 6379);`建立连接,完成后使用`jedis.close();`关闭连接。 2. **字符串操作**:`set(key, value)`设置键值对,`get(key)`获取键对应的值。 3. **哈希...

    jedis5.1.0.jar

    jedis5.1.0.jar

    jedis-2.4.2版本

    3. **API改进**:Jedis的API设计更加友好,使得代码更易读、易写。2.4.2版可能包含了一些新的API或对旧API的改进,以适应不断发展的Redis功能。 4. **错误处理**:提供了更完善的错误处理机制,当出现异常时,Jedis...

    jedis-jedis-2.6.2.tar.gz

    开发者可以通过阅读源码学习Jedis的设计思路,参考示例了解如何在实际项目中使用,或者直接将jar文件添加到项目依赖,开始编写与Redis交互的Java代码。 总的来说,Jedis 2.6.2是Java开发者与Redis交互的重要工具,...

    Jedis所需jar包

    在Java环境中与Redis进行交互,我们通常会使用Jedis这个客户端库。Jedis提供了丰富的API,能够帮助开发者轻松完成各种Redis操作,如设置和获取键值、执行事务、订阅/发布消息等。 Jedis的主要功能包括: 1. 基本...

    jedis源码 (学习jedis)

    Jedis是Java开发的一款高效的Redis客户端库,广泛用于与Redis服务器进行交互,提供丰富的API来操作Redis中的数据结构。在学习Jedis的过程中,了解其源码对于深入理解Redis操作的底层实现以及提升Java编程能力非常有...

    jedis-3.3.0.jar文件

    **Redis与Jedis** Redis,全称Remote Dictionary Server,是一款高性能的键值对存储系统,常用于数据库缓存和消息中间件。它支持丰富的数据结构,如字符串、哈希、列表、集合、有序集合等,这使得Redis在各种场景下...

    jedis调用redis源码Demo

    Redis设计与实现.pdf src: FirestJedisTest.java JedisClusterTest.java RedisClient.java RedisShardPoolTest.java import redis.clients.jedis.Jedis; import redis.clients.jedis.exceptions....

    jedis-jedis-2.7.2

    1. **连接管理**:Jedis通过`Jedis`或`Pool<Jedis>`类建立与Redis服务器的连接。`Pool`类允许实现连接池,提高性能和资源利用率,通过`JedisPoolConfig`配置连接池参数。 2. **基本操作**:Jedis提供了对字符串、...

    jedis安装包

    Jedis是Java开发的一款高效的Redis客户端库,专为处理Redis数据结构而设计。在本文中,我们将深入探讨Jedis的安装、配置、基本操作以及它在实际应用中的重要性。 一、Jedis简介 Jedis是由Xavier Lachier开发的Java...

Global site tag (gtag.js) - Google Analytics