- 浏览: 195885 次
- 性别:
- 来自: 杭州
博客专栏
-
Percolator与分布...
浏览量:5686
文章分类
最新评论
-
heglase:
好牛逼 竟然解决了我别的问题
使用jdk工具tools.jar引发的问题 -
wqcva:
在使用这个类的时候workerId应该怎么传
java时间有序id生成 -
沙漠绿树:
增加虚拟节点解决数据均衡的问题。我有个疑问:1.使用虚拟节点后 ...
一致性hash的实现 -
BucketLi:
wangjian95 写道tddl.....?不是
java唯一ID生成 -
wangjian95:
tddl.....?
java唯一ID生成
各位可以自己试验下哪种hash算法最快。这里收藏下,以后有用。
package net.rubyeye.xmemcached; import java.io.UnsupportedEncodingException; import java.security.MessageDigest; import java.security.NoSuchAlgorithmException; import java.util.zip.CRC32; import net.rubyeye.xmemcached.exception.MemcachedClientException; import net.rubyeye.xmemcached.utils.ByteUtils; /** * Known hashing algorithms for locating a server for a key. Note that all hash * algorithms return 64-bits of hash, but only the lower 32-bits are * significant. This allows a positive 32-bit number to be returned for all * cases. */ public enum HashAlgorithm { /** * Native hash (String.hashCode()). */ NATIVE_HASH, /** * CRC32_HASH as used by the perl API. This will be more consistent both * across multiple API users as well as java versions, but is mostly likely * significantly slower. */ CRC32_HASH, /** * FNV hashes are designed to be fast while maintaining a low collision * rate. The FNV speed allows one to quickly hash lots of data while * maintaining a reasonable collision rate. * * @see http://www.isthe.com/chongo/tech/comp/fnv/ * @see http://en.wikipedia.org/wiki/Fowler_Noll_Vo_hash */ FNV1_64_HASH, /** * Variation of FNV. */ FNV1A_64_HASH, /** * 32-bit FNV1. */ FNV1_32_HASH, /** * 32-bit FNV1a. */ FNV1A_32_HASH, /** * MD5-based hash algorithm used by ketama. */ KETAMA_HASH, /** * From mysql source */ MYSQL_HASH, ELF_HASH, RS_HASH, /** * From lua source,it is used for long key */ LUA_HASH, ELECTION_HASH, /** * The Jenkins One-at-a-time hash ,please see * http://www.burtleburtle.net/bob/hash/doobs.html */ ONE_AT_A_TIME; private static final long FNV_64_INIT = 0xcbf29ce484222325L; private static final long FNV_64_PRIME = 0x100000001b3L; private static final long FNV_32_INIT = 2166136261L; private static final long FNV_32_PRIME = 16777619; /** * Compute the hash for the given key. * * @return a positive integer hash */ public long hash(final String k) { long rv = 0; switch (this) { case NATIVE_HASH: rv = k.hashCode(); break; case CRC32_HASH: // return (crc32(shift) >> 16) & 0x7fff; CRC32 crc32 = new CRC32(); crc32.update(ByteUtils.getBytes(k)); rv = crc32.getValue() >> 16 & 0x7fff; break; case FNV1_64_HASH: { // Thanks to pierre@demartines.com for the pointer rv = FNV_64_INIT; int len = k.length(); for (int i = 0; i < len; i++) { rv *= FNV_64_PRIME; rv ^= k.charAt(i); } } break; case FNV1A_64_HASH: { rv = FNV_64_INIT; int len = k.length(); for (int i = 0; i < len; i++) { rv ^= k.charAt(i); rv *= FNV_64_PRIME; } } break; case FNV1_32_HASH: { rv = FNV_32_INIT; int len = k.length(); for (int i = 0; i < len; i++) { rv *= FNV_32_PRIME; rv ^= k.charAt(i); } } break; case FNV1A_32_HASH: { rv = FNV_32_INIT; int len = k.length(); for (int i = 0; i < len; i++) { rv ^= k.charAt(i); rv *= FNV_32_PRIME; } } break; case ELECTION_HASH: case KETAMA_HASH: byte[] bKey = computeMd5(k); rv = (long) (bKey[3] & 0xFF) << 24 | (long) (bKey[2] & 0xFF) << 16 | (long) (bKey[1] & 0xFF) << 8 | bKey[0] & 0xFF; break; case MYSQL_HASH: int nr2 = 4; for (int i = 0; i < k.length(); i++) { rv ^= ((rv & 63) + nr2) * k.charAt(i) + (rv << 8); nr2 += 3; } break; case ELF_HASH: long x = 0; for (int i = 0; i < k.length(); i++) { rv = (rv << 4) + k.charAt(i); if ((x = rv & 0xF0000000L) != 0) { rv ^= x >> 24; rv &= ~x; } } rv = rv & 0x7FFFFFFF; break; case RS_HASH: long b = 378551; long a = 63689; for (int i = 0; i < k.length(); i++) { rv = rv * a + k.charAt(i); a *= b; } rv = rv & 0x7FFFFFFF; break; case LUA_HASH: int step = (k.length() >> 5) + 1; rv = k.length(); for (int len = k.length(); len >= step; len -= step) { rv = rv ^ (rv << 5) + (rv >> 2) + k.charAt(len - 1); } case ONE_AT_A_TIME: try { int hash = 0; for (byte bt : k.getBytes("utf-8")) { hash += (bt & 0xFF); hash += (hash << 10); hash ^= (hash >>> 6); } hash += (hash << 3); hash ^= (hash >>> 11); hash += (hash << 15); return hash; } catch (UnsupportedEncodingException e) { throw new IllegalStateException("Hash function error", e); } default: assert false; } return rv & 0xffffffffL; /* Truncate to 32-bits */ } private static ThreadLocal<MessageDigest> md5Local = new ThreadLocal<MessageDigest>(); /** * Get the md5 of the given key. */ public static byte[] computeMd5(String k) { MessageDigest md5 = md5Local.get(); if (md5 == null) { try { md5 = MessageDigest.getInstance("MD5"); md5Local.set(md5); } catch (NoSuchAlgorithmException e) { throw new RuntimeException("MD5 not supported", e); } } md5.reset(); md5.update(ByteUtils.getBytes(k)); return md5.digest(); } // public static void main(String[] args) { // HashAlgorithm alg=HashAlgorithm.CRC32_HASH; // long h=0; // long start=System.currentTimeMillis(); // for(int i=0;i<100000;i++) // h=alg.hash("MYSQL_HASH"); // System.out.println(System.currentTimeMillis()-start); // } }
发表评论
-
Spring Validator 部分注解说明
2021-01-30 17:13 352@AssertFalse Boole ... -
Mac 安装 OpenJDK
2019-07-17 08:05 826现在 ORACLE 新版本 JDK 越发越快,新版本固然好,但 ... -
git fork 分支合并原分支
2019-06-27 10:35 11251. List the current configured ... -
Cobar内存快速检测tips
2017-11-07 17:20 426很长时间没有使用mat,技巧生疏,趁这次使用Cobar(htt ... -
ORACLE CDC增量同步初始化
2016-09-07 22:29 760// Step 1 Find the source tab ... -
一些文章
2015-09-04 14:38 0http://www.biaodianfu.com/herme ... -
java资源加载
2015-04-22 10:04 596tips下。 this.getClass().getReso ... -
使用jdk工具tools.jar引发的问题
2015-04-22 09:31 1727这里tips下这个问题 之前本地开发机使用jdk7进行开发和 ... -
eclipse for mac快捷键
2015-02-26 13:16 704Command + O:显示大纲 Command + D:删除 ... -
zookeeper client的一些操作
2014-11-07 12:30 7341.登陆 ./zkcli.sh -server 127.0.0 ... -
java获取类版本和检查重复代码
2014-10-13 21:59 1391public final class Version { ... -
java代码细节
2014-10-17 09:29 846看代码过程中一些细节记录,不断补充。质量可靠,开发高效的捷径在 ... -
java程序启动的一些设置
2014-09-19 11:14 01. 开启debug,suspend值设置成y会等待debug ... -
java_web开发tips
2014-07-21 09:44 01.这两天接手一个新的应用,打算在上面开发几个api,因为功能 ... -
信息安全基础
2014-07-21 09:46 743转自某微博,这边tips下,虽然很不完全,但是有一些思路 信 ... -
java 的一些排序方法(转)
2014-07-21 09:48 718一些java排序方法,记录下。 package com.ta ... -
Shift-And和Shift-Or ByteBuffer匹配器
2012-09-07 18:15 1519两个ByteBuffer的匹配算法java实现,原作者 庄大侠 ... -
一个简单的BufferPool
2012-08-31 10:15 958一个简单的buffer分配和收集代码,将一大段buffer分片 ... -
一个典型md5生成工具类
2012-08-23 09:27 1155import java.io.UnsupportedEnc ... -
Java程序员常用工具集(转)
2012-08-31 10:18 1030转自庄大侠(killme2008)的博客,我这边收藏下。 原 ...
相关推荐
在Java中实现GeoHash,你需要以下几个关键步骤: 1. **坐标标准化**:首先,需要将经纬度坐标转换到-180到180度的经度范围和-90到90度的纬度范围内。这是因为GeoHash算法是基于这个标准化的坐标系统的。 2. **坐标...
本篇文章将详细讨论几种常见的哈希算法及其在Java中的实现。 1. **MD5(Message-Digest Algorithm 5)** MD5是一种广泛使用的哈希函数,产生128位(16字节)的哈希值,通常表示为32个十六进制数字。尽管MD5在安全...
在Java中实现GeoHash,主要包含以下几个步骤: 1. **坐标标准化**:首先,需要将输入的经纬度坐标归一化到上述的全球坐标范围内。这是因为GeoHash算法依赖于这个标准化的坐标系。 2. **经纬度分割**:对经度和纬度...
### Hash算法相关介绍 在计算机科学领域,哈希(Hash)是一种将任意长度的数据映射为固定长度数据的技术。哈希算法广泛应用于多种场景中,包括但不限于数据完整性验证、密码存储、快速查找等。本文主要介绍了几种...
### Java常用几种加密算法 在Java开发中,数据的安全性是非常重要的一个方面,尤其是在网络通信、数据存储等场景下,合理的使用加密算法可以有效保护数据安全。本文将详细介绍几种常用的Java加密算法及其应用实例,...
在Java中,实现Hash算法有多种方法,这里我们将探讨几种常见的Hash算法及其Java实现。 1. **加法Hash**: 加法Hash算法是最简单的形式,通过将字符串中的每个字符的ASCII值累加,然后取模一个质数得到哈希值。这种...
本文档介绍了几种常见的Hash算法及其应用场景。其中特别推荐了FNV1算法,该算法不仅计算效率高,而且具有良好的散列质量,非常适合在网络通信等场景中使用。对于不同的应用场景,可以根据实际需求选择合适的Hash算法...
本文将深入探讨Java中的一种常见散列算法——SHA-1(Secure Hash Algorithm 1),并通过一个具体的Java类`SHA1`来展示其实现细节。 #### SHA-1简介 SHA-1是美国国家安全局(NSA)设计的一种安全散列算法,被广泛...
本文将深入探讨Java中常见的几种加密解密算法:SHA算法、HMAC算法、DES算法、PBE算法、AES算法、RSA算法、数字签名以及D-H算法。 1. SHA(Secure Hash Algorithm)算法: SHA是一种散列函数,它能将任意长度的输入...
对于Java实现一致性Hash算法,有几种可能的方法: 1. **排序+List**:首先,将所有服务器节点的哈希值放入一个数组,然后使用排序算法(如归并排序、快速排序等)对数组进行排序,再将排序后的结果放入List中。之后...
这个过程涉及到几个关键步骤,包括创建`MessageDigest`实例、更新输入数据和获取哈希值。 首先,我们需要导入必要的Java库: ```java import java.security.MessageDigest; import java.security....
Java加密算法在信息安全领域扮演着至关重要的角色,其中SHA(Secure Hash Algorithm)家族是广泛应用的一类散列函数。本文将详细解析SHA-1、SHA-224、SHA-256、SHA-384以及SHA-512这五种算法,并探讨它们在Java环境...
这个名为"Java加密算法学习笔记的源码包"的压缩文件包含了关于Java中几种主要加密算法的实践代码和相关库,这对于理解和应用这些技术非常有帮助。 1. **Base64编码**: Base64是一种将二进制数据转化为可打印字符的...
MD5的使用步骤通常包括以下几个关键点: 1. **导入相关库**:在Java中,MD5加密需要用到`java.security.MessageDigest`类。首先需要导入这个库: ```java import java.security.MessageDigest; import java....
以下将详细介绍几种常见的Java加密算法及其工作原理。 1. **对称加密算法** 对称加密算法使用相同的密钥进行加密和解密,速度快,效率高,适合大量数据的处理。Java中内置了DES(Data Encryption Standard)、3DES...
5. **Java实现细节**:这个Java实现可能会包含以下几个关键部分: - 虚拟节点的创建和映射。 - 自定义哈希函数,用于计算键的哈希值。 - 哈希环的数据结构实现,这可能是一个伪循环链表或者基于索引的数组模拟...
本文详细介绍了JAVA平台上的几种加密算法,包括单钥密码体制中的DES、3DES以及AES等算法,同时讲解了消息摘要算法如MD5、SHA-1等,并提供了相应的JAVA实现示例。此外,还介绍了Diffie-Hellman密钥交换协议的工作原理...
Java的主要特点和优势包括以下几个方面: 跨平台性(Write Once, Run Anywhere): Java的代码可以在不同的平台上运行,只需编写一次代码,就可以在任何支持Java的设备上执行。这得益于Java虚拟机(JVM),它充当了...
在这个Java实现的压缩包中,`TypicalCode.java`很可能是包含一个或多个以上算法的实例代码。通过阅读和理解这些代码,我们可以学习如何用Java有效地编写和实现算法,这对于提升编程技能和解决实际问题非常有帮助。...
这些算法分为对称加密、非对称加密、数字签名以及消息摘要等几大类。以下将详细阐述这些概念及其在Java中的实现。 一、对称加密 对称加密是最常见的加密方式,其特点是加密和解密使用同一个密钥。在Java中,常用的...