`

各种字符串Hash函数比较

阅读更多

Java自带的字符串hash函数:

    public int hashCode() {
	int h = hash;
	if (h == 0) {
	    int off = offset;
	    char val[] = value;
	    int len = count;

            for (int i = 0; i < len; i++) {
                h = 31*h + val[off++];
            }
            hash = h;
        }
        return h;
    }

 在对一个79w的字符串进行Hash计算时,发现有40多条记录碰撞,修改了一下,让返回是long,发现没有碰撞了。

 

	  public static long hash(String s){
	  		long seed = 131; // 31 131 1313 13131 131313 etc..  BKDRHash
	    	long hash=0;
	        for (int i = 0; i< s.length(); i++){
	        	hash = (hash * seed) + s.charAt(i); 
	          }
	    	return hash;
	    }

 

以下内容为转载:

    常用的字符串Hash函数还有ELFHash,APHash等等,都是十分简单有效的方法。这些函数使用位运算使得每一个字符都对最后的函数值产生影响。另外还有以MD5和SHA1为代表的杂凑函数,这些函数几乎不可能找到碰撞。

常用字符串哈希函数有BKDRHash,APHash,DJBHash,JSHash,RSHash,SDBMHash,PJWHash,ELFHash等等。对于以上几种哈希函数,我对其进行了一个小小的评测。

 

Hash函数 数据1 数据2 数据3 数据4 数据1得分 数据2得分 数据3得分 数据4得分 平均分
BKDRHash 2 0 4774 481 96.55 100 90.95 82.05 92.64
APHash 2 3 4754 493 96.55 88.46 100 51.28 86.28
DJBHash 2 2 4975 474 96.55 92.31 0 100 83.43
JSHash 1 4 4761 506 100 84.62 96.83 17.95 81.94
RSHash 1 0 4861 505 100 100 51.58 20.51 75.96
SDBMHash 3 2 4849 504 93.1 92.31 57.01 23.08 72.41
PJWHash 30 26 4878 513 0 0 43.89 0 21.95
ELFHash 30 26 4878 513 0 0 43.89 0 21.95

其中数据1为100000个字母和数字组成的随机串哈希冲突个数。

数据2为100000个有意义的英文句子哈希冲突个数。

数据3为数据1的哈希值与1000003(大素数)求模后存储到线性表中冲突的个数。

数据4为数据1的哈希值与10000019(更大素数)求模后存储到线性表中冲突的个数。

经过比较,得出以上平均得分。平均数为平方平均数。可以发现,BKDRHash无论是在实际效果还是编码实现中,效果都是最突出的。APHash也是较为优秀的算法。DJBHash,JSHash,RSHash与SDBMHash各有千秋。PJWHash与ELFHash效果最差,但得分相似,其算法本质是相似的。

在信息修竞赛中,要本着易于编码调试的原则,个人认为BKDRHash是最适合记忆和使用的。

 

 

附:各种哈希函数的C语言程序代码
unsigned int SDBMHash(char *str)


{
unsigned int hash = 0;
 
while (*str)
{
// equivalent to: hash = 65599*hash + (*str++);
hash = (*str++) + (hash << 6) + (hash << 16) - hash;
}
 
return (hash & 0x7FFFFFFF);
}
 
// RS Hash 
unsigned int RSHash(char *str)
{
unsigned int b = 378551;
unsigned int a = 63689;
unsigned int hash = 0;
 
while (*str)
{
hash = hash * a + (*str++);
a *= b;
}
 
return (hash & 0x7FFFFFFF);
}
 
// JS Hash 
unsigned int JSHash(char *str)
{
unsigned int hash = 1315423911;
 
while (*str)
{
hash ^= ((hash << 5) + (*str++) + (hash >> 2));
}
 
return (hash & 0x7FFFFFFF);
}
 
// P. J. Weinberger Hash 
unsigned int PJWHash(char *str)
{
unsigned int BitsInUnignedInt = (unsigned int)(sizeof(unsigned int) * 8);
unsigned int ThreeQuarters = (unsigned int)((BitsInUnignedInt  * 3) / 4);
unsigned int OneEighth = (unsigned int)(BitsInUnignedInt / 8);
unsigned int HighBits = (unsigned int)(0xFFFFFFFF) << (BitsInUnignedInt 

                                               - OneEighth);
	unsigned int hash	= 0;
	unsigned int test	= 0;
 
	while (*str)
	{
		hash = (hash << OneEighth) + (*str++);
		if ((test = hash & HighBits) != 0)
		{
			hash = ((hash ^ (test >> ThreeQuarters)) & (~HighBits));
		}
	}
 
	return (hash & 0x7FFFFFFF);
}
 
// ELF Hash 
unsigned int ELFHash(char *str)
{
	unsigned int hash = 0;
	unsigned int x	= 0;
 
	while (*str)
	{
		hash = (hash << 4) + (*str++);
		if ((x = hash & 0xF0000000L) != 0)
		{
			hash ^= (x >> 24);
			hash &= ~x;
		}
	}
 
	return (hash & 0x7FFFFFFF);
}
 
// BKDR Hash 
unsigned int BKDRHash(char *str)
{
	unsigned int seed = 131; // 31 131 1313 13131 131313 etc..
	unsigned int hash = 0;
 
	while (*str)
	{
		hash = hash * seed + (*str++);
	}
 
	return (hash & 0x7FFFFFFF);
}
 
// DJB Hash 
unsigned int DJBHash(char *str)
{
	unsigned int hash = 5381;
 
	while (*str)
	{
		hash += (hash << 5) + (*str++);
	}
 
	return (hash & 0x7FFFFFFF);
}
 
// AP Hash 
unsigned int APHash(char *str)
{
	unsigned int hash = 0;
	int i;
 
	for (i=0; *str; i++)
	{
		if ((i & 1) == 0)
		{
			hash ^= ((hash << 7) ^ (*str++) ^ (hash >> 3));
		}
		else
		{
			hash ^= (~((hash << 11) ^ (*str++) ^ (hash >> 5)));
		}
	}
 
	return (hash & 0x7FFFFFFF);
}

 

 

分享到:
评论

相关推荐

    各种字符串Hash函数比较1

    标题提到的"各种字符串Hash函数比较1"是一个关于评估不同字符串哈希函数性能的文章。描述中提到了一些常见的哈希函数,如BKDRHash、APHash、DJBHash、JSHash、RSHash、SDBMHash、PJWHash和ELFHash,并且给出了这些...

    各种字符串Hash函数比较[借鉴].pdf

    【字符串Hash函数】是计算机科学中用于快速查找和存储字符串的一种高效算法。它将字符串转换为一个固定长度的数值(通常称为哈希值),这个数值可以作为字符串的唯一标识。在对比不同字符串Hash函数时,主要关注以下...

    hash字符串函数总结

    本文将对几种常见的字符串哈希函数进行总结。 1. **SDBM Hash Function**: SDBM Hash(Simple Database Manipulation)是由Peter J. Weinberger设计的一种快速哈希函数。它的核心思想是每次迭代时将当前字符与上...

    用C语言实现常用的字符串哈希函数

    用C语言实现常用的字符串哈希函数,比如RSHash、JSHash、PJWHash、FNVHash等

    经典字符串hash函数

    Hash)是一种简单的哈希函数,通常用于快速比较字符串的前几个字符是否相同。计算方法是对每个字符进行异或操作,然后将结果异或起来。由于其简单性,AP哈希在某些特定场景下有一定的应用。 以上这些哈希函数各有...

    字符串哈希函数设计

    字符串哈希函数是一种在计算机科学中用于快速查找和比较字符串的有效方法。它的核心思想是将一个字符串转换为一个整数值,这个数值可以作为字符串的一种紧凑表示,便于存储、比较和查找。在本实验中,我们将关注如何...

    字符串hash算法比较

    它们在处理数据库键时特别有用,因为它们可以快速地比较和查找记录,但可能在处理特定字符串时产生较多的冲突。 哈希算法的选择应根据具体应用的需求来决定。对于需要快速查找和低冲突率的场景,如数据库索引或缓存...

    字符串统计函数,统计不同字符个数和每个字符出现的次数

    字符串统计函数就是用于处理这类任务的重要工具。本篇将详细探讨如何实现一个统计字符串中不同字符个数以及每个字符出现次数的函数,我们将以C++语言为例进行讲解。 首先,我们需要了解基本的字符串处理函数和数据...

    自己实现的字符串hash类

    5. **成员函数**:`HashMapString`类可能包括`insert`(插入字符串)、`find`(查找字符串)、`remove`(删除字符串)等操作,以及可能的`resize`(调整哈希表大小)和`hash_function`(查看或修改哈希函数)等辅助...

    略谈Hash

    文件名称“各种字符串Hash函数比较.docx”表明文档将深入对比多种用于字符串的哈希函数,可能包括但不限于MD5(Message-Digest Algorithm 5)、SHA-1(Secure Hash Algorithm 1)、SHA-256以及更现代的BLAKE2等。...

    获取一个字符串的散列hash

    为了实现一个稳定的字符串散列函数,我们可以采用MD5(Message-Digest Algorithm 5)或SHA(Secure Hash Algorithm)系列算法。然而,JavaScript原生并不支持这些算法,因此通常需要引入第三方库,比如`crypto-js`...

    字符串hash的研究

    当我们阅读《关于Hash的研究.doc》这篇文档时,可能会了解到更多关于字符串hash的优化技巧和实践经验,例如使用开放寻址法或链地址法处理哈希冲突,以及如何根据具体场景选择合适的哈希函数。此外,文档可能还会涉及...

    字符串Hash

    字符串Hash函数把一个任意长度的字符串映射成一个非负整数,并且其冲突概率几乎为 000。 取一固定值 PPP,把字符串看作 PPP 进制数,并分配一个大于 000 的数值,代表每种字符。一般来说,我们分配的数值都远小于P。...

    数据结构(字符串匹配,hash,二叉树)训练

    哈希函数将字符串转化为固定大小的数值,使得比较变得快速。在这个实验中,你需要设计一个哈希函数,确保不同的字符串能生成不同的哈希值,同时减少哈希冲突。算法的伪代码展示了如何使用哈希值进行匹配:首先计算...

    字符串哈希成数字的C实现的代码(含测试)

    将字符串哈希成数字的几种经典的方法:其中的一部分 #ifndef INCLUDE_GENERALHASHFUNCTION_C_H #define INCLUDE_GENERALHASHFUNCTION_C_H #include typedef unsigned int (*hash_function)(char*, unsigned int...

    字符串的哈希Key算法

    哈希算法的基本思想是,输入一个字符串,通过一定的计算规则(哈希函数),将其转换为一个固定长度的数字。这个过程通常称为“散列”或“哈希”。理想的哈希函数应具备以下特性: 1. **均匀性**:不同的字符串映射...

    计算文件或者字符串HASH,SHA1,SHA256,CRC32,MD5值

    标题中的“计算文件或者字符串HASH,SHA1,SHA256,CRC32,MD5值”是指在信息技术领域中,用于验证数据完整性的几种常见的散列算法。这些算法能够将任意长度的数据转换为固定长度的唯一标识,常用于文件校验、数据安全...

    字符串hash以及大问题PPT学习教案.pptx

    哈希函数是这种转换的核心,其目的是将字符串映射到一个整数空间,以便于快速查找和比较。 在描述中提到的哈希函数是一个简单的滚动哈希计算方法,它使用了以下公式: `hash[i] = (hash[i-1] * p + idx(s[i])) % ...

Global site tag (gtag.js) - Google Analytics