KV存储的对比

摘要： 最近对各种KV存储进行一个比较，从存储引擎到存储引擎的类型，到单机版的kvstore，再到分布式kvstore集群。

最近对各种KV存储进行一个比较，从存储引擎到存储引擎的类型，到单机版的kvstore，再到分布式kvstore集群。

存储引擎的类型

类型 全称

btree
LSH	Log-Structured Hash Table
LSM	Log-Structured Merge Tree
FractalTree	分型树

存储引擎

类型 名称 语言 备注 应用/dbengine排名 出品

berkeleyDB	BTREE, HASH, QUEUE, RECNO	C,Java		No.9	oracle
Wiredtiger	btree, LSM	C		mongodb，No.24	WiredTiger/mongodb
Tokyo Cabinet /Kyoto Cabinet	b+tree,hash table		nmdb,Kyoto Tycoon	NO.27/No.36	FAL Labs
LMDB	btree	C		OpenLDAP	symas OpenLDAP
BoltDB	btree	Go	LMDB的go版本
leveldb	LSM	c++		No.15	google
goleveldb	LSM	Go	leveldb的go版本		个人
levigo	LSM	Go	Go wrapper for LevelDB		个人
rocksdb	LSM	c++,java		No.18	facebook
gorocksdb	LSM	Go	Go wrapper for RocksDB		个人
mongo-rocks	LSM	C++	RocksDB Storage Engine Module for MongoDB		mongo partner
bitcast	LSH	C	beansdb,riak	basho
PerconaFT	FractalTree	C++	Mysql存储引擎之TokuDB	percona

单机kvstore

类型 名称 存储引擎 语言 出品 主从复制 应用/dbengine排名/github star

kv对	nmdb	qdbm, berkeley db, tokyo cabinet,tdb	C	个人Alberto Bertogli
kv对	memcachedb	Berkeley DB	C	新浪	yes
kv对	Kyoto Tycoon	Kyoto Cabinet	C/C++	FAL Labs
结构化kv(redis兼容）	ssdb	leveddb	C/C++	个人ideawu	yes	4k+
结构化kv(redis兼容）	ssdb-rocks	rocksdb	C/C++	个人ideawu		92
结构化kv(redis兼容）	ardb	LevelDB, RocksDB, LMDB, WiredTiger	C++	个人yinqiwen	yes	800+
结构化kv(redis兼容）	(reborndb)qdb	Rocksdb and LevelDB	Go	个人ngaut		200+
结构化kv(redis兼容）	Pika	Rocksdb	C	Qihoo360	yes	900+
结构化kv(redis兼容）	LedisDB	LevelDB, goleveldb, LMDB, RocksDB, BoltDB or Memory	Go	个人SiddonTang		2K+

单机kvstore的分布式代理

名称 语言 存储 出品 应用/githubstar 分片 弹性 备注

Reborndb	Go	qdb	个人ngaut	200+	yes	yes
Netflix Dynomite	C	redis,memcached	Netflix	1.9K+			Dynamo
Codis	Go	codis-server(定制redis)	社区CodisLabs	5K+
Twenproxy	C	redis,memcached	twitter	6K+

分布式KVstore

类型 名称 语言 出品 dbengine排名/githubstar 存储引擎 社区活跃 特性 备注

kv型	riak	erlang	basho	No.3/2K+	bitcask			Dynamo
kv型	beansdb	C	douban	600+	bitcask模型	近2年没有更新，没有文档		Dynamo
kv型	project Voldmort	Java	LinkedIn	No.29/1.8K+	BDB-JE,MySQL,Read-Only
kv型	Scalris	erlang	Zuse Institute Berlin	No.35/88
kv型	aeospike		aespike	No.7
kv型	Tair	C/C++	alibaba	400+	自研的fdb	停止更新，没有文档         原文链接