全局序列号介绍
在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式。
本地文件方式
原理:此方式MyCAT将sequence配置到文件中,当使用到sequence中的配置后,MyCAT会更下classpath中的sequence_conf.properties文件中sequence当前的值。
配置方式:
在sequence_conf.properties文件中做如下配置:
GLOBAL_SEQ.HISIDS=
GLOBAL_SEQ.MINID=1001
GLOBAL_SEQ.MAXID=1000000000
GLOBAL_SEQ.CURID=1000
其中HISIDS表示使用过的历史分段(一般无特殊需要可不配置),MINID表示最小ID值,MAXID表示最大ID值,CURID表示当前ID值。
server.xml中配置:
1
|
< property name = "sequnceHandlerType" >0</ property >
|
注:sequnceHandlerType需要配置为0,表示使用本地文件方式。 1表示数据库方式
使用示例:
1
|
insert into table1(id, name ) values ( next value for MYCATSEQ_GLOBAL,‘test’);
|
缺点:当MyCAT重新发布后,配置文件中的sequence会恢复到初始值。
优点:本地加载,读取速度较快。
数据库方式
原理:在数据库中建立一张表,存放sequence名称(name),sequence当前值(current_value),步长(increment int类型每次读取多少个sequence,假设为K)等信息;
Sequence获取步骤:
1).当初次使用该sequence时,根据传入的sequence名称,从数据库这张表中读取current_value,和increment到MyCat中,并将数据库中的current_value设置为原current_value值+increment值;
2).MyCat将读取到current_value+increment作为本次要使用的sequence值,下次使用时,自动加1,当使用increment次后,执行步骤1)相同的操作.
MyCat负责维护这张表,用到哪些sequence,只需要在这张表中插入一条记录即可。若某次读取的sequence没有用完,系统就停掉了,则这次读取的sequence剩余值不会再使用。
配置方式:
server.xml配置:
1
|
< property name = "sequnceHandlerType" >1</ property >
|
注:sequnceHandlerType 需要配置为1,表示使用数据库方式生成sequence.
数据库配置:
1) 创建MYCAT_SEQUENCE表
– 创建存放sequence的表
DROP TABLE IF EXISTS MYCAT_SEQUENCE;
– name sequence名称
– current_value 当前value
– increment 增长步长! 可理解为mycat在数据库中一次读取多少个sequence. 当这些用完后, 下次再从数据库中读取.
1
2
3
4
5
6
|
CREATE TABLE MYCAT_SEQUENCE (
NAME VARCHAR (50) NOT NULL ,
current_value INT NOT NULL ,
increment INT NOT NULL DEFAULT 100,
PRIMARY KEY ( NAME )
) ENGINE = INNODB; |
– 插入一条sequence
1
|
INSERT INTO MYCAT_SEQUENCE( name ,current_value,increment) VALUES (‘ GLOBAL ’, 100000, 100);
|
2) 创建相关function
– 获取当前sequence的值 (返回当前值,增量)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
|
DROP FUNCTION IF EXISTS `mycat_seq_currval`;
DELIMITER ;; CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_currval`(seq_name VARCHAR (50))
RETURNS varchar (64) CHARSET latin1
DETERMINISTIC
BEGIN DECLARE retval VARCHAR (64);
SET retval= "-999999999,null" ;
SELECT concat( CAST (current_value AS CHAR ), "," , CAST (increment AS CHAR ) ) INTO retval
FROM MYCAT_SEQUENCE WHERE name = seq_name;
RETURN retval ;
END ;; DELIMITER ; |
– 设置sequence值
1
2
3
4
5
6
7
8
9
10
11
12
13
|
DROP FUNCTION IF EXISTS `mycat_seq_nextval`;
DELIMITER ;; CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_nextval`(seq_name VARCHAR (50)) RETURNS varchar (64)
CHARSET latin1
DETERMINISTIC
BEGIN UPDATE MYCAT_SEQUENCE
SET current_value = current_value + increment
WHERE name = seq_name;
RETURN mycat_seq_currval(seq_name);
END ;; DELIMITER ; |
– 获取下一个sequence值
1
2
3
4
5
6
7
8
9
10
11
12
13
|
DROP FUNCTION IF EXISTS `mycat_seq_setval`;
DELIMITER ;; CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_setval`(seq_name VARCHAR (50), value INTEGER )
RETURNS varchar (64) CHARSET latin1
DETERMINISTIC
BEGIN UPDATE MYCAT_SEQUENCE
SET current_value = value
WHERE name = seq_name;
RETURN mycat_seq_currval(seq_name);
END ;; DELIMITER ; |
3) sequence_db_conf.properties相关配置,指定sequence相关配置在哪个节点上:
例如:
USER_SEQ=test_dn1
注意:MYCAT_SEQUENCE表和以上的3个function,需要放在同一个节点上。function请直接在具体节点的数据库上执行,如果执行的时候报:
you might want to use the less safe log_bin_trust_function_creators variable
需要对数据库做如下设置:
windows下my.ini[mysqld]加上log_bin_trust_function_creators=1
linux下/etc/my.cnf下my.ini[mysqld]加上log_bin_trust_function_creators=1
修改完后,即可在mysql数据库中执行上面的函数.
使用示例:
1
|
insert into table1(id, name ) values ( next value for MYCATSEQ_GLOBAL,‘test’);
|
本文摘自:《Mycat权威指南》
相关推荐
标题 "mycat全局序列号" 指涉的是在分布式数据库系统Mycat中实现全局唯一序列号(Global Sequence Number, GSN)的功能。Mycat是一个开源的分布式数据库中间件,它允许开发者将多个数据库集群整合为一个逻辑库,以...
总结来说,Mycat的全局序列号功能通过两种方式——本地文件和数据库,提供了在分库分表场景下生成全局唯一主键的解决方案。本地文件方式简单易用,适用于对性能要求不高的场景,而数据库方式则在一致性上有更好的...
5. Mycat的分片JOIN和全局序列号章节详细讲解了Mycat如何处理分片表的JOIN操作以及如何管理全局序列号,这对于确保数据一致性和避免冲突至关重要。 6. 常见问题与解决方案章节列举了Mycat使用者可能遇到的问题以及...
Mycat核心概念包括数据库中间件、逻辑库、逻辑表、分片节点、节点主机、分片规则、全局序列号和多租户等。理解这些基本概念有助于深入学习Mycat的各种功能。 - 数据库中间件:指在应用程序和数据库之间提供额外服务...
这节可能会介绍Mycat全局表、ER分片表、多对多关联、常用分片规则以及权限控制和多租户支持等高级概念。 ### 第11章 常见问题与解决方案 本章集中解答了Mycat用户可能遇到的问题,并提供了相应的解决方案。 ### 第...
3. 数据一致性:Mycat通过全局序列号(Global Sequence ID, GSID)确保跨库事务的一致性。每个事务都会被分配一个唯一的GSID,保证在分布式环境中的事务正确执行。 4. SQL解析与路由:Mycat接收到SQL请求后,首先...
“全局序列号”章节则对Mycat如何生成和使用全局唯一的序列号进行了介绍,这在分布式数据库场景下是保证数据唯一性的关键。 在“Mycat分片规则”章节中,会解释分片规则的具体作用,并介绍如何设置和优化这些规则。...
全局序列号是Mycat为了确保跨多个分片节点的数据唯一性而设置的一种机制,本节将详细介绍各种实现方式。 ##### 8.1 全局序列号介绍 全局序列号的定义及其在Mycat中的重要性。 ##### 8.2 本地文件方式 介绍了如何...
同时,Mycat支持全局序列号(sequence),这是一个保证数据有序增长的机制,包括本地文件方式、数据库方式和本地时间戳方式等实现方法。全局序列号对于分布式系统中保证主键的唯一性至关重要。 读写分离是数据库...
4. **rule.xml**:定义分片规则,包括分片策略(如范围分片、哈希分片等)和全局序列号生成器。 5. **sequence配置**:如果使用了全局序列号,需配置sequence.xml来管理序列号生成。 **五、Mycat高级特性** 1. **...
Mycat全局表操作: 在Mycat中,全局表操作通常是为了处理跨节点的数据一致性问题。使用全局表时,需要在插入数据时指定具体的分片节点,如"Mycatorders@host1orders@host2orders@host3",这样操作才会针对所有的分片...
4.1 **全局序列号**:MyCat 可以生成全局唯一的序列号,确保在分布式环境中数据的唯一性。 4.2 **读写分离策略**:支持自定义读写分离策略,例如优先读取从库,当从库不可用时自动切换到主库。 4.3 **安全控制**:...
5. **数据一致性**:通过全局序列号(GID)保证分布式环境下的数据一致性。 ### 结论 Mycat作为分布式数据库中间件,为解决传统数据库的局限性提供了有效方案。通过合理的安装、配置和使用,可以显著提升系统的可...
3. **数据一致性**:Mycat通过全局序列号(GID)确保分布式环境中的数据一致性,避免数据冲突。 4. **负载均衡**:根据预设策略,Mycat自动将请求分配到不同的数据库节点,平衡负载。 5. **高可用性**:通过监控...
2. 全局序列号:Mycat提供全局自增ID功能,确保在分布式环境下的唯一性。这在分片场景下尤其重要,避免了跨节点的自增ID冲突。 3. 读写分离:Mycat支持主从读写分离,读请求可以自动路由到从库,减轻主库压力,提高...
在MyCat的体系结构中,有几个核心的概念,如数据库中间件、逻辑库(schema)、逻辑表(table)、分片节点(dataNode)、节点主机(dataHost)、分片规则(rule)、全局序列号(sequence)和多租户等。这些概念是理解和使用MyCat...
4. **数据一致性**:通过其特有的Schema设计,Mycat可以实现全局序列号(Global Sequence Number,GSN),避免跨表插入时的主键冲突,保证数据的一致性。 5. **高可用性**:Mycat支持主备切换,当主节点故障时,...