`
冷静
  • 浏览: 146877 次
  • 性别: Icon_minigender_1
  • 来自: 佛山
社区版块
存档分类
最新评论

Mycat 设置全局序列号

 
阅读更多

全局序列号介绍

在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式。

 

本地文件方式

原理:此方式MyCAT将sequence配置到文件中,当使用到sequence中的配置后,MyCAT会更下classpath中的sequence_conf.properties文件中sequence当前的值。

配置方式:

在sequence_conf.properties文件中做如下配置:

GLOBAL_SEQ.HISIDS=

GLOBAL_SEQ.MINID=1001

GLOBAL_SEQ.MAXID=1000000000

GLOBAL_SEQ.CURID=1000

其中HISIDS表示使用过的历史分段(一般无特殊需要可不配置),MINID表示最小ID值,MAXID表示最大ID值,CURID表示当前ID值。

server.xml中配置:

1
<property name="sequnceHandlerType">0</property>

注:sequnceHandlerType需要配置为0,表示使用本地文件方式。 1表示数据库方式

使用示例:

1
insert into table1(id,namevalues(next value for MYCATSEQ_GLOBAL,‘test’);

缺点:当MyCAT重新发布后,配置文件中的sequence会恢复到初始值。

优点:本地加载,读取速度较快。

 

数据库方式

原理:在数据库中建立一张表,存放sequence名称(name),sequence当前值(current_value),步长(increment int类型每次读取多少个sequence,假设为K)等信息;

Sequence获取步骤:

1).当初次使用该sequence时,根据传入的sequence名称,从数据库这张表中读取current_value,和increment到MyCat中,并将数据库中的current_value设置为原current_value值+increment值;

2).MyCat将读取到current_value+increment作为本次要使用的sequence值,下次使用时,自动加1,当使用increment次后,执行步骤1)相同的操作.

MyCat负责维护这张表,用到哪些sequence,只需要在这张表中插入一条记录即可。若某次读取的sequence没有用完,系统就停掉了,则这次读取的sequence剩余值不会再使用。

配置方式:

server.xml配置:

1
<property name="sequnceHandlerType">1</property>

注:sequnceHandlerType 需要配置为1,表示使用数据库方式生成sequence.

数据库配置:

1) 创建MYCAT_SEQUENCE表

– 创建存放sequence的表

DROP TABLE IF EXISTS MYCAT_SEQUENCE;

– name sequence名称

– current_value 当前value

– increment 增长步长! 可理解为mycat在数据库中一次读取多少个sequence. 当这些用完后, 下次再从数据库中读取.

1
2
3
4
5
6
CREATE TABLE MYCAT_SEQUENCE (
NAME VARCHAR (50) NOT NULL,
current_value INT NOT NULL,
increment INT NOT NULL DEFAULT 100,
PRIMARY KEY (NAME)
) ENGINE = INNODB;

– 插入一条sequence

1
INSERT INTO MYCAT_SEQUENCE(name,current_value,increment) VALUES (‘GLOBAL’, 100000, 100);

2) 创建相关function

 

– 获取当前sequence的值 (返回当前值,增量)

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
DROP FUNCTION IF EXISTS `mycat_seq_currval`;
DELIMITER ;;
CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_currval`(seq_name VARCHAR(50)) 
RETURNS varchar(64) CHARSET latin1
    DETERMINISTIC
BEGIN 
        DECLARE retval VARCHAR(64);
        SET retval="-999999999,null";  
        SELECT concat(CAST(current_value AS CHAR),",",CAST(increment AS CHAR) ) INTO retval 
          FROM MYCAT_SEQUENCE  WHERE name = seq_name;  
        RETURN retval ; 
END
;;
DELIMITER ;

 

– 设置sequence值

1
2
3
4
5
6
7
8
9
10
11
12
13
DROP FUNCTION IF EXISTS `mycat_seq_nextval`;
DELIMITER ;;
CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_nextval`(seq_name VARCHAR(50)) RETURNS varchar(64)
 CHARSET latin1
    DETERMINISTIC
BEGIN 
         UPDATE MYCAT_SEQUENCE  
                 SET current_value = current_value + increment 
                  WHERE name = seq_name;  
         RETURN mycat_seq_currval(seq_name);  
END
;;
DELIMITER ;

– 获取下一个sequence值

 

1
2
3
4
5
6
7
8
9
10
11
12
13
DROP FUNCTION IF EXISTS `mycat_seq_setval`;
DELIMITER ;;
CREATE DEFINER=`root`@`%` FUNCTION `mycat_seq_setval`(seq_name VARCHAR(50), value INTEGER
RETURNS varchar(64) CHARSET latin1
    DETERMINISTIC
BEGIN 
         UPDATE MYCAT_SEQUENCE  
                   SET current_value = value  
                   WHERE name = seq_name;  
         RETURN mycat_seq_currval(seq_name);  
END
;;
DELIMITER ;

3) sequence_db_conf.properties相关配置,指定sequence相关配置在哪个节点上:

例如:

USER_SEQ=test_dn1

注意:MYCAT_SEQUENCE表和以上的3个function,需要放在同一个节点上。function请直接在具体节点的数据库上执行,如果执行的时候报:

you might want to use the less safe log_bin_trust_function_creators variable

需要对数据库做如下设置:

windows下my.ini[mysqld]加上log_bin_trust_function_creators=1

linux下/etc/my.cnf下my.ini[mysqld]加上log_bin_trust_function_creators=1

修改完后,即可在mysql数据库中执行上面的函数.

使用示例:

1
insert into table1(id,namevalues(next value for MYCATSEQ_GLOBAL,‘test’);

 

本文摘自:《Mycat权威指南》

分享到:
评论

相关推荐

    mycat全局序列号

    标题 "mycat全局序列号" 指涉的是在分布式数据库系统Mycat中实现全局唯一序列号(Global Sequence Number, GSN)的功能。Mycat是一个开源的分布式数据库中间件,它允许开发者将多个数据库集群整合为一个逻辑库,以...

    Mycat全局序列号示例

    总结来说,Mycat的全局序列号功能通过两种方式——本地文件和数据库,提供了在分库分表场景下生成全局唯一主键的解决方案。本地文件方式简单易用,适用于对性能要求不高的场景,而数据库方式则在一致性上有更好的...

    mycat的全面文档

    5. Mycat的分片JOIN和全局序列号章节详细讲解了Mycat如何处理分片表的JOIN操作以及如何管理全局序列号,这对于确保数据一致性和避免冲突至关重要。 6. 常见问题与解决方案章节列举了Mycat使用者可能遇到的问题以及...

    Mycat-权威学习指南

    Mycat核心概念包括数据库中间件、逻辑库、逻辑表、分片节点、节点主机、分片规则、全局序列号和多租户等。理解这些基本概念有助于深入学习Mycat的各种功能。 - 数据库中间件:指在应用程序和数据库之间提供额外服务...

    mycat-权威指南.pdf

    这节可能会介绍Mycat全局表、ER分片表、多对多关联、常用分片规则以及权限控制和多租户支持等高级概念。 ### 第11章 常见问题与解决方案 本章集中解答了Mycat用户可能遇到的问题,并提供了相应的解决方案。 ### 第...

    Mycat-Server-1.6.zip

    3. 数据一致性:Mycat通过全局序列号(Global Sequence ID, GSID)确保跨库事务的一致性。每个事务都会被分配一个唯一的GSID,保证在分布式环境中的事务正确执行。 4. SQL解析与路由:Mycat接收到SQL请求后,首先...

    Mycat_V1.6.0

    “全局序列号”章节则对Mycat如何生成和使用全局唯一的序列号进行了介绍,这在分布式数据库场景下是保证数据唯一性的关键。 在“Mycat分片规则”章节中,会解释分片规则的具体作用,并介绍如何设置和优化这些规则。...

    mycat基本工具书

    全局序列号是Mycat为了确保跨多个分片节点的数据唯一性而设置的一种机制,本节将详细介绍各种实现方式。 ##### 8.1 全局序列号介绍 全局序列号的定义及其在Mycat中的重要性。 ##### 8.2 本地文件方式 介绍了如何...

    Mycat权威指南第一版_V1.5.1

    同时,Mycat支持全局序列号(sequence),这是一个保证数据有序增长的机制,包括本地文件方式、数据库方式和本地时间戳方式等实现方法。全局序列号对于分布式系统中保证主键的唯一性至关重要。 读写分离是数据库...

    数据库集群Mycat搭建和配置

    4. **rule.xml**:定义分片规则,包括分片策略(如范围分片、哈希分片等)和全局序列号生成器。 5. **sequence配置**:如果使用了全局序列号,需配置sequence.xml来管理序列号生成。 **五、Mycat高级特性** 1. **...

    Mycat配置使用

    Mycat全局表操作: 在Mycat中,全局表操作通常是为了处理跨节点的数据一致性问题。使用全局表时,需要在插入数据时指定具体的分片节点,如"Mycatorders@host1orders@host2orders@host3",这样操作才会针对所有的分片...

    分库分表中间件MyCat使用手册

    4.1 **全局序列号**:MyCat 可以生成全局唯一的序列号,确保在分布式环境中数据的唯一性。 4.2 **读写分离策略**:支持自定义读写分离策略,例如优先读取从库,当从库不可用时自动切换到主库。 4.3 **安全控制**:...

    mycat学习教程

    5. **数据一致性**:通过全局序列号(GID)保证分布式环境下的数据一致性。 ### 结论 Mycat作为分布式数据库中间件,为解决传统数据库的局限性提供了有效方案。通过合理的安装、配置和使用,可以显著提升系统的可...

    Mycat-server-1.6.7.5-release-20200422133810-win.tar.gz

    3. **数据一致性**:Mycat通过全局序列号(GID)确保分布式环境中的数据一致性,避免数据冲突。 4. **负载均衡**:根据预设策略,Mycat自动将请求分配到不同的数据库节点,平衡负载。 5. **高可用性**:通过监控...

    mycat原理使用+mysql主从备份读写分离.rar

    2. 全局序列号:Mycat提供全局自增ID功能,确保在分布式环境下的唯一性。这在分片场景下尤其重要,避免了跨节点的自增ID冲突。 3. 读写分离:Mycat支持主从读写分离,读请求可以自动路由到从库,减轻主库压力,提高...

    MyCat权威指南PDF高清版

    在MyCat的体系结构中,有几个核心的概念,如数据库中间件、逻辑库(schema)、逻辑表(table)、分片节点(dataNode)、节点主机(dataHost)、分片规则(rule)、全局序列号(sequence)和多租户等。这些概念是理解和使用MyCat...

    mycat1.6.5

    4. **数据一致性**:通过其特有的Schema设计,Mycat可以实现全局序列号(Global Sequence Number,GSN),避免跨表插入时的主键冲突,保证数据的一致性。 5. **高可用性**:Mycat支持主备切换,当主节点故障时,...

Global site tag (gtag.js) - Google Analytics