`
liangjian103
  • 浏览: 176902 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

MySQL Master Slave 数据同步,集群。

阅读更多


该文章为原创,作者:梁健,QQ:15141739,时间:2011年5月11日17:55:26 转载注明作者
最近学习了一下MySQL的集群,发现MySQL的集群有很多种方式,下面来介绍下学到的MySQL Master Slave配置
MySQL Master Slave 字面上理解,可以看出一个主和下属的关系,他们能做什么呢?我个人理解:当遇到高并发访问数据库的时候,可以让查询操作的SQL去访问Slave服务器,插入、修改、删除、可以在Master服务器来做,这样就可以减轻服务器的负担。
Slave 会根据Master 进行数据以二进制流的方式快速同步。
这两天在网上查了很多相关的配置,但都运行不了,最后结合多种配置加上自己的理解终于成功了,太开心了!
下面我来说说我是怎么配置的吧! 争取让你按我的配置一次成功!我尽量详细。

我的机器是XP系统,安装的MySQL5.1.32-community-log,我的虚拟机里是Ubuntu10.10,MySQL5.1.49-1ubuntu8.1-log

Master :192.169.105.203 (XP系统)
Slave: 192.168.2.133(Linux系统)

1、XP系统中操作:
找到MySQL的安装目录,我的是:
D:\Program Files\MySQL\MySQL Server 5.1
修改D:\Program Files\MySQL\MySQL Server 5.1\my.ini文件,找到[mysqld] 在下面写:

server-id               = 1
log_bin                 = d:/mysql/mysql-test-bin.log
expire_logs_days        = 10
max_binlog_size         = 100M
binlog_format           =mixed
binlog_do_db = test_db

注意:d:/mysql/mysql-test-bin.log 这个目录需要自己建立,log_bin的意思是 将数据库的内容以二进制方式写到文件里(Slave会根据这个文件进行同步数据);
通常Master服务器都配置 server-id=1 这个数字最好和IP最后一组数字一致,但要小于32,这里配置为1。
binlog_do_db准许Slave同步的数据库,我这里要让写的是test_db用于测试的数据库(Slave里也要有相同的数据库和表结构,否则无法同步),如果有多个数据库可以多写几个binlog_do_db=**数据库名。
重启MySQL服务,net stop mysql 然后net start mysql

连接数据库 mysql -uroot -p123456

mysql> show master status;
+-----------------------+----------+--------------+------------------+
| File                  | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+-----------------------+----------+--------------+------------------+
| mysql-test-bin.000001 |      106 |              |                  |
+-----------------------+----------+--------------+------------------+
1 row in set (0.00 sec)
          
这个就是生成的二进制文件的信息,Slave会根据这个同步数据。

设定 Replication Slave 权限
我们必须要在 Master Server 上做设定,让 Slave 具有可以从 Master Server 上 Copy 数据的权限(正式的说法为 Replication Slave Priviledges)
mysql> GRANT REPLICATION SLAVE ON *.* TO 'test_dbuser'@'192.168.2.133' IDENTIFIED BY '1234';
语句中的SLAVE是权限名,*.*是可访问任何数据库,test_dbuser是用户名,192.168.2.133是准许这个IP访问,1234是密码。
mysql> FLUSH PRIVILEGES; (使之生效)

--------------------------
2、下面是在Ubuntu下的操作,配置Slave:
MySQL的安装我就不多说了,apt-get install mysql ……
先说明一下我的MySQL的路径:
/etc/init.d/mysql 下是启动和停止服务
/var/log/mysql/ 记录日志,相当于我在前面XP系统里建立的d:/mysql/mysql-test-bin.log位置
/var/lib/mysql/ 存放数据库。MySQL配置文件:/etc/mysql/my.cnf ,其中指定了数据文件存放路径,
datadir = /var/lib/mysql
如果你创建了一个名为 test 的数据库,那么这个数据库的数据会存放到 /var/lib/mysql/test 目录下。

Slave Server配置:
修改MySQL配置文件:/etc/mysql/my.cnf
找到[mysqld] 在下面加入:
server-id               = 2
replicate-do-db  =test_db
log_bin                 =/var/log/mysql/mysql-bin.log
relay_log               =/var/log/mysql/mysql-relay-bin.log
master-connect-retry =1
expire_logs_days        = 10
max_binlog_size         = 100M
#binlog_do_db           = test
#binlog_ignore_db       = include_database_name
binlog_format           = mixed

下面说明一下:
server-id=2就是个编号,如果有多个Slave服务器,就依次向后排,3、5、6……
replicate-do-db=test_db是配置我要到master服务器同步的数据库,我这里配置的是test_db数据库。
master-connect-retry=1 是1秒钟同步一次,这个数值可根据不同需要配置。

配置好后,重启MySQL服务。
进入Slave Server 的MySQL:
mysql -uroot -pliangjian
查看一下master服务器状态:
mysql> show master status\G;
*************************** 1. row ***************************
            File: mysql-bin.000003
        Position: 234
    Binlog_Do_DB:
Binlog_Ignore_DB:
1 row in set (0.00 sec)

ERROR:
No query specified

启动
mysql>start slave;
然后查看一下状态:
mysql> show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.105.203
                  Master_User: test_dbuser
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-test-bin.000004
          Read_Master_Log_Pos: 8272
               Relay_Log_File: mysql-relay-bin.000004
                Relay_Log_Pos: 1399
        Relay_Master_Log_File: mysql-test-bin.000004
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes

              Replicate_Do_DB: test_db,admob
          Replicate_Ignore_DB:
           Replicate_Do_Table:
       Replicate_Ignore_Table:
      Replicate_Wild_Do_Table:
  Replicate_Wild_Ignore_Table:
                   Last_Errno: 0
                   Last_Error:
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 8272
              Relay_Log_Space: 8727
              Until_Condition: None
               Until_Log_File:
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File:
           Master_SSL_CA_Path:
              Master_SSL_Cert:
            Master_SSL_Cipher:
               Master_SSL_Key:
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error:
               Last_SQL_Errno: 0
               Last_SQL_Error:
1 row in set (0.00 sec)

这里主要看的是:
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
如果是NO,可能是连接问题导致。

下面手动执行一下同步:
同步前需要先STOP Slave一下。再执行:

mysql> change master to  master_host='192.168.105.203',master_user='test_dbuser',master_password='1234', master_log_file='mysql-test-bin.000001',master_log_pos=106;

这里的 master_log_file='mysql-test-bin.000001',master_log_pos=106; 000001和106这两个数值如果不知道输入多少,可以先:
mysql> show master status\G; 看一下。
配置好后在 START Slave一下。这时候你可以再 mysql> show slave status\G; 看看情况。
用show processlist; 看一下连接情况。

我这里test_db数据库里有一个表t01,里面没有数据。Ubuntu里的Slave服务已经配置完毕。不要关机哦!
切忌 Slave Server和Master Server 里的test_db库的表结构都要一样。否则数据没法同步。
---------------
3、回到XP系统
登入Mysql在test_db数据库的t01表里插入一条数据:
mysql> insert into t01 (id,name,bz) values (3,'liangjian3','heihei3');
我这里已经有了几条:
mysql> select * from t01;
+------+------------+---------+
| id   | name       | bz      |
+------+------------+---------+
|    1 | liangjian  | heihei  |
|    2 | liangjian2 | heihei2 |
|    3 | liangjian3 | heihei3 |
+------+------------+---------+
3 rows in set (0.00 sec)
这个时候在去Ubuntu里看test_db里的t01表是是不是已经把数据同步过去了。

---------------------------------
以上这些操作 你可能会遇到如下问题:
在XP里执行完:
mysql> GRANT REPLICATION SLAVE ON *.* TO 'test_dbuser'@'192.168.2.133' IDENTIFIED BY '1234';
在Ubuntu里:
root@MyUbnutu:/var/lib/mysql# mysql -h 192.168.2.133 -utest_dbuser -p1234
会有登陆不上的情况,给出如下提示:
ERROR 1045 (28000): Access denied for user 'test_dbuser'@'liangjian' (using password: YES)
这个时候你可以在XP里:
GRANT REPLICATION SLAVE ON *.* TO 'test_dbuser'@'liangjian' IDENTIFIED BY '1234';
或者:
GRANT REPLICATION SLAVE ON *.* TO 'test_dbuser'@'%' IDENTIFIED BY '1234';(用%号表示准许所以外部访问)
我不知道为何用IP不好使,这个问题也困扰了我好长时间,最后用Ubuntu里的用户名连上的。这一步很关键。

在执行:

mysql> change master to  master_host='192.168.105.203',master_user='test_dbuser',master_password='1234', master_log_file='mysql-test-bin.000001',master_log_pos=106;
最后先查看一下master的状态,如果不对,则需要去Mysql安装目录下删除master.info文件,和log下的日志文件,然后重启Mysql服务,否则master始终是第一次配置的那个。
---------------------------------

参考以下文章,结合自己的需求终于配置成功了:

http://www.cnblogs.com/xiazh/archive/2011/04/22/1971182.html

http://hi.baidu.com/ismayday/blog/item/5c52aec3431d1751b319a8f1.html

第一次写教程,没网上查的资料写的好,但自己想要提高总要走出这一步,加油吧!


 

分享到:
评论
1 楼 LoveZhou 2011-05-11  

相关推荐

    MySQL Master Slave构架 spring3 整合

    MySQL Master Slave 集群构架和spring整合,里面实现的是动态切换数据源,大家都是知道,spring2之后添加AbstractRoutingDataSource这个东西,这个就可以实现切换数据源,实现思路是:先按照搭建MySQL的MasterSlave...

    MYSQL的masterslave数据同步配置.rar

    MySQL的主从(Master-Slave)数据同步配置是一种常见的数据库高可用性和负载均衡解决方案,它允许数据在多个服务器之间复制,确保数据的一致性,并且可以在主服务器故障时提供故障转移。以下是对这一主题的详细说明...

    搭建MySQL的MasterSlave架构

    - 在Slave服务器上,使用`SHOW SLAVE STATUS`检查复制状态,确认是否正确连接到Master并同步数据。 - 测试集群功能,例如在Master上创建表并插入数据,然后在Slave上验证这些更改是否已同步。 5. **注意事项** -...

    Mysql-master-slave.rar_Master/Slave_slave mysql

    MySQL的主从复制是数据库高可用性和数据冗余的一种常见实现方式,它允许数据从一个服务器(主服务器)同步到一个或多个其他服务器(从服务器)。这种架构在处理大量读取操作、提供故障切换能力以及分布式系统中尤其...

    ActiveMQ 集群——JDBC Master Slave + Broker Cluster

    ActiveMQ 集群——JDBC Master Slave + Broker Cluster ActiveMQ 集群是指将多个 ActiveMQ 服务器组合在一起,以提高系统的可扩展性和可靠性。在这个集群中,我们可以使用 JDBC Master Slave 模式和 Broker Cluster...

    ActiveMQ Master/Slave 主从配置

    ActiveMQ是Apache软件基金会下的一个开源消息代理项目,主要提供了消息队列...当原先的Master节点恢复后,会重新加入集群中,并回到Slave角色,继续进行数据同步操作。这种配置可以有效提高消息系统的可靠性和扩展性。

    joeywang310#mysql-master-slave#Mysql主从复制集群搭建-基于DockerCompose1

    如:1062错误是指一些主键重复,1032错误是因为主从数据库数据不一致slave mysql容器配置配置Dockerfile设置server_id,一般设置为

    MySQL galera 集群搭建

    总之,MySQL Galera集群提供了一种高效、可靠的分布式数据库解决方案,通过同步复制和多主模式,实现了高可用性和数据一致性。结合MariaDB的兼容性和性能优势,可以构建出满足高并发读写需求的数据库服务。在实际...

    mysql数据库各集群优缺点

    - **优点**:异步复制模式下,Master节点无需等待Slave节点完成数据同步即可返回客户端,因此可以提供更快的响应时间。 - **缺点**:由于数据同步是非即时的,因此可能会导致数据暂时性的不一致。 **2. 同步复制*...

    MYSQL 集群

    在配置 MYSQL 集群之前,我们需要准备好两个服务器:主服务器(Master)和从服务器(Slave)。在本例中,我们将使用两个 CentOS 服务器,分别命名为 192.168.0.150 和 192.168.0.142。 第二步:安装 MYSQL 在两个...

    zookeeperMaster选举以及数据同步代码

    在分布式系统中,Zookeeper是一个至关重要的组件,它主要用于实现分布式服务管理,提供诸如配置管理、命名服务、集群同步、 leader选举等核心功能。在这个"zookeeperMaster选举以及数据同步代码"项目中,我们将深入...

    搭建mysql-cluster集群.docx

    搭建MySQL Cluster集群 ...由于同步复制一共需要4次消息传递,故MySQL Cluster的数据更新速度比单机MySQL要慢。因此,MySQL Cluster要求运行在千兆以上的局域网内,节点可以采用双网卡,节点组之间采用直连方式。

    如何实现MySQL的主从复制和半同步复制

    MySQL的主从复制和半同步复制是数据库集群中常见的高可用性和数据冗余策略,能够保证数据的一致性并提供故障恢复能力。本文将详细解释这两种复制方式的原理、配置步骤以及优缺点。 **一、MySQL主从复制** MySQL...

    mysql高可用集群部署项目1

    MySQL 主从同步是指将一个 MySQL 实例(master)中的数据实时同步到另一个 MySQL 实例(slave)中,以实现数据的高可用性和灾难恢复。该项目中,MySQL 主从同步是通过配置 MySQL 的 Binlog 和 Replication 机制来...

    MySQL数据同步配置手册.docx

    MySQL 数据同步配置手册详细介绍了如何在 MySQL 5.7.17 版本中搭建主从集群,确保数据的一致性和高可用性。在MySQL的复制机制中,主要有三种Binlog日志模式:基于SQL复制、基于行复制以及混合模式。基于SQL复制效率...

    企业级mysql基于MHA的高可用集群部署

    MHA Manager可以单独部署在一台独立的机器上管理多个master-slave集群,也可以部署在一台slave节点(监控)上。MHA Node运行在每台MySQL服务器上,MHA Manager会定时探测集群中的master节点,当master出现故障时,它...

    MySQL数据库双活同步复制方案详解.pdf

    MySQL数据库双活同步复制方案是为了实现数据库的高可用性和数据一致性,确保在主数据库出现故障时,能够无缝切换到备用数据库,保持业务连续性。以下将详细解释几种常见的双活同步复制策略。 **1. 基于MySQL原生...

    mysql-master-master

    MySQL的主主复制(Master-Master Replication)是一种高可用性解决方案,它允许两个或多个数据库服务器互相复制数据,形成一个集群。在这种模式下,每个节点既是主节点,也是从节点,可以接受读写操作。当一个节点...

    MySQL高可用负载均衡集群部署

    MySQL 高可用负载均衡集群部署 MySQL 高可用负载均衡集群部署是指在 MySQL 数据库中实现高可用性和负载均衡,以提高数据库的性能和可靠性。在本文中,我们将介绍如何使用 haproxy 和 keepalived 实现 MySQL 高可用...

Global site tag (gtag.js) - Google Analytics