`
zhaohaolin
  • 浏览: 1003685 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

轻松构建MySQL高可用集群系统

阅读更多

一、 MySQL复制的实现原理
 MySQL支持单向、双向复 制、异步复制,复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器。主服务器将更新写入一个二进制日志文件中,并创建一个索引文件以 跟踪日志循环。这些日志可以记录发送到从服务器的更新。当一个从服务器连接主服务器时,日志文件会通知主服务器,从服务器在日志中读取的最后一次成功更新 的位置。接着,从服务器在上次成功更新的位置处开始进入更新操作。更新完成后从服务器开始进入等待状态,等待主服务器后续的更新。


          需要注意的是:在进行复制时,所有对复制中的表的更新必须在主服务器上进行。否则,可能发生对主服务器上的表进行的更新与对从服务器上的表所进行的更新之间的冲突。
          单向复制有利于健壮性、速度和系统管理.
          主服务器/从服务器设置增加了健壮性。主服务器出现问题时,可以切换到从服务器。
          通过在主服务器和从服务器之间切分处理客户查询的负荷,可以得到更好的客户响应时间。SELECT查询可以发送到从服务器以降低主服务器的查询处理负荷。但修改数据的语句仍然应发送到主服务器,以便主服务器和从服务器保持同步。
 MySQL提供了数据库的同步功能,这对实现数据库的冗灾、备份、恢复、负载均衡等都是有极大帮助的。
          一般情况下,在Mysql复制中,主服务器也称为master,二从服务器称为slave,因此,想要启用同步机制,在master上就必须启用二进制日 志。每个slave接受来自master上在二进制日志中记录的更新操作,而在slave上相当于执行了这个操作的一个拷贝。
二、 MySQL同步细节
 
          MySQL同步功能由3个线程(master上1个binlog dump,slave上2个,分别是Sql进程和IO进程)来实现。执行“START SLAVE”语句后,slave就创建一个I/O线程。I/O线程连接到master上,并请求master发送二进制日志中的语句。master创建一 个线程来把日志的内容发送到slave上。
          slave上的I/O线程读取master的Binlog Dump线程发送的语句,并且把它们拷贝到其数据目录下的中继日志(relay logs)中。第三个是SQL线程,salve用它来读取中继日志,然后执行它们来更新数据。
          slave上使用2个线程的优点是,把读日志和执行分开成2个独立的任务。执行任务如果慢的话,读日志任务不会跟着慢下来。例如,如果slave停止了一 段时间,那么I/O线程可以在slave启动后很快地从master上读取全部日志,尽管SQL线程可能落后I/O线程好几的小时。如果slave在 SQL线程没全部执行完就停止了,但I/O线程却已经把所有的更新日志都读取并且保存在本地的中继日志中了,因此在slave再次启动后就会继续执行它们 了。这就允许在master上清除二进制日志,因为slave已经无需去master读取更新日志了。

         本文讲解的环境为:一个mysql的master主节点node1,三个Mysql的Slave节点,三个Slave节点都从primary节点进行实时的同步数据,Mysql高可用集群主机信息如图1所示:

MySQL  

图1


三、在node1、slave1、slave2、slave3上安装MYSQL

安装MySQL有多种方法,这里仅以rpm安装为列说明。
[root@node1~]#yum -y install mysql-server mysql-devel mysql mysql-bench mysql-test
安装完成后,使用如下命令启动mysql服务:
[root@node1 ~]# /etc/init.d/mysqld start
为了保障数据安全,建议把数据放到专业的存储设备或者磁盘阵列分区,这里假定磁盘阵列的分区为/data目录,接着把数据文件放到/data目录下:
[root@node1 ~]# cp -R /var/lib/mysql /data/mysql
[root@node1 ~]# chown –R mysql:mysql /data/mysql
修改/etc/my.cnf文件,在[mysqld]组增加如下配置:
datadir = /data/mysql
最后,重启MySQL服务即可。

四、在Mysql主节点node1上编辑配置文件my.cnf

编辑主服务器的配置文件/etc/my.cnf,在[mysqld]中添加如下内容即可:
server-id = 1   #服务器ID。服务器之间不能有重复ID,一般master是1
log-bin=mysql-bin   #打开mysql的binlog功能,后面的名字可以自己指定,如果不改名字的话,默认是以主机名字命名
binlog-do-db=ixdba #ixdba是需要备份的数据库名,如果备份多个数据库,重复设置这个选项即可
binlog-ignore-db=mysql #不需要备份的数据库名称,如果需要忽略备份多个数据库,重复设置这个选项即可。

五、在master节点node1上建立复制用
mysql>GRANT REPLICATION SLAVE ON *.* TO 'repl_user'@'%' IDENTIFIED BY 'repl_password';
这里一定将repl_user用户设置为远程任意节点可以登录。

六、备份Master数据
备份Master上的数据,首先执行如下SQL语句:
mysql>FLUSH TABLES WITH READ LOCK;
Query OK, 0 rows affected (0.00 sec)
mysql> reset master;
Query OK, 0 rows affected (0.00 sec)


 不要退出这个终端,否则这个锁就失效了;在不退出终端的情况,再开一个终端直接打包压缩数据文件或使用mysqldump工具来导出数据。
[root@node1 ~]# cd /var/lib/    #进入mysql的数据目录,根据自己情况而定。
[root@node1 lib]# tar zcvf mysql.tar.gz mysql
[root@node1 lib]# scp mysql.tar.gz  192.168.12.231/232/233:/var/lib/
用scp命令把打包的数据传到其他几台Slave机器上。
数据传输完成之后,在上面的命令终端上执行:
mysql>UNLOCK TABLES;

七、设置Slave主机
编辑/etc/my.cnf文件,在[mysqld]中添加如下内容即可:
server-id = 2
log-bin=mysql-bin
binlog-do-db=ixdba
binlog-ignore-db=mysql
其他的Slave以此类推,保证server-id全局唯一即可。

八、 在slave上执行如下命令
mysql> CHANGE MASTER TO MASTER_HOST='192.168.12.135',
-> MASTER_USER='repl_user',
-> MASTER_PASSWORD='repl_password',
-> MASTER_LOG_FILE='mysql-bin.000001',
-> MASTER_LOG_POS=98;
执行完之后执行:
mysql> slave start;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status\G
从输出可以看到:Slave_IO_Running和Slave_SQL_Running如果都为Yes时,表示配置成功。

九、需要注意的几个问题
(1)如果在my.cnf里面定义了log-bin、relay-log参数,那么要保证定义与hostname无关,因为如果这两类log的文件名与主机名有关,切换过程会导致slave主机不能继续同步的问题。例如可以做下设置:
log-bin = mysql-bin
relay-log = mysql-relay-bin
保证在两台主机上两种文件的名字一样。
(2)最好把my.cnf文件也放入磁盘阵列所在分区的数据目录。

分享到:
评论

相关推荐

    Mysql高可用集群架构

    数据库位于现代企业应用的核心,它储存了组织机构中最有价值的资产,包括客户信息、产品信息、...对于希望在当今瞬息万变的经济环境立于不败之地并取得成功的企业来说,构建一个具有高可用性的 IT 基础架构至关重要。

    mysql高可用集群方案中文

    ### MySQL高可用集群方案知识点详解 #### 一、高可用性的重要性 在当前的商业环境中,数据及其可访问性已经成为企业基础设施的关键组成部分,甚至影响着企业的财务预算模型。因此,无论是大型还是小型商业应用,...

    kubernetes部署mysql高可用

    MySQL作为流行的开源关系型数据库管理系统,其在Kubernetes上的高可用部署是许多企业级应用的关键需求。本文将深入探讨如何利用Kubernetes实现MySQL的高可用性和读写分离。 一、Kubernetes基本概念 1. **Pod**: ...

    搭建MySQL高可用负载均衡集群.docx

    通常,搭建高可用集群需要多台服务器,例如文中提到的四台CentOS虚拟主机,每台都运行MySQL 5.5。其中两台作为主主复制的MySQL节点(192.168.95.11和192.168.95.12),一台作为`haproxy+keepalived`组合(192.168....

    通过keepalived搭建MySQL双主高可用集群系统.docx

    【MySQL双主高可用集群系统】使用keepalived与MySQL构建的双主高可用环境能够确保数据服务的连续性和稳定性,即使单个节点出现故障,系统仍能正常运行。在这个配置中,DB1(192.168.2.204,bogon)和DB2(192.168.2....

    mysql高可用集群MGR组复制集群介绍及搭建说明

    ### MySQL高可用集群MGR组复制集群介绍及搭建说明 #### 一、资源概述 本文档旨在为用户提供一份详尽的MySQL高可用集群MGR(组复制)集群介绍及搭建指南。MySQL组复制(MySQL Group Replication, MGR)是一项基于...

    LINUX企业集群用商用硬件和免费软件构建高可用集群

    本文将深入探讨如何利用商用硬件和免费的Linux软件来构建一个高效且可靠的高可用集群。 首先,硬件是任何集群的基础。在选择硬件时,考虑的因素包括服务器的处理器性能、内存容量、磁盘存储和网络连接。商用硬件...

    MySQL分布式数据库集群高可用设计及应用

    标题与描述:“MySQL分布式数据库集群高可用设计及应用”这一主题深入探讨了如何构建和维护一个高可用性的MySQL分布式数据库集群。在IT行业中,数据库的高可用性是确保业务连续性和数据安全的关键因素之一,特别是在...

    高可用MySQL_构建健壮的数据中心_第2版

    《高可用MySQL_构建健壮的数据中心_第2版》这本书深入探讨了如何在实际环境中构建和维护高可用性的MySQL数据库系统。MySQL是全球最受欢迎的开源关系型数据库管理系统之一,其高可用性对于企业的业务连续性和数据安全...

    Mysql高可用架构集群--MyCat集群部署HAProxy+MyCat

    本篇文章将围绕如何构建一个基于HAProxy与MyCat的MySQL高可用集群展开讨论。该方案通过利用HAProxy实现负载均衡和故障切换功能,结合MyCat的读写分离特性,旨在提高整个系统的稳定性和响应速度。 #### 二、技术栈...

    高可用MySQL:构建健壮的数据中心

    《高可用MySQL:构建健壮的数据中心》是“MySQL High Availability”的中文翻译版,主要讲解真实环境下如何使用MySQL的复制、集群和监控特性,揭示MySQL可靠性和高可用性的方方面面。《高可用MySQL:构建健壮的数据...

    基于Docker Compose构建的MySQL MHA集群.zip

    MySQL MHA(MySQL High Availability)是一个用于管理高可用性MySQL集群的解决方案。它通过监控、故障检测以及自动故障切换,能够在主节点出现故障时,将从节点提升为主节点,确保服务不间断。MHA由一系列的Python...

    搭建MySQL高可用+负载均衡集群(haproxy+keepalived).docx

    【MySQL高可用+负载均衡集群】的搭建方案通常涉及到多个组件,如haproxy和keepalived,旨在提升系统的稳定性和处理能力。MySQL在面对大量用户和数据增长时,单个实例可能会达到性能瓶颈,此时就需要引入高可用和负载...

    MySQL高可用方案搭建手册

    本手册将详细介绍如何构建和管理MySQL的高可用环境。 1. **主从复制(Replication)** - MySQL的主从复制是实现高可用的基础,通过同步主库的数据到从库,可以在主库发生故障时快速切换到从库。 - 主从复制分为...

    mysql-MMM实现mysql高可用

    总的来说,MySQL-MM是一个强大的工具,通过提供高可用性和负载均衡,它可以帮助企业构建可靠的MySQL数据库集群。然而,正确配置和维护这样的系统需要深入理解MySQL复制原理和集群管理,以确保系统的稳定运行。

Global site tag (gtag.js) - Google Analytics