`

转:mysql主从、主主复制及高可用性

 
阅读更多

原:http://wenzhongxiang.blog.51cto.com/6370734/1264191

 

原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://wenzhongxiang.blog.51cto.com/6370734/1264191

mysql主从、主主复制及高可用性

一:MySQL复制:

mysql复制简介:

master服务器中主数据库的ddldml操作通过二进制日志传到slaves服务器上,然后在master服务器上将这些日志文件重新执行,从而使得slave服务器和master服务器上的数据信息保持同步。

Mysql复制的原理:

  • 将数据分布到多个系统上去,是通过将Mysql的某一台master主机的数据复制到其它(slave)主机上,并重新执行一遍来实现的;

  • 复制过程中一个服务器充当master服务器,而一台或多台其它服务器充当slave服务器。master服务器将更新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环。

  • 这些日志可以记录发送到slave服务器的更新。当一个slaves服务器连接master服务器时,它通知master服务器从服务器在日志中读取的最后一次成功更新的位置。slave服务器接收从那时起发生的任何更新,然后封锁并等待master服务器通知新的更新。

mysql复制的优点:

  • slave服务器上执行查询操作,降低master服务器的访问压力

  • master服务器上出现了问题可以切换到slave服务器上,不会造成访问中断等问题

  • slave服务器上进行备份,以避免备份期间影响master服务器的服务使用及日常访问

Mysql自身的复制功能:是构建大型、高性能应用程序的基础。

mysql支持的复制类型

  • 基于语句的复制:在主服务器上执行的SQL语句,在从服务器上执行同样的语句。MySQL默认采用基于语句的复制,效率比较高。一旦发现没法精确复制时,会自动选着基于行的复制。

  • 基于行的复制:把改变的内容复制过去,而不是把命令在从服务器上执行一遍mysql5.0开始支持

  • 混合类型的复制::默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制。

MySQL复制技术的特点:

  • 数据分布 (Data distribution )

  • 备份(Backups) 

  • 负载平衡(load balancing)

  • 高可用性和容错性 High availability and failover 

复制的工作过程:

  • master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events);

  • slavemasterbinary log events拷贝到它的中继日志(relay log)

  • slave重做中继日志中的事件,将改变反映它自己的数据。

 

第一步:master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务串行的写入二进制日志,即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后,master通知存储引擎提交事务;

第二步:slavemasterbinary log拷贝到自己的中继日志。首先,slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump processBinlog dump processmaster的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志;

第三步:SQL slave threadSQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。

二:mysql主从、主主复制:

实验拓扑:

1.在两台服务器上分别安装mysql(源码安装所依赖的包为perl-DBD-MySQL、mysql-server):

2.分别启动mysql和mysql2两台服务器,并设置开机启动

 

 

 

 

3.修改/etc/my.cnf配置文件:

vi /etc/my.cnf

添加如下内容:

[mysqld]

log-bin=MySQL-bin        ###启用二进制日志

server-id=1                    ###数据库ID号,1:表示为Master;master_id范围:1231之间的正整数值;每个同步服务器都必须设定一个唯一的编号,否则同步无法正常运行。

在服务器mysql2中只需要修改server-id数据库ID号即可:

分别重新启动两台服务器的mysqld服务:

1、mysqlmysql2服务器相互设置为主从同步:

a.在主mysql服务器上的设置:

在数据库中建立www账号,并且允许从任何地址上来登录,密码是123.asd:

为了使测试成功,所以我这里以清除防火墙为例:

b.在主机名为mysql2服务器上的设置:

c.在主机名为mysqld服务器上的my.cnf配置文件中添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库:

d.验证主、从同步:

首先在主数据库上创建新库“tables”,然后在从数据库上查看新建库是否已同步:

在主机名为mysql2的服务器中验证新建库是否已经同步:

2、mysqlmysql2服务器相互设置为主主同步(mysql2msyql上执行相反的操作,使其互为主从):

在主机名为msyql2服务器上的设置:

在主机名为mysql主机上的设置:

my.cnf文件中添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库。

整体配置完成后需要重启mysqld服务

验证主主同步:

会发现在mysql2服务器上的tables库中新建的users表同步到mysql服务器中:

如果主MySQL服务器已经存在,只是后期才搭建从MySQL服务器,在置配数据同步前应先将主MySQL服务器的要同步的数据库拷贝到从MySQL服务器上:

(如先在主MySQL上备份数据库,再将备份内容在从MySQL服务器上恢复)

 

三、MySQL主/从模式高可性群集:

1.在mysqlmysql2两台服务器上分别安装keepalived软件包

安装keepalived软件包与服务控制

在编译安装Keepalived之前,必须先安装内核开发包kernel-devel以及openssl-develpopt-devel等支持库(rhel6.0中默认已经安装):

2.编译安装Keepalived:

使用指定的linux内核位置对keepalived进行配置,并将安装路径指定为根目录,这样就无需额外创建链接文件,配置完成后,依次执行makemake install进行安装。

3.使用keepalived服务:

执行make install操作之后,会自动生成/etc/init.d/keepalived脚本文件,但还需要手动添加为系统服务,这样就可以使用servicechkconfig工具来对keepalived服务程序进行管理。

4.分别修改mysqlmysql2服务器中的keepalived.conf配置文件:

mysql服务器上的配置文件内容如下:

vi /etc/keepalived/keepalived.conf:

! Configuration File for keepalived

    global_defs {

        router_id MySQL-HA

     }

vrrp_instance VI_1 {

        state BACKUP    ###BACKUP将根据优先级决定主或从;MASTER指定为主;SLAVE指定为从.若一方为MASTER,另一方为SLAVE,则表示双机热备(即一主一从).

        interface eth0

        virtual_router_id 51         ###确保和mysql2相同,同网内不同集群此项必须不同,否则发生冲突

        priority 100                    ###此处mysql2上设置为99(比mysql服务器优先级低)

        advert_int 1

        nopreempt                 ###不抢占,只在priority高的mysql上设置,mysql2上此项注释掉

        authentication {

        auth_type PASS

        auth_pass 1111

    }

virtual_ipaddress {

        192.168.10.100

    }

}

virtual_server 192.168.10.100 3306 {

        delay_loop 6

        lb_algo wrr

        lb_kind DR

        persistence_timeout 50

        protocol TCP

real_server 192.168.10.1 3306 {                ###mysql2上此处改为mysql2服务器的ip地址192.168.10.2

        weight 1

        notify_down /etcl/keepalived/bin/mysql.sh

        TCP_CHECK {

            connect_timeout 3

            nb_get_retry 3

            delay_before_retry 3

            connect_port 3306

            }

    }

}

mysql主机上的keepalived.conf文件的具体配置如下:

mysql2主机的keepalived.conf参考上面的描述修改。

可以使用scp命令把mysql主机上配置好的keepalived.conf文件拷贝到mysql2主机,只要做简单修改即可:

我这里通过手工修改:

 

mysqlmysql2上都添加此检测脚本,作用是当mysql停止工作时自动关闭本机的keepalived,从而实现将故障机器剔除(因每台机器上keepalived只添加了本机为realserver):

mysqld正常启动起来后,要手动启动keepalived服务。

vi /etc/keepalived /mysql.sh,脚本内容如下:

5.如果mysql.sh脚本不能正常执行的话,可以编写一个检测mysqld服务的是否正在运行的脚本,如果mysqld服务停止,则在脚本中停掉keepalived服务,实现故障切换。并设置一个cron计划任务定期执行检测脚本。

在企业网络内配置cacti nagiosmysqld服务进行监控,能在第一时间通知管理员mysqld服务出现异常

vi /etc/rc.local

modprobe ip_vs ###此模块如果无法自动加载则需手动加载

mysqlmysql2启动keepalived守护进程.

/etc/init.d/keepalived start

6.进行测试:

mysql上创建一个测试数据库并在数据库tables库中创建一个www表,此时在mysql2上就会自动同步在mysql上已创建好的库和表;

同样在mysql2上对数据库或表做任何修改也会同步到mysql上。这说明mysql的主从同步实现了:

数据库、表都同步,tables库中的内容自动同步:

mysqlmysql2分别执行ipaddrshow dev eth0命令查看mysqlmysql2VIP(群集虚拟IP)的控制权:

整个环境设置到此完成。

 

本文出自 “听闻” 博客,请务必保留此出处http://wenzhongxiang.blog.51cto.com/6370734/1264191

分享到:
评论

相关推荐

    12.1: MySQL主从同步 、 主从同步模式 、 总结和答疑.docx

    MySQL主从同步是指将一个MySQL服务器的数据实时地复制到另一个或多个服务器上,以实现数据的高可用性和灾难恢复。这种方式可以实现数据的热备援、读写分离、负载均衡等功能。 1. 案例 1:MySQL 一主一从 在这个...

    linux运维学习笔记:MySQL主从复制原理和实战.pdf

    MySQL是一种流行的开源关系型数据库管理系统,它支持主从复制(Master-Slave Replication),这是提高数据安全性和系统可用...通过以上步骤和注意要点,可以实现MySQL的主从复制,并确保数据的安全性和系统的高可用性。

    MYsql主从复制.docx

    * 高可用性:Mysql主从复制可以实现高可用性,确保数据库的连续性和可靠性。 * 负载均衡:Mysql主从复制可以实现负载均衡,减少服务器的负载,提高数据库的性能。 * 读写分离:Mysql主从复制可以实现读写分离,提高...

    8.第八章:mysql主从复制与读写分离.doc

    ### MySQL主从复制与读写分离详解 #### 第八章:MySQL主从复制与读写分离 本章节主要探讨MySQL的主从复制机制及其在实际部署中的应用——读写分离技术。通过具体案例来理解其背后的原理和技术要点,并提供一个实践...

    使用keepalived实现对mysql主从复制的主备自动切换.docx

    mysql主从复制是mysql数据库的一种高可用性解决方案,它可以将数据从主数据库同步到从数据库上,确保数据的一致性。在mysql主从复制环境中,keepalived可以实现自动切换,提高系统的可用性和可靠性。 实验环境 在...

    SpringBoot第 12 讲:SpringBoot+MySQL主从复制、读写分离

    主从复制是MySQL数据库的一种高可用性解决方案,其中一台服务器(主服务器)处理所有写操作,而其他服务器(从服务器)同步主服务器上的数据变化,从而形成一个读写分离的环境。这种设计模式有助于减轻主服务器的...

    催米技术部研发团队技术分享:mysql主从复制&分区技术&优化.ppt

    MySQL 主从复制技术是指将一个 MySQL 数据库服务器的数据复制到另一个服务器上,以实现数据的高可用性和读写分离。它可以将主服务器上的数据实时同步到从服务器上,从而提高整个系统的可用性和性能。 在 MySQL 主从...

    高可用MYSQL,主从复制,集群和负载平衡

    高可用MYSQL主从复制、集群和负载平衡 MySQL 集群是指将多个 MySQL 服务器组合成一个集群,以提高数据库的可用性、可扩展性和性能。MySQL 集群可以分为多种类型,例如主从复制集群、多主多从集群、负载平衡集群等...

    MySQL主从复制与读写分离.docx

    MySQL 主从复制是指将一个 MySQL 服务器的数据实时同步到另一个 MySQL 服务器中,以实现数据的高可用性和读写分离。下面是 MySQL 主从复制与读写分离的详细知识点: MySQL 主从复制 MySQL 主从复制是指将一个 ...

    mysql 数据库主从配置

    mysql 数据库主从配置 mysql 数据库主从配置是指将一个 mysql 服务器设置为主服务器,另一个 mysql 服务器设置为从服务器,并...* 高可用性:mysql 主从配置可以用来提高数据库的可用性,以免出现数据库不可用的情况。

    mysql 主从复制环境搭建

    1. 数据库高可用性:主从复制可以确保数据库的高可用性和可靠性。 2. 负载均衡:主从复制可以将读写操作分布到多个服务器上,减少单个服务器的负载。 3. 读写分离:主从复制可以将读操作和写操作分离,提高系统的...

    MySQL主从复制:构建高可用和高性能的数据架构

    在现代数据库架构中,MySQL主从复制是一种常用的技术,用于实现数据的高可用性、负载均衡和数据备份。本文将详细介绍MySQL主从复制的原理、配置步骤、不同复制模式以及在实际应用中的策略和优化。 MySQL主从复制是一...

    MYSQL主从复制高可用实施手册

    MySQL主从复制是一种常见的数据库高可用性和负载均衡解决方案,它允许数据从一个主数据库(Master)实时同步到一个或多个从数据库(Slave)。在这种架构中,所有写操作都在主节点执行,而读操作可以在主节点或从节点...

    mysql主从复制安装配置进阶.pptx

    * 提高数据库的高可用性:通过主从复制,可以确保数据库的高可用性,即使主服务器宕机,从服务器也可以继续提供服务。 * 提高读取性能:从服务器可以承担读取操作,从而减少主服务器的读取压力,提高数据库的读取...

Global site tag (gtag.js) - Google Analytics