`
huangyongxing310
  • 浏览: 490640 次
  • 性别: Icon_minigender_1
  • 来自: 广州
文章分类
社区版块
存档分类
最新评论

数据库沉余实现方式

 
阅读更多
数据库沉余实现方式

canal
原理相对比较简单:
(1)canal模拟mysql slave的交互协议,伪装自己为mysql slave,向mysql master发送dump协议
(2)mysql master收到dump请求,开始推送binary log给slave(也就是canal)
(3)canal解析binary log对象(原始为byte流)


基于日志增量订阅&消费支持的业务:
(1)数据库镜像
(2)数据库实时备份
(3)多级索引 (卖家和买家各自分库索引)
(4)search build
(5)业务cache刷新
(6)价格变化等重要业务消息



Canal 高可用
Canal 服务端中的实例可以配置一个备用 MySQL,从而能够在双 Master 场景下自动选择正在工作的数据源。注意两台主库都需要打开 log_slave_updates 选项。Canal 会使用自己的心跳机制(定期更新辅助表的记录)来检测主库的存活。
Canal 自身也有 HA 配置,配合 Zookeeper,我们可以开启多个 Canal 服务端,当某台服务器宕机时,客户端可以从 ZK 中获取新的服务端地址,继续进行消费。更多信息可以参考 Canal AdminGuide。

https://blog.csdn.net/zjerryj/article/details/77152226(使用 Binlog 和 Canal 从 MySQL 抽取数据)


Ottter是由阿里爸爸开源的一个数据同步产品,它的最初的目的是为了解决跨国异地机房双A架构,两边可写的场景,



http://www.cnblogs.com/zhangtianshi/articles/9140231.html(使用canal通过mysql的binlog日志对mysql进行监控)

http://agapple.iteye.com/blog/1796633(关于使用Binlog和canal来对MySQL的数据写入进行监控)
分享到:
评论

相关推荐

    MySQL 数据库系统设计实现与管理第六版课后习题答案

    MySQL数据库系统设计实现与管理是数据库领域的一门重要课程,主要涵盖了数据库的基础理论、设计方法、实施技巧以及管理策略。第六版的教材深入浅出地介绍了MySQL这一流行的开源关系型数据库管理系统,为学习者提供了...

    SQLite数据库设计与实现 英文版

    介绍了数据库的概念,数据库设计与实现的相关知识,系统讲解了sqllite主要组件。

    SQL Server 2008数据库设计与实现

    作者介绍了如何实现基础的表结构,包括选择合适的名字、处理子类型、选择键的实现方式、设置模式等。随后,书中讲述了如何保护数据的完整性,包括自动数据保护和手动数据保护的策略。模式与查询技术章节讨论了预计算...

    数据库系统实现技术

    数据库系统实现技术数据库系统实现技术数据库系统实现技术

    echarts+Servlet+mysql从数据库获取数据实现简单图表展示

    用Servlet实现的echarts展示两种不同形式图表的小demo,使用的开发工具是eclipse,数据库是mysql。文件中包含项目源码,对应的数据库,以及项目运行后实现的图表截图(含url)。项目本人亲测,可完美展示图表,若有...

    车站管理系统数据库集中的实现方式.pdf

    车站管理系统数据库集中的实现方式.pdf

    快速数据库的编程实现

    快速数据库的编程实现,是vb6.0编程实现的工具,有源代码,可以供学习修改使用

    Java建立数据库连接并实现数据库查询.rar

    Java建立数据库连接并实现数据库查询,初学者通过本Java源代码,了解如何加载驱动器,获取连接,定义SQL查询语句,获取Statement对象,执行查询、遍历ResultSet、获取数据、在控制台输出数据,关闭连接等。

    Java实现简单的数据库以及银行系统实现

    在本项目中,"Java实现简单的数据库以及银行系统实现"是一个使用Java编程语言构建的银行管理系统,它允许用户与数据库进行交互,执行常见的银行交易操作。这个系统的关键知识点包括Java编程、数据库连接、对象关系...

    数据库系统实现(第二版)

    《数据库系统实现(第二版)》详细阐述了这些主题,通过深入浅出的方式解析了数据库系统内部的工作机制,包括: 1. **数据模型**:介绍关系模型、网络模型和对象模型,以及它们之间的区别和联系,特别关注关系模型...

    中科大(高级数据库)数据库实现,期末试题(大题部分)

    中科大(高级数据库)数据库实现(金培权),期末考试试题(大题部分)

    基于SQL SERVER的分布式数据库设计与实现

    虽然SQL Server本身并没有直接支持垂直分片的技术,但可以通过结合链接服务器和存储过程的方式来实现。具体做法是在存储过程中定义一系列针对不同数据库的操作,这些操作会被封装在一起作为整体处理,确保了分布式...

    数据库系统实现 中文 电子版

    《数据库系统实现》是计算机科学领域的一本经典教材,由斯坦福大学的知名教授编写,中文版的出现为中文读者提供了便利,使我们能够更好地理解和掌握数据库系统的精髓。这本书全面覆盖了数据库系统的设计、实现与优化...

    用C#实现的数据库抽象工厂

    数据库抽象工厂模式是设计模式中的一种常见模式,旨在提供一种灵活的方式来访问数据库。使用抽象工厂模式可以使数据库访问层与具体的数据库实现分离,从而提高系统的灵活性和可维护性。 在C#实现的数据库抽象工厂...

    WinCC SQL SERVER 数据库实现数据库同步

    实现两个Sqlserver之间的数据库同步 对实时性有较高要求,数据同步延时尽量在1S之内 可以全库、单表、多表的数据同步 2. 读写分离 数据同步之后程序上就可以通过分别使用不同的DbContext实现程序上的读写分离 3. ...

    数据库同步 数据库同步

    在SQL Server环境下,如SQL 2000和SQL 2005,数据库同步有多种实现方式。例如,可以使用SQL Server Integration Services (SSIS)进行数据迁移和同步,这是一个强大的ETL(提取、转换、加载)工具,可以定制数据同步...

    java多个数据库实现数据同步

    本文将深入探讨如何使用Java来实现多个数据库之间的数据同步。 首先,我们需要理解数据同步的含义。数据同步是指在两个或多个数据库之间,当某个数据库中的数据发生改变时,这些变化能够被实时或者近实时地反映到...

    数据库系统实现答案汇总

    数据库系统实现是计算机科学中的一个重要领域,主要关注如何设计、构建和管理用于存储、检索和管理数据的系统。本答案汇总涵盖了数据库系统实现的多个方面,包括数据系统实现的中文版和英文版的部分解答,旨在为学习...

    数据库系统实现课后答案

    斯坦福大学 课后习题答案 详细解答 部分

    成语接龙实现之成语数据库.zip

    标题中的“成语接龙实现之成语数据库”表明这个压缩包包含了一个用于实现成语接龙游戏的数据库资源。成语接龙是一种流行的汉语智力游戏,玩家需要根据前一个成语的最后一个字来接下一个成语,通常要求接上的成语首字...

Global site tag (gtag.js) - Google Analytics