`
huangyongxing310
  • 浏览: 501249 次
  • 性别: Icon_minigender_1
  • 来自: 广州
文章分类
社区版块
存档分类
最新评论

数据库沉余实现方式

 
阅读更多
数据库沉余实现方式

canal
原理相对比较简单:
(1)canal模拟mysql slave的交互协议,伪装自己为mysql slave,向mysql master发送dump协议
(2)mysql master收到dump请求,开始推送binary log给slave(也就是canal)
(3)canal解析binary log对象(原始为byte流)


基于日志增量订阅&消费支持的业务:
(1)数据库镜像
(2)数据库实时备份
(3)多级索引 (卖家和买家各自分库索引)
(4)search build
(5)业务cache刷新
(6)价格变化等重要业务消息



Canal 高可用
Canal 服务端中的实例可以配置一个备用 MySQL,从而能够在双 Master 场景下自动选择正在工作的数据源。注意两台主库都需要打开 log_slave_updates 选项。Canal 会使用自己的心跳机制(定期更新辅助表的记录)来检测主库的存活。
Canal 自身也有 HA 配置,配合 Zookeeper,我们可以开启多个 Canal 服务端,当某台服务器宕机时,客户端可以从 ZK 中获取新的服务端地址,继续进行消费。更多信息可以参考 Canal AdminGuide。

https://blog.csdn.net/zjerryj/article/details/77152226(使用 Binlog 和 Canal 从 MySQL 抽取数据)


Ottter是由阿里爸爸开源的一个数据同步产品,它的最初的目的是为了解决跨国异地机房双A架构,两边可写的场景,



http://www.cnblogs.com/zhangtianshi/articles/9140231.html(使用canal通过mysql的binlog日志对mysql进行监控)

http://agapple.iteye.com/blog/1796633(关于使用Binlog和canal来对MySQL的数据写入进行监控)
分享到:
评论

相关推荐

    SQLite数据库设计与实现 英文版

    介绍了数据库的概念,数据库设计与实现的相关知识,系统讲解了sqllite主要组件。

    高校科研管理系统数据库设计与实现

    高校科研管理系统数据库设计与实现KDH格式

    echarts+Servlet+mysql从数据库获取数据实现简单图表展示

    用Servlet实现的echarts展示两种不同形式图表的小demo,使用的开发工具是eclipse,数据库是mysql。文件中包含项目源码,对应的数据库,以及项目运行后实现的图表截图(含url)。项目本人亲测,可完美展示图表,若有...

    Java实现简单的数据库以及银行系统实现

    在本项目中,"Java实现简单的数据库以及银行系统实现"是一个使用Java编程语言构建的银行管理系统,它允许用户与数据库进行交互,执行常见的银行交易操作。这个系统的关键知识点包括Java编程、数据库连接、对象关系...

    qt 实现数据库操作和显示

    在本文中,我们将深入探讨如何使用Qt框架来实现数据库操作并将其结果显示在用户界面上,主要关注"模型视图"架构。Qt是一个功能强大的C++工具包,广泛应用于图形用户界面(GUI)开发,同时也提供了丰富的数据库接口。...

    数据库系统实现习题答案

    1. 数据库基础:数据库是组织和存储数据的系统,它允许用户以结构化方式访问和管理数据。理解数据库的基础概念,如关系模型、实体-关系模型(E-R模型)、数据类型和数据完整性,是学习数据库系统实现的第一步。 2. ...

    中科大(高级数据库)数据库实现,期末试题(大题部分)

    中科大(高级数据库)数据库实现(金培权),期末考试试题(大题部分)

    java多个数据库实现数据同步

    本文将深入探讨如何使用Java来实现多个数据库之间的数据同步。 首先,我们需要理解数据同步的含义。数据同步是指在两个或多个数据库之间,当某个数据库中的数据发生改变时,这些变化能够被实时或者近实时地反映到...

    数据库系统实现答案汇总

    数据库系统实现是计算机科学中的一个重要领域,主要关注如何设计、构建和管理用于存储、检索和管理数据的系统。本答案汇总涵盖了数据库系统实现的多个方面,包括数据系统实现的中文版和英文版的部分解答,旨在为学习...

    高校成绩管理系统数据库设计与实现(含源码和报告)

    利用SQLserer2008和VS2010完成高校成绩管理系统的设计与实现,其中包含管理员、教师、学生等...压缩包里包含VS源代码,完整的使用文档和数据库代码。基本功能已经实现,部分功能没有完全实现,可以供广大学习者参考。

    数据库系统实现课程设计——图书管理系统.pptx

    该资源是数据库系统实现:图书管理系统对应的课设ppt文件,只需输入小组成员和指导老师就可以拿来直接使用。有关图书管理系统的具体实现请参阅本人文章---数据库系统系统实现:图书管理系统。

    PHP结合数据库实现分页

    PHP结合数据库,实现分页功能

    数据库课程设计-JAVA实现学生信息管理系统

    在本项目中,“数据库课程设计-JAVA实现学生信息管理系统”是一个用Java编程语言开发的教育实践项目,旨在帮助学习者理解和应用数据库管理系统的概念。这个系统主要目标是管理和操作学生的信息,提供一个用户友好的...

    基于MySQL实现云数据库服务与实现

    DaaS(数据库即服务)是PaaS平台的一种基础能力,它为应用开发者提供了高可用性、高可扩展性的数据库服务,而无需开发者了解数据库服务的具体实现方式。DaaS平台采用MySQL作为基础数据库,向用户提供标准的MySQL...

    数据库系统实现,斯坦福大学 完整中文版

    数据库系统实现,斯坦福大学 完整中文版 北京大学 计算机系译

    企业网站的设计与实现(SQL数据库)_1401191957587037.docx

    企业网站的设计与实现(SQL数据库)_1401191957587037.docx企业网站的设计与实现(SQL数据库)_1401191957587037.docx企业网站的设计与实现(SQL数据库)_1401191957587037.docx企业网站的设计与实现(SQL数据库)_...

    C++ 实现的一个简单数据库

    这种方式虽然能实现基本功能,但可能不够高效且容易出错,因为手动构建语法树是一项复杂的工作,需要对数据库查询的语法规则有深入理解。 标签 "winsock" 暗示了这个数据库系统可能依赖于Windows Socket API...

    《数据库系统实现》课后习题参考答案

    书中对数据库系统实现原理进行了深入阐述,并具体讨论了数据库管理系统的三个主要成分-存储管理器、查询处理器和事务管理器的实现技术。书中还对信息集成的最新技术,例如数据仓库、OLAP、数据挖掘、Mediator、数据...

    Access数据库技术与应用课后习题答案

    3. 论述关系数据库的实现方式(Access 数据库) 第三章 1. 论述数据库的基本概念(表、记录、字段) 2. 论述数据库的设计原则 3. 论述数据库的实现方式(Access 数据库) 4. 论述数据库的应用(查询、报表、宏) ...

    Android 数据库编程SQLite实现学生信息管理应用

    Android 数据库编程SQLite实现学生信息管理应用https://blog.csdn.net/qq_45808700/article/details/117535524?spm=1001.2014.3001.5501

Global site tag (gtag.js) - Google Analytics