`
longzhun
  • 浏览: 370312 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

cassandra多个数据中心实现异地容灾

 
阅读更多

cassandra是集群部署,多个节点,多个数据备份,一两个节点挂掉,一般不会有数据丢失。只要删除当掉的节点,对其它节点进行repair,数据都会自动均衡到完整的份数。

但是如果大面积节点掉电,或者机房着火那就肯定要丢失数据了,使用cassandra作为数据存储的业务,肯定是很大的业务,数据量超大的那种。机房容灾肯定是必不可少的。

cassandra提供多种多数据中心部署、机架敏感策略。这里介绍一种最普通的一种: GossipingPropertyFileSnitch

GossipingPropertyFileSnitch策略支持简单的多个数据中心,和多机架。

第一步:

在cassandra.yaml配置文件中指定集群支持该策略:

endpoint_snitch: GossipingPropertyFileSnitch

第二步:

在cassandra.yaml的seeds中把两个数据中心的种子节点都配上

– seeds: “192.168.22.101,192.168.22.102,192.168.23.101,192.168.23.102”

第三步:

配置cassandra-rackdc.properties 每台机器都配置自己所属的数据中心名称和机架名称

dc=DC1
rack=RAC1

配置机架的目的是,防止整个机框掉电,数据丢失。cassandra可以尽量保证同一份数据的多个副本不存在于同一个机架上。

这就要求你的机架个数要大约等于你的数据副本个数,同时每个机架的节点个数尽量相同,否则会导致某些节点数据偏多,分布不均

第四步

创建keyspace使用NetworkTopologyStrategy策略,并且制定每个集群的份数。

CREATE KEYSPACE mykeyspace WITH replication = {
‘class’: ‘NetworkTopologyStrategy’,
‘DC1’: ‘3’,
‘DC2’: ‘3’
};

第五步

客户端使用数据一致性策略,从QUORUM改为LOCAL_QUORUM。这样客户端会先从LOCAL数据中查询,LOCAL无法查询,再从REMOTE数据中心进行查询。

cassandra JAVA官方驱动,把默认首先连上的节点所属的数据中心视为LOCAL数据中心。所以你不要容灾数据中心节点IP配到了代码中。

分享到:
评论

相关推荐

    基于Cassandra的实时气象数据分布式存储系统.pdf

    每个数据项都会被复制到N个节点(N是通过参数配置的副本因子),系统利用数据的复制机制将存储在各节点上的数据复制到其他结点上,实现了数据的高度可获得性和安全性。 1.2 数据模型 Cassandra使用宽列存储模型,...

    Cassandra的数据模型介绍

    每个Column和SuperColumn都带有时间戳,这使得系统能够处理多版本的数据并实现时间点查询。在更新操作中,Cassandra 会保留最新的版本,而旧版本则可以通过时间戳进行回溯查询。这对于审计和历史数据分析非常有用。 ...

    Cassandra权威指南.pdf

    7. 多数据中心支持:Cassandra支持多个数据中心的部署,允许数据跨地域复制,提高数据的地理分布性和容灾能力。 Cassandra的数据模型通过如下方式来组织数据: 1. 键空间(Keyspace):类似于关系型数据库中的...

    Cassandra技术详解 操作与测试报告

    - Cassandra的多数据中心功能为数据的高可用性和容灾提供了强大的支持,确保数据的安全和可靠性。 4. **高级功能** - 除了上述特性外,Cassandra还支持如范围查询、超级列等高级功能,使其在某些应用场景下相比于...

    Cassandra分布式架构与源代码分析

    Cassandra的架构特点包括灵活的schema、支持range查询、高可用、可扩展、多数据中心识别、范围查询、列表数据结构、分布式写操作等。 1.1 灵活的schema Cassandra的schema可以随时更改,不需要提前设计schema,...

    java导出cassandra数据

    Cassandra的数据存储基于表(Table),这些表分布在多个节点上,形成一个分区(Partition)。每个分区由键(Partition Key)决定,而行(Row)由主键(Primary Key)确定。在Java中,我们可以使用DataStax的...

    Cassandra的基础应用

    - **多数据中心架构**:支持跨多个地理位置的数据中心部署,提高数据冗余度和容灾能力。 - **其他特点**: - 支持范围查询,可以根据键值的范围进行数据检索。 - 提供列表数据结构,便于构建多维度的数据索引。 ...

    Cassandra分布式模型与源代码分析

    - **多数据中心支持**:Cassandra 能够跨多个数据中心部署,确保数据的冗余和地理分布,提高系统的整体可用性。 - **列式存储**:Cassandra 结合了 Bigtable 的列式存储概念,适合处理大量稀疏数据。 2. **主要...

    在Spark上使用CLI读取Cassandra数据

    它使用一致性哈希来分发数据,并且支持多数据中心部署,确保低延迟的数据访问。 2. **Spark简介**:Apache Spark是为大规模数据处理设计的开源计算框架,它提供了基于内存的计算,显著提高了数据处理速度。Spark...

    cassandra教程

    Cassandra的设计考虑了多数据中心的部署,可以配置为跨多个地理位置的节点布局。这样,即使某个数据中心出现问题,备用数据中心也能保持服务的连续性,确保数据的高可用性。 ### 数据模型 Cassandra的数据模型可以...

    Cassandra 的数据rollbock机制

    总之,Cassandra的数据rollbock机制是其高效数据管理的核心,通过合理的数据分块、版本控制、合并策略和副本管理,实现了高可用性和高性能。理解并优化这些机制对于运维和开发Cassandra应用至关重要。

    Java连接cassandra实现简单的增删查demo

    Cassandra是一款分布式NoSQL数据库,常用于处理大规模数据。在这个示例中,我们将探讨如何通过Java来操作Cassandra数据库。 首先,我们需要在项目中引入Cassandra的Java驱动程序。最常用的是DataStax的Java驱动,...

    Cassandra数据模型

    这使得系统可以实现多版本并发控制(MVCC),确保数据一致性。 3. **宽行与窄行** - **宽行**:如果一行包含大量的列,就称为宽行。这种模式适合存储大量相关数据,例如日志或事件数据。 - **窄行**:反之,如果...

    Cassandra实战.pdf

    此外,Cassandra支持多数据中心部署,每个数据中心可以独立运行,同时通过复制机制保持数据的一致性,这对于构建全球分布式的高可用系统至关重要。 ### 关键知识点二:Cassandra数据模型 Cassandra的数据模型基于...

    Cassandra-架构讲解

    在架构上,Cassandra避免了传统主从式数据库架构的单点故障问题,其节点之间通过Gossip协议进行通信,实现了去中心化的分布式特性。 首先,Cassandra的架构设计理念是所有节点平等。不同于主从架构(Master-Slave)...

    spring boot与cassandra集成,使用JPA方式。

    在本文中,我们将深入探讨如何将Spring Boot框架与Cassandra数据库集成,并利用Java Persistence API (JPA) 进行数据操作。Spring Boot以其简洁的配置和开箱即用的特性,已经成为Java开发中的首选框架之一。而...

    Expert Apache Cassandra Administration.pdf

    Apache Cassandra是一个分布式的NoSQL数据库管理系统,它被设计用来处理大量的数据跨越多个数据中心。Cassandra对高性能、高可用性、可扩展性有着出色的支持,因此它特别适合于那些需要不断增长和变化的数据集的应用...

Global site tag (gtag.js) - Google Analytics