`

8天学习MongoDB——第六天 分片技术

 
阅读更多
在mongodb里面存在另一种集群,就是分片技术,跟sql server的表分区类似,我们知道当数据量达到T级别的时候,我们的磁盘,内存

就吃不消了,针对这样的场景我们该如何应对。

一:分片

mongodb采用将集合进行拆分,然后将拆分的数据均摊到几个片上的一种解决方案。

下面我对这张图解释一下:

人脸: 代表客户端,客户端肯定说,你数据库分片不分片跟我没关系,我叫你干啥就干啥,没什么好商量的。

mongos: 首先我们要了解”片键“的概念,也就是说拆分集合的依据是什么?按照什么键值进行拆分集合....

好了,mongos就是一个路由服务器,它会根据管理员设置的“片键”将数据分摊到自己管理的mongod集群,数据

和片的对应关系以及相应的配置信息保存在"config服务器"上。

mongod: 一个普通的数据库实例,如果不分片的话,我们会直接连上mongod。

二: 实战

首先我们准备4个mongodb程序,我这里是均摊在C,D,E,F盘上,当然你也可以做多个文件夹的形式。

1:开启config服务器

先前也说了,mongos要把mongod之间的配置放到config服务器里面,理所当然首先开启它,我这里就建立2222端口。

2: 开启mongos服务器

这里要注意的是我们开启的是mongos,不是mongod,同时指定下config服务器,这里我就开启D盘上的mongodb,端口3333。

3:启动mongod服务器

对分片来说,也就是要添加片了,这里开启E,F盘的mongodb,端口为:4444,5555。

4: 服务配置

哈哈,是不是很兴奋,还差最后一点配置我们就可以大功告成。

<1> 先前图中也可以看到,我们client直接跟mongos打交道,也就说明我们要连接mongos服务器,然后将4444,5555的mongod

交给mongos,添加分片也就是addshard()。

这里要注意的是,在addshard中,我们也可以添加副本集,这样能达到更高的稳定性。

<2>片已经集群了,但是mongos不知道该如何切分数据,也就是我们先前所说的片键,在mongodb中设置片键要做两步

①:开启数据库分片功能,命令很简单 enablesharding(),这里我就开启test数据库。

②:指定集合中分片的片键,这里我就指定为person.name字段。

5: 查看效果

好了,至此我们的分片操作全部结束,接下来我们通过mongos向mongodb插入10w记录,然后通过printShardingStatus命令

查看mongodb的数据分片情况。

这里主要看三点信息:

① shards: 我们清楚的看到已经别分为两个片了,shard0000和shard0001。

② databases: 这里有个partitioned字段表示是否分区,这里清楚的看到test已经分区。

③ chunks: 这个很有意思,我们发现集合被砍成四段:

无穷小 —— jack0,jack0 ——jack234813,jack234813——jack9999,jack9999——无穷大。

分区情况为:3:1,从后面的 on shardXXXX也能看得出。

分享到:
评论

相关推荐

    10天掌握MongoDB——01-认识MongoDB.pptx

    本课程旨在帮助你在10天内掌握MongoDB的基础知识。MongoDB 的设计哲学是面向文档,它以JSON(JavaScript Object Notation)格式存储数据,这使得数据的结构更加灵活,易于理解和处理。 首先,我们来看一下MongoDB的...

    10天掌握MongoDB——02-初识增删改.pptx

    本课程“10天掌握MongoDB”旨在帮助学习者快速上手MongoDB的基本操作,包括增删改查等核心功能。 在MongoDB中,添加文档(Insert)是非常直观的。当向集合中插入文档时,系统会检查是否指定了唯一的标识符`_id`。...

    mongodb分片备份

    在大型部署中,为了保证数据的安全性和可用性,通常会采用分片(Sharding)和复制集(Replica Set)等技术。本文将详细介绍MongoDB的分片备份以及复制集的备份方法。 **1. 分片备份** MongoDB 分片是将大数据集...

    数据结构算法

    你也会(7篇)——第一篇 快速入门 MongoDB(8)8天学通MongoDB——第八天 驱动实践 8天学通MongoDB——第七天 运维技术 8天学通MongoDB——第六天 分片技术 8天学通MongoDB——第五天 主从复制 8天学通MongoDB——第四...

    k8s 安装 mongodb 分片(Sharding)+ 副本集(Replica Set)

    k8s 安装 MongoDB 分片(Sharding)+ 副本集(Replica Set) k8s 安装 MongoDB 分片(Sharding)+ 副本集(Replica Set)是结合 Kubernetes(k8s)和 MongoDB 实现高可用性和高性能的解决方案。本解决方案通过使用 ...

    mongodb中文API及分布式分片实例详解

    在本篇中,我们将深入探讨MongoDB的中文API以及如何实施分布式分片,旨在帮助开发者更好地理解和应用这一强大的数据库技术。 一、MongoDB中文API详解 1. 连接与断开:MongoDB的中文API提供了连接数据库的方法,如`...

    30分钟学MongoDB系列——分布式架构分片(Sharding)

    本篇学习难度被评定为★★★★☆,建议读者在了解了MongoDB的基础操作之后,再进一步深入学习分片技术。 总体来看,本篇文档介绍了MongoDB分片的多个方面,包括分片的基础概念、架构组成、配置参数设置、分片键的...

    MongoDB分片介绍

    MongoDB 分片是一种水平扩展策略,用于处理大数据量和高并发场景...总的来说,MongoDB的分片技术旨在提供可扩展性和高性能,通过合理配置和管理,能够在大规模数据存储和高并发访问的环境中保持系统稳定性和响应速度。

    mongodb分片集群增加acl

    在大数据时代背景下,为了提高数据库的性能和可用性,采用分片技术是一种常见的解决方案。MongoDB是一种流行的NoSQL数据库,它支持自动分片功能,使得数据可以在多个服务器节点间自动平衡。除了性能提升之外,...

    mongoDB分片技术处理方案

    在数据量不断增长的情况下,为了保持高效的查询性能和存储能力,MongoDB提供了分片(Sharding)技术。分片是将大型数据集分散到多个物理节点上的一种策略,每个节点存储数据的一部分,从而实现水平扩展。 一、...

    30分钟学MongoDB系列——性能优化和性能监控篇

    30分钟学MongoDB系列——性能优化和性能监控篇,主要聚焦于如何通过简单的步骤来优化MongoDB的性能和监控系统健康状态,以确保数据处理的高效性和系统的稳定性。 性能优化分为几个方面: 1. 索引:在MongoDB中,...

    从MySQL到MongoDB——视觉中国的NoSQL之路.pdf

    "从MySQL到MongoDB——视觉中国的NoSQL之路" MySQL中的挑战 在传统的基于静态内容的产品中,MySQL使用Master+Master的部署方案,前端使用自己的PHP框架进行开发,Memcached作为缓存,Nginx进行Web服务器和负载...

    MongoDB分片副本级

    MongoDB分片副本级 详细的讲述了MongoDB分片副本级配置

    MongoDB4.2分片及副本集群搭建

    MongoDB4.2分片及副本集群搭建 MongoDB集群 MongoDB分片 MongoDB副本 MongoDB副本集群

    mongodb分片设计

    MongoDB通过分片(Sharding)技术来解决这个问题。分片是一种将数据分散存储在多个服务器上的技术,它可以提升数据库的扩展性和负载均衡能力。 在分片设计中,首先需要了解分片的目的(Purpose of Sharding)。...

    MongoDB-mongodb 复制集 & 分片

    MongoDB mongodb 复制集 & 分片 mongodb 复制集 & 分片 mongodb 复制集 & 分片 mongodb 复制集 & 分片 mongodb 复制集 & 分片

    mongodb副本集加分片集群安全认证使用账号密码登录

    mongodb副本集加分片集群安全认证使用账号密码登录

    mongodb 数据库基本操作.doc

    MongoDB提供了许多高级功能和选项,如索引、分片、复制集、事务等,以满足更复杂的数据管理和处理需求。 - **索引**:通过创建索引来加速查询速度。 - **分片**:将大数据集分布在多个服务器上,提高可伸缩性和性能...

    实验五 MongoDB分片部署与启动

    本次实验旨在深入学习MongoDB的分片机制,理解并掌握如何部署一个基于多服务器的MongoDB分片集群。分片是MongoDB的一项重要特性,它允许将数据分散存储在多个物理服务器上,从而提高系统的可扩展性和性能。实验主要...

    MongoDB复制集与分片技术详解

    内容概要:本文详细介绍了 MongoDB 中用于提高系统高可用性和水平扩展能力的关键技术——复制集(Replica Set)和分片(Sharding)。复制集由一个主节点和若干从节点及可选仲裁节点构成,主节点处理所有写操作及...

Global site tag (gtag.js) - Google Analytics