百度360必应搜狗淘宝本站头条
tomcat 乱码无法与服务器建立安全连接是什么意思sysv-rc-confdocker映射容器目录到宿主机internet explorer 增强的安全配置已启用
当前位置：网站首页 > 技术文章 > 正文

如何理解MongoDB分片（mongodb的分片算法有哪些）

nanshan 2025-04-06 19:28 9 浏览 0 评论

阿铭linux近16年的IT从业经验，6年+鹅厂运维经验，6年+创业公司经验，熟悉大厂运维体系，有从零搭建运维体系的实战经验。关注我，学习主流运维技能，让你比别人提升更快，涨薪更多！

什么是MongoDB分片

MongoDB分片是指将数据库拆分成多份，把它们分散到不同的机器上，从而实现不需要功能强大的服务器就可以存储更多的数据和处理更多的请求。


MongoDB分片的基本思想就是将集合切分成小块，这些块分散到若干分片里面，每个分片只负责总数据的一部分。

对于应用程序来说，不必知道哪个分片对应哪些数据，甚至不需要知道数据已经被分片。当应用程序查询数据时，只需要连接一个前置路由即可。这个前置路由通过查询配置服务器获取数据所在的目标分片，从而获取目标数据。

MongoDB分片的目的

高数据量和吞吐量的数据库应用会对单机的性能造成较大压力，大的查询量会将单机的CPU耗尽，大的数据量对单机的存储压力较大，最终会耗尽系统的内存而将压力转移到磁盘IO上。

为了解决这些问题，有两个基本的方法: 垂直扩展和水平扩展。

垂直扩展：增加更多的CPU和存储资源来扩展容量。

水平扩展：将数据集分布在多个服务器上，水平扩展即分片。

分片为应对高吞吐量与大数据量提供了方法。使用分片减少了每个分片需要处理的请求数，因此，通过水平扩展，集群可以提高自己的存储容量和吞吐量。举例来说，当插入一条数据时，应用只需要访问存储这条数据的分片。

使用分片减少了每个分片存储的数据。例如，如果数据库1TB的数据集，并有4个分片，然后每个分片可能仅持有256 GB的数据。如果有40个分片，那么每个切分可能只有25GB的数据。

MongoDB分片架构

MongoDB分片架构中，有三个角色：

  • Mongos ：就是上面提到的路由器，是和客户端打交道的模块。Mongos本身没有任何数据，它也不知道该怎么处理这数据，而是通过Config Server来获取；
  • Config Server：配置服务器，所有Shard节点的信息、分片功能的一些配置信息都存储在Config Server里，可以理解为真正数据的元数据；
  • Shard：真正数据存储的位置，以Chunk为单位存储。


Mongos本身并不持久化数据，所有Shard集群的元数据都会存储到Config Server里，而用户的数据会分散存储到各个Shard。Mongos启动后，会从Config Server加载元数据，开始提供服务，将用户的请求正确路由到对应的分片上。

Shard Key

可以说，Shard Key（中文翻译成片键）是MongoDB实现分片的依仗！

MongoDB中数据的分片以集合为基本单位，集合中的数据通过Shard Key被分成多部分。其实Shard Key就是在集合中选了一个键，用该键的值作为数据拆分的依据。

举个例子，假设有个存储人员信息的文档集合，如果选择名字"name"作为Shard Key，那么第一分片可能会存放名字以 A-F 开头的文档。第二分片存 G-P 开头的文档，第三分片存Q-Z的文档。

一个好的Shard Key对分片至关重要。

有一点需要注意，一个自增的Shard Key对写入和数据均匀分布不是很友好，因为自增的Shard Key总会在一个分片上写入，后续达到某个阀值才可能会写到别的分片上。但是反过来讲，按Shard Key查询（读取）会非常高效。

相关推荐

ssh终端xshell日志查看命令（xshell怎么看日志）

现在我们云服务器运维较多用的是SSH工具，其中常用的包括PUTTY、XSHELL等，其实大同小异界面UI稍微不同，但是都可以进入远程连接。这里有朋友提到如何查看服务器的日志文件，这个其实和是否使用XS...

使用 Fail Ban 日志分析 SSH 攻击行为

通过分析`fail2ban`日志可以识别和应对SSH暴力破解等攻击行为。以下是详细的操作流程和关键分析方法：---###**一、Fail2ban日志位置**Fail2ban的日志路径因系统配置...

如何高效读取Linux日志文件?这些命令要熟记于心!

在Linux系统中，日志文件通常存储在/var/log目录下。比如，/var/log/syslog（或/var/log/messages，视发行版而定）记录系统整体事件，/var/log/a...

Windows服务器远程登录日志查询方法，linux查看登录日志方法

概述本文介绍Windows、Linux服务器查询系统的远程登录日志方法。根据服务器所使用的操作系统不同，有以下两种查询方法。Linux操作系统的登录日志查询通过远程连接登录Linux服务器，使用roo...

iptables防火墙如何记录日志（防火墙日志查看）

例如：记录所有ssh服务的登录的日志首先，我们需要了解如何将所有的iptables的INPUT链数据包记录到/var/log/messages中。如果你已经有一些iptables规则了，那么将记录日志...

如何安全管理SSH密钥以防止服务器被入侵

SSH密钥安全管理实施指南（2025年更新版）一、密钥生成与存储规范高强度密钥生成bashCopyCodessh-keygen-ted25519-a100#生成ED25519算法密钥（比...

在CentOS上安装nginx服务器（centos搭建代理服务器）

一、环境描述1.虚拟机配置CPU：单核内存：2GB硬盘：120GBIP：10.24.17.1082.操作系统版本：CentOS6.6x86_64安装方式：Minimal3.虚拟化环境VM...

CentOS7安全加固的一份整理规划建议

◆更新系统：及时更新CentOS7操作系统版本和安全补丁，确保系统以最新状态运行。◆关闭不必要的服务：在运行系统时，应关闭不需要的服务和端口，以减少系统暴露的攻击面。◆安装防火墙：使用iptables...

第四十七天-二叉树，centOS安装tomcat，Maven，vsftpd

学习笔记：1.Maven是Apache下的一个纯Java开发的开源项目。基于项目对象模型（缩写：POM）概念，Maven利用一个中央信息片断能管理一个项目的构建、报告和文档等步骤。Maven...

Linux远程桌面连接使用教程 Widows终端远程连接Linux服务器

一、前言为什么不是远程连接Linux服务器？因为我不会，远程连接window我就用电脑自带的“远程桌面连接”。以下所述都是在CentOS操作系统下的。服务器刚换成Linux的时候很迷茫，感觉无从下手...

CentOS 安全加固操作，保护你的操作系统

系统加固是保障系统安全的重要手段，对于维护企业数据安全、用户隐私以及系统稳定运行具有重要意义。加固后的系统更加健壮和稳定，能够有效减少因安全问题导致的系统故障和停机时间，提高系统的可用性和可靠性。通过...

Dockerfile部署Java项目（docker如何部署java项目）

1、概述本文主要会简单介绍什么是Docker，什么是Dockerfile，如何安装Docker，Dockerfile如何编写，如何通过Dockerfile安装jar包并外置yaml文件以及如何通过do...

CentOS7云主机部署Fail2ban阻断SSH暴力破解

关于Fail2banFail2ban可以监视你的系统日志，然后匹配日志的错误信息（正则式匹配）执行相应的屏蔽动作（一般情况下是调用防火墙屏蔽）例如:当有人在试探你的HTTP、SSH、SMTP、FTP密...

在CentOS7上用源码编译安装PostgreSQL

1、新建postgres用户#useraddpostgres&&passwdpostgres2、安装依赖包#yum-yinstallmakegccgcc-c++readline...

pure-ftpd 使用（ftp prompt命令）

pure-ftpd是一个免费的ftp软件，其他介绍就不多说了。我们直接开始主题安装centosyuminstallepel-releaseyuminstallpure-ftpd配置备份原配置...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表