MongoDB源码阅读之Shard源码分析–CongfigServer启动

1. 名词解释 shards : 每一个shard包括一个或多个服务和存储数据的mongod进程(mongod是mongodb数据的核心进程)典型的每个shard开启多个服务来提高服务的可用性。这些服务/mongod进程在shard中组成一个复制集 Chunks: Chunk是一个来自特殊集合中的一个数据

1.      名词解释

shards : 每一个shard包括一个或多个服务和存储数据的mongod进程(mongod是mongodb数据的核心进程)典型的每个shard开启多个服务来提高服务的可用性。这些服务/mongod进程在shard中组成一个复制集

Chunks: Chunk是一个来自特殊集合中的一个数据范围,美国服务器,(collection,minKey,maxKey)描叙一个chunk,它介于minKey和maxKey范围之间。例如chunks 的maxsize大小是100M,如果一个文件达到或超过这个范围时,会被切分到2个新的chunks中。当一个shard的数据过量时,chunks将会被迁移到其他的shards上。同样,chunks也可以迁移到其他的shards上

Config Servers : Config服务器存储着集群的metadata信息,网站空间,包括每个服务器,每个shard的基本信息和chunk信息Config服务器主要存储的是chunk信息。每一个config服务器都复制了完整的chunk信息。

 

一个完整的MongoDB集群应该包含多个shards,每个shard包含多个replSets互相做备份。单个数据有大小之分,被分配到不同的Chunk之中。当一个shard的存储空间不够时,会将Chunks分配到其他Shard上。这些信息被分开后都要有所记录,这些记录存储在Congfig Servers上做查询的依据。

小绿鲸英文文献阅读器 小绿鲸英文文献阅读

英文文献阅读器,专注提高SCI阅读效率

小绿鲸英文文献阅读器 199 查看详情 小绿鲸英文文献阅读器

 

从这里开始源码研究的范畴变为mongos。

2.      代码结构

shard.hchunk.hconfig.h以上三个对应结构的类。strategy.h//分配调整策略基类strategy_shard.cpp//shard分配调整策略的实现parallel.h//并行传递消息,分片等操作的工具类server.h//启动configserver的管理类balance.h//chunk分块的策划者connpool.h//管理mongos中的各种连接,香港服务器租用

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/472482.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月8日 08:08:34
下一篇 2025年11月8日 08:09:46

相关推荐

  • 如何在Laravel中配置会话管理

    在%ignore_a_1%中配置会话管理,1. 修改config/session.php文件;2. 根据需求调整.env环境变量;3. 选择合适的会话驱动如file、database、redis;4. 设置生命周期和安全性选项。核心在于通过config/session.php定义会话行为,包括驱动、…

    2025年12月5日
    000
  • ThinkPHP的依赖注入是什么?ThinkPHP如何实现IoC容器?

    thinkphp中依赖注入的核心是ioc容器,它通过构造函数注入等方式自动解析和管理类的依赖关系;2. 使用di能显著提升代码解耦、可测试性和可维护性,例如替换userrepository实现无需修改userservice;3. 容器通过绑定(如接口到实现、闭包绑定)和自动解析(利用反射递归注入依赖…

    2025年12月5日 PHP框架
    000
  • YII框架的MongoDB支持是什么?YII框架如何操作MongoDB?

    yii框架通过activerecord和dao两种方式支持mongodb操作,配置连接后可像操作关系型数据库一样进行增删改查;2. activerecord提供面向对象的封装,dao则允许更灵活的原生操作;3. 两者在api设计上保持一致,但mongodb无模式、使用objectid主键、支持嵌套数…

    2025年12月4日
    000
  • js如何检测温湿度传感器 物联网设备数据监测方案

    javascript无法直接读取温湿度传感器数据,必须通过中间层实现。1.硬件层:选择dht或sht系列传感器与esp32等微控制器连接。2.固件层:使用arduino ide或micropython编写代码读取传感器数据并通过wi-fi发送至服务器。3.后端层:构建node.js或python服务…

    2025年12月4日 web前端
    000
  • MySQL如何结合Node.js构建REST API MySQL+Node.js实现高效API开发的步骤

    使用node.js和mysql构建rest api的步骤包括:项目初始化与依赖安装,创建数据库连接配置文件并使用连接池,搭建express应用骨架,定义路由与控制器分离业务逻辑,最后通过启动脚本运行服务;2. 选择该组合的原因是node.js的非阻塞i/o模型适合高并发api处理,全栈javascr…

    2025年12月3日
    000
  • Java中如何实现审计日志 详解AOP记录

    java中实现审计日志的核心是记录操作者、时间、类型及内容,主要通过aop实现。1. 定义切面类并使用@aspect注解;2. 使用@pointcut定义拦截方法的切点;3. 采用@afterreturning或@afterthrowing定义通知以记录成功或失败日志;4. 在通知中通过joinpo…

    2025年12月3日 java
    100
  • Swoole如何实现集群部署?集群如何管理?

    Swoole集群部署需依赖外部组件实现,核心方案包括:1. 使用Nginx或HAProxy进行负载均衡;2. 通过Consul、Etcd等实现服务发现;3. 利用Redis等分布式缓存管理会话状态;4. 采用Prometheus和ELK进行监控与日志管理;5. 常见模式有无状态API集群、有状态长连…

    2025年12月3日
    000
  • PHP数据库备份与恢复 PHP操作MySQL数据维护

    php操作mysql数据维护的核心在于保证数据的安全性和可用性,主要通过备份与恢复、日常优化和维护操作来实现。1.使用mysqldump命令行工具或mysqli/pdo扩展进行数据库备份;2.通过执行sql文件恢复数据库,建议在服务器端通过ssh运行脚本;3.php可执行清理过期数据、优化表结构、检…

    2025年12月3日 后端开发
    000
  • PHP怎样解析FlatBuffer数据 FlatBuffer解析方法高效处理二进制

    php解析flatbuffer数据的核心步骤包括获取schema、生成代码、读取和解析二进制数据。首先,需获取.fbs定义文件;其次,使用第三方工具或手动编写代码生成php解析逻辑;接着,通过file_get_contents()等函数读取二进制数据;最后按schema解析并使用数据。由于php缺乏…

    2025年12月3日 后端开发
    000
  • 如何在Yii2项目中高效集成MongoDB?yiisoft/yii2-mongodb助你轻松驾驭NoSQL数据库

    可以通过一下地址学习composer:学习地址 告别数据僵局:Yii2 项目中 MongoDB 集成的痛点与解决方案 你是否曾遇到这样的困境:项目需求快速变化,数据结构不断调整,而传统关系型数据库的严格模式让你疲于应对?或者,你正在处理大量非结构化数据,关系型数据库的性能瓶颈逐渐显现?这时候,你可能…

    开发工具 2025年12月3日
    000
  • 如何用Java操作MongoDB?MongoClient连接方案

    java开发者操作mongodb最常用的方式是通过mongoclient连接数据库。1. mongoclient是核心类,用于管理连接并提供对集合和文档的操作能力;2. 支持本地或远程连接,本地使用new mongoclient(),远程需指定ip和端口;3. 若启用认证,需传入用户名、密码及认证数…

    2025年12月3日
    000
  • SQL增量聚合计算怎么写_SQL增量式聚合计算方法详解

    增量聚合计算通过仅处理数据变化部分提升效率。1. 利用时间戳、版本号或变更日志识别变更;2. 使用自定义聚合函数、窗口函数或子查询计算增量;3. 维护聚合结果表并结合索引、分区、物化视图优化性能;4. 通过事务、幂等性、快照隔离保证一致性;5. 可选流处理框架(如Flink)、NoSQL、内存数据库…

    2025年12月3日 数据库
    000
  • MongoDB中find()和findOne()有何不同?

    find()返回匹配文档的游标,适用于多条数据查询与分页操作;findOne()返回首个匹配文档或null,适合单条数据检索,性能更优。 在MongoDB中,find() 和 findOne() 都用于查询数据,但它们的返回结果和使用场景有明显区别。 返回结果不同 find() 返回一个游标(cur…

    2025年12月3日 数据库
    000
  • mongodb怎么看数据库信息?

    执行 show dbs 可查看所有数据库,包括系统和用户数据库;2. 输入 db 显示当前操作的数据库名称,默认为 test;3. 使用 use 数据库名 切换到指定数据库,若数据库不存在且无数据则不会显示;4. 运行 db.stats() 查看数据库状态,包含集合数、文档总数、数据大小、存储空间及…

    2025年12月3日 数据库
    000
  • mongodb有主键吗?

    MongoDB通过_id字段实现类似主键的唯一性控制:插入文档时自动创建ObjectId类型的_id,确保集合内唯一并自带索引;可手动指定_id值以存储自然唯一键,利用其唯一性避免重复;与传统主键不同的是_id无需显式定义、支持多种类型且可修改,但需保证唯一性;基于_id可高效执行查询、更新和删除操…

    2025年12月3日 数据库
    000
  • mongodb数据库收费吗

    MongoDB开源免费,但云服务商托管服务如阿里云、腾讯云、MongoDB Atlas等按配置收费,包含计算、存储、备份及流量等项目,提供包年包月与按量付费模式,部分平台如Atlas提供M0免费集群用于学习。 MongoDB 本身是开源的,可以免费下载和使用。但当你使用云服务商托管的 MongoDB…

    2025年12月3日 数据库
    000
  • mongodb如何删除字段

    使用$unset操作符可删除MongoDB文档中的字段,语法为db.collection.update({条件},{$unset:{字段名:””}}),示例:db.users.update({_id:1},{$unset:{age:””}})将删除ag…

    2025年12月3日 数据库
    000
  • mongodb客户端官网下载不了怎么办

    先登录账号再使用直链下载。登录MongoDB官网账号后,选择版本获取直链,在新标签页打开可绕过跳转失败问题,配合更换网络或代理可解决无法下载问题。 遇到 MongoDB 官网下载不了的情况,通常是因为网络问题或官网的登录重定向机制。直接点击“Download”按钮没反应是常见现象,可以尝试以下几种方…

    2025年12月3日 数据库
    000
  • mongodb怎么装成服务

    先创建数据日志目录并配置文件,再用sc命令安装Windows服务或systemd配置Linux服务,确保权限和路径正确后启动。 在 Windows 或 Linux 上把 MongoDB 安装成系统服务,可以让它随系统启动自动运行,无需手动开启。下面分别介绍两种系统的操作方法。 Windows 上将 …

    2025年12月3日 数据库
    000
  • mongodb复制集搭建步骤

    搭建MongoDB复制集需准备至少3个节点,安装相同版本MongoDB并配置网络通信,生成keyFile用于认证;分别启动各节点实例并指定replSet、dbpath和keyFile;通过rs.initiate()初始化复制集,使用rs.add()添加成员,可选仲裁节点;最后通过rs.status(…

    2025年12月3日 数据库
    000

发表回复

登录后才能评论
关注微信