搜索结果
查询Tags标签： Shard，共有 17条记录-
mongodb集群分片数据不同步
异常现象被删除的数据自动被还原回来连接每个shard查询操作查看每个shard分片副本的状态MongoDB分片集群节点状态stateStr:RECOVERING1.停止mongod服务2.备份原来的数据目录3.重新启动mongod shard服务分片状态解析
2022/7/7 2:21:39 人评论 次浏览 -
MongoDB专业用语翻译
英文名词 中文 aggregation 聚合aggregation framework 聚合框架arbiter 投票机B-tree B树balancer 平衡器BSON BSONCAP Theorem CAP 定理capped collection 封顶集合chunk 数据段（在分片环境）cluster 集群collection 集合compound index 复合索引config database 配置数…
2022/5/25 2:21:35 人评论 次浏览 -
分布式数据层中间件详解：如何实现分库分表+动态数据源+读写分离
分布式数据层中间件 1.简介 分布式数据访问层中间件，旨在为供一个通用数据访问层服务，支持MySQL动态数据源、读写分离、分布式唯一主键生成器、分库分表、动态化配置等功能，并且支持从客户端角度对数据源的各方面（比如连接池、SQL等）进行监控，后续考虑支持NoSQL、Ca…
2022/1/28 23:10:41 人评论 次浏览 -
mongoDB面试题
1、你说的NoSQL数据库是什么意思？NoSQL与RDBMS直接有什么区别？为什么要使用和不使用NoSQL数据库？说一说NoSQL数据库的几个优点？ NoSQL是非关系型数据库，NoSQL=NotOnlySQL。 关系型数据库采用的结构化的数据，NoSQL采用的是键值对的方式存储数据。 在处理非结构化/半结…
2022/1/26 2:05:28 人评论 次浏览 -
[源码分析] Facebook如何训练超大模型---(4)
[源码分析] Facebook如何训练超大模型 --- (4) 目录[源码分析] Facebook如何训练超大模型 --- (4)0x00 摘要0x01 背景知识1.1 单精度、双精度和半精度浮点格式的区别1.2 多精度和混合精度计算的区别1.3 混合精度1.4 训练过程0x02 PyTorch2.1 英伟达算力2.2 Torch.cuda.a…
2022/1/24 20:05:01 人评论 次浏览 -
elasticsearch（四） index 跨集群迁移
项目一：elasticsearch 迁移方案 elasticsearch 索引迁移查看参考文档：https://www.elastic.co/guide/en/elasticsearch/reference/7.15/docs-reindex.html添加需要迁移的es集群白名单到 目的 es配置文件elasticsearch.yml reindex.remote.whitelist: "otherhost:92…
2022/1/10 23:08:16 人评论 次浏览 -
elasticsearch（四） index 跨集群迁移
项目一：elasticsearch 迁移方案 elasticsearch 索引迁移查看参考文档：https://www.elastic.co/guide/en/elasticsearch/reference/7.15/docs-reindex.html添加需要迁移的es集群白名单到 目的 es配置文件elasticsearch.yml reindex.remote.whitelist: "otherhost:92…
2022/1/10 23:08:16 人评论 次浏览 -
使用 MongoDB 存储日志数据
本文来自于【阿里云官方镜像站：阿里巴巴开源镜像站-OPSX镜像站-阿里云开发者社区 】 一、模式设计 一个典型的web服务器的访问日志类似如下，包含访问来源、用户、访问的资源地址、访问结果、用户使用的系统及浏览器类型等。 1. 127.0.0.1 - frank [10/Oct/2000:13:55:36…
2021/12/25 2:07:40 人评论 次浏览 -
使用 MongoDB 存储日志数据
本文来自于【阿里云官方镜像站：阿里巴巴开源镜像站-OPSX镜像站-阿里云开发者社区 】 一、模式设计 一个典型的web服务器的访问日志类似如下，包含访问来源、用户、访问的资源地址、访问结果、用户使用的系统及浏览器类型等。 1. 127.0.0.1 - frank [10/Oct/2000:13:55:36…
2021/12/25 2:07:40 人评论 次浏览 -
第五部分 架构篇 第二十一章 MongoDB Sharding 架构（实践）
这是一种将海量的数据水平扩展的数据库集群系统，数据分别存储在sharding的各个节点上，使用者通过简单的配置就可以很方便地构建一个分布式MongoDB集群。 MongoDB的数据分块成为chunk，每个chunk都是Collection中一段连续的数据记录，通常最大尺寸是200MB，超出则生成新的…
2021/12/19 2:20:17 人评论 次浏览 -
第五部分 架构篇 第二十一章 MongoDB Sharding 架构（实践）
这是一种将海量的数据水平扩展的数据库集群系统，数据分别存储在sharding的各个节点上，使用者通过简单的配置就可以很方便地构建一个分布式MongoDB集群。 MongoDB的数据分块成为chunk，每个chunk都是Collection中一段连续的数据记录，通常最大尺寸是200MB，超出则生成新的…
2021/12/19 2:20:17 人评论 次浏览 -
基于Docker搭建Mongodb分片（单机版）
一、Mongodb分片架构图 1、Config Server：配置服务器存储集群的元数据和配置设置。 2、Shard：数据分片，每个分片包含分片数据的一个子集。 每个分片都可以部署为一个副本集。 3、Mongos：mongos 充当查询路由器，提供客户端应用程序和分片集群之间的接口。 从 MongoD…
2021/6/15 19:21:03 人评论 次浏览 -
elasticsearch学习笔记——零 什么是 Elastic Search
零、 什么是 Elastic Search ElasticSearch 是一个基于 Lucene 的搜索服务器。它提供了一个分布式的全文搜索引 擎，其对外服务是基于 RESTful web 接口发布的。Elasticsearch 是用 Java 开发的应用， 并作为 Apache 许可条款下的开放源码发布，是当前流行的企业级搜索引擎…
2021/5/2 10:57:22 人评论 次浏览 -
数据库 shard 分片
2.1.1什么是数据切分"Shard" 这个词英文的意思是"碎片"，而作为数据库相关的技术用语，似乎最早见于大型多人在线角色扮演游戏中。"Sharding" 姑且称之为"分片"。Sharding 不是一门新技术，而是一个相对简朴的软件理念。众所周知…
2021/4/29 19:25:31 人评论 次浏览 -
mongodb-shard-分片-原理
文章目录 0 mongo查询简图（mongos-->config servers --> shard）1 分片是什么？为什么要用分片？2 分片分为几类？3 分片键的限制 和 选择逻辑4 分片后会对查询，写入等造成什么样的影响参考链接：0 mongo查询简图（mongos–>config servers --> shard） 实现…
2021/4/24 19:28:13 人评论 次浏览
