搜索结果
查询Tags标签： 集群，共有 1097条记录-
【MongoDB】从复制集迁移到分片集群
迁移的过程 1.为Confiugure Server初始化最少包含三个节点的副本集（另一个成员可以作为隐藏节点用于备份中）。 2.现有副本集执行必要的操作系统、硬件和磁盘级别的调优。 3.在mongod配置文件中为Config服务器设置适当的 clusterRole。 4.为查询路由器（MongoS）创建至少…
2022/6/6 2:19:58 人评论 次浏览 -
Spark 程序打包在集群运行
环境准备 1、pom 文件引入相关依赖&插件<dependencies><dependency><groupId>org.apache.spark</groupId><artifactId>spark-core_2.12</artifactId><version>3.0.0</version></dependency></dependencies&…
2022/5/28 1:20:47 人评论 次浏览 -
k8s集群部署mysql完整过程记录
挂载MySQL数据卷 在k8s集群中挂载MySQL数据卷 需要安装一个NFS。 在主节点安装NFSyum install -y nfs-utils rpcbind在主节点创建目录mkdir -p /nfschmod 777 /nfs 更改归属组与用户chown -R nfsnobody:nfsnobody /nfs 配置共享目录echo "/nfs *(insecure,rw,sync,no…
2022/5/27 2:20:27 人评论 次浏览 -
【Redis】集群命令处理
集群请求命令处理 在Redis的命令处理函数processCommand（server.c）中有对集群节点的处理，满足以下条件时进入集群节点处理逻辑中：启用了集群模式，通过server.cluster_enabled判断 发送命令的节点不是主节点 收到的命令中包含了key参数或者命令是EXEC，EXEC命令与MULT…
2022/5/27 2:20:06 人评论 次浏览 -
如何提高系统吞吐性能
1.从系统全局设计角度集群部署集群部署一般都与网关进行配合，集群部署有如下好处：配合网关路由策略，进行分流；根据实际的流量变动进行动态扩容。系统微服务化采用微服务的部署方式，对整体业务进行拆分，有如下好处：根据业务进行划分，操作更有针对性；操作不同的功能…
2022/5/24 23:21:01 人评论 次浏览 -
三、单redis升级redis集群+哨兵
针对假如已经是安装了redis，只是是单部署，需要把他切换成redis集群+哨兵模式，我因为偷懒，就写了个脚本来执行，各位看官，请品~你品~你细品~ 首先准备个升级包，放到任意路径，内容如下： 第一个文件不用管，第二个跟第四个，是把里面的配置改好，如何配置请参考我之前…
2022/5/12 19:27:23 人评论 次浏览 -
CDH升级到CDP大数据集群碰到的问题解析
一、背景2019 年，Cloudera 与 Hortonworks 合并后，彻底完成了转型。Cloudera 果断宣布，对 CDH 和 HDP 两条产品线将仅支持到 2022 年。对于两个产品高度重合的部分会做删减和融合，结果就是推出新的数据平台 CDP （Cloudera Data Platform）。2022 年后，原 CDH 和 HDP…
2022/5/5 23:20:42 人评论 次浏览 -
使用Docker在本地搭建Rabbitmq集群
本文用于演示如何在本地使用Docker搭建RabbitMQ集群。 erlang cookie erlang节点间通讯需要具有相同的erlang cookie值，erlang cookie的值在.erlang.cookie文件中，位置在家目录下， 通常是/var/lib/rabbitmq。这里通过Docker volume来共享erlang cookie：docker volume …
2022/5/4 23:44:19 人评论 次浏览 -
Eureka从Apollo迁移到单独Eureka
目录迁移物理架构演变Eureka升级准备升级过程扩容旧eureka集群业务服务切换到新 eureka将新 eureka 组成独立的集群回滚eureka可能出现的问题数据不同步 迁移物理架构演变Eureka升级准备验证新Eureka 和旧Eureka 主机网络是否连通 备份Apollo 数据库 apolloconfigdb中serv…
2022/5/2 23:45:20 人评论 次浏览 -
ElasticSearch学习笔记（二）
API创建索引及文档 找文档 网上的es教程大都十分老旧，而且es的版本众多，个别版本的差异还较大，另外es本身提供多种api，导致许多文章各种乱七八糟实例！所以后面直接放弃，从官网寻找方案，这里我使用elasticsearch最新的7.6.1版本来讲解。 1、进入es的官网指导文档 ht…
2022/4/29 23:12:46 人评论 次浏览 -
MySQL集群配置
集群概述 MySQL复制技术 集群目的： 负载均衡：解决高并发 高可用HA：服务可用性 远程灾备：数据有效性1.在主库上把数据更改记录到二进制日志中。 2.备库I/O线程将主库上的二进制日志复制到备库的中继日志中。 3.备库SQL线程读取中继日志中的事件，将其重放到备库数据库上…
2022/4/29 19:13:31 人评论 次浏览 -
Zookeeper完全分布式集群的搭建
一、集群模式 1、单机模式 2、伪分布式 3、完全分布式 二、zookeeper完全分布式集群的搭建 1、准备虚拟机 2、安装jdk 3、搭建集群 3.1．下载安装包 3.2．集群配置 3.2.1 修改配置文件zoo.cfg 3.2.2 myid 3.2.3.拷贝 4、启动zookeeper 5、测试zookeeper 5.1 在Zookeeper上…
2022/4/26 6:16:01 人评论 次浏览 -
HM-SpringCloud微服务系列10.4【Redis分片集群】
1. 搭建分片集群 1.1 集群结构 分片集群需要的节点数量较多，这里我们搭建一个最小的分片集群，包含3个master节点，每个master包含一个slave节点，结构如下：这里我们会在同一台虚拟机中开启6个redis实例，模拟分片集群，信息如下：IP PORT 角色10.193.193.141 7001 mast…
2022/4/25 19:12:39 人评论 次浏览 -
直播CDN介绍
0.前言 以下内容是从一个运维的角度看待问题，主要借鉴了某某云和某站的直播架构总结的经验，还加入了一些自己的思考，希望能在CDN这条道路上走得更远。 1.直播CDN介绍 一个直播业务，大致分为三步：主播推流 直播中心接收流 边缘节点为用户提供分发可以参考云厂商官方…
2022/4/23 23:17:14 人评论 次浏览 -
MySQL Router重装后重新连接集群进行引导出现的——此主机中之前已配置过的问题
问题出现的前因：因为重新安装了MySQL Router，然后打算重新连接上目标集群进行MySQL Router的初始化引导，结果报错了！[root@linux666 system]# mysqlrouter --bootstrap icadmin@linux03:3306 --user root Please enter MySQL password for icadmin: # Bootstrapping…
2022/4/23 19:14:20 人评论 次浏览
