搜索结果
查询Tags标签： 集群，共有 1097条记录-
hadoop集群安全模式
（1）hdfs dfsadmin -safemode get （功能描述：查看安全模式状态） （2）hdfs dfsadmin -safemode enter （功能描述：进入安全模式状态） （3）hdfs dfsadmin -safemode leave （功能描述：离开安全模式状态） （4）hdfs dfsadmin -safemode wait （功能描述…
2021/6/16 10:51:01 人评论 次浏览 -
为什么redis集群的最大槽数是16384个？
Redis 集群并没有使用一致性hash，而是引入了哈希槽的概念。Redis 集群有16384个哈希槽，每个key通过CRC16校验后对16384取模来决定放置哪个槽，集群的每个节点负责一部分hash槽。但为什么哈希槽的数量是16384（2^14）个呢，这个问题在github上有人提过，作者也给出了解答…
2021/6/15 19:21:30 人评论 次浏览 -
Redis 的 3 种集群方案对比，写得非常好！
作者：Kaito 来源：kaito-kidd.com/2020/07/07/redis-cluster-codis-twemproxy 之前我们提到，为了保证Redis的高可用，主要需要以下几个方面： 数据持久化主从复制自动故障恢复集群化 我们简单理一下这几个方案的特点，以及它们之间的联系。 数据持久化本质上是为了做数据…
2021/6/14 19:26:25 人评论 次浏览 -
Redis 的 3 种集群方案对比，写得非常好！
作者：Kaito 来源：kaito-kidd.com/2020/07/07/redis-cluster-codis-twemproxy 之前我们提到，为了保证Redis的高可用，主要需要以下几个方面：数据持久化 主从复制 自动故障恢复 集群化我们简单理一下这几个方案的特点，以及它们之间的联系。 数据持久化本质上是为了做数…
2021/6/14 19:26:23 人评论 次浏览 -
kubernetes基于kubeadm搭建集群
服务器资源： 192.168.2.10 master01 192.168.2.11 master02 192.168.2.12 master03 192.168.2.20 node01 192.168.2.21 node02 192.168.2.16 k8svip 一、基础环境准备 1、修改服务器主机名、设置hosts本地解析主机名 分别修改5台服务器的/etc/hosts文件…
2021/6/14 18:20:57 人评论 次浏览 -
集群时间同步
集群同步的方式 找一个机器，作为时间服务器，所有的机器与这台集群时间进行定时的同步，比如，每隔一分钟，同步一次时间。 步骤 1.时间服务器配置（必须为root用户，使用 su root 修改为root用户） （1）检查ntp是否安装 [root@hadoop102 ~]# rpm -qa|grep ntp截图 （2…
2021/6/14 10:25:14 人评论 次浏览 -
搭建K8S单点集群
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。这个工具能通过两条指令完成一个kubernetes集群的部署：# 创建一个 Master 节点 $ kubeadm init# 将一个 Node 节点加入到当前集群中 $ kubeadm join <Master节点的IP和端口 > 1. 安装要求在开始之前…
2021/6/13 10:21:03 人评论 次浏览 -
原来这就是Redis Cluster
兄弟萌，想必大家学习 Redis 时，都听说过 Redis Cluster 吧，有没有想过这样一个问题，做 Redis 集群时，有了哨兵机制就能够实现监控以及自动故障转移，还要 Redis Cluster 干嘛呢？ 下面，我们就深入聊一下 Redis Cluster，废话不多说，Let’s Go！ 大家知道，Redis 有…
2021/6/13 2:23:53 人评论 次浏览 -
虚拟机中搭建去中心化Redis伪集群
简介：Redis集群 Redis 集群实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N。 Redis 集群通过分区（partition）来提供一定程度的可用性（availability）： 即使集群中有一部分节点失效或者无法进行通讯， 集…
2021/6/12 19:22:39 人评论 次浏览 -
Spark和Java API（四）分区
RDD的分区是什么？ RDD，顾名思义它是分布式的，那么它是怎么实现分布式呢？答案就是分区，也即是一个RDD会将计算逻辑分布在整个集群中。这很像kafka中的topic的分区，通过水平扩展的方式提供系统的吞吐量。那么分区是如何分布在整个集群中呢？我们拿hdfs举例，假设hdfs上…
2021/6/11 14:21:02 人评论 次浏览 -
基于Dokcer搭建Redis集群（主从集群），冲就完了
本文基于 Docker + Redis 5.0.5 版本，通过 cluster 方式创建一个 6 个 redis 实例的主从集群，当然文章会指出相应的参数说明，这样即便是创建 9 个实例的集群方式也是一样的。 1、拉取 Redis 镜像 基于 Redis：5.0.5 版本，执行如下指令： docker pull redis:5.0.52、创…
2021/6/11 2:21:59 人评论 次浏览 -
redis 版本升级数据迁移使用Redis-Shake
RedisShake是一款开源的Redis迁移工具，支持Cluster集群的在线迁移与离线迁移（备份文件导入）。DCS Cluster集群与Redis Cluster集群设计一致，数据可平滑迁移。本文以Linux系统环境为例，介绍如何使用Redis-Shake工具进行Cluster集群数据迁移在线迁移在线迁移主要适用于…
2021/6/10 19:34:36 人评论 次浏览 -
docker swarm集群搭建
简介 Swarm：作用于运行docker engine（引擎）的多个主机组成的集群。 node：每一个docker engine都是一个node（节点），分为manager和worker。 manager node：负责执行容器的编排和集群的管理工作，保持并维护swarm处于期望的状态。swarm可以有多个manager node，它们会…
2021/6/10 10:35:55 人评论 次浏览 -
教你在 Kubernetes 中快速部署 ES 集群
摘要：ES 集群是进行大数据存储和分析，快速检索的利器，本文简述了 ES 的集群架构，并提供了在 Kubernetes 中快速部署 ES 集群的样例；对 ES 集群的监控运维工具进行了介绍，并提供了部分问题定位经验，最后总结了常用 ES 集群的 API 调用方法。本文分享自…
2021/6/10 10:35:44 人评论 次浏览 -
Redis面试题整理（有pdf版）
1、什么是 Redis？简述它的优缺点？ Redis 的全称是：Remote Dictionary.Server，本质上是一个 Key-Value 类型的内存数据库，很像memcached，整个数据库统统加载在内存当中进行操作，定期通过异步操作把数据库数据 flush 到硬盘上进行保存。因为是纯内存操作，Redis 的性…
2021/6/10 2:21:19 人评论 次浏览
