搜索结果
查询Tags标签: kafka,共有 918条记录-
一次严重生产问题日记(初步怀疑是重启项目导致redis锁没有释放的问题)
2021.11.17 今天,考试系统出现生产问题。 1.老师反馈,无法创建考试、发布考试。 2.学员反馈,无法打开"我的考试"列表,无法参加考试、提交考试后成绩无法显示,一直处于"成绩正在计算中"页面。 开发人员自测,发现整个系统感觉变慢,响应时间变长;…
2021/12/4 19:16:35 人评论 次浏览 -
Linux系统单机版zookeeper&kafka安装
Zookeeper安装1、下载zookeeper的安装包之后">, 解压到目录. #cd /usr/local #tar xvfz 文件名.tar.gz 2、修改配置 进入zookeeper目录下的conf子目录, 创建zoo.cfg(或者直接重命名zoo-sample.cfg): 修改相关参数: 1、tickTime=2000 2、dataDir=/usr/local…
2021/12/4 7:19:38 人评论 次浏览 -
Linux系统单机版zookeeper&kafka安装
Zookeeper安装1、下载zookeeper的安装包之后">, 解压到目录. #cd /usr/local #tar xvfz 文件名.tar.gz 2、修改配置 进入zookeeper目录下的conf子目录, 创建zoo.cfg(或者直接重命名zoo-sample.cfg): 修改相关参数: 1、tickTime=2000 2、dataDir=/usr/local…
2021/12/4 7:19:38 人评论 次浏览 -
Kafka源码的学习框架:覆盖Kafka核心机制的方方面面
一、Kafka 总览 1)kafka 集群是由 broker 组成,每个 borker 拥有一个 controller,基于 zookeeper 做集群 controller leader 选举,以及存储集群核心元数据,leader controller 负责管理整个集群; 2)以 Topic->partition-> replication 来存储生产者数据,每个…
2021/12/3 20:37:15 人评论 次浏览 -
Kafka源码的学习框架:覆盖Kafka核心机制的方方面面
一、Kafka 总览 1)kafka 集群是由 broker 组成,每个 borker 拥有一个 controller,基于 zookeeper 做集群 controller leader 选举,以及存储集群核心元数据,leader controller 负责管理整个集群; 2)以 Topic->partition-> replication 来存储生产者数据,每个…
2021/12/3 20:37:15 人评论 次浏览 -
kafka 学习笔记1
Event streaming is the digital equivalent of the human body’s central nervous system概述 分布式基于发布/订阅模式的消息队列,应用于大数据实时处理领域。 1 6 3005 应用 异步处理 两种模式 点对点 消费者主动拉取消息发布订阅 一对多 消费者消费数据后不会清除消…
2021/12/1 23:10:05 人评论 次浏览 -
kafka 学习笔记1
Event streaming is the digital equivalent of the human body’s central nervous system概述 分布式基于发布/订阅模式的消息队列,应用于大数据实时处理领域。 1 6 3005 应用 异步处理 两种模式 点对点 消费者主动拉取消息发布订阅 一对多 消费者消费数据后不会清除消…
2021/12/1 23:10:05 人评论 次浏览 -
Linux操作中最令人难忘的一些快捷键总结,kafka核心技术与实战
命令/快捷键作用Tab双击自动补全,类似简单的下面将不在赘述Ctrl + C 强制终止当前命令进程Ctrl + Z 把当前执行的命令进程挂载到后台(后台运行)Ctrl + L 清屏Ctrl + A将光标移动到命令行首 Ctrl + E 将光标移动到命令行末 Ctrl + U 删除“光标前的”所有字…
2021/12/1 7:11:14 人评论 次浏览 -
Linux操作中最令人难忘的一些快捷键总结,kafka核心技术与实战
命令/快捷键作用Tab双击自动补全,类似简单的下面将不在赘述Ctrl + C 强制终止当前命令进程Ctrl + Z 把当前执行的命令进程挂载到后台(后台运行)Ctrl + L 清屏Ctrl + A将光标移动到命令行首 Ctrl + E 将光标移动到命令行末 Ctrl + U 删除“光标前的”所有字…
2021/12/1 7:11:14 人评论 次浏览 -
14) 21.11.29 浅谈 Kafka了解
1.认识Kafka Kafka对消息保存时依据Topic进行归类,发送消息成为Producer,消息接受者成为Consumer,此外Kafka集群有多个Kafka实例组成,每个实例(server)称为broker. 低版本之前集群,con和pro都依赖zk保证系统可用性,为集群保存meta信息。 2.概念 1).Kafka作为一个集…
2021/11/29 23:36:21 人评论 次浏览 -
14) 21.11.29 浅谈 Kafka了解
1.认识Kafka Kafka对消息保存时依据Topic进行归类,发送消息成为Producer,消息接受者成为Consumer,此外Kafka集群有多个Kafka实例组成,每个实例(server)称为broker. 低版本之前集群,con和pro都依赖zk保证系统可用性,为集群保存meta信息。 2.概念 1).Kafka作为一个集…
2021/11/29 23:36:21 人评论 次浏览 -
Kafka为什么不像redis和mysql可以支持主从分离呢
作者:huxihx 链接:https://www.zhihu.com/question/327925275/answer/705690755 来源:知乎 首先明确一下:主从分离与否没有绝对的优劣,它仅仅是一种架构设计,各自有适用的场景。 第二、如你所说,Redis和MySQL都支持主从读写分离,我个人觉得这和它们的使用场景有关…
2021/11/26 19:13:14 人评论 次浏览 -
Kafka为什么不像redis和mysql可以支持主从分离呢
作者:huxihx 链接:https://www.zhihu.com/question/327925275/answer/705690755 来源:知乎 首先明确一下:主从分离与否没有绝对的优劣,它仅仅是一种架构设计,各自有适用的场景。 第二、如你所说,Redis和MySQL都支持主从读写分离,我个人觉得这和它们的使用场景有关…
2021/11/26 19:13:14 人评论 次浏览 -
大数据学习路线
关注公众号:大数据技术派,回复“资料”,领取1000G资料。 本文首发于我的个人博客:大数据学习路线前言要从事计算机行业的工作,不管是什么工作,开发、测试、还是算法等,都是要有一门自己比较熟练的编程语言,编程语言可以是C语言、Java、C++等,只要是和你后续工作所…
2021/11/26 6:09:45 人评论 次浏览 -
大数据学习路线
关注公众号:大数据技术派,回复“资料”,领取1000G资料。 本文首发于我的个人博客:大数据学习路线前言要从事计算机行业的工作,不管是什么工作,开发、测试、还是算法等,都是要有一门自己比较熟练的编程语言,编程语言可以是C语言、Java、C++等,只要是和你后续工作所…
2021/11/26 6:09:45 人评论 次浏览