搜索结果
查询Tags标签： kafka，共有 918条记录-
java分布式面试题之消息队列ActiveMQ部分
java分布式面试题之消息队列ActiveMQ部分 java分布式面试题之消息队列ActiveMQ部分 1、如何使用ActiveMQ解决分布式事务？ 在互联网应用中，基本都会有用户注册的功能。在注册的同时，我们会做出如下操作： 收集用户录入信息，保存到数据库 向用户的手机或邮箱发送验证码 …
2021/6/8 12:22:23 人评论 次浏览 -
linux - CentaOS 7 - 安装kafka
docker安装kafka 1、下载zookeeper镜像docker pull wurstmeister/zookeeper 2、下载kafka镜像docker pull wurstmeister/kafka 3、查看镜像docker images 4、单机方式先启动zookeeper容器#单机方式 docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeepe…
2021/6/8 7:21:18 人评论 次浏览 -
深入理解Kafka副本机制
转载自：Kafka 系列（五）—— 深入理解Kafka副本机制_黑白影的博客-CSDN博客 一、Kafka集群 Kafka 使用 Zookeeper 来维护集群成员 (brokers) 的信息。每个 broker 都有一个唯一标识 broker.id，用于标识自己在集群中的身份，可以在配置文件 server.properties 中进行配置…
2021/6/7 18:53:32 人评论 次浏览 -
Java面试：2021.05.29
1、Kafka的架构是怎样的？Kafka 的整体架构非常简单，是分布式架构，Producer、Broker 和Consumer 都可以有多个。 1.Producer，Consumer 实现 Kafka 注册的接口。 2.数据从 Producer 发送到 Broker 中，Broker 承担一个中间缓存和分发的作用。 3.Broker 分发注册到系统…
2021/6/7 12:21:34 人评论 次浏览 -
【linux-centos】php-rdkafka扩展安装
安装php-rdkafka 扩展 ***先安装librdkafka >>>源码方式安装 git clone https://github.com/edenhill/librdkafka librdkafka-master.zip unzip librdkafka-master.zip cd librdkafka-master ./configure make make install …
2021/6/7 7:24:07 人评论 次浏览 -
Kafka 简介及Centos 6.5环境下的安装
kafka简介官网：它是一个分布式的流处理平台 Apache Kafka是一个开源消息系统，由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。Kafka最初是由LinkedIn开发，并于2011年初开源。2012年10月从Apache Incubator毕业。该项目的目标是为处理实时数据提供一个统…
2021/6/5 7:24:39 人评论 次浏览 -
干货精讲！java遍历map的key和value
思维导图前言 在很多时候，我们都可以在各种框架应用中看到ZooKeeper的身影，比如Kafka中间件，Dubbo框架，Hadoop等等。为什么到处都看到ZooKeeper？目录 Kafka的基本介绍Kafka的设计原理分析Kafka数据传输的事务特点Kafka消息存储格式副本（replication）策略Kafka消息分…
2021/6/4 20:23:42 人评论 次浏览 -
部署kafka集群
环境 centos7.5 [root@node-2 config]# java -version openjdk version "1.8.0_262"cat >> /etc/hosts << EOF 192.168.2.128 node-1 192.168.2.129 node-2 192.168.2.130 node-3 EOFyum install java-1.8.0-openjdk -ymkdir -p /soft/src cd /soft…
2021/6/4 18:53:39 人评论 次浏览 -
Apache Kafka-初体验Kafka(03)-Centos7下搭建kafka集群
文章目录 概述 部署信息 配置信息 验证概述 对于kafka来说，一个单独的broker意味着kafka集群中只有一个节点。要想增加kafka集群中的节点数量，只需要多启动几个broker实例即可。 单个节点的安装： Kafka-初体验Kafka(02)-Centos7下搭建单节点kafka_2.11‐1.1.0 这里我们…
2021/6/4 7:24:57 人评论 次浏览 -
大数据开发：Kafka producer设计原理
关于Kafka这个组件，作为大数据技术生态当中流行的消息组件，得到越来越多的市场认可，kafka与大数据技术生态的诸多组件，也能实现很好地集成，地位也越来越稳固。今天的大数据开发学习分享，我们就主要来讲讲Kafka producer设计原理。 1.序列化消息&计算partition …
2021/6/3 18:28:05 人评论 次浏览 -
Kafka Java API+自定义分区
kafka的API第一步：导入kafka的开发jar包 Kafka生产者@Test public void kafkaProducer() throws Exception { //1、准备配置文件 Properties props = new Properties(); props.put("bootstrap.servers", "hadoop-001:9092,ha…
2021/6/2 20:22:44 人评论 次浏览 -
kafka java api
1、消费者 package com.asiainfo.group.kafka.consumer;import java.io.FileReader; import java.util.ArrayList; import java.util.List; import java.util.Map; import java.util.Properties;import org.apache.kafka.clients.consumer.ConsumerRecord; import org.ap…
2021/6/2 12:22:38 人评论 次浏览 -
这可能是你见过大数据岗位最全，最规范的面试准备大纲 !(建议收藏）
本篇博客所分享的知识非常硬核,建议各位看官(尤其是大数据专业的同学啊)，赶紧搬好小板凳，带好西瓜，我们边看边吃瓜。说错了，是带着小本，边看边记下来申明：本篇仅仅只是作为一个大纲目录，具体内容我会在后续详细展开说明! 为什么这么说，继续往下看大家就明白了~文章…
2021/6/2 10:28:56 人评论 次浏览 -
最佳实践｜Apache Pulsar 在华为云物联网之旅
关于 Apache Pulsar Apache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流…
2021/6/2 10:23:53 人评论 次浏览 -
贼好用的Java学习路线集合，360mysql启动不了
导语回首向来萧瑟处，归去，也无风雨也无晴。我一哥们也是做Java开发，暂且先叫他峰哥吧，到今年已经入行6年了，每天还是写一些业务代码，至今还是个单身狗，愁的头发真的都快谢顶了。虽然峰哥每天做着CRUD的工作，但每天还是做着能进BAT的梦，尤其是今年，公司扛不住疯狂…
2021/6/1 19:26:09 人评论 次浏览
