搜索结果
查询Tags标签: kafka,共有 918条记录-
Linux部署Logstash
1 下载 [root@localhost ~]# cd /home/elk 1.1 ELK7.8.1 [root@localhost elk]# wget https://artifacts.elastic.co/downloads/logstash/logstash-7.8.1.tar.gz [root@localhost elk]# wget https://artifacts.elastic.co/downloads/kibana/kibana-7.8.1-linux-x86_64.ta…
2021/8/23 7:28:37 人评论 次浏览 -
Linux部署Logstash
1 下载 [root@localhost ~]# cd /home/elk 1.1 ELK7.8.1 [root@localhost elk]# wget https://artifacts.elastic.co/downloads/logstash/logstash-7.8.1.tar.gz [root@localhost elk]# wget https://artifacts.elastic.co/downloads/kibana/kibana-7.8.1-linux-x86_64.ta…
2021/8/23 7:28:37 人评论 次浏览 -
KafKa随笔
Kafka 1、概述 kafka是一个分布式、分区的、多副本的、多订阅者的消息发布订阅系统(分布式MQ系统),可以用于搜索日志,监控日志,访问日志等 kafka对消息保存是根据Topic进行归类,kafka集群有多个kafka实例组成,每个实例(server)成为broker。无论是kafka集群,还是pr…
2021/8/22 23:59:57 人评论 次浏览 -
KafKa随笔
Kafka 1、概述 kafka是一个分布式、分区的、多副本的、多订阅者的消息发布订阅系统(分布式MQ系统),可以用于搜索日志,监控日志,访问日志等 kafka对消息保存是根据Topic进行归类,kafka集群有多个kafka实例组成,每个实例(server)成为broker。无论是kafka集群,还是pr…
2021/8/22 23:59:57 人评论 次浏览 -
搭建kafka
Kafka 被称为下一代分布式消息系统,由 scala 和 Java 编写,是非营利性组织 ASF(Apache Software Foundation,简称为 ASF)基金会中的一个开源项目,比如 HTTP Server、Hadoop、ActiveMQ、Tomcat 等开源软件都属于 Apache 基金会的开 源软件,类似的消息系统还有 RbbitMQ…
2021/8/20 23:09:04 人评论 次浏览 -
搭建kafka
Kafka 被称为下一代分布式消息系统,由 scala 和 Java 编写,是非营利性组织 ASF(Apache Software Foundation,简称为 ASF)基金会中的一个开源项目,比如 HTTP Server、Hadoop、ActiveMQ、Tomcat 等开源软件都属于 Apache 基金会的开 源软件,类似的消息系统还有 RbbitMQ…
2021/8/20 23:09:04 人评论 次浏览 -
我这三年被kafka坑惨了
前言 我的上家公司是做餐饮系统的,每天中午和晚上用餐高峰期,系统的并发量不容小觑。为了保险起见,公司规定各部门都要在吃饭的时间轮流值班,防止出现线上问题时能够及时处理。 我当时在后厨显示系统团队,该系统属于订单的下游业务。用户点完菜下单后,订单系统会通过…
2021/8/20 23:08:38 人评论 次浏览 -
我这三年被kafka坑惨了
前言 我的上家公司是做餐饮系统的,每天中午和晚上用餐高峰期,系统的并发量不容小觑。为了保险起见,公司规定各部门都要在吃饭的时间轮流值班,防止出现线上问题时能够及时处理。 我当时在后厨显示系统团队,该系统属于订单的下游业务。用户点完菜下单后,订单系统会通过…
2021/8/20 23:08:38 人评论 次浏览 -
liunx 常用命令
#ktr [root@yx-airflow-kettle-common-di-754c6b54fb-jh4fb data-integration]# ./pan.sh -file=./kettle_all/test.ktr 后台运行 nohup ./kitchen.sh -file=./kettle_all/kafka_INCREMENT/kafka_main.kjb & tail -n 100 nohup.out 调用作业./kitchen.sh -file=./k…
2021/8/18 23:36:44 人评论 次浏览 -
liunx 常用命令
#ktr [root@yx-airflow-kettle-common-di-754c6b54fb-jh4fb data-integration]# ./pan.sh -file=./kettle_all/test.ktr 后台运行 nohup ./kitchen.sh -file=./kettle_all/kafka_INCREMENT/kafka_main.kjb & tail -n 100 nohup.out 调用作业./kitchen.sh -file=./k…
2021/8/18 23:36:44 人评论 次浏览 -
Kafka 常用命令总结
在 0.9.0.0 之后的 Kafka,出现了几个新变动,一个是在 Server 端增加了 GroupCoordinator 这个角色,另一个较大的变动是将 topic 的 offset 信息由之前存储在 zookeeper 上改为存储到一个特殊的 topic(__consumer_offsets)中。 本文测试版本:kafka_2.11-2.2.0 启动 K…
2021/8/16 23:36:09 人评论 次浏览 -
Kafka 常用命令总结
在 0.9.0.0 之后的 Kafka,出现了几个新变动,一个是在 Server 端增加了 GroupCoordinator 这个角色,另一个较大的变动是将 topic 的 offset 信息由之前存储在 zookeeper 上改为存储到一个特殊的 topic(__consumer_offsets)中。 本文测试版本:kafka_2.11-2.2.0 启动 K…
2021/8/16 23:36:09 人评论 次浏览 -
kafka07-spring整合kafka
版本信息kafka 1.0.2 spring-kafka高版本兼容低版本 pom <dependencies><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency><dependency><grou…
2021/8/15 23:37:52 人评论 次浏览 -
kafka07-spring整合kafka
版本信息kafka 1.0.2 spring-kafka高版本兼容低版本 pom <dependencies><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency><dependency><grou…
2021/8/15 23:37:52 人评论 次浏览 -
Druid 加载 Kafka 流数据的 索引属性(IndexSpec)
下面的表格主要对加载 Kafka 流数据的索引属性进行参数描述。字段(Field)类型(Type)描述(Description)是否必须(Required)bitmap Object 针对 bitmap indexes 使用的是压缩格式。应该是一个 JSON 对象,请参考 Bitmap types 来了解更多 N(默认=Roaring)dimensio…
2021/8/12 6:36:28 人评论 次浏览