搜索结果
查询Tags标签： sources，共有 51条记录-
数据源:flume采集到的端口
推送式将flume采集的数据主动推送给Spark程序，容易导致Spark程序接受数据出问题，推送式整合是基于avro端口下沉地方式完成 引入SparkStreaming和Flume整合的依赖<dependency><groupId>org.apache.spark</groupId><artifactId>spark-streaming_2…
2022/8/31 23:22:49 人评论 次浏览 -
解决 idea无法下载源码 Sources not found for:XXX
解决 idea无法下载源码 Sources not found for:XXX 命令行输入 mvn dependency:resolve -Dclassifier=sources参考 https://blog.csdn.net/CSDN877425287/article/details/113923048
2022/8/1 1:22:46 人评论 次浏览 -
win11离线安装netframework3
1.下载cab包 2.以管理员方式运行dos，dism.exe /online /enable-feature /featurename:netfx3 /Source:D:\sources\sxs (D:\sources\sxs这里根据自己电脑情况建立文件夹) 3.在设置->应用中打开可勾选功能
2022/7/20 23:26:32 人评论 次浏览 -
Ubuntu软件更新更换源
镜像下载、域名解析、时间同步请点击 阿里云开源镜像站 安装ssh服务发现不能，原因是源出问题了 第一步点击软件更新第二步点击Orther第三步点击Chain第四步到这一步就好了 查看源是否更新成功 vi /etc/apt/sources.listsudo gedit /etc/apt/sources.list安装ssh 安装ssh-…
2022/7/9 5:20:28 人评论 次浏览 -
【Spark】spark.sql.sources.partitionOverwriteMode
参考：(80条消息) spark优化之分区插入_大怀特的博客-CSDN博客_spark插入// 覆盖指定分区table("tv_group").write.option("partitionOverwriteMode", "dynamic").partitionBy("store_id", "group_id"). mode(Sav…
2022/7/8 2:20:17 人评论 次浏览 -
[转]Moving MySQL from default folder to home folder or any disc space in Debian
原文：mysql 目录迁移 https://www.codegrepper.com/writeups/moving-mysql-from-default-folder-to-home-folder-or-any-disc-space-in-debian-b104114690bd31 -------------------- Moving MySQL from default folder to home folder or any disc space in DebianIf the…
2022/7/2 2:20:14 人评论 次浏览 -
flume 读目录下文件 ,同步到kafka
启动和配置flumeAgent 是一个 JVM 进程，它以事件（Event）的形式将数据从源头（Source）通过渠道（Channel）送至目标端（Sink）。 Agent 主要有 3 个部分组成，Source、Channel、Sink。# 目录->kafka a1.sources = s1 a1.sinks = k1 a1.channels = c1a1.sources.s1.c…
2022/6/12 23:51:39 人评论 次浏览 -
Flume
Flume Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。他有一个简单、灵活的基于流的数据…
2022/6/7 23:23:04 人评论 次浏览 -
IDEA插件安装
# IDEA插件安装 路径如下：IDEA -> Prefrence -> Plugs# ignore的安装和使用 插件市场安装。 使用的时候新建选择.ignore file，然后选择类型。# 我的git ignore 我的git ignore文件如下： ``` /zuikccms/target .idea/ target/### Java template # Compiled class …
2022/4/15 6:15:54 人评论 次浏览 -
使用Flume http进行数据采集
1. 编写Flume http配置文件 [root@sam01 scripts]# vim collect-app-http.conf# filename: collect-app-http.conf # 定义一个名字为 b1001 的agent # 定义channel b1001.channels = ch-1 # 定义source b1001.sources = src-1 # 定义sink b1001.sinks = k1# sink 接到 cha…
2022/2/25 23:24:28 人评论 次浏览 -
bench
A bench is a long seat on which multiple people may sit at the same time. Benches are typically made of wood, but may also be made of metal, stone, or synthetic materials. Many benches have arm and back rests; some have no back rest and can be sat on …
2022/2/14 23:11:44 人评论 次浏览 -
ubuntu20.04 安装 nodejs
# 改 apt 的源 # 清华源地址：https://mirror.tuna.tsinghua.edu.cn/help/ubuntu/ cd /etc/apt# 改前建议先备份 sources.list sudo vim sources.list# 编辑后保存，执行 sudo apt update# 若出现报错，可以将 sources.list 中的 https 改成 http 在执行 apt update# 接着…
2022/2/7 7:12:35 人评论 次浏览 -
图论基础知识
graph： 邻接矩阵（adjacency）: adjacency=[ [0,1,1,0,0,0],[1,0,1,1,0,0],[1,1,0,1,1,0],[0,1,1,0,1,1],[0,0,1,1,0,0],[0,0,0,1,0,0]]度 （degree）： 无向图的度： A：2；B：3 有向图：分为入度和出度 连通图和非连通图 最短路径 度中心性 度中心性=该点的degree / n…
2022/2/4 6:15:47 人评论 次浏览 -
Flume的四个入门案例（官方）
文章目录 Flume入门案例一：监控端口数据1）案例需求2）需求分析3）实现步骤 Flume入门案例二：实时监控单个追加文件1）案例需求：2）需求分析3）实现步骤 Flume入门案例三：实时监控目录下多个新文件1）案例需求2）需求分析3）实现步骤 Flume入门案例四：实时监控目录下…
2022/1/25 6:05:46 人评论 次浏览 -
ruby学习心得之配置环境
安装ruby + watir； 1、网上下载 最新版本的 ruby； 2、安装Devkit； 3、gem sources watir； 4、gem sources cucumber； 在安装过程中遇到的问题，输入 gem sources watir， 1）提示错误，Could not find a vaild gem ‘watir’ <>= 0 > in any repository， 更…
2022/1/13 17:03:37 人评论 次浏览
