热门标签
更多>
搜索结果
查询Tags标签： 数据湖，共有 3条记录-
聊聊流式数据湖Paimon(五)
从Demo入手，了解Paimon/Flink项目搭建的全过程。记录下采坑之旅。 创建Flink项目 在IDEA中创建Flink项目，由于没有Flink的archetype，因此需要手动创建一下。 参考：idea快速创建flink项目，至此Flink的项目框架就搭建起来了。 注意：必须注释掉pom文件中的provided；否…
2023/12/29 14:03:14 人评论 次浏览 -
聊聊流式数据湖Paimon(二)
当前的问题 Apache Paimon 最典型的场景是解决了 CDC (Change Data Capture) 数据的入湖；CDC 数据来自数据库。一般来说，分析需求是不会直接查询数据库的。容易对业务造成影响，一般分析需求会查询全表，这可能导致数据库负载过高，影响业务 分析性能不太好，业务数据库…
2023/12/26 1:03:18 人评论 次浏览 -
聊聊流式数据湖Paimon(三)
概述 如果表没有定义主键，则默认情况下它是仅追加 表类型(Append Only Table)。 根据桶(Bucket)的定义，我们有两种不同的仅追加模式："Append For Scalable Table"和"Append For Queue"；两种模式支持不同的场景，提供不同的功能。 只能向表中插入一…
2023/12/26 1:03:15 人评论 次浏览
