搜索结果
查询Tags标签： 检查点，共有 19条记录-
Flink-容错机制-检查点原理和算法
一、一致性检查点（Checkpoints）Flink故障恢复机制的核心，就是应用状态的一致性检查点 有状态流应用的一致性检查点，其实就是所有任务的状态，在某个时间点的一份拷贝（一份快照）；这个时间点，应该是所有任务都恰好处理完一个相同的输入数据的时候二、从检查点恢复状…
2022/9/9 1:23:04 人评论 次浏览 -
使用ogg实现oracle到kafka的增量数据实时同步
使用ogg实现oracle到kafka的增量数据实时同步 彬彬 2022.04.07 一、OGG概述 OGG全称为Oracle GoldenGate，是由Oracle官方提供的用于解决异构数据环境中数据复制的一个商业工具。相比于其它迁移工具OGG的优势…
2022/4/12 2:12:31 人评论 次浏览 -
数据库恢复技术总结
前面：出于预习数据库故障恢复的小项目，可能会有侧重于实际而会忽略部分非必要理论内容哈！ 一、事务介绍 事务是一个要么全做，要么全不做的操作序列，而且是一个不可分割的工作单位。 事务的四个特性 原子性(Atomicity)：操作序列要么全做，要么全不做。 一致性(Consis…
2022/2/8 19:18:24 人评论 次浏览 -
数据库中数据存取、事务恢复处理、redo、undo和检查点
Data Access 数据存取 Physical blocks are those blocks residing on the diskBuffer blocks are the blocks residing temporarily in main memoryBlock movements between disk and main memory are initiated through the following two operationsinput(A) transfers…
2022/1/2 19:11:06 人评论 次浏览 -
数据库中数据存取、事务恢复处理、redo、undo和检查点
Data Access 数据存取 Physical blocks are those blocks residing on the diskBuffer blocks are the blocks residing temporarily in main memoryBlock movements between disk and main memory are initiated through the following two operationsinput(A) transfers…
2022/1/2 19:11:06 人评论 次浏览 -
（P74-78）数据库系统下-运行日志
文章目录 1.事务涉及到的元素2.不同的缓冲区策略会影响事务的持久性3.事务故障会影响事务的原子性4.怎样记录日志？5.Undo型日志及其故障恢复6.Redo型日志及其故障恢复7.Undo/Redo结合型日志及其故障恢复1.事务涉及到的元素 数据库通常由元素构成 通常， 1 元素 = 1 磁盘块…
2021/11/23 19:11:04 人评论 次浏览 -
（P74-78）数据库系统下-运行日志
文章目录 1.事务涉及到的元素2.不同的缓冲区策略会影响事务的持久性3.事务故障会影响事务的原子性4.怎样记录日志？5.Undo型日志及其故障恢复6.Redo型日志及其故障恢复7.Undo/Redo结合型日志及其故障恢复1.事务涉及到的元素 数据库通常由元素构成 通常， 1 元素 = 1 磁盘块…
2021/11/23 19:11:04 人评论 次浏览 -
JavaFlink开发的一些基本配置
默认情况下，检查点被禁用。要启用检查点，请在StreamExecutionEnvironment上调用enableCheckpointing(n)方法，其中n是以毫秒为单位的检查点间隔。 检查点的其他参数包括：exactly-once vs. at-least-once：你可以从这两种模式中选择一种模式传递给enableCheckpointing(n…
2021/10/20 17:11:11 人评论 次浏览 -
JavaFlink开发的一些基本配置
默认情况下，检查点被禁用。要启用检查点，请在StreamExecutionEnvironment上调用enableCheckpointing(n)方法，其中n是以毫秒为单位的检查点间隔。 检查点的其他参数包括：exactly-once vs. at-least-once：你可以从这两种模式中选择一种模式传递给enableCheckpointing(n…
2021/10/20 17:11:11 人评论 次浏览 -
Flink实战(八) - Streaming Connectors 编程
1 概览 1.1 预定义的源和接收器 Flink内置了一些基本数据源和接收器，并且始终可用。该预定义的数据源包括文件，目录和插socket，并从集合和迭代器摄取数据。该预定义的数据接收器支持写入文件和标准输入输出及socket。1.2 绑定连接器 连接器提供用于与各种第三方系统连接…
2021/7/7 17:09:07 人评论 次浏览 -
Flink实战(八) - Streaming Connectors 编程
1 概览 1.1 预定义的源和接收器 Flink内置了一些基本数据源和接收器，并且始终可用。该预定义的数据源包括文件，目录和插socket，并从集合和迭代器摄取数据。该预定义的数据接收器支持写入文件和标准输入输出及socket。 1.2 绑定连接器 连接器提供用于与各种第三方系统连…
2021/7/7 17:08:15 人评论 次浏览 -
java接口自动化框架
转自 https://www.jianshu.com/p/5029ce89a2d0，记录供自己复习前言随着测试技术的发展，接口自动化测试逐渐成为各大公司投入产出比最高的测试技术。介入时间早，执行效率高，稳定性高的优点，让越来越多的公司引入接口自动化测试。 框架简介APIAutoTest是处理API接口的…
2021/6/11 14:20:59 人评论 次浏览 -
记录一次Postman添加参数化和检查点
一、参数化 问题：有个充值api,api有个参数是商户id,列表有几百个商户，检查每个商户是否可以成功充值 之前用过Localrunner,知道其有个参数化的方法可以解决这个问题，但是不知道postman是否也支持参数化方法 在网上找了一些资料，发现postman也可以做参数化，接下来我们…
2021/5/24 18:24:50 人评论 次浏览 -
Linux的防火墙是怎么工作的？
NetfilterNetfilter是Linux 2.4内核引入的一个子系统，是位于Linux内核中的包过滤引擎，基于Netfilter可以实现防火墙的相关策略。Netfilter的架构就是在网络流程中数据包必须经过的位置放置了5个检测点（hook），在每个检测点上登记了一些处理函数进行处理，即钩子函数（…
2021/5/20 7:28:33 人评论 次浏览 -
PostgreSQL之FULL_PAGE_WRITES
1、full_page_write是什么？ 官网中，对它的解释是： 当这个参数打开时，PG服务器在一个检查点之后的页面的第一次修改期间将每个页面的全部内容写到wal中，这么做是因为在操作系统崩溃恢复期间正在处理的一次页写入可能只有部分完成，从而导致在一个磁盘页面中混合有新旧…
2021/4/24 19:27:06 人评论 次浏览
