Debezium日常分享系列之:Debezium 2.5.0.CR1发布

Debezium日常分享系列之:Debezium 2.5.0.CR1发布

  • 一、重大变化
    • 1.Cloud Event 标头的架构名称
    • 2.MySQL BIT 默认长度
  • 二、新功能和改进
    • 1.重新选择列
    • 2.Debezium Server - 用于 Apache Kafka 接收器的 StreamNameMapper
    • 3.增量快照水印的 INSERT/DELETE 语义
    • 4.Debezium 服务器 - AWS SQS 接收器
    • 5.Oracle LOB 行为

Debezium 2.5.0.CR1 现已推出。此版本包括许多改进,例如 Debezium Server 的 AWS SQS 接收器、增量快照水印的 INSERT/DELETE 语义、ReselectColumnsPostProcessor、统一的 Oracle LOB 行为。

一、重大变化

此版本包含多项重大更改。

1.Cloud Event 标头的架构名称

Cloud Event 标头的架构名称前缀和字母大小写与负载名称不一致。架构名称已对齐,因此标头和有效负载共享相同的命名空间,并遵循相同的字母大小写规则 。

2.MySQL BIT 默认长度

如果没有设置的话,MySQL BIT 数据类型没有隐式长度。这是不正确的,因为如果未提供,则默认长度为 1。

二、新功能和改进

Debezium 2.5 还引入了更多改进和功能,让我们分别看一下。

1.重新选择列

在某些情况下,由于某些源数据库的工作方式,当 Debezium 连接器发出更改事件时,该事件可能会排除特定列类型的值。例如,PostgreSQL 中的 TOAST 列、Oracle 中的 LOB 列或 Oracle Exadata 中的扩展字符串列的值可能全部被排除。

Debezium 2.5 引入了 ReselectColumnsPostProcessor,提供了一种从数据库表中重新选择一个或多个列并获取当前状态的方法。可以配置后处理器以重新选择以下列类型:

  • 空列。
  • 包含 unavailable.value.placeholder 标记值的列。

配置 PostProcessor 与配置 CustomConverter 或 Transformation 类似,不同之处在于它适用于可变负载的 Struct 而不是 SourceRecord。

2.Debezium Server - 用于 Apache Kafka 接收器的 StreamNameMapper

现在可以通过自定义逻辑修改 Kafka 接收器行为,为特定功能提供替代实现。当替代实现不可用时,则使用默认实现。

3.增量快照水印的 INSERT/DELETE 语义

引入了属性incremental.snapshot.watermarking.strategy,让用户可以选择在增量快照期间使用的水印策略。

insert_insert(旧行为)方法让 Debezium 在快照期间为每个块在信令数据集合中创建两个条目,以发出快照窗口打开的信号,并使用另一个条目来标记其关闭。

另一方面,使用 insert_delete 选项,在窗口开头的每个块的信令数据集合中写入单个条目。完成后,该条目被删除,并且不再添加相应的条目,以表示快照窗口的关闭。该方法有助于更有效地管理信令数据收集。

4.Debezium 服务器 - AWS SQS 接收器

Amazon Simple Queue Service (Amazon SQS) 是一种分布式消息队列服务。它支持通过 Web 服务应用程序以编程方式发送消息,作为通过 Internet 进行通信的一种方式。 SQS 旨在提供高度可扩展的托管消息队列,解决常见的生产者-消费者问题或生产者与消费者之间的连接问题。

Debezium 2.5 提供了将事件发送到 Amazon SQS 的可能性。

5.Oracle LOB 行为

Debezium 2.5 调整了快照和流中的 LOB 行为。当 lob.enabled 设置为 false 时,将在快照期间显式包含不可用值占位符,以匹配流的行为。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/224231.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

1.7 实战:Postman请求Post接口-登录

上一小节我们实战了使用Postman请求Get接口。本小节我们来使用Postman请求Post接口。 我们来测试一下登录,之前已经创建好了Collections。我们选择登录页下的登录这个请求。地址也是跟之前一样,我们打开校园二手交易系统,打开浏览器开发者工具,输入用户名和密码,点击登录…

力扣22. 括号生成(java 回溯法)

Problem: 22. 括号生成 文章目录 题目描述思路解题方法复杂度Code 题目描述 思路 我们首先要知道,若想生成正确的括号我们需要让右括号去适配左括号,在此基础上我们利用回溯去解决此题目 1.题目给定n个括号,即当回溯决策路径长度等于 2 n 2n…

网络基础2

三层交换机:路由器交换机 创建vlan 配置0/0/2串口为vlan2,3接口为vlan3 三层交换机的串口是不能直接配置地址,要在虚拟接口(vlan的接口)配置IP地址 配置vlan1的虚拟接口 此时vlan1的主机能ping通三层交换机串口1的地址…

西南交通大学【数电实验7---按键防抖动设计】

实验电路图、状态图、程序代码、仿真代码、仿真波形图(可以只写出核心功能代码,代码要有注释) 一共四个状态:1.未按下时空闲状态 2.按下抖动滤除状态 3.按下稳定状态 4.释放抖动滤除状态 在第一个状态时,等待按键按下&…

【jitterbuffer】3:VCMJitterEstimator及所需的概率知识:期望、方差、协方差

期望 : 全国的平均积雪深度 期望值为负 概率就是 不同国家的面积了,总面积是1 期望计算公式 某种函数的期望 K的求和范围 计算期望 1

Peter算法小课堂—简单建模(1)

简单建模是什么?建模模拟数据结构。 太戈编程2601题 题目描述: 你经过多年学习,获得了博士学位,一共发表了n篇论文,并且你的第 i 篇论文得到了来自其他研究文献的 ci 次引用。在学术圈里,通常会使用 H 指数…

Java常用API合集(一)

文章目录 一、StringBuilder类1.1 方法演示1.2 String 和StringBuilder互转1.3 String 和StringBuilder效率对比1.4 应用案例 二、StringJoiner类三、Math类四、System类五、Runtime类 一、StringBuilder类 StringBuilder代表可变字符串对象,相当于是一个容器&…

dcf写入机制

dcf写入机制 写入 dcf提供如下两个写入接口: dcf_write int dcf_write(unsigned int stream_id, const char* buffer, unsigned int length, unsigned long long key, unsigned long long *index);仅在leader节点调用。 dcf_universal_write int dcf_universal_w…

代码审计的未来趋势

代码审计的未来发展趋势,如人工智能、区块链、云计算等代码审计是一项非常重要的工作,可以帮助团队发现潜在的安全漏洞和缺陷。随着技术的不断发展,代码审计也在不断地发展和改进。本文将介绍代码审计的未来发展趋势,包括人工智能…

C++ 标准库-chrono 基本用法

文章目录 再C开发中&#xff0c;经常会遇到时间相关的问题&#xff0c;这里可以借助 <chrono>来帮我们解决问题。 <chrono> 是 C 标准库中的一个头文件&#xff0c;它提供了处理时间和日期的功能。这个库引入了一组类型和函数&#xff0c;用于在程序中进行时间点、…

Linux(22):X Window 设定介绍

X Window System X Window System 是个非常大的架构&#xff0c;他还用到网络功能。也就是说&#xff0c;其实 X 窗口系统是能够跨网络与跨操作系统平台的。 X Window系统最早是由 MIT (Massachusetts Institute of Technology&#xff0c;麻省理工学院) 在1984年发展出来的&…

day13 栈与队列(三)

day13 2023.12.11 代码随想录 今天刚出差回来&#xff0c;拉下了很多天的博客&#xff0c;慢慢补吧&#xff0c;每天做当天的任务&#xff0c;再补一篇博客。 1. 239滑动窗口最大值 本题就是每次窗口内容放在一个单调队列中&#xff0c;那么每次直接返回队头元素&#xff08;最…

register_chrdev函数使用

static struct class *led_class;static int major 0; /*记得static 不然可能会出现外部.c调用这个变量的可能*/static struct file_operations led_drv {.owner THIS_MODULE,.open led_drv_open,.read led_drv_read,.write led_drv_write,.release led_drv…

Python中的继承:概念、用法与示例

目录 一、引言 二、继承的概念 三、继承的用法 1、继承父类的属性和方法 2、添加新的属性和方法 3、覆盖父类的方法 四、示例代码展示 五、继承中的多态性 六、继承中的封装和抽象 七、继承中的多重继承 总结 一、引言 面向对象编程&#xff08;OOP&#xff09;是一…

「完美世界」石昊被诓入至尊道场,修炼无敌道,打跑天仙书院弟子

Hello,小伙伴们&#xff0c;我是拾荒君。 《完美世界》这部国漫&#xff0c;在粉丝的翘首期盼中&#xff0c;终于迎来了第141集的更新。这一集的内容&#xff0c;对于喜欢石昊和至尊道场劫难的观众来说&#xff0c;可谓是扣人心弦&#xff0c;让人目不转睛。 在这一集中&#…

【信息学奥赛】拼在起跑线上,想入道就别落下自己!

编程无难事&#xff0c;只怕有心人&#xff0c;学就是了&#xff01; 文章目录 1 信息学奥赛简介2 信息学竞赛的经验回顾3 优秀参考图书推荐《信息学奥赛一本通关》4 高质量技术圈开放 1 信息学奥赛简介 信息学奥赛&#xff0c;作为全国中学生学科奥林匹克“五大学科竞赛”之一…

ChatGPT使用:一个发包机器人的提示词

发包机器人&#xff1a; 设想&#xff1a;目前项目组有n条打包线会输出多个包&#xff0c;用户想获取最新的包是比较困难的&#xff0c;难点在于 1. 分支多&#xff1a;trunk&#xff0c;release&#xff0c;outer等&#xff0c;至少有3个分支&#xff1b; 2. 多平台&#x…

C++ 面向对象模型 小知识点

空类 大小 空类的 sizeof 结果是 1。原因&#xff1a;每个对象都应该在内存上有独一无二的地址&#xff0c;因此给空对象分配 1 个字节空间。 当定义了一个变量后&#xff0c;则类的大小为这个变量的大小。 类中 变量和函数是分开存储的。 静态成员变量&#xff0c;静态成员函数…

浅谈“前端已死”论

自我介绍一下&#xff0c;我目前是一个C#后端开发工程师&#xff0c;题目中所述的java和前端貌似跟我没有太大的关系&#xff0c;我想说&#xff0c;在这IT行业内&#xff0c;所有的东西都是互通的&#xff0c;最近公司也在搞B/S&#xff0c;也是使用了javavue的模式&#xff0…

Spring+SpringMVC+SpringBoot

Spring bean bean基础配置 bean别名配置 注意事项&#xff1a; 获取bean无论是通过id还是name获取。如果无法获取到&#xff0c;将抛出异常NoSuchBeanDefinitionException bean的作用范围配置 适合交给容器进行管理的bean 表现层对象、业务层对象、数据层对象、工具对象 不…