平台运营的主要工作内容,长沙关键词优化服务,在线seo外链工具,凡科互动自动答题Debezium日常分享系列之#xff1a;Debezium 2.6.0.Alpha1发布 一、重大改变1.MongoDB2.重新选择列后处理器 二、改进和变化1.添加了新的匹配集合 API2.CloudEvents 架构名称自定义3.Oracle Infinispan 缓存改进4.支持 Spanner NEW_ROW_AND_OLD_VALUES 值捕获类型 一、重大改变… Debezium日常分享系列之Debezium 2.6.0.Alpha1发布 一、重大改变1.MongoDB2.重新选择列后处理器 二、改进和变化1.添加了新的匹配集合 API2.CloudEvents 架构名称自定义3.Oracle Infinispan 缓存改进4.支持 Spanner NEW_ROW_AND_OLD_VALUES 值捕获类型 一、重大改变
1.MongoDB
MongoDB 连接器不再支持副本集模式。该功能已在多个版本中被弃用并且 Debezium 2.x 正在进行工作以实现此目标。如果使用的是replica_set模式则在使用Debezium 2.6时需要进行调整。
2.重新选择列后处理器
构建查询时重新选择列后处理器使用基于 message.key.columns 的键。对于大多数具有主键的表来说这是不正确的。默认行为已更改默认使用表主键。引入了一个新的配置选项允许用户选择是使用主键还是生成的键 reselect.use.event.key。
二、改进和变化
1.添加了新的匹配集合 API
该团队正在进行的任务之一包括将 Debezium UI 的后端迁移到主 Debezium 存储库。这样做的独特好处之一是我们可以识别连接器的运行时和 UI 之间存在代码重叠的位置并开发接口契约来公开此共享数据。
对 RelationalBaseSourceConnector 合约进行了调整并引入了一种新方法来返回与连接器的特定配置相匹配的表名称列表。任何实现此抽象基类的连接器都需要实现此新方法。
2.CloudEvents 架构名称自定义
使用模式注册表时需要使用名称注册事件模式以便可以在以后通过管道查询时查找它们。因此当将 CloudEvents 格式的消息与架构注册表配对时同样适用并且在 Debezium 2.6 中您可以显式控制名称的注册方式。
默认情况下CloudEvent 消息的架构将由转换器自动生成。但是如果自动生成的架构名称不够您可以通过指定 dataSchemaName 来调整配置可以将其设置为生成默认行为或标头以直接从指定的事件标头字段中提取架构名称。
3.Oracle Infinispan 缓存改进
Debezium Oracle 连接器维护所有正在进行的事务的缓冲区并且可以使用 Infinispan 在堆外分配该缓冲区。有时用户配置指定如果正在进行的事务持续时间超过指定的毫秒数则缓冲区可以放弃或丢弃该事务。这意味着交易将被遗忘并且不会被连接器发出。
为了改进与 Grafana 和 Prometheus 等框架的指标集成添加了一个新的 JMX 指标 AbandonedTransactionCount以跟踪连接器在运行时放弃的事务数量。
4.支持 Spanner NEW_ROW_AND_OLD_VALUES 值捕获类型
Google Spanner 的值捕获类型负责控制变更流如何表示事件流中的变更数据并在构建变更流时进行配置。
Spanner 引入了一种名为 NEW_ROW_AND_OLD_VALUES 的新值捕获模式该模式负责在任何列发生更改时捕获跟踪列的所有值包括已修改的和未修改的。这种新模式是对 NEW_ROW 的改进因为它还包括旧值的捕获使其与您通常在其他 Debezium 连接器中观察到的情况保持一致。
