我们想要飞跃到Java 11已经有很长一段时间了，我们觉得Debezium 2.0是正确的时机。开云体育官方注册网址在Java 11中，这使我们能够利用新的语言特性，例如新的字符串API和谓词支持代码库中的更改，同时还受益于许多Java性能改进。

我们自己的Vojtech Juranek出版了这个博客他详细讨论了Java 11的转换。使用Debezium需要Java 11运行时，所以在升级之前要确保Java 11可用。开云体育官方注册网址

事务元数据事件描述开始和结束(提交)数据库事务。开云体育电动老虎机这些事件有很多用处，包括审计。默认情况下，连接器不会生成事务元数据事件，要启用此功能，请使用provide.transaction.metadata选项必须启用。

在De开云体育官方注册网址bezium 2.0中，两者都有开始而且结束活动包括一个新的领域，ts_ms，这是根据事件类型记录事务开始开云体育电动老虎机或提交时间的数据库时间戳。这样一个事件的例子如下:

如果您已经在使用事务元数据特性，那么升级后的新事件将包含此字段。

如果您没有使用事务元数据特性，但发现该特性很有用，只需添加provide.transaction.metadata选项设置为真正的到连接器配置。默认情况下，元数据事件被触发到以您的topic.prefix选择。属性可以覆盖该属性transaction.topic选项，如下所示:

在本例中，所有事务元数据事件都将被发送到my-transaction-events．有关更多详细信息，请参阅连接器特定配置。

许多数据库开云体育电动老虎机平台支持开箱即用的多租户，这意味着您可以只安装一个数据库引擎，而拥有许多独特的数据库。在SQL Server这样的情况下，传统上需要为每个唯一的数据库部署单独的连接器。开云体育电动老虎机在过去的一年里，人们做了大量的工作来打破这个障碍，并引入了一种通用的方式，任何单个连接器部署都可以连接和传输来自多个数据库的更改。开云体育电动老虎机

第一个值得注意的变化是SQL Server连接器的配置选项，开云体育电动老虎机database.dbname．该选项已被一个名为开云体育电动老虎机database.names．由于多分区模式现在是默认的，这是新的开云体育电动老虎机database.names选项可以使用逗号分隔的数据库名称列表指定，如下所示:开云体育电动老虎机

在本例中，将连接器配置为从同一主机安装上的两个惟一数据库捕获更改。开云体育电动老虎机连接器将在Kafka Connect中启动两个独特的任务，每个任务将同时负责来自各自数据库的流更改。开云体育电动老虎机

第二个值得注意的变化是连接器指标命名。连接器通过使用唯一名称标识的bean公开JMX指标。多分区模式是多个任务的默认模式，每个任务都需要自己的指标bean，因此有必要更改命名策略。

以SQL Server为例，在旧版本的De开云体育官方注册网址bezium中，指标可以使用以下命名策略:

在这个版本中，命名策略现在包括一个新的任务JMX MBean名称中的组件:

请检查您的指标配置，因为命名更改可能会对收集Debezium指标产生影响。开云体育官方注册网址

在这个版本中，我们引入了一个新的开云体育官方注册网址debezium-storage基于文件和kafka的数据库历史记录和偏移存储的工件集。开云体育电动老虎机这是未来支持Amazon S3、Redis和可能的JDBC等平台的几个实现中的第一个更改。

对于通过插件构件安装连接器的用户来说，这应该是一个无缝的改变，因为所有的依赖都捆绑在那些插件可下载存档中。对于可能在其应用程序中嵌入Debezium或可能开云体育官方注册网址正在构建自己的连接器的用户，请注意您可能需要根据所使用的存储实现添加新的存储依赖项。

开云体育官方注册网址Debezium的默认主题命名策略向已命名的主题发出更改事件开云体育电动老虎机database.schema.table．如果您需要以不同的方式命名主题，通常会将SMT添加到连接器配置中以调整这种行为。但是，如果这个主题名称的一个组件(可能是数据库或表名)包含点(开云体育电动老虎机．)，也许SMT没有足够的上下文。

在这个版本中，一个新的TopicNamingStrategy引入的目的是允许在Debezium内部完全自定义这种行为。开云体育官方注册网址缺省命名策略实现在大多数情况下应该足够了，但如果您发现它不能满足要求，则可以提供自定义的命名策略实现TopicNamingStrategy契约以完全控制连接器使用的各种命名。要提供自己的自定义策略，可以指定topic.naming.strategyConnector选项，使用策略的全限定类名，如下所示:

这种自定义策略不仅限于控制表映射的主题名称，还可以控制模式更改、事务元数据和心跳。您可以参考DefaultTopicNamingStrategy发现在这里举个例子。这个功能仍在孵化中，我们会在收到反馈后继续改进和开发它。

Debezium连接器捕获的表不一定要有主键。开云体育官方注册网址在没有定义主键的情况下，Debezium将检查表的唯一索引，以确定是否可以进行合理的键替换开云体育官方注册网址。在某些情况下，索引可以引用列，例如CTIDPostgreSQL或ROWID在Oracle。这些列既不可见也不用户定义，而是由数据库自动生成的隐藏合成列。开云体育电动老虎机此外，索引还可以使用数据库函数来转换存储的列值，例如开云体育电动老虎机上或较低的为例。

在此版本中，依赖于隐藏的、自动生成的列或包装在数据库函数中的列的索引不再有资格作为主键替代品。开云体育电动老虎机这保证了当依赖索引作为主键而不是定义的主键本身时，生成的消息的主键值元组直接映射到数据库用来表示惟一性的相同值。开云体育电动老虎机

Debezium 2.0最大的改动之一是引入了新的连接器属性名称空间。开云体育官方注册网址从Debezium 2.开云体育官方注册网址0 Beta2开始，许多连接器属性都被重新定位为新的名称。这是一个突破性的更改，在升级过程中会影响大部分(如果不是全部的话)连接器部署。

开云体育官方注册网址Debezium以前使用了前缀“database.”和开云体育电动老虎机大量不同的连接器属性。其中一些属性要直接传递给JDBC驱动程序，在其他情况下要传递给数据库历史实现，等等。开云体育电动老虎机不幸的是，我们发现某些属性被传递给底层实现的情况并非有意为之。虽然这不会产生任何类型的回归或问题，但如果存在属性名称冲突，例如，JDBC驱动程序属性与前缀为“database.”的Debezium连接器属性匹配，则可能会在未来引入一个问题。开云体育官方注册网址开云体育电动老虎机

下面描述对连接器属性的更改

同样，请在部署之前检查连接器配置并进行相应调整。

开云体育官方注册网址Debezium更改事件是通过模式定义发出的，模式定义包含关于字段的元数据，如类型、是否需要等等。在Debezium以前的迭代中，一些模式定义没有显式开云体育官方注册网址的名称，也没有显式的版本控制。在这个版本中，我们已经开始确保所有模式定义都有一个显式的名称和与其关联的版本。此更改的目标是帮助将来的事件结构兼容性，特别是对于那些正在使用模式注册中心的人。但是，如果您目前正在使用模式注册表，请注意此更改可能会在升级过程中导致模式兼容性问题。

开云体育官方注册网址方法支持跳过特定的事件类型skipped.operations连接器配置中的Connector属性。如果您只对操作的一个子集感兴趣，比如只对插入和更新感兴趣，而对删除不感兴趣，那么这个特性可能很有用。

一种特定的事件类型截断(t)，仅由关系连接器的子集支持，并且是否要跳过这些事件也不一致。在这个版本中，我们对齐了skipped.operations行为，以便如果连接器支持截断事件，默认情况下将跳过这些事件。

请查看以下规则集:

如果以上都是正确的，那么连接器的行为将在升级后发生变化。如果希望继续发出截断事件，则skipped.operations =没有需要进行配置。

的schema.name.adjustment.mode配置属性控制如何调整模式名称以与连接器使用的消息转换器兼容。该配置选项可以是以下值之一:

在以前的版本中，Debezium总是默开云体育官方注册网址认为安全值avro；但是，从Debezium 2.0.0开始。开云体育官方注册网址CR1的默认值现在是没有一个．我们认为，考虑到Avro序列化的使用是由用户根据自己的需要选择的，这个选项应该与相同的选择行为保持一致。

安全的升级路径是调整配置并显式使用schema.name.adjustment.mode作为avro并对新连接器部署使用默认值。但是您也可以检查您的主题名称和配置，检查没有发生下划线替换，因此这个更改不会产生任何影响。

卡桑德拉4通过添加一个功能，当fsync操作发生时，Cassandra将更新一个基于CDC的索引文件，以包含最新的偏移值，从而改进了与CDC的集成。这个索引文件允许CDC实现读到Cassandra中认为持久的偏移量。

在这个版本中，Debezium现在开云体育官方注册网址使用这个基于CDC的索引文件来消除以前存在的Cassandra处理CDC事件的固有延迟。这将为Cassandra用户提供Debezium在CDC方面的实质性改进，并激励他们考虑Cassandra 4而不是Cassandra 3。开云体育官方注册网址

在De开云体育官方注册网址bezium 1.8中，我们引入了新的MongoDB变更流特性，同时弃用了oplog实现。向更改流的过渡提供了各种好处，例如能够从非主节点传输更改，能够为下游消费者发出具有完整文档表示的更新事件，等等。简而言之，变更流只是MongoDB执行变更数据捕获的一种更高级的方式。

删除oplog实现也意味着MongoDB 3。不再支持X。如果您正在使用MongoDB 3。x，您将需要升级到至少MongoDB 4.0或更高版本的Debezium 2.0。开云体育官方注册网址

MongoDB 6支持在应用更改之前捕获文档的状态。长期以来，这一直是一个仅对基于关系的连接器可用的特性，但现在这使得Debezium还可以包括开云体育官方注册网址之前字段作为MongoDB的事件有效负载的一部分。

要启用这个新的MongoDB 6+行为，请使用capture.mode设置已调整为包括两个新值:

有些人可能知道，也可能不知道，我们在Debezium 1.5(2021年2月)中基于通用连接器框架实现了MySQL连接器。开云体育官方注册网址作为重写的一部分，我们引入了MySQL用户使用配置选项启用遗留连接器行为的能力internal.implementation设置为遗产．为了支持新的通用连接器框架行为，这种遗留实现已被弃用。有了Deb开云体育官方注册网址ezium 2.0，这个internal.implementation配置选项和遗留连接器实现已被删除。

如果您当前的连接器部署依赖于这个遗留的实现，那么您应该意识到，通过升级到Debezium 2.0，连接器将不再使用旧的实现，而将只使用公共连接器实现。开云体育官方注册网址就功能而言，两种实现都是对等的，只有一个例外:遗留实现对更改过滤器配置提供了实验性支持。如果您依赖于此遗留行为，请注意该特性不再可用。

在这个版本中，Debezium现在开云体育官方注册网址支持读取已启用压缩写入的binlog条目。在8.0.20版本中，MySQL增加了使用ZSTD算法压缩binlog事件的能力。要启用压缩，必须切换binlog.transaction_compression将MySQL服务器上的变量改为在．当启用压缩时，binlog的行为与往常一样，只是binlog条目的内容被压缩以节省空间，并以压缩格式复制到副本，从而显著降低了较大事务的网络开销。

如果您有兴趣阅读更多关于MySQL binlog压缩的内容，可以参考二进制日志事务压缩请参阅MySQL文档中的部分以了解更多细节。

的源信息块是变更事件有效负载中的一个部分，它描述了生成变更事件的数据库属性。开云体育电动老虎机例如，此部分包括系统更改号、更改的数据库时间戳以及更改所在的事务。开云体育电动老虎机

在这个版本中，我们确定了一个回归视交叉上核字段没有正确反映的权利源更改事件发生的位置。虽然Oracle使用相同的系统更改号生成多个更改并不异常，但我们确实发现了导致将错误的系统更改号分配给作用域事务中的每个事件的回归，这使得一些人很难将此信息用于审计目的。的source.scn字段现在应该正确反映从Oracle LogMiner或Oracle Xstream的系统更改数。

属性中添加了几个新字段源信息块，以提高与LogMiner实现和Oracle RAC的集成。新建源信息块的示例:

新增字段为:

无论使用Oracle Standalone还是RAC，使用Oracle LogMiner时将始终提供这些值。这些值在Oracle RAC安装中更重要，因为有多个数据库服务器同时操作共享数据库。开云体育电动老虎机这些字段明确地注释了变更起源于哪个节点以及该节点上的哪个位置。

在Oracle RAC (Real Application Clusters)环境中，多个节点同时访问和操作Oracle数据库。开云体育电动老虎机每个节点维护自己的重做日志缓冲区，并执行自己的重做写入线程。这意味着在任何给定的时刻，每个节点都有自己独特的“位置”，这些位置将完全不同于在每个节点上发生的活动。

在这个版本中，有必要对dbz - 5245支持Oracle RAC。以前，连接器偏移量维护一个名为视交叉上核它表示连接器应该从哪里流更改的“位置”。但是由于每个节点可能位于重做中的不同位置，因此单个节点视交叉上核Oracle RAC的值不足。

旧的Oracle连接器偏移量是这样的:

从Debezium 2.开云体育官方注册网址0开始，新的偏移结构现在有这样的形式:

你会注意到视交叉上核Field现在由逗号分隔的值列表组成，其中每个条目代表一个值元组。这个新的元组的格式为视交叉上核:rollback-segment-id: ssn: redo-thread．

此更改是向前兼容的，这意味着一旦升级到Debezium 2.0，旧版本的连接器将无法读取偏移量。开云体育官方注册网址如果升级并决定回滚，请注意偏移量将需要手动调整偏移量视交叉上核字段，以简单地包含最新的字符串视交叉上核值跨所有重做线程。

变更事件的源信息块携带了关于变更事件起源的各种上下文。在这个版本中，Oracle连接器现在在捕获的更改事件中包含了进行数据库更改的用户。开云体育电动老虎机一个新的领域，user_name，现在可以在源信息块中找到这个新信息。该字段是可选的，仅在使用基于logminer的实现触发更改时可用。该字段还可以包含值未知的如果在连接器捕获变更之前删除了与变更关联的用户。

在Debezium的整开云体育官方注册网址个生命周期中，PostgreSQL连接器支持多种解码器实现，包括decoderbufs，wal2json,pgoutput．这两个decoderbufs而且wal2json插件需要在数据库服务器上安装特殊的库来捕获来自PostgreSQL的更改。开云体育电动老虎机

PostgreSQL 9.6标记为生命终结在2021年11月，我们觉得现在是一个很好的机会来简化支持的解码器的数量。与PostgreSQL 10及以后版本支持的pgoutput的解码器本身，我们得出的结论是，删除对wal2jsonDebezium 2开云体育官方注册网址.0插件。

如果您仍在使用PostgreSQL 9.6或wal2json解码器，您将被要求升级到PostgreSQL 10+或decoderbufs或者本地人pgoutput插件使用Debezium前进开云体育官方注册网址。

Vitess连接器以前允许在两种不同的模式下操作，这完全取决于连接器配置是否指定了任何碎片细节。不幸的是，在这两种情况下，每一种都导致了一个负责执行VStream处理的任务。对于有许多分片的大型Vitess安装，这种架构可能会开始出现延迟问题，因为它可能无法跟上所有分片的所有更改。更复杂的是，在指定碎片细节时，这需要手动在集群中解析碎片，并为每个碎片启动单个Debezium连接器，这既容易出错，更重要的是可能导致部署许多Debezium连接器。开云体育官方注册网址

Vitess社区认识到这一点，并试图从维护和错误的角度寻找解决所有这些问题的解决方案。在De开云体育官方注册网址bezium 2.0 Beta2中，Vitess连接器现在通过发现机制自动解析碎片，这与MongoDB非常相似。然后，这种发现机制将负载分散到多个任务上，允许Debezium的单个部署在每个分片或分片列表上运行一个任务，具体取决于连接器允许的最大任务数。开云体育官方注册网址

在升级期间，Vitess连接器将自动将偏移存储迁移到多任务行为使用的新格式。但是请注意，一旦升级，您将无法降级到较早的版本，因为偏移存储格式将发生更改。

近年来，ARM64的性能发生了变化，即使在AWS，他们的64位ARM处理器的性能也超过了最新的x86-64处理器。这使得整个行业都在关注使用容器支持这两种架构的成本效益。

因为Debe开云体育官方注册网址zium已经传统地发布了linux / amd64基于容器的映像，这要求您在虚拟机中使用模拟运行映像。这会导致不必要的开销和潜在的性能问题，而Debezium的目标是低延迟和超高速!开云体育官方注册网址从Debezium 2.0开开云体育官方注册网址始，Debezium现在也使用ARM64基于容器映像，减少所需的开销。

我们希望新的ARM64容器图像能够改善Debezium的采用，并表明我们致力于在整个行业中提供最佳的变更数据捕获体验。开云体育官方注册网址