开云体育官方注册网址Debezium博客

Debe开云体育官方注册网址zium的发布节奏正如火如荼,我很兴奋地宣布Debezium2.1.2.Final

此版本主要关注bug修复和稳定性;这是所有用户从早期版本推荐的更新。此版本包含28个解决的问题,所以让我们花点时间来讨论一个关键的突破性变化。

我很高兴地宣布,不仅是Debezium 2.2系列的第一个版本,还有Debezium在2023年的第一个版本,开云体育官方注册网址2.2.0.Alpha

Debe开云体育官方注册网址zium 2.2.0。Alpha1版本包括一些突破性的变化,一些错误修复,以及一些值得注意的改进和特性,包括但不限于:

  • [突破性变化]-ZonedTimestamp数值将不再截断小数秒。

  • [新]-支持从Oracle逻辑备用数据库摄取更改开云体育电动老虎机

  • [新]-使用Debezium Storage API支持Amazon S3桶开云体育官方注册网址

  • [新]-支持在连接器启动过程中重试数据库连接开云体育电动老虎机

  • Debezium开云体育官方注册网址服务器接收器连接器支持Apache RocketMQ和Infinispan

今天,我很高兴地宣布Debezium的上市开云体育官方注册网址2.1.0.Final

您最近可能注意到Debezium在过去几周有点沉默。开云体育官方注册网址不,我们不会走的。事实上,谷歌的精灵们正在疯狂地工作,在圣诞树下给你带来一份礼物——Debezium扳手连接器。开云体育官方注册网址

我很荣幸地宣布Debezium 2.1系列的第一个版本,开云体育官方注册网址2.1.0.Alpha1

Debe开云体育官方注册网址zium 2.1.0。Alpha1版本包括相当多的错误修复,但也有一些值得注意的改进和新功能,包括但不限于:

  • 支持PostgreSQL 15

  • Debezium引擎中的单个消息转换(SMT)谓词支持开云体育官方注册网址

  • 在MySQL表主题中捕获TRUNCATE作为更改事件

  • Oracle LogMiner性能改进

  • 新的基于redis的存储模块

我很激动地宣布Debezium的发布开云体育官方注册网址1.9.7.Final

此版本侧重于bug修复和稳定性;并且是所有用户从早期版本中推荐的更新。此版本包含22个已解决的问题整体。

今天,我很高兴地宣布Debezium的上市开云体育官方注册网址2.0.0.Final

自我们在2019年12月发布1.0版本以来,社区一直在努力构建一个全面的开源低延迟的变更数据捕获平台(CDC)。在过去的三年中,我们扩展了Debezium的产品组合,包括Oracle的稳定连接器、Vi开云体育官方注册网址tess的社区主导连接器、增量快照的引入、多分区支持等等。在我们活跃的贡献者和提交者社区的帮助下,Debezium是CDC领域事实上的领导者,它被部署到跨多个行业的许多组织的生产中,使用数百个连接器开云体育官方注册网址从数千个数据库平台传输数据更改。开云体育电动老虎机

2.0版本标志着Debezium的一个新的里程碑,我们很自豪地与你们每个人分享这个里开云体育官方注册网址程碑。

我很兴奋地宣布Debezium的发布开云体育官方注册网址2.0.0.CR1

这个版本包含了突破性的变化,稳定性修复和错误修复,所有这些都让我们更接近2.0.0.Final。总的来说,这个版本一共包含了53个问题这是固定的。

我很激动地宣布Debezium的发布开云体育官方注册网址1.9.6.Final

此版本侧重于bug修复和稳定性;并且是所有用户从早期版本中推荐的更新。此版本包含78个已解决的问题整体。

我很兴奋地宣布Debezium的发布开云体育官方注册网址2.0.0.Beta2

这个版本包含了一些突破性的变化,稳定性修复和错误修复,所有这些都让我们更接近2.0.0.Final。总的来说,这个版本一共包含了107年问题这是固定的。

我很高兴能和大家分享Debezium开云体育官方注册网址2.0.0.Beta1已经发布了!

这个版本包含了几个新特性,包括一个可插拔的主题选择器,包含了提交Oracle更改事件的数据库用户,以及改进了将表唯一索引作为主键的处理。开云体育电动老虎机此外,还有一些突破性的更改,例如将多分区模式移动为默认模式以及引入开云体育官方注册网址debezium-storage模块及其实现。所以让我们来仔细看看所有这些细节。

随着夏天的到来,团队很高兴地宣布Debezium的发布开云体育官方注册网址1.9.5.Final

这个版本主要关注bug修复和稳定性;并且是所有用户从早期版本中推荐的更新。此版本包含解决的问题整体。

我很高兴能和大家分享Debezium开云体育官方注册网址2.0.0.Alpha3已经发布了!

虽然这个版本包含了大量的错误修复,但也有一些值得注意的改进,包括在事务元数据事件中提供时间戳,在Oracle的更改事件源块中添加了几个新字段,以及对Oracle连接器偏移量的非向后兼容更改。

让我们更详细地看看这些。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.9.4.Final

这个版本主要关注bug修复和稳定性;并且是所有用户从早期版本中推荐的更新。此版本包含32个已解决的问题整体。

我很高兴能和大家分享Debezium开云体育官方注册网址2.0.0.Alpha2已经发布了!

这个版本包含了大量的错误修复和改进,110年问题总共解决了。只是,哇!

一些值得注意的变化包括增量快照获得了对正则表达式的支持和一个新的停止信号。我们还做了一些内务工作,删除了一些已弃用的配置选项,以及遗留的MongoDB oplog实现。

让我们更详细地看看这些。

随着夏天的临近,我很兴奋地宣布Debezium的发布开云体育官方注册网址1.9.3.Final

这个版本主要关注bug修复和稳定性;但是,有一些显著的功能增强。让我们花点时间冷静下来,并“深入”研究这些新功能的一些细节:)。

我很高兴能和大家分享Debezium开云体育官方注册网址2.0.0.Alpha1已经发布了!

这个版本是Debezium 2.0计划在未来五个月内发布的几个预发布版中的第一个。开云体育官方注册网址每个预发布计划都将重点放在战略变更上,希望随着我们向前发展,变更可以容易地测试,回归可以快速地解决。

在这个版本中,一些最显著的变化包括要求Java 11使用Debezium或其任何组件,删除开云体育官方注册网址wal2json支持PostgreSQL和遗留的MySQL连接器实现,以及一些值得注意的特性,如改进的Debezium Server谷歌Pub/Sub接收器支持,以及大量的错误修复。开云体育官方注册网址让我们来看看其中的一些。

我很激动地宣布Debezium的发布开云体育官方注册网址1.9.1.Final

此版本主要关注1.9.0之后的错误修复和稳定性问题。最终版本。

我很高兴分享Debezium的消息开云体育官方注册网址1.9.0.Final已经发布了!

除了常见的一组错误修复和改进之外,这个版本的主要特性是支持Apache Cassandra 4,支持SQL Server的Debezium连接器的多数据库,能够使用Debezium Server作为Knative事件源,以及对Debezium Se开云体育电动老虎机rver与Redis Streams集成的许多改进开云体育官方注册网址。

完全276年问题已经被社区在1.9版本中修复;非常感谢每一个帮助实现这一目标的人!

我很高兴地宣布Debezium的发布开云体育官方注册网址1.9.0.CR1

除了一系列错误修复,这个版本还带来了期待已久的对Apache Cassandra 4的支持!总的来说,52个问题已修复此版本。

让我们仔细看看Cassandra 3的更改和Cassandra 4的支持。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.9.0.Beta1

这个版本包含了Debezium Server的许多新特性,包括Knative event开云体育官方注册网址支持和Redis接收器的偏移存储管理,SQL Server连接器的多分区扩展,以及各种错误修复和改进。总的来说,56个问题已修复此版本。

让我们来仔细看看其中的几个。

我很荣幸地宣布Debezium 1.9系列的第二版,开云体育官方注册网址1.9.0.Alpha2

此版本包括对Oracle 21c的支持,针对Debezium服务器的Redis的改进,配置开云体育官方注册网址kafka.query.timeout.ms选项,以及一些围绕DDL解析器、构建基础设施等的错误修复。

总的来说,社区是固定的51的问题对于这个版本。让我们来仔细看看其中的一些亮点。

我很荣幸地宣布Debezium 1.9系列的第一个版本,开云体育官方注册网址1.9.0.Alpha1

随着新的一年到来的是新的发布!Debe开云体育官方注册网址zium 1.9.0。Alpha1发布带来了大量的修复和改进,最显著的是改进的度量和Oracle ROWID数据类型支持。

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.8.0.Final

除了强烈关注MongoDB的Debezium连接器(下文将详开云体育官方注册网址细介绍),1.8版本还支持Postgres的逻辑解码消息,支持在Debezium UI中配置smt和主题创建设置,等等。

总的来说,社区已经固定242年问题对于这个版本。非常感谢每个帮助我们按时发布这个版本的人,坚持我们的季度发布节奏!

我非常激动地宣布Debezium的发布开云体育官方注册网址1.8.0.CR1

就像即将于下周发布的最终版本一样,这个版本主要集中在bug修复上。但是这个版本包含了MongoDB的增量快照支持!总的来说,不少于34个问题已修复此版本。

让我们来仔细看看其中的一些。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.8.0.Beta1

这个版本包含了令人兴奋的新特性,比如对MongoDB 5.0的支持、MongoDB连接器的发件箱事件路由器和对Postgres逻辑解码消息的支持,以及大量的错误修复和其他改进。总的来说,不少于63年问题已修复此版本。

让我们来仔细看看其中的一些。

我很荣幸地宣布Debezium 1.8系列的第二版,开云体育官方注册网址1.8.0.Alpha2

随着假日季的临近,该团队的发布时间表仍然坚定不移。而Debez开云体育官方注册网址ium 1.8.0。Alpha2提供了相当多的错误修复和小的变化,有几个值得注意的变化:

  • MySQL支持心跳动作查询

  • 可配置的事务主题名称

此外,最新1.2的标签开云体育官方注册网址debezium /工具已获取镜像。最新版本包含了所有最新的工具,包括kcctl,一个超级简单,可爱的Apache Kafka Connect CLI。

我很荣幸地宣布Debezium 1.8系列的第一个版本,开云体育官方注册网址1.8.0.Alpha1

随着秋天的颜色,团队一直在努力为这个版本绘制代码行。使用Deb开云体育官方注册网址ezium 1.8.0。Alpha1有相当多的改进,但最值得注意的是新的本地MongoDB 4.0变更流支持!

我非常高兴地宣布Debezium的发布开云体育官方注册网址1.7.0.Final

该版本的主要特性包括对增量快照概念的实质性改进(在Debezium 1.6中引入),基于web的用户Debezium用户界面,在Debezium服务器中支持NATS,以及通过Debezium Kafka容器映像在没有ZooKeeper的情况下运开云体育官方注册网址行Apache Kafka。

在Debezium社区中,在过去的几开云体育官方注册网址个月里发生了一些令人兴奋的事情;比如,我们看到疾控中心的ScyllaDB连接器基于Debezium连接器开云体育官方注册网址框架,对a做功开云体育官方注册网址用于Apache冰山的Debezium服务器连接器(关于这方面的细节将在本博客的客座文章中发布)。

我很荣幸地宣布Debezium 1.7系列的第二版,开云体育官方注册网址1.7.0.Beta1

这次发布带来了NATS流支持Debezium服务开云体育官方注册网址器以及许多其他修复和增强。这个版本也是第一个使用Apache Kafka 2.8测试的版本。

我很荣幸地宣布Debezium 1.7系列的第一个版本,开云体育官方注册网址1.7.0.Alpha1

随着夏天的到来,这个版本为Debezium Oracle连接器以及其他连接器带来了额外的改进。开云体育官方注册网址

我很高兴地宣布Debezium的发布开云体育官方注册网址1.6.0.Final

这个版本充满了大量的新特性,包括支持增量快照,可以使用新的信号的API.基于优秀的论文DBLog:一个基于水印的变化数据捕获框架由Netflix工程师Andreas Andreakis和Ioannis Papapanagiotou提出,增量快照的概念解决了在Debezium社区中反复出现的几个关于快照的需求:开云体育官方注册网址

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.6.0.CR1

该版本为SQL Server添加了跳过的操作优化,为Oracle连接器引入了心跳支持,Oracle BLOB/CLOB支持现在仅可选择加入,并在不同的Debezium连接器上提供了一系列错误修复和其他改进。开云体育官方注册网址

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.6.0.Beta2

这个版本为Debezium Server增加了对Pravega的支持,扩展了Deb开云体育官方注册网址ezium Oracle连接器的快照选项,并在不同的Debezium连接器之间提供了一系列错误修复和其他改进。

让我宣布Debezium 1.5的bug修复版本,开云体育官方注册网址1.5.2.Final

此版本是1.5.1的重新构建。最终使用Java 8。

让我宣布Debezium 1.5的bug修复版本,开云体育官方注册网址1.5.1.Final

此版本修复了自原始版本以来发现的一小部分问题,并对文档进行了少量改进。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.6.0.Beta1

该版本引入了对SQL Server和Db2的增量快照支持、对SQL Server的性能改进、对Oracle的BLOB/CLOB支持等等。下面让我们花点时间来探索这些新功能。

我很荣幸地宣布Debezium 1.6系列的第一个版本,开云体育官方注册网址1.6.0.Alpha1

这个版本为MySQL和PostgreSQL连接器带来了称为增量快照的全新功能,为Debezium服务器带来了Kafka接收器,以及广泛的错误修复和其他小功能的添加。开云体育官方注册网址

我很激动地宣布Debezium的发布开云体育官方注册网址1.5.0.Final

基于log开云体育官方注册网址miner的Debezium 1.5Oracle的CDC实现从孵化状态转移到稳定状态,还有一个全新的MySQL连接器实现,它带来了像这样的特性事务元数据支持.其他关键特性包括支持新的“信号表”,例如,可以使用它来实现模式变化使用Oracle连接器,并支持截断事件与Postgres。社区主导的连接器也有许多改进维塔斯而且Apache Cassandra,以及广泛的错误修复和其他较小的改进。

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.5.0.CR1

随着我们开始向Debezium 1.5发布流的最终定稿迈进,Oracle连接器已经开云体育官方注册网址升级为稳定,Cassandra连接器也有了一些TLS改进,以及许多错误修复。总的来说,50个问题已在此版本中解决。

我们非常高兴地宣布Debezium的发布开云体育官方注册网址1.5.0.Beta2

这个版本的主要特性是新的Debezium信令表支持,Vitess SET类型支持,以及继续开云体育官方注册网址关注一些小的改进,错误修复和优化,因为我们冲刺到1.5版本的终点线。

总的来说,社区是固定的54个问题自Beta1发布以来,其中一些我们将在下面更深入地探讨。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.5.0.Beta1

这个版本增加了一个全新的组件——基于web的Debezium UI——、对MySQL连接器的事务元数据支持、对D开云体育官方注册网址ebezium Oracle连接器基于logminer的捕获实现的大量改进、对Vitess 9.0的支持等等。让我们在下面探讨一些新特性。

我很荣幸地宣布Debezium 1.5系列的第一个版本,开云体育官方注册网址1.5.0.Alpha1

该版本对基于logminer的Debezium Oracle连接器捕获实现进行了许多改进,对MySQL连接器进行了大范围的改进,并修复了大量错误和其他小特性。开云体育官方注册网址

我很高兴地宣布Debezium的发布开云体育官方注册网址1.4.1.Final

我们强烈建议从1.4.0升级。这个版本的最终版本和早期版本包括对几个Debezium连接器的错误修复和增强,其中包括以下一些:开云体育官方注册网址

我很高兴地宣布Debezium的发布开云体育官方注册网址1.4.0.Final

这个版本总结了Debezium在过去三个月里所做的主要工作。开云体育官方注册网址总的来说,社区是固定的117年问题在此期间,包括以下主要功能和更改:

  • 维塔斯连接器,在一个深入的特色博客作者:Kewei Shang

  • 快照表的细粒度选择

  • PostgreSQL快照完成钩

  • 分布式跟踪

  • MySQL支持创建快照期间发出的记录

  • 许多甲骨文Logminer适配器改进

  • 完全支持Oracle JDBC连接字符串

  • 改进了DDL错误的报告

我很高兴地宣布Debezium的发布开云体育官方注册网址1.4.0.CR1

这个发行版主要侧重于完善1.4发行版。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.4.0.Beta1

该版本支持分布式跟踪、Db2的小写表和模式命名、将MySQL快照记录指定为创建或读取操作,以及针对可空键列和主键列对Vitess的增强。

我很激动地宣布Debezium的发布开云体育官方注册网址1.4.0.Alpha2

1.4发行版的第二版提供了一些有用的新特性:

  • PostgreSQL的新API钩子快照接口

  • 使用字段重命名ExtractNewRecordStateSMT的add.fields而且add.headers配置

我很激动地宣布Debezium的发布开云体育官方注册网址1.3.1.Final

此版本主要关注1.3发行版之后报告的错误。最重要的是,修复了与开云体育官方注册网址Debezium连接器用于OracleLogMiner适配器感谢Debezium社区的持续反馈。开云体育官方注册网址

  • 使用Oracle LogMiner时抛出的SQLExceptions (dbz - 2624

  • LogMiner挖掘会话由于WorkerTask被杀死而停止(dbz - 2629

我很兴奋地宣布Debezium的发布开云体育官方注册网址1.4.0.Alpha1

1.4发行版的第一次发布提供了一些有用的新特性:

  • 新型Vitess连接器

  • 允许对快照表进行细粒度选择

总的来说,社区是固定的41个问题对于这个版本。让我们来仔细看看其中的一些亮点。

我非常高兴地宣布Debezium的发布开云体育官方注册网址1.3.0.Final

根据Debez开云体育官方注册网址ium的季度发布节奏,这结束了过去三个月的工作。总的来说,社区已经固定138年问题在此期间,包括以下主要功能和更改:

我很高兴地宣布Debezium的发布开云体育官方注册网址1.3.0.CR1

当我们接近Debezium 1.3 final的最后阶段时,我们利用这个开云体育官方注册网址机会为ByteBufferConverter并介绍开云体育官方注册网址debezium-scripting模块。此外,还有一系列的错误修复和相当多的文档润色;总的来说,不少于15个问题已解决此版本。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.3.0.Beta2

在这个版本中,我们改进了对MySQL和SQL Server连接器的列过滤的支持,并且有一个使用LogMiner包从Oracle摄取变更事件的全新实现。当我们进入Debezium 1.3 Final的冲刺阶段时,还会有一系列较开云体育官方注册网址小的改进、错误修复和文档澄清;总的来说,不少于44个问题已解决此版本。

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.3.0.Beta1

该版本升级到最近发布的Apache Kafka 2.6.0版本,修复了几个严重的错误,并重命名了用于选择要捕获的表的连接器配置选项。我们还发布了Debezium 1.2.2开云体育官方注册网址。Final,它是早期1.2的所有用户的临时替代品。x版本。

我很激动地宣布Debezium的发布开云体育官方注册网址1.3.0.Alpha1

这个1.3版本的初始版本提供了许多有用的新特性:

  • 一个新的De开云体育官方注册网址bezium服务器接收器适配器为Azure事件集集器

  • 一个新的SQL Server连接器快照模式,initial_only

  • MongoDB连接器的附加连接超时选项

总体而言,社会固定不少于31日问题对于这个版本。让我们在这篇文章的剩余部分仔细看看其中的一些。

我很高兴地宣布Debezium的发布开云体育官方注册网址1.2.0.Final

在过去的三个月里,社区已经解决了200年问题.此版本的主要功能包括:

  • 新的Kafka连接单消息转换(smt)基于内容的事件路由而且过滤;升级到Apache Kafka 2.5

  • 的Debezium连接器的模式更改主题开云体育官方注册网址SQL ServerDb2而且甲骨文

  • 在Debezium中支持smt和消息转换器开云体育官方注册网址嵌入式引擎

  • 开云体育官方注册网址Debezium服务器,一个全新的运行时,它允许传播数据更改事件到一系列消息传递基础设施,如Amazon Kinesis,谷歌云Pub/Sub和Apache Pulsar

  • 一个新的列屏蔽模式“一致哈希”,允许匿名化列值,同时仍然保持它们的相关性

  • MongoDB连接器的新指标

  • 改进了SQL Server连接器的重新连接能力

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.2.0.CR1

此版本包括几个值得注意的特性、增强和修复:

  • PostgreSQL可以在使用pgoutput (dbz - 1813).

  • 如果平台MBean服务器不存在,则跳过度量MBean注册(dbz - 2089).

  • SQL Server重新连接在关机和连接重置期间得到改善(dbz - 2106).

  • EventRouter SMT现在可以传递基于非字符串的键(dbz - 2152).

  • PostgreSQLinclude.unknown.datatypes现在可以返回字符串而不是散列(dbz - 1266).

  • 开云体育官方注册网址Debezium服务器现在支持谷歌云PubSub (dbz - 2092).

  • 开云体育官方注册网址Debezium服务器现在支持Apache Pulsar接收器(dbz - 2112).

的文档中可以找到已解决问题的完整列表、升级过程以及有关向后兼容性更改的说明发布说明

我很高兴和大家分享Debezium的消息开云体育官方注册网址1.2.0.Beta2已经发布了!

这个版本的核心特性是开云体育官方注册网址Debezium服务器是Debezium专用的独立运行时,向Amazon Kinesis等消息传递开云体育官方注册网址基础设施开放了其开源变更数据捕获功能。

总的来说,社区已经固定25个问题自Beta1发布以来,其中一些我们将在这篇文章的剩余部分进行更深入的探讨。

我非常高兴地宣布Debezium的发布开云体育官方注册网址1.2.0.Beta1

该版本为SQL Server、Db2和Oracle连接器带来了面向用户的模式更改主题,为基于内容的更改事件路由提供了新的消息转换,支持Postgres中的一系列数组列类型等等。我们还升级了Apache Kafka和Ka开云体育官方注册网址fka Connect的Debezium容器镜像到2.5.0版本。

因为它是生活中所有问题的答案,所以这个版本修复的问题数量是到底是42

我很高兴地宣布Debezium的发布开云体育官方注册网址1.2.0.Alpha1

1.2发行版的第一个发布版本提供了许多有用的新特性:

  • 支持Debezium嵌入式引擎API中的消息转换(smt)和转换器开云体育官方注册网址

  • 使用脚本语言过滤更改事件的新SMT

  • SQL Server连接器自动重新连接

  • 使用一致哈希值的新列屏蔽模式

总体而言,社会固定不少于41个问题对于这个版本。让我们在这篇文章的剩余部分仔细看看其中的一些。

我怀着极大的兴奋宣布Debezium的发布开云体育官方注册网址1.1.0.Final

大约在1.0发布三个月后,这个新版本带来了许多令人兴奋的新功能,例如:

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.1.0.Beta1

此版本增加了对事务标记事件的支持、IBM Db2数据库的孵化连接器以及一系列错误修复。开云体育电动老虎机由于1.1版本仍在积极开发中,我们已经将一系列错误修复后移植到1.0分支,并发布了Debezium开云体育官方注册网址1.0.1.Final,太。

在撰写本文时,并非所有连接器存档都已同步到Maven Central;接下来的几次应该也是这样。

今天,我很高兴地宣布Debezium的上市开云体育官方注册网址1.0.0.Final

最初的承诺自2015年11月以来,Debezium社区开云体育官方注册网址一直在不知疲倦地工作,以实现为各种数据库构建一个全面的开源低延迟变化数据捕获平台(CDC)的愿景。开云体育电动老虎机

在这4年里,Debezium的特性集得到了极大的发开云体育官方注册网址展:用于MySQL、Postgres、MongoDB和SQL Server的稳定的、高度可配置的CDC连接器,用于Apache Cassandra和Oracle的孵化连接器,用于转换和路由更改数据事件的工具,支持发件箱模式等设计模式等等。围绕这个项目形成了一个非常活跃和欢迎用户、贡献者和提交者的社区。开云体育官方注册网址Debezium被部署到各种行业的许多组织的生产中,有些组织的安装规模很大,使用数百个连接器从数千个数据库中传输数据更改。开云体育电动老虎机

1.0版本标志着这个项目的一个重要里程碑:基于我们从0。X版本,我们认为是时候在版本号中表达四个稳定连接器的成熟度了。

虽然秋天的天气如火如荼,但Debezium社区并没有让异常低、寒冷的温度影响到我们开云体育官方注册网址。我很荣幸地宣布Debezium的发布开云体育官方注册网址1.0.0.Beta3

这个新的Debez开云体育官方注册网址ium版本包括几个值得注意的新特性、增强和修复:

  • 基于Kafka Connect 2.3.1构建(dbz - 1612

  • 重命名drop_on_stop配置参数为drop.on.stopdbz - 1595

  • Cassandra连接器的标准化源信息(dbz - 1408

  • 传播MongoDB复制器异常,使它们从Kafka Connect的状态端点可见(dbz - 1583

  • 信封方法应该接受即时而不是时间戳的值(dbz - 1607

  • 错误地报告没有捕获表(dbz - 1519

  • 避免Oracle连接器试图分析表(dbz - 1569

  • 烤柱应包含之前而不是__开云体育官方注册网址debezium_unavailable_valuedbz - 1570

  • 支持PostgreSQL 11+截断操作使用pgoutput译码器(dbz - 1576

  • PostgreSQL连接器在有多个表的数据库的模式发现中超时(开云体育电动老虎机dbz - 1579

  • 的价值ts_ms在快照处理过程中不正确(dbz - 1588

  • 对于非白名单表(dbz - 1592

我很荣幸地宣布Debezium的发布开云体育官方注册网址1.0.0.Beta2

这个新的Debez开云体育官方注册网址ium版本包括几个值得注意的新特性、增强和修复:

  • 支持PostgreSQLLTREE具有逻辑数据类型(dbz - 1336

  • 支持PostgreSQL 12 (dbz - 1542

  • 验证配置的PostgreSQL复制槽不包含无效字符(dbz - 1525

  • 添加MySQL DDL解析器支持索引创建可见而且看不见的关键字(dbz - 1534

  • 为授权添加MySQL DDL解析器支持SESSION_VARIABLES_ADMINdbz - 1535

  • 修复MongoDB集合当集合名称包含点(dbz - 1563

  • 在执行PostgreSQL快照后关闭空闲事务(dbz - 1564

历史正在创造,Debezium开始冲刺到它的1.0里程碑开云体育官方注册网址。我很荣幸地宣布Debezium的发布开云体育官方注册网址1.0.0.Beta1

这个新的Debez开云体育官方注册网址ium版本包括几个值得注意的新特性、增强和修复:

  • ExtractNewDocumentState和EventRouter smt传播心跳和模式更改消息(dbz - 1513

  • 为以下对象提供替代映射时间间隔通过列interval.handling.modedbz - 1498

  • 确保消息键具有正确的列顺序(dbz - 1507

  • 在连接器日志中警告表锁定问题(dbz - 1280

我很高兴代表Debezium社区宣开云体育官方注册网址布Debezium的发布0.10.0.Final

正如您所期望的那样,自上周的CR2以来没有太多变化,唯一的例外是对pgoutputPostgres连接器的插件,该插件在短时间内处理许多小型事务时,可能会受到处理缓慢的影响(dbz - 1515).

此版本完成了总体的工作8个预览版本.在之前的声明中,我们已经深入讨论了Debezium 0.10的新特性和变化,下面是Debezium 0.10的一些亮点:开云体育官方注册网址

我很高兴地宣布Debezium的发布开云体育官方注册网址0.10.0.CR2

在CR1发布之后,我们决定发布另一个候选版本,因为不仅有大量的错误修复,而且社区提供了一些非常有用的功能实现,我们不想拖延。所以我们调整了一下最初的计划,现在的目标是在下周发布Debezium 0.10最终版,避免出现任何不可预见的倒开云体育官方注册网址退。

像往常一样,让我们仔细看看一些新功能和已解决的错误。

Debe开云体育官方注册网址zium社区即将发布0.10版本,我们很高兴地宣布Debezium的可用性0.10.0.CR1

除了对不同的连接器进行了一些错误修复之外,该版本还对使用Postgres创建初始快照的方式进行了实质性改进。除非出现任何重大的倒退,否则最终的0.10版本应该很快就会发布。

这篇文章最初发表在WePay工程博客

在本系列博客文章的前半部分,我们解释了我们在WePay为Cassandra设计流数据管道的决策过程。在这篇文章中,我们将把管道分解成三个部分,并详细讨论每个部分:

  1. 卡桑德拉和疾控中心的特工呼叫卡夫卡

  2. Kafka与BigQuery与KCBQ

  3. 使用BigQuery视图进行转换

这篇文章最初发表在WePay工程博客

从历史上看,MySQL实际上是WePay微服务的首选数据库。开云体育电动老虎机随着WePay规模的扩大,写入一些微服务数据库的大量数据要求我们在分片MySQL(即。开云体育电动老虎机维塔斯),并切换到本地分片的NoSQL数据库。开云体育电动老虎机经过一系列评估后,我们选择了Cassandra,这是一个NoSQL数据库,主要是因为它的高可用性、水平可伸缩性和处理高写开云体育电动老虎机吞吐量的能力。

Baidu
map