Debezium系列之：使用 Strimzi 将 Kafka 和 Debezium 迁移到 Kubernetes

相关文章

• Debezium系列之：把多张表的数据分发到同一个Kafka Topic，同一张表的数据始终进入Topic相同分区

  debezium采集数据库的多张表，一般是一张表对应一个Kafka Topic，现在想把多张表的数据分发到一个多分区的Kafka Topic 最重要的是要保证相同表的数据始终出现在topic的相同分区，比如product表的数据始终发往分区0，order表的数据始终发往分区3 可以参考博主以下技术博客，了解使

  2024年02月12日

  浏览(43)

• Debezium系列之：多张表按照指定的字段分发数据到Kafka Topic，并保证多张表指定字段相同的值始终出现在相同分区

  根据productInfo和productorder两张表的productId分发数据，相同productId的数据始终出现在相同分区，并且希望两张表相同的订单数据也始终出现在相同分区。 例如关于productInfo表1206827245738502144这个订单的增删改数据始终出现在分区2，那productorder这个表1206827245738502144这个订单的增删

  2024年02月09日

  浏览(43)

• Debezium日常分享系列之：使用 Debezium 连接器实现密钥外部化

  隐藏数据库的账号和密码 当 Debezium 连接器部署到 Kafka Connect 实例时，有时需要对 Connect API 的其他用户隐藏数据库凭据。 让我们回顾一下 MySQL Debezium connector的连接器注册请求： 用户名和密码以纯字符串形式传递给 API。更糟糕的是，任何有权访问 Kafka Connect 集群及其 REST AP

  2024年02月16日

  浏览(42)

• Debezium-增量迁移之 Oracle 迁移所需权限

  -- 创建用户 create user TCK identified by oracle; -- 赋权 grant connect,resource to TCK; -- 删除权限 revoke select any table from TCK； revoke select any DICTIONARY from TCK； -- 删除用户 CASCADE(用户下的数据级联删除) drop user TCK CASCADE -- 查询权限列表 select * from user_sys_privs where privilege in (\\\'SELECT ANY TABLE\\\',\\\'SEL

  2024年02月09日

  浏览(39)
• 

  Strimzi Kafka Bridge(桥接)实战之一：简介和部署

  这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos 在strimzi技术体系中，桥接(bridge)是很要的功能，内容也很丰富，因此将桥接相关的内容从《strimzi实战》系列中独立出来，成立桥接相关的系列文章，便于分类和专项深入 本文是《Strimzi Kafka Bridge(桥

  2024年02月08日

  浏览(35)
• 

  Strimzi Kafka Bridge(桥接)实战之二：生产和发送消息

  这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos 本文是《Strimzi Kafka Bridge(桥接)实战之》系列的第二篇，咱们直奔bridge的重点：常用接口，用实际操作体验如何用bridge完成常用的消息收发业务 官方的openapi接口文档地址 : https://strimzi.io/docs/bridge/in

  2024年02月08日

  浏览(44)

• Strimzi从入门到精通系列之一：部署Cluster Operator

  Strimzi是一款用于在Kubernetes集群上管理Apache Kafka的开源项目。它使得在Kubernetes上部署、管理和监控Kafka成为可能，提供了一种高度可扩展和可靠的解决方案。Strimzi支持自动缩放、配置灵活、内置监控和告警等功能。通过使用Strimzi，用户可以将Kafka集成到Kubernetes和OpenShift中，并

  2024年02月11日

  浏览(40)

• Debezium系列之：监控 Debezium

  Debezium JMX相关的技术博客： Debezium系列之：安装jmx导出器监控debezium指标 Debezium系列之：为Debezium集群JMX页面增加监控，JMX页面出现异常时发送飞书告警，确保任务能够获取debezium集群指标 Debezium系列之：深入解读Debezium重要的jmx指标 Debezium系列之：mysql JMX metrics指标详细解读

  2024年02月11日

  浏览(49)

• Debezium同步Mysql数据到Kafka

  Kafka：3.3.2 mysql-connector：1.8.1 （0）前提是安装好mysql，开启binlog （1）下载kafka （2）下载mysql-connector插件 （3）编辑配置文件 （4）启动kafka自带的zk （5）启动kafka （6）启动connect （7）调用api 注意：当成功调用api，创建此连接器后会有如下主题产生：dbhistory.inventory、mysql1、

  2024年02月10日

  浏览(40)
• 

  基于Confluent Kafka部署Kafka Connect集群，Kafka Connect集群加载debezium插件

  Confluent Kafka的下载地址： https://www.confluent.io/download/ 下载社区免费版本： 核心参数如下所示： /data/src/confluent-7.3.3/etc/schema-registry/connect-distributed.properties /data/src/confluent-7.3.3/bin/connect-distributed connect-distributed的脚本内容如下所示，可以不需要修改 如果需要导出kafka connector的j

  2024年02月10日

  浏览(38)