每个架构的JDBC Confluent kafka连接器和主题

2018-04-05 apache-kafka apache-kafka-connect confluent-kafka confluent-schema-registry

我们最近开始使用Confluent Kafka-JDBC连接器来导入RDBMS数据。

作为默认配置设置的一部分,似乎为架构中的每个表都创建了一个主题。

我想知道是否有办法

  1. 每个架构而不是每个表创建主题 。并且,如果启用了每个架构主题,那么可以基于表支持架构演变(使用架构注册表)吗?

  2. 如果无法使用每个模式的主题,那么是否有关于如何管理数百个或数千个主题的准则?考虑到表数与主题数之间是否存在一对一的映射?

提前致谢,

Answers

为每个架构而不是每个表创建主题。

否-它是n个表-> n个主题,或1个查询-> 1个主题。

关于如何管理数百或数千个主题的任何指导方针?

为它们采用标准的命名模式。根据需要使用特定于主题的配置。

Related