7.7. 监控 Debezium PostgreSQL 连接器性能
Debezium PostgreSQL 连接器除了对 Zookeeper、Kafka 和 Kafka Connect 提供的 JMX 指标的内置支持外,还提供两种类型的指标。
Debezium 监控文档 提供了有关如何使用 JMX 公开这些指标的详细信息。
7.7.1. 在 PostgreSQL 数据库的快照期间监控 Debezium
MBean 是 debezium.postgres:type=connector-metrics,context=snapshot,server= <postgresql.server.name>
。
除非快照操作处于活跃状态,否则快照指标不会被公开,或者快照自上次连接器启动后发生。
下表列出了可用的 shapshot 指标。
属性 | 类型 | 描述 |
---|---|---|
| 连接器读取的最后一个快照事件。 | |
| 连接器读取和处理最新事件以来的毫秒数。 | |
| 此连接器从上次启动或重置后看到的事件总数。 | |
| 由连接器中配置的 include/exclude 列表过滤规则过滤的事件数。 | |
| 连接器捕获的表列表。 | |
| 用于在快照和主 Kafka Connect 循环之间传递事件的队列长度。 | |
| 用于在快照和主 Kafka Connect 循环之间传递事件的队列的空闲容量。 | |
| 包括在快照中的表的总数。 | |
| 快照要复制的表数。 | |
| 快照是否启动。 | |
| 快照是否暂停。 | |
| 快照是否中止。 | |
| 快照是否完成。 | |
| 快照目前花费的秒数,即使未完成也是如此。还包括快照暂停时的时间。 | |
| 快照暂停的秒数。如果快照暂停多次,则暂停的时间会增加。 | |
| 包含快照中每个表扫描的行数的映射。表在处理期间逐步添加到映射中。更新每个 10,000 行扫描,并在完成表后更新。 | |
|
队列的最大缓冲区(以字节为单位)。如果 | |
| 队列中记录的当前卷(以字节为单位)。 |
在执行增量快照时,连接器还提供以下额外快照指标:
属性 | 类型 | 描述 |
---|---|---|
| 当前快照块的标识符。 | |
| 定义当前块的主键集的下限。 | |
| 定义当前块的主密钥集的上限。 | |
| 当前快照表的主键集的下限。 | |
| 当前快照表的主键集的上限。 |
7.7.2. 监控 Debezium PostgreSQL 连接器记录流
MBean 是 debezium.postgres:type=connector-metrics,context=streaming,server= <postgresql.server.name>
。
下表列出了可用的流指标。
属性 | 类型 | 描述 |
---|---|---|
| 连接器读取的最后一个流事件。 | |
| 连接器读取和处理最新事件以来的毫秒数。 | |
| 此连接器自上次开始或指标重置以来看到的事件总数。 | |
| 此连接器自上次开始或指标重置以来看到的创建事件总数。 | |
| 此连接器自上次开始或指标重置以来看到的更新事件总数。 | |
| 此连接器自上次开始或指标重置以来看到的删除事件总数。 | |
| 由连接器中配置的 include/exclude 列表过滤规则过滤的事件数。 | |
| 连接器捕获的表列表。 | |
| 用于在流和主 Kafka Connect 循环之间传递事件的队列长度。 | |
| 用于在流和主 Kafka Connect 循环之间传递事件的队列的空闲容量。 | |
| 表示连接器当前是否连接到数据库服务器的标记。 | |
| 最后一次更改事件时间戳和连接器处理之间毫秒的数量。该值将限制运行数据库服务器和连接器的机器上时钟之间的差别。 | |
| 已提交的已处理的事务数量。 | |
| 最后一次接收的事件的协调。 | |
| 最后一次处理的事务的事务标识符。 | |
|
队列的最大缓冲区(以字节为单位)。如果 | |
| 队列中记录的当前卷(以字节为单位)。 |