红帽全球峰会14.3. 指标文件示例
您可以在 AMQ Streams 提供的示例配置文件中找到 Grafana 仪表板和其他指标配置文件示例。
AMQ Streams 提供的指标文件示例
- 1
- 不同 AMQ Streams 组件的 Grafana 仪表板示例。
- 2
- Grafana 镜像的安装文件。
- 3
- 其他配置用于提取 CPU、内存和磁盘使用的指标，这些指标直接从节点上的 OpenShift cAdvisor 代理和 kubelet 提供。
- 4
- 通过 Alertmanager 发送通知的 hook 定义。
- 5
- 用于部署和配置 Alertmanager 的资源。
- 6
- 用于 Prometheus Alertmanager 的警报规则示例（与 Prometheus 部署）。
- 7
- Prometheus 镜像的安装资源文件。
- 8
- PodMonitor 定义由 Prometheus Operator 转换为作业，以便 Prometheus 服务器直接从 pod 提取指标数据。
- 9
- 启用指标的 Kafka Bridge 资源。
- 10
- 为 Kafka Connect 定义 Prometheus JMX Exporter 重新标记规则的指标配置。
- 11
- 为 Cruise 控制定义 Prometheus JMX Exporter 重新标记规则的指标配置。
- 12
- 为 Kafka 和 ZooKeeper 定义 Prometheus JMX Exporter 重新标记规则的指标配置。
- 13
- 为 Kafka Mirror Maker 2.0 定义 Prometheus JMX Exporter 重新标记规则的指标配置。
14.3.1. Prometheus 指标配置示例
AMQ Streams 使用 Prometheus JMX Exporter 通过 HTTP 端点公开指标，该端点可由 Prometheus 服务器提取。
Grafana 仪表板依赖于 Prometheus JMX Exporter 重新标记规则，这些规则是为自定义资源配置中 AMQ Streams 组件定义的。
标签是一个名称值对。重新标记是动态写入标签的过程。例如，标签值可以从 Kafka 服务器和客户端 ID 的名称中派生。
AMQ Streams 提供了带有重新标记规则的自定义资源配置 YAML 文件示例。在部署 Prometheus 指标配置时，您可以部署示例自定义资源，或将指标配置复制到您自己的自定义资源定义中。
| 组件 | 自定义资源 | YAML 文件示例 |
|---|---|---|
| Kafka 和 ZooKeeper |
|
|
| Kafka Connect |
|
|
| Kafka MirrorMaker 2 |
|
|
| Kafka Bridge |
|
|
| Sything Control |
|
|
14.3.2. 警报通知的 Prometheus 规则示例
由 AMQ Streams 提供的 指标配置文件 提供了警报通知的 Prometheus 规则示例。规则在示例 prometheus-rules.yaml 文件中指定，用于在 Prometheus 部署中使用。
警报规则提供有关指标中观察到的特定条件的通知。规则在 Prometheus 服务器上声明，但 Prometheus Alertmanager 负责警报通知。
Prometheus 警报规则使用 PromQL 表达式来持续评估的条件。
当警报表达式变为 true 时，会满足条件，Prometheus 服务器会将警报数据发送到 Alertmanager。然后，Alertmanager 使用为部署配置的通信方法发送通知。
有关警报规则定义的一般点：
-
for属性与规则一起使用，以确定在触发警报前必须保留条件的时间周期。 -
tick 是一个基本的 ZooKeeper 时间单元，以毫秒为单位，并使用
Kafka.spec.zookeeper.config的tickTime参数进行配置。例如，如果 ZooKeepertickTime=3000，3 个 ticks (3 x 3000)等于 9000 毫秒。 -
ZookeeperRunningOutOfSpace指标和警报的可用性取决于使用的 OpenShift 配置和存储实施。某些平台的存储实现可能无法提供指标提供警报所需的可用空间的信息。
Alertmanager 可以配置为使用电子邮件、天天消息或其他通知方法。根据您的具体需要，调整示例规则的默认配置。
14.3.2.1. 更改规则示例
prometheus-rules.yaml 文件包含以下组件的示例规则：
- Kafka
- ZooKeeper
- Entity Operator
- Kafka Connect
- Kafka Bridge
- MirrorMaker
- Kafka Exporter
文件中提供了每个示例规则的描述。
14.3.3. Grafana 仪表板示例
如果部署 Prometheus 以提供指标，您可以使用 AMQ Streams 提供的 Grafana 仪表板示例来监控 AMQ Streams 组件。
示例仪表板在 example /metrics/grafana-dashboards 目录中作为 JSON 文件提供。
所有仪表板都提供 JVM 指标，以及特定于组件的指标。例如，AMQ Streams operator 的 Grafana 仪表板提供了它们正在处理的协调或自定义资源的数量信息。
示例仪表板没有显示 Kafka 支持的所有指标。仪表板填充了用于监控的指标集合。
| 组件 | JSON 文件示例 |
|---|---|
| AMQ Streams operator |
|
| Kafka |
|
| ZooKeeper |
|
| Kafka Connect |
|
| Kafka MirrorMaker 2 |
|
| Kafka Bridge |
|
| Sything Control |
|
| Kafka Exporter |
|
当 Kafka Exporter 没有指标时，因为集群中还没有流量，Kafka Exporter Grafana 仪表板将显示 N/A 用于数字字段，且没有要 显示图形的数据。
'%20d='M201.5%20305.5c-13.8%200-24.9-11.1-24.9-24.6%200-13.8%2011.1-24.9%2024.9-24.9%2013.6%200%2024.6%2011.1%2024.6%2024.9%200%2013.6-11.1%2024.6-24.6%2024.6zM504%20256c0%20137-111%20248-248%20248S8%20393%208%20256%20119%208%20256%208s248%20111%20248%20248zm-132.3-41.2c-9.4%200-17.7%203.9-23.8%2010-22.4-15.5-52.6-25.5-86.1-26.6l17.4-78.3%2055.4%2012.5c0%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.3%2024.9-24.9s-11.1-24.9-24.9-24.9c-9.7%200-18%205.8-22.1%2013.8l-61.2-13.6c-3-.8-6.1%201.4-6.9%204.4l-19.1%2086.4c-33.2%201.4-63.1%2011.3-85.5%2026.8-6.1-6.4-14.7-10.2-24.1-10.2-34.9%200-46.3%2046.9-14.4%2062.8-1.1%205-1.7%2010.2-1.7%2015.5%200%2052.6%2059.2%2095.2%20132%2095.2%2073.1%200%20132.3-42.6%20132.3-95.2%200-5.3-.6-10.8-1.9-15.8%2031.3-16%2019.8-62.5-14.9-62.5zM302.8%20331c-18.2%2018.2-76.1%2017.9-93.6%200-2.2-2.2-6.1-2.2-8.3%200-2.5%202.5-2.5%206.4%200%208.6%2022.8%2022.8%2087.3%2022.8%20110.2%200%202.5-2.2%202.5-6.1%200-8.6-2.2-2.2-6.1-2.2-8.3%200zm7.7-75c-13.6%200-24.6%2011.1-24.6%2024.9%200%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.1%2024.9-24.6%200-13.8-11-24.9-24.9-24.9z'/%3e%3c/svg%3e){kind=small}