8.5. 在 OpenShift 中查看 Kafka 指标和仪表板

流程

1. 检查是否启用了对用户定义的项目的监控：

   oc get pods -n openshift-user-workload-monitoring

   Copy to Clipboard Toggle word wrap

   如果启用，则返回监控组件的 Pod。例如：

   NAME                                   READY   STATUS    RESTARTS   AGE
   prometheus-operator-5cc59f9bc6-kgcq8   1/1     Running   0          25s
   prometheus-user-workload-0             5/5     Running   1          14s
   prometheus-user-workload-1             5/5     Running   1          14s
   thanos-ruler-user-workload-0           3/3     Running   0          14s
   thanos-ruler-user-workload-1           3/3     Running   0          14s

   Copy to Clipboard Toggle word wrap

   如果没有返回 pod，则禁用对用户定义的项目的监控。请参阅 第 8.5 节 “在 OpenShift 中查看 Kafka 指标和仪表板” 中的先决条件。

2. 在 example /metrics/prometheus-install/strimzi-pod-monitor.yaml 中定义多个 PodMonitor 资源。

   对于每个 PodMonitor 资源，编辑 spec.namespaceSelector.matchNames 属性：

   apiVersion: monitoring.coreos.com/v1
   kind: PodMonitor
   metadata:
     name: cluster-operator-metrics
     labels:
       app: strimzi
   spec:
     selector:
       matchLabels:
         strimzi.io/kind: cluster-operator
     namespaceSelector:
       matchNames:
         - <project-name> 

   1

   
     podMetricsEndpoints:
     - path: /metrics
       port: http
   # ...

   Copy to Clipboard Toggle word wrap

   1

   要从中提取指标的 Pod 的项目，如 Kafka。

3. 将 strimzi-pod-monitor.yaml 文件部署到运行 Kafka 集群的项目：

   oc apply -f strimzi-pod-monitor.yaml -n MY-PROJECT

   Copy to Clipboard Toggle word wrap

4. 将示例 Prometheus 规则部署到同一个项目中：

   oc apply -f prometheus-rules.yaml -n MY-PROJECT

   Copy to Clipboard Toggle word wrap

流程

1. 为 Grafana 创建 ServiceAccount。此处的资源名为 grafana-serviceaccount。

   apiVersion: v1
   kind: ServiceAccount
   metadata:
     name: grafana-serviceaccount
     labels:
       app: strimzi

   Copy to Clipboard Toggle word wrap

2. 将 ServiceAccount 部署到包含 Kafka 集群的项目：

   oc apply -f GRAFANA-SERVICEACCOUNT -n MY-PROJECT

   Copy to Clipboard Toggle word wrap

3. 创建一个 ClusterRoleBinding 资源，它将 cluster-monitoring-view 角色分配给 Grafana ServiceAccount。此处的资源名为 grafana-cluster-monitoring-binding。

   apiVersion: rbac.authorization.k8s.io/v1
   kind: ClusterRoleBinding
   metadata:
     name: grafana-cluster-monitoring-binding
     labels:
       app: strimzi
   subjects:
     - kind: ServiceAccount
       name: grafana-serviceaccount
       namespace: <my-project> 

   1

   
   roleRef:
     kind: ClusterRole
     name: cluster-monitoring-view
     apiGroup: rbac.authorization.k8s.io

   Copy to Clipboard Toggle word wrap

   1

   项目的名称。

4. 将 ClusterRoleBinding 部署到包含 Kafka 集群的项目：

   oc apply -f <grafana-cluster-monitoring-binding> -n <my-project>

   Copy to Clipboard Toggle word wrap

流程

1. 获取 Grafana ServiceAccount 的访问令牌：

   oc serviceaccounts get-token grafana-serviceaccount -n MY-PROJECT

   Copy to Clipboard Toggle word wrap

   复制访问令牌以在下一步中使用。

2. 创建包含 Grafana 的 Thanos Querier 配置的 datasource.yaml 文件。

   按照所示，将访问令牌粘贴到 httpHeaderValue1 属性中。

   apiVersion: 1
   
   datasources:
   - name: Prometheus
     type: prometheus
     url: https://thanos-querier.openshift-monitoring.svc.cluster.local:9091
     access: proxy
     basicAuth: false
     withCredentials: false
     isDefault: true
     jsonData:
       timeInterval: 5s
       tlsSkipVerify: true
       httpHeaderName1: "Authorization"
     secureJsonData:
       httpHeaderValue1: "Bearer ${GRAFANA-ACCESS-TOKEN}" 

   1

   
     editable: true

   Copy to Clipboard Toggle word wrap

   1

   GRAFANA-ACCESS-TOKEN ：Grafana ServiceAccount 的访问令牌值。

3. 从 Datasource .yaml 文件中创建一个名为 grafana-config 的配置映射：

   oc create configmap grafana-config --from-file=datasource.yaml -n MY-PROJECT

   Copy to Clipboard Toggle word wrap

4. 创建由 Deployment 和 Service 组成的 Grafana 应用程序。

   grafana-config 配置映射作为数据源配置的卷挂载。

   apiVersion: apps/v1
   kind: Deployment
   metadata:
     name: grafana
     labels:
       app: strimzi
   spec:
     replicas: 1
     selector:
       matchLabels:
         name: grafana
     template:
       metadata:
         labels:
           name: grafana
       spec:
         serviceAccountName: grafana-serviceaccount
         containers:
         - name: grafana
           image: grafana/grafana:7.5.15
           ports:
           - name: grafana
             containerPort: 3000
             protocol: TCP
           volumeMounts:
           - name: grafana-data
             mountPath: /var/lib/grafana
           - name: grafana-logs
             mountPath: /var/log/grafana
           - name: grafana-config
             mountPath: /etc/grafana/provisioning/datasources/datasource.yaml
             readOnly: true
             subPath: datasource.yaml
           readinessProbe:
             httpGet:
               path: /api/health
               port: 3000
             initialDelaySeconds: 5
             periodSeconds: 10
           livenessProbe:
             httpGet:
               path: /api/health
               port: 3000
             initialDelaySeconds: 15
             periodSeconds: 20
         volumes:
         - name: grafana-data
           emptyDir: {}
         - name: grafana-logs
           emptyDir: {}
         - name: grafana-config
           configMap:
             name: grafana-config
   ---
   apiVersion: v1
   kind: Service
   metadata:
     name: grafana
     labels:
       app: strimzi
   spec:
     ports:
     - name: grafana
       port: 3000
       targetPort: 3000
       protocol: TCP
     selector:
       name: grafana
     type: ClusterIP

   Copy to Clipboard Toggle word wrap

5. 将 Grafana 应用程序部署到包含 Kafka 集群的项目中：

   oc apply -f <grafana-application> -n <my-project>

   Copy to Clipboard Toggle word wrap

流程

1. 获取到 Grafana 服务的路由详情。例如：

   oc get routes
   
   NAME               HOST/PORT                         PATH  SERVICES
   MY-GRAFANA-ROUTE   MY-GRAFANA-ROUTE-amq-streams.net        grafana

   Copy to Clipboard Toggle word wrap
2. 在 Web 浏览器中，使用 Route 主机和端口的 URL 访问 Grafana 登录屏幕。

3. 输入您的用户名和密码，然后点 Log In。

   默认的 Grafana 用户名和密码都是 admin。第一次登录后，您可以更改密码。

4. 在 Configuration > Data Sources 中，检查是否已创建 Prometheus 数据源。数据源是在 第 8.5.5 节 “使用 Prometheus 数据源部署 Grafana” 中创建。
5. 单击 + 图标，然后单击 Import。
6. 在 example/metrics/grafana-dashboards 中，复制要导入的仪表板的 JSON。
7. 将 JSON 粘贴到文本框中，然后单击 Load。
8. 为其他 Grafana 仪表板重复步骤 5-7。