Observability（可观察性）

流程

1. 在 OpenShift Container Platform web 控制台中，进入 菜单 → Observability → Logging 来查看 Kibana 仪表板。

2. 创建索引模式。

   1. 要显示所有索引，请将索引模式定义为 *，然后点 Next step。
   2. 为 Time Filter field name 选择 @timestamp。
   3. 单击 Create index pattern。
3. 在 Kibana 仪表板的导航面板中，点 Discover 选项卡。

4. 创建过滤器以检索 Argo CD 的日志。以下步骤创建一个过滤器，用于检索 openshift-gitops 命名空间中的所有 pod 的日志：

   1. 点 Add a filter +。
   2. 选择 kubernetes.namespace_name 字段。
   3. 选择 is operator。
   4. 选择 openshift-gitops 值。
   5. 点 Save。
5. 可选：添加额外的过滤器来缩小搜索范围。例如，要检索特定 pod 的日志，您可以使用 kubernetes.pod_name 作为字段创建另一个过滤器。
6. 在 Kibana 仪表板中查看过滤的 Argo CD 日志。

流程

1. 在 web 控制台的 Administrator 视角中，进入 Observe → Dashboards。
2. 在 Dashboard 下拉列表中选择所需的 GitOps 仪表板： GitOps (Overview)、GitOps / 组件 或 GitOps / gRPC Services。
3. 可选：从 Namespace、Cluster 和 Interval 下拉列表中选择特定的命名空间、集群和间隔。
4. 在 GitOps 仪表板中查看所需的 GitOps 指标。

流程

1. 在 web 控制台的 Developer 视角中，选择安装 Argo CD 应用程序的命名空间，并导航到 Observe → Metrics。
2. 在 Select query 下拉列表中，选择 Custom query。

3. 要检查 Argo CD 应用程序的健康状态，在 Expression 字段中输入 Prometheus Query Language (PromQL)查询，如下例所示：

   示例

   sum(argocd_app_info{dest_namespace=~"<your_defined_namespace>",health_status!=""}) by (health_status) 

   1

   Copy to Clipboard Toggle word wrap

   1

   将 & lt;your_defined_namespace > 变量替换为您定义的命名空间的实际名称，如 openshift-gitops。

流程

1. 在 web 控制台的 Administrator 视角中，进入 Observe → Metrics。

2. 在 Expression 字段中输入指标。您可以从以下指标中选择：

   • active_argocd_instances_total
   • active_argocd_instances_by_phase
   • active_argocd_instance_reconciliation_count
   • controller_runtime_reconcile_time_seconds_per_instance_bucket
   • controller_runtime_reconcile_time_seconds_per_instance_count
   • controller_runtime_reconcile_time_seconds_per_instance_sum

3. （可选）：根据属性过滤指标。例如，根据 Available 阶段过滤 active_argocd_instances_by_phase 指标：

   示例

   active_argocd_instances_by_phase{phase="Available"}

   Copy to Clipboard Toggle word wrap

4. （可选）：点击 Add query 来输入多个查询。
5. 点 Run queries 启用并观察 GitOps Operator 指标。

流程

1. 点 Developer 视角下的 Environments。Environments 页面中显示应用程序列表及其 环境状态。
2. 将鼠标悬停在 Environment status 列下的图标上，以查看所有环境的同步状态。
3. 点击列表中的应用程序名称查看特定应用程序的详情。

4. 在 Application environments 页面中，如果 Overview 选项卡下的 Resources 部分显示图标，将鼠标悬停在图标上来获取状态详情。

   • 一个分离开的心型图标表示资源问题已降低应用程序的性能。
   • 一个黄色的符号表示资源问题中带有应用程序的健康状态的延迟数据。
5. 要查看应用程序的部署历史记录，请点 Deployment History 选项卡。该页面包括 Last deployment、Description （提交消息）、Environment、Author 和 Revision 等详情。

流程

1. 在给定的 Argo CD 实例中，将 .spec.monitoring.enabled 字段值设置为 true ：

   Argo CD 自定义资源示例

   apiVersion: argoproj.io/v1beta1
   kind: ArgoCD
   metadata:
     name: example-argocd
     labels:
       example: repo
   spec:
    # ...
     monitoring:
       enabled: true
    # ...

   Copy to Clipboard Toggle word wrap

2. 验证 Operator 创建的 PrometheusRule 中是否包含警报规则：

   警报规则示例

   apiVersion: monitoring.coreos.com/v1
   kind: PrometheusRule
   metadata:
     name: argocd-component-status-alert
     namespace: openshift-gitops
   spec:
     groups:
       - name: ArgoCDComponentStatus
         rules:
          # ...
           - alert: ApplicationSetControllerNotReady 

   1

   
             annotations:
               message: >-
                 applicationSet controller deployment for Argo CD instance in
                 namespace "default" is not running
             expr: >-
               kube_statefulset_status_replicas{statefulset="openshift-gitops-application-controller statefulset",
               namespace="openshift-gitops"} !=
               kube_statefulset_status_replicas_ready{statefulset="openshift-gitops-application-controller statefulset",
               namespace="openshift-gitops"}
             for: 1m
             labels:
               severity: critical

   Copy to Clipboard Toggle word wrap

   1

   PrometheusRule 中的警报规则，用于检查 Argo CD 实例创建的工作负载是否如预期运行。