Cluster Observability Operator

流程

1. 在 OpenShift Container Platform web 控制台中，点 Operators → Installed Operators 并选择 Cluster Observability Operator。
2. 选择 UI Plugin 选项卡（在选项卡列表的最右侧），然后按 Create UIPlugin。

3. 选择 YAML 视图，输入以下内容，然后按 Create ：

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: dashboards
   spec:
     type: Dashboards

流程

1. 在 openshift-config-managed 命名空间中创建 ConfigMap 资源，标签为 console.openshift.io/dashboard-datasource: 'true'。以下示例来自 prometheus-datasource-example.yaml

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: cluster-prometheus-proxy
     namespace: openshift-config-managed
     labels:
       console.openshift.io/dashboard-datasource: "true"
   data:
     "dashboard-datasource.yaml": |-
       kind: "Datasource"
       metadata:
         name: "cluster-prometheus-proxy"
         project: "openshift-config-managed"
       spec:
         plugin:
           kind: "prometheus"
           spec:
             direct_url: "https://prometheus-k8s.openshift-monitoring.svc.cluster.local:9091"

2. 配置连接到数据源的自定义仪表板。示例仪表板的 YAML 位于 prometheus-dashboard-example.yaml 中。以下摘录显示了该文件的演示目的：

   例 5.1. 从示例仪表板中提取（从 prometheus-dashboard-example.yaml 获得）

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: dashboard-example
     namespace: openshift-config-managed
     labels:
       console.openshift.io/dashboard: "true"
   data:
     k8s-resources-workloads-namespace.json: |-
       {
           "annotations": {
               "list": [
   
               ]
           },
           "editable": true,
           "gnetId": null,
           "graphTooltip": 0,
           "hideControls": false,
           "links": [
   
           ],
           "refresh": "10s",
           "rows": [
               {
                   "collapse": false,
                   "height": "250px",
                   "panels": [
                       {
                           "aliasColors": {
   
                           },
                           "bars": false,
                           "dashLength": 10,
                           "dashes": false,
                           "datasource": {
                               "name": "cluster-prometheus-proxy",
                               "type": "prometheus"
                           },
                           "fill": 10,
                           "id": 1,
                           "interval": "1m",
                           "legend": {
                               "alignAsTable": true,
                               "avg": false,
                               "current": false,
                               "max": false,
                               "min": false,
                               "rightSide": true,
                               "show": true,
                               "total": false,
                               "values": false
                           },
                           "lines": true,
                           "linewidth": 0,
                           "links": [
   
                           ],
                           "nullPointMode": "null as zero",
                           "percentage": false,
                           "pointradius": 5,
                           "points": false,
                           "renderer": "flot",
                           "seriesOverrides": [
                               {
                                   "alias": "quota - requests",
                                   "color": "#F2495C",
                                   "dashes": true,
                                   "fill": 0,
                                   "hiddenSeries": true,
                                   "hideTooltip": true,
                                   "legend": true,
                                   "linewidth": 2,
                                   "stack": false
                               },
                               {
                                   "alias": "quota - limits",
                                   "color": "#FF9830",
                                   "dashes": true,
                                   "fill": 0,
                                   "hiddenSeries": true,
                                   "hideTooltip": true,
                                   "legend": true,
                                   "linewidth": 2,
                                   "stack": false
                               }
                           ],
                           "spaceLength": 10,
                           "span": 12,
                           "stack": false,
                           "steppedLine": false,
                           "targets": [
                               {
                                   "expr": "sum(  node_namespace_pod_container:container_cpu_usage_seconds_total:sum_irate{cluster=\"$cluster\", namespace=\"$namespace\"}* on(namespace,pod)  group_left(workload, workload_type) namespace_workload_pod:kube_pod_owner:relabel{cluster=\"$cluster\", namespace=\"$namespace\", workload_type=\"$type\"}) by (workload, workload_type)",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "{{workload}} - {{workload_type}}",
                                   "legendLink": null,
                                   "step": 10
                               },
                               {
                                   "expr": "scalar(kube_resourcequota{cluster=\"$cluster\", namespace=\"$namespace\", type=\"hard\",resource=\"requests.cpu\"})",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "quota - requests",
                                   "legendLink": null,
                                   "step": 10
                               },
                               {
                                   "expr": "scalar(kube_resourcequota{cluster=\"$cluster\", namespace=\"$namespace\", type=\"hard\",resource=\"limits.cpu\"})",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "quota - limits",
                                   "legendLink": null,
                                   "step": 10
                               }
                           ],
                           "thresholds": [
   
                           ],
                           "timeFrom": null,
                           "timeShift": null,
                           "title": "CPU Usage",
                           "tooltip": {
                               "shared": false,
                               "sort": 2,
                               "value_type": "individual"
                           },
                           "type": "graph",
                           "xaxis": {
                               "buckets": null,
                               "mode": "time",
                               "name": null,
                               "show": true,
                               "values": [
   
                               ]
                           },
   ...

3. 点 Observe → Dashboards，自定义仪表板会基于 prometheus-dashboard-example.yaml 中的配置，标题为 ** DASHBOARD EXAMPLE **。

   

   您可以在 UI 中为仪表板设置命名空间、时间范围和刷新间隔。

流程

1. 在 OpenShift Container Platform web 控制台中，点 Operators → Installed Operators 并选择 Cluster Observability Operator
2. 选择 UI Plugin 选项卡（在选项卡列表的最右侧），然后按 Create UIPlugin

3. 选择 YAML 视图，输入以下内容，然后按 Create ：

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: distributed-tracing
   spec:
     type: DistributedTracing

流程

1. 在 OpenShift Container Platform Web 控制台的 Administrator 视角中，点 Observe → Traces。

2. 选择 TempoStack 或 TempoMonolithic 多租户实例，并为要加载的 trace 设置时间范围和查询。

   trace 显示在 scatter-plot 中，显示 trace 开始时间、持续时间和 span 数量。在 scatter 图表下，有一个跟踪列表，显示 Trace Name、Spans 的数量和 Duration 等信息。

3. 点一个 trace 名称链接。

   所选 trace 的 trace 详情页包括了 trace 中所有范围的 Gantt 图表。选择一个 span 来显示配置的属性的分类。

流程

1. 在 OpenShift Container Platform web 控制台中，点 Operators → Installed Operators 并选择 Cluster Observability Operator
2. 选择 UI Plugin 选项卡（在选项卡列表的最右侧），然后按 Create UIPlugin

3. 选择 YAML 视图，输入以下内容，然后按 Create ：

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: troubleshooting-panel
   spec:
     type: TroubleshootingPanel

流程

1. 使用以下 YAML （通过命令行或在 web 控制台中），在系统命名空间中创建一个有问题的部署：

   apiVersion: apps/v1
   kind: Deployment
   metadata:
     name: bad-deployment
     namespace: default 1
   spec:
     selector:
       matchLabels:
         app: bad-deployment
     template:
       metadata:
         labels:
           app: bad-deployment
       spec:
         containers: 2
         - name: bad-deployment
           image: quay.io/openshift-logging/vector:5.8

   1

   部署必须位于一个系统命名空间中（如 default）才能造成所需的警报。

   2

   这个容器会有意尝试启动一个没有配置文件的 vector 服务器。服务器会记录一些消息，然后退出并显示错误。或者，您可以部署一个有配置错误的容器，使它触发警报。

2. 查看警报：

   1. 选 Observe → Alerting，再点 clear all filters。查看 Pending 警报。

      重要

      警报先显示为 Pending 状态。它们不会立即开始 Firing，而是在容器崩溃一段时间后才会启动 。您可以直接查看 Pending 警报，这样就无需等待很长时间才能看到它们。

   2. 选择 KubeContainerWaiting、KubePodCrashLooping 或 KubePodNotReady 警报之一，然后点链接打开故障排除面板。或者，如果面板已经打开，点 "Focus" 按钮来更新图形。

流程

1. 在 OpenShift Container Platform web 控制台中，点 Operators → Installed Operators 并选择 Cluster Observability Operator。
2. 选择 UI Plugin 选项卡（位于选项卡列表的最右侧），然后点 Create UIPlugin。

3. 选择 YAML 视图，输入以下内容，然后点 Create ：

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: logging
   spec:
     type: Logging
     logging:
       lokiStack:
         name: logging-loki
       logsLimit: 50
       timeout: 30s