Cluster Observability Operator

프로세스

1. OpenShift Container Platform 웹 콘솔에서 Operator → 설치된 Operator 를 클릭하고 Cluster Observability Operator를 선택합니다.
2. UI 플러그인 탭(tab 목록의 맨 오른쪽에 있는)을 선택하고 Create UIPlugin 을 누릅니다.

3. YAML 보기를 선택하고 다음 콘텐츠를 입력한 다음 Create:을 누릅니다.

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: dashboards
   spec:
     type: Dashboards

프로세스

1. console.openshift.io/dashboard-datasource: 'true' 레이블을 사용하여 openshift-config-managed 네임스페이스에 ConfigMap 리소스를 생성합니다. 아래 예제는 prometheus-datasource-example.yaml에서 가져온 것입니다.

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: cluster-prometheus-proxy
     namespace: openshift-config-managed
     labels:
       console.openshift.io/dashboard-datasource: "true"
   data:
     "dashboard-datasource.yaml": |-
       kind: "Datasource"
       metadata:
         name: "cluster-prometheus-proxy"
         project: "openshift-config-managed"
       spec:
         plugin:
           kind: "prometheus"
           spec:
             direct_url: "https://prometheus-k8s.openshift-monitoring.svc.cluster.local:9091"

2. 데이터 소스에 연결하는 사용자 지정 대시보드를 구성합니다. 샘플 대시보드의 YAML은 prometheus-dashboard-example.yaml 에서 사용할 수 있습니다. 해당 파일에서 발췌한 내용은 설명을 위해 아래에 표시되어 있습니다.

   예 5.1. prometheus-dashboard-example.yaml에서 가져온 예제 대시보드에서 추출

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: dashboard-example
     namespace: openshift-config-managed
     labels:
       console.openshift.io/dashboard: "true"
   data:
     k8s-resources-workloads-namespace.json: |-
       {
           "annotations": {
               "list": [
   
               ]
           },
           "editable": true,
           "gnetId": null,
           "graphTooltip": 0,
           "hideControls": false,
           "links": [
   
           ],
           "refresh": "10s",
           "rows": [
               {
                   "collapse": false,
                   "height": "250px",
                   "panels": [
                       {
                           "aliasColors": {
   
                           },
                           "bars": false,
                           "dashLength": 10,
                           "dashes": false,
                           "datasource": {
                               "name": "cluster-prometheus-proxy",
                               "type": "prometheus"
                           },
                           "fill": 10,
                           "id": 1,
                           "interval": "1m",
                           "legend": {
                               "alignAsTable": true,
                               "avg": false,
                               "current": false,
                               "max": false,
                               "min": false,
                               "rightSide": true,
                               "show": true,
                               "total": false,
                               "values": false
                           },
                           "lines": true,
                           "linewidth": 0,
                           "links": [
   
                           ],
                           "nullPointMode": "null as zero",
                           "percentage": false,
                           "pointradius": 5,
                           "points": false,
                           "renderer": "flot",
                           "seriesOverrides": [
                               {
                                   "alias": "quota - requests",
                                   "color": "#F2495C",
                                   "dashes": true,
                                   "fill": 0,
                                   "hiddenSeries": true,
                                   "hideTooltip": true,
                                   "legend": true,
                                   "linewidth": 2,
                                   "stack": false
                               },
                               {
                                   "alias": "quota - limits",
                                   "color": "#FF9830",
                                   "dashes": true,
                                   "fill": 0,
                                   "hiddenSeries": true,
                                   "hideTooltip": true,
                                   "legend": true,
                                   "linewidth": 2,
                                   "stack": false
                               }
                           ],
                           "spaceLength": 10,
                           "span": 12,
                           "stack": false,
                           "steppedLine": false,
                           "targets": [
                               {
                                   "expr": "sum(  node_namespace_pod_container:container_cpu_usage_seconds_total:sum_irate{cluster=\"$cluster\", namespace=\"$namespace\"}* on(namespace,pod)  group_left(workload, workload_type) namespace_workload_pod:kube_pod_owner:relabel{cluster=\"$cluster\", namespace=\"$namespace\", workload_type=\"$type\"}) by (workload, workload_type)",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "{{workload}} - {{workload_type}}",
                                   "legendLink": null,
                                   "step": 10
                               },
                               {
                                   "expr": "scalar(kube_resourcequota{cluster=\"$cluster\", namespace=\"$namespace\", type=\"hard\",resource=\"requests.cpu\"})",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "quota - requests",
                                   "legendLink": null,
                                   "step": 10
                               },
                               {
                                   "expr": "scalar(kube_resourcequota{cluster=\"$cluster\", namespace=\"$namespace\", type=\"hard\",resource=\"limits.cpu\"})",
                                   "format": "time_series",
                                   "intervalFactor": 2,
                                   "legendFormat": "quota - limits",
                                   "legendLink": null,
                                   "step": 10
                               }
                           ],
                           "thresholds": [
   
                           ],
                           "timeFrom": null,
                           "timeShift": null,
                           "title": "CPU Usage",
                           "tooltip": {
                               "shared": false,
                               "sort": 2,
                               "value_type": "individual"
                           },
                           "type": "graph",
                           "xaxis": {
                               "buckets": null,
                               "mode": "time",
                               "name": null,
                               "show": true,
                               "values": [
   
                               ]
                           },
   ...

3. Observe → Dashboards 를 클릭하면 prometheus-dashboard-example.yaml 의 구성에 따라 ** DASHBOARD EXAMPLE **이라는 제목과 함께 사용자 정의 대시보드를 사용할 수 있습니다.

   

   UI에서 대시보드의 네임스페이스, 시간 범위 및 새로 고침 간격을 설정할 수 있습니다.

프로세스

1. OpenShift Container Platform 웹 콘솔에서 Operator → 설치된 Operator 를 클릭하고 Cluster Observability Operator를 선택합니다.
2. UI 플러그인 탭(tab 목록의 맨 오른쪽에 있음)을 선택하고 Create UIPlugin을 누릅니다.

3. YAML 보기를 선택하고 다음 콘텐츠를 입력한 다음 Create:을 누릅니다.

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: distributed-tracing
   spec:
     type: DistributedTracing

프로세스

1. OpenShift Container Platform 웹 콘솔의 관리자 화면에서 모니터링 → 추적을 클릭합니다.

2. TempoStack 또는 TempoMonolithic 다중 테넌트 인스턴스를 선택하고 추적을 로드할 시간 범위 및 쿼리를 설정합니다.

   추적은 추적 시작 시간, 기간 및 기간 수를 보여주는 묶인 플로트에 표시됩니다. 분산형 플롯 아래에는 추적 이름, 범위 수 및 기간 과 같은 정보를 보여주는 추적 목록이 있습니다.

3. 추적 이름 링크를 클릭합니다.

   선택한 추적에 대한 추적 세부 정보 페이지에는 추적 내의 모든 범위의 Gantt Chart가 포함되어 있습니다. 구성된 특성의 분석을 표시하려면 범위를 선택합니다.

프로세스

1. OpenShift Container Platform 웹 콘솔에서 Operator → 설치된 Operator 를 클릭하고 Cluster Observability Operator를 선택합니다.
2. UI 플러그인 탭(tab 목록의 맨 오른쪽에 있음)을 선택하고 Create UIPlugin을 누릅니다.

3. YAML 보기를 선택하고 다음 콘텐츠를 입력한 다음 Create:을 누릅니다.

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: troubleshooting-panel
   spec:
     type: TroubleshootingPanel

프로세스

1. 명령줄 또는 웹 콘솔의 다음 YAML을 사용하여 시스템 네임스페이스에 손상된 배포를 생성합니다.

   apiVersion: apps/v1
   kind: Deployment
   metadata:
     name: bad-deployment
     namespace: default 1
   spec:
     selector:
       matchLabels:
         app: bad-deployment
     template:
       metadata:
         labels:
           app: bad-deployment
       spec:
         containers: 2
         - name: bad-deployment
           image: quay.io/openshift-logging/vector:5.8

   1

   원하는 경고를 유발하려면 시스템 네임스페이스(예: default)에 배포해야 합니다.

   2

   이 컨테이너는 구성 파일 없이 벡터 서버를 의도적으로 시작하려고 합니다. 서버는 몇 가지 메시지를 기록한 다음 오류와 함께 종료합니다. 또는 이러한 컨테이너를 잘못 구성하여 이로 인해 경고가 트리거될 수 있습니다.

2. 경고를 확인합니다.

   1. 모니터링 → 경고로 이동하여 모든 필터 지우기 를 클릭합니다. 보류 중 경고를 확인합니다.

      중요

      먼저 경고가 Pending (보류 중) 상태로 표시됩니다. 컨테이너가 잠시 충돌할 때까지 실행되지 않습니다. 보류 중 경고를 보면 발생하는 것을 확인하기 위해 기다릴 필요가 없습니다.

   2. KubeContainerWaiting,KubePodCrashLooping, KubePodNotReady 경고 중 하나를 선택하고 링크를 클릭하여 문제 해결 패널을 엽니다. 또는 패널이 이미 열려 있는 경우 "Focus" 버튼을 클릭하여 그래프를 업데이트합니다.

프로세스

1. OpenShift Container Platform 웹 콘솔에서 Operator → 설치된 Operator 를 클릭하고 Cluster Observability Operator를 선택합니다.
2. 탭 목록의 맨 오른쪽에 있는 UI 플러그인 탭을 선택하고 Create UIPlugin 을 클릭합니다.

3. YAML 보기를 선택하고 다음 콘텐츠를 입력한 다음 Create:을 클릭합니다.

   apiVersion: observability.openshift.io/v1alpha1
   kind: UIPlugin
   metadata:
     name: logging
   spec:
     type: Logging
     logging:
       lokiStack:
         name: logging-loki
       logsLimit: 50
       timeout: 30s