OpenShift GitOps의 관찰 가능성

프로세스

1. OpenShift Container Platform 웹 콘솔에서 메뉴 → Observability → Logging 으로 이동하여 Kibana 대시보드를 확인합니다.

2. 인덱스 패턴을 생성합니다.

   1. 모든 인덱스를 표시하려면 인덱스 패턴을 * 로 정의하고 다음 단계를 클릭합니다.
   2. @timestamp for Time Filter 필드 이름을 선택합니다.
   3. 인덱스 패턴 생성 을 클릭합니다.
3. Kibana 대시보드의 탐색 패널에서 Discover 탭을 클릭합니다.

4. Argo CD의 로그를 검색하는 필터를 생성합니다. 다음 단계에서는 openshift-gitops 네임스페이스에 있는 모든 Pod의 로그를 검색하는 필터를 생성합니다.

   1. Add a filter + 를 클릭합니다.
   2. kubernetes.namespace_name 필드를 선택합니다.
   3. is operator를 선택합니다.
   4. openshift-gitops 값을 선택합니다.
   5. 저장을 클릭합니다.
5. 선택 사항: 검색 범위를 좁히려면 추가 필터를 추가합니다. 예를 들어 특정 Pod의 로그를 검색하려면 kubernetes.pod_name 을 필드로 사용하여 다른 필터를 생성할 수 있습니다.
6. Kibana 대시보드에서 필터링된 Argo CD 로그를 확인합니다.

프로세스

1. 웹 콘솔의 개발자 화면에서 Argo CD 애플리케이션이 설치된 네임스페이스를 선택하고 모니터링 → 메트릭 으로 이동합니다.
2. 쿼리 선택 드롭다운 목록에서 사용자 지정 쿼리 를 선택합니다.

3. Argo CD 애플리케이션의 상태를 확인하려면 Expression 필드에 다음 예제와 유사한 Prometheus Query Language(PromQL) 쿼리를 입력합니다.

   예제

   sum(argocd_app_info{dest_namespace=~"<your_defined_namespace>",health_status!=""}) by (health_status) 

   1

   Copy to Clipboard Toggle word wrap

   1

   < your_defined_namespace > 변수를 정의된 네임스페이스의 실제 이름(예: openshift-gitops )으로 바꿉니다.

프로세스

1. 개발자 화면에서 환경을 클릭합니다. 환경 페이지에는 애플리케이션 목록과 해당 환경 상태가 표시됩니다.
2. 환경 상태 열 아래에 있는 아이콘 위로 마우스 커서를 이동하여 모든 환경의 동기화 상태를 확인합니다.
3. 목록에서 애플리케이션 이름을 클릭하여 특정 애플리케이션의 세부 정보를 확인합니다.

4. 애플리케이션 환경 페이지의 개요 탭의 리소스 섹션에 아이콘이 표시되면 아이콘을 마우스로 이동하여 상태 세부 정보를 가져옵니다.

   • 손상된 하트로 인해 리소스 문제가 애플리케이션 성능이 저하되었음을 나타냅니다.
   • 노란색 예보 기호는 리소스 문제가 애플리케이션 상태에 대한 데이터를 지연했음을 나타냅니다.
5. 애플리케이션의 배포 내역을 보려면 Deployment History 탭을 클릭합니다. 페이지에는 마지막 배포,설명 (커밋 메시지), 환경,작성자, 버전 등의 세부 정보가 포함되어 있습니다.

프로세스

1. 지정된 Argo CD 인스턴스에서 .spec.monitoring.enabled 필드 값을 true 로 설정합니다.

   Argo CD 사용자 정의 리소스의 예

   apiVersion: argoproj.io/v1alpha1
   kind: ArgoCD
   metadata:
     name: example-argocd
     labels:
       example: repo
   spec:
     ...
     monitoring:
       enabled: true
     ...

   Copy to Clipboard Toggle word wrap

2. Operator에서 생성한 PrometheusRule에 경고 규칙이 포함되어 있는지 확인합니다.

   경고 규칙 예

   apiVersion: monitoring.coreos.com/v1
   kind: PrometheusRule
   metadata:
     name: argocd-component-status-alert
     namespace: openshift-gitops
   spec:
     groups:
       - name: ArgoCDComponentStatus
         rules:
           ...
           - alert: ApplicationSetControllerNotReady 

   1

   
             annotations:
               message: >-
                 applicationSet controller deployment for Argo CD instance in
                 namespace "default" is not running
             expr: >-
               kube_statefulset_status_replicas{statefulset="openshift-gitops-application-controller statefulset",
               namespace="openshift-gitops"} !=
               kube_statefulset_status_replicas_ready{statefulset="openshift-gitops-application-controller statefulset",
               namespace="openshift-gitops"}
             for: 1m
             labels:
               severity: critical

   Copy to Clipboard Toggle word wrap

   1

   Argo CD 인스턴스에서 생성한 워크로드가 예상대로 실행되는지 확인하는 PrometheusRule의 경고 규칙입니다.