12.5.9. Elasticsearch 디스크 공간이 부족
Elasticsearch 클러스터는 현재 디스크 사용량에 따라 향후 6시간 이내에 디스크 공간이 부족해질 것으로 예상됩니다.
문제 해결
Elasticsearch 노드의 디스크 공간을 가져옵니다.
for pod in `oc -n openshift-logging get po -l component=elasticsearch -o jsonpath='{.items[*].metadata.name}'`; do echo $pod; oc -n openshift-logging exec -c elasticsearch $pod -- df -h /elasticsearch/persistent; done
-
명령 출력에서
nodes.node_name.fs
필드를 확인하여 해당 노드의 사용 가능한 디스크 공간을 확인합니다. - 모든 노드의 디스크 공간을 늘리십시오.
- 디스크 공간을 늘릴 수 없는 경우 클러스터에 새 데이터 노드를 추가해 보십시오.
새 데이터 노드를 추가하는 데 문제가 있는 경우 전체 클러스터 중복 정책을 줄입니다.
현재
redundancyPolicy
를 확인합니다.oc -n openshift-logging get es elasticsearch -o jsonpath='{.spec.redundancyPolicy}'
참고ClusterLogging
CR을 사용하는 경우 다음을 입력합니다.oc -n openshift-logging get cl -o jsonpath='{.items[*].spec.logStore.elasticsearch.redundancyPolicy}'
-
클러스터
redundancyPolicy
가SingleRedundancy
보다 큰 경우SingleRedundancy
로 설정하고 이러한 변경 사항을 저장합니다.
이전 단계에서 문제가 해결되지 않으면 이전 인덱스를 삭제합니다.
Elasticsearch의 모든 인덱스의 상태를 확인합니다.
oc exec -n openshift-logging -c elasticsearch <elasticsearch_pod_name> -- indices
- 삭제할 수 있는 이전 인덱스를 확인합니다.
인덱스를 삭제합니다.
oc exec -n openshift-logging -c elasticsearch <elasticsearch_pod_name> -- es_util --query=<elasticsearch_index_name> -X DELETE
추가 리소스
-
클러스터 로깅 사용자 정의 리소스 정보의 "샘플
ClusterLogging
사용자 정의 리소스 (CR)"에서 "redundancyPolicy"를 검색합니다. - Elasticsearch 경고 규칙에서 "ElasticsearchDiskSpaceRunningLow"를 검색합니다.
- Elasticsearch 주제에서 "Free up or increase disk space"를 검색하고 빨간색 또는 노란색 클러스터 상태를 수정합니다.