7.4. 운영 체제 문제 해결
OpenShift Container Platform은 RHCOS에서 실행됩니다. 다음 절차에 따라 운영 체제와 관련된 문제를 해결할 수 있습니다.
7.4.1. 커널 크래시 조사 링크 복사링크가 클립보드에 복사되었습니다!
kexec-tools 패키지에 포함된 kdump 서비스는 크래시 덤프 메커니즘을 제공합니다. 이 서비스를 사용하여 이후 분석을 위해 시스템 메모리의 내용을 저장할 수 있습니다.
7.4.1.1. kdump 활성화 링크 복사링크가 클립보드에 복사되었습니다!
RHCOS는 kexec-tools 패키지와 함께 제공되지만 kdump 서비스를 활성화하려면 수동 구성이 필요합니다.
절차
첫 번째 커널 부팅 중에 크래시 커널의 메모리를 예약하려면 다음 명령을 입력하여 커널 인수를 제공합니다.
# rpm-ostree kargs --append='crashkernel=256M'참고ppc64le플랫폼의 경우crashkernel의 권장되는 값은crashkernel=2G-4G:384M,4G-16G:512M,16G-64G:1G,64G-128G:2G,128G-:4G입니다.선택 사항: 기본 로컬
/var/crash위치 대신 크래시 덤프를 네트워크 또는 다른 위치에 작성하려면/etc/kdump.conf구성 파일을 편집합니다.참고노드에서 LUKS 암호화 장치를 사용하는 경우 kdump에서 LUKS 암호화 장치에 대한 크래시 덤프 저장 기능을 지원하지 않으므로 네트워크 덤프를 사용해야 합니다.
kdump서비스 구성에 대한 자세한 내용은n/etc/sysconfig/kdump,/etc/kdump.conf,kdump.conf메뉴얼 페이지의 주석을 참조하십시오. 덤프 대상 구성에 대한 자세한 내용은 RHEL kdump 문서를 참조하십시오.중요기본 디스크에 멀티패스가 활성화된 경우 덤프 대상은 NFS 또는 SSH 서버여야 하며
/etc/kdump.conf구성 파일에서 multipath 모듈을 제외해야 합니다.kdumpsystemd 서비스를 활성화합니다.# systemctl enable kdump.service시스템을 재부팅합니다.
# systemctl reboot-
kdump.servicesystemd 서비스가 시작 및 종료되었는지 확인하고 kdump가 크래시 커널을 로드했는지 확인하고cat /sys/kernel/kexec_crash_loaded이라는 명령이 값1을 출력하는지 확인합니다.
7.4.1.2. Day-1에 kdump 활성화 링크 복사링크가 클립보드에 복사되었습니다!
kdump 서비스는 노드별로 커널 문제를 디버그하도록 사용하도록 설정되어 있습니다.
kdump를 활성화하는 데 드는 비용이 있고 추가 kdump 지원 노드마다 비용이 누적되므로 필요에 따라 kdump 서비스를 각 노드에서만 활성화하는 것이 좋습니다. 각 노드에서 kdump 서비스를 활성화할 수 있는 비용은 다음과 같습니다.
- 크래시 커널에 대해 예약된 메모리로 인해 사용 가능한 RAM이 줄어듭니다.
- 커널이 코어를 덤프하는 동안 노드를 사용할 수 없습니다.
- 크래시 덤프를 저장하는 데 추가 스토리지 공간이 사용됩니다.
kdump 서비스 활성화의 단점 및 장단점을 알고 있는 경우 클러스터 전체에서 kdump를 활성화할 수 있습니다. 시스템별 머신 구성은 아직 지원되지 않지만 MachineConfig 오브젝트의 systemd 단위를 Day-1 사용자 지정으로 사용하고 클러스터의 모든 노드에서 kdump를 사용하도록 설정할 수 있습니다. MachineConfig 개체를 생성하고 해당 개체를 클러스터 설정 중에 Ignition에서 사용하는 매니페스트 파일 세트에 삽입할 수 있습니다.
kdump를 활성화할 때는 아키텍처별 커널 인수를 고려해야 합니다.
ppc64le 플랫폼의 경우:
crashkernel매개변수에 다음 권장 값을 사용합니다.crashkernel=2G-4G:384M,4G-16G:512M,16G-64G:1G,64G-128G:2G,128G-:4G-
KDUMP_COMMANDLINE_APPEND설정에서을 이 플랫폼에서 지원되지 않기 때문에nr_cpus=1maxcpus=1으로 바꿉니다. ppc64le 시스템에서 kdump를 구성할 때 이러한 조정이 적용되었는지 확인합니다.
Ignition 구성 사용 방법에 대한 자세한 내용은 설치
절차
kdump를 구성하고 활성화하는 Butane 구성 파일
99-worker-kdump.bu를 생성합니다. 이렇게 하면 클러스터 전체 구성을 위한MachineConfig오브젝트가 생성됩니다.참고구성 파일에 지정하는 Butane 버전이 OpenShift Container Platform 버전과 일치해야 하며 항상
0으로 끝나야 합니다. 예를 들면5.0.0입니다. Butane에 대한 자세한 내용은 “Butane 을 사용하여 머신 구성 생성”을 참조하십시오.variant: openshift version: 5.0.0 metadata: name: 99-worker-kdump labels: machineconfiguration.openshift.io/role: worker openshift: kernel_arguments: - crashkernel=256M storage: files: - path: /etc/kdump.conf mode: 0644 overwrite: true contents: inline: | path /var/crash core_collector makedumpfile -l --message-level 7 -d 31 - path: /etc/sysconfig/kdump mode: 0644 overwrite: true contents: inline: | KDUMP_COMMANDLINE_REMOVE="hugepages hugepagesz slub_debug quiet log_buf_len swiotlb" KDUMP_COMMANDLINE_APPEND="irqpoll nr_cpus=1 reset_devices cgroup_disable=memory mce=off numa=off udev.children-max=2 panic=10 rootflags=nofail acpi_no_memhotplug transparent_hugepage=never nokaslr novmcoredd hest_disable" KEXEC_ARGS="-s" KDUMP_IMG="vmlinuz" systemd: units: - name: kdump.service enabled: true- 다음과 같습니다.
-
컨트롤 플레인 노드에
MachineConfig개체를 생성할 때 두 위치 모두에서worker를master로 바꿉니다. -
크래시 커널용 메모리를 예약하기 위해 커널 인수를 제공합니다. 필요한 경우 다른 커널 인수를 추가할 수 있습니다.
ppc64le플랫폼의 경우crashkernel의 권장되는 값은crashkernel=2G-4G:384M,4G-16G:512M,16G-64G:1G,64G-128G:2G,128G-:4G입니다. -
/etc/kdump.conf의 내용을 기본값에서 변경하려면 이 섹션을 포함하고 그에 따라inline하위 섹션을 수정합니다. -
/etc/sysconfig/kdump의 내용을 기본값에서 변경하려면 이 섹션을 포함하고 이에 따라inline하위 섹션을 수정합니다. ppc64le플랫폼의 경우nr_cpus=1을 이 플랫폼에서 지원되지 않는maxcpus=1로 바꿉니다.참고덤프를 NFS 대상으로 내보내려면 일부 커널 모듈을 구성 파일에 명시적으로 추가해야 합니다.
/etc/kdump.conf파일의 예nfs server.example.com:/export/cores core_collector makedumpfile -l --message-level 7 -d 31 extra_bins /sbin/mount.nfs extra_modules nfs nfsv3 nfs_layout_nfsv41_files blocklayoutdriver nfs_layout_flexfiles nfs_layout_nfsv41_files
-
컨트롤 플레인 노드에
Butane을 사용하여 노드에 전달할 구성이 포함된 시스템 구성 YAML 파일
99-worker-kdump.yaml을 생성합니다.$ butane 99-worker-kdump.bu -o 99-worker-kdump.yaml클러스터 설정 중에 YAML 파일을
<installation_directory>/manifests/디렉터리에 배치합니다. YAML 파일을 사용하여 클러스터 설정 후 이MachineConfig오브젝트를 생성할 수도 있습니다.$ oc create -f 99-worker-kdump.yaml
7.4.1.3. kdump 테스트 및 분석 링크 복사링크가 클립보드에 복사되었습니다!
kdump를 구성한 후 RHEL 문서를 사용하여 구성을 테스트하고 코어 덤프를 분석할 수 있습니다.
kdump에 대한 내용은 RHEL 문서의 kdump 설정 테스트 섹션을 참조하십시오.
kdump에 대한 내용은 RHEL 문서의 코어 덤프 분석 섹션을 참조하십시오.
별도의 RHEL 시스템에서 vmcore 분석을 수행하는 것이 좋습니다.