12.8. DPF 문제 해결

다음 명령을 실행하여 관리 클러스터의 CSR 상태를 나열합니다.

$ oc get csr

Worker 노드의 모든 CSR이 Approved 상태가 표시되는지 확인합니다.

다음 명령을 실행하여 DPF Operator pods의 상태를 확인합니다.

$ oc get pod -n dpf-operator-system

모든 pods가 Running 상태인지 확인합니다.

다음 명령을 실행하여 dpu-enabled 라벨이 워커 노드에 존재하는지 확인합니다.

$ oc get nodes -l feature.node.kubernetes.io/dpu-enabled=""

출력은 DPU 프로비저닝을 위해 NFD가 라벨을 지정한 워커 노드를 나열합니다. 예를 들면 다음과 같습니다.

NAME           STATUS     ROLES               AGE   VERSION
host-worker1   NotReady   worker,worker-dpu   62s   v1.35.6
host-worker2   NotReady   worker,worker-dpu   66s   v1.35.6

다음 명령을 실행하여 BlueField Bootstream File(BFB) 이미지가 다운로드되고 준비되어 있는지 확인합니다.

$ oc describe bfb -n dpf-operator-system bf-bundle

status.conditions 필드를 확인하여 다운로드 진행 상황과 오류 메시지를 확인합니다.

BFB 다운로드가 실패하면 다음 명령을 실행하여 이미지 URL에 액세스할 수 있는지 확인하고 이미지 URL로 $BFB_URL를 대체합니다.

$ curl -I $BFB_URL

응답이 200 OK 상태 코드를 반환하는지 확인합니다. 다운로드가 실패하면 이미지 레지스트리와 네트워크 연결성을 확인하고 방화벽 또는 프록시 제한 사항을 확인하고 노드에 충분한 디스크 공간이 있는지 확인합니다.

다음 명령을 실행하여 프로비저닝을 통해 DPU 객체의 진행을 관찰합니다.

$ oc get dpu -n dpf-operator-system -w

각 DPU가 기후에서 프로비저닝에서 준비 상태로 진행되도록 기다립니다.

worker 노드에서 debug shell을 열기:

$ oc debug node/<worker-node-name>

debug shell 내에서 다음 명령을 실행하여 BlueField 장치가 존재하는지 확인합니다.

sh-5.1# chroot /host

sh-5.1# lspci | grep -i mellanox

DPU가 나열되지 않으면, DPU가 PCIe 슬롯에 올바르게 위치하고 서버 BIOS에서 비활성화되지 않았는지 확인합니다.

debug shell 내에서 다음 명령을 실행하여 DPU 펌웨어 버전을 확인합니다.

sh-5.1# mlxfwmanager --query

DPU의 BlueField 펌웨어 및 DOCA 소프트웨어 버전이 구축한 DPF 운영자 버전과 호환되는지 확인합니다.

다음 리소스에 대한 정보를 위해 DPUDeployment 객체를 검사합니다.

다음 명령을 실행하여 전체 DPUDeployment 상태를 확인합니다.

$ oc get dpudeployments -n dpf-operator-system dpudeployment -o yaml

또는 다음 dpfctl 명령을 실행하여 요약된 뷰를 확인합니다.

$ oc -n dpf-operator-system exec deploy/dpf-operator-controller-manager -- /dpfctl describe dpudeployments