3장. 파이프라인 실행 관리

파이프라인 실행은 데이터 사이언스 파이프라인의 단일 실행입니다. 데이터 생성으로 OpenShift AI를 사용하여 데이터 사이언스 파이프라인의 실행을 정의, 관리 및 추적할 수 있습니다. 이전에 실행, 예약 및 보관된 실행의 레코드를 보려면 먼저 OpenShift AI 인터페이스의 실험 실험 실행 페이지를 선택해야 합니다. 테스트를 선택한 후 실행 페이지에서 모든 파이프라인 실행에 액세스할 수 있습니다.

파이프라인 실험을 사용하여 이식성 및 반복성을 위해 파이프라인 실행 사용을 최적화할 수 있습니다. 실험으로 파이프라인 실행을 논리적으로 그룹화하고 파이프라인의 다른 구성을 시도할 수 있습니다. 파이프라인 실행을 복제하여 재현 및 스케일링하거나 실행 레코드를 유지하려고 할 때 아카이브할 수 있지만 더 이상 필요하지 않습니다. 더 이상 유지하지 않으려는 보관된 실행을 삭제하거나 이전 상태로 복원할 수 있습니다.

생성 직후 또는 반복적으로 실행을 실행할 수 있습니다. 반복 실행은 모든 매개변수 값과 실행 트리거가 포함된 파이프라인의 사본으로 구성됩니다. 실행 트리거는 반복 실행이 실행되는 시기를 나타냅니다. 다음 실행 트리거를 정의할 수 있습니다.

동시에 실행되도록 동일한 실행의 최대 10개의 인스턴스를 구성할 수도 있습니다. OpenShift AI 사용자 인터페이스의 실행 세부 정보 페이지에서 실행 진행 상황을 추적할 수 있습니다. 여기에서 실행에 대한 그래프 및 출력 아티팩트를 볼 수 있습니다.

파이프라인 실행은 다음 상태 중 하나일 수 있습니다.

catch up 실행을 사용하면 일시 중지될 때 파이프라인 실행이 일정보다 영구적으로 줄어들지 않도록 할 수 있습니다. 예를 들어 일시 중지된 반복 실행을 다시 활성화하면 run 스케줄러에서 각 누락된 실행 간격이 백필됩니다. catch up 실행을 비활성화하고 예약된 실행 간격을 실행할 준비가 된 경우 run 스케줄러는 최신 실행 간격에 대한 실행 실행만 예약합니다. catch up 실행은 기본적으로 활성화되어 있습니다. 그러나 파이프라인에서 내부적으로 백필을 처리하는 경우 중복 백필을 방지하기 위해 catch up runs을 비활성화하는 것이 좋습니다.

파이프라인 실행이 실행된 후 Artifacts 페이지에서 실행된 작업의 세부 정보를 아티팩트와 함께 볼 수 있습니다. 실행 페이지에서 각 작업의 실행 상태를 볼 수 있으며, 이 상태는 성공적으로 완료되었는지를 나타냅니다. 목록의 실행 이름을 클릭하여 실행된 각 작업에 대한 추가 정보를 볼 수도 있습니다. Artifacts 페이지에서 이름, 고유 ID, 유형, URI와 같은 각 파이프라인 아티팩트의 세부 정보를 볼 수 있습니다. 파이프라인 아티팩트를 사용하면 파이프라인 실행의 성능을 평가하고 파이프라인 구성 요소를 더 쉽게 이해할 수 있습니다. 파이프라인 아티팩트는 일반 텍스트 데이터에서 자세한 대화형 데이터 시각화까지 범위를 지정할 수 있습니다.

목록의 아티팩트 이름을 클릭하여 원래 실행 및 원래 실행을 포함하여 각 아티팩트에 대한 추가 정보를 볼 수 있습니다. 목록의 활성 아티팩트 URI 링크를 클릭하여 S3 호환 오브젝트 스토리지에 저장된 아티팩트 콘텐츠를 보거나 다운로드할 수도 있습니다.

예를 들어 아티팩트가 일반 텍스트, HTML 또는 마크다운인 경우 브라우저에서 아티팩트 콘텐츠를 표시할 수 있는 경우 콘텐츠가 다운로드되지 않지만 새 브라우저 탭에 자동으로 표시됩니다. 예를 들어 아티팩트가 모델인 경우 아티팩트가 자동으로 다운로드되는 아티팩트 콘텐츠를 표시할 수 없습니다. 브라우저 탭에 표시되는 아티팩트를 다운로드하려면 콘텐츠를 마우스 오른쪽 버튼으로 클릭한 다음 저장을 클릭합니다.

활성 파이프라인 실행의 각 단계에 대한 로그를 검토하고 분석할 수 있습니다. 로그 뷰어를 사용하면 특정 로그 메시지를 검색하고 각 단계의 로그를 보고, 단계 로그를 로컬 머신에 다운로드할 수 있습니다.