1.13. 데이터 사이언스 파이프라인 캐싱 개요

특정 작업에 대한 캐싱을 비활성화하려면 파이프라인 코드의 작업에 set_caching_options 메서드를 직접 적용합니다.

task_name.set_caching_options(False)

task_name.set_caching_options(False)

이 설정을 적용한 후 OpenShift AI는 캐시된 결과를 무시하고 향후 파이프라인 실행에서 작업을 실행합니다.

set_caching_options 매개변수를 True 로 설정하거나 set_caching_options 를 생략하여 개별 작업에 대한 캐싱을 다시 활성화할 수 있습니다.

파이프라인 서버에서 캐싱이 비활성화된 경우 이 설정은 무시됩니다.

파이프라인 제출 중에 전체 파이프라인의 캐싱을 비활성화하려면 파이프라인 코드에서 enable_caching 매개변수를 False 로 설정합니다. 이 설정을 사용하면 파이프라인 실행 중에 단계가 캐시되지 않습니다. enable_caching 매개변수는 kfp.client 를 사용하여 파이프라인을 제출하거나 run_pipeline 방법과 같은 파이프라인 실행을 시작하는 경우에만 사용할 수 있습니다.

예제:

import kfp
client = kfp.Client()
client.run_pipeline(
    experiment_id=experiment.id,
    pipeline_id=pipeline.id,
    job_name="no-cache-run",
    params={},                # optional
    enable_caching=False,
)

import kfp
client = kfp.Client()
client.run_pipeline(
    experiment_id=experiment.id,
    pipeline_id=pipeline.id,
    job_name="no-cache-run",
    params={},                # optional
    enable_caching=False,
)

파이프라인 컴파일 중 또는 파이프라인 서버에서 캐싱이 비활성화된 경우 이 설정은 무시됩니다.

컴파일 중에 전체 파이프라인에 대한 캐싱을 비활성화하려면 로컬 환경 또는 워크벤치에서 다음 옵션 중 하나를 설정합니다.

파이프라인 서버에서 캐싱이 비활성화된 경우 이러한 설정은 무시됩니다.

파이프라인 서버의 모든 파이프라인에 대한 캐싱을 비활성화하고 모든 파이프라인 및 작업 수준 캐싱 설정을 재정의하려면 다음 방법 중 하나를 사용합니다.

이 설정을 적용하면 모든 파이프라인 및 작업 수준 캐싱 설정이 무시됩니다.