1.13. データサイエンスパイプラインのキャッシングの概要

特定タスクのキャッシングを無効にするには、パイプラインコード内のタスクに set_caching_options メソッドを直接適用します。

task_name.set_caching_options(False)

task_name.set_caching_options(False)

この設定を適用すると、OpenShift AI はキャッシュされた結果を無視して、それ以降のパイプライン実行でタスクを実行します。

set_caching_options パラメーターを True に設定するか、set_caching_options を省略することで、個々のタスクのキャッシングを再度有効にできます。

パイプラインサーバーでキャッシングが無効な場合、この設定は無視されます。

パイプライン送信時のパイプライン全体のキャッシングを無効にするには、パイプラインコードで enable_caching パラメーターを False に設定します。この設定により、パイプライン実行中にステップはキャッシュされなくなります。enable_caching パラメーターは、kfp.client を使用してパイプラインを送信したりパイプライン実行を開始 (run_pipeline メソッドなど) したりする場合にのみ使用できます。

以下に例を示します。

import kfp
client = kfp.Client()
client.run_pipeline(
    experiment_id=experiment.id,
    pipeline_id=pipeline.id,
    job_name="no-cache-run",
    params={},                # optional
    enable_caching=False,
)

import kfp
client = kfp.Client()
client.run_pipeline(
    experiment_id=experiment.id,
    pipeline_id=pipeline.id,
    job_name="no-cache-run",
    params={},                # optional
    enable_caching=False,
)

パイプラインのコンパイル時またはパイプラインサーバーでキャッシングが無効な場合、この設定は無視されます。

コンパイル時のパイプライン全体のキャッシングを無効にするには、ローカル環境またはワークベンチで次のいずれかのオプションを設定します。

パイプラインサーバーでキャッシングが無効な場合、これらの設定は無視されます。

パイプラインサーバー内のすべてのパイプラインのキャッシュを無効にして、すべてのパイプラインおよびタスクレベルのキャッシュ設定をオーバーライドするには、次のいずれかの方法を使用します。

この設定を適用すると、すべてのパイプラインおよびタスクレベルのキャッシング設定が無視されます。