8.4.4. OOM の強制終了ポリシーについて

手順

1. リモートシェルを使用して Pod にアクセスします。

   # oc rsh test

2. 以下のコマンドを実行して、/sys/fs/cgroup/memory/memory.oom_control で現在の OOM kill カウントを表示します。

   $ grep '^oom_kill ' /sys/fs/cgroup/memory/memory.oom_control

   出力例

   oom_kill 0

3. 以下のコマンドを実行して、Out Of Memory (OOM) による強制終了を促します。

   $ sed -e '' </dev/zero

   出力例

   Killed

4. 以下のコマンドを実行して、sed コマンドの終了ステータスを表示します。

   $ echo $?

   出力例

   137

   137 コードは、コンテナーのプロセスが、SIGKILL シグナルを受信したことを示すコード 137 で終了していることを示唆します。

5. 以下のコマンドを実行して、/sys/fs/cgroup/memory/memory.oom_control の OOM kill カウンターの増分を表示します。

   $ grep '^oom_kill ' /sys/fs/cgroup/memory/memory.oom_control

   出力例

   oom_kill 1

   Pod の 1 つ以上のプロセスが OOM で強制終了され、Pod がこれに続いて終了する場合 (即時であるかどうかは問わない)、フェーズは Failed、理由は OOMKilled になります。OOM で強制終了された Pod は restartPolicy の値によって再起動する場合があります。再起動されない場合は、レプリケーションコントローラーなどのコントローラーが Pod の失敗したステータスを認識し、古い Pod に置き換わる新規 Pod を作成します。

   以下のコマンドを使用して Pod のステータスを取得します。

   $ oc get pod test

   出力例

   NAME      READY     STATUS      RESTARTS   AGE
   test      0/1       OOMKilled   0          1m

   • Pod が再起動されていない場合は、以下のコマンドを実行して Pod を表示します。

     $ oc get pod test -o yaml

     出力例

     apiVersion: v1
     kind: Pod
     metadata:
       name: test
     # ...
     status:
       containerStatuses:
       - name: test
         ready: false
         restartCount: 0
         state:
           terminated:
             exitCode: 137
             reason: OOMKilled
       phase: Failed

   • 再起動した場合は、以下のコマンドを実行して Pod を表示します。

     $ oc get pod test -o yaml

     出力例

     apiVersion: v1
     kind: Pod
     metadata:
       name: test
     # ...
     status:
       containerStatuses:
       - name: test
         ready: true
         restartCount: 1
         lastState:
           terminated:
             exitCode: 137
             reason: OOMKilled
         state:
           running:
       phase: Running