6.6. Elasticsearch データのキュレーション

openshift-logging プロジェクトでクラスターロギングのカスタムリソースを編集します。

$ oc edit clusterlogging instance

apiVersion: "logging.openshift.io/v1"
kind: "ClusterLogging"
metadata:
  name: "instance"

...

  curation:
    curator:
      schedule: 30 3 * * * 1
    type: curator

OpenShift Container Platform カスタム Curator 設定ファイルを編集します。

$ oc edit configmap/curator

必要に応じて以下のパラメーターを設定します。

config.yaml: |
  project_name:
    action
      unit:value

利用可能なパラメーターを以下に示します。

Curator のデバッグログを有効にします。

$ oc set env cronjob/curator CURATOR_LOG_LEVEL=DEBUG CURATOR_SCRIPT_LOG_LEVEL=DEBUG

ログレベルを指定します。

次の Curator の反復をトリガーします。

$ oc create job --from=cronjob/curator <job_name>

以下のコマンドを使用して CronJob を制御します。

Curator ConfigMap を編集します。

oc edit cm/curator -n openshift-logging

action ファイルに以下の変更を加えます。

actions:
1:
      action: delete_indices 1
      description: >-
        Delete .operations indices older than 30 days.
        Ignore the error if the filter does not
        result in an actionable list of indices (ignore_empty_list).
        See https://www.elastic.co/guide/en/elasticsearch/client/curator/5.2/ex_delete_indices.html
      options:
        # Swallow curator.exception.NoIndices exception
        ignore_empty_list: True
        # In seconds, default is 300
        timeout_override: ${CURATOR_TIMEOUT}
        # Don't swallow any other exceptions
        continue_if_exception: False
        # Optionally disable action, useful for debugging
        disable_action: False
      # All filters are bound by logical AND
      filters:            2
      - filtertype: pattern
        kind: regex
        value: '^\.operations\..*$'
        exclude: False    3
      - filtertype: age
        # Parse timestamp from index name
        source: name
        direction: older
        timestring: '%Y.%m.%d'
        unit: days
        unit_count: 30
        exclude: False