9.5. 配置日志记录收集器

步骤

1. 修改 ClusterLogging CR collection 规格：

   ClusterLogging CR 示例

   apiVersion: logging.openshift.io/v1
   kind: ClusterLogging
   metadata:
   # ...
   spec:
   # ...
     collection:
       type: <log_collector_type> 

   1

   
       resources: {}
       tolerations: {}
   # ...

   Copy to Clipboard Toggle word wrap

   1

   要用于日志记录的日志收集器类型。这可以是 vector 或 fluentd。

2. 运行以下命令来应用 ClusterLogging CR：

   $ oc apply -f <filename>.yaml

   Copy to Clipboard Toggle word wrap

步骤

1. 创建一个 LogFileMetricExporter CR 作为 YAML 文件：

   LogFileMetricExporter CR 示例

   apiVersion: logging.openshift.io/v1alpha1
   kind: LogFileMetricExporter
   metadata:
     name: instance
     namespace: openshift-logging
   spec:
     nodeSelector: {} 

   1

   
     resources: 

   2

   
       limits:
         cpu: 500m
         memory: 256Mi
       requests:
         cpu: 200m
         memory: 128Mi
     tolerations: [] 

   3

   
   # ...

   Copy to Clipboard Toggle word wrap

   1

   可选： nodeSelector 小节定义 pod 调度到哪些节点上。

   2

   resources 小节定义了 LogFileMetricExporter CR 的资源要求。

   3

   可选：tolerations 小节定义 pod 接受的容限。

2. 运行以下命令来应用 LogFileMetricExporter CR：

   $ oc apply -f <filename>.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 编辑 openshift-logging 项目中的 ClusterLogging 自定义资源（CR）：

   $ oc edit ClusterLogging instance

   Copy to Clipboard Toggle word wrap

2. 添加或修改以下任何参数：

   apiVersion: logging.openshift.io/v1
   kind: ClusterLogging
   metadata:
     name: instance
     namespace: openshift-logging
   spec:
     collection:
       fluentd:
         buffer:
           chunkLimitSize: 8m 

   1

   
           flushInterval: 5s 

   2

   
           flushMode: interval 

   3

   
           flushThreadCount: 3 

   4

   
           overflowAction: throw_exception 

   5

   
           retryMaxInterval: "300s" 

   6

   
           retryType: periodic 

   7

   
           retryWait: 1s 

   8

   
           totalLimitSize: 32m 

   9

   
   # ...

   Copy to Clipboard Toggle word wrap

   1

   请指定每个块在排队进行清除前的最大大小。

   2

   指定块清除之间间隔。

   3

   指定执行块清除的方法： lazy、interval 或 immediate。

   4

   指定用于块清除的线程数量。

   5

   指定当队列满时的块行为：throw_exception、block 或 drop_oldest_chunk。

   6

   指定使用 exponential_backoff 块清理方法时的最大间隔时间（以秒为单位）。

   7

   指定当块清除失败时重试的类型： exponential_backoff 或 periodic。

   8

   指定下一次块清除前的时间（以秒为单位）。

   9

   指定块缓冲区的最大大小。

3. 验证 Fluentd Pod 是否已重新部署：

   $ oc get pods -l component=collector -n openshift-logging

   Copy to Clipboard Toggle word wrap

4. 检查 fluentd 配置映射中的新值：

   $ oc extract configmap/collector-config --confirm

   Copy to Clipboard Toggle word wrap

   fluentd.conf 示例

   <buffer>
     @type file
     path '/var/lib/fluentd/default'
     flush_mode interval
     flush_interval 5s
     flush_thread_count 3
     retry_type periodic
     retry_wait 1s
     retry_max_interval 300s
     retry_timeout 60m
     queued_chunks_limit_size "#{ENV['BUFFER_QUEUE_LIMIT'] || '32'}"
     total_limit_size "#{ENV['TOTAL_LIMIT_SIZE_PER_BUFFER'] || '8589934592'}"
     chunk_limit_size 8m
     overflow_action throw_exception
     disable_chunk_backup true
   </buffer>

   Copy to Clipboard Toggle word wrap