1.7. 分离 etcd 数据

流程

1. 确定哪个 etcd 成员是领导成员，因为领导会进行最后的碎片处理。

   1. 获取 etcd pod 列表：

      $ oc -n openshift-etcd get pods -l k8s-app=etcd -o wide

      Copy to Clipboard Toggle word wrap

      输出示例

      etcd-ip-10-0-159-225.example.redhat.com                3/3     Running     0          175m   10.0.159.225   ip-10-0-159-225.example.redhat.com   <none>           <none>
      etcd-ip-10-0-191-37.example.redhat.com                 3/3     Running     0          173m   10.0.191.37    ip-10-0-191-37.example.redhat.com    <none>           <none>
      etcd-ip-10-0-199-170.example.redhat.com                3/3     Running     0          176m   10.0.199.170   ip-10-0-199-170.example.redhat.com   <none>           <none>

      Copy to Clipboard Toggle word wrap

   2. 选择 pod 并运行以下命令来确定哪个 etcd 成员是领导：

      $ oc rsh -n openshift-etcd etcd-ip-10-0-159-225.example.redhat.com etcdctl endpoint status --cluster -w table

      Copy to Clipboard Toggle word wrap

      输出示例

      Defaulting container name to etcdctl.
      Use 'oc describe pod/etcd-ip-10-0-159-225.example.redhat.com -n openshift-etcd' to see all of the containers in this pod.
      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
      |         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS |
      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
      |  https://10.0.191.37:2379 | 251cd44483d811c3 |   3.4.9 |  104 MB |     false |      false |         7 |      91624 |              91624 |        |
      | https://10.0.159.225:2379 | 264c7c58ecbdabee |   3.4.9 |  104 MB |     false |      false |         7 |      91624 |              91624 |        |
      | https://10.0.199.170:2379 | 9ac311f93915cc79 |   3.4.9 |  104 MB |      true |      false |         7 |      91624 |              91624 |        |
      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+

      Copy to Clipboard Toggle word wrap

      基于此输出的 IS LEADER 列，https://10.0.199.170:2379 端点是领导。与上一步输出匹配此端点，领导的 pod 名称为 etcd-ip-10-0-199-170.example.redhat.com。

2. 清理 etcd 成员。

   1. 连接到正在运行的 etcd 容器，传递 不是 领导的 pod 的名称：

      $ oc rsh -n openshift-etcd etcd-ip-10-0-159-225.example.redhat.com

      Copy to Clipboard Toggle word wrap

   2. 取消设置 ETCDCTL_ENDPOINTS 环境变量：

      sh-4.4# unset ETCDCTL_ENDPOINTS

      Copy to Clipboard Toggle word wrap

   3. 清理 etcd 成员：

      sh-4.4# etcdctl --command-timeout=30s --endpoints=https://localhost:2379 defrag

      Copy to Clipboard Toggle word wrap

      输出示例

      Finished defragmenting etcd member[https://localhost:2379]

      Copy to Clipboard Toggle word wrap

      如果发生超时错误，增加 --command-timeout 的值，直到命令成功为止。

   4. 验证数据库大小是否已缩小：

      sh-4.4# etcdctl endpoint status -w table --cluster

      Copy to Clipboard Toggle word wrap

      输出示例

      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
      |         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS |
      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
      |  https://10.0.191.37:2379 | 251cd44483d811c3 |   3.4.9 |  104 MB |     false |      false |         7 |      91624 |              91624 |        |
      | https://10.0.159.225:2379 | 264c7c58ecbdabee |   3.4.9 |   41 MB |     false |      false |         7 |      91624 |              91624 |        | 

      1

      
      | https://10.0.199.170:2379 | 9ac311f93915cc79 |   3.4.9 |  104 MB |      true |      false |         7 |      91624 |              91624 |        |
      +---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+

      Copy to Clipboard Toggle word wrap

      本例显示这个 etcd 成员的数据库大小现在为 41 MB，而起始大小为 104 MB。

   5. 重复这些步骤以连接到其他 etcd 成员并进行碎片处理。最后才对领导进行碎片清除。

      至少要在碎片处理操作之间等待一分钟，以便 etcd pod 可以恢复。在 etcd pod 恢复前，etcd 成员不会响应。

3. 如果因为超过空间配额而触发任何 NOSPACE 警告，请清除它们。

   1. 检查是否有 NOSPACE 警告：

      sh-4.4# etcdctl alarm list

      Copy to Clipboard Toggle word wrap

      输出示例

      memberID:12345678912345678912 alarm:NOSPACE

      Copy to Clipboard Toggle word wrap

   2. 清除警告：

      sh-4.4# etcdctl alarm disarm

      Copy to Clipboard Toggle word wrap