发行注记
发行注记
摘要
第 1 章 Red Hat Advanced Cluster Management 发行注记
了解新功能、增强功能、支持、弃用、删除和勘误程序错误修复。
重要: 集群生命周期组件和功能位于多集群引擎 operator 中,它是增强集群管理的软件操作器。多集群引擎 operator 的 Cluster 生命周期的发行注记 包括在发行注记中。
重要: OpenShift Container Platform 发行注记没有包括在此文档中。对于 OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 发行注记。
弃用: Red Hat Advanced Cluster Management 2.7 及更早的版本不再被支持。文档可能仍然可用,但没有任何勘误或其他更新。
最佳实践: 升级到最新版本。
- 文档会引用最早支持的 Red Hat OpenShift Container Platform 版本,除非文档中的组件只与特定版本的 OpenShift Container Platform 进行创建和测试。
- 有关完全支持信息,请参阅 Red Hat Advanced Cluster Management Support Matrix 以及 Red Hat Advanced Cluster Management for Kubernetes 的生命周期和更新策略。
- 如果您在当前支持的某个版本或产品文档时遇到问题,请访问 红帽支持,您可以在其中进行故障排除、查看知识库文章、与支持团队连接,或者创建一个问题单。您必须使用您的凭证登录。
- 您还可以访问红帽客户门户文档,Red Hat Customer Portal FAQ。
1.1. Red Hat Advanced Cluster Management 的新内容
Red Hat Advanced Cluster Management for Kubernetes 为您提供了整个 Kubernetes 域的可见性,以及内置监管、集群生命周期管理和应用程序生命周期管理功能。
重要: Red Hat Advanced Cluster Management 现在支持通过云原生计算基础(CNCF) Kubernetes 一致性计划认证的所有供应商。为您的混合云多集群管理选择 CNFC 可识别的供应商。
请参阅以下有关使用 CNFC 供应商的信息:
- 了解 CNFC 如何通过认证的 Kubernetes 一致性进行认证。
- 有关 CNFC 第三方供应商的信息,请参阅红帽 与第三方组件的支持,或 联系红帽支持。
-
如果您具有自己的 CNFC 一致性认证集群,您需要将 OpenShift Container Platform CLI
oc
命令改为 Kubernetes CLI 命令kubectl
。
1.1.1. 组件的新功能和增强
了解 Red Hat Advanced Cluster Management 中组件的详情:
一些功能和组件作为技术预览发布。
访问 Red Hat Advanced Cluster Management 支持列表,了解 hub 集群和受管集群的要求以及每个组件的支持。如需生命周期信息,请参阅 Red Hat OpenShift Container Platform 生命周期政策。
1.1.2. 安装
-
您可以从集群中部署的
MultiClusterHub
自定义资源启用SiteConfig
组件。默认情况下禁用SiteConfig
组件。请参阅 MultiClusterHub 高级配置 了解更多信息。参阅 SiteConfig 了解更多有关 SiteConfig 操作器的信息。 -
现在,当
MultiClusterHub
资源准备安装多集群引擎 operator 时,它会实现CatalogSource
优先级作为条件。Red Hat Advanced Cluster ManagementMultiClusterHub
资源查找CatalogSource
,其中包含与当前 Red Hat Advanced Cluster Management 版本兼容的所需多集群引擎 operator 版本。在断开连接的网络环境中,在 Catalog source priority 部分中了解更多信息。
1.1.3. 控制台(Console)
了解 Red Hat Advanced Cluster Management 集成控制台中的新功能。
-
现在,在控制台中提供了命令行界面(CLI)下载,它们可从
acm-cli
容器镜像获得,并使用操作系统和架构指定。请参阅 命令行工具 来访问命令行界面(CLI)下载,如PolicyGenerator
和policytools
。 - 在启用 Fleet view 开关时,查看有关您的集群的更多信息。许多摘要卡被重新设计,如集群、应用程序类型、策略 以及 节点 卡。此外,还提供了两个新的摘要卡,如 集群版本和 Worker 内核计数。请参阅产品控制台中概述卡的大量更改。
- 现在,您可以使用选择 导出 按钮在 CSV 文件中导出数据。请参阅 访问您的控制台。
- 现在,您可以从控制台和搜索结果查看虚拟机资源。配置虚拟机资源的操作。请参阅启用虚拟机操作(技术预览)。
如需更多信息 ,请参阅在控制台中搜索。
1.1.4. Clusters
重要: 集群生命周期组件和功能位于多集群引擎 operator 中,它是增强集群管理的软件操作器。多集群引擎 operator 的 Cluster 生命周期的发行注记 包括在发行注记中。
- 现在,您可以启用并使用 SiteConfig operator 作为模板驱动的集群置备解决方案,它允许您使用所有可用安装方法置备集群。参阅 SiteConfig 了解更多有关 SiteConfig 操作器的信息。
查看其他集群生命周期任务并支持 带有多集群引擎 operator 的集群生命周期信息。
1.1.5. 多集群全局 hub
-
现在,您可以通过在托管模式下导入受管 hub 集群,在受管 hub 集群上启用
local-cluster
。请参阅 在托管模式中导入受管 hub 集群(技术预览)。 - 有关其他多集群全局 hub 主题,请参阅 多集群全局 hub。
1.1.6. 应用程序
-
现在,您可以使用 Red Hat Advanced Cluster Management
GitOpsCluster
将非 OpenShift Container Platform 集群注册到 Red Hat OpenShift GitOps 集群,为您提供更多方法来部署应用程序。如需更多信息,请参阅: 将非 OpenShift Container Platform 集群注册到 Red Hat OpenShift GitOps。
有关其他应用程序主题,请参阅管理应用程序。
1.1.7. Observability(可观察性)
-
要获得默认设置的环境稳定性,默认的 CPU 请求增加到
500m
,并且对thanos-compact
pod 的内存请求增加到1024Mi
。如需了解更多详细信息,请参阅 Observability pod 容量请求。 -
要创建 secret 并将其挂载到
alertmanager
pod 以访问任意内容,您可以在MultiClusterObservability
资源中添加内容。请参阅在 Alertmanager pod 中挂载 secret。 - Grafana 更新至 11.1.5 版本。请参阅使用 Grafana 仪表板。
- 现在,您可以选择 Advanced search 下拉菜单来在控制台中使用 Advanced search 选项。指定查询并接收与您输入和基于范围的搜索参数完全匹配的结果。请参阅 搜索自定义和配置。
-
技术预览 : 使用
ObservabilityAddOn
自定义资源定义中的新 worker 参数将更多 worker 节点添加到指标收集器 procress 中,以划分向 hub 集群发出的请求。请参阅启用可观察性服务。
请参阅 Observability 服务简介。
1.1.8. 监管
-
要根据可用的节点角色配置集群,现在可以使用
getNodesWithExactRoles
功能接收节点列表,并使用hasNodesWithExactRoles
功能接收只包含您指定的角色的集群确认。如需了解更多详细信息,请参阅 模板功能。 -
现在,您可以通过配置
ArgoCD
资源来为资源类型定义额外的健康检查和自定义状态信息。如需更多信息 ,请参阅 Red Hat OpenShift GitOps 中的配置策略健康检查。 -
要在配置策略中为合规信息添加更清晰的信息,您现在可以使用
spec.customMessage
字段自定义合规性信息。请参阅 Kubernetes 配置策略控制器。 -
您可以使用
.PolicyMetadata
hub 集群模板变量来访问 root 策略的元数据。请参阅 hub 集群和受管集群模板的比较。 -
现在,您可以使用
hubTemplateOptions.serviceAccountName
字段指定服务帐户来扩展和控制所有 hub 集群模板查找的访问。请参阅 hub 集群和受管集群模板的比较。 -
要在 Gatekeeper operator 中指定
containerArguments
,请提供传递给容器的参数和值列表。请参阅 Gatekeeper 自定义资源示例。 -
spec.evaluationInterval.compliant
和spec.evaluationInterval.noncompliant
的默认值为watch
,因此您可以使用 Kubernetes API 监视而不是轮询 Kubernetes API 服务器。如需更多信息,请参阅配置策略 YAML 表。 -
使用新的命令行工具,您可以下载
PolicyGenerator
,以通过 Kubernetes 清单中使用 Kustomize 生成策略。您还可以使用带有template-resolver
子命令的policytools
来在本地解析模板。请参阅 策略生成器 以了解更多有关策略生成器的信息。如需有关policytools
的详情,请参阅策略 命令行界面。 - 当您在受管集群中直接应用 Red Hat Advanced Cluster Management 策略和 Gatekeeper 约束时,您现在可以在控制台中在 Discovered policies 选项卡中查看策略部署。请参阅 使用外部工具进行策略部署。
如需了解更多有关仪表板和策略框架的信息,请参阅监管。
1.1.9. 备份和恢复
- 现在,您有一个可运行灾难恢复测试的情况。通过模拟灾难,您可以练习以下操作: 在新 hub 集群上恢复 hub 集群数据,验证数据是否已恢复,并通过将主 hub 集群用作活跃 hub 集群来返回到初始 hub 集群。请参阅 恢复后返回到初始 hub 集群。
-
现在,您可以使用
velero.io/backup-name: backupName
标签在恢复 hub 集群中标记用户创建的资源,将现有 hub 集群用作恢复 hub 集群。请参阅使用现有 hub 集群作为恢复 hub 集群和 标记资源的限制。 -
现在,您可以通过在
MultiClusterHub
资源中设置注解来自定义 OADP 版本。请参阅 安装自定义 OADP 版本。 -
现在,您可以临时暂停
BackupSchedule
资源,而不是删除它。通过在备份 hub 集群中使用BackupSchedule
paused
属性,您可以避免备份冲突。请参阅 防止备份冲突。 - 现在,您可以在恢复操作过程中保持主 hub 集群活跃。请参阅 在恢复过程中保持主 hub 集群处于活动状态。
-
使用 Red Hat Advanced Cluster Management 恢复资源,您可以设置更多
velero.io.restore
spec
选项。请参阅 使用其他恢复示例。
要了解 hub 集群的灾难恢复解决方案,请参阅 备份和恢复。
1.1.10. 使用 Red Hat Advanced Cluster Management 集成的 multicluster engine operator
如果您在使用独立多集群引擎 operator 后安装了 Red Hat Advanced Cluster Management,您可以访问所有 Red Hat Advanced Cluster Management 功能。
-
您可以从集群中部署的
MultiClusterHub
自定义资源启用SiteConfig
组件。请参阅 MultiClusterHub 高级配置 了解更多信息。参阅 SiteConfig 了解更多有关 SiteConfig 操作器的信息。
1.1.11. 了解有关此发行版本的更多信息
- 欢迎使用 Red Hat Advanced Cluster Management for Kubernetes 包括了 Red Hat Advanced Cluster Management for Kubernetes 的概述。
- 请参阅 Red Hat Advanced Cluster Management 发行注记中的更多发行注记,如 已知问题和限制。
- 多集群架构包括了与该产品主要组件相关的详细信息。
- 请参阅 Red Hat Advanced Cluster Management 故障排除指南中的支持信息和更多信息。
- 访问开源的 Open Cluster Management 存储库,以获取开源社区的交互、增长和贡献。要参与,请参阅 open-cluster-management.io。如需更多信息,请访问 GitHub 存储库。
1.2. Red Hat Advanced Cluster Management 的勘误更新
默认情况下,勘误更新会在发布时自动应用。当发行版本可用时,会在此处发布详情。如果没有列出发行注记,则该产品目前没有勘误版本。
重要: 为了便于参考,JIRA 链接和 JIRA 号可能会添加到内容中并在内部使用。用户可能不能使用访问的链接。
有关升级的更多信息,请参阅使用 operator 升级。
重要: 集群生命周期组件和功能位于多集群引擎 operator 中,它是增强集群管理的软件操作器。多集群引擎 operator 的 Cluster 生命周期的发行注记 包括在发行注记中。
1.2.1. Errata 2.12.1
1.3. Red Hat Advanced Cluster Management 的已知问题和限制
检查应用程序管理的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
重要: 集群生命周期组件和功能位于多集群引擎 operator 中,它是增强集群管理的软件操作器。多集群引擎 operator 的 Cluster 生命周期的发行注记 包括在发行注记中。
重要: OpenShift Container Platform 发行注记没有包括在此文档中。对于 OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 发行注记。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.1. 已知的与安装相关的问题
查看安装和升级的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.1.1. 使用升级卸载和重新安装早期版本可能会失败
如果您从 OpenShift Container Platform 卸载 Red Hat Advanced Cluster Management,如果您稍后想要安装早期版本,则会导致问题。例如,当卸载 Red Hat Advanced Cluster Management 时,安装早期版本的 Red Hat Advanced Cluster Management 和升级该版本,升级可能会失败。如果没有删除自定义资源,升级会失败。
在 重新安装步骤前,按照清理工件 以防止出现这个问题。
1.3.1.2. 带有 ARM 聚合流的基础架构 operator 错误
安装 infrastructure-operator
时,与 ARM 的聚合流无法正常工作。将 ALLOW_CONVERGED_FLOW
设置为 false
来解决此问题。
运行以下命令来创建
ConfigMap
资源:oc create -f
运行
oc apply -f
以应用您的文件。请参阅以下文件示例,并将ALLOW_CONVERGED_FLOW
设置为false
:apiVersion: v1 kind: ConfigMap metadata: name: my-assisted-service-config namespace: assisted-installer data: ALLOW_CONVERGED_FLOW: false
使用以下命令注解
agentserviceconfig
:oc annotate --overwrite AgentServiceConfig agent unsupported.agent-install.openshift.io/assisted-service-configmap=my-assisted-service-config
当问题解决时,代理会出现在清单中。
1.3.2. 已知的业务连续问题
查看 Red Hat Advanced Cluster Management for Kubernetes 中的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.2.1. 备份和恢复已知问题
此处列出了备份和恢复已知问题和限制,以及临时解决方案(如果可用)。
1.3.2.1.1. open-cluster-management-backup 命名空间处于 Terminating 状态
当在 MultiClusterHub
资源中禁用 cluster-backup 组件时,如果 Red Hat Advanced Cluster Management 恢复操作创建了一个 Velero 恢复资源,则 open-cluster-management-backup
命名空间会处于 Terminating
状态。
Terminating
状态是在 restore. velero.io/external-resources-finalizer
上等待的 Velero 恢复资源完成的结果。要解决这个问题,请完成以下步骤:
-
删除所有 Red Hat Advanced Cluster Management 恢复资源,并在禁用
MultiClusterHub
资源上的集群备份选项前等待 Velero 恢复被清理。 -
如果您的
open-cluster-management-backup
命名空间已经处于Terminating
状态,请编辑所有 Velero 恢复资源并删除终结器。 - 允许 Velero 资源删除命名空间和资源。
1.3.2.1.2. 裸机 hub 资源不再由受管集群备份备份
如果使用 Red Hat Advanced Cluster Management 备份和恢复功能,裸机集群被备份并恢复到二级 hub 集群,则受管集群会在节点上重新安装,这会销毁现有的受管集群。
注: 这只会影响使用零接触置备部署的裸机集群,这意味着它们具有管理打开和关闭裸机节点的 BareMetalHost
资源以及附加虚拟介质以进行引导。如果受管集群部署中没有使用 BareMetalHost
资源,则没有负面影响。
要临时解决这个问题,主 hub 集群上的 BareMetalHost
资源不再使用受管集群备份备份。
如果您有不同的用例,并且希望主 hub 集群上的受管 BareMetalHost
资源被备份,请将以下备份标签添加到主 hub 集群上的 BareMetalHost
资源中: cluster.open-cluster-management.io/backup
。
要了解有关使用此备份标签备份通用资源的更多信息,请参阅 备份 的资源 主题。
1.3.2.1.3. Velero 恢复限制
如果在其中恢复数据的新 hub 集群有用户创建的资源,则这个新的 hub 集群可能会有与活跃的 hub 集群不同的配置。例如,在将备份的数据恢复到新的 hub 集群中之前,在这个新的 hub 集群上可能已包括了一个现存的策略。
如果不是恢复的备份的一部分,Velero 会跳过现存的资源,因此新 hub 集群上的策略不会改变,这会导致新 hub 集群和活跃 hub 集群之间的不同配置。
为解决这个问题,集群备份和恢复 Operator 可以运行一个恢复后的操作以清理由用户创建的资源,或在 restore.cluster.open-cluster-management.io
资源时执行不同的恢复操作。
如需更多信息,请参阅恢复主题 后清理 hub 集群。
1.3.2.1.4. 被动配置不显示受管集群
只有在被动 hub 集群上恢复激活数据时,才会显示受管集群。
1.3.2.1.5. 未恢复受管集群资源
当您恢复 local-cluster
受管集群资源的设置并覆盖新 hub 集群中的 local-cluster
数据时,设置会被错误配置。上一个 hub 集群 local-cluster
的内容没有备份,因为资源包含 local-cluster
特定信息,如集群 URL 详情。
您必须在恢复集群中手动应用与 local-cluster
资源相关的配置更改。请参阅 安装备份和恢复 Operator 主题 中的 准备新 hub 集群。
1.3.2.1.6. 恢复的 Hive 受管集群可能无法与新的 hub 集群连接
当您为 Hive 受管集群恢复更改或轮转颁发机构 (CA) 的备份时,受管集群将无法连接到新的 hub 集群。连接会失败,因为此受管集群的 admin
kubeconfig
secret 通过备份提供,所以不再有效。
您必须在新 hub 集群中手动更新受管集群的恢复的 admin
kubeconfig
secret。
1.3.2.1.7. 导入的受管集群显示 Pending Import 状态
在主 hub 集群上手动导入的受管集群会在被动 hub 集群上恢复激活数据时显示一个 Pending Import
状态。如需更多信息,请参阅使用受管服务帐户连接集群。
1.3.2.1.8. 恢复 hub 集群后,appliedmanifestwork 不会被从受管集群中删除
当在新 hub 集群上恢复 hub 集群数据时,appliedmanifestwork
不会从没有固定集群集的应用程序订阅的放置规则的受管集群中删除。
有关不是固定集群集的应用程序订阅,请参阅以下放置规则示例:
spec: clusterReplicas: 1 clusterSelector: matchLabels: environment: dev
因此,当受管集群从恢复的 hub 集群分离时,应用程序会被孤立。
要避免这个问题,请在放置规则中指定固定的集群集。请参见以下示例:
spec: clusterSelector: matchLabels: environment: dev
您还可以通过运行以下命令来手动删除剩余的 appliedmanifestwork
:
oc delete appliedmanifestwork <the-left-appliedmanifestwork-name>
1.3.2.1.9. 应用的manifestwork 不会被删除,规格中缺少 agentID
当您将 Red Hat Advanced Cluster Management 2.6 用作主 hub 集群时,但您的恢复 hub 集群位于 2.7 或更高版本的版本时,appliedmanifestworks
规格中缺少 agentID
,因为此字段在 2.7 发行版本中引入。这会为受管集群上的主 hub 生成额外的 appliedmanifestworks
。
要避免这个问题,请将主 hub 集群升级到 Red Hat Advanced Cluster Management 2.7,然后在新的 hub 集群中恢复备份。
通过为每个 appliedmanifestwork
手动设置 spec.agentID
来修复受管集群。
运行以下命令来获取
agentID
:oc get klusterlet klusterlet -o jsonpath='{.metadata.uid}'
运行以下命令,为每个
appliedmanifestwork
设置spec.agentID
:oc patch appliedmanifestwork <appliedmanifestwork_name> --type=merge -p '{"spec":{"agentID": "'$AGENT_ID'"}}'
1.3.2.1.10. managed-serviceaccount add-on 状态显示 Unknown
如果您使用 Managed Service Account,则受管集群 appliedmanifestwork
addon-managed-serviceaccount-deploy
会从导入的受管集群中删除,而无需在新 hub 集群的 multicluster engine for Kubernetes operator 资源中启用它。
受管集群仍然导入到新的 hub 集群,但 managed-serviceaccount
add-on 状态显示 Unknown
。
在 multicluster engine operator 资源中启用 Managed Service Account 后,您可以恢复 managed-serviceaccount
附加组件。请参阅启用自动导入以了解如何启用受管服务帐户。
1.3.2.2. VolSync 已知问题
1.3.2.2.1. 删除附加组件时,手动删除受管集群上所需的 VolSync CSV
当您从 hub 集群中删除 VolSync ManagedClusterAddOn
时,它会删除受管集群上的 VolSync operator 订阅,但不会删除集群服务版本(CSV)。要从受管集群中删除 CSV,请在您要删除 VolSync 的每个受管集群中运行以下命令:
oc delete csv -n openshift-operators volsync-product.v0.6.0
1.3.2.2.2. 使用自定义 CA 证书恢复到其恢复的 hub 集群连接可能会失败
恢复管理使用自定义 CA 证书的 hub 集群的备份后,受管集群和 hub 集群之间的连接可能会失败。这是因为在恢复的 hub 集群上没有备份 CA 证书。要恢复连接,将受管集群的命名空间中自定义 CA 证书信息复制到恢复的 hub 集群上的 <managed_cluster>-admin-kubeconfig
secret。
注: 如果您在创建备份副本前将此 CA 证书复制到 hub 集群,备份副本会包括 secret 信息。当您使用备份副本来恢复时,hub 集群和受管集群之间的连接会自动完成。
1.3.3. 已知的控制台问题
查看控制台的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.3.1. 无法在控制台中升级 OpenShift Dedicated
在控制台中,您可以为 OpenShift Dedicated 集群请求升级,但升级会失败,并显示 Cannot upgrade non openshift cluster
错误消息。目前没有临时解决方案。
1.3.3.2. 搜索 PostgreSQL pod 处于 CrashLoopBackoff 状态
search-postgres
pod 处于 CrashLoopBackoff
状态。如果 Red Hat Advanced Cluster Management 部署到启用了 hugepages
参数的节点,并且 search-postgres
pod 调度到这些节点中,则 pod 不会启动。
完成以下步骤以增加 search-postgres
pod 的内存:
使用以下命令暂停
search-operator
pod:oc annotate search search-v2-operator search-pause=true
使用
hugepages
参数的限制来更新search-postgres
部署。运行以下命令,将hugepages
参数设置为512Mi
:oc patch deployment search-postgres --type json -p '[{"op": "add", "path": "/spec/template/spec/containers/0/resources/limits/hugepages-2Mi", "value":"512Mi"}]'
在验证 pod 的内存用量前,请确保您的
search-postgres
pod 处于Running
状态。运行以下命令:oc get pod <your-postgres-pod-name> -o jsonpath="Status: {.status.phase}"
运行以下命令,以验证
search-postgres
pod 的内存用量:oc get pod <your-postgres-pod-name> -o jsonpath='{.spec.containers[0].resources.limits.hugepages-2Mi}'
出现以下值 512Mi
。
1.3.3.3. 无法编辑集群集的命名空间绑定
当使用 admin
角色或 bind
角色编辑集群集的命名空间绑定时,您可能会遇到类似以下消息的错误:
ResourceError: managedclustersetbindings.cluster.open-cluster-management.io "<cluster-set>" is forbidden: User "<user>" cannot create/delete resource "managedclustersetbindings" in API group "cluster.open-cluster-management.io" in the namespace "<namespace>".
要解决这个问题,请确保还有权在您要绑定的命名空间中创建或删除 ManagedClusterSetBinding
资源。角色绑定只允许将集群集绑定到命名空间。
1.3.3.4. 在置备托管的 control plane 集群后,水平滚动无法正常工作
置备托管的 control plane 集群后,如果 ClusterVersionUpgradeable
参数太长,您可能无法在 Red Hat Advanced Cluster Management 控制台的集群概述中水平滚动。因此,您无法查看隐藏的数据。
要临时解决这个问题,请使用浏览器缩放控制来缩放,增加 Red Hat Advanced Cluster Management 控制台窗口大小,或者复制文本并将其粘贴到不同的位置。
1.3.3.5. EditApplicationSet 扩展功能重复
当您添加多个标签表达式或尝试为 ApplicationSet
输入集群选择器时,您可能会重复收到以下信息,"Expand to enter expression"。尽管出现这个问题,您可以输入集群选择。
1.3.3.6. 无法从 Red Hat Advanced Cluster Management 注销
当您使用外部身份提供程序登录到 Red Hat Advanced Cluster Management 时,您可能无法从 Red Hat Advanced Cluster Management 注销。当您使用与 IBM Cloud 和 Keycloak 作为身份提供程序一起安装的 Red Hat Advanced Cluster Management 时会出现这种情况。
在尝试从 Red Hat Advanced Cluster Management 注销前,您必须从外部身份提供程序注销。
1.3.3.7. 在 OpenShift Cloud Manager 控制台中输入 cluster-ID 的问题
如果您没有在 OpenShift Cloud Manager 控制台中访问 cluster-ID
,您仍然可以从终端获取 OpenShift Service on AWS cluster-ID
的描述。您需要 OpenShift Service on AWS 命令行界面。请参阅 AWS CLI 文档中的 OpenShift Service 入门 文档。
要获取 cluster-ID
,请从 OpenShift Service on AWS 命令行界面运行以下命令:
rosa describe cluster --cluster=<cluster-name> | grep -o ’^ID:.*
1.3.4. 已知的与集群管理相关的问题和限制
查看 Red Hat Advanced Cluster Management 进行集群管理的已知问题。以下列表包含本发行版本的已知问题和限制,或已知问题。
有关 Kubernetes Operator 的多集群引擎的集群生命周期,请参阅 multicluster engine operator 文档中的 集群生命周期已知问题和限制。
1.3.4.1. hub 集群通信限制
如果 hub 集群无法访问或与受管集群通信,则会出现以下限制:
- 您不能使用控制台创建新的受管集群。您仍然可以使用命令行界面或使用控制台中的 手动运行 import 命令 导入受管集群。
- 如果您使用控制台部署 Application 或 ApplicationSet,或者您将受管集群导入到 ArgoCD 中,hub 集群 ArgoCD 控制器会调用受管集群 API 服务器。您可以使用 AppSub 或 ArgoCD pull 模型来解决这个问题。
pod 日志的控制台页面无法正常工作,并显示类似如下的错误消息:
Error querying resource logs: Service unavailable
1.3.4.2. local-cluster 可能无法自动重新创建
如果在 disableHubSelfManagement
被设置为 false
时删除 local-cluster,则 MulticlusterHub
operator 会重新创建 local-cluster。分离 local-cluster 后,可能不会自动重新创建 local-cluster。
要解决这个问题,修改由
MulticlusterHub
operator 监控的资源。请参见以下示例:oc delete deployment multiclusterhub-repo -n <namespace>
-
要正确分离 local-cluster,在
MultiClusterHub
中将disableHubSelfManagement
设置为 true。
1.3.4.3. 使用不同名称重新导入后 local-cluster 状态为离线
当您意外尝试以不同名称的集群形式重新导入名为 local-cluster
的集群时,local-cluster
和重新导入的集群的状态将 离线
。
要从这个问题单中恢复,请完成以下步骤:
在 hub 集群中运行以下命令,以临时编辑 hub 集群的自助管理设置:
oc edit mch -n open-cluster-management multiclusterhub
-
添加
spec.disableSelfManagement=true
设置。 在 hub 集群中运行以下命令以删除并重新部署 local-cluster:
oc delete managedcluster local-cluster
输入以下命令删除
local-cluster
管理设置:oc edit mch -n open-cluster-management multiclusterhub
-
删除之前添加的
spec.disableSelfManagement=true
。
1.3.4.4. hub 集群和受管集群的时钟未同步
hub 集群和管理集群的时间可能会不同步,在控制台中显示 unknown
,当在几分钟内会变为 available
。确保正确配置了 OpenShift Container Platform hub 集群时间。请参阅 自定义节点。
1.3.5. 已知的与应用程序相关的问题和限制
检查应用程序管理的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
请参阅以下对应用程序生命周期组件的已知问题。
1.3.5.1. 应用程序拓扑显示无效的表达式
当您在 Placement
资源中使用 Exist
或 DoesNotExist
运算符时,应用程序拓扑节点详情会将表达式显示为 #invalidExpr
。此显示错误,表达式仍然有效,且在 放置资源
中工作。要解决这个问题,请编辑 放置资源
YAML 中的表达式。
1.3.5.2. 使用 PlacementRule 编辑订阅应用程序不会在编辑器中显示订阅 YAML
创建引用 PlacementRule
资源的订阅应用程序后,控制台中的 YAML 编辑器不会显示订阅 YAML。使用您的终端编辑订阅 YAML 文件。
1.3.5.3. 带有 secret 依赖项的 Helm Chart 无法由 Red Hat Advanced Cluster Management 订阅部署
使用 Helm Chart,您可以在 Kubernetes secret 中定义隐私数据,并在 Helm Chart 的 value.yaml
文件中定义此 secret。
用户名和密码由引用的 Kubernetes secret 资源 dbsecret
提供。例如,请参阅以下示例 value.yaml
文件:
credentials: secretName: dbsecret usernameSecretKey: username passwordSecretKey: password
只有在 Helm 二进制 CLI 中才支持带有 secret 依赖项的 Helm Chart。Operator SDK Helm 库不支持它。Red Hat Advanced Cluster Management 订阅控制器应用 operator SDK Helm 库来安装和升级 Helm Chart。因此,Red Hat Advanced Cluster Management 订阅无法使用 secret 依赖项部署 Helm Chart。
1.3.5.4. 拓扑无法正确显示 Argo CD pull 模型 ApplicationSet
应用程序
当您使用 Argo CD pull 模型来部署 ApplicationSet
应用程序,且应用程序资源名称会被自定义时,每个集群的资源名称可能会有所不同。当发生这种情况时,拓扑无法正确显示您的应用程序。
1.3.5.5. 本地集群被排除为拉取模型的受管集群
hub 集群应用程序集部署到目标受管集群,但本地集群(一个受管 hub 集群)作为目标受管集群排除。
因此,如果 Argo CD pull 模型将 Argo CD 应用程序传播到本地集群,则不会清理本地集群 Argo CD 应用程序,即使本地集群已从 Argo CD ApplicationSet
资源的放置决定中删除。
要临时解决这个问题并清理本地集群 Argo CD 应用程序,请从本地集群 Argo CD 应用程序中删除 skip-reconcile
注解。请参阅以下注解:
annotations: argocd.argoproj.io/skip-reconcile: "true"
另外,如果您在 Argo CD 控制台的 Applications 部分手动刷新 pull model Argo CD 应用程序,则不会处理刷新,并且 Argo CD 控制台中的 REFRESH 按钮被禁用。
要临时解决这个问题,请从 Argo CD 应用程序中删除 refresh
注解。请参阅以下注解:
annotations: argocd.argoproj.io/refresh: normal
1.3.5.6. Argo CD 控制器和传播控制器可能会同时协调
Argo CD 控制器和传播控制器可能会在同一应用程序资源上协调,并导致受管集群中应用程序部署的重复实例,但来自不同部署模型。
对于使用 pull 模型部署应用程序,当 Argo CD argocd.argoproj.io/skip-reconcile
注解添加到 ApplicationSet
的 template 部分时,Argo CD 控制器会忽略这些应用程序资源。
argocd.argoproj.io/skip-reconcile
注解仅适用于 GitOps operator 版本 1.9.0 或更高版本。为防止冲突,请等待 hub 集群和所有受管集群都升级到 GitOps operator 版本 1.9.0,然后再实施 pull 模型。
1.3.5.7. 资源无法部署
MulticlusterApplicationSetReport
中列出的所有资源实际上都部署到受管集群中。如果资源无法部署,则资源不包含在资源列表中,但原因会在错误消息中列出。
1.3.5.8. 资源分配可能需要几分钟时间
对于超过 1000 个受管集群和 Argo CD 应用程序集的大型环境,部署到数百个受管集群,hub 集群上的 Argo CD 应用程序创建可能需要几分钟时间。您可以在应用程序集的 clusterDecisionResource
生成器中将 requeueAfterSeconds
设置为 zero
,如下例所示:
apiVersion: argoproj.io/v1alpha1 kind: ApplicationSet metadata: name: cm-allclusters-app-set namespace: openshift-gitops spec: generators: - clusterDecisionResource: configMapRef: ocm-placement-generator labelSelector: matchLabels: cluster.open-cluster-management.io/placement: app-placement requeueAfterSeconds: 0
1.3.5.9. 应用程序 ObjectBucket 频道类型无法使用 allow 和 deny 列表
您不能在 subscription-admin
角色中使用 ObjectBucket 频道类型指定 allow 和 deny 列表。在其他频道类型中,订阅中的 allow 和 deny 列表表示可以部署哪些 Kubernetes 资源,以及不应部署哪些 Kubernetes 资源。
1.3.5.9.1. Argo Application 无法部署到 3.x OpenShift Container Platform 受管集群
控制台中的 Argo ApplicationSet
无法部署到 3.x OpenShift Container Platform 受管集群,因为 Infrastructure.config.openshift.io
API 在 3.x 上不可用。
1.3.5.10. 对 multicluster_operators_subscription 镜像的更改不会自动生效
在受管集群中运行的 application-manager
附加组件现在由 subscription operator 处理,后者之前由 klusterlet operator 处理。订阅 operator 没有管理 multicluster-hub
,因此对 multicluster-hub
镜像清单 ConfigMap 中的 multicluster_operators_subscription
镜像的更改不会自动生效。
如果订阅 operator 使用的镜像通过更改 multicluster-hub
镜像清单 ConfigMap 中的 multicluster_operators_subscription
镜像覆盖,则受管集群中的 application-manager
add-on 不会使用新镜像,直到订阅 operator pod 重启为止。您需要重启 pod。
1.3.5.11. 除非根据订阅管理员部署策略资源
对于 Red Hat Advanced Cluster Management 版本 2.4,默认情况下,policy.open-cluster-management.io/v1
资源不再被应用程序订阅部署。
订阅管理员需要部署应用程序订阅以更改此默认行为。
如需更多信息,请参阅以订阅管理员身份创建允许和拒绝列表。在之前的 Red Hat Advanced Cluster Management 版本中,由现有应用程序订阅部署的 policy.open-cluster-management.io/v1
资源仍然保留,除非应用程序订阅由订阅管理员部署。
1.3.5.12. 应用程序 Ansible hook 独立模式
不支持 Ansible hook 独立模式。要使用订阅在 hub 集群上部署 Ansible hook,您可以使用以下订阅 YAML:
apiVersion: apps.open-cluster-management.io/v1 kind: Subscription metadata: name: sub-rhacm-gitops-demo namespace: hello-openshift annotations: apps.open-cluster-management.io/github-path: myapp apps.open-cluster-management.io/github-branch: master spec: hooksecretref: name: toweraccess channel: rhacm-gitops-demo/ch-rhacm-gitops-demo placement: local: true
但是,此配置可能永远不会创建 Ansible 实例,因为 spec.placement.local:true
有以 standalone
模式运行的订阅。您需要在 hub 模式中创建订阅。
创建部署到
local-cluster
的放置规则。请参阅以下示例,其中local-cluster: "true"
代表 hub 集群:apiVersion: apps.open-cluster-management.io/v1 kind: PlacementRule metadata: name: <towhichcluster> namespace: hello-openshift spec: clusterSelector: matchLabels: local-cluster: "true"
在您的订阅中引用该放置规则。请参见以下示例:
apiVersion: apps.open-cluster-management.io/v1 kind: Subscription metadata: name: sub-rhacm-gitops-demo namespace: hello-openshift annotations: apps.open-cluster-management.io/github-path: myapp apps.open-cluster-management.io/github-branch: master spec: hooksecretref: name: toweraccess channel: rhacm-gitops-demo/ch-rhacm-gitops-demo placement: placementRef: name: <towhichcluster> kind: PlacementRule
应用两者后,您应该看到 hub 集群中创建的 Ansible 实例。
1.3.5.13. 在更新的放置规则后没有部署应用程序
如果应用程序在更新放置规则后没有部署,请验证 application-manager
pod 是否正在运行。application-manager
是需要在受管集群上运行的订阅容器。
您可以运行 oc get pods -n open-cluster-management-agent-addon |grep application-manager
来验证。
您还可以在控制台中搜索 kind:pod cluster:yourcluster
来查看 application-manager
是否在运行。
如果无法验证,请尝试再次导入集群并重新验证。
1.3.5.14. Subscription operator 不会创建一个 SCC
了解 Red Hat OpenShift Container Platform SCC,请参阅 管理安全性上下文约束,这是受管集群所需的额外配置。
不同的部署有不同的安全性上下文和不同的服务帐户。订阅 operator 无法自动创建 SCC CR。pod 的管理员控制权限。需要一个安全性上下文约束(SCC)CR,以便为相关服务帐户启用适当的权限,以便在非默认命名空间中创建 pod。要手动在命名空间中创建 SCC CR,完成以下操作:
找到在部署中定义的服务帐户。例如,查看以下
nginx
部署:nginx-ingress-52edb nginx-ingress-52edb-backend
在命名空间中创建 SCC CR 为服务帐户或帐户分配所需的权限。请参见以下示例,其中添加了
kind: SecurityContextConstraints
:apiVersion: security.openshift.io/v1 defaultAddCapabilities: kind: SecurityContextConstraints metadata: name: ingress-nginx namespace: ns-sub-1 priority: null readOnlyRootFilesystem: false requiredDropCapabilities: fsGroup: type: RunAsAny runAsUser: type: RunAsAny seLinuxContext: type: RunAsAny users: - system:serviceaccount:my-operator:nginx-ingress-52edb - system:serviceaccount:my-operator:nginx-ingress-52edb-backend
1.3.5.15. 应用程序频道需要唯一的命名空间
在同一命名空间中创建多个频道可能会导致 hub 集群出现错误。
例如,安装程序将命名空间 charts-v1
作为 Helm 类型频道使用,因此不要在 charts-v1
中创建任何其他频道。确保您在唯一命名空间中创建频道。所有频道需要单独的命名空间,但 GitHub 频道除外,它们可与另一个 GitHub 频道共享命名空间。
1.3.5.16. Ansible Automation Platform 作业失败
当您选择不兼容的选项时,Ansible 作业无法运行。只有选择了 -cluster
范围内的频道选项时,Ansible Automation Platform 才起作用。这会影响需要执行 Ansible 作业的所有组件。
1.3.5.17. Ansible Automation Platform operator 在代理外访问 Ansible Automation Platform
Red Hat Ansible Automation Platform Operator 无法访问启用了代理的 OpenShift Container Platform 集群之外的 Ansible Automation Platform。要解决这个问题,您可以在代理中安装 Ansible Automation Platform。请参阅 Ansible Automation Platform 提供的安装步骤。
1.3.5.18. 应用程序名称要求
应用程序名称不能超过 37 个字符。如果字符超过这个数量,应用部署将显示以下错误。
status: phase: PropagationFailed reason: 'Deployable.apps.open-cluster-management.io "_long_lengthy_name_" is invalid: metadata.labels: Invalid value: "_long_lengthy_name_": must be no more than 63 characters/n'
1.3.5.19. 应用程序控制台表限制
参阅控制台中不同 Application 表的限制:
- 在 Overview 页面的 Applications 表和 Advanced 配置页面上的 Subscriptions 表中,Clusters 列会显示部署应用程序资源的集群计数。因为应用程序是由本地集群上的资源定义的,所以本地集群会包含在搜索结果中,无论实际的应用程序资源是否在本地集群中部署。
- 在 Subscriptions 的 Advanced configuration 列表中,Applications 栏显示使用该订阅的应用程序总数,如果订阅部署了子应用程序,它们也会包含在搜索结果中。
- Channels 的 Advanced configuration 列表中,Subscriptions 栏显示使用该频道的本地集群中的订阅总数,但这不包括由其他订阅部署的订阅,这些订阅包含在搜索结果中。
1.3.5.20. 没有应用程序控制台拓扑过滤
2.12 的应用程序的 Console 和 Topology 已更改。控制台 Topology 页面中没有过滤功能。
1.3.5.21. 允许和拒绝列表在对象存储应用程序中无法正常工作
允许
和决绝
列表功能无法在对象存储应用程序订阅中工作。
1.3.6. 已知的可观察性问题
查看 Red Hat Advanced Cluster Management for Kubernetes 中的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 link:https://docs.redhat.com/documentation/en-us/openshift_container_platform/4.15/html/release_notes#ocp-4-15-known-issues [OpenShift Container Platform known issues]。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.6.1. 缺少 Grafana 仪表板
运行 Grafana 实例后,Grafana 仪表板可能无法加载。完成以下步骤:
要验证仪表板是否无法加载,请运行以下命令检查日志:
oc logs observability-grafana-68f8489659-m79rv -c grafana-dashboard-loader -n open-cluster-management-observability ... E1017 12:55:24.532493 1 dashboard_controller.go:147] dashboard: sample-dashboard could not be created after retrying 40 times
要修复仪表板失败,请通过将副本数扩展到
0
来重新部署 Grafana。multicluster-observability-operator
pod 会自动将部署扩展到MultiClusterObservability
资源中定义的所需副本数。运行以下命令:oc scale deployment observability-grafana -n open-cluster-management-observability --replicas=0
要验证仪表板是否在红色正确加载,请运行以下命令来检查所有 Grafana pod 的日志,并确保没有错误消息:
oc logs observability-grafana-68f8489659-h6jd9 -c grafana-dashboard-loader -n open-cluster-management-observability | grep "could not be created"
1.3.6.2. 保留更改会导致数据丢失
保留所有分辨率级别的默认保留(如 retentionResolutionRaw
、retentionResolution5m
或 retentionResolution1h
)是 365 天(365d
)。此 365d
默认保留意味着 1 小时分辨率的默认保留已从 0d
缩短为 365d
。此保留更改可能会导致您丢失数据。如果您没有在 MultiClusterObservability
spec.advanced.retentionConfig
参数中为解析保留设置显式值,则可能会丢失数据。
如需更多信息,请参阅为保留添加高级配置。
1.3.6.3. 恢复 hub 集群中的 observatorium API 网关 pod 可能具有过时的租户数据
恢复 hub 集群中的 Observatorium API 网关 pod 可能会在备份和恢复过程后包含过时的租户数据,因为 Kubernetes 的限制。有关限制的更多信息,请参阅自动挂载的 ConfigMap。
因此,Observatorium API 和 Thanos 网关拒绝来自收集器的指标,Red Hat Advanced Cluster Management Grafana 仪表板不会显示数据。
请参阅 Observatorium API 网关 pod 日志中的以下错误:
level=error name=observatorium caller=logchannel.go:129 msg="failed to forward metrics" returncode="500 Internal Server Error" response="no matching hashring to handle tenant\n"
Thanos 接收带有以下错误的 pod 日志:
caller=handler.go:551 level=error component=receive component=receive-handler tenant=xxxx err="no matching hashring to handle tenant" msg="internal server error"
请参阅以下流程来解决这个问题:
-
将
observability-observatorium-api
部署实例从N
缩减为0。
-
将
observability-observatorium-api
部署实例从0
扩展到N
。
注意: 默认情况下 N
= 2
,但在某些自定义配置环境中可能会大于 2
。
这会使用正确的租户信息重启所有 Observatorium API 网关 pod,在 5 到 10 分钟后,来自收集器的数据也会在 Grafana 中显示。
1.3.6.4. 在 openshift-monitoring 命名空间中添加 PrometheusRules 和 ServiceMonitor 的权限
从 Red Hat Advanced Cluster Management 2.9 开始,您必须使用定义的 Red Hat Advanced Cluster Management hub 集群命名空间中的标签。标签 openshift.io/cluster-monitoring: "true"
会导致 Cluster Monitoring Operator 提取指标的命名空间。
当部署 Red Hat Advanced Cluster Management 2.9 或安装升级到 2.9 时,Red Hat Advanced Cluster Management Observability ServiceMonitor
和 PrometheusRule
资源不再存在于 openshift-monitoring
命名空间中。
1.3.6.5. 缺少对代理设置的支持
observability 附加组件的 Prometheus AdditionalAlertManagerConfig
资源不支持代理设置。您必须禁用 observability 警报转发功能。
完成以下步骤以禁用警报转发:
-
进入
MultiClusterObservability
资源。 -
将
mco-disabling-alerting
参数值更新为true
不支持带有自签名 CA 证书的 HTTPS 代理。
1.3.6.6. Service-level Overview 仪表板上重复的 local-clusters
当各种 hub 集群使用相同的 S3 存储部署 Red Hat Advanced Cluster Management observability 时,可以在 Kubernetes/Service-Level Overview/API Server 仪表板中检测并显示重复的 local-clusters
。重复的集群在以下面板中影响结果: Top Clusters、超过 SLO 的集群数,以及满足 SLO 的集群数量。local-clusters
是与共享 S3 存储关联的唯一集群。要防止多个 local-clusters
显示在仪表板中,建议每个唯一的 hub 集群使用针对 hub 集群的 S3 存储桶来部署可观察性。
1.3.6.7. Observability endpoint operator 无法拉取镜像
如果您创建一个 pull-secret 用于部署到 MultiClusterObservability CustomResource(CR),且 open-cluster-management-observability
命名空间中没有 pull-secret,则 observability endpoint operator 会失败。当您导入新集群或导入使用 Red Hat Advanced Cluster Management 创建的 Hive 集群时,需要在受管集群上手动创建 pull-image secret。
如需更多信息,请参阅启用可观察性。
1.3.6.8. 没有来自 ROKS 集群的数据
Red Hat Advanced Cluster Management observability 不会在内置仪表板中显示 ROKS 集群中的数据。这是因为 ROKS 不会从它们管理的服务器公开任何 API 服务器指标。以下 Grafana 仪表板包含不支持 ROKS 集群的面板:Kubernetes/API server
、Kubernetes/Compute Resources/Workload
、Kubernetes/Compute Resources/Namespace(Workload)
1.3.6.9. ROKS 集群没有 etcd 数据
对于 ROKS 集群,Red Hat Advanced Cluster Management observability 不会在仪表板的 etcd 面板中显示数据。
1.3.6.10. Grafana 控制台中没有指标数据
注解查询在 Grafana 控制台中会失败:
当在 Grafana 控制台中搜索特定注解时,您可能会因为已过期的令牌收到以下错误消息:
"Annotation Query Failed"
重新刷新浏览器,验证您是否已登录到 hub 集群。
rbac-query-proxy pod 中的错误:
由于未授权访问
managedcluster
资源,您可能会在查询集群或项目时收到以下错误:no project or cluster found
检查角色权限并进行相应的更新。如需更多信息,请参阅基于角色的访问控制。
1.3.6.11. 受管集群上的 Prometheus 数据丢失
默认情况下,OpenShift 上的 Prometheus 使用临时存储。Prometheus 会在重启时丢失所有指标数据。
如果在由 Red Hat Advanced Cluster Management 管理的 OpenShift Container Platform 受管集群上启用或禁用了可观察性,observability 端点 Operator 会添加额外的 alertmanager 配置来自动重启本地 Prometheus,以此更新 cluster-monitoring-config
ConfigMap
。
1.3.6.12. Error ingesting out-of-order samples
Observability receive
pod 报告以下出错信息:
Error on ingesting out-of-order samples
错误消息表示,在指标收集间隔期间,由受管集群发送的时间序列数据比在之前的集合间隔发送的时间序列数据旧。当出现这个问题时,Thanos 接收器会丢弃数据,这可能会在 Grafana 仪表板中显示的数据中造成差距。如果经常看到这个错误,建议将指标收集间隔增加到一个更高的值。例如,您可以将间隔增加到 60 秒。
只有在时间序列间隔被设置为较低值(如 30 秒)时,才会注意到这个问题。请注意,当指标收集间隔被设置为默认值 300 秒时,不会看到这个问题。
1.3.6.13. 升级后 Grafana 部署失败
如果您在 2.6 之前的系统中部署了 grafana-dev
实例,并将环境升级到 2.6,grafana-dev
无法正常工作。您必须运行以下命令来删除现有 grafana-dev
实例:
./setup-grafana-dev.sh --clean
使用以下命令重新创建实例:
./setup-grafana-dev.sh --deploy
1.3.6.14. klusterlet-addon-search pod 失败
klusterlet-addon-search
pod 失败,因为达到内存限制。您必须通过自定义受管集群中的 klusterlet-addon-search
部署来更新内存请求和限制。在 hub 集群中编辑名为 search-collector
的 ManagedclusterAddon
自定义资源。在 search-collector
中添加以下注解并更新内存 addon.open-cluster-management.io/search_memory_request=512Mi
和 addon.open-cluster-management.io/search_memory_limit=1024Mi
。
例如,如果您有一个名为 foobar
的受管集群,请运行以下命令将内存请求更改为 512Mi
,内存限值为 1024Mi
:
oc annotate managedclusteraddon search-collector -n foobar \ addon.open-cluster-management.io/search_memory_request=512Mi \ addon.open-cluster-management.io/search_memory_limit=1024Mi
1.3.6.15. 启用 disableHubSelfManagement 在 Grafana 仪表板中会导致空列表
如果在 mulitclusterengine
自定义资源中将 disableHubSelfManagement
参数设置为 true
时,Grafana 仪表板会显示一个空标签列表。您必须将参数设置为 false
或删除参数来查看标签列表。如需了解更多详细信息,请参阅 disableHubSelfManagement。
1.3.6.15.1. 端点 URL 无法具有完全限定域名 (FQDN)
当您将 FQDN 或协议用于 endpoint
参数时,您的可观察性 pod 不会被启用。此时会显示以下出错信息:
Endpoint url cannot have fully qualified paths
输入没有协议部分的 URL。您的 endpoint
值必须类似您的 secret 的以下 URL:
endpoint: example.com:443
1.3.6.15.2. Grafana downsampled 数据不匹配
当您试图查询历史数据时,计算的步骤值和 downsampled 数据之间存在差异,则结果为空。例如,如果计算的步骤值为 5m
,而 downsampled 数据处于一小时的时间间隔,则数据不会出现在 Grafana 中。
这是因为 URL 查询参数必须通过 Thanos Query 前端数据源传递。之后,URL 查询可以在缺少数据时对其他降级级别执行额外的查询。
您必须手动更新 Thanos Query 前端数据源配置。完成以下步骤:
- 进入 Query 前端数据源。
- 要更新您的查询参数,请点击 Misc 部分。
-
在 Custom query parameters 字段中,选择
max_source_resolution=auto
。 - 要验证是否显示数据,请刷新 Grafana 页面。
您的查询数据会出现在 Grafana 仪表板中。
1.3.6.16. 指标收集器不会检测代理配置
指标收集器不会检测到您使用 addonDeploymentConfig
配置的受管集群中的代理配置。作为临时解决方案,您可以通过删除受管集群 ManifestWork
来启用代理。删除 ManifestWork
会强制应用 addonDeploymentConfig
中的更改。
1.3.6.17. 使用自定义受管集群 Observatorium API 或 Alertmanager URL 时的限制
自定义 Observatorium API 和 Alertmanager URL 仅支持带有 TLS 透传的中间组件。如果两个自定义 URL 都指向同一中间组件,则必须使用单独的子域,因为 OpenShift Container Platform 路由器不支持具有相同主机的两个单独的路由对象。
1.3.6.17.1. 搜索不显示受管集群的节点信息
搜索 hub 集群中资源的 RBAC 映射。根据 RBAC 设置,用户可能无法看到来自受管集群的节点数据。搜索的结果可能与集群的 Nodes 页面中显示的结果不同。
1.3.7. 已知的监管问题
查看监管的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.7.1. 当命名空间处于 Terminating 状态时,配置策略列出了 complaint
当您有一个为 complianceType
参数配置的配置策略,并为 remediationAction
参数配置 enforce
时,当向 Kubernetes API 发出删除请求时,策略会列为合规。因此,在策略列为合规时,Kubernetes 对象可能会一直处于
Terminating
状态。
1.3.7.2. 使用策略部署的 Operator 不支持 ARM
虽然支持安装到 ARM 环境中,但使用策略部署的 operator 可能不支持 ARM 环境。安装 Operator 的以下策略不支持 ARM 环境:
1.3.7.3. ConfigurationPolicy 自定义资源定义会一直处于终止状态
当您通过在 KlusterletAddonConfig
或分离集群中禁用策略控制器或从受管集群中删除 config-policy-controller
附加组件时,ConfigurationPolicy
自定义资源定义可能会处于终止状态。如果 ConfigurationPolicy
自定义资源定义一直处于终止状态,则在稍后重新安装附加组件时可能不会添加新策略。您还可以收到以下错误:
template-error; Failed to create policy template: create not allowed while custom resource definition is terminating
使用以下命令检查自定义资源定义是否卡住:
oc get crd configurationpolicies.policy.open-cluster-management.io -o=jsonpath='{.metadata.deletionTimestamp}'
如果删除时间戳位于资源上,则自定义资源定义会卡住。要解决这个问题,从集群中保留的配置策略中删除所有终结器。在受管集群中使用以下命令,将 <cluster-namespace>
替换为受管集群命名空间:
oc get configurationpolicy -n <cluster-namespace> -o name | xargs oc patch -n <cluster-namespace> --type=merge -p '{"metadata":{"finalizers": []}}'
配置策略资源会自动从集群中移除,自定义资源定义会退出其终止状态。如果已经重新安装了附加组件,则会在没有删除时间戳的情况下自动重新创建自定义资源定义。
1.3.7.4. 强制时策略状态显示重复的更新
如果策略被设置为 remediationAction: enforce
并重复更新,Red Hat Advanced Cluster Management 控制台会显示重复违反情况,并成功更新。重复更新生成多个策略事件,这可能会导致 governance-policy-framework-addon
pod 耗尽内存和崩溃。请参阅以下可能的原因和错误解决方案:
另一个控制器或进程也使用不同的值更新对象。
要解决这个问题,请禁用策略并比较策略和受管集群上的
objectDefinition
之间的不同。如果值不同,则可能会更新另一个控制器或进程。检查对象的元数据
,以帮助识别值的不同原因。ConfigurationPolicy
中的objectDefinition
不匹配,因为 Kubernetes 在应用策略时处理对象。要解决这个问题,请禁用策略并比较策略和受管集群上的
objectDefinition
之间的不同。如果键不同或缺失,Kubernetes 可能会在将密钥应用到对象之前处理密钥,如删除包含默认值或空值的键。
1.3.7.5. 重复策略模板名称会创建 inconstistent 结果
当您创建具有相同策略模板名称的策略时,您会收到不一致的结果,但您可能不知道原因。例如,使用名为 create-pod
的多个配置策略定义策略会导致结果不一致。最佳实践:对策略模板避免使用重复名称。
1.3.7.6. 数据库和策略合规历史记录 API 中断
数据库和策略合规历史记录 API 中断内置弹性,但任何不能被受管集群记录的合规性事件都在内存中排队,直到成功记录为止。这意味着,如果中断,且受管集群重启时的 governance-policy-framework
pod 会重启,则所有排队的合规性事件都会丢失。
如果在数据库中断期间创建或更新新策略,则无法记录针对此新策略发送的合规事件,因为策略到数据库 ID 的映射无法更新。当数据库恢复在线时,映射会自动更新,并记录来自这些策略的未来合规事件。
1.3.7.7. PostgreSQL 数据丢失
如果 PostgreSQL 服务器有数据丢失,如在没有最新数据的备份的情况下恢复到备份,您必须在 Red Hat Advanced Cluster Management hub 集群上重启监管策略传播器,以便它可以将策略映射更新为数据库 ID。在重启监管策略传播器前,与数据库中存在的策略关联的新合规事件将不再记录。
要重启监管策略传播器,请在 Red Hat Advanced Cluster Management hub 集群中运行以下命令:
oc -n open-cluster-management rollout restart deployment/grc-policy-propagator
1.3.7.8. Kyverno 策略不再报告最新版本的状态
Kyverno 策略由 Policy Generator 生成的策略报告 Red Hat Advanced Cluster Management 集群中的以下信息:
violation - couldn't find mapping resource with kind ClusterPolicyReport, please check if you have CRD deployed; violation - couldn't find mapping resource with kind PolicyReport, please check if you have CRD deployed
原因是 PolicyReport
API 版本在生成器中不正确,与部署的 Kyverno 不匹配。
1.3.8. 已知的与网络相关的问题
查看 Submariner 的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。
对于 Red Hat OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
有关弃用和删除的更多信息,请参阅为 Red Hat Advanced Cluster Management 弃用和删除。
1.3.8.1. Submariner 已知问题
请参阅以下在使用网络功能时可能出现的已知问题和限制。
1.3.8.1.1. 没有 ClusterManagementAddon submariner 附加组件失败
对于 2.8 及更早版本,当安装 Red Hat Advanced Cluster Management 时,您也可以使用 Operator Lifecycle Manager 部署 submariner-addon
组件。如果您没有创建 MultiClusterHub
自定义资源,submariner-addon
pod 会发送错误并阻止 Operator 安装。
发生以下通知的原因是 ClusterManagementAddon
自定义资源定义缺失:
graceful termination failed, controllers failed with error: the server could not find the requested resource (post clustermanagementaddons.addon.open-cluster-management.io)
ClusterManagementAddon
资源由 cluster-manager
部署创建,但在集群中安装 MultiClusterEngine
组件时,此部署将可用。
如果在创建 MultiClusterHub
自定义资源时没有集群中可用的 MultiClusterEngine
资源,MultiClusterHub
operator 会部署 MultiClusterEngine
实例,以及所需的 Operator,用于解析上一个错误。
1.3.8.1.2. 导入受管集群时,Submariner 附加组件资源没有正确清理
如果在 MultiClusterHub
(MCH) operator 中将
组件设置为 submariner-addon
false
,则不会为受管集群资源正确清理 submariner-addon 终结器。因为没有被正确清理终结器,这会阻止 submariner-addon
组件在 hub 集群中被禁用。
1.3.8.1.3. Submariner 安装计划限制
Submariner 安装计划不遵循整个安装计划设置。因此,Operator 管理屏幕无法控制 Submariner 安装计划。默认情况下,Submariner 安装计划会被自动应用,Submariner addon 始终更新至与已安装的 Red Hat Advanced Cluster Management 版本对应的最新可用版本。要更改此行为,您必须使用自定义 Submariner 订阅。
1.3.8.1.4. 有限的无头服务支持
在使用 Globalnet 时,在没有选择器的情况下的无头服务不支持服务发现。
1.3.8.1.5. 不支持在启用 NAT 时使用 VXLAN 的部署
只有非 NAT 部署支持使用 VXLAN 电缆驱动程序的 Submariner 部署。
1.3.8.1.6. OVN Kubernetes 需要 OCP 4.11 及更新的版本
如果使用 OVN Kubernetes CNI 网络,则需要 Red Hat OpenShift 4.11 或更高版本。
1.3.8.1.7. 自签名证书可能会阻止到代理的连接
代理上的自签名证书可能会阻止加入集群连接到代理。连接失败并显示证书验证错误。您可以通过在相关 SubmarinerConfig
对象中将 InsecureBrokerConnection
设置为 true
来禁用代理证书验证。请参见以下示例:
apiVersion: submarineraddon.open-cluster-management.io/v1alpha1 kind: SubmarinerConfig metadata: name: submariner namespace: <managed-cluster-namespace> spec: insecureBrokerConnection: true
1.3.8.1.8. Submariner 只支持 OpenShift SDN 或 OVN Kubernetes
Submariner 只支持使用 OpenShift SDN 或 OVN-Kubernetes Container Network Interface (CNI) 网络供应商的 Red Hat OpenShift Container Platform 集群。
1.3.8.1.9. Microsoft Azure 集群的命令限制
subctl diagnose firewall inter-cluster
命令无法在 Microsoft Azure 集群中工作。
1.3.8.1.10. 自动升级无法使用自定义 CatalogSource 或 Subscription
当 Red Hat Advanced Cluster Management for Kubernetes 升级时,Submariner 会被自动升级。如果您使用自定义 CatalogSource
或 Subscription
,则自动升级可能会失败。
为确保在受管集群上安装 Submariner 时自动升级可以正常工作,您必须在每个受管集群的 SubmarinerConfig
自定义资源中将 spec.subscriptionConfig.channel
字段设置为 stable-0.15
。
1.3.8.1.11. Submariner 与启用了 IPsec 的 OVN-Kubernetes 部署冲突
由支持 IPsec 的 OVN-Kubernetes 部署创建的 IPsec 隧道可能与 Submariner 创建的 IPsec 隧道冲突。不要在 Submariner 中的 IPsec 模式下使用 OVN-Kubernetes。
1.3.8.1.12. 在从 ManageClusterSet中删除 ManagedCluster 前卸载 Submariner
如果您从 ClusterSet
中删除集群,或将集群移到不同的 ClusterSet
中,Submariner 安装将不再有效。
在从 ManageClusterSet
移动或删除 ManagedCluster
前,您必须卸载 Submariner。如果没有卸载 Submariner,则无法再卸载或重新安装 Submariner,Submariner 会停止在 ManagedCluster
上工作。
1.3.9. 多集群全局 hub Operator 已知问题
查看 multicluster global hub Operator 的已知问题。以下列表包含本发行版本的已知问题,或从上一版本中继承的问题。对于 OpenShift Container Platform 集群,请参阅 OpenShift Container Platform 已知问题。
1.3.9.1. 分离的受管 hub 集群会删除并重新创建命名空间和资源
如果您以托管模式导入受管 hub 集群并分离此受管 hub 集群,则会删除并重新创建 open-cluster-management-agent-addon
命名空间。分离的受管 hub 集群也会删除并重新创建此命名空间中的所有附加组件资源。
当前没有解决此问题的方法。
1.3.9.2. Kafka operator 保留重启
在联邦信息处理标准(FIPS)环境中,Kafka operator 会因为内存不足(OOM)状态而保持重启。要解决这个问题,请将资源限值设置为至少 512M
。有关如何设置此限制的详细步骤,请参阅 amq stream doc。
1.3.9.3. 备份和恢复已知问题
如果您的原始多集群全局 hub 集群崩溃,则多集群全局 hub 会丢失其生成的事件和 cron
作业。即使恢复新的多集群全局 hub 集群,事件和 cron
作业也不会恢复。要解决这个问题,您可以手动运行 cron
作业,请参阅 手动运行 summarization 进程。
1.3.9.4. 受管集群显示但不计算
没有成功创建的受管集群,即受管集群中不存在 clusterclaim id.k8s.io
,策略合规仪表板中没有计数,而是显示在策略控制台中。
1.3.9.5. multicluster global hub 安装在 OpenShift Container Platform 4.13 超链接上可能会重定向主页
如果在 OpenShift Container Platform 4.13 上安装 multicluster global hub Operator,链接到受管集群列表的所有超链接以及仪表板中的详情页面都会重定向到 Red Hat Advanced Cluster Management 主页。
您需要手动转至目标页面。
1.3.9.6. 标准组过滤器无法传递给新页面
在 Global Hub Policy Group Compliancy Overview hub 仪表板中,您可以通过单击 标准组的 View Offending Policies 来检查一个数据点,但在点击此链接后,标准组过滤器无法传递给新页面。
这也是 Cluster Group Compliancy 概述 的问题。
1.4. 为 Red Hat Advanced Cluster Management 弃用和删除
了解产品将在什么时候被弃用,或从 Red Hat Advanced Cluster Management for Kubernetes 中删除。考虑推荐操作中的备选操作和详细信息,它们显示在当前版本的表中和之前两个版本。
弃用: Red Hat Advanced Cluster Management 2.7 及更早的版本不再被支持。文档可能仍然可用,但没有任何勘误或其他更新。
最佳实践: 升级到最新版本。
重要: 集群生命周期组件和功能位于多集群引擎 operator 中,它是增强集群管理的软件操作器。多集群引擎 operator 的 Cluster 生命周期的发行注记 包括在发行注记中。
1.4.1. API 弃用和删除
Red Hat Advanced Cluster Management 的 API 会遵循 Kubernetes 弃用指南。有关相关策略的详情,请参阅 Kubernetes 弃用策略。Red Hat Advanced Cluster Management API 只在以下时间线外才会被弃用或删除:
-
所有
V1
API 已正式发布(GA),提供 12 个月或跨三个发行版本(以更长的时间为准)的支持。V1 API 没有被删除,但可能会在这个时间限制外被弃用。 -
所有
beta
API 通常在九个月或跨三个发行版本(以更长的时间为准)内可用。Beta API 不会在这个时间限制外被删除。 -
所有
alpha
API 都不是必需的,但如果对用户有好处,则可能会被列为已弃用或删除。
1.4.2. Red Hat Advanced Cluster Management 弃用
弃用(deprecated)组件、功能或服务会被支持,但不推荐使用,并可能在以后的版本中被删除。考虑使用推荐操作中的相应的替代操作,详情在下表中提供:
产品或类别 | 受影响的项 | Version | 推荐的操作 | 详情和链接 |
---|---|---|---|---|
概述页面 | Red Hat Advanced Cluster Management for Kubernetes 搜索 | 2.12 | 启用 Fleet 视图 开关来查看新的默认 Overview 页面。 | Red Hat Advanced Cluster Management Overview 页的以前的布局已弃用。 |
策略合规历史记录 API | 监管 | 2.12 |
使用现有策略指标查看合规性状态更改。您还可以查看 | 如需更多信息,请参阅策略控制器高级配置。 |
安装程序 |
| 2.9 | None |
请参阅高级配置来配置安装。如果您升级了 Red Hat Advanced Cluster Management for Kubernetes 版本,且最初有一个带有 |
应用程序和管理 |
| 2.8 |
在使用 |
虽然 |
1.4.3. 删除
一个删除(removed) 的项通常是在之前的版本中被弃用的功能,在该产品中不再可用。您必须将 alternatives 用于删除的功能。考虑使用推荐操作中的相应的替代操作,详情在下表中提供:
产品或类别 | 受影响的项 | Version | 推荐的操作 | 详情和链接 |
---|---|---|---|---|
监管 | IAM 策略控制器 | 2.11 | None |
1.5. Red Hat Advanced Cluster Management for Kubernetes 平台针对 GDPR 的注意事项
1.5.1. 备注
本文档旨在帮助您准备 General Data Protection Regulation(GDPR)就绪。它提供有关您可以配置的 Red Hat Advanced Cluster Management for Kubernetes 平台的功能信息,以及产品的使用情况,以满足 GDPR 就绪的要求。因为用户可以选择不同的方式来配置功能,并且产品的使用方式及第三方集群和系统都会有所不同,所以这里介绍的信息可能并没有覆盖所有情况。
客户需要负责确保自己遵守各种法律及条例,包括欧盟的 GDPR 条例。获取法律法规建议,确定并解释可能影响客户业务的相关法律及规范,以及客户可能需要为遵守此类法律及规范而可能需要执行的任何行动完全由客户自己负责。
这里描述的产品、服务和其他功能不适用于所有客户情况,且适用性可能有限制。红帽不提供法律、会计、审计方面的建议,也不代表或者认为其服务或产品会确保客户遵守任何法律和规范。
1.5.2. 内容表
1.5.3. GDPR
欧盟("EU")已采用了 General Data Protection Regulation(GDPR)并从 2018 年 5 月 25 日起生效。
1.5.3.1. 为什么 GDPR 很重要?
GDPR 为处理个人数据建立了更强大的数据保护框架。GDPR 可以带来:
- 新的和增强的个人权利
- 扩展了个人数据的定义
- 数据处理方新的责任
- 非遵守方可能在经济上会受到大量处罚
- 强制数据违反通知
1.5.3.2. 更多关于 GDPR 的信息
1.5.4. 针对 GDPR 的产品配置
以下小节描述了 Red Hat Advanced Cluster Management for Kubernetes 平台的数据管理的各个方面,并提供了有关帮助客户端满足 GDPR 要求的能力信息。
1.5.5. 数据生命周期
Red Hat Advanced Cluster Management for Kubernetes 是一个应用程序平台,用于开发并管理内部、容器化的应用程序。它是一个用于管理容器的集成环境,包括容器编配器 Kubernetes、集群生命周期、应用程序生命周期以及安全框架(监管、风险和合规)。
因此,Red Hat Advanced Cluster Management for Kubernetes 平台主要处理与平台的配置和管理相关的技术数据,其中的一些数据可能会涉及到受 GDPR 影响的数据。Red Hat Advanced Cluster Management for Kubernetes 平台还处理管理平台的用户的信息。在这个文档中会介绍这些数据,以使负责满足 GDPR 要求的用户了解这些内容。
这些数据会在本地或者远程文件系统中,以配置文件或数据库的形式存在。在 Red Hat Advanced Cluster Management for Kubernetes 平台上运行的应用程序可能会涉及到其它形式的、受 GDPR 影响的个人数据。用于保护和管理平台数据的机制也可用于平台上运行的应用程序。对于在 Red Hat Advanced Cluster Management for Kubernetes 平台上运行的应用程序所收集个人数据,可能还需要额外的机制来进行管理和保护。
为了更好了解 Red Hat Advanced Cluster Management for Kubernetes 平台及其数据流,您需要对 Kubernetes、Docker 和 Operator 的工作原理有所了解。这些开源组件是 Red Hat Advanced Cluster Management for Kubernetes 平台的基础。您使用 Kubernetes 部署来放置应用程序实例,这些实例会被内置到引用 Docker 镜像的 Operator 中。Operator 包含应用程序的详细信息,Docker 镜像包含应用程序需要运行的所有软件包。
1.5.5.1. Red Hat Advanced Cluster Management for Kubernetes 平台的数据流类型
作为一个平台,Red Hat Advanced Cluster Management for Kubernetes 需要不同类别的技术数据,这些数据可能会被视为个人数据,如管理员用户 ID 和密码、服务用户 ID 和密码、IP 地址以及 Kubernetes 节点名称。Red Hat Advanced Cluster Management for Kubernetes 平台还处理管理平台的用户的信息。在平台中运行的应用程序可能会使用与平台无关的其他类别的个人数据。
本文档后续部分将介绍如何收集/创建这些技术数据、存储、访问、安全、日志和删除。
1.5.5.2. 用于在线联系的个人数据
用户可以以各种方式提交在线评论/反馈/请求,主要有:
- 如果使用 Slack 频道,公共的 Slack 社区
- 产品文档中的公共注释或问题单
- 技术社区中的公共对话
通常,只使用客户名称和电子邮件地址,以便可以进行回复,对个人数据的使用符合 红帽在线隐私声明。
1.5.6. 数据收集
Red Hat Advanced Cluster Management for Kubernetes 平台不会收集敏感的个人数据。它会创建和管理技术数据,如管理员用户 ID 和密码、服务用户 ID 和密码、IP 地址以及 Kubernetes 节点名称。这些数据可能会被视为个人数据。Red Hat Advanced Cluster Management for Kubernetes 平台还处理管理平台的用户的信息。只有系统管理员才可以通过使用基于角色的访问控制的管理控制台访问此类信息,或者系统管理员登陆到一个 Red Hat Advanced Cluster Management for Kubernetes 平台节点才可以访问。
在 Red Hat Advanced Cluster Management for Kubernetes 平台上运行应用程序可能会收集个人数据。
当您在评估 Red Hat Advanced Cluster Management for Kubernetes 运行容器化应用程序,并需要符合 GDPR 要求时,您必须考虑应用程序收集的个人数据类型以及是如何管理这些数据的,例如:
- 当数据流向应用程序或从应用程序流出时,数据是如何被保护的?数据是否在传输中加密?
- 数据是如何被应用程序存储的?数据在不用时是否被加密?
- 用于访问应用程序的凭证是如何被收集和存储的?
- 应用程序用于访问数据源所使用的凭证是如何被收集和存储的?
- 如何根据需要删除应用程序收集的数据?
这不是 Red Hat Advanced Cluster Management for Kubernetes 平台所收集的数据类型的完整列表。它只作为一个示例以供考虑。如果您对数据类型有任何疑问,请联络红帽。
1.5.7. 数据存储
对于与配置和管理平台相关的技术数据,Red Hat Advanced Cluster Management for Kubernetes 平台会把它们以配置文件或数据库的形式保存在本地或远程文件系统中。对于存储的数据,必须考虑它们的安全性。Red Hat Advanced Cluster Management for Kubernetes 平台支持使用 dm-crypt
对存储的数据进行加密。
下面是主要的数据存储形式,您可能需要进行与 GDPR 相关的考虑。
- 平台配置数据: 通过更新带有常规设置、Kubernetes、日志、网络、Docker 和其他设置属性的配置 YAML 文件,可以自定义 Red Hat Advanced Cluster Management for Kubernetes 平台的配置。这些数据会作为 Red Hat Advanced Cluster Management for Kubernetes 平台的安装程序的输入被使用来部署节点。这些属性还包括用于 bootstrap 的管理员用户 ID 和密码。
-
Kubernetes 配置数据: Kubernetes 集群状态数据保存在分布式“键-值”存储
etcd
中。 - 用户身份验证数据,包括用户 ID 和密码: 通过客户端企业级 LDAP 目录处理用户 ID 和密码管理。在 LDAP 中定义的用户和组可添加到 Red Hat Advanced Cluster Management for Kubernetes 平台的团队中,并分配访问角色。Red Hat Advanced Cluster Management for Kubernetes 平台会储存来自 LDAP 的电子邮件地址和用户 ID,但不保存密码。Red Hat Advanced Cluster Management for Kubernetes 平台会存储组名称,并在登录时缓存用户所属的可用组。组成员不会以长期形式有效。必须考虑在企业级 LDAP 中保护用户和组数据。Red Hat Advanced Cluster Management for Kubernetes 平台也包括了一个身份认证服务 Open ID Connect(OIDC),它与企业目录服务进行交互并维护访问令牌。此服务使用 ETCD 作为后端存储。
-
服务身份验证数据,包括用户 ID 和密码: Red Hat Advanced Cluster Management for Kubernetes 平台组件使用的、用于在组件间进行访问的凭证被定义为 Kubernetes Secret。所有 Kubernetes 资源定义都保留在
etcd
键-值形式的数据存储中。初始凭证值在平台配置数据中定义,作为 Kubernetes Secret 配置 YAML 文件。如需更多信息,请参阅 Kubernetes 文档中的 Secret。
1.5.8. 数据访问
您可以通过以下定义的产品接口集合访问 Red Hat Advanced Cluster Management for Kubernetes 平台数据。
- Web 用户界面(控制台)
-
Kubernetes
kubectl
CLI - Red Hat Advanced Cluster Management for Kubernetes CLI
- oc CLI
这些接口可用于对 Red Hat Advanced Cluster Management for Kubernetes 集群进行管理级别的更改。当发出一个请求时,安全使用 Red Hat Advanced Cluster Management for Kubernetes 的管理访问权限涉及三个逻辑的、有特定顺序的阶段: 身份验证、角色映射和授权。
1.5.8.1. 身份验证
Red Hat Advanced Cluster Management for Kubernetes 平台的身份验证管理程序接受来自控制台的用户凭证,并将凭证转发到后端的 OIDC 供应商,后者根据企业目录验证用户凭证。然后,OIDC 供应商会向身份验证程序返回一个带有 JSON Web Token(JWT
)内容的身份验证 cookie(auth-cookie
)。JWT 令牌包括了身份验证请求时的组成员信息,以及用户 ID 和电子邮件地址等信息。然后,这个身份验证 cookie 会发送到控制台。在会话存在期间,cookie 会被刷新。在退出控制台或关闭浏览器后,这个 cookie 会在 12 小时内有效。
对于所有来自控制台的验证请求,前端 NGINX 服务器对请求中的可用身份验证 cookie 进行解码,并通过调用验证管理程序来验证请求。
Red Hat Advanced Cluster Management for Kubernetes 平台的 CLI 需要用户在登陆时提供凭证。
kubectl
和 oc
CLI 也需要凭证来访问集群。这些凭证可以从管理控制台获得,并在 12 小时后过期。支持通过服务帐户访问。
1.5.8.2. 角色映射
Red Hat Advanced Cluster Management for Kubernetes 平台支持的基于角色的控制访问(RBAC)。在角色映射阶段,身份验证阶段提供的用户名映射到用户或组角色。在授权哪些管理操作可由经过身份验证的用户执行时使用角色。
1.5.8.3. 授权
Red Hat Advanced Cluster Management for Kubernetes 平台对集群配置操作的角色控制访问,适用于 catalog 和 Helm 资源,以及 Kubernetes 资源。提供了几个 IAM(Identity and Access Management)角色,包括 Cluster Administrator、Administrator、Operator、Editor、Viewer。在将用户或用户组添加到一个团队时,会为用户或用户组分配一个角色。对资源的团队访问可以由命名空间控制。
1.5.8.4. Pod 安全性
Pod 安全策略用于设置集群级别的控制,控制 pod 可以做什么或可以访问什么。
1.5.9. 数据处理
Red Hat Advanced Cluster Management for Kubernetes 的用户可以通过系统配置,来处理和保护与配置和管理相关的技术数据。
基于角色的访问控制 (RBAC)可控制用户可访问哪些数据和功能。
Data-in-transit 通过使用 TLS
加以保护。HTTP
(TLS
底层)是用来在用户客户端和后端服务间进行安全的数据传输。用户可以指定在安装过程中要使用的 root 证书。
Data-at-rest 的保护是通过使用 dm-crypt
加密数据来实现的。
那些用来管理和保护 Red Hat Advanced Cluster Management for Kubernetes 平台的技术数据的机制,同样可用于对用户开发的或用户提供的应用程序的个人数据进行管理和保护。客户可以开发自己的功能进行进一步的控制。
1.5.10. 数据删除
Red Hat Advanced Cluster Management for Kubernetes 平台提供了命令、API 和用户界面操作以删除由产品创建或收集的数据。用户可以使用这些功能删除技术数据,如服务用户 ID 和密码、IP 地址、Kubernetes 节点名称或其他平台配置数据,并可以管理平台的用户的信息。
Red Hat Advanced Cluster Management for Kubernetes 平台中可用来进行数据删除的方法:
-
与平台配置相关的所有技术数据,都可通过管理控制台或 Kubernetes
kubectl
API 删除。
Red Hat Advanced Cluster Management for Kubernetes 平台中用于删除帐户数据的方法:
-
与平台配置相关的所有技术数据,都可通过 Red Hat Advanced Cluster Management for Kubernetes 或 Kubernetes
kubectl
API 删除。
删除通过企业级 LDAP 目录管理的用户 ID 和密码数据的功能,需要由与 Red Hat Advanced Cluster Management for Kubernetes 平台集成的 LDAP 产品提供。
1.5.11. 限制使用个人数据的能力
通过本文档中介绍的工具,Red Hat Advanced Cluster Management for Kubernetes 平台可以对最终用户对个人数据的使用加以限制。
根据 GDPR,用户的访问、修改和处理权限都需要被加以限制。请参考本文档的其它部分来控制以下内容:
访问权限
- Red Hat Advanced Cluster Management for Kubernetes 平台管理员可以使用 Red Hat Advanced Cluster Management for Kubernetes 平台的功能提供个人对他们的数据的独立访问。
- Red Hat Advanced Cluster Management for Kubernetes 平台管理员可以使用 Red Hat Advanced Cluster Management for Kubernetes 平台的功能,可以提供 Red Hat Advanced Cluster Management for Kubernetes 平台为某个个人保存的什么个人数据的信息。
修改权限
- Red Hat Advanced Cluster Management for Kubernetes 平台管理员可以使用 Red Hat Advanced Cluster Management for Kubernetes 平台的功能来允许一个个人修改自己的数据。
- Red Hat Advanced Cluster Management for Kubernetes 平台管理员可以使用 Red Hat Advanced Cluster Management for Kubernetes 平台的功能为一个个人修改其个人数据。
限制处理的权利
- Red Hat Advanced Cluster Management for Kubernetes 平台管理员可以使用 Red Hat Advanced Cluster Management for Kubernetes 平台的功能停止处理一个个人的数据。
1.5.12. 附录
作为一个平台,Red Hat Advanced Cluster Management for Kubernetes 需要不同类别的技术数据,这些数据可能会被视为个人数据,如管理员用户 ID 和密码、服务用户 ID 和密码、IP 地址以及 Kubernetes 节点名称。Red Hat Advanced Cluster Management for Kubernetes 平台也会处理管理平台的人员的信息。在平台中运行的应用程序可能会引入其它在平台中未知的个人数据类别。
本附录包含平台服务日志记录的数据详情。
1.6. FIPS 就绪性
Red Hat Advanced Cluster Management for Kubernetes 是为 FIPS 设计的。当以 FIPS 模式在 Red Hat OpenShift Container Platform 上运行时,OpenShift Container Platform 将使用提交至 NIST 的 Red Hat Enterprise Linux 加密库,以仅在 OpenShift Container Platform 支持的架构上进行 FIPS 验证。有关 NIST 验证程序的更多信息,请参阅加密模块验证程序。有关为验证提交的 RHEL 加密库的单独版本的最新 NIST 状态,请参阅 Compliance Activities 和 Government Standards。
如果您计划管理启用了 FIPS 的集群,您必须在配置为以 FIPS 模式运行的 OpenShift Container Platform 集群上安装 Red Hat Advanced Cluster Management。hub 集群必须处于 FIPS 模式,因为在受管集群中使用在 hub 集群上创建的加密。
要在受管集群中启用 FIPS 模式,在置备 OpenShift Container Platform 受管集群时设置 fips: true
。置备集群后您无法启用 FIPS。如需更多信息 ,请参阅 OpenShift Container Platform 文档中的集群需要额外的安全性?
1.6.1. 限制:
阅读 Red Hat Advanced Cluster Management 和 FIPS 中的以下限制。
- 在配置提供的存储时,必须对搜索和可观察组件使用的持久性卷声明(PVC)和 S3 存储进行加密。Red Hat Advanced Cluster Management 不提供存储加密,请参阅 OpenShift Container Platform 文档 配置持久性存储。
当使用 Red Hat Advanced Cluster Management 控制台置备受管集群时,在受管集群创建的 Cluster details 部分中选中以下复选框以启用 FIPS 标准:
FIPS with information text: Use the Federal Information Processing Standards (FIPS) modules provided with Red Hat Enterprise Linux CoreOS instead of the default Kubernetes cryptography suite file before you deploy the new managed cluster.
1.7. Observability 支持
- Red Hat Advanced Cluster Management 使用 Red Hat OpenShift Data Foundation (以前称为 Red Hat OpenShift Container Platform)进行测试并被完全支持。
- Red Hat Advanced Cluster Management 支持在用户提供的兼容 S3 API 的第三方对象存储中多集群可观察 Operator 的功能。Observability 服务使用 Thanos 支持的、稳定的对象存储。
- Red Hat Advanced Cluster Management 支持工作包括识别根本原因的合理努力。如果您创建一个支持问题单,则根本原因是您提供的 S3 兼容对象存储,则必须使用客户支持频道打开问题。