7.6. 使用 OpenShift 路由访问 Kafka
使用 OpenShift 路由从 OpenShift 集群外的客户端访问 AMQ Streams Kafka 集群。
为了可以使用路由,请在 Kafka
自定义资源中为 route
类型监听程序添加配置。应用时,配置会为外部 bootstrap 和集群中的每个代理创建一个专用路由和服务。客户端连接到 bootstrap 路由,该路由通过 bootstrap 服务路由以连接到代理。然后,使用 DNS 名称建立每个代理连接,该名称通过特定于代理的路由和服务将流量从客户端路由到代理。
要连接到代理,您可以为路由 bootstrap 地址指定主机名,以及用于 TLS 加密的证书。对于使用路由访问,端口始终为 443。
OpenShift 路由地址包含 Kafka 集群的名称、监听程序的名称及其在其中创建的项目的名称。例如,my-cluster-kafka-external-bootstrap-myproject
(<cluster_name>-kafka-<listener_name>-bootstrap-<namespace>)。请注意,地址的整个长度不超过 63 个字符的最大值。
该流程显示基本的监听程序配置。必须启用 TLS 加密(tls
)。您还可以指定客户端身份验证机制(身份验证
)。使用 配置属性
添加额外的配置。例如,您可以使用带有 路由
监听程序 的主机
配置属性来指定 bootstrap 和 per-broker 服务使用的主机名。
如需有关监听器配置的更多信息,请参阅 GenericKafkaListener
模式参考。
TLS 透传
为 AMQ Streams 创建的路由启用 TLS 透传。Kafka 通过 TCP 使用二进制协议,但路由旨在使用 HTTP 协议。为了能够通过路由路由 TCP 流量,AMQ Streams 使用带有 Server Name Indication (SNI)的 TLS 透传。
SNI 有助于识别并传递到 Kafka 代理的连接。在 passthrough 模式中,始终使用 TLS 加密。由于连接传递到代理,因此监听程序使用由内部集群 CA 签名的 TLS 证书,而不是入口证书。要将监听程序配置为使用您自己的监听程序证书,请使用 brokerCertChainAndKey
属性。
先决条件
- 正在运行的 Cluster Operator
在此过程中,Kafka 集群名称为 my-cluster
。侦听器的名称是 外部
。
流程
配置
Kafka
资源,将外部监听程序设置为route
类型。例如:
Copy to Clipboard Copied! Toggle word wrap Toggle overflow - 1
- 对于
路由类型
监听程序,必须启用 TLS 加密(为true
)。
创建或更新资源。
oc apply -f <kafka_configuration_file>
oc apply -f <kafka_configuration_file>
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 在 secret
my-cluster-cluster-ca-cert
中创建了用于验证 kafka 代理的身份的集群 CA 证书。为每个 Kafka 代理以及外部 bootstrap 服务创建
ClusterIP
类型服务。另外,还会为每个服务创建一个
路由
,其中包含一个 DNS 地址 (host/port),以使用默认的 OpenShift HAProxy 路由器公开它们。路由已预先配置有 TLS 透传。
为 bootstrap 和代理创建的路由
NAME HOST/PORT SERVICES PORT TERMINATION my-cluster-kafka-external-0 my-cluster-kafka-external-0-my-project.router.com my-cluster-kafka-external-0 9094 passthrough my-cluster-kafka-external-1 my-cluster-kafka-external-1-my-project.router.com my-cluster-kafka-external-1 9094 passthrough my-cluster-kafka-external-2 my-cluster-kafka-external-2-my-project.router.com my-cluster-kafka-external-2 9094 passthrough my-cluster-kafka-external-bootstrap my-cluster-kafka-external-bootstrap-my-project.router.com my-cluster-kafka-external-bootstrap 9094 passthrough
NAME HOST/PORT SERVICES PORT TERMINATION my-cluster-kafka-external-0 my-cluster-kafka-external-0-my-project.router.com my-cluster-kafka-external-0 9094 passthrough my-cluster-kafka-external-1 my-cluster-kafka-external-1-my-project.router.com my-cluster-kafka-external-1 9094 passthrough my-cluster-kafka-external-2 my-cluster-kafka-external-2-my-project.router.com my-cluster-kafka-external-2 9094 passthrough my-cluster-kafka-external-bootstrap my-cluster-kafka-external-bootstrap-my-project.router.com my-cluster-kafka-external-bootstrap 9094 passthrough
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 用于客户端连接的 DNS 地址会传播到每个路由的
状态
。bootstrap 路由的状态示例
status: ingress: - host: >- my-cluster-kafka-external-bootstrap-my-project.router.com # ...
status: ingress: - host: >- my-cluster-kafka-external-bootstrap-my-project.router.com # ...
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 使用目标代理使用 OpenSSL
s_client
检查端口 443 上的 client-server TLS 连接。openssl s_client -connect my-cluster-kafka-external-0-my-project.router.com:443 -servername my-cluster-kafka-external-0-my-project.router.com -showcerts
openssl s_client -connect my-cluster-kafka-external-0-my-project.router.com:443 -servername my-cluster-kafka-external-0-my-project.router.com -showcerts
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 服务器名称是用于传递到代理连接的 SNI。
如果连接成功,则返回代理的证书。
代理的证书
Certificate chain 0 s:O = io.strimzi, CN = my-cluster-kafka i:O = io.strimzi, CN = cluster-ca v0
Certificate chain 0 s:O = io.strimzi, CN = my-cluster-kafka i:O = io.strimzi, CN = cluster-ca v0
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 从
Kafka
资源的状态检索 bootstrap 服务的地址。oc get kafka my-cluster -o=jsonpath='{.status.listeners[?(@.name=="external")].bootstrapServers}{"\n"}' my-cluster-kafka-external-bootstrap-my-project.router.com:443
oc get kafka my-cluster -o=jsonpath='{.status.listeners[?(@.name=="external")].bootstrapServers}{"\n"}' my-cluster-kafka-external-bootstrap-my-project.router.com:443
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 地址包含集群名称、监听程序名称、项目名称和路由器的域(本例中为
router.com
)。提取集群 CA 证书。
oc get secret my-cluster-cluster-ca-cert -o jsonpath='{.data.ca\.crt}' | base64 -d > ca.crt
oc get secret my-cluster-cluster-ca-cert -o jsonpath='{.data.ca\.crt}' | base64 -d > ca.crt
Copy to Clipboard Copied! Toggle word wrap Toggle overflow 将您的客户端配置为连接到代理。
- 指定 Kafka 客户端中的 bootstrap 服务和端口 443 的地址,作为连接到 Kafka 集群的 bootstrap 地址。
将提取的证书添加到 Kafka 客户端的信任存储中,以配置 TLS 连接。
如果启用了客户端身份验证机制,您还需要在客户端上配置它。
如果您使用自己的监听程序证书,请检查您是否需要将 CA 证书添加到客户端的信任存储配置中。如果是一个公共(外部)CA,您通常不需要添加它。