3장. Apache Kafka용 Streams와 함께 배포됨
Apache Kafka 구성 요소는 Apache Kafka 배포를 위한 Streams를 사용하여 OpenShift에 배포하기 위해 제공됩니다. Kafka 구성 요소는 일반적으로 가용성을 위해 클러스터로 실행됩니다.
Kafka 구성 요소를 통합하는 일반적인 배포에는 다음이 포함될 수 있습니다.
- 브로커 노드의 Kafka 클러스터
- 복제된 Zoo Cryostat 인스턴스의 Zookeeper 클러스터
- 외부 데이터 연결을 위한 Kafka Connect 클러스터
- 보조 클러스터에서 Kafka 클러스터를 미러링하는 Kafka 미러 메이커 클러스터
- 모니터링을 위한 추가 Kafka 메트릭 데이터를 추출하는 Kafka Exporter
- Kafka 클러스터에 HTTP 기반 요청을 만드는 Kafka 브리지
- cruise Control 을 통해 브로커 노드 간에 주제 파티션을 재조정
이러한 구성 요소는 모두 필수는 아니지만 Kafka 및 Zoo Cryostat가 필요합니다. 일부 구성 요소는 MirrorMaker 또는 Kafka Connect와 같은 Kafka 없이 배포할 수 있습니다.
3.1. 배포 순서 링크 복사링크가 클립보드에 복사되었습니다!
OpenShift 클러스터에 필요한 배포 순서는 다음과 같습니다.
- Kafka 클러스터를 관리하기 위해 Cluster Operator 배포
- Zoo Cryostat 클러스터를 사용하여 Kafka 클러스터를 배포하고 배포에 Topic Operator 및 User Operator를 포함합니다.
필요한 경우 배포:
- Kafka 클러스터에 배포하지 않은 경우 Topic Operator 및 User Operator 독립 실행형
- Kafka Connect
- Kafka MirrorMaker
- Kafka Bridge
- 메트릭 모니터링을 위한 구성 요소
Cluster Operator는 Deployment,Service 및 Pod 리소스와 같은 구성 요소에 대한 OpenShift 리소스를 생성합니다. OpenShift 리소스의 이름은 배포 시 구성 요소에 지정된 이름이 추가됩니다. 예를 들어 my-kafka-cluster 라는 Kafka 클러스터에는 my-kafka-cluster-kafka 라는 서비스가 있습니다.