Red Hat Summit10장. Kafka 구성 요소의 로깅 구성
구성 속성에서 Kafka 구성 요소의 로깅 수준을 직접 구성합니다. Kafka 브로커, Kafka Connect 및 MirrorMaker 2의 브로커 수준을 동적으로 변경할 수도 있습니다.
INFO에서 DEBUG로와 같은 로그 수준 세부 정보를 늘리면 Kafka 클러스터 문제 해결에 도움이 될 수 있습니다. 그러나 더 자세한 로그는 성능에 부정적인 영향을 미칠 수 있으며 문제를 진단하기가 더 어려워질 수 있습니다.
10.1. Kafka 로깅 속성 구성
Kafka 구성 요소는 오류 로깅에 Log4j 프레임워크를 사용합니다. 기본적으로 로깅 구성은 다음 속성 파일을 사용하여 classpath 또는 config 디렉토리에서 읽습니다.
-
Kafka 및 Zoo Cryostat의
log4j.properties -
Kafka Connect 및 MirrorMaker 2의
connect-log4j.properties
로거는 명시적으로 설정되지 않은 경우 각 파일에서 log4j.rootLogger 로깅 수준 구성을 상속합니다. 이러한 파일에서 로깅 수준을 변경할 수 있습니다. 다른 로거에 대한 로깅 수준을 추가하고 설정할 수도 있습니다.
구성 요소에 대한 시작 스크립트에서 사용하는 KAFKA_LOG4J_OPTS 환경 변수를 사용하여 로깅 속성 파일의 위치 및 이름을 변경할 수 있습니다.
Kafka 브로커에서 사용하는 로깅 속성 파일의 이름과 위치 전달
su - kafka export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/log4j.properties"; \ /opt/kafka/bin/kafka-server-start.sh \ /opt/kafka/config/server.properties
su - kafka
export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/log4j.properties"; \
/opt/kafka/bin/kafka-server-start.sh \
/opt/kafka/config/server.propertiesZoo Cryostat에서 사용하는 로깅 속성 파일의 이름과 위치 전달
su - kafka export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/log4j.properties"; \ /opt/kafka/bin/zookeeper-server-start.sh -daemon \ /opt/kafka/config/zookeeper.properties
su - kafka
export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/log4j.properties"; \
/opt/kafka/bin/zookeeper-server-start.sh -daemon \
/opt/kafka/config/zookeeper.propertiesKafka Connect에서 사용하는 로깅 속성 파일의 이름과 위치 전달
su - kafka export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/connect-log4j.properties"; \ /opt/kafka/bin/connect-distributed.sh \ /opt/kafka/config/connect-distributed.properties
su - kafka
export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/connect-log4j.properties"; \
/opt/kafka/bin/connect-distributed.sh \
/opt/kafka/config/connect-distributed.propertiesMirrorMaker 2에서 사용하는 로깅 속성 파일의 이름과 위치 전달
su - kafka export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/connect-log4j.properties"; \ /opt/kafka/bin/connect-mirror-maker.sh \ /opt/kafka/config/connect-mirror-maker.properties
su - kafka
export KAFKA_LOG4J_OPTS="-Dlog4j.configuration=file:/my/path/to/connect-log4j.properties"; \
/opt/kafka/bin/connect-mirror-maker.sh \
/opt/kafka/config/connect-mirror-maker.properties
'%20d='M201.5%20305.5c-13.8%200-24.9-11.1-24.9-24.6%200-13.8%2011.1-24.9%2024.9-24.9%2013.6%200%2024.6%2011.1%2024.6%2024.9%200%2013.6-11.1%2024.6-24.6%2024.6zM504%20256c0%20137-111%20248-248%20248S8%20393%208%20256%20119%208%20256%208s248%20111%20248%20248zm-132.3-41.2c-9.4%200-17.7%203.9-23.8%2010-22.4-15.5-52.6-25.5-86.1-26.6l17.4-78.3%2055.4%2012.5c0%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.3%2024.9-24.9s-11.1-24.9-24.9-24.9c-9.7%200-18%205.8-22.1%2013.8l-61.2-13.6c-3-.8-6.1%201.4-6.9%204.4l-19.1%2086.4c-33.2%201.4-63.1%2011.3-85.5%2026.8-6.1-6.4-14.7-10.2-24.1-10.2-34.9%200-46.3%2046.9-14.4%2062.8-1.1%205-1.7%2010.2-1.7%2015.5%200%2052.6%2059.2%2095.2%20132%2095.2%2073.1%200%20132.3-42.6%20132.3-95.2%200-5.3-.6-10.8-1.9-15.8%2031.3-16%2019.8-62.5-14.9-62.5zM302.8%20331c-18.2%2018.2-76.1%2017.9-93.6%200-2.2-2.2-6.1-2.2-8.3%200-2.5%202.5-2.5%206.4%200%208.6%2022.8%2022.8%2087.3%2022.8%20110.2%200%202.5-2.2%202.5-6.1%200-8.6-2.2-2.2-6.1-2.2-8.3%200zm7.7-75c-13.6%200-24.6%2011.1-24.6%2024.9%200%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.1%2024.9-24.6%200-13.8-11-24.9-24.9-24.9z'/%3e%3c/svg%3e){kind=small}