Kafka 플러그인

Kafka는 분할 및 복제되는 분산형 커밋 로그 서비스입니다. 자세한 내용을 보려면 kafka.apache.org를 방문하세요.

검색

Kafka 플러그인이 구성되어 있지 않아도 Stackdriver Monitoring은 Google Cloud Platform 프로젝트에서 실행 중인 Kafka 서비스를 다음과 같은 방법으로 검색합니다.

  • 인스턴스 이름에서 kafka 검색
  • 방화벽 규칙을 통해 9092에 열려 있는 포트 확인

검색된 서비스는 리소스 메뉴의 Kafka 서비스 페이지에 표시됩니다. 인스턴스에 Monitoring 에이전트를 설치하고 Kafka 플러그인을 구성하면 Monitoring이 인벤토리와 측정항목으로 Kafka 서비스 페이지를 채웁니다.

Kafka를 모니터링하도록 Monitoring 구성

모니터링 에이전트를 설치한 후 다음 안내를 따라 인스턴스에서 Kafka 플러그인을 구성합니다. 이전 jmxtrans 모니터링에서 업그레이드하는 방법은 jmxtrans에서 업그레이드하기를 참조하세요.

기본 요건

Kafka 플러그인에는 버전 5.5.0-257 이상의 Monitoring 에이전트가 필요합니다. 에이전트를 업데이트하려면 에이전트 업그레이드를 참조하세요.

Kafka 모니터링 플러그인 사용 설정

Kafka는 JMX를 통해 모니터링됩니다. Monitoring은 Kafka 버전 0.8.2 이상의 모니터링을 지원합니다.

GitHub 구성 저장소에서 kafka-082.conf를 다운로드하고 VM 인스턴스의 /opt/stackdriver/collectd/etc/collectd.d/ 디렉토리에 저장합니다.

(cd /opt/stackdriver/collectd/etc/collectd.d/ && sudo curl -O https://raw.githubusercontent.com/Stackdriver/stackdriver-agent-service-configs/master/etc/collectd.d/kafka-082.conf)

다운로드한 플러그인 구성 파일에서는 포트 9999에서 JMX 연결을 허용하도록 Kafka 서버가 구성되어 있다고 가정합니다. 다른 JMX 포트를 사용하여 Kafka를 루트로 구성한 경우 파일을 수정하고 안내를 따라 JMX 포트 설정을 변경합니다.

구성 파일을 추가한 후 다음 명령어를 실행하여 Monitoring 에이전트를 다시 시작합니다.

sudo service stackdriver-agent restart

collectd.org에서 다른 플러그인 구성 옵션 정보를 확인할 수 있습니다.

모니터링 대상

Kafka 플러그인은 Kafka 서버/브로커에서 다음 측정항목을 모니터링합니다.

  • 메시지 입력 비율
  • 바이트 입출력 비율
  • 요청 비율
  • 로그 삭제 비율
  • ISR 확장 및 축소 비율
  • 요청 시간

Monitoring은 다음과 같은 기본 JVM 측정항목도 모니터링합니다.

  • 활성 JVM 스레드
  • JVM 힙 메모리 사용량
  • JVM 힙 외의 메모리 사용량
  • JVM 공개 파일 설명자
  • JVM 가비지 컬렉션 개수

자세한 내용은 에이전트 측정항목 목록: Kafka에이전트 측정항목 목록: JVM을 참조하세요.

jmxtrans에서 업그레이드하기

현재 기존 jmxtrans 모니터링으로 VM을 실행하고 있으면 자바 기반 플러그인인 Cassandra, HBase, Kafka, Tomcat을 모두 업그레이드해야 합니다. 이들 플러그인을 업그레이드하고 stackdriver-agent 서비스를 다시 시작한 후 jmxtrans 프로세스를 종료할 수 있습니다. 그런 다음 /mnt/jmxtrans 트리와 /etc/init.d/jmxtrans 스크립트(있는 경우)를 삭제하여 jmxtrans를 제거할 수 있습니다.

이 페이지가 도움이 되었나요? 평가를 부탁드립니다.

다음에 대한 의견 보내기...

Stackdriver Monitoring
도움이 필요하시나요? 지원 페이지를 방문하세요.