[Kafka] Managing Platform

Confluent Control Center

Confluent Platform/Cloud를 통한 추가 기능을 갖춘 올인원 솔루션

설치 : https://docs.confluent.io/platform/current/installation/index.html

가격
- Enterprise : 견적 요청 필요
- 30일 무료 평가판 제공

Broker 모니터링

Broker Overview

---

• Topic 관리

Add a topic

Topic Create

Topic 생성 완료

---

• Connector 생성

Add Connector

Converter 지정

Topic 선택

Option 설정

Launch Connector

 

Connector에 생성된 Topic 데이터 확인

 

---

Lenses (Landoop)

Confluent Control Center와 유사한 기능 제공. Control Center에 비해 관련 문서가 적음.

설치 : https://docs.lenses.io/4.0/installation/

가격
- Single developer : 월 49$
- Bigger teams/Enterprise : 견적 요청 필요
- 30일 무료 평가판 제공

Lenses Dashboard

---

KaDeck

Topic 내에서 메시지를 필터링하는데에 중점을 둔 Topic 관리 및 모니터링 전용 플랫폼. 경고 알림 설정 불가능.

설치 : https://support.xeotek.com/hc/en-us/categories/360002602420-Setup-Configuration

가격
- Single developer : 무료
- Bigger teams/Enterprise : 추가 라이선스당 월 15$

Cluster Overview

Burrow

카프카의 컨슈머 lag을 효과적으로 모니터링 할 수 있도록 만든 오픈소스 툴.
멀티카프카 클러스터도 burrow 1개에서 모니터링 가능. HTTP API 제공.

컨슈머 lag 이란?
운영 모니터링 지표 중 하나로, 프로듀서가 넣은 데이터의 오프셋과 컨슈머가 가져간 데이터의 오프셋의 차이

오픈소스 : https://github.com/linkedin/Burrow

 

---

출처

https://blog.voidmainvoid.net/243

https://pearlluck.tistory.com/299?category=965083 

https://cookiethecat2020.blogspot.com/2021/02/confluent-control-center-kafka-topic.html

https://www.novatec-gmbh.de/en/blog/comparison_of_kafka_monitoring_tools/