Confluent Platform 6.0.1 Local PC 세팅

docker-compose 를 사용해 confluent platform 6.0.1 을 local pc 에 세팅합니다.

git : https://github.com/gwagdalf/kafka-docker-study/blob/main/docker/docker-compose.yml

 

component	external port	internal port	url
zookeeper	2181
kafka	9092	19092
control-center	9021		http://localhost:9021/
kafkadrop3	9000		http://localhost:9000/
zipkin	9411		http://localhost:9411/zipkin/
schema-registry	9081		http://localhost:9081
ksqldb	8088		http://localhost:8088/info
connect	8083

 

 

Referecne

confluent admin training 

git docker : https://github.com/confluentinc/training-administration-src/blob/master/docker-compose.yml

 

kafkadrop3

git : github.com/obsidiandynamics/kafdrop

 

docker : hub.docker.com/r/kafkatrade/kafkadrop

 

 

주의사항

connect 의

• log level : info -> warn 변경
• interceptor 등 각종 저장 옵션 주석처리

조정안하고 최초 세팅값을 쓰면, partition 을 200개가 넘게 만들면서 엄청 disk 사용해서 컴퓨터가 멈춥니다.

https://github.com/gwagdalf/kafka-docker-study/blob/main/docker/docker-compose.yml#L134

KafkaDrop 으로 connect 가 만드는 토픽과 파티션 모니터링 결과

 

docker 명령어

#시작

docker-compose up -d

 

#종료

docker-compose down -v

 

#상태확인
docker-compose ps

 

#로그확인
#kafka
docker container logs kafka --tail 1000

#kafkadrop 
docker container logs kafkadrop --follow

 

#container 안으로 들어가기 
docker exec -i -t kafka /bin/bash

 

 

추가 작업필요

아직 control-center 랑 ksqldb / connect 연결을 못 시켰네요.

• (to do) ksqldb ↔ control-center 연결하기
• (to do) connect ↔ control-center 연결하기

 

세팅 후 screenshot

kafkadrop3

 

Confluent Control Center 6.0.1

Confluent Control Center 6.0.1

Confluent Control Center - consumer monitoring