인프런 커뮤니티 질문&답변

작성한 질문수

카프카 완벽 가이드 - 코어편

kafka-topics 명령어를 이용하여 Topic 생성 및 정보 확인하기

멀티 브로커에서 브로커 중지되는 문제

작성

·

434

·

수정됨

0

안녕하세요 강사님, 유익한 강의 감사드립니다.

멀티 노드 카프카 클러스터 부분을 EC2(t2.micro) 인스턴스에서 실습중에 문제가 생겨 질문드립니다.

1. 주키퍼 기동
2. 브로커1 기동
3. 브로커2 기동
4. 브로커3 기동
순서로 실행중에 브로커3을 기동하면 브로커 1이 중지되는 현상입니다.
다시 브로커1을 기동하면 브로커2가 중지되는걸 보면 브로커 3대가 함께 실행되지 않는것 같습니다.

바쁘시겠지만 도움 주시면 정말 감사드리겠습니다!

kafka 데이터-엔지니어링 Kafka 데이터 엔지니어링

답변 1

0

지식공유자

안녕하십니까,

올려주신 오류 메시지만 봐서는 뭐가 문제인지 분명하지 않군요.

먼저,

강의 실습 환경인 VM에서는 별 문제없이 잘 수행이 되는 건지요? AWS EC2에서만 문제 인것인지요?
강의 실습 환경인 VM에서 아예 실습을 하지 않고, 강의 처음부터 EC2에서 부터 실습을 수행하신 건지요?

일단 2번으로 간주하고, 앞에 말씀드린 대로 올려주신 짤막한 오류 메시지로는 뭐가 문제 인지 판단하기 어렵지만,

먼저 Killed가 맨 마지막에 나오는 메시지로 봐서는 전형적으로 os 상에서 kafka broker를 kill 명령어로 죽이는것 같습니다. 어떤 프로세스 그런건지는 잘 모르겠지만 EC2에서 모니터링 프로그램이나 어떤 유틸리티가 Kafka broker를 죽이는건 아닌지 확인 부탁드립니다.

두번째로 kafka version이 2.5.0으로 메시지 상에서 출력이 됩니다. 강의의 실습 환경은 kafka 3.x 입니다. 강의 실습 버전대로 Kafka가 설치되었는지 확인 부탁드립니다.

마지막으로 가급적이면 강의 실습환경인 VM에서 먼저 실습을 진행하신 후에 어느정도 익숙해 지시면 다른 환경에서 실습을 진행해보는 것을 권장드립니다. 그래야만 문제가 Kafka인지 아님 다른 환경이 문제인지 좀 더 파악하기 쉬울 것 같습니다.

감사합니다.

작성한 질문수