kafka 를 띄우니 오류가 발생하고 종료합니다.

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

로컬에서 카프카 브로커 실행

작성

무엇을 살펴 봐야 하나요?

[2024-12-12 23:29:35,030] ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer)

kafka.common.InconsistentClusterIdException: The Cluster ID CwTLqMY7QRKRU5AggS5Agw doesn't match stored clusterId Some(NfwQFiB2RUSszayrQc61NA) in meta.properties. The broker is trying to join the wrong cluster. Configured zookeeper.connect may be wrong.

at kafka.server.KafkaServer.startup(KafkaServer.scala:223)

at kafka.server.KafkaServerStartable.startup(KafkaServerStartable.scala:44)

at kafka.Kafka$.main(Kafka.scala:82)

at kafka.Kafka.main(Kafka.scala)

kafka 데이터-엔지니어링

답변 3

moonseok.shin

질문자

data 내 파일들을 삭제하고 재시작 하니 되네요. 감사합니다.

데브원영 DVWY

지식공유자

안녕하세요~ 보내주신 로그를 보니 주키퍼와 설정이 잘못되었거나 버전이 맞지 않는 것으로 보입니다.

현재 다운로드, 실행한 카프카가 2.5.0이 맞는지 확인 부탁드립니다.
주키퍼가 정상적으로 실행중인지 확인 부탁드립니다.

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다.

moonseok.shin님께서 겪고 계신 InconsistentClusterIdException 오류는 Kafka 클러스터의 ID가 서로 일치하지 않아서 발생하는 문제입니다. 이는 Kafka 브로커가 잘못된 클러스터에 연결되어 있다고 인식할 때 나타납니다. 다음은 이 문제를 해결하기 위한 몇 가지 단계입니다:

meta.properties 파일 확인 및 삭제:
- 해당 오류 메시지에 언급된 meta.properties 파일에서 저장된 클러스터 ID가 현재 사용 중인 클러스터 ID와 일치하지 않습니다. 이 파일은 일반적으로 Kafka의 데이터 디렉토리에 저장됩니다.
- meta.properties 파일을 삭제하고 Kafka 브로커를 다시 시작하여 새로운 클러스터 ID로 초기화하도록 할 수 있습니다. 하지만 이 작업은 데이터 손실을 초래할 수 있으므로 주의가 필요합니다.
zookeeper.connect 설정 확인:
- 설정 파일의 zookeeper.connect 항목을 확인하여 올바른 ZooKeeper 서버 주소가 설정되어 있는지 확인하세요. 잘못된 ZooKeeper 설정은 클러스터 ID 불일치를 유발할 수 있습니다.
Kafka 프로세스 정리:
- 백그라운드에서 실행 중인 이전 Kafka 프로세스가 있다면, 이를 완전히 종료한 후 다시 시작해 보세요.

이와 관련한 유사한 질문과 답변은 아래에서 확인하실 수 있습니다:
- 카프카 클러스터 ID 충돌 이슈가 있습니다.

이 글을 참조하여 문제를 해결하시길 바랍니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

인프런 커뮤니티 질문&답변

kafka 를 띄우니 오류가 발생하고 종료합니다.