Kafka에 설정값이 엄청 많은데요

인프런 커뮤니티 질문&답변

카프카 완벽 가이드 - 코어편

Producer의 max.in.flight.requests.per.connection 파라미터와 배치 메시지의 전송순서 이해

해결된 질문

작성

315

수정됨

이직하는 회사가 Kafka 기반으로 MSA간 통신을 해서

max.in.flight.~ 강의까지 열심히 듣는 중입니다 ㅎㅎ

보다보니까 설정할 수 있는 영역이 엄청 많은데요~

보통 실무에서 로드테스트 등을 통해서 서비스에 적합한 값을 찾아가나요?

어느정도 경험이 없다면 최적의 설정값을 찾기가 어려울 것 같아서요 ㅎㅎ

답변 1

지식공유자

안녕하십니까,

네, 맞습니다. 오픈 전에 성능 테스트등으로 최적 설정값을 맞추는게 일반적인 과정입니다.

실시간 메시지 처리가 매우 Heavy하게 들어오는 경우는 미리 성능 테스트를 해서 설정값등을 최적화 하는데, 보통은 Consumer 관련해서 설정값을 변경하는 경우가 많습니다. 말씀하신대로 어느정도 경험적인 부분도 도움이 됩니다(기존에 비슷한 설정등을 참조)

다만 Kafka는 성능이 기본적으로 뛰어나기 때문에 Default 설정값만 놓고도 업무에서 요청하는 성능 요건을 만족하는 경우가 많기 때문에 필수적으로 설정값 튜닝이 필요하지 않을 수 있습니다.

감사합니다.

작성한 질문수