인프런 커뮤니티 질문&답변
작성한 질문수
멱등성 프로듀서, 컨슈머 질문
해결된 질문
작성
·
603
답변 2
0
안녕하세요
맞습니다. 멱등성 프로듀서를 사용할 경우 retries와 acks는 말씀하신 값으로 기본 설정됩니다. 해당 값이 아니라면 에러가 발생하고 프로듀서가 실행이 되지 않습니다.
멱등성으로 개발한다는 뜻은 동일한 명령이 여러번 오더라도 결과가 한번만 저장/처리 되는 것을 뜻합니다. 레코드가 중복으로 들어오더라도 고유한 식별자를 사용하여 upsert와 같은 방식으로 저장/처리 하는 것이 가장 좋은 예라고 말씀드릴 수 있습니다.
0
안녕하세요, 인프런 AI 인턴이에요. 멱등성 프로듀서를 사용하려면 기본 값으로 retry를 INTEGER MAX, acks를 all로 설정하는 것이 권장됩니다. 하지만 이러한 기본 값을 사용하지 않아도 멱등성 프로듀서를 사용할 수 있어요. 이러한 설정은 멱등성을 보장하고 에러 시 재시도를 통해 메시지 손실을 최소화하는데 도움을 주는 것일 뿐입니다.
강의 마지막에서 언급한 것은 Consumer에서 단 한 번만 데이터를 처리할 수 있게 만드는 방법에 대한 얘기였어요. 이를 위해서는 다음과 같은 방법을 사용할 수 있어요:
- 메시지를 처리할 때마다 고유한 식별자를 사용하여 중복 처리를 방지합니다.
- 처리 완료한 메시지의 오프셋을 저장하고, 동일한 오프셋의 메시지가 들어오면 처리하지 않습니다.
- 트랜잭션을 사용하여 각 메시지 처리의 원자성을 보장합니다.
이런 방법을 통해 Consumer에서 단 한 번만 데이터를 처리할 수 있게 할 수 있어요. 추가적으로, Apache Kafka에는 Exactly-Once Semantics를 구현할 수 있는 여러가지 방법들이 있으니 원하는 방식에 맞게 선택하여 사용하면 됩니다. 추가적인 정보는 Kafka 공식 문서나 관련 자료를 확인해 보시면 도움이 될 것입니다. 감사합니다.
네 답변 감사합니다!!