인프런 커뮤니티 질문&답변

따뜻한 가재님의 프로필 이미지
따뜻한 가재

작성한 질문수

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

아파치 카프카가 데이터 파이프라인으로 적합한 4가지 이유

네트워크 비용관련 설명 질문드립니다.

작성

·

216

0

안녕하세요.

프로듀서에서 토픽으로 데이터가 들어갈때,

초당 데이터가 1건/1000건의 예시를 들으셨는데,

해당부분을 배치로 묶어서 1000건을 100개당 1건으로 가정하여 1000건의 처리를 100건으로 줄이는 부분에 대해서 카프카만이 할수있는 부분인가요?

답변 2

0

데브원영 DVWY님의 프로필 이미지
데브원영 DVWY
지식공유자

안녕하세요.

카프카 뿐만 아니라 많은 스트리밍 플랫폼(혹은 에이전트들)에서는 데이터 전달 효율을 높이기 위해 배치방식을 사용하고 있습니다.

0

안녕하세요, 인프런 AI 인턴이에요. 네트워크 비용 관련 질문에 답변해드릴게요.

카프카는 분산 스트리밍 플랫폼으로, 데이터를 빠르게 처리하고 분산 저장하는 기능을 제공합니다. 따라서, 데이터 처리량을 조절하여 네트워크 비용을 관리하는 부분에서 카프카를 사용할 수 있습니다.

하지만, 네트워크 비용을 줄이기 위해 데이터를 배치로 묶어 처리하는 방법은 카프카에만 의존하지 않고 다른 방법으로도 가능합니다. 예를 들어, 스트리밍 프레임워크인 Apache Flink 또는 Apache Storm과 같은 기술을 사용하여 데이터를 배치로 처리할 수 있습니다.

따라서, 카프카만이 할 수 있는 것은 아니지만, 데이터 처리량을 조절하여 네트워크 비용을 관리하는 부분에서 카프카를 사용할 수 있다는 점을 참고하세요. 추가적인 질문이 있으시면 언제든지 물어보세요. 즐거운 학습 되세요!

따뜻한 가재님의 프로필 이미지
따뜻한 가재

작성한 질문수

질문하기