The order arrived twice, and once it vanished

우분투 VM 의 Kafka 4.3 KRaft 단일 노드에서 로그·파티션·오프셋·컨슈머 그룹을 손으로 만져 본 뒤, 프로듀서 재시도가 같은 레코드를 세 벌 남기는 것과 멱등 프로듀서가 한 벌로 만드는 것을 kafka-dump-log 로 확인합니다. 컨슈머의 커밋 시점이 만드는 유실과 되감기가 만드는 중복을 재현하고 멱등 처리기로 막으며, 보존·압축·min.insync.replicas 가 무엇을 남기고 버리는지 봅니다. 큐와 비동기 API 를 다뤄 본 분을 위한 과정입니다.

중급 · 레슨 12 · 실습 4

실습 시작하기

커리큘럼

참고 문서

• Apache Kafka — 문서 홈
• Kafka 4.3 — 설계(전달 의미론 · 컨슈머 위치 · 로그 압축)
• Kafka 4.3 — 프로듀서 설정(acks · enable.idempotence · retries)
• Kafka 4.3 — 컨슈머 설정(enable.auto.commit · auto.offset.reset)
• Kafka 4.3 — 토픽 설정(cleanup.policy · retention.ms · min.insync.replicas)
• Kafka 4.3 — 기본 운영(토픽 변경 · 컨슈머 그룹 · 오프셋 되감기)