태그: #debezium
GPU·LLM·MLOps·쿠버네티스, 그리고 마음가짐에 관한 글 · 6 편
무중단 데이터 마이그레이션 — Dual-Write, Backfill, CDC로 옮기기
서비스를 멈추지 않고 데이터를 새 저장소로 옮기는 일은 일관성과 순서 보장 때문에 까다롭습니다. Dual-Write, Backfill, CDC를 조합한 단계별 컷오버 전략과 검증, 롤백, 멱등성 설계를 실무 관점에서 정리합니다.
2026-06-16 · 32 분 읽기 #database#migration#cdc#debezium#dual-writeCDC & 데이터 통합 2026 완벽 가이드 — Debezium 3 · Estuary · Flink CDC · Airbyte · Fivetran · Sling · Hightouch · Census · Sequin 심층 분석
2026년 CDC와 데이터 통합 전체 지형을 한 번에 정리한다. Debezium 3.0이 Kafka Connect 의존을 줄였고, Estuary Flow는 매니지드 CDC SaaS로 초당 백만행을 받아낸다. Flink CDC 3.x는 ELT 파이프라인 자체가 되었고, Airbyte는 350+ 커넥터로 오픈소스 표준이 되었으며, Fivetran은 비싸지만 끝없이 잘 팔린다. Sling CLI는
2026-05-16 · 33 분 읽기 #cdc#change-data-capture#debezium#estuary#flink-cdc메시지 큐와 이벤트 스트리밍 완전 비교 — Kafka, RabbitMQ, NATS, Pulsar, SQS, Redis Streams, CDC, Schema Registry 심층 가이드 (2025)
메시지 큐와 이벤트 스트림의 근본 차이, Kafka 내부(파티션/세그먼트/ISR/KRaft), RabbitMQ의 유연한 라우팅, NATS JetStream의 가벼움, Pulsar의 지오리플리케이션, SQS/SNS/Kinesis/EventBridge 비교, Redis Streams의 실무, CDC(Debezium)의 실전, Avro/Protobuf 스키마 진화, Event-Driven의 함정까
2026-04-15 · 21 분 읽기 #kafka#rabbitmq#nats#pulsar#sqsKafka와 Event-Driven Architecture 완전 해부 — Partition/ISR, Exactly-Once, Outbox, Schema Registry, Flink까지
Kafka를 쓰는 곳은 많지만 내부를 아는 사람은 드물다. 파티션과 Leader/ISR, Log Segment의 물리적 구조, Exactly-Once Semantics의 진실, Transactional Outbox, Event Sourcing vs CDC, Schema Registry, 100ms SLA 달성법까지.
2026-04-15 · 23 분 읽기 #kafka#event-driven#streaming#exactly-once#schema-registryCDC (Change Data Capture) 완전 가이드 2025: Debezium, Kafka, 데이터 동기화, Outbox 패턴
CDC의 모든 것! 동작 원리(WAL/binlog 기반), Debezium 아키텍처, PostgreSQL Logical Replication, MySQL binlog, Outbox 패턴, 데이터 웨어하우스 동기화, Kafka 통합, 마이그레이션, 흔한 함정.
2026-04-15 · 17 분 읽기 #cdc#debezium#kafka#postgresql#mysqlOutbox 패턴과 CDC로 구현하는 마이크로서비스 데이터 동기화: Debezium 실전 가이드
Outbox 패턴과 CDC(Change Data Capture)를 활용한 마이크로서비스 데이터 동기화 종합 가이드. Dual Write 문제 분석, Outbox 테이블 설계, Debezium 커넥터 구성, Kafka Connect 파이프라인, 이벤트 순서 보장, 멱등성 처리, 장애 복구까지 실전 중심으로 다룹니다.
2026-03-09 · 29 분 읽기 #architecture#outbox-pattern#cdc#debezium#microservices