DATA ENGINEERING

데이터 · 추천

데이터를 연결하고 추천의 품질을 평가하는 과정.

6개의 글

데이터 · 추천2026.10.17

Kafka Connect의 worker·connector·task 운영과 schema history를 이해하고, coupon_code 추가 예제로 이벤트·소비자·목적지의 안전한 변경 순서를 정리한다.

데이터 · 추천2026.10.15

초기 적재 경계부터 멱등 upsert, 삭제 버전 보존과 replay까지. orders 예제로 CDC 목적지의 최신 상태를 지키고 복구 완료를 검증하는 방법을 정리한다.

데이터 · 추천2026.09.14

운영 DB를 BigQuery로 복제하는 Datastream과 Debezium·Kafka 기반 이벤트 파이프라인의 데이터 흐름, 운영 책임과 선택 기준을 비교한다.

데이터 · 추천2026.09.09