← 전체 뉴스
Databricks Blog2026년 8월 11일
AUTO CDC를 한 단계 끌어올리다: 가장 까다로운 실전 사용 사례 해결
영어 원문을 AI가 번역했습니다. 영어로 보기
요약
Spark Declarative Pipelines는 이제 Bitemporal AUTO CDC와 Partial Updates를 지원하여, 손으로 작성한 MERGE 로직을 선언적 방식으로 대체함으로써 비즈니스 시간과 시스템 시간을 독립적으로 안전하게 추적하면서
* AUTO CDC는 변경 데이터 캡처(CDC)를 위해 손으로 작성하던 MERGE 로직을 선언적 파이프라인으로 대체합니다 * Spark Declarative Pipelines는 이제 비즈니스 시간과 시스템 시간을 독립적으로 추적하는 Bitemporal AUTO CDC와, 누락된 필드를 안전하게 처리하는 Partial Updates를 지원합니다 * AUTO CDC 기능은 오픈소스 Apache Spark 4.2로도 확장되어, 도착 순서가 뒤바뀐 데이터도 처리하는 표준화된 변경 데이터 캡처 기능을 더 넓은 생태계에 제공합니다