Saturday, November 21, 2026
파이프라인 개발 툴링과 Databricks Asset Bundles 업데이트가 플랫폼 간 Unity Catalog 공유 논의와 함께 이 기간을 주도했습니다. 더 넓은 생태계 전반의 활동 또한 agnetic 인터페이스와 자연어 text-to-SQL 툴링에 집중되었습니다.
1.Databricks Asset Bundles 및 선언형 파이프라인에 툴링 및 품질 프레임워크 업데이트 적용
Databricks는 Databricks Asset Bundles를 위한 카탈로그 격리 모드, 파이프라인 테스트, 다중 테이블 새로 고침 플래그를 추가하는 VS Code 확장 프로그램 v2.24.0을 출시했습니다 [18]. 동시에 Databricks Labs 프로젝트들은 dqx PySpark 데이터 품질 프레임워크 [12] 및 메타데이터 기반 Spark 선언형 파이프라인을 위한 sdp-meta [15]를 통해 파이프라인 거버넌스를 다루었으며, 커뮤니티 질문들은 Delta Live Tables 실버 레이어에서의 스키마 변경 처리 방식에 집중되었습니다 [7].
2.에이전틱 BI 프레임워크 및 자연어 인터페이스가 거버넌스 적용된 분석을 겨냥
자연어 쿼리 및 에이전틱 분석 관련 툴링이 커뮤니티 토론과 오픈소스 프로젝트 전반에서 활발히 다뤄졌습니다. 한 커뮤니티 게시물은 Databricks Genie 시각화를 Copilot 워크플로에 연동하는 방안을 탐색했으며 [17], 오픈소스 프로젝트인 WrenAI [21]와 nao [11]는 text-to-SQL 에이전트 워크플로를 위한 컨텍스트 레이어와 인터페이스 업데이트를 발표했습니다.
3.Unity Catalog를 둘러싼 멀티클라우드 아키텍처 및 외부 페더레이션
Databricks는 클라우드별 소스 시스템과 지역별 제품 가용성을 매핑하기 위해 70개 산업에 걸친 대화형 참조 아키텍처를 발표했습니다 [16]. 이와 함께 커뮤니티 주제들은 플랫폼 간 데이터 경계, 특히 Snowflake에서 직접 Unity Catalog 테이블을 쿼리하는 것 [22]과 OpenSharing SecureConnect를 통한 멀티클라우드 공유 패턴 구현 [20]에 초점을 맞추었습니다.
출처
- Interactive Databricks Reference Architectures Across 70 IndustriesNews · databricks-blog · Nov 20
- Recording | BrickTalk: Multi-Cloud Data Sharing with OpenSharing SecureConnect & Global DistributionCommunity · databricks-community · Nov 20
- Reading Unity Catalog Tables in SnowflakeCommunity · databricks-community · Nov 20