À quoi ressemble une infrastructure de données ouverte avec dbt Mesh
Traduit de l'original anglais par IA. Voir en anglais
Une nouvelle spécification catalogs.yml v2 découple la configuration Iceberg de dbt des intégrations de catalogue propres à Snowflake. Lors d'une démo en direct de dbt Mesh, trois équipes réparties sur Snowflake et Databricks ont partagé un même jeu de tables Iceberg via Horizon et Unity Catalog grâce à la fédération de catalogues, sans aucune copie de données. La session a également présenté Managed Data Lake, qui écrit les métadonnées Iceberg ou Delta dans le stockage cloud du client à l'aide du catalogue open source Polaris, et Lake Compute (bêta privée), qui oriente certains modèles dbt vers DuckDB tandis que le reste du projet reste sur Snowflake.
Une démo de dbt Mesh fonctionnant sur Apache Iceberg.
