Como é a infraestrutura de dados aberta com o dbt Mesh
Traduzido do original em inglês por IA. Ver em inglês
Uma nova especificação catalogs.yml v2 desacopla a configuração Iceberg do dbt das integrações de catálogo específicas do Snowflake. Em uma demonstração ao vivo do dbt Mesh, três equipes no Snowflake e no Databricks compartilharam um único conjunto de tabelas Iceberg por meio do Horizon e do Unity Catalog, usando federação de catálogos, sem copiar dados. A sessão também apresentou o Managed Data Lake, que grava metadados Iceberg ou Delta no armazenamento em nuvem do próprio cliente usando o catálogo de código aberto Polaris, e o Lake Compute (beta privado), que direciona modelos individuais do dbt para o DuckDB enquanto o restante do projeto permanece no Snowflake.
Uma demonstração do dbt Mesh rodando em Apache Iceberg.
