Saturday, November 21, 2026
As ferramentas de desenvolvimento de pipelines e as atualizações do Databricks Asset Bundles lideraram o período, acompanhadas por discussões sobre o compartilhamento multiplataforma do Unity Catalog. A atividade no ecossistema mais amplo também se concentrou em interfaces agênticas e ferramentas de texto para SQL em linguagem natural.
1.Databricks Asset Bundles e Pipelines Declarativos recebem atualizações de ferramentas e framework de qualidade
A Databricks lançou a extensão do VS Code v2.24.0, que adiciona o modo de isolamento de catálogo, testes de pipeline e flags de atualização de várias tabelas para Databricks Asset Bundles [18]. Simultaneamente, projetos do Databricks Labs abordaram a governança de pipelines com o framework de qualidade de dados PySpark dqx [12] e o sdp-meta para Spark Declarative Pipelines orientados a metadados [15], enquanto dúvidas da comunidade focaram em como lidar com a evolução de esquema nas camadas silver do Delta Live Tables [7].
2.Frameworks de BI agêntico e interfaces em linguagem natural têm como alvo a análise governada
Ferramentas em torno de consultas em linguagem natural e análises agênticas movimentaram discussões na comunidade e projetos open source. Uma publicação da comunidade explorou a integração de visualizações do Databricks Genie em fluxos de trabalho do Copilot [17], enquanto os projetos open source WrenAI [21] e nao [11] publicaram atualizações em camadas de contexto e interfaces para fluxos de trabalho de agentes de texto para SQL.
3.Arquiteturas multi-cloud e federação externa em torno do Unity Catalog
A Databricks anunciou arquiteturas de referência interativas em 70 setores para mapear sistemas de origem específicos de nuvem e a disponibilidade regional de produtos [16]. Em paralelo, tópicos da comunidade focaram em fronteiras de dados multiplataforma, especificamente consultando tabelas do Unity Catalog diretamente a partir do Snowflake [22] e implementando padrões de compartilhamento multi-cloud via OpenSharing SecureConnect [20].
Fontes
- Interactive Databricks Reference Architectures Across 70 IndustriesNews · databricks-blog · Nov 20
- Recording | BrickTalk: Multi-Cloud Data Sharing with OpenSharing SecureConnect & Global DistributionCommunity · databricks-community · Nov 20
- Reading Unity Catalog Tables in SnowflakeCommunity · databricks-community · Nov 20