Databricks reformula entrega de configuração de rede para dezenas de milhões de VMs serverless
Traduzido do original em inglês por IA. Ver em inglês
A Databricks reconstruiu a entrega de configuração de rede serverless em torno de um pipeline orientado a eventos, substituindo chamadas upstream síncronas por um pré-cálculo em segundo plano servido a partir de um snapshot store, o que removeu a agregação cara multi-serviço do caminho de inicialização do cluster. Numa escala de bilhões de requisições por dia, a mudança reduziu a latência p99 de RPC em 98,5% (de 5.000 ms para 75 ms), elevou a disponibilidade para 99,99% e reduziu o volume de chamadas upstream em 86%.
* Pré-cálculo orientado a eventos: a Databricks rearquitetou a entrega de configuração de rede serverless, substituindo chamadas upstream síncronas por um pipeline orientado a eventos que pré-calcula as configurações em segundo plano e as serve a partir de um snapshot store. * Caminho crítico desacoplado: ao tirar a agregação cara multi-serviço do caminho de inicialização do cluster, uma cadeia de dependências frágil se tornou uma única leitura de armazenamento rápida. * Comprovado em escala: em bilhões de requisições por dia, isso reduziu a latência p99 de RPC em 98,5% (5.000 ms → 75 ms), elevou a disponibilidade para 99,99% e reduziu o volume de chamadas upstream em 86%.