Ingerindo a Via Láctea: escala de petabytes com o Zerobus Ingest
Traduzido do original em inglês por IA. Ver em inglês
O Zerobus Ingest, uma nova streaming API serverless, permite a implantação instantânea de data pipelines em escala de petabytes no Databricks, sem gerenciamento manual de infraestrutura. Sua arquitetura de particionamento dinâmico dimensiona a computação automaticamente e sustenta mais de 12 GB/s de vazão para uma única tabela, lidando com eficiência com volumes de dados imprevisíveis.
- O Databricks Zerobus Ingest é uma streaming API serverless que permite às equipes implantar instantaneamente data pipelines em escala de petabytes sem gerenciamento manual de infraestrutura. - A arquitetura do Zerobus conta com particionamento dinâmico para escalar recursos de computação automaticamente, lidando com eficiência com volumes de dados imprevisíveis, sem necessidade de ajustes complexos. - Essa estrutura de configuração zero processa cargas de trabalho massivas com facilidade, demonstrando a capacidade de sustentar mais de 12 GB/s de vazão em uma única tabela durante benchmarks de 24 horas.