Apresentando o Apache Spark 4.2
Traduzido do original em inglês por IA. Ver em inglês
O Apache Spark 4.2 introduz definições de negócios governadas por meio de exibições de métricas, recursos de análise nativos de IA, como busca vetorial, e processamento de dados em tempo real simplificado através de Auto CDC e Real-Time Mode. Esta versão também expande a acessibilidade do Spark a partir de serviços externos e agentes agênticos de IA, aproveitando o Spark Connect, execução Python focada em Arrow e Python Data Sources.
* Defina um contexto confiável para análise e IA: as exibições de métricas criam definições de negócios governadas, enquanto a busca vetorial, tipos geoespaciais e primitivas SQL mais ricas trazem análises nativas de IA para o Spark. * Alcance o Spark a partir de mais aplicações: Spark Connect, execução Python focada em Arrow, compatibilidade aprimorada do PySpark e Python Data Sources tornam o Spark mais fácil de usar a partir de serviços, ferramentas e agentes agênticos de IA. * Mantenha os dados atualizados e prontos para produção: Auto CDC, Data Source V2, consultas CHANGES, Real-Time Mode e melhorias na plataforma simplificam o processamento confiável de dados em constante mudança.