Présentation d'Apache Spark 4.2
Traduit de l'original anglais par IA. Voir en anglais
Apache Spark 4.2 introduit des définitions métier gouvernées via des vues de métriques, des fonctionnalités d'analyse natives de l'IA comme la recherche vectorielle, et une simplification du traitement des données en temps réel grâce à Auto CDC et au Real-Time Mode. Cette version élargit également l'accessibilité de Spark depuis des services externes et des agents d'IA en s'appuyant sur Spark Connect, l'exécution Python orientée Arrow et les Python Data Sources.
* Définir un contexte de confiance pour l'analyse et l'IA : les vues de métriques créent des définitions métier gouvernées, tandis que la recherche vectorielle, les types géospatiaux et des primitives SQL plus riches apportent des analyses natives de l'IA dans Spark. * Accéder à Spark depuis plus d'applications : Spark Connect, l'exécution Python orientée Arrow, une meilleure compatibilité PySpark et les Python Data Sources facilitent l'utilisation de Spark depuis les services, les outils et les agents d'IA. * Maintenir les données fraîches et prêtes pour la production : Auto CDC, Data Source V2, les requêtes CHANGES, le Real-Time Mode et les améliorations de la plateforme simplifient le traitement fiable des données en constante évolution.