Einführung von Apache Spark 4.2
Von KI aus dem englischen Original übersetzt. Auf Englisch ansehen
Apache Spark 4.2 führt gesteuerte Business-Definitionen über Metrik-Views, KI-native Analysefunktionen wie Vektorsuche und eine vereinfachte Echtzeit-Datenverarbeitung durch Auto CDC und Real-Time Mode ein. Dieses Release erweitert zudem die Erreichbarkeit von Spark aus externen Diensten und KI-Agenten durch die Nutzung von Spark Connect, Arrow-first Python-Ausführung und Python Data Sources.
* Vertrauenswürdigen Kontext für Analysen und KI definieren: Metrik-Views erstellen gesteuerte Business-Definitionen, während Vektorsuche, geospatiale Typen und reichhaltigere SQL-Primitive KI-native Analysen in Spark integrieren. * Spark aus mehr Anwendungen erreichen: Spark Connect, Arrow-first Python-Ausführung, verbesserte PySpark-Kompatibilität und Python Data Sources erleichtern die Nutzung von Spark aus Diensten, Tools und KI-Agenten. * Daten aktuell und produktionsbereit halten: Auto CDC, Data Source V2, CHANGES-Abfragen, Real-Time Mode und Plattformverbesserungen vereinfachen die zuverlässige Verarbeitung von sich kontinuierlich ändernden Daten.