← ニュース一覧
Databricks Blog2026年10月29日
Databricks の Spark Declarative Pipelines で Real-Time Mode が GA に
英語原文から AI が翻訳しました。 英語版を見る
要約
Spark Declarative Pipelines で Real-Time Mode が GA となり、運用系ストリーミングワークロードでミリ秒単位のエンドツーエンド処理レイテンシを実現します。バッチ、ETL、低レイテンシのストリーミングを 1 つのフレームワークに統合することで、Apache Flink のような別のエンジンが不要になります。また、ForEach シンクにより運用ストアへ即座に書き込めるため、不正検知やリアルタイムのパーソナライゼーションといったユースケースに対応できます。
- Spark Declarative Pipelines (SDP) の Real-Time Mode (RTM) が GA となり、運用系ストリーミングワークロードでミリ秒単位のエンドツーエンド処理レイテンシを実現します。 - Real-Time Mode は、バッチ、ETL、低レイテンシのストリーミングを単一のフレームワークに統合し、Apache Flink のような専用の別エンジンを不要にします。 - Real-Time Mode は、リアルタイムの計算と、ForEach シンクを介した運用ストアへの即時書き込みを可能にし、不正検知やライブのパーソナライゼーションなど、時間的制約の厳しいユースケースを支えます。