本文へスキップ
← ニュース一覧
Databricks Blog2026年11月9日

UCDatasetによるUnity CatalogテーブルからのGPUトレーニング高速化

英語原文から AI が翻訳しました。 英語版を見る

要約

現在ベータ版のUCDatasetは、Unity CatalogテーブルからGPUへデータを直接ストリーミングするネイティブデータローダーで、トレーニング時間を10倍に高速化し、コンピュートコストを削減します。標準的なPyTorchのトレーニングループに直接組み込むことができ、カスタムコードなしでマルチGPUのデータシャーディングを処理しつつ、自動ガバナンスを保証します。

* 現在ベータ版のネイティブデータローダーであるUCDatasetを使用して、Unity CatalogテーブルからGPUへデータを直接ストリーミングし、トレーニング時間を**10倍**高速化しコンピュートコストを削減 * UCDatasetは標準的なPyTorchのトレーニングループに直接統合され、カスタムコードを必要とせずにマルチGPUのデータシャーディングを自動処理 * Unity Catalogからトレーニングデータを直接読み取ることで、ガバナンスが確実に自動適用されるようにすることが可能

関連記事

News

欧州のデータ主権に対するDatabricksの取り組み

databricks-blog10h ago
News

Genie OneのSendosoギフトで購買シグナルをパイプラインに変換する

databricks-blog12h ago
News

コピーではなく参照へ:OpenSharingでファイルフィードを置き換える - パート2(実装編)

databricks-blog3d ago
News

コピーせず読む:ファイルフィードやAPIフィードをOpenSharingに置き換える - パート1(理由編)

databricks-blog3d ago