← 전체 뉴스
Databricks Blog2026년 11월 9일
UCDataset을 통한 Unity Catalog 테이블에서의 GPU 학습 가속화
영어 원문을 AI가 번역했습니다. 영어로 보기
요약
현재 베타 버전인 UCDataset은 Unity Catalog 테이블에서 GPU로 데이터를 직접 스트리밍하여 학습 시간을 10배 단축하고 컴퓨팅 비용을 절감해 주는 네이티브 데이터 로더입니다. 표준 PyTorch 학습 루프에 직접 연동되어 커스텀 코드 없이 멀티 GPU 데이터 샤딩을 처리하는 동시에 자동 거버넌스를 보장합니다.
* 현재 베타 버전인 네이티브 데이터 로더 UCDataset을 사용하여 Unity Catalog 테이블에서 GPU로 데이터를 직접 스트리밍함으로써 학습 시간을 **10배** 단축하고 컴퓨팅 비용 절감 * UCDataset은 표준 PyTorch 학습 루프에 직접 통합되며, 커스텀 코드 없이 멀티 GPU 데이터 샤딩을 자동으로 처리 * Unity Catalog에서 학습 데이터를 직접 읽어와 거버넌스가 자동으로 적용되도록 보장 가능