サーバーレス GPU 環境バージョン 5 (プレビュー)

Important

この機能は パブリック プレビュー段階です

このページでは、サーバーレス GPU 環境バージョン 5 のシステム環境情報の概要を示します。 このコンピューティング オファリングは、最新の AI およびディープ ラーニング ワークロード向けに設計された AI ランタイムの一部です。

サーバーレス GPU 環境 5 は、サーバーレス環境 5 (CPU) の上に構築されています。 サーバーレス環境 5 (CPU) の新機能をご覧ください。 これには、次の環境が含まれます。

アプリケーションの互換性を確保するために、サーバーレス GPU ワークロードでは、環境バージョンと呼ばれるバージョン管理された API が使用されます。これは、新しいサーバー バージョンとの互換性を維持します。

サーバーレス ノートブックの 環境サイド パネル を使用して、この環境バージョンを含む基本環境を選択できます。 対話型 (ノートブック) を参照してください。

新機能と機能強化

バージョン 5 では、Databricks は、サーバーレス GPU API、Databricks 依存関係、および MLflow のみをサポートする最小限の環境を提供しています。 ユーザーは、ニーズに合わせて環境をカスタマイズできます。 バージョン 5 の既定の基本環境には、最小限の機能 GPU 環境を提供するために、CPU 環境に存在する特定のパッケージは含まれません。 包括的な AI ライブラリを備えた完全な環境を望むユーザーは、Databricks AI 環境を使用する必要があります。

API の更新

2026 年 4 月 24 日

サーバーレス GPU Python API が 0.5.16 にアップグレードされました

サーバーレス GPU Python API 0.5.16 には、次の API 更新プログラムが含まれています。

  • 新機能:
    • Unity Catalog の FUSE マウント ボリュームからファイルをストリーミングする Torch UCVolumeDatasetIterableDataset を追加しました。 ファイル リストは、分散ランクと DataLoader ワーカー間で自動的にパーティション分割されるため、各 (rank, worker) ペアは重複しないスライスを受け取ります。
    • サーバーレス GPU API では、単一 H100 ワークロードに対して 1xH100 アクセラレータの種類がサポートされるようになりました。
    • ローカル実行中の PySpark と Py4J からのログ ノイズの削減。 ログ ディレクトリ メッセージは、出力されるのではなく、デバッグ レベルでログに記録されるようになりました。

2026 年 4 月 14 日

サーバーレス GPU Python API が 0.5.15 にアップグレードされました

サーバーレス GPU Python API 0.5.15 には、次の API 更新プログラムが含まれています。

  • 新機能:
    • ローカル のサーバーレス GPU API 実行の MLflow にログ伝達を追加しました。 ローカル実行のトレーニング ログが MLflow に自動的にアップロードされるようになりました。
  • バグ修正:
    • PyTorch がインストールされていない場合、Standard v5 基本環境に Torch が含まれていないことを示すエラー メッセージが正しく表示されるようになりました。
  • セキュリティ:
    • 新しく公開された悪意のあるパッケージ バージョンからのサプライ チェーン攻撃を防ぐために、すべてのPython依存関係バージョンを正確なバージョンに固定しました。

2026 年 3 月 17 日

サーバーレス GPU Python API が 0.5.14 にアップグレードされました

サーバーレス GPU Python API 0.5.14 には、次の API 更新プログラムが含まれています。

  • バグ修正:
    • MAPI を使用できないコントロール プレーンでサーバーレス GPU API が失敗する問題を修正しました。 MAPI に到達できない場合、API はオンデマンド コンピューティングに正常にフォールバックするようになりました。

2026 年 3 月 2 日

サーバーレス GPU Python API が 0.5.13 にアップグレードされました

サーバーレス GPU Python API 0.5.13 には、次の API 更新プログラムが含まれています。

  • バグ修正:
    • ローカル モードAzure A10 GPU デバイス名の解析を修正しました。 この API は、"A10-24Q" などのAzure固有の形式を処理するようになりました。
    • ローカル実行の完了後に MLflow のアクティブな実行が閉じられなかった問題を修正しました。
    • MLflow ログ ストリーミングと MLflow 3.x の互換性を修正しました。 MLflow 3.x での成果物ダウンロード パスの動作の変更により、ログ ストリーミングが中断されました。 MLflow 2.x と 3.x の両方でログ ストリーミングが正しく機能するようになりました。
    • トレーニングの実行が停止する問題を修正しました。 以前のバージョンで導入されたクロスランク MLflow 状態同期機能が元に戻されました。

基本環境に含まれていないパッケージ

次のパッケージは基本環境には含まれていませんが、CPU 環境では引き続き使用できます。

  • scipy
  • seaborn
  • scikit-learn

PyTorch のバージョン管理の制御を要求するお客様のフィードバックに基づいて、 torch はバージョン 5 の基本環境には含まれません。 これにより、ワークロードに最適なバージョンをインストールできます。 Databricks でテストされたバージョンを使用するには、ノートブック セルで%pip install torch==2.9.0を実行するか、[torch==2.9.0] サイド パネルの [依存関係] セクションを使用してをインストールします。

システム環境

  • オペレーティング システム: Ubuntu 24.04.2 LTS
  • Python: 3.12.3
  • Databricks Connect: 18.0.0
  • NVIDIA CUDA Toolkit: 12.9

インストールされている Python ライブラリ

既定の基本環境

ローカルの Python 仮想環境でサーバーレス GPU 環境 5 を再現するには、 requirements-env-gpu-5.txt ファイルをダウンロードし、 pip install -r requirements-env-gpu-5.txt実行します。 このコマンドは、サーバーレス環境 5 のすべてのオープン ソース ライブラリをインストールします。

図書館 バージョン 図書館 バージョン 図書館 バージョン
aiohappyeyeballs 2.4.4 aiohttp 3.11.10 アイオシグナル 1.2.0
注釈付き文書 0.0.4 注釈付き型 0.7.0 anyio 4.7.0
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 arro3-core 0.6.5
矢印 1.3.0 アストトークン 3.0.0 astunparse 1.6.3
async-lru 2.0.4 属性 24.3.0 Azure共通 1.1.28
azure-core (アジュール コア) 1.37.0 azure-identity (アズール・アイデンティティ) 1.20.0 azure-mgmt-core 1.6.0
azure-mgmt-web 8.0.0 アジュール・ストレージ・ブロブ 12.28.0 azure-storage-file-datalake(アジュールストレージファイルデータレイク) 12.22.0
バベル 2.16.0 beautifulsoup4 4.12.3 黒い 24.10.0
漂白剤 6.2.0 ウインカー 1.7.0 boto3 1.40.45
botocore 1.40.45 キャッシュツールズ (cachetools) 5.5.1 サーティフィ 2025.4.26
cffi (CコードをPythonで呼び出すためのライブラリ) 1.17.1 チャーデット 4.0.0 charset-normalizer (文字コード正規化ツール) 3.3.2
クリック 8.1.8 クラウドピックル 3.0.0 comm 0.2.1
コンツアーピー 1.3.1 暗号 44.0.1 サイクリスト 0.11.0
Cython 3.1.5 Databricksエージェント 1.9.1 databricks-connect (データブリックス・コネクト) 18.0.0
databricks-sdk(データブリックスSDK) 0.67.0 databricks.serverless_gpu 0.5.11 dataclasses-json 0.6.7
dbus-python 1.3.2 debugpy 1.8.11 デコレータ 5.1.1
デフューズドXML (defusedxml) 0.7.1 deltalake 1.1.4 Deprecated 1.2.18
distlib 0.3.9 distro 1.9.0 ディストリビューション情報 1.7 + build1
ドックストリングをMarkdownに変換 0.11 実行中 1.2.0 facets-overview 1.1.1
fastapi 0.128.0 fastjsonschema 2.21.1 ファイルロック 3.17.0
fonttools(フォントツールズ) 4.55.3 FQDN 1.5.1 フローズンリスト 1.5.0
fsspec 2023.5.0 未来 1.0.0 ギットディービー 4.0.11
GitPython 3.1.43 google-api-core 2.28.1 google-auth(Google認証) 2.47.0
グーグルクラウドコア 2.5.0 Googleクラウドストレージ 3.7.0 google-crc32c(GoogleのCRC32Cライブラリ) 1.8.0
google-resumable-media(Googleの継続可能なメディアライブラリ) 2.8.0 Google API 共通プロトコル (googleapis-common-protos) 1.65.0 grpcio 1.67.0
grpcio-status 1.67.0 h11 0.16.0 hf-xet 1.2.0
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
huggingface_hub (機械学習モデル共有プラットフォーム) 1.2.4 idna 3.7 importlib_metadata 8.5.0
iniconfig 1.1.1 ipyflow-core 0.0.209 ipykernel 6.29.5
ipython 8.30.0 ipython-genutils (IPython用のユーティリティ) 0.2.0 ipywidgets 7.8.1
アイソデート 0.7.2 イソデュレーション 20.11.0 ジェダイ 0.19.2
ジンジャ2 3.1.6 jiter 0.12.0 jmespath 1.0.1
「joblib」 1.4.2 json5 0.9.25 jsonpatch 1.33
jsonpointer 3.0.0 JSONスキーマ 4.23.0 jsonschema-specifications (JSONスキーマ仕様) 2023年7月1日
jupyter_client 8.6.3 jupyter_core(ジュピター・コア) 5.7.2 Jupyterイベント 0.12.0
jupyter-lsp 2.2.5 ジュピターサーバー 2.15.0 jupyter_server_terminals (ジュピター サーバー ターミナルズ) 0.5.3
jupyterlab 4.3.4 jupyterlab_pygments 0.3.0 ジュピターラボサーバー 2.27.3
jupyterlab_widgets 1.1.11 キウィソルバー 1.4.8 langchain-core 1.2.6
langchain-openai 1.1.6 langsmith 0.6.1 launchpadlib 1.11.0
lazr.restfulclient 0.14.6 lazr.uri 1.0.6 litellm 1.75.9
markdown-it-py 2.2.0 MarkupSafe 3.0.2 マシュマロ 3.26.2
matplotlib 3.10.0 matplotlib-インライン 0.1.7 マッケイブ 0.7.0
mdurl 0.1.0 mistune 3.1.2 mlflow-skinny 3.8.1
mmh3 5.2.0 msal 1.34.0 msal-extensions 1.3.1
マルチディクト 6.1.0 mypy-extensions (マイパイ拡張機能) 1.0.0 nbclient(エヌビー・クライアント) 0.10.2
NBコンバート 7.16.6 nbフォーマット 5.10.4 nest-asyncio(ネスト・アサインキオ) 1.6.0
nodeenv 1.10.0 ノートブック 7.3.2 notebook_shim 0.2.4
NumPy (数値計算ライブラリ) 2.1.3 nvidia-ml-py 13.590.44 oauthlib 3.2.2
オープンAI 2.14.0 opentelemetry-api 1.39.1 opentelemetry-proto 1.39.1
opentelemetry-sdk (OpenTelemetry ソフトウェア開発キット) 1.39.1 OpenTelemetryセマンティック規約 0.60b1 orjson 3.11.5
によって がオーバーライドされます 7.4.0 パッケージング 24.2 パンダ 2.2.3
パンドックフィルターズ 1.5.0 パランベンチ-トレイン-コムズ 0.0.0 パルソ 0.8.4
pathspec 0.10.3 パッツィ 1.0.1 ペキスペクト 4.8.0
pillow 11.1.0 pip 25.0.1 プラットフォームディレクトリ 4.3.7
plotly 5.24.1 pluggy 1.5.0 prometheus_client 0.21.1
prompt-toolkit(プロンプトツールキット) 3.0.43 propcache 0.3.1 proto-plus 1.27.0
プロトバフ 5.29.4 psutil 5.9.0 psycopg2 2.9.11
ptyprocess 0.7.0 pure-eval (ピュア・イヴァル) 0.2.2 py4j 0.10.9.9
pyarrow (パイアロー) 21.0.0 pyasn1 0.4.8 pyasn1-modules 0.2.8
ピッコロ 0.0.71 pycparser(パイシーパーサー) 2.21 Pythonのデータバリデーションライブラリ「pydantic」 2.10.6
pydantic_core 2.27.2 pydot 4.0.0 パイフレークス 3.2.0
パイグメンツ 2.19.1 PyGObject 3.48.2 pyiceberg 0.10.0
PyJWT 2.10.1 pyodbc 5.2.0 パイパーシング (Pyparsing) 3.2.0
pyright 1.1.394 パイロアリング 1.0.3 pyspark 4.1.0+databricks.connect.18.0.0
pytest 8.3.5 python-apt 2.7.7+ubuntu5.1 python-dateutil (Python用の日付処理ライブラリ) 2.9.0.post0
python-dotenv 1.2.1 python-json-logger 3.2.1 python-lsp-jsonrpc 1.1.2
Python LSP サーバー 1.12.2 Pytoolconfig 1.2.6 pytz 2024.1
PyYAML 6.0.2 pyzmq 26.2.0 参照元 0.30.2
RegEx 2024.11.6 リクエスト 2.32.3 requests-toolbelt 1.0.0
rfc3339-validator 0.1.4 RFC3986-バリデーター 0.1.1 リッチ 13.9.4
ロープ 1.13.0 rpds-py 0.22.3 RSA(アールエスエー) 4.9.1
s3transfer 0.14.0 Send2Trash(センド2トラッシュ) 1.8.2 setuptools(セットアップツール) 78.1.1
シェリンガム 1.5.4 6 1.17.0 smmap 5.0.0
スニフィオ 1.3.0 sortedcontainers 2.4.0 soupsieve 2.5
sqlparse 0.5.5 ssh-import-id 5.11 スタックデータ 0.6.3
スターレット 0.50.0 strictyaml 1.7.3 粘り強さ 9.0.0
終了しました 0.17.1 Threadpoolctl 3.5.0 tiktoken 0.12.0
tinycss2 1.4.0 tokenize-rt 6.1.0 トークナイザー 0.22.2
tomli 2.0.1 竜巻 6.5.1 tqdm 4.67.1
traitlets(トレイトレット) 5.14.3 typer-slim 0.21.1 types-python-dateutil 2.9.0.20251115
タイピングエクステンションズ (typing_extensions) 4.12.2 タイピング検査 0.9.0 tzdata 2024.1
ujson 5.10.0 unattended-upgrades 0.1 uri-template 1.3.0
urllib3 2.3.0 uuid_utils 0.12.0 uvicorn 0.40.0
virtualenv 20.29.3 wadllib 1.3.6 wcwidth(文字の幅を測定するプログラム関数) 0.2.5
webcolors 25.10.0 ウェブエンコーディングス 0.5.1 websocket-client (ウェブソケット・クライアント) 1.8.0
whatthepatch(ホワットザパッチ) 1.0.2 ホイール 0.45.1 いつでも 0.7.3
ウィジェットNBエクステンション 3.6.6 wrapt 1.17.0 yapf (ヤップフ) 0.40.2
yarl 1.18.0 ジップ 3.21.0 zstandard 0.23.0