deepspeedai/deepspeed

ZeRO、CPU/NVMe オフロード、3D 並列化で大規模モデルの学習を支援する Python ライブラリ DeepSpeed の最新リリース v0.19.8 と、README が示す機能の範囲を整理する。

GitHub の説明: DeepSpeed is a deep learning optimization library that makes distributed training and inference easy, efficient, and effective.

スター

★ 43.3K

フォーク

5.1K

言語

Python

ライセンス

Apache-2.0

最新リリース

v0.19.8