github.devotd.

huggingface/lighteval

huggingface/lighteval は、複数の実行バックエンドで提供される、またはメモリに読み込まれたモデルについてタスク・指標・サンプル単位の結果を評価する Python ツールキットで、公開されている最新リリースは v0.13.0 である。

GitHub の説明: Lighteval is your all-in-one toolkit for evaluating LLMs across multiple backends

GitHub で見る ↗
スター
★ 2.6K
フォーク
588
言語
Python
ライセンス
MIT
最新リリース
v0.13.0

投稿

1