modelscope/evalscope

ModelScope Community が作った Python フレームワーク EvalScope は、LLM・VLM などのモデル能力評価と推論性能のストレステストをコマンド一つで開始できる。

GitHub の説明: A streamlined and customizable framework for efficient large model (LLM, VLM, AIGC) evaluation and performance benchmarking.

投稿

新着10月21日

ModelScope Community が作った Python フレームワーク EvalScope は、LLM・VLM などのモデル能力評価と推論性能のストレステストをコマンド一つで開始できる。