Devotd Github
新着モデルコンテキストプロトコル

itsmostafa/system-one-connector 0.4.14 — 評価バグ2件を修正

itsmostafa/system-one-connector が 0.4.14 をリリースし、taxcat 評価を中立状態に切り替える eval バグ修正と、グループごとに召回率を個別表示する eval バグ修正の2件を反映した。

リポジトリ情報itsmostafa/system-one-connector ↗

itsmostafa/system-one-connector が 0.4.14 をリリースし、taxcat 評価を中立状態に切り替える eval バグ修正と、グループごとに召回率を個別表示する eval バグ修正の2件を反映した。

GitHub の説明: System One MCP connector to evaluate anything fast and cheap. Give your AI agent direct access to models like: Jev, D1, CLM and Laya

スター
★ 352
フォーク
41
言語
Go
ライセンス
MIT
最新リリース
v0.4.12
原文を見る ↗GitHub で見る ↗

itsmostafa/system-one-connector に 0.4.14 リリースが公開された。このリポジトリは System One モデルを AI エージェントに直接接続する MCP(Model Context Protocol) コネクタであり、リポジトリの説明では Jev、D1、CLM、Laya などのモデルにエージェントが直接アクセスできるようにすると明かされている。今回のコミット(33d1fc68、2026-11-03)は release-please の自動化マージであり、コード本体ではなく、バージョンマニフェストを 0.4.13 から 0.4.14 に引き上げ、CHANGELOG に修正項目を追加しただけである。

今回のリリースに記載されているのは eval 領域のバグ修正2件である。1つ目は taxcat という名前の評価を中立状態に切り替え、自分自身のデータセットでのみ採点するようにしたものであり、2つ目は評価上限(limits)が 서로 다른 taxcat グループごとに召回率(recall、正答のうちに見つけ出した割合)を個別に表示するようにしたものである。いずれも指標の計算方法と報告方法のみを変更する修正で、モデルアクセス機能自体を扱ったものではない。CHANGELOG 基準のリリース日は 2026-10-25 であり、2つの修正は 12212ee と 2b0f555 のコミットに紐づいている。

判断はここまでである。提示された変更一覧はバージョンマニフェストと CHANGELOG の2ファイルで、コミット統計は追加9行・削除1行程度の規模である。評価ロジックが具体的にどのように修正されたかは、CHANGELOG が指す2つのコミットを直接読まなければ確認できない。リポジトリの説明に記載された各モデルの性能数値やベンチマーク結果、ライセンス情報は、提供されたファクトには含まれていない。採用するか否かは、eval スクリプトとライセンスを直接確認してから判断するのがよいと考えられる。