github.devotd.
新着評価

langfuse/langfuse v4.64.0 — LLM アプリケーションの可観測性と評価

langfuse/langfuse は AI アプリケーションの実行記録と評価を一か所で提供するオープンソースプラットフォームで、最新リリースは v4.64.0 である。

リポジトリ情報langfuse/langfuse ↗

langfuse/langfuse は AI アプリケーションの実行記録と評価を一か所で提供するオープンソースプラットフォームで、最新リリースは v4.64.0 である。

GitHub の説明: 🪢 Open source agent evals & observability: Trace, evaluate, and improve LLM applications with one open platform.

スター
★ 36.1K
フォーク
4K
言語
TypeScript
ライセンス
NOASSERTION
最新リリース
v4.64.0
原文を見る ↗GitHub で見る ↗

langfuse/langfuse は AI アプリケーションの実行を記録し評価するオープンソースプラットフォームである。リポジトリはこのプロジェクトをオープンソースのエージェント評価および可観測性と定義し、トレース・評価・改善を単一のプラットフォームで扱うと述べている。TypeScript で記述され、2023 年 5 月 18 日に作成され、GitHub スター数は 36083、リサーチによると最新リリースは v4.64.0 である。

Langfuse が扱うのは、プロンプトとモデル呼び出しがどの順序で実行されるかを確認することである。README は、このプロジェクトが AI アプリケーションの開発、監視、評価、デバッグを支援すると説明している。可観測性(observability)とは、アプリケーションの実行の流れを記録として残し、問題点を遡ることを指し、Langfuse はこの記録をトレース(trace)単位で扱う。ここにプロンプト管理、評価、データセット、LLM Playground、API が加わる。利用形態は 2 通りあり、Langfuse Cloud を使うか、自前のインフラにホストするかのいずれかである。SDK は Python と JS/TS に対応する。トレースと評価を 1 つのプラットフォームにまとめる構成がこのリポジトリの中心である。

ただし、v4.64.0 の変更一覧は与えられた資料には含まれていない。リポジトリの説明ではオープンソースと述べられているが、ライセンス表記は NOASSERTION であり、実際の利用条件はこれらの資料だけでは確認できない。リサーチ記録ではモメンタムスコア 7.2 のみ記入されており、新鮮度、技術、完成度の項目には値がない。比較用の性能数値も提示されていない。可観測性と評価を統合したツールを探すチームの検討対象にはなるが、ライセンス条件と v4.64.0 の変更内容については、リポジトリとリリースノートで直接確認する必要がある。