ai-safety-institute/transect は inspect-scout の上に築かれたエージェント評価用のトランスクリプト分析ツールである。Python 3.12 以上を要求する。2026年11月5日のコミット 2655747 は、1つのサンプルを複数の epoch(スキャン回数)にわたって処理した結果をまとめて表示するランインデックスを追加した。pyproject.toml のバージョンは 0.6.1 から 0.7.0 に上がり、diff は 854 行の追加と 57 行の削除という規模である。
現在 render() は epoch ごとに report_epoch2.html のようなレポートファイルを生成し、そこに report_index.html をもう1つ書き出す。インデックスは report_paths の先頭に入り、既定で開かれる。中には各 epoch のレポートとその epoch の実行状態、複数 epoch にわたって合算した判断面の信頼度、実行全体のスキャン状態が入っている。
合算信頼度は新しく追加された src/transect/report/collection.py が計算し、index.html.j2、runs.html.j2、collection_reliability.html.j2 のテンプレートが描画する。表は記録された judge 設定とラベル語彙ごとに行を分け、有効な投票数と設定が期待するサンプル数、フレームの judge_agreement 平均、ペアごとの一致度、元の投票から求めた α と AC1、検閲者の再標注数、無作為抽出の確認で反転した件数を併せて示す。インデックスは section_order の外にあるため、トランスクリプトを読まずにチャートランタイムも不要である。epoch が1つだけの場合、インデックスは作成されない。
ただしこれらの値は複数 epoch の judge 監査を合算したものであり、文書も一貫性を測った値であって正確性を測った値ではないと明記している。表の行は judge 設定とラベル語彙ごとに分かれるため、比較は同じ構成の中で読まなければならない。1回の実行よりも、同じ構成での反復実行の傾向を見る用途に近い。