Devotd Github
新着マルチモーダル

arcanima/snapref — Anima 用参照画像アダプタ

arcanima/snapref は、Anima で参照画像の外観やアートスタイルを活用し、新しいポーズやシーンの画像生成を支援するアダプタのリポジトリです。

リポジトリ情報arcanima/snapref ↗

arcanima/snapref は、Anima で参照画像の外観やアートスタイルを活用し、新しいポーズやシーンの画像生成を支援するアダプタのリポジトリです。

GitHub の説明: SnapRef: one-image reference adapter for Anima (asymmetric attention + reference K/V cache). Training, data generation and evaluation code.

スター
★ 19
フォーク
0
言語
Python
ライセンス
Apache-2.0
原文を見る ↗GitHub で見る ↗

arcanima/snapref は、Anima 用参照画像アダプタ SnapRef のコードと重みを公開しているリポジトリです。参照画像の外観とアートスタイルをもとに、シーン説明に沿った新しいポーズや背景の画像を生成し、同じキャラクターの姿を継続させることに重点を置いています。リポジトリの説明では参照画像 1 枚を使う方法が紹介され、複数の参照画像を併用する機能にも触れています。提供された資料には最新リリースとバージョン情報は記載されていません。

SnapRef は非対称アテンション(asymmetric attention)と参照キー・値キャッシュを使用します。参照画像をエンコードしてキーと値をキャッシュに保存し、生成の過程でそれを活用する方式です。リポジトリには学習・データ生成・評価のコードと重みが含まれており、ComfyUI ノードも提供しています。複数の参照画像、参照ごとの重み、人物モードにも対応している|Description。単純な利用インターフェースだけでなく、モデルを学習・評価するために必要なコードまで扱うプロジェクトです。Python で書かれ、ライセンスは Apache-2.0 です。

提供された資料には性能指標や他手法との比較結果はありません。機能と実装構成は確認できますが、生成結果の品質や複数枚の参照画像を使う場合の効果を判断する根拠は示されていません。そのため、現在の資料だけでは機能範囲を超えて実際の性能を評価することは困難です。