TL;DR
CFGの線形外挿は確率保存を崩し、強ガイダンスで飽和やアーティファクトを生む。論文はガイダンスを発散項とスコア平行項に分解し、AdaMaGとしてスコア平行成分の減衰と終盤の時間依存スケジュールを導入する。追加の関数評価なしで学習多様体からの逸脱を抑えるplug-and-play手法。
既存手法との違い
原論文はSD3、SD3.5、Fluxで、CFG、Rect-CFG++、TAG、APG、および調整済みAPG*と比較している。AdaMaGはCFG型の線形外挿に対し、スコア平行成分を減衰し、終盤にガイダンスを弱める点が異なる。論文表1では最適・強ガイダンス設定でFID/IS/SATの改善や飽和抑制が報告されるが、本記事では数値の再現や追試は行っていない。
使える条件
条件付き画像生成のrectified flow型モデルで、条件付き・無条件の速度予測にアクセスでき、CFG型サンプラーを使う場面が主対象。原論文の評価はSD3、SD3.5、Fluxの画像生成ベンチマークで、追加の関数評価を必要としない。動画・音声・他モダリティや、提示本文にないRAG等への適用は確認できない。
限界と未検証の範囲
発散項の厳密評価は推論時に困難で、Hutchinson推定は分析用でありサンプリング実装には使っていない。手法は逸脱を完全除去ではなく減衰させるもので、スケジュールのωminやγなどにはアブレーションが必要。評価範囲はSD3、SD3.5、Fluxの画像生成に限られ、他モデル・他タスクへの一般化は提示本文からは確認できない。
図1: 提案手法の概要(本記事による図解)
解説

ねえ智也くん、このブログ「拡散・フローモデルのCFG飽和と逸脱を抑えるAdaMaGガイダンス」って、要するにCFGが強すぎると画が壊れるのを何とかする話?

そう。CFGは条件付きと無条件の速度を線形外挿するだけのヒューリスティックで、確率保存や学習された多様体の幾何を無視しがち。強いと飽和やアーティファクトが出る。

線形外挿って、条件方向にグイッと引っ張る感じ?

そうだね。式でいうと v_cfg = v_u + ω(v_c − v_u)。ωを上げると条件に寄るけど、その分だけ学習時の密度経路から外れやすい。

論文はその外れ方をどう分析したの?

連続の式でガイダンスをソース項として見る。すると効果が発散項とスコア平行項に分かれる。発散項は局所的な確率の増減、スコア平行項は等密度面をまたぐ流れ。両方の和がゼロなら保守的だけど、CFGはそこを崩す。

発散項が終盤にやばくなる?

論文は、サンプリングがデータ多様体に近づく終盤で発散項が構造的に大きくなる、と示してる。だからスコア平行成分の減衰だけじゃなく、終盤にガイダンスを弱める時間依存スケジュールも入れる。

AdaMaGの更新は何をしてるの?

条件付き速度を主な流れとして扱って、ガイダンスをそのスコア方向に対して平行成分と直交成分に分解する。直交成分は残して、平行成分を減衰。さらに ω(t)=max(ω_min, ω_ref(1−t)^γ) みたいに終盤で弱める。追加の関数評価はなしのplug-and-play。

発散項は直接消せるの?

厳密評価は推論時に無理。論文ではHutchinson推定で分析してるけど、メモリ重くてサンプリング実装には使ってない。だから発散項はスケジュールで抑える間接アプローチ。

既存手法との比較は?

原論文はSD3、SD3.5、Fluxで、CFG、Rect-CFG++、TAG、APG、調整済みAPG*と比較してる。AdaMaGはCFG型の線形外挿に対して、スコア平行成分を減衰し終盤を弱める点が違う。表1では最適・強ガイダンス設定でFID、IS、SATを見て、CFGよりリアリズム改善や飽和抑制が報告されてる。ただ記事側で追試はしてない。

へえ、数値も出てるんだ。でも全部のモデルでCFGに勝つって言い切れる?

論文の主張は評価したモデルとガイダンス設定の範囲で、CFGに対して品質とリアリズムが改善、ISは同等以上って感じ。表1の強ガイダンス側ではSD3.5のFIDみたいに単純じゃない項目もあるから、数値は条件付きで読む必要がある。

使える条件は?

条件付き画像生成のrectified flow型モデルで、条件付き・無条件の速度予測にアクセスできて、CFG型サンプラーを使ってる場面が主対象。評価は画像生成のSD3、SD3.5、Fluxだけ。動画・音声・他のモダリティやRAGみたいなのは提示本文から確認できない。

意義は?

ガイダンスを確率保存の視点で分解して、既存の飽和抑制や多様体保持系のヒューリスティックをどっちの項に効いてるかとして読めるようにしたこと。しかも追加NFEなしでplug-and-playだから実装しやすい。

限界もちゃんとある?

ある。逸脱を完全除去じゃなく減衰させる手法。ω_minやγみたいなスケジュールのハイパラはアブレーションが必要。発散項の厳密評価は難しくて、Hutchinson推定は分析用。評価範囲もSD3、SD3.5、Fluxの画像生成に限られるから、他モデルや他タスクへの一般化は提示本文からは確認できない。

じゃあAdaMaGは「CFGの焦げ付きを防ぐ火加減マスター」って呼んでいい?

呼び名が強すぎる。せいぜい「終盤だけ火を弱める係」だよ。