T2I-Adapter
https://github.com/TencentARC/T2I-Adapterhttps://arxiv.org/abs/2302.08453https://huggingface.co/spaces/Adapter/T2I-Adapterhttps://huggingface.co/TencentARC/T2I-Adapter
>T2I-Adapter の公式実装: Text-to-Image 拡散モデルのより制御可能な能力を掘り起こす学習アダプター。
>Currently support both sketch Adapter and image Adapter. Note that the impl is experimental, result may differ from original repo. See Adapter Examples for reference.
Anacondaと格闘しているうちに拡張機能がでてしまった…早すぎぃ！
機能
スケッチで制御 Sketch Adapter
ポーズで制御 MMPose
Inpaintingと組み合わせられる
Sketch Adapterを使うと、異なる概念の組み合わせが成功しやすくなる
車 と 羽 の組み合わせはノーマルだと別々に生成されてしまうが、Sketch Adapterを使うと、しっかり融合している逐次編集
ベースになる画像を傷つけずSketchガイドを使って画像を追加生成できる？
SegmentationとSketchガイドを組み合わせる
https://twitter.com/mutaguchi/status/1626458046166888454T2I-Adapterは、ControlNetと違って、segmentationとposeを組み合わせるとかがもう出来てる…
サンプルにAnything V4.0で草