Project : https://www.timothybrooks.com/instruct-pix2pix

自然言語での画像編集

https://www.marktechpost.com/2023/01/20/researchers-at-uc-berkeley-propose-intructpix2pix-a-diffusion-model-to-edit-images-from-human-written-instructions/カリフォルニア大学バークレー校の研究者がIntructPix2Pixを提案。人間が書いた指示から画像を編集するための拡散モデル

https://github.com/Klace/stable-diffusion-webui-instruct-pix2pix#Stable_Diffusion_web_UI(web_UI)の拡張機能

これを入れなくても標準のimge2imageで動くようになったよ

c.f. stable-diffusion-webui-instruct-pix2pix