AI/StableDiffusion/ControlNet

AUTOMATIC1111を使ってControlNetを導入

AI/StableDiffusion/Mac/AUTOMATIC1111 [ｼｮｰﾄｶｯﾄ]

画像の輪郭を抽出して、textから画像出力

1. AUTOMATIC1111の画面を開いて、Extensionsタブを選択
2. Install from URLタブを選択
3. https://github.com/Mikubill/sd-webui-controlnet.git を指定してinstall
4. 再度、Extensionsタブのinstalledタブを選択すると、sd-webui-controlnetが追加されてる
5. https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main のcontrol_cannyをDL
6. ローカルのstable-diffusion-webui/extensions/sd-webui-controlnet/modelsの下に上記DLモデルファイルを入れる
7. ControlNetのEnableにチェックを入れる
8. モデルの更新ボタンを押してcannyを選択
9. 通常のtxt2imgから生成

参考：https://koneko3.com/how-to-use-controlnet/

画像のポーズを抽出して、textから画像出力

1. https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main のcontrol_openposeをDL
2. モデルの更新ボタンを押してcannyを選択
3. 通常のtxt2imgから生成

画像の落書きを抽出して、textから画像出力

1. https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main のcontrol_scribbleをDL
2. モデルの更新ボタンを押してscribbleを選択
3. 通常のtxt2imgから生成