BRA5,BRA6を以下からDownload
ZIPを解凍して「models\Stable-diffusion\」に入れて再読み込み。
https://koneko3.com/how-to-use-controlnet/
「Dynamic Prompt」はプロンプトの中に{|}を使うことで、1つの呪文(プロンプト)を何パターンかに分けて、それぞれを画像生成する
Controlnetをインストールしただけだとモデルが入っていないので、Downloadしてインストールする
14種類をDownloadする
以下のURLにアクセス
「controlnet」を検索する
以下のURLにジャンプする
https://huggingface.co/lllyasviel/ControlNet-v1-1
txt2imgでControlnetに適当な画像(プロンプトの内容に合うような画像)をドラッグ&ドロップして以下のようにしてみた
a businesswoman in the midst of a sales pitch, earnestly engaging and persuading her audience.
以下のエラー対応
RuntimeError: Not enough memory, use lower resolution (max approx. 512x512).
' Edit by JE2ISM 'set COMMANDLINE_ARGS= set COMMANDLINE_ARGS=--medvram
A tensor with all NaNs was produced in Unet. This could be either because there's not enough precision to represent the picture, or because your video card does not support half type. Try setting the "Upcast cross attention layer to float32" option in Settings > Stable Diffusion or using the --no-half commandline argument to fix this. Use --disable-nan-check commandline argument to disable this check.
webui-user.batに以下を追加
set COMMANDLINE_ARGS=--no-half
' Edit by JE2ISM 'set COMMANDLINE_ARGS= set COMMANDLINE_ARGS=--medvram --no-half
今回は不要のようだが以下の変更も有効のようだ
torch.cuda.OutOfMemoryError: CUDA out of memory. Tried to allocate 36.00 MiB (GPU 0; 4.00 GiB total capacity; 17.73 GiB already allocated; 0 bytes free; 17.84 GiB reserved in total by PyTorch) If reserved memory is >> allocated memory try setting max_split_size_mb to avoid fragmentation. See documentation for Memory Management and PYTORCH_CUDA_ALLOC_CONF
@echo off 'Edit by JE2ISM set PYTORCH_CUDA_ALLOC_CONF=garbage_collection_threshold:0.6, max_split_size_mb:128 ←ここ if not defined PYTHON (set PYTHON=python) if not defined VENV_DIR (set "VENV_DIR=%~dp0%venv")