AI/ControlNet Tips

Cotrolnet †

Cotrolnetモデルについて †

• https://kurokumasoft.com/2023/04/19/controlnet-new-features/

• https://note.com/koresugo/n/n59754c83b3cd

Openpose †

元となる画像と同じポーズの画像を作成できる

• ポーズの元画面からポーズ画像を抽出

プロンプトは通常のように入れる(PNGの内容を表示に画像を入れ、img2imgに転送する)

ポーズの対象の画像をドラッグアンドドロップする(img2imgタブ）

有効化、LowVRAM

• プロセッサ：openpose
• モデル：control_v11p_sd15_openpose

ポーズ画像を保存する

2回目からポーズ画像をドラッグアンドドロップして利用する

• プロセッサ：none ←ここ変更
• モデル：control_v11p_sd15_openpose
• サンプルステップ:26-28

• BRA6

• Euler a

• プロンプト

best quality,masterpiece,ultra high res,(photo realistic:1.4),1girl,solo,RAW photo,looking at viewer,Japanese clothes,japanese woman,elegant woman, real person,slender & girly \(idolmaster\) face,serious,smile,tight skirt, messy hair,beach

• ネガティブプロンプト

painting,sketches,logo, watermark, text,(worst quality:2),(low quality:2),(normal quality:2),lowers,normal quality,( (monochrome) ),( (grayscale) ),skin spots,acnes,skin blemishes,age spot,(outdoor:1.6),nsfw,ugly face,breasts out,nipples, pubic hair,navel,stomach cutout, midriff,pleated skirt

• ポーズ画像

• 作成画像

Openpose Editor †

ポーズ画像(棒人間)を作成して、いろんなポーズが作成できるツール。

インストール †

「拡張機能」からURLインストールをする

• Download先

• https://github.com/fkunn1326/openpose-editor.git

使用方法 †

• Openposeで、ポーズ画像（棒人間の画像）を作成する

元画像からOpenposeで棒人間の画像を作成して、イメージに保存する

Open Pose Editorでイメージを読み込んで、棒人間をイメージに一致するように関節を移動する。
その後ポーズを変更する

完成後「txt2img転送る」又は、「Save Preset」で保存する

個々にポーズを保存するときは「JSONを保存」でよい

保存形式はJSONになる。

元画像を「PNG内の情報を表示」からtxt2img転送り、OpenposeEditorで作成した棒人間を「txt2img転送る」で送り以下のように設定して、画像を作成する。

棒人間画像（JSON形式）

変更前　　　　　　　　　　　　　　　変更後

PresetのJSONファイルの場所と内容 †

C:\Usr\stable-diffusion-webui-master\extensions\openpose-editor\presets.json

• presets.json

{"TEST1": {"width": 512, "height": 904, "keypoints": [[277, 163], [254, 262], [217, 257], [191, 412], [326, 474], [277, 261], [280, 408], [336, 468], [251, 262], [262, 551], [224, 778], [249, 259], [312, 538], [306, 764], [262, 146], [280, 159], [222, 154], [296, 146]]}, "TEST2": {"width": 512, "height": 904, "keypoints": [[277, 163], [254, 262], [217, 257], [191, 412], [308, 304], [277, 261], [280, 408], [307, 301], [251, 262], [262, 551], [224, 778], [249, 259], [312, 538], [306, 764], [262, 146], [280, 159], [222, 154], [296, 146]]}, "手を胸元": {"width": 512, "height": 904, "keypoints": [[277, 163], [252, 260], [222, 264], [193, 412], [329, 299], [279, 253], [280, 408], [330, 301], [249, 258], [262, 551], [224, 778], [254, 257], [312, 538], [306, 764], [265, 143], [279, 160], [215, 162], [296, 144]]}}

参考 †

• https://murasan-net.com/index.php/2023/03/11/automatic1111-openpose-editor/#index_id7

reference_only †

元画像と似た顔の画像を作成できる

Canny †

Photoからイラストを作成

Checkpoint：BRA6

サンプリング方法：Euler a

• プロセッサ：canny
• モデル：control_v11p_sd15_canny
• サンプルステップ:26

こんな感じ †

⇒

CheckpointをanythingV5に変更 †

DL先 †

• https://civitai.com/models/9409

anythingV5Anything_anythingV5PrtRE.safetensors

インストール †

stable-diffusion-webui-master\models\Stable-diffusionに配置

こんな感じ †