StableDiffusion ControlNetwork(コントロールネット)とは
Stable Diffusion Control Network(またはControlNet)は、2022年にlllyasvielによって開発されたニューラルネットワークアーキテクチャです。これは、ノイズから高品質の画像を生成する生成的敵対ネットワーク(GAN)の一種であるStable Diffusion Modelに基づいています。
Stable Diffusion Control Netは、拡散モデルの出力を制御するのに効果的であることが示されています。それは、現実的なポートレート、ファンタジー風景、抽象的な芸術など、さまざまなスタイルの画像を作成するために使用されています。
StableDiffusion ControlNetを使用する利点
- 出力制御: ControlNetを使用すると、ユーザーは出力画像のスタイル、コンテンツ、その他の側面を制御できます。これは、拡散モデルに追加の条件を追加することで実現できます。
- 高品質の画像: ControlNetは、ノイズから高品質の画像を生成できます。これは、Stable Diffusion Modelに基づいており、高品質の画像を生成するGANの一種だからです。
- 使いやすさ: ControlNetは比較的使いやすいです。簡単なユーザーインターフェースがあり、拡散モデルに条件を追加して画像を生成できます。
ControlNetで出来ること
- キャラクターの特徴を維持したまま色や画風だけ変える
- 線画に着色する
- 同じ顔や服装やポーズを指定
- ポーズや構図を指定して画像生成ができる
- 落書きからリアルな画像を作る
コントロールネットの導入方法
コントロールネットの導入用URL
GitHub - Mikubill/sd-webui-controlnet: WebUI extension for ControlNet
WebUI extension for ControlNet. Contribute to Mikubill/sd-webui-controlnet development by creating an account on GitHub.
コントロールネットの導入
「Extensions」>「Install from URL」
「URL for extension’s git repository」に「https://github.com/Mikubill/sd-webui-controlnet」を記入>「Install」ボタンを押す。
「Extensions」>「Installed」>「sd-webui-controlnet」が入っていることを確認して>「Check for updates」>
「Applyand restart UI」ボタンをクリック
一度、StableDiffusionを終了させる。
コントロールネットの導入確認
もう一度、StableDiffusionを立ち上げる>text2img>「ControlNet v1.1.224」の表示があれば導入されています。
ファイルのダウンロードして登録しないと使えません。次のページの作業もしていきましょう!
コメント