AI絵画の安定普及研究(2) sdモデルControlNet1.1の導入とインストール


導入パッケージ作成者: Akiba aaaki

免責事項:
このインストール パッケージとランチャーは、営利を目的とすることなく無料で提供されています。


皆さんこんにちは、雨でも晴れでも私は元気です。

皆さんご存知のとおり、StableDiffusion は非常に強力な AI 描画ツールです。StableDiffusion について詳しく知りたい人は、私の以前の記事「Midjourney VS StableDiffusion、最近最も人気のある AI 描画ツールの 2 つ」を参照してください。


本日お届けするのは、安定拡散研究(2) sdモデル ControlNet1.1の導入とインストールです。


まず最初に、この ControlNet1.1 とは一体何なのかを明確にしましょう。

ControlNet1.1 は安定した拡散ペイント プラグインで、2023 年 4 月に V1.1 バージョンを更新し、14 個の最適化されたモデルをリリースし、複数のプリプロセッサを追加し、元のモデルにいくつかの最適化を行ったので、以前よりも高機能になりました。

それでは、ControlNet1.1の新モデルと新機能を詳しく見ていきましょう。


1. ControlNet1.1の新モデルと新機能


1.Lineartモデルとlineart_animeモデルを追加


オリジナルの Canny の強力な線画着色を完全に置き換えることができる、線画と線画アニメの 2 つの新しいモデルが追加され、白黒とカラーの両方の着色機能が非常に強力です。


ここに画像の説明を挿入


ここに画像の説明を挿入


2. Instruct Pix2Pix モデルを追加


モデルは、画像と対応するテキスト指示 (つまり、プロンプト) を受け入れ、指示に従って画像を編集し、画像全体を部分的に操作する機能を備えています。


図に示すように、昼から夜に変わります。

ここに画像の説明を挿入


図に示すように、髪型を変更します。


ここに画像の説明を挿入


写真に示すようにドレスアップします。

ここに画像の説明を挿入


3. タイルモデルの追加

タイル モデルは、写真の高精細復元、細部の強調、写真に基づいたコンテンツの自動推論に効果があり、公式の紹介によると、次の 5 つの機能があります。

  • 画像のアップスケーリング 2x、4x、または 8x 超解像度が可能
  • 画像の詳細を画像に追加、変更、または再生成できます
  • 他の超解像方法で得られた貧弱な画像の詳細を修復、調整、改善する可能性
  • SD ズーム スクリプトを起動すると、間違った問題が発生する可能性があります
  • 未完成の作品もカラーブロックで描けば完成します

ここに画像の説明を挿入


画像復元前:

ここに画像の説明を挿入


画像復元後:

ここに画像の説明を挿入


ディテール調整前:

ここに画像の説明を挿入


細部の調整後:

ここに画像の説明を挿入


4. 新しいシャッフルモデル

シャッフルモデルは再構成モデ​​ルと呼ぶことができます. シャッフルモデルの使用効果の観点から見ると, シャッフルモデルは元の画像のスタイルを取得し, このスタイルを使用することで新しい画像を生成することができます. 、イメージ作成にシャッフル モデルを使用できます。


文字マップ処理の効果を見てみましょう。

ここに画像の説明を挿入


ここに画像の説明を挿入


画像形成効果の観点から見ると、新しく生成された画像のスタイル、色調、キャラクターの一部のポーズが復元および保存されるため、シャッフル モデルを使用して元の画像を参照し、画像を再構成して生成することができます。新しいイメージ。


ランドスケープクラスイメージの処理効果を見てみましょう。

ここに画像の説明を挿入


ここに画像の説明を挿入


完成した絵から判断すると、主な配色とスタイルは元の絵のスタイルを参照しており、構図の構造にもいくつかの参照があります。


新機能やモデル効果の紹介はこれで終わり、次はControlNet1.1のインストールと使い方を紹介します。


これまでは Control プラグインを使用していましたが、実際には、新しいバージョンのモデルを使用するには、プラグインを新しいバージョンにアップグレードするだけで済みます。したがって、プラグインを更新し、新しいモデルをダウンロードしてそれを挿入するだけです。


2、ControlNet1.1をインストールする

このアップグレードとインストールには 2 つの主要なポイントがあります。

  • ControlNet プラグインのバージョンのアップグレード

  • 各種プリプロセッサ搭載モデル


Stable Diffusion 統合パッケージをインストールしていない場合は、Stable Diffusion Research (1) sd 統合パッケージ v4.2 バージョンのインストール手順を参照してください。この記事では、Stable Diffusion 統合パッケージのインストールに必要なコンピュータ構成について学び、関連するインストールをダウンロードします。パッケージ。


まず、ControlNet 1.1 のインストール ファイルを準備する必要があります。このファイルは統合パッケージsd-webui-aki-v4.2 バージョンに組み込まれています。ダウンロードしていない場合は、自分でダウンロードできます。


1. ControlNet プラグインのバージョンをアップグレードする

最初のステップは、統合パッケージ ディレクトリ sd-webui-aki-v4 に移動し、A launcher.exe を直接ダブルクリックして実行します。


起動後は以下のようになります。

ここに画像の説明を挿入


2 番目のステップでは、左側のバージョン管理をクリックします。

ここに画像の説明を挿入


3番目のステップは、拡張機能タブに切り替えて、右上隅にある「ワンクリック更新」ボタンをクリックすることです。


ここに画像の説明を挿入


2. さまざまなプリプロセッサ モデルをインストールします (オプション)

最初の手順では、プリプロセッサ モデル フォルダ内のダウンロード フォルダを、プラグイン ディレクトリ内のアノテーター フォルダにコピーします。

\controlnet1.1\预处理器\download
\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator

図に示すように:

ここに画像の説明を挿入



2 番目の手順では、controlnet1.1 モデルを sd-webui-controlnet\model フォルダーに配置します。

\controlnet1.1\模型
\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\models

ここに画像の説明を挿入



上記の操作が完了したら、ランチャー、コンソール、WebUI を閉じ、再起動すると有効になります。

図に示すように:

ここに画像の説明を挿入



3. ControlNet1.1 のユーザー エクスペリエンスとボスに関するいくつかの変更


1. 色反転モードは別個のプリプロセッサになりました


ここに画像の説明を挿入


2.パーフェクトピクセルモードを追加

[後で] を選択すると、ControlNet 処理に関するいくつかの解決の問題を解決できます。


ここに画像の説明を挿入


3. 新しい制御モード

新しい制御モード:

  • バランスの取れた
  • より迅速な
  • ControlNet を優先する

ControlNet にさらに偏ることを選択する場合は、CFG を減らす必要があります。

ここに画像の説明を挿入


4. ボスのHEDがSoftEdgeに変更されました

ここに画像の説明を挿入


5. いくつかのプリプロセッサを追加

OpenPose プリプロセッサ -> OpenPose モデル
Openpose_full、1 つのモデル ジェスチャ、手、顔がすべて完了

ここに画像の説明を挿入


6. ボスの深度モデル -> 新しいバージョンでは Leres++、Zoe プリプロセッサを推奨

ここに画像の説明を挿入


さて、今日の共有はここまでです。ControlNet1.1 のその他の機能や変更点については、ここでは詳しく説明しません。興味のある友人は自分で勉強してください。次回はsdの各機能モジュールの詳しい活用方法をお届けしますので、お楽しみに。

おすすめ

転載: blog.csdn.net/lizhong2008/article/details/131994349