導入パッケージ作成者: Akiba aaaki
免責事項:
このインストール パッケージとランチャーは、営利を目的とすることなく無料で提供されています。
皆さんこんにちは、雨でも晴れでも私は元気です。
皆さんご存知のとおり、StableDiffusion は非常に強力な AI 描画ツールです。StableDiffusion について詳しく知りたい人は、私の以前の記事「Midjourney VS StableDiffusion、最近最も人気のある AI 描画ツールの 2 つ」を参照してください。
本日お届けするのは、安定拡散研究(2) sdモデル ControlNet1.1の導入とインストールです。
まず最初に、この ControlNet1.1 とは一体何なのかを明確にしましょう。
ControlNet1.1 は安定した拡散ペイント プラグインで、2023 年 4 月に V1.1 バージョンを更新し、14 個の最適化されたモデルをリリースし、複数のプリプロセッサを追加し、元のモデルにいくつかの最適化を行ったので、以前よりも高機能になりました。
それでは、ControlNet1.1の新モデルと新機能を詳しく見ていきましょう。
1. ControlNet1.1の新モデルと新機能
1.Lineartモデルとlineart_animeモデルを追加
オリジナルの Canny の強力な線画着色を完全に置き換えることができる、線画と線画アニメの 2 つの新しいモデルが追加され、白黒とカラーの両方の着色機能が非常に強力です。
2. Instruct Pix2Pix モデルを追加
モデルは、画像と対応するテキスト指示 (つまり、プロンプト) を受け入れ、指示に従って画像を編集し、画像全体を部分的に操作する機能を備えています。
図に示すように、昼から夜に変わります。
図に示すように、髪型を変更します。
写真に示すようにドレスアップします。
3. タイルモデルの追加
タイル モデルは、写真の高精細復元、細部の強調、写真に基づいたコンテンツの自動推論に効果があり、公式の紹介によると、次の 5 つの機能があります。
- 画像のアップスケーリング 2x、4x、または 8x 超解像度が可能
- 画像の詳細を画像に追加、変更、または再生成できます
- 他の超解像方法で得られた貧弱な画像の詳細を修復、調整、改善する可能性
- SD ズーム スクリプトを起動すると、間違った問題が発生する可能性があります
- 未完成の作品もカラーブロックで描けば完成します
画像復元前:
画像復元後:
ディテール調整前:
細部の調整後:
4. 新しいシャッフルモデル
シャッフルモデルは再構成モデルと呼ぶことができます. シャッフルモデルの使用効果の観点から見ると, シャッフルモデルは元の画像のスタイルを取得し, このスタイルを使用することで新しい画像を生成することができます. 、イメージ作成にシャッフル モデルを使用できます。
文字マップ処理の効果を見てみましょう。
画像形成効果の観点から見ると、新しく生成された画像のスタイル、色調、キャラクターの一部のポーズが復元および保存されるため、シャッフル モデルを使用して元の画像を参照し、画像を再構成して生成することができます。新しいイメージ。
ランドスケープクラスイメージの処理効果を見てみましょう。
完成した絵から判断すると、主な配色とスタイルは元の絵のスタイルを参照しており、構図の構造にもいくつかの参照があります。
新機能やモデル効果の紹介はこれで終わり、次はControlNet1.1のインストールと使い方を紹介します。
これまでは Control プラグインを使用していましたが、実際には、新しいバージョンのモデルを使用するには、プラグインを新しいバージョンにアップグレードするだけで済みます。したがって、プラグインを更新し、新しいモデルをダウンロードしてそれを挿入するだけです。
2、ControlNet1.1をインストールする
このアップグレードとインストールには 2 つの主要なポイントがあります。
-
ControlNet プラグインのバージョンのアップグレード
-
各種プリプロセッサ搭載モデル
Stable Diffusion 統合パッケージをインストールしていない場合は、Stable Diffusion Research (1) sd 統合パッケージ v4.2 バージョンのインストール手順を参照してください。この記事では、Stable Diffusion 統合パッケージのインストールに必要なコンピュータ構成について学び、関連するインストールをダウンロードします。パッケージ。
まず、ControlNet 1.1 のインストール ファイルを準備する必要があります。このファイルは統合パッケージsd-webui-aki-v4.2 バージョンに組み込まれています。ダウンロードしていない場合は、自分でダウンロードできます。
1. ControlNet プラグインのバージョンをアップグレードする
最初のステップは、統合パッケージ ディレクトリ sd-webui-aki-v4 に移動し、A launcher.exe を直接ダブルクリックして実行します。
起動後は以下のようになります。
2 番目のステップでは、左側のバージョン管理をクリックします。
3番目のステップは、拡張機能タブに切り替えて、右上隅にある「ワンクリック更新」ボタンをクリックすることです。
2. さまざまなプリプロセッサ モデルをインストールします (オプション)
最初の手順では、プリプロセッサ モデル フォルダ内のダウンロード フォルダを、プラグイン ディレクトリ内のアノテーター フォルダにコピーします。
\controlnet1.1\预处理器\download
\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator
図に示すように:
2 番目の手順では、controlnet1.1 モデルを sd-webui-controlnet\model フォルダーに配置します。
\controlnet1.1\模型
\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\models
上記の操作が完了したら、ランチャー、コンソール、WebUI を閉じ、再起動すると有効になります。
図に示すように:
3. ControlNet1.1 のユーザー エクスペリエンスとボスに関するいくつかの変更
1. 色反転モードは別個のプリプロセッサになりました
2.パーフェクトピクセルモードを追加
[後で] を選択すると、ControlNet 処理に関するいくつかの解決の問題を解決できます。
3. 新しい制御モード
新しい制御モード:
- バランスの取れた
- より迅速な
- ControlNet を優先する
ControlNet にさらに偏ることを選択する場合は、CFG を減らす必要があります。
4. ボスのHEDがSoftEdgeに変更されました
5. いくつかのプリプロセッサを追加
OpenPose プリプロセッサ -> OpenPose モデル
Openpose_full、1 つのモデル ジェスチャ、手、顔がすべて完了
6. ボスの深度モデル -> 新しいバージョンでは Leres++、Zoe プリプロセッサを推奨
さて、今日の共有はここまでです。ControlNet1.1 のその他の機能や変更点については、ここでは詳しく説明しません。興味のある友人は自分で勉強してください。次回はsdの各機能モジュールの詳しい活用方法をお届けしますので、お楽しみに。