[安定した拡散は拡張機能 + プラグインとモデル リソースを使用します (パート 1])

画像


個人ウェブサイト: https: //tianfeng.space

序文

前回のモデルの使い方とプラグインのおすすめからかなり時間が経ってしまいましたので、使い方の拡張についてはまた別の記事で書かせていただきますね、やっぱり時代の流れについていかないといけないので、今のうちにサクッと書きますねこの 2 日間で時間を決めて、すべて書きましょう。前回のモデルプラグインの使い方とおすすめ

1. プラグインの推奨

1.qrコードモンスター

qrcode-monster は、クリエイティブな QR コードを生成できるコントロールネット モデルです。また、最近の蔡徐坤錯視写真やさまざまな省や都市のクリエイティブな風景写真などの画像を渡すことによって、入力画像要素を含む画像を生成することもできます。それ。 !

https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster/tree/main

画像

モデルの重みと構成ファイルをダウンロードします。これには魔法が必要です。自分で解決する必要があります。私には渡せません。絵を描くグループを見つけて、そのグループの友達に聞いてみると、おそらく教えてもらえるでしょう。

画像

モデルを **\sd-webui-aki-v4\extensions\sd-webui-controlnet\models** に配置し、webui を開始します

(masterpiece, best quality:1.3),extremely high detailed,intricate,8k,big tree,landscape,lakes,stream,mountain

順方向に風景や山のプロンプトワードを書き、逆方向にランダムなプロンプトワードを書いても問題ありません。画像

参考までに、これは非常に単純でほぼ同じです。

画像

これにより、アップロードされた写真に加えて、重み付けも適切に調整されます。エフェクトによってはテキストも使用できます。

画像

[外部リンク画像の転送に失敗しました。ソース サイトにはリーチ防止メカニズムがある可能性があります。画像を保存して直接アップロードすることをお勧めします (img-5f83ZcsW-1692350691730)(https://tianfeng.space/wp-content/uploads) /2023/08/uTools_1691991261123 .png)]

2.sd-webui-openpose-editor

sd-webui-openpose-editor は、controlnet で直接使用できるオープンポーズエディターです。オープンポーズを抽出するサンプル画像をアップロードした後、直接編集できます。たとえば、手が崩れるなどの場合は、調整されたと見なされます。

画像

拡張機能リストに直接インストールすることも、https://github.com/huchenlei/sd-webui-openpose-editor にインストールすることもできます。

再起動後、「編集」をクリックします

画像

画像

操作方法は直接ドラッグするだけですが、相手が納得しない場合は左側で直接削除して再度追加して編集&ドラッグすることも可能です。

  • Qiuye ランチャー コントロールネットの最新バージョンにはdw-openpose-fullが追加されており、良好な結果が得られ、手の認識率が大幅に向上します。

画像

  • 同時に、プロンプトワードオプションも追加されました。プロンプトワードを確実に入力できます。プロンプトワードの書き方に悩む必要はもうありません。さまざまなプロンプトワードとプロンプトワードが含まれています。クリックして書き込むことができます。

画像

3.sd-webui-深さ-lib

sd-webui- Depth-lib は、多くの手モデルを提供できる深度マップ プラグインです。これは、画家の手の頻繁な崩れを補うのに非常に適しています。まず、ダウンロード URL にアクセスします。

https://github.com/jexom/sd-webui- Depth-lib

Webui Web サイトの拡張機能を使用してインストールすることも、圧縮パッケージをダウンロードして拡張機能ディレクトリに解凍することもできます。インストール後、手のモデルはあまりありません。C ステーションに移動して画像をクリックしましょう。

https://civitai.com/models/67174

画像

900 個の手の動きが含まれています。ダウンロードして解凍し、すべての pp_hand をコピーして、プラグイン ディレクトリのマップに配置します。

画像

再起動して webui インターフェイスに移動します

画像

上記の openpose エディタに基づいて手を直接最適化できます。openpose を抽出した後、それを背景として手を追加し、controlnet に送信します。2 番目の controlnet は openpose 画像をインポートします。前処理を選択する必要はありません。Controlnet は選択しますそれぞれ深さとオープンポーズ。

画像

4.roop(顔変更プラグイン)

https://github.com/s0md3v/sd-webui-roop

画像

Visual Studio をまだインストールしたことがない場合は、ダウンロードしてインストールし、Python 開発と C++ デスクトップ開発を確認してください。

画像

次に、拡張機能ディレクトリにプラグインをダウンロードします。ダウンロード方法の詳細については説明しません。これで問題ないことがわかります。

画像

モデルinswapper_128.onnxをダウンロードし、models/roop/ ディレクトリに置きます。新規作成はありません。画像

pip install insightface==0.7.3

画像

ランチャー設定のプロキシ ポートをコンピュータの設定と同じになるように変更します。

画像

画像

クリックして有効にすると、数字はキャラクターの顔を画像の左から右に変更することを表します。0 が最初で、修復強度は顔の変更の程度です。一般的な効果

画像

5.sd-webui-qrcode-toolkit (アート QR コード)

拡張機能ページから直接インストールして再起動します

画像

次に、https://cli.im/textに移動し、「デコード」をクリックして、QR コード画像をアップロードし、デコードされた結果をコピーします。

画像

これを一行目にコピーし、その他の設定は以下の通りで、ピクセルサイズを22程度まで上げてダウンロードをクリックします。
画像

画像の説明を追加してください

テストを重ねた結果、いかにQRコードのような画像を構築するかがポイントとなりましたが、プロンプトワードのコピペが全体的に使いづらい、もしくは効果が薄いため、760x760の画像を760x1460に変更し、さらに追加の画像を追加しました。ただの空白の大きなモデル: Sushi 2.5D

画像

4k,photorealistic,cinematic,a girl,flower,skirt,multicolored hair,holding (flowers in hand:1.2),wedding_dress,scenery,white hair,ultra high res, high resolution, 8k resolution, wallpaper,

パラメータ: ステップ数は 30 未満、重みは 1.1 ~ 1.4 です。これら 2 つのパラメータが主に使用されます。他のパラメータはほとんど影響しません。生成された画像は良好ですが、コードをスキャンできない場合、通常、ステップ数が減少し、コントロールネットの重量が増加します。その効果は次のとおりです。

画像

5.光源制御

  • コントロールネットタイル

即効性のある言葉

contrast between light and dark,Dark environment,The strong light shining on girl's body,best quality,masterpiece,(photorealistic:1.4),1girl,solo,shirt,

パラメータ: ステップ数: 30、高解像度倍率 2 倍、R-ESRGAN 4x+、再描画振幅 0.3、サンプリング DPM++

画像

Baidu ですべての光源の写真を検索できますが、その効果は正直想像以上に優れています。

画像

  • コントロールネットの深さ

他のすべてを変更せずに深さに変更します画像画像

  • コントロールネットの明るさ

https://huggingface.co/ViscoseBean/control_v1p_sd15_brightness/tree/main

画像

に入れる画像

画像画像

  • コントロールネットイルミネーション

https://huggingface.co/ddoanlinh/controlnet_illumination/tree/main

画像は冗長なので省略します。ダウンロードしてディレクトリに置きたいです。パラメータは明るさとまったく同じです。

まとめると、後者は強めで明るく、前者は柔らかく自然な印象ですが、個人的には前者が好きです。

6.二次元から現実の人物に変身

  • タイル

画像

  • 線形

画像

大型モデルには実在の人物を選択し、セリフは絵を使ってセリフを反転させてから、シーンに合わせた言葉を追加します。状況に応じて再描画 0.3 ~ 0.5、ウェイト 0.7 ~ 1、その他のパラメータは基本的に変更せず、実際の人間に適したサンプラー増幅アルゴリズムを選択するだけです。

これら 2 つの方法の違いは、基本的にタイルを元の画像に合わせて修復および拡大することであり、これは等比率修復および拡大に相当し、キャラクターは現実の人物になりますが、拡張性は低いです。リニアは線画を元に再描画し、描画制限を緩和することでより自然な描画になりますが、元の描画とは異なる場合があります。それぞれに独自の利点があり、状況に応じて異なります。

画像

7. ダイナミックビデオトランジション(ループバックウェーブ)

https://rentry.co/sd-loopback-wave

画像

クリック

画像

右クリックして Loopback Wave Script V1.4.1.py ファイルとして保存するか、ここをクリックして私がダウンロードしたファイルをダウンロードします。

リンク: https://pan.baidu.com/s/1OtZUWScRpeHu010abrwPdw
抽出コード: xu8w

ファイルをスクリプトディレクトリに置き、再起動します画像

まず素敵な写真を生成してから、そのシードを取得します
画像

webui に来て、否定的なプロンプト単語のみを書き、スクリプトには肯定的な単語を書きます。その他のパラメータは次のとおりです。

画像

画像

一番下のスクリプトに移動し、ループバック ウェーブを選択します。私の場合、7 枚の写真のシードを取得しました。各ウェーブのフレーム数が 20 であると仮定すると、フレームの合計数は 140、ノイズ除去強度は 0.6 になります。

画像

プロンプト ワードは次のように記述されます。最初の 0 がフレーム番号、次の 2 つのコロンがシード、次のコロンがプロンプト ワードです。

注: 最初の数字は仕様に従って記述する必要があり、1 ウェーブあたりのフレーム数が 20 の場合、最初の数字は 0、2 番目の数字は 20 になります。

画像

0::3569324999:1girl, hair ornament, clover, bow, twintails, smile, stuffed toy, green bow, solo, clover hair ornament, long hair, four-leaf clover, stuffed animal, green nails, black hair, hairclip, shirt, skirt, low twintails, doughnut, bangs, collared shirt, white shirt, stuffed bunny, plaid, long sleeves, food, bowtie, looking at viewer, pink bow, four-leaf clover hair ornament, hair bow, nail polish, sweater, blush, pink eyes
20::3960688666:(masterpiece,best quality), 1girl,petite,flat chest, solo, solo focus, (animal ears, rabbit ears), barefoot, knees up, dress, sitting, short sleeves, looking at viewer, grass, short hair, smile, white hair, puffy sleeves, outdoors, puffy short sleeves, bangs, on ground, full body, animal, sunlight, brown eyes, dappled sunlight, day, depth of field, open mouth, (flower, hair flower), w, wariza, white dress
40::2834188876:(masterpiece:1.2),best quality,extremely detailed, BREAK cute girl,solo,shiny skin,small breasts,very long hair, detailed eyes,perfect anatomy, cute eyes,(red eyes:1.3),(black hair:1.4), BREAK white shirt,black skirt,magical academy cloak,white panties, BREAK galaxy sky,shooting star,at night,magic circle,fantasy, BREAK character focus, BREAK
60::986005930:masterpiece, best quality, ultra-detailed, highly detailed, <lora:karyl_v1:1>, karyl, green eyes, black hair, bangs, twintails, low twintails, hair bow, cat ears, small breasts, bare shoulders, black pantyhose, bow, brooch, detached sleeves, dress, frilled dress, frills, jewelry, long sleeves, purple bow, sleeveless, sleeveless dress, <lora:saltbae-17:1>, saltbae, sunglasses, sprinkling salt, table, chopping board,
80::1313366984 :1girl,solo,bow,fake_animal_ears,mouse_ears,frilled_skirt,frills,hair_ornament,short hair,hairband,looking_at_viewer,multiple_girls,open_mouth,rat,red_eyes,shirt,silver_hair,skirt,smile,white_hair,white_shirt,v <lora:pcr2-000012:0.7>,Random Posture,
100::4246031170:masterpiece, best quality, 1girl, (colorful),(delicate eyes and face), volumatic light, ray tracing, bust shot ,extremely detailed CG unity 8k wallpaper,solo,smile,intricate skirt,((flying petal)),(Flowery meadow) sky, cloudy_sky, moonlight, moon, night, (dark theme:1.3), light, fantasy, windy, magic sparks, dark castle,white hair
120::326439951:(best quality,high resolution,Beautiful detailed eyes,White lighting:1.2),red eyes, looking at viewer, long hair, black hair, long boots, black footwear, blush, sitting, long sleeves, bangs, parted lips, black hair, dress, knees up, brown hair, white skirt, frills, skirt,thighs, sidelocks,

画像

「生成」をクリックするだけで、写真を編集ソフトウェアで開いてビデオに再編成することもできます。

画像

クリックしてエフェクトを表示します:ビデオの一部(小さなカードでキャッシュできる可能性があります)

概要: まだ終わっていません。長すぎるので、学習に飽きてしまうかもしれません。では、またお会いしましょう。

おすすめ

転載: blog.csdn.net/weixin_62403633/article/details/132366215