安定拡散の実践運用~大型モデル紹介~

この記事は大規模モデル関連の内容に特化したセクションがあり、読む前に次の点に注意してください:
安定した普及の実践的な運用

モデルダウンロードサイト
国内:https://www.liblibai.com
海外:https://civitai.com(サイエンスインターネット)

1. 開発経緯

1 公式モックアップ

大規模なモデル 大規模なモデルを最初からトレーニングするには非常に長い時間がかかり、コストは非常に高く、数百万ドルに達します。

2 チェックポイント

公式の大規模モデルに基づいて再トレーニングするのが CHECKPOINT モデルですが、ハードウェア要件が依然として非常に高く、使用があまり柔軟ではありません。

3 埋め込み

その後、埋め込みモデルが開発されました。ファイルは小さく、トレーニングコストは低いですが、効果は満足のいくものではなく、利点は柔軟性です

4 Lora とハイパーネットワーク

2. 大型モデルとは

さまざまな画風をパッケージ化したものとして理解でき、ミッドジャーニーとは異なり、中国風の墨、ディズニーなど、希望のスタイルをキーワードに記入するだけです。以下の通り:

安定した拡散には、スタイルを指定するための大きなモデルが必要です (ナショナル スタイル モデル、ディズニー モデルなど) 詳細については、チェックポイントを参照してください。このモデルを選択すると、すべてのキーワードがこのモデルに従って決定されます。 , モデルごとにキーワードが異なるため、SD は習得が難しくなります。

3 使用上の注意

2番目を通して、各大きなモデルのキーワードが異なることがわかったので、大きなモデルをダウンロードするときは、この大きなモデルをうまく使用できるように、作者の説明と作者のキーワードを詳細に読み、キーワードを通じて学習する必要があります。

文章


シリアルナンバー モデル名 導入
1 Stable Diffusion 常用公式モデル V1.5 正式
2 安定拡散XL1.0 正式
3 なんでもシリーズ 二次元
4 リアルビジョン V2.0 現実的なモデル
5 ドリームシェイパー 肖像画
6 メイナミックス 漫画
7 チルアウトミックス 現実
8 マジミックスシリーズ
9 AbyssOrangeMix2_hard.safetensors 漫画

1.オフィシャルモデル

一番下のモデル/大きなモデルは、SD が描画できる基本モデルです。SD ソフトウェアをインストールした後は、基本モデルで使用する必要があります。さまざまな基本モデルが、それぞれの絵画スタイルと専門分野に焦点を当てています。コモンモード、接尾辞 ckpt、セーフテンサー、2 ~ 8G のサイズ。
[1] Stable Diffusion で一般的に使用される公式モデル V1.5 バージョン、v1-5-pruned.ckpt。
ダウンロードリンク: https://openai.wiki/stable-diffusion-model-v1-5.html
[2] 新バージョンへのアップグレード [Stable Diffusion XL1.0 正式版]
ダウンロードリンク: https://www.liblibai. com/modelinfo/77a9ca05a2c7c93ceb05f4dceae9ed97
【3】2 次元の anything-v5-PrtRE.safetensors モデルに偏った Anything シリーズ モデルは、
ポートレート、風景、動物、漫画、SF など、さまざまなタイプの画像を生成するために使用できます。高い適応性と汎用性があり、効果は強い現実感と細部を復元する能力を示します。
ここに画像の説明を挿入

詳細な紹介リンク:https://zhuanlan.zhihu.com/p/640797704

2. Realistic Vision V2.0、大型リアルモデル、

リンク: https://pan.baidu.com/s/1wat_55oIRa-fSSleqpE1kw 抽出コード: 5u8w
ここに画像の説明を挿入

3、ドリームシェイパー

このモデルはポートレートのプロンプトに特に適しており、被写体の雰囲気やスタイル要素を捉えた素晴らしいアート作品を作成します。風景に関しては、DreamShaper は鮮やかな色と魅惑的なディテールを備えた、興味深く複雑な画像を作成できます。イラストでは、イメージに命を吹き込む鮮やかな色とさまざまな形が表現されています。
リンク: https://pan.baidu.com/s/1zZeTk3J4odbWqjwJle_1Bg 抽出コード: ba47
独自のAIモデルを使ってイラストを制作したい方におすすめのモデルです。 さらに、さまざまな設定を試して、結果をよりデジタル芸術作品のように見せることができます。 最良の結果を得るには、さまざまなステップ数を試し、このモデルを使用してエンジニアリング手法をヒントにすることをお勧めします。

4、メイナミックス

MeinaMix は最も人気のあるモデルの 1 つですが、それには十分な理由があります。このモデルは、独特の絵画的な品質を持つ素晴らしいイラストを作成することができます。Anything モデルと同様に、MeinaMix はキャラクターに関してはアニメ スタイルに重点を置いていますが、複雑なイラストを作成することもできます。
リンク: https://pan.baidu.com/s/1ECn3AAU6CBj_6rOriFn7ig 抽出コード: u24m
ここに画像の説明を挿入

5. ステーション C または liblib でチェックポイント モデルをダウンロードするには、ラベルはチェックポイントです。

ここに画像の説明を挿入

6、ChilloutMix-韓国人形らしさ

SDモデルと言えばチルアウトは欠かせません。その後のアップデートの停止により、Chillout に代わる多くのモデルが市場に登場しましたが、Chillout は依然として記念碑、つまり最初に爆発的に普及した現実のモデルです。
実写描画ではチルアウトが圧倒的なシェアを誇る。とても良いモデルなのですが、成熟が早すぎたのか、すぐに更新が止まってしまいました。最新バージョンは 2023 年 2 月バージョンです。

モデルは 32 と 16 の 2 つの精度に分かれており、そのうち 16 精度はビデオ メモリを大幅に節約できますが、形而上学的な理由から、私は依然として 32 精度を使用しています。
紹介とダウンロードのリンク: https://zhuanlan.zhihu.com/p/632997666
ここに画像の説明を挿入

7.majicMixシリーズ

マジックも神と言えるモデルです。著者は中国の大物マイ・ジュ氏。

光と影の制御は非常に優れており、この影の効果を制御する能力は、以前の MJ に比べて SD では比較的弱い部分でしたが、majic ではそれを補っています。特に女性の目や態度はカラコンをしているようなものです。キャラクターの小さなそばかすやほくろも現れることがあります。特に衝撃的なのは、男性に対する表現力です。筋肉から血管までとてもリアルです。

AIブロガーのNausjiaとNanaソースが独自のloraを洗練してソンブラに統合した後、作者は実際のゲームに属する最新のV5バージョンで正式版にNanaソースを直接統合したという逸話があります。ボヨンが生まれました。

このモデルでは、サンプラーとしてオイラーを使用することを推奨しています。

そして、著者はN回強調しました...顔の修理を開けないでください!
いくつかのマジック シリーズがあります。
ここに画像の説明を挿入
ここに画像の説明を挿入

7.1 majicMIX Realial: 実際のシステムに焦点を当てた一般的なバージョンです。

ダウンロード紹介リンク: https://www.liblibai.com/modelinfo/bced6d7ec1460ac7b923fc5bc95c4540

ここに画像の説明を挿入

7.2 majicMIX ファンタジー: スタイルは非常に美しいですが、最高の効果を得るには遠距離の顔はペイントする必要があります。

ダウンロードリンク: https://www.liblibai.com/modelinfo/ab2e95bb3f3e746456d8955216865963
ここに画像の説明を挿入

7.3 majicMIX lux: リアルとファンタジーが融合した、カボ遊びの夢にふさわしいモデルです。

7.4 majicMIX ホラー: ホラーのテーマ。

8.AbyssOrangeMix2_hard.safetensors

ダウンロードリンク: https://www.liblibai.com/modelinfo/2bd0c7cec6e843f69ee446c9820adbf8
参考例:
ここに画像の説明を挿入
以下は生成されたドラゴンですが、以前のものよりかなり良くなりましたか?

終わり


一般的に使用される基本モデルとプラグイン (継続的に更新)
リンク: https://pan.baidu.com/s/1c9utQmWlGcRqLTr_kftTyA?pwd=1111
抽出コード: 1111

おすすめ

転載: blog.csdn.net/weixin_43360707/article/details/132628319