ついにSDに写真を配置できるようになりました！ Controlnet の新しいプロセッサー IP アダプター

出典: AI モーメント

最近、皆さんのSDがバージョン1.6にアップデートされ、コントロールネットプロセッサにいくつかのプリプロセッサが追加されましたので、そのプリプロセッサの機能を一つずつ紹介していきます。今日紹介したいのはipアダプターです。簡単に言うと画像をパディングする機能で、コントロールネットに画像をアップロードし、このプリプロセッサを通してアップロードされた画像を元に画像を生成する機能で、mj.Mat関数に相当します。次に、このプリプロセッサについて詳しく説明します。

ステップ 1: プリプロセッサをダウンロードする

1. このプリプロセッサはありますが、このファイルがまだ不足しているため、プリプロセッサをダウンロードする必要があります。

2. こちらの Baidu Netdisk にアップロードしましたので、ご自身でダウンロードしていただけます。

抽出コード：aqzk

アクズク

解凍コード：なし

3. 全員がダウンロードしたら、H:\SD\sd-webui-aki\sd-webui-aki-v4.2\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator に配置します。 \ダウンロード。

ステップ 2: 使用方法

1. まずはランダムな画像を作成しましょう 例えば、私はここでこの画像を作成しました。

02. ここでは、controlnet を開いてこの画像をアップロードします。

04. 私たちのプリプロセッサとモデルは私に従って選択します。

プリプロセッサには 2 種類あり、1 つは sd1.5 をサポートし、もう 1 つは sdxl をサポートします。構成の都合上、ここでは sd1.5 のもののみを説明します。xl のものは自分で学習できます。

5. エフェクトに応じてコントロールのウェイトを変更できますが、ここでは 0.5 を選択し、クリックしてプレビューします。

06. プロンプトワードの部分に戻りましょう。男の子を入力します。モデルについては、誰もが適切なモデルを選択する必要があります。ここではチョコレートの男性モデルを選択します。

07. 「生成」をクリックします。 (ここで画像のサイズを同期することを忘れないでください)

どうですか? Mj のパッド マップと比較してどうですか? かなり良いと思います。それではウェイトを少し上げたほうが良いでしょう。ここでは 0.7 に上げて、もう一度 Generate をクリックします。

スタイルが元の絵にどんどん似てきていることがわかりますが、男の子のプロンプトの言葉の理解力が低く、生成された絵がより女の子らしくなってしまいます。

8. さて、効果はどうですか?写真をいくつか紹介します。

原画：

グラフを生成します:

効果は依然として良好であると言えますが、細部ではまだ多くの変更が加えられています。

ステップ 3: 原理分析

1. 原則: プロンプトワード + コントロールネット画像 = 生成された画像。

2. 一言：美少年。

原画：

グラフを生成します。

さて、今日はここまでですので、興味のある方はぜひ行ってみてください！