安定したストリーミング内で AI アートの作成をより正確に制御する方法を探している AI アーティストは、ControlNet の使用方法を学ぶことに興味があるかもしれません。 AI アーティストが画像を生成および操作する方法を変革した安定した配信モデル。 このモデルを使用すると、ユーザーは参照画像から人間の構図やポーズをコピーでき、これまで達成できなかったレベルの精度が得られます。 この記事では、イメージ プロンプト アダプターに焦点を当て、ControlNet の使用の複雑さと、それを使用して AI 画像をカスタマイズする方法について詳しく説明します。
ControlNet は、安定した拡散パターンを制御するために設計されたニューラル ネットワーク モデルです。 これは、SDXL テンプレートを使用する最も基本的な形式であるテキスト プロンプトに条件付けの追加レイヤーを追加します。 この追加のコンディショニングはさまざまな形をとることができ、ユーザーは AI によって生成された画像を正確に操作できるようになります。 ControlNet のイメージ プロンプト アダプターは、AI が生成した顔の周りに人物と背景を作成したり、写真内の人物の年齢、髪の種類、色を変更したり、デジタル アートの要素を変更したりするために使用できる強力なツールです。
SDXL と ControlNet で AI アートのパーソナライゼーションを使用するにはどうすればよいですか?
ControlNet とそのイメージ プロンプト アダプターは、AI イメージを操作および生成するための強力なツールを提供します。 デジタル アートの変更、AI 画像の再生成、または顔画像から身体全体と環境を作成する場合でも、ControlNet は、「当時はアクセスできなかった」レベルの精度と制御を提供します。 適切な知識とツールがあれば、画像の操作と生成の可能性は事実上無限です。
このビデオを YouTube でご覧ください。
Stability AI によって作成された安定拡散のトピックに関する他の記事も興味があるかもしれません。
- 安定拡散 SDXL 自動 1111 ツールと GUI
- Stable Diffusion SDXL 1.0 に基づく Juggernaut XL AI アート ジェネレーター
- 安定した拡散を使用して顔画像を交換して一貫性を保つ方法
- Stable Diffusion の AI アートで一貫したキャラクターを作成する方法
- Stable Diffusion SDXL 1.0 のテキストから画像への AI アートをインストールするにはどうすればよいですか?
- Stable Diffusion XL NVIDIA TensorRT のパフォーマンスの向上
ControlNet を使用するには、ユーザーは XNUMX つの Hugging Face IP アダプター テンプレートと、IP アダプターと顔のテンプレートをダウンロードする必要があります。 IP アダプタ テンプレートは、Stable Broadcast などのテキストからイメージへのストリーミング モデル用のイメージ プロンプト テンプレートであり、他の ControlNet モデルと組み合わせて使用できます。
IP アダプター モデルを使用するワークフローには、SDXL で参照 AI イメージを再生成し、ポジティブ プロンプトを使用して最終イメージに要素を追加することが含まれます。 このプロセスにより、ユーザーは ControlNet を使用してデジタル アートの要素を変更できるようになります。 たとえば、ユーザーはインペイントを使用して、ベース AI イメージの髪を変更したり、別のベースイメージの顔をペイントしたりできます。 この技術により、被写体の体と顔の角度をある程度制御できるため、ユーザーは修復に頼ることなく画像の被写体を変更できます。
ControlNet モデルは、他のモデルと組み合わせて使用することもできます。 たとえば、Rev アニメーション チェックポイントを使用すると、AI が生成した家のベクターを取得し、アニメーション アートとして再生成できます。 この技術は、さまざまな環境や気象条件でアートを操作するために使用できます。
ControlNet の最も強力な機能の XNUMX つは、顔画像から身体全体と環境を作成できる機能です。 これは、プラス フェイス モデルと、開いたポーズを使用する XNUMX 番目の ControlNet イメージを使用して行われます。 この機能により、ユーザーは被写体の体や顔の角度をより適切に制御できるようになり、よりリアルで詳細な画像を作成できるようになります。 ControlNet とそのインストール方法の詳細については、Stability AI の Web サイトを参照してください。