今回はStable Diffusionでリアル系イラストを生成できるモデルを紹介します。
Stable Diffusionではどのようなモデルを使用するかによって、生成される画像のクオリティが大きく変わりますので、モデルの選択は重要な要素となります。
本記事で紹介するモデルは、どれも実写と見分けがつかないほどハイクオリティなイラストを生成できますので、ぜひ試してみてください。
この記事でわかること
- Stable Diffusionで使用できるフォトリアル系(実写)モデルの特徴
- 各モデルでどのような画像が生成できる(生成画像サンプル)
- 各モデルの入手先
- WebUIでのモデルの設定方法
Stable Diffusionのアニメ調モデルについては、以下の記事で紹介しています。
あわせて読みたい
StableDiffusionのアニメ調モデルを紹介
今回はStable Diffusionで使えるおすすめの学習済みモデルを紹介します。Stable Diffusionでは、同じプロンプトを入力しても、モデルを入れ替えることで出力されるイラ…
また、当ブログのStable Diffusionに関する記事を以下のページでまとめていますので、あわせてご覧ください。
あわせて読みたい
Stable Diffusionの使い方を解説! | AIで画像生成する方法
最近、Stable Diffusionっていう画像系AIが話題だよね使ってみたいけど、どうすればいいんだろう? Stable Diffusionはオープンソースだから、自分でPythonのコードをダ…
Stable Diffusionの導入方法から応用テクニックまでを動画を使って習得する方法についても以下のページで紹介しています。
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
目次
Stable Diffusionとは
Stable Diffusion(ステーブル・ディフュージョン)は2022年8月に無償公開された描画AIです。ユーザーがテキストでキーワードを指定することで、それに応じた画像が自動生成される仕組みとなっています。
NVIDIAのGPUを搭載していれば、ユーザ自身でStable Diffusionをインストールし、ローカル環境で実行することも可能です。
(出典:wikipedia)
Stable Diffusionの使い方
Stable Diffusionでフォトリアル系のイラストを生成する方法を以下の記事で解説しています。
後程、紹介するモデルを利用するためには、Stable Diffusionの環境を構築しておく必要がありますので、事前に済ませておいてください。(モデルの配置方法についても記載しています)
あわせて読みたい
StableDiffusionでリアル系イラストを生成する方法 | MUSE_v1モデルを試す
これまでStable Diffusionを使ってアニメ調のイラストを生成するためのノウハウと紹介してみましたが、今回はリアル系のイラストを生成する方法を解説します。リアル系…
著:今村勇輔, 著:比嘉康雄, 著:五十嵐良平
¥2,200 (2024/09/19 20:41時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
著:チーム・カルポ
¥2,851 (2024/09/19 20:41時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
フォトリアル系(実写)モデル紹介
Stable Diffusionでリアル系のイラストが生成できるマージモデルを紹介します。
fuduki_mix(2023/08/30)
fuduki_mixは「yayoi_mix」「kisaragi_mix」の製作者、こたじろうさんが公開されているモデルです。SDXLをベースとしており、ハイクオリティなアジア人風の人物を描画できるフォトリアル系モデルです。
fuduki_mixで生成した画像
配布先
あわせて読みたい
fuduki_mix – v2.0 | Stable Diffusion XL Checkpoint | Civitai
【推奨設定】 サンプラー:DPM++ 2M SDE karras サンプルリングステップ 30~40 解像度:1152✕896 【お願い】 本モデルの使用において、以下に関しては厳に使用を禁止いた…
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
BRA(Beautiful Realistic Asians) V6(2023/07/23)
PleaseBanKaiさんのハイクオリティな背景(特に街中の人混みなど)と人物を両立した、BRA最新のV6が公開されました。
アジア系の女性を描きたい人にもおすすめです。
BRA(Beautiful Realistic Asians) V6で生成した画像
配布先
あわせて読みたい
Brav6.safetensors · BanKaiPls/AsianModel at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
BracingEvoMix(2023/6/2)
「chilled_remix」、「GenesisLifeMix」の制作者である鎖城郎郭さんの新作モデルです。
極東アジア人の顔の人物を生成できるモデルとなっています。
BracingEvoMixで生成した画像
配布先
あわせて読みたい
sazyou-roukaku/BracingEvoMix · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
Stable Diffusionでの画像生成に最適! VRAM16GB搭載モデル!
¥91,485 (2024/09/19 20:41時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
chilled_remix_v2(2023/5/29)
鎖城郎郭さんが公開されているChilloutMixのジェネリックモデル、chilled_remixの最新バージョンであるv2が公開されました。
最新バージョンでも非常にクオリティの高いアジア系の美少女が生成できます。
また、これに伴い、chilled_remix_v1は公開終了となりました。
chilled_remix_v2で生成した画像
配布先
あわせて読みたい
sazyou-roukaku/chilled_remix · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
BRA(Beautiful Realistic Asians) V5(2023/5/6)
リアルな風景が描画できるモデルBRAの最新バージョンです。
特に背景の描画が非常にリアルで、街中の人混みなどを生成したい場合に重宝するモデルです。
人物の安定感も非常に高いです。
BRAV5で生成した画像
配布先
あわせて読みたい
Beautiful Realistic Asians – v7 | Stable Diffusion Checkpoint | Civitai
Im currently preparing and collecting dataset for SDXL, Its gonna be huge and a monumental task. I wanna thank everyone for supporting me so far, a…
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
CutyElfMix(2023/4/30)
フォトリアル系でファンタジー世界のエルフ風キャラクターを生成できるモデルです。プロンプトでエルフの耳の形状を指定しなければ、通常の人間を生成することも可能です。あいもりさんがTwitterでモデルのレシピを公開されています。
CutyElfMixで生成した画像
配布先
CutyElfMixはモデルとしては配布されておらず、レシピを元に自分でマージモデルを作成することで利用できます。
CutyElfMixの作り方を以下の記事で解説しています。(機械学習やプログラミングの知識がなくても作成できます)
あわせて読みたい
Stable Diffusion用のマージモデルを作成する方法 | AUTOMATIC1111 Checkpoint Mergerの使い方
今回はStable Diffusionで使用できるマージモデルの作り方ついて解説します。AUTOMATIC1111のCheckpoint Mergerという機能を使うと、簡単に好みのモデルを組み合わせて…
GenesisLifeMix(2023/4/28)
スラブ系の女性が生成できるモデルです。プロンプトで「Japanese idle」等のキーワードを入れると、日本人風の人物も生成できますので、少し大人びた顔立ちや、つり目要素が欲しい場合におすすめのモデルです。
GenesisLifeMixで生成した画像
配布先
あわせて読みたい
sazyou-roukaku/GenesisLifeMix · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
Stable Diffusionでの画像生成に最適! VRAM16GB搭載モデル!
¥91,485 (2024/09/19 20:41時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
Soda Mix(2023/4/25)
Umiseさんが公開されているモデルです。リアル系モデルですが、アニメキャラっぽい顔立ちのキャラクターを生成できます。
Soda Mixで生成した画像
配布先
あわせて読みたい
Soda Mix – v1.0 | Stable Diffusion Checkpoint | Civitai
This model uses the core of the Defacta 3rd series, but has been largely converted to a realistic model. It supports a new expression that combines…
chilled_remix_v1公開終了
鎖城郎郭さんが公開されているマージモデルです。ChilloutMixのライセンスが変更され、商用利用不可となったため、ChilloutMixの画風に似たイラストが生成できるよう作成されたマージモデルです。日本人のアイドル風キャラクターを描きたい方におすすめです。
chilled_remixで生成した画像
配布先
あわせて読みたい
sazyou-roukaku/chilled_remix · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
muse_v1
アジア系の人物を高いクオリティで出力できるモデルです。日本人を描きたい方におすすめです。
muse_v1で生成した画像
配布先
あわせて読みたい
MUSE_v1 – v1 | Stable Diffusion Checkpoint | Civitai
Styles Recommended Compatibility MUSE_girlfriend_v2 : https://civitai.com/models/13573/musegirlfriendv2 MUSE_naturalface_v1 : https://civitai.com/m…
ChilloutMix
リアル系では定番となっている、アジア系の人物が綺麗に描けるモデルです。TwitterでもChilloutMixで生成した画像を投稿されている方が多く、私も使用頻度が高いモデルです。商用利用は不可となりますので、ご注意ください。
ChilloutMixで生成した画像
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
モデルをWebUIで設定する方法
ここからは、入手したモデルファイルをWebUIで使用する方法について解説します。
モデルの設定方法
ダウンロードしたモデルをStable Diffusionのディレクトリに配置します。
実行環境により配置方法が異なりますので、ご利用の環境の項目を参考にしてください。
ローカル環境
ローカル環境で使用する場合は、ローカルPCの以下のディレクトリにモデルファイルを配置してください。
(Stable Diffusionをインストールしたディレクトリ)/stable-diffusion-webui/models/Stable-diffusion
Google Colaboratory
Google Colaboratoryでモデルファイルを配置するディレクトリは以下となります。
/content/stable-diffusion-webui/models/Stable-diffusion/
Google Colaboratoryの場合は毎回モデルをダウンロードする必要がありますので、自動でダウンロードされるよう以下のコマンドを追加します。
!wget https://civitai.com/api/download/models/15980 -O /content/stable-diffusion-webui/models/Stable-diffusion/museV1_v1.safetensors
詳細な追加方法については以下の記事で解説しています。
Paperspace
Paperspaceで使用する場合は、Paperspaceの仮想マシンの以下のディレクトリにモデルファイルを配置してください。
/notebooks/stable-diffusion-webui/models/Stable-diffusion/
モデルの選択方法
モデルファイルを配置したら、WebUIのを起動します。
WebUIの画面左上のStable Diffusion checkpoint
と書かれている項目が、画像生成に使用されるモデルを指定する項目となります。
Stable Diffusion checkpointのドロップダウンリストをクリックすると、先ほどのモデルファイルを配置したディレクトリにあるファイルが一覧で表示されますので、使用したいモデルを選択してください。
以上でモデルの設定は完了です。
プロンプトエンジニアリング(呪文作成)
Stable Diffusionでハイクオリティなリアル系イラストを生成するためには、使用するモデルとあわせてプロンプト(呪文)作成も重要になります。
リアル系イラストに特化したプロンプト作成方法について以下の記事で解説していますので、あわせてご覧ください。
あわせて読みたい
Stable Diffusionのリアル系モデルでハイクオリティなイラストを生成するプロンプト(呪文)作成法
今回はStable Diffusionのリアル系モデルを使って画像を生成する際に有効なプロンプト(呪文)を紹介します。リアル系のモデルでは人物の肌に関する描写など、アニメ調…
あわせて読みたい
Stable Diffusion 初心者から中級者が画像生成のテクニックを効率良く学べる方法を紹介
Stable Diffusionって最近話題だけど、専門用語が難しいしどこから手を付けていいかわからない… 家にゲーミングPCないし、環境のセットアップ方法を調べるのが面倒なん…
マージモデルを作成する方法
今回紹介したモデルはStable Diffusionユーザーの方が作成、公開されているものです。
お気に入りのモデルが見つかればそれを使っても良いのですが、AUTOMATIC1111の機能を使うと簡単に自分でマージモデルを作成することも可能です。
マージモデルを作成する方法については、以下の記事で解説しています。
あわせて読みたい
Stable Diffusion用のマージモデルを作成する方法 | AUTOMATIC1111 Checkpoint Mergerの使い方
今回はStable Diffusionで使用できるマージモデルの作り方ついて解説します。AUTOMATIC1111のCheckpoint Mergerという機能を使うと、簡単に好みのモデルを組み合わせて…
Stable Diffusionでの画像生成に最適! VRAM16GB搭載モデル!
¥91,485 (2024/09/19 20:41時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
キャラクター(人物)のポーズを指定して生成する
Stable Diffusionでは、AUTOMATIC1111 WebUIの拡張機能であるControlNetを使用することで、キャラクター(人物)のポーズを指定して、画像を生成することができます。
ControlNetの使い方については以下の記事で解説しています。
(フォトリアル系モデルでも使用できます)
あわせて読みたい
Stable DiffusionでControlNetを使ってキャラクターのポーズを指定する方法
今回はStable Diffusionで画像を生成する際に、ControlNetでイラストの構図を指定して実行する方法について解説します。ControlNetはStable DiffusionのWebUIであるAUTO…
また、画像生成時に失敗した手の描画についてもControlNetで修正することが可能です。
あわせて読みたい
Stable Diffusionで生成したキャラクターの不自然な手を修正する方法 | DepthライブラリとControlNetの…
今回はStable Diffusionで生成したイラストの不自然な手を修正する方法を解説します。Stable DiffusionのWebUIであるAUTOMATIC1111に、c and poser(深度ライブラリ)と…
Stable Diffusionのテクニックを効率よく学ぶには?
Stable Diffusionを使ってみたいけど、ネットで調べた情報を試してもうまくいかない…
そんな時は、操作方法の説明が動画で見られるUdemyがおすすめだよ!
動画学習プラットフォームUdemyでは、画像生成AIで高品質なイラストを生成する方法や、AIの内部で使われているアルゴリズムについて学べる講座が用意されています。
Udemyは講座単体で購入できるため安価で(セール時1500円くらいから購入できます)、PCが無くてもスマホでいつでもどこでも手軽に学習できます。
Stable Diffusionに特化して学ぶ
Stable Diffusionに特化し、クラウドコンピューティングサービスPaperspaceでの環境構築方法から、モデルのマージ方法、ControlNetを使った構図のコントロールなど、中級者以上のレベルを目指したい方に最適な講座です。
ジェネレーティブAI(画像生成AI)入門【Stable Diffusion】-プロンプトでハイクオリティな画像制作が可能
画像生成AIの仕組みを学ぶ
画像生成AIの仕組みについて学びたい方には、以下の講座がおすすめです。
画像生成AIで使用される変分オートエンコーダやGANのアーキテクチャを理解することで、よりクオリティの高いイラストを生成することができます。
AIによる画像生成を学ぼう!【VAE / GAN】 -Google ColabとPyTorchで基礎から学ぶ生成モデル-
まとめ
今回はStable Diffusionでリアル系イラストを生成できるモデル、LoRAを紹介しました。今後も新しいモデルが公開されたら随時追加していきます。
また、以下の記事で効率的にPythonのプログラミングスキルを学べるプログラミングスクールの選び方について解説しています。最近ではほとんどのスクールがオンラインで授業を受けられるようになり、仕事をしながらでも自宅で自分のペースで学習できるようになりました。
スキルアップや副業にぜひ活用してみてください。
あわせて読みたい
Pythonが学べるプログラミングスクール5選 | 初心者にもおすすめ
プログラミングスクールってたくさんあって、どのスクールを選んだらいいのかな? 自分のキャリアアップに必要なカリキュラムがあるプログラミングスクールを探したいん…
スクールではなく、自分でPythonを習得したい方には、いつでもどこでも学べる動画学習プラットフォームのUdemyがおすすめです。
講座単位で購入できるため、スクールに比べ非常に安価(セール時1200円程度~)に学ぶことができます。私も受講しているおすすめの講座を以下の記事でまとめていますので、ぜひ参考にしてみてください。
あわせて読みたい
Python初心者におすすめ! いつでもどこでもスマホで学べるUdemy講座6選
Udemyってどんなサービスなの? 仕事の案件で機械学習を扱うことになったけど、どうやって勉強したらしいんだろう? こんな悩みを解決します。 この記事でわかること Ud…
それでは、また次の記事でお会いしましょう。
著:クロノス・クラウン, 著:柳井政和
¥2,138 (2024/09/20 02:44時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
興陽館
¥1,540 (2024/09/18 08:59時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
秀和システム
¥1,210 (2024/09/21 19:39時点 | Amazon調べ)
\Amazonプライム感謝祭先行セール開催中!/
Amazon
ポチップ
コメント