StableDiffusionのアニメ調モデルを紹介

今回はStable Diffusionで使えるおすすめの学習済みモデルを紹介します。

Stable Diffusionでは、同じプロンプトを入力しても、モデルを入れ替えることで出力されるイラストの雰囲気がカラリと変わります。
今回おすすめするアニメ調モデルはどれもクオリティの高いものばかりですので、ぜひお気に入りのモデルを探してみてください。

リアル系イラストを生成できるモデルについては、以下の記事で解説しています。

また、当ブログのStable Diffusionに関する記事を以下のページでまとめていますので、あわせてご覧ください。

Stable Diffusionとは

Stable Diffusion（ステーブル・ディフュージョン）は2022年8月に無償公開された描画AIです。ユーザーがテキストでキーワードを指定することで、それに応じた画像が自動生成される仕組みとなっています。
NVIDIAのGPUを搭載していれば、ユーザ自身でStable Diffusionをインストールし、ローカル環境で実行することも可能です。
（出典：wikipedia）

モデルの変更方法

Stable DiffusionのWebUIであるAUTOMATIC1111を使ってイラストの作成する際のモデルの変更方法については、以下の記事で手順を解説しています。

AUTOMATIC1111を動作させる環境により手順が異なりますので、ご利用の環境の解説ページをご覧ください。

ローカル環境

Dockerを使わずに直接ローカル環境にインストールする方法を、以下の記事で解説しています。

Dockerを使用してインストールする方法を以下の記事で解説しています。

Paperspace

定額制のクラウドコンピューティングサービスでWebUIを使用する方法を、以下の記事で解説しています。

Google Colaboratory

Google ColaboratoryでWebUIを使用する方法を、以下の記事で解説しています。
2023年8月現在、無料プランでは、使用は許可されていませんのでご注意ください。

VAEの変更方法

Stable Diffusionのモデルによっては、使用するVAEが指定（推奨）されているある場合があります。その場合は、モデルと合わせてVAEも変更する場合がありますので、以下の記事を参考にしてください。

どのVAEを使用するかは、各モデルの配布ページを参照してください。

モデル紹介 2023年8月

ここからは実際におすすめのモデルと入手先について解説します。
ライセンスについては、各モデルのダウンロードページを参照してください。

BreakDomainXL

2023年8月現在、Stability AIの最新公式モデルであるSDXL 1.0をベースとしたBDさんのモデルBreakDomainXLです。

おまたせしました！
BreakDomainXL、リリースです！

今回は、BlazingDriveで学んだマージ技術を色々と取り入れてます。
プロンプト次第で、色んな表情を見せてくれる楽しいモデルに仕上がっています！https://t.co/fT0te2MhQR pic.twitter.com/0IUdcmzbIg

— BD (@br_d) August 10, 2023

配布先

BlazingDrive _V03

BDさんが公開しているアニメ調モデルBlazingDrive _V03です。ダイナミックな動きのあるイラストに強いモデルです。推奨VAEはvae-ft-mse-840000-ema-pruned.ckptとなります。

https://t.co/CfDezhsRwJ

BlazingDrive _V03
一般公開です！ pic.twitter.com/3bS1MIUavZ

— BD (@br_d) August 5, 2023

配布先

Shungiku-Mix

Vすき焼きさんが公開されているモデル、Shungiku-Mixです。
高いキャラクタの安定感と、繊細な背景を高次元で両立できる非常にクオリティの高いモデルです。私も2次元の中では最も使用頻度が高いです。
しばらく公開中止されていましたが、現在はCivitaiで再び公開されています。

マイナスイオン#AIart #AIイラスト pic.twitter.com/OcYcHgX36G

— Murasan@AIart (@MurasanAIart) July 1, 2023

配布先

モデル紹介 2023年7月

HimawariMix-v8

みんさんのHimawariMix最新モデルです。
手や顔の破綻に対する対策がアップデートさせれています。

HimawariMix-v8を配布したいと思います～！！
今回のv8はv7からの改良でv5と比較すると手を大幅に改善し破綻や少し遠くだと顔の造形がいまいちになる確率を改善した気がします
ちなみにテスト時と同じ中身です#HimawariMix
URL👇https://t.co/Um8F2V0yMO pic.twitter.com/OS9g9R4cJz

— みん (@min__san) July 21, 2023

配布先

BreakTheDarknessV07

NAI騒動以降のBDさん最新モデルがリリースされました。
公式SD1.5モデルをベースに追加学習を行ったモデルのみで作成したマージモデルです。
作者のBDさんがトレーニングされたモデル以外をマージしていませんので、完全NAIフリーです。

https://t.co/32RXPVJGai

BreakTheDarknessV07公開しました！
・横顔を覚えました
・チビキャラを少し覚えました
・和装を少し覚えました
・人体を少し覚えました pic.twitter.com/kGNYygz5EC

— BD (@br_d) July 23, 2023

配布先

ShiratakiMix

2023年7月現在、Vすき焼きさんのダウンロード可能なモデルの中では最新のShiratakiMixです。
キャラクタの安定感と背景のクオリティが非常に高いモデルです。

「街光のキャンプ場」
都会の灯りが見える崖上のキャンプスポット。
夏の夜空の下、現実から少しだけ離れた時間を過ごします。#waifudiffusion #ShiratakiMix #illustration #AIイラスト好きさんと繋がりたい pic.twitter.com/xxh149J5J3

— おっほ（AIイラスト、AIart専用垢） (@ohou44sub) July 2, 2023

配布先

モデル紹介 2023年4月

SakuraMix-V2

みんさんが公開されているモデルSakuraMix-V2です。
可愛いキャラを安定して生成したい方におすすめです。

SakuraMix-V2をリリースしました
今回は割とHimawariMix の没を改修する感じで作りました#SakuraMix
URL👇https://t.co/oHlYKXOrfI pic.twitter.com/9QVPdBcuiE

— みん (@min__san) March 25, 2023

配布先

SukiAni-mix

SukiyakiMix作者、Vすき焼きさんの新作モデルです。
精細な背景とアニメ風の人物を同時に出力できるようマージされたモデルです。

#SukiAniMix　#AIArtwork #AIart #AIイラスト　
朝飯のよういだー pic.twitter.com/vl2edkscb5

— たびはぱのらま (@Dsymobile4999) March 29, 2023

配布先

モデル紹介 2023年3月

OsukiniMix

SukiyakiMix作者、Vすき焼きさんの新作モデルです。
キャラクターの安定感はもちろん、背景の描画についても精細なディティールで完成度が高いです。
今回のモデルは商用利用不可となりますのでご注意ください。ライセンスの詳細は配布サイトを参照してください。

私が最近メインで使っているモデルを公開しました。https://t.co/E2b0HcTGiS

※4つほどの複数モデルを階層マージしたものになります。
※Licenseは Other です。商用利用はお控えください。 https://t.co/TuW8WUWmG7… pic.twitter.com/BWu51wb5jz

— Vすき焼き@AIart（AIイラスト） (@Vsukiyaki_AIArt) March 14, 2023

配布先

SE_V1_A

miPhaV4をベースにした改良モデルです。
DeyoyoyoV1のでょさんのリポジトリで公開されています（作成者は別の方です）

#SE_V1_A 公開されました！

公開場所に悩んでいたのですが、
作成者と相談の元、私のHuggingFaceのリポジトリで公開することになりました。https://t.co/eWNP0bQgV9 pic.twitter.com/IE2pGAMZO7

— でょ (@Deyoyoyo) March 6, 2023

配布先

HimawariMix-V2.0（公開終了）

みんさんが公開されているHimawariMix-V2.0です。
V1より背景の描写が高精度化されています。VAEなしで使用できます。

HimawariMix-V2.0をリリースしました！！
V1のフルモデルチェンジになります
背景よりよりキャラの精度が高くなりました
フルモデルチェンジな為やはり好み別れると思います#HimawariMixV2
URL👇https://t.co/FedUv5Ji9u pic.twitter.com/OFnhuYxV82

— みん (@min__san) March 17, 2023

silicon28-negzero

Xynon Xynonさんが公開されているモデルです。
アニメ映画に登場するような壮大な背景を描くことができます。Silicon28をベースとしたマージモデルです。

silicon28-negzero
うそだろ……これはめっちゃかわいいぞ pic.twitter.com/ieAxGsQ2UM

— Morito@AIイラスト (@Morit_00) March 5, 2023

配布先

モデル紹介 2023年2月

DeyoyoyoV1

私の好きなAIイラストレータでょさんが配布されているモデルです。
アニメ調の女の子のキャラの安定感が非常に高く、背景も綺麗です。

#DeyoyoyoV1 pic.twitter.com/XfXxuU3bWc

— でょ (@Deyoyoyo) February 5, 2023

配布先

配布サイトは以下となります。

pastel-mix

モデル名の通り、淡い色彩のイラストが生成できます。
pastel-mixはDiffusersでも実装されています。

「なーに撮ってるの」#AIart #AIイラスト #pastelmix pic.twitter.com/9WjPhuRofl

— Kanon🍹 (@mokomoko_kallo) February 13, 2023

木曜日のテーマカラー：Green#AIart #AIイラスト #pastelmix pic.twitter.com/RHjZLLXcmi

— キャットの毛並み (@uma_neko5656) February 9, 2023

配布先

配布サイトは以下となります。

SukiyakiMixV1

Vすき焼きさんが公開されているモデルです。先ほどのpastel-mixをベースとし、AbyssOrangeMix2をマージしたモデルとなります。
私も愛用させて頂いており、最も使用頻度が高いモデルです。

pastel-mix をベースに AbyssOrangeMix2 を単純マージしたモデル #SukiyakiMixV1 公開しました。↓https://t.co/lLvWYZIkMN pic.twitter.com/wsjctsMoFU

— Vすき焼き@AIart（AIイラスト） (@Vsukiyaki_AIArt) February 4, 2023

配布先

配布サイトは以下となります。

7th_Layer

Twitterで公開されている方のアカウントが見つかりませんでしたので、おそらく海外の方が作られたモデルかと思われます。
こちらもアニメ調のクオリティの高いキャラが生成できます。

この表情めちゃめちゃ好き#7th_Layer#StableDiffusion #AIイラスト pic.twitter.com/zcA0Kp7axz

— さるのん@たのしいきもち〜 (@sarunon) January 23, 2023

配布先

配布サイトは以下となります。

MORIMORImix

SukiyakiMixV1並みのキャラクターのクオリティを実現しつつ、背景もかなり精細に描画することができるモデルです。

今日のお昼はマックです
ということで、MORIMORIハンバーガー
何気に神デザちゃんが手袋外すの初かも
#AIart #MORIMORImix pic.twitter.com/2f5i8Yj9Fk

— あいおえおえかきの (@NovelAIoekaki) February 21, 2023

配布先

配布サイトは以下となります。

Defmix-v2

Defpointさんが公開されているDefmixです。
使いこなすには少しテクニックが必要で私はまだあまり使いこなせていませんが、奥行きのある立体感の風景を描かせると最強のモデルではないかと思われます。武器を持たせたときの指なども綺麗に生成できるようチューニングされているようです。

Defmix-v2.0を公開しました！
詳細についてはModel Cardを参照してください。

ぜひ #DefmixV2 のタグで皆さん素敵なイラストを投稿して下さい！https://t.co/qy6MObax9Q#AIart #AIイラスト pic.twitter.com/L67fkhLIMc

— Defpoint (@DefpointAI) February 25, 2023

配布先

配布サイトは以下となります。

イラストのクオリティを向上させるためのテクニック

Stable DiffusionのWebUIであるControlNetの拡張機能を使用することで、生成するイラストのクオリティを大幅に向上させることができます。

ControlNet

手を修正する

画像AIでイラスト生成の一番の失敗要因となるは手の描画です。この失敗した手の描画を、ControlNetのDepthライブラリを使用することで修正することができます。

Depthライブラリの使い方は以下の記事で解説しています。

キャラクターのポーズを指定する

AUTOMATIC1111 WebUIの拡張機能として使用できるOpenopse Editorをしようすることで、GUI上で簡単にキャラクターのポーズを指定して画像を生成できます。

Openopse Editorの使い方は、以下のサイトで解説しています。

アップスケール

画像全体をアップスケールする

AUTOMATIC1111 WebUIの機能、hires.fixを使用することで画像全体をアップスケールして高精細化することができます。

hires.fixの使い方を以下の記事で解説しています。

画像の一部だけをアップスケールする

AUTOMATIC1111 WebUIの拡張機能として使用できる、LLuL – Local Latent upscaLerを使用することで画像の一部だけをアップスケールすることが可能です。背景や服のみ高精細化したいといったようなケースで有効です。

LLuL – Local Latent upscaLerの使い方は以下のサイトで解説しています。

Stable Diffusionの理想的な環境を構築する

Stable Diffusionを使用する際にGoogle ColaboratoryやWebサービスを利用されている方も多いかと思います。しかし、最近Google Colabの無料での使用範囲が大きく制限されたり、Webサービスでは月額費用がかかったりします。

欲しいイラストを生成するにはかなりの回数をトライする必要があるため、これらの制約に縛られることなく使用できるローカル環境を構築するのがおすすめです。

ローカルのPCに搭載するグラフィックボード

ローカルマシンで実行する上で重要になってくるのがグラフィックボードです。
グラフィックボードの性能によって画像の生成速度や最大生成サイズが決まります。

Stable Diffusionで使用するのにおすすめのグラフィックボードを以下の記事で解説していますので、あわせてご覧ください。

Stable Diffusionで生成される画像のクオリティを上げる

動画学習プラットフォームUdemyでは、画像生成AIで高品質なイラストを生成する方法や、AIの内部で使われているアルゴリズムについて学べる講座が用意されています。

Udemyは講座単体で購入できるため安価で（セール時1500円くらいから購入できます）、PCが無くてもスマホでいつでもどこでも手軽に学習できます。

画像生成AIの使い方を学ぶ

Stable DiffusionやMidjourneyなどを使ったAIアート全般について勉強したい方には、以下の講座がおすすめです。

【文字からイラスト画像を生成】素人でもプロ並みの絵を作れる画像生成AIツール講座【ChatGPTも活用】

Stable Diffusionに特化して学ぶ

Stable Diffusionに特化し、クラウドコンピューティングサービスPaperspaceでの環境構築方法から、モデルのマージ方法、ControlNetを使った構図のコントロールなど、中級者以上のレベルを目指したい方に最適な講座です。

ジェネレーティブAI（画像生成AI）入門【Stable Diffusion】-プロンプトでハイクオリティな画像制作が可能

画像生成AIの仕組みを学ぶ

画像生成AIの仕組みについて学びたい方には、以下の講座がおすすめです。
画像生成AIで使用される変分オートエンコーダやGANのアーキテクチャを理解することで、よりクオリティの高いイラストを生成することができます。

AIによる画像生成を学ぼう！【VAE / GAN】 -Google ColabとPyTorchで基礎から学ぶ生成モデル-

まとめ

今回はStable Diffusionで使えるおすすめのカスタムモデルについて解説しました。各モデルともSamplerとの組み合わせによってもかなりイラストの雰囲気が変わりますので、色々パラメータを変更して試してみてください。

当ブログのStable Diffusionに関するモデルを以下の記事でまとめていますので、あわせてご覧ください。

また、以下の記事で効率的にPythonのプログラミングスキルを学べるプログラミングスクールの選び方について解説しています。最近ではほとんどのスクールがオンラインで授業を受けられるようになり、仕事をしながらでも自宅で自分のペースで学習できるようになりました。

スキルアップや副業にぜひ活用してみてください。

スクールではなく、自分でPythonを習得したい方には、いつでもどこでも学べる動画学習プラットフォームのUdemyがおすすめです。

講座単位で購入できるため、スクールに比べ非常に安価（セール時1200円程度～）に学ぶことができます。私も受講しているおすすめの講座を以下の記事でまとめていますので、ぜひ参考にしてみてください。

それでは、また次の記事でお会いしましょう。