電通国際情報サービス、オープンイノベーションラボの比嘉康雄です。
Stable Diffusion
シリーズ、今回のテーマは、Waifu Diffusion 1.3.5_80000
です。
Waifu Diffusion
というのは、Stable Diffusion
から派生していて、美少女アニメ画に強いという特徴を持っています。
80000
というのは、学習の度合いを表していて、「まだ完成してないけど、みんなの反応を見たい」ということで、プレビューとしてリリースされたんだと思います。
Hugging Face
上のページは、こちら。
バージョンが1.4になっているので、学習が進んで完成すると、1.3.5
が1.4
になるんでしょうね。
Stable Diffusionのおすすめコンテンツはこちら。
- Waifu Diffusion 1.3.5_80000
- v2.1 金髪美女写真
- v2.1 美少女アニメ画
- v2.1 AUTOMATIC1111
- v2.0 美少女イラスト
- v1.5 美少女画検証
- 美少女アニメ画改善版
- 美少女を高確率で出す呪文編
- 美少女アニメ画編
- 美少女写真編
- 女性イラスト編
- 長い呪文は切り捨てられる編
AUTOMATIC1111に対応したColabノートブック
今回のWaifu Diffusion 1.3.5_80000
には、2つのVAEが存在します。kl-f8-anime.ckpt
とkl-f8-anime2.ckpt
です。
kl-f8-anime.ckpt
は、元のVAEをファインチューニングしたものです。ファインチューニングとは、元のVAEに追加で、いくつか画像を学習させたという意味です。
kl-f8-anime2.ckpt
は、元のVAEを刈り込んだ(pruned)
ものです。刈り込んだ
の意味は、たぶん、元のVAEの学習に使った画像のうち、イマイチなものを取り除いて学習させたという意味なんじゃないかと思います。
kl-f8-anime.ckpt
を使ったAUTOMATIC1111に対応したColabノートブックは、こちら。
kl-f8-anime2.ckpt
を使ったAUTOMATIC1111に対応したColabノートブックは、こちら。
VAEの比較
SeedをふくめたすべてのパラメータをVAE以外は同じにして比べてみました。
kl-f8-anime.ckpt
その一
kl-f8-anime2.ckpt
その一
kl-f8-anime.ckpt
その二
kl-f8-anime2.ckpt
その二
kl-f8-anime.ckpt
その三
kl-f8-anime2.ckpt
その三
ぼくの感想としては、kl-f8-anime.ckpt
の方が、全体的に明るいが、ちょっとチープ感があるなぁという感じです。
表現が難しいんですが、もう少し垢抜けた感じがほしいところです。同じ呪文で、Cool Japan Diffusion 2.0で出すとこんな感じです。
垢抜けたという感じが伝わるでしょうか。
今回使った通常呪文
masterpiece high quality highly detailed kawaii princess white glowing skin kawaii face with blush blue eyes with eyelashes long waved hair (cleavage breasts:0.7) open shoulders gothic lolita glossy dress with ruffles gorgeous jewelry accessories anime gorgeous background centered composition lim lighting intense shadows
通常呪文の改行版
masterpiece high quality highly detailed kawaii princess white glowing skin kawaii face with blush blue eyes with eyelashes long waved hair (cleavage breasts:0.7) open shoulders gothic lolita glossy dress with ruffles gorgeous jewelry accessories anime gorgeous background centered composition lim lighting intense shadows
今回使ったネガティブ呪文
blender deformed mutated disfigured lowres blurred repetitive double mutated hands bad hands missing hands extra hands liquid hands poorly drawn hands mutated fingers bad fingers missing fingers extra fingers liquid fingers poorly drawn fingers partial head bad face small face partial face bad eyes missing eyes too big eyes bad eyebrows bad eyelashes bad nose missing nose bad mouth missing mouth open mouth bad ears thick lips chest pad bad legs missing legs extra legs bad arms missing arms extra arms low quality normal quality crown black and white
今回使ったネガティブ呪文の改行版
blender deformed mutated disfigured lowres blurred repetitive double mutated hands bad hands missing hands extra hands liquid hands poorly drawn hands mutated fingers bad fingers missing fingers extra fingers liquid fingers poorly drawn fingers partial head bad face small face partial face bad eyes missing eyes too big eyes bad eyebrows bad eyelashes bad nose missing nose bad mouth missing mouth open mouth bad ears thick lips bad legs missing legs extra legs bad arms missing arms extra arms low quality normal quality crown black and white
仲間募集
私たちは一緒に働いてくれる仲間を募集しています!
ソリューションアーキテクトStable Diffusionの全コンテンツ
- 人物写真編
- レンズ編
- 画像タイプ編
- 美少女アニメ画編
- 美少女写真編
- 女性イラスト編
- 美しい夜空を見渡す男編
- 魅惑的な女アニメ画(トゥーンレンダリング)編
- 美少女を高確率で出す呪文編
- 長い呪文は切り捨てられる編
- 蒸気機関が高度に発達したレトロなアニメ(スチームパンク)の世界観編
- A as Bの呪文による画像合成編
- かわいい動物の擬人化編
- バベルの塔のイラスト編
- TPU版の使い方
- 美少女アニメ画改善版
- v1.5 美少女画検証
- 東京タワーの写真
- 折り紙合体変形ロボ
- v2.0 美少女イラスト
- v2.1 AUTOMATIC1111
- v2.1 美少女アニメ画
- v2.1 金髪美女写真
- Waifu Diffusion 1.3.5_80000
執筆:@higa、レビュー:Ishizawa Kento (@kent) (Shodoで執筆されました)