DreamBoothで鬼滅の刃の隊服をナウシカに着てもらう事は可能

入門/解説

1.DreamBoothで鬼滅の刃の隊服をナウシカに着てもらう事は可能まとめ

・蟲繋がりで鬼滅の刃の蟲柱、胡蝶しのぶの隊服をナウシカに着てもらう試みの完成形
・絵柄やスタイルだけではなく世界観の融合を感じるイラストが出来たので満足
・概念理解の差異を言語化し、プロンプトとして与えてイラストを修正していく作業

2.DreamBoothで取り込んだ服とキャラクターを融合する試み

アイキャッチ画像はstable diffusion のカスタムモデルにDreamBooth拡張で2つの実体を同時に取りこんで生成したイラストをstable diffusionのアウトペインティングで更にサイズを拡張した画像

今回のアイキャッチ画像は如何でしょう?

もちろん、まだつなぎ目が目立ってしまっている部分や刀や手の部分など、細かい部分を改善したい気持ちはあるのですが、これらはもっと時間をかければ確実に修正できる部分なので良しとすれば、世界観の融合が上手くできたのではないかと感じています。

恥ずかしながら、わたくし、蟲柱の羽織の裾の模様が何なのか気づいてませんでした。

単なる模様と思っていたのですが、今回、stable diffusion先生にイラスト化して貰った事で初めて、蝶の羽を表現している事に気づき、stable diffusion先生の方が私よりイラストを理解する能力が高い時もあるのだと改めて実感した次第です。

DreamBoothで複数概念を取りこむ際の留意点

正直、今回のイラストも生成方法が確立できたわけではなく、他でも同様なイラストが100%生成出来るかというとまだ確信がないのですが、「人と服」のような融合が前提の概念同士は「人とロボ」や「ナウシカとテト」のような分離が前提の概念同士より、比較的容易にイラスト化できるのではないかと感じています。

複数の概念を1つのイラスト内に同時に入れこもうとすると、出力はおおまかに以下の3パターンになります。

(1)片方が無視される、もしくは薄まった形で表示される
(2)2つの概念が融合してしまう
(3)両方表示されるが片方の概念が非常に劣化する

融合が前提の概念同士であれば、どのパターンでも見せ方によっては割となんとでもなるケースがあるのですが、分離が前提の概念同士の場合は(2)は問答無用でNGになってしまい、(1)と(3)で如何に両概念の品質を上げていくかが勝負所になりますが、現時点では「成功確率をやや高める可能性があるかもしれない」くらいのレベルの手法しか見つける事が出来ていません。

ただ、前回のチャレンジ「DreamBoothで鬼滅の刃の隊服をナウシカに着てもらう事は妥協すれば可能」で「色」という概念は「服」という概念の中に含まれない可能性があると書きましたが、含まれるケースもあるという事もわかってきました。

具体的には、当初、鬼滅隊の部隊服がどうしても黒と白にならずカラフルになってしまうため、「黒と白」と色合いを指定したところ、突然、服がゴスロリ風(Gothic & Lolita、いわゆる、黒と白を基調としたフリルなどが沢山ついたお人形さんスタイルの服装)に変化してしまい、ネガティブプロンプトに「Gothic and Lolita」を指定する事で制御できた事などです。

まとめると

「自分のもちこんだつもりの概念」と「stable diffusion先生が理解した概念」にどのような差分があるのかを観察し、それを言語化し、プロンプトやネガティブプロンプトとして与えてイラストを修正していく

のが複数概念を扱う際の基本スタンスになるのではないかと思っています。

なお、本記事は一連の挑戦の第三回目でようやく実現した成果です。

「こんな凄いイラストを簡単に描けてしまうのか!」と思われてしまうと異議申し立てしたくなるので、僭越ながら主張させて頂きたいのですが、初回投稿時のレベルは「DreamBoothで鬼滅の刃の蟲柱の服をナウシカに着てもらう事は可能か?」であってそんなに高くはありませんでした。一か月以上の試行錯誤、正月休みのほぼ全てと万単位のお金をかけてようやく実現できたイラストであり、実現には自分でもよくわからない意味不明な情熱が必要で、私なりに苦労した事を申し添えておきます。

タイトルとURLをコピーしました