人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か？(stable diffusion編)

１．人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か？(stable diffusion編)まとめ

・stable diffusionという性能が良さそうな画像生成モデルが公開された
・オープンソースとして公開されているのでRTX3060でも十分動かす事が可能
・スタイル転送を意識して多くの画像を作成すると驚くほど出来のよいものもある

２．stable diffusionのプロンプトの実例

アイキャッチ画像はstable diffusionによる生成画像でプロンプトは「ルノワールが描いた風の谷のナウシカのポスター(Poster of Nausicaa of the Valley of the Wind, by Renoir)」

2022年10月1日追記)DreamBoothという拡張により現在は風の谷のナウシカを描いて貰う事が出来るようになっています。

stable diffusionというオープンソースで相当性能が良さそうな画像生成モデルの重みが公開されました。コードはgithub、学習済重みは、haggingface hub(要サイト登録、要重み利用申請)から利用できます。

そこで、latent diffusion、DALL·E 2、Midjourney、Craiyon(DALL·E mini)と異なる人工知能に同じ文章でスタジオジブリの風の谷のナウシカを描いてもらうシリーズを早速、やってもらう事にしました。

なお、様々な方がColab等で動かせるようにしたものを公開してくれていますが、NvidiaのGPU付きのPCをお持ちである方であれば自分のパソコンで動かす事もできます。私も先日LinuxをセットアップしたRTX3060で動かしています。

４種類の重みが公開されて全部試しましたが、一番性能が良さそうに見えるものを使っています。

それでは早速、以下から。

「Nausicaä of the Valley of the Wind(風の谷のナウシカの英語版タイトル)」

「A red haired girl in blue smiles in a fungus forest, oil on canvas(赤い髪の青い少女が菌類の森で微笑んでいます。キャンパスの油絵)」

「Studio Ghibli style painting of a girl with red hair, dressed in blue, smiling in a golden meadow.(赤い髪で、青い服、金色の草原で微笑む少女をスタジオジブリ風に描いた作品)」

「Japanimation style painting of a girl with red hair wearing blue clothes and riding a glider.(赤い髪の女の子が青い服を着てグライダーに乗る姿をジャパニメーション風に描いたもの)」

「Disney movie poster showing a girl with red hair wearing blue and riding a bird like horse.(青い服を着た赤毛の女の子と鳥のような馬に乗ったディズニー映画のポスター)」

MTG card illustration of a girl with red hair wearing blue and holding a sword.(赤い髪の女の子が青い服を着て、剣を持っているMTGカードのイラスト)

Animation of 10 giant sandworms sprinting with angry red eyes through a fungus forest(10匹の巨大な砂虫が怒った赤い目で菌類の森を駆け抜けるアニメーション)

Tapestry of a giant destroying a city by emitting destructive rays from its mouth.(巨人が都市を破壊し、その口から破壊的な放射線を放射するタペストリー)

Watercolor of a woman with red hair, dressed in blue, wearing a helmet, flying above the clouds in a white glider.(青い服を着た赤い髪の女性がヘルメットをかぶり、白いグライダーで雲の上を飛んでいる様子を水彩画で表現)