Stable Diffusion関連記事のまとめ

Stable Diffusionは2022年9月にオープンソースとして学習済みモデルが公開されて大きな話題になった「入力した文章に基づいて画像を生成する人工知能」です。

公開後にも様々な拡張が発表されており、WebBigData内に投稿したStable Diffusion関連記事も多岐にわたるようになってきたため、本ページで概要をまとめました。

1.初心者向けのStable Diffusion解説記事

そもそも何故、Stable Diffusionが話題になったのか、及びPhotoshopから呼び出す方法など

デザイナーさんやイラストレーターさんのためのstable diffusion入門

2.他の画像生成モデルとの比較

他の画像生成モデルにはどのようなモデルがあるか、及びその比較など

Dall-E 2、Midjourney、Stable Diffusionなど文章から画像を生成する人工知能の一覧

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(Craiyon編)

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(Midjourney編)

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(DALL·E 2編)

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(latent diffusion編)

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(stable diffusion編)

画像生成人工知能のシェア分布

3.Stable Diffusionをより深く知る

3-1)プロンプトについての解説

プロンプトとは画像を生成する際にStable Diffusionに与える文章の事です。

Stable Diffusion本家サイトに掲載されているプロンプトガイド

3-2)Seedについての解説

SeedとはStable Diffusionが生成する画像のランダム性を制御する数字の事で、Seedを指定すると違うパソコンで実行しても同じ絵を描いて貰う事が可能になります。

stable diffusionに同じ絵を描いて貰うためにはどうすれば良いか?

3-3)人工知能で生成したイラストを人工知能に評価して貰う

どのような画像を人工知能は品質が高いと評価するのか?、及び、その評価を使って品質が高い画像を生成しやすいプロンプトの傾向をチェック

人工知能に描いて貰ったイラストを人工知能に採点してもらう

Stable Diffusionは写真とイラストのどちらが得意なのか?

スマホ写真で学習した人工知能はStable Diffusionの画像をどう評価するか?

3-4)動作原理や関連論文について

DALL-E2やStable Diffusion等の拡散モデルの動作原理と説明がつかない事

4.Stable Diffusion発表後に新たに実装された拡張機能の紹介

4-1)textual inversionの紹介

textual inversionは3~5枚の画像を使用してStable Diffusionに新しい概念を教えてプロンプトの中で使用できるようにする拡張です。

成功例
Stable Diffusionに天空の城ラピュタの飛行石の紋章を描いて貰う

苦戦例
stable diffusionに自分の好きなキャラクターを描いてもらう事は出来るのか?

4-2)DreamBoothの紹介

textual inversionよりメモリ使用量が多く動かすのが難しいのですが性能も高いDreamBoothの紹介
DreamBooth:Stable Diffusionに自分の好きなキャラクターを描いてもらう事は可能
Stable Diffusion 2.0でDreamBoothを試す

4-3)In-Paintingの紹介

人工知能に既存画像の一部分を差し替えて貰うIn-Paintingの紹介

Stable Diffusionを使ってシシ神様をトトロに差し替える

4-4)Out-Paintingの紹介

人工知能に既存画像の枠外の部分を生成して貰うOut-Paintingの紹介
DALL·E 2とStable Diffusionのout-paintingの比較

4-5)人工知能で生成した画像を人工知能で綺麗にする方法の検討

Real-ESRGANとSwinIR:Stable Diffusionで生成した画像の解像度を上げて綺麗にする

4-6)生成した画像の動画化の検討

stable diffusionで生成した画像から動画を生成する

4-7)Stable Diffusionを自分の独自データで更に改良する手法の調査

Stable Diffusionを微調整するために必要な条件の調査

4-8)既に微調整されたモデルにDreamBoothを適用できるか調査

Waifu Diffusionで自分の好きなキャラクターに好みの服を着てもらう事が可能

4-9)独自データでStable Diffusionを微調整した途中結果

Stable Diffusionで自分の好きなキャラクターにハロウィンコスプレをしてもらう事も可能

5.その他、話題になった事など

絵画コンテストで人工知能が描いた絵が優勝!?

Dance Diffusion:Stable Diffusionの音楽版が出来るかもしれない

Stable Diffusion 1.5が公開されるも色々トラブる

Imagic:写真内の人物の表情をプロンプトで直接編集な人工知能

ニコラス・ケイジでStable Diffusionの限界を探る

Stable Diffusion 2.0のローカルインストール方法と1.5との比較

Stable Diffusion 2.0とStable Diffusion 1.5とStable Diffusion 1.4の比較

タイトルとURLをコピーしました