調査/研究

入門/解説

新たに6モデルを追加したControlNet1.1が公開

1.新たに6モデルを追加したControlNet1.1が公開まとめ ・一週間くらい前に従来の8モデルの改良版+6モデルを追加したControlNet1.1がリリースされた ・線画を自在に色塗りする事ができるLineart系の機能も追加された...
入門/解説

rich-text-to-image:イラスト生成AI向けのプロンプトをリッチテキスト形式にして表現力を向上

1.rich-text-to-image:イラスト生成AI向けのプロンプトをリッチテキスト形式にして表現力を向上まとめ ・rich-text-to-imageはMicrosoftのWordのような文字の色を一部だけ変えたり、太文字にできるリ...
入門/解説

思わずクリックしたくなるようなアイキャッチ画像はイラスト生成AIで自動生成できるのか?

1.思わずクリックしたくなるようなアイキャッチ画像はイラスト生成AIで自動生成できるのか? ・人目を惹くアイキャッチ画像を集めてイラスト生成AIをカスタマイズし、クリックを誘う画像をAIで生成しようとする試みを見かけた ・カスタムモデルを使...
入門/解説

言語モデル用のプロンプトエンジニアリングの経験則と実例

1.言語モデル用のプロンプトエンジニアリングの経験則と実例まとめ ・プロンプトの先頭に指示を入れ、##または"""で指示と文脈を区切る事で区切りを明確に伝える事ができる ・否定形でやってはいけないことだけを言うのではなく、代わりに何をすれば...
入門/解説

SadTalker:任意の音声に合わせて口パクする動画を一枚絵から生成(Colab、Spaceあり)

1.SadTalker:任意の音声に合わせて口パクする動画を一枚絵から生成(Colab、Spaceあり)まとめ ・任意の音声に合わせて口パクする動画を一枚絵や動画から生成するAIであるSadTalkerが誰でも動かせる形で公開された ・Sa...
入門/解説

Stable Diffusion v2-1-unclip:画像から意味的に似た画像を作成するImage2Imageとは異なる手法

1.Stable Diffusion v2-1-unclip:画像から意味的に似た画像を作成するImage2Imageとは異なる手法まとめ ・Stable Diffusion v2-1-unclipとは、Stable Diffusionの開...
入門/解説

text-2-video:プロンプトから動画を作成するColabとSpaceが公開

1.プロンプトから動画を作成するColabとSpaceが公開まとめ ・プロンプトとネガティブプロンプトからビデオを作成可能なモデルがDiffusersとAutomatic1111向けに公開された ・Stable Diffusionで作成した...
入門/解説

Stable Diffusion 2.1用のControlNetのセットアップ方法

1.Stable Diffusion 2.1用のControlNetのセットアップ方法まとめ ・ControlNetは元のモデルがStable Diffusion 1.5を使用していたためStable Diffusion 2.1がベースにな...
入門/解説

instruct pix2pix:プロンプトだけを使ってAIでイラストの修正を行う

1.instruct pix2pix:プロンプトだけを使ってAIでイラストの修正を行うまとめ ・思い通りの編集効果が出せない時はImage CFGやText CFGの値をチューニングすると期待通りの効果が出せる可能性がある ・本家githu...
入門/解説

infinite zoom outとzoom in:stable diffusionで作成したイラストを無限にズームして動画を作成

1.infinite zoom outとzoom in:stable diffusionで作成したイラストを無限にズームして動画を作成まとめ ・stable diffusionで画面の奥に向かってひたすらカメラが進む or 引いていく動画を...
入門/解説

ControlNet:棒人間で表現した好きなポーズをAIでイラスト化する

1.ControlNet:棒人間で表現した好きなポーズをAIでイラスト化するまとめ ・ControlNetはイラスト生成AI界隈で今、話題沸騰中の新手法で画像を使って生成するイラスト内の物体の姿勢の制御を可能にする新手法 ・ControlN...
入門/解説

Waifu Diffusion 1.5 Betaなら今風の絵柄でナウシカを描く事が可能

1.Waifu Diffusion 1.5 Betaなら今風の絵柄でナウシカを描く事が可能まとめ ・まだ完全に学習が終わってないベータ版だがWaifu Diffusion 1.5が2月14日に公開されて画像生成や微調整ができるようになった ...