open source

アプリケーション

人工知能を使って歴史的な写真や絵画を立体化

1.人工知能を使って歴史的な写真や絵画を立体化まとめ ・CVPR 2020で発表されたモデルを使うと古い写真や絵画を動画化してグリグリ動かせる ・ややぼやけてしまっているような歴史上の有名な写真も3D化できる ・もちろん、Stable di...
ロボット

CaP:自分で自分の制御プログラムを書くロボットの実現にむけて(2/2)

1.CaP:自分で自分の制御プログラムを書くロボットの実現に向けて(2/2)まとめ ・大きなモデルはより良い性能を発揮し階層的なコードが生産性を最も改善する ・コード執筆モデルはロボットの形状が異なっても実行可能なコードを生成可能 ・生成さ...
アプリケーション

Imagic:写真内の人物の表情をプロンプトで直接編集な人工知能

1.Imagic:写真内の人物の表情をプロンプトで直接編集な人工知能まとめ ・stable diffusionを流用して画像を自由に編集できるImagicが公開されている ・表情や構成など写真内の物体をプロンプトを使って自由に編集可能な高性...
画像生成

Stable Diffusion 1.5が公開されるも色々トラブる

1.Stable Diffusion 1.5が公開されるも色々トラブるまとめ ・未公開版であったStable Diffusion1.5が従来と違うリポジトリで突然公開 ・漏洩かと思われたが元々プロジェクトに関わっていた別会社によるものだった...
データセット

UL2 20B:オープンソースとして公開された200億パラメータを持つ統一言語モデル(2/2)

1.UL2 20B:オープンソースとして公開された200億パラメータを持つ統一言語モデル(2/2)まとめ ・UL2は異なる事前学習から得られる能力と帰納的バイアスをモデルに付与可能 ・従来モデルは微調整タスクとプロンプトベースの1ショットタ...
データセット

UL2 20B:オープンソースとして公開された200億パラメータを持つ統一言語モデル(1/2)

1.UL2 20B:オープンソースとして公開された200億パラメータを持つ統一言語モデル(1/2)まとめ ・言語モデルは事前学習のやり方により得意なタスクと不得意タスクが分かれる ・事前学習用の効果的な統一フレームワークを作成があればより効...
アプリケーション

Real-ESRGANとSwinIR:Stable Diffusionで生成した画像の解像度を上げて綺麗にする

1.Real-ESRGANとSwinIR:Stable Diffusionで生成した画像の解像度を上げて綺麗にするまとめ ・stable diffusionで生成した画像はノイズや細かい部分が崩れているケースがある ・修正した画像に更に美麗...
モデル

MaxViTとMAXIM:ViTの効率を更に高めた視覚タスク用新モデル(2/2)

1.MaxViTとMAXIM:ViTの効率を更に高めた視覚タスク用新モデル(2/2)まとめ ・MAXIMは低レベルの画像間予測タスクのために調整されたUNetに似たアーキテクチャ ・画像サイズが大きくなっても計算量は線形に増えるだけなので高...
その他の調査

画像生成人工知能のシェア分布

1.画像生成人工知能のシェア分布まとめ ・テキストから画像を生成する人工知能は直近、かなりの盛り上がっている ・Twitter上で言及される事の多いモデルはMidjourneyだがシェアは変動しそう ・自分がイメージしている画像を指示通りに...
画像生成

人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(stable diffusion編)

1.人工知能にスタジオジブリの風の谷のナウシカを描いてもらう事は可能か?(stable diffusion編)まとめ ・stable diffusionという性能が良さそうな画像生成モデルが公開された ・オープンソースとして公開されているの...
アプリケーション

Mood Board Search:「平穏な」などの主観的な概念を使った画像検索を可能にする(2/2)

1.Mood Board Search:「平穏な」などの主観的な概念を使った画像検索を可能にする(2/2)まとめ ・ユーザが作成したムードボードに対するモデルの感度を見つけるためにCAVを使用 ・各ムードボードがCAVを作り、ツールが画像デ...
学習手法

MLGO:強化学習を使ってコンパイラの最適化処理を最適化(2/2)

1.MLGO:強化学習を使ってコンパイラの最適化処理を最適化(2/2)まとめ ・MLGOを使用してレジスタ割当問題も大規模データセンターのQPSで0.3%~1.5%改善できた ・QPSは導入後数ヶ月間持続しており時間経過に伴って性能が劣化し...