AI Image GPT：自然言語処理用の人工知能で画像を生成(3/3)
１．Image GPT：自然言語処理用の人工知能で画像を生成(3/3)まとめ
・iGPTが強力な画像特徴表現を学習可能で教師有り、半教師モデルと匹敵する事が示された
・しかしGPUにV100を使って延べ2500日が必要で画像専用モデルの...
自己教師
AI AI Image GPT：自然言語処理用の人工知能で画像を生成(1/3)
１．Image GPT：自然言語処理用の人工知能で画像を生成(1/3)まとめ
・文章生成で有名になった人工知能を画像でトレーニングすると品質の高い画像を生成できた
・iGPTと名付けられたこのモデルは物体の外観など画像の特性を理解してい...
AI 対照学習で最良のビューを選択するための原則(2/2)
１．対照学習で最良のビューを選択するための原則(2/2)まとめ
・InfoMin仮説を検証のため相互情報量を徐々に減らすと逆U字型の曲線が観察される
・アーキテクチャ等の違いにもかかわらず、直近の対照学習は暗黙的にInfoMin仮説に従...
AI 対照学習で最良のビューを選択するための原則(1/2)
１．対照学習で最良のビューを選択するための原則(1/2)まとめ
・異なる角度から物体をみても、それが同じ物体である事を認識するのは機械にとって困難
・これを実現する主な手法は対照学習と言いラベル付きデータを必要としない自己教師型
・I...
AI GoogleのリサーチサイエンティストColin Raffelへのインタビュー(2/2)
１．GoogleのリサーチサイエンティストColin Raffelへのインタビュー(2/2)まとめ
・転移学習の刺激的な進歩の大爆発が技術の見極めを難しくさせT5に繋がった
・教師無し学習でラベルなしデータセットを活用する事が標準になる...