学習手法

学習手法

TAG:マルチタスク学習で一緒にトレーニングすべきタスクを知る(2/2)

1.TAG:マルチタスク学習で一緒にトレーニングすべきタスクを知る(2/2)まとめ ・TAGは1つのタスクに関してのみモデルのパラメータを更新してその影響を調べる ・ネットワーク内の各タスクが他のタスクとどのように相互作用するかについての情...
学習手法

TAG:マルチタスク学習で一緒にトレーニングすべきタスクを知る(1/2)

1.TAG:マルチタスク学習で一緒にトレーニングすべきタスクを知る(1/2)まとめ ・多くの機械学習モデルは、通常、一度に1つのタスクを学習する事に重点を置いている ・多数のタスクから同時に学習すると性能が向上する場合がありこれをマルチタス...
モデル

SimVLM:弱い教師を使ったシンプルな視覚言語モデル(2/2)

1.SimVLM:弱い教師を使ったシンプルな視覚言語モデル(2/2)まとめ ・SimVLMは非常に単純な構成であるにもかかわらず最先端のモデルを凌駕 ・微調整せずともドイツ語で画像の説明文を作成するなどゼロショットが可能 ・SimVLMは教...
モデル

SimVLM:弱い教師を使ったシンプルな視覚言語モデル(1/2)

1.SimVLM:弱い教師を使ったシンプルな視覚言語モデル(1/2)まとめ ・視覚言語モデリングは、視覚的な入力に言語を対応させて理解する土台となる ・視覚入力と言語入力の両方から単一の特徴空間を学習する手法で近年大きく進歩した ・SimV...
学習手法

PSM:行動の類似性に着目して強化学習の一般化性能を改善(2/2)

1.PSM:行動の類似性に着目して強化学習の一般化性能を改善(2/2)まとめ ・本研究は効果的な特徴表現を学習するために強化学習で固有構造を活用する利点を示した ・ポリシー類似性指標(PSM)と対照指標埋め込み(CME)の提唱によって強化学...
学習手法

PSM:行動の類似性に着目して強化学習の一般化性能を改善(1/2)

1.PSM:行動の類似性に着目して強化学習の一般化性能を改善(1/2)まとめ ・強化学習は意味的に同等なタスク間であっても新タスクへの応用が困難 ・障害物を飛び越えるタスクでは初見の場所に設置された障害物に苦労する ・タスク間で類似している...
モデル

Omnimattes:動画内の影や砂煙も切出す事ができる最先端の人工知能(2/2)

1.Omnimattes:動画内の影や砂埃も切出す事ができる最先端の人工知能(2/2)まとめ ・画像を操作する手法は、偽情報を生成するために悪用される可能性があるので留意が必要 ・オムニマットは現状の制限としてカメラ位置が固定していないと画...
モデル

Omnimattes:動画内の影や砂煙も切出す事ができる最先端の人工知能(1/2)

1.Omnimattes:動画内の影や砂埃も切出す事ができる最先端の人工知能(1/2)まとめ ・前景と背景の分離を定義するマット画像があると画像やビデオの編集操作が容易になる ・最近の人工知能は画像やビデオ内に自動でマットを作成できるが影や...
その他の調査

Triton:ニューラルネットワーク用のGPUプログラミングを楽にする新言語

1.Triton:ニューラルネットワーク用のGPUプログラミングを楽にする新言語まとめ ・TritonはcutlassやTVMのようなGPUに直接命令を出すGPUプログラミングを楽にする新言語 ・Tritonを使用すると比較的少ない労力でハ...
モデル

拡散モデルを使用してGANより忠実度の高い画像を生成(2/2)

1.拡散モデルを使用してGANより忠実度の高い画像を生成(2/2)まとめ ・CDMはSR3を使って高解像度の自然画像を生成できるクラス条件付き拡散モデル ・複数の拡散モデルを繋ぎ合わせて低解像度から徐々に解像度を上げて高品質画像を生成 ・C...
モデル

拡散モデルを使用してGANより忠実度の高い画像を生成(1/2)

1.拡散モデルを使用してGANより忠実度の高い画像を生成(1/2)まとめ ・画像合成は、GAN、VAE、自己回帰モデル等を使って行われているがどれも一長一短 ・2015年に発表された拡散モデルは安定性と生成サンプルの品質で最近注目を集めてい...
ロボット

Brax:Colabで大規模分散システムを凌駕する強化学習用物理シミュレーションエンジン(3/3)

1.Brax:Colabで大規模分散システムを凌駕する強化学習用物理シミュレーションエンジン(3/3)まとめ ・BraxはCPUだけで実行しても従来の一般的な環境に比べて1桁以上高速に動作する ・Braxは高速で規模拡大可能な強化学習とロボ...