強化学習

AI関連その他

Model Search:最適なMLモデルを見つけるためのオープンソースプラットフォーム(2/2)

1.Model Search:最適なMLモデルを見つけるためのオープンソースプラットフォーム(2/2)まとめ ・Model Searchは自分で選択したアーキテクチャで構築された新しい探索スペースも利用可能 ・Model Searchに実装...
モデル

Dreamer V2:モデルベース強化学習でモデルフリー強化学習を超える(2/2)

1.Dreamer V2:モデルベース強化学習でモデルフリー強化学習を超える(2/2)まとめ ・Atariベンチマークには3つのパフォーマンス計測基準が存在するが一長一短であった ・Clipped Record Meanと言う従来手法より人...
モデル

Dreamer V2:モデルベース強化学習でモデルフリー強化学習を超える(1/2)

1.Dreamer V2:モデルベース強化学習でモデルフリー強化学習を超える(1/2)まとめ ・従来のモデルベース強化学習はモデルフリーアプローチに正確性で劣った ・Dreamer V2はAtariベンチマークで人間レベルのパフォーマンスを...
データセット

TracIn:トレーニング事例の影響を推定する簡単な方法(1/2)

1.TracIn:トレーニング事例の影響を推定する簡単な方法(1/2)まとめ ・トレーニングデータの品質はモデルのパフォーマンスに大きな影響を与える可能性がある ・様々な手法が提案されているが追加リソースやトレーニングが必要であり採用が困難...
インフラ

人工知能学習用にパソコンを自作する際に知っておくべき事(2020年版)

1.人工知能学習用にパソコンを自作する際に知っておくべき事(2020年版)まとめ ・ディープラーニングには大量の計算が必要なのでクラウドか自作ハードウェアを選ぶ事になる ・自作ハードウェアは長期目線ではコストの削減とスピードの向上に繋がる可...
学習手法

World Models Library:強化学習で将来の画像を予測する事に意味はあるのか?(2/2)

1.World Models Library:強化学習で将来の画像を予測する事に意味はあるのか?(2/2)まとめ ・エージェントが予測する画像の画素数が増えるとパフォーマンスは一般的に向上 ・報酬予測の精度とエージェントのパフォーマンスの間...
学習手法

World Models Library:強化学習で将来の画像を予測する事に意味はあるのか?(1/2)

1.World Models Library:強化学習で将来の画像を予測する事に意味はあるのか?(1/2)まとめ ・原則として強化学習で計画立案に厳密に必要なのは、将来の報酬を予測することだけ ・しかし、最近の多くの強化学習手法で将来の画像...
AI関連その他

Google Research:2020年の振り返りと2021年以降に向けて(5/5)

1.Google Research:2020年の振り返りと2021年以降に向けて(5/5)まとめ ・TensorFlowは5周年で累計ダウンロード数は1億6000万を超え、JAXへの投資も倍増 ・データセットの公開、各種助成金などにより研究...
AI関連その他

Google Research:2020年の振り返りと2021年以降に向けて(4/5)

1.Google Research:2020年の振り返りと2021年以降に向けて(4/5)まとめ ・アルゴリズム基礎は主に本業の広告オークション関係で注目すべき結果が多かった ・機械知覚は音声と映像を組み合わせて学習する等のマルチモーダルな...
AI関連その他

Google Research:2020年の振り返りと2021年以降に向けて(3/5)

1.Google Research:2020年の振り返りと2021年以降に向けて(3/5)まとめ ・機械学習アルゴリズムや基礎理論の研究により効率的な手法の探求が前進 ・強化学習は履歴データの利用やサンプル効率の向上、適用分野の拡大 ・Au...
AI関連その他

Google Research:2020年の振り返りと2021年以降に向けて(2/5)

1.Google Research:2020年の振り返りと2021年以降に向けて(2/5)まとめ ・機械学習の応用は脳の構造解析から有望な分子化合物の探索、チップセットの設計など多岐に ・責任あるAIは解釈可能性の向上やバイアスの削減、安全...
AI関連その他

AI、機械学習、データサイエンス、ディープラーニングの2020年の進展と2021年の予測インダストリー編(3/3)

1.AI、機械学習、データサイエンス、ディープラーニングの2020年の進展と2021年の予測インダストリー編(3/3)まとめ ・コロナの大きな影響を受けた業界以外はAI関連プロジェクトへの投資を減らしていない ・AIを使用するため自動運転、...