学会 NeurIPS 2021におけるGoogleの存在感
１．NeurIPS 2021におけるGoogleの存在感まとめ ・12/6(月)-12(火)に今年最大の機械学習会議であるNeurIPS 2021が仮想空間で開催 ・Googleは180を超える論文で強力な存在感を示し講演やワークショップも...
学会 
基礎理論 BERTは文法を理解しているのか？頻度を見ているだけなのか？(2/2)
１．BERTは文法を理解しているのか？頻度を見ているだけなのか？(2/2)まとめ ・BERTは主語と動詞の一致ルールで単純な経験則モデルより良い性能である ・主語と動詞が一致すべき事と高頻度の単語がより可能性が高い事を知っている ・一致が従...
基礎理論 BERTは文法を理解しているのか？頻度を見ているだけなのか？(1/2)
１．BERTは文法を理解しているのか？頻度を見ているだけなのか？(1/2)まとめ ・言語モデルは機能する理由が不透明な事が多く更なる改善の妨げになっている ・英語の主語と動詞の一致規則を正しく適用するBERTモデルの能力を調査した ・初見の...
データセット RLDS: 強化学習用データセットの生成と共有をやりやすくするツール群(2/2)
１．RLDS: 強化学習用データセットの生成と共有をやりやすくするツール群(2/2)まとめ ・RLDSはEnvLoggerやRLDS CreatorなどのツールでRL用データの収集を楽にする ・RLDSはデータセット共有ライブラリであるTF...
データセット RLDS: 強化学習用データセットの生成と共有をやりやすくするツール群(1/2)
１．RLDS: 強化学習用データセットの生成と共有をやりやすくするツール群(1/2)まとめ ・強化学習アルゴリズムの多くはエージェントが環境と大量に相互作用する学習データが必要 ・他で収集されたデータセットを再利用する事もできるが仕様がバラ...
その他の調査 AI、機械学習、データサイエンス、ディープラーニングの2021年の進展と2022年の予測リサーチ編(2/2)
１．AI、機械学習、データサイエンス、ディープラーニングの2021年の進展と2022年の予測リサーチ編(2/2)まとめ ・OpenAIのCLIPは文章と画像をつなぐ、とてもエキサイティングな可能性を提示した ・文章から画像を作成するテクノロ...
その他の調査 AI、機械学習、データサイエンス、ディープラーニングの2021年の進展と2022年の予測リサーチ編(1/2)
１．AI、機械学習、データサイエンス、ディープラーニングの2021年の進展と2022年の予測リサーチ編(1/2)まとめ ・OpenAIのCLIPは文章と画像をつなぐ、とてもエキサイティングな可能性を提示した ・文章から画像を作成するテクノロ...
モデル MURAL:ヒンディー語で野菜を入れない麺が入った丼を検索されても対応画像を探せる人工知能(2/2)
１．MURAL:ヒンディー語で野菜を入れない素の麺が入った丼を検索されても対応画像を探せる人工知能(1/2)まとめ ・翻訳ペアを用いて共同で学習させるとリソース不足言語のクロスモーダル検索能力を向上可 ・また、マルチモーダルモデルは言語同士...
モデル MURAL:ヒンディー語で野菜を入れない麺が入った丼を検索されても対応画像を探せる人工知能(1/2)
１．MURAL:ヒンディー語で野菜を入れない素の麺が入った丼を検索されても対応画像を探せる人工知能(1/2)まとめ ・概念の多くは、ある言語から別の言語への直接的に一対一に翻訳する事ができない ・連想するものが異なるためだが概念のイメージを...
入門／解説 Amazon SageMaker Studio Lab：無料版Google Colabの強力なライバル
１．Amazon SageMaker Studio Lab：無料版Google Colabの強力なライバルまとめ ・Amazon SageMaker Studio LabはAmazonが提供する無料のJupyterLab環境 ・Google...
アプリケーション Federated Learningでスマートフォンのテキスト選択機能を改善(2/2)
１．Federated Learningでスマートフォンのテキスト選択機能を改善(2/2)まとめ ・プライバシーを保ちながらユーザー操作に基づいてテキスト選択を予測する手法を開発した ・その結果、Androidユーザー向けSmart Tex...
アプリケーション Federated Learningでスマートフォンのテキスト選択機能を改善(1/2)
１．Federated Learningでスマートフォンのテキスト選択機能を改善(1/2)まとめ ・Smart Text Selectionはユーザーが目的としている文字範囲を予測しコピーを楽にする機能 ・従来はWebページ内要素を検索エン...