基礎理論 機械学習が学習時に抜け道を見つけてズルをしてしまう事を防止(2/2)
１．機械学習が学習時に抜け道を見つけてズルをしてしまう事を防止(2/2)まとめ ・最も単純な顕著性評価法Gradient L2がBERTベースのモデルに対して良い結果 ・あるモデルでうまくいく方法が、他のモデルでうまくいかないこともある ・...
machine learning
基礎理論 基礎理論 機械学習が学習時に抜け道を見つけてズルをしてしまう事を防止(1/2)
１．機械学習が学習時に抜け道を見つけてズルをしてしまう事を防止(1/2)まとめ ・最新の機械学習モデルは誤った推論を行って正しい予測をする事がある ・例えば画像内に含まれる透かしや背景を元に画像分類を行う事などがある ・これを防止する手法は...
ロボット Interactive Language:ロボットとリアルタイムに会話で指示を行う(2/2)
１．Interactive Language:ロボットとリアルタイムに会話で指示を行う(2/2)まとめ ・注釈処理作業を工夫する事により大規模なLanguage-Tableデータセットを収集 ・Language-Tableデータセットは模倣...
ロボット Interactive Language:ロボットとリアルタイムに会話で指示を行う(1/2)
１．Interactive Language:ロボットとリアルタイムに会話で指示を行う(1/2)まとめ ・ロボット学習のビジョンの一つは言語による命令に従う役に立つロボットの実現 ・従来のロボット学習システムに欠けているのは人間とのリアルタ...
量子コンピュータ 通り抜け可能なワームホールを量子コンピュータ内に作成(2/2)
１．通り抜け可能なワームホールを量子コンピュータ内に作成(2/2)まとめ ・量子システム設計時に深層学習からの誤差伝播とスパース化を拝借した ・ワームホール用の量子システムをニューラルネットワークのように扱った ・Sycamore量子プロセ...
学会 NeurIPS 2022におけるGoogleの存在感
１．NeurIPS 2022におけるGoogleの存在感まとめ ・11/27(日)-12/3(土)に今年最大の機械学習会議であるNeurIPS 2021が開催 ・Googleは160を超える論文で強力な存在感を示し講演やワークショップも開催...
ヘルスケア SegCLR：対照学習で教師なしで人間の脳をマッピングを作成(1/2)
１．SegCLR：対照学習で教師なしで人間の脳をマッピングを作成(1/2)まとめ ・人間の脳の配線や情報伝達経路をマッピングすること重要な基礎研究分野 ・脳は大量の情報を持つ複雑な構造のため学習用のラベル付けが困難な領域 ・SegCLRを使...
アプリケーション Interview Warmup:自然言語評価技術を応用して面接の練習を行う(2/2)
１．Interview Warmup:自然言語評価技術を応用して面接の練習を行う(2/2)まとめ ・大規模言語モデルを用いて各トピックの学習用データを細かい粒度に分割している ・回答が「良い」かどうかは潜在的な落とし穴がある事がわかっている...
学会 ECCV 2022におけるGoogleの存在感
１．ECCV 2022におけるGoogleの存在感まとめ ・10月23日から27日の間、イスラエルとヴァーチャル空間でECCV 2022が開催 ・Google社員も多数参加し60を超える論文の発表やワークショップを開催 ・本サイトで概要を翻...
学習手法 PI-ARS：視覚移動タスクに進化型の学習を採用して高速移動を実現(2/2)
１．PI-ARS：視覚移動タスクに進化型の学習を採用して高速移動を実現(2/2)まとめ ・PI-ARSは予測情報(PI)を使用して拡張ランダム探索(ARS)を改良した手法 ・高次元の入力情報の次元を削減して扱いやすくするためARSの性能が向...
画像生成 MUSIQ:フルサイズ画像で美観評価と技術的品質評価を行う(2/2)
１．MUSIQ:フルサイズ画像で美観評価と技術的品質評価を行う(2/2)まとめ ・MUSIQは入力のエンコーディングを変更するだけなので互換性が高い ・MUSIQは従来手法と比較して画像品質評価で最先端のスコアを出せる ・MUSIQは画像品...
基礎理論 分類精度が高すぎるモデルは知覚的類似度を予測する用途に不向き(1/2)
１．分類精度が高すぎるモデルは知覚的類似度を予測する用途に不向き(1/2)まとめ ・画素の違いから画像の類似性を推定する方法は人の知覚とあまり一致しない ・画像分類器内の中間特徴表現を使うと知覚的類似性に近い分類が出来る ・どのような画像分...