基礎理論 ALBERT:軽量化と冗長性排除をしたBERT(2/2)
１．ALBERT:軽量化と冗長性排除をしたBERT(2/2)まとめ ・パラメータの因数分解と冗長性の排除を行う事でわずかなBERTよりパラメータを89%削減 ・パラメータサイズを削減した事により計算機資源に余裕が生まれ、モデルの規模を改めて...
dahara1
基礎理論 基礎理論 ALBERT:軽量化と冗長性排除をしたBERT(1/2)
１．ALBERT:軽量化と冗長性排除をしたBERT(1/2)まとめ ・AIのNLPのパフォーマンスを向上させている主要な要因は複雑で特定は困難 ・ALBERTを設計していく中で得られた鍵は、モデルの容量をより効率的に割り当てる事であった ・...
学習手法 Recorder：Pixelスマートフォン用の検索可能な録音アプリ(2/2)
１．Recorder：Pixelスマートフォン用の検索可能な録音アプリ(2/2)まとめ ・Recorderは音声を50ms単位で小さく分析し正確に音声イベントの開始時間と終了時間を特定している ・音声分類結果が目まぐるしく変わらないようにa...
学習手法 Recorder：Pixelスマートフォン用の検索可能な録音アプリ(1/2)
１．Recorder：Pixelスマートフォン用の検索可能な録音アプリ(1/2)まとめ ・録音音声をリアルタイムで書き起こしてタグ付けし、検索しやすくするPixel用アプリが公開 ・Recorderと名付けられたこのアプリはオンデバイスで動...
その他 アーティストCryptograffitiが最も安価なアートのオークション記録を樹立
１．アーティストCryptograffitiが最も安価なアートのオークション記録を樹立まとめ ・最も「低い」価格を付けた入札者に販売するオークションがアーティスト「Cryptograffiti」によって開催 ・「Black Swan」と名付...
入門／解説 機械学習モデルの分類外データの検出を改良(3/3)
１．機械学習モデルの分類外データの検出を改良(3/3)まとめ ・尤度比は背景部分の影響を取り除き、意味を持つ部分に焦点を当てているためOODを適切に検出可能 ・尤度は背景部分の画素が非常に特徴的なパターンで並んでいる事を学習してしまいOOD...
入門／解説 機械学習モデルの分類外データの検出を改良(2/3)
１．機械学習モデルの分類外データの検出を改良(2/3)まとめ ・Background Statisticsによって混乱が引き起こされるためOODの検出は失敗している可能性がある ・OOD検出手法はMNISTデータセットの画像をFashion...
学習手法 機械学習モデルの分類外データの検出を改良(1/3)
１．機械学習モデルの分類外データの検出を改良(1/3)まとめ ・機械学習は学習時に想定されてなかった分類外データを入力に与えられると確信を持って間違う時がある ・これを避けるため「そのデータが分類外(out of distribution)...
その他の分野 Google Pixel 4とPixel 4 XLでのポートレートモードの改良(3/3)
１．Google Pixel 4とPixel 4 XLでのポートレートモードの改良(3/3)まとめ ・一眼レフカメラで撮影すると高コントラストなディスク状のボケを生成可能 ・以前のPixel 3のポートレートモードでは背景をディスク状にぼか...
その他の分野 Google Pixel 4とPixel 4 XLでのポートレートモードの改良(2/3)
１．Google Pixel 4とPixel 4 XLでのポートレートモードの改良(2/3)まとめ ・デュアルカメラはデュアルピクセルより間隔が離れているため遠くの物体の深度も簡単に推定可能 ・デュアルカメラが利用できる場合であってもデュア...
その他の分野 Google Pixel 4とPixel 4 XLでのポートレートモードの改良(1/3)
１．Google Pixel 4とPixel 4 XLでのポートレートモードの改良(1/3)まとめ ・Pixel 2に初めて搭載され、Pixel 3で機械学習の力で改良されたポートレートモードがPixel 4で更に改良 ・Pixel 4では...
モデル 肺癌を予測するための有望な一歩
１．肺癌を予測するための有望な一歩まとめ ・肺がんでは年間170万人以上が死亡しており、世界中で最も死亡人数が多い致命的ながんの一つ ・CTスクリーニングは死亡率を低下させるが診断が難しく経済的コストにつながる等の課題がある ・この現状を改...