アプリケーション SSD:半教師あり蒸留を使ってGoogle検索を改善(2/2) 1.SSD:半教師あり蒸留を使ってGoogle検索を改善(2/2)まとめ ・Noisy Studentとknowledge distillationは似ているが後者はノイズを混入しない ・半教師あり蒸留は、生徒に蒸留する前に同等以上の規模の... 2021.07.24 アプリケーション学習手法
アプリケーション SSD:半教師あり蒸留を使ってGoogle検索を改善(1/2) 1.SSD:半教師あり蒸留を使ってGoogle検索を改善(1/2)まとめ ・以前の半教師あり学習はラベル有データが豊富な場合は完全教師あり学習と競合できなかった ・Noisy Studentは高データ体制でうまく機能する半教師あり学習でモデ... 2021.07.23 アプリケーション学習手法