入門／解説 GPT-2：より良い言語モデルとそれが暗示する事(3/3)
１．GPT-2：より良い言語モデルとそれが暗示する事(3/3)まとめ ・GPT-2のような大規模な言語モデルは良い事に使う事もできるが悪用する事も出来る ・画像や音声、動画も簡単に偽造出来る現在では予想外の悪用方法があるかもしれない ・従来...
入門／解説 入門／解説 GPT-2：より良い言語モデルとそれが暗示する事(2/3)
１．GPT-2：より良い言語モデルとそれが暗示する事(2/3)まとめ ・GPT-2はWinograd Schema、LAMBADA、およびその他の言語モデリング用タスクで最先端のスコアを達成 ・質問回答、読解力、要約、翻訳などの他の言語タス...
入門／解説 GPT-2：より良い言語モデルとそれが暗示する事(1/3)
１．GPT-2：より良い言語モデルとそれが暗示する事(1/3)まとめ ・アンデス山脈の辺境の谷間にかなり普通の英語を話すユニコーンの群れが生息している事が判明 ・彼らの起源はまだはっきりしていないが人間が文明化する前にユニコーンと出会った時...
学習手法 PlaNet：画像入力から世界モデルを学ぶ強化学習(3/3)
１．PlaNet：画像入力から世界モデルを学ぶ強化学習(3/3)まとめ ・PlaNetは一つのエージェントで６つの異なるタスクを行うように訓練する事ができた ・比較的単純なタスクに対する学習は遅かったが複雑なタスクは素早く学習し高いレベルに...
学習手法 PlaNet：画像入力から世界モデルを学ぶ強化学習(2/3)
１．PlaNet：画像入力から世界モデルを学ぶ強化学習(2/3)まとめ ・エージェントは特定の操作によってボールの位置やゴールまでの距離がどのように変化するか想像出来る ・大量の計算が必要な画像作成を省略し将来の報酬を予測するだけでよいので...
学習手法 PlaNet：画像入力から世界モデルを学ぶ強化学習(1/3)
１．PlaNet：画像入力から世界モデルを学ぶ強化学習(1/3)まとめ ・PlaNetはモデルベース(Model-based)強化学習であり世界モデルを学ぶ強化学習 ・世界モデルを学ぶと従来より少ないデータで効率的な学習を行う事ができる ・...
入門／解説 FastText:テキストデータの特徴量抽出の実装(2/2)まとめ
１．FastText:テキストデータの特徴量抽出の実装(2/2)まとめ ・FastTextでembeddingを作成した後は単語間の類似性や仲間外れを計算する事が出来る ・聖書内の単語に関する類似性や関連性は上手に捉える事が出来ている ・単...
入門／解説 FastText:テキストデータの特徴量抽出の実装(1/2)
１．FastText:テキストデータの特徴量抽出の実装(1/2)まとめ ・FastTextは2016年にFacebookによって最初に発表された素のWord2Vecモデルを拡張および改善したもの ・各単語をBag of Character ...
入門／解説 外国語を半年でマスターする学習方法
１．外国語を半年でマスターする学習方法まとめ ・TEDの動画が元ネタなので詳細はそちらを参照 ・５つの原則を守り７つの実践をする ・日常会話の相手をしてくれる人が必要 ２．半年間で外国語で会話できるようになるためには？ 以下、TEDの動画よ...
入門／解説 Global Localization:GoogleMapを見ても道に迷う方向音痴な貴方へ
１．Global Localization:GoogleMapを見ても道に迷う方向音痴な貴方へまとめ ・Global LocalizationはVPSとストリートビューと機械学習を組み合わせて正確な場所と向きを特定する技術 ・GPSは人工衛...
モデル AlphaStar：StarCraftIIでプロプレーヤーに勝った人工知能(5/3)
１．AlphaStar：StarCraftIIでプロプレーヤーに勝った人工知能(5/3)まとめ ・DeepmindのAlphaStarは素晴らしい成果を収めたのは確かだが戦略で勝ったわけではない ・本来設定されているユニット間の相性が成立し...
AI関連その他 AlphaStar：StarCraftIIでプロプレーヤーに勝った人工知能(4/3)
１．AlphaStar：StarCraftIIでプロプレーヤーに勝った人工知能(4/3)まとめ ・AlphaStarと対戦したプロは新しい戦略の発見に繋がったと評価 ・AlphaStarで培った技術は他のAI関連作業にも応用が可能 ・AIの...