モデル AI Choreographer：音楽に合わせたダンスを生成する人工知能(2/2)
１．AI Choreographer：音楽に合わせたダンスを生成する人工知能(2/2)まとめ ・FACTはMotion、Audio、Cross-Modalの3種のTransformerから構成される ・full-attention mask...
music
モデル 
入門／解説 50億のパラメータを持つ人工知能はどこかぁ～に君ぃ～を隠しているからぁ～♪の続きを歌えるのか？
１．50億のパラメータを持つ人工知能はどこかぁ～に君ぃ～を隠しているからぁ～♪の続きを歌えるのか？まとめ ・10億版に比べて50億版の表現力は明らかにあがっており違和感が減っている ・特に英語の歌では人工知能によって補完された歌である事に気...
アプリケーション Jukebox：歌声を含む生のオーディオを生成可能なニューラルネット(2/2)
１．Jukebox：歌声を含む生のオーディオを生成可能なニューラルネット(2/2)まとめ ・Jukeboxは局所的には一貫性のある音楽を作成できるが曲全体で見るとまだ構造把握が甘い ・ダウンサンプリングとアップサンプリングを行っているためノ...
アプリケーション Jukebox：歌声を含む生のオーディオを生成可能なニューラルネット(1/2)
１．Jukebox：歌声を含む生のオーディオを生成可能なニューラルネット(1/2)まとめ ・音楽におけるスタイル転送が歌声を含む生の音声データで可能なOpen AIのJukeboxの紹介 ・CD品質の音楽は1,000万を超えるタイムステップ...
AI関連その他 2021年にあなたが注目すべきトップAIアーティスト
１．2021年にあなたが注目すべきAIアーティストまとめ ・様々な領域でAIを使ったアートを発表している海外のトップアーティストの紹介 ・現時点では一般的な「アート」とは見なされない可能性が高いものも含まれる ・美術史から学べばどんな分野も...
アプリケーション Hum to Search：鼻歌検索の背後に存在する技術(2/2)
１．Hum to Search：鼻歌検索の背後に存在する技術(2/2)まとめ ・トレーニングデータは元の歌声をハミングや口笛に変換して認識率を向上させている ・トレーニング時にはトリプレット損失関数をベースに信頼性の概念に改良を加えた ・現...
その他 GoogleのリサーチサイエンティストColin Raffelへのインタビュー(1/2)
１．GoogleのリサーチサイエンティストColin Raffelへのインタビュー(1/2)まとめ ・音楽に関する研究から始めたため、ラベル付きデータを取得する事の困難さを味わった ・そのため、ラベル付きデータの必要性を軽減する研究に関して...
入門／解説 MuseNet:ショパン風のレディガガ、ビートルズ風のハリポッターのテーマ(2/4)
１．MuseNet:ショパン風のレディガガ、ビートルズ風のハリポッターのテーマ(2/4) ・2019年5月12日までの期間限定で公開されているAIによる作曲支援ツールMuseNetの使い方の解説 ・ベーシックモードでは６スタイル、６イントロ...