アプリケーション InfiniteNature-Zero：静止画の奥に向かって鳥のように飛んでいく動画を無限に生成(1/2)
１．InfiniteNature-Zero：静止画の奥に向かって鳥のように飛んでいく動画を無限に生成(1/2)まとめ・素晴らしい自然の風景内を鳥のように飛び回ることが出来たら応用範囲が広い・Infinite Natureと名付けた研究で映像...
3d
アプリケーション 
アプリケーション 人工知能を使って歴史的な写真や絵画を立体化
１．人工知能を使って歴史的な写真や絵画を立体化まとめ・CVPR 2020で発表されたモデルを使うと古い写真や絵画を動画化してグリグリ動かせる・ややぼやけてしまっているような歴史上の有名な写真も３D化できる・もちろん、Stable diffu...
学習手法 LOLNeRF:1枚の画像から3次元構造を学ぶ(2/2)
１．LOLNeRF:1枚の画像から3次元構造を学ぶ(2/2)まとめ・2次元画像から3次元形状を理解する手法は複数視点のデータに依存している・1枚の画像から3次元構造を知ることができると便利だが解決困難とされている・LOLNeRFは単一視点画...
学習手法 LOLNeRF:1枚の画像から3次元構造を学ぶ(1/2)
１．LOLNeRF:1枚の画像から3次元構造を学ぶ(1/2)まとめ・2次元画像から3次元形状を理解する手法は複数視点のデータに依存している・1枚の画像から3次元構造を知ることができると便利だが解決困難とされている・LOLNeRFは単一視点画...
モデル 4D-Net:センサーの奥行情報とカメラのRGB画像を同時に扱う(2/2)
１．4D-Net:センサーの奥行情報とカメラのRGB画像を同時に扱う(2/2)まとめ・軽量なNASを用いて２タイプのセンサー入力と特徴表現間の接続を学習させた・4D-Netは従来手法より多いセンサー入力を使用しているが半分の応答速度で精度も...
モデル 4D-Net:センサーの奥行情報とカメラのRGB画像を同時に扱う(1/2)
１．4D-Net:センサーの奥行情報とカメラのRGB画像を同時に扱う(1/2)まとめ・人間は世界を時間軸を加えた4次元で体感しているが自律走行車やロボットには不可能・センサーで取得した奥行情報と画像を時間的に並んだデータとして組み合わせるの...
学習手法 カメラとモデルが動いている状況で奥行情報を予測(2/2)
１．カメラとモデルが動いている状況で奥行情報を予測(2/2)まとめ・深度予測ネットワークへの入力は元映像、人をマスクした情報、視差から得られた深度マップ・人間は物理的に一貫した形状と寸法を持つため内部的に事前学習させる事ができる・これにより...
モデル カメラとモデルが動いている状況で奥行情報を予測(1/2)
１．カメラとモデルが動いている状況で奥行情報を予測(1/2)まとめ・従来の三角測量を使った手法ではカメラで奥行を予測するためにはカメラが静止している必要があった・今回、カメラとカメラが写している人物が同時に移動していても奥行情報を推定可能な...
その他の調査 白い線を引くだけの脅威のアプリ
１．白い線を引くだけの脅威のアプリまとめ・Googleが白い線を引くだけのスマホアプリを公開・スマホ画面で空間に自由に白線を引く事ができるだけ・他の人もその白線を見る事が出来るので応用範囲がとても広い２．何故、白い線を引く事が脅威なのか？動...
その他の分野 Motion StillsのAR対応
１．Motion StillsのAR対応まとめ・Googleが作った動画編集スマホアプリがＡＲ（拡張現実）に対応・３Ｄオブジェクトが重力や回転を意識してカメラの中を動き回る・この技術を使えばPokemonGoは肩に乗せたピカチューを実現でき...