Googleがスマホ動画の背景を自由に変更できるアプリを開発

  • 2018.03.12
  • AI
Googleがスマホ動画の背景を自由に変更できるアプリを開発

1.Googleがスマホ動画の背景を自由に変更できるアプリを開発まとめ

・Googleがスマホカメラで映した動画の背景を自由に変更できるアプリを開発
・人工知能の予測でグリーンスクリーンがなくても自由に整形が変えられる
・コラージュだけではなく今後はCGにも本格的にAIが進出してきそう

2.動画の背景を変える事のどこが凄いのか?

通常、こういった動画の編集は非常に複雑な処理になるので大変時間がかかる。例えば、CG映画などでは背景と人間の区別がつきやすいようにグリーンスクリーン上で人間が演技し、後からCGを追加している。

映画「指輪物語」でガンダルフ役をやったイアン・マッケランは、実際にはその場にいない他の13人の登場人物との共演をグリーンスクリーン上で独りで演じる事を求められて「これをしたくて役者になったわけじゃない」と愚痴ってしまった事があるらしいが、映画の撮影でも大がかりな処理が必要になる。

今回は
(パソコンより演算処理が遅い)スマホで
(じっくりと計算に時間をかける事ができない)リアルタイムに
(境界を判別しやすいグリーンスクリーンを使わずに)背景を編集可能にした
って事がとても凄い。

現在はyoutube用のアプリでしか使えないベータ版だが、デモはとてもスムーズに動いている。最初に人物部分を特定した後、その人物部分の動画内の動きを人工知能で予測させる事で実現しているらしいけれども、髪の毛なども綺麗に抜き出せている。

一時期話題になった人工知能によるコラージュだけでなく、今後はCGにも人工知能がどんどん使われるようになるのだろう。

指輪物語におけるCG処理の大変さは下記

1)指輪物語の撮影シーン(ドラゴン)

2)実際の映画シーン

 

3.Googleがスマホ動画の背景を自由に変更できるアプリを開発関連リンク

1)research.googleblog.com
Mobile Real-time Video Segmentation

2)excite.co.jp
「これをしたくて役者になったわけじゃない…」ガンダルフ役の俳優が嘆いた理由とは