MediaPipe関係のまとめ
アイキャッチ画像のクレジットはPhoto by Clodagh Da Paixao on Unsplash
１．デバイス別対応状況表
2020年12月11日現在の情報です。最新の対応状況情報については本家MediaPipeの「solutions」ページを参照してください。
| Android | iOS | C++ | Python | JS | Coral※ | |
| Face Detection | ✅ | ✅ | ✅ | ✅ | ||
| Face Mesh | ✅ | ✅ | ✅ | ✅ | ✅ | |
| Iris | ✅ | ✅ | ✅ | |||
| Hands | ✅ | ✅ | ✅ | ✅ | ✅ | |
| Pose | ✅ | ✅ | ✅ | ✅ | ✅ | |
| Holistic | ✅ | ✅ | ✅ | ✅ | ✅ | |
| Hair Segmentation | ✅ | ✅ | ||||
| Object Detection | ✅ | ✅ | ✅ | ✅ | ||
| Box Tracking | ✅ | ✅ | ✅ | |||
| Instant Motion Tracking | ✅ | |||||
| Objectron | ✅ | |||||
| KNIFT | ✅ | |||||
| AutoFlip | ✅ | |||||
| MediaSequence | ✅ | |||||
| YouTube 8M | ✅ |
※Coralとはgoogleが販売しているAIと親和性の高いカメラやセンサー等のedgeハードウェア製品です。
２．MediaPipe関連記事一覧
１）Face Mesh
機械学習で自撮りにリアルタイムに拡張現実を適用(1/3)
機械学習で自撮りにリアルタイムに拡張現実を適用(2/3)
機械学習で自撮りにリアルタイムに拡張現実を適用(3/3)
２）MediaPipe Iris
MediaPipe Iris：リアルタイムに眼球の虹彩を追跡し距離を推定(1/2)
MediaPipe Iris：リアルタイムに眼球の虹彩を追跡し距離を推定(2/2)
３）Hands
MediaPipeを利用してオンデバイスでリアルタイムに手の動きを知覚(1/2)
MediaPipeを利用してオンデバイスでリアルタイムに手の動きを知覚(2/2)
４）MediaPipe BlazePose
MediaPipe BlazePose：リアルタイムにオンデバイスでポーズを追跡(1/2)
MediaPipe BlazePose：リアルタイムにオンデバイスでポーズを追跡(2/2)
５）MediaPipe Objectron
MediaPipe Objectron:モバイル上でリアルタイムに物体の三次元形状を認識(1/2)
MediaPipe Objectron:モバイル上でリアルタイムに物体の三次元形状を認識(2/2)
三次元物体認識のためのObjectronデータセットの発表(1/2)
三次元物体認識のためのObjectronデータセットの発表(2/2)
６）Box Tracking
Lookout：視覚に困難を抱える人のためにスマホで商品を識別(1/2)
Lookout：視覚に困難を抱える人のためにスマホで商品を識別(2/2)
７）MediaPipe KNIFT
MediaPipe KNIFT：テンプレートベースの画像検索を改善(1/3)
MediaPipe KNIFT：テンプレートベースの画像検索を改善(2/3)
MediaPipe KNIFT：テンプレートベースの画像検索を改善(3/3)
８）AutoFlip
AutoFlip：機械学習を用いてビデオの最適な箇所を切り抜く(1/3)
AutoFlip：機械学習を用いてビデオの最適な箇所を切り抜く(2/3)
AutoFlip：機械学習を用いてビデオの最適な箇所を切り抜く(3/3)
９）YouTube 8M
YouTube-8Mセグメントデータセットの発表
１０）MediaPipe Holistic
MediaPipe Holistic：オンデバイスで顔、手、ポーズを同時に予測(1/2)
MediaPipe Holistic：オンデバイスで顔、手、ポーズを同時に予測(2/2)