ロボット Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(2/2)
１．Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(2/2)まとめ・Performer-MPCはロボットに搭載可能で8msで応答し、830万のPerformerパラメータを備えておりリアルタイムの...
real-time
ロボット 
アプリケーション ビデオ会議時に手話で発言権を確保できるようにする(2/2)
１．ビデオ会議時に手話で発言権を確保できるようにする(2/2)まとめ・手話検出モデル完成後、ビデオ会議アプリに手話による発言を検知させる必要があった・手話検出モデルは手話を検出すると超音波を発声しアプリに疑似的な発音を検知させる・通常どおり...
アプリケーション ビデオ会議時に手話で発言権を確保できるようにする(1/2)
１．ビデオ会議時に手話で発言権を確保できるようにする(1/2)まとめ・ビデオ会議で手話を検知するのは全カメラのビデオ入力を分類対象とする必要があり困難・以前の試みで通話品質への影響を最小限に抑えるために軽量モデルが重要な事が判明・そのためP...
モデル MediaPipe BlazePose：リアルタイムにオンデバイスでポーズを追跡(2/2)
１．MediaPipe BlazePose：リアルタイムにオンデバイスでポーズを追跡(2/2)まとめ・Tracking Modelはキーポイントの「ヒートマップとオフセット」の組合わせを教師として使用・20%の誤差であれな許容範囲(PCK@...
その他の分野 MediaPipe Objectron:モバイル上でリアルタイムに物体の三次元形状を認識(2/2)
１．MediaPipe Objectron:モバイル上でリアルタイムに物体の三次元形状を認識(2/2)まとめ・実世界データとAR合成データを組み合わせることで、精度を約10%向上させる事に成功・バックボーンとなっている技術は、MobileN...
モデル MediaPipeを利用してオンデバイスでリアルタイムに手の動きを知覚(1/2)
１．MediaPipeを利用してオンデバイスでリアルタイムに手の動きを知覚(1/2)まとめ・手は形状が自由に変化したり他の手と組み合わされる事もありリアルタイムな検知が難しい・MediaPipeと言う様々な手法の知覚データを処理可能な機械学...
AI関連その他 機械学習で自撮りにリアルタイムに拡張現実を適用(3/3)
１．機械学習で自撮りにリアルタイムに拡張現実を適用(3/3)まとめ・光の反射や他の物体との重なりを意識したAR眼鏡を実現・非常にリアルなメイクアップ(化粧)効果も輝度を意識した素材で実現・このテクノロジーは最新のARCore SDKですぐに...