単眼カメラ映像から手のリアルタイム3Dトラッキングを行なえる技術 -ニューラルネットワークを活用 - PC Watch

デモ映像を見ると、何かを持っていたり、手にオブジェクトが被っている場合でも正確にトラッキングが行なえている様子がわかるが、このトラッキング手法は、畳み込みニューラルネットワーク(CNN)と運動学的3Dハンドモデルを組み合わせたもので、オクルージョンやカメラ視点の変化に強く、解剖学的に正しく、時間的に滑らかな手の動きを実現している。