3D姿勢推定技術：指先の向きや手の重なりまで3D認識する技術

概要

「3D姿勢推定技術」とは、身体の動きや指先の向き、手の重なりなど、身体の細部まで総合的に3D認識する技術。撮影した動画の人物の動きをとらえ、リアルタイムで3Dコンピューターグラフィックス（CG）の姿勢推定モデルを構築する。従来技術では課題となっていた、指先の向きや両手が重なる場面などでの誤検出を削減し、スマートフォン等で撮影した動画でも全身の細部の動きを追跡・分析できる。3D姿勢推定技術を基に、リアルタイムでアバター動画を生成し手話と音声でコミュニケーションを取る取組みも行われており、今後は遠隔医療や職人仕事の技術伝承、ロボット開発など、幅広い分野での活用が期待される。

なぜできるのか？

独自の深層学習技術

複雑かつ柔軟なニューラルネットワークを構築できるPreferred Networks独自の深層学習技術（ディープラーニング）が、高精度な3D姿勢推定モデルを構築。3Dモデル構築にあたっては、3DCGによる人体シミュレーションで、学習のための3Dデータを大量に作成。作成した3Dデータをスーパーコンピュータで深層学習させ、高精度なモデル構築を実現した。