人が他人の状態や行動を目で見て意図を理解できるように、コンピュータビジョンと機械学習によって機械にもそのような能力を持たせます。

まず人の手や体の姿勢をとらえて追跡すること（姿勢推定・トラッキング）から始め、動作や行動の推定を行い、そしてそれを行っている人の意図を推定できるようにするという目標に向かって研究を行っています。