人がコミュニケーションやインタラクションで用いている仕草などの視覚情報を、コンピュータで理解できるようにします。

2014年の研究室発足時から頭部動作について研究を行っており、2017年には手指動作にまで視野を広げてきました。この研究はコミュニケーションに支障を抱える人々を支える技術としてだけでなく、人がコンピュータやロボットと円滑に関わる上でも重要な鍵となるでしょう。