情報処理学会 インタラクション2021

本研究では，人と物体の相互作用を物体の動きをもとに判別し，言語と結びつける行動認識システムの開発する．従来の行動認識の研究では，人間と物体とのインタラクションを検出する場合，人を主体として認識を行う．しかし，物体によって人体の一部が隠れてしまう場合，インタラクションの検知が困難になる．基本的なアイデアはインタラクションしている物体の移動を認識し，物体の動きのみでインタラクションを認識することである．そのため，物体の動きとそれに対応する言葉のデータベースを作成し，物体の動きの特徴を学習し言語として出力を行う機械学習モデルを用いる．機械学習を用いて，オブジェクトの3次元での動きのデータを1次元の特徴ベクトルとして表し，行動分類を行う．想定している言葉として人物のみで行う動作を対象とするのではなく，物体を使って動作する言葉を対象とする．物体の動きと言語を結びつけたデータは仮想空間上の物理演算された物体に対してのインタラクションの結果を用いる．本システムの評価として，物体の動きから物体とのインタラクションの認識精度を評価するために，骨格情報をもとにした物体とのインタラクション認識の手法との比較を行う．