手首装着型小型カメラによるジェスチャー認識技術を開発 ～スマホ操作や手話認識などへの応用を期待～

東京工業大学 情報理工学院 情報工学系の小池 英樹　教授の研究グループは、手首装着型小型カメラで撮影した手の甲のカラー画像を深層学習ネットワークで学習することで、手指のジェスチャーを認識する技術を開発した。

従来の手指認識は、固定したカメラで撮影するか、手袋型デバイスを使用する必要があり、前者は手指の稼働範囲が制限され、後者は手袋着用の手間があった。本成果によって、認識範囲の制限がなくなり、例えば、手指のジェスチャーだけでスマートフォンのアプリケーションを起動する、音量を変える、といった操作ができるようになる。具体的な使用デバイスとしては、小型カメラ搭載のスマートウォッチなどを想定している。

今回の成果は、東京工業大学の他、米国カーネギーメロン大学 ロボティクスインスティテュートのＫｒｉｓ Ｍ． Ｋｉｔａｎｉ　教授、オーストラリアＮｅｗ Ｓｏｕｔｈ Ｗａｌｅｓ大学のＡａｒｏｎ Ｑｕｉｇｌｅｙ　教授らとの共同研究によるもので、２０２０年１０月２３日（米国時間）に国際会議「Ｔｈｅ ３３^ｒｄ Ａｎｎｕａｌ ＡＣＭ Ｓｙｍｐｏｓｉｕｍ ｏｎ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ Ｓｏｆｔｗａｒｅ ａｎｄ Ｔｅｃｈｎｏｌｏｇｙ（ＵＩＳＴ２０２０）」で発表される。