素手で計算機と対話する
−多数カメラを使った手の形と動きの認識−

Interacting with Computers Using Empty Hands
−Multiple-Camera-Based Hand Gesture Recognition−



(株)ATR知能映像通信研究所 第1研究室 内海 章、楜沢 順、大谷 淳



人間と計算機の素手によるインタフェースの実現をめざし、多数のテレビカメラを用いた手の動き・形状の認識法を検討しました。本手法では指の曲がりに関わりなく安定に手の位置と向きを推定し、推定結果に基づき手の形状を視るのに適した画像を選択して指の曲がりのパターン(手形状)を認識します。本手法を使って素手で仮想シーンの生成が行えるシステムを作り、多くの人に実際に操作していただくことで、本手法の有効性と安定性が確認できました。

We propose a non-contact type interface for direct manipulation using a vision-based hand gesture tracking system. In this system, the motion of the user’s hand (position, posture and shape) is detected in real-time by using multiple-camera images. Employing multiple-viewpoint compensates for occlusions caused by hand motion so that a user does not need to be conscious of the camera position. Based on our hand gesture recognition system,we developed a system where a user can create virtual graphical scenes interactively.

本文へ