사용자의 손동작을 이용한 가상 객체 제어

Abstract

본 논문은 디스플레이 장치에 출력된 가상 객체를 일상생활에서 사용하는 손동작을 사용하여 제어하는 것을 목표로 한다. 가상 객체를 제어하기 위한 기존의 많은 방법들은 사용자의 손동작이 아닌 포즈를 이용하기 때문에 직관적이지 못하고 포즈와 객체 제어 명령과의 관계를 미리 학습해야하는 단점이 있었다. 본 논문에서는 스테레오 카메라를 사용하여 사용자의 손과 손끝의 3차원 정보를 추출하여 3차원 공간에서 객체를 제어할 수 있도록 한다. 또한 사용자의 손동작을 인터페이스로써 정의하고 실시간으로 입력되는 사용자 손동작 입력 열을 검출하고 이를 동적시간왜곡 방법으로 분류하는 방법을 제안한다. 마지막으로 다양한 제스처와 여러 사용자에 대한 실험을 통하여 본 논문에서 제안하는 방법의 효용성을 확인한다.In this paper, we purpose to manipulate virtual objects in three-dimension space by using hand gestures that are used in daily life. Previous methods to manipulate objects are not intuitive, because there are used hand pose instead of gesture. And the methods have a disadvantage to previously learn commands about relationship between pose and control. In this paper, we extract 3D information of hand and fingertips using stereo camera and enable to manipulate objects in 3D space. Also we define user interfaces using hand gestures. And we propose a method that is classification of sequences of hand gesture using dynamic time warping algorithm in real time. Finally, we certify usefulness and effectiveness of a proposed method as experiences with various users and gestures.