본 논문에서는 프로젝터-카메라 기반 공간 증강현실 기술과 모바일 증강현실 기술, 그리고 손동작 인식 기반 사용자 친화적 인터페이스를 활용한 사용자 몰입형 증강현실 시스템을 제안한다. 프로젝터-카메라 기반 증강현실 기술을 통해 테이블 위에 콘텐츠가 제공되는 환경에서, 사용자는 스마트폰을 통해 제어 가능한 물리 객체와 손동작 인식을 이용해서 증강된 콘텐츠와 상호작용 할 수 있다. 또한, 모바일 증강현실 기술을 활용함으로써 더욱 몰입감있는 증강현실 콘텐츠를 제공한다. 본 논문에서는 제안한 증강현실 시스템의 유용성을 검증하기 위해서 자동차 주행 어플리케이션을 구현하였다.