스마트폰이나 타블렛PC와 같이 멀티터치기반 입력경험을 웨어러블 프로젝터 기술을 사용하여 일반 종이나 벽, 심지어 손바닥까지 임의의 표면에 인터렉티브한 환경을 조성할 수 있는 기술이 발표되었다.

‘옴니터치(OmniTouch)’ 라고 명명된 이 기술은 미국 산타바바라에서 열린 ACM UIST(ACM Symposium on User Interface Software and Technology) 심포지엄에서 선보였다.

‘옴 니터치(OmniTouch)’ 는 어깨에 착용 가능한 웨어러블 프로젝터 시스템으로써 단거리에서 어떤 표면이든 터치스크린을 만들 수 있다 (그림1참조). 시스템 구성은 심도감지 카메라와 레이저기반 피코 (Pico)카메라로 이루어져있다. 심도감지 카메라는 마이크로포스프사의 키넥(Kinect)과 비슷한 시스템으로 사용자의 손가락을 깊이를 측정하는 방식으로 손가락 움직임을 트래킹하고, 피코카메라를 통해 어떤 표면에서든 레이저 기반 모바일 프로젝터를 쏠 수 있게 한다.

옴니터치의 장점으로 터치스크린 위에 키보드나 키패드를 오버레이 할 때 시스템은 자동으로 프로젝션 된 표면의 모양과 방향을 인식하여 글씨나 이미지의 왜곡을 최소화한 안정된 화면을 제공한다(그림2). 또한,시스템 작동 시 추가적인 화면교정(calibration)과정과 환경적인 셋팅이 필요 없어, 사용자가 원하는 시기에 어디서든 웨어러블 장치를 통해 바로 사용할 수 있다.

본 연구는 현재 미국 카네기멜론의HCII (Human-Computer Interaction Institute) 연구소 박사과정 학생인Christ Harrison가 마이크로소프트 연구소에서 인턴으로 일하던 중 개발 되었다. Harrison은 이전에도 마이크로소프트 연구소에서 일을 하며 스킨풋(Skinput)이란 인터페이스를 개발한 바 있다. 스킨풋이란 바이오음향 (bioacoustic)센서를 통해 손이나 팔뚝에 손가락 터치(태핑:tapping)를 이용하여 스마트폰과 같은 기기를 조작할 수 있는 신개념 인터페이스이다. 마이크로소프트 연구소는 오랫동안 유비쿼터스 컴퓨팅시대에 대비한 새로운 방식의 터치와 제스처 연구와 투자를 지속하였으며 특히 이러한 산학연구를 통해 혁신적인 기술이 선보일 수 있었다고 강조하였다.

개발자Harrison는 옴니터치를 이용하면 현재 우리가 모바일기기를 이용하여 이뤄지는 모든 활동을 손바닥 위에서 처리할 수 있으며, 즉 스마트폰이나 태블릿 PC에 익숙한 손가락 터치와 드래그와 같은 인터페이스를 사용하여 터치스크린을 조작할 수 있게 한다고 말하였다.

현재 어깨 위에 부착하여 사용하는 옴니터치는 향후 성냥각 만한 사이즈로 줄어들 것이며 포켓사이즈로 쉽게 착용 가능하게되어 미래 모바일기기로써 활용도가 커질 것이라고 전망된다.

IT기술의 발전으로 다양한 형태의 커뮤니케이션이 활발해지고 있다. 하지만 우리가 현실에서 얼굴을 마주보고 대화 시 말과 함께 자주 사용하는 바디제스처가 가상공간에서는 한계가 있다.

최근 온라인저널PLoS ONE에 실린 독일 막스플랑크연구소의 연구결과에 따르면 가상 공간에서의 바디제스처 부재가 말을 하는 사람뿐 아니라 듣는 사람에게도 정보전달을 힘들게 한다고 한다.

이를 뒷받침 하기 위해 연구진은 커뮤니케이션 게임 형식을 통해 실험참가자에게 자신의 파트너에게 선별된 ‘동사’의 의미를 바디제스처를 이용해 의미를 전달하게 하였다. 이들은 가상공간에서 모션트랙킹기술을 통해 자신의 3D아바타를 매개체로 실시간으로 바디제스처를 전달할 수 있게 하였다 (그림 1 참조).

실험결과, 참가자들 양쪽 모두가 바디제스처를 사용가능 할 때 ‘동사’ 의미 전달력이 높았고, 단어 설명 중 중간에 포기하는 비율도 매우 낮았다. 반면 비언어적 커뮤니케이션의 한계로는 현실공간에서에 비해 가상공간에서 실험참가자들이 움직임이 더 소극적이였다. 또한 가상공간에서 헤드 마운티드 디스플레이착용(그림2 참조)이 정보전달을 위한 바디제스처에 영향을 끼치는 것으로 예상하였다.

본 연구는 가상공간 발전과 특히 메디컬훈련, 도시계획, 엔터테인먼트, 원격커뮤니케이션 관련 응용 프로그램 개발 시 도움이 될 것이다.

본 논문은 온라인저널 PLoS ONE 에 alk to the Virtual Hands: Self-Animated Avatars Improve Communication in Head-Mounted Display Virtual Environments 란 제목으로 실릴 예정이다.


그림 1 왼쪽 : 모션트랙킹을 위한 6개 포인트(양손, 양쪽 발, 등, 헬멧), 오른쪽 : 해당하는 가상공간

그림 2 고글 형태eMagin헤드 마운티드 디스플레이착용모습, 이를 통해 실험 참가자들은 실제공간이 아닌 가상공간만 볼 수 있음