영상을 통하여 컴퓨터에서 포옹과 키스를 하는 사람들을 자동으로 감지해내는 기술이 개발되었다. Oxford대학에서 개발된 이 기술은 악수와 하이파이브 같이 상호작용하는 것을 자동으로 인식할 수 있다. 이것은 컴퓨터가 방대한 비디오 영상 컨텐츠를 자동으로 해석해내는 연구의 일부분으로 진행된 것으로서 TV, 영화, 유튜브 및 CCTV와 같은 곳에서 생성되는 영상을 이용하고 있다.

‘사람들의 행동과 활동이 비디오 해석을 위해 가장 중요한 점이다. 이 새로운 연구는 두 사람의 포옹, 키스 및 악수와 같은 행동을 통하여 자동으로 상호작용을 인식하도록 해준다. 이러한 상호작용을 인식할 수 있다면, 이용할 수 있는 애플리케이션은 다양하다. 예를 들어, 가정용 비디오와 유튜브에서 키스와 악수를 자동으로 찾을 수 있으며, CCTV에서 사건의 단서를 빠르게 찾아낼 수 있을 것이다.’ 라고 Oxford대학 과학공학부의 Alonso Patron-Perez가 말했다.

Alonso Patron-Perez, Ian Reid 박사, Marcin Marszalek 박사, Andrew Zisserman 교수가 속한 Oxford대학팀이 개발한 방법은 컴퓨터 비전과 기계학습을 통해서 알고리즘을 개발하였다.

상호작용을 인식하는 교육용 컴퓨터는 여러 단계를 거치게 된다. 먼저 사람들이 감지되고 비디오 영상을 통해서 추적하게 된다. 그러면 비디오상에서 사람들의 위치가 확인되며, 머리의 움직임과 이와 관련된 신체의 움직임과 같은 다른 단서들을 통해서 상호작용이 만들어지는지, 어떤 종류의 상호작용인지를 추정하게 된다.

이러한 모든 정보는 몇가지 상호작용을 통해서 산출되며(이 팀은 악수, 하이파이브, 포옹 및 키스와 같은 4가지 종류에 초점을 맞추고 있다.), 이러한 몇가지 사례를 통해서 각각 상호작용 모델을 배우는데 기계 학습방법이 사용되게 된다.

Alonso Patron-Perez는 ‘컴퓨터가 이러한 모델을 배우게 되면, 사람들의 상호작용이 비디오와 컴퓨터에서 어떤 위치에서 일어나고 있는지를 알아낼 수 있게 된다. 그리고 어떤 종류의 상호작용이 포함되고 있는지를 알아낼 수 있다. 이 연구는 이전에는 가능하지 않았던 방법으로서 비디오 영상을 통해서 컴퓨터가 사람들의 행동을 알아내는 것이다.’ 라고 말했다.