ETRI, 가상·증강현실 접목 ‘몰입형 확장현실’ 개발

한국전자통신연구원(ETRI)은 가상현실(VR)과 증강현실(AR)을 접목한 ‘몰입형 확장현실(XR)’ 기술을 개발했다고 19일 밝혔다.

몰입형 XR의 핵심은 다인칭 사용자의 3차원 정밀 동작 분석과 복합 공간에서의 사용자 위치 추정 기술이다. 다인칭 3차원 정밀 동작 분석은 모바일 환경에서 딥러닝 기술을 이용해 2차원 영상 데이터 기반으로 사용자의 3차원 관절 위치 정보를 추론하는 방식으로 이뤄진다.

‘몰입형 확장현실(XR)’ 기술 개념도. 한국전자통신연구원 제공

기존에는 고가의 그래픽처리장치(GPU)가 탑재된 시스템 자원을 요구했지만, ETRI는 사용자의 스마트폰으로 3차원 자세 정보를 효율적으로 추출할 수 있도록 했다.

또 복합 공간에서의 사용자 위치 추정은 증강현실 콘텐츠를 현실 세계에 자연스럽게 융합하기 위한 기술이다. 이 기술은 스마트폰 카메라로 영상 속 특징을 추출한 후 3차원 포인트 클라우드를 생성·보정해 환경 맵을 구축, 사용자의 디바이스 위치를 정밀하게 추정할 수 있게 한다.

사용자가 AR 환경에서 몰입감을 극대화할 수 있게 설계한 점은 몰입형 XR의 장점이다. 이를 통해 VR·AR 환경에서 사용자의 환경과 행동을 정밀하게 해석해 다수의 사용자에게 별도의 제약 없이 동일한 품질의 인터랙션을 제공하는 것이 가능하다는 것이 ETRI의 설명이다.

ETRI는 증강현실에 맞춰 가상현실 공간을 만들어 로컬 및 원격에서 다수 사용자가 참여해 XR 체험을 할 수 있도록 시범 콘텐츠도 만들었다.

증강현실에서 범용 스마트폰을 활용해 헤드마운티드 디스플레이(HMD)를 착용한 2명의 로컬 사용자가 각각 여우와 어린왕자의 역할을 하고, 가상현실 속에서 HMD를 착용한 또 다른 한 명의 원격사용자가 허수아비 캐릭터 역할을 할 수 있게 하는 방식이다. 이를 통해 ETRI는 다수 인원이 참여하는 원격몰입 확장현실을 시연할 수 있었다.

한편 이번 연구는 과기정통부의 과제 지원을 받아 ETRI와 KAIST, ㈜제이투와이소프트, ㈜토즈가 4년간 공동으로 수행됐다.

대전=정일웅 기자 jiw3061@asiae.co.kr