KR100445846B1 - 대인 공포증 치료를 위한 가상 연설 시뮬레이터 - Google Patents

Abstract

본 발명은 실제 사람의 동영상을 그대로 가상의 청중으로 제시하고, 그 청중들의 모습 및 행동을 치료자의 목적에 맞게 각각 조작하고, 그 청중을 치료자가 공포를 느끼는 대상(상사, 가족, 친구 등)으로 제시할 수 있는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 방법 및 장치에 관한 것이다. 본 발명에 따르면, 적어도 배경, 청중의 모습 및 행동을 포함하는 영상 설정 정보를 수신하고, 치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하고, 상기 위치 정보에 상응하는 프레임을 판단하고, 영상 데이터 저장부로부터 상기 프레임 및 상기 영상 설정 정보에 상응하는 배경 영상 및 청중 영상을 추출하고, 상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하고, 상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하고, 상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송한다.

Description

대인 공포증 치료를 위한 가상 연설 시뮬레이터{A Public Speaking Simulator for treating anthropophobia}

본 발명은 실제 사람의 동영상을 그대로 가상의 청중으로 제시하고, 그 청중들의 모습 및 행동을 치료자의 목적에 맞게 각각 조작하고, 그 청중을 치료자가 공포를 느끼는 대상(상사, 가족, 친구 등)으로 제시하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 방법 및 장치에 관한 것이다.

대인 공포증은 다른 사람과의 상호 관계를 두려워하여 사람과의 대면을 겁내고 두려워하며 피하는 증상으로 정의되어진다. 이 공포증은 흔히 부끄러움을 탄다거나 소심한 태도로 나타나게 되는데, 이런 사람들은 자기도 모르게 실수를 해서 상대방이 당황하게 되거나 모욕감을 느끼게 되지 않을까 두려워하는 증상이 있다. 또한 사람을 대할 때 혹은 사람이 있는 곳에 갈 때마다 피하고 싶고, 떠나고 싶어한다. 일반적으로 대인 공포를 가진 사람들은 대중 앞에서 말하기, 윗사람과의 관계, 이성 관계 같은 일상적인 일에서 공포를 느끼고, 그 중에서 특히 대중 앞에서 말하기의 상황에서 가장 심하게 공포감을 느낀다.

이러한 대인 공포증을 치료하기 위해서, 기존에는 주로 약물 치료 방법과 인지·행동 치료 방법이 주로 쓰여왔다. 약물 치료는 항불안제제를 사용하여 공포상황에 노출되기 전에 미리 투약하여 불안을 감소시키는 방법이다. 하지만 이는 공포증 치료에 있어서 효과의 지속성이 떨어지며, 또한 재발 가능성이 많고 습관성이 된다는 단점이 있다. 또 다른 방법 중의 하나인 인지·행동 치료는 환자가 상상이나 실제 상황을 통해 공포 대상에 노출됨으로써 공포 상황을 극복하게 하는 치료 방법이다. 하지만 이는 환자가 공포 상황을 상상하는데 어려움이 있거나, 너무 두려워 실제 공포 상황에 직면하지 못한다는 단점이 있다.

최근 들어 이러한 단점을 보완하기 위해서 가상 현실 기술을 이용한 공포증 치료 기술이 대두되고 있다. 이는 가상적으로 점진적인 공포 상황을 구현하여 환자에게 제공함으로써 치료하는 방법이다. 이를 통해 치료자는 상상에 의한 자극보다실제적인 공포 자극을 경험할 수 있게 되었고, 실제의 상황에 노출되는 방법보다 안전하게 치료를 할 수 있게 되었다. 이러한 이유로 가상 현실을 이용한 광장 공포증, 고소 공포증, 폐쇄 공포증 등의 치료에 관한 연구가 활발히 진행되고 있으며 그 효과 또한 다양한 연구에서 입증되고 있다.

여기서, 가상 현실 시스템(VR: Virtual Reality system)은 우리가 직접 경험할 수 없고 미완성 또는 존재하지 않는 가상 상황을 마치 실제 상황인 것처럼 느낄 수 있도록 생생하게 보여주고, 치료자로 하여금 그 속에서 원하는 행동을 자유롭게 할 수 있도록 하여 많은 지식과 체험을 얻을 수 있게 하는 것으로, 컴퓨터 기술과 영상 기술을 기반으로 구현된다. 기존 컴퓨터가 2차원의 사용 환경을 윈도우(window) 형태로 제공하고, 치료자를 관찰자 또는 국외자로 대하는 방법과는 달리 가상 현실(VR)은 3차원의 사용 환경(가상 세계)을 치료자에게 제공하여 자신이 가상 세계 속에 있는 것처럼 느끼고, 가상 현실에 나타나는 물체들을 직접 조작할 수 있도록 해준다. 이와 같은 차이로 인해 가상 현실(VR) 기술을 이용하면 기존의 정보 제공 방식 및 상호 작용 방식으로는 제공하기 어려운 생생한 지식과 체험을 가능하게 하기 때문에 교육, 오락, 문화, 과학, 의학, 통신, 국방 등 다양한 분야에서 방대한 새로운 시장을 창출할 수 있을 것으로 기대된다.

하지만 현재까지 가상 현실을 이용한 정신 치료에 대한 연구 중 대인 공포증 자체에 대한 연구는 미미한 편이며, 가상 환경 또한 제대로 갖추어져 있지 않다. 최근에 영국의 런던 대학에서 대인 공포증을 위한 가상 환경이 개발되었지만 시스템 자체가 고가 워크스테이션을 기반으로 구성되었기 때문에 범용성 면에 있어떨어지는 단점이 있다.

또한, 종래의 대인 공포증 치료를 위한 가상 환경 시스템은 아바타들을 청중으로 제시하기 때문에 현실감이 떨어지는 문제점이 있다.

또한, 종래의 대인 공포증 치료를 위한 가상 환경 시스템은 대인 공포증 환자가 공포를 느끼는 실질적인 대상(예를 들면, 상사, 가족, 친구 등)을 가상 환경의 이미지로 제시하지 못하는 문제점이 있다.

또한, 종래의 대인 공포증 치료를 위한 가상 환경 시스템은 가상 환경 시뮬레이터에 등장하는 청중 각각의 모습, 행동 등을 보다 현실감있게 제공하지 못하고 각각을 조작할 수 없다는 문제점이 있다.

또한, 종래의 대인 공포증 치료를 위한 가상 환경 시스템은 가상 환경 시뮬레이터에 등장하는 각각의 모습, 행동 등을 환자의 증세에 맞게 단계적으로 제공하지 못하는 문제점이 있다.

따라서, 본 발명의 목적은 가상의 아바타들이 청중으로 제시되는 것이 아니라 실제 사람의 동영상을 그대로 가상의 청중으로 제시하고, 그 청중 각각을 치료자의 목적에 맞게 조작하고, 그 청중을 자신이 공포를 느끼는 대상(상사, 가족, 친구 등)으로 제시하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 데 있다.

본 발명의 다른 목적은 가상 환경 시뮬레이터의 배경 화면 및 청중 등을 실제 사진 이미지와 같은 영화 기반으로 제공하여 현실감있는 치료를 제공하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 데 있다.

본 발명의 또 다른 목적은 가상 환경 시뮬레이터에 등장하는 각각에 상응하는 다양한 모습, 행동 등을 제공하여 보다 현실감있는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 데 있다.

본 발명의 또 다른 목적은 가상 환경 시뮬레이터에 등장하는 각각의 모습, 행동 등을 치료자의 증세에 맞게 단계적으로 제공함으로써 치료자가 안전하게 치료를 받을 수 있도록 하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 데 있다.

본 발명의 또 다른 목적은 가상 환경 시뮬레이터에 등장하는 청중들 각각의 모습, 행동 등을 치료자의 치료 목적에 맞게 조작하여 제공함으로써 치료 효과를 극대화하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공하는 데 있다.

도 1은 본 발명의 바람직한 일 실시예에 따른 대인 공포증 치료를 위한 가상 연설 시뮬레이터의 시스템 구성도.

도 2는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터에 등장하는 청중의 모습과 행동의 예시도.

도 3a 및 도 3b는 본 발명의 바람직한 일 실시예에 따른 치료자의 시선 및 움직임에 따라 현실감있게 변경되어 제공되는 영화 기반 가상 연설 시뮬레이터의 예시도.

도 4는 본 발명의 바람직한 일 실시예에 따른 개인별 조작이 가능한 영화 기반 가상 연설 시뮬레이터의 구성을 나타낸 도면.

도 5는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터의 프레임 구성을 나타낸 도면.

도 6은 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터의 소프트웨어의 구성을 나타낸 도면.

도 7은 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터가 실행되는 과정을 나타낸 순서도.

도 8a 및 도 8d는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터 프로그램 소스의 예시도.

<도면의 주요 부분에 대한 부호의 설명>

100 : 대인 공포증 환자 101 : 시야 이동 감지 수단

102 : 가상 현실 엔진 104 : 헤드 마운티드 디스플레이

107 : 입력 장치 108 : 송신기

601 : 신호 변환기 603 : 위치 및 방향 추적기

605 : 3D 그래픽 보드 607 : 3D 음향 처리부

609 : 시야각 계산부 611 : 가상 현실 이미지 생성기

613 : 영상 데이터 저장부

상기 목적들을 달성하기 위하여 본 발명의 일 측면에 따르면, 실질적인 이미지의 가상 현실 영상을 제공하는 데에 있어서, 적어도 배경, 청중의 모습 및 행동을 포함하는 영상 설정 정보를 수신하고-여기서, 상기 영상 설정 정보는 상기 가상 현실 시뮬레이터와 연결된 입력 장치에 의해 입력됨-, 치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하고, 상기 위치 정보에 상응하는 프레임을 판단하고, 영상 데이터 저장부로부터 상기 프레임 및 상기 영상설정 정보에 상응하는 배경 영상 및 청중 영상을 추출하고, 상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하고, 상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하고, 상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법, 상기 방법에 상응하는 장치 및 시스템을 제공할 수 있다.

상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계는 상기 프레임 및 상기 영상 설정 정보에 상응하는 사운드를 추출하고, 상기 추출된 사운드를 상기 치료자에게 제공하는 단계를 더 포함할 수 있다.

상기 위치 정보는 상기 치료자가 바라보는 시야에 상응하는 시야각 및 원근값을 포함할 수 있다.

상기 영상 설정 정보는 상기 치료자가 착용한 동작 감지 장치로부터 전송된 동작 정보를 더 포함할 수 있다.

상기 영상 데이터 저장부에는 프레임별로 구별되는 복수의 배경 영상이 저장될 수 있다. 상기 영상 데이터 저장부에는 프레임별로 구별되는 복수의 청중 영상이 저장될 수 있다. 상기 청중 영상은 상기 청중에 상응하는 모습, 행동, 표정을 포함할 수 있다.

상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계는 상기 청중 영상 부분에서 사람을 제외한 픽셀 부분을 판단하고, 상기 픽셀 부분의 알파 채널 값을 0으로 설정하는 단계를 포함할 수 있다.

상기 배경 영상 및 상기 청중 영상은 사진 및 동영상 촬영 장치를 이용하여미리 촬영될 수 있다.

상기 목적들을 달성하기 위하여 본 발명의 다른 측면에 따르면, 대인 공포증 치료를 위해 치료자의 증세에 적합한 가상 현실 영상을 제공하는 데에 있어서, 상기 가상 현실 시뮬레이터와 연결된 입력 장치를 통해 치료자의 증세를 입력받고, 상기 치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하고, 상기 위치 정보에 상응하는 프레임을 판단하고, 영상 데이터 저장부로부터 상기 프레임 및 상기 증세에 상응하는 배경 영상 및 청중 영상을 추출하고, 상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하고, 상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하고, 상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 치료자의 증세에 적합한 가상 현실 영상 제공 방법, 상기 방법에 상응하는 장치 및 시스템을 제공할 수 있다.

상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계는 상기 프레임 및 상기 영상 설정 정보에 상응하는 사운드를 추출하고, 상기 추출된 사운드를 상기 치료자에게 제공하는 단계를 더 포함할 수 있다.

상기 위치 정보는 상기 치료자가 바라보는 시야에 상응하는 시야각 및 원근값을 포함할 수 있다.

상기 영상 설정 정보는 상기 치료자가 착용한 동작 감지 장치로부터 전송된 동작 정보를 더 포함할 수 있다.

상기 영상 데이터 저장부에는 프레임별로 구별되는 복수의 배경 영상이 저장될 수 있다. 상기 영상 데이터 저장부에는 프레임별로 구별되는 복수의 청중 영상이 저장될 수 있다. 상기 청중 영상은 상기 청중에 상응하는 모습, 행동, 표정을 포함할 수 있다.

상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계는 상기 청중 영상 부분에서 사람을 제외한 픽셀 부분을 판단하고, 상기 픽셀 부분의 알파 채널 값을 0으로 설정하는 단계를 포함할 수 있다.

상기 배경 영상 및 상기 청중 영상은 사진 및 동영상 촬영 장치를 이용하여 미리 촬영될 수 있다.

상기 목적들을 달성하기 위하여 본 발명의 또 다른 측면에 따르면, 실질적인 이미지의 가상 현실 영상을 제공하는 데에 있어서, 치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하고, 상기 위치 정보에 상응하는 프레임을 판단하고, 영상 데이터 저장부로부터 상기 프레임에 상응하는 배경 영상 및 청중 영상을 추출하고, 상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하고, 상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하고, 상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법, 상기 방법에 상응하는 장치 및 시스템을 제공할 수 있다.

이어서, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.

도 1은 본 발명의 바람직한 일 실시예에 따른 대인 공포증 치료를 위한 가상 연설 시뮬레이터의 시스템 구성도이다.

도 1을 참조하면, 가상 현실 시스템의 예로서 PC(Personal Computer) 기반의 플랫폼을 이용한 시스템은 대인 공포증 환자인 치료자(100)가 착용할 헤드 마운티드 디스플레이(HMD, Head Mounted Display), 송신기, 입력 장치, 가상 연설 시뮬레이터를 구비한 컴퓨터 등으로 구성된다.

대인 공포증을 가진 사람의 대부분이 여러 사람 앞에서 발표하는 것을 가장 두려워하기 때문에, 본 발명에서는 가상 연설 시뮬레이터를 제안한다. 가상 환경은 대인 공포증을 가진 사람이 발표할 수 있는 세미나실이나 강당을 배경 영상으로 구성한다. 강당의 앞쪽에는 연단이 있고, 연단 앞쪽으로 가상의 청중들을 두어 치료자의 발표를 듣고 있는 것처럼 구성한다. 이때 가상 연설 시뮬레이터는 가상의 청중들이 치료자의 연설에 귀를 기울이거나 필기를 하는 등의 긍정적인 반응을 보이게 할 수 있고, 비웃거나 하품을 하는 등의 부정적인 반응을 보이게 할 수도 있다. 이때 청중들의 반응은 치료자(100)의 조작에 의해 설정 가능하다.

가상 현실의 가상 청중이라면 모델 기반의 아바타를 생각할 것이다. 이 모델기반의 가상 환경은 환경을 쉽게 만들고, 조작할 수 있다는 장점이 있는 반면에, 치료자에게 실제 같지 않은, 즉 만화 같은 자극을 제공한다는 단점을 가지고 있다. 반면에 가상의 청중을 제시할 때, 실제 청중들을 영화화하여 제공하고 이를 치료자(100)의 조작에 의해 각 장면을 바꿀 수 있게 하면 그 단점을 보완할 수 있을 것이다. 이는 치료자에게 실제 강당이나 세미나실에서 발표하는 느낌을 제공해줄 것이며, 각각의 반응들이 영화화되어있기 때문에 치료자(100)의 조작에 의해 즉석해서 그 반응들을 제시할 수 있을 것이다.

이 기술은 기존의 아바타들이 제시되는 가상 환경에 앞 배경을 미리 촬영된 청중의 영화로 대체하고, 그 배경을 촬영된 영화의 배경과 일치시켜 모델을 제작한 후, 치료자에게 제공함으로써 가능하다.

이렇게 영화화하여 만들어진 영화 기반의 가상 환경은 청중 전체를 영화화하였기 때문에 전체 분위기(긍정적인 반응, 부정적인 반응)를 제시할 수는 있지만, 각 가상 청중을 하나하나 조작하기는 불가능하다. 이러한 단점을 보완하기 위해 각각의 영화 기반의 가상 청중을 조작할 수 있게 하기 위해서 각각의 청중을 따로 영화화하여 치료자(100)의 목적에 맞는 행동을 할 수 있도록 한다. 이는 실제적인 자극을 치료자에게 제공할 수 있고, 또한 각각의 가상 청중을 치료자(100)의 목적에 맞게 조작할 수 있으므로 더욱 효과적인 치료를 행할 수 있다.

이는 각각의 청중들을 찍은 영화에서 청중의 배경을 발표 장소의 배경으로 대체하는 컴퓨터 그래픽스 기술을 이용함으로써 임의의 배경 및 임의의 인물을 가상 환경에서 제시하는 것이 가능하고, 또한 각각의 청중이 영화화되어있기 때문에 제시되는 청중 각각의 조작이 가능할 것이다.

위의 기술을 이용하여 대인 공포증 치료를 위해서 임의의 청중을 임상의가 직접 촬영하여 삽입할 수 있도록 한다. 대인 공포증을 가진 환자들은 자신의 상황에 맞는 청중에 대해 공포감을 느끼므로, 필요에 따라서는 자신의 상사, 가족 또는 친구 등 여러 사람들의 얼굴이나 행동 등을 촬영한다. 그리고 이를 가상 환경에 제시하여, 기존의 가상 연설 시뮬레이터의 단점을 보완하고 가상 현실을 이용한 대인 공포증의 치료 효과를 더욱 높일 수 있을 것이다.

상기 헤드 마운티드 디스플레이는 머리에 쓰고 초대형 화면을 보는 듯한 효과를 낼 수 있는 휴대용 디스플레이 장치로서, 시야 이동 감지 수단(Head Tracker)(101), 입체 음악을 제공하기 위한 스피커(109), 영상을 디스플레이해 주는 영상 발생기(110) 등으로 구성된다. 헤드 마운티드 디스플레이에 장착된 시야 이동 감지 수단(Head Tracker)(101)은 치료자(100)의 머리가 상·하·좌·우·전·후의 위치로 움직이는가를 검출한다. 그리고 정확하게 눈의 위치를 알아내기 위해서 헤드 마운티드 디스플레이가 머리에서 벗겨지거나 틀어지지 않아야 하므로 경량화해야 하고 격렬한 움직임에도 균형을 잡을 수 있도록 관자놀이 부분에서 고정하는 방식이어야 한다. 본 발명의 시스템에서는 헤드 마운티드 디스플레이를 이용하여 최대한 치료자(100)의 시야를 가리고 오직 제공하는 장면에만 몰입할 수 있도록 하여 가상 현실에서의 몰입감을 증가시킨다.

상기 가상 연설 시뮬레이터(102)는 대인 공포증 환자인 치료자(100)에게 가상의 발표 장소(배경) 및 청중을 제시하며, 치료자(100)의 헤드 마운티드 디스플레이(104)와 연결된 컴퓨터(105)에 구비될 수 있다.

다른 예로, 네트워크를 기반으로 치료자(100)가 헤드 마운티드 디스플레이(104)를 착용하고 있고, 상기 헤드 마운티드 디스플레이(104)와 연결된 컴퓨터(105)와 네트워크를 통해 연결된 서버(미도시)가 가상 연설 시뮬레이터(102)를 구비한 경우가 있을 수 있다. 이때 치료자(100)가 착용한 헤드 마운티드 디스플레이(104)로부터 전송된 위치 정보 및 치료자(100)가 입력 장치(키보드, 마우스 등)를 이용해 입력한 영상 설정 정보 등이 컴퓨터(105)를 통해 상기 서버(미도시)로 전송된다. 그러면 상기 서버는 가상 연설 시뮬레이터(102)를 통해 상기 위치 정보 및 상기 영상 설정 정보에 상응하는 배경 영상 및 청중 영상을 포함하는 가상 현실 이미지를 컴퓨터(105)로 전송한다. 컴퓨터(105)로 전송된 가상 현실 이미지는 헤드 마운티드 디스플레이(104)를 통해 재생되며, 치료자(100)는 원하는 가상 현실 화면을 보게 된다.

이와 같은 시스템에서 치료자(100)의 머리 움직임에 상응하는 위치 정보는 송신기(108), 시야 이동 감지 수단(101) 및 위치 및 방향 추적기(603, 하기의 도 6을 참조)에 의해 추적되어 가상 연설 시뮬레이터(102)로 전송된다. 그러면, 가상 연설 시뮬레이터(102)는 상기 위치 정보에 상응하는 배경 영상 및 청중 영상을 추출하여 가상 현실 이미지를 합성하여 치료자(100)에게 제공한다. 또한, 4 채널 사운드 카드 등에 의한 전후좌우의 소리를 각각 조절함으로써 치료자(100)에게 입체 사운드를 제공하여 현실감을 배가시킨다. 그리고 각 화면에 상응하는 사운드를 제공함으로써 치료의 효과를 높일 수 있다.

가상 연설 시뮬레이터(102)를 통한 가상 현실 이미지 제공 과정은 하기의 도 7에서 상세히 설명하기로 한다.

도 2는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터에 등장하는 청중의 모습과 행동의 예시도이다.

도 2를 참조하면, 가상 연설 시뮬레이터(102)의 영상 데이터 저장부(613, 하기의 도 6을 참조)에는 미리 캠코더 등을 이용하여 촬영한 프레임별 배경 영상 및 청중 영상이 저장되어 있다.

치료자(100)는 가상 연설 시뮬레이터(102)가 구비된 치료자 장치(105)와 연결된 입력 장치(107)를 조작하여 가상 현실 이미지에 등장할 배경 및 청중을 설정할 수 있다. 치료자(100)의 키입력(Key Input)(201)을 통해 설정할 수 있는 복수 개의 청중 영상(203)이 영상 데이터 저장부(613)에 미리 저장되며, 상기 청중 영상 각각에 대한 복수 개의 행동 영상(205)이 미리 촬영되어 영상 데이터 저장부(613)에 저장될 수 있다. 즉, 치료자(100)가 설정한 청중, 행동이 추출되어 현실감있고 치료자(100)의 증세에 맞는 가상 현실 이미지가 제공된다.

예를 들어, 치료자(100)가 가상 연설 시뮬레이터(102)를 이용한 대인 공포증 치료 가상 현실에 참여하고 있다고 하자. 상기 가상 연설 시뮬레이터(102)의 영상 데이터 저장부(613)에는 치료자(100)가 공포를 느끼는 대상인 선생님들의 영상이 청중 영상으로 미리 저장되어 있다. 처음 치료자(100)가 상기 가상 현실에 참여하였을 때에는 치료자(100)가 모르는 임의의 사람들을 청중으로 등장시키고, 치료자(100)는 상기 청중들과 대화를 주고 받게 된다.

대화를 통해 어느 정도 대화 환경에 적응을 하게되면, 치료자(100)는 치료자 장치(105)와 연결된 입력 장치(107)를 이용하여 자신이 공포를 느끼는 선생님을 한명씩 가상 현실의 청중으로 선택한다. 그리고 상기 선생님들의 행동이나 표정 등을 선택한다. 선택한 청중이 가상 현실에 등장하게 되면, 상기 치료자(100)는 더 강한 공포를 느끼게 되지만, 그들과 대화를 하거나 청중을 대상으로 발표를 함으로써 공포심을 줄이고 적응할 수 있는 능력을 갖게된다. 치료자(100)가 이러한 청중, 행동 및 표정의 선택을 통한 가상 현실을 접함으로써, 보다 단계적이고 안전하게 대인 공포증 치료를 받을 수 있다.

도 3a 및 도 3b는 본 발명의 바람직한 일 실시예에 따른 치료자의 시선 및 움직임에 따라 현실감있게 변경되어 제공되는 영화 기반 가상 연설 시뮬레이터의 예시도이다.

도 3a 및 도 3b를 참조하면, 치료자(100)는 세미나실이나 강연장 등의 장소에 청중들이 있는 가상 연설 상황에서 연설을 하게 된다. 상기 가상 연설 상황에 등장하는 배경 영상 및 청중 영상은 실질적인 사진 이미지(301)이며, 치료자(100)의 시선의 이동에 따라 상기 배경 영상 및 청중 영상이 변경되어 실제와 비슷한 상황의 가상 현실 이미지(303)가 치료자(100)에게 제공된다.

이하, 가상 연설 시뮬레이터(102)의 발표 장소인 배경 영상과 발표 대상인 청중 영상을 예를 들어 설명하기로 한다.

대인 공포증 치료를 위한 발표 상황은 일상적으로 자주 접하게 되는 6∼8 명 앞에서 발표하는 상황으로 설정한다. 따라서 장소는 6명의 가상 인물이 있는 세미나실을 배경으로 제작되었다. 가상의 세미나실에는 6명이 앉을 수 있는 의자와 책상이 있고, 세미나실의 뒤에는 캐비넷이나 책장과 같은 익숙한 가구가 있으며 치료자의 뒤에 칠판을 두고, 앞에는 연단을 두었다. 치료자(100)는 연단 앞에서 가상의 청중들을 대상으로 발표하게 된다.

이러한 실제 발표 장소를 캠코더를 이용하여 촬영한 후, 그 영상을 프레임별배경 영상으로 컴퓨터에 저장하여 가상 환경에 적용하여, 치료자(100)로 하여금 더욱 실제감을 느낄 수 있도록 구성하였다.

대인 공포증을 가진 사람들은 자신이 발표하고 있을 때 청중들의 반응에 따라서 여러 가지 불안정도를 갖는다. 따라서 치료자의 불안을 적당히 유발시키기 위해 각각의 청중은 실제 사람과 비슷한 동작과 목소리 표정 등을 가지고 있어야 하며, 치료자의 상황에 적절히 반응하여야 한다.

따라서 가상의 인물이 실제 살아있는 것처럼 보이게 하기 위해 연속적인 간단한 동작이나 표정들을 무작위로 되풀이하며, 또한 치료자(100)가 원하는 시점에 명령을 주어 청중에게 다양한 동작을 하도록 할 수 있게 구성한다.

이러한 청중은 실제 사람의 연기를 개인별로 촬영한 후, 촬영한 영상을 청중 영상으로 컴퓨터에 저장하여 삼차원 가상 공간에 위치시키게 된다. 이때, 실제 사람을 제외한 배경 부분을 발표 장소로 바꾸는 기법(상기 기법은 하기의 도 7에서 기술하기로 함.)을 이용하여 실제 그 청중이 발표 장소에 있는 것처럼 구성한다. 그리고 청중의 행동에 상응하는 행동 영상이 따로 저장되어 있어 치료자(100)에게 보일 청중의 행동 영상들은 실시간 편집 기술을 이용하여 치료자(100)가 원하는 방식대로 제어된다.

이 방법은 영화 기반의 가상 현실에서 각각의 청중을 조작하는 것이 불가능하였던 것을 보완할 수 있다. 따라서 조작이 편리한 모델 기반의 장점과 영화 기반의 실제적인 영상 제시가 가능한 장점을 하나로 묶을 수 있게 한다. 이에 더하여 가상 환경이 임의의(미리 프로그램화되어있는) 청중을 제시하는 것이 아니라, 자신이 공포를 느끼는 대상(직장 상사, 가족, 친구 등)이 제시되어 치료 효과를 극대화할 수 있다는 장점이 있다.

도 4는 본 발명의 바람직한 일 실시예에 따른 개인별 조작이 가능한 영화 기반 가상 연설 시뮬레이터의 구성을 나타낸 도면이다.

도 4를 참조하면, 가상 연설 시뮬레이터(102)의 화면(401)은 배경 영상(403), 청중 영상(405), 강단 등의 가구 영상(407) 등으로 구성된다. 청중 영상(405)에서 실제 사람을 제외한 배경 부분(409)은 청중 영상을 투명하게 처리한다.

상기 배경 영상(403), 청중 영상(405), 가구 영상(407) 등은 치료자(100)의 키입력에 의해 다양하게 설정될 수 있다. 또한, 치료자(100)가 특정한 증세 및 공포 대상 등을 입력 장치(107)를 이용하여 입력하면, 상기 증세 및 공포 대상에 상응하는 배경 영상(403), 청중 영상(405), 가구 영상(407)이 자동적으로 추출되어 가상 현실 이미지로 생성되어 치료자(100)에게 제공된다.

도 5는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터의 프레임 구성을 나타낸 도면이다.

도 5를 참조하면, 가상 연설 시뮬레이터(102)는 치료자(100)의 시야각 및 원근값에 따른 다수의 프레임 정보(501, 503, 505)를 미리 설정하고 있다. 그리고 상기 프레임 각각(501, 503, 505)에 상응하는 배경 영상 및 청중 영상을 영상 데이터 저장부(613, 하기의 도 6을 참조)에 미리 저장하고 있다. 가상 연설 시뮬레이터(102)는 치료자(100)가 착용한 헤드 마운티드 디스플레이(104)의 시야이동 감지 수단(101)으로부터 전송된 시야각 및 원근값에 상응하는 프레임을 판단한다. 그리고 프레임에 상응하는 배경 영상 및 청중 영상을 영상 데이터 저장부(613)로부터 추출하여 배경 영상과 청중 영상을 합성하여 보다 사실감있는 가상 현실 이미지를 생성한다.

도 6은 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터의 소프트웨어의 구성을 나타낸 도면이다.

도 6을 참조하면, 가상 연설 시뮬레이터(102)는 신호 변환기(601), 위치 및 방향 추적기(603), 3D 그래픽 보드(605), 3D 음향 처리부(607), 시야각 계산부(609), 가상 현실 이미지 생성기(611), 영상 데이터 저장부(613) 등으로 구성된다.

영상 데이터 저장부(613)에는 캠코더 등을 이용하여 미리 촬영된 프레임별 배경 영상 및 청중 영상이 저장된다. 이러한 영상 데이터 저장부(613)로는 하드 디스크 드라이브(HDD) 혹은 다른 보조 기억 장치 등이 적용될 수 있다.

가상 현실 이미지 생성기(611)는 현재의 프레임 및 치료자(100)로부터 요청된 영상 설정 정보(배경, 청중, 행동, 표정 등)에 상응하는 배경 영상 및 청중 영상을 영상 데이터 저장부(613)로부터 추출한다. 그리고 3D 그래픽 보드(605)는 상기 프레임에 상응하여 추출된 배경 영상과 청중 영상의 중첩 부분을 투명하게 처리하여 사실적인 가상 현실 이미지를 생성한다.

위치 및 방향 추적기(603)는 치료자(100)가 착용한 헤드 마운티드 디스플레이로부터 전송된 시야각 및 원근값을 감지하여 송신기(108)로 전송한다.

시야각 계산부(609)는 위치 및 방향 추적기(603)로부터 입력되는 치료자(100)의 움직임 신호에 따라 치료자 헤드의 각도 변화량을 계산한 후, 이에 따라 디스플레이상의 픽셀 변화량을 계산한다.

신호 변환기(601)는 3D 그래픽 보드(605)에서 생성된 RGB 출력을 TV 영상 신호로 변환한다. 그리고 3D 음향 처리부(607)는 치료자(100)에게 제공될 가상 현실 이미지에 상응하는 음향을 추출하여 치료자(100)의 헤드 마운티드 디스플레이(104)로 전송한다.

입력 장치(107)는 치료자(100)에게 가상 연설 시뮬레이터(102)의 배경 및 청중을 조작하기 위한 키입력을 제공하는 장치로서, 키보드, 마우스, 조이스틱 등이 될 수 이용될 수 있다.

도 7은 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터가 실행되는 과정을 나타낸 순서도이다.

도 7을 참조하면, 치료자(100)가 입력한 배경, 청중의 모습 및 행동 등의 영상 설정 정보를 수신(S701)하고, 상기 치료자(100)가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 현재의 시야각 및 원근값을 수신(S703)한다. 그러면 상기 시야각 및 원근값에 상응하는 프레임을 판단(S705)하고, 영상 데이터 저장부(613)로부터 상기 프레임 및 상기 영상 설정 정보에 상응하는 배경 영상 및 청중 영상을 추출(S707)한다. 상기 치료자(100)는 가상 연설 시뮬레이터(102)가 구비된 치료자 장치(105)와 연결된 입력 장치(107)를 조작하여 상기 영상 설정 정보를 설정할 수 있다. 즉, 치료자(100)는 치료 단계에 맞는 청중, 청중의 표정, 행동등을 설정함으로써, 보다 단계적이고 안정적으로 치료를 받을 수 있다.

이렇게 배경 영상 및 청중 영상이 추출되면, 청중 영상 중 실제 사람을 제외한 배경 부분을 투명하게 처리(S709)한다. 그리고 상기 배경 영상 및 청중 영상을 합성(S711)하고, 합성된 가상 현실 이미지를 치료자(100)의 헤드 마운티드 디스플레이로 전송(S713)한다.

도 8a 및 도 8d는 본 발명의 바람직한 일 실시예에 따른 가상 연설 시뮬레이터의 프로그램 소스의 예시도이다.

도 8a 및 도 8d를 참조하면, 입력 장치(107)를 이용하여 입력되어진 키 입력값으로 움직일 가상의 청중들을 선택하고, 청중이 행해야 할 모션(웃음, 집중, 박수 등)을 선택(801)한다.

치료자(100)의 시야각 및 원근값에 상응하며, 선택되어진 가상 청중의 영상 시퀀스에서 현재 디스플레이되어야 할 프레임을 찾아낸다(803).

그리고 찾아진 프레임에 상응하는 배경 영상 및 청중 영상을 추출하여, 배경 영상과 청중 영상이 중첩되는 부분을 추출하여 그 부분을 투명하게 처리하기 위해서 알파 채널(Alpha Channel)을 셋팅(805)한다. 여기서, 알파 채널이란 이미지를 구성하는 픽셀의 투명도에 관한 값이다. 보통의 이미지는 4가지 채널(R, G, B, A)을 갖고 있다. 처음의 3개 채널(R, G, B)은 이미지의 색깔을 나타내고, 마지막 알파 채널은 그 이미지의 투명도를 나타내게 된다. 보통 알파 채널이 이 255(8비트를 사용했을 경우)일 경우 그 해당 픽셀은 불투명함을 나타내고, 0일 경우 투명함을 나타낸다.

이렇게 배경 영상의 투명 처리가 완료되면, 상기 배경 영상 및 청중 영상을 합성하여 사실적인 가상 현실 이미지를 생성(807)한다. 이때, 치료자(100)의 머리에 부착된 포지션 센서는 머리의 움직임을 감지하여 그 시야각이나 원근값을 가상 연설 시뮬레이터가 구비된 컴퓨터로 전달하여, 프로그램에 적용하여 보는 방향의 이미지가 보이도록 한다.

본 발명은 상기 실시예에 한정되지 않으며, 많은 변형이 본 발명의 사상 내에서 당 분야에서 통상의 지식을 가진 자에 의하여 가능함은 물론이다.

상술한 바와 같이 본 발명에 따르면, 가상의 아바타들이 청중으로 제시되는 것이 아니라 실제 사람의 동영상을 그대로 가상의 청중으로 제시하고, 그 청중들의 개개인을 치료자의 목적에 맞게 조작하고, 그 청중을 자신이 공포를 느끼는 대상(상사, 가족, 친구 등)으로 제시하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

또한, 본 발명에 따르면 가상 환경 시뮬레이터의 배경 화면 및 청중 등을 실제 사진 이미지와 같은 영화 기반으로 제공하여 현실감있는 치료를 제공하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

또한, 본 발명에 따르면 가상 환경 시뮬레이터에 등장하는 각각에 상응하는 다양한 모습, 행동 등을 제공하여 보다 현실감있는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

또한, 본 발명에 따르면 가상 환경 시뮬레이터에 등장하는 각각의 모습, 행동 등을 치료자의 증세에 맞게 단계적으로 제공함으로써 치료자가 안전하게 치료를 받을 수 있도록 하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

또한, 본 발명에 따르면 치료자의 치료 목적에 맞게 가상 환경의 배경, 청중 그리고 상기 청중 각각의 모습 및 행동을 조작하여 제작되는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

또한, 본 발명에 따르면 기존의 모델 기반의 가상 연설 시뮬레이터보다 실제적인 자극을 제시하기 때문에 치료 효과를 극대화하는 대인 공포증 치료를 위한 가상 연설 시뮬레이터를 제공할 수 있다.

Claims (22)

1. 가상 현실 시뮬레이터에서 실질적인 이미지의 가상 현실 영상을 제공하는 방법에 있어서,

   적어도 배경, 청중의 모습 및 행동을 포함하는 영상 설정 정보를 수신하는 단계-여기서, 상기 영상 설정 정보는 상기 가상 현실 시뮬레이터와 연결된 입력 장치에 의해 입력됨-;

   치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하는 단계;

   상기 위치 정보에 상응하는 프레임을 판단하는 단계;

   영상 데이터 저장부로부터 상기 프레임 및 상기 영상 설정 정보에 상응하는 배경 영상 및 청중 영상을 추출하는 단계;

   상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계;

   상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하는 단계; 및

   상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계

   를 포함하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
2. 제1항에 있어서,

   상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계는

   상기 프레임 및 상기 영상 설정 정보에 상응하는 사운드를 추출하는 단계;

   상기 추출된 사운드를 상기 치료자에게 제공하는 단계

   를 더 포함하는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
3. 제1항에 있어서,

   상기 위치 정보는

   상기 치료자가 바라보는 시야에 상응하는 시야각 및 원근값을 포함하는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
4. 제1항에 있어서,

   상기 영상 설정 정보는

   상기 치료자가 착용한 동작 감지 장치로부터 전송된 동작 정보를 더 포함하는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
5. 제1항에 있어서,

   상기 영상 데이터 저장부에는

   프레임별로 구별되는 복수의 배경 영상이 저장되는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
6. 제1항에 있어서,

   상기 영상 데이터 저장부에는

   프레임별로 구별되는 복수의 청중 영상이 저장되는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
7. 제6항에 있어서,

   상기 청중 영상은

   상기 청중에 상응하는 모습, 행동, 표정을 포함하는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
8. 제1항에 있어서,

   상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계는

   상기 청중 영상 부분에서 사람을 제외한 픽셀 부분을 판단하는 단계; 및

   상기 픽셀 부분의 알파 채널 값을 0으로 설정하는 단계

   를 포함하는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
9. 제1항에 있어서,

   상기 배경 영상 및 상기 청중 영상은

   사진 및 동영상 촬영 장치를 이용하여 미리 촬영되는 것

   을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
10. 대인 공포증 치료를 위한 가상 현실 시뮬레이터에서 치료자의 증세에 적합한 가상 현실 영상을 제공하는 방법에 있어서,

    상기 가상 현실 시뮬레이터와 연결된 입력 장치를 통해 치료자의 증세를 입력받는 단계;

    상기 치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하는 단계;

    상기 위치 정보에 상응하는 프레임을 판단하는 단계;

    영상 데이터 저장부로부터 상기 프레임 및 상기 증세에 상응하는 배경 영상 및 청중 영상을 추출하는 단계;

    상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계;

    상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하는 단계; 및

    상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계

    를 포함하는 치료자의 증세에 적합한 가상 현실 영상 제공 방법.
11. 제10항에 있어서,

    상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계는

    상기 프레임 및 상기 영상 설정 정보에 상응하는 사운드를 추출하는 단계;

    상기 추출된 사운드를 상기 치료자에게 제공하는 단계

    를 더 포함하는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
12. 제10항에 있어서,

    상기 위치 정보는

    상기 치료자가 바라보는 시야에 상응하는 시야각 및 원근값을 포함하는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
13. 제10항에 있어서,

    상기 영상 설정 정보는

    상기 치료자가 착용한 동작 감지 장치로부터 전송된 동작 정보를 더 포함하는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
14. 제10항에 있어서,

    상기 영상 데이터 저장부에는

    프레임별로 구별되는 복수의 배경 영상이 저장되는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
15. 제10항에 있어서,

    상기 영상 데이터 저장부에는

    프레임별로 구별되는 복수의 청중 영상이 저장되는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
16. 제15항에 있어서,

    상기 청중 영상은

    상기 청중에 상응하는 모습, 행동, 표정을 포함하는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
17. 제10항에 있어서,

    상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계는

    상기 청중 영상 부분에서 사람을 제외한 픽셀 부분을 판단하는 단계; 및

    상기 픽셀 부분의 알파 채널 값을 0으로 설정하는 단계

    를 포함하는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
18. 제10항에 있어서,

    상기 배경 영상 및 상기 청중 영상은

    사진 및 동영상 촬영 장치를 이용하여 미리 촬영되는 것

    을 특징으로 하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
19. 가상 현실 시뮬레이터에서 실질적인 이미지의 가상 현실 영상을 제공하는 방법에 있어서,

    치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하는 단계;

    상기 위치 정보에 상응하는 프레임을 판단하는 단계;

    영상 데이터 저장부로부터 상기 프레임에 상응하는 배경 영상 및 청중 영상을 추출하는 단계;

    상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 단계;

    상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하는 단계; 및

    상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 단계

    를 포함하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법.
20. 실질적인 이미지의 가상 현실 영상을 제공하는 장치에 있어서,

    치료자가 착용한 헤드 마운티드 디스플레이의 포지션 센서로부터 위치 정보를 수신하는 수단;

    상기 위치 정보에 상응하는 프레임을 판단하는 수단;

    영상 데이터 저장부로부터 상기 프레임에 상응하는 배경 영상 및 청중 영상을 추출하는 수단;

    상기 청중 영상 부분에 상응하는 배경 영상을 투명하게 처리하는 수단;

    상기 배경 영상 및 청중 영상을 합성하여 가상 현실 이미지를 생성하는 수단; 및

    상기 가상 현실 이미지를 상기 치료자가 착용한 헤드 마운티드 디스플레이로 전송하는 수단

    을 구비하는 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 장치.
21. 제1항 내지 제19항 중 어느 한 항에 기재된 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며 디지털 처리 장치에 의해 판독될 수 있는 기록 매체.
22. 프로그램이 저장되어 있는 메모리; 및

    상기 메모리에 결합되어 상기 프로그램을 실행하는 프로세서를 포함하되,

    상기 프로세서는 상기 프로그램에 의해, 제1항 내지 제19항 중 어느 한 항에 기재된 실질적인 이미지 제공 기반의 가상 현실 시뮬레이팅 방법을 실행하는 시스템.