KR20160142648A - 가상현실을 통한 프리젠테이션 훈련 시스템 - Google Patents

Abstract

본 발명은 프리젠테이션, 연설 등과 같은 말하기 상황을 연습하고자 하는 학습자에게 말하기 연습을 위해서 실제 가상공간을 시각화 하고, 제스쳐나 음성등을 평가하여 발표능력을 향상시킬 수 있는 가상현실을 통한 프리젠테이션 훈련 시스템에 관한 것이다.
본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템은 프리젠테이션 또는 발표 연습을 위한 것으로, 사용자가 착용하며, 훈련을 위한 가상현실 화면을 제공하는 디스플레이부와, 가상현실 화면에 대응하는 청각신호를 출력하는 스피커와, 사용자의 음성신호를 입력하는 마이크를 포함하는 헤드셋과, 상기 사용자의 팔에 장착되어 사용자의 몸짓을 감지하는 모션센서와, 상기 헤드셋과 모션센서를 통해 입력된 사용자의 음성과 제스처 신호를 입력받아 음량과 속도, 몸짓을 분석하고 분석정보를 사용자에게 제공하는 데이터처리부 및 발표장의 규모, 청중의 수, 성별, 청중반응, 발표 형식을 포함하는 상황변수들에 대한 가상현실 데이터를 저장하고 있는 데이터베이스를 구비한다.

Description

가상현실을 통한 프리젠테이션 훈련 시스템{Presentation training system through the virtual reality}

본 발명은 가상현실을 통한 프리젠테이션 훈련 시스템에 관한 것으로, 더욱 상세하게는 프리젠테이션, 연설 등과 같은 말하기 상황을 연습하고자 하는 학습자에게 말하기 연습을 위해서 실제 가상공간을 시각화 하고, 제스쳐나 음성등을 평가하여 발표능력을 향상시킬 수 있는 가상현실을 통한 프리젠테이션 훈련 시스템에 관한 것이다.

최근, 회의나 세미나 등에서 발표자가 워드프로세서나 프레젠테이션 프로그램 등이 탑재된 프레젠테이션 장치를 이용하여 다양한 전자 문서에 포함된 내용에 대해 발표를 수행하는 일이 많아지고 있다.

보통, 회의나 세미나 등에서 발표 능력은 사업의 성패와도 관련이 되며, 이러한 프리젠테이션의 활용 영역이 넓어짐에 따라 최근에는 신입사원을 채요하는 채용시험에서 발표능력을 평가하는 기업도 증가하고 있다.

그러나 종래에는 이러한 프리젠테이션이나 발표 또는 청중을 앞에 두고 연설하는 것에 대한 체계적인 교육이 이루어질 수 있는 기회가 많지 않았다.

관련된 종래 기술 중에 한국등록특허 제10-1204651호에는 '프레젠티이션 장치 및 프레젠테이션 장치의 발표시간 정보제공방법'이 있는데, 상기 선행기술의 경우에는 단순히 프리젠테이션을 위한 발표자료를 출력하면서 발표자가 발표의 진행시간을 확인할 수 있도록 하는 것이며, 이를 통해 사전에 발표 연습을 실시하는데는 한계가 있다.

한국등록특허 제10-1204651호 : 프레젠티이션 장치 및 프레젠테이션 장치의 발표시간 정보제공방법 한국공개특허 제10-2012-0031373호 : 학습 서비스 시스템 및 방법

본 발명은 상기 문제점을 해결하기 위해 창출된 것으로, 프리젠테이션이나 발표 또는 연설을 수행하기에 앞서 유사 상황을 설정하여 발표연습을 함으로써 프리젠테이션 능력을 향상시킬 수 있는 가상현실을 통해 프리젠테이션 훈련 시스템을 제공하는데 그 목적이 있다.

본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템은 프리젠테이션 또는 발표 연습을 위한 것으로, 사용자가 착용하며, 훈련을 위한 가상현실 화면을 제공하는 디스플레이부와, 가상현실 화면에 대응하는 청각신호를 출력하는 스피커와, 사용자의 음성신호를 입력하는 마이크를 포함하는 헤드셋과, 상기 사용자의 팔에 장착되어 사용자의 몸짓을 감지하는 모션센서와, 상기 헤드셋과 모션센서를 통해 입력된 사용자의 음성과 제스처 신호를 입력받아 음량과 속도, 몸짓을 분석하고 분석정보를 사용자에게 제공하는 데이터처리부 및 발표장의 규모, 청중의 수, 성별, 청중반응, 발표 형식을 포함하는 상황변수들에 대한 가상현실 데이터를 저장하고 있는 데이터베이스를 구비한다.

상기 디스플레이부는 사용자의 얼굴에 착용하는 헤드 마운티드 디스플레이(HMD : Head Mounted Display)인 것이 바람직하고, 사용자는 상기 데이터베이스에 저장된 상황변수들을 각 요소별로 선택할 수 있고, 상기 데이터베이스는 선택된 상황요소들에 대응하는 가상현실을 조합하여 상기 디스플레이부에 출력하도록 형성될 수 있다.

아울러 본 시스템은 상기 디스플레이부를 착용한 사용자의 머리 움직임을 추척하는 헤드 트랙커(Head Tracker)를 더 구비하고, 상기 디스플레이부의 화면은 상기 헤드 트랙커에 의해 추적된 사용자의 머리 움직임에 대응하여 출력되는 화면의 뷰포인트를 조절할 수 있도록 형성되는 것이 바람직하다.

본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템은 발표상황에 맞는 가상현실을 선택하여 해당 상황을 직접 시각적으로 보면서 발표를 수행하며, 청중의 다양한 반응을 예상하고, 몸짓이나 음량에 대한 피드백을 통해서 학습자의 발표능력을 향상시킬 수 있는 이점이 있다.

도 1은 본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템의 구성을 나타낸 구성도,
도 2는 도 1의 디스플레이부와 모션센서 및 헤드트랙커의 일 실시예를 도시한 도면,
도 3은 도 1의 디스플레이부를 통한 가상현실 화면의 일 실시예를 도시한 도면,
도 4는 본 발명의 가상현실을 통한 프리젠테이션 훈련 시스템을 통한 훈련 흐름도이다.

이하, 첨부한 도면을 참조하여 본 발명의 실시예에 따른 가상현실을 통한 프리젠테이션 훈련 시스템에 대해 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 첨부된 도면에 있어서, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하여 도시한 것이다.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.

도 1 내지 도 4에는 본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템(100)의 바람직한 일 실시예가 도시되어 있다.

도면을 참조하면, 가상현실을 통한 프리젠테이션 훈련 시스템(100)은 사용자가 착용하는 디스플레이부(110)와 헤드셋(120), 모션센서(130)를 포함한다. 아울러 디스플레이부(110)의 움직임을 추적하는 헤드트랙커(140)와, 다수의 상황변수들이 저장되어 있는 데이터베이스(150), 선택된 상황변수를 조합하여 상기 디스플레이부(110)를 통해 선택된 가상현실의 화면을 출력하고, 연습이 이루어지는 동안 음성신호와 모션센서(130)의 감지신호 헤드트랙커(140)를 통한 사용자의 시선 방향에 대한 데이터를 수집하고, 수집된 정보를 토대로 평가를 하는 데이터처리부(160)를 포함한다.

상기 디스플레이부(110)는 사용자가 얼굴에 착용하는 헤드 마운티드 디스플레이(Head Mounted Display : HMD)가 적용된다. 사용자는 디스플레이부(110)를 통해 실제 가상현실과 동일한 시각적 상황 속에서 발표를 진행할 수 있다. 디스플레이부(110)는 데이터처리부(160)와 유선 또는 무선으로 연결되어 있으며, 데이터처리부(160)에서 전송되는 화면을 출력한다.

아울러 상기 디스플레이부(110)의 일측에는 헤드트랙커(140)와 연결되는 동작센서(141)가 마련되어 있어서 상기 헤드트랙커(140)가 디스플레이부(110)의 동작을 감지한다. 디스플레이부(110)는 사용자가 착용한 상태이므로 사용자의 머리와 일체로 움직이게 되므로 디스플레이부(110)의 동작을 감지하는 것을 통해 사용자의 머리방향을 추적할 수 있다. 헤드트랙커(140)가 상기 데이터처리부(160)와 연결되어 사용자의 시선방향에 대한 정보를 데이터처리부(160)에 지속적으로 전달하므로 데이터처리부(160)는 이러한 감지신호를 발표에 대한 평가요소로 활용할 뿐 아니라 시선 방향과 일치하게 디스플레이부(110)에서 보이는 화면의 뷰포인트도 시선방향과 일치하게 움직인다.

즉, 도 3에 도시되어 있는 것처럼 데이터처리부(160)는 설정된 상황의 전체 화면 중 일 부분만을 디스플레이부(110)를 통해서 출력한다. 도 3에서 실선으로 표시된 부분이 현재 사용자에게 보여지는 화면이며, 나머지 점선으로 표시된 부분은 보이지 않는다. 그러나 사용자가 고개를 좌우 또는 상하로 움직이게 되면 헤드트랙커(140)에서 이러한 움직임을 감지하고, 감지정보를 데이터처리부(160)로 전달하며, 데이터처리부(160)에서는 시선이 이동하는 방향에 맞춰 뷰포인트를 변경하여 실제 고개가 돌아가는 방향으로 화면이 이동하는 것과 같은 효과를 낸다.

상기 헤드셋(120)은 스피커(121)와 마이크(122)를 포함한다.

헤드셋(120)도 디스플레이부(110)와 마찬가지로 사용자가 착용하며, 스피커(121)에서는 상기 데이터처리부(160)에서 전송되는 청각신호를 출력한다. 데이터처리부(160)는 설정된 상황에서의 청중의 반응이나, 연습에 필요한 특정 정보들 예를 들어 사용자의 말의 음량이 너무 작거나 속도가 지나치게 빠른 경우 이에 대한 시정을 위한 정보를 음성으로 전달할 수 있고, 예상되는 청중의 질문을 디스플레이부(110)에서 보이는 영상과 연계하여 음성으로 출력할 수 있다.

상기 마이크(122)는 사용자가 발표 연습을 진행하는 동안 발표 내용을 데이터처리부(160)로 전송하기 위한 것이며, 데이터처리부(160)는 발표 평가를 위해 마이크(122)를 통해 입력된 음성신호를 음량, 속도 등 평가요소에 따라 평가할 수 있도록 데이터화 하여 저장한다.

상기 모션센서(130)는 발표를 진행하는 동안 사용자의 제스처를 감지하기 위한 것이다. 팔에 착용할 수 있도록 암밴드(Arm-band;131)에 부착되어 있으며, 모션센서(130)에서 팔의 움직임을 감지하여 발표중 팔이 어떤 상태로 움직이는지를 감지한다. 모션센서(130)는 양쪽 팔에 모두 착용할 수 있도록 두 개가 한 세트로 이루어질 수도 있으며, 이와는 달리 한쪽 팔에만 착용할 수도 있다.

헤드트랙커(140)는 상술한 바와 같이 상기 디스플레이부(110)에 설치된 동작센서(141)의 동작상태를 감지하여 디스플레이부(110)를 착용하고 있는 사용자의 머리 움직임을 감지한다.

상기 헤드트랙커(140)는 사용자의 머리움직임을 감지할 수 있는 다양한 추적센서가 적용될 수 있다. 예를 들어 본 실시예의 경우 동작센서(141)에서 보낸 광신호가 헤드트랙커(140)에 입사되는 입사각을 통해서 동작센서(141)의 위치를 파악하고 이를 기반으로 사용자가 고개를 좌우 또는 상하로 움직였는지를 판별하는 방식이 적용될 수 있다.

상기 데이터베이스(150)는 발표 연습을 수행하기 위한 다양한 상황변수들에 대한 데이터가 저장되어 있다.

프리젠테이션에 대한 상황변수는 장소의 크기, 청중의 수, 청중의 연령이나 성별, 청중 반응 등이 있다.

장소의 경우 소회의실이나 중회의실 또는 대회의실과 같은 회의공간이나 다수의 청중들이 있는 강당 또는 공개홀 등을 설정할 수 있다.

청중도 숫자나 연령, 성별에 따라 다양하게 선택될 수 있는데, 발표장소의 수에 맞도록 기본 설정이 될 수도 있지만, 특정 성별이나 연령으로 지정된 숫자의 청중이 있는 것으로 선택할 수도 있다.

따라서 특정 발표를 염두에 두고 그에 대한 발표 연습을 진행하고자 하는 경우에는 해당 발표가 수행될 장소와 청중의 숫자, 성별, 연령 등의 상황변수를 해당 발표상황과 최대한 유사하도록 임의로 설정한 상태에서 발표 연습을 진행함으로써 발표 연습에 대한 효과를 극대화할 수 있다.

상기 데이터처리부(160)는 데이터베이스(150)에 저장된 설정내용을 조합하여 디스플레이부(110)에 해당 가상현실에 대한 이미지를 출력하고, 발표 연습이 이루어지는 동안 입력되는 사용자의 음성신호, 모션센서(130)에 의한 감지시호 및 헤드트랙커(140)에서 입력되는 디스플레이부(110)의 동작신호를 수신하고 이를 처리한다. 특히 상술한 것처럼 헤드트랙커(140)를 통해 입력되는 디스플레이부(110)의 동작신호를 감지하여 디스플레이부(110)에서 출력되는 영상의 뷰포인트를 변화시켜 실제 고개를 돌리는 것과 뷰포인트의 변경을 연동함으로써 가상현실의 현실감을 더욱 높인다.

아울러 음성신호의 음량이나 속도, 몸짓의 사용 정도를 수치화하고, 이를 토대로 평가를 하여 평가 결과를 문서 또는 디스플레이부(110)에 이미지로 출력함으로써 사용자가 발표에서 개선해야할 부면을 파악할 수 있도록 한다.

이상에서 설명한 본 발명에 따른 가상현실을 통한 프리젠테이션 훈련 시스템(100)을 이용하여 발표 훈련을 진행하는 과정을 도 4를 통해 설명한다.

사용자는 시스템에 전원을 인가하고 디스플레이부(110)와 헤드셋(120) 및 모션센서(130)를 신체에 착용하여 발표 준비를 한다.

이후 첫 번째로 발표의 상황변수를 선택할 것인지의 여부를 결정하게 되는데, 상황변수를 임의로 설정하기 위해 상황변수 설정 모드를 선택하면 데이터베이스(150)에 저장되어 있는 장소, 청중의 수, 연령, 성별 등의 상황변수를 선택할 수 있다. 데이터처리부(160)는 선택된 상황변수들을 조합하여 가상현실 이미지를 생성하고, 생성된 이미지를 렌더링하여 디스플레이부(110)를 통해 출력한다.

물론 상황변수를 별도로 선택하지 않는 경우에는 기본 설정으로 선택되어 기본으로 세팅되어 있는 가상현실 영상을 디스플레이부(110)에서 출력한다.

사용자는 디스플레이부(110)에서 출력되는 영상을 보면서 실제 발표장에 있는 것과 같은 느낌으로 발표를 수행하며, 발표 수행 중에 음성신호와 모션센서(130)의 신호가 데이터처리부(160)에 입력된다.

데이터처리부(160)는 입력된 음성신호와 모션센서(130)의 동작신호를 수치화하고, 이를 토대로 발표 수행에 대한 평가를 처리한 후 출력한다. 사용자는 디스플레이부(110)의 화면 또는 별도의 프린터에서 출력되는 인쇄물을 통해 평가 내용을 확인할 수 있으며, 훈련 재수행을 선택하여 상황변수선택 단계부터 상기 과정을 다시 수행하거나, 훈련을 종료한다.

본 발명의 가상현실을 통한 프리젠테이션 훈련 시스템(100)은 선택된 상황변수를 포함하는 가상현실 이미지를 보면서 발표 훈련을 진행할 수 있기 때문에 실제 발표 상황에서도 능숙하게 발표를 진행할 수 있다.

제시된 실시예들에 대한 설명은 임의의 본 발명의 기술분야에서 통상의 지식을 가진 자가 본 발명을 이용하거나 또는 실시할 수 있도록 제공된다. 이러한 실시예들에 대한다양한 변형들은 본 발명의 기술 분야에서 통상의 지식을 가진자에게 명백할 것이며, 여기에 정의된 일반적인 원리들은 본 발명의 범위를 벗어남이 없이 다른실시예들에 적용될 수 있다. 그리하여, 본 발명은 여기에 제시된 실시예들로 한정되는 것이아니라, 여기에 제시된 원리들 및 신규한 특징들과 일관되는 최광의의 범위에서 해석되어야 할 것이다.

100; 가상현실을 통한 프리젠테이션 훈련 시스템
110; 디스플레이부
120; 헤드셋
121; 스피커 122; 마이크
130; 모션센서
131; 암밴드
140; 헤드트랙커
141; 동작센서
150; 데이터베이스
160; 데이터처리부

Claims (4)

1. 프리젠테이션 또는 발표 연습을 위한 것으로,
   사용자가 착용하며, 훈련을 위한 가상현실 화면을 제공하는 디스플레이부와;
   가상현실 화면에 대응하는 청각신호를 출력하는 스피커와, 사용자의 음성신호를 입력하는 마이크를 포함하는 헤드셋과;
   상기 사용자의 팔에 장착되어 사용자의 몸짓을 감지하는 모션센서와;
   상기 헤드셋과 모션센서를 통해 입력된 사용자의 음성과 제스처 신호를 입력받아 음량과 속도, 몸짓을 분석하고 분석정보를 사용자에게 제공하는 데이터처리부를 구비하는 것을 특징으로 하는
   가상현실을 통한 프리젠테이션 훈련 시스템.
   
2. 제 1항에 있어서,
   상기 디스플레이부는 사용자의 얼굴에 착용하는 헤드 마운티드 디스플레이(HMD : Head Mounted Display)인 것을 특징으로 하는
   가상현실을 통한 프리젠테이션 훈련 시스템.
   
3. 제 1항에 있어서,
   발표장의 규모, 청중의 수, 성별, 청중반응, 발표 형식을 포함하는 상황변수들에 대한 가상현실 데이터를 저장하고 있는 데이터베이스를 더 구비하며,
   사용자는 상기 데이터베이스에 저장된 상황변수들을 각 요소별로 선택할 수 있고, 상기 데이터베이스는 선택된 상황요소들에 대응하는 가상현실을 조합하여 상기 디스플레이부에 출력하도록 형성된 것을 특징으로 하는
   가상현실을 통한 프리젠테이션 훈련 시스템.
   
4. 제 2항에 있어서,
   상기 디스플레이부를 착용한 사용자의 머리 움직임을 추척하는 헤드 트랙커(Head Tracker)를 더 구비하고,
   상기 디스플레이부의 화면은 상기 헤드 트랙커에 의해 추적된 사용자의 머리 움직임에 대응하여 출력되는 화면의 뷰포인트를 조절할 수 있도록 형성된 것을 특징으로 하는
   가상현실을 통한 프리젠테이션 훈련 시스템.
   
   

Images