KR101977108B1 - Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법 - Google Patents

Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR101977108B1
KR101977108B1 KR1020170172995A KR20170172995A KR101977108B1 KR 101977108 B1 KR101977108 B1 KR 101977108B1 KR 1020170172995 A KR1020170172995 A KR 1020170172995A KR 20170172995 A KR20170172995 A KR 20170172995A KR 101977108 B1 KR101977108 B1 KR 101977108B1
Authority
KR
South Korea
Prior art keywords
presentation
image
unique
identifier
video
Prior art date
Application number
KR1020170172995A
Other languages
English (en)
Inventor
정지환
이준석
이동교
Original Assignee
주식회사 한글과컴퓨터
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 한글과컴퓨터 filed Critical 주식회사 한글과컴퓨터
Priority to KR1020170172995A priority Critical patent/KR101977108B1/ko
Application granted granted Critical
Publication of KR101977108B1 publication Critical patent/KR101977108B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치 및 그 동작 방법이 개시된다. 본 발명에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치 및 그 동작 방법은 복수의 프레젠테이션 발표 녹화 영상 클립들을 소정의 재생 순서에 따라 상기 HMD 장치의 360도 화면 상의 선정된(predetermined) 제1 지점 상에 순차적으로 재생하되, 특정 프레젠테이션 발표 녹화 영상 클립이 재생될 때, 해당 영상 클립에 대응해서 미리 지정되어 있는 참고 영상을 상기 360도 화면 상의 선정된 제2 지점 상에 동시에 재생함으로써, 상기 HMD 장치를 착용한 사용자가 프레젠테이션 발표 녹화 영상을 보면서, 해당 영상에 대한 참고 영상을 기초로 해당 발표 영상에 따른 발표 내용을 손쉽게 이해할 수 있도록 지원할 수 있다.

Description

VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치 및 그 동작 방법{HMD DEVICE FOR DISPLAYING VR-BASED PRESENTATION VIDEO AND OPERATING METHOD THEREOF}
본 발명은 HMD(Head Mounted Display) 장치에서 사용자에게 다양한 경험을 제공할 수 있는 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이 기법에 대한 것이다.
최근, 컴퓨터나 스마트폰 또는 태블릿 PC 등이 널리 보급됨에 따라, 이러한 단말기기를 이용하여 전자 문서를 열람, 작성, 편집할 수 있도록 하는 다양한 종류의 전자 문서 관련 프로그램들이 출시되고 있다.
이러한 전자 문서 관련 프로그램들로는 기본적인 문서의 작성, 편집 등을 지원하는 워드프로세서, 데이터의 입력, 산술연산, 데이터 관리를 보조하는 스프레드시트, 발표자의 발표를 보조하기 위한 프레젠테이션 프로그램들이 있다.
아울러, 최근에는 미래 기술의 하나로 급 부상하고 있는 가상현실(Virtual Reality: VR)에 대한 관심이 증대됨에 따라 게임 등에서 이러한 VR을 활용할 수 있는 VR 관련 기기와 소프트웨어도 다수 등장하고 있다.
VR을 구현할 수 있는 대표적인 기기로는 HMD(Head Mounted Display) 장치가 있는데, HMD 장치는 사용자가 안경처럼 머리에 착용한 후 두 눈앞에 있는 디스플레이를 통해서 화면을 볼 수 있는 장치이다.
이러한 HMD 장치의 보급이 활발하게 이루어짐에 따라, 회의나 세미나 등에서 청중들이 HMD 장치를 착용하고, HMD 장치를 통해 VR 기반으로 작성된 프레젠테이션 문서를 보면서 발표를 듣는 방식의 활용 방안이 고려될 수 있다.
관련하여, HMD 장치에서 미리 녹화된 프레젠테이션 발표 영상을 VR을 기반으로 디스플레이할 때, 해당 프레젠테이션 발표 영상과 관련된 다양한 참고 영상들을 함께 디스플레이함으로써, HMD 장치를 착용한 사용자가 HMD 장치를 통해 프레젠테이션 발표 영상을 볼 때, 보다 다양한 정보를 취득할 수 있도록 지원하기 위한 기술의 연구가 필요하다.
본 발명에 따른 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치 및 그 동작 방법은 복수의 프레젠테이션 발표 녹화 영상 클립들을 소정의 재생 순서에 따라 상기 HMD 장치의 360도 화면 상의 선정된(predetermined) 제1 지점 상에 순차적으로 재생하되, 특정 프레젠테이션 발표 녹화 영상 클립이 재생될 때, 해당 영상 클립에 대응해서 미리 지정되어 있는 참고 영상을 상기 360도 화면 상의 선정된 제2 지점 상에 동시에 재생함으로써, 상기 HMD 장치를 착용한 사용자가 프레젠테이션 발표 녹화 영상을 보면서, 해당 영상에 대한 참고 영상을 기초로 해당 발표 영상에 따른 발표 내용을 손쉽게 이해할 수 있도록 지원하고자 한다.
본 발명의 일실시예에 따른 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치는 복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있는 영상 클립 저장부, 복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있는 참고 영상 저장부, 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지하는 영상 재생 순번 테이블 유지부, 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지하는 매칭 참고 테이블 유지부, 사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 HMD 장치의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된(predetermined) 제1 지점에 대해, 상기 영상 클립 저장부 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리하는 발표 녹화 영상 재생 처리부 및 상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 상기 참고 영상 저장부 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리하는 참고 영상 재생 처리부를 포함한다.
또한, 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있는 영상 클립 저장부를 유지하는 단계, 복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있는 참고 영상 저장부를 유지하는 단계, 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지하는 단계, 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지하는 단계, 사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 HMD 장치의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된 제1 지점에 대해, 상기 영상 클립 저장부 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리하는 단계 및 상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 상기 참고 영상 저장부 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리하는 단계를 포함한다.
본 발명에 따른 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치 및 그 동작 방법은 복수의 프레젠테이션 발표 녹화 영상 클립들을 소정의 재생 순서에 따라 상기 HMD 장치의 360도 화면 상의 선정된(predetermined) 제1 지점 상에 순차적으로 재생하되, 특정 프레젠테이션 발표 녹화 영상 클립이 재생될 때, 해당 영상 클립에 대응해서 미리 지정되어 있는 참고 영상을 상기 360도 화면 상의 선정된 제2 지점 상에 동시에 재생함으로써, 상기 HMD 장치를 착용한 사용자가 프레젠테이션 발표 녹화 영상을 보면서, 해당 영상에 대한 참고 영상을 기초로 해당 발표 영상에 따른 발표 내용을 손쉽게 이해할 수 있도록 지원할 수 있다.
도 1은 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 구조를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작을 설명하기 위한 도면이다.
도 3은 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법을 도시한 순서도이다.
이하에서는 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명하기로 한다. 이러한 설명은 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였으며, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 본 명세서 상에서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 사람에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.
도 1은 본 발명의 일실시예에 따른 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치의 구조를 도시한 도면이다.
도 1을 참조하면, 본 발명에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치(110)는 영상 클립 저장부(111), 참고 영상 저장부(112), 영상 재생 순번 테이블 유지부(113), 매칭 참고 테이블 유지부(114), 발표 녹화 영상 재생 처리부(115) 및 참고 영상 재생 처리부(116)를 포함한다.
영상 클립 저장부(111)에는 복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있다.
예컨대, 영상 클립 저장부(111)에는 하기의 표 1과 같이 데이터가 저장되어 있을 수 있다.
프레젠테이션 발표 녹화 영상 클립들 고유 영상 식별자
영상 클립 1 고유 영상 식별자 1
영상 클립 2 고유 영상 식별자 2
영상 클립 3 고유 영상 식별자 3
... ...
참고 영상 저장부(112)에는 복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있다.
관련해서, 참고 영상 저장부(112)에는 하기의 표 2와 같이 데이터가 저장되어 있을 수 있다.
참고 영상들 고유 참고 식별자
참고 영상 1 고유 참고 식별자 1
참고 영상 2 고유 참고 식별자 2
참고 영상 3 고유 참고 식별자 3
... ...
영상 재생 순번 테이블 유지부(113)는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지한다.
관련해서, 상기 영상 재생 순번 테이블에는 하기의 표 3과 같이 정보가 기록되어 있을 수 있다.
고유 영상 식별자 순번
고유 영상 식별자 1 1순위
고유 영상 식별자 2 2순위
고유 영상 식별자 3 3순위
... ...
매칭 참고 테이블 유지부(114)는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지한다.
관련해서, 상기 매칭 참고 테이블에는 하기의 표 4와 같이 정보가 기록되어 있을 수 있다.
고유 영상 식별자 고유 참고 식별자
고유 영상 식별자 1 고유 참고 식별자 2
고유 영상 식별자 2 고유 참고 식별자 3
고유 영상 식별자 3 고유 참고 식별자 1
... ...
발표 녹화 영상 재생 처리부(115)는 사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, HMD 장치(110)의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된(predetermined) 제1 지점에 대해, 영상 클립 저장부(111) 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리한다.
여기서, 360도 화면이란 HMD 장치(110)를 착용한 사용자가 머리를 360도 방향으로 이동시켰을 때, 사용자의 머리 움직임에 따라 모든 방향에서 화면이 보여지도록 하는 화면으로 HMD 장치(110)에서 360도 화면이 디스플레이되기 때문에 사용자는 가상현실을 체감할 수 있게 된다.
참고 영상 재생 처리부(116)는 상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 참고 영상 저장부(112) 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리한다.
예컨대, HMD 장치(110)의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면이 도 2의 도면부호 210에 도시된 화면과 같다고 하고, 상기 선정된 제1 지점을 도면부호 211에 도시된 지점이라고 하는 경우, 발표 녹화 영상 재생 처리부(115)는 사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 표 3에서 나타낸 바와 같은 영상 재생 순번 테이블을 참고하여 영상 클립 저장부(111)에 저장되어 있는 복수의 프레젠테이션 발표 녹화 영상 클립들을 각 순번에 따라 순차적으로 360도 화면(210) 상의 선정된 제1 지점(211)에 재생할 수 있다.
그리고, 참고 영상 재생 처리부(116)는 상기 선정된 제2 지점이 도면부호 212에 도시된 지점이라고 하는 경우, 선정된 제1 지점(211)에서 재생되는 프레젠테이션 발표 녹화 영상 클립에 대응하여, 상기 표 4에서 나타낸 매칭 참고 테이블 상에서의 대응 관계에 따라 360도 화면(210)의 선정된 제2 지점(212)에 대해 선정된 제1 지점(211)에서 재생되는 프레젠테이션 발표 녹화 영상 클립에 대응하는 참고 영상을 재생할 수 있다.
즉, 영상 클립 저장부(111)에 상기 표 1과 같이 데이터가 저장되어 있고, 참고 영상 저장부(112)에 상기 표 2와 같이 데이터가 저장되어 있다고 하는 경우, 발표 녹화 영상 재생 처리부(115)는 선정된 제1 지점(211)에서 '영상 클립 1', '영상 클립 2', '영상 클립 3'의 순서로 프레젠테이션 발표 녹화 영상 클립들을 재생할 수 있고, 참고 영상 재생 처리부(112)는 선정된 제1 지점(211)에서 '영상 클립 1'이 재생될 때, 선정된 제2 지점(212)에서 '참고 영상 2'를 대응시켜 재생하고, 선정된 제1 지점(211)에서 '영상 클립 2'가 재생될 때, 선정된 제2 지점(212)에서 '참고 영상 3'을 대응시켜 재생하며, 선정된 제1 지점(211)에서 '영상 클립 3'이 재생될 때, 선정된 제2 지점(212)에서 '참고 영상 1'을 대응시켜 재생할 수 있다.
이를 통해, HMD 장치(110)를 착용한 사용자는 360도 화면(210) 상에서 재생되는 프레젠테이션 발표 녹화 영상 클립과 그에 대응하는 참고 영상을 동시에 볼 수 있다. 따라서, 프레젠테이션 발표 녹화 영상 클립을 제작하는 제작자는 자신이 발표하기를 원하는 발표 녹화 영상 클립을 제작하면서, 청중들이 발표 내용을 쉽게 이해할 수 있도록 돕기 위한 참고 영상을 발표 녹화 영상 클립에 대응시키는 방향으로 프레젠테이션 콘텐츠를 제작함으로써, 자신의 발표 내용에 대한 설득력을 향상시킬 수 있다.
이때, 본 발명의 일실시예에 따르면, 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자는 미리 정해진 유사도 기준에 따라 유사한 참고 영상일수록 벡터 사이의 유사도가 높게 연산되도록 설정된 서로 다른 특성 벡터일 수 있다.
이 경우, 참고 영상 저장부(112)에는 하기의 표 5의 예시와 같이 각 참고 영상들에 대한 고유 참고 식별자가 벡터 형태로 저장되어 있을 수 있다.
참고 영상들 고유 참고 식별자
참고 영상 1 (1, 2, 3, 4, 5)
참고 영상 2 (6, 7, 8, 9, 10)
참고 영상 3 (11, 12, 13, 14, 15)
... ...
이때, 본 발명의 일실시예에 따르면, VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치(110)는 유사도 연산부(117), 서브 참고 영상 선택부(118) 및 서브 참고 영상 재생 처리부(119)를 더 포함할 수 있다.
유사도 연산부(117)는 상기 선정된 제1 지점에서 제1 프레젠테이션 발표 녹화 영상 클립이 재생됨에 따라 상기 선정된 제2 지점에서 상기 제1 프레젠테이션 발표 녹화 영상 클립에 대응하는 연관 참고 영상으로 제1 참고 영상이 재생되는 경우, 상기 제1 참고 영상에 대한 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산한다.
이때, 본 발명의 일실시예에 따르면, 유사도 연산부(117)는 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리(Euclidean Distance)를 연산하고, 상기 연산된 유클리드 거리를 기초로 하기의 수학식 1의 연산에 따라 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산할 수 있다.
Figure 112017125136246-pat00001
여기서, D는 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리, S는 벡터 유사도를 의미한다. 상기 수학식 1에서 볼 수 있는 것처럼, 두 벡터 간의 유클리드 거리가 증가할수록 유사도는 '0'에 가까운 값으로 감소하게 되고, 두 벡터 간의 유클리드 거리가 감소할수록 유사도는 '1'에 가까운 값으로 증가하게 된다.
여기서, 유클리드 거리란 두 벡터 간의 거리를 의미하는 것으로 하기의 수학식 2에 따라 연산될 수 있다.
Figure 112017125136246-pat00002
상기 수학식 2에서 D는 유클리드 거리, pi와 qi는 두 벡터에 포함되어 있는 i번째 성분들을 의미한다. 두 벡터 간의 유클리드 거리가 작을수록 두 벡터는 유사한 벡터라고 볼 수 있고, 두 벡터 간의 유클리드 거리가 클수록 두 벡터는 비유사한 벡터라고 볼 수 있다.
예컨대, 도 2에 도시된 실시예에서 360 화면(210) 상의 선정된 제1 지점(211)에 '영상 클립 1'이 재생되고, 선정된 제2 지점(212)에 '영상 클립 1'에 대응하는 참고 영상으로 '참고 영상 2'가 재생되는 경우, 유사도 연산부(117)는 상기 수학식 2의 연산에 따라 상기 표 5에서 '참고 영상 2'에 대한 고유 참고 식별자인 '(6, 7, 8, 9, 10)'과 나머지 참고 영상들에 대한 고유 참고 식별자 각각 간의 유클리드 거리를 연산할 수 있다.
그러고 나서, 유사도 연산부(117)는 '참고 영상 2'에 대한 고유 참고 식별자인 '(6, 7, 8, 9, 10)'과 나머지 참고 영상들에 대한 고유 참고 식별자 각각 간의 유클리드 거리를 기초로 상기 수학식 1에 따른 연산을 수행함으로써, '참고 영상 2'에 대한 고유 참고 식별자인 '(6, 7, 8, 9, 10)'과 나머지 참고 영상들에 대한 고유 참고 식별자 각각 간의 벡터 유사도를 연산할 수 있다.
서브 참고 영상 선택부(118)는 참고 영상 저장부(112)에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택한다.
그리고, 서브 참고 영상 재생 처리부(119)는 상기 VR 기반의 360도 화면 상의 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리한다.
관련해서, 앞서 설명한 예에 따라 도 2의 도면 상에서 선정된 제2 지점(212)에 '참고 영상 2'가 재생된다고 하고, 유사도 연산부(117)에서 '참고 영상 2'에 대한 고유 참고 식별자와의 유사도를 연산한 결과, 상기 선정된 제1 기준치를 초과하는 것으로 연산된 고유 참고 식별자가 '참고 영상 1', '참고 영상 3'에 대한 고유 참고 식별자라고 하며, 해당 유사도가 '참고 영상 1', '참고 영상 3'의 크기 순서를 갖는다면, 서브 참고 영상 선택부(118)는 참고 영상 저장부(112)로부터 '참고 영상 1'과 '참고 영상 3'을 '참고 영상 2'에 대한 서브 참고 영상으로 추출할 수 있고, 서브 참고 영상 재생 처리부(119)는 유사도 크기 순서에 따라 360도 화면(210)의 선정된 제3 지점에 대해 '참고 영상 1'과 '참고 영상 3'을 순차적으로 재생 처리할 수 있다.
이때, 도 2의 도면 상에서 상기 선정된 제3 지점이 도면부호 213으로 표시한 지점이라고 한다면, 서브 참고 영상 재생 처리부(119)는 360도 화면(210)의 선정된 제3 지점(213)에 대해 '참고 영상 1'과 '참고 영상 3'을 순차적으로 재생 처리할 수 있다.
이를 통해, HMD 장치(110)를 착용한 사용자는 프레젠테이션 발표 녹화 영상 클립을 보면서 상기 프레젠테이션 발표 녹화 영상 클립에 대응하는 참고 영상과 해당 참고 영상에 대한 또 다른 서브 참고 영상을 동시에 볼 수 있어서, 해당 발표 녹화 영상 클립의 내용을 참고 영상과 서브 참고 영상을 통해 보다 쉽게 이해할 수 있을 것이다.
이때, 본 발명의 일실시예에 따르면, 서브 참고 영상 재생 처리부(119)는 상기 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하되, 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 상기 적어도 하나의 참고 영상의 개수로 나눈 부분 재생 시간만큼 상기 적어도 하나의 참고 영상 각각을 순차적으로 재생 처리할 수 있다.
예컨대, 도 2의 실시예에서 선정된 제1 지점(211)에서 '3분'이라는 총 재생 시간을 갖는 '영상 클립 1'이 재생된다고 하고, 선정된 제3 지점(213)에서 '참고 영상 1'과 '참고 영상 3'이 서브 참고 영상으로 순차적으로 재생된다고 하는 경우, 서브 참고 영상 재생 처리부(119)는 '3분'이라는 총 재생 시간을 서브 참고 영상의 개수인 '2'로 나누어 '1분 30초'라는 부분 재생 시간을 연산한 후 '참고 영상 1'과 '참고 영상 3'을 '1분 30초'씩 선정된 제3 지점(213)에서 순차적으로 재생 처리할 수 있다.
본 발명의 일실시예에 따르면, VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치(110)는 가중치 테이블 유지부(120)를 더 포함할 수 있다.
가중치 테이블 유지부(120)는 미리 정해진 서로 다른 재생 시간의 범위 값들 별로 상기 선정된 제1 기준치의 보정을 위한 서로 다른 보정 가중치가 대응되어 기록되어 있는 가중치 테이블을 저장하여 유지한다. 이때, 상기 보정 가중치는 재생 시간의 범위 값들이 높은 값을 가질수록 낮은 값으로 설정된 값이다.
관련해서, 상기 가중이 테이블에는 하기의 표 6과 같이 정보가 기록되어 있을 수 있다.
재생 시간의 범위 값들 보정 가중치
0~3분 1
3~6분 0.8
6~9분 0.6
... ...
이때, 서브 참고 영상 선택부(118)는 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 확인하여 상기 가중치 테이블로부터 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간이 속해 있는 재생 시간의 범위 값에 대응하는 제1 보정 가중치를 추출하고, 상기 선정된 제1 기준치에 대해 상기 제1 보정 가중치를 곱하여 상기 선정된 제1 기준치에 대한 보정을 수행한 후 참고 영상 저장부(112)에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 보정이 수행된 상기 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 상기 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택할 수 있다.
예컨대, 도 2의 실시예에서 선정된 제1 지점(211)에서 '5분'이라는 총 재생 시간을 갖는 '영상 클립 1'이 재생된다고 하는 경우, 서브 참고 영상 선택부(118)는 상기 표 1과 같은 가중치 테이블로부터 '5분'이라는 총 재생 시간이 속해 있는 재생 시간의 범위 값에 대응하는 보정 가중치인 '0.8'을 상기 제1 보정 가중치로 추출할 수 있다.
그러고 나서, 서브 참고 영상 선택부(118)는 상기 선정된 제1 기준치에 대해 상기 제1 보정 가중치인 '0.8'을 곱하여 상기 선정된 제1 기준치의 보정을 수행한 후 보정된 상기 선정된 제1 기준치를 고려해서, 선정된 제3 지점(213)에 재생될 서브 참고 영상의 선택을 수행할 수 있다.
즉, 선정된 제1 지점(211)에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 재생 시간이 길수록 상기 선정된 제1 기준치가 낮아지기 때문에 더 많은 서브 참고 영상들이 선정된 제3 지점(213)에서 재생될 수 있게 되어, HMD 장치(110)를 착용한 사용자는 긴 재생 시간을 갖는 프레젠테이션 발표 녹화 영상 클립이 재생될 때 보다 많은 서브 참고 영상들을 볼 수 있어서, 긴 내용의 발표 영상이라도 보다 쉽게 발표 내용을 이해할 수 있을 것이다.
도 3은 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법을 도시한 순서도이다.
단계(S310)에서는 복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있는 영상 클립 저장부를 유지한다.
단계(S320)에서는 복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있는 참고 영상 저장부를 유지한다.
단계(S330)에서는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지한다.
단계(S340)에서는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지한다.
단계(S350)에서는 사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 HMD 장치의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된 제1 지점에 대해, 상기 영상 클립 저장부 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리한다.
단계(S360)에서는 상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 상기 참고 영상 저장부 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리한다.
이때, 본 발명의 일실시예에 따르면, 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자는 미리 정해진 유사도 기준에 따라 유사한 참고 영상일수록 벡터 사이의 유사도가 높게 연산되도록 설정된 서로 다른 특성 벡터일 수 있다.
이때, 상기 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 상기 선정된 제1 지점에서 제1 프레젠테이션 발표 녹화 영상 클립이 재생됨에 따라 상기 선정된 제2 지점에서 상기 제1 프레젠테이션 발표 녹화 영상 클립에 대응하는 연관 참고 영상으로 제1 참고 영상이 재생되는 경우, 상기 제1 참고 영상에 대한 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산하는 단계, 상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택하는 단계 및 상기 VR 기반의 360도 화면 상의 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하는 단계를 더 포함할 수 있다.
이때, 본 발명의 일실시예에 따르면, 상기 벡터 유사도를 연산하는 단계는 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리를 연산하고, 상기 연산된 유클리드 거리를 기초로 상기의 수학식 1의 연산에 따라 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산할 수 있다.
또한, 본 발명의 일실시예에 따르면, 상기 순차적으로 재생 처리하는 단계는 상기 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하되, 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 상기 적어도 하나의 참고 영상의 개수로 나눈 부분 재생 시간만큼 상기 적어도 하나의 참고 영상 각각을 순차적으로 재생 처리할 수 있다.
또한, 본 발명의 일실시예에 따르면, 상기 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 미리 정해진 서로 다른 재생 시간의 범위 값들 별로 상기 선정된 제1 기준치의 보정을 위한 서로 다른 보정 가중치(상기 보정 가중치는 재생 시간의 범위 값들이 높은 값을 가질수록 낮은 값으로 설정된 값임)가 대응되어 기록되어 있는 가중치 테이블을 저장하여 유지하는 단계를 더 포함할 수 있다.
이때, 상기 서브 참고 영상으로 선택하는 단계는 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 확인하여 상기 가중치 테이블로부터 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간이 속해 있는 재생 시간의 범위 값에 대응하는 제1 보정 가중치를 추출하고, 상기 선정된 제1 기준치에 대해 상기 제1 보정 가중치를 곱하여 상기 선정된 제1 기준치에 대한 보정을 수행한 후 상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 보정이 수행된 상기 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 상기 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택할 수 있다.
이상, 도 3을 참조하여 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법에 대해 설명하였다. 여기서, 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 도 1 내지 도 2를 이용하여 설명한 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치(110)의 동작에 대한 구성과 대응될 수 있으므로, 이에 대한 보다 상세한 설명은 생략하기로 한다.
본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램으로 구현될 수 있다.
또한, 본 발명의 일실시예에 따른 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
110: VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치
111: 영상 클립 저장부 112: 참고 영상 저장부
113: 영상 재생 순번 테이블 유지부 114: 매칭 참고 테이블 유지부
115: 발표 녹화 영상 재생 처리부 116: 참고 영상 재생 처리부
117: 유사도 연산부 118: 서브 참고 영상 선택부
119: 서브 참고 영상 재생 처리부 120: 가중치 테이블 유지부

Claims (12)

  1. 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치에 있어서,
    복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있는 영상 클립 저장부;
    복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있는 참고 영상 저장부;
    상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지하는 영상 재생 순번 테이블 유지부;
    상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지하는 매칭 참고 테이블 유지부;
    사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 HMD 장치의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된(predetermined) 제1 지점에 대해, 상기 영상 클립 저장부 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리하는 발표 녹화 영상 재생 처리부; 및
    상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 상기 참고 영상 저장부 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리하는 참고 영상 재생 처리부
    를 포함하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치.
  2. 제1항에 있어서,
    상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자는 미리 정해진 유사도 기준에 따라 유사한 참고 영상일수록 벡터 사이의 유사도가 높게 연산되도록 설정된 서로 다른 특성 벡터이고,
    상기 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치는
    상기 선정된 제1 지점에서 제1 프레젠테이션 발표 녹화 영상 클립이 재생됨에 따라 상기 선정된 제2 지점에서 상기 제1 프레젠테이션 발표 녹화 영상 클립에 대응하는 연관 참고 영상으로 제1 참고 영상이 재생되는 경우, 상기 제1 참고 영상에 대한 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산하는 유사도 연산부;
    상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택하는 서브 참고 영상 선택부; 및
    상기 VR 기반의 360도 화면 상의 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하는 서브 참고 영상 재생 처리부
    를 더 포함하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치.
  3. 제2항에 있어서,
    상기 유사도 연산부는
    상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리(Euclidean Distance)를 연산하고, 상기 연산된 유클리드 거리를 기초로 하기의 수학식 1의 연산에 따라 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치.
    [수학식 1]
    Figure 112017125136246-pat00003

    여기서, D는 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리, S는 벡터 유사도를 의미함.
  4. 제2항에 있어서,
    상기 서브 참고 영상 재생 처리부는
    상기 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하되, 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 상기 적어도 하나의 참고 영상의 개수로 나눈 부분 재생 시간만큼 상기 적어도 하나의 참고 영상 각각을 순차적으로 재생 처리하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치.
  5. 제2항에 있어서,
    미리 정해진 서로 다른 재생 시간의 범위 값들 별로 상기 선정된 제1 기준치의 보정을 위한 서로 다른 보정 가중치 - 상기 보정 가중치는 재생 시간의 범위 값들이 높은 값을 가질수록 낮은 값으로 설정된 값임 - 가 대응되어 기록되어 있는 가중치 테이블을 저장하여 유지하는 가중치 테이블 유지부
    를 더 포함하고,
    상기 서브 참고 영상 선택부는
    상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 확인하여 상기 가중치 테이블로부터 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간이 속해 있는 재생 시간의 범위 값에 대응하는 제1 보정 가중치를 추출하고, 상기 선정된 제1 기준치에 대해 상기 제1 보정 가중치를 곱하여 상기 선정된 제1 기준치에 대한 보정을 수행한 후 상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 보정이 수행된 상기 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 상기 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치.
  6. 가상현실(Virtual Reality: VR) 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD(Head Mounted Display) 장치의 동작 방법에 있어서,
    복수의 프레젠테이션 발표 녹화 영상 클립들과 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각에 대응하는 고유 영상 식별자가 저장되어 있는 영상 클립 저장부를 유지하는 단계;
    복수의 참고 영상들과 상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자가 저장되어 있는 참고 영상 저장부를 유지하는 단계;
    상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 영상의 재생 순서를 지시하는 순번이 대응되어 기록되어 있는 영상 재생 순번 테이블을 저장하여 유지하는 단계;
    상기 복수의 프레젠테이션 발표 녹화 영상 클립들 각각의 고유 영상 식별자에 대해 상기 복수의 참고 영상들 중 연관 참고 영상으로 미리 지정된 참고 영상에 대한 고유 참고 식별자가 대응되어 기록되어 있는 매칭 참고 테이블을 저장하여 유지하는 단계;
    사용자에 의해 프레젠테이션 발표 녹화 영상의 재생 명령이 인가되면, 상기 HMD 장치의 디스플레이부를 통해 표시되는 VR 기반의 360도 화면 상에서 선정된(predetermined) 제1 지점에 대해, 상기 영상 클립 저장부 상에 저장되어 있는 상기 복수의 프레젠테이션 발표 녹화 영상 클립들 중 상기 영상 재생 순번 테이블 상에 기록되어 있는 순번에 따라 순차적으로 각 순번에 대응하는 고유 영상 식별자를 갖는 프레젠테이션 발표 녹화 영상 클립의 재생을 처리하는 단계; 및
    상기 선정된 제1 지점에서의 프레젠테이션 발표 녹화 영상 클립의 재생에 대응하여, 상기 VR 기반의 360도 화면 상의 선정된 제2 지점에 대해, 상기 참고 영상 저장부 상에 저장되어 있는 상기 복수의 참고 영상들 중 상기 매칭 참고 테이블 상에서 상기 선정된 제1 지점에서 재생되는 프레젠테이션 발표 녹화 영상 클립의 고유 영상 식별자에 대응되어 기록되어 있는 고유 참고 식별자를 갖는 참고 영상의 재생을 처리하는 단계
    를 포함하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법.
  7. 제6항에 있어서,
    상기 복수의 참고 영상들 각각에 대응하는 고유 참고 식별자는 미리 정해진 유사도 기준에 따라 유사한 참고 영상일수록 벡터 사이의 유사도가 높게 연산되도록 설정된 서로 다른 특성 벡터이고,
    상기 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법은
    상기 선정된 제1 지점에서 제1 프레젠테이션 발표 녹화 영상 클립이 재생됨에 따라 상기 선정된 제2 지점에서 상기 제1 프레젠테이션 발표 녹화 영상 클립에 대응하는 연관 참고 영상으로 제1 참고 영상이 재생되는 경우, 상기 제1 참고 영상에 대한 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산하는 단계;
    상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택하는 단계; 및
    상기 VR 기반의 360도 화면 상의 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하는 단계
    를 더 포함하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법.
  8. 제7항에 있어서,
    상기 벡터 유사도를 연산하는 단계는
    상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리(Euclidean Distance)를 연산하고, 상기 연산된 유클리드 거리를 기초로 하기의 수학식 2의 연산에 따라 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 벡터 유사도를 연산하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법.
    [수학식 2]
    Figure 112017125136246-pat00004

    여기서, D는 상기 제1 고유 참고 식별자와 상기 복수의 참고 영상들 각각에 대한 고유 참고 식별자 간의 유클리드 거리, S는 벡터 유사도를 의미함.
  9. 제7항에 있어서,
    상기 순차적으로 재생 처리하는 단계는
    상기 선정된 제3 지점에 대해, 상기 적어도 하나의 참고 영상을 상기 제1 고유 참고 식별자와의 벡터 유사도가 높은 순서에 따라 순차적으로 재생 처리하되, 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 상기 적어도 하나의 참고 영상의 개수로 나눈 부분 재생 시간만큼 상기 적어도 하나의 참고 영상 각각을 순차적으로 재생 처리하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법.
  10. 제7항에 있어서,
    미리 정해진 서로 다른 재생 시간의 범위 값들 별로 상기 선정된 제1 기준치의 보정을 위한 서로 다른 보정 가중치 - 상기 보정 가중치는 재생 시간의 범위 값들이 높은 값을 가질수록 낮은 값으로 설정된 값임 - 가 대응되어 기록되어 있는 가중치 테이블을 저장하여 유지하는 단계
    를 더 포함하고,
    상기 서브 참고 영상으로 선택하는 단계는
    상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간을 확인하여 상기 가중치 테이블로부터 상기 제1 프레젠테이션 발표 녹화 영상 클립의 총 재생 시간이 속해 있는 재생 시간의 범위 값에 대응하는 제1 보정 가중치를 추출하고, 상기 선정된 제1 기준치에 대해 상기 제1 보정 가중치를 곱하여 상기 선정된 제1 기준치에 대한 보정을 수행한 후 상기 참고 영상 저장부에 저장되어 있는 상기 복수의 참고 영상들 중 상기 제1 고유 참고 식별자와의 벡터 유사도가 보정이 수행된 상기 선정된 제1 기준치를 초과하는 것으로 연산되는 고유 참고 식별자를 갖는 상기 적어도 하나의 참고 영상을 상기 제1 참고 영상에 대한 서브 참고 영상으로 선택하는 VR 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 HMD 장치의 동작 방법.
  11. 제6항 내지 제10항 중 어느 한 항의 방법을 컴퓨터로 하여금 수행하도록 하는 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
  12. 제6항 내지 제10항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램.
KR1020170172995A 2017-12-15 2017-12-15 Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법 KR101977108B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170172995A KR101977108B1 (ko) 2017-12-15 2017-12-15 Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170172995A KR101977108B1 (ko) 2017-12-15 2017-12-15 Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
KR101977108B1 true KR101977108B1 (ko) 2019-06-19

Family

ID=67104269

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170172995A KR101977108B1 (ko) 2017-12-15 2017-12-15 Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법

Country Status (1)

Country Link
KR (1) KR101977108B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023244076A1 (ko) * 2022-06-17 2023-12-21 주식회사 메타캠프 큐시트를 이용해 이벤트를 진행하는 메타버스 서비스장치 및 그 장치의 구동방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010231270A (ja) * 2009-03-25 2010-10-14 Toshiba Corp データ表示装置、データ表示方法、データ表示プログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010231270A (ja) * 2009-03-25 2010-10-14 Toshiba Corp データ表示装置、データ表示方法、データ表示プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023244076A1 (ko) * 2022-06-17 2023-12-21 주식회사 메타캠프 큐시트를 이용해 이벤트를 진행하는 메타버스 서비스장치 및 그 장치의 구동방법

Similar Documents

Publication Publication Date Title
US8174523B2 (en) Display controlling apparatus and display controlling method
US8984406B2 (en) Method and system for annotating video content
US20190171869A1 (en) Creating videos with facial expressions
US20120106924A1 (en) Systems and methods for media annotation, selection and display of background data
KR20090021404A (ko) 디스플레이 장치의 화면 크기에 기초한 적응적 영상 처리장치 및 영상 스케일링 방법
US9307292B2 (en) Overlay of visual representations of captions on video
CN108427589B (zh) 一种数据处理方法及电子设备
JP2008136213A (ja) 動画のフレーム情報を生成する方法、それを利用したシステム及び記録媒体
KR20140078171A (ko) 증강현실 콘텐츠 재생 시스템
KR101977108B1 (ko) Vr 기반의 프레젠테이션 발표 영상의 디스플레이를 위한 hmd 장치 및 그 동작 방법
US11398077B2 (en) Reproducing device, reproducing method, recording device, recording method, reproducing/recording device, and reproducing/recording method for display of a 3D model arranged in a space recreated by a free visual point moving image stream
KR102030541B1 (ko) Vr 기반의 프레젠테이션 발표 연습을 가능하게 하는 hmd 장치 및 그 동작 방법
KR101703321B1 (ko) 복합 컨텐츠의 제공 방법 및 장치
KR20110090601A (ko) 부가 정보 표시 방법 및 장치
KR20190068880A (ko) Vr 기반의 프레젠테이션 문서의 출력이 가능한 hmd 장치 및 그 동작 방법
KR20220157033A (ko) 영상에 연관된 광고 정보를 표시하기 위한 영상 스트리밍 서비스 서버 및 그 동작 방법
JP2020509624A (ja) オーディオまたはビデオ内のカット間タイムバケットを決定するための方法および装置
CN115022697A (zh) 添加有内容元素的视频的展示方法、电子设备及程序产品
JP6037443B2 (ja) 映像間対応関係表示システム及び映像間対応関係表示方法
JPWO2022024594A5 (ko)
JP5854232B2 (ja) 映像間対応関係表示システム及び映像間対応関係表示方法
JP6638281B2 (ja) 情報処理装置及びプログラム
KR102067493B1 (ko) Vr 기반 프레젠테이션 문서의 디스플레이를 위한 hmd 장치 및 그 동작 방법
WO2019030551A1 (en) METHOD FOR APPLYING METADATA TO IMMERSIVE MULTIMEDIA FILES
Chaurasia et al. Challenges and Opportunities of Spatial Sound Design in Cinematic Virtual Reality: A Scoping Review

Legal Events

Date Code Title Description
GRNT Written decision to grant