KR20180043112A - 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 - Google Patents

가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 Download PDF

Info

Publication number
KR20180043112A
KR20180043112A KR1020160136014A KR20160136014A KR20180043112A KR 20180043112 A KR20180043112 A KR 20180043112A KR 1020160136014 A KR1020160136014 A KR 1020160136014A KR 20160136014 A KR20160136014 A KR 20160136014A KR 20180043112 A KR20180043112 A KR 20180043112A
Authority
KR
South Korea
Prior art keywords
data
content
virtual reality
providing
user device
Prior art date
Application number
KR1020160136014A
Other languages
English (en)
Inventor
차성웅
Original Assignee
차성웅
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 차성웅 filed Critical 차성웅
Priority to KR1020160136014A priority Critical patent/KR20180043112A/ko
Publication of KR20180043112A publication Critical patent/KR20180043112A/ko

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/18Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration in two or more dimensions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
본 발명의 일 태양에 따르면, 통신망 상에서 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법 - 상기 컨텐츠 제공 장치는 데이터 스킵 모듈과 압축 모듈을 포함하고, 상기 가상 현실 사용자 장치는 통신부, 압축 해제부 및 디스플레이 데이터 제공부를 포함함 - 으로서, 상기 데이터 스킵 모듈에 의하여, 상기 컨텐츠 제공 장치에 의하여 재생되고 있는 컨텐츠의 데이터를 일부 스킵하는 단계, 상기 압축 모듈에 의하여, 상기 일부 스킵된 컨텐츠 데이터를 병렬 압축하는 단계, 상기 통신부에 의하여, 상기 병렬 압축된 컨텐츠 데이터를 수신하는 단계, 상기 압축 해제부에 의하여, 상기 수신된 컨텐츠 데이터를 압축 해제하는 단계, 및 상기 디스플레이 데이터 제공부에 의하여, 상기 압축 해제된 컨텐츠 데이터를 상기 가상 현실 사용자 장치의 디스플레이를 위하여 제공하는 단계를 포함하는 방법이 제공된다.

Description

가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체{METHOD, SYSTEM AND COMPUTER-READABLE RECORDING MEDIUM FOR ENABLING USER DEVICE THAT IMPLEMENTS VIRTUAL REALITY TO COOPERATE WITH EXTERNAL CONTENTS-PROVIDING DEVICE}
본 발명은 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
근래에 들어, 가상 현실(Virtual Reality; VR)을 실현하는 다양한 사용자 장치가 소개되고 또한 제공되고 있다. 이러한 사용자 장치 중에서 비교적 대중화된 것으로서, 전용의 헤드 마운트 디스플레이(Head Mount Display; HMD) 장치, 또는 사용자 개인의 스마트 폰이 소정의 다른 장치(즉, 헤드 마운팅을 위한 부속 장치(예를 들면, 드롭-인(Drop-In) HMD))와 연동하도록 설계된 것을 들 수 있다. 이러한 것들의 구체적인 예로서, 오큘러스의 리프트(rift), HTC의 바이브(vive) 그리고 삼성전자의 기어 VR을 들 수 있다.
가상 현실을 제공하는 위와 같은 다양한 사용자 장치에도 불구하고, 기존의 대부분의 컨텐츠 제작업체의 기술력 낙후와 리소스 부족으로 인하여, 가상 현실을 위한 컨텐츠의 생산은 폭발적으로 증가하고 있는 수요를 전혀 따라 오지 못하고 있다. 가상 현실 컨텐츠가 전체 컨텐츠 시장에서 차지하는 비중은 아직도 1% 미만이고, 가상 현실 컨텐츠를 이해하고 제작하는 창작자 역시 매우 부족한 실정이다.
이에 따라, 본 발명자(들)는 기존의 PC 등에서 제공되던 컨텐츠가 실시간으로 가상 현실 컨텐츠로서 이용될 수 있도록 하는 새로운 기술에 관하여 여기에서 제안하는 바이다.
본 발명은 전술한 종래 기술의 문제점을 모두 해결하는 것을 그 목적으로 한다.
본 발명은 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 함으로써 기존의 컨텐츠가 가상 현실 컨텐츠로서 이용되도록 하는 것을 다른 목적으로 한다.
본 발명은 가상 현실을 실현하는 사용자 장치 등이 최적의 스킴을 갖고 작동하도록 하는 것을 또 다른 목적으로 한다.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.
본 발명의 일 태양에 따르면, 통신망 상에서 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법 - 상기 컨텐츠 제공 장치는 데이터 스킵 모듈과 압축 모듈을 포함하고, 상기 가상 현실 사용자 장치는 통신부, 압축 해제부 및 디스플레이 데이터 제공부를 포함함 - 으로서, 상기 데이터 스킵 모듈에 의하여, 상기 컨텐츠 제공 장치에 의하여 재생되고 있는 컨텐츠의 데이터를 일부 스킵하는 단계, 상기 압축 모듈에 의하여, 상기 일부 스킵된 컨텐츠 데이터를 병렬 압축하는 단계, 상기 통신부에 의하여, 상기 병렬 압축된 컨텐츠 데이터를 수신하는 단계, 상기 압축 해제부에 의하여, 상기 수신된 컨텐츠 데이터를 압축 해제하는 단계, 및 상기 디스플레이 데이터 제공부에 의하여, 상기 압축 해제된 컨텐츠 데이터를 상기 가상 현실 사용자 장치의 디스플레이를 위하여 제공하는 단계를 포함하는 방법이 제공된다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
본 발명에 의하면, 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 할 수 있게 된다.
본 발명은 가상 현실을 실현하는 사용자 장치 등이 최적의 스킴을 갖고 작동할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따라 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 전체 시스템의 개략적인 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 가상 현실 사용자 장치의 내부 구성을 상세하게 도시하는 도면이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 바람직한 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
[본 발명의 바람직한 실시예]
본 명세서에서, 컨텐츠(contents) 또는 컨텐트란, 통신망을 통하여 접근 가능한, 문자, 부호, 음성, 음향, 이미지, 동영상 등으로 이루어지는 디지털 정보 또는 개별 정보 요소를 총칭하는 개념이다. 이러한 컨텐츠는, 예를 들면, 텍스트, 이미지, 동영상, 오디오, 링크(예를 들면, 웹 링크) 등의 데이터 또는 이러한 데이터 중 적어도 두 가지의 조합을 포함하여 구성될 수 있다.
전체 시스템의 구성
도 1은 본 발명의 일 실시예에 따라 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 전체 시스템의 개략적인 구성을 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 전체 시스템은 통신망(100), 가상 현실 사용자 장치(200) 그리고 가상 현실 사용자 장치(200)의 외부에 있는 컨텐츠 제공 장치(300)를 포함하여 구성될 수 있다.
먼저, 본 발명의 일 실시예에 따른 통신망(100)은 기본적으로는 유선 통신이나 무선 통신과 같은 통신 양태를 가리지 않고 구성될 수 있지만, 주로 무선 통신을 위한 통신망일 수 있다. 이러한 무선 통신망은 TCP/IP에 기반한 공지의 무선 인터넷 통신을 위한 통신망일 수 있다. 이러한 무선 통신망은 그 적어도 일부는 블루투스 통신이나 적외선 통신에 관한 종래 기술에 의하여 구축될 수 있다.
다음으로, 본 발명의 일 실시예에 따른 가상 현실 사용자 장치(200)는 통신망(100)을 통하여 후술하는 바와 같은 컨텐츠 제공 장치(300)와 통신할 수 있고, 사용자에게 몰입감이 높은 환경을 제공하여 가상 현실을 경험하게끔 할 수 있는 장치일 수 있다. 이를 위하여, 가상 현실 사용자 장치(200)는, 예를 들면, 2.4 GHz 이상의 USB 동글이나 Direct AP(Access Point)를 구비할 수 있고, 또한, 사용자의 시선이 주변과 차단된 채로 사용자가 양안 디스플레이를 경험할 수 있도록 하는 헤드 마운트 디스플레이를 포함할 수 있다.
또한, 일 실시예에 따르면, 가상 현실 사용자 장치(200)는, 사용자가 대면하는 방향 등으로 배치되는 외부 카메라(미도시됨), 사용자의 시선을 검출하기 위한 내부 카메라(미도시됨), 가상 현실 사용자 장치(200)의 움직임이나 가속도를 측정하기 위한 자이로 센서(또는, 3축 가속도 센서), 가상 현실 사용자 장치(200)와 다른 외부 물체와의 충돌 위험을 감지하기 위한 거리 측정기(미도시됨) 등 중에서 적어도 일부를 포함할 수 있다. 이 외에도, 가상 현실 사용자 장치(200)는 사용자가 손으로 터치하거나 눌러서 행한 사용자 입력을 검출할 수 있는 터치 센서(미도시됨) 또는 압력 센서(미도시됨)를 더 포함할 수 있다.
이와 같은 가상 현실 사용자 장치(200)는 자체적으로 다수의 독립적인 기능을 수행하는 전용의 헤드 마운트 디스플레이 장치일 수도 있지만, 다른 용도도 갖는 사용자의 스마트 폰과 이것의 헤드 마운팅을 위한 부속 장치가 결합된 것일 수도 있다. 어느 경우에나, 가상 현실 사용자 장치(200)는 위와 같은 구성요소를 본 발명의 목적에 따라 하나 이상 구비하게 된다. 위와 같은 가상 현실 사용자 장치(200)는 앞에서 예시된 바와 같은 가상 현실의 실현을 위한 종래의 장치와 그 외양, 구조, 속성 등이 유사할 수 있다.
또한, 가상 현실 사용자 장치(200)는 후술하는 바와 같은 프로그램 모듈도 포함할 수 있다.
본 발명에 따른 가상 현실 사용자 장치(200)의 구성과 기능에 관하여는 아래에서 더 자세하게 알아보기로 한다.
다음으로, 본 발명의 일 실시예에 따른 컨텐츠 제공 장치(300)는 가상 현실 사용자 장치(200)와 접속한 후 통신할 수 있는 기능을 포함하는 디지털 기기로서, 데스크탑 컴퓨터, 노트북 컴퓨터, 워크스테이션, PDA, 웹 패드, 이동 전화기, 스마트 폰, 스마트 패드 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 컨텐츠 제공 장치(300)로서 채택될 수 있다.
특히, 컨텐츠 제공 장치(300)에는 사용자가 경험할 수 있는 컨텐츠(주로, 비디오 컨텐츠)가 저장되어 있을 수 있다. 이러한 컨텐츠는 컨텐츠 제공 장치(300)에 의하여 재생되고 있는 것일 수 있다. 따라서, 컨텐츠 제공 장치(300)에는 컨텐츠의 재생을 위한 브라우저(미도시됨) 프로그램이나 전용 애플리케이션 프로그램이 포함되어 있을 수 있다.
컨텐츠 제공 장치(300)에 의하여 재생되고 있는 컨텐츠는 가상 현실 사용자 장치(200)에 의하여 사용자가 실시간으로 이용할 수 있도록 제공될 수 있다(이에 관하여는 아래에서 더 설명하기로 한다).
일 실시예에 따르면, 컨텐츠 제공 장치(300)는 비교적 큰 용량의 비디오 컨텐츠를 빠르게 압축하기 위한 JPEG SIMD(Single Instruction Multiple Data) 압축 모듈을 포함할 수 있다. 이러한 압축 모듈은 대용량 비디오 컨텐츠의 병렬 압축과 병렬 전송(즉, 가상 현실 사용자 장치(200)로의 전송)을 위한 것일 수 있다. 바람직하게는, 상기한 바와 같은 압축은 컨텐츠가 컨텐츠 제공 장치(300)에서의 재생을 위하여 후술하는 바와 같은 버퍼에서 출력된 다음에 행하여질 수 있다. 물론 당업자의 선택에 따라 다른 방식의 압축을 위한 압축 모듈이 채용될 수도 있다.
다른 실시예에 따르면, 컨텐츠 제공 장치(300)는 가상 현실 사용자 장치(200) 상에서의 컨텐츠 제공(즉, 컨텐츠 재생)의 실시간성을 유지하기 위한 데이터 스킵을 위한 프로그램 모듈을 포함할 수 있다. 데이터 스킵은 다음과 같이 진행될 수 있다.
먼저, 컨텐츠 제공 장치(300)의 데이터 스킵 프로그램 모듈은 컨텐츠 제공 장치(300)에서 재생되고 있는 컨텐츠와 가상 현실 사용자 장치(200)에서 재생되고 있는 컨텐츠 사이의 딜레이에 관하여 간헐적으로 또는 주기적으로 판단할 수 있다. 이 경우에, 가상 현실 사용자 장치(200)에서 재생되고 있는 컨텐츠는 가상 현실 사용자 장치(200)가 컨텐츠 제공 장치(300)로부터 수신한 컨텐츠 압축 파일이 압축 해제된 것일 수 있다.
상기 딜레이가 사용자에 의하여 설정된 임계 딜레이 또는 디폴트로 설정된 임계 딜레이(예를 들면, 40 ms의 딜레이)를 초과하는 경우, 데이터 스킵 프로그램 모듈은 초과분에 비례하는 또는 사전에 정해진 만큼의 컨텐츠 데이터를 스킵할 수 있다. 이러한 데이터 스킵은 논리적으로는 컨텐츠 제공 장치(300)에서 컨텐츠 재생을 위하여 사용되는 버퍼 내의 일부 컨텐츠의 재생을 건너뛰는 것으로 나타날 수 있다.
구체적으로는, 위와 같은 데이터 스킵을 위하여, 컨텐츠 제공 장치(300)에서 재생되는 컨텐츠의 데이터는 그것이 재생 버퍼로 들어가기 전에 소정의 마커를 포함하게 될 수 있다. 이러한 마커는, 예를 들면, 재생되는 비디오 컨텐츠의 적어도 일부 프레임에 대하여 부여되는 간단한 임시 식별 번호일 수 있다. 따라서, 데이터 스킵 프로그램 모듈은 컨텐츠 제공 장치(300)의 재생 버퍼에서 컨텐츠 제공 장치(300) 상에서의 디스플레이를 위하여 출력되는 컨텐츠 데이터(즉, 압축 전의 컨텐츠 데이터)에 해당하는 임시 식별 번호 및 그 타임 스탬프와, 가상 현실 사용자 장치(200)에서 압축 해제된 컨텐츠 데이터에 해당하는 임시 식별 번호 및 그 타임 스탬프를 비교하여 상기한 바와 같은 딜레이에 관하여 판단할 수 있다.
한편, 컨텐츠 제공 장치(300)에서 재생되고 있는 컨텐츠가 최소한의 딜레이만을 나타내면서 가상 현실 사용자 장치(200)에서도 재생되도록 하기 위하여, 컨텐츠 제공 장치(300)의 컨텐츠의 데이터는 재생 버퍼에서 출력되자마자 그것이 채 디스플레이되기 전에 가상 현실 사용자 장치(200)로 전송될 수 있다.
전술한 바와 같은 압축 모듈이나 데이터 스킵 모듈은 일종의 프로그램 모듈일 수 있다. 이것의 속성은 후술하는 바와 같은 가상 현실 사용자 장치(200)의 프로그램 모듈의 속성과 유사할 수 있다.
가상 현실 사용자 장치의 구성
이하에서는, 본 발명에 따른 가상 현실 사용자 장치(200)의 내부 구성과 각 구성요소의 기능에 대하여 살펴보기로 한다.
도 2는 본 발명의 일 실시예에 따른 가상 현실 사용자 장치의 내부 구성을 상세하게 도시하는 도면이다.
본 발명의 일 실시예에 따른 가상 현실 사용자 장치(200)는 메모리 수단(임시적인 데이터 저장을 위한 버퍼를 포함함)을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기일 수 있다. 이러한 가상 현실 사용자 장치(200)는 전용 헤드 마운트 디스플레이 장치이거나 스마트 폰을 포함하는 장치일 수 있다. 도 2에 도시된 바와 같이, 가상 현실 사용자 장치(200)는 압축 해제부(210), 디스플레이 데이터 제공부(220), 사용자 입력 생성부(230), 통신부(240) 및 제어부(250)를 포함하여 구성될 수 있다. 본 발명의 일 실시예에 따르면, 압축 해제부(210), 디스플레이 데이터 제공부(220), 사용자 입력 생성부(230), 통신부(240) 및 제어부(250)는 그 중 적어도 일부가 컨텐츠 제공 장치(300)와 통신하는 프로그램 모듈일 수 있다.  이러한 프로그램 모듈은 운영 시스템, 응용 프로그램 모듈 또는 기타 프로그램 모듈의 형태로 가상 현실 사용자 장치(200)에 포함될 수 있고, 물리적으로는 여러 가지 공지의 기억 장치에 저장될 수 있다.  또한, 이러한 프로그램 모듈은 가상 현실 사용자 장치(200)와 통신 가능한 원격 기억 장치에 저장될 수도 있다.  한편, 이러한 프로그램 모듈은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.
먼저, 본 발명의 일 실시예에 따른 압축 해제부(210)는, 후술하는 바와 같은 통신부(240)에 의하여 컨텐츠 제공 장치(300)의 압축 모듈에서 병렬 압축된 컨텐츠 데이터가 수신되면, 이것을 받아서 병렬 처리 방식으로 압축 해제를 하는 기능을 수행할 수 있다. 여기서, 병렬 압축된 후 수신된 컨텐츠는 통신망(100)의 멀티 소켓에 의하여 통신부(240)로 병렬 전송된 것일 수 있다. 이와 같은 멀티 소켓 처리는 컨텐츠 제공 장치(300)와 가상 현실 사용자 장치(200)의 사이에서 최대한의 데이터 스루풋(throughput)을 달성할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 디스플레이 데이터 제공부(220)는 압축 해제부(210)에 의하여 압축 해제된 컨텐츠 데이터를 종래의 기술에 따라 양안 디스플레이를 위한 데이터로 변환하고, 이것을 가상 현실 사용자 장치(200)의 디스플레이를 위하여 제공할 수 있다. 디스플레이에 제공되는 이와 같은 데이터는, 사용자의 요청에 따라 또는 기타 필요에 따라, 소정의 컨텐츠 증강을 위한 데이터를 더 포함한 것일 수 있다.
다음으로, 본 발명의 일 실시예에 따른 사용자 입력 생성부(230)는 사용자가 가상 현실 사용자 장치(200)를 착용하고 움직임에 따라, 또는 사용자가 자신의 눈으로 가상 현실 사용자 장치(200)의 디스플레이의 특정 부분에 대하여 주목을 하여 시선을 형성함에 따라, 또는 사용자가 터치를 행함에 따라 수신되는 신호를 해석하여 소정의 의미 있는 사용자 입력을 생성하는 기능을 수행할 수 있다.
위와 같은 신호는 다양하게 해석될 수 있다. 예를 들면, 사용자가 움직이는 가속도나 방향에 따라 서로 다른 사용자 입력이 생성될 수 있다. 또한, 예를 들면, 사용자가 시선을 보내는 곳이나 그곳에 시선이 머무는 시간에 따라 서로 다른 사용자 입력이 생성될 수 있다. 또한, 예를 들면, 사용자가 행하는 터치의 장소나 터치의 시간, 또는 터치가 쓰다듬기(드래깅)일 때의 그 길이나 방향에 따라 서로 다른 사용자 입력이 생성될 수 있다. 사용자 입력의 종류는 사실상 제약 없이 무한히 다양하게 디자인될 수 있다.
생성된 사용자 입력은 사용자 입력 생성부(230) 및 후술하는 바와 같은 통신부(240)에 의하여 컨텐츠 제공 장치(300)로 전송될 수 있다. 이러한 입력은 전송되기 전에 그것이 대상으로 하는 컨텐츠의 하나의 씬(scene)이나 프레임, 또는 그러한 씬이나 프레임 상의 특정 픽셀이나 픽셀 그룹 또는 오브젝트에 관한 정보와 함께 논리적으로 결합된 채로 전송될 수 있다. 따라서, 컨텐츠 제공 장치(300)는 전송 받은 사용자 입력(즉, 가상 현실 사용자 장치(200)에서 생성된 사용자 입력)에 따라 미리 약속된 소정의 제어를 상기 대상에 대하여 할 수 있다. 이와 같은 약속에 관하여는 가상 현실 사용자 장치(200)의 사용자 입력 생성부(230)와 컨텐츠 제공 장치(300)가 미리 통신하여 사전에 정해 둘 수 있다.
도 2에서 별도로 도시하지는 않았지만, 가상 현실 사용자 장치(200)는 전술한 바와 같이 소정의 메모리 수단을 포함할 수 있다. 이러한 메모리 수단은 그 적어도 일부에 있어서 압축 해제부(210)와 연동하여 압축 해제된 컨텐츠 데이터를 버퍼링할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 통신부(240)는 전술한 바와 같이 압축된 컨텐츠 데이터를 수신하거나 생성된 사용자 입력을 컨텐츠 제공 장치(300)로 전송하는 기능을 수행할 수 있다. 또한, 통신부(240)는 압축 해제부(210), 디스플레이 데이터 제공부(220) 및 사용자 입력 생성부(230)로부터의/로의 데이터 송수신이 가능하도록 하는 기능을 수행할 수 있다.
마지막으로, 본 발명의 일 실시예에 따른 제어부(250)는 압축 해제부(210), 디스플레이 데이터 제공부(220) 및 사용자 입력 생성부(230) 및 통신부(240) 간의 데이터의 흐름을 제어하는 기능을 수행할 수 있다. 즉, 본 발명에 따른 제어부(250)는 가상 현실 사용자 장치(200)의 외부로부터의/로의 데이터 흐름 또는 가상 현실 사용자 장치(200)의 각 구성요소 간의 데이터 흐름을 제어함으로써, 압축 해제부(210), 디스플레이 데이터 제공부(220), 사용자 입력 생성부(230) 및 통신부(240)에서 각각 고유 기능을 수행하도록 제어할 수 있다.
이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.
210: 압축 해제부
220: 디스플레이 데이터 제공부
230: 사용자 입력 생성부
240: 통신부
250: 제어부

Claims (7)

  1. 통신망 상에서 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법 - 상기 컨텐츠 제공 장치는 데이터 스킵 모듈과 압축 모듈을 포함하고, 상기 가상 현실 사용자 장치는 통신부, 압축 해제부 및 디스플레이 데이터 제공부를 포함함 - 으로서,
    상기 데이터 스킵 모듈에 의하여, 상기 컨텐츠 제공 장치에 의하여 재생되고 있는 컨텐츠의 데이터를 일부 스킵하는 단계,
    상기 압축 모듈에 의하여, 상기 일부 스킵된 컨텐츠 데이터를 병렬 압축하는 단계,
    상기 통신부에 의하여, 상기 병렬 압축된 컨텐츠 데이터를 수신하는 단계,
    상기 압축 해제부에 의하여, 상기 수신된 컨텐츠 데이터를 압축 해제하는 단계, 및
    상기 디스플레이 데이터 제공부에 의하여, 상기 압축 해제된 컨텐츠 데이터를 상기 가상 현실 사용자 장치의 디스플레이를 위하여 제공하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 컨텐츠 데이터 일부 스킵 단계는,
    상기 컨텐츠 데이터에 대하여 마커를 부여하는 단계,
    상기 마커에 기초하여, 상기 컨텐츠 데이터와 상기 압축 해제된 컨텐츠 데이터를 비교하는 단계, 및
    상기 비교에 따라, 소정의 임계 딜레이를 초과하는 딜레이가 있는 것으로 판단하는 단계
    를 포함하는 방법.
  3. 제1항에 있어서,
    상기 디스플레이는 상기 가상 현실 사용자 장치의 사용자의 양안에 대한 양안 디스플레이인 방법.
  4. 제1항에 있어서,
    상기 가상 현실 사용자 장치는 사용자 입력 생성부를 더 포함하고,
    상기 방법은, 상기 사용자 입력 생성부에 의하여, 소정의 사용자 입력을 생성하고, 상기 생성된 사용자 입력을 상기 통신부를 통하여 상기 컨텐츠 제공 장치로 전송하는 단계를 더 포함하는
    방법.
  5. 제4항에 있어서,
    상기 컨텐츠 제공 장치는 상기 전송 받은 사용자 입력에 따라 그것에서 재생되고 있는 컨텐츠에 관한 특정 대상을 제어하는 단계를 더 포함하는 방법.
  6. 통신망 상에서 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 시스템으로서,
    상기 컨텐츠 제공 장치는 데이터 스킵 모듈과 압축 모듈을 포함하고,
    상기 가상 현실 사용자 장치는 통신부, 압축 해제부 및 디스플레이 데이터 제공부를 포함하며,
    상기 데이터 스킵 모듈은, 상기 컨텐츠 제공 장치에 의하여 재생되고 있는 컨텐츠의 데이터를 일부 스킵하고,
    상기 압축 모듈은, 상기 일부 스킵된 컨텐츠 데이터를 병렬 압축하며,
    상기 통신부는, 상기 병렬 압축된 컨텐츠 데이터를 수신하고,
    상기 압축 해제부는, 상기 수신된 컨텐츠 데이터를 압축 해제하며,
    상기 디스플레이 데이터 제공부는, 상기 압축 해제된 컨텐츠 데이터를 상기 가상 현실 사용자 장치의 디스플레이를 위하여 제공하는
    시스템.
  7. 제1항 내지 제5항 중 어느 한 항에 따른 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체.
KR1020160136014A 2016-10-19 2016-10-19 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 KR20180043112A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160136014A KR20180043112A (ko) 2016-10-19 2016-10-19 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160136014A KR20180043112A (ko) 2016-10-19 2016-10-19 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Publications (1)

Publication Number Publication Date
KR20180043112A true KR20180043112A (ko) 2018-04-27

Family

ID=62081504

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160136014A KR20180043112A (ko) 2016-10-19 2016-10-19 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Country Status (1)

Country Link
KR (1) KR20180043112A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110163989A (zh) * 2019-04-18 2019-08-23 惠州德赛信息科技有限公司 一种增强现实工业互联网产线巡检方法及系统
KR102313663B1 (ko) * 2020-12-24 2021-10-19 안형철 Vr명상시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050016806A (ko) * 2003-08-04 2005-02-21 윤경화 이동통신 단말기용 헤드마운트 디스플레이
KR20090030779A (ko) * 2007-09-21 2009-03-25 주식회사 케이티 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법
KR20090040106A (ko) * 2007-10-19 2009-04-23 주식회사 다음커뮤니케이션 실시간 개인 방송 방법
KR20130008522A (ko) * 2010-02-12 2013-01-22 톰슨 라이센싱 동기화된 컨텐츠 재생 방법
KR20160053391A (ko) * 2014-11-04 2016-05-13 넥시스 주식회사 글라스형 웨어러블 디바이스를 이용한 외부디바이스 내 콘텐츠 관리 시스템, 방법 및 글라스형 웨어러블 디바이스용 어플리케이션

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050016806A (ko) * 2003-08-04 2005-02-21 윤경화 이동통신 단말기용 헤드마운트 디스플레이
KR20090030779A (ko) * 2007-09-21 2009-03-25 주식회사 케이티 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법
KR20090040106A (ko) * 2007-10-19 2009-04-23 주식회사 다음커뮤니케이션 실시간 개인 방송 방법
KR20130008522A (ko) * 2010-02-12 2013-01-22 톰슨 라이센싱 동기화된 컨텐츠 재생 방법
KR20160053391A (ko) * 2014-11-04 2016-05-13 넥시스 주식회사 글라스형 웨어러블 디바이스를 이용한 외부디바이스 내 콘텐츠 관리 시스템, 방법 및 글라스형 웨어러블 디바이스용 어플리케이션

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110163989A (zh) * 2019-04-18 2019-08-23 惠州德赛信息科技有限公司 一种增强现实工业互联网产线巡检方法及系统
KR102313663B1 (ko) * 2020-12-24 2021-10-19 안형철 Vr명상시스템

Similar Documents

Publication Publication Date Title
US9264478B2 (en) Home cloud with virtualized input and output roaming over network
WO2018219120A1 (zh) 图像显示方法、图像处理方法、装置、终端及服务器
CN112995759A (zh) 互动业务处理方法、系统、装置、设备及存储介质
WO2018076939A1 (zh) 视频文件的处理方法和装置
US11310560B2 (en) Bitstream merger and extractor
CN112328941A (zh) 基于浏览器的应用投屏方法及相关装置
CN105874807B (zh) 用于在电视设备上对Web内容远程渲染的方法、系统和介质
CN113079216A (zh) 一种云应用的实现方法、装置、电子设备及可读存储介质
CN112969093A (zh) 互动业务处理方法、装置、设备及存储介质
US20220172440A1 (en) Extended field of view generation for split-rendering for virtual reality streaming
KR20180043112A (ko) 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
WO2016016607A1 (en) Managing display data for display
KR20200028069A (ko) 타일 영상의 영상 처리 방법 및 장치
KR102232899B1 (ko) 클라우드 스트리밍 서비스 시스템, 이미지 타입에 따른 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
JP6395971B1 (ja) グラフィカルコマンドトークンの修正
US20180160133A1 (en) Realtime recording of gestures and/or voice to modify animations
KR20210110097A (ko) 영상 스트리밍 방법 및 이를 지원하는 전자 장치
KR20160115566A (ko) 클라우드 스트리밍 서비스 시스템, 이미지와 텍스트의 분리를 통한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
KR102247887B1 (ko) 클라우드 스트리밍 서비스 시스템, 소스 정보를 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
CN117406654B (zh) 音效处理方法和电子设备
KR102114466B1 (ko) 영상 컨텐츠 내 관심 영역 정보를 이용한 영상 디스플레이 방법 및 장치
Moravapalle et al. Peek: A mobile-to-mobile remote computing protocol for smartphones and tablets
WO2015012296A1 (ja) 送信側コンピュータ、受信側コンピュータ、及びそれらにより実行される方法、並びにコンピュータプログラム
KR102247657B1 (ko) 클라우드 스트리밍 서비스 시스템, 인코딩 처리 유닛의 작업 분리를 통한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
Sereethavekul et al. The design of a wristband screen application for interface with android systems

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application