KR102090009B1 - 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램 - Google Patents

3차원 영상 콘텐츠를 제공하는 방법 및 프로그램 Download PDF

Info

Publication number
KR102090009B1
KR102090009B1 KR1020180092008A KR20180092008A KR102090009B1 KR 102090009 B1 KR102090009 B1 KR 102090009B1 KR 1020180092008 A KR1020180092008 A KR 1020180092008A KR 20180092008 A KR20180092008 A KR 20180092008A KR 102090009 B1 KR102090009 B1 KR 102090009B1
Authority
KR
South Korea
Prior art keywords
image data
client
layer
overlay
metadata
Prior art date
Application number
KR1020180092008A
Other languages
English (en)
Other versions
KR20200016657A (ko
Inventor
김태욱
이하람
정덕영
Original Assignee
클릭트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 클릭트 주식회사 filed Critical 클릭트 주식회사
Priority to KR1020180092008A priority Critical patent/KR102090009B1/ko
Priority to PCT/KR2019/009142 priority patent/WO2020032434A1/ko
Priority to TW108127955A priority patent/TW202008312A/zh
Publication of KR20200016657A publication Critical patent/KR20200016657A/ko
Application granted granted Critical
Publication of KR102090009B1 publication Critical patent/KR102090009B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

3차원 영상 콘텐츠를 제공하는 방법이 제공된다. 상기 방법은 서버가 3차원 영상데이터를 복수의 오버레이 항목으로 분할하는 단계, 상기 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당하여 상기 복수의 레이어 각각에 대한 레이어데이터를 생성하는 단계, 및 상기 각 레이어데이터를 각각의 채널을 통해 클라이언트로 전송하는 단계를 포함한다.

Description

3차원 영상 콘텐츠를 제공하는 방법 및 프로그램{METHOD AND PROGRAM FOR PROVIDING 3D IMAGE CONTENT}
본 발명은 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램에 관한 것이다.
가상현실(Virtual Reality; VR), 증강현실(Augmented Reality; AR), 혼합현실(Mixed Reality; MR) 등과 같은 3차원 공간상에서 영상을 이용한 다양한 서비스를 제공할 수 있는 콘텐츠가 증가하고 있다.
이러한 가상현실, 증강현실, 혼합현실 등과 같은 콘텐츠는 일반적으로 컴퓨터가 만들어낸 실세계와 유사한 3차원 가상세계를 사용자에게 제공하고, 그 가상세계와 실시간으로 자유롭게 조작할 수 있는 입력수단과 사용자의 조작에 대응하여 실제적인 감각을 제공하는 감각궤환(Sensory feedback) 수단을 제공하므로써 인공적인 체험과 경험을 할 수 있도록 해주는 기술이라 할 수 있다.
한편, 최근에는 이동단말기를 3차원 영상 콘텐츠를 제공하는 장치(예컨대, VR장치)에 결합하고, 이동단말기가 VR 영상을 생성하기 위한 정보처리를 수행한 후 VR장치로 전달하는 방식이 등장하고 있다. 이는 정보처리를 수행하는 컴퓨터인 이동단말기와 재생하는 VR장치가 유선으로 연결되지만, 이동단말기가 VR장치에 결합될 수 있어서 케이블에 의해 발생하는 문제점은 해결될 수 있다. 그러나 이동단말기는 PC에 비해 고사양의 프로그램을 구동하기 어려워서, 고사양의 VR게임을 구동하거나 높은 해상도의 VR영상을 재생하기 어려운 문제가 있다. 또한, 이동단말기를 VR장치에 결합하는 방식뿐만 아니라, 일체형(standarlone) VR장치에서도 PC에 비해서 고사양 및 높은 해상도의 VR 프로그램을 구동하기 어려운 문제점이 있다.
본 발명이 해결하고자 하는 과제는 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램을 제공하는 것이다.
본 발명이 해결하고자 하는 과제들은 이상에서 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 서버가 3차원 영상 콘텐츠를 제공하는 방법은, 3차원 영상데이터를 복수의 오버레이 항목으로 분할하는 단계, 상기 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당하여 상기 복수의 레이어 각각에 대한 레이어데이터를 생성하는 단계, 및 상기 각 레이어데이터를 각각의 채널을 통해 클라이언트로 전송하는 단계를 포함한다.
본 발명의 일 실시예에 있어서, 상기 복수의 오버레이 항목으로 분할하는 단계는, 상기 3차원 영상데이터에 포함된 적어도 하나의 오브젝트의 특성에 기초하여 상기 적어도 하나의 오브젝트를 상기 복수의 오버레이 항목으로 분할할 수 있다.
본 발명의 일 실시예에 있어서, 상기 복수의 레이어 각각에 대한 레이어데이터를 생성하는 단계는, 상기 복수의 오버레이 항목 각각에 대한 메타데이터를 구성하는 단계 및 상기 각 메타데이터를 포함하여 상기 각 레이어데이터를 생성하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 있어서, 상기 메타데이터는, 상기 복수의 오버레이 항목 각각에 대한 위치 정보를 포함하며, 상기 위치 정보는, 상기 복수의 오버레이 항목 각각이 상기 클라이언트의 화면상에 표시되어야 하는 위치 정보일 수 있다.
본 발명의 일 실시예에 있어서, 상기 메타데이터는, 상기 복수의 오버레이 항목 각각에 포함된 적어도 하나의 오브젝트의 특성에 따라 추가 정보를 더 포함하되, 상기 추가 정보는, 제어 오브젝트를 표시하기 위한 법선 벡터, 압축 방식, 보정 여부, 상기 3차원 영상데이터의 방향 정보, 3차원 오브젝트를 표현하기 위한 정보, 및 동적으로 합성이 필요한 특정 오브젝트에 대한 정보 중 적어도 하나를 포함할 수 있다.
본 발명의 일 실시예에 따른 클라이언트가 3차원 영상 콘텐츠를 제공하는 방법은, 서버로부터 복수의 채널을 통해 복수의 레이어데이터를 수신하는 단계, 상기 복수의 레이어데이터 각각을 복수의 레이어 각각에 할당하는 단계, 및 상기 복수의 레이어를 합성하여 3차원 영상데이터를 생성하는 단계를 포함한다.
본 발명의 일 실시예에 있어서, 상기 복수의 레이어 각각에 할당하는 단계는, 상기 복수의 레이어데이터 각각에 포함된 복수의 오버레이 항목 각각을 상기 복수의 레이어 각각에 할당할 수 있다.
본 발명의 일 실시예에 있어서, 상기 3차원 영상데이터를 생성하는 단계는, 상기 복수의 레이어데이터로부터 메타데이터를 추출하는 단계, 및 상기 메타데이터에 기초하여 상기 복수의 오버레이 항목 각각을 상기 클라이언트의 화면상에 표시되어야 하는 위치에 할당하여 상기 복수의 레이어를 합성하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 있어서, 상기 3차원 영상데이터를 생성하는 단계는, 상기 메타데이터가 상기 복수의 오버레이 항목 각각에 포함된 적어도 하나의 오브젝트의 특성에 따라 추가 정보를 더 포함하는 경우, 상기 메타데이터에 포함된 추가 정보에 기초하여 해당 오버레이 항목을 처리하는 단계를 더 포함할 수 있다.
본 발명의 일 실시예에 있어서, 상기 클라이언트가 상기 3차원 영상데이터에 포함된 적어도 하나의 오브젝트를 생성하는 경우, 상기 적어도 하나의 오브젝트를 생성하여 별도의 레이어에 할당하는 단계, 및 상기 별도의 레이어를 상기 복수의 레이어와 합성하여 상기 3차원 영상데이터를 최종적으로 생성하는 단계를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 컴퓨터프로그램은 하드웨어인 컴퓨터와 결합되어, 상기 서버 및 클라이언트에서 수행되는 3차원 영상 콘텐츠를 제공하는 방법을 실행시키기 위하여 컴퓨터 판독 가능한 기록매체에 저장된다.
본 발명의 실시예에 따르면, 3차원 영상데이터를 구성하는 오브젝트들을 특성에 따라 다수의 오버레이 항목으로 분할하여 각각의 채널을 통해 개별적으로 전송할 수 있으므로, 3차원 영상데이터를 구성하는 모든 레이어 혹은 모든 데이터를 한번에 모두 전송할 필요가 없다. 이에 따라 네트워크 부하를 감소시키고 또한 영상 딜레이를 감소시킬 수 있으므로 사용자에게 보다 고품질의 3차원 영상 콘텐츠를 제공할 수 있다.
본 발명의 실시예에 따르면, 3차원 영상데이터를 생성함에 있어서 다양한 메타데이터를 제공할 수 있기 때문에, 각 오버레이 항목에 적합한 레이어를 구성하기 용이하고 각 레이어별로 다양한 방식으로 데이터를 처리할 수 있다.
본 발명의 실시예에 따르면, 3차원 영상데이터를 오브젝트들의 특성에 따라 복수의 레이어로 분리하여 처리하기 때문에, 보정이 필요하거나 즉각적으로 반응이 필요한 레이어만 추출하여 해당 작업을 수행할 수 있어서 전체 영상에 대해 처리할 필요가 없다. 따라서, 서버에 비해 성능이 낮은 클라이언트에서도 효과적으로 3차원 영상데이터를 처리할 수 있다.
본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 3차원 영상 콘텐츠를 송수신하기 위한 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 서버(100)가 3차원 영상 콘텐츠를 제공하는 방법을 설명하기 위한 순서도이다.
도 3은 본 발명의 일 실시예에 따라 3차원 영상데이터를 복수의 오버레이 항목으로 분할하여 각각 대응하는 레이어에 할당한 예시를 나타낸 도면이다.
도 4는 본 발명의 일 실시예에 따라 제1 레이어에 할당한 제1 오버레이 항목이 클라이언트(200) 화면상에 표시되는 예시를 나타낸 도면이다.
도 5는 본 발명의 일 실시예에 따른 클라이언트(200)가 3차원 영상 콘텐츠를 제공하는 방법을 설명하기 위한 순서도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 3차원 영상 콘텐츠를 송수신하기 위한 시스템의 구성도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 3차원 영상 콘텐츠 송수신 시스템은 서버(100) 및 클라이언트(200)를 포함할 수 있다.
서버(100)는 3차원 영상 콘텐츠를 생성하는 컴퓨터 장치일 수 있다. 3차원 영상 콘텐츠는 3차원 공간상에서 영상을 이용한 다양한 서비스를 제공할 수 있는 콘텐츠일 수 있으며, 예를 들어 가상현실(Virtual Reality; VR), 증강현실(Augmented Reality; AR), 혼합현실(Mixed Reality; MR) 등의 콘텐츠일 수 있다.
서버(100)는 내부에서 정보처리를 수행하여 클라이언트(200)에게 제공할 3차원 영상 콘텐츠를 생성하는 기능을 수행한다. 예를 들어, 3차원 영상 콘텐츠가 특정한 게임 구동에 따른 VR 영상인 경우, 서버(100)는 게임프로그램을 구동하여 적절한 영상데이터를 생성하여 무선통신을 통해 클라이언트(200)로 전송할 수 있다.
서버(100)는 3차원 영상 콘텐츠에 해당하는 영상데이터(이하, 3차원 영상데이터)를 생성하여 이를 복수의 오버레이 항목으로 분할하고, 분할된 각 오버레이 항목을 각 레이어에 할당하여 각 레이어에 대한 레이어데이터를 생성할 수 있다. 또한 서버(100)는 각 레이어에 대한 레이어데이터를 유선 또는 무선통신을 이용하여 각각의 채널을 통해 클라이언트(200)로 전송할 수 있다. 이에 대한 구체적인 동작 과정은 후술하도록 한다.
클라이언트(200)는 3차원 영상 콘텐츠에 해당하는 영상데이터를 수신하여 재생하는 장치일 수 있다. 즉, 클라이언트(200)는 서버(100)로부터 수신한 3차원 영상데이터를 재생하여 사용자에게 제공하는 기능을 수행한다. 예를 들어, 클라이언트(200)는 3차원 영상 콘텐츠를 재생하는 장치로, 예컨대 VR 장치, AR 장치, MR 장치 자체일 수도 있고, 이러한 장치에 이동단말기가 결합된 형태일 수도 있다. 일례로, VR 장치와 이동단말기가 결합되어 클라이언트(200)를 구성하는 경우, 이동단말기가 서버(100)로부터 생성된 3차원 영상데이터를 수신하고, 이를 연결된 유선케이블 또는 근거리 무선통신을 통해 VR 장치로 전달하여 화면에 표시할 수 있다.
클라이언트(200)는 다양한 형태로 구성되어 3차원 영상데이터를 재생하여 화면에 표시할 수 있다. 일례로, 클라이언트(200)는 양안에 적합한 각각의 영상을 포함한 영상데이터를 하나의 디스플레이부에 표시하고, 각 안구방향의 어안렌즈에 의해 3차원 영상으로 생성할 수 있다. 다른 예로, 클라이언트(200)는 각각의 안구에 부합하는 영상을 제공하는 2개의 디스플레이부를 구비할 수도 있다.
클라이언트(200)는 서버(100)로부터 복수의 채널을 통해 복수의 레이어데이터를 수신하고, 수신한 각 레이어데이터를 각 레이어에 할당한다. 그리고 클라이언트(200)는 각 레이어를 합성하여 3차원 영상데이터를 생성할 수 있다. 이에 대한 구체적인 동작 과정은 후술하도록 한다.
서버(100)와 클라이언트(200)는 유선 또는 무선통신을 통해 연결될 수 있다. 여기서, 무선통신방식으로는 Wi-Fi 방식, 셀룰러통신 등이 활용될 수 있다. 예를 들어, 서버(100)가 사용자가 위치한 특정한 공간 내(예: 집 내부, 가상현실 체험공간 등)에 배치된 컴퓨터인 경우, 무선 AP(예: Wi-Fi AP)를 통해 클라이언트(200)와 서버(100) 사이의 통신이 수행될 수 있다. 또한, 서버(100)가 외부의 원거리에 배치된 컴퓨터인 경우, 원거리의 서버(100)가 셀룰러 통신 또는 LAN 통신 등을 통해 클라이언트(200)로 3차원 영상데이터를 전송할 수 있다. 클라이언트(200)는 셀룰러통신을 통해 기지국으로부터 3차원 영상데이터를 수신하거나 무선 AP로부터 WLAN을 통해 3차원 영상데이터를 수신할 수 있다. 이를 통해, 사용자는 무선통신이 가능한 클라이언트(200)를 소지하고 있으면, 서버(100)와 가까운 위치에 있지 않아도 서버(100)로부터 제공되는 3차원 영상데이터를 수신하여 이용할 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 서버(100) 및 클라이언트(200)에서 3차원 영상 콘텐츠를 제공하는 방법에 대해 설명하도록 한다.
한편, 본 발명의 실시예에 따른 3차원 영상 콘텐츠에 해당하는 영상데이터, 즉 3차원 영상데이터는 복수의 레이어들로 구성되어 디스플레이 화면상에 표시될 수 있다. 이때, 각 레이어들은 논리적으로 특정한 기능에 따라 구성되어 수직적으로 겹쳐져(overlay) 표시될 수 있다.
도 2는 본 발명의 일 실시예에 따른 서버(100)가 3차원 영상 콘텐츠를 제공하는 방법을 설명하기 위한 순서도이다.
도 2를 참조하면, 서버(100)는 3차원 영상데이터를 복수의 오버레이 항목으로 분할할 수 있다(S100).
일 실시예에 있어서, 서버(100)는 3차원 영상데이터에 포함된 적어도 하나의 오브젝트의 특성에 기초하여 3차원 영상데이터를 복수의 오버레이 항목으로 분할할 수 있다.
복수의 오버레이 항목은 각각 3차원 영상데이터에서 논리적으로 특정한 기능을 가지는 오브젝트들로 구성될 수 있다. 예를 들어, 서버(100)는 3차원 영상데이터에서 정적으로 표시되는 오브젝트(예: 배경 이미지)를 추출하여 제1 오버레이 항목으로 설정하고, 동적으로 표시되는 오브젝트(예: 움직임이 발생하는 이미지)를 추출하여 제2 오버레이 항목으로 설정할 수 있다. 또는 서버(100)는 그래픽이나 텍스트 기반의 정보를 표시하는 오브젝트(예: 사용자 인터페이스)를 추출하여 제3 오버레이 항목으로 설정하고, 제어 정보를 표시하는 오브젝트(예: 컨트롤러의 동작에 따라 표시되는 십자선, 포인터)를 추출하여 제4 오버레이 항목으로 설정할 수도 있다. 또는 서버(100)는 3차원 영상데이터에서 동적으로 정보를 획득하여 특정 영역상에 반영하여 표시하는 특정 오브젝트(예: 광고를 표시하기 위한 광고판 등)를 추출하여 제5 오버레이 항목으로 설정하고, 3차원 이미지로 표시되는 오브젝트를 추출하여 제6 오버레이 항목으로 설정할 수 있다.
서버(100)는 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당하고, 복수의 레이어 각각에 대한 레이어데이터를 생성할 수 있다(S110).
즉, 서버(100)는 3차원 영상데이터에 포함된 오브젝트들의 특성에 따라 분할된 제1 내지 제n 오버레이 항목을 각각 이와 대응하는 제1 내지 제n 레이어에 할당하고, 제1 내지 제n 레이어 각각에 대한 레이어데이터를 생성할 수 있다. 예컨대, 3차원 영상데이터에서 정적으로 표시되는 오브젝트를 포함하는 제1 오버레이 항목은 제1 레이어에 할당되어 제1 레이어데이터로 구성될 수 있다. 도 3은 본 발명의 일 실시예에 따라 3차원 영상데이터를 복수의 오버레이 항목으로 분할하여 각각 대응하는 레이어에 할당한 예시를 나타낸 도면이다.
일 실시예로, 서버(100)는 복수의 오버레이 항목 각각에 대한 메타데이터를 구성하고, 각 메타데이터를 포함하여 각 레이어데이터를 생성할 수 있다. 즉, 서버(100)는 제1 내지 제n 오버레이 항목에 포함된 각 오브젝트들의 특성에 따라 클라이언트(200) 측에서 재생하기 위해 필요한 정보를 메타데이터로 구성하여 레이어데이터에 포함할 수 있다.
예를 들어, 메타데이터는 복수의 오버레이 항목 각각에 대한 위치 정보를 포함할 수 있으며, 여기서 위치 정보는 복수의 오버레이 항목 각각이 클라이언트(200)의 화면상에 표시되어야 하는 위치 정보일 수 있다.
도 4는 본 발명의 일 실시예에 따라 제1 레이어에 할당한 제1 오버레이 항목이 클라이언트(200) 화면상에 표시되는 예시를 나타낸 도면이다.
도 4를 참조하면, 서버(100)는 제1 레이어에 제1 오버레이 항목을 할당할 수 있으며, 이때 제1 오버레이 항목은 3차원 영상데이터에서 특정한 기능을 가지는 적어도 하나의 오브젝트들을 포함할 수 있다. 예를 들어, 제1 오버레이 항목이 사용자 인터페이스에 해당하는 오브젝트들(예: 1-1, 1-2, 1-3, 1-4 오브젝트)을 포함하는 경우, 각 오브젝트들(예: 1-1, 1-2, 1-3, 1-4 오브젝트)은 동일한 레이어에 할당되어 클라이언트(200)로 전송될 수 있다. 이때, 각 오브젝트(예: 1-1, 1-2, 1-3, 1-4 오브젝트)는 클라이언트(200) 화면상에서 특정 위치에 표시될 수 있는데, 이와 같은 경우 서버(100)는 각 오브젝트(예: 1-1, 1-2, 1-3, 1-4 오브젝트)가 클라이언트(200) 화면상에서 표시되어야할 위치 정보를 해당 오버레이 항목(즉, 해당 레이어)에 대한 메타데이터로 구성할 수 있다. 위치 정보는 좌표 정보로 표시될 수 있으며, 예컨대 클라이언트(200) 화면상에 위치할 (x, y) 좌표로 표시될 수 있다. 또한 각 오브젝트가 깊이에 대한 정보를 가지고 있으면 z-order 정보를 더 포함할 수도 있다.
또한, 메타데이터는 상술한 위치 정보 이외에도 복수의 오버레이 항목에 포함된 적어도 하나의 오브젝트 특성에 따라 추가 정보를 더 포함할 수 있다. 추가 정보로는, 제어 정보를 포함하는 제어 오브젝트를 표시하기 위한 법선 벡터 정보, 3차원 이미지를 포함하는 오브젝트를 표현하기 위한 정보, 각 오버레이 항목(즉, 각 레이어)에 대한 압축 방식, 보정 방식, 3차원 영상데이터의 방향 정보, 동적으로 합성이 필요한 특정 오브젝트를 표현하기 위한 정보 등을 포함할 수 있다.
예를 들어, 제1 오버레이 항목에 제어 정보를 포함하는 제어 오브젝트를 포함하는 경우, 서버(100)는 제1 오버레이 항목을 제1 레이어에 할당하고, 클라이언트(200) 화면상에서 제어 오브젝트를 표시하기 위한 법선 벡터 정보를 포함하는 메타데이터를 구성하여 제1 레이어에 대한 레이어데이터를 생성할 수 있다. 일 실시예로, 서버(100)는 클라이언트(200)로부터 제어 오브젝트를 제어하는 컨트롤러의 동작 정보(컨트롤러의 위치 정보 및 컨트롤러가 가리키는 방향을 포함)를 수신하고, 수신한 동작 정보를 기초로 제어 오브젝트가 지시하는 3차원 영상데이터 내 특정 지점과 상기 특정 지점에 존재하는 오브젝트에 대한 법선 벡터를 결정할 수 있다. 이후, 서버(100)는 결정된 특정 지점 및 법선 벡터 정보를 메타데이터로 구성할 수 있다.
다른 예로, 제2 오버레이 항목에 3차원 이미지를 포함하는 오브젝트를 포함하는 경우, 서버(100)는 제2 오버레이 항목을 제2 레이어에 할당하고, 클라이언트(200) 화면상에서 3차원 이미지를 표시하기 위한 정보, 예컨대 해당 오브젝트의 입체감을 향상시키기 위한 텍스처 정보, 폴리건 메쉬 정보 등을 메타데이터로 구성하여 제2 레이어에 대한 레이어데이터를 생성할 수 있다.
또 다른 예로, 제3 오버레이 항목에 동적으로 합성이 필요한 특정 오브젝트를 포함하는 경우, 서버(100)는 제3 오버레이 항목을 제3 레이어에 할당하고, 클라이언트(200) 화면상에서 특정 오브젝트를 표시하기 위한 정보를 메타데이터로 구성하여 제3 레이어에 대한 레이어데이터를 생성할 수 있다. 일 실시예로, 3차원 영상데이터에서 동적으로 정보를 획득하여 특정 영역상에 반영하여 표시해야 하는 오브젝트를 포함하고 있는 경우로서, 예컨대 3차원 영상데이터에서 광고를 표시하는 광고판과 같은 오브젝트를 포함하는 경우에 해당할 수 있다. 이와 같은 광고판 오브젝트는 서버(100)에서 미리 광고 정보를 포함시켜 레이어데이터를 생성할 수도 있으나, 클라이언트(200)에서 3차원 영상데이터를 수신하여 재생시킬 때에 실시간으로 광고 서버와 같은 외부 장치에서 별도의 정보를 수신하여 동적으로 해당 오브젝트를 합성시킬 수도 있다. 따라서, 서버(100)는 광고판과 같은 오브젝트를 포함하는 오버레이 항목에 대해서 해당 오브젝트가 위치할 위치 정보, 해당 오브젝트의 법선 벡터, 외부 장치에 관한 정보 등을 추가적으로 생성하여 메타데이터로 구성할 수 있다.
또 다른 예로, 서버(100)는 복수의 오버레이 항목에 대해 서로 다른 압축 방식을 설정할 수 있으며, 이 경우 서버(100)는 각 오버레이 항목에 설정된 압축 방식을 메타데이터로 구성하여 각 레이어데이터를 생성할 수 있다. 예컨대 서버(100)는 3차원 영상데이터에서 정적으로 표시되는 배경 오브젝트와 동적으로 표시되는 동적 오브젝트를 분할하여 각 오버레이 항목으로 설정하고, 이를 각 레이어에 할당한 후 서로 다른 압축 방식으로 압축할 수 있다. 이후, 각 레이어에 대해 수행된 압축 방식을 메타데이터로 구성하여 각 레이어에 대한 레이어데이터를 생성할 수 있다.
또 다른 예로, 서버(100)는 복수의 오버레이 항목에 대해 서로 다른 보정 방식을 설정할 수 있으며, 이 경우 서버(100)는 각 오버레이 항목에 설정된 보정 방식을 메타데이터로 구성하여 각 레이어데이터를 생성할 수 있다. 예컨대 서버(100)는 3차원 영상데이터에서 배경 오브젝트와 같이 지연 보정이 필요한 오버레이 항목과 사용자의 움직임에 즉각적으로 반응하여야 하는 오버레이 항목을 구분하여 각 레이어에 할당하고, 각 레이어에 지연 보정이 필요한지 여부와, 보정 시에 필요한 정보를 포함하여 메타데이터를 구성할 수 있다.
서버(100)는 각 레이어에 대한 레이어데이터를 각각의 채널을 통해 클라이언트(200)로 전송할 수 있다(S120).
상술한 바와 같이, 서버(100)는 유선 또는 무선통신을 통해 클라이언트(200)로 레이어데이터를 전송할 수 있다. 예컨대, 서버(100)는 유선 또는 무선통신을 통해 제1 채널로 제1 레이어데이터를 전송하고, 제2 채널로 제2 레이어데이터를 전송할 수 있다.
도 5는 본 발명의 일 실시예에 따른 클라이언트(200)가 3차원 영상 콘텐츠를 제공하는 방법을 설명하기 위한 순서도이다.
도 5를 참조하면, 클라이언트(200)는 서버(100)로부터 복수의 채널을 통해 복수의 레이어데이터를 수신할 수 있다(S200).
일 실시예로, 클라이언트(200)는 유선 또는 무선통신을 통해 서버(100)로부터 복수의 레이어데이터를 수신하되, 제1 채널을 통해 제1 레이어데이터를 수신하고 제2 채널을 통해 제2 레이어데이터를 수신할 수 있다.
클라이언트(200)는 복수의 레이어데이터 각각을 복수의 레이어 각각에 할당할 수 있다(S210).
즉, 클라이언트(200)는 복수의 레이어데이터 각각에 포함된 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당할 수 있다. 예를 들어, 제1 레이어데이터는 제1 레이어에 할당할 수 있으며, 이때 제1 레이어에는 특정한 기능(즉, 동일하거나 유사한 특성)을 가지는 적어도 하나의 오브젝트들을 포함하는 제1 오버레이 항목이 할당된다.
클라이언트(200)는 복수의 레이어를 합성하여 3차원 영상데이터를 생성할 수 있다(S220).
일 실시예로, 클라이언트(200)는 복수의 레이어데이터로부터 메타데이터를 추출하고, 추출한 메타데이터에 기초하여 복수의 오버레이 항목 각각을 클라이언트(200) 화면상에 표시되어야 하는 위치에 할당한 다음 각 레이어를 합성할 수 있다.
상술한 바와 같이, 메타데이터는 복수의 오버레이 항목 각각에 대한 위치 정보를 포함할 수 있다. 예를 들어, 클라이언트(200)는 제1 오버레이 항목에 포함된 적어도 하나의 오브젝트에 대한 위치 정보를 메타데이터로부터 획득하고, 획득된 위치 정보를 기초로 제1 레이어 상에 적어도 하나의 오브젝트를 할당한 다음 이를 합성하여 3차원 영상데이터를 최종적으로 생성할 수 있다. 이에 대한 상세한 과정은 도 4를 참조하여 설명한바 있으므로, 본 실시예에서는 상세한 설명을 생략하도록 한다.
또한, 메타데이터는 위치 정보 이외에도 복수의 오버레이 항목에 포함된 적어도 하나의 오브젝트 특성에 따라 추가 정보를 더 포함할 수 있다. 예를 들어, 메타데이터는 제어 정보를 포함하는 제어 오브젝트를 표시하기 위한 법선 벡터 정보, 3차원 이미지를 포함하는 오브젝트를 표현하기 위한 정보, 각 오버레이 항목(즉, 각 레이어)에 대한 압축 방식, 보정 방식, 3차원 영상데이터의 방향 정보, 동적으로 합성이 필요한 특정 오브젝트를 표현하기 위한 정보 등을 포함할 수 있다. 즉, 클라이언트(200)는 각 레이어에 할당된 해당 오버레이 항목을 화면상에 표시하기 위해 필요한 정보(즉, 상술한 추가 정보)를 메타데이터로부터 획득할 수 있으며, 획득된 추가 정보를 바탕으로 각 레이어 상에 해당 오버레이 항목을 표시하여 각 레이어를 결합시킬 수 있다.
실시예에 따라, 클라이언트(200)가 3차원 영상데이터에 포함된 적어도 하나의 오브젝트를 생성할 수 있다. 예컨대 서버(100)로부터 레이어데이터(즉, 적어도 하나의 레이어에 대한 정보)를 수신하지 않고 클라이언트(200)가 자체적으로 레이어를 구성하는 경우에 해당할 수 있다.
이 경우, 클라이언트(200)는 적어도 하나의 오브젝트를 생성하여 별도의 레이어에 할당할 수 있고, 별도의 레이어를 서버(100)로부터 수신한 레이어 정보와 합성하여 최종적으로 3차원 영상데이터를 생성할 수 있다. 예를 들어, 사용자의 움직임에 따라 즉각적으로 반응을 해야할 필요가 있는 오브젝트를 포함하는 경우(예: 사용자가 컨트롤러를 통해 동작을 수행함에 따라 표시되는 제어 정보를 포함하는 제어 오브젝트), 클라이언트(200)는 컨트롤러의 제어 정보를 표시하는 별도의 레이어를 생성하고, 컨트롤러의 동작 정보에 기초하여 제어 오브젝트가 지시하는 3차원 영상데이터 내 특정 지점과 상기 특정 지점에 존재하는 오브젝트에 대한 법선 벡터를 결정하여 이를 별도의 레이어 상에 표시할 수 있다. 이후, 클라이언트(200)는 별도의 레이어와 서버(100)로부터 수신한 다른 레이어와 결합하여 최종적으로 3차원 영상데이터를 구성할 수 있다.
또한, 3차원 영상데이터 내의 특정 오브젝트에 한해서 위치가 변경되는 경우, 클라이언트(200)는 특정 오브젝트에 대해 변경된 위치 정보를 포함하는 해당 오버레이 항목만 서버(100)로부터 수신하여 3차원 영상데이터를 갱신할 수도 있다. 또한, 3차원 영상데이터 내의 특정 레이어에 한해서 보정이 필요한 경우, 클라이언트(200)는 보정이 필요한 특정 레이어에 대한 정보만 서버(100)로부터 수신하여 3차원 영상데이터를 갱신할 수도 있다.
상술한 바와 같은 본 발명의 실시예에 따르면, 3차원 영상데이터를 구성하는 오브젝트들을 특성에 따라 다수의 오버레이 항목으로 분할하여 각각의 채널을 통해 개별적으로 전송할 수 있으므로, 3차원 영상데이터를 구성하는 모든 레이어 혹은 모든 데이터를 한번에 모두 전송할 필요가 없다. 이에 따라 네트워크 부하를 감소시키고 또한 영상 딜레이를 감소시킬 수 있으므로 사용자에게 보다 고품질의 3차원 영상 콘텐츠를 제공할 수 있다.
또한 상술한 바와 같은 본 발명의 실시예에 따르면, 3차원 영상데이터를 생성함에 있어서 다양한 메타데이터를 제공할 수 있기 때문에, 각 오버레이 항목에 적합한 레이어를 구성하기 용이하고 각 레이어별로 다양한 방식으로 데이터를 처리할 수 있다.
또한 상술한 바와 같은 본 발명의 실시예에 따르면, 3차원 영상데이터를 오브젝트들의 특성에 따라 복수의 레이어로 분리하여 처리하기 때문에, 보정이 필요하거나 즉각적으로 반응이 필요한 레이어만 추출하여 해당 작업을 수행할 수 있어서 전체 영상에 대해 처리할 필요가 없다. 따라서, 서버에 비해 성능이 낮은 클라이언트에서도 효과적으로 3차원 영상데이터를 처리할 수 있다.
본 발명의 실시예와 관련하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로 직접 구현되거나, 하드웨어에 의해 실행되는 소프트웨어 모듈로 구현되거나, 또는 이들의 결합에 의해 구현될 수 있다. 소프트웨어 모듈은 RAM(Random Access Memory), ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리(Flash Memory), 하드 디스크, 착탈형 디스크, CD-ROM, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터 판독가능 기록매체에 상주할 수도 있다.
이상, 첨부된 도면을 참조로 하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다.

Claims (11)

  1. 서버가 3차원 영상 콘텐츠를 제공하는 방법에 있어서,
    3차원 영상데이터에서 논리적으로 특정한 기능을 가지는 적어도 하나의 오브젝트를 추출하여 복수의 오버레이 항목으로 분할하는 단계;
    상기 적어도 하나의 오브젝트의 특성에 기초하여 분할된 상기 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당하여 상기 복수의 레이어 각각에 대한 레이어데이터를 생성하는 단계; 및
    상기 각 레이어데이터를 각각의 채널을 통해 개별적으로 클라이언트로 전송하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 복수의 레이어 각각에 대한 레이어데이터를 생성하는 단계는,
    상기 복수의 오버레이 항목 각각에 대한 메타데이터를 구성하는 단계; 및
    상기 각 메타데이터를 포함하여 상기 각 레이어데이터를 생성하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  4. 제3항에 있어서,
    상기 메타데이터는, 상기 복수의 오버레이 항목 각각에 대한 위치 정보를 포함하며,
    상기 위치 정보는, 상기 복수의 오버레이 항목 각각이 상기 클라이언트의 화면상에 표시되어야 하는 위치 정보인 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  5. 제4항에 있어서,
    상기 메타데이터는, 상기 복수의 오버레이 항목 각각에 포함된 상기 적어도 하나의 오브젝트의 특성에 따라 추가 정보를 더 포함하되,
    상기 추가 정보는, 제어 오브젝트를 표시하기 위한 법선 벡터, 압축 방식, 보정 여부, 상기 3차원 영상데이터의 방향 정보, 3차원 오브젝트를 표현하기 위한 정보, 및 동적으로 합성이 필요한 특정 오브젝트에 대한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  6. 클라이언트가 3차원 영상 콘텐츠를 제공하는 방법에 있어서,
    서버로부터 복수의 채널을 통해 복수의 레이어데이터를 수신하는 단계;
    상기 복수의 레이어데이터 각각에 포함되어 논리적으로 특정한 기능을 가지는 적어도 하나의 오브젝트의 특성에 기초하여 복수의 오버레이 항목 각각을 복수의 레이어 각각에 할당하는 단계; 및
    상기 복수의 레이어를 합성하여 3차원 영상데이터를 생성하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  7. 삭제
  8. 제6항에 있어서,
    상기 3차원 영상데이터를 생성하는 단계는,
    상기 복수의 레이어데이터로부터 메타데이터를 추출하는 단계; 및
    상기 메타데이터에 기초하여 상기 복수의 오버레이 항목 각각을 상기 클라이언트의 화면상에 표시되어야 하는 위치에 할당하여 상기 복수의 레이어를 합성하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  9. 제8항에 있어서,
    상기 3차원 영상데이터를 생성하는 단계는,
    상기 메타데이터가 상기 복수의 오버레이 항목 각각에 포함된 적어도 하나의 오브젝트의 특성에 따라 추가 정보를 더 포함하는 경우,
    상기 메타데이터에 포함된 추가 정보에 기초하여 해당 오버레이 항목을 처리하는 단계를 더 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  10. 제6항에 있어서,
    상기 클라이언트가 상기 3차원 영상데이터에 포함된 적어도 하나의 오브젝트를 생성하는 경우,
    상기 적어도 하나의 오브젝트를 생성하여 별도의 레이어에 할당하는 단계; 및
    상기 별도의 레이어를 상기 복수의 레이어와 합성하여 상기 3차원 영상데이터를 최종적으로 생성하는 단계를 더 포함하는 것을 특징으로 하는 3차원 영상 콘텐츠를 제공하는 방법.
  11. 하드웨어인 컴퓨터와 결합되어, 제1항, 제3항 내지 제6항, 제8항 내지 제10항 중 어느 한 항의 방법을 실행시키기 위하여 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터프로그램.
KR1020180092008A 2018-08-07 2018-08-07 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램 KR102090009B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020180092008A KR102090009B1 (ko) 2018-08-07 2018-08-07 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램
PCT/KR2019/009142 WO2020032434A1 (ko) 2018-08-07 2019-07-24 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램
TW108127955A TW202008312A (zh) 2018-08-07 2019-08-06 三維影像內容提供方法及電腦程式產品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180092008A KR102090009B1 (ko) 2018-08-07 2018-08-07 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램

Publications (2)

Publication Number Publication Date
KR20200016657A KR20200016657A (ko) 2020-02-17
KR102090009B1 true KR102090009B1 (ko) 2020-03-17

Family

ID=69413771

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180092008A KR102090009B1 (ko) 2018-08-07 2018-08-07 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램

Country Status (3)

Country Link
KR (1) KR102090009B1 (ko)
TW (1) TW202008312A (ko)
WO (1) WO2020032434A1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101874111B1 (ko) * 2017-03-03 2018-07-03 클릭트 주식회사 가상현실영상 재생방법 및 이를 이용한 프로그램

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040194127A1 (en) * 2003-03-28 2004-09-30 Eastman Kodak Company Method and system for modifying digital cinema frame content
KR101537281B1 (ko) * 2013-12-23 2015-07-22 휴텍 주식회사 웹뷰 기반의 인터랙티브 콘텐츠 제공방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
KR101817145B1 (ko) * 2016-04-12 2018-01-11 (주)지니트 멀티 레이어 기반 크로마키 합성 시스템 및 방법
KR102051981B1 (ko) * 2016-09-07 2019-12-04 이철우 다차원 반응형 영상 생성장치, 방법 및 프로그램, 및 다차원 반응형 영상 재생방법 및 프로그램

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101874111B1 (ko) * 2017-03-03 2018-07-03 클릭트 주식회사 가상현실영상 재생방법 및 이를 이용한 프로그램

Also Published As

Publication number Publication date
WO2020032434A1 (ko) 2020-02-13
KR20200016657A (ko) 2020-02-17
TW202008312A (zh) 2020-02-16

Similar Documents

Publication Publication Date Title
KR101623288B1 (ko) 렌더링 시스템, 렌더링 서버, 그 제어 방법, 및 기록 매체
US8206218B2 (en) 3D videogame system
RU2723920C1 (ru) Поддержка программного приложения дополненной реальности
CN109478342B (zh) 图像显示装置及图像显示系统
US20220270205A1 (en) Reference image generation apparatus, display image generation apparatus, reference image generation method, and display image generation method
US11967014B2 (en) 3D conversations in an artificial reality environment
JP6306089B2 (ja) ネットワークを通してメディアを伝送するシステム及び方法
JP2020522801A (ja) バーチャル・リアリティ・メディア・コンテンツ内に含める目的での現実世界シーンのカスタマイズされるビューの仮想化プロジェクションを生成するための方法及びシステム
JP6688378B1 (ja) コンテンツ配信システム、配信装置、受信装置及びプログラム
JP2001283246A (ja) 3次元画像合成装置及び方法、情報記憶媒体、プログラム配信装置及び方法
KR102090009B1 (ko) 3차원 영상 콘텐츠를 제공하는 방법 및 프로그램
US20230052104A1 (en) Virtual content experience system and control method for same
JPWO2020036213A1 (ja) 画像生成装置、画像生成方法及びプログラム
WO2022224964A1 (ja) 情報処理装置及び情報処理方法
WO2022249536A1 (ja) 情報処理装置及び情報処理方法
Chiday Developing a Kinect based Holoportation System
KR20230075363A (ko) 3차원 캐릭터 치환 시스템 및 방법
JP2023004403A (ja) アバター出力装置、端末装置、アバター出力方法、およびプログラム
JP2022032838A (ja) 送信装置、受信装置、ネットワークノード、及びプログラム
JP2020108177A (ja) コンテンツ配信システム、配信装置、受信装置及びプログラム
CN116311407A (zh) 表情模型确定方法、装置、设备及计算机可读存储介质
CN116016892A (zh) 智能眼镜的图像显示方法、装置、电子设备和存储介质
CN117173309A (zh) 图像渲染方法、装置、设备、介质和程序产品

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant