KR101826025B1 - 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법 - Google Patents

사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법 Download PDF

Info

Publication number
KR101826025B1
KR101826025B1 KR1020160093327A KR20160093327A KR101826025B1 KR 101826025 B1 KR101826025 B1 KR 101826025B1 KR 1020160093327 A KR1020160093327 A KR 1020160093327A KR 20160093327 A KR20160093327 A KR 20160093327A KR 101826025 B1 KR101826025 B1 KR 101826025B1
Authority
KR
South Korea
Prior art keywords
content
image
type
type content
scene graph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020160093327A
Other languages
English (en)
Other versions
KR20180010740A (ko
Inventor
서대일
유병현
고희동
Original Assignee
한국과학기술연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술연구원 filed Critical 한국과학기술연구원
Priority to KR1020160093327A priority Critical patent/KR101826025B1/ko
Priority to US15/489,077 priority patent/US10891424B2/en
Publication of KR20180010740A publication Critical patent/KR20180010740A/ko
Application granted granted Critical
Publication of KR101826025B1 publication Critical patent/KR101826025B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/08—Volume rendering
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/14—Tree-structured documents
    • G06F40/143—Markup, e.g. Standard Generalized Markup Language [SGML] or Document Type Definition [DTD]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • H04N13/0275—
    • H04N13/0402—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Library & Information Science (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 3D 영상 콘텐츠 생성 시스템에 관한 것으로서, 디스플레이 장치로부터 상기 디스플레이 장치의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는 디스플레이 프로파일부; 및 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받고, 상기 프로파일 정보에 따라 영상을 생성하는 콘텐츠 생성부를 포함한다.

Description

사용자 인터렉션이 가능한 3D 영상 콘텐츠 생성 시스템 및 방법{SYSTEM AND METHOD FOR GENERATING 3D IMAGE CONTENTS THAT USER INTERACTION IS POSSIBLE}
본 발명은 초다시점 등의 3D 영상 디스플레이에 적용 가능한 콘텐츠를 자동으로 생성하여 제공하는 사용자 인터렉션이 가능한 3D 영상 콘텐츠 생성 시스템 및 방법에 관한 것이다.
유무선 광대역 통신기술 발전으로 고품질의 실감 영상 콘텐츠의 수요가 증가하고 있다. 과거 양안의 시차를 이용한 3D TV는 안경을 착용해야 하는 불편함과 콘텐츠가 부족한 문제로 널리 사용되지 못하였다. 이러한 안경식 3차원 디스플레이의 문제점을 해결할 대안으로서 제시된 3차원 영상구현 기술을 무안경식 3차원 디스플레이(auto-stereoscopic display)라고 한다. 즉, 운동시차의 표현이 가능한 다시점 영상은 안경이 필요 없는 3D 입체 영상 표현방식으로 사용자의 편의 측면에서는 크게 개선되어 가고 있다.
다시점(Multi-view) 3차원 디스플레이는 타임 멀티플렉싱(Time-Multiplexing) 또는 공간 멀티플렉싱(Space-Multiplexing) 기술을 사용하여 공간상 유한수의 3차원 시점영상을 배치함으로써 디스플레이 앞의 관찰자에게 양안시차와 운동시차 정보가 있는 3차원 영상을 제공한다. 이러한 무안경식 다시점(Multi-view) 3차원 디스플레이는 시차분리를 위해 시차장벽, 렌티큘라 렌즈 또는 선광원 등을 사용할 수 있다.
현재 상용화 된 3D 제품 중에 주종을 이루는 무안경식 다시점 3D 디스플레이는 시점간격이 관찰자 동공크기 보다 일반적으로 크게 설계된다. 그런데 이러한 다시점 3D 디스플레이는 휴먼팩터 측면에서 관찰자에게 피로감을 유발할 수 있다. 이러한 다시점 3D 디스플레이에서 관찰자의 피로감은, 시점간격을 관찰자 동공크기 보다 작게 하여 단안초점조절 위치와 양안 수렴위치를 동일하게 함으로써 줄일 수 있다는 연구결과가 있다. 이를 적용한 새로운 개념의 디스플레이를 초다시점(Super-Multi view) 3D 디스플레이라 부른다. 특히, 관찰자 동공크기에 준하는 시점간격부터 그 이하의 시점간격을 갖는 다시점 3D 디스플레이를 고밀도 다시점 3D 디스플레이(HD-MV3D)라고 부르기도 한다.
따라서 최근 무안경식 다시점 및 초다시점 3차원 디스플레이가 증가하고 있으며, 이러한 기기에서 사용할 수 있는 콘텐츠를 공급하는 방법들이 요구되고 있다.
초다시점 디스플레이는 해상도와 시점수, 각 시역간의 다중화 방식에 따라 초다시점 영상을 렌더링하는 방식이 상이하다. 따라서 현재의 기술로는 초다시점 영상 콘텐츠를 초다시점 영상 디스플레이의 종류와 방식, 상세 설정에 따라 3차원 장면을 구성한 후 각각 전용의 콘텐츠를 만들기 때문에 초다시점 콘텐츠의 수급이 어려울 뿐만 아니라 사용자의 입장에서도 초다시점 디스플레이의 상세 스펙에 맞는 초다시점 콘텐츠를 사용해야 하는 어려움이 있다.
또한, 기존의 초다시점 디스플레이 영상 생성 방법은 여러 개의 시점의 영상을 각각 생성한 후 이를 초다시점 디스플레이의 해상도와 시점수 및 각 시역간의 다중화 방식에 따라 하나의 다중화된 영상으로 합성하기 때문에, 초다시점 디스플레이용으로 특수하게 계산된 3차원 컨텐츠의 영상이 아니면 렌즈나 베리어를 통하여 보여지는 영상이 제대로 투영되지 못하는 문제가 있다. 따라서 초다시점 디스플레이용이 아닌 일반적인 컴퓨팅 환경에서 사용하는 일상적인 영상 및 컴퓨터의 출력신호는 초다시점 영상 디스플레이의 렌즈나 베리어를 통과하기 이전에는 정상적인 영상으로 출력되나, 렌즈나 베리어 등의 광학적 장치를 통과하면서 사용자의 눈에는 판별이 불가능한 영상으로 보여지는 문제가 있다.
즉, 기존의 초다시점 영상 디스플레이 관련 기술은 시점을 늘리거나 사용자와의 거리를 변화하거나 사용자의 움직임 변화에 따라서 콘텐츠를 제공할 수 있는 하드웨어의 완성도를 높이는 기술에 집중되어 있어, 콘텐츠를 소비하는 사용자의 경험을 고려하지 못하고 있는 문제가 있다.
한국공개특허 제10-2016-0062671호 한국공개특허 제10-2015-0108149호
본 발명의 목적은 디지털 영상 콘텐츠의 대부분을 차지하는 인터넷, 동영상 및 IP 기반의 서비스 콘텐츠를 무안경식 3D 디스플레이 장치에서 3D 디스플레이 전용 콘텐츠와 함께 사용할 수 있도록 하는 3D 영상 콘텐츠 생성 시스템 및 방법을 제공하는데 있다.
본 발명의 목적은 3D 디스플레이 장치에서 특수하게 제작된 3D 디스플레이 전용의 콘텐츠 뿐만 아니라 일반적인 용도로 널리 사용되고 있는 컴퓨터의 영상도 용이하게 제공할 수 있는 3D 영상 콘텐츠 생성 시스템 및 방법을 제공하는데 있다.
상기 목적을 달성하기 위한 본 발명의 제1 측면은, 3D 영상 콘텐츠 생성 시스템으로서, 디스플레이 장치로부터 상기 디스플레이 장치의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는 디스플레이 프로파일부; 및 콘텐츠 제공자로부터 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받고, 상기 프로파일 정보에 따라 영상을 생성하는 콘텐츠 생성부를 포함한다.
바람직하게, 상기 제1 타입 콘텐츠에 대한 사용자 인터렉션을 수행하는 사용자 인터렉션 처리부를 더 포함할 수 있다.
바람직하게, 상기 콘텐츠 생성부는 상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠의 형식에 따라 콘텐츠를 제공받는 콘텐츠 로더; 및 상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠로부터 3D 영상 콘텐츠를 생성하는 콘텐츠 렌더러를 포함할 수 있다.
바람직하게, 상기 콘텐츠 생성부의 콘텐츠 렌더러는 상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠를 혼합하고 렌더링 하는 3차원 콘텐츠 렌더러를 포함하되, 상기 3차원 콘텐츠 렌더러는, 상기 콘텐츠 로더를 통하여 제공받은 콘텐츠의 타입에 따라 상기 제1 타입 콘텐츠에 대한 제1 장면 그래프 및 상기 제2 타입 콘텐츠에 대한 제2 장면 그래프를 구성하고, 상기 제1 장면 그래프 및 제2 장면 그래프를 동일한 3차원 공간상의 장면 그래프로 통합하는 3차원 블렌더를 포함할 수 있다.
바람직하게, 상기 콘텐츠 생성부의 콘텐츠 렌더러는 상기 통합된 장면 그래프로부터 3D 영상 콘텐츠를 생성하는 입체 콘텐츠 렌더러를 더 포함하되, 상기 입체 콘텐츠 렌더러는, 상기 통합된 장면 그래프에 의한 상기 제1 타입 콘텐츠와 상기 제2 타입 콘텐츠가 혼합된 장면 정보에서 각 시역에 대한 영상을 생성하는 입체 영상 렌더러; 및 상기 각 시역에 대한 영상을 다중화하여 3D 영상을 생성하는 다중화부를 포함할 수 있다.
바람직하게, 상기 제1 타입 콘텐츠는 HTML 문서로 구성될 수 있다.
상기 목적을 달성하기 위한 본 발명의 제2 측면은, 3D 영상 콘텐츠 생성 방법으로서, (a) 디스플레이 장치로부터 상기 디스플레이 장치의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는 단계; (b) 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받는 단계; 및 (c) 상기 프로파일 정보에 따라 상기 제1 타입 콘텐츠 또는 상기 제2 타입 콘텐츠를 이용하여 영상을 생성하는 단계를 포함한다.
바람직하게, 상기 (c) 단계는 상기 프로파일 정보가 3D 디스플레이에 해당하는 경우에는 3D 영상을 생성하고, 상기 프로파일 정보가 일반 디스플레이에 해당하는 경우에는 렌더링한 영상을 제공하는 단계를 포함할 수 있다.
바람직하게, 상기 (c) 단계는 상기 (b) 단계에서 제1 타입 콘텐츠 및 2타입 콘텐츠를 모두 제공받은 경우에는, 상기 제1 타입 콘텐츠에 대한 제1 장면 그래프 및 상기 제2 타입 콘텐츠에 대한 제2 장면 그래프를 구성하고, 상기 제1 장면 그래프 및 제2 장면 그래프를 동일한 3차원 공간상의 장면 그래프로 통합하는 단계를 포함할 수 있다.
바람직하게, 상기 (c) 단계는 상기 통합된 장면 그래프에 의한 상기 제1 타입 콘텐츠와 상기 제2 타입 콘텐츠가 혼합된 장면 정보에서 각 시역에 대한 영상을 생성하는 단계를 포함할 수 있다.
바람직하게, 상기 (c) 단계는 상기 통합된 장면 그래프로부터 n 개의 시점에 대한 영상을 렌더링하는 단계를 포함할 수 있다.
바람직하게, 상기 (c) 단계는 상기 각 시역에 대한 영상을 다중화하여 3D 영상을 생성하는 단계를 포함할 수 있다.
바람직하게, 상기 생성된 3D 영상을 상기 디스플레이 장치에 제공하는 단계를 포함할 수 있다.
상기한 바와 같이 본 발명에 의하면, 기존의 일반 디스플레이용으로 제작된 영상 콘텐츠 및 사용자 인터렉션을 포함한 콘텐츠를 3D 디스플레이 장치, 특히 초다시점 디스플레이에서 제공할 수 있는 효과가 있다.
또한, 3D 영상 콘텐츠 및 일반 영상 콘텐츠를 사용자가 사용하는 디스플레이 장치의 물리적인 특성에 따라 자동으로 일반 영상과 초다시점 영상 등의 3D 영상으로 제공할 수 있는 효과가 있다.
또한, 초다시점 등의 3D 영상 디스플레이 장치의 사용자에게 일반 영상 콘텐츠, 초다시점 전용 영상 콘텐츠, 및 일반 영상 콘텐츠와 초다시점 영상 콘텐츠가 혼합된 형태의 콘텐츠를 디스플레이 장치의 전환 없이 제공할 수 있는 효과가 있다.
또한, 기존의 3D 영상 디스플레이 렌더링 방법을 고려하지 않은 수많은 콘텐츠를 초다시점 등의 3D 영상 디스플레이 장치에서도 보이도록 함과 동시에, 일반적인 범용 영상 콘텐츠가 갖고 있는 고유의 사용자 인터렉션 모델을 유지할 수 있는 효과가 있다.
도 1은 본 발명의 바람직한 실시예에 따른 3D 영상 콘텐츠 생성 시스템에 대한 블록도이다.
도 2 내지 도 6은 도 1의 3D 영상 콘텐츠 생성 시스템을 더욱 구체적으로 설명하기 위한 블록도이다.
도 7은 본 발명의 일 실시예에 따른 3D 영상 시스템에 대한 예시도이다.
도 8은 본 발명의 일 실시예에 따른 3D 영상 콘텐츠 생성 방법에 대한 흐름도이다.
도 9는 본 발명의 일 실시예에 따른 3D 영상 콘텐츠 생성 방법에 대한 예시도이다.
이하, 본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다. "및/또는"은 언급된 아이템들의 각각 및 하나 이상의 모든 조합을 포함한다.
비록 제1, 제2 등이 다양한 소자, 구성요소 및/또는 섹션들을 서술하기 위해서 사용되나, 이들 소자, 구성요소 및/또는 섹션들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 소자, 구성요소 또는 섹션들을 다른 소자, 구성요소 또는 섹션들과 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 소자, 제1 구성요소 또는 제1 섹션은 본 발명의 기술적 사상 내에서 제2 소자, 제2 구성요소 또는 제2 섹션일 수도 있음은 물론이다.
또한, 각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 “포함한다(comprises)" 및/또는 “포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
또한, 본 발명의 실시예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 바람직한 실시예에 따른 3D 영상 콘텐츠 생성 시스템에 대한 블록도이다. 도 2 내지 도 6은 도 1의 3D 영상 콘텐츠 생성 시스템을 더욱 구체적으로 설명하기 위한 블록도이다. 이하, 도 1 내지 도 6을 참조하여 3D 영상 콘텐츠 생성 시스템에 대하여 설명한다.
도 1을 참조하면, 초다시점 등의 3D 영상 콘텐츠 생성 시스템(130)은 디스플레이 장치(110) 및 콘텐츠 제공자(120)와 연결된다. 디스플레이 장치(110)는 초다시점 등의 3D 영상 콘텐츠 생성 시스템(130)에 디스플레이 장치(110)의 하드웨어 특성을 포함하는 프로파일(profile) 정보를 제공하고, 초다시점 등의 3D 영상 콘텐츠 생성 시스템(130)으로부터 생성된 영상을 제공받아 디스플레이 한다. 디스플레이 장치(110)는 초다시점 영상 전용 디스플레이 장치이거나 또는 다시점 3D 디스플레이 장치 이거나 또는 일반 디스플레이 장치에 해당할 수 있다.
콘텐츠 제공자(120)는 디스플레이 장치(110)를 통하여 디스플레이 할 콘텐츠를 3D 영상 콘텐츠 생성 시스템(130)에 제공하는 것으로서, 바람직하게, 콘텐츠 제공자(120)는 콘텐츠들을 저장 및 관리할 수 있다.
3D 영상 콘텐츠 생성 시스템(130)은 디스플레이 장치(110)로부터 프로파일을 제공받고 콘텐츠 제공자(120)로부터 콘텐츠를 제공받아, 프로파일에 적합한 영상을 생성한다. 또한, 3D 영상 콘텐츠 생성 시스템(130)은 생성된 영상을 디스플레이 장치(110)에 제공하여 디스플레이 장치(110)로부터 영상이 디스플레이 되도록 한다. 바람직하게, 3D 영상 콘텐츠 생성 시스템(130)은 디스플레이 장치(110) 및 콘텐츠 제공자(120)와 네트워크로 연결된 서버로 구현될 수 있다.
더욱 구체적으로, 도 2를 참조하면, 3D 영상 콘텐츠 생성 시스템(130)은 디스플레이 프로파일부(210) 및 콘텐츠 생성부(220)를 포함할 수 있다.
디스플레이 프로파일부(210)는 디스플레이 장치(110)로부터 디스플레이 장치(110)의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는다. 즉, 디스플레이 프로파일부(210)는 디스플레이 장치(110)가 초다시점 전용 디스플레이 장치에 해당하는지 또는 다시점 3D 디스플레이 장치에 해당하는지 또는 일반 디스플레이 장치에 해당하는지에 대한 정보를 제공받을 수 있다.
콘텐츠 생성부(220)는 콘텐츠 제공자(120)로부터 제공받은 콘텐츠를 이용하여 프로파일 정보에 따라 영상을 생성한다. 여기에서, 콘텐츠 제공자(120)는 도 3과 같이 제1 타입 콘텐츠 및 제2 타입 콘텐츠를 포함할 수 있고, 제1 타입 콘텐츠는 일반적인 용도의 범용 콘텐츠에 해당하는 것으로서, 예를 들어, 디지털 영상, HTML 문서, 인터넷 콘텐츠, 동영상, 또는 IP 기반의 서비스 영상 등에 해당할 수 있고, 인터넷 콘텐츠는, 예를 들어, 포털 사이트 콘텐츠나 구글의 유투브 등과 같은 사용자 인터렉션이 가능한 웹 콘텐츠를 포함할 수 있다. 제2 타입 콘텐츠는 초다시점 등의 3D 영상 디스플레이 전용의 콘텐츠에 해당할 수 있다. 즉, 제1 타입 콘텐츠는 3차원 정보를 갖지 않는 콘텐츠에 해당하고, 제2 타입 콘텐츠는 3차원 정보를 갖는 콘텐츠에 해당한다.
바람직하게, 콘텐츠 생성부(220)는 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받고 프로파일 정보에 따라 영상을 생성할 수 있다. 예를 들어, 프로파일 정보가 초다시점 디스플레이 장치에 해당하면 콘텐츠 생성부(220)는 제공받은 콘텐츠를 초다시점 영상으로 생성하고, 프로파일 정보가 일반 디스플레이 장치에 해당하면 콘텐츠 생성부(220)는 제공받은 콘텐츠를 일반적인 방법으로 렌더링 하여 디스플레이 장치(110)에 제공할 수 있다.
이하에서는, 프로파일 정보가 초다시점 디스플레이 장치에 해당하는 경우로서, 콘텐츠 생성부(220)가 콘텐츠 제공자(120)에서 제공받은 콘텐츠를 기초로 사용자 인터렉션이 가능한 초다시점 영상 콘텐츠를 생성하기 위한 구성에 대하여 보다 상세하게 설명한다.
일 실시예에서, 도 4를 참조하면, 3D 영상 콘텐츠 생성 시스템(130)은 사용자 인터렉션 처리부(user interaction handler)(310)를 더 포함할 수 있고, 3D 영상 콘텐츠 생성 시스템(130)의 콘텐츠 생성부(220)는 콘텐츠 로더(content loader)(320) 및 콘텐츠 렌더러(content renderer)(330)를 포함할 수 있다.
사용자 인터렉션 처리부(310)는 제1 타입 콘텐츠에 대한 사용자 인터렉션을 수행한다. 바람직하게, 사용자 인터렉션 처리부(310)는 제1 타입 콘텐츠의 인터렉션 모델을 포함한 렌더링을 수행하여 일반적인 용도의 범용 콘텐츠가 갖고 있는 사용자 인터렉션을 수행할 수 있다. 예를 들어, 사용자 인터렉션은 키보드, 마우스 및 다양한 입력 장치를 이용하여 사용자가 범용 콘텐츠와 인터렉션하는 모든 인터렉션 모델을 포함할 수 있고, 구체적으로, 사용자가 키보드를 이용하여 키워드를 입력하고 그 결과물을 2차원 텍스트 또는 이미지 등의 형태로 출력하는 것, 또는 표준 웹 브라우저가 지원하는 HTML5의 모든 사용자 인터렉션 모델을 포함할 수 있다.
콘텐츠 로더(320)는 제1 타입 콘텐츠 및 제2 타입 콘텐츠의 형식에 따라 콘텐츠 제공자(120)로부터 콘텐츠를 제공받는다. 즉, 콘텐츠 로더(320)는 일반적인 용도의 3차원 정보를 갖지 않는 제1 타입 콘텐츠, 초다시점 영상 콘텐츠를 생성하기 위한 3차원 정보를 갖는 제2 타입 콘텐츠, 또는 제1 타입 콘텐츠 및 제2 타입 콘텐츠를 모두 포함하는 콘텐츠를 제공받는다.
콘텐츠 렌더러(330)는 제1 타입 콘텐츠 및 제2 타입 콘텐츠로부터 초다시점 영상 콘텐츠를 생성한다. 일 실시예에서, 도 5를 참조하면, 콘텐츠 렌더러(330)는 3차원 콘텐츠 렌더러(3D content renderer)(410) 및 입체 콘텐츠 렌더러(stereoscopic content renderer)(420)를 포함한다.
3차원 콘텐츠 렌더러(410)는 제1 타입 콘텐츠 및 제2 타입 콘텐츠를 혼합하고 렌더링 한다. 바람직하게, 3차원 콘텐츠 렌더러(410)는 3차원 블렌더(blender)를 포함하고, 3차원 블렌더는 콘텐츠 로더(320)를 통하여 제공받은 콘텐츠의 타입에 따라 제1 타입 콘텐츠에 대한 제1 장면 그래프(scene graph) 및 제2 타입 콘텐츠에 대한 제2 장면 그래프를 구성하고, 제1 장면 그래프 및 제2 장면 그래프를 동일한 3차원 공간상의 장면 그래프로 통합한다. 즉, 3차원 블렌더는 동일한 3차원 공간상에서 서로 다른 타입의 콘텐츠가 동일한 장면 그래프로 통합되도록 하여 통합된 3차원 장면 그래프를 생성한다. 여기에서, 통합된 3차원 장면 그래프는 초다시점 영상 디스플레이 장치 전용의 콘텐츠에 해당하는 제2 타입 콘텐츠와 동일한 특성을 갖기 때문에 일반적인 초다시점 영상 컨텐츠에 대한 렌더링 방법으로 초다시점 영상이 제공될 수 있다.
입체 콘텐츠 렌더러(420)는 3차원 콘텐츠 렌더러(310)를 통하여 통합된 장면 그래프로부터 초다시점 영상 콘텐츠를 생성한다. 일 실시예에서, 도 6을 참조하면, 입체 콘텐츠 렌더러(420)는 입체 영상 렌더러(stereoscopic renderer) 및 다중화부(multiplexer)를 포함할 수 있다. 입체 영상 렌더러는 통합된 장면 그래프에 의한 제1 타입 콘텐츠와 제2 타입 콘텐츠가 혼합된 장면 정보에서 각 시역(view point)에 대한 영상을 생성하고, 다중화부는 각 시역에 대한 영상을 다중화하여 초다시점 영상을 생성한다.
도 7은 본 발명의 일 실시예에 따른 초다시점 영상 콘텐츠 생성 시스템에 대한 예시도이다.
도 7을 참조하면, 초다시점 영상 콘텐츠 생성 시스템과 연결된 디스플레이 장치(110)는 초다시점 무안경식 방식 디스플레이(super multi-view(SMV) autostereoscopic display)이고, 콘텐츠 제공자(120)는 콘텐츠 저장 제공자(content store provider)로서 제1 타입 콘텐츠는 인터넷에서 표준으로 사용되는 HTML5 문서이고 제2 타입 콘텐츠는 3차원 모델 파일(3D model file)이다.
즉, 도 7은 HTML5 문서와 3차원 콘텐츠가 복합된 콘텐츠를 사용하여 초다시점 영상 콘텐츠를 생성하는 경우로서, 먼저, 초다시점 영상 콘텐츠 생성 시스템의 웹바이즈(webized) 3차원 콘텐츠 로더는 HTML5 문서를 제1 타입 콘텐츠로 인식하고 3D 모델 파일을 제2 타입 콘텐츠로 인식하여 HTTP 프로토콜을 통하여 콘텐츠를 불러들인다. 다음으로, 3차원 콘텐츠 렌더러는 표준 HTML 문서를 표준 웹 브라우저와 동일한 방법으로 렌더링 하여 HTML 문서의 DOM(Document Object Model)이 갖는 모든 인터렉션을 처리할 수 있고, 이때, 인터렉션을 위한 렌더링의 결과 영상은 디스플레이 장치에 실제로 표시되지 않는다. 이와 동시에 웹바이즈 3차원 블렌더는 HTML5 문서의 요소들을 3차원 공간상에 배치하여 3차원 장면 그래프를 만들어 제2 타입 콘텐츠인 3차원 콘텐츠와 통합된 장면 그래프를 생성한다. 여기에서, 통합된 장면 그래프는 제2 타입 콘텐츠와 동일한 3차원 콘텐츠의 속성을 가지고 있고, 초다시점 콘텐츠 렌더러의 웹바이즈 초다시점 렌더러 및 웹바이즈 초다시점 다중화부는 통합된 장면 그래프를 이용하여 초다시점 영상을 생성한다.
도 8은 본 발명의 일 실시예에 따른 3D 영상 콘텐츠 생성 방법에 대한 흐름도이다. 이하, 도 8 및 9를 참조하여 설명한다.
3D 영상 콘텐츠 생성 시스템(130)의 디스플레이 프로파일부(210)는 디스플레이 장치(110)로부터 디스플레이 장치(110)의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는다(단계 S810).
3D 영상 콘텐츠 생성 시스템(130)의 콘텐츠 로더(320)는 콘텐츠 제공자(120)로부터 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받는다(단계 S820).
3D 영상 콘텐츠 생성 시스템(130)의 콘텐츠 렌더러(330)는 프로파일 정보에 따라 제1 타입 콘텐츠 또는 제2 타입 콘텐츠를 이용하여 영상을 생성한다(단계 S830). 바람직하게, 콘텐츠 렌더러(330)는 프로파일 정보가 초다시점 디스플레이에 해당하는 경우에는 초다시점 영상을 생성하고, 프로파일 정보가 일반 디스플레이에 해당하는 경우에는 렌더링한 영상을 제공할 수 있다. 즉, 제1 타입 콘텐츠와 제2 타입 콘텐츠를 이용하여 초다시점 영상 콘텐츠를 생성하는 과정에 프로파일 정보가 적용되어, 디스플레이 장치(110)의 물리적인 특성에 따라 자동으로 초다시점 영상 콘텐츠가 생성될 수 있다.
바람직하게, 콘텐츠 로더(320)가 2차원 평면상의 콘텐츠에 해당하는 제1 타입 콘텐츠 및 3차원 콘텐츠에 해당하는 제2 타입 콘텐츠를 제공받은 경우, 콘텐츠 렌더러(330)의 3차원 콘텐츠 렌더러(410)는 제1 타입 콘텐츠인 2차원 평면상의 콘텐츠를 3차원 공간상에 위치시켜, 제1 타입 콘텐츠를 제2 타입 콘텐츠인 3차원 콘텐츠와 동일한 3차원 공간상에 통합시킬 수 있다. 즉, 3차원 콘텐츠 렌더러(410)는, 도 9에서 제1 타입 콘텐츠와 제2 타입 콘텐츠를 동일한 3차원 공간으로 배치하는 혼합 렌더링(mixed rendering) 과정을 수행하는 것이다. 여기에서, 제1 타입 콘텐츠는 HTML 문서에 해당할 수도 있고, 보다 상세하게, 제1 타입 콘텐츠가 HTML 요소인 경우에는, 3차원 콘텐츠 렌더러(410)는 표준 HTML 렌더링 파이프라인을 통하여 제1 타입 콘텐츠를 렌더링하고 HTML 요소의 모든 인터렉션 모델을 표준 HTML 상세의 구현에 따라 처리할 수 있고, 예를 들어, 표준 HTML 상세의 구현은 웹 브라우저가 될 수 있다.
다음으로, 3차원 공간상에 통합된 제1 타입 콘텐츠 및 제2 타입 콘텐츠는 입체 콘텐츠 렌더러(420)로 제공되어 제2 타입 콘텐츠가 초다시점 영상으로 생성되는 방법과 동일한 방법으로 입체 영상 렌더러 및 다중화부를 통하여 초다시점 영상으로 생성될 수 있다. 즉, 제1 타입 콘텐츠가 HTML 요소인 경우, 3차원 공간으로 배치되어 통합된 제1 타입 콘텐츠와 제2 타입 콘텐츠의 혼합된 장면 정보는 도 9의 텍스쳐 렌더링(texture rendering) 과정을 거쳐서 각 시점의 영상으로 생성되고 도 9의 다중화(multiplexing) 과정을 거쳐서 초다시점 영상으로 완성된다. 보다 구체적으로, 텍스쳐 렌더링 과정은 입체 영상 렌더러가 제1 타입 콘텐츠와 제2 타입 콘텐츠가 통합된 3차원 장면 그래프로부터 n개의 시점에 대한 영상을 렌더링 하는 것이고, 다중화 과정은 다중화부가 텍스쳐 렌더링를 거쳐 생성된 n개의 시점에 대한 영상을 다중화 하는 것이다.
여기에서, 사용자 인터렉션과 관련하여, 제1 타입 콘텐츠의 사용자 인터렉션은 도 9의 HTML 레이어(layer)의 HTML 렌더링 파이프라인을 통하여 렌더링된 HTML 요소와 정보를 주고 받는다. 이 때 혼합 렌더링 과정에서 통합된 제1 타입 콘텐츠와 제2 타입 콘텐츠는 3차원 공간을 공유할 뿐, HTML 레이어에서 렌더링된 제1 타입 콘텐츠의 결과물은 초다시점 영상에 가시화되지 않는다. 즉, 제1 타입 콘텐츠의 영상은 혼합 렌더링 과정에서 제2 타입 콘텐츠와 통합된 장면 그래프를 통하여 초다시점 영상으로 다중화되어 가시화된다. 또한, 제2 타입 콘텐츠의 인터렉션 모델은 제2 타입 콘텐츠의 인터렉션 모델에 따라 처리되거나 제1 타입 콘텐츠의 인터렉션의 모델에 따라 처리될 수 있으며, 제2 타입 콘텐츠의 인터렉션 모델의 처리 방법은 사용자에 의하여 선택될 수 있다. 이에 따라 제1 타입 콘텐츠의 사용자 인터렉션이 가능한 제1 타입 콘텐츠와 제2 타입 콘텐츠가 혼합된 형태의 초다시점 영상이 제공될 수 있다.
따라서, 본 발명에 따른 3D 영상 콘텐츠 생성 방법은 인터넷 서비스와 연결된 3D 콘텐츠 제공 시스템 또는 3D 콘텐츠를 제공하는 인터넷 포털 서비스에 적용되면 더욱 효과적일 수 있고, 초다시점 등의 3D 영상 콘텐츠를 사회 관계망 서비스내에서 제공하여 일반 범용 콘텐츠와 초다시점 영상 콘텐츠가 동시에 사용자에게 제공되며 사용자의 인터렉션이 빈번히 일어나는 서비스에 적용되면 더욱 효과적일 수 있다.
한편, 본 발명의 일 실시예에 따른 3D 영상 콘텐츠 생성 방법은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.
예컨대, 컴퓨터가 읽을 수 있는 기록매체로는 롬(ROM), 램(RAM), 시디-롬(CD-ROM), 자기 테이프, 하드디스크, 플로피디스크, 이동식 저장장치, 비휘발성메모리(Flash Memory), 광 데이터 저장장치 등이 있다.
또한, 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
전술한 본 발명에 따른 3D 영상 콘텐츠 생성 시스템 및 방법에 대한 바람직한 실시예에 대하여 설명하였지만, 본 발명은 이에 한정되는 것이 아니고 특허청구범위와 발명의 상세한 설명 및 첨부한 도면의 범위 안에서 여러가지로 변형하여 실시하는 것이 가능하고 이 또한 본 발명에 속한다.
110: 디스플레이 장치
120: 콘텐츠 제공자
130: 3D 영상 콘텐츠 생성 시스템
210: 디스플레이 프로파일부
220: 콘텐츠 생성부
310: 사용자 인터렉션 처리부
320: 콘텐츠 로더
330: 콘텐츠 렌더러
410: 3차원 콘텐츠 렌더러
420: 입체 콘텐츠 렌더러

Claims (13)

  1. 디스플레이 장치로부터 상기 디스플레이 장치의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는 디스플레이 프로파일부; 및
    콘텐츠 제공자로부터 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받고, 상기 프로파일 정보에 따라 영상을 생성하는 콘텐츠 생성부를 포함하되,
    상기 콘텐츠 생성부는, 상기 프로파일 정보가 3D 디스플레이에 해당하는 경우에는 3D 영상을 생성하고, 상기 프로파일 정보가 일반 디스플레이에 해당하는 경우에는 렌더링한 영상을 제공하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  2. 제1항에 있어서,
    상기 제1 타입 콘텐츠에 대한 사용자 인터렉션을 수행하는 사용자 인터렉션 처리부를 더 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  3. 제2항에 있어서, 상기 콘텐츠 생성부는
    상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠의 형식에 따라 콘텐츠를 제공받는 콘텐츠 로더; 및
    상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠로부터 3D 영상 콘텐츠를 생성하는 콘텐츠 렌더러를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  4. 제3항에 있어서, 상기 콘텐츠 생성부의 콘텐츠 렌더러는
    상기 제1 타입 콘텐츠 및 상기 제2 타입 콘텐츠를 혼합하고 렌더링 하는 3차원 콘텐츠 렌더러를 포함하되,
    상기 3차원 콘텐츠 렌더러는, 상기 콘텐츠 로더를 통하여 제공받은 콘텐츠의 타입에 따라 상기 제1 타입 콘텐츠에 대한 제1 장면 그래프 및 상기 제2 타입 콘텐츠에 대한 제2 장면 그래프를 구성하고, 상기 제1 장면 그래프 및 제2 장면 그래프를 동일한 3차원 공간상의 장면 그래프로 통합하는 3차원 블렌더를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  5. 제4항에 있어서, 상기 콘텐츠 생성부의 콘텐츠 렌더러는
    상기 통합된 장면 그래프로부터 3D 영상 콘텐츠를 생성하는 입체 콘텐츠 렌더러를 더 포함하되,
    상기 입체 콘텐츠 렌더러는,
    상기 통합된 장면 그래프에 의한 상기 제1 타입 콘텐츠와 상기 제2 타입 콘텐츠가 혼합된 장면 정보에서 각 시역에 대한 영상을 생성하는 입체 영상 렌더러; 및
    상기 각 시역에 대한 영상을 다중화하여 3D 영상을 생성하는 다중화부를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  6. 제1항에 있어서, 상기 제1 타입 콘텐츠는
    HTML 문서로 구성되는 것을 특징으로 하는 3D 영상 콘텐츠 생성 시스템.
  7. (a) 디스플레이 장치로부터 상기 디스플레이 장치의 하드웨어 특성을 포함하는 프로파일 정보를 제공받는 단계;
    (b) 콘텐츠 제공자로부터 3차원 정보를 갖지 않는 제1 타입 콘텐츠 또는 3차원 정보를 갖는 제2 타입 콘텐츠를 제공받는 단계; 및
    (c) 상기 프로파일 정보에 따라 상기 제1 타입 콘텐츠 또는 상기 제2 타입 콘텐츠를 이용하여 영상을 생성하는 단계를 포함하되,
    상기 (c) 단계는, 상기 프로파일 정보가 3D 디스플레이에 해당하는 경우에는 3D 영상을 생성하고, 상기 프로파일 정보가 일반 디스플레이에 해당하는 경우에는 렌더링한 영상을 제공하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
  8. 삭제
  9. 제7항에 있어서, 상기 (c) 단계는
    상기 (b) 단계에서 제1 타입 콘텐츠 및 2타입 콘텐츠를 모두 제공받은 경우에는, 상기 제1 타입 콘텐츠에 대한 제1 장면 그래프 및 상기 제2 타입 콘텐츠에 대한 제2 장면 그래프를 구성하고, 상기 제1 장면 그래프 및 제2 장면 그래프를 동일한 3차원 공간상의 장면 그래프로 통합하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
  10. 제9항에 있어서, 상기 (c) 단계는
    상기 통합된 장면 그래프에 의한 상기 제1 타입 콘텐츠와 상기 제2 타입 콘텐츠가 혼합된 장면 정보에서 각 시역에 대한 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
  11. 제10항에 있어서, 상기 (c) 단계는
    상기 통합된 장면 그래프로부터 n 개의 시점에 대한 영상을 렌더링하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
  12. 제10항에 있어서, 상기 (c) 단계는
    상기 각 시역에 대한 영상을 다중화하여 3D 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
  13. 제12항에 있어서,
    상기 생성된 3D 영상을 상기 디스플레이 장치에 제공하는 단계를 포함하는 것을 특징으로 하는 3D 영상 콘텐츠 생성 방법.
KR1020160093327A 2016-07-22 2016-07-22 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법 Active KR101826025B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160093327A KR101826025B1 (ko) 2016-07-22 2016-07-22 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법
US15/489,077 US10891424B2 (en) 2016-07-22 2017-04-17 System and method for generating 3D image content which enables user interaction

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160093327A KR101826025B1 (ko) 2016-07-22 2016-07-22 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20180010740A KR20180010740A (ko) 2018-01-31
KR101826025B1 true KR101826025B1 (ko) 2018-02-07

Family

ID=60990258

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160093327A Active KR101826025B1 (ko) 2016-07-22 2016-07-22 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법

Country Status (2)

Country Link
US (1) US10891424B2 (ko)
KR (1) KR101826025B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240020923A (ko) 2022-08-09 2024-02-16 주식회사 아리모아 표정 인식 가능한 영상 콘텐츠 제작 시스템 및 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12501118B2 (en) 2023-01-09 2025-12-16 Tencent America LLC Independent mapping space for asset interchange using ITMF

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU4818301A (en) * 2000-04-07 2001-10-23 Stockhouse Media Corporation Customized multimedia content method, apparatus, media and signals
JP5248062B2 (ja) * 2007-08-24 2013-07-31 株式会社東芝 指向性バックライト、表示装置及び立体画像表示装置
CN102106153B (zh) * 2008-07-25 2013-12-18 皇家飞利浦电子股份有限公司 字幕的3d显示处理
JP2011029849A (ja) * 2009-07-23 2011-02-10 Sony Corp 受信装置、通信システム、立体画像への字幕合成方法、プログラム、及びデータ構造
KR101652399B1 (ko) * 2010-12-07 2016-09-12 삼성전자주식회사 3차원 디스플레이 장치 및 3차원 영상 디스플레이 방법
CN103096014B (zh) * 2011-10-28 2016-03-30 华为技术有限公司 一种视频呈现方法和系统
US9996150B2 (en) * 2012-12-19 2018-06-12 Qualcomm Incorporated Enabling augmented reality using eye gaze tracking
KR102081109B1 (ko) 2013-06-17 2020-02-25 엘지디스플레이 주식회사 복수 시청자용 무안경 입체 표시 장치
WO2015000137A1 (zh) * 2013-07-02 2015-01-08 华为技术有限公司 一种流媒体处理的方法、装置及系统
KR101803475B1 (ko) 2014-03-17 2017-11-30 한국전자통신연구원 초다시점 콘텐츠 생성 시스템
KR101802139B1 (ko) 2014-11-25 2017-12-28 한국전자통신연구원 초다시점 영상 생성 장치 및 그 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
동일발명자논문1*

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240020923A (ko) 2022-08-09 2024-02-16 주식회사 아리모아 표정 인식 가능한 영상 콘텐츠 제작 시스템 및 방법

Also Published As

Publication number Publication date
US20180027223A1 (en) 2018-01-25
KR20180010740A (ko) 2018-01-31
US10891424B2 (en) 2021-01-12

Similar Documents

Publication Publication Date Title
TWI444036B (zh) ２ｄ至３ｄ使用者介面內容資料轉換
KR20110086079A (ko) 입력 ３차원 비디오 신호를 프로세싱하는 방법 및 시스템
KR20130138177A (ko) 다중 시점 장면에서의 그래픽 표시
CN103294453B (zh) 图像处理方法和图像处理设备
KR20160025522A (ko) 위치 감지와 뷰들의 적응 수를 갖는 멀티뷰 3차원 디스플레이 시스템 및 방법
CN103945205B (zh) 兼容2d与多视点裸眼3d显示的视频处理装置及方法
WO2015100490A1 (en) Reconfiguration of stereoscopic content and distribution for stereoscopic content in a configuration suited for a remote viewing environment
CN106598250B (zh) 一种vr显示方法、装置和电子设备
WO2008122838A1 (en) Improved image quality in stereoscopic multiview displays
KR101826025B1 (ko) 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법
US9479766B2 (en) Modifying images for a 3-dimensional display mode
Date et al. Real-time viewpoint image synthesis using strips of multi-camera images
KR101314601B1 (ko) 콘텐츠 전송 장치, 콘텐츠 표출 장치, 콘텐츠 전송 방법 및 콘텐츠 표출 방법
KR101192121B1 (ko) 양안시차 및 깊이 정보를 이용한 애너그리프 영상 생성 방법 및 장치
KR101912242B1 (ko) 3d 디스플레이 장치 및 그 영상 처리 방법
US10129537B2 (en) Autostereoscopic 3D display apparatus
US9547933B2 (en) Display apparatus and display method thereof
González et al. Synthetic content generation for auto-stereoscopic displays
Li et al. General stereoscopic distortion rectification due to arbitrary viewer motion in binocular stereoscopic display
Zinger et al. iGLANCE project: free-viewpoint 3D video
CN108632600A (zh) 反映用户交互信息来播放立体图像的方法及装置
Zang et al. What is the 3D comfort difference experienced via VR glasses and 3D-TV
US20160103330A1 (en) System and method for adjusting parallax in three-dimensional stereoscopic image representation
Hristov Research of Modern Technologies and Approaches for the Development of a Web-Based Information System for Visualization of Three-Dimensional Models...
Chen et al. The rendering context for stereoscopic 3D web

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20160722

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20170721

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20180122

PG1501 Laying open of application
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20180131

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20180201

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20201229

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20220103

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20230102

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20240102

Start annual number: 7

End annual number: 7

PR1001 Payment of annual fee

Payment date: 20250113

Start annual number: 8

End annual number: 8