KR20140045349A - 3d컨텐츠제공장치 및 3d컨텐츠제공방법 - Google Patents

3d컨텐츠제공장치 및 3d컨텐츠제공방법 Download PDF

Info

Publication number
KR20140045349A
KR20140045349A KR1020137028598A KR20137028598A KR20140045349A KR 20140045349 A KR20140045349 A KR 20140045349A KR 1020137028598 A KR1020137028598 A KR 1020137028598A KR 20137028598 A KR20137028598 A KR 20137028598A KR 20140045349 A KR20140045349 A KR 20140045349A
Authority
KR
South Korea
Prior art keywords
content
conversion
quality
providing apparatus
user terminal
Prior art date
Application number
KR1020137028598A
Other languages
English (en)
Inventor
노정호
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of KR20140045349A publication Critical patent/KR20140045349A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • Primary Health Care (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 3D컨텐츠제공장치 및 3D컨텐츠제공방법에 관한 것으로서, 3D컨텐츠제공방법은, 2D-3D변환에 의해 생성된 제1 3D컨텐츠 및 제2 3D컨텐츠를 획득하는 단계; 사용자단말기로 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠의 제품정보를 송신하는 단계; 상기 사용자단말기로부터 컨텐츠 제공 요청을 수신하는 단계; 및 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠 중 상기 컨텐츠 제공 요청에 따라 선택된 어느 하나를 상기 사용자단말기로 전송하는 단계를 포함하며, 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠는 서로 다른 상기 2D-3D변환의 수동프로세스 및 자동프로세스의 조합비율에 의해 생성된다.
이에 의하여, 적은 비용으로 우수한 품질의 3D컨텐츠를 제공할 수 있다.

Description

3D컨텐츠제공장치 및 3D컨텐츠제공방법{APPARATUS AND METHOD FOR PROVIDING 3D CONTENT}
본 발명은, 3D컨텐츠제공장치 및 3D컨텐츠제공방법에 관한 것으로서, 보다 상세하게는, 2D컨텐츠로부터 변환된 3D컨텐츠를 제공하는 3D컨텐츠제공장치 및 3D컨텐츠제공방법에 관한 것이다.
영화, 드라마, 스포츠경기 등과 같은 영상컨텐츠(이하, 간략히, '컨텐츠'라고 함)는 TV, PC, 스마트폰, 스마트패드, PMP(portable multimedia player), MP3플레이어 등과 같이 컨텐츠재생기능을 가진 디스플레이장치에 의해 재생된다.
한편, 근래 3차원 영상 디스플레이 기술의 발달로, 이러한 컨텐츠가 3D컨텐츠로 만들어져, 3차원 영상 디스플레이가 가능한 디스플레이장치에 의해 재생되고도 있다.
그런데, 이러한 3D컨텐츠를 만드는데는 통상 막대한 규모의 장치와, 개발인력이 필요하여 매우 큰 비용과, 시간이 소요되므로, 아직까지는 우수한 품질의 3D컨텐츠가 많지 않은 실정이다.
따라서 본 발명의 목적은, 적은 비용으로 우수한 품질의 3D컨텐츠를 제공할 수 있는 3D컨텐츠제공장치 및 3D컨텐츠제공방법을 제공하는 것이다.
본 발명의 다른 목적은, 3D컨텐츠의 원활한 제공으로 컨텐츠 산업 및 디스플레이 산업을 활성화시킬 수 있는 3D컨텐츠제공장치 및 3D컨텐츠제공방법을 제공하는 것이다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 2D-3D변환에 의해 생성된 제1 3D컨텐츠 및 제2 3D컨텐츠를 획득하는 단계; 사용자단말기로 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠의 제품정보를 송신하는 단계; 상기 사용자단말기로부터 컨텐츠 제공 요청을 수신하는 단계; 및 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠 중 상기 컨텐츠 제공 요청에 따라 선택된 어느 하나를 상기 사용자단말기로 전송하는 단계를 포함하며, 상기 제1 3D컨텐츠 및 상기 제2 3D컨텐츠는 서로 다른 상기 2D-3D변환의 수동프로세스 및 자동프로세스의 조합비율에 의해 생성되는 3D컨텐츠제공방법에 의해서 달성될 수 있다.
상기 제품정보는 가격정보를 포함할 수 있다.
상기 제품정보는 3D에 관련된 품질정보를 포함할 수 있다.
상기 사용자단말기로 전송하는 단계는, VOD서비스에 의해 3D컨텐츠를 전송하는 단계를 포함할 수 있다.
상기 조합비율은 상기 제1 컨텐츠 및 제2 컨텐츠의 컨텐츠 속성에 따라 결정될 수 있다.
상기 조합비율은 상기 제1 컨텐츠 및 제2 컨텐츠의 컨텐츠 장르에 따라 결정될 수 있다.
상기 조합비율은 상기 제1 컨텐츠 및 제2 컨텐츠의 3D에 관련된 품질에 따라 결정될 수 있다.
상기 조합비율은 상기 사용자단말기로부터 수신한 3D에 관련된 품질정보에 따라 결정될 수 있다.
상기 컨텐츠 제공 요청은, 상기 제품정보 중에서 선택된 가격정보를 포함할 수 있다.
상기 컨텐츠 제공 요청은, 상기 제품정보 중에서 선택된 3D에 관련된 품질정보를 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 2D컨텐츠제공장치 및 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠를 3D컨텐츠로 변환하는 변환부와; 상기 2D컨텐츠제공장치로부터 수신되는 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 하고, 변환된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 변환부는, 복수의 변환프로세스를 수행하여 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하며, 상기 복수의 변환프로세스 중 적어도 하나는, 사용자의 입력에 따라 수행되는 수동프로세스 및 미리 정해진 기준정보에 따라 수행되는 자동프로세스를 포함할 수 있다.
상기 변환부는, 상기 복수의 프레임 중에서 선택된 일부의 프레임에 대하여 변환프로세스를 수행하고, 수행된 상기 변환프로세스에 기초하여 다른 프레임에 대한 변환프로세스를 수행할 수 있다.
상기 제어부는, 변환될 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 대응하여 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 제어를 수행할 수 있다.
상기 제어부는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다.
상기 제어부는, 상기 사용자단말기의 사용자의 요청에 따라 변환될 상기 3D컨텐츠의 품질을 결정할 수 있다.
상기 제어부는, 상기 3D컨텐츠의 변환을 요청하는 사용자가 원하는 상기 2D컨텐츠가 변환되도록 제어를 수행할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 2D컨텐츠제공장치로부터 영상컨텐츠로서 복수의 프레임을 포함하는 2D컨텐츠를 수신하는 단계와; 수신되는 상기 2D컨텐츠를 3D컨텐츠로 변환하는 단계와; 변환된 상기 3D컨텐츠를 상기 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 변환하는 단계는, 복수의 변환프로세스를 수행하여 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계를 포함하며, 상기 복수의 변환프로세스 중 적어도 하나는, 사용자의 입력에 따라 수행되는 수동프로세스 및 미리 정해진 기준정보에 따라 수행되는 자동프로세스를 포함할 수 있다.
상기 변환하는 단계는, 상기 복수의 프레임 중에서 선택된 일부의 프레임에 대하여 변환프로세스를 수행하는 단계와; 수행된 상기 변환프로세스에 기초하여 다른 프레임에 대한 변환프로세스를 수행하는 단계를 포함할 수 있다.
상기 3D컨텐츠제공방법은, 변환될 상기 3D컨텐츠의 품질을 결정하는 단계를 더 포함하고, 상기 변환하는 단계는, 결정된 상기 3D컨텐츠의 품질에 대응하여 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계를 포함할 수 있다.
상기 결정하는 단계는, 상기 2D컨텐츠의 종류에 기초하여 변환할 상기 3D컨텐츠의 품질을 결정하는 단계를 포함 할 수 있다.
상기 결정하는 단계는, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하는 단계를 포함할 수 있다.
상기 3D컨텐츠제공방법은, 상기 사용자단말기의 사용자의 요청에 따라 변환할 상기 2D컨텐츠를 결정하는 단계를 더 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 2D컨텐츠제공장치, 컨텐츠변환장치 및 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠로부터 변환된 3D컨텐츠를 저장하는 저장부와; 상기 2D컨텐츠제공장치로부터 수신되는 상기 2D컨텐츠를 상기 컨텐츠변환장치에 전송하고, 상기 컨텐츠변환장치로부터 변환된 상기 3D컨텐츠를 수신하여, 수신된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 제어부는, 변환될 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 대응하여 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청할 수 있다.
상기 제어부는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다.
상기 제어부는, 상기 사용자단말기의 사용자의 요청에 따라 변환될 상기 3D컨텐츠의 품질을 결정할 수 있다.
상기 제어부는, 상기 3D컨텐츠의 변환을 요청하는 사용자가 원하는 상기 2D컨텐츠가 변환되도록 제어를 수행할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 2D컨텐츠제공장치로부터 영상컨텐츠로서 복수의 프레임을 포함하는 2D컨텐츠를 수신하는 단계와; 수신되는 상기 2D컨텐츠를 컨텐츠변환장치에 전송하는 단계와; 상기 컨텐츠변환장치로부터 상기 2D컨텐츠가 변환된 3D컨텐츠를 수신하는 단계와; 수신된 상기 3D컨텐츠를 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 3D컨텐츠제공방법은, 변환될 상기 3D컨텐츠의 품질을 결정하는 단계와; 결정된 상기 3D컨텐츠의 품질에 대응하여 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청하는 단계를 더 포함할 수 있다.
상기 결정하는 단계는, 상기 2D컨텐츠의 종류에 기초하여 변환할 상기 3D컨텐츠의 품질을 결정하는 단계를 포함할 수 있다.
상기 결정하는 단계는, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하는 단계를 포함할 수 있다.
상기 3D컨텐츠제공방법, 상기 사용자단말기의 사용자의 요청에 따라 변환할 상기 2D컨텐츠를 결정하는 단계를 더 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠를 3D컨텐츠로 변환하는 변환부와; 상기 사용자단말기의 사용자의 요청에 따라 변환할 상기 2D컨텐츠를 결정하고, 결정된 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 하고, 변환된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 제어부는, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 제어를 수행할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 사용자단말기에 표시될 복수의 프레임을 포함하는 영상컨텐츠로서, 상기 사용자단말기의 사용자의 요청에 따라 변환할 2D컨텐츠를 결정하는 단계와; 결정된 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계와; 변환된 상기 3D컨텐츠를 상기 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 변환하는 단계는, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하는 단계와; 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계를 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 컨텐츠변환장치 및 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠로부터 변환된 3D컨텐츠를 저장하는 저장부와; 상기 사용자단말기의 사용자의 요청에 따라 변환할 상기 2D컨텐츠를 결정하고, 결정된 상기 2D컨텐츠를 상기 3D컨텐츠로 변환할 것을 상기 컨텐츠변환장치에 요청하고, 상기 컨텐츠변환장치로부터 변환된 상기 3D컨텐츠를 수신하여, 수신된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 제어부는, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 사용자단말기에 표시될 복수의 프레임을 포함하는 영상컨텐츠로서, 상기 사용자단말기의 사용자의 요청에 따라 변환할 2D컨텐츠를 결정하는 단계와; 결정된 상기 2D컨텐츠를 3D컨텐츠로 변환하도록 컨텐츠변환장치에 요청하는 단계와; 상기 컨텐츠변환장치로부터 상기 2D컨텐츠가 변환된 3D컨텐츠를 수신하는 단계와; 수신된 상기 3D컨텐츠를 상기 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 3D컨텐츠제공방법은, 상기 사용자단말기의 사용자의 요청에 따라 상기 3D컨텐츠의 품질을 결정하는 단계를 더 포함하고, 상기 요청하는 단계는, 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청하는 단계를 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠를 3D컨텐츠로 변환하는 변환부와; 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 하고, 변환된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 제어부는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 사용자단말기에 표시될 복수의 프레임을 포함하는 영상컨텐츠인 2D컨텐츠로부터 변환될 3D컨텐츠의 품질을 결정하는 단계와; 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계와; 변환된 상기 3D컨텐츠를 상기 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 결정하는 단계는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정하는 단계를 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 있어서, 컨텐츠변환장치 및 사용자단말기와 통신하는 통신부와; 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠로부터 변환된 3D컨텐츠를 저장하는 저장부와; 변환될 상기 3D컨텐츠의 품질을 결정하고, 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청하고, 상기 컨텐츠변환장치로부터 변환된 상기 3D컨텐츠를 수신하여, 수신된 상기 3D컨텐츠가 상기 사용자단말기로 전송되도록 제어를 수행하는 상기 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
상기 제어부는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치에 의해 실행되는 3D컨텐츠제공방법에 있어서, 상기 사용자단말기에 표시될 영상컨텐츠로서, 복수의 프레임을 포함하는 2D컨텐츠로부터 변환될 3D컨텐츠의 품질을 결정하는 단계와; 결정된 상기 3D컨텐츠의 품질에 따라 상기 2D컨텐츠가 상기 3D컨텐츠로 변환되도록 상기 컨텐츠변환장치에 요청하는 단계와; 상기 컨텐츠변환장치로부터 변환된 상기 3D컨텐츠를 수신하는 단계와; 수신된 상기 3D컨텐츠를 상기 사용자단말기로 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
상기 결정하는 단계는, 상기 2D컨텐츠의 종류에 따라 변환될 3D컨텐츠의 품질을 결정하는 단계를 포함할 수 있다.
본 발명의 상기 목적은, 3D컨텐츠제공장치를 이용한 3D컨텐츠제공방법에 있어서, 3D컨텐츠제공장치로부터 전송되는 복수의 컨텐츠의 정보를 사용자단말기에 표시하는 단계와; 상기 사용자단말기를 이용한 사용자의 입력에 따라 상기 복수의 컨텐츠 중 어느 하나를 선택하는 단계와; 상기 3D컨텐츠제공장치로부터 전송되는 정보에 기초하여 상기 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 상기 사용자단말기에 표시하는 단계와; 상기 사용자단말기를 이용한 사용자의 입력에 따라 상기 2D-3D 변환 품질을 선택하는 단계와; 상기 3D컨텐츠제공장치로부터 상기 사용자단말기로 상기 선택된 2D-3D 변환 품질을 가지는 상기 선택된 컨텐츠의 3D컨텐츠를 전송하는 단계를 포함하는 3D컨텐츠제공방법에 의해서도 달성될 수 있다.
3D컨텐츠제공방법은, 상기 3D컨텐츠제공장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계를 더 포함할 수 있다.
3D컨텐츠제공방법은, 상기 3D컨텐츠제공장치가 컨텐츠변환장치로 상기 선택된 컨텐츠 및 상기 선택된 2D-3D 변환 품질에 관한 정보를 전송하는 단계와; 상기 컨텐츠변환장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계와; 상기 3D컨텐츠제공장치가 상기 컨텐츠변환장치로부터 상기 3D컨텐츠를 수신하는 단계를 더 포함할 수 있다.
상기 변환하는 단계는, 상기 선택된 2D-3D 변환 품질에 대응하여, 변환 품질이 서로 다른 복수의 변환 프로세스 각각의 수행 정도를 결정하는 단계와; 상기 결정된 복수의 변환 프로세스 각각의 수행 정도에 기초하여, 상기 2D컨텐츠의 복수의 프레임을 상기 복수의 변환 프로세스 각각에 대응하는 복수의 프레임군으로 분류하는 단계와; 상기 분류된 복수의 프레임군에 대하여 상기 복수의 변환 프로세스를 각각 수행하는 단계를 포함할 수 있다.
상기 분류하는 단계는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 샘플링 레이트로 상기 복수의 프레임을 다운 샘플링하여 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 단계를 포함할 수 있다.
상기 분류하는 단계는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 중요도에 기초하여 상기 복수의 프레임 중에서 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 단계를 포함할 수 있다.
상기 수행하는 단계는, 상기 복수의 프레임군 중 제1프레임군에 대하여 상기 복수의 변환 프로세스 중 제1변환 프로세스를 수행하는 단계와; 상기 제1프레임군에 대한 상기 제1변환 프로세스의 수행 결과를 이용하여 상기 복수의 프레임군 중 제2프레임군에 대하여 제2변환 프로세스를 수행하는 단계를 포함할 수 있다.
3D컨텐츠제공방법은, 상기 제2변환 프로세스는 상기 제1변환 프로세스의 수행 결과를 이용한 보간 또는 트래킹을 포함할 수 있다.
본 발명의 상기 목적은, 2D컨텐츠로부터 변환된 3D컨텐츠를 제공하는 3D컨텐츠제공장치에 있어서, 사용자단말기와 통신하는 통신부와; 복수의 컨텐츠의 정보를 상기 사용자단말기에 표시 가능하도록 전송하고, 상기 사용자단말기로부터 수신되는 사용자의 입력에 따라 상기 복수의 컨텐츠 중 어느 하나를 선택하며, 상기 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 상기 사용자단말기에 표시 가능하도록 전송하고, 상기 사용자단말기로부터 수신되는 사용자의 입력에 따라 상기 2D-3D 변환 품질을 선택하여 상기 선택된 2D-3D 변환 품질을 가지는 상기 선택된 컨텐츠의 3D컨텐츠가 전송되도록 제어를 수행하는 제어부를 포함하는 3D컨텐츠제공장치에 의해서도 달성될 수 있다.
3D컨텐츠제공장치는, 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 변환부를 더 포함할 수 있다.
상기 제어부는, 컨텐츠변환장치로 상기 선택된 컨텐츠 및 상기 선택된 2D-3D 변환 품질에 관한 정보를 전송하고, 상기 컨텐츠변환장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠로부터 변환한 상기 3D컨텐츠를 상기 컨텐츠변환장치로부터 수신하도록 제어를 수행할 수 있다.
상기 변환부는, 상기 선택된 2D-3D 변환 품질에 대응하여, 변환 품질이 서로 다른 복수의 변환 프로세스 각각의 수행 정도를 결정하고, 상기 결정된 복수의 변환 프로세스 각각의 수행 정도에 기초하여, 상기 2D컨텐츠의 복수의 프레임을 상기 복수의 변환 프로세스 각각에 대응하는 복수의 프레임군으로 분류하여, 상기 분류된 복수의 프레임군에 대하여 상기 복수의 변환 프로세스를 각각 수행할 수 있다.
상기 변환부는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 샘플링 레이트로 상기 복수의 프레임을 다운 샘플링하여 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정할 수 있다.
상기 변환부는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 중요도에 기초하여 상기 복수의 프레임 중에서 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정할 수 있다.
상기 변환부는, 상기 복수의 프레임군 중 제1프레임군에 대하여 상기 복수의 변환 프로세스 중 제1변환 프로세스를 수행하고, 상기 제1프레임군에 대한 상기 제1변환 프로세스의 수행 결과를 이용하여 상기 복수의 프레임군 중 제2프레임군에 대하여 제2변환 프로세스를 수행할 수 있다.
3D컨텐츠제공장치는, 상기 제2변환 프로세스는 상기 제1변환 프로세스의 수행 결과를 이용한 보간 또는 트래킹을 포함할 수 있다.
상기한 바와 같이, 본 발명에 의하면, 적은 비용으로 우수한 품질의 3D컨텐츠를 제공할 수 있다.
또한 본 발명에 의하면, 3D컨텐츠의 원활한 제공으로 컨텐츠 산업 및 디스플레이 산업을 활성화시킬 수 있다.
도 1은 본 발명의 일실시예에 의한 3D컨텐츠제공장치의 구성을 도시한 블록도이며,
도 2는 도 1에 도시된 3D컨텐츠제공장치의 동작을 도시한 흐름도이며,
도 3은 도 1 및 2에 도시된 3D컨텐츠제공장치가 수행하는 2D-3D변환 프로세스의 일례를 도시하며,
도 4는 도 1 내지 3에 도시된 3D컨텐츠제공장치의 동작의 다른 예를 도시한 흐름도이며,
도 5는 도 1 내지 3에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 6은 본 발명의 다른 실시예에 의한 3D컨텐츠제공장치의 구성을 도시한 블록도이며,
도 7은 도 6에 도시된 3D컨텐츠제공장치의 동작을 도시한 흐름도이며,
도 8은 도 6에 도시된 3D컨텐츠제공장치의 동작의 다른 예를 도시한 흐름도이며,
도 9 및 10은 도 1 내지 3에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 11 및 12는 도 6에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 13은 도 1 내지 3에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 14는 도 6에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 15는 도 1 내지 3에 도시된 3D컨텐츠제공장치 또는 도 6에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 16은 도 1 내지 3 또는 도 6에 도시된 3D컨텐츠제공장치의 동작의 또 다른 예를 도시한 흐름도이며,
도 17은 사용자단말기에 표시되는 복수의 컨텐츠에 관한 정보의 GUI의 일례를 도시하며,
도 18은 사용자단말기에 표시되는 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질에 관한 정보의 GUI의 일례를 도시하며,
도 19는 도 16 내지 18을 참조하여 설명한 3D컨텐츠제공장치가 수행하는 2D-3D변환 동작의 일례를 도시한다.
이하, 본 발명의 일실시예에 관하여 상세히 설명한다.
도 1은 본 발명의 일실시예에 의한 3D컨텐츠제공장치의 구성을 도시한 블록도이다. 3D컨텐츠제공장치(1)는 2차원의 컨텐츠(이하, '2D컨텐츠'라고 함)로부터 변환된 3D컨텐츠를 제공한다. 본 실시예의 컨텐츠는, 동영상컨텐츠로서, 예컨대 영화, 드라마, 스포츠경기 등의 컨텐츠를 포함한다. 본 실시예의 3D컨텐츠는 2D컨텐츠로부터 변환된다.
3D컨텐츠제공장치(1)는 네트워크(4)를 통해서 사용자단말기(3)에 3D컨텐츠를 제공한다. 사용자단말기(3)는 3D컨텐츠제공장치(1)로부터 제공된 3D컨텐츠를 3차원의 입체 영상으로 디스플레이할 수 있는 기능을 가진다. 사용자단말기(3)는 예컨대, TV, PC, 스마트폰, 스마트패드, PMP, MP3플레이어 등으로 구현될 수 있다. 다만 사용자단말기(3)는 이에 한정되지 않으며, 3D컨텐츠를 3D컨텐츠제공장치(1)로부터 제공받아, 3차원의 입체 영상으로 디스플레이할 수 있는 장치를 모두 포함한다.
네트워크(4)는 유선 및/또는 무선으로 3D컨텐츠의 전송을 위하여 3D컨텐츠제공장치(1)와, 사용자단말기(3) 간의 데이터 통신을 수행한다. 3D컨텐츠의 전송을 위한 데이터 통신이라면, 네트워크(4)의 통신 방식에는 아무런 제한이 없으며, 알려진 통신 방식을 모두 포함한다.
3D컨텐츠제공장치(1)는 2D컨텐츠제공장치(2)로부터 3D컨텐츠로 변환할 2D컨텐츠를 제공받을 수 있다. 3D컨텐츠제공장치(1)는 네트워크(4)를 통해서 2D컨텐츠를 2D컨텐츠제공장치(2)로부터 제공받을 수 있다. 이 경우, 2D컨텐츠제공장치(2)는 예컨대 네트워크서버로서, 2D컨텐츠를 저장하고, 3D컨텐츠제공장치(1)의 요청에 따라 2D컨텐츠를 3D컨텐츠제공장치(1)에 전송할 수 있다. 다른 실시예로서, 네트워크(4)가 아닌 다른 데이터 전송 수단을 통하여 2D컨텐츠제공장치(2)로부터 제공받을 수도 있다. 예컨대, 2D컨텐츠제공장치(2)는 2D컨텐츠를 저장하는 하드디스크, 플래시메모리 등과 같은 저장수단을 구비하는 장치로서, 3D컨텐츠제공장치(1)에 로컬 장치로서 연결되어 3D컨텐츠제공장치(1)의 요청에 따라 2D컨텐츠를 3D컨텐츠제공장치(1)에 전송할 수 있다. 이 경우, 2D컨텐츠의 데이터 전송을 위한 것이라면, 3D컨텐츠제공장치(1)와, 2D컨텐츠제공장치(2) 간의 로컬 연결 방식에는 제한이 없으며, 예컨대, USB 등을 포함한다.
3D컨텐츠제공장치(1)는, 도 1에 도시된 바와 같이, 통신부(11), 변환부(12) 및 제어부(13)를 포함할 수 있다. 통신부(11)는 2D컨텐츠제공장치(2) 및 3D컨텐츠제공장치(1) 간의 데이터 통신과, 사용자단말기(3) 및 3D컨텐츠제공장치(1) 간의 데이터 통신을 수행한다.
변환부(12)는 2D컨텐츠를 3D컨텐츠로 변환한다. 2D컨텐츠는 복수의 영상프레임(이하, '프레임'이라고 함)을 포함한다. 3D컨텐츠는 시청자의 양안 시차를 이용하는 것으로서, 복수의 좌안프레임 및 복수의 우안프레임을 포함할 수 있다. 복수의 좌안프레임 및 복수의 우안프레임 중 한 쌍의 좌안프레임과, 우안프레임은, 2D컨텐츠의 복수의 프레임 중에서 대응하는 적어도 어느 하나로부터 각각 변환될 것일 수 있다. 변환부(12)에 의해 수행되는 2D컨텐츠로부터 3D컨텐츠로의 변환(이하, '2D-3D변환'이라고 함)에 대해서는 아래에 다시 상술한다.
제어부(13)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신하여, 수신된 2D컨텐츠가 3D컨텐츠로 변환되도록 하고, 변환된 3D컨텐츠가 사용자단말기(3)에 전송되도록 제어를 수행한다. 제어부(13)는 이러한 제어의 수행에 대응하는 제어프로그램이 저장된 하드디스크, 플래시메모리 등의 비휘발성의 메모리(도시 안됨)와, 저장된 제어프로그램의 적어도 일부가 로딩되는 RAM과 같은 휘발성의 메모리(도시 안됨)와, 로딩된 제어프로그램을 실행하는 CPU(도시 안됨)를 포함할 수 있다.
도 2는 도 1에 도시된 3D컨텐츠제공장치(1)의 동작을 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신한다(201). 다음으로, 3D컨텐츠제공장치(1)는 수신된 2D컨텐츠를 3D컨텐츠로 변환한다(202). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(203). 변환된 3D컨텐츠의 전송은, 예컨대, VOD서비스에 의해 이루어질 수 있다.
도 3은 도 1 및 2에 도시된 3D컨텐츠제공장치(1)가 수행하는 2D-3D변환 프로세스의 일례를 도시한다. 본 실시예의 2D-3D변환 프로세스는, 키프레임 선택(301), 오브젝트 추출(302), 깊이(depth) 할당(303), 트래킹(tracking; 304) 및 렌더링(rendering; 305)을 포함할 수 있다.
키프레임 선택(301)에서는, 2D컨텐츠의 복수의 프레임 중에서 임의의 키프레임이 선정된다. 키프레임으로서는, 2D컨텐츠의 복수의 프레임 중에서 영상의 내용을 대표할 수 있는 프레임이 선정될 수 있다. 예컨대, 키프레임은, 장면이 전환되는 프레임, 장면의 주인공이 클로즈업되는 프레임 등일 수 있다.
오브젝트 추출(302)에서는, 선정된 키프레임에 대하여 오브젝트가 추출된다. 오브젝트는 각 프레임의 장면 중에 포함된 주요한 대상으로서, 예컨대, 주인공이 등장하는 장면에서 주인공인 인물의 이미지, 차량이 달리는 장면에서 해당 차량의 이미지 등을 들 수 있다. 오브젝트 추출(202)에서는, 해당 프레임의 영상을 분할(segmentation)하여 그 결과로부터 오브젝트의 경계(boundary)를 추출할 수 있다.
깊이 할당(303)에서는, 오브젝트 추출(302)의 프로세스에서 추출된 오브젝트에 대하여 깊이가 할당된다. 깊이는 3차원의 시각 효과를 내기 위한 파라미터로서, 대응하는 좌안프레임 및 우안프레임에서 오브젝트를 할당된 파라미터의 값만큼 각각 좌측 및 우측방향으로 이동(shift)시키는데 이용된다. 깊이 할당(203)에서는, 미리 마련된 정형화된 템플릿(template)을 이용하여 깊이가 할당될 수 있다.
트래킹(304)에서는, 키프레임이 아닌 나머지 프레임에 대하여 대응하는 좌안프레임 및 우안프레임이 생성된다. 트래킹(304)은 키프레임에 수행된 오브젝트 추출(302) 및 깊이 할당(303)을 참조하여 수행될 수 있다.
렌더링(305)에서는 깊이 할당(303) 및 트래킹(304)이 수행된 좌안프레임 및 우안프레임에 대하여 완성된 3차원의 영상을 위한 이미지 처리가 수행된다. 예컨대, 렌더링(305)에서는 오브젝트의 이동에 따라 발생한 빈 영역을 채우는 처리, 이른바, 인페인팅(inpainting) 등이 수행될 수 있다.
본 실시예의 2D-3D변환 프로세스 중 적어도 하나의 프로세스는, 사용자의 입력에 따라 수행되는 수동프로세스 및 미리 정해진 기준정보에 따라 수행되는 자동프로세스를 포함할 수 있다. 예컨대, 오브젝트 추출(302), 깊이 할당(303) 등의 프로세스에서, 일부의 프레임은 수동프로세스에 의해 처리되고, 나머지 프레임에 대해서는 자동프로세스에 의해 처리될 수 있다.
수동프로세스에서는, 사용자의 입력에 따라 변환 처리가 수행될 수 있다. 3D컨텐츠제공장치(1)는 사용자의 입력을 위하여 키보드, 마우스, 태블릿 등과 같은 사용자입력부(도시 안됨)을 더 포함할 수 있다. 또한, 3D컨텐츠제공장치(1)는 사용자가 변환 처리 상황을 확인할 수 있도록, 변환 처리되는 영상을 디스플레이하는 모니터 등과 같은 디스플레이부(도시 안됨)를 더 포함할 수 있다. 3D컨텐츠제공장치(1)는 효과적으로 사용자의 입력을 수신하기 위하여, 디스플레이부에 처리되는 프레임의 영상과, 소정 입력메뉴 등을 포함하는 GUI(도시 안됨)을 표시할 수 있다. 사용자는 디스플레이부에 표시되는 프레임의 영상을 확인하면서, GUI의 입력메뉴 등을 이용하여 변환 처리를 위한 입력을 할 수 있다. 예컨대, 사용자는 프레임의 영상에 포함된 오브젝트를 확인하면서, GUI의 입력메뉴 등을 이용하여 해당 오브젝트가 추출되도록 입력 조작을 할 수 있다.
자동프로세스에서는, 미리 정해진 기준정보에 따라 프로세스가 수행된다. 예컨대, 키프레임 선택(301)에 있어서, 프레임의 영상의 모션을 분석하여, 모션이 소정 문턱치 이상인 오브젝트를 키프레임으로 선택할 수 있다. 여기에서 기준정보는 키프레임으로 선택하도록 하는 모션의 문턱치일 수 있다.
추가적인 실시예로서, 변환부(12)는 렌더링(305)이 수행된 프레임에 대하여 3D화질처리를 더 수행할 수 있다. 3D화질처리는 콘트라스트향상(contrast enhancement), 디테일향상(detail enhancement) 등을 포함한다.
도 2를 다시 참조하면, 제어부(13)는 변환될 3D컨텐츠의 품질을 결정하고, 결정된 3D컨텐츠의 품질에 대응하여 2D-3D변환 프로세스가 수행되도록 변환부(12)를 제어할 수 있다. 3D컨텐츠의 품질은, 어느 2D-3D변환 프로세스에 있어서, 수동프로세스 및 자동프로세스가 각각 얼마나 수행되는지에 의해 결정될 수 있다. 예컨대, 오브젝트 추출(302)에 있어서, 수동프로세스와, 자동프로세스가 각각 절반씩 이루어진 경우 등을 들 수 있다. 3D컨텐츠의 품질은, 어느 2D-3D변환 프로세스 전체 중에서 자동프로세스(혹은 수동프로세스)가 수행되는 비율(이하, '조합비율'이라고도 함)로 나타낼 수 있다.
3D컨텐츠의 품질은, 복수의 품질모드를 포함하며, 제어부(13)는 복수의 품질모드 중 어느 하나를 선택할 수 있다. 복수의 품질모드는, 예컨대, 품질이 높아지는 순으로, '간이(Simple) 모드', '기본(Basic) 모드', '향상된(Advanced) 모드' 및 '전문가(Expert) 모드'를 포함할 수 있다. 이들 품질모드는, 각각의 조합비율(자동프로세스의 수행 비율)이, 예컨대 85% 초과, 85%, 70% 및 50%일 수 있다.
제어부(13)는 2D컨텐츠의 종류 혹은 속성에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다. 예컨대, 2D컨텐츠가 최신 개봉작인 영화의 경우, 상대적으로 높은 품질로 결정하고, 제작된지 오래된 영화는 상대적으로 낮은 품질로 결정할 수 있다. 다른 예로서, 블록버스터와 같은 스케일이 큰 영화의 경우, 상대적으로 높은 품질로 결정하고, 스토리 전개 위주의 영화는 상대적으로 낮은 품질로 결정할 수 있다. 또 다른 예로서, 스포츠, 영화, 드라마 등과 같은 컨텐츠의 장르에 따라 3D컨텐츠의 품질을 결정할 수도 있다.
다른 실시예로서, 제어부(13)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 3D컨텐츠의 품질을 결정할 수 있다. 제어부(13)는 사용자단말기(3)의 사용자가 3D컨텐츠의 품질을 결정할 수 있도록, 제공 가능한 3D컨텐츠의 품질에 관한 정보를 사용자단말기(3)에 전송할 수 있다. 3D컨텐츠의 품질에 관한 정보는, 품질 모드에 따른 화질 특성 등을 소개하는 제품정보와, 품질모드에 따른 여러 가격대를 안내하는 가격정보 등을 포함할 수 있다. 사용자단말기(3)는 전송된 3D컨텐츠의 품질에 관한 정보를 소정 GUI를 이용하여 디스플레이할 수 있다. 사용자단말기(3)의 사용자는 디스플레이된 품질정보 및 GUI를 통해 원하는 3D컨텐츠의 품질을 결정할 수 있다. 사용자단말기(3)는 사용자가 결정한 3D컨텐츠의 품질에 대응하는 컨텐츠 제공 요청을 3D컨텐츠제공장치(1)에 전송한다. 제어부(13)는 전송된 컨텐츠 제공 요청에 따른 품질 모드로 3D컨텐츠가 변환되도록 제어한다.
추가적인 실시예로서, 제어부(13)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정할 수 있다. 제어부(13)는 사용자단말기(3)의 사용자가 2D컨텐츠를 결정할 수 있도록, 변환 가능한 2D컨텐츠에 관한 정보를 사용자단말기(3)에 전송할 수 있다. 2D컨텐츠에 관한 정보는, 2D컨텐츠의 제목, 내용 등을 포함할 수 있다. 사용자단말기(3)는 전송된 2D컨텐츠에 관한 정보를 소정 GUI를 이용하여 디스플레이할 수 있다. 사용자단말기(3)의 사용자는 디스플레이된 정보 및 GUI를 통해 변환을 원하는 2D컨텐츠를 선택할 수 있다. 사용자단말기(3)는 사용자가 선택한 2D컨텐츠에 대응하는 컨텐츠 제공 요청을 3D컨텐츠제공장치(1)에 전송한다. 제어부(13)는 전송된 컨텐츠 제공 요청에 따른 2D컨텐츠가 3D컨텐츠로 변환되도록 제어한다.
도 4는 도 1 내지 3에 도시된 3D컨텐츠제공장치(1)의 동작의 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신한다(401). 다음으로, 3D컨텐츠제공장치(1)는 변환할 3D컨텐츠의 품질을 결정한다(402). 다음으로, 3D컨텐츠제공장치(1)는 결정된 3D컨텐츠의 품질에 대응하여 2D컨텐츠를 3D컨텐츠로 변환한다(403). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(404).
도 5는 도 1 내지 3에 도시된 3D컨텐츠제공장치(1)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정한다(501). 다음으로, 3D컨텐츠제공장치(1)는 2D컨텐츠제공장치(2)로부터 결정된 2D컨텐츠를 수신한다(502). 다음으로, 3D컨텐츠제공장치(1)는 수신된 2D컨텐츠를 3D컨텐츠로 변환한다(503). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(504).
도 6은 본 발명의 다른 실시예에 의한 3D컨텐츠제공장치(1a)의 구성을 도시한 블록도이다. 도 6에 도시된 3D컨텐츠제공장치(1a)에 관하여 도 1 내지 도 5을 참조하여 설명한 3D컨텐츠제공장치(1)와 동일 내지 유사한 구성에 대해서는 설명을 생략한다.
3D컨텐츠제공장치(1a)는, 컨텐츠변환장치(5)로부터 2D컨텐츠로부터 변환된 3D컨텐츠를 수신하여, 이를 사용자단말기(3)에 제공한다. 3D컨텐츠제공장치(1a)는, 도 6에 도시된 바와 같이, 통신부(11), 저장부(14) 및 제어부(13a)를 포함할 수 있다. 통신부(11a)는 2D컨텐츠제공장치(2) 및 3D컨텐츠제공장치(1a) 간의 데이터 통신과, 사용자단말기(3) 및 3D컨텐츠제공장치(1a) 간의 데이터 통신과, 컨텐츠변환장치(5) 및 3D컨텐츠제공장치(1a) 간의 데이터 통신을 수행한다.
저장부(14)는 컨텐츠변환장치(5)로부터 수신된 변환된 3D컨텐츠를 저장한다.
제어부(13a)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신하여, 수신된 2D컨텐츠를 컨텐츠변환장치(5)로 전송되도록 하고, 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신하여, 수신된 3D컨텐츠가 사용자단말기(3)에 전송되도록 제어를 수행한다.
도 7은 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작을 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1a)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신한다(701). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 2D컨텐츠를 컨텐츠변환장치(5)로 전송한다(702). 다음으로, 3D컨텐츠제공장치(1a)는 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신한다(703). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 3D컨텐츠를 사용자단말기(3)에 전송한다(704).
도 8은 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1a)는 2D컨텐츠제공장치(2)로부터 2D컨텐츠를 수신한다(801). 다음으로, 3D컨텐츠제공장치(1a)는 변환할 3D컨텐츠의 품질을 결정한다(802). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 2D컨텐츠를 컨텐츠변환장치(5)로 전송하고, 결정된 3D컨텐츠의 품질에 대응하여 2D컨텐츠를 3D컨텐츠로 변환되도록 컨텐츠변환장치(5)에 요청한다(803). 다음으로, 3D컨텐츠제공장치(1a)는 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신한다(804). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 3D컨텐츠를 사용자단말기(3)에 전송한다(805).
도 9는 도 1 내지 3에 도시된 3D컨텐츠제공장치(1)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정한다(901). 다음으로, 3D컨텐츠제공장치(1)는 결정된 2D컨텐츠를 3D컨텐츠로 변환한다(902). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(903).
도 10은 도 1 내지 3에 도시된 3D컨텐츠제공장치(1)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정한다(1001). 다음으로, 3D컨텐츠제공장치(1)는 변환할 3D컨텐츠의 품질을 결정한다(1002). 다음으로, 3D컨텐츠제공장치(1)는 결정된 3D컨텐츠의 품질에 대응하여 2D컨텐츠를 3D컨텐츠로 변환한다(1003). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(1004).
도 11은 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1a)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정한다(1101). 다음으로, 3D컨텐츠제공장치(1a)는 결정된 2D컨텐츠를 3D컨텐츠로 변환하도록 컨텐츠변환장치(5)에 요청한다(1102). 다음으로, 3D컨텐츠제공장치(1a)는 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신한다(1103). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 3D컨텐츠를 사용자단말기(3)에 전송한다(1104).
도 12는 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1a)는 사용자단말기(3)의 사용자의 요청에 따라 변환될 2D컨텐츠를 결정한다(1201). 다음으로, 3D컨텐츠제공장치(1a)는 변환할 3D컨텐츠의 품질을 결정한다(1202). 다음으로, 3D컨텐츠제공장치(1a)는 결정된 3D컨텐츠의 품질에 대응하여 변환을 원하는 2D컨텐츠를 3D컨텐츠로 변환하도록 컨텐츠변환장치(5)에 요청한다(1203). 다음으로, 3D컨텐츠제공장치(1a)는 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신한다(1204). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 3D컨텐츠를 사용자단말기(3)에 전송한다(1205).
도 13은 도 1 내지 3에 도시된 3D컨텐츠제공장치(1)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1)는 변환할 3D컨텐츠의 품질을 결정한다(1301). 다음으로, 3D컨텐츠제공장치(1)는 결정된 3D컨텐츠의 품질에 대응하여 2D컨텐츠를 3D컨텐츠로 변환한다(1302). 다음으로, 3D컨텐츠제공장치(1)는 변환된 3D컨텐츠를 사용자단말기(3)에 전송한다(1303).
도 14는 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1a)는 변환할 3D컨텐츠의 품질을 결정한다(1401). 다음으로, 3D컨텐츠제공장치(1a)는 결정된 3D컨텐츠의 품질에 대응하여 변환을 원하는 2D컨텐츠를 3D컨텐츠로 변환하도록 컨텐츠변환장치(5)에 요청한다(1402). 다음으로, 3D컨텐츠제공장치(1a)는 컨텐츠변환장치(5)로부터 변환된 3D컨텐츠를 수신한다(1403). 다음으로, 3D컨텐츠제공장치(1a)는 수신된 3D컨텐츠를 사용자단말기(3)에 전송한다(1404).
도 15는 도 1 내지 3에 도시된 3D컨텐츠제공장치(1) 또는 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 또 다른 예를 도시한 흐름도이다. 먼저, 3D컨텐츠제공장치(1 또는 1a)는 2D-3D변환에 의해 생성된 제1 3D컨텐츠 및 제2 3D컨텐츠를 획득한다(1501). 제1 3D컨텐츠 및 제2 3D컨텐츠는 서로 다른 2D-3D변환의 조합비율에 의해 생성되는 3D컨텐츠이다. 다음으로, 3D컨텐츠제공장치(1 또는 1a)는 사용자단말기(3)에 제1 3D컨텐츠 및 제2 3D컨텐츠의 제품정보를 전송한다(1502). 다음으로, 3D컨텐츠제공장치(1 또는 1a)는 사용자단말기(3)로부터 컨텐츠 제공 요청을 수신한다(1503). 다음으로, 3D컨텐츠제공장치(1 또는 1a)는 제1 3D컨텐츠 및 제2 3D컨텐츠 중 사용자단말기(3)로부터 수신된 컨텐츠 제공 요청에 따라 선택된 어느 하나를 사용자단말기(3)에 전송한다(1504).
도 16은 도 1 내지 3에 도시된 3D컨텐츠제공장치(1) 또는 도 6에 도시된 3D컨텐츠제공장치(1a)의 동작의 또 다른 예를 도시한 흐름도이다. 이하, 설명의 편의상 3D컨텐츠제공장치(1)를 대표적으로 설명하고, 다른 설명이 없는 한 3D컨텐츠제공장치(1a)에도 적용될 수 있는 것으로 한다. 도 16을 참조하여 설명되는 3D컨텐츠제공장치(1)의 구성 중 도 1 내지 15를 참조하여 설명한 3D컨텐츠제공장치(1)와 동일 내지 유사한 사항의 설명은 생략한다.
사용자는 3D컨텐츠를 이용하고자 하는 경우 사용자단말기(3)를 이용하여 네트워크(4)를 통하여 3D컨텐츠제공장치(1)에 접속한다. 동작 1601에서, 3D컨텐츠제공장치(1)는 2D-3D 변환이 가능한 복수의 컨텐츠의 정보를 사용자단말기(3)에 전송하고, 사용자단말기(3)는 수신된 복수의 컨텐츠의 정보를 디스플레이부(도시 안됨)에 표시한다. 3D컨텐츠제공장치(1)는 2D-3D 변환이 가능한 복수의 컨텐츠의 정보를 저장부(도시 안됨)에 저장해 둘 수도 있고, 외부의 장치, 예컨대, 2D 컨텐츠제공장치(2)로부터 정보를 수신할 수도 있다.
도 17은 사용자단말기(3)가 표시하는 복수의 컨텐츠에 관한 정보의 GUI의 일례를 도시한다. 도 17에 도시된 바와 같이, GUI(171)는, 3D컨텐츠제공장치(1)가 2D-3D 변환을 수행하여 제공할 수 있는 복수의 컨텐츠에 관한 정보(172)를 포함한다. 복수의 컨텐츠에 관한 정보(172)는 컨텐츠의 이름, 장르, 재생시간, 줄거리, 등장인물 등의 정보를 포함할 수 있다. 컨텐츠에 관한 정보(172)는 아이콘의 형태로 선택 가능하게 표시될 수 있다. 사용자는 사용자단말기(3)의 입력수단을 이용하여 원하는 컨텐츠를 선택할 수 있다. 도 17에서는 '컨텐츠2'가 선택된 상태를 일례로서 도시한다. 3D컨텐츠제공장치(1)는 사용자단말기(3)로부터 전송되는 정보에 기초하여 소정 컨텐츠가 선택되었음을 확인한다.
다음으로, 도 16을 참조하면, 동작 1603에서, 3D컨텐츠제공장치(1)는 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 사용자단말기(3)에 전송하고, 사용자단말기(3)는 제공 가능한 2D-3D 변환 품질의 정보를 디스플레이부에 표시한다. 3D컨텐츠제공장치(1)는 각 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 저장부에 저장해 둘 수 있다. 도 18은 사용자단말기(3)가 표시하는 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질에 관한 정보의 GUI의 일례를 도시한다. 도 18에 도시된 바와 같이, GUI(181)는, 3D컨텐츠제공장치(1)가 2D-3D 변환을 수행하여 제공할 수 있는 다양한 변환 품질에 관한 정보(182)를 포함한다. 변환 품질에 관한 정보(182)는, 예컨대, 품질이 높은 순으로 '최상', '우수', '보통', '간이', 4가지의 변환 품질에 관한 정보일 수 있다. 다만, 변환 품질에 관한 정보(182)는 하나의 예시일 뿐이며, 이에 한정되지 아니하고, 다양하게 적용될 수 있다. 예컨대, 3가지 혹은 5가지의 변환 품질일 수도 있다. GUI(181)는, 각 변환 품질에 대응하여 변환에 소요되는 비용에 관한 정보(183)를 더 포함할 수 있다. 그 밖에, 도시되지는 않으나, GUI(181)는, 각 변환 품질이 어떠한 특성을 가지는지에 관한 설명, 각 변환 품질에 대응하여 변환에 소요되는 시간(변환된 3D컨텐츠가 미리 마련되어 있지 않은 경우 변환된 3D컨텐츠를 이용할 수 있게 되는 시기) 등에 관한 안내 정보나, 해당 컨텐츠의 특성에 대응하여 적절한 변환 품질의 추천 정보 등을 더 포함할 수 있다.
변환 품질에 관한 정보(182)는 아이콘의 형태로 선택 가능하게 표시될 수 있다. 사용자는 사용자단말기(3)의 입력수단을 이용하여 원하는 어느 하나의 변환 품질을 선택할 수 있다. 도 18에서는 '우수'에 해당하는 변환 품질이 선택된 상태를 일례로서 도시한다. 다만, 이러한 변환 품질의 선택은 하나의 예시일 뿐이며, 다양하게 구현될 수 있다. 예컨대, 제공 가능한 변환 품질을 미리 구분하여 표시하지 아니하고, 사용자가 원하는 품질을 직접 입력(변환 품질을 자유로이 조정)하도록 할 수도 있다.
동작 1604에서, 3D컨텐츠제공장치(1)는 사용자단말기(3)로부터 전송되는 정보에 기초하여 소정 변환 품질이 선택되었음을 확인한다. 동작 1605에서, 3D컨텐츠제공장치(1)는 동작1602에서 선택된 컨텐츠로서 동작 1604에서 선택된 변환 품질을 가지는 3D컨텐츠를 사용자단말기(3)로 전송한다.
3D컨텐츠제공장치(1)는 2D컨텐츠로부터 변환된 다양한 변환 품질의 3D컨텐츠를 미리 저장부에 구비해 둘 수 있다. 3D컨텐츠제공장치(1)는 선택된 변환 품질을 가지는 3D컨텐츠가 미리 마련되어 있는 경우 해당 3D컨텐츠를 사용자단말기(3)로 바로 전송할 수 있다. 다른 경우로서, 선택된 변환 품질을 가지는 3D컨텐츠가 미리 마련되어 있지 않은 경우, 선택된 변환 품질을 가지도록 2D-3D 변환을 수행하여 얻은 3D컨텐츠를 사용자단말기(3)로 전송할 수 있다. 2D-3D 변환은 3D컨텐츠제공장치(1)가 직접 수행하거나, 도 6에 도시된 바와 같이, 3D컨텐츠제공장치(1a)가 외부의 컨텐츠변환장치(5)를 이용하여 수행될 수 있다. 후자의 경우, 3D컨텐츠제공장치(1a)는 선택된 컨텐츠 및 변환 품질에 관한 정보를 컨텐츠변환장치(5)에 전송하여, 변환을 요청하며, 변환 완료 후 컨텐츠변환장치(5)로부터 3D컨텐츠를 수신할 수 있다.
도 19는 도 16 내지 18을 참조하여 설명한 3D컨텐츠제공장치(1)가 수행하는 2D-3D변환 동작의 일례를 도시한다. 도 19를 참조하여 설명되는 3D컨텐츠제공장치(1)의 구성 중 도 1 내지 15를 참조하여 설명한 3D컨텐츠제공장치(1)와 동일 내지 유사한 사항의 설명은 생략한다. 먼저, 동작 1901에서, 3D컨텐츠제공장치(1)는 2D-3D변환에 적용할 복수의 변환 프로세스 각각의 수행 정도를 결정한다. 본 실시예에서의 복수의 변환 프로세스는, 2D-3D 변환 품질이 상대적으로 높은 제1변환 프로세스와, 제1변환 프로세스보다는 변환 품질이 상대적으로 낮은 제2변환 프로세스를 포함할 수 있다. 제1변환 프로세스는, 예컨대, 변환 작업을 수행하는 작업자의 입력에 따라 오브젝트를 추출하거나, 깊이를 할당하는 프로세스를 포함한다. 제2변환 프로세스는, 제1변환 프로세스의 수행 결과를 이용하여 프레임을 보간하거나, 트래킹을 수행하는 것을 포함한다. 다만, 제1변환 프로세스와, 제2변환 프로세스는 이러한 예시에 한정되지 않으며, 변환 품질이 상이한 다양한 형태의 변환 프로세스를 포함할 수 있다. 나아가, 복수의 변환 프로세스는, 2개의 변환 프로세스에 한정되지 않으며, 3이상의 변환 프로세스를 포함할 수도 있다.
동작 1901에서, 3D컨텐츠제공장치(1)는 동작 1604에서 선택된 변환 품질('변환 품질 선택 정보' 참조)에 기초하여 복수의 변환 프로세스(제1변환 프로세스, 제2변환 프로세스 등) 각각의 수행 정도를 결정할 수 있다. 복수의 변환 프로세스가 높은 변환 품질에 대응하는 제1변환 프로세스 및 낮은 변환 품질에 대응하는 제2변환 프로세스를 포함하는 경우, 선택된 변환 품질이 높은 경우, 제1변환 프로세스의 수행 정도는 제2변환 프로세스의 수행 정도에 비하여 크도록 결정된다(제2변환 프로세스의 수행 정도가 제1변환 프로세스의 수행 정도에 비하여 작도록 결정). 예컨대, 제1변환 프로세스가 70%로 결정되고, 제2변환 프로세스가 30%로 결정될 수 있다. 반대로, 변환 품질이 낮은 경우, 제1변환 프로세스의 수행 정도가 제2변환 프로세스의 수행 정도에 비하여 작도록 결정된다(제2변환 프로세스의 수행 정도가 제1변환 프로세스의 수행 정도에 비하여 작도록 결정). 예컨대, 제1변환 프로세스가 30%로 결정되고, 제2변환 프로세스가 70%로 결정될 수 있다. 다른 예로서, 앞서 도 18에 도시된 바와 같이, 변환 품질을 미리 4가지로 구분해 둔 경우, 3D컨텐츠제공장치(1)는 4가지의 변환 품질 중에서 선택된 어느 하나의 변환 품질에 대응하도록 복수의 변환 프로세스 각각의 수행 정도를 결정할 수 있다. 이 경우, 각 변환 품질에 대응하는 복수의 변환 프로세스 각각의 수행 정도에 관한 정보는 미리 마련되어 저장부에 저장될 수 있으며, 3D컨텐츠제공장치(1)는 이를 참조하여 복수의 변환 프로세스 각각의 수행 정도를 결정할 수 있다.
동작 1901에서 복수의 변환 프로세스 각각의 수행 정도가 결정되면, 동작 1902에서, 3D컨텐츠제공장치(1)는 결정된 복수의 변환 프로세스 각각의 수행 정도에 기초하여, 변환하고자 하는 2D컨텐츠의 복수의 프레임을, 복수의 변환 프로세스 각각에 대응하는 복수의 프레임군으로 분류한다. 복수의 변환 프로세스가 제1변환 프로세스와, 제2변환 프로세스를 포함하는 경우, 3D컨텐츠제공장치(1)는 2D컨텐츠의 복수의 프레임을 제1변환 프로세스를 적용할 제1프레임군과, 제2변환 프로세스를 적용할 제2프레임군으로 분류할 수 있다. 3D컨텐츠제공장치(1)는 2D컨텐츠의 복수의 프레임을 분류함에 있어서, 동작 1901에서 결정된 복수의 변환 프로세스 각각의 수행 정도를 고려한다. 예컨대, 제1변환 프로세스의 수행 정도가 70%, 제2변환 프로세스의 수행 정도가 30%로 결정된 경우, 2D컨텐츠의 전체 프레임 중에서 70%를 제1프레임군으로, 30%를 제2프레임으로 분류할 수 있다.
3D컨텐츠제공장치(1)는 분류된 복수의 프레임군 각각에 대하여 대응하는 복수의 변환 프로세스를 수행한다. 즉, 제1프레임군에 대하여 제1변환 프로세스가 수행되고, 제2프레임군에 대하여 제2변환 프로세스가 수행된다.
동작 1902에 있어서, 3D컨텐츠제공장치(1)는 상대적으로 높은 변환 품질에 대응하는 제1변환 프로세스를 적용할 제1프레임군을 소정 기준을 가지고 선별할 수 있다. 일례로서, 3D컨텐츠제공장치(1)는 동작 1901에서 결정된 제1변환 프로세스의 수행 정도에 대응하는 샘플링 레이트로 복수의 프레임을 다운 샘플링하여 제1프레임군을 결정할 수 있다. 다운 샘플링은 전체 프레임에 대하여 1/n (n=1, 2, 3, …)의 샘플링 레이트로 수행될 수 있다. 예컨대, 제1변환 프로세스가 50%인 경우, 1/2의 샘플링 레이트로 다운 샘플링이 수행되어 제1프레임군을 결정할 수 있다. 이 경우 제1프레임군은 전체 프레임 중에서 절반이 선별될 수 있다.
다른 실시예로서, 동작 1902에서, 3D컨텐츠제공장치(1)는 2D컨텐츠의 복수의 프레임 중에서, 동작 1901에서 결정된 제1변환 프로세스의 수행 정도에 대응하는 중요도 이상을 가진 제1프레임군을 결정할 수 있다. 중요도는 복수의 프레임 중에서 영상의 내용을 대표하는 정도에 대응한다. 예컨대, 장면이 전환되는 프레임, 장면의 주인공이 클로즈업되는 프레임 등은 중요도가 높을 수 있다. 중요도는, 예컨대, 해당 프레임의 영상의 모션 변화 정도에 의해 결정될 수 있다. 3D컨텐츠제공장치(1)는, 해당 프레임의 영상의 모션이 동작 1901에서 결정된 제1변환 프로세스의 수행 정도에 대응하는 값 이상인 프레임을 제1프레임군으로 결정할 수 있다. 예컨대, 제1변환 프로세스가 50%로 지정된 경우, 전체 프레임 중에서 중요도의 순으로 상위 1/2에 해당하는 프레임이 제1프레임군으로 결정될 수 있다.
다음으로, 동작 1903 및 1904에서, 3D컨텐츠제공장치(1)는 결정된 제1프레임군에 대하여 작업자의 입력에 따라 오브젝트 추출 및 깊이 할당을 수행할 수 있다. 3D컨텐츠제공장치(1)는 제1프레임군으로 선별된 프레임을 순차적으로 표시하고, 작업자가 오브젝트 추출 및 깊이 할당을 할 수 있도록 하는 GUI를 제공할 수 있다. 3D컨텐츠제공장치(1)는 GUI를 이용한 작업자의 입력에 따라 오브젝트 추출 및 깊이 할당을 수행할 수 있다. 예컨대, 작업자는 3D컨텐츠제공장치(1)의 디스플레이부(도시 안됨)에 표시된 프레임 내의 오브젝트를 추출하기 위하여, 3D컨텐츠제공장치(1)의해 제공되는 GUI를 이용하여 사용자입력부(도시 안됨)를 통해 소정 오브젝트의 경계를 나타내는 선 등을 그릴 수 있다. 3D컨텐츠제공장치(1)는 작업자의 입력에 의한 선 등을 참조하여 이를 경계로 하는 오브젝트를 추출할 수 있다. 또한, 작업자는 프레임 내의 소정 오브젝트에 대하여, 3D컨텐츠제공장치(1)의해 제공되는 GUI를 이용하여 해당 오브젝트에 할당할 깊이를 나타내는 값을 지정할 수 있다. 3D컨텐츠제공장치(1)는 작업자의 입력에 의한 값을 참조하여 오브젝트에 깊이를 할당할 수 있다. 3D컨텐츠제공장치(1)는 제1프레임군으로 선별된 모든 프레임에 대하여 오브젝트 추출 및 깊이 할당이 완료되면, 동작 1903 및 1904를 종료한다.
한편, 동작 1905에서, 3D컨텐츠제공장치(1)는 제1변환 프로세스(동작 1903, 1904)의 수행 결과를 이용하여 보간 혹은 트랙킹을 수행한다. 2D컨텐츠의 일부 프레임(제1프레임)에 대하여만 작업자의 입력에 의한 오브젝트 추출 및 깊이 할당이 이루어졌으므로, 나머지 프레임에 대하여도 해당 처리가 필요하다. 동작 1905에서, 3D컨텐츠제공장치(1)는 제1프레임군에 대하여 이루어진 오브젝트 추출 및 깊이 할당의 결과를 이용하여 2D컨텐츠의 나머지 프레임에 대한 오브젝트 추출 및 깊이 할당을 수행한다. 일례로서, 동작 1902에서 다운 샘플링을 통하여 제1프레임군을 선별한 경우, 동작 1905에서, 3D컨텐츠제공장치(1)는 업 샘플링과 보간을 수행한다. 동작 1905에서의 업 샘플링은 동작 1902에서 수행된 다운 샘플링에 대응하는 샘플링 레이트로 이루어진다. 예컨대, 동작 1902에서 다운 샘플링이 1/2의 샘플링 레이트로 수행된 경우, 동작 1905에서의 업 샘플링은 2(배)의 샘플링 레이트로 수행된다. 업 샘플링된 프레임에 대한 오브젝트 추출 및 깊이 할당은, 처리하고자 하는 프레임에 인접한 제1프레임군의 적어도 하나의 프레임에 대한 오브젝트 추출 및 깊이 할당의 결과를 보간하여 수행된다. 3D컨텐츠제공장치(1)는 업 샘플링된 모든 프레임에 대하여 보간이 완료되면, 동작 1905를 종료한다.
다른 예로서, 동작 1902에서 프레임의 중요도를 이용하여 제1프레임군을 선별한 경우, 동작 1905에서, 3D컨텐츠제공장치(1)는 트래킹을 수행한다. 3D컨텐츠제공장치(1)는 동작 1903 및 1904에서 제1프레임군에 대하여 이루어진 오브젝트 추출 및 깊이 할당의 결과를 이용한 트래킹을 실행함으로써 나머지 프레임에 대한 오브젝트 추출 및 깊이 할당을 수행한다. 동작 1905에서의 트래킹은 앞서 설명한 동작 304에서의 트래킹과 유사하게 수행될 수 있다. 3D컨텐츠제공장치(1)는 2D컨텐츠의 전체 프레임 중에서 제1프레임군을 제외한 나머지 모든 프레임에 대하여 트래킹이 완료되면, 동작 1905를 종료한다.
다음으로, 동작 1906에서, 3D컨텐츠제공장치(1)는 앞선 동작에서 오브젝트 추출 및 깊이 할당이 수행된 제1프레임군과, 업샘플링/보간 또는 트래킹이 수행된 프레임을 병합하고, 렌더링을 수행하여 3D컨텐츠를 생성한다.
이상, 바람직한 실시예를 통하여 본 발명에 관하여 상세히 설명하였으나, 본 발명은 이에 한정되는 것은 아니며 특허청구범위 내에서 다양하게 실시될 수 있다.
1: 3D컨텐츠제공장치
2: 2D컨텐츠제공장치
3: 사용자단말기
11: 통신부
12: 변환부
13: 제어부

Claims (16)

  1. 3D컨텐츠제공장치를 이용한 3D컨텐츠제공방법에 있어서,
    3D컨텐츠제공장치로부터 전송되는 복수의 컨텐츠의 정보를 사용자단말기에 표시하는 단계와;
    상기 사용자단말기를 이용한 사용자의 입력에 따라 상기 복수의 컨텐츠 중 어느 하나를 선택하는 단계와;
    상기 3D컨텐츠제공장치로부터 전송되는 정보에 기초하여 상기 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 상기 사용자단말기에 표시하는 단계와;
    상기 사용자단말기를 이용한 사용자의 입력에 따라 상기 2D-3D 변환 품질을 선택하는 단계와;
    상기 3D컨텐츠제공장치로부터 상기 사용자단말기로 상기 선택된 2D-3D 변환 품질을 가지는 상기 선택된 컨텐츠의 3D컨텐츠를 전송하는 단계를 포함하는 3D컨텐츠제공방법.
  2. 제1항에 있어서,
    상기 3D컨텐츠제공장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계를 더 포함하는 3D컨텐츠제공방법.
  3. 제1항에 있어서,
    상기 3D컨텐츠제공장치가 컨텐츠변환장치로 상기 선택된 컨텐츠 및 상기 선택된 2D-3D 변환 품질에 관한 정보를 전송하는 단계와;
    상기 컨텐츠변환장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 단계와;
    상기 3D컨텐츠제공장치가 상기 컨텐츠변환장치로부터 상기 3D컨텐츠를 수신하는 단계를 더 포함하는 3D컨텐츠제공방법.
  4. 제2항 또는 제3항에 있어서,
    상기 변환하는 단계는,
    상기 선택된 2D-3D 변환 품질에 대응하여, 변환 품질이 서로 다른 복수의 변환 프로세스 각각의 수행 정도를 결정하는 단계와;
    상기 결정된 복수의 변환 프로세스 각각의 수행 정도에 기초하여, 상기 2D컨텐츠의 복수의 프레임을 상기 복수의 변환 프로세스 각각에 대응하는 복수의 프레임군으로 분류하는 단계와;
    상기 분류된 복수의 프레임군에 대하여 상기 복수의 변환 프로세스를 각각 수행하는 단계를 포함하는 3D컨텐츠제공방법.
  5. 제4항에 있어서,
    상기 분류하는 단계는,
    상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 샘플링 레이트로 상기 복수의 프레임을 다운 샘플링하여 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 단계를 포함하는 컨텐츠변환방법.
  6. 제4항에 있어서,
    상기 분류하는 단계는,
    상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 중요도에 기초하여 상기 복수의 프레임 중에서 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 단계를 포함하는 컨텐츠변환방법.
  7. 제4항에 있어서,
    상기 수행하는 단계는,
    상기 복수의 프레임군 중 제1프레임군에 대하여 상기 복수의 변환 프로세스 중 제1변환 프로세스를 수행하는 단계와;
    상기 제1프레임군에 대한 상기 제1변환 프로세스의 수행 결과를 이용하여 상기 복수의 프레임군 중 제2프레임군에 대하여 제2변환 프로세스를 수행하는 단계를 포함하는 3D컨텐츠제공방법.
  8. 제7항에 있어서,
    상기 제2변환 프로세스는 상기 제1변환 프로세스의 수행 결과를 이용한 보간 또는 트래킹을 포함하는 3D컨텐츠제공방법.
  9. 2D컨텐츠로부터 변환된 3D컨텐츠를 제공하는 3D컨텐츠제공장치에 있어서,
    사용자단말기와 통신하는 통신부와;
    복수의 컨텐츠의 정보를 상기 사용자단말기에 표시 가능하도록 전송하고, 상기 사용자단말기로부터 수신되는 사용자의 입력에 따라 상기 복수의 컨텐츠 중 어느 하나를 선택하며, 상기 선택된 컨텐츠에 대하여 제공 가능한 2D-3D 변환 품질의 정보를 상기 사용자단말기에 표시 가능하도록 전송하고, 상기 사용자단말기로부터 수신되는 사용자의 입력에 따라 상기 2D-3D 변환 품질을 선택하여 상기 선택된 2D-3D 변환 품질을 가지는 상기 선택된 컨텐츠의 3D컨텐츠가 전송되도록 제어를 수행하는 제어부를 포함하는 3D컨텐츠제공장치.
  10. 제9항에 있어서,
    상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠를 상기 3D컨텐츠로 변환하는 변환부를 더 포함하는 3D컨텐츠제공장치.
  11. 제9항에 있어서,
    상기 제어부는, 컨텐츠변환장치로 상기 선택된 컨텐츠 및 상기 선택된 2D-3D 변환 품질에 관한 정보를 전송하고, 상기 컨텐츠변환장치가 상기 선택된 2D-3D 변환 품질에 대응하여 상기 선택된 컨텐츠의 2D컨텐츠로부터 변환한 상기 3D컨텐츠를 상기 컨텐츠변환장치로부터 수신하도록 제어를 수행하는 3D컨텐츠제공장치.
  12. 제10항에 있어서,
    상기 변환부는,
    상기 선택된 2D-3D 변환 품질에 대응하여, 변환 품질이 서로 다른 복수의 변환 프로세스 각각의 수행 정도를 결정하고, 상기 결정된 복수의 변환 프로세스 각각의 수행 정도에 기초하여, 상기 2D컨텐츠의 복수의 프레임을 상기 복수의 변환 프로세스 각각에 대응하는 복수의 프레임군으로 분류하여, 상기 분류된 복수의 프레임군에 대하여 상기 복수의 변환 프로세스를 각각 수행하는 3D컨텐츠제공장치.
  13. 제12항에 있어서,
    상기 변환부는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 샘플링 레이트로 상기 복수의 프레임을 다운 샘플링하여 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 3D컨텐츠제공장치.
  14. 제12항에 있어서,
    상기 변환부는, 상기 복수의 변환 프로세스 중 제1변환 프로세스의 수행 정도에 대응하는 중요도에 기초하여 상기 복수의 프레임 중에서 상기 제1변환 프로세스를 수행할 상기 프레임군을 결정하는 3D컨텐츠제공장치.
  15. 제12항에 있어서,
    상기 변환부는, 상기 복수의 프레임군 중 제1프레임군에 대하여 상기 복수의 변환 프로세스 중 제1변환 프로세스를 수행하고, 상기 제1프레임군에 대한 상기 제1변환 프로세스의 수행 결과를 이용하여 상기 복수의 프레임군 중 제2프레임군에 대하여 제2변환 프로세스를 수행하는 3D컨텐츠제공장치.
  16. 제15항에 있어서,
    상기 제2변환 프로세스는 상기 제1변환 프로세스의 수행 결과를 이용한 보간 또는 트래킹을 포함하는 3D컨텐츠제공장치.
KR1020137028598A 2011-05-19 2012-05-09 3d컨텐츠제공장치 및 3d컨텐츠제공방법 KR20140045349A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020110047091 2011-05-19
KR20110047091 2011-05-19
PCT/KR2012/003644 WO2012157887A2 (en) 2011-05-19 2012-05-09 Apparatus and method for providing 3d content

Publications (1)

Publication Number Publication Date
KR20140045349A true KR20140045349A (ko) 2014-04-16

Family

ID=46456320

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137028598A KR20140045349A (ko) 2011-05-19 2012-05-09 3d컨텐츠제공장치 및 3d컨텐츠제공방법

Country Status (4)

Country Link
US (1) US20120293638A1 (ko)
EP (1) EP2525588A1 (ko)
KR (1) KR20140045349A (ko)
WO (1) WO2012157887A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170027240A (ko) 2015-08-17 2017-03-09 주식회사 포디웰컴 3d 컨텐트 제공장치, 3d 컨텐트 제공방법 및 기록매체

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120032321A (ko) * 2010-09-28 2012-04-05 삼성전자주식회사 디스플레이 장치 및 이의 영상 처리 방법
US10116911B2 (en) * 2012-12-18 2018-10-30 Qualcomm Incorporated Realistic point of view video method and apparatus
US9747727B2 (en) 2014-03-11 2017-08-29 Amazon Technologies, Inc. Object customization and accessorization in video content
US10375434B2 (en) * 2014-03-11 2019-08-06 Amazon Technologies, Inc. Real-time rendering of targeted video content
WO2016204481A1 (ko) * 2015-06-16 2016-12-22 엘지전자 주식회사 미디어 데이터 전송 장치, 미디어 데이터 수신 장치, 미디어 데이터 전송 방법, 및 미디어 데이터 수신 방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3871684B2 (ja) * 2004-06-18 2007-01-24 株式会社ソニー・コンピュータエンタテインメント コンテンツ再生装置およびメニュー画面表示方法
US8607287B2 (en) * 2005-12-29 2013-12-10 United Video Properties, Inc. Interactive media guidance system having multiple devices
KR20090092839A (ko) * 2006-12-19 2009-09-01 코닌클리케 필립스 일렉트로닉스 엔.브이. ２ｄ 비디오를 ３ｄ 비디오로 변환하기 위한 시스템 및 방법
KR20110004868A (ko) * 2008-04-09 2011-01-14 이얄 아밋저 ２차원에서 ３차원으로 게임을 전환하는 방법 및 시스템
KR20100040236A (ko) * 2008-10-09 2010-04-19 삼성전자주식회사 시각적 관심에 기반한 2차원 영상의 3차원 영상 변환기 및 변환 방법
US8345956B2 (en) * 2008-11-03 2013-01-01 Microsoft Corporation Converting 2D video into stereo video
KR20100135032A (ko) * 2009-06-16 2010-12-24 삼성전자주식회사 2차원 영상의 3차원 영상 변환 장치 및 방법
US8537200B2 (en) * 2009-10-23 2013-09-17 Qualcomm Incorporated Depth map generation techniques for conversion of 2D video data to 3D video data
KR101082046B1 (ko) * 2009-10-30 2011-11-10 엘지이노텍 주식회사 2차원 영상의 3차원 영상으로의 변환방법 및 그 장치
JP2011114863A (ja) * 2009-11-23 2011-06-09 Samsung Electronics Co Ltd ３Ｄ映像の提供方法、３Ｄ映像の変換方法、ＧＵＩ提供方法及びこれを適用した３Ｄディスプレイ装置、そして３Ｄ映像の提供システム｛Ｍｅｔｈｏｄｆｏｒｐｒｏｖｉｄｉｎｇ３Ｄｉｍａｇｅ、ｍｅｔｈｏｄｆｏｒｃｏｎｖｅｒｔｉｎｇ３Ｄｉｍａｇｅ、ＧＵＩｐｒｏｖｉｄｉｎｇｍｅｔｈｏｄｒｅｌａｔｅｄｔｏ３Ｄｉｍａｇｅａｎｄ３Ｄｄｉｓｐｌａｙａｐｐａｒａｔｕｓａｎｄｓｙｓｔｅｍｆｏｒｐｒｏｖｉｄｉｎｇ３Ｄｉｍａｇｅ｝
WO2011097306A1 (en) * 2010-02-04 2011-08-11 Sony Corporation 2d to 3d image conversion based on image content
US8689275B2 (en) * 2010-11-02 2014-04-01 Xyratex Technology Limited Method of evaluating the profit of a substream of encoded video data, method of operating servers, servers, network and apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170027240A (ko) 2015-08-17 2017-03-09 주식회사 포디웰컴 3d 컨텐트 제공장치, 3d 컨텐트 제공방법 및 기록매체

Also Published As

Publication number Publication date
WO2012157887A2 (en) 2012-11-22
EP2525588A1 (en) 2012-11-21
WO2012157887A3 (en) 2013-03-21
US20120293638A1 (en) 2012-11-22

Similar Documents

Publication Publication Date Title
KR20140037069A (ko) 컨텐츠변환장치, 컨텐츠변환방법 및 그 저장 매체
US8872900B2 (en) Image display apparatus and method for operating the same
KR20140045349A (ko) 3d컨텐츠제공장치 및 3d컨텐츠제공방법
US20150317541A1 (en) Methods and systems for customizing a plenoptic media asset
EP2574066A2 (en) Method and apparatus for converting 2D content into 3D content
EP2381692A2 (en) Image display apparatus and method for controlling the same
GB2509954A (en) Displaying a Region of Interest in High Resolution Using an Encapsulated Video Stream
US10097876B2 (en) Apparatus and method for providing media services
US20200107084A1 (en) Method and device for playback optimization
US20130057647A1 (en) Apparatus and method for converting 2d content into 3d content
KR20150061356A (ko) 디스플레이장치, 서버 및 그 제어방법
JP6025740B2 (ja) エネルギー値を用いたイメージ処理装置およびそのイメージ処理方法、並びにディスプレイ方法
US8977036B2 (en) Apparatus and method for 3D image conversion and a storage medium thereof
KR20120127992A (ko) 컨텐츠변환장치, 컨텐츠변환방법 및 그 저장 매체
US9210406B2 (en) Apparatus and method for converting 2D content into 3D content
US20210400255A1 (en) Image processing apparatus, image processing method, and program
KR20110117494A (ko) 증강 원격제어장치 및 그 동작 방법
KR20140013596A (ko) 영상표시장치, 및 그 동작방법

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid