KR20100046584A - 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치 - Google Patents

영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치 Download PDF

Info

Publication number
KR20100046584A
KR20100046584A KR1020080105484A KR20080105484A KR20100046584A KR 20100046584 A KR20100046584 A KR 20100046584A KR 1020080105484 A KR1020080105484 A KR 1020080105484A KR 20080105484 A KR20080105484 A KR 20080105484A KR 20100046584 A KR20100046584 A KR 20100046584A
Authority
KR
South Korea
Prior art keywords
image
graphic
video
output
overlaid
Prior art date
Application number
KR1020080105484A
Other languages
English (en)
Inventor
이대종
정현권
정길수
박성욱
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080105484A priority Critical patent/KR20100046584A/ko
Priority to US12/481,000 priority patent/US20100103165A1/en
Publication of KR20100046584A publication Critical patent/KR20100046584A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0613—The adjustment depending on the type of the information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

영상을 입력받고, 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 입력받은 영상 중 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 그래픽 영상이 오버레이된 영역을 제외한 영역을 3차원 영상으로 출력하고, 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 입력받은 영상을 3차원 영상으로 출력하는 영상 출력 방법이 개시된다.
3차원, 영상 변환, 메타데이터, 그래픽 영상

Description

영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치{Image decoding method, image outputting method, image processing method, and apparatuses thereof}
본 발명은 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그러한 방법들을 수행하는 장치들에 대한 것으로, 보다 구체적으로 비디오 영상에 그래픽 영상이 오버레이되어 있는지 여부에 따라, 그래픽 영상이 오버레이된 비디오 영상을 2차원 영상으로 출력할 것인지 또는 3차원 영상으로 출력할 것인지 여부를 결정하는 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치에 대한 것이다.
디지털 기술의 발달로 3차원 영상 기술이 널리 보급되고 있다. 3차원 영상 기술은 2차원 영상에 깊이에 대한 정보를 부여하여 보다 사실적인 영상을 표현하는 기술이다.
사람의 눈은 가로 방향으로 소정 거리만큼 떨어져 있으므로 좌안과 우안이 보는 2차원 영상이 서로 다른데 이를 양안시차라고 한다. 뇌는 서로 다른 두 개의 2차원 영상을 융합하여 원근감과 실재감이 있는 3차원 영상을 생성한다.
3차원 영상 기술은 처음부터 비디오 데이터를 3차원으로 영상으로 생성하는 기술과, 2차원 영상으로 생성된 비디오 데이터를 3차원 영상으로 변환하는 기술이 있으며, 두 기술에 대한 연구가 함께 이루어지고 있다.
본 발명은 2차원 영상으로 생성된 비디오 데이터를 3차원 영상으로 변환하는 기술에 대한 것으로, 비디오 영상에 그래픽 영상이 오버레이되어 있는지 여부에 따라, 비디오 영상 프레임의 소정 영역을 2차원 영상으로, 소정 영역을 제외한 영역을 3차원 영상으로 출력하는 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치를 제공하기 위한 것이다.
본 발명의 일 측면에 따르면, 영상을 입력받는 단계, 상기 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하는 단계 및 상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 상기 입력받은 영상을 3차원 영상으로 출력하는 단계를 포함하는 영상 출력 방법을 제공할 수 있다.
바람직한 실시 예에서, 상기 방법은 상기 입력받은 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 표시하는 그래픽 영상 온 오프 정보를 수신하는 단계 및 상기 그래픽 영상 온 오프 정보를 이용하여 상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인지 또는 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 판단하는 단계를 더 포함할 수 있다. 또한, 상기 방법은 메타데이터를 이용하여, 입력받은 영상 프레임들 중에 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계를 더 포함하고, 상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인지 또는 상기 그래픽 영상 이 오버레이되지 않은 비디오 영상인지를 판단하는 단계는 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에 대해, 상기 프레임의 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 판단하는 단계를 포함할 수 있다.
또한, 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계는 상기 메타데이터로부터 추출된 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임의 출력 시간 정보를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계를 포함할 수 있다. 또한, 상기 메타데이터를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에서 상기 2차원 영상으로 출력되어야 할 영역을 식별하는 단계를 더 포함할 수 있다.
또한, 상기 2차원 영상으로 출력되어야 할 영역을 식별하는 단계는 상기 메타데이터로부터 상기 2차원 영상으로 출력되어야 할 영역을 식별하기 위한 좌표값 정보를 추출하는 단계를 포함할 수 있다. 또한, 상기 메타데이터를 상기 비디오 데이터가 기록된 디스크로부터 독출하거나, 통신망을 통해 서버로부터 다운로드하는 단계를 더 포함할 수 있다. 또한, 상기 메타데이터는 상기 비디오 데이터를 식별하기 위한 식별 정보를 포함하고, 상기 식별 정보는 상기 비디오 데이터가 기록된 디스크를 식별하기 위한 디스크 식별자 및 상기 비디오 데이터가 상기 디스크에 포함된 타이틀 중 몇 번째 타이틀인지를 식별하기 위한 타이틀 식별자를 포함할 수 있다.
본 발명의 다른 측면에 따르면, 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래 픽 영상 온 오프 정보를 생성하는 단계 및 상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 단계를 포함하는 영상 디코딩 방법을 제공할 수 있다.
바람직한 실시 예에서, 상기 그래픽 영상 온 오프 정보를 생성하는 단계는 사용자로부터의 그래픽 영상 출력 여부에 대한 명령에 따라 상기 그래픽 영상 온 오프 정보를 생성하는 단계를 포함할 수 있다. 또한, 상기 방법은 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 단계 및 상기 비디오 영상에 상기 그래픽 영상을 오버레이하여 영상 출력 장치에 전송하는 단계를 더 포함할 수 있다.
본 발명의 또 다른 측면에 따르면, 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계, 사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것인지 여부를 명령받는 단계, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 단계 및 상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 단계, 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하는 단계 및 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면, 상기 비디오 영상을 3차원 영상으로 출력하는 단계를 포함하는 영상 처리 방법을 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 입력받은 영상이 그래픽 영상이 오버레이 된 비디오 영상인 경우 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 제외한 영역을 3차원 영상으로 변환하고, 상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우 상기 입력받은 영상을 3차원 영상으로 변환하는 3차원 영상 변환부 및 상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인 경우 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하고, 상기 입력받은 영상이 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우 상기 입력받은 영상을 3차원 영상으로 출력하는 출력부를 포함하는 영상 출력 장치를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래픽 영상 온 오프 정보를 생성하고, 상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 그래픽 영상 온 오프 정보 생성부를 포함하는 영상 디코딩 장치를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 비디오 데이터 디코딩부, 사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것인지 여부를 명령받는 유저 인터페이스, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 그래픽 데이터 디코딩부 및 상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 블렌더, 상 기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하고, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면 상기 비디오 영상을 3차원 영상으로 출력하는 출력부를 포함하는 영상 처리 장치를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 영상을 입력받는 단계, 상기 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하는 단계 및 상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 상기 입력받은 영상을 3차원 영상으로 출력하는 단계를 포함하는 영상 출력 방법을 실행하기 위한 프로그램을 저장한 컴퓨터로 판독 가능한 기록 매체를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래픽 영상 온 오프 정보를 생성하는 단계 및 상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 단계를 포함하는 영상 디코딩 방법을 실행하기 위한 프로그램을 저장한 컴퓨터로 판독 가능한 기록 매체를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면, 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계, 사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것인지 여부를 명령받는 단계, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코 딩하여 상기 그래픽 영상을 생성하는 단계 및 상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 단계, 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하는 단계 및 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면, 상기 비디오 영상을 3차원 영상으로 출력하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법을 실행하기 위한 프로그램을 저장한 컴퓨터로 판독 가능한 기록 매체를 제공할 수 있다.
본 발명에 따르면, 비디오 영상에 그래픽 영상이 오버레이되어 있는지 여부에 따라, 비디오 영상 프레임의 소정 영역을 2차원 영상으로, 소정 영역을 제외한 영역을 3차원 영상으로 출력할 수 있는 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치를 제공할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명하기로 한다.
본 발명에서는 2차원 영상으로 생성된 비디오 데이터를 3차원 영상으로 변환하기 위해, 비디오 데이터에 대한 메타 데이터를 이용한다.
도 1은 본 발명의 일 실시 예에 따른, 비디오 데이터에 대한 메타데이터를 도시한 도면이다. 본 발명의 일 실시 예에 따른 메타데이터에는 2차원 영상의 비디오 데이터를 3차원 영상으로 변환하기 위한 정보가 포함되어 있다. 메타데이터가 어떤 비디오 데이터에 대한 정보인지를 표시하기 위해, 메타데이터에는 비디오 데 이터를 식별하기 위한 디스크 식별 정보가 포함된다. 디스크 식별 정보는 비디오 데이터가 기록된 디스크를 식별하기 위한 디스크 식별자 및 디스크 식별자에 의해 식별되는 디스크 내에서, 비디오 데이터가 몇 번째 타이틀인지를 나타내기 위한 타이틀 식별자를 포함할 수 있다.
비디오 데이터는 일련의 프레임들으로 이루어져 있으므로, 메타데이터에는 프레임들에 대한 정보가 포함되어 있다.
비디오 데이터 프레임 중에는 경고문이나 메뉴 화면, 자막, 엔딩 크레디트(ending credit) 등의 영상이 포함되어 3차원으로 출력될 필요가 없는 프레임이 있을 수 있다. 또한 3차원 영상으로 출력되어야 하는 프레임 중에는 프레임 내에 엔딩 크레디트 등과 같이 3차원 영상으로 출력될 필요가 없는 영역이 일부 포함된 프레임이 있을 수 있다. 이하, 비디오 영상 중에 3차원으로 변환될 필요 없이 2차원 영상으로 출력되어야 할 영역을 2차원 영역이라고 부르기로 한다.
메타데이터에는 2차원 영역에 대한 정보가 포함된다. 영상 출력 장치(미도시)는 메타데이터에서 2차원 영역에 대한 정보를 추출하고 이를 이용하여 프레임 내의 엔딩 크레디트 등과 같은 소정 영역을 3차원 영상이 아닌 2차원 영상으로 출력한다.
2차원 영역에 대한 정보는 2차원 영역이 포함된 프레임의 출력 시간 정보와 2차원 영역 식별 정보를 포함한다. 2차원 영역이 포함된 프레임의 출력 시간 정보는 프레임들 중에 2차원 영역이 포함된 프레임이 출력되어야 할 시간을 나타내는 정보로, 2차원 영역이 포함된 프레임이 출력되기 시작하는 시각이 될 수 있다. 또 한, 2차원 영역이 포함된 프레임의 출력 시간 정보는 2차원 영역이 포함된 프레임이 연속하여 출력되는 시간이나 2차원 영역이 포함된 프레임의 출력이 종료되는 시각 중 하나 이상이 될 수 있다.
2차원 영역 식별 정보는 2차원 영역이 포함된 프레임 중에, 2차원으로 출력되어야 할 영역, 즉, 2차원 영역을 표시하기 정보로, 프레임의 소정 위치를 기준으로 했을 때의 2차원 영역의 좌표값으로 표시될 수 있다.
방송국이나 일반 콘텐츠 생성 업체 등의 콘텐츠 제공자는 비디오 데이터에 대한 메타데이터를 생성하고 이를 서버(미도시)에 저장하여 사용자들에게 제공하거나 디스크에 기록하여 메타데이터가 기록된 디스크를 사용자들에게 제공할 수 있다. 메타데이터는 비디오 데이터와 함께 또는 비디오 데이터와는 독립적으로 서버로부터 다운로드되거나 디스크로부터 독출되어 이용될 수 있다. 메타데이터가 디스크에 기록되어 있는 경우, 메타데이터는 디스크의 리드인 영역, 사용자 데이터 영역, 리드 아웃 영역 중 하나 이상의 영역에 기록되어 있을 수 있다.
이와 같이, 본 발명의 실시 예에 의하면, 메타데이터에 2차원 영상의 비디오 데이터를 3차원 영상으로 변환하기 위한 정보가 포함되어 있으며, 또한 프레임의 소정 영역은 2차원으로, 소정 영역이 아닌 나머지 영역은 3차원으로 출력되도록 하기 위한 정보가 포함될 수 있다.
도 2는 본 발명의 일 실시 예에 따른 영상 디코딩 방법 및 영상 출력 방법을 설명하기 위한 영상 처리 시스템을 나타낸 도면이고, 도 3은 도 2의 영상 처리 시스템에서 생성되는 영상을 도시한 도면이다. 이하, 도 2 및 도 3을 함께 설명하기 로 한다.
도 2를 참조하면, 영상 처리 시스템은 영상 디코딩 장치(100) 및 영상 출력 장치(200)를 포함한다. 도 2에서는 영상 디코딩 장치(100)와 영상 출력 장치(200)를 분리하여 도시하였으나, 경우에 따라서는 영상 디코딩 장치(100)와 영상 출력 장치(200)가 통합된 형태의 기기를 통해서도 본 발명의 일 실시 예에 따른 영상 디코딩 방법 및 영상 출력 방법이 구현될 수 있다.
영상 디코딩 장치(100)는 비디오 데이터를 디코딩하여 2차원의 비디오 영상을 생성하고, 생성된 비디오 영상을 영상 출력 장치(200)로 전송하는 기기로, DVD 플레이어나 셋 탑 박스 등이 될 수 있다.
사용자는 리모트 콘트롤러(미도시) 등을 이용하여 영상 디코딩 장치(100)의 각종 기능을 제어할 수 있다. 사용자는 비디오 영상이 자막 없이 출력되도록 하거나 또는 비디오 영상이 자막과 함께 출력되도록 영상 디코딩 장치(100)를 제어할 수 있다.
사용자가 비디오 영상이 자막과 함께 출력되도록 영상 디코딩 장치(100)를 제어하면, 영상 디코딩 장치(100)는 그래픽 데이터를 디코딩하여 그래픽 영상을 생성하고, 그래픽 영상과 비디오 영상을 오버레이하여 영상 출력 장치(200)로 전송한다.
도 3의 (a)와 (b)는 영상 디코딩 장치(100)가 영상 출력 장치(200)로 전송하는 영상을 도시한 것으로, 도 3의 (a)는 전송되는 영상에 자막 없이 비디오 영상만 포함되어 있는 경우를 도시하고, 도 3의 (b)는 그래픽 영상, 즉, 자막이 비디오 영 상에 오버레이된 경우를 도시한다.
영상 출력 장치(200)는 영상 디코딩 장치(100)에 의해 생성된 2차원의 비디오 영상을 3차원 영상으로 변환하여 화면에 출력하는 기기로, 모니터나 티브이 화면 등이 될 수 있다.
영상 출력 장치(200)는 도 1의 메타데이터를 이용하여 영상 디코딩 장치(100)로부터 받은 2차원 영상을 3차원 영상으로 변환한다. 전술한 바와 같이 메타데이터는 서버(미도시)에 저장되어 있거나 디스크에 기록되어 있을 수 있다. 메타데이터가 서버에 저장되어 있는 경우, 영상 출력 장치(200)는 통신망을 통해 서버로부터 비디오 데이터 및/또는 비디오 데이터에 대한 메타데이터를 다운로드하여 이를 이용할 수 있다.
메타데이터에 2차원 영역이 포함된 프레임에 대한 정보가 포함되어 있는 경우, 영상 출력 장치(200)는 메타데이터를 이용하여 영상 디코딩 장치(100)로부터 전송된 프레임들 중, 2차원 영역이 포함된 프레임을 식별하고, 식별된 프레임에서 2차원 영역을 식별할 수 있다. 도 3의 (c)에서 점선으로 표시된 영역(300)은 2차원 영역을 도시한다. 전술한 바와 같이 2차원 영역은 자막이나 메뉴 등이 출력되는 영역으로, 3차원 영상으로 출력되는 것이 부자연스러운 영역을 말한다.
영상 디코딩 장치(100)는 자막이나 메뉴 등이 출력되어야 하는 2차원 영역(300)에 대한 정보를 메타데이터로부터 추출하고 이를 이용하여 2차원 영역(300)을 식별하고, 2차원 영역(300)을 2차원 영상으로 출력하고, 2차원 영역(300)을 제외한 영역을 3차원 영상으로 출력한다.
사용자가 영상 디코딩 장치(100)를 제어하여 비디오 영상이 자막 없이 출력되도록 할 경우, 영상 디코딩 장치(100)는 도 3의 (a)와 같이 그래픽 영상이 오버레이되지 않은 비디오 영상을 영상 출력 장치(200)로 전송한다. 영상 출력 장치(200)는 영상 디코딩 장치(100)로부터 전송되는 비디오 영상이 그래픽 영상을 포함하는지 여부를 알지 못하므로, 메타데이터를 이용하여 자막이 출력되어야 하는 영역, 즉, 도 3의 (c)에서 점선으로 표시된 2차원 영역(300)을 식별하고, 식별된 2차원 영역(300)을 2차원 영상으로 출력하고, 2차원 영역을 제외한 영역을 3차원 영상으로 변환하여 출력한다. 영상 출력 장치(200)는 도 3의 (c)의 2차원 영역(300)에 자막이 출력되지 않음에도 불구하고, 2차원 영역(300)을 3차원 영상으로 출력하지 않고 2차원 영상으로 출력하므로, 2차원 영역(300)은 2차원 영상으로, 프레임 내의 다른 영역은 3차원 영상으로 출력되게 되어 영상이 어색해질 수 있다.
본 발명에서는 영상 디코딩 장치(100)가 전송하는 영상에 그래픽 영상이 포함되어 있는지 여부를 영상 출력 장치(200)에 알려주기 위해 영상 디코딩 장치(100)가 그래픽 영상 온 오프 정보를 생성하고 이를 영상 출력 장치(200)에 전송한다. 그래픽 영상 온 오프 정보는 영상 디코딩 장치(100)에서 영상 출력 장치(200)로 전송되는 2차원 비디오 영상이 자막이나 메뉴 등의 그래픽 영상을 포함하는지 여부를 나타내는 정보이다.
사용자가 영상 디코딩 장치(100)를 제어하여 비디오 영상이 자막과 함께 출력되도록 할 경우, 영상 디코딩 장치(100)는 도 3의 (b)와 같이 그래픽 영상이 오버레이된 비디오 영상과, 비디오 영상에 그래픽 영상이 오버레이 되지 않았음을 표 시하는 그래픽 영상 온 오프 정보를 영상 출력 장치(200)에 전송한다. 영상 출력 장치(200)는 메타데이터를 이용하여 2차원 영역이 포함된 프레임 및 2차원 영역이 포함된 프레임 내에서의 2차원 영역을 식별하고, 식별된 영역을 2차원 영상으로 출력하고, 식별된 영역을 제외한 영역을 3차원 영상으로 출력한다. 따라서, 영상 출력 장치(200)에 의해 출력되는 영상은 자막이 있는 부분만 2차원 영상으로 출력되게 되므로 사용자는 3차원 영상으로 출력되는 자막을 보게 될 때 느끼는 눈의 피로나 어지러움 등을 덜 느끼게 된다.
사용자가 자막 없이 비디오 영상만 출력되도록 영상 디코딩 장치(100)를 제어하면, 영상 디코딩 장치(100)는 그래픽 영상이 오버레이되지 않은 비디오 영상 및 그래픽 영상이 비디오 영상에 오버레이되지 않았음을 나타내는 그래픽 영상 온 오프 정보를 생성하고 이를 영상 출력 장치(200)로 전송한다. 이 경우, 영상 출력 장치(200)는 메타데이터에 의해 식별된 2차원 영역을 다른 영역과 같이, 2차원 영상이 아닌 3차원 영상으로 변환하여 출력한다. 영상 출력 장치(200)는 도 3의 (c)에서, 2차원 영역(300)과 2차원 영역(300)이 아닌 영역을 모두 3차원 영상으로 출력하므로 2차원 영역(300)과 2차원 영역(300)이 아닌 영역이 하나의 프레임에 공존하게 됨으로써 발생하는 이질감이나 어색함이 사라지게 된다.
영상 디코딩 장치(100)와 영상 출력 장치(200)가 고선명 멀티미디오 인터페이스(High Definition Multimedia Interface, 이하, HDMI라 한다)를 지원하는 경우, 영상 디코딩 장치(100)와 영상 출력 장치(200)는 HDMI를 이용하여 그래픽 영상 온 오프 정보를 송신 및 수신할 수 있다. HDMI는 비압축 방식의 디지털 비디오/오 디오 인터페이스 규격의 하나로, HDMI를 지원하는 장치들 사이의 인터페이스를 제공한다. HDMI는 TMDS, DDC, 그리고 CEC 세개의 통신 채널을 가진다.
영상 디코딩 장치(100)와 영상 출력 장치(200)가 TMDS(Transition Minimized differential Signaling) 채널을 이용하여 그래픽 영상 온 오프 정보를 송수신하는 경우를 먼저 살펴본다. TMDS는 영상 데이터 구간(period), 데이터 섬 구간 및 제어 구간의 세가지 방법으로 영상, 음성 및 부가 데이터를 전송한다. 영상 데이터 구간에서는 동영상 라인의 화소 정보가 전송되고, 데이터 섬 구간에서는 음성 정보와 일련의 조각으로 이루어진 부가 정보가 전송된다. 데이터 섬 구간은 수평 귀선 기간이나 수직 귀선 기간 때 발생한다. 마지막으로 제어 구간은 영상 데이터 구간과 데이터 섬 구간 사이에서 발생한다. 제어 구간에서 전송되는 프리앰블 데이터(Preamble data)는 4비트로 구성되어, 제어 구간 이후의 구간이 영상 데이터 구간(0b1000)인지, 데이터 섬 구간(0b1010)인지를 나타낼 수 있다. 제어 구간 이후의 구간이 영상 데이터 구간인 경우, 프리앰블 데이터의 마지막 비트를 0 또는 1로 표시함으로써, 비디오 영상에 그래픽 영상이 오버레이되어 있는지 아닌지를 표시할 수 있다.
다음으로, 영상 디코딩 장치(100)와 영상 출력 장치(200)가 CEC(Consumer Electronics Control) 라인을 이용하여 그래픽 영상 온 오프 정보를 송수신하는 경우를 살펴본다. CEC 라인은 HDMI를 이용하는 장치간 제어를 위해 전송되는 제어 데이터를 전송한다.
CEC 라인에 의해 전송되는 제어 데이터에는 전송되는 데이터가 그래픽 영상 에 관한 제어 데이터라는 정보와 그래픽 영상이 비디오 영상에 오버레이되어 있는지 여부를 표시하는 그래픽 영상 온 오프 정보 및 제어 데이터를 수신하게 되는 영상 출력 장치(200)의 주소가 포함될 수 있다.
도 4는 본 발명의 일 실시 예에 따른 영상 디코딩 장치의 내부 블록도이다. 도 4를 참조하면, 영상 디코딩 장치(400)는 비디오 데이터 디코딩부(410), 그래픽 데이터 디코딩부(420), 블렌더(430), 영상 전송부(440), 유저 인터페이스(450) 및 그래픽 영상 온 오프 정보 생성부(460)를 포함한다.
비디오 데이터 디코딩부(410)는 서버(미도시)로부터 다운로드되어 로컬 스토리지(미도시)에 저장되어 있거나 또는 로딩된 디스크에 저장되어 있는 비디오 데이터(IN1)를 독출하고 이를 디코딩하여 비디오 영상을 생성한다.
그래픽 데이터 디코딩부(420)는 프리젠테이션 그래픽 데이터나 인터랙티브 그래픽 데이터(IN2)를 디코딩하여 자막을 나타내는 프리젠테이션 그래픽 영상이나 메뉴를 나타내는 인터랙티브 그래픽 영상을 생성한다.
블렌더(430)는 비디오 데이터 디코딩부(410)에 의해 생성된 비디오 영상에 그래픽 데이터 디코딩부(420)에 의해 생성된 그래픽 영상을 오버레이하여 완성된 2차원 비디오 영상을 생성한다.
영상 전송부(440)는 그래픽 영상이 오버레이된 비디오 영상 또는 그래픽 영상이 오버레이되지 않은 비디오 영상을 영상 출력 장치(200)에 전송한다.
유저 인터페이스(450)는 사용자와의 인터페이스를 담당하여, 사용자로부터의 제어 명령(IN3)을 그래픽 데이터 디코딩부(420) 및 그래픽 영상 온 오프 정보 생성 부(460)로 전달한다.
그래픽 영상 온 오프 정보 생성부(460)는 유저 인터페이스(450)를 통한 사용자의 제어 명령에 따라, 그래픽 영상 온 오프 정보를 생성한다. 그래픽 영상 온 오프 정보는 영상 전송부(440)에 의해 전송되는 비디오 영상에 그래픽 영상이 오버레이되어 있는지 여부를 표시하는 정보이다.
이하, 상술한 영상 디코딩 장치(400)의 내부 구성 요소들간의 유기적 관계를 설명하기로 한다.
사용자가 유저 인터페이스(450)를 이용하여 그래픽 영상이 비디오 영상에 오버레이되어 출력될 것을 지시하면, 그래픽 데이터 디코딩부(420)는 그래픽 데이터를 디코딩하여 그래픽 영상을 생성하여 이를 영상 전송부(440)로 보낸다. 그래픽 영상 온 오프 정보 생성부(460)는 영상 전송부(440)가 전송하는 영상에 그래픽 영상이 포함되어 있음을 표시하는 그래픽 영상 온 오프 정보를 생성한다.
사용자가 유저 인터페이스(450)를 이용하여 비디오 영상이 그래픽 영상 없이 출력되도록 할 것을 지시하면, 그래픽 데이터 디코딩부(420)는 그래픽 데이터를 디코딩하지 않는다. 이 경우, 영상 전송부(440)에 의해 생성된 최종 2차원 영상은 비디오 데이터 디코딩부(410)에 의해 생성된 비디오 영상만을 포함하게 된다. 그래픽 영상 온 오프 정보 생성부(460)는 영상 전송부(440)가 전송하는 영상에 그래픽 영상이 포함되어 있지 않음을 표시하는 그래픽 영상 온 오프 정보를 생성한다.
영상 전송부(440)와 그래픽 영상 온 오프 정보 생성부(460)는 비디오 영상(OUT1)과 그래픽 영상 온 오프 정보(OUT2)를 함께 또는 별도로 영상 출력 장 치(200)로 전송한다.
이와 같이, 본 발명의 실시 예에 따른 영상 디코딩 장치(400)는 비디오 영상에 그래픽 영상이 오버레이되어 있는지를 표시하는 그래픽 영상 온 오프 정보를 생성하고 이를 영상 출력 장치로 전송할 수 있다.
도 5는 본 발명의 일 실시 예에 따른 영상 출력 장치(500)의 내부 블록도이다. 도 5를 참조하면, 영상 출력 장치(500)는 영상 수신부(510), 그래픽 영상 온 오프 정보 수신부(520), 메타데이터 해석부(530), 3차원 영상 변환부(540) 및 출력부(550)를 포함한다.
영상 수신부(510)와 그래픽 영상 온 오프 정보 수신부(520)는 영상 디코딩 장치(400)로부터 각 각 2차원의 비디오 영상(IN4) 및 그래픽 영상 온 오프 정보(IN5)를 수신한다.
그래픽 영상 온 오프 정보 수신부(520)는 그래픽 영상 온 오프 정보를 3차원 영상 변환부(540)에 알린다.
메타데이터 해석부(530)는 통신망을 통해 서버(미도시)로부터 다운로드되어 로컬 스토리지(미도시)에 저장되어 있거나, 로딩된 디스크에 기록되어 있는 메타데이터(IN6)를 독출하고 이를 해석한다. 메타데이터 해석부(530)는 메타데이터로부터 2차원 영역이 포함된 프레임이 출력되는 시간에 대한 정보를 추출하여 2차원 영역이 포함된 프레임을 식별하고, 메타데이터로부터 2차원 영역 식별 정보를 추출하여 2차원 영역이 포함된 프레임에서 2차원 영상으로 출력되어야 할 영역을 식별한다. 메타데이터 해석부(530)는 2차원 영역이 포함된 프레임 및 그 프레임 내에서 식별 된 2차원 영역을 3차원 영상 변환부(540)에 알린다.
3차원 영상 변환부(540)는 그래픽 영상 온 오프 정보 수신부(520)로부터 받은 그래픽 영상 온 오프 정보 및 메타데이터 해석부(530)로부터 받은 메타데이터를 이용하여 영상 수신부(510)로부터 받은 2차원 영상을 3차원 영상으로 변환한다.
3차원 영상 변환부(540)는 2차원 영역이 포함된 프레임을 식별하고, 식별된 프레임이 그래픽 영상이 오버레이된 비디오 영상인지, 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 판단한다. 3차원 영상 변환부(540)는 2차원 영역이 포함된 프레임이 그래픽 영상이 오버레이된 비디오 영상이라고 판단되면 2차원 영역을 제외한 영역을 3차원 영상으로 변환한다.
3차원 영상 변환부(540)는 2차원 영역이 포함된 프레임이 그래픽 영상이 오버레이되지 않은 비디오 영상이라고 판단되면, 2차원 영역을 포함한 프레임 전체를 3차원 영상으로 변환한다.
2차원 영상을 3차원 영상으로 변환하는 방법으로는 프레임의 구도를 이용하여 프레임에 대한 뎁쓰 맵을 생성하고, 이를 이용하여 프레임에 깊이감을 부여하는 방법과 이전 프레임을 이용하여 현재 프레임의 움직임을 예측하고, 예측된 움직임을 이용하여 현재 프레임의 영상을 3차원 영상으로 출력하는 방법이 있다.
3차원 영상 변환부(540)는 좌안 영상 및 우안 영상을 생성하고, 좌안 및 우안 영상을 모두 포함하는 3차원 포맷의 영상을 생성한다. 3차원 포맷으로는 탑-다운(Top and down) 포맷, 사이드-바이-사이드(Side by Side) 포맷, 그리고 인터레이스드(interlaced) 포맷 등이 있다.
출력부(550)는 좌안 영상과 우안 영상을 순차적으로 화면에 출력한다. 시청자는 한쪽 눈을 기준으로 최소 60Hz의 frame rate로 영상이 출력되어야 이미지가 끊기지 않고 순차적으로 재생된다고 인지하므로 좌/우 양안을 통해 입력된 이미지가 합쳐져서 3차원 영상으로 인지되기 위해서는 디스플레이 장치가 최소한 120Hz의 frame rate로 화면을 출력해야 한다. 출력부(550)는 1/120초 단위로 프레임에 포함된 좌, 우 영상을 순차적으로 표시한다.
이와 같이, 본 발명의 실시 예에 따르면, 비디오 영상에 그래픽 영상이 오버레이되었는지 여부에 따라 메타데이터에 의해 2차원 영역으로 식별된 영역을 2차원 영상으로 출력할 것인지 또는 3차원 영상으로 출력할 것인지를 결정하고, 그 결과에 따라 2차원 영역을 2차원 영상 또는 3차원 영상으로 출력할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 영상 출력 방법을 설명하기 위한 순서도이다. 도 6을 참조하면, 영상 출력 장치(500)는 영상 디코딩 장치(400)로부터 비디오 영상 및 비디오 영상이 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 표시하는 그래픽 영상 온 오프 정보를 수신한다. 영상 출력 장치(500)는 메타데이터를 이용하여, 입력받은 영상 프레임들 중에 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하고, 그래픽 영상 온 오프 정보를 이용하여 2차원 영상으로 출력되어야 할 영역이 포함된 프레임이 그래픽 영상이 오버레이된 비디오 영상인지를 판단한다(단계 610). 입력 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 영상 출력 장치(500)는 입력받은 영상 중 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 나머지 영역을 3차원 영상으로 출력한다(단계 620).
영상 출력 장치(500)는 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 입력받은 영상을 3차원 영상으로 출력한다(단계 630).
이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명의 일 실시 예에 따른, 비디오 데이터에 대한 메타데이터를 도시한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 영상 디코딩 방법 및 영상 출력 방법을 설명하기 위한 영상 처리 시스템을 나타낸 도면이다.
도 3은 도 2의 영상 디코딩 장치에서 생성되는 영상을 도시한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 영상 디코딩 장치의 내부 블록도이다.
도 5는 본 발명의 일 실시 예에 따른 영상 출력 장치의 내부 블록도이다.
도 6은 본 발명의 일 실시 예에 따른 영상 출력 방법을 설명하기 위한 순서도이다.

Claims (27)

  1. 영상을 입력받는 단계;
    상기 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하는 단계; 및
    상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 상기 입력받은 영상을 3차원 영상으로 출력하는 단계를 포함하는 것을 특징으로 하는 영상 출력 방법.
  2. 제1 항에 있어서,
    상기 입력받은 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 표시하는 그래픽 영상 온 오프 정보를 수신하는 단계; 및
    상기 그래픽 영상 온 오프 정보를 이용하여 상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인지 또는 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 판단하는 단계를 더 포함하는 것을 특징으로 하는 영상 출력 방법.
  3. 제2 항에 있어서, 메타데이터를 이용하여, 입력받은 영상 프레임들 중에 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계를 더 포함하고,
    상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인지 또는 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 판단하는 단계는 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에 대해, 상기 프레임의 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는 영상 출력 방법.
  4. 제3 항에 있어서, 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계는
    상기 메타데이터로부터 추출된 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임의 출력 시간 정보를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 단계를 포함하는 것을 특징으로 하는 영상 출력 방법.
  5. 제3 항에 있어서, 상기 메타데이터를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에서 상기 2차원 영상으로 출력되어야 할 영역을 식별하는 단계를 더 포함하는 것을 특징으로 하는 영상 출력 방법.
  6. 제5 항에 있어서, 상기 2차원 영상으로 출력되어야 할 영역을 식별하는 단계는 상기 메타데이터로부터 상기 2차원 영상으로 출력되어야 할 영역을 식별하기 위한 좌표값 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 영상 출력 방법.
  7. 제3 항에 있어서, 상기 메타데이터를 상기 비디오 데이터가 기록된 디스크로부터 독출하거나, 통신망을 통해 서버로부터 다운로드하는 단계를 더 포함하는 것을 특징으로 하는 영상 출력 방법.
  8. 제3 항에 있어서, 상기 메타데이터는 상기 비디오 데이터를 식별하기 위한 식별 정보를 포함하고, 상기 식별 정보는 상기 비디오 데이터가 기록된 디스크를 식별하기 위한 디스크 식별자 및 상기 비디오 데이터가 상기 디스크에 포함된 타이틀 중 몇 번째 타이틀인지를 식별하기 위한 타이틀 식별자를 포함하는 것을 특징으로 하는 영상 출력 방법.
  9. 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래픽 영상 온 오프 정보를 생성하는 단계; 및
    상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 단계를 포함하는 것을 특징으로 하는 영상 디코딩 방법.
  10. 제9 항에 있어서, 상기 그래픽 영상 온 오프 정보를 생성하는 단계는
    사용자로부터의 그래픽 영상 출력 여부에 대한 명령에 따라 상기 그래픽 영상 온 오프 정보를 생성하는 단계를 포함하는 것을 특징으로 하는 영상 디코딩 방 법.
  11. 제9 항에 있어서, 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계;
    상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 단계; 및
    상기 비디오 영상에 상기 그래픽 영상을 오버레이하여 영상 출력 장치에 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 디코딩 방법.
  12. 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계;
    사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 단계; 및
    상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 단계;
    상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하는 단계; 및
    상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면, 상기 비디오 영상을 3차원 영상으로 출력하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  13. 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 제외한 영역을 3차원 영상으로 변환하고, 상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우 상기 입력받은 영상을 3차원 영상으로 변환하는 3차원 영상 변환부; 및
    상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인 경우 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하고, 상기 입력받은 영상이 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우 상기 입력받은 영상을 3차원 영상으로 출력하는 출력부를 포함하는 것을 특징으로 하는 영상 출력 장치.
  14. 제13 항에 있어서,
    상기 입력받은 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 표시하는 그래픽 영상 온 오프 정보를 수신하는 그래픽 영상 온 오프 정보 수신부를 더 포함하고,
    상기 3차원 영상 변환부는 상기 그래픽 영상 온 오프 정보를 이용하여 상기 입력받은 영상이 상기 그래픽 영상이 오버레이된 비디오 영상인지 또는 상기 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 판단하는 것을 특징으로 하는 영상 출력 장치.
  15. 제14 항에 있어서, 메타데이터를 해석하여, 입력받은 영상 프레임들 중에 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 메타데이터 해석부를 더 포함하고,
    상기 3차원 영상 변환부는 상기 메타데이터 해석부에 의해 식별된 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에 대해, 상기 프레임의 영상이 상기 그래픽 영상이 오버레이되어 있는 비디오 영상인지 여부를 판단하는 것을 특징으로 하는 영상 출력 장치.
  16. 제15 항에 있어서, 상기 메타데이터 해석부는 상기 메타데이터로부터 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임의 출력 시간 정보를 추출하고, 상기 출력 시간 정보를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임을 식별하는 것을 특징으로 하는 영상 출력 장치.
  17. 제15 항에 있어서, 상기 메타데이터 해석부는 상기 메타데이터를 이용하여 상기 2차원 영상으로 출력되어야 할 영역이 포함된 프레임에서 상기 2차원 영상으로 출력되어야 할 영역을 식별하는 것을 특징으로 하는 영상 출력 장치.
  18. 제23 항에 있어서, 상기 메타데이터 해석부는 상기 메타데이터로부터 상기 2차원 영상으로 출력되어야 할 영역을 식별하기 위한 좌표값 정보를 추출하는 것을 특징으로 하는 영상 출력 장치.
  19. 제15 항에 있어서, 상기 메타데이터 해석부는 상기 메타데이터를 상기 비디오 데이터가 기록된 디스크로부터 독출하거나, 통신망을 통해 서버로부터 다운로드하는 것을 특징으로 하는 영상 출력 장치.
  20. 제15 항에 있어서, 상기 메타데이터는 상기 비디오 데이터를 식별하기 위한 식별 정보를 포함하고, 상기 식별 정보는 상기 비디오 데이터가 기록된 디스크를 식별하기 위한 디스크 식별자 및 상기 비디오 데이터가 상기 디스크에 포함된 타이틀 중 몇 번째 타이틀인지를 식별하기 위한 타이틀 식별자를 포함하는 것을 특징으로 하는 영상 출력 장치.
  21. 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래픽 영상 온 오프 정보를 생성하고, 상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 그래픽 영상 온 오프 정보 생성부를 포함하는 것을 특징으로 하는 영상 디코딩 장치.
  22. 제21 항에 있어서, 상기 그래픽 영상 온 오프 정보 생성부는 사용자로부터의 그래픽 영상 출력 여부에 대한 명령에 상응하여 상기 그래픽 영상 온 오프 정보를 생성하는 것을 특징으로 하는 영상 디코딩 장치.
  23. 제21 항에 있어서, 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 비디오 데이터 디코딩부;
    상기 사용자로부터 상기 비디오 영상에 상기 그래픽 영상을 오버레이하여 출력할 것인지 여부를 명령받는 유저 인터페이스부;
    상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 그래픽 영상 생성부;
    상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 블렌더; 및
    상기 그래픽 영상이 오버레이된 상기 비디오 영상을 영상 출력 장치에 전송하는 영상 전송부를 더 포함하고,
    상기 그래픽 영상 생성부는 상기 유저 인터페이스를 통해 상기 비디오 영상에 상기 그래픽 영상을 오버레이하여 출력할 것을 명령받으면 상기 그래픽 영상을 생성하는 것을 특징으로 하는 영상 디코딩 장치.
  24. 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 비디오 데이터 디코딩부;
    사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것인지 여부를 명령받는 유저 인터페이스;
    상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 그래픽 데이터 디코딩부; 및
    상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 블렌더;
    상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하고, 상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면 상기 비디오 영상을 3차원 영상으로 출력하는 출력부를 포함하는 것을 특징으로 하는 영상 처리 장치.
  25. 영상을 입력받는 단계;
    상기 입력받은 영상이 그래픽 영상이 오버레이된 비디오 영상인 경우, 상기 입력받은 영상 중 상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 영역을 3차원 영상으로 출력하는 단계; 및
    상기 입력받은 영상이 그래픽 영상이 오버레이되지 않은 비디오 영상인 경우, 상기 입력받은 영상을 3차원 영상으로 출력하는 단계를 포함하는 것을 특징으로 하는 영상 출력 방법을 실행하기 위한 프로그램을 저장한 컴퓨터로 판독 가능한 기록 매체.
  26. 영상이 그래픽 영상이 오버레이된 비디오 영상인지, 또는 그래픽 영상이 오버레이되지 않은 비디오 영상인지를 나타내는 그래픽 영상 온 오프 정보를 생성하는 단계; 및
    상기 그래픽 영상 온 오프 정보를 영상 출력 장치에 전송하는 단계를 포함하는 것을 특징으로 하는 영상 디코딩 방법을 실행하기 위한 프로그램을 저장한 컴퓨 터로 판독 가능한 기록 매체.
  27. 비디오 데이터를 디코딩하여 비디오 영상을 생성하는 단계;
    사용자로부터 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것인지 여부를 명령받는 단계;
    상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하여 출력할 것을 명령받으면, 상기 그래픽 데이터를 디코딩하여 상기 그래픽 영상을 생성하는 단계; 및
    상기 비디오 영상에 상기 그래픽 영상을 오버레이하는 단계;
    상기 그래픽 영상이 오버레이된 영역을 2차원 영상으로, 상기 영역을 제외한 비디오 영상을 3차원 영상으로 출력하는 단계; 및
    상기 사용자로부터 상기 그래픽 영상을 상기 비디오 영상에 오버레이하지 않을 것을 명령받으면, 상기 비디오 영상을 3차원 영상으로 출력하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법을 실행하기 위한 프로그램을 저장한 컴퓨터로 판독 가능한 기록 매체.
KR1020080105484A 2008-10-27 2008-10-27 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치 KR20100046584A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080105484A KR20100046584A (ko) 2008-10-27 2008-10-27 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치
US12/481,000 US20100103165A1 (en) 2008-10-27 2009-06-09 Image decoding method, image outputting method, and image decoding and outputting apparatuses

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080105484A KR20100046584A (ko) 2008-10-27 2008-10-27 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치

Publications (1)

Publication Number Publication Date
KR20100046584A true KR20100046584A (ko) 2010-05-07

Family

ID=42117039

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080105484A KR20100046584A (ko) 2008-10-27 2008-10-27 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치

Country Status (2)

Country Link
US (1) US20100103165A1 (ko)
KR (1) KR20100046584A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10878646B2 (en) 2005-12-08 2020-12-29 Smartdrive Systems, Inc. Vehicle event recorder systems
US8996240B2 (en) 2006-03-16 2015-03-31 Smartdrive Systems, Inc. Vehicle event recorders with integrated web server
US9201842B2 (en) 2006-03-16 2015-12-01 Smartdrive Systems, Inc. Vehicle event recorder systems and networks having integrated cellular wireless communications systems
US8989959B2 (en) 2006-11-07 2015-03-24 Smartdrive Systems, Inc. Vehicle operator performance history recording, scoring and reporting systems
US8649933B2 (en) * 2006-11-07 2014-02-11 Smartdrive Systems Inc. Power management systems for automotive video event recorders
US8868288B2 (en) 2006-11-09 2014-10-21 Smartdrive Systems, Inc. Vehicle exception event management systems
US8239092B2 (en) 2007-05-08 2012-08-07 Smartdrive Systems Inc. Distributed vehicle event recorder systems having a portable memory data transfer system
KR20110003079A (ko) * 2009-07-03 2011-01-11 삼성전자주식회사 디스플레이장치 및 그래픽 디스플레이 방법
US9728228B2 (en) 2012-08-10 2017-08-08 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US9501878B2 (en) 2013-10-16 2016-11-22 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US9610955B2 (en) 2013-11-11 2017-04-04 Smartdrive Systems, Inc. Vehicle fuel consumption monitor and feedback systems
US8892310B1 (en) 2014-02-21 2014-11-18 Smartdrive Systems, Inc. System and method to detect execution of driving maneuvers
US11069257B2 (en) 2014-11-13 2021-07-20 Smartdrive Systems, Inc. System and method for detecting a vehicle event and generating review criteria
US9679420B2 (en) * 2015-04-01 2017-06-13 Smartdrive Systems, Inc. Vehicle event recording system and method
EP3550319A1 (en) 2018-04-05 2019-10-09 Koninklijke Philips N.V. Emulation mode for mri

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8879856B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Content driven transcoder that orchestrates multimedia transcoding using content information
CN101523924B (zh) * 2006-09-28 2011-07-06 皇家飞利浦电子股份有限公司 3d菜单显示

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality

Also Published As

Publication number Publication date
US20100103165A1 (en) 2010-04-29

Similar Documents

Publication Publication Date Title
KR20100046584A (ko) 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치
US10158841B2 (en) Method and device for overlaying 3D graphics over 3D video
CN102106153B (zh) 字幕的3d显示处理
KR20100002048A (ko) 영상 처리 방법, 영상 출력 방법 및 그 장치
US9445034B2 (en) Method and apparatus for processing video image
US20110293240A1 (en) Method and system for transmitting over a video interface and for compositing 3d video and 3d overlays
JP5789518B2 (ja) グラフィック画面処理方法及び装置
CA2767511A1 (en) Signal processing method and apparatus therefor using screen size of display device
JP6157493B2 (ja) インターレース３ｄビデオ
JP2011101229A (ja) 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置
JP5550520B2 (ja) 再生装置及び再生方法
US20120098944A1 (en) 3-dimensional image display apparatus and image display method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E601 Decision to refuse application