KR20070014968A - 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치 - Google Patents

데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치 Download PDF

Info

Publication number
KR20070014968A
KR20070014968A KR1020060063014A KR20060063014A KR20070014968A KR 20070014968 A KR20070014968 A KR 20070014968A KR 1020060063014 A KR1020060063014 A KR 1020060063014A KR 20060063014 A KR20060063014 A KR 20060063014A KR 20070014968 A KR20070014968 A KR 20070014968A
Authority
KR
South Korea
Prior art keywords
video
metadata
adjustment
recording
transparency
Prior art date
Application number
KR1020060063014A
Other languages
English (en)
Inventor
김건석
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20070014968A publication Critical patent/KR20070014968A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

본 발명은 제 2 비디오를 제 1 비디오와 함께 재생하는 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법 및 기록장치에 관한 것이다.
본 발명은 제 1 비디오와 제 2 비디오를 함께 재생하는 데이터 재생방법에 있어서, 제 2 비디오 메타데이터에 따라 제 2 비디오를 제 1 비디오 상에 프리젠트하되, 상기 제 2 비디오 메타데이터를 포함하는 관리정보에 포함된, 상기 제 2 비디오의 배치(composition)를 조절하는 것이 허용되는지를 나타내는 배치조절허용정보를 확인하고, 상기 제 2 비디오의 배치조절이 허용되는 경우, 상기 제 2 비디오의 배치를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생방법을 제공한다.
광 디스크, 제 2 비디오, PiP

Description

데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법 및 기록장치{Method and apparatus for reproducing data, recording medium and method and eapparatus for recording data}
도 1은 본 발명의 광기록재생장치와 주변기간의 통합적 사용의 일 실시예를 도시한 것이다.
도 2는 본 발명의 기록매체로서 광 디스크에 기록되는 파일구조를 도시한 것이다.
도 3은 본 발명의 기록매체로서 광 디스크의 기록구조를 도시한 것이다.
도 4는 본 발명의 광기록재생장치의 전체 구성을 도시한 것이다.
도 5는 본 발명의 AV 디코더 모델을 개략적으로 도시한 것이다.
도 6은 본 발명의 제 2 비디오 메타데이터의 일 실시예를 도시한 것이다.
도 7a ~ 7b는 본 발명에서 제 2 비디오가 프리젠트되는 배치(composition)의 이해를 위해 도시한 것이다.
도 8은 본 발명에 따른 제 2 비디오 조절허용정보를 포함하는 제 2 비디오 메타데이터의 일 실시예를 도시한 것이다.
도 9a ~ 9b는 본 발명에 따른 제 2 비디오 배치조절과 투명도 조절의 이해를 위해 도시한 것이다.
도 10은 본 발명에 따른 데이터 재생 흐름의 일 실시예를 도시한 것이다.
*도면의 주요부분에 대한 부호의 설명
11 : 픽업 12 : 제어부
13 : 신호처리부 15 : 로컬 스토리지
17 : 재생시스템(playback system)
17a : 플레이어 모델(Player Model)
17b: AV 디코더(AV decoder)
410 : 제 1 비디오(Primary Video)
420 : 제 2 비디오(Secondary Video)
730a : 제 1 비디오 디코더(Primary Video Decoder)
730b : 제 2 비디오 디코더(Secondary Video Decoder)
740a : 제 1 비디오 플레인(Primary Video Plane)
740b : 제 2 비디오 플레인(Secondary Video Plane)
본 발명은 복수의 비디오를 함께 재생함에 있어서, 제 1 비디오 위에 제 2 비디오를 재생하는 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법 및 기록장치에 관한 것이다.
기록매체로서 대용량의 데이터를 기록할 수 있는 광 디스크가 널리 사용되고 있다. 그 중에서도 최근에는 고화질의 비디오 데이터와 고음질의 오디오 데이터를 장시간 동안 기록하여 저장할 수 있는 새로운 고밀도 기록매체, 예를 들어 블루레이 디스크(BD: Blu-ray Disc)와 고밀도 디지털 비디오 디스크(HD-DVD: High Definition Digital Versatile Disc) 등이 개발되고 있다.
차세대 기록매체 기술인 고밀도 기록매체는 기존의 DVD를 현저하게 능가하는 데이터를 구비할 수 있는 차세대 광기록 솔루션으로 근래에 다른 디지털기기와 함께 이에 대한 개발이 진행되고 있다. 또한, 고밀도 기록매체 규격을 응용한 광기록재생장치의 개발도 시작되었다.
관련하여, 고밀도 기록매체와 광기록재생장치의 개발에 따라, 상기 고밀도 기록매체와 관련된 복수의 비디오를 동시에 재생하는 것이 가능해졌다. 그러나, 아직 복수의 비디오를 함께 기록하거나 재생하는 바람직한 방법 등이 알려진바 없어, 고밀도 기록매체 규격이 완전히 완비되지 못한 관계로, 본격적인 고밀도 기록매체 기반의 완성된 광기록재생장치를 개발하는 데 어려움이 따르는 것이 사실이다.
본 발명은 상기와 같은 실정을 감안하여 창작된 것으로서, 복수의 비디오를 함께 재생하는 바람직한 방법을 제공하는 데 그 목적이 있다.
특히, 본 발명에서는 제 1 비디오 위에 제 2 비디오를 재생하는 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법 및 기록장치를 제공하고자 한다.
상기 목적을 달성하기 위하여, 본 발명은 제 1 비디오와 제 2 비디오를 함께 재생하는 데이터 재생방법에 있어서, 제 2 비디오 메타데이터에 따라 제 2 비디오를 제 1 비디오 상에 프리젠트하되, 상기 제 2 비디오의 관리정보에 포함된, 상기 제 2 비디오의 배치(composition)를 조절하는 것이 허용되는지를 나타내는 배치조절허용정보를 확인하고, 상기 제 2 비디오의 배치조절이 허용되는 경우, 상기 제 2 비디오의 배치를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생방법을 제공한다.
또한, 상기 배치조절이 허용되는 경우, 상기 제 2 비디오는 기설정된 범위에서 배치조절될 수 있다.
또한, 상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 위치와 다른 위치에 프리젠트하는 위치조절을 포함할 수 있다.
또한, 상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 스케일과 다른 스케일로 프리젠트하는 스케일조절을 포함할 수 있다.
또한, 상기 관리정보는 상기 제 2 비디오의 투명도(transparency)를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 더 포함하고, 상기 제 2 비디오의 투명도조절이 허용되는 경우, 상기 제 2 비디오의 투명도를 조절하여 상기 제 1 비디오 안에 프리젠트할 수 있다.
또한, 본 발명은 제 1 비디오와 제 2 비디오를 함께 재생하는 데이터 재생장치에 있어서, 제 1 비디오를 디코딩하는 제 1 비디오 디코더와 제 2 비디오를 디코딩하는 제 2 비디오 디코더; 그리고 상기 디코딩된 제 2 비디오를 제 2 비디오 메타데이터에 따라 상기 제 1 비디오 상에 프리젠트하는 제어부를 포함하되, 상기 제 어부는 상기 제 2 비디오의 배치조절이 허용되는 경우, 상기 제 2 비디오의 배치를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생장치를 제공한다.
또한, 상기 제어부는 상기 관리정보에 기설정된 범위에서 상기 제 2 비디오의 배치를 조절할 수 있다.
또한, 상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 위치와 다른 위치에 프리젠트하는 위치조절을 포함할 수 있다.
또한, 상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 스케일과 다른 스케일로 프리젠트하는 스케일조절을 포함할 수 있다.
또한, 상기 제어부는 상기 제 2 비디오의 투명도 조절이 허용되는 경우, 상기 제 2 비디오의 투명도를 조절하여 상기 제 1 비디오 상에 프리젠트할 수 있다.
또한, 본 발명은 제 1 비디오 및 상기 제 1 비디오와 함께 재생되는 제 2 비디오가 기록되는 스트림 영역; 그리고 상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 포함하는 관리정보이 기록되는 관리영역을 포함하되; 상기 관리정보는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 기록매체를 제공한다.
또한, 상기 관리정보는 상기 제 2 비디오의 배치조절이 허용되는 경우, 조절가능한 배치의 범위를 나타내는 정보를 더 포함할 수 있다.
또한, 상기 관리정보는 상기 제 2 비디오의 투명도를 조절하는 것이 허용되 는지를 나타내는 투명도조절허용정보를 포함할 수 있다.
또한, 본 발명은 함께 재생가능한 제 1 비디오와 제 2 비디오를 기록매체에 기록하는 데이터 기록장치에 있어서, 제 1 비디오와 제 2 비디오를 기록매체에 기록하고, 상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 상기 기록매체에 기록하되, 상기 메타데이터는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록방법을 제공한다.
또한, 상기 메타데이터는 상기 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 포함할 수 있다.
또한, 또한 본 발명은 제 1 비디오와 제 2 비디오를 기록매체에 기록하는 데이터 기록장치에 있어서, 기록매체에 제 1 비디오 및 제 2 비디오를 기록하는 기록부; 그리고 상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 포함하는 관리정보을 생성하고, 상기 기록부를 제어하여 상기 관리정보을 상기 기록매체에 기록하는 제어부를 포함하되, 상기 관리정보는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록장치를 제공한다.
또한, 상기 관리정보는 상기 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 포함할 수 있다.
도 1은 본 발명의 광기록재생장치와 주변기간의 통합적 사용의 일 실시예를 도시한 것이다.
관련하여, 본 발명의 "광기록재생장치(10)"는 여러 가지 규격의 광 디스크를 기록하거나 재생 가능한 기기이다. 설계에 따라서는 특정규격(예를 들면, BD)의 광 디스크만을 기록재생 가능하게 할 수도 있으며, 또한 기록은 제외하고 재생만 하는 것도 가능하다. 그러나, 특히 본 발명에서 해결하고자 하는 블루레이 디스크(BD)와 주변기기와의 연계성을 고려하여 이하 블루레이 디스크(BD)를 재생하는 플레이어(BD-Player) 또는 블루레이 디스크(BD)를 기록재생하는 리코더(BD-Recorder)를 예로 하여 설명한다. 관련하여, 본 발명의 "광기록재생장치(10)"는 컴퓨터 등에 내장가능한 "드라이버(driver)"가 될 수 있음은 이미 널리 알려진 사실이다.
본 발명의 광기록재생장치(10)는 광 디스크(30)를 기록재생하는 기능 이외에도, 외부입력신호를 수신받아 이를 신호처리한 후 또 다른 외부 디스플레이(20)를 통해 사용자에게 화면으로 전달하는 기능을 가지게 된다. 이 경우 입력가능한 외부신호에 대해서는 특별한 제한은 없으나, 디지털 방송(Digital multimedia broadcasting) 및 인터넷(Internet) 등이 대표적인 외부입력신호가 될 것이다. 특히, 인터넷(Internet)의 경우 현재 누구나 손쉽게 접근할 수 있는 매체로서 광기록재생장치(10)를 통해 인터넷(Internet)상의 특정 데이터를 다운로드(download) 받아 활용할 수 있게 된다.
관련하여, 외부입력 소스(external source)로서 콘텐트(content)를 제공하는 자를 총칭하여 "콘텐츠 제공자(CP:contents provider)"로 명명한다.
또한, 본 발명에서 콘텐트(content)라 함은 타이틀을 구성하는 내용으로서 기록매체의 제작자(author)에 의해 제공되는 데이터(data)를 의미한다.
오리지널 데이터와 어디셔널 데이터에 대해 구체적으로 설명하면 다음과 같다. 예를 들어 광 디스크 내에 기록된 오리지널 데이터로는 특정 타이틀용의 멀티플렉싱된(multiplexed) AV스트림을 기록해두고, 인터넷상의 어디셔널 데이터로는 상기 오리지널 데이터의 오디오 스트림(예를 들어, 한국어)과 상이한 오디오 스트림(예를 들어, 영어)을 제공될 수 있다. 사용자에 따라서는 인터넷상의 어디셔널 데이터인 오디오 스트림(예를 들어, 영어)을 다운로드 받아, 오리지널 테이터인 AV스트림과 함께 재생하거나, 또는 어디셔널 데이터만 재생하고자 하는 요구가 존재할 것이다. 이를 가능케 하기 위해서는 상기 오리지널 데이터와 어디셔널 데이터 간의 연관성을 규정하고, 이들 데이터들을 사용자의 요구에 따라 관리/재생하는 체계화된 방법이 필요하게 된다.
상기에서 설명의 편의를 위해 디스크 내에 기록된 신호를 오리지널 데이터로 하고, 디스크 외부에 존재하는 신호를 어디셔널 데이터라고 명명하였다. 그러나, 이는 각각의 데이터를 취득하는 방법에 따라 구분될 따름이지 오리지널 데이터와 어디셔널 데이터가 반드시 특정의 데이터로 한정되는 것은 아니라 할 것이다. 따라서, 광 디스크 외부에 존재하면서, 오리지널 데이터와 연관된 어떠한 속성의 데이터도 어디셔널 데이터로 가능하게 된다.
관련하여, 상기 사용자의 요구를 실현 가능케 하기 위하여는 오리지널 데이터와 어디셔널 데이터 상호 간에 연관된 파일구조를 가짐이 필수적이라 할 것인바, 이하 도 2 ~ 도 3을 통해 블루레이 디스크(BD)에서 사용가능한 파일구조 및 데이터 기록구조에 대해 상세히 설명하면 다음과 같다.
도 2는 본 발명의 기록매체로서 광 디스크에 기록되는 파일구조를 도시한 것이다.
즉, 본 발명의 파일구조는, 하나의 루트 디렉토리(root directory) 아래에 적어도 하나 이상의 BDMV 디렉토리(BDMV)가 존재한다. 상기 BDMV디렉토리(BDMV)에는 사용자와의 인터액티브티(interactivity)를 보장하기 위한 일반파일(상위파일) 정보로서 인덱스 파일("index")과 오브젝트 파일("MovieObjet")을 존재한다. 아울러, 실제 디스크 내에 기록된 데이터에 대한 정보와 이를 재생하는 방법 등에 대한 정보를 가지는 디렉토리로서, 플레이리스트 디렉토리(PLAYLIST), 클립인포 디렉토리(CLIPINF), 스트림 디렉토리(STREAM), 보조 디렉토리(AUXDATA), BD-J 오브젝트 디렉토리(BDJO), 메타데이터 디렉토리(META) 및 백업 디렉토리(BACKUP)가 구비되어 있다. 이하 상기 디렉토리 및 디렉토리 내에 포함되는 파일에 대해 상세히 설명하면 다음과 같다.
메타데이터 디렉토리(META)는 데이터에 대한 데이터(data about a data)인 메타데이터(metadata) 파일을 포함한다. 상기 메타데이터 파일로는 서치(Search)파일, 디스크 라이브러리(Disc Library)를 위한 메타데이터 파일 등이 있으며, 데이터의 기록재생시, 데이터의 효율적 서치 또는 관리에 이용되게 된다.
BD-J 오브젝트 디렉토리(BDJO)는 BD-J 타이틀을 재생하기 위한 BD-J 오브젝트 파일을 포함한다.
보조 디렉토리(AUXDATA)는, 디스크 재생에 필요한 부가적인 데이터 파일을 포함한다. 예를 들어, 인터액티브 그래픽(interactive graphic)의 실행시에 사운드를 제공하는 "Sound.bdmv" 파일, 디스크 재생시 폰트(font) 정보를 제공하는 "11111.otf"파일등이 있다.
스트림 디렉토리(STREAM)는, 디스크 내에 특정 포맷으로 기록된 AV 스트림에 대한 파일들이 존재한다. 각각의 스트림은 현재 널리 알려진 MPEG-2 방식의 트랜스포트(Transport) 패킷(packet)으로 기록되는 경우가 가장 일반적이다. 스트림 파일 (01000.m2ts, 02000.m2ts)의 확장명으로 "*.m2ts" 로 사용한다. 특히, 상기 스트림 중에 비디오/오디오/그래픽 정보가 멀티플렉싱된(multiplexed) 스트림을 AV스트림이라 한다. 적어도 하나 이상의 AV스트림 파일들로서 타이틀(Title)을 구성하게 된다.
클립인포 디렉토리(CLIPINF)는 상기 각각의 스트림 파일("*.m2ts")과 일대일 대응하는 클립인포 파일(01000.clpi, 02000.clpi)들로 구성된다. 특히, 클립인포 파일("*.clpi")은 대응하는 스트림 파일("*.m2ts")의 속성정보 및 타임정보 (timing information)등을 기록하게 된다. 관련하여, 스트림 파일("*.m2ts")과 스트림 파일("*.m2ts")에 일대일 대응하는 클립인포 파일("*.clpi")을 묶어 이를 "클립(clip)"이라고 명명한다. 즉, "클립(clip)"은 스트림 파일("*.m2ts")과 이에 클립인포파일("*.clpi")을 모두 포함한 데이터가 된다.
플레이리스트 디렉토리(PLAYLIST)는 플레이리스트 파일("*.mpls")들을 포함한다. 플레이리스트는 클립(clips)이 재생되는 시간(playing interval)의 조합을 말한다. 상기 재생되는 시간을 플레이아이템(PlayItem)이라고 한다. 각각의 플레이리스트 파일("*.mpls")은 적어도 하나 이상의 플레이아이템 및 서브플레이아이템(SubPlayItem)을 포함하고 있다. 플레이아이템 및 서브플레이아이템은 재생을 원하는 특정 클립(clip)의 재생 시작시간(IN-Time)과 재생 종료시간(OUT-Time)에 대한 정보를 가지고 있다. 따라서, 플레이리스트는 플레이아이템들의 조합이라고 할 수 있다.
관련하여, 플레이리스트 파일 내에서 상기 적어도 하나 이상의 플레이아이템에 의해 재생되는 과정을 "메인패스(main path)"라 하고, 각각의 서브플레이아이템에 의해 재생되는 과정을 "서브패스(sub path)"라 정의한다. 메인패스는 플레이리스트의 마스터 재생(master presentation)을 제공하고, 서브패스는 상기 마스터 재생과 관련된 보조적인 재생(auxiliary presentations)을 제공한다. 플레이리스트 파일 내에서 상기 메인패스(main path)는 존재하여야 하며, 상기 서브패스(sub path)는 서브플레이아이템 존재에 따라 적어도 하나 이상 필요에 따라 존재하게 된다. 결국, 플레이리스트 파일은 적어도 하나 이상의 플레이아이템의 조합에 의해 원하는 클립의 재생을 수행하는 전체 재생관리 파일구조 내의 기본적 재생관리 파일단위가 된다.
본 발명에서는 메인패스에 의해 재생되는 비디오 데이터를 제 1 비디오(primary video)라 하고 서브패스에 의해 재생되는 비디오 데이터를 제 2 비디오(secondary video)라 명명한다. 광기록재생장치가 제 1 비디오와 함께 상기 제 1 비디오 안에 제 2 비디오를 프리젠트하는 기능을 "PiP(Picture In Picture)"라고도 한다. 본 발명은 광기록재생장치를 구현함에 있어서, PiP 어플리케이션을 가능하게 함과 아울러 효율적으로 상기 PiP 어플리케이션을 수행하는데 그 목적이 있다.
PiP 어플리케이션에 대하여 보다 구체적으로 설명하면, 제 1 비디오가 재생중에 상기 제 1 비디오(Primary Video)와 관련된 다른 비디오를 같은 디스플레이(20)에 출력하고자 하는 요구가 있을 수 있다. 예를 들어, 영화 또는 다큐멘터리의 재생 중에, 그 촬영 과정에 대한 감독의 코멘트 또는 에피소드를 함께 사용자에게 제공하는 것이 가능하다. 상기 코멘트 또는 에피소드를 보여주는 비디오가 제 2 비디오(Secondary Video)가 되며, 상기 제 2 비디오(Secondary Video)는 제 1 비디오(Primary Video) 위에 프리젠트된다.
관련하여, 상기 제 2 비디오는 제 1 비디오와 함께 처음부터 재생될 수 있고, 제 1 비디오의 재생 중간에 제 2 비디오의 재생이 시작될 수도 있다. 또한, 재생과정에 따라 화면에서 다른 위치 또는 다른 크기로 디스플레이되는 것도 가능하다. 상기 제 2 비디오가 복수로 구성되어 제 1 비디오의 재생에 따라 별개로 재생이 시작되거나 종료되는 것도 가능하다. 제 1 비디오는 관련된 오디오(Primary Audio)와 함께 프리젠트될 수 있으며, 제 2 비디오는 관련된 오디오(Secondary Audio)와 함께 프리젠트될 수 있음은 물론이다. 또한, 관련된 프리젠테이션 그래픽(Presentation Graphics) 또는 텍스트 서브타이틀(Text subtitle)이 상기 제 1 비디오 및 제 2 비디오와 함께 프리젠트되는 것도 가능하다.
일반적으로, 상기와 같은 제 2 비디오의 프리젠테이션 형태 예를 들어, 디스플레이(20)에서의 위치 및 크기, 투명도, 재생시기 등은 제 2 비디오 메타데이터로 정의되게 된다. 그리고, 상기 제 2 비디오 메타데이터에 정의된 정보에 따라 상기 제 2 비디오가 상기 제 1 비디오 위에 프리젠트되게 된다. 상기 제 2 비디오 메타데이터는 플레이리스트 파일에 포함되어 광기록재생장치에 제공될 수도 있고, 별도의 파일로 구성되어 제공될 수도 있다. 제 2 비디오 메타데이터에 대해서는 도 6에서 구체적으로 설명한다.
관련하여, 본 발명에 따른 PiP 어플리케이션 모델은 제 2 비디오가 멀티플렉스되는 스트림의 종류와 상기 제 2 비디오를 재생하는 서브패스가 관련되는 메인패스와 동기되는지에 따라 크게 세 가지로 구분될 수 있다. 따라서, 본 발명에서, 제 2 비디오를 재생하는 서브패스의 종류 즉, 서브패스타입은 상기 세 가지 모델을 고려하여 결정된다.
백업 디렉토리(BACKUP)는, 상기 파일구조상의 데이터 중 특히 디스크 재생과 관련된 정보가 기록되는 인덱스파일("index"), 오브젝트 파일(Movie Object, BD-J Object), 플레이리스트 디렉토리 (PLAYLIST)내의 모든 플레이리스트 파일("*.mpls") 및 클립인포 디렉토리(CLIPINF) 내의 모든 클립인포 파일("*.clpi")에 대한 복사본(copy) 파일을 저장하게 된다. 이는 상기 파일들의 손실시 디스크 재생에 치명적임을 고려하여 미리 백업(backup)용으로 별도 저장하기 위해서이다.
관련하여, 본 발명의 파일 구조가 상기 설명한 명칭 및 위치에 제한되는 것은 아님은 자명하다 할 것이다. 즉, 상기 디렉토리 및 파일들은 명칭 및 위치가 아닌 그 의미로서 파악되어야 할 것이다.
도 3은 본 발명에 의해 광디스크에 기록되는 데이터 기록구조를 도시한 것으 로서, 상기 전술한 파일구조에 관련된 정보들이 디스크 내에 기록되는 형태를 보여준다. 디스크의 내주로부터 보면, 전체 파일을 관리하기 위한 시스템 정보로서 파일시스템 정보 영역 (File System Information area)과, 기록된 스트림 (*.m2ts)을 재생하기 위한, 인덱스 파일, 오브젝트 파일, 플레이리스트 파일, 클립인포 파일 및 메타데이터 파일이 기록된 영역(이를 "database area"라고도 한다), 및 오디오/비디오/그래픽 등으로 구성된 스트림이 기록되는 스트림영역(stream area)이 존재함을 알 수 있다.
상기 스트림영역에는 제 1 비디오 및/또는 제 2 비디오를 포함하는 스트림데이터가 저장된다. 상기 제 2 비디오는 상기 제 1 비디오와 같은 스트림에 멀티플렉싱될 수도 있고 다른 스트림에 멀티플렉싱될 수도 있다.
또한, 상기 스트림영역 내에 포함된 콘텐트(content)를 재생하기 위한 파일정보 등을 기록하는 영역을 관리영역이라 하고, 상기 파일시스템 정보 영역 (File System Information area) 및 데이터베이스 영역(database area)이 이에 해당된다. 플레이리스트 파일과 클립인포 파일 등이 상기 데이터베이스 영역에 기록될 수 있다. 제 2 비디오 메타데이터가 별도의 파일로 구성되는 경우에는 상기 제 2 비디오 메타데이터 파일은 상기 데이터베이스 영역에 기록되게 될 것이다.
관련하여, 전술한 도 3의 각 영역은 하나의 예로 제시한 것으로서, 본 발명이 도 3과 같은 각 영역의 배열구조에 국한되지 않음은 자명할 것이다.
도 4는 본 발명의 광기록재생장치(10)의 전체 구성에 관한 일 실시예를 나타낸 것이다.
우선 광 디스크에 기록된 오리지널 데이터 및 재생관리 파일정보를 포함한 관리정보를 재생하기 위한 픽업(11)과 픽업(11)의 동작을 제어하는 서보(14), 상기 픽업(11)으로부터 수신된 재생신호를 원하는 신호 값으로 복원해내거나, 기록될 신호 예를 들어, 제 1 비디오와 제 2 비디오를 광 디스크에 기록되는 신호로 변조(modulation)하여 전달하는 신호처리부(13)와 상기 동작을 제어하는 마이컴(16)이 기본적으로 구성된다. 픽업(11)과 서보(14), 신호처리부(13), 마이컴(16)를 통틀어 기록재생부라고 불리기도 한다. 본 발명에서 상기 기록재생부는 제어부(12)의 제어에 따라 광 디스크(30) 또는 로컬 스토리지(15)로부터 데이터를 읽어 AV 디코더(17b)에 제공한다. 즉, 상기 기록재생부는 재생의 관점에서는 데이터를 읽어오는 판독부(reader unit)의 역할을 한다. 상기 기록재생부는 AV 인코더(18)에 의해 인코딩된 신호를 받아 비디오, 오디오 데이터 등을 광 디스크(30)에 기록할 수도 있다.
제어부(12)는 사용자명령 등에 의해 광 디스크 외에 존재하는 어디셔널 데이터를 다운로드 받아 이를 로컬 스토리지(15)에 저장함과 아울러, 로컬 스토리지(15) 내 어디셔널 데이터 및/또는 광 디스크 내 오리지널 데이터를 사용자의 요구에 따라 재생하게 된다. 본 발명에서 상기 제어부(12)는 제 2 비디오 프리젠테이션 형태의 조절이 허용되는 경우 조절 명령(예를 들어, 사용자 명령)을 수신하여, 상기 명령에 따라 제 2 비디오의 프리젠테이션 형태를 조절할 수 있다. 상기 조절의 허용여부는 상기 제 2 비디오에 대한 관리정보인 제 2 비디오 메타데이터에 포함되어 광기록재생장치(10)에 제공될 수 있다. 다만, 조절이 허용되지 허용되지 않 는 경우, 상기 제 2 비디오는 상기 제 2 비디오 메타데이터에 정의된 대로 프리젠트된다.
데이터의 기록 관점에서, 상기 제어부(12)는 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 생성하고, 상기 제 2 비디오 메타데이터를 스트림 데이터와 함께 광 디스크(30)에 기록하도록 제어한다. 또한, 상기 제어부(12)는 제 2 비디오의 프리젠테이션 형태를 조절하는 것이 허용되는지를 나타내는 정보가 포함되도록 상기 제 2 비디오 메타데이터를 생성할 수 있다.
재생시스템(17)은 상기 제어부(12)의 제어에 따라 데이터를 최종적으로 디코딩하여 사용자에게 제공하게 된다. "재생시스템(playback system)"(17)이라 함은, 광기록재생장치 내에 구비되는 프로그램(소프트웨어) 및/또는 하드웨어로 구성되는 집합적 재생처리 수단을 말한다. 광기록재생장치(10) 내에 로딩된 기록매체를 재생함은 물론, 상기 기록매체에 관련되어 로컬 스토리지 내에 저장된(예를 들어, 외부로부터 다운로드 받은) 데이터를 함께 재생 및 관리하기 위한 시스템을 의미한다. 재생시스템(17)은 특히 AV신호를 디코딩하는 AV 디코더(17b)와, 전술한 특정 타이틀의 재생과 관련하여 오브젝트 커맨드 혹은 어플리케이션과, 제어부(12)를 통해 입력되는 사용자 명령을 해석하여 재생방향을 결정하는 플레이어 모델(17a)로 구성된다. 실시예에 따라서는 플레이어 모델(17a)이 AV 디코더(17b)를 포함하는 의미로 사용되기도 하며, 이 경우 본 발명의 재생시스템(17)이 곧 플레이어 모델(17a)이 된다. AV 디코더(17b)는 신호의 종류에 따라 복수의 디코더를 포함하여 구성될 수 있다.
관련하여, 본 발명의 재생시스템(playback system)은 복수의 구성요소들을 포함할 수 있으며, 상기 구성요소들은 각각 하드웨어적 또는 소프트웨어적으로 처리되게 된다. 구성요소에 따라서는 실제 하드웨어적 구성보다는 소프트웨어로 처리함이 설계에 더욱 유용한 경우가 있다. 다만, 상기 구성요소들 중 "Presentation Engine" 및 AV 디코더(17b)와 플레인(Plane)은 하드웨어적으로 설계되는 것이 일반적이다. 특히, 소프트웨어적으로 처리되는 구성요소의 경우는 전술한 제어부(12)의 한 부분으로 구성될 수도 있을 것이다. 본 발명의 구성은 그 의미로서 이해하여야 하며, 하드웨어적 구성인지 소프트웨어적 구성인지에 국한되지 않음을 밝혀두고자 한다.
또한, 본 발명의 광기록재생장치(10)는 AV 인코더(18)를 포함한다. AV 인코더(18)는 광 디스크에 신호를 기록하는 기능의 수행을 위해 제어부(12)의 제어에 따라 입력신호를 특정포맷의 신호, 예를 들어 MPEG2 트랜스포트 스트림으로 변환하여 신호처리부(13)에 제공하게 된다.
도 5는 본 발명의 AV 디코더 모델을 개략적으로 도시한 것이다.
본 발명의 AV 디코더는 제 1 비디오와 제 2 비디오를 함께 재생하기 위해서 즉, PiP 어플리케이션의 구현을 위해서, 제 2 비디오 디코더(730b)를 포함한다. 상기 제 2 비디오 디코더(730b)는 제 2 비디오를 디코딩하게 된다. 상기 AV 스트림에 포함되는 상기 제 2 비디오는 기록매체(30)에 기록되거나 기록매체 외부로부터 다운로드 되어 사용자에게 제공된다. 상기 AV 스트림은 트랜스포트스트림(Transprort Stream : TS) 형태로 상기 AV 디코더(17b)에 제공된다.
관련하여, 본 발명에서는 메인패스에 의해 재생되는 AV 스트림을 메인트랜스포트스트림(이하, 메인스트림)이라 명하고, 그 외의 AV 스트림을 서브트랜스포트스트림(이하, 서브스트림)이라 명한다.
상기 AV 디코더(17b)에서 메인스트림과 서브스트림은 소스디패킷타이저(710a, 710b)에서 각각 디패킷화된다. 상기 디패킷화된 AV 스트림에 포함된 데이터는 2개의 PID 필터(720a, 720b)에서 데이터 패킷 종류에 따라 분리되어 대응하는 디코더(730a ~ 730b)에 제공된다. 예를 들어, 상기 디패킷화된 AV 스트림에 포함된 데이터는 메인스트림의 경우에는 PID(Packet IDentifier) 필터 1(720a)에서, 서브스트림의 경우에는 PID 필터 2(720b)에서 데이터 패킷 종류에 따라 분리되어 대응하는 디코더(730a ~ 730g)에 제공된다. 즉, 상기 메인스트림에 제 2 비디오가 포함된 경우, 상기 제 2 비디오는 PID 필터 1(720a)에 의해 다른 데이터 패킷과 분리되어 제 2 비디오 디코더(730b)에 제공된다. 반면, 상기 서브스트림에 제 2 비디오가 포함된 경우, 상기 제 2 비디오는 PID 필터 2(720b)에 의해 다른 데이터 패킷과 분리되어 제 2 비디오 디코더(730b)에 제공된다.
제 1 비디오는 제 1 비디오 디코더(Primary Video Decoder : 730a)에서, 제 1 오디오(primary audio)는 제 1 오디오 디코더(Primary Audio Decoder : 730e)에서, PG는 PG 디코더(730c)에서, IG는 IG 디코더(730d)에서, 제 2 오디오(secondary audio)는 제 2 오디오 디코더(Secondary Audio Decoder : 730f)에서, 텍스트 서브타이틀은 텍스트 디코더(Text Decodeer :730g)에서 각각 디코딩된다.
디코딩된 제 1 비디오, 제 2 비디오, PG, IG는 각각 제 1 비디오 플레 인(740a), 제 2 비디오 플레인(730b), 프레젠테이션 그래픽 플레인(740c)와 인터랙티브 그래픽 플레인(740d)에 프리젠트된다. 또한, 상기 프레젠테이션 그래픽 플레인(740c)에는 텍스트 디코더(730g)에서 디코딩된 그래픽 데이터도 프리젠트될 수 있다. 디코딩된 제 1 오디오와 제 2 오디오는 오디오 믹서에 믹싱된 후 출력되게 된다.
관련하여, 본 발명에서 플레인(Plane)이란 제 1 비디오, 제 2 비디오, PG, IG, 텍스트 서브타이틀의 오버레잉(overlaying) 과정을 설명하기 위한 개념적 모델을 의미한다. 상기 플레인 모델에 의해 제 1 비디오, 제 2 비디오, PG, IG, 텍스트 서브타이틀이 독립적으로 제어될 수 있다. 본 발명에서 제 1 비디오 디코더(730a)로부터 제공된 데이터는 제 1 비디오 플레인(740a)에 프리젠트되고 제 2 비디오 디코더(730b)로부터 제공된 데이터는 제 2 비디오 플레인(740b)에 프리젠트된다.
상기 제 2 비디오 플레인(740a)은 상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터에 포함된 크기 및 위치정보에 따라 조절되어, 상기 제 1 비디오 플레인(740a)과 하나의 이미지로 합해져 디스플레이(20)에 디스플레이된다.
일반적인 플레인 오버레인 과정에서, 본 발명의 제 2 비디오 플레인(740b)는 제 1 비디오 플레인(740a) 위에 놓인다. 따라서, 사용자는 제 1 비디오 플레인(740a) 안에 제 2 비디오 플레인(740b)가 있는 것처럼 느끼게 된다. 프리젠테이션 그래픽 플레인(740c)은 제 2 비디오 플레인 위에 놓이게 되며, 인터랙티브 그래픽 플레인(740d)은 상기 프리젠테이션 그래픽 플레인(740c)의 위에 놓이게 된다. 상기 프리젠테이션 그래픽 플레인(740c)과 인터랙티브 그래픽 플레인(740d)은 상기 제 1 비디오와 제 2 비디오의 플레인들(740a, 740b)와 합해져 하나의 이미지로 합해져 디스플레이(20)를 통해 사용자에게 제공된다.
관련하여, 상기 메인스트림 또는 상기 서브스트림은 기록매체(30) 또는 로컬 스토리지(15)로부터 AV 디코더에(17b)에 제공될 수 있다. 제 1 비디오와 제 2 비디오가 다른 클립에 저장된 경우, 제 1 비디오는 기록매체(30)에 기록되어 사용자에게 제공되고, 제 2 비디오는 기록매체(30) 외부로부터 로컬 스토리지(15)로 다운로드 될 수도 있다. 그 반대의 경우도 가능하다. 제 1 비디오와 제 2 비디오가 모두 기록매체에 기록되거나, 다운로드되는 경우도 있을 수 있다. 다만, 제 1 비디오와 제 2 비디오가 모두 기록매체에 기록되어 있는 경우, 제 1 비디오와 제 2 비디오를 함께 재생하기 위해서는 둘 중 하나를 로컬 스토리지로 저장한 후 재생을 시작하여야할 것이다. 제 1 비디오와 제 2 비디오가 같은 클립으로 멀티플렉스된 경우에는 제 1 비디오와 제 2 비디오가 모두 기록매체에 기록되어 제공되거나, 아니면 모두 기록매체 외부로부터 다운로드 될 것이다.
도 6은 본 발명의 제 2 비디오 메타데이터의 일 실시예를 도시한 것이다.
제 2 비디오 메타데이터는 제 2 비디오가 제 1 비디오 위에 프리젠트되는 시기, 재생크기와 위치, 재생되는 제 2 비디오 스트림에 관한 정보 등을 포함한다. 상기 제 2 비디오 메타데이터에 따라 제 2 비디오가 제 1 비디오와 함께 재생되게 된다. 상기 제 2 비디오 메타데이터를 PiP메타데이터라 명하여 설명한다.
상기 PiP메타데이터는 재생관리 파일의 일종인 플레이리스트에 존재할 수 있다. 도 6은 제 1 비디오의 재생을 관리하는 플레이리스트의 'ExtensionData' 블락 에 PiP메타데이터 블락이 존재하는 경우이다. PiP메타데이터에는 PiP메타데이터 블락에 저장된 메타데이터 블락 엔트리에 따라 적어도 하나 이상의, 헤더블락(block_header[k] ; 910)과 데이터블락(block_data[k] ; 920)이 포함될 수 있다. 상기 헤더블락(910)은 관련된 메타데이터 블락의 헤더정보를 포함하고 상기 데이터블락(920)은 관련된 메타데이터 블락의 데이터 정보를 포함한다. 도 6의 실시예에서는 PiP메타데이터가 플레이리스트에 존재하는 경우를 예로 하였으나, PiP를 구현하는 제 2 비디오 스트림의 헤더에 상기 정보들이 존재하는 것도 가능하다.
관련하여, 상기 헤더블락(910)은 플레이아이템을 식별하는 정보(이하, 'PlayItem_id[k]')를 가리키는 필드와 제 2 비디오 스트림을 식별하는 정보(이하, 'secondary_video_stream_id[k]')를 가리키는 필드를 포함할 수 있다. 'PlayItem_id[k]'는 'secondary_video_stream_id[k]'에 의해 지정되는(referred to) 'secondary video_stream_id' 엔트리가 리스트된 스트림 넘버 테이블(STream Number 테이블, 이하, STN 테이블)을 포함하는 플레이아이템에 대한 값이다. 상기 'PlayItem_id[k]' 값은 플레이리스트 파일의 플레이리스트 블락에 주어진다. 관련하여, PiP메타데이터에서 'PlayItem_id[k]'의 엔트리들은 PiP메타데이터에 기록된 'PlayItem_id[k]'에 대하여 오름차순으로 분류(sort)될 수 있다. 상기 'secondary_video_stream_id[k]'는 서브패스와, 관련된 데이터블락(920)이 적용되는 제 2 비디오 스트림을 구분(identify)하는데 사용된다. 즉, 상기 'PlayItem_id[k]'값에 대응하는 'PlayItem'의 STN 테이블에서, 상기 'secondary_video_stream_id[k]'에 대응하는 스트림엔트리를 알 수 있다. 상기 스 트림엔트리에는 제 2 비디오와 관련된 서브패스 식별정보 값이 저장되므로, 광기록재생장치(10)는 상기 값에 의해 제 2 비디오를 재생하는 서브패스를 식별할 수 있게 된다.
또한, 헤더블락(910)은 관련된 PiP메타데이터가 어떤 타임라인을 따르는지를 나타내는 정보(이하, PiP 타임라인타입(pip_timeline_type))를 포함할 수 있다. 상기 PiP 타임라인타입에 따라 제 2 비디오가 사용자에게 제공되는 형태가 달라지게 된다. PiP메타데이터의 데이터블락(920)은 PiP메타데이터가 위치하는 지점을 가리키는 시간지정정보(이하, 'pip_metadata_time_stamp')를 포함할 수 있는데, 상기 PiP 타임라인타입에 따라 상기 'pip_metadata_time_stamp[i]'의 엔트리들이 참조하는 타임라인이 달라진다. 즉, PiP메타데이터가 따르는 타임라인에 따라 상기 'pip_timeline_type[k]' 값이 정해진다.
본 발명에서 PiP타임라인타입은 크게 세 가지로 구분될 수 있다. 그 하나는 제 2 비디오를 재생하는 서브패스 즉, PiP 프레젠테이션 패스가 메인패스와 동기되고, 'pip_metadata_time_stamp' 엔트리들이 'PlayItem_id[k]'에 의해 지정된(referred to) 플레이아이템의 타임라인을 참조하는 경우이다. 다른 하나는 PiP 프리젠테이션 패스가 메인패스와 동기되지 않고, 'pip_metadata_time_stamp' 엔트리들이 서브패스의 타임라인을 참조하는 경우이다. 마지막 하나는 PiP의 프리젠테이션 패스가 메인패스와 동기되지 않고, 'pip_metadata_time_stamp' 엔트리들이 'PlayItem_id[k]'에 의해 지정된(referred to) 플레이아이템의 타임라인을 참조하는 경우이다.
상기 데이터블락(920)은 'pip_metadata_time_stamp[i]'별로 제 2 비디오 배치정보(이하, 'pip_composition_metadata') 블락을 포함한다. 제 2 비디오 배치정보는 제 2 비디오가 디스플레이(20)에 프리젠트되는 위치와 크기를 나타낸다. 상기 배치정보에는 제 2 비디오의 위치정보와 크기정보(이하, 'pip_scale[i]')가 포함될 수 있다. 도 7a를 참조하면, 상기 크기정보와 상기 위치정보에 따라 제 2비디오 플레인(740b)이 위치조절(positioning)과 크기조절(scaling)되어, 제 1 비디오 플레인(740a)과 합쳐진다.
관련하여, 상기 위치정보에는 제 2 비디오의 수평위치(이하, 'pip_horizontal_position[i]')정보와 제 2 비디오의 수직위치(이하, 'pip_vertical_position[i]') 정보가 포함된다. 도 7b는 상기 'pip_scale[i]'와 상기 'pip_horizontal_position[i]' 및 'pip_vertical_position[i]'에 따라 제 2 비디오가 프리젠트된 일 실시예를 도시한 것이다. 도 7b를 참조하면, 상기 'pip_horizontal_position[i]'은 제 1 비디오 플레인(740a)의 기준점(origin)으로부터 제 2 비디오 플레인(740b)이 디스플레이되는 수평위치(1101)를 나타낸다. 상기 'pip_vertical_position[i]'은 제 1 비디오 플레인(740a)의 기준점(origin)으로부터 제 2 비디오 플레인(740b)이 디스플레이되는 수직위치(1102)를 나타낸다. 즉, 상기 위치정보들(pip_horizontal_position[i], pip_vertical_position[i])에 의해 제 2 비디오가 디스플레이(20) 상에서 재생되는 위치가 결정된다.
상기 제 2 비디오가 디스플레이 상에 프리젠트되는 크기가 문제되는데, 이는 상기 'pip_scale[i]'에 의해 결정된다. 상기 제 2 비디오는 상기 'pip_scale[i]'에 따라 크기조절되어 디스플레이(20) 상에 프리젠트된다(1103). 상기 제 2 비디오는 크기는 제 1 비디오 크기까지 크기조절될 수 있다. 상기 'pip_scale[i]'는 효율적인 재생을 위하여 불연속적인 값으로 설정될 수 있다. 또한, 상기 'pip_scale[i]'는 제 1 비디오의 크기에 대한 비율(예를 들어, '×1', '×1/2', '×1/4', '×1.5'..l)로서 설정될 수도 있다.
본 발명과 관련하여, 상기 PiP 메타데이터에 정의된 프리젠테이션 형태와 다르게 제 2 비디오를 재생하고자 하는 요구가 있을 수 있다. 상기 요구에는 예를 들어, 제 2 비디오 플레인(740b)을 움직여 다른 위치에서 프리젠트되도록 조절하는 것, 제 2 비디오 플레인(740b)의 크기를 재조절하는 것, 제 2 비디오 플레인(740b)의 투명도를 조절하는 것, 제 2 비디오 플레인(740b)과 제 1 비디오 플레인의 오버레잉 위치를 바꿔서 제 2 비디오 안에 제 1 비디오가 프리젠트되도록 조절하는 것 등이 있을 수 있다.
도 8은 본 발명에 따라 제 2 비디오 조절허용정보를 포함하는 PiP 메타데이터의 일 실시예를 도시한 것이다.
본 발명에서는 상기 요구가 수행될 수 있는지를 나타내는 제 2 비디오의 프리젠테이션 형태의 조절허용정보를 광기록재생장치(10)에 제공한다. 도 8의 실시예에서 상기 조절허용정보는 PiP 메타데이터 내 헤더블락('metadata_block_header')에 포함된다. 상기 조절허용정보로는 상기 제 2 비디오가 제 1 비디오 상에 프리젠트되는 배치를 조절하는 것이 허용되는지를 나타내는 배치조절허용정보(801), 상기 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정 보(802) 등이 있을 수 있다.
상기 배치조절허용정보(801)가 배치조절을 허용하는 것으로 설정된 경우(예를 들어, '1b'로 설정된 경우), 제어부(12)는 수신받은 배치조절명령에 따라 제 2 비디오의 배치를 조절할 수 있다.
도 9a를 참조하면, 일반적으로 PiP 메타데이터에 정의된 배치정보에 따라 제 1 비디오가 제 1 비디오에 프리젠트된다(901a). 상기 배치조절허용정보(801)가 조절을 허용하는 것으로 설정된 경우, 제어부(12)는 배치조절명령이 지정하는 위치로 제 2 비디오를 움직일 수 있다(902a). 또한, 배치조절명령이 지정하는 크기로 제 2 비디오를 크기조절할 수도 있다(903a). 다만, 상기 배치조절허용정보(801)가 배치조절을 허용하지 않는 것으로 설정된 경우(예를 들어, '0b'로 설정된 경우), 상기 제 2 비디오는 PiP 메타데이터에 포함된 배치정보('pip_composition_metadata()')에 따라 프리젠트되게 될 것이다.
본 발명에 따라, 콘텐츠 제공자는 PiP 메타데이터에 정의된 배치정보와 다르게 제 2 비디오를 조절하는 것을 허용할 것인지를 정하여, 상기 제 2 비디오와 함께 제공할 수도 있다. 또한, 허용하는 것으로 정하는 경우, 상기 제 2 비디오가 움직일 수 있는 위치의 범위와 크기조절될 수 있는 범위를 제한하는 것도 가능하다. 상기 조절가능한 위치범위와 크기범위는 PiP 메타데이터에 포함된 배치정보(pip_composition_metadata)와 같은 형태로 정의될 수도 있을 것이다.
관련하여, 상기 조절허용정보가 위치조절정보와 크기조절정보로 나뉘어, 위치조절과 크기조절이 따로 정의할 수 있음은 물론이다.
본 발명은 제 1 비디오 안에 프리젠트되는 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보(802)를 제공할 수 있다.
도 9b를 참조하면, 일반적으로 제 2 비디오는 불투명(opacity)하게 제 1 비디오 위에 프리젠트되어, 상기 제 1 비디오 중 제 2 비디오와 오버레이되는 부분은 사용자에게 보이지 않게 된다(901b). 상기 불투명한 제 2 비디오의 투명도를 조절하여 재생되는 제 2 비디오 뒤로 제 1 비디오를 보고자 하는 요구가 있을 수 있다.
본 발명에서 콘텐츠 제공자는 제 2 비디오의 투명도를 조절하는 것을 허용할 것인지를 정하여, 상기 제 2 비디오와 함께 제공할 수 있다. 상기 투명도조절허용정보(802)가 투명도조절을 허용하는 것으로 설정된 경우(예를 들어, '1b'로 설정된 경우), 제어부(12)는 수신받은 투명도 값에 따라 제 2 비디오의 투명도를 조절하여, 제 1 비디오 위에 프리젠트할 수 있다(902b). 경우에 따라서는 상기 제 2 비디오가 완전투명(all transparency)하게 되어 제 1 비디오만 보이도록 조절(903b)되는 것도 가능할 것이다. 다만, 상기 투명도조절허용정보(802)가 투명도조절을 허용하지 않는 것으로 설정된 경우(예를 들어, '0b'로 설정된 경우), 상기 제 2 비디오는 계속하여 불투명하게 프리젠트되게 될 것이다. 상기 콘텐츠 제공자는 상기 제 2 비디오의 투명도 조절을 허용하고자 하는 경우, 조절될 수 있는 제 2 비디오의 투명도를 정의하여 투명도조절허용정보와 함께 제공할 수도 있을 것이다.
관련하여, 도 8에서는 조절허용정보가 헤더블락(910)('metadata_block_header')에 기록되는 것을 예로 하였으나, 데이터블락(920)('metadata_block_data')에 기록되는 것도 가능하다. 또한, 상기 PiP 메타 데이터를 포함하는 플레이리스트의 다른 영역에 기록되거나 재생되는 제 2 비디오 스트림의 헤더부에 포함되어 광기록재생장치(10)에 제공될 수도 있을 것이다.
도 10은 본 발명에 따른 데이터 재생 흐름의 일 실시예를 도시한 것이다.
기록매체가 로딩되면, 광기록재생장치(10)의 데이터베이스 영역으로부터 스트림 영역에 기록된 스트림에 대한 재생관리정보를 읽는다(S10). 본 발명에서, 상기 재생관리정보는 PiP 어플리케이션을 구현에 이용되는 제 2 비디오 메타데이터(PiP 메타데이터)를 포함한다.
광기록재생장치(10)가 PiP 어플리케이션 수행명령을 수신받는 경우 즉, 제 2 비디오의 재생요구가 있는 경우, 해당 제 2 비디오 스트림이 제 2 비디오 디코더(730b)에서 디코딩되어 제 2 비디오 플레인(740a)에 프리젠트된다.
도 7a을 참조하면, 상기 제 2 비디오 플레인(740b)은 위치조절과 크기조절을 거쳐 제 1 비디오 플레인(740a)과 합쳐진다. 상기 제 2 비디오 메타데이터는 PiP 구현을 위하여, 해당 스트림, 상기 제 2 비디오의 프리젠테이션 패스, 프리젠테이션 시기, 위치와 크기 등의 정보를 포함하고 있다. 상기 제 2 비디오는 상기 제 2 비디오 메타데이터에 근거하여 제 1 비디오 위에 프리젠트된다(S20).
제 2 비디오의 프리젠테이션 도중, 사용자 명령 등에 의해, 상기 제 2 비디오 프리젠테이션 형태를 상기 제 2 비디오 메타데이터와 다르게 조절하고자 하는 요구가 있을 수 있다. 본 발명에서 콘텐츠 제공자는 상기 요구가 구현될 수 있는지를 정하여 기록매체에 기록해두게 된다. 상기 요구가 구현되는 것이 허용되는 경우, 제어부는 조절명령을 수신하여 상기 조절명령에 따라 제 2 비디오의 프리젠테 이션 형태를 조절할 수 있게 된다.
도 10을 참조하면, 광기록재생장치(10)가 제 2 비디오의 배치조절명령을 수신받는 경우(S30), 제어부(12)는 제 2 비디오 메타데이터 내 배치정보('pip_composition_metadata')와 다르게 상기 제 2 비디오가 프리젠트되도록 할 수 있다(S40). 예를 들어, 사용자가 제 2 비디오의 위치를 다른 위치로 이동시키고자 하는 경우, 제어부(12)는 상기 사용자의 명령에 따라 제 2 비디오를 이동하도록 할 수 있다. 이 경우, 제 2 비디오 플레인(740b)은 상기 사용자 명령에 의한 위치값에 따라 위치조절(positioning)되어 제 1 비디오 플레인(740a)과 합쳐질 것이다.
관련하여, 콘텐츠 제공자가 제 2 비디오의 프리젠테이션 형태가 조절될 수 있는 범위를 정의해 둔 경우, 상기 제어부(12)는 상기 정의된 범위 내에서 수신받은 조절명령을 수행하게 된다. 예를 들어, 콘텐츠 제공자는 제 2 비디오 크기를 조절하는 것을 허용하고, 상기 조절할 수 있는 값을 제 1 비디오 플레인에 대한 불연속적인 비율로서 정의해 둘 수 있다. 이 경우, 상기 제 2 비디오는 상기 정의된 불연속적인 비율에 따라 크기조절 된다. 또한, 콘텐츠 제공자는 제 2 비디오가 이동할 수 있는 범위를 정의해 둘 수 있다. 예를 들어, 콘텐츠 제공자는 제 2 비디오가 제 1 비디오 안에서 프리젠트되도록 범위를 제한할 수 있다. 이 경우, 사용자가 제 2 비디오의 일부를 제 1 비디오 밖으로 이동시키고자 하더라도, 상기 제 2 비디오는 제 1 비디오 밖으로 이동되지 않는다.
또한, 상기 재생관리정보에 제 2 비디오의 투명도를 조절하는 것이 허용되는 것으로 정의된 경우, 제어부(12)는 투명도 조절명령을 수신하여, 상기 제 2 비 디오가 투명하게 프리젠트되도록 제어할 수 있다. 상기 제 2 비디오의 투명한 정도는 상기 투명도 조절명령 값에 따라 달라질 것이다. 앞서 언급한 바와 같이, 콘텐츠 제공자는 상기 제 2 비디오가 투명하게 조절될 수 있는 정도를 제한해 둘 수도 있을 것이다.
전술한 본 발명에 의하면, 제 1 비디오와 제 2 비디오를 함께 재생함에 있어서, 프리젠테이션 위치, 스케일, 투명도 등과 같은 제 2 비디오의 프리젠테이션 형태를 조절하는 것이 가능해져 사용자는 콘텐트를 더욱 다양하게 경험할 수 있게 된다. 또한, 콘텐츠 제공자는 사용자가 제 2 비디오의 프리젠테이션 형태를 조절할 것인지를 결정하여 상기 제 2 비디오의 재생관리정보에 기록함으로써, 상기 제 2 비디오의 프리젠테이션 형태를 제어할 수 있게 되는 장점이 있다.
본 발명을 상술한 실시예에 한정되지 않으며, 첨부된 청구범위에서 알 수 있는 바와 같이 본 발명이 속한 분야의 통상의 지식을 가진 자에 의해 변형이 가능하고 이러한 변형은 본 발명의 범위에 속한다.
상기 본 발명에 따른 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법 및 기록장치에 따르면, 콘텐츠 제공자는 제 2 비디오의 프리젠테이션 형태를 제어할 수 있게 됨과 아울러, 사용자는 콘텐트를 더욱 다양하게 경험할 수 있게 되는 장점이 있다.

Claims (17)

  1. 제 1 비디오와 제 2 비디오를 함께 재생하는 데이터 재생방법에 있어서,
    제 2 비디오 메타데이터에 따라 제 2 비디오를 제 1 비디오 상에 프리젠트하되,
    상기 제 2 비디오를 포함하는 관리정보에 포함된, 상기 제 2 비디오의 배치(composition)를 조절하는 것이 허용되는지를 나타내는 배치조절허용정보를 확인하고,
    상기 제 2 비디오의 배치조절이 허용되는 경우, 상기 제 2 비디오의 배치를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생방법.
  2. 제 1 항에 있어서,
    상기 배치조절이 허용되는 경우, 상기 관리정보는 상기 제 2 비디오의 제공자가 설정한 배치조절가능 범위를 포함하고, 상기 제 2 비디오는 상기 범위 내에서 배치조절가능한 것을 특징으로 하는 데이터 재생방법.
  3. 제 1 항에 있어서,
    상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 위치와 다른 위치에 프리젠트하는 위치조절을 포함하는 것을 특징으로 하는 데이터 재생방법.
  4. 제 1 항에 있어서,
    상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 스케일과 다른 스케일로 프리젠트하는 스케일조절을 포함하는 것을 특징으로 하는 데이터 재생방법.
  5. 제 1 항에 있어서,
    상기 관리정보는 상기 제 2 비디오의 투명도(transparency)를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 더 포함하고,
    상기 제 2 비디오의 투명도조절이 허용되는 경우, 상기 제 2 비디오의 투명도를 조절하여 상기 제 1 비디오 안에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생방법.
  6. 제 1 비디오와 제 2 비디오를 함께 재생하는 데이터 재생장치에 있어서,
    제 1 비디오를 디코딩하는 제 1 비디오 디코더와 제 2 비디오를 디코딩하는 제 2 비디오 디코더; 그리고
    상기 디코딩된 제 2 비디오를 제 2 비디오 메타데이터에 따라 상기 제 1 비디오 상에 프리젠트하는 제어부를 포함하되,
    상기 제어부는 상기 제 2 비디오의 배치조절이 허용되는 경우, 상기 제 2 비디오의 배치를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특 징으로 하는 데이터 재생장치.
  7. 제 6 항에 있어서,
    상기 제어부는 상기 제 2 비디오의 제공자가 설정한 배치조절가능 범위 내에서 상기 제 2 비디오의 배치를 조절하는 것을 특징으로 하는 데이터 재생장치.
  8. 제 6 항에 있어서,
    상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 위치와 다른 위치에 프리젠트하는 위치조절을 포함하는 것을 특징으로 하는 데이터 재생장치.
  9. 제 6 항에 있어서,
    상기 배치조절은 상기 제 2 비디오를 상기 메타데이터에 정의된 스케일과 다른 스케일로 프리젠트하는 스케일조절을 포함하는 것을 특징으로 하는 데이터 재생장치.
  10. 제 6 항에 있어서,
    상기 제어부는 상기 제 2 비디오의 투명도 조절이 허용되는 경우, 상기 제 2 비디오의 투명도를 조절하여 상기 제 1 비디오 상에 프리젠트하는 것이 가능한 것을 특징으로 하는 데이터 재생장치.
  11. 제 1 비디오 및 상기 제 1 비디오와 함께 재생되는 제 2 비디오가 기록되는 스트림 영역; 그리고
    상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 포함하는 관리정보이 기록되는 관리영역을 포함하되,
    상기 관리정보는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 기록매체.
  12. 제 11 항에 있어서,
    상기 관리정보는 상기 제 2 비디오의 배치조절이 허용되는 경우, 조절가능한 배치의 범위를 나타내는 정보를 더 포함하는 것을 특징으로 하는 기록매체.
  13. 제 11 항에 있어서,
    상기 관리정보는 상기 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 포함하는 것을 특징으로 하는 기록매체.
  14. 함께 재생가능한 제 1 비디오와 제 2 비디오를 기록매체에 기록하는 데이터 기록장치에 있어서,
    제 1 비디오와 제 2 비디오를 기록매체에 기록하고,
    상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 상기 기록매 체에 기록하되,
    상기 메타데이터는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록방법.
  15. 제 14 항에 있어서,
    상기 메타데이터는 상기 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록방법.
  16. 제 1 비디오와 제 2 비디오를 기록매체에 기록하는 데이터 기록장치에 있어서,
    기록매체에 제 1 비디오 및 제 2 비디오를 기록하는 기록부; 그리고
    상기 제 2 비디오의 재생을 관리하는 제 2 비디오 메타데이터를 포함하는 관리정보을 생성하고, 상기 기록부를 제어하여 상기 관리정보을 상기 기록매체에 기록하는 제어부를 포함하되,
    상기 관리정보는 상기 제 2 비디오가 상기 메타데이터에 정의된 배치와 다른 배치로 상기 제 1 비디오 상에 프리젠트되는 것이 허용되는지를 나타내는 배치조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록장치.
  17. 제 16 항에 있어서,
    상기 관리정보는 제 2 비디오의 투명도를 조절하는 것이 허용되는지를 나타내는 투명도조절허용정보를 포함하는 것을 특징으로 하는 데이터 기록장치.
KR1020060063014A 2005-07-29 2006-07-05 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치 KR20070014968A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US70346205P 2005-07-29 2005-07-29
US60/703,462 2005-07-29

Publications (1)

Publication Number Publication Date
KR20070014968A true KR20070014968A (ko) 2007-02-01

Family

ID=38080639

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060063014A KR20070014968A (ko) 2005-07-29 2006-07-05 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치

Country Status (2)

Country Link
KR (1) KR20070014968A (ko)
CN (3) CN101268514A (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2594070A1 (en) * 2010-07-13 2013-05-22 Thomson Licensing Method of picture-in-picture for multimedia applications
US8537201B2 (en) * 2010-10-18 2013-09-17 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
US9413985B2 (en) * 2012-09-12 2016-08-09 Lattice Semiconductor Corporation Combining video and audio streams utilizing pixel repetition bandwidth

Also Published As

Publication number Publication date
CN101268515A (zh) 2008-09-17
CN101268514A (zh) 2008-09-17
CN101268516A (zh) 2008-09-17

Similar Documents

Publication Publication Date Title
KR20060081331A (ko) 로컬 스토리지를 이용한 기록매체 재생방법 및 재생장치
KR20050088495A (ko) 스틸 화상의 재생을 관리하기 위한 데이터 구조를 구비한기록 매체와, 기록 재생 방법 및 장치
KR101049133B1 (ko) 기록매체, 기록매체의 재생방법과 재생장치
KR20060065474A (ko) 로컬스토리지를 이용한 기록매체 재생방법 및 재생장치
KR20070022580A (ko) 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치
JP2009505325A (ja) データ再生方法及び再生装置、記録媒体並びにデータ記録方法及び記録装置
KR20070014945A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
US20080056676A1 (en) Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium
KR20070014948A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
KR20070014968A (ko) 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치
KR20070014944A (ko) 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치
KR20070014941A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
US20080056678A1 (en) Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium
US20070041710A1 (en) Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium
KR20080038221A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
JP2009505312A (ja) 記録媒体、データ再生方法及び再生装置、並びにデータ記録方法及び記録装置
KR20080033433A (ko) 데이터 재생을 위한 방법 그리고 장치, 기록 매체, 그리고데이터 기록을 위한 방법 그리고 장치
KR20080033404A (ko) 기록매체, 데이터 재생방법/장치 및 데이터 기록방법/장치
KR20080034178A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
KR20070022578A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
KR20080036126A (ko) 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치
KR20070031218A (ko) 데이터 재생방법 및 재생장치 그리고 기록방법, 기록장치및 기록매체
EP1924992A2 (en) Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium
US20080056679A1 (en) Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data
EP1938322A2 (en) Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination