KR100977193B1 - 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체 - Google Patents

화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체 Download PDF

Info

Publication number
KR100977193B1
KR100977193B1 KR1020047017108A KR20047017108A KR100977193B1 KR 100977193 B1 KR100977193 B1 KR 100977193B1 KR 1020047017108 A KR1020047017108 A KR 1020047017108A KR 20047017108 A KR20047017108 A KR 20047017108A KR 100977193 B1 KR100977193 B1 KR 100977193B1
Authority
KR
South Korea
Prior art keywords
image data
dimensional image
dimensional
information
information indicating
Prior art date
Application number
KR1020047017108A
Other languages
English (en)
Other versions
KR20050003390A (ko
Inventor
토시오 노무라
히로유키 카타타
노리오 이토
타다시 우치우미
토모코 아오노
히로아키 야베
마키 타카하시
모토히로 이토
마사토시 츠지모토
마사히로 시오이
류지 키타우라
Original Assignee
샤프 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 샤프 가부시키가이샤 filed Critical 샤프 가부시키가이샤
Publication of KR20050003390A publication Critical patent/KR20050003390A/ko
Application granted granted Critical
Publication of KR100977193B1 publication Critical patent/KR100977193B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2310/00—Command of the display device
    • G09G2310/02—Addressing, scanning or driving the display screen or processing steps related thereto
    • G09G2310/0232—Special driving of display border areas

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

화상 데이터 기록 장치(100)는 3차원 화상을 촬영하기 위한 조건을 나타내는 파라미터를 수신하며, 그 파라미터를 부호화하여 촬영 조건 정보를 생성하는 3차원 표시 제어 정보 생성부(11), 및 촬영 조건 정보 및 3차원 화상 데이터의 양자, 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성하는 파일 생성부(12)를 포함한다.

Description

화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상 데이터 기록 매체{IMAGE DATA CREATION DEVICE, IMAGE DATA REPRODUCTION DEVICE, AND IMAGE DATA RECORDING MEDIUM}
본 발명은 3차원 표시를 위한 화상 데이터가 파일에서 생성될 때에 화상 데이터에 속성 정보를 부수하는 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상 데이터 기록 매체에 관한 것이다.
종래, 3차원 화상을 표시하는 여러 가지 방법이 제안되어 왔다. 그 방법중에서도 일반적으로 사용되고 있는 것은 양안(兩眼) 시차를 이용하는 "2개의 시점의 시스템"이다. 즉, 양안 시차를 갖는 좌측 눈의 화상과 우측 눈의 화상을 준비하여, 각각의 화상을 독립적으로 좌우측 눈에 투영함에 의해 입체 시각이 얻어진다.
도41은 2 시점의 시스템 중 대표적인 것으로서 "시분할 방식"의 개념도이다.
이 시분할 방식에서는, 도41에 도시된 바와 같이, 좌측 눈의 화상과 우측 눈의 화상이 수직 방향으로 교대로 배치되고, 좌측 눈의 화상을 표시하는 필드와 우측 눈의 화상을 표시하는 필드가 교대로 절환되어 표시된다. 여기에서, 좌측 눈의 화상및 우측 눈의 화상은 통상의 2차원 표시 시에 비해 수직 해상도가 절반으로 되 어 있다. 관찰자는 디스플레이의 절환 주기에 동기하여 개폐하는 셔터 식의 안경을 착용한다. 여기에서 사용하는 셔터는, 좌측 눈의 화상이 표시되는 중에 좌측 눈 측이 개방되고 우측 눈 측이 폐쇄되는 한편, 우측 눈의 화상이 표시되는 중에 좌측 눈 측이 폐쇄되고 우측 눈 측이 개방된다. 이 방식으로, 좌측 눈의 화상은 좌측 눈으로만, 우측눈의 화상은 우측 눈으로만 관찰되고, 입체적 시각을 얻을 수 있다.
도42A 및 42B는 2 시점의 시스템의 다른 하나의 대표적인 방식인 "패럴랙스(parallax) 배리어 방식"을 설명하기 위한 개념도이다.
도42A는 시차가 형성되는 원리를 나타내는 도면이고, 도42B는 패럴랙스 배리어 방식에 따라 표시되는 화면을 나타내는 도면이다.
도42B에 나타낸 바와 같이 좌측 눈의 화상과 우측 눈의 화상의 쌍이 스트라이프 형태로 배치되어 있는 화상을 도42A에 나타낸 바와 같이 화상 표시 패널(91)에 표시한다. 이 화상에 대응하는 간격들에 슬릿을 갖는 이른바 패럴랙스 배리어(92)를 화상 표시 패널의 전면에 배치한다. 이로써 좌측 눈의 화상은 좌측 눈(93) 만으로, 우측 눈의 화상은 우측 눈(94) 만으로 관찰하여 입체적 시각을 얻는다.
일본 특허 공개 공보 제1999-41627호에서는 패럴랙스 배리어 방식과 동일한 원리에 기초하는 렌티큘러(lenticular) 방식에 따라 3차원 표시를 위해 사용하는 데이터 기록 형식의 일례가 개시되어 있다.
도43A∼43C는 "렌티큘러 방식"에 따른 데이터 기록 형식의 일례를 나타낸 개념도이다.
구체적으로, 도43A에 나타낸 좌측 눈의 화상(101)과 도43B에 나타낸 우측 눈 의 화상(102)의 각각을 서브샘플링하여 도43C에 나타낸 1매의 혼합 화상(103)을 형성하고 기록한다. 재생 시에는, 이 혼합 화상(103)을 재배열하여 도42B에 나타낸 바와 같은 합성 화상이 형성된다.
상기한 2개의 시점의 시스템의 예뿐만 아니라, 3차원 화상을 표시하기 위한 여러 가지 방법이 있다. 그러나, 통상 다른 표시 방식들간에 기록 데이터의 호환성은 없다.
예컨대, 시분할 방식용으로 기록된 데이터를 그대로 패럴랙스 배리어 방식의
3차원 디스플레이에 표시할 수 없다. 따라서, 종래의 3차원 표시 시스템에 있어서, 최초부터 표시 방법을 고정하는 가정 하에 데이터 기록이 행해지고 있고, 기록 데이터의 범용성은 염두에 두고 있지 않다. 예컨대, 패럴랙스 배리어 방식의 3차원 디스플레이를 사용하는 것으로 정하면, 그 디스플레이에 표시될 데이터를 기록 매체에 기록하게 된다. 여기에서, 다른 방식의 디스플레이에 표시될 가능성 등은 고려되지 않기 때문에, 기록된 데이터가 패럴랙스 배리어 방식을 위한 데이터라는 정보는 파일 상에 기록되지 않는다.
표시 방식 이외에도, 시점의 수 또는 서브샘플링 방법 등, 3차원 표시에 필요한 여러 가지 타입의 정보가 있지만, 표시 형식을 하나로 고정하고 있기 때문에 그들의 정보도 파일에 기록되지 않는다. 즉, 언제나 같은 형식을 사용하면, 그러한 정보를 기록할 필요성이 없게 된다. 한편, 그 사실로 인해 기록된 데이터의 범용성이 현저하게 손상되어진다. 예컨대, 패럴랙스 배리어 방식(또는 렌티큘러 방식)용의 데이터를 기록하는 한, 좌측 눈이 화상과 우측 눈이 화상을 별도의 시퀀스로서 기록하거나, 또는 이와 다르게 도43C에서와 같이 좌측 눈의 화상과 우측 눈의 화상이 화면 의 절반씩 차지하도록 좌우로 배치된 혼합 화상을 기록할 수 있다. 이와 다르게, 도42B에서와 같이 좌측 눈의 화상과 우측 눈의 화상의 쌍이 스트라이프 형태로 배치된 합성 화상을 기록할 수 있다. 기록 형식이 다르면, 그 후 표시하기 위한 처리 방법도 다르지만, 기록된 데이터로부터는 어떤 형식으로 기록되었는지를 알 수 없기 때문에, 제3자가 그 데이터를 입수하였을 때, 어떠한 종류의 처리에 의해 데이터를 표시하면 좋은 것인지 모르게 되는 문제가 있다.
본 발명의 목적은, 3차원 표시를 위한 화상 데이터에 범용성을 갖게 하는 화상 데이터 생성 장치, 그 데이터를 재생하는 화상 데이터 재생 장치, 및 그 기록 방식 및 기록 매체를 제공하는 것이다.
본 발명의 일 양태에 따르면, 3차원 화상 데이터를 표시하기 위한 파라미터를 수신하는 수신 수단; 파라미터를 부호화하여 3차원 화상 표시 제어 정보를 생성하는 3차원 화상 표시 제어 정보 생성 수단; 및 3차원 화상 표시 제어 정보와 3차원 화상 데이터의 양자, 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성하는 파일 생성 수단을 포함하는 화상 데이터 생성 장치가 제공된다.
본 발명의 다른 양태에 따르면, 3차원 화상의 촬영 조건을 나타내는 파라미터를 수신하는 수신 수단; 파라미터를 부호화하여 촬영 조건 정보를 생성하는 정보 생성 수단; 및 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어 도 하나를 포함하는 멀티미디어 정보 파일을 생성하는 파일 생성 수단을 포함하는 화상 데이터 생성 장치가 제공된다.
본 발명의 또 다른 양태에 따르면, 화상 데이터 생성 장치는 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성한다. 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 및 그에 대해 수직한 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함한다.
본 발명의 또 다른 양태에 따르면, 화상 데이터 생성 장치 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성한다. 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어도 하나를 포함한다
본 발명의 또 다른 양태에 따르면, 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성되는 3차원 화상 표시 제어 정보 및 3차원 화상 데이터의 양자, 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 수신하는 수신수단; 멀티미디어 정보 파일의 구조를 해석하여 3차원 화상 표시 제어 정보와 3차원 화상 데이터 또는 2차원 화상 데이터를 추출하는 파일 구조 해석 수단; 3차원 화상 표시 제어 정보를 해석하는 3차원 화상 표시 제어 정보 해석 수단; 3차원 화상 데이터를 재생하는 데이터 재생 수단; 및 재생된 3차원 화상 데이터를 변환하는 데이터 변환 수단을 포함하는 화상 데이터 재생 장치가 제공된다. 데이터 변환 수단은 3차원 화상 표시 제어 정보 해석 수단에 의한 해석 결과를 기초하여, 재생된 3차원 화상 데이터를 표시용 데이터로 변환한다.
본 발명의 또 다른 양태에 따르면, 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 얻어진 3차원 화상 표시 제어 정보와 3차원 화상 데이터 또는 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일을 수신하는 수신 수단; 및 멀티미디어 정보 파일의 확장자를 해석하는 파일 종별 판정 수단을 포함하는 화상 데이터 재생 장치가 제공된다. 파일 종별 판정 수단은 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하고 있는지 아닌지를 확장자에 의해 판정한다.
본 발명의 또 다른 양태에 따르면, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 재생하는 화상 데이터 재생 장치가 제공된다. 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 및 그에 수직한 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함한다.
본 발명의 또 다른 양태에 따르면, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 재생하는 화상 데이터 재생 장치가 제공된다. 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어 도 하나를 포함한다.
본 발명의 또 다른 양태에 따르면, 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성된 3차원 화상 표시 제어 정보와 3차원 화상 데이터의 양자 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 기록하는 화상 데이터 기록 매체가 제공된다.
본 발명의 또 다른 양태에 따르면, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티 비디어 정보 파일을 기록하는 화상 데이터 기록 매체가 제공된다. 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 및 그에 수직한 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함한다.
본 발명의 또 다른 양태에 따르면, 화상 데이터 기록 매체는 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보, 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 기록한다. 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어도 하나를 포함한다.
본 발명의 또 다른 양태에 따르면, 화상 데이터 기록 매체는 3차원 화상을 촬영할 때의 조건을 나타내는 파라미터를 부호화하여 생성된 촬영 조건 정보 및 3차원 화상 데이터의 양자, 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 기록 영역에 기록한다.
본 발명의 또 다른 양태에 따르면, 화상 데이터 기록 매체는 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성된 3차원 화상 표시 제어 정보 및 3차원 화상 데이터의 양자, 또는 3차원 화상 데이터 및 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 기록 영역에 기록한다. 기록 영역은 3차원 화상 데이터 또는 2차원 화상 데이터를 기록하기 위한 화상 기록 영역, 음성 데이터를 기록하기 위한 음성 기록 영역, 및 부수 정보를 기록하기 위한 서브 코드 영역을 포함한다.
따라서, 본 발명에 따르면, 3차원 화상 데이터와 함께, 3차원 화상 데이터를 표시하기 위한 3차원 화상 표시 제어 정보를 멀티미디어 정보 파일로서 기록 또는 구성하기 때문에, 3차원 화상 데이터가 범용성을 갖게 되고, 1종류의 멀티미디어 정보 파일이 여러 가지의 3차원 표시 방식에 유연하게 대응하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 멀티미디어 정보 파일에 포함되는 3차원 화상 표시 제어 정보를 해석함에 의해, 3차원 화상 데이터를 표시 방법에 적절하게 변환하여, 바르게 표시하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보에 3차원 화상 데이터의 시점의 수를 나타내는 정보를 포함시킨다. 따라서, 여러 가지의 시점의 수를 가진 3차원 화상 데이터를 범용성이 있는 멀티미디어 정보 파일로서 기록, 재생 또는 구성하는 것이 가능하게 된다.
본 발명에 따르면, 3차원 화상 데이터가 어느 시점의 위치의 데이터인지를 나타내는 정보를 3차원 화상 표시 제어 정보가 포함한다. 따라서, 3차원화상 데이터가 복수의 스트림으로서 기록되거나 또는 하나의 스트림으로서 기록되어 있어도, 적절하게 데이터를 변환하는 것이 가능하게 된다.
본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 서브샘플링의 방향을 나타내는 정보를 포함한다. 따라서, 표시할 때의 데이터 복원이 바르게 실행될 수 있다.
본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 정보를 포함한다. 따라서, 적절한 시점 보간이나 3차원 모델 구축이 가능하게 된다.
본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 시차 화상의 시프트 시에 최대 시프트 량을 나타내는 정보를 포함하고 있다. 따라서, 화상의 작성자가 진정으로 보여주기 원하는 것이 표시되지 않는 사태의 발생을 방지하는 것이 가능하게 된다.
본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 정보를 포함한다. 따라서, 멀티미디어 정보 파일의 생성자가 테두리 화상을 표시하는지 아닌지 사이에서 선택하는 것이 가능하게 된다.
본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 화상 주변에 표시되는 테두리 화상 데이터를 나타내는 정보를 포함한다. 따라서, 3차원 화상 데이터에 따라 적절한 테두리 화상을 표시하는 것이 가능하게 된다.
도1A∼1C는 본 발명의 실시예에서 생성되는 멀티미디어 정보 파일의 구조를 나타내는 도면으로서, 도1A는 멀티미디어 정보 파일의 구성을 나타내고, 도1B는 오브젝트의 구성을 나타내며, 도1C는 3차원 화상 데이터의 구조의 일례를 나타낸다.
도2는 본 실시예에서의 화상 데이터 기록 장치(100)의 구성을 나타내는 블록도이다.
도3은 화상 데이터 재생 장치(200)의 구성을 나타낸 블록도이다.
도4A∼4C는 3차원 표시 제어 정보(2)에 기술된 구체적인 정보를 설명하는 개념도로서, 도4A는 3차원 표시 제어 정보(2)에 기술된 구체적인 정보를 나타내고, 도4B는 음성, 좌측 눈의 화상 및 우측 눈의 화상의 스트림을 나타내며, 도4C는 서브샘플링의 방향을 나타내는 테이블을 도시하고 있다.
도5A∼5C는 "시점의 수" 및 "시점의 위치"를 나타낸 개념도로서, 도5A는 2개의 시점의 시스템의 예를 나타내고, 도5B 및 도5C는 6개의 시점의 시스템의 예를 나타내고 있다.
도6은 6개의 시점의 시스템의 경우에 시점의 위치에 대응하는 스트림의 기술의 예를 나타내는 개념도이다.
도7A는 좌측 눈의 화상과 우측 눈의 화상이 동일 스트림에 있는 경우 시점의 위치에 대응하는 스트림의 기술의 예를 나타낸 개념도이다.
도7B는 다중화 데이터를 나타내는 도면이다.
도8A∼8C는 "카메라 배치"의 다른 예를 나타낸 개념도로서, 도8A 및 도8B는 집중형의 예를 나타내고, 도8C는 발산형의 예를 나타내고 있다.
도9A 및 9B는 테두리 화상의 구성을 예시한 개념도로서, 도9A는 테두리 화상이 표시되지 않은 상태를 나타내고, 도9B는 테두리 화상을 표시한 상태를 나타내고 있다.
도1OA∼10C는 테두리 화상을 표시하기 위해 "테두리 화상 데이터"를 공급하는 구성을 나타낸 블록도이다.
도11A∼11D는 패럴랙스 배리어 방식에 사용하는 액정 패널과 패럴랙스 배리어의 슬릿의 위치 관계를 나타낸 개념도이다.
도12A 및 12B는 샘플링 패턴을 설명하기 위한 개념도이다.
도13A∼13E는 1매의 화상을 구성하기 위해 복수의 시차 화상을 배치한 화상 배치를 나타낸 개념도이다.
도14A 및 14B는 3차원 표시 제어 정보 및 좌측 눈의 화상과 우측 눈의 화상을 횡으로 배열하여 형성된 화상 데이터를 나타낸 개념도이다.
도15A 및 15B는 각 시차 화상을 반전하는 구성을 설명하기 위한 개념도이다.
도16은 3차원 표시 제어 정보(2) 이외에 촬영 조건 정보(42)를 부가한 멀티미디어 정보 파일을 나타낸 개념도이다.
도17은 촬영 조건 정보(42)에 기술된 구체적인 정보의 일례를 나타낸 도면이다.
도18은 2개의 시점의 화상을 얻기 위해 카메라 렌즈의 앞에 장착하는 카메라 어댑터(71)를 나타낸 개념도이다.
도19는 카메라 어댑터를 사용하여 화상을 촬영하는 경우에 부가되는 촬영 조건 정보(42)의 예를 나타낸 도면이다.
도20은 베이스 길이 및 컨버전스 각을 설명하기 위한 도면이다.
도21은 2개의 시점의 시스템 또는 다시점의 시스템에 따른 촬영에 있어서 카메라를 직선 형태로 배치하는 경우의 카메라의 배치 형상을 나타낸 개념도이다.
도22는 2개의 시점의 시스템 또는 다시점의 시스템의 촬영에 있어서 카메라를 원주 형태로 배치하는 경우의 카메라의 배치 형상을 나타낸 도면이다.
도23은 카메라가 직선 형태로 배치된 경우의 촬영 조건 정보의 예를 나타내는 도면이다.
도24는 격자 형태로 카메라를 배치한 경우의 카메라의 배치 형상을 나타내는 개념도이다.
도25는 격자 형태로 카메라를 배치한 경우에 각 카메라로부터 얻어지는 화상을 나타낸 도면이다.
도26은 카메라가 격자 형태로 배치되어 있는 경우의 화상의 배치를 나타낸 개념도이다.
도27은 카메라가 평면 형태로 배치된 경우의 촬영 조건 정보의 예를 나타낸 도면이다.
도28은 3차원 화상 제어 정보 오브젝트에서 오브젝트 ID로서 범용 ID를 사용하는 경우를 나타낸 도면이다.
도29는 3차원 식별 정보를 나타내는 도면이다.
도30은 멀티미디어 정보 파일의 구성을 나타낸 도면이다.
도31은 3차원 화상 파일의 다운 로드 처리 플로우챠트이다.
도32는 화상 데이터 재생 장치의 제1 변형례를 나타낸 블록도이다.
도33은 화상 데이터 재생 장치의 제2 변형례를 나타낸 블록도이다.
도34는 화상 데이터 재생 장치의 제3 변형례를 나타낸 블록도이다.
도35는 프로그램 배열 정보라고 하는 형태로 정기적으로 방송 콘텐츠에 삽입되는 3차원 식별 정보를 나타낸 도면이다.
도36은 헬리컬 스캔 방식에서 테이프상에 데이터가 기록되는 트랙을 나타낸 도면이다.
도37은 트랙(72) 중 하나를 확대하여, 그 데이터 구성을 나타낸 도면이다.
도38은 화상 기록 영역(75)을 확대하여, 그 데이터 구성을 나타낸 도면이다.
도39는 화상 데이터 기록 장치(100)의 처리 플로우를 나타낸 플로우챠트이다.
도40은 촬영 조건 정보를 부가한 멀티미디어 정보 파일의 생성 순서를 나타낸 플로우챠트이다.
도41은 2개의 시점의 시스템의 대표예 중 하나인 "시분할 방식"을 나타낸 개념도이다.
도42A 및 42B는 2개의 시점의 시스템의 다른 하나의 대표적인 방식인 "패럴랙스 배리어 방식"을 나타낸 개념도이다.
도43A∼43C는 "렌티큘러 방식"에 따른 데이터 기록 형식의 일례를 나타낸 개념도이다.
이하, 본 발명의 구성, 작용 및 효과를 도면을 참조하여 설명한다. 도면들에서 동일하거나 또는 대응하는 부분에는 동일 참조부호를 첨부하고, 그에 대한 설명은 반복하지 않는다.
도1A∼1C는 본 발명의 실시예에 따라 생성되는 멀티미디어 정보 파일의 구조를 나타내는 도면이다.
멀티미디어 정보 파일은 3차원 화상 데이터와 2차원 화상 데이터 중 어느 하나를 포함할 수 있다. 이하에서는 3차원 화상 데이터를 포함하는 경우의 예시적인 멀티미디어 정보 파일에 대해서 설명한다.
도1A를 참조하면, 멀티미디어 정보 파일은 헤더 제어 정보(1), 3차원 표시 제어 정보(2) 및 3차원 화상 데이터(3)의 적어도 3개의 구성 요소를 포함하고 있다.
3차원 화상 데이터(3)는, 정지 화상 데이터와 동화상 데이터 중 임의의 것이어도 된다. 멀티미디어 정보 파일에는 음성 데이터를 화상 데이터와 함께 기록해도 되지만, 간단화를 위해 여기에서 음성 데이터는 포함되지 않는다. 또한, 부가 정보를 포함할 수 있다.
멀티미디어 정보 파일이 2차원 화상 데이터를 포함하고 있는 경우에는, 3차원 표시 제어 정보는 부가되지 않는다.
각각의 구성 요소는 오브젝트라 한다. 각 오브젝트는, 도1B에 나타낸 형태를 취하고 있다. 구체적으로, 오브젝트를 식별하기 위한 오브젝트 ID(4)와 오브젝트 사이즈(5)가 기입되고, 그 후 오브젝트 사이즈(5)에 의해 규정되는 길이의 오브젝트 데이터(6)가 계속된다. 오브젝트 ID(4)와 오브젝트 사이즈(5)를 합하여 오브젝트 헤더라 한다. 이 오브젝트는 계층 구조를 가질 수 있다.
도1A에 있어서, 헤더 제어 정보(1), 3차원 표시 제어 정보(2) 및 3차원 화상 데이터(3)는, 본래, 각각 헤더 제어 정보 오브젝트(1), 3차원 표시 제어 정보 오브젝트(2) 및 3차원 화상 데이터 오브젝트(3)라 해야 하는 것이지만, 명칭이 길어지는 것을 피하기 위해 여기에서는 "오브젝트"라는 표기를 생략한다.
도1C는, 3차원 화상 데이터(3)의 예시적인 구조를 나타내는 도면이다. 3차원 화상 데이터(3)에서는, 오브젝트 ID나 오브젝트 사이즈를 포함하는 오브젝트 헤더(7)의 다음에, 복수의 패킷(8)이 이어진다. 패킷(8)은 데이터를 통신할 때의 최소 단위
이고, 각 패킷은 패킷 헤더와 패킷 데이터로 구성된다. 3차원 화상 데이터(3)는 반드시 패킷화 되어 있을 필요는 없고, 일련의 데이터열의 형태로 될 수 있다.
이하의 설명에 있어서 오브젝트에 기술하는 정보에 대해 상세하게 설명하는 경우, 이전에 설명한 정보와 동일한 정보의 설명은 반복하지 않고 다른 부분만 설명한다.
도2는 본 발명의 멀티미디어 정보 생성 장치의 일례인 화상 데이터 기록 장치(100)의 구성을 나타내는 블록도이다.
도2를 참조하면, 화상 데이터 기록 장치(100)는 3차원 표시 제어 정보 생성부(11)와 파일 생성부(12)를 포함한다.
3차원 표시 제어 정보 생성부(11)는 필요한 파라미터를 외부로부터 수신하여 3차원 표시 제어 정보를 하나의 오브젝트로서 생성한다. 파일 생성부(12)는 3차원 표시 제어 정보와 3차원 화상 데이터를 수신하여, 헤더 제어 정보를 부가함에 의해 도1A∼1C에 나타낸 바와 같은 멀티미디어 정보 파일을 생성하여 출력한다. 여기에서의 3차원 화상 데이터는 비압축 데이터 또는 압축 부호화된 데이터로 될 수 잇다.
이와 같이 생성된 멀티미디어 정보 파일은 기록 매체(13)에 기록되거나 또는 직접 통신로에 송출된다.
본 발명의 멀티미디어 정보 재생 장치의 일례로서, 본 실시예에서의 화상 데이터 재생 장치에 대해 설명한다.
도3은 도1A에 나타낸 바와 같은 3차원 화상 데이터를 포함하는 멀티미디어 정보 파일이 입력되는 화상 데이터 재생 장치(200)의 구성을 나타낸 블록도이다.
도3을 참조하면, 화상 데이터 재생 장치(200)는 파일 구조 해석부(21), 파일 헤더 해석부(22), 데이터 재생부(23), 표시부(24), 3차원 표시
제어 정보 해석부(25) 및 데이터 변환부(26)를 포함한다. 멀티미디어 정보 파일은, 기록 매체(13)로부터, 또는 통신로에서 공급된다.
입력된 멀티미디어 정보 파일은 파일 구조 해석부(21)에서 헤더 제어 정보, 3차원 화상 데이터 및 3차원 표시 제어 정보의 각각이 인식되고, 헤더 제어 정보는 파일 헤더 해석부(22)에, 3차원 화상 데이터는 데이터 재생부(23)에, 3차원 표시 제어 정보는 3차원 표시 제어 정보 해석부(25)에 각각 보내어진다.
파일 헤더 해석부(22)에서는 헤더 제어 정보의 해석을 행하여 3차원 화상 데이터의 재생에 필요한 정보를 데이터 재생부(23)에 제공한다. 데이터 재생부(23)에서는, 데이터의 역다중화, 패킷으로부터의 데이터 추출, 및 데이터가 압축 부호화된 경우에는 그 데이터의 복호를 행한다. 3차원 표시 제어 정보 해석부(25)에서는 3차원 표시 제어 정보를 해석하여 얻어진 정보를 데이터 변환부(26)에 제공한다. 데이터 변환부(26)는 소망하는 3차원 표시 형식에 맞도록 상기 복호된 3차원 화상 데이터를 변환하여 표시부(24)에 출력한다. 표시부(24)는 재생 장치로부터 독립적인 단체의 3차원 디스플레이로 될 수 있다.
도4A∼4C는 3차원 표시 제어 정보(2)에 기술된 구체적인 정보를 설명하기 위한 개념도이다.
도4A에 일부를 나타낸 바와 같이, 3차원 표시 제어 정보(2)에 기술된 구체적인 정보에는, 시점의 수, 각 시점의 위치에 대응하는 스트림, 서브샘플링의 방향, 카메라 배치, 시차량 시프트 한도, 경계 화상 표시 유무, 경계 화상 데이터, 시차 화상 스위칭 피치, 샘플링 패턴, 화상 배치, 화상 반전 유무 등이 있다.
도4A에 나타낸 3차원 표시 제어 정보에 대해서 이하에 상세하게 설명한다.
도4A에서의 "시점의 수"란, 문자 그대로 시점, 즉 시차 화상의 수이고, 2개의 시점의 시스템에 따른 데이터가 제공되면 2로 된다.
카메라를 사용하여 촬영이 행해질 때, 카메라가 눈의 역할을 하며 따라서 이 경우의 시점의 수는 카메라의 수가 된다. 인간의 눈은 2개밖에 없기 때문에, 3 이상의 시점의 수로 된 데이터는 용장으로 된다. 그러나, 관찰자가 이동하면 관찰된 화상이 변화되어 보다 자연스러운 입체적 시각이 가능하게 된다.
도4A에서, 시점의 수를 기술한 행의 다음 2행(시점 위치 L, 시점 위치 R)은, 각각 좌측의 시점 위치와 우측의 시점 위치에 대응하는 "스트림 번호"를 나타내고 있다.
"스트림 번호"에 대해서는 상세하게 후술한다.
도4B에 도시된 바와 같이, 음성, 좌측 눈의 화상 및 우측 눈의 화상 각각이 분리된 스트림으로서 제공된다. 이들은 패킷 형태로 다중화하여 기록되는 것으로 가정한다. 다중화된 데이터에서 각 패킷이 음성 데이터인 것인지, 좌측 눈의 화상 데이터 또는 우측 눈의 화상 데이터인 것인지를 식별하기 위해, 각 스트림에 고유의 스트림 번호가 부여된다.
도4B에 도시된 예에서, 음성 스트림에는 스트림 번호1이 할당되고, 좌측 눈의 화상 데이터에는 스트림 번호2가 할당되고, 우측 눈의 화상 데이터에는 스트림 번호3이 할당된다. 각 패킷 헤더에 상기 스트림 번호가 기입됨에 따라 데이터의 종별을 명시하게 된다.
이 스트림 번호를 사용함에 의해, 도4A에는, 좌측 눈의 화상은 스트림 번호2의 데이터이고, 우측 눈의 화상은 스트림 번호3의 데이터임을 나타내고 있다. 종래의 2차원 화상 데이터를 다루는 멀티미디어 정보 파일에서는, 음성과 화상의 구별밖에 필요 없기 때문에, 시점 위치와 스트림 사이의 대응을 나타내는 정보는 3차원 화상 데이터의 경우에 특유한 것이다.
도5A∼5C에 나타낸 개념도를 참조하여, 상기한 "시점의 수" 및 "시점의 위치"에 대해서 구체적으로 설명한다.
도5A는 2개의 시점의 예를 나타내고, 도5B와 도5C는 6개의 시점 시스템의 예를 나타내고 있다. 도5A의 2 시점 시스템의 경우는, 우측 또는 좌측의 지정 방법으로 시점의 위치를 특정하는 것이 가능하다.
6 시점의 시스템의 경우, 도5B에서와 같이, 예컨대 좌측의 시점 위치는 중앙으로부터 세어서 몇 번째인지에 따라, "L1", "L2", "L3"라고 나타낸다. 우측의 시점 위치들도 동일한 방식으로 나타낸다.
이와 다르게, 6 시점의 시스템의 경우, 도5C에서와 같이, 좌측으로부터 시작하는 일련 번호에 의해 시점의 위치들이 나타내진다. 또한, 도5B 및 도5C에 도시된 것들과 다른 여러 가지의 방법으로 나타낼 수 있다.
시점의 위치를 나타내는 방식은 사전에 송신 측과 수신측 사이의 규격 또는 구체적인 형태로 공유되어 있을 필요가 있다. 규격이 없으면, 예컨대 "ch3"으로 나타낸 시점의 위치가 좌측에서 3번째인 것인지 우측에서 3번째인 것인지 알 수 없게 되기 때문이다.
도6은, 6개의 시점의 시스템에 있어서, 시점의 위치와 스트림 사이의 예시적인 대응 방식을 나타내는 개념도로서, 도4A와 대비되는 도면이다.
도6에서, 음성 스트림은 그에 할당된 스트림 번호1을 가지며, 시점 위치 1∼6의 화상 스트림은 각각 예컨대 스트림 번호 2∼7로 나타내고 있다. 그 스트림 번 호들은 데이터의 종별을 나타내는 각 패킷 헤더에 기입된다.
도7A 및 7B는, 좌측 눈의 화상과 우측 눈의 화상이 동일 스트림에 있는 경우에, 시점의 위치와 스트림 사이의 예시적인 대응 방식을 나타내는 개념도이다.
도7A에 나타낸 바와 같이, 시점 위치 L 및 시점 위치 R이 동일 스트림 번호 (이 경우는 스트림 번호 2)로 나타내진다. 이 경우의 다중화된 데이터는 도7B에 나타낸다. 이 기술 방식은, 복수의 시차 화상이 1매의 화상에 합성되어 있는 3차원 화상 데이터를 기록 또는 전송하는 경우에 사용할 수 있다.
다시 도4A를 참조하면, 도4A에서의 "서브샘플링의 방향"이란, 데이터를 서브샘플링하는 방향을 나타내는 것이다.
예컨대, 상기한 "패럴랙스 배리어 방식(또는 렌티큘러 방식)"에 따라, 도42B에 도시된 바와 같이 좌측 눈의 화상과 우측 눈의 화상의 쌍이 수직 스트라이프의 형태로 배열되는 경우, 좌측 눈의 화상과 우측 눈의 화상의 각각은 통상의 2차원 화상과 비교하여 수평 방향의 해상도가 절반으로 되어 있다. 이 경우, "서브샘플링의 방향"으로는, 수평 방향으로 서브샘플링되어 있다는 정보를 기술한다. 이 기술 방식은 좌측 눈의 화상과 우측 눈의 화상이 서로 독립적인 2개의 스트림인지, 또는 도43C에서와 같은 혼합된 화상의 형태로 된 하나의 스트림으로서 제공되는 것인지에 관계되지 않는다.
도41에 도시된 화상은 수직 방향으로 서브샘플링되어 있는 화상을 나타내고 있다. 도41에 도시된 화상의 경우에는, "서브샘플링의 방향"으로서 수직 방향으로 서브샘플링되어 있다는 정보를 기술한다.
또한, 도43A 및 43B에 도시된 바와 같이, 서브샘플링되어 있지 않는 화상을 그대로 전송하고, 표시 직전에 서브샘플링하는 경우도 있다. 이 경우, 파일에 기록된 데이터는 서브샘플링되지 않는다. "서브샘플링 안됨"의 정보가 서브샘플링 방향에 대한 정보로서 기술된다.
이러한 서브샘플링의 방향과 같은 파라미터를 수치로 표현하는 것은 어렵다. 도4C에 나타낸 바와 같은 테이블을 설정하고, 그 테이블에 규정된 대응하는 인덱스에 의해 서브샘플링의 방향을 기술함이 바람직하다.
예컨대, 서브샘플링의 방향이 수평 방향인 경우는, 도4A에 나타낸 서브샘플링의 방향에 대해 열에 "1"이라고 나타낸다. 이 경우, 인덱스와 그의 의미 사이의 대응 을 나타내는 도4C의 테이블은 송신 측과 수신 측 사이에 규격 또는 구체화로서 공유되어야 한다. 이 표시 방식을 다른 파라미터에도 적용할 수 있다.
또한, 도4A에서의 "카메라 배치"란 복수의 카메라를 어떻게 배열하여 촬영했지를 나타내는 것이다. 배열 방식은 평행형(parallel), 집중형(convergent) 및 발산형(divergent)의 3개로 대별된다.
상기한 도5A∼5C는 평행형의 예이고, 각 카메라의 광축이 평행으로 배열된 것이다.
도8A∼8C는 "카메라 배치"의 다른 구성례를 나타낸 개념도이다.
도8A와 도8B는 집중형의 예이고, 모든 카메라의 광축이 어느 1점에 집중되도록 배치된 것이다.
도8C는 발산형의 예이고, 모든 카메라의 광축이 어느 1점으로부터 발산되도 록 배치된 것이다.
여기에서, 도8A는 2개의 시점의 시스템의 예이고, 도8B 및 8C는 6개의 시점의 시스템의 예를 나타내고 있다. 이 정보는 시점 보간이나 3차원 모델 구축 때에 활용된다.
다시 도4A를 참조하여, 도4A에서의 "시차량 시프트 한도"에 대해서 설명한다.
일반적으로, 도41, 42A 및 42B를 참조하여 설명했던 바와 같은 양안 시차를 이용하여 입체적 시각을 제공하는 표시에 있어서는, 시차량을 변화시킴에 의해 깊이의 감을 조정할 수 있다.
시차량을 변화시키려면, 구체적으로는, 예컨대 도42B에 나타낸 합성 화상에 대해 좌측 눈의 화상은 그대로로 두고, 우측 눈의 화상만 좌우 어느 쪽으로 시프트하면 된다. 이와 같이 화상을 좌측 또는 우측으로 시프트하여 시차량을 변화시키면, 표시 화면의 폭은 제한되어 있기 때문에 시프트량에 대응하는 합성 화면의 일부가 화면 외에 놓이게 되어, 그 부분은 표시 불가능해진다. 따라서, 극단적인 시프트 량이 허용된다면, 화상의 작성자가 진정으로 보여주기 원하는 것이 표시되지 않게 된다. 이러한 상황을 회피하도록, 시프트 분량에 제한을 부여하며, 이것을 "시차량 시프트 한도"라 하고, 예컨대 ±16픽셀과 같이 일정 범위내로 제한된다.
도4A에서의 "테두리 표시 유무"는, 3차원 화상 데이터의 주위로 테두리 화상을 표시하는지 아닌지 지정하는 것이다. 이 테두리 화상은 화면에 변화를 부여하고, 재미를 부가하거나, 또는 입체 시각을 용이하게 하도록 표시하는 것이다.
도9A 및 9B는 테두리 화상의 구성을 설명하기 위한 개념도이다.
도9A는 테두리 화상을 표시하지 않은 상태를 나타내고, 화면 전체가 통상의 3차원 화상 표시 영역(31)에 대응하고, 여기에서는 그의 폭을 W라 한다.
이에 대해, 도9B는 테두리 화상을 표시한 상태이다. 화면 전체의 크기는 도9A와 동일하지만, 화면의 외주를 따라 폭 △d의 테두리 화상(33)이 표시되고, 그 테두리 화상의 내측의 영역은 3차원 화상 표시 영역(32)으로 된다. 따라서, 테두리 화상을 표시하지 않는 경우와 비교하여, 테두리 화상을 표시한 경우에는 테두리의 사이즈만큼 3차원 화상 표시 영역이 좁아지고, 3차원 화상 표시 영역(32)의 폭을 W1이라고 하면, W=W1+2·△d의 관계가 성립된다. 테두리 화상(33)의 화면의 네 측면을 따른 각각의 폭은 서로 다르게 될 수 있다. 테두리 화상(33)은 그 자체가 입체적 시각을 제공하는 3차원화상이거나 또는 평면 시각을 제공하는 2차원 화상으로 될 수 있다.
이 때 표시되는 테두리 화상 데이터는 재생 장치에 사전에 제공되거나 또는 멀티미디어 정보 파일에 포함시켜 3차원 화상 데이터와 함께 전송될 수 있다.
도10A∼10C는, 상기한 바와 같이 그러한 테두리 화상을 표시하기 위해 "테두리 화상 데이터"를 제공하는 구성을 나타낸 블록도이다.
도10A는, 화상 데이터 재생 장치(200)에 "테두리 화상 데이터"를 사전에 제공하는 경우의 하나의 구성 예를 나타낸다. 도10A는, 도3에 나타낸 화상 데이터 재생 장치(200)에서의 3차원 표시 제어 정보 해석부(25)의 구성을 상세하게 나타내고 있다.
도10A를 참조하면, 3차원 표시 제어 정보 해석부(25)는, 테두리 화상 부가 제어부(27)와 테두리 화상 저장 메모리(28)를 구비한다. 테두리 화상 부가 제어부(27)는, 입력된 3차원 표시 제어 정보 중에 테두리 표시 유무에 관한 정보를 해석한다. 테두리 화상이 표시된 경우에는, 테두리 화상 저장 메모리(28)에 제공되어 있는 테두리 화상을 데이터 변환 유닛부(26)에 출력한다. 데이터 변환부(26)에서는 3차원 화상 데이터에 이 테두리 화상을 중첩하여 표시부(24)로 출력한다.
도10B는 테두리 화상 데이터를 재생 장치에 사전에 제공하는 경우의 다른 구성예를 나타내고 있다. 즉, 도10B는 도3에 나타낸 화상 데이터 재생 장치(200)의 3차원 표시 제어 정보 해석부(25)의 다른 구성을 상세하게 나타낸 것이다.
도10B를 참조하면, 3차원 표시 제어 정보 해석부(25)는 테두리 화상 부가 제어부(27), 테두리 화상 선택부(29) 및 복수의 테두리 화상 저장 메모리(28-1∼28-3)를 포함한다.
도10B에 도시된 예에서는, 테두리 화상 부가 제어부(27)에서 테두리가 표시되었는지를 결정할 때, 준비되어 있는 복수의 테두리 화상 중에 어떤 테두리 화상을 사용할 것인지를 테두리 화상 선택부(29)가 판정하여, 적절한 테두리 화상 저장 메모리로부터 테두리 화상 데이터를 불러내어 데이터 변환부에 출력한다. 사용될 테두리 화상에 대한 정보는 3차원 표시 제어 정보에 기술된다. 도10B에 도시된 경우는, 적절한 화상을 나타내도록 정보를 예컨대 패턴1 및 패턴2로서 지정할 수 있다. 테두리 화상으로서는 다른 텍스추어(texture)를 갖는 테두리 화상 또는 다른 팝업(pop-up)량을 갖는 입체적인 테두리 화상을 사용하는 것이 가능하다. 이 방식 으로, 3차원 화상 데이터에 대해 적절한 테두리 화상을 표시할 수 있다.
디폴트(default) 화상으로서 사용될 테두리 화상을 설정해 놓고, 테두리가 표시되지만 테두리 화상 데이터가 지정되어 있지 않은 경우 또는 디폴트 테두리 화상이 지정된 경우에는, 디폴트로 설정되어 있는 테두리 화상을 사용할 수 있다. 테두리 화상 데이터로서 지정된 테두리 화상 패턴을 재생 장치가 포함하지 않는 경우는, 디폴트 화상이 대신 사용될 수 있다.
하나의 테두리 화상 데이터 만이 준비된 도10A에 도시된 경우, 그 테두리 화상 데이터가 반드시 지정될 필요는 없지만, 테두리 화상 데이터를 나타내는 정보로 서, "디폴트"라고 나타낼 수 있다.
도10A 및 10B에 도시된 바와 같은 형태의 경우, 테두리 화상의 데이터는 화상 데이터 재생 장치(200)내에 저장되고, 3차원 표시 제어 정보에 기술되는 정보는 선택적인 정보, 즉 하나 이상의 준비된 테두리 화상 중에서 어떤 테두리 화상이 사용될 것인지를 나타내는 정보이다.
도10C는 테두리 화상 데이터가 멀티미디어 정보 파일에 포함되어 있고 3차원 화상 데이터와 함께 전송되는 경우에 있어서, 화상 데이터 재생 장치(200)의 3차원 표시 제어 정보 해석부(25)의 구성 예를 나타낸다.
도10C를 참조하면, 3차원 표시 제어 정보 해석부(25)는 테두리 화상 부가 제어부(27)를 포함한다. 테두리 화상 부가 제어부(27)에서, 테두리 표시되었다고 판정한 경우, 3차원 표시 제어 정보로서 포함되어 있는 테두리 화상의 데이터를 데이터 변환부(26)에 전송한다. 구체적으로, 이 예에서는 테두리 화상 데이터를 나타내 는 정보로서 선택 정보 대신에, 테두리 화상 데이터 그 자체를 기술하고 있다. 이 방식으로, 멀티미디어 정보 파일의 발송인에 의해 자유롭게 생성된 테두리 화상을 부가할 수 있다.
(3차원 표시 제어 정보의 다른 구성)
이하에서는, 주로 상기한 도42A 및 42B에 나타낸 패럴랙스 배리어 방식 또는 렌티큘러 방식에서 사용되는 3차원 화상 데이터를 파일화 할 때에 사용되는 3차원 표시 제어 정보의 예에 대해서 설명한다.
도4A에서의 "시차 화상 스위칭 피치"는, 도42B에 도시된 바와 같이 다른 시차 화상의 스트라이프를 반복하여 배치할 때의 교환 주기를 나타내는 것이다.
도11A∼11D는 패럴랙스 배리어 방식에서 사용되는 액정 패널 및 패럴랙스 배리어의 슬릿 사이의 위치 관계를 나타내는 개념도이다.
도11A∼11D는 3차원 화상을 표시하는 액정 패널(106)을 나타내고 있다. 여기에서, (105)로 나타낸 R, G, B의 유닛 또는 조합을 픽셀이라 하고, R, G, B의 각 엘레멘트를 서브 픽셀이라 한다. 즉, 1픽셀은 3서브 픽셀과 동일하다.
도11A에서, 패럴랙스 배리어 방식에 있어서 시차 화상 스위칭 피치는 1픽셀에 대한 것을 나타내고 있다. 이 경우, 2픽셀당 하나의 슬릿(104)이 할당된다. 도11B는 도11A의 평면도이다. 도11B에 나타낸 바와 같이, 액정 패널(106)에 표시되는 화상은 우측 눈의 화상과 좌측 눈의 화상이 1픽셀 마다 번갈아 배치되어 있다. 이 경우의 패럴랙스 배리어(107)의 2개의 슬릿 사이의 간격은 2픽셀이 된다.
도11C에서, 패럴랙스 배리어 방식에서의 시차 화상 스위칭 피치는 1서브 픽 셀(1/3픽셀)이다. 이 경우, 2서브 픽셀당 하나의 슬릿(104)이 할당된다. 도11D는 도11C의 평면도이다. 도11D에 나타낸 바와 같이, 액정 패널(106)에 표시되는 화상은 우측 눈의 화상과 좌측 눈의 화상이 1서브 픽셀마다 번갈아 배치되어 있다. 이 경우의 패럴랙스 배리어(108)의 슬릿 간격은 2서브 픽셀이 된다.
도4A에서의 "샘플링 패턴"은 원화상에서 수평 방향으로 서브샘플링되어 좌측 눈의 화상 및 우측 눈의 화상을 생성할 때, 사용되는 서브샘플링의 방법에 관한 것이다.
이 샘플링 패턴은 "색 재현성 우선 방식"과 "해상도 우선 방식"이 있다.
도12A 및 12B는 샘플링 패턴을 설명하기 위한 개념도이다.
도12A는 "색 재현성 우선 방식"을 나타내고, 도12B는 "해상도 우선 방식"을 나타낸다.
도12A 및 12B에서, 화상 데이터를 RO 및 G1등의 형식으로 표현하고 있으며 예컨대 최초의 R, G, B는 색 성분을 나타내고, 그에 이은 0, 1 등의 숫자는 픽셀의 수평 위치를 나타내고 있다.
도12A의 색 재현성 우선 방식에 따르면, 데이터를 서브샘플링할 때에 픽셀 단위로 데이터를 감소시켜서 절반까지 샘플링한다. 모든 화소에서의 샘플링을 통해 서브샘플링된 후 남은 데이터는 짝수 위치의 데이터로만 구성된다. 이 방식에서, 남은 R, G, B의 세트는 서브샘플링되기 전의 것과 동일하기 때문에, 색 재현성이 양호하게 된다.
이와 대조적으로, 도12B의 해상도 우선 방식에 따르면, 데이터를 서브샘플링 할 때에 서브픽셀 단위로 데이터를 감소시켜서 절반까지 샘플링한다. 서브샘플링된 후, 픽셀 위치 0의 데이터는 R 및 B성분으로만 되어 있고 픽셀 위치 1의 데이터는 G성분으로만 되어 있다. 서브샘플링되기 전의 데이터와 비교하여, 서브샘플링된 후의 데이터는 R, G, B의 세트가 동일한 픽셀은 존재하지 않지만, 서브샘플링된 후의 데이터에서, 모든 픽셀 위치의 데이터는 적어도 하나의 색 성분에 포함되어 있다. 따라서, 실감할 수 있는 해상도가 높게 된다. 이로써, 예컨대, 경사선의 급격한 변화를 감지하기 어려워진다.
도12B의 해상도 우선 방식은 시차 화상 스위칭 피치가 서브 픽셀 단위로 되는 것을 전제로 하고 있기 때문에, 도11A에 나타낸 바와 같이 시차 화상 스위칭 피치가 1픽셀인 경우에는, 원칙적으로 도12A의 색 재현성 우선 방식밖에 선택할 수 없다.
3차원 표시 제어 정보로서 샘플링 패턴의 정보를 기록함에 의해, 멀티미디어 정보 파일에 기록된 3차원 화상 데이터의 샘플링 패턴이 화상 데이터 재생 장치의 표시 디바이스의 샘플링 패턴과 다른 경우, 틀린 표시를 회피하는 것이 가능하다. 이와 같이 샘플링 패턴이 상이한 경우, 예컨대 화상 데이터 재생 장치에서 자동으로 샘플링 패턴을 변환함에 의해 3차원 표시를 얻을 수 있다. 이와 다르게, 3차원 표시와 2차원 표시 사이에 절환이 가능한 경우에는, 2차원 표시로 절환하여 표시를 얻을 수도 있다. 또는, 해당 3차원 화상 데이터가 표시 디바이스의 샘플링 패턴과 다르거나 또는 3차원 화상 데이터를 재생할 수 없는 취지를 표시하는 것도 가능하다.
도4A에서의 "화상 배치"는 도43C에 나타낸 바와 같이 복수의 시차 화상을 배열하여 1매의 화상을 구성하고 그 화상을 전송 및 기록할 때에 필요한 정보이다.
도13A∼13E는 1매의 화상을 구성하기 위해 복수의 시차 화상을 배열하는 화상 배치를 설명하기 위한 개념도이다.
수평 방향으로 서브샘플링된 후의 좌측 눈의 화상과 우측 눈의 화상을 횡으로 나란하게 배치하여 1매의 화상을 구성하는 경우, 도13A에 나타낸 바와 같이 좌측 눈의 화상을 좌측으로, 우측 눈의 화상을 우측으로 배치하는 형태로 된다. 다른 형태로서, 도13B에 나타낸 바와 같이 좌측 눈의 좌측 화상을 우측으로, 우측 눈의 화상을 좌측으로 배치하는 것도 가능하다.
수직 방향으로 서브샘플링된 후 좌측 눈의 화상과 우측 눈의 화상을 수직 방향으로 배치하여 1매의 화상을 구성하는 경우, 도13C에 나타낸 바와 같이 좌측 눈의 화상을 상부에, 우측 눈의 화상을 하부에 배치하거나 또는 도13D에 나타낸 바와 같이 좌측 눈의 화상을 우측 눈의 화상의 하부에 배치하게 된다.
따라서, 복수의 시차 화상이 좌우로 나란하게 있는 것인지 또는 상하로 배열되어 있는 것인지, 및 좌측 눈의 화상이 좌우 또는 상하 중 어느 측에 있는 것인지에 대한 정보를 기술하는 것에 의해 배열 방식 및 위치 관계를 구별한다. 시점의 수(시차 화상의 수)는 2로 한정되지 않는다.
서브샘플링의 방향과 화상을 배치하는 방향은 서로 독립적으로 고려될 수 있다. 구체적으로, 수평 방향으로 서브샘플링된 후의 화상이 도13E에 나타낸 바와 같이 상하로 배열될 수 있다. 이와 대조적으로, 서브샘플링의 방향과 화상이 배치된 방향을 동일하게 하여 배열의 방식에 대한 정보 및 위치 정보 중 어느 하나의 정보를 생략하는 것이 가능하게 된다.
또한, 상기한 바와 같이 서브샘플링의 방향에 대한 정보는 좌측 눈의 화상과 우측 눈의 화상 각각에 대해 독립적으로 설정할 수 있다. 도14A에 나타낸 3차원 표시 제어 정보의 예에서는, 좌측 눈의 화상의 서브샘플링의 방향으로서 "서브샘플링 안됨"이라 하고, 우측 눈의 화상의 서브샘플링의 방향으로서 "수평 방향"이라 기술하고 있다. 이 경우, 횡으로 배열된 좌측 눈의 화상과 우측 눈의 화상은 도14B에 나타낸 바와 같이 좌측 눈의 화상과 우측 눈의 화상의 크기가 다른 것이다. 이 방식으로, 2차원 화상만을 표시할 수 있는 표시부를 가진 화상 데이터 재생 장치 및 2차원 화상 외에 3차원 화상도 표시 가능한 표시부를 가진 화상 데이터 재생 장치 모두 양호한 화상 재생을 할 수 있다. 구체적으로, 2차원 화상만을 표시할 수 있는 화상 데이터 재생 장치에서는, 도14B에 나타낸 화상 데이터를 수신한 경우, 서브샘플링되지 않고 따라서 높은 해상도를 제공하는 좌측 눈의 화상만을 표시할 수 있다. 3차원 화상을 표시할 수 있는 화상 데이터 재생 장치가 도14B에 나타낸 화상 데이터를 수신한 경우, 그 재생 장치는 좌측의 눈의 화상을 수평 방향으로 서브샘플링하여 우측 눈의 화상과 동일한 해상도로 한 후 3차원 표시용의 데이터 변환을 행함에 의해, 도13A에 나타낸 바와 같은 화상 데이터를 수신한 경우와 유사한 3차원 표시를 얻을 수 있다. 도4A에서의 "반전 유무"는 복수의 시차 화상을 배열하여 1매의 화상을 구성하는 경우, 각 시차 화상이 반전하는 것인지 아닌지를 나타내는 것이다.
도15A 및 15B는 이와 같은 각 시차 화상을 반전하는 방식을 설명하기 위한 개념도이다.
도15A에서는, 좌측 눈의 화상(61)을 좌측으로, 우측 눈의 화상(62)을 우측으로 단순하게 배열하고 있다. 우측 눈의 화상(62)을 좌우로 반전시키면, 도15B에 나타낸 바와 같은 배열로 된다. 이 화상을 부호화하여 기록 및 전송하는 경우, 서로 비교적 가깝게 위치한 유사한 특징을 갖는 영역을 포함하는 화상은 일부 경우에 더 높은 부호화 효율로 부호화된다. 일부 경우에, 도15A의 화상에서 보다 도15B의 화상에서 부호화 효율이 높아지게 된다. 도15B에서와 같은 배치가 사용되는 경우, 재생 장치(200)는 우측 눈의 화상을 재반전시켜 본래 상태로 설정하는 것이 필요하다.
2개의 시차 화상을 좌우로 배열한 경우에, 반전의 방식으로는 "반전 없음", "좌측 화상 반전", "우측 화상 반전" 및 "양 화상 반전"이 있다. 여기에서, "좌측 화상"이란 좌우로 나란하게 배치된 2개의 화상 중 좌측의 화상으로서 규정된다. 따라서, 도13A의 배열이 사용될 때, 좌측 화상은 좌측 눈의 화상이다. 또한, 도13B의 배열이 사용될 때, 좌측 화상은 우측 눈의 화상이 된다. 상기한 화상 배치의 정보가 이용됨에 의해 좌측 눈의 화상이 좌우 어느 쪽에 배치되어 있는지를 알 수 있기 때문에 "좌측 화상 반전" 대신에 "좌측 눈의 화상 반전"으로 나타낼 수 있다.
(촬영 조건 정보)
멀티미디어 정보 파일에는, 도16에 나타낸 바와 같이, 3차원 표시 제어 정보(2) 이외에 촬영 조건 정보(42)를 포함할 수 있다.
여기에서, 이와 같은 촬영 조건에 관한 데이터는, 예컨대 도2에 나타낸 화상데이터 기록 장치(100)의 구성에 있어서, 3차원 표시 제어 정보 생성부(11)에 파라미
터의 일부로서 제공된다. 이 때, 3차원 표시 제어 정보 생성부(11)는, 촬영 조건에 관한 데이터가 파라미터로 제공되는 경우, 상기한 3차원 표시 제어 정보(2)에 덧붙여 촬영 조건에 관한 데이터를 부호화하여 후술하는 촬영 조건 정보(42)를 생성하고, 파일 생성부(12)에 제공한다. 파일 생성부(12)는 파라미터로서 제공된 데이터에 포함되는 정보에 따라, 3차원 표시 제어 정보(2) 이외에, 촬영 조건 정보(42)와 3차원 화상 데이터(3) 양자 또는, 3차원 화상 데이터 또는 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성한다.
촬영 조건 정보(42)에 기술하는 구체적인 정보의 일례를 도17에 나타낸다. 도17에서의 시점의 수와 카메라 배치는 도4A에 나타낸 3차원 표시 제어 정보 중에도 기술되어 있다. 일부 정보는 3차원 표시 제어 정보와 촬영 조건 정보에서 중복된 방식으로 기술되거나, 또는 그들 중 어느 하나에 기술될 수 있다.
도17은 시점의 수가 2인 경우의 예를 나타내고 있다. 도5A에 나타낸 바와 같이 카메라를 2대 배치하고 2개의 시점의 화상을 촬영하는 경우에는, 각각의 카메라 고유의 정보(고유 파라미터)를 별도로 기재한다. 고유 파라미터의 예로는, 렌즈의 초점 거리, F 넘버, 노출 시간, 셔터 스피드, 다이어프램 스톱, 게인, 화이트 발란스, 포커싱, 줌량, 감마 값 등이 포함된다. 2대의 카메라의 특성이 동일하면, 양쪽의 카메라에 공통으로 사용되는 정보라고 알게 하도록 한 다음에, 고유 파라미터를 하나로 정리하는 것도 가능하다. 예컨대, 촬영 조건 정보 중에 고유 파라미터가 1세트만이 기술되어 있는 경우, 그 고유 파라미터는 모든 시점의 카메라에 대해 적용할 수 있다고 하는 룰을 미리 정할 수 있다.
또한, 촬영 조건 정보(42)에는 카메라간 상호의 위치 관계를 나타내는 외부 파라미터도 포함된다. 구체적으로는 예컨대 시점 위치 L의 카메라를 기준으로 한 경우에서의 시점 위치 R의 카메라의 위치를 3차원 좌표 형식으로 표현한 것이나 (도17에서는 mm단위로 기술), 컨버젼스 각도 등이 포함된다. 카메라의 광축을 평행하게 배치한 경우에는, 컨버젼스 각도를 0도로 설정한다.
이러한 촬영 조건 정보는 촬영한 3차원 화상 데이터를 다음에 편집 및 가공할 때에, 데이터의 소성을 알아내어 적절한 처리를 행하기 위해 사용된다. 또한, 촬영 조건 정보는 시점 보간 및 3차원 모델 구축 때에도 유효하게 이용할 수 있다.
한편, 2개의 시점으로부터의 화상을 얻기 위해, 도18에 나타낸 바와 같은 카메라 어댑터(71)를 카메라의 렌즈의 앞에 장착하여 촬영하는 것도 가능하다. 도18에서, 실선은 거울을 (어댑터의 내측만) 나타내고, 점선은 개구부를 나타낸다. 카메라 어댑터(71)의 내부는 거울로 되어 있고, 다른 시점에 입사되는 광선(도18에서는 파선으로 나타냄)을 카메라의 렌즈 직경 범위 내에서 얻는 작용을 행한다. 즉, 카메라 어댑터(71)를 장착함에 의해, 가상적으로 2대의 카메라를 사용하고 있는 것으로 간주할 수 있다. 촬영되는 화상은 좌측 절반이 시점 위치 L의 화상이고, 우측 절반이 시점 위치 R의 화상으로 된다.
이와 같은 카메라 어댑터를 사용하여 촬영하는 경우에 부가되는 촬영 조건 정보(42)의 예를 도19에 나타낸다. 카메라 어댑터 고유의 정보로서, 어댑터 제조사, 어댑터 형식, 어댑터 모델 등을 기술한다. 어댑터 형식으로서는 예컨대 거울형, 프리즘형 등의 종류를 기술한다. 또한, 하나의 시점 당의 화각(시야 범위)을 기술해도 된다. 카메라 어댑터를 사용하는 경우에도, 도17의 경우와 같이 외부 파라미터를 기술할 수 있다. 도19에서는 2개의 시점 위치 사이의 상호 관계를 베이스 길이와 컨버전스 각도로 표현하고 있다.
베이스 길이는 도20에서의 거리 B이고, 컨버전스 각도는 θ로 표현한다. 여기에서 도20에서의 점 C는 시점 위치 L의 카메라 광축과 시점 위치 R의 카메라의 광축의 교차점, 즉 컨버전스 점을 나타낸다. 도18의 카메라 어댑터(71)의 경우는 좌측 및 우측의 개구부의 중심 사이의 거리, 즉 도18에 도시된 거리 B가 베이스 길이에 상당한다.
또한, 도19의 예에서는 폽업 방향과 입체 강도를 나타내고 있다.
여기에서, "폽업 방향"이란 화상 중에 포함되는 피사체가 컨버전스 점 앞뒤중 어디에 위치하고 있는지를 나타내는 정보로서, "폽업 만", "인입 만", 및 "둘 다"의 3 종류로부터 선택한다. 즉, 모든 피사체가 컨버전스 점보다 앞에 존재하는 경우, "폽업 만"이 선택되고, 모든 피사체가 컨버전스 점보다 뒤에 존재하는 경우에는, "인입 만"이 선택되며, 피사체가 컨버전스 점의 앞과 뒤의 양쪽에 존재하는 경우에는, "둘 다"를 선택한다.
"폽업 방향'은 반드시 모든 피사체의 배치에 기초하여 결정되어야 하는 것은 아니고, 주요한 피사체의 배치에 기초하여 결정해도 된다. 즉, 주요한 피사체의 일 부가 컨버전스 점에서 돌출하는 경우에, "폽업"이 기술된다. 이와 대조적으로, 주요한 피사체가 컨버전스 점 뒤에 존재하는 경우에, "인입"이라고 기술된다. 여기에서, 2가지 타입의 정보, 즉 "폽업" 및 "인입"으로부터 선택된다.
"입체 강도"란 3차원 입체감의 대소를 나타내는 지표이다. 3차원 화상은 시차를 가지며, 관찰자는 시차에 의해 입체감을 감지한다. 3차원 화상의 각 화소의 시차는 다르지만, 예컨대 큰 시차를 가지는 화소가 많은 3차원 화상의 입체감은 크고, 반면에 큰 시차를 가지는 화소가 적은 3차원 화상의 입체감은 작다. 따라서, 입체 강도는 화소 마다의 시차의 평균치(정지 화상에서는 화면 전체의 평균치, 동화상의 경우는 동화상 전체의 평균치)에 의해 객관적으로 결정될 수 있고, 주관적 평가에 의해 결정해도 된다. 이와 다르게, 양자의 가중 평균에 의해 입체 강도를 결정해도 된다. 객관적 평가치로서는, 평균값 대신에 가중 평균치, 메디안, 최대치 등을 이용해도 된다. 동화상의 경우에, 각 프레임의 최대치를 구하고, 그 모든 프레임에 걸친 최대값들의 평균치, 메디안 ,최대치 등을 객관적 평가치로 이용할 수 있다. "팝업 방향" 및 "입체 강도"에 대한 정보는 3차원 화상 콘텐츠의 검색 시에 이용될 수 있다.
도17 및 도19에서는 시점의 수가 2인 경우의 예에 대해서 설명했지만, 시점의 수가 3 이상이라도 같은 개념을 사용하여 카메라간 상호의 위치 관계를 기술하는 것이 가능하다. 즉, 도17에서와 같은 기술 방법에서는, 어느 하나의 카메라를 기준으로 하고, 그것 이외의 카메라에 대해서는, 기준 카메라에 대한 상대 위치를 3차원 좌표를 사용하여 각 카메라에 대해 기술한다. 컨버전스 각도는 인접한 2개의 카메라마다에 대해서 각각 기술한다. 예컨대, 시점의 수가 N인 경우는, 컨버전스 각을 나타내는 정보를 (N-1)개 기술한다. 도19에서와 같은 기술 방법에서의 베이스 길이에 대해서도, 인접한 2개의 카메라마다에 대해서 기술하면 된다. 즉, 이 경우에도, 시점의 수가 N일 때, 베이스 길이를 나타내는 정보를 (N-I)개 기술한다.
도19에서는 시점의 수=2, 카메라 배치=집중형, 베이스 길이=50mm, 및 컨버전스 각=30도로 표현함에 의해 카메라의 배치에 대한 정보를 기술하는 예를 설명했지만, 이와 다른 방법에 의해 카메라의 배치에 관한 정보를 기술하는 것도 가능하다. 이점에 대해서 이하에 설명하지만, 이른바 입체적 시각을 얻으려는 시도를 행하는 경우는, 카메라 배치로서 집중형 또는 평행형을 사용하기 때문에, 이하에서는 이러한 카메라 배치를 전제로 한다.
2개의 시점의 시스템 또는 다시점의 시스템(시점의 수가 3이상인 경우)에 따른 촬영에서 복수의 카메라를 배치하는 경우, 카메라의 배치 형상에 주목하면, 도21에 나타낸 바와 같은 직선 형태의 배치와 도22에 나타낸 바와 같은 원주 형태의 배치로 대별된다.
도21의 예에서는 복수(4대)의 카메라가 1개의 직선 형태로 배치되어 있고, 각 카메라간의 거리는 전부 e로 동일하게 되어있다. 이와 같은 경우의 촬영 조건 정보의 예를 도23에 나타낸다. 카메라 배치 형상으로서는 "직선 형태" 또는 "원주 형태"라고 기술한다. 도23의 예에서는, 카메라 배치 형상을 "직선 형태"로 하고, 카메라간 거리를 70mm로 하고 있다. 각 카메라의 광축은 1점(컨버전스 점)에서 교차하도록 배치되고, 카메라가 배치되어 있는 직선으로부터 이 교차점까지의 거리 D 를 "컨버전스 점까지의 거리"라고 기술한다. 도23의 예에서는, 그 거리를 100cm로 설정하고 있다. 컨버전스 점까지의 거리 D가 유한치로 설정된 경우는, 카메라 배치가 집중형인 것에 상당하고, 카메라 배치가 평행형인 경우는 컨버전스 점까지의 거리 D를 무한대로 기술하는 것이 가능하다.
도22의 예에서는, 복수(4대)의 카메라가 동일의 원주 상에 배치되어 있고, 각 카메라간의 거리는 전부 e로 동일하게 되어 있다. 각 카메라의 광축이 원의 중심점에서 교차하는 경우, 이는 중심점과 컨버전스 점이 일치하는 것으로 된다. 원주 형태의 배치의 예에서는, 원의 반경 r을 컨버전스 점까지의 거리로서 기술한다. 또한, 각 카메라간의 거리가 동일한 경우는, 각 카메라간의 중심 각도 θ도 동일하다. 따라서, 카메라간의 거리 대신에 카메라 사이의 각도(컨버전스 각)를 기술해도 된다.
복수의 카메라를 배치하는 경우, 카메라는 직선이나 원주 형태의 배치 형상에 제한없이 배치되어, 카메라간의 간격도 동일하지 않게 될 수 있다. 그러나, 촬영된 화상을 실제로 이용하는 입장에서 생각하면, 직선 또는 원주 형태의 배치 형상을 이용하고, 등간격으로 배치하는 것이 합리적으로 된다. 이와 같은 경우, 카메라 배치 형상, 컨버전스 점까지의 거리, 및 카메라간 거리의 3개의 파라미터를 사용함에 의해 카메라의 배치를 효율적으로 기술할 수 있다.
지금까지의 예에서는 카메라를 수평 방향으로 배치한 예에 대해서 설명하였다. 그러나, 도24에 나타낸 바와 같이 수평 방향 및 수직 방향으로, 즉 격자 형태로 카메라를 배치할 수 있다. 이와 같이 배치함에 의해, 수평 시차 뿐만 아니라 수 직 시차도 기록될 수 있다. 이러한 카메라 배치는, 예컨대 인테그럴 포토그라피라 하는 3차원 기술에서 사용된다.
도24는, 예컨대, 수평 방향으로 카메라 4열, 및 수직 방향으로 카메라 3열, 합계 12대의 카메라를 배치한 예를 나타내고 있다. 12대의 카메라에 대해 좌측 상부에서 우측 하부로 래스터(raster) 순서로 번호를 붙이면, 도25에 나타낸 바와 같이 전체 12매의 화상이 얻어질 수 있다.
도13A∼13E에서는 2매의 화상을 횡으로 배열하거나 수직으로 배치하는 예를 나타내고 있다. 도24에서와 같이 카메라가 격자 형태로 배치되어 있는 경우에는, 도26에 나타낸 바와 같이 화상도 역시 격자 형태로 배치될 수 있다. 이 경우, 도4A에 나타낸 화상 배치 정보로서 "격자 형태 배치"라고 기술한다.
도24에 도시된 바와 같이 카메라를 격자 형태로 배치하는 경우, 단지 시점의 수만을 기술한 것에서는 수평 방향 및 수직 방향으로 각각 몇 행이 존재하는 것인지를 나타낼 수 없다. 따라서, 이 경우에는 도27에 나타낸 바와 같이, 촬영 조건 정보로서 수평 방향의 시점의 수와 수직 방향의 시점의 수를 별도로 기술하면 바람직하다. 여기에서, 수평 방향 시점의 수에 수직 방향 시점의 수를 곱하여 전체의 시점의 수가 얻어진다. 도27에서는 촬영 조건 정보의 예를 나타내었지만, 3차원 표시 제어 정보에 대해서도 마찬가지이다.
또한, 카메라 배치 형상에 대해서는 직선 또는 원주 형태에 대해 설명하였지만, 도24에 도시된 바와 같이 카메라를 수직 방향으로도 배치하는 경우, 이들은 각각 평면 배치 및 구면 형태의 배치로 확장된다. 이 경우도, 카메라간 거리와 컨버 전스 점까지의 거리는 직선 또는 원주 형태의 배치의 경우와 동일한 방식으로 정의할 수 있다.
이상 설명한 바와 같은 "3차원 화상 표시 제어 정보" 의 각 항목은 멀티미디어 정보 파일에 대해 모두가 필수적인 것은 아니고, 일부는 필요에 따라 제공되지 않을 수 있다. 그 경우는, 어떤 항목이 기재되어 있는지를 나타낼 필요만이 있다.
(3차원 식별 정보)
도4A에서의 오브젝트 ID는 그 위치에서 정보 오브젝트의 단위가 시작되는 것을 나타내는 동시에, 그 정보 오브젝트가 3차원 표시 제어 정보에 관한 것임을 나타낸다. 즉, 이와 같은 오브젝트 ID는 멀티미디어 정보 파일이 3차원 화상 제어 정보를 포함하는, 즉 3차원 화상 데이터를 포함하는 것을 나타내는 3차원 식별 정보로서도 작용한다.
한편, 도28에 나타낸 바와 같이, 3차원 화상 제어 정보 오브젝트에서의 오브젝트 ID로서 범용의 ID를 사용할 수도 있다. 이 경우, 그 ID는 단지 이 위치에서 정보 오브젝트의 단위가 시작되는 것만을 나타내고, 그 정보 오브젝트에 기입된 정보가 어떠한 종류인 것인가를 나타내는 정보는 그 오브젝트에 별도로 제공된다.
도28에서는 이 정보 오브젝트가 3차원 표시 제어 정보에 관한 것을 나타내는 정보로서 3차원 식별 정보 3D-001이 기입된다. 이 3D-001은 어디까지나 일례이고, 임의의 숫자나 문자열을 3차원 식별 정보로서 사용할 수 있다.
상기한 예에서, 3차원 식별 정보는 3차원 화상 데이터를 포함하는 것을 나타내도록 사용된다. 다른 3차원 표시 방식에 대해 다른 3차원 식별 정보를 제공하여 서로 구별할 수 있다. 예컨대, 패럴랙스 배리어 방식용의 데이터로서 3D-001이 주어지고, 액정 셔터 방식용의 데이터로서 3D-O02가 주어질 수 있다.
또한, 3차원 식별 정보는 도29에 나타낸 바와 같이, 그것만으로 하나의 정보 오브젝트를 구성해도 된다. 이 경우, 도30에 나타낸 바와 같이, 멀티미디어 정보 파일이 3차원 식별 정보(41) 및 3차원 표시 제어 정보(2)를 다른 오브젝트로서 유지할 수 있다.
도30에 도시된 예에서는, 헤더 제어 정보(1), 3차원 식별 정보(41), 3차원 표시 제어 정보(2), 3차원 화상 데이터(3)의 순서로 기록되어 있는 상태를 나타내고 있는데, 기록 순서는 상기 순서로 한정되는 것은 아니다. 예컨대, 3차원 식별 정보(41)가 파일 선두에 기록되면, 해당 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는지 아닌지를 빠르게 판정하는 것이 가능하다. 또한, 도30에서는 3차원 식별 정보(41) 및 3차원 표시 제어 정보(2)를 헤더 제어 정보(1)와 다른 오브젝트로서 제공하지만, 이러한 정보는 헤더 제어 정보(1)에 제공될 수 있다.
멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 것을 나타내도록, 3차원 식별 정보 대신에 전용 확장자를 이용할 수 있다. 예컨대, 통상의 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일에 대해 "jpg"라고 하는 확장자를 이용할 때, 3차원 화상 데이터를 포함하는 멀티미디어 정보 파일에 대해 "3da"라고 하는 확장자를 이용하도록 함에 의해, 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하고 있는지 아닌지를 확장자에 의해 식별할 수 있다. 또한, 다른 3차원 표시 방식에 대해 다른 확장자를 제공하여 서로 구별할 수 있다. 예컨대, 패럴랙스 배리어 방식용의 데이터를 포함하는 멀티미디어 정보 파일에 대해 "3da" 확장자가 이용되고, 액정셔터 방식용의 데이터를 포함하는 멀티미디어 정보 파일에 대해 "3db"를 확장자로서 이용한다.
확장자에 의해 3차원 식별을 행하는 장점은, 파일의 내부를 해석하지 않고, 그 파일이 3차원 화상 데이터를 포함하고 있는지 아닌지, 또는 어떠한 3차원 표시 방식의 데이터를 포함하고 있는지를 판정할 수 있다는 점이다. 예컨대, 하드 디스크 상에 복수의 멀티미디어 정보 파일이 존재할 때, 자신의 단말에서 재생 가능한 파일이 어느 것인지를 빠르게 발견할 수 있다. 이와 다르게, 서버에 복수의 멀티미디어 정보 파일이 존재할 때, 2차원 화상만을 재생할 수 있는 단말은 3차원 화상을 다운로드하지 않도록 할 수 있게 된다.
한편, 상기한 3차원 식별 정보에 기초하여 3차원 식별을 행하는 경우에는, 파일의 내용을 재기입할 때까지 3차원 식별 정보가 보존된다. 따라서, 중요한 정보를 나타내는 3차원 식별 정보가 용이하게 개변되기 어렵다고 하는 장점이 있다.
3차원 식별 정보의 기록 방법은, 파일 내부에 기록하거나 또는 확장자를 이용하는 것으로 한정되는 것은 아니다. 3차원 식별 정보는, 해당 멀티미디어 정보 파일에 포함되는 화상 데이터가, 3차원 화상 데이터인지 2차원 화상 데이터인지를 나타내는 중요한 정보이기 때문에, 파일 내부 기록 및 확장자 이용의 양자를 사용하는 것에 의해 정보의 신뢰성을 높이는 것도 가능하다.
도31은 3차원 화상 파일 다운 로드 처리를 나타낸 플로우챠트이다.
예컨대, 서버 상에 복수의 멀티미디어 정보 파일이 존재하고, 2차원 화상
데이터의 파일과 3차원 화상 데이터의 파일이 혼재하여 있는 경우, 도31에 나타낸 바와 같은 방법으로 다운 로드 하는지 아닌지를 판정한다.
도31의 스텝 S1에서는, 다운 로드하려는 파일의 파일명이 3차원 화상 파일을 나타내는 확장자인지 아닌지를 판정한다. 3차원 화상 파일을 나타내는 확장자인 경우(Yes)는 스텝 S2로 진행하고, 3차원 화상 파일을 나타내는 확장자가 아닌 경우(No)에는 다운 로드를 중지하고 처리를 종료한다.
스텝 S2에서는, 파일의 다운 로드를 개시하고, 스텝 S3에서는 파일 중의 소정의 위치에 3차원 식별 정보가 포함되는지 아닌지를 판정한다. 3차원 식별 정보가 포함되는 경우(Yes)는, 스텝 S4로 진행하여 화상 데이터의 다운 로드를 속행하고, 3차원 식별 정보가 포함되지 않는 경우(No)에는, 다운 로드를 중지하고 처리를 종료한다.
이와 같이 다운 로드 시에, 먼저 확장자에 기초하여 3차원 화상 파일인지 아닌지를 판정한다. 따라서, 다운 로드를 개시하는지 아닌지를 용이하게 결정하게 된다. 다음에, 확장자는 파일 명의 변경 처리를 통해 용이하게 변경되기 때문에, 신뢰성을 높이기 위해, 파일 내부의 3차원 식별 정보에 의해 화상 데이터의 다운 로드를 속행하는지 아닌지를 판정하고 있다. 이와 같은 방법은, 화상의 파일 사이즈가 크고 다운 로드에 시간이 걸리는 경우, 또는 통신 요금이 고가이므로 원하는 파일만을 다운 로드하고 싶은 경우 등에 효과적이다.
(화상 데이터 재생 장치의 다른 구성 1)
화상을 표시하는 표시부로서 2차원 표시와 3차원 표시 사이에서 절환이 가능 한 표시부를 사용할 수 있다. 즉, 도32에 나타낸 화상 데이터 재생 장치의 표시부(44)는, 2차원 표시 및 3차원 표시 사이에서의 표시 모드 절환 기능을 가진다. 상기 표시부는 자동으로 절환 가능한 표시 수단으로 될 수 있다.
도32에서, 도3의 화상 데이터 재생 장치와 공통 부분에 대해서는 설명을 생략 한다. 도32에 나타낸 화상 데이터 재생 장치는, 도28에 나타낸 바와 같이 3차원 식별 정보 및 3차원 표시 제어 정보가 동일한 오브젝트에 포함되는 경우에 채용된다. 여기에서, 3차원 표시 제어 정보 해석부(25)가 3차원 식별 정보의 유무를 해석하고, 그 유무에 따라 표시부(44)의 표시 모드를 절환한다. 즉, 3차원 표시 제어 정보 해석부(25)가 파일 종별 판정 작용도 갖고 있다. 입력된 멀티미디어 정보 파일에 3차원 식별 정보가 포함된 경우, 상기한 표시부(44)에서는 3차원 표시 모드로 표시하고, 3차원 식별 정보가 포함되지 않는 경우, 표시부(44)에서는 2차원 표시 모드로 표시한다.
표시부가 3차원 표시 전용인 경우는, 3차원 식별 정보의 유무의 해석, 또는 확장자의 해석에 의해 3차원 식별 정보를 갖지 않는 2차원 화상 파일 또는 3차원 화상 파일을 나타내는 확장자를 갖지 않은 2차원 화상 파일은 재생하지 않도록 하는 것이 가능하다. 이와 다르게, 2차원 화상을 3차원 표시용 화상으로 변환할 수 있다. 예컨대, 2차원 화상을 좌측 눈의 화상 및 우측 눈의 화상의 양자에 사용하여 표시할 수 있다. 표시 디바이스 및 표시될 화상의 해상도가 다른 경우에는, 해상도 변환을 행하도록 한 다음에 표시하거나, 또는 어떠한 2차원/3차원 변환을 행하도록 한 다음에 표시를 행하도록 하는 것이 가능하다. 이와 대조적으로, 표시부가 2차원 표시 전용인 경우는, 3차원 식별 정보를 가진 3차원 화상 파일 또는 3차원 화상 파일을 나타내는 확장자를 가진 3차원 화상 파일은 재생하지 않도록 하는 것이 가능하다. 이와 다르게, 3차원 화상을 2차원 표시용 화상으로 변환할 수 있다. 예컨대, 좌측 눈의 화상 또는 우측 눈의 화상의 어느 하나를 선택하여 2차원 화상으로서 표시하거나, 또는 좌측 눈의 화상 및 우측 눈의 화상의 양자의 화상을 합성하여 얻어진 2차원 화상을 표시할 수 있다. 표시 디바이스 및 표시될 화상의 해상도가 다른 경우에는, 해상도 변환을 행하도록 한 다음에 표시를 행하는 것도 가능하다.
(화상 데이터 재생 장치의 다른 구성 2)
도33에 나타내는 화상 데이터 재생 장치는, 도30에 나타낸 바와 같이 3차원 식별 정보와 3차원 표시 제어 정보가 다른 오브젝트로 되어 있는 경우에 대응하는 것이다. 도33의 화상 데이터 재생 장치는 3차원 식별 정보 해석부(45)에 의해 멀티미디어 정보 파일에 3차원 식별 정보가 포함되어 있는지 아닌지 해석하고, 3차원 식별 정보 유무에 따라 표시부(44)의 표시 모드가 절환된다. 즉, 3차원 식별 정보 해석부(45)가 파일 종별 판정 역할을 맡고 있다.
(화상 데이터 재생 장치의 다른 구성 3)
상기한 바와 같이 확장자에 의해 3차원 식별을 행하는 경우에는, 2차원 표시및 3차원 표시 사이에서의 절환은 확장자를 이용하여 행할 수 있다.
도34에서 화상 데이터 재생 장치는 확장자에 의해 3차원 식별을 행하는 경우를 나타내고 있다. 그 화상 데이터 재생 장치는 파일 종별 판정부(46)에 의해 확장자의 해석의 결과에 의해 표시부(44)의 표시 모드 및 데이터 변환부(26)의 변환 방 법을 제어한다.
상기한 바와 같이, 3차원 식별 정보는 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는지 아닌지를 판정하기 위해 사용된다. 화상 데이터의 부호화 형식은 2차원 화상 및 3차원 화상 모두에 공통으로 사용되며, 공통 복호기를 사용할 수 있다. 여기에서는, 인간이 복호된 화상을 보고서 2차원 화상으로서 출력되어야 하는지 3차원 화상으로서 출력되어야 하는지를 판단할 수 있지만, 재생 장치는 그 구별이 되지 않는다. 따라서, 재생 장치는 그것을 판정하기 위해 3차원 식별 정보가 필요하게 된다. 또한, 2차원 화상 및 3차원 화상 사이의 구별뿐만 아니라, 복수의 3차원 표시 형식 중에 어느 것이 사용되고 있는지를 판정하는 경우에도 3차원 식별 정보가 필요하다. 이 판정 결과에 따라 3차원 표시 모드 및 2차원 표시 모드 사이에서의 자동 절환이 가능하게 된다.
도1A에서는, 멀티미디어 정보 파일에 3차원 표시 제어 정보의 단편만이 포함된다. 한편, 3차원 화상 데이터는 동화상과 같이 복수의 화상으로 형성되는 경우, 각 화상 데이터의 선두에 하나씩 3차원 표시 제어 정보가 부가된다. 이와 다르게, 3차원 표시 제어 정보를 3차원 화상 데이터의 임의의 위치에 반복하여 저장하도록 해도 된다.
동화상을 위성, 지상파, 인터넷 등의 전송 매체를 통해 방송하는 경우, 시청자가 방송 도중부터 수신 또는 시청하거나, 채널의 전환을 행할 가능성이 있기 때문에, 3차원 표시 제어 정보를 선두에 하나만 배치하는 대신에, 도35에 나타낸 바와 같이 프로그램 배열 정보라 하는 형태로 정기적으로 방송 콘텐츠 중에 삽입하는 것이 바람직하다. 여기에서, 방송 콘텐츠란, 3차원 화상 데이터, 음성 데이터, 이러한 내용에 관련된 BML데이터 등이 다중화된 부호화 데이터이다. 프로그램 배열 정보는 화상 데이터, 음성 데이터, BML(Broadcast Markup Language) 데이터 등의 서로의 관련을 나타내는 정보(동기 정보), 또는 저작권 정보 등을 포함한다. 상기 프로그램 배열 정보는 3차원 표시 제어 정보도 포함한다. 3차원 표시 제어 정보는 프로그램 배열 정보에 포함되지 않고, 반복되는 방식으로 3차원 화상 데이터(부호화 데이터)에 직접 다중화해도 된다. 이 방식으로, 방송 콘텐츠 중에 3차원 표시 제어 정보 또는 3차원 식별 정보를 반복하여 삽입함에 의해, 프로그램 도중부터 재생을 개시하는 경우에도, 수신 데이터가 3차원 화상인지 아닌지를 알 수 있다. 수신 데이터가 3차원 화상인 경우에는, 3차원 표시에 필요한 파라미터 정보를 알 수 있게 된다.
(멀티미디어 정보의 매체로의 기록 방식)
도2에 나타낸 화상 데이터 기록 장치(100)에 있어서, 기록 매체(13)로서 디지털 비디오 테이프를 사용하는 것이 가능하다. 먼저, 본 실시예에 따른 디지털 비디오테이프의 트랙 포맷에 대해 설명한다.
일반적으로 보급되어 있는 디지털 VTR에서는 핼리컬 스캔이라 하는 방식이 채
용되어 있고, 이 방식에서는 테이프상의 불연속 트랙에 데이터가 기록된다. 도36에 나타낸 바와 같이, 테이프상에 복수의 트랙(72)이 제공되고 1매의 3차원 화상이 복수의 트랙(72)에 분할되어 기록된다. 테이프의 주행 방향은 도36의 우측에서 좌측 방향이다. 즉, 우측 끝의 트랙이 하부에서 상부로 주사되고, 계속해서 그의 좌측으로 인접한 트랙이 하부에서 상부로 주사되어 진다.
도37은 트랙(72) 중 하나의 확대도이고, 본 실시예에 따라 기록된 디지털 VTR의 트랙 포맷의 일례를 나타내고 있다. 트랙(72)은 확실한 더빙을 위한 ITI(Insert and Track Information)영역(73), 음성에 관한 데이터가 기록되는 음성 기록 영역(74), 화상에 관한 데이터가 기록되는 화상 기록 영역(75), 및 타임 코드 등의 부수 정보가 기록되는 서브 코드 기록 영역(76)으로 이루어진다. 화상 기록 영역(75)에는, 3차원 화상 그 자체뿐만 아니라, 3차원 화상과 관계가 있는 부수 정보도 기록 가능하다. 유사하게, 음성 기록 영역(74)에는, 음성 그 자체뿐만 아니라, 음성에 관련된 부수 정보도 기록 가능하다. 이들 2개의 영역과 별도로, 상기한 서브 코드 기록 영역-(76)에서도 부수 정보가 기록 가능하다. 각 영역의 사이에는 마진이 있어서, 개별적인 더빙을 허용한다.
도38은 화상 기록 영역(75)의 확대도이다. 화상 기록 영역(75)은, 동기 패턴 등이 기록된 프리앰블(77), 화상에 관한 부수 정보가 기록되는 VAUX(Video AUXiliary data)α(78) 및 VAUXβ(80), 화상 부호화 데이터가 기록되는 화상 부호화 데이터 기록 영역(79), 에러 정정 부호(81), 및 마진을 확보하기 위한 기능을 가진 포스트앰블(82)로 구성되어 있다. 본 실시예에서는 화상에 관한 부수 정보가 기록되는 영역이 VAUXα(78) 및 VAUXβ(80)의 2개로 분할되어 있는데, 이하에서는 그 2개의 영역을 정리하여 VAUX 영역이라 한다.
도시되지 않았지만, 음성 기록 영역(74)에도, 음성에 관한 부수 정보를 기록 하는 영역으로서 AAUX(Audio AUXiliary data) 영역이 준비되어 있다.
본 실시예에 있어서는, 3차원 표시 제어 정보, 3차원 식별 정보 및 촬영 조건정보가, VAUX 영역, AAUX영역, 또는 서브 코드 영역 중 어느 영역에 기록된다. 예컨대, 3차원 표시 제어 정보를 VAUX 영역에 기록하고, 촬영 조건 정보를 서브 코드 영역에 기록하는 것이 가능하다. 또한, 3차원 표시 제어 정보를 VAUX 영역과 서브 코드 영역으로 분할하여 기록하는 것도 가능하다. 각각의 영역은 개별적인 더빙을 통해 덮어쓰기 할 수 있기 때문에, 편집 시에 변경할 가능성이 있는 정보는 더빙이 용이한 서브 코드 영역에 기록해 놓으면 된다.
이와 다르게, 모든 정보를 모아서 VAUX 영역에 기록하는 방법도 있다. 이 경우, 더빙의 용이성은 없어지지만, 화상에 관한 부수 정보가 1장소에 정리되어 있기 때문에 취급 방법이 간단하게 된다는 장점이 있다. 예컨대, 다른 기록 포맷에 적용된 매체에 복제를 하는 경우, 화상 기록 영역의 복제만을 제공하여 화상에 관한 모든 정보를 취득할 수 있게되어, 서브 코드 영역을 취급할 필요가 없어진다. 또한, 더빙을 통한 덮어쓰기에 의해 그러한 정보가 소실되는 것을 피하도록, 서브 코드 영역과 VAUX 영역의 양자에 동일한 정보를 기록하는 방법도 가능하다.
서브 코드 영역과 VAUX 영역의 저장 영역에는 그들의 사이즈로 인한 제한이 있다. 따라서, 이러한 영역에 저장할 수 없는 경우에는, 3차원 화상에 관련되는 정보를 AAUX 영역에 기록하는 것도 가능하다.
본 실시예에 따른 구성은, 3차원 화상에 특유한 부분을 제외하면, 가정용으로 널리 사용되는 디지털 VTR 포맷의 방식에도 준거하고 있다. 따라서, 본 실시예 에 따라 기록된 부수 정보 중에, 3차원 화상에 특유한 부수 정보, 예컨대 좌우 화상의 합성 방법에 관한 정보, 입체 강도에 관한 정보, 문턱치 정보 등을 가정용 디지털 VTR의 포맷에 확장이 허용되는 확장 영역에 기록하여, 2차원 화상과 3차원 화상을 동일 테이프에 기록하는 것이 가능하다.
본 발명의 화상 데이터 기록 방법의 설명에서는 도2를 참조하여, 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 기록 매체(13)에 기록하고 있다. 그러나, 일반적으로 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 화상 처리 장치 또는 단말에 제공된 기억 디바이스의 기록 영역, 또는 카셋트 테이프에 장착된 IC 메모리의 기록 영역에 기록할 수 있다. 이 경우, 지금까지의 설명과 마찬가지로, 해당 기록 영역이 화상 기록 영역, 음성 기록 영역, 서브 코드 영역 등을 포함하여, 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 그러한 영역에 기록하는 것도 가능하다.
[멀티미디어 정보 파일의 생성 방법]
이하에서는, 도2에서 설명한 화상 데이터 기록 장치(100)의 동작에 의해 이상 설명했던 바와 같은 멀티미디어 정보 파일을 생성하는 순서에 대해서 설명한다.
도2에서, 파일 생성부(12)는 3차원 표시 제어 정보와 3차원 화상 데이터를 수신하는 것으로 했지만, 이하의 설명에서는, 보다 일반적으로, 파일 생성부(12)가 3차원 표시 제어 정보와 3차원 화상 데이터 이외에, 2차원 화상 데이터도 수신하는 것으로 한다.
(멀티미디어 정보 파일의 생성 순서 1)
도39는 도2에 나타낸 화상 데이터 기록 장치(100)의 처리 플로우를 설명하는 플로우챠트이다.
도39 및 도2를 참조하면, 화상 데이터 기록 장치(100)는, 외부에서 멀티미디어 정보 생성에 필요한 파라미터, 3차원 화상 데이터, 및 2차원 화상 데이터를 수신한다(스텝 S1O2). 3차원 표시 제어 정보 생성부(11)는, 외부에서 수신된 화상 데이터에 3차원 화상 데이터가 포함되는 경우(스텝 S102), 3차원 제어 정보를 생성한다(스텝 S1O6). 파일 생성부(12)는, 3차원 표시 제어 정보와 3차원 화상 데이터 및 2차원 화상 데이터를 수신하여, 멀티미디어 정보 파일을 생성하여 출력한다(스텝 S1O8). 상기에서는 입력으로서, 3차원 화상 데이터 및 2차원 화상 데이터의 2개의 경우를 설명하였지만, 적어도 하나의 입력만 있으면 된다. 이와 다르게, 2개 이상의 입력이 제공될 수 있다.
(멀티미디어 정보 파일의 생성 순서 2)
이하에서는, 3차원 표시 제어 정보 이외에 촬영 조건 정보를 멀티미디어 정보 파일에 부가하기 위한 순서에 대해서 설명한다.
도16에서 설명한 바와 같이, 멀티미디어 정보 파일은 3차원 표시 제어 정보(2) 이외에 촬영 조건 정보(42)를 더 포함한다.
이와 같은 촬영 조건에 관한 데이터는, 예컨대, 도2에 나타낸 화상 데이터 기록 장치(100)의 구성에서, 3차원 표시 제어 정보 생성부(11)에 파라미터의 일부로서 제공된다. 이하에서도, 파일 생성부(12)는 3차원 표시 제어 정보와 3차원 화상 데이터 이외에 2차원 화상 데이터도 수신할 수 있다고 한다.
도40은 이와 같은 촬영 조건 정보를 부가한 멀티미디어 정보 파일의 생성 순서를 설명하기 위한 플로우챠트이다.
도40 및 도2를 참조하면, 화상 데이터 기록 장치(100)는, 외부에서 멀티미디어 정보 생성에 필요한 파라미터, 3차원 화상 데이터, 및 2차원 화상 데이터를 수신한다(스텝 S202). 3차원 표시 제어 정보 생성부(11)는, 외부에서 수신된 화상 데이터에 3차원 화상 데이터가 포함되는 경우(스텝 S204), 3차원 제어 정보를 생성한다(스텝 S2O6). 한편, 3차원 표시 제어 정보 생성부(11)는, 외부에서 수신된 화상 데이터에 3차원 화상 데이터가 포함되지 않은 경우는, 처리를 스텝 S212로 이행한다.
3차원 표시 제어 정보 생성부(11)는, 화상 데이터에 3차원 화상 데이터가 포함되고, 촬영 조건에 관한 데이터가 파라미터로서 주어진 경우(스텝 S208), 상기한 바와 같이 3차원 표시 제어 정보(2)에 덧붙여 촬영 조건에 관련된 데이터를 부호화하고, 상기한 바와 같은 촬영 조건 정보(42)를 생성하여, 파일 생성부(12)에 제공한다(스텝 S210).
파일 생성부(12)는, 파라미터로서 제공된 데이터에 포함되는 정보에 따라, 3차원 표시 제어 정보(2) 이외에, 촬영 조건 정보(42)와 3차원 화상 데이터(3) 양자 또는 3차원 화상 데이터 또는 2차원 화상 데이터 중 적어도 하나를 포함하는 멀티미디어 정보 파일을 생성한다(스텝 S212).
상기한 멀티미디어 정보 파일을 구성함에 의해, 2차원 화상 데이터와 3차원 화상 데이터가 혼재하는 멀티미디어 정보를 효율적으로 축적, 전송, 및 관리하는 것이 가능하게 된다.
이상 설명한 바와 같이, 본 발명의 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 영상 데이터 기록 매체에 따르면, 3차원 화상 데이터와 함께, 3차원 화상 데이터를 촬영하는 조건을 나타내는 촬영 조건 정보를 멀티미디어 정보 파일로서 기록 또는 구성하기 때문에, 3차원 화상 데이터가 범용성을 갖게 되고, 1종류의 멀티미디어 정보 파일이 여러 가지의 편집 방식 및 검색 방법에 유연하게 대응하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 카메라의 배치에 관한 정보를 효율적으로 기술하는 것이 가능하다. 또한, 카메라를 격자 형태로 배치하는 경우도, 적절하게 표현할 수 있게 된다.
이와 다르게, 본 발명의 화상 데이터 생성 장치, 화상 데이터 기록 방식, 및화상 데이터 기록 매체에 따르면, 3차원 화상 데이터와 함께, 3차원 화상 데이터를 표시하기 위한 3차원 화상 표시 제어 정보를 멀티미디어 정보 파일로서 기록 또는 구성하기 때문에, 3차원 화상 데이터가 범용성을 갖게 되고, 1종류의 멀티미디어 정보 파일이 여러 가지의 3차원 표시 방식에 유연하게 대응하는 것이 가능하게 된다.
이와 다르게, 본 발명의 화상 데이터 재생 장치에 따르면, 멀티미디어 정보 파일에 포함되는 3차원 화상 표시 제어 정보를 해석함에 의해, 3차원 화상 데이터를 표시 방법에 적절하게 변환하여, 바르게 표시하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보에 3차원 화상 데이터의 시점의 수를 나타내는 정보를 포함시킨다. 따라서, 여러 가지의 시점의 수를 가진 3차원 화상 데이터를 범용성이 있는 멀티미디어 정보 파일로서 기록, 재생 또는 구성하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 데이터가 어느 시점의 위치의 데이터인지를 나타내는 정보를 3차원 화상 표시 제어 정보가 포함한다. 따라서, 3차원화상 데이터가 복수의 스트림으로서 기록되거나 또는 하나의 스트림으로서 기록되어 있어도, 적절하게 데이터를 변환하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 서브샘플링의 방향을 나타내는 정보를 포함한다. 따라서, 표시할 때의 데이터 복원이 바르게 실행될 수 있다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 정보를 포함한다. 따라서, 적절한 시점 보간이나 3차원 모델 구축이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 시차 화상의 시프트 시에 최대 시프트 량을 나타내는 정보를 포함하고 있다. 따라서, 화상의 작성자가 진정으로 보여주기 원하는 것이 표시되지 않는 사태의 발생을 방지하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 정보를 포함한다. 따라서, 멀티미디어 정보 파일의 생성자가 테두리 화상을 표시하는지 아닌지 사이 에서 선택하는 것이 가능하게 된다.
이와 다르게, 본 발명에 따르면, 3차원 화상 표시 제어 정보가 3차원 화상 데이터의 화상 주변에 표시되는 테두리 화상 데이터를 나타내는 정보를 포함한다. 따라서, 3차원 화상 데이터에 따라 적절한 테두리 화상을 표시하는 것이 가능하게 된다.
이와 다르게, 본 발명의 화상 데이터 생성 장치 또는 화상 데이터 기록 매체에 따르면, 이하에 열거하는 효과 중 하나 또는 그들을 2개 이상 조합하여 얻어지는 효과를 제공할 수 있다.
즉, 1) 본 발명에 따르면, 3차원 화상 데이터와 함께, 3차원 화상 데이터를 촬영하는 조건을 나타내는 촬영 조건 정보를 멀티미디어 정보 파일로서 기록 또는 구성할 수 있다. 따라서, 3차원 화상 데이터가 범용성을 갖게 되고, 1종류의 멀티미디어 정보 파일이 여러 가지의 편집 방식 및 검색 방법에 유연하게 대응하는 것이 가능하게 된다. 또한, 시점 보간 또는 3차원 모델 구축을 적절하게 행하는 것이 가능하게 된다.
2) 본 발명에 따르면, 카메라 어댑터를 사용하여 복수의 시점의 화상을 얻는 경우에도, 카메라를 복수 사용하는 경우와 마찬가지로 촬영 조건을 기술하는 것이 가능하다.
3) 본 발명에 따르면, 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 더빙이 용이한 서브 코드 영역에 기록함에 의해, 편집 시의 편의성을 높이는 것이 가능하게 된다.
4) 본 발명에 따르면, 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 정리하여 화상 기록 영역에 기록함으로써, 취급 방법을 용이하게 하는 것이 가능하다.
5) 본 발명에 따르면, 3차원 화상 표시 제어 정보 또는 촬영 조건 정보를 서브 코드 영역 및 화상 기록 영역 양쪽에 기록한다. 따라서, 더빙 중의 덮어쓰기에 의한 데이터 소실을 방지하는 것이 가능하게 된다.
본 발명을 상세하게 설명하여 나타내었지만, 이것은 예시를 위한 것뿐이고, 그 내용으로 제한되는 것이 아니며, 본 발명의 정신과 범위는 첨부된 특허 청구의 범위에 의해서만 한정되는 것임을 명백히 이해할 수 있을 것이다.

Claims (36)

  1. 3차원 화상 데이터를 표시하기 위한 파라미터를 수신하는 수신 수단;
    상기 파라미터를 부호화하여 3차원 화상 표시 제어 정보를 생성하는 3차원 화상 표시 제어 정보 생성 수단; 및
    상기 3차원 화상 표시 제어 정보와 상기 3차원 화상 데이터의 양자, 또는 적어도 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일을 생성하는 파일 생성 수단을 포함하고,
    상기 3차원 화상 표시 제어 정보는, 상기 3차원 화상 데이터의 시점의 수를 나타내는 제1 정보, 상기 3차원 화상 데이터가 어떤 시점의 위치에서 얻어진 데이터인지를 나타내는 제2 정보, 상기 3차원 화상 데이터의 서브샘플링 방향을 나타내는 제3 정보, 상기 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 제4 정보, 상기 3차원 화상 데이터의 시차 화상이 시프트될 때의 최대 시프트 량을 나타내는 제5 정보, 상기 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 제6 정보, 상기 3차원 화상 데이터의 화상 주변에 표시하는 테두리 화상 데이터를 나타내는 제7 정보, 및 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 것을 나타내는 3차원 식별 정보 중 적어도 하나를 포함하는, 화상 데이터 생성 장치.
  2. 제1항에 있어서, 상기 멀티미디어 정보 파일을 기록하는 기록 수단을 더 포함하는, 화상 데이터 생성 장치.
  3. 제1항에 있어서, 상기 파일 생성 수단은 멀티미디어 정보 파일을 외부의 통신 경로에 출력하는, 화상 데이터 생성 장치.
  4. 삭제
  5. 삭제
  6. 제1항에 있어서, 상기 파일 생성 수단은, 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 경우 및 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하지 않는 경우에, 다른 확장자를 상기 멀티미디어 정보 파일에 제공하는, 화상 데이터 생성 장치.
  7. 제6항에 있어서, 상기 확장자는, 복수의 다른 3차원 표시 방법에 대응하고, 상기 복수의 3차원 표시 방법의 각각에 대해 다르게 되는, 화상 데이터 생성 장치.
  8. 삭제
  9. 삭제
  10. 제1항에 있어서, 상기 파일 생성 수단은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하는 멀티미디어 정보 파일을 생성하고,
    상기 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 또는 수직 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 생성 장치.
  11. 제1항에 있어서, 상기 파일 생성 수단은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하는 멀티미디어 정보 파일을 생성하고,
    상기 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 생성 장치.
  12. 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성되는 3차원 화상 표시 제어 정보 및 3차원 화상 데이터의 양자, 또는 적어도 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일을 수신하는 수신 수단;
    상기 멀티미디어 정보 파일의 구조를 해석하여 3차원 화상 표시 제어 정보와 상기 3차원 화상 데이터 또는 2차원 화상 데이터를 추출하는 파일 구조 해석 수단;
    상기 3차원 화상 표시 제어 정보를 해석하는 3차원 화상 표시 제어 정보 해석 수단;
    상기 3차원 화상 데이터를 재생하는 데이터 재생 수단; 및
    재생된 3차원 화상 데이터를 변환하는 데이터 변환 수단을 포함하며,
    상기 데이터 변환 수단은, 상기 3차원 화상 표시 제어 정보 해석 수단에 의한 해석 결과에 기초하여, 상기 재생된 3차원 화상 데이터를 표시용 데이터로 변환하고,
    상기 3차원 화상 표시 제어 정보는, 상기 3차원 화상 데이터의 시점의 수를 나타내는 제1 정보, 상기 3차원 화상 데이터가 어떤 시점의 위치에서 얻어진 데이터인지를 나타내는 제2 정보, 상기 3차원 화상 데이터의 서브샘플링 방향을 나타내는 제3 정보, 상기 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 제4 정보, 상기 3차원 화상 데이터의 시차 화상이 시프트될 때의 최대 시프트 량을 나타내는 제5 정보, 상기 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 제6 정보, 상기 3차원 화상 데이터의 화상 주변에 표시하는 테두리 화상 데이터를 나타내는 제7 정보, 및 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 것을 나타내는 3차원 식별 정보 중 적어도 하나를 포함하는, 화상 데이터 생성 장치.
  13. 삭제
  14. 제12항에 있어서, 상기 멀티미디어 정보 파일의 구조를 해석하여 3차원 화상 표시 제어 정보가 포함되어 있는지 아닌지를 판정하는 파일 종별 판정 수단을 더 포함하고,
    상기 파일 종별 판정 수단에 의해 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하고 있는지 아닌지를 판정하는, 화상 데이터 재생 장치.
  15. 제12항에 있어서, 상기 멀티미디어 정보 파일의 구조를 해석하여 3차원 식별 정보가 포함되어 있는지 아닌지를 판정하는 파일 종별 판정 수단을 더 포함하고,
    상기 파일 종별 판정 수단에 의해 멀티미디어 정보 파일이 3차원 화상데이터를 포함하고 있는지 아닌지 또는 3차원 표시 방식에 기초한 데이터인지를 판정하는, 화상 데이터 재생 장치.
  16. 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 얻어진 3차원 화상 표시 제어 정보와 3차원 화상 데이터 또는 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일을 수신하는 수신 수단; 및
    상기 멀티미디어 정보 파일의 확장자를 해석하는 파일 종별 판정 수단을 포함하고,
    상기 파일 종별 판정 수단은, 상기 멀티미디어 정보 파일이 상기 3차원 화상 데이터를 포함하고 있는지 아닌지 또는 3차원 표시 방식에 기초한 데이터인지를 확장자에 의해 판정하고,
    상기 3차원 화상 표시 제어 정보는,
    상기 3차원 화상 데이터의 시점의 수를 나타내는 제1 정보, 상기 3차원 화상 데이터가 어떤 시점의 위치에서 얻어진 데이터인지를 나타내는 제2 정보, 상기 3차원 화상 데이터의 서브샘플링 방향을 나타내는 제3 정보, 상기 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 제4 정보, 상기 3차원 화상 데이터의 시차 화상이 시프트될 때의 최대 시프트 량을 나타내는 제5 정보, 상기 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 제6 정보, 상기 3차원 화상 데이터의 화상 주변에 표시하는 테두리 화상 데이터를 나타내는 제7 정보, 및 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 것을 나타내는 3차원 식별 정보 중 적어도 하나를 포함하는, 화상 데이터 재생 장치.
  17. 삭제
  18. 제16항에 있어서, 상기 멀티미디어 정보 파일은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하고,
    상기 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 또는 수직 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 재생 장치.
  19. 제16항에 있어서, 상기 멀티미디어 정보 파일은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하고,
    상기 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 재생 장치.
  20. 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성된 3차원 화상 표시 제어 정보와 3차원 화상 데이터의 양자, 또는 적어도 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일이 기록되고,
    상기 3차원 화상 표시 제어 정보는, 상기 3차원 화상 데이터의 시점의 수를 나타내는 제1 정보, 상기 3차원 화상 데이터가 어떤 시점의 위치에서 얻어진 데이터인지를 나타내는 제2 정보, 상기 3차원 화상 데이터의 서브샘플링 방향을 나타내는 제3 정보, 상기 3차원 화상 데이터를 촬영한 카메라의 배치를 나타내는 제4 정보, 상기 3차원 화상 데이터의 시차 화상이 시프트될 때의 최대 시프트 량을 나타내는 제5 정보, 상기 3차원 화상 데이터의 화상 주변에 테두리를 표시하는지 아닌지를 나타내는 제6 정보, 상기 3차원 화상 데이터의 화상 주변에 표시하는 테두리 화상 데이터를 나타내는 제7 정보, 및 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 것을 나타내는 3차원 식별 정보 중 적어도 하나를 포함하는, 화상 데이터 기록 매체.
  21. 삭제
  22. 삭제
  23. 제20항에 있어서, 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하는 경우와 상기 멀티미디어 정보 파일이 3차원 화상 데이터를 포함하지 않는 경우에, 다른 확장자를 상기 멀티미디어 정보 파일에 제공하는, 화상 데이터 기록 매체.
  24. 제23항에 있어서, 상기 확장자는 복수의 다른 3차원 표시 방법에 대응하고, 상기 복수의 3차원 표시 방법의 각각에 대해 다르게 되는, 화상 데이터 기록 매체.
  25. 제20항에 있어서, 상기 멀티미디어 정보 파일은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하고,
    상기 촬영 조건 정보는 수평 방향으로의 시차의 수를 나타내는 정보 또는 수직 방향의 시차의 수를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 기록 매체.
  26. 제20항에 있어서, 상기 멀티미디어 정보 파일은, 3차원 화상의 촬영 조건을 나타내는 촬영 조건 정보를 더 포함하고,
    상기 촬영 조건 정보는 카메라의 배치 형상을 나타내는 정보, 인접한 카메라간의 거리를 나타내는 정보, 및 카메라 배치면으로부터 컨버전스 점까지의 거리를 나타내는 정보 중 적어도 하나를 포함하는, 화상 데이터 기록 매체.
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 3차원 화상 데이터를 표시하기 위한 파라미터를 부호화하여 생성된 3차원 화상 표시 제어 정보 및 3차원 화상 데이터의 양자, 또는 적어도 2차원 화상 데이터를 포함하는 멀티미디어 정보 파일을 기록 영역에 기록하는 화상 데이터 기록 매체에 있어서, 상기 기록 영역은 3차원 화상 데이터 또는 2차원 화상 데이터를 기록하기 위한 화상 기록 영역, 음성 데이터를 기록하기 위한 음성 기록 영역, 및 부수 정보를 기록하기 위한 서브 코드 영역을 포함하고,
    상기 3차원 화상 표시 제어 정보의 적어도 일부를 화상 기록 영역에 기록하는, 화상 데이터 기록 매체.
  34. 삭제
  35. 제33항에 있어서, 상기 3차원 화상 표시 제어 정보의 적어도 일부를 음성 기록 영역에 기록하는, 화상 데이터 기록 매체.
  36. 제33항에 있어서, 상기 3차원 화상 표시 제어 정보의 적어도 일부를 서브 코드 영역에 기록하는, 화상 데이터 기록 매체.
KR1020047017108A 2002-04-25 2003-04-24 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체 KR100977193B1 (ko)

Applications Claiming Priority (11)

Application Number Priority Date Filing Date Title
JP2002124671 2002-04-25
JPJP-P-2002-00124671 2002-04-25
JP2002286098 2002-09-30
JPJP-P-2002-00286098 2002-09-30
JPJP-P-2002-00318253 2002-10-31
JP2002318253 2002-10-31
JPJP-P-2002-00332713 2002-11-15
JP2002332713 2002-11-15
JP2002355508 2002-12-06
JPJP-P-2002-00355508 2002-12-06
PCT/JP2003/005315 WO2003092304A1 (en) 2002-04-25 2003-04-24 Image data creation device, image data reproduction device, and image data recording medium

Publications (2)

Publication Number Publication Date
KR20050003390A KR20050003390A (ko) 2005-01-10
KR100977193B1 true KR100977193B1 (ko) 2010-08-20

Family

ID=29273848

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020047017108A KR100977193B1 (ko) 2002-04-25 2003-04-24 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체

Country Status (6)

Country Link
US (1) US7679616B2 (ko)
EP (3) EP2262273A3 (ko)
JP (3) JPWO2003092304A1 (ko)
KR (1) KR100977193B1 (ko)
AU (1) AU2003231510A1 (ko)
WO (1) WO2003092304A1 (ko)

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003092303A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
KR100477801B1 (ko) 2002-12-26 2005-03-22 한국전자통신연구원 3차원 영상정보 기술장치와 그 방법 및 이를 이용한 3차원영상정보 검색장치 및 그 방법
US7660472B2 (en) * 2004-02-10 2010-02-09 Headplay (Barbados) Inc. System and method for managing stereoscopic viewing
WO2005083637A1 (es) * 2004-02-27 2005-09-09 Td Vision Corporation, S.A. De C.V. Método y sistema de decodificación digital de imágenes de video 3d estereoscópicas
KR101187550B1 (ko) * 2004-02-27 2012-10-04 티디비전 코포레이션 에스.에이. 데 씨.브이. 입체적 3ｄ-비디오 이미지 디지털 코딩 시스템 및 방법
JP2005311983A (ja) * 2004-04-26 2005-11-04 Olympus Corp 画像処理装置
GB2414882A (en) 2004-06-02 2005-12-07 Sharp Kk Interlacing/deinterlacing by mapping pixels according to a pattern
JP2005352267A (ja) * 2004-06-11 2005-12-22 Sharp Corp 画像信号処理装置
WO2006018773A1 (en) * 2004-08-17 2006-02-23 Koninklijke Philips Electronics N.V. Detection of view mode
KR100579135B1 (ko) * 2004-11-11 2006-05-12 한국전자통신연구원 수렴형 3차원 다시점 영상 획득 방법
KR100782811B1 (ko) * 2005-02-04 2007-12-06 삼성전자주식회사 영상의 주파수 특성에 따라 포맷을 달리하는 스테레오 영상 합성 방법 및 장치와, 그 영상의 송신 및 수신 방법과, 그 영상의 재생 방법 및 장치
KR101199498B1 (ko) 2005-03-31 2012-11-09 삼성전자주식회사 카메라 파라미터를 이용한 다시점 영상의 부호화 장치 및생성 장치, 그 방법과, 이를 수행하기 위한 프로그램이기록된 기록 매체
KR100813961B1 (ko) * 2005-06-14 2008-03-14 삼성전자주식회사 영상 수신장치
CN101203881B (zh) * 2005-06-23 2015-04-22 皇家飞利浦电子股份有限公司 图像和相关数据的组合交换
JP4665166B2 (ja) * 2005-06-29 2011-04-06 ソニー株式会社 ステレオ画像処理装置、ステレオ画像処理方法およびステレオ画像処理用プログラム
JP4687279B2 (ja) * 2005-06-29 2011-05-25 ソニー株式会社 画像再生装置、画像再生方法、および画像再生用プログラム
JP4665167B2 (ja) * 2005-06-29 2011-04-06 ソニー株式会社 ステレオ画像処理装置、ステレオ画像処理方法およびステレオ画像処理用プログラム
JP4638783B2 (ja) 2005-07-19 2011-02-23 オリンパスイメージング株式会社 ３ｄ画像ファイルの生成装置、撮像装置、画像再生装置、画像加工装置、及び３ｄ画像ファイルの生成方法
JP4638784B2 (ja) * 2005-07-19 2011-02-23 オリンパスイメージング株式会社 画像出力装置及びプログラム
JP4630150B2 (ja) * 2005-07-26 2011-02-09 シャープ株式会社 立体画像記録装置及びプログラム
KR100716142B1 (ko) * 2006-09-04 2007-05-11 주식회사 이시티 스테레오스코픽 영상 데이터의 전송 방법
JP4751801B2 (ja) * 2006-10-17 2011-08-17 シャープ株式会社 立体画像検索装置
RU2454025C2 (ru) * 2006-12-19 2012-06-20 Конинклейке Филипс Электроникс Н.В. Способ и система для преобразования двухмерного видео в трехмерное видео
US10795457B2 (en) 2006-12-28 2020-10-06 D3D Technologies, Inc. Interactive 3D cursor
US9349183B1 (en) * 2006-12-28 2016-05-24 David Byron Douglas Method and apparatus for three dimensional viewing of images
US11275242B1 (en) 2006-12-28 2022-03-15 Tipping Point Medical Images, Llc Method and apparatus for performing stereoscopic rotation of a volume on a head display unit
US11315307B1 (en) 2006-12-28 2022-04-26 Tipping Point Medical Images, Llc Method and apparatus for performing rotating viewpoints using a head display unit
US11228753B1 (en) 2006-12-28 2022-01-18 Robert Edwin Douglas Method and apparatus for performing stereoscopic zooming on a head display unit
JP4993578B2 (ja) * 2007-01-15 2012-08-08 オリンパスイメージング株式会社 画像ファイル再生装置，画像ファイル加工編集装置
EP2130178A1 (en) * 2007-03-23 2009-12-09 Thomson Licensing System and method for region classification of 2d images for 2d-to-3d conversion
US8749615B2 (en) * 2007-06-07 2014-06-10 Reald Inc. Demultiplexing for stereoplexed film and video applications
EP2153670A4 (en) * 2007-06-11 2011-03-09 Samsung Electronics Co Ltd METHOD AND DEVICE FOR GENERATING HEADLINE INFORMATION ON A STEREOSCOPIC IMAGE
JP2010530702A (ja) * 2007-06-19 2010-09-09 韓國電子通信研究院 ステレオスコピックデータの保存および再生のためのメタデータ構造、およびこれを用いるステレオスコピックコンテンツファイルの保存方法
JP4952657B2 (ja) * 2007-07-19 2012-06-13 株式会社Ｊｖｃケンウッド 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法
US8396906B2 (en) 2007-10-10 2013-03-12 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
US8355019B2 (en) * 2007-11-02 2013-01-15 Dimension Technologies, Inc. 3D optical illusions from off-axis displays
US20090174704A1 (en) * 2008-01-08 2009-07-09 Graham Sellers Graphics Interface And Method For Rasterizing Graphics Data For A Stereoscopic Display
JP4694581B2 (ja) * 2008-01-25 2011-06-08 富士フイルム株式会社 ファイル生成装置および方法、３次元形状再生装置および方法並びにプログラム
KR100924757B1 (ko) 2008-01-25 2009-11-05 전자부품연구원 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체
WO2009099307A1 (en) * 2008-02-05 2009-08-13 Samsung Electronics Co., Ltd Apparatus and method for generating and displaying media files
KR101591085B1 (ko) 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
JP2010028456A (ja) * 2008-07-18 2010-02-04 Sony Corp データ構造、再生装置および方法、並びにプログラム
CN102177718B (zh) * 2008-10-07 2014-03-12 艾利森电话股份有限公司 一种用于产生多视图媒体数据的方法及设备
EP2343907A4 (en) 2008-10-10 2012-06-20 Lg Electronics Inc RECEPTION SYSTEM AND METHOD OF PROCESSING DATA
KR20100040640A (ko) * 2008-10-10 2010-04-20 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
TWI394085B (zh) * 2008-10-28 2013-04-21 Asustek Comp Inc 辨識被攝主體之維度形態的方法
KR100972792B1 (ko) * 2008-11-04 2010-07-29 한국전자통신연구원 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
EP2197217A1 (en) * 2008-12-15 2010-06-16 Koninklijke Philips Electronics N.V. Image based 3D video format
KR101537709B1 (ko) 2008-12-30 2015-07-20 엘지전자 주식회사 이차원 영상과 3ｄ 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치
WO2010084724A1 (ja) 2009-01-21 2010-07-29 株式会社ニコン 画像処理装置、プログラム、画像処理方法、記録方法および記録媒体
JP2010224190A (ja) * 2009-03-23 2010-10-07 Nikon Corp 画像処理装置、プログラムおよび画像処理方法
WO2010100875A1 (ja) * 2009-03-02 2010-09-10 パナソニック株式会社 記録媒体、再生装置、及び集積回路
JP5266126B2 (ja) 2009-03-31 2013-08-21 富士フイルム株式会社 画像表示装置および方法並びにプログラム
JP4947389B2 (ja) 2009-04-03 2012-06-06 ソニー株式会社 画像信号復号装置、画像信号復号方法、および画像信号符号化方法
IT1393775B1 (it) * 2009-04-03 2012-05-08 Univ Degli Studi Torino Sistema di ripresa stereoscopico
CN102484729B (zh) 2009-04-07 2016-08-24 Lg电子株式会社 广播发送器、广播接收器及其3d视频数据处理方法
JP5627860B2 (ja) * 2009-04-27 2014-11-19 三菱電機株式会社 立体映像配信システム、立体映像配信方法、立体映像配信装置、立体映像視聴システム、立体映像視聴方法、立体映像視聴装置
WO2010126221A2 (en) * 2009-04-27 2010-11-04 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
KR101671021B1 (ko) * 2009-04-30 2016-11-10 삼성전자주식회사 스테레오스코픽 영상 데이터 전송 장치 및 방법
JP5250491B2 (ja) * 2009-06-30 2013-07-31 株式会社日立製作所 記録再生装置
JP2011024003A (ja) * 2009-07-16 2011-02-03 Fujifilm Corp 立体動画記録方法および装置、動画ファイル変換方法および装置
US9083958B2 (en) 2009-08-06 2015-07-14 Qualcomm Incorporated Transforming video data in accordance with three dimensional input formats
US8629899B2 (en) 2009-08-06 2014-01-14 Qualcomm Incorporated Transforming video data in accordance with human visual system feedback metrics
JP4875127B2 (ja) 2009-09-28 2012-02-15 パナソニック株式会社 三次元画像処理装置
EP2489197A4 (en) 2009-10-13 2014-03-05 Lg Electronics Inc BROADCAST RECEIVER AND METHOD FOR PROCESSING 3D VIDEO DATA THEREFOR
WO2011046271A1 (en) 2009-10-13 2011-04-21 Lg Electronics Inc. Broadcast receiver and 3d video data processing method thereof
KR20110040378A (ko) * 2009-10-14 2011-04-20 삼성전자주식회사 영상 제공방법, 그리고 이를 이용한 영상 제공장치, 디스플레이 장치 및 영상 제공 시스템
JP5405264B2 (ja) 2009-10-20 2014-02-05 任天堂株式会社 表示制御プログラム、ライブラリプログラム、情報処理システム、および、表示制御方法
JP4754031B2 (ja) 2009-11-04 2011-08-24 任天堂株式会社 表示制御プログラム、情報処理システム、および立体表示の制御に利用されるプログラム
EP2355526A3 (en) 2010-01-14 2012-10-31 Nintendo Co., Ltd. Computer-readable storage medium having stored therein display control program, display control apparatus, display control system, and display control method
JP2011182388A (ja) 2010-02-02 2011-09-15 Panasonic Corp 映像記録装置および映像再生装置
JP5310638B2 (ja) * 2010-04-20 2013-10-09 パナソニック株式会社 電子機器、プリンタ、画像ファイル生成方法、画像データ読み出し方法
US8542241B2 (en) 2010-04-29 2013-09-24 Acer Incorporated Stereoscopic content auto-judging mechanism
EP2384008A1 (en) * 2010-04-30 2011-11-02 Acer Incorporated Stereoscopic content auto-judging mechanism
EP2389004B1 (en) * 2010-05-20 2013-07-24 Sony Computer Entertainment Europe Ltd. 3D camera and imaging method
US9693039B2 (en) 2010-05-27 2017-06-27 Nintendo Co., Ltd. Hand-held electronic device
US20110316986A1 (en) * 2010-06-23 2011-12-29 Kabushiki Kaisha Toshiba Video display apparatus and video display method
JP2012019383A (ja) * 2010-07-08 2012-01-26 Panasonic Corp 記録制御装置、半導体記録装置および記録システム
KR101809479B1 (ko) * 2010-07-21 2017-12-15 삼성전자주식회사 3ｄ 콘텐츠 재생 장치 및 방법
KR101355296B1 (ko) * 2010-08-09 2014-01-27 파나소닉 주식회사 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치 및 화상 복호 장치
AU2011296953A1 (en) * 2010-09-03 2013-03-14 Sony Corporation Encoding device, encoding method, decoding device, and decoding method
EP2434764A1 (en) * 2010-09-23 2012-03-28 Thomson Licensing Adaptation of 3D video content
US20120075436A1 (en) * 2010-09-24 2012-03-29 Qualcomm Incorporated Coding stereo video data
JP5269027B2 (ja) * 2010-09-30 2013-08-21 株式会社東芝 三次元画像表示装置および画像処理装置
EP2495984A4 (en) * 2010-11-22 2013-11-20 Toshiba Inc Kk METHOD AND DEVICE FOR DISPLAYING STEREOSCOPIC IMAGE
US9113074B2 (en) * 2010-12-22 2015-08-18 Olympus Corporation Imaging apparatus, imaging method, and computer readable storage medium for applying special effects processing to an automatically set region of a stereoscopic image
JP5595946B2 (ja) * 2011-02-04 2014-09-24 日立コンシューマエレクトロニクス株式会社 デジタルコンテンツ受信装置、デジタルコンテンツ受信方法、およびデジタルコンテンツ送受信方法
US8654181B2 (en) * 2011-03-28 2014-02-18 Avid Technology, Inc. Methods for detecting, visualizing, and correcting the perceived depth of a multicamera image sequence
JP5228077B2 (ja) * 2011-04-14 2013-07-03 ティディヴィジョン コーポレイション エス．エー． デ シー．ヴィ． 立体３ｄビデオイメージディジタルデコーディングのシステムおよび方法
JP5227439B2 (ja) * 2011-04-15 2013-07-03 ティディヴィジョン コーポレイション エス．エー． デ シー．ヴィ． 立体３ｄビデオイメージディジタルコーディングのシステムおよび方法
TWI488485B (zh) 2011-05-03 2015-06-11 Au Optronics Corp 三維影像的合成方法與應用此方法的三維影像的合成電路
US8547297B1 (en) 2011-07-05 2013-10-01 3-D Virtual Lens Technologies, Llc Enhanced color resolution display screen using pixel shifting
WO2013006731A1 (en) * 2011-07-05 2013-01-10 3-D Virtual Lens Technologies, Llc Three-dimensional image display using a dynamically variable grid
US8723920B1 (en) * 2011-07-05 2014-05-13 3-D Virtual Lens Technologies, Llc Encoding process for multidimensional display
US10089550B1 (en) * 2011-08-17 2018-10-02 William F. Otte Sports video display
JP5156117B1 (ja) * 2011-08-31 2013-03-06 株式会社東芝 映像処理装置および映像処理方法
CN102300113B (zh) * 2011-09-03 2013-06-12 四川大学 基于稀疏摄像机阵列的集成成像微图像阵列生成方法
TW201342884A (zh) 2012-01-31 2013-10-16 Sony Corp 編碼裝置及編碼方法、以及解碼裝置及解碼方法
KR101343576B1 (ko) 2012-03-14 2013-12-20 세종대학교산학협력단 카메라 파라미터를 이용한 다시점 영상의 부호화 장치 및 생성 장치, 그 방법과, 이를 수행하기 위한 프로그램이 기록된 기록 매체
JP2013179627A (ja) * 2013-04-15 2013-09-09 Hitachi Consumer Electronics Co Ltd 記録再生装置
CN105519105B (zh) * 2013-09-11 2019-03-08 索尼公司 图像处理设备及方法
JP7140517B2 (ja) * 2018-03-09 2022-09-21 キヤノン株式会社 生成装置、生成装置が行う生成方法、及びプログラム
KR102553105B1 (ko) * 2018-11-01 2023-07-07 삼성전자주식회사 이미지의 컨텐츠의 변경에 기반하여 이미지의 표시 위치 또는 면적을 제어하는 전자 장치
EP3667173B1 (en) * 2018-12-12 2023-06-07 Electrolux Appliances Aktiebolag Food preparation entity
TWI676824B (zh) * 2019-01-09 2019-11-11 友達光電股份有限公司 顯示裝置及顯示方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11191895A (ja) * 1996-12-04 1999-07-13 Matsushita Electric Ind Co Ltd 高解像度および立体映像記録用光ディスク、光ディスク再生装置、および光ディスク記録装置
JP2002095018A (ja) * 2000-09-12 2002-03-29 Canon Inc 画像表示制御装置及び画像表示システム、並びに画像データの表示方法

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2857429B2 (ja) * 1989-10-02 1999-02-17 日本放送協会 ３次元画像表示装置および方法
JPH0642742B2 (ja) * 1991-01-14 1994-06-01 株式会社エイ・ティ・アール視聴覚機構研究所 立体テレビジョンシステム
JP3081675B2 (ja) 1991-07-24 2000-08-28 オリンパス光学工業株式会社 画像記録装置および画像再生装置
JPH05122733A (ja) * 1991-10-28 1993-05-18 Nippon Hoso Kyokai <Nhk> ３次元画像表示装置
WO1994010604A1 (en) * 1992-10-29 1994-05-11 Aea O´Donnell, Inc. Automated stereoscopic image acquisition and storage system
EP0644701B1 (en) * 1993-09-20 1999-12-01 Canon Kabushiki Kaisha Image taking and/or displaying system
US5581625A (en) * 1994-01-31 1996-12-03 International Business Machines Corporation Stereo vision system for counting items in a queue
JP3234395B2 (ja) * 1994-03-09 2001-12-04 三洋電機株式会社 立体動画像符号化装置
JPH07287761A (ja) * 1994-04-19 1995-10-31 Canon Inc 画像処理装置及び画像処理方法
JPH08317425A (ja) * 1995-05-19 1996-11-29 Olympus Optical Co Ltd 電子カメラ
US6005607A (en) * 1995-06-29 1999-12-21 Matsushita Electric Industrial Co., Ltd. Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus
JPH0973049A (ja) * 1995-06-29 1997-03-18 Canon Inc 画像表示方法及びそれを用いた画像表示装置
JPH09101482A (ja) * 1995-10-03 1997-04-15 Canon Inc 立体画像表示方法及びそれを用いた画像表示装置
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
KR100348922B1 (ko) 1996-02-28 2002-11-18 마쯔시다덴기산교 가부시키가이샤 고해상도및입체영상기록용광디스크,광디스크재생장치및광디스크기록장치
JPH09307770A (ja) * 1996-05-15 1997-11-28 Hitachi Ltd カラー画像データの高能率圧縮復号出力方式
JPH10232665A (ja) * 1997-02-20 1998-09-02 Canon Inc 表示制御装置及び方法
US6023277A (en) * 1996-07-03 2000-02-08 Canon Kabushiki Kaisha Display control apparatus and method
JPH10336705A (ja) * 1997-06-02 1998-12-18 Canon Inc 複眼カメラ
JPH1141627A (ja) 1997-07-18 1999-02-12 Sanyo Electric Co Ltd 画像合成装置
AUPO894497A0 (en) * 1997-09-02 1997-09-25 Xenotech Research Pty Ltd Image processing method and apparatus
JPH11113028A (ja) 1997-09-30 1999-04-23 Toshiba Corp ３次元映像表示装置
JP3867369B2 (ja) * 1997-10-20 2007-01-10 ソニー株式会社 デジタルスチル画像の撮影システム
JPH11164329A (ja) * 1997-11-27 1999-06-18 Toshiba Corp 立体映像表示装置
JP3420504B2 (ja) 1998-06-30 2003-06-23 キヤノン株式会社 情報処理方法
JP3259839B2 (ja) * 1998-07-30 2002-02-25 松下電器産業株式会社 画像信号再生装置及び画像信号再生方法
US6704042B2 (en) 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
JP2000197074A (ja) * 1998-12-25 2000-07-14 Canon Inc 立体映像再生装置及び出力装置及びその制御方法及び記憶媒体
US6747642B1 (en) * 1999-01-29 2004-06-08 Nintendo Co., Ltd. Method and apparatus for providing non-photorealistic cartoon outlining within a 3D videographics system
US6674894B1 (en) * 1999-04-20 2004-01-06 University Of Utah Research Foundation Method and apparatus for enhancing an image using data optimization and segmentation
JP3471262B2 (ja) * 1999-07-30 2003-12-02 日本電信電話株式会社 三次元画像処理装置
US6657655B1 (en) 1999-09-30 2003-12-02 Canon Kabushiki Kaisha Stereoscopic-image display apparatus
JP2001103516A (ja) * 1999-09-30 2001-04-13 Canon Inc ステレオ画像表示装置、ステレオ画像表示方法及び記憶媒体
JP2001197521A (ja) * 2000-01-06 2001-07-19 Toppan Printing Co Ltd 撮像装置、撮像方法及び撮像条件に係るデータを記録した記録媒体
JP2001326947A (ja) * 2000-05-12 2001-11-22 Sony Corp 立体画像表示装置
WO2001097531A2 (en) * 2000-06-12 2001-12-20 Vrex, Inc. Electronic stereoscopic media delivery system
GB0117157D0 (en) * 2001-07-16 2001-09-05 Imec Inter Uni Micro Electr Extraction, hierarchical representation and flexible compression of surface meshes derived from 3D data
US20080104526A1 (en) * 2001-02-15 2008-05-01 Denny Jaeger Methods for creating user-defined computer operations using graphical directional indicator techniques
US20080104527A1 (en) * 2001-02-15 2008-05-01 Denny Jaeger User-defined instruction methods for programming a computer environment using graphical directional indicators
US20080104571A1 (en) * 2001-02-15 2008-05-01 Denny Jaeger Graphical object programming methods using graphical directional indicators
JP3789794B2 (ja) * 2001-09-26 2006-06-28 三洋電機株式会社 立体画像処理方法、装置、およびシステム
US7277121B2 (en) 2001-08-29 2007-10-02 Sanyo Electric Co., Ltd. Stereoscopic image processing and display system
WO2003092303A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
US7340678B2 (en) * 2004-02-12 2008-03-04 Fuji Xerox Co., Ltd. Systems and methods for creating an interactive 3D visualization of indexed media
KR20070064657A (ko) * 2004-10-06 2007-06-21 셈바이오시스 제네틱스 인코포레이티드 식물 내 올레오신 발현의 조절 방법
CA2586542A1 (en) * 2004-11-08 2006-05-11 University Of Rochester Transgenic non-human animal models of ischemia-reperfusion injury and uses thereof
EP1716751A1 (en) * 2005-04-28 2006-11-02 Veterinärmedizinische Universität Wien Animal models for cell therapy and cell based gene therapy
US8104082B2 (en) * 2006-09-29 2012-01-24 Certes Networks, Inc. Virtual security interface
US20080104719A1 (en) * 2006-10-03 2008-05-01 National Yang-Ming University CISD2-Knockout Mice and Uses Thereof
US20080104659A1 (en) * 2006-10-27 2008-05-01 Matthew James West Prioritized real-time data transmission

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11191895A (ja) * 1996-12-04 1999-07-13 Matsushita Electric Ind Co Ltd 高解像度および立体映像記録用光ディスク、光ディスク再生装置、および光ディスク記録装置
JP2002095018A (ja) * 2000-09-12 2002-03-29 Canon Inc 画像表示制御装置及び画像表示システム、並びに画像データの表示方法

Also Published As

Publication number Publication date
US20050244050A1 (en) 2005-11-03
JPWO2003092304A1 (ja) 2005-09-08
EP2262273A2 (en) 2010-12-15
JP2011244481A (ja) 2011-12-01
EP2268049A3 (en) 2013-06-05
KR20050003390A (ko) 2005-01-10
WO2003092304B1 (en) 2004-05-13
JP4879960B2 (ja) 2012-02-22
AU2003231510A1 (en) 2003-11-10
WO2003092304A1 (en) 2003-11-06
US7679616B2 (en) 2010-03-16
EP2262273A3 (en) 2013-12-04
EP1501317A1 (en) 2005-01-26
EP2268049A2 (en) 2010-12-29
JP2009124719A (ja) 2009-06-04
EP1501317A4 (en) 2006-06-21

Similar Documents

Publication Publication Date Title
KR100977193B1 (ko) 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체
JP4877852B2 (ja) 画像符号化装置、および画像送信装置
US7636088B2 (en) 3-Dimensional image creation device, 3-dimensional image reproduction device, 3-dimensional image processing device, 3-dimensional image processing program, and recording medium containing the program
JP4942784B2 (ja) マルチメディア情報生成装置およびマルチメディア情報再生装置
KR101340102B1 (ko) 영상 부호화 장치, 영상 부호화 방법, 영상 재생 장치 및 영상 재생 방법
US7796808B2 (en) Image data creation device and image data reproduction device for reproducing the data
US7529400B2 (en) Image encoder, image decoder, record medium, and image recorder
JP3081675B2 (ja) 画像記録装置および画像再生装置
US20090128622A1 (en) Image processing device
US7715618B2 (en) Image file creating apparatus and image file reproducing apparatus
JP2005094168A (ja) ファイル構造及びそれを用いる画像記録装置並びに画像再生装置
JP4222817B2 (ja) 立体画像表示装置、記録方法、及び伝送方法
JP2004274091A (ja) 画像データ作成装置、画像データ再生装置、画像データ記録方式および画像データ記録媒体
WO2007029686A1 (ja) 立体画像記録再生システム
WO2004030377A1 (ja) 立体画像表示装置、記録方法、及び伝送方法
KR100480007B1 (ko) 입체영상 제작 및 재생 시스템 및 방법
WO2004030375A1 (ja) 画像データ生成装置、画像データ再生装置、画像データ生成方法、画像データ再生方法、画像データ又は画像処理プログラムを記録した記録媒体および画像データ記録装置
JPH10262268A (ja) 立体映像符号化装置及び復号化装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130719

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140808

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150807

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee