KR20070041745A - 비디오 정보를 전송하기 위한 시스템 및 방법 - Google Patents

비디오 정보를 전송하기 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20070041745A
KR20070041745A KR1020077003123A KR20077003123A KR20070041745A KR 20070041745 A KR20070041745 A KR 20070041745A KR 1020077003123 A KR1020077003123 A KR 1020077003123A KR 20077003123 A KR20077003123 A KR 20077003123A KR 20070041745 A KR20070041745 A KR 20070041745A
Authority
KR
South Korea
Prior art keywords
sub
video stream
display
sampled
video
Prior art date
Application number
KR1020077003123A
Other languages
English (en)
Inventor
헨릭 카르피넨
자니 라이네마
Original Assignee
노키아 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 노키아 코포레이션 filed Critical 노키아 코포레이션
Publication of KR20070041745A publication Critical patent/KR20070041745A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

비디오 정보를 부호화하고 전송하기 위한 장치, 시스템 및 방법이 제공된다. 본 발명의 실시예들은 3차원 비디오 애플리케이션들에서 사용될 수 있다. 본 발명의 실시예에 의하면, 비디오 스트림들은 획득될 수 있고 서브-샘플링될 수 있다. 상기 서브-샘플링된 비디오 스트림들은 결합될 수 있다. 그다음 상기 서브-샘플링되고, 결합된 비디오 스트림은 3차원 이미지를 형성하기 위하여 디스플레이 시스템에 전송될 수 있다.

Description

비디오 정보를 전송하기 위한 시스템 및 방법{System and method for transferring video information}
본 발명의 실시예들은 비디오 부호화 및 전송 분야에 관한 것으로, 특히 입체 이미징을 위한 3차원(3D)(또는 스테레오-뷰) 비디오의 부호화 및 전송을 위한 시스템 및 방법에 관한 것이다.
이동 장치들상에서 고품질 비디오 이미징에 대한 요구는 계속 증가하고 있다. 소비자들은 이제 그들의 이동 장치들이 복잡한 그래픽을 생성하고 만족할만한 뷰잉에 적합한 레이트로 비디오 이미지를 전달할 것을 기대한다. 더욱이, 많은 소비자들은 그들의 홈 뷰잉 경험과 경쟁하는 이동 장치 디스플레이들로부터 능력을 기대한다.
예를 들어, 이동 장치 디스플레이들상의 3D 비디오에 대한 요구가 증가하고 있다. 전형적인 3D 비디오 생성시, 두개의 개별 비디오 스트림들이 부호화될 수 있는데, 하나의 비디오 스트림은 뷰어의 좌측 눈을 위한 것이고 다른 하나의 비디오 스트림은 뷰어의 우측 눈을 위한 것이다. 이들 두개의 비디오 스트림들은 3D 비디오 스트림을 형성하기 위하여 결합될 수 있다. 하지만, 결과로서 생성되는 상기 3D 비디오 스트림의 비트-레이트는 전형적으로 보통의 2차원(2D) 비디오 스트림의 비 트-레이트의 두배인데 왜냐하면 상기 3D 비디오 스트림은 두개의 개별 2D 비디오 스트림들로 구성되기 때문이다. 따라서, 3D 비디오를 위한 데이터 처리 요건은 전형적으로 부담이 되었고 종종 이동 장치들상에서 빈약한 비디오 성능을 초래했다.
본 발명의 실시예들에 의하면, 비디오 스트림을 전송하기 위한 방법은 복수의 비디오 스트림들을 획득하는 단계; 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링(sub-sampling)하는 단계; 및 상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송하는 단계를 포함할 수 있다. 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함할 수 있다. 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하는 단계는 상기 제1 비디오 스트림과 상기 제2 비디오 스트림을 서브-샘플링하는 단계를 포함할 수 있다. 또한, 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하는 단계는 단지 상기 제1 비디오 스트림만을 서브-샘플링하거나 또는 단지 상기 제2 비디오 스트림만을 서브-샘플링하는 단계를 포함할 수 있다. 서브-샘플링은 수평 서브-샘플링을 포함할 수 있다. 하지만, 실제 서브-샘플링 레이트는 중요하지 않고 본 발명의 다양한 실시예들에 따라 변경될 수 있다.
상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함할 수 있다. 상기 방법은 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하는 단계를 더 포함할 수 있다. 상기 방법은 상기 디스플레이 시스템에 서브-샘플링되지 않은 나머지 비디오 스트림들을 전송하는 단계를 더 포함할 수 있다. 상기 디스플레이는 예를 들어 패럴랙스 베리어(parallax barrier) 디스플레이 또는 렌티큘러 렌즈(lenticular lens) 디스플레이와 같은 3차원 디스플레이일 수 있고, 이동 장치상에 배치될 수 있다.
상기 복수의 비디오 스트림들은 개별 비디오 스트림들로서, 복합 비디오 스트림으로서 또는 인터레이스된 비디오 스트림으로서 배열될 수 있다. 상기 방법은 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 매핑을 상기 디스플레이 시스템에 전송하는 단계를 더 포함할 수 있는데, 매핑을 전송하는 단계는 부가 개선 정보 메시지(Supplemental Enhancement Information message) 및/또는 화상 순서 카운트 태그(Picture Order Count tag)를 통해 매핑을 전송하는 단계를 포함한다. 상기 방법은 상기 적어도 하나의 서브-샘플링된 비디오 스트림에 관한 서브-샘플링 정보를 상기 디스플레이 시스템에 전송하는 단계를 더 포함할 수 있다. 서브-샘플링 정보를 전송하는 단계는 부가 개선 정보 메시지를 통해 서브-샘플링 정보를 전송하는 단계를 포함할 수 있다. 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림과 함께 전송될 수 있다. 상기 서브-샘플링된 정보는 두개의 1-비트 부가 개선 정보 메시지들을 포함할 수 있다.
본 발명의 실시예에 의하면, 비디오 스트림을 획득하고 제공하기 위한 장치는 복수의 비디오 스트림들을 저장하기 위한 저장 유닛; 및 상기 저장 유닛으로부터 상기 복수의 비디오 스트림들을 검색하기 위한 프로세서를 포함할 수 있다. 상기 프로세서는 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하고 상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송하도록 구성될 수 있다.
상기 프로세서는 상기 제1 비디오 스트림과 상기 제2 비디오 스트림을 서브-샘플링하도록 그리고 수평으로 서브-샘플링하도록 구성될 수 있다. 상기 프로세서는 비디오 스트림들의 수와 동일한 레이트로 서브-샘플링하도록 구성될 수 있다.
상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함할 수 있다. 상기 디스플레이 시스템은 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하도록 구성될 수 있다. 상기 디스플레이는 예를 들어 패럴랙스 베리어 디스플레이와 같은 3차원 디스플레이일 수 있고, 이동 장치상에 배치될 수 있다.
상기 프로세서는 예를 들어 부가 개선 정보 메시지를 통해, 상기 디스플레이 시스템에 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 매핑을 전송하도록 더 구성될 수 있다. 상기 프로세서는 상기 디스플레이 시스템에 화상 순서 카운트 태그를 전송하도록 더 구성될 수 있다. 상기 프로세서는 예를 들어 부가 개선 정보 메시지를 통해 상기 적어도 하나의 서브-샘플링된 비디오 스트림에 관한 서브-샘플링 정보를 상기 디스플레이 시스템에 전송하도록 더 구성될 수 있다. 상기 프로세서는 상기 적어도 하나의 서브-샘플링된 비디오 스트림과 함께 상기 부가 개선 정보 메시지를 전송하도록 더 구성될 수 있다. 상기 서브-샘플링 정보는 두개의 1-비트 부가 개선 정보 메시지들을 포함할 수 있다.
상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함할 수 있다. 상기 프로세싱 시스템은 상기 제1 비디오 스트림과 상기 제2 비디오 스트림을 서브-샘플링하도록 구성될 수 있다. 상기 프로세싱 시스템은 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하도록 구성될 수 있다.
본 발명의 실시예들은 프로세서가 비디오 스트림을 전송할 수 있게 하는 컴퓨터 프로그램 로직이 기록된 컴퓨터 사용가능 매체를 포함하는 컴퓨터 프로그램 생성물을 포함할 수 있는데, 상기 컴퓨터 프로그램 로직은 프로세서가 복수의 비디오 스트림들을 전송할 수 있게 하는 획득 절차; 상기 프로세서가 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링할 수 있게 하는 서브-샘플링 절차; 및 상기 프로세서가 상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송할 수 있게 하는 전송 절차를 포함할 수 있다. 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함할 수 있다. 상기 컴퓨터 프로그램 로직은 상기 프로세서가 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림이 결합되도록 야기하게 하는 결합 절차를 또한 포함할 수 있다.
본 발명의 실시예들의 상세한 설명은 동일한 참조 번호들이 몇몇 도면들에서 대응하는 부분들을 나타내는, 첨부된 도면들을 참조하여 행해질 것이다.
도 1은 본 발명의 실시예에 의한 3D 뷰잉 시스템의 개략도를 도시한 것이다.
도 2는 본 발명의 실시예에 따른 3D 비디오 이미지를 생성하는 방법의 흐름도를 도시한 것이다.
도 3a는 본 발명의 실시예에 의한 개별 부호화를 위해 배열된 화상을 도시한 것이다.
도 3b는 본 발명의 실시예에 의한 개별 부호화를 위해 배열된 화상을 도시한 것이다.
도 3c는 본 발명의 실시예에 의한 복합 부호화를 위해 배열된 화상을 도시한 것이다.
도 3d는 본 발명의 실시예에 의한 인터레이스된 부호화를 위해 배열된 화상을 도시한 것이다.
도 4a는 본 발명의 실시예에 의한 풀(full) 해상도 비디오 스트림을 도시한 것이다.
도 4b는 본 발명의 실시예에 의한 풀(full) 해상도 비디오 스트림을 도시한 것이다.
도 4c는 본 발명의 실시예에 의한 절반 해상도 비디오 스트림을 도시한 것이다.
도 4d는 본 발명의 실시예에 의한 절반 해상도 비디오 스트림을 도시한 것이다.
도 4e는 본 발명의 실시예에 의한 결합된 비디오 스트림을 도시한 것이다.
바람직한 실시예들의 하기 설명에서, 여기에서 일부를 형성하고, 본 발명이 실시될 수 있는 특정 실시예들이 도해를 통해 도시된 첨부된 도면들이 참조된다. 다른 실시예들이 이용될 수 있고 본 발명의 바람직한 실시예들의 범위를 벗어나지 않고 구조적인 변경들이 행해질 수 있다는 것은 이해될 것이다.
본 발명의 실시예들은 다양한 애플리케이션들에서 사용될 수 있다. 예를 들어, 본 발명의 실시예들은 입체 3D 비디오 부호화 및 전송을 위해 사용될 수 있다. 본 발명의 실시예들은 또한 다양한 디스플레이 기술들과 함께 사용될 수 있다. 하기의 논의가 패럴랙스 베리어 디스플레이와 관련하여 본 발명의 실시예들을 설명할지라도, 이러한 논의는 단지 예로서 의도되고 한정하는 것으로 간주되지 않아야 한다.
더욱이, 본 발명의 실시예들은 이동 장치들, 무선 장치들, 홈 엔터테인먼트 장치들 등과 같은 다양한 장치들과 함께 사용될 수 있다. 예를 들어, 본 발명의 실시예들은 메모리와 같은 데이터 저장 능력, 예를 들어 하나 이상의 프로세서들, 연관된 회로 및 디스플레이 등을 지닌 이동 전화들과 함께 사용될 수 있다.
본 발명의 실시예들은 다양한 방법들로 3D 비디오 스트림들을 생성할 수 있다. 예를 들어, 본 발명의 실시예에 의하면, 3D 비디오를 생성하기 위하여, 두개의 개별 비디오 스트림들이 부호화될 수 있는데, 하나의 비디오 스트림은 뷰어의 좌측 눈을 위한 것이고, 다른 하나의 비디오 스트림은 뷰어의 우측 눈을 위한 것이다. 상기 좌측 눈을 위해 의도된 비디오 스트림들과 상기 우측 눈을 위해 의도된 비디오 스트림들을 입체 쌍으로서 표시함으로써, 각 눈은 그것을 위해 의도된 비디오 프레임 또는 스트림만을 볼 수 있다. 그다음 뷰어의 뇌는 상기 비디오 프레임들을 결합할 수 있는데, 이것은 뷰어가 상기 비디오 프레임들을 3D 표시로서 인지하게 한다.
도 1은 본 발명의 실시예에 의한 3D 뷰잉 시스템(1)의 개략도를 도시한 것이다. 도 1의 3D 뷰잉 시스템(10)은 제한없이, 뷰어의 좌측 눈(18a)과 우측 눈(18b)을 위한 이미지들을 생성하는 디스플레이 시스템(12)을 포함한다. 뷰어의 눈들로의 광 경로들의 제어는 다양한 방법들로 구현될 수 있다. 예를 들어, 광 경로들의 제어는 패럴랙스 베리어 디스플레이에서와 같이 마스크로 구현될 수 있거나 예를 들어 렌티큘러 렌즈 디스플레이에서와 같이 렌즈로 구현될 수 있다. 도 1에서, 디스플레이 시스템(12)은 비디오 스트림(16)을 표시하고 패럴랙스 베리어(14) 및 하나 이상의 광 경로들(15)을 포함한다. 도 1에서, 3D 효과는 약간 상이한 이미지들이 뷰어의 좌측 눈(18a)과 우측 눈(18b)에 도달하도록 상기 디스플레이 시스템(12)으로부터 뷰어의 눈들까지 광 경로들(15)을 제어함으로써 발생된다. 상기 패럴랙스 베리어(14)는 상기 광 경로들(15)을 제어하고 상이한 이미지들이 좌측 및 우측 눈들에 도달하도록 상기 디스플레이 시스템(12) 이미지들을 분리한다; 따라서, 좌측 눈(18a)은 단지 그것을 위해 의도된 이미지들만을 보고 우측 눈(18b)은 그것을 위해 의도된 이미지들만을 본다. 좌측 눈(18a)을 위해 의도된 이미지 및 우측 눈(18b)을 위해 의도된 이미지를 스크린상에 입체 쌍으로 표시함으로써, 각 눈은 그것을 위해 의도된 이미지만을 보고 뇌는 상기 이미지들을 결합하여 그들을 3D 표시로서 인지한다. 따라서, 패럴랙스 베리어 디스플레이는 3D 이미지들을 생성하기 위한 아무런 특별한 시청 안경을 필요로 하지 않는다.
도 2는 본 발명의 실시예에 의한 3D 비디오 이미지를 생성하기 위한 방법의 흐름도를 도시한 것이다. 도 2에 도시된 방법은 예를 들어 도 1에 도시된 패럴랙스 디스플레이와 같은, 다양한 디스플레이 기술과 함께 사용될 수 있다. 단계 20에서, 비디오 스트림들이 획득된다. 상기 비디오 스트림들은 디스플레이가 배치되는 장치내의 다양한 위치들로부터 획득될 수 있다. 예를 들어, 본 발명의 실시예들이 사용되는 장치가 디스플레이를 지닌 이동 장치인 경우, 상기 비디오 스트림들은 메모리, 비디오 부호기 등으로부터 프로세서에 의해 획득될 수 있다.
상기 비디오 스트림들은 다양한 구성들에서 획득될 수 있다. 도 3a 내지 도 3d는 비디오 프레임들 또는 화상들이 본 발명의 실시예들에 따라 부호화될 수 있는 다양한 구성들을 도시한 것이다. 도 3a 및 도 3b는 두개의 개별 2D 비디오 스트림들을 형성하기 위하여 개별적으로 부호화될 수 있는 두개의 화상들을 도시한 것이다. 도 3c는 복합 화상을 형성하기 위하여 함께 그룹화된, 동기화된 화상들로서 도 3a 및 도 3b의 두개의 화상들을 도시한 것이다. 도 3c의 부호화는 비트-스트림 처리의 복잡성을 감소시킬 수 있다.
도 3d는 인터레이스된 프레임으로서 도 3a 및 도 3b의 두개의 화상들을 도시한 것이다. 도 3d에서, 도 3a와 도 3b의 화상들은 인터페이스되었고, 도 3a의 화상은 상단 필드이며 도 3b의 화상은 하단 필드이다. 도 3d의 인터페이스된 화상들은 예를 들어, ITU-T H.264 비디오 부호화 표준의 방법들과 같이, 다양한 방법들로 부호화될 수 있다. 도 3d의 부호화는 개선된 압축 및 비트-스트림 처리를 초래할 수 있다.
도 2를 다시 참조하면, 일단 상기 비디오 스트림들이 획득된 경우, 상기 비디오 스트림들은 단계 22에서, 서브-샘플링될 수 있다. 패럴랙스 베리어 디스플레이의 경우, 패럴랙스 베리어는 효과적으로 비디오 스트림에서 특정 픽셀들의 뷰잉이 뷰어의 우측 눈 또는 좌측 눈에 도달하는 것을 차단하기 때문에, 상기 차단된 픽셀들은 상기 비디오 스트림으로부터 제거될 수 있다. 상기 비디오 스트림을 서브-샘플링하는 것은 상기 스트림으로부터 픽셀들을 제거할 수 있다. 서브-샘플링은 상기 프레임들이 3D 스트림에 배열되는 방법에 상관없이 수행될 수 있다. 패럴랙스 베리어 디스플레이의 경우, 결합된 입체 비디오 프레임을 형성하기 위하여 단지 절반 해상도 좌측 및 우측 뷰 프레임들만이 필요하기 때문에, 풀 해상도 스트림들은 전송될 필요가 없다. 상기 비디오 스트림의 비트-레이트 및 픽셀-처리 레이트는 상기 비디오 스트림에서 하나 건너뛴 프레임을 수평으로 서브-샘플링함으로써 반감될 수 있다.
도 4a 내지 도 4d는 본 발명의 실시예에 의한 비디오 스트림 서브-샘플링의 블록도들을 도시한 것이다. 도 4a는 제1 비디오 스트림을 도시한 것이고 반면에 도 4b는 제2 비디오 스트림을 도시한 것이다. 도 4a 및 도 4b의 각 비디오 스트림은 풀(full) 해상도 스트림이다. 도 4a 및 도 4b의 예에서, 각 비디오 스트림은 64 픽셀들을 포함한다.
도 4c 및 도 4d는 반감된 수평 해상도 프레임들을 지닌 비디오 스트림들을 도시한 것이다. 도 4c 및 도 4d의 비디오 프레임들은 도 4a와 도 4b의 비디오 스트 림들을 각각 서브-샘플링함으로써 획득된다. 따라서, 도 4c와 도 4d의 예에서, 각 비디오 스트림은 32 프레임들을 포함하는데, 즉 각각 도 4a와 도 4b의 비디오 스트림들의 프레임들의 수의 절반을 포함한다.
본 발명의 실시예들에 의하면, 상기 서브-샘플링된 비디오 스트림들은 또한 3D 뷰잉을 위한 비디오 스트림을 형성하기 위하여 결합될 수 있다. 도 4d는 3D 뷰잉을 위한 비디오 스트림을 형성하기 위하여 결합되는 도 4c 및 도 4d의 서브-샘플링된 비디오 스트림들을 도시한 것이다. 도 4e의 예에서 상기 결합된 비디오 스트림은 도 4c 및 도 4d에서 반감된 수평 해상도 프레임들의 각 프레임을 교대로 결합함으로써 형성될 수 있다. 도 4e의 예에서 상기 결합된 비디오 스트림은 하기에 더 상세히 설명되는 바와 같이 3D 디스플레이 시스템으로 전송될 수 있다.
도 2를 다시 참조하면, 일단 원래의 비디오 스트림들이 서브-샘플링되었거나 서브-샘플링되고 결합된 경우, 상기 비디오 스트림들은 단계 24에서 디스플레이 시스템으로 전송될 수 있다. 본 발명의 실시예들에 의하면, 상기 서브-샘플링되어, 결합된 비디오 스트림을 3D 포맷으로 디스플레이상에 렌더링하는 것을 용이하게 하기 위하여, 상기 비디오 스트림의 각 프레임은 서브-샘플링 정보를 사용하여 매핑되고 디스플레이 시스템으로 전송될 수 있다.
상기 서브-샘플링 정보의 매핑 및 공급은 다양한 방법들로 구현될 수 있다. 예를 들어, 본 발명의 실시예에 의하면, ITU-T H.264 비디오 부호화 표준에서 이용가능한, 부가 개선 정보(SEI: Supplemental Enhancement Information) 메시지들은 매핑 및 서브-샘플링 정보를 운반하기 위하여 비디오 스트림에서 사용될 수 있다.
본 발명의 실시예에 의하면, 좌측 눈 및 우측 눈에 의한 교대 뷰잉을 위한 프레임들의 매핑은 단일 SEI 메시지 및 상기 프레임들 또는 화상들의 넘버링(numbering)을 사용하여 구현될 수 있다. 상기 화상들은 예를 들어, ITU-T H.264 표준에서 화상 순서 카운트(POC: Picture Order Count) 태그들을 사용하여 넘버링될 수 있다. 그다음 상기 SEI 메시지는 짝수 및 홀수 POC 태그들을 지닌 화상들이 좌측 및 우측 뷰로 매핑되는 방법을 나타내기 위하여 상기 비디오 스트림과 함께 전송될 수 있다. 예를 들어, 본 발명의 실시예에 의하면, 1-비트 메시지는 "even_frame_is_left_view_flag"로 불리울 수 있고 다음과 같이 해석될 수 있다:
값 "1": 짝수 POC 태그들을 지닌 모든 화상들은 좌측 뷰를 위한 것이다
홀수 POC 태그들을 지닌 모든 화상들은 우측 뷰를 위한 것이다;
값 "0": 짝수 POC 태그들을 지닌 모든 화상들은 우측 뷰를 위한 것이다
홀수 POC 태그들을 지닌 모든 화상들은 좌측 뷰를 위한 것이다.
서브-샘플링 정보의 전송은 또한 다양한 방법들로 구현될 수 있다. 예를 들어, horizontally_sub_sampled_frames_flag는 서브-샘플링 정보를 전송하는데 사용될 수 있다. 본 발명의 실시예에 의하면, 상기 horizontally_sub_sampled_frames_flag가 "1"과 같다면, 하나 이상의 입력 프레임들은 2의 인수만큼 수평으로 서브-샘플링될 수 있다. 상기 horizontally_sub_sampled_frames_flag가 "1"과 같고 좌측 및 우측 뷰들의 프레임 크기가 동일한 경우, 양 뷰들로부터의 프레임들은 서브-샘플링될 수 있다. 상기 horizontally_sub_sampled_frames_flag가 "1"과 같고 상기 좌측 및 우측 뷰들의 프 레임 크기가 같지 않다면, 상기 좌측 뷰 또는 우측 뷰 프레임은 풀-해상도를 가질 수 있고 다른 뷰는 예를 들어 2의 인수만큼 서브-샘플링될 수 있다.
또한, 가변 프레임 크기를 지닌 3D 비디오 스트림은 상기 스트림으로부터 풀-해상도 프레임들을 선택함으로써 업-스케일링없이 2D 디스플레이상에 렌더링될 수 있다. 예를 들어, 상기 horizontally_sub_sampled_frames_flag가 "0"과 같은 경우, 상기 프레임들은 서브-샘플링되지 않는다.
더욱이, 본 발명의 실시예들에 의하면, 상이한 서브-샘플링 조합들이 구현될 수 있다. 예를 들어, 서브-샘플링 정보는 다음의 두개의 1-비트 SEI 메시지들로 구현될 수 있다:
horizontally_sub_sampled_left_view 값이 "1"이다: 좌측 뷰가 수평 방향으로 서브-샘플링된다;
horizontally_sub_sampled_right_view 값이 "1"이다: 우측 뷰가 수평 방향으로 서브-샘플링된다.
본 발명의 실시예들에 의하면, 서브-샘플링 정보를 두개의 메시지들로 분리하는 것은 2D와 3D 디스플레이들에 대한 렌더링 정확성 간의 트레이드 오프를 허용한다. 예를 들어, 우측 및 좌측 뷰들 양자를 서브-샘플링함으로써, 3D 렌더링을 위한 바람직한 비트-레이트는 패럴랙스 베리어 기술을 사용하는 디스플레이들에서 달성될 수 있다. 다른 예로서, 단지 하나의 비디오 스트림을 서브-샘플림함으로써, 다른 비디오 스트림은 풀 정확성을 가지고 2D 디스플레이상에 렌더링될 수 있지만, 하나의 비디오 스트림이 서브-샘플링되었기 때문에 비트-레이트 및 처리 레이트 절 감은 여전히 3D 디스플레이들에 대해 획득될 수 있다. 비디오 스트림이 서브-샘플링되지 않은 경우, 상기 비디오 스트림들 중 하나가 풀 정확성을 가지고 2D 디스플레이상에 렌더링될 수 있다.
예를 들어, 이동 장치가 2D 디스플레이를 포함하는 경우, 좌측 비디오 스트림 또는 우측 비디오 스트림 중 단지 하나만이 상기 3D 비디오 스트림으로부터 복호화될 수 있고 상기 2D 디스플레이상에 표시될 수 있다. 좌측 및 우측 비디오 프레임들 양자가 서브-샘플링된 경우, 상기 비디오 스트림의 수평 업-샘플링은 2D 디스플레이상에 렌더링하기 전에 바람직할 수 있다. 단지 하나의 비디오 스트림이 서브-샘플링된 경우, 서브-샘플링되지 않은 비디오 스트림은 풀 해상도로 2D 디스플레이에 렌더링될 수 있다.
본 발명의 특정 실시예들이 도시되고 설명되었을지라도, 본 발명이 도시되고 설명된 특정 실시예들에 한정되지 않는다는 것과 첨부된 청구항들의 정신 및 범위를 벗어나지 않고 변경들 및 변형들이 행해질 수 있다는 것은 당업자에게 명백할 것이다.

Claims (82)

  1. 비디오 스트림을 전송하기 위한 방법에 있어서,
    복수의 비디오 스트림들을 획득하는 단계;
    상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링(sub-sampling)하는 단계; 및
    상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송하는 단계를 포함하는 것을 특징으로 하는 방법.
  2. 제1항에 있어서, 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함하는 것을 특징으로 하는 방법.
  3. 제2항에 있어서, 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하는 단계는 상기 제1 비디오 스트림을 서브-샘플링하는 단계와 상기 제2 비디오 스트림을 서브-샘플링하는 단계를 포함하는 것을 특징으로 하는 방법.
  4. 제2항에 있어서, 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하는 단계는 상기 제1 비디오 스트림만을 서브-샘플링하는 단계를 포함하는 것을 특징으로 하는 방법.
  5. 제2항에 있어서, 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링하는 단계는 상기 제2 비디오 스트림만을 서브-샘플링하는 단계를 포함하는 것을 특징으로 하는 방법.
  6. 제1항에 있어서, 서브-샘플링은 수평 서브-샘플링을 포함하는 것을 특징으로 하는 방법.
  7. 제1항에 있어서, 서브-샘플링 비트 레이트는 상기 복수의 비디오 스트림들의 비트 레이트의 절반인 것을 특징으로 하는 방법.
  8. 제1항에 있어서, 서브-샘플링 비트 레이트는 상기 복수의 비디오 스트림들의 픽셀-처리 레이트의 절반인 것을 특징으로 하는 방법.
  9. 제1항에 있어서, 상기 복수의 비디오 스트림들을 획득하는 단계는 비디오 부호기로부터 상기 복수의 비디오 스트림들을 획득하는 단계를 포함하는 것을 특징으로 하는 방법.
  10. 제1항에 있어서, 상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함하는 것을 특징으로 하는 방법.
  11. 제10항에 있어서, 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  12. 제10항에 있어서, 상기 디스플레이 시스템에 서브-샘플링되지 않은 비디오 스트림들을 전송하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  13. 제10항에 있어서, 상기 디스플레이는 3차원 디스플레이인 것을 특징으로 하는 방법.
  14. 제10항에 있어서, 상기 디스플레이는 패럴랙스 베리어(parallax barrier) 디스플레이인 것을 특징으로 하는 방법.
  15. 제10항에 있어서, 상기 디스플레이는 렌티큘러 렌즈(lenticular lens) 디스플레이인 것을 특징으로 하는 방법.
  16. 제10항에 있어서, 상기 디스플레이는 이동 장치상에 배치되는 것을 특징으로 하는 방법.
  17. 제1항에 있어서, 상기 복수의 비디오 스트림들은 개별 비디오 스트림들로서 배열되는 것을 특징으로 하는 방법.
  18. 제1항에 있어서, 상기 복수의 비디오 스트림들은 복합 비디오 스트림들로서 배열되는 것을 특징으로 하는 방법.
  19. 제1항에 있어서, 상기 복수의 비디오 스트림들은 인터레이스된 비디오 스트림들로서 배열되는 것을 특징으로 하는 방법.
  20. 제1항에 있어서, 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 매핑을 상기 디스플레이 시스템에 전송하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  21. 제20항에 있어서, 매핑을 전송하는 단계는 부가 개선 정보 메시지(Supplemental Enhancement Information)를 통해 매핑을 전송하는 단계를 포함하는 것을 특징으로 하는 방법.
  22. 제21항에 있어서, 매핑을 전송하는 단계는 화상 순서 카운트 태그(Picture Order Count tag)를 전송하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  23. 제20항에 있어서, 상기 적어도 하나의 서브-샘플링된 비디오 스트림에 관한 서브-샘플링 정보를 상기 디스플레이 시스템에 전송하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  24. 제23항에 있어서, 상기 서브-샘플링 정보를 전송하는 단계는 부가 개선 정보 메시지를 통해 서브-샘플링 정보를 전송하는 단계를 포함하는 것을 특징으로 하는 방법.
  25. 제24항에 있어서, 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림과 함께 전송되는 것을 특징으로 하는 방법.
  26. 제23항에 있어서, 상기 서브-샘플링 정보는 2개의 1-비트 부가 개선 정보 메시지들을 포함하는 것을 특징으로 하는 방법.
  27. 제24항에 있어서, 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림이 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 방법.
  28. 제24항에 있어서, 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제1 뷰 및 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제2 뷰 양자가 상기 제1 뷰의 프레임 크기 및 상기 제2 뷰의 프레임 크기가 동일한 경우 2의 인수만큼 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 방법.
  29. 제24항에 있어서, 상기 부가 개선 정보 메시지는 단지 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제1 뷰 또는 단지 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제2 뷰가, 상기 제1 뷰의 프레임 크기가 상기 제2 뷰의 프레임 크기와 같지 않은 경우 2의 인수만큼 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 방법.
  30. 비디오 스트림을 획득하고 전송하기 위한 장치에 있어서,
    복수의 비디오 스트림들을 저장하기 위한 저장 유닛; 및
    상기 저장 유닛으로부터 상기 복수의 비디오 스트림들을 검색하기 위한 프로세서를 포함하고,
    상기 프로세서는,
    상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링(sub-sampling)하도록 구성되고,
    상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송하도록 구성되는 것을 특징으로 하는 장치.
  31. 제30항에 있어서, 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함하는 것을 특징으로 하는 장치.
  32. 제31항에 있어서, 상기 프로세서는 상기 제1 비디오 스트림 및 상기 제2 비디오 스트림을 서브-샘플링하도록 구성되는 것을 특징으로 하는 장치.
  33. 제30항에 있어서, 상기 프로세서는 수평으로 서브-샘플링하도록 구성되는 것을 특징으로 하는 장치.
  34. 제30항에 있어서, 상기 프로세서는 상기 복수의 비디오 스트림들의 비트 레이트의 절반인 레이트로 서브-샘플링하도록 구성되는 것을 특징으로 하는 장치.
  35. 제30항에 있어서, 상기 프로세서는 상기 복수의 비디오 스트림들의 픽셀-처리 레이트의 절반인 레이트로 서브-샘플링하도록 구성되는 것을 특징으로 하는 장치.
  36. 제30항에 있어서, 상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함하는 것을 특징으로 하는 장치.
  37. 제30항에 있어서, 상기 디스플레이 시스템은 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디 오 스트림을 결합하도록 구성되는 것을 특징으로 하는 장치.
  38. 제36항에 있어서, 상기 디스플레이는 3차원 디스플레이인 것을 특징으로 하는 장치.
  39. 제36항에 있어서, 상기 디스플레이는 패럴랙스 베리어(parallax barrier) 디스플레이인 것을 특징으로 하는 장치.
  40. 제36항에 있어서, 상기 디스플레이는 렌티큘러 렌즈(lenticular lens) 디스플레이인 것을 특징으로 하는 장치.
  41. 제36항에 있어서, 상기 디스플레이는 이동 장치상에 배치되는 것을 특징으로 하는 장치.
  42. 제30항에 있어서, 상기 프로세서는 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 매핑을 상기 디스플레이 시스템에 전송하도록 더 구성되는 것을 특징으로 하는 장치.
  43. 제42항에 있어서, 상기 프로세서는 부가 개선 정보 메시지(Supplemental Enhancement Information)를 통해 매핑을 전송하도록 더 구성되는 것을 특징으로 하는 장치.
  44. 제43항에 있어서, 상기 프로세서는 화상 순서 카운트 태그(Picture Order Count tag)를 전송하도록 더 구성되는 것을 특징으로 하는 장치.
  45. 제42항에 있어서, 상기 프로세서는 상기 적어도 하나의 서브-샘플링된 비디오 스트림에 관한 서브-샘플링 정보를 상기 디스플레이 시스템에 전송하도록 더 구성되는 것을 특징으로 하는 장치.
  46. 제43항에 있어서, 상기 프로세서는 상기 적어도 하나의 서브-샘플링된 비디오 스트림과 함께 상기 부가 개선 정보 메시지를 전송하도록 더 구성되는 것을 특징으로 하는 장치.
  47. 제45항에 있어서, 상기 서브-샘플링 정보는 2개의 1-비트 부가 개선 정보 메시지들을 포함하는 것을 특징으로 하는 장치.
  48. 제43항에 있어서, 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림이 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 장치.
  49. 제43항에 있어서, 상기 부가 개선 정보 메시지는 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제1 뷰 및 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제2 뷰 양자가, 상기 제1 뷰의 프레임 크기와 상기 제2 뷰의 프레임 크기가 동일한 경우 2의 인수만큼 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 장치.
  50. 제43항에 있어서, 상기 부가 개선 정보 메시지는 단지 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제1 뷰 또는 단지 상기 적어도 하나의 서브-샘플링된 비디오 스트림의 제2 뷰가, 상기 제1 뷰의 프레임 크기가 상기 제2 뷰의 프레임 크기와 같지 않은 경우 2의 인수만큼 수평으로 서브-샘플링된다는 것을 나타내는 것을 특징으로 하는 장치.
  51. 비디오 스트림을 전송하기 위한 시스템에 있어서,
    복수의 비디오 스트림들을 저장하기 위한 저장 시스템; 및
    상기 저장 시스템으로부터 상기 복수의 비디오 스트림들을 검색하기 위한 프로세싱 시스템; 및
    비디오 스트림들을 표시하기 위한 디스플레이 시스템을 포함하고,
    상기 프로세싱 시스템은,
    상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링(sub-sampling)하도록 구성되고,
    상기 적어도 하나의 서브-샘플링된 비디오 스트림을 상기 디스플레이 시스템에 전송하도록 구성되는 것을 특징으로 하는 시스템.
  52. 제51항에 있어서, 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함하는 것을 특징으로 하는 시스템.
  53. 제52항에 있어서, 상기 프로세싱 시스템은 상기 제1 비디오 스트림 및 상기 제2 비디오 스트림을 서브-샘플링하도록 구성되는 것을 특징으로 하는 시스템.
  54. 제51항에 있어서, 상기 프로세싱 시스템은 상기 복수의 비디오 스트림들의 비트 레이트의 절반인 레이트로 서브-샘플링하도록 구성되는 것을 특징으로 하는 시스템.
  55. 제51항에 있어서, 상기 프로세싱 시스템은 상기 복수의 비디오 스트림들의 픽셀-처리 레이트의 절반인 레이트로 서브-샘플링하도록 구성되는 것을 특징으로 하는 시스템.
  56. 제51항에 있어서, 상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함하는 것을 특징으로 하는 시스템.
  57. 제51항에 있어서, 상기 프로세싱 시스템은 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하도록 구성되는 것을 특징으로 하는 시스템.
  58. 제56항에 있어서, 상기 디스플레이는 3차원 디스플레이인 것을 특징으로 하는 시스템.
  59. 제56항에 있어서, 상기 디스플레이는 패럴랙스 베리어(parallax barrier) 디스플레이인 것을 특징으로 하는 시스템.
  60. 제56항에 있어서, 상기 디스플레이는 렌티큘러 렌즈(lenticular lens) 디스플레이인 것을 특징으로 하는 시스템.
  61. 제56항에 있어서, 상기 디스플레이는 이동 장치상에 배치되는 것을 특징으로 하는 시스템.
  62. 프로세서가 비디오 스트림을 전송할 수 있게 하는 컴퓨터 프로그램 로직이 기록되어 있는 컴퓨터 사용가능한 매체를 포함하는 컴퓨터 프로그램 생성물에 있어서, 상기 컴퓨터 프로그램은,
    상기 프로세서가 복수의 비디오 스트림들을 전송할 수 있게 하는 획득 절차;
    상기 프로세서가 상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링할 수 있게 하는 서브-샘플링 절차; 및
    상기 프로세서가 상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송할 수 있게 하는 전송 절차를 포함하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  63. 제62항에 있어서, 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  64. 제63항에 있어서, 상기 서브-샘플링 절차는 상기 프로세서가 상기 제1 비디오 스트림 및 상기 제2 비디오 스트림을 서브-샘플링할 수 있게 하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  65. 제63항에 있어서, 상기 전송 절차는 상기 프로세서가 상기 제1 비디오 스트림 및 상기 제2 비디오 스트림을 전송할 수 있게 하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  66. 제62항에 있어서, 상기 서브-샘플링 절차는 상기 프로세서가 상기 복수의 비디오 스트림들의 비트 레이트의 절반인 서브-샘플링 레이트로 서브-샘플링할 수 있게 하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  67. 제62항에 있어서, 상기 서브-샘플링 절차는 상기 프로세서가 상기 복수의 비디오 스트림들의 픽셀-처리 레이트의 절반인 서브-샘플링 레이트로 서브-샘플링할 수 있게 하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  68. 제63항에 있어서, 상기 서브-샘플링 절차는 상기 프로세서가 제1 비디오 스트림과 상기 제2 비디오 스트림을 서브-샘플링할 수 있게 하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  69. 제62항에 있어서, 상기 디스플레이 시스템은 디스플레이 회로 및 디스플레이를 포함하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  70. 제63항에 있어서, 상기 프로세서가 3차원 비디오 스트림을 형성하기 위하여 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림이 결합되도록 야기할 수 있게 하는 결합 절차를 더 포함하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  71. 제62항에 있어서, 상기 디스플레이는 3차원 디스플레이인 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  72. 제62항에 있어서, 상기 디스플레이는 패럴랙스 베리어(parallax barrier) 디스플레이인 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  73. 제62항에 있어서, 상기 디스플레이는 렌티큘러 렌즈(lenticular lens) 디스플레이인 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  74. 제62항에 있어서, 상기 디스플레이는 이동 장치상에 배치되는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
  75. 비디오 스트림을 전송하기 위한 시스템에 있어서,
    복수의 비디오 스트림들을 획득하기 위한 수단;
    상기 복수의 비디오 스트림들 중 적어도 하나의 비디오 스트림을 서브-샘플링(sub-sampling)하기 위한 수단; 및
    상기 적어도 하나의 서브-샘플링된 비디오 스트림을 디스플레이 시스템에 전송하기 위한 수단을 포함하는 것을 특징으로 하는 시스템.
  76. 제75항에 있어서, 상기 복수의 비디오 스트림들은 제1 비디오 스트림 및 제2 비디오 스트림을 포함하는 것을 특징으로 하는 시스템.
  77. 제76항에 있어서, 상기 서브-샘플링을 하기 위한 수단은 상기 제1 비디오 스 트림 및 상기 제2 비디오 스트림을 서브-샘플링하는 것을 특징으로 하는 시스템.
  78. 제75항에 있어서, 상기 서브-샘플링을 하기 위한 수단은 상기 복수의 비디오 스트림들의 비트 레이트의 절반인 레이트로 서브-샘플링하는 것을 특징으로 하는 시스템.
  79. 제75항에 있어서, 상기 서브-샘플링을 하기 위한 수단은 상기 복수의 비디오 스트림들의 픽셀-처리 레이트의 절반인 레이트로 서브-샘플링하는 것을 특징으로 하는 시스템.
  80. 제77항에 있어서, 상기 제1 서브-샘플링된 비디오 스트림과 상기 제2 서브-샘플링된 비디오 스트림을 결합하기 위한 수단을 더 포함하는 것을 특징으로 하는 시스템.
  81. 비디오 스트림을 송신하기 위한 장치에 있어서,
    적어도 하나의 비트 스트림을 획득하고,
    상기 적어도 하나의 비디오 스트림을 다운샘플링하며,
    부가 개선 정보 메시지를 생성하기 위한 프로세서; 및
    상기 적어도 하나의 비디오 스트림과 부가 개선 정보 메시지를 송신하도록 구성된 송신기를 포함하는 것을 특징으로 하는 장치.
  82. 비디오 스트림의 송신을 가능하게 하는 컴퓨터 프로그램 로직이 기록되어 있는 컴퓨터 사용가능한 매체를 포함하는 컴퓨터 프로그램 생성물에 있어서, 상기 컴퓨터 프로그램은,
    적어도 하나의 비트 스트림을 획득하는 것;
    상기 적어도 하나의 비디오 스트림을 다운샘플링하는 것;
    부가 개선 정보 메시지를 생성하는 것; 및
    상기 적어도 하나의 비디오 스트림과 부가 개선 정보 메시지를 송신하는 것을 포함하는 것을 특징으로 하는 컴퓨터 프로그램 생성물.
KR1020077003123A 2004-07-13 2005-07-12 비디오 정보를 전송하기 위한 시스템 및 방법 KR20070041745A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/890,885 2004-07-13
US10/890,885 US20060015919A1 (en) 2004-07-13 2004-07-13 System and method for transferring video information

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020097008263A Division KR20090049096A (ko) 2004-07-13 2005-07-12 비디오 정보를 전송하기 위한 방법, 장치, 시스템 및 컴퓨터로 읽을 수 있는 매체

Publications (1)

Publication Number Publication Date
KR20070041745A true KR20070041745A (ko) 2007-04-19

Family

ID=35600946

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020097008263A KR20090049096A (ko) 2004-07-13 2005-07-12 비디오 정보를 전송하기 위한 방법, 장치, 시스템 및 컴퓨터로 읽을 수 있는 매체
KR1020077003123A KR20070041745A (ko) 2004-07-13 2005-07-12 비디오 정보를 전송하기 위한 시스템 및 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020097008263A KR20090049096A (ko) 2004-07-13 2005-07-12 비디오 정보를 전송하기 위한 방법, 장치, 시스템 및 컴퓨터로 읽을 수 있는 매체

Country Status (5)

Country Link
US (1) US20060015919A1 (ko)
EP (1) EP1782636A1 (ko)
KR (2) KR20090049096A (ko)
CN (1) CN101015219A (ko)
WO (1) WO2006008613A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
WO2012054251A3 (en) * 2010-10-18 2012-06-14 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
US9756309B2 (en) 2009-02-01 2017-09-05 Lg Electronics Inc. Broadcast receiver and 3D video data processing method

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8692695B2 (en) 2000-10-03 2014-04-08 Realtime Data, Llc Methods for encoding and decoding data
US8194997B2 (en) * 2006-03-24 2012-06-05 Sharp Laboratories Of America, Inc. Methods and systems for tone mapping messaging
US8310533B2 (en) 2006-03-27 2012-11-13 GE Sensing & Inspection Technologies, LP Inspection apparatus for inspecting articles
US8139026B2 (en) 2006-08-02 2012-03-20 Research In Motion Limited System and method for adjusting presentation of text and images on an electronic device according to an orientation of the device
US8625434B2 (en) * 2006-12-29 2014-01-07 Ge Inspection Technologies Lp IP based voice communication enabled inspection system
US8897322B1 (en) * 2007-09-20 2014-11-25 Sprint Communications Company L.P. Enhancing video quality for broadcast video services
JP5577334B2 (ja) * 2008-07-20 2014-08-20 ドルビー ラボラトリーズ ライセンシング コーポレイション 立体ビデオ配信システムのエンコーダ最適化
EP2382793A4 (en) * 2009-01-28 2014-01-15 Lg Electronics Inc BROADCAST RECEIVER AND METHOD FOR PROCESSING VIDEO DATA THEREFOR
CN105357533B (zh) 2009-01-29 2018-10-19 杜比实验室特许公司 视频编码方法及视频装置
US20100198876A1 (en) * 2009-02-02 2010-08-05 Honeywell International, Inc. Apparatus and method of embedding meta-data in a captured image
US20100259595A1 (en) * 2009-04-10 2010-10-14 Nokia Corporation Methods and Apparatuses for Efficient Streaming of Free View Point Video
US9519814B2 (en) 2009-06-12 2016-12-13 Hand Held Products, Inc. Portable data terminal
JP5407957B2 (ja) * 2009-06-29 2014-02-05 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置
EP2334088A1 (en) * 2009-12-14 2011-06-15 Koninklijke Philips Electronics N.V. Generating a 3D video signal
US8325757B2 (en) * 2009-12-17 2012-12-04 Silicon Image, Inc. De-encapsulation of data streams into multiple links
IT1404059B1 (it) * 2011-02-14 2013-11-08 Sisvel Technology Srl Metodo per la generazione, trasmissione e ricezione di immagini stereoscopiche e relativi dispositivi.
JP5735181B2 (ja) * 2011-09-29 2015-06-17 ドルビー ラボラトリーズ ライセンシング コーポレイション デュアルレイヤフレームコンパチブルフル解像度立体３ｄビデオ配信
BR112014011326A2 (pt) 2011-11-28 2017-04-25 Thomson Licensing dispositivo de processamento para a geração de versões de conteúdo 3d e dispositivo associado para obter conteúdo
US10154276B2 (en) 2011-11-30 2018-12-11 Qualcomm Incorporated Nested SEI messages for multiview video coding (MVC) compatible three-dimensional video coding (3DVC)
WO2015154120A1 (en) 2014-04-10 2015-10-15 Who-Rae Pty Ltd Car seat fabric for facilitating reliable airbag deployment

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61253993A (ja) * 1985-05-07 1986-11-11 Nippon Hoso Kyokai <Nhk> 立体テレビジョン画像信号の伝送方法
US5416510A (en) * 1991-08-28 1995-05-16 Stereographics Corporation Camera controller for stereoscopic video system
GB2267579A (en) * 1992-05-15 1993-12-08 Sharp Kk Optical device comprising facing lenticular or parallax screens of different pitch
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
EP1670259A3 (en) * 2002-01-23 2010-03-03 Nokia Corporation Grouping of image frames in video coding
JP2004040445A (ja) * 2002-07-03 2004-02-05 Sharp Corp ３ｄ表示機能を備える携帯機器、及び３ｄ変換プログラム
US7650036B2 (en) * 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9756309B2 (en) 2009-02-01 2017-09-05 Lg Electronics Inc. Broadcast receiver and 3D video data processing method
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
WO2012054251A3 (en) * 2010-10-18 2012-06-14 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
US8537201B2 (en) 2010-10-18 2013-09-17 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display

Also Published As

Publication number Publication date
KR20090049096A (ko) 2009-05-15
EP1782636A1 (en) 2007-05-09
US20060015919A1 (en) 2006-01-19
WO2006008613A1 (en) 2006-01-26
CN101015219A (zh) 2007-08-08

Similar Documents

Publication Publication Date Title
KR20070041745A (ko) 비디오 정보를 전송하기 위한 시스템 및 방법
TWI644559B (zh) 用於多視角成像裝置的編碼視頻資料信號之方法
Smolic et al. An overview of available and emerging 3D video formats and depth enhanced stereo as efficient generic solution
US8780256B2 (en) Stereoscopic image format with depth information
US6055012A (en) Digital multi-view video compression with complexity and compatibility constraints
Smolic et al. Development of a new MPEG standard for advanced 3D video applications
WO2019034807A1 (en) SEQUENTIAL CODING AND DECODING OF VOLUMETRIC VIDEO
WO2010010077A2 (en) Coding device for 3d video signals
KR20110113186A (ko) 비디오 인터페이스를 통해 송신하고 ３ｄ 비디오 및 ３ｄ 오버레이들을 합성하기 위한 방법 및 시스템
US20150334369A1 (en) Method of encoding a video data signal for use with a multi-view stereoscopic display device
JP2011249945A (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2011523743A (ja) 深さ情報を有するビデオ信号
KR101871728B1 (ko) 3d 방송 서비스를 위한 방송 신호 송수신 방법 및 장치
TWI511525B (zh) 用於產生、傳送及接收立體影像之方法，以及其相關裝置
WO2019115866A1 (en) An apparatus, a method and a computer program for volumetric video
EP2309766A2 (en) Method and system for rendering 3D graphics based on 3D display capabilities
US20140055561A1 (en) Transmitting apparatus, transmitting method, receiving apparatus and receiving method
JP2010171522A (ja) 符号化装置および方法、ならびに、復号装置および方法
JP5375490B2 (ja) 送信装置、受信装置、通信システム及びプログラム
EP3698332A1 (en) An apparatus, a method and a computer program for volumetric video
KR101742993B1 (ko) 디지털 방송 수신기 및 디지털 방송 수신기에서 3ｄ 효과 제공 방법
JP2012142800A (ja) 画像処理装置及び画像処理方法、並びにコンピューター・プログラム
JP2010283512A (ja) 画像データ出力装置および画像表示システム
JP2013168982A (ja) 符号化装置および方法、ならびに、復号装置および方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
A107 Divisional application of patent
J201 Request for trial against refusal decision
WITB Written withdrawal of application
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20090422

Effective date: 20090508