KR20150102014A - 입체 이미지를 디스플레이하는 장치 및 방법 - Google Patents

입체 이미지를 디스플레이하는 장치 및 방법 Download PDF

Info

Publication number
KR20150102014A
KR20150102014A KR1020157016756A KR20157016756A KR20150102014A KR 20150102014 A KR20150102014 A KR 20150102014A KR 1020157016756 A KR1020157016756 A KR 1020157016756A KR 20157016756 A KR20157016756 A KR 20157016756A KR 20150102014 A KR20150102014 A KR 20150102014A
Authority
KR
South Korea
Prior art keywords
image
boundary
depth
pixel
stereo
Prior art date
Application number
KR1020157016756A
Other languages
English (en)
Inventor
지안핑 송
린 두
얀 슈
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20150102014A publication Critical patent/KR20150102014A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/004
    • H04N13/0022
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Abstract

개시된 본 발명의 하나의 양상은 입체 디스플레이 장치에 관한 것으로, 입체 디스플레이 장치는 제 1 이미지에 대한 제 1 스테레오 이미지와, 제 2 이미지에 대한 제 2 스테레오 이미지를 획득하도록 구성된 스테레오 이미지 획득 유닛과; 제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성하도록 구성된 경계 생성 유닛과; 제 2 스테레오 이미지 및 생성된 경계와 제 1 스테레오 이미지를 조합하고, 조합된 스테레오 이미지를 디스플레이하도록 구성된 디스플레잉 유닛을 포함한다.

Description

입체 이미지를 디스플레이하는 장치 및 방법{APPARATUS AND METHOD FOR DISPLAYING STEREOSCOPIC IMAGES}
개시된 본 발명은 일반적으로 디스플레잉 콘텐츠에 관한 것으로, 더 구체적으로 동시에 디스플레이 상에 복수의 3차원 이미지를 표현할 수 있는 픽처-인-픽처 디스플레이 기술에 관한 것이다.
2차원(2D) 픽처-인-픽처(이후부터 간략하게 PIP로 언급됨) 기능을 갖는 종래의 디스플레이 장치에서, 복수의 소스로부터의 입력 신호는 각각 디스플레이 장치의 복수의 지역(zones)으로 출력되거나, 디스플레이 장치에 후속하여 출력되는 PIP 신호로 처리되고, 이를 통해 사용자는 동시에 신호 스크린 상에서 복수의 이미지를 시청할 수 있다.
예를 들어, 사용자가 자신의 대형 스크린 TV 상에서 농구 경기를 시청할 때, 사용자는 동시에 다른 축구 경기의 진행을 알기를 원한다. 그 후, TV 시스템은 TV의 단일 스크린 상에 2개의 프로그램을 디스플레이할 수 있다. 하지만, 농구 경기의 화면은 사용자가 더 많은 세부사항을 시청할 수 있도록 스크린의 더 넓은 부분 또는 심지어 전체 스크린을 차지하는 반면, 축구 경기는 농구 경기와 나란히 있거나 디스플레이 지역에 있는, 스크린의 하부-우측 코너 상에서 더 작은 윈도우에 디스플레이된다. 여기서, 농구 경기의 화면은 메인 이미지인 반면, 축구 경기의 화면은 서브-이미지이다.
도 1은 2D PIP 모드에서 TV에 의해 제공된 이미지를 도시한다. 도 1에서, 메인 이미지(102) 및 서브 이미지(103)는 2D PIP 모드에서 TV 세트(101) 상에서 동시에 디스플레이된다. 그러한 PIP 기능은 단일 스크린 상에서 복수의 이미지를 동시에 시청하고자 하는 사용자의 요구를 충족시킬 수 있다.
더 현실적인 시각적 효과를 수행하기 위해, 공간-멀티플렉싱된 편광 유형의 입체 디스플레이 기술(편광 안경이 요구됨), 시간-멀티플렉싱된 광 밸브 유형의 입체 디스플레이 기술(광 밸브 안경이 요구됨), 어떠한 입체 안경 등도 요구하지 않는 다중-화면 입체 디스플레이 기술과 같은 다양한 입체 디스플레이 기술이 최근에 개발되어 왔다. 전술한 입체 디스플레이 기술 모두는 인간의 눈의 입체 시각의 원리에 기초하고, 디스플레이 하드웨어 및 이미지 처리 소프트웨어를 개선하려고 시도되어, 좌측 눈으로 시청하기 위해 의도된 이미지는 시청자의 좌측 눈에 들어가고, 우측 눈으로 시청하기 위해 의도된 이미지는 시청자의 우측 눈에 들어가서, 시청자의 뇌에서 입체 화상을 생성한다.
3D 입체 디스플레이의 기본 생각은 19세기에 나타났다. 2개의 눈이 머리에서 대략 6.5cm 떨어져 있기 때문에, 각 눈은 상이한 사시도로 보고 제공하는 장면의 화면의 약간 상이한 각도로 본다. 뇌는 그 후 눈을 통해 관찰된 2개의 화면에 기초하여 장면 내에서 깊이의 느낌을 생성할 수 있다.
도 2는 3D 입체 디스플레이의 예시적인 개념 예시를 도시한다. 이 예시에서, Z는 인식된 물체의 깊이 방향을 나타내고, D는 스크린에 대한 거리를 나타낸다. 4개의 물체, 즉 자동차, 원기둥, 나무 및 박스가 있다. 자동차는 스크린의 전면에서 인식되고, 원기둥은 스크린 상에서 인식되고, 나무는 스크린 뒤에서 인식되고, 박스는 무한 거리에서 인식된다. 가장 최신형의 3D 디스플레이들은, 각각 2개의 화면들을 좌측 및 우측 눈들로 분리시키는 방식에서 주요 차이를 갖는 3D 스테레오 개념들에 기초하여 구축된다.
하지만, 시청자가 3D 디스플레이 상에서 3D 컨텐츠를 시청할 때 순방향 또는 역방향으로 이동하면, 주어진 지점의 인식된 깊이는 더 작거나 더 크게 되며, 이것은 3D 디스플레이 상에서 동일한 디스플레이된 입체 지점들(PL 및 PR)에 대해 화면 지점들(1 및 2)에 대응하는 도 3에서의 인식된 지점(P1 및 P2)에 도시된다. 그러므로, 불일치, 즉 PL과 PR 사이의 거리는 더 정확한 설명을 위해 많은 기술적 문헌들에서 깊이를 대체하는데 사용된다. 하지만, 깊이는 용이한 이해를 위해 많은 경우들에서 여전히 사용되고 있다.
관련 기술에 대해, 마르코 아캄(Marco Accame) 및 프란세스코 드 나탈(Francesco De Natale)의 "적응형 크기 계층적 블록 매칭에 기초한 스테레오 시퀀스들에 대한 불일치 추정(Disparity estimation for stereo sequences based on adaptive size hierarchical block matching)"(1995년, 9월 13-15일, 이탈리아, ICIAP'95 San Remo, 제8회 국제 회의 회보)와, 홍시 얀(Hongshi Yan) 및 지안 구오 리우(Jian Guo Liu)의 "강력한 위상 상관에 기초한 서브-픽셀 불일치 추정(Robust Phase Correlation Based Sub-pixel Disparity Estimation)"(2009년 에딘버그 - 제4회 SEAS DTC 기술 회의)를 참조하자.
전형적인 2D PIP 기술들을 입체 디스플레이 장치들에 직접 적용할 때 몇몇 문제들이 존재한다. 문제들 중 하나는, 시청자들이 특히, 2개의 이미지들 사이의 경계에 인접한 컨텐츠에 대해 서브-이미지의 컨텐츠와 메인 이미지의 컨텐츠를 혼동하기 쉽다는 것이다. 다른 문제는, 시청자들이 2개의 이미지들 사이의 경계에 인접한 몇몇 컨텐츠에 대해 입체 화면을 볼 수 없다는 것이다.
전술한 문제들을 해결하기 위해, 본 발명의 하나의 목적은 2D PIP 모드로 입체 화면을 디스플레이하기 위한 몇몇 기술들을 제공하는 것이다.
개시된 본 발명의 하나의 양상은 입체 디스플레이 장치에 관한 것인데, 이러한 입체 디스플레이 장치는 제 1 이미지에 대한 제 1 스테레오 이미지와 제 2 이미지에 대한 제 2 스테레오 이미지를 획득하도록 구성된 스테레오 이미지 획득 유닛과; 제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성하도록 구성된 경계 생성 유닛과; 제 2 스테레오 이미지 및 생성된 경계를 제 1 스테레오 이미지와 조합하고, 조합된 스테레오 이미지들을 디스플레이하도록 구성된 디스플레잉 유닛을 포함한다.
개시된 본 발명의 다른 양상은 스테레오 이미지를 디스플레잉하는 방법에 관한 것인데, 이러한 스테레오 이미지를 디스플레잉하는 방법은 제 1 이미지에 대한 제 1 스테레오 이미지와 제 2 이미지에 대한 제 2 스테레오 이미지를 획득하는 단계와; 제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성하는 단계와; 제 2 스테레오 이미지 및 생성된 경계와 제 1 스테레오 이미지를 조합하는 단계와; 조합된 스테레오 이미지들을 디스플레잉하는 단계를 포함한다.
본 발명은 2D PIP 모드로 입체 화면을 디스플레이하기 위한 기술에 효과적이다.
도 1은 2D PIP 모드에서 TV에 의해 제공된 이미지를 도시한 도면.
도 2는 3D 입체 디스플레이의 예시적인 개념 예시를 도시한 도면.
도 3은 상이한 거리로부터 시청하는 상이한 3D 깊이 값들의 예시적인 예시를 도시한 도면.
도 4a 및 도 4b는 메인 이미지 및 서브-이미지의 예시적인 배치를 도시한 도면.
도 5a 및 도 5b는 메인 이미지와 서브-이미지 사이에 제공된 예시적인 경계를 도시한 도면.
도 6은 본 발명의 일실시예에 따른 입체 디스플레이 장치의 예시적인 장치(arrangement)를 도시한 도면.
도 7은 본 발명의 일실시예에 따른 스테레오 이미지를 디스플레잉하는 예시적인 방법을 도시한 흐름도.
도 8은 본 발명의 일실시예에 따른 스테레오 이미지를 디스플레잉하는 예시적인 방법을 도시한 흐름도.
도 9는 픽셀의 깊이와 그 좌표 사이의 예시적인 선형 매핑을 도시한 도면.
도 10a 및 도 10b는, 경계의 부분이 2개의 이미지를 수평으로 분리하는 예시적인 경우를 도시한 도면.
도 11은 본 발명의 일실시예에 따른 스테레오 이미지를 디스플레잉하는 예시적인 방법을 도시한 흐름도.
도 12는 본 발명의 일실시예에 따른 예시적인 입체 화면을 도시한 도면.
도 13a 및 도 13b는 본 발명의 일실시예에 따른 입체 화면의 좌측 및 우측 화면을 도시한 도면.
도 14a 내지 도 14d는 본 발명의 일실시예에 따른 입체 화면의 좌측 및 우측 화면을 도시한 도면.
도 15는 본 발명의 일실시예에 따른 스테레오 이미지를 디스플레잉하는 예시적인 방법을 도시한 흐름도.
본 발명의 특정한 예시적인 실시예는 이제 첨부도를 참조하여 더 구체적으로 기재될 것이다. 다음의 설명은 한정적인 관점에서 취해지지 않고, 단지 예시적인 실시예의 일반적인 원리를 기재하는 목적을 위해 이루어진다.
다음의 설명에서, 동일한 도면 부호는 심지어 상이한 도면에서도 동일한 요소에 사용된다. 세부적인 구성 및 요소와 같이 설명에 한정된 주제는 본 발명의 포괄적인 이해에 도움을 주도록 제공된다. 따라서, 본 발명의 예시적인 실시예가 특별히 한정된 주제 없이 수행될 수 있다는 것이 명백하다. 또한, 잘 알려진 구조, 물질, 또는 동작은 본 발명의 모호한 양상을 피하기 위해 구체적으로 도시되거나 기재되지 않는다.
본 명세서 전체에서 "일실시예", "실시예", 또는 유사한 언어에 대한 참조는, 실시예와 연계하여 기재된 특정한 특성, 구조, 또는 특징이 본 발명의 적어도 하나의 실시예에 포함된다는 것을 의미한다. 따라서, 본 명세서 전체에 "일실시예", "실시예", 및 유사한 언어의 구문의 출현은 모두 동일한 실시예를 나타낼 필요가 없을 수 있다.
전형적인 2D PIP 응용에서, 복수의 화상은 도 4에 도시된 바와 같이 픽처 인 픽처, 또는 픽처 바이 픽처로서 디스플레이된다. 도 4a에서, 서브-이미지(202)는 메인 이미지(201)의 디스플레이 지역에 디스플레이되고, 서브-이미지(203)는 메인 이미지(201)의 디스플레이 지역의 하부-우측 코너에 디스플레이된다. 도 4b에서, 메인 이미지(211), 서브-이미지(212), 및 서브-이미지(213)는 나란히 디스플레이된다.
그러한 전형적인 2D PIP 기술들을 입체 디스플레이 장치에 직접 적용할 때 몇몇 문제가 있다. 문제들 중 하나는, 특히, 2개의 이미지의 경계에서의 콘텐츠에 대해 3D 공간에서 메인 이미지와 서브-이미지 사이에 콘텐츠를 시청자가 구별하기에 어렵다는 것이다.
본 발명의 일실시예에서, 추가 경계는 2개의 이미지를 분리하도록 추가된다. 도 5a에 도시된 바와 같이, 추가 경계(312)는 메인 이미지(301)와 서브-이미지(302)를 분리하도록 사용된다. 경계는, 시청자가 서브-이미지(302)에서의 컨텐츠로부터 메인 이미지(301)에서의 컨텐츠를 쉽게 구별할 수 있을 정도로 충분히 넓어야 한다. 경계(312)는 임의의 컬러, 또는 컬러들의 조합, 또는 화상의 스트립일 수 있다.
본 발명의 일실시예에서, 2D 경계가 사용될 수 있다. 본 발명의 다른 실시예에서, 3D 경계가 사용될 수 있다. 일실시예에서, 3D 경계의 깊이는 일정할 수 있다. 본 발명의 일실시예에서, 3D 경계의 깊이는 경계에 인접한 컨텐츠의 깊이에 따라 극적으로 변할 수 있다.
본 발명의 실시예에 따른 입체 디스플레이 장치는 아래에 더 구체적으로 설명된다. 아래의 실시예에서, 추가 경계는 2개의 이미지, 즉 제 1 및 제 2 이미지를 분리하도록 추가되어, 시청자는 3D 공간에서 제 1 이미지와 제 2 이미지 사이에서 컨텐츠를 쉽게 구별할 수 있다. 제 1 이미지는 메인 이미지로서 작용할 수 있고, 제 2 이미지는 PIP 디스플레이 모드에서 서브-이미지로서 작용할 수 있다. 입체 디스플레이 장치는 TV 세트, 개인용 컴퓨터, 스마트 폰, 태블릿, 또는 데이터 또는 정보를 디스플레잉하기 위한 디스플레이 디바이스를 포함하는 임의의 다른 장치일 수 있다.
도 6은 본 발명의 일실시예에 따른 입체 디스플레이 장치의 예시적인 장치를 도시한다.
도 6을 참조하면, 입체 디스플레이 장치(100)는 스테레오 이미지 획득 유닛(110), 경계 생성 유닛(120) 및 디스플레잉 유닛(130)을 포함한다.
스테레오 이미지 획득 유닛(110)은 내부 또는 외부 소스(115)로부터 제 1 이미지에 대한 제 1 스테레오 이미지와, 제 2 이미지에 대한 제 2 스테레오 이미지를 획득한다. 일반적으로, 제 1 및 제 2 이미지는 각각 PIP 모드에서 메인 이미지 및 서브-이미지로서 작용할 수 있다. 3D 디스플레이에서, 스테레오 이미지 획득 유닛(110)은 함께 스테레오 이미지에 대한 깊이 정보 또는 깊이 맵을 추가로 획득할 수 있다.
경계 생성 유닛(120)은 제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성한다. 일실시예에서, 경계 생성 유닛(120)은 경계 영역 결정 유닛(121) 및 경계 깊이 결정 유닛(122)을 포함한다.
경계 영역 결정 유닛(121)은 경계에 인접한 컨텐츠를 포함하는 경계 영역을 결정한다. 경계 영역은 경계 주위의 픽셀의 폭을 갖는다. 예를 들어, 경계 영역은 경계에 인접한 제 1 및 제 2 스테레오 이미지에서의 픽셀의 미리 결정된 수를 포함할 수 있다. 즉, 경계 영역은 제 1 스테레오 이미지에서의 몇몇 픽셀과, 경계 자체와, 제 2 스테레오 이미지에서의 몇몇 픽셀로 구성된다.
경계 깊이 결정 유닛(122)은 각 픽셀의 좌표 및 경계 영역에서의 픽셀의 깊이 범위에 기초하여 경계 영역에서의 픽셀의 깊이를 결정함으로써 깊이 정보를 갖는 경계 영역을 생성한다. 깊이 정보를 갖는 경계 영역을 이용함으로써, 입체 디스플레이 장치(100)는 예를 들어, 폭 및 높이를 갖는 벽과 같은 경계를 디스플레잉함으로써 경계를 3차원으로 디스플레이할 수 있다.
디스플레잉 유닛(130)은 제 2 스테레오 이미지 및 생성된 경계와 제 1 스테레오 이미지를 조합하고, 조합된 스테레오 이미지를 디스플레이 디바이스(135) 상에 디스플레이한다.
도 7은 본 발명의 일실시예에 따른 스테레오 이미지를 디스플레잉하는 예시적인 방법을 예시한 흐름도를 도시한다.
도 7을 참조하면, 단계(101)에서, 스테레오 이미지 획득 유닛(110)은 내부 또는 외부 소스로부터 제 1 이미지에 대한 제 1 스테레오 이미지를 획득한다.
단계(102)에서, 스테레오 이미지 획득 유닛(110)은 내부 또는 외부 소스로부터 제 2 이미지에 대한 제 2 스테레오 이미지를 획득한다.
단계(103)에서, 경계 생성 유닛(120)은 PIP 모드에서 제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성한다. 경계는 전술한 바와 같이 경계 자체일 수 있거나 경계 영역으로 구성될 수 있다.
단계(104)에서, 디스플레잉 유닛(130)은 제 1 이미지, 제 2 이미지 및 경계 또는 경계 영역을 조합한다. 예를 들어, 디스플레잉 유닛(130)은 제 2 이미지 및 경계 또는 경계 영역을 제 1 이미지에서의 미리 결정된 위치상에 중첩시킬 수 있다.
단계(105)에서, 디스플레잉 유닛(130)은 조합된 스테레오 이미지를 디스플레이 디바이스 상에 디스플레이한다.
본 발명의 다른 실시예에 따른 입체 디스플레이 장치는 도 8 내지 도 10을 참조하여 기재된다. 이 실시예에서, 제 1 및 제 2 이미지에서 인접한 컨텐츠의 깊이에 기초하여 극적으로 변하는 깊이를 갖는 3D 경계가 사용된다.
도 8은 본 발명의 일실시예에 따른 3D 경계의 깊이를 극적으로 변화시키는 예시적인 방법을 도시한 흐름도이다.
단계(401)에서, 스테레오 이미지는 메인 이미지 및 서브-이미지 모두에 대해 얻어진다. 상(imagery) 컨텐츠에 대해, 이들은 좌측 및 우측 눈의 화면에 대해 이미지의 쌍일 수 있다. 컴퓨터 그래픽에 대해, 3D 모델 및 렌더링(rendering) 방법(카메라 분리 및 초점 길이를 포함)이 얻어진다. 그런 후에, 메인 이미지와 서브-이미지 사이의 경계에 인접한 컨텐츠가 결정된다. 도 5b에 도시된 바와 같이, 메인 이미지(301)에서의 컨텐츠(311)와 서브-이미지(302)에서의 컨텐츠(313) 사이의 좁거나 넓은 영역이 결정된다. 예를 들어, 컨텐츠(311)는 경계(312)로부터 픽셀의 미리 결정된 수의 두께를 갖는 경계(312)를 외부적으로 둘러싸는 메인 이미지(301)에서의 외부 영역으로서 결정될 수 있다. 컨텐츠(313)는 경계(312)로부터 픽셀의 미리 결정된 수의 두께를 갖는 경계(312)를 내부적으로 둘러싸는 서브-이미지(302)에서의 내부 영역으로서 결정될 수 있다. 이 경우에, 좁은 영역은 컨텐츠(311), 경계(312) 및 컨텐츠(313)로 구성되는 영역으로서 결정될 수 있다. 또한, 컨텐츠(311 및 313)의 두께는 예를 들어, 컨텐츠(311 및 313)의 디스플레이 크기 및/또는 유사성에 따라 극적으로 결정될 수 있다. 또한, 컨텐츠(311 및 313)의 두께는 사용자의 조작을 통해 조정될 수 있다. 사용자가 메인 이미지(301) 및 서브-이미지(302)를 성공적으로 구별할 수 없으면, 컨텐츠(311 및 313)의 두께는 더 크게 설정될 수 있다. 하지만, 본 발명에 따른 좁은 영역의 결정은 이에 한정되지 않고, 임의의 다른 적절한 결정 방법이 적용될 수 있다.
단계(402)에서, 메인 이미지(301) 및 서브-이미지(302) 모두에서 경계(312)에 인접한 컨텐츠(311 및 313)에 대한 깊이 맵이 얻어진다. 깊이 맵은 임의의 적절한 종래의 방법으로 얻어질 수 있다. 상 컨텐츠에 대해, 각 픽셀의 깊이는 캡처 시간에 리코딩될 수 있다. 스테레오 이미지 쌍이 깊이 정보 없이 캡처되었으면, 블록 매칭 및 위상 상관을 포함하는, 이러한 깊이 맵을 얻기 위한 여러 기존의 방법이 종래 기술에 존재한다. 컴퓨터 그래픽을 이용하여 생성되는 컨텐츠에 대해, 깊이 맵은, 3D 모델 및 렌더링 방법의 지식이 주어지면, 분석 계산을 통해 얻어질 수 있다.
단계(403)에서, 경계에 인접한 컨텐츠(311 및 313)에 대한 깊이 범위가 계산된다. 도 9에 도시된 바와 같이, 깊이 범위는 경계(312)에 인접한 컨텐츠(311 및 313)의 최소 깊이(dmin) 및 최대 깊이(dmax)를 나타낸다.
깊이 범위에 기초하여, 경계(312)의 깊이 맵은 단계(404)에서 결정된다. 경계(312)의 깊이 맵을 결정하기 위한 많은 방법이 있다. 도 9는 깊이와 픽셀의 좌표 사이의 선형 매핑의 예를 도시한다. 도 10a 및 도 10b는, 경계(610)의 부분이 2개의 이미지를 수평으로 분리하는 경우를 도시한다. 메인 이미지(601) 및 서브-이미지(602)를 수평으로 분리하는 경계(610) 상의 픽셀(620)에 대해, 픽셀(620)의 깊이(d)는 수학식 1로서 x-좌표(x)에 의해 계산될 수 있다:
Figure pct00001
여기서 xmin 및 xmax는 각각 수평 라인(630) 상의 픽셀의 최소 및 최대 x-좌표이고, dmin 및 dmax는 단계(403)에서 얻어진 깊이 범위에서, 각각 최소 및 최대 깊이 값이다. 입체 디스플레이에서, 경계(610)의 부분은 2개의 이미지 사이에 벽과 같이 보일 것이고, 이것은 도 10b에 도시된 바와 같이, 시청자가 서브-이미지(602)의 컨텐츠와 메인 이미지(601)의 컨텐츠를 혼동하는 것을 방지할 것이다.
단계(405)에서, 시청자에게 벽과 같이 보이는 추가 경계는 단계(404)에서 얻어진 깊이 맵에 따라 렌더링되고 디스플레이된다.
본 발명의 다른 실시예에 따른 입체 디스플레이 장치는 도 11 및 도 12를 참조하여 기재된다. 이 실시예에서, 서브-이미지의 깊이는, 서브-이미지 주위의 메인 이미지의 모든 픽셀이 경계에 인접한 서브-이미지의 픽셀의 뒤 또는 전면에 항상 존재하는 것을 보장하기 위해 극적으로 조정된다. 그 결과, 시청자가 하나의 이미지의 컨텐츠와 다른 이미지의 컨텐츠를 혼돈하지 않도록 2개의 이미지의 경계상에 명백한 깊이 변화가 있다.
이 실시예에서, 2개의 이미지를 분리하기 위해 그러한 추가 경계를 제공하는 것 대신에, 본 발명의 몇몇 실시예에서, 서브-이미지(602)의 깊이는, 서브-이미지(602) 주위의 메인 이미지(601)의 모든 픽셀이 경계(610)에 인접한 서브-이미지(602)의 픽셀의 뒤 또는 전면에 항상 존재하는 것을 보장하기 위해 극적으로 조정된다. 그 결과, 시청자가 하나의 이미지의 컨텐츠와 다른 이미지의 컨텐츠를 혼돈하지 않도록 2개의 이미지의 경계(610) 상의 명백한 깊이 변화가 있다.
도 11은 본 발명의 다른 실시예에 따라 3D 경계의 깊이를 극적으로 변화시키는 예시적인 방법의 흐름도를 도시한다.
도 11을 참조하면, 단계(710)에서, 스테레오 이미지는 각각 메인 이미지 및 서브-이미지 모두에 대해 얻어진다. 상 컨텐츠에 대해, 이들은 좌측 및 우측 눈 화면을 위한 이미지의 쌍이 있을 수 있다. 컴퓨터 그래픽에 대해, 3D 모델 및 렌더링 방법(카메라 분리 및 초점 길이를 포함)이 얻어진다. 그런 후에, 메인 이미지와 서브-이미지 사이의 경계에 인접한 컨텐츠가 각각 결정된다. 도 12에 도시된 바와 같이, 메인 이미지(801)에서의 컨텐츠(811) 및 서브-이미지(802)에서의 컨텐츠(813)의 좁은 영역이 결정된다.
단계(702)에서, 2개의 이미지의 경계 영역의 컨텐츠(811 및 813)에 대한 깊이 맵이 각각 얻어진다. 상 컨텐츠에 대해, 각 픽셀의 깊이는 캡처 시간에 리코딩될 수 있다. 스테레오 이미지 쌍이 깊이 정보 없이 캡처되었으면, 블록 매칭 및 위상 상관을 포함하는, 깊이 맵을 얻기 위한 여러 기존의 방법이 종래 기술에 존재한다. 컴퓨터 그래픽을 이용하여 생성되는 컨텐츠에 대해, 깊이 맵은, 3D 맵 및 렌더링 방법의 지식이 주어지면, 분석 계산을 통해 얻어질 수 있다.
단계(703)에서, 2개의 이미지의 경계 영역의 컨텐츠(811 및 813)에 대한 깊이 범위가 각각 계산된다. 메인 이미지(801)의 경계 영역에 대한 깊이 범위는 최소 깊이(dmain _ min) 및 최대 깊이(dmain _ max)에 의해 한정되고, 서브-이미지(802)의 경계 영역에 대한 깊이 범위는 최소 깊이(dsub _ min) 및 최대 깊이(dsub _ max)에 의해 한정된다.
그런 후에, 단계(704)에서, 깊이 조정치(δ)의 양은 깊이 차이의 임계치(dthreshold)에 기초하여 결정된다. 깊이 차이의 임계치(dthreshold)는, 서브-이미지(802)가 특정 도(degree)에서 메인 이미지(801)의 전면 또는 뒤에 존재하는 것을 보장한다. 깊이 차이의 임계치(dthreshold)는 사용자에 의해 입력될 수 있거나, 시스템에 의해 사전 한정될 수 있다.
서브-이미지(802)가 메인 이미지(801)의 전면에 있도록 설계되는 경우, 깊이 조정치(δ)는 다음과 같이 계산될 수 있다:
Figure pct00002
또는
Figure pct00003
서브-이미지(802)가 메인 이미지(801) 뒤에 있도록 설계되는 경우, 깊이 조정치(δ)는 다음과 같이 계산될 수 있다:
Figure pct00004
또는
Figure pct00005
단계(705)에서, 서브-이미지(802)의 깊이가 조정된다. 서브-이미지(802)가 메인 이미지(801)의 전면에 있도록 설계되는 경우, 서브-이미지(802)의 각 픽셀의 깊이는 깊이 조정치(δ)의 양만큼 증가될 것이다. 서브-이미지(802)가 메인 이미지(801) 뒤에 있도록 설계되는 경우, 서브-이미지(802)의 각 픽셀의 깊이는 깊이 조정치(δ)의 양만큼 감소될 것이다.
그런 후에, 메인 이미지(801) 및 조정된 서브-이미지(802)는 단계(706)에서 렌더링되고 디스플레이될 것이다.
본 발명의 다른 실시예에 따른 입체 디스플레이 장치는 도 13 내지 도 15를 참조하여 기재된다. 이 실시예에서, 서브-이미지에서의 몇몇 픽셀은 메인 이미지에서의 픽셀에 의해 숨겨져서, 시각적 효과는 2개의 이미지 사이의 경계에 인접한 컨텐츠의 더 입체적인 화면을 시청자에게 제공함으로써 개선된다. 전형적인 2D PIP 기술을 입체 디스플레이 장치에 직접 적용할 때, 다른 주요 문제는, 시청자가 2개의 이미지의 경계에 인접한 몇몇 컨텐츠에 대한 입체 화면을 볼 수 없다는 것이다.
도 13a 및 도 13b는 각각 3D 장면의 좌측 눈 이미지 및 우측 눈 이미지를 도시한다. 메인 이미지(901)에서 직사각형 물체의 좌측 화면(911)은 좌측 눈 이미지에 보여진다. 하지만, 메인 이미지(901)에서 직사각형 물체의 우측 화면(912)은 우측 눈 이미지에서의 서브-이미지(902)의 디스플레이 지역 내에 있다. 서브-이미지(902) 없이, 직사각형 물체의 좌측 화면(911) 및 우측 화면(912)은 각각 시청자의 좌측 눈 및 우측 눈에 의해 시청될 것이다. 그 결과, 직사각형 물체의 입체 화면은 시청자의 뇌에서 생성될 것이고, 시청자는 스크린 안으로 가라앉은 직사각형 물체를 볼 것이다. 서브-이미지(902)가 디스플레이될 때, 시청자는 자신의 좌측 눈에 의해 직사각형 물체의 좌측 화면만을 볼 수 있다. 그러므로, 시청자는 직사각형 물체의 입체 화면을 볼 수 없을 것이다. 시청자는 스크린 안으로 가라앉은 것보다 단지 스크린 상에 있는 직사각형 물체를 볼 것이다.
동일한 문제는, 물체의 좌측 화면이 서브-이미지(901)에 의해 폐색될 때 발생할 것이다. 도 13a에 도시된 바와 같이, 원형 물체의 좌측 화면(921)은 서브-이미지(902)의 디스플레이 지역에 존재한다. 서브-이미지(902) 없이, 원형 물체의 좌측 화면(921) 및 우측 화면(922)은 각각 시청자의 좌측 눈 및 우측 눈에 의해 시청될 것이다. 그 결과, 원형 물체의 입체 화면은 시청자의 뇌에서 생성될 것이고, 시청자는 스크린 밖에 있는 원형 물체를 볼 것이다. 서브-이미지가 디스플레이될 때, 시청자는 자신의 우측 눈에 의해 원형 물체의 우측 화면만을 볼 수 있다. 그러므로, 시청자는 원형 물체의 입체 화면을 볼 수 없을 것이다. 시청자는 스크린 밖이 아니라 스크린 바로 위의 원형 물체를 볼 것이다.
더 현실적인 시각적 효과를 추구하기 위해, 본 발명의 이 실시예에서, 경계에 인접한 메인 이미지의 컨텐츠에 대한 입체 시각의 손실을 감소시키는 방법이 사용된다. 방법은 메인 이미지와 서브-이미지 사이의 경계에 인접한 컨텐츠를 다루고, 각 픽셀의 어떤 화면이 무시되어야 하고 디스플레이되지 않을 것인지를 결정한다.
도 14b에 도시된 바와 같이, 메인 이미지(1001)에서 직사각형 물체의 우측 화면(1012)은 서브-이미지(1002)에 의해 폐색되고, 도 14c에서, 서브-이미지(1002)에서 삼각형 물체의 좌측 화면(1021)은 캡처 또는 후-처리 절차 동안 절단되는데, 이는 이것이 범주에서 벗어나기 때문이다. 그러므로, 시청자는 직사각형 물체 및 삼각형 물체 모두에 대한 입체 화면을 볼 수 없을 것이다. 하지만, 메인 이미지(1001)의 직사각형 물체의 우측 화면(1012)이 서브-이미지(1002)의 삼각형 물체의 우측 화면(1022)과 동일한 스크린 위치에서 디스플레이되는 것을 시스템이 발견하면, 시스템은 서브-이미지(1002)의 삼각형 물체의 우측 화면(1022)을 무시하면서, 서브 이미지(1002)의 디스플레이 지역에서 메인 이미지(1001)의 직사각형 물체의 우측 화면(1012)을 디스플레이할 것이다. 그러므로, 시청자는 삼각형 물체의 어떠한 화면도 볼 수 없을 것이다. 하지만, 시청자는 직사각형 물체의 좌측 화면 및 우측 화면 모두를 볼 수 있다. 그 결과, 삼각형 물체는 숨겨지면서, 직사각형 물체의 입체 화면은 시청자에 의해 시청된다. 삼각형 물체는 서브-이미지(1002)의 에지에 있고, 서브-이미지(1002)의 해상도는 일반적으로 낮다. 그러므로, 삼각형 물체의 분실은 시청자의 시각적 효과에 영향을 거의 주지 않는다. 하지만, 직사각형 물체는, 해당 영역(ROI)이 일반적으로 위치되는 메인 이미지(1001)의 중심에 있고, 메인 이미지(1001)의 해상도는 일반적으로 높다. 그러므로, 직사각형 물체의 입체 화면은 시청자의 시각적 효과를 크게 개선시킬 것이다.
도 15는 본 발명의 일실시예에 따른 예시적인 방법의 흐름도이다.
도 15를 참조하면, 단계(1101)에서, 메인 이미지(1001)의 좌측 화면 및 우측 화면 각각에 대해, 메인 이미지(1001)와 서브-이미지(1002) 사이의 경계에 인접한 픽셀(pm1)이 얻어진다
그런 후에, 단계(1102)에서, 시스템은 메인 이미지(1001)의 제 2 화면에서의 픽셀(pm1)에 대한 매칭 픽셀(pm2)을 탐색한다. 매칭 픽셀(pm2)을 검색하는 여러 기존의 방법이 종래 기술에 존재한다. 매칭 픽셀(pm2)이 발견되지 않았으면, 시스템은 경계에 인접한 메인 이미지(1001)의 다른 픽셀을 계속해서 다룬다. 그렇지 않으면, 시스템은, 2개의 픽셀 중 하나가 서브-이미지(1002)의 디스플레이 지역에 존재하는 한편, 다른 픽셀은 그렇지 않은지를 체크할 것이다. 제 1 화면에서의 픽셀(pm1)이 서브-이미지(1002)의 디스플레이 지역에 없는 한편, 제 2 화면에서의 매칭 픽셀(pm2)이 존재하는 지를 시스템이 단계(1103)에서 발견하면, 서브-이미지(1002)의 제 2 화면에서의 픽셀(pm2)과 동일한 위치에서의 픽셀(pm2)이 단계(1104)에서 얻어질 것이다.
그런 후에, 시스템은 단계(1105)에서 서브-이미지(1002)의 제 1 화면에서의 픽셀(ps2)에 대한 매칭 픽셀(ps1)을 탐색할 것이다. 서브-이미지(1002)의 제 1 화면에서의 픽셀(ps2)에 대한 매칭 픽셀(ps1)이 존재하지않으면, 시스템은 단계(1106)에서 픽셀(ps2)을 무시하는 한편, 픽셀(pm2)을 디스플레이할 것이다. 즉, 픽셀(ps2)은 픽셀(pm2)에 의해 숨겨진다.
다른 한 편으로, 제 1 화면에서의 픽셀(pm1)이 서브-이미지(1002)의 디스플레이 지역에 있는 한편, 제 2 화면에서의 매칭 픽셀(pm2)이 그 안에 없는지를 시스템이 단계(1107)에서 발견하면, 서브-이미지(1002)의 제 1 화면에서의 픽셀(pm1)과 동일한 위치에서의 픽셀(ps1)은 단계(1108)에서 얻어질 것이다.
그런 후에, 시스템은 단계(1109)에서 서브-이미지(1002)의 제 2 화면에서의 픽셀(ps1)에 대한 매칭 픽셀(ps2)을 탐색할 것이다. 서브-이미지의 제 2 화면에서의 픽셀(ps1)에 대한 매칭 픽셀(ps2)이 존재하지 않으면, 시스템은 단계(1110)에서 픽셀(ps1)을 무시하는 한편, 픽셀(pm1)을 디스플레이할 것이다. 즉, 픽셀(ps1)은 픽셀(pm1)에 의해 숨겨진다.
본 발명은 특정 실시예를 참조하여 설명되었지만, 실시예는 간단히 예시적이고, 변경, 변형, 변동 및 교체는 당업자에 의해 연구될 수 있다. 상기 설명에서, 몇몇 특정한 수치값은 본 발명의 더 양호한 이해를 위해 사용된다. 하지만, 특별히 표시되지 않으면, 이들 수치값은 단순히 예시적이고, 임의의 다른 적합한 값이 사용될 수 있다. 실시예 또는 항목의 분리는 본 발명에 필수적이지 않고, 2개 이상의 실시예 또는 항목은 필요한 경우 조합될 수 있다.
대안적으로, 항목은 다른 항목(상반되지 않는 경우)에 적용될 수 있다. 설명의 편리함을 위해, 실시예에 따른 입체 디스플레이 장치는 기능 블록도를 참조하여 설명되었지만, 입체 디스플레이 장치는 하드웨어, 소프트웨어 또는 이들의 조합으로 구현될 수 있다. 소프트웨어는 RAM(판독 액세스 메모리), 플래쉬 메모리, ROM(판독 전용 메모리), EPROM, EEPROM, 레지스터, 하드 디스크 드라이브(HDD), 제거가능 디스크, CD-ROM, 데이터베이스 및 서버와 같은 임의의 적절한 저장 매체에 저장될 수 있다.
본 발명은 상기 실시예에 한정되지 않고, 변경, 변형, 변동 및 교체는 본 발명의 사상에서 벗어나지 않고도 당업자에 의해 이루어질 수 있다.

Claims (11)

  1. 입체 디스플레이 장치로서,
    제 1 이미지에 대한 제 1 스테레오 이미지와, 제 2 이미지에 대한 제 2 스테레오 이미지를 획득하도록 구성된 스테레오 이미지 획득 유닛과;
    제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성하도록 구성된 경계 생성 유닛과;
    제 2 스테레오 이미지 및 생성된 경계와 제 1 스테레오 이미지를 조합하고, 조합된 스테레오 이미지를 디스플레이하도록 구성된 디스플레잉 유닛을
    포함하는, 입체 디스플레이 장치.
  2. 제 1항에 있어서, 경계 생성 유닛은 경계에 인접한 컨텐츠를 포함하는 경계 영역을 결정하도록 구성된 경계 영역 결정 유닛을 더 포함하고, 경계 영역은 경계에 인접한 제 1 및 제 2 스테레오 이미지에서의 픽셀의 미리 결정된 수를 포함하는, 입체 디스플레이 장치.
  3. 제 2항에 있어서, 경계 생성 유닛은 경계 영역에서의 픽셀의 깊이 범위와 각 픽셍의 좌표에 기초하여 경계 영역에서의 픽셀의 깊이를 결정함으로써 깊이 정보를 갖는 경계 영역을 생성하도록 구성된 경계 깊이 결정 유닛을 더 포함하는, 입체 디스플레이 장치.
  4. 제 3항에 있어서, 경계 깊이 결정 유닛은 다음의 수학식에 따라 픽셀의 깊이를 결정하고,
    Figure pct00006

    여기서, xmin 및 xmax는 각각 픽셀의 최소 및 최대 x-좌표이고, dmin 및 dmax는 각각 깊이 범위에서의 최소 및 최대 깊이 값인, 입체 디스플레이 장치.
  5. 제 2항에 있어서, 경계 생성 유닛은, 제 2 이미지가 제 1 이미지의 전면 또는 뒤에 있는 것으로 보이도록 경계 영역에서의 픽셀의 깊이를 조정함으로써 깊이 정보를 갖는 경계 영역을 생성하도록 구성된 경계 깊이 결정 유닛을 더 포함하는, 입체 디스플레이 장치.
  6. 제 5항에 있어서, 경계 깊이 결정 유닛은 제 2 이미지를 제 1 이미지의 전면에 놓기 위해 제 1 이미지에서의 경계 영역에서 최대 깊이와 제 2 이미지에서의 경계 영역에서 최소 깊이로부터 유도된 깊이 조정치 양만큼 제 2 이미지에서 경계 영역에서의 픽셀의 깊이를 증가시키는, 입체 디스플레이 장치.
  7. 제 5항에 있어서, 경계 깊이 결정 유닛은 제 2 이미지를 제 1 이미지의 뒤에 놓기 위해 제 1 이미지에서의 경계 영역에서 최소 깊이와 제 2 이미지에서의 경계 영역에서 최대 깊이로부터 유도된 깊이 조정치 양만큼 제 2 이미지에서 경계 영역에서의 픽셀의 깊이를 감소시키는, 입체 디스플레이 장치.
  8. 제 2항에 있어서, 디스플레잉 유닛은, 경계 영역에서의 어떤 픽셀이 매칭 컨텐츠의 잠재적 관계에 기초하여 제 1 스테레오 이미지 또는 제 2 스테레오 이미지에서 디스플레이될 것인지를 결정하는, 입체 디스플레이 장치.
  9. 스테레오 이미지를 디스플레이하는 방법으로서,
    제 1 이미지에 대한 제 1 스테레오 이미지와, 제 2 이미지에 대한 제 2 스테레오 이미지를 획득하는 단계와;
    제 2 이미지로부터 제 1 이미지를 분리하기 위해 경계를 생성하는 단계와;
    제 2 스테레오 이미지 및 생성된 경계와 제 1 스테레오 이미지를 조합하는 단계와;
    조합된 스테레오 이미지를 디스플레이하는 단계를
    포함하는, 스테레오 이미지를 디스플레이하는 방법.
  10. 제 9항에 있어서, 경계를 생성하는 단계는 경계에 인접한 컨텐츠를 포함하는 경계 영역을 결정하는 단계를 더 포함하고, 경계 영역은 경계에 인접한 제 1 및 제 2 스테레오 이미지에서의 픽셀의 미리 결정된 수를 포함하는, 스테레오 이미지를 디스플레이하는 방법.
  11. 제 9항에 있어서, 경계를 생성하는 단계는, 경계 영역에서의 픽셀의 깊이 범위와 각 픽셀의 좌표에 기초하여 경계 영역에서의 픽셀의 깊이를 결정함으로써 깊이 정보를 갖는 경계 영역을 생성하는 단계를 더 포함하는, 스테레오 이미지를 디스플레이하는 방법.
KR1020157016756A 2012-12-24 2012-12-24 입체 이미지를 디스플레이하는 장치 및 방법 KR20150102014A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2012/087346 WO2014100959A1 (en) 2012-12-24 2012-12-24 Apparatus and method for displaying stereoscopic images

Publications (1)

Publication Number Publication Date
KR20150102014A true KR20150102014A (ko) 2015-09-04

Family

ID=51019645

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157016756A KR20150102014A (ko) 2012-12-24 2012-12-24 입체 이미지를 디스플레이하는 장치 및 방법

Country Status (6)

Country Link
US (1) US10091495B2 (ko)
EP (1) EP2936805A4 (ko)
JP (1) JP6085688B2 (ko)
KR (1) KR20150102014A (ko)
CN (1) CN104871533A (ko)
WO (1) WO2014100959A1 (ko)

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120167136A1 (en) * 1994-08-31 2012-06-28 Gemstar Development Corporation Method and apparatus for displaying television programs and related text
KR101379337B1 (ko) 2007-12-04 2014-03-31 삼성전자주식회사 삼차원적 pip 영상을 제공하는 영상기기 및 이를 적용한영상표시방법
MX2011002553A (es) 2008-09-18 2011-04-04 Panasonic Corp Dispositivo de reproduccion de video estereoscopico y dispositivo de presentacion visual de video estereoscopico.
CN101742172A (zh) * 2008-11-06 2010-06-16 纬创资通股份有限公司 具有立体显示功能的子母画面显示装置及画面显示方法
WO2010070567A1 (en) 2008-12-19 2010-06-24 Koninklijke Philips Electronics N.V. Method and device for overlaying 3d graphics over 3d video
AU2010215135B2 (en) * 2009-02-17 2016-05-12 Koninklijke Philips Electronics N.V. Combining 3D image and graphical data
US9185328B2 (en) * 2009-06-08 2015-11-10 Lg Electronics Inc. Device and method for displaying a three-dimensional PIP image
GB2473282B (en) 2009-09-08 2011-10-12 Nds Ltd Recommended depth value
KR101627214B1 (ko) * 2009-11-12 2016-06-03 엘지전자 주식회사 영상표시장치 및 그 동작방법
KR20110053159A (ko) 2009-11-13 2011-05-19 삼성전자주식회사 비디오 부가 재생 정보의 3차원 재생을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치
KR101631451B1 (ko) * 2009-11-16 2016-06-20 엘지전자 주식회사 영상표시장치 및 그 동작방법
EP2561676A1 (en) * 2010-04-20 2013-02-27 Entropic Communications Inc. System and method to display a user interface in a three-dimensional display
US8537201B2 (en) * 2010-10-18 2013-09-17 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
WO2012055892A1 (en) * 2010-10-29 2012-05-03 Thomson Licensing Method for generation of three-dimensional images encrusting a graphic object in the image and an associated display device
JP2012186652A (ja) * 2011-03-04 2012-09-27 Toshiba Corp 電子機器、画像処理方法及び画像処理プログラム
JP5081316B1 (ja) * 2011-06-08 2012-11-28 シャープ株式会社 立体映像表示装置

Also Published As

Publication number Publication date
CN104871533A (zh) 2015-08-26
US20150341622A1 (en) 2015-11-26
EP2936805A4 (en) 2016-07-20
JP2016507936A (ja) 2016-03-10
JP6085688B2 (ja) 2017-02-22
US10091495B2 (en) 2018-10-02
EP2936805A1 (en) 2015-10-28
WO2014100959A1 (en) 2014-07-03

Similar Documents

Publication Publication Date Title
US9445075B2 (en) Image processing apparatus and method to adjust disparity information of an image using a visual attention map of the image
US9049428B2 (en) Image generation system, image generation method, and information storage medium
US8564645B2 (en) Signal processing device, image display device, signal processing method, and computer program
JP4903240B2 (ja) 映像処理装置、映像処理方法及びコンピュータプログラム
US20150002636A1 (en) Capturing Full Motion Live Events Using Spatially Distributed Depth Sensing Cameras
US8913107B2 (en) Systems and methods for converting a 2D image to a 3D image
US9791922B2 (en) User interface control device, user interface control method, computer program and integrated circuit
US8866887B2 (en) Computer graphics video synthesizing device and method, and display device
US11050997B2 (en) Dynamic display system capable of generating images corresponding to positions of users
US11017587B2 (en) Image generation method and image generation device
US9495795B2 (en) Image recording device, three-dimensional image reproducing device, image recording method, and three-dimensional image reproducing method
KR101212223B1 (ko) 촬영장치 및 깊이정보를 포함하는 영상의 생성방법
KR101192121B1 (ko) 양안시차 및 깊이 정보를 이용한 애너그리프 영상 생성 방법 및 장치
KR101754976B1 (ko) 적층형 홀로그램용 콘텐츠 변환방법 및 변환장치
KR20150102014A (ko) 입체 이미지를 디스플레이하는 장치 및 방법
JP5791328B2 (ja) 3d画像処理方法及び3d画像処理装置
KR101003060B1 (ko) 입체영상 제작을 위한 동영상 프레임 생성방법
KR101671739B1 (ko) 가상 프레임을 이용한 2차원 영상의 입체 효과 생성 장치 및 그 방법
Nguyen Hoang et al. A real-time rendering technique for view-dependent stereoscopy based on face tracking
KR102145017B1 (ko) 3d 가상스튜디오시스템 및 3d 가상스튜디오 영상합성방법
Tian et al. A trellis-based approach for robust view synthesis
Priya et al. 3d Image Generation from Single 2d Image using Monocular Depth Cues
JP2012169822A (ja) 画像処理方法及び画像処理装置
Deng et al. Automatic depth map estimation of monocular indoor environments
Rhee et al. Accurate stereo view synthesis for an autostereoscopic 3D display

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application