KR20120011161A - 3차원 표시를 위한 이미지를 변경하는 장치 및 방법 - Google Patents

3차원 표시를 위한 이미지를 변경하는 장치 및 방법 Download PDF

Info

Publication number
KR20120011161A
KR20120011161A KR1020100072800A KR20100072800A KR20120011161A KR 20120011161 A KR20120011161 A KR 20120011161A KR 1020100072800 A KR1020100072800 A KR 1020100072800A KR 20100072800 A KR20100072800 A KR 20100072800A KR 20120011161 A KR20120011161 A KR 20120011161A
Authority
KR
South Korea
Prior art keywords
image
area
changing
region
color
Prior art date
Application number
KR1020100072800A
Other languages
English (en)
Inventor
이주원
차태환
권오윤
이봉근
신준형
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100072800A priority Critical patent/KR20120011161A/ko
Priority to US12/861,475 priority patent/US8619130B2/en
Publication of KR20120011161A publication Critical patent/KR20120011161A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/15—Processing image signals for colour aspects of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

이미지를 변경하기 위한 디스플레이장치와 방법이 제공된다. 본 장치는 왼쪽 이미지 및 오른쪽 이미지를 수신하는 입력부와; 수신된 왼쪽 이미지 및 수신된 오른쪽 이미지를 변경하고, 변경된 왼쪽 이미지 및 변경된 오른쪽 이미지를 포함하는 이미지 신호를 출력하는 이미지 변경부를 포함하며, 왼쪽 이미지는 이 왼쪽 이미지의 경계 영역에 근접한 제1영역의 변화에 의하여 변경되며, 오른쪽 이미지는 이 오른쪽 이미지의 경계 영역에 근접한 제2영역의 변화에 의하여 변경되는 것을 특징으로 한다.

Description

3차원 표시를 위한 이미지를 변경하는 장치 및 방법 {APPARATUS AND METHOD FOR ALTERING IMAGES FOR THREE-DIMENSIONAL DISPLAY}
본 발명은 3차원 이미지화에 관한 장치 및 방법에 관한 것으로, 상세하게는 3차원 표시를 위해 2차원 이미지들을 변경하기 위한 장치 및 그 방법에 관한 것이다.
3차원 이미지화는 한 쌍의 2차원 이미지들로부터 3차원적인 착각을 생성하는 것을 수반할 수 있다. 인간의 깊이 지각을 향상시키는 가장 쉬운 방법들 중 한 가지는 보는 사람의 눈에 동일한 사물의 두 개의 다른 이미지들, 즉, 두 개의 시야를 제공하는 것인데, 이는 양안의 시각에서 두 눈이 자연스럽게 받아들일 수 있는 시야와 같은 양만큼 달라진다.
예를 들어, 얼터네이트-프레임 시퀀싱 (alternate-frame sequencing) 시스템은 왼쪽 및 오른쪽 이미지를 기록하기 위하여 두 개의 카메라들을 사용할 수 있다. 기록된 왼쪽 및 오른쪽 이미지들은 각각 왼쪽 및 오른쪽 눈을 빠르게 연속으로 열고 닫는 셔터 안경을 착용한 시청자에게 표시될 수 있다. 시청자의 뇌는 보여지는 왼쪽 및 오른쪽 이미지들 간의 근소한 차이에 기초하여 깊이를 지각할 수 있다. 결과적으로, 시청자는 왼쪽의 2차원 이미지와 오른쪽의 2차원 이미지에 기초하여 3차원 장면을 지각할 수 있다.
도 1은 한 쌍의 사람 눈이 어떻게 장면/사물을 지각할 수 있는지의 예를 나타낸다. 도 1에 도시한 바와 같이, 한 쌍의 눈(101, 102)은 각각 시야 범위(103, 104)를 갖는다. 이 예에서, 시청자는 영역들(110, 111, 112)을 포함하는 장면(113)을 본다. 개별적인 눈(101, 102)이 각각 갖는 한정적 시야 범위의 결과로서, 각 눈(101, 102)은 장면(113)의 다른 이미지를 지각한다. 여기서, 왼쪽 눈(101)은 영역들(110, 111)을 지각하나, 오른쪽 눈(102)는 영역들(110, 112)을 지각한다. 즉, 왼쪽 눈(101)은 그 범위가 시야 범위(103)에 제한되기 때문에 영역(112)은 지각할 수 없다. 마찬가지로, 오른쪽 눈(102)은 그 범위가 시야 범위(104)에 제한되기 때문에 영역(111)은 지각할 수 없다. 그럼에도 불구하고, 이 예시에서 시청자는 시야 범위들(103, 104)이 겹치는 장면(113)의 영역인 영역(110)의 장면(113) 내에서 깊이를 지각할 수 있다. 이는, 위에 말한 바와 같이, 시청자가 보는 대로 왼쪽과 오른쪽 이미지들 간에 지각되는 근소한 차이로 인해 일어난다.
그러나, 왼쪽과 오른쪽 이미지들 사이에 다소 큰 차이가 있을 수 있다. 다시 도 1을 참조하면, 왼쪽 이미지 입력부(101)는 영역(112)을 지각할 수 없고, 오른쪽 이미지 입력부(102)는 영역(111)을 지각할 수 없다. 여기서, 일부 요소들은 왼쪽 이미지에는 있으나, 오른쪽 이미지에는 없다(그 반대도 동일하다). 도 1에 도시한 바와 같이, 이러한 차이는 왼쪽과 오른쪽 이미지들의 각 경계에서 나타날 수 있다. 이러한 주요한 차이의 결과로서, 시청자는 표시된 3차원 이미지 내의 그러한 특정 영역들에서 어떠한 깊이도 지각하지 못할 수 있다(예를 들어, 도 1의 예에서 영역들(111, 112)). 덧붙여, 시청자는 표시된 3차원 이미지 내에서 불편한 느낌을 줄 수 있는"혼선(cross-talk)" 또는 "잔상(ghosting)"현상을 경험할 수 있다. 따라서, 이러한 잠재적인 부정적인 부작용들을 최소화 및/또는 제거하는 것이 바람직하다.
본 발명의 실시예들은 상술한 불편함 또는 위에 언급하지 않은 다른 불편함을 극복한다. 또한, 본 발명은 상기 불편함을 극복하도록 요구되지 않으며, 본 발명의 실시예는 상술한 문제점들 어느 것도 극복하지 않을 수 있다.
본 발명의 실시예에 따른 이미지를 변경하는 장치는, 왼쪽 이미지 및 오른쪽 이미지를 수신하는 입력부; 및 상기 수신된 왼쪽 이미지 및 상기 수신된 오른쪽 이미지를 변경하고, 상기 변경된 왼쪽 이미지 및 상기 변경된 오른쪽 이미지를 포함하는 이미지 신호를 출력하는 이미지 변경부를 포함하고, 상기 왼쪽 이미지는 상기 왼쪽 이미지의 경계 영역에 근접한 제1영역의 변화에 의하여 변경되며, 상기 오른쪽 이미지는 상기 오른쪽 이미지의 경계 영역에 근접한 제2영역의 변화에 의하여 변경되는 것을 특징으로 한다.
여기서, 상기 왼쪽 이미지의 상기 경계 영역은 상기 왼쪽 이미지의 가장 왼쪽 경계에 인접하며, 상기 오른쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 가장 오른쪽 경계에 인접할 수 있다.
또한, 상기 이미지 변경부는, 상기 제1영역의 색깔 변화에 의해 상기 제1영역을 변화시키고, 상기 제2영역의 색깔 변화에 의해 상기 제2영역을 변화시킬 수 있다.
여기서, 상기 제1영역의 상기 색깔 변화는, 상기 제1영역에서 화소들의 색깔을 검은색으로 변경하는 것을 포함하고, 상기 제2영역의 상기 색깔 변화는, 상기 제2영역에서 화소들의 색깔을 검은색으로 변경할 수 있다.
또한, 상기 제1영역의 상기 색깔은 상기 제2영역의 상기 색깔과 실질적으로 동일할 수 있다.
또한, 상기 왼쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 상기 경계 영역과 크기 및 모양 중 적어도 어느 하나에 있어서 실질적으로 유사할 수 있다.
또한, 상기 왼쪽 이미지에서 상기 경계 영역 및 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 복수의 서브영역을 포함할 수 있다.
또한, 상기 왼쪽 이미지에서 상기 경계 영역 및 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 사용자에 의해 정의될 수 있다.
또한, 상기 왼쪽 이미지와 상기 오른쪽 이미지 사이의 차이를 판단하는 이미지 차이 판단부를 더 포함하고, 상기 차이는, 상기 왼쪽 이미지에는 있고 상기 오른쪽 이미지에는 없는 왼쪽 이미지 구성요소들 및 상기 오른쪽 이미지에는 있고 상기 왼쪽 이미지에는 없는 오른쪽 이미지 구성요소들에 기초하여 판단되며, 상기 이미지 변경부는 상기 판단된 차이에 기초하여, 상기 제1영역 및 상기 제2영역을 변화시킬 수 있다.
또한, 상기 이미지 변경부에 의해 출력된 상기 이미지 신호를 표시하는 디스플레이를 더 포함할 수 있다.
또한, 본 발명의 실시예에 따른 이미지를 변경하는 방법은, 왼쪽 이미지 및 오른쪽 이미지를 수신하는 단계와; 상기 왼쪽 이미지에서 경계 영역에 근접한 제1영역을 변화시켜, 상기 수신한 왼쪽 이미지를 변경하는 단계와; 상기 오른쪽 이미지에서 경계 영역에 근접한 제2영역을 변화시켜, 상기 수신한 오른쪽 이미지를 변경하는 단계와; 상기 변경된 왼쪽 이미지 및 상기 변경된 오른쪽 이미지를 포함하는 이미지 신호를 출력하는 단계를 포함하는 것을 특징으로 한다.
여기서, 상기 왼쪽 이미지에서 상기 경계 영역은 상기 왼쪽 이미지의 가장 왼쪽 경계에 인접하고, 상기 오른쪽 이미지에서 상기 경계 영역은 상기 오른쪽 이미지의 가장 오른쪽 경계에 인접할 수 있다.
또한, 상기 제1영역을 변경하는 단계는, 상기 제1영역의 색깔을 변경하는 단계를 포함하고, 상기 제2영역을 변경하는 단계는, 상기 제2영역의 색깔을 변경하는 단계를 포함할 수 있다.
여기서, 상기 제1영역의 색깔을 변경하는 단계는, 상기 제1영역에서 화소들의 색깔을 검은색으로 변경하는 단계를 포함하고, 상기 제2영역의 색깔을 변경하는 단계는, 상기 제2영역에서 화소들의 색깔을 검은색으로 변경하는 단계를 포함할 수 있다.
또한, 상기 제1영역의 상기 색깔은 상기 제2영역의 상기 색깔과 실질적으로 동일할 수 있다.
또한, 상기 왼쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 상기 경계 영역과 모양 및 크기 중 적어도 어느 하나에 있어 실질적으로 유사할 수 있다.
또한, 상기 왼쪽 이미지에서 상기 경계 영역과 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 복수의 서브영역을 포함할 수 있다.
또한, 상기 왼쪽 이미지에서 상기 경계 영역과 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 사용자에 의해 정의될 수 있다.
또한, 상기 왼쪽 이미지 및 상기 오른쪽 이미지 사이의 차이를 판단하는 단계를 더 포함하고, 상기 차이는, 상기 왼쪽 이미지에는 있고 상기 오른쪽 이미지에는 없는 제1구성요소 및 상기 오른쪽 이미지에는 있고 상기 왼쪽 이미지에는 없는 제2구성요소에 기초하여 판단되며, 상기 제1영역을 변경하는 단계 및 상기 제2영역을 변경하는 단계는, 상기 판단된 차이에 기초하여 수행될 수 있다.
또한, 상기 출력되는 이미지 신호를 표시하는 단계를 더 포함할 수 있다.
도 1은 양안 시각 시스템의 예시도,
도 2는 본 발명의 일 실시예에 따른 장치의 구성도,
도 3은 본 발명의 일 실시예에 따른 왼쪽과 오른쪽 이미지들을 나타내는 예시도,
도 4는 본 발명의 일 실시예에 따른 왼쪽과 오른쪽 이미지들을 나타내는 예시도,
도 5는 본 발명의 일 실시예에 따른 왼쪽과 오른쪽 이미지들을 나타내는 예시도,
도 6은 본 발명의 일 실시예에 따른 왼쪽과 오른쪽 이미지들을 나타내는 예시도,
도 7a 내지 도 7c는 이미지에 적용되는 다양한 변경 기법의 예시도,
도 8은 본 발명의 일 실시예에 따른 장치의 구성도,
도 9는 본 발명의 일 실시예에 따른 동작의 예시를 나타낸 제어 흐름도이다.
이하에서는 첨부도면을 참조하여 본 발명의 실시예들을 설명할 것이다. 설명함에 있어, 유사한 참조부호는 유사한 구성요소를 가리키며, 필요에 따라 반복설명은 피한다.
명세서에서, "하나의 실시예", "일 실시예", "보기 실시예" 등에 대한 언급은 설명한 실시예가 특별한 특징, 구조 또는 특성을 가질 수 있음을 가리키지만, 모든 실시예가 반드시 이러한 특별한 특징, 구조 또는 특성을 포함해야만 하는 것은 아니다. 그리고, 이러한 문구들이 반드시 동일한 실시예를 언급하는 것도 아니다. 나아가, 일 실시예와 관련하여 특별한 특징, 구조 또는 특성이 설명되었을 때는, 다른 실시예들과 관련하여 이러한 특징, 구조 또는 특성에 영향을 주는 당업자의 지식 내에 있는 것으로 받아들인다.
도 2는 본 발명의 일 실시예에 따른 장치를 보여준다. 도 2에 도시한 바와 같이, 장치(200)는 입력부(201), 이미지 변경부(202), 디스플레이(204) 및 스케일러(205)를 포함한다. 디스플레이(204)는 장치(200)의 광학 부품임을 가리키기 위하여 점선에 의해 연결된 것으로 나타내었다. 입력부(201)는 이미지 신호를 수신하는데, 이 이미지 신호는 왼쪽 이미지에 대응하는 이미지 데이터와 오른쪽 이미지에 대응하는 이미지 데이터를 포함할 수 있다. 이와 달리, 이미지 신호는 단순히 단일 이미지를 포함하는 2차원 이미지 신호일 수 있는데, 이러한 경우 입력된 2차원 신호는 깊이 추정기 또는 깊이 추정동작(미도시)을 이용하여 왼쪽 이미지와 오른쪽 이미지를 제공하도록 변경될 수 있다.
변경부(202)는 수신한 왼쪽 이미지 및 오른쪽 이미지를 받아, 왼쪽 이미지와 오른쪽 이미지 각각을 변경하여, 변경된 왼쪽 이미지 및 오른쪽 이미지를 출력한다. 변경부(202)는 오른쪽 이미지에 없는 왼쪽 이미지의 일부를 변경하고 왼쪽 이미지에 없는 오른쪽 이미지의 일부를 변경함으로써, 각각의 이미지들을 변경한다. 변경부(202)는 변경된 이미지들을 출력하고, 이는 이후 디스플레이(204)에 의해 표시된다.
도 3은 수신된 이미지들의 예를 나타낸다. 도 3에 도시한 바와 같이, 영역(311)은 왼쪽 이미지(301)에서만 나타난다. 마찬가지로, 영역(312)은 오른쪽 이미지(302)에서만 나타난다. 일반적으로, 이들은 한 이미지(예를 들어, 왼쪽 이미지)에 존재하나 다른 이미지(예를 들어, 오른쪽 이미지)에는 없는 영역들이다. 단순하게, 이들 영역들(311, 312)은 이후부터 "대상"영역이라 부를 것이다. 이 예에서, 대상 영역들(311, 312)은 각 이미지들(301, 302)의 경계 가까이에서(즉, 왼쪽 이미지의 가장 왼쪽 경계 가까이 및 오른쪽 이미지의 가장 오른쪽 경계 가까이에서) 나타난다.
대상 영역들(311, 312)을 원 또는 타원과 같은 어느 특정 모양에 맞출 필요는 없다. 예를 들어, 대상 영역들은 어떤 다각형 모양(즉, 직사각형, 정사각형, 삼각형 등)일 수도 있다. 그리고, 여기에 서술된 실시예들의 일부는 대상 영역들(311, 312)을 각각의 이미지들(301, 302)의 경계에 인접하게 있는 것으로 보여주지만, 본 발명은 이에 한정되지 않는다. 이와 달리, 대상 영역들(311, 312)의 위치는 입력 장치들(미도시)의 위치들(예를 들어, 왼쪽 카메라와 오른쪽 카메라의 각 위치들)에 따를 수 있다. 이처럼, 대상 영역들(311, 312)은 각 이미지들(301, 302)의 경계 이외의 영역에도 위치할 수 있음은 당연하다.
위에 언급한 바와 같이, 변경부(202)는 왼쪽 이미지(301)와 오른쪽 이미지(302)의 대상 영역들(311, 312)을 변경한다. 이러한 변경은 다양한 방식으로 수행될 수 있는 바, 예를 들면, 대상 영역(311, 312)을 나타내는 이미지 데이터는 왼쪽 이미지(301) 및/또는 오른쪽 이미지(302)를 나타내는 이미지 데이터로부터 단순히 제거될 수 있다. 또는, 변경부(202)는 대상 영역들(311, 312) 내에서 이미지들의 색깔을 여러 색깔(예를 들어, 검은색, 회색, 빨간색 등)로 변경 및/또는 여러 색깔들의 결합으로 변경할 수 있다. 그리고, 변경부(202)는 여러 패턴들을 보여주도록 대상 영역들(311, 312) 내에서 이미지를 변경할 수 있다. 예를 들어, 대상 영역(311, 312) 내 이미지는 대상 영역(311, 312)이 검은색과 하얀색 체커판 패턴 또는 색깔/패턴 변화도를 갖는, 즉, 대상 영역(311, 312) 상에 색깔/패턴이 점점 희미해지는(예를 들어, 흰색으로부터 회색을 거쳐 검은색으로 변화) 영역으로 나타나도록 변경될 수 있다.
이후 이미지 데이터 및/또는 복수의 이미지에 사용되는 "변경(altering)", "변화(changing)" 등과 같은 용어는, 이에 한정하지는 않지만 제거(removing), 수정(modifying), 대체(replacing), 삭제(eliminating), 조정(adjusting), 변형(transforming), 바꿈(varying) 등을 포함한다.
그리고, 표시된 이미지가 해당 이미지의 이전에 표시된 버전(version)에 대하여 변경되는 몇 가지 방법들이 있다. 예를 들어, 위에 언급한 바와 같이, 이미지를 나타내는 이미지 데이터는 해당 이미지가 디스플레이 화면에 표시되도록 처리될 수 있다. 디스플레이 화면은 많은 개별 화소들을 포함할 수 있고, 각 화소는 특정 색깔을 표시하도록 개별적으로 제어될 수 있다. 이에 따라, 표시된 이미지는 근원적인 이미지 데이터(예를 들어, 수신한 비디오 스트림으로부터)를 변화 및/또는 디스플레이 화면 자체의 물리적 구성요소들(예를 들어, 화소들)을 구체적으로 제어하여 변경될 수 있다.
다시 말해, 이미지(301, 302)의 대상 영역(311, 312) 내에서 특정 색깔(예를 들어, 검은색)을 표시하기 위해 이미지(301, 302)의 이미지 데이터를 변화시키는 것은, 이미지(301, 302) 내에서 대상 영역(311, 312)에 대응할 수 있는 영역에서 검은색을 표시하도록 디스플레이 화면을 제어하는 것과 동일한 효과를 낸다. 이에 따라, 여기에 사용되는 바와 같이, 이미지 데이터 및/또는 이미지들에 대해 사용되는 "변경", "변화" 등의 용어들은 디스플레이 화면 자체를 제어하여 표시된 이미지를 변화시키는 것뿐만 아니라, 변경된 이미지가 표시되도록 이미지 데이터를 변화시키는 것을 포함한다.
도 4는 변경 후 왼쪽 이미지와 오른쪽 이미지의 예를 나타낸다. 도 4에 도시한 바와 같이, 왼쪽 이미지(401)의 대상 영역(411)의 색깔이 검은색으로 바뀌었으며, 이와 유사하게 오른쪽 이미지(402)의 대상 영역(412)의 색깔 또한 검은색으로 바뀌었다. 그 결과, 변경된 왼쪽 이미지(401)는 변경된 오른쪽 이미지(402)에 있지 않은 경계 영역을 포함하지 않고, 그 반대의 경우도 마찬가지이다.
도 3과 도 4의 예들은 모두 유사한 크기와 모양을 갖는 왼쪽 및 오른쪽 대상 영역들을 나타내고 있으나, 본 발명은 이에 한정되지 않는다. 예를 들면, 왼쪽 및 오른쪽 대상 영역들은 상이한 크기 및/또는 다른 모양, 방향 등을 가질 수 있다. 그리고, 변경부(202)는 하나의 대상 영역만(즉, 왼쪽 이미지에서만 또는 오른쪽 이미지에서만)을 변경할 수도 있다.
위에 언급한 바와 같이, 대상 영역들이 동일한 크기 및/또는 모양을 가질 필요는 없다. 그러므로, 왼쪽 대상 영역이 오른쪽 대상 영역과 대칭이어야 하는 것은 아니다. 그리고, 대상 영역들은 다양한 방식으로 정의될 수 있다. 예를 들어, 대상 영역들의 크기 및/또는 모양은 미리 정해질 수 있다. 한편, 대상 영역들은 사용자에 의해 수동으로 정의되거나, 또는 이와 달리 대상 영역들은 자동적으로 정해질 수 있다.
여기에 사용되는 바와 같이, "설정(setting)"이라는 용어는 대상 영역의 매개변수들(예를 들어, 크기, 모양, 위치 등)을 의미할 수 있고, 또한, 이미지 대상 영역들에 적용되는 변경 기법의 타입(예를 들어, 착색/음영/변화도/패터닝 등)을 의미할 수 있다. 다시 말해, 여기에 사용되는 용어인 "설정"은 (a)어떻게 대상 영역이 정의되는지와, (b)어떻게 대상 영역 내의 이미지가 변경되는지를 지칭한다.
소정의 대상 영역의 경우, 제조사는 미리 대상 영역 설정들(예를 들어, 크기, 모양, 위치 등)을 정의할 수 있다. 이러한 설정들은 사전에 정해진 설정에 따라 왼쪽 이미지 및 오른쪽 이미지 내에서 각 대상 영역들을 변경하기 위해 이행될 수 있다. 또한, 왼쪽 대상 영역을 위한 설정은 오른쪽 대상 영역의 경우와 다를 수 있다. 나아가서, 왼쪽 대상 영역은 하나의 설정(예를 들어, 크기)을 위해 최적화될 수 있고, 오른쪽 대상 영역은 다른 설정(예를 들어, 모양)을 위해 최적화될 수 있다. 이와 마찬가지로, 변경 기법의 설정도 미리 정의될 수 있다(예를 들어, 착색/음영/변화도/패터닝 등).
왼쪽 및 오른쪽 대상 영역들에 대한 설정들은 사용자에 의해 수동으로 설정될 수 있다. 나아가서, 왼쪽 및 오른쪽 대상 영역들에 대한 설정들은 서로 상이할 수 있다. 예를 들어, 사용자는 각각의 대상 영역들의 크기와 모양을 정의하기 위해 OSD(on-screen display) 프로그램 또는 GUI(graphic user interface)와 관련하여 손가락 또는 포인팅장치(예를 들어, 마우스, 리모콘, 스타일러스 등)를 이용할 수 있을 것이다. 크기와 모양에 덧붙여, 사용자는 착색/음영/변화도/패터닝 등과 같은 각각의 대상 영역들에 적용되는 변경 기법에 관련된 매개변수들(즉, 설정들)을 수동으로 설정할 수도 있다.
또한, 왼쪽 및 오른쪽 대상 영역들에 대한 설정들은 자동으로 설정될 수 있다. 예를 들어, 어느 영역이 왼쪽 이미지에는 있고 오른쪽 이미지에는 없는지(그 반대의 경우도 동일함)를 판단하기 위하여, 왼쪽 이미지는 오른쪽 이미지와 비교될 수 있다. 이에 따라, 대상 영역들은 왼쪽 이미지 및 오른쪽 이미지에서 식별될 수 있다. 그리고, 깊이 추정 기법은 왼쪽 이미지 및 오른쪽 이미지에 의해 묘사된 장면 내에서 깊이를 판단하기 위하여 수신한 왼쪽 이미지 및 오른쪽 이미지에 적용될 수 있다. 예를 들어, 깊이 지도(depth map)는 2차원 이미지용으로 생성될 수 있다. 어떤 기법이 이용되든지, 깊이 정보가 판단되기만 하면 왼쪽 이미지 및 오른쪽 이미지 내에서 대상 영역들이 식별될 수 있다.
각각의 대상 영역들 내에서 이미지들에 적용되는 변경 기법(예를 들어, 착색/음영/변화도/패터닝 등)에 관한 설정들은 자동화될 수 있다. 예를 들어, 변경 기법에 관한 설정들은 왼쪽 및 오른쪽 대상 영역들의 판단에 기초하여 자동으로 설정될 수 있다. 이와 달리, 변경 기법에 관한 설정들은 왼쪽 및 오른쪽 대상 영역들에 대한 판단과는 독립적으로 자동으로 설정될 수 있다.
또한, 대상 영역들 내에서 이미지들에 적용되는 변경 기법뿐만 아니라, 대상 영역들을 판단/정의하기 위해 상기 기법들의 조합이 이용될 수 있다. 예를 들어, 대상 영역은 소정의 설정에 의해 정의되고, 이후 자동으로 변화되거나 또는 사용자에 의해 수동으로 변화될 수 있고, 또는 대상 영역은 사용자에 의해 수동으로 정의되는 반면 변경 기법은 소정의 설정을 기초로 할 수 있다.
도 4에 도시한 바와 같이, 공간(411, 412)이 변경되었기 때문에(이 경우, 검은색), 표시된 이미지들은 전체 표시 가능한 공간(420) 전체를 차지하지 않는다. 변경된 공간들(411, 412)을 채우기 위하여, 왼쪽 이미지(401) 및 오른쪽 이미지(402)는 전체 이용 가능한 공간(420)에 맞도록 스케일 조정된다. 이와 같이, 도 2에 도시한 장치(200)는 스케일 동작을 수행하기 위하여 스케일러(205)를 포함할 수 있다. 도 5는 도 4로부터의 왼쪽 이미지 및 오른쪽 이미지의 스케일 조정된 버전(version)의 예시(501, 502)를 나타낸다.
위에 언급한 바와 같이, 대상 영역들은 모든 다각형의 모양일 수 있다. 예를 들어, 이미지는 이미지의 상부 및/또는 하부에서 상대적으로 큰 대상 영역을 가질 수 있다. 도 6은 왼쪽 이미지(601)와 오른쪽 이미지(602)가 각 이미지의 상부와 하부에서 상대적으로 큰 대상 영역(611, 612)을 갖는 경우의 예시를 나타낸다. 도 6에 도시한 바와 같이, 각각의 이미지(601, 602) 내에서 위에서 아래로 보면 각 대상 영역(611, 612)의 모양과 크기 둘 다 변한다. 위에 말한 바와 같이, 적용되는 변경 기법 뿐만 아니라 각 대상 영역들을 위한 설정들은 다양한 방식(예를 들어, 사전에 지정되며, 수동으로 및/또는 자동으로)으로 정해질 수 있다.
도 7a 내지 도 7c는 왼쪽 이미지에 적용되는 다양한 변경 기법들의 예를 나타낸다. 도 7a 내지 도 7c에 도시된 예들은 단지 이해를 쉽게 하기 위해서 도시된 것으로, 본 발명이 이에 한정되는 것이 아니다.
도 7a는 대상 영역의 색깔이 서브영역들(701, 703)에서 검은색으로 변경되고, 서브영역(702)에서 회색으로 변경되는 경우의 예를 보여준다. 이에 따라, 본 예시에서, 대상 영역은 복수의 서브영역(701, 702, 703)으로 구분되며, 각 서브영역(701, 702, 703)에 상이한 색깔이 적용될 수 있다. 도 7a의 예에서는 두 서브영역(701, 703)이 검은색이지만, 세 서브영역(701, 702, 703) 모두가 서로 상이하게 착색될 수 있도록 두 서브영역(701, 703)이 서로 다른 색일 수도 있다.
도 7b는 소정의 패턴, 이 경우 열십자(crisscross) 패턴으로 대상 영역(710)의 이미지가 대체됨으로써, 대상 영역(710)이 변경되는 경우의 예시를 나타낸다. 도 7b에 도시한 패턴은 열십자 패턴이지만, 본 발명은 이에 한정되지 않는다. 예를 들어, 패턴은 물방울(polka dot-type) 패턴 또는 다이아몬드(diamond-type) 패턴일 수도 있다. 도 7a의 예시와 마찬가지로, 본 발명은 도 7b에 도시한 단일 대상 영역 대신에 복수의 서브영역들을 이용할 수 있다.
도 7c는 전체 대상 영역(724) 내에서 네 개의 서브영역(720, 721, 722, 723)으로 구분되는 예시를 보여준다. 여기서, 이미지는 세 개의 다른 색깔들이 각각 서브영역(720, 721, 722)에 적용되도록, 그리고 열십자 패턴이 서브영역(723)에 적용되도록 변경된다. 서브영역들(721, 722, 723) 각각은 다른 모양과 크기를 갖는다(서브영역(720, 721)은 둘 다 삼각형 모양이지만, 다른 방향을 향한다). 도 7c에 적용된 이미지 변경은 하나의 예시일 뿐, 본 발명은 이에 한정되지 않는다.
도 2에 도시된 장치(200)에 대하여 상기 언급한 바와 같이, 입력부(201)는 왼쪽 이미지에 대응하는 이미지 데이터와 오른쪽 이미지에 대응하는 이미지 데이터를 갖는 이미지 신호를 수신한다. 그리고, 이미지 신호는 단일 이미지를 포함하는 2차원 이미지 신호일 수 있는데, 이러한 경우 입력된 2차원 신호는 왼쪽 이미지와 오른쪽 이미지를 제공하도록 깊이 추정 동작을 통해 변경될 수 있다. 도 8은 두 가지 타입의 이미지 신호들을 수신할 수 있는 시스템 및/또는 장치(800)의 예시를 나타낸다.
도 8에 도시한 바와 같이, 본 발명의 일 실시예는 2차원 이미지 공급원으로부터 2차원 이미지를 수신하고, 3차원 이미지 공급원으로부터 3차원 이미지를 수신할 수 있는 장치(800)를 포함한다. 본 발명은 도 8에 도시한 장치(800)에 한정되지 않는 바, 본 발명의 일 실시예에 따른 장치는 2차원 이미지만을 수신할 수 있거나, 3차원 이미지만을 수신할 수 있거나, 또는 도 8에 도시한 바와 같이 2차원 이미지와 3차원 이미지 모두를 수신할 수 있다.
2차원 이미지가 수신되면, 이 수신된 2차원 이미지는 2차원 이미지 내에서 깊이를 추정하기 위한 다양한 깊이 추정 기법들을 이용할 수 있는 깊이 추정부(801)로 입력된다. 수신한 2차원 이미지 내에서 깊이가 추정되면, 3차원 이미지(즉, 왼쪽 이미지 및 오른쪽 이미지)는 2차원-3차원 렌더링부(802)에 의해 렌더링될 수 있다.
이와 달리, 3차원 신호가 수신되면, 이 수신된 3차원 이미지는 3차원 이미지로부터 왼쪽 이미지 및 오른쪽 이미지를 분리하는 3차원 이미지 분리부(803)에 입력된다. 왼쪽 이미지 및 오른쪽 이미지는, 이후 왼쪽 이미지 및 오른쪽 이미지 내에서 대상 영역들의 위치를 판단할 깊이 추정 및/또는 이미지 비교 기법(804)이 적용될 수 있다. 대상 영역들이 판단되면, 왼쪽 이미지 및 오른쪽 이미지는 스케일러(806)에 의해 스케일 조정된다. 마지막으로, 스케일 조정/변경된 왼쪽 이미지 및 오른쪽 이미지는 디스플레이(807) 상에 표시된다.
도 8에 도시한 다양한 구성 부품들(예를 들어, 깊이 추정부(804), 스케일러(806), 디스플레이(807) 등)은 선택적일 수 있다. 그리고, 도 8은 장치(800)를 도시하고 있으나, 본 발명은 이에 한정되지 않는다. 본 발명의 다른 실시예들은 시스템, 디스플레이장치, 또는 디스플레이(807)가 없는 장치 등을 포함할 수 있다. 또한, 구성 부품들은 필요한 것을 완비한(self-contained) 장치에서와 같이 근접하게 접속되거나, 또는 네트워크에 걸쳐 분산될 수 있다.
본 발명의 다른 실시예는 이미지를 변경하기 위한 방법을 제공한다. 도 9는 본 발명의 일 실시예에 따른 동작의 예를 나타낸다. 도 9에 도시한 바와 같이, 왼쪽 이미지 및 오른쪽 이미지가 수신되면(S901), 왼쪽 이미지와 오른쪽 이미지 내에서 대상 영역들이 판단된다(S902). 그리고, 왼쪽 이미지 및 오른쪽 이미지가 변경되며(S903), 변경된 이미지들은 출력되어(S904) 표시된다(S905).
본 발명의 다른 실시예는 컴퓨터가 읽을 수 있는 기록매체 상에 컴퓨터가 읽을 수 있는 코드(code)를 제공한다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 이후 읽힐 수 있는 데이터를 저장할 수 있는 모든 비휘발성 데이터 저장 장치이다. 컴퓨터가 읽을 수 있는 기록 매체의 예로, 롬(ROM), 램(RAM), 씨디롬(CD-ROM), 자기 테이프, 플로피 디스크, 광학 데이터 저장 장치 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 코드가 분산된 방식으로 저장되어 실행될 수 있도록, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크와 결합한 컴퓨터 시스템에 걸쳐 분산될 수 있다.
전술한 실시예들은 단지 예시일 뿐 본 발명을 제한하도록 해석되어서는 안될 것이다. 본 교시는 다른 타입의 방법들 및 장치들에 쉽게 적용될 수 있다. 또한 본 발명의 실시예는 설명을 의도로 작성된 것이지 청구항의 범위를 제한하려는 의도가 아니고, 많은 변경, 수정 및 변화가 당업자에게 명백할 것이다.
201: 입력부
202: 변경부
204: 디스플레이
205: 스케일러
801: 깊이 추정부
802: 2차원-3차원 렌더링부
803: 3차원 이미지 분리부
806: 스케일러
807: 디스플레이

Claims (20)

  1. 이미지를 변경하는 장치에 있어서,
    왼쪽 이미지 및 오른쪽 이미지를 수신하는 입력부; 및
    상기 수신된 왼쪽 이미지 및 상기 수신된 오른쪽 이미지를 변경하고, 상기 변경된 왼쪽 이미지 및 상기 변경된 오른쪽 이미지를 포함하는 이미지 신호를 출력하는 이미지 변경부를 포함하고,
    상기 왼쪽 이미지는 상기 왼쪽 이미지의 경계 영역에 근접한 제1영역의 변화에 의하여 변경되며, 상기 오른쪽 이미지는 상기 오른쪽 이미지의 경계 영역에 근접한 제2영역의 변화에 의하여 변경되는 것을 특징으로 하는 이미지를 변경하는 장치.
  2. 제1항에 있어서,
    상기 왼쪽 이미지의 상기 경계 영역은 상기 왼쪽 이미지의 가장 왼쪽 경계에 인접하며, 상기 오른쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 가장 오른쪽 경계에 인접하는 것을 특징으로 하는 이미지를 변경하는 장치.
  3. 제1항에 있어서,
    상기 이미지 변경부는,
    상기 제1영역의 색깔 변화에 의해 상기 제1영역을 변화시키고, 상기 제2영역의 색깔 변화에 의해 상기 제2영역을 변화시키는 것을 특징으로 하는 이미지를 변경하는 장치.
  4. 제3항에 있어서,
    상기 제1영역의 상기 색깔 변화는, 상기 제1영역에서 화소들의 색깔을 검은색으로 변경하는 것을 포함하고,
    상기 제2영역의 상기 색깔 변화는, 상기 제2영역에서 화소들의 색깔을 검은색으로 변경하는 것을 포함하는 것을 특징으로 하는 이미지를 변경하는 장치.
  5. 제3항에 있어서,
    상기 제1영역의 상기 색깔은 상기 제2영역의 상기 색깔과 실질적으로 동일한 것을 특징으로 하는 이미지를 변경하는 장치.
  6. 제1항에 있어서,
    상기 왼쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 상기 경계 영역과 크기 및 모양 중 적어도 어느 하나에 있어서 실질적으로 유사한 것을 특징으로 하는 이미지를 변경하는 장치.
  7. 제1항에 있어서,
    상기 왼쪽 이미지에서 상기 경계 영역 및 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 복수의 서브영역을 포함하는 것을 특징으로 하는 이미지를 변경하는 장치.
  8. 제1항에 있어서,
    상기 왼쪽 이미지에서 상기 경계 영역 및 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 사용자에 의해 정의되는 것을 특징으로 하는 이미지를 변경하는 장치.
  9. 제1항에 있어서,
    상기 왼쪽 이미지와 상기 오른쪽 이미지 사이의 차이를 판단하는 이미지 차이 판단부를 더 포함하고,
    상기 차이는, 상기 왼쪽 이미지에는 있고 상기 오른쪽 이미지에는 없는 왼쪽 이미지 구성요소들 및 상기 오른쪽 이미지에는 있고 상기 왼쪽 이미지에는 없는 오른쪽 이미지 구성요소들에 기초하여 판단되며,
    상기 이미지 변경부는 상기 판단된 차이에 기초하여, 상기 제1영역 및 상기 제2영역을 변화시키는 것을 특징으로 하는 이미지를 변경하는 장치.
  10. 제1항에 있어서,
    상기 이미지 변경부에 의해 출력된 상기 이미지 신호를 표시하는 디스플레이를 더 포함하는 것을 특징으로 하는 이미지를 변경하는 장치.
  11. 이미지를 변경하는 방법에 있어서,
    왼쪽 이미지 및 오른쪽 이미지를 수신하는 단계와;
    상기 왼쪽 이미지에서 경계 영역에 근접한 제1영역을 변화시켜, 상기 수신한 왼쪽 이미지를 변경하는 단계와;
    상기 오른쪽 이미지에서 경계 영역에 근접한 제2영역을 변화시켜, 상기 수신한 오른쪽 이미지를 변경하는 단계와;
    상기 변경된 왼쪽 이미지 및 상기 변경된 오른쪽 이미지를 포함하는 이미지 신호를 출력하는 단계를 포함하는 것을 특징으로 하는 이미지를 변경하는 방법.
  12. 제11항에 있어서,
    상기 왼쪽 이미지에서 상기 경계 영역은 상기 왼쪽 이미지의 가장 왼쪽 경계에 인접하고, 상기 오른쪽 이미지에서 상기 경계 영역은 상기 오른쪽 이미지의 가장 오른쪽 경계에 인접하는 것을 특징으로 하는 이미지를 변경하는 방법.
  13. 제11항에 있어서,
    상기 제1영역을 변경하는 단계는, 상기 제1영역의 색깔을 변경하는 단계를 포함하고,
    상기 제2영역을 변경하는 단계는, 상기 제2영역의 색깔을 변경하는 단계를 포함하는 것을 특징으로 하는 이미지를 변경하는 방법.
  14. 제13항에 있어서,
    상기 제1영역의 색깔을 변경하는 단계는, 상기 제1영역에서 화소들의 색깔을 검은색으로 변경하는 단계를 포함하고,
    상기 제2영역의 색깔을 변경하는 단계는, 상기 제2영역에서 화소들의 색깔을 검은색으로 변경하는 단계를 포함하는 것을 특징으로 하는 이미지를 변경하는 방법.
  15. 제13항에 있어서,
    상기 제1영역의 상기 색깔은 상기 제2영역의 상기 색깔과 실질적으로 동일한 것을 특징으로 하는 이미지를 변경하는 방법.
  16. 제11항에 있어서,
    상기 왼쪽 이미지의 상기 경계 영역은 상기 오른쪽 이미지의 상기 경계 영역과 모양 및 크기 중 적어도 어느 하나에 있어 실질적으로 유사한 것을 특징으로 하는 이미지를 변경하는 방법.
  17. 제11항에 있어서,
    상기 왼쪽 이미지에서 상기 경계 영역과 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 복수의 서브영역을 포함하는 것을 특징으로 하는 이미지를 변경하는 방법.
  18. 제11항에 있어서,
    상기 왼쪽 이미지에서 상기 경계 영역과 상기 오른쪽 이미지에서 상기 경계 영역 중 적어도 하나는 사용자에 의해 정의되는 것을 특징으로 하는 이미지를 변경하는 방법.
  19. 제11항에 있어서,
    상기 왼쪽 이미지 및 상기 오른쪽 이미지 사이의 차이를 판단하는 단계를 더 포함하고,
    상기 차이는, 상기 왼쪽 이미지에는 있고 상기 오른쪽 이미지에는 없는 제1구성요소 및 상기 오른쪽 이미지에는 있고 상기 왼쪽 이미지에는 없는 제2구성요소에 기초하여 판단되며,
    상기 제1영역을 변경하는 단계 및 상기 제2영역을 변경하는 단계는, 상기 판단된 차이에 기초하여 수행되는 것을 특징으로 하는 이미지를 변경하는 방법.
  20. 제11항에 있어서,
    상기 출력되는 이미지 신호를 표시하는 단계를 더 포함하는 것을 특징으로 하는 이미지를 변경하는 방법.
KR1020100072800A 2010-07-28 2010-07-28 3차원 표시를 위한 이미지를 변경하는 장치 및 방법 KR20120011161A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100072800A KR20120011161A (ko) 2010-07-28 2010-07-28 3차원 표시를 위한 이미지를 변경하는 장치 및 방법
US12/861,475 US8619130B2 (en) 2010-07-28 2010-08-23 Apparatus and method for altering images for three-dimensional display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100072800A KR20120011161A (ko) 2010-07-28 2010-07-28 3차원 표시를 위한 이미지를 변경하는 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20120011161A true KR20120011161A (ko) 2012-02-07

Family

ID=45526325

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100072800A KR20120011161A (ko) 2010-07-28 2010-07-28 3차원 표시를 위한 이미지를 변경하는 장치 및 방법

Country Status (2)

Country Link
US (1) US8619130B2 (ko)
KR (1) KR20120011161A (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9581431B1 (en) * 2014-03-18 2017-02-28 Jeffrey M. Sieracki Method and system for parallactically synced acquisition of images about common target
TW201528775A (zh) 2014-01-02 2015-07-16 Ind Tech Res Inst 景深圖校正方法及系統

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE375687T1 (de) * 2002-03-08 2007-10-15 Topcon Corp Vorrichtung und verfahren zur stereoskopischen bildwiedergabe
US8300086B2 (en) * 2007-12-20 2012-10-30 Nokia Corporation Image processing for supporting a stereoscopic presentation
US8290338B2 (en) * 2009-05-27 2012-10-16 Panasonic Corporation Recording medium, playback device, encoding device, integrated circuit, and playback output device
JP5430266B2 (ja) * 2009-07-21 2014-02-26 富士フイルム株式会社 画像表示装置および方法並びにプログラム

Also Published As

Publication number Publication date
US20120026301A1 (en) 2012-02-02
US8619130B2 (en) 2013-12-31

Similar Documents

Publication Publication Date Title
KR102415502B1 (ko) 복수의 사용자를 위한 라이트 필드 렌더링 방법 및 장치
RU2692432C2 (ru) Способ и устройство для формирования трехмерного изображения
TWI508519B (zh) An image processing apparatus, a program, an image processing method, a recording method, and a recording medium
JP5202546B2 (ja) マルチ画像表示を較正および／または視覚化しかつゴーストアーチファクトを低減するためのするための方法およびシステム
TWI598846B (zh) 影像資料處理方法以及使用該方法的立體影像顯示裝置
JP5011316B2 (ja) 出力画像のレンダリング
RU2649959C2 (ru) Регулирование глубины в сигнале трехмерного изображения
KR20110122057A (ko) 설정 메뉴를 디스플레이하기 위한 방법 및 대응하는 디바이스
JP5476910B2 (ja) 画像生成装置、画像生成方法、および、プログラム
EP2309463A2 (en) Method of displaying a 3D video with insertion of a graphic item and terminal for implementing the method
KR20150121386A (ko) 입체 영상 표시 장치 및 영상 처리 방법
US9088774B2 (en) Image processing apparatus, image processing method and program
JP5396877B2 (ja) 画像処理装置、プログラム、画像処理方法、および記録方法
JP2011172172A (ja) 立体映像処理装置および方法、並びにプログラム
EP2375758A2 (en) Signal processing device, signal processing method, display device and program product
KR20140004393A (ko) 디스플레이 장치 및 그 제어 방법
KR20120011161A (ko) 3차원 표시를 위한 이미지를 변경하는 장치 및 방법
JP6377155B2 (ja) 多視点映像処理装置及びその映像処理方法
JP5656676B2 (ja) 映像表示装置、映像表示方法及びプログラム
JP2018191191A (ja) 立体映像生成装置
CN113661514A (zh) 用于增强图像的设备和方法
EP3425907B1 (en) Display device and method for rendering a three-dimensional image
JP5507003B2 (ja) 立体画像処理装置及び立体画像処理方法
JP7339278B2 (ja) 視聴者に合わせて調整された立体画像表示
Nam et al. Analysis of blur characteristics on 3D displays

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application