KR20130142911A - 스테레오스코픽 3d 동영상 크기 변환 방법 및 장치 - Google Patents

스테레오스코픽 3d 동영상 크기 변환 방법 및 장치 Download PDF

Info

Publication number
KR20130142911A
KR20130142911A KR1020130060770A KR20130060770A KR20130142911A KR 20130142911 A KR20130142911 A KR 20130142911A KR 1020130060770 A KR1020130060770 A KR 1020130060770A KR 20130060770 A KR20130060770 A KR 20130060770A KR 20130142911 A KR20130142911 A KR 20130142911A
Authority
KR
South Korea
Prior art keywords
stereoscopic
video
size
image
converting
Prior art date
Application number
KR1020130060770A
Other languages
English (en)
Inventor
이봉호
박영수
정원식
허남호
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20130142911A publication Critical patent/KR20130142911A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/002Eyestrain reduction by processing stereoscopic signals or controlling stereoscopic devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/005Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

스테레오스코픽 3D 동영상 크기 변환 방법 및 장치를 제공한다. 동영상 크기 변환 장치가 스테레오스코픽 3D(3-Dimension) 동영상의 크기를 변환하는 방법은 장면 전환을 기준으로 상기 스테레오스코픽 3D 동영상을 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분하는 단계, 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 상기 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정하는 단계, 상기 설정된 초기 관심 영역을 목표 디스플레이의 크기에 맞게 선정하는 단계 및 상기 선정된 초기 관심 영역을 기초로 상기 스테레오스코픽 3D 동영상의 크기를 변환하는 단계를 포함할 수 있다.

Description

스테레오스코픽 3D 동영상 크기 변환 방법 및 장치{APPARATUS AND METHOD OF STEREOSCOPIC 3D CONTENTS CONVERSION}
본 발명의 실시예들은 스테레오스코픽 3D 동영상 콘텐츠의 크기를 변환하는 방법 및 장치에 관한 것이다.
스테레오스코픽 3D 동영상의 콘텐츠 부족을 해결할 수 있는 간단한 방법 중의 하나는 스테레오스코픽 3D 동영상 콘텐츠의 크기를 변환함으로써 이를 다양한 3D 디스플레이에서 볼 수 있도록 하는 것이다.
이를 위한 기술로서 일 예로, 한국공개특허공보 제10-2010-0013419호(공개일 2010년 2월 10일) "스테레오스코픽 3차원 입체 영상 전송을 위한 영상 크기변환 방법 및 그 장치"에는 3차원 입체 영상의 좌우 영상 중 하나는 고화질로 전송하여 2차원 영상 디스플레이 단말에 기존 2차원 영상과 같은 선명한 영상이 디스플레이되도록 하고, 나머지 하나의 영상은 축소하여 전송하여 다양한 3차원 입체 모니터에서도 화질의 열화 없이 디스플레이되도록 3차원 입체 영상을 변환하는 것이 개시되어 있다.
그러나, 스테레오스코픽 3D 동영상 콘텐츠는 기존의 2D 동영상과는 달리 변환 시 화질뿐만 아니라 깊이감 인지, 시각 피로 등과 같은 3D와 관련된 여러 가지 특성을 고려해야 한다.
따라서, 스테레오스코픽 3D 동영상 콘텐츠의 크기를 변환 시 3D 동영상을 시청할 때 발생하는 피로감이나 과다한 입체감을 줄일 수 있는 방법이 요구되고 있다.
본 발명의 기술적 과제는 스테레오스코픽 3D 동영상 콘텐츠의 크기를 변환 시 3D 동영상을 시청할 때 발생하는 피로감이나 과다한 입체감을 줄일 수 있는 스테레오스코픽 3D 동영상 크기 변환 방법 및 장치를 제공함에 있다.
본 발명의 일 양태에 따르면, 동영상 크기 변환 장치가 스테레오스코픽 3D(3-Dimension) 동영상의 크기를 변환하는 방법은 장면 전환을 기준으로 상기 스테레오스코픽 3D 동영상을 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분하는 단계, 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 상기 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정하는 단계, 상기 설정된 초기 관심 영역을 목표 디스플레이의 크기에 맞게 선정하는 단계 및 상기 선정된 초기 관심 영역을 기초로 상기 스테레오스코픽 3D 동영상의 크기를 변환하는 단계를 포함할 수 있다.
일 실시예로서, 상기 설정하는 단계 이전에 2D(2-Dimension) 영상에 대한 주의 시각 모델을 이용하여 상기 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 생성하는 단계를 더 포함할 수 있다.
다른 실시예로서, 상기 생성하는 단계는 상기 2D 영상에 대한 주의 시각 모델의 현격함 지도(saliency map)를 기초로 상기 스테레오스코픽 3D 영상의 좌영상과 우영상 각각에서 주의 영역을 검출하는 단계, 상기 검출된 주의 영역을 결합하는 단계 및 상기 결합된 주의 영역에 깊이감 정보를 부가하여 상기 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 생성하는 단계를 포함할 수 있다.
또 다른 실시예로서, 상기 생성하는 단계 이전에 상기 스테레오스코픽 3D 영상의 심도를 기초로 상기 스테레오스코픽 3D 영상에서 시청 안정 영역을 설정하는 단계 및 상기 설정된 시청 안정 영역에 따른 깊이감 정보를 계산하는 단계를 포함할 수 있다.
또 다른 실시예로서, 상기 깊이감 정보는 상기 좌영상과 상기 우영상에서의 대응점들 간의 수평 방향 시차를 기초로 계산될 수 있다.
또 다른 실시예로서, 상기 설정하는 단계는 상기 스테레오스코픽 3D 동영상 에 포함된 각 스테레오스코픽 3D 영상의 좌영상과 우영상의 이진화 지도를 결합하는 단계 및 상기 결합된 이진화 지도를 기초로 초기 관심 영역을 설정하는 단계를 포함할 수 있다.
또 다른 실시예로서, 상기 선정하는 단계는 상기 설정된 초기 관심 영역을 상기 목표 디스플레이의 종횡비에 해당하도록 확대시키는 단계일 수 있다.
또 다른 실시예로서, 상기 변환하는 단계는 상기 확대된 초기 관심 영역을 기초로 란초스(LANCZOS) 리샘플링 알고리즘을 이용하여 상기 스테레오스코픽 3D 동영상의 크기를 상기 목표 디스플레이의 해상도에 맞도록 변환하는 단계일 수 있다.
본 발명의 다른 양태에 따르면, 동영상 크기 변환 장치는 장면 전환을 기준으로 스테레오스코픽 3D 동영상을 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분하는 구분부, 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 상기 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정하는 설정부 및 상기 설정된 초기 관심 영역을 목표 디스플레이의 크기에 맞게 선정하고 상기 선정된 초기 관심 영역을 기초로 상기 스테레오스코픽 3D 동영상의 크기를 변환하는 변환부를 포함할 수 있다.
2차원 현격함 지도(saliency map)을 통해 추출된 영상의 특징들에 3차원 특징을 더 이용하여 스테레오스코픽 3D 영상에서 사람에게 시각 피로를 최소로 제공하거나 입체감을 최적으로 제공할 수 있는 영역을 선택한 후 이를 목표 해상도 및 종횡비에 맞추어 재생산함으로써 3D 영상 시청 시 발생하는 피로감이나 과다한 입체감을 줄일 수 있다.
2차원 현격함 지도(saliency map)을 통해 추출된 영상의 특징들에 3차원 특징을 더 이용하여 스테레오스코픽 3D 영상에서 사람에게 시각 피로를 최소로 제공하거나 입체감을 최적으로 제공할 수 있는 영역을 선택한 후 이를 목표 해상도 및 종횡비에 맞추어 재생산함으로써 3D 영상 시청 시 발생하는 피로감이나 과다한 입체감을 줄일 수 있다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "...부" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
도 1은 본 발명의 일실시예에 있어서 스테레오스코픽 3D 동영상의 크기를 변환하는 방법을 나타내는 흐름도이고, 도 2는 본 발명의 일실시예에 있어서 시청 안정 영역을 고려하여 깊이 정보를 계산하는 방법을 나타내는 도면이다.
도 1을 참조하면, 본 발명에 따른 스테레오스코픽 3D(3-Dimension) 동영상 크기 변환 장치는 스테레오스코픽 3D 동영상의 크기를 변환 시 시각 피로가 최소화되고 입체감이 최적화되도록 하기 위하여 먼저 스테레오스코픽 3D 동영상의 장면 전환을 기준으로 상기 스테레오스코픽 3D 동영상을 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분할 수 있다(110).
그리고, 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 상기 구분된 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정한다(120). 이 때, 스테레오스코픽 3D 동영상 변환 장치는 일 예로 상기 스테레오스코픽 3D 동영상의 각 스테레오스코픽 3D 영상에 포함된 좌영상(left image)과 우영상(right image)의 이진화 지도를 결합하고 이를 기초로 초기 관심 영역을 설정할 수 있다.
한편, 상기 스테레오스코픽 3D 영상에 대한 주의 시각 모델은 2D(2-Dimension) 영상에 대한 주의 시각 모델을 기초로 생성될 수 있다. 일 예로, 스테레오스코픽 3D 영상에 대한 주의 시각 모델은 2D 영상에 대한 주의 시각 모델의 현격함 지도(saliency map)를 기초로 스테레오스코픽 3D 영상의 좌영상과 우영상 각각에서 주의 영역을 검출하고, 검출된 주의 영역을 결합한 후 결합된 주의 영역에 깊이감 정보를 부가함으로써 생성될 수 있다. 이 때, 상기 깊이감 정보는 상기 좌영상과 상기 우영상에서의 대응점들 간의 수평 방향 시차를 기초로 계산될 수 있다. 이를 위하여 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 스테레오스코픽 3D 영상의 심도를 기초로 스테레오스코픽 3D 영상에서 시청 안정 영역을 설정하고, 설정된 시청 안정 영역에 따른 깊이감 정보를 계산할 수 있다.
스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역이 설정되면, 스테레오스코픽 3D 동영상 크기 변환 장치는 설정된 초기 관심 영역을 목표 디스플레이(Target Display)의 크기에 맞게 선정할 수 있다. 일 예로 스테레오스코픽 3D 동영상 크기 변환 장치는 초기 관심 영역보다 목표 디스플레이의 크기가 클 경우 초기 관심 영역을 확대시키고(130), 확대된 초기 관심 영역을 기초로 스테레오스코픽 3D 동영상의 크기를 변환할 수 있다(140).
일 예로, 스테레오스코픽 3D 동영상 크기 변환 장치는 초기 관심 영역을 목표 디스플레이의 종횡비에 해당하도록 확대시킨 후, 확대된 초기 관심 영역을 기초로 란초스(LANCZOS) 리샘플링 알고리즘을 이용함으로써 스테레오스코픽 3D 동영상의 크기를 목표 디스플레이의 해상도에 맞도록 변환할 수 있다.
이하, 본 발명에 따른 스테레오스코픽 3D 동영상의 크기를 변환하는 방법을 예를 들어 보다 상세히 설명한다.
주의 시각 이론은 사람이 영상을 볼 때 특별히 주의가 집중되는 부분이 있고 이 부분을 통해서 많은 부분의 시각 정보를 얻는다는 이론으로, 사람의 시각 시스템을 설명하기 위해 제시된 이론 중의 하나이다. 그 동안 이러한 주의 시각 이론을 바탕으로 사람이 영상을 볼 때 관심을 끌고, 주의를 집중하는 영역을 찾기 위한 연구가 많이 이루어져왔다.
주의 시각 모델에 대한 연구는 크게 영상의 색상, 빛의 강도, 지역적 방향 정보 등을 이용한 보텀-업(bottom-up) 방법과 영상 내용의 이해를 기반으로 한 탑-다운(top-down) 방법으로 나뉜다. 일 예로, Itti 등은 bottom-up 방법을 통해서 영상 분석을 위한 현격함 지도(saliency map)를 발표하였다. 하지만 bottom-up 방법만을 가지고는 정확한 주의 영역을 찾기 어렵기 때문에, top-down 방법 또는 이 두 방법을 결합하여 주의 시각 모델을 계산하는 연구가 이루어져 왔다.
그러나, 스테레오스코픽 3D 영상은 2D 영상과는 달리 깊이감 인지와 시각 피로 현상과 같은 고려해야 할 다른 특징들을 가지고 있기 때문에, 스테레오스코픽 3D 영상에는 2D 영상을 위해 제안된 주의 시각 모델을 그대로 적용시킬 수 없다. 따라서 스테레오스코픽 3D 영상을 위한 주의 시각 모델이 필요하다.
이를 위해 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 2D 영상의 현격함 지도를 바탕으로 이에 스테레오스코픽 3D 영상에서 시청자들의 주의 끄는 사람이 표현된 부분을 피부 검출 방법을 통해 결합하고, 이 결합된 2D 주의 시각 모델에 시각 피로 현상을 고려한 깊이감 정보를 더하여 스테레오스코픽 3D 주의 시각 모델을 계산할 수 있다.
구체적으로, 현격함 지도 Sb 는 다음의 수학식 1을 통해 계산된다.
Figure pat00001
여기서,
Figure pat00002
,
Figure pat00003
,
Figure pat00004
는 각각 정규화된 강도, 색상, 지역적 방향 정보를 나타낸다.
또한, 여기에 피부색에 기초한 사람이 표현된 부분의 검출을 통한 2D 영상의 결합 모델 S2D 은 다음의 수학식 2와 같다.
Figure pat00005
여기서, St 는 사람이 표현된 부분의 검출을 통한 top-down 방식의 주의 시각 모델을 나타낸다.
스테레오스코픽 3D 영상의 경우, 깊이감 인지와 시각 피로 현상에 대한 고려가 필요하다. 시각 피로 현상의 가장 큰 원인 중의 하나는 자연 상태와 달리, 스테레오스코픽 3D 영상을 볼 때 초점조절(accommodation)과 폭주(vergence)가 서로 일치되지 않는 현상이며, 이는 과도한 입체감이 표현될 때 발생하게 된다. 시각 피로 현상을 측정하기 위해서는 인지되는 깊이감 계산이 필요하고, 이는 좌영상과 우영상에서의 대응점들 간의 수평 방향 시차(horizontal disparity)를 통해서 얻을 수 있다. 이 때, 어느 정도의 입체감 또는 깊이감이 표현되어야 사람의 시각 피로 현상이 나타나는지는 시청 환경과 시청자들에 따라 달라지기 때문에, 일반적인 조건을 찾기 위한 연구가 끊임없이 진행되어 왔다. 일 예로, Lambooij 등은 시각 피로 현상이 심도(depth of field)와 관련 있다고 제안하였고, Yano 등은 실험을 통하여
Figure pat00006
이상을 벗어나면 시각 피로 현상을 느낄 수 있다고 밝혔다.
따라서, 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 도 2에 도시된 것과 같이 Lambooij와 Yano의 연구를 바탕으로 시각 피로를 느끼지 않는 3D 시청 안정 영역 즉, 퍼시발의 안정영역(PZC: Percival's Zone of Comfort)을 설정하고, 이 영역의 3배를 두 영상이 하나로 융합되는 영역(SCSBV: Zone of Clear Single Binocular Vision)으로 설정하여 이에 따른 깊이 정보를 계산할 수 있다. 이 때, 깊이 정보에 대한 가중치 D 는 사람의 비선형 깊이 인지 모델을 적용하여 다음의 수학식 3과 같이 계산된다.
Figure pat00007
여기서, Dh 는 수평방향의 시차, CHn 과 CHp 는 인지되는 깊이감이 앞으로 나와 보이거나 들어가 보이는 최대 범위, 그리고 BHn 과 BHp 는 두 영상이 하나로 융합되어 보이는 최대 범위를 각각 나타낸다.
깊이 정보에 대한 가중치를 결합한 스테레오스코픽 3D 영상의 주의 시각 모델 S3D 는 다음의 수학식 4와 같이 계산된다.
Figure pat00008
본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 상술한 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 바탕으로 스테레오스코픽 3D 영상에서 관심 영역을 설정하기 위해서, 문턱값을 정하고 이를 통해 이진화 지도를 생성할 수 있다. 이 때, 좌영상과 우영상의 이진화 지도에 대한 설정 좌표가 서로 다를 경우, 기하학적 3D 왜곡과 잘못된 깊이감 인지 현상이 나타날 수도 있기 때문에 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 동일한 영역의 좌표 설정을 위해서 두 영상의 이진화 지도를 결합할 수 있다. 결합된 이진화 지도는 다음의 수학식 5와 같이 정의된다.
Figure pat00009
여기서, BL, BR 은 각각 좌영상과 우영상에 대한 이진화 지도를 나타낸다.
결합된 이진화 지도를 바탕으로 설정된 관심 영역을 모두 포함하는 초기 관심 영역 윈도 Op 및 상기 윈도의 최 외각 좌표는 다음의 수학식 6과 같다.
Figure pat00010
여기서 Ot, Ob, Ol, Or 은 각각 초기 관심 영역 윈도의 위, 아래, 왼쪽, 오른쪽의 최 외각 좌표를 나타내는 것으로서, 다음의 수학식 7과 같다.
Figure pat00011
이와 같이 스테레오스코픽 3D 영상(정지 영상)의 크기 변환을 위한 관심 영역 윈도를 설정하는 것은 초기 관심 영역 설정 결과 값을 이용하여 스테레오스코픽 3D 영상의 크기를 목표 디스플레이의 크기에 맞추면 되지만, 동영상 콘텐츠의 경우에는 한 가지 더 고려해야 할 점이 있다. 바로 화면마다 관심 영역 윈도가 달라지기 때문에 화면에 보여지는 화면 영역이 달라지는 문제점을 해결하는 일이다.
이를 위하여 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 하나의 동영상 콘텐츠를 장면 전환을 기준으로 여러 그룹의 동영상으로 나누어 묶고, 같은 그룹의 동영상은 동일한 관심 영역 윈도를 갖도록 설정하여, 이러한 화면 영역이 달라지는 문제점이 발생하지 않도록 할 수 있다. 이 때, 장면 전환은 일 예로, 두 영상 사이의 차분 영상을 기반으로 이들의 색상, 밝기, 움직임의 변화를 이용함으로써 자동으로 검출하거나 또는 수동으로 검출할 수 있다.
본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 이렇게 분류된 동영상 그룹에서 모든 화면의 관심 영역이 모두 포함될 수 있는 가장 큰 관심 영역 윈도를 설정하는 방법을 통하여 이를 동영상 콘텐츠에 확장/적용할 수 있다.
구체적으로, 초기 관심 영역 윈도 설정과 이를 동영상 콘텐츠로 확장한 관심 영역 윈도 설정을 목표 디스플레이에 맞추기 위해서는 관심 영역 윈도가 목표 디스플레이의 종횡비와 동일한 비율을 갖도록 해야 한다. 이를 위해서 목표 디스플레이의 종횡비와 동일해지도록 초기 관심 영역 윈도의 크기를 확대시키는 과정이 필요하다. 관심 영역 윈도 O 및 최 외각 좌표들은 각각 다음의 수학식 8과 수학식 9를 통해 구할 수 있다.
Figure pat00012
Figure pat00013
여기에서 m, n 은 목표 디스플레이의 가로와 세로 해상도를 의미한다. α와 β는 관심 영역 윈도의 위치에 따라 달라지는 0 이상 1 이하의 값이며, 기본값은 1/2이다.
목표 디스플레이의 종횡비에 맞춰 관심 영역 윈도가 설정되면, 이를 목표 디스플레이의 해상도에 맞추는 과정이 필요하다. 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 일 예로 란초스 리샘플링 알고리즘(Lanczos-3 re-sampling)을 통하여 목표 디스플레이의 해상도에 맞도록 영상을 변환할 수 있다.
도 3은 본 발명의 일실시예에 있어서, 스테레오스코픽 3D 동영상 크기 변환 장치를 나타내는 블록도이다.
도 3에 도시된 것과 같이, 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치(300)는 구분부(310), 설정부(320) 및 변환부(330)를 포함한다.
구분부(310)는 스테레오스코픽 3D 동영상을 장면 전환을 기준으로 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분한다.
설정부(320)는 스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 구분부(310)에 의해 구분된 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정한다. 일 예로, 설정부(320)는 스테레오스코픽 3D 동영상의 각 스테레오스코픽 3D 영상에 포함된 좌영상과 우영상의 이진화 지도를 결합하고, 결합된 이진화 지도를 기초로 초기 관심 영역을 설정할 수 있다.
변환부(330)는 설정부(320)에서 설정된 초기 관심 영역을 목표 디스플레이의 크기에 따라 확대시키고 상기 확대된 초기 관심 영역을 기초로 상기 스테레오스코픽 3D 동영상의 크기를 변환한다. 일 예로, 변환부(330)는 상기 초기 관심 영역을 목표 디스플레이의 종횡비에 해당하도록 확대시킨 후, 확대된 초기 관심 영역을 기초로 란초스(LANCZOS) 리샘플링 알고리즘을 이용함으로써 스테레오스코픽 3D 동영상의 크기를 목표 디스플레이의 해상도에 맞도록 변환할 수 있다.
도 4는 본 발명의 일실시예에 있어서, 스테레오스코픽 3D 동영상 크기 변환 장치가 스테레오스코픽 3D 동영상을 2D로 재생하는 방법을 나타내는 흐름도이다.
본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 스테레오스코픽 3D 동영상을 3D가 아닌 2D 형태로 디스플레이할 수도 있다. 일 예로, 본 발명에 따른 스테레오스코픽 3D 동영상 크기 변환 장치는 도 4에 도시된 것과 같이, 3D 관련 정보가 수신되면(410) 수신한 3D 관련 정보를 분석하여(420) 2D로 디스플레이될 영상이 기준 영상인지 부가 영상인지를 판단할 수 있다(430). 이 때, 3D 관련 정보는 프로그램 지정 정보(PSI: Program Specific Information) 또는 서비스 정보(SI: Service Information)와 같은 프로그램에 대한 추가 정보를 포함할 수 있다.
이 단계를 통해 기준 영상으로 식별되면 스테레오스코픽 3D 동영상 크기 변환 장치는 기준 영상을 복호화하여 2D로 영상을 재생할 수 있다(450). 그러나, 반대로 부가 영상으로 식별되면, 스테레오스코픽 3D 동영상 크기 변환 장치는 부가 영상을 복호화하여 2D로 재생할 수 있다(460).
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (1)

  1. 동영상 크기 변환 장치가 스테레오스코픽 3D(3-Dimension) 동영상의 크기를 변환하는 방법에 있어서,
    장면 전환을 기준으로 상기 스테레오스코픽 3D 동영상을 적어도 하나의 스테레오스코픽 3D 동영상 그룹으로 구분하는 단계;
    스테레오스코픽 3D 영상에 대한 주의 시각 모델을 기초로 상기 스테레오스코픽 3D 동영상 그룹 별로 초기 관심 영역을 설정하는 단계;
    상기 설정된 초기 관심 영역을 목표 디스플레이의 크기에 맞게 선정하는 단계; 및
    상기 선정된 초기 관심 영역을 기초로 상기 스테레오스코픽 3D 동영상의 크기를 변환하는 단계
    를 포함하는 스테레오스코픽 3D 동영상 크기 변환 방법.
KR1020130060770A 2012-06-20 2013-05-29 스테레오스코픽 3d 동영상 크기 변환 방법 및 장치 KR20130142911A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20120066002 2012-06-20
KR1020120066002 2012-06-20

Publications (1)

Publication Number Publication Date
KR20130142911A true KR20130142911A (ko) 2013-12-30

Family

ID=49986409

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130060770A KR20130142911A (ko) 2012-06-20 2013-05-29 스테레오스코픽 3d 동영상 크기 변환 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20130142911A (ko)

Similar Documents

Publication Publication Date Title
KR101829345B1 (ko) 입체 컨텐츠의 3-차원적인 효과들을 요구에 맞추기 위한 방법 및 장치
EP2560398B1 (en) Method and apparatus for correcting errors in stereo images
US9451242B2 (en) Apparatus for adjusting displayed picture, display apparatus and display method
DE102011057187B4 (de) Stereoskopische Bildanzeigevorrichtung und Verfahren zum Einstellen eines stereoskopischen Bildes derselben
US9729845B2 (en) Stereoscopic view synthesis method and apparatus using the same
JP2013527646A5 (ko)
CN102186023B (zh) 一种双目立体字幕处理方法
KR20100040236A (ko) 시각적 관심에 기반한 2차원 영상의 3차원 영상 변환기 및 변환 방법
CN102932662B (zh) 单目转多目的立体视频生成方法、求解深度信息图以及生成视差图的方法
JP2015154101A (ja) 画像処理方法、画像処理装置及び電子機器
KR20110113923A (ko) 영상 변환 장치 및 이를 포함하는 입체 영상 표시 장치
Tam et al. Three-dimensional TV: A novel method for generating surrogate depth maps using colour information
US20120007949A1 (en) Method and apparatus for displaying
EP2498501A2 (en) 3D image display method and apparatus thereof
KR101797035B1 (ko) 오버레이 영역의 3d 영상 변환 방법 및 그 장치
Jung et al. Visual comfort enhancement in stereoscopic 3D images using saliency-adaptive nonlinear disparity mapping
US20120121163A1 (en) 3d display apparatus and method for extracting depth of 3d image thereof
KR101519463B1 (ko) 3d 이미지 변환 장치 및 그 방법
KR101302431B1 (ko) 2차원 영상을 스테레오 영상으로 변환하는 방법
KR101172507B1 (ko) 시점 조정 3차원 영상 제공 장치 및 방법
JP2015149547A (ja) 画像処理方法、画像処理装置、及び電子機器
KR20130142911A (ko) 스테레오스코픽 3d 동영상 크기 변환 방법 및 장치
TWI493963B (zh) 影像產生裝置及影像調整方法
KR20120052142A (ko) 3d 디스플레이 장치 및 이의 3d 영상 뎁스 추출 방법
CN102300106B (zh) 三维处理电路及处理方法

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination