KR101107153B1 - 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치 - Google Patents

3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치 Download PDF

Info

Publication number
KR101107153B1
KR101107153B1 KR1020110090940A KR20110090940A KR101107153B1 KR 101107153 B1 KR101107153 B1 KR 101107153B1 KR 1020110090940 A KR1020110090940 A KR 1020110090940A KR 20110090940 A KR20110090940 A KR 20110090940A KR 101107153 B1 KR101107153 B1 KR 101107153B1
Authority
KR
South Korea
Prior art keywords
image data
rule
interpolation
decimation
image
Prior art date
Application number
KR1020110090940A
Other languages
English (en)
Inventor
권오복
신기환
이정원
Original Assignee
(주)진명아이앤씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)진명아이앤씨 filed Critical (주)진명아이앤씨
Priority to KR1020110090940A priority Critical patent/KR101107153B1/ko
Application granted granted Critical
Publication of KR101107153B1 publication Critical patent/KR101107153B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes

Abstract

본 발명은 3D TV용 영상 데이터 변환 방법 및 장치에 관한 것으로서, 더욱 상세하게는 영상 데이터를 3D TV 화면의 소정 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역의 해상도를 관심 외 영역의 해상도에 비해 높게 유지하도록 하여 기존의 일반적인 데시메이션 및 인터폴레이션 방식에 비해 시청자가 느끼는 화질 열화 현상을 최소화하며, 각각의 화소에 해당하는 영상 데이터의 에너지 레벨 값을 계산하는 심 카빙 방식으로 비선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역을 매우 빠른 속도로 데시메이션 및 인터폴레이션할 수 있도록 하여 실시간으로 전송되는 3D 영상 데이터의 전송에 용이하게 적용할 수 있는 동시에 시청자의 체감 해상도를 높일 수 있고, 다양한 3D 영상 데이터의 다중화 및 역 다중화 방식에 범용적으로 적용할 수 있으며 2D 영상 데이터와의 호환에도 아무런 제약이 없다.

Description

3Ｄ ＴＶ용 영상 데이터 변환 방법 및 장치{VIDEO DATA CONVERSION METHOD AND APPARATUS FOR 3Ｄ ＴＶ}
본 발명은 3D TV용 영상 데이터 변환 방법 및 장치에 관한 것으로서, 특히 3D TV용 영상 데이터의 다중화 및 역 다중화 시에 화면의 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션을 수행하여 시청자가 느끼는 화질 열화 현상을 최소화하도록 한 3D TV용 영상 데이터 변환 방법 및 장치에 관한 것이다.
최근 고 해상도(HD)급 이상을 지원하는 디지털 방송 시스템이 널리 보급되어 사용되고 있다.
또한, 이와 같은 디지털 방송 시스템의 발전과 함께 시청시 이보다 더욱 사실감을 제공하는 입체(3D) 영상 콘텐츠를 재생하는 기술이 디지털 TV(Television), 휴대폰, 디지털카메라, DVD(Digital Versatile Disk), PMP(Portable Multimedia Player) 등과 같은 다양한 디지털 영상기기를 중심으로 확산되고 있다.
이처럼, 상기 입체 영상 콘텐츠, 즉 좌, 우 영상을 동시에 제공하는 스테레오스코픽 콘텐츠는 입체감과 현실감이 뛰어나면서도 자연스러운 영상을 제공하여 최근 디지털 방송 시스템에서 많이 제공되고 있는 추세이다.
이에 따라, 스테레오스코픽 콘텐츠의 획득, 생성, 및 디스플레이 기술이 발전하면서 스테레오스코픽 콘텐츠를 이용한 응용 서비스 및 관련 기기에 대한 기술도 더불어 발전하고 있다.
도 1은 이와 같은 스테레오스코픽 콘텐츠를 제공하기 위해 좌,우 영상을 동시에 송출 및 재생하기 위한 일반적인 3D TV용 영상 데이터의 다중화 및 역 다중화 장치의 예시도이다.
도 1a는 3D TV용 다중화 장치의 예시도로서, 상기 3D TV용 다중화 장치는 신호 입력부(10), 다중화부(20) 및 신호 출력부(30)를 포함한다.
상기 신호 입력부(10)는 좌,우의 영상 신호를 입력받아 다중화부(20)로 전달한다.
상기 다중화부(20)는 상기 좌,우의 영상 신호를 전달받아 SMPTE 표준 규격의 영상 포맷으로 만들기 위해 상기 좌,우 영상 신호로 만들어지는 영상 데이터 중 일부를 삭제하는 프레임 데시메이터(21: Frame Decimator) 및 영상 포맷을 생성하는 SMPTE 포맷 생성부(22)를 포함한다.
이러한, 다중화 방식은 프레임 시퀀셜(Frame Sequential), 사이드 바이 사이드(Side-by-Side), 톱 바텀(Top Bottom), 라인 인터리브(Line Interleave), 컬럼 인터리브(Column Interleave) 등 다양한 방식이 있다.
상기 프레임 데시메이터(21)의 기능은 도 2에 더욱 상세히 도시하였다.
도 2를 참조하면, 상기 프레임 데시메이터(22)는 좌,우로 각각 분리되어 입력되는 스테레오 영상 신호(1)를 동시에 입력받아 이를 기 설정된 표준 영상 포맷(2)으로 만들기 위해, 도시한 바와 같이 상기 좌,우의 영상 신호(1)를 하나의 프레임 정보(2)로 만든다.
이후, 상기 신호 출력부(30)는 상기 생성된 포맷의 영상 데이터 신호를 출력한다.
이때 사용되는 표준 영상 포맷의 일 예로서는 SMPTE 292M, MPEG-4 등을 들 수 있다.
이러한 프레임 데시메이터(21)는 상기의 영상 표준 포맷의 구조적 제약 특성 또는 전송 매체의 물리적 용량의 제약 특성이나 표준 전송 규약의 한계로 인해 도시한 바와 같이 좌,우로 입력된 영상의 일부를 삭제(Decimation, 이하 '데시메이션'이라고 한다)하여 하나의 프레임으로 생성할 수밖에 없다.
도 1b는 3D TV용 역 다중화 장치의 예시도로서, 상기 3D TV용 역 다중화 장치는 신호 입력부(40), 역 다중화부(50) 및 신호 출력부(60)를 포함한다.
상기 신호 입력부(40)는 좌,우의 영상 데이터를 포함한 영상 신호를 입력받아 역 다중화부(50)로 전달한다.
상기 역 다중화부(50)는 상기 영상 신호를 전달받아 SMPTE 표준 규격의 영상 포맷으로 만들기 위해 상기 좌,우 영상 데이터를 포함한 영상 신호를 좌,우의 영상 신호로 역 다중화하며, 이때 만들어지는 영상 데이터를 확장하여 일부 보간하는 프레임 인터폴레이터(51:Frame Interpolator) 및 영상 포맷을 생성하는 SMPTE 포맷 생성부(52)를 포함한다.
이후, 상기 신호 출력부(60)는 상기 생성된 포맷의 영상 데이터의 신호를 출력한다.
상기 프레임 인터폴레이터(51)의 기능은 도 3 내지 도 4에 더욱 상세히 도시하였다.
도 3 내지 도 4를 참조하면, 상기 프레임 인터폴레이터(51)는 좌,우의 영상 데이터(3,5)를 포함한 프레임 데이터를 각각 분리하고, 이를 3D 영상의 시청을 위해 기 설정된 역 다중화 방식의 영상 정보(4,6)로 제공하기 위해, 도시한 바와 같이 상기 기 설정된 역 다중화 방식에 맞춰 적절히 프레임별 영상 데이터(4,6)로 생성한다.
상기 도 3 내지 도 4의 출력 영상은 이러한 역 다중화 방식의 대표적인 프레임 형태를 도시한 것으로서 도 3은 셔터 글래스 방식으로 구분되는 순차 출력 방식의 출력 영상 데이터(4)를 도시한 것이고, 도 4는 편광 필터 방식으로 이용하기 위한 출력 영상 데이터(6)를 도시한 것이다.
도 3에 도시한 순차 출력 방식은 3D 콘텐츠를 구성하는 좌,우 영상을 교대로 부호화하여 서비스하는 방법으로서, 기본 영상과 동일하게 풀(full) 해상도를 갖는 3D 영상을 제공할 수 있다.
그러나, 좌,우 영상 간의 동기화가 어려운 경우가 발생하거나 좌,우 영상 중 어느 한 영상이 깨지는 경우 다른 한 영상을 무시하고 서비스해야 하는 문제점이 있을 수도 있다.
도 4에 도시한 역 다중화 방식은 편광 필터 방식으로 이용하기 위해 각각 절반으로 축소되어 전송된 좌,우 영상을 분리하여 원래의 크기로 복원하는 방식이다.
이처럼, 프레임 인터폴레이터는 하나의 프레임 정보로 구성된 좌,우 영상 데이터를 기 설정된 역 다중화 방식에 맞추기 위해 일부 보간(Interpolation, 이하 '인터폴레이션'이라고 한다)을 수행하여 3D 콘텐츠의 재생을 위한 프레임 정보를 생성하므로 그 특성상 화질의 열화(수직 또는 수평 해상도의 저하)가 불가피하다.
상술한 바와 같이, 현재 디지털 영상의 표준 규격에 맞춰 3D 영상 콘텐츠를 제공하는 데에는 영상의 다중화에서 발생하는 데시메이션과 역 다중화에서 발생하는 인터폴레이션으로 인해 해상도의 저하가 발생하여 3D 영상 콘텐츠의 품질을 떨어트리는 중요한 요인이 되고 있다.
또한, 현재는 이러한 데시메이션과 인터폴레이션 수행시에 소정 화소에 해당하는 영상 데이터를 규칙적 혹은 선형적으로 삭제 및 보간하기 때문에 시청자가 시청하는 화면 전체에 대해 균일하게 품질 저하가 발생하여 3D 영상 콘텐츠 재생시 시청감이 매우 떨어지는 단점이 있는 실정이다.
한국 등록특허 10-0987775
전술한 문제점을 개선하기 위한 본 발명의 실시 예의 목적은 영상 데이터를 3D TV 화면의 소정 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역의 해상도를 관심 외 영역의 해상도에 비해 높게 유지하도록 한 3D TV용 영상 데이터 변환 방법 및 장치를 제공하는 것이다.
전술한 문제점을 개선하기 위한 본 발명의 실시 예의 목적은 각각의 화소에 해당하는 영상 데이터의 에너지 레벨 값을 계산하는 심 카빙 방식으로 비 선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역을 매우 빠른 속도로 데시메이션 및 인터폴레이션할 수 있도록 한 3D TV용 영상 데이터 변환 방법 및 장치를 제공하는 것이다.
상기한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 상기 3D TV용 영상 데이터 변환 방법은 3D 영상 데이터의 전송을 위해 프레임을 다중화하는 3D TV용 영상 데이터 변환 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 단계, 상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 단계 및 상기 데시메이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계를 포함한다.
상기 룰 관리 단계는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 것이 바람직하다.
이때, 상기 포맷 생성 단계는 상기 다중화 단계에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성할 수 있다.
또한, 상기 다중화 단계는 상기 좌,우 영상의 데이터가 하나의 스트림으로 구성되어 송출되도록 다중화하는 것이 바람직하다.
상기한 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른 3D TV용 영상 데이터 변환 방법은 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 단계, 상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계를 포함한다.
상기한 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른 3D TV용 영상 데이터 변환 방법은 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 단계, 상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계를 포함한다.
상기 룰 관리 단계는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비 선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 것이 바람직하다.
상기한 목적을 달성하기 위한 본 발명의 실시 예에 따른 3D TV용 영상 데이터 변환 장치는 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터의 전송을 위해 좌,우 영상을 하나의 프레임으로 다중화하는 3D TV용 영상 데이터 변환 장치로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 데시메이션 룰 관리부, 상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 데시메이션 실행부 및 상기 데시메이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부를 포함한다.
상기 3D TV용 영상 데이터 변환 장치는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부를 더 포함하고, 상기 데시메이션 실행부는 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하는 것이 바람직하다.
이때, 상기 신호 출력부는 상기 데시메이션 실행부에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성할 수 있다.
한편, 상기 데시메이션 실행부는 상기 좌,우 영상의 데이터가 하나의 스트림으로 구성되어 송출되도록 다중화하는 것이 바람직하다.
상기 인터폴레이션 실행부는 상기 좌,우 영상의 데이터를 사이드 바이 사이드, 톱 바텀 방식 중 하나로 다중화하는 것이 더욱 바람직하다.
상기한 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른 3D TV용 영상 데이터 변환 장치는 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치로서, 상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 삭제 화소 좌표 정보부, 상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부를 포함한다.
상기한 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른 3D TV용 영상 데이터 변환 장치는 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 인터폴레이션 룰 관리부, 상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부를 포함한다.
상기 3D TV용 영상 데이터 변환 장치는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 보간하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부를 더 포함하고, 상기 인터폴레이션 실행부는 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하는 것이 바람직하다.
본 발명의 실시 예에 따른 3D TV용 영상 데이터 변환 방법 및 장치는 영상 데이터를 3D TV 화면의 소정 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역의 해상도를 관심 외 영역의 해상도에 비해 높게 유지하도록 하여 기존의 일반적인 데시메이션 및 인터폴레이션 방식에 비해 시청자가 느끼는 화질 열화 현상을 최소화하는 효과가 있다.
본 발명의 실시 예에 따른 3D TV용 영상 데이터 변환 방법 및 장치는 각각의 화소에 해당하는 영상 데이터의 에너지 레벨 값을 계산하는 심 카빙 방식으로 비선형적으로 데시메이션 및 인터폴레이션함으로써 시청자의 주 관심 영역을 매우 빠른 속도로 데시메이션 및 인터폴레이션할 수 있도록 하여 실시간으로 전송되는 3D 영상 데이터의 전송에 용이하게 적용할 수 있는 동시에 시청자의 체감 해상도를 높이는 효과가 있다.
더불어, 본 발명의 실시 예에 따른 3D TV용 영상 데이터 변환 방법 및 장치는 다양한 3D 영상 데이터의 다중화 및 역 다중화 방식에 범용적으로 적용할 수 있으며 2D 영상 데이터와의 호환에도 아무런 제약이 없다.
도 1은 일반적인 3D TV용 영상 데이터의 다중화 및 역 다중화 장치.
도 2는 일반적인 3D TV용 프레임 데시메이터의 동작 예시도.
도 3 내지 도 4는 일반적인 3D TV용 프레임 인터폴레이터의 동작 예시도.
도 5는 본 발명의 일 실시 예에 따른 다중화부를 포함하는 3D TV용 영상 데이터 변환 장치의 구성도.
도 6은 본 발명의 일 실시 예에 따른 심 카빙 방식의 화면 예시도.
도 7은 본 발명의 일 실시 예에 따른 역 다중화부를 포함하는 3D TV용 영상 데이터 변환 장치의 구성도.
도 8은 본 발명의 일 실시 예에 따른 3D TV용 영상 데이터 변환 방법의 순서도.
상기한 바와 같은 본 발명을 첨부된 도면들과 실시 예들을 통해 상세히 설명하도록 한다.
도 5는 본 발명의 일 실시 예에 따른 다중화부(120)를 포함하는 3D TV용 영상 데이터 변환 장치(100)의 구성도로서, 상기 3D TV용 영상 데이터 변환 장치(100)는 신호 입력부(110), 다중화부(120), 신호 출력부(130)를 포함한다.
상기 3D TV용 영상 데이터 변환 장치(100)는 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터의 전송을 위해 좌,우 영상을 하나의 프레임으로 다중화하는 장치인 것이 바람직하나, 어떠한 영상 포맷이라도 관계없이 영상의 전송을 위해 영상 데이터의 데시메이션이 필요한 모든 규격의 영상 신호에 적용할 수 있음에 유의한다.
또한, 도 5에 도시한 영상 신호의 규격, 입,출력 흐름, 신호 변환은 예시적인 것일 뿐임에 유의한다.
상기 신호 입력부(110)는 SMPTE 292M 또는 아날로그 HDTV 신호 형태로 입력되는 좌, 우 두 채널의 고화질 영상신호를 수용하여 처리하며, 이를 위해 Y/C 영상 신호의 입력을 위한 YC 신호 입력부(111) 또는 R/G/B 영상 신호의 입력을 위한 RGB 신호 입력부(112)를 포함할 수 있다.
또한, 아날로그 HDTV 영상 신호 입력을 위하여 복합(Composite) 동기 신호가 입력되는 경우 이를 수평 및 수직 동기 신호로 분리한다. 아날로그 HDTV 신호 입력의 경우 입력되는 동기신호에 동기화되어 동작한다.
상기 다중화부(120)는 상기 신호 입력부(110)로부터 입력되는 고화질 스테레오 영상을 한 프레임 또는 한 채널로 다중화한다.
상기 다중화부(120)의 대표적인 다중화 방식으로는 사이드 바이 사이드, 톱 바텀 방식 등을 들 수 있다.
상기 다중화부(120)는 상기 신호 입력부(110)로부터 입력되는 좌,우 2 채널의 고화질 영상을 수평 방향(또는 수직 방향일 수 있음)으로 1/2 축소하여 한 프레임으로 다중화하는 프레임 데시메이션 기능을 갖는다.
또한, 상기 다중화부(120)는 상기 신호 입력부(110)로부터 입력되는 Y/C 영상 신호를 정확한 동기에 맞추어 다중화한다. 즉, 상기 신호 입력부(110)로부터 입력되는 좌, 우 2채널의 Y/Pb/Pr 또는 R/G/B 영상 신호를 정확한 동기에 맞추어 다중화한다. 이때, 영상 입력 신호가 R/G/B인 경우 이를 Y/Pb/Pr신호 형태로 변환하여 처리하는 것이 바람직하다.
바람직한 실시 예로서, 상기 다중화부(120)는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 데시메이션 룰 관리부(122), 상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 데시메이션 실행부(123)를 포함한다.
이후, 신호 출력부(130)가 상기 데시메이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성한다.
예를 들어, 상기 다중화부(120)는 화면의 수평 또는 수직의 중심 라인을 기준으로 거리에 따른 소정 범위의 영역들을 설정하고, 해당 영역별로 데시메이션의 가중치를 비선형적으로 부여하여 삭제할 수 있다.
혹은, 비 선형적 데시메이션, 인터폴레이션 함수를 기 설정하고 이를 통해 영역별 데시메이션 및 인터폴레이션을 수행할 수 있다.
또는, 영상 데이터 내 정보를 이용한 기 설정된 규칙에 따라 각 화소에 해당하는 영상 데이터의 에너지 레벨을 계산하여 에너지 레벨이 상대적으로 높은 쪽을 관심 영역으로 설정하고, 관심 영역의 데시메이션을 관심 외 영역과 다르게 비선형적으로 수행할 수 있다.
종래의 다중화부는 영상의 일부를 제거하여 화면의 크기를 맞추는 데시메이션을 실시하고, 추후 역 다중화부의 인터폴레이터에서 보간 방식을 통해 원래 크기로 만들었다.
이때, 종래의 다중화부에서는 영상을 관심 영역 등을 고려하지 않고 규칙적이거나 선형적으로 잘라내어 버리고 있으며 역 다중화부에서 보간 시에 인접 영상을 이용하여 보간하여 전체적인 영역에서 균일하게 해상도의 저하를 초래하는 문제가 있었다.
그러나, 본 발명에서는 라인 단위로 제거되는 영상을 중심 영상을 기준으로 하는 비선형 데시메이션, 인터폴레이션 함수를 이용하여 삭제, 보간하므로 시청자의 관심 영역 부분의 해상도를 관심 외 영역에 비해 높일 수 있다.
즉, 본 발명에서는 3D TV의 특성상 화면의 중심 부분에서 가장 입체감을 나타낼 수 있으므로 화면의 중심 영역 또는 에너지 레벨 등을 기준으로 하여 계산된 관심 영역을 기준으로 기 정의한 비선형적 함수 또는 규칙에 따라 데시메이션과 인터폴레이션을 실시하여 사람이 느낄 수 있는 시청 영역의 화질 열화를 최소화하는 것이다.
이는, 현재 표준 규격의 전혀 변경하지 않고 개선된 화질의 시청이 가능하고 입체감을 더욱 살릴 수 있는 장점이 있다.
또한, 본 발명은 일반적으로 현재 사용되는 표준 방식의 화소 삭제, 보간 방식을 근본적으로 개선할 수 있는 장점이 있으며, 특히 전송 표준 규격 또는 영상 표준 포맷 규격의 제약으로 인한 영상 데이터 용량의 한계 또는 전송 매체의 물리적 특성으로 인한 전송 용량의 한계 등으로 인해 다중화, 역 다중화에서 송출, 재생시에 발생하는 영상 데이터의 손실을 그대로 유지하면서도 시청자가 느끼는 해상도의 품질을 높일 수 있는 장점이 있다.
이처럼, 상기 3D TV용 영상 데이터 변환 장치(100)는 영상 데이터를 3D TV 화면의 소정 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션하여 시청자의 주 관심 영역의 해상도를 관심 외 영역의 해상도에 비해 높게 유지하도록 할 수 있어 기존의 일반적인 데시메이션 및 인터폴레이션 방식에 비해 시청자가 느끼는 화질 열화 현상을 최소화할 수 있다.
한편, 상기 다중화부(120)의 더욱 바람직한 실시 예로서, 상기 다중화부(120)는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 (Seam Carving)방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부(121)를 더 포함하고, 이때 상기 데시메이션 실행부(123)는 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하도록 구성할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 심 카빙 방식의 화면 예시도로서, 도 6 a는 입력되는 좌,우의 영상 데이터 중 일측의 영상이며, 도 6b는 수직 방향으로 1/2 데시메이션된 영상 데이터이다.
심 카빙 방식은 영상을 분석하여 에너지 레벨에 따라 에너지 레벨이 낮은 부분을 심(61: Seam)으로 정의하여 해당하는 픽셀들을 삭제하는 방식으로 원하는 수준까지 화면을 효과적으로 줄일 수 있으며, 이를 다시 복원하고자 하는 경우 삭제된 픽셀들을 역순으로 인접 픽셀들을 참조하여 복원할 수 있다.
도 6에 도시한 바와 같이, 심 카빙 방식을 이용하여 영상을 데시메이션 하는 경우 시청자의 주 관심 대상이 되는 관심 영역(62)들은 1/2 데시메이션 되었음에도 불구하고 관심 외 영역에 비해 높은 해상도를 그대로 유지하고 있다.
결국, 이러한 심 카빙에 의해 에너지 레벨이 높은 요소들은 가능한 픽셀정보를 유지하게 되는데, 이러한 심 카빙에 의해 삭제되는 픽셀들에 대한 정보를 별도로 저장하여 영상과 함께 전달해 줄 필요가 있다. 하지만 이러한 삭제 픽셀들의 위치는 기준좌표로부터 큰 편차를 가지지 않기 때문에 기준 픽셀과 그에 따른 편차 정보들 만 저장하도록 하여 삭제 픽셀 위치에 대한 정보 크기를 줄일 수 있으며, 해당 정보는 압축에 대한 부담이 작기 때문에 영상과 함께 보낸다 하더라도 시스템 부하는 크지 않으며, 역다중화부에서 이를 수신하여 원래의 영상을 복원하는 경우에도 해당 정보를 처리하는 부하는 크지 않게 된다.
특히, 이러한 심 카빙 기법의 경우 이를 단독으로 사용할 수도 있으나 일정한 수준으로 심 카빙을 실시한 후 일반적인 데시메이션 방식을 적용하거나 소정의 함수를 이용하는 데시메이션 방식을 적용할 경우 데시메이션에 의한 중요 요소에 대한 해상도 저하를 크게 줄일 수 있으면서도 연산 부하를 최소화할 수 있게 된다.
이처럼, 상기 3D TV용 영상 데이터 변환 장치(100)는 각각의 화소에 해당하는 영상 데이터의 에너지 레벨 값을 계산하는 심 카빙 방식으로 비선형적으로 데시메이션 및 인터폴레이션하여 시청자의 주 관심 영역을 매우 빠른 속도로 데시메이션 및 인터폴레이션할 수 있으므로 실시간으로 전송되는 3D 영상 데이터의 전송에 용이하게 적용할 수 있는 동시에 시청자의 체감 해상도를 높일 수 있는 장점이 있다.
상기 다중화부(120)는 수평, 수직 동기신호를 입력받는 동기신호 입력부(124) 및 다중화 방법의 선택 신호를 입력받는 다중화 방법 설정부(125)를 포함하는 것이 바람직하다.
한편, 상기 신호 출력부(130)는 다중화된 고화질 영상 신호를 SMPTE 292M 또는 HDTV 아날로그 신호 형태로 출력하며, 이를 위해 동기신호를 생성하는 동기신호 생성부(131) 및 출력 신호의 변환을 위한 출력 신호 변환부(132)를 포함하는 것이 바람직하다.
또한, 상기 신호 출력부(130)는 상기 데시메이션 실행부(123)에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 것이 바람직하다.
이때, 상기 데시메이션 실행부(123)는 상기 좌,우 영상의 데이터가 하나의 스트림으로 구성되어 송출되도록 다중화하는 것이 바람직하다.
도 7은 본 발명의 일 실시 예에 따른 역 다중화부(230)를 포함하는 3D TV용 영상 데이터 변환 장치의 구성도로서, 상기 3D TV용 영상 데이터 변환 장치(200)는 신호 입력부(210), 역 다중화부(230), 신호 출력부(240)를 포함한다.
상기 3D TV용 영상 데이터 변환 장치(200)는 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 장치인 것이 바람직하나, 어떠한 영상 포맷이라도 관계없이 본 발명의 실시 예에 따른 기 설정된 데시메이션의 방식으로 생성된 영상의 인터폴레이션이 필요한 모든 규격의 영상 신호에 적용할 수 있음에 유의한다.
또한, 도 5와 상술한 바와 같이 도 7에 도시한 영상 신호의 규격, 입,출력 흐름, 신호 변환도 예시적인 것일 뿐임에 유의한다.
상기 신호 입력부(210)는 SMPTE 292M 또는 아날로그 HDTV 신호 형태로 입력되는 다중화된 고화질 영상신호를 입력받아 처리한다.
상기 역 다중화부(230)는 상기 신호 입력부(210)로부터 입력되는 고화질 다중화 영상을 좌, 우 두 채널의 스테레오 영상으로 분리, 복원하는 역 다중화를 실행한다.
이때, 상기 역 다중화부(230)는 다중화된 한 채널의 고화질 영상을 좌,우 영상으로 분리,복원한 후 1채널로 출력하거나, 수평 방향(또는 수직 방향일 수 있음)으로 1/2 축소하여 한 프레임으로 다중화된 고화질 영상을 좌,우 영상으로 분리, 복원하는 프레임 인터폴레이션 기능을 수행한다.
상기 역 다중화부(230)는 상기 신호 입력부(210) 내 YC 신호 입력부(211)로부터 입력되는 Y/C 영상 신호를 정확한 동기에 맞추어 역 다중화한다.
또는, 상기 역 다중화부(230)는 신호 입력부(210)의 RGB 신호 입력부(212)로부터 입력되는 Y/Pb/Pr 또는 R/G/B 영상 신호를 정확한 동기에 맞추어 역 다중화한다. 영상입력 신호가 R/G/B인 경우 이를 Y/Pb/Pr 신호 형태로 변환하여 처리하는 것이 바람직하다.
또한, 상기 역 다중화부(230)는 상기 신호 입력부(210)로부터 입력되는 다중화된(30프레임/초) 고화질 영상 신호를 순차 방식으로 역 다중화하거나, 수평 또는 수직 방향으로 분리, 복원하여 역 다중화할 수 있다.
바람직한 실시 예로서, 상기 역 다중화부(230)는 상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 삭제 화소 좌표 정보부(231), 상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부(232)를 포함한다.
이때, 신호 출력부(240)는 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성한다.
한편 상기 역 다중화부(230)의 다른 바람직한 실시 예로서, 상기 역 다중화부(230)는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 인터폴레이션 룰 관리부(236), 상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부(232)를 포함할 수 있다.
이때, 신호 출력부(240)는 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성한다.
또는, 또 다른 바람직한 실시 예로서, 상기 역 다중화부(230)는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 보간하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부(235)를 더 포함하고, 이때 상기 인터폴레이션 실행부(232)가 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하도록 구성할 수 있다.
이처럼, 상기 3D TV용 영상 데이터 변환 장치(200)는 영상 데이터를 3D TV 화면의 소정 중심 영역 또는 기 설정된 관심 영역을 기준으로 비선형적으로 데시메이션 및 인터폴레이션하여 시청자의 주 관심 영역의 해상도를 관심 외 영역의 해상도에 비해 높게 유지할 수 있으므로 기존의 일반적인 데시메이션 및 인터폴레이션 방식에 비해 시청자가 느끼는 화질 열화 현상을 최소화할 수 있다.
한편, 상기 역 다중화부(230)는 수평, 수직 동기신호를 입력받는 동기신호 입력부(233) 및 역 다중화 방법의 선택 신호를 입력받는 역 다중화 방법 설정부(234)를 포함하는 것이 바람직하다.
상술한 바와 같이, 상기 신호 출력부(240)는 역 다중화된 고화질 영상 신호를 좌, 우 두 채널의 SMPTE 292M 또는 HDTV 아날로그 신호형태로 출력한다.
이때, 상기 신호 출력부(240)는 다중화된 고화질 영상 신호를 SMPTE 292M 또는 HDTV 아날로그 신호 형태로 출력하며, 이를 위해 동기신호를 생성하는 동기신호 생성부(241) 및 출력 신호의 변환을 위한 출력 신호 변환부(242)를 포함하는 것이 바람직하다.
더불어, 본 발명 실시 예에 따른 3D TV용 영상 데이터 변환 장치(200)는 다양한 3D 영상 데이터의 다중화 및 역 다중화 방식에 범용적으로 적용할 수 있으며 2D 영상 데이터와의 호환에도 아무런 제약이 없다.
도 8은 본 발명의 일 실시 예에 따른 3D TV용 영상 데이터 변환 방법의 순서도이다.
상기 3D TV용 영상 데이터 변환 방법은 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터의 전송을 위해 프레임을 다중화하는 3D TV용 영상 데이터 변환 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 단계(S810, S820), 상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 단계(S830) 및 상기 데시메이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계(S840, S850)를 포함한다.
상기 룰 관리 단계(S820)는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 것이 바람직하다.
이때, 상기 포맷 생성 단계(S840)는 상기 다중화 단계에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성할 수 있다.
또한, 상기 다중화 단계(S830)는 상기 좌,우 영상의 데이터가 하나의 스트림으로 구성되어 송출되도록 다중화하는 것이 바람직하다.
한편, 도시하지는 않았지만 본 발명의 다른 실시 예에 따른 3D TV용 영상 데이터 변환 방법은 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 단계, 상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계를 포함한다.
또한, 도시하지는 않았지만 본 발명의 또 다른 실시 예에 따른 3D TV용 영상 데이터 변환 방법은 디지털 TV 방송의 표준 규격을 준수하는 방송 시스템에서 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 장치의 3D TV용 영상 데이터 변환 방법으로서, 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 단계, 상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계 및 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 단계를 포함한다.
상기 룰 관리 단계는 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비 선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 것이 바람직하다.
이상에서는 본 발명에 따른 바람직한 실시 예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시 예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
100: 다중화 장치 110:신호 입력부
111: YC 신호입력부 112: RGB 신호입력부
120: 다중화부 121: 심카빙 정보부
122: 데시메이션 룰 관리부 123: 데시메이션 실행부
124: 동기신호 입력부 125: 다중화 방법 설정부
130: 신호 출력부 131: 동기신호 생성부
132: 출력신호 변환부 200: 역 다중화 장치
211: YC 신호입력부 212: RGB 신호입력부
230: 역 다중화부 231: 삭제 화소 좌표 정보부
232: 인터폴레이션 실행부 233: 동기신호 입력부
234: 역 다중화 방법 설정부 235: 심 카빙 룰 관리부
236: 인터폴레이션 룰 관리부 240: 신호 출력부
241: 동기신호 생성부 242: 출력신호 변환부

Claims (15)

  1. 3D 영상 데이터의 전송을 위해 프레임을 다중화하는 3D TV용 영상 데이터 변환 장치의 3D TV용 영상 데이터 변환 방법에 있어서,
    a) 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 단계;
    b) 상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 단계; 및
    c) 상기 데시메이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 단계;를 포함하는 3D TV용 영상 데이터 변환 방법.
  2. 제 1항에 있어서, 상기 a) 단계는
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 단계;인 것을 특징으로 하는 3D TV용 영상 데이터 변환 방법.
  3. 제 2항에 있어서, 상기 c) 단계는
    상기 b) 단계에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 방법.
  4. 제 1항에 있어서, 상기 b) 단계는
    상기 좌,우 영상의 데이터를 사이드 바이 사이드, 톱 바텀 방식 중 하나로 다중화하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 방법.
  5. 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치의 3D TV용 영상 데이터 변환 방법에 있어서,
    a) 상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 단계;
    b) 상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계; 및
    c) 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 단계;를 포함하는 3D TV용 영상 데이터 변환 방법.
  6. 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치의 3D TV용 영상 데이터 변환 방법에 있어서,
    a) 상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 단계;
    b) 상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 단계; 및
    c) 상기 인터폴레이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 단계;를 포함하는 3D TV용 영상 데이터 변환 방법.
  7. 제 6항에 있어서, 상기 a) 단계는
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 단계;인 것을 특징으로 하는 3D TV용 영상 데이터 변환 방법.
  8. 3D 영상 데이터의 전송을 위해 좌,우 영상을 하나의 프레임으로 다중화하는 3D TV용 영상 데이터 변환 장치에 있어서,
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 삭제하도록 하는 데시메이션 룰을 관리하는 데시메이션 룰 관리부;
    상기 데시메이션 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하여 다중화하는 데시메이션 실행부; 및
    상기 데시메이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부;를 포함하는 3D TV용 영상 데이터 변환 장치.
  9. 제 8항에 있어서,
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 삭제하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부;를 더 포함하고,
    상기 데시메이션 실행부는 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 데시메이션을 실행하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 장치.
  10. 제 9항에 있어서, 상기 신호 출력부는
    상기 데시메이션 실행부에서 데시메이션된 화소의 좌표 정보를 포함하여 상기 표준 규격에 맞춘 영상 포맷으로 생성하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 장치.
  11. 제 8항에 있어서, 상기 데시메이션 실행부는
    상기 좌,우 영상의 데이터가 하나의 스트림으로 구성되어 송출되도록 다중화하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 장치.
  12. 제 8항에 있어서, 상기 데시메이션 실행부는
    상기 좌,우 영상의 데이터를 사이드 바이 사이드, 톱 바텀 방식 중 하나로 다중화하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 장치.
  13. 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치에 있어서,
    상기 3D 영상 데이터 중 기 정의된 형식으로 포함된 비선형적으로 삭제된 화소의 좌표 정보를 전송받아 관리하는 삭제 화소 좌표 정보부;
    상기 삭제 화소의 좌표 정보를 이용하여 상기 삭제 화소에 해당하는 영상 데이터에 대해 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부; 및
    상기 인터폴레이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부;를 포함하는 3D TV용 영상 데이터 변환 장치.
  14. 3D 영상 데이터를 전송받아 하나의 프레임으로 다중화된 좌,우 영상을 역 다중화하는 3D TV용 영상 데이터 변환 장치에 있어서,
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 화면의 중심 영역 또는 기 설정된 룰에 따라 지정되는 관심 영역을 기준으로 하여 비선형적으로 보간하도록 하는 인터폴레이션 룰을 관리하는 인터폴레이션 룰 관리부;
    상기 인터폴레이션 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하여 역 다중화하는 인터폴레이션 실행부; 및
    상기 인터폴레이션이 실행된 좌,우 영상 데이터를 디지털 TV 방송의 표준 규격에 맞춘 영상 포맷으로 생성하는 신호 출력부;를 포함하는 3D TV용 영상 데이터 변환 장치.
  15. 제 14항에 있어서,
    상기 좌,우 영상의 데이터 중 소정 화소에 해당하는 영상 데이터들을 기 설정된 심 카빙 방식으로 에너지 레벨 값을 계산하여 비선형적으로 보간하도록 하는 심 카빙 룰을 관리하는 심 카빙 룰 관리부;를 더 포함하고,
    상기 인터폴레이션 실행부는 상기 심 카빙 룰을 이용하여 상기 좌,우 영상 데이터의 인터폴레이션을 실행하는 것을 특징으로 하는 3D TV용 영상 데이터 변환 장치.
KR1020110090940A 2011-09-07 2011-09-07 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치 KR101107153B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110090940A KR101107153B1 (ko) 2011-09-07 2011-09-07 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110090940A KR101107153B1 (ko) 2011-09-07 2011-09-07 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치

Publications (1)

Publication Number Publication Date
KR101107153B1 true KR101107153B1 (ko) 2012-01-31

Family

ID=45614484

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110090940A KR101107153B1 (ko) 2011-09-07 2011-09-07 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101107153B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110049242A (zh) * 2019-04-18 2019-07-23 腾讯科技（深圳）有限公司 一种图像处理方法和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030054360A (ko) * 2001-12-24 2003-07-02 주식회사 케이티 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치 및그 방법
KR20090037247A (ko) * 2007-10-11 2009-04-15 최명렬 다중 초점 2차원 영상을 이용한 3차원 입체 영상 변환 방법및 변환 장치와 이를 위한 기록매체

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030054360A (ko) * 2001-12-24 2003-07-02 주식회사 케이티 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치 및그 방법
KR20090037247A (ko) * 2007-10-11 2009-04-15 최명렬 다중 초점 2차원 영상을 이용한 3차원 입체 영상 변환 방법및 변환 장치와 이를 위한 기록매체

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110049242A (zh) * 2019-04-18 2019-07-23 腾讯科技（深圳）有限公司 一种图像处理方法和装置

Similar Documents

Publication Publication Date Title
US10055814B2 (en) Image processing device and image processing method
US8384766B2 (en) Apparatus for processing a stereoscopic image stream
US9148646B2 (en) Apparatus and method for processing video content
KR101797495B1 (ko) 디지털 수신기 및 디지털 수신기에서의 캡션 데이터 처리 방법
JP6037567B2 (ja) ２次元にも対応する立体映像フローのデコード方法
JP2004274125A (ja) 画像処理装置および方法
JP6040932B2 (ja) 立体視に対応したビデオストリームを生成、再構築する方法、および関連する符号化および復号化デバイス
US20140368610A1 (en) Method and device for generating, storing, transmitting, receiving and reproducing depth maps by using the color components of an image belonging to a three-dimensional video stream
JP4222817B2 (ja) 立体画像表示装置、記録方法、及び伝送方法
US9357200B2 (en) Video processing device and video processing method
WO2011155418A1 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP4657258B2 (ja) 立体画像表示装置およびその方法
TW201415864A (zh) 用於產生、傳送及接收立體影像之方法，以及其相關裝置
JP5941000B2 (ja) 映像配信装置及び映像配信方法
JP6028965B2 (ja) 奥行マップの再標本化装置およびその方法、プログラム、並びに奥行マップの再標本化システム
EP2676446B1 (en) Apparatus and method for generating a disparity map in a receiving device
JP4173684B2 (ja) 立体画像作成装置
KR101107153B1 (ko) 3ｄ ｔｖ용 영상 데이터 변환 방법 및 장치
KR101742993B1 (ko) 디지털 방송 수신기 및 디지털 방송 수신기에서 3ｄ 효과 제공 방법
WO2004030377A1 (ja) 立体画像表示装置、記録方法、及び伝送方法
KR101433082B1 (ko) 2차원 영상과 3차원 영상의 중간 정도 느낌을 주는 영상 변환 및 재생 방법
KR101112085B1 (ko) 3ｄ ｔｖ용 역 다중화 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141027

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160111

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170111

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180111

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20200113

Year of fee payment: 9