KR20130011506A

KR20130011506A - 3ｄ 디스플레이 장치 및 컨텐츠 출력 방법

Info

Publication number: KR20130011506A
Application number: KR1020110072695A
Authority: KR
Inventors: 이대봉
Original assignee: 삼성전자주식회사
Priority date: 2011-07-21
Filing date: 2011-07-21
Publication date: 2013-01-30
Also published as: US20130021454A1; CN102892024A; EP2549768A2; EP2549768A3; JP2013027049A

Abstract

3D 디스플레이 장치의 컨텐츠 출력 방법이 개시된다. 본 컨텐츠 출력 방법은 컨텐츠 신호에 포함된 비디오 신호를 처리하여, 화면 상에 디스플레이하는 단계, 컨텐츠 신호에 포함된 오디오 신호를 처리하여, 화면에 동기시켜 출력하는 단계 및 오디오 신호의 크기에 따라, 화면에 표시되는 자막의 입체감을 개별적으로 변경하는 단계를 포함한다.

Description

3Ｄ 디스플레이 장치 및 컨텐츠 출력 방법 {Three dimonsional display apparatus and method for displaying a content using the same}

본 발명은 3D 디스플레이 장치 및 컨텐츠 출력 방법에 관한 것으로, 보다 상세하게는 자막과 함께 컨텐츠를 3차원 영상으로 제공하는 3D 디스플레이 장치 및 컨텐츠 출력 방법에 관한 것이다.

최근 전자 기기의 발전에 힘입어, 3차원 입체 영상을 제공하는 기기 및 다양한 컨텐츠의 보급으로 일반 사용자들은 가정에서도 손쉽게 3차원 입체 영상을 시청할 수 있게 되었다.

이를 통해, 사용자들은 입체감이 부여된 다양한 컨텐츠를 시청할 수 있게 되어, 보다 현실감 있는 컨텐츠를 접할 수 있게 되었다.

한편, 초고속 통신망 등의 비약적인 발전으로, 사용자들은 외국어로 제작된 컨텐츠들을 쉽게 접할 수 있게 되었다. 외국어로 제작된 컨텐츠의 경우 시청자의 이해를 돕기 위해 자막이 영상 내에 표시된다.

또한, 외국어로 제작된 컨텐츠뿐만 아니라, 국어로 제작된 컨텐츠의 경우라도 해당 컨텐츠의 재미를 더하기 위해 영상 내에 자막을 표시하는 경우가 빈번하다.

따라서, 자막이 부가된 컨텐츠를 3차원 입체 영상으로 제공함에 있어, 보다 효율적이고 현실감 있는 3차원 입체 영상을 제공할 수 있는 방안의 모색이 요청된다.

본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 컨텐츠 신호에 포함된 오디오 신호의 크기에 따라 화면에 표시되는 자막의 입체감을 개별적으로 조절할 수 있는 3D 디스플레이 장치 및 컨텐츠 출력 방법을 제공함에 있다.

상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른, 3D 디스플레이 장치의 컨텐츠 출력 방법은 컨텐츠 신호에 포함된 비디오 신호를 처리하여, 화면 상에 디스플레이하는 단계, 상기 컨텐츠 신호에 포함된 오디오 신호를 처리하여, 상기 화면에 동기시켜 출력하는 단계 및 상기 오디오 신호의 크기에 따라, 상기 화면에 표시되는 자막의 입체감을 개별적으로 변경하는 단계를 포함한다.

이 경우, 상기 자막의 입체감을 개별적으로 변경하는 단계는, 상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 감소시킬 수 있다.

이 경우, 상기 디스플레이하는 단계는, 기 설정된 입체감을 가지는 객체를 상기 화면 상에 디스플레이하고, 상기 객체가 발화하는 발화 음성의 크기가 상기 임계 범위 내이면 상기 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 상기 화면에 함께 디스플레이할 수 있다.

한편, 상기 자막의 입체감을 개별적으로 변경하는 단계는, 상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한값으로 감소시킬 수 있다.

한편, 상기 디스플레이하는 단계는, 서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시할 수 있다.

본 발명의 다른 실시 예에 따른 3D 디스플레이 장치는 컨텐츠 신호에 포함된 비디오 신호 및 오디오 신호에 대한 신호 처리를 수행하는 영상 처리부, 상기 처리된 영상 신호를 화면 상에 디스플레이하고, 상기 처리된 오디오 신호를 출력하는 출력부 및 상기 오디오 신호를 화면에 동기시켜 출력하도록 상기 출력부를 제어하고, 상기 오디오 신호의 크기에 따라 상기 화면에 표시되는 자막의 입체감을 개별적으로 변경하는 제어부를 포함한다.

이 경우, 상기 제어부는, 상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 감소시킬 수 있다.

이 경우, 상기 제어부는, 기 설정된 입체감을 가지는 객체를 상기 화면 상에 디스플레이하고, 상기 객체가 발화하는 발화 음성의 크기가 상기 임계 범위 내이면 상기 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 상기 화면에 함께 디스플레이하도록 제어할 수 있다.

한편, 상기 제어부는, 상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한값으로 감소시킬 수 있다.

한편, 상기 제어부는, 서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시하도록 제어할 수 있다.

이상과 같은 본 발명의 다양한 실시 예에 따르면, 오디오 신호의 크기에 따라 화면에 표시되는 자막의 입체감을 개별적으로 변경할 수 있으므로, 보다 다이나믹한 입체영상을 사용자에게 제공할 수 있게 된다.

도 1은 본 발명의 일 실시 예에 따른 컨텐츠 출력 방법을 제공하는 시스템을 도시한 도면,
도 2는 본 발명의 일 실시 예에 따른 3D 디스플레이 장치의 구성을 나타내는 블록도,
도 3은 본 발명은 일 실시 예에 따른 3D 디스플레이 장치의 세부구성을 나타내는 블록도,
도 4a 내지 도 6은 본 발명의 일 실시 예에 따라 자막에 대한 3D 영상이 컨텐츠에 대한 3D 영상에 오버랩되어 출력되는 내용을 설명하기 위한 도면 그리고,
도 7은 본 발명의 일 실시 예에 따른 3D 디스플레이 장치의 컨텐츠 출력 방법을 설명하는 흐름도이다.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.

도 1은 본 발명의 일 실시 예에 따른 컨텐츠 출력 방법을 제공하는 시스템을 도시한 도면이다. 도시된 바와 같이, 3D 영상을 화면에 표시하기 위한 3D 디스플레이 장치(100) 및 3D 영상을 시청하기 위한 3D 안경(200)으로 구성된다.

3D 디스플레이 장치(100)는 컨텐츠 영상을 출력하고, 컨텐츠 영상에 대응되는 자막을 컨텐츠 영상에 오버랩하여, 3D 디스플레이 장치(100)에 구비된 화면 상에 출력할 수 있다.

구체적으로, 본 3D 디스플레이 장치(100)는 컨텐츠 신호에 포함된 컨텐츠에 대한 좌안 영상 및 우안 영상에 자막에 대한 좌안 영상 및 우안 영상을 각각 오버랩하고, 오버랩된 좌안 영상 및 우안 영상을 교번적으로 출력하여 사용자에게 3차원적인 입체 영상을 제공할 수 있다.

이 경우, 3D 디스플레이 장치(100)는 컨텐츠 신호에 포함된 오디오 신호의 크기에 따라 자막에 대한 좌안 영상과 우안 영상의 시차를 조절함으로써, 화면에 표시되는 자막의 입체감을 개별적으로 부여할 수 있다.

이에 따라, 사용자들은 오디오 신호의 크기에 따라 3차원적으로 변경되는 자막을 제공받을 수 있어, 보다 다이나믹한 3차원 영상을 제공할 수 있다.

3D 안경(200)은 액티브 타입의 셔터 글래스(shutter glass)으로 구현될 수 있다. 셔터 글래스 방식은 양쪽 눈의 시차를 이용한 디스플레이 방법으로서, 3D 디스플레이 장치(100)에서 재생되는 좌·우 영상 프레임과 3D 안경 좌우 양안의 온-오프를 동기화하여, 각각 다른 각도에서 관찰된 영상이 두뇌작용으로 인한 공간감을 인식하도록 하는 방식이다. 즉, 3D 디스플레이 장치(100)의 좌·우 영상 동기 신호에 따라 3D 안경(200)의 좌·우측 글래스가 선택적으로 개폐되면서 3D 입체 영상이 만들어질 수 있다.

한편, 본 발명의 일 실시 예에 따른 입체영상을 제공하는 시스템은 3D 영상을 생성하기 위한 카메라(미도시)를 더 포함할 수 있다.

카메라(미도시)는 3D 영상을 생성하기 위한 촬영 장치의 일종으로서, 사용자의 좌안에 제공하기 위한 목적으로 촬영된 좌안 영상과 사용자의 우안에 제공하기 위한 목적으로 촬영된 우안 영상을 생성한다. 즉, 3D 영상은 좌안 영상과 우안 영상으로 구성되며, 이러한 좌안 영상과 우안 영상이 사용자의 좌안과 우안에 각각 교번적으로 제공되면서, 양안 시차에 의한 입체감이 발생되게 된다.

이를 위해, 카메라(미도시)는 좌안 영상을 생성하기 위한 좌안 카메라와 우안 영상을 생성하기 위한 우안 카메라로 구성되고, 좌안 카메라와 우안 카메라 간의 간격은, 사람의 두 눈 간의 이격 간격으로부터 고려되게 된다.

카메라(미도시)는 촬영된 좌안 영상과 우안 영상을 3D 디스플레이 장치(100)로 전달한다. 특히, 카메라(미도시)가 3D 디스플레이 장치(100)로 전달하는 좌안 영상과 우안 영상은, 하나의 프레임에 좌안 영상 및 우안 영상 중 하나의 영상만으로 구성된 포맷으로 전달되거나, 하나의 프레임에 좌안 영상과 우안 영상이 모두 포함되도록 구성된 포맷으로 전달될 수 있다.

카메라(미도시)는 다양한 3D 영상의 포맷들 중 하나의 포맷을 미리 결정하고, 결정된 포맷에 따라 3D 영상을 생성하여 3D 디스플레이 장치(100)로 전달할 수 있다.

한편, 도 1에서는 3D 디스플레이 장치(100)가 3D TV인 것으로 도시하였으나, 이는 일 실시 예에 불과하며, 본 3D 디스플레이 장치(100)는 디지털 TV, 이동통신 단말기, 이동 전화기, 개인 정보 단말기(PDA, Personal Digital Assistant), 스마트 폰(Smart Phone), 디지털 멀티미디어 방송(DMB, Digital Multimedia Broadcasting) 폰, MP3 플레이어, 오디오(Audio) 기기, 휴대용 텔레비전, 디지털 카메라 등과 같이 3D 영상의 디스플레이가 가능한 모든 장치들로 구현가능하다.

도 2는 본 발명의 일 실시 예에 따른 3D 디스플레이 장치(100)의 구성을 나타내는 블록도이다. 도 2에 따르면, 3D 디스플레이 장치(100)는 영상 처리부(110), 출력부(120) 및 제어부(130)를 포함한다.

영상 처리부(110)는 컨텐츠 신호에 포함된 비디오 신호 및 오디오 신호에 대한 신호 처리를 수행한다. 구체적으로, 영상 처리부(110)는 컨텐츠 신호에 포함된 비디오 신호 및 오디오 신호에 대해 비디오 디코딩, 비디오 포맷 분석, 비디오 스케일링, 오디오 디코딩 등의 신호처리를 수행할 수 있다.

출력부(120)는 처리된 비디오 신호를 화면 상에 디스플레이하고, 처리된 오디오 신호를 출력할 수 있다. 이를 위해, 출력부(110)는 비디오 신호를 디스플레이하기 위한 디스플레이부(미도시) 및 오디오 신호를 출력하기 위한 오디오 출력부(미도시)를 구비할 수 있다.

제어부(130)는 오디오 신호를 화면에 동기시켜 출력하고, 오디오 신호의 출력 크기에 따라 화면에 표시되는 자막의 입체감을 개별적으로 변경할 수 있다.

구체적으로, 제어부(130)는 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 감소시킬 수 있다.

여기서, 제어부(130)는 기 설정된 입체감을 가지는 객체를 화면 상에 디스플레이하고, 객체가 발화하는 발화 음성의 크기가 임계 범위 내이면 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 상기 화면에 함께 디스플레이하도록 제어할 수 있다.

또한, 제어부(130)는 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한값으로 감소시킬 수 있다.

한편, 서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 제어부(130)는 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시하도록 제어할 수 있다.

이하에서, 첨부된 도 3을 참조하여 본 발명을 보다 상세히 설명한다.

도 3은 본 발명의 일 실시 예에 따른 3D 디스플레이 장치(100)의 세부구성을 나타내는 블록도이다. 도 3에 따르면, 3D 디스플레이 장치(100)는 영상 처리부(110), 출력부(120), 제어부(130), 수신부(140), 저장부(150), 사용자 인터페이스부(160) 및 동기 신호 처리부(170)를 포함한다.

수신부(140)는 방송국 또는 위성으로부터 유선 또는 무선으로 방송 신호를 수신하여 복조한다. 이를 위해, 수신부(140)는 적어도 하나의 튜너를 구비할 수 있으며, 경우에 따라 복수 개의 튜너를 구비하여, 복수 개의 채널에서 동시에 방송 신호를 수신할 수도 있다.

그리고, 수신부(140)는 방송 신호를 비디오 신호, 오디오 신호 및 부가 정보로 각각 분리할 수 있다.

또한, 수신부(140)는 카메라, DVD 플레이어 등과 연결되어 외부 소스로부터 비디오 신호, 오디오 신호 및 부가 정보를 포함하는 컨텐츠 신호를 입력받을 수 있다. 이 경우, 수신부(140)는 외부 소스와 무선으로 연결되거나 S-Video, 컴포넌트, 컴포지트, D-Sub, DVI, HDMI 등의 인터페이스를 통해 유선으로 연결될 수 있다.

여기서, 특정 채널을 통해 수신되는 방송 신호 및 외부 소스로부터 입력되는 신호는 특정 컨텐츠에 대한 비디오 신호, 오디오 신호 및 부가 정보를 포함한다는 점에서, 이하에서는 이들을 컨텐츠 신호로 기재하도록 한다.

한편, 컨텐츠 신호에 포함된 비디오 신호에는 컨텐츠에 대한 2D 영상 및 3D 영상이 포함될 수 있다.

그리고, 부가 정보에는 해당 컨텐츠 영상에 대응되는 자막 및 자막에 표시되는 시간 정보가 포함될 수 있으며, 비디오 신호가 3D 영상을 포함하는 경우, 부가 정보에는 3D 영상을 구성하는 각 객체의 입체감에 대한 정보가 포함될 수 있다. 여기서, 입체감이란 3D 영상에서 해당 객체의 깊이 값을 의미할 수 있다.

그리고, 수신부(110)는 비디오 신호, 오디오 신호 및 부가 정보를 영상 처리부(120)로 전달할 수 있다.

여기서, 3D 영상은 적어도 하나의 프레임으로 구성된 영상으로서, 하나의 영상 프레임에 좌안 영상과 우안 영상이 포함되거나 각 프레임이 좌안 영상 또는 우안 영상으로 구성된 영상을 의미한다. 즉, 3D 영상은, 다양한 3D 포맷들 중 하나에 따라 생성된 영상이다.

따라서, 수신부(140)로 수신되는 3D 영상은 다양한 포맷으로 될 수 있으며, 특히, 일반적인 탑-바톰(top-bottom) 방식, 사이드 바이 사이드(side by side) 방식, 수평 인터리브(horizontal interleave) 방식, 수직 인터리브(vertical interleave) 방식 또는 체커보드(checker board) 방식, 시퀀셜 프레임(sequential frame) 중 하나에 따른 포맷으로 될 수 있다.

영상 처리부(110)는 수신부(140)로부터 수신된 비디오 신호 및 오디오 신호에 대해 신호 처리를 수행한다. 구체적으로, 영상 처리부(110)는 비디오 신호 및 오디오 신호에 대해 비디오 디코딩, 비디오 포맷 분석, 비디오 스케일링, 오디오 디코딩 등의 신호처리를 수행하여, 출력부(120)에 구비된 디스플레이부(미도시) 및 오디오 출력부(미도시)에서 출력될 수 있는 형태로 비디오 신호 및 오디오 신호에 대해 신호 처리를 수행할 수 있다.

또한, 영상 처리부(110)는 수신부(140)로 입력된 3D 영상의 포맷을 이용하여, 한 화면의 크기(예를 들어, 1920*1080)에 해당하는 좌안 영상과 우안 영상을 각각 생성한다.

예를 들어, 3D 영상의 포맷이 탑-바톰(top-bottom) 방식, 사이드 바이 사이드(side by side) 방식, 수평 인터리브(horizontal interleave) 방식, 수직 인터리브(vertical interleave) 방식 또는 체커보드(checker board) 방식, 시퀀셜 프레임(sequential frame)에 따른 포맷일 경우, 영상 처리부(110)는 각 영상 프레임에서 좌안 영상 부분과 우안 영상 부분을 각각 추출하여, 추출된 좌안 영상과 우안 영상을 확대 스케일링 또는 보간함으로써, 사용자에게 제공하기 위한 좌안 영상과 우안 영상을 각각 생성하게 된다.

또한, 3D 영상의 포맷이 일반적인 프레임 시퀀스 방식일 경우, 영상 처리부(110)는 각 프레임에서 좌안 영상 또는 우안 영상을 추출하여 사용자에게 제공하기 위한 준비를 하게 된다.

한편, 입력된 3D 영상의 포맷에 대한 정보는 3D 영상 신호에 포함되어 있을 수도 있고 포함되어 있지 않을 수도 있다.

예를 들어, 입력된 3D 영상의 포맷에 대한 정보가 3D 영상 신호에 포함되어 있는 경우, 영상 처리부(110)는 3D 영상을 분석하여 포맷에 대한 정보를 추출하고, 추출된 정보에 따라 수신된 3D 영상을 처리하게 된다. 반면, 입력된 3D 영상의 포맷에 대한 정보가 3D 영상 신호에 포함되어 있지 않은 경우, 영상 처리부(110)는 사용자로부터 입력된 포맷에 따라 수신된 3D 영상을 처리하거나 미리 설정된 포맷에 따라 수신된 3D 영상을 처리하게 된다.

또한, 영상 처리부(110)는 자막을 출력시키고자 하는 사용자의 특정 명령에 따라, 컨텐츠에 대한 3D 영상에 자막에 대한 3D 영상을 오버랩하고, 오버랩된 영상을 출력부(120)로 전달할 수 있다.

구체적으로, 영상 처리부(110)는 컨텐츠에 대한 3D 영상의 좌안 영상 및 우안 영상 각각에 자막에 대한 좌안 영상 및 우안 영상 각각을 오버랩하고, 오버랩된 좌안 영상 및 우안 영상을 시분할하여 교번적으로 출력부(120)로 전달한다.

즉, 영상 처리부(110)는 '좌안 영상(L1) -> 우안 영상(R1) -> 좌안 영상(L2) -> 우안 영상(R2) -> …'의 시간적 순서로 자막이 부가된 좌안 영상과 우안 영상을 출력부(120)로 전달할 수 있다.

출력부(120)는 영상 처리부(110)에서 처리된 비디오 신호를 화면 상에 디스플레이하고, 처리된 오디오 신호를 출력할 수 있다.

특히, 출력부(120)는 영상 처리부(110)로부터 전달받은 자막이 부가된 좌안 영상 및 우안 영상을 교번적으로 출력하여 사용자에게 제공한다.

이를 위해, 출력부(120)는 영상을 출력할 수 있는 디스플레이부(미도시)를 포함할 수 있으며, 디스플레이부(미도시)는 패널 구동부(미도시), 표시 패널부(미도시), 백라이트 구동부(미도시), 및 백라이트 발광부(미도시) 등의 세부 구성을 포함할 수 있다.

또한, 출력부(120)는 오디오 신호를 출력할 수 있는 스피커와 같은 오디오 출력부(미도시)를 포함할 수 있다.

제어부(130)는 사용자 인터페이스부(160)로부터 전달받은 사용자 명령 또는 기설정된 옵션에 따라 3D 디스플레이 장치(100)의 전반적인 동작을 제어한다.

제어부(130)는 수신부(140) 및 영상 처리부(110)를 제어하여, 3D 영상 신호가 수신되고, 수신된 3D 영상이 좌안 영상과 우안 영상으로 분리되며, 분리된 좌안 영상과 우안 영상 각각이 하나의 화면에서 디스플레이될 수 있는 크기로 스케일링 또는 보간되도록 제어한다.

또한, 제어부(130)는 수신된 오디오 신호에 대한 오디오 디코딩을 수행하고, 신호 처리된 오디오 신호를 화면에 동기시켜 출력되도록 제어할 수 있다.

그리고, 제어부(130)는 자막을 포함하는 3D 영상을 생성하고, 자막에 대한 3D 영상이 컨텐츠에 대한 3D 영상에 오버랩되어 화면 상에 출력되도록 영상 처리부(110)를 제어할 수 있다.

제어부(130)는 자막이 포함된 3D 영상을 생성함에 있어, 오디오 신호의 크기에 따라 화면에 표시되는 자막의 입체감을 개별적으로 변경할 수 있다.

여기서, 3D 영상에 있어 자막의 입체감은 3D 영상에서 시청자의 시선 방향인 앞뒤 방향의 위치에 해당되는 깊이 감의 정도를 나타내는 깊이 정보(깊이 값)로 결정될 수 있으며, 깊이 정보는 자막에 대한 3D 영상의 좌안 영상과 우안 영상 사이의 시차(disparity)에 의해 결정될 수 있다.

따라서, 제어부(130)는 자막에 대한 3D 영상의 좌안 영상과 우안 영상의 시차를 조절하여, 자막의 입체감을 조절할 수 있게 된다.

이를 위해, 먼저 제어부(130)는 수신부(140)로부터 제공되는 부가 정보로부터 각 자막이 표시될 시간 정보 또는 영상 프레임 정보를 검출한다.

여기서, 자막 또는 캡션은 smi, idx, sub, srt, psb, ssa, ass, 및 usf 등과 같은 파일 형식일 수 있으며, smi 파일 형식으로 제작된 자막의 일 예가 하기에 기재되어 있다.

오늘 날씨가 많이 덥지?

네

상술한 예에서, "오늘 날씨가 많이 덥지?"라는 자막은 22.983초부터 표시되고, "네"라는 자막은 25.781초부터 표시됨을 알 수 있다. 제어부(130)는 이러한 부가 정보에 포함된 데이터에 기초하여 특정 자막이 표시되는 시간 정보를 검출할 수 있다.

비록 상술한 실시 예에서는, 시간 정보를 검출하는 것으로 설명하였지만 이는 일 예에 불과하며, 제어부(130)는 해당 자막이 표시될 프레임 번호가 부가 정보에 포함되어 있는 경우에는 프레임 번호를 검출할 수도 있다.

그리고, 제어부(130)는 오디오 신호에 대한 필터링을 수행하여 오디오 신호 중에서 음성 신호 성분을 추출한다.

일 예로, 제어부(130)는 대역 통과 필터(미도시)를 구비하여, 오디오 신호에서 사람의 음성에 대응되는 200 내지 3000Hz의 주파수 대역을 가지는 음성 신호를 추출할 수 있다.

그리고, 제어부(130)는 오디오 신호 중에서 특정 자막이 출력되는 시간에 대응되는 발화 음성의 크기에 따라 자막에 대한 3D 영상의 깊이 값을 결정할 수 있다.

구체적으로, 제어부(130)는 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위에 포함되면, 화면 상에 디스플레이되는 객체의 깊이 정보와 동일한 값으로 발화 내용에 대응되는 자막의 깊이 정보를 결정한다.

그리고, 제어부(130)는 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 감소시킬 수 있다.

즉, 제어부(130)는 발화 음성의 크기가 기 설정된 임계 범위의 상한값보다 크면 클수록, 화면 상에 디스플레이되는 객체의 깊이 정보보다 더 큰 값으로 발화 내용에 대응되는 자막의 깊이 정보를 결정하고, 발화 음성의 크기가 기 설정된 임계 범위의 하한값보다 작으면 작을수록, 화면 상에 디스플레이되는 객체의 깊이 정보보다 더 작은 값으로 발화 내용에 대응되는 자막의 깊이 정보를 결정할 수 있다.

다른 한편으로, 제어부(130)는 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한 값으로 감소시킬 수도 있다.

여기서, 기 설정된 상한값은 화면 상에 디스플레이되는 객체의 깊이 정보보다 큰 값이며, 기 설정된 하한값은 화면 상에 디스플레이되는 객체의 깊이 정보보다 작은 값이다.

한편, 기 절정된 임계 범위, 기 설정된 상한값 및 하한값은 사용자에 의해 설정가능하다.

상술한 바와 같이, 제어부(130)는 컨텐츠에 대한 3D 영상의 깊이 정보 즉, 화면 상에 디스플레이되는 각 객체의 깊이 정보를 고려하여 자막의 깊이 정보를 결정할 수 있다. 이에 따라, 화면 상에서 기 설정된 입체감을 가지는 객체와 동일하거나 서로 다른 입체감을 가지는 자막을 시청자에게 제공할 수 있게 된다.

또한, 서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우에도, 제어부(130)는 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시하도록 제어할 수 있다.

이 경우, 수신부(140)로 입력되는 부가 정보에는 화면 상에 디스플레이되는 각 객체가 발화하는 음성에 대응되는 자막에 대한 정보가 포함될 수 있다.

일 예로, 화면 상에 'a'의 깊이 정보를 가지는 객체 'A' 및 'b'의 깊이 정보를 가지는 객체 'B' 가 디스플레이되어 있고, 객체 'A'의 발화하는 음성에 대응되는 자막은 '오늘 날씨가 많이 덥지?'이고, 객체 'B'의 발화하는 음성에 대응되는 자막은 '네' 인 것으로 상정한다.

이 경우, 객체 'A' 및 객체 'B'의 발화 음성의 크기가 모두 기 설정된 임계 범위 내이면, 제어부(130)는 자막 '오늘 날씨가 많이 덥지?'의 깊이 정보를 'a'로 결정하고 자막 '네'의 깊이 정보를 'b'로 결정한다.

그리고, 객체 'A' 및 객체 'B'의 발화 음성의 크기가 모두 기 설정된 임계 범위를 초과하면, 제어부(130)는 자막 '오늘 날씨가 많이 덥지?'의 깊이 정보를 'a 보다 큰 값'으로 결정하고, 자막 '네'의 깊이 정보를 'b보다 큰 값'으로 결정한다.

마찬가지로, 객체 'A' 및 객체 'B'의 발화 음성의 크기가 모두 기 설정된 임계 범위 미만이면, 제어부(130)는 자막 '오늘 날씨가 많이 덥지?'의 깊이 정보를 'a 보다 작은 값'으로 결정하고, 자막 '네'의 깊이 정보를 'b보다 작은 값'으로 결정한다.

이처럼, 복수의 객체가 화면 상에 디스플레이된 경우에도 제어부(130)는 컨텐츠에 대한 3D 영상의 깊이 정보 즉, 화면 상에 디스플레이되는 각 객체의 깊이 정보를 고려하여 자막의 깊이 정보를 결정할 수 있게 된다.

제어부(130)는 변경된 깊이 정보에 따라 자막에 대한 3D 영상을 생성하고, 이를 컨텐츠에 대한 3D 영상에 오버랩시켜 출력할 수 있다.

구체적으로, 제어부(130)는 발화 음성의 크기에 따라 변경된 특정 자막의 깊이 정보를 이용하여, 자막에 대한 3D 영상의 좌안 영상으로부터 소정의 시차를 갖는 우안 영상을 생성하거나 또는 우안 영상으로부터 소정의 시차를 갖는 좌안 영상을 생성할 수 있다.

즉, 제어부(130)는 기 설정된 깊이 정보를 가지는 컨텐츠에 대한 3D 영상의 좌안 영상과 우안 영상 사이의 시차보다 크거나 작은 시차를 갖도록 자막에 대한 3D 영상을 생성할 수 있다.

그리고, 제어부(130)는 생성된 자막에 대한 좌안 영상이 컨텐츠에 대한 좌안 영상에 오버랩되고 생성된 자막에 대한 우안 영상이 컨텐츠에 대한 우안 영상에 오버랩되도록 영상 처리부(110)를 제어할 수 있다.

비록 상술한 실시 예에서는, 자막의 시간 정보를 검출하고, 해당 자막에 대응되는 음성 신호의 크기에 따라 깊이 값을 가지는 부가 영상을 생성하는 것으로 설명하였지만, 이는 일 예에 불과하다. 즉, 음성 신호를 크기에 따라 적어도 하나의 레벨로 분류하고 각 레벨 별로 기 설정된 깊이 값을 적용하여 부가 영상을 생성할 수 있음은 물론이다.

또한, 상술한 실시 예에서는 자막이 포함된 부가 영상을 생성하는 것으로 설명하였지만 이는 일 예에 불과하다. 즉, 자막뿐만 아니라 캡션(caption), 광고 문구, 소비자에 대한 정보 문구 또는 경고 문구 등에도 본 기술적 사상이 적용될 수 있음은 물론이다.

일 예로, 광고에 대한 3D 영상이 가지는 깊이 정보보다 크게 광고 문구에 대한 깊이 정보를 결정하고, 그에 따라 조절된 시차를 이용하여 광고 문구에 대한 3D 영상을 생성하여, 해당 광고 영상에 오버랩시킬 수 있음은 물론이다. 이 경우, 광고에 대한 3D 영상이 가지는 깊이 정보보다 크도록 깊이 정보가 설정되는 광고 문구에 대한 정보는 외부로부터 수신될 수 있다.

비록, 광고 문구를 일 예로 기재하였지만, 상술한 기술적 사상은 소비자에 대한 정보 문구, 경고 문구, 캡션 등에도 적용가능함은 물론이다.

저장부(150)는 3D 디스플레이 장치(100)를 동작시키기 위해 필요한 각종 프로그램 등이 저장되는 저장매체로서, 메모리, HDD(Hard Disk Drive) 등으로 구현가능하다. 예를 들어 저장부는 제어부(130)의 동작 수행을 위한 프로그램을 저장하기 위한 ROM, 제어부(130)의 동작 수행에 따른 데이터를 일시적으로 저장하기 위한 RAM 등을 구비할 수 있다. 또한 각종 참조 데이터를 저장하기 위한 비휘발성 메모리, 예를 들어, 플래시 메모리(Flash Memory), EEROM(Electrically Erasable and Programmable ROM) 등을 더 구비할 수 있다.

사용자 인터페이스부(160)는 리모콘, 입력 패널 등의 입력수단으로부터 수신되는 사용자 명령을 제어부(130)로 전달한다.

여기서, 입력 패널은 터치패드(Touch Pad) 혹은 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad) 또는 터치스크린(Touch Screen) 방식으로 이루어질 수 있다.

특히, 사용자 인터페이스부(160)는 자막을 출력하기 위한 사용자 명령을 입력받기 위한 특정 키 버튼을 구비할 수 있다. 이에 따라, 사용자가 특정 키 버튼을 선택하면, 사용자 인터페이스부(160)는 이를 제어부(130)로 전달하여 오디오 신호의 크기에 따라 입체감이 변경되는 자막이 생성되어 출력되도록 할 수 있다.

동기 신호 처리부(170)는, 좌안 영상 및 우안 영상의 디스플레이 타이밍에 맞추어 3D 안경(도 1의 200)의 좌안 셔터 글래스 및 우안 셔터 글래스를 교번적으로 개방시키도록 하는 동기 신호를 생성하여, 3D 안경(도 1의 200)으로 전송한다. 이는, 3D 안경(200)이 교번적으로 개폐되어, 3D 안경(도 1의 200)의 좌안 오픈 타이밍에 출력부(120)에서 좌안 영상이 표시되고, 3D 안경(도 1의 200)의 우안 오픈 타이밍에 출력부(120)에서 우안 영상이 표시되도록 하기 위함이다. 여기서 동기 신호는 적외선 형태로 전송될 수 있다.

제어부(130)는 동기 신호 처리부(170)를 제어하여, 좌안 영상 및 우안 영상의 출력 타이밍과 동기된 동기신호가 생성 및 전송되도록 한다.

한편, 3D 안경(도 1의 200)은 3D 디스플레이 장치(100)로부터 수신된 동기신호에 따라 좌안 셔터 글래스와 우안 셔터 글래스를 교번적으로 개폐하여, 사용자가 좌안과 우안을 통해 좌안 영상 및 우안 영상을 각각 시청가능하도록 한다.

도 4a 내지 도 6은 본 발명의 일 실시 예에 따라 자막에 대한 3D 영상이 컨텐츠에 대한 3D 영상에 오버랩되어 출력되는 내용을 설명하기 위한 도면이다.

도 4a 및 도 4b는 발화 음성의 크기가 기 설정된 임계 범위를 초과한 경우, 3D 디스플레이 장치(200)의 출력 상태를 도시하며, 도 5a 및 도 5b는 발화 음성의 크기가 기 설정된 임계 범위 미만인 경우, 3D 디스플레이 장치(200)의 출력 상태를 도시한다.

발화 음성의 크기가 기 설정된 임계 범위를 초과한 경우, 도 4a에 도시된 바와 같이 자막 '불이야'(220)가 컨텐츠를 구성하는 객체(210)보다 사용자에게 가깝게 표시되는 것처럼 인식될 수 있다. 이는 도 4b에 도시된 바와 같이, 자막 '불이야'(220)에 대한 3D 영상의 좌안 영상 및 우안 영상의 시차가 컨텐츠(210)에 대한 3D 영상의 좌안 영상 및 우안 영상의 시차보다 크도록 결정되었기 때문이다.

한편, 발화 음성의 크기가 기 설정된 임계 범위 미만인 경우, 도 5a에 도시된 바와 같이 자막 '비밀인데'(230)가 컨텐츠를 구성하는 객체(210)보다 사용자에게 멀게 표시되는 것처럼 인식될 수 있다. 이는 도 5b에 도시된 바와 같이, 자막 '비밀인데'(230)에 대한 3D 영상의 좌안 영상 및 우안 영상의 시차가 컨텐츠(210)에 대한 3D 영상의 좌안 영상 및 우안 영상의 시차보다 작도록 결정되었기 때문이다.

도 6은 도 4a 및 도 5a에 도시된 3D 디스플레이 장치(200)의 탑 뷰(top view)를 도시한다.

즉, 도 6에 도시된 바와 같이, 컨텐츠를 구성하는 객체(210)의 깊이 정보와 서로 다른 깊이 정보를 가지는 자막(220, 230)에 대한 3D 영상이 컨텐츠에 대한 3D 영상에 오버랩되어 출력되므로, 깊이 정보가 큰 자막 즉, 오디오 신호 중에서 크기가 큰 음성 신호에 대응되는 자막일수록 3D 디스플레이 장치(200)를 시청하는 사용자에게 가깝게 보이는 것을 알 수 있다.

이에 따라, 사용자는 화면 상의 객체가 발화하는 발화 음성에 따라 그에 대응되는 자막의 입체감을 조절할 수 있어, 보다 다이나믹한 입체영상을 시청할 수 있게 된다.

도 7은 본 발명의 일 실시 예에 따른 3D 디스플레이 장치의 컨텐츠 출력 방법을 설명하는 흐름도이다.

먼저, 컨텐츠 신호에 포함된 비디오 신호를 처리하여, 화면 상에 디스플레이한다(S710).

이후, 컨텐츠 신호에 포함된 오디오 신호를 처리하여, 화면에 동기시켜 출력한다(S720).

그리고, 오디오 신호의 크기에 따라, 화면에 표시되는 자막의 입체감을 개별적으로 변경한다(S730).

이 경우, S730 단계에서, 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 임계 범위와의 차이에 따라 적응적으로 감소시킬 수 있다.

이 경우, S710 단계에서, 기 설정된 입체감을 가지는 객체를 화면 상에 디스플레이하고, 객체가 발화하는 발화 음성의 크기가 상기 임계 범위 내이면 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 화면에 함께 디스플레이할 수 있다.

한편, S730 단계에서, 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 임계 범위 미만이면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한값으로 감소시킬 수 있다.

한편, S710 단계에서, 서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시할 수 있다.

한편, 상술한 방법은 본 발명의 일 실시 예에 따른 3D 디스플레이 장치에 의해 구현될 수 있으며, 본 3D 디스플레이 장치의 모든 구성이 구비되지 않은 다른 영상 수신 장치에 의해서도 구현될 수 있다.

또한, 본 발명에서는, 상술한 것과 같은 3D 디스플레이 장치의 컨텐츠 출력 방법을 실행하기 위한 프로그램을 포함하는 컴퓨터 판독 기록매체를 포함할 수 있다. 컴퓨터 판독 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터 판독 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피디스크, 광데이터 저장장치 등이 있으며, 또한 컴퓨터 판독 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

100 : 3D 디스플레이 장치 200 : 3D 안경
110: 영상 처리부 120 : 출력부
130 : 제어부 140 : 수신부
150 : 저장부 160 : 사용자 인터페이스부
170 : 동기 신호 처리부

Claims

3D 디스플레이 장치의 컨텐츠 출력 방법에 있어서,
컨텐츠 신호에 포함된 비디오 신호를 처리하여, 화면 상에 디스플레이하는 단계;
상기 컨텐츠 신호에 포함된 오디오 신호를 처리하여, 상기 화면에 동기시켜 출력하는 단계; 및
상기 오디오 신호의 크기에 따라, 상기 화면에 표시되는 자막의 입체감을 개별적으로 변경하는 단계;를 포함하는 컨텐츠 출력 방법.
제1항에 있어서,
상기 자막의 입체감을 개별적으로 변경하는 단계는,
상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 감소시키는 것을 특징으로 하는 컨텐츠 출력 방법.
제2항에 있어서,
상기 디스플레이하는 단계는,
기 설정된 입체감을 가지는 객체를 상기 화면 상에 디스플레이하고, 상기 객체가 발화하는 발화 음성의 크기가 상기 임계 범위 내이면 상기 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 상기 화면에 함께 디스플레이하는 것을 특징으로 하는 컨텐츠 출력 방법.
제1항에 있어서,
상기 자막의 입체감을 개별적으로 변경하는 단계는,
상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한 값으로 감소시키는 것을 특징으로 하는 컨텐츠 출력 방법.
제1항에 있어서,
상기 디스플레이하는 단계는,
서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시하는 것을 특징으로 하는 컨텐츠 출력 방법.
3D 디스플레이 장치에 있어서,
컨텐츠 신호에 포함된 비디오 신호 및 오디오 신호에 대한 신호 처리를 수행하는 영상 처리부;
상기 처리된 영상 신호를 화면 상에 디스플레이하고, 상기 처리된 오디오 신호를 출력하는 출력부; 및
상기 오디오 신호를 화면에 동기시켜 출력하도록 상기 출력부를 제어하고, 상기 오디오 신호의 크기에 따라 상기 화면에 표시되는 자막의 입체감을 개별적으로 변경하는 제어부;를 포함하는 3D 디스플레이 장치.
제6항에 있어서,
상기 제어부는,
상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 상기 임계 범위와의 차이에 따라 적응적으로 감소시키는 것을 특징으로 하는 3D 디스플레이 장치.
제7항에 있어서,
상기 제어부는,
기 설정된 입체감을 가지는 객체를 상기 화면 상에 디스플레이하고, 상기 객체가 발화하는 발화 음성의 크기가 상기 임계 범위 내이면 상기 객체가 발화하는 발화 음성에 대한 자막을 해당 객체의 입체감과 동일한 입체감으로 상기 화면에 함께 디스플레이하도록 제어하는 것을 특징으로 하는 3D 디스플레이 장치.
제6항에 있어서,
상기 제어부는,
상기 오디오 신호 중에서 발화 음성의 크기가 기 설정된 임계 범위를 초과하면, 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 상한값으로 증대시키고, 상기 임계 범위 미만이면, 상기 발화 내용에 대응되는 자막의 깊이 정보를 기 설정된 하한 값으로 감소시키는 것을 특징으로 하는 3D 디스플레이 장치.
제6항에 있어서,
상기 제어부는,
서로 다른 입체감을 가지는 복수의 객체가 하나의 화면 상에 디스플레이되는 경우, 각 객체가 발화하는 발화 음성에 대응되는 자막의 입체감을 각 객체의 입체감에 따라 상이하게 표시하도록 제어하는 것을 특징으로 하는 3D 디스플레이 장치.