KR20140020136A - 영상표시장치 및 그 제어방법 - Google Patents

Abstract

본 발명은 적어도 하나의 객체를 포함하는 3차원 입체 영상을 표시하는 단계, 상기 적어도 하나의 객체와 인접하도록 물체를 배치하는 단계, 기설정된 기준면에 의하여 상기 물체와 상기 객체의 3차원 영상의 상대위치를 감지하는 단계, 상기 객체의 3차원 영상과 상기 물체가 중첩되는지 여부를 판단하는 단계 및 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계를 구성되는 영상표시장치의 제어방법 및 영상표시장치를 제공한다.

Description

영상표시장치 및 그 제어방법{VIDEO PROCESSING APPARATUS AND METHOD THEREOF}

본 발명은 3차원 입체 영상을 출력하는 영상처리장치 및 그의 제어방법에 관한 발명입니다.

일반적으로 3차원 입체 영상을 출력하는 영상처리 장치는 사람이 입체감을 느끼는 여러 요인 중 우리 눈이 가로방향으로 약 6mm 떨어져 있어서 나타나는 양안시차(binocular disparity)를 이용하여 평면적인 디스플레이 하드웨어에서 입체감을 느낄 수 있게 하는 시스템의 총체이다.

즉, 사람의 눈은 양안시차 때문에 똑같은 사물을 보더라도 차이가 나는 화상을 보게되고, 이 두 화상이 망막을 통하여 뇌로 전달되면, 이를 정확히 융합시킴으로써 입체감을 느끼게 된다. 이를 이용하여 2차원 디스플레이 장치에서 좌우 화상 2개를 동시에 표시하여 각각의 눈으로 보내는 설계를 통하여 가상적인 입체감을 만들어 내는 것이 3차원 입체 영상처리장치이다.

최근에는 2차원 영상을 출력하는 디스플레이부에 신호를 입력하는 기술에서 나아가, 3차원 입체영상을 출력하는 디스플레이부에서 출력하는 3차원 입체영상과 디스플레이부의 외부에 배치되는 물체간의 상호작용 하는 기술에 대한 연구가 진행되고 있다.

다만, 복수의 3차원 입체 영상이 복수의 객체를 포함하고, 하나의 객체와 상호작용하기 위하여 접근한 물체가 디스플레이의 일부를 가리면 상기 우안영상 및 좌안영상 중 적어도 하나가 가려지게 되므로 입체영상이 정확하게 표시되지 못한다. 따라서, 입체영상의 품질이 저하될 수 있다.

이에 본 발명의 기술적 과제는 영상표시장치의 입체영상의 품질을 향상시키는 것에 있다.

이와 같은 본 발명의 과제를 달성하기 위하여, 본 발명에 따른 영상표시장치의 제어방법은 적어도 하나의 객체를 포함 하는 3차원 입체 영상을 표시하는 단계, 상기 적어도 하나의 객체와 인접하도록 물체를 배치하는 단계, 기설정된 기준면에 의하여 상기 물체와 상기 객체의 3차원 영상의 상대위치를 감지하는 단계, 상기 객체의 3차원 영상과 상기 물체가 중첩되는지 여부를 판단하는 단계 및 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 제어방법은 상기 기준면을 기준으로 상기 객체의 3차원 영상과 상기 물체의 상대위치를 감지하는 단계를 더 포함한다.

본 발명과 관련된 일 예로서, 상기 물체가 상기 객체의 3차원 영상보다 상기 기준면에 가까이 있는 경우, 상기 객체의 형태를 변경한다.

본 발명과 관련된 일 예로서, 상기 객체는 깊이가 서로 다른 제1 및 제2 객체를 포함하고, 상기 제1 객체의 3차원 영상은 상기 제2 객체의 3차원 영상보다 상기 기준면에 가까이 출력되고, 상기 제어방법은 상기 물체가 상기 제2 객체의 3차원 영상과 인접하게 배치되어 상기 제2 객체에 신호를 입력하는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 제어방법은 상기 신호에 의하여 상기 제2 객체에 대응되는 정보를 무선 도는 유선 통신망을 통하여 서버에 전송하는 단계 및 상기 신호에 의하여 상기 제2 객체에 대응되는 다른 3차원 입체영상을 상기 디스플레이부에 표시하는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는 상기 물체가 상기 제1 객체를 관통하는 동안 상기 물체와 중첩되는 상기 제1 객체의 입체영상의 일 영역의 투명도를 증가시키는 단계 및 상기 제2 객체에 신호가 입력되면, 상기 제1 객체의 입체영상 전체의 투명도를 증가시키는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는 상기 객체의 3차원 영상의 적어도 일부의 투명도를 증가시키는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는 상기 객체의 3차원 영상의 가장자리를 표시하는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 제어방법은 상기 객체의 3차원 영상을 삭제하는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는 상기 객체의 3차원 영상과 상기 물체의 중첩되는 영역과 나머지 영역을 구분하는 단계 및 상기 중첩되는 영역의 투명도를 증가시키는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 제어방법은 상기 객체의 3차원 영상의 위치를 변경시켜 출력하는 단계를 포함한다.

본 발명과 관련된 일 예로서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는 상기 객체의 3차원 영상의 가장자리 영역과 상기 객체의 가장자리 영역의 적어도 일부가 접하도록 상기 객체를 이동 시키는 것으로 수행될 수 있다.

이와 같은 본 발명의 과제를 달성하기 위하여, 본 발명에 따른 영상표시장치는 디스플레이부, 감지부. 제어부를 포함한다. 상기 디스플레이부는 적어도 하나의 객체를 포함하는 3차원 입체 영상을 표시하도록 구성된다. 상기 감지부는 상기 디스플레이부와 인접하게 배치되는 물체의 상기 디스플레이부를 기준으로 하는 상대위치를 감지한다. 상기 제어부는 상기 디스플레이부를 기준으로 상기 객체의 3차원 상대위치와 상기 물체의 상대위치를 비교하여 상기 물체와 객체의 적어도 일부가 중첩되면, 상기 객체의 형태를 변경시킨다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 디스플레이부를 기준으로 상기 객체의 3차원 영상과 상기 물체의 상대위치를 감지하고, 상기 물체가 상기 객체의 3차원 영상보다 상기 디스플레이부에 가까이 배치되는 경우 상기 객체의 형태를 변경하도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 객체의 3차원 영상의 적어도 일부의 투명도를 증가시키도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제어부는 상기 객체의 3차원 영상의 상기 물체와 중첩되는 영역과 나머지 영역을 구분하고, 상기 중첩되는 영역의 투명도를 증가시키도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 객체의 3차원 영상의 가장자리를 표시하도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 객체의 3차원 영상을 위치를 상기 물체와 이격되도록 변경시키도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 객체는 깊이가 서로 다른 제1 및 제2 객체를 포함하고, 상기 제1 객체의 3차원 영상은 상기 제2 객체의 3차원 영상보다 상기 디스플레이부에 가깝게 출력되고 상기 물체의 적어도 일부는 상기 제2 객체를 관통하고, 상기 물체의 일단부가 상기 제2 객체와 접하도록 배치되며 상기 제어부는, 상기 제2 객체의 적어도 일 영역의 형태를 변경하도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 객체와 상기 물체가 접하여 신호가 입력되면, 상기 객체에 대응되는 정보는 무선 또는 유선 통신망을 통하여 서버에 전송하여 상기 객체에 대응되는 다른 3차원 입체영상을 표시하도록 상기 디스플레이부를 제어한다.

본 발명과 관련된 일 예로서, 상기 디스플레이부는 상기 디스플레이부와 사용자 사이에 상기 3차원 입체영상을 표시한다.

본 발명과 관련된 일 예로서, 상기 디스플레이부는 사용자와 반대되는 방향으로 상기 3차원 입체영상을 표시하고, 상기 사용자가 상기 물체를 인식하도록 양면이 투명한 재질로 형성된다.

본 발명은 객체와 물체가 중첩되는 경우에 객체를 변경시켜 손상된 객체의 형태가 표시되는 것을 방지하고, 물체가 보다 선명하게 인식되므로 입체영상의 품질을 향상시킬 수 있다.

또한, 보다 정확한 정보를 제공할 수 있으므로, 객체와 물체의 전기적은 상호작용이 용이하게 수행될 수 있어 사용자의 편의가 향상된다.

도 1은 본 발명의 실시예들에 따른 영상처리장치가 적용된 이동 통신 단말기의 구성을 나타낸 구성도.
도 2는 본 발명의 실시예들에 다른 영상처리장치가 적용된 영상표시장치의 구성을 나타낸 구성도.
도 3은 본 발명의 실시예들에 따른 영상처리장치를 나타낸 구성도.
도 4는 본 발명의 영상처리장치의 제어방법을 나타낸 흐름도.
도 5는 본 발명의 일실시예에 따라 물체에 의하여 가려지는 객체를 나타낸 도면.
도 6a 및 도 6b는 일 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도.
도 7a 및 도 7b는 다른 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도.
도 8a 및 도 8b는 또 다른 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도.
도 9a 및 도 9b는 또 다른 실시예에 따라 객체가 이동하는 것을 설명하기 위한 개념도.
도 10a 내지 도 10e는 두 개의 객체와 물체가 상호작용하는 것을 설명하기 위한 개념도.

본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.

또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.

또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.

도 1은 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 이동 통신 단말기(100)의 구성을 나타낸 구성도이다. 이동 통신 단말기(이동 전화기)(100)는 다양한 형태로 구현될 수 있다. 예를 들면, 이동 통신 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 있다.

도1에 도시한 바와 같이, 이동 통신 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 이동 통신 단말기(100)의 구성요소 모두가 필수 구성요소인 것은 아니며, 도 1에 도시된 구성요소보다 많은 구성요소에 의해 이동 통신 단말기(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 이동 통신 단말기(100)가 구현될 수도 있다.

상기 무선 통신부(110)는 이동 통신 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 통신 단말기(100)와 그 이동 통신 단말기(100)가 위치한 네트워크간의 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들면, 무선 통신부(110)는 방송 수신 모듈(111), 이동 통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치 정보 모듈(115) 등을 포함할 수 있다.

상기 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 미리 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 이동 통신 단말기(100)에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

한편, 상기 방송 관련 정보는, 이동 통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동 통신 모듈(112)에 의해 수신될 수 있다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들면, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다. 방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.

상기 이동 통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

상기 무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 의미하는 것으로, 상기 무선 인터넷 모듈(113)은 이동 통신 단말기(100)에 내장되거나 외장될 수 있다. 여기서, 무선 인터넷 기술로는 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access : Wimax), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

상기 근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 의미한다. 근거리 통신 기술로서 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.

상기 위치 정보 모듈(115)은 이동 단말기의 위치(이동 단말기가 차량에 장착되었을 때 차량의 위치 확인 가능)를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들면, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다. 상기 위치 정보 모듈(115)로서 와이파이 위치추적 시스템(Wi-Fi Positioning System) 및/또는 하이브리드 위치추적 시스템(Hybrid Positioning System)이 적용될 수도 있다.

상기 위치 정보 모듈(115)은 방향을 검출하는 지자계 센서 및/또는 중력 센서를 더 포함할 수 있다. 예를 들면, 상기 위치 정보 모듈(115)은 상기 지자계 센서(전자 나침반)를 통해 증강현실(augmented reality)을 이용한 내비게이션 구현을 위해 이동 통신 단말기의 방향(예를 들면, 동서남북)을 검출한다. 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 중력이 어느 방향으로 작용하는지를 탐지하고, 사용자가 이동 통신 단말기를 세로로 길게 들고 있을 때는 세로로 된 화면을 보여주고, 가로로 들고 있을 때는 화면을 자동으로 90도 회전시켜 넓은 화면을 보여준다. 또한, 사용자가 동영상을 시청할 때, 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 사용자가 이동 통신 단말기를 들고 있는 방향에 따라 화면을 회전시켜 사용자가 편하게 영상을 시청하도록 한다.

상기 A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호를 입력하기 위한 것으로서, 상기 A/V(Audio/Video) 입력부(120)에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 상기 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 상기 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.

상기 카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 상기 카메라(121)는 이동 단말기의 구성 형태에 따라 2개 이상이 구성될 수도 있다.

상기 마이크(122)는 통화 모드 또는 녹음 모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 수신하여 전기적인 음성 데이터로 처리한다. 상기 통화 모드일 때, 상기 처리된 음성 데이터는 이동 통신 모듈(112)을 통하여 이동 통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 상기 마이크(122)는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

상기 사용자 입력부(130)는 사용자가 이동 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 상기 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.

상기 센싱부(140)는 이동 통신 단말기(100)의 개폐 상태, 이동 통신 단말기(100)의 위치, 사용자 접촉 유무, 이동 통신 단말기(100)의 방위, 이동 통신 단말기(100)의 가속/감속 등과 같이 이동 통신 단말기(100)의 현 상태를 감지하여 이동 통신 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들면, 이동 통신 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 상기 센싱부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다.

상기 인터페이스부(170)는 이동 통신 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 통신 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 통신 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 통신 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 통신 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

상기 출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로서, 상기 출력부(150)에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.

상기 디스플레이부(표시부)(151)는 이동 통신 단말기(100)에서 처리되는 정보를 표시하여 출력한다. 예를 들면, 이동 통신 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 통신 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

상기 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 통신 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들면, 이동 통신 단말기(100)에 외부 디스플레이부(도시하지 않음)와 내부 디스플레이부(도시하지 않음)가 동시에 구비될 수 있다.

상기 디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.

또한, 상기 터치 센서는, 상기 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(도시하지 않음)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)에 전송한다. 이로써, 상기 제어부(180)는, 상기 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

본 발명에서 근접 터치(proximity-touch)는, 포인터(pointer)가 화면에 실제로 터치는 되지 않고, 화면으로부터 소정 거리 떨어져 접근되는 것을 의미한다.

상기 근접 센서(141)는, 터치 스크린에 의해 감싸지는 이동 통신 단말기(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서(141)는, 소정의 검출 면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 상기 근접 센서(141)는, 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.

상기 근접 센서(141)의 예로는, 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치 스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.

이하에서는 설명의 편의를 위해, 상기 터치 스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(Proximity Touch)"라고 칭하고, 상기 터치 스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(Contact Touch)"라고 칭한다. 상기 터치 스크린 상에서 포인터로 근접 터치가 되는 위치는, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다.

또한, 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 상기 터치 스크린 상에 출력될 수 있다.

상기 센싱부(140)는 가속도 센서(142)를 포함할 수 있다. 가속도 센서(142)는 어느 한 방향의 가속도 변화에 대해서 이를 전기 신호로 바꾸어 주는 소자로서, MEMS(micro-electromechanical systems) 기술의 발달과 더불어 널리 사용되고 있다. 가속도 센서(142)에는, 자동차의 에어백 시스템에 내장되어 충돌을 감지하는데 사용하는 큰 값의 가속도를 측정하는 것부터, 사람 손의 미세한 동작을 인식하여 게임 등의 입력 수단으로 사용하는 미세한 값의 가속도를 측정하는 것까지 다양한 종류가 있다. 가속도 센서(142)는 보통 2축이나 3축을 하나의 패키지에 실장하여 구성되며, 사용 환경에 따라서는 Z축 한 축만 필요한 경우도 있다. 따라서, 어떤 이유로 Z축 방향 대신 X축 또는 Y축 방향의 가속도 센서를 써야 할 경우에는 별도의 조각 기판을 사용하여 가속도 센서를 주 기판에 세워서 실장할 수도 있다.

상기 음향 출력 모듈(152)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 통신 단말기(100)에서 수행되는 기능(예를 들면, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

상기 알람부(153)는 이동 통신 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 상기 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신될 때, 이를 알리기 위해 알람부(153)는 진동 수단을 통해 이동 단말기를 진동시킬 수 있다. 또는, 상기 알람부(153)는, 키 신호가 입력된 경우, 그 키 신호 입력에 대한 피드백으로 진동 수단을 통해 이동 통신 단말기(100)를 진동시킬 수 있다. 상기와 같은 진동을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.

상기 햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.

상기 햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 텔레매틱스 단말기의 구성 태양에 따라 2개 이상이 구비될 수 있다. 햅틱 모듈(154)은 차량에서 사용자와의 접촉이 빈번한 곳에 구비될 수 있다. 예를 들어, 조향 휠, 변속 기어 레버, 좌석 시트 등에 구비될 수 있다.

상기 메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 지도 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.

상기 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 통신 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.

상기 인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset Port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(Memory Card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module: UIM), 가입자 인증 모듈(Subscriber Identify Module: SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module: USIM) 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치'라 한다)는, 스마트 카드(Smart Card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

상기 인터페이스부(170)는 이동 단말기(100)가 외부 크래들(Cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

상기 제어부(180)는 통상적으로 이동 통신 단말기(100)의 전반적인 동작을 제어한다. 예를 들면, 상기 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 상기 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 상기 멀티미디어 모듈(181)은 상기 제어부(180) 내에 구현될 수도 있고, 상기 제어부(180)와 별도로 구현될 수도 있다.

상기 제어부(180)는 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

상기 전원 공급부(190)는 상기 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 수신하여 각 구성요소들의 동작에 필요한 전원을 공급한다.

상기 이동 통신 단말기(100)에 적용된 구성 요소의 기능은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수도 있다. 하드웨어적인 구현에 의하면, ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다. 소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수도 있다.

상기 음성 인식 모듈(182)은 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.

상기 이동 통신 단말기(100)에 적용된 내비게이션 세션(session)(300)은 지도 데이터 상에 주행 경로를 표시한다.

본 발명의 실시예들에 따른 이동 통신 단말기(100)에 적용된 영상 처리 장치의 구성 요소에 대한 상세한 설명은 도3 내지 도 11을 참조하여 설명한다.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 도 2를 참조하여 설명한다.

도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 나타낸 구성도이다.

도 2에 도시한 바와 같이, 본 발명의 실시예들에 의한 영상 표시 장치(200)는 튜너(210), 복조부(220), 외부장치 인터페이스부(230), 네트워크 인터페이스부(235), 저장부(240), 사용자입력 인터페이스부(250), 제어부(270), 디스플레이(280), 오디오 출력부(285), 및 3D 시청장치(295)를 포함할 수 있다.

튜너(210)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 상기 튜너(210)는 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다. 예를 들어, 상기 튜너(210)는 상기 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너(210)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다.

튜너(210)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(270)로 직접 입력될 수 있다.

또한, 튜너(210)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.

한편, 튜너(210)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.

복조부(220)는 튜너(210)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(220)는 8-VSB(7-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(220)는 채널 복호화를 수행할 수도 있다.

상기 복조부(220)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(220)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다. 또한, 복조부(220)는, 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(220)는, 컨벌루션 디코더(convolution decoder), 디인터리버, 및 리드-솔로먼 디코더 등을 구비하여, 컨벌루션 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.

복조부(220)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.

복조부(220)는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비되는 것이 가능하다. 즉, ATSC 복조부와, DVB 복조부로 구비되는 것이 가능하다.

복조부(220)에서 출력한 스트림 신호는 제어부(270)로 입력될 수 있다. 제어부(270)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(280)에 영상을 출력하고, 오디오 출력부(285)로 음성을 출력한다.

외부장치 인터페이스부(230)는, 접속된 외부 장치와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다.

외부장치 인터페이스부(230)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치(도시하지 않음)와 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(230)는 접속된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 영상표시장치(200)의 제어부(270)로 전달한다. 또한, 제어부(270)에서 처리된 영상, 음성 또는 데이터 신호를 연결된 외부 장치로 출력할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다.

A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 영상표시장치(200)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다.

무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 영상표시장치(200)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 다른 전자기기와 네트워크 연결될 수 있다.

또한, 외부장치 인터페이스부(230)는, 다양한 셋탑 박스와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋탑 박스와 입력/출력 동작을 수행할 수도 있다.

한편, 외부장치 인터페이스부(230)는, 3D 시청장치(295)와 데이터를 송수신할 수 있다.

네트워크 인터페이스부(235)는, 영상표시장치(200)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(235)는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.

네트워크 인터페이스부(235)는, 네트워크를 통해, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자가 제공하는 콘텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 인터넷, 콘텐츠 제공자 등으로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 콘텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.

또한, 네트워크 인터페이스부(235)는, 예를 들어, IP(internet Protocol) TV와 접속되어, 양방향 통신이 가능하도록, IPTV용 셋탑 박스에서 처리된 영상, 음성 또는 데이터 신호를 수신하여 제어부(270)로 전달할 수 있으며, 제어부(270)에서 처리된 신호들을 IPTV용 셋탑 박스로 전달할 수 있다.

한편, 상술한 IPTV는, 전송네트워크의 종류에 따라 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함하는 의미일 수 있으며, TV over DSL, Video over DSL, TV overIP(TVIP), Broadband TV(BTV) 등을 포함하는 의미일 수 있다. 또한, IPTV는 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.

저장부(240)는, 제어부(270) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.

또한, 저장부(240)는 외부장치 인터페이스부(230)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(240)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.

저장부(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(200)는, 저장부(240) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다.

도 2는 저장부(240)가 제어부(270)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(240)는 제어부(270) 내에 포함될 수 있다.

사용자입력 인터페이스부(250)는, 사용자가 입력한 신호를 제어부(270)로 전달하거나, 제어부(270)로부터의 신호를 사용자에게 전달한다. 예를 들어, 사용자입력 인터페이스부(250)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(260)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 수신하거나, 제어부(270)로부터의 신호를 원격제어장치(260)로 송신할 수 있다.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(도시하지 않음)에서 입력되는 사용자 입력 신호를 제어부(270)에 전달할 수 있다.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 사용자의 제스처를 센싱하는 센싱부(도시하지 않음)로부터 입력되는 사용자 입력 신호를 제어부(270)에 전달하거나, 제어부(270)로부터의 신호를 센싱부(도시하지 않음)로 송신할 수 있다. 여기서, 센싱부(도시하지 않음)는, 터치 센서, 음성 센서, 위치 센서, 동작 센서 등을 포함할 수 있다.

제어부(270)는, 튜너(210) 또는 복조부(220) 또는 외부장치 인터페이스부(230)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.

제어부(270)에서 영상 처리된 영상 신호는 디스플레이(280)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(270)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다.

제어부(270)에서 처리된 음성 신호는 오디오 출력부(285)로 음향 출력될 수 있다. 또한, 제어부(270)에서 처리된 음성 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다.

제어부(270)는 역다중화부, 영상처리부 등을 포함할 수 있다. 제어부(270)는, 영상표시장치(200) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(270)는 튜너(210)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.

또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(200)를 제어할 수 있다.

예를 들어, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(210)를 제어한다. 그리고, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(270)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이(280) 또는 오디오 출력부(285)를 통하여 출력될 수 있도록 한다.

다른 예로, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(230)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의 영상 신호 또는 음성 신호가 디스플레이(280) 또는 오디오 출력부(285)를 통해 출력될 수 있도록 한다.

제어부(270)는, 영상을 표시하도록 디스플레이(280)를 제어할 수 있다. 예를 들어, 튜너(210)를 통해 입력되는 방송 영상, 외부장치 인터페이스부(230)를 통해 입력되는 외부 입력 영상 또는 네트워크 인터페이스부(235)를 통해 입력되는 영상 또는 저장부(240)에 저장된 영상을 디스플레이(280)에 표시하도록 제어할 수 있다. 이때, 디스플레이(280)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.

제어부(270)는 디스플레이(280)에 표시되는 영상 중에, 소정 오브젝트에 대해 3D 오브젝트로 생성하여 표시되도록 한다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다. 이러한 3D 오브젝트는, 디스플레이(280)에 표시되는 영상과 다른 깊이를 가지도록 처리될 수 있다. 제어부(270)는 3D 오브젝트가 디스플레이(280)에 표시되는 영상에 비해 돌출되어 보이도록 처리할 수 있다.

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식한다. 예를 들어, 사용자와 영상표시장치(200)간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이(280) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.

한편, 도 2에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 영상을 생성하는 채널 브라우징 처리부가 더 구비되는 것도 가능하다. 채널 브라우징 처리부는, 복조부(220)에서 출력한 스트림 신호(TS) 또는 외부장치 인터페이스부(230)에서 출력한 스트림 신호 등을 입력받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(270)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(270)로 입력되는 것도 가능하다.

제어부(270)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이(280)에 표시할 수 있다. 이때의 썸네일 리스트는, 디스플레이(280)에 소정 영상을 표시한 상태에서 일부 영역에 표시되는 간편 보기 방식으로 표시되거나, 디스플레이(280)의 대부분 영역에 표시되는 전체 보기 방식으로 표시될 수 있다. 이러한 썸네일 리스트 내의 썸네일 영상은 순차적으로 업데이트 될 수 있다.

디스플레이(280)는, 제어부(270)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(230)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다.

디스플레이(280)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 특히, 본 발명의 실시예에 따라, 3차원 디스플레이(3D display)가 가능할 수 있다.

3차원 영상 시청을 위해 디스플레이(280)는, 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다. 단독 디스플레이 방식은, 별도의 추가 디스플레이, 예를 들어 안경(glass) 등이 없이, 디스플레이(280) 단독으로 3D 영상을 구현할 수 있는 것으로서, 그 예로, 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등 다양한 방식이 적용될 수 있다. 상기 추가 디스플레이 방식은, 디스플레이(280) 외에 추가 디스플레이를 사용하여 3D 영상을 구현할 수 있는 것으로서, 그 예로, 헤드 마운트 디스플레이(HMD) 타입, 안경 타입 등 다양한 방식이 적용될 수 있다.

상기 안경 타입은, 편광 안경 타입 등의 패시브(passive) 방식과, 셔터 글래스(ShutterGlass) 타입 등의 액티브(active) 방식으로 다시 나뉠 수 있다. 한편, 헤드 마운트 디스플레이 타입에서도 패시브 방식과 액티브 방식으로 나뉠 수 있다.

입체 영상을 시청하기 위한 3D 시청 장치(3D용 글래스)(295)는, 패시브 방식의 편광 글래스 또는 액티브 방식의 셔트 글래스를 포함할 수 있으며, 상술한 헤드 마운트 타입도 포함하는 개념으로 기술된다.

한편, 디스플레이(280)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.

오디오 출력부(285)는, 제어부(270)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 음성 출력부(185)는 다양한 형태의 스피커로 구현될 수 있다.

한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(도시하지 않음)가 영상표시장치(200)에 더 구비될 수 있다. 센싱부(도시하지 않음)에서 감지된 신호는 사용자입력 인터페이스부(150)를 통해 제어부(170)로 전달된다.

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상, 또는 센싱부(도시하지 않음)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수 있다.

원격제어장치(260)는, 사용자 입력을 사용자입력 인터페이스부(250)로 송신한다. 이를 위해, 원격제어장치(260)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(260)는, 사용자입력 인터페이스부(250)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(260)에서 표시하거나 음성 출력할 수 있다.

상술한 영상표시장치(200)는, 고정형으로서 ATSC 방식(7-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 이동형으로서 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 케이블, 위성통신, IPTV 용 디지털 방송 수신기일 수도 있다.

본 명세서에서 기술되는 영상표시장치는, TV 수상기, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.

도 2에 도시된 영상표시장치(200)의 구성도는 본 발명의 실시예들을 위한 구성도이다. 구성도의 각 구성요소는 실제 구현되는 영상표시장치(200)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.

상기 영상 표시 장치(200)에서 복호화된 영상 신호는, 다양한 포맷의 3D 영상 신호일 수 있다. 예를 들면, 색차 영상(color image) 및 깊이 영상(depth image)으로 이루어진 3D 영상 신호일 수 있으며, 또는 복수 시점 영상 신호로 이루어진 3D 영상 신호 등일 수 있다. 복수 시점 영상 신호는, 예를 들어, 좌안 영상 신호와 우안 영상 신호를 포함할 수 있다. 여기서, 3D 영상 신호의 포맷은, 좌안 영상 신호(L)와 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷, 상,하로 배치하는 탑 다운(Top / Down) 포맷, 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷, 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷, 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷 등일 수 있다.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법을 도 3 내지 도 11을 참조하여 설명한다. 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은 이동 통신 단말기(100), 상기 텔레매틱스 단말기, 내비게이션 장치와 같은 이동 단말기에 적용될 뿐만 아니라, 3D 영상을 표시하는 3차원 영상 텔레비전(3D TV)과 같은 영상 기기, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 프로젝터, 홈시어터 등과 같은 장치에도 적용될 수도 있다.

도 3에 도시한 바와 같이, 본 발명의 제1 실시예에 따른 영상 처리 장치(400)는, 객체를 표시하는 표시부(401)와 상기 표시된 객체에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트를 활성 오브젝트로서 결정하고, 상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트들(상기 활성 오브젝트를 가리면서 서로 다른 깊이(depth)를 갖는 오브젝트(들))을 검출하는 검출부(402)와; 상기 검출된 오브젝트(들)의 속성을 변경하고, 사용자 선택 신호에 따라 상기 활성 오브젝트를 선택하는 제어부(403)를 포함한다.

상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트들(상기 활성 오브젝트의 일부를 가리면서 서로 다른 깊이(depth)를 갖는 오브젝트(들)을 검출하는 검출부(402)는 상기 제어부(403)에 포함될 수도 있다.

상기 객체는 스테레오 카메라 또는 TOF(Time-of-Flight) 카메라 등을 통해 촬영된 입체 영상 또는 유선 통신망 또는 무선 통신망을 통해 단말기 또는 서버로부터 수신된 객체일 수 있다. 상기 객체에 포함된 입체 오브젝트들은 3차원 웹 브라우저(3D Web Browser)에 표시된 깊이를 가지는 입체 오브젝트일 수 있다. 본 발명의 실시예에 따른 영상 처리 장치(400)는 입체 웹 브라우저(3D Web Browser) 그래픽 처리 장치(Graphics processing unit, GPU)에 적용될 수 있다. 상기 입체 오브젝트 각각은 좌안 및 우안영상을 포함한다.

본 발명에 따르면, 상기 객체가 표시되는 3차원 공간의 내부에 진입하는 물체(Hr)와 상기 객체는 전기적인 상호작용이 가능하다. 또한, 상기 물체(Hr)에 대응되는 3차원 이미지를 상기 영상표시장치가 출력한다.

이하, 상기 객체와 상호작용하는 물체에 가려지는 객체를 보정하는 영상표시장치와 이를 제어하는 방법을 구체적으로 설명한다.

도 4는 본 발명의 영상처리장치의 제어방법을 나타낸 흐름도이고, 도 5는 본 발명의 일실시예에 따라 물체에 의하여 가려지는 객체를 나타낸 도면이다.

도 4 및 도 5를 참조하면, 객체를 포함하는 3차원 입체영상을 표시한다. 영상표시장치(1000)는 디스플레이부(100)를 포함하고, 상기 디스플레이부(100)는 3차원 입체영상을 표시하기 위하여 사용자의 좌안 및 우안에 의하여 각각 감지되는 좌안영상(V)와 우안영상(U)을 출력한다. 상기 좌안영상(V)과 상기 우안영상(U)에 의하여 사용자는 3차원 입체이미지인 객체(I)를 인식할 수 있다.

상기 3차원 입체 영상은 복수의 객체를 포함할 수 있다. 복수의 객체들은 서로 다른 깊이로 표시될 수 있다. 즉, 상기 복수의 객체들은 서로 중첩되도록 출력될 수 있다.

다음으로 상기 객체와 인접하도록 물체(O)를 배치한다. 상기 물체(O)는 상기 객체와 접하여 전기적인 상호작용을 하도록 형성될 수 있다. 상기 물체(O)와 상기 객체가 접하여 전기적인 신호를 발생시킬 수 있으며, 상기 제어부(403)는 상기 물체(O)와 상기 객체가 접하면 상기 객체에 대응되는 다른 3차원 입체영상을 출력하도록 상기 디스플레이부(100)를 제어할 수 있다.

예를 들어 물체(O)와 상기 3차원 입체영상의 전기적인 상호작용에 의하여 3차원 웹화면을 구성할 수 있다. 상기 제어부(403)는 상기 감지 영역 내의 객체와 물체(O)가 접하여 신호가 입력되면, 상기 객체에 대응되는 정보를 무선 또는 유선 통신망을 통하여 서버에 전송하여, 상기 객체에 대응되는 다른 3차원 입체영상을 표시하도록 제어한다.

도면에서 상기 물체(O)는 사람의 손형상으로 도시하였으나, 이에 한정되는 것은 아니다. 즉, 사람의 실제 손 또는 3차원 입체영상이 포함하는 객체를 선택하여 전기적인 신호를 발생할 수 있는 도구로 형성될 수 있고, 형태는 이에 한정되는 것은 아니다. 또한, 상기 신호를 발생하는 도구 뿐만 아니라 상기 디스플레이부(100)에 접근하는 광범위한 물체(O)에 해당된다.

상기 입체표시장치의 감지부(402)는 상기 객체의 3차원 영상(I)과 상기 물체(O)의 위치를 감지한다. 예를 들어, 상기 감지부(402)는 상기 디스플레이부(100)로부터 상기 물체(O)의 상대위치 및 상기 사용자와 상기 디스플레이부(100)와 상기 객체 사이의 상대위치를 감지할 수 있다.

다음으로, 상기 감지부(402)는 상기 객체의 3차원 영상(I)과 상기 물체(O)가 중첩되는지 여부를 판단한다. 도 5에 도시된 바와 같이, 물체(O)가 상기 객체의 3차원 영상(I)을 중심으로 상기 사용자의 눈과 이격되도록 배치될 수 있다. 또한, 상기 물체(O)는 상기 3차원 영상과 중첩되도록 배치되므로, 상기 디스플레이부(100)에서 출력하는 영상이 상기 물체(O)에 가려져 상기 객체의 3차원 영상(I)의 형상이 변형될 수 있다.

상기 제어부(402)는 상기 객체의 3차원 영상(I)과 상기 물체(O)가 중첩되지 아니하는 것으로 판단되면, 상기 객체의 3차원 영상(I)을 그대로 출력하도록 상기 디스플레이부(100)를 제어한다.

한편, 상기 제어부(402)는 상기 객체의 3차원 영상(I)과 상기 물체(O)가 중첩되는 것으로 판단되면, 상기 객체를 변경하도록 상기 디스플레이부(100)를 제어한다.

이하, 상기 객체를 변경하는 방법을 구체적으로 검토한다.

도 6a 및 도 6b는 일 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도이다.

도 5, 도 6a 및 도 6b를 참조하면, 상기 영상표시장치(1000)의 상기 디스플레이부(100)는 상기 우안영상(U) 및 좌안영상(V)를 출력하여 상기 객체의 3차원 입체영상(I)을 출력한다. 상기 물체(O)는 상기 객체의 3차원 입체영상은 중첩되도록 배치된다.

상기 제어부(420)는 상기 물체(O)와 중첩되는 상기 객체의 3차원 입체영상을 변경하도록 상기 디스플레이부(100)를 제어한다. 상기 제어부(420)는 상기 물체(O)와 중첩되는 상기 3차원 입체영상의 적어도 일영역의 투명도를 제어하여 보정된 제1 보정영상(I1)을 출력하도록 상기 디스플레이부(100)를 제어한다.

상기 물체(O)와 중첩되는 상기 3차원 입체영상의 전체의 투명도를 조절할 수 있다. 또는 상기 물체(O)와 중첩되는 상기 3차원 입체영상의 중첩영역과 나머지 영역을 구분하고 상기 중첩영역의 투명도를 제어할 수 있다.

상기 제어부(403)는 상기 객체의 3차원 입체영상의 투명도가 높아지도록 제어한다. 상기 투명도가 약 100%가 되면 상기 객체의 3차원 입체영상이 보이지 않게 된다. 즉, 상기 객체를 삭제하도록 상기 디스플레이부(100)를 제어할 수 있다.

따라서, 상기 제1 보정영상(I1)을 관통하여 상기 사용자는 상기 물체(O)의 형상을 파악할 수 있다. 상기 제1 보정영상(I1)과 상기 물체(O)를 동시에 인식하거나, 상기 제1 보정영상(I1)의 투명도가 약 100%인 경우에는 상기 물체(O)만을 인식 할 수 있다. 상기 투명도는 상기 물체(O) 및 객체의 크기 색감 등에 따라 다르게 제어할 수 있다.

즉, 상기 물체(O)의 깊이가 상기 객체의 3차원 입체영상의 깊이보다 깊은 경우, 다시 말해서 상기 3차원 입체영상 보다 상기 물체(O)가 상기 디스플레이부(100)에 더 가깝게 배치되는 경우에 상기 객체의 3차원 입체영상이 불투명 상태 또는 투명상태가 된다.

따라서, 상기 물체(O)에 의하여 손상된 상기 객체의 3차원 입체영상과 상기 물체(O)가 동시에 사용자에게 인식되어 발생할 수 있는 혼동을 방지할 수 있다. 또한, 사용자는 상기 물체(O)의 형상을 보다 선명하게 인식할 수 있으므로, 상기 물체(O)보다 더 깊게 출력되는 다른 객체를 선택하는 것이 보다 용이해 질 수 있다.

도 7a 및 도 7b는 다른 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도이다. 본 실시예는 상기 객체의 형태가 변경되는 방법을 제외하고 도 6a 및 도 6b의 실시예와 실질적으로 동일하다. 따라서 동일한 구성 및 특징에 대해서는 도 6a 및 도 6b의 설명으로 갈음한다.

도 5, 도 7a 및 도 7b를 참조하면, 상기 물체(O)와 상기 객체의 3차원 입체영상이 중첩되면, 상기 제어부(402)는 상기 3차원 입체영상을 변경하여 제2 보정영상(I2)를 출력하도록 상기 디스플레이부(100)를 제어한다.

상기 3차원 입체영상의 투명도를 제어하고 상기 3차원 입체영상의 가장자리에 하이라이트를 형성하여 상기 제2 보정영상(I2)을 형성한다. 상기 투명도는 상기 물체(O) 및 객체의 색감 및 크기 등에 의하여 조절이 가능하다.

상기 제2 보정영상(I2)의 가장자리는 선으로 표시하여 사용자에게 상기 객체의 위치를 확인시켜 줄 수 있다. 상기 하이라이트는 선, 점선, 가장자리 영역의 색상의 변화 등을 통하여 다양하게 구현될 수 있다.

도면은 제2 보정영상(I2)의 투명도는 약 100%로 제2 보정영상(I2)은 가장자리만 표시되도록 도시되었으나, 이에 한정되는 것은 아니다.

본 실시예에 따르면, 사용자는 물체(O)를 보다 선명하게 인식할 수 있다. 또한, 상기 객체의 위치도 인식할 수 있으므로, 시각적 혼동을 방지하고 사용자로 하여금 기존의 정보도 잊지 않도록 할 수 있다.

도 8a 및 도 8b는 또 다른 실시예에 따라 객체의 형태가 변경되는 것을 설명하기 위한 개념도이다. 본 실시예는 상기 객체의 형태가 변경되는 방법을 제외하고 도 6a 및 도 6b의 실시예와 실질적으로 동일하다. 따라서 동일한 구성 및 특징에 대해서는 도 6a 및 도 6b의 설명으로 갈음한다.

도 5, 도 8a 및 도 8b를 참조하면, 상기 물체(O)와 상기 객체의 3차원 입체영상이 중첩되면, 상기 제어부(402)는 상기 3차원 입체영상을 변경하여 제3 보정영상(I3)를 출력하도록 상기 디스플레이부(100)를 제어한다.

상기 3차원 입체영상의 투명도를 제어하고 상기 3차원 입체영상의 일영역에 투명부(I')를 형성하여 상기 제3 보정영상(I3)을 형성한다.

상기 투명부(I')의 투명도는 약 100%로 형성될 수 있다. 즉, 상기 투명부(I')는 삭제되는 것과 실질적으로 동일하다. 상기 투명부(I')는 상기 3차원 입체영상의 일부이며, 상기 물체(O)와 중첩되는 영역을 포함한다.

즉, 상기 물체(O)와 중첩되는 영역이 표시되지 아니하므로, 물체(O)에 가려져서 손상된 3차원 영상은 출력되지 아니하여 보다 선명한 영상이 출력될 수 있다.

상기 투명부(I')와 구별하고, 사용자로 하여금 상기 객체의 위치를 인식하게 하기 위하여 상기 제3 보정영상(I3)의 상기 투명부(I')를 제외한 나머지 영역의 투명도는 100%에 도달하지 않도록 형성하는 것이 바람직하다.

또한, 상기 나머지 영역의 가장자리에 하이라이트를 형성할 수 있다.

본 실시예에 따르면, 물체(O)와 중첩되는 영역의 출력을 차단하여 물체(O)와 상기 객체와의 시각적 혼동을 방지하고, 손상된 영상의 출력을 배제하여 보다 선명한 영상을 제고할 수 있다. 또한, 나머지 영역은 사용자에 의하여 인식되므로, 객체의 정보를 계속적으로 인식할 수 있고, 객체와 물체(O)의 깊이도 인식이 가능하므로, 정보를 보다 정확하게 제공할 수 있다.

도 9a 및 도 9b는 또 다른 실시예에 따라 객체가 이동하는 것을 설명하기 위한 개념도이다. 본 실시예는 상기 객체의 위치가 변경되는 방법을 제외하고 도 6a 및 도 6b의 실시예와 실질적으로 동일하다. 따라서 동일한 구성 및 특징에 대해서는 도 6a 및 도 6b의 설명으로 갈음한다.

도 5, 도 9a 및 도 9b를 참조하면, 상기 물체(O)와 상기 객체의 3차원 입체영상이 중첩되면, 상기 제어부(402)는 상기 3차원 입체영상의 출력되는 위치가 변경된 제4 보정영상(I4)를 출력하도록 상기 디스플레이부(100)를 제어한다.

상기 제4 보정영상(I4)은 상기 물체(O)와 중첩되지 아니하는 영역으로 이동한다. 즉, 상기 우안영상(U)과 상기 좌안영상(V)을 실질적으로 동일한 방으로 이동하여 출력된다.

상기 제4 보정영상(I4)은 상기 물체(O)와 인접하는 영역에 표시될 수 있다. 다만, 상기 제4 보정영상(I4)의 깊이는 이동하지 아니하는 것이 바람직하다.

본 실시예에 따르면, 상기 객체의 제3 입체영상의 형태의 변형 또는 손상되지 아니한다. 따라서, 사용자는 상기 제3 입체영상의 정보를 전체적으로 인식할 수 있으며, 상기 물체(O)가 상기 객체와 깊이가 상이한 다른 객체에 접근하거나 다른 객체를 선택하는 경우에도 상기 객체의 정보를 인식할 수 있다.

따라서, 객체의 형태가 변형되지 아니하고, 물체(O)를 가리는 영상이 없으므로 선명한 3차원 입체영상을 제공할 수 있다. 또한, 가려지는 객체가 없으므로 보다 정확한 정보를 제공할 수 있다.

도 6a 내지 도 9a에 따른 실시예는 각각 적용되거나, 중복되어 적용될 수 있다. 또한, 상기 객체 및 물체(O)는 복수로 구현될 수 있다.

이하, 두 개의 객체가 표시되고, 물체(O)가 보다 디스플레이부(100)에 가깝게 표시되는 객체를 선택하고자 하는 경우, 두 객체의 3차원 입체영상의 변경의 제어방법을 설명한다.

도 10a 내지 도 10e는 두 개의 객체와 물체(O)가 상호작용하는 것을 설명하기 위한 개념도이다.

도 10a를 참조하면, 상기 3차원 입체영상은 깊이가 서로 다른 제1 객체(I)와 제2 객체(I'2)를 포함한다. 상기 제2 객체(I'2)는 상기 제1 객체(I)보다 상기 디스플레이부(100)에 가깝도록 표시된다. 또한, 상기 제1 및 제2 객체(I, I'2)는 일 영역이 중첩되도록 표시된다.

상기 물체(O)는 상기 디스플레이부(100)에 접근하며, 상기 제1 객체(I)에 인접하도록 진입한다.

도 10b 및 도 10c를 참조하면, 상기 물체(O)는 상기 제1 객체(I)에 접하고, 더 진행하여 상기 제1 객체(I)를 관통한 상태가 된다. 이 경우, 상기 물체(O)의 일 영역은 상기 제1 객체(I)를 접하고, 통과한 상태가 될 수 있다.

상기 제1 객체(I)를 상기 물체(O)가 관통하면 상기 제1 객체(I)가 변경되어 상기 제1 보정객체(I')로 출력된다. 상기 제1 보정객체(I')는 상기 도 6a 내지 도 9a에서 설명한 보정방법에 의하여 변경될 수 있다. 예를 들어, 상기 제1 보정객체(I')의 투명도 및 위치가 변경되거나, 상기 물체(O)와 중첩되는 영역이 삭제 되는 형태이거나, 가장자리 영역이 하이라이트 될 수 있다.

도 10d를 참조하면, 상기 물체(O)는 상기 디스플레이부(100)에 보다 근접하게 이동 하여 상기 제2 객체(I'2)와 접하게 된다. 상기 물체(O)와 상기 제2 객체(I'2)는 접하여 전기적인 신호를 발생할 수 있다.

상기 제2 객체(I'2)는 상기 물체(O)와 접하면 변경되어 제2 보정객체(I''2)로 출력될 수 있다. 예를 들어, 투명도의 증가, 색감의 변형, 크기의 변경 등을 이용하여 상기 제2 객체(I'2)와 구별되도록 표시할 수 있다. 따라서, 사용자는 상기 물체(O)가 상기 제2 객체(I'2)와 접하여 전기적인 신호를 발생하였다는 사실을 인식할 수 있다. 또한, 상기 제2 객체(I'2)에 신호가 입력되기 전과 후를 구분하여, 입력되기 전에는 제1 객체(I')가 반투명한 상태로 출력되고, 입력된 후에는 완전 투명한 상태로 출력되도록 디스플레이부(100)가 제어될 수 있다.

도 10e를 참조하면, 상기 제2 객체(I'2)와 상기 물체(O)의 접촉에 의한 신호에 따라 상기 제어부는 유선 및 무선통신을 통하여 제2 객체(I'2)에 대응되는 다른 3차원 입체영상(I'3)을 출력한다.

따라서, 두 개 이상의 객체가 중첩되고, 물체(O)가 이를 관통하는 경우에도 상기 물체(O)가 관통하는 객체가 변경된다. 따라서, 손상된 객체를 표시하지 아니하므로, 3차원 입체 영상의 품질이 향상되고, 사용자에게 보다 정확한 정보를 제공할 수 있다.

또한, 본 발명의 영상표시장치는 사용자와 디스플레이 사이에 3차원 입체영상이 출력되는 경우뿐만 아니라. 헤드업 디스플레이(head up display)를 구비하는 영상표시장치에도 적용될 수 있다.

즉, 사용자와 디스플레이부(100)가 인접하고, 사용자의 반대방향으로 3차원 입체영상이 출력되며, 상기 3차원 입체영상 내에 물체(O)가 배치되는 경우에, 상기 물체(O)에 의하여 객체가 가려지는 경우에 적용될 수 있다.

다만, 상기 헤드업 디스플레이는 물체(O)를 인식할 수 있도록 양면이 투명한 재질로 형성된다.

즉, 상기 디스플레이부(100)에 상기 객체보다 상기 물체(O)가 가깝게 배치되는 경우에 상기 물체(O)에 의하여 상기 디스플레이부(100)의 좌안영상(V)과 우안영상(U)의 적어도 일부가 가려진다. 따라서, 상기 제어부(403)는 상기 객체를 변경하도록 상기 디스플레이부(100)를 제어한다.

상기와 같이 설명된 이동 단말기는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (21)

1. 적어도 하나의 객체를 포함하는 3차원 입체 영상을 표시하는 단계;
   상기 적어도 하나의 객체와 인접하도록 물체를 배치하는 단계;
   기설정된 기준면에 의하여 상기 물체와 상기 객체의 3차원 영상의 상대위치를 감지하는 단계;
   상기 객체의 3차원 영상과 상기 물체가 중첩되는지 여부를 판단하는 단계; 및
   상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계를 포함하는 영상표시장치의 제어방법.
2. 제1항에 있어서,
   상기 기준면을 기준으로 상기 객체의 3차원 영상과 상기 물체의 상대위치를 감지하는 단계를 더 포함하는 것을 특징으로 하는 표시장치의 제어방법.
3. 제2항에 있어서,
   상기 물체가 상기 객체의 3차원 영상보다 상기 기준면에 가까이 있는 경우, 상기 객체의 형태를 변경하는 것을 특징으로 하는 표시장치의 제어방법.
4. 제3항에 있어서, 상기 객체는 깊이가 서로 다른 제1 및 제2 객체를 포함하고, 상기 제1 객체의 3차원 영상은 상기 제2 객체의 3차원 영상보다 상기 기준면에 가까이 출력되고,
   상기 물체가 상기 제2 객체의 3차원 영상과 인접하게 배치되어 상기 제2 객체에 신호를 입력하는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
5. 제4항에 있어서,
   상기 신호에 의하여 상기 제2 객체에 대응되는 정보를 무선 도는 유선 통신망을 통하여 서버에 전송하는 단계; 및
   상기 신호에 의하여 상기 제2 객체에 대응되는 다른 3차원 입체영상을 상기 디스플레이부에 표시하는 단계를 포함하는 표시장치의 제어방법.
6. 제5항에 있어서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는,
   상기 물체가 상기 제1 객체를 관통하는 동안 상기 물체와 중첩되는 상기 제1 객체의 입체영상의 일 영역의 투명도를 증가시키는 단계; 및
   상기 제2 객체에 신호가 입력되면, 상기 제1 객체의 입체영상 전체의 투명도를 증가시키는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
7. 제3항에 있어서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는,
   상기 객체의 3차원 영상의 적어도 일부의 투명도를 증가시키는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
8. 제7항에 있어서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는,
   상기 객체의 3차원 영상의 가장자리를 표시하는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
9. 제7항에 있어서, 상기 객체의 3차원 영상을 삭제하는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
10. 제7항에 있어서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는,
    상기 객체의 3차원 영상과 상기 물체의 중첩되는 영역과 나머지 영역을 구분하는 단계;
    상기 중첩되는 영역의 투명도를 증가시키는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
11. 제1항에 있어서, 상기 객체의 3차원 영상의 위치를 변경시켜 출력하는 단계를 포함하는 것을 특징으로 하는 표시장치의 제어방법.
12. 제11항에 있어서, 상기 객체의 3차원 영상과 상기 물체의 적어도 일부가 중첩하면 상기 객체를 변경시키는 단계는,
    상기 객체의 3차원 영상의 가장자리 영역과 상기 객체의 가장자리 영역의 적어도 일부가 접하도록 상기 객체를 이동 시키는 것을 특징으로 하는 표시장치의 제어방법.
13. 적어도 하나의 객체를 포함하는 3차원 입체 영상을 표시하도록 구성되는 디스플레이부;
    상기 디스플레이부와 인접하게 배치되는 물체의 상기 디스플레이부를 기준으로 하는 상대위치를 감지하는 감지부; 및
    상기 디스플레이부를 기준으로 상기 객체의 3차원 상대위치와 상기 물체의 상대위치를 비교하여 상기 물체와 객체의 적어도 일부가 중첩되면, 상기 객체의 형태를 변경시키도록 디스플레이부를 제어하는 제어부를 포함하는 영상표시장치.
14. 제13항에 있어서, 상기 제어부는,
    상기 디스플레이부를 기준으로 상기 객체의 3차원 영상과 상기 물체의 상대위치를 감지하고, 상기 물체가 상기 객체의 3차원 영상보다 상기 디스플레이부에 가까이 배치되는 경우 상기 객체의 형태를 변경하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
15. 제14항에 있어서, 상기 제어부는,
    상기 객체의 3차원 영상의 적어도 일부의 투명도를 증가시키도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
16. 제15항에 있어서, 상기 제어부는,
    상기 제어부는 상기 객체의 3차원 영상의 상기 물체와 중첩되는 영역과 나머지 영역을 구분하고, 상기 중첩되는 영역의 투명도를 증가시키도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
17. 제15항에 있어서, 상기 제어부는,
    상기 객체의 3차원 영상의 가장자리를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
18. 제15항에 있어서, 상기 제어부는,
    상기 객체의 3차원 영상을 위치를 상기 물체와 이격되도록 변경시키도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
19. 제13항에 있어서, 상기 제어부는,
    상기 객체는 깊이가 서로 다른 제1 및 제2 객체를 포함하고, 상기 제1 객체의 3차원 영상은 상기 제2 객체의 3차원 영상보다 상기 디스플레이부에 가깝게 출력되고, 상기 물체의 적어도 일부는 상기 제2 객체를 관통하고, 상기 물체의 일단부가 상기 제2 객체와 접하도록 배치되면, 상기 제2 객체의 적어도 일 영역의 형태를 변경하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 영상표시장치.
20. 제13항에 있어서, 상기 디스플레이부는 상기 디스플레이부와 사용자 사이에 상기 3차원 입체영상을 표시하는 것을 특징으로 하는 영상표시장치.
21. 제13항에 있어서, 상기 디스플레이부는 사용자와 반대되는 방향으로 상기 3차원 입체영상을 표시하고, 상기 사용자가 상기 물체를 인식하도록 양면이 투명한 재질로 형성되는 것을 특징으로 하는 영상표시장치.

Images