KR20140013714A - Image processing apparatus and method thereof - Google Patents

Image processing apparatus and method thereof Download PDF

Info

Publication number
KR20140013714A
KR20140013714A KR1020120081922A KR20120081922A KR20140013714A KR 20140013714 A KR20140013714 A KR 20140013714A KR 1020120081922 A KR1020120081922 A KR 1020120081922A KR 20120081922 A KR20120081922 A KR 20120081922A KR 20140013714 A KR20140013714 A KR 20140013714A
Authority
KR
South Korea
Prior art keywords
stereoscopic
stereoscopic object
dimensional
image
signal
Prior art date
Application number
KR1020120081922A
Other languages
Korean (ko)
Other versions
KR101906203B1 (en
Inventor
송효진
한순보
장형석
이동영
박상조
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020120081922A priority Critical patent/KR101906203B1/en
Publication of KR20140013714A publication Critical patent/KR20140013714A/en
Application granted granted Critical
Publication of KR101906203B1 publication Critical patent/KR101906203B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals

Abstract

The present specification relates to an image processing apparatus and a method thereof which is capable of selecting a desired object among overlapped objects when a part of the objects are overlapped among the objects included in a stereoscopic image. The image processing apparatus according to embodiments of the present invention comprise: a display unit for displaying the stereoscopic image; and a controlling unit which detects a second three-dimensional object that covers a first three-dimensional object among the three-dimensional objects included in the displayed stereoscopic image, changes properties of the detected second three-dimensional object, and selects the first three-dimensional object according to a user selection signal. [Reference numerals] (401) Display unit; (402) Detection unit; (403) Controlling unit; (AA) Three-dimensional spatial coordinate

Description

영상 처리 장치 및 그 방법{IMAGE PROCESSING APPARATUS AND METHOD THEREOF}Image processing apparatus and its method {IMAGE PROCESSING APPARATUS AND METHOD THEREOF}

본 명세서는 영상 처리 장치 및 그 방법에 관한 것이다. The present specification relates to an image processing apparatus and a method thereof.

일반적으로, 종래 기술에 따른 영상 처리 장치는 카메라를 통해 촬영된 입체 영상 또는 유선/무선 통신망을 통해 수신된 입체 영상을 표시부에 표시하였다. 종래 기술에 따른 입체 영상 표시 장치는 한국 특허 출원번호 10-2011-7013890에도 개시되어 있다. In general, the image processing apparatus according to the related art displays a stereoscopic image captured by a camera or a stereoscopic image received through a wired / wireless communication network on a display unit. The stereoscopic image display device according to the prior art is also disclosed in Korean Patent Application No. 10-2011-7013890.

본 명세서는, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들 중에서 원하는 오브젝트를 용이하게 선택할 수 있는 영상 처리 장치 및 그 방법을 제공하는 데 그 목적이 있다.It is an object of the present specification to provide an image processing apparatus and a method for easily selecting a desired object among the overlapped objects when some objects among the objects included in the stereoscopic image overlap each other.

본 명세서의 실시예들에 따른 영상 처리 장치는, 입체 이미지를 표시하는 표시부와; 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 제1 입체 오브젝트를 가리는 제2 입체 오브젝트를 검출하고, 상기 검출된 제2 입체 오브젝트의 속성을 변경하고, 사용자 선택 신호에 따라 상기 제1 입체 오브젝트를 선택하는 제어부를 포함할 수 있다. An image processing apparatus according to embodiments of the present disclosure includes a display unit that displays a stereoscopic image; Detecting a second stereoscopic object covering a first stereoscopic object among the stereoscopic objects included in the displayed stereoscopic image, changing the attribute of the detected second stereoscopic object, and selecting the first stereoscopic object according to a user selection signal. It may include a control unit.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트의 속성을 변경할 때 상기 제2 입체 오브젝트를 비활성화시킬 수 있다.As an example related to the present invention, the controller may deactivate the second stereoscopic object when the property of the second stereoscopic object is changed.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트를 반투명 또는 투명하게 할 수 있다.As an example related to the present invention, the controller may make the second stereoscopic object translucent or transparent.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트를 반투명 또는 투명하게 함과 동시에 상기 제2 입체 오브젝트의 외각선을 실선 또는 점선으로 표시할 수 있다. As an example related to the present invention, the controller may make the second stereoscopic object translucent or transparent and simultaneously display the outer line of the second stereoscopic object as a solid line or a dotted line.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 상기 제1 입체 오브젝트를 활성 입체 오브젝트로서 결정할 수 있다. As an example related to the present disclosure, the controller may determine, as an active three-dimensional object, the first three-dimensional object corresponding to the same position or the nearest position to the three-dimensional spatial coordinates selected by the user among the three-dimensional objects.

본 발명과 관련된 일 예로서, 상기 제2 입체 오브젝트는 상기 제1 입체 오브젝트와 서로 다른 깊이를 갖는 입체 오브젝트일 수 있다. As an example related to the present invention, the second stereoscopic object may be a stereoscopic object having a different depth from the first stereoscopic object.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시할 수 있다. As an example related to the present invention, the controller may display the size of the second stereoscopic object smaller than the size of the first stereoscopic object.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시할 수 있다. As an example related to the present invention, when the second stereoscopic object covers the first stereoscopic object, the controller may display the size of the second stereoscopic object smaller than the size of the first stereoscopic object.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트를 미리설정된 위치로 이동시킬 수 있다.As an example related to the present disclosure, the controller may move the second stereoscopic object to a preset position when the second stereoscopic object covers the first stereoscopic object.

본 발명과 관련된 일 예로서, 상기 제어부는 상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 표시부에 표시된 이미지상에서 상기 입체 오브젝트들이 존재하는 않는 영역을 검출하고, 상기 검출된 영역으로 상기 제2 입체 오브젝트를 이동시킬 수 있다.As an example related to the present invention, when the second stereoscopic object covers the first stereoscopic object, the controller detects an area where the stereoscopic objects do not exist on the image displayed on the display unit, and detects the area as the detected region. The second stereoscopic object may be moved.

본 명세서의 실시예들에 따른 영상 처리 방법은, 입체 이미지를 표시부에 표시하는 단계와; 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 제1 입체 오브젝트를 가리는 제2 입체 오브젝트를 검출하는 단계와; 상기 검출된 제2 입체 오브젝트의 속성을 변경하는 단계와; 사용자 선택 신호에 따라 상기 제1 입체 오브젝트를 선택하는 단계를 포함할 수 있다. An image processing method according to embodiments of the present disclosure includes displaying a stereoscopic image on a display unit; Detecting a second three-dimensional object covering a first three-dimensional object among three-dimensional objects included in the displayed three-dimensional image; Changing an attribute of the detected second stereoscopic object; And selecting the first stereoscopic object according to a user selection signal.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들의 속성을 변경(예를 들면, 원하는 제1 오브젝트를 가리는 제2 오브젝트를 반투명, 투명, 점선 또는 실선 등으로 표시함)함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있는 효과가 있다. The image processing apparatus and the method according to the embodiments of the present invention change a property of the overlapped objects when some objects among the objects included in the stereoscopic image overlap each other (for example, covering the desired first object). By displaying the second object as semi-transparent, transparent, dotted line or solid line), the user can easily select a desired object.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트의 크기를 상기 사용자가 선택할 오브젝트의 크기보다 작게 표시함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있는 효과도 있다. An image processing apparatus and method according to embodiments of the present invention, when an object selected by a user among objects included in a stereoscopic image is covered by a specific object, the size of the specific object is larger than the size of the object selected by the user. By displaying small, the user can also easily select a desired object.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트를 이동시킴으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있는 효과도 있다. In an image processing apparatus and method according to embodiments of the present invention, when an object to be selected by a user among an object included in a stereoscopic image is covered by a specific object, the user may easily select a desired object by moving the specific object. There is also an effect.

도 1은 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 이동 통신 단말기의 구성을 나타낸 구성도이다.
도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치의 구성을 나타낸 구성도이다.
도 3은 본 발명의 실시예들에 따른 영상 처리 장치를 나타낸 구성도이다.
도 4는 본 발명의 제1 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 5는 입체 오브젝트를 나타낸 예시도 이다.
도 6은 서로 일부가 중첩된 입체 오브젝트를 나타낸 예시도 이다.
도 7은 본 발명의 실시예들에 따라 속성이 변경된 오브젝트를 나타낸 예시 도이다.
도 8은 본 발명의 제2 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 9는 본 발명의 제2 실시예에 따른 활성 오브젝트를 가리는 오브젝트의 크기를 나타낸 예시도 이다.
도 10은 본 발명의 제3 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 11은 본 발명의 제3 실시예에 따른 활성 오브젝트를 가리는 오브젝트의 이동 위치를 나타낸 예시도 이다.
1 is a block diagram illustrating a configuration of a mobile communication terminal to which an image processing apparatus according to embodiments of the present invention is applied.
2 is a block diagram illustrating a configuration of an image display apparatus to which an image processing apparatus according to an exemplary embodiment of the present invention is applied.
3 is a block diagram illustrating an image processing apparatus according to example embodiments.
4 is a flowchart illustrating an image processing method according to a first embodiment of the present invention.
5 is an exemplary view showing a three-dimensional object.
6 is an exemplary view showing a three-dimensional object with some overlapping each other.
7 is an exemplary view showing an object whose attribute is changed according to embodiments of the present invention.
8 is a flowchart illustrating an image processing method according to a second embodiment of the present invention.
9 is an exemplary diagram illustrating the size of an object that covers an active object according to a second embodiment of the present invention.
10 is a flowchart illustrating an image processing method according to a third embodiment of the present invention.
11 is an exemplary view showing a moving position of an object covering an active object according to a third embodiment of the present invention.

본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다. It is noted that the technical terms used herein are used only to describe specific embodiments and are not intended to limit the invention. It is also to be understood that the technical terms used herein are to be interpreted in a sense generally understood by a person skilled in the art to which the present invention belongs, Should not be construed to mean, or be interpreted in an excessively reduced sense. In addition, when the technical terms used herein are incorrect technical terms that do not accurately represent the spirit of the present invention, it should be replaced with technical terms that can be understood correctly by those skilled in the art. In addition, the general terms used in the present invention should be interpreted according to a predefined or prior context, and should not be construed as being excessively reduced.

또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다. Also, the singular forms "as used herein include plural referents unless the context clearly dictates otherwise. In the present application, the term "comprising" or "comprising" or the like should not be construed as necessarily including the various elements or steps described in the specification, Or may be further comprised of additional components or steps.

또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다. Furthermore, terms including ordinals such as first, second, etc. used in this specification can be used to describe various elements, but the elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or similar elements throughout the several views, and redundant description thereof will be omitted.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. It is to be noted that the accompanying drawings are only for the purpose of facilitating understanding of the present invention, and should not be construed as limiting the scope of the present invention with reference to the accompanying drawings.

도 1은 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 이동 통신 단말기(100)의 구성을 나타낸 구성도이다. 이동 통신 단말기(이동 전화기)(100)는 다양한 형태로 구현될 수 있다. 예를 들면, 이동 통신 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 있다. 1 is a block diagram illustrating a configuration of a mobile communication terminal 100 to which an image processing apparatus according to embodiments of the present invention is applied. The mobile communication terminal (mobile phone) 100 may be implemented in various forms. For example, the mobile communication terminal 100 includes a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), and the like.

도1에 도시한 바와 같이, 이동 통신 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 이동 통신 단말기(100)의 구성요소 모두가 필수 구성요소인 것은 아니며, 도 1에 도시된 구성요소보다 많은 구성요소에 의해 이동 통신 단말기(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 이동 통신 단말기(100)가 구현될 수도 있다.As shown in FIG. 1, the mobile communication terminal 100 includes a wireless communication unit 110, an A / V (Audio / Video) input unit 120, a user input unit 130, a sensing unit 140, and an output unit 150. ), A memory 160, an interface unit 170, a controller 180, a power supply unit 190, and the like. Not all components of the mobile communication terminal 100 shown in FIG. 1 are essential components, and the mobile communication terminal 100 may be implemented by more components than those shown in FIG. The mobile communication terminal 100 may also be implemented by components.

상기 무선 통신부(110)는 이동 통신 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 통신 단말기(100)와 그 이동 통신 단말기(100)가 위치한 네트워크간의 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들면, 무선 통신부(110)는 방송 수신 모듈(111), 이동 통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치 정보 모듈(115) 등을 포함할 수 있다.The wireless communication unit 110 may include at least one component for performing wireless communication between the mobile communication terminal 100 and the wireless communication system or wireless communication between the mobile communication terminal 100 and a network on which the mobile communication terminal 100 is located . For example, the wireless communication unit 110 may include a broadcast receiving module 111, a mobile communication module 112, a wireless Internet module 113, a short range communication module 114 and a location information module 115 .

상기 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 미리 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 이동 통신 단말기(100)에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.The broadcast receiving module 111 receives broadcast signals and / or broadcast-related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel. The broadcast management server may be a server for generating and transmitting broadcast signals and / or broadcast-related information, or a server for receiving previously generated broadcast signals and / or broadcast-related information and transmitting the broadcast signals and / or broadcast- related information to the mobile communication terminal 100 . The broadcast-related information may refer to a broadcast channel, a broadcast program, or information related to a broadcast service provider. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, a data broadcast signal, and a broadcast signal in which a data broadcast signal is combined with a TV broadcast signal or a radio broadcast signal.

한편, 상기 방송 관련 정보는, 이동 통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동 통신 모듈(112)에 의해 수신될 수 있다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들면, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.Meanwhile, the broadcast related information may be provided through a mobile communication network, and in this case, it may be received by the mobile communication module 112. The broadcast-related information may exist in various forms. For example, an EPG (Electronic Program Guide) of DMB (Digital Multimedia Broadcasting) or an ESG (Electronic Service Guide) of Digital Video Broadcast-Handheld (DVB-H).

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다. 방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast receiving module 111 receives broadcasting signals using various broadcasting systems. In particular, the broadcasting receiving module 111 may be a Digital Multimedia Broadcasting-Terrestrial (DMB-T), a Digital Multimedia Broadcasting-Satellite (DMB-S) Only Digital Broadcast-Handheld (DVB-H), Integrated Services Digital Broadcast-Terrestrial (ISDB-T), and the like. Of course, the broadcast receiving module 111 is configured to be suitable for all broadcasting systems that provide broadcasting signals as well as the digital broadcasting system described above. The broadcast signal and / or broadcast related information received through the broadcast receiving module 111 may be stored in the memory 160.

상기 이동 통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module 112 transmits and receives radio signals to at least one of a base station, an external terminal, and a server on a mobile communication network. Here, the wireless signal may include various types of data related to transmission and reception of a voice call signal, a video call signal, and / or a text / multimedia message.

상기 무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 의미하는 것으로, 상기 무선 인터넷 모듈(113)은 이동 통신 단말기(100)에 내장되거나 외장될 수 있다. 여기서, 무선 인터넷 기술로는 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access : Wimax), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.The wireless Internet module 113 refers to a module for wireless Internet access, and the wireless Internet module 113 can be embedded in the mobile communication terminal 100 or externally. Here, wireless Internet technologies include WLAN (Wireless LAN), Wi-Fi, WiBro, WiMAX, World Interoperability for Microwave Access (Wimax), and HSDPA (High Speed Downlink Packet Access). Can be used.

상기 근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 의미한다. 근거리 통신 기술로서 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-range communication module 114 means a module for short-range communication. As a short range communication technology, Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, and the like may be used.

상기 위치 정보 모듈(115)은 이동 단말기의 위치(이동 단말기가 차량에 장착되었을 때 차량의 위치 확인 가능)를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들면, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다. 상기 위치 정보 모듈(115)로서 와이파이 위치추적 시스템(Wi-Fi Positioning System) 및/또는 하이브리드 위치추적 시스템(Hybrid Positioning System)이 적용될 수도 있다. The position information module 115 is a module for confirming or obtaining the position of the mobile terminal (capable of checking the position of the vehicle when the mobile terminal is mounted on the vehicle). One example is the GPS (Global Position System) module. The GPS module receives position information from a plurality of satellites. Here, the location information may include coordinate information indicated by latitude and longitude. For example, the GPS module can accurately calculate the current position according to the triangle method by measuring the precise time and distance from three or more satellites and measuring three different distances. A method of obtaining distance and time information from three satellites and correcting the error by one satellite may be used. In particular, the GPS module can acquire latitude, longitude and altitude as well as three-dimensional velocity information and accurate time from the position information received from the satellite. A Wi-Fi Positioning System and / or a Hybrid Positioning System may be applied as the location information module 115.

상기 위치 정보 모듈(115)은 방향을 검출하는 지자계 센서 및/또는 중력 센서를 더 포함할 수 있다. 예를 들면, 상기 위치 정보 모듈(115)은 상기 지자계 센서(전자 나침반)를 통해 증강현실(augmented reality)을 이용한 내비게이션 구현을 위해 이동 통신 단말기의 방향(예를 들면, 동서남북)을 검출한다. 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 중력이 어느 방향으로 작용하는지를 탐지하고, 사용자가 이동 통신 단말기를 세로로 길게 들고 있을 때는 세로로 된 화면을 보여주고, 가로로 들고 있을 때는 화면을 자동으로 90도 회전시켜 넓은 화면을 보여준다. 또한, 사용자가 동영상을 시청할 때, 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 사용자가 이동 통신 단말기를 들고 있는 방향에 따라 화면을 회전시켜 사용자가 편하게 영상을 시청하도록 한다.The location information module 115 may further include a geomagnetic sensor and / or a gravity sensor for detecting a direction. For example, the position information module 115 detects directions (e.g., north, south, east, and west) of a mobile communication terminal for implementing navigation using augmented reality through the geomagnetic sensor (electronic compass). The position information module 115 detects in which direction gravity acts through the gravity sensor (G sensor). When the user holds the mobile communication terminal vertically, the position information module 115 displays a vertical screen, , The screen is automatically rotated 90 degrees to show a wide screen. Also, when the user watches the moving image, the position information module 115 rotates the screen according to the direction in which the user holds the mobile communication terminal through the gravity sensor (G sensor) so that the user can easily view the image.

상기 A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호를 입력하기 위한 것으로서, 상기 A/V(Audio/Video) 입력부(120)에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 상기 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 상기 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.The A / V input unit 120 is for inputting an audio signal or a video signal. The A / V input unit 120 includes a camera 121 and a microphone 122, . The camera 121 processes an image frame such as a still image or a moving image obtained by the image sensor in the video communication mode or the photographing mode. The processed image frame can be displayed on the display unit 151. [

상기 카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 상기 카메라(121)는 이동 단말기의 구성 형태에 따라 2개 이상이 구성될 수도 있다. The image frame processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. [ The camera 121 may be composed of two or more according to the configuration of the mobile terminal.

상기 마이크(122)는 통화 모드 또는 녹음 모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 수신하여 전기적인 음성 데이터로 처리한다. 상기 통화 모드일 때, 상기 처리된 음성 데이터는 이동 통신 모듈(112)을 통하여 이동 통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 상기 마이크(122)는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다. The microphone 122 receives an external sound signal by a microphone in a communication mode, a recording mode, a voice recognition mode, and the like, and processes it as electrical voice data. In the call mode, the processed voice data can be converted into a form that can be transmitted to the mobile communication base station through the mobile communication module 112 and output. The microphone 122 may be implemented with various noise reduction algorithms for eliminating noise generated in the process of receiving an external sound signal.

상기 사용자 입력부(130)는 사용자가 이동 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 상기 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.The user input unit 130 generates input data for a user to control the operation of the mobile terminal. The user input unit 130 may include a key pad dome switch, a touch pad (static pressure / capacitance), a jog wheel, a jog switch, and the like. Particularly, when the touch pad has a mutual layer structure with the display unit 151, it can be called a touch screen.

상기 센싱부(140)는 이동 통신 단말기(100)의 개폐 상태, 이동 통신 단말기(100)의 위치, 사용자 접촉 유무, 이동 통신 단말기(100)의 방위, 이동 통신 단말기(100)의 가속/감속 등과 같이 이동 통신 단말기(100)의 현 상태를 감지하여 이동 통신 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들면, 이동 통신 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 상기 센싱부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다.The sensing unit 140 senses the position of the mobile communication terminal 100 in the open / close state, the position of the mobile communication terminal 100, the presence of the user, the orientation of the mobile communication terminal 100, The mobile communication terminal 100 senses the current state of the mobile communication terminal 100 and generates a sensing signal for controlling the operation of the mobile communication terminal 100. For example, when the mobile communication terminal 100 is in the form of a slide phone, it is possible to sense whether the slide phone is opened or closed. The sensing unit 140 senses whether the power supply unit 190 is powered on, whether the interface unit 170 is connected to an external device, and the like.

상기 인터페이스부(170)는 이동 통신 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 통신 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 통신 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 통신 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 통신 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.The interface unit 170 serves as an interface with all external devices connected to the mobile communication terminal 100. For example, the interface unit 170 may include a headset port, an external charger port, a wired / wireless data port, a memory card port, a port for connecting a device having an identification module, An audio input / output (I / O) port, a video I / O (input / output) port, and an earphone port. Here, the identification module is a chip that stores various information for authenticating the usage right of the mobile communication terminal 100, and includes a user identification module (UIM), a subscriber identity module (SIM) ), A Universal Subscriber Identity Module (" USIM "), and the like. In addition, an apparatus (hereinafter, referred to as 'identification device') having the identification module may be manufactured in a smart card format. Accordingly, the identification module can be connected to the mobile communication terminal 100 through the port. The interface unit 170 receives data from an external device or receives power from the external device and transmits the received data to each component in the mobile communication terminal 100 or transmits data in the mobile communication terminal 100 to an external device.

상기 출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로서, 상기 출력부(150)에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.The output unit 150 is for outputting an audio signal, a video signal, or an alarm signal. The output unit 150 includes a display unit 151, an audio output module 152, an alarm unit 153, May be included.

상기 디스플레이부(표시부)(151)는 이동 통신 단말기(100)에서 처리되는 정보를 표시하여 출력한다. 예를 들면, 이동 통신 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 통신 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. The display unit (display unit) 151 displays information to be processed by the mobile communication terminal 100 and outputs the information. For example, when the mobile communication terminal 100 is in the call mode, a UI (User Interface) or a GUI (Graphic User Interface) associated with a call is displayed. When the mobile communication terminal 100 is in the video communication mode or the photographing mode, the displayed image or the UI or GUI is displayed.

상기 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 통신 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들면, 이동 통신 단말기(100)에 외부 디스플레이부(도시하지 않음)와 내부 디스플레이부(도시하지 않음)가 동시에 구비될 수 있다.The display unit 151 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, a three-dimensional display (3D display). There may be two or more display units 151 according to the embodiment of the mobile communication terminal 100. For example, the mobile communication terminal 100 may be provided with an external display unit (not shown) and an internal display unit (not shown) at the same time.

상기 디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다. (Hereinafter, referred to as a 'touch screen') has a mutual layer structure with the display unit 151 and a sensor (hereinafter, referred to as 'touch sensor' It can also be used as an input device in addition to the device. The touch sensor may have the form of, for example, a touch film, a touch sheet, a touch pad, or the like.

또한, 상기 터치 센서는, 상기 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(도시하지 않음)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)에 전송한다. 이로써, 상기 제어부(180)는, 상기 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.The touch sensor may be configured to convert a change in a pressure applied to a specific portion of the display unit 151 or a capacitance generated in a specific portion of the display unit 151 into an electrical input signal. The touch sensor can be configured to detect not only the position and area to be touched but also the pressure at the time of touch. If there is a touch input to the touch sensor, the corresponding signal (s) is sent to a touch controller (not shown). The touch controller processes the signal (s) and transmits the corresponding data to the control unit 180. Thus, the control unit 180 can know which area of the display unit 151 is touched or the like.

본 발명에서 근접 터치(proximity-touch)는, 포인터(pointer)가 화면에 실제로 터치는 되지 않고, 화면으로부터 소정 거리 떨어져 접근되는 것을 의미한다. In the present invention, the proximity-touch means that the pointer is not actually touched on the screen but approaches a predetermined distance from the screen.

상기 근접 센서(141)는, 터치 스크린에 의해 감싸지는 이동 통신 단말기(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서(141)는, 소정의 검출 면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 상기 근접 센서(141)는, 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.The proximity sensor 141 may be disposed in an inner region of the mobile communication terminal 100 or in the vicinity of the touch screen, which is surrounded by the touch screen. The proximity sensor 141 refers to a sensor that detects the presence of an object approaching a predetermined detection surface or an object existing in the vicinity thereof without mechanical contact by using electromagnetic force or infrared rays. The proximity sensor 141 has a longer lifetime and higher utilization than the contact-type sensor.

상기 근접 센서(141)의 예로는, 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치 스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.Examples of the proximity sensor 141 include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor. And to detect the proximity of the pointer by the change of the electric field along the proximity of the pointer when the touch screen is electrostatic. In this case, the touch screen (touch sensor) may be classified as a proximity sensor.

이하에서는 설명의 편의를 위해, 상기 터치 스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(Proximity Touch)"라고 칭하고, 상기 터치 스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(Contact Touch)"라고 칭한다. 상기 터치 스크린 상에서 포인터로 근접 터치가 되는 위치는, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다.Hereinafter, for convenience of explanation, the act of recognizing that the pointer is positioned on the touch screen while the pointer is not in contact with the touch screen is referred to as "proximity touch" The act of actually touching the pointer on the screen is called "Contact Touch ". A position where the pointer is proximally touched on the touch screen means a position where the pointer corresponds to the touch screen vertically when the pointer is touched.

또한, 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 상기 터치 스크린 상에 출력될 수 있다.Further, the proximity sensor 141 detects a proximity touch and a proximity touch pattern (for example, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, do. Information corresponding to the detected proximity touch operation and the proximity touch pattern may be output on the touch screen.

상기 센싱부(140)는 가속도 센서(142)를 포함할 수 있다. 가속도 센서(142)는 어느 한 방향의 가속도 변화에 대해서 이를 전기 신호로 바꾸어 주는 소자로서, MEMS(micro-electromechanical systems) 기술의 발달과 더불어 널리 사용되고 있다. 가속도 센서(142)에는, 자동차의 에어백 시스템에 내장되어 충돌을 감지하는데 사용하는 큰 값의 가속도를 측정하는 것부터, 사람 손의 미세한 동작을 인식하여 게임 등의 입력 수단으로 사용하는 미세한 값의 가속도를 측정하는 것까지 다양한 종류가 있다. 가속도 센서(142)는 보통 2축이나 3축을 하나의 패키지에 실장하여 구성되며, 사용 환경에 따라서는 Z축 한 축만 필요한 경우도 있다. 따라서, 어떤 이유로 Z축 방향 대신 X축 또는 Y축 방향의 가속도 센서를 써야 할 경우에는 별도의 조각 기판을 사용하여 가속도 센서를 주 기판에 세워서 실장할 수도 있다. The sensing unit 140 may include an acceleration sensor 142. The acceleration sensor 142 converts an acceleration signal in one direction into an electrical signal, and is widely used with the development of micro-electromechanical systems (MEMS) technology. Since the acceleration sensor 142 measures the acceleration of a large value that is built in the airbag system of an automobile and used to detect a collision, the acceleration sensor 142 recognizes the minute motion of a human hand and calculates a minute value acceleration There are various kinds of things to measure. The acceleration sensor 142 is usually configured by mounting two or three axes in one package. In some cases, only one axis of the Z axis is required depending on the use environment. Therefore, when the acceleration sensor in the X-axis direction or the Y-axis direction is used instead of the Z-axis direction for some reason, the acceleration sensor may be mounted on the main substrate by using a separate piece substrate.

상기 음향 출력 모듈(152)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 통신 단말기(100)에서 수행되는 기능(예를 들면, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The sound output module 152 outputs audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception mode, a call mode or a recording mode, a voice recognition mode, and a broadcast reception mode. The sound output module 152 outputs sound signals related to functions (e.g., call signal reception sound, message reception sound, etc.) performed in the mobile communication terminal 100. The sound output module 152 may include a speaker, a buzzer, and the like.

상기 알람부(153)는 이동 통신 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 상기 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신될 때, 이를 알리기 위해 알람부(153)는 진동 수단을 통해 이동 단말기를 진동시킬 수 있다. 또는, 상기 알람부(153)는, 키 신호가 입력된 경우, 그 키 신호 입력에 대한 피드백으로 진동 수단을 통해 이동 통신 단말기(100)를 진동시킬 수 있다. 상기와 같은 진동을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.The alarm unit 153 outputs a signal for notifying the occurrence of an event of the mobile communication terminal 100. Examples of events that occur in the mobile terminal include receiving a call signal, receiving a message, and inputting a key signal. The alarm unit 153 may output a signal for notifying the occurrence of an event in a form other than an audio signal or a video signal. For example, it is possible to output a signal in a vibration mode. When the call signal is received or the message is received, the alarm unit 153 can vibrate the mobile terminal through the vibration means to inform it. Alternatively, when the key signal is input, the alarm unit 153 may vibrate the mobile communication terminal 100 through the vibration means with the feedback of the key signal input. Through the above-described vibration, the user can recognize the occurrence of the event. Of course, a signal for notifying the occurrence of an event may also be output through the display unit 151 or the audio output module 152.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다. The haptic module 154 generates various tactile effects that the user can feel. A typical example of the haptic effect generated by the haptic module 154 is vibration. The intensity and pattern of vibration generated by the haptic module 154 can be controlled. For example, different vibrations may be synthesized and output or sequentially output.

상기 햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.In addition to vibration, the haptic module 154 may include a pin arrangement vertically moving with respect to the contact skin surface, a spraying force or suction force of air through the injection port or the suction port, a spit on the skin surface, contact with an electrode, And various effects of tactile effect such as effect of reproducing the cold sensation using the heat absorbing or heatable element can be generated.

상기 햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 텔레매틱스 단말기의 구성 태양에 따라 2개 이상이 구비될 수 있다. 햅틱 모듈(154)은 차량에서 사용자와의 접촉이 빈번한 곳에 구비될 수 있다. 예를 들어, 조향 휠, 변속 기어 레버, 좌석 시트 등에 구비될 수 있다.The haptic module 154 can transmit a tactile effect through direct contact, and the tactile effect can be felt by a user through a muscular sense such as a finger or an arm. At least two haptic modules 154 may be provided according to the configuration of the telematics terminal. The haptic module 154 may be provided in a place where frequent contact with a user is frequent in the vehicle. For example, a steering wheel, a shift gear lever, a seat, and the like.

상기 메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 지도 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. The memory 160 may store a program for processing and controlling the controller 180 and temporarily store the input / output data (e.g., map data, a phone book, a message, a still image, For example.

상기 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 통신 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.The memory 160 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory) (Random Access Memory) SRAM (Static Random Access Memory), ROM (Read Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory) A disk, and / or an optical disk. In addition, the mobile communication terminal 100 may operate a web storage that performs a storage function of the memory 150 on the Internet.

상기 인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset Port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(Memory Card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module: UIM), 가입자 인증 모듈(Subscriber Identify Module: SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module: USIM) 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치'라 한다)는, 스마트 카드(Smart Card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.The interface unit 170 serves as an interface with all external devices connected to the mobile terminal 100. For example, the interface unit 170 may include a headset port, an external charger port, a wired / wireless data port, a memory card port, a port for connecting a device having an identification module, An audio input / output (I / O) port, a video I / O (input / output) port, and an earphone port. Here, the identification module is a chip that stores various information for authenticating the use right of the mobile terminal 100, and includes a user identification module (UIM), a subscriber identity module (SIM) A Universal Subscriber Identity Module (USIM), and the like. In addition, the device having the identification module (hereinafter, referred to as 'identification device') can be manufactured in a smart card format. Accordingly, the identification module can be connected to the mobile terminal 100 through the port. The interface unit 170 receives data from an external device or receives power from the external device and transmits the received data to each component in the mobile terminal 100 or transmits data in the mobile terminal 100 to an external device.

상기 인터페이스부(170)는 이동 단말기(100)가 외부 크래들(Cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.When the mobile terminal 100 is connected to an external cradle, the interface unit 170 may be a path through which power from the cradle is supplied to the mobile terminal 100, or various commands A signal may be transmitted to the mobile terminal 100. The various command signals or the power source inputted from the cradle may be operated as a signal for recognizing that the mobile terminal 100 is correctly mounted on the cradle.

상기 제어부(180)는 통상적으로 이동 통신 단말기(100)의 전반적인 동작을 제어한다. 예를 들면, 상기 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 상기 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 상기 멀티미디어 모듈(181)은 상기 제어부(180) 내에 구현될 수도 있고, 상기 제어부(180)와 별도로 구현될 수도 있다.The controller 180 typically controls the overall operation of the mobile communication terminal 100. For example, the control unit 180 performs related control and processing for voice call, data communication, video call, and the like. In addition, the controller 180 may include a multimedia module 181 for multimedia playback. The multimedia module 181 may be implemented in the control unit 180 or may be implemented separately from the control unit 180.

상기 제어부(180)는 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.The control unit 180 can perform a pattern recognition process for recognizing handwriting input or drawing input performed on the touch screen as characters and images, respectively.

상기 전원 공급부(190)는 상기 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 수신하여 각 구성요소들의 동작에 필요한 전원을 공급한다.The power supply unit 190 receives an external power source and an internal power source under the control of the controller 180 and supplies power required for operation of the respective components.

상기 이동 통신 단말기(100)에 적용된 구성 요소의 기능은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수도 있다. 하드웨어적인 구현에 의하면, ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다. 소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수도 있다. The functions of the components applied to the mobile communication terminal 100 may be implemented in a computer-readable recording medium using software, hardware, or a combination thereof. According to a hardware implementation, an application specific integrated circuit (ASIC), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs) controllers may be implemented using at least one of micro-controllers, microprocessors, and electrical units for performing functions. In some cases, such embodiments may be implemented by the controller 180 In accordance with a software implementation, embodiments such as procedures or functions may be implemented with separate software modules that perform at least one function or operation. The software code may be stored in a software application written in a suitable programming language The software code may be stored in the memory 160, May also be performed by the < / RTI >

상기 음성 인식 모듈(182)은 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.The voice recognition module 182 recognizes a voice uttered by a user and performs a corresponding function according to the recognized voice signal.

상기 이동 통신 단말기(100)에 적용된 내비게이션 세션(session)(300)은 지도 데이터 상에 주행 경로를 표시한다.The navigation session 300 applied to the mobile communication terminal 100 displays a driving route on map data.

본 발명의 실시예들에 따른 이동 통신 단말기(100)에 적용된 영상 처리 장치의 구성 요소에 대한 상세한 설명은 도3 내지 도 11을 참조하여 설명한다.Detailed description of the components of the image processing apparatus applied to the mobile communication terminal 100 according to the embodiments of the present invention will be described with reference to FIGS. 3 to 11.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 도 2를 참조하여 설명한다. Hereinafter, a configuration of an image display apparatus 200 to which an image processing apparatus according to embodiments of the present invention is applied will be described with reference to FIG. 2.

도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 나타낸 구성도이다.2 is a block diagram illustrating a configuration of an image display apparatus 200 to which an image processing apparatus according to an exemplary embodiment of the present invention is applied.

도 2에 도시한 바와 같이, 본 발명의 실시예들에 의한 영상 표시 장치(200)는 튜너(210), 복조부(220), 외부장치 인터페이스부(230), 네트워크 인터페이스부(235), 저장부(240), 사용자입력 인터페이스부(250), 제어부(270), 디스플레이(280), 오디오 출력부(285), 및 3D 시청장치(295)를 포함할 수 있다.As shown in FIG. 2, the video display device 200 according to the embodiments of the present invention includes a tuner 210, a demodulator 220, an external device interface 230, a network interface 235, and storage. The unit 240, a user input interface unit 250, a controller 270, a display 280, an audio output unit 285, and a 3D viewing apparatus 295 may be included.

튜너(210)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 상기 튜너(210)는 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다. 예를 들어, 상기 튜너(210)는 상기 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너(210)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. The tuner 210 selects an RF broadcast signal corresponding to a channel selected by a user or all pre-stored channels from a radio frequency (RF) broadcast signal received through an antenna. The tuner 210 converts the selected RF broadcast signal into an intermediate frequency signal or a baseband video or audio signal. For example, the tuner 210 converts the selected RF broadcast signal into a digital IF signal (DIF) if the selected RF broadcast signal is a digital broadcast signal, and converts it into an analog baseband video or audio signal (CVBS / SIF). That is, the tuner 210 may process a digital broadcast signal or an analog broadcast signal.

튜너(210)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(270)로 직접 입력될 수 있다.The analog baseband video or audio signal CVBS / SIF output from the tuner 210 may be directly input to the controller 270.

또한, 튜너(210)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다. In addition, the tuner 210 may receive an RF broadcast signal of a single carrier according to an Advanced Television System Committee (ATSC) scheme or an RF broadcast signal of multiple carriers according to a digital video broadcasting (DVB) scheme.

한편, 튜너(210)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다. Meanwhile, in the present invention, the tuner 210 sequentially selects RF broadcast signals of all broadcast channels stored through a channel memory function among RF broadcast signals received through an antenna and converts them into intermediate frequency signals or baseband video or audio signals. I can convert it.

복조부(220)는 튜너(210)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(220)는 8-VSB(7-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(220)는 채널 복호화를 수행할 수도 있다. The demodulator 220 receives the digital IF signal DIF converted by the tuner 210 and performs a demodulation operation. For example, when the digital IF signal output from the tuner 210 is an ATSC scheme, the demodulator 220 performs 7-VSB (7-Vestigal Side Band) demodulation. Also, the demodulator 220 may perform channel decoding.

상기 복조부(220)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(220)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다. 또한, 복조부(220)는, 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(220)는, 컨벌루션 디코더(convolution decoder), 디인터리버, 및 리드-솔로먼 디코더 등을 구비하여, 컨벌루션 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다. The demodulator 220 includes a trellis decoder, a de-interleaver, a reed solomon decoder, and the like, and includes trellis decoding, deinterleaving, and reed solo. Remote decoding can be performed. For example, when the digital IF signal output from the tuner 210 is a DVB scheme, the demodulator 220 performs coded orthogonal frequency division modulation (COFDMA) demodulation. In addition, the demodulator 220 may perform channel decoding. For this, the demodulator 220 may include a convolution decoder, a deinterleaver, and a reed-solomon decoder to perform convolutional decoding, deinterleaving, and reed solomon decoding.

복조부(220)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.The demodulator 220 may output a stream signal TS after performing demodulation and channel decoding. At this time, the stream signal may be a signal in which a video signal, a voice signal, or a data signal is multiplexed. For example, the stream signal may be an MPEG-2 TS (Transport Stream) multiplexed with an MPEG-2 standard video signal, a Dolby AC-3 standard audio signal, or the like. Specifically, the MPEG-2 TS may include a header of 4 bytes and a payload of 184 bytes.

복조부(220)는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비되는 것이 가능하다. 즉, ATSC 복조부와, DVB 복조부로 구비되는 것이 가능하다.The demodulator 220 can be provided separately according to the ATSC system and the DVB system. That is, it can be provided as an ATSC demodulation unit and a DVB demodulation unit.

복조부(220)에서 출력한 스트림 신호는 제어부(270)로 입력될 수 있다. 제어부(270)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(280)에 영상을 출력하고, 오디오 출력부(285)로 음성을 출력한다. The stream signal output from the demodulator 220 may be input to the controller 270. The controller 270 performs demultiplexing, video / audio signal processing, and the like, and then outputs an image to the display 280 and outputs audio to the audio output unit 285.

외부장치 인터페이스부(230)는, 접속된 외부 장치와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다. The external device interface unit 230 may transmit or receive data with the connected external device. To this end, the external device interface unit 230 may include an A / V input / output unit (not shown) or a wireless communication unit (not shown).

외부장치 인터페이스부(230)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치(도시하지 않음)와 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(230)는 접속된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 영상표시장치(200)의 제어부(270)로 전달한다. 또한, 제어부(270)에서 처리된 영상, 음성 또는 데이터 신호를 연결된 외부 장치로 출력할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다. The external device interface 230 may be connected to an external device (not shown) such as a DVD (Digital Versatile Disk), a Blu-ray, a game device, a camera, a camcorder, a computer (laptop), or the like by wire / wireless connection. Can be. The external device interface unit 230 transmits external video, audio, or data signals to the controller 270 of the video display device 200 through the connected external device. Also, the control unit 270 can output the processed video, audio, or data signal to the connected external device. To this end, the external device interface unit 230 may include an A / V input / output unit (not shown) or a wireless communication unit (not shown).

A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 영상표시장치(200)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다. A / V input / output unit includes a USB terminal, a CVBS (Composite Video Banking Sync) terminal, a component terminal, an S-video terminal (analog), a DVI (Digital Visual Interface) terminal, an HDMI (High Definition Multimedia Interface) terminal, an RGB terminal, a D-SUB terminal, and the like.

무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 영상표시장치(200)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 다른 전자기기와 네트워크 연결될 수 있다. The wireless communication unit can perform short-range wireless communication with other electronic devices. The image display device 200 may communicate with Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, and Digital Living Network Alliance (DLNA). Depending on the specification, it can be networked with other electronic devices.

또한, 외부장치 인터페이스부(230)는, 다양한 셋탑 박스와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋탑 박스와 입력/출력 동작을 수행할 수도 있다. In addition, the external device interface unit 230 may be connected through various set top boxes and at least one of the various terminals described above to perform input / output operations with the set top box.

한편, 외부장치 인터페이스부(230)는, 3D 시청장치(295)와 데이터를 송수신할 수 있다. On the other hand, the external device interface unit 230 can transmit and receive data to and from the 3D viewing device 295.

네트워크 인터페이스부(235)는, 영상표시장치(200)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(235)는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다. The network interface unit 235 provides an interface for connecting the image display apparatus 200 to a wired / wireless network including an internet network. The network interface unit 235 may include an Ethernet terminal for connection with a wired network, and for connection with a wireless network, a WLAN (Wi-Fi) or a Wibro (Wireless). Broadband, Wimax (World Interoperability for Microwave Access), High Speed Downlink Packet Access (HSDPA) communication standards, and the like may be used.

네트워크 인터페이스부(235)는, 네트워크를 통해, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자가 제공하는 콘텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 인터넷, 콘텐츠 제공자 등으로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 콘텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다. The network interface unit 235 may receive content or data provided by the Internet or a content provider or a network operator through a network. That is, content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from the Internet, a content provider, etc. may be received through a network. In addition, the update information and the update file of the firmware provided by the network operator can be received. It may also transmit data to the Internet or a content provider or network operator.

또한, 네트워크 인터페이스부(235)는, 예를 들어, IP(internet Protocol) TV와 접속되어, 양방향 통신이 가능하도록, IPTV용 셋탑 박스에서 처리된 영상, 음성 또는 데이터 신호를 수신하여 제어부(270)로 전달할 수 있으며, 제어부(270)에서 처리된 신호들을 IPTV용 셋탑 박스로 전달할 수 있다.In addition, the network interface unit 235 is connected to, for example, an IP (Internet Protocol) TV, and receives a video, audio, or data signal processed by an IPTV set-top box to enable bidirectional communication. The signal processed by the controller 270 may be transmitted to the set top box for the IPTV.

한편, 상술한 IPTV는, 전송네트워크의 종류에 따라 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함하는 의미일 수 있으며, TV over DSL, Video over DSL, TV overIP(TVIP), Broadband TV(BTV) 등을 포함하는 의미일 수 있다. 또한, IPTV는 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.Meanwhile, the IPTV may include ADSL-TV, VDSL-TV, FTTH-TV and the like depending on the type of the transmission network, and may include TV over DSL, Video over DSL, BTV), and the like. In addition, IPTV may also mean an Internet TV capable of accessing the Internet, or a full browsing TV.

저장부(240)는, 제어부(270) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. The storage unit 240 may store a program for processing and controlling each signal in the controller 270, or may store a signal-processed video, audio, or data signal.

또한, 저장부(240)는 외부장치 인터페이스부(230)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(240)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다. In addition, the storage unit 240 may perform a function for temporarily storing an image, audio, or data signal input to the external device interface unit 230. In addition, the storage unit 240 may store information about a predetermined broadcast channel through a channel storage function such as a channel map.

저장부(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(200)는, 저장부(240) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다.The storage unit 240 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), It may include at least one type of storage medium such as RAM, ROM (EEPROM, etc.). The video display device 200 can reproduce files (moving picture files, still picture files, music files, document files, etc.) stored in the storage unit 240 and provide them to the user.

도 2는 저장부(240)가 제어부(270)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(240)는 제어부(270) 내에 포함될 수 있다. 2 illustrates an embodiment in which the storage unit 240 is provided separately from the control unit 270, but the scope of the present invention is not limited thereto. The storage unit 240 may be included in the controller 270.

사용자입력 인터페이스부(250)는, 사용자가 입력한 신호를 제어부(270)로 전달하거나, 제어부(270)로부터의 신호를 사용자에게 전달한다. 예를 들어, 사용자입력 인터페이스부(250)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(260)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 수신하거나, 제어부(270)로부터의 신호를 원격제어장치(260)로 송신할 수 있다. The user input interface unit 250 transmits a signal input by the user to the controller 270 or transmits a signal from the controller 270 to the user. For example, the user input interface unit 250 may power on / off, select a channel, and display a screen from the remote controller 260 according to various communication methods such as a radio frequency (RF) communication method and an infrared (IR) communication method. A user input signal such as a setting may be received, or a signal from the controller 270 may be transmitted to the remote controller 260.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(도시하지 않음)에서 입력되는 사용자 입력 신호를 제어부(270)에 전달할 수 있다.Also, for example, the user input interface unit 250 may transmit a user input signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the controller 270.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 사용자의 제스처를 센싱하는 센싱부(도시하지 않음)로부터 입력되는 사용자 입력 신호를 제어부(270)에 전달하거나, 제어부(270)로부터의 신호를 센싱부(도시하지 않음)로 송신할 수 있다. 여기서, 센싱부(도시하지 않음)는, 터치 센서, 음성 센서, 위치 센서, 동작 센서 등을 포함할 수 있다. Also, for example, the user input interface unit 250 may transmit a user input signal input from a sensing unit (not shown) that senses a user's gesture to the control unit 270, or a signal from the control unit 270. May be transmitted to a sensing unit (not shown). Here, the sensing unit (not shown) may include a touch sensor, an audio sensor, a position sensor, an operation sensor, and the like.

제어부(270)는, 튜너(210) 또는 복조부(220) 또는 외부장치 인터페이스부(230)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. The control unit 270 demultiplexes the input stream or processes the demultiplexed signals through the tuner 210, the demodulator 220, or the external device interface unit 230, and outputs a video or audio signal. You can create and output.

제어부(270)에서 영상 처리된 영상 신호는 디스플레이(280)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(270)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다. The image signal processed by the controller 270 may be input to the display 280 and displayed as an image corresponding to the image signal. In addition, the video signal processed by the controller 270 may be input to the external output device through the external device interface 230.

제어부(270)에서 처리된 음성 신호는 오디오 출력부(285)로 음향 출력될 수 있다. 또한, 제어부(270)에서 처리된 음성 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다. The voice signal processed by the controller 270 may be sound output to the audio output unit 285. In addition, the voice signal processed by the controller 270 may be input to the external output device through the external device interface 230.

제어부(270)는 역다중화부, 영상처리부 등을 포함할 수 있다. 제어부(270)는, 영상표시장치(200) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(270)는 튜너(210)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다. The controller 270 may include a demultiplexer, an image processor, and the like. The control unit 270 can control the overall operation in the video display device 200. [ For example, the controller 270 controls the tuner 210 to control the tuner 210 to select an RF broadcast corresponding to a channel selected by the user or a previously stored channel.

또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(200)를 제어할 수 있다. In addition, the controller 270 may control the image display apparatus 200 by a user command or an internal program input through the user input interface unit 250.

예를 들어, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(210)를 제어한다. 그리고, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(270)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이(280) 또는 오디오 출력부(285)를 통하여 출력될 수 있도록 한다. For example, the controller 270 controls the tuner 210 to input a signal of a selected channel according to a predetermined channel selection command received through the user input interface 250. Then, video, audio, or data signals of the selected channel are processed. The controller 270 allows the display 280 or the audio output unit 285 to output the video or audio signal processed by the user through the channel information or the like selected by the user.

다른 예로, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(230)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의 영상 신호 또는 음성 신호가 디스플레이(280) 또는 오디오 출력부(285)를 통해 출력될 수 있도록 한다. For example, the control unit 270 may be connected to the external device interface unit 230 via the external device interface unit 230, for example, a camera or a camcorder, according to an external device video playback command received through the user input interface unit 250 So that the video signal or the audio signal of the display unit 280 or the audio output unit 285 can be outputted.

제어부(270)는, 영상을 표시하도록 디스플레이(280)를 제어할 수 있다. 예를 들어, 튜너(210)를 통해 입력되는 방송 영상, 외부장치 인터페이스부(230)를 통해 입력되는 외부 입력 영상 또는 네트워크 인터페이스부(235)를 통해 입력되는 영상 또는 저장부(240)에 저장된 영상을 디스플레이(280)에 표시하도록 제어할 수 있다. 이때, 디스플레이(280)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.The control unit 270 can control the display 280 to display an image. For example, the broadcast image input through the tuner 210, the external input image input through the external device interface unit 230, the image input through the network interface unit 235, or the image stored in the storage unit 240 To be displayed on the display 280. At this time, the image displayed on the display 280 may be a still image or a moving image, and may be a 2D image or a 3D image.

제어부(270)는 디스플레이(280)에 표시되는 영상 중에, 소정 오브젝트에 대해 3D 오브젝트로 생성하여 표시되도록 한다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다. 이러한 3D 오브젝트는, 디스플레이(280)에 표시되는 영상과 다른 깊이를 가지도록 처리될 수 있다. 제어부(270)는 3D 오브젝트가 디스플레이(280)에 표시되는 영상에 비해 돌출되어 보이도록 처리할 수 있다. The control unit 270 generates a 3D object for a predetermined object among the images displayed on the display 280, and displays the 3D object. For example, the object may be at least one of a connected web screen (newspaper, magazine, etc.), EPG (Electronic Program Guide), various menus, widgets, icons, still images, moving images, and text. Such a 3D object may be processed to have a different depth than the image displayed on the display 280. The control unit 270 can process the 3D object so that the 3D object is protruded compared to the image displayed on the display 280. [

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식한다. 예를 들어, 사용자와 영상표시장치(200)간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이(280) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.The control unit 270 recognizes the position of the user based on the image photographed from the photographing unit (not shown). For example, the distance (z-axis coordinate) between the user and the image display apparatus 200 may be determined. In addition, the x-axis coordinate and the y-axis coordinate in the display 280 corresponding to the user position can be grasped.

한편, 도 2에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 영상을 생성하는 채널 브라우징 처리부가 더 구비되는 것도 가능하다. 채널 브라우징 처리부는, 복조부(220)에서 출력한 스트림 신호(TS) 또는 외부장치 인터페이스부(230)에서 출력한 스트림 신호 등을 입력받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(270)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(270)로 입력되는 것도 가능하다. Although not shown in FIG. 2, it is also possible to provide a channel browsing processing unit for generating a channel signal or a thumbnail image corresponding to an external input signal. The channel browsing processor may receive a stream signal TS output from the demodulator 220 or a stream signal output from the external device interface 230, extract a video from the input stream signal, and generate a thumbnail image. Can be. The generated thumbnail image may be encoded as it is or may be input to the controller 270. In addition, the generated thumbnail image may be encoded in a stream form and input to the controller 270.

제어부(270)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이(280)에 표시할 수 있다. 이때의 썸네일 리스트는, 디스플레이(280)에 소정 영상을 표시한 상태에서 일부 영역에 표시되는 간편 보기 방식으로 표시되거나, 디스플레이(280)의 대부분 영역에 표시되는 전체 보기 방식으로 표시될 수 있다. 이러한 썸네일 리스트 내의 썸네일 영상은 순차적으로 업데이트 될 수 있다. The controller 270 may display a thumbnail list having a plurality of thumbnail images on the display 280 using the input thumbnail images. At this time, the thumbnail list may be displayed in a simple view mode displayed on a partial area in a state where a predetermined image is displayed on the display 280, or may be displayed in a full viewing mode displayed in most areas of the display 280. The thumbnail images in the thumbnail list can be sequentially updated.

디스플레이(280)는, 제어부(270)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(230)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다. The display 280 converts a video signal, a data signal, an OSD signal, a control signal processed by the control unit 270 or a video signal, a data signal, and a control signal received from the external device interface unit 230, .

디스플레이(280)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 특히, 본 발명의 실시예에 따라, 3차원 디스플레이(3D display)가 가능할 수 있다. The display 280 may be a PDP, an LCD, an OLED, a flexible display, or the like. In particular, a three-dimensional display (3D display) may be possible according to an embodiment of the present invention.

3차원 영상 시청을 위해 디스플레이(280)는, 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다. 단독 디스플레이 방식은, 별도의 추가 디스플레이, 예를 들어 안경(glass) 등이 없이, 디스플레이(280) 단독으로 3D 영상을 구현할 수 있는 것으로서, 그 예로, 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등 다양한 방식이 적용될 수 있다. 상기 추가 디스플레이 방식은, 디스플레이(280) 외에 추가 디스플레이를 사용하여 3D 영상을 구현할 수 있는 것으로서, 그 예로, 헤드 마운트 디스플레이(HMD) 타입, 안경 타입 등 다양한 방식이 적용될 수 있다. The display 280 for viewing three-dimensional images can be divided into an additional display method and a single display method. In the single display method, the display 280 alone can implement a 3D image without a separate additional display, for example, glass, and examples thereof include a lenticular method, a parallax barrier, and the like Various methods can be applied. The additional display method can implement a 3D image using an additional display in addition to the display 280. For example, various methods such as a head mount display (HMD) type and a glasses type can be applied.

상기 안경 타입은, 편광 안경 타입 등의 패시브(passive) 방식과, 셔터 글래스(ShutterGlass) 타입 등의 액티브(active) 방식으로 다시 나뉠 수 있다. 한편, 헤드 마운트 디스플레이 타입에서도 패시브 방식과 액티브 방식으로 나뉠 수 있다.The spectacles type can be divided into a passive scheme such as a polarized glasses type and an active scheme such as a shutter glass type. On the other hand, head-mounted display type can be divided into a passive type and an active type.

입체 영상을 시청하기 위한 3D 시청 장치(3D용 글래스)(295)는, 패시브 방식의 편광 글래스 또는 액티브 방식의 셔트 글래스를 포함할 수 있으며, 상술한 헤드 마운트 타입도 포함하는 개념으로 기술된다. The 3D viewing apparatus (3D glass) 295 for viewing a stereoscopic image may include a passive polarized glass or an active shutter glass, and is described with the concept of including the aforementioned head mount type.

한편, 디스플레이(280)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.Meanwhile, the display 280 may be configured as a touch screen and used as an input device in addition to the output device.

오디오 출력부(285)는, 제어부(270)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 음성 출력부(185)는 다양한 형태의 스피커로 구현될 수 있다.The audio output unit 285 receives a signal processed by the control unit 270, for example, a stereo signal, a 3.1 channel signal, or a 5.1 channel signal, and outputs it as a voice. The voice output unit 185 may be implemented by various types of speakers.

한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(도시하지 않음)가 영상표시장치(200)에 더 구비될 수 있다. 센싱부(도시하지 않음)에서 감지된 신호는 사용자입력 인터페이스부(150)를 통해 제어부(170)로 전달된다. Meanwhile, in order to detect a gesture of the user, as described above, a sensing unit (not shown) including at least one of a touch sensor, a voice sensor, a position sensor, and a motion sensor may be further provided in the image display apparatus 200. Can be. The signal detected by the sensing unit (not shown) is transmitted to the controller 170 through the user input interface unit 150.

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상, 또는 센싱부(도시하지 않음)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수 있다. The controller 270 may detect a user's gesture by combining or combining the image photographed by the photographing unit (not shown) or the detected signal from the sensing unit (not shown).

원격제어장치(260)는, 사용자 입력을 사용자입력 인터페이스부(250)로 송신한다. 이를 위해, 원격제어장치(260)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(260)는, 사용자입력 인터페이스부(250)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(260)에서 표시하거나 음성 출력할 수 있다.The remote controller 260 transmits a user input to the user input interface unit 250. To this end, the remote control device 260 can use Bluetooth, RF (radio frequency) communication, infrared (IR) communication, UWB (Ultra Wideband), ZigBee, or the like. Also, the remote control device 260 can receive the video, audio, or data signal output from the user input interface unit 250 and display it or output it by the remote control device 260.

상술한 영상표시장치(200)는, 고정형으로서 ATSC 방식(7-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 이동형으로서 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 케이블, 위성통신, IPTV 용 디지털 방송 수신기일 수도 있다.The image display apparatus 200 described above can be applied to digital broadcasting of ATSC system (7-VSB system), digital broadcasting of DVB-T system (COFDM system), digital broadcasting of ISDB-T system (BST-OFDM system) And a digital broadcasting receiver capable of receiving at least one of the digital broadcasting signals. In addition, as a mobile type, digital broadcasting of terrestrial DMB system, digital broadcasting of satellite DMB system, digital broadcasting of ATSC-M / H system, digital broadcasting of DVB-H system (COFDM system) and media flow link only system It may be a digital broadcast receiver capable of receiving at least one of digital broadcasts. It may also be a digital broadcast receiver for cable, satellite communications, or IPTV.

본 명세서에서 기술되는 영상표시장치는, TV 수상기, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.The image display device described herein may include a TV receiver, a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), and the like. have.

도 2에 도시된 영상표시장치(200)의 구성도는 본 발명의 실시예들을 위한 구성도이다. 구성도의 각 구성요소는 실제 구현되는 영상표시장치(200)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.The configuration diagram of the image display apparatus 200 shown in FIG. 2 is a configuration diagram for embodiments of the present invention. Each component of the configuration diagram may be integrated, added, or omitted according to the specifications of the image display apparatus 200 that is actually implemented. That is, two or more constituent elements may be combined into one constituent element, or one constituent element may be constituted by two or more constituent elements, if necessary. In addition, the functions performed in each block are intended to illustrate the embodiments of the present invention, and the specific operations and apparatuses do not limit the scope of the present invention.

상기 영상 표시 장치(200)에서 복호화된 영상 신호는, 다양한 포맷의 3D 영상 신호일 수 있다. 예를 들면, 색차 영상(color image) 및 깊이 영상(depth image)으로 이루어진 3D 영상 신호일 수 있으며, 또는 복수 시점 영상 신호로 이루어진 3D 영상 신호 등일 수 있다. 복수 시점 영상 신호는, 예를 들어, 좌안 영상 신호와 우안 영상 신호를 포함할 수 있다. 여기서, 3D 영상 신호의 포맷은, 좌안 영상 신호(L)와 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷, 상,하로 배치하는 탑 다운(Top / Down) 포맷, 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷, 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷, 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷 등일 수 있다. The video signal decoded by the video display device 200 may be a 3D video signal of various formats. For example, a 3D image signal composed of a color image and a depth image, or a 3D image signal composed of a plurality of view-point image signals. The plurality of viewpoint image signals may include, for example, a left eye image signal and a right eye image signal. Here, the format of the 3D video signal is a side-by-side format in which the left-eye image signal L and the right-eye image signal R are arranged in left and right directions, a top- An interlaced format in which the left and right eye image signals and the right eye image signal are mixed line by line, a checker box for mixing the left eye image signal and the right eye image signal box by box, Format, and the like.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법을 도 3 내지 도 11을 참조하여 설명한다. 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은 이동 통신 단말기(100), 상기 텔레매틱스 단말기, 내비게이션 장치와 같은 이동 단말기에 적용될 뿐만 아니라, 3D 영상을 표시하는 3차원 영상 텔레비전(3D TV)과 같은 영상 기기, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 프로젝터, 홈시어터 등과 같은 장치에도 적용될 수도 있다. Hereinafter, an image processing apparatus and a method thereof according to embodiments of the present invention will be described with reference to FIGS. 3 to 11. An image processing apparatus and method thereof according to embodiments of the present invention are applied to a mobile terminal such as the mobile communication terminal 100, the telematics terminal, a navigation device, and a 3D video television (3D TV) displaying 3D images. The present invention may also be applied to devices such as video devices, smart phones, notebook computers, personal digital assistants (PDAs), portable multimedia players (PMPs), projectors, and home theaters.

도 3은 본 발명의 실시예들에 따른 영상 처리 장치를 나타낸 구성도이다. 3 is a block diagram illustrating an image processing apparatus according to example embodiments.

도 3에 도시한 바와 같이, 본 발명의 제1 실시예에 따른 영상 처리 장치(400)는, 입체 이미지(입체 영상)를 표시하는 표시부(401)와; 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트를 활성 오브젝트로서 결정하고, 상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트들(상기 활성 오브젝트를 가리면서 서로 다른 깊이(depth)를 갖는 오브젝트(들))을 검출하는 검출부(402)와; 상기 검출된 오브젝트(들)의 속성을 변경하고, 사용자 선택 신호에 따라 상기 활성 오브젝트를 선택하는 제어부(403)를 포함한다. As shown in FIG. 3, the image processing apparatus 400 according to the first embodiment of the present invention includes a display unit 401 for displaying a stereoscopic image (stereoscopic image); Among the three-dimensional objects included in the displayed three-dimensional image, the object corresponding to the same position or the closest position to the three-dimensional space coordinates selected by the user is determined as the active object, and the objects covering part or all of the active object (the A detector 402 for detecting an active object and detecting object (s) having different depths; And a controller 403 for changing an attribute of the detected object (s) and selecting the active object according to a user selection signal.

상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트들(상기 활성 오브젝트의 일부를 가리면서 서로 다른 깊이(depth)를 갖는 오브젝트(들))을 검출하는 검출부(402)는 상기 제어부(403)에 포함될 수도 있다.The control unit 403 may include a detector 402 that detects objects that cover part or all of the active object (object (s) having different depths while covering part of the active object). .

상기 입체 이미지는 스테레오 카메라 또는 TOF(Time-of-Flight) 카메라 등을 통해 촬영된 입체 영상 또는 유선 통신망 또는 무선 통신망을 통해 단말기 또는 서버로부터 수신된 입체 이미지일 수 있다. 상기 입체 이미지에 포함된 입체 오브젝트들은 3차원 웹 브라우저(3D Web Browser)에 표시된 깊이를 가지는 입체 오브젝트일 수 있다. 본 발명의 실시예에 따른 영상 처리 장치(400)는 입체 웹 브라우저(3D Web Browser) 그래픽 처리 장치(Graphics processing unit, GPU)에 적용될 수 있다. 상기 입체 오브젝트 각각은 좌안 및 우안 이미지를 포함한다. The stereoscopic image may be a stereoscopic image captured by a stereo camera or a time-of-flight (TOF) camera, or a stereoscopic image received from a terminal or a server through a wired or wireless communication network. The stereoscopic objects included in the stereoscopic image may be stereoscopic objects having a depth displayed in a 3D web browser. The image processing apparatus 400 according to an embodiment of the present invention may be applied to a 3D web browser graphics processing unit (GPU). Each of the three-dimensional objects includes a left eye and a right eye image.

이하에서는, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들 중에서 원하는 오브젝트를 용이하게 선택할 수 있는 영상 처리 장치 및 그 방법을 도 3 내지 도 7을 참조하여 설명한다.Hereinafter, an image processing apparatus and a method for easily selecting a desired object among the overlapping objects when some of the objects included in the stereoscopic image overlap each other will be described with reference to FIGS. 3 to 7.

도 4는 본 발명의 제1 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.4 is a flowchart illustrating an image processing method according to a first embodiment of the present invention.

먼저, 상기 표시부(401)는 입체 이미지(입체 영상)를 화면상에 표시한다(S11). 상기 입체 이미지는 3차원 웹 브라우저(3D Web Browser)에 표시된 입체 이미지일 수 있다.First, the display unit 401 displays a stereoscopic image (stereoscopic image) on the screen (S11). The stereoscopic image may be a stereoscopic image displayed on a 3D web browser.

상기 검출부(402)는 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트를 활성 오브젝트로서 결정한다. 상기 사용자에 의해 선택된 3차원 공간 좌표는 사용자가 원하는 입체 오브젝트를 선택하기 위한 좌표로서, 3차원 마우스 커서의 좌표 또는 사용자 손(제스처)에 의한 3차원 공간 터치 입력에 대응하는 좌표 등일 수 있다. 상기 검출부(402) 또는 상기 제어부(403)는 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트의 외각선을 미리설정된 색(예를 들면, 빨간색)으로 표시하거나, 미리설정된 선(예를 들면, 실선 또는 점선 등)으로 표시함으로써 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트가 사용자에 의해 선택될 오브젝트임을 사용자에게 알려줄 수도 있다.The detector 402 determines, as an active object, an object corresponding to the same position or the nearest position to the three-dimensional space coordinates selected by the user among the three-dimensional objects included in the displayed three-dimensional image. The three-dimensional space coordinates selected by the user are coordinates for selecting a three-dimensional object desired by the user, and may be coordinates of a three-dimensional mouse cursor or coordinates corresponding to a three-dimensional space touch input by a user's hand (gesture). The detection unit 402 or the control unit 403 displays the outer line of the object corresponding to the same position or the nearest position to the three-dimensional space coordinates selected by the user in a predetermined color (for example, red), or The display may be indicated by a preset line (for example, a solid line or a dotted line) to inform the user that an object corresponding to or closest to the three-dimensional space coordinates selected by the user is an object to be selected by the user.

상기 검출부(402)는 상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트들(예를 들면, 상기 활성 오브젝트를 가리면서 서로 다른 깊이(depth)를 갖는 오브젝트(들))을 검출한다(S12).The detector 402 detects objects (eg, object (s) having different depths while covering the active object) covering the part or the whole of the active object (S12).

도 5는 입체 오브젝트를 나타낸 예시도 이다. 5 is an exemplary view showing a three-dimensional object.

도 5에 도시한 바와 같이, 상기 표시부(401)는 서로 중첩되지 않으면서 깊이가 서로 다른 입체 오브젝트들(5-1, 5-2)을 상기 화면상에 표시할 수 있다. 반면, 상기 표시부(401)는 서로 일부가 중첩되면서 깊이가 서로 다른 입체 오브젝트들을 상기 화면상에 표시할 수도 있다.As illustrated in FIG. 5, the display unit 401 may display three-dimensional objects 5-1 and 5-2 having different depths without overlapping each other on the screen. On the other hand, the display unit 401 may display three-dimensional objects having different depths while overlapping one another on the screen.

도 6은 서로 일부가 중첩된 입체 오브젝트를 나타낸 예시도 이다.6 is an exemplary view showing a three-dimensional object with some overlapping each other.

도 6에 도시한 바와 같이, 상기 표시부(401)는 서로 중첩되지 않는 입체 오브젝트들(5-1, 5-2)을 표시할 수도 있지만, 서로 일부가 중첩되고 서로 다른 깊이를 갖는 입체 오브젝트들(6-1, 6-2)을 표시할 수도 있다. 예를 들면, 사용자는 깊이가 큰 오브젝트(6-2)가 깊이가 작은 오브젝트(6-1)를 가리면, 깊이가 큰 오브젝트(6-2)는 쉽게 선택할 수 있지만, 깊이가 작은 오브젝트(6-1)는 상기 깊이가 큰 오브젝트(6-2)에 의해 쉽게 선택하기 어렵다. As shown in FIG. 6, the display unit 401 may display three-dimensional objects 5-1 and 5-2 that do not overlap each other, but three-dimensional objects having some depths overlapping each other and having different depths ( 6-1, 6-2) may be displayed. For example, if the large object 6-2 covers the small object 6-1, the user can easily select the large object 6-2, but the small object 6-6 can easily select. 1) is difficult to select easily by the large object 6-2.

따라서, 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)에 의해 가려진 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록 상기 검출된 오브젝트들(6-2)의 속성을 변경한다(S13). 예를 들면, 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)을 반투명 또는 투명하게 함으로써 상기 깊이가 작은 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록 한다. 또한, 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)을 반투명 또는 투명하게 함과 동시에 상기 검출된 오브젝트들(6-2)의 외각선을 실선 또는 점선으로 표시할 수도 있다. 상기 검출된 오브젝트(6-2)는 하나 또는 둘 이상일 수 있다. 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)의 윤각선만을 검출 및 표시할 수도 있다. 상기 제어부(403)는 상기 오브젝트(6-1)를 활성화시킬 때 상기 검출된 오브젝트들(6-2)을 비활성화시킨다. 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)의 속성을 변경할 때 상기 검출된 오브젝트들(6-2)을 비활성화(예를 들면, 오브젝트들(6-2)이 선택되지 않도록 함)시킬 수도 있다.Accordingly, the controller 403 changes the attributes of the detected objects 6-2 so that a user can easily select the object 6-1 covered by the detected objects 6-2. (S13). For example, the controller 403 makes the detected objects 6-2 translucent or transparent so that the user can easily select the small object 6-1. In addition, the controller 403 may make the detected objects 6-2 translucent or transparent and simultaneously display the outer lines of the detected objects 6-2 in solid or dotted lines. The detected object 6-2 may be one or more than two. The controller 403 may detect and display only the circumferential lines of the detected objects 6-2. The controller 403 deactivates the detected objects 6-2 when activating the object 6-1. The controller 403 deactivates the detected objects 6-2 when changing the attributes of the detected objects 6-2 (eg, prevents the objects 6-2 from being selected). You can also

도 7은 본 발명의 실시예들에 따라 속성이 변경된 오브젝트를 나타낸 예시 도이다.7 is an exemplary view showing an object whose attribute is changed according to embodiments of the present invention.

도 7에 도시한 바와 같이, 상기 제어부(403)는 상기 검출된 오브젝트들(6-2)을 반투명 또는 투명하게 함과 동시에 상기 검출된 오브젝트들(6-2)의 외각선을 실선 또는 점선(7-1)으로 표시할 수도 있다. As shown in FIG. 7, the control unit 403 makes the detected objects 6-2 translucent or transparent and simultaneously draws a solid or dotted line of the outer line of the detected objects 6-2. 7-1).

상기 제어부(403)는 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트가 상기 오브젝트(6-2)일 때 상기 깊이가 작은 오브젝트(6-1)를 반투명 또는 투명하게 하거나 상기 오브젝트(6-1)의 외각선을 실선 또는 점선으로 표시할 수도 있다. The control unit 403 may determine that the depth is small when the object 6-2 is the object corresponding to or closest to the three-dimensional space coordinates selected by the user among the three-dimensional objects included in the displayed three-dimensional image. The object 6-1 may be translucent or transparent, or the outline of the object 6-1 may be indicated by a solid line or a dotted line.

상기 제어부(403)는 사용자 선택 신호에 따라 상기 활성 오브젝트(6-1)를 선택한다(S14). 예를 들면, 상기 제어부(403)는 상기 깊이가 작은 오브젝트(6-1)를 가리는 오브젝트(6-2)가 투명하게 된 상태에서 상기 활성 오브젝트(6-1)를 선택하기 위한 선택 신호가 수신되면 상기 활성 오브젝트(6-1)를 선택한다. 상기 사용자 선택 신호란 상기 3차원 마우스의 좌표 선택 신호 또는 해당 오브젝트를 선택하기 위한 사용자 제스처 등일 수 있다.The controller 403 selects the active object 6-1 according to a user selection signal (S14). For example, the control unit 403 receives a selection signal for selecting the active object 6-1 in a state where the object 6-2 covering the small depth object 6-1 becomes transparent. Select the active object 6-1. The user selection signal may be a coordinate selection signal of the 3D mouse or a user gesture for selecting a corresponding object.

상기 제어부(403)는 상기 활성 오브젝트(6-1)를 선택한 후 사용자의 제어 신호에 따라 드래그 앤 드롭, 복사, 상기 활성 오브젝트(6-1)에 링크된 데이터를 독출 및 재생과 같은 다양한 기능을 수행할 수 있다.The controller 403 selects the active object 6-1 and then performs various functions such as drag and drop, copy, and read and play data linked to the active object 6-1 according to a user's control signal. Can be done.

따라서, 본 발명의 제1 실시예에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들의 속성을 변경(예를 들면, 원하는 제1 오브젝트를 가리는 제2 오브젝트를 반투명, 투명, 점선 또는 실선 등으로 표시함)함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.Therefore, the image processing apparatus and the method according to the first embodiment of the present invention change the properties of the overlapped objects when some of the objects included in the stereoscopic image overlap each other (for example, the desired first By displaying the second object covering the object in semi-transparent, transparent, dashed line or solid line), the user can easily select the desired object.

이하에서는, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들 중에서 원하는 오브젝트를 용이하게 선택할 수 있는 다른 영상 처리 장치 및 그 방법을 도 3 및 도 8-도 9를 참조하여 설명한다.Hereinafter, another image processing apparatus and a method for easily selecting a desired object among the overlapped objects when some objects among the objects included in the stereoscopic image are superimposed with each other, will be described with reference to FIGS. 3 and 8-9. Will be explained.

도 8은 본 발명의 제2 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.8 is a flowchart illustrating an image processing method according to a second embodiment of the present invention.

먼저, 상기 표시부(401)는 입체 이미지(입체 영상)를 화면상에 표시한다(S21). 상기 입체 이미지는 3차원 웹 브라우저(3D Web Browser)에 표시된 입체 이미지일 수 있다.First, the display unit 401 displays a stereoscopic image (stereoscopic image) on the screen (S21). The stereoscopic image may be a stereoscopic image displayed on a 3D web browser.

상기 검출부(402)는 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트를 활성 오브젝트로서 결정한다(S22). 상기 사용자에 의해 선택된 3차원 공간 좌표는 사용자가 원하는 입체 오브젝트를 선택하기 위한 좌표로서, 3차원 마우스 커서의 좌표 또는 사용자 손(제스처)에 의한 3차원 공간 터치 입력에 대응하는 좌표 등일 수 있다. 상기 검출부(402) 또는 상기 제어부(403)는 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트의 외각선을 미리설정된 색(예를 들면, 빨간색)으로 표시하거나, 미리설정된 선(예를 들면, 실선 또는 점선 등)으로 표시함으로써 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트가 사용자에 의해 선택될 오브젝트임을 사용자에게 알려줄 수도 있다.The detector 402 determines, as an active object, an object corresponding to the same position or the closest position to the three-dimensional space coordinates selected by the user among the three-dimensional objects included in the displayed three-dimensional image (S22). The three-dimensional space coordinates selected by the user are coordinates for selecting a three-dimensional object desired by the user, and may be coordinates of a three-dimensional mouse cursor or coordinates corresponding to a three-dimensional space touch input by a user's hand (gesture). The detection unit 402 or the control unit 403 displays the outer line of the object corresponding to the same position or the nearest position to the three-dimensional space coordinates selected by the user in a predetermined color (for example, red), or The display may be indicated by a preset line (for example, a solid line or a dotted line) to inform the user that an object corresponding to or closest to the three-dimensional space coordinates selected by the user is an object to be selected by the user.

상기 검출부(402)는 상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트(예를 들면, 상기 활성 오브젝트의 일부를 가리면서 깊이(depth)가 서로 다른 오브젝트)가 있는지 판단한다(S23).The detection unit 402 determines whether there is an object covering part or all of the active object (eg, an object having a different depth while covering a part of the active object) (S23).

상기 제어부(403)는 상기 활성 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록 상기 활성 오브젝트를 가리는 오브젝트의 크기를 상기 활성 오브젝트의 크기보다 작게 표시한다(S24).The controller 403 displays the size of the object covering the active object smaller than the size of the active object so that the user can easily select the active object 6-1 (S24).

도 9는 본 발명의 제2 실시예에 따른 활성 오브젝트를 가리는 오브젝트의 크기를 나타낸 예시도 이다.9 is an exemplary diagram illustrating the size of an object that covers an active object according to a second embodiment of the present invention.

도 9에 도시한 바와 같이, 상기 제어부(403)는 상기 활성 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록 상기 활성 오브젝트(6-1)를 가리는 오브젝트(9-1)의 크기를 상기 활성 오브젝트(6-1)의 크기보다 작게 표시함으로써, 사용자는 상기 활성 오브젝트(6-1)를 용이하게 선택할 수 있다.As shown in FIG. 9, the control unit 403 measures the size of the object 9-1 covering the active object 6-1 so that the user can easily select the active object 6-1. By displaying smaller than the size of the active object 6-1, the user can easily select the active object 6-1.

상기 제어부(403)는 사용자 선택 신호에 따라 상기 활성 오브젝트를 선택한다(S25). 예를 들면, 상기 제어부(403)는 상기 오브젝트(6-1)를 가리는 오브젝트(9-1)가 작게 표시된 상태에서 상기 활성 오브젝트(6-1)를 선택하기 위한 선택 신호가 수신되면 상기 활성 오브젝트(6-1)를 선택한다. 상기 사용자 선택 신호란 상기 3차원 마우스의 좌표 선택 신호 또는 해당 오브젝트를 선택하기 위한 사용자 제스처 등일 수 있다.The controller 403 selects the active object according to a user selection signal (S25). For example, the controller 403 may receive the active object when a selection signal for selecting the active object 6-1 is received while the object 9-1 covering the object 6-1 is displayed small. Select (6-1). The user selection signal may be a coordinate selection signal of the 3D mouse or a user gesture for selecting a corresponding object.

따라서, 본 발명의 제2 실시예에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트의 크기를 상기 사용자가 선택할 오브젝트의 크기보다 작게 표시함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.Accordingly, the image processing apparatus and the method according to the second embodiment of the present invention, when the object to be selected by the user among the objects included in the stereoscopic image is covered by the specific object, the object to select the size of the specific object By displaying smaller than, the user can easily select a desired object.

이하에서는, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들 중에서 원하는 오브젝트를 용이하게 선택할 수 있는 또 다른 영상 처리 장치 및 그 방법을 도 3 및 도 10-도 11을 참조하여 설명한다.Hereinafter, another image processing apparatus and method for easily selecting a desired object among the overlapped objects when some objects among the objects included in the stereoscopic image are overlapped with each other will be described with reference to FIGS. 3 and 10 to 11. It demonstrates with reference.

도 10은 본 발명의 제3 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.10 is a flowchart illustrating an image processing method according to a third embodiment of the present invention.

먼저, 상기 표시부(401)는 입체 이미지(입체 영상)를 화면상에 표시한다(S31). 상기 입체 이미지는 3차원 웹 브라우저(3D Web Browser)에 표시된 입체 이미지일 수 있다.First, the display unit 401 displays a stereoscopic image (stereoscopic image) on the screen (S31). The stereoscopic image may be a stereoscopic image displayed on a 3D web browser.

상기 검출부(402)는 상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트를 활성 오브젝트로서 결정한다(S32). 상기 사용자에 의해 선택된 3차원 공간 좌표는 사용자가 원하는 입체 오브젝트를 선택하기 위한 좌표로서, 3차원 마우스 커서의 좌표 또는 사용자 손(제스처)에 의한 3차원 공간 터치 입력에 대응하는 좌표 등일 수 있다. 상기 검출부(402) 또는 상기 제어부(403)는 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트의 외각선을 미리설정된 색(예를 들면, 빨간색)으로 표시하거나, 미리설정된 선(예를 들면, 실선 또는 점선 등)으로 표시함으로써 상기 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 오브젝트가 사용자에 의해 선택될 오브젝트임을 사용자에게 알려줄 수도 있다.The detector 402 determines, as an active object, an object corresponding to the same position or the nearest position to the three-dimensional space coordinates selected by the user among the three-dimensional objects included in the displayed three-dimensional image (S32). The three-dimensional space coordinates selected by the user are coordinates for selecting a three-dimensional object desired by the user, and may be coordinates of a three-dimensional mouse cursor or coordinates corresponding to a three-dimensional space touch input by a user's hand (gesture). The detection unit 402 or the control unit 403 displays the outer line of the object corresponding to the same position or the nearest position to the three-dimensional space coordinates selected by the user in a predetermined color (for example, red), or The display may be indicated by a preset line (for example, a solid line or a dotted line) to inform the user that an object corresponding to or closest to the three-dimensional space coordinates selected by the user is an object to be selected by the user.

상기 검출부(402)는 상기 활성 오브젝트의 일부 또는 전체를 가리는 오브젝트(예를 들면, 상기 활성 오브젝트의 일부를 가리면서 깊이(depth)가 서로 다른 오브젝트)가 있는지 판단한다(S33).The detector 402 determines whether there is an object that covers part or all of the active object (eg, an object having a different depth while covering a part of the active object) (S33).

상기 제어부(403)는 상기 활성 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록 상기 활성 오브젝트를 가리는 오브젝트를 미리설정된 위치로 이동시킨다(S34). 예를 들면, 상기 제어부(403)는, 상기 활성 오브젝트(6-1)를 사용자가 용이하게 선택할 수 있도록, 상기 활성 오브젝트를 가리는 오브젝트를 상기 활성 오브젝트를 가리지 않는 위치로 이동시킬 수 있다. 즉, 상기 제어부(403)는, 상기 활성 오브젝트를 가리는 특정 오브젝트가 존재할 때 상기 표시부에 표시된 이미지상에서 입체 오브젝트가 존재하는 않는 영역을 검출하고, 그 검출된 영역에 상기 특정 오브젝트를 이동시킬 수도 있다.The controller 403 moves the object covering the active object to a preset position so that the user can easily select the active object 6-1 (S34). For example, the controller 403 may move an object covering the active object to a position not covering the active object so that the user can easily select the active object 6-1. That is, the controller 403 may detect a region where a three-dimensional object does not exist in the image displayed on the display unit when a specific object covering the active object exists, and move the specific object to the detected region.

도 11은 본 발명의 제3 실시예에 따른 활성 오브젝트를 가리는 오브젝트의 이동 위치를 나타낸 예시도 이다.11 is an exemplary view showing a moving position of an object covering an active object according to a third embodiment of the present invention.

도 11에 도시한 바와 같이, 상기 제어부(403)는, 상기 활성 오브젝트(6-1)를 가리는 오브젝트를 상기 활성 오브젝트(6-1)를 가리지 않는 위치(10-1)로 이동시킴으로써, 사용자는 상기 활성 오브젝트(6-1)를 용이하게 선택할 수 있다. As illustrated in FIG. 11, the controller 403 moves the object covering the active object 6-1 to a position 10-1 that does not cover the active object 6-1. The active object 6-1 can be easily selected.

상기 제어부(403)는 사용자 선택 신호에 따라 상기 활성 오브젝트를 선택한다(S35). 예를 들면, 상기 제어부(403)는 상기 오브젝트(6-1)를 가리는 오브젝트(10-1)가 상기 활성 오브젝트(6-1)를 가리지 않는 위치(10-1)로 이동된 상태에서 상기 활성 오브젝트(6-1)를 선택하기 위한 선택 신호가 수신되면 상기 활성 오브젝트(6-1)를 선택한다. 상기 사용자 선택 신호란 상기 3차원 마우스의 좌표 선택 신호 또는 해당 오브젝트를 선택하기 위한 사용자 제스처 등일 수 있다.The controller 403 selects the active object according to a user selection signal (S35). For example, the controller 403 may activate the active object in a state where the object 10-1 covering the object 6-1 is moved to a position 10-1 that does not cover the active object 6-1. When the selection signal for selecting the object 6-1 is received, the active object 6-1 is selected. The user selection signal may be a coordinate selection signal of the 3D mouse or a user gesture for selecting a corresponding object.

따라서, 본 발명의 제3 실시예에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트를 이동시킴으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.Accordingly, in the image processing apparatus and the method according to the third embodiment of the present invention, when an object selected by the user among the objects included in the stereoscopic image is covered by the specific object, the user moves the specific object by moving the specific object. It can be selected easily.

이상에서 상세히 설명한 바와 같이, 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 일부 오브젝트들이 서로 중첩되었을 때 그 중첩된 오브젝트들의 속성을 변경(예를 들면, 원하는 제1 오브젝트를 가리는 제2 오브젝트를 반투명, 투명, 점선 또는 실선 등으로 표시함)함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.As described in detail above, the image processing apparatus and the method according to the embodiments of the present invention change the properties of the overlapped objects when some of the objects included in the stereoscopic image overlap each other (for example, , The second object covering the desired first object is displayed as semi-transparent, transparent, dotted line or solid line) so that the user can easily select the desired object.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트의 크기를 상기 사용자가 선택할 오브젝트의 크기보다 작게 표시함으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.An image processing apparatus and method according to embodiments of the present invention, when an object selected by a user among objects included in a stereoscopic image is covered by a specific object, the size of the specific object is larger than that of the object selected by the user. By displaying small, the user can easily select a desired object.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입체 영상에 포함된 오브젝트들 중에서 사용자가 선택할 오브젝트가 특정 오브젝트에 의해 가려졌을 때 그 특정 오브젝트를 이동시킴으로써 사용자는 원하는 오브젝트를 용이하게 선택할 수 있다.In an image processing apparatus and method according to embodiments of the present invention, when an object to be selected by a user among an object included in a stereoscopic image is covered by a specific object, the user may easily select a desired object by moving the specific object. Can be.

본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be interpreted by the following claims, and all technical ideas within the equivalent scope should be interpreted as being included in the scope of the present invention.

401: 표시부 402: 검출부
403: 제어부
401: display unit 402: detection unit
403: control unit

Claims (20)

입체 이미지를 표시하는 표시부와;
상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 제1 입체 오브젝트를 가리는 제2 입체 오브젝트를 검출하고, 상기 검출된 제2 입체 오브젝트의 속성을 변경하고, 사용자 선택 신호에 따라 상기 제1 입체 오브젝트를 선택하는 제어부를 포함하는 영상 처리 장치.
A display unit which displays a stereoscopic image;
Detecting a second stereoscopic object covering a first stereoscopic object among the stereoscopic objects included in the displayed stereoscopic image, changing the attribute of the detected second stereoscopic object, and selecting the first stereoscopic object according to a user selection signal. An image processing apparatus comprising a control unit.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트의 속성을 변경할 때 상기 제2 입체 오브젝트를 비활성화시키는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And deactivating the second stereoscopic object when the attribute of the second stereoscopic object is changed.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트를 반투명 또는 투명하게 하는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And the second stereoscopic object is translucent or transparent.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트를 반투명 또는 투명하게 함과 동시에 상기 제2 입체 오브젝트의 외각선을 실선 또는 점선으로 표시하는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And making the second stereoscopic object translucent or transparent and displaying the outer line of the second stereoscopic object in a solid line or a dotted line.
제1항에 있어서, 상기 제어부는,
상기 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 상기 제1 입체 오브젝트를 활성 입체 오브젝트로서 결정하는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And determining the first three-dimensional object corresponding to the same position or the closest position to the three-dimensional spatial coordinates selected by the user among the three-dimensional objects as the active three-dimensional object.
제1항에 있어서, 상기 제2 입체 오브젝트는,
상기 제1 입체 오브젝트와 서로 다른 깊이를 갖는 입체 오브젝트인 것을 특징으로 하는 영상 처리 장치.
The method of claim 1, wherein the second stereoscopic object,
And a stereoscopic object having a depth different from that of the first stereoscopic object.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시하는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And display the size of the second stereoscopic object smaller than the size of the first stereoscopic object.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시하는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And displaying the size of the second stereoscopic object smaller than the size of the first stereoscopic object when the second stereoscopic object covers the first stereoscopic object.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트를 미리설정된 위치로 이동시키는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
And when the second stereoscopic object covers the first stereoscopic object, moves the second stereoscopic object to a predetermined position.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 표시부에 표시된 이미지상에서 상기 입체 오브젝트들이 존재하는 않는 영역을 검출하고, 상기 검출된 영역으로 상기 제2 입체 오브젝트를 이동시키는 것을 특징으로 하는 영상 처리 장치.
The apparatus of claim 1,
When the second stereoscopic object covers the first stereoscopic object, an area where the stereoscopic objects do not exist in the image displayed on the display unit is detected, and the second stereoscopic object is moved to the detected area. Image processing device.
입체 이미지를 표시부에 표시하는 단계와;
상기 표시된 입체 이미지에 포함된 입체 오브젝트들 중에서 제1 입체 오브젝트를 가리는 제2 입체 오브젝트를 검출하는 단계와;
상기 검출된 제2 입체 오브젝트의 속성을 변경하는 단계와;
사용자 선택 신호에 따라 상기 제1 입체 오브젝트를 선택하는 단계를 포함하는 영상 처리 방법.
Displaying a stereoscopic image on the display unit;
Detecting a second three-dimensional object covering a first three-dimensional object among three-dimensional objects included in the displayed three-dimensional image;
Changing an attribute of the detected second stereoscopic object;
And selecting the first stereoscopic object according to a user selection signal.
제11항에 있어서,
상기 제2 입체 오브젝트의 속성을 변경할 때 상기 제2 입체 오브젝트를 비활성화시키는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
12. The method of claim 11,
And deactivating the second stereoscopic object when the attribute of the second stereoscopic object is changed.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트를 반투명 또는 투명하게 하는 단계인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
And translucent or transparent to the second stereoscopic object.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트를 반투명 또는 투명하게 함과 동시에 상기 제2 입체 오브젝트의 외각선을 실선 또는 점선으로 표시하는 단계인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
And making the second three-dimensional object translucent or transparent and simultaneously displaying the outer line of the second three-dimensional object with a solid line or a dotted line.
제11항에 있어서,
상기 입체 오브젝트들 중에서 사용자에 의해 선택된 3차원 공간 좌표와 동일한 위치 또는 가장 인접한 위치에 해당하는 상기 제1 입체 오브젝트를 활성 입체 오브젝트로서 결정하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
12. The method of claim 11,
And determining the first three-dimensional object corresponding to the same position or the closest position to the three-dimensional spatial coordinates selected by the user among the three-dimensional objects as the active three-dimensional object.
제11항에 있어서, 상기 제2 입체 오브젝트는,
상기 제1 입체 오브젝트와 서로 다른 깊이를 갖는 입체 오브젝트인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein the second three-dimensional object,
And a stereoscopic object having a different depth from the first stereoscopic object.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시하는 단계인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
And displaying the size of the second stereoscopic object smaller than the size of the first stereoscopic object.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트의 크기를 상기 제1 입체 오브젝트의 크기보다 작게 표시하는 단계인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
And displaying the size of the second stereoscopic object smaller than the size of the first stereoscopic object when the second stereoscopic object covers the first stereoscopic object.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때, 상기 제2 입체 오브젝트를 미리설정된 위치로 이동시키는 단계인 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
Moving the second stereoscopic object to a predetermined position when the second stereoscopic object obscures the first stereoscopic object.
제11항에 있어서, 상기 제2 입체 오브젝트의 속성을 변경하는 단계는,
상기 제2 입체 오브젝트가 상기 제1 입체 오브젝트를 가릴 때,
상기 표시부에 표시된 이미지상에서 상기 입체 오브젝트들이 존재하는 않는 영역을 검출하는 단계와;
상기 검출된 영역으로 상기 제2 입체 오브젝트를 이동시키는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
The method of claim 11, wherein changing the attribute of the second stereoscopic object comprises:
When the second stereoscopic object obscures the first stereoscopic object,
Detecting a region where the stereoscopic objects do not exist on the image displayed on the display unit;
And moving the second stereoscopic object to the detected area.
KR1020120081922A 2012-07-26 2012-07-26 Image processing apparatus and method thereof KR101906203B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120081922A KR101906203B1 (en) 2012-07-26 2012-07-26 Image processing apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120081922A KR101906203B1 (en) 2012-07-26 2012-07-26 Image processing apparatus and method thereof

Publications (2)

Publication Number Publication Date
KR20140013714A true KR20140013714A (en) 2014-02-05
KR101906203B1 KR101906203B1 (en) 2018-10-10

Family

ID=50264101

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120081922A KR101906203B1 (en) 2012-07-26 2012-07-26 Image processing apparatus and method thereof

Country Status (1)

Country Link
KR (1) KR101906203B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020019118A (en) * 2002-02-19 2002-03-09 장호현 3 dimensional graphics real-time displaying method and recording medium therefor
KR20120015549A (en) * 2010-08-12 2012-02-22 팅크웨어(주) Apparatus and method for displaying point of interest
KR20120033515A (en) * 2010-09-30 2012-04-09 엘지전자 주식회사 Mobile terminal and control method for mobile terminal
KR20120048220A (en) * 2010-11-05 2012-05-15 엘지전자 주식회사 Mobile terminal and method of controlling the same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020019118A (en) * 2002-02-19 2002-03-09 장호현 3 dimensional graphics real-time displaying method and recording medium therefor
KR20120015549A (en) * 2010-08-12 2012-02-22 팅크웨어(주) Apparatus and method for displaying point of interest
KR20120033515A (en) * 2010-09-30 2012-04-09 엘지전자 주식회사 Mobile terminal and control method for mobile terminal
KR20120048220A (en) * 2010-11-05 2012-05-15 엘지전자 주식회사 Mobile terminal and method of controlling the same

Also Published As

Publication number Publication date
KR101906203B1 (en) 2018-10-10

Similar Documents

Publication Publication Date Title
KR101978957B1 (en) Display apparatus and method of executing and installing application thereof
KR101788060B1 (en) Image display device and method of managing contents using the same
KR102097640B1 (en) Mobile terminal and control method thereof
KR102111457B1 (en) Mobile terminal and control method thereof
US9332105B2 (en) Communication connecting apparatus and method
KR102110206B1 (en) Terminal and method for controlling the same
KR20130005170A (en) Apparatus for controlling video display and method thereof
EP3141994B1 (en) Mobile terminal and method for controlling the same
KR20110122556A (en) Apparatus for displaying image and method for operating the same
KR102065047B1 (en) Mobile terminal and control method thereof
KR102340231B1 (en) Multimedia device and method for controlling the same
KR20150027592A (en) Speech recognition apparatus and method thereof
KR101861697B1 (en) Apparatus of broadcasting program recording reservation for mobile communication terminal and method thereof
US10148997B2 (en) Mobile terminal and method for controlling the same
KR101938666B1 (en) Video processing apparatus and method thereof
KR102135355B1 (en) Display apparatus and method of controlling the smae
KR20120080939A (en) Image processing apparatus and method thereof
KR101906203B1 (en) Image processing apparatus and method thereof
KR20140098659A (en) Information providing apparatus of display and method thereof
KR102292979B1 (en) Image display device
KR102013610B1 (en) Information providing apparatus and method thereof
KR20140020137A (en) Video processing apparatus and method thereof
KR20130124089A (en) Video processing apparatus and method thereof
KR20170025562A (en) Image display device and method for controlling
KR20120103330A (en) Video processing apparatus and method thereof

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant