KR20110025591A - Image processing apparatus and controlling method of the same - Google Patents

Image processing apparatus and controlling method of the same Download PDF

Info

Publication number
KR20110025591A
KR20110025591A KR1020100013520A KR20100013520A KR20110025591A KR 20110025591 A KR20110025591 A KR 20110025591A KR 1020100013520 A KR1020100013520 A KR 1020100013520A KR 20100013520 A KR20100013520 A KR 20100013520A KR 20110025591 A KR20110025591 A KR 20110025591A
Authority
KR
South Korea
Prior art keywords
screen
pointing cursor
pointing
cursor
application
Prior art date
Application number
KR1020100013520A
Other languages
Korean (ko)
Other versions
KR101661142B1 (en
Inventor
유호준
소병석
최은석
최상언
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP10172368A priority Critical patent/EP2299699A3/en
Priority to US12/855,726 priority patent/US8661365B2/en
Publication of KR20110025591A publication Critical patent/KR20110025591A/en
Priority to US14/100,816 priority patent/US9612729B2/en
Application granted granted Critical
Publication of KR101661142B1 publication Critical patent/KR101661142B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Abstract

PURPOSE: An image processing apparatus and a controlling method of the same are provided to simultaneously control the respective applications through a single or a plurality of input devices and display cursors for simultaneously controlling the plurality of applications when a plurality of applications controllable on a digital television (DTV) or a personal computer (PC) are executed at a time. CONSTITUTION: If the pointing device A(230) is assigned to a game screen(210) or a broadcasting screen(220) on the basis of the location of a pointing cursor, the pointing cursor can control the application corresponding to the most adjacent screen between the underlying game screen and broadcasting screen displayed overlapping each other. A background, then the game screen, then the broadcasting screen, then the pointing cursor are arranged in sequence from a bottom layer to a top layer. In this case, the broadcasting screen is a screen most adjacent to the pointing cursor among the screens displayed under the pointing cursor and overlapping one another. Therefore, the pointing cursor can control the broadcasting screen.

Description

영상처리장치 및 영상처리장치의 제어 방법{IMAGE PROCESSING APPARATUS AND CONTROLLING METHOD OF THE SAME}IMAGE PROCESSING APPARATUS AND CONTROLLING METHOD OF THE SAME}

본 발명은 영상처리장치 및 영상처리장치의 제어 방법에 관한 것으로서, 보다 상세하게는 DTV(Digital Television) 또는 PC(Personal Computer) 상에서 조작 가능한 복수의 어플리케이션이 동시에 실행되는 경우, 단일 또는 복수의 입력 디바이스를 이용하여 각각의 어플리케이션을 동시에 제어하고, 나아가 복수의 어플리케이션의 동시 제어를 위한 커서를 표시하는 영상처리장치 및 영상처리장치의 제어 방법에 관한 것이다.The present invention relates to an image processing apparatus and a method of controlling the image processing apparatus, and more particularly, when a plurality of applications operable on a digital television (DTV) or a personal computer (PC) are simultaneously executed, a single or a plurality of input devices. The present invention relates to an image processing apparatus and a method of controlling the image processing apparatus which simultaneously control each application by using the same, and further display a cursor for simultaneous control of a plurality of applications.

기존의 아날로그 방식의 TV에서는 단순히 단일 방송 영상을 화면에 송출하여 보여주는데 비해, 최근에 등장한 디지털 방식의 TV에서는 두 개 이상의 방송 화면과 컨텐츠 화면을 동시에 보여줄 수 있다. 또한 TV의 처리 성능이 높아지고 컨텐츠가 다양화됨에 따라, 단순히 방송 시청 서비스만을 제공하던 일방향 형태의 TV에서 사용자가 리모컨이나 마우스 등의 입력 디바이스를 이용하여 화면을 제어할 수 있는 양방향 형태의 TV로 변화하고 있는 추세이다.In the conventional analog TV, a single broadcast video is simply transmitted to the screen, and in recent digital TVs, two or more broadcast screens and content screens can be simultaneously displayed. In addition, as TV processing performance increases and contents are diversified, the one-way TV, which merely provided a broadcast viewing service, is changed from a one-way TV that allows a user to control a screen using an input device such as a remote control or a mouse. The trend is.

특히, 최근 들어서는 게임이나 DMC(Digital Contents Management) 등의 인터렉티브 (interactive) 컨텐츠를 TV에서 제공할 수 있는 방안이 제안되고 있다. 그러나 이러한 인터렉티브 컨텐츠를 TV에서 제어하고자 하는 경우, 버튼만 배치되어 있는 형태의 기존 리모컨만으로는 한계가 있다. 따라서, 커서, 포인터 등 자유도가 높은 보다 진보된 입력 장치를 이용하여 TV를 제어하는 방법이 제시되고 있다.In particular, in recent years, a method for providing interactive content such as games or digital contents management (DMC) on a TV has been proposed. However, if the user wants to control such interactive contents on a TV, there is a limit to the existing remote controller having only buttons. Accordingly, a method of controlling a TV using a more advanced input device having a high degree of freedom such as a cursor and a pointer has been proposed.

일반적으로 PC에서는 다수의 프로그램이 구동되더라도 한 시점에서 활성화되어 있는 창이나 프로그램은 1개이기 때문에, 복수의 프로그램이 겹쳐 있는 경우라도 활성화되어 있는 창이나 프로그램을 제어하면 된다. 따라서 1명의 사용자가 다수의 프로그램을 사용하기 위해서는 활성화되어 있는 프로그램을 직접 전환하는 동작을 취하여 제어할 수 있었다.In general, even if a plurality of programs are running on a PC, only one window or program is active at a time, and thus, even if a plurality of programs overlap, the active window or program may be controlled. Therefore, in order to use a plurality of programs by one user, the user can directly control the programs that are activated.

그러나 복수의 프로그램이 활성화되어 있고, 이와 동시에 다수의 프로그램이 각 입력 디바이스로 독립적으로 제어되기 위해서는, 어떤 커서가 어떤 프로그램에 할당이 되어 있으며 어떻게 동작을 하는지가 새롭게 설정되어야 한다. However, in order for a plurality of programs to be active and at the same time a plurality of programs to be independently controlled by each input device, it is necessary to newly set which cursor is assigned to which program and how to operate.

본 발명은 DTV 또는 PC 환경에서 하나 또는 복수의 입력 디바이스로 복수의 어플리케이션을 동시에 제어하고, 나아가 화면에 출력된 복수의 어플리케이션을 동시에 제어하기 위한 단일 또는 복수의 커서를 표시 및 이동시킬 수 있는 영상처리장치 및 영상처리장치의 제어 방법을 제공하는 것이다.The present invention can display and move a single or a plurality of cursors for simultaneously controlling a plurality of applications with one or a plurality of input devices in a DTV or PC environment and further controlling a plurality of applications output on the screen simultaneously. The present invention provides a control method of an apparatus and an image processing apparatus.

상기 목적은, 본 발명에 따라, 영상처리장치의 제어 방법에 있어서, 제1어플리케이션에 대응하는 제1화면을 표시하는 단계; 제2어플리케이션에 대응하는 제2화면을 상기 제1화면 위에 겹쳐서 표시하는 단계; 및 상기 제1어플리케이션을 제어하는 경우 상기 제2화면 중 상기 제1화면과 겹쳐진 부분을 표시하는 단계를 포함하는 영상처리장치의 제어 방법에 의해 달성된다According to an aspect of the present invention, there is provided a control method of an image processing apparatus, the method comprising: displaying a first screen corresponding to a first application; Displaying a second screen corresponding to a second application overlying the first screen; And displaying a portion overlapping with the first screen of the second screen when controlling the first application.

상기 영상처리장치의 제어 방법에 있어서, 상기 제1화면 및 상기 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시할 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 포인팅 커서는, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 포인팅 커서는, 상기 제1화면 아래, 상기 제1화면 위, 상기 제1화면과 상기 제2화면 사이 및 상기 제2화면 위 중 적어도 하나의 위치로 이동 가능하다. 상기 영상처리장치의 제어 방법에 있어서, 상기 포인팅 커서가 이동하는 경우, 상기 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응될 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 상기 제1어플리케이션 및 상기 제2어플리케이션을 제어할 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면이 표시되지 않은 경우, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션이 아닌 다른 어플리케이션을 제어하는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능하다. 상기 영상처리장치의 제어 방법에 있어서, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 상기 영상처리장치의 제어 방법에 있어서, 상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 제1포인팅 디바이스 및 제2포인팅 디바이스에 대응될 수 있다.In the control method of the image processing apparatus, at least one pointing cursor for controlling an application may be displayed on at least one of the first screen and the second screen. In the control method of the image processing apparatus, the pointing cursor may control an application corresponding to the closest screen among the first screen and the second screen that are overlapped below. In the control method of the image processing apparatus, the pointing cursor is moved to at least one position below the first screen, on the first screen, between the first screen and the second screen, and on the second screen. It is possible. In the control method of the image processing apparatus, when the pointing cursor is moved, at least one of transparency, shape, contrast, and color of the pointing cursor may be changed. In the control method of the image processing apparatus, the at least one pointing cursor may correspond to each of the at least one pointing device. In the control method of the image processing apparatus, the pointing cursor includes a first pointing cursor and a second pointing cursor, wherein the first pointing cursor and the second pointing cursor are respectively the first application and the second application. Can be controlled. In the control method of the image processing apparatus, when the screen corresponding to the application to be controlled is not displayed, the first pointing cursor and the second pointing cursor are superimposed below the first screen and the first pointing cursor. An application corresponding to the nearest screen among the two screens may be controlled. In the control method of the image processing apparatus, when the first pointing cursor and the second pointing cursor control an application other than the application to be controlled, at least one of transparency, shape, contrast, and color may be changed. Can be. In the control method of the image processing apparatus, the first pointing cursor and the second pointing cursor are movable within a screen area corresponding to an application to be controlled. In the control method of the image processing apparatus, when the first pointing cursor and the second pointing cursor leave the movable area, at least one of transparency, shape, contrast, and color may be changed. In the control method of the image processing apparatus, the first pointing cursor and the second pointing cursor may correspond to the first pointing device and the second pointing device, respectively.

한편, 상기 목적은, 본 발명에 따라, 영상처리장치의 제어 방법에 있어서, 제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않도록 표시하는 단계; 상기 제1어플리케이션 및 상기 제2어플리케이션 중 적어도 하나를 제어하는 단계; 및 제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있도록 표시하는 단계를 포함하는 영상처리장치의 제어 방법에 의해 달성될 수 있다.Meanwhile, according to the present invention, there is provided a control method of an image processing apparatus, comprising: displaying a first screen corresponding to a first application and a second screen corresponding to a second application so as not to overlap each other; Controlling at least one of the first application and the second application; And displaying the image to be recognized by the user when the application to be controlled is changed.

한편, 상기 목적은, 본 발명에 따라, 영상처리장치에 있어서, 영상을 처리하여 표시하는 영상 처리부; 및 제1어플리케이션에 대응하는 제1화면 위에 제2어플리케이션에 대응하는 제2화면을 겹쳐서 표시하고, 상기 제1어플리케이션을 제어하는 경우 상기 제2화면 중 상기 제1화면과 겹쳐진 부분을 표시하도록, 상기 영상 처리부를 제어하는 제어부를 포함하는 영상처리장치에 의해 달성될 수 있다.On the other hand, the object is, according to the present invention, an image processing apparatus, comprising: an image processing unit for processing and displaying an image; And overlapping the second screen corresponding to the second application on the first screen corresponding to the first application, and displaying a portion overlapping with the first screen of the second screen when controlling the first application. It can be achieved by an image processing apparatus including a control unit for controlling the image processing unit.

한편, 상기 목적은, 본 발명에 따라, 영상처리장치에 있어서, 영상을 처리하여 표시하는 영상 처리부; 및 제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않게 표시하도록 상기 영상 처리부를 제어하고, 상기 제1어플리케이션 및 상기 제2어플리케이션 중 적어도 하나를 제어하되, 제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있게 표시하도록 상기 영상 처리부를 제어하는 제어부를 포함하는 영상처리장치에 의해 달성될 수 있다.On the other hand, the object is, according to the present invention, an image processing apparatus, comprising: an image processing unit for processing and displaying an image; And controlling the image processor to display the first screen corresponding to the first application and the second screen corresponding to the second application so as not to overlap each other, and controlling at least one of the first application and the second application. When the target application is changed, it may be achieved by an image processing apparatus including a control unit which controls the image processing unit so that the user can recognize the application.

본 발명에 의하면, DTV 또는 PC환경에서 복수의 어플리케이션을 동시에 실행하는 경우, 단일 또는 복수의 입력 디바이스를 이용하여 각각의 어플리케이션을 동시에 제어하고 복수의 어플리케이션의 동시 제어를 위한 커서를 표시할 수 있다.According to the present invention, when simultaneously executing a plurality of applications in a DTV or PC environment, a single or a plurality of input devices can be used to simultaneously control each application and display a cursor for simultaneous control of the plurality of applications.

또한, 복수의 입력 디바이스를 이용하여 복수의 컨텐츠를 동시에 제어하는 경우, 사용자가 직관적으로 제어 가능한 사용자 인터페이스를 제공할 수 있다. 나아가, 디스플레이가 포함된 한 개의 컴퓨터 디바이스에서 동시에 여러 명의 사용자가 제어 가능한 시스템을 구성할 수 있다.In addition, when simultaneously controlling a plurality of contents using a plurality of input devices, it is possible to provide a user interface that the user can intuitively control. Furthermore, it is possible to construct a system that can be controlled by several users at the same time in one computer device including a display.

도 1은 본 발명의 일 실시예에 의한 영상처리장치의 구성을 도시한 블록도.
도 2a는 하나의 포인팅 커서가 표시되는 경우를 도시한 도면.
도 2b는 포인팅 커서가 어플리케이션 간을 이동하며 형태가 변경되는 것을 도시한 도면.
도 2c는 두 개의 포인팅 커서가 표시되는 경우를 도시한 도면.
도 2d는 복수 개의 어플리케이션이 복수의 포인팅 디바이스에 의하여 각각 제어되는 경우를 도시한 도면.
도 2e는 제어 대상이 되는 어플리케이션에 대응하는 화면이 아직 표시되지 않은 경우를 도시한 도면.
도 2f는 포인팅 커서가 이동 가능한 영역을 도시한 도면.
도 3은 본 발명의 일 실시예에 의한 레이어의 구성을 도시한 도면.
도 4a는 본 발명의 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 4b는 도 4a의 경우 표시되는 화면을 도시한 도면.
도 5a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 5b는 도 5a의 경우 표시되는 화면을 도시한 도면.
도 6a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 6b는 도 6a의 경우 표시되는 화면을 도시한 도면.
도 7a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 7b는 도 7a의 경우 표시되는 화면을 도시한 도면.
도 8a는 하나의 포인팅 커서가 표시되는 경우를 도시한 도면.
도 8b는 포인팅 커서가 어플리케이션 간을 이동하며 형태가 변경되는 것을 도시한 도면.
도 8c는 복수 개의 어플리케이션이 복수의 포인팅 디바이스에 의하여 각각 제어되는 경우를 도시한 도면.
도 8d는 제어 대상을 벗어난 경우 포인팅 커서의 형태가 변경되는 것을 도시한 도면.
도 9는 본 발명의 제1 실시예에 의한 영상처리장치의 제어 과정을 도시한 도면.
도 10은 본 발명의 제2 실시예에 의한 영상처리장치의 제어 과정을 도시한 도면.1 is a block diagram showing the configuration of an image processing apparatus according to an embodiment of the present invention.
2A is a diagram illustrating a case in which one pointing cursor is displayed.
FIG. 2B illustrates the pointing cursor moving between applications to change shape. FIG.
2C is a diagram illustrating a case where two pointing cursors are displayed.
FIG. 2D illustrates a case where a plurality of applications are controlled by a plurality of pointing devices, respectively. FIG.
2E illustrates a case in which a screen corresponding to an application to be controlled is not yet displayed.
2F is a view showing an area where a pointing cursor can be moved.
3 is a view showing the configuration of a layer according to an embodiment of the present invention.
4A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 4B is a diagram illustrating a screen displayed in the case of FIG. 4A.
FIG. 5A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 5B is a diagram illustrating a screen displayed in the case of FIG. 5A.
FIG. 6A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 6B is a diagram illustrating a screen displayed in the case of FIG. 6A.
FIG. 7A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 7B is a diagram illustrating a screen displayed in the case of FIG. 7A.
8A is a diagram illustrating a case in which one pointing cursor is displayed.
FIG. 8B illustrates that the pointing cursor moves between applications and changes shape.
8C illustrates a case where a plurality of applications are controlled by a plurality of pointing devices, respectively.
8D is a diagram illustrating that the shape of the pointing cursor is changed when it is out of the control object.
9 is a diagram illustrating a control process of an image processing apparatus according to a first embodiment of the present invention.
10 is a diagram illustrating a control process of an image processing apparatus according to a second embodiment of the present invention.

이하, 첨부한 도면을 참고로 하여 본 발명의 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예들에 한정되지 않는다. 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 동일 또는 유사한 구성 요소에 대해서는 동일한 참조 부호를 붙이도록 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. As those skilled in the art would realize, the described embodiments may be modified in various different ways, all without departing from the spirit or scope of the present invention. In order to clearly describe the present invention, parts irrelevant to the description are omitted, and like reference numerals designate like elements throughout the specification.

도 1은 본 발명의 일 실시예에 의한 영상처리장치의 구성을 도시한 블록도이다.1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.

본 발명의 일 실시예에 의한 영상처리장치(100)는 디지털 TV, LFD(Large Format Display), 데스크 탑 컴퓨터, 랩탑 컴퓨터, 이동 단말, 셋탑박스 등이 될 수 있다. 나아가, 복수의 어플리케이션을 실행할 수 있고, 포인팅 디바이스(150)에 의하여 제어될 수 있는 전자 장치라면, 본 발명의 일 실시예에 의한 영상처리장치(100)가 될 수 있다.The image processing apparatus 100 according to an embodiment of the present invention may be a digital TV, a large format display (LFD), a desktop computer, a laptop computer, a mobile terminal, a set top box, or the like. Furthermore, any electronic device capable of executing a plurality of applications and being controlled by the pointing device 150 may be the image processing apparatus 100 according to an embodiment of the present invention.

본 발명의 일 실시예에 의한 영상처리장치(100)는 영상 처리부(110), 사용자 입력부(120) 및 제어부(130)를 포함할 수 있다.The image processing apparatus 100 according to an embodiment of the present invention may include an image processor 110, a user input unit 120, and a controller 130.

영상 처리부(110)는 영상을 처리하여 표시할 수 있다. 구체적으로, 영상 처리부(110)는 어플리케이션에 대응하는 화면, 어플리케이션을 제어하기 위한 포인팅 커서 및 소정 기능을 수행하는 제어 오브젝트를 표시할 수 있다. 상기 제어 오브젝트는 가상 슬라이더, 가상 버튼, 그 밖의 다양한 형태의 그래픽 사용자 인터페이스일 수 있다. The image processor 110 may process and display an image. In detail, the image processor 110 may display a screen corresponding to the application, a pointing cursor for controlling the application, and a control object performing a predetermined function. The control object may be a virtual slider, a virtual button, or any other type of graphical user interface.

한편, 영상 처리부(110)는 액정 표시 장치(Liquid Crystal Display: LCD), 유기 전기 발광 다이오드(Organic Light Emitting Diode: OLED) 또는 플라즈마 표시 패널(Plasma Display Panel: PDP) 등의 형태로 구현되는 디스플레이 패널(미도시) 및 패널 구동부(미도시)를 포함할 수 있다.The image processing unit 110 may be a display panel implemented in the form of a liquid crystal display (LCD), an organic light emitting diode (OLED), or a plasma display panel (PDP). (Not shown) and a panel driver (not shown).

사용자 입력부(120)는 포인팅 디바이스(150)로부터 제어 명령을 입력 받을 수 있다. 이를 위해, 사용자 입력부(120)는 포인팅 디바이스(150)와 적외선 통신, 블루투스 통신, 지그비 통신 및 근거리 통신 등을 포함하는 유/무선 통신을 수행할 수 있다. 한편, 상기 제어 명령은 포인팅 동작 및 특정 키 입력 중 적어도 하나를 포함할 수 있다.The user input unit 120 may receive a control command from the pointing device 150. To this end, the user input unit 120 may perform wired / wireless communication with the pointing device 150 including infrared communication, Bluetooth communication, Zigbee communication, and near field communication. The control command may include at least one of a pointing operation and a specific key input.

본 발명의 제1실시예에 의한 영상처리장치(100)의 제어 방법에 의하면, 제1화면과 제2화면이 겹쳐져서 표시될 수 있다. 구체적으로, 제어부(130)는 제1어플리케이션에 대응하는 제1화면 위에 제2어플리케이션에 대응하는 제2화면을 겹쳐서 표시하고, 제1어플리케이션을 제어하는 경우 제2화면 중 제1화면과 겹쳐진 부분을 표시하도록, 영상 처리부(110)를 제어할 수 있다.According to the control method of the image processing apparatus 100 according to the first embodiment of the present invention, the first screen and the second screen may overlap each other. In detail, the controller 130 displays the second screen corresponding to the second application overlaid on the first screen corresponding to the first application, and displays a portion overlapped with the first screen of the second screen when controlling the first application. The image processor 110 may be controlled to display.

이 경우, 제어부(130)는 제1화면 및 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하도록 영상 처리부 (110)를 제어할 수 있다. In this case, the controller 130 may control the image processor 110 to display at least one pointing cursor for controlling an application on at least one of the first screen and the second screen.

일 실시예에 의하면, 포인팅 커서는 아래에 겹쳐서 표시되는 제1화면 및 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 이 경우, 포인팅 커서는, 제1화면 아래, 제1화면 위, 제1화면과 제2화면 사이 및 제2화면 위 중 적어도 하나의 위치로 이동 가능하다. 포인팅 커서가 이동하는 경우, 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 이에 대해서는, 도 2a 내지 도 2c에 대한 상세한 설명에서 후술한다.According to an embodiment of the present disclosure, the pointing cursor may control an application corresponding to the closest screen among the first screen and the second screen that are superimposed below. In this case, the pointing cursor can be moved to at least one position below the first screen, above the first screen, between the first screen and the second screen, and above the second screen. When the pointing cursor moves, at least one of transparency, shape, contrast, and color of the pointing cursor may be changed. This will be described later in the detailed description of FIGS. 2A to 2C.

다른 실시예에 의하면, 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며, 제1포인팅 커서 및 제2포인팅 커서는 각각 제1어플리케이션 및 제2어플리케이션을 제어할 수 있다. 이 경우, 제1포인팅 커서 및 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면이 표시되지 않은 경우, 아래에 겹쳐서 표시되는 제1화면 및 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 제1포인팅 커서 및 제2포인팅 커서는, 제어 대상이 되는 어플리케이션이 아닌 다른 어플리케이션을 제어하는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 또한, 제1포인팅 커서 및 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능하다. 이 경우, 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나게 되면, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 이에 대해서는, 도 2d 내지 도 2f에 대한 상세한 설명에서 후술한다.According to another embodiment, the pointing cursor may include a first pointing cursor and a second pointing cursor, and the first pointing cursor and the second pointing cursor may control the first application and the second application, respectively. In this case, when the screen corresponding to the application to be controlled is not displayed, the first pointing cursor and the second pointing cursor select an application corresponding to the closest screen among the first screen and the second screen that are overlapped below. Can be controlled. When the first pointing cursor and the second pointing cursor control an application other than the application to be controlled, at least one of transparency, shape, contrast, and color may be changed. In addition, the first pointing cursor and the second pointing cursor can be moved within the screen area corresponding to the application to be controlled. In this case, when the first pointing cursor and the second pointing cursor leave the movable area, at least one of transparency, shape, contrast, and color may be changed. This will be described later in the detailed description of FIGS. 2D to 2F.

본 발명의 제2실시예에 의한 영상처리장치(100)의 제어 방법에 의하면, 제1화면과 제2화면이 겹쳐지지 않게 표시될 수 있다. 구체적으로, 제어부(130)는 제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않게 표시하도록 영상 처리부(110)를 제어하고, 제1어플리케이션 및 제2어플리케이션 중 적어도 하나를 제어하되, 제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있게 표시하도록 영상 처리부(110)를 제어할 수 있다.According to the control method of the image processing apparatus 100 according to the second embodiment of the present invention, the first screen and the second screen may be displayed so as not to overlap. Specifically, the controller 130 controls the image processor 110 to display the first screen corresponding to the first application and the second screen corresponding to the second application so as not to overlap each other, and among the first application and the second application. The at least one controller may be controlled, but the image processor 110 may be controlled to be displayed so that the user can recognize the changed application.

이 경우, 제어부(130)는 제1화면 및 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하도록 영상 처리부(110) 를 제어할 수 있다.In this case, the controller 130 may control the image processor 110 to display at least one pointing cursor for controlling an application on at least one of the first screen and the second screen.

일 실시예에 의하면, 포인팅 커서는 아래에 표시되는 제1화면 또는 제2화면에 대응하는 어플리케이션을 제어할 수 있다. 이 경우, 포인팅 커서는, 제1화면 위, 제1화면 아래, 제2화면 위 및 제2화면 아래 중 적어도 하나의 위치로 이동 가능하다. 포인팅 커서가 이동하는 경우, 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 이에 대해서는, 도 8a 및 도 8b에 대한 상세한 설명에서 후술한다.According to an embodiment, the pointing cursor may control an application corresponding to the first screen or the second screen displayed below. In this case, the pointing cursor can be moved to at least one position of the first screen, the first screen, the second screen, and the second screen. When the pointing cursor moves, at least one of transparency, shape, contrast, and color of the pointing cursor may be changed. This will be described later in the detailed description of FIGS. 8A and 8B.

다른 실시예에 의하면, 적어도 하나의 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며, 제1포인팅 커서 및 제2포인팅 커서는 각각 제1어플리케이션 및 제2어플리케이션을 제어할 수 있다. 이 경우, 제1포인팅 커서 및 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능하다. 또한, 제1포인팅 커서 및 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다. 이에 대해서는, 도 8c 및 도 8d에 대한 상세한 설명에서 후술한다.According to another embodiment, at least one pointing cursor may include a first pointing cursor and a second pointing cursor, and the first pointing cursor and the second pointing cursor may control the first application and the second application, respectively. In this case, the first pointing cursor and the second pointing cursor can be moved within the screen area corresponding to the application to be controlled. In addition, the first pointing cursor and the second pointing cursor may change at least one of transparency, shape, contrast, and color when leaving the movable area. This will be described later in the detailed description of FIGS. 8C and 8D.

포인팅 디바이스(150)는 마우스 또는 이와 유사한 커서를 기반으로 하는 입력 장치를 포함할 수 있다. 포인팅 디바이스(150)는 사용자로부터 입력된 제어 명령을 영상처리장치(100)에 전송할 수 있다. 이를 위해, 포인팅 디바이스(150)는 영상처리장치 (100)와 유무선 통신을 수행할 수 있다.The pointing device 150 may include an input device based on a mouse or similar cursor. The pointing device 150 may transmit a control command input from the user to the image processing apparatus 100. To this end, the pointing device 150 may perform wired or wireless communication with the image processing apparatus 100.

한편, 포인팅 디바이스(150)는 복수 개일 수 있다.On the other hand, the pointing device 150 may be a plurality.

복수 개의 포인팅 디바이스(150)는 어플리케이션 별로 할당될 수 있다. 예를 들어, 포인팅 디바이스 A는 방송 화면에 할당되고, 포인팅 디바이스 B는 게임 화면에 할당될 수 있다. 이 경우, 사용자는 포인팅 디바이스 A를 사용하여 방송 시청을 제어하고, 포인팅 디바이스 B를 사용하여 게임을 실행한다.The plurality of pointing devices 150 may be allocated for each application. For example, the pointing device A may be assigned to the broadcast screen, and the pointing device B may be assigned to the game screen. In this case, the user controls the viewing of the broadcast using the pointing device A, and executes the game using the pointing device B.

또한, 복수 개의 포인팅 디바이스(150)는 어플리케이션 별로 할당되지 않고, 포인팅 디바이스(150)가 위치한 어플리케이션에 따라 할당될 수도 있다. 구체적으로, 포인팅 디바이스(150)에 대응하는 포인팅 커서가 임의의 화면에 위치하는 경우, 상기 임의의 화면에 대응하는 어플리케이션에 할당될 수 있다. 예를 들어, 포인팅 디바이스 A는 대응되는 포인팅 커서 A의 위치에 따라, 방송 화면에 할당되거나 게임 화면에 할당될 수 있다. 만일, 포인팅 커서 A가 방송 화면과 게임 화면이 겹쳐진 부분에 위치한다면, 아래에 위치한 화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다.In addition, the plurality of pointing devices 150 may not be allocated for each application, but may be allocated according to the application in which the pointing device 150 is located. In detail, when the pointing cursor corresponding to the pointing device 150 is located on an arbitrary screen, the pointing cursor may be allocated to an application corresponding to the arbitrary screen. For example, the pointing device A may be allocated to the broadcast screen or the game screen according to the position of the corresponding pointing cursor A. FIG. If the pointing cursor A is located at a portion where the broadcast screen and the game screen overlap, the application corresponding to the closest screen among the screens below may be controlled.

이하에서는, 도 2a 내지 도 2f를 참조하여, 본 발명의 제1실시예에 의한 영상처리장치의 제어 방법을 설명한다.Hereinafter, a method of controlling an image processing apparatus according to a first embodiment of the present invention will be described with reference to FIGS. 2A to 2F.

DTV 환경에서 게임 어플리케이션과 방송 어플리케이션을 동시에 실행하는 경우, DTV 상에는 각각의 어플리케이션에 대응하는 화면이 동시에 표시될 수 있다.When the game application and the broadcast application are simultaneously executed in the DTV environment, screens corresponding to the respective applications may be simultaneously displayed on the DTV.

본 발명의 제1실시예에 의한 영상처리장치(100)의 제어 방법에 의하면, 제1화면과 제2화면이 겹쳐져서 표시될 수 있다. 구체적으로, 도 2a 내지 도 2f에 도시된 바와 같이, 게임 어플리케이션에 대응하는 게임 화면(210) 위에 방송 어플리케이션에 대응하는 방송 화면(220)이 겹쳐져서 표시될 수 있다. 이 경우, 제1화면 및 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 이상 표시할 수 있다. 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응될 수 있다.According to the control method of the image processing apparatus 100 according to the first embodiment of the present invention, the first screen and the second screen may overlap each other. Specifically, as illustrated in FIGS. 2A to 2F, a broadcast screen 220 corresponding to a broadcast application may be overlapped and displayed on a game screen 210 corresponding to a game application. In this case, at least one pointing cursor for controlling an application may be displayed on at least one of the first screen and the second screen. The at least one pointing cursor may correspond to each of the at least one pointing device.

도 2a는 하나의 포인팅 커서가 표시되는 경우를 도시한 도면이다.2A is a diagram illustrating a case in which one pointing cursor is displayed.

포인팅 커서(231)는 포인팅 디바이스 A(230)에 대응된다.The pointing cursor 231 corresponds to the pointing device A 230.

만일, 포인팅 디바이스 A(230)가 포인팅 커서(231)의 위치에 따라, 게임 화면(210) 또는 방송 화면(220)에 할당된다면, 포인팅 커서(231)는 아래에 겹쳐서 표시되는 게임 화면(210) 및 방송 화면(220) 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 도 2a에서는, 하위 레어어부터 상위 레이어 순으로, 배경 -> 게임 화면(210) -> 방송 화면(220) -> 포인팅 커서(231) 순으로 배열되어 있다. 이 경우, 포인팅 커서(231)의 아래에 겹쳐서 표시되는 화면 중 포인팅 커서(231)에 가장 인접한 화면은 방송 화면(220)이다. 따라서, 포인팅 커서(231)는 방송 화면(220)을 제어하게 된다.If the pointing device A 230 is allocated to the game screen 210 or the broadcast screen 220 according to the position of the pointing cursor 231, the pointing cursor 231 is displayed overlapping the game screen 210. And an application corresponding to the closest screen among the broadcast screens 220. In FIG. 2A, the layers are arranged in the order of the lower rare layer to the upper layer, and the background-> game screen 210-> broadcast screen 220-> pointing cursor 231. In this case, the screen closest to the pointing cursor 231 among the screens overlapped below the pointing cursor 231 is the broadcast screen 220. Thus, the pointing cursor 231 controls the broadcast screen 220.

도 2b는 포인팅 커서가 어플리케이션 간을 이동하며 형태가 변경되는 것을 도시한 도면이다.2B is a diagram illustrating that a pointing cursor moves between applications to change a shape.

포인팅 커서(232, 233, 234, 235, 236)는 게임 화면(210)과 방송 화면(220)간을 이동할 수 있다. 구체적으로, 포인팅 커서(232, 233, 234, 235, 236)는 게임 화면(210) 아래, 게임 화면(210) 위, 게임 화면(210)과 방송 화면(220) 사이 및 방송 화면(220) 위 중 적어도 하나의 위치로 이동할 수 있다. 나아가, 포인팅 커서(232, 233, 234, 235, 236)가 이동하는 경우, 포인팅 커서(232, 233, 234, 235, 236)의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다.The pointing cursors 232, 233, 234, 235, and 236 may move between the game screen 210 and the broadcast screen 220. Specifically, the pointing cursors 232, 233, 234, 235, and 236 are located below the game screen 210, above the game screen 210, between the game screen 210 and the broadcast screen 220, and above the broadcast screen 220. May be moved to at least one of the positions. Furthermore, when the pointing cursors 232, 233, 234, 235, and 236 move, at least one of transparency, shape, contrast, and color of the pointing cursors 232, 233, 234, 235, and 236 may be changed.

도 2b의 경우, 낮은 레이어에 배치된 화면 위로 이동할수록, 포인팅 커서(232, 233, 234, 235, 236)의 명암은 낮아진다. 구체적으로, 방송 화면(220)위에 위치한 포인팅 커서(232)가 게임 화면(210)위로 이동하는 경우, 명암이 소정 단계만큼 낮아진 형태의 포인팅 커서(234)로 변경된다. 게임 화면(210)위에 위치한 포인팅 커서(234)가 게임 화면(210) 아래로 이동하면, 명암이 소정 단계만큼 더 낮아진 형태의 포인팅 커서(236)로 변경된다.In the case of FIG. 2B, as the user moves over the screen disposed on the lower layer, the contrast of the pointing cursors 232, 233, 234, 235, and 236 decreases. In detail, when the pointing cursor 232 located on the broadcast screen 220 moves on the game screen 210, the contrast is changed to the pointing cursor 234 having a low contrast level by a predetermined step. When the pointing cursor 234 located on the game screen 210 moves below the game screen 210, the contrast is changed to the pointing cursor 236 having a lower level by a predetermined level.

한편, 방송 화면(220)위에 위치한 포인팅 커서(232)가 게임 화면(210)과 방송 화면(220)사이의 위치로 이동할 수 있다. 이 경우, 하위 레어어부터 상위 레이어 순으로, 배경 -> 게임 화면(210) -> 포인팅 커서(233, 234) -> 방송 화면(220)순으로 배열되게 된다. 따라서, 게임 화면(210)위에 위치한 포인팅 커서(234)와, 게임 화면(210)과 방송 화면(220)사이에 위치한 포인팅 커서(233)는 동일한 레이어에 존재한다. 그러나, 후자(233)는 전자(234)와는 달리 게임 화면(210)과 방송 화면(220)이 겹쳐진 영역에 존재하므로, 방송 화면(220)에 의하여 가려지게 된다. 따라서, 이를 표시하기 위하여, 게임 화면(210)과 방송 화면(220)사이에 위치하는 경우, 포인팅 커서(233)는 경계가 점선으로 표시될 수 있다. 그러나, 전자(234)와 후자(233)는 동일한 레이어에 존재하므로, 명암이 동일하게 표시될 수 있다.Meanwhile, the pointing cursor 232 positioned on the broadcast screen 220 may move to a position between the game screen 210 and the broadcast screen 220. In this case, the layers are arranged in the order of the lower rare layer to the upper layer, and the background-> game screen 210-> pointing cursors 233 and 234-> broadcast screen 220. Therefore, the pointing cursor 234 located on the game screen 210 and the pointing cursor 233 located between the game screen 210 and the broadcast screen 220 exist in the same layer. However, unlike the former 234, the latter 233 exists in an area where the game screen 210 and the broadcast screen 220 overlap each other, and thus are hidden by the broadcast screen 220. Therefore, in order to display this, when positioned between the game screen 210 and the broadcast screen 220, the pointing cursor 233 may be indicated by a dotted line. However, since the former 234 and the latter 233 are present in the same layer, the contrast may be displayed the same.

이와 유사하게, 게임 화면(210)아래에 위치한 포인팅 커서(236)와 배경과 게임 화면(210) 사이에 위치한 포인팅 커서(235)의 명암을 동일하게 표시하되, 후자(235)의 경계를 점선으로 표시할 수 있다.Similarly, the contrast of the pointing cursor 236 located below the game screen 210 and the pointing cursor 235 located between the background and the game screen 210 is displayed the same, but the boundary of the latter 235 is indicated by a dotted line. I can display it.

만일, 포인팅 디바이스 A(230)가 포인팅 커서(232, 233, 234, 235, 236)의 위치에 따라 게임 화면(210) 또는 방송 화면(220)에 할당된다면, 포인팅 커서(232, 233, 234, 235, 236)는 아래에 겹쳐서 표시되는 게임 화면(210) 및 방송 화면(220) 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 구체적으로, 도 2b에서, 방송 화면(220)위에 위치하는 포인팅 커서(232)는 방송 화면(220)을 제어할 수 있다. 게임 화면(210)위에 위치하는 포인팅 커서(234)와 게임 화면(210)과 방송 화면(220)사이에 위치하는 포인팅 커서(233)는 게임 화면(210)을 제어할 수 있다. 그러나, 게임 화면(210) 아래에 위치한 포인팅 커서(236)와 배경과 게임 화면(210) 사이에 위치한 포인팅 커서(235)는 제어 대상이 없다.If the pointing device A 230 is assigned to the game screen 210 or the broadcast screen 220 according to the positions of the pointing cursors 232, 233, 234, 235, and 236, the pointing cursors 232, 233, 234, The 235 and 236 may control an application corresponding to the closest screen among the game screen 210 and the broadcast screen 220 which are overlapped and displayed below. In detail, in FIG. 2B, the pointing cursor 232 positioned on the broadcast screen 220 may control the broadcast screen 220. The pointing cursor 234 positioned on the game screen 210 and the pointing cursor 233 positioned between the game screen 210 and the broadcast screen 220 may control the game screen 210. However, the pointing cursor 236 located below the game screen 210 and the pointing cursor 235 located between the background and the game screen 210 have no control object.

한편, 도 2b의 경우, 게임 화면(210)과 방송 화면(220) 상호간에 포인팅 커서(232, 233, 234, 235, 236)가 이동하더라도, 게임 화면(210)과 방송 화면(220)은 계속 표시되며 사라지지 않는다. 또한, 게임 화면(210)을 제어하는 경우에도 상대적으로 상위 레이어에 표시된 방송 화면(220)은 그대로 표시되며 사라지지 않는다.Meanwhile, in the case of FIG. 2B, even when the pointing cursors 232, 233, 234, 235, and 236 move between the game screen 210 and the broadcast screen 220, the game screen 210 and the broadcast screen 220 continue. Displayed and do not disappear. In addition, even when controlling the game screen 210, the broadcast screen 220 displayed on the upper layer is displayed as it is and does not disappear.

도 2c는 두 개의 포인팅 커서가 표시되는 경우를 도시한 도면이다.2C illustrates a case where two pointing cursors are displayed.

포인팅 커서 A(237)는 포인팅 디바이스 A(230)에 대응되며, 포인팅 커서 B(241)는 포인팅 디바이스 B(240)에 대응된다. 도 2c에서, 포인팅 커서 A(237)와 포인팅 커서 B(241)는 각각 게임 화면(210) 위에 표시된다.The pointing cursor A 237 corresponds to the pointing device A 230, and the pointing cursor B 241 corresponds to the pointing device B 240. In FIG. 2C, pointing cursor A 237 and pointing cursor B 241 are displayed on game screen 210, respectively.

만일, 포인팅 디바이스 A(230)와 포인팅 디바이스 B(240)가 각각 포인팅 커서 A(237) 및 포인팅 커서 B(241)의 위치에 따라 게임 화면(210) 또는 방송 화면(220)에 할당된다면, 포인팅 커서 A(237) 및 포인팅 커서 B(241)는 아래에 겹쳐서 표시되는 게임 화면(210) 및 방송 화면(220) 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. If the pointing device A 230 and the pointing device B 240 are allocated to the game screen 210 or the broadcast screen 220 according to the positions of the pointing cursor A 237 and the pointing cursor B 241, respectively, the pointing device A 230 and the pointing device B 240 may be assigned. The cursor A 237 and the pointing cursor B 241 may control an application corresponding to the closest screen among the game screen 210 and the broadcast screen 220 overlapped below.

도 2c에서는, 하위 레어어부터 상위 레이어 순으로, 배경 -> 게임 화면(210) -> 포인팅 커서 A(237), 포인팅 커서 B(241) -> 방송 화면(220) 순으로 배열되어 있다. 이 경우, 포인팅 커서 A(237)의 아래에 겹쳐서 표시되는 화면 중 포인팅 커서 A(237)에 가장 인접한 화면은 게임 화면(210)이다. 또한, 포인팅 커서 B(241)의 아래에 겹쳐서 표시되는 화면 중 포인팅 커서 B(241)에 가장 인접한 화면 역시 게임 화면(210)이다. 따라서, 포인팅 커서 A(237)와 포인팅 커서 B(241)는 모두 게임 화면(210)을 제어한다. 예를 들어, 복수의 사용자가 공동으로 게임을 실행할 수 있다.In FIG. 2C, the layers are arranged in the order of the lower rare layer to the upper layer, and the background-> game screen 210-> pointing cursor A 237, pointing cursor B 241-> broadcast screen 220 in this order. In this case, the screen closest to the pointing cursor A 237 among the screens overlapped below the pointing cursor A 237 is the game screen 210. In addition, the screen closest to the pointing cursor B 241 among the screens superimposed below the pointing cursor B 241 is also the game screen 210. Therefore, the pointing cursor A 237 and the pointing cursor B 241 both control the game screen 210. For example, a plurality of users can jointly run a game.

도 2d는 복수 개의 어플리케이션이 복수의 포인팅 디바이스에 의하여 각각 제어되는 경우를 도시한 도면이다.FIG. 2D is a diagram illustrating a case where a plurality of applications are respectively controlled by a plurality of pointing devices.

만일, 포인팅 디바이스 A(230)가 게임 화면(210)에 할당되고 포인팅 디바이스 B(240)가 방송 화면(220)에 할당된다면, 포인팅 커서 A(238)는 게임 화면(210)을 제어하고 포인팅 커서 B(242)는 방송 화면(220)을 제어할 수 있다. 도 2d에서는, 하위 레어어부터 상위 레이어 순으로, 배경 -> 게임 화면(210) -> 포인팅 커서 A(238) -> 방송 화면(220) -> 포인팅 커서 B(242) 순으로 배열되어 있다. 따라서, 포인팅 커서 B(242)는 게임 화면(210)과 방송 화면(220)이 겹쳐진 영역에 위치한다. 그러나, 포인팅 커서 B(242)는 방송 화면(220)만을 제어할 수 있기 때문에, 사용자가 포인팅 커서 B(242)를 조작하더라도 게임 화면(210)은 제어되지 않는다. 이 경우, 방송 화면(220)만이 제어될 뿐이다.If pointing device A 230 is assigned to game screen 210 and pointing device B 240 is assigned to broadcast screen 220, pointing cursor A 238 controls game screen 210 and points the cursor. The B 242 may control the broadcast screen 220. In FIG. 2D, they are arranged in the order of the lower rare layer to the upper layer, and the background-> game screen 210-> pointing cursor A 238-> broadcast screen 220-> pointing cursor B 242. Accordingly, the pointing cursor B 242 is located in an area where the game screen 210 and the broadcast screen 220 overlap each other. However, since the pointing cursor B 242 can control only the broadcast screen 220, the game screen 210 is not controlled even if the user manipulates the pointing cursor B 242. In this case, only the broadcast screen 220 is controlled.

반대로, 포인팅 디바이스 B(240)가 게임 화면(210)에 할당되고 포인팅 디바이스 A(230)가 방송 화면(220)에 할당된다면, 포인팅 커서 B(242)는 게임 화면(210)을 제어하고 포인팅 커서 A(238)는 방송 화면(220)을 제어할 수 있다. 도 2d에서, 포인팅 커서 B(242)는 게임 화면(210)과 방송 화면(220)이 겹쳐진 영역에 위치한다. 그러나, 포인팅 커서 B(242)는 게임 화면(210)만을 제어할 수 있으므로, 사용자가 포인팅 커서 B(242)를 조작하더라도 방송 화면(220)은 제어되지 않는다. 포인팅 커서 A(238)는 방송 화면(220)을 벗어난 영역에 위치한다. 포인팅 커서 A(238)는 방송 화면(220)만을 제어할 수 있으므로, 사용자가 포인팅 커서 A(238)를 조작하더라도 게임 화면(210)은 제어되지 않는다.Conversely, if pointing device B 240 is assigned to game screen 210 and pointing device A 230 is assigned to broadcast screen 220, pointing cursor B 242 controls game screen 210 and points the cursor. A 238 may control the broadcast screen 220. In FIG. 2D, the pointing cursor B 242 is positioned in a region where the game screen 210 and the broadcast screen 220 overlap each other. However, since the pointing cursor B 242 can control only the game screen 210, the broadcast screen 220 is not controlled even if the user manipulates the pointing cursor B 242. The pointing cursor A 238 is located in an area outside the broadcast screen 220. Since the pointing cursor A 238 can control only the broadcast screen 220, the game screen 210 is not controlled even if the user manipulates the pointing cursor A 238.

도 2e는 제어 대상이 되는 어플리케이션에 대응하는 화면이 아직 표시되지 않은 경우를 도시한다.2E illustrates a case in which a screen corresponding to an application to be controlled is not yet displayed.

도 2e에서는, 포인팅 디바이스 B(240)의 제어 대상인 방송 화면(220)이 아직 표시되지 않았다. 예를 들어, 방송 컨텐츠가 로딩중인 경우일 수 있다. 이 경우, 포인팅 커서 B(243)의 제어 대상은 없다. 따라서, 포인팅 커서 B(243)는 방송 화면(220)이외에, 아래에 겹쳐서 표시되는 화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어할 수 있다. 도 2e 에서는, 배경 -> 게임 화면(210) -> 포인팅 커서 A(238) -> 방송 화면(220) -> 포인팅 커서 B(243)순으로 배열되어 있다. 따라서, 포인팅 커서 B(243) 아래에 겹쳐서 표시되는 화면 중 가장 인접한 화면은 게임 화면(210)이므로, 포인팅 커서 B(243)는 게임 화면(210)을 제어할 수 있다.In FIG. 2E, the broadcast screen 220 that is the control target of the pointing device B 240 has not been displayed yet. For example, this may be the case when broadcast content is being loaded. In this case, there is no control target of the pointing cursor B 243. Accordingly, the pointing cursor B 243 may control an application corresponding to the closest screen among the screens superimposed below the broadcast screen 220. In FIG. 2E, the sequence is arranged in the order of background-> game screen 210-> pointing cursor A 238-> broadcast screen 220-> pointing cursor B 243. FIG. Accordingly, since the closest screen among the screens superimposed below the pointing cursor B 243 is the game screen 210, the pointing cursor B 243 may control the game screen 210.

한편, 포인팅 커서 B(243)가 제어 대상인 방송 화면(220)이 아닌 게임 화면(210)을 제어하는 경우, 포인팅 커서 B(243)는 경계가 점선 형태로 표시될 수 있다.On the other hand, when the pointing cursor B 243 controls the game screen 210 instead of the broadcast screen 220 which is the control target, the pointing cursor B 243 may be displayed in a dotted line.

도 2f는 포인팅 커서가 이동 가능한 영역을 도시한 도면이다.2F is a diagram illustrating a region in which a pointing cursor can be moved.

포인팅 커서 A(238)는 제어 대상인 게임 화면(210) 영역 내에서 이동할 수 있다. 포인팅 커서 B(242)는 제어 대상인 방송 화면(220) 영역 내에서 이동할 수 있다. 즉, 도 2f에서, 포인팅 커서 A(238)는 A 영역 내에서 이동할 수 있으며, 포인팅 커서 B(242)는 B 영역 내에서 이동할 수 있다.The pointing cursor A 238 may move within the area of the game screen 210 that is the control target. The pointing cursor B 242 may move within the area of the broadcast screen 220 that is a control target. That is, in FIG. 2F, the pointing cursor A 238 can move within the area A, and the pointing cursor B 242 can move within the area B. FIG.

이 경우, 포인팅 커서 A(238)와 포인팅 커서 B(242)는 이동 가능한 영역을 벗어나게 되면, 경계가 점선 형태로 변경될 수 있다. 도 2f를 참조하면, A 영역을 벗어난 포인팅 커서 A(238')와 B 영역을 벗어난 포인팅 커서 B(242')는 경계가 점선으로 표시된다.In this case, when the pointing cursor A 238 and the pointing cursor B 242 leave the movable area, the boundary may be changed to a dotted line shape. Referring to FIG. 2F, the pointing cursor A 238 ′ out of the area A and the pointing cursor B 242 ′ out of the area B are indicated by dotted lines.

이하에서는, 본 발명의 제1실시예에 의한 영상처리장치의 제어 방법을 보다 구체적으로 설명한다.Hereinafter, the control method of the image processing apparatus according to the first embodiment of the present invention will be described in more detail.

도 3은 본 발명의 일 실시예에 의한 레이어의 구성을 도시한 도면이다.3 is a diagram illustrating a configuration of a layer according to an embodiment of the present invention.

레이어(Layer) 또는 그래픽 레이어(Graphic Layer)는 영상이 배치되는 면이다. 레이어에는 어플리케이션에 대응하는 화면, 포인팅 디바이스에 대응하는 포인팅 커서 및 소정 기능을 수행하는 제어 오브젝트 등이 배치될 수 있다.A layer or a graphic layer is a surface on which an image is disposed. In the layer, a screen corresponding to an application, a pointing cursor corresponding to a pointing device, a control object performing a predetermined function, and the like may be disposed.

컨텐츠 레이어(Content Layer)는 어플리케이션에 대응하는 화면이 배치되는 레이어이다. 커서 레이어(Cursor Layer)는 포인팅 디바이스에 대응하는 포인팅 커서가 배치되는 레이어이다. 제어 오브젝트 레이어(Control Object Layer)는 소정 기능을 수행하는 제어 오브젝트가 배치되는 레이어이다.The content layer is a layer in which a screen corresponding to an application is disposed. A cursor layer is a layer in which a pointing cursor corresponding to the pointing device is disposed. The control object layer is a layer in which a control object performing a predetermined function is disposed.

화면, 포인팅 커서 및 제어 오브젝트를 표시하기 위한 영상처리과정은 각각 다르다. 따라서, 영상처리장치(100)는 이들을 독립적으로 처리하여 각각 대응되는 레이어에 표시하고, 복수의 레이어를 겹쳐서 배치한다. 이 경우, 사용자의 시각에는 화면상에 포인팅 커서 및 제어 오브젝트가 겹쳐져 있는 것으로 보인다.Image processing for displaying the screen, the pointing cursor and the control object are different. Therefore, the image processing apparatus 100 processes them independently, displays them on the corresponding layers, and overlaps the plurality of layers. In this case, the user's perspective appears to be a pointing cursor and a control object on the screen.

일반적으로 기존의 PC 환경, 즉MS_OS(Microsoft Operating System) 또는 리눅스의 윈도우 환경에서는 최상단의 그래픽 레이어에만 커서 레이어를 설정한다. 이 경우, 하단 레이어에 실행되는 프로그램 중 활성화된 컨텐츠 상에서 커서가 가리키는 좌표를 계산하여 실행 여부를 결정한다. 활성화된 컨텐츠는 일반적으로 커서 레이어 바로 하단에 위치한 프로그램이다. 즉, 기존에는 하나의 커서 레이어만이 설정되므로, 커서 바로 하단에 위치하는 프로그램 만을 제어할 수 있었다.In general, in the existing PC environment, that is, the Windows operating system of MS_OS (Microsoft Operating System) or Linux, the cursor layer is set only at the top graphic layer. In this case, it is determined whether or not to execute by calculating the coordinates indicated by the cursor on the activated content of the program to be executed on the lower layer. Activated content is typically a program located just below the cursor layer. In other words, since only one cursor layer was previously set, only a program located directly under the cursor could be controlled.

반면, 본 발명에서는 컨텐츠 레이어 별로 커서 레이어를 대응하여 설정한다. 따라서, 복수 개의 어플리케이션을 동시에 제어할 수 있다. On the other hand, in the present invention, a cursor layer is correspondingly set for each content layer. Therefore, a plurality of applications can be controlled at the same time.

다만, 본 발명에서 커서 레이어는 컨텐츠 레이어에 대응하여 설정되지만, 커서는 컨텐츠에 대응하여 설정될 수도 있고 컨텐츠에 대응하여 설정되지 않을 수도 있다. 예를 들어, 도 2a 내지 도 2c에서 설명한 것과 같이, 커서는 커서가 위치한 어플리케이션에 따라 할당될 수 있다. 또는, 도 2d 내지 도 2f에서 설명한 바와 같이, 커서는 어플리케이션 별로 할당될 수 있다.However, in the present invention, the cursor layer is set to correspond to the content layer, but the cursor may be set to correspond to the content or may not be set to correspond to the content. For example, as described with reference to FIGS. 2A to 2C, the cursor may be allocated according to the application where the cursor is located. Alternatively, as described with reference to FIGS. 2D to 2F, the cursor may be allocated for each application.

커서 레이어는 대응하는 컨텐츠 레이어의 상단에 위치한다. 구체적으로, 도 3에 도시된 바와 같이, 커서 A 레이어(320)는 컨텐츠 A 레이어(310)의 상단에 위치하고, 커서 B 레이어(340)는 컨텐츠 B 레이어(330)의 상단에 위치한다. 이 경우, 사용자는 커서 A 레이어(320)에 표시된 커서를 이용하여 컨텐츠 A 레이어(310)에 표시된 컨텐츠를 제어하고, 커서 B 레이어(340)에 표시된 커서를 이용하여 컨텐츠 B 레이어(330)에 표시된 컨텐츠를 제어할 수 있다.The cursor layer is located on top of the corresponding content layer. Specifically, as shown in FIG. 3, the cursor A layer 320 is positioned at the top of the content A layer 310, and the cursor B layer 340 is positioned at the top of the content B layer 330. In this case, the user controls the content displayed on the content A layer 310 using the cursor displayed on the cursor A layer 320, and the user displayed on the content B layer 330 using the cursor displayed on the cursor B layer 340. You can control the content.

한편, 각각의 컨텐츠 레이어에 표시되는 컨텐츠는 항상 전체 레이어를 사용하는 것은 아니며, 레이어의 일부만을 사용할 수도 있다. 예를 들어, 디스플레이부의 일부 영역에만 화면 또는 커서가 표시될 수 있다. 이때 각 커서 레이어에 표시되는 커서가 이동할 수 있는 영역은 대응하는 컨텐츠 레이어에 표시되는 컨텐츠 영역에 한정될 수 있다. 예를 들어, 커서 A 레이어(320)에 표시된 커서는 컨텐츠 A 레이어(310)에 표시된 컨텐츠 영역의 범위 내에서만 이동할 수 있고, 커서 B 레이어(340)에 표시된 커서는 컨텐츠 B 레이어(330)에 표시된 컨텐츠 영역의 범위 내에서만 이동할 수 있다.Meanwhile, the content displayed in each content layer does not always use the entire layer, but only a part of the layer may be used. For example, a screen or a cursor may be displayed only in some areas of the display unit. In this case, an area in which the cursor displayed on each cursor layer may move may be limited to a content area displayed on a corresponding content layer. For example, the cursor displayed on the cursor A layer 320 may move only within the range of the content area displayed on the content A layer 310, and the cursor displayed on the cursor B layer 340 may be displayed on the content B layer 330. You can only move within the scope of the content area.

최상위 커서 레이어가 아닌 커서 레이어에 출력되는 커서는 상위 레이어에 표시된 컨텐츠 또는 커서 등에 의해 경우에 따라 가려질 수 있다. 이 경우 반투명/불투명/투명/ 기타 기호 등을 사용하여 하단 레이어에서의 커서 위치를 표시하거나 또는 표시하지 않을 수 있다. 예를 들어, 도 3의 커서 A 레이어(320)에 표시된 커서는, 컨텐츠 B 레이어 (330)에 표시된 컨텐츠에 의하여 가려져서 투명하게 표시되거나 표시되지 않을 수 있다.The cursor output to the cursor layer other than the uppermost cursor layer may be hidden in some cases by the content or the cursor displayed on the upper layer. In this case, semi-transparent / opaque / transparent / other symbols can be used to indicate the cursor position on the bottom layer or not. For example, the cursor displayed on the cursor A layer 320 of FIG. 3 may be hidden or hidden due to the content displayed on the content B layer 330.

도 4a는 본 발명의 다른 실시예에 의한 레이어의 구성을 도시한 도면이다.4A is a diagram showing the configuration of a layer according to another embodiment of the present invention.

제어 오브젝트 레이어는 대응하는 컨텐츠 레이어와 대응하는 커서 레이어 사이에 위치한다. 구체적으로, 도 4a에 도시된 바와 같이, 제어 오브젝트가 표시된 제어 오브젝트 레이어(Layer #2)(420)는 대응하는 TV 영상이 표시된 컨텐츠 레이어(layer #1)(410)와 대응하는 커서가 표시된 커서 레이어(Layer #3)(430)사이에 위치한다.The control object layer is located between the corresponding content layer and the corresponding cursor layer. Specifically, as shown in FIG. 4A, the control object layer (Layer # 2) 420 on which the control object is displayed is a cursor on which the cursor corresponding to the content layer (layer # 1) 410 on which the corresponding TV image is displayed is displayed. Located between layers (Layer # 3) 430.

이 경우, 커서 레이어(430)는 최상단에, 제어 오브젝트 레이어(420)는 중간에, 컨텐츠 레이어(410)는 최하단에 위치한다. 즉, 레이어의 숫자가 높을수록 상위 레이어에 해당한다. In this case, the cursor layer 430 is at the top, the control object layer 420 is at the middle, and the content layer 410 is at the bottom. That is, the higher the number of layers, the higher the layer.

사용자는 제어 오브젝트 레이어(420)에 표시된 제어 오브젝트를 이용하여 컨텐츠 레이어(410)에 표시된 컨텐츠와 관련된 소정 기능을 제어할 수 있다. 구체적으로, 커서 레이어(430)에 표시된 커서를 이용하여 제어 오브젝트를 제어함으로써, 컨텐츠의 소정 기능을 제어할 수 있다.The user may control a predetermined function related to the content displayed on the content layer 410 by using the control object displayed on the control object layer 420. Specifically, by controlling the control object using a cursor displayed on the cursor layer 430, a predetermined function of the content may be controlled.

한편, 변형된 실시예에 의하면, 제어 오브젝트 레이어가 별도로 존재하지 않고, 제어 오브젝트가 컨텐츠 레이어에 포함될 수 있다. 이 경우, 사용자는 커서를 이용하여 커서에 대응되는 컨텐츠 레이어에 표시된 제어 오브젝트를 직접 실행시킬 수 있다. 예를 들어, 화면 제어 UI가 게임 화면에 포함된 경우, 사용자는 커서를 이용하여 컨텐츠 레이어에 표시된 제어 오브젝트를 직접 제어할 수도 있다.Meanwhile, according to the modified embodiment, the control object layer does not exist separately, and the control object may be included in the content layer. In this case, the user may directly execute the control object displayed on the content layer corresponding to the cursor by using the cursor. For example, when the screen control UI is included in the game screen, the user may directly control the control object displayed on the content layer by using the cursor.

도 4b는 도 4a의 경우 표시되는 화면을 도시한 도면이다.FIG. 4B is a diagram illustrating a screen displayed in the case of FIG. 4A.

만일 사용자가 포인팅 디바이스 A를 이용하여 채널 및 볼륨을 제어하는 등의 조작을 하면서 TV를 시청하고 있다면, 도 4b에 도시된 바와 같이 TV 화면(415)상에는 포인팅 디바이스 A에 대응하는 커서 A(440)와 볼륨 조절을 수행하는 제어 오브젝트 VOL(450) 및 채널 변경을 수행하는 제어 오브젝트 CH(460)가 디스플레이 된다.If the user is watching TV while operating the channel and the volume by using the pointing device A, the cursor A 440 corresponding to the pointing device A is displayed on the TV screen 415 as shown in FIG. 4B. And a control object VOL 450 that performs volume adjustment and a control object CH 460 that performs channel change.

사용자가 포인팅 디바이스 A를 이용하여 커서 A(440)를 조작하는 경우, 예를 들어 포인팅 디바이스 A에 존재하는 버튼이나 터치 패드 등을 이용하여 포인팅 동작을 수행하는 경우, 제어부(130)는 커서 A(440)가 위치한 커서 레이어(430)상의 2차원 좌표(x, y)를 인식한다. 이 경우, 제어부(130)는 제어 오브젝트 레이어(420)상에 존재하는 제어 오브젝트(예를 들어, VOL(450), CH(460)) 중 인식한 커서 A(440)의 2차원 좌표(x, y)에 대응되는 제어 오브젝트를 실행시킨다.When the user manipulates the cursor A 440 using the pointing device A, for example, when the user performs a pointing operation using a button or a touch pad existing in the pointing device A, the controller 130 may use the cursor A ( It recognizes two-dimensional coordinates (x, y) on the cursor layer 430 where the 440 is located. In this case, the controller 130 may control the two-dimensional coordinates (x,) of the cursor A 440 recognized among the control objects (for example, the VOL 450 and the CH 460) existing on the control object layer 420. The control object corresponding to y) is executed.

도 5a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이다.5A is a diagram showing the configuration of a layer according to another embodiment of the present invention.

도 5a의 경우, 포인팅 디바이스 A 와 포인팅 디바이스 B가 영상처리장치(100)에 연결되어 있다. 예를 들어, 포인팅 디바이스 A에 대응하는 커서 A(580)는 layer #3 (530)에 표시되고, 포인팅 디바이스 B에 대응하는 커서 B(590)는 layer #5(550)에 표시될 수 있다. In the case of FIG. 5A, the pointing device A and the pointing device B are connected to the image processing apparatus 100. For example, cursor A 580 corresponding to pointing device A may be displayed in layer # 3 530, and cursor B 590 corresponding to pointing device B may be displayed in layer # 5 550.

그러나, Layer #5(550)에 대응하는 컨텐츠 레이어(540)에 아직 컨텐츠가 표시되지 않은 상태이다. However, content is not yet displayed in the content layer 540 corresponding to Layer # 5 550.

예를 들어, 사용자 A가 포인팅 디바이스 A를 이용하여 방송 화면을 조작하고 시청하는 중에, 사용자 B가 포인팅 디바이스 B를 이용하여 게임을 실행시킬 수 있다. 기존 포인팅 디바이스 A로 제어되는 영상처리장치(100)에 사용자 B가 포인팅 디바이스 B를 새롭게 연결하는 경우, 기존의 커서 A(580)가 위치하는 Layer #3(530) 보다 상단에 위치하는 layer #5(550)에, 포인팅 디바이스 B에 대응하는 커서 B(590)가 표시된다. 이후 Layer #4(540)에는 게임 컨텐츠가 로딩되어 표시될 것이지만, 현재 Layer #4(540)에는 아무것도 표시되지 않은 상태이다. 이 경우, 게임 컨텐츠가 로딩되어 표시되기 전까지는 커서 B(590)에 대응하는 제어 오브젝트 레이어 또는 컨텐츠 레이어에 표시된 컨텐츠가 없기 때문에, 현재 커서 B(590)의 제어 대상은 없다. 따라서, 커서 B(590)는 보다 하단에 위치하는 레이어를 탐색하여, Layer #2(520)에 존재하는 제어 오브젝트 또는 Layer #1(510)에 표시된 방송 영상을 조작할 수 있다.For example, while the user A manipulates and watches the broadcast screen using the pointing device A, the user B may execute the game using the pointing device B. When the user B newly connects the pointing device B to the image processing apparatus 100 controlled by the existing pointing device A, the layer # 5 located above the layer # 3 530 where the existing cursor A 580 is located. At 550, cursor B 590 corresponding to pointing device B is displayed. Thereafter, game content is loaded and displayed in Layer # 4 540, but nothing is currently displayed in Layer # 4 540. In this case, since there is no content displayed in the control object layer or the content layer corresponding to the cursor B 590 until the game content is loaded and displayed, there is currently no control object of the cursor B 590. Accordingly, the cursor B 590 may search for a layer located at a lower level and manipulate a control object existing in the layer # 2 520 or a broadcast image displayed in the layer # 1 510.

Layer #4(540)에 대응하는 커서 B(590)를 사용하여 Layer #2(520)에 표시된 제어 오브젝트를 제어하는 경우, 영상처리장치(100)는 Layer #5(550) 상에 표시된 커서 B의 좌표(x, y)에 대응하는 Layer #2(520)의 제어 오브젝트를 실행하게 된다. 만일, 도 5b에 도시된 바와 같이 사용자가 커서 B(590)를 이용하여 GAME(564)을 선택함으로써 게임을 실행하게 되면, 게임 컨텐츠가 로딩되어 게임 화면이 표시된다. 이 경우, 게임 화면은 Layer #5(550)에 표시되는 커서 B(590)에 의하여 제어되기 위하여, Layer #5(550)에 대응하는 컨텐츠 레이어 또는 제어 오브젝트 레이어에 표시되게 된다. 도 5a에서는 게임 화면이 Layer #5(550)의 하단, 즉 Layer #4(540)에 표시될 것이다.When the control object displayed on the layer # 2 520 is controlled using the cursor B 590 corresponding to the layer # 4 540, the image processing apparatus 100 may display the cursor B displayed on the layer # 5 550. The control object of the layer # 2 520 corresponding to the coordinates (x, y) is executed. If the user executes the game by selecting the GAME 564 using the cursor B 590 as shown in FIG. 5B, the game content is loaded and the game screen is displayed. In this case, the game screen is displayed in the content layer or the control object layer corresponding to the layer # 5 550 in order to be controlled by the cursor B 590 displayed in the layer # 5 550. In FIG. 5A, the game screen is displayed at the bottom of the layer # 5 550, that is, the layer # 4 540.

본 실시예에서, 커서 A(580)는 Layer #3(530)의 2차원 공간을 모두 움직일 수 있지만, 커서 B(590)가 Layer #5(550)의 2차원 공간에서 움직일 수 있는 범위는 Layer #4(540)에서 실제 컨텐츠가 위치하고 있는 좌표만큼의 공간으로 한정할 수 있다. 이 경우, 커서의 조작면에서 편리하다. 즉, 상위 컨텐츠 레이어에 위치한 컨텐츠의 2차원 공간에서의 크기가 하위 컨텐츠 레이어에 위치한 컨텐츠보다 작을 경우에는, 상위 커서가 움직일 수 있는 공간을 대응하는 컨텐츠의 크기만큼으로 제한하는 것이 조작 측면에서 보다 편리할 수 있다.In this embodiment, cursor A 580 can move all of the two-dimensional space of Layer # 3 530, but the range within which cursor B 590 can move in the two-dimensional space of Layer # 5 550 is Layer. In # 4 (540) it can be limited to the space as much as the coordinates where the actual content is located. In this case, it is convenient in terms of the operation of the cursor. That is, when the size of the content located in the upper content layer is smaller than the content located in the lower content layer, it is more convenient in terms of operation to limit the space where the upper cursor can move to the size of the corresponding content. can do.

한편, Layer #3(530)에 표시된 커서 A(580)가 Layer #4(540)에 표시된 컨텐츠 영역 내에 위치할 수 있다. 예를 들어, 커서 A(580)가 Layer #1(510)에 표시된 방송 화면과 Layer #4(540)에 표시된 게임 화면이 겹쳐진 영역에 존재할 수 있다. 이 경우, 커서 A(580)는 Layer #1(510)에 대응하는 커서 레이어(530)에 위치하고 있으므로, Layer #4(540)에 표시된 게임 화면을 제어할 수는 없다. 이 경우, 커서 A(580)를 상위 컨텐츠 레이어인 게임 화면과 반투명으로 혼합하여 표시하거나, 커서 A(580) 대신 특수한 기호나 형태로 표시되는 의사 커서를 출력할 수 있다. 사용자는 이로부터, 커서 A(580)가 어떤 레이어에 위치하는지 쉽게 알 수 있다. 그러나, 상기 의사 커서는 하위 레이어의 커서가 상위 레이어에 영상으로 표시되는 것으로서, 실제 커서는 아니다. 따라서, 의사 커서를 이용하여 상위 레이어에 표시된 컨텐츠 또는 제어 오브젝트를 조작하더라도, 선택 또는 실행되지 않는다.Meanwhile, the cursor A 580 displayed in the layer # 3 530 may be located in the content area displayed in the layer # 4 540. For example, the cursor A 580 may exist in a region where the broadcast screen displayed on the layer # 1 510 and the game screen displayed on the layer # 4 540 overlap each other. In this case, since the cursor A 580 is located in the cursor layer 530 corresponding to the layer # 1 510, the cursor A 580 cannot control the game screen displayed in the layer # 4 540. In this case, the cursor A 580 may be displayed by being mixed with the game screen, which is the upper content layer, in a translucent manner, or a pseudo cursor displayed in a special symbol or form may be output instead of the cursor A 580. The user can easily know from which layer the cursor A 580 is located. However, the pseudo cursor is a cursor of the lower layer displayed as an image on the upper layer, and is not an actual cursor. Therefore, even if the pseudo cursor is used to manipulate the content or the control object displayed on the upper layer, the selection or execution is not performed.

도 5b는 도 5a의 경우 표시되는 화면을 도시한 도면이다.FIG. 5B is a diagram illustrating a screen displayed in the case of FIG. 5A.

Layer #4(540)에 게임 화면이 아직 표시되지 않은 상태이므로, 하나의 화면 즉, 방송 화면(515)만이 표시되어 있다. 또한, 방송 화면(515)에서 수행되는 소정 기능을 수행하는 제어 오브젝트(즉, TV(562), GAME(564), DVD(566), VOL(572), CH(574)), 커서 A(580) 및 커서 B(590)가 방송 화면(515) 상에 표시된다.Since the game screen is not yet displayed on the layer # 4 540, only one screen, that is, the broadcast screen 515 is displayed. In addition, a control object (ie, TV 562, GAME 564, DVD 566, VOL 572, CH 574) that performs a predetermined function performed on the broadcast screen 515, and cursor A 580. And cursor B 590 are displayed on the broadcast screen 515.

도 6a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 6b는 도 6a의 경우 표시되는 화면을 도시한 도면이다.FIG. 6A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 6B is a diagram illustrating a screen displayed in the case of FIG. 6A.

도 5a에 도시된 레이어 상태에서 게임 컨텐츠가 로딩되면, 도 6a에 도시된 바와 같이 컨텐츠 레이어(Layer #4)(640)에 게임 화면이 표시될 수 있다. 즉, 게임 화면은 커서 B(690)가 표시되는 Layer #5(650)에 대응하는 Layer #4(640)에 표시된다.When game content is loaded in the layer state illustrated in FIG. 5A, a game screen may be displayed on the content layer (Layer # 4) 640 as illustrated in FIG. 6A. That is, the game screen is displayed in Layer # 4 640 corresponding to Layer # 5 650 in which cursor B 690 is displayed.

이 경우, 사용자는 도 6b에 도시된 바와 같이, 커서 B(690)를 이용하여 게임 화면(670)을 제어할 수 있다. 또한, 커서 A(680)를 사용하여 방송 화면(615) 또는 제어 오브젝트 VOL(662) 및 제어 오브젝트 CH(664)를 제어할 수 있다.In this case, as illustrated in FIG. 6B, the user may control the game screen 670 using the cursor B 690. In addition, the broadcast screen 615 or the control object VOL 662 and the control object CH 664 may be controlled using the cursor A 680.

도 7a는 본 발명의 또 다른 실시예에 의한 레이어의 구성을 도시한 도면이며, 도 7b는 도 7a의 경우 표시되는 화면을 도시한 도면이다.FIG. 7A is a diagram illustrating a layer configuration according to another embodiment of the present invention, and FIG. 7B is a diagram illustrating a screen displayed in the case of FIG. 7A.

사용자는 Layer #3(740)에 위치한 커서 A(770)를 이용하여, 대응되는 Layer #1(710)에 표시된 방송 화면(715)이 아닌 게임 화면(760)을 제어할 수도 있다. The user may control the game screen 760 instead of the broadcast screen 715 displayed on the corresponding layer # 1 710 by using the cursor A 770 located in the layer # 3 740.

도 6a에서는 커서 B(690)를 이용하여 게임 화면(670)을 제어한다. 따라서, 게임 화면(670)은 커서 B(690)가 표시되는 Layer #5(650)에 대응하는 Layer #4(640)에 표시된다.In FIG. 6A, the game screen 670 is controlled using the cursor B 690. Accordingly, the game screen 670 is displayed in the layer # 4 640 corresponding to the layer # 5 650 in which the cursor B 690 is displayed.

그러나, 본 실시예에서는 커서 A(770)를 이용하여 게임 화면(760)을 제어하게 되므로, 게임 화면(760)은 도 7a에 도시된 것처럼 Layer #3(740)과 Layer #2(720)의 사이인 Layer #2.5(730)에 로딩될 수 있다. 따라서, 특정 커서 레이어의 커서로 새로운 컨텐츠 레이어를 제어하고자 하는 경우, 생성되는 새로운 컨텐츠 레이어를 특정 커서 레이어의 하단에 위치하게 할 수 있다. 또한 이 경우 특정 커서 레이어의 하단에 동시에 위치하는 제어 오브젝트와 겹칠 경우에는 보다 상위의 컨텐츠 레이어의 제어 오브젝트를 실행시킬 수 있다. However, in the present embodiment, since the game screen 760 is controlled using the cursor A 770, the game screen 760 is divided into the layers # 3 740 and the layer # 2 720 as shown in FIG. 7A. It can be loaded in the layer # 2.5 (730). Therefore, when a new content layer is to be controlled by a cursor of a specific cursor layer, the generated new content layer may be positioned below the specific cursor layer. In this case, when the control object overlaps the control object located at the bottom of the specific cursor layer, the control object of the higher content layer can be executed.

이 경우, 사용자는 도 7b에 도시된 바와 같이, 커서 A(770)를 이용하여 게임 화면(760)을 제어할 수 있다.In this case, as illustrated in FIG. 7B, the user may control the game screen 760 using the cursor A 770.

이하에서는, 도 8a 내지 도 8d를 참조하여, 본 발명의 제2실시예에 의한 영상처리장치(100)의 제어 방법을 설명한다.Hereinafter, a method of controlling the image processing apparatus 100 according to the second embodiment of the present invention will be described with reference to FIGS. 8A to 8D.

본 발명의 제2실시예에 의한 영상처리장치(100)의 제어 방법에 의하면, 제1화면과 제2화면이 겹쳐지지 않게 표시될 수 있다. 구체적으로, 도 8a 내지 도 8d에 도시된 바와 같이, 게임 화면(810)과 방송 화면(820)은 독립적으로 표시될 수 있다. 이 경우, 게임 화면(810)과 방송 화면(820) 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 이상 표시할 수 있다. 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응될 수 있다.According to the control method of the image processing apparatus 100 according to the second embodiment of the present invention, the first screen and the second screen may be displayed so as not to overlap. Specifically, as shown in FIGS. 8A to 8D, the game screen 810 and the broadcast screen 820 may be displayed independently. In this case, at least one pointing cursor for controlling an application may be displayed on at least one of the game screen 810 and the broadcast screen 820. The at least one pointing cursor may correspond to each of the at least one pointing device.

도 8a는 하나의 포인팅 커서가 표시되는 경우를 도시한 도면이다.8A is a diagram illustrating a case in which one pointing cursor is displayed.

포인팅 커서(831)는 포인팅 디바이스 A(830)에 대응된다.The pointing cursor 831 corresponds to the pointing device A 830.

만일, 포인팅 디바이스 A(830)가 포인팅 커서(831)의 위치에 따라, 게임 화면(810) 또는 방송 화면(820)에 할당된다면, 포인팅 커서(831)는 아래에 표시되는 게임 화면(810) 또는 방송 화면(820)을 제어할 수 있다.If the pointing device A 830 is allocated to the game screen 810 or the broadcast screen 820 according to the position of the pointing cursor 831, the pointing cursor 831 may be the game screen 810 displayed below or The broadcast screen 820 may be controlled.

도 8a에서, 포인팅 커서(831)의 아래에 표시되는 화면은 방송 화면(820)이다. 따라서, 포인팅 커서(831)는 방송 화면(820)을 제어하게 된다.In FIG. 8A, a screen displayed below the pointing cursor 831 is a broadcast screen 820. Thus, the pointing cursor 831 controls the broadcast screen 820.

도 8b는 포인팅 커서가 어플리케이션 간을 이동하며 형태가 변경되는 것을 도시한 도면이다.8B is a diagram illustrating that a pointing cursor moves between applications to change a shape.

포인팅 커서(832, 832')는 게임 화면(810)과 방송 화면(820)간을 이동할 수 있다. 구체적으로, 포인팅 커서(832, 832')는, 게임 화면(810) 위, 게임 화면(810) 아래, 방송 화면(820) 위 및 방송 화면(820) 아래 중 적어도 하나의 위치로 이동할 수 있다. 나아가, 포인팅 커서(832, 832')가 이동하는 경우, 포인팅 커서(832, 832')의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경될 수 있다.The pointing cursors 832 and 832 ′ may move between the game screen 810 and the broadcast screen 820. In detail, the pointing cursors 832 and 832 ′ may move to at least one of a position above the game screen 810, below the game screen 810, above the broadcast screen 820, and below the broadcast screen 820. In addition, when the pointing cursors 832 and 832 'are moved, at least one of the transparency, shape, contrast, and color of the pointing cursors 832 and 832' may be changed.

만일, 포인팅 디바이스 A(830)가 포인팅 커서(831)의 위치에 따라, 게임 화면(810) 또는 방송 화면(820)에 할당된다면, 도 8b에서 포인팅 커서(832)가 방송 화면(820)위에 위치하는 경우 포인팅 커서(832)는 방송 화면(820)을 제어할 수 있다. If the pointing device A 830 is allocated to the game screen 810 or the broadcast screen 820 according to the position of the pointing cursor 831, the pointing cursor 832 is positioned on the broadcast screen 820 in FIG. 8B. In this case, the pointing cursor 832 may control the broadcast screen 820.

그러나, 포인팅 커서(832')가 게임 화면(810) 아래로 이동하는 경우, 포인팅 커서(832')는 게임 화면(810)을 제어할 수 없다. 또한, 이 경우, 게임 화면(810)에 의해 가려져 포인팅 커서(832')는 투명하게 표시될 수 있다.However, when the pointing cursor 832 ′ moves below the game screen 810, the pointing cursor 832 ′ cannot control the game screen 810. In this case, the pointing cursor 832 ′ may be transparently hidden by the game screen 810.

도 8c는 복수 개의 어플리케이션이 복수의 포인팅 디바이스에 의하여 각각 제어되는 경우를 도시한 도면이다.8C is a diagram illustrating a case where a plurality of applications are respectively controlled by a plurality of pointing devices.

포인팅 커서 A(833)는 포인팅 디바이스 A(830)에 대응되며, 포인팅 커서 B(841)는 포인팅 디바이스 B(840)에 대응된다. Pointing cursor A 833 corresponds to pointing device A 830, and pointing cursor B 841 corresponds to pointing device B 840.

만일, 포인팅 디바이스 A(830)가 게임 화면(810)에 할당되고 포인팅 디바이스 B(840)가 방송 화면(820)에 할당된다면, 포인팅 커서 A(833)는 게임 화면(810)을 제어하고 포인팅 커서 B(841)는 방송 화면(820)을 제어할 수 있다. 도 8c에서, 포인팅 커서 A(833)와 포인팅 커서 B(841)는 각각 제어 대상인 게임 화면(810) 및 방송 화면(820) 영역 내에 위치한다. 따라서, 포인팅 커서 A(833)와 포인팅 커서 B(841)는 각각 게임 화면(810) 및 방송 화면(820)을 제어할 수 있다.If the pointing device A 830 is assigned to the game screen 810 and the pointing device B 840 is assigned to the broadcast screen 820, the pointing cursor A 833 controls the game screen 810 and points to the pointing cursor. The B 841 may control the broadcast screen 820. In FIG. 8C, the pointing cursor A 833 and the pointing cursor B 841 are positioned in the game screen 810 and the broadcast screen 820 which are the control targets, respectively. Accordingly, the pointing cursor A 833 and the pointing cursor B 841 may control the game screen 810 and the broadcast screen 820, respectively.

반대로, 포인팅 디바이스 B(840)가 게임 화면(810)에 할당되고 포인팅 디바이스 A(830)가 방송 화면(820)에 할당된다면, 포인팅 커서 B(841)는 게임 화면(810)을 제어하고 포인팅 커서 A(833)는 방송 화면(820)을 제어할 수 있다. 도 8c에서, 포인팅 커서 A(833)는 게임 화면(810) 위에 위치한다. 즉, 제어 대상인 방송 화면(820) 영역 밖에 존재하므로, 포인팅 커서 A(833)는 방송 화면(820)을 제어할 수 없다. 또한, 포인팅 커서 B(841)는 방송 화면(820) 위에 위치한다. 즉, 제어 대상인 게임 화면(810) 영역 밖에 존재하므로, 포인팅 커서 B(841)는 게임 화면(810)을 제어할 수 없다.Conversely, if pointing device B 840 is assigned to game screen 810 and pointing device A 830 is assigned to broadcast screen 820, pointing cursor B 841 controls game screen 810 and points the cursor. A 833 may control the broadcast screen 820. In FIG. 8C, pointing cursor A 833 is positioned above game screen 810. That is, since it exists outside the area of the broadcast screen 820 to be controlled, the pointing cursor A 833 may not control the broadcast screen 820. In addition, the pointing cursor B 841 is positioned on the broadcast screen 820. That is, since it exists outside the area of the game screen 810 to be controlled, the pointing cursor B 841 cannot control the game screen 810.

도 8d는 제어 대상을 벗어난 경우 포인팅 커서의 형태가 변경되는 것을 도시한 도면이다.8D is a diagram illustrating that the shape of the pointing cursor is changed when it is out of the control object.

만일, 포인팅 디바이스 A(830)가 게임 화면(810)에 할당되고 포인팅 디바이스 B(840)가 방송 화면(820)에 할당된다면, 포인팅 커서 A(834)는 제어 대상인 게임 화면(810) 영역 내에서 이동할 수 있다. 또한, 포인팅 커서 B(842)는 제어 대상인 방송 화면(820) 영역 내에서 이동할 수 있다. 이 경우, 포인팅 커서 A(834)와 포인팅 커서 B(842)는 이동 가능한 영역을 벗어나게 되면, 경계가 점선 형태로 변경될 수 있다. 도 8d를 참조하면, 게임 화면(810) 영역을 벗어난 포인팅 커서 A(834)와 방송 화면(820) 영역을 벗어난 포인팅 커서 B(842)는 경계가 점선으로 표시된다.If the pointing device A 830 is assigned to the game screen 810 and the pointing device B 840 is assigned to the broadcast screen 820, the pointing cursor A 834 is within the control area of the game screen 810. I can move it. In addition, the pointing cursor B 842 may move within the area of the broadcast screen 820 that is the control target. in this case, When the pointing cursor A 834 and the pointing cursor B 842 move out of the movable area, the boundary may be changed to a dotted line shape. Referring to FIG. 8D, the pointing cursor A 834 outside the game screen 810 area and the pointing cursor B 842 outside the broadcast screen 820 area are indicated by dotted lines.

도 9는 본 발명의 제1실시예에 의한 영상처리장치의 제어 과정을 도시한 도면이다. 9 is a diagram illustrating a control process of an image processing apparatus according to a first embodiment of the present invention.

영상처리장치(100)는 제1어플리케이션에 대응하는 제1화면을 표시한다(S901).The image processing apparatus 100 displays a first screen corresponding to the first application (S901).

영상처리장치(100)는 제2어플리케이션에 대응하는 제2화면을 제1화면 위에 겹쳐서 표시한다(S902).The image processing apparatus 100 displays the second screen corresponding to the second application overlying the first screen (S902).

영상처리장치(100)는 제1어플리케이션을 제어하는 경우, 제2화면 중 제1화면과 겹쳐진 부분을 표시한다(S903).When the image processing apparatus 100 controls the first application, the image processing apparatus 100 displays a portion of the second screen overlapping the first screen (S903).

도 10은 본 발명의 제2실시예에 의한 영상처리장치의 제어 과정을 도시한 도면이다.10 is a diagram illustrating a control process of an image processing apparatus according to a second embodiment of the present invention.

영상처리장치(100)는 제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않도록 표시한다(S1001).The image processing apparatus 100 displays the first screen corresponding to the first application and the second screen corresponding to the second application so as not to overlap each other (S1001).

영상처리장치(100)는 제1어플리케이션 및 제2어플리케이션 중 적어도 하나를 제어한다(S1002).The image processing apparatus 100 controls at least one of the first application and the second application (S1002).

영상처리장치(100)는 제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있도록 표시한다(S1003).The image processing apparatus 100 displays the user so that the user can recognize when the application to be controlled is changed (S1003).

비록 본 발명의 몇몇 실시예들이 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 본 실시예를 변형할 수 있음을 알 수 있을 것이다. 발명의 범위는 첨부된 청구항과 그 균등물에 의해 정해질 것이다.Although some embodiments of the invention have been shown and described, it will be apparent to those skilled in the art that modifications may be made to the embodiment without departing from the spirit or spirit of the invention. . It is intended that the scope of the invention be defined by the claims appended hereto and their equivalents.

100: 영상처리장치 110:　영상 처리부
120: 사용자 입력부 130: 제어부
150: 포인팅 디바이스100: image processing apparatus 110: image processing unit
120: user input unit 130: control unit
150: pointing device

Claims (44)

영상처리장치의 제어 방법에 있어서,
제1어플리케이션에 대응하는 제1화면을 표시하는 단계;
제2어플리케이션에 대응하는 제2화면을 상기 제1화면 위에 겹쳐서 표시하는 단계; 및
상기 제1어플리케이션을 제어하는 경우 상기 제2화면 중 상기 제1화면과 겹쳐진 부분을 표시하는 단계를 포함하는 영상처리장치의 제어 방법.In the control method of the image processing apparatus,
Displaying a first screen corresponding to the first application;
Displaying a second screen corresponding to a second application overlying the first screen; And
And controlling the first application to display a portion overlapping with the first screen in the second screen. 제1항에 있어서,
상기 제1화면 및 상기 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하는 영상처리장치의 제어 방법.The method of claim 1,
And at least one pointing cursor for controlling an application on at least one of the first screen and the second screen. 제2항에 있어서,
상기 포인팅 커서는, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어하는 영상처리장치의 제어 방법.The method of claim 2,
And the pointing cursor controls an application corresponding to the closest screen among the first screen and the second screen, which are superimposed below. 제2항에 있어서,
상기 포인팅 커서는, 상기 제1화면 아래, 상기 제1화면 위, 상기 제1화면과 상기 제2화면 사이 및 상기 제2화면 위 중 적어도 하나의 위치로 이동 가능한 영상처리장치의 제어 방법.The method of claim 2,
And the pointing cursor is movable to at least one position below the first screen, above the first screen, between the first screen and the second screen, and above the second screen. 제4항에 있어서,
상기 포인팅 커서가 이동하는 경우, 상기 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치의 제어 방법.The method of claim 4, wherein
And when the pointing cursor moves, at least one of transparency, shape, contrast, and color of the pointing cursor is changed. 제2항에 있어서,
상기 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응되는 영상처리장치의 제어 방법.The method of claim 2,
And the at least one pointing cursor corresponds to each of the at least one pointing device. 제2항에 있어서,
상기 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 상기 제1어플리케이션 및 상기 제2어플리케이션을 제어하는 영상처리장치의 제어 방법.The method of claim 2,
The pointing cursor includes a first pointing cursor and a second pointing cursor.
And the first pointing cursor and the second pointing cursor control the first application and the second application, respectively. 제7항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면이 표시되지 않은 경우, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어하는 영상처리장치의 제어 방법. The method of claim 7, wherein
When the screen corresponding to the application to be controlled is not displayed, the first pointing cursor and the second pointing cursor correspond to an application corresponding to the closest screen among the first screen and the second screen that are overlapped below. Control method of the image processing apparatus for controlling. 제8항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션이 아닌 다른 어플리케이션을 제어하는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치의 제어 방법.The method of claim 8,
And the first pointing cursor and the second pointing cursor change at least one of transparency, shape, contrast, and color when controlling an application other than an application to be controlled. 제7항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능한 영상처리장치의 제어 방법.The method of claim 7, wherein
And the first pointing cursor and the second pointing cursor are movable within a screen area corresponding to an application to be controlled. 제10항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치의 제어 방법.The method of claim 10,
And at least one of transparency, shape, contrast, and color is changed when the first pointing cursor and the second pointing cursor leave the movable area. 제7항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 제1포인팅 디바이스 및 제2포인팅 디바이스에 대응되는 영상처리장치의 제어 방법.The method of claim 7, wherein
And the first pointing cursor and the second pointing cursor correspond to a first pointing device and a second pointing device, respectively. 영상처리장치의 제어 방법에 있어서,
제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않도록 표시하는 단계;
상기 제1어플리케이션 및 상기 제2어플리케이션 중 적어도 하나를 제어하는 단계; 및
제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있도록 표시하는 단계를 포함하는 영상처리장치의 제어 방법.In the control method of the image processing apparatus,
Displaying the first screen corresponding to the first application and the second screen corresponding to the second application so as not to overlap each other;
Controlling at least one of the first application and the second application; And
And displaying the image to be recognized by the user when an application to be controlled changes. 제13항에 있어서,
상기 제1화면 및 상기 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하는 영상처리장치의 제어 방법.The method of claim 13,
And at least one pointing cursor for controlling an application on at least one of the first screen and the second screen. 제14항에 있어서,
상기 포인팅 커서는, 아래에 표시되는 상기 제1화면 또는 상기 제2화면에 대응하는 어플리케이션을 제어하는 영상처리장치의 제어 방법.The method of claim 14,
And the pointing cursor controls an application corresponding to the first screen or the second screen displayed below. 제14항에 있어서,
상기 포인팅 커서는, 상기 제1화면 위, 상기 제1화면 아래, 상기 제2화면 위 및 상기 제2화면 아래 중 적어도 하나의 위치로 이동 가능한 영상처리장치의 제어 방법.The method of claim 14,
And the pointing cursor is movable to at least one of the position above the first screen, below the first screen, above the second screen, and below the second screen. 제16항에 있어서,
상기 포인팅 커서가 이동하는 경우, 상기 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치의 제어 방법.The method of claim 16,
And when the pointing cursor moves, at least one of transparency, shape, contrast, and color of the pointing cursor is changed. 제14항에 있어서,
상기 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응되는 영상처리장치의 제어 방법.The method of claim 14,
And the at least one pointing cursor corresponds to each of the at least one pointing device. 제14항에 있어서,
상기 적어도 하나의 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 상기 제1어플리케이션 및 상기 제2어플리케이션을 제어하는 영상처리장치의 제어 방법.The method of claim 14,
The at least one pointing cursor includes a first pointing cursor and a second pointing cursor,
And the first pointing cursor and the second pointing cursor control the first application and the second application, respectively. 제19항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능한 영상처리장치의 제어 방법.The method of claim 19,
And the first pointing cursor and the second pointing cursor are movable within a screen area corresponding to an application to be controlled. 제20항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치의 제어 방법.The method of claim 20,
And at least one of transparency, shape, contrast, and color is changed when the first pointing cursor and the second pointing cursor leave the movable area. 제19항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 제1포인팅 디바이스 및 제2포인팅 디바이스에 대응되는 영상처리장치의 제어 방법.The method of claim 19,
And the first pointing cursor and the second pointing cursor correspond to a first pointing device and a second pointing device, respectively. 영상처리장치에 있어서,
영상을 처리하여 표시하는 영상 처리부; 및
제1어플리케이션에 대응하는 제1화면 위에 제2어플리케이션에 대응하는 제2화면을 겹쳐서 표시하고, 상기 제1어플리케이션을 제어하는 경우 상기 제2화면 중 상기 제1화면과 겹쳐진 부분을 표시하도록, 상기 영상 처리부를 제어하는 제어부를 포함하는 영상처리장치.In the image processing apparatus,
An image processor which processes and displays an image; And
The image to display a second screen corresponding to the second application overlaid on the first screen corresponding to the first application, and to display a portion overlapping with the first screen of the second screen when controlling the first application; An image processing apparatus comprising a control unit for controlling the processing unit. 제23항에 있어서,
상기 제어부는, 상기 제1화면 및 상기 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하도록 상기 영상 처리부를 제어하는 영상처리장치.The method of claim 23, wherein
And the controller is configured to control the image processor to display at least one pointing cursor for controlling an application on at least one of the first screen and the second screen. 제24항에 있어서,
상기 포인팅 커서는, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어하는 영상처리장치.25. The method of claim 24,
And the pointing cursor controls an application corresponding to the closest screen among the first screen and the second screen, which are superimposed below. 제24항에 있어서,
상기 포인팅 커서는, 상기 제1화면 아래, 상기 제1화면 위, 상기 제1화면과 상기 제2화면 사이 및 상기 제2화면 위 중 적어도 하나의 위치로 이동 가능한 영상처리장치.25. The method of claim 24,
And the pointing cursor is movable to at least one position below the first screen, above the first screen, between the first screen and the second screen, and above the second screen. 제26항에 있어서,
상기 포인팅 커서가 이동하는 경우, 상기 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치.The method of claim 26,
And at least one of transparency, shape, contrast, and color of the pointing cursor is changed when the pointing cursor is moved. 제24항에 있어서,
상기 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응되는 영상처리장치.25. The method of claim 24,
The at least one pointing cursor corresponds to each of the at least one pointing device. 제24항에 있어서,
상기 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 상기 제1어플리케이션 및 상기 제2어플리케이션을 제어하는 영상처리장치.25. The method of claim 24,
The pointing cursor includes a first pointing cursor and a second pointing cursor.
And the first pointing cursor and the second pointing cursor control the first application and the second application, respectively. 제29항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면이 표시되지 않은 경우, 아래에 겹쳐서 표시되는 상기 제1화면 및 상기 제2화면 중 가장 인접한 화면에 대응하는 어플리케이션을 제어하는 영상처리장치.The method of claim 29,
When the screen corresponding to the application to be controlled is not displayed, the first pointing cursor and the second pointing cursor correspond to an application corresponding to the closest screen among the first screen and the second screen that are overlapped below. Image processing apparatus for controlling. 제30항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션이 아닌 다른 어플리케이션을 제어하는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치.The method of claim 30,
And the first pointing cursor and the second pointing cursor change at least one of transparency, shape, contrast, and color when controlling an application other than an application to be controlled. 제29항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능한 영상처리장치.The method of claim 29,
And the first pointing cursor and the second pointing cursor are movable within a screen area corresponding to an application to be controlled. 제32항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치.33. The method of claim 32,
And at least one of transparency, shape, contrast, and color is changed when the first pointing cursor and the second pointing cursor leave the movable area. 제29항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 제1포인팅 디바이스 및 제2포인팅 디바이스에 대응되는 영상처리장치.The method of claim 29,
And the first pointing cursor and the second pointing cursor correspond to a first pointing device and a second pointing device, respectively. 영상처리장치에 있어서,
영상을 처리하여 표시하는 영상 처리부; 및
제1어플리케이션에 대응하는 제1화면과 제2어플리케이션에 대응하는 제2화면을 겹쳐지지 않게 표시하도록 상기 영상 처리부를 제어하고, 상기 제1어플리케이션 및 상기 제2어플리케이션 중 적어도 하나를 제어하되, 제어 대상이 되는 어플리케이션이 변경되면 사용자가 인식할 수 있게 표시하도록 상기 영상 처리부를 제어하는 제어부를 포함하는 영상처리장치.In the image processing apparatus,
An image processor which processes and displays an image; And
Control the image processor to display the first screen corresponding to the first application and the second screen corresponding to the second application so as not to overlap each other, and control at least one of the first application and the second application; And a controller for controlling the image processor to be displayed so that the user can recognize when the application is changed. 제35항에 있어서,
상기 제어부는, 상기 제1화면 및 상기 제2화면 중 적어도 하나의 위에, 어플리케이션을 제어하기 위한 포인팅 커서를 적어도 하나 표시하도록 상기 영상 처리부를 제어하는 영상처리장치.36. The method of claim 35,
And the controller is configured to control the image processor to display at least one pointing cursor for controlling an application on at least one of the first screen and the second screen. 제36항에 있어서,
상기 포인팅 커서는, 아래에 표시되는 상기 제1화면 또는 상기 제2화면에 대응하는 어플리케이션을 제어하는 영상처리장치.The method of claim 36,
And the pointing cursor controls an application corresponding to the first screen or the second screen displayed below. 제36항에 있어서,
상기 포인팅 커서는, 상기 제1화면 위, 상기 제1화면 아래, 상기 제2화면 위 및 상기 제2화면 아래 중 적어도 하나의 위치로 이동 가능한 영상처리장치.The method of claim 36,
And the pointing cursor is movable to at least one of the position above the first screen, below the first screen, above the second screen, and below the second screen. 제38항에 있어서,
상기 포인팅 커서가 이동하는 경우, 상기 포인팅 커서의 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치.The method of claim 38,
And at least one of transparency, shape, contrast, and color of the pointing cursor is changed when the pointing cursor is moved. 제36항에 있어서,
상기 적어도 하나의 포인팅 커서는, 적어도 하나의 포인팅 디바이스 각각에 대응되는 영상처리장치.The method of claim 36,
The at least one pointing cursor corresponds to each of the at least one pointing device. 제36항에 있어서,
상기 적어도 하나의 포인팅 커서는 제1포인팅 커서와 제2포인팅 커서를 포함하며,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 상기 제1어플리케이션 및 상기 제2어플리케이션을 제어하는 영상처리장치.The method of claim 36,
The at least one pointing cursor includes a first pointing cursor and a second pointing cursor,
And the first pointing cursor and the second pointing cursor control the first application and the second application, respectively. 제41항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 제어 대상이 되는 어플리케이션에 대응하는 화면 영역 내에서 이동 가능한 영상처리장치.The method of claim 41, wherein
And the first pointing cursor and the second pointing cursor are movable within a screen area corresponding to an application to be controlled. 제42항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 이동 가능한 영역을 벗어나는 경우, 투명도, 모양, 명암 및 색상 중 적어도 하나가 변경되는 영상처리장치.The method of claim 42, wherein
And at least one of transparency, shape, contrast, and color is changed when the first pointing cursor and the second pointing cursor leave the movable area. 제41항에 있어서,
상기 제1포인팅 커서 및 상기 제2포인팅 커서는, 각각 제1포인팅 디바이스 및 제2포인팅 디바이스에 대응되는 영상처리장치.The method of claim 41, wherein
And the first pointing cursor and the second pointing cursor correspond to a first pointing device and a second pointing device, respectively.
KR1020100013520A 2009-09-04 2010-02-12 Image processing apparatus and controlling method of the same KR101661142B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP10172368A EP2299699A3 (en) 2009-09-04 2010-08-10 Image processing apparatus and controlling method of the same
US12/855,726 US8661365B2 (en) 2009-09-04 2010-08-13 Image processing apparatus and controlling method of the same
US14/100,816 US9612729B2 (en) 2009-09-04 2013-12-09 Image processing apparatus and controlling method of the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20090083338 2009-09-04
KR1020090083338 2009-09-04

Publications (2)

Publication Number Publication Date
KR20110025591A true KR20110025591A (en) 2011-03-10
KR101661142B1 KR101661142B1 (en) 2016-10-11

Family

ID=43933104

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100013520A KR101661142B1 (en) 2009-09-04 2010-02-12 Image processing apparatus and controlling method of the same

Country Status (1)

Country Link
KR (1) KR101661142B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101990373B1 (en) * 2017-09-29 2019-06-20 클릭트 주식회사 Method and program for providing virtual reality image
KR102192153B1 (en) * 2019-06-10 2020-12-16 클릭트 주식회사 Method and program for providing virtual reality image
KR102247323B1 (en) 2020-04-27 2021-05-03 주식회사 해커스홀딩스 Method, apparatus and system for controlling offering non-face-to-face video survey service

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2557359B2 (en) * 1986-12-26 1996-11-27 株式会社東芝 Information processing device
JPH10207682A (en) * 1997-01-17 1998-08-07 Fujitsu Ltd Picture display system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2557359B2 (en) * 1986-12-26 1996-11-27 株式会社東芝 Information processing device
JPH10207682A (en) * 1997-01-17 1998-08-07 Fujitsu Ltd Picture display system

Also Published As

Publication number Publication date
KR101661142B1 (en) 2016-10-11

Similar Documents

Publication Publication Date Title
US9612729B2 (en) Image processing apparatus and controlling method of the same
US8259077B2 (en) Electronic device for inputting user command 3-dimensionally and method for employing the same
US8386944B2 (en) Method for providing graphical user interface and electronic device using the same
US10942620B2 (en) Information processing apparatus, information processing method, program, and information processing system
KR101510013B1 (en) Multi handling system and method using touch pad
US8638315B2 (en) Virtual touch screen system
KR101087479B1 (en) Multi display device and method for controlling the same
US20130326421A1 (en) Method for displaying item in terminal and terminal using the same
US20140223490A1 (en) Apparatus and method for intuitive user interaction between multiple devices
US20100287501A1 (en) Image processing apparatus and method
US11435870B2 (en) Input/output controller and input/output control program
US20110314428A1 (en) Display apparatus and control method thereof
KR20130065317A (en) Apparatus and method for providing graphic user interface
JP2014029673A (en) Display device and method for controlling the same
US20130176223A1 (en) Display apparatus, user input apparatus, and control methods thereof
CN104216644A (en) System and method for mapping blocked area
KR20200136589A (en) Touch Keyboard with Multi-Function having Touch Sensor
EP2605527B1 (en) A method and system for mapping visual display screens to touch screens
KR101661142B1 (en) Image processing apparatus and controlling method of the same
US20100309133A1 (en) Adaptive keyboard
US20130021367A1 (en) Methods of controlling window display on an electronic device using combinations of event generators
US20160124606A1 (en) Display apparatus, system, and controlling method thereof
WO2014014278A1 (en) Touch user interface method and imaging apparatus
JP2011060166A (en) Portable terminal device
KR101424970B1 (en) Apparatus and method for controlling a display device that displays plural screens

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant