KR102108065B1 - Multimedia device and method for controlling the same - Google Patents

Multimedia device and method for controlling the same Download PDF

Info

Publication number
KR102108065B1
KR102108065B1 KR1020130102345A KR20130102345A KR102108065B1 KR 102108065 B1 KR102108065 B1 KR 102108065B1 KR 1020130102345 A KR1020130102345 A KR 1020130102345A KR 20130102345 A KR20130102345 A KR 20130102345A KR 102108065 B1 KR102108065 B1 KR 102108065B1
Authority
KR
South Korea
Prior art keywords
remote controller
gui data
external device
multimedia device
signal corresponding
Prior art date
Application number
KR1020130102345A
Other languages
Korean (ko)
Other versions
KR20150025124A (en
Inventor
전중민
윤희완
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130102345A priority Critical patent/KR102108065B1/en
Priority to US14/256,448 priority patent/US10063802B2/en
Priority to EP14001455.6A priority patent/EP2843959B1/en
Priority to CN201410195304.8A priority patent/CN104424790B/en
Publication of KR20150025124A publication Critical patent/KR20150025124A/en
Application granted granted Critical
Publication of KR102108065B1 publication Critical patent/KR102108065B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

멀티미디어 디바이스 및 이의 제어 방법이 개시된다.
본 발명의 일 실시예에 의한 멀티미디어 디바이스는 외부 디바이스를 연결하는 외부장치 인터페이스부와, 상기 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부와, 상기 외부장치 인터페이스부를 통해 상기 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부와, 리모트 컨트롤러부터 사용자 입력 신호를 수신하는 사용자 인터페이스부와, 제어부를 포함하고, 상기 제어부는, 상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이된 경우, 상기 사용자 입력 신호에 따라 상기 멀티미디어 디바이스의 기능을 실행하고, 상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 네트워크 인터페이스부를 통해 상기 사용자 입력 신호와 관련된 정보를 상기 외부 디바이스로 전송한다.Disclosed is a multimedia device and a method of controlling the same.
A multimedia device according to an embodiment of the present invention includes an external device interface unit connecting an external device, a network interface unit communicating with the external device through a network, and video data received from the external device through the external device interface unit And a display unit for displaying the first GUI data, a user interface unit for receiving a user input signal from a remote controller, and a control unit, wherein the control unit includes at least one of the video data and the first GUI data in the display unit. In addition, when the second GUI data related to the multimedia device is displayed, a function of the multimedia device is executed according to the user input signal, and the display unit includes at least one of the video data and the first GUI data. box And it transmits the second data when the GUI is not displayed, information related to the user input signals through the network interface unit of the multimedia device to the external device.

Description

멀티미디어 디바이스 및 이의 제어 방법{MULTIMEDIA DEVICE AND METHOD FOR CONTROLLING THE SAME}Multimedia device and its control method {MULTIMEDIA DEVICE AND METHOD FOR CONTROLLING THE SAME}

본 발명은 멀티미디어 디바이스 및 이의 제어 방법에 관한 것으로, 보다 상세하게는 하나의 리모트 컨트롤러를 사용하여 멀티미디어 디바이스 및 이에 연결된 외부 디바이스를 제어하는 기술에 관한 것이다.The present invention relates to a multimedia device and a control method thereof, and more particularly, to a technology for controlling a multimedia device and an external device connected thereto using one remote controller.

전자 기술의 발달에 따라, 점차 더 많은 종류의 전자 장치가 개발되어 보급되고 있다. 최근 보급되는 전자 장치들은 사용자의 편의를 위해 리모트 컨트롤러의 신호를 수신할 수 있는 기능을 구비한다. 이에 따라, 사용자는 리모트 컨트롤러를 이용하여 TV, 오디오, DVD 플레이어, 셋톱 박스(STB), BD(Blu-ray Disc) 플레이어, 홈 시어터 시스템(HTS) 등의 각종 전자 장치들을 제어할 수 있다.With the development of electronic technology, more and more types of electronic devices have been developed and spread. Recently popular electronic devices have a function of receiving a signal from a remote controller for user convenience. Accordingly, a user can control various electronic devices such as a TV, audio, DVD player, set-top box (STB), BD (Blu-ray Disc) player, and home theater system (HTS) using a remote controller.

한편, 최근 개발되고 있는 멀티미디어 디바이스(예를 들어, TV 등)는 인터넷 네트워크와 연결되어 다양한 정보들을 수신하는 기능을 탑재하고 있다. 이러한 멀티미디어 디바이스 및 이에 연결된 전자 장치(예를 들어, STB, DB 플레이어, HTS 등)를 제어하기 위해서는 디바이스의 수만큼 리모트 컨트롤러가 필요한 문제가 있다.Meanwhile, recently developed multimedia devices (for example, TVs) are equipped with a function of receiving various information in connection with an Internet network. In order to control such a multimedia device and an electronic device (for example, STB, DB player, HTS, etc.) connected thereto, there is a problem that a remote controller is required as many as the number of devices.

이러한 문제점을 해결하기 위하여, 하나의 리모트 컨트롤러를 사용하여 복수 개의 디바이스를 제어하기 위한 기술이 논의되고 있다. 그러나, 종래의 방식은, 각종 전자 장치들을 제어할 때마다 일일이 리모트 컨트롤러의 제어 모드를 변경해야 하는 문제점이 있다.In order to solve this problem, a technique for controlling a plurality of devices using one remote controller is being discussed. However, the conventional method has a problem in that it is necessary to change the control mode of the remote controller individually each time controlling various electronic devices.

본 발명의 일 실시예가 이루고자 하는 기술적 과제는, 멀티미디어 디바이스의 상태에 따라 리모트 컨트롤러의 제어권이 자동으로 변경되는 솔루션을 제공하고자 하는 것이다.The technical problem to be achieved by an embodiment of the present invention is to provide a solution in which the control right of the remote controller is automatically changed according to the state of the multimedia device.

또한, 본 발명의 다른 일 실시예가 이루고자 하는 기술적 과제는, 사용자 입력 신호의 조건에 따라 리모트 컨트롤러의 제어권을 멀티미디어 디바이스 및 외부 디바이스에 할당하는 솔루션을 제공하고자 하는 것이다.In addition, a technical problem to be achieved by another embodiment of the present invention is to provide a solution for allocating control rights of a remote controller to a multimedia device and an external device according to a condition of a user input signal.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems that are not mentioned will be clearly understood by those skilled in the art from the following description. Will be able to.

본 발명의 일 실시예에 의한 멀티미디어 디바이스는 외부 디바이스를 연결하는 외부장치 인터페이스부와, 상기 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부와, 상기 외부장치 인터페이스부를 통해 상기 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부와, 리모트 컨트롤러부터 사용자 입력 신호를 수신하는 사용자 인터페이스부와, 제어부를 포함하고, 상기 제어부는, 상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이된 경우, 상기 사용자 입력 신호에 따라 상기 멀티미디어 디바이스의 기능을 실행하고, 상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 네트워크 인터페이스부를 통해 상기 사용자 입력 신호와 관련된 정보를 상기 외부 디바이스로 전송한다.A multimedia device according to an embodiment of the present invention includes an external device interface unit connecting an external device, a network interface unit communicating with the external device through a network, and video data received from the external device through the external device interface unit And a display unit for displaying the first GUI data, a user interface unit for receiving a user input signal from a remote controller, and a control unit, wherein the control unit includes at least one of the video data and the first GUI data in the display unit. In addition, when the second GUI data related to the multimedia device is displayed, a function of the multimedia device is executed according to the user input signal, and the display unit includes at least one of the video data and the first GUI data. box And it transmits the second data when the GUI is not displayed, information related to the user input signals through the network interface unit of the multimedia device to the external device.

본 발명의 다른 일 실시예에 의한 멀티미디어 디바이스는 외부 디바이스를 연결하는 외부장치 인터페이스부와, 상기 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부와, 상기 외부장치 인터페이스부를 통해 상기 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부와, 리모트 컨트롤러로부터 사용자 입력 신호를 수신하는 사용자 인터페이스부와, 제어부를 포함하고, 상기 제어부는, 상기 리모트 컨트롤러의 제1 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제1 기능에 대응되는 사용자 입력 신호와 관련된 정보를 상기 외부 디바이스로 전송하고, 상기 리모트 컨트롤러의 제2 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제2 기능에 대응되는 사용자 입력 신호에 따라 상기 제2 GUI 데이터를 제어한다.The multimedia device according to another embodiment of the present invention includes an external device interface unit connecting an external device, a network interface unit communicating with the external device through a network, and a video received from the external device through the external device interface unit A display unit for displaying data and first GUI data, a user interface unit for receiving a user input signal from a remote controller, and a control unit, wherein the control unit includes a user input signal corresponding to the first function of the remote controller. When received, information related to the user input signal corresponding to the first function is transmitted to the external device, and when a user input signal corresponding to the second function of the remote controller is received, the user input corresponding to the second function The second according to the signal Control GUI data.

본 발명의 또 다른 일 실시예에 의한 멀티미디어 디바이스는 적어도 두 개의 외부 디바이스 각각을 상기 멀티미디어 디바이스에 연결하는 외부장치 인터페이스부 - 상기 적어도 두 개의 외부 디바이스는 제1 외부 디바이스 및 제2 외부 디바이스를 포함함 -와, 상기 제1 외부 디바이스 및 상기 제2 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부와, 상기 외부장치 인터페이스부를 통해 상기 제1 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부와, 리모트 컨트롤러로부터 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 수신하는 사용자 인터페이스부와, 상기 네트워크 인터페이스부를 통해 상기 수신된 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 상기 제1 외부 디바이스로 전송하도록 제어하는 제어부를 포함하고, 상기 제어부는, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나가 디스플레이된 상태에서 상기 외부장치 인터페이스부를 통해 상기 제2 외부 디바이스로부터 제2 GUI 데이터가 수신된 경우, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되도록 상기 디스플레이부를 제어하고, 상기 리모트 컨트롤러로부터 수신된 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 상기 네트워크 인터페이스부를 통해 상기 제2 외부 디바이스로 전송하도록 제어한다.According to another embodiment of the present invention, a multimedia device is an external device interface unit that connects each of at least two external devices to the multimedia device, wherein the at least two external devices include a first external device and a second external device. -And, a network interface unit for communicating via the network with the first external device and the second external device, and a display for displaying the video data and the first GUI data received from the first external device through the external device interface unit The user interface unit receives a signal corresponding to a movement and a signal corresponding to a key button from the remote controller, and a signal corresponding to the received movement and a signal corresponding to the key button through the network interface unit. To an external device And a control unit that controls to transmit, wherein the control unit receives second GUI data from the second external device through the external device interface unit while at least one of the video data and the first GUI data is displayed. The display unit controls the display unit to display the second GUI data together with at least one of the video data and the first GUI data, and the network interface unit receives signals corresponding to movements received from the remote controller and signals corresponding to key buttons. Control to transmit to the second external device.

본 발명의 일 실시예에 의하면, 멀티미디어 디바이스의 상태에 따라 리모트 컨트롤러의 제어권이 자동으로 변경되는 솔루션을 제공된다.According to an embodiment of the present invention, a solution is provided in which the control right of a remote controller is automatically changed according to a state of a multimedia device.

또한, 본 발명의 일 실시예에 의하면, 사용자 입력 신호의 조건에 따라 리모트 컨트롤러의 제어권을 멀티미디어 디바이스 및 외부 디바이스에 할당하는 솔루션이 제공된다.In addition, according to an embodiment of the present invention, a solution for allocating control rights of a remote controller to a multimedia device and an external device according to a condition of a user input signal is provided.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable in the present invention are not limited to the above-mentioned effects, and other effects not mentioned may be clearly understood by those skilled in the art from the following description. will be.

도 1은 본 발명의 일 실시예에 따라 리모트 컨트롤러에 의해 제어되는 멀티미디어 디바이스 및 이에 연결된 외부 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 의한 멀티미디어 디바이스의 구성 모듈들을 설명하기 위한 블록도이다.
도 3은 도 2에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.
도 4는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 외관을 간략히 도시한 도면이다.
도 5는 도 4에 도시된 리모트 컨트롤러의 구성 모듈들을 상세히 도시한 블록도이다.
도 6은 리모트 컨트롤러를 사용하여 멀티미디어 디바이스를 통해 특정 외부 디바이스를 제어하는 기본적인 프로세스의 일례를 도시한 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 디스플레이되는 특정 외부 디바이스의 GUI 데이터의 일례를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 도시한 흐름도이다.
도 9는 본 발명의 일 실시예에 따라 멀티미디어 디바이스의 디스플레이부에 특정 외부 디바이스로부터 수신된 특정 외부 디바이스의 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 10은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 11은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 다른 일례를 도시한 도면이다.
도 12는 본 발명의 일 실시예에 따라 멀티미디어 디바이스의 디스플레이부에 제1 외부 디바이스로부터 수신된 비디오 데이터가 디스플레이된 상태에서 제2 외부 디바이스로부터 수신된 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 13은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 도시한 흐름도이다.
도 14는 도 13에 도시된 멀티미디어 디바이스의 제어 방법의 일부 과정을 보다 자세히 설명하기 위한 흐름도이다.
도 15는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 16은 리모트 컨트롤러에 구비된 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스 및 특정 외부 디바이스를 제어하는 방법의 일례를 설명하기 위한 흐름도이다.
도 17은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 18은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 도시한 흐름도이다.
도 19 및 도 20은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.
도 21은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 다른 일례를 도시한 도면이다.
도 22는 멀티미디어 디바이스가 외부 디바이스와의 페어링을 수행하는 프로세스의 일례를 도시한 흐름도이다.도 23은 도 22의 프로세스에서 멀티미디어 디바이스와 외부 디바이스 사이에 교환되는 메시지 형식의 일례를 도시한 도면이다.
도 24는 멀티미디어 디바이스가 동일 네트워크 내 외부 디바이스들을 검색할 때 멀티미디어 디바이스에서 외부 디바이스들로 전송되는 데이터 패킷의 일례를 도시한 도면이다.
도 25는 멀티미디어 디바이스와 특정 외부 디바이스의 페어링이 완료된 후, 멀티미디어 디바이스와 특정 외부 사이에 교환되는 메시지 형식의 일례를 도시한 도면이다.
도 26은 멀티미디어 디바이스와 특정 외부 디바이스의 페어링이 완료된 후 멀티미디어 디바이스에서 특정 외부 디바이스로 전송되는 데이터 패킷의 일례를 도시한 도면이다.1 is a diagram schematically showing a system including a multimedia device controlled by a remote controller and an external device connected thereto according to an embodiment of the present invention.
2 is a block diagram illustrating configuration modules of a multimedia device according to an embodiment of the present invention.
FIG. 3 is a block diagram showing the controller of the multimedia device illustrated in FIG. 2 in more detail.
4 is a view briefly showing the appearance of a remote controller according to an embodiment of the present invention.
FIG. 5 is a block diagram showing the configuration modules of the remote controller illustrated in FIG. 4 in detail.
6 is a flowchart illustrating an example of a basic process of controlling a specific external device through a multimedia device using a remote controller.
7 is a diagram illustrating an example of GUI data of a specific external device displayed on a display unit of a multimedia device according to an embodiment of the present invention.
8 is a flowchart illustrating an example of a method for controlling a multimedia device according to an embodiment of the present invention.
9 is a diagram illustrating an example in which GUI data of a specific external device displayed from a specific external device is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
FIG. 10 is a diagram illustrating an example in which GUI data for a multimedia device is displayed while the GUI data of the specific external device of FIG. 9 is displayed on the display unit of the multimedia device according to an embodiment of the present invention.
11 is a diagram illustrating another example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
12 is a diagram illustrating an example in which GUI data received from a second external device is displayed while video data received from a first external device is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
13 is a flowchart illustrating another example of a method of controlling a multimedia device according to an embodiment of the present invention.
14 is a flowchart for explaining in more detail some processes of the method for controlling the multimedia device shown in FIG. 13.
15 is a diagram illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
16 is a flowchart illustrating an example of a method of controlling a multimedia device and a specific external device according to a signal corresponding to a key button provided in a remote controller.
17 is a diagram illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
18 is a flowchart illustrating another example of a method of controlling a multimedia device according to an embodiment of the present invention.
19 and 20 are views illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of the multimedia device according to an embodiment of the present invention.
21 is a diagram illustrating another example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.
22 is a flowchart illustrating an example of a process in which a multimedia device performs pairing with an external device. FIG. 23 is a diagram illustrating an example of a message format exchanged between a multimedia device and an external device in the process of FIG. 22.
24 is a diagram illustrating an example of a data packet transmitted from a multimedia device to external devices when the multimedia device searches for external devices in the same network.
25 is a diagram illustrating an example of a message format exchanged between a multimedia device and a specific external device after pairing of the multimedia device and a specific external device is completed.
26 is a diagram illustrating an example of a data packet transmitted from a multimedia device to a specific external device after pairing of the multimedia device and a specific external device is completed.

도 1은 본 발명의 일 실시예에 따라 리모트 컨트롤러에 의해 제어되는 멀티미디어 디바이스 및 이에 연결된 외부 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다.1 is a diagram schematically showing a system including a multimedia device controlled by a remote controller and an external device connected thereto according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 의한 리모트 컨트롤러(300)는 멀티미디어 디바이스(100) 및 이에 연결된 외부 디바이스(200)를 제어할 수 있다. 상기 외부 디바이스(200)는 복수 개 존재할 수도 있다.As shown in FIG. 1, the remote controller 300 according to an embodiment of the present invention may control the multimedia device 100 and the external device 200 connected thereto. A plurality of external devices 200 may be present.

멀티미디어 디바이스(100)는 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 네트워크 TV로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가된 장치이다. 예를 들어, 멀티미디어 디바이스(100)는 네트워크 TV, 스마트 TV, HBBTV(Hybrid Brodacast Broadband Television), 인터넷 TV, 웹 TV, IPTV(Internet Protocol Television) 등에 해당한다. The multimedia device 100 is, for example, an intelligent network TV in which a computer support function is added to a broadcast reception function, and is a device that is faithful to the broadcast reception function and has Internet functions added. For example, the multimedia device 100 corresponds to a network TV, a smart TV, a hybrid brodacast broadband television (HBBTV), an Internet TV, a web TV, and an Internet Protocol Television (IPTV).

외부 디바이스(200)는 멀티미디어 디바이스(100)와 유선 케이블 및/또는 유/무선 네트워크로 연결될 수 있다. 외부 디바이스(200)는 유선 케이블을 통해 멀티미디어 디바이스(100)와 연결됨과 동시에, 유/무선 네트워크를 통해 멀티미디어 디바이스(100)와 연결될 수도 있다.The external device 200 may be connected to the multimedia device 100 through a wired cable and / or a wired / wireless network. The external device 200 may be connected to the multimedia device 100 through a wired cable, and may also be connected to the multimedia device 100 through a wired / wireless network.

리모트 컨트롤러(300)에 의해 제어되는 외부 디바이스(200)로서 셋톱 박스(STB), BD(Blu-ray Disc) 플레이어, 홈 시어터 시스템(HTS)을 예시하였으나, 이에 제한을 두지 않는다.As an external device 200 controlled by the remote controller 300, a set-top box (STB), a Blu-ray Disc (BD) player, and a home theater system (HTS) are illustrated, but are not limited thereto.

멀티미디어 디바이스(100)의 화면에는 리모트 컨트롤러(300)의 움직임에 대응하는 인디케이터(I)가 표시된다.The indicator I corresponding to the movement of the remote controller 300 is displayed on the screen of the multimedia device 100.

사용자는 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 외부 디바이스(200)를 제어할 수 있다. 예를 들어, 멀티미디어 디바이스(100)가 STB의 제어 모드로 진입한 경우 사용자는 리모트 컨트롤러(300)를 사용하여 STB를 제어할 수 있고, 멀티미디어 디바이스(100)가 BD 플레이어의 제어 모드로 진입한 경우 사용자는 리모트 컨트롤러(300)를 사용하여 BD 플레이어를 제어할 수 있고, 멀티미디어 디바이스(100)가 HTS의 제어 모드로 진입한 경우 사용자는 리모트 컨트롤러(300)를 사용하여 HTS을 제어할 수 있다.The user may control the multimedia device 100 and the external device 200 using the remote controller 300. For example, when the multimedia device 100 enters the control mode of the STB, the user can control the STB using the remote controller 300, and the multimedia device 100 enters the control mode of the BD player The user can control the BD player using the remote controller 300, and when the multimedia device 100 enters the control mode of the HTS, the user can control the HTS using the remote controller 300.

사용자가 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 외부 디바이스(200)를 제어하는 방법에 대해서는 이하에서 각 도면을 참조하여 자세히 후술하기로 한다.A method for a user to control the multimedia device 100 and the external device 200 using the remote controller 300 will be described later in detail with reference to each drawing.

도 2는 본 발명의 일 실시예에 의한 멀티미디어 디바이스의 구성 모듈들을 설명하기 위한 블록도이다. 다만, 도 2는 설명의 편의를 위한 실시예이며, 도 2에 도시된 구성모듈들 이외에 다른 구성 모듈을 포함하거나, 일부의 구성 모듈이 생략되는 형태도 본 발명의 권리범위에 속한다.2 is a block diagram illustrating configuration modules of a multimedia device according to an embodiment of the present invention. However, FIG. 2 is an embodiment for convenience of description, and includes a configuration module other than the configuration modules illustrated in FIG. 2, or a form in which some configuration modules are omitted also belong to the scope of the present invention.

도 2에 도시된 바와 같이, 본 발명의 일 실시예에 의한 멀티미디어 디바이스(100)는, 수신부(110), 외부장치 인터페이스부(120), 메모리(130), 제어부(140), 디스플레이부(150), 오디오 출력부(160), 전원 공급부(170), 사용자 인터페이스부(180) 등을 포함하여 이루어진다.2, the multimedia device 100 according to an embodiment of the present invention, the receiving unit 110, the external device interface unit 120, the memory 130, the control unit 140, the display unit 150 ), An audio output unit 160, a power supply unit 170, a user interface unit 180, and the like.

수신부(110)는 튜너(111), 복조부(112), 네트워크 인터페이스부(113)를 포함할 수 있다. 경우에 따라, 튜너(111)는 복수 개 구비될 수도 있다.The reception unit 110 may include a tuner 111, a demodulation unit 112, and a network interface unit 113. In some cases, a plurality of tuners 111 may be provided.

튜너(111)는 예를 들어 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.The tuner 111 may receive, for example, a single carrier RF broadcast signal according to an Advanced Television System Committee (ATSC) method or a multiple carrier RF broadcast signal according to a Digital Video Broadcasting (DVB) method.

복조부(112)는 튜너(111)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.The demodulator 112 receives the digital IF signal DIF converted by the tuner 111 and performs a demodulation operation.

예를 들어, 튜너(111)에서 출력되는 디지털 IF 신호가 ATSC 방식인경우, 복조부(112)는 예컨대, 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(112)는 채널 복호화를 수행할 수도 있다. For example, when the digital IF signal output from the tuner 111 is an ATSC method, the demodulator 112 performs 8-Vestigal Side Band (8-VSB) demodulation, for example. Further, the demodulator 112 may perform channel decoding.

네트워크 인터페이스부(113)는, 멀티미디어 디바이스(100)를 인터넷 망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(113)는, 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.The network interface unit 113 provides an interface for connecting the multimedia device 100 to a wired / wireless network including an Internet network. The network interface unit 113 may include, for example, an Ethernet terminal or the like for connection with a wired network, and for connection with a wireless network, for example, a WLAN (Wireless LAN) (Wi- Fi), Wibro (Wireless broadband), Wimax (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access) communication standards and the like can be used.

네트워크 인터페이스부(113)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. The network interface unit 113 may transmit or receive data with other users or other electronic devices through a connected network or another network linked to the connected network.

외부장치 인터페이스부(120)는 외부 디바이스와 멀티미디어 디바이스(100)간 데이터 통신이 가능하게 하는 인터페이스이다. 외부장치 인터페이스부(120)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), STB 등과 같은 외부 장치와 유/무선으로 접속될 수 있다. 상기 외부 디바이스(200)는 외부장치 인터페이스부(120)를 통해 멀티미디어 디바이스(300)와 유/무선으로 연결될 수 있다. 외부장치 인터페이스부(120)는 연결된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 제어부(140)로 전달한다. 또한, 제어부(140)에서 처리된 영상, 음성 또는 데이터신호를, 외부 장치로 출력할 수 있다.The external device interface unit 120 is an interface that enables data communication between the external device and the multimedia device 100. The external device interface unit 120 may be wired / wirelessly connected to an external device such as a DVD (Digital Versatile Disk), Blu-ray, game device, camera, camcorder, computer (laptop), or STB. The external device 200 may be connected to the multimedia device 300 by wire / wireless through the external device interface 120. The external device interface unit 120 transmits a video, audio, or data signal input from the outside through the connected external device to the control unit 140. Also, an image, audio, or data signal processed by the control unit 140 may be output to an external device.

상기 외부장치 인터페이스부(120)는, 예를 들어 USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다. HDMI는 디지털 방식의 영상과 음성 신호를 하나의 케이블로 동시에 전달하는 인터페이스로, 재생 기기와 출력 기기가 모두 HDMI 단자를 갖추고 있을 경우, 재생 기기와 출력 기기의 사이에 HDMI 케이블 하나만 연결하면 간편하게 영상 신호와 음성 신호를 송수신할 수 있다.The external device interface unit 120 includes, for example, a USB terminal, a Composite Video Banking Sync (CVBS) terminal, a component terminal, an S-video terminal (analog), a Digital Visual Interface (DVI) terminal, and a High Definition Multimedia Interface (HDMI). ) Terminal, RGB terminal, D-SUB terminal, and the like. HDMI is an interface that simultaneously transmits digital video and audio signals with a single cable. If both the playback device and the output device are equipped with an HDMI terminal, simply connect one HDMI cable between the playback device and the output device, and the video signal is easy. And a voice signal.

메모리(130)는, 제어부(140) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. 또한, 메모리(130)는 외부장치 인터페이스부(120) 또는 네트워크 인터페이스부(113)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 메모리(130)는, 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다.The memory 130 may store a program for processing and controlling each signal in the control unit 140, and may store a signal-processed image, audio, or data signal. Also, the memory 130 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 120 or the network interface unit 113. Also, the memory 130 stores various OS, middleware, and platforms, for example.

사용자 인터페이스부(180)는, 사용자가 입력한 신호를 제어부(140)로 전달하거나, 제어부(140)로부터의 신호를 외부 디바이스(예를 들어, 리모트 컨트롤러(300))로 전송한다. 예를 들어, 사용자 인터페이스부(180)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 리모트 컨트롤러(300)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(140)로부터의 제어 신호를 리모트 컨트롤러(300)로 송신하도록 설계될 수 있다.The user interface unit 180 transmits a signal input by the user to the control unit 140 or transmits a signal from the control unit 140 to an external device (eg, the remote controller 300). For example, the user interface unit 180 may turn on / off the power from the remote controller 300, select a channel, set a screen, etc. according to various communication methods such as a radio frequency (RF) communication method and an infrared (IR) communication method. It may be designed to receive and process the control signal of, or to transmit a control signal from the control unit 140 to the remote controller 300.

사용자 인터페이스부(180)는 센서 모듈(미도시)을 포함할 수 있다. 상기 센서 모듈은 음성 인식 센서 또는 모션 센서 중 적어도 하나를 포함할 수 있다. 상기 음성 인식 센서는 외부의 음성 신호를 전기적인 음성 데이터로 변환하는 마이크로폰을 포함하여 이루어진다. 상기 모션 센서는 피사체로부터 입사된 광학 신호를 전기적인 이미지 데이터로 변환하는 카메라를 포함하여 이루어진다.The user interface unit 180 may include a sensor module (not shown). The sensor module may include at least one of a voice recognition sensor and a motion sensor. The voice recognition sensor includes a microphone that converts an external voice signal into electrical voice data. The motion sensor includes a camera that converts an optical signal incident from a subject into electrical image data.

제어부(140)는 멀티미디어 디바이스(100) 내의 각 구성 모듈을 제어한다.The control unit 140 controls each component module in the multimedia device 100.

제어부(140)는, 튜너(111), 복조부(112), 네트워크 인터페이스부(113) 또는 외부장치 인터페이스부(120)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. 상기 제어부(140)에 대해서는 도 3을 참조하여 보다 상세히 후술하도록 하겠다.The control unit 140 demultiplexes the input stream or processes demultiplexed signals through the tuner 111, the demodulator 112, the network interface unit 113, or the external device interface unit 120. Signals for video or audio output can be generated and output. The control unit 140 will be described later in more detail with reference to FIG. 3.

사용자 인터페이스부(180)가 음성 인식 센서를 포함하는 경우, 제어부(140)는, 음성 인식 센서로부터 전기적인 음성 데이터를 전달받고, 상기 전기적인 음성 신호를 텍스트로 변환할 수 있도록 설계된다. 또한, 사용자 인터페이스부(180)가 모션 센서를 포함하는 경우, 제어부(140)는, 모션 센서로부터 전기적인 이미지 데이터를 전달받고, 상기 전기적인 이미지 데이터를 텍스트로 변환할 수 있도록 설계된다.When the user interface 180 includes a voice recognition sensor, the controller 140 is designed to receive electrical voice data from the voice recognition sensor and convert the electrical voice signal into text. In addition, when the user interface unit 180 includes a motion sensor, the control unit 140 is designed to receive electrical image data from the motion sensor and convert the electrical image data into text.

디스플레이부(150)는, 제어부(140)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(120)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다. 상기 디스플레이부(150)는, PDP, LCD, OLED, 플렉시블 디스플레이 (flexible display), 3차원 디스플레이(3D display) 등이 가능하다.The display unit 150 converts the image signal, data signal, OSD signal, or image signal received from the external device interface unit 120 processed by the control unit 140 into R, G, and B signals, respectively. Generate a drive signal. The display unit 150 may be a PDP, LCD, OLED, flexible display, 3D display, or the like.

오디오 출력부(160)는, 제어부(140)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1채널 신호 또는 5.1채널 신호를 입력받아 음성으로 출력한다. 오디오 출력부(160)는 다양한 형태의 스피커로 구현될 수 있다.The audio output unit 160 receives a signal processed by the control unit 140, for example, a stereo signal, a 3.1 channel signal, or a 5.1 channel signal, and outputs it as voice. The audio output unit 160 may be implemented as various types of speakers.

그리고, 전원 공급부(170)는, 멀티미디어 디바이스(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip, SOC)의 형태로 구현될 수 있는 제어부(140)와, 영상 표시를 위한 디스플레이부(150) 및 오디오 출력을 위한 오디오 출력부(160)에 전원을 공급할 수 있다.Then, the power supply unit 170 supplies the corresponding power throughout the multimedia device 100. In particular, it is possible to supply power to a control unit 140 that can be implemented in the form of a system on chip (SOC), a display unit 150 for image display, and an audio output unit 160 for audio output. have.

도 3은 도 2에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.FIG. 3 is a block diagram showing the controller of the multimedia device illustrated in FIG. 2 in more detail.

도 3에 도시된 바와 같이, 멀티미디어 디바이스(100)의 제어부(140)는, 역다중화부(141), 영상처리부(142), GUI 생성부(143), 믹서(144), 프레임 레이트 변환부(145) 그리고 포맷터(146) 등을 포함한다. 또한, 음성 처리부(미도시), 데이터 처리부(미도시)를 더 포함하도록 설계하는 것도 본 발명의 권리범위에 속한다.As shown in FIG. 3, the control unit 140 of the multimedia device 100 includes a demultiplexing unit 141, an image processing unit 142, a GUI generating unit 143, a mixer 144, and a frame rate conversion unit ( 145) and a formatter 146. In addition, designing to further include a voice processing unit (not shown) and a data processing unit (not shown) also falls within the scope of the present invention.

역다중화부(141)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다. The demultiplexing unit 141 demultiplexes the input stream. For example, when MPEG-2 TS is input, it can be demultiplexed to separate video, audio, and data signals.

영상 처리부(142)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(142)는, 영상 디코더(142a) 및 스케일러(142b)를 구비할 수 있다. 상기 영상 디코더(142a)는, 역다중화된 영상신호를 복호화하며, 상기 스케일러(142b)는, 복호화된 영상신호의 해상도를 비디오 출력부에서 출력 가능하도록 스케일링(scaling)을 수행한다. 그리고, 영상 처리부(142)에서 복호화된 영상 신호는, 믹서(144)로 입력된다.The image processing unit 142 may perform image processing of the demultiplexed image signal. To this end, the image processing unit 142 may include an image decoder 142a and a scaler 142b. The video decoder 142a decodes a demultiplexed video signal, and the scaler 142b performs scaling so that the resolution of the decoded video signal can be output from a video output unit. Then, the video signal decoded by the video processing unit 142 is input to the mixer 144.

GUI 생성부(143)는, 사용자 입력에 따라 또는 자체적으로 GUI 신호를 생성한다. 따라서, 믹서(144)는, GUI 생성부(143)에서 생성된 GUI 신호와 영상처리부(142)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. GUI 생성부(143)는 멀티미디어 디바이스(100)의 환경 설정 정보를 포함하는 OSD(On Screen Display) 신호를 생성하는 OSD 생성부를 포함한다.The GUI generating unit 143 generates a GUI signal according to a user input or by itself. Accordingly, the mixer 144 may mix the GUI signal generated by the GUI generating unit 143 and the decoded image signal processed by the image processing unit 142. The GUI generation unit 143 includes an OSD generation unit that generates an On Screen Display (OSD) signal including environment setting information of the multimedia device 100.

믹싱된 신호는 포맷터(146)에 제공된다. 복호화된 방송 영상 신호 또는 외부 입력 신호와 GUI 신호 또는 OSD 신호가 믹싱됨으로 인하여, 방송 영상 또는 외부 입력 영상 상에 GUI 또는 OSD 가 오버레이 되어 표시될 수 있게 된다.The mixed signal is provided to the formatter 146. Since the decoded broadcast video signal or the external input signal and the GUI signal or OSD signal are mixed, the GUI or OSD can be displayed overlaid on the broadcast video or external input video.

프레임 레이트 변환부(Frame Rate Conveter; FRC)(145)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 예를 들어, 60Hz의 프레임 레이트를 120Hz 또는 240Hz로 변환한다. 60Hz의 프레임 레이트를 120Hz로 변환하는 경우, 제1 프레임과 제2 프레임 사이에, 동일한 제1 프레임을 삽입하거나, 제1 프레임과 제2 프레임으로부터 예측된 제3 프레임을 삽입하는 것이 가능하다. 60Hz의 프레임 레이트를 240Hz로 변환하는 경우, 동일한 프레임을 3개 더 삽입하거나, 예측된 프레임을 3개 삽입하는 것이 가능하다. 한편, 별도의 변환 없이 입력되는 프레임 레이트를 유지하는 것도 가능하다.The frame rate converter (FRC) 145 may convert the frame rate of the input image. For example, convert a frame rate of 60 Hz to 120 Hz or 240 Hz. When converting a frame rate of 60 Hz to 120 Hz, it is possible to insert the same first frame or a third frame predicted from the first frame and the second frame between the first frame and the second frame. When converting the frame rate of 60Hz to 240Hz, it is possible to insert three more identical frames or insert three predicted frames. On the other hand, it is also possible to maintain the input frame rate without additional conversion.

그리고, 포맷터(146)는, 프레임 레이트 변환부(145)의 출력 신호를 입력받아, 비디오 출력부에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS로 출력될 수 있다.Then, the formatter 146 receives the output signal of the frame rate conversion unit 145, changes the format of the signal to fit the video output unit, and outputs the signal. For example, R, G, and B data signals may be output, and the R, G, and B data signals may be output as low voltage differential signaling (LVDS) or mini-LVDS.

멀티미디어 디바이스(100)의 구성 모듈들을 특히 본 발명의 실시예와 관련하여 설명하면 다음과 같다. 이하에서는, 멀티미디어 디바이스(100)와 제어 대상이 되는 외부 디바이스(200)가 페어링된 경우를 전제로 하여 설명한다. 멀티미디어 디바이스(100)와 외부 디바이스(200)의 페어링 프로세스에 대해서는 도 20 내지 도 22를 참조하여 후술하기로 한다.The configuration modules of the multimedia device 100 will be described below with reference to embodiments of the present invention. Hereinafter, it will be described on the assumption that the multimedia device 100 and the external device 200 to be controlled are paired. The pairing process of the multimedia device 100 and the external device 200 will be described later with reference to FIGS. 20 to 22.

외부장치 인터페이스부(120)는, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100)를 통해 제어하고자 하는 외부 디바이스(200)와 유/무선으로 연결된다.The external device interface unit 120 is wired / wirelessly connected to the external device 200 to be controlled through the multimedia device 100 using the remote controller 300.

네트워크 인터페이스부(113)는 유/무선 네트워크를 통해 외부 서버(미도시) 또는 외부 디바이스(200)와 데이터를 송신 또는 수신할 수 있다.The network interface unit 113 may transmit or receive data with an external server (not shown) or an external device 200 through a wired / wireless network.

사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 RF 신호 또는 적외선(IR) 신호를 수신하기 위한 통신 모듈을 포함한다. 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 사용자 인터페이스부(180)는 RF 통신 방식 또는 적외선(IR) 통신 방식 등에 따라 리모트 컨트롤러(300)로부터 사용자 입력 신호를 수신한다.The user interface unit 180 includes a communication module for receiving an RF signal or an infrared (IR) signal from the remote controller 300. When a user inputs a user command using the remote controller 300, the user interface unit 180 receives a user input signal from the remote controller 300 according to an RF communication method or an infrared (IR) communication method.

또한, 사용자 인터페이스부(180)는 센서 모듈(미도시)을 포함한다. 상기 센서 모듈은 음성 인식 센서 또는 모션 센서 중 적어도 하나를 포함할 수 있다. 사용자가 특정 음성을 발화하거나 특정 제스처를 취하여 사용자 명령을 입력하는 경우, 사용자 인터페이스부(180) 내 센서 모듈을 통하여 사용자 입력 신호가 수신된다.In addition, the user interface unit 180 includes a sensor module (not shown). The sensor module may include at least one of a voice recognition sensor and a motion sensor. When a user utters a specific voice or inputs a user command by taking a specific gesture, a user input signal is received through a sensor module in the user interface unit 180.

또는, 사용자가 디스플레이부(150)에 디스플레이된 그래픽 유저 인터페이스(Graphic User Interface: GUI)를 통해 사용자 명령을 입력하는 경우, 상기 디스플레이부(150)가 사용자 인터페이스부(180)의 역할을 수행하며, 상기 GUI를 통해 사용자 입력 신호가 수신된다.Alternatively, when a user inputs a user command through a graphical user interface (GUI) displayed on the display unit 150, the display unit 150 serves as the user interface unit 180, A user input signal is received through the GUI.

리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100)를 통해 외부 디바이스(200)를 제어하는 기본적인 프로세스를 설명하면 다음과 같다. 멀티미디어 디바이스(100)가 특정 외부 디바이스(200)의 외부입력 모드로 진입되어 있고, 멀티미디어 디바이스(100)와 특정 외부 디바이스(200)는 페어링이 완료된 상태임을 가정하여 설명한다.The basic process of controlling the external device 200 through the multimedia device 100 using the remote controller 300 will be described below. It will be described on the assumption that the multimedia device 100 has entered the external input mode of the specific external device 200 and that the pairing of the multimedia device 100 and the specific external device 200 is completed.

외부장치 인터페이스부(120)는 특정 외부 디바이스(200)로부터 비디오 데이터 및/또는 GUI 데이터를 수신하고, 제어부(140)는 상기 수신된 비디오 데이터 및/또는 GUI 데이터를 디스플레이부(150)를 통해 출력한다. 상기 GUI 데이터는 특정 외부 디바이스(200)에서 구현될 수 있는 기능들에 대응된다. 그러나, 상기 GUI 데이터는 특정 외부 디바이스(200)에서 생성된 것이므로, 멀티미디어 디바이스(100)는 상기 GUI 데이터에 대응되는 특정 외부 디바이스(200)의 기능들이 무엇인지 알 수 없다.The external device interface unit 120 receives video data and / or GUI data from a specific external device 200, and the control unit 140 outputs the received video data and / or GUI data through the display unit 150 do. The GUI data corresponds to functions that can be implemented in a specific external device 200. However, since the GUI data is generated by a specific external device 200, the multimedia device 100 cannot know what functions of the specific external device 200 corresponding to the GUI data are.

사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 움직임에 상응하는 신호 및 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호를 수신한다. 사용자 인터페이스부(180)는, 사용자가 리모트 컨트롤러(300)만 움직이고 있는 경우에는 리모트 컨트롤러(300)로부터 움직임에 상응하는 신호만을 수신할 것이고, 사용자가 리모트 컨트롤러(300)를 움직이지 않고 리모트 컨트롤러(300)에 구비된 키버튼만 누른 경우에는 리모트 컨트롤러(300)로부터 키버튼에 상응하는 신호만을 수신할 것이고, 사용자가 리모트 컨트롤러(300)를 움직인 후 특정 키버튼을 누른 경우에는 리모트 컨트롤러(300)로부터 움직임에 상응하는 신호를 먼저 수신하고 상기 특정 키버튼에 상응하는 신호를 뒤이어 수신할 것이다.The user interface unit 180 receives a signal corresponding to a movement from the remote controller 300 and a signal corresponding to a key button provided in the remote controller 300. The user interface unit 180 will receive only a signal corresponding to the movement from the remote controller 300 when the user is moving only the remote controller 300, and the user may move the remote controller 300 without moving the remote controller ( If only the key button provided in 300) is pressed, only the signal corresponding to the key button will be received from the remote controller 300, and when the user moves the remote controller 300 and then presses a specific key button, the remote controller 300 ), The signal corresponding to the movement is first received, followed by the signal corresponding to the specific key button.

제어부(140)는, 상기 수신된 움직임에 상응하는 신호에 기초하여 좌표값 정보를 산출한다. 상기 좌표값 정보란, 디스플레이부(150)의 화면의 좌표값 정보를 의미한다.The controller 140 calculates coordinate value information based on the signal corresponding to the received motion. The coordinate value information means coordinate value information on the screen of the display unit 150.

네트워크 인터페이스부(113)는 상기 산출된 좌표값 정보를 특정 외부 디바이스(200)로 전송한다. The network interface unit 113 transmits the calculated coordinate value information to a specific external device 200.

네트워크 인터페이스부(113)는 리모트 컨트롤러(300)로부터 키버튼에 상응하는 신호를 수신한 경우, 상기 수신된 키버튼에 상응하는 신호도 특정 외부 디바이스(200)로 전송한다. 경우에 따라, 상기 수신된 키버튼에 상응하는 신호가 특정 외부 디바이스(200)에서 처리할 수 없는 데이터의 형태인 경우, 제어부(140)에서, 상기 수신된 키버튼에 상응하는 신호를 특정 외부 디바이스(200)가 처리할 수 있는 데이터의 형태로 처리하는 과정이 선행될 수도 있다.When a signal corresponding to a key button is received from the remote controller 300, the network interface unit 113 also transmits a signal corresponding to the received key button to the specific external device 200. In some cases, when the signal corresponding to the received key button is in the form of data that cannot be processed by the specific external device 200, the control unit 140 specifies the signal corresponding to the received key button as a specific external device. The process of processing in the form of data that the 200 can process may be preceded.

일례로, 리모트 컨트롤러(300)의 움직임에 상응하는 신호는 RF 통신 방식에 따라 수신되고 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호는 IR 통신 방식에 따라 수신될 수 있으나, 이에 한정하지 않는다.For example, a signal corresponding to the movement of the remote controller 300 is received according to the RF communication method, and a signal corresponding to a key button provided in the remote controller 300 can be received according to the IR communication method, but is not limited thereto. Does not.

특정 외부 디바이스(200)는 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보를 처리할 수 있도록 설계된다. 특정 외부 디바이스(200)는 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보를 처리하여, 상기 좌표값 정보가 상기 비디오 데이터 및/또는 GUI 데이터 상의 어느 부분에 대응하는 것인지 판단한다. 그리고, 특정 외부 디바이스(200)는 상기 좌표값 정보에 대응되는 기능을 실행하고, 그 결과를 멀티미디어 디바이스(100)에 전송한다. 예를 들어, 멀티미디어 디바이스(100)로부터 좌표값 정보만 전송된 경우 특정 외부 디바이스(200)는 좌표값 정보에 대응되는 상기 GUI 데이터 상의 메뉴 옵션을 하이라이트하는 기능을 실행시키고, 그 결과를 멀티미디어 디바이스(100)에 전송할 것이다. 또는, 멀티미디어 디바이스(100)로부터 좌표값 정보 및 키버튼에 상응하는 신호가 전송된 경우 특정 외부 디바이스(200)는 좌표값 정보 및 키버튼에 상응하는 신호에 대응되는 상기 GUI 데이터 상의 메뉴 옵션에 대응되는 특정 기능을 실행시키고, 그 결과를 멀티미디어 디바이스(100)에 전송할 것이다.The specific external device 200 is designed to process coordinate value information transmitted from the multimedia device 100. The specific external device 200 processes coordinate value information transmitted from the multimedia device 100 to determine which part of the video data and / or GUI data corresponds to the coordinate value information. Then, the specific external device 200 executes a function corresponding to the coordinate value information, and transmits the result to the multimedia device 100. For example, when only the coordinate value information is transmitted from the multimedia device 100, the specific external device 200 executes a function for highlighting a menu option on the GUI data corresponding to the coordinate value information, and displays the result of the multimedia device ( 100). Alternatively, when the signal corresponding to the coordinate value information and the key button is transmitted from the multimedia device 100, the specific external device 200 corresponds to the menu option on the GUI data corresponding to the signal corresponding to the coordinate value information and the key button. And execute the specific function, and transmit the result to the multimedia device 100.

본 발명의 실시예에 따라, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어하는 방법으로 크게 세 가지를 제안한다.According to an embodiment of the present invention, three methods are proposed as a method of controlling the multimedia device 100 and the specific external device 200 using the remote controller 300.

첫 번째 방법을 설명하면 다음과 같다. The first method is as follows.

제어부(140)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 함께, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다. 사용자에 의해 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)가 아닌 멀티미디어 디바이스(100)를 제어하고자 하는 것이기 때문이다. 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는, 디스플레이부(150)의 화면에서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 오버레이되어 디스플레이될 수 있다. 즉, 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)의 제어 모드로 변경된다.The control unit 140 includes GUI data related to the multimedia device 100 together with at least one of the video data received from the specific external device 200 and the GUI data of the specific external device 200 on the display unit 150. When displayed, the function of the multimedia device 100 is executed according to the user input signal received from the user interface unit 180. This is because when the GUI data regarding the multimedia device 100 is displayed by the user, the user's intention is to control the multimedia device 100 instead of the specific external device 200 using the remote controller 300. The GUI data for the multimedia device 100 may be displayed overlaid with at least one of the video data and GUI data of a specific external device 200 on the screen of the display unit 150. That is, the remote controller 300 is changed to the control mode of the multimedia device 100.

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는, 멀티미디어 디바이스(100)의 각 기능들을 제어하기 위하여, 멀티미디어 디바이스(100)의 각 기능들에 대응되는 그래픽 이미지를 포함할 수 있다. 멀티미디어 디바이스(100)의 기능이란, 채널 변경, 채널 선택, 음량 조절, 외부입력 모드 선택, 어플리케이션 실행, 환경 설정 등 멀티미디어 디바이스(100)에서 구현될 수 있는 모든 기능을 포함하는 개념이다.The GUI data for the multimedia device 100 may include a graphic image corresponding to each function of the multimedia device 100 in order to control each function of the multimedia device 100. The function of the multimedia device 100 is a concept including all functions that can be implemented in the multimedia device 100, such as channel change, channel selection, volume control, external input mode selection, application execution, environment setting, and the like.

반면, 제어부(140)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 상기 비디오 데이터 및 특정 외부 디바이스의 GUI 데이터 중 적어도 하나와 함께, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 네트워크 인터페이스부(113)를 통해, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호와 관련된 정보를 특정 외부 디바이스(200)로 전송한다. 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다. 즉, 리모트 컨트롤러(300)가 특정 외부 디바이스(200)의 제어 모드로 변경된다.On the other hand, the control unit 140 displays GUI data related to the multimedia device 100 together with at least one of the video data received from the specific external device 200 and the GUI data of the specific external device on the display unit 150. If not, the information related to the user input signal received from the user interface unit 180 is transmitted to the specific external device 200 through the network interface unit 113. This is because when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the user's intention is to control the specific external device 200 using the remote controller 300. That is, the remote controller 300 is changed to the control mode of the specific external device 200.

상기 사용자 입력 신호와 관련된 정보는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다.The information related to the user input signal includes at least one of coordinate value information calculated based on a signal corresponding to the movement of the remote controller 300 or a signal corresponding to a key button provided in the remote controller 300.

제어부(140)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 함께, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우, 리모트 컨트롤러(300)의 움직임에 대응하는 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(I)를 제1 인디케이터(I)라 칭하기로 한다. 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 움직임에 상응하는 신호에 기초하여 좌표값 정보를 산출하고, 상기 산출된 좌표값 정보에 따라 제1 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. The control unit 140 includes GUI data related to the multimedia device 100 together with at least one of the video data received from the specific external device 200 and the GUI data of the specific external device 200 on the display unit 150. When displayed, the display unit 150 is controlled to output an indicator I corresponding to the movement of the remote controller 300. The indicator I will be referred to as a first indicator I. The controller 140 calculates coordinate value information based on a signal corresponding to the motion received from the remote controller 300, and displays the display unit 150 to output the first indicator I according to the calculated coordinate value information. ) Control.

반면, 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 리모트 컨트롤러(300)가 특정 외부 디바이스(200)의 제어 모드로 변경된 상태이므로 상기 인디케이터(I)는 디스플레이되지 않는다. 대신, 특정 외부 디바이스(200)는, 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보에 기초하여, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P) 관련 정보를 멀티미디어 디바이스(100)로 전송한다. 외부장치 인터페이스부(120)는 상기 인디케이터(P) 관련 정보를 수신하고, 제어부(140)는 상기 수신된 인디케이터(P) 관련 정보에 기초하여 인디케이터(P)를 디스플레이하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(P)를 제2 인디케이터(P)라 칭하기로 한다.On the other hand, when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the remote controller 300 is changed to the control mode of the specific external device 200, so the indicator I is not displayed. Does not. Instead, the specific external device 200 transmits the indicator P information corresponding to the movement of the remote controller 300 to the multimedia device 100 based on the coordinate value information transmitted from the multimedia device 100. . The external device interface unit 120 receives the indicator P-related information, and the control unit 140 controls the display unit 150 to display the indicator P based on the received indicator-P related information do. The indicator P will be referred to as a second indicator P.

제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다. 사용자는, 디스플레이부(150)에 출력되는 인디케이터의 변화에 기초하여, 현재 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)의 제어 모드인지 아니면 특정 외부 디바이스(200)의 제어 모드인지를 인지할 수 있다.The first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other. The user may recognize whether the current remote controller 300 is the control mode of the multimedia device 100 or the control mode of the specific external device 200 based on the change of the indicator output to the display unit 150. .

이하에서, 두 번째 방법을 설명하면 다음과 같다. 두 번째 방법은, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 상기 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 함께, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우를 가정하여 설명한다.Hereinafter, the second method will be described. In the second method, the GUI 150 for the multimedia device 100 is displayed on the display unit 150 together with at least one of the video data received from the specific external device 200 and the GUI data of the specific external device 200. It will be described on the assumption that the displayed case.

사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 사용자 입력 신호를 수신한다. 사용자 입력 신호는 리모트 컨트롤러(300)의 움직임에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다.The user interface unit 180 receives a user input signal from the remote controller 300. The user input signal includes at least one of a signal corresponding to the movement of the remote controller 300 or a key button provided in the remote controller 300.

제어부(140)는, 사용자 입력 신호가 제1 조건을 만족하는 경우 사용자 입력 신호에 따라 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 멀티미디어 디바이스(100)의 기능을 실행하고, 사용자 입력 신호가 제2 조건을 만족하는 경우 네트워크 인터페이스부(113)를 통해 상기 사용자 입력 신호와 관련된 정보를 특정 외부 디바이스(200)로 전송한다.When the user input signal satisfies the first condition, the controller 140 executes a function of the multimedia device 100 corresponding to GUI data related to the multimedia device 100 according to the user input signal, and the user input signal When the second condition is satisfied, information related to the user input signal is transmitted to the specific external device 200 through the network interface unit 113.

제어부(140)는, 사용자 인터페이스부(180)에서 수신된 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여, 좌표값 정보를 산출한다.The control unit 140 calculates coordinate value information based on a signal corresponding to the movement of the remote controller 300 received from the user interface unit 180.

상기 제1 조건은, 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역에 대응되는 조건이고, 상기 제2 조건은, 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 조건일 수 있다. 즉, 상기 제2 조건은, 산출된 좌표값 정보가, 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역 이외의 영역으로서 상기 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 조건일 수 있다.The first condition is a condition in which the calculated coordinate value information corresponds to an area in which GUI data regarding the multimedia device 100 is displayed on a screen of the display unit 150, and the second condition is a calculated coordinate value Information may be a condition corresponding to an area in which at least one of the video data and GUI data of a specific external device 200 is displayed on a screen of the display 150. That is, in the second condition, the calculated coordinate value information is an area other than an area in which GUI data regarding the multimedia device 100 is displayed on a screen of the display unit 150, and the video data and a specific external device ( 200) may be a condition corresponding to an area where at least one of the GUI data is displayed.

산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역에 대응되는 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)가 아닌 멀티미디어 디바이스(100)를 제어하고자 하는 것이기 때문이다.When the calculated coordinate value information corresponds to an area in which GUI data regarding the multimedia device 100 is displayed on the screen of the display unit 150, the user's intention is to use the remote controller 300 to specify a specific external device 200 ), Because it is intended to control the multimedia device 100.

반면, 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다.On the other hand, when the coordinate value information corresponds to an area in which at least one of the video data and GUI data of a specific external device 200 is displayed on the screen of the display unit 150, the user's intention is to use the remote controller 300. This is because it is intended to control a specific external device 200 by using.

또한, 제어부(140)는, 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 멀티미디어 디바이스(100)의 특정 타입의 기능에 관한 것인 경우, 상기 수신된 키버튼에 상응하는 신호가 상기 특정 타입의 기능에 대응되는 것이면 상기 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100)의 기능을 제어할 수 있다. 상기 수신된 키버튼에 상응하는 신호가 상기 특정 타입의 기능에 대응되는 조건을 편의상 제3 조건이라 칭할 수 있다.In addition, when the GUI data related to the multimedia device 100 is related to a specific type of function of the multimedia device 100, the control unit 140 may generate a signal corresponding to the received key button as the specific type of function. If it corresponds to, it is possible to control the function of the multimedia device 100 according to the signal corresponding to the key button. A condition in which a signal corresponding to the received key button corresponds to the specific type of function may be referred to as a third condition for convenience.

상기 멀티미디어 디바이스(100)의 특정 타입의 기능이란, 멀티미디어 디바이스(100)에서 구현되는 기능들 중 유사한 타입의 기능들을 포괄하는 개념으로 정의할 수 있다. 예를 들어, 멀티미디어 디바이스(100)를 사용하여 음악을 감상하는 경우, 음악 감상에 관련되는 재생 기능, 일시 정지 기능, 재생 중지 기능, 다음곡 선택 기능, 이전곡 선택 기능 등과 같이 유사한 타입의 기능들을 포괄하여 특정 타입의 기능이라 칭할 수 있다.The specific type of function of the multimedia device 100 may be defined as a concept encompassing similar types of functions among functions implemented in the multimedia device 100. For example, when listening to music using the multimedia device 100, similar types of functions, such as a play function, a pause function, a play stop function, a next song selection function, a previous song selection function, etc., related to listening to music, It can be collectively called a specific type of function.

이하에서, 세 번째 방법을 설명하면 다음과 같다. 세 번째 방법 역시, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 상기 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 함께, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우를 가정하여 설명한다.Hereinafter, a third method will be described. In the third method, GUI data for the multimedia device 100 is displayed on the display unit 150 together with at least one of the video data received from the specific external device 200 and the GUI data of the specific external device 200. It will be described on the assumption that the displayed case.

사용자 인터페이스부(180)는, 리모트 컨트롤러(300)로부터 사용자 입력 신호를 수신하거나, 센서 모듈을 통해 사용자 입력 신호를 수신한다.The user interface unit 180 receives a user input signal from the remote controller 300 or a user input signal through a sensor module.

리모트 컨트롤러(300)로부터 수신된 사용자 입력 신호는 리모트 컨트롤러(300)의 움직임에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다.The user input signal received from the remote controller 300 includes at least one of a signal corresponding to the movement of the remote controller 300 or a signal corresponding to a key button provided in the remote controller 300.

제어부(140)는, 사용자 입력 신호가 제4 조건을 만족하는 경우 사용자 입력 신호에 따라 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 멀티미디어 디바이스(100)의 기능을 실행하고, 사용자 입력 신호가 제5 조건을 만족하는 경우 네트워크 인터페이스부(113)를 통해 상기 사용자 입력 신호와 관련된 정보를 특정 외부 디바이스(200)로 전송한다.When the user input signal satisfies the fourth condition, the controller 140 executes a function of the multimedia device 100 corresponding to GUI data related to the multimedia device 100 according to the user input signal, and the user input signal When the fifth condition is satisfied, information related to the user input signal is transmitted to the specific external device 200 through the network interface unit 113.

일례로, 상기 제4 조건과 제5 조건은, 사용자 입력 신호가 리모트 컨트롤러(300)로부터 수신된 것인지, 아니면 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신된 것인지에 따라 결정될 수 있다.For example, the fourth condition and the fifth condition may be determined according to whether the user input signal is received from the remote controller 300 or through a sensor module in the user interface unit 180.

다른 일례로, 상기 제4 조건과 제5 조건은, 사용자 입력 신호가 리모트 컨트롤러(300)의 움직임에 상응하는 신호인지, 아니면 리모트 컨트롤러(300)에 구비된 특정 키버튼에 상응하는 신호인지에 따라 결정될 수 있다.As another example, the fourth condition and the fifth condition may depend on whether the user input signal is a signal corresponding to the movement of the remote controller 300 or a signal corresponding to a specific key button provided in the remote controller 300. Can be determined.

도 4는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 외관을 간략히 도시한 도면이다.4 is a view briefly showing the appearance of a remote controller according to an embodiment of the present invention.

우선, 도 4의 (a)을 참조하면, 멀티미디어 디바이스(100)의 화면에 리모트 컨트롤러(300)에 대응하는 인디케이터(I)가 표시되는 것을 예시한다. First, referring to (a) of FIG. 4, it is illustrated that the indicator I corresponding to the remote controller 300 is displayed on the screen of the multimedia device 100.

사용자는 리모트 컨트롤러(300)를 상하, 좌우(도 4의 (b)), 앞뒤(도 4의 (c))로 움직이거나 회전할 수 있다. 멀티미디어 디바이스(100)의 화면에 표시된 인디케이터(I)는 리모트 컨트롤러(300)의 움직임에 대응한다. 이러한 리모트 컨트롤러(300)는, 도면과 같이, 3D 공간상의 움직임에 따라 해당 인디케이터(I)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다. The user may move or rotate the remote controller 300 up, down, left and right (FIG. 4 (b)), and back and forth (FIG. 4 (c)). The indicator I displayed on the screen of the multimedia device 100 corresponds to the movement of the remote controller 300. The remote controller 300 may be referred to as a spatial remote controller, as the corresponding indicator I is moved and displayed according to movement in 3D space, as illustrated.

도 4의 (b)는 사용자가 리모트 컨트롤러(300)를 왼쪽으로 이동하면, 멀티미디어 디바이스(100)의 화면에 표시된 인디케이터(I)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다. FIG. 4B illustrates that when the user moves the remote controller 300 to the left, the indicator I displayed on the screen of the multimedia device 100 also moves to the left correspondingly.

리모트 컨트롤러(300)의 센서를 통하여 감지된 리모트 컨트롤러(300)의 움직임에 상응하는 신호는 멀티미디어 디바이스(100)로 전송된다. 멀티미디어 디바이스(100)는 리모트 컨트롤러(300)의 움직임에 상응하는 신호로부터 인디케이터(I)의 좌표를 산출할 수 있다. 멀티미디어 디바이스(100)는 산출한 좌표에 대응하도록 인디케이터(I)를 표시할 수 있다.The signal corresponding to the movement of the remote controller 300 detected through the sensor of the remote controller 300 is transmitted to the multimedia device 100. The multimedia device 100 may calculate the coordinates of the indicator I from a signal corresponding to the movement of the remote controller 300. The multimedia device 100 may display the indicator I to correspond to the calculated coordinates.

도 4의 (c)는, 리모트 컨트롤러(300) 내의 특정 버튼을 누른 상태에서, 사용자가 리모트 컨트롤러(300)를 멀티미디어 디바이스(100)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 인디케이터(I)에 대응하는 화면 내의 선택 영역이 줌인 되어 확대 표시될 수 있다. 이와 반대로, 사용자가 리모트 컨트롤러(300)를 멀티미디어 디바이스(100)에 가까워지도록 이동하는 경우, 인디케이터(I)에 대응하는 화면 내의 선택 영역이 줌아웃 되어 축소 표시될 수 있다. 한편, 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)에서 멀어지는 경우, 선택 영역이 줌아웃 되고, 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)에 가까워지는 경우, 선택 영역이 줌인 될 수도 있다.4C illustrates an example in which the user moves the remote controller 300 away from the multimedia device 100 while pressing a specific button in the remote controller 300. Thereby, the selected area in the screen corresponding to the indicator I can be zoomed in and enlarged. Conversely, when the user moves the remote controller 300 closer to the multimedia device 100, the selected area in the screen corresponding to the indicator I may be zoomed out and reduced. On the other hand, when the remote controller 300 moves away from the multimedia device 100, the selection area is zoomed out, and when the remote controller 300 approaches the multimedia device 100, the selection area may be zoomed in.

도 5는 도 4에 도시된 리모트 컨트롤러의 구성 모듈들을 상세히 도시한 블록도이다.FIG. 5 is a block diagram showing the configuration modules of the remote controller illustrated in FIG. 4 in detail.

도 5에 도시된 바와 같이, 리모트 컨트롤러(300)는, 무선통신부(314), 사용자 입력부(315), 센서부(317), 출력부(316), 전원공급부(311), 저장부(312), 그리고 제어부(313) 등을 포함한다.5, the remote controller 300 includes a wireless communication unit 314, a user input unit 315, a sensor unit 317, an output unit 316, a power supply unit 311, a storage unit 312 And a control unit 313.

무선통신부(314)는 임의의 외부 장치와 통신 가능하도록 설계된다.The wireless communication unit 314 is designed to communicate with any external device.

리모트 컨트롤러(300)는 RF 통신규격에 따라 멀티미디어 디바이스(100)와 신호를 송수신할 수 있는 RF 모듈(314a)을 구비할 수 있다. 또한, 리모트 컨트롤러(300)는 IR 통신규격에 따라 멀티미디어 디바이스(100) 또는 외부 디바이스(200)(예를 들어, STB)와 신호를 송수신할 수 있는 IR 모듈(314b)을 구비할 수 있다. The remote controller 300 may include an RF module 314a capable of transmitting and receiving signals to and from the multimedia device 100 according to the RF communication standard. In addition, the remote controller 300 may include an IR module 314b capable of transmitting and receiving signals to and from the multimedia device 100 or the external device 200 (eg, STB) according to the IR communication standard.

리모트 컨트롤러(300)는 멀티미디어 디바이스(100)로 리모트 컨트롤러(300)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(314a)을 통하여 전송한다. The remote controller 300 transmits a signal including information on the movement of the remote controller 300 to the multimedia device 100 through the RF module 314a.

또한, 리모트 컨트롤러(300)는 멀티미디어 디바이스(100)가 전송한 신호를 RF 모듈(314b)을 통하여 수신할 수 있다. 또한, 리모트 컨트롤러(300)는 필요에 따라 IR 모듈(314b)을 통하여 멀티미디어 디바이스(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 제어 신호를 전송할 수 있다. 또한, 리모트 컨트롤러(300)는, 스크린 리모트 컨트롤러를 위한 GUI를 통해 외부 디바이스(200)를 제어하는 경우, RF 모듈(314b)을 통해 멀티미디어 디바이스(100)로부터 수신한 IR 코드값을 토대로 IR 신호를 생성하고, 생성된 IR 신호를 IR 모듈(314b)을 통하여 외부 디바이스(200)로 전송할 수 있다.In addition, the remote controller 300 may receive a signal transmitted from the multimedia device 100 through the RF module 314b. In addition, the remote controller 300 may transmit a control signal related to power on / off, channel change, volume change, etc. to the multimedia device 100 through the IR module 314b as necessary. In addition, when the remote controller 300 controls the external device 200 through a GUI for a screen remote controller, the IR signal is received based on the IR code value received from the multimedia device 100 through the RF module 314b. Generated, the generated IR signal may be transmitted to the external device 200 through the IR module 314b.

사용자 입력부(315)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. The user input unit 315 may include a keypad, a button, a touch pad, or a touch screen.

센서부(317)는 자이로 센서(317a), 가속도 센서(317b), 터치 센서(317c) 등을 구비할 수 있다. 자이로 센서(317a)는 리모트 컨트롤러(300)의 움직임에 관한 정보를 센싱할 수 있다. 일례로, 자이로 센서(317a)는 리모트 컨트롤러(300)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(317b)는 리모트 컨트롤러(300)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 멀티미디어 디바이스(100)와의 거리를 센싱할 수 있다.The sensor unit 317 may include a gyro sensor 317a, an acceleration sensor 317b, a touch sensor 317c, and the like. The gyro sensor 317a may sense information regarding the movement of the remote controller 300. For example, the gyro sensor 317a may sense information regarding the operation of the remote controller 300 based on the x, y, and z axes. The acceleration sensor 317b may sense information on the movement speed of the remote controller 300, and the like. Meanwhile, a distance measurement sensor may be further provided, thereby sensing a distance from the multimedia device 100.

출력부(316)는 사용자 입력부(315)의 조작에 대응하거나 멀티미디어 디바이스(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 일례로, 출력부(316)는 사용자 입력부(315)가 조작되거나 무선 통신부(314)를 통하여 멀티미디어 디바이스(100)와 신호가 송수신 되면 점등되는 LED 모듈(316a), 진동을 발생하는 진동 모듈(316b), 음향을 출력하는 음향 출력 모듈(316c), 또는 영상을 출력하는 디스플레이 모듈(316d)을 구비할 수 있다.The output unit 316 may output an image or audio signal corresponding to manipulation of the user input unit 315 or a signal transmitted from the multimedia device 100. In one example, the output unit 316 is an LED module 316a that lights up when the user input unit 315 is operated or a signal is transmitted and received through the wireless communication unit 314 to the multimedia device 100, a vibration module 316b that generates vibration. ), An audio output module 316c for outputting sound, or a display module 316d for outputting an image.

전원공급부(311)는 리모트 컨트롤러(300)의 각 구성요소에 전원을 공급한다. 전원공급부(311)는 리모트 컨트롤러(300)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다. The power supply unit 311 supplies power to each component of the remote controller 300. The power supply unit 311 may reduce power waste by stopping power supply when the remote controller 300 has not moved for a predetermined time.

저장부(312)는 리모트 컨트롤러(300)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 그리고, 제어부(313)는 리모트 컨트롤러(300)의 제어에 관련된 제반사항을 제어한다. 예를 들어, 상기 제어부(313)는, 사용자 입력부(315)의 소정 키 조작에 대응하는 신호 또는 센서부(317)에서 센싱한 리모트 컨트롤러(300)의 움직임에 대응하는 신호를 무선 통신부(314)를 통하여 멀티미디어 디바이스(100)로 전송할 수 있다.The storage unit 312 may store various types of programs and application data required for control or operation of the remote controller 300. Then, the control unit 313 controls all matters related to the control of the remote controller 300. For example, the control unit 313 may transmit a signal corresponding to a predetermined key operation of the user input unit 315 or a signal corresponding to the movement of the remote controller 300 sensed by the sensor unit 317, to the wireless communication unit 314. It can be transmitted to the multimedia device 100 through.

이하에서는, 각 도면을 참조하여 본 발명의 실시예들을 자세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to each drawing.

도 6은 리모트 컨트롤러를 사용하여 멀티미디어 디바이스를 통해 특정 외부 디바이스를 제어하는 기본적인 프로세스의 일례를 도시한 흐름도이다. 멀티미디어 디바이스(100)가 특정 외부 디바이스(200)의 외부입력 모드로 진입되어 있고, 멀티미디어 디바이스(100)와 특정 외부 디바이스(200)는 페어링이 완료된 상태임을 가정하여 설명한다.6 is a flowchart illustrating an example of a basic process of controlling a specific external device through a multimedia device using a remote controller. It will be described on the assumption that the multimedia device 100 has entered the external input mode of the specific external device 200 and that the pairing of the multimedia device 100 and the specific external device 200 is completed.

특정 외부 디바이스(200)는, 특정 외부 디바이스(200)에서 구현될 수 있는 기능들에 대응하는 GUI 데이터를 멀티미디어 디바이스(100)로 전송한다(S401).The specific external device 200 transmits GUI data corresponding to functions that can be implemented in the specific external device 200 to the multimedia device 100 (S401).

멀티미디어 디바이스(100)는 특정 외부 디바이스(200)로부터 상기 GUI 데이터를 수신하여 디스플레이한다(S402). 상기 GUI 데이터는 멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)에서 수신되고, 제어부(140)의 제어에 따라 디스플레이부(150)에서 상기 수신된 GUI 데이터가 디스플레이된다. 멀티미디어 디바이스(100)의 제어부(140)는 상기 GUI 데이터의 내용이 무엇인지, 상기 GUI 데이터에 특정 외부 디바이스(200)의 어떠한 기능들이 대응되어 있는지 알 수 없다. The multimedia device 100 receives and displays the GUI data from a specific external device 200 (S402). The GUI data is received from the external device interface unit 120 of the multimedia device 100, and the received GUI data is displayed on the display unit 150 under the control of the control unit 140. The control unit 140 of the multimedia device 100 cannot know what the contents of the GUI data are and what functions of the specific external device 200 correspond to the GUI data.

사용자가, 리모트 컨트롤러(300)를, 상기 GUI 데이터에 포함된 제1 메뉴 옵션을 향하게 하고 있다가 상기 GUI 데이터에 포함된 제2 메뉴 옵션을 향하도록 움직인 후 선택 키버튼을 누르는 경우를 예로 들어 설명한다.For example, when the user moves the remote controller 300 toward the first menu option included in the GUI data, and then moves toward the second menu option included in the GUI data, and then presses a selection key button. Explain.

먼저, 멀티미디어 디바이스(100)의 사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 사용자 입력 신호로서, 움직임에 상응하는 신호를 수신한다(S403). First, the user interface unit 180 of the multimedia device 100 receives a signal corresponding to the movement as a user input signal from the remote controller 300 (S403).

멀티미디어 디바이스의 제어부(140)는 상기 수신된 움직임에 상응하는 신호에 기초하여 제1 좌표값 정보를 산출한다(S404). 제1 좌표값 정보는 상기 제1 메뉴 옵션에 대응되는 것으로 가정한다.The control unit 140 of the multimedia device calculates first coordinate value information based on the signal corresponding to the received motion (S404). It is assumed that the first coordinate value information corresponds to the first menu option.

멀티미디어 디바이스의 네트워크 인터페이스부(113)는 상기 산출된 제1 좌표값 정보를 특정 외부 디바이스(200)로 전송한다(S405). The network interface unit 113 of the multimedia device transmits the calculated first coordinate value information to the specific external device 200 (S405).

특정 외부 디바이스(200)는 상기 전송된 제1 좌표값 정보를 처리하여 상기 제1 좌표값 정보에 대응되는 기능을 실행한다(S406). 사용자가 아직 리모트 컨트롤러(300)에 구비된 선택 키버튼을 누르지 않았으므로, 특정 외부 디바이스(200)는 상기 제1 좌표값 정보에 대응되는 기능으로서, 상기 GUI 데이터 상에서 제1 메뉴 옵션을 하이라이트하는 기능을 실행한다.The specific external device 200 processes the transmitted first coordinate value information to execute a function corresponding to the first coordinate value information (S406). Since the user has not yet pressed the selection key button provided on the remote controller 300, the specific external device 200 is a function corresponding to the first coordinate value information, and a function of highlighting a first menu option on the GUI data Run

그리고, 특정 외부 디바이스(200)는 상기 GUI 데이터 상에서 상기 제1 메뉴 옵션을 하이라이트한 결과를 멀티미디어 디바이스(100)로 전송한다(S407). Then, the specific external device 200 transmits the result of highlighting the first menu option on the GUI data to the multimedia device 100 (S407).

멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)는 상기 결과를 수신하고, 제어부(140)는 디스플레이부(150)를 통해 상기 제1 메뉴 옵션이 하이라이트된 GUI 데이터가 디스플레이되도록 제어한다(S408).The external device interface unit 120 of the multimedia device 100 receives the result, and the control unit 140 controls to display GUI data on which the first menu option is highlighted through the display unit 150 (S408). .

또한, 멀티미디어 디바이스(100)의 사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 사용자 입력 신호로서, 움직임에 상응하는 신호를 수신한다(S403).In addition, the user interface unit 180 of the multimedia device 100 receives a signal corresponding to the movement as a user input signal from the remote controller 300 (S403).

멀티미디어 디바이스(100)의 제어부(140)는 상기 수신된 움직임에 상응하는 신호에 기초하여 제2 좌표값 정보를 산출한다(S404). 제2 좌표값 정보는 상기 제2 메뉴 옵션에 대응되는 것으로 가정한다. 제1 좌표값 정보와 제2 좌표값 정보의 사이에 리모트 컨트롤러(300)의 움직임에 대응되는 좌표값 정보가 더 존재할 수 있으나, 설명의 편의상 제어부(140)가 제1 좌표값 정보와 제2 좌표값 정보만 산출하는 경우를 가정한다.The control unit 140 of the multimedia device 100 calculates second coordinate value information based on the signal corresponding to the received motion (S404). It is assumed that the second coordinate value information corresponds to the second menu option. Between the first coordinate value information and the second coordinate value information, coordinate value information corresponding to the movement of the remote controller 300 may be further present, but for convenience of description, the controller 140 controls the first coordinate value information and the second coordinate value. It is assumed that only value information is calculated.

멀티미디어 디바이스(100)의 네트워크 인터페이스부(113)는 상기 산출된 제2 좌표값 정보를 특정 외부 디바이스(200)로 전송한다(S405). The network interface unit 113 of the multimedia device 100 transmits the calculated second coordinate value information to the specific external device 200 (S405).

특정 외부 디바이스(200)는 상기 전송된 제2 좌표값 정보를 처리하여 상기 제2 좌표값 정보에 대응되는 기능을 실행한다(S406). 사용자가 아직 리모트 컨트롤러(300)에 구비된 선택 키버튼을 누르지 않았으므로, 특정 외부 디바이스(200)는 상기 제2 좌표값 정보에 대응되는 기능으로서, 상기 GUI 데이터 상에서 제2 메뉴 옵션을 하이라이트하는 기능을 실행한다.The specific external device 200 processes the transmitted second coordinate value information to execute a function corresponding to the second coordinate value information (S406). Since the user has not yet pressed the selection key button provided on the remote controller 300, the specific external device 200 is a function corresponding to the second coordinate value information, and a function of highlighting a second menu option on the GUI data Run

그리고, 특정 외부 디바이스(200)는 상기 GUI 데이터 상에서 제1 메뉴 옵션이 아닌 제2 메뉴 옵션을 하이라이트한 결과를 멀티미디어 디바이스(100)로 전송한다(S407). Then, the specific external device 200 transmits the result of highlighting the second menu option rather than the first menu option on the GUI data to the multimedia device 100 (S407).

멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)는 상기 결과를 수신하고, 제어부(140)는 디스플레이부(150)를 통해 상기 제2 메뉴 옵션이 하이라이트된 GUI 데이터가 디스플레이되도록 제어한다(S408).The external device interface unit 120 of the multimedia device 100 receives the result, and the control unit 140 controls the GUI data on which the second menu option is highlighted to be displayed through the display unit 150 (S408). .

또한, 멀티미디어 디바이스(100)의 사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 사용자 입력 신호로서, 선택 키버튼에 상응하는 신호를 수신한다(S403).In addition, the user interface unit 180 of the multimedia device 100 receives a signal corresponding to the selection key button as a user input signal from the remote controller 300 (S403).

멀티미디어 디바이스(100)의 제어부(140), 상기 수신된 선택 키버튼에 상응하는 신호가 특정 외부 디바이스(200)가 처리할 수 없는 데이터의 형태인 경우, 특정 외부 디바이스(200)가 처리할 수 있는 데이터의 형태로 처리할 수 있다. 물론, 상기 수신된 선택 키버튼에 상응하는 신호가 특정 외부 디바이스(200)가 처리할 수 있는 데이터의 형태인 경우 위와 같은 제어부(140)의 데이터 처리 과정은 생략될 수 있다.When the signal corresponding to the received selection key button of the control unit 140 of the multimedia device 100 is in the form of data that the specific external device 200 cannot process, the specific external device 200 can process It can be processed in the form of data. Of course, when the signal corresponding to the received selection key button is in the form of data that can be processed by a specific external device 200, the data processing process of the controller 140 as described above may be omitted.

멀티미디어 디바이스(100)의 네트워크 인터페이스부(113)는 상기 선택 키버튼에 상응하는 신호를 특정 외부 디바이스(200)로 전송한다(S405).The network interface unit 113 of the multimedia device 100 transmits a signal corresponding to the selection key button to a specific external device 200 (S405).

특정 외부 디바이스(200)는 상기 전송된 선택 키버튼에 상응하는 신호를 처리하여 상기 키버튼에 상응하는 신호에 대응되는 기능을 실행한다(S406). 즉, 특정 외부 디바이스(200)는, 상기 GUI 데이터 상의 제2 메뉴 옵션에 대응되는 특정 기능을 실행한다.The specific external device 200 processes a signal corresponding to the transmitted selection key button and executes a function corresponding to the signal corresponding to the key button (S406). That is, the specific external device 200 executes a specific function corresponding to the second menu option on the GUI data.

그리고, 특정 외부 디바이스(200)는 상기 제2 메뉴 옵션에 대응되는 특정 기능을 실행한 결과를 멀티미디어 디바이스(100)로 전송한다(S407). Then, the specific external device 200 transmits a result of executing a specific function corresponding to the second menu option to the multimedia device 100 (S407).

멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)는 상기 결과를 수신하고, 제어부(140)는 상기 제2 메뉴 옵션에 대응되는 특정 기능이 실행된 결과를 출력하도록 제어한다. 예를 들어, 상기 제2 메뉴 옵션이 특정 VOD 컨텐츠를 재생하는 옵션에 해당하는 경우, 외부장치 인터페이스부(120)는 상기 특정 VOD 컨텐츠의 오디오/비디오 데이터를 특정 외부 디바이스(200)로부터 수신하고, 제어부(140)는, 오디오 출력부(160)를 통해 상기 오디오 데이터가 출력되도록 제어하고 디스플레이부(150)를 통해 상기 비디오 데이터가 출력되도록 제어한다.The external device interface unit 120 of the multimedia device 100 receives the result, and the control unit 140 controls to output a result of executing a specific function corresponding to the second menu option. For example, when the second menu option corresponds to an option for playing specific VOD content, the external device interface unit 120 receives audio / video data of the specific VOD content from a specific external device 200, The control unit 140 controls the audio data to be output through the audio output unit 160 and controls the video data to be output through the display unit 150.

실시예에 따라, 단계들(S403~S408) 각각은 복수 회 수행될 수도 있으며, 각 단계들 중 일부가 시간적으로 서로 중첩되어 수행될 수도 있다. 또한, 단계(S408)에서 디스플레이부(150)를 통해 상기 비디오 데이터가 출력되고 있는 중에도 단계들(S403~S408) 각각이 복수 회 수행되거나, 각 단계들 중 일부가 시간적으로 서로 중첩되어 수행될 수 있다.Depending on the embodiment, each of the steps S403 to S408 may be performed multiple times, and some of the steps may be performed overlapping each other in time. Also, while the video data is being output through the display unit 150 in step S408, each of the steps S403 to S408 may be performed multiple times, or some of the steps may be performed overlapping each other in time. have.

한편, 특정 외부 디바이스(200)는, 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보에 기초하여, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P) 관련 정보를 멀티미디어 디바이스(100)로 전송할 수 있다(S407).Meanwhile, the specific external device 200 may transmit the indicator P information corresponding to the movement of the remote controller 300 to the multimedia device 100 based on the coordinate value information transmitted from the multimedia device 100. Yes (S407).

멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)는 상기 인디케이터(P) 관련 정보를 수신하고, 제어부(140)는 상기 수신된 인디케이터(P) 관련 정보에 기초하여 인디케이터(P)를 디스플레이하도록 디스플레이부(150)를 제어한다(S408). The external device interface unit 120 of the multimedia device 100 receives the indicator P-related information, and the control unit 140 displays the indicator P to display based on the received indicator-P-related information. The unit 150 is controlled (S408).

그러나, 경우에 따라, 리모트 컨트롤러(300)에 구비된 특정 키버튼에 상응하는 신호는 특정 외부 디바이스(200)로 전송되지 않고 멀티미디어 디바이스(100) 자체의 기능 제어에 이용될 수도 있다. 예를 들어, 사용자가 리모트 컨트롤러(300)에 구비된 키버튼 중에서 전원 온/오프 키버튼이나 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디스플레이하기 위한 키버튼을 누른 경우, 상기 키버튼에 상응하는 신호는 특정 외부 디바이스(200)로 전송되지 않고 멀티미디어 디바이스(100)의 해당 기능을 제어하는 데에 이용될 수 있다.However, in some cases, a signal corresponding to a specific key button provided in the remote controller 300 may not be transmitted to the specific external device 200 and may be used to control the function of the multimedia device 100 itself. For example, when a user presses a power on / off key button or a key button for displaying GUI data related to the multimedia device 100 among key buttons provided in the remote controller 300, a signal corresponding to the key button Can be used to control the corresponding function of the multimedia device 100 without being transmitted to the specific external device 200.

도 7은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 디스플레이되는 특정 외부 디바이스의 GUI 데이터의 일례를 도시한 도면이다. 도 7에서는, 멀티미디어 디바이스(100) 측에서 제어하고자 하는 특정 외부 디바이스(200)가 STB(201)인 경우를 가정하여 설명한다. STB(201)는 HDMI 케이블(C)을 통해 외부장치 인터페이스부(120)와 연결되어 있으나, 이에 한정하지 않는다.7 is a diagram illustrating an example of GUI data of a specific external device displayed on a display unit of a multimedia device according to an embodiment of the present invention. In FIG. 7, it is assumed on the assumption that the specific external device 200 to be controlled by the multimedia device 100 is the STB 201. The STB 201 is connected to the external device interface unit 120 through an HDMI cable C, but is not limited thereto.

도 7을 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에 STB의 GUI 데이터(500)가 디스플레이된다. STB의 GUI 데이터(500)는 멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)가 STB(201)로부터 수신한 것이다. Referring to FIG. 7, GUI data 500 of the STB is displayed on the display unit 150 of the multimedia device 100. The GUI data 500 of the STB is received from the STB 201 by the external device interface 120 of the multimedia device 100.

STB의 GUI 데이터(500)는, 멀티미디어 디바이스(100)와 STB(201)의 페어링이 완료된 후 STB(201)로부터 전송된 것일 수도 있고, STB(201)의 외부입력 모드로 진입한 후 멀티미디어 디바이스(100)와 STB(201)의 페어링이 완료되기 전 STB(201)로부터 전송된 것일 수도 있다. 다만, 이하에서, 리모트 컨트롤러(300)를 사용하여, 멀티미디어 디바이스(100)를 통해, STB의 GUI 데이터(700)에 대응되는 STB(201)의 각 기능들을 제어하고자 하는 경우에는, 멀티미디어 디바이스(100)와 STB(201)의 페어링이 완료된 경우를 가정한다. The GUI data 500 of the STB may be transmitted from the STB 201 after the pairing of the multimedia device 100 and the STB 201 is completed, or after entering the external input mode of the STB 201, the multimedia device ( 100) may be transmitted from the STB 201 before pairing of the STB 201 is completed. However, hereinafter, when using the remote controller 300 to control each function of the STB 201 corresponding to the GUI data 700 of the STB through the multimedia device 100, the multimedia device 100 It is assumed that pairing of) and STB 201 is completed.

STB의 GUI 데이터(500)는 STB(201)에서 실행될 수 있는 각 기능들에 대응하는 메뉴 옵션들을 포함한다. 예를 들어, STB의 GUI 데이터(500)는 실시간 방송(510)으로서 채널 별 썸네일 이미지들(511~512)을 포함하고, VOD 서비스(520)로서 VOD 컨텐츠의 종류를 나타내는 메뉴들(521~525)을 포함하고, Fun & Life(530)로서 오늘의 날씨 메뉴(531)와 게임 메뉴(532) 등을 포함할 수 있다. 다만, 멀티미디어 디바이스(100)의 제어부(140)는 STB의 GUI 데이터(500)의 내용이 무엇인지, STB의 GUI 데이터(500)에 STB(201)의 어떠한 기능들이 대응되어 있는지 알 수 없다.The STB's GUI data 500 includes menu options corresponding to each function that can be executed in the STB 201. For example, the GUI data 500 of the STB includes real-time broadcasts 510 and thumbnail images 511 to 512 for each channel, and menus 521 to 525 indicating the type of VOD content as the VOD service 520. ), And may include today's weather menu 531 and game menu 532 as Fun & Life 530. However, the control unit 140 of the multimedia device 100 does not know what the contents of the GUI data 500 of the STB and what functions of the STB 201 correspond to the GUI data 500 of the STB.

사용자가 리모트 컨트롤러(300)를 STB의 GUI 데이터(500)를 향해 움직이면, 도 6과 관련하여 상술한 바에 따라 좌표값 정보가 멀티미디어 디바이스(100)에서 STB(201)로 전송되고, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P) 관련 정보가 STB(201)에서 멀티미디어 디바이스(100)로 전송된다. 이에 따라, 멀티미디어 디바이스(100)의 디스플레이부(150)에, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P)가 표시된다.When the user moves the remote controller 300 toward the GUI data 500 of the STB, coordinate value information is transmitted from the multimedia device 100 to the STB 201 as described above with reference to FIG. 6, and the remote controller 300 ) Information corresponding to the movement of the indicator P is transmitted from the STB 201 to the multimedia device 100. Accordingly, an indicator P corresponding to the movement of the remote controller 300 is displayed on the display unit 150 of the multimedia device 100.

일례로, 사용자가 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P)를 KBS1 채널의 썸네일 이미지(511) 상에서 신작 영화 메뉴(523)로 옮긴 경우, 도 6과 관련하여 상술한 바에 따라 좌표값 정보에 상응하는 신호가 멀티미디어 디바이스(100)에서 STB(201)로 전송되고, 상기 좌표값 정보에 대응되는 기능 실행 결과가 STB(201)에서 멀티미디어 디바이스(100)로 전송된다. 이에 따라, 멀티미디어 디바이스(100)의 디스플레이부(150)에, KBS1 채널의 썸네일 이미지(511)가 하이라이트되었다가 KBS1 채널의 썸네일 이미지(511)의 하이라이트 상태가 해제되고 신작 영화 메뉴(523)가 하이라이트되는 결과가 순차적으로 출력된다.For example, when the user moves the indicator P corresponding to the movement of the remote controller 300 to the new movie menu 523 on the thumbnail image 511 of the KBS1 channel, the coordinate values as described above with reference to FIG. 6. A signal corresponding to the information is transmitted from the multimedia device 100 to the STB 201, and a function execution result corresponding to the coordinate value information is transmitted from the STB 201 to the multimedia device 100. Accordingly, on the display unit 150 of the multimedia device 100, the thumbnail image 511 of the KBS1 channel is highlighted, and then the highlight state of the thumbnail image 511 of the KBS1 channel is released and the new movie menu 523 is highlighted. Results are output sequentially.

다른 일례로, 사용자가 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P)를 KBS1 채널의 썸네일 이미지(511) 상에 위치시킨 후 선택 키버튼을 누른 경우, 도 6과 관련하여 상술한 바에 따라, KBS1 채널의 썸네일 이미지(511)가 하이라이트된 후 KBS1 채널의 방송 보기 메뉴로 진입하여 KBS1 채널의 라이브 방송 데이터가 디스플레이부(150) 및 오디오 출력부(160)를 통해 출력된다.As another example, when the user positions the indicator P corresponding to the movement of the remote controller 300 on the thumbnail image 511 of the KBS1 channel and presses the select key button, as described above with reference to FIG. , After the thumbnail image 511 of the KBS1 channel is highlighted, the broadcast view menu of the KBS1 channel is entered and live broadcast data of the KBS1 channel is output through the display unit 150 and the audio output unit 160.

한편, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 STB의 GUI 데이터만 디스플레이된 상태라면, 제어부(140)는, 리모트 컨트롤러(300)가 특정 외부 디바이스(200)의 제어 모드로 설정되어 있다고 판단할 수 있다. 그러나, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 GUI 데이터뿐만 아니라 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100)를 제어할 것인지 특정 외부 디바이스(200)를 제어할 것인지가 문제된다.Meanwhile, if only the GUI data of the STB received from the specific external device 200 is displayed on the display unit 150, the control unit 140 sets the remote controller 300 to the control mode of the specific external device 200 It can be judged that it is. However, when GUI data related to the multimedia device 100 as well as GUI data received from a specific external device 200 is displayed on the display unit 150, the multimedia device 100 is used by using the remote controller 300. Whether to control or to control the specific external device 200 is a problem.

이하에서는, 도 8 내지 도 11을 참조하여, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 GUI 데이터 외에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어하는 첫 번째 방법을 자세히 설명하기로 한다.Hereinafter, with reference to FIGS. 8 to 11, when GUI data related to the multimedia device 100 is displayed on the display unit 150 in addition to GUI data received from a specific external device 200, the remote controller 300 The first method of controlling the multimedia device 100 and the specific external device 200 by using will be described in detail.

도 8은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 도시한 흐름도이다.8 is a flowchart illustrating an example of a method for controlling a multimedia device according to an embodiment of the present invention.

사용자 인터페이스부(180)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 GUI 데이터가 디스플레이된 상태에서, 사용자 입력 신호를 수신한다(S601). 일례로, 사용자 입력 신호는 리모트 컨트롤러(300)로부터 수신된다. 여기서, 상기 사용자 입력 신호는 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디스플레이하기 위한 신호는 아닌 것을 전제한다.The user interface unit 180 receives a user input signal while the GUI data received from the specific external device 200 is displayed on the display unit 150 (S601). In one example, the user input signal is received from the remote controller 300. Here, it is assumed that the user input signal is not a signal for displaying GUI data related to the multimedia device 100.

제어부(140)는 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지를 디텍트한다(S602). The control unit 140 detects whether GUI data regarding the multimedia device 100 is displayed on the display unit 150 (S602).

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는, 멀티미디어 디바이스(100)의 각 기능들을 제어하기 위하여, 멀티미디어 디바이스(100)의 각 기능들에 대응되는 그래픽 이미지를 포함할 수 있다. 멀티미디어 디바이스(100)의 기능이란, 채널 변경, 채널 선택, 음량 조절, 외부입력 모드 선택, 어플리케이션 실행, 환경 설정 등 멀티미디어 디바이스(100)에서 구현될 수 있는 모든 기능을 포함하는 개념이다.The GUI data for the multimedia device 100 may include a graphic image corresponding to each function of the multimedia device 100 in order to control each function of the multimedia device 100. The function of the multimedia device 100 is a concept including all functions that can be implemented in the multimedia device 100, such as channel change, channel selection, volume control, external input mode selection, application execution, environment setting, and the like.

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는 제어부(140) 내 GUI 생성부(143)에서 생성되므로, 제어부(140)는 디스플레이부(150)가 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지 여부를 쉽게 알 수 있다.Since GUI data relating to the multimedia device 100 is generated by the GUI generating unit 143 in the control unit 140, the control unit 140 determines whether the display unit 150 displays GUI data related to the multimedia device 100. It is easy to know whether or not.

제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트하지 못한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있지 않은 경우, 제어부(140)는 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S603). 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다. 단계(S603)의 구체적인 과정은 도 6 및 도 7과 관련하여 상술한 바와 유사하므로 자세한 설명은 생략한다.When the control unit 140 fails to detect GUI data regarding the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is not displayed on the display unit 150. In this case, the control unit 140 controls the network interface unit 113 to transmit information related to the user input signal to the external device 200 (S603). This is because when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the user's intention is to control the specific external device 200 using the remote controller 300. The detailed process of step S603 is similar to that described above with reference to FIGS. 6 and 7, so a detailed description thereof will be omitted.

반면, 제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있는 경우, 제어부(140)는 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다. 특정 외부 디바이스(200)로부터 수신된 GUI 데이터가 디스플레이된 상태에서 사용자의 선택에 의해 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이된 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)가 아닌 멀티미디어 디바이스(100)를 제어하고자 하는 것이기 때문이다. 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는, 디스플레이부(150)의 화면에서 상기 특정 외부 디바이스(200)의 GUI 데이터 상에 상기 상기 특정 외부 디바이스(200)의 GUI 데이터와 오버레이되어 디스플레이될 수 있다.On the other hand, when the control unit 140 detects GUI data relating to the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is displayed on the display unit 150. In this case, the control unit 140 executes the function of the multimedia device 100 according to the user input signal received from the user interface unit 180. When GUI data related to the multimedia device 100 is displayed by the user's selection while the GUI data received from the specific external device 200 is displayed, the user's intention is to use the remote controller 300 to specify the specific external device. This is because it is intended to control the multimedia device 100, not 200. GUI data relating to the multimedia device 100 may be displayed on the screen of the display unit 150 overlaid with GUI data of the specific external device 200 on the GUI data of the specific external device 200. .

제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있는 경우, 제어부(140)는 리모트 컨트롤러(300)의 움직임에 대응하는 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(I)를 제1 인디케이터(I)라 칭하기로 한다. 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 움직임에 상응하는 신호에 기초하여 좌표값 정보를 산출하고, 상기 산출된 좌표값 정보에 따라 제1 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. When the control unit 140 detects GUI data related to the multimedia device 100 displayed on the display unit 150, that is, when the GUI data related to the multimedia device 100 is displayed on the display unit 150, The control unit 140 controls the display unit 150 to output an indicator I corresponding to the movement of the remote controller 300. The indicator I will be referred to as a first indicator I. The controller 140 calculates coordinate value information based on a signal corresponding to the motion received from the remote controller 300, and displays the display unit 150 to output the first indicator I according to the calculated coordinate value information. ) Control.

반면, 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 리모트 컨트롤러(300)가 특정 외부 디바이스(200)의 제어 모드로 변경된 상태이므로 상기 인디케이터(I)는 디스플레이되지 않는다. 대신, 특정 외부 디바이스(200)는, 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보에 상응하는 신호에 기초하여, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P) 관련 정보를 멀티미디어 디바이스(100)로 전송한다. 외부장치 인터페이스부(120)는 상기 인디케이터(P) 관련 정보를 수신하고, 제어부(140)는 상기 수신된 인디케이터(P) 관련 정보에 기초하여 인디케이터(P)를 디스플레이하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(P)를 제2 인디케이터(P)라 칭하기로 한다.On the other hand, when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the remote controller 300 is changed to the control mode of the specific external device 200, so the indicator I is not displayed. Does not. Instead, the specific external device 200, based on the signal corresponding to the coordinate value information transmitted from the multimedia device 100, the information related to the indicator (P) corresponding to the movement of the remote controller 300, the multimedia device (100) ). The external device interface unit 120 receives the indicator P-related information, and the control unit 140 controls the display unit 150 to display the indicator P based on the received indicator-P related information do. The indicator P will be referred to as a second indicator P.

제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다. 사용자는, 디스플레이부(150)에 출력되는 인디케이터의 변화에 기초하여, 현재 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)의 제어 모드인지 아니면 특정 외부 디바이스(200)의 제어 모드인지를 인지할 수 있다.The first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other. The user may recognize whether the current remote controller 300 is the control mode of the multimedia device 100 or the control mode of the specific external device 200 based on the change of the indicator output to the display unit 150. .

도 9는 본 발명의 일 실시예에 따라 멀티미디어 디바이스의 디스플레이부에 특정 외부 디바이스로부터 수신된 GUI 데이터가 디스플레이되는 일례를 도시한 도면이고, 도 10은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이고, 도 11은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 다른 일례를 도시한 도면이다.9 is a diagram illustrating an example in which GUI data received from a specific external device is displayed on a display unit of a multimedia device according to an embodiment of the present invention, and FIG. 10 is a display of a multimedia device according to an embodiment of the present invention FIG. 9 is a diagram illustrating an example in which GUI data of a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed, and FIG. 11 is a diagram of a display unit of a multimedia device according to an embodiment 9 is a diagram illustrating another example in which GUI data regarding a multimedia device is displayed while GUI data of a specific external device is displayed.

도 9를 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에 GUI 데이터(500)가 디스플레이된다. GUI 데이터(500)는 멀티미디어 디바이스(100)의 외부장치 인터페이스부(120)가 STB(201)로부터 수신한 것이다.Referring to FIG. 9, GUI data 500 is displayed on the display unit 150 of the multimedia device 100. The GUI data 500 is received from the STB 201 by the external device interface 120 of the multimedia device 100.

사용자가 리모트 컨트롤러(300)를 움직이거나 리모트 컨트롤러(300)에 구비된 특정 키버튼을 누르는 경우, 사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 사용자 입력 신호를 수신한다. 사용자 입력 신호는 리모트 컨트롤러(300)의 움직임에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다.When the user moves the remote controller 300 or presses a specific key button provided on the remote controller 300, the user interface unit 180 receives a user input signal from the remote controller 300. The user input signal includes at least one of a signal corresponding to the movement of the remote controller 300 or a key button provided in the remote controller 300.

디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500)가 디스플레이 되어 있고 멀티미디어 디바이스(100)에 관한 GUI 데이터는 디스플레이 되어 있지 않으므로, 제어부(140)는, 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다. 상기 사용자 입력 신호와 관련된 정보는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다.Since the GUI data 500 received from the STB 201 is displayed on the display unit 150 and GUI data regarding the multimedia device 100 is not displayed, the control unit 140 is associated with the user input signal. The network interface unit 113 is controlled to transmit information to the external device 200. The information related to the user input signal is at least one of a signal corresponding to coordinate value information calculated based on a signal corresponding to the movement of the remote controller 300 or a signal corresponding to a key button provided in the remote controller 300. It includes.

특정 외부 디바이스(200)는, 멀티미디어 디바이스(100)로부터 전송된 좌표값 정보에 상응하는 신호에 기초하여, 리모트 컨트롤러(300)의 움직임에 대응되는 인디케이터(P) 관련 정보를 멀티미디어 디바이스(100)로 전송한다. 외부장치 인터페이스부(120)는 상기 인디케이터(P) 관련 정보를 수신하고, 제어부(140)는 상기 수신된 인디케이터(P) 관련 정보에 기초하여 인디케이터(P)를 디스플레이하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(P)를 제2 인디케이터(P)라 칭하기로 한다. 즉, 상기 제2 인디케이터(P)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 따라 상기 STB(200)의 GUI 데이터(500)를 제어하기 위한 것이다.The specific external device 200 transmits the indicator P information corresponding to the movement of the remote controller 300 to the multimedia device 100 based on the signal corresponding to the coordinate value information transmitted from the multimedia device 100. send. The external device interface unit 120 receives the indicator P-related information, and the control unit 140 controls the display unit 150 to display the indicator P based on the received indicator-P related information do. The indicator P will be referred to as a second indicator P. That is, the second indicator P is for controlling the GUI data 500 of the STB 200 according to a signal corresponding to the movement of the remote controller 300.

사용자가 STB(201)에서 제공하는 서비스를 이용하는 중에, 리모트 컨트롤러(300)에 구비된 특정 키버튼 또는 멀티미디어 디바이스(100)에 구비된 특정 로컬 키버튼 등을 누른 경우, 도 10 또는 도 11에 도시된 바와 같이, 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이부(150)에 디스플레이될 수 있다.When a user presses a specific key button provided in the remote controller 300 or a specific local key button provided in the multimedia device 100 while using the service provided by the STB 201, it is illustrated in FIGS. 10 or 11 As illustrated, GUI data regarding the multimedia device 100 may be displayed on the display unit 150.

일례로, 도 10을 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500) 외에, 멀티미디어 디바이스(100)에 관한 제1 GUI 데이터(610)도 함께 디스플레이된다. For example, referring to FIG. 10, in addition to the GUI data 500 received from the STB 201 on the display unit 150 of the multimedia device 100, first GUI data 610 relating to the multimedia device 100. Is also displayed.

제1 GUI 데이터(610)는 멀티미디어 디바이스(100)의 기능을 제어하기 위한 것으로, 일례로 스크린 리모트 컨트롤러일 수 있다. 제1 GUI 데이터(610)에는 멀티미디어 디바이스(100)의 기능들을 제어하기 위한 가상 키버튼이 포함되어 있을 수 있다. 제1 GUI 데이터(610)는, 디스플레이부(150)의 화면에서 STB(201)의 GUI 데이터(500) 상에 오버레이되어 디스플레이될 수 있다.The first GUI data 610 is for controlling the function of the multimedia device 100, and may be, for example, a screen remote controller. The first GUI data 610 may include a virtual key button for controlling functions of the multimedia device 100. The first GUI data 610 may be displayed overlaid on the GUI data 500 of the STB 201 on the screen of the display unit 150.

사용자는, 리모트 컨트롤러(300)를 움직이면서 제1 GUI 데이터(610) 내 가상 키버튼을 선택하거나 리모트 컨트롤러(300)에 구비된 키버튼을 선택할 수 있다.The user may select a virtual key button in the first GUI data 610 while moving the remote controller 300 or a key button provided in the remote controller 300.

제어부(140)는, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다. 상기 사용자 입력 신호는 리모트 컨트롤러(300)의 움직임에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다. 제어부(140)는, 수신된 사용자 입력 신호에 맵핑된 멀티미디어 디바이스(100)의 기능을 실행할 수 있다. 메모리(130)에는 사용자 입력 신호와 멀티미디어 디바이스(100)의 기능을 맵핑하는 맵핑 데이터가 저장되어 있다. 사용자는, 리모트 컨트롤러(300)를 사용하여, STB(201)의 외부입력 모드를 완전히 벗어나도록 멀티미디어 디바이스(100)를 제어할 수도 있다.The control unit 140 executes the function of the multimedia device 100 according to the user input signal received from the user interface unit 180. The user input signal includes at least one of a signal corresponding to the movement of the remote controller 300 or a key button provided in the remote controller 300. The control unit 140 may execute a function of the multimedia device 100 mapped to the received user input signal. The memory 130 stores mapping data mapping user input signals to functions of the multimedia device 100. The user may control the multimedia device 100 to completely exit the external input mode of the STB 201 using the remote controller 300.

제어부(140)는, 리모트 컨트롤러(300)의 움직임에 대응하는 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. 상기 인디케이터(I)를 제1 인디케이터(I)라 칭하기로 한다. 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 움직임에 상응하는 신호에 기초하여 좌표값 정보를 산출하고, 상기 산출된 좌표값 정보에 따라 제1 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. 즉, 상기 제1 인디케이터(I)는 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 따라 멀티미디어 디바이스(100)에 관한 GUI 데이터를 제어하기 위한 것이다.The control unit 140 controls the display unit 150 to output an indicator I corresponding to the movement of the remote controller 300. The indicator I will be referred to as a first indicator I. The controller 140 calculates coordinate value information based on a signal corresponding to the motion received from the remote controller 300, and displays the display unit 150 to output the first indicator I according to the calculated coordinate value information. ) Control. That is, the first indicator I is for controlling GUI data related to the multimedia device 100 according to a signal corresponding to the movement of the remote controller 300.

도 9 및 도 10을 같이 비교하면, 제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다. 즉, 리모트 컨트롤러(300)를 사용하여 STB(201)를 제어하는 경우에는 제2 인디케이터(P)가 디스플레이부(150)에 표시되고, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100)를 제어하는 경우에는 상기 제2 인디케이터(P)와 다른 제1 인디케이터(I)가 디스플레이부(150)에 표시된다. 사용자는, 디스플레이부(150)에 출력되는 인디케이터의 변화에 기초하여, 현재 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)의 제어 모드인지 아니면 특정 외부 디바이스(200)의 제어 모드인지를 인지할 수 있다.When comparing FIGS. 9 and 10 together, the first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other. That is, when the STB 201 is controlled using the remote controller 300, the second indicator P is displayed on the display unit 150, and the multimedia device 100 is controlled using the remote controller 300. In the case of, the first indicator I different from the second indicator P is displayed on the display unit 150. The user may recognize whether the current remote controller 300 is the control mode of the multimedia device 100 or the control mode of the specific external device 200 based on the change of the indicator output to the display unit 150. .

다른 일례로, 도 11을 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500) 외에, 멀티미디어 디바이스(100)에 관한 제2 GUI 데이터(620)도 함께 디스플레이된다. As another example, referring to FIG. 11, on the display unit 150 of the multimedia device 100, in addition to the GUI data 500 received from the STB 201, second GUI data 620 about the multimedia device 100 ) Is also displayed.

제2 GUI 데이터(620)는 멀티미디어 디바이스(100)의 기능을 제어하기 위한 것으로, 일례로 화면 설정창 일 수 있다. 제2 GUI 데이터(620)에는 멀티미디어 디바이스(100)의 화면 설정 기능들을 제어하기 위한 메뉴 옵션 이미지들이 포함되어 있을 수 있다. 제2 GUI 데이터(620)는, 디스플레이부(150)의 화면에서 STB(201)의 GUI 데이터(500) 상에 오버레이되어 디스플레이될 수 있다.The second GUI data 620 is for controlling the function of the multimedia device 100, and may be, for example, a screen setting window. The second GUI data 620 may include menu option images for controlling screen setting functions of the multimedia device 100. The second GUI data 620 may be displayed overlaid on the GUI data 500 of the STB 201 on the screen of the display unit 150.

사용자는, 리모트 컨트롤러(300)를 사용하여 제2 GUI 데이터(620) 내 메뉴 옵션 이미지를 선택하거나 리모트 컨트롤러(300)에 구비된 키버튼을 선택할 수 있다.The user may select a menu option image in the second GUI data 620 using the remote controller 300 or select a key button provided in the remote controller 300.

제어부(140)는, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다. 상기 사용자 입력 신호는 리모트 컨트롤러(300)의 움직임에 상응하는 신호 또는 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함한다. 제어부(140)는, 수신된 사용자 입력 신호에 맵핑된 멀티미디어 디바이스(100)의 기능을 실행할 수 있다. The control unit 140 executes the function of the multimedia device 100 according to the user input signal received from the user interface unit 180. The user input signal includes at least one of a signal corresponding to the movement of the remote controller 300 or a key button provided in the remote controller 300. The control unit 140 may execute a function of the multimedia device 100 mapped to the received user input signal.

제어부(140)는, 리모트 컨트롤러(300)의 움직임에 대응하는 제1 인디케이터(I)를 출력하도록 디스플레이부(150)를 제어한다. The control unit 140 controls the display unit 150 to output the first indicator I corresponding to the movement of the remote controller 300.

도 9 및 도 11을 같이 비교하면, 제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다.When comparing FIGS. 9 and 11 together, the first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other.

한편, 디스플레이부(150)에 제1 외부 디바이스로부터 수신된 비디오 데이터 및 GUI 데이터 중 적어도 하나와 제2 외부 디바이스로부터 수신된 GUI 데이터가 함께 디스플레이된 경우, 리모트 컨트롤러(300)를 사용하여 제1 외부 디바이스를 제어할 것인지 제2 외부 디바이스를 제어할 것인지가 문제된다. 이를 도 12를 참조하여 설명한다.Meanwhile, when at least one of the video data and GUI data received from the first external device and the GUI data received from the second external device are displayed on the display unit 150 together, the first external using the remote controller 300 is displayed. The question is whether to control the device or the second external device. This will be described with reference to FIG. 12.

도 12는 본 발명의 일 실시예에 따라 멀티미디어 디바이스의 디스플레이부에 제1 외부 디바이스로부터 수신된 비디오 데이터가 디스플레이된 상태에서 제2 외부 디바이스로부터 수신된 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다. 도 12에서, 제1 외부 디바이스는 STB(201)로, 제2 외부 디바이스는 HTS(202)인 것으로 가정한다.12 is a diagram illustrating an example in which GUI data received from a second external device is displayed while video data received from a first external device is displayed on a display unit of a multimedia device according to an embodiment of the present invention. In FIG. 12, it is assumed that the first external device is STB 201 and the second external device is HTS 202.

도 12를 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, 외부장치 인터페이스부(120)를 통해 STB(201)로부터 수신된 비디오 데이터(540)가 디스플레이된다. 도 7과 관련하여 상술한 바와 유사하게, 디스플레이부(150)에 STB(201)로부터 수신된 비디오 데이터 및/또는 GUI 데이터만 디스플레이된 경우에는 리모트 컨트롤러(300)가 STB(201)의 제어 모드로 설정될 것이다. 따라서, 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 움직임에 상응하는 신호 및/또는 키버튼에 상응하는 신호가 네트워크 인터페이스부(113)를 통해 STB(201)로 전송되도록 제어한다.Referring to FIG. 12, video data 540 received from the STB 201 is displayed on the display unit 150 of the multimedia device 100 through the external device interface unit 120. Similar to that described above with reference to FIG. 7, when only video data and / or GUI data received from the STB 201 is displayed on the display 150, the remote controller 300 enters the control mode of the STB 201. Will be set. Accordingly, the control unit 140 controls the signal corresponding to the movement received from the remote controller 300 and / or the signal corresponding to the key button to be transmitted to the STB 201 through the network interface unit 113.

멀티미디어 디바이스(100)의 디스플레이부(150)에 STB(201)로부터 수신된 비디오 데이터(540)가 디스플레이된 상태에서, 외부장치 인터페이스부(120)를 통해 HTS(202)로부터 HTS(202)의 GUI 데이터(630)가 수신된 경우, 제어부(140)는 상기 비디오 데이터(540)와 HTS(202)의 GUI 데이터(630)가 함께 디스플레이되도록 디스플레이부(150)를 제어한다. HTS(202)의 GUI 데이터(630)는 상기 비디오 데이터(540) 상에 상기 비디오 데이터(540)와 오버레이되어 디스플레이될 수 있다.In the state in which the video data 540 received from the STB 201 is displayed on the display unit 150 of the multimedia device 100, the GUI of the HTS 202 from the HTS 202 through the external device interface unit 120 When the data 630 is received, the control unit 140 controls the display unit 150 such that the video data 540 and GUI data 630 of the HTS 202 are displayed together. The GUI data 630 of the HTS 202 may be displayed overlaid with the video data 540 on the video data 540.

상기 HTS(202)의 GUI 데이터(630)는 HTS(202)의 기능을 제어하기 위한 것으로, HTS(202)의 기능에 대응되는 메뉴 옵션 등을 포함할 수 있다.The GUI data 630 of the HTS 202 is for controlling the function of the HTS 202, and may include menu options corresponding to the function of the HTS 202, and the like.

멀티미디어 디바이스(100)의 디스플레이부(150)에 STB(201)로부터 수신된 비디오 데이터(540)가 디스플레이된 상태, 사용자에 의해 HTS(202)의 GUI 데이터(630)가 디스플레이된 경우, 사용자는 리모트 컨트롤러(300)를 사용하여 STB(201)가 아닌 HTS(202)을 제어하고자 하는 것이므로, 리모트 컨트롤러(300)가 HTS(202)의 제어 모드로 변경될 수 있다.When the video data 540 received from the STB 201 is displayed on the display unit 150 of the multimedia device 100, and the GUI data 630 of the HTS 202 is displayed by the user, the user Since the controller 300 is to control the HTS 202 instead of the STB 201 using the controller 300, the remote controller 300 may be changed to the control mode of the HTS 202.

따라서, 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 움직임에 상응하는 신호 및/또는 키버튼에 상응하는 신호가 네트워크 인터페이스부(113)를 통해 HTS(202)으로 전송되도록 제어한다. 디스플레이부(150)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 따라 상기 HTS(202)의 GUI 데이터(630)를 제어하기 위한 제3 인디케이터(Q)를 출력할 수 있다. 상기 제3 인디케이터(Q)는 상기 제2 인디케이터(P)와 모양, 크기, 색깔 또는 투명도 중 적어도 하나가 동일할 수도 있고 다를 수도 있다.Accordingly, the control unit 140 controls the signal corresponding to the movement received from the remote controller 300 and / or the signal corresponding to the key button to be transmitted to the HTS 202 through the network interface unit 113. The display unit 150 may output a third indicator Q for controlling the GUI data 630 of the HTS 202 according to a signal corresponding to the movement of the remote controller 300. At least one of shape, size, color, or transparency of the third indicator Q may be the same as or different from the second indicator P.

이하에서는, 도 13 내지 도 17을 참조하여, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 GUI 데이터 중 적어도 하나와 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어하는 두 번째 방법을 자세히 설명하기로 한다.Hereinafter, with reference to FIGS. 13 to 17, when the display unit 150 simultaneously displays at least one of video data and GUI data received from a specific external device 200 and GUI data related to the multimedia device 100. The second method of controlling the multimedia device 100 and the specific external device 200 using the remote controller 300 will be described in detail.

도 13은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 도시한 흐름도이다.13 is a flowchart illustrating another example of a method of controlling a multimedia device according to an embodiment of the present invention.

사용자 인터페이스부(180)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 디스플레이된 상태에서, 사용자 입력 신호를 수신한다(S701). 일례로, 사용자 입력 신호는 리모트 컨트롤러(300)로부터 수신된다. 여기서, 상기 사용자 입력 신호는 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디스플레이하기 위한 신호는 아닌 것을 전제한다.The user interface unit 180 receives a user input signal while at least one of video data received from the specific external device 200 and GUI data of the specific external device 200 is displayed on the display unit 150. (S701). In one example, the user input signal is received from the remote controller 300. Here, it is assumed that the user input signal is not a signal for displaying GUI data related to the multimedia device 100.

제어부(140)는 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지를 디텍트한다(S702). The control unit 140 detects whether GUI data regarding the multimedia device 100 is displayed on the display unit 150 (S702).

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는 제어부(140) 내 GUI 생성부(143)에서 생성되므로, 제어부(140)는 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지 여부를 쉽게 알 수 있다.Since GUI data relating to the multimedia device 100 is generated by the GUI generating unit 143 in the control unit 140, the control unit 140 determines whether GUI data related to the multimedia device 100 is displayed on the display unit 150. It is easy to know whether or not.

제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트하지 못한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있지 않은 경우, 제어부(140)는 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S703). 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다. 단계(S703)의 구체적인 과정은 도 6 및 도 7과 관련하여 상술한 바와 유사하므로 자세한 설명은 생략한다.When the control unit 140 fails to detect GUI data regarding the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is not displayed on the display unit 150. In this case, the control unit 140 controls the network interface unit 113 to transmit information related to the user input signal to the external device 200 (S703). This is because when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the user's intention is to control the specific external device 200 using the remote controller 300. The detailed process of step S703 is similar to that described above with reference to FIGS. 6 and 7, so a detailed description thereof will be omitted.

반면, 제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있는 경우, 제어부(140)는 사용자 입력 신호의 조건 만족 여부에 따라 처리를 달리한다(S704).On the other hand, when the control unit 140 detects GUI data relating to the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is displayed on the display unit 150. In this case, the controller 140 varies the processing according to whether the user input signal condition is satisfied (S704).

먼저, 제어부(140)는, 사용자 입력 신호가 제1 조건을 만족하는 경우 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다(S705). 즉, 제어부(140)는, 사용자 입력 신호가 제1 조건을 만족하는 경우 사용자 입력 신호에 따라 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 멀티미디어 디바이스(100)의 기능을 실행한다.First, when the user input signal satisfies the first condition, the controller 140 executes the function of the multimedia device 100 according to the user input signal (S705). That is, when the user input signal satisfies the first condition, the controller 140 executes the function of the multimedia device 100 corresponding to GUI data related to the multimedia device 100 according to the user input signal.

반면, 제어부(140)는, 사용자 입력 신호가 제2 조건을 만족하는 경우 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S703).On the other hand, when the user input signal satisfies the second condition, the control unit 140 controls the network interface unit 113 to transmit information related to the user input signal to the external device 200 (S703).

도 14는 도 13에 도시된 멀티미디어 디바이스의 제어 방법의 일부 과정을 보다 자세히 설명하기 위한 흐름도이다. 멀티미디어 디바이스(100)의 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나와 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우를 가정한다.14 is a flowchart for explaining in more detail some processes of the method for controlling the multimedia device illustrated in FIG. 13. At least one of video data received from the specific external device 200 and GUI data of the specific external device 200 and GUI data regarding the multimedia device 100 are displayed on the display unit 150 of the multimedia device 100 together. Assume the case.

사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 움직임에 상응하는 신호 및/또는 키버튼에 상응하는 신호를 수신한다(S711).The user interface unit 180 receives a signal corresponding to a movement and / or a signal corresponding to a key button from the remote controller 300 (S711).

제어부(140)는, 상기 수신된 움직임에 상응하는 신호에 기초하여 좌표값 정보를 산출한다. 제어부(140)는 상기 산출된 좌표값 정보의 조건 만족 여부에 따라 처리를 달리한다(S713).The controller 140 calculates coordinate value information based on the signal corresponding to the received motion. The controller 140 performs different processing according to whether the calculated coordinate value information is satisfied (S713).

제어부(140)는, 상기 산출된 좌표값 정보가 제1 조건을 만족하는 경우, 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다(S714). 상기 제1 조건은, 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역에 대응되는 조건을 의미한다. 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역에 대응되는 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)가 아닌 멀티미디어 디바이스(100)를 제어하고자 하는 것이기 때문이다.When the calculated coordinate value information satisfies the first condition, the controller 140 executes the function of the multimedia device 100 according to the user input signal (S714). The first condition refers to a condition in which the calculated coordinate value information corresponds to an area in which GUI data regarding the multimedia device 100 is displayed on the screen of the display unit 150. When the coordinate value information corresponds to an area in which GUI data for the multimedia device 100 is displayed on the screen of the display unit 150, the user's intention is to use the remote controller 300 to identify a specific external device 200. This is because it is not intended to control the multimedia device 100.

예를 들어, 사용자가 리모트 컨트롤러(300)를 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역을 향하게 한 후 선택 키버튼을 누른 경우, 상기 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보는 제1 조건을 만족하는 것이 된다. 따라서, 제어부(140)는 상기 움직임에 상응하는 신호 및 선택 키버튼에 상응하는 신호에 기초하여 멀티미디어 디바이스(100)의 해당 기능을 실행한다.For example, when a user presses a selection key button after pointing the remote controller 300 to an area where GUI data related to the multimedia device 100 is displayed, based on a signal corresponding to the movement of the remote controller 300 The calculated coordinate value information satisfies the first condition. Accordingly, the controller 140 executes the corresponding function of the multimedia device 100 based on the signal corresponding to the movement and the signal corresponding to the selection key button.

반면, 제어부(140)는, 상기 산출된 좌표값 정보가 제2 조건을 만족하는 경우, 사용자 입력 신호에 관련된 정보를 특정 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S715). 상기 사용자 입력 신호에 관련된 정보는 상기 산출된 좌표값 정보에 상응하는 신호 및/또는 키버튼에 상응하는 신호를 포함한다. 상기 제2 조건은, 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 조건일 수 있다. 즉, 상기 제2 조건은, 산출된 좌표값 정보가, 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역 이외의 영역으로서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 조건일 수 있다. 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다.On the other hand, when the calculated coordinate value information satisfies the second condition, the controller 140 controls the network interface unit 113 to transmit information related to the user input signal to the specific external device 200 (S715). ). The information related to the user input signal includes a signal corresponding to the calculated coordinate value information and / or a signal corresponding to a key button. The second condition may be a condition in which the calculated coordinate value information corresponds to an area in which at least one of the video data and GUI data of a specific external device 200 is displayed on the screen of the display unit 150. That is, in the second condition, the calculated coordinate value information is an area other than the area in which GUI data regarding the multimedia device 100 is displayed on the screen of the display unit 150, and the video data and the specific external device 200 ) May be a condition corresponding to an area where at least one of GUI data is displayed. When the coordinate value information corresponds to an area in which at least one of the video data and GUI data of a specific external device 200 is displayed on the screen of the display unit 150, the user's intention is specified using the remote controller 300. This is because it is intended to control the external device 200.

예를 들어, 사용자가 리모트 컨트롤러(300)를 멀티미디어 디바이스(100)에 관한 GUI 데이터가 아닌 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나를 향하게 한 후 선택 키버튼을 누른 경우, 상기 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보는 제2 조건을 만족하는 것이 된다. 따라서, 제어부(140)는, 상기 좌표값 정보에 상응하는 신호 및 선택 키버튼에 상응하는 신호를 특정 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다.For example, when the user points the remote controller 300 to at least one of the video data and GUI data of a specific external device 200, not GUI data related to the multimedia device 100, and then presses a selection key button, The coordinate value information calculated based on the signal corresponding to the movement of the remote controller 300 satisfies the second condition. Accordingly, the control unit 140 controls the network interface unit 113 to transmit a signal corresponding to the coordinate value information and a signal corresponding to a selection key button to a specific external device 200.

제어부(140)는, 상기 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터가 표시되는 영역에 대응되는 경우, 리모트 컨트롤러(300)의 움직임에 대응되는 제1 인디케이터(I)를 표시하도록 디스플레이부(150)를 제어할 수 있다.When the calculated coordinate value information corresponds to an area in which GUI data for the multimedia device 100 is displayed on the screen of the display unit 150, the control unit 140 corresponds to the movement of the remote controller 300. The display 150 may be controlled to display the first indicator I.

반면, 제어부(140)는, 상기 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나가 표시되는 영역에 대응되는 경우, 상기 산출된 좌표값 정보에 상응하는 신호를 특정 외부 디바이스(200)에 전송하도록 네트워크 인터페이스부(113)를 제어한다. 특정 외부 디바이스(200)는 상기 좌표값 정보에 상응하는 신호에 기초하여 리모트 컨트롤러(300)의 움직임에 대응되는 제2 인디케이터(P) 관련 정보를 멀티미디어 디바이스(100)로 전송하고, 멀티미디어 디바이스(100)의 제어부(140)는, 상기 제2 인디케이터(P) 관련 정보에 기초하여 리모트 컨트롤러(300)의 움직임에 대응되는 제2 인디케이터(P)를 표시하도록 디스플레이부(150)를 제어한다.On the other hand, if the calculated coordinate value information corresponds to an area in which at least one of the video data and GUI data of a specific external device 200 is displayed on the screen of the display unit 150, the control unit 140 calculates the The network interface unit 113 is controlled to transmit a signal corresponding to the obtained coordinate value information to a specific external device 200. The specific external device 200 transmits information related to the second indicator P corresponding to the movement of the remote controller 300 to the multimedia device 100 based on the signal corresponding to the coordinate value information, and the multimedia device 100 ), The control unit 140 controls the display unit 150 to display the second indicator P corresponding to the movement of the remote controller 300 based on the information related to the second indicator P.

따라서, 리모트 컨트롤러(300)가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터를 향하고 있으면 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터 상에 제1 인디케이터(I)가 디스플레이되고, 리모트 컨트롤러(300)가 디스플레이부(150)의 화면 상에서 상기 비디오 데이터 및 특정 외부 디바이스(200)의 GUI 데이터 중 적어도 하나를 향하고 있으면 상기 상기 비디오 데이터 또는 특정 외부 디바이스(200)의 GUI 데이터 상에 제2 인디케이터(P)가 디스플레이된다. 제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다.Accordingly, when the remote controller 300 is directed to GUI data related to the multimedia device 100 on the screen of the display unit 150, the first indicator I is displayed on the GUI data related to the multimedia device 100. When the remote controller 300 is directed to at least one of the video data and the GUI data of the specific external device 200 on the screen of the display 150, on the video data or the GUI data of the specific external device 200 The second indicator P is displayed. The first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other.

도 15는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다.15 is a diagram illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.

도 15를 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500) 외에, 멀티미디어 디바이스(100)에 관한 제3 GUI 데이터(710)도 함께 디스플레이된다. Referring to FIG. 15, in addition to the GUI data 500 received from the STB 201, the display unit 150 of the multimedia device 100 also displays third GUI data 710 related to the multimedia device 100. do.

제3 GUI 데이터(710)는 멀티미디어 디바이스(100)의 기능을 제어하기 위한 것으로, 일례로 스크린 리모트 컨트롤러일 수 있다. 제3 GUI 데이터(710)에는 멀티미디어 디바이스(100)의 기능들을 제어하기 위한 가상 키버튼이 포함되어 있을 수 있다. 제3 GUI 데이터(710)는, 디스플레이부(150)의 화면에서 STB(201)의 GUI 데이터(500) 상에 오버레이되어 디스플레이될 수 있다.The third GUI data 710 is for controlling the function of the multimedia device 100, and may be, for example, a screen remote controller. The third GUI data 710 may include a virtual key button for controlling functions of the multimedia device 100. The third GUI data 710 may be displayed overlaid on the GUI data 500 of the STB 201 on the screen of the display unit 150.

사용자는, 리모트 컨트롤러(300)를 움직이면서 제3 GUI 데이터(710) 내 가상 키버튼을 선택하거나 리모트 컨트롤러(300)에 구비된 키버튼을 선택할 수 있다.The user may select a virtual key button in the third GUI data 710 while moving the remote controller 300 or select a key button provided in the remote controller 300.

제어부(140)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 제3 GUI(710) 데이터가 표시되는 영역에 대응되는 경우, 리모트 컨트롤러(300)의 움직임에 상응하는 신호 및 키버튼에 상응하는 신호에 기초하여 멀티미디어 디바이스(100)의 해당 기능을 실행한다.The controller 140, when the coordinate value information calculated based on the signal corresponding to the movement of the remote controller 300 corresponds to the area where the third GUI 710 data is displayed on the screen of the display unit 150, The corresponding function of the multimedia device 100 is executed based on the signal corresponding to the movement of the remote controller 300 and the signal corresponding to the key button.

제어부(140)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 제3 GUI 데이터(710)가 표시되는 영역에 대응되는 경우, 리모트 컨트롤러(300)의 움직임에 대응되는 제1 인디케이터(I)를 표시하도록 디스플레이부(150)를 제어할 수 있다.If the controller 140, the coordinate value information calculated based on the signal corresponding to the movement of the remote controller 300 corresponds to the area where the third GUI data 710 is displayed on the screen of the display unit 150, The display unit 150 may be controlled to display the first indicator I corresponding to the movement of the remote controller 300.

반면, 제어부(140)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 제3 GUI 데이터(710) 이외의 STB(201)의 GUI 데이터(500)가 표시되는 영역에 대응되는 경우, 상기 좌표값 정보에 상응하는 신호 및 키버튼에 상응하는 신호를 특정 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다. 이에 따라, STB(201)의 특정 기능이 실행된다.On the other hand, the control unit 140, the coordinate value information calculated based on the signal corresponding to the movement of the remote controller 300 on the screen of the display unit 150 of the third GUI data 710 other than the STB (201) When the GUI data 500 corresponds to the displayed area, the network interface unit 113 is controlled to transmit a signal corresponding to the coordinate value information and a signal corresponding to a key button to a specific external device 200. Accordingly, the specific function of STB 201 is executed.

리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면 상에서 제3 GUI 데이터(710) 이외의 STB(201)의 GUI 데이터(500)가 표시되는 영역에 대응되는 경우, 리모트 컨트롤러(300)의 움직임에 대응되는 제2 인디케이터(P)가 디스플레이부(150)에 표시된다.Coordinate value information calculated based on a signal corresponding to the movement of the remote controller 300 displays GUI data 500 of the STB 201 other than the third GUI data 710 on the screen of the display 150. When it corresponds to the area, the second indicator P corresponding to the movement of the remote controller 300 is displayed on the display unit 150.

따라서, 리모트 컨트롤러(300)가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터를 향하고 있으면 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터 상에 제1 인디케이터(I)가 디스플레이되고, 리모트 컨트롤러(300)가 디스플레이부(150)의 화면 상에서 상기 STB(201)의 GUI 데이터를 향하고 있으면 상기 STB(201)의 GUI 데이터 상에 제2 인디케이터(P)가 디스플레이된다. 제1 인디케이터(I)와 제2 인디케이터(P)는 모양, 크기, 색깔, 또는 투명도 중 적어도 하나를 서로 달리할 수 있다.Accordingly, when the remote controller 300 is directed to GUI data related to the multimedia device 100 on the screen of the display unit 150, the first indicator I is displayed on the GUI data related to the multimedia device 100. , When the remote controller 300 faces the GUI data of the STB 201 on the screen of the display unit 150, the second indicator P is displayed on the GUI data of the STB 201. The first indicator I and the second indicator P may have at least one of shape, size, color, or transparency different from each other.

한편, 경우에 따라, 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호를 분석하여 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어할 수도 있다. 이를 도 16 및 도 17을 참조하여 설명한다.Meanwhile, in some cases, the signal corresponding to the key button provided in the remote controller 300 may be analyzed to control the multimedia device 100 and the specific external device 200. This will be described with reference to FIGS. 16 and 17.

도 16은 리모트 컨트롤러에 구비된 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스 및 특정 외부 디바이스를 제어하는 방법의 일례를 설명하기 위한 흐름도이다. 멀티미디어 디바이스(100)의 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 GUI 데이터 중 적어도 하나와 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우를 가정한다.16 is a flowchart illustrating an example of a method of controlling a multimedia device and a specific external device according to a signal corresponding to a key button provided in a remote controller. It is assumed that at least one of video data and GUI data received from a specific external device 200 and GUI data for the multimedia device 100 are displayed on the display unit 150 of the multimedia device 100 together.

사용자 인터페이스부(180)는 리모트 컨트롤러(300)로부터 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 수신한다(S721).The user interface unit 180 receives a signal corresponding to a movement and a signal corresponding to a key button from the remote controller 300 (S721).

제어부(140)는 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 기능들을 디텍트한다(S722). 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는 제어부(140) 내 GUI 생성부(143)에서 생성되므로, 제어부(140)는 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 기능들을 쉽게 알 수 있다. The control unit 140 detects functions corresponding to GUI data related to the multimedia device 100 (S722). Since the GUI data for the multimedia device 100 is generated by the GUI generating unit 143 in the control unit 140, the control unit 140 can easily recognize functions corresponding to the GUI data for the multimedia device 100. .

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 기능들을 편의상 특정 타입의 기능이라 칭하기로 한다. 멀티미디어 디바이스(100)의 특정 타입의 기능이란, 멀티미디어 디바이스(100)에서 구현되는 기능들 중 유사한 타입의 기능들을 포괄하는 개념이다. 예를 들어, 멀티미디어 디바이스(100)를 사용하여 음악을 감상하는 경우, 음악 감상에 관련되는 재생 기능, 일시 정지 기능, 재생 중지 기능, 다음곡 선택 기능, 이전곡 선택 기능 등과 같이 유사한 타입의 기능들을 포괄하여 특정 타입의 기능이라 칭할 수 있다.Functions corresponding to GUI data related to the multimedia device 100 will be referred to as specific types of functions for convenience. A specific type of function of the multimedia device 100 is a concept encompassing similar types of functions among functions implemented in the multimedia device 100. For example, when listening to music using the multimedia device 100, similar types of functions, such as a play function, a pause function, a play stop function, a next song selection function, a previous song selection function, etc., related to listening to music, It can be collectively called a specific type of function.

제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 키버튼에 상응하는 신호의 조건 만족 여부에 따라 처리를 달리한다(S723).The control unit 140 performs different processing depending on whether or not the condition of the signal corresponding to the key button received from the remote controller 300 is satisfied (S723).

제어부(140)는, 상기 키버튼에 상응하는 신호가 제3 조건을 만족하는 경우, 상기 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다(S724). 상기 제3 조건은, 상기 키버튼에 상응하는 신호가 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 특정 타입의 기능에 관련되는 조건을 의미한다. If the signal corresponding to the key button satisfies the third condition, the controller 140 executes the function of the multimedia device 100 according to the signal corresponding to the key button (S724). The third condition refers to a condition in which a signal corresponding to the key button is related to a specific type of function corresponding to GUI data related to the multimedia device 100.

리모트 컨트롤러(100)가 디스플레이부(150)의 화면 상에서 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터를 벗어난 영역을 향하고 있더라도, 수신된 키버튼에 상응하는 신호가 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 특정 타입의 기능에 관련되는 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)가 아닌 멀티미디어 디바이스(100)를 제어하고자 하는 것이기 때문이다. 따라서, 본 예시에서는, 키버튼에 상응하는 신호가 제3 조건을 만족하면, 리모트 컨트롤러(100)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보의 제1 조건/제2 조건 만족 여부는 고려되지 않을 수 있다.Even if the remote controller 100 is directed to an area outside the GUI data for the multimedia device 100 on the screen of the display unit 150, the signal corresponding to the received key button is the GUI data for the multimedia device 100. This is because the user's intention is to control the multimedia device 100 rather than the specific external device 200 using the remote controller 300 when related to a specific type of function corresponding to. Therefore, in this example, if the signal corresponding to the key button satisfies the third condition, whether the first condition / second condition of the coordinate value information calculated based on the signal corresponding to the movement of the remote controller 100 is satisfied It may not be considered.

반면, 제어부(140)는, 상기 키버튼에 상응하는 신호가 상기 제3 조건을 만족하지 않는 경우, 상기 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보의 제1 조건/제2 조건 만족 여부에 따라 처리를 달리할 수 있다(S725). 이에 대해서는 도 13 및 도 14를 참조하여 상술한 바와 유사하므로 자세한 설명을 생략한다.On the other hand, when the signal corresponding to the key button does not satisfy the third condition, the control unit 140 determines whether the first condition / second condition of the coordinate value information calculated based on the signal corresponding to the movement is satisfied. Depending on the process may be different (S725). This is similar to that described above with reference to FIGS. 13 and 14, and thus detailed description thereof will be omitted.

도 17은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다. 도 17은 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어하는 방법의 일례를 설명하기 위한 도면이다.17 is a diagram illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention. 17 is a view for explaining an example of a method of controlling a multimedia device 100 and a specific external device 200 according to a signal corresponding to a key button provided in the remote controller 300.

도 17을 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 GUI 데이터(500) 외에, 멀티미디어 디바이스(100)에 관한 제4 GUI 데이터(720)가 함께 디스플레이된다. Referring to FIG. 17, in addition to the GUI data 500 from the STB 201, the fourth GUI data 720 relating to the multimedia device 100 is displayed on the display unit 150 of the multimedia device 100.

제4 GUI 데이터(720)는 멀티미디어 디바이스(100)의 기능을 제어하기 위한 것으로, 일례로 멀티미디어 디바이스(100)의 음악 재생 관련 기능을 제어하기 위한 것일 수 있다. 제4 GUI 데이터(720)에는 멀티미디어 디바이스(100)의 음악 재생 관련 기능을 제어하기 위한 가상 키버튼이 포함되어 있을 수 있다. 제4 GUI 데이터(720)는, 디스플레이부(150)의 화면에서 STB(201)의 GUI 데이터(500) 상에 오버레이되어 디스플레이될 수 있다.The fourth GUI data 720 is for controlling the functions of the multimedia device 100, and may be, for example, for controlling functions related to music playback of the multimedia device 100. The fourth GUI data 720 may include a virtual key button for controlling a function related to music playback of the multimedia device 100. The fourth GUI data 720 may be displayed overlaid on the GUI data 500 of the STB 201 on the screen of the display unit 150.

사용자는, 리모트 컨트롤러(300)를 움직이면서 제4 GUI 데이터(720) 내 가상 키버튼을 선택하거나 리모트 컨트롤러(300)에 구비된 키버튼을 선택할 수 있다.The user may select a virtual key button in the fourth GUI data 720 while moving the remote controller 300 or a key button provided in the remote controller 300.

제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 키버튼에 상응하는 신호가 제4 GUI 데이터(720)에 대응되는 특정 타입의 기능에 관련되는 경우, 상기 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100)의 해당 기능을 실행한다.When the signal corresponding to the key button received from the remote controller 300 is related to a specific type of function corresponding to the fourth GUI data 720, the control unit 140 may perform multimedia according to the signal corresponding to the key button. The corresponding function of the device 100 is executed.

예를 들어, 사용자가 리모트 컨트롤러(300)를 제4 GUI 데이터(720)가 아닌 STB(201)의 GUI 데이터(500)를 향하게 한 상태에서 리모트 컨트롤러(300)에 구비된 재생 키버튼을 누른 경우를 가정하자. 제어부(140)는, 상기 재생 키버튼이 제4 GUI 데이터(720)에 대응되는 음악 재생 관련 기능에 관한 것이므로, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면에서 제4 GUI 데이터(720)가 표시되는 영역에 대응되지 않더라도, 상기 재생 키버튼에 상응하는 신호에 기초하여 멀티미디어 디바이스(100)의 해당 기능을 실행할 수 있다.For example, when the user presses the playback key button provided on the remote controller 300 in a state where the remote controller 300 faces the GUI data 500 of the STB 201 instead of the fourth GUI data 720. Let's assume. The control unit 140 displays the coordinate value information calculated based on a signal corresponding to the movement of the remote controller 300, since the play key button relates to a music play-related function corresponding to the fourth GUI data 720. Even if the fourth GUI data 720 is not displayed on the screen of the unit 150, the corresponding function of the multimedia device 100 may be executed based on the signal corresponding to the play key button.

반면, 제어부(140)는, 리모트 컨트롤러(300)로부터 수신된 키버튼에 상응하는 신호가 제4 GUI 데이터(720)에 대응되는 특정 타입의 기능에 관련되는 것이 아닌 경우, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부(150)의 화면에서 제4 GUI 데이터(720)가 표시되는 영역에 대응되는 것인지 아니면 STB(201)의 GUI 데이터(500)가 표시되는 영역에 대응되는 것인지에 따라 처리를 달리할 수 있다. 이에 대해서는 도 14 및 도 15를 참조하여 상술한 바와 유사하므로 자세한 설명을 생략한다.On the other hand, if the signal corresponding to the key button received from the remote controller 300 is not related to a specific type of function corresponding to the fourth GUI data 720, the control unit 140 of the remote controller 300 The coordinate value information calculated based on the signal corresponding to the movement corresponds to an area in which the fourth GUI data 720 is displayed on the screen of the display unit 150, or the GUI data 500 of the STB 201 is displayed. The processing can be different depending on whether it corresponds to the area to be made. This is similar to that described above with reference to FIGS. 14 and 15, and thus detailed description thereof will be omitted.

이하에서는, 도 18 내지 도 20을 참조하여, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 GUI 데이터 중 적어도 하나와 멀티미디어 디바이스(100)에 관한 GUI 데이터가 함께 디스플레이된 경우, 리모트 컨트롤러(300)를 사용하여 멀티미디어 디바이스(100) 및 특정 외부 디바이스(200)를 제어하는 세 번째 방법을 자세히 설명하기로 한다.Hereinafter, at least one of video data and GUI data received from a specific external device 200 and GUI data on the multimedia device 100 are displayed on the display unit 150 together with reference to FIGS. 18 to 20. , A third method of controlling the multimedia device 100 and the specific external device 200 using the remote controller 300 will be described in detail.

도 18은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 도시한 흐름도이다.18 is a flowchart illustrating another example of a method of controlling a multimedia device according to an embodiment of the present invention.

사용자 인터페이스부(180)는, 디스플레이부(150)에 특정 외부 디바이스(200)로부터 수신된 비디오 데이터 및 GUI 데이터 중 적어도 하나가 디스플레이된 상태에서, 사용자 입력 신호를 수신한다(S801). 일례로, 사용자 입력 신호는 리모트 컨트롤러(300)로부터 수신되거나, 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신될 수 있다. 여기서, 상기 사용자 입력 신호는 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디스플레이하기 위한 신호는 아닌 것을 전제한다.The user interface unit 180 receives a user input signal while at least one of video data and GUI data received from a specific external device 200 is displayed on the display unit 150 (S801). For example, the user input signal may be received from the remote controller 300 or may be received through a sensor module in the user interface unit 180. Here, it is assumed that the user input signal is not a signal for displaying GUI data related to the multimedia device 100.

제어부(140)는 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지 여부를 디텍트한다(S802). The control unit 140 detects whether GUI data regarding the multimedia device 100 is displayed on the display unit 150 (S802).

상기 멀티미디어 디바이스(100)에 관한 GUI 데이터는 제어부(140) 내 GUI 생성부(143)에서 생성되므로, 제어부(140)는 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되어 있는지 여부를 쉽게 알 수 있다.Since GUI data relating to the multimedia device 100 is generated by the GUI generating unit 143 in the control unit 140, the control unit 140 determines whether GUI data related to the multimedia device 100 is displayed on the display unit 150. It is easy to know whether or not.

제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트하지 못한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있지 않은 경우, 제어부(140)는 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S803). 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이되지 않은 경우, 사용자의 의도는 리모트 컨트롤러(300)를 사용하여 특정 외부 디바이스(200)를 제어하고자 하는 것이기 때문이다. 단계(S803)의 구체적인 과정은 도 6 및 도 7과 관련하여 상술한 바와 유사하므로 자세한 설명은 생략한다.When the control unit 140 fails to detect GUI data regarding the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is not displayed on the display unit 150. In this case, the control unit 140 controls the network interface unit 113 to transmit information related to the user input signal to the external device 200 (S803). This is because when the GUI data for the multimedia device 100 is not displayed on the display unit 150, the user's intention is to control the specific external device 200 using the remote controller 300. The detailed process of step S803 is similar to that described above with reference to FIGS. 6 and 7, so a detailed description thereof will be omitted.

반면, 제어부(140)가 디스플레이부(150)에 디스플레이된 멀티미디어 디바이스(100)에 관한 GUI 데이터를 디텍트한 경우, 즉 디스플레이부(150)에 멀티미디어 디바이스(100)에 관한 GUI 데이터가 디스플레이 되어 있는 경우, 제어부(140)는 사용자 입력 신호의 조건 만족 여부에 따라 처리를 달리한다(S804).On the other hand, when the control unit 140 detects GUI data relating to the multimedia device 100 displayed on the display unit 150, that is, GUI data regarding the multimedia device 100 is displayed on the display unit 150. In this case, the controller 140 varies the processing according to whether the user input signal condition is satisfied (S804).

먼저, 제어부(140)는, 사용자 입력 신호가 제4 조건을 만족하는 경우 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다(S805). 즉, 제어부(140)는, 사용자 입력 신호가 제4 조건을 만족하는 경우 사용자 입력 신호에 따라 상기 멀티미디어 디바이스(100)에 관한 GUI 데이터에 대응되는 멀티미디어 디바이스(100)의 기능을 실행한다. First, when the user input signal satisfies the fourth condition, the controller 140 executes the function of the multimedia device 100 according to the user input signal (S805). That is, when the user input signal satisfies the fourth condition, the controller 140 executes a function of the multimedia device 100 corresponding to GUI data related to the multimedia device 100 according to the user input signal.

반면, 제어부(140)는, 사용자 입력 신호가 제5 조건을 만족하는 경우 상기 사용자 입력 신호와 관련된 정보를 외부 디바이스(200)로 전송하도록 네트워크 인터페이스부(113)를 제어한다(S803).On the other hand, when the user input signal satisfies the fifth condition, the controller 140 controls the network interface unit 113 to transmit information related to the user input signal to the external device 200 (S803).

일례로, 상기 제4 조건과 제5 조건은, 사용자 입력 신호가 리모트 컨트롤러(300)로부터 수신된 것인지, 아니면 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신된 것인지에 따라 결정될 수 있다. 예를 들어, 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 사용자 인터페이스부(180)에서 수신되는 사용자 입력 신호를 상기 제4 조건을 만족하는 사용자 입력 신호로 볼 수 있고, 사용자가 특정 음성을 발화하거나 특정 제스처를 취함으로써 사용자 명령을 입력하는 경우, 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신되는 사용자 입력 신호를 상기 제5 조건을 만족하는 사용자 입력 신호로 볼 수 있다. For example, the fourth condition and the fifth condition may be determined according to whether the user input signal is received from the remote controller 300 or through a sensor module in the user interface unit 180. For example, when a user inputs a user command using the remote controller 300, the user input signal received from the user interface 180 can be viewed as a user input signal satisfying the fourth condition, and the user When a user inputs a user command by uttering a specific voice or taking a specific gesture, the user input signal received through the sensor module in the user interface unit 180 may be viewed as a user input signal satisfying the fifth condition.

또는, 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 멀티미디어 디바이스(100)에 관한 GUI 데이터의 기능에 대응되는 리모트 컨트롤러(300)의 키버튼에 상응하는 신호를 상기 제4 조건을 만족하는 사용자 입력 신호로 볼 수 있고, 리모트 컨트롤러의 움직임에 상응하는 신호를 상기 제5 조건을 만족하는 사용자 입력 신호로 볼 수 있다.Alternatively, when a user inputs a user command using the remote controller 300, a signal corresponding to a key button of the remote controller 300 corresponding to a function of GUI data related to the multimedia device 100 is described in the fourth condition. It can be seen as a user input signal satisfying, and a signal corresponding to the movement of the remote controller can be regarded as a user input signal satisfying the fifth condition.

또는, 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 리모트 컨트롤러(300)의 움직임에 상응하는 신호를 상기 제4 조건을 만족하는 사용자 입력 신호로 볼 수 있고, 리모트 컨트롤러(300)에 구비된 4방향 키버튼에 상응하는 신호를 상기 제5 조건을 만족하는 사용자 입력 신호로 볼 수 있다.Alternatively, when a user inputs a user command using the remote controller 300, a signal corresponding to the movement of the remote controller 300 may be viewed as a user input signal satisfying the fourth condition, and the remote controller 300 The signal corresponding to the 4-way key button provided in) can be viewed as a user input signal satisfying the fifth condition.

또는, 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 리모트 컨트롤러(300)의 움직임에 상응하는 신호를 상기 제4 조건을 만족하는 사용자 입력 신호로 볼 수 있고, 리모트 컨트롤러(300)에 구비된 터치 패드 관련 정보를 상기 제5 조건을 만족하는 사용자 입력 신호로 볼 수도 있다.Alternatively, when a user inputs a user command using the remote controller 300, a signal corresponding to the movement of the remote controller 300 may be viewed as a user input signal satisfying the fourth condition, and the remote controller 300 ) May be viewed as a user input signal satisfying the fifth condition.

다만, 상술한 바와 같은, 사용자 입력 신호를 상기 제4 조건을 만족하는 신호 또는 상기 제5 조건을 만족하는 신호로 구분하는 구체적인 방법은 일 예시에 불과하며 이에 한정하지 않는다.However, as described above, a specific method of classifying a user input signal into a signal that satisfies the fourth condition or a signal that satisfies the fifth condition is only an example and is not limited thereto.

도 19 및 도 20은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 일례를 도시한 도면이다. 도 19 및 도 20에는 편의상 특정 외부 디바이스(200)는 도시하지 않았다.19 and 20 are views illustrating an example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of the multimedia device according to an embodiment of the present invention. 19 and 20, a specific external device 200 is not illustrated for convenience.

도 19의 (a)를 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500)와 함께 멀티미디어 디바이스(100)에 관한 제5 GUI 데이터(810)도 디스플레이된다. Referring to (a) of FIG. 19, the fifth GUI data 810 relating to the multimedia device 100 together with the GUI data 500 received from the STB 201 on the display unit 150 of the multimedia device 100 ) Is also displayed.

제5 GUI 데이터(810)는 멀티미디어 디바이스(100)의 기능을 제어하기 위한 것으로, 일례로 스크린 리모트 컨트롤러일 수 있다. 제5 GUI 데이터(810)에는 멀티미디어 디바이스(100)의 기능들을 제어하기 위한 가상 키버튼이 포함되어 있을 수 있다. 제5 GUI 데이터(810)는, 디스플레이부(150)의 화면에서 STB(201)의 GUI 데이터(500) 상에 오버레이되어 디스플레이될 수 있다.The fifth GUI data 810 is for controlling the function of the multimedia device 100, and may be, for example, a screen remote controller. The fifth GUI data 810 may include a virtual key button for controlling functions of the multimedia device 100. The fifth GUI data 810 may be displayed overlaid on the GUI data 500 of the STB 201 on the screen of the display unit 150.

제어부(140)는, 리모트 컨트롤러(300)의 제1 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제1 기능에 대응되는 사용자 입력 신호와 관련된 정보를 STB(201)로 전송하고, 리모트 컨트롤러(300)의 제2 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제2 기능에 대응되는 사용자 입력 신호에 따라 제5 GUI 데이터(810)를 제어하여 멀티미디어 디바이스(100)의 기능을 실행한다.When the user input signal corresponding to the first function of the remote controller 300 is received, the control unit 140 transmits information related to the user input signal corresponding to the first function to the STB 201, and the remote controller ( When the user input signal corresponding to the second function of 300) is received, the fifth GUI data 810 is controlled according to the user input signal corresponding to the second function to execute the function of the multimedia device 100.

일례로, 리모트 컨트롤러(300)의 제1 기능은 리모트 컨트롤러(300)의 4방향 키버튼의 기능이고 리모트 컨트롤러(300)의 제2 기능은 리모트 컨트롤러의 움직임에 상응하는 기능인 경우를 가정하여 설명하면 다음과 같다.For example, assuming that the first function of the remote controller 300 is a function of a four-way key button of the remote controller 300 and the second function of the remote controller 300 is a function corresponding to the movement of the remote controller, As follows.

제어부(140)는, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호가 리모트 컨트롤러(300)의 움직임에 상응하는 신호를 포함하는 경우, 상기 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다.When the user input signal received from the user interface unit 180 includes a signal corresponding to the movement of the remote controller 300, the control unit 140 executes the function of the multimedia device 100 according to the user input signal. do.

예를 들어, 사용자가 리모트 컨트롤러(300)를 움직이면서 제5 GUI 데이터(810) 내 가상 키버튼을 선택하거나, 리모트 컨트롤러(300)를 움직이면서 리모트 컨트롤러(300)에 구비된 선택 키버튼을 선택하는 경우, 리모트 컨트롤러(300)는 멀티미디어 디바이스(100)의 제어 모드로 설정된다. 따라서, 제어부(140)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호 및 선택 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100)의 해당 기능을 실행한다.For example, when a user selects a virtual key button in the fifth GUI data 810 while moving the remote controller 300 or selects a selection key button provided in the remote controller 300 while moving the remote controller 300. , The remote controller 300 is set to the control mode of the multimedia device 100. Accordingly, the controller 140 executes a corresponding function of the multimedia device 100 according to a signal corresponding to the movement of the remote controller 300 and a signal corresponding to a selection key button.

반면, 제어부(140)는, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호가 리모트 컨트롤러(300)에 구비된 4방향 키버튼에 상응하는 신호를 포함하는 경우, 상기 사용자 입력 신호와 관련된 정보를 STB(201)로 전송하도록 네트워크 인터페이스부(113)를 제어한다.On the other hand, when the user input signal received from the user interface unit 180 includes a signal corresponding to a 4-way key button provided in the remote controller 300, the controller 140 displays information related to the user input signal. The network interface unit 113 is controlled to transmit to the STB 201.

예를 들어, 사용자가 리모트 컨트롤러(300)를 움직이지 않고 리모트 컨트롤러(300)에 구비된 4방향 키버튼을 선택하는 경우, 도 19의 (b)에 도시된 바와 같이, 리모트 컨트롤러(300)가 STB(201)의 제어 모드로 설정된다. 따라서, 멀티미디어 디바이스(100)는, 리모트 컨트롤러(300)의 4방향 키버튼에 상응하는 신호를 STB(201)로 전송한다. 이 경우, STB(201)는 멀티미디어 디바이스(100)로부터 전송된 4방향 키버튼에 상응하는 신호에 따라 특정 메뉴 옵션을 하이라이트(H)한 결과를 멀티미디어 디바이스(100)로 전송하고, 멀티미디어 디바이스(100)의 제어부(140)는 상기 특정 메뉴 옵션을 하이라이트(H)한 결과를 디스플레이하도록 디스플레이부(150)를 제어할 수 있다.For example, when a user selects a 4-way key button provided on the remote controller 300 without moving the remote controller 300, as shown in (b) of FIG. 19, the remote controller 300 The control mode of the STB 201 is set. Accordingly, the multimedia device 100 transmits a signal corresponding to the 4-way key button of the remote controller 300 to the STB 201. In this case, the STB 201 transmits the result of highlighting (H) a specific menu option to the multimedia device 100 according to a signal corresponding to the 4-way key button transmitted from the multimedia device 100, and the multimedia device 100 ), The controller 140 may control the display 150 to display the result of highlighting (H) the specific menu option.

사용자가 리모트 컨트롤러(300)를 움직여서 사용자 인터페이스부(180)에서 리모트 컨트롤러(300)의 움직임에 상응하는 신호를 수신하는 경우, 리모트 컨트롤러(300)는 도 19의 (a)에 도시된 바와 같이 멀티미디어 디바이스(100)의 제어 모드로 되돌아갈 수 있다. 또한, 사용자가 컨트롤러(300)에 구비된 4방향 키버튼을 다시 선택하는 경우, 리모트 컨트롤러(300)는 도 19의 (b)에 도시된 바와 같이 STB(201)의 제어 모드로 되돌아갈 수 있다.When the user moves the remote controller 300 to receive a signal corresponding to the movement of the remote controller 300 from the user interface unit 180, the remote controller 300 is a multimedia as shown in Figure 19 (a) It may return to the control mode of the device 100. In addition, when the user selects the 4-way key button provided in the controller 300 again, the remote controller 300 may return to the control mode of the STB 201 as shown in FIG. 19B. .

도 19의 (a)에서는 리모트 컨트롤러(300)가 멀티미디어 디바이스(100)의 제어 모드로 설정된 상태이므로 디스플레이부(150)에 제1 인디케이터(I)가 표시되며, 도 19의 (b)에서는 리모트 컨트롤러(300)가 STB(201)의 제어 모드로 설정된 상태로서 리모트 컨트롤러(300)를 움직이지 않는 경우로 제한하였으므로 디스플레이부(150)에 어떠한 인디케이터도 표시되지 않을 수 있다.In (a) of FIG. 19, since the remote controller 300 is set to the control mode of the multimedia device 100, the first indicator I is displayed on the display unit 150, and in FIG. 19 (b), the remote controller Since the 300 is set as the control mode of the STB 201, and the remote controller 300 is not moved, any indicator may not be displayed on the display unit 150.

상술한 바와 달리, 리모트 컨트롤러(300)의 제1 기능은 리모트 컨트롤러(300)의 움직임에 상응하는 기능이고 리모트 컨트롤러(300)의 제2 기능은 리모트 컨트롤러의 4방향 키버튼의 기능인 것으로 본 발명을 구현하는 것도 물론 가능하다.Unlike the above, the first function of the remote controller 300 is a function corresponding to the movement of the remote controller 300 and the second function of the remote controller 300 is a function of a 4-way key button of the remote controller. It is, of course, possible to implement.

다른 일례로, 도 20을 참조하여, 리모트 컨트롤러(100)의 제1 기능은 리모트 컨트롤러(300)의 움직임에 상응하는 기능이고 리모트 컨트롤러(300)의 제2 기능은 제5 GUI 데이터(810)의 기능에 대응되는 리모트 컨트롤러(300)의 특정 키버튼의 기능인 경우를 가정하여 설명하면 다음과 같다.As another example, referring to FIG. 20, the first function of the remote controller 100 is a function corresponding to the movement of the remote controller 300 and the second function of the remote controller 300 is a function of the fifth GUI data 810. If it is assumed on the assumption that the function of a specific key button of the remote controller 300 corresponding to the function is as follows.

제어부(140)는, 도 20의 (a)에 도시된 바와 같이, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호가 리모트 컨트롤러(300)의 움직임에 상응하는 신호를 포함하는 경우, 상기 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다.The control unit 140, as shown in Figure 20 (a), when the user input signal received from the user interface 180 includes a signal corresponding to the movement of the remote controller 300, the user input The function of the multimedia device 100 is executed according to the signal.

반면, 제어부(140)는, 도 20의 (b)에 도시된 바와 같이, 사용자 인터페이스부(180)에서 수신된 사용자 입력 신호가 리모트 컨트롤러(300)에 구비된 키버튼에 상응하는 신호 중 제5 GUI 데이터(810)의 기능에 대응되는 신호인 경우, 상기 사용자 입력 신호와 관련된 정보를 STB(201)로 전송하도록 네트워크 인터페이스부(113)를 제어한다.On the other hand, the control unit 140, as shown in (b) of Figure 20, the user input signal received from the user interface unit 180 is a fifth of the signal corresponding to the key button provided in the remote controller 300 In the case of a signal corresponding to the function of the GUI data 810, the network interface unit 113 is controlled to transmit information related to the user input signal to the STB 201.

도 20의 (a)에서는 리모트 컨트롤러(300)가 STB(201)의 제어 모드로 설정된 상태이므로 디스플레이부(150)에 제1 인디케이터(I)가 표시된다.In FIG. 20A, since the remote controller 300 is set to the control mode of the STB 201, the first indicator I is displayed on the display unit 150.

도 21은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 디스플레이부에 도 9의 특정 외부 디바이스의 GUI 데이터가 디스플레이된 상태에서 멀티미디어 디바이스에 관한 GUI 데이터가 디스플레이되는 다른 일례를 도시한 도면이다.21 is a diagram illustrating another example in which GUI data for a multimedia device is displayed while GUI data of a specific external device of FIG. 9 is displayed on a display unit of a multimedia device according to an embodiment of the present invention.

도 21을 참조하면, 멀티미디어 디바이스(100)의 디스플레이부(150)에, STB(201)로부터 수신된 GUI 데이터(500) 외에, 멀티미디어 디바이스(100)에 관한 제5 GUI 데이터(810)도 함께 디스플레이된다. Referring to FIG. 21, on the display unit 150 of the multimedia device 100, in addition to the GUI data 500 received from the STB 201, the fifth GUI data 810 relating to the multimedia device 100 is also displayed. do.

제어부(140)는, 사용자 입력 신호가 리모트 컨트롤러(300)로부터 수신된 경우, 상기 사용자 입력 신호에 따라 멀티미디어 디바이스(100)의 기능을 실행한다. 예를 들어, 사용자가 리모트 컨트롤러(300)를 사용하여 사용자 명령을 입력하는 경우, 리모트 컨트롤러(300)는 멀티미디어 디바이스(100)의 제어 모드로 설정된다. 따라서, 제어부(140)는, 리모트 컨트롤러(300)의 움직임에 상응하는 신호 및 선택 키버튼에 상응하는 신호에 따라 멀티미디어 디바이스(100)의 해당 기능을 실행한다. 그리고, 제어부(140)는, 리모트 컨트롤러(300)의 움직임에 대응하는 제1 인디케이터(I)를 표시하도록 디스플레이부(150)를 제어한다.When the user input signal is received from the remote controller 300, the controller 140 executes the function of the multimedia device 100 according to the user input signal. For example, when a user inputs a user command using the remote controller 300, the remote controller 300 is set to a control mode of the multimedia device 100. Accordingly, the controller 140 executes a corresponding function of the multimedia device 100 according to a signal corresponding to the movement of the remote controller 300 and a signal corresponding to a selection key button. Then, the control unit 140 controls the display unit 150 to display the first indicator I corresponding to the movement of the remote controller 300.

반면, 제어부(140)는, 사용자 입력 신호가 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신되는 경우, 상기 사용자 입력 신호와 관련된 정보를 STB(201)로 전송하도록 네트워크 인터페이스부(113)를 제어한다. 예를 들어, 사용자가 특정 음성을 발화하거나 특정 제스처를 취함으로써 사용자 명령을 입력하는 경우, 리모트 컨트롤러(300)가 STB(201)의 제어 모드로 설정된다. 상기 사용자 입력 신호와 관련된 정보란, 제어부(140)에서 특정 음성 또는 특정 제스처를 인식하여 텍스트로 변환한 결과를 포함할 수 있다. 이때, 상기 제1 인디케이터(I)는 디스플레이부(150)에서 비활성화 상태로 표시되거나 디스플레이부(150)에 아예 표시되지 않을 수 있다.On the other hand, when the user input signal is received through the sensor module in the user interface unit 180, the control unit 140 controls the network interface unit 113 to transmit information related to the user input signal to the STB 201. do. For example, when a user inputs a user command by speaking a specific voice or taking a specific gesture, the remote controller 300 is set to the control mode of the STB 201. The information related to the user input signal may include a result of the controller 140 recognizing a specific voice or a specific gesture and converting it into text. At this time, the first indicator I may be displayed in an inactive state on the display unit 150 or may not be displayed on the display unit 150 at all.

도 21에서는, 제4 조건을 만족하는 사용자 입력 신호가 리모트 컨트롤러(300)로부터 수신되는 사용자 입력 신호이고, 제5 조건을 만족하는 사용자 입력 신호가 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신되는 사용자 입력 신호인 경우를 예로 들어 설명하였으나, 이에 한정하지 않는다.In FIG. 21, a user input signal satisfying the fourth condition is a user input signal received from the remote controller 300, and a user input signal satisfying the fifth condition is received through a sensor module in the user interface unit 180. The case of the user input signal has been described as an example, but is not limited thereto.

이상에서는, 멀티미디어 디바이스(100) 및 STB(201)의 두 가지 기기를 제어하는 경우를 예로 들어 설명하였으나, 멀티미디어 디바이스(100)를 포함한 세 가지 이상의 기기를 제어할 수도 있다. 예를 들어, 리모트 컨트롤러(300)의 움직임에 상응하는 신호에 따라 멀티미디어 디바이스(100)를 제어하고, 리모트 컨트롤러(300)의 4방향 키버튼에 상응하는 신호에 따라 STB(201)를 제어하고, 사용자 인터페이스부(180) 내 센서 모듈을 통해 수신된 사용자 입력 신호에 따라 그 밖의 다른 외부 디바이스(200)를 제어하도록 본 발명을 구현할 수도 있다.In the above, the case of controlling two devices of the multimedia device 100 and the STB 201 is described as an example, but three or more devices including the multimedia device 100 may be controlled. For example, the multimedia device 100 is controlled according to the signal corresponding to the movement of the remote controller 300, and the STB 201 is controlled according to the signal corresponding to the 4-way key button of the remote controller 300, The present invention may be implemented to control other external devices 200 according to a user input signal received through a sensor module in the user interface 180.

도 22는 멀티미디어 디바이스가 외부 디바이스와의 페어링을 수행하는 프로세스의 일례를 도시한 흐름도이다. 다만, 멀티미디어 디바이스가 외부 디바이스와의 페어링을 수행하는 프로세스가 도 22에 한정되지는 않는다.22 is a flowchart illustrating an example of a process in which a multimedia device performs pairing with an external device. However, the process in which the multimedia device performs pairing with the external device is not limited to FIG. 22.

먼저, 멀티미디어 디바이스(100)가 페어링 프로세스 초기화를 알리는 PairingRequest 메시지를 외부 디바이스(200)에 전송한다(S1001). 그리고, 외부 디바이스(200)는 PairingRequestAck 로 멀티미디어 디바이스(100)에 응답한다(S1002).First, the multimedia device 100 transmits a PairingRequest message informing the initialization of the pairing process to the external device 200 (S1001). Then, the external device 200 responds to the multimedia device 100 with PairingRequestAck (S1002).

멀티미디어 디바이스(100)는, 난수값을 처리할 수 있는 옵션을 외부 디바이스(200)에 전송한다(S1003). 여기서, 멀티미디어 디바이스(100)는, 처리할 수 있는 난수값의 타입을 외부 디바이스(200)에 전송할 수 있다.The multimedia device 100 transmits an option capable of processing the random number value to the external device 200 (S1003). Here, the multimedia device 100 may transmit a type of a random number value that can be processed to the external device 200.

그리고, 외부 디바이스(200)가, 난수값을 처리할 수 있는 옵션을 멀티미디어 디바이스(100)에 전송한다(S1004). 여기서, 외부 디바이스(200)는 생성 가능한 난수값과 수신 가능한 응답 메시지를 멀티미디어 디바이스(100)에 전송할 수 있다.Then, the external device 200 transmits an option to process the random number value to the multimedia device 100 (S1004). Here, the external device 200 may transmit a generated random number value and a receiveable response message to the multimedia device 100.

멀티미디어 디바이스(100)는, Config 메시지로, 난수값의 구성 세부정보를 외부 디바이스(200)에 전송한다(S1005). 그리고, 외부 디바이스(200)는 ConfigAck 로 멀티미디어 디바이스(100)에 응답한다(S1006).The multimedia device 100 transmits the configuration details of the random number value to the external device 200 in the Config message (S1005). Then, the external device 200 responds to the multimedia device 100 with ConfigAck (S1006).

그 후, 멀티미디어 디바이스(100)와 외부 디바이스(200)는 암호키(secret)를 교환한다(S1007). 구체적으로, 외부 디바이스(200)가 적절한 난수값을 생성하여 사용자에게 전송하고, 사용자가 상기 난수값에 응답하는 방식으로 암호키가 교환될 수 있다. Thereafter, the multimedia device 100 and the external device 200 exchange secret keys (S1007). Specifically, the external device 200 generates an appropriate random number value and transmits it to the user, and the encryption key can be exchanged in such a way that the user responds to the random number value.

사용자가 상기 난수값에 응답하면 멀티미디어 디바이스(100)는 상기 응답을 확인하고, 확인 결과가 정확하면 외부 디바이스(200)에 Secret 메시지를 전송한다(S1008).When the user responds to the random number value, the multimedia device 100 confirms the response, and when the verification result is correct, sends a secret message to the external device 200 (S1008).

그 후, 외부 디바이스(200)가 상기 응답을 확인하고 확인 결과가 정확하면 멀티미디어 디바이스(100)에 SecretAck 를 전송한다(S1009).Thereafter, when the external device 200 confirms the response and the verification result is correct, the secret device is transmitted to the multimedia device 100 (S1009).

일례로, 위와 같은 페어링 프로세스는, 메시지 스피닝을 방지하기 위하여, 활성화 시간이 짧은 SSL(Secure Socket Layer) 규약을 사용할 수 있다.As an example, the above pairing process may use a Secure Socket Layer (SSL) protocol with a short activation time to prevent message spinning.

멀티미디어 디바이스(100)와 외부 디바이스(200)의 사이에 도 20과 같은 페어링 프로세스가 일단 수행되면, 그 이후에는 상기 암호키 입력 절차 없이 바로 상기 외부 디바이스(200)와의 페어링이 완료될 수 있다.Once the pairing process as shown in FIG. 20 is performed between the multimedia device 100 and the external device 200, thereafter, pairing with the external device 200 may be completed immediately without the encryption key input procedure.

도 23은 도 22의 프로세스에서 멀티미디어 디바이스와 외부 디바이스 사이에 교환되는 메시지 형식의 일례를 도시한 도면이다. 다만, 멀티미디어 디바이스(100)와 외부 디바이스(200)의 사이에 교환되는 메시지 형식이 도 23에 한정되는 것은 아니다.23 is a diagram illustrating an example of a message format exchanged between a multimedia device and an external device in the process of FIG. 22. However, the message format exchanged between the multimedia device 100 and the external device 200 is not limited to FIG. 23.

도 23을 참조하면, 멀티미디어 디바이스(100)와 외부 디바이스(200)의 사이에 교환되는 메시지(1100)는, 교환되는 모든 메시지를 암호화한 외측(outer) 메시지로서 공통 헤더 필드(1110)와, 하위 메시지인 내측 페이로드(1120)를 포함한다.Referring to FIG. 23, the message 1100 exchanged between the multimedia device 100 and the external device 200 is an outer message that encrypts all messages exchanged, and has a common header field 1110 and a lower level. The message includes an inner payload 1120.

공통 헤더 필드(1110)에는 두 개의 필수 필드로서 protocol_version(1111)과 status(1112)가 포함된다. protocol_version(1111)은 현재 프로토콜의 버전을 나타내는 정수 값으로서, 프로토콜 확장시 역호환하는데 사용된다. status(1112)는 프로토콜의 상태를 나타내는 정수 값이다. 예를 들어, 상태 코드가 OK 인 경우 status(1112)는 '200'이며, 이전 메시지(있을 경우)가 수신되었으며 프로토콜의 다음 메시지를 전송할 수 있다는 것을 의미한다. status(1112)가 '200' 이외의 값인 경우에는 전송에서 오류가 발생한 것으로 세션이 종료된다는 것을 의미한다. 공통 헤더 필드(1110)는 선택적 필드로서 type(1113)을 더 포함할 수도 있다. type(1113)은 상기 상태 코드가 OK 인 경우 페이로드(1120)를 나타내는 정수형 숫자를 포함해야 한다.The common header field 1110 includes two required fields, protocol_version (1111) and status (1112). protocol_version (1111) is an integer value indicating the version of the current protocol, and is used for backward compatibility in protocol extension. status 1112 is an integer value indicating the status of the protocol. For example, if the status code is OK, status (1112) is '200', which means that the previous message (if any) was received and the next message in the protocol can be sent. When the status 1112 is a value other than '200', it means that an error has occurred in the transmission and the session ends. The common header field 1110 may further include a type 1113 as an optional field. The type 1113 should include an integer number indicating the payload 1120 when the status code is OK.

내측 페이로드(1120)에는 PairingRequest 메시지(1121), PairingRequestAck 메시지(1122), Oprions 메시지(1123), Configuration 메시지(1124), ConfigurationAck 메시지(1125), Secret 메시지(1126) 또는 SecretAck 메시지(1127)가 각각 포함될 수 있다.The inner payload 1120 includes a PairingRequest message 1121, a PairingRequestAck message 1122, an Oprions message 1123, a Configuration message 1124, a ConfigurationAck message 1125, a Secret message 1126, or a SecretAck message 1127, respectively. Can be included.

도 24는 멀티미디어 디바이스가 동일 네트워크 내 외부 디바이스들을 검색할 때 멀티미디어 디바이스에서 외부 디바이스들로 전송되는 데이터 패킷의 일례를 도시한 도면이다. 다만, 멀티미디어 디바이스가 동일 네트워크 내 외부 디바이스들을 검색할 때 멀티미디어 디바이스에서 외부 디바이스들로 전송되는 데이터 패킷의 구조가 도 2422에 한정되는 것은 아니다. 도 24의 데이터 패킷(1200)을 편의상 제1 데이터 패킷(1200)이라 칭하기로 한다.24 is a diagram illustrating an example of a data packet transmitted from a multimedia device to external devices when the multimedia device searches for external devices in the same network. However, the structure of a data packet transmitted from a multimedia device to external devices when the multimedia device searches for external devices in the same network is not limited to FIG. 2422. The data packet 1200 of FIG. 24 will be referred to as a first data packet 1200 for convenience.

제1 데이터 패킷(1200)은 전송하고자 하는 데이터를 담고 있는 페이로드(1210)와, 상기 페이로드(1210)에 대한 정보를 담고 있는 헤더(1220)를 포함한다.The first data packet 1200 includes a payload 1210 containing data to be transmitted and a header 1220 containing information about the payload 1210.

헤더(1220)에는 오류 발견을 위한 정보(1221), 프로토콜 버전 정보(1222), 페이로드(1210)의 길이 정보(1223) 등이 포함될 수 있다.The header 1220 may include information 1221 for error detection, protocol version information 1222, length information 1223 of the payload 1210, and the like.

전송하고자 하는 실제 데이터를 담고 있는 페이로드(1210)에는, 메시지를 전송하는 디바이스의 맥 주소 정보(1211), 프로토콜의 네임 정보(1212), 상기 프로토콜 네임의 길이 정보(1213), 메시지를 전송하는 디바이스의 모델 네임 정보(1214), 상기 디바이스의 모델 네임의 길이 정보(1215) 등이 포함될 수 있다.In the payload 1210 containing the actual data to be transmitted, MAC address information 1211 of the device transmitting the message, name information 1212 of the protocol, length information 1213 of the protocol name, and a message are transmitted. Model name information 1214 of the device, length information 1215 of the model name of the device, and the like may be included.

이하에서는 도 25 및 도 26을 참조하여 멀티미디어 디바이스(100)가 특정 외부 디바이스(200)로 좌표값 정보나 키버튼 관련 정보를 전송하는 방식을 설명한다.Hereinafter, a method in which the multimedia device 100 transmits coordinate value information or key button related information to the specific external device 200 will be described with reference to FIGS. 25 and 26.

도 25는 멀티미디어 디바이스와 특정 외부 디바이스의 페어링이 완료된 후, 멀티미디어 디바이스와 특정 외부 사이에 교환되는 메시지 형식의 일례를 도시한 도면이다. 다만, 멀티미디어 디바이스(100)와 특정 외부 디바이스(200)의 사이에 교환되는 메시지 형식이 도 25에 한정되는 것은 아니다.25 is a diagram illustrating an example of a message format exchanged between a multimedia device and a specific external device after pairing of the multimedia device and a specific external device is completed. However, the message format exchanged between the multimedia device 100 and the specific external device 200 is not limited to FIG. 25.

일례로, 멀티미디어 디바이스(100)와 특정 외부 디바이스(200)가 서로 메시지를 전송하는 경우 상기 메시지는 RemoteMessage 프로토콜 버퍼 형식을 따를 수 있다.For example, when the multimedia device 100 and a specific external device 200 transmit a message to each other, the message may follow the RemoteMessage protocol buffer format.

RemoteMessage(1300)에 Request Message(1310)가 포함되어 있으면, 특정 외부 디바이스(200)에서는 sequence_number(1330)가 동일한 Response Message(1320)로 응답한다. 즉, 멀티미디어 디바이스(100)는 특정 외부 디바이스(200)로 전송하는 요청에 대한 응답을 추적하기 위하여 sequence_number(1330) 필드 값을 제공할 수 있다.If the Request Message 1310 is included in the RemoteMessage 1300, the sequence_number 1330 responds with the same Response Message 1320 in the specific external device 200. That is, the multimedia device 100 may provide a sequence_number (1330) field value in order to track a response to a request transmitted to a specific external device 200.

멀티미디어 디바이스(100)에서 특정 외부 디바이스(200)로 전송되는 메시지는 Request Message(1310)에 암호화해야 한다. Request Message(1310)에는 키 이벤트 메시지(1311), 마우스 이동 메시지(1312), 마우스 휠 이벤트 메시지(1313), 데이터를 포함한 메시지(1314), 연결 시 전송 메시지(1315), 플링 메시지(1316) 등이 포함될 수 있다. 멀티미디어 디바이스(100)는 상기 Request Message(1310)에 좌표값 정보 및/또는 키버튼 관련 정보 등을 암호화하여 특정 외부 디바이스(200)로 전송할 수 있다.The message transmitted from the multimedia device 100 to the specific external device 200 must be encrypted in the Request Message 1310. The request message 1310 includes a key event message 1311, a mouse movement message 1312, a mouse wheel event message 1313, a message 1314 including data, a transmission message 1315 when connected, and a fling message 1316. This can be included. The multimedia device 100 may encrypt the coordinate value information and / or key button related information, etc. in the Request Message 1310 and transmit it to the specific external device 200.

특정 외부 디바이스(200)에서 멀티미디어 디바이스(100)로 전송되는 Response Message(1320)는 데이터를 포함한 메시지(1321), 연결 시 전송 메시지(1322), 플링 결과 메시지(1323) 등이 포함될 수 있다.The response message 1320 transmitted from the specific external device 200 to the multimedia device 100 may include a message 1321 including data, a transmission message 1322 when connected, and a fling result message 1323.

도 26은 멀티미디어 디바이스와 특정 외부 디바이스의 페어링이 완료된 후 멀티미디어 디바이스에서 특정 외부 디바이스로 전송되는 데이터 패킷의 일례를 도시한 도면이다. 다만, 멀티미디어 디바이스와 특정 외부 디바이스의 페어링이 완료된 후 멀티미디어 디바이스에서 특정 외부 디바이스로 전송되는 데이터 패킷의 구조가 도 26에 한정되는 것은 아니다. 도 26의 데이터 패킷(1400)을 편의상 제2 데이터 패킷(1400)이라 칭하기로 한다.26 is a diagram illustrating an example of a data packet transmitted from a multimedia device to a specific external device after pairing of the multimedia device and a specific external device is completed. However, the structure of a data packet transmitted from a multimedia device to a specific external device after pairing of the multimedia device and a specific external device is completed is not limited to FIG. 26. The data packet 1400 of FIG. 26 will be referred to as a second data packet 1400 for convenience.

제2 데이터 패킷(1400)은 전송하고자 하는 데이터를 담고 있는 페이로드(1410)와, 상기 페이로드(1410)에 대한 정보를 담고 있는 헤더(1420)를 포함한다.The second data packet 1400 includes a payload 1410 containing data to be transmitted and a header 1420 containing information about the payload 1410.

헤더(1420)에는 프로토콜 버전 정보/입력 방식 지정 정보(1421), 메시지의 전체 길이 정보(1422), 해당 패킷의 내용이 적용되는 비디오 프레임의 타임 스탬프 값 정보(1423) 등이 포함될 수 있다.The header 1420 may include protocol version information / input method designation information 1421, message full length information 1422, time stamp value information 1423 of a video frame to which the packet content is applied, and the like.

전송하고자 하는 실제 데이터를 담고 있는 페이로드(1410)에는, 줌, 스크롤 등의 입력 타입에 대한 정보(1411), 좌표값 정보(1412), 상기 좌표값의 길이 정보(1413) 등이 포함될 수 있다.The payload 1410 containing actual data to be transmitted may include information 1411 for input types such as zoom and scroll, coordinate value information 1412, and length information 1413 of the coordinate values. .

설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.For convenience of explanation, each drawing is divided and described, but it is also possible to design to implement a new embodiment by merging the embodiments described in each drawing. It is also within the scope of the present invention to design a computer-readable recording medium in which a program for executing the previously described embodiments is recorded according to the needs of those skilled in the art.

본 발명에 따른 멀티미디어 디바이스 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The multimedia device and the operation method according to the present invention are not limited to the configuration and method of the above-described embodiments, and the above embodiments are all or part of each embodiment so that various modifications can be made. It may be configured in an optional combination.

한편, 본 발명의 멀티미디어 디바이스의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.On the other hand, the operation method of the multimedia device of the present invention can be implemented as a code that can be read by the processor on a recording medium readable by the processor provided in the display apparatus. The processor-readable recording medium includes all kinds of recording devices in which data that can be read by the processor are stored. Examples of the recording medium readable by the processor include a ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and also implemented in the form of a carrier wave such as transmission through the Internet. . In addition, the processor-readable recording medium may be distributed over a networked computer system so that the processor-readable code is stored and executed in a distributed manner.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.In addition, although the preferred embodiments of the present invention have been illustrated and described above, the present invention is not limited to the specific embodiments described above, and the technical field to which the present invention belongs without departing from the gist of the present invention claimed in the claims. In addition, various modifications can be implemented by a person having ordinary knowledge in the course, and these modifications should not be individually understood from the technical idea or prospect of the present invention.

그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양발명의 설명은 보충적으로 적용될 수가 있다. In addition, in the specification, both the invention of the object and the invention of the method are described, and the description of both inventions may be applied supplementally as necessary.

100: 멀티미디어 디바이스
200: 외부 디바이스
300: 리모트 컨트롤러100: multimedia device
200: external device
300: remote controller

Claims (14)

외부 디바이스와 연결된 멀티미디어 디바이스에 있어서,
상기 외부 디바이스를 연결하는 외부장치 인터페이스부;
상기 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부;
상기 외부장치 인터페이스부를 통해 상기 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부;
리모트 컨트롤러부터 사용자 입력 신호를 수신하는 사용자 인터페이스부; 및
제어부;를 포함하고,
상기 제어부는,
상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이된 경우, 상기 사용자 입력 신호에 따라 상기 멀티미디어 디바이스의 기능을 실행하고,
상기 디스플레이부에, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께, 상기 멀티미디어 디바이스에 관한 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 네트워크 인터페이스부를 통해 상기 사용자 입력 신호와 관련된 정보를 상기 외부 디바이스로 전송하고,
상기 제 1 GUI 데이터를 표시한 상태에서, 상기 멀티미디어 디바이스의 특정 기능을 제어하는 제 3 GUI 데이터를 상기 제 1 GUI 데이터 상에 오버레이 하여 디스플레이하고,
상기 제 3 GUI 데이터내 가상 키버튼을 선택하는 입력을 상기 리모트 컨트롤러로부터 수신하고,
상기 가상 키버튼에 대응하는 신호가 제 3 GUI 데이터에 대응되는 상기 특정 기능에 관련되면, 컨트롤러의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부의 화면에서 제 3 GUI 데이터가 표시되는 영역에 대응되지 않더라도 상기 특정 기능을 실행하는,
멀티미디어 디바이스.In the multimedia device connected to the external device,
An external device interface unit connecting the external device;
A network interface unit communicating with the external device through a network;
A display unit that displays video data and first GUI data received from the external device through the external device interface unit;
A user interface unit receiving a user input signal from a remote controller; And
Includes a control unit;
The control unit,
When the second GUI data related to the multimedia device is displayed on the display unit together with at least one of the video data and the first GUI data, a function of the multimedia device is executed according to the user input signal,
When at least one of the video data and the first GUI data is not displayed on the display unit, and the second GUI data on the multimedia device is not displayed, information related to the user input signal is transmitted through the network interface unit to the external device. Sent to,
In the state in which the first GUI data is displayed, the third GUI data controlling a specific function of the multimedia device is overlaid on the first GUI data and displayed.
Receiving an input for selecting a virtual key button in the third GUI data from the remote controller,
When the signal corresponding to the virtual key button is related to the specific function corresponding to the third GUI data, the coordinate information calculated based on the signal corresponding to the movement of the controller displays the third GUI data on the screen of the display unit. To execute the specific function even if it does not correspond to an area,
Multimedia device. 제 1 항에 있어서,
상기 사용자 입력 신호는 상기 리모트 컨트롤러의 움직임에 상응하는 신호 및 상기 리모트 컨트롤러에 구비된 키버튼에 상응하는 신호를 포함하는, 멀티미디어 디바이스.According to claim 1,
The user input signal includes a signal corresponding to a movement of the remote controller and a signal corresponding to a key button provided in the remote controller. 제 2 항에 있어서, 상기 제어부는,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호에 기초하여 상기 디스플레이부의 화면의 좌표값 정보를 산출하고, 상기 산출된 좌표값 정보 및 상기 키버튼에 상응하는 신호를 상기 외부 디바이스로 전송하도록 상기 네트워크 인터페이스부를 제어하는, 멀티미디어 디바이스.According to claim 2, The control unit,
When the second GUI data is not displayed together with at least one of the video data and the first GUI data, the display unit calculates coordinate value information on the screen of the display unit based on a signal corresponding to the movement of the remote controller. And controlling the network interface unit to transmit the calculated coordinate value information and a signal corresponding to the key button to the external device. 제 1 항에 있어서, 상기 디스플레이부는,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이된 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호에 따라 상기 제2 GUI 데이터를 제어하기 위한 제1 인디케이터를 출력하고,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호에 따라 상기 제1 GUI 데이터를 제어하기 위한 제2 인디케이터를 출력하는, 멀티미디어 디바이스.According to claim 1, The display unit,
When the second GUI data is displayed together with at least one of the video data and the first GUI data on the display unit, a first indicator for controlling the second GUI data according to a signal corresponding to the movement of the remote controller Output
When the second GUI data is not displayed together with at least one of the video data and the first GUI data on the display unit, a second for controlling the first GUI data according to a signal corresponding to the movement of the remote controller A multimedia device that outputs an indicator. 제 4 항에 있어서,
상기 제1 인디케이터 및 상기 제2 인디케이터는 모양, 크기, 색깔 또는 투명도 중 적어도 하나를 서로 달리하는, 멀티미디어 디바이스.The method of claim 4,
The first indicator and the second indicator are different from each other, at least one of shape, size, color or transparency. 외부 디바이스와 연결된 멀티미디어 디바이스에 있어서,
상기 외부 디바이스를 연결하는 외부장치 인터페이스부;
상기 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부;
상기 외부장치 인터페이스부를 통해 상기 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부;
리모트 컨트롤러로부터 사용자 입력 신호를 수신하는 사용자 인터페이스부; 및
제어부;를 포함하고,
상기 제어부는,
상기 리모트 컨트롤러의 제1 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제1 기능에 대응되는 사용자 입력 신호와 관련된 정보를 상기 외부 디바이스로 전송하고,
상기 리모트 컨트롤러의 제2 기능에 대응되는 사용자 입력 신호가 수신되면, 상기 제2 기능에 대응되는 사용자 입력 신호에 따라 제2 GUI 데이터를 제어하고,
상기 제 1 GUI 데이터를 표시한 상태에서, 상기 멀티미디어 디바이스의 특정 기능을 제어하는 제 3 GUI 데이터를 상기 제 1 GUI 데이터 상에 오버레이 하여 디스플레이하고,
상기 제 3 GUI 데이터 내 가상 키버튼을 선택하는 입력을 상기 리모트 컨트롤러로부터 수신하고,
상기 가상 키버튼에 대응하는 신호가 제 3 GUI 데이터에 대응되는 상기 특정 기능에 관련되면, 컨트롤러의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부의 화면에서 제 3 GUI 데이터가 표시되는 영역에 대응되지 않더라도 상기 특정 기능을 실행하는,
멀티미디어 디바이스.In the multimedia device connected to the external device,
An external device interface unit connecting the external device;
A network interface unit communicating with the external device through a network;
A display unit that displays video data and first GUI data received from the external device through the external device interface unit;
A user interface unit that receives a user input signal from a remote controller; And
Includes a control unit;
The control unit,
When a user input signal corresponding to the first function of the remote controller is received, information related to the user input signal corresponding to the first function is transmitted to the external device,
When a user input signal corresponding to the second function of the remote controller is received, the second GUI data is controlled according to the user input signal corresponding to the second function,
In the state in which the first GUI data is displayed, the third GUI data controlling a specific function of the multimedia device is overlaid on the first GUI data and displayed.
Receiving an input for selecting a virtual key button in the third GUI data from the remote controller,
When the signal corresponding to the virtual key button is related to the specific function corresponding to the third GUI data, the coordinate information calculated based on the signal corresponding to the motion of the controller is displayed on the screen of the display unit, and the third GUI data is displayed. To execute the specific function even if it does not correspond to an area,
Multimedia device. 제 6 항에 있어서,
상기 사용자 입력 신호는, 상기 리모트 컨트롤러의 움직임에 상응하는 신호 또는 상기 리모트 컨트롤러에 구비된 키버튼에 상응하는 신호 중 적어도 하나를 포함하는, 멀티미디어 디바이스.The method of claim 6,
The user input signal includes at least one of a signal corresponding to a movement of the remote controller or a signal corresponding to a key button provided in the remote controller. 제 7 항에 있어서, 상기 제어부는,
상기 수신된 움직임에 상응하는 신호에 기초하여 상기 디스플레이부의 화면의 좌표값 정보를 산출하는, 멀티미디어 디바이스.The method of claim 7, wherein the control unit,
A multimedia device for calculating coordinate value information of a screen of the display unit based on a signal corresponding to the received motion. 제 6 항에 있어서,
상기 리모트 컨트롤러의 제1 기능은 상기 리모트 컨트롤러의 움직임에 상응하는 기능이고,
상기 리모트 컨트롤러의 제2 기능은 상기 제2 GUI 데이터의 기능에 대응되는 리모트 컨트롤러의 특정 키버튼의 기능인, 멀티미디어 디바이스.The method of claim 6,
The first function of the remote controller is a function corresponding to the movement of the remote controller,
The second function of the remote controller is a function of a specific key button of the remote controller corresponding to the function of the second GUI data. 제 6 항에 있어서,
상기 리모트 컨트롤러의 제1 기능은 상기 리모트 컨트롤러의 4방향 키버튼의 기능이고,
상기 리모트 컨트롤러의 제2 기능은 상기 리모트 컨트롤러의 움직임에 상응하는 기능인, 멀티미디어 디바이스.The method of claim 6,
The first function of the remote controller is a function of a 4-way key button of the remote controller,
The second function of the remote controller is a function corresponding to the movement of the remote controller, the multimedia device. 적어도 두 개의 외부 디바이스와 연결된 멀티미디어 디바이스에 있어서,
제1 외부 디바이스 및 제2 외부 디바이스 각각을 상기 멀티미디어 디바이스에 연결하는 외부장치 인터페이스부;
상기 제1 외부 디바이스 및 상기 제2 외부 디바이스와 네트워크를 통해 통신하는 네트워크 인터페이스부;
상기 외부장치 인터페이스부를 통해 상기 제1 외부 디바이스로부터 수신된 비디오 데이터 및 제1 GUI 데이터를 디스플레이하는 디스플레이부;
리모트 컨트롤러로부터 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 수신하는 사용자 인터페이스부; 및
상기 네트워크 인터페이스부를 통해 상기 수신된 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 상기 제1 외부 디바이스로 전송하도록 제어하는 제어부;를 포함하고,
상기 제어부는,
상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나가 디스플레이된 상태에서 상기 외부장치 인터페이스부를 통해 상기 제2 외부 디바이스로부터 제2 GUI 데이터가 수신된 경우, 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되도록 상기 디스플레이부를 제어하고, 상기 리모트 컨트롤러로부터 수신된 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 상기 네트워크 인터페이스부를 통해 상기 제2 외부 디바이스로 전송하도록 제어하고,
상기 제 1 GUI 데이터를 표시한 상태에서, 상기 멀티미디어 디바이스의 특정 기능을 제어하는 제 3 GUI 데이터를 상기 제 1 GUI 데이터 상에 오버레이 하여 디스플레이하고,
상기 제 3 GUI 데이터 내 가상 키버튼을 선택하는 입력을 상기 리모트 컨트롤러로부터 수신하고,
상기 가상 키버튼에 대응하는 신호가 제 3 GUI 데이터에 대응되는 상기 특정 기능에 관련되면, 컨트롤러의 움직임에 상응하는 신호에 기초하여 산출된 좌표값 정보가 디스플레이부의 화면에서 제 3 GUI 데이터가 표시되는 영역에 대응되지 않더라도 상기 특정 기능을 실행하는,
멀티미디어 디바이스.In a multimedia device connected to at least two external devices,
An external device interface unit connecting each of the first external device and the second external device to the multimedia device;
A network interface unit communicating with the first external device and the second external device through a network;
A display unit that displays video data and first GUI data received from the first external device through the external device interface unit;
A user interface unit that receives a signal corresponding to a movement and a signal corresponding to a key button from the remote controller; And
Includes a control unit for controlling to transmit a signal corresponding to the received movement and a signal corresponding to a key button to the first external device through the network interface unit,
The control unit,
When second GUI data is received from the second external device through the external device interface while at least one of the video data and the first GUI data is displayed, together with at least one of the video data and the first GUI data. Control the display unit so that the second GUI data is displayed, control to transmit a signal corresponding to a movement received from the remote controller and a signal corresponding to a key button to the second external device through the network interface unit,
In the state in which the first GUI data is displayed, the third GUI data controlling a specific function of the multimedia device is overlaid on the first GUI data and displayed.
Receiving an input for selecting a virtual key button in the third GUI data from the remote controller,
When the signal corresponding to the virtual key button is related to the specific function corresponding to the third GUI data, the coordinate information calculated based on the signal corresponding to the movement of the controller displays the third GUI data on the screen of the display unit. To execute the specific function even if it does not correspond to an area,
Multimedia device. 제 11 항에 있어서,
상기 제어부는,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호 및 키버튼에 상응하는 신호를 상기 네트워크 인터페이스부를 통해 상기 제1 외부 디바이스로 전송하도록 제어하는, 멀티미디어 디바이스.The method of claim 11,
The control unit,
When the second GUI data is not displayed together with at least one of the video data and the first GUI data on the display unit, a signal corresponding to a movement of the remote controller and a signal corresponding to a key button are transmitted through the network interface unit. And controlling to transmit to the first external device. 제 11 항에 있어서,
상기 디스플레이부는,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이된 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호에 따라 상기 제2 GUI 데이터를 제어하기 위한 제1 인디케이터를 출력하고,
상기 디스플레이부에 상기 비디오 데이터 및 제1 GUI 데이터 중 적어도 하나와 함께 상기 제2 GUI 데이터가 디스플레이되지 않은 경우, 상기 리모트 컨트롤러의 움직임에 상응하는 신호에 따라 상기 제1 GUI 데이터를 제어하기 위한 제2 인디케이터를 출력하는, 멀티미디어 디바이스.The method of claim 11,
The display unit,
When the second GUI data is displayed together with at least one of the video data and the first GUI data on the display unit, a first indicator for controlling the second GUI data according to a signal corresponding to the movement of the remote controller Output
When the second GUI data is not displayed together with at least one of the video data and the first GUI data on the display unit, a second for controlling the first GUI data according to a signal corresponding to the movement of the remote controller A multimedia device that outputs an indicator. 제 13 항에 있어서,
상기 제1 인디케이터 및 상기 제2 인디케이터는 모양, 크기, 색깔 또는 투명도 중 적어도 하나를 서로 달리하는, 멀티미디어 디바이스.The method of claim 13,
The first indicator and the second indicator are different from each other, at least one of shape, size, color or transparency.
KR1020130102345A 2013-08-28 2013-08-28 Multimedia device and method for controlling the same KR102108065B1 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130102345A KR102108065B1 (en) 2013-08-28 2013-08-28 Multimedia device and method for controlling the same
US14/256,448 US10063802B2 (en) 2013-08-28 2014-04-18 Multimedia device and method for controlling external devices of the same
EP14001455.6A EP2843959B1 (en) 2013-08-28 2014-04-23 Remote control for multimedia device and method for controlling the device
CN201410195304.8A CN104424790B (en) 2013-08-28 2014-05-09 Multimedia device and its control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130102345A KR102108065B1 (en) 2013-08-28 2013-08-28 Multimedia device and method for controlling the same

Publications (2)

Publication Number Publication Date
KR20150025124A KR20150025124A (en) 2015-03-10
KR102108065B1 true KR102108065B1 (en) 2020-05-08

Family

ID=53021426

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130102345A KR102108065B1 (en) 2013-08-28 2013-08-28 Multimedia device and method for controlling the same

Country Status (1)

Country Link
KR (1) KR102108065B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120124615A1 (en) * 2010-11-15 2012-05-17 Sangseok Lee Image display apparatus and method for operating the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120124615A1 (en) * 2010-11-15 2012-05-17 Sangseok Lee Image display apparatus and method for operating the same

Also Published As

Publication number Publication date
KR20150025124A (en) 2015-03-10

Similar Documents

Publication Publication Date Title
US10063802B2 (en) Multimedia device and method for controlling external devices of the same
WO2017148294A1 (en) Mobile terminal-based apparatus control method, device, and mobile terminal
KR101779858B1 (en) Apparatus for Controlling an Image Display Device and Method for Operating the Same
KR102212270B1 (en) Methods, systems, and media for presenting media content using integrated content sources
JP2013055650A (en) Image display apparatus, remote controller, and method for operating the same
EP3731510B1 (en) Mobile terminal for remote controlling the selection of the content source and the presentation device
KR101924062B1 (en) Image display apparatus and method for operating the same
KR102269277B1 (en) Server, home appliance access server, and home appliance remote control system including the same
KR20140083545A (en) Image display apparatus, and method for operating the same
KR102287510B1 (en) Server, apparatus for providing image, and system including the same
KR101698856B1 (en) Image display apparatus for conducting wireless communicatoin among devices and image displaying method thereof
JP5739015B2 (en) COMMUNICATION DEVICE, COMMUNICATION METHOD, AND PROGRAM
KR20150004051A (en) Method for controlling remote controller and multimedia device
KR101599738B1 (en) Operating a Video Display Device
KR101931938B1 (en) Remote controller and method for processing data in multimedia device
KR102108065B1 (en) Multimedia device and method for controlling the same
KR20130039135A (en) Remote controller and method for processing data in multimedia device
KR102114612B1 (en) Method for controlling remote controller and multimedia device
KR102108064B1 (en) Multimedia device and method for controlling the same
KR20130066334A (en) Image display apparatus, server and method for operating the same
KR20160016410A (en) Multimedia deivice and method for controlling the same
KR102281839B1 (en) Apparatus for providing Image
KR20130020310A (en) Image display apparatus, and method for operating the same
KR102057862B1 (en) Multimedia device and controlling method for the same
KR102265904B1 (en) Multimedia deivice and method for controlling the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right