KR20140077015A - 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법 - Google Patents

디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법 Download PDF

Info

Publication number
KR20140077015A
KR20140077015A KR1020120145695A KR20120145695A KR20140077015A KR 20140077015 A KR20140077015 A KR 20140077015A KR 1020120145695 A KR1020120145695 A KR 1020120145695A KR 20120145695 A KR20120145695 A KR 20120145695A KR 20140077015 A KR20140077015 A KR 20140077015A
Authority
KR
South Korea
Prior art keywords
application
screen
screen information
display device
remote control
Prior art date
Application number
KR1020120145695A
Other languages
English (en)
Inventor
곽종원
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120145695A priority Critical patent/KR20140077015A/ko
Priority to AU2013360531A priority patent/AU2013360531B2/en
Priority to MX2015007448A priority patent/MX342932B/es
Priority to PCT/KR2013/011521 priority patent/WO2014092476A1/en
Priority to JP2015547854A priority patent/JP2016506567A/ja
Priority to EP13196966.9A priority patent/EP2744218A1/en
Priority to CN201310684190.9A priority patent/CN103873908A/zh
Priority to US14/105,440 priority patent/US8953099B2/en
Publication of KR20140077015A publication Critical patent/KR20140077015A/ko
Priority to US14/607,869 priority patent/US9621434B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H04N21/42209—Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42226—Reprogrammable remote control devices
    • H04N21/42227—Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys
    • H04N21/42228—Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys the reprogrammable keys being displayed on a display screen in order to reduce the number of keys on the remote control device itself
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application

Abstract

원격 제어 장치에 의해 제어 가능한 디스플레이 장치가 개시된다. 본 디스플레이 장치는 원격 제어 장치와 통신을 수행하는 통신부, 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보를 저장하는 저장부 및 사용자 명령에 기초하여 어플리케이션이 실행되면, 저장부에 저장된 UI 화면 정보 중 실행된 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송하도록 제어하는 제어부를 포함한다.

Description

디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법 { DISPLAY APPARATUS, REMOTE CONTROL APPARATUS AND METHOD FOR PROVIDING USER INTERDFACE USING THE SAME }
본 발명은 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법에 관한 것으로, 더욱 상세하게는, 사용자 명령을 입력받을 수 있는 사용자 인터페이스를 제공하는 원격 제어 장치에 의해 제어되는 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법에 관한 것이다.
최근 전자 기술의 발전으로, 스마트 TV와 같은 디스플레이 장치는 다양한 어플리케이션을 실행할 수 있다. 예를 들어, 스마트 TV는 SNS 관련 어플리케이션, 게임 관련 어플리케이션, 스포츠 관련 어플리케이션 등을 실행하여, 사용자에게 다양한 컨텐츠와 재미를 제공할 수 있다.
하지만, 종래에는 각 어플리케이션마다 어플리케이션의 컨트롤에 사용되는 키(또는, 버튼)가 서로 다름에도 불구하고, 하나의 원격 제어 장치를 통해 모든 어플리케이션을 제어하고자 하였다. 이에 따라, 원격 제어 장치의 크기가 커지게 되고 사용이 복잡해지는 문제점을 초래하였다.
따라서, 보다 간편한 방법으로 디스플레이 장치에서 실행 가능한 어플리케이션 모두를 제어하기 위한 방안의 모색이 요청된다.
본 발명은 상술한 필요성에 따른 것으로 본 발명의 목적은 디스플레이 장치에서 실행되는 어플리케이션 별로 어플리케이션을 컨트롤할 수 있는 UI 화면을 제공할 수 있는 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 원격 제어 장치에 의해 제어되는 디스플레이 장치는, 상기 원격 제어 장치와 통신을 수행하는 통신부, 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보를 저장하는 저장부 및 사용자 명령에 기초하여 어플리케이션이 실행되면, 상기 저장부에 저장된 UI 화면 정보 중 상기 실행된 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하도록 제어하는 제어부를 포함한다.
여기에서, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함할 수 있다.
또한, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함할 수 있다.
그리고, 상기 제어부는, 상기 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 상기 저장부에 저장된 UI 화면 정보 중 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하도록 제어할 수 있다.
한편, 본 발명의 일 실시 예에 따른 디스플레이 장치를 제어하는 원격 제어 장치는 디스플레이부, 상기 디스플레이 장치와 통신을 수행하는 통신부 및 상기 디스플레이 장치로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보가 수신되면, 상기 수신된 UI 화면 정보에 기초하여 상기 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어하는 제어부를 포함하며, 상기 UI 화면 정보는, 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보일 수 있다.
여기에서, 상기 제어부는, 상기 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 수신하고, 상기 수신된 UI 화면 정보에 기초하여 상기 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어할 수 있다.
한편, 본 실시 예에 따른 원격 제어 장치는 상기 수신된 UI 화면 정보를 저장하는 저장부를 더 포함하며, 상기 제어부는, 상기 디스플레이 장치에서 상기 어플리케이션 실행 화면이 재차 디스플레이되면, 상기 저장된 UI 화면 정보를 이용하여 상기 UI 화면을 디스플레이할 수 있다.
또한, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함할 수 있다.
그리고, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함할 수 있다.
한편, 본 발명의 일 실시 예에 따른 원격 제어 장치에 의해 제어 가능한 디스플레이 장치의 사용자 인터페이스 제공 방법은 사용자 명령에 기초하여 어플리케이션을 실행하는 단계 및 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 상기 실행된 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하는 단계를 포함한다.
여기에서, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함할 수 있다.
또한, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함할 수 있다.
그리고, 상기 전송하는 단계는, 상기 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송할 수 있다.
한편, 본 발명의 일 실시 예에 따른 디스플레이 장치를 제어하는 원격 제어 장치의 사용자 인터페이스 제공 방법은 상기 디스플레이 장치로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보를 수신하는 단계 및 상기 수신된 UI 화면 정보에 기초하여 상기 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하는 단계를 포함하며, 상기 UI 화면 정보는, 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보일 수 있다.
여기에서, 본 실시 예에 따른 사용자 인터페이스 방법은 상기 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 수신하는 단계 및 상기 수신된 UI 화면 정보에 기초하여 상기 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하는 단계를 더 포함할 수 있다.
또한, 본 실시 예에 따른 사용자 인터페이스 방법은 상기 수신된 UI 화면 정보를 저장하는 단계 및 상기 디스플레이 장치에서 상기 어플리케이션 실행 화면이 재차 디스플레이되면, 상기 저장된 UI 화면 정보를 이용하여 상기 UI 화면을 디스플레이하는 단계를 더 포함할 수 있다.
그리고, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함할 수 있다.
또한, 상기 UI 화면 정보는, 상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 원격 제어 장치에 디스플레이되는 UI 화면은 디스플레이 장치에서 실행되는 어플리케이션에 따라 변경되어, 각 어플리케이션 컨트롤을 위한 사용자 명령을 입력받을 수 있다. 이에 따라, 원격 제어 장치는 모든 어플리케이션을 구동하기 위한 별도의 키를 포함하지 않아도 되므로, 원격 제어 장치를 사용하는 사용자의 편의성이 향상될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 사용자 인터페이스 제공 시스템을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 3은 본 발명의 일 실시 예에 따른 디스플레이 장치의 세부 구성을 설명하기 위한 블록도,
도 4는 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 설명하기 위한 블록도,
도 5는 본 발명의 일 실시 예에 따른 원격 제어 장치의 세부 구성을 설명하기 위한 블록도,
도 6 및 도 7은 본 발명의 일 실시 예에 따라 사용자 인터페이스 제공 방법을 설명하기 위한 도면들,
도 8은 본 발명의 일 실시 예에 따른 원격 제어 장치에 의해 제어 가능한 디스플레이 장치의 사용자 인터페이스 제공 방법을 설명하기 위한 흐름도, 그리고
도 9는 본 발명의 일 실시 예에 따른 디스플레이 장치를 제어하는 원격 제어 장치의 사용자 인터페이스 제공 방법을 설명하기 위한 흐름도이다.
이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른 사용자 인터페이스 제공 시스템을 설명하기 위한 도면이다. 도 1에 따르면, 본 사용자 인터페이스 제공 시스템은 디스플레이 장치(100)와 원격 제어 장치(200)를 포함한다. 도 1에 도시된 디스플레이 장치(100)와 원격 제어 장치(200)는 블루투스(Bluetooth), 지그비(Zigbee), 와이파이(Wifi), 적외선 통신, RF(Radio Frequency) 통신 등과 같은 통신 방식을 이용하여, 서로 통신을 수행할 수 있다.
한편, 디스플레이 장치(100)는 어플리케이션을 실행하고, 그에 따른 어플리케이션 실행 화면을 디스플레이할 수 있다. 여기에서, 어플리케이션이란, 스스로 실행가능한 응용 프로그램으로, TV 관련 어플리케이션, SNS(Social Network Service) 관련 어플리케이션, 멀티미디어 컨텐츠(즉, 음악, 동영상) 관련 어플리케이션, 게임 관련 어플리케이션, 스포츠 관련 어플리케이션, 교육 관련 어플리케이션 등을 포함할 수 있다.
한편, 어플리케이션은 제조시 디스플레이 장치(100)에 설치되거나, 이후 외부 서버(미도시) 등으로부터 수신받아 디스플레이 장치(100)에 설치될 수 있다.
그리고, 디스플레이 장치(100)는 각 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송할 수 있다. 여기에서, UI(User Interface) 화면 정보는, 어플리케이션을 컨트롤하기 위한 사용자 명령을 입력받을 수 있는 UI 화면을 원격 제어 장치(200)에 디스플레이하기 위한 정보를 포함할 수 있다.
이에 따라, 원격제어 장치(200)는 디스플레이 장치(100)로부터 UI 화면 정보를 수신하여, 디스플레이 장치(100)에서 실행 중인 어플리케이션의 컨트롤에 필요한 UI 화면을 디스플레이할 수 있다. 이에 따라, 사용자는 원격 제어 장치(200)에 디스플레이된 UI 화면을 통해, 어플리케이션 실행 화면 상에 디스플레이된 각종 메뉴를 선택하거나, 어플리케이션에서 제공되는 각종 기능을 실행시킬 수 있다.
이와 같이, 본 실시 예에 따른 사용자 인터페이스 제공 시스템은 디스플레이 장치(100)에서 실행 중인 어플리케이션 별로 각 어플리케이션을 컨트롤하기 위한 UI 화면을 원격 제어 장치(200)에 디스플레이할 수 있게 된다. 이에 따라, 실행 중인 어플리케이션에 따라 최적화된 인터페이스를 사용자에게 제공할 수 있게 된다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다. 도 2에 따르면, 디스플레이 장치(100)는 원격 제어 장치(도 1의 200)에 의해 제어 가능하며, 통신부(110), 저장부(120) 및 제어부(130)를 포함한다. 디스플레이 장치(100)는 스마트 TV로 구현될 수 있으나, 이에 한정되는 것은 아니며, 데스크 탑, 스마트 폰, PDA, 노트북 등과 같이 디스플레이 유닛을 구비한 다양한 장치로 구현될 수 있다.
통신부(110)는 원격 제어 장치(200)와 통신을 수행한다.
구체적으로, 통신부(110)는 블루투스, 지그비, 적외선 통신, RF 통신 등과 같은 근거리 무선 통신 방식에 따라 원격 제어 장치(200)와 무선 통신을 수행할 수 있다. 이를 위해, 통신부(110)는 각 통신 방식에서 이용될 수 있는 통신 모듈을 구비할 수 있다.
예를 들어, 블루투스 통신 방식에 따라 통신을 수행하는 경우, 통신부(110)는 블루투스 통신 모듈을 통해 원격 제어 장치(200)와 페어링을 수행하여, 원격 제어 장치(200)와 통신 가능한 상태가 될 수 있다. 또한, 지그비 통신 모듈을 구비한 경우에도, 통신부(110)는 지그비 통신 모듈을 통해 원격 제어 장치(200)와 페어링을 수행하여, 원격 제어 장치(200)와 통신 가능한 상태가 될 수 있다. 한편, 적외선 통신 또는 RF 통신 방식에 따라 통신을 수행하는 경우, 통신부(110)는 적외선 신호 또는 RF 신호를 원격 제어 장치(200)와 서로 송수신하여 통신을 수행할 수 있다.
또한, 통신부(110)는 와이파이 등을 이용하여 원격 제어 장치(200)와 무선 통신을 수행할 수도 있다. 예를 들어, 통신부(110)는 와이파이 통신 모듈을 통해 별도의 네트워크 망을 거치지 않고 원격 제어 장치(200)와 직접 연결되어 통신을 수행하거나, 와이파이 통신 모듈을 통해 액세스 포인트(access point, AP)에 접속하여 네트워크 망을 이용하여 원격 제어 장치(200)와 통신을 수행할 수도 있다. 또한, 통신부(110)는 인터넷 망을 통해 원격 제어 장치(200)와 무선 통신을 수행할 수 있다.
이와 같이, 통신부(110)는 다양한 통신 방식을 이용하여 원격 제어 장치(200)와 통신을 수행할 수 있다.
저장부(120)는 디스플레이 장치(100)에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보를 저장한다. 여기에서, UI 화면 정보는, 어플리케이션을 컨트롤하기 위한 사용자 명령을 입력받을 수 있는 UI 화면을 원격 제어 장치(200)에 디스플레이하기 위한 정보를 포함할 수 있다.
구체적으로, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키 및 키의 배열 정보를 포함할 수 있다. 여기에서, 키의 배열 정보는 키의 사이즈, 위치 및 형상 중 적어도 하나에 대한 정보를 포함할 수 있다. 즉, 저장부(120)는 어플리케이션의 컨트롤에 필요한 키와 각 키가 UI 화면 상에서 디스플레이되는 위치, 각 키의 사이즈 및 형상에 대한 정보를 어플리케이션 별로 매핑시켜 저장할 수 있다. 다만, 실시 예에 따라 상술한 정보들 중 일부 정보가 생략되거나, 다른 정보가 추가되는 것도 가능하다. 예를 들어, 형상에 대한 정보는 저장되어 있지 않을 수 있으며 이 경우, 원격 제어 장치(200)는 기설정된 형상으로 UI 화면 상에서 각 키를 표시할 수 있다.
이 경우, 저장부(120)는 어플리케이션에 대한 UI 화면 정보를 원격 제어 장치(200)의 화면 사이즈별로 매핑시켜 저장할 수도 있다. 구체적으로, 저장부(120)는 원격 제어 장치(200)의 화면 사이즈별로, 어플리케이션의 컨트롤에 필요한 각 키가 UI 화면 상에서 디스플레이되는 위치, 각 키의 사이즈 및 형상에 대한 정보를 매핑시켜 저장할 수 있다.
예를 들어, 저장부(120)는 A×B의 사이즈를 갖는 UI 화면을 디스플레이할 수 있는 원격 제어 장치(200)의 경우, 특정 키가 UI 화면 상에서 a×b 픽셀부터 X 사이즈를 갖는 형상으로 디스플레이되고, C×D의 사이즈를 갖는 UI 화면을 디스플레이할 수 있는 원격 제어 장치(200)의 경우, 특정 키가 UI 화면 상에서 c×d 픽셀부터 Y 사이즈를 갖는 형상으로 디스플레이되는 정보를 저장할 수 있다.
또한, 저장부(120)는 기준 UI 화면 사이즈에 대한 정보를 저장할 수도 있다. 구체적으로, 저장부(120)는 기준 UI 화면 사이즈에서 어플리케이션의 컨트롤에 필요한 각 키가 디스플레이되는 위치, 각 키의 사이즈 및 형상에 대한 정보를 저장할 수 있다. 예를 들어, 저장부(120)는 기준 UI 화면이 A×B의 사이즈를 가질 때, 특정 키가 기준 UI 화면 상에서 a×b 픽셀부터 X 사이즈를 갖도록 디스플레이되는 정보를 저장할 수 있다.
또한, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 이미지를 구성하는 키에 대한 정보를 포함할 수 있다. 여기에서, 키에 대한 정보는 UI 화면 이미지에 포함된 키의 종류 및 UI 화면 이미지에서 키가 배치된 위치에 대한 정보를 포함할 수 있다. 즉, 저장부(120)는 어플리케이션의 컨트롤하기 위한 사용자 명령을 입력받을 수 있는 UI 화면 이미지 및 각 UI 화면 이미지에 포함된 키의 종류, 각 키가 UI 화면 이미지 상에서 배치된 위치에 대한 정보를 어플리케이션별로 저장할 수 있다.
한편, 저장부(120)는 어플리케이션 컨트롤을 위한 제어 명령을 저장할 수 있다. 여기에서, 제어 명령은, 어플리케이션을 컨트롤할 수 있는 명령을 포함한다.
구체적으로, 저장부(120)는 어플리케이션 별로 어플리케이션 컨트롤을 위한 제어 명령을 각 키마다 매핑시켜 저장할 수 있다. 예를 들어, 저장부(120)는 동영상 어플리케이션의 경우 동영상 어플리케이션의 컨트롤을 위한 제어 명령을 각 키마다 매핑시켜 저장하고, 게임 어플리케이션의 경우 게인 어플리케이션의 컨트롤을 위한 제어 명령을 각 키마다 매핑시켜 저장할 수 있다.
한편, 저장부(120)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
제어부(130)는 디스플레이 장치(100)의 전반적인 동작을 제어한다. 구체적으로, 제어부(130)는 원격 제어 장치(200)와 통신을 수행하도록 통신부(110)를 제어할 수 있다. 예를 들어, 통신부(110)에 마련된 블루투스 통신 모듈을 원격 제어 장치(200)와 통신을 수행하는 경우, 제어부(130)는 블루투스 통신 모듈을 이용하여 통신 가능한 외부 기기를 검색하고 검색된 원격 제어 장치(200)와 핀코드(PIN Code)를 송수신하여, 원격 제어 장치(200)와 페어링 동작을 수행하도록 통신부(110)를 제어할 수 있다.
다만, 제어부(130)는 상술한 예외에도 통신부(110)에 마련된 통신 모듈의 종류에 따라, 각 통신 모듈에 제공하는 통신 방식에 의해 원격 제어 장치(200)와 통신을 수행하도록 통신부(110)를 제어할 수 있다.
또한, 제어부(130)는 사용자 명령에 기초하여 어플리케이션이 실행되면, 저장부(120)에 저장된 UI 화면 정보 중 실행된 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
구체적으로, 제어부(130)는 어플리케이션이 실행되어, 그 실행 화면이 디스플레이되고 있는 어플리케이션을 판단하고, 판단된 어플리케이션에 매핑되는 UI 화면 정보를 저장부(120)로부터 독출하여 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 예를 들어, 게임 어플리케이션이 구동되어 게임 화면이 디스플레이되는 경우, 제어부(130)는 저장부(120)에 저장된 UI 화면 정보 중 게임 어플리케이션에 매핑된 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
한편, 제어부(130)는 원격 제어 장치(200)의 화면 사이즈에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 구체적으로, 원격 제어 장치(200)로부터 화면 사이즈에 대한 정보가 수신되면, 제어부(130)는 어플리케이션마다 원격 제어 장치(200)의 화면 사이즈별로 저장된 UI 화면 정보 중 수신된 화면 사이즈에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
또한, 제어부(130)는 기준 UI 화면 사이즈에 대한 정보를 원격 제어 장치(200)로 전송하도록 제어할 수도 있다. 구체적으로, 제어부(130)는 어플리케이션의 컨트롤에 필요한 키, 각 키가 기준 UI 화면 사이즈에서 디스플레이되는 위치, 각 키의 사이즈 및 형상에 대한 정보를, 기준 UI 화면 사이즈에 대한 정보와 함께 원격 제어 장치(200)로 전송하도록 제어할 수도 있다.
또한, 제어부(130)는 UI 화면 정보에 대응되는 어플리케이션에 대한 정보를 원격 제어 장치(200)로 전송할 수 있다. 여기에서, 어플리케이션에 대한 정보는 어플리케이션의 종류, 명칭, 고유 번호 중 적어도 하나를 포함할 수 있다. 이 경우, 원격 제어 장치(200)는 디스플레이 장치(100)로부터 수신된 UI 화면 정보에 어플리케이션에 대한 정보를 매핑시켜 저장할 수 있다.
한편, 제어부(130)는 UI 화면 정보를 리셋하기 위한 명령을 원격 제어 장치(200)로 전송할 수 있다. 구체적으로, 제어부(130)는 실행 중이던 복수의 어플리케이션에 대한 실행이 중단되거나 디스플레이 장치(100)에 대한 전원 오프 명령이 입력되면, 원격 제어 장치(200)에 저장된 UI 화면 정보를 리셋시키기 위한 명령을 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
한편, 제어부(130)는 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 저장부(120)에 저장된 UI 화면 정보 중 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
구체적으로, 제어부(130)는 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되고, 다른 어플리케이션이 실행되어 그에 따른 어플리케이션 실행 화면이 디스플레이되는 경우, 저장부(120)에 저장된 UI 화면 정보 중 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
또한, 제어부(130)는 멀티 태스킹에 따라, 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되지 않은 상태인 경우에도, UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
구체적으로, 제어부(130)는 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되지 않은 상태에서, 다른 어플리케이션이 실행되어 그에 따른 어플리케이션 실행 화면이 디스플레이되는 경우, 저장부(120)에 저장된 UI 화면 정보 중 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
또한, 제어부(130)는 복수의 어플리케이션이 실행 중인 상태에서, 이전에 디스플레이되던 어플리케이션 실행 화면이 재차 디스플레이되면, 저장부(120)에 UI 화면 정보 중 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 구체적으로, 멀티 태스킹 기능이 실행되면, 이전에 실행되던 어플리케이션의 실행 화면은 사라지고, 새롭게 실행된 어플리케이의 실행 화면이 디스플레이된다. 이후, 사용자 명령에 의해 이전에 디스플레이되던 어플리케이션 실행 화면이 재차 디스플레이되면, 제어부(130)는 재차 디스플레이되는 어플리케션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 즉, 복수의 어플리케이션이 실행되고 있는 상태에서 디스플레이되는 어플리케이션 실행 화면이 변경된 경우, 제어부(130)는 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송하도록 제어할 수 있다.
이 경우, 제어부(130)는 현재 디스플레이되는 어플리케이션에 대한 정보를 원격 제어 장치(200)로 전송하도록 제어할 수도 있다. 여기에서, 어플리케이션에 대한 정보는 어플리케이션의 종류, 명칭, 고유 번호 중 적어도 하나를 포함할 수 있다. 이에 따라, 원격 제어 장치(200)는 디스플레이 장치(100)로부터 수신된 어플리케이션에 대한 정보를 이용하여, 디스플레이 장치(100)에서 현재 디스플레이되는 어플리케션을 판단하고, 기저장된 UI 화면 중에서 판단 결과에 대응되는 UI 화면을 디스플레이할 수 있다.
한편, 제어부(130)는 어플리케이션 컨트롤을 위한 제어 명령을 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 여기에서, 제어 명령은 어플리케이션을 컨트롤할 수 있는 명령을 포함한다.
구체적으로, 제어부(130)는 실행 화면이 현재 디스플레이되는 어플리케이션의 컨트롤에 필요한 각 키에 매핑된 제어 명령을 원격 제어 장치(200)로 전송하도록 제어할 수 있다. 이에 따라, 원격 제어 장치(200)는 디스플레이 장치(100)로부터 수신된 제어 명령을 이용하여, UI 화면 상에서 사용자에 의해 선택된 키에 매핑된 제어 명령을 디스플레이 장치(100)로 전송할 수 있다.
이 경우, 제어부(130)는 원격 제어 장치(200)로부터 수신된 제어 명령에 대응되는 동작을 수행할 수 있다. 예를 들어, 제어부(130)는 원격 제어 장치(200)로부터 수신된 제어 명령에 따라 어플리케이션 실행 화면 상에 디스플레이된 각종 메뉴를 선택하거나, 어플리케이션에서 제공되는 각종 기능 등 어플리케이션에서 실행 가능한 다양한 동작이 수행되도록 제어할 수 있다.
또한, 제어부(130)는 원격 제어 장치(200)로부터 수신된 키 정보에 대응되는 동작을 수행할 수도 있다. 구체적으로, 원격 제어 장치(200)로부터 UI 화면 상에서 사용자가 선택된 키에 대한 정보가 수신되면, 제어부(130)는 키 정보에 따라 어플리케이션 실행 화면 상에 디스플레이된 각종 메뉴를 선택하거나, 어플리케이션에서 제공되는 각종 기능 등 어플리케이션에서 실행 가능한 다양한 동작이 수행되도록 제어할 수 있다. 예를 들어, 동영상 어플리케이션이 실행 중인 상태에서 원격 제어 장치(200)로부터 정지 키에 대한 정보가 수신되면, 제어부(130)는 동영상 어플리케이션을 통해 재생 중인 동영상에 대한 재생을 중단할 수 있다.
도 3은 본 발명의 일 실시 예에 따른 디스플레이 장치의 세부 구성을 설명하기 위한 블록도이다. 도 3에 따르면, 디스플레이 장치(100)는 통신부(110), 저장부(120), 제어부(130), 수신부(140), 신호 처리부(150), 디스플레이부(160) 및, 오디오 출력부(170) 및 사용자 인터페이스부(180)를 포함한다.
수신부(140)는 다양한 컨텐츠를 수신한다. 구체적으로, 수신부(140)는 방송 네트워크를 이용하여 방송 프로그램 컨텐츠를 전송하는 방송국 또는 인터넷을 이용하여 컨텐츠 파일을 전송하는 웹 서버로부터 컨텐츠를 수신한다. 또한, 디스플레이 장치(100) 내에 마련되거나 디스플레이 장치(100)에 연결된 각종 기록 매체 재생 장치로부터 컨텐츠를 수신할 수도 있다. 기록 매체 재생 장치란 CD, DVD, 하드디스크, 블루레이 디스크, 메모리 카드, USB 메모리 등과 같은 다양한 유형의 기록 매체에 저장된 컨텐츠를 재생하는 장치를 의미한다.
방송국으로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(140)는 튜너(미도시), 복조기(미도시), 등화기(미도시) 등과 같은 구성을 포함하는 형태로 구현될 수 있다. 반면, 웹 서버와 같은 소스로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(140)는 네트워크 인터페이스 카드(미도시)로 구현될 수 있다. 또는, 상술한 각종 기록 매체 재생 장치로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(140)는 기록 매체 재생 장치와 연결된 인터페이스부(미도시)로 구현될 수 있다. 이와 같이, 수신부(140)는 실시 예에 따라 다양한 형태로 구현될 수 있다.
신호 처리부(150)는 수신부(140)를 통해 수신된 컨텐츠가 디스플레이부(160)를 통해 출력될 수 있도록 컨텐츠에 대한 신호처리를 수행한다.
구체적으로, 신호 처리부(150)는 컨텐츠에 포함된 비디오 신호에 대해 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행하여 디스플레이부(160)에서 출력 가능한 형태로 비디오 신호를 변환할 수 있다. 또한, 신호 처리부(150)는 컨텐츠에 포함된 오디오 신호에 대해 디코딩이나 증폭, 노이즈 필터링 등의 다양한 신호 처리를 수행하여 오디오 출력부(170)에서 출력 가능한 형태로 오디오 신호를 변환할 수 있다.
디스플레이부(160)는 신호 처리부(150)에서 처리된 각종 비디오 신호를 출력하는 구성요소이다. 또한, 디스플레이부(160)는 사용자 명령에 따라 실행된 다양한 어플리케이션 실행 화면을 디스플레이할 수 있다.
이를 위해, 디스플레이부(160)는 액정 표시 장치(Liquid Crystal Display, LCD), 유기 전기 발광 다이오드(Organic Light Emitting Display, OLED) 또는 플라즈마 표시 패널(Plasma Display Panel, PDP) 등으로 구현되어, 디스플레이 장치(100)를 통해 제공 가능한 다양한 디스플레이 화면을 제공할 수 있다.
오디오 출력부(170)는 신호 처리부(150)에서 처리된 각종 오디오 신호 뿐만 아니라 각종 알림 음이나 음성 메시지 등을 출력하는 구성요소이다.
사용자 인터페이스부(180)는 다양한 사용자 명령을 수신하여 제어부(130)로 전달한다. 이를 위해, 사용자 인터페이스부(180)는 입력 패널로 구현되어, 디스플레이 장치(100)의 기능을 제어하기 위한 다양한 사용자 명령을 입력받을 수 있다. 여기에서, 입력 패널은 터치패드(Touch Pad) 혹은 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad) 또는 터치 스크린(Touch Screen) 방식으로 이루어질 수 있다.
또한, 통신부(140)는 디스플레이 장치(100)의 기능을 제어하기 위한 다양한 사용자 명령을 원격 제어 장치(200)로부터 수신하여 제어부(130)로 전달할 수 있다.
이들 실시 예에서, 사용자 명령은 디스플레이 장치(100)가 스마트 TV로 구현되는 경우, 전원 온/오프, 채널 변경, 볼륨 변경 등 스마트 TV의 기능을 제어하기 위한 사용자 명령을 포함할 수 있다. 이 경우, 제어부(130)는 통신부(140) 또는 사용자 인터페이스부(180)를 통해 입력된 사용자 명령에 대응되는 각종 기능을 실행하도록 다른 구성요소를 제어할 수 있다.
특히, 통신부(140) 및 사용자 인터페이스부(180)는 디스플레이 장치(100)에서 실행 가능한 다양한 어플리케이션에 대한 실행 명령을 입력받을 수 있다. 이 경우, 제어부(130)는 통신부(140) 또는 사용자 인터페이스부(180)를 통해 입력된 사용자 명령에 대응되는 어플리케이션을 실행하고, 실행 화면을 디스플레이부(160)를 통해 디스플레이할 수 있다.
한편, 저장부(120)는 디스플레이 장치(100)를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 각종 어플리케이션, 어플리케이션 실행 중에 입력되거나 설정되는 각종 데이터, 컨텐츠 등과 같이 다양한 데이터가 저장될 수 있다.
한편, 제어부(130)는 저장부(120)에 저장된 각종 프로그램을 이용하여 디스플레이 장치(100)의 동작을 전반적으로 제어한다.
구체적으로, 제어부(130)는 RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n), 버스(136)를 포함한다.
RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(135-1 내지 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
메인 CPU(133)는 저장부(120)에 액세스하여, 저장부(120)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(120)에 저장된 각종 어플리케이션, 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
ROM(132)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(133)는 ROM(132)에 저장된 명령어에 따라 저장부(120)에 저장된 O/S를 RAM(121)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(133)는 저장부(120)에 저장된 각종 어플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(134)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면, 어플리케이션 실행 화면을 생성한다. 연산부(미도시)는 그래픽 처리부(134)으로부터 수신된 제어 명령을 이용하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이부(160)의 화면 내에 표시된다.
한편, 도 3은 디스플레이 장치(100)에 포함된 세부 구성의 일 예를 든 것으로, 실시 예에 따라서는, 도 3에 도시된 구성 요소 중 일부는 생략 또는 변경될 수도 있고, 다른 구성요소가 더 추가될 수도 있다. 예를 들어, 디스플레이 장치(100)가 스마트 폰으로 구현되는 경우, 디스플레이 장치(100)의 현재 위치를 산출하기 위한 GPS 수신부(미도시) 등을 더 포함할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 설명하기 위한 블록도이다. 도 4에 따르면, 원격 제어 장치(200)는 디스플레이부(210), 통신부(220) 및 제어부(230)를 포함한다.
이 경우, 원격 제어 장치(200)는 디스플레이 장치(100)를 제어하기 위한 리모컨으로 구현될 수 있다. 하지만, 이 예에 한정되는 것은 아니며, 디스플레이 장치(100)를 제어할 수 있는 어플리케이션(가령, 리모콘 어플리케이션)을 실행할 수 있는 스마트 폰, 태블릿, PDA 등으로 구현될 수도 있다.
디스플레이부(210)는 다양한 화면을 디스플레이한다. 구체적으로, 디스플레이부(210)는 디스플레이 장치(도 1 내지 도 3의 100)에서 디스플레이되는 어플리케이션을 컨트롤할 수 있는 사용자 명령을 입력받기 위한 UI 화면을 디스프레이할 수 있다.
한편, 디스플레이부(210)는 터치패드와 상호 레이어 구조를 이루는 터치 스크린 형태로 구현될 수 있다. 이 경우, 디스플레이부(210)은 화면을 디스플레이하면서, 사용자 명령을 입력받을 수 있게 된다. 여기서, 디스플레이부(210)는 터치 입력 위치 및 면적 뿐만 아니라 터치 입력 압력까지도 검출할 수 있으며, 검출 결과를 제어부(230)로 제공할 수 있다.
통신부(220)는 디스플레이 장치(100)와 통신을 수행한다.
구체적으로, 통신부(220)는 블루투스, 지그비, 적외선 통신, RF 통신 등과 같은 근거리 무선 통신 방식에 따라 디스플레이 장치(100)와 무선 통신을 수행할 수 있다. 이를 위해, 통신부(220)는 각 통신 방식에서 이용될 수 있는 통신 모듈을 구비할 수 있다.
예를 들어, 블루투스 통신 방식에 따라 통신을 수행하는 경우, 통신부(220)는 블루투스 통신 모듈을 통해 디스플레이 장치(100)와 페어링을 수행하여, 디스플레이 장치(100)와 통신 가능한 상태가 될 수 있다. 또한, 지그비 통신 모듈을 구비한 경우에도, 통신부(220)는 지그비 통신 모듈을 통해 디스플레이 장치(100)와 페어링을 수행하여, 디스플레이 장치(100)와 통신 가능한 상태가 될 수 있다. 한편, 적외선 통신 또는 RF 통신 방식에 따라 통신을 수행하는 경우, 통신부(220)는 적외선 신호 또는 RF 신호를 디스플레이 장치(100)와 서로 송수신하여 통신을 수행할 수 있다.
또한, 통신부(220)는 와이파이 등을 이용하여 디스플레이 장치(100)와 무선 통신을 수행할 수도 있다. 예를 들어, 통신부(220)는 와이파이 통신 모듈을 통해 별도의 네트워크 망을 거치지 않고 디스플레이 장치(100)와 직접 연결되어 통신을 수행하거나, 액세스 포인트(access point, AP)를 이용하여 네트워크 망에 연결하여 디스플레이 장치(100)와 통신을 수행할 수도 있다. 또한, 통신부(210)는 인터넷 망을 통해 원격 제어 장치(200)와 무선 통신을 수행할 수 있다.
이와 같이, 통신부(220)는 다양한 통신 방식을 이용하여 디스플레이 장치(100)와 통신을 수행할 수 있다.
제어부(230)는 원격 제어 장치(200)의 전반적인 동작을 제어한다. 구체적으로, 제어부(230)는 디스플레이 장치(100)와 통신을 수행하도록 통신부(220)를 제어할 수 있다. 예를 들어, 통신부(220)가 블루투스 통신 모듈을 통해 원격 제어 장치(200)와 통신을 수행하는 경우, 제어부(230)는 블루투스 통신 모듈을 이용하여 통신 가능한 외부 기기를 검색하고, 검색된 디스플레이 장치(100)와 핀코드(PIN Code)를 송수신하도록 통신부(220)를 제어하여, 디스플레이 장치(100)와 페어링 동작을 수행할 수 있다.
다만, 제어부(230)는 상술한 예외에도 통신부(220)에 마련된 통신 모듈의 종류에 따라, 각 통신 모듈에 제공하는 통신 방식에 의해 원격 제어 장치(200)와 통신을 수행하도록 통신부(110)를 제어할 수 있다.
한편, 제어부(230)는 디스플레이 장치(100)로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보가 수신되면, 수신된 UI 화면 정보에 기초하여 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어할 수 있다. 즉, 제어부(230)는 UI 화면 정보를 이용하여, 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어할 수 있다.
여기에서, UI 화면 정보는, 디스플레이 장치(100)에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보일 수 있다. 즉, 디스플레이 장치(100)는 실행 가능한 어플리케이션 별로 UI 화면 정보를 저장하고, 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송할 수 있다. 이에 따라, 원격 제어 장치(200)는 수신된 UI 화면 정보에 기초하여, 실행 화면이 디스플레이 장치(100)에서 현재 디스플레이되고 있는 어플리케이션을 컨트롤할 수 있는 UI 화면을 출력할 수 있다.
구체적으로, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키 및 키의 배열 정보를 포함한다. 여기에서, 키의 배열 정보는 키의 사이즈, 위치 및 형상 중 적어도 하나를 포함할 수 있다. 이에 따라, 제어부(230)는 UI 화면 정보에 기초하여, 어플리케이션 컨트롤에 필요한 키가 디스플레이부(210)의 화면 상에서 디스플레이되는 위치, 각 키의 사이즈 및 형상을 판단하고, 그에 따라 어플리케이션을 컨트롤하기 위한 UI 화면을 생성하여 디스플레이하도록 제어할 수 있다. 즉, 제어부(230)는 수신된 UI 화면 정보에 기초하여 디스플레이부(210)의 화면 사이즈에 대응되도록 UI 화면을 생성할 수 있다.
한편, 제어부(230)는 디스플레이부(210)의 화면 사이즈에 대응되는 UI 화면 정보를 수신하도록 제어할 수 있다. 구체적으로, 제어부(230)는 디스플레이부(210)의 화면 사이즈에 대한 정보를 디스플레이 장치(100)로 전송하고, 디스플레이부(210)의 화면 사이즈에 대응되는 UI 화면 정보를 수신하도록 제어할 수 있다. 이에 따라, 제어부(230)는 디스플레이부(210)의 화면 사이즈에 대응되는 UI 화면 정보에 기초하여, 어플리케이션 컨트롤에 필요한 키가 디스플레이부(210)의 화면 상에서 디스플레이되는 위치, 각 키의 사이즈 및 형상을 판단하고, 그에 따라 어플리케이션을 컨트롤하기 위한 UI 화면을 생성하여 디스플레이하도록 제어할 수 있다. 즉, 제어부(230)는 디스플레이부(210)의 화면 사이즈에 부합하도록 디스플레이 장치(100)에서 이미 설정된 UI 화면 정보에 기초하여 UI 화면을 생성할 수 있다.
또한, 제어부(230)는 디스플레이 장치(100)로부터 기준 UI 화면 사이즈에 대한 정보가 수신되면, 수신된 기준 UI 화면 사이즈 정보를 이용하여 어플리케이션을 컨트롤하기 위한 UI 화면을 생성할 수 있다. 구체적으로, 제어부(230)는 수신된 기준 UI 화면 사이즈와 디스플레이부(210)의 화면 사이즈를 비교하여, 디스플레이부(210)의 화면 상에서 어플리케이션의 컨트롤에 필요한 각 키가 디스플레이되는 위치, 각 키의 사이즈 및 형상을 판단하고, 그에 따라 어플리케이션을 컨트롤하기 위한 UI 화면을 생성하여 디스플레이하도록 제어할 수 있다. 즉, 제어부(230)는 수신된 기준 UI 화면 사이즈 및 UI 화면 정보에 디스플레이부(210)의 화면 사이즈에 대응되도록 UI 화면을 생성할 수 있다.
한편, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 이미지를 구성하는 키에 대한 정보를 포함할 수 있다. 여기에서, 키에 대한 정보는 UI 화면 이미지에 포함된 키의 종류 및 UI 화면 이미지에서 키가 배치된 위치에 대한 정보를 포함할 수 있다. 이에 따라, 제어부(230)는 디스플레이 장치(100)로부터 수신된 UI 화면 이미지의 사이즈를 디스플레이부(210)의 화면 사이즈에 부합되도록 조정(가령, 스케일링)하여 UI 화면을 생성하고, 생성된 UI 화면을 디스플레이부(210)에 디스플레이하도록 제어할 수 있다.
한편, 제어부(230)는 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 변경된 어플리케이션에 대응되는 UI 화면 정보를 수신하고, 수신된 UI 화면 정보에 기초하여 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어할 수 있다.
즉, 디스플레이되는 어플리케이션 실행 화면이 변경된 경우, 디스플레이 장치(100)는 실행 화면이 현재 디스플레이되고 있는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송함을 도 2에서 전술한 바 있다. 이 경우, 제어부(230)는 수신된 UI 화면 정보에 기초하여 UI 화면을 재차 생성하여 디스플레이하도록 제어할 수 있다. 이에 따라, 사용자는 원격 제어 장치(200)에 디스플레이된 UI 화면을 이용하여 디스플레이 장치(100)에서 현재 디스플레이되고 있는 어플리케이션을 컨트롤할 수 있게 된다.
한편, 제어부(230)는 디스플레이부(210)에 디스플레이된 UI 화면에 대한 사용자 명령에 기초하여, 디스플레이 장치(100)에서 실행된 어플리케이션을 제어할 수 있다.
구체적으로, 제어부(230)는 디스플레이 장치(100)로부터 수신된 제어 명령을 이용하여, UI 화면 상에서 선택된 키에 대응되는 제어 명령을 디스플레이 장치(100)로 전송하도록 제어할 수 있다. 또한, 제어부(230)는 UI 화면 상에서 선택된 키에 대한 정보를 디스플레이 장치(100)로 전송하도록 제어할 수도 있다. 즉, 제어부(230)는 UI 화면 정보에 포함된 각 키의 위치 정보를 이용하여 UI 화면 상에서 선택된 키를 판단하고, 선택된 키에 대한 정보를 디스플레이 장치(100)로 전송하도록 제어할 수도 있다. 다만, 실시 예에 따라 기저장된 제어 명령을 이용하는 것도 가능하다. 예를 들어, 각 키에 대응되는 제어 명령이 기저장되어 있는 경우, 제어부(230)는 기저장된 제어 명령을 이용하여 UI 화면 상에서 선택된 키에 대응되는 제어 명령을 디스플레이 장치(100)로 전송하도록 제어할 수도 있다.
이에 따라, 디스플레이 장치(100)는 수신된 제어 명령 또는 키에 대한 정보에 기초하여 어플리케이션의 동작을 제어할 수 있다. 가령, 디스플레이 장치(100)는 게임 어플리케이션에 대한 실행 화면이 디스플레이된 상태에서 원격 제어 장치(200)로부터 게임 실행 화면 상에 표시된 객체를 이동시키기 위한 제어 명령이 수신되면, 수신된 제어 명령에 대응되도록 게임 실행 화면 상에 표시된 객체를 이동시킬 수 있다. 또한, 디스플레이 장치(100)는 동영상 어플리케이션에 대한 실행 화면이 디스플레이된 상태에서 원격 제어 장치(200)에서 재생 키가 선택되었다는 정보가 수신되면, 수신된 재생 키에 따라 동영상을 재생시킬 수 있다.
한편, 상술한 바와 같이, 원격 제어 장치(200)는 디스플레이 장치(100)를 제어하기 위한 리모컨으로 구현될 수 있지만, 디스플레이 장치(100)를 제어할 수 있는 어플리케이션(가령, 리모콘 어플리케이션)을 실행할 수 있는 스마트 폰, 태블릿, PDA 등으로 구현될 수도 있다. 이 경우, 제어부(230)는 사용자 명령에 따른 리모콘 어플리케이션을 실행하여, 디스플레이 장치(100)에서 실행 중인 어플리케이션의 동작을 제어할 수 있다.
예를 들어, 제어부(230)는 리모콘 어플리케이션을 실행하고, 그에 따른 실행 화면을 디스플레이부(210)에 디스플레이할 수 있다. 이후, 디스플레이 장치(100)로부터 디스플레이 장치(100)에 설치된 어플리케이션의 명칭, 어플리케이션에 대응되는 아이콘 등에 대한 정보가 수신되면, 해당 정보들을 포함하는 리스트를 디스플레이하도록 디스플레이부(210)를 제어할 수 있다. 그리고, 리스트 상에서 하나가 선택되면, 제어부(230)는 선택된 어플리케이션을 실행시키기 위한 제어 명령을 디스플레이 장치(100)로 전송하여, 선택된 어플리케이션이 실행되도록 제어할 수 있다. 이후, 제어부(230)는 디스플레이 장치(100)로부터 UI 화면 정보에 수신되면, 수신된 UI 화면 정보를 이용하여 어플리케이션 컨트롤을 위한 UI 화면을 디스플레이하도록 제어할 수 있다.
도 5는 본 발명의 일 실시 예에 따른 원격 제어 장치의 세부 구성을 설명하기 위한 블록도이다. 도 5에 따르면, 원격 제어 장치(200)는 디스플레이부(210), 통신부(220), 제어부(230), 저장부(240) 및 사용자 인터페이스부(250)를 포함한다. 도 5에 도시된 구성요소들 중 도 4에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
저장부(240)는 수신된 UI 화면 정보를 저장한다. 구체적으로, 저장부(240)는 디스플레이 장치(100)로부터 UI 화면 정보 및 어플리케이션에 대한 정보가 수신되면, UI 화면 정보별로 어플리케이션에 대한 정보를 매핑시켜 저장할 수 있다.
이를 위해, 저장부(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
이에 따라, 제어부(230)는 디스플레이 장치(100)에서 어플리케이션 실행 화면이 재차 디스플레이되면, 저장된 UI 화면 정보를 이용하여 UI 화면을 디스플레이할 수 있다.
구체적으로, 디스플레이 장치(100)는 멀티 태스킹 기능에 따라 복수의 어플리케이션이 실행 중인 상태에서 이전에 디스플레이되던 어플리케이션 실행 화면이 재차 디스플레이되면, 실행 화면이 재차 디스플레이되는 어플리케이션에 대한 정보를 원격 제어 장치(200)로 전송할 수 있다. 이 경우, 제어부(230)는 저장부(240)에 저장된 UI 화면 정보 중에서 수신된 어플리케이션에 대한 정보에 매핑되는 UI 화면 정보를 판단하고, 판단된 UI 화면 정보에 기초하여 UI 화면을 생성하여 디스플레이하도록 제어할 수 있다.
한편, 제어부(230)는 저장부(240)에 저장된 UI 화면 정보를 리셋할 수도 있다. 구체적으로, 제어부(230)는 원격 제어 장치(200)에 대한 전원 오프 명령이 입력되거나 디스플레이 장치(100)로부터 리셋 명령을 수신하는 경우, 저장부(240)에 저장된 UI 화면 정보를 리셋할 수 있다. 여기에서, 디스플레이 장치(100)는 디스플레이 장치(100)에서 실행 중인 복수의 어플리케이션의 실행이 중단되거나 디스플레이 장치(100)에 대한 전원 오프 명령이 입력된 경우, 원격 제어 장치(200)로 리셋 명령을 전송할 수 있다. 한편, 제어부(230)는 저장부(240)에 저장된 UI 화면 정보를 리셋하고, 이후 수신된 UI 화면 정보를 저장부(240)에 저장하도록 제어할 수 있다.
사용자 인터페이스부(250)는 사용자 명령을 입력받기 위한 구성이다. 구체적으로, 사용자 인터페이스부(250)는 디스플레이 장치(100)에서 실행 중인 어플리케이션을 컨트롤하기 위한 사용자 명령을 입력받을 수 있다. 이를 위해, 사용자 인터페이스부(250)는 터치패드(Touch Pad) 혹은 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad) 또는 터치 스크린 형태로 구현될 수 있다.
특히, 사용자 인터페이스부(250)는 디스플레이부(210)와 함께 터치 스크린 형태로 구현되어, 어플리케이션을 컨트롤하는 사용자 명령을 입력받기 위한 UI 화면을 디스플레이하고, 사용자에 의해 UI 화면 상에서 각종 키가 선택되면 그 결과를 제어부(230)로 전달할 수 있다.
이에 따라, 제어부(230)는 UI 화면을 통해 입력된 사용자 명령에 따라 디스플레이 장치(100)를 제어할 수 있다. 구체적으로, 제어부(230)는 UI 화면 상에서 선택된 키에 매핑된 제어 명령 또는 키에 대한 정보를 디스플레이 장치(100)로 전송하여 디스플레이 장치(100)에 디스플레이된 어플리케이션 실행 화면 상에 디스플레이된 각종 메뉴를 선택하거나, 어플리케이션에서 제공되는 각종 기능 등 어플리케이션에서 실행 가능한 다양한 동작이 수행되도록 제어할 수 있다.
또한, 사용자 인터페이스부(250)는 다양한 사용자 명령을 수신할 수도 있다. 여기에서, 사용자 명령은 디스플레이 장치(100)가 스마트 TV로 구현되는 경우, 전원 온/오프, 채널 변경, 볼륨 변경 등 스마트 TV의 기능을 제어하기 위한 사용자 명령을 포함할 수 있다. 이를 위해, 제어부(230)는 상술한 사용자 명령을 입력받기 위한 UI 화면을 디스플레이하도록 제어할 수 있으며, 사용자 인터페이스부(250)를 통해 입력된 사용자 명령에 대응되는 제어 명령을 디스플레이 장치(100)로 전송하도록 통신부(210)를 제어할 수 있다.
특히, 사용자 인터페이스부(250)는 디스플레이 장치(100)에 설치된 어플리케이션을 실행하기 위한 사용자 명령을 입력받을 수 있으며, 제어부(230)는 사용자 명령에 의해 선택된 어플리케이션을 실행시키고자 하는 제어 명령을 디스플레이 장치(100)로 전송하도록 제어할 수 있다.
도 6 및 도 7은 본 발명의 일 실시 예에 따라 사용자 인터페이스 제공 방법을 설명하기 위한 도면들이다.
먼저, 도 6와 같이, 디스플레이 장치(100)에서 동영상 어플리케이션이 실행되어 동영상 어플리케이션 실행 화면(310)이 디스플레이된 경우, 디스플레이 장치(100)는 동영상 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송한다. 이에 따라, 원격 제어 장치(200)는 수신된 UI 화면 정보에 기초하여, 동영상 어플리케이션의 컨트롤을 위한 각종 키를 포함하는 UI 화면(320)을 디스플레이할 수 있다.
예를 들어, UI 화면(320)은 볼륨 조절 키(321), 음소거 키(322), 메뉴 키(323), 방향 키(324) 및 선택 키(325)를 포함할 수 있다. 다만, 실시 예에 따라 상술한 키들 중 일부 키가 생략되거나, 다른 키가 추가되는 것도 가능하다.
이에 따라, 원격 제어 장치(200)는 사용자가 UI 화면(320) 상에 디스플레이된 키를 선택하면, 선택된 키에 대응되는 동작을 수행하도록 디스플레이 장치(100)를 제어할 수 있다. 가령, 사용자가 메뉴 키(323)를 선택하면, 원격 제어 장치(200)는 동영상 어플리케이션에서 제공가능한 동영상에 리스트(311)를 실행 화면(310) 상에 디스플레이하도록 디스플레이 장치(100)를 제어할 수 있다. 그리고, 원격 제어 장치(200)는 방향 키(324)가 선택되면 선택된 방향 키(324)에 따라 리스트(311) 상의 하이라이트 항목을 이동시키고, 선택 키(325)를 선택되면 하이라이트 항목이 위치한 동영상을 디스플레이하도록 디스플레이 장치(100)를 제어할 수 있다. 뿐만 아니라, 원격 제어 장치(200)는 볼륨 조절 키(321)가 선택되면 동영상 어플리케이션을 통해 재생되는 동영상의 볼륨을 조절하고, 음소거 키(322)가 선택되면 동영상의 볼륨을 뮤트시키도록 디스플레이 장치(100)를 제어할 수 있다.
다만, 각 키에 따라 동영상 어플리케이션에서 수행되는 상술한 기능은 일 예일 뿐이며, 실시 예에 따라 상술한 기능과는 다른 기능이 각 키에 매핑될 수 있음은 물론이다.
한편, 도 7과 같이, 디스플레이 장치(100)에서 게임 어플리케이션이 실행되어 게임 어플리케이션 실행 화면(330)이 디스플레이된 경우, 디스플레이 장치(100)는 게임 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치(200)로 전송한다. 이에 따라, 원격 제어 장치(200)는 수신된 UI 화면 정보에 기초하여, 동영상 어플리케이션의 컨트롤을 위한 각종 키를 포함하는 UI 화면(340)을 디스플레이할 수 있다.
예를 들어, UI 화면(340)은 방향 키(341), 액션 키(342), 메뉴 키(343) 및 선택 키(344)를 포함할 수 있다. 다만, 실시 예에 따라 상술한 키들 중 일부 키가 생략되거나, 다른 키가 추가되는 것도 가능하다.
이에 따라, 원격 제어 장치(200)는 사용자가 UI 화면(340) 상에 디스플레이된 키를 선택하면, 선택된 키에 대응되는 동작을 수행하도록 디스플레이 장치(100)를 제어할 수 있다. 가령, 사용자가 방향 키(341)를 선택하면, 원격 제어 장치(200)는 게임 어플리케이션의 실행 화면(330) 상에서 특정 객체(331)를 선택된 방향으로 이동하여 디스플레이하도록 디스플레이 장치(100)를 제어할 수 있다. 그리고, 원격 제어 장치(200)는 액션 키(342)가 선택되면 특정 객체(331)가 각 액션 키(342)에 매핑된 동작을 수행하도록 디스플레이 장치(100)를 제어하고, 시작 키(343)가 선택되면 게임 어플리케이션의 실행 화면이 일시 중지되도록 디스플레이 장치(100)를 제어할 수 있다. 뿐만 아니라, 원격 제어 장치(200)는 메뉴 키(344)가 선택되면 게임 어플리케이션에서 제공가능한 게임에 대한 리스트(미도시)를 실행 화면(330) 상에 디스플레이하도록 디스플레이 장치(100)를 제어할 수 있다.
다만, 각 키에 따라 게임 어플리케이션에서 수행되는 상술한 기능은 일 예일 뿐이며, 실시 예에 따라 상술한 기능과는 다른 기능이 각 키에 매핑될 수 있음은 물론이다.
이와 같이, 본 발명의 따르면 원격 제어 장치(200)에 디스플레이되는 UI 화면은 디스플레이 장치(100)에서 실행 화면이 디스플레이되고 있는 어플리케이션에 따라 변경될 수 있다. 이에 따라, 원격 제어 장치(200)는 모든 어플리케이션을 구동하기 위한 별도의 키를 포함하지 않아도, 사용자는 어플리케이션 별로 어플리케이션 컨트롤을 위한 UI 화면을 디스플레이하는 원격 제어 장치(200)를 통해 보다 손쉽게 디스플레이 장치(100)에서 실행 가능한 어플리케이션을 제어할 수 있게 된다.
도 8은 본 발명의 일 실시 예에 따른 원격 제어 장치에 의해 제어 가능한 디스플레이 장치의 사용자 인터페이스 제공 방법을 설명하기 위한 흐름도이다.
먼저, 사용자 명령에 기초하여 어플리케이션을 실행한다(S410).
이후, 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 실행된 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송한다(S420). 여기에서, 디스플레이 장치는 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보를 저장할 수 있다.
한편, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키 및 키의 배열 정보를 포함할 수 있다. 여기에서, 키의 배열 정보는 키의 사이즈, 위치 및 형상 중 적어도 하나에 대한 정보를 포함할 수 있다.
또한, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 이미지를 구성하는 키에 대한 정보를 포함할 수 있다. 여기에서, 키에 대한 정보는 UI 화면 이미지에 포함된 키의 종류 및 UI 화면 이미지에서 키가 배치된 위치에 대한 정보를 포함할 수 있다.
한편, S420 단계에서, 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송할 수 있다.
구체적으로, 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되고 다른 어플리케이션이 실행되어 그에 따른 어플리케이션 실행 화면이 디스플레이되는 경우, 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송할 수 있다. 또한, 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되지 않은 상태에서 다른 어플리케이션 실행 화면이 디스플레이되는 경우, 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송할 수 있다.
도 9는 본 발명의 일 실시 예에 따른 디스플레이 장치를 제어하는 원격 제어 장치의 사용자 인터페이스 제공 방법을 설명하기 위한 흐름도이다.
먼저, 디스플레이 장치로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보를 수신한다(S510).
이후, 수신된 UI 화면 정보에 기초하여 상기 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이한다(S520).
여기에서, UI 화면 정보는, 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보일 수 있다. 즉, 디스플레이 장치는 실행 가능한 어플리케이션 별로 UI 화면 정보를 저장하고, 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송할 수 있다. 이에 따라, 원격 제어 장치는 수신된 UI 화면 정보에 기초하여, 실행 화면이 디스플레이 장치에서 현재 디스플레이되고 있는 어플리케이션을 컨트롤할 수 있는 UI 화면을 출력할 수 있다.
구체적으로, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키 및 키의 배열 정보를 포함할 수 있다. 여기에서, 키의 배열 정보는 키의 사이즈, 위치 및 형상 중 적어도 하나에 대한 정보를 포함할 수 있다.
또한, UI 화면 정보는 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 이미지를 구성하는 키에 대한 정보를 포함할 수 있다. 여기에서, 키에 대한 정보는 UI 화면 이미지에 포함된 키의 종류 및 UI 화면 이미지에서 키가 배치된 위치에 대한 정보를 포함할 수 있다.
한편, 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 수신하고, 수신된 UI 화면 정보에 기초하여 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이할 수 있다.
구체적으로, 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되고 다른 어플리케이션이 실행되어 그에 따른 어플리케이션 실행 화면이 디스플레이되거나, 이전에 실행되고 있던 어플리케이션에 대한 실행이 중단되지 않은 상태에서 다른 어플리케이션 실행 화면이 디스플레이되는 경우, 디스플레이 장치는 현재 디스플레이되는 어플리케이션에 대응되는 UI 화면 정보를 원격 제어 장치로 전송할 수 있다. 이에 따라, 원격 제어 장치는 수신된 UI 화면 정보를 이용하여, 실행 화면이 현재 디스플레이되는 어플리케이션 컨트롤을 위한 UI 화면을 디스플레이할 수 있다.
또한, 수신된 UI 화면 정보를 저장하고, 디스플레이 장치에서 어플리케이션 실행 화면이 재차 디스플레이되면, 저장된 UI 화면 정보를 이용하여 UI 화면을 디스플레이할 수 있다. 즉, 상술한 예에서 멀티 태스킹 기능에 따라 복수의 어플리케이션이 실행 중인 상태에서 이전에 디스플레이되던 어플리케이션 실행 화면이 재차 디스플레이되면, 디스플레이 장치는 재차 디스플레이되는 어플리케이션에 대한 정보를 원격 제어 장치로 전송할 수 있다. 이에 따라, 원격 제어 장치는 디스플레이 장치로부터 수신된 어플리케이션에 대한 정보를 이용하여, 실행 화면이 현재 디스플레이되는 어플리케이션 컨트롤을 위한 UI 화면을 디스플레이할 수 있다.
이상과 같이, 본 발명에 따르면, 원격 제어 장치에 디스플레이되는 UI 화면은 디스플레이 장치에서 실행 화면이 디스플레이되고 있는 어플리케이션에 따라 변경될 수 있다. 이에 따라, 원격 제어 장치가 모든 어플리케이션을 구동하기 위한 별도의 키를 포함하지 않아도, 사용자는 어플리케이션 별로 어플리케이션 컨트롤을 위한 UI 화면을 디스플레이하는 원격 제어 장치를 통해 보다 손쉽게 디스플레이 장치에서 실행 가능한 어플리케이션을 제어할 수 있게 된다.
또한, 본 발명에 따른 사용자 인터페이스 제공 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 디스플레이 장치에 대해 도시한 블록도에서는 버스(bus)를 미도시하였으나, 사용자 단말 장치에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 사용자 단말 장치에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 디스플레이 장치 110 : 통신부
120 : 저장부 130 : 제어부

Claims (18)

  1. 원격 제어 장치에 의해 제어 가능한 디스플레이 장치에 있어서,
    상기 원격 제어 장치와 통신을 수행하는 통신부;
    상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보를 저장하는 저장부; 및
    사용자 명령에 기초하여 어플리케이션이 실행되면, 상기 저장부에 저장된 UI 화면 정보 중 상기 실행된 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하도록 제어하는 제어부;를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함하는 것을 특징으로 하는 디스플레이 장치.
  3. 제1항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함하는 것을 특징으로 하는 디스플레이 장치.
  4. 제1항에 있어서,
    상기 제어부는,
    상기 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 상기 저장부에 저장된 UI 화면 정보 중 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하도록 제어하는 것을 특징으로 하는 디스플레이 장치.
  5. 디스플레이 장치를 제어하는 원격 제어 장치에 있어서,
    디스플레이부;
    상기 디스플레이 장치와 통신을 수행하는 통신부; 및
    상기 디스플레이 장치로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보가 수신되면, 상기 수신된 UI 화면 정보에 기초하여 상기 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어하는 제어부;를 포함하며,
    상기 UI 화면 정보는,
    상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보인 것을 특징으로 하는 원격 제어 장치.
  6. 제5항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 수신하고, 상기 수신된 UI 화면 정보에 기초하여 상기 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  7. 제5항에 있어서,
    상기 수신된 UI 화면 정보를 저장하는 저장부;를 더 포함하며,
    상기 제어부는,
    상기 디스플레이 장치에서 상기 어플리케이션 실행 화면이 재차 디스플레이되면, 상기 저장된 UI 화면 정보를 이용하여 상기 UI 화면을 디스플레이하는 것을 특징으로 하는 원격 제어 장치.
  8. 제5항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함하는 것을 특징으로 하는 원격 제어 장치.
  9. 제5항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함하는 것을 원격 제어 장치.
  10. 원격 제어 장치에 의해 제어 가능한 디스플레이 장치의 사용자 인터페이스 제공 방법에 있어서,
    사용자 명령에 기초하여 어플리케이션을 실행하는 단계; 및,
    상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 상기 실행된 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하는 단계;를 포함하는 사용자 인터페이스 제공 방법.
  11. 제10항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  12. 제10항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  13. 제10항에 있어서,
    상기 전송하는 단계는,
    상기 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면, 상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 UI 화면 정보 중 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  14. 디스플레이 장치를 제어하는 원격 제어 장치의 사용자 인터페이스 제공 방법에 있어서,
    상기 디스플레이 장치로부터 실행 중인 어플리케이션에 대응되는 UI 화면 정보를 수신하는 단계; 및,
    상기 수신된 UI 화면 정보에 기초하여 상기 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하는 단계;를 포함하며,
    상기 UI 화면 정보는,
    상기 디스플레이 장치에서 실행 가능한 어플리케이션 별로 매핑된 화면 정보인 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  15. 제14항에 있어서,
    상기 디스플레이 장치에서 실행 중인 어플리케이션이 타 어플리케이션으로 변경되면 상기 변경된 타 어플리케이션에 대응되는 UI 화면 정보를 수신하는 단계; 및,
    상기 수신된 UI 화면 정보에 기초하여 상기 타 어플리케이션을 컨트롤하기 위한 UI 화면을 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  16. 제14항에 있어서,
    상기 수신된 UI 화면 정보를 저장하는 단계; 및,
    상기 디스플레이 장치에서 상기 어플리케이션 실행 화면이 재차 디스플레이되면, 상기 저장된 UI 화면 정보를 이용하여 상기 UI 화면을 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  17. 제14항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키 및 상기 키의 배열 정보를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  18. 제14항에 있어서,
    상기 UI 화면 정보는,
    상기 어플리케이션 컨트롤에 필요한 키를 포함하는 UI 화면 이미지 및 상기 이미지를 구성하는 키에 대한 정보를 포함하는 것을 사용자 인터페이스 제공 방법.
KR1020120145695A 2012-12-13 2012-12-13 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법 KR20140077015A (ko)

Priority Applications (9)

Application Number Priority Date Filing Date Title
KR1020120145695A KR20140077015A (ko) 2012-12-13 2012-12-13 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법
AU2013360531A AU2013360531B2 (en) 2012-12-13 2013-12-12 Display apparatus, remote control apparatus, and method for providing user interface using the same
MX2015007448A MX342932B (es) 2012-12-13 2013-12-12 Aparato de visualización, aparato de control remoto, y método para proporcionar interfaz de usuario utilizando el mismo.
PCT/KR2013/011521 WO2014092476A1 (en) 2012-12-13 2013-12-12 Display apparatus, remote control apparatus, and method for providing user interface using the same
JP2015547854A JP2016506567A (ja) 2012-12-13 2013-12-12 ディスプレイ装置、遠隔制御装置及びこれらのユーザインターフェース提供方法
EP13196966.9A EP2744218A1 (en) 2012-12-13 2013-12-12 Display apparatus, remote control apparatus, and method for providing user interface using the same
CN201310684190.9A CN103873908A (zh) 2012-12-13 2013-12-13 显示装置、遥控装置及使用所述装置提供用户界面的方法
US14/105,440 US8953099B2 (en) 2012-12-13 2013-12-13 Display apparatus, remote control apparatus, and method for providing user interface using the same
US14/607,869 US9621434B2 (en) 2012-12-13 2015-01-28 Display apparatus, remote control apparatus, and method for providing user interface using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120145695A KR20140077015A (ko) 2012-12-13 2012-12-13 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법

Publications (1)

Publication Number Publication Date
KR20140077015A true KR20140077015A (ko) 2014-06-23

Family

ID=49765871

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120145695A KR20140077015A (ko) 2012-12-13 2012-12-13 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법

Country Status (8)

Country Link
US (2) US8953099B2 (ko)
EP (1) EP2744218A1 (ko)
JP (1) JP2016506567A (ko)
KR (1) KR20140077015A (ko)
CN (1) CN103873908A (ko)
AU (1) AU2013360531B2 (ko)
MX (1) MX342932B (ko)
WO (1) WO2014092476A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160134043A (ko) * 2015-05-14 2016-11-23 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
KR20200041554A (ko) * 2018-10-12 2020-04-22 삼성전자주식회사 모바일 장치 및 모바일 장치의 제어 방법

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140077015A (ko) * 2012-12-13 2014-06-23 삼성전자주식회사 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법
JP5882973B2 (ja) * 2013-10-11 2016-03-09 Ｎｅｃパーソナルコンピュータ株式会社 情報処理装置、方法及びプログラム
USD753142S1 (en) * 2013-12-30 2016-04-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD752606S1 (en) * 2013-12-30 2016-03-29 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD760733S1 (en) * 2013-12-30 2016-07-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD753143S1 (en) * 2013-12-30 2016-04-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9813482B2 (en) * 2014-06-30 2017-11-07 Microsoft Technology Licensing, Llc Remote process management
CN105335136B (zh) * 2014-07-16 2019-08-09 阿里巴巴集团控股有限公司 智能设备的控制方法及装置
JP6488762B2 (ja) * 2015-02-26 2019-03-27 ヤマハ株式会社 システム、端末、及びプログラム
US10297002B2 (en) * 2015-03-10 2019-05-21 Intel Corporation Virtual touch pad method and apparatus for controlling an external display
JP6399521B2 (ja) * 2015-03-24 2018-10-03 シャープ株式会社 情報処理装置および画像形成装置
US20170195735A1 (en) * 2015-12-31 2017-07-06 Nagravision S.A. Method and apparatus for peripheral context management
KR101862845B1 (ko) * 2016-03-23 2018-07-05 (주)휴맥스 리모콘 키의 감지 레벨에 따른 서비스를 제공하는 이미지 처리 단말 및 서비스 제공 방법
CN106303643A (zh) * 2016-08-25 2017-01-04 乐视控股（北京）有限公司 遥控方法及装置
KR101992706B1 (ko) * 2016-11-07 2019-06-25 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
US10082886B2 (en) 2016-12-16 2018-09-25 Logitech Europe S.A. Automatic configuration of an input device based on contextual usage
US10671261B2 (en) 2017-01-17 2020-06-02 Opentv, Inc. Application dependent remote control
CN107635059A (zh) * 2017-08-01 2018-01-26 努比亚技术有限公司 一种控制方法及终端
US11089240B2 (en) * 2018-05-07 2021-08-10 Craig Randall Rogers Television video and/or audio overlay entertainment device and method
CN112559200A (zh) * 2019-09-25 2021-03-26 杭州海康威视数字技术股份有限公司 用户界面模块的处理方法、门口机及存储介质
US11343558B1 (en) 2020-11-11 2022-05-24 Google Llc Systems, methods, and media for providing an enhanced remote control that synchronizes with media content presentation
WO2022259432A1 (ja) * 2021-06-09 2022-12-15 三菱電機株式会社 通信システムおよび機器
WO2023277251A1 (en) * 2021-06-29 2023-01-05 Samsung Electronics Co., Ltd. A method and system to suggest and control operations on a handheld device for remote display

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6532592B1 (en) * 1998-11-09 2003-03-11 Sony Corporation Bi-directional remote control unit and method of using the same
JP2001309463A (ja) * 2000-04-26 2001-11-02 Minolta Co Ltd 放送番組送受信システム、これに使用される放送装置、受信装置、その受信装置を操作するリモコン装置、放送番組送受信方法、放送方法、受信装置の制御方法、および放送波を利用した商品取引システム
KR100520117B1 (ko) * 2003-06-26 2005-10-10 삼성전자주식회사 기능군을 이용하여 기기를 제어하는 리모컨 장치 및 기기제어 방법
JP2007304978A (ja) * 2006-05-12 2007-11-22 Sharp Corp 映像表示システム、映像表示装置、通信端末装置、装置制御方法およびコンテンツ制御方法
KR100848783B1 (ko) * 2006-12-28 2008-07-28 주식회사 케이티 개인화된 맞춤형 정보 서비스를 제공하는 리모콘과 ｉｐ셋탑박스 및 그 제공 방법
KR20090031140A (ko) * 2007-09-21 2009-03-25 삼성전자주식회사 상호 통신가능한 영상기기들 및 이 영상기기들을 제어하는방법
JP2009302914A (ja) * 2008-06-13 2009-12-24 Mitsubishi Electric Corp 遠隔操作システムおよび遠隔操作装置
JP2010102412A (ja) * 2008-10-22 2010-05-06 Sharp Corp 視聴システム、表示装置、リモートコントローラ装置、視聴方法
JP5291792B2 (ja) * 2009-03-11 2013-09-18 パナソニック株式会社 デジタル放送受信装置および映像表示方法
WO2010146806A1 (ja) * 2009-06-15 2010-12-23 パナソニック株式会社 リモートコントロールシステム、テレビジョンセットおよびペアリング方法
US9055256B2 (en) * 2009-10-13 2015-06-09 Sony Corporation On screen programming of universal remote control features
KR101657565B1 (ko) * 2010-04-21 2016-09-19 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
KR101694159B1 (ko) * 2010-04-21 2017-01-09 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
KR20110118421A (ko) * 2010-04-23 2011-10-31 엘지전자 주식회사 증강 원격제어장치, 증강 원격제어장치 제어방법 및 그 시스템
JP5749435B2 (ja) * 2009-12-28 2015-07-15 ソニー株式会社 情報処理装置、情報処理方法、プログラム、制御対象機器および情報処理システム
US8558716B2 (en) * 2010-06-10 2013-10-15 Verizon Patent And Licensing Inc. Systems and methods to adaptively change functionality of a remote control device to execute the script on a client program for reprogramming buttons on the remote control device
US8453186B2 (en) * 2010-09-15 2013-05-28 At&T Intellectual Property I, L.P. Method and system for remote control
US20120089923A1 (en) * 2010-10-08 2012-04-12 Microsoft Corporation Dynamic companion device user interface
US8670078B2 (en) * 2010-10-26 2014-03-11 BBY Solutions Two-sided remote control
KR20120061161A (ko) * 2010-12-02 2012-06-13 삼성전자주식회사 제어 원격 유저 인터페이스를 제공하는 방법 및 장치
US20120173979A1 (en) * 2010-12-31 2012-07-05 Openpeak Inc. Remote control system and method with enhanced user interface
JP6042596B2 (ja) * 2011-01-21 2016-12-14 ソニー株式会社 情報処理装置、テレビ受像機、情報処理方法、プログラム、および情報処理システム
JP2014064048A (ja) * 2011-01-27 2014-04-10 Panasonic Corp ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法
KR20120100045A (ko) * 2011-03-02 2012-09-12 삼성전자주식회사 사용자 단말 장치, 디스플레이 장치, 그 ｕｉ 제공 방법 및 제어 방법
KR101275314B1 (ko) * 2011-05-11 2013-06-17 도시바삼성스토리지테크놀러지코리아 주식회사 리모트 컨트롤러와, 이를 이용한 제어 방법 및 제어 시스템
CA2857113C (en) * 2011-12-08 2017-02-07 Lg Electronics Inc. Network tv and method for operating same
US9514570B2 (en) * 2012-07-26 2016-12-06 Qualcomm Incorporated Augmentation of tangible objects as user interface controller
US9116604B2 (en) * 2012-10-25 2015-08-25 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Multi-device visual correlation interaction
KR20140077015A (ko) * 2012-12-13 2014-06-23 삼성전자주식회사 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법
US8878994B2 (en) * 2013-01-31 2014-11-04 Kabushiki Kaisha Toshiba Information processing apparatus, remote operation support method and storage medium
US9286323B2 (en) * 2013-02-25 2016-03-15 International Business Machines Corporation Context-aware tagging for augmented reality environments

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160134043A (ko) * 2015-05-14 2016-11-23 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
KR20200041554A (ko) * 2018-10-12 2020-04-22 삼성전자주식회사 모바일 장치 및 모바일 장치의 제어 방법

Also Published As

Publication number Publication date
MX2015007448A (es) 2015-09-16
MX342932B (es) 2016-10-19
EP2744218A1 (en) 2014-06-18
AU2013360531A1 (en) 2015-05-07
US9621434B2 (en) 2017-04-11
US20140168523A1 (en) 2014-06-19
JP2016506567A (ja) 2016-03-03
US20150143250A1 (en) 2015-05-21
WO2014092476A1 (en) 2014-06-19
AU2013360531B2 (en) 2017-09-14
US8953099B2 (en) 2015-02-10
CN103873908A (zh) 2014-06-18

Similar Documents

Publication Publication Date Title
US9621434B2 (en) Display apparatus, remote control apparatus, and method for providing user interface using the same
US10856033B2 (en) User terminal apparatus, display apparatus, user interface providing method and controlling method thereof
KR102415036B1 (ko) 전자 장치 및 그 제어 방법
US10108392B2 (en) User terminal apparatus, display apparatus connected to user terminal apparatus, server, connected system, controller, and controlling method thereof
EP2743814A2 (en) Display apparatus and method of providing user interface thereof
US20160006971A1 (en) Display apparatus and controlling method thereof
KR102189648B1 (ko) 디스플레이 장치, 이의 제어 방법 및 디스플레이 시스템
KR20140100306A (ko) 휴대 기기 및 이의 외부 기기 제어 방법
KR20160050879A (ko) 디스플레이 장치, 원격 제어 장치, 원격 제어 시스템 및 그 제어 방법
US10467031B2 (en) Controlling a display apparatus via a GUI executed on a separate mobile device
KR102351634B1 (ko) 사용자 단말장치, 음향 시스템 및 외부 스피커의 음량 제어 방법
US9654720B2 (en) Display apparatus and method for controlling the same
EP3029951A2 (en) Electronic apparatus and method for controlling electronic apparatus
KR20140072737A (ko) 디스플레이 장치 및 이의 사용자 메뉴 제공 방법
KR102151757B1 (ko) 사용자 단말 장치, 디스플레이 장치, 그 ｕｉ 제공 방법 및 제어 방법
KR20130083111A (ko) 영상표시기기 및 그 동작 방법
KR102198347B1 (ko) 사용자 단말 장치, 디스플레이 장치, 그 ｕｉ 제공 방법 및 제어 방법
KR20160139376A (ko) 디스플레이 장치 및 이의 제어 방법
US10567694B2 (en) Electronic apparatus and method for controlling sound of electronic apparatus
US20160364202A1 (en) Apparatus for outputting audio, driving method of apparatus for outputting audio, and non-transitory computer readable recording medium
KR20140089859A (ko) 디스플레이 장치, 그의 ui 표시 방법 및 컴퓨터 판독가능 기록매체

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid