KR20190058897A - 원격 제어 장치 및 이의 제어 방법 - Google Patents

원격 제어 장치 및 이의 제어 방법 Download PDF

Info

Publication number
KR20190058897A
KR20190058897A KR1020170156292A KR20170156292A KR20190058897A KR 20190058897 A KR20190058897 A KR 20190058897A KR 1020170156292 A KR1020170156292 A KR 1020170156292A KR 20170156292 A KR20170156292 A KR 20170156292A KR 20190058897 A KR20190058897 A KR 20190058897A
Authority
KR
South Korea
Prior art keywords
remote control
control device
external display
display device
user
Prior art date
Application number
KR1020170156292A
Other languages
English (en)
Inventor
박효승
김민형
박가민
유소연
이상준
이준우
정경화
정성욱
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020170156292A priority Critical patent/KR20190058897A/ko
Priority to US16/765,651 priority patent/US11095932B2/en
Priority to PCT/KR2018/010659 priority patent/WO2019103292A1/ko
Publication of KR20190058897A publication Critical patent/KR20190058897A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program

Abstract

원격 제어 장치 및 이의 제어 방법이 개시된다. 외부 디스플레이 장치를 제어하기 위한 원격 제어 장치는, 외부 디스플레이 장치와 통신을 수행하기 위한 통신부, 원격 제어 장치의 상태를 감지하기 위한 센서, 디스플레이, 통신부를 통해 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠 정보를 수신하고, 컨텐츠 정보 및 원격 제어 장치의 상태를 바탕으로 외부 디스플레이 장치를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하도록 디스플레이를 제어하는 프로세서를 포함한다.

Description

원격 제어 장치 및 이의 제어 방법{A REMOTE CONTROL DEVICE AND METHOD FOR CONTROLLING THE REMOTE CONTROL DEVICE THEREOF}
본 발명은 원격 제어 장치 및 이의 제어 방법에 관한 것으로, 더욱 상세하게는 연결된 외부 디스플레이 장치에 재생 중인 컨텐츠의 유형 및 원격 제어 장치의 상태에 따라 원격 제어 장치의 UI가 변경 되는 원격 제어 장치 및 이의 제어 방법이다.
종래부터 디스플레이 장치와 사용자 사이의 인터페이스 방법으로 원격 제어 장치가 널리 이용되어 왔다.
한편, 기술의 발전에 따라 원격 제어 장치의 기능은 다양해지고, 사용자의 편의를 향상시키기 위해 원격 제어 장치 상의 다양한 UI와 버튼들이 사용되었다.
그러나, 원격 제어 장치 상에 표시되는 다양한 UI는 현재 사용자가 시청하는 화면과 상관없이 동일한 UI가 표시되어, 사용자가 원격 제어 장치를 이용하여 디스플레이 장치를 조작하는데 어려움이 있었다. 또한, 사용자가 원격 제어 장치를 집는 상태와 상관없이 동일한 상태로 UI가 표시되어 사용자가 잘못 원격 제어 장치를 쥐는 경우, 다시 원격 제어 장치를 쥐어야 하는 번거로움이 존재하였다.
본 개시는 상술한 문제점을 해결하기 위한 것으로, 본 개시의 목적은 사용자의 조작 편의성이 향상된 원격 제어 장치, 그의 제어 방법을 제공하는 것에 있다.
상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른, 외부 디스플레이 장치를 제어하기 위한 원격 제어 장치의 UI 표시 방법은, 상기 외부 디스플레이 장치로부터 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 정보를 수신하고, 상기 원격 제어 장치의 상태를 감지하고, 상기 컨텐츠에 대한 정보 및 상기 원격 제어 장치의 상태를 바탕으로 상기 외부 디스플레이 장치를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 단계를 포함한다.
이 경우, 상기 정보를 수신하는 단계는, 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 유형정보와 상기 컨텐츠에 대한 식별정보 중 적어도 하나를 수신하는 것일 수 있다.
이 경우, 상기 UI를 표시하는 단계는, 상기 컨텐츠에 대한 유형정보에 대응되는 복수의 UI 엘리먼트를 결정하고, 상기 결정된 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 것일 수 있다.
한편, 상기 UI를 표시하는 단계는, 상기 원격 제어 장치의 감지된 상태에 대응되도록 UI 엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것일 수 있다.
이 경우, 상기 감지하는 단계는, 상기 원격 제어 장치가 사용자에 의해 파지되기 전에 상기 원격 제어 장치의 상단을 인식하는 단계를 더 포함하고, 상기 표시하는 단계는, 상기 원격 제어 장치의 상단을 기준으로 UI 엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것일 수 있다.
이 경우, 상기 UI를 표시하는 단계는, 상기 원격 제어 장치가 사용자에게 쥐어진 것이 감지되면, 상기 UI를 표시하는 것일 수 있다.
한편, 상기 원격 제어 장치의 마이크가 비활성화된 상태에서 상기 외부 디스플레이 장치가 사용자를 감지한 경우, 상기 외부 디스플레이 장치로부터 트리거 신호를 수신하는 단계 및 상기 트리거 신호에 응답하여 마이크를 활성화 시키는 단계를 더 포함하는 것일 수 있다.
이 경우, 상기 트리거 신호에 응답하여 LED를 활성화 시키는 단계 및 상기 트리거 신호가 수신된 후 일정 시간이 지나면 LED를 비활성화 시키는 단계를 더 포함하는 것일 수 있다.
이 경우, 상기 원격 제어 장치와 상기 외부 디스플레이 장치 사이의 통신 연결이 해제되면, 상기 복수의 UI 엘리먼트를 제거하고, 상기 마이크가 비활성된 상태를 안내하는 인디케이터를 표시하는 단계를 더 포함하는 것일 수 있다.
한편, 외부 디스플레이 장치를 제어하기 위한 원격 제어 장치는, 상기 외부 디스플레이 장치와 통신을 수행하기 위한 통신부, 원격 제어 장치의 상태를 감지하기 위한 센서, 디스플레이 및 상기 통신부를 통해 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠 정보를 수신하고, 상기 컨텐츠 정보 및 상기 원격 제어 장치의 상태를 바탕으로 상기 외부 디스플레이 장치를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.
이 경우, 상기 통신부는, 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 유형정보와 상기 컨텐츠에 대한식별정보 중 적어도 하나를 수신하는 것일 수 있다.
한편, 상기 프로세서는, 상기 컨텐츠에 대한 유형정보에 대응되는 복수의 UI 엘리먼트를 결정하고, 상기 결정된 복수의 UI 엘리먼트를 포함하는 UI를 디스플레이에 표시하도록 제어하는 것일 수 있다.
한편, 상기 프로세서는 상기 센서를 통해 감지된 원격 제어 장치의 상태에 대응되도록 UI 엘리먼트의 배치를 결정하여 상기 UI를 디스플레이에 표시하도록 제어하는 것일 수 있다.
이 경우, 상기 센서는, 상기 원격 제어 장치가 사용자에 의해 파지되기 전에 상기 원격 제어 상치의 상단을 인식하는 것일 수 있고, 상기 디스플레이는 상기 원격 제어 장치의 상단을 기준으로 UI엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것일 수 있다.
이 경우, 상기 프로세서는, 상기 원격 제어 장치가 사용자에게 쥐어진 것이 감지 되면 상기 UI를 상기 디스플레이에 표시하도록 제어 하는 것일 수 있다.
한편, 상기 원격 제어 장치는 마이크를 더 포함하고, 상기 통신부는, 상기 마이크가 비활성화된 상태에서 상기 외부 디스플레이 장치가 사용자를 감지한 경우, 상기 외부 디스플레이 장치로부터 트리거 신호를 수신하고 상기 프로세서는 상기 트리거 신호에 응답하여 마이크를 활성화 되도록 제어하는 것일 수 있다.
이 경우, 상기 원격 제어 장치는 LED를 더 포함하고, 상기 프로세서는, 상기 트리거 신호에 응답하여 LED를 활성화 되도록 제어하고, 상기 트리거 신호가 수신된 후 일정 시간이 지나면 LED를 비활성화 되도록 제어하는 것일 수 있다.
한편, 상기 프로세서는, 상기 원격 제어 장치와 상기 외부 디스플레이 장치 사이의 통신 연결이 해제되면 상기 복수의 UI 엘리먼트를 제거하고, 상기 마이크가 비활성화된 상태를 안내하는 인디케이터를 표시하도록 제어하는 것일 수 있다.
한편, 상기 원격 제어 장치의 상태는 상기 원격 제어 장치가 지표면과 이루는 각도 및 상기 원격 제어 장치가 향하는 방향 중 적어도 하나인 것일 수 있다.
외부 디스플레이 제어방법은, 현재 재생 중인 컨텐츠를 표시하는 단계, 사용자를 감지하는 단계, 리모컨 통신부로 정보를 송신하는 단계, 현재 재생 중인 컨텐츠에 대한 정보와 사용자 감지 정보를 상기 리모컨 통신부로 송신하는 단계를 포함한다.
외부 디스플레이 장치는 현재 재생 중인 컨텐츠를 표시하는 디스플레이, 사용자를 감지하는 센서부, 리모컨 통신부로 정보를 송신하는 통신부, 상기 디스플레이에 표시되는 현재 재생 중인 컨텐츠에 대한 정보와 상기 센서부를 통한 사용자 감지 정보를 상기 리모컨 통신부로 송신하도록 통신부를 제어하는 프로세서를 포함한다.
본 발명의 다양한 실시 예에 따르면, 원격 제어 장치는 사용자가 현재 시청하고 있는 컨텐츠에 대응되는 UI를 사용자에게 제공할 수 있다. 또한 원격 제어 장치는 사용자에게 파지 되기 전의 상태를 감지하고, 사용자의 시청 자세와 상관 없이 정방향의 UI를 제공할 수 있다.
도 1은 본 개시의 일 실시 예에 따른 원격 제어 장치와 외부 디스플레이 장치 간의 시스템도.
도 2는 본 개시의 일 실시 예에 따른 원격 제어 장치의 UI 변경을 설명하기 위한 도면.
도 3 내지 도4는 본 개시의 다양한 실시 예에 따른 원격 제어 장치의 구성을 설명하기 위한 블럭도.
도 5 내지 도 10은 본 개시의 다양한 실시 예에 따른 원격 제어 장치의 동작을 설명하기 위한 도면.
도 11는 본 개시의 일 실시 예에 따른 원격 제어 장치의 제어 흐름을 설명하기 위한 도면.
도 12는 본 개시의 일 실시 예에 따른 원격 제어 장치의 동작 과정을 설명하기 위한 도면, 그리고,
도 13은 본 개시의 일 실시 예에 따른 외부 디스플레이 장치의 구성을 설명하기 위한 블럭도이다.
이하, 본 개시의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 개시에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 개시에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 개시에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 개시에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 개시에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
이하에서, 첨부된 도면을 이용하여 본 개시에 대하여 구체적으로 설명한다.
도 1은 본 개시의 일 실시 예에 따른 원격 제어 장치(100)와 외부 디스플레이 장치(200) 간의 통신 시스템을 설명하기 위한 도면이다.
도 1을 참고하면, 통신 시스템은 원격 제어 장치(100)와 외부 디스플레이 장치(200)을 포함한다. 이때, 원격 제어 장치(100)는 디스플레이를 구비하는 리모컨의 형태로 구현된 것으로 도시하였으나, 이에 한정되는 것은 아니고, 원기둥형 디바이스, 스마트폰, 워어러블 디바이스, 태블릿 PC 등과 같은 다양한 형태로 구현될 수 있다. 또한, 외부 디스플레이 장치(200)는 스마트 TV로 구현된 수 있으나, 이에 한정되는 것은 아니고, 모니터, 노트북PC, 태블릿PC, 프로젝터, 전자 액자, 스마트폰, 키오스크 등과 같이 디스플레이 기능을 수행하는 다양한 장치로 구현될 수 있다.
외부 디스플레이 장치(200)는 다양한 센서를 통해 사용자를 감지할 수 있다. 예를 들어, 외부 디스플레이 장치(200)는 근접 센서 또는 카메라 등과 같은 센서를 이용하여 사용자의 접근 또는 사용자의 존재를 감지할 수 있다.
외부 디스플레이 장치(200)가 사용자를 감지한 경우, 외부 디스플레이 장치(200)는 원격 제어 장치를 활성화시키기 위한 트리거 신호를 원격 제어 장치로 전송할 수 잇다. 이때, 트리거 신호에는 원격 제어 장치의 일부 구성(예를 들어, 마이크, 디스플레이)를 활성화시키기 위한 제어 명령을 포함하고 있을 뿐 아니라, 외부 디스플레이 장치(200)가 현재 표시하는 컨텐츠에 대한 정보를 함께 표시할 수 있다.
원격 제어 장치(100)는 외부 디스플레이 장치(200)가 전송한 트리거 신호에 응답하여, 일부 구성(예를 들어, 마이크, 디스플레이)를 활성화시킬 수 있다. 그리고, 원격 제어 장치(100)는 원격 제어 장치(100)의 위치를 사용자에게 안내하기 위하여 LED를 동작시킬 수 있다. 이때, 원격 제어 장치(100)는 LED와 같은 시각적인 피드백뿐만 아니라 음성 메시지와 같은 청각적 피드백, 햅틱과 같은 촉각적 피드백을 제공할 수 있다. 또한, 트리거 신호가 수신된 후 기설정된 시간이 경과되면, 원격 제어 장치(100)는 LED의 동작을 멈출 수 있다.
원격 제어 장치(100)는 UI를 표시하거나 UI를 변경하기 위한 이벤트를 감지할 수 있다. 이때, UI를 표시하기 위한 이벤트는, 원격 제어 장치(100)가 사용자에 의해 파지되는 이벤트, 트리거 신호가 수신되는 이벤트, 외부 디스플레이 장치(200)를 온하기 위한 이벤트, 외부 디스플레이 장치(200)에 표시되는 컨텐츠나 화면이 변경되는 이벤트 등이 포함될 수 있다.
UI를 표시하거나 UI를 변경하기 위한 이벤트가 감지되면, 원격 제어 장치(100)는 외부 디스플레이 장치(200)로부터 수신된 컨텐츠에 대한 정보 및 원격 제어 장치(100)의 상태를 바탕으로 외부 디스플레이 장치(200)를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 결정하여 표시할 수 있다. 한편, 상기 원격 제어 장치(100)의 상태는 상기 원격 제어 장치(100)가 지표면과 이루는 각도 및 상기 원격 제어 장치(100)가 향하는 방향 중 적어도 하나인 것일 수 있으며 이에 한정되지 않는다.
구체적으로, 원격 제어 장치(100)는 외부 디스플레이 장치(200)로부터 수신된 컨텐츠에 대한 정보를 바탕으로 UI의 유형을 결정할 수 있다.
일 예로, 외부 디스플레이 장치(200)로부터 현재 재생되는 컨텐츠의 유형 정보로서 라이브TV에 대한 정보가 수신되면, 원격 제어 장치(100)는 도 2의 (a)에 도시된 바와 같이, 라이브 TV를 제어하기 위한 기능에 매핑된 사방향 UI 엘리먼트를 포함하는 UI를 표시할 수 있다. 또 다른 예로, 외부 디스플레이 장치(200)로부터 현재 재생되는 컨텐츠의 유형 정보로서 메뉴화면/APP에 대한 정보가 수신되면, 원격 제어 장치(100)는 도 2의 (b)에 도시된 바와 같이, 메뉴화면/APP를 제어하기 위한 기능에 매핑된 사방향 UI 엘리먼트를 포함하는 UI를 표시할 수 있다.
또한, 원격 제어 장치(100)는 다양한 센서를 바탕으로 감지된 원격 제어 장치(100)의 상태에 따라 UI 엘리먼트의 배치 및 표시 방향을 결정할 수 있다. 일 예로, 원격 제어 장치(100)는 원격 제어 장치(100)가 사용자에 의해 파지되기 전에 원격 제어 장치의 상단을 인식하고, 원격 제어 장치(100)의 상단을 기준으로 UI 엘리먼트의 배치를 결정하여 UI를 표시할 수 있다.
또한, 원격 제어 장치(100)와 외부 디스플레이 장치(200) 사이의 통신 연결이 해제되면, 원격 제어 장치(100)는 복수의 UI 엘리먼트를 제거하고, 마이크가 비활성된 상태를 안내하는 인디케이터를 표시할 수 있다. 이때, 기설정된 시간이 경과되면, 원격 제어 장치(100)는 인디케이터의 표시를 제거하고, 마이크 및 디스플레이를 비활성화시킬 수 있다.
도 3은 본 개시의 일 실시 예에 따른 원격 제어 장치(100)의 구성을 설명하기 위한 도면이다. 도 3에 따르면 원격 제어 장치(100)은 센서(110), 디스플레이(120), 통신부(130), 프로세서(140)를 포함할 수 있다. 한편, 도 3에 도시된 구성은 원격 제어 장치(100)의 구현에 따라 일부 구성이 삭제, 변경되거나 일부 구성이 추가될 수 있다.
센서(110)는 원격 제어 장치(100)의 상태를 감지할 수 있다. 특히, 센서(110)는 사용자에 의해 파지되기 전의 원격 제어 장치(100)의 상태를 감지할 수 있다. 또한, 센서(110)는 원격 제어 장치(100)의 상태가 변경됨을 감지하여 사용자에 의해 원격 제어 장치(100)가 파지되는 것을 감지할 수 있다. 디스플레이(120)는 현재 외부 디스플레이 장치(200)가 재생 중인 컨텐츠에 대한 정보를 바탕으로 복수의 UI엘리먼트를 포함하는 UI를 표시할 수 있다. 통신부(130)는 외부 디스플레이 장치(200)의 통신부와 연결되어 통신을 수행하기 위한 구성이다. 특히 통신부(130)는 외부 디스플레이 장치(200)에서 송신하는 정보를 수신할 수 있다. 일 예로, 통신부(130)는 외부 디스플레이 장치(200)로부터 현재 외부 디스플레이 장치(200)에 재생되는 컨텐츠에 대한 유형 정보 또는 식별 정보를 수신할 수 있다. 또한, 통신부(130)는 외부 디스플레이 장치(200)의 센서가 현재 사용자를 감지하여 전송한 트리거 신호를 수신할 수 있다.
프로세서(140)는 원격 제어 장치(100)를 전반적으로 제어하기 위한 구성이다.
본 개시의 일 실시 예에 따르면, 프로세서(140)는 센서(110)로부터 감지된 정보를 통해 원격 제어 장치(100)가 사용자에 의해 파지 되기 전의 상태를 판단할 수 있다. 프로세서(140)는 센서(110)를 통해 원격 제어 장치(100)의 어느 방향이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치하고 있는지를 감지하고, 감지된 정보에 따라 원격 제어 장치(100)의 상태를 판단할 수 있다. 또한, 프로세서(140)는 통신부(130)를 통해 외부 디스플레이 장치(200)로부터 현재 외부 디스플레이 장치(200)가 재생하고 있는 컨텐츠의 정보를 수신할 수 있다.
프로세서(140)는 수신한 컨텐츠에 대한 정보 및 원격 제어 장치(100)의 상태를 바탕으로 외부 디스플레이 장치(200)를 제어하기 위한 복수의 UI 엘리먼트를 표시하도록 디스플레이(120)을 제어할 수 있다.
도 4는 본 개시의 일 실시 예에 따른 원격 제어 장치(100)의 구성을 설명하기 위한 도면이다.
도 4에 따르면, 원격 제어 장치(100)는 상술한 센서(110), 디스플레이(120), 통신부(130), 프로세서(140)에 마이크(150), LED(160), 스피커(170), 메모리(180)를 더 포함할 수 있다. 센서(110)는 원격 제어 장치(100)의 상태를 감지하기 위한 센서로, 자이로 센서(Gyro Sensor), 가속도 센서(Acceleration Sensor), 지자기 센서(Geomagnetic Sensor)로 구현될 수 있으나, 이에 한정되는 것은 아니다.
디스플레이(120)는 예컨대, LCD(Liquid Crystal Display)로 구현될 수 있으며, 경우에 따라 CRT(cathode-ray tube), PDP(plasma display panel), OLED(organic light emitting diodes), TOLED(transparent OLED) 등으로 구현될 수 있다. 또한, 디스플레이(120)는 사용자의 터치 조작을 감지할 수 있는 터치스크린 형태로 구현될 수도 있다. 터치 스크린은 디스플레이 기능뿐만 아니라 터치 입력 위치, 터치 된 면적뿐만 아니라 터치 입력 압력까지도 검출하는 기능을 가질 수 있고, 또한 실질적인 터치(real-touch)뿐만 아니라 근접 터치(proximity touch)도 검출하는 기능을 가질 수 있다.
또한, 통신부(130)는 유무선 통신을 지원하는 다양한 통신 칩을 포함할 수 있다. 예를 들어, 통신부(130)는 와이파이칩, 블루투스 칩, 무선 통신 칩 등 다양한 통신칩을 포함할 수 있다. 와이파이 칩 및 블루투스 칩은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 무선 통신 칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다. 그 밖에 통신부(130)는 NFC(Near Field Communication) 방식으로 동작하는 NFC 칩을 더 포함할 수 있다. NFC 칩은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 동작하는 칩을 의미한다.
마이크(150)는 원격 제어 장치(100) 외부의 소리(예를 들어, 사용자 음성)를 수신하여 이를 필요에 따라 증폭하여 오디오 신호 처리부(또는 프로세서)로 전달할 수 있다.
LED(light-emitting diode)(160)는 빛을 발광하기 위한 소자로서, 원격 제어 장치(200)의 외부에 배치될 수 있다. 특히, 외부 디스플레이 장치(200)로부터 트리거 신호가 수신되면, LED(160)는 프로세서(140)의 제어에 따라 활성화되어 특정 패턴으로 빛을 발광할 수 있다. 한편, 상술한 실시 예에서는 빛을 발광하기 위한 구성으로 LED(160)를 설명하였으나, 이는 일 실시 예에 불과할 뿐, 빛을 발광하기 위한 다른 구성으로도 구현될 수 있다.
스피커(170)는 프로세서(140)를 통해 사용자에게 필요한 정보를 오디오 형태로 출력할 수 있다. 일 예로, 외부 디스플레이 장치(200)로부터 트리거 신호가 수신되면, 스피커(170)는 알림 메시지를 출력하거나 비프음을 출력할 수 있다.
메모리(180)는 프로세서(140)의 처리 또는 제어를 위한 프로그램 등 원격 제어 장치(100) 전반의 동작을 위한 다양한 데이터를 저장할 수 있다. 메모리(180)는 원격 제어 장치(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 원격 제어 장치(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 원격 제어 장치(100)의 기본적인 기능을 위하여 출고 당시부터 원격 제어 장치(100) 상에 존재할 수 있다. 응용 프로그램은, 메모리(180)에 저장되고, 프로세서(140)에 의하여 원격 제어 장치(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
메모리(180)는 하드웨어적으로, 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), SSD 타입(Solid State Disk type), SDD 타입(Silicon Disk Drive type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체일 수 있다.
프로세서(140)는 원격 제어 장치(100)의 메모리(180)에 저장된 각종 프로그램을 이용하여 원격 제어 장치(100)의 전반적인 동작을 제어한다. 예를 들어, 프로세서(140)는 CPU, 램(RAM), 롬(ROM), 시스템 버스를 포함할 수 있다. 여기서, 롬은 시스템 부팅을 위한 명령어 세트가 저장되는 구성이고, CPU는 롬에 저장된 명령어에 따라 원격 제어 장치(100)의 메모리에 저장된 운영체제를 램에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU는 메모리(180)에 저장된 각종 애플리케이션을 램에 복사하고, 실행시켜 각종 동작을 수행할 수 있다. 이상에서는 프로세서(140)가 하나의 CPU만을 포함하는 것으로 설명하였지만, 구현 시에는 복수의 CPU(또는 DSP, SoC 등)으로 구현될 수 있다.
프로세서(140)는 외부 디스플레이 장치(200)로부터 수신된 컨텐츠에 대한 정보 및 원격 제어 장치(100)의 상태를 바탕으로 외부 디스플레이 장치(200)를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하도록 디스플레이(120)를 제어할 수 있다.
구체적으로, 프로세서(140)는 통신부(130)를 통해 외부 디스플레이 장치(200)로부터 컨텐츠에 대한 정보를 수신하고, 외부 디스플레이(200)에 재생되는 컨텐츠에 대응되는 UI 유형을 결정할 수 있다. 또한, 프로세서(140)는 센서(110)를 통해 감지된 원격 제어 장치(100)의 상태를 바탕으로 UI 엘리먼트의 배치(또는 표시 방향)를 결정할 수 있다.
이에 따라, 프로세서(140)는 결정된 UI 엘리먼트의 배치와 결정된 UI 유형을 바탕으로 디스플레이(120)에 표시할 수 있다.
특히, 프로세서(140)는 센서(110)를 통해 원격 제어 장치(100)가 사용자에게 파지었는지 여부를 판단할 수 있다. 원격 제어 장치(100)가 사용자에게 파지된 경우, 프로세서(140)는 UI를 표시하도록 디스플레이(120)를 제어할 수 있다.
또한, 외부 디스플레이 장치(200)가 사용자를 감지하여 전송한 트리거 신호를 통신부(130)를 통해 수신하게 되면, 프로세서(140)는 원격 제어 장치(100) 내의 마이크(150)를 활성화 시킬 수 있다. 또한, 상술한 트리거 신호가 수신되면 프로세서(140)는 LED(160)를 활성화 시킬 수 있다. 이 때, 프로세서(140)는 트리거 신호가 수신된 후 일정 시간이 지나면 LED(160)를 비활성화 시킬 수 있다.
프로세서(140)은 원격 제어 장치(100)와 외부 디스플레이 장치(200)간의 연결이 해제됨에 따라, 원격 제어 장치(100)를 대기모드로 변경할 수 있다. 이때, 대기 모드라 함은, 원격 제어 장치(100)의 일부 구성(예를 들어, 통신부, 프로세서)만이 활성화되고, 나머지 구성(예를 들어, 디스플레이, 마이크)이 비활성화된 상태일 수 있다.
이 경우, 프로세서(140)는 디스플레이(120)에 마이크(150)가 비활성화 되었다는 인디케이터를 활성화 시킬 수 있다. 프로세서(140)는 상술한 인디케이터를 일정 시간이 지난 후 제거할 수 있다.
본 개시의 또 다른 실시 예에 따르면, 프로세서(140)는 기설정한 이벤트가 발생하면, 메모리(180)에 저장된 음성메세지를 스피커(170)를 통해 출력하도록 제어할 수 있다. 예를 들면, 프로세서(140)는 마이크(150)가 활성화되는 이벤트가 발생하면, 스피커(170)를 통해 "음성을 입력하세요" 등과 같은 메시지를 출력하도록 제어할 수 있다.
도 5 내지 도 10은 본 개시의 다양한 실시 예에 따른 원격 제어 장치(100)의 기능을 설명하기 위한 도면이다.
원격 제어 장치(100)가 대기 모드를 유지하는 동안 외부 디스플레이 장치(200)는 도 5(a)에 도시된 바와 같이, 사용자를 감지할 수 있다. 여기서, 대기 모드라 함은, 원격 제어 장치(100)의 일부 구성만이 활성화되고, 나머지 구성이 비활성화된 상태일 수 있다. 일 예로, 원격 제어 장치(100)가 대기 모드를 유지하는 동안, 원격 제어 장치(100)의 디스플레이, 마이크가 비활성화될 수 있다. 또 다른 예로, 원격 제어 장치(100)가 대기 모드를 유지하는 동안, 원격 제어 장치(100)의 마이크가 비활성화되며, 디스플레이를 통해 특정 정보(예를 들어, 시간, 날씨 등)를 출력할 수 있다.
이때, 외부 디스플레이 장치(200)는 근접 센서, 카메라 등을 이용하여 사용자의 존재를 감지할 수 있다. 사용자 감지된 경우, 외부 디스플레이 장치(200)는 원격 제어 장치(100)를 활성화 상태로 변경하기 위한 트리거 신호를 전송할 수 있다. 이때, 트리거 신호는 원격 제어 장치(100)를 활성화하기 위한 제어 명령뿐만 아니라, 현재 디스플레이 장치(200)가 표시하고 있는 컨텐츠에 대한 정보를 포함할 수도 있다. 일 예로, 외부 디스플레이 장치(200)가 현재 표시하는 컨텐츠가 스포츠 컨텐츠인 경우, 외부 디스플레이 장치(200)는 현재 표시되는 컨텐츠의 유형이 라이브 TV이고, 스포츠 컨텐츠에 대한 정보를 포함하는 트리거 신호를 전송할 수 있다.
원격 제어 장치(100)는 도 5(b)에 도시된 바와 같이, 대기 모드를 유지하는 동안 외부 디스플레이 장치(200)로부터 트리거 신호를 수신할 수 있다. 트리거 신호가 수신되면, 원격 제어 장치(100)는 도 5(c)에 도시된 바와 같이, 나머지 구성을 활성화시킬 수 있다. 특히, 원격 제어 장치(100)는 디스플레이(120) 및 마이크(150)를 활성화 시킬 수 있으며, 사용자가 원격 제어 장치(100)의 위치를 인지하기 위하여, LED(160)를 활성화 시킬 수 있다.
그리고, 기설정된 시간이 경과하면, 원격 제어 장치(100)는 도 5(d)에 도시된 바와 같이, LED(160)를 비활성화할 수 있다.
원격 제어 장치(100)의 통신부(130)가 외부 디스플레이 장치(200)와의 연결이 해제된 상태에서 원격 제어 장치(100)가 대기모드를 유지하는 경우, 외부 디스플레이 장치(200)가 사용자가 주변에 있음을 감지하더라도, 원격 제어 장치(100)는 여전히 도 5(d)와 같이 대기모드로 유지할 수 있다.
상술한 실시 예를 따르면, 사용자는 외부 디스플레이 장치(200)에 접근한 경우에 마이크(150)를 통한 음성만으로 외부 디스플레이 장치(200)를 제어할 수 있다는 효과가 있다.
또한, 사용자가 외부 디스플레이 장치(200) 주변에 없거나, 원격 제어 장치(100)가 외부 디스플레이 장치(200)와 연결이 해제된 경우에는, 원격 제어 장치(100)는 대기모드로 유지하여 불필요한 전력 소모를 방지하는 효과가 있다.
본 개시의 또 다른 실시 예에 따르면, 원격 제어 장치(100)의 디스플레이(120)가 활성화 되어 UI를 표시하고 있는 경우에도, 외부 디스플레이 장치(200)는 사용자의 감지에 따라 트리거 신호를 전송할 수 있다. 이때, 트리거 신호는 원격 제어 장치(100)를 활성화하기 위한 제어 명령뿐만 아니라, 현재 디스플레이 장치(200)가 표시하고 있는 컨텐츠에 대한 정보를 포함할 수도 있다. 트리거 신호가 수신되면, 원격 제어 장치(100)는 도 5(c)에 도시된 바와 같이, 나머지 구성을 활성화시킬 수 있다. 특히, 원격 제어 장치(100)는 마이크(150)를 활성화 시킬 수 있으며, 사용자가 원격 제어 장치(100)의 위치를 인지하기 위하여, LED(160)를 활성화 시킬 수 있다.
본 개시의 또 다른 실시 예에 따르면, 기설정된 이벤트가 발생하면, 원격 제어 장치(100)는 메모리(180)에 기저장된 음성 메시지를 스피커(170)을 통해 출력할 수 있다. 예를 들면, 트리거 신호가 수신되어 원격 제어 장치(100)가 대기모드에서 활성화 모드로 변경되는 이벤트가 발생하면, 스피커(170)는 "명령을 입력하세요." "음성을 통해 지시할 수 있습니다." 등의 음성 메시지를 출력할 수 있다.
상술한 예시에 따르면, 사용자는 마이크(150)를 통해 음성만으로 외부 디스플레이 장치(200)를 제어할 수 있음을 인식할 수 있고, 원격 제어 장치(100)의 위치를 인식할 수 있다는 효과가 있다.
도 6은 원격 제어 장치(100)가 복수의 UI 엘리먼트를 포함하는 UI의 방향을 결정하는 실시 예를 설명하는 도면이다.
구체적으로, 원격 제어 장치(100)가 사용자에 의해 파지되기 전의 상태를 감지하고 감지된 상태를 기준으로 UI 엘리먼트의 배치를 결정할 수 있다.
도 6에 도시된 것처럼, 원격 제어 장치(100)의 임의의 특정한 부분을 (1)이라고 하고, 시계방향으로 90도씩 이동한 부분을 각각 (2), (3), (4)라고 가정한다.
도 6(a)을 참고하면, 원격 제어 장치(100)는 임의로 특정한 부분(1)이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치한 상태로 놓여져 있다. 센서(110)는 원격 제어 장치(100)의 특정 부분(1)이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치하고 있음을 감지하고, 프로세서(140)은 센서(110)에 의해 감지된 정보를 통해 특정 부분(1)을 원격 제어 장치(100)의 상단으로 결정할 수 있다. 프로세서(140)는 원격 제어 장치(100)가 원격 제어 장치(100)의 상단이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치한 상태로 놓여져 있다고 판단하고, 복수의 UI 엘리먼트를 포함하는 UI의 상단이 원격 제어 장치(100)의 상단과 대응되도록 UI 엘리먼트의 배치를 결정할 수 있다.
도 6(b)를 참고하면, 원격 제어 장치(100)는 임의로 특정한 부분(1)과 특정 부분(2)의 중간 부분이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치한 상태로 놓여져 있다. 센서(110)는 원격 제어 장치(100)의 특정 부분(1)과 특정 부분 (2)의 중간 부분이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치하고 있음을 감지하고, 프로세서(140)은 센서(110)에 의해 감지된 정보를 통해 특정 부분 (1)과 특정 부분 (2)의 중간 부분을 원격 제어 장치(100)의 상단으로 결정할 수 있다. 프로세서(140)는 원격 제어 장치(100)가 원격 제어 장치(100)의 상단이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치하는 상태로 놓여져 있다고 판단하고, 복수의 UI 엘리먼트를 포함하는 UI의 상단이 원격 제어 장치(100)의 상단과 대응되도록 UI 엘리먼트의 배치를 결정할 수 있다.
상술한 본 개시의 실시 예에 따르면, 원격 제어 장치(100)가 사용자에게 파지되기 전에 어느 부분이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치 놓여져 있는지 여부와 무관하게, 원격 제어 장치(100)는 사용자에게 정방향으로 배치된 UI를 제공할 수 있게 된다.
또한, 사용자에게 파지되기 전의 원격 제어 장치(100)의 상태에 대응되도록 UI 엘리먼트의 배치를 결정함으로써, 사용자가 원격 제어 장치(100)을 파지하고 있는 자세에 대응되도록 UI 엘리먼트의 배치를 결정하는 경우에 발생하는 문제들을 해결할 수 있다는 효과가 있다.
예를 들면, 프로세서(140)가 사용자가 원격 제어 장치(100)를 파지하고 있을 때의 원격 제어 장치(100)의 상태에 대응되도록 UI 엘리먼트의 배치를 결정한다면, 원격 제어 장치(100)는 사용자가 누워있거나 엎드려 있는 상태에서는 사용자 입장에서 역방향으로 배치된 UI 엘리먼트를 포함하는 UI를 제공하는 경우가 있을 수 있다.
반면에, 상술한 실시 예를 따르면, 프로세서(140)는 사용자가 원격 제어 장치(100)를 파지하기 전에 이미 사용자에게 정방향으로 UI 엘리먼트를 배치하고, 이에 따라 사용자가 원격 제어 장치(100)를 파지한 후에도 원격 제어 장치(100)는 사용자의 자세와 무관하게 정방향으로 배치된 UI 엘리먼트를 포함하는 UI를 제공할 수 있다.
도 6(c)를 참고하면, 원격 제어 장치(100)는 임의로 특정한 특정 부분 (1)이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치한 상태로 사용자에 의해 파지되어 있다. 센서(110)는 원격 제어 장치(100)의 특정 부분 (1)이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치하고 있음을 감지하고, 프로세서(140)은 센서(110)에 의해 감지된 정보를 통해 특정 부분 (1)을 원격 제어 장치(100)의 상단으로 결정할 수 있다. 이에 따라, 프로세서(140)는 원격 제어 장치(100)의 상단과 복수의 UI 엘리먼트를 포함하는 UI의 상단이 대응되도록 UI 엘리먼트의 배치를 결정할 수 있다.
이 때, 사용자에 의해 원격 제어 장치(100)의 임의로 특정한 특정 부분 (1)과 특정 부분 (2)의 중간 부분이 다른 부분에 비해 상대적으로 지표면을 기준으로 높은 곳에 위치한 상태로 상태의 변동이 발생하면, 프로세서(140)는 센서(110)에 의해 감지된 정보를 통해 특정 부분 (1)과 특정 부분 (2)의 중간 부분을 원격 제어 장치(100)의 상단으로 결정할 수 있다. 이에 따라, 프로세서(140)는 원격 제어 장치(100)의 상단과 복수의 UI 엘리먼트를 포함하는 UI의 상단이 대응되도록 UI 엘리먼트의 배치를 결정할 수 있다.
즉, 원격 제어 장치(100)가 사용자에게 파지되어 원격 제어 장치(100)가 향하는 방향 및 지표면과 이루는 각도가 변동되더라도, 프로세서(140)는 센서(110)를 통해 실시간으로 다른 부분 보다 지표면을 기준으로 높은 부분을 원격 제어 장치(100)의 상단으로 결정할 수 있다. 이에 따라, 프로세서(140)는 원격 제어 장치(100)의 상단과 복수의 UI 엘리먼트를 포함하는 UI의 상단이 대응되도록 실시간으로 UI 엘리먼트의 배치를 결정할 수 있다.
상술한 설명에서는 원격 제어 장치(100)의 상단의 방향에 대응되도록 UI 엘리먼트의 배치를 결정하고 디스플레이하는 실시예를 설명하였으나, 본 발명은 상술한 실시예에 국한 되지 않고 다양한 방법으로 UI 엘리먼트의 배치를 결정할 수 있다.도 7은 원격 제어 장치(100)의 디스플레이(120)에 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 실시예를 설명하는 도면이다.
구체적으로, 원격 제어 장치(100)가 사용자에 의해 파지되면, 원격 제어 장치(100)는 복수의 UI 엘리먼트를 포함하는 UI 표시할 수 있다.
도 7(a)를 참고하면, 원격 제어 장치(100)는 사용자에게 파지되기 전으로서, 움직임 없이 거치대에 놓여져 있다. 이 경우, 센서(110)는 원격 제어 장치(100)가 움직이지 않고 있음을 감지할 수 있다. 이에 따라 프로세서(140)는 원격 제어 장치(100)가 사용자에게 파지 되지 않은 상태로 결정하고, 원격 제어 장치(100)는 대기모드 상태를 유지하여 UI를 표시하지 않을 수 있다.
도 7(b)를 참고하면, 원격 제어 장치(100)는 사용자에게 파지되어 움직이고 있다. 이 경우, 센서(110)는 원격 제어 장치(100)의 상태가 변경됨을 감지하고, 원격 제어 장치(100)의 움직임을 감지할 수 있다. 이에 따라 프로세서(140)는 원격 제어 장치(100)가 사용자에게 파지된 상태로 결정하고 원격 제어 장치(100)는 활성화 되어 UI를 표시할 수 있다. 이 때 원격 제어 장치(100)는 다른 부분보다 지표면을 기준으로 더 높은 곳에 위치한 부분을 상단으로 결정하고, 원격 제어 장치(100)는 복수의 UI 엘리먼트를 포함하는 UI의 상단이 원격 제어 장치(100)의 상단과 대응하도록 UI엘리먼트를 배치할 수 있다.
상술한 실시 예에 따르면, 원격 제어 장치(100)가 사용자에게 파지 되지 않은 상태에서는 디스플레이(120)를 비활성화 상태로 유지하고, 실제로 사용자가 사용할 경우에만 디스플레이(120)를 활성화함으로써 불필요한 전력 소모를 최소화할 수 있다.
원격 제어 장치(100)의 마이크(150)가 활성화 되어 있는 경우에도, 센서(110)는 원격 제어 장치(100)의 움직임을 감지할 수 있다. 이에 따라 프로세서(140)는 원격 제어 장치(100)가 사용자에게 파지된 상태로 결정하고, 원격 제어 장치(100)는 디스플레이(120)를 활성화 하여 UI를 표시할 수 있다.
본 개시의 또 다른 실시 예에 따르면, 원격 제어 장치(100)에 기설정된 이벤트가 발생하면, 프로세서(140)는 메모리(180)에 기저장된 음성 메시지를 스피커(170)을 통해서 출력할 수 있다. 예를 들면, 스피커(170)는 원격 제어 장치(100)가 UI를 표시하는 이벤트가 발생하면, "안녕하세요", "명령을 입력하세요." 등의 음성 메시지를 출력한다. 메모리(180)에 기저장된 메시지는 상술한 예시에 한정되지 않는다.
이에 따라, 사용자는 외부 디스플레이 장치(200)에 접근하여 마이크(150)를 통해 음성만으로 외부 디스플레이 장치(200)를 제어할 수 있음을 인식할 수 있고, 원격 제어 장치(100)의 위치를 인식할 수 있는 효과가 있다.
도 8은 원격 제어 장치(100)의 디스플레이(120)에 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 실시 예를 설명하는 도면이다.
구체적으로, 프로세서(140)는 외부 디스플레이 장치(200)에 현재 재생 중인 컨텐츠의 정보에 따라서 원격 제어 장치(100)의 디스플레이(120)에 표시되는 UI의 종류를 결정할 수 있다.
도 8을 참고하면, 프로세서(140)은 외부 디스플레이 장치(200)에 재생되는 현재 콘텐츠가 각각 라이브TV, 메뉴화면/APP, VOD, 스피커/음향기기인 경우, 이에 대응 되는 다양한 형태의 UI를 디스플레이(120)에 표시할 수 있다.
외부 디스플레이 장치(200)는 현재 재생 중인 컨텐츠의 유형정보 및 식별정보를 원격 제어 장치(100)의 통신부(130)로 전송할 수 있다. 여기서, 컨텐츠의 유형정보는 예를 들면 VOD, 스피커, APP 등의 다양한 컨텐츠 유형 중 특정 유형에 대한 정보를 의미하고, 식별정보는 예를 들면 해당 컨텐츠의 제목, 제공자 등에 대한 정보를 의미한다.
통신부(130)를 통해 컨텐츠 정보를 수신하면, 프로세서(140)는 메모리(180)에 기저장된 UI 종류 중에서 컨텐츠 정보와 대응되는 UI를 결정할 수 있다. 예를 들면, 외부 디스플레이 장치(200)에서 현재 재생되는 컨텐츠가 메뉴화면/APP인 경우, 외부 디스플레이 장치(200)는 현재 재생되는 컨텐츠인 메뉴화면/APP에 대한 컨텐츠 유형 정보와 컨텐츠 식별 정보를 원격 제어 장치(100)로 전송한다. 메뉴화면/APP에 대한 컨텐츠 유형 정보와 컨텐츠 식별 정보가 수신되면, 원격 제어 장치(100)는 메뉴화면/APP를 제어하기 위한 기능에 매핑된 사방향 UI 엘리먼트를 포함하는 UI를 표시할 수 있다.
상술한 실시 예에 있어서, 메모리(180)에 저장된 UI는 도 8에서 예시로 도시한 UI 종류에 한정되지 않고. 다양한 형태일 수 있다.
도 9는 원격 제어 장치(100)의 UI 및 인디케이터를 표시하는 방법에 대한 실시 예를 설명하는 도면이다.
구체적으로, 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제되면, 원격 제어 장치(100)는 대기모드로 유지하고, 마이크(150)를 사용할 수 없다는 인디케이터를 표시할 수 있다.
도 9를 참고하면, 도 9(a)는 원격 제어 장치(100)의 마이크(150)와 디스플레이(120)가 활성화된 상태이다. 디스플레이(120)에는 현재 외부 디스플레이 장치(200)에서 재생하는 컨텐츠에 대한 정보와 대응하는 UI가 표시되어 있다.
도9(b)는 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제된 상태이다. 예를 들면, 원격 제어 장치(100)가 외부 디스플레이 장치(200)와 다른 공간에 있어서 통신부 간의 연결이 해제된 경우이다. 이 경우, 원격 제어 장치(100)는 대기모드로 변경되고, 또한 마이크(150)를 사용할 수 없다는 인디케이터를 표시할 수 있다.
도9(c)를 참고하면, 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제된 후 일정 시간(N초)가 지난 후에, 원격 제어 장치(100)는 마이크(150)를 사용할 수 없다는 인디케이터를 제거하고 대기모드를 유지할 수 있다.
사용자가 외부 디스플레이 장치(200)에 접근하여 원격 제어 장치(100)의 마이크(150)는 활성화 되었지만 사용자가 원격 제어 장치(100)를 파지하지 않아 디스플레이(120)는 비활성화 된 상태의 경우에도, 원격 제어 장치(100)와 외부 디스플레이 장치(200)간의 연결이 해제되면, 원격 제어 장치(100)는 대기모드로 유지하고, 마이크(150)를 사용할 수 없다는 인디케이터를 표시할 수 있다.
상술한 실시 예를 통하여, 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제되어 사용자가 원격 제어 장치(100)을 제어하지 못하는 경우, 대기모드로 유지함으로서 불필요한 전력소모를 방지할 수 있다.
상술한 실시 예를 통하여, 사용자는 마이크(150)를 사용할 수 없다는 인디케이터를 통해 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제되었음을 인식할 수 있는 효과가 있다.
본 개시의 또 다른 실시 예에 따르면, 기설정된 이벤트가 발생한 경우 원격 제어 장치(100)는 메모리(180)에 기저장된 음성 메시지를 스피커(170)을 통해서 출력할 수 있다. 예를 들면, 외부 디스플레이 장치(200)와 원격 제어 장치(100)와의 연결이 해제된 이벤트가 발생하면, 스피커(170)는 "연결이 해제되었습니다." "음성 입력이 불가능합니다." 등의 음성 메시지를 출력할 수 있다. 메모리(180)에 기저장된 음성 메시지는 상술한 예시에 한정되지 않는다.
도 10은 본 개시의 다양한 실시 예에 따른 원격 제어 장치(100) 형태를 설명하는 도면이다.
구체적으로 도 10은 좌측부터 원격 제어 장치(100)의 정면도, 사시도, 측면도를 나타낸 것이다.
도 10(a)를 참고하면, 원격 제어 장치(100)는 원기둥 형태로 이루어져있고 디스플레이(120)는 원기둥의 밑면에 위치하는 형태이다. 도 10(b)를 참고하면, 원격 제어 장치(100)는 원뿔 형태로 이루어져있고 디스플레이(120)는 원뿔의 밑면에 위치하는 형태이다. 도 10(c)를 참고하면, 원격 제어 장치(100)는 반구 형태로 이루어져 있고 디스플레이(120)는 반구의 밑면에 위치하는 형태이다.
원격 제어 장치(100)의 형태는 예시로 상술한 형태에 한정되지 않고, 다양한 형태일 수 있다.
도 11은 본 개시의 일 실시 예에 따른 원격 제어 장치(100)의 제어 흐름을 나타내는 도면이다.
도 11을 참고하면, 원격 제어 장치(100)는 센서(110)를 이용하여 원격 제어 장치(100)의 상태를 판단하고(S1100), 판단한 상태를 통해 이와 대응하여 복수의 UI 엘리먼트의 배치를 결정한다. 원격 제어 장치(100)는 통신부(130)를 통하여 현재 외부 디스플레이 장치(200)이 재생하고 있는 컨텐츠에 대한 정보를 수신하고(S1110), 수신된 정보에 따라 디스플레이(120)에 표시될 UI의 종류를 결정한다. 원격 제어 장치(100)는 원격 제어 장치(100)의 상태와 현재 외부 디스플레이 장치(200)에 재생되는 컨텐츠 정보를 바탕으로 복수의 UI 엘리먼트를 포함하는 UI를 결정하고, 디스플레이(120)에 표시한다(S1120).
한편, 다른 실시예에 따르면, 상술한 실시예에서 S1100 단계와 S1110 단계의 순서가 바뀔 수 있다. 예를 들면, 원격 제어 장치(100)는 통신부(130)를 통하여 현재 외부 디스플레이 장치(200)이 재생하고 있는 컨텐츠에 대한 정보를 수신하고(S1110), 수신된 정보에 따라 디스플레이(120)에 표시될 UI의 종류를 결정한다. 이 후 원격 제어 장치(100)는 센서(110)를 이용하여 원격 제어 장치(100)의 상태를 감지하고(S1100), 감지한 상태를 통해 이와 대응하여 디스플레이(120)에 표시될 복수의 UI 엘리먼트의 배치를 결정한다. 원격 제어 장치(100)는 원격 제어 장치(100)의 상태와 현재 외부 디스플레이 장치(200)에 재생되는 컨텐츠 정보를 바탕으로 복수의 UI 엘리먼트를 포함하는 UI를 디스플레이(120)에 표시한다(S1120).
본 개시는 상술한 실시 예에 한정 되지 않고 다양한 제어 흐름일 수 있다.
도 12는 본 개시의 일 실시 예에 따른 원격 제어 장치(100)의 동작 과정을 설명하기 위한 도면이다.
구체적으로, 외부 디스플레이 장치(200)는 사용자가 주변에 있음을 감지할 수 있다(S1200). 외부 디스플레이 장치(200)는 해당 감지 정보를 트리거 신호로서 원격 제어 장치(100)로 전송할 수 있다(S1210). 원격 제어 장치(100)는 전송 받은 트리거 신호를 통해 마이크(150)와 LED(160)를 활성화할 수 있다(S1220). 원격 제어 장치(100)은 센서(110)를 통해 사용자 파지를 감지하면(S1230) 외부 디스플레이 장치(200)에게 컨텐츠 정보를 요청하고(S1240), 외부 디스플레이 장치(200)는 이에 대응하여 컨텐츠 정보를 전송할 수 있다(S1250). 원격 제어 장치(100)은 센서(110)를 통해 원격 제어 장치(100)의 상태를 감지할 수 있다(S1260). 원격 제어 장치(100)은 디스플레이(120)에 전송 받은 컨텐츠 정보와 감지한 상태를 바탕으로 UI를 표시할 수 있다(S1270). 외부 디스플레이 장치(200)와 원격 제어 장치(100) 간의 통신부 연결이 해제되면(S1280), 원격 제어 장치(100)의 마이크(150)과 LED(160)을 비활성화하고, 디스플레이(120)에 표시된 UI 표시를 제거할 수 있다.
이 경우, 트리거 신호 전송 및 마이크/LED 활성화 (S1210, S1220)와 사용자 파지 감지(S1230)와 컨텐츠 정보 송수신(S1240, S1250)과 상태 감지(S1260)의 단계는 서로 순서를 달리 할 수 있다.
한편, 상술한 실시 예 외에도 원격 제어 장치(100)의 동작 과정은 다양한 형태일 수 있다.
도 13은 본 개시의 일 실시 예에 따른 외부 디스플레이 장치(200)의 구성을 설명하기 위한 블록도이다.
도 13을 참고하면, 외부 디스플레이 장치(200)는 센서(210), 디스플레이(220), 통신부(230), 프로세서(240)를 포함할 수 있다.
센서(210)은 사용자가 외부 디스플레이 장치(200)의 주변에 접근하였음을 감지할 수 있다.
디스플레이(220)는 현재 외부 디스플레이 장치(200)가 재생할 컨텐츠를 디스플레이 할 수 있다. 이 경우, 디스플레이(220)는 현재 날짜, 시간에 대하여 표시할 수 있다.
디스플레이 (220)는 예컨대, LCD(Liquid Crystal Display)로 구현될 수 있으며, 경우에 따라 CRT(cathode-ray tube), PDP(plasma display panel), OLED(organic light emitting diodes), TOLED(transparent OLED) 등으로 구현될 수 있다. 또한, 디스플레이(220)는 사용자의 터치 조작을 감지할 수 있는 터치스크린 형태로 구현될 수도 있다.
통신부(230)은 원격 제어 장치(100)의 통신부(130)와 연결되어 통신을 수행하기 위한 구성이다. 특히 통신부(230)는 원격 제어 장치(100)로 송신하는 정보를 송신할 수 있다. 이 경우, 송신되는 정보는 IR 신호 또는 블루투스 신호 등 다양한 형태로 수신될 수 있다.
상술한 외부 디스플레이 장치(200)로부터 송신 되는 정보는 현재 외부 디스플레이 장치(200)에 재생되는 컨텐츠에 대한 유형 정보 또는 식별 정보일 수 있다. 또한, 외부 디스플레이 장치(200)의 센서(210)를 통해 현재 사용자가 외부 디스플레이 장치(200) 주변에 있음을 감지한 트리거 신호일 수 있다.
또한, 통신부(230)는 유무선 통신을 지원하는 다양한 통신 칩을 포함할 수 있다. 예를 들어, 통신부(130)는 와이파이칩, 블루투스 칩, 무선 통신 칩 등 다양한 통신칩을 포함할 수 있다. 와이파이 칩 및 블루투스 칩은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 무선 통신 칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다. 그 밖에 통신부(130)는 NFC(Near Field Communication) 방식으로 동작하는 NFC 칩을 더 포함할 수 있다.
프로세서(240)는 외부 디스플레이 장치(200)를 전반적으로 제어하기 위한 구성이다.
본 개시의 일 실시 예에 따르면, 프로세서(240)은 센서(210)로부터 사용자가 주변에 있다는 감지 정보, 즉 트리거 신호를 통신부(230)를 통해 원격 제어 장치(100)로 송신하도록 제어할 수 있다.
또 다른 실시 예에 따르면 프로세서(240)은 통신부(230)를 통해 현재 외부 디스플레이 장치(200)가 재생하고 있는 컨텐츠의 유형정보 및 식별정보를 통신부(130)로 송신할 수 있다. 여기서, 컨텐츠의 유형정보는 예를 들면 VOD, 스피커, APP 등의 다양한 컨텐츠 유형 중 특정 유형에 대한 정보를 의미하고, 식별정보는 예를 들면 해당 컨텐츠의 제목, 제공자 등에 대한 정보를 의미한다.
다양한 실시 예에 따른 장치 (예: 디스플레이(120)) 또는 방법 (예: 동작들)은, 예컨대, 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 유지되는(maintain) 프로그램들 중 적어도 하나의 프로그램에 포함된 명령어(instructions)를 실행하는 적어도 하나의 컴퓨터(예: 프로세서)에 의하여 수행될 수 있다.
상기 명령어가 컴퓨터(예: 프로세서)에 의해 실행될 경우, 상기 적어도 하나의 컴퓨터는 상기 명령어에 해당하는 기능을 수행할 수 있다. 이 때, 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리(180)가 될 수 있다.
프로그램은, 예로, 하드디스크, 플로피디스크, 마그네틱 매체 (magnetic media)(예: 자기테이프), 광기록 매체 (optical media)(예: CD-ROM (compact disc read only memory), DVD (digital versatile disc), 자기-광 매체 (magneto-optical media)(예: 플롭티컬 디스크 (floptical disk)), 하드웨어 장치 (예: ROM (read only memory), RAM (random access memory), 또는 플래시 메모리 등) 등과 같은 컴퓨터로 읽을 수 저장 매체에 포함될 수 있다. 이 경우, 저장 매체는 일반적으로 원격 제어 장치(100)의 구성의 일부로 포함되나, 원격 제어 장치(100)의 포트(port)를 통하여 장착될 수도 있으며, 또는 원격 제어 장치(100)의 외부에 위치한 외부 장치(예로, 클라우드, 서버 또는 다른 전자 기기)에 포함될 수도 있다. 또한, 프로그램은 복수의 저장 매체에 나누어 저장될 수도 있으며, 이 때, 복수의 저장 매체의 적어도 일부는 원격 제어 장치(100)의 외부 장치에 위치할 수도 있다.
명령어는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
또한, 이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.
110: 센서 120: 디스플레이
130: 통신부 140: 프로세서
150: 마이크 160: LED
170: 스피커 180: 메모리
200: 외부 디스플레이 장치

Claims (22)

  1. 외부 디스플레이 장치를 제어하기 위한 원격 제어 장치의 UI 표시 방법에 있어서,
    상기 외부 디스플레이 장치로부터 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 정보를 수신하는 단계;
    상기 원격 제어 장치의 상태를 감지하는 단계; 및
    상기 컨텐츠에 대한 정보 및 상기 원격 제어 장치의 상태를 바탕으로 상기 외부 디스플레이 장치를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 단계;를 포함하는 UI 표시 방법.
  2. 제 1항에 있어서,
    상기 정보를 수신하는 단계는,
    상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 유형정보와 상기 컨텐츠에 대한 식별정보 중 적어도 하나를 수신하는 것을 특징으로 하는 UI 표시 방법.
  3. 제 2항에 있어서,
    상기 UI를 표시하는 단계는,
    상기 컨텐츠에 대한 유형정보에 대응되는 복수의 UI 엘리먼트를 결정하고, 상기 결정된 복수의 UI 엘리먼트를 포함하는 UI를 표시하는 것을 특징으로 하는 UI 표시 방법.
  4. 제 1항에 있어서,
    상기 UI를 표시하는 단계는,
    상기 원격 제어 장치의 감지된 상태에 대응되도록 UI 엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것을 특징으로 하는 UI 표시 방법.
  5. 제 4항에 있어서,
    상기 감지하는 단계는,
    상기 원격 제어 장치가 사용자에 의해 파지 되기 전에 상기 원격 제어 장치의 상단을 인식하는 단계;를 더 포함하고,
    상기 표시하는 단계는,
    상기 원격 제어 장치의 상단을 기준으로 UI 엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것을 특징으로 하는 UI 표시 방법.
  6. 제 5항에 있어서,
    상기 UI를 표시하는 단계는,
    상기 원격 제어 장치가 사용자에게 쥐어진 것이 감지되면, 상기 UI를 표시하는 것을 특징으로 하는 UI 표시 방법.
  7. 제 5항에 있어서,
    상기 감지하는 단계는,
    상기 원격 제어 장치가 사용자에게 파지된 후 변동하는 상기 원격 제어 장치의 상태에 따른 상기 원격 제어 장치의 상단을 실시간으로 인식하는 것을 특징으로 하는 UI 표시 방법.
  8. 제 1항에 있어서,
    상기 원격 제어 장치의 마이크가 비활성화된 상태에서 상기 외부 디스플레이 장치가 사용자를 감지한 경우, 상기 외부 디스플레이 장치로부터 트리거 신호를 수신하는 단계; 및
    상기 트리거 신호에 응답하여 상기 마이크를 활성화 시키는 단계;를 더 포함하는 것을 특징으로 하는 UI 표시 방법.
  9. 제 8항에 있어서,
    상기 트리거 신호에 응답하여 LED를 활성화 시키는 단계; 및
    상기 트리거 신호가 수신된 후 일정 시간이 지나면 상기 LED를 비활성화 시키는 단계;를 더 포함하는 것을 특징으로 하는 UI 표시 방법.
  10. 제 8항에 있어서,
    상기 원격 제어 장치와 상기 외부 디스플레이 장치 사이의 통신 연결이 해제되면, 상기 복수의 UI 엘리먼트를 제거하고, 상기 마이크가 비활성된 상태를 안내하는 인디케이터를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 UI 표시 방법.
  11. 제 1항에 있어서,
    상기 원격 제어 장치의 상태는,
    상기 원격 제어 장치가 지표면과 이루는 각도 및 상기 원격 제어 장치가 향하는 방향 중 적어도 하나인 것을 특징으로 하는 UI 표시 방법.
  12. 외부 디스플레이 장치를 제어하기 위한 원격 제어 장치에 있어서,
    상기 외부 디스플레이 장치와 통신을 수행하기 위한 통신부;
    상기 원격 제어 장치의 상태를 감지하기 위한 센서;
    디스플레이; 및
    상기 통신부를 통해 상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠 정보를 수신하고,
    상기 컨텐츠 정보 및 상기 원격 제어 장치의 상태를 바탕으로 상기 외부 디스플레이 장치를 제어하기 위한 복수의 UI 엘리먼트를 포함하는 UI를 표시하도록 상기 디스플레이를 제어하는 프로세서;
    를 포함하는 원격 제어 장치.
  13. 제 12항에 있어서,
    상기 통신부는,
    상기 외부 디스플레이 장치가 현재 표시하고 있는 컨텐츠에 대한 유형정보와 상기 컨텐츠에 대한식별정보 중 적어도 하나를 수신하는 것을 특징으로 하는 원격 제어 장치.
  14. 제 13항에 있어서,
    상기 프로세서는,
    상기 컨텐츠에 대한 유형정보에 대응되는 복수의 UI 엘리먼트를 결정하고, 상기 결정된 복수의 UI 엘리먼트를 포함하는 UI를 디스플레이부에 표시하도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  15. 제 12항에 있어서,
    상기 프로세서는;
    상기 센서를 통해 감지된 원격 제어 장치의 상태에 대응되도록 UI 엘리먼트의 배치를 결정하여 상기 UI를 디스플레이부에 표시하도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  16. 제 15항에 있어서,
    상기 센서는,
    상기 원격 제어 장치가 사용자에 의해 파지되기 전에 상기 원격 제어 장치의 상단을 인식하는 것을 특징으로 하고,
    상기 디스플레이는,
    상기 원격 제어 장치의 상단을 기준으로 UI엘리먼트의 배치를 결정하여 상기 UI를 표시하는 것을 특징으로 하는 원격 제어 장치.
  17. 제 16항에 있어서,
    상기 프로세서는,
    상기 원격 제어 장치가 사용자에게 쥐어진 것이 감지 되면 상기 UI를 상기 디스플레이부에 표시하도록 제어 하는 것을 특징으로 하는 원격 제어 장치.
  18. 제 16항에 있어서,
    상기 센서는,
    상기 원격 제어 장치가 사용자에게 파지된 후 변동하는 상기 원격 제어 장치의 상태에 따른 상기 원격 제어 장치의 상단을 실시간으로 인식하는 것을 특징으로 하는 원격 제어 장치.
  19. 제 12항에 있어서,
    마이크;를 더 포함하고,
    상기 통신부는,
    상기 마이크가 비활성화된 상태에서 상기 외부 디스플레이 장치가 사용자를 감지한 경우, 상기 외부 디스플레이 장치로부터 트리거 신호를 수신하고;
    상기 프로세서는 상기 트리거 신호에 응답하여 상기 마이크를 활성화 되도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  20. 제 119항에 있어서,
    LED;를 더 포함하고,
    상기 프로세서는,
    상기 트리거 신호에 응답하여 상기 LED를 활성화 되도록 제어하고, 상기 트리거 신호가 수신된 후 일정 시간이 지나면 상기 LED를 비활성화 되도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  21. 제 19항에 있어서,
    상기 프로세서는,
    상기 원격 제어 장치와 상기 외부 디스플레이 장치 사이의 통신 연결이 해제되면 상기 복수의 UI 엘리먼트를 제거하고, 상기 마이크가 비활성화된 상태를 안내하는 인디케이터를 표시하도록 제어하는 것을 특징으로 하는 원격 제어 장치.
  22. 제 12항에 있어서,
    상기 원격 제어 장치의 상태는
    상기 원격 제어 장치가 지표면과 이루는 각도 및 상기 원격 제어 장치가 향하는 방향 중 적어도 하나인 것을 특징으로 하는 원격 제어 장치.
KR1020170156292A 2017-11-22 2017-11-22 원격 제어 장치 및 이의 제어 방법 KR20190058897A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020170156292A KR20190058897A (ko) 2017-11-22 2017-11-22 원격 제어 장치 및 이의 제어 방법
US16/765,651 US11095932B2 (en) 2017-11-22 2018-09-12 Remote control device and control method thereof
PCT/KR2018/010659 WO2019103292A1 (ko) 2017-11-22 2018-09-12 원격 제어 장치 및 이의 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170156292A KR20190058897A (ko) 2017-11-22 2017-11-22 원격 제어 장치 및 이의 제어 방법

Publications (1)

Publication Number Publication Date
KR20190058897A true KR20190058897A (ko) 2019-05-30

Family

ID=66631675

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170156292A KR20190058897A (ko) 2017-11-22 2017-11-22 원격 제어 장치 및 이의 제어 방법

Country Status (3)

Country Link
US (1) US11095932B2 (ko)
KR (1) KR20190058897A (ko)
WO (1) WO2019103292A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114120619B (zh) * 2021-11-12 2023-10-10 天津朗泽科技有限公司 用于检测无线电遥控装置的匹配关系的装置及其方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7095456B2 (en) * 2001-11-21 2006-08-22 Ui Evolution, Inc. Field extensible controllee sourced universal remote control method and apparatus
JP4220210B2 (ja) 2002-09-27 2009-02-04 Ｔｏｔｏ株式会社 リモートコントロールシステム
KR100612997B1 (ko) 2005-08-17 2006-08-16 주식회사 팬택 키패드 배열 전환 기능을 구비한 이동통신 단말기 및키패드 배열 전환 방법
KR20090029399A (ko) 2007-09-18 2009-03-23 현대자동차주식회사 차량용 스티어링 휠 리모콘 방향 제어방법
RU2011113538A (ru) * 2008-09-08 2012-10-20 Шарп Кабусика Кайся (Jp) Система отображения изображений, дисплей для отображения изображений и устройство дистанционного управления
JP2011071902A (ja) 2009-09-28 2011-04-07 Sharp Corp リモコン操作機器
JP5609228B2 (ja) * 2010-04-16 2014-10-22 ソニー株式会社 通信システム並びに通信装置
US9786159B2 (en) * 2010-07-23 2017-10-10 Tivo Solutions Inc. Multi-function remote control device
KR101799271B1 (ko) 2010-12-29 2017-11-20 엘지전자 주식회사 원격제어장치를 이용한 멀티미디어 장치의 조작방법 및 그에 따른 멀티미디어 장치
US20120239396A1 (en) 2011-03-15 2012-09-20 At&T Intellectual Property I, L.P. Multimodal remote control
KR101873753B1 (ko) * 2012-01-05 2018-07-03 엘지전자 주식회사 리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법
CN103049997B (zh) 2011-10-11 2016-01-27 Lg电子株式会社 遥控器以及多媒体设备的控制方法
KR101352329B1 (ko) * 2011-11-23 2014-01-22 도시바삼성스토리지테크놀러지코리아 주식회사 리모트 컨트롤러를 이용하여 사용자 인터페이스를 제공하는 장치 및 방법
KR101339655B1 (ko) * 2012-04-27 2013-12-09 엔그램테크놀로지(주) 모션센서를 활용한 사용자 경험 기반의 스마트ｔｖ 구동 시스템 및 그 방법
TW201432635A (zh) 2013-02-01 2014-08-16 Primax Electronics Ltd 遙控器
US9357250B1 (en) * 2013-03-15 2016-05-31 Apple Inc. Multi-screen video user interface
KR20150040445A (ko) 2013-10-07 2015-04-15 삼성전자주식회사 사용자 음성을 입력받는 원격 제어 장치 및 그 방법
KR20150081708A (ko) * 2014-01-06 2015-07-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
US9554189B2 (en) 2014-06-30 2017-01-24 Microsoft Technology Licensing, Llc Contextual remote control interface
KR102328703B1 (ko) * 2015-07-24 2021-11-19 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 화면 제어방법
US10770067B1 (en) * 2015-09-08 2020-09-08 Amazon Technologies, Inc. Dynamic voice search transitioning
KR102379205B1 (ko) * 2015-10-19 2022-03-28 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어방법
KR102507161B1 (ko) * 2016-09-27 2023-03-07 삼성전자주식회사 주변 기기의 컨텐츠를 디스플레이하는 디스플레이 장치 및 제어 방법
WO2018110968A1 (en) * 2016-12-14 2018-06-21 Samsung Electronics Co., Ltd. Display apparatus and method of controlling the same
KR102392087B1 (ko) * 2017-07-10 2022-04-29 삼성전자주식회사 원격 조정 장치 및 원격 조정 장치의 사용자 음성 수신방법

Also Published As

Publication number Publication date
WO2019103292A1 (ko) 2019-05-31
US11095932B2 (en) 2021-08-17
US20200304746A1 (en) 2020-09-24

Similar Documents

Publication Publication Date Title
US9766849B2 (en) User terminal device and method for control thereof and system for providing contents
EP3292695B1 (en) Display apparatus and method for controlling display of display apparatus
CN108055408B (zh) 一种应用程序控制方法及移动终端
KR102423065B1 (ko) 전자 장치 및 전자 장치의 제어 방법
US20170094048A1 (en) Light control method and apparatus for user equipment, and user terminal
WO2019080775A1 (zh) 通知消息的提示方法及移动终端
EP3748942B1 (en) Screen on-and-off state control method and mobile terminal
WO2019179326A1 (zh) 一种应用界面显示方法、装置及移动设备
CN107390922B (zh) 虚拟触控方法、装置、存储介质及终端
KR20160114634A (ko) 디바이스 상의 롤링 제스처들을 식별하기 위한 기술들
KR20150045919A (ko) 가상 키보드 표시방법, 장치, 단말기, 프로그램 및 기록매체
KR102519578B1 (ko) 전자 장치의 화면 표시 방법 및 그 장치
CN110874147A (zh) 一种显示方法及电子设备
KR102157224B1 (ko) 사용자 단말 장치, 제어 방법 및 컨텐츠 제공 시스템
US20140168066A1 (en) Method and electronic device for controlling data transmission
WO2020088268A1 (zh) 桌面图标的整理方法及终端
KR20180048158A (ko) 디스플레이 운용 방법 및 이를 지원하는 전자 장치
KR102125327B1 (ko) 터치 모듈 운용 방법 및 이를 지원하는 전자 장치
KR20160097623A (ko) 전자 장치, 그 제어 방법 및 시스템
US20190114837A1 (en) Display device, user terminal device, display system including the same and control method thereof
JP2015529432A (ja) リモート制御出力モードを有するハンドヘルド情報処理デバイス
KR20190058897A (ko) 원격 제어 장치 및 이의 제어 방법
KR102105967B1 (ko) 정보 표시를 위한 저전력 감지 장치 및 방법
KR102546714B1 (ko) 전자장치 및 그 거치대
KR102203349B1 (ko) 대기상태 모드에서 사용자 인터페이스를 제공하는 휴대 단말 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination