KR20230162787A - 원격 제어가능 스마트 디바이스 및 방법 - Google Patents

원격 제어가능 스마트 디바이스 및 방법 Download PDF

Info

Publication number
KR20230162787A
KR20230162787A KR1020237033508A KR20237033508A KR20230162787A KR 20230162787 A KR20230162787 A KR 20230162787A KR 1020237033508 A KR1020237033508 A KR 1020237033508A KR 20237033508 A KR20237033508 A KR 20237033508A KR 20230162787 A KR20230162787 A KR 20230162787A
Authority
KR
South Korea
Prior art keywords
user interface
controllable device
controller
data
communication interface
Prior art date
Application number
KR1020237033508A
Other languages
English (en)
Inventor
실베인 렐리버
그웨나엘레 마르콴트
필리프 슈무커
실베인 티에보
Original Assignee
인터디지털 씨이 페이튼트 홀딩스, 에스에이에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인터디지털 씨이 페이튼트 홀딩스, 에스에이에스 filed Critical 인터디지털 씨이 페이튼트 홀딩스, 에스에이에스
Publication of KR20230162787A publication Critical patent/KR20230162787A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208Display device provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Selective Calling Equipment (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

제어가능 디바이스는 제1 통신 인터페이스를 통해 제어기 디바이스에, 사용자 인터페이스 데이터가 획득될 수 있는 위치를 나타내는 데이터 위치 정보를 제공하고, 데이터 위치 정보는 제어가능 디바이스의 어드레스를 포함할 수 있으며, 적어도 하나의 하드웨어 프로세서는, 제2 통신 인터페이스를 통해 제어기 디바이스로부터의 요청 시, 사용자 인터페이스의 렌더링, 사용자 인터페이스를 통한 사용자 입력의 수신, 및 사용자 인터페이스를 통해 수신된 커맨드에 대응하는 메시지의 제어가능 디바이스로의 송신을 가능케하는 사용자 인터페이스 데이터를 제공하고, 메시지에 기초하여 커맨드를 구현하도록 구성된다.

Description

원격 제어가능 스마트 디바이스 및 방법
본 개시내용은 일반적으로 접속된 디바이스에 관한 것이며, 특히 그러한 디바이스의 원격 제어에 관한 것이다.
본 섹션은, 하기에 설명되고 그리고/또는 청구되는 본 개시내용의 다양한 양태와 관련될 수 있는 기술의 다양한 양태를 독자에게 소개하도록 의도된다. 이러한 논의는 본 개시내용의 다양한 양태의 더 우수한 이해를 용이하게 하기 위해 독자에게 배경 정보를 제공하는 것에 도움이 될 것으로 여겨진다. 따라서, 이 진술은 이러한 관점에서 읽혀야 하고, 선행 기술의 인정으로서 읽혀서는 안 된다는 것이 이해되어야 한다.
스마트 디바이스, 즉, 네트워크에 접속되거나 접속할 수 있는 디바이스는 그 사용자에게 특정 이점을 제공한다. 사용자 또는 다른 디바이스는 예를 들어, 네트워크 접속을 통해 스마트 디바이스와 접속할 수 있다. 대부분의 스마트 디바이스는 또한 새로운 기능성을 획득할 수 있다. 스마트 디바이스의 예는 자동차, 온도 조절 장치, 냉장고, 오븐 및 텔레비전을 포함한다.
텔레비전의 예를 취하면, 스마트 텔레비전은 전형적으로 TV 채널 시청, 주문형 비디오(Video on Demand; VOD), 다시보기, 웹 브라우징 및 게임과 같은 상이한 애플리케이션을 제안할 수 있다.
그러나, 스마트 디바이스와 상호작용하는 것은 항상 용이하지는 않다. 두드러진 예는 사용자가 텔레비전의 하나 이상의 기능과 상호작용하는 데 기존의 원격 제어가 적합하지 않은 경향이 있는 텔레비전이다. 이 경우에, 사용자가 주어진 액션을 수행하려면 메뉴 트리(menu tree)를 살펴보거나 복잡한 버튼 조합을 사용해야 할 수도 있다.
이러한 문제에 대한 하나의 기존 해결책은 스마트폰 상에 앱을 다운로드하여 사용하는 것이며, 이는 전형적으로 스마트 디바이스 및 스마트폰이 동일한 Wi-Fi 네트워크에 접속되도록 요구한다. 그러한 앱을 다운로드하는 것은 스마트 디바이스 상의 근거리 통신(Near-Field Communication; NFC) 태그를 사용하여 또는 스마트 디바이스의 스크린 상에 디스플레이된 QR 코드를 스캐닝함으로써 용이하게 될 수 있다.
그러나, 사용자가 자동으로 앱 사이트로 "이동(direct)"되더라도, 앱은 여전히 수동으로 설치되어야 한다. 또한, 상호작용이 끝나면 앱은 스마트폰에 남아 있다. 또한, 종래의 해결책은 스마트폰과 스마트 디바이스 사이의 독점적 기술 호환성을 요구할 수 있다.
따라서, 스마트 디바이스와의 상호작용의 단점 중 적어도 일부를 다루는 해결책에 대한 요구가 있다는 것을 이해할 것이다. 본 원리는 그러한 해결책을 제공한다.
제1 양태에서, 본 원리는 제어가능 디바이스에 관한 것이고, 제어가능 디바이스는, 사용자 인터페이스 데이터가 획득될 수 있는 데이터 위치를 나타내는 정보를 제어기 디바이스에 제공하도록 구성된 제1 통신 인터페이스; 및 적어도 하나의 하드웨어 프로세서를 포함하고, 적어도 하나의 하드웨어 프로세서는, 데이터 위치에서 수신된 요청에 따라, 제2 통신 인터페이스를 통해 제어기 디바이스에, 제어기 디바이스에 의한 사용자 인터페이스의 렌더링을 가능하게 하는 사용자 인터페이스 데이터를 제공하고; 제어기 디바이스로부터 제3 통신 인터페이스를 통해, 사용자 인터페이스를 통해 수신된 커맨드에 대응하는 메시지를 수신하도록 구성된다.
제2 양태에서, 본 원리는 제어가능 디바이스에서의 방법에 관한 것이고, 본 방법은, 제1 통신 인터페이스를 통해 제어기 디바이스에, 사용자 인터페이스 데이터가 획득될 수 있는 데이터 위치를 나타내는 정보를 제공하는 단계; 데이터 위치에서 수신된 요청에 따라, 제2 통신 인터페이스를 통해 제어기 디바이스에, 제어기 디바이스에 의한 사용자 인터페이스의 렌더링을 가능하게 하는 사용자 인터페이스 데이터를 제공하는 단계; 및 제어기 디바이스로부터 제3 통신 인터페이스를 통해, 사용자 인터페이스를 통해 수신된 커맨드에 대응하는 메시지를 수신하는 단계를 포함한다.
제3 양태에서, 본 원리는, 비일시적 컴퓨터 판독 가능 매체에 저장되고, 제2 양태의 임의의 실시예에 따른 방법의 단계를 구현하기 위해 프로세서에 의해 실행가능한 프로그램 코드 명령어를 포함하는 컴퓨터 프로그램 제품에 관한 것이다.
이제, 본 원리의 특징부가 첨부된 도면을 참조하여 비제한적인 예로서 설명될 것이다.
도 1은 본 원리의 실시예에 따른 시스템을 예시한다.
도 2는 본 원리의 실시예의 방법의 흐름도를 예시한다.
도 3은 본 원리의 실시예에 따라 시간상 상호작용을 제한하기 위한 방법의 흐름도를 예시한다.
도 1은 본 원리의 실시예에 따른 시스템(100)을 예시한다. 시스템(100)은 스마트 디바이스(110) 및 제어기(120)를 포함한다. 비제한적인 예로서, 스마트 디바이스는 텔레비전으로서 설명될 것이다. 스마트 디바이스는 실제로 임의의 유형, 예를 들어, 또 다른 유형의 콘텐츠 렌더러(content renderer), 오븐, 냉장고 또는 백열 전구(light bulb)일 수 있음을 이해해야 하며; 텔레비전에 대해 설명된 모든 특징부는 또 다른 종류의 스마트 디바이스에 포함되지 않을 수 있다.
스마트 디바이스(110)는 전형적으로 사용자 인터페이스(user interface; UI)(111), 적어도 하나의 하드웨어 프로세서("프로세서")(112), 메모리(113), 제1 통신 인터페이스(114), 제2 통신 인터페이스(115), 및 디스플레이(116)를 포함할 수 있다.
사용자 인터페이스(111)는 사용자로부터 직접적으로(예를 들어, 버튼 또는 터치 스크린을 통해) 또는 종래의 원격 제어부(도시되지 않음)와 같은 사용자 인터페이스 유닛으로부터 간접적으로 입력(예를 들어, 커맨드)을 수신하도록 구성된다.
프로세서(112)는 본 원리에 따른 방법을 수행하기 위한 프로그램 코드 명령어를 실행하도록 구성된다.
적어도 부분적으로 비일시적일 수 있는 메모리(113)는 프로세서(112)에 의해 실행될 프로그램 코드 명령어, 파라미터, 이미지 데이터, 중간 결과 등을 저장하도록 구성된다.
제1 통신 인터페이스(114)는 추가로 설명되는 바와 같이 UI 데이터 위치 정보를 제어기(120)로 송신하도록 구성된다. 제1 통신 인터페이스(114)는 임의의 적합한 기술, 유선 또는 무선 또는 이 둘의 조합을 구현할 수 있다; 예시는 NFC 인터페이스 및 QR 코드를 포함한다(예를 들어, 디스플레이(116) 상에 나타내거나 제어기에 의해 판독 가능한 곳에서 인쇄됨).
제2 통신 인터페이스(115)는 네트워크, 예를 들어, WiFi 네트워크 또는 인터넷을 통해 디바이스와 통신하도록 구성된다.
디스플레이(116)는 사용자를 위해 예정된 정보를 디스플레이하도록 구성된다. 텔레비전 상에서, 디스플레이(116)는 또한 종래의 콘텐츠, 메뉴 등을 디스플레이하도록 구성될 수 있다.
제어기(120)는 예를 들어, 도 2를 참조하여 설명된 기능성이 장착된 종래의 스마트폰, 태블릿 또는"범용 "원격 제어부일 수 있다.
비일시적 저장 매체(140)는 프로세서에 의해 실행될 때 본 원리의 실시예에 따른 방법을 수행하는 컴퓨터 판독 가능 명령어를 저장한다.
도 2는 본 원리의 실시예의 방법(200)을 예시한다.
단계(S202)에서, 제어기(120)는 사용되는 기술에 좌우되는 방식으로 제1 통신 인터페이스(114)와 상호작용한다. 예를 들어, 제1 통신 인터페이스(114)가 근거리 통신(NFC) 태그인 경우, 제어기(120)는 사용자가 판독기를 태그의 충분한 근접도 내에 넣는 경우 NFC 판독기를 통해 NFC 태그와 상호작용한다. 제1 통신 인터페이스가 QR 코드를 사용하는 경우, 사용자가 카메라를 QR 코드에 겨냥하고 해석을 트리거하면 제어기는 카메라와 QR 코드 검출기와 해석기를 통해 상호작용한다. 다른 가능성은 텍스트 인식 및 무선 브로드캐스팅을 포함한다.
상호작용 동안, 데이터 위치 정보는 제어기(120)에 전달된다. 예를 들어, URL(Uniform Resource Locator) 또는 IRL(Internet Resource Locator)일 수 있는 UI 데이터 위치 정보는 UI 데이터가 획득될 수 있는 곳(예를 들어, 그 어드레스)을 나타낸다. UI 데이터는 전형적으로 스마트 디바이스(110)의 사용자 인터페이스(111)를 지칭하지 않으며; 이는 적어도 부분적으로 유사한 기능성을 가질 수 있지만, 이는 전형적으로 별개라는 것에 유의한다. 대안에서, 스마트 디바이스는 데이터 위치 정보를 디스플레이하여, 이 정보가 사용자에 의해 제어기(120)에 수동으로 입력될 수 있도록 한다.
데이터 위치 정보는 프로세서(112)에 의해 제1 통신 인터페이스(114)에 동적으로 제공될 수 있어서, 상이한 데이터 위치 정보가 상이한 시간에 제어기(120)에 제공될 수 있게 한다.
다시 말하면, 단계(S202)에서, 제어기는 스마트 디바이스(110)에 의해 제공되는 데이터 위치 정보를 획득한다.
단계(S204)에서, 제어기(120)의 상주 소프트웨어는 UI 데이터 위치 정보를 사용하여 UI 데이터를 획득하고, 이는 요청 시 스마트 디바이스(110)에 의해 제공될 수 있다. 일 실시예에서, 상주 소프트웨어는 잘 알려진 바와 같이 URL을 사용하여 그 웹 페이지에 대한 정보를 다운로드할 수 있는 웹 브라우저이다. 네트워킹된 디바이스로부터 데이터를 획득하기 위해 어드레싱 정보를 채용하는 다른 방식이 또한 사용될 수 있다.
일 실시예에서, UI 데이터는 스마트 디바이스(110)의 메모리(113)에 위치된다. 따라서, 스마트 디바이스(110)는 UI 데이터를 제어, 예를 들어, 업데이트하여 정보를 대체, 추가 및/또는 제거할 수 있다. 일 실시예에서, UI 데이터는 스마트 디바이스(110)에서 실행되는 다운로드된 프로그램에 의해 제공 및/또는 수정될 수 있다.
UI 데이터는 제어기에 의한 사용자 인터페이스의 생성을 허용한다. 일 실시예에서, 사용자 인터페이스는 그래픽 사용자 인터페이스(graphical user interface; GUI)이다.
단계(S206)에서, 제어기(120)의 상주 소프트웨어는 버튼, 위젯, 메뉴 및 가상 키보드와 같은 하나 이상의 상호작용 객체를 포함할 수 있는 사용자 인터페이스의 형태로 포맷팅된 UI 데이터를 사용자에게 디스플레이한다. 디스플레이하기 위해 데이터를 포맷팅하는 것 - 예를 들어, (웹 브라우저에 의해) HTML 데이터를, (자바 가상 머신(virtual machine; VM)에 의해) 자바 바이트 코드를, 또는 (파이썬 환경에서) 파이썬 스크립트를 포맷팅하는 것 - 은 당업계에 잘 알려져 있다. 음성을 통해서와 같이, 사용자 인터페이스를 렌더링하는 다른 방식이 가능하다는 것이 이해될 것이다; 디스플레이하는 것은 단지 예이다.
사용자 인터페이스는 예를 들어, 버튼을 갖는 종래의 TV 원격 제어부(그것이 적절한 경우)를 모방할 수 있지만, 당업자는 위젯 및 서브메뉴를 갖는 더 정교한 사용자 인터페이스가 가능하다는 것을 이해할 것이다. TV 사용자 인터페이스는 예를 들어 미디어 갤러리를 탐색하기 위한 화살표 키, 채널 버튼(예를 들어, 위쪽 및 아래쪽), 볼륨 버튼 및 웹 브라우저에 텍스트를 입력하기 위한 키보드를 포함할 수 있다.
상호작용 객체는 액션과 연관된다. 상이한 상호작용 객체는 전형적으로 상이한 액션과 연관되지만, 상호작용 객체들이 단일 액션과 연관되는 것이 또한 가능하다. 액션은 예를 들어 커맨드 송신, 메뉴 탐색 시의 하나 이상의 단계, 및 텍스트 입력 등일 수 있다.
단계(S208)에서, 제어기(120)는 디스플레이된 사용자 인터페이스를 통해 사용자 입력, 예를 들어, 커맨드를 수신한다. 상주 소프트웨어는, 예를 들어 웹 브라우저에서 잘 알려진 바와 같이, 사용자 입력을 해석하고 그의 연관된 액션을 획득한다.
단계(S210)에서, 제어기(120)의 상주 소프트웨어는 액션에 관련된 메시지를 스마트 디바이스(110)에 송신한다.
예를 들어, 디스플레이된 웹 페이지 내의 버튼은 스마트 디바이스(110)에 링크하는 어드레스(예를 들어, URL)를 포함할 수 있다; 버튼의 활성화는 메시지, 예를 들어, HTTP 요청 또는 웹 소켓(Web Socket; WS) 메시지가 스마트 디바이스(110)에 송신되게 할 것이다. 상이한 상호작용 객체가 상이한 액션과 연관될 수 있기 때문에, 상이한 상호작용 객체는 상이한 메시지가 스마트 디바이스(110)에 송신되게 할 수 있다.
일 실시예에서, 어드레스는 서버의 것이고, 액션-특유 접미사(action-specific suffix)를 포함한다. 서버는 스마트 디바이스(110)에 의해 실행될 수 있다. 어드레스는 또한 스마트 디바이스가 등록된 WiFi 라우터 또는 서버와 같은 중개 디바이스를 나타낼 수 있고, 특정 디바이스(예를 들어, 스마트 디바이스(110))와 관련된 메시지를 해석할 때, 예를 들어, 액션 내의 식별자를 사용하여 스마트 디바이스(110) 상에서 실행되는 서버의 어드레스로 그 어드레스를 변환한다. 서버는 또한 예를 들어, 고화질 멀티미디어 인터페이스(High-Definition Multimedia Interface; HDMI) 가전 제어(Consumer Electronics Control; CEC) 기술을 사용하여 메시지를 해석하고 해당 해석된 메시지를 스마트 디바이스로 송신하는 디코더와 같은 디바이스에서 실행될 수 있다.
단계(S212)에서, 서버는 제어기(120)로부터 메시지를 수신하고 이 메시지를 커맨드로서 해석한다. 서버가 스마트 디바이스(110)에 의해 호스팅되지 않는 경우, 서버는 스마트 디바이스(110)로 송신하기 위한 대응하는 커맨드를 결정한다.
언급된 바와 같이, 메시지는 예를 들어, 제어기 상의 사용자 인터페이스에 의해 제공되는 옵션으로부터 생성된 커맨드로서 해석될 수 있는 HTTP 요청 또는 웹 소켓 메시지일 수 있다.
단계(S214)에서, 스마트 디바이스(110)는 커맨드를 구현한다. 구현예는 스마트 디바이스(110)에 의해 직접적이거나, 스마트 디바이스(110)에서 실행되는 애플리케이션과 같은 소프트웨어에 의해 간접적일 수 있다. 후자의 경우에, 스마트 디바이스(110)는 커맨드를 소프트웨어에 제공한다.
알 수 있는 바와 같이, 본 원리가 종래의 기술을 사용하여 제어기에서 구현될 수 있기 때문에, 제어기(120) 상에서 실행되는 특수화된 소프트웨어에 대한 필요성은 없다. 이와 같이, 제어기의 메모리 요건은 예를 들어, 특수화된 소프트웨어를 설치하는 디바이스 상에서 더 작을 수 있다. 실제로, 스마트 디바이스와 상호작용한 후, 본 원리에 따른 제어기는 일반적으로 캐시 및/또는 브라우저 히스토리에 데이터를 거의 저장하지 않거나, 심지어 거의 전혀 저장하지 않을 수 있다.
일 실시예에서, 사용자 인터페이스는 스마트 디바이스의 상태에 좌우될 수 있고, 여기서 상태는 예를 들어 스마트 디바이스에 의해 현재 실행되는 애플리케이션의 유형에 좌우될 수 있다. 따라서, 텔레비전의 경우, 제1 사용자 인터페이스는 라이브 텔레비전을 시청할 때 사용될 수 있고, 제2 사용자 인터페이스는 텔레비전을 사용하여 인터넷 서핑을 할 때 등에 사용될 수 있는 식이다. 제2 사용자 인터페이스에 대한 UI 데이터는 제1 사용자 인터페이스를 사용하여 입력된 커맨드(예를 들어, 메뉴에서의 선택)에 응답하여 제어기로 전달될 수 있다. 제2 사용자 인터페이스에 대한 UI 데이터는 또한, 도 2의 단계(S202)를 참조하여 설명된 바와 같이, 제1 통신 인터페이스와의 상호작용 시에 제어기에 제공될 수 있다. 텔레비전 또는 다른 콘텐츠 렌더러의 경우, UI 데이터는 또한, 예를 들어, 콘텐츠와의 상호작용을 허용할 수 있는 브로드캐스트 프로그램과 같은, 현재 렌더링된 콘텐츠에 의해 제공될 수 있다.
예를 들어, 스마트 디바이스에 다운로드된 상이한 애플리케이션의 경우, 각각의 애플리케이션은 스마트 디바이스에 의해 제어기로 전달될 자신의 UI 데이터를 적재(embark)하거나 달리 제공할 수 있다.
일 실시예에서, 서버는 웹 소켓(WS) 서버를 호스트하여 한편으로는 스마트 디바이스 또는 스마트 디바이스 애플리케이션을, 그리고 다른 한편으로는 UI 데이터를 사용하는 상주 소프트웨어를 접속된 클라이언트로서 접속한다.
일 실시예에서, 복수의 사용자는 스마트 디바이스와 심지어 동시에 상호작용하는 제어기를 가질 수 있다. 각각의 사용자는 이미 설명된 바와 같이 UI 데이터를 획득할 수 있다. 사용자를 구별하기 위해, 스마트 디바이스는 각각의 제어기가 상이한 식별자를 제공하도록 각각의 사용자에게 상이한 UI 데이터를 제공할 수 있지만, 제어기 또는 사용자가 예를 들어 IP 어드레스와 같은 제어기의 식별자를 사용하여 달리 식별된다면 동일한 UI 데이터를 사용하는 것이 또한 가능하다.
일 실시예에서, 제어기와 스마트 디바이스 사이의 상호작용은 시간에 제한될 수 있다. 도 3은 예를 들어, 하기와 같이 웹 소켓 내부에 임시 채팅 룸 메커니즘을 구현함으로써 달성되는 그러한 방법(300)을 예시한다: 1) 스마트 디바이스(30)는 "룸 요청"을 "룸" 서버(32)로 송신한다(S302). 2) 이 요청의 수신 시, 서버는 난수(rnd)를 생성하고, 새로운 룸을 생성하며, 이때 룸 명칭은 rnd의 함수: Rname = f(rnd)이다. 3) 서버(32)는 방으로의 접속(S306)을 개시하는 스마트 디바이스(30)의 소프트웨어로 룸 명칭을 송신한다(S304). 4) 소프트웨어는 룸 명칭을 포함하는 데이터 위치 정보를 파라미터로서 제1 통신 인터페이스(34)에 제공한다(S308). 5) 제어기(36)는 제1 통신 인터페이스(34)와 상호작용하여 UI가 렌더링되도록 한다(S310). UI는 룸 및 룸 서버를 통해 메시지를 소프트웨어로 송신할 수 있게 한다. 6) 룸에서 제1 메시지 "커맨드"가 수신되면(S312), 서버(32)는 룸의 개방을 제한하기 위한 타이머를 시작하고(S314), 서버(32)는 대응하는 커맨드를 스마트 디바이스(30)로 전달한다(S316). 타이머의 만료 후에(S318), 방은 폐쇄되고(S320); 룸을 통해 어떤한 추가 메시지도 전달되지 않을 수 있다. 7) 새로운 룸이 임의의 요청 시에 생성될 수 있다.
일 실시예에서, 제어기와 스마트 디바이스 사이의 상호작용은 거리로 제한될 수 있다. 이는 예를 들어 스마트 디바이스와 제어기 사이의 블루투스를 통한 통신을 구현함으로써 달성될 수 있다. 낮은 범위의 블루투스로 인해, 제어기는 범위를 벗어날 때 스마트 디바이스와의 접속을 상실할 것이다. 근접도 검출은 또한 블루투스 스캐닝 단계 동안 RSSI(Received Signal Strength Indication)를 사용하여 달성될 수 있다. 제어기가 UI를 렌더링할 때, 제어기는 룸에 대한 접속을 개방하여, 파라미터로서 자신의 블루투스 ID를 제공한다. 이어서, 스마트 디바이스는 블루투스 접속을 시도하고 RSSI를 측정하여 제어기의 거리를 추론할 수 있다. 이어서, 스마트 디바이스는 너무 멀리 떨어져 있는 것으로 결정되는 제어기로부터의 메시지를 무시할 수 있다.
또 다른 예로서, 스마트 디바이스는 매우 제한된 디스플레이 또는 전혀 디스플레이를 갖지 않을 수 있는 오븐이다. 제어기에 UI를 제공하면 오븐의 자체 UI를 사용하여 또한 입력될 수 있는 커맨드를 입력하기 위한 더 쉬운 방식을 그리고/또는 거리를 두고 제공할 수 있다. 예를 들어, 식사의 세트에 대한 미리 정의된 조리 옵션을 제안할 수 있는 더 진보된 사용자 인터페이스를 제공하는 것이 또한 가능하다.
따라서, 본 원리는 제어기에 작은 풋프린트를 가질 수 있는 동적 사용자 인터페이스를 제공하는 데 사용될 수 있다는 것이 인식될 것이다.
도면에 도시된 요소는 다양한 형태의 하드웨어, 소프트웨어 또는 이의 조합으로 구현될 수 있다는 것이 이해되어야 한다. 바람직하게는, 이 요소는 프로세서, 메모리, 및 입출력 인터페이스를 포함할 수 있는, 하나 이상의 적절하게 프로그래밍된 범용 디바이스 상에서 하드웨어와 소프트웨어의 조합으로 구현된다.
본 설명은 본 개시내용의 원리를 예시한다. 따라서, 당업자는 본 명세서에 명시적으로 설명되거나 도시되지는 않았지만 본 개시내용의 원리를 구현하고 그의 범주 내에 포함되는 다양한 배열을 고안할 수 있음이 이해될 것이다.
본 명세서에 언급된 모든 예 및 조건적 언어는 독자가 본 개시내용의 원리 및 본 발명자가 기술 발전에 기여한 개념을 이해하는 것을 돕기 위한 교육적 목적을 위해 의도된 것이며, 그러한 구체적으로 언급된 예 및 조건에 제한이 없는 것으로 해석되어야 한다.
더욱이, 본 개시내용의 원리, 양태, 및 실시예를 인용하는 본 명세서의 모든 진술뿐만 아니라 그의 특정 예는 그의 구조적 및 기능적 등가물 둘 모두를 포함하도록 의도된다. 추가로, 그러한 등가물은 현재 알려져 있는 등가물뿐만 아니라 미래에 개발될 등가물, 즉 구조에 관계없이 동일한 기능을 수행하도록 개발되는 임의의 요소 둘 모두를 포함하는 것으로 의도된다.
따라서, 예를 들어, 당업자는, 본 명세서에 제시된 블록도가 본 개시내용의 원리를 구현하는 예시적인 회로부의 개념도를 표현한다는 것을 이해할 것이다. 유사하게, 임의의 흐름도(flow chart, flow diagram) 등은, 컴퓨터 판독 가능 매체에 실질적으로 표현될 수 있으며, 그에 따라, 컴퓨터 또는 프로세서가 명시적으로 도시되어 있는지 여부에 관계없이, 그러한 컴퓨터 또는 프로세서에 의해 실행될 수 있는 다양한 프로세스를 표현하는 것임이 이해될 것이다.
도면에 도시된 다양한 요소의 기능은 적절한 소프트웨어와 연관하여 소프트웨어를 실행할 수 있는 하드웨어뿐만 아니라 전용 하드웨어를 사용하여 제공될 수 있다. 프로세서에 의해 제공될 때, 기능은 단일 전용 프로세서에 의해, 단일 공유 프로세서에 의해, 또는 복수의 개별의 프로세서에 의해 제공될 수 있으며, 이 중 일부는 공유될 수 있다. 게다가, 용어 "프로세서" 또는 "제어기"의 명시적 사용은 소프트웨어를 실행할 수 있는 하드웨어만을 배타적으로 지칭하는 것으로 해석되어서는 안 되며, 제한 없이, 디지털 신호 프로세서(digital signal processor; DSP) 하드웨어, 소프트웨어를 저장하기 위한 판독 전용 메모리(read only memory; ROM), 랜덤 액세스 메모리(random access memory; RAM), 및 비휘발성 저장소를 암시적으로 포함할 수 있다.
종래의 그리고/또는 맞춤형의, 다른 하드웨어가 또한 포함될 수 있다. 유사하게, 도면에 도시된 임의의 스위치는 단지 개념적인 것이다. 그의 기능은 프로그램 로직의 동작을 통해, 전용 로직을 통해, 프로그램 제어와 전용 로직의 상호작용을 통해, 또는 심지어 수동으로 수행될 수 있으며, 특정 기법은 문맥으로부터 더 구체적으로 이해되는 바와 같이 구현자에 의해 선택가능하다.
본 발명의 청구범위에서, 특정 기능을 수행하기 위한 수단으로서 표현되는 임의의 요소는, 예를 들어, a) 그러한 기능을 수행하는 회로 요소의 조합 또는 b) 임의의 형태의 소프트웨어(이에 따라, 기능을 수행하기 위해 그러한 소프트웨어를 실행하기 위한 적절한 회로부와 조합된 펌웨어, 마이크로코드 등을 포함함)를 포함하는 그러한 기능을 수행하는 임의의 방식을 포함하도록 의도된다. 이러한 청구범위에 의해 정의된 개시내용은 다양한 기재되는 수단에 의해 제공되는 기능성이 청구범위에서 요구하는 방식으로 결합되고 함께 모인다는 사실에 있다. 따라서, 그 기능성을 제공할 수 있는 임의의 수단은 본 명세서에 도시된 것과 동등하다고 간주된다.

Claims (24)

  1. 제어가능 디바이스로서,
    사용자 인터페이스 데이터가 획득될 수 있는 데이터 위치를 나타내는 정보를 제어기 디바이스에 제공하도록 구성된 제1 통신 인터페이스; 및
    적어도 하나의 하드웨어 프로세서를 포함하고, 상기 적어도 하나의 하드웨어 프로세서는,
    상기 데이터 위치에서 수신된 요청에 따라, 제2 통신 인터페이스를 통해 상기 제어기 디바이스에, 상기 제어기 디바이스에 의한 사용자 인터페이스의 렌더링을 가능하게 하는 상기 사용자 인터페이스 데이터를 제공하고;
    상기 제어기 디바이스로부터 제3 통신 인터페이스를 통해, 상기 사용자 인터페이스를 통해 수신된 커맨드에 대응하는 메시지를 수신하도록 구성되는, 제어가능 디바이스.
  2. 제1항에 있어서, 상기 데이터 위치 정보는 상기 제어가능 디바이스의 어드레스를 포함하는, 제어가능 디바이스.
  3. 제2항에 있어서, 상기 어드레스는 URL(Uniform Resource Locator) 및 IRL(Internet Resource Locator) 중 하나인, 제어가능 디바이스.
  4. 제1항에 있어서, 상기 제1 통신 인터페이스는 근거리 통신 태그인, 제어가능 디바이스.
  5. 제1항에 있어서, 상기 사용자 인터페이스 데이터는 HTML 웹 페이지, 자바 프로그램 및 파이썬 스크립트 중 적어도 하나를 포함하는, 제어가능 디바이스.
  6. 제1항에 있어서, 상기 메시지는 HTTP 요청 및 웹 소켓 메시지 중 하나인, 제어가능 디바이스.
  7. 제1항에 있어서, 상기 사용자 인터페이스 데이터는 상기 제어가능 디바이스에 의해 실행되는 애플리케이션 및 상기 제어가능 디바이스에 의해 렌더링되는 콘텐츠 중 적어도 하나에 좌우되는, 제어가능 디바이스.
  8. 제1항에 있어서, 상기 적어도 하나의 하드웨어 프로세서는 복수의 제어기 디바이스로부터 수신된 메시지 간에 구별하기 위해 제어기 디바이스 식별자를 사용하도록 추가로 구성되는, 제어가능 디바이스.
  9. 제1항에 있어서, 상기 적어도 하나의 하드웨어 프로세서는 제어기 디바이스와의 상호작용에 대한 시간 한계(time limit)를 구현하도록 추가로 구성되는, 제어가능 디바이스.
  10. 제1항에 있어서, 상기 적어도 하나의 하드웨어 프로세서는 제어기 디바이스와의 상호작용에 대한 거리 한계(distance limit)를 구현하도록 추가로 구성되는, 제어가능 디바이스.
  11. 제1항에 있어서, 상기 사용자 인터페이스 데이터와 함께 제공된 어드레스에서 상기 메시지를 수신하도록 구성된 서버를 추가로 포함하는, 제어가능 디바이스.
  12. 제1항에 있어서, 상기 적어도 하나의 하드웨어 프로세서는 상기 메시지에 기초하여 상기 커맨드를 구현하도록 추가로 구성되는, 제어가능 디바이스.
  13. 제1항에 있어서, 상기 제2 통신 인터페이스 및 상기 제3 통신 인터페이스는 하나의 통신 인터페이스에서 구현되는, 제어가능 디바이스.
  14. 제어가능 디바이스에서의 방법으로서,
    제1 통신 인터페이스를 통해 제어기 디바이스에, 사용자 인터페이스 데이터가 획득될 수 있는 데이터 위치를 나타내는 정보를 제공하는 단계;
    상기 데이터 위치에서 수신된 요청에 따라, 제2 통신 인터페이스를 통해 상기 제어기 디바이스에, 상기 제어기 디바이스에 의한 사용자 인터페이스의 렌더링을 가능하게 하는 상기 사용자 인터페이스 데이터를 제공하는 단계; 및
    상기 제어기 디바이스로부터 제3 통신 인터페이스를 통해, 상기 사용자 인터페이스를 통해 수신된 커맨드에 대응하는 메시지를 수신하는 단계를 포함하는, 방법.
  15. 제14항에 있어서, 상기 데이터 위치 정보는 상기 제어가능 디바이스의 어드레스를 포함하는, 방법.
  16. 제15항에 있어서, 상기 어드레스는 URL(Uniform Resource Locator) 및 IRL(Internet Resource Locator) 중 하나인, 방법.
  17. 제14항에 있어서, 상기 사용자 인터페이스 데이터는 HTML 웹 페이지, 자바 프로그램 및 파이썬 스크립트 중 적어도 하나를 포함하는, 방법.
  18. 제14항에 있어서, 상기 메시지는 HTTP 요청 및 웹 소켓 메시지 중 하나인, 방법.
  19. 제14항에 있어서, 상기 사용자 인터페이스 데이터는 상기 제어가능 디바이스에 의해 실행되는 애플리케이션 및 상기 제어가능 디바이스에 의해 렌더링되는 콘텐츠 중 적어도 하나에 좌우되는, 방법.
  20. 제14항에 있어서, 복수의 제어기 디바이스로부터 수신된 메시지 간에 구별하기 위해 제어기 디바이스 식별자를 사용하는 단계를 추가로 포함하는, 방법.
  21. 제14항에 있어서, 제어기 디바이스와의 상호작용에 대한 시간 한계를 구현하는 단계를 추가로 포함하는, 방법.
  22. 제14항에 있어서, 제어기 디바이스와의 상호작용에 대한 거리 한계를 구현하는 단계를 추가로 포함하는, 방법.
  23. 제14항에 있어서, 상기 메시지에 기초하여 상기 커맨드를 구현하는 단계를 추가로 포함하는, 방법.
  24. 실행될 때, 적어도 하나의 하드웨어 프로세서로 하여금, 제14항 내지 제23항 중 어느 한 항의 방법을 수행하게 하는, 명령어를 저장하는 비일시적 컴퓨터 판독 가능 저장 매체.
KR1020237033508A 2021-03-30 2022-03-25 원격 제어가능 스마트 디바이스 및 방법 KR20230162787A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP21305401.8 2021-03-30
EP21305401 2021-03-30
PCT/EP2022/057900 WO2022207484A1 (en) 2021-03-30 2022-03-25 Remote controllable smart device and method

Publications (1)

Publication Number Publication Date
KR20230162787A true KR20230162787A (ko) 2023-11-28

Family

ID=75588140

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237033508A KR20230162787A (ko) 2021-03-30 2022-03-25 원격 제어가능 스마트 디바이스 및 방법

Country Status (6)

Country Link
US (1) US20240187676A1 (ko)
EP (1) EP4315871A1 (ko)
JP (1) JP2024515426A (ko)
KR (1) KR20230162787A (ko)
CN (1) CN117063475A (ko)
WO (1) WO2022207484A1 (ko)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8918719B2 (en) * 2011-02-14 2014-12-23 Universal Electronics Inc. Graphical user interface and data transfer methods in a controlling device
WO2015095637A1 (en) * 2013-12-20 2015-06-25 Universal Electronics Inc. System and method for optimized appliance control
US10142699B2 (en) * 2016-03-18 2018-11-27 Google Llc Systems and methods for providing interactive content

Also Published As

Publication number Publication date
US20240187676A1 (en) 2024-06-06
WO2022207484A1 (en) 2022-10-06
CN117063475A (zh) 2023-11-14
JP2024515426A (ja) 2024-04-10
EP4315871A1 (en) 2024-02-07

Similar Documents

Publication Publication Date Title
JP6312877B2 (ja) デバイスをインテリジェントに制御するための方法、装置、及びシステム、並びにプラグアンドプレイ・デバイス
TWI511537B (zh) 智慧型電視系統、智慧型電視、行動裝置及其輸入操作方法
EP2401871B1 (en) Remote user interface system and method
US10003683B2 (en) Method for communication between users and smart appliances
US11223665B2 (en) Media content system for transferring a playback marker between network-connected playback devices
KR102203757B1 (ko) 자막기능을 지원하는 컨텐츠 수신장치와 디스플레이장치, 그것을 구비하는 시스템 및 그 자막 제공방법
CN104270662A (zh) 一种终端设备通过浏览器对智能电视进行控制的系统
KR20070074075A (ko) 홈-네트워크 시스템의 제어 명령 전달 장치 및 그 방법
US10423139B2 (en) Device control method and apparatus, and device control system
US20170272268A1 (en) Network appliance, feature phone, network appliance, system and control method of network applicance
KR102565492B1 (ko) 제2 스크린 장치 상의 대화형 어플리케이션 관리자
US20180225076A1 (en) Display device and method for controlling same
KR102051540B1 (ko) 디스플레이장치 및 그 제어방법
US10152880B2 (en) Systems, methods and media for remote control of electronic devices using a proximity sensor
CN113630656B (zh) 显示设备、终端设备及通信连接方法
KR101852482B1 (ko) 포스 입력 및 소프트웨어 업그레이드에 따라 다른 동작을 수행시키는 이미지 처리 단말 및 소프트웨어 업그레이드 방법
KR20230162787A (ko) 원격 제어가능 스마트 디바이스 및 방법
CN116320564A (zh) 显示设备、终端设备和设备控制方法
CN117157987A (zh) 一种分屏播放方法及显示设备
KR20130083111A (ko) 영상표시기기 및 그 동작 방법
CN115514998B (zh) 显示设备和网络媒资切换方法
KR102049069B1 (ko) 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법
KR20160061874A (ko) 스마트 tv 기반 홈 기기 제어장치 및 홈 기기 제어방법
KR20240002132A (ko) 디스플레이 장치 및 그 동작 방법
KR20230024778A (ko) 디스플레이 장치 및 그 동작 방법