KR101446939B1 - 원격 제어 장치 및 그 제어 방법 - Google Patents

원격 제어 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR101446939B1
KR101446939B1 KR1020070106833A KR20070106833A KR101446939B1 KR 101446939 B1 KR101446939 B1 KR 101446939B1 KR 1020070106833 A KR1020070106833 A KR 1020070106833A KR 20070106833 A KR20070106833 A KR 20070106833A KR 101446939 B1 KR101446939 B1 KR 101446939B1
Authority
KR
South Korea
Prior art keywords
user interface
data format
server
client
user
Prior art date
Application number
KR1020070106833A
Other languages
English (en)
Other versions
KR20080089134A (ko
Inventor
오승재
박경모
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US12/035,841 priority Critical patent/US8271675B2/en
Priority to EP08723706A priority patent/EP2143297A4/en
Priority to PCT/KR2008/001670 priority patent/WO2008120890A1/en
Priority to CN2008800108324A priority patent/CN101653013B/zh
Priority to JP2010500828A priority patent/JP2010524056A/ja
Publication of KR20080089134A publication Critical patent/KR20080089134A/ko
Application granted granted Critical
Publication of KR101446939B1 publication Critical patent/KR101446939B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • H04Q9/02—Automatically-operated arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

원격 제어 장치 및 그 제어 방법이 제공된다. 본 발명의 실시예에 따른 원격 제어 장치는, 멀티미디어 데이터 포맷의 사용자 인터페이스를 전송하는 사용자 인터페이스 서버 및 사용자 인터페이스를 보여주며 사용자의 명령을 입력받아 사용자 인터페이스 서버를 제어하는 사용자 인터페이스 클라이언트를 포함한다.
본 발명의 실시예에 따른 원격 제어 방법은, 본 발명의 실시예에 따른 원격 제어 방법은, 사용자 인터페이스 서버가 멀티미디어 데이터 포맷의 사용자 인터페이스를 사용자 인터페이스 클라이언트로 전송하는 (a) 단계와, 사용자 인터페이스 클라이언트에서 사용자 인터페이스를 보여주는 (b) 단계 및 사용자 인터페이스를 통해 입력되는 사용자의 명령을 사용자 인터페이스 서버로 전송하여 사용자 인터페이스 서버를 제어하는 (c) 단계를 포함한다.
원격 제어, 스트리밍, 멀티미디어, 사용자 인터페이스, MPEG

Description

원격 제어 장치 및 그 제어 방법 {System and method for remote control}
본 발명은 원격 제어 장치 및 그 제어 방법에 관한 것으로, 보다 상세하게는 원격 제어를 위해 멀티미디어 데이터 포맷의 사용자 인터페이스를 이용하는 원격 제어 장치 및 그 제어 방법에 관한 것이다.
현재 일상 생활에서 더욱 많은 사용이 요구되어 가는 다양한 형태의 무선 통신 기술들은 빠르게 발전되어 가고 있다.
물리적으로 떨어져 있는 장치에 대해 원격 제어하는 종래 기술에는 CEA-2014가 있다.
도 1은 종래의 원격 제어 장치를 개략적으로 나타내는 불록도이다.
CEA-2014 기술을 구성하고 있는 원격 제어 장치는 원격 제어를 위한 사용자 인터페이스(User Interface, UI)를 제공하는 원격 사용자 인터페이스 서버(Remote UI Server, RUIS), 원격에서 보내진 사용자 인터페이스를 보여주는 원격 사용자 인터페이스 클라이언트(Remote UI Client)를 포함하고 있다.
원격 제어를 위한 사용자 인터페이스(User Interface, UI)를 제공하는 원격 사용자 인터페이스 서버는 그 내부에 웹 서버(Web Server)를 가지고 있다. 이 웹 서버를 통해서 원격 사용자 인터페이스 서버는 원격 사용자 인터페이스 클라이언트가 요구하는 웹 페이지(Web Page)를 전송해 주고, 원격 사용자 인터페이스 클라이언트는 XHTML 브라우저(Browser)를 통해서 해당 사용자 인터페이스의 웹 페이지를 사용자에게 보여주게 된다.
현재 CEA-2014에서 사용하고 있는 웹 페이지 저작의 기준은 CE-HTML을 따르고 있으며, 이러한 기준은 XHTML을 이용하여 CE 장치에 맞게 만들어진 것이다. 사용자는 원격 사용자 인터페이스 클라이언트에서 제공하는 입력 장치(Input Device)를 통해서 사용자가 원하는 정보를 취합하여 원격 사용자 인터페이스 서버에 HTTP 프로토콜(Protocol)을 이용하여 보내게 된다. 원격 사용자 인터페이스 서버의 웹 서버는 이러한 정보를 받아 원격 사용자 인터페이스 서버에서 제공하는 어플리케이션(Application)을 제어하도록 한다.
그러나, 종래의 원격 제어 장치 및 그 제어 방법에는 다음과 같은 문제점이 있었다.
종래 기술의 특징은 웹 서버를 이용하여 사용자에게 XHTML로 만들어진 사용자 인터페이스를 제공한다는 것이다. 이러한 기술의 문제점은 표현의 제약점이다. 즉, CE-HTML은 기존 PC 환경에서 사용하는 HTML보다 표현력에 많은 제약이 있다. 따라서 사용자가 원하는 리치 멀티미디어(Rich Multimedia) 형태의 사용자 인터페이스를 표현하는데 많은 어려움이 있다. 이러한 요구 사항을 충족하기 위해서는 웹 브라우저가 많은 기능을 지원해야 하기 때문에 원격 사용자 인터페이스 클라이언트의 부담이 커지게 된다.
또한, CEA-2014에서는 원격 사용자 인터페이스 서버 측에서 변경된 사항을 동적으로 업데이트해 주어야 하기 때문에 기존의 HTML 표준에 추가되는 기능을 가지게 되어 있다. 이러한 추가 기능으로 인하여 원격 사용자 인터페이스 클라이언트는 원격 사용자 인터페이스를 위한 브라우저와 일반 웹 페이지를 보기 위한 브라우저를 함께 지원해야 하는 문제점이 있었다.
또한, 원격 사용자 인터페이스 서버에서는 원격 사용자 인터페이스 클라이언트의 성능(Capability), 즉, 고해상도(High Resolution)를 지원하는 장치인지 아닌지 여부에 따라 서로 다른 웹 페이지를 만들어 제공해야만 원격 사용자 인터페이스 클라이언트에서 사용자에게 보기 좋은 사용자 인터페이스를 지원할 수 있었다. 그렇지 않은 경우, 본래 사용자 인터페이스의 선명도가 떨어지거나 노이즈가 발생하는 문제점이 있었다.
본 발명은 상기한 문제점을 개선하기 위해 고안된 것으로, 본 발명이 해결하고자 하는 과제는 원격 장치의 제어를 위한 멀티미디어 데이터 포맷의 사용자 인터페이스를 멀티미디어 스트리밍 방식에 의해 제공하고 사용자의 입력을 받아 원격 장치를 제어하도록 하는 원격 제어 장치 및 그 제어 방법을 제공하는 것이다.
본 발명의 기술적 과제는 이상에서 언급한 것들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제는 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 과제를 달성하기 위하여, 본 발명의 실시예에 따른 사용자 인터페이스 서버는, 사용자 인터페이스(User Interface)를 멀티미디어 데이터 포맷으로 엔코딩(Encoding)하는 엔코더 및 상기 엔코딩된 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 원격의 클라이언트에 전송하는 스트리밍 서버를 포함한다.
또한, 상기 과제를 달성하기 위하여, 본 발명의 실시예에 따른 사용자 인터페이스 클라이언트는, 원격의 서버로부터 전송받은 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩(Decoding)하는 디코더 및 상기 디코딩된 사용자 인터페이스를 사용자에게 출력하는 사용자 인터페이스 출력부를 포함한다.
또한, 상기 과제를 달성하기 위하여, 본 발명의 실시예에 따른 원격 제어 장치는, 멀티미디어 데이터 포맷의 사용자 인터페이스를 전송하는 사용자 인터페이스 서버 및 상기 사용자 인터페이스를 보여주며 사용자의 명령을 입력받아 상기 사용자 인터페이스 서버를 제어하는 사용자 인터페이스 클라이언트를 포함한다.
또한, 상기 과제를 달성하기 위하여, 본 발명의 실시예에 따른 원격 제어 방법은, 사용자 인터페이스 서버가 멀티미디어 데이터 포맷의 사용자 인터페이스를 사용자 인터페이스 클라이언트로 전송하는 (a) 단계와, 상기 사용자 인터페이스 클라이언트에서 상기 사용자 인터페이스를 보여주는 (b) 단계 및 상기 사용자 인터페이스를 통해 입력되는 사용자의 명령을 상기 사용자 인터페이스 서버로 전송하여 상기 사용자 인터페이스 서버를 제어하는 (c) 단계를 포함한다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명의 원격 제어 장치 및 그 제어 방법에 따르면 다음과 같은 효과가 하나 혹은 그 이상 있다.
첫째, 멀티미티어 스트리밍 기술을 이용하여 사용자에게 리치 멀티미디어 형태의 사용자 인터페이스를 제공함으로써 표현을 다양하게 할 수 있는 장점이 있다.
둘째,　멀티미디어 데이터 포맷의 사용자 인터페이스를 제공함으로써 웹 브라우저가 불필요한 멀티미디어 디바이스가 사용자 인터페이스 클라이언트인 경우 사용자 인터페이스 클라이언트의 추가적인 부라우저 지원과 같은 부담을 줄일 수 있는 장점도 있다.
셋째, 사용자 인터페이스 서버는 사용자 인터페이스 클라이언트의 성능 정보 에 따라 최적의 사용자 인터페이스를 제공할 수 있는 장점도 있다.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
이하, 본 발명의 실시예들에 의하여 원격 제어 장치 및 그 제어 방법을 설명하기 위한 도면들을 참고하여 본 발명에 대해 설명하도록 한다. 이때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭 션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
도 2는 본 발명의 일실시예에 따른 원격 제어 장치의 구성을 나타내는 블록도이다.
본 발명의 일실시예에 따른 원격 제어 장치는, 원격 사용자 인터페이스 서 버(100)와, 원격 사용자 인터페이스 클라이언트(200) 및 사용자 인터페이스 컨트롤 포인트(300)를 포함할 수 있다.
원격 사용자 인터페이스 서버(100)(Remote UI Server, RUIS)(이하, UI 서버라고 한다.)는 원거리에 있는 장치를 제어하기 위한 멀티미디어 데이터 포맷의 사용자 인터페이스를 제공할 수 있다.
원격 사용자 인터페이스 클라이언트(200)(Remote UI Client, RUIC)(이하 UI 클라이언트라고 한다.)는 UI 서버(100)에서 제공한 사용자 인터페이스를 보여주며 사용자의 명령을 입력받아 UI 서버(100)를 제어하는 역할을 할 수 있다. UI 클라이언트(200)는 휴대폰, PDA, MP3 플레이어 등의 휴대용 멀티미디어 장치는 물론, 휴대용이 아닌 컴퓨터, 디지털 TV와 같은 멀티미디어 장치를 포함할 수 있다.
사용자 인터페이스 컨트롤 포인트(300)(UI Control Point)(이하, UI 컨트롤 포인트라고 한다.)는 UI 서버(100)와 UI 클라이언트(200)를 발견하고 이를 제어하는 역할을 할 수 있다.
사용자가 직접 제어할 수 없는 위치에 있는 장치에 대하여 원격 제어를 하기 위해서는 먼저 해당 장치를 다른 장치에서 발견할 수 있어야 한다. 일반적으로 네트워크 상에서 특정 장치를 발견하는 프로토콜은 많이 정의되어 있다.
바람직하게는 홈 네트워크에서 널리 사용하고 있는 UPnP(Universal Plug and Play) 네트워킹 기술에서의 검색(Discovery) 매커니즘을 사용할 수 있다. 예를 들어, UI 서버(100)가 UPnP 장치라고 한다면, 사용자는 UPnP 컨트롤 포인트(UPnP Control Point)를 이용하여 UPnP 탐색(Discovery) 과정을 통해 원격 사용자 인터페 이스를 제공하는 UI 서버(100)를 발견할 수 있다.
일반적으로 UI 클라이언트(200)와 UI 컨트롤 포인트(300)는 물리적으로 하나의 장치로 구성될 수 있다. 따라서, 이러한 경우에는 UI 컨트롤 포인트(300)는 UI 클라이언트(200)를 의미할 수 있다.
한편, UI 클라이언트(200)가 UI 서버(100)를 찾는 과정에서 UI 서버(100)는 UI 클라이언트(200)가 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 전송받을 수 있는 URI(Uniform Resource Identifier) 정보를 함께 전해줄 수 있다. 따라서, UI 클라이언트(200)는 URI 정보를 통해 후술할 UI 서버(100)의 스트리밍 서버(120)에 접근하여 사용자 인터페이스를 전송받을 수 있다.
도 3은 본 발명의 일실시예에 따른 원격 제어 장치의 사용자 인터페이스 서버와 사용자 인터페이스 클라이언트의 구성을 나타내는 블록도이다.
본 발명의 일실시예에 따른 원격 제어 장치에서 UI 서버(100)는 엔코더(110)와, 스트리밍 서버(120)와, 디바이스 프로파일 핸들러(130) 및 이벤트 핸들러(140)를 포함할 수 있다.
엔코더(Encoder)(110)는 동적으로 구성된 사용자 인터페이스를 멀티미디어(Multimedia) 데이터 포맷으로 엔코딩(Encoding)하는 역할을 할 수 있다. 즉, UI 서버(100)에서 제공하는 어플리케이션(150)을 제어하기 위해 UI 클라이언트(200)로 전송되는 사용자 인터페이스는 멀티미디어 컨텐츠(Multimedia Contents)의 형태일 수 있다. 어플리케이션(Application) (150)은 UI 서버(100)가 제공하는 자체 기능을 의미하며, 어플리케이션(150)은 UI 서버(100)에서 제공할 수 있는 다양한 응용 프로그램의 형태를 가질 수 있다.
멀티미디어 데이터 포맷은 텍스트, 정지 화상, 동화상, 애니메이션, 사운드 등의 다양한 형태로 존재할 수 있다. 그 중에서 동화상은 차세대 VOD 서비스나, 인터렉티브(interactive) 미디어 서비스의 기본으로 자리 잡고 있어서, 관련 표준안이나 연구가 활발하게 이루어지고 있는 상황이다.
바람직하게는, 멀티미디어 데이터 포맷으로서 MPEG(Moving Picture Experts Group) 데이터를 사용할 수 있다. MPEG(Moving Picture Experts Group)은 디지털 영상 자료 및 오디오의 압축 및 복원 방법에 대한 국제적 표준이다. MPEG은 PC 상에서의 비디오 처리뿐 아니라 HDTV와 같은 고화질 시스템의 디지털화를 목표로 MPEG-2, MPEG-3, MPEG-4와 같은 계속적인 규격의 개선을 시도하고 있다. 예를 들어, MPEG-4는 IMT-2000 멀티미디어 서비스, 차세대 대화형 인터넷 방송의 핵심 기술로 다양한 형태의 디지털 오디오, 비디오 신호를 효율적으로 처리해 전송하는 국제 표준의 멀티미디어 동영상 압축 기술이다. 한편, MPEG 데이터는 객체 기술(Object Description)과 장면 기술(Scene Description)에 대한 정보를 포함할 수 있다.
스트리밍 서버(Streaming Server)(120)는 멀티미디어 데이터 포맷의 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 UI 클라이언트(200)에 전송하는 역할을 할 수 있다.
스트리밍(Streaming) 방식은 인터넷에서 음성이나 영상, 애니메이션 등을 실시간으로 재생하는 기법으로서, MPEG 데이터 등의 멀티미디어 데이터는 스트리 밍(Streaming) 방식에 의해 전송될 수 있다.
종래에는 UI 서버(100)는 웹 서버를 이용하여 사용자에게 XHTML로 만들어진 사용자 인터페이스를 제공하고 UI 클라이언트(200)에서는 웹 브라우저를 이용하여 사용자 인터페이스를 표현하였다. 따라서, 사용자가 원하는 리치 멀티미디어 형태의 사용자 인터페이스를 표현하는 데 있어 어려움이 있었을 뿐 아니라, UI 클라이언트(200)의 부담이 클 수밖에 없었다.
그러나, 본 발명의 일실시예에 따른 원격 제어 장치에 의하면, UI 서버(100)는 원격 제어를 위한 멀티미디어 데이터 포맷의 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 제공할 수 있다. 따라서, 사용자가 원하는 리치 멀티미디어 형태의 사용자 인터페이스를 자유롭게 표현할 수 있고, 웹 페이지를 보기 위한 브라우저가 필요 없으므로 UI 클라이언트(200)의 부담을 줄일 수 있다.
한편, 스트리밍 서버(120)는 UI 클라이언트(200)에서 사용자 인터페이스를 통해 입력되는 사용자의 명령을 받아 UI 서버(100)에서 제공되는 어플리케이션(150)을 제어할 수 있도록 할 수 있다. 사용자 인터페이스를 통한 사용자의 명령은 스트리밍 방식, 즉 업스트림(Upstream) 방식에 의하여 스트리밍 서버(120)로 전송될 수 있다.
디바이스 프로파일 핸들러(Device Profile Handler)(130)는 UI 클라이언트(200)의 성능(Capability) 정보를 포함하는 디바이스 프로파일(Device Profile)을 전송받아 UI 클라이언트(200)의 성능 정보에 따른 최적의 사용자 인터페이스 정보를 생성할 수 있다.
즉, 디바이스 프로파일 핸들러(130)는 UI 클라이언트(200)의 디바이스 프로파일 정보를 전송받아 성능 매칭 작업(Capability Matching)을 하게 되고, 성능 정보에 따라 차별화된 사용자 인터페이스가 있다면 최적화된 사용자 인터페이스 정보를 찾아 전송할 수 있다. 또한, 실시간으로 해당 성능에 맞게 기존 사용자 인터페이스의 내용을 트랜스코딩(Transcoding)하여 전송하여 줄 수도 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 멀티미디어 데이터 포맷으로서의 MPEG은 비트맵(Bitmap)이 아닌 벡터 그래픽(Vector Graphic)을 기반으로 한 장면 기술 정보를 사용할 수 있다. 따라서, 별도의 성능 매칭 작업을 하지 않고도 UI 클라이언트(200)의 해상도에 맞게 자동으로 사용자 인터페이스가 표현되도록 할 수 있으므로 최적의 사용자 인터페이스를 제공할 수도 있다.
종래에는 UI 서버(100)에서는 UI 클라이언트(200)의 성능, 예를 들면, 고해상도를 지원하는 장치인지 아닌지 여부에 따라 해상도에 따른 서로 다른 웹 페이지를 만들어 제공해야만 UI 클라이언트(200)에서 사용자에게 보기 좋은 사용자 인터페이스를 지원할 수 있었다.
그러나, 본 발명의 일실시예에 따른 원격 제어 장치에 의하면, UI 서버(100)는 UI 클라이언트(200)의 성능 정보에 따라 최적의 사용자 인터페이스를 제공할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 원격 제어 장치에 의하면, 멀티미디어 데이터 포맷으로서의 MPEG 데이터 포맷 내에 포함된 벡터 그래픽 기반의 장면 기술 정보를 사용할 수 있기 때문에, 별도의 성능 매칭 작업을 하지 않고도 UI 클 라이언트(200)의 해상도에 맞게 자동으로 최적의 사용자 인터페이스를 제공할 수도 있다.
이벤트 핸들러(Event Handler)(140)는 어플리케이션(150) 내에서의 상태 변화 또는 외부에서 오는 통지(Notification)를 처리하여 UI 클라이언트(200)에게 사용자 인터페이스의 업데이트 상태를 전송하여 알려줄 수 있다.
본 발명의 일실시예에 따른 원격 제어 장치에서 UI 클라이언트(200)는 디코더(210)와 디바이스 프로파일 저장부(220), 사용자 인터페이스 출력부 및 사용자 입력 핸들러(230)를 포함할 수 있다.
디코더(Decoder)(210)는 UI 서버(100)로부터 전송받은 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩(Decoding)하는 역할을 할 수 있다. 또한, 디코더(210)는 사용자 인터페이스를 렌더링(Rendering)하는 렌더링 디바이스(Rendering device)를 포함할 수 있다.
바람직하게는, 렌더링 디바이스는 멀티미디어 데이터 포맷에 포함된 장면 기술(Scene Description)을 이용하여 사용자 인터페이스를 렌더링할 수 있다. 멀티미디어 데이터 포맷으로 MPEG 데이터 포맷을 사용하는 경우, 랜더링 디바이스는 MPEG 데이터를 디코딩한 후, MPEG 데이터 내에 포함된 장면 기술 및 객체 기술을 이용하여 사용자가 보고들을 수 있는 형태로 미디어 객체(Media object)를 조합하고 렌더링할 수 있다. 여기서, 각각의 미디어 객체는 사용자 인터페이스로서의 기능을 수행할 수 있다. 또한, 멀티미디어 데이터 포맷에 포함된 장면 기술은 원격 장치의 기능을 제어할 수 있는 제어 명령을 포함할 수 있다.
디바이스 프로파일 저장부(220)는 UI 클라이언트(200), 보다 자세하게는 후술할 사용자 인터페이스 출력부의 성능 정보를 포함하는 디바이스 프로파일을 저장할 수 있다. 즉, UI 서버(100)로부터 최적화된 사용자 인터페이스를 받기 위한 해당 장치의 성능(Capability) 정보를 포함할 수 있다. 예를 들면, UI 클라이언트(200)의 성능 정보로서, 사용자 인터페이스 출력부의 해상도(Resolution)에 관한 디바이스 프로파일을 저장할 수 있다.
사용자 인터페이스 출력부(이하, UI 출력부라고 한다.)는 디코딩 및 렌더링이 끝난 사용자 인터페이스를 사용자에게 출력하는 역할을 할 수 있다. UI 출력부는 사용자 인터페이스를 디스플레이할 수 있는 음극선관(CRT, Cathode Ray Tube), 액정 화면(LCD, Liquid Crystal Display), 발광 다이오드(LED, Light-Emitting Diode), 유기 발광 다이오드(OLED, Organic Light-Emitting Diode) 또는 플라즈마 디스플레이(PDP, Plasma Display Panel) 등의 영상 표시 수단이 구비된 모듈일 수 있다.
한편, 사용자는 UI 출력부로부터 출력되는 사용자 인터페이스를 통해 제어 명령을 입력할 수 있다. 따라서, 사용자 인터페이스를 통해 입력되는 사용자의 명령을 UI 서버(100)로 전송하여 UI 서버(100)에서 제공하는 어플리케이션(150)을 제어할 수 있다.
사용자 입력 핸들러(User Input Handler)(230)는 사용자 인터페이스를 통해 입력되는 사용자의 명령을 처리하는 역할을 할 수 있다. 즉, UI 클라이언트(200)가 사용자로부터 마우스나 키보드와 같은 입력 장치(Input device)로부터 받아들이는 정보를 처리할 수 있도록 제어할 수 있다.
멀티미디어 데이터 포맷으로 MPEG 데이터 포맷을 사용하는 경우, MPEG 데이터 내에 포함된 각각의 미디어 객체는 사용자 인터페이스로서의 기능을 수행할 수 있다. 또한, 멀티미디어 데이터 포맷에 포함된 장면 기술은 원격 장치의 기능을 제어할 수 있는 제어 명령을 포함할 수 있다. 따라서, 사용자 입력 핸들러(230)는 장면 기술에 기술된 제어 명령을 호출하여 MPEG 포맷의 사용자 인터페이스에 대응되는 원격 장치의 기능을 제어할 수 있다.
도 3에서 도시된 각각의 구성요소는 일종의 '모듈'로 구성될 수 있다. 상기 '모듈'은 소프트웨어 또는 Field Programmable Gate Array(FPGA) 또는 주문형 반도체(Application Specific Integrated Circuit, ASIC)과 같은 하드웨어 구성요소를 의미하며, 모듈은 어떤 역할들을 수행한다. 그렇지만 모듈은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. 모듈은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 실행시키도록 구성될 수도 있다. 따라서, 일 예로서 모듈은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들, 및 변수들을 포함한다. 구성요소들과 모듈들에서 제공되는 기능은 더 작은 수의 구성요소들 및 모듈들로 결합되거나 추가적인 구성요소들과 모듈들로 더 분리될 수 있다.
상기와 같이 구성되는 본 발명의 일실시예에 따른 원격 제어 방법을 설명하면 다음과 같다.
도 4는 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 생성하는 방법을 나타낸 순서도이다.
먼저, 원거리에 있는 장치를 제어하기 위해서 사용자는 UI 컨트롤 포인트(300)를 통해 제어하고자 하는 UI 서버(100) 및 UI 클라이언트(200)를 찾아낸다(S401). 예를 들어, UI 서버(100)가 UPnP 장치라고 한다면, 사용자는 UPnP 컨트롤 포인트를 이용하여 UPnP 탐색(Discovery) 과정을 통해 UI 서버(100)를 발견할 수 있다. 일반적으로, UI 클라이언트(200)와 UI 컨트롤 포인트(300)는 물리적으로 하나의 장치로 구성되어 있을 수 있다. 이러한 경우에는 UI 클라이언트(200)를 찾는 과정은 생략될 수 있다.
UI 서버(100)와 UI 클라이언트(200)를 찾은 후, UI 클라이언트(200)는 네트워크를 통해 자신의 디바이스 프로파일 정보를 UI 서버(100)로 전송할 수 있다(S402). 이는 UI 클라이언트(200)가 UI 서버(100)로부터 사용자 인터페이스를 전송 받을 때, UI 클라이언트(200)에서 최적화된 상태로 사용자에게 보여질 수 있도록 하기 위함이다. UI 서버(100)는 UI 클라이언트(200)의 디바이스 프로파일 정보를 받아 디바이스 프로파일 핸들러(130)를 통해 성능 매칭 작업(Capability Matching)을 할 수 있다(S403). 그리고, 성능 정보에 따른 최적의 사용자 인터페이스 정보를 생성하여 UI 클라이언트(200)에게 전송할 수 있다(S404).
한편, 도시되지는 않았으나, 본 발명의 또 다른 실시예에 따른 원격 제어 장 치에 의하면, 멀티미디어 데이터 포맷으로서의 MPEG 데이터 포맷 내에 포함된 벡터 그래픽 기반의 장면 기술 정보를 사용할 수 있다. 따라서, 도 4에서와 같은 별도의 성능 매칭 작업을 하지 않고도 UI 클라이언트(200)의 해상도에 맞게 자동으로 최적의 사용자 인터페이스를 제공할 수도 있다.
도 5는 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 전송하여 출력하는 방법을 나타낸 순서도이다.
UI 클라이언트(200)로 사용자 인터페이스를 전송하기 전에, UI 서버(100)의 엔코더(110)는 동적으로 구성된 사용자 인터페이스를 멀티미디어 데이터 포맷으로 엔코딩할 수 있다(S501). 한편, 전송되는 사용자 인터페이스는 멀티미디어 컨텐츠로서, MPEG(Moving Picture Expert Group) 등과 같은 포맷의 데이터라고 볼 수 있다.
그리고, UI 서버(100)의 스트리밍 서버(120)는 엔코딩을 마친 멀티미디어 데이터 포맷의 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 UI 클라이언트(200)에 전송할 수 있다(S502).
그리고, UI 클라이언트(200)의 디코더(210)는 UI 서버(100)로부터 전송받은 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩할 수 있다(S503). 디코딩이 끝난 사용자 인터페이스는 렌더링 디바이스에 의해 멀티미디어 데이터 포맷에 포함된 장면 기술을 이용하여 렌더링 될 수 있다(S504).
그리고, UI 출력부는 디코딩 및 렌더링이 끝난 사용자 인터페이스를 사용자에게 출력하는 역할을 할 수 있다(S505).
도 6은 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 통해 원격 장치를 제어하는 방법을 나타낸 순서도이다.
사용자는 UI 출력부로부터 출력되는 사용자 인터페이스를 통해 제어 명령을 입력할 수 있다(S601). 사용자는 UI 출력부에서 메뉴 아이템을 확인하고, 마우스나 키보드와 같은 입력 장치를 통해 필요한 메뉴를 통해 제어 명령을 입력할 수 있다.
그리고, 사용자 입력 핸들러(230)는 사용자 인터페이스를 통해 입력되는 사용자의 명령을 처리하는 역할을 할 수 있다(S602). 즉, UI 클라이언트(200)가 사용자로부터 마우스나 키보드와 같은 입력 장치(Input device)로부터 받아들이는 정보를 처리할 수 있도록 제어할 수 있다.
사용자가 사용자 인터페이스를 통해 입력한 제어 명령을 처리하고 나면, 사용자의 명령은 스트리밍 방식, 즉 업스트리밍(Upstream) 방식에 의하여 UI 서버(100)의 스트리밍 서버(120)로 전송될 수 있다(S603). 한편, 스트리밍 서버(120)는 UI 클라이언트(200)에서 사용자 인터페이스를 통해 입력되는 사용자의 명령을 받아 UI 서버(100)에서 제공되는 어플리케이션(150)을 제어할 수 있도록 할 수 있다(S604). 즉, UI 서버(100)는 전달받은 정보를 분석하여 사용자가 원하는 제어 명령을 읽어내고 UI 서버(100)에서 제공하는 어플리케이션(150)에 다시 그 정보를 보내어 해당 장치를 제어할 수 있다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다 는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
도 1은 종래의 원격 제어 장치를 개략적으로 나타내는 불록도이다.
도 2는 본 발명의 일실시예에 따른 원격 제어 장치의 구성을 나타내는 블록도이다.
도 3은 본 발명의 일실시예에 따른 원격 제어 장치의 사용자 인터페이스 서버와 사용자 인터페이스 클라이언트의 구성을 나타내는 블록도이다.
도 4는 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 생성하는 방법을 나타낸 순서도이다.
도 5는 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 전송하여 출력하는 방법을 나타낸 순서도이다.
도 6은 본 발명의 일실시예에 따른 원격 제어 장치에서 멀티미디어 데이터 포맷의 사용자 인터페이스를 통해 원격 장치를 제어하는 방법을 나타낸 순서도이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 원격 사용자 인터페이스 서버
110: 엔코더
120: 스트리밍 서버
130: 디바이스 프로파일 핸들러
140: 이벤트 핸들러
150: 어플리케이션
200: 원격 사용자 인터페이스 클라이언트
210: 디코더
220: 디바이스 프로파일 저장부
230: 사용자 입력 핸들러
300: 사용자 인터페이스 컨트롤 포인트

Claims (22)

  1. 사용자 인터페이스(User Interface)를 멀티미디어 데이터 포맷으로 엔코딩(Encoding)하는 엔코더;
    상기 엔코딩된 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 원격의 클라이언트에 전송하는 스트리밍 서버; 및
    상기 원격의 클라이언트의 성능(Capability) 정보를 포함하는 디바이스 프로파일(Device Profile)을 전송받아 상기 성능 정보에 따른 사용자 인터페이스를 생성하는 디바이스 프로파일 핸들러를 포함하는 사용자 인터페이스 서버.
  2. 제 1 항에 있어서,
    상기 스트리밍 서버는 상기 사용자 인터페이스를 통해 입력되는 사용자의 명령을 받아 어플리케이션을 제어하는 사용자 인터페이스 서버.
  3. 제 1 항에 있어서,
    상기 디바이스 프로파일은 상기 성능 정보로서 상기 원격의 클라이언트의 사용자 인터페이스 출력부의 해상도를 포함하고,
    상기 디바이스 프로파일 핸들러는 상기 수신된 디바이스 프로파일을 이용하여 성능 매칭(Capability Matching)을 수행하며, 상기 원격의 클라이언트의 상기 사용자 인터페이스 출력부의 해상도에 따른 상기 사용자 인터페이스를 검색하고,
    상기 스트리밍 서버는 상기 엔코딩된 사용자 인터페이스를 통해 사용자 명령을 수신하며, 상기수신된 사용자 명령에 따라서 애플리케이션을 제어하는 사용자 인터페이스 서버.
  4. 제 1 항에 있어서,
    상기 멀티미디어 데이터 포맷은 MPEG(Moving Picture Experts Group) 데이터 포맷인 사용자 인터페이스 서버.
  5. 제 4 항에 있어서,
    상기 MPEG 데이터 포맷 내에 포함된 벡터 그래픽(Vector Graphic) 기반의 장면 기술(Scene Description) 정보를 사용하여 사용자 인터페이스 정보를 생성하는 사용자 인터페이스 서버.
  6. 원격의 서버로부터 전송받은 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩(Decoding)하는 디코더;
    상기 디코딩된 사용자 인터페이스를 사용자에게 출력하는 사용자 인터페이스 출력부; 및
    상기 사용자 인터페이스 출력부의 성능 정보를 포함하는 디바이스 프로파일을 저장하는 디바이스 프로파일 저장부를 포함하는 사용자 인터페이스 클라이언트.
  7. 제 6 항에 있어서,
    상기 디코딩된 사용자 인터페이스를 통해 입력되는 사용자의 명령을 상기 원격의 서버로 전송하여 상기 원격의 서버를 제어하는 사용자 인터페이스 클라이언트.
  8. 제 7 항에 있어서,
    상기 디코딩된 사용자 인터페이스를 통해 입력되는 사용자의 명령을 처리하는 사용자 입력 핸들러를 더 포함하는 사용자 인터페이스 클라이언트.
  9. 제 6 항에 있어서,
    상기 디바이스 프로파일은 상기 성능 정보로서 상기 사용자 인터페이스 출력부의 해상도를 포함하고,
    상기 전송받은 사용자 인터페이스는 상기 원격의 서버에 의해 성능 매칭(Capability Matching)을 수행함으로써 상기 사용자 인터페이스 출력부의 해상도에 따라 검색된 사용자 인터페이스이며,
    상기 사용자 인터페이스 클라이언트는 상기 디코딩된 사용자 인터페이스를 통해 상기 원격의 서버에게 사용자 명령을 전송함으로써 상기 원격의 서버를 제어하는 사용자 인터페이스 클라이언트.
  10. 제 6 항에 있어서,
    상기 디코더는 상기 디코딩된 사용자 인터페이스를 렌더링(Rendering)하는 렌더링 디바이스를 포함하는 사용자 인터페이스 클라이언트.
  11. 제 10 항에 있어서,
    상기 렌더링 디바이스는 상기 멀티미디어 데이터 포맷에 포함된 장면 기술(Scene Description)을 이용하여 상기 디코딩된 사용자 인터페이스를 렌더링하는 사용자 인터페이스 클라이언트.
  12. 제 6 항에 있어서,
    상기 멀티미디어 데이터 포맷은 MPEG 데이터 포맷인 사용자 인터페이스 클라이언트.
  13. 멀티미디어 데이터 포맷의 사용자 인터페이스를 전송하는 사용자 인터페이스 서버;
    상기 사용자 인터페이스를 보여주며 사용자의 명령을 입력받아 상기 사용자 인터페이스 서버를 제어하는 사용자 인터페이스 클라이언트를 포함하며,
    상기 사용자 인터페이스 서버는 상기 사용자 인터페이스 클라이언트의 성능 정보를 포함하는 디바이스 프로파일을 전송받아 상기 성능 정보에 따른 사용자 인터페이스 정보를 생성하는 원격 제어 시스템.
  14. 제 13 항에 있어서,
    상기 사용자 인터페이스 서버는,
    상기 사용자 인터페이스를 상기 멀티미디어 데이터 포맷으로 엔코딩하는 엔코더; 및
    상기 멀티미디어 데이터 포맷의 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 전송하는 스트리밍 서버를 포함하는 원격 제어 시스템.
  15. 제 13 항에 있어서,
    상기 사용자 인터페이스 클라이언트는,
    상기 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩하는 디코더; 및
    상기 사용자 인터페이스를 사용자에게 출력하는 사용자 인터페이스 출력부를 포함하는 원격 제어 시스템.
  16. 제 13 항에 있어서,
    상기 디바이스 프로파일은 상기 성능 정보로서 상기 사용자 인터페이스 클라이언트의 사용자 인터페이스 출력부의 해상도를 포함하고,
    상기 사용자 인터페이스 서버는 성능 매칭(Capability Matching)을 수행함으로써 상기 사용자 인터페이스 출력부의 해상도에 따라 사용자 인터페이스를 검색하며,
    사용자 인터페이스(User Interface)를 멀티미디어 데이터 포맷으로 엔코딩(Encoding)하는 엔코더; 및
    상기 엔코딩된 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 원격의 클라이언트에 전송하는 스트리밍 서버를 포함하는 원격 제어 시스템.
  17. 제 13 항에 있어서,
    상기 멀티미디어 데이터 포맷은 MPEG 데이터 포맷인 원격 제어 시스템.
  18. 제 17 항에 있어서,
    상기 사용자 인터페이스 서버는 MPEG 데이터 포맷 내에 포함된 벡터 그래픽 기반의 장면 기술 정보를 사용하여 사용자 인터페이스 정보를 생성하는 원격 제어 시스템.
  19. 사용자 인터페이스 서버가 멀티미디어 데이터 포맷의 사용자 인터페이스를 사용자 인터페이스 클라이언트로 전송하는 (a) 단계;
    상기 사용자 인터페이스 클라이언트에서 상기 사용자 인터페이스를 보여주는 (b) 단계; 및
    상기 사용자 인터페이스를 통해 입력되는 사용자의 명령을 상기 사용자 인터페이스 서버로 전송하여 상기 사용자 인터페이스 서버를 제어하는 (c) 단계를 포함하며,
    상기 사용자 인터페이스 서버가 상기 사용자 인터페이스 클라이언트의 성능 정보를 포함하는 디바이스 프로파일을 전송받아 상기 성능 정보에 따른 사용자 인터페이스 정보를 생성하는 단계를 더 포함하는 원격 제어 방법.
  20. 제 19 항에 있어서,
    상기 (a) 단계는,
    상기 사용자 인터페이스를 상기 멀티미디어 데이터 포맷으로 엔코딩하는 단계; 및
    상기 엔코딩된 사용자 인터페이스를 멀티미디어 스트리밍 방식으로 상기 사용자 인터페이스 클라이언트로 전송하는 단계를 포함하는 원격 제어 방법.
  21. 제 19 항에 있어서,
    상기 (b) 단계는,
    상기 멀티미디어 데이터 포맷의 사용자 인터페이스를 디코딩하는 단계; 및
    상기 디코딩된 사용자 인터페이스를 사용자에게 출력하는 단계를 포함하는 원격 제어 방법.
  22. 제 19 항에 있어서,
    상기 디바이스 프로파일은 상기 성능 정보로서 상기 사용자 인터페이스 클라이언트의 사용자 인터페이스 출력부의 해상도를 포함하고,
    상기 사용자 인터페이스를 생성하는 단계는 상기 사용자 인터페이스 서버가 상기 디바이스 프로파일을 이용하여 성능 매칭(Capability Matching)을 수행함으로써 사용자 인터페이스 클라이언트에 따른 사용자 인터페이스를 검색하는 단계를 포함하고,
    상기 사용자 인터페이스를 전송하는 (a)단계는,
    상기 사용자 인터페이스를 멀티미디어 데이터 포맷으로 엔코딩(Endocing)하는 단계; 및
    상기 엔코딩된 사용자 인터페이스를 멀티미디어 스트리밍을 이용하여 상기 사용자 인터페이스클라이언트로 전송하는 단계를 더 포함하는 원격 제어 방법.
KR1020070106833A 2007-03-30 2007-10-23 원격 제어 장치 및 그 제어 방법 KR101446939B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US12/035,841 US8271675B2 (en) 2007-03-30 2008-02-22 Remote control apparatus and method
EP08723706A EP2143297A4 (en) 2007-03-30 2008-03-25 REMOTE CONTROL DEVICE AND METHOD
PCT/KR2008/001670 WO2008120890A1 (en) 2007-03-30 2008-03-25 Remote control apparatus and method
CN2008800108324A CN101653013B (zh) 2007-03-30 2008-03-25 远程控制设备和方法
JP2010500828A JP2010524056A (ja) 2007-03-30 2008-03-25 遠隔制御装置およびその制御方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US92083307P 2007-03-30 2007-03-30
US60/920,833 2007-03-30

Publications (2)

Publication Number Publication Date
KR20080089134A KR20080089134A (ko) 2008-10-06
KR101446939B1 true KR101446939B1 (ko) 2014-10-06

Family

ID=40151046

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070106833A KR101446939B1 (ko) 2007-03-30 2007-10-23 원격 제어 장치 및 그 제어 방법

Country Status (6)

Country Link
US (1) US8271675B2 (ko)
EP (1) EP2143297A4 (ko)
JP (1) JP2010524056A (ko)
KR (1) KR101446939B1 (ko)
CN (1) CN101653013B (ko)
WO (1) WO2008120890A1 (ko)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8074248B2 (en) 2005-07-26 2011-12-06 Activevideo Networks, Inc. System and method for providing video content associated with a source image to a television in a communication network
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
US9042454B2 (en) * 2007-01-12 2015-05-26 Activevideo Networks, Inc. Interactive encoded content system including object models for viewing on a remote device
US8214619B1 (en) 2007-11-26 2012-07-03 Adobe Systems Incorporated Memory allocation in a mobile device
US8041372B1 (en) * 2007-11-26 2011-10-18 Adobe Systems Incorporated Selecting data in a mobile information system
US8677476B2 (en) 2007-11-26 2014-03-18 Adobe Systems Incorporated Providing remotely defined security data to a local application extension
US8413233B1 (en) 2007-11-26 2013-04-02 Adobe Systems Incorporated Authorizing local application activity using remotely defined security data
US8281390B1 (en) 2007-11-26 2012-10-02 Adobe Systems Incorporated Remotely defining security data for authorization of local application activity
US8745228B2 (en) 2007-11-26 2014-06-03 Adobe Systems Incorporated Matching device capabilities and content characteristics
US8131875B1 (en) * 2007-11-26 2012-03-06 Adobe Systems Incorporated Device profile assignment based on device capabilities
KR101531165B1 (ko) * 2008-04-17 2015-06-25 삼성전자주식회사 클라이언트의 특성을 고려한 사용자 인터페이스를 제공, 수신하는 방법 및 장치
KR20090110202A (ko) 2008-04-17 2009-10-21 삼성전자주식회사 개인화된 사용자 인터페이스를 디스플레이하는 방법 및 장치
KR101560183B1 (ko) 2008-04-17 2015-10-15 삼성전자주식회사 사용자 인터페이스를 제공/수신하는 방법 및 장치
KR101545137B1 (ko) 2008-04-17 2015-08-19 삼성전자주식회사 사용자 인터페이스를 생성하는 방법 및 장치
KR20100040545A (ko) * 2008-10-10 2010-04-20 삼성전자주식회사 구조화된 리치 미디어 데이터 기반의 사용자 인터페이스를 제공하기 위한 장치 및 방법
KR101615624B1 (ko) 2009-02-27 2016-04-26 삼성전자주식회사 원격 사용자 인터페이스 디바이스를 제어하는 장치 및 방법
US20120151327A1 (en) * 2009-06-08 2012-06-14 Samsung Electronics Co., Ltd. Method and apparatus for providing a remote user interface
KR101596505B1 (ko) * 2009-06-19 2016-02-23 삼성전자주식회사 멀티미디어 시스템의 사용자 인터페이스 장치 및 방법
KR101686413B1 (ko) 2009-08-28 2016-12-14 삼성전자주식회사 복수 개의 컨트롤 사용자 인터페이스를 이용한 원격 제어 방법 및 시스템
AU2014268193B2 (en) * 2009-09-01 2015-07-09 Samsung Electronics Co., Ltd. Apparatus and method for remote control in a short-range network, and system supporting the same
KR20110025012A (ko) * 2009-09-01 2011-03-09 삼성전자주식회사 근거리 네트워크에서 사용자 인터페이스 매칭장치 및 방법
KR101612553B1 (ko) * 2009-10-09 2016-04-27 삼성전자주식회사 리모트 사용자 인터페이스 서버와 리모트 사용자 인터페이스 클라이언트간의 인터페이스를 위한 장치 및 방법
KR101767262B1 (ko) 2009-11-09 2017-08-11 삼성전자주식회사 ＵＰｎＰ를 이용한 입력 시스템에서 입력 방식을 변경하기 위한 방법 및 장치
KR101612845B1 (ko) * 2009-11-12 2016-04-15 삼성전자주식회사 리모트 ｕｉ 서비스 제공 방법 및 장치
US8856651B2 (en) 2010-06-04 2014-10-07 Samsung Electronics Co., Ltd. Remote user interface cooperative application
US8539039B2 (en) * 2010-06-22 2013-09-17 Splashtop Inc. Remote server environment
KR101698354B1 (ko) * 2010-07-16 2017-01-23 삼성전자주식회사 홈 네트워크에서 멀티캐스트 메시지를 이용하여 복수 개의 원격 사용자 인터페이스 서버들을 제어하기 위한 장치 및 방법
AU2011315950B2 (en) 2010-10-14 2015-09-03 Activevideo Networks, Inc. Streaming digital video between video devices using a cable television system
DE102011002822A1 (de) * 2011-01-18 2012-07-19 Siemens Ag Österreich Verfahren und System zum Erstellen einer Bedienoberfläche für interaktive Media-Anwendungen
WO2012138660A2 (en) 2011-04-07 2012-10-11 Activevideo Networks, Inc. Reduction of latency in video distribution networks using adaptive bit rates
US8769110B2 (en) 2011-05-27 2014-07-01 Sony Corporation Transferring RUI from one device to another
US10976981B2 (en) * 2011-07-15 2021-04-13 Vmware, Inc. Remote desktop exporting
US9304662B2 (en) 2011-08-25 2016-04-05 Vmware, Inc. User interface virtualization techniques
EP2784641B1 (en) * 2011-11-24 2018-11-28 LG Electronics Inc. User interface display method and device using same
CN110677330A (zh) * 2011-12-21 2020-01-10 英特尔公司 用于促进计算设备和非计算设备的基于代理用户界面的远程管理和控制的机制
US10409445B2 (en) 2012-01-09 2019-09-10 Activevideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television
KR101901884B1 (ko) * 2012-02-29 2018-09-28 삼성전자주식회사 원격 사용자 인터페이스 제공 장치 및 방법
US9800945B2 (en) 2012-04-03 2017-10-24 Activevideo Networks, Inc. Class-based intelligent multiplexing over unmanaged networks
US9123084B2 (en) 2012-04-12 2015-09-01 Activevideo Networks, Inc. Graphical application integration with MPEG objects
US9542080B2 (en) * 2012-04-25 2017-01-10 Vmware, Inc. User interface virtualization of context menus
US9525586B2 (en) * 2013-03-15 2016-12-20 Intel Corporation QoS based binary translation and application streaming
WO2014145921A1 (en) 2013-03-15 2014-09-18 Activevideo Networks, Inc. A multiple-mode system and method for providing user selectable video content
US10432681B1 (en) 2013-04-24 2019-10-01 Parallels International Gmbh Method and system for controlling local display and remote virtual desktop from a mobile device
US9294785B2 (en) 2013-06-06 2016-03-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
EP3005712A1 (en) 2013-06-06 2016-04-13 ActiveVideo Networks, Inc. Overlay rendering of user interface onto source video
US9219922B2 (en) 2013-06-06 2015-12-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
CN104468494B (zh) * 2013-09-25 2018-06-19 华为终端有限公司 一种切换媒体播放设备的方法及设备
US9368024B2 (en) * 2013-09-27 2016-06-14 Apple Inc. Remote control configuration using a remote control profile
US10621276B2 (en) 2013-10-24 2020-04-14 Wmware, Inc. User interface virtualization for web applications
US9339159B2 (en) 2014-06-13 2016-05-17 Aerus Llc Vacuum brush drive
US9788029B2 (en) 2014-04-25 2017-10-10 Activevideo Networks, Inc. Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks
DE102014216887B3 (de) * 2014-08-26 2015-11-05 Siemens Aktiengesellschaft Verfahren zur Anbindung eines mobilen Bedienterminals an ein zu bedienendes Gerät
US10379823B1 (en) 2017-09-05 2019-08-13 Parallels International Gmbh Conversion of remote application dialogs to native mobile controls
CN107783809A (zh) * 2017-09-29 2018-03-09 烽火通信科技股份有限公司 一种智能设备控制面板远程渲染方法
US20230007335A1 (en) * 2021-06-30 2023-01-05 Rovi Guides, Inc. Systems and methods of presenting video overlays

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6751623B1 (en) 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
US6965947B1 (en) * 2000-10-06 2005-11-15 International Business Machines Corporation Method and apparatus for automated transcoder selection
US20060174026A1 (en) * 2005-01-05 2006-08-03 Aaron Robinson System and method for a remote user interface

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3870983B2 (ja) 1997-02-17 2007-01-24 ソニー株式会社 電子機器制御装置および方法、並びに電子機器
EP0914636A4 (en) 1997-04-07 2008-07-30 At & T Corp SYSTEM AND METHOD FOR PROCESSING AUDIOVISUAL INFORMATION OBJECT-ORIENTED
KR100604729B1 (ko) 1998-07-23 2006-07-28 세드나 페이턴트 서비시즈, 엘엘씨 대화형 사용자 인터페이스를 생성, 분배 및 수신하기 위한시스템 및 방법
ATE359669T1 (de) 1999-10-27 2007-05-15 Sedna Patent Services Llc Vielfache videoströme unter verwendung von slice- basierter kodierung
JP4411730B2 (ja) * 2000-02-29 2010-02-10 ソニー株式会社 ユーザインターフェースシステム、サーバ装置、及び、リモート端末装置
US20030020726A1 (en) * 2001-06-29 2003-01-30 Bitflash Graphics, Inc. Method and system for displaying graphics information
US6944828B2 (en) 2001-12-13 2005-09-13 Appeon Corporation System and method for retrieving and editing the data structure of an HTML UI Control
KR100438724B1 (ko) 2002-06-24 2004-07-05 삼성전자주식회사 원격 사용자 인터페이스를 구동하는 홈 네트워크 시스템및 그 운용 방법
US7734289B2 (en) * 2002-10-25 2010-06-08 At&T Mobility Ii Llc Delivery of network services
US20040267900A1 (en) * 2003-06-26 2004-12-30 Hoekstra Mathew E Dynamic mobile device characterization
GB0400658D0 (en) * 2004-01-13 2004-02-11 Koninkl Philips Electronics Nv Portable device for receiving media content
CN101399941A (zh) * 2004-06-03 2009-04-01 希尔克瑞斯特实验室公司 用于可缩放的用户界面的客户-服务器架构及方法
JP2006236323A (ja) 2005-01-25 2006-09-07 Sony Corp アプリケーション提供システム、サーバ、クライアントおよびアプリケーション提供方法
US20060218650A1 (en) 2005-03-25 2006-09-28 Nokia Corporation System and method for effectuating digital rights management in a home network
US20060232573A1 (en) * 2005-04-19 2006-10-19 Sharp Kabushiki Kaisha Display description format providing device, method of controlling same, communications network system, display control device, method of controlling same, display system, program for controlling display description format providing device, program for controlling display control device and storage mediun storing program
US7519681B2 (en) 2005-06-30 2009-04-14 Intel Corporation Systems, methods, and media for discovering remote user interface applications over a network
JP4427756B2 (ja) 2006-09-05 2010-03-10 ソニー株式会社 電子機器制御装置および方法、並びに電子機器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6751623B1 (en) 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
US6965947B1 (en) * 2000-10-06 2005-11-15 International Business Machines Corporation Method and apparatus for automated transcoder selection
US20060174026A1 (en) * 2005-01-05 2006-08-03 Aaron Robinson System and method for a remote user interface
JP2008527851A (ja) 2005-01-05 2008-07-24 ディブエックス，インコーポレイティド リモートユーザインターフェースシステム及び方法

Also Published As

Publication number Publication date
EP2143297A4 (en) 2012-12-19
WO2008120890A1 (en) 2008-10-09
KR20080089134A (ko) 2008-10-06
US8271675B2 (en) 2012-09-18
JP2010524056A (ja) 2010-07-15
CN101653013A (zh) 2010-02-17
US20080243998A1 (en) 2008-10-02
CN101653013B (zh) 2013-08-21
EP2143297A1 (en) 2010-01-13

Similar Documents

Publication Publication Date Title
KR101446939B1 (ko) 원격 제어 장치 및 그 제어 방법
KR101633100B1 (ko) 정보 처리 시스템, 정보 처리 장치, 정보 처리 방법 및 기록 매체
US10108386B2 (en) Content provisioning for wireless back channel
US20120254929A1 (en) Content Extraction for Television Display
KR101531165B1 (ko) 클라이언트의 특성을 고려한 사용자 인터페이스를 제공, 수신하는 방법 및 장치
AU2009271877B2 (en) Apparatus and method for providing user interface service in a multimedia system
KR101596505B1 (ko) 멀티미디어 시스템의 사용자 인터페이스 장치 및 방법
US9100716B2 (en) Augmenting client-server architectures and methods with personal computers to support media applications
JP2011514053A (ja) 対話型コンテンツ識別のためのビデオに対するトリガの使用
CA2737842C (en) Remote user interface
CN107071541B (zh) 用于外围上下文管理的方法和设备
KR20130038192A (ko) 컨텐츠 출력 시스템 및 그 시스템에서 코덱 정보 공유 방법
US20110302603A1 (en) Content output system, content output method, program, terminal device, and output device
US8332897B1 (en) Remote rendering of webpages on television
US20080240669A1 (en) Mpeg-based user interface device and method of controlling function using the same
CN111935510B (zh) 一种双浏览器应用加载方法及显示设备
US20100073566A1 (en) On-screen display method and a display device using the same
CN115714874A (zh) 视频流分屏显示方法、装置、系统、拉流设备和存储介质
CN111629250A (zh) 一种显示设备及视频播放方法
CN116939263A (zh) 显示设备、媒资播放装置以及媒资播放方法
JP2012141921A (ja) 情報処理装置、情報処理方法、プログラムおよびコンテンツ配信システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170830

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180830

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190813

Year of fee payment: 6