KR20110025120A

KR20110025120A - 제 3의 원격 유저 인터페이스 장치를 통한 원격 유저 인터페이스 장치의 제어 방법 및 장치

Info

Publication number: KR20110025120A
Application number: KR1020100084747A
Authority: KR
Inventors: 박호연; 황승오; 정보선
Original assignee: 삼성전자주식회사
Priority date: 2009-09-01
Filing date: 2010-08-31
Publication date: 2011-03-09
Also published as: CN104410690A; EP2474126A4; CN104410690B; CN102549967B; WO2011028015A9; WO2011028015A3; EP2474126A2; EP2474126B1; US8836482B2; US20120159344A1; KR101669287B1; CN102549967A; WO2011028015A2

Abstract

본 발명은 원격 유저 인터페이스가 표시되는 원격 유저 인터페이스 장치(RUIC)를, 다른 원격 유저 인터페이스 장치(RUCI)에서 제어하는 방법에 관한 것으로, 상기 다른 RUIC에서 사용자 입력에 따른 제어 동작을 나타내는 제어 정보를 포함하는 메시지를 상기 RUIC 로 전송하는 과정과, 상기 RUIC에서 상기 메시지에 포함된 제어 정보가 미리 정의되어 있는 정보인지 정의되지 않은 정보인지를 판단하는 과정과, 상기 판단 결과 미리 정의되어 있는 정보이면, 상기 RUIC 내의 웹 서버가 상기 메시지에 포함된 제어 정보를 상기 RUIC 내의 어플리케이션에게 전달하고, 상기 어플리케이션에서 상기 제어 정보에 따른 제어동작을 수행하는 과정과, 상기 판단 결과 미리 정의되지 않은 정보이면, 상기 RUIC 내의 웹 서버가 상기 RUIC 내의 원격 제어 플러그인을 통해 상기 어플리케이션에게 상기 전송된 제어 정보를 전달하여 상기 제어 정보에 따른 제어동작을 수행하는 과정을 포함한다

Description

제 3의 원격 유저 인터페이스 장치를 통한 원격 유저 인터페이스 장치의 제어 방법 및 장치{METHOD AND APPARATUS FOR CONTROLLING REMOTE USER INTERFACE DEVICE THROUGH THIRD REMOTE USER INTERFACE DEVICE}

본 발명은 원격 UI 디바이스에서 표현되고 있는 원격 UI 화면을 제3의 장치를 이용하여 제어하는 방법 및 장치에 관한 것으로, 특히 기존에 정의된 제어정보는 그대로 유지하면서 정의되어 있지 않은 제어정보를 전송하는 방법 및 장치에 관한 것이다.

DLNA(Digital Living Network Alliance), HAVi(Home Audio-Video Interoperability), UPnP(Universal Plug and Play) 등과 같은 많은 산업 표준 단체들에 의해 홈 네트워크 기술의 향상을 위한 연구가 활발히 진행되고 있다.

홈 네트워크에서 하나의 디바이스가 다른 디바이스의 기능을 제어하기 위해 RUI(Remote User Interface) 기술이 사용될 수 있다. 간단하게 설명하면, RUI 기술은 클라이언트-서버 아키텍쳐(client-server architecture)를 기반으로 한 것으로, RUI 클라이언트가 RUI 서버로부터 UI를 가져와서, 사용자가 RUI 클라이언트에서 UI를 통해 RUI 서버를 제어할 수 있도록 하는 기술이다.

이와 같은 RUI 기술에서 원격 UI 디바이스를 제어할 수 있는 원격지에 있는 제 3 의 RUI 장치가 원격 UI 디바이스 혹은 원격 UI 디바이스 내에서 표현되는 원격 UI 화면을 제어하기 위해서는 제어 정보를 전송하기 위한 프로토콜 및 방법들이 정의되어야 한다.

본 발명이 해결하고자 하는 과제는, 원격 UI 디바이스를 제어할 수 있는 원격지에 있는 제 3의 장치에서 표현되는 제어 UI가 원격 UI 디바이스 혹은 원격 UI 디바이스 내에서 표현되는 원격 UI 화면에 기존에 정의되어 있는 제어 정보와 정의되어 있지 않은 제어 정보를 전송하여 처리할 수 있도록 하는 방법 및 장치를 제공하는 것이다.

본 발명은 원격 유저 인터페이스가 표시되는 원격 유저 인터페이스 장치(RUIC)를, 다른 원격 유저 인터페이스 장치(RUCI)에서 제어하는 방법에 있어서, 상기 다른 RUIC에서 사용자 입력에 따른 제어 동작을 나타내는 제어 정보를 포함하는 메시지를 상기 RUIC 로 전송하는 과정과, 상기 RUIC에서 상기 메시지에 포함된 제어 정보가 미리 정의되어 있는 정보인지 정의되지 않은 정보인지를 판단하는 과정과, 상기 판단 결과 미리 정의되어 있는 정보이면, 상기 RUIC 내의 웹 서버가 상기 메시지에 포함된 제어 정보를 상기 RUIC 내의 어플리케이션에게 전달하고, 상기 어플리케이션에서 상기 제어 정보에 따른 제어동작을 수행하는 과정과, 상기 판단 결과 미리 정의되지 않은 정보이면, 상기 RUIC 내의 웹 서버가 상기 RUIC 내의 원격 제어 플러그인을 통해 상기 어플리케이션에게 상기 전송된 제어 정보를 전달하여 상기 제어 정보에 따른 제어동작을 수행하는 과정을 포함한다.

또한 본 발명의 실시예에 따르면, 원격 유저 인터페이스가 표시되는 원격 유저 인터페이스 장치(RUIC)를, 다른 원격 유저 인터페이스 장치(RUCI)에서 제어하기 위한 원격 유저 인터페이스 장치에 있어서, 상기 다른 RUIC에서 사용자 입력에 따른 제어 동작을 나타내는 제어 정보를 포함하는 메시지를 수신하고, 상기 메시지에 포함된 제어 정보가 미리 정의되어 있는 정보인지 정의되지 않은 정보인지를 판단하며, 상기 판단 결과에 따라 상기 메시지에 포함된 제어 정보를 전송하는 웹 서버, 상기 제어 정보가 미리 정의되어 있는 정보인 경우에, 상기 웹 서버로부터 상기 제어 정보를 수신하고 상기 제어 정보에 따른 제어동작을 수행하는 어플리케이션과, 상기 제어 정보가 미리 정의되지 않은 정보인 경우에, 상기 웹 서버로부터 상기 제어 정보를 수신하고, 상기 제어 정보에 따른 특정 이벤트를 발생시켜서 상기 제어정보를 상기 어플리케이션에게 전송하는 원격 제어 플러그인을 포함한다.

본 발명에 따르면 RUIC 디바이스에서 표현되고 있는 RUI에 연관된 제어 UI가 RUI에게 디바이스 간에 기 정의된 제어 정보를 고려할 필요 없이 임의로 제어 정보를 구성하여 정의되어 있지 않은 제어 정보를 손쉽게 RUI에게 전달할 수 있다. 그렇게 함으로써, 한정된 제어 정보로 확장된 제어 기능을 구현할 필요가 없으며, 사용자에게 더욱 향상된 UX(User Experience)를 제공할 수 있다.

도 1은 일반적인 제3의 RUIC(102)를 통해서 RUIC(100)를 제어하기 위한 아키텍처를 도시한 도면이다.
도 2는 도 1에 도시한 RUIC(100)가 하나의 디바이스로 표현되어 내부에 RUIS(202), RUIC(201)로 구성되고, RUIC(201)는 내부에 원격 제어 플러그인 을 내포한 아키텍처를 도시한 도면이다.
도 3은 도 1에 도시한 RUIC(100)가 OITF(300)로 표현되어 RUIC 기능을 하는 DAE(302) 엔터티와 DLNA RUIS(303) 엔터티로 구성되며, 제 3의 RUIC가 원격 장치로 표현되어 내부에 DLAN RUIC 엔터티로 구성되는 아키텍처를 도시한 도면이다.
도 4는 제 3의 단말 내의 제어 UI 혹은 리모컨을 통해서 RUIC를 컨트롤하는 실시 예를 나타낸 도면이다.
도 5는 본 발명의 실시예에 따라 RUIC에서 표현되는 RUI와 해당 RUI를 컨트롤하기 위한 제 3의 장치에서 표현되는 제어 UI 간의 인터페이스를 도시한 도면이다.
도 6은 본 발명의 실시예에 따른 제 3의 장치와 RUIC 내부의 구조 및 인터페이스를 나타낸 도면이다.
도 7은 본 발명의 실시예에 따른 제어 정보 및 정의되지 않은 제어 정보를 보내기 위한 흐름도를 도시한 도면이다.
도 8은 본 발명의 실시예에 따른 제 3의 장치와 RUIC 간의 이미 정의된 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다.
도 9는 본 발명의 실시예에 따른 제 3의 단말과 RUIC 간의 정의되지 않은 메시지 형태의 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다.
도 10은 본 발명의 실시예에 따른 제 3의 단말과 RUIC 간의 정의되지 않은 RUIC 내에서 실행되는 RUI 내의 함수를 직접 실행시킬 수 있는 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다.
도 11은 본 발명의 실시예에 따른 제 3의 단말과 RUIC 간의 사전에 미리 정의되지 않은 메시지들을 XML, JSON, Plain Text 등과 같은 형태로 전송하는 방법을 나타내는 HTTP 프로토콜을 도시한 도면이다.
도 12는 도 11의 HTTP 프로토콜을 이용할 시, HTTP BODY 안에 들어갈 수 있는 XML 형태의 일 실시 예를 나타낸 도면이다.
도 13은 본 발명의 실시예에 따른 API를 보이고 있는 도면이다.
도 14는 본 발명의 실시예에 따른 제 3의 장치가 OITF 단말에 기존에 키 코드 값으로 정의되어 있거나, 정의되어 있지 않은 명령어 혹은 메시지를 전송하기 위한 인터페이스 및 전송 단계를 나타낸 도면이다.
도 15는 본 발명의 실시예에 따른 정의된 제어 정보 및 정의되지 않은 제어 정보를 보내기 위한 흐름도를 도시한 도면이다.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.

이하 본 발명의 실시 예에서, 원격 UI 클라이언트는 클라이언트-서버 아키텍쳐 시스템에서 클라이언트에 원격 UI(remote user interface: 이하 RUI라 칭함) 및 제어정보(control information)를 전송하는 장치(device)를 의미한다. 원격 UI 클라이언트(Remote User Interface Client: 이하 RUIC라 칭함)는 원격 UI 서버(Remote User Interface Server: 이하 RUIS라 칭함)로부터 RUIC에서 표현되는 UI와 RUIC에서 표현되는 UI를 제어할 수 있는 제어 UI들을 수신하며, 이 제어UI에 의해 RUIC 및/또는 RUIC에서 렌더링되는 원격 UI(RUI)가 제어된다. 제3의 장치는 원격 제어 UI 장치(remote control RUIC device)로서 UI를 통해 RUIC를 제어하며, 이때 UI는 RUIC 또는 RUIS로부터 제공받을 수 있다. 여기서 상기 제3의 장치는 휴대전화기 등의 모바일 기기, 통신 기능을 가지는 소형 표시장치와 같은 휴대장치 등이 될 수 있다. 이하의 설명에서 상기 원격 제어 UI 장치는 제3의 장치 또는 제3의 RUIC로 혼용되어 사용될 것이다.

도 1은 일반적인 제3의 RUIC를 통해서 RUIC를 제어하기 위한 아키텍처를 도시한 도면이다.

상기 도 1을 참조하면, RUIC(100)는 현재 사용되고 있는 프로토콜(Interface 1)(103)을 통해서 RUIS(101)로부터 RUI와 제어 정보를 수신한다. 여기서 말하는 제어 정보는 RUIC에서 표현되는 RUI를 제어할 수 있는 제어 정보뿐만 아니라 UI까지 포함할 수 있다. RUIC(100)에서 수신된 제어 정보는 제어 UI 관리기(105)에 의해서 분리되며, 제어 UI 관리기(105)를 통해서 상기 RUIC(101)를 제어하기 위한 제 3의 RUIC(102)에게 제어 UI가 전달된다. 제어 UI 관리기(105)로 전달된 제어 UI는 제 3의 RUIC(102)에 표현되며 사용자는 제어 UI 관리기(105)로 전달된 제어 UI를 사용하여 RUIC(100)를 제어할 수 있다. 제어 UI 관리기(105)는 논리적인 엔터티로서 RUIC 내부 혹은 외부에 존재할 수 있다.

도 2 및 도 3은 제어 UI 관리기가 RUIC의 내부 및 외부에 존재하는 경우를 나타낸 것이다.

도 2를 보면, 도 1에 도시한 RUIC(100)가 하나의 디바이스(200)로 표현되어 RUIS(202)와 RUIC(201)로 구성되고, RUIC(201)는 내부에 원격 제어 플러그인(Remote Control Plug-in, 203)을 내포한다.

도 3을 보면, 도 1에 도시한 RUIC(100)가 OITF(Open IPTV Terminal Function, 300)로 표현되어 RUIC 기능을 하는 DAE(Declarative Application Environment, 302) 엔터티와 DLNA(Digital Living Network Alliance) RUIS 엔터티(303)로 구성되며, 제 3의 RUIC(102)가 원격 장치(Remote Device, 305)로 표현되어 내부에 DLAN RUIC 엔터티(304)를 포함한다.

도 2 및 도 3에서 살펴본 바와 같이, 제어 UI 관리기는 DLNA RUIS(303)나 CEA(Consumer Electronics Association)-2014의 RUIS(202) 그리고 OITF(300) 내에 존재하는 Mobile / Portable Device와의 통신을 위한 임베디드 서버 기능 엔터티(Embedded Server Functional Entity) 등이 될 수 있으며, 덧붙여 RUIC(203) 내의 원격 제어 플러그인(Remote Control Plug-in, 203) 의 역할까지 할 수 있다. 또한 도 1의 RUIC(100)와 제 3의 RUIC(102) 사이에 있는 인터페이스(interface 2, 104)를 통해 UPnP 혹은 HTTP(Hypertext Transfer Protocol)을 이용하여 제 3의 RUIC(102)에서 표현되고 있는 제어 UI로부터 RUIC 장치 혹은 RUIC에 표현되고 있는 RUI를 제어할 수 있다.

도 4는 일반적인 제 3의 장치 내의 제어 UI 혹은 리모컨을 통해서 RUIC를 제어하는 실시 예를 나타낸 도면이다.

RUIC(401)는 RUIS(400)로부터 RUI(403)와 제어 UI(404)를 받으면 RUI(403)는 자신의 화면에 표현하고, 제어 UI(404)는 제 3의 RUIC(402)에게 전송한다. 제 3의 RUIC(402)는 전송 받은 제어 UI(404)를 자신의 화면에 표현하고, 사용자는 제 3의 RUIC(402)의 화면에 표현된 제어 UI(404)를 통해서 RUIC(401) 혹은 RUIC(401)에서 표현되고 있는 RUI(403)를 제어한다. 또한, 사용자는 전통적 방식의 리모컨(405)을 이용하여 이미 정의된 제어 정보를 RUIC(401)에게 전송한다.

이러한 방식에서 제 3의 RUIC(402) 혹은 리모컨(405)은 일반적으로 RUIC(401)에게 제어 정보를 전송할 때, 두 디바이스(402와 401 혹은 405와 401) 간에 미리 정의된 제어 정보를 보낸다. 예를 들어, RUIC(401)에서 표현되고 있는 RUI(403)에 대해서 STOP 명령어를 내릴 경우, 제 3의 RUIC 디바이스(402)로부터 RUIC(401)에게 STOP이라는 단일 명령어가 전송된다. 그러나 이러한 방식에서는, 현재 RUIC(401)에서 표현되고 있는 RUI(403)를 STOP 시키고, 해당 RUI(403)와 연관성이 높은 드라마 리스트를 화면에 표현하면서, 포커스는 해당 리스트 중에 사용자가 가장 원할 것 같은 아이템으로 이동시키고, 동시에 제 3의 RUIC(402) 내의 제어 UI(404)에 해당 아이템에 대한 정보를 전달시켜줄 수 있는 등의 복합적인 기능을 수행하는 것이 불가능하다.

또한, 개인화 채널이라는 새로운 기능이 추가되어 개인화 채널로 화면을 변경시키라는 단편적인 제어 정보를 전송하고자 하는 경우에도, 해당 기능에 대한 키가 미리 정의되어 있지 않아서 이미 정의된 버튼에 매핑을 해서 사용하거나, 네비게이션 키를 사용해서 RUIC(401) 화면에 표현된 개인화 채널이라는 버튼으로 이동해서 해당 기능을 선택해야 한다. 특히 이미 정의된 버튼에 매핑을 해서 사용하는 경우에는 RUIC(401)와 제 3의 RUIC(402) 간에 이러한 매핑 정보가 이미 약속이 되어 있어야 하는데, 이럴 경우 타 RUIC 혹은 타 제 3의 RUIC와 연동될 경우 호환이 되지 않을 수 있다. 또한 네비게이션 키를 사용할 경우에는 사용자는 개인화 채널 기능을 선택하기까지 굉장히 많은 버튼을 선택해야 한다. 그러므로 본 발명에서는 타 RUIC에 정의되어 있지 않은 제어 정보를 전송하고 해당 제어 정보를 타 RUIC 혹은 RUIC 내에서 표현되는 RUI에 전달하여 해당 제어 정보가 실제적으로 제어 타겟을 제어할 수 있도록 하는 방법 및 장치를 제공한다.

도 5는 본 발명의 실시예에 따라 RUIC에서 표현되는 RUI와 해당 RUI를 제어하기 위한 제 3의 장치에서 표현되는 제어 UI 간의 인터페이스를 도시한 도면이다.

도 5를 참조하면, RUIS(501)에서 전달된 RUI가 RUIC(500)에 전송되면, 브라우저 1(505)에 해당 RUI가 표현되고, RUIC(500)는 브라우저 1(505)에 표현된 RUI를 제어할 수 있는 제어 UI를 RUIS(501)로부터 전송받아서 임베디드 서버(Embedded Server, 506)를 통해서 제 3의 장치(502)에게 전송하고, 제 3의 장치(502)는 해당 제어 UI를 브라우저 2(507)에 사용자가 사용할 수 있도록 표현한다.

도 5에서 굵은 선으로 표시한 부분이 제어 UI 및 브라우저 1(505)에서 표현되는 RUI를 포함하는 제어 정보가 전달되는 경로를 나타낸다. 브라우저 2(507)에서 임베디드 서버(506)까지의 인터페이스 2(504) 사이에는 사전에 정의되어 있거나, 정의되어 있지 않은 모든 제어 정보에 대한 프로토콜 정보가 정의된다. 그리고 임베디드 서버(506)와 브라우저 1(505) 사이의 인터페이스 3(509)은 제 3의 장치(502)에서 전송된 제어 정보가 기존의 제어 정보와 같을 경우에 기존 제어 정보를 전송하는 인터페이스를 나타내며, 임베디드 서버(506)와 원격 제어 플러그인(508) 사이의 인터페이스 4(510)는 정의되어 있지 않은 제어 정보를 전송하기 위한 인터페이스를 나타낸다.

도 6은 본 발명의 실시예에 따른 제 3의 장치와 RUIC(500)의 구조 및 인터페이스를 나타낸 도면이다.

도 6을 참조하면, 인터페이스 2, 3, 4는 도 5와 동일하고, 인터페이스 5는 원격 제어 플러그인(508)으로 전달된 제어 정보를 브라우저 1(505)에서 동작하고 있는 RUI에게 전달할 수 있는 인터페이스를 나타낸다.

도 7은 본 발명의 실시예에 따라 정의된 제어 정보 및 정의되지 않은 제어 정보를 보내기 위한 흐름도를 도시한 도면이다.

710 단계에서 사용자가 제 3의 장치(700)를 통해서 제어를 실행하면, 711 단계에서 해당 제어 정보들은 HTTP 메시지 형태로 RUIC(702) 내의 임베디드 웹 서버(701)로 전송된다. 임베디드 웹 서버(901)는 제 3의 장치(700)로부터 전송된 HTTP 메시지를 처리할 수 있는 어플리케이션인 Control Handler Application(도시하지 않음)을 포함한다. 제어정보들은 제 3의 장치(700) 내에서 표현되는 제어 UI 내의 HTML 메시지 중, form 태그 혹은 a 태그 내에 존재하는 URI 형태로 표현된다. 이러한 URI 형태는 도 8 내지 도 10과 같이 표현될 수 있다.

전송된 제어 정보들은 712 단계에서 임베디드 웹 서버(701) 내의 컨트롤 핸들러 어플리케이션을 통해 해당 제어 정보가 정의되어 있는 제어 정보인지 여부를 판단한다. 즉, 임베디드 웹 서버(701)는 제 3의 장치(700)로부터 HTTP Request 메시지를 받으면, 사전에 정의된 파라미터의 키 값(예를 들어, keychar 등)이 HTTP 메시지 안에 포함되어 있는지를 확인하고, 포함되어 있으면 임베디드 웹 서버(701) 내의 컨트롤 핸들러 어플리케이션은 해당 파라미터의 키 값에 대응되는 Value 값을 추출하여, 713 단계에서 기존에 정의된 이벤트를 발생시켜, 이벤트의 파라미터 안에 상기 추출한 Value 값을 넣어서 어플리케이션(703)으로 전달한다. 이벤트와 함께 파라미터로 전달된 Value 값은 어플리케이션(703)에서 자바스크립트(javascript) 함수를 통해 해당 키에 해당되는 동작이 처리된다.

반면, 미리 정의한 파라미터 키 값 이외의 다른 모든 파라미터 키 값이 임베디드 웹 서버(701)로 전달되면, 임베디드 웹 서버(701) 내의 컨트롤 핸들러 어플리케이션은 해당 파라미터 키 값에 대응되는 Value 값을 추출하고, 714단계에서 상기 추출한 Value 값을 포함하는 제어정보를 원격 제어 플러그인(702)으로 전송한다. 임베디드 웹 서버(701)에서 원격 제어 플러그인(702)으로 Value 값이 전달될 수 있는 방법은 여러 가지 방법이 있을 수 있으며, 일례로 내부 소켓 통신 등과 같은 방법을 통해 전달될 수 있다.

추출된 Value 값을 수신한 원격 제어 플러그인(702)은 715단계에서 onReceivingMsg와 같은 DOM(Document Object Model) 이벤트 형태를 통해서 현재 원격 제어 플러그인(702)과 연결되어 있는 어플리케이션(703) 에게 상기 추출된 Value 값을 전달한다.

한편, 제 3의 장치(700)로부터 임베디드 웹 서버(701) 내로 전달된 HTTP Request 메시지가 POST 방식으로, HTTP Request 바디(Body) 안에 XML(eXtensible MarkUp Language), JSON(Java Script Object Notation) 등과 같은 형태의 내용을 포함하여 전달되면, 임베디드 웹 서버(701) 내의 컨트롤 핸들러 어플리케이션은 714 단계에서 상기 전달된 HTTP Request Body를 그대로 추출하여 원격 제어 플러그인(702)에게 전달하고, 원격 제어 플러그인(702)은 715 단계에서 onReceivingMsg 이벤트를 발생시켜서 해당 이벤트의 파라미터 안에 HTTP Request Body 내용을 넣어서, 어플리케이션(703)에게 전달한다. 어플리케이션(703)은 해당 이벤트 내의 파라미터를 처리하는 함수를 통해, 제 3의 장치(700)로부터 전달된 제어 정보를 처리할 수 있다.

HTTP Request의 Body 내용을 처리하는 또 다른 방법으로, 임베디드 웹 서버(701) 내의 컨트롤 핸들러 어플리케이션은, 제3의 장치(700)로부터 전달된 HTTP Request의 Body에 RUIC(704) 자체를 컨트롤하는 내용(예를 들어, 키워드 기준으로 추출) 이 담겨 있으면, 해당 내용을 추출하여 RUIC(704)를 제어하고, 어플리케이션으로 전달해야 하는 내용이 담겨 있으면, 해당 부분만을 추출하여 위에서 언급한 방식대로 어플리케이션(703)에 제어 정보를 전달한다.

정리하면, 제 3의 장치(700)로부터 전송된 제어 정보가 미리 정의된 제어 정보이면 713 단계에서 임베디드 웹 서버(701)에서 RUIC 내의 브라우저로 직접 제어 정보가 전송되며, 상기 전송된 제어 정보는RUIC 내의 브라우저에서 실행되는 어플리케이션(703)으로 이벤트 방식으로 전송된다. 이벤트는 이미 정의된 onKeyDown, onKeyPress, onKeyUp 이벤트 등을 의미한다. 그러나 제어 정보가 미리 정의된 제어 정보가 아니면, 먼저 714 단계에서 임베디드 웹 서버(701)로부터 원격 제어 플러그인(702)으로 제어 정보가 전송되며, 원격 제어 플러그인(702)은 RUIC 내의 브라우저에게 어플리케이션(703)으로 이벤트를 발생시켜 정의되지 않은 제어 정보를 전달하도록 명령을 내린다. 예를 들어 이벤트는 onReceivingMsg 이름으로, 파라미터로는 연결된 제 3의 장치에 대한 Device Handle값과 제어 정보가 전달될 수 있다. 제어 정보는 HTTP 메시지의 헤더 그리고/혹은 Body 정보를 상기 이벤트 파라미터를 통해 전달할 수 있다.

도 8은 본 발명의 실시예에 따른 제 3의 장치(800)와 RUIC(801) 간의 이미 정의된 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다.

도 8에 도시한 바와 같이, 제 3의 장치(800)를 통해 사용자가 동영상 플레이(PLAY) 버튼을 누르면, 두 단말(800와 801)간에 이미 정의된 PLAY 정보는 HTTP 메시지(802)를 통해서 제 3의 장치(800)에서 RUIC(801)로 전달될 수 있다. 도 8에서는, RUIC(801)에서 이미 정의된 PLAY 정보가 전송되었다는 것을 알기 위해, 키(key) 값으로 keychar를 사용하였고, keychar에 대응되는 내용(예를 들어, VK_PLAY)을 매칭시켜 RUIC(801)에게 전송하였다. RUIC(801)는 제어 정보를 받으면, 원격 UI에게 제어 정보를 이벤트 방식으로 전달한다. 이때, 기존에 정의된 onKeyDown, onKeyUp, onKeyPress 이벤트를 사용할 수도 있다. 추가적으로 제 3의 장치(800)에서 RUIC(801)에게 HTTP 메시지를 보낼 때, URL 파라미터 혹은 HTTP 메시지의 Body 내에 삽입하는 형태를 사용하여 기존에 정의된 이벤트 중에 특정 이벤트를 사용하여 어플리케이션(703)에게 제어 정보를 전달하라고 지정할 수도 있다.

도 9는 본 발명의 실시예에 따른 제 3의 단말과 RUIC 간의 정의되지 않은 메시지 형태(예를 들어, 일련의 문자, 숫자 등)의 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다.

일반적으로, 이미 정의된 문자 혹은 숫자와 같은 정보들은 한번에 하나씩 밖에 전송할 수가 없다. 그러나 도 9와 같이 제 3의 장치(800)에서 RUIC(801)로 전송할 때, HTTP 메시지(900)를 이용하면 한번에 여러 개의 문자 혹은 숫자를 전달할 수 있다. 사용자는 제 3의 장치(800) 내에 표현된 제어 UI를 통해서 전달하길 원하는 메시지를 한꺼번에 적은 뒤 전송 버튼을 누르면, HTTP 메시지(900)를 통해서 한번에 전송할 수 있다. 이 때, key 값은 msg가 될 수 있으며, key 값에 대응되는 값은 사용자가 전송하길 원하는 메시지 정보가 들어갈 것이다.

도 10은 본 발명의 실시예에 따른 제 3의 장치와 RUIC 간의 정의되지 않은, RUIC 내에서 실행되는 함수를 직접 실행시킬 수 있는 제어 정보를 HTTP 프로토콜을 통해 전달하는 모습을 나타낸 도면이다. 사용자는 제 3의 장치(800)를 통해서 RUIC(801)로 HTTP 메시지(1000)를 전송한다. 이 때, 사용자가 제 3의 장치(800) 내의 제어 UI의 특정 버튼을 클릭하면, RUIC(801) 내에서 실행되는 RUI 내에 존재하는 함수가 호출된다. HTTP 메시지로 전송될 때, key 값은 function이 될 수 있으며, 해당 key 값에 대응되는 value 값은 영화와 채팅을 동시에 실행시킬 수 있는 startMovieAndExecuteChatting가 될 수 있다.

도 11은 본 발명의 실시예에 따른 제 3의 단말과 RUIC 간의 사전에 미리 정의되지 않은 메시지들을 XML, JSON, Plain Text 등과 같은 형태로 전송하는 방법을 나타내는 HTTP 프로토콜을 도시한 도면이다.

도 11의 방법을 통하면, 도 9 및 도 10의 방법을 각각 URL로 나누어서 전송할 필요 없이, HTTP 메시지에 대한 폼 액션(form action, 1100)을 정의하여, HTTP 바디(BODY) 안에 원하는 메시지를 XML, JSON, Plain Text(1101) 등과 같이 넣어서 RUIC(901)에게 전송하면 된다. 일례로, 도 12와 같이 도 10에서 설명한 함수를 XML 형태로 표시하여 HTTP BODY 안에 넣어서 RUIC(801)에게 전송할 수 있다.

도 13은 본 발명의 실시예에 따른 API(Application Programming Interface)를 나타낸 것이다.

제 3의 장치로부터 정의되어 있지 않은 명령어(예를 들어, XML, JSON, URI 혹은 Plain Text)가 OITF 단말로 전송되면, OITF 단말 내의 원격 제어 플러그인은 DAE 엔터티에게 해당 명령어를 이벤트 형식으로 전송한다. onReceivingMsg 이벤트 함수의 첫 번째 파라미터는 명령어를 전송한 제 3의 장치에 대한 Device Handle 값으로서, 해당 파라미터 값을 통해서 명령어를 전송한 제 3의 장치에 대한 리턴 값 혹은 추가적인 메시지를 전송할 수 있다. 두 번째 파라미터는 제 3의 장치로부터 DAE 엔터티로 전송되는 메시지 값이다.

도 14는 본 발명의 실시예에 따른 제 3의 장치가 RUIC인 OITF 단말에게 기존에 키 코드 값으로 정의되어 있거나, 정의되어 있지 않은 명령어 혹은 메시지를 전송하기 위한 인터페이스 및 전송 단계를 나타낸 것이다.

도 14에 도시한 바와 같이 전송 단계는 크게 3가지 단계로 이루어진다. 첫 번째 단계에서는 제 3의 장치에서 실행되고 있는 제어 UI에 의해 HTTP 메시지가 OITF 단말로 전송된다. 이때 HTTP 메시지가 전송되는 방식은 기존에 정의되어 있는 키 코드 값을 보내는 경우와 정의되어 있지 않은 명령어 혹은 메시지를 보내는 경우로 나뉠 수 있다.

기존에 정의되어 있는 키 코드 값을 보내는 경우, Step 1-1의 HTTP Request Header에 정의된 것처럼 URI(/rcf/send_keycode)와 파라미터 키 값을 미리 정의하여 GET 혹은 POST 방식으로 OITF 단말에게 전송한다. 또한 미리 정의되어 있지 않은 명령어 혹은 메시지를 보낼 경우에도 Step 1-2에 나와 있는 것처럼 미리 정의된 URI(/rcf/send_message)를 통해 POST 방식으로 HTTP Body 안에 명령어 혹은 메시지를 삽입하여 전송할 수 있다. 이러한 방식으로 두 가지 경우에 대해서 URI를 각각 나누어서 프로토콜을 정의할 수도 있고, 두 가지 URI를 하나의 URI로 통합하여, 명령어가 정의되어 있는지 정의되어 있지 않은 지 여부를 나타내는 파라미터 값을 추가로 사용할 수도 있다.

두 번째 단계에서는 제어 UI가 첫 번째 단계에서 HTTP 메시지를 전송한 뒤, 응답을 받을 때까지 대기한다.

세 번째 단계에서는 명령어 전송이 성공될 경우, OITF 단말이 200 OK HTTP 메시지를 제 3의 장치에게 전송한다. 해당 HTTP 메시지 Body에는 OITF 단말이 제 3의 장치에게 보내는 적절한 메시지가 삽입되어 있거나, 비어 있을 수 있다.

도 15는 본 발명의 실시예에 따른 정의된 제어 정보 및 정의되지 않은 제어 정보를 보내기 위한 흐름도를 도시한 도면이다.

도 15에 도시한 바와 같이, 1510 단계 및 1511 단계에서 사용자가 DLNA Device(+RUIPL+)(1500)에서 실행되는 제어 UI를 통해 OITF 단말(1504) 내의 DLNA Functions(+RUISRC+)(1501)로 제어 명령어를 전송하면, DLNA Functions(1501)는 1512 단계에서 명령어 타입을 체크하여, 미리 정의된 key code 값이면 1513 단계에서 DAE 브라우저에 이벤트(onKeyDown, onKeyPress, onKeyUp 등)를 통해서 key code 값을 DAE Application으로 전달하라고 명령한다. 만약, 미리 정의된 key code 값이 아니라면, DLNA Functions(1501)는 1514 단계에서 해당 명령어 혹은 메시지는 원격 제어 플러그인(1502)으로 전달되고, 원격 제어 플러그인(1502)은 1515 단계에서 상기 원격 제어 플러그인을 포함하고 있는 DAE Application(1503)에게 onReceivingMsg 이벤트 함수를 발생시켜서 명령어 혹은 메시지를 전송하여 1517 단계에서 명령어를 처리하도록 한다.

이상과 같이 예시된 도면을 참조로 하여, 본 발명의 실시 예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며, 한정적이 아닌 것으로 이해해야만 한다.

Claims

원격 유저 인터페이스가 표시되는 원격 유저 인터페이스 장치(RUIC)를, 다른 원격 유저 인터페이스 장치(RUCI)에서 제어하는 방법에 있어서,
상기 다른 RUIC에서 사용자 입력에 따른 제어 동작을 나타내는 제어 정보를 포함하는 메시지를 상기 RUIC 로 전송하는 과정과,
상기 RUIC에서 상기 메시지에 포함된 제어 정보가 미리 정의되어 있는 정보인지 정의되지 않은 정보인지를 판단하는 과정과,
상기 판단 결과 미리 정의되어 있는 정보이면, 상기 RUIC 내의 웹 서버가 상기 메시지에 포함된 제어 정보를 상기 RUIC 내의 어플리케이션에게 전달하고, 상기 어플리케이션에서 상기 제어 정보에 따른 제어동작을 수행하는 과정과,
상기 판단 결과 미리 정의되지 않은 정보이면, 상기 RUIC 내의 웹 서버가 상기 RUIC 내의 원격 제어 플러그인을 통해 상기 어플리케이션에게 상기 전송된 제어 정보를 전달하여 상기 제어 정보에 따른 제어동작을 수행하는 과정을 포함하는 제어 방법.
제1항에 있어서,
상기 제어동작을 수행하는 과정은,
상기 판단 결과 미리 정의되어 있는 정보이면, 상기 웹 서버가 상기 제어 정보에 해당하는 파라미터 키의 값(value)을 추출하고, 미리 정의된 이벤트를 발생시켜서 상기 추출된 값을 포함하여 상기 어플리케이션으로 전달하는 것을 특징으로 하는 제어 방법.
제1항에 있어서,
상기 제어동작을 수행하는 과정은,
상기 판단 결과 미리 정의되어 있지 않은 정보이면, 상기 웹 서버가 상기 제어 정보에 해당하는 파라미터 키의 값을 추출하고, 상기 추출된 값을 상기 원격 제어 플러그인으로 전달하며, 상기 원격 제어 플러그인이 특정 이벤트를 발생시켜서 상기 추출된 값을 포함하여 상기 어플리케이션으로 전달하는 것을 특징으로 하는 제어 방법.
제1항에 있어서,
상기 메시지가 HTTP request 메시지인 경우, 상기 메시지의 바디 안에 상기 제어 정보에 해당되는 텍스트가 포함되어 있으면, 상기 웹 서버가 상기 메시지의 바디를 추출하여 상기 원격 제어 플러그인에게 전달하고, 상기 원격 제어 플러그인이 특정 이벤트를 발생시켜서 상기 바디의 내용을 포함하여 상기 어플리케이션으로 전달하고, 상기 어플리케이션이 상기 제어 정보에 따른 제어동작을 수행하는 과정을 더 포함하는 제어 방법.
제4항에 있어서,
상기 HTTP request 메시지는 상기 제어정보가 미리 정의되어 있는 정보인지 여부를 나타내는 파라미터를 더 포함하는 것을 특징으로 하는 제어 방법.
제4항에 있어서,상기 어플리케이션은 상기 이벤트 내의 파라미터를 처리하는 함수를 통해 상기 제어 정보에 따른 제어 동작을 수행함을 특징으로 하는 제어 방법.
제1항에 있어서,
상기 미리 정의되어 있는 정보는 키 코드임을 특징으로 하는 제어 방법.
제1항에 있어서,
상기 미리 정의되어 있지 않은 정보는 텍스트임을 특징으로 하는 제어 방법.
원격 유저 인터페이스가 표시되는 원격 유저 인터페이스 장치(RUIC)를, 다른 원격 유저 인터페이스 장치(RUCI)에서 제어하기 위한 원격 유저 인터페이스 장치에 있어서,
상기 다른 RUIC에서 사용자 입력에 따른 제어 동작을 나타내는 제어 정보를 포함하는 메시지를 수신하고, 상기 메시지에 포함된 제어 정보가 미리 정의되어 있는 정보인지 정의되지 않은 정보인지를 판단하며, 상기 판단 결과에 따라 상기 메시지에 포함된 제어 정보를 전송하는 웹 서버,
상기 제어 정보가 미리 정의되어 있는 정보인 경우에, 상기 웹 서버로부터 상기 제어 정보를 수신하고 상기 제어 정보에 따른 제어동작을 수행하는 어플리케이션과,
상기 제어 정보가 미리 정의되지 않은 정보인 경우에, 상기 웹 서버로부터 상기 제어 정보를 수신하고, 상기 제어 정보에 따른 특정 이벤트를 발생시켜서 상기 제어정보를 상기 어플리케이션에게 전송하는 원격 제어 플러그인을 포함하는 원격 유저 인터페이스 장치.
제9항에 있어서,
상기 웹 서버는,
상기 판단 결과 미리 정의되어 있는 정보이면, 상기 제어 정보에 해당하는 파라미터 키의 값(value)을 추출하고, 미리 정의된 이벤트를 발생시켜서 상기 추출된 값을 포함하여 상기 어플리케이션으로 전달하는 것을 특징으로 하는 원격 유저 인터페이스 장치.
제9항에 있어서,
상기 웹 서버는,
상기 판단 결과 미리 정의되어 있지 않은 정보이면, 상기 제어 정보에 해당하는 파라미터 키의 값을 추출하고, 상기 추출된 값을 상기 원격 제어 플러그인으로 전달하는 것을 특징으로 하는 원격 유저 인터페이스 장치.
제9에 있어서,
상기 웹 서버는,
상기 메시지가 HTTP request 메시지인 경우, 상기 메시지의 바디 안에 상기 제어 정보에 해당되는 텍스트가 포함되어 있으면, 상기 메시지의 바디를 추출하여 상기 원격 제어 플러그인에게 전달하는 것을 특징으로 하는 원격 유저 인터페이스 장치.
제12항에 있어서,
상기 HTTP request 메시지는 상기 제어정보가 미리 정의되어 있는 정보인지 여부를 나타내는 파라미터를 더 포함하는 것을 특징으로 하는 원격 유저 인터페이스 장치.
제12항에 있어서,
상기 어플리케이션은 상기 이벤트 내의 파라미터를 처리하는 함수를 통해 상기 제어 정보에 따른 제어 동작을 수행함을 특징으로 하는 원격 유저 인터페이스 장치.
제9항에 있어서,
상기 미리 정의되어 있는 정보는 키 코드임을 특징으로 하는 원격 유저 인터페이스 장치.
제9항에 있어서,
상기 미리 정의되어 있지 않은 정보는 텍스트임을 특징으로 하는 원격 유저 인터페이스 장치.