KR101596505B1

KR101596505B1 - 멀티미디어 시스템의 사용자 인터페이스 장치 및 방법

Info

Publication number: KR101596505B1
Application number: KR1020090055105A
Authority: KR
Inventors: 박경모; 송재연; 이국희; 황서영
Original assignee: 삼성전자주식회사
Priority date: 2009-06-19
Filing date: 2009-06-19
Publication date: 2016-02-23
Also published as: EP2443559A4; JP2012529696A; CN102460410B; WO2010147433A2; US8892633B2; US20100325203A1; JP5850833B2; CN102460410A; KR20100136801A; AU2010260683B2; AU2010260683A1; WO2010147433A3; EP2443559A2

Abstract

본 발명은 사용자 인터페이스를 제공 및 수신하는 방법 및 장치에 관한 것으로, 본 발명에 따르면 서버와 클라이언트가 각자의 특성 정보를 교환하고 서버가 클라이언트의 특성을 고려해서 멀티미디어 데이터의 포맷으로 부호화된 사용자 인터페이스를 클라이언트에 제공함으로써, 단순한 동작을 수행하는 클라이언트가 서버를 제어하기 위해 적합한 사용자 인터페이스를 제공할 수 있으므로 하나의 서버와 다양한 클라이언트 디바이스들 사이의 사용자 인터페이스 세션이 가능하다.

사용자 인터페이스, Widget, UI, 프로파일, 특성, capability exchange, capability matching, adaptation

Description

멀티미디어 시스템의 사용자 인터페이스 장치 및 방법{APPARATUS AND METHOD OF AN USER INTERFACE IN A MULTIMEDIA SYSTEM}

본 발명은 각종 멀티미디어 장치를 조작하기 위한 사용자 인터페이스 장치 및 방법에 대한 것으로서, 특히 다양한 형태로 구성이 가능한 사용자 인터페이스 장치 및 방법에 대한 것이다.

최근 네트워크 기술과 멀티미디어 기술의 급속한 진화에 따라 다양한 종류의 멀티미디어 디바이스들이 개발되고, 이러한 멀티미디어 디바이스들 사이의 병합화(convergence)가 가속화되고 있다. 예를 들어 디지털 TV, 홈 씨어터, 컴퓨터 장치, 비디오/오디오 장치 등의 각종 멀티미디어 장치들과 같이 서로 다른 종류의 멀티미디어 디바이스들이 네트워크를 구성하여 멀티미디어 데이터를 송수신하거나, 병합된 멀티미디어 서비스의 제공을 위해 멀티미디어 장치들간에 상호 동작을 제어하는 일이 빈번해지고 있다.

종래 물리적으로 서로 떨어진 사이의 원격 제어는 원격 사용자 인터페이스(Remote User Interface, 이하 RUI)를 통해 수행된다. 즉, UI 서버가 제어를 위한 UI를 UI 클라이언트에게 제공하고, UI 클라이언트는 제공 받은 UI 데이터를 통 해 UI 서버를 제어하게 된다. 예를 들자면, 윈도우 환경의 PC에서의 원격 접속 또는 제어가 유사한 서비스라 할 수 있다.

본 발명이 해결하고자 하는 과제는 멀티미디어 장치의 제어를 위해 UI 서버가 UI 클라이언트에게 제공하는 RUI 데이터를 가공할 수 있는 UI 장치 및 방법을 제공하는 것이다.

또한 본 발명이 해결하고자 하는 과제는 멀티미디어 장치의 제어를 위해 UI 클라이언트에게 제공하는 UI 데이터를 UI 환경 및 특성에 따라 새로이 구성하는 UI 장치 및 방법을 제공하는 것이다.

본 발명의 실시예에 따르면, 클라이언트가 서버로부터 사용자 인터페이스를 수신하는 방법에 있어서, 상기 클라이언트의 환경 및 특성에 대한 정보를 상기 서버에 전송하는 단계; 및 상기 전송된 환경 및 특성에 대한 정보에 기초하여 생성된 사용자 인터페이스를 상기 서버로부터 수신하는 단계를 포함한다.

또한 본 발명의 실시예에 따르면, 서버가 클라이언트에 사용자 인터페이스를 제공하는 방법에 있어서, 상기 클라이언트로부터 상기 클라이언트의 환경 및 특성에 대한 정보를 수신하는 단계; 상기 수신된 환경 및 특성에 대한 정보에 기초하여 사용자 인터페이스를 적응적으로 가공 및 생성하는 단계; 및 상기 생성된 사용자 인터페이스를 상기 클라이언트에 제공하는 단계를 포함한다.

또한 본 발명의 실시예에 따르면, 클라이언트에 사용자 인터페이스를 제공하는 서버의 사용자 인터페이스 제공 장치에 있어서, 상기 클라이언트의 환경 및 특 성에 대한 정보를 상기 클라이언트로부터 수신하는 환경 및 특성 정보 수신부; 상기 수신된 환경 및 특성에 대한 정보에 기초하여 상기 클라이언트에게 적합한 사용자 인터페이스의 가공 수준을 결정하고, 상기 결정된 가공 수준에 따라 사용자 인터페이스를 가공 및 생성하는 사용자 인터페이스 생성부; 및 상기 생성된 사용자 인터페이스를 제공하는 사용자 인터페이스 제공부를 포함한다.

또한 본 발명의 실시예에 따르면, 서버로부터 사용자 인터페이스를 수신하는 클라이언트의 사용자 인터페이스 수신 장치에 있어서, 상기 클라이언트의 환경 및 특성에 대한 정보를 상기 서버에 전송하는 환경 및 특성 정보 전송부; 및 상기 전송된 환경 및 특성에 대한 정보에 기초하여 생성된 사용자 인터페이스를 상기 서버로부터 수신하는 사용자 인터페이스 수신부를 포함한다.

본 발명에 의하면, UI 클라이언트가 UI 서버로부터 자신의 장치의 특성을 고려한 UI 데이터를 수신하고, 수신된 UI 데이터를 이용하여 RUI 서버를 제어할 수 있는 방법 및 그 장치를 제공할 수 있다.

또한 본 발명은 UI 클라이언트가 자신의 환경 및 특성을 고려하여 장치에 적합화된 UI를 수신함으로써 사용자의 사용 만족도를 높일 수 있다.

또한 본 발명은 UI 클라이언트가 UI 서버를 제어하기 위한 적합한 사용자 인터페이스를 수신할 수 있으므로 하나의 RUI 서버와 다양한 UI 클라이언트 장치들 사이의 사용자 인터페이스 세션이 가능하다.

이하, 본 발명에 따른 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 또한, 하기 설명에서는 구체적인 특정 사항들이 나타나고 있는데, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들 없이도 본 발명이 실시될 수 있음은 이 기술 분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다. 그리고 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 상세한 설명을 생략한다.

먼저 본 발명은 각종 멀티미디어 장치의 제어를 위한 UI 클라이언트에서 사용되는 UI 데이터를 IP 망과 접속된 외부 네트워크의 UI 서버 또는 멀티미디어 장치 또는 멀티미디어 장치가 접속된 홈 네트워크의 홈 서버로부터 제공받아 UI 환경에 적합하도록 새로이 구성할 수 있는 UI 장치 및 방법을 제안한 것이다. 상기 UI 클라이언트는 상기 UI 서버 또는 상기 멀티미디어 장치 또는 상기 홈 서버로부터 제공되는 상기 UI 데이터를 취사 선택할 수 있도록 본 발명의 UI 장치를 제어하며, UI 데이터의 검색 및 복수의 UI 데이터의 병합을 통한 새로운 UI 데이터의 생성과 관련된 각종 제어를 수행한다. 또한 상기 UI 클라이언트는 멀티미디어 장치의 동작 제어를 위한 키 패드가 구비된 리모콘, 터치 스크린 또는 키패드 등의 입력 수단이 구비되며 외부 장치와 통신이 가능한 각종 단말기 등에 프로그램 또는 칩 형태로 탑재될 수 있다. 또한 본 명세서에서 상기 UI 클라이언트는 넓은 의미로 상기 UI 장치와 등가의 의미로 이해될 수 있다.

이하 본 발명에서 사용되는 용어들을 아래와 같이 정의한 후, 본 발명의 실 시 예들을 설명하기로 한다.

본 발명에서의 UI는 사용자에게 멀티미디어 장치의 제어를 위한 정보를 전달하도록 사용되는 시각 및/또는 청각 요소들의 세트를 의미하며, 또한, 사용자 인터페이스를 통하여 장치 제어 및 기능을 제공하는 요소들의 세트를 포함한다. UI 데이터는 상기 UI를 구성하는 데이터를 의미한다. 상기 UI로는 애니메이션, 벡터 그래픽 그리고 다중 시각/청각/촉각 요소 및 이를 통해 사용자에게 표현될 수 있는 기능/ 동작들이 제공될 수 있다. 또한 UI 이벤트는 상기 UI 클라이언트에서 인식될 수 있는 터치 스크린의 터치 또는 리모콘을 통한 키 입력과 같은 UI 클라이언트와 사용자간의 상호 작용을 의미한다. 상세하게 위젯(Widget)은 멀티미디어 장치 또는 UI 장치를 통해 표시되는 윈도우, 텍스트 박스, 날씨 요소, 가상 액자 등의 표현적인 요소와 포함된 응용 로직의 실행, 동작, 멈춤, 삭제, 추가, 변환 기능이 포함된 동작적인 요소도 같은 UI의 요소들를 포함한다. 위젯은 또한 가젯(Gadget)이라고도 불리며, 멀티미디어 장치 또는 UI 장치의 표시 화면에서 정해진 자리에 위치될 수 있다.

본 발명의 실시 예에서 UI 클라이언트가 UI 데이터를 검색/선택/병합하는 방법은 크게 아래 두 가지 방법으로 구분된다.

첫 번째 방법은 UI 서버가 멀티미디어 장치로 제공하는 초기의 UI 데이터를 확인한 후, 자신의 UI 환경에 맞도록 멀티미디어 장치에 미리 구비된 다른 UI 데이터를 검색하거나 UI 서버를 통해 검색된 UI 데이터와 멀티미디어 장치에 구비된 UI 데이터를 병합하여 새로운 UI 데이터를 생성하는 것이다.

두 번째 방법은 UI 서버가 제공하는 UI 데이터를 다양한 UI 환경을 고려하여 계층화하고, 위젯의 구성 요소 및 빠른 적응화에 필요한 기본 모듈과 확장 모듈로 구분하여 UI 데이터 검색/수신 시 요구되는 절차, 계산 량, 메시지의 복잡도를 감소시키는 것이다.

본 발명에서 UI 환경은 리모콘, 키 패드 또는 터치 스크린을 구비한 단말기 등 UI 클라이언트가 탑재되는 UI 장치의 종류와, 사용자의 UI 사용 패턴/이력, 연령, 성별, 직업 등의 사용자 특성 정보 중 적어도 하나를 포함하는 의미로 이해하기로 한다.

그러나 본 발명의 방법은 상기한 두 가지 방법에 한정되는 것은 아니며, 이하 설명될 실시 예들로부터 당업자 수준에서 변형하여 실시할 수 있는 다양한 방법들이 포함될 수 있음에 유의하여야 할 것이다.

이하에서는 도면을 참조하여, 본 발명의 실시 예들을 상세히 설명한다.

도 1은 본 발명의 실시예에 따른 UI 서비스 방법의 기본 개념을 나타낸 흐름도이다.

도 1에서 UI 클라이언트(110)는 원격의 UI 서버(120)로부터 UI 데이터를 수신하여 UI를 표현하는 UI 클라이언트이다. 또한 UI 데이터는 UI 서버(20)로부터 멀티미디어 장치(도시하지 않음)를 매개하여 UI 클라이언트(10)에게 제공될 수 있다.

도 1의 101 단계에서 UI 서버(120)는 UI 데이터를 UI 클라이언트에게 전송한다. 상기 UI 서버(120)는 상기 UI 클라이언트(110)에게 UI 데이터를 전송함은 물론 UI 데이터를 광고할 수 있으며, 상기 UI 클라이언트(110)에 제공된 UI 데이터를 원 격으로 업데이트 할 수 있다. 또한 상기 UI 서버(120)는 UI 데이터의 전송 시 일반적인 다운로드 방식이나 스트리밍 방식을 이용할 수 있다.

UI 서버(120)가 UI 클라이언트(110)에 제공하는 UI 데이터는 예컨대, MPEG(Moving Picture Experts Group) 표준에 따라 멀티 미디어 데이터의 포맷으로 부호화될 수 있다. 또한 상기 UI 데이터는 잘 알려진 MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터로 제공될 수 있다. 이 경우 상기 UI 데이터는 UI의 동적 구성에 대한 정보를 포함한다. 여기서 상기 MPEG 표준은 비디오 및 오디오를 압축 부호화하는 방법의 국제적인 표준으로써, MPEG-1, MPEG-2, MPEG-4, MPEG-7과 같은 다양한 버전의 표준이 존재한다. 상기 UI 서버(120)는 이러한 MPEG 표준을 이용하여 UI 데이터를 부호화한다. 최근 대부분의 멀티미디어 장치들은 압축된 동영상을 재생할 수 있는 MPEG 복호화기를 포함하고 있으므로, MPEG 표준에 기초해 UI 데이터를 부호화하여 전송하면, 대부분의 멀티미디어 장치가 UI의 표현을 위한 별도의 브라우저 없이도 UI를 표현할 수 있게 된다.

이러한 환경을 위해서 MPEG 표준에서는 ISO/IEC 14496-11과 ISO/IEC 14496-20 기술을 정의하여 장면 표현에 관련된 기술을 제공하고 있다. 여기서 상기 ISO/IEC 14496-11은 MPEG-4 BIFS(Binary Format for Scene) 기술을 포함하며, ISO/IEC 14496-20은 이동 단말을 위한 LASeR(Lightweight Applications Scene Representation) 기술을 포함한다., 상기 LASeR은 이동 단말이 풍부한 멀티미디어 서비스를 수신할 수 있도록 마련된 멀티미디어 컨텐츠(Content)의 포맷을 의미하며, 상기 BIFS가 모든 멀티미디어 컨텐츠에 대한 장면 기술(scene description)의 표준이라면, 상기 LASeR는 휴대폰과 같이 디스플레이의 크기는 물론 네트워크 대역폭도 작은 멀티미디어 단말의 장면 기술에 대한 표준이다.

상기 BIFS 또는 LASeR는 객체 기반 시스템을 대상으로 하며, 객체 기반(object-based) 영상 부호화 방식을 이용해 UI 데이터를 부호화할 수 있다. 또한 상기 BIFS 또는 LASeR는 영상에 포함된 객체들의 시공간적인 배치를 표현할 수 있는 장면 기술에 대한 정보를 포함한다. 따라서 UI 데이터에서 객체들을 BIFS 또는 LASeR에 의해 부호화되는 영상 객체들로 간주해, BIFS 또는 LASeR의 장면 기술을 이용해 UI 객체들의 시공간적 배치를 표현하여 부호화할 수 있다. 또한 UI 서버(120)는 MPEG의 장면 기술 방법을 이용해 UI 데이터를 부호화함에 있어 UI의 동적 구성에 대한 정보를 포함하여 부호화할 수 있다.

본 발명의 실시 예에서 UI 데이터의 객체란 키 입력 등 UI 클라이언트와 사용자간의 인터액션(interaction)에 따라 소정의 UI 이벤트가 발생하고, 발생된 UI 이벤트에 기초해 소정의 기능을 호출하는 UI의 최소 단위를 의미한다. 따라서 UI 클라이언트는 UI 데이터의 객체를 BIFS 또는 LASeR를 이용하여 버튼, 메뉴 등과 같은 시공간적인 배치를 표현할 수 있다.

BIFS 또는 LASeR와 같은 동영상 코덱을 이용해 UI 데이터를 부호화하여 UI에 대한 영상을 포함하는 MPEG-4 스트림을 생성한 경우를 예로 들면, UI 클라이언트(110)는 BIFS 또는 LASeR에 따라 부호화된 UI에 대한 영상을 포함하는 MPEG-스트림을 수신하고, MPEG 디코더로 복호화하여 재생하기만 하면 UI를 디스플레이 할 수 있다. 따라서 MPEG-스트림의 재생만으로 UI를 디스플레이 할 수 있으므로, 멀티미 디어 장치와 같이 MPEG 디코더를 보유한 다양한 디바이스들은 UI 서버(120)가 제공하는 UI를 디스플레이 할 수 있다. UI 클라이언트(110) 또한 MPEG 디코더를 구비한 경우 동일한 방식으로 UI 서버(120)가 제공하는 UI를 디스플레이 할 수 있다.

다시 도 1로 돌아가서 BIFS 또는 LASeR와 같은 객체 기반 장면 기술 방법을 이용해 객체 단위로 배치를 표현하여 UI를 구성하면, 103, 105 단계에서 UI 데이터를 수신한 UI 클라이언트(110)는 객체들의 선택 및 재배치를 통해 동적으로 UI 장치의 환경을 고려한 새로운 UI를 생성하고, 표현할 수 있다. 이후 107 단계에서 UI 클라이언트(110)와 UI 서버(120)간에는 원격화 된 UI를 이용한 각종 제어가 수행된다. 이때 제어는 실행 중인 컨텐츠에 대한 각종 정보 검색 또는 컨텐츠의 선택/구매 등 멀티미디어 컨텐츠의 이용과 관련된 각종 제어와 도 1에는 도시되어 있지 않으나, UI 서버(120)와 UI 클라이언트(110)를 매개하는 멀티미디어 장치에 대한 동작 제어 중 적어도 하나를 포함한다.

도 2는 본 발명의 실시예에 따른 RUI를 위한 적응적 사용자 인터페이스를 제공/수신하는 방법을 설명하기 위한 흐름도이다.

도 2에서 UI 클라이언트(120)는 원격지에서 UI 서버(110)에 접속하여 UI 데이터를 수신한다. 도 2의 실시 예에서 UI 클라이언트(210)는 키 패드를 구비한 리모콘을 가정한 것이나, UI를 디스플레이 하기 위한 표시 수단과 키 패드 또는 터치 스크린 등 입력 수단이 구비된 각종 단말기에도 적용될 수 있다. 또한 도 2에서 UI 서버(220)는 IP 망에서 UI 서비스를 위한 위젯들을 검색하여 전송할 수 있는 검색 사이트의 서버나, UI 서비스를 제공하는 별도의 UI 전용 서버 등을 이용할 수 있 다. 즉, UI 클라이언트(220) 및 UI 서버(210)는 소정의 네트워크로 연결된 모든 종류의 네트워크 장치일 수 있다.

도 2의 201 단계에서 UI 클라이언트(220)는 UI 서버(210)에게 UI를 요청한다. 202 단계에서 UI 클라이언트(220)와 UI 서버(210)는 상호간에 환경 및 특성 정보들을 교환한다. 환경 및 특성 정보 교환이란, UI 서버(210)가 UI 클라이언트(220)의 환경 및 특성 정보를 고려하여 UI 데이터를 UI 클라이언트(220)의 환경 및 특성에 맞게 가공하여 UI 클라이언트(220)에게 제공하기 위해 필요한 정보들을 교환하는 것을 의미한다.

UI 클라이언트(220)의 환경 및 특성 정보는 UI 클라이언트(220)의 장치 성능(capability), 사용자 선호도(preference), UI 표현(presentation) 및 기능(functionality) 등에 대한 정보를 포함한다. 또한, UI 클라이언트(220)의 환경 및 특성 정보는 UI 클라이언트(220)가 UI를 이용해서 UI 서버(210)를 제어하기 위해 이용하는 프로토콜에 대한 정보도 포함한다.

UI 클라이언트(220)의 장치 성능에 대한 정보는 UI 클라이언트(220)의 CPU, 메모리, 디스플레이 해상도, 배터리 잔량, 입력 장치 종류 등과 같은 하드웨어 성능 뿐만이 아니라 UI 저장 여부, 스크롤 여부 등 UI를 표현하기 위한 소프트웨어 환경 정보도 포함할 수 있다. 예를 들어, UI 클라이언트(220)의 하드웨어 및 소프트웨어 성능으로 UI 서버(210)가 UI를 제공받기 위해서는 UI 서버(210)가 UI 클라이언트(220)의 하드웨어 및 소프트웨어 성능을 알아야 한다. 따라서, 202 단계에서 UI 클라이언트(220)는 UI 클라이언트의 특성에 대한 정보로서 하드웨어 및 소프트 웨어 성능에 대한 정보를 UI 서버(210)에 전송한다.

UI 클라이언트(220)의 사용자 선호도에 대한 정보는 UI 클라이언트(220)를 사용하는 사용자에 대한 정보로서, 사용자의 나이, 성별, 직업, 언어 등에 따라 상이한 선호도를 고려하여 UI 서버(210)가 UI를 제공하기 위해 필요한 정보이다.

또한 UI 클라이언트(220)가 소정의 제어 메시지를 업 스트림(up-stream)에 포함시켜서 UI 서버(210)에 전송하고, 이에 따라 UI 서버(210)가 제어되기 위해서는 UI 클라이언트(220)와 UI 서버(210) 사이의 제어 메시지의 송수신을 위해 정의된 프로토콜에 대한 정보의 공유가 필요하며, 따라서 202 단계에서는 UI 클라이언트(220)가 UI를 이용하여 UI 서버(210)를 제어하기 위해 이용하는 프로토콜에 대한 정보의 교환이 이루어진다.

203 단계에서는 202 단계에서 교환한 UI 서버(210)와 UI 클라이언트(220)의 환경 및 특성 정보를 바탕으로 UI의 가공 수준을 결정한다. 이러한 가공 수준을 결정함에 있어서 참고해야 하는 정보로는 UI가 제공하는 수준 정보, UI 서버(210)의 환경 및 특성 정보, UI 클라이언트(220)의 환경 및 특성 정보 등이 있다. UI가 제공하는 수준 정보로는 UI의 기능의 구조화 및 세분화 수준 정도 등의 기능적 수준 정도와 아이콘, 중간 화면, 전체 화면 등이 포함된 표현 수준 정도 등이 있다. UI가 제공하는 수준 정보는 도 5와 같이 구성 될 수 있다. 상기 UI 수준 정보는 UI 컨테이너 내부에 위치할 수 있다.

204 단계에서 UI 서버(210)는 203 단계에서 결정된 가공 수준에 따라 UI 클라이언트(220)로부터 수집한 UI 클라이언트(220)의 환경 및 능력 정보와 결합하여 UI를 가공 및 생성한다. 이때 UI 서버(210)는 UI 데이터를 멀티미디어 데이터 포맷으로 부호화하여 UI를 생성한다. 예를 들어, MPEG(Moving Picture Experts Group) 표준에 기초해 사용자 인터페이스를 부호화할 수 있다. UI 서버(210)는 상술한 MPEG-1, MPEG-2, MPEG-4, MPEG-7과 같은 다양한 버전의 MPEG 표준을 이용해서 UI를 생성한다.

도 3과 도 4는 부호화 된 UI의 구조를 도시한 것이다.

도 3에 도시한 바와 같이, UI는 컨테이너(Container) 방식으로 구성되며, UI 설정 정보(310)와 UI 구성 데이터(320)를 포함한다.

또한 도 4에 도시한 바와 같이, UI 구성 데이터(410)는 복수 개의 데이터로 이루어질 수도 있으며, 경우에 따라 UI 구성 데이터(410) 내부의 구성 요소들도 UI 가공 수준에 따라 가공될 수 있다.

도 5는 상기에서 언급한 UI 수준 정보를 구성하는 예를 도시한 것이다.

예를 들어, 해상도 (1920x1080)의 디지털 TV를 이용하는 영어를 사용하는 사용자로 구성된 UI 클라이언트와 해상도 (320x240)의 이동단말이 셋탑박스(Set-Top-Box, 이하 STB)에 있는 날씨 제공 위젯을 이용하려고 하는 경우, STB에 위치한 날씨 제공 위젯에는 도 5와 같은 위젯 설정 정보가 위젯 생성/제공자에 의해 미리 구성되어 있다. UI 클라이언트들로부터 위와 같은 환경 및 설정 정보를 수집한 STB는 UI 전송을 위해 자신의 UI 수준을 결정하게 되며, 이러한 경우, 디지털 TV 및 이동 단말에 맞게 해당 링크로 연결된 UI들로 재구성한다.

205 단계에서 UI 서버(210)는 204 단계에서 생성된 UI를 UI 클라이언트(220) 에 전송한다. 이 경우, UI 서버(210)는 스트리밍 방식 또는 다운로드 방식으로 UI 클라이언트(210)에 UI에 대한 멀티미디어 데이터를 전송한다.

마지막으로 206 단계에서 UI 클라이언트(220)는 205 단계에서 수신된 UI를 이용해서 원격으로 UI 서버(210)를 제어한다. 또한 UI 클라이언트(220)는 UI 서버(210)로부터 수신된 UI를 재생하여 사용자에게 디스플레이하고, 디스플레이 된 UI에 따른 사용자의 입력에 기초해서 소정의 제어 메시지를 UI 서버(210)와 송수신한다. 이때 제어 메시지는 소정의 이벤트를 호출하는 메시지일 수 있다.

도 6은 본 발명의 실시예에 따른 UI 서버의 구성을 나타낸 블록도이다.

도 6의 UI 서버는 환경 및 특성 정보 수신부(610), UI 생성부(620) 및 UI 제공부(630)를 포함한다.

환경 및 특성 정보 수신부(610)는 UI 클라이언트의 장치 성능, 사용자 선호도, UI 표현 및 기능에 대한 정보와, UI 클라이언트가 UI를 이용해서 UI 서버를 제어하기 위해 이용하는 프로토콜에 대한 정보를 포함하는 UI 클라이언트의 특성에 대한 정보를 UI 클라이언트로부터 수신한다.

UI 생성부(620)는 UI가 제공하는 수준 정보, UI 서버의 환경 및 특성 정보, UI 클라이언트(220)의 환경 및 특성 정보 등 환경 및 특성 정보 수신부(610)에서 수신한 정보에 기초하여 UI의 가공 수준을 결정하고 결정된 가공 수준에 따라 UI 데이터를 가공하고 멀티미디어 데이터 포맷으로 부호화하여 UI를 생성한다.

UI 제공부(630)는 UI 생성부(620)에서 생성된 UI를 UI 클라이언트에게 제공한다.

도 7은 본 발명의 실시예에 따른 UI 클라이언트의 구성을 나타낸 블록도이다.

도 7의 UI 클라이언트는 환경 및 특성 정보 전송부(710)와 UI 수신부(720)를 포함한다.

환경 및 특성 정보 전송부(710)는 장치 성능, 사용자 선호도, UI 표현 및 기능에 대한 정보와, UI 클라이언트가 UI를 이용해서 UI 서버를 제어하기 위해 이용하는 프로토콜에 대한 정보를 포함하는 UI 클라이언트의 특성에 대한 정보 등 UI 클라이언트의 환경 및 특성에 대한 정보를 UI 서버로 전송한다.

UI 수신부(720)는 상기 UI 서버로 전송한 UI 클라이언트의 환경 및 특성에 대한 정보에 따라 가공 및 생성된 UI를 UI 서버로부터 수신한다.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명이 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이와 균등하거나 또는 등가적인 변형 모두는 본 발명 사상의 범주에 속한다 할 것이다.

도 1은 본 발명의 실시예에 따른UI 서비스 방법의 기본 개념을 나타낸 흐름도이다.

도 3 및 도 4는 부호화 된 UI의 구조를 도시한 도면이다.

도 5는 UI가 제공하는 수준 정보를 도시한 도면이다.

Claims

클라이언트가 원격 사용자 인터페이스(Remote User Interface; RUI)를 지원하는 통신 시스템의 서버로부터 사용자 인터페이스를 수신하는 방법에 있어서,

상기 클라이언트의 환경 및 특성을 고려하여, 사용자 인터페이스의 표현 수준에 대한 정보를 상기 서버에 전송하는 단계; 및

상기 전송된 표현 수준에 대한 정보에 기초하여, 다수의 표현 수준들로부터, 상기 서버에서 결정된 표현 수준을 갖는 사용자 인터페이스를 상기 서버로부터 수신하는 단계를 포함하되,

상기 다수의 표현 수준들은 심플 위젯(simple widget) 및 풀 위젯(full widget)을 포함하고,

상기 표현 수준에 대한 정보는 환경 및 특성 정보에 포함되며,

상기 환경 및 특성 정보는, 상기 클라이언트의 성능(capability)에 대한 정보 및 사용자 설정 정보를 더 포함하는 사용자 인터페이스 수신 방법.
제1항에 있어서,

상기 환경 및 특성에 대한 정보는,

상기 클라이언트의 기능 정보, 및 상기 클라이언트가 상기 서버를 제어하는 프로토콜에 대한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스 수신 방법.
원격 사용자 인터페이스(Remote User Interface; RUI)를 지원하는 통신 시스템의 서버가 클라이언트에 사용자 인터페이스를 전송하는 방법에 있어서,

상기 클라이언트로부터 표현 수준에 대한 정보를 수신하는 단계;

상기 수신된 표현 수준에 대한 정보에 기초하여, 다수의 표현 수준들로부터, 상기 클라이언트에 의해 요청된 사용자 인터페이스의 표현 수준을 결정하는 단계; 및

상기 결정된 표현 수준을 갖는 사용자 인터페이스를 상기 클라이언트에 제공하는 단계를 포함하되,

상기 표현 수준은 상기 클라이언트에게 제공될 사용자 인터페이스의 수준 정보를 참고하여 결정되고,

상기 다수의 표현 수준들은 심플 위젯(simple widget) 및 풀 위젯(full widget)을 포함하고,

상기 표현 수준에 대한 정보는 환경 및 특성 정보에 포함되며,

상기 환경 및 특성 정보는, 상기 클라이언트의 성능에 대한 정보 및 사용자 설정 정보를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 전송 방법.
제3항에 있어서,

상기 환경 및 특성에 대한 정보는,

상기 클라이언트의 기능 정보, 및 상기 클라이언트가 상기 서버를 제어하는 프로토콜에 대한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스 전송 방법.
원격 사용자 인터페이스(Remote User Interface; RUI)를 지원하는 통신 시스템에서 클라이언트에 사용자 인터페이스를 전송하는 서버의 사용자 인터페이스 전송 장치에 있어서,

표현 수준에 대한 정보를 상기 클라이언트로부터 수신하는 수신부;

상기 수신된 표현 수준에 대한 정보에 기초하여 다수의 표현 수준들로부터 상기 클라이언트에게 요청된 사용자 인터페이스의 표현 수준을 결정하고, 상기 결정된 표현 수준을 갖는 사용자 인터페이스를 생성하는 생성부; 및

상기 생성된 사용자 인터페이스를 상기 클라이언트에게 제공하는 제공부를 포함하되,

상기 표현 수준은 상기 클라이언트에게 제공될 사용자 인터페이스의 수준 정보를 참고하여 결정되고,

상기 다수의 표현 수준들은 심플 위젯(simple widget) 및 풀 위젯(full widget)을 포함하고,

상기 표현 수준에 대한 정보는 환경 및 특성 정보에 포함되며,

상기 환경 및 특성 정보는, 상기 클라이언트의 성능(capability)에 대한 정보 및 사용자 설정 정보를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 전송 장치.
제5항에 있어서,

상기 환경 및 특성에 대한 정보는,

상기 클라이언트의 기능 정보, 및 상기 클라이언트가 상기 서버를 제어하는 프로토콜에 대한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스 전송 장치.
원격 사용자 인터페이스(Remote User Interface; RUI)를 지원하는 통신 시스템에서 서버로부터 사용자 인터페이스를 수신하는 클라이언트의 사용자 인터페이스 수신 장치에 있어서,

상기 클라이언트의 환경 및 특성을 고려하여, 사용자 인터페이스의 표현 수준에 대한 정보를 상기 서버에 전송하는 전송부; 및

상기 전송된 표현 수준에 대한 정보에 기초하여, 다수의 표현 수준들로부터, 상기 서버에서 결정된 표현 수준을 갖는 사용자 인터페이스를 상기 서버로부터 수신하는 사용자 인터페이스 수신부를 포함하되,

상기 다수의 표현 수준들은 심플 위젯(simple widget) 및 풀 위젯(full widget)을 포함하고,

상기 표현 수준에 대한 정보는 환경 및 특성 정보에 포함되며,

상기 환경 및 특성 정보는, 상기 클라이언트의 성능(capability)에 대한 정보 및 사용자 설정 정보를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 수신 장치.
제7항에 있어서,

상기 환경 및 특성에 대한 정보는,

상기 클라이언트의 기능 정보, 및 상기 클라이언트가 상기 서버를 제어하는 프로토콜에 대한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스 수신 장치.
삭제
삭제
삭제