KR20090110202A

KR20090110202A - 개인화된 사용자 인터페이스를 디스플레이하는 방법 및 장치

Info

Publication number: KR20090110202A
Application number: KR1020080079036A
Authority: KR
Inventors: 조성호; 류영선; 박경모; 박호연
Original assignee: 삼성전자주식회사
Priority date: 2008-04-17
Filing date: 2008-08-12
Publication date: 2009-10-21
Also published as: WO2009128671A3; CN102007483A; WO2009128671A2; CN106293715A; US9424053B2; EP2267606A2; CN106293715B; EP2267606A4; US20090265646A1

Abstract

서버로부터 사용자 인터페이스 데이터를 수신하고, 수신된 사용자 인터페이스 데이터 및 클라이언트의 특성에 기초해 디스플레이할 사용자 인터페이스를 생성하여 디스플레이함으로써 클라이언트의 특성에 기초한 개인화된 사용자 인터페이스를 디스플레이할 수 있도록하는 클라이언트가 사용자 인터페이스를 디스플레이하는 방법이 개시된다.

사용자 인터페이스, UI, 개인화

Description

개인화된 사용자 인터페이스를 디스플레이하는 방법 및 장치{Method and apparatus for displaying personalized user interface}

본 발명은 클라이언트가 사용자 인터페이스를 디스플레이하는 방법 및 장치에 관한 것으로 보다 상세히는 클라이언트가 원격의 서버로부터 사용자 인터페이스 데이터를 수신하여 디스플레이하는 방법 및 장치에 관한 것이다.

다양한 종류의 멀티미디어 디바이스들이 개발되고, 이러한 멀티미디어 디바이스들 사이의 융합(convergence)이 가속화되고 있다. 서로 다른 종류의 멀티미디어 디바이스들이 네트워크를 구성하여 멀티미디어 데이터를 송수신하거나, 서로를 제어하는 일이 빈번해지고 있다.

물리적으로 서로 떨어진 사이의 원격 제어는 원격 사용자 인터페이스(RUI : Remote User Interface)를 통해 수행된다. 사용자 인터페이스 서버가 제어를 위한 사용자 인터페이스를 사용자 인터페이스 클라이언트에 제공하고, 사용자 인터페이스 클라이언트는 제공된 사용자 인터페이스를 통해 사용자 인터페이스 서버를 제어한다. 예를 들어, CEA-2014에 따른 사용자 인터페이스를 제공/수신하는 방법에서 사용자 인터페이스 서버는 원격 제어를 위한 사용자 인터페이스를 웹 페이지의 형 태로 사용자 인터페이스 클라이언트에 제공하고, 사용자 인터페이스 클라이언트는 웹 브라우저를 이용해 웹 페이지를 사용자에게 디스플레이한다. 그런 다음, 클라이언트의 사용자는 디스플레이된 사용자 인터페이스를 이용해 사용자 인터페이스 서버를 제어한다.

본 발명이 해결하고자 하는 기술적 과제는 원격의 서버가 제공하는 사용자 인터페이스를 클라이언트가 디스플레이하는 방법 및 장치를 제공함에 있고, 상기 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는데 있다.

상기 기술적 과제를 해결하기 위한 본 발명의 일 실시예에 따른 클라이언트가 사용자 인터페이스를 디스플레이하는 방법은 서버로부터 사용자 인터페이스 데이터를 수신하는 단계; 상기 수신된 사용자 인터페이스 데이터 및 상기 클라이언트의 특성에 기초해 디스플레이할 사용자 인터페이스를 생성하는 단계; 및 상기 생성된 사용자 인터페이스를 디스플레이하는 단계를 포함한다.

본 발명의 보다 바람직한 실시예에 따르면, 상기 사용자 인터페이스 데이터는 MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터인 것을 특징으로 한다.

본 발명의 보다 바람직한 실시예에 따르면, 상기 사용자 인터페이스 데이터는 상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함한다.

본 발명의 보다 바람직한 실시예에 따르면, 상기 생성하는 단계는 상기 클라이언트의 특성 및 상기 사용자 인터페이스의 동적 구성에 대한 정보를 비교해 상기 디스플레이할 사용자 인터페이스를 생성하는 단계를 포함한다.

본 발명의 보다 바람직한 실시예에 따르면, 상기 사용자 인터페이스 데이터는 복수의 사용자 인터페이스 객체에 대한 데이터를 포함한다.

본 발명의 보다 바람직한 실시예에 따르면, 상기 생성하는 단계는 상기 클라이언트의 특성에 기초해 상기 복수의 사용자 인터페이스 객체 중 일부를 선택하여 상기 디스플레이할 사용자 인터페이스를 생성하는 단계를 포함한다.

상기 기술적 과제를 해결하기 위한 본 발명의 일 실시예에 따른 서버가 클라이언트에 사용자 인터페이스를 제공하는 방법은 상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 사용자 인터페이스 데이터를 생성하는 단계; 및 상기 생성된 사용자 인터페이스 데이터를 상기 클라이언트에 전송하는 단계를 포함하고, 상기 클라이언트는 상기 사용자 인터페이스의 동적 구성에 대한 정보 및 상기 클라이언트의 특성에 기초해 사용자 인터페이스를 생성하여 디스플레이하는 것을 특징으로 한다.

상기 기술적 과제를 해결하기 위한 본 발명의 일 실시예에 따른 클라이언트의 사용자 인터페이스를 디스플레이하는 장치는 서버로부터 사용자 인터페이스 데이터를 수신하는 연결부; 상기 수신된 사용자 인터페이스 데이터 및 상기 클라이언트의 특성에 기초해 디스플레이할 사용자 인터페이스를 생성하는 UI생성부; 및 상기 생성된 사용자 인터페이스를 디스플레이하는 디스플레이부를 포함한다.

상기 기술적 과제를 해결하기 위한 본 발명의 일 실시예에 따른 서버의 클라이언트에 사용자 인터페이스를 제공하는 장치는 상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 사용자 인터페이스 데이터를 생성하는 UI데이터생성부; 및 상기 생성된 사용자 인터페이스 데이터를 상기 클라이언트에 전송하는 연결부를 포함하고, 상기 클라이언트는 상기 사용자 인터페이스의 동적 구성에 대한 정보 및 상기 클라이언트의 특성에 기초해 사용자 인터페이스를 생성하여 디스플레이하는 것을 특징으로 한다.

상기 기술적 과제를 해결하기 위해 본 발명의 일 실시예는 상기된 클라이언트가 사용자 인터페이스를 디스플레이하는 방법 및 서버가 사용자 인터페이스를 제공하는 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.

본 발명의 일 실시예에 따르면, 클라이언트가 사용자의 선호도와 같은 클라이언트만의 특성을 고려하여 개인화된 사용자 인터페이스를 스스로 생성하여 디스플레이할 수 있어, 클라이언트 사용자의 사용 만족도를 높일 수 있다.

이하에서는 도면을 참조하여, 본 발명의 바람직한 실시예들을 상세히 설명한다.

도 1은 본 발명의 일 실시예에 따른 사용자 인터페이스를 디스플레이하는 방법을 설명하기 위한 흐름도이다. 도 1에서 클라이언트(110)는 원격의 사용자 인터페이스 서버인 서버(120)로부터 사용자 인터페이스 데이터를 수신하여 사용자 인터페이스를 디스플레이하는 사용자 인터페이스 클라이언트이다.

단계 130에서 서버(120)는 사용자 인터페이스 데이터를 클라이언트(110)에 전송한다.

서버(120)가 클라이언트(110)에 제공하는 사용자 인터페이스 데이터는 MPEG(Moving Picture Experts Group) 표준에 따라 멀티 미디어 데이터의 포맷으로 부호화될 수 있다. MPEG 표준은 비디오 및 오디오를 압축 부호화하는 방법의 국제적인 표준으로써, MPEG-1, MPEG-2, MPEG-4, MPEG-7, MPEG-21과 같은 다양한 버전의 표준이 존재한다. 서버(120)는 이러한 MPEG 표준을 이용해 사용자 인터페이스 데이터를 부호화한다. 최근에 생산되는 대부분의 디바이스들은 압축된 동영상을 재생할 수 있는 MPEG 디코더를 포함하고 있으므로, MPEG 표준에 기초해 사용자 인터페이스를 부호화하면, 대부분의 디바이스가 사용자 인터페이스의 디스플레이를 위한 별도의 어플리케이션없이 사용자 인터페이스를 디스플레이할 수 있게 된다.

특히, MPEG-4 BIFS(Binary Format for Scene) 및 모바일 기기를 위한 LASeR(Lightweight Applications Scene Representation)과 같이 객체 기반(object-based) 영상 부호화 방식을 이용해 사용자 인터페이스를 부호화할 수 있다. 사용자 인터페이스 객체들을 BIFS 또는 LASeR에 의해 부호화되는 영상 객체들로 간주해, BIFS 또는 LASeR의 장면 기술을 이용해 사용자 인터페이스 객체들의 시공간적 배치를 표현하여 부호화한다. 사용자 인터페이스 객체란 사용자와의 인터액션(interaction)에 따라 소정의 이벤트가 발생하고, 발생된 이벤트에 기초해 소정의 기능을 호출하는 사용자 인터페이스의 최소 단위를 의미한다.

BIFS 또는 LASeR는 영상에 포함된 객체들의 시공간적인 배치를 표현할 수 있는 장면 기술에 대한 정보를 포함한다. 따라서, 이러한 BIFS 또는 LASeR를 이용해 버튼, 메뉴 등과 같은 사용자 인터페이스 객체들의 시공간적인 배치를 표현한다.

BIFS 또는 LASeR와 같은 영상 코덱을 이용해 사용자 인터페이스를 부호화하여 사용자 인터페이스에 대한 영상을 포함하는 MPEG-스트림을 생성한 경우를 예로 들면, 클라이언트(110)는 BIFS 또는 LASeR에 따라 부호화된 사용자 인터페이스에 대한 영상을 포함하는 MPEG-스트림을 수신하고, MPEG 디코더로 복호화하여 재생하기만 하면 사용자 인터페이스를 디스플레이할 수 있다. MPEG-스트림의 재생만으로 사용자 인터페이스를 디스플레이할 수 있으므로, MPEG 디코더를 보유한 다양한 디바이스들이 서버(120)가 제공하는 사용자 인터페이스를 디스플레이 할 수 있다.

BIFS 또는 LASeR와 같은 객체 기반 장면 기술 방법을 이용해 객체 단위로 배치를 표현하여 사용자 인터페이스를 구성하면, 사용자 인터페이스 데이터를 수신한 클라이언트(110)가 객체들의 선택 및 재배치를 통해 동적으로 개인화된 사용자 인터페이스를 생성할 수 있다.

서버(120)가 MPEG의 장면 기술 방법을 이용해 사용자 인터페이스 데이터를 부호화함에 있어, 사용자 인터페이스의 동적 구성에 대한 정보를 포함하여 부호화할 수 있다. 사용자 인터페이스의 동적 구성에 대한 정보는 사용자 인터페이스를 개인화하여 사용자 인터페이스의 색, 모양, 배경 이미지, 글자체 중 적어도 하나를 변경하기 위한 정보이다. 도 2를 참조하여 상세히 설명한다.

도 2는 본 발명의 일 실시예에 따른 사용자 인터페이스 데이터를 도시한다.

도 2를 참조하면, 본 발명의 일 실시예에 따른 사용자 인터페이스 데이터는 사용자 인터페이스 패키지(200)로 부호화된다. 사용자 인터페이스 패키지(200)는 복수의 사용자 인터페이스 엘리먼트들을 포함한다.

복수의 사용자 인터페이스 엘리먼트들은 서로 다른 클라이언트의 특성에 기초해 사용자 인터페이스들에 대한 정보를 포함할 수 있다. 예를 들어, 동일한 AV 제어 사용자 인터페이스에 대해 사용자 인터페이스 엘리먼트 #1은 20대의 사용자가 이용하는 사용자 인터페이스에 대한 정보를 포함할 수 있고, 사용자 인터페이스 엘리먼트 #2는 30대의 사용자가 이용하는 사용자 인터페이스에 대한 정보를 포함할 수 있다. 이 때, 사용자 인터페이스를 동적으로 구성하기 위한 정보로서 복수의 사용자 인터페이스 엘리먼트 중 하나를 선택하기 위해 필요한 정보가 각각의 사용자 인터페이스 엘리먼트에 포함된다. 사용자 인터페이스 엘리먼트 #1을 예로 들어 설명한다.

사용자 인터페이스 엘리먼트 #1(210)는 사용자 인터페이스에 포함된 객체들을 표현하기 위한 정보(220), 객체들에 의해 발생하는 이벤트들에 대한 정보(230) 및 이벤트들을 처리하기 위해 호출되는 기능(240)에 대한 정보를 포함한다. 표현, 이벤트 및 기능에 대한 정보가 계층화된 정보로써 구별되어 사용자 인터페이스 엘리먼트에 포함되므로 사용자 인터페이스의 동적인 확장이 가능해진다.

사용자 인터페이스에 포함된 객체들을 표현하기 위한 정보(220)는 사용자 인터페이스 객체들이 장면(scene)에 어떻게 배치되고, 어떠한 미디어를 이용해 표현되는지를 나타내는 정보이다.

"Scene Description"(222)은 사용자 인터페이스의 장면 구조를 기술하기 위한 정보이다. "Scene Description"(222)은 사용자 인터페이스에 객체들이 배치되는 위치에 대한 정보로서, 장면의 레이아웃(layout), 폼(form), 테마, 템플릿(template) 등을 기술하기 위한 정보를 포함할 수 있다. 사용자 인터페이스의 표현 방법에 대한 정보도 포함할 수 있다. 사용자 인터페이스가 페이드 아웃 또는 페이드 인과 같은 특수 효과를 이용해 표현되는 경우 이러한 특수 효과에 대한 정보를 포함할 수도 있다. "Scene Description"(222)는 후술하는 "Adaptation Utility"(226)에 따라 동적으로 구성될 수 있다.

"Object Description"(224)은 사용자 인터페이스에 포함된 객체들의 표현 방법에 대한 정보이다. 사용자 인터페이스 객체들 각각이 이미지, 영상, 오디오 중 어떠한 미디어를 이용해 표현되는지를 나타내는 정보를 포함한다. 또한, 객체들의 표현 시간, 표현 방법 등에 대한 정보를 포함할 수 있다. 예를 들어, 사용자 인터페이스 장면에 포함된 객체들이 서로 다른 시간에 장면에 표현되는 경우, 이러한 타이밍 조절을 위한 시간에 대한 정보가 포함될 수 있다. 또한, 장면과 마찬가지로 객체들이 페이드 아웃 또는 페이드 인과 같은 특수 효과를 이용해 장면에 표현되는 경우에 이러한 표현 방법에 대해 정보가 포함될 수 있다. 객체들이 고정되어 있지 않고, 움직이는 애니메이션 효과가 적용된 경우에도 이에 대한 정보가 포함될 수 있다.

"Adaptation Utility"(226)는 클라이언트(110)의 특성에 기초해 사용자 인터페이스를 동적으로 구성하기 위한 정보를 포함하고 있다. 클라이언트(110)는 클라이언트(110)의 특성과 "Adaptation Utility"(226)가 포함하고 있는 정보를 비교해 사용자 인터페이스를 동적으로 구성한다. 전술한 예에서, 20대, 30대, 40대 즉, 사용자의 연령에 따라 사용자 인터페이스 엘리먼트를 선택하기 위한 정보가 포함될 수 있다. 다시 말해, "Adaptation Utility"(226)는 사용자 인터페이스 엘리먼트 #1(210)이 20대 사용자를 위한 사용자 인터페이스 엘리먼트임을 나타내는 정 보를 포함하여, 20대 사용자의 클라이언트가 사용자 인터페이스 엘리먼트 #1(210)에 따라 사용자 인터페이스를 디스플레이하도록 할 수 있다.

또한, "Adaptation Utility"(226)에 따라 "Scene Description"(222)을 동적으로 변경하도록 할 수도 있다. 클라이언트(110)의 특성, 예를 들어, 사용자가 연령에 따라 사용자 인터페이스 객체의 크기, 사용자 인터페이스의 글자체, 색상 등을 변경할 수 있도록 한다. 클라이언트(110)의 특성에 따라 사용자 인터페이스를 어떻게 변경하여야 하는지를 서버(120)가 미리 결정하고, 이러한 결정에 대한 정보를 "Adaptation Utility"(226)에 포함시킨다.

또한, 사용자 인터페이스 엘리먼트 #1(210)에 포함되어 있는 복수의 사용자 인터페이스 객체들 중에서 클라이언트(110)의 특성을 고려하여 일부의 객체만 선택하도록 하는 정보가 "Adaptation Utility"(226)에 포함될 수 있다.

예를 들어, 20대가 사용자인 클라이언트에서는 사용자 인터페이스 객체 A, B, C 및 D를 모두 디스플레이하도록 하고, 30대가 사용자인 클라이언트에서는 A, B 및 C를 디스플레이하도록 하며, 40대가 사용자인 클라이언트에서는 A 및 B만 디스플레이하도록 객체 선택에 대한 정보를 "Adaptation Utility"(226)에 포함시킬 수 있다.

전술한 동적인 사용자 인터페이스의 구성을 위해 "Adaptation Utility"(226)는 장면 트리(scene tree)에 대한 정보를 포함할 수 있다. 도 3을 참조하여 상세히 설명한다.

도 3은 본 발명의 일 실시예에 따른 장면 트리를 도시한다.

동일한 AV 제어를 위한 사용자 인터페이스(300)는 20 대를 위한 사용자 인터페이스(310), 30 대를 위한 사용자 인터페이스(320) 및 40 대를 위한 사용자 인터페이스(330)를 모두 포함할 수 있다. 서버(120)는 장면 트리에 대한 정보를 "Adaptation Utility"(226)에 포함시켜 사용자 인터페이스 데이터를 생성하고, 클라이언트(110)는 이러한 장면 트리를 참조하여 복수의 사용자 인터페이스 엘리먼트 중 하나를 선택하거나, "Scene Description"(222)을 적으로 변경하거나, 복수의 사용자 인터페이스 객체 중 일부를 선택한다.

다시 도 2를 참조하면, "Resource"(228)은 사용자 인터페이스 객체의 표현을 위한 소스들을 포함한다. 이미지, 동영상, 오디오와 같은 멀티미디어 데이터를 포함한다.

객체들에 의해 발생하는 이벤트들에 대한 정보(230)는 사용자 인터페이스 장면에 포함되어 있는 객체들에 의해 발생하는 이벤트들에 대한 정보를 포함한다. 사용자의 객체 선택 등과 같은 사용자 인터페이스 객체와 사용자 사이의 인터액션(interaction) 결과 발생하는 이벤트들에 대한 정보를 포함한다.

"Event description"(232)은 객체에 의해 발생하는 이벤트들에 대한 정보를 포함한다. 클릭, 터치, 회전 등과 같은 사용자 인터페이스 객체를 통해 수행될 수 있는 사용자 인터액션의 종류에 대해 기술한다.

"Even handle"(234)는 발생하는 이벤트들을 처리하는 방법에 대한 정보를 포함한다. 예를 들어, "Even description"(232)에 클릭이라는 이벤트가 정의되어 있으면, 이러한 클릭이라는 이벤트를 어떻게 처리해야 하는지를 나타내는 정보를 포 함한다. 클릭된 사용자 인터페이스 객체가 볼륨(volume)을 조절하기 위한 객체라면, 클릭이라는 이벤트를 볼륨 업(volume up) 또는 볼륨 다운(volume down)으로 해석하여 처리하기 위한 정보가 포함되어 있다.

"Binding Interface"(236)는 정의된 이벤트들과 이벤트들을 처리하기 위해 호출되는 디바이스 API(application programming interface) 사이의 매핑에 대한 정보를 포함한다. 사용자 인터페이스 객체들에 의해 발생하는 이벤트들과 이벤트들에 의해 호출되는 기능을 연관시키기 위해 이벤트들과 호출되는 디바이스 API 사이의 매핑에 대한 정보를 포함한다.

이벤트들을 처리하기 위해 호출되는 기능에 대한 정보(240)는 기능 수행을 위해 호출되는 디바이스 API들에 대한 상세한 정보를 포함한다.

"Function description"(242)은 이벤트들에 의해 호출되는 디바이스 API들의 상세한 동작 다시 말해, 디바이스 API를 통해 사용자가 구현할 수 있는 기능들에 대한 정보를 포함한다. 예를 들어, 진동 기능에 대한 디바이스 API가 호출되는 경우에 디바이스 API가 구현할 수 있는 진동 세기의 조절, 진동 시간의 조절과 같은 구체적인 기능에 대한 정보를 포함한다.

"Function invocation"(244)은 사용자 인터페이스 객체에 의해 호출되는 기능의 파라미터에 대한 정보가 포함된다. 예를 들어, 진동 기능에 대한 디바이스 API가 1~5 다섯 가지 수준으로 진동 세기 및 진동 시간을 조절할 수 있는 것으로 "Function description"(242)에 기술되어 있다면, "Function invocation"(244)은 소정의 이벤트가 발생했을 때 이러한 다섯 가지 수준의 진동 세기 및 진동 시간 중 어떠한 수준으로 기능을 호출해야 하는지를 나타내는 파라미터들을 구체적으로 포함한다. 다시 말해, 사용자 인터페이스 객체 A가 진동 기능을 호출함에 있어 "Function description"(242)에 기술된 다섯 가지 수준의 진동 세기 및 진동 시간 중 3 수준의 진동 세기 및 1 수준의 진동 시간으로 진동 기능을 호출한다면, 이러한 기능 호출을 위한 구체적인 파라미터들이 "Function invocation"(244)이 포함할 수 있다.

다시 도 1을 참조하면, 단계 132에서 클라이언트(110)는 개인화된 사용자 인터페이스를 생성한다. 단계 130에서 수신된 사용자 인터페이스 데이터 및 클라이언트(110)의 특성에 기초해 사용자에게 디스플레이할 개인화된 사용자 인터페이스를 생성한다.

클라이언트(110)는 클라이언트(110)의 특성과 사용자 인터페이스의 동적 구성에 대한 정보를 비교해 개인화된 사용자 인터페이스를 생성할 수 있다.

클라이언트(110)는 사용자 인터페이스의 동적 구성에 대한 정보를 분석하여 클라이언트(110)의 특성에 대응하는 사용자 인터페이스의 구성에 대한 정보를 얻는다. 클라이언트(110)의 특성과 "Adaptation Utility"(226)를 비교해 클라이언트(110)의 특성에 적합한 사용자 인터페이스 엘리먼트를 선택하거나, 클라이언트(110)의 특성에 적합하게 "Scene Description"(222)을 변경할 수 있다.

클라이언트(110)의 특성에 따라 디스플레이할 사용자 인터페이스에 포함될 객체들을 선택할 수도 있다. 이 때 "Adaptation Utility"(226)를 참조해 객체들을 선택할 수도 있고, "Adaptation Utility"(226)를 참조하지 않고 클라이언트(110)가 임의로 클라이언트(110)의 특성만을 고려해 사용자 인터페이스 객체들을 선택할 수도 있다.

클라이언트(110)의 특성은 클라이언트(110)의 성능, 클라이언트(110)의 사용자의 프로파일, 클라이언트(110)가 연결되어 있는 네트워크의 종류 및 외부 정보에 중 적어도 하나를 포함할 수 있다.

클라이언트(110)의 성능은 클라이언트(110)의 CPU, 메모리, 디스플레이 해상도, 배터리 잔량 등과 같은 클라이언트(110)의 하드웨어 성능을 포함한다. 클라이언트(110)가 사용자 인터페이스의 디스플레이를 위해 할당할 수 있는 하드웨어 자원, 예를 들어, 할당 가능한 CPU 점유율 및 할당 가능한 여유 메모리 등도 클라이언트(110)의 성능에 포함될 수 있다.

클라이언트(110)의 사용자의 프로파일은 사용자의 선호도(preference)를 포함한다. 클라이언트마다 상이한 사용자의 선호도를 사용자 인터페이스를 디스플레이하는데 반영할 수 있다. 이러한 선호도를 판단하는 기준에는 사용자의 나이, 성별, 언어 등이 있다. 사용자의 선호도는 MPEG-21 UED(Usage Environment Description) 또는 W3C CC/PP(Composite Capabilities/Preference Profile)와 같은 표준에 의해 표현될 수 있다.

클라이언트(110)가 연결되어 있는 네트워크의 종류는 클라이언트(110)가 연결되어 있는 ADSL, VDLS, WLAN, Wi-Fi 등과 같은 네트워크의 종류를 포함한다. 클라이언트(110)가 연결되어 있는 네트워크의 종류에 따라 클라이언트(110)가 사용자 인터페이스를 디스플레이하는데 이용할 수 있는 대역폭 등에 차이가 있을 수 있으 므로, 네트워크의 종류도 개인화된 사용자 인터페이스를 생성하는 기초가 된다.

외부 정보는 개인화된 사용자 인터페이스를 생성하는데 이용할 수 있는 클라이언트(110) 외부의 정보로서 날씨, 주식(stock), 시간, 계절 등을 포함한다. 날씨, 주식 , 시간, 계절 등에 따라 사용자가 필요로 하는 사용자 인터페이스가 달라질 수 있으므로, 동적으로 사용자 인터페이스를 디스플레이할 수 있다. 클라이언트(110)가 모션 센싱을 사용하여 사용자 인터페이스를 조작하는 기능이 있는 경우에 이러한 기능도 외부 정보에 포함된다. 외부 정보는 클라이언트(110)가 아닌 외부의 서버 예를 들어, 날씨 정보를 제공하는 서버, 주식 정보를 제공하는 서버로부터 수신할 수 있다.

단계 134에서 클라이언트(110)는 단계 132에서 생성된 개인화된 사용자 인터페이스를 사용자에게 디스플레이한다.

단계 136에서 클라이언트(110)는 디스플레이된 사용자 인터페이스를 이용해 서버(120)를 제어한다. 디스플레이된 사용자 인터페이스에 기초한 사용자 입력에 따라 소정의 이벤트를 서버(120)에 호출하거나, 소정의 제어 메시지를 서버(120)에 전송한다.

단계 130 내지 136을 통해 클라이언트(110)는 클라이언트(110)의 특성에 따른 개인화된 사용자 인터페이스를 생성할 수 있어, 사용자의 클라이언트(110) 활용도를 향상시킬 수 있다. 또한, 개인화된 사용자 인터페이스를 이용해 서버(120)를 보다 효율적으로 제어할 수 있게 된다.

도 4는 본 발명의 또 다른 실시예에 따른 사용자 인터페이스를 디스플레이하 는 방법을 설명하기 위한 흐름도이다. 도 1과 마찬가지로, 도 4에서 클라이언트(410)는 원격의 사용자 인터페이스 서버인 서버(420)로부터 사용자 인터페이스 데이터를 수신하는 사용자 인터페이스를 디스플레이하는 사용자 인터페이스 클라이언트이다. 다만, 외부 정보를 별도의 컨텍스트 서버(430)로부터 수신하여 이를 사용자 인터페이스 생성에 반영한다는 점이 도 1과 상이하다.

단계 440은 도 1의 단계 130에 대응되는 단계로서, 서버(420)는 사용자 인터페이스 데이터를 클라이언트(410)에 전송한다.

서버(420)가 클라이언트(410)에 제공하는 사용자 인터페이스 데이터는 MPEG(Moving Picture Experts Group) 표준 특히, MPEG 표준에 따른 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터일 수 있다. 또한, 도 2에 도시된 바와 같은 MPEG 표준에 따른 장면 기술 방법을 이용한 사용자 인터페이스 패키지의 형태로 부호화된 데이터일 수 있다.

단계 420에서 컨텍스트 서버(430)는 클라이언트(410)에 외부 정보를 전송한다. 예를 들어, 날씨, 주식 등에 대한 정보를 클라이언트(410)에 제공한다. 날씨, 계절, 기온 등 클라이언트(410)의 사용 환경은 물론, 주가의 변동과 같은 외부 정보에 기초해 사용자 인터페이스를 개인화하여 생성할 필요가 있다.

따라서, 이러한 외부 정보를 반영하여 사용자 인터페이스를 생성하기 위해 컨텍스트 서버(430)는 단계 420에서 소정의 외부 정보를 클라이언트(410)에 제공한다.

단계 444에서 클라이언트(410)는 개인화된 사용자 인터페이스를 생성한다. 단계442에서 수신된 외부 정보에 기초해 개인화된 사용자 인터페이스를 생성한다. 도 1 및 2와 관련하여 전술한 바와 같이 외부 정보와 "Adaptation Utility"(226)를 비교해 소정의 사용자 인터페이스 엘리먼트를 선택하거나, 외부 정보에 따라 "Scene Description"(222)을 변경할 수 있다. 외부 정보에 따라 디스플레이할 사용자 인터페이스에 포함될 객체들을 선택할 수도 있다.

예를 들어, 흐린 날씨에서는 흐린 날씨에 적합한 색상 및 글자체로 구성된 사용자 인터페이스 엘리먼트를 선택하거나, 흐린 날씨에 적합한 색상 및 글자체로 "Scene Description"(222)을 변경하여 사용자 인터페이스를 생성한다.

단계 446에서 클라이언트(410)는 단계 444에서 생성된 사용자 인터페이스를 사용자에게 디스플레이한다.

단계 448에서 클라이언트(110)는 디스플레이된 사용자 인터페이스를 이용해 서버(420)를 제어한다.

도 4는 서버(420)로부터 수신한 사용자 인터페이스 데이터에 기초해 개인화된 사용자 인터페이스를 생성하는 방법에 대해 도시하였다. 그러나, 외부 정보에 기초해 사용자 인터페이스를 생성하는 방법은 이에 한정되지 아니하며, 서버(420)로부터 수신한 사용자 인터페이스뿐만 아니라, 클라이언트(410)가 이미 보유하고 있던 사용자 인터페이스도 외부 정보에 기초해 변경하여 사용자에게 디스플레이할 수 있다. 예를 들어, 날씨 또는 주식에 대한 정보에 기초해 클라이언트(410)가 보유하고 있던 사용자 인터페이스의 색상, 글자체등을 변경하여 사용자에게 디스플레이할 수 있다

도 5는 본 발명의 또 다른 실시예에 따른 사용자 인터페이스를 디스플레이하는 방법을 설명하기 위한 흐름도이다. 도 1과 마찬가지로, 도 5에서 클라이언트(510)는 원격의 사용자 인터페이스 서버인 서버(520)로부터 사용자 인터페이스 데이터를 수신하는 사용자 인터페이스를 디스플레이하는 사용자 인터페이스 클라이언트이다. 다만, 도 1의 경우 사용자 인터페이스를 생성하는 주체는 클라이언트(110)였으나, 도 5에서는 서버(520)가 클라이언트(510)의 사용자 프로파일에 기초해 사용자 인터페이스를 생성하는 점이 상이하다.

단계 530에서 클라이언트(510)는 사용자 프로파일을 서버(520)에 전송한다. 전술한 바와 같이 사용자의 프로파일은 사용자의 선호도(preference)를 포함한다. 선호도를 판단하는 기준에는 사용자의 나이, 성별, 언어 등이 있다. 사용자의 선호도는 MPEG-21 UED(Usage Environment Description) 또는 W3C CC/PP(Composite Capabilities/Preference Profile)와 같은 표준에 의해 표현될 수 있다.

단계 532에서 서버(520)는 단계 530에서 수신된 사용자 프로파일에 기초해 사용자 인터페이스 데이터를 생성한다. 단계 530에서 수신된 클라이언트I(510)의 사용자의 선호도에 기초해 사용자 인터페이스를 생성한다. MPEG(Moving Picture Experts Group) 표준에 따라 멀티 미디어 데이터의 포맷으로 사용자 인터페이스를 부호화하여 사용자 인터페이스 데이터를 생성할 수 있다.

단계 534에서 사용자 인터페이스 데이터를 클라이언트(510)에 전송한다. MPEG 표준에 따라 생성된 MPEG-스트림을 클라이언트(510)에 스트리밍한다.

단계 536에서 클라이언트(510)는 단계 534에서 수신된 사용자 인터페이스를 사용자에게 디스플레이한다. MPEG-스트림을 복호화하여 실시간으로 사용자에게 디스플레이할 수 있다.

단계 538에서 클라이언트(510)는 디스플레이된 사용자 인터페이스를 이용해 서버(520)를 제어한다.

단계 540에서 클라이언트(510)는 이용 패턴을 서버(520)에 전송한다. 단계 538에서 사용자가 사용자 인터페이스를 이용하는 제어하는 패턴을 분석하여 서버(520)에 이에 대한 정보를 전송한다. 사용자 인터페이스에서 사용자가 선택하는 사용자 인터페이스 객체가 있을 수 있다. 또한, 사용자가 특히 선호하는 컨텐트의 종류가 있을 수 있다. 따라서, 사용자 인터페이스의 이용 패턴을 분석하면, 사용자의 선호도를 알 수 있다. 클라이언트(510)는 이러한 이용 패턴에 대한 정보를 서버(520)에 전송하여 서버(520)가 클라이언트(510)의 선호도를 고려하여 사용자 인터페이스를 업데이트할 수 있게 한다.

단계 542에서 서버(520)는 단계 540에서 수신된 사용자 인터페이스의 이용 패턴에 기초해 새로운 사용자 인터페이스 데이터를 생성한다.

단계 544에서 서버(520)는 단계 542에서 생성된 사용자 인터페이스 데이터를 클라이언트(510)에 전송한다. 단계 540에서 수신된 클라이언트(510)의 사용자의 이용 패턴이 반영된 사용자 인터페이스 데이터를 클라이언트(510)에 전송한다.

도 6은 본 발명의 일 실시예에 따른 클라이언트를 도시한다.

도 6을 참조하면, 본 발명의 일 실시예에 따른 클라이언트(600)는 연결부(610), UI생성부(620), 디스플레이부(630), 입력수신부(640) 및 제어처리부(650) 를 포함한다.

연결부(610)는 서버(700)로부터 사용자 인터페이스 데이터를 수신한다. MPEG 표준의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 사용자 인터페이스 데이터를 수신한다. 도 5에 도시된 실시예와 같이 연결부(610)가 사용자 프로파일을 먼저 서버(700)에 전송하고, 이에 대한 응답으로 개인화된 사용자 인터페이스의 데이터를 수신할 수도 있다.

UI생성부(620)는 연결부(610)에서 수신된 사용자 인터페이스 데이터를 복호화하여 사용자 인터페이스를 생성한다. 복호화부(622)는 MPEG 디코더를 이용해 사용자 인터페이스 데이터를 복호화한다. 복호화된 사용자 인터페이스를 클라이언트(600)의 특성에 기초해 개인화한다. 클라이언트(600)의 특성과 사용자 인터페이스 데이터에 포함되어 있는 사용자 인터페이스의 동적 구성에 대한 정보를 참조하여 개인화한다. 사용자 인터페이스의 개인화에 이용되는 클라이언트(600)의 특성은 클라이언트의 성능, 클라이언트의 사용자의 프로파일, 클라이언트가 연결되어 있는 네트워크의 종류 및 외부 정보 등을 포함한다.

디스플레이부(630)는 UI생성부(620)에서 생성된 개인화된 사용자 인터페이스를 사용자(800)에게 디스플레이한다.

입력수신부(640)는 디스플레이부(630)에서 디스플레이된 사용자 인터페이스에 따른 사용자 입력을 수신한다.

제어처리부(650)는 사용자 입력에 따른 제어 동작을 수행을 위해 연결부(610)를 통해 소정의 이벤트를 호출하거나, 제어 메시지를 생성하여 전송한다.

도 7은 본 발명의 일 실시예에 따른 서버를 도시한다.

도 7을 참조하면, 본 발명의 일 실시예에 따른 서버(700)는 연결부(710), 제어처리부(720) 및 UI데이터생성부(730)를 포함한다.

연결부(710)는 클라이언트(600)에 사용자 인터페이스 데이터를 전송한다. MPEG 표준의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 사용자 인터페이스 데이터를 전송한다. 도 5에 도시된 실시예와 같이 연결부(710)사용자 프로파일을 먼저 클라이언트(600)로부터 수신하고, 이에 대한 응답으로 개인화된 사용자 인터페이스의 데이터를 전송할 수도 있다.

제어처리부(720)는 연결부(710)로부터 수신한 이벤트를 호출하는 메시지 또는 제어 메시지에 기초해 제어 동작을 수행한다. 제어 동작의 수행 결과 사용자 인터페이스의 업데이트가 필요하면 UI데이터생성부(730)를 제어하여 새로운 사용자 인터페이스 데이터를 생성한다.

UI데이터생성부(730)는 사용자 인터페이스 데이터를 부호화한다. MPEG 표준의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 사용자 인터페이스를 부호화한다. 사용자 인터페이스를 동적으로 구성하기 위해 필요한 정보가 사용자 인터페이스 데이터에 포함도리 수 있다. 연결부(710)가 사용자 인터페이스 데이터의 전송 이전에 클라이언트(600)의 사용자 프로파일을 수신한 경우에는 이에 기초해 사용자 인터페이스 데이터를 생성한다.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명이 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이와 균등하거나 또는 등가적인 변형 모두는 본 발명 사상의 범주에 속한다 할 것이다. 또한, 본 발명에 따른 시스템은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

도 1은 본 발명의 일 실시예에 따른 사용자 인터페이스를 디스플레이하는 방법을 설명하기 위한 흐름도이다.

도 3은 본 발명의 일 실시예에 따른 장면 트리를 도시한다.

도 4는 본 발명의 또 다른 실시예에 따른 사용자 인터페이스를 디스플레이하는 방법을 설명하기 위한 흐름도이다.

도 5는 본 발명의 또 다른 실시예에 따른 사용자 인터페이스를 디스플레이하는 방법을 설명하기 위한 흐름도이다.

도 6은 본 발명의 일 실시예에 따른 클라이언트를 도시한다.

도 7은 본 발명의 일 실시예에 따른 서버를 도시한다.

Claims

클라이언트가 사용자 인터페이스를 디스플레이하는 방법에 있어서,

서버로부터 사용자 인터페이스 데이터를 수신하는 단계;

상기 수신된 사용자 인터페이스 데이터 및 상기 클라이언트의 특성에 기초해 디스플레이할 사용자 인터페이스를 생성하는 단계; 및

상기 생성된 사용자 인터페이스를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 디스플레이 방법.
제 1 항에 있어서, 상기 사용자 인터페이스 데이터는

MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터인 것을 특징으로 하는 디스플레이 방법.
제 2 항에 있어서, 상기 사용자 인터페이스 데이터는

상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 것을 특징으로 하는 디스플레이 방법.
제 3 항에 있어서, 상기 생성하는 단계는

상기 클라이언트의 특성 및 상기 사용자 인터페이스의 동적 구성에 대한 정보를 비교해 상기 디스플레이할 사용자 인터페이스를 생성하는 단계를 포함하는 것 을 특징으로 하는 디스플레이 방법.
제 3 항에 있어서, 상기 사용자 인터페이스의 동적 구성에 대한 정보는

상기 사용자 인터페이스의 색, 모양, 배경 이미지, 글자체 중 적어도 하나 변경하여 사용자 인터페이스를 생성하기 위한 정보인 것을 특징으로 하는 디스플레이 방법.
제 3 항에 있어서, 상기 사용자 인터페이스 데이터는

복수의 사용자 인터페이스 객체에 대한 데이터를 포함하는 것을 특징으로 하는 디스플레이 방법.
제 6 항에 있어서, 상기 생성하는 단계는

상기 클라이언트의 특성에 기초해 상기 복수의 사용자 인터페이스 객체 중 일부를 선택하여 상기 디스플레이할 사용자 인터페이스를 생성하는 단계를 포함하는 것을 특징으로 하는 디스플레이 방법.
제 1 항에 있어서, 상기 클라이언트의 특성은

상기 클라이언트의 성능, 상기 클라이언트의 사용자의 프로파일, 상기 클라이언트가 연결되어 있는 네트워크의 종류 및 외부 정보 중 하나를 포함하는 것을 특징으로 하는 디스플레이 방법.
서버가 클라이언트에 사용자 인터페이스를 제공하는 방법에 있어서,

상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 사용자 인터페이스 데이터를 생성하는 단계; 및

상기 생성된 사용자 인터페이스 데이터를 상기 클라이언트에 전송하는 단계를 포함하고,

상기 클라이언트는 상기 사용자 인터페이스의 동적 구성에 대한 정보 및 상기 클라이언트의 특성에 기초해 사용자 인터페이스를 생성하여 디스플레이하는 것을 특징으로 하는 제공 방법.
제 9 항에 있어서, 상기 사용자 인터페이스 데이터는

MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터인 것을 특징으로 하는 제공 방법.
제 10 항에 있어서, 상기 사용자 인터페이스의 동적 구성에 대한 정보는

상기 클라이언트가 상기 사용자 인터페이스의 색, 모양, 배경 이미지, 글자체 중 적어도 하나 변경하여 사용자 인터페이스를 생성하기 위한 정보인 것을 특징으로 하는 제공 방법.
제 10 항에 있어서, 상기 사용자 인터페이스 데이터는

상기 클라이언트가 일부를 선택할 수 있는 복수의 사용자 인터페이스 객체에 대한 데이터를 포함하는 것을 특징으로 하는 제공 방법.
제 9 항에 있어서, 상기 클라이언트의 특성은

상기 클라이언트의 성능, 상기 클라이언트의 사용자의 프로파일, 상기 클라이언트가 연결되어 있는 네트워크의 종류 및 외부 정보 중 하나를 포함하는 것을 특징으로 하는 제공 방법.
클라이언트의 사용자 인터페이스를 디스플레이하는 장치에 있어서,

서버로부터 사용자 인터페이스 데이터를 수신하는 연결부;

상기 수신된 사용자 인터페이스 데이터 및 상기 클라이언트의 특성에 기초해 디스플레이할 사용자 인터페이스를 생성하는 UI생성부; 및

상기 생성된 사용자 인터페이스를 디스플레이하는 디스플레이부를 포함하는 것을 특징으로 하는 디스플레이 장치.
제 14 항에 있어서, 상기 사용자 인터페이스 데이터는

MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터인 것을 특징으로 하는 디스플레이 장치.
제 15 항에 있어서, 상기 사용자 인터페이스 데이터는

상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 것을 특징으로 하는 디스플레이 장치.
서버의 클라이언트에 사용자 인터페이스를 제공하는 장치에 있어서,

상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 사용자 인터페이스 데이터를 생성하는 UI데이터생성부; 및

상기 생성된 사용자 인터페이스 데이터를 상기 클라이언트에 전송하는 연결부를 포함하고,

상기 클라이언트는 상기 사용자 인터페이스의 동적 구성에 대한 정보 및 상기 클라이언트의 특성에 기초해 사용자 인터페이스를 생성하여 디스플레이하는 것을 특징으로 하는 제공 장치.
제 19 항에 있어서, 상기 사용자 인터페이스 데이터는

MPEG의 장면 기술 방법을 이용해 멀티미디어 데이터의 포맷으로 부호화된 데이터인 것을 특징으로 하는 제공 장치.
제 18 항에 있어서, 상기 사용자 인터페이스 데이터는

상기 사용자 인터페이스의 동적 구성에 대한 정보를 포함하는 것을 특징으로 하는 디스플레이 장치.
제 1 항 내지 제 13 항의 방법 중 하나를 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.