KR101141979B1

KR101141979B1 - 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법 및 시스템

Info

Publication number: KR101141979B1
Application number: KR1020100053569A
Authority: KR
Inventors: 김상균; 주용수
Original assignee: 명지대학교 산학협력단
Priority date: 2010-01-12
Filing date: 2010-06-07
Publication date: 2012-05-07
Also published as: KR20110083456A

Abstract

본 발명은 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법 및 시스템에 관한 것으로서, 가상 객체 명령 정보를 생성하는데 필요한 참조 메타데이터를 생성하는 참조메타데이터생성단계; 실/가상 세계 적응 엔진부가 상기 참조 메타데이터를 참조하여 가상 객체 명령 정보를 생성하는 명령정보생성단계; 상기 가상 객체 명령 정보에 따라 가상객체 명령 메타데이터 생성부가 가상객체 명령 메타데이터를 생성하는 명령메타데이터생성단계 및, 상기 가상 객체 명령 메타데이터를 이용하여 가상 객체 제어부가 가상 객체를 제어하는 제어단계를 포함하는 것을 특징으로 한다.
본 발명에 의하면, 본 발명은 각종 센서들로부터 정보를 받아들여 가상 세계의 객체들을 제어하기 위해 필요한 다양한 정보를 담은 메타데이터를 포함하고, 메타데이터에 기반을 둔 콘텐츠 활용 방법적 도구들을 포함함으로써, U-헬스, 반도체 등 각종 장비 시뮬레이션, 게임과 같은 다양한 분야에서 사용자의 선호도와 가상 객체의 정보를 고려한 소비자 중심의 가상 세계 멀티미디어 서비스를 제공할 수 있다.

Description

센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법 및 시스템{MULTIMEDIA APPLICATION METHOD AND SYSTEM USING SENSOR METADATA, USER PREFERENCE METADATA, VIRTUAL OBJECT CAPABILITIES METADATA AND VIRTUAL OBJECT COMMANDS METADATA}

본 발명은 현실 세계의 센서 정보를 이용하여, 가상 세계의 가상 객체들로 재구성해서 사용자에게 서비스를 제공하는 방법 및 시스템에 관한 것으로, 특히 현실 세계의 각종 센서들로부터 정보를 받아들여 메타데이터를 구성함으로써, 가상세계의 가상 객체들을 제어하는 방법 및 시스템에 관한 것이다.

최근 들어 대두되는 가상 세계, 또는 가상 현실(Virtual Reality, VR)은 사용자로 하여금 컴퓨터가 만든 세계에 몰입하여 시각, 청각 및 촉각을 통하여 컴퓨터와 상호작용하도록 하는 테크놀로지이다.

가상 현실은 컴퓨터 그래픽과 다양한 디스플레이, 그리고 입력 테크놀로지들의 통합 외에도 사용자에게 존재감 또는 몰입을 제공한다는 점에서 기존의 전통적인 디스플레이와는 구분된다.

일반적으로 가상 세계의 객체들을 표현하여 사용자에게 서비스를 제공하는 방식은, 아바타 등의 가상 객체를 이용하여, 세컨드 라이프(second life)와 같은 서비스를 제공한다.

이러한 가상 세계 서비스 방식은 현실 세계 정보들을 컴퓨터의 키보드, 마우스 등과 같은 인터페이스에 의해 입력되는 정보들을 이용해서 서비스를 제공한다. 그리고 일본 게임회사인 닌텐도사의 위(Wii)와 같은 게임기는 조이스틱과 같은 센서에 의해 게임 속의 캐릭터와 같은 가상 객체들을 제어하는 서비스를 제공 한다. 또한 마이크로소프트사의 프로젝트 '나탈(Natal)'은 엑스박스(XBox) 용으로 내놓은 기기 및 SDK(Software Development Kit, 소프트웨어 개발 키트)로서, 모션 및 음성을 통해서 게임을 할 수 있도록 한다.

그러나 이러한 서비스는 특정 게임기나 컨트롤러에만 적용이 가능하기 때문에, 의료분야나 공장 시스템 분야, 일반 실생활 등에서 범용으로 적용될 수 없고 다양한 분야의 활용에 대해서는 별다른 방안이 없다는 문제점이 있다.

즉, 종래 기술의 센서 정보에 따른 가상 세계 객체 제어 방법은 한정된 분야와 방법으로만 구현되고 있었다. 또한 사용자의 선호도나 가상 객체에 대한 정보에 따라 유동적으로 제어할 수 있는 방법은 아직까지 구현되지 않고 있다.

본 발명은 상기의 문제점을 해결하기 위해 다양한 센서들을 이용해서 가상 객체들을 제어할 때, 이에 관계된 메타데이터(metadata)를 이용한 멀티미디어 응용 방법 및 시스템을 제공하고, 사용자의 선호도와 가상 객체에 대한 정보에 따라 유동적으로 가상 객체를 제어하여, 각각의 사용자의 상황과 환경에 맞는 적합한 가상 세계 멀티미디어 서비스를 제공할 수 있는 멀티미디어 응용 방법 및 시스템을 제공하고자 한다.

상기 기술적 과제를 달성하기 위해 본 발명에서는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법 및 시스템이 제공된다.

본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법은, 가상 객체 명령 정보를 생성하는데 필요한 참조 메타데이터를 생성하는 참조메타데이터생성단계와, 실/가상 세계 적응 엔진부가 상기 참조 메타데이터를 참조하여 가상 객체 명령 정보를 생성하는 명령정보생성단계와, 상기 가상 객체 명령 정보에 따라 가상객체 명령(Virtual Object Command, VOC) 메타데이터 생성부가 가상객체 명령 메타데이터를 생성하는 명령메타데이터생성단계 및, 상기 가상 객체 명령 메타데이터를 이용하여 가상 객체 제어부가 가상 객체를 제어하는 제어단계를 포함하는 것을 특징으로 한다.

여기서 상기 참조메타데이터생성단계는, 상기 가상객체 제어부가 가상객체 정보를 생성하는 가상객체 정보(Virtual Object Information, VOI) 생성단계와, 상기 가상객체 정보에 따라 가상 객체 정보 메타데이터를 생성하는 가상객체정보 메타데이터생성단계 및, 상기 가상객체정보 메타데이터를 상기 실/가상 세계 적응 엔진부에 전송하는 가상 객체 정보 메타데이터 전송단계를 포함한다. 나아가 상기 참조메타데이터생성단계는, 적어도 하나 이상의 센서를 통해 센서 정보(Sensored Information, SI)를 생성하는 센서 정보 생성단계와, 상기 센서 정보에 따라 센서 정보 메타데이터를 생성하는 센서정보 메타데이터 생성단계 및, 상기 센서 정보 메타데이터를 상기 실/가상 세계 적응 엔진부에 전송하는 센서 정보 메타데이터 전송단계를 포함한다.

한편 상기 참조메타데이터생성단계는, 사용자 선호(User Preference, UP) 정보를 생성하는 사용자 선호 정보 생성단계와, 상기 생성된 사용자 선호 정보에 따라 사용자 선호 메타데이터를 생성하는 사용자 선호 메타데이터 생성단계 및, 상기 사용자 선호 메타데이터를 상기 실/가상 세계 적응 엔진부에 전송하는 사용자 선호 메타데이터 전송단계를 더 포함할 수 있다.

즉 가상 객체 명령 정보 생성시 사용자의 선호 정보를 반영할 수 있는데, 이를 위해서 상기 실/가상 세계 적응 엔진부에 사용자 선호 정보가 입력 전송되어야 할 필요가 있다.

따라서 상기 참조 메타데이터는 가상객체 정보 메타데이터 및 센서 정보 메타데이터를 포함하며, 나아가 사용자 선호 메타데이터를 포함할 수 있다.

한편 상기 명령메타데이터생성단계는, 상기 가상 객체 명령 메타데이터를 상기 가상 객체 제어부에 전송하는 가상 객체 명령 전송단계를 포함한다. 이는 일반적으로 통신 채널부를 통해 전송한다.

한편 상기의 메타데이터들은 반드시 동시에 생성되어 상기 실/가상 세계 적응 엔진부에 전송되어야 할 필요는 없다. 다만 가상객체정보가 먼저 생성되어 실/가상 세계 적응 엔진부에 미리 전송되어야만 상기 센서 정보를 이용하여 실/가상 세계 적응 엔진부에서 가상 객체 명령 정보를 생성할 수 있다.

한편 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 시스템은,

적어도 하나 이상의 센서와, 상기 센서로부터 전송된 센서 정보를 토대로 센서 정보 메타데이터를 생성하는 센서 정보 메타데이터 생성부와, 가상 객체의 정보를 생성하거나 가상 객체 명령 메타데이터를 이용하여 가상 객체를 제어하는 가상 객체 제어부와, 상기 가상 객체 제어부에서 생성된 가상 객체 정보에 따라 가상 객체 정보 메타데이터를 생성하는 가상 객체 정보 메타데이터 생성부와, 가상 객체 명령 정보에 따라 가상 객체 명령 메타데이터를 생성하는 가상 객체 명령 메타데이터 생성부와, 상기 센서 정보 메타데이터 및 가상 객체 정보 메타데이터를 반영하여 가상 객체 명령 정보를 생성하는 실/가상 세계 적응 엔진부 및 상기 메타데이터들이 송수신되도록 하는 통신 채널부를 포함하는 것을 특징으로 한다.

또한 여기서 사용자 선호 정보에 따라 사용자 선호 메타데이터를 생성하는 사용자 선호 메타데이터 생성부와, 상기 사용자 선호 메타데이터가 상기 실/가상 세계 적응 엔진부에 전송되도록 하는 통신 채널부를 더 포함하고, 상기 실/가상 세계 적응 엔진부는 상기 사용자 선호 메타데이터를 더 반영하여 가상 객체 명령 정보를 생성하는 것을 특징으로 한다.

상기와 같은 구성에 의하여, 각종 센서들을 통해 얻은 현실 세계의 정보와 사용자 선호 정보들을 이용하여, 사용자 선호 정보에 의거해 현실 세계 정보를 재구성하여 가상 세계의 객체들로 표현하는 멀티미디어 서비스를 제공할 수 있다.

상기와 같은 구성에 의하면, 본 발명은 각종 센서들로부터 정보를 받아들여 가상 세계의 객체들을 제어하기 위해 필요한 다양한 정보를 담은 메타데이터를 포함하고, 이러한 메타데이터에 기반을 둔 콘텐츠 활용 방법적 도구들을 포함함으로써, U-헬스, 반도체 등 각종 장비 시뮬레이션, 게임과 같은 다양한 분야에서 사용자의 선호도와 가상 객체의 정보를 고려한 소비자 중심의 가상 세계 멀티미디어 서비스를 제공할 수 있다.

도 1은 본 발명의 메타데이터를 이용한 멀티미디어 응용 시스템을 나타내는 블록도.
도 2는 본 발명의 메타데이터를 이용한 멀티미디어 응용 방법을 나타내는 순서도.
도 3은 본 발명의 메타데이터를 이용한 멀티미디어 응용 방법을 바람직한 실시예에 따라 설명하기 위한 순서도.
도 4는 본 발명의 바람직한 실시예에 따른 센서 정보(sensored information, SI) 메타데이터의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도.
도 5는 본 발명의 바람직한 실시예에 따른 Sensed Info Base Type 메타데이터를 스키마 형태로 도시한 구조도.
도 6은 본 발명의 바람직한 실시예에 따른 Sensed Info List Type의 메타데이터를 스키마 형태로 도시한 구조도.
도 7은 본 발명의 바람직한 실시예에 따른 Electricity Sensor Type의 메타데이터를 스키마 형태로 도시한 구조도.
도 8은 본 발명의 바람직한 실시예에 따른 커런트 센서 타입(Current Sensor Type)를 스키마 형태로 도시한 구조도.
도 9는 본 발명의 바람직한 실시예에 따른 볼티지 센서 타입(Voltage Sensor Type)를 스키마 형태로 도시한 구조도.
도 10은 본 발명의 바람직한 실시예에 따른 포텐셜 센서 타입(Potential Sensor Type)를 스키마 형태로 도시한 구조도.
도 11은 본 발명의 바람직한 실시예에 따른 파워 센서 타입(Power Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 도시한 구조도.
도 12는 본 발명의 바람직한 실시예에 따른 차지 센서 타입(Charge Sensor Type)를 스키마 형태로 도시한 구조도.
도 13은 본 발명의 바람직한 실시예에 따른 임피던스 센서 타입(Impedance Sensor Type)를 스키마 형태로 도시한 구조도.
도 14는 본 발명의 바람직한 실시예에 따른 Resistance Sensor Type을 스키마 형태로 도시한 구조도.
도 15는 본 발명의 바람직한 실시예에 따른 인덕턴스 센서 타입(Inductance Sensor Type)를 스키마 형태로 도시한 구조도.
도 16은 본 발명의 바람직한 실시예에 따른 전기용량 센서 타입(Capacity Sensor Type)를 스키마 형태로 도시한 구조도.
도 17은 본 발명의 바람직한 실시예에 따른 기계 센서 타입(machinery sensor type)를 스키마 형태로 도시한 구조도.
도 18은 본 발명의 바람직한 실시예에 따른 길이 센서 타입(Lengt Sensor Type)를 스키마 형태로 도시한 구조도.
도 19는 본 발명의 바람직한 실시예에 따른 두께 센서 타입(Thickness Sensor Type)를 스키마 형태로 도시한 구조도.
도 20은 본 발명의 바람직한 실시예에 따른 변위 센서 타입(Displacement Sensor Type)를 스키마 형태로 도시한 구조도.
도 21은 본 발명의 바람직한 실시예에 따른 속도 센서 타입(Velocity Sensor Type)를 스키마 형태로 도시한 구조도.
도 22는 본 발명의 바람직한 실시예에 따른 유속 센서 타입(FlowVelocity Sensor Type)를 스키마 형태로 도시한 구조도.
도 23은 본 발명의 바람직한 실시예에 따른 풍속 센서 타입(Air Velocity Sensor Type)를 스키마 형태로 도시한 구조도.
도 24는 본 발명의 바람직한 실시예에 따른 가속도 센서 타입(Acceleration Sensor Type)를 스키마 형태로 도시한 구조도.
도 25는 본 발명의 바람직한 실시예에 따른 압력 센서 타입(Pressure Sensor Type)를 스키마 형태로 도시한 구조도.
도 26은 본 발명의 바람직한 실시예에 따른 회전력 센서 타입(Torque Sensor Type)를 스키마 형태로 도시한 구조도.
도 27은 본 발명의 바람직한 실시예에 따른 회전각 센서 타입(Rotatory Sensor Type)를 스키마 형태로 도시한 구조도.
도 28은 본 발명의 바람직한 실시예에 따른 회전수 센서 타입(Rotatory Frequency Sensor Type)를 스키마 형태로 도시한 구조도.
도 29는 본 발명의 바람직한 실시예에 따른 모멘트 센서 타입(Moment Frequency Sensor Type)를 스키마 형태로 도시한 구조도.
도 30은 본 발명의 바람직한 실시예에 따른 진공도 센서 타입(Vacuum Sensor Type)를 스키마 형태로 도시한 구조도.
도 31은 본 발명의 바람직한 실시예에 따른 진동 센서 타입(Oscillation Sensor Type)를 스키마 형태로 도시한 구조도.
도 32는 본 발명의 바람직한 실시예에 따른 질량 센서 타입(Mass Sensor Type)를 스키마 형태로 도시한 구조도.
도 33은 본 발명의 바람직한 실시예에 따른 무게 센서 타입(Weight Sensor Type)를 스키마 형태로 도시한 구조도.
도 34는 본 발명의 바람직한 실시예에 따른 온도 센서 타입(Temperature Sensor Type)를 스키마 형태로 도시한 구조도.
도 35는 본 발명의 바람직한 실시예에 따른 광학정보 센서 타입(Optical Sensor Type)를 스키마 형태로 도시한 구조도.
도 36은 본 발명의 바람직한 실시예에 따른 조명 센서 타입(Light Sensor Type)를 스키마 형태로 도시한 구조도.
도 37은 본 발명의 바람직한 실시예에 따른 조도 센서 타입(Illuminance Sensor Type)를 스키마 형태로 도시한 구조도.
도 38은 본 발명의 바람직한 실시예에 따른 자외선 센서 타입(Ultraviolet Rays Sensor Type)를 스키마 형태로 도시한 구조도.
도 39는 본 발명의 바람직한 실시예에 따른 적외선 센서 타입(Infrared Rays Sensor Type)를 스키마 형태로 도시한 구조도.
도 40은 본 발명의 바람직한 실시예에 따른 화학 센서 타입(Chemistry Sensor Type)를 스키마 형태로 도시한 구조도.
도 41은 본 발명의 바람직한 실시예에 따른 순도 센서 타입(Purity Sensor Type)를 스키마 형태로 도시한 구조도
도 42는 본 발명의 바람직한 실시예에 따른 농도 센서 타입(Concentration Sensor Type)를 스키마 형태로 도시한 구조도.
도 43은 본 발명의 바람직한 실시예에 따른 Density Sensor Type을 스키마 형태로 도시한 구조도.
도 44는 본 발명의 바람직한 실시예에 따른 PH 센서 타입(PH Sensor Type)를 스키마 형태로 도시한 구조도.
도 45는 본 발명의 바람직한 실시예에 따른 점성 센서 타입(Viscosity Sensor Type)를 스키마 형태로 도시한 구조도.
도 46은 본 발명의 바람직한 실시예에 따른 생체 센서 타입(Bionics Sensor Type)를 스키마 형태로 도시한 구조도.
도 47은 본 발명의 바람직한 실시예에 따른 혈액형 센서 타입(Blood Groups Sensor Type)를 스키마 형태로 도시한 구조도.
도 48은 본 발명의 바람직한 실시예에 따른 맥박 센서 타입(Pulse Sensor Type)를 스키마 형태로 도시한 구조도.
도 49는 본 발명의 바람직한 실시예에 따른 혈압 센서 타입(Blood Pressure Sensor Type)를 스키마 형태로 도시한 구조도.
도 50은 본 발명의 바람직한 실시예에 따른 뇌파 센서 타입(Brain Waves Sensor Type)를 스키마 형태로 도시한 구조도.
도 51은 본 발명의 바람직한 실시예에 따른 심전도 센서 타입(Electrocardiogram Sensor Type)를 스키마 형태로 도시한 구조도.
도 52는 본 발명의 바람직한 실시예에 따른 Electromyogram Sensor Type을 스키마 형태로 도시한 구조도.
도 53은 본 발명의 바람직한 실시예에 따른 Motion Sensor Type을 스키마 형태로 도시한 구조도.
도 54는 본 발명의 바람직한 실시예에 따른 위치 센서 타입(Position Sensor Type)를 스키마 형태로 도시한 구조도.
도 55는 본 발명의 바람직한 실시예에 따른 방향 센서 타입(Orientation Sensor Type)를 스키마 형태로 도시한 구조도.
도 56는 본 발명의 바람직한 실시예에 따른 각속도 센서 타입(Angular Velocity Sensor Type)를 스키마 형태로 도시한 구조도.
도 57은 본 발명의 바람직한 실시예에 따른 각가속도 센서 타입(Angular Acceleration Sensor Type)를 스키마 형태로 도시한 구조도.
도 58은 본 발명의 바람직한 실시예에 따른 UVP 메타데이터의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도.
도 59는 본 발명의 바람직한 실시예에 따른 User Virtual Preference Type 메타데이터를 스키마 형태로 도시한 구조도.
도 60는 본 발명의 바람직한 실시예에 따른 아바타 선호 타입(Avatar Preference Type) 메타데이터를 스키마 형태로 도시한 구조도.
도 61은 본 발명의 바람직한 실시예에 따른 VOI 메타데이터의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도.
도 62는 본 발명의 바람직한 실시예에 따른 VWOC Info Type 메타데이터를 스키마 형태로 도시한 구조도.
도 63는 본 발명의 바람직한 실시예에 따른 VWO Base Type 메타데이터를 스키마 형태로 도시한 구조도.
도 64는 본 발명의 바람직한 실시예에 따른 Avatar Type 메타데이터를 스키마 형태로 도시한 구조도.
도 65는 본 발명의 바람직한 실시예에 따른 Virtual Object Type 메타데이터를 스키마 형태로 도시한 구조도.
도 66은 본 발명의 바람직한 실시예에 따른 가상 객체 명령(Virtual Object Command, VOC) 메타데이터를 스키마 형태로 도시한 구조도.
도 67은 본 발명의 바람직한 실시예에 따른 VOC Base Type 메타데이터를 스키마 형태로 도시한 구조도.
도 68은 본 발명의 바람직한 실시예에 따른 Group of Virtual Object Commands Type 메타데이터를 스키마 형태로 도시한 구조도.
도 69는 본 발명의 바람직한 실시예에 따른 Virtual Object Command Type 메타데이터를 스키마 형태로 도시한 구조도.
도 70은 본 발명의 바람직한 실시예에 따른 Appearance Command Type 메타데이터를 스키마 형태로 도시한 구조도.
도 71은 본 발명의 바람직한 실시예에 따른 Animation Command Type 메타데이터를 스키마 형태로 도시한 구조도.

이하, 첨부된 도면에 따라서 본 발명의 구성을 보다 상세히 설명한다. 여기서 각 도면에 붙여진 도면부호는 일관성을 유지하고 있으므로 다른 도면이라도 동일한 부호로 표기된 것은 동일한 구성 및 작용을 가지는 것으로 해석되어야 한다.

도 1은 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 시스템을 나타내는 블록도이다. 도 2는 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법을 나타내는 전체적인 순서도이며, 도 3은 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법을 바람직한 실시예에 따라 설명하기 위한 순서도이다.

이하에서는 도 1 및 도 2를 통해서 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법에 대해 전체적인 개념을 설명한다.

먼저 가상 객체(114)를 제어하기 위한 가상 객체 명령 정보를 생성하기 위해 참조 메타데이터를 생성한다(S10). 여기서 참조 메타데이터는 센서 정보를 통해 얻어진 센서 정보 메타데이터, 가상 객체 정보를 통해 얻어진 가상 객체 정보 메타데이터일 수 있으며, 나아가 사용자의 선호에 따라 입력된 사용자 선호 정보를 통해 얻어진 사용자 선호 메타데이터를 포함할 수 있다. 이렇게 얻어진 참조 메타데이터를 이용해 실/가상 세계 적응 엔진부(110)는 가상 객체(114)를 제어하기 위해 가상 객체 명령 정보를 생성하게 된다(S20). 그 후 가상 객체 명령 메타데이터 생성부(108)는 가상 객체 명령 정보를 이용하여 가상 객체 명령 메타데이터를 생성하고(S30), 가상 객체 제어부(112)는 상기 가상 객체 명령 메타데이터를 이용하여 가상 객체를 제어하도록 한다(S40).

이하에서는 본 발명의 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 시스템을 보다 구체적으로 설명한다.

도 1에 도시된 바와 같이 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 시스템은, 적어도 하나 이상의 센서(100)와, 센서 정보를 이용하여 센서 정보 메타데이터를 생성하는 센서 정보 메타데이터 생성부(102)와, 사용자의 선호 정보 메타데이터 생성부(104)와, 가상 객체 정보 메타데이터 생성부(106)와, 가상객체 명령 메타데이터 생성부(108)와, 실/가상 세계 적응 엔진부(110)와, 가상 객체 제어부(112)와, 통신 채널부(116)를 포함한다.

실/가상 세계 적응엔진부(110)는 각각의 메타데이터 생성부(102, 104, 106)를 통해 입력받은 센서 정보 메타데이터, 사용자 선호 메타데이터, 가상객체 정보 메타데이터를 토대로 가상객체 제어를 위한 가상객체 명령 정보를 생성한다.

예를 들어, 상기 실/가상 세계 적응엔진부(110)는 센서 정보에 사용자 선호 정보를 반영한 상태에서 가상 객체 정보를 기초로 가상객체 명령 정보를 생성한다. 여기서 상기 가상객체 명령 정보는 가상객체 제어부(112)에서 제어 가능한 가상 객체(114)들과 그 제어 범위를 설정한다.

센서정보 메타데이터 생성부(102)는 센서로부터 받아들인 센서 정보를 서술하는 센서 정보 메타데이터를 생성하고, 사용자 선호 메타데이터 생성부(104)는 가상 객체의 표현 방법 등과 관련한 사용자 선호 정보를 서술하는 사용자 선호 메타데이터를 생성하며, 가상 객체 정보 메타데이터 생성부(106)는 가상 객체 제어부(112)에 의해 취득된 가상 객체 정보를 서술하는 가상 객체 정보 메타데이터를 생성한다.

가상객체 명령 메타데이터 생성부(108)는 상기 센서정보 메타데이터, 가상객체 정보 메타데이터, 나아가 사용자 선호 메타데이터를 토대로 가상객체를 제어하기 위한 정보를 상기 가상 객체 명령 메타데이터 생성부(108)로 전송한다. 상기 가상 객체 명령 메타데이터 생성부(108)는 전송 받은 정보를 통해 가상 객체를 제어하기 위한 정보를 서술하는 가상 객체 명령 메타데이터를 생성한다.

한편 통신 채널부(116)는 유선 통신일 수 있으며 게이트웨이를 통한 무선 통신일 수 있다. 즉 데이터 송수신이 가능한 통신 방식이면 충분하다.

한편 본 발명은 메타데이터를 표준화된 형식 및 구조에 따라 서술하는 단계에 있어서 MPEG-7 서술 구조 표준(Multimedia Description Scheme, MDS)과 MPEG-21의 디지털 아이템 적응(Digital Item Adaptation, DIA) 서술 구조 표준을 이용한다.

도 4는 본 발명의 바람직한 실시예에 따른 센서 정보(sensored information, SI) 메타데이터의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도이다.

[표 1]은 센서 정보 메타데이터의 서술 구조를 확장성 생성언어(eXtensible Markup Language, XML) 스키마(Schema) 형태로 나타낸 것이다.

[표 1]에서, "SI"는 센서 정보(Senstored Information) 메타데이터의 루트 엘리먼트이고, "SensedInfoList"은 Sensed Information List를 서술한다. 한편 "anyAttribute"는 속성 정보에 대한 확장 가능성을 제공하기 위한 선언이다.

도 5는 본 발명의 바람직한 실시예에 따른 Sensed Info Base Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 2]는 Sensed Info Base Type 메타데이터의 서술 구조를 확장성 생성 언어 XML 스키마 형태로 나타낸 것이다.

[표 2]에서, "SensoredInformationBaseType"은 센서 정보(Sensored Information) 메타데이터의 기본이 되는 타입을 선언하고, "Timestamp"는 센서 정보의 획득시간의 간격 정보 및 시간정보를 표현하는 것이며, "id"는 센서의 ID 정보를 기술하는 것이고, "sensorIdRef"는 이미 선언된 센서의 ID 참조 정보를 기술하는 것이며, "linkedlist"는 센서와 관련된 정보의 리스트 정보를 표현하는 것이고, "groupID"는 센서 그룹의 ID 정보를 기술하는 것이며, "activate"는 센서의 활성화 여부(true 또는 false 값으로 표현)를 표현하는 것이고, "priority"는 센서의 우선순위 정보를 기술하는 것이다.

도 6은 본 발명의 바람직한 실시예에 따른 Sensed Info List Type의 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 3]은 Sensed Info List Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 3]에서, "SensedInfoListType"은 SensedInfoListType 메타데이터의 엘리먼트 선언이다. 그리고 "SensedInfo"는 Sensed Information 메타데이터의 element 기본 타입이며, 이 타입은 Sensed Information을 서술하기 위해 여러 가지 종류의 센서 타입에 따라 정보를 기술할 수 있도록, 추상화 타입으로 선언되어, 확장성을 제공한다.

도 7은 본 발명의 바람직한 실시예에 따른 Electricity Sensor Type의 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 4]는 상기 Electricity Sensor Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 4]에서, "ElectricityType"은 전기 정보를 처리하는 센서 타입의 엘리먼트이고 기본적으로 Sensored Information Type를 확장한다.

"Current"는 전류 정보를 서술하는 엘리먼트이고, "Voltage"는 전압 정보를 서술하는 엘리먼트이며, "Potential"은 전위 정보를 서술하는 엘리먼트이고, "Power"는 전력 정보를 서술하는 엘리먼트이며, "Charge"는 전하 정보를 서술하는 엘리먼트이고, "Impedence"는 임피던스 정보를 서술하는 엘리먼트이며, "resistance"는 저항정보를 서술하는 엘리먼트이고, "Resistance"는 저항 정보를 서술하는 엘리먼트이며, "Inductance"는 인덕턴스 정보를 서술하는 엘리먼트이고, "Capacity"는 전기 용량 정보를 서술하는 엘리먼트이다.

[표 5]는 상기 Current Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 5]에서, "CurrentSensorType"은 전류 정보를 처리하는 센서 타입의 element이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전류 값을 표현하는 것이고, "unit"는 전류 값의 단위를 나타낼 때 사용되는 것이며, 단위는 A (암페어)이다.

그리고 "unitType"은 표현되는 값의 단위를 나타낼 때 사용되는 것으로, 여기에 기술되는 정보는 부록에 기재된 Classification Schemes 의 UnitCS 정보를 사용하여 기술한다.

도 8에는 본 발명의 바람직한 실시예에 따른 커런트 센서 타입(Current Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 6]은 상기 Voltage Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 6]에서, "VoltageSensorType"는 전압 정보를 처리하는 센서 타입의 element 이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전압 값을 표현하고, "unit"는 전압 값의 단위를 나타낼 때 사용되며, 단위는 V (볼트)이다.

도 9에는 본 발명의 바람직한 실시예에 따른 볼티지 센서 타입(Voltage Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 7]은 상기 Potential Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 7]에서, "PotentialSensorType"는 전위 정보를 처리하는 센서 타입의 element 이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전위 값을 표현하고, "unit"는 전위 값의 단위를 나타낼 때 사용되며, 단위는 V (볼트)이다.

도 10에는 본 발명의 바람직한 실시예에 따른 포텐셜 센서 타입(Potential Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 8]은 상기 Power Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 8]에서, "PowerSensorType"는 전력 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전력 값을 표현하고, "unit"는 전력 값의 단위를 나타낼 때 사용되며, 단위는 W(와트)이다.

도 11에는 본 발명의 바람직한 실시예에 따른 파워 센서 타입(Power Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 9]는 상기 Charge Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 9]에서, "ChargeSensorType"는 전하 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전하 값을 표현하고, "unit"는 전하 값의 단위를 나타낼 때 사용되며, 단위는 C(클롱)이다.

도 12에는 본 발명의 바람직한 실시예에 따른 차지 센서 타입(Charge Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 10]은 상기 Impedance Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 10]에서, "ImpedanceSensorType"는 전하 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다. 이때, 저항, 코일, 축전기가 직렬로 연결된 교류회로의 합성저항을 임피던스라고 한다. 임피던스는 전압과 전류의 비율 외에 위상도 함께 나타내는 벡터량이다. 복소수 Z = R + ix (i는 허수단위)로 표시하며 실수부분 R은 저항값이며, 허수부분 x는 리액턴스이다.

"resistance"는 임피던스 중 저항값 R을 의미하며, 실수로 표현되고, "reactance"는 임피던스 중 저항값 R을 의미하며, 실수로 표현된다.

"unit"는 임피던스 값의 단위를 나타낼 때 사용되며, 단위는 옴(Ω)이다.

도 13에는 본 발명의 바람직한 실시예에 따른 임피던스 센서 타입(Impedance Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 11]은 상기 Resistance Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 11]에서, "ResistanceSensorType"는 저항 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 저항 값을 표현하고, "unit"는 저항 값의 단위를 나타낼 때 사용되며, 단위는 옴(Ω)이다.

도 14에는 본 발명의 바람직한 실시예에 따른 Resistance Sensor Type을 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 12]는 상기 Inductance Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 12]에서, "InductanceSensorType"는 인덕턱스 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 인덕턴스 값을 표현하고, "unit"는 인덕턴스 값의 단위를 나타낼 때 사용되며, 단위는 헨리(H)이다.

도 15에는 본 발명의 바람직한 실시예에 따른 인덕턴스 센서 타입(Inductance Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 13]은 상기 Capacity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 13]에서, "CapacitySensorType"는 전기용량 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 전기용량 값을 표현하고, "unit"는 전기용량 값의 단위를 나타낼 때 사용되며, 단위는 패럿(F)이다.

도 16에는 본 발명의 바람직한 실시예에 따른 전기용량 센서 타입(Capacity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 14]는 상기 기계 센서 타입(machinery sensor type)의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 14]에서, "MachinerysensorType"은 기계(장치) 정보를 처리하는 센서 타입의 엘리먼트로서, 기본적으로 Sensored Information Type을 확장한다.

"Length"는 길이 정보를 서술하고, "Thickness"는 두께 정보를 서술하며, "Displacement"는 변위 정보를 서술하고, "Velocity"는 속도 정보를 서술하며, "FlowVelocity"는 유속 정보를 서술하고, "AirVelocity"는 풍속 정보를 서술하며, "Acceleration"은 가속도 정보를 서술하고, "Pressure"는 압력 정보를 서술하며, "Torque"는 회전력 정보를 서술하고, "RotatoryAngle"은 회전각 정보를 서술하며, "RotatoryFrequency"는 회전수 정보를 서술하고, "Moment"는 모멘트 정보를 서술하며, "Vacuum"은 진공도 정보를 서술하고, "Oscillation"은 진동 정보를 서술하며, "Mass"는 질량 정보를 서술하고, "Weight"는 무게 정보를 서술한다.

도 17에는 본 발명의 바람직한 실시예에 따른 센서 정보 중 기계 센서 타입(machinery sensor type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 15]는 상기 Length Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 15]에서, "LengthSensorType"는 길이 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 길이 값을 표현하고, "unit"는 길이 값의 단위를 나타낼 때 사용되며, 단위는 미터(m)이다.

도 18에는 본 발명의 바람직한 실시예에 따른 길이 센서 타입(Lengt Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 16]은 상기 Thickness Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 16]에서, "ThicknessSensorType"는 두께 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 두께 값을 표현하고, "unit"는 두께 값의 단위를 나타낼 때 사용되며, 단위는 밀리미터(mm)이다.

도 19에는 본 발명의 바람직한 실시예에 따른 두께 센서 타입(Thickness Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 17]은 상기 Displacement Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 17]에서, "DisplacementSensorType"는 변위 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Displacement"는 변위 값을 표현하고, 변위는 위치의 변화량이며, 크기와 방향을 가지는 벡터로 표현된고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 변위 값의 단위를 나타낼 때 사용된다.

"Float3DVectorType"는 3차원 벡터 정보를 표현할 때 사용되는 타입의 엘리먼트이고, "x"는 x값 정보를 서술하고, "y"는 y값 정보를 서술하고, "z"는 z값 정보를 서술한다.

도 20에는 본 발명의 바람직한 실시예에 따른 변위 센서 타입(Displacement Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 18]은 상기 Velocity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 18]에서, "VelocitySensorType"는 속도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 속도 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되며, 기본적으로 Float3DVectorType 을 확장한다.

"Velocity"는 속도 값을 나타낼 때 사용되며, 단위는 m/s 또는 km/h 이다.

도 21에는 본 발명의 바람직한 실시예에 따른 속도 센서 타입(Velocity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 19]는 상기 FlowVelocity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 19]에서, "FlowVelocitySensorType"는 유속 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"FlowVelocity는 유속 값을 표현하고, 유속은 유체분자의 이동 속도를 의미하며, 크기와 방향을 가지는 벡터량으로 표현되고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 유속 값의 단위를 나타낼 때 사용되고, 단위는 m/s 이다.

도 22에는 본 발명의 바람직한 실시예에 따른 유속 센서 타입(FlowVelocity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 20]은 상기 Air Velocity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 20]에서, "Air VelocitySensorType"는 풍속 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Air Velocity"는 풍속 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 풍속 값의 단위를 나타낼 때 사용되고, 단위는 m/s 이다.

도 23에는 본 발명의 바람직한 실시예에 따른 풍속 센서 타입(Air Velocity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 21]는 상기 Acceleration Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 21]에서, "AccelerationSensorType"는 가속도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Acceleration"는 가속도 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 가속도 값의 단위를 나타낼 때 사용되고, 단위는 m/s² 이다.

도 24에는 본 발명의 바람직한 실시예에 따른 가속도 센서 타입(Acceleration Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 22]는 상기 Pressure Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 22]에서, "PressureSensorType"는 압력 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 압력 값을 표현하고, "unit"는 압력 값의 단위를 나타낼 때 사용되고, 단위는 CGS단위계는 dyn/cm2, MKS단위계는 N/m2(=Pa:파스칼), 기상학에서는 hPa(헥토파스칼)?bar(바)?mbar(밀리바), 공업상으로는 atm 또는 kgW/cm2 등이 사용되고 있으며 이들 단위 중 하나로 사용한다.

도 25에는 본 발명의 바람직한 실시예에 따른 압력 센서 타입(Pressure Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 23]은 상기 Torque Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 23]에서, "TorqueSensorType"는 회전력 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Torque"는 회전력 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 회전력 값의 단위를 나타낼 때 사용되고, 단위는 N?m 또는 τ (타우)이다.

도 26에는 본 발명의 바람직한 실시예에 따른 회전력 센서 타입(Torque Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 24]는 상기 Rotatory Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 24]에서, "RotatorySensorType"는 회전각 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value는 회전각 값을 표현하고, "unit"는 회전각 값의 단위를 나타낼 때 사용되고, 단위는 도(°)이다.

도 27에는 본 발명의 바람직한 실시예에 따른 회전각 센서 타입(Rotatory Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 25]는 상기 Rotatory Frequency Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 25]에서, "Rotatory Frequency SensorType"는 회전수 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value는 회전수 값을 표현하고, "unit"는 회전수 값의 단위를 나타낼 때 사용되고, 단위는 rpm이다.

도 28에는 본 발명의 바람직한 실시예에 따른 회전수 센서 타입(Rotatory Frequency Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 26]은 상기 Moment Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 26]에서, "MomentSensorType"는 모멘트 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"f"는 모멘트 중 반지름 벡터 정보를 서술하며, 단위는 θ (편각)이고, 기본적으로 Float3DVectorType 을 확장한다.

"F"는 모멘트 중 힘의 벡터 정보를 서술하며, 단위는 벡터이고, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 모멘트 값의 단위를 나타낼 때 사용하며, 단위는 반지름 벡터와 힘의 벡터의 외적인 [r,F]로 정의되는 벡터량이다.

도 29에는 본 발명의 바람직한 실시예에 따른 모멘트 센서 타입(Moment Frequency Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 27]은 상기 Vacuum Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 27]에서, "VacuumSensorType"는 진공도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 진공도 값을 표현하고, "unit"는 진공도 값의 단위를 나타낼 때 사용되고, 단위는 mmHg이다.

도 30에는 본 발명의 바람직한 실시예에 따른 진공도 센서 타입(Vacuum Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 28]은 상기 Oscillation Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 28]에서, "OscillationSensorType"는 진동 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 진동 값을 표현하고, "unit"는 진동 값의 단위를 나타낼 때 사용되고, 단위는 Hz이다.

도 31에는 본 발명의 바람직한 실시예에 따른 진동 센서 타입(Oscillation Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 29]는 상기 Mass Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 29]에서, "MassSensorType"는 질량 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 질량 값을 표현하고, "unit"는 질량 값의 단위를 나타낼 때 사용되고, 단위는 Kg, g, mg 등이다.

도 32에는 본 발명의 바람직한 실시예에 따른 질량 센서 타입(Mass Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 30]은 상기 Weight Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 30]에서, "WeightSensorType"는 무게 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 무게 값을 표현하고, "unit"는 무게 값의 단위를 나타낼 때 사용되고, 단위는 kg중, g중, mg중 등이다.

도 33에는 본 발명의 바람직한 실시예에 따른 무게 센서 타입(Weight Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 31]은 상기 Temperature Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 31]에서, "TemperatureSensorType"는 온도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 온도 값을 표현하고, "unit"는 온도 값의 단위를 나타낼 때 사용되고, 단위는 ℃, ℉, K 등이다.

도 34에는 본 발명의 바람직한 실시예에 따른 온도 센서 타입(Temperature Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 32]는 상기 Optical Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 32]에서, "OpticalSensorType"는 광학 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Light"는 조명정보를 서술하고, "Illuminance"는 조도정보를 서술하며, "UltravioletRays"는 자외선 정보를 서술하고, "InfraredRays"는 적외선 정보를 서술한다.

도 35에는 본 발명의 바람직한 실시예에 따른 광학정보 센서 타입(Optical Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 33]은 상기 Light Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 33]에서, "LightSensorType"는 조명 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 조명 값을 표현하고, "unit"는 조명 값의 단위를 나타낼 때 사용되고, 단위는 lx (럭스), nm 등이다. "color"는 컬러 정보를 서술하고, colorType을 사용한다.

도 36에는 본 발명의 바람직한 실시예에 따른 조명 센서 타입(Light Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 34]는 상기 Illuminance Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 34]에서, "IlluminanceSensorType"는 조도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 조도 값을 표현하고, "unit"는 조도 값의 단위를 나타낼 때 사용되고, 단위는 lx (럭스)이다.

도 37에는 본 발명의 바람직한 실시예에 따른 조도 센서 타입(Illuminance Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 35]는 상기 Ultraviolet Rays Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 35]에서, "Ultraviolet RaysSensorType"는 자외선 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 자외선 값을 표현하고, "unit"는 자외선 값의 단위를 나타낼 때 사용되고, 단위는 nm이다.

도 38에는 본 발명의 바람직한 실시예에 따른 자외선 센서 타입(Ultraviolet Rays Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 36]은 상기 Infrared Rays Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 36]에서, "Infrared RaysSensorType"는 적외선 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 적외선 값을 표현하고, "unit"는 적외선 값의 단위를 나타낼 때 사용되고, 단위는 nm이다.

도 39에는 본 발명의 바람직한 실시예에 따른 적외선 센서 타입(Infrared Rays Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 37]은 상기 Chemistry Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 37]에서, "ChemistrySensorType"는 화학 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Purity"는 순도정보를 서술하고, "Concentration"는 농도 정보를 서술하며, "Density"는 밀도정보를 서술하고, "PH"는 PH 정보를 서술하며, "Viscosity"는 점성정보를 서술한다.

도 40에는 본 발명의 바람직한 실시예에 따른 화학 센서 타입(Chemistry Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 38]은 상기 Purity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 38]에서, "PuritySensorType"는 순도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 순도 값을 표현하고, "unit"는 순도 값의 단위를 나타낼 때 사용되고, 단위는 ppm이다.

도 41에는 본 발명의 바람직한 실시예에 따른 순도 센서 타입(Purity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 39]는 상기 Concentration Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 39]에서, "ConcentrationSensorType"는 농도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 농도 값을 표현하고, "unit"는 농도 값의 단위를 나타낼 때 사용되고, 단위는 퍼센트 농도(%), 몰농도(mol/ℓ 또는 M), 몰랄농도(mol/kg), 노르말농도(N) 등이 있다.

도 42에는 본 발명의 바람직한 실시예에 따른 농도 센서 타입(Concentration Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 40]은 상기 Density Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 40]에서, "DensitySensorType"는 밀도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 밀도 값을 표현하고, "unit"는 밀도 값의 단위를 나타낼 때 사용되고, 단위는 g/㎖, g/㎤ 등이 있다.

도 43에는 본 발명의 바람직한 실시예에 따른 Density Sensor Type을 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 41]은 상기 PH Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 41]에서, "PHSensorType"는 PH 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 PH 값을 표현하고, "unit"는 PH 값의 단위를 나타낼 때 사용된다.

도 44에는 본 발명의 바람직한 실시예에 따른 PH 센서 타입(PH Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 42]는 상기 Viscosity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 42]에서, "ViscositySensorType"는 점성 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 점성 값을 표현하고, "unit"는 점성 값의 단위를 나타낼 때 사용된다.

도 45에는 본 발명의 바람직한 실시예에 따른 점성 센서 타입(Viscosity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 43]은 상기 Bionics Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 43]에서, "BionicsSensorType"는 생체 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"BloodGroups"는 혈액형 정보를 서술하고, "BodyTemperature"는 체온정보를 서술하며, "Pulse"는 맥박 정보를 서술하고, "BloodPressure"는 혈압 정보를 서술하며, "BloodPressure"는 뇌파 정보를 서술하고, "Electrocardiogram"는 심전도 정보를 서술하며, "Electromyogram"는 근전도 정보를 서술한다.

도 46에는 본 발명의 바람직한 실시예에 따른 생체 센서 타입(Bionics Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 44]는 상기 Blood Groups Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 44]에서, "Blood GroupsSensorType"는 혈액형 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장하고, ABO식과 Rh식을 함께 사용한다.

"Type"는 ABO식 혈액형 정보를 서술하고, "Rh"는 Rh식 혈액형 정보를 서술한다.

도 47에는 본 발명의 바람직한 실시예에 따른 혈액형 센서 타입(Blood Groups Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 45]는 상기 Pulse Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 45]에서,"PulseSensorType"는 맥박 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 맥박 횟수를 표현하고, "unit"는 맥박 값의 단위를 나타낼 때 사용된다. 단위는 1분당 맥박횟수를 의미한다.

도 48에는 본 발명의 바람직한 실시예에 따른 맥박 센서 타입(Pulse Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 46]은 상기 Blood Pressure Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 46]에서, "Blood PressureSensorType"는 혈압 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"low"는 최저 혈압 정보를 서술하고, "high"는 최고 혈압정보를 서술하며, "unit"는 혈압 값의 단위를 나타낼 때 사용되고, 단위는 mmHg 이다.

도 49에는 본 발명의 바람직한 실시예에 따른 혈압 센서 타입(Blood Pressure Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 47]은 상기 Brain Waves Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 47]에서, "Brain WavesSensorType"는 뇌파 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 뇌파값을 표현하고, "unit"는 뇌파 값의 단위를 나타낼 때 사용되고, 단위는 Hz 이다.

도 50에는 본 발명의 바람직한 실시예에 따른 뇌파 센서 타입(Brain Waves Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 48]은 상기 Electrocardiogram Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 48]에서, "ElectrocardiogramSensorType"는 심전도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 심전도 값을 표현하고, "unit"는 심전도 값의 단위를 나타낼 때 사용되고, 단위는 pulse로 진동형태를 표현 할 수 있도록 여러 개의 점(벡터)으로 표현한다.

도 51에는 본 발명의 바람직한 실시예에 따른 심전도 센서 타입(Electrocardiogram Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 49]는 상기 Electromyogram Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 49]에서, "ElectromyogramSensorType"는 근전도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"value"는 근전도 값을 표현하고, "unit"는 근전도 값의 단위를 나타낼 때 사용되고, 단위는 pulse로 진동형태를 표현 할 수 있도록 여러 개의 점(벡터)으로 표현한다

도 52에는 본 발명의 바람직한 실시예에 따른 Electromyogram Sensor Type을 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 50]은 상기 Motion Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 50]에서, "MotionSensorType"는 모션(사람의 움직임) 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Position"는 위치정보를 서술하고, "Orientation"는 방향정보를 서술하며, "Velocity는 속도 정보를 서술하고, "Angularvelocity"는 각속도 정보를 서술하며, "Angularvelocity"는 가속도 정보를 서술하고, "Angularacceleration"는 각가속도 정보를 서술한다.

도 53에는 본 발명의 바람직한 실시예에 따른 Motion Sensor Type을 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 51]은 상기 Position Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 51]에서, "PositionSensorType"는 위치 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Position"은 위치 값을 표현하고, 기본적으로 Float3DVectorType 을 확장한다. "unit"는 위치 값의 단위를 나타낼 때 사용된다.

도 54에는 본 발명의 바람직한 실시예에 따른 위치 센서 타입(Position Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 52]는 상기 Orientation Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 52]에서, "OrientationSensorType"는 방향 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"Orientation"은 방향 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되며, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 방향 값의 단위를 나타낼 때 사용된다.

도 55에는 본 발명의 바람직한 실시예에 따른 방향 센서 타입(Orientation Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 53]은 상기 Angular Velocity Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 53]에서, "AngularVelocitySensorType"는 각속도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"AngularVelocity "은 각속도 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되며, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 각속도 값의 단위를 나타낼 때 사용되고, 단위는 m/s 또는 km/h 이다.

도 56에는 본 발명의 바람직한 실시예에 따른 각속도 센서 타입(Angular Velocity Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

[표 54]는 상기 Angular Acceleration Sensor Type의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 54]에서, "AngularAccelerationSensorType"는 각가속도 정보를 처리하는 센서 타입의 엘리먼트이고, 기본적으로 Sensored Information Type을 확장한다.

"AngularAcceleration "은 각가속도 값을 표현하고, 크기와 방향을 가지는 벡터량으로 표현되며, 기본적으로 Float3DVectorType 을 확장한다.

"unit"는 각가속도 값의 단위를 나타낼 때 사용되고, 단위는 m/s² 이다.

도 57에는 본 발명의 바람직한 실시예에 따른 각가속도 센서 타입(Angular Acceleration Sensor Type)를 스키마 형태로 도시한 구조도가 도시되어 있다.

도 58은 본 발명의 바람직한 실시예에 따른 사용자 선호(user preference) 메타데이터(이하 UVP 메타데이터)의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도이다. 상기 UVP 메타데이터의 엘리먼트는 사용자 식별자(User Identifier)와 사용자 가상 선호 타입(User Virtual Preference type) 엘리먼트를 포함한다.

[표 55]는 사용자 선호 메타데이터의 서술 구조를 확장성 생성언어(eXtensible Markup Language, XML) 스키마(Schema) 형태로 나타낸 것이다.

[표 55]에서, "UVP"는 User (Virtual Object) Preference 메타데이터의 루트 엘리먼트이다.

"UserIdentifier"는 사용자 식별 정보를 서술한다.

"UserVirtualPref"는 사용자의 가상 객체에 대한 선호 정보를 서술한다.

"anyAttribute"는 속성 정보에 대한 확장 가능성을 제공하기 위한 선언이다.

도 59는 본 발명의 바람직한 실시예에 따른 User Virtual Preference Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 56]은 User Virtual Preference Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 56]에서, "UserVirtualPrefType"은 User Virtual(Object) Preference 메타데이터의 엘리먼트 기본 타입으로서, 사용자의 가상 객체에 대한 선호 정보를 서술하기 위해 가상 객체의 종류에 따라 정보를 기술할 수 있도록, 추상화 타입으로 선언되어 확장성을 제공한다.

"UserVirtualPrefBaseAttributes"는 사용자의 가상 객체 선호 정보를 서술하기 위해 필요한 기본 속성값들을 정의한 것이다.

"activate"는 활성화 여부를 서술하고 true나 false 값을 가질 수 있다.

"adaptationMode"는 선호 정보의 적용 정도에 대한 정보를 서술하고 Strict는 엄격하게 적용하는 것을 의미하며, scalable은 비교적 적당히 적용하는 것을 의미한다.

도 60는 본 발명의 바람직한 실시예에 따른 아바타 선호 타입(Avatar Preference Type) 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 57]은 아바타 선호 타입 및 모드 타입 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 57]에서, "AvatarPrefType"은 가상 객체 중 아바타(Avatar)에 대한 선호 정보를 서술하기 위한 엘리먼트로서 기본적으로 User Virtual Pref Type을 확장한다.

"Mode"는 아바타의 변화나 반응에 대한 정도를 서술한다.

"High"는 입력되는 수치에 비해 더 크게 변화하거나 반응하도록 하고, 값은 100 이상의 값이 올릴수 있다.

"Normal"은 입력되는 수치 그대로 변화하거나 반응하도록 한다.

"Low"는 입력되는 수치에 비해 더 작게 변화하거나 반응하도록 하고, 값은 0 ~ 100 사이의 값이 올 수 있다.

도 61은 본 발명의 바람직한 실시예에 따른 가상 객체 정보(Virtual Object Information, VOI) 메타데이터(이하 VOI 메타데이터)의 루트 엘리먼트(root element)를 스키마 형태로 도시한 구조도이다.

[표 58]은 가상 객체 정보 메타데이터의 서술 구조를 속성값이 "VOI"로 선언된 확장성 생성언어(eXtensible Markup Language, XML) 스키마(Schema) 형태로 나타낸 것이다.

[표 58]에서, "VOI"는 Virtual Object Information 메타데이터의 루트 엘리먼트이고, 이 엘리먼트는 MPEG-V의 Virtual World Object Characteristic 스키마의 VWOCInfoType 엘리먼트를 확장해서 정의되었다.

"VWOCInfoType"은 가상 객체 정보를 서술하는 엘리먼트 타입이다.

도 62는 본 발명의 바람직한 실시예에 따른 VWOC Info Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 59]는 VWOC Info Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 59]에서, "VWOCInfoType"은 Virtual World Object Characteristics Information을 기술하기 위한 엘리먼트 타입으로 MPEG-V Part4 VWOC 스키마에 정의되어 있다.

"AvatarList"는 Avatar 정보를 서술하는 Avatar 엘리먼트들의 리스트를 기술하기 위한 엘리먼트로 AvatarListType으로 정의되어 있다.

"Avatar"는 Avatar 정보를 기술하는 엘리먼트이다.

"VirtualObjectList"는 Virtual Object 정보를 서술하는 Virtual Object 엘리먼트들의 리스트를 기술하기 위한 엘리먼트로 VirtualObjectType으로 정의되어 있다.

"VirtualObject"는 Virtual Object 정보를 기술하는 엘리먼트이다.

도 63는 본 발명의 바람직한 실시예에 따른 VWO Base Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 60]는 VWO Base Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 60]에서, "VWOBaseType"은 Virtual World Object 의 기본 데이터 형이고, 이 기본 데이터 형을 Avatar와 Virtual Object 타입의 엘리먼트에서 확장해서 사용하고 있다.

"Identification"는 Virtual World Object 의 식별 정보를 서술하는 엘리먼트이고, 기본적으로 MPEG-V VWOC 스키마의 IdentificationType 을 사용하여 서술하고 있다.

"SoundList"는 Virtual World Object 의 음향 정보들을 서술하는 엘리먼트이고, 기본적으로 MPEG-V VWOC 스키마의 VWOSoundListType 을 사용하여 서술하고 있다.

"ControlList"는 Virtual World Object 의 제어 정보들을 서술하는 엘리먼트이고, 기본적으로 MPEG-V VWOC 스키마의 VWOControlListType 을 사용하여 서술하고 있다.

"EventList"는 Virtual World Object 의 이벤트 정보들을 서술하는 엘리먼트이고, 기본적으로 MPEG-V VWOC 스키마의 VWOEventListType 을 사용하여 서술하고 있다.

"BehaviorModelList"는 Virtual World Object 의 행동 모델 정보들을 서술하는 엘리먼트이고, 기본적으로 MPEG-V VWOC 스키마의 VWOBehaviorModelListType 을 사용하여 서술하고 있다.

"id"는 Virtual World Object 의 ID 정보를 서술한다.

도 64는 본 발명의 바람직한 실시예에 따른 Avatar Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 61]는 Avatar Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 61]에서, "AvatarType"은 Avatar 정보를 기술하는 데이터 형이고, 기본적으로 VWOBaseType 엘리먼트를 확장해서 사용하고 있다.

"Appearance"는 Avatar 의 외형 정보를 기술하고, 기본적으로 MPEG-V VWOC 스키마의 AvatarAppearanceType 을 사용하여 서술하고 있다.

"Animation"는 Avatar 의 에니메이션 정보를 기술하고, 기본적으로 MPEG-V VWOC 스키마의 AvatarAnimationType 을 사용하여 서술하고 있다.

"CommunicationSkills"는 Avatar 의 대화 기술 정보에 대해 기술하고, 기본적으로 MPEG-V VWOC 스키마의 AvatarCommunicationSkillsType 을 사용하여 서술하고 있다.

"Personality"는 Avatar 의 개성 정보에 대해 기술하고, 기본적으로 MPEG-V VWOC 스키마의 AvatarPersonalityType 을 사용하여 서술하고 있다.

"ControlFeatures"는 Avatar 의 제어 모습에 대한 정보를 기술하고, 기본적으로 MPEG-V VWOC 스키마의 AvatarControlFeaturesType 을 사용하여 서술하고 있다.

"HapticPropertyList"는 Avatar 의 햅틱 속성 정보들에 대한 내용을 기술하고, 기본적으로 MPEG-V VWOC 스키마의 VWOHapticPropertyListType 을 사용하여 서술하고 있다.

"gender"는 Avatar의 성별정보를 기술한다.

도 65는 본 발명의 바람직한 실시예에 따른 Virtual Object Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 62]는 Virtual Object Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 62]에서, "VirtualObjectType"는 Virtual Object 정보를 기술하는 데이터 형이고, 기본적으로 VWOBaseType 엘리먼트를 확장해서 사용하고 있다.

"Appearance"는 Virtual Object 의 외형 정보를 기술하고, anyURI의 형태로 어떤 형태의 URI로도 외형 정보를 참조하고 있는 경로를 서술하여 표현 할 수 있다.

"Animation"는 Virtual Object 의 에니메이션 정보를 기술하고, 기본적으로 MPEG-V VWOC 스키마의 VOAnimationType 을 사용하여 서술하고 있다.

"HapticProperty"는Virtual Object 의 햅틱 속성 정보들에 대한 내용을 기술하고, 기본적으로 MPEG-V VWOC 스키마의 VWOHapticPropertyListType 을 사용하여 서술하고 있다.

"VirtualObjectComponents"는 Virtual Object 내에 속하는 Virtual Object(Component) 정보를 기술하는 데이터 형이고, 기본적으로 MPEG-V VWOC 스키마의 VirtualObjectListType 을 사용하여 서술하고 있다.

도 66은 본 발명의 바람직한 실시예에 따른 가상 객체 명령(Virtual Object Command, VOC) 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 63]은 Root Element (VOC) 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 63]에서, "VOCBaseType"은 Virtual Object Command 메타데이터의 기본이 되는 타입을 선언한다. "id"는 메타데이터의 ID를 기술한다.

"VOC"는 Virtual Object Command 메타데이터의 Root Element 이다.

"GroupOfVirtualObjectCommands"는 여러 개의 가상 객체 제어를 위한 명령 정보를 서술한다.

"VirtualObjectCommand"는 하나의 가상 객체 제어를 위한 명령 정보를 서술한다.

도 67은 본 발명의 바람직한 실시예에 따른 VOC Base Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 64]은 VOC Base Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 64]에서, "VOCBaseType"은 Virtual Object Command 메타데이터의 기본이 되는 타입을 선언한다.

"id"는 메타데이터의 ID 를 기술한다.

도 68은 본 발명의 바람직한 실시예에 따른 Group of Virtual Object Commands Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 65]은 Group of Virtual Object Commands Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 65]에서, "GroupOfVirtualObjectCommandsType"은여러 개의 가상 객체 제어를 위한 명령 정보를 서술하기 위한 엘리먼트이다.

"VirtualObjectCommand"는 하나의 가상 객체 제어를 위한 명령 정보를 서술하고, 최소 두 개 이상 서술되어야 하며, 계속 반복되어 서술될 수 있다.

도 69는 본 발명의 바람직한 실시예에 따른 Virtual Object Command Type 메타데이터를 스키마 형태로 도시한 구조도이다.

[표 66]는 Virtual Object Command Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 66]에서, "VirtualObjectCommandType"은 하나의 가상 객체 제어를 위한 명령 정보를 서술하기 위한 엘리먼트이다.

"Appearance"는 가상 객체의 외형에 대한 제어명령을 서술한다.

"Animation"은 가상 객체의 외형에 대한 제어명령을 서술한다.

"objectID"는 제어할 가상 객체의 ID를 서술한다.

도 70은 본 발명의 바람직한 실시예에 따른 Appearance Command Type 메타데이터를 스키마 형태로 도시한 구조도이다. 그룹 속성값을 Command Base Attributes로 지정하였다.

[표 67]은 Appearance Command Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 67]에서, "AppearanceCommandType"은 가상 객체의 외형에 대한 제어명령을 서술하기 위한 엘리먼트이다.

"appearanceName"은 변화를 줄 외형에 대한 이름을 서술한다.

"CommandBaseAttributes"는 가상 객체를 제어하기 위해 필요한 기본 속성값들을 정의한 것이다.

"activate"는 활성화 여부를 서술하고 true 나 false 값을 가질 수 있다. "value"는 외형을 변화시키는 값을 서술한다.

도 71은 본 발명의 바람직한 실시예에 따른 Animation Command Type 메타데이터를 스키마 형태로 도시한 구조도이다. 그룹 속성값을 Command Base Attributes로 하였다.

[표 68]는 Animation Command Type 메타데이터의 서술 구조를 확장성 생성언어 XML 스키마 형태로 나타낸 것이다.

[표 68]에서, "AnimationCommandType"은 가상 객체의 애니메이션에 대한 제어명령을 서술하기 위한 엘리먼트이다.

"animationName"은 가상 객체의 애니메이션에 대한 이름을 서술한다.

이하에서는 도 1 및 도 3을 참조하여 본 발명의 시스템 및 방법을 이용한 바람직한 실시예들에 관하여 상술한다.

본 발명은 바람직한 일실시예로서 의료분야의 일종인 U-헬스(health) 분야에서 의료 진단(혈압, 체온, 체지방 측정 등등)을 위한 센서들로부터 얻어진 정보를 토대로 사용자의 건강 상태를 시뮬레이션 하는 방법 및 시스템을 제공할 수 있다.

여기서 U-헬스란 유비쿼터스(Ubiquitous) 헬스의 준말로 휴대 IT기기를 통해 언제 어디서나 건강관리 및 진료를 받을 수 있는 기술로서, 국내에 상용화된 예로는 휴대전화에 연결된 혈당 체크기가 있다.

먼저 사용자가 집에서 간단히 자가 건강 진단을 통해 현재 자신의 건강 상태를 점검한다고 가정하자. 사용자는 몇 가지 바이오 센서와 혈압, 체온, 체지방 측정 센서(기기)들을 이용하여, 본인의 건강 상태를 측정한다. 각 센서들(100)은 측정된 정보(S140)를 센서 정보 메타데이터 생성부(102)로 전송하고, 센서 정보 메타데이터 생성부(102)는 센서 정보 메타데이터를 생성(S150)하여 실/가상 세계 적응 엔진부(110)에 전송(S160)한다.

[표 69]는 "SI"에 대한 XML 인스턴스(Instance)이다.

[표 69]의 SI XML 인스턴스의 의미는, 현재 센서로부터 들어온 정보를 생체(Bionics) 관련 센서로부터 들어온 센서 정보이며, 사용자의 혈액형(A⁺)과 체온(36.5도) 그리고 혈압(110, 158)에 대한 정보를 서술하고 있다.

또한, 추가로 장치(Machinery)관련 센서로부터 사용자의 키(172)와 몸무게(81.7) 정보도 서술한다. 이 정보들을 조합하면 사용자는 현재 고혈압에 비만인 상태임을 알 수 있다.

이와 같이 센서에서 생성된 정보들을 분석하여 위와 같은 형식의 XML 인스턴스로 만들어서 보내주는 역할을 하는 곳이 바로 SI 메타데이터의 생성부에서 하는 일이다.

한편 가상 객체, 즉 아바타의 정보가 가상 객체 제어부(112)에서 생성(S110)되고 가상 객체 정보 메타데이터 생성부(106)에서 가상객체 정보 메타데이터를 생성(S120)한 후, 실/가상 세계 적응 엔진부(110)에 전송(S130)한다.

그리고 상기 실/가상 세계 적응 엔진부(110)에서는 이미 입력된 상기 가상 객체 정보 메타데이터 생성부(106)에서 생성된 가상 객체 정보 메타데이터와, 사용자에 의해 사용자 선호 정보가 입력된 후 사용자 선호 메타데이터 생성부(104)에서 생성된 사용자 선호 정보 메타데이터에 근거하여, 현재 사용자의 건강 상태를 표현해 줄 아바타, 즉 가상 객체(114)의 상태를 변화시키는 명령어를 생성(S170)하고 가상 객체 명령 메타데이터 생성부(108)는 가상 객체 명령 메타데이터를 생성(S180)하여 가상 객체 제어부(112)로 전송(S190)한다.

[표 70]은 사용자 선호(UP) XML 인스턴스이다.

[표 70]의 UP XML 인스턴스의 의미는 현재 사용자로부터 입력된 가상 객체에 대한 선호 정보로서, 가상 객체의 종류는 아바타 타입이며, 아바타가 입력된 센서 정보에 반응하여 변화하는 비율은 입력된 비율보다 크도록 설정하였고, 그 비율은 1.5배로 설정한 것이다.

이와 같이 사용자로부터 입력된 가상 객체 선호 정보를 위와 같은 형식의 XML 인스턴스로 만들어서 보내주는 역할을 하는 곳이 바로 UP 메타데이터 생성부에서 하는 일이다. 사용자로부터 입력 받을 때에는 GUI(Graphic User Interface) 기술과 관련된 방법이나, 기타 여러 가지 방법을 사용하여 입력 받을 수 있다.

[표 71]은 VOI XML 인스턴스이다.

[표 71]의 VOI XML 인스턴스의 의미는 가상 객체에 대한 외형과 이용 가능한 애니메이션들 그리고 가상 객체의 부분 객체들에 대한 정보들이다. 이 가상 객체는 헬스 아바타(Health Avatar) 객체로서 머리와 몸, 팔과 다리 등을 부분 객체로 가지고 있다. 이 객체의 외형 정보는 체온 정보가 있고, 이용 가능한 애니메이션으로는 뛰기(jump), 춤추기(dance), 행복해하기(happiness), 실망하기(disappointment)가 있다. 부분 객체들 중 하나인 머리 부분 얼굴색과 관련된 외형 정보를 가지며, 현재 얼굴색은 정상이다. 그리고 몸 부분은 흉부와 복구로 나뉘는데, 복부에는 부풀리기(inflate)와 수축하기(deflate) 애니메이션 정보가 있다.

이와 같이 가상 객체 제어부로부터 입력된 가상 객체 정보를 위와 같은 형식으 XML 인스턴스로 만들어서 보내주는 역할을 하는 곳이 바로 VOI 메타데이터 생성부에서 하는 일이다.

그리고 위와 같은 SI, UP, VOI 메타데이터를 이용해서, 센서로부터 들어온 정보와 가상 객체 정보, 사용자 선호 정보 등을 분석하여 가상 객체 제어 명령을 만드는 곳이 바로 실/가상 세계 적응 엔진부에서 하는 일이다. 이렇게 해석되어 만들어진 가상 객체 제어 명령은 VOC 메타데이터 생성부로 전해지고, 아래와 같은 VOC XML 인스턴스로 만들어져 가상 객체 제어부로 전달된다.

[표 72]은 VOC XML 인스턴스이다.

[표 72]의 VOC XML 인스턴스의 의미는 헬스 아바타(Health Avatar)가 실망하는 애니메이션을 하도록 하며, 얼굴색을 붉은 색으로 변화시키고, 복부를 부풀리도록 하는 명령어이다. 이는 SI 메타데이터에서 표현된 바와 같이 현재 사용자의 상태가 고혈압에 비만인 상태이므로, 이를 적절하게 표현할 수 있도록 제어 명령을 만들어낸 형태이다.

이와 같이 실/가상 세계 적응 엔진부로부터 입력된 가상 객체 명령 정보를 위와 같은 형식의 XML 인스턴스로 만들어서 보내주는 역할을 하는 곳이 바로 VOC 메타데이터 생성부에서 하는 일이다.

여기서 상기 메타데이터들은 반드시 동시에 생성되어 전송되어야 할 필요는 없지만, 가상 객체 정보가 먼저 생성되어 실/가상 세계 적응 엔진부(110)에 미리 전달되어야 상기 센서 정보를 이용하여 실/가상 세계 적응 엔진부(110)에서 가상 객체 명령 정보를 생성할 수 있다.

상기 가상 객체 제어부(112)는 상기 가상 객체 명령 메타데이터에 근거하여, 구현된 아바타 즉 가상 객체(114)의 상태를 변화시킬 수 있는 실제 명령을 아바타에게 전송하여 아바타의 상태를 변화시킨다(S200).

이로써 사용자는 본인의 선호가 반영된 상태로, 센서를 이용해 얻은 자신의 건강 정보를 아바타를 통해 직접 눈으로 쉽게 확인할 수 있게 되고, 건강 상태에 따라 추가 의료진단을 받을지 선택할 수 있다.

여기서 각 데이터는 통신 채널부(116)를 통해 전송된다.

본 발명은 바람직한 다른 실시예로서 게임 분야의 캐릭터 제어에 활용하는 방법 및 시스템을 제공할 수 있다.

일반적으로 게임분야에서는 조이스틱이나 키보드, 마우스 등과 같은 사용자 인터페이스 도구들을 통해 캐릭터(플레이어, 아바타 등)를 제어한다. 최근에는 닌텐도사의 위(Wii)나 마이크로소프트사의 엑스박스(XBox)에 나탈(Natal) 등과 같은 사용자 인터페이스 도구에 센서를 부착하여, 사용자의 동작을 인식하여 이를 게임 캐릭터에 반영시키는 방법이 새롭게 개발되어 보급되고 있다. 그러나 이들 게임 회사들이 개발한 각각의 인터페이스들이 센서로부터 정보를 받아들여, 게임 속 캐릭터의 상태 변화에 반영하는 방법은 고유의 방식으로 제어되며, 상호 호환이 불가능하다. 즉 센서에서 얻는 정보를 게임 속 캐릭터에 표현하는 방법은 서로 종속적인 관계에 있다. 또한 게임 이외의 다른 콘텐츠나 다른 분야에 이 기술을 접목시켜 사용하기에는 아직 불가능하다. 그러나 본 발명을 활용하면 각각의 가상 세계의 캐릭터의 구현 방식이나 직접적인 제어 방법을 알지 못하더라도, 이를 제어할 수 있는 방법을 제공할 수 있다.

즉 본 발명의 실/가상 세계 적응 엔진부(110)에서 가상 객체 명령을 생성하여 보내면, 이 명령을 이용하여 가상 객체를 실제로 구현된 방법에 따라 제어하는 것은 가상 객체 제어부(112)에서 담당하므로, 서로 다른 구현 방법을 통해 구현된 가상 세계의 객체들을 모두 동일한 방법으로 제어하는 것이 가능하다. 즉 각 센서들(100)로부터 얻는 정보 또한 독립적으로 변환되어 센서에 독립적인 표현 방법으로 표현할 수 있고, 이 정보를 이용해 제어 명령을 보내는 것 또한 가상 객체에 독립적인 표현 방법으로 표현하는 것이 가능하므로, 서로 다른 환경에서도 본 발명을 통해 쉽게 상호 호환이 가능하게 되며, 여러 분야에서도 널리 활용될 수 있다.

이하에서는 이를 구현하는 바람직한 다른 실시예를 구체적으로 설명한다.

사용자가 집에서 센서(100)를 부착한 조이스틱으로 대전 액션 게임을 즐긴다고 가정하자. 사용자는 게임 화면 속 캐릭터를 움직이기 위해 여러 동작을 취하여 센서(100)가 반응하도록 한다. 조이스틱에 부착된 센서(100)는 사용자의 움직임에 따라 측정(S140)된 정보를 센서 정보(Sensored Information) 메타데이터 생성부(102)로 전송하고, 센서 정보 메타데이터 생성부(102)에서는 센서 정보(SI) 메타데이터를 생성(S150)하여 실/가상 세계 적응 엔진부(110)에 통신 채널부(116)를 통해 전송한다(S160).

[표 73]는 SI XML 인스턴스이다.

[표 73]의 SI XML 인스턴스의 의미는 위의 SI XML Instance의 의미는 현재 센서로부터 들어온 정보는 장치(Machinery) 관련 센서로부터 들어온 센서 정보이며, 현재 장치로부터 가속도(2.7, 1.0, 1.0) 정보와 방향(3.0, 1.0, 1.0) 정보를 서술하고 있다. 이 정보들을 조합하면 사용자는 현재 장치를 이용해 (3.0, 1.0, 1.0) 방향으로 2.7의 가속을 시키고 있음을 보이고 있다.

실/가상 세계 적응 엔진부(110)에서는, 이미 입력된 가상 객체 정보 메타데이터 생성부(106)에서 생성된 가상 객체 정보 메타데이터와, 사용자 선호 정보 메타데이터 생성부(104)에서 생성된 사용자 선호 정보 메타데이터에 근거하여 현재 사용자의 움직임을 표현해줄 게임 속 캐릭터(아바타 등)의 상태를 변화시키는 명령어를 생성하여(S170) 가상 객체 명령 메타데이터 생성부(108)에서 가상 객체 명령 메타데이터를 생성한 후(S180) 가상 객체 제어부(112)로 전송한다(S190).

[표 74]은 UP XML 인스턴스이다.

[표 74]의 UP XML 인스턴스의 의미는 현재 사용자로부터 입력된 가상 객체에 대한 선호 정보로서, 가상 객체의 종류는 아바타 타입이며, 아바타가 입력된 센서 정보에 반응하여 변화하는 비율은 입력된 비율과 같도록 설정하였다.

[표 75]은 VOI XML 인스턴스이다.

[표 75]의 VOI XML 인스턴스의 의미는 가상 객체에 대한 외형과 이용 가능한 애니메이션들 그리고 가상 객체의 부분 객체들에 대한 정보들이다. 이 가상 객체는 플레이어 아바타(Player Avatar) 객체로서 사용자가 조종하고 있는 게임 속 플레이어 아바타이다. 이 객체의 이용 가능한 애니메이션으로는 뛰기(jump), 앞으로 이동(movement), 뒤로 이동(moveback), 주먹질(punch), 발길질(kicking)이 있다.

[표 76]는 VOC XML 인스턴스이다.

[표 76]의 VOC XML 인스턴스의 의미는 플레이어 아바타가 세기 3 정도의 발길질 공격을 하도록 지시하는 명령어이다. 이는 SI 메타데이터에서 표현 된 바와 같이 현재 사용자가 조이스틱 등의 장치를 이용하여 발길질 공격 형태의 동작을 취한 상태이므로, 이를 적절하게 표현할 수 있도록 제어 명령을 만들어 낸 형태이다.

상기 가상 객체 제어부(112)는 가상 객체 명령 메타데이터에 근거하여, 고유의 방법으로 구현된 게임 속 캐릭터(아바타 등)의 상태를 변화시킬 수 있는 실제 명령(고유 명령어)을 캐릭터에게 전송하여, 게임 속 캐릭터가 상대방 캐릭터를 공격 또는 방어와 같은 상태를 표현할 수 있도록 변화시킨다(S200).

이로써 사용자는 본인의 선호가 반영된 상태로, 센서를 이용해 얻은 자신의 동작 정보를 게임 속 캐릭터에 그대로 반영된 화면을 보면서 계속 게임 속 캐릭터를 제어하며 게임을 즐길 수 있다.

본 발명은 바람직한 또 다른 실시예로서 반도체 또는 기타 제조 분야에서 공장 간 결함 및 상태 표현을 위한 시뮬레이션에 활용하는 방법 및 시스템을 제공한다.

일반적인 제조 분야에서는 제조 공장에서 발생하는 문제들이나 상태들을 점검하고, 문제를 해결하기 위해 이를 감시하는 근로자들을 필요로 한다. 하지만 자동화된 시스템에서 발생하는 모든 문제들을 감시하는 것은 쉽지 않고, 이를 발견하는 것 또한 어려운 일이다. 그러므로 제조 공장에서 발생하는 여러 문제들을 빨리 진단하고 대처할 수 있도록, 각종 센서들을 활용하여 생산 라인의 문제를 쉽게 파악하게 도움을 주는 시뮬레이션 도구를 만드는데 본 발명이 활용될 수 있다.

이하에서는 이를 구현하는 바람직한 또 다른 실시예를 구체적으로 설명한다.

반도체 생산 라인에서 문제를 점검하기 위해 센서들을 이용해 시뮬레이션 한다고 가정하자. 반도체가 생산되는 동안에 관리자는 시뮬레이션 화면을 모니터링 하면서 이상 유무를 판단하는 중이다. 반도체 생산라인에 설치된 센서(100)는 측정된(S140) 정보를 센서 정보 메타데이터 생성부(102)로 전송하고, 센서 정보 메타데이터 생성부(102)에서는 센서 정보 메타데이터를 생성(S150)하여 실/가상 세계 적응 엔진부(110)에 통신 채널부(116)를 통해 전송한다(S160).

[표 77]은 SI XML 인스턴스이다.

[표 77]의 위의 SI XML Instance의 의미는 현재 센서로부터 들어온 정보는 전기(Electricity)관련 센서로부터 들어온 반도체 생산라인의 회로 기판의 위치 정보를 표현하는 위치 정보(1.0, 1.0, 9.0)와, 장치(Machinery) 관련 센서로부터 들어온 생산라인 회로 기판의 온도 정보(79)를 서술하고 있다. 이 정보들을 조합하면 현재 생산라인 중 9번 생산 라인의 문제가 생겨 기판의 온도가 79도까지 올라간 상태를 나타내고 있다.

상기 실/가상 세계 적응 엔진부(110)에서는 이미 입력된 가상 객체 정보 메타데이터 생성부(106)에서 생성된 가상 객체 정보(VOI) 메타데이터와, 사용자 선호 정보 메타데이터 생성부(104)에서 생성된 사용자 선호 정보(UP) 메타데이터에 근거하여, 현재 사용자의 움직임을 표현해 줄 가상 객체의 상태를 변화시키는 명령어를 생성(VOC 메타데이터 생성부)하여 가상 객체 제어부로 전송한다.

[표 78]는 UP XML 인스턴스이다.

[표 78]의 UP XML 인스턴스의 의미는 현재 사용자로부터 입력된 가상 객체에 대한 선호 정보로서, 가상 객체의 아바타 타입이며, 아바타가 입력된 센서 정보에 반응하여 변화하는 비율은 입력된 비율과 같도록 설정하였다.

[표 79]는 VOI XML 인스턴스이다.

[표 79]의 VOI XML 인스턴스의 의미는 가상 객체에 대한 외형과 이용 가능한 애니메이션들 그리고 가상 객체의 부분 객체들에 대한 정보들이다. 이 가상 객체는 회로 기판 아바타(Circuit Boards Avatar) 객체로서 반도체 공장 생산라인의 일부를 시뮬레이션 중인 회로 기판 아바타이다. 이 객체의 현재 외형 정보는 기판의 색이 흰색이고, 이용 가능한 애니메이션으로는 이상이 생겼을 때 신속히 상태를 알려 주기 위해 진동하기(vibration)가 있다.

[표 80]은 VOC XML 인스턴스이다.

[표 80]의 VOC XML 인스턴스의 의미는 회로 기판 아바타의 기판 색을 붉게 변화시키고, 진동하는 애니메이션 효과를 주는 명령어이다. 이는 SI 메타데이터에서 표현된 바와 같이 현재 9번 생산라인에 있는 회로 기판에 문제가 생겼으므로, 이를 적절하게 표현할 수 있도록 제어명령을 만들어낸 형태이다.

가상 객체 제어부는 VOC 메타데이터에 근거하여, 고유의 방법으로 구현된 가상 객체의 상태를 변화시킬 수 있는 실제 명령(고유 명령어)을 가상 객체(112)에 전송하여, 현재 반도체 생산 라인의 상태를 표현할 수 있도록 변화시킨다(S200).

이로써 관리자는 본인의 선호가 반영된 상태(즉 오류 감지 정보 설정값, 상태 이상 한계치 등)로 시뮬레이션되는 화면을 모니터링하면서, 일정 수준으로 설정된 오류 허용 범위를 넘어서 생산 라인에 이상이 생겼을 때 시뮬레이션 화면에 표시되는 정보를 통해 어느 라인의 어떤 곳에 이상이 생겼는지 즉시 발견하고 신속하게 대처할 수 있다.

이하에서는 실/가상 세계 적응 엔진부(110)의 작동 방법과 가상 객체 제어부(112)에서의 작동 방법을 보다 구체적으로 설명한다.

상기 실/가상 세계 적응 엔진부(110)는 각종 센서 정보들을 표현하고자 하는 가상 객체에 맞도록 센서 정보와 객체 정보, 그리고 사용자 선호 정보들을 분석하여 제어 명령을 만든다. 이는 본 발명의 시스템을 구현하고 사용하고자 하는 목적에 따라 이를 분석하고 명령을 만들어 내는 방법이 다양해 질 수 있으며, 이를 구현하는 방식은 직접적으로 제시할 수 없음을 의미한다.

따라서 본 발명에서는 상기 엔진부(110)의 역할은 SI, VOI, UP 메타데이터 등을 입력받아서 가상 객체(114)에 표현하고자 하는 바에 따라 VOC 메타데이터를 만들어내는 것에 있다고 정의한다. 또한 이를 구현하는 방법과 사용하는 방법은 여러 가지 방법이 사용될 수 있으므로 제한을 두지 않는다. 다만 위와 같은 방식으로 동작하는 것을 통칭하여 실/가상세계 적응 엔진부(110)라 한다.

또한 가상 객체 제어부(112)는 각각의 가상 객체(114)에 대한 정보를 바탕으로 VOI 메타데이터를 생성해서 실/가상세계 적응 엔진부(110)에 전달하고, 상기 엔진부에서 생성된 VOC 메타데이터를 실제로 각각의 가상 객체(114)를 제어한다.

이는 각 가상 객체(114)를 구현하는 방법에 따라 VOI 메타데이터를 생성하는 과정과 VOC 메타데이터를 바탕으로 실제 제어 명령을 만들어 각 가상 객체(114)를 제어하는 방법이 다양해질 수 있고, 따라서 이를 구현하는 방식은 직접적으로 제시하는 것은 무의미하다. 하지만 이에 대한 구현 방법으로 한 가지 방법을 예시로 제시한다. 가상 객체(114)를 구현하는 방법은 OpenGL, VRML, DirectX 등과 같은 3D 객체를 구현할 수 있는 프로그래밍 언어를 사용하여 구현이 가능하다. 본 발명에서의 가상 객체 제어부(112)의 예시는 가상 객체가 OpenGL을 이용해 구현되어 있다고 가정하고 설명한다.

먼저 OpenGL로 구현된 가상 객체(114)가 주전자라고 가정한다. [표 81]은 이 주전자를 그리는 OpenGL 코드를 예시한 것이다.

가상 객체 제어부(112)는 상기와 같이 OpenGL로 구현된 가상 객체(114)에 대한 정보를 바탕으로 [표 82]과 같은 VOI 메타데이터 정보를 생성하여, 실/가상세계 적응 엔진부(110)에 전달한다.

상기 VOI 메타데이터는 주전자 객체의 이용 가능한 애니메이션으로 "앞으로 이동"이 있음을 알려주고 있다.

실/가상세계 적응 엔진부(110)에서는 VOI 메타데이터와 SI, UP 메타데이터 정보를 바탕으로 [표 83]와 같은 VOC 메타데이터를 가상 객체 제어부(112)에 전송한다.

[표 83]의 VOC 메타데이터는 주전자 객체를 "앞으로 5만큼 이동해라"라는 제어 명령 정보를 표현하고 있다.

가상 객체 제어부(112)는 [표 83]의 VOC 메타데이터를 바탕으로 실제 객체를 제어할 수 있는 하기 [표 84]과 같은 명령을 이용해 가상 객체(114)를 직접 제어한다.

상기 [표 84]의 OpenGL 코드는 주전자 객체를 앞으로 이동하는 함수가 moveFlowerpot로 정의되어 있고, 상기 VOC 메타데이터를 바탕으로 moveFlowerpot(x, y, z+5); 명령을 통해 실제 주전자 객체를 앞으로 5만큼 이동하라는 제어 명령을 생성하는 것을 의미한다.

이와 같이 가상 객체 제어부(112)는 실제로 구현된 방법에 따라 VOI 메타데이터를 만드는 방법과, VOC 메타데이터를 바탕으로 가상 객체를 제어하는 방법이 달라진다.

따라서 본 발명에서는 이 제어부의 역할은 실제 가상 객체를 구현한 방법에 따라 VOI 메타데이터를 생성하고, VOC 메타데이터를 바탕으로 가상 객체를 제어하는 것에 있다고 정의한다.

또한 이를 구현하는 방법과 사용하는 방법은 여러 가지 방법이 있을 수 있으므로 제한을 두지 않는다. 다만 상기와 같은 방식으로 동작하는 것을 통칭하여 가상 객체 제어부(112)라 한다.

참조적으로 이하의 [표 85] 내지 [표 90]은 본 발명에 있어서 사용되는 각종 단위에 대한 분류 방법(classification schemes)을 XML 스키마 형태로 기술한 것이다. [표 85] 내지 [표 90]은 이어지는 하나의 XML 스키마이다.

이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 부가 및 변경이 가능하다는 것이 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.

100: 센서 102: 센서 정보 메타데이터 생성부
104: 사용자선호 메타데이터 생성부 106: 가상객체 정보메타데이터 생성부
108: 가상객체 명령메타데이터 생성부 110: 실/가상 세계 적응 엔진부 112: 가상 객체 제어부 114: 가상 객체 116: 통신 채널부

Claims

서로 통신채널을 통해 연결된 적어도 하나 이상의 센서와, 실/가상 세계 적응 엔진부, 가상객체 제어부, 각종 메타데이터 생성부를 포함하고, 소정의 가상세계를 구현하는 처리부, 상기 구현된 가상세계를 사용자에게 표시하는 출력부, 사용자로부터 가상세계의 객체(이하, ‘가상객체’라 함)를 제어하기 위한 정보가 입력되는 입력부를 구비하는 가상세계 서비스 시스템과 연결되어, 가상 객체를 제어하는 시스템의 멀티미디어 응용방법으로서,
가상객체 제어부가 상기 처리부를 참조하여 구현되는 가상객체에 대한 외형과 이용 가능한 애니메이션 및 가상객체의 부분객체들과 관련한 가상객체 성능정보를 생성하는 제1단계와;
가상객체 성능정보 메타데이터 생성부가 상기 가상객체 제어부로부터 가상객체 성능정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 가상객체 성능정보 메타데이터를 생성하고, 실/가상 세계 적응 엔진부로 전송하는 제2단계와;
센서정보 메타데이터 생성부가 상기 센서로부터 감지된 센서정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 센서정보 메타데이터를 생성하고, 실/가상 세계 적응 엔진부로 전송하는 제3단계와;
실/가상 세계 적응엔진부가 상기 가상객체 성능정보 메타데이터와 센서정보 메타데이터를 해석하여, 가상객체 성능정보를 기초로 센서정보에 따른 가상객체의 상태/동작을 제어하기 위한 가상객체 명령정보를 생성하는 제4단계와;
가상객체 명령 메타데이터 생성부가 상기 실/가상 세계 적응 엔진부로부터 가상객체 명령정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 가상객체 명령 메타데이터를 생성하고, 가상객체 제어부로 전송하는 제5단계와;
가상객체 제어부가 상기 가상객체 명령 메타데이터에 따라 가상객체의 상태/동작을 제어하기 위한 제어신호를 상기 처리부에 전송하는 제6단계;
를 구비하는 것을 특징으로 하는 센서정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용방법.
삭제
삭제
청구항 1에 있어서,
상기 제3단계는,
사용자 선호 메타데이터 생성부가, 상기 입력부로부터 가상객체의 표현과 관련한 사용자 선호정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 사용자 선호 메타데이터를 생성하고, 실/가상 세계 적응 엔진부로 전송하는 단계를 더 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용방법.
삭제
삭제
삭제
삭제
청구항 1 또는 청구항 4에 있어서,
상기 센서정보는 전기정보, 기계정보, 온도정보, 시각정보, 화학정보, 생체정보 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 센서정보, 사용자선호정보, 가상 객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용방법.
청구항 9에 있어서,
상기 전기 정보는 전류, 전압, 전위, 전력, 전하, 임피던스, 저항, 전기 용량 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
청구항 9에 있어서,
상기 기계 정보는 길이, 두께, 변위, 속도, 유속, 풍속, 가속도, 압력, 회전력, 회전각, 회전수, 모멘트, 진공도, 진동, 질량, 무게 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
청구항 9에 있어서,
상기 온도 정보는 열용량 정보를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
청구항 9에 있어서,
상기 시각 정보는 컬러, 조도, 자외선, 적외선 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보 및 가상 객체 성능 정보, 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
청구항 9에 있어서,
상기 화학 정보는 순도, 농도, 밀도, pH, 점성 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
청구항 9에 있어서,
상기 생체 정보는 ABO 식 혈액형 정보, Rh식 혈액형 정보, 체온 정보, 맥박 정보, 혈압 정보, 심전도 정보, 근전도 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용 방법.
삭제
삭제
삭제
삭제
청구항 4에 있어서,
상기 사용자 선호정보는 가상객체의 표현형태 중 아바타에 대한 선호정보를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용방법.
소정의 가상세계를 구현하는 처리부, 상기 구현된 가상세계를 사용자에게 표시하는 출력부, 사용자로부터 가상세계의 객체(이하, ‘가상객체’라 함)를 제어하기 위한 정보가 입력되는 입력부를 구비하는 가상세계 서비스 시스템과 연결되어, 가상 객체를 제어하는 멀티미디어 응용시스템으로서,
적어도 하나 이상의 센서와,
상기 센서로부터 전송된 센서 정보를 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 센서정보 메타데이터를 생성하는 센서정보 메타데이터 생성부와,
상기 처리부를 참조하여 가상객체에 대한 외형과 이용 가능한 애니메이션 및 가상객체의 부분객체들과 관련한 가상객체 성능정보를 생성하거나, 가상객체 명령 메타데이터에 따라 가상객체의 상태/동작을 제어하기 위한 제어신호를 상기 처리부에 전송하는 가상객체 제어부와,
상기 가상객체 제어부에서 생성된 가상객체 성능정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 가상객체 성능정보 메타데이터를 생성하는 가상객체 성능정보 메타데이터 생성부와,
가상객체 명령정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 가상객체 명령 메타데이터를 생성하여 가상객체 제어부로 전송하는 가상객체 명령 메타데이터 생성부와,
상기 센서정보 메타데이터 및 가상객체 성능정보 메타데이터를 전송받아, 가상객체 성능정보를 기초로 센서정보에 따른 가상객체의 상태/동작을 제어하기 위한 가상객체 명령정보를 생성하는 실/가상 세계 적응 엔진부 및,
상기 메타데이터들이 송수신되도록 하는 통신채널부를 포함하는 것을 특징으로 센서 정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용시스템.
청구항 21에 있어서,
입력부로부터 가상객체의 표현과 관련한 사용자 선호정보를 입력받아 정해진 XML 스키마에 따라 XML 인스턴스로 변환하여 사용자 선호 메타데이터를 생성하는 사용자 선호 메타데이터 생성부와,
상기 사용자 선호 메타데이터가 상기 실/가상 세계 적응엔진부에 전송되도록 하는 통신채널부를 더 포함하고,
상기 실/가상 세계 적응 엔진부는 상기 사용자 선호 메타데이터를 해석하여, 가상객체 성능정보를 기초로 센서정보에 사용자 선호정보를 더 반영하여 가상 객체 명령정보를 생성하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용시스템.
청구항 21 또는 청구항 22에 있어서,
상기 센서 정보는 전기 정보, 기계 정보, 온도 정보, 시각 정보, 화학 정보, 생체 정보 중 적어도 하나 이상인 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용시스템.
삭제
삭제
청구항 21 또는 청구항 22에 있어서,
상기 사용자 선호정보는 가상객체의 표현형태 중 아바타에 대한 선호정보를 포함하는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상객체 성능정보 및 가상객체 명령정보를 이용한 멀티미디어 응용시스템.
청구항 21 또는 청구항 22에 있어서,
상기 통신 채널부는 유선 또는 게이트웨이를 통한 무선 통신 채널인 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용시스템.
청구항 21 또는 청구항 22에 있어서,
상기 가상 객체는 OpenGL 또는 VRML 또는 DirectX에 의해 구현되는 것을 특징으로 하는 센서 정보, 사용자 선호 정보, 가상 객체 성능 정보 및 가상 객체 명령 정보를 이용한 멀티미디어 응용시스템.