KR102356143B1 - 객체 네트워킹 장치 및 방법 - Google Patents

Abstract

객체 네트워킹 장치 및 방법이 개시된다. 본 발명의 일실시예에 따른 객체 네트워킹 장치는 하나 이상의 프로세서 및 상기 하나 이상의 프로세서에 의해 실행되는 적어도 하나 이상의 프로그램을 저장하는 실행메모리를 포함하고, 상기 적어도 하나 이상의 프로그램은 사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하고, 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하고, 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성한다.

Description

객체 네트워킹 장치 및 방법 {APPARATUS AND METHOD FOR NETWORKING OBJECT}

본 발명은 증강/가상 현실 객체 네트워크 기술에 관한 것으로, 보다 상세하게는 증강/가상 현실에서 주체에게 투시된 장면에 포함된 객체들 간의 네트워킹을 구성하는 기술에 관한 것이다.

최근 인공지능의 급속한 발전으로 컴퓨터 비전 영역에서 지능화 및 이동성이 급속도로 진행되고 있다. 증강 현실(AUGMENTED REALITY, AR), 가상 현실 (VIRTUAL REALITY, VR), 3 차원(3D) 카메라/안경/고글을 이용하는 시스템/장치는 인공 지능에 기반한 지능화와 이동통신과 결합한 이동성으로 응용 분야가 확장되고 있다.

이동성과 자율성 적용으로 AR/VR의 안경에서는 스마트폰의 아이콘을 대신하기 위한 여러가지 방법이 고안되고 있다. 이에 관련한 선행기술로 구글의 미국공개특허 US2018/0150204"SWITCHING OF ACTIVE OBJECTS IN AN AUGMENTED AND/OR VIRTUAL REALITY ENVIRONMENT"는 가상 환경의 객체 및 기능과 상호 작용할 때 아이콘, 키보드 및 마우스를 대신하여 사용자의 시선 방향 및 이동을 검출하여 화면을 구성하는 가상 현실 시스템을 개시하고 있다.

한편, 버라이즌의 미국등록특허 US9,965,899 "Methods and systems for minimizing pixel data transmission in a network-based virtual reality media delivery configuration" 는 가상 현실을 네트워크 기반으로 제공하기 위한 방법 및 시스템에 관한 것으로, 네트워크에서 장면을 VR 안경에 제공하기 위한 방법을 게시하고 있다.

또한, 페이스북의 미국공개특허 US2017/0221158 "Computer-Vision Content Detection for Connecting Objects in Media to Users"는 사용자가 업로드한 영상 콘텐츠 속의 객체를 탐지하여 미디어의 속성(위치, 시간 등), 소셜네트워크 사용자를 추론하는 방법, 장치 및 시스템에 관하여 개시하고 있다.

상기와 같은 선행기술들에서 보듯이 컴퓨터 비전, 인공지능, 광대역/저지연 이동통신의 확산은 사람-사람, 사람-기계의 통신 방식의 패러다임을 완전히 바꾸고 있어 만물 간 통신이 더 이상 고정적이고 확정적이 아닌 것으로 진화하고 있다. 이에 착안하여 본 발명에서는 카메라, AR/VR 안경 등에 투시된 장면의 객체들에 대해서 새로운 정보를 서로 주고 받을 수 있도록 하기 위해서 임의의 시점의 장면에 투시된 객체들 간 네트워킹과 정보 제공을 실시간으로 제공하기 위한 방법을 제시한다.

본 발명은 증강/가상 현실에서 객체들간 네트워킹을 구성하는 것을 목적으로 한다.

또한, 본 발명은 객체들의 정보를 주체(사용자)에게 전달하기 위한 가상화, 네트워킹 및 최신정보 구성을 제공하는 것을 목적으로 한다.

또한, 본 발명은 객체들에 대한 글로벌 규모의 정보 및 통신 제공, 객체들간 연계된 정보의 실시간 제공 및 실시간 상호 작용 환경을 제공하는 것을 목적으로 한다.

상기한 목적을 달성하기 위한 본 발명의 일실시예에 따른 객체 네트워킹 장치는 하나 이상의 프로세서 및 상기 하나 이상의 프로세서에 의해 실행되는 적어도 하나 이상의 프로그램을 저장하는 실행메모리를 포함하고, 상기 적어도 하나 이상의 프로그램은 사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하고, 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하고, 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 포함되는 가상 개체들로 설정할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 상기 국부 네트워크를 생성할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간 동안 주시한 현실 객체를 상기 관심 객체로 등록할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득할 수 있다.

이 때, 상기 제2 국부 메타데이터 계층 노드는 글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득할 수 있다.

또한, 상기의 목적을 달성하기 위한 본 발명의 일실시예에 따른 객체 네트워킹 방법은 객체 네트워킹 장치의 객체 네트워킹 방법에 있어서, 사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하는 단계; 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하는 단계 및 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성하는 단계를 포함한다.

이 때, 상기 국부 네트워크를 생성하는 단계는 상기 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정할 수 있다.

이 때, 상기 국부 네트워크를 생성하는 단계는 상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 상기 국부 네트워크를 생성할 수 있다.

이 때, 상기 국부 네트워크를 생성하는 단계는 상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공할 수 있다.

이 때, 상기 국부 네트워크를 생성하는 단계는 가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송할 수 있다.

이 때, 상기 관심 객체로 등록하는 단계는 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간 동안 주시한 현실 객체를 상기 관심 객체로 등록할 수 있다.

이 때, 상기 객체 네트워킹 방법은 상기 관심 객체의 등록을 해제하는 단계를 더 포함하고, 상기 관심 객체의 등록을 해제하는 단계는 상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경할 수 있다.

이 때, 상기 국부 네트워크를 생성하는 단계는 국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득할 수 있다.

이 때, 상기 글로벌 네트워크를 생성하는 단계는 글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득할 수 있다.

본 발명은 증강/가상 현실에서 객체들간 네트워킹을 구성할 수 있다.

또한, 본 발명은 객체들의 정보를 주체(사용자)에게 전달하기 위한 가상화, 네트워킹 및 최신정보 구성을 제공할 수 있다.

또한, 본 발명은 객체들에 대한 글로벌 규모의 정보 및 통신 제공, 객체들간 연계된 정보의 실시간 제공 및 실시간 상호 작용 환경을 제공할 수 있다.

도 1은 본 발명의 일실시예에 따른 가상화 디스플레이 장치(증강/가상 안경)의 현실 객체 인식을 나타낸 도면이다.
도 2는 도 1에 도시된 제1 장면에 포함된 현실 객체들의 네트워크를 나타낸 도면이다.
도 3은 도 1에 도시된 제2 장면에 포함된 현실 객체들의 네트워크를 나타낸 도면이다.
도 4는 도 2에 도시된 제1 장면에 포함된 현실 객체들의 가상 네트워크를 나타낸 도면이다.
도 5는 도 3에 도시된 제2 장면에 포함된 현실 객체들의 가상 네트워크를 나타낸 도면이다.
도 6은 본 발명의 일실시예에 따른 객체 네트워킹 계층 구조를 나타낸 도면이다.
도 7은 본 발명의 일실시예에 따른 객체 네트워킹 시스템을 나타낸 도면이다.
도 8은 본 발명의 일실시예에 따른 객체 네트워킹 장치를 나타낸 블록도이다.
도 9는 도 8에 도시된 가상화 및 네트워크부의 일 예를 세부적으로 나타낸 블록도이다.
도 10은 도 8에 도시된 메타데이터 제공부의 일 예를 세부적으로 나타낸 블록도이다.
도 11은 도 8에 도시된 글로벌 정보 제공부의 일 예를 세부적으로 나타낸 블록도이다.
도 12는 본 발명의 일실시예에 따른 객체 네트워킹 방법을 나타낸 동작흐름도이다.
도 13은 도 12에 도시된 관심 객체 등록 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 14는 도 12에 도시된 관심 객체 네트워크 정보 제공 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 15는 도 12에 도시된 관심 객체 해제 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 16은 본 발명의 일실시예에 따른 객체가 IoT 장치들로 구성된 객체 네트워킹 시스템을 나타낸 도면이다.
도 17은 본 발명의 일실시예에 따른 객체 네트워킹 시스템의 국부 정보(메타데이터 정보) 제공 과정을 나타낸 도면이다.
도 18은 본 발명의 일실시예에 따른 객체 네트워킹 방법의 국부 정보 획득 및 글로벌 정보 획득 과정을 나타낸 시퀀스 다이어그램이다.
도 19는 본 발명의 일실시예에 따른 물리 영역에 대한 가상화 및 가상 네트워크 구성을 나타낸 도면이다.
도 20은 본 발명의 일실시예에 따른 동일한 이름을 가진 물리 객체의 물리 영역에 대한 가상화 및 가상 네트워크 구성을 나타낸 도면이다.
도 21은 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.

본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.

도 1은 본 발명의 일실시예에 따른 가상화 디스플레이 장치(증강/가상 안경)의 현실 객체 인식을 나타낸 도면이다.

도 1을 참조하면, 본 발명의 물리 영역은 장면을 관찰하는(특히, 증강/가상 현실) 환경에서 장면을 관찰하는 주체인 증강/가상 안경 장치와 상기 주체에 투시된 장면에 포함된 객체들, 그리고 장면을 관찰하는 사용자(로봇 포함)로 구성된 물리적 대상들과 상기 대상들에게 네트워킹과 정보를 제공하기 위한 물리/가상 컴퓨트, 물리/가상 네트워크로 구성될 수 있다.

본 발명의 논리 영역은 증강/가상 안경 장치와, 안경 장치에 투시된 장면에 포함된 객체들에 대한 가상화와 가상 네트워크 영역의 계층, 상기 안경 장치, 객체들, 가상 네트워크의 속성 및 연관관계를 나타내는 국부 메타데이터 계층, 지역 정보를 전(global) 지역에서 공통으로 사용하는 글로벌 저장소 계층을 포함한다.

본 발명은 가상 네트워크와 정보가 제공되는 객체를 관심 객체(Interest Objects)라고 정의한다. 가상 네트워크와 정보가 제공되지 않는 객체는 비관심 객체((Don't care Objects)라고 정의한다. 여기서 가상 네트워크는 논리적으로 구성된 네트워크를 의미하며 VLAN, VXLAN 등이 될 수 있으며 정보 중심 네트워크(ICN)도 될 수 있다. 여기서 정보란 객체와 관련한 속성, 특징 등의 정보를 의미할 수 있다.

도 1에 도시된 바와 같이, 사용자가 착용하는 가상화 디스플레이 장치의 일 예인 안경 장치(103)를 통해서 제1 시야와 제2 시야에 투시된 2개의 장면(101, 102)과 상기 장면에 포함된 현실 객체들을 나타낸 것을 알 수 있다.

이 때, 안경 장치(103)는 증강/가상 응용을 제공할 수 있는 가상화 디스플레이 장치인 증강/가상 안경 장치에 상응할 수 있다.

이 때, 안경 장치(103)의 제1 시야와 제2 시야에 투시된 2개의 장면(101, 102)에서 인식된 현실객체는 객체 네트워킹 장치(100)에 의해 관심 객체로 등록될 수 있다.

제1 장면(101)의 관심 객체는 A, B, C, D 이고, 제2 장면(102) 관심 객체는 D, E, F 로 등록된 것을 알 수 있다.

이 때, D 객체는 제1 장면(101)과 제2 장면(102)에 모두 포함되는 것을 알 수 있다.

도 2는 도 1에 도시된 제1 장면에 포함된 현실 객체들의 네트워크를 나타낸 도면이다.

도 2를 참조하면, 제1 장면(201)에 대한 관심 객체들 중에 C 객체를 제외한 나머지 객체에 대한 물리 네트워크(202)를 나타낸 것을 알 수 있다.

네트워크(202)는 C 객체가 누락되어 있는데, C 객체가 누락된 이유는 C 객체는 물리적으로 존재하는 관심 객체이지만 물리적으로 네트워크에 연결되어 있지 않기 때문에, 네트워크(202)에서 제외된 것을 알 수 있다.

도 3은 도 1에 도시된 제2 장면에 포함된 현실 객체들의 네트워크를 나타낸 도면이다.

도 3을 참조하면, 제2 장면(301)에 대해 구성된 네트워크(302)에 관심 객체 D, E, F가 모두 포함된 것을 알 수 있고, 이는 관심 객체 D, E, F가 모두 물리 네트워크에 연결되어 있는 것을 알 수 있다.

도 4는 도 2에 도시된 제1 장면에 포함된 현실 객체들의 가상 네트워크를 나타낸 도면이다.

도 4를 참조하면, 제1 장면(401)에 대한 A, B, C, D 관심 객체가 각각 A', B', C', D'로 가상화되고 안경 장치(103)도 가상화되어 제1 가상 네트워크(402)에 연결된 것을 알 수 있다. 도 2와 달리, 관심 객체 C가 물리 네트워크에 연결되어 있지 않더라도 가상 객체 C'는 제1 가상네트워크(402)에 연결되는 것을 알 수 있다.

도 5는 도 3에 도시된 제2 장면에 포함된 현실 객체들의 가상 네트워크를 나타낸 도면이다.

도 5를 참조하면 제2 장면(501)에 대한 관심 객체 D, E, F 객체가 각각 D', E', F'로 가상화되고 안경 장치(103)도 가상화되어 제2 가상네트워크(502)에 연결된 것을 알 수 있다.

도 6은 본 발명의 일실시예에 따른 객체 네트워킹 계층 구조를 나타낸 도면이다.

도 6을 참조하면, 본 발명의 일실시예에 따른 객체 네트워킹 계층 구조는 물리 영역 계층(PHYSICAL DOMAIN), 가상화 및 네트워킹 계층(VIRTUALIZATION AND NETWORKING), 국부 메타데이터 계층(LOCAL META-DATA FOR OBJECTS) 및 글로벌 저장소 계층(GLOBAL REPOSITORY)을 포함하는 것을 알 수 있다.

물리 영역 계층은 안경 장치(615)와 안경 장치(615)의 시야를 통해 투시된 장면(601)에 포함된 객체 A(611), B(612), C(613), D(614)를 나타낸 것을 알 수 있다.

가상화 및 네트워킹 계층은 상기 물리 영역의 안경 장치(625), 객체들을 가상화한 가상 객체 A'(621), B'(622), C'(623), D'(624)를 나타낸 것을 알 수 있고, 가상 객체들과 이들이 연결된 가상 네트워크(602)를 나타낸 것을 알 수 있다.

국부 메타데이터 계층은 가상화된 안경 장치(635), 가상화된 객체들(A"(631), B"(632), C"(633), D"(634)), 안경 장치(635)와 객체들 간의 가상 네트워크 정보 E"(603)를 나타낸 것을 알 수 있다.

글로벌 저장소 계층은 글로벌하게 객체 정보를 제공하는 글로벌 저장소(604)를 나타낸 것을 알 수 있다.

또한, 도 6에 도시된 각 계층들은 다양한 연결/통신 방식으로 연결될 수 있다.

도 7은 본 발명의 일실시예에 따른 객체 네트워킹 시스템을 나타낸 도면이다.

도 7을 참조하면, 본 발명의 일실시예에 따른 객체 네트워킹 시스템은 객체 네트워킹 장치(100), 가상 개체(10), 네트워크 관리 장치(20)를 포함할 수 있다.

물리 영역의 안경과 객체들(701)은 안경 장치에 투시된 장면들(712)로 구성되어 객체 네트워킹 장치(100)에 입력될 수 있다.

객체 네트워킹 장치(100)는 사전에 등록이 되어 있거나 사용자의 시선에 따라서 이벤트(713)로 새롭게 등록되는 객체는 관심 객체로 추출하고, 가상화 공간에 관심 객체와 안경 장치를 가상 개체(Virtual Entities)(10)로 생성할 수 있다.

가상 개체(10)는 안경 장치의 가상화된 형태인 주체와 관심 객체, 가상네트워크를 포함할 수 있다.

객체 네트워킹 장치(100)는 하나의 논리적 시점 네트워크를 생성할 수 있다.

이 때, 객체 네트워킹 장치(100)는 가상 주체와 관심 객체 및 가상 네트워크 정보를 저장하고 있으며, 최종적으로 시점 기반의 응용서비스를 이용하여 가상화 디스플레이 장치인 안경 장치를 통해서 사용자에게 가상화 공간에 대한 장면(711)을 출력할 수 있다.

네트워크 관리 장치(20)는 가상 개체(10)의 생성 및 생명주기를 관리할 수 있으며, 가상 개체들(10) 간 통신을 위하여 요구되는 가상 네트워크(731)를 생성하고 관리하는 기능을 수행할 수 있다.

또한, 객체 네트워킹 장치(100)는 가상 시점 네트워크를 구성하기 위한 메타데이터를 저장할 수 있다.

이 때, 객체 네트워킹 장치(100)는 주체 및 객체에 대한 물리적 정보 및 논리적 정보 즉, 주체를 통해서 인식되는 시점 기반의 장면들과 관심 객체와 주체의 이미지 정보에 따르는 시점 기반의 객체들의 위치 정보, 객체들간의 통신 네트워크 정보 및 메타데이터에 상응하는 주체 및 객체의 속성, 성능, 기능 정보를 포함할 수 있다.

또한, 객체 네트워킹 장치(100)는 분산된 다중의 국부 영역의 시점 네트워크를 연동하여 시점 기반의 응용 서비스를 제공할 수 있다.

이 때, 객체 네트워킹 장치(100)는 시점 기반의 응용 서비스를 수행하기 위한 첫 단계로서 각 국부 영역에서 구성되는 시점 네트워크의 관심 객체 및 가상 네트워크에 대한 국부 정보를 국부 메타데이터 영역으로부터 수집할 수 있다.

이 때, 객체 네트워킹 장치(100)는 두 번째 단계로 수집된 각 국부 메타데이터 영역의 관심 객체에 대한 메타 정보 및 광역 연결 정보를 최신 국부 정보로 업데이트할 수 있다.

이 때, 객체 네트워킹 장치(100)는 국부 영역의 시점 네트워크를 연결하여 시점 기반의 응용 서비스 제공을 위한 글로벌 네트워크를 생성할 수 있다.

이 때, 객체 네트워킹 장치(100)는 국부 영역의 시점 네트워크의 관심 객체 및 가상 네트워크 정보 및 이와 관련되어 광역 영역에서 얻어지는 최신 메타데이터 정보와 이들간의 광역 네트워크를 구성하기 위한 정보를 저장할 수 있다.

도 8은 본 발명의 일실시예에 따른 객체 네트워킹 장치를 나타낸 블록도이다. 도 9는 도 8에 도시된 가상화 및 네트워크부의 일 예를 세부적으로 나타낸 블록도이다. 도 10은 도 8에 도시된 메타데이터 제공부의 일 예를 세부적으로 나타낸 블록도이다. 도 11은 도 8에 도시된 글로벌 정보 제공부의 일 예를 세부적으로 나타낸 블록도이다.

도 8을 참조하면, 본 발명의 일실시예에 따른 객체 네트워킹 장치는 가상화 및 네트워크부(110), 메타데이터 제공부(120) 및 글로벌 정보 제공부(130)를 포함한다.

가상화 및 네트워크부(110)는 사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록할 수 있다.

가상화 및 네트워크부(110)는 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 동안 주시한 현실 객체를 상기 관심 객체로 등록할 수 있다.

메타데이터 제공부(120)는 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성할 수 있다.

이 때, 메타데이터 제공부(120)는 장면에 포함된 적어도 하나의 관심 객체 및 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정할 수 있다.

이 때, 메타데이터 제공부(120)는 상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 국부 네트워크를 생성할 수 있다.

이 때, 메타데이터 제공부(120)는 상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공할 수 있다.

이 때, 메타데이터 제공부(120)는 가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송할 수 있다.

글로벌 정보 제공부(130)는 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성할 수 있다.

또한, 가상화 및 네트워크부(110)는 메타데이터 제공부(120)에게 관심 객체의 국부 정보를 요청하고, 메타데이터 제공부(120)는 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득할 수 있다.

이 때, 메타데이터 제공부(120)는 글로벌 정보 제공부(130)에게 상기 관심 객체의 글로벌 정보를 요청하고, 글로벌 정보 제공부(130)는 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득할 수 있다.

도 9를 참조하면, 가상화 및 네트워크부(110)는 시공간 출력부(111), 시공간 분석부(112), 관심 객체 추출부(113), 가상 시점 네트워크 구성부(114) 및 시점 네트워크 저장부(115)를 포함할 수 있다.

시공간 분석부(112)는 물리 영역의 안경과 객체들(701)은 안경 장치에 투시된 장면들(712)을 입력 받을 수 있다.

관심 객체 추출부(113)는 사전에 등록이 되어 있거나 사용자의 시선에 따라서 이벤트(713)로 새롭게 등록되는 객체는 관심 객체로 추출 및 등록할 수 있다.

이 때, 관심 객체 추출부(113)는 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 동안 주시한 현실 객체를 상기 관심 객체로 등록할 수 있다.

이 때, 안경 장치와 관심 객체는 가상화 공간에 가상 개체(Virtual Entities)(10)로 생성될 수 있다.

가상 개체(10)는 안경 장치의 가상화된 형태인 주체와 관심 객체, 가상네트워크를 포함하며, 가상 시점 네트워크 구성부(114)를 통해서 하나의 논리적 시점 네트워크로 구성될 수 있다.

시점 네트워크 저장부(115)는 가상 주체와 관심 객체 및 가상 네트워크 정보를 저장하고 있으며, 시공간 출력부(111)는 최종적으로 시점 기반의 응용서비스를 통해서 사용자에게 출력되는 가상화 공간에 대한 장면을 출력할 수 있다.

도 10을 참조하면, 메타데이터 제공부(120)는 시점 객체 이미지 정보 제공부(121), 시점 객체 위치 정보 제공부(122) 및 시점 객체 네트워크 정보 제공부(123) 및 시점 객체 메타데이터 제공부(124)를 포함할 수 있다.

시점 객체 이미지 정보 제공부(121)는 주체 및 객체에 대한 물리적 정보 및 논리적 정보, 주체를 통해서 인식되는 시점 기반의 장면들과 관심 객체와 주체의 이미지 정보를 저장하고 제공할 수 있다.

시점 객체 위치 정보 제공부(122)는 시점 기반의 객체들의 위치 정보를 저장하고 제공할 수 있다.

시점 객체 네트워크 정보 제공부(123)는 시점 기반의 객체들간의 통신 네트워크 정보를 저장하고 제공할 수 있다.

시점 객체 메타데이터 제공부(124)는 주체 및 객체의 속성, 성능, 기능 정보를 포함하는 메타데이터를 저장하고 제공할 수 있다.

도 11을 참조하면, 글로벌 정보 제공부(130)는 시점 데이터 수집부(131), 글로벌 시점 객체 탐색부(132), 글로벌 시점 네트워크 생성부(133) 및 글로벌 정보 저장부(134)를 포함할 수 있다.

시점 데이터 수집부(131)는 시점 기반의 응용 서비스를 수행하기 위해 각 국부 영역에서 구성되는 국부 네트워크의 관심 객체 및 가상 네트워크에 대한 국부 정보를 국부 메타데이터 영역으로부터 수집할 수 있다.

글로벌 시점 객체 탐색부(132)는 수집된 각 국부 메타데이터 영역의 관심 객체에 대한 메타 정보 및 광역 연결 정보를 최신 국부 정보로 업데이트할 수 있다.

글로벌 시점 네트워크 생성부(133)는 국부 영역의 시점 네트워크를 연결하여 시점 기반의 응용 서비스 제공을 위한 글로벌 네트워크를 생성할 수 있다.

글로벌 정보 저장부(134)는 수집된 국부 영역의 시점 네트워크의 관심 객체 및 가상 네트워크 정보 및 이와 관련되어 광역 영역에서 얻어지는 최신 메타데이터 정보와 이들간의 광역 네트워크를 구성하기 위한 정보를 저장할 수 있다.

도 12는 본 발명의 일실시예에 따른 객체 네트워킹 방법을 나타낸 동작흐름도이다. 도 13은 도 12에 도시된 관심 객체 등록 단계의 일 예를 세부적으로 나타낸 동작흐름도이다. 도 14는 도 12에 도시된 관심 객체 네트워크 정보 제공 단계의 일 예를 세부적으로 나타낸 동작흐름도이다. 도 15는 도 12에 도시된 관심 객체 해제 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.

도 12를 참조하면, 본 발명의 일실시예에 따른 객체 네트워킹 방법은 먼저 관심 객체를 등록할 수 있다(S210).

즉, 단계(S210)는 사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록할 수 있다.

도 13을 참조하면, 단계(S210)는 먼저 가상화 디스플레이 장치를 통해 현실 객체를 인식하고, 입력받을 수 있다(S211).

이 때, 단계(S210)는 현실 객체가 관심 객체로 명시된 객체이거나 사용자가 가상화 디스플레이 장치를 통해 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 이상 주시한 객체인지 확인할 수 있다(S212).

즉, 단계(S212)는 현실 객체가 관심 객체로 사전에 설정된 객체이거나, 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 동안 주시한 경우, 관심 객체 관련 정보 제공을 요청할 수 있고(S213), 두 가지 경우에 어느 하나라도 해당되지 않는 경우 단계(S211)로 되돌아가 새로운 객체를 입력받을 수 있다.

즉, 단계(S213)는 관심 객체로 등록하고, 네트워킹 정보를 저장한 노드에 네트워킹 정보를 요청하여 가상화 및 네트워킹을 준비할 수 있다.

또한, 본 발명의 일실시예에 따른 객체 네트워킹 방법은 관심 객체의 네트워크 정보를 제공할 수 있다.

즉, 단계(S220)는 관심 객체에 대한 가상 객체를 생성하고, 가상 객체에 대한 가상 네트워크를 생성하고, 관심 객체에 대한 정보를 제공할 수 있다.

도 14를 참조하면, 단계(S220)는 단계(210)의 네트워킹 정보 요청에 따라 관심 객체를 입력받을 수 있다(S221).

또한, 단계(S220)는 관심 객체에 대한 가상 객체를 매핑하여 관심 객체에 상응하는 가상 객체를 생성할 수 있다(S222).

이 때, 단계(S222)는 현재 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정할 수 있다.

또한, 단계(S220)는 가상 객체를 이용하여 가상 네트워크를 생성할 수 있다(S223).

이 때, 단계(S223)는 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성할 수 있다.

이 때, 단계(S223)는 현재 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 국부 네트워크를 생성할 수 있다.

이 때, 단계(S223)는 상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공할 수 있다.

이 때, 단계(S223)는 가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송할 수 있다.

또한, 단계(S220)는 현재 장면의 관심 객체들 간의 네트워킹 및 정보 제공을 수행할 수 있다(S224).

또한, 단계(S220)는 현재 장면에서 관심 객체 변동 여부를 확인하고, 새로운 관심 객체가 입력되거나, 관심 객체가 사라진 경우, 단계(S221)부터 단계(S224)를 재수행할 수 있고(S225), 관심 객체가 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 동안 현재 장면에서 변경이 없는 경우, 현재 장면에 해당하는 장면의 관심 객체들에 대한 네트워킹을 유지하고 정보를 제공할 수 있다(S226).

이 때, 단계(S226)는 관심 객체의 네트워킹 정보를 제공받아 관심 객체의 글로벌 네트워크를 생성할 수도 있다.

이 때, 단계(S226)는 국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득할 수 있다.

이 때, 단계(S226)는 관심 객체의 국부 정보를 업데이트할 수 있다.

이 때, 단계(S226)는 상기 제2 국부 메타데이터 계층 노드가, 글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득할 수 있다.

이 때, 단계(S226)는 관심 객체의 글로벌 정보를 업데이트할 수 있다.

이 때, 단계(S226)는 관심 객체의 글로벌 정보를 이용하여 관심 객체의 글로벌 네트워크를 생성할 수 있다.

또한, 본 발명의 일실시예에 따른 객체 네트워킹 방법은 관심 객체의 등록을 해제할 수 있다(S230).

즉, 단계(S230)는 관심 객체의 등록을 해제하고, 관심 객체를 비관심 객체로 변경할 수 있다.

도 15를 참조하면, 단계(S230)는 먼저 가상화 디스플레이 장치를 통해 입력되는 관심 객체의 변동 여부를 확인할 수 있다(S231).

또한, 단계(S230)는 상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간)을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경할 수 있다(S232).

이 때, 단계(S232)는 사용자가 장면 내에 등록된 관심 객체의 지정을 해제한 경우에도 상기 관심 객체의 등록을 해제하고 비관심 객체로 변경할 수 있다.

이 때, 단계(S232)는 상기 장면에서 출현시간 간격이 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간)을 초과하지 않거나, 관심 객체 등록이 유지되는 경우, 단계(S231)로 되돌아 가서 관심 객체의 변동을 지속적으로 확인할 수 있다.

도 16은 본 발명의 일실시예에 따른 객체가 IoT 장치들로 구성된 객체 네트워킹 시스템을 나타낸 도면이다.

도 16을 참조하면, 안경 장치(1103)에 투시된 객체가 IoT 장치(1101)이고 IoT 장치(1101)와 안경 장치(1103)가 인터넷에 연결된 것을 알 수 있다.

이 때, 안경 장치(1103)에 투시된 장면(1101)의 객체들과 장면(1102) 객체들은 각각 게이트웨이(1107, 1108)을 통해서 인터넷에 연결된 것을 알 수 있다.

이 때, 안경 장치(1103)는 액세스포인트(1104)를 통해 인터넷에 연결된 것을 알 수 있다.

도 17은 본 발명의 일실시예에 따른 객체 네트워킹 시스템의 국부 정보(메타데이터 정보) 제공 과정을 나타낸 도면이다.

도 17을 참조하면, 가상 네트워크 계층(1201)은 도 6의 가상화 및 네트워크 계층의 일실시예이고, 가상 네트워크 계층(1203)은 도 6의 국부 메타데이터 계층의 일실시예이고, 가상 네트워크 계층(1205)는 도 6의 글로벌 저장소 계층의 일실시예를 나타낸 것을 알 수 있다.

가상 네트워크 계층(1201)에 포함된 가상화 객체 A', B', C', D', 가상 안경, 가상 네트워크는 가상 네트워크 계층(1203)의 국부 메타데이터 계층과 각 가상 객체, 가상 장치, 가상 네트워크의 속성에 대한 정보를 송수신할 수 있다. 이때에 가상 네트워크 계층(1201)과 가상 네트워크 계층(1203)을 연결하는 네트워크(1202)는 ICN(Information Centric Networking) 계열의 NDN(Named Data Networking)을 사용하여 관심 객체가 가상화된 것을 인터레스트 페킷(interest packet)으로 매핑하여 정보를 송수신할 수 있다. 국부 메타데이터 계층(1203)과 글로벌 저장소 계층(1205)과의 네트워크(1204)는 NDN을 사용하여 구성할 수 있다. NDN이 글로벌하게 사용되지 않을 경우는 네트워크(1204)는 TCP/IP를 사용하여 네트워크를 구성할 수 있다.

도 18은 본 발명의 일실시예에 따른 객체 네트워킹 방법의 국부 정보 획득 및 글로벌 정보 획득 과정을 나타낸 시퀀스 다이어그램이다.

도 18을 참조하면, NDN(Named Data Networking) 기법을 이용한 객체 네트워킹 방법의 국부 정보 획득 및 글로벌 정보 획득 과정을 나타낸 것을 알 수 있다.

가상화 및 네트워크 계층(1301)은 이벤트를 수신하고(S1311), 관심객체를 추출할 수 있다(S1312).

가상화 및 네트워크 계층(1301)은 추출된 관심객체에 대한 정보의 취득을 위해서 국부 메타데이터 계층에게 관심객체의 이미지 정보를 포함하는 메타데이터 정보를 NDN을 이용하여 요청할 수 있다(S1313).

이 때, 국부 메타데이터 계층은 여러 개의 네트워크 노드로 구성이 가능하며(1302,1303), 제1 국부 메타데이터 계층 노드(1302)는 관심객체의 정보가 없는 경우 다른 네트워크 노드인 제2 국부 메타데이터 계층 노드(1303)로 요청 메시지를 포워딩할 수 있다(S1321).

제2 국부 메타데이터 계층 노드(1303)는 해당 관심객체의 정보를 제1 국부 메타 데이터 계층 노드 1(1302)에 반환하고, 제1 국부 메타 데이터 계층 노드 (1302)는 가상화 및 네트워크 계층에 해당 관심 객체의 정보를 반환할 수 있다(S1314).

이 때, 가상화 및 네트워크 계층(1301) 취득된 메타데이터를 관심객체의 정보로 등록할 수 있다(S1315).

한편, 국부 메타데이터 계층은 필요로 하는 글로벌 정보를 글로벌 저장소 계층에게 요청할 수 있다.

이 때, 제2 국부 메타데이터 계층 노드(1303)는 제1 글로벌 저장소 계층 노드(1304)로 글로벌 정보를 요청할 수 있다(S1331).

이 때, 제1 글로벌 저장소 계층 노드(1304)는 관심객체의 글로벌 정보가 없는 경우, 다른 네트워크 노드인 제2 글로벌 저장소 계층 노드(1305)로 요청 메시지를 포워딩할 수 있다(S1341).

제2 글로벌 저장소 계층 노드(1305)는 해당 관심객체의 글로벌 정보를 제1 글로벌 저장소 계층 노드(1304)에게 반환할 수 있고(S1342), 제1 글로벌 저장소 계층 노드(1304)는 제2 국부 메타데이터 계층 노드(1303)에게 해당 관심객체의 글로벌 정보를 반환할 수 있다(S1332).

이 때, 제2 국부 메타데이터 계층 노드(1303)는 취득된 관심객체의 정보를 관심객체의 글로벌 네트워크 정보로 업데이트 할 수 있다(S1333).

도 19는 본 발명의 일실시예에 따른 물리 영역에 대한 가상화 및 가상 네트워크 구성을 나타낸 도면이다.

도 19를 참조하면, 본 발명의 일실시예에 따른 물리 영역에 대한 가상화 및 가상 네트워크 구성을 나타낸 것을 알 수 있다.

물리 영역은 IoT 망에 연결된 물리 객체들(1413)과 무선(이동통신, WIFI 등)에 연결된 안경 장치(1411)와 상기 물리 객체들과 안경 장치를 모두 연결한 네트워크(1412)로 구성되는 것을 알 수 있다. 안경 장치(1411)와 IoT 객체는 보통 다른 방식의 망에 각각 연결 될 수 있기 때문에 IoT 객체 네트워크는 게이트웨이(1414)를 통해 글로벌 네트워크(1412)에 연결되고 안경 장치(1411)은 액세스포인트(1415)를 통해서 글로벌 네트워크(1412)에 연결되는 것을 알 수 있다.

이 때, 안경 장치(1411)를 통해서 본 장면(1410)에 포함된 관심 객체는 A, B, C, D이며 이때에 객체 C는 네트워크(1213)에 연결되지 않는 경우로 일 실시예를 나타낸 것을 알 수 있다.

논리 영역은 물리 영역 장면(1410)에 포함된 관심 객체이 대한 가상 네트워크를 구성하는 일 실시예이다. 물리 영역의 안경 장치(1411). 객체 A, B, C, D는 각각 가상화되어 가상 안경 장치(1422), 가상 객체 A'(1423), B'(1424), C'(1425), D'(1426)로 각각 생성된 것을 알 수 있다. 상기 가상 안경 장치(1422)와 가상 객체들은 가상 스위치(1421)의 포트에 각각 연결될 수 있다. 따라서, 가상 스위치 내에서 가상 안경 장치(1422)와 가상 객체 A'(1423), B'(1424), C'(1425), D'(1426)는 통신이 가능할 수 있다. 이 때, 가상 스위치 내에서 가상 안경 장치(1422)와 가상 객체 A'(1423), B'(1424), C'(1425), D'(1426)는 VLAN 또는 VXLAN 등으로 연결될 수도 있다. 가상 객체와 물리 객체간 통신을 하기 위해서 가상 스위치(1421)는 물리 포트를 물리 네트워크(1412)과 연결할 수 있다. 그리고 가상 안경 장치(1422), 가상 객체(1423, 1424, 1425, 1426)를 각각 물리 안경 장치(1411), 물리 객체에 매핑하여 가상 영역과 물리 영역이 일치되어 통신할 수 있다. 물리 객체 C는 물리 네트워크에 연결되어 있지 않기 때문에 가상 네트워크의 가상 객체 C는 물리 객체 C와 일치된 속성을 유지할 수 없고 물리 통신도 할 수 없으나 가상 네트워크에서는 연결되어 있기 때문에 물리 안경 장치에 가상 객체 C에 대한 정보를 제공할 수 있다. 또한 추후에 물리 객체 C가 네트워크(1410)에 연결되면 장면 1410에 대한 모든 가상 객체와 모든 물리 객체가 통신을 할 수 있다. 또한, 물리 객체 A, B, D가 가상 객체 A'(1423), B'(1424), D'(1426)와 동기화되는 것처럼 물리 개체 C가 가상 객체 C'(1425)와 동기화가 가능해질 수 있다.

또한, 가상 스위치(1421)에 연결된 가상 안경(1422) 및 가상 객체들은 장면이 바뀌어 장면을 구성하는 물리 객체가 변하더라도 가상 네트워크를 구성하는 객체를 장면에 맞추어 추가는 실시간으로 하더라도 삭제는 실시간으로 할 필요가 없기 때문에 순간적으로 변하는 장면에 대한 네트워크를 구성할 수 있다.

도 20은 본 발명의 일실시예에 따른 동일한 이름을 가진 물리 객체의 물리 영역에 대한 가상화 및 가상 네트워크 구성을 나타낸 도면이다.

도 20을 참조하면, 물리 영역의 장면(1519)는 객체(1513)와 객체(1515)가 물리 네트워크(1511)에 연결되어 있고, 객체(1514)는 네트워크(1511)에 연결되어 있지 않는 것을 알 수 있다. 이에 대한 논리 영역은 가상 객체(1592)(물리 객체(1513)에 대응), 가상 객체(1593)(물리 객체(1514)에 대응), 가상 객체(1595)(물리 객체(1515)에 대응)가 포함되는 가상 네트워크를 구성하여 장면(1519)에 대응되는 것을 알 수 있다.

이 때, 물리 객체(1514)는 네트워크에 연결되어 있지 않기 때문에 동기화나 통신이 되지 않고 단지 속성 정보만 안경 장치(1516)에 제공되는 것을 알 수 있다.

또한, 장면(1529)는 객체(1523)와 객체(1524)가 물리 네트워크(1521)에 연결되어 있고 객체(1525)는 네트워크(1521)연결되어 있지 않은 것을 알 수 있다. 이에 대한 논리 영역은 가상 객체(1593)(물리 객체(1523)에 대응), 가상 객체(1594)(물리 객체(1524)에 대응), 가상 객체(1595)(물리 객체(1525)에 대응)가 포함되는 가상 네트워크를 구성하여 장면(1529)에 대응되는 것을 알 수 있다.

이 때, 물리 객체(1525)는 네트워크에 연결되어 있지 않기 때문에 동기화나 통신이 되지 않고 단지 속성 정보만 안경 장치(1526)에 제공할 수 있다.

또한, 장면(1539)는 객체(1532)와 객체(1535)는 물리 네트워크(1531)에 연결되어 있지 않은 것을 알 수 있다. 이에 대한 논리 영역은 가상 객체(1592)(물리 객체(1532)에 대응), 가상 객체(1595)(물리 객체(1535)에 대응)가 포함되는 가상 네트워크를 구성하여 장면(1539)에 대응되는 것을 알 수 있다.

이 때, 물리 객체(1532)와 물리 객체(1535)는 네트워크에 연결되어 있지 않기 때문에 동기화나 통신이 되지 않고 단지 속성 정보만 안경 장치(1536)에 제공되는 것을 알 수 있다.

도 19에 도시된 바와 같이, 논리 영역의 가상 객체가 물리 영역의 객체에 대해서 1:N(N은 자연수)으로 대응을 하기 때문에 장면에 대한 네트워크 구성과 정보 제공을 실시간으로 제공할 수 있다. 장면(1519), 장면(1529), 장면(1539)에서 대부분의 경우에 물리 안경 장치(1516, 1526 및 1536)은 동일한 하나의 안경 장치일 수 있다.

도 21은 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.

도 21을 참조하면, 본 발명의 일실시예에 따른 객체 네트워킹 장치(100)는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템(1100)에서 구현될 수 있다. 도 21에 도시된 바와 같이, 컴퓨터 시스템(1100)은 버스(1120)를 통하여 서로 통신하는 하나 이상의 프로세서(1110), 메모리(1130), 사용자 인터페이스 입력 장치(1140), 사용자 인터페이스 출력 장치(1150) 및 스토리지(1160)를 포함할 수 있다. 또한, 컴퓨터 시스템(1100)은 네트워크(1180)에 연결되는 네트워크 인터페이스(1170)를 더 포함할 수 있다. 프로세서(1110)는 중앙 처리 장치 또는 메모리(1130)나 스토리지(1160)에 저장된 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 메모리(1130) 및 스토리지(1160)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 예를 들어, 메모리는 ROM(1131)이나 RAM(1132)을 포함할 수 있다.

본 발명의 일실시예에 따른 객체 네트워킹 장치(100)는 하나 이상의 프로세서(1110) 및 상기 하나 이상의 프로세서(1110)에 의해 실행되는 적어도 하나 이상의 프로그램을 저장하는 실행메모리(1130)를 포함하고, 상기 적어도 하나 이상의 프로그램은 사용자의 가상화 디스플레이 장치(103)가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하고, 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하고, 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 상기 국부 네트워크를 생성할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간) 동안 주시한 현실 객체를 상기 관심 객체로 등록할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간(ΔT, ΔT는 0보다 큰 실수의 시간)을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경할 수 있다.

이 때, 상기 적어도 하나 이상의 프로그램은 국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득할 수 있다.

이 때, 상기 제2 국부 메타데이터 계층 노드는 글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득할 수 있다.

이상에서와 같이 본 발명의 일실시예에 따른 객체 네트워킹 장치 및 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

10: 가상 개체 20: 네트워크 관리 장치
100: 객체 네트워킹 장치 110: 가상화 및 네트워크부
111: 시공간 출력부 112: 시공간 분석부
113: 관심 객체 추출부 114: 가상 시점 네트워크 구성부
115: 시점 네트워크 저장부 120: 메타데이터 제공부
121: 시점 객체 이미지 정보 제공부
122: 시점 객체 위치 정보 제공부
123: 시점 객체 네트워크 정보 제공부
124: 시점 객체 메타데이터 제공부
130: 글로벌 정보 제공부 131: 시점 데이터 수집부
132: 글로벌 시점 객체 탐색부 133: 글로벌 시점 네트워크 생성부
134: 글로벌 정보 저장부
1100: 컴퓨터 시스템 1110: 프로세서
1120: 버스 1130: 메모리
1131: 롬 1132: 램
1140: 사용자 인터페이스 입력 장치
1150: 사용자 인터페이스 출력 장치
1160: 스토리지 1170: 네트워크 인터페이스
1180: 네트워크

Claims (18)

1. 하나 이상의 프로세서; 및
   상기 하나 이상의 프로세서에 의해 실행되는 적어도 하나 이상의 프로그램을 저장하는 실행메모리;
   를 포함하고,
   상기 적어도 하나 이상의 프로그램은
   사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하고, 상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하고, 상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성하는 것을 특징으로 하는 객체 네트워킹 장치.
2. 청구항 1에 있어서,
   상기 적어도 하나 이상의 프로그램은
   상기 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정하는 것을 특징으로 하는 객체 네트워킹 장치.
3. 청구항 2에 있어서,
   상기 적어도 하나 이상의 프로그램은
   상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 상기 국부 네트워크를 생성하는 것을 특징으로 하는 객체 네트워킹 장치.
4. 청구항 3에 있어서,
   상기 적어도 하나 이상의 프로그램은
   상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공하는 것을 특징으로 하는 객체 네트워킹 장치.
5. 청구항 4에 있어서,
   상기 적어도 하나 이상의 프로그램은
   가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송하는 것을 특징으로 하는 객체 네트워킹 장치.
   
6. 청구항 1에 있어서,
   상기 적어도 하나 이상의 프로그램은
   상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간 동안 주시한 현실 객체를 상기 관심 객체로 등록하는 것을 특징으로 하는 객체 네트워킹 장치.
7. 청구항 1에 있어서,
   상기 적어도 하나 이상의 프로그램은
   상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경하는 것을 특징으로 하는 객체 네트워킹 장치.
8. 청구항 1에 있어서,
   상기 적어도 하나 이상의 프로그램은
   국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득하는 것을 특징으로 하는 객체 네트워킹 장치.
9. 청구항 8에 있어서,
   상기 제2 국부 메타데이터 계층 노드는
   글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득하는 것을 특징으로 하는 객체 네트워킹 장치.
10. 객체 네트워킹 장치의 객체 네트워킹 방법에 있어서,
    사용자의 가상화 디스플레이 장치가 인식한 장면에 포함되는 현실 객체를 관심 객체로 등록하는 단계;
    상기 관심 객체의 국부 정보를 이용하여 국부 네트워크를 생성하는 단계; 및
    상기 관심 객체의 글로벌 정보를 이용하여 복수개의 관심 객체들의 국부 네트워크들로부터 상기 복수개의 관심 객체들에 상응하는 글로벌 네트워크를 생성하는 단계;
    를 포함하는 것을 특징으로 하는 객체 네트워킹 방법.
11. 청구항 10에 있어서,
    상기 국부 네트워크를 생성하는 단계는
    상기 장면에 포함된 적어도 하나의 관심 객체 및 상기 가상화 디스플레이 장치를 상기 장면에 상응하는 가상 개체들로 설정하는 것을 특징으로 하는 객체 네트워킹 방법.
12. 청구항 11에 있어서,
    상기 국부 네트워크를 생성하는 단계는
    상기 장면에 상응하는 가상화 공간을 생성하고, 상기 가상화 공간에 상기 가상 개체들을 설정하고, 상기 가상화 공간에 설정된 상기 가상 개체들에 대한 가상 네트워크를 구성하여 상기 국부 네트워크를 생성하는 것을 특징으로 하는 객체 네트워킹 방법.
13. 청구항 12에 있어서,
    상기 국부 네트워크를 생성하는 단계는
    상기 관심 객체를 논리 영역의 가상 객체로 매핑하여 상기 가상 개체를 설정하고, 상기 관심 객체가 물리 네트워크에 연결되어 있지 않은 경우, 상기 논리 영역의 가상 객체에 연결된 가상 네트워크를 이용하여 상기 가상 객체에 대한 정보를 상기 가상화 디스플레이 장치에 제공하는 것을 특징으로 하는 객체 네트워킹 방법.
14. 청구항 13에 있어서,
    상기 국부 네트워크를 생성하는 단계는
    가상화 및 네트워크 계층과 국부 메타데이터 계층을 연결하는 네트워크에서 ICN(INFORMATION CENTRIC NETWORKING) 계열의 NDN(NAMED DATA NETWORKING) 기법을 이용하여 상기 관심 객체에 상응하는 상기 가상 객체를 인터레스트 페킷(INTEREST PACKET)으로 매핑하여 상기 가상 객체에 대한 정보를 전송하는 것을 특징으로 하는 객체 네트워킹 방법.
15. 청구항 10에 있어서,
    상기 관심 객체로 등록하는 단계는
    상기 사용자가 상기 가상화 디스플레이 장치를 통해 기설정된 시간 동안 주시한 현실 객체를 상기 관심 객체로 등록하는 것을 특징으로 하는 객체 네트워킹 방법.
16. 청구항 10에 있어서,
    상기 객체 네트워킹 방법은
    상기 관심 객체의 등록을 해제하는 단계를 더 포함하고,
    상기 관심 객체의 등록을 해제하는 단계는
    상기 장면에서 상기 관심 객체가 출현하는 시간 간격이 기설정된 시간을 초과하는 경우, 상기 관심 객체의 등록을 해제하고, 비관심 객체로 변경하는 것을 특징으로 하는 객체 네트워킹 방법.
17. 청구항 10에 있어서,
    상기 국부 네트워크를 생성하는 단계는
    국부 메타데이터 계층으로 상기 관심 객체의 국부 정보를 요청하고, 상기 관심 객체의 국부 정보를 요청 받은 제1 국부 메타데이터 계층 노드에 관심 객체의 국부 정보가 존재하지 않는 경우, 제2 국부 메타데이터 계층 노드로 상기 관심 객체의 국부 정보의 요청을 포워딩하여 상기 관심 객체의 국부 정보를 획득하는 것을 특징으로 하는 객체 네트워킹 방법.
18. 청구항 17에 있어서,
    상기 글로벌 네트워크를 생성하는 단계는
    글로벌 저장소 계층으로 상기 관심 객체의 글로벌 정보를 요청하고, 상기 관심 객체의 글로벌 정보를 요청 받은 제1 글로벌 저장소 계층 노드에 관심 객체의 글로벌 정보가 존재하지 않는 경우, 제2 글로벌 저장소 노드로 상기 관심 객체의 글로벌 정보의 요청을 포워딩하여 상기 관심 객체의 글로벌 정보를 획득하는 것을 특징으로 하는 객체 네트워킹 방법.

Images