KR101995050B1

KR101995050B1 - 객체 간 연관성을 고려한 가상객체 제공 방법 및 이를 위한 장치

Info

Publication number: KR101995050B1
Application number: KR1020170149473A
Authority: KR
Inventors: 이효윤; 강규욱
Original assignee: (주)필링크아이
Priority date: 2017-11-10
Filing date: 2017-11-10
Publication date: 2019-07-02
Also published as: KR20190053513A

Abstract

객체 간 연관성을 고려한 가상객체 제공 방법 및 이를 위한 장치가 개시된다. 본 발명의 일실시예에 따른 가상객체 제공 방법은 가상객체 제공 장치가, 복수개의 가상객체카드들을 인식하는 단계; 상기 가상객체 제공 장치가, 상기 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정하는 단계; 및 상기 가상객체 제공 장치가, 상기 객체 출력 유형에 상응하게 상기 복수개의 가상객체들을 디스플레이 화면에 출력하는 단계를 포함한다.

Description

객체 간 연관성을 고려한 가상객체 제공 방법 및 이를 위한 장치 {METHOD FOR PROVIDING VIRTUAL OBJECT CONSIDERING RELATIONSHIP BETWEEN OBJECTS AND APPARATUS THEREFOR}

본 발명은 객체들 사이의 연관성을 고려하여 가상객체를 제공하는 기술에 관한 것으로, 특히 연관 관계나 객체의 종류를 고려하여 연관된 가상객체들을 함께 출력하는 기술에 관한 것이다.

증강현실(Augmented Reality)이란, 사용자가 눈으로 보는 현실세계와 부가 정보를 갖는 가상 세계를 합쳐서 보여주는 가상현실의 한 종류이다. 현실세계에 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality)라고도 한다. 즉, 사용자가 보고 있는 현실의 영상에 3차원의 가상 영상을 오버랩하여 보여줌으로써 현실과 가상의 구분이 모호해지도록 하는 것이다.

이와 같은 증강현실을 이용한 서비스 방식은 단말로 카드를 촬영하면 카드에 포함된 마커를 통해 가상객체를 인식하여 단말의 화면을 통해 보여주거나, 단말을 가지고 특정 위치로 이동하면 화면에 가상 객체를 보여주는 것이 일반적이다.

한국 공개 특허 제10-2011-0004825호, 2011년 1월 14일 공개(명칭: 증강현실을 이용한 온라인 연동 TCG 시스템 및 그 게임방법)

본 발명의 목적은 서로 연관된 가상객체들을 그에 상응하는 유형에 맞게 연출하거나 조합하여 보여줌으로써 사용자에게 보다 다양한 서비스를 제공하는 것이다.

또한, 본 발명의 목적은 사용자가 갖고 있지 않은 카드의 가상객체도 연관 관계를 통해 제공함으로써 카드의 유무와 관계없이 다양한 가상객체를 제공하는 것이다.

또한, 본 발명의 목적은 사용자의 얼굴을 인식한 정보에 따라 자동으로 다양한 모드의 가상 객체를 제공하는 것이다.

또한 본 발명의 목적은 자동으로 배치된 가상객체들을 사용자가 자유롭게 이동시키거나 편집할 수 있도록 하는 것이다.

상기한 목적을 달성하기 위한 본 발명에 따른 가상객체 제공 방법은 가상객체 제공 장치가, 복수개의 가상객체카드들을 인식하는 단계; 상기 가상객체 제공 장치가, 상기 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정하는 단계; 및 상기 가상객체 제공 장치가, 상기 객체 출력 유형에 상응하게 상기 복수개의 가상객체들을 디스플레이 화면에 출력하는 단계를 포함한다.

이 때, 결정하는 단계는 상기 복수개의 가상객체들 사이의 연관 관계를 식별하는 단계; 및 상기 복수개의 가상객체들 각각의 객체 종류를 식별하는 단계를 포함하고, 상기 연관 관계 및 상기 객체 종류 중 적어도 하나를 고려하여 상기 객체 출력 유형을 결정할 수 있다.

이 때, 객체 출력 유형은 상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 상기 연관 관계에 상응하는 구도로 출력하는 유형 및 상기 객체 종류를 고려하여 상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 조합하여 출력하는 유형 중 적어도 하나에 상응할 수 있다.

이 때, 출력하는 단계는 가상객체 데이터베이스를 기반으로 상기 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력할 수 있다.

이 때, 출력하는 단계는 사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 상기 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 상기 객체 출력 유형 및 상기 객체 출력 모드 중 적어도 하나를 고려하여 상기 복수개의 가상객체들을 출력할 수 있다.

이 때, 객체 출력 모드는 상기 복수개의 가상객체들에 대한 크기 정보, 위치 정보, 방향 정보 및 감정 정보 중 적어도 하나를 포함할 수 있다.

이 때, 얼굴 인식 정보는 상기 얼굴에 상응하는 크기, 위치, 시선 및 감정 중 적어도 하나를 포함할 수 있다.

또한, 본 발명의 일실시예에 따른 가상객체 제공 장치는, 복수개의 가상객체카드들을 인식하는 입력부; 상기 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정하는 제어부; 및 상기 객체 출력 유형에 상응하게 상기 복수개의 가상객체들을 디스플레이 화면에 출력하는 출력부를 포함한다.

이 때, 제어부는 상기 복수개의 가상객체들 사이의 연관 관계와 상기 복수개의 가상객체들 각각의 객체 종류를 식별하고, 상기 연관 관계 및 상기 객체 종류 중 적어도 하나를 고려하여 상기 객체 출력 유형을 결정할 수 있다.

이 때, 출력부는 가상객체 데이터베이스를 기반으로 상기 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력할 수 있다.

이 때, 출력부는 사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 상기 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 상기 객체 출력 유형 및 상기 객체 출력 모드 중 적어도 하나를 고려하여 상기 복수개의 가상객체들을 출력할 수 있다.

본 발명에 따르면, 서로 연관된 가상객체들을 그에 상응하는 유형에 맞게 연출하거나 조합하여 보여줌으로써 사용자에게 보다 다양한 서비스를 제공할 수 있다.

또한, 본 발명은 사용자가 갖고 있지 않은 카드의 가상객체도 연관 관계를 통해 제공함으로써 카드의 유무와 관계없이 다양한 가상객체를 제공할 수 있다.

또한, 본 발명은 사용자의 얼굴을 인식한 정보에 따라 자동으로 다양한 모드의 가상 객체를 제공할 수 있다.

또한, 본 발명은 자동으로 배치된 가상객체들을 사용자가 자유롭게 이동시키거나 편집할 수 있도록 할 수 있다.

도 1은 본 발명의 일실시예에 따른 가상객체 제공 시스템을 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 가상객체 제공 방법을 나타낸 동작 흐름도이다.
도 3 내지 도 6은 본 발명에 따른 연관 관계에 상응하는 구도로 출력된 가상객체의 일 예를 나타낸 도면이다.
도 7 내지 도 10은 본 발명에 따른 객체 종류에 따른 가상객체카드와 조합되어 출력된 가상객체의 일 예를 나타낸 도면이다.
도 11은 본 발명의 일실시예에 따른 가상객체 제공 장치를 나타낸 블록도이다.
도 12 내지 도 14는 본 발명에 따른 얼굴 인식 정보를 기반으로 결정된 객체 출력 모드에 상응하게 출력된 가상객체의 일 예를 나타낸 도면이다.
도 15 내지 도 21은 본 발명에 따른 가상객체 제공 과정을 통해 증강현실 콘텐츠를 제공하는 과정의 일 예를 나타낸 도면이다.
도 22 내지 도 23은 본 발명에 따른 가상객체를 이동하거나 확대하는 일 예를 나타낸 도면이다.
도 24 내지 도 28은 본 발명에 따른 현실객체를 배경과 분리하는 과정을 기반으로 가상객체를 합성하는 일 예를 나타낸 도면이다.
도 29 내지 도 30은 본 발명에 따른 가상객체의 일부를 지워서 이미지와 합성하는 과정의 일 예를 나타낸 도면이다.
도 31 내지 도 32는 본 발명에 따른 가상객체카드의 위조를 방지하기 위한 카드 인식 방식의 일 예를 나타낸 도면이다.
도 33은 본 발명에 따른 가상객체카드를 인식하는 방식의 일 예를 나타낸 도면이다.
도 34 내지 도 35는 본 발명에 따른 가상객체카드의 손실에 따라 생성되는 가상객체의 일 예를 나타낸 도면이다.

본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.

이하, 본 발명에 따른 바람직한 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.

도 1은 본 발명의 일실시예에 따른 가상객체 제공 시스템을 나타낸 도면이다.

도 1을 참조하면, 본 발명의 일실시예에 따른 가상객체 제공 시스템은 가상객체 제공 장치(110), 가상객체카드(120), 사용자(130) 및 가상객체 데이터베이스(140)를 포함한다.

가상객체 제공 장치(110)는 복수개의 가상객체카드(120)들을 인식한다.

이 때, 사용자(130)가 가상객체 제공 장치(110)에 구비된 카메라를 이용하여 복수개의 가상객체카드(120)들을 촬영하는 방식으로 가상객체카드(120)를 인식시킬 수 있다.

이 때, 복수개의 가상객체카드(120)들은 제공될 가상객체에 관련된 이미지나 텍스트 정보를 포함할 수 있다. 예를 들어, 가상객체카드(120)를 인식하기 위한 마커는 가상객체카드(120)에 포함된 이미지나 텍스트 등을 기반으로 생성될 수 있다.

또한, 가상객체 제공 장치(110)는 복수개의 가상객체카드(120)들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정한다.

이 때, 객체 출력 유형은 디스플레이 화면에 복수개의 가상객체들이 어떻게 출력될지를 나타내는 것에 상응할 수 있다.

이 때, 복수개의 가상객체들 사이의 연관 관계를 식별할 수 있다. 예를 들어, 연관 관계는 협력 관계, 우호 관계, 대립 관계, 커플 관계 등에 상응할 수 있다.

이 때, 복수개의 가상객체들 각각의 객체 종류를 식별할 수 있다. 예를 들어, 캐릭터, 아이템 및 배경 중 어느 하나로 객체 종류를 식별할 수 있다.

이 때, 연관 관계 및 객체 종류 중 적어도 하나를 고려하여 객체 출력 유형을 결정할 수 있다.

이 때, 객체 출력 유형은 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 연관 관계에 상응하는 구도로 출력하는 유형 및 객체 종류를 고려하여 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 조합하여 출력하는 유형 중 적어도 하나에 상응할 수 있다.

또한, 가상객체 제공 장치(110)는 객체 출력 유형에 상응하게 복수개의 가상객체들을 디스플레이 화면에 출력한다.

이 때, 가상객체 데이터베이스(140)를 기반으로 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력할 수 있다. 즉, 연관 관계에 있는 두 개의 가상객체들 중 어느 하나의 가상객체만 인식되는 경우에도 나머지 하나의 가상객체를 자동으로 출력해 줄 수 있다.

이 때, 사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 객체 출력 유형 및 객체 출력 모드 중 적어도 하나를 고려하여 복수개의 가상객체들을 출력할 수 있다. 즉, 가상객체카드(120)에 의해 제공되는 가상객체는 동일한 것에 상응할 수 있으나, 얼굴 인식 정보에 따라 가상객체를 객체 출력 모드에 상응하게 변형하여 출력할 수 있다.

이 때, 객체 출력 모드는 복수개의 가상객체들에 대한 크기 정보, 위치 정보, 방향 정보 및 감정 정보 중 적어도 하나를 포함할 수 있다.

이 때, 얼굴 인식 정보는 얼굴에 상응하는 크기, 위치, 시선 및 감정 중 적어도 하나를 포함할 수 있다.

도 2는 본 발명의 일실시예에 따른 가상객체 제공 방법을 나타낸 동작 흐름도이다.

도 2를 참조하면, 본 발명의 일실시예에 따른 가상객체 제공 방법은, 가상객체 제공 장치가 복수개의 가상객체카드들을 인식한다(S210).

이 때, 복수개의 가상객체카드들 각각에 포함된 마커들을 검출하여 가상객체카드를 인식할 수 있다. 예를 들어, 가상객체 제공 장치에 구비된 카메라를 통해 가상객체카드를 촬영하면, 가상객체카드의 이미지나 텍스트 등에 포함된 특정한 패턴이나 마커가 검출되어 가상객체카드가 어떤 카드인지 인식할 수 있다.

이 때, 복수개의 가상객체카드들은 시간 간격을 두고 순차적으로 인식시킬 수 있으며, 이러한 경우 사용자가 복수개의 가상객체카드들 중 적어도 하나의 가상객체카드를 선택할 수 있도록 별도의 카드 선택 인터페이스를 제공할 수도 있다.

또한, 본 발명의 일실시예에 따른 가상객체 제공 방법은, 가상객체 제공 장치가 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정한다(S220).

이 때, 복수개의 가상객체들 사이의 연관 관계를 식별할 수 있다.

예를 들어, 가상객체에 해당하는 어느 하나의 캐릭터에 대해서 다른 가상객체의 캐릭터가 스토리상 협력 관계에 해당하는지 또는 대립 관계에 해당하는지 등을 식별할 수 있다.

다른 예를 들어, 가상객체에 해당하는 어느 하나의 캐릭터와 스토리상으로 커플 관계에 해당하는 캐릭터가 존재하는지 등을 식별할 수도 있다.

이 때, 복수개의 가상객체들 각각의 객체 종류를 식별할 수 있다.

예를 들어, 객체 종류는 캐릭터, 아이템, 배경, 효과 등으로 구별하여 복수개의 가상객체들이 각각 어느 종류에 해당하는지 여부를 식별할 수 있다.

예를 들어, 캐릭터에 해당하는 두 개의 가상객체카드들이 인식되었고, 두 개의 가상객체카드들에 각각 포함된 캐릭터가 서로 협력 관계에 상응한다고 가정할 수 있다. 이러한 경우에는 두 개의 캐릭터가 하이파이브를 하거나 손을 잡는 것과 같이 서로 협력하고 있음을 나타낼 수 있는 구도로 가상객체들을 출력할 수 있다.

다른 예를 들어, 캐릭터에 해당하는 두 개의 가상객체카드들이 인식되었고, 두 개의 가상객체카드들에 각각 포함된 캐릭터가 서로 대립 관계에 상응한다고 가정할 수 있다. 이러한 경우에는 두 개의 캐릭터가 서로 노려보고 있거나 싸우고 있는 것과 같이 서로 대립하고 있음을 나타낼 수 있는 구도로 가상객체들을 출력할 수 있다.

또 다른 예를 들어, 캐릭터에 해당하는 하나의 가상객체카드와 아이템에 해당하는 다른 하나의 가상객체카드가 인식되었다고 가정할 수 있다. 이러한 경우에는 캐릭터와 아이템을 조합하여 마치 캐릭터가 아이템을 사용하고 있는 듯한 가상객체를 출력할 수 있다.

또 다른 예를 들어, 캐릭터에 해당하는 하나의 가상객체카드와 배경에 해당하는 다른 하나의 가상객체카드가 인식되었다고 가정할 수 있다. 이러한 경우에는 캐릭터를 배경에 포함시켜 마치 캐릭터가 배경에 위치하고 있는 듯한 가상객체를 출력할 수도 있다.

본 발명에 따른 연관 관계나 객체 종류는 상기의 예에서 설명한 것 이외에도 다양하게 존재할 수 있으며 특정한 요소들로 한정되지 않을 수 있다.

또한, 본 발명의 일실시예에 따른 가상객체 제공 방법은, 가상객체 제공 장치가 객체 출력 유형에 상응하게 복수개의 가상객체들을 디스플레이 화면에 출력한다(S230).

이 때, 복수개의 가상객체들은 객체 출력 유형에 상응하는 형태로 변형, 조합 또는 합성되어 디스플레이 화면으로 출력될 수 있다.

이 때, 복수개의 가상객체들은 현실세계를 기반으로 입력된 현실 객체와 합성되어 별도의 이미지 콘텐츠로 생성될 수도 있다. 또는 사용자가 저장할 수 있는 형태의 이미지 데이터로 제공됨으로써 사용자의 소셜 네트워크 서비스에 사용될 수도 있다.

이 때, 가상객체 데이터베이스를 기반으로 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력할 수 있다.

예를 들어, 사용자가 가상객체 제공 장치를 통해 인식시킨 복수개의 가상객체들 중 어느 하나에 해당하는 가상객체 A와 가상객체 A와 연관 관계에 상응하는 가상객체 B가 존재한다고 가정할 수 있다. 이 때, 가상객체 B는 사용자에 의해 가상객체 제공 장치에 인식되지 않은 가상객체이지만, 이미 가상객체 A가 인식되어 있으므로 가상객체 A가 출력될 때 가상객체 B도 가상객체 데이터베이스에서 검색하여 함께 출력되도록 할 수 있다.

이와 같이 사용자가 모든 종류의 가상객체카드를 소지하지 않아도, 일부의 가상객체카드만 이용하여 보다 다양한 가상객체 서비스를 제공할 수 있다.

이 때, 사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 객체 출력 유형 및 객체 출력 모드 중 적어도 하나를 고려하여 복수개의 가상객체들을 출력할 수 있다.

이 때, 얼굴 인식 정보는 복수개의 가상객체들이 출력되는 형태나 위치 등을 결정하기 위해 생성되는 정보일 수 있으며, 가상객체 제공 장치를 통해 인식된 사용자의 얼굴에 상응하게 생성될 수 있다.

이 때, 객체 출력 모드란 인식된 복수개의 가상객체카드들 각각에 상응하는 가상객체가 출력되는 모드(mode)에 상응할 수 있다.

예를 들어, 객체 출력 모드가 크기 정보를 포함하고 있는 경우, 복수개의 가상객체들을 각각 크기 정보에 상응하는 크기로 생성하여 출력할 수 있다.

다른 예를 들어, 객체 출력 모드가 위치 정보를 포함하고 있는 경우, 복수개의 가상객체들을 각각 위치 정보에 상응하는 위치에 출력할 수 있다.

또 다른 예를 들어, 객체 출력 모드가 방향 정보를 포함하고 있는 경우, 복수개의 가상객체들을 각각 방향 정보에 상응하게 회전한 형태로 생성하여 출력할 수 있다.

또 다른 예를 들어, 객체 출력 모드가 감정 정보를 포함하고 있는 경우, 복수개의 가상객체들을 각각 감정 정보에 상응하는 형태의 표정이나 모션에 상응하게 생성하여 출력할 수도 있다.

예를 들어, 사용자의 얼굴이 포함된 이미지에서 얼굴의 윤곽선을 추출하여 얼굴의 크기나 위치 등을 추정할 수 있다. 또는, 이목구비의 형태나 위치 및 방향 등을 고려하여 사용자의 시선이나 감정 등을 추정할 수도 있다.

이 때, 얼굴을 인식하는 방법은 특정한 알고리즘에 한정되지 않고, 향후 개발 가능한 기술을 이용할 수도 있다.

이 때, 사용자의 얼굴이나 복수개의 가상객체들 중 적어도 하나의 깊이 레벨을 조절할 수 있는 깊이 조절 인터페이스를 제공할 수도 있다.

이 때, 깊이 조절 인터페이스는 디스플레이 화면에 출력되는 객체의 개수에 상응하게 결정되는 깊이 레벨에 기반하여 설정될 수 있다.

예를 들어, 디스플레이 화면에 출력되는 객체의 개수가 3개라고 가정한다면, 0레벨부터 2레벨까지 3개의 깊이 레벨에 기반하여 각각의 객체의 깊이를 설정할 수 있다.

이 때, 깊이 조절 인터페이스는 디스플레이 화면에 출력되는 여러 객체들 중 어느 하나의 객체에 대한 깊이가 결정되는 경우, 다른 객체의 깊이 레벨 중 일부를 선택 불가하도록 설정할 수도 있다.

예를 들어, 상기의 예시와 같이 3개의 깊이 레벨이 존재하고, 3개의 객체들 중에는 배경에 해당하는 배경 객체가 존재한다고 가정할 수 있다. 이 때, 배경 객체는 디스플레이 화면상에서 다른 객체들보다 뒤에 위치해야 하기 때문에 깊이 레벨이 2 레벨로 결정될 수 있다. 이 후, 다른 객체들의 깊이를 설정할 때에는 깊이 조절 인터페이스에서 배경 객체가 위치하는 2 레벨에 대해서는 선택이 불가하도록 지정함으로써 배경 객체의 깊이가 변경되지 않도록 할 수 있다.

또한, 도 2에는 도시하지 아니하였으나, 본 발명의 일실시예에 따른 가상객체 제공 방법은 상술한 가상객체 제공 과정에서 발생하는 다양한 정보를 저장할 수 있다.

이와 같은 가상객체 제공 방법을 이용함으로써, 서로 연관된 가상객체들을 그에 상응하는 유형에 맞게 연출하거나 조합하여 보여줌으로써 사용자에게 보다 다양한 서비스를 제공할 수 있다.

또한, 사용자가 갖고 있지 않은 카드의 가상객체도 연관 관계를 통해 제공함으로써 카드의 유무와 관계없이 다양한 가상객체를 제공할 수 있다.

도 3 내지 도 6은 본 발명에 따른 연관 관계에 상응하는 구도로 출력된 가상객체의 일 예를 나타낸 도면이다.

도 3 내지 도 6을 참조하면, 본 발명의 일실시예에 따른 연관 관계는 도 3에 도시된 것과 같은 협력 관계, 도 4에 도시된 것과 같은 대립 관계 또는 도 6에 도시된 것과 같은 커플 관계 등이 존재할 수 있다.

이 때, 도 3을 참조하면, 두 개의 가상객체(310, 320)가 서로 협력 관계에 있음을 이미지 만으로도 알 수가 있다. 즉, 가상객체(310)와 가상객체(320)의 연관 관계가 협력 관계에 해당하므로 두 개의 가상객체(310, 320)들을 도 3과 같은 구도로 출력할 수 있다.

만약, 도 3에 도시된 두 개의 가상객체(310, 320)가 서로 대립 관계였다면, 두 캐릭터가 서로 싸우고 있거나 노려보고 있는 구도로 출력되었을 수 있다.

즉, 도 4에 도시된 것과 같이, 두 개의 가상객체(410, 420)가 서로 대립 관계에 있음을 알 수 있도록 출력되었을 수 있다.

이 때, 도 4에 도시된 두 개의 가상객체(410, 420)들도 마찬가지로, 서로 협력 관계였다면, 도 3과 같은 구도로 출력되었을 수 있다.

또한, 도 6에 도시된 두 개의 가상객체(610, 620)들은 서로 커플 관계임을 알 수 있다.

이 때, 만약 도 6에 도시된 가상객체(610)가 가상객체(620)없이 출력된다면, 도 5에 도시된 형태의 가상객체(510)로 출력될 수 있다. 즉, 두 개의 가상객체(610, 620) 중 어느 하나의 가상객체만 출력되는 경우에는 커플 관계로 출력될 때의 구도와는 다른 형태로 출력될 수 있으나, 함께 출력되는 경우에는 객체 출력 유형에 따라 도 6과 같은 구도로 출력될 수 있다.

도 7 내지 도 10은 본 발명에 따른 객체 종류에 따른 가상객체카드와 조합되어 출력된 가상객체의 일 예를 나타낸 도면이다.

도 7 내지 도 10을 참조하면, 본 발명의 일실시예에 따른 가상객체 제공 방식은 도 7에 도시된 캐릭터 카드(710)와 도 8에 도시된 아이템 카드(810)를 인식한 뒤에 두 개의 카드에 해당하는 가상객체를 조합하여 출력할 수 있다.

즉, 캐릭터 카드(710)에 의한 가상객체의 객체 종류와 아이템 카드(810)에 의한 가상객체의 객체 종류를 고려하여 두 개의 가상객체들을 조합할 수 있다.

예를 들어, 도 7에 도시된 캐릭터 카드(710)의 가상객체가 단독으로 출력되는 경우 도 9에 도시된 가상객체(910)의 형태로 출력될 수 있다. 이 때, 도 8에 도시된 아이템 카드(810)를 추가로 인식시켰다고 가정하면, 도 10에 도시된 것과 같이 두 개의 가상객체(1010, 1020)들이 조합되어 출력될 수 있다.

도 11은 본 발명의 일실시예에 따른 가상객체 제공 장치를 나타낸 블록도이다.

도 11을 참조하면, 본 발명의 일실시예에 따른 가상객체 제공 장치는 입력부(1110), 제어부(1120), 출력부(1130) 및 저장부(1140)를 포함한다.

입력부(1110)는 복수개의 가상객체카드들을 인식한다.

제어부(1120)는 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정한다.

출력부(1130)는 객체 출력 유형에 상응하게 복수개의 가상객체들을 디스플레이 화면에 출력한다.

저장부(1140)는 상술한 바와 같이 본 발명의 실시예에 따른 가상객체 제공 과정에서 발생되는 다양한 정보를 저장한다.

실시예에 따라, 저장부(1140)는 가상객체 제공 장치와 독립적으로 구성되어 가상객체 제공을 위한 기능을 지원할 수 있다. 이 때, 저장부(1140)는 별도의 대용량 스토리지로 동작할 수 있고, 동작 수행을 위한 제어 기능을 포함할 수 있다.

한편, 가상객체 제공 장치는 메모리가 탑재되어 그 장치 내에서 정보를 저장할 수 있다. 일 구현예의 경우, 메모리는 컴퓨터로 판독 가능한 매체이다. 일 구현 예에서, 메모리는 휘발성 메모리 유닛일 수 있으며, 다른 구현예의 경우, 메모리는 비휘발성 메모리 유닛일 수도 있다. 일 구현예의 경우, 저장장치는 컴퓨터로 판독 가능한 매체이다. 다양한 서로 다른 구현 예에서, 저장장치는 예컨대 하드디스크 장치, 광학디스크 장치, 혹은 어떤 다른 대용량 저장장치를 포함할 수도 있다.

이와 같은 가상객체 제공 장치를 통해, 서로 연관된 가상객체들을 그에 상응하는 유형에 맞게 연출하거나 조합하여 보여줌으로써 사용자에게 보다 다양한 서비스를 제공할 수 있다.

도 12 내지 도 14는 본 발명에 따른 얼굴 인식 정보를 기반으로 결정된 객체 출력 모드에 상응하게 출력된 가상객체의 일 예를 나타낸 도면이다.

도 12 내지 도 14를 참조하면, 본 발명에 따른 가상객체는 인식된 사용자 얼굴에 대한 얼굴 인식 정보에 상응하게 출력될 수 있다.

예를 들어, 도 12에 도시된 얼굴(1210)과 도 13에 도시된 얼굴(1310)에 대해 동일한 가상객체카드를 인식시켜서 가상객체를 출력하였다고 가정할 수 있다.

이 때, 도 12의 경우에는 얼굴(1210)이 웃는 표정이므로, 인식된 가상객체카드에 의한 가상객체(1220)도 웃는 형태로 출력될 수 있다. 그러나 도 13의 경우에는 얼굴(1310)이 화난 표정이므로, 도 12와 동일한 가상객체카드이지만 가상객체(1320)가 화난 형태로 출력될 수 있다.

다른 예를 들면, 도 14에 도시된 것과 같이 얼굴(1410)의 시선 방향에 맞추어 가상객체(1410)가 출력될 수도 있다.

즉, 동일한 카드를 인식하여 가상객체가 출력되더라도, 함께 출력된 사용자의 얼굴 표정, 얼굴 크기 및 시선 등에 어울리도록 가상객체를 조절 및 변형하여 출력할 수 있다.

도 15 내지 도 21은 본 발명에 따른 가상객체 제공 과정을 통해 증강현실 콘텐츠를 제공하는 과정의 일 예를 나타낸 도면이다.

도 15 내지 도 21을 참조하면, 본 발명에 따른 가상객체 제공 과정을 통해 증강현실 콘텐츠를 제공하는 과정은 먼저 가상객체 제공 장치를 통해 도 15 및 도 16에 도시된 것과 같은 가상객체카드(1500, 1600)를 인식하여 가상객체(1510, 1610)를 생성할 수 있다.

이 때, 가상객체카드(1500, 1600)는 적어도 하나 이상 인식될 수 있으며, 복수개의 가상객체카드들이 인식되는 경우에는 도 21에 도시된 것과 같이 가상객체 제공 장치의 디스플레이 화면에 출력되는 별도의 카드선택 인터페이스를 통해 출력될 가상객체를 선택할 수 있다.

도 21을 참조하면, 본 발명의 일실시예에 따른 가상객체 제공 장치(2110)를 통해 인식된 가상객체카드(2120)는 순차적으로 카드 선택 인터페이스에 추가될 수 있다.

예를 들어, 도 21에 도시된 가상객체 제공 장치(2110)는 카메라를 통해 가상객체카드(2120)를 촬영하여 카드를 인식하고, 사용자가 인식된 카드에 의한 가상객체를 직관적으로 확인할 수 있도록 카드에 대한 아이콘(2121)을 생성하여 카드 선택을 위한 인터페이스에 추가시킬 수 있다.

이 후, 도 17에 도시된 것과 같은 현실 객체(1710)를 인식하는 경우에 가상객체(1510, 1610)와 현실 객체(1710)를 도 18과 같이 디스플레이 화면에 출력할 수 있다.

이 때, 도 18을 참조하면, 사용자가 인식시키지 않은 자동차 형태의 가상객체(1810)가 함께 출력된 것을 확인할 수 있는데, 이는 특정한 가상객체가 인식되어 출력될 때 함께 매칭되어 출력되도록 설정된 것일 수 있다. 즉, 사용자가 자동차 형태의 가상객체(1810)에 해당하는 가상객체카드를 가지고 있지 않아도, 사전에 로봇 형태의 가상객체(1610)와 매칭되어 출력되도록 설정된 가상객체(1810)를 출력함으로써 보다 완성도가 높은 증강현실 콘텐츠를 제공할 수 있다.

이 때, 여러 개의 가상객체들은 가상객체카드를 인식한 순서에 따라 출력될 수 있다.

또한, 가상객체 제공 장치의 설정에 따라 현실 객체(1710)를 모든 가상객체들보다 뒤에 위치하도록 배치하거나, 또는 현실객체(1710)가 모든 가상객체들보다 앞에 위치하도록 배치할 수도 있다.

이 후, 도 19와 같이 가상객체(1510, 1610, 1810)와 현실객체(1710)의 깊이를 설정할 수 있는 별도의 인터페이스를 제공할 수도 있다.

예를 들어, 도 19에 도시된 것과 같이 여러 객체들간에 깊이 순서를 변경할 수 있는 테이블(1910)을 제공함으로써 사용자가 직접 가상객체(1510, 1610, 1810)와 현실객체(1710)의 깊이를 설정할 수 있다.

이 때, 테이블(1910)에 포함된 값들은 가상객체(1510, 1610, 1810)와 현실객체(1710)의 깊이 순서를 의미할 수 있다. 예를 들어, 도 19에 도시된 가상객체와 현실객체의 개수에 따라 깊이 레벨이 0부터 3까지 4개라고 가정한다면, 테이블(1910)에서 가장 위에 위치하는 가상객체 2의 식별자를 갖는 가상객체(1510)의 깊이 레벨이 3에 해당하고, 현실객체(1710)의 깊이 레벨이 2, 가상객체(1810)의 깊이 레벨이 1, 마지막으로 가상객체(1610)의 깊이 레벨이 0에 해당할 수 있다.

이 때, 테이블(1910) 만으로는 가상객체와 현실객체의 깊이를 한눈에 파악하기 어려울 수도 있으므로, 도 19에 도시된 것과 같이 테이블(1910)에 포함된 깊이 순서 값들을 각각 가상객체 및 현실객체와 연결하여 나타낼 수도 있다.

이 때, 사용자는 테이블(1910)에 포함된 깊이 순서의 위치를 변경하여 가상 객체와 현실 객체의 깊이를 설정할 수 있다.

예를 들어, 사용자가 테이블(1910)에 포함된 깊이 순서들 중에서 가상객체(1610)에 해당하는 깊이 순서를 선택한 경우, 도 19에 도시된 것과 같이 깊이를 설정하기 위해 선택된 가상객체(1610)를 시각적으로 구별되도록 나타낼 수 있다. 또는, 사용자가 가상객체(1610)를 직접 터치 입력으로 선택하는 경우에도 테이블(1910)에서 가상객체(1610)에 해당하는 깊이 순서를 다른 깊이 순서들과 구별되도록 나타낼 수도 있다.

이 후, 사용자가 가상객체(1610)에 해당하는 깊이 순서를 드래그하여 이동시킴으로써 가상객체(1610)의 깊이를 변경할 수 있다.

이 때, 사용자가 도 19에 도시된 테이블(1910)의 깊이 순서를 도 20에 도시된 것처럼 변경하였다고 가정한다면, 도 20에 도시된 것과 같이 가상객체(1610)가 맨 뒤로 이동한 것을 확인할 수 있다. 즉, 가상객체(1610)에 해당하는 깊이 순서가 테이블(1910)에서 가장 위로 이동함에 따라 가상객체(1610)의 깊이 레벨이 3으로 설정될 수 있다.

이 때, 도 19의 디스플레이 화면과 도 20의 디스플레이 화면을 비교해보면, 가상객체(1610)뿐만 아니라 다른 가상객체들의 크기도 변경될 것을 확인할 수 있다. 즉, 본 발명에 따른 가상객체 제공 장치에서는 가상객체들의 깊이 순서가 변경됨에 따라 그에 따른 원근감을 주기 위해서 가상객체들의 크기를 자동으로 조절할 수도 있다.

또한, 도 19 내지 도 20에는 도시하지 못하였으나, 가상객체(1610)의 경우에는 다른 가상객체나 현실객체보다 뒤에 위치하도록 깊이가 변경되었으므로, 포커스가 날아간 효과를 줄 수 있도록 흐릿하게 나타낼 수도 있다.

이 때, 사용자가 도 20과 같은 설정으로 깊이 설정을 완료한 경우에는 가상객체(1510, 1610, 1810)와 현실객체(1710)를 합성하여 디스플레이 화면에 출력할 수 있다.

도 22 내지 도 23은 본 발명에 따른 가상객체를 이동하거나 확대하는 일 예를 나타낸 도면이다.

도 22 내지 도 23을 참조하면, 본 발명에 따른 가상객체는 도 22에 도시된 것처럼 사용자에 의해 드래그되어 위치를 이동시킬 수 있다.

또한, 본 발명에 따른 가상객체는 도 23에 도시된 것처럼 사용자에 의해 선택된 이후, 두 점을 터치한 상태로 드래그되어 크기를 조절할 수도 있다.

도 24 내지 도 28은 본 발명에 따른 현실객체를 배경과 분리하는 과정을 기반으로 가상객체를 합성하는 일 예를 나타낸 도면이다.

도 24 내지 도 28을 참조하면, 본 발명에 따른 가상객체 제공 장치는 현실의 배경에 가상객체를 합성하여 현실객체와 함께 출력하기 위해서 크로마키 방식을 이용할 수 있다.

먼저, 도 24와 같이 가상객체를 합성시킬 현실의 배경에 해당하는 배경 이미지 데이터와 도 25와 같이 도 24와 동일한 배경에 현실객체에 해당하는 피사체를 포함하는 피사체 이미지 데이터를 획득할 수 있다.

이 후, 도 26과 같이 배경 이미지 데이터 및 피사체 이미지 데이터를 활용하여 피사체를 배경에서 분리하여 현실객체를 생성한다. 이 때, 크로마키 방식을 기반으로 피사체를 배경에서 분리할 수 있다.

이 후, 도 27과 같이 배경 이미지 데이터에 현실객체와 가상객체를 출력하여 합성할 수 있다.

또한, 본 발명에 따른 가상객체 제공 장치는 현실의 배경에 가상객체를 합성하여 현실객체와 함께 출력하기 위해서 도 28에 도시된 것과 같이 사용자가 현실객체를 영역에서 선택할 수 있도록 사용자 인터페이스를 제공할 수도 있다.

예를 들어, 사용자 인터페이스는 도 28에 도시된 것과 같이 사용자가 가상객체 제공 장치의 디스플레이 화면을 터치 및 드래그하여 현실객체로 분리할 선택영역(2810)을 생성할 수 있도록 제공될 수 있다. 이와 같이, 선택영역(2810)에 상응하게 배경과 분리된 현실객체는 가상객체와 깊이를 조절하여 합성 배경을 기반으로 합성될 수 있다.

도 29 내지 도 30은 본 발명에 따른 가상객체의 일부를 지워서 이미지와 합성하는 과정의 일 예를 나타낸 도면이다.

도 29 내지 도 30을 참조하면, 본 발명에 따른 가상객체 제공 장치는 현실의 배경에 가상객체를 합성하여 현실객체와 함께 출력하기 위해서 가상객체의 일부를 문질러서 지우는 방식을 이용할 수 있다.

예를 들어, 도 29와 같이 현실사진에 가상객체(2910)를 출력하고, 가상객체(2910)의 깊이를 조절한 것과 같은 효과를 주기 위해서 사용자가 터치 입력으로 문지르는 가상객체(2910)의 일부분을 삭제할 수 있다.

이와 같은 방법으로 가상객체와 현실객체의 파사체가 겹치는 부분을 삭제함으로써 도 30에 도시된 것과 같은 합성 결과를 제공할 수 있다.

도 31 내지 도 32는 본 발명에 따른 가상객체카드의 위조를 방지하기 위한 카드 인식 방식의 일 예를 나타낸 도면이다.

도 31 내지 도 32를 참조하면, 본 발명에 따른 가상객체의 생성을 위해 가상객체카드의 원본을 사용하지 않고, 사본이나 위조품을 사용하는 경우에 카드를 인식하는 방법 및 사본이나 위조품을 검출하기 위한 방법을 제시하고 있다.

먼저, 도 31에 도시된 것과 같이 본 발명에 따른 가상객체카드를 제작할 때에는 원본 카드(3110)를 몇 개의 영역으로 분할하고, 각각 분할된 영역에 포함된 이미지나 텍스트 등을 기반으로 특징점 또는 마커를 입력할 수 있다. 이와 같이 제작된 원본 카드(3110)를 가상객체 제공 장치를 통해 인식하면, 도 31에 도시된 원본카드 인식결과(3111)와 같이 각각의 특징점 또는 마커가 인식되어 원본카드(3110)를 인식할 수 있다.

그러나, 원본카드(3110)를 그대로 복사한 위조카드(3120)도 가상객체 제공 장치에서 인식하는 경우, 위조카드 인식결과(3121)와 같이 원본카드(3110)와 동일하게 인식된다는 문제점이 존재할 수 있다.

따라서, 본 발명의 일실시예에 따라 가상객체카드의 위조를 방지하기 위해서, 도 32에 도시된 것과 같이 원본카드(3210)를 인식하는 경우, 원본카드 인식결과(3211)처럼 일부분이 인식되지 않도록 원본카드(3210)를 제작할 수 있다. 이 때, 원본카드(3210)에서 인식되지 않은 부분은 공개되지 않을 수 있다.

따라서, 도 32와 같이 위조카드(3220)를 인식한 위조카드 인식결과(3221)에 카드의 모든 영역이 인식되었다면, 가상객체 제공 장치가 해당 가상객체카드를 위조 카드라고 판단하고 가상객체를 출력하지 않을 수 있다.

도 33은 본 발명에 따른 가상객체카드를 인식하는 방식의 일 예를 나타낸 도면이다.

도 33을 참조하면, 본 발명에 따른 가상객체 합성 장치는 분할되지 않은 카드(3310)를 기반으로 이미지나 텍스트 등에 의한 특징점 또는 마커를 인식하여 가상객체를 획득하기 위한 카드를 인식하거나, 또는 분할된 카드(3320)를 기반으로 각각의 분할된 카드 영역마다 이미지나 텍스트 등에 의한 특징점 또는 마커를 인식하여 카드를 인식할 수도 있다.

도 34 내지 도 35는 본 발명에 따른 가상객체카드의 손실에 따라 생성되는 가상객체의 일 예를 나타낸 도면이다.

도 34 내지 도 35를 참조하면, 도 33에 도시된 분할된 카드(3320)와 같이 카드를 분할하여 인식을 수행하는 경우, 카드의 전체 영역 중 일부가 손실되어도 카드의 인식이 가능한 것을 알 수 있다. 즉, 분할된 카드의 각 분할 영역마다 포함된 특징점 또는 마커를 기반으로 카드의 일부가 찢어지거나 훼손되어 인식되지 않아도, 나머지 영역이 인식된다면 도 34에 도시된 것과 같은 손실된 카드를 기반으로 도 35와 같이 가상 객체를 생성할 수 있다.

이 때, 도 35에 도시된 것과 같이 카드의 손실여부에 따라 가상 객체도 손실되게 출력할 수 있다. 즉, 카드가 전혀 훼손되거나 손실되지 않고 완벽한 경우에는 가상 객체도 완벽하게 출력할 수 있지만, 카드가 일부 손실되는 경우, 도 35와 같이 가상 객체를 손실에 해당하는 만큼 흐릿하게 출력되도록 하거나 또는 가상 객체의 일부를 삭제하여 출력되도록 할 수도 있다.

이 때, 카드의 손실률에 따라 가상 객체를 출력하는 방식은 도 35에 도시된 방식에 한정되지 않고 다양하게 적용될 수 있다.

이상에서와 같이 본 발명에 따른 객체 간 연관성을 고려한 가상객체 제공 방법 및 이를 위한 장치는 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

110: 가상객체 제공 장치
120, 1500, 1600, 2120: 가상객체카드
130: 사용자 140: 가상객체 데이터베이스
310, 320, 410, 420, 510, 610, 620, 910, 1010, 1020: 가상객체
710: 캐릭터 카드 810: 아이템 카드
1110: 통신부 1120: 입력부
1130: 제어부 1140: 출력부
1150: 저장부 1210, 1310, 1410: 얼굴
1220, 1320, 1420, 1510, 1610, 1810, 2910: 가상객체
1710: 현실객체 1910: 테이블
1920, 1930: 사용자 인터페이스 2110: 사용자 단말
2121: 카드에 대한 아이콘 2810: 선택 영역
3110, 3210: 원본 카드 3111, 3211: 원본 카드 인식 결과
3120, 3220: 위조 카드 3121, 3221: 위조 카드 인식 결과
3310: 분할되지 않은 카드 3320: 분할된 카드

Claims

가상객체 제공 장치가, 복수개의 가상객체카드들을 인식하는 단계;
상기 가상객체 제공 장치가, 상기 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정하는 단계; 및
상기 가상객체 제공 장치가, 상기 객체 출력 유형에 상응하게 상기 복수개의 가상객체들을 디스플레이 화면에 출력하는 단계
를 포함하고,
상기 결정하는 단계는
상기 복수개의 가상객체들 사이의 연관 관계와 상기 복수개의 가상객체들 각각의 객체 종류를 식별하고, 상기 연관 관계 및 상기 객체 종류 중 적어도 하나를 고려하여 상기 객체 출력 유형을 결정하되,
상기 객체 출력 유형은
상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 상기 연관 관계에 상응하는 구도로 출력하는 유형 및 상기 객체 종류를 고려하여 상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 조합하여 출력하는 유형 중 적어도 하나에 상응하는 것을 특징으로 하는 가상객체 제공 방법.
삭제
삭제
청구항 1에 있어서,
상기 출력하는 단계는
가상객체 데이터베이스를 기반으로 상기 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력하는 것을 특징으로 하는 가상객체 제공 방법.
청구항 1에 있어서,
상기 출력하는 단계는
사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 상기 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 상기 객체 출력 유형 및 상기 객체 출력 모드 중 적어도 하나를 고려하여 상기 복수개의 가상객체들을 출력하는 것을 특징으로 하는 가상객체 제공 방법.
청구항 5에 있어서,
상기 객체 출력 모드는
상기 복수개의 가상객체들에 대한 크기 정보, 위치 정보, 방향 정보 및 감정 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 가상객체 제공 방법.
청구항 5에 있어서,
상기 얼굴 인식 정보는
상기 얼굴에 상응하는 크기, 위치, 시선 및 감정 중 적어도 하나를 포함하는 것을 특징으로 하는 가상객체 제공 방법.
복수개의 가상객체카드들을 인식하는 입력부;
상기 복수개의 가상객체카드들에 상응하는 복수개의 가상객체들 간의 연관성을 고려하여 객체 출력 유형을 결정하는 제어부; 및
상기 객체 출력 유형에 상응하게 상기 복수개의 가상객체들을 디스플레이 화면에 출력하는 출력부
를 포함하고,
상기 제어부는
상기 복수개의 가상객체들 사이의 연관 관계와 상기 복수개의 가상객체들 각각의 객체 종류를 식별하고, 상기 연관 관계 및 상기 객체 종류 중 적어도 하나를 고려하여 상기 객체 출력 유형을 결정하되,
상기 객체 출력 유형은
상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 상기 연관 관계에 상응하는 구도로 출력하는 유형 및 상기 객체 종류를 고려하여 상기 복수개의 가상객체들 중 적어도 둘 이상의 가상객체들을 조합하여 출력하는 유형 중 적어도 하나에 상응하는 것을 특징으로 하는 가상객체 제공 장치.
삭제
삭제
청구항 8에 있어서,
상기 출력부는
가상객체 데이터베이스를 기반으로 상기 복수개의 가상객체들 중 적어도 하나의 가상객체와 연관 관계에 상응하는 가상객체를 자동으로 출력하는 것을 특징으로 하는 가상객체 제공 장치.
청구항 8에 있어서,
상기 출력부는
사용자의 얼굴에 상응하는 얼굴 인식 정보를 기반으로 상기 복수개의 가상객체들에 대한 객체 출력 모드를 결정하고, 상기 객체 출력 유형 및 상기 객체 출력 모드 중 적어도 하나를 고려하여 상기 복수개의 가상객체들을 출력하는 것을 특징으로 하는 가상객체 제공 장치.
청구항 12에 있어서,
상기 객체 출력 모드는
상기 복수개의 가상객체들에 대한 크기 정보, 위치 정보, 방향 정보 및 감정 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 가상객체 제공 장치.
청구항 12에 있어서,
상기 얼굴 인식 정보는
상기 얼굴에 상응하는 크기, 위치, 시선 및 감정 중 적어도 하나를 포함하는 것을 특징으로 하는 가상객체 제공 장치.