KR102593878B1 - Synchronized augmented reality implementation method for multiple participation - Google Patents
Synchronized augmented reality implementation method for multiple participation Download PDFInfo
- Publication number
- KR102593878B1 KR102593878B1 KR1020220113201A KR20220113201A KR102593878B1 KR 102593878 B1 KR102593878 B1 KR 102593878B1 KR 1020220113201 A KR1020220113201 A KR 1020220113201A KR 20220113201 A KR20220113201 A KR 20220113201A KR 102593878 B1 KR102593878 B1 KR 102593878B1
- Authority
- KR
- South Korea
- Prior art keywords
- reality
- augmented reality
- space
- augmented
- implementing
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 125
- 230000001360 synchronised effect Effects 0.000 title claims description 21
- 238000000034 method Methods 0.000 title claims description 20
- 230000004913 activation Effects 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000003993 interaction Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003334 potential effect Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
Abstract
본 발명은 (a) 제1현실공간에 위치한 호스트단말을 통해 생성된 제1현실공간스캔정보에 기초하여 제1증강현실이 제공되는 제1증강현실공간을 생성하는 단계; (b) 제2현실공간에 위치한 게스트단말을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성하는 단계; (c) 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계; 및 (d) 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현하는 단계를 포함하는 다중참여가 가능한 동기화된 증강현실 구현방법에 관한 것이다.The present invention includes the steps of (a) creating a first augmented reality space in which first augmented reality is provided based on first real space scan information generated through a host terminal located in the first real space; (b) creating a second augmented reality space in which second augmented reality is provided based on second reality space scan information generated through a guest terminal located in the second reality space; (c) calculating an implementation priority for a first reality object located in the first augmented reality space; and (d) implementing a first reality object for which implementation priority has been calculated as a second virtual object in a second augmented reality space.
Description
본 발명은 다중참여가 가능한 동기화된 증강현실 구현방법에 관한 것으로서, 호스트가 생성한 증강현실공간과 유사한 증강현실공간을 구성하여 게스트들에게 제공할 수 있는 기술에 관한 것이다. The present invention relates to a method of implementing synchronized augmented reality that allows multiple participation, and to a technology that can provide guests with an augmented reality space similar to the augmented reality space created by the host.
증강현실(Augmented Reality, AR)은 현실 공간에 가상의 오브젝트를 구현한 이미지를 실시간으로 사용자에게 제공함으로써, 마치 실제로 가상 오브젝트가 존재하는 것처럼 보여주는 기술이다.Augmented Reality (AR) is a technology that provides users with images of virtual objects in real space in real time, showing them as if the virtual objects actually exist.
이러한, 증강현실은 가상현실과 같이 완전히 재창조된 가상의 공간을 이용하여 사용자 간의 만남이 이루어지도록 하는 것이 아니라 현실공간에 기반한 것이기 때문에, 각 사용자가 위치한 공간에서 증강현실공간을 구성하여 만나게 될 경우 서로 간에 제공되는 증강현실공간의 환경이 다를 수 밖에 없다.Because augmented reality is based on real space rather than using a completely recreated virtual space like virtual reality to allow users to meet each other, when each user meets by creating an augmented reality space in the space where each user is located, The environment of the augmented reality space provided is bound to be different.
한편, 가상현실(Virtual Reality, VR)을 이용하면 서로 간의 만남 또는 협업이 수행되기 용이할 수 있지만, 협업을 수행하는 각 개인은 가상현실에 접속하기 위한 장비를 모두 갖춰야 하고, 각기 다른 작업에 최적화된 가상현실용 소프트웨어의 개발이 필요하게 되는 문제점이 있다.On the other hand, using virtual reality (VR) may make it easier to meet or collaborate with each other, but each individual performing the collaboration must be equipped with all the equipment to access virtual reality and be optimized for different tasks. There is a problem that requires the development of software for virtual reality.
따라서, 증강현실을 통해서 연결된 사용자들이 최대한 동일하게 구현된 환경을 제공받을 수 있다면, 종래의 메타버스 구현에 따른 비용문제 및 사용자의 번거로움을 해소할 수 있을 것이다.Therefore, if users connected through augmented reality can be provided with an environment implemented as identically as possible, the cost problem and user inconvenience caused by the implementation of the conventional metaverse can be resolved.
이에 본 발명의 발명자는 상술한 문제점을 해결하기 위해서 오랫동안 연구하고 시행착오를 거치며 개발한 끝에 본 발명을 완성하기에 이르렀다.Accordingly, the inventor of the present invention completed the present invention after a long period of research and development through trial and error in order to solve the above-mentioned problems.
본 발명은 상술한 바와 같은 문제점을 해결하기 위해, 서로 다른 현실공간에 위치한 사용자단말로 제공되는 증강현실공간을 서로 동기화하여 메타버스를 구현함으로써, 가상현실공간을 이용하지 않고도 메타버스환경을 구현할 수 있는 다중참여가 가능한 동기화된 증강현실 구현방법을 제공하는 것을 목적으로 한다.In order to solve the problems described above, the present invention implements a metaverse by synchronizing the augmented reality spaces provided by user terminals located in different real spaces, making it possible to implement a metaverse environment without using a virtual reality space. The purpose is to provide a synchronized augmented reality implementation method that allows multiple participation.
본 발명에서 이루고자 하는 기술적 과제들은 상기 기술적 과제로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved in the present invention are not limited to the above technical problems, and other technical problems not mentioned will be clearly understood by those skilled in the art from the description below.
상술한 문제점을 해결하기 위한 본 발명의 일 국면은, (a) 제1현실공간에 위치한 호스트단말을 통해 생성된 제1현실공간스캔정보에 기초하여 제1증강현실이 제공되는 제1증강현실공간을 생성하는 단계; (b) 제2현실공간에 위치한 게스트단말을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성하는 단계; (c) 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계; 및 (d) 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현하는 단계를 포함하고, (a) 내지 (d) 단계는 서비스서버에서 수행되어, 호스트단말로 제공되는 제1증강현실과 동기화된 제2증강현실이 게스트단말로 제공된다.One aspect of the present invention to solve the above-described problem is (a) a first augmented reality space in which the first augmented reality is provided based on the first reality space scan information generated through a host terminal located in the first reality space. generating a; (b) creating a second augmented reality space in which second augmented reality is provided based on second reality space scan information generated through a guest terminal located in the second reality space; (c) calculating an implementation priority for a first reality object located in the first augmented reality space; and (d) implementing the first reality object for which the implementation priority has been calculated as a second virtual object in the second augmented reality space, where steps (a) to (d) are performed on the service server and the host. The second augmented reality synchronized with the first augmented reality provided through the terminal is provided as a guest terminal.
본 발명의 바람직한 실시예에 따르면, (d) 단계는 제1증강현실공간 상에서 제1현실오브젝트가 배치된 공간과 유사한 제2증강현실공간 내의 유사공간을 도출하는 단계; 및 제1현실오브젝트를 구현우선순위에 따라 순차적으로 유사공간에 구현하는 단계를 포함할 수 있다.According to a preferred embodiment of the present invention, step (d) includes deriving a similar space in the second augmented reality space that is similar to the space in which the first reality object is placed in the first augmented reality space; And it may include sequentially implementing the first reality object in the pseudospace according to implementation priority.
본 발명의 바람직한 실시예에 따르면, (d) 단계는 구현순위가 후순위인 제2가상오브젝트가 구현될 유사공간이 먼저 구현된 제2가상오브젝트에 의해 침범되는 경우, 후순위인 제2가상오브젝트를 구현할 유사공간을 재도출하거나 또는 제2가상오브젝트의 형태를 조절하여 침범되지 않은 나머지 유사공간 상에 구현하는 단계를 포함할 수 있다.According to a preferred embodiment of the present invention, in step (d), when the similar space in which the second virtual object with the lower priority implementation priority is to be implemented is invaded by the second virtual object with the lower priority implementation priority, the second virtual object with the lower priority priority is implemented. It may include the step of re-creating the similar space or adjusting the shape of the second virtual object to implement it on the remaining uninfringed similar space.
본 발명의 바람직한 실시예에 따르면, (c) 단계는 제1현실오브젝트의 상호작용특성에 기초하여 세분화된 등급산정항목의 등급산정결과에 따라 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계를 포함할 수 있다.According to a preferred embodiment of the present invention, step (c) is a step of calculating the implementation priority for the first reality object according to the rating results of the detailed rating items based on the interaction characteristics of the first reality object. It can be included.
본 발명의 바람직한 실시예에 따르면, (c) 단계는 사용빈도에 기초하여 제1현실오브젝트가 사용자에게 미치는 영향력등급을 산정하기 위한 영향력항목, 제1현실오브젝트 및 다른 오브젝트들 간의 관계에 기초하여 의존도등급을 산정하기 위한 의존도항목 및 제1현실오브젝트의 기능을 활용할 수 있는 기능활성화영역의 범위에 기초하여 기능활성화등급을 산정하기 위한 기능활성화항목을 포함하는 등급산정항목을 설정하는 단계; 및 등급산정항목이 포함하는 항목들에 대해서 산정된 등급의 평균값에 따라 각 제1현실오브젝트의 구현우선순위를 산출하는 단계를 포함할 수 있다.According to a preferred embodiment of the present invention, step (c) is an influence item for calculating the influence level of the first reality object on the user based on the frequency of use, and the degree of dependency based on the relationship between the first reality object and other objects. Setting a rating calculation item including a dependency item for calculating a rating and a function activation item for calculating a function activation level based on the range of a function activation area in which the function of the first reality object can be utilized; And it may include calculating the implementation priority of each first reality object according to the average value of the ratings calculated for the items included in the rating calculation item.
본 발명의 바람직한 실시예에 따르면, (d) 단계는 제1현실공간스캔정보에 포함되는 제1현실오브젝트의 형태정보 및 목정정보에 기초하여, 제1현실오브젝트의 상호작용기능을 수행 가능하도록 설정된 제2가상오브젝트를 구현하는 단계; 및 제1현실오브젝트와 동일 카테고리인 제2현실오브젝트가 제2증강현실공간 상에 존재하는 경우, 제1현실오브젝트의 형태와 동일하게 구현된 제2가상오브젝트를 해당 제2현실오브젝트에 증강시키는 형태로 구현하는 단계를 포함할 수 있다.According to a preferred embodiment of the present invention, step (d) is set to enable the interaction function of the first reality object to be performed based on the shape information and destination information of the first reality object included in the first reality space scan information. Implementing a second virtual object; And when a second reality object of the same category as the first reality object exists in the second augmented reality space, a second virtual object implemented in the same form as the first reality object is augmented on the second reality object. It may include implementation steps.
본 발명은 서로 다른 현실공간에 위치한 사용자단말로 제공되는 증강현실공간을 서로 동기화하여 메타버스를 구현함으로써, 가상현실공간을 이용하지 않고도 메타버스환경을 조성할 수 있는 효과가 있다.The present invention has the effect of creating a metaverse environment without using a virtual reality space by implementing a metaverse by synchronizing the augmented reality spaces provided by user terminals located in different real spaces.
구체적으로, 본 발명은 호스트가 생성한 증강현실공간에 위치한 현실오브젝트를 각 게스트의 증강현실공간에 가상오브젝트로 구현하여 배치하되, 현실오브젝트의 상호작용특성에 기초하는 배치를 수행하여 동기화된 증강현실공간을 제공할 수 있다.Specifically, the present invention implements and arranges real objects located in the augmented reality space created by the host as virtual objects in the augmented reality space of each guest, and performs placement based on the interaction characteristics of the real objects to create synchronized augmented reality. Space can be provided.
한편, 여기에서 명시적으로 언급되지 않은 효과라 하더라도, 본 발명의 기술적 특징에 의해 기대되는 이하의 명세서에서 기재된 효과 및 그 잠정적인 효과는 본 발명의 명세서에 기재된 것과 같이 취급됨을 첨언한다.Meanwhile, it is to be added that even if the effects are not explicitly mentioned herein, the effects described in the following specification and their potential effects expected from the technical features of the present invention are treated as if described in the specification of the present invention.
도 1은 본 발명에 따른 다중참여가 가능한 동기화된 증강현실 구현방법을 수행하기 위한 증강현실 구현시스템을 설명하기 위한 참조도이다.
도 2 내지 도 5는 본 발명에 따른 다중참여가 가능한 동기화된 증강현실 구현방법을 통한 증강현실 생성 과정을 설명하기 위한 참조도이다.1 is a reference diagram for explaining an augmented reality implementation system for performing a synchronized augmented reality implementation method capable of multiple participation according to the present invention.
Figures 2 to 5 are reference diagrams for explaining the augmented reality creation process through the synchronized augmented reality implementation method capable of multiple participation according to the present invention.
본 발명을 설명함에 있어서 관련된 공지기능에 대하여 이 분야의 기술자에게 자명한 사항으로서 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다.In describing the present invention, detailed descriptions of related known functions will be omitted if they are obvious to those skilled in the art and are judged to unnecessarily obscure the gist of the present invention.
도 1은 본 발명에 따른 다중참여가 가능한 동기화된 증강현실 구현방법을 수행하기 위한 증강현실 구현시스템을 설명하기 위한 참조도이다.1 is a reference diagram for explaining an augmented reality implementation system for performing a synchronized augmented reality implementation method capable of multiple participation according to the present invention.
도 1을 참조하면, 본 발명에 따른 동기화된 증강현실 구현방법은 서비스서버(100)를 통해 수행되는 것이며, 증강현실 구현시스템은 서비스서버(100), 호스트단말(10) 및 게스트단말(20-1 내지 20-n)을 포함하여 구성될 수 있다.Referring to Figure 1, the synchronized augmented reality implementation method according to the present invention is performed through the service server 100, and the augmented reality implementation system includes the service server 100, the host terminal 10, and the guest terminal 20- It may be configured to include 1 to 20-n).
상기 시스템을 구성하는 각 구성요소들에 대해서 간략히 설명하자면 아래와 같다.A brief description of each component that makes up the system is as follows.
서비스서버(100)는 본 발명에 따른 동기화된 증강현실 구현방법을 수행하는 주체로서, 바람직하게는 무선 통신을 통해 호스트단말(10) 및 게스트단말(20)과 통신할 수 있으며, 호스트단말(10) 및 게스트단말(20)을 통해 입력되는 정보들에 기초하여 일련의 작업을 수행하고, 상기 작업의 결과를 호스트단말(10) 및 게스트단말(20)에 제공하는 역할을 한다. 여기에서, 서비스서버(100)가 수행하는 작업의 최종 목적은 호스트단말(10)로 제공되는 제1증강현실과 동기화된 제2증강현실을 게스트단말(20)로 제공함으로써, 호스트단말(10)의 사용자인 호스트 및 게스트단말(20)의 사용자인 게스트에게 동기화된 증강현실을 공유하는 메타버스환경을 제공하는 것이라고 할 수 있다.The service server 100 is a subject that performs the synchronized augmented reality implementation method according to the present invention, and is preferably capable of communicating with the host terminal 10 and the guest terminal 20 through wireless communication, and the host terminal 10 ) and performs a series of tasks based on information input through the guest terminal 20, and provides the results of the tasks to the host terminal 10 and the guest terminal 20. Here, the final purpose of the work performed by the service server 100 is to provide the second augmented reality synchronized with the first augmented reality provided by the host terminal 10 to the guest terminal 20, thereby It can be said that a metaverse environment is provided to share synchronized augmented reality with the host, which is a user of the host, and the guest, which is a user of the guest terminal 20.
호스트단말(10)은 호스트에 의해 운용되는 단말이며, 호스트는 자신이 위치한 현실공간에 대한 증강현실공간을 호스트단말(10)을 이용해 생성하고, 일련의 과정을 통해 게스트를 초대하여 생성된 증강현실을 함께 공유할 수 있다. 이 때, 호스트는 생성된 증강현실공간에 게스트와 공유할 가상오브젝트 또한 호스트단말(10)을 이용해 생성할 수 있으며, 특히, 현실공간에 존재하는 현실오브젝트에 기초하는 가상오브젝트를 생성하여 게스트가 호스트의 현실오브젝트를 증강현실을 통해 체감하도록 할 수 있다.The host terminal 10 is a terminal operated by a host. The host creates an augmented reality space for the real space in which it is located using the host terminal 10, and invites guests through a series of processes to create augmented reality. can be shared together. At this time, the host can also create a virtual object to share with the guest in the created augmented reality space using the host terminal 10. In particular, a virtual object based on a real object existing in the real space is created so that the guest can share it with the guest. Real objects can be experienced through augmented reality.
게스트단말(20)은 게스트에 의해 운용되는 단말이며, 게스트 또한 자신이 위치한 현실공간에 대한 증강현실을 게스트단말(20)를 이용해 생성할 수 있다. 게스트는 호스트에 의해 초대되는 경우, 게스트단말(20)을 이용해 증강현실공간을 생성하고, 호스트가 생성한 가상오브젝트를 자신이 생성한 증강현실공간을 통해 공유할 수 있게 된다.The guest terminal 20 is a terminal operated by a guest, and the guest can also create augmented reality of the real space in which he or she is located using the guest terminal 20. When invited by the host, the guest can create an augmented reality space using the guest terminal 20 and share virtual objects created by the host through the augmented reality space created by the guest.
상술한 서비스서버(100), 호스트단말(10) 및 게스트단말(20) 사이에서 이루어지는 과정에 대한 구체적인 부분은 아래에서 설명하고자 한다.Details of the process between the above-described service server 100, host terminal 10, and guest terminal 20 will be described below.
도 2는 본 발명에 따른 동기화된 증강현실 제공 과정을 간략하게 나타낸 참조도이다. 또한, 도 3은 본 발명의 일 실시예에 따른 현실공간스캔 과정을 설명하기 위한 참조도이다.Figure 2 is a reference diagram briefly showing the process of providing synchronized augmented reality according to the present invention. Additionally, Figure 3 is a reference diagram for explaining a real-space scanning process according to an embodiment of the present invention.
도 2의 (A)및 (B)를 참조하면, 서비스서버(100)는 증강현실을 제공하기 위해 사용자가 위치한 현실공간에 대한 현실공간스캔정보를 수신하고, 이를 이에 기초하는 증강현실공간을 생성할 수 있다.Referring to (A) and (B) of FIG. 2, the service server 100 receives real space scan information about the real space where the user is located in order to provide augmented reality, and creates an augmented reality space based on this. can do.
예를 들어, 서비스서버(100)는 제1현실공간에 위치한 호스트단말(10)을 통해 생성된 제1현실공간스캔정보에 기초하여 제1증강현실이 제공되는 제1증강현실공간을 생성할 수 있다. 또한, 제2현실공간에 위치한 게스트단말(20)을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성함으로써, 게스트인 사용자도 도 2의 (A) 및 (B)와 같이 자신의 증강현실공간을 제공받을 수 있도록 한다. 호스트의 증강현실에 참여하는 게스트들은 도 2의 (C)와 같이 호스트가 조성한 환경을 자신의 증강현실공간을 통해 공유할 수 있게 된다.For example, the service server 100 may create a first augmented reality space in which the first augmented reality is provided based on the first real space scan information generated through the host terminal 10 located in the first real space. there is. In addition, by creating a second augmented reality space in which second augmented reality is provided based on the second reality space scan information generated through the guest terminal 20 located in the second reality space, the guest user can also use (in FIG. 2) As in A) and (B), you can be provided with your own augmented reality space. Guests participating in the host's augmented reality can share the environment created by the host through their own augmented reality space, as shown in Figure 2 (C).
본 발명의 바람직한 실시예에 따르면, 서비스서버(100)는 호스트단말(10) 및 게스트단말(20)로 해당 단말이 위치한 현실공간 상에 증강현실공간을 생성하기 위한 사용자인터페이스를 제공할 수 있다.According to a preferred embodiment of the present invention, the service server 100 can provide a user interface for creating an augmented reality space in the real space where the host terminal 10 and the guest terminal 20 are located.
구체적으로, 도 3의 (A)를 참조하면, 서비스서버(100)는 호스트단말 또는 게스트단말이 사용자인터페이스를 이용하여 생성한 수평성분정보 및 수직성분정보를 입력받아 제1 증강현실공간 또는 제2증강현실공간을 생성할 수 있다. 여기에서, 서비스서버(100)는 수평성분정보 및 수직성분정보 생성을 안내하기 위한 성분지정오브젝트를 사용자인터페이스와 함께 증강현실로 제공할 수 있다. 이에 따라, 호스트 및 게스트는 자신의 단말을 통해 사용자입력을 성분지정오브젝트 등에 인가하여 용이하게 증강현실을 생성할 수 있다.Specifically, referring to (A) of FIG. 3, the service server 100 receives horizontal component information and vertical component information generated by the host terminal or guest terminal using the user interface and creates the first augmented reality space or the second augmented reality space. An augmented reality space can be created. Here, the service server 100 can provide a component designation object to guide the creation of horizontal component information and vertical component information in augmented reality along with a user interface. Accordingly, hosts and guests can easily create augmented reality by applying user input to ingredient-specified objects, etc. through their terminals.
또한, 도 3의 (B)를 참조하면, 서비스서버(100)는 호스트단말 또는 게스트단말이 사용자인터페이스를 이용하여 증강현실공간 상에 가상오브젝트를 증강할 증강면을 설정하도록 할 수 있다.In addition, referring to (B) of FIG. 3, the service server 100 can allow the host terminal or guest terminal to set an augmentation surface to augment a virtual object in the augmented reality space using a user interface.
예를 들어, 호스트단말이 제1현실공간스캔정보에 포함되는 제1현실오브젝트스캔정보 중 하나를 키오브젝트(keyobject)로 설정하고, 키오브젝트의 증강면 위치를 설정하게 되면, 서비스서버(100)는 키오브젝트에 대한 증강면을 기준으로 하여 다른 제1현실오브젝트들에 대한 증강면을 생성할 수 있다. 상기 과정에 따라 제1증강현실공간에 위치한 제1현실오브젝트들에 대한 증강면이 생성이 완료되면, 현실공간의 구조와 대응되는 가상오브젝트들을 증강하여 구현할 수 있게 된다.For example, when the host terminal sets one of the first real object scan information included in the first real space scan information as a key object and sets the position of the augmented surface of the key object, the service server 100 Can generate augmented surfaces for other first reality objects based on the augmented surfaces for the key object. When the augmented surface for the first reality objects located in the first augmented reality space is completed according to the above process, virtual objects corresponding to the structure of the real space can be augmented and implemented.
또한, 서비스서버(100)는 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출할 수 있다.Additionally, the service server 100 can calculate the implementation priority for the first reality object located in the first augmented reality space.
여기에서, 제1현실오브젝트에 대한 구현우선순위는 제1현실오브젝트를 게스트의 제2증강현실공간에 구현하기 위한 우선순위를 의미하며, 기본적으로는 제1현실오브젝트의 중요도에 따라서 구현우선순위가 산출될 수 있다. 아래에서는, 구현우선순위의 산출방법에 대해서 설명하고자 한다.Here, the implementation priority for the first reality object refers to the priority for implementing the first reality object in the guest's second augmented reality space. Basically, the implementation priority is determined according to the importance of the first reality object. can be calculated. Below, we will explain how to calculate implementation priority.
도 4는 본 발명의 일 실시예에 따른 구현우선순위 산출방법을 설명하기 위한 참조도이다.Figure 4 is a reference diagram for explaining an implementation priority calculation method according to an embodiment of the present invention.
도 4를 참조하면, 서비스서버(100)는 제1현실오브젝트의 상호작용특성에 기초하여 세분화된 등급산정항목의 등급산정결과에 따라 제1현실오브젝트에 대한 구현우선순위를 산출할 수 있다.Referring to FIG. 4, the service server 100 may calculate the implementation priority for the first reality object according to the rating results of the detailed rating items based on the interaction characteristics of the first reality object.
여기에서, 도 4의 X축은 제1현실오브젝트의 영향력을 나타내도록 설정되고, Y축은 제1현실오브젝트의 의존도를 나타내도록 설정되며, Z축은 제1현실오브젝트의 기능활성화 정도를 나타내도록 설정되었다.Here, the
정리하면, 서비스서버(100)는 사용빈도에 기초하여 제1현실오브젝트가 사용자에게 미치는 영향력등급을 산정하기 위한 영향력항목, 제1현실오브젝트 및 다른 오브젝트들 간의 관계에 기초하여 의존도등급을 산정하기 위한 의존도항목 및 제1현실오브젝트의 기능을 활용할 수 있는 기능활성화영역의 범위에 기초하여 기능활성화등급을 산정하기 위한 기능활성화항목을 포함하는 등급산정항목을 설정할 수 있다.In summary, the service server 100 includes an influence item for calculating the influence level of the first reality object on the user based on the frequency of use, and an influence item for calculating the dependency level based on the relationship between the first reality object and other objects. A rating calculation item including a function activation item for calculating a function activation grade can be set based on the dependency item and the range of the function activation area where the function of the first reality object can be utilized.
예를 들어, 제1현실오브젝트로서 소파가 제1증강현실공간에 위치한다면, 소파는 영향력항목의 등급은 상대적으로 높고, 의존도항목의 등급은 상대적으로 높으며, 기능활성화등급은 상대적으로 낮은 것으로 산정될 수 있다. 이는, 소파의 사용빈도 및 사용자에게 미치는 영향력이 높고, 거실테이블 및 TV 등 다른 오브젝트와의 연관성 및 의존도가 높으며, 사용자가 앉기 위해 앞면 만을 활용할 수 있음에 따라 공간적인 기능활성화 영역이 상대적으로 제한되기 때문이다.For example, if a sofa is located in the first augmented reality space as the first reality object, the sofa will be calculated as having a relatively high influence item rating, a relatively high dependency item rating, and a relatively low functional activation rating. You can. This means that the frequency of use of the sofa and its influence on the user are high, the correlation with and dependence on other objects such as the living room table and TV is high, and the spatial functional activation area is relatively limited as the user can only use the front to sit. Because.
다른 예로, 제1현실오브젝트로서 램프가 제1증강현실공간에 위치한다면, 램프는 영향력항목의 등급은 상대적으로 낮고, 의존도항목의 등급은 상대적으로 높으며, 기능활성화등급은 상대적으로 높은 것으로 산정될 수 있다.As another example, if a lamp as a first reality object is located in the first augmented reality space, the lamp can be calculated as having a relatively low influence item rating, a relatively high dependency item rating, and a relatively high functional activation rating. there is.
등급산정항목들에 대한 등급산정이 완료되면, 서비스서버(100)는 등급산정항목이 포함하는 항목들에 대해서 산정된 등급의 평균값에 따라 각 제1현실오브젝트의 구현우선순위를 산출할 수 있다.When the rating calculation for the rating items is completed, the service server 100 can calculate the implementation priority of each first reality object according to the average value of the ratings calculated for the items included in the rating calculation item.
또한, 서비스서버(100)는 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현할 수 있다.Additionally, the service server 100 may implement the first reality object for which the implementation priority has been calculated as a second virtual object in the second augmented reality space.
본 발명의 바람직한 실시예에 따르면, 서비스서버(100)는 제1증강현실공간 상에서 제1현실오브젝트가 배치된 공간과 유사한 제2증강현실공간 내의 유사공간을 도출할 수 있으며, 제1현실오브젝트를 구현우선순위에 따라 순차적으로 유사공간에 구현할 수 있다.According to a preferred embodiment of the present invention, the service server 100 can derive a similar space in the second augmented reality space that is similar to the space in which the first reality object is placed in the first augmented reality space, and It can be implemented sequentially in similar spaces according to implementation priority.
이와 관련하여, 도 5는 본 발명의 일 실시예에 따른 제1현실오브젝트 구현 방법을 설명하기 위한 참조도이다.In this regard, Figure 5 is a reference diagram for explaining a method of implementing a first reality object according to an embodiment of the present invention.
도 5를 참조하면, (A)는 호스트가 위치하는 제1현실공간을 나타내는 참조도이고, (B)의 좌측은 게스트가 위치하는 제2현실공간을 나타내는 참조도이며, (B)의 우측은 게스트가 위치하는 제2현실공간에 기초하여 생성된 제2증강현실공간에 제1현실오브젝트를 제2가상오브젝트로 구현한 모습을 나타내는 참조도이다.Referring to FIG. 5, (A) is a reference diagram showing the first real space where the host is located, the left side of (B) is a reference diagram showing the second real space where the guest is located, and the right side of (B) is a reference diagram showing the second real space where the guest is located. This is a reference diagram showing a first reality object implemented as a second virtual object in a second augmented reality space created based on the second reality space where the guest is located.
이에 따르면, 제1현실오브젝트인 소파가 선순위로 산출된 경우, 게스트가 위치한 제2현실공간에 대한 유사공간을 테이블과 의자가 위치한 공간으로 도출해낼 수 있다. 또한, 제2현실오브젝트가 위치한 공간에는 제2가상오브젝트를 제2현실오브젝트의 증강면에 기초하여 증강하고, 제2현실오브젝트가 존재하지 않는 공간에는 제2가상오브젝트를 제2증강현실공간의 바닥면에 기초하여 증강함으로써, 제1증강현실공간과 유사한 제2증강현실공간을 조성하여 게스트에게 제공할 수 있다.According to this, if the sofa, which is the first reality object, is calculated as a priority, a similar space to the second reality space where the guest is located can be derived as the space where the table and chairs are located. In addition, in the space where the second reality object is located, the second virtual object is augmented based on the augmented surface of the second reality object, and in the space where the second reality object does not exist, the second virtual object is augmented on the floor of the second augmented reality space. By augmenting based on the surface, a second augmented reality space similar to the first augmented reality space can be created and provided to the guest.
예를 들어, 제1현실오브젝트와 동일 카테고리인 제2현실오브젝트가 도출된 유사공간에 존재하는 경우, 제1현실오브젝트의 형태와 동일하게 구현된 제2가상오브젝트를 해당 제2현실오브젝트에 증강시키는 형태로 구현할 수 있다.For example, if a second reality object of the same category as the first reality object exists in the derived similar space, a second virtual object implemented in the same form as the first reality object is augmented to the second reality object. It can be implemented in the form
또한, 구현순위가 후순위인 제2가상오브젝트가 구현될 유사공간이 먼저 구현된 제2가상오브젝트에 의해 침범되는 경우, 후순위인 제2가상오브젝트를 구현할 유사공간을 재도출하거나 또는 제2가상오브젝트의 형태를 조절하여 침범되지 않은 나머지 유사공간 상에 구현할 수 있다.In addition, if the similar space in which the second virtual object with the lower priority implementation priority is to be implemented is invaded by the second virtual object that was implemented earlier, the similar space for implementing the second virtual object with the lower priority priority must be re-derived or the second virtual object's By adjusting the shape, it can be implemented in the remaining uninvaded similar space.
또한, 서비스서버(100)는 제1현실공간스캔정보에 포함되는 제1현실오브젝트의 형태정보 및 목정정보에 기초하여, 제1현실오브젝트의 상호작용기능을 수행 가능하도록 설정된 제2가상오브젝트를 구현할 수 있다. 이는, 호스트 및 게스트가 함께 오브젝트의 상호작용기능을 체험할 수 있도록 하여, 시각적인 동기화 외에도 기능적인 동기화가 수행된 증강현실이 제공되도록 할 수 있다.In addition, the service server 100 implements a second virtual object set to perform the interaction function of the first reality object based on the shape information and destination information of the first reality object included in the first reality space scan information. You can. This allows the host and guest to experience the interactive function of the object together, providing augmented reality with functional synchronization in addition to visual synchronization.
본 발명은 본 발명의 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.It is obvious to those skilled in the art that the present invention can be embodied in other specific forms without departing from the characteristics of the present invention. Accordingly, the above detailed description should not be construed as restrictive in all respects and should be considered illustrative. The scope of the present invention should be determined by reasonable interpretation of the appended claims, and all changes within the equivalent scope of the present invention are included in the scope of the present invention.
10: 호스트단말
20: 게스트단말
100: 서비스서버10: Host terminal
20: Guest terminal
100: Service server
Claims (6)
(b) 제2현실공간에 위치한 게스트단말을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성하는 단계;
(c) 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계; 및
(d) 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현하는 단계를 포함하고,
(a) 내지 (d) 단계는 서비스서버에서 수행되어, 호스트단말로 제공되는 제1증강현실과 동기화된 제2증강현실이 게스트단말로 제공되고,
(d) 단계는
제1증강현실공간 상에서 제1현실오브젝트가 배치된 공간과 유사한 제2증강현실공간 내의 유사공간을 도출하는 단계; 및
제1현실오브젝트를 구현우선순위에 따라 순차적으로 유사공간에 구현하는 단계를 포함하는,
다중참여가 가능한 동기화된 증강현실 구현방법.
(a) generating a first augmented reality space in which first augmented reality is provided based on first real space scan information generated through a host terminal located in the first real space;
(b) creating a second augmented reality space in which second augmented reality is provided based on second reality space scan information generated through a guest terminal located in the second reality space;
(c) calculating an implementation priority for a first reality object located in the first augmented reality space; and
(d) including the step of implementing the first reality object for which the implementation priority has been calculated as a second virtual object in the second augmented reality space,
Steps (a) to (d) are performed by the service server, and a second augmented reality synchronized with the first augmented reality provided to the host terminal is provided to the guest terminal,
Step (d) is
Deriving a similar space in the second augmented reality space that is similar to the space where the first reality object is placed in the first augmented reality space; and
Including the step of sequentially implementing the first reality object in a pseudospace according to implementation priority,
A method of implementing synchronized augmented reality that allows multiple participation.
(d) 단계는
구현순위가 후순위인 제2가상오브젝트가 구현될 유사공간이 먼저 구현된 제2가상오브젝트에 의해 침범되는 경우, 후순위인 제2가상오브젝트를 구현할 유사공간을 재도출하거나 또는 제2가상오브젝트의 형태를 조절하여 침범되지 않은 나머지 유사공간 상에 구현하는 단계를 포함하는,
다중참여가 가능한 동기화된 증강현실 구현방법.
According to paragraph 2,
Step (d) is
If the pseudospace in which the second virtual object with a lower priority implementation priority is to be implemented is invaded by the second virtual object that was implemented first, the pseudospace in which the second virtual object with lower priority implementation priority is to be implemented is re-derived or the form of the second virtual object is changed. Including the step of adjusting and implementing it on the remaining uninvaded similar space,
A method of implementing synchronized augmented reality that allows multiple participation.
(b) 제2현실공간에 위치한 게스트단말을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성하는 단계;
(c) 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계; 및
(d) 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현하는 단계를 포함하고,
(a) 내지 (d) 단계는 서비스서버에서 수행되어, 호스트단말로 제공되는 제1증강현실과 동기화된 제2증강현실이 게스트단말로 제공되고,
(c) 단계는
제1현실오브젝트의 상호작용특성에 기초하여 세분화된 등급산정항목의 등급산정결과에 따라 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계를 포함하는,
다중참여가 가능한 동기화된 증강현실 구현방법.
(a) generating a first augmented reality space in which first augmented reality is provided based on first real space scan information generated through a host terminal located in the first real space;
(b) creating a second augmented reality space in which second augmented reality is provided based on second reality space scan information generated through a guest terminal located in the second reality space;
(c) calculating an implementation priority for a first reality object located in the first augmented reality space; and
(d) including the step of implementing the first reality object for which the implementation priority has been calculated as a second virtual object in the second augmented reality space,
Steps (a) to (d) are performed by the service server, and a second augmented reality synchronized with the first augmented reality provided to the host terminal is provided to the guest terminal,
Step (c) is
Comprising the step of calculating the implementation priority for the first reality object according to the rating results of the detailed rating items based on the interaction characteristics of the first reality object,
A method of implementing synchronized augmented reality that allows multiple participation.
(c) 단계는
사용빈도에 기초하여 제1현실오브젝트가 사용자에게 미치는 영향력등급을 산정하기 위한 영향력항목, 제1현실오브젝트 및 다른 오브젝트들 간의 관계에 기초하여 의존도등급을 산정하기 위한 의존도항목 및 제1현실오브젝트의 기능을 활용할 수 있는 기능활성화영역의 범위에 기초하여 기능활성화등급을 산정하기 위한 기능활성화항목을 포함하는 등급산정항목을 설정하는 단계; 및
등급산정항목이 포함하는 항목들에 대해서 산정된 등급의 평균값에 따라 각 제1현실오브젝트의 구현우선순위를 산출하는 단계를 포함하는,
다중참여가 가능한 동기화된 증강현실 구현방법.
According to paragraph 4,
Step (c) is
Influence item for calculating the influence level of the first reality object on the user based on the frequency of use, dependency item for calculating the dependency level based on the relationship between the first reality object and other objects, and the function of the first reality object Setting a rating calculation item including a function activation item for calculating a function activation level based on the range of the function activation area that can be utilized; and
Comprising the step of calculating the implementation priority of each first reality object according to the average value of the ratings calculated for the items included in the rating calculation item,
A method of implementing synchronized augmented reality that allows multiple participation.
(b) 제2현실공간에 위치한 게스트단말을 통해 생성된 제2현실공간스캔정보에 기초하여 제2증강현실이 제공되는 제2증강현실공간을 생성하는 단계;
(c) 제1증강현실공간 상에 위치하는 제1현실오브젝트에 대한 구현우선순위를 산출하는 단계; 및
(d) 구현우선순위가 산출된 제1현실오브젝트를 제2증강현실공간 상에 제2가상오브젝트로 구현하는 단계를 포함하고,
(a) 내지 (d) 단계는 서비스서버에서 수행되어, 호스트단말로 제공되는 제1증강현실과 동기화된 제2증강현실이 게스트단말로 제공되는,
(d) 단계는
제1현실공간스캔정보에 포함되는 제1현실오브젝트의 형태정보 및 목정정보에 기초하여, 제1현실오브젝트의 상호작용기능을 수행 가능하도록 설정된 제2가상오브젝트를 구현하는 단계; 및
제1현실오브젝트와 동일 카테고리인 제2현실오브젝트가 제2증강현실공간 상에 존재하는 경우, 제1현실오브젝트의 형태와 동일하게 구현된 제2가상오브젝트를 해당 제2현실오브젝트에 증강시키는 형태로 구현하는 단계를 포함하는,
다중참여가 가능한 동기화된 증강현실 구현방법.
(a) generating a first augmented reality space in which first augmented reality is provided based on first real space scan information generated through a host terminal located in the first real space;
(b) creating a second augmented reality space in which second augmented reality is provided based on second reality space scan information generated through a guest terminal located in the second reality space;
(c) calculating an implementation priority for a first reality object located in the first augmented reality space; and
(d) including the step of implementing the first reality object for which the implementation priority has been calculated as a second virtual object in the second augmented reality space,
Steps (a) to (d) are performed by the service server, and a second augmented reality synchronized with the first augmented reality provided to the host terminal is provided to the guest terminal,
Step (d) is
Implementing a second virtual object set to perform the interaction function of the first reality object based on the shape information and destination information of the first reality object included in the first reality space scan information; and
If a second reality object of the same category as the first reality object exists in the second augmented reality space, a second virtual object implemented in the same form as the first reality object is augmented to the second reality object. Including implementing steps,
A method of implementing synchronized augmented reality that allows multiple participation.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220113201A KR102593878B1 (en) | 2022-09-07 | 2022-09-07 | Synchronized augmented reality implementation method for multiple participation |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220113201A KR102593878B1 (en) | 2022-09-07 | 2022-09-07 | Synchronized augmented reality implementation method for multiple participation |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102593878B1 true KR102593878B1 (en) | 2023-10-25 |
Family
ID=88515515
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220113201A KR102593878B1 (en) | 2022-09-07 | 2022-09-07 | Synchronized augmented reality implementation method for multiple participation |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102593878B1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150009789A (en) * | 2013-07-17 | 2015-01-27 | 한국과학기술원 | Digilog space generator for tele-collaboration in an augmented reality environment and digilog space generation method using the same |
| KR20180054377A (en) * | 2016-11-15 | 2018-05-24 | 주식회사 살린 | Interactive virtual reality system |
-
2022
- 2022-09-07 KR KR1020220113201A patent/KR102593878B1/en active IP Right Grant
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150009789A (en) * | 2013-07-17 | 2015-01-27 | 한국과학기술원 | Digilog space generator for tele-collaboration in an augmented reality environment and digilog space generation method using the same |
| KR20180054377A (en) * | 2016-11-15 | 2018-05-24 | 주식회사 살린 | Interactive virtual reality system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220266132A1 (en) | Virtual environment for computer game | |
| EP3962075A1 (en) | Data processing system and method | |
| US20200101376A1 (en) | Multi-instance, multi-user virtual reality spaces | |
| CN105139213A (en) | Virtual decoration combination system for physical space | |
| CN112001997B (en) | Furniture display method and device | |
| WO2010075622A1 (en) | Method and apparatus for enabling a user's presence to be experienced by large numbers of users in a virtual environment | |
| CN106096153A (en) | Indoor decoration outdoor scene is experienced scene and is provided method and system | |
| JP7340281B2 (en) | Application delivery system and method within a virtual environment | |
| US20220317830A1 (en) | Methods and Systems for Providing a Communication Interface to Operate in 2D and 3D Modes | |
| Lupetti et al. | Phygital play HRI in a new gaming scenario | |
| JP7391394B2 (en) | System and method for virtual broadcasting from within a virtual environment | |
| KR20220029471A (en) | Spatial video-based presence | |
| Sugiura et al. | An asymmetric collaborative system for architectural-scale space design | |
| Lebiedź et al. | Multiuser stereoscopic projection techniques for CAVE-type virtual reality systems | |
| Cho et al. | X‐person asymmetric interaction in virtual and augmented realities | |
| Zhao et al. | VR touch museum | |
| KR102593878B1 (en) | Synchronized augmented reality implementation method for multiple participation | |
| KR102584372B1 (en) | Metaverse implementation method for sharing synchronized augmented reality between user terminals located in different real spaces | |
| Della-Bosca et al. | Fractal complexity in built and game environments | |
| Kjeldskov et al. | EyeGaze: enabling eye contact over video | |
| Liu et al. | BoatAR: A multi-user augmented-reality platform for boat | |
| CN112651801A (en) | Method and device for displaying house source information | |
| Koskela et al. | Hybrid avatars: enabling co-presence in multiple realities | |
| Shah et al. | Development of usability framework for projection mapping to increase food dining experience | |
| EP4319051A1 (en) | Videoconferencing meeting slots via specific secure deep links |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |