KR20240039099A

KR20240039099A - Method for implementing synchronization of object placement in the mirror world metaverse space and the system thereof

Info

Publication number: KR20240039099A
Application number: KR1020240034009A
Authority: KR
Inventors: 안상준; 한봉수; 문의철
Original assignee: 안상준; 한봉수; 문의철
Priority date: 2021-09-13
Filing date: 2024-03-11
Publication date: 2024-03-26
Also published as: KR20230038877A

Abstract

본 발명은 실제 상점과 메타버스 내 미러 상점에 구비된 개별 상품들의 배치를 동기화하는 미러월드 메타버스 공간 내 사물배치 동기화 구현 방법 및 시스템에 관한 것으로서, 실제 상점에 위치하는 사물인터넷(IoT)을 통해 상기 실제 상점에 배치된 실제 상품의 실상품 정보를 수신하는 단계, 상기 실상품 정보를 기반으로 상품의 위치 분석 및 데이터 해석을 통해 메타버스 공간에서의 시각화를 위해 필요한 데이터를 업데이트해 동기화하는 단계 및 데이터 동기화에 따라, 미러월드 메타버스 공간에서 상기 실제 상점과 동일한 미러 상점에 상기 실제 상품이 메타버스화된 미러 상품의 시각화를 구현하는 단계를 포함한다. The present invention relates to a method and system for implementing object placement synchronization in the mirror world metaverse space, which synchronizes the arrangement of individual products stocked in actual stores and mirror stores in the metaverse, through the Internet of Things (IoT) located in the actual store. Receiving actual product information of the actual product placed in the actual store, updating and synchronizing the data necessary for visualization in the metaverse space through product location analysis and data interpretation based on the actual product information, and In accordance with data synchronization, it includes the step of implementing visualization of the mirror product in which the actual product has been metaversed in the same mirror store as the actual store in the mirror world metaverse space.

Description

Method and system for implementing synchronization of object placement within the Mirror World metaverse space {METHOD FOR IMPLEMENTING SYNCHRONIZATION OF OBJECT PLACEMENT IN THE MIRROR WORLD METAVERSE SPACE AND THE SYSTEM THEREOF}

본 발명은 미러월드 메타버스 공간 내 사물배치 동기화 구현 방법 및 시스템에 관한 것으로서, 보다 상세하게는 실제 상점과 메타버스 내 미러 상점에 구비된 개별 상품들의 배치를 동기화하는 기술에 관한 것이다. The present invention relates to a method and system for implementing synchronization of object placement in the mirror world metaverse space, and more specifically, to a technology for synchronizing the arrangement of individual products stocked in actual stores and mirror stores in the metaverse.

메타버스(MetaVerse)는 ‘가상’, ‘초월’ 등을 뜻하는 영어 단어 ‘메타(Meta)’와 우주를 뜻하는 ‘유니버스(Universe)’의 합성어로, 현실세계와 같은 사회, 경제, 문화 활동이 이뤄지는 3차원 가상세계를 나타낸다. 메타버스는 가상현실보다 한 단계 더 진화된 개념으로, 아바타(또는 캐릭터)를 활용해 단지 게임이나 가상현실을 즐기는 데 그치지 않고, 실제 현실과 같은 사회적, 문화적 활동을 할 수 있다는 특징이 있다.MetaVerse is a compound word of the English word 'Meta', meaning 'virtual', 'transcendence', etc., and 'Universe', meaning universe. It is a combination of social, economic, and cultural activities similar to the real world. It represents the three-dimensional virtual world in which this occurs. Metaverse is a concept that is one step more evolved than virtual reality, and has the characteristic of using an avatar (or character) to not only enjoy games or virtual reality, but also to engage in social and cultural activities similar to real life.

일반적으로 포털서비스의 검색이나 위치기반 서비스 등에서는 맛집을 검색하면 해당 지역 인근의 맛집에 대한 리뷰, 찾아가는 방법이나 연락처와 같은 정보와 사진 및 동영상 등의 멀티미디어 정보로 확인할 수 있는 것이 전부였다. 그러나, 향후 전개될 메타버스 기반의 위치기반 서비스에서는 실제와 동일하게 표현된 현실 맵 기반 공간(미러월드)에서 내 캐릭터가 이동하면서 마음에 드는 식당에 진입하고, 메뉴 확인 및 예약 혹은 배달 주문을 주인이나 종업원 캐릭터(NPC)의 AI 챗봇을 통해 실시간으로 진행하는 형태로 진화할 것이다. 이처럼 현실 공간을 그대로 복제한 거울세계 안에서 상거래 등의 경제활동이 결합되어 이루어지는 커머스(commerce)의 메타버스화 프로젝트들이 개발될 것이다.In general, when you search for a restaurant in portal services or location-based services, all you can find is information such as reviews of restaurants near the area, directions and contact information, and multimedia information such as photos and videos. However, in the metaverse-based location-based service that will be developed in the future, your character moves in a realistic map-based space (mirror world) expressed identically to reality, enters a favorite restaurant, checks the menu, and makes a reservation or delivery order. It will evolve into a form that is carried out in real time through an AI chatbot of an employee character (NPC). In this way, projects to metaverse commerce will be developed in which economic activities such as commerce are combined in a mirror world that replicates real space.

본 발명의 목적은 현실세계의 실제 상점의 구조뿐 아니라, 상점 내부에 상품들의 진열된 배치와 동일하게 거울세계(또는 메타버스)의 미러 상점 내 미러 상품의 배치를 동기화하고자 한다. The purpose of the present invention is to synchronize not only the structure of a real store in the real world, but also the arrangement of mirror products in a mirror store in the mirror world (or metaverse) to the same as the arrangement of products displayed inside the store.

본 발명의 목적은 현실 맵 상의 실제 상점의 배치 및 구조와 같은 실재하는 정보를 그대로 반영하여 거울세계에서의 미러 상점의 구조와 상점 내 상품의 배치를 동기화함으로써, 3차원 미러월드의 현실성과 실시간성을 향상시키고자 한다.The purpose of the present invention is to improve the reality and real-time nature of the three-dimensional mirror world by synchronizing the structure of the mirror store in the mirror world and the arrangement of products within the store by reflecting real information such as the layout and structure of the actual store on the reality map. We want to improve.

본 발명의 일 실시예에 따른 미러월드 메타버스 공간 내 사물배치와 실제 공간 내 사물배치를 동기화하는 사물배치 동기화 구현 방법에 있어서, 실제 상점에 위치하는 사물인터넷(IoT)을 통해 상기 실제 상점에 배치된 실제 상품의 실상품 정보를 수신하는 단계, 상기 실상품 정보를 기반으로 상품의 위치 분석 및 데이터 해석을 통해 메타버스 공간에서의 시각화를 위해 필요한 데이터를 업데이트해 동기화하는 단계, 및데이터 동기화에 따라 미러월드 메타버스 공간에서 상기 실제 상점과 동일한 미러 상점에 상기 실제 상품이 메타버스화된 미러 상품의 시각화를 구현하는 단계를 포함한다.In the method of implementing object placement synchronization that synchronizes the arrangement of objects in the mirror world metaverse space and the arrangement of objects in the actual space according to an embodiment of the present invention, the objects are placed in the actual store through the Internet of Things (IoT) located in the actual store. A step of receiving actual product information of the actual product, a step of updating and synchronizing the data necessary for visualization in the metaverse space through product location analysis and data interpretation based on the actual product information, and data synchronization It includes the step of implementing visualization of a mirror product in which the actual product has been converted into a metaverse in a mirror store identical to the actual store in the mirror world metaverse space.

상기 수신하는 단계는 상기 실제 상점에 사물인터넷에 연결되는 RFID, NFC, CCTV 및 카메라의 상기 센서 기기를 통해 상기 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 상기 실상품 정보를 수신할 수 있다.In the receiving step, the actual product information of the display location, number of displays, inventory amount, and product type of the actual product can be received through the sensor devices of RFID, NFC, CCTV, and camera connected to the Internet of Things in the actual store. there is.

상기 동기화하는 단계는 렌더링 소프트웨어를 통해 메타버스 공간에서의 시각화를 위해 필요한 상기 미러 상품 정보를 자동 동기화할 수 있다.The synchronization step can automatically synchronize the mirror product information necessary for visualization in the metaverse space through rendering software.

상기 구현하는 단계는 상기 데이터 동기화 결과를 반영하여 일차적으로 렌더링 결과를 생성하여 시각화하고, 이후에 상기 센서 기기 내 CCTV를 통해 획득된 영상 데이터를 매칭하여 오류를 보정하거나, 보다 사실적으로 상기 실제 상품을 메타버스화할 수 있다.The implementation step reflects the data synchronization results to initially generate and visualize rendering results, and then matches the image data acquired through CCTV in the sensor device to correct errors or make the actual product more realistic. It can be transformed into a metaverse.

상기 동기화하는 단계는 상기 실제 상점에서 상기 사물인터넷을 통해 비주기적으로 발생된 이벤트(event-driven)에 따라 상기 실상품 정보에 대한 데이터를 동기화할 수 있다.The synchronization step may synchronize data about the actual product information according to an event (event-driven) that occurs aperiodically through the Internet of Things in the actual store.

상기 동기화하는 단계는 적어도 하나 이상의 상기 실제 상점을 조직적으로 관리하며, 상기 적어도 하나 이상의 실제 상점 각각에 배치된 상기 실제 상품에 대한 데이터 동기화를 동시에 수행할 수 있다.The synchronizing step may systematically manage at least one physical store, and simultaneously perform data synchronization on the actual products placed in each of the at least one physical store.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 상품 재고로 상기 미러 상점의 판매대를 보충하며, 창고에 적정 재고가 없는 경우 동기화 관리자를 통해 상기 실제 상점의 상기 실제 상품에 대한 재고를 공급하도록 처리하는 단계를 더 포함할 수 있다.In addition, the method of implementing object placement synchronization according to an embodiment of the present invention replenishes the sales counter of the mirror store with product inventory, and if there is no appropriate inventory in the warehouse, the inventory of the actual product in the actual store is adjusted through the synchronization manager. The step of processing to supply may be further included.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 미러월드 메타버스 공간 내 상기 미러 상점에 상기 미러 상품의 판매를 촉진하기 위해 개인화된 이벤트를 대화형으로 진행하기 위한 직원 캐릭터를 생성하는 단계를 더 포함할 수 있다.In addition, the method of implementing object placement synchronization according to an embodiment of the present invention includes creating an employee character to interactively conduct a personalized event to promote sales of the mirror product in the mirror store within the mirror world metaverse space. Additional steps may be included.

상기 생성하는 단계는 상기 미러 상품의 판매 기한에 따른 재고량에 따라 상기 직원 캐릭터를 통해 상기 미러 상품에 관한 판매 프로모션 이벤트를 제공할 수 있다.The generating step may provide a sales promotion event for the mirror product through the employee character according to the inventory amount according to the sales deadline of the mirror product.

본 발명의 실시예에 따른 미러월드 메타버스 공간 내 사물배치와 실제 공간 내 사물배치를 동기화하는 사물배치 동기화 구현 방법에 있어서, 실제 상점에 사물인터넷에 연결되는 센서 기기를 등록하는 단계, 상기 센서 기기를 통해 상기 실제 상점에 배치된 실제 상품의 개수 정보 및 위치 정보의 실상품 정보를 수신하는 단계, 상기 실상품 정보를 기반으로 메타버스 공간에서의 시각화를 위한 데이터 동기화하는 단계, 상기 실상품 정보를 기반으로 위치 분석 및 데이터 해석하여 미러월드 메타버스 공간에서 상기 실제 상점과 동일한 미러 상점에 상기 실제 상품이 메타버스화된 미러 상품을 구현하는 단계 및 사용자가 상기 미러 상품의 구매에 따른 결제 서비스를 제공하는 단계를 포함한다.In the object arrangement synchronization implementation method for synchronizing the arrangement of objects in the mirror world metaverse space and the arrangement of objects in the actual space according to an embodiment of the present invention, the step of registering a sensor device connected to the Internet of Things in an actual store, the sensor device Receiving actual product information of the number and location information of actual products placed in the actual store through, synchronizing data for visualization in the metaverse space based on the actual product information, and storing the actual product information Based on location analysis and data interpretation, a step of implementing a mirror product in which the actual product is metaversed in a mirror store identical to the actual store in the mirror world metaverse space and providing a payment service according to the user's purchase of the mirror product It includes steps to:

본 발명의 일 실시예에 따른 미러월드 메타버스 공간 내 사물배치와 실제 공간 내 사물배치를 동기화하는 사물배치 동기화 구현 시스템에 있어서, 실제 상점에 위치하는 사물인터넷(IoT)을 통해 상기 실제 상점에 배치된 실제 상품의 실상품 정보를 수신하는 실상품 정보 수신부, 상기 실상품 정보를 기반으로 상품의 위치 분석 및 데이터 해석을 통해 메타버스 공간에서의 시각화를 위해 필요한 데이터를 업데이트해 동기화하는 데이터 동기화부 및 데이터 동기화에 따라, 미러월드 메타버스 공간에서 상기 실제 상점과 동일한 미러 상점에 상기 실제 상품이 메타버스화된 미러 상품을 구현하는 미러상품 구현부를 포함한다.In the object placement synchronization implementation system that synchronizes the arrangement of objects in the mirror world metaverse space and the arrangement of objects in the actual space according to an embodiment of the present invention, the objects are placed in the actual store through the Internet of Things (IoT) located in the actual store. A data synchronization unit that updates and synchronizes the data necessary for visualization in the metaverse space through product location analysis and data interpretation based on the actual product information, and In accordance with data synchronization, it includes a mirror product implementation unit that implements a mirror product in which the actual product has been converted into a metaverse in a mirror store identical to the actual store in the mirror world metaverse space.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템은 상품 재고로 상기 미러 상점의 판매대를 보충하며, 창고에 적정 재고가 없는 경우, 동기화 관리자에 의해 상기 미러 상품에 대한 실제 재고를 공급하도록 처리하는 제어부를 더 포함할 수 있다.In addition, the object placement synchronization implementation system according to an embodiment of the present invention replenishes the sales counter of the mirror store with product inventory, and when there is no appropriate inventory in the warehouse, the synchronization manager supplies actual inventory for the mirror product. It may further include a control unit for processing.

상기 제어부는 미러월드 메타버스 공간 내 상기 미러 상점에 상기 미러 상품의 판매를 촉진하기 위해 개인화된 이벤트를 대화형으로 진행하기 위한 직원 캐릭터를 생성할 수 있다. The control unit may create an employee character to interactively conduct a personalized event to promote sales of the mirror product in the mirror store within the mirror world metaverse space.

상기 제어부는 미러월드 메타버스 공간 내에서 판매가 일어나면, 상기 실제 상점의 재고 관리 시스템, ERP 시스템 혹은 전자상거래 배송 시스템에 의해 배송이 이루어지도록 처리할 수 있다. When a sale occurs within the Mirror World metaverse space, the control unit can process delivery by the actual store's inventory management system, ERP system, or e-commerce delivery system.

본 발명의 실시예에 따르면, 현실세계의 실제 상점의 구조뿐 아니라, 상점 내부에 상품들의 진열된 배치와 동일하게 거울세계(또는 메타버스)의 미러 상점 내 미러 상품을 동기화할 수 있다. According to an embodiment of the present invention, mirror products in a mirror store in the mirror world (or metaverse) can be synchronized to be identical to the structure of the actual store in the real world as well as the arrangement of products displayed inside the store.

본 발명의 실시예에 따르면, 현실 맵 상의 실제 상점의 배치 및 구조와 같은 실재하는 정보를 그대로 반영하여 거울세계에서의 미러 상점을 동기화함으로써, 3차원 메타버스 공간에서 보다 현실성과 실시간성을 향상시킬 수 있다. According to an embodiment of the present invention, by synchronizing mirror stores in the mirror world by reflecting real information such as the arrangement and structure of actual stores on the reality map, realism and real-time can be improved in the three-dimensional metaverse space. You can.

도 1은 본 발명의 일 실시예에 따른 데이터 동기화를 위한 네트워크 환경을 설명하기 위한 일 예시도를 도시한 것이다.
도 2는 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법의 동작 흐름도를 도시한 것이다.
도 3은 본 발명의 실시예에 따른 사물배치 동기화 구현 방법의 동작 흐름도를 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템에 대한 구성을 도시한 것이다.Figure 1 shows an example diagram to explain a network environment for data synchronization according to an embodiment of the present invention.
Figure 2 shows an operation flowchart of a method for implementing object placement synchronization according to an embodiment of the present invention.
Figure 3 shows an operation flowchart of a method for implementing object placement synchronization according to an embodiment of the present invention.
Figure 4 shows the configuration of a system for implementing object placement synchronization according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail below along with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below and will be implemented in various different forms, but the present embodiments only serve to ensure that the disclosure of the present invention is complete and are within the scope of common knowledge in the technical field to which the present invention pertains. It is provided to fully inform those who have the scope of the invention, and the present invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며, 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.The terminology used herein is for describing embodiments and is not intended to limit the invention. As used herein, singular forms also include plural forms, unless specifically stated otherwise in the context. As used herein, “comprises” and/or “comprising” refers to the presence of one or more other components, steps, operations and/or elements. or does not rule out addition.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used in this specification may be used with meanings that can be commonly understood by those skilled in the art to which the present invention pertains. Additionally, terms defined in commonly used dictionaries are not interpreted ideally or excessively unless clearly specifically defined.

이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예들을 보다 상세하게 설명하고자 한다. 도면 상의 동일한 구성요소에 대해서는 동일한 참조 부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, preferred embodiments of the present invention will be described in more detail with reference to the attached drawings. The same reference numerals are used for the same components in the drawings, and duplicate descriptions for the same components are omitted.

본 발명의 실시예들은, 실제 상점과 메타버스 내 미러 상점에 구비된 개별 상품들의 배치를 동기화하는 것을 그 요지로 한다.The gist of embodiments of the present invention is to synchronize the arrangement of individual products stocked in actual stores and mirror stores in the metaverse.

본 발명에서는 현실세계에 존재하는 실제 상점과 동일한 위치 및 구조를 가지는 미러 상점을 미러월드 메타버스 공간에 구현하며, 실제 상점 내부에 배치 및 진열된 실제 상품과 동일하게 미러 상점 내부에 미러 상품들을 그대로 반영하여 동기화할 수 있다. 이때, 본 발명은 해당 상점을 소유한 오너(owner)의 동의를 전제로 상점의 실제 구조 및 인테리어를 바탕으로 메타버스화하는 것을 특징으로 한다. In the present invention, a mirror store with the same location and structure as a real store existing in the real world is implemented in the mirror world metaverse space, and the mirror products are placed and displayed inside the mirror store as is, identical to the actual products placed and displayed inside the actual store. It can be reflected and synchronized. At this time, the present invention is characterized by creating a metaverse based on the actual structure and interior of the store, subject to the consent of the owner who owns the store.

이하에서는 도 1 내지 도 5를 참조하여 본 발명에 대해 상세히 설명한다. Hereinafter, the present invention will be described in detail with reference to FIGS. 1 to 5.

도 1은 본 발명의 일 실시예에 따른 데이터 동기화를 위한 네트워크 환경을 설명하기 위한 일 예시도를 도시한 것으로, 도 1의 네트워크 환경은 현실세계의 실제 상점(110) 및 미러월드 메타버스 공간에서의 미러 상점(120)과 본 발명의 실시예에 따른 서버(400) 및 네트워크(130)를 포함하는 예를 나타내고 있다. 이러한 도 1의 발명의 설명을 위한 일례로 실제 상점(110)의 수나 미러 상점(120)의 수가 도 1과 같이 한정되는 것은 아니다.Figure 1 shows an example diagram to explain a network environment for data synchronization according to an embodiment of the present invention. The network environment in Figure 1 is an actual store 110 in the real world and the mirror world metaverse space. shows an example including a mirror store 120, a server 400, and a network 130 according to an embodiment of the present invention. As an example for explaining the invention of FIG. 1 , the number of actual stores 110 or the number of mirror stores 120 is not limited as shown in FIG. 1 .

실제 상점(110)은 현실세계에 실제 존재하는 상점을 나타내는 것으로, 상점 내부에는 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 실상품 정보를 획득하기 위한 사물인터넷에 연결되는 센서 기기가 위치할 수 있다. 실제 상점(110)은 무선 또는 유선 통신 방식을 이용하여 네트워크(130)를 통해 서버(400)와 통신할 수 있다. The actual store 110 represents a store that actually exists in the real world. Inside the store, a sensor device connected to the Internet of Things is located to obtain actual product information on the actual product display location, display number, inventory amount, and product type. can do. The actual store 110 may communicate with the server 400 through the network 130 using a wireless or wired communication method.

통신 방식은 제한되지 않으며, 네트워크(130)가 포함할 수 있는 통신망(일례로, 이동통신망, 유선 인터넷, 무선 인터넷, 방송망)을 활용하는 통신 방식뿐만 아니라 기기들간의 근거리 무선 통신 역시 포함될 수 있다. 예를 들어, 네트워크(130)는, 블루투스, 와이파이, 5G, LoRa, ANT 등 특정 유/무선 통신 기술에 제한되지 않으며, PAN(personal area network), LAN(local area network), CAN(campus area network), MAN(metropolitan area network), WAN(wide area network), BBN(broadband network), 인터넷 등의 네트워크 중 하나 이상의 임의의 네트워크를 포함할 수 있다. 또한, 네트워크(130)는 버스 네트워크, 스타 네트워크, 링 네트워크, 메쉬 네트워크, 스타-버스 네트워크, 트리 또는 계층적(hierarchical) 네트워크 등을 포함하는 네트워크 토폴로지 중 임의의 하나 이상을 포함할 수 있으나, 이에 제한되지 않는다.The communication method is not limited, and may include not only a communication method utilizing a communication network that the network 130 may include (for example, a mobile communication network, wired Internet, wireless Internet, and a broadcast network), but also short-range wireless communication between devices. For example, the network 130 is not limited to specific wired/wireless communication technologies such as Bluetooth, Wi-Fi, 5G, LoRa, and ANT, and may include personal area network (PAN), local area network (LAN), and campus area network (CAN). ), MAN (metropolitan area network), WAN (wide area network), BBN (broadband network), and the Internet may include one or more arbitrary networks. Additionally, the network 130 may include any one or more of network topologies including a bus network, star network, ring network, mesh network, star-bus network, tree or hierarchical network, etc. Not limited.

미러 상점(120)은 미러월드 메타버스 공간에 위치하는 가상의 상점을 나타내는 것이나, 실제 상점(110)과 동일한 구조 및 인테리어를 나타내며, 실제 상점(110)에 진열된 실제 상품과 동일한 미러 상품이 진열된 것을 특징으로 한다. The mirror store 120 represents a virtual store located in the mirror world metaverse space, but has the same structure and interior as the actual store 110, and mirror products identical to the actual products displayed in the actual store 110 are displayed. It is characterized by being

서버(400)는 실제 상점(110)에 위치하는 사물인터넷에 연결되는 센서 기기와 네트워크(130)를 통해 통신하여 명령, 코드, 파일, 콘텐츠, 서비스 등을 제공하는 컴퓨터 장치 또는 복수의 컴퓨터 장치들로 구현될 수 있다.The server 400 is a computer device or a plurality of computer devices that communicate with sensor devices connected to the Internet of Things located in the actual store 110 and the network 130 to provide commands, codes, files, content, services, etc. It can be implemented as:

일례로, 서버(400)는 네트워크(130)를 통해 실제 상점(110)에 위치하는 센서 기기로부터 실제 상품의 실상품 정보를 수신하고, 수신된 실상품 정보를 분석 및 해석하여 메타버스 공간에서의 시각화를 위한 데이터 동기화를 수행하며, 데이터 동기화에 따라 미러월드 메타버스 공간에서 실제 상점과 동일한 미러 상점(120)에 실제 상품이 메타버스화된 미러 상품을 구현할 수 있다. For example, the server 400 receives actual product information of an actual product from a sensor device located in the actual store 110 through the network 130, analyzes and interprets the received actual product information, and stores the actual product information in the metaverse space. Data synchronization for visualization is performed, and according to data synchronization, a mirror product in which the actual product is metaverse can be implemented in the mirror store 120, which is the same as the actual store in the mirror world metaverse space.

도 2는 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법의 동작 흐름도를 도시한 것이다.Figure 2 shows an operation flowchart of a method for implementing object placement synchronization according to an embodiment of the present invention.

도 2를 참조하면, 단계 S210에서, 실제 상점에 위치하는 사물인터넷(IoT)을 통해 실제 상점에 배치된 실제 상품의 실상품 정보를 수신한다. Referring to FIG. 2, in step S210, actual product information of the actual product placed in the actual store is received through the Internet of Things (IoT) located in the actual store.

단계 S210은 실제 상점에 사물인터넷에 연결되는 RFID, NFC, CCTV 및 카메라의 센서 기기를 통해 수집되는 이미지 데이터, 태그 정보, 스캐너 정보 및 센싱 정보를 기반으로 하여 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 실상품 정보를 수신할 수 있다. Step S210 is based on image data, tag information, scanner information, and sensing information collected through sensor devices such as RFID, NFC, CCTV, and cameras connected to the Internet of Things in actual stores, and determines the display location, number of displays, and inventory amount of actual products. and actual product information of the product type can be received.

현실세계에서의 실제 상점에는 판매대에 적어도 하나 이상의 실제 상품이 진열 및 배치되어 있다. 이때, 센서 기기를 통해 데이터를 수집하는 대상 즉, 실제 상품의 정의는 스스로 움직일 수 없는 것으로, 예를 들면, 식료품, 건강용품, 생활용품, 주방용품, 생활잡화, 의류, 악세서리, 완구/문구/도서 등을 포함할 수 있으나, 이에 한정하지 않는다. 간헐적으로 실제 상점에서 상품이 판매되어 판매대에 소진되는 경우와 같은 상품의 변화가 있을 수 있지만, 이 경우에도 그 사물의 움직임이나 이동 자체를 메타버스 공간 내에서 표현할 필요는 없다. In a real store in the real world, at least one or more real products are displayed and arranged on the sales counter. At this time, the object for which data is collected through a sensor device, that is, the actual product, is defined as something that cannot move on its own, for example, food, health products, household items, kitchenware, household goods, clothing, accessories, toys/stationery/ It may include books, etc., but is not limited to this. There may be changes in products intermittently, such as when products are sold in actual stores and run out of shelves, but even in this case, there is no need to express the movement or movement of the object itself within the metaverse space.

본 발명은 현실 맵(reality map)을 기반으로 한 영상 렌더링을 통해 현실 맵 상에 기 설정된 범위의 메타버스 공간을 구현하고, 구현된 메타버스 공간에 실제 상점의 위치 및 구조와 동일하게 미러 상점을 구현할 수 있다. 나아가, 본 발명은 미러 상점 내부에 진열되는 미러 상품 또한 실제 상점에 진열 및 배치된 실제 상품과 동일화하기 위해 단계 S210을 통해 실제 상점으로부터 실상품 정보를 수신한다. 이때, 실제 상점 내부의 벽면 또는 판매대 부근에는 적어도 하나 이상의 RFID, NFC, CCTV 및 카메라의 센서 기기는 실제 상품에 관련된 정보를 획득할 수 있도록 위치하며, 단계 S210은 센서 기기로부터 진열 및 배치된 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 실상품 정보를 수신할 수 있다. The present invention implements a metaverse space of a preset range on the reality map through image rendering based on a reality map, and establishes a mirror store in the implemented metaverse space identical to the location and structure of the actual store. It can be implemented. Furthermore, the present invention receives actual product information from the actual store through step S210 in order to make the mirror products displayed inside the mirror store identical to the actual products displayed and arranged in the actual store. At this time, at least one sensor device of RFID, NFC, CCTV, and camera is located on the wall or near the sales counter inside the actual store to obtain information related to the actual product, and step S210 is the actual product displayed and arranged from the sensor device. You can receive actual product information on display location, display number, inventory amount, and product type.

실시예에 따라서, 상품 개수 센싱이 불가능한 센서 기기의 경우, 단계 S210은 해당 센서 기기와 연관된 판매대 위 재고가 없는 상태인 것으로 판단할 수 있다. 또한, 삼각측량 등을 통해 실제 상품의 정확한 실내 위치를 파악하는 것이 불가능한 경우에는 특정 위치에 고정된 센서 기기를 추가 설치할 수도 있다. 이에, 단계 S210은 센서 기기 각각이 고정된 특정 위치에서 수집되는 상품의 개수 정보 혹은 재고 없음 정보를 수신하게 된다. Depending on the embodiment, in the case of a sensor device that is unable to sense the number of products, step S210 may determine that there is no inventory on the sales counter associated with the sensor device. Additionally, if it is impossible to determine the exact indoor location of the actual product through triangulation, etc., an additional sensor device fixed to a specific location may be installed. Accordingly, in step S210, each sensor device receives information on the number of products or out-of-stock information collected from a specific fixed location.

이때, 단계 S210은 실상품 정보를 수신하는 업데이트 주기는 오너 또는 운영자에 의해 조정이 가능하나, 정해진 시간 간격마다 업데이트가 이루어지는 타임 드라이븐(Time-driven) 방식이 아니라, 이벤트에 따른 이벤트 드라이븐(Event-driven) 방식으로 실시간 업데이트도 가능하다. 즉, 본 발명은 주기적 업데이트가 아니라 비주기적으로 이벤트가 발생할 때마다 실시간으로 업데이트하는 것이 가능하다. 이때, 이벤트란, 실제 상점에 진열 및 배치된 실제 상품의 움직임을 감지할 때를 나타낼 수 있다. At this time, in step S210, the update cycle for receiving actual product information can be adjusted by the owner or operator, but it is not a time-driven method in which updates are made at fixed time intervals, but an event-driven (event-driven) method according to the event. Event-driven) real-time updates are also possible. In other words, the present invention is capable of updating in real time whenever an event occurs aperiodically rather than periodically. At this time, an event may represent a time when the movement of an actual product displayed and placed in an actual store is detected.

단계 S220에서, 실상품 정보를 기반으로 상품의 위치 분석 및 데이터 해석을 통해 메타버스 공간에서의 시각화를 위한 데이터 동기화한다. In step S220, data is synchronized for visualization in the metaverse space through product location analysis and data interpretation based on actual product information.

단계 S220은 메타버스 공간 시각화 렌더링 소프트웨어를 통해 메타버스 공간에서의 시각화를 위해 필요한 실상품 정보를 자동 동기화할 수 있다. 단계 S220은 데이터 분석 및 메타버스 공간 시각화(비주얼라이제이션)를 위한 렌더링 소프트웨어를 통해 단계 S210에서의 실상품 정보를 기반으로 실제 상점의 판매대에 진열 및 배치된 실제 상품과 동일하도록 데이터 동기화 작업을 자동으로 수행할 수 있다. 이때, 단계 S220은 실제 상점에서 사물인터넷에 연결되는 센서 기기를 통해 비주기적으로 발생된 이벤트(event-driven)에 따라 실상품 정보에 대한 데이터를 동기화할 수 있다.Step S220 can automatically synchronize the actual product information required for visualization in the Metaverse space through the Metaverse space visualization rendering software. Step S220 automatically performs a data synchronization operation based on the actual product information in step S210 through rendering software for data analysis and metaverse space visualization (visualization) so that it is identical to the actual product displayed and placed on the sales shelf of the actual store. can do. At this time, step S220 can synchronize data on actual product information according to events (event-driven) generated aperiodically through sensor devices connected to the Internet of Things in actual stores.

일례로, 단계 S220은 적어도 하나 이상의 실제 상점에 대한 동기화를 조직적으로 관리할 수 있으며, 적어도 하나 이상의 실제 상품에 진열 및 배치된 실제 상품에 대한 데이터 동기화를 동시에 수행할 수 있다. For example, step S220 may systematically manage synchronization of at least one or more physical stores, and simultaneously perform data synchronization of actual products displayed and placed in at least one or more actual products.

다른 예로, 단계 S220은 동기화 관리자에 의해 데이터 동기화를 수행할 수 있다. 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 자동으로 데이터 동기화를 수행하나, 오류가 있거나 불가피한 경우, 동기화가 수동으로 이루어질 수 있으며, 이는 동기화 관리자에 의해 수행될 수도 있다. 이에, 동기화 관리자는 실제 상점에서의 실제 상품의 업데이트에 따라 데이터 동기화를 수동으로 처리할 수 있으며, 적어도 하나 이상의 실제 상점들을 그룹화하여 동시에 동기화를 수동으로 처리할 수도 있다. As another example, step S220 may perform data synchronization by a synchronization manager. The object arrangement synchronization implementation method according to an embodiment of the present invention automatically performs data synchronization, but if an error occurs or is unavoidable, synchronization may be performed manually, and this may be performed by a synchronization manager. Accordingly, the synchronization manager can manually process data synchronization according to updates of actual products in actual stores, and can also manually process synchronization at the same time by grouping at least one or more actual stores.

또한, 프랜차이즈 상점이나 한 쇼핑센터에서 여러 개의 상점을 묶어 하나의 상점으로 운영하는 경우, 관리체계나 보고체계 역시 현실의 조직체계에 따라 그대로 매핑된다. 이러한 경우에도 동기화 관리자가 적어도 하나 이상의 상점의 동기화를 동시에 담당할 수 있다. Additionally, when a franchise store or a shopping center bundles several stores and operates them as one store, the management system and reporting system are also mapped according to the actual organizational system. Even in this case, the synchronization manager can be responsible for synchronizing at least one store at the same time.

단계 S230에서, 데이터 동기화에 따라, 미러월드 메타버스 공간에서 실제 상점과 동일한 미러 상점에 실제 상품이 메타버스화된 미러 상품을 구현한다.In step S230, according to data synchronization, a mirror product in which the actual product is metaverse is implemented in the mirror store identical to the actual store in the mirror world metaverse space.

단계 S230은 데이터 동기화 결과를 반영하여 일차적으로 생성된 렌더링 결과와 센서 기기 내 CCTV를 통해 획득된 영상 데이터를 매칭하여 오류를 보정하거나, 보다 사실적으로 실제 상품을 메타버스화할 수 있다. 단계 S230은 단계 S220을 통한 동기화 결과를 반영하여 일차적으로 생성된 실제 상품의 실상품 정보에 대한 렌더링 결과와 CCTV를 통해 획득된 영상 데이터를 매칭하여 오류를 보정하거나, 미러 상품을 더욱 사실적으로 표현할 수 있다. 이때, 단계 S230은 인공지능, 딥러닝, 영상 인식 기술을 적용하여 동기화 결과에 따른 오류 보정이나 합성을 처리할 수 있다. Step S230 reflects the data synchronization result and matches the primary generated rendering result with the image data acquired through the CCTV in the sensor device to correct errors or metaverse the actual product in a more realistic manner. Step S230 reflects the synchronization result through step S220 and matches the rendering result of the actual product information of the primary generated actual product with the image data acquired through CCTV to correct errors or express the mirror product more realistically. there is. At this time, step S230 can process error correction or synthesis according to the synchronization result by applying artificial intelligence, deep learning, and image recognition technology.

본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 실제 상점에서 사용하는 재고 관리용 소프트웨어 시스템 혹은 POS(Point Of Sales)와 연동 가능하며, 미러 상점에서의 주문 및 결제가 기존 이커머스처럼 집중형 PG(Payment Gateway)를 통해 이루어지는 것이 아니라 개별적인 POS를 통해 이루어질 수 있다. The method of implementing object placement synchronization according to an embodiment of the present invention can be linked with an inventory management software system or POS (Point Of Sales) used in actual stores, and orders and payments at mirror stores are centralized like existing e-commerce. This can be done not through a PG (Payment Gateway) but through an individual POS.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 상품 재고로 미러 상점의 판매대를 보충하며, 창고에 적정 재고가 없는 경우, 동기화 관리자를 통해 미러 상점의 미러 상품과 연결된 실제 상품에 대한 재고를 공급하도록 처리하는 단계(미도시)를 더 포함할 수 있다. 이때, 실제 상점의 재고 관리 시스템의 기능을 포함할 수 있다. In addition, the method of implementing object placement synchronization according to an embodiment of the present invention replenishes the sales counter of the mirror store with product inventory, and when there is no appropriate inventory in the warehouse, the actual product connected to the mirror product of the mirror store is provided through the synchronization manager. A processing step (not shown) to supply inventory may be further included. At this time, the function of the inventory management system of an actual store may be included.

적어도 하나 이상의 셀러들의 판매대가 모여있는 위탁 판매장의 경우, 오너의 역할은 위탁 관리인이며 실질적으로 셀러가 복수로 존재하게 되는데, 이런 경우 각 판매대에서 수집되는 데이터는 오너 및 해당 소유 셀러에게도 동시에 전달되어야 한다. 즉, 하나의 판매대를 독립적인 상점으로 취급하지만, 여러 판매대들이 하나의 상점 주소를 공유하고 있다는 점이 다르다. 이로 인하여, 판매대 - 상점 - 복합몰(백화점)과 같은 계층적 구조를 정의할 필요가 있다. 특정 판매대에 물품이 소진되면 오너 또는 셀러가 창고에 남은 재고로 판매대를 보충해야 하며, 창고에도 적정 재고가 없을 경우에는 셀러가 즉각적으로 재고를 공급할 수 있는 조치가 수행되어야 한다. 이는 통상적인 공급망 관리에 해당하는데, 기존에 이러한 시스템이 구축되어 있다면 본 발명은 이러한 시스템(재고 관리용 소프트웨어 시스템 혹은 POS)과 연동되어야 한다. 이때, 해당 판매대의 미러월드 메타버스 공간 상의 동기화 관리자는 일차적으로 각 셀러가 될 수 있고, 최종적으로는 오너가 될 수 있다. In the case of a consignment store where at least one seller's sales stand is gathered, the role of the owner is the consignment manager, and in reality, there are multiple sellers. In this case, the data collected from each sales stand must be delivered to the owner and the seller at the same time. . In other words, one sales stand is treated as an independent store, but the difference is that multiple sales stands share one store address. Because of this, it is necessary to define a hierarchical structure such as sales counter - store - complex mall (department store). When a specific sales stand runs out of goods, the owner or seller must replenish the sales stand with inventory remaining in the warehouse, and if there is no adequate inventory in the warehouse, measures must be taken to enable the seller to immediately supply inventory. This corresponds to typical supply chain management, and if such a system is already built, the present invention must be linked to such a system (inventory management software system or POS). At this time, the synchronization manager in the mirror world metaverse space of the relevant store can initially be each seller, and ultimately can be the owner.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 미러월드 메타버스 공간 내에서 판매가 일어나면, 실제 상점의 재고 관리 시스템이나 ERP 시스템 혹은 전자상거래 배송 시스템 등에 의해 배송이 이루어지도록 처리하며, 기존 상품 재고 시스템이 구비되지 않았을 경우에는 미러 상점을 통해 처리될 수 있다. 이에 따라서, 본 발명은 미러 상점에서 실제 상점으로 역방향 동기화의 데이터 플로우를 제시할 수 있다. In addition, the method of implementing object placement synchronization according to an embodiment of the present invention processes delivery so that when a sale occurs within the Mirror World metaverse space, delivery is made by the actual store's inventory management system, ERP system, or e-commerce delivery system, etc. If a product inventory system is not in place, it can be processed through a mirror store. Accordingly, the present invention can propose a data flow of reverse synchronization from the mirror store to the actual store.

또한, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 미러월드 메타버스 공간 내 미러 상점에 미러 상품을 판매하는 직원 캐릭터를 생성하는 단계(미도시)를 더 포함할 수 있다. 상기 생성하는 단계는 미러 상품의 판매 기한에 따른 재고량에 따라 직원 캐릭터를 통해 미러 상품에 관한 판매 프로모션 이벤트를 제공할 수 있다. 예를 들면, 식료품 또는 공산품의 경우 유통기한이 다가오거나 잘 안팔리는 상품 혹은 너무 잘 팔려서 남은 상품을 처분하고자 할 때, 각각 상품의 가치가 다를 수밖에 없다. 이에, 본 발명은 미러월드 메타버스 공간 내 미러 상점에 직원 캐릭터를 생성하여 직원 캐릭터를 통해 가치가 떨어지는 미러 상품에 대한 타임세일, 폭탄세일, 땡처리 등과 같은 판매 프로모션 이벤트를 제공할 수 있다. 여기서, 상기 판매 프로모션 이벤트는 실제 상점에서 진행되는 이벤트와는 독립적으로 진행되며, 상점 내 재고 관리 시스템과는 동기화되어야 한다. 또한, 상기 직원 캐릭터는 실제 상점의 직원과는 독립적으로 소프트웨어에 의해 생성된 순수 가공의 존재일 수 있다. In addition, the method of implementing object arrangement synchronization according to an embodiment of the present invention may further include the step (not shown) of creating an employee character who sells mirror products at a mirror store in the mirror world metaverse space. In the above generating step, a sales promotion event for the mirror product may be provided through an employee character according to the inventory amount according to the sales deadline of the mirror product. For example, in the case of food or industrial products, the value of each product is bound to be different when the expiration date is approaching, products that are not selling well, or products that are selling too well need to be disposed of. Accordingly, the present invention creates an employee character in a mirror store within the mirror world metaverse space, and can provide sales promotion events such as time sale, bomb sale, and drop-off for mirror products of low value through the employee character. Here, the sales promotion event is carried out independently from the event held in the actual store, and must be synchronized with the in-store inventory management system. Additionally, the employee character may be a purely fictitious entity created by software independently of the actual store employee.

본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 거울세계 기반 메타버스 공간에서의 상세한 미러 상품 배치를 실제 상품 진열 상태와 동기화하여 반영하기 위한 것으로, 동기화는 수동이 아니라 자동으로 반영될 수 있다. 이때, 본 발명은 단계 S210을 통해 센서 기기를 통한 동기화를 수행하고, 사물인터넷(IoT)을 통해 데이터 업데이트를 통한 자동 동기화를 수행하며, 단계 S220을 통해 서버 측 소프트웨어를 통한 자동 동기화를 수행하고, 단계 S230을 통해 미러 상품 구현에 따른 오류 보정을 위한 피드백을 수행하는 것을 특징으로 한다. The method of implementing object arrangement synchronization according to an embodiment of the present invention is to synchronize and reflect the detailed mirror product arrangement in the mirror world-based metaverse space with the actual product display state, and synchronization can be reflected automatically rather than manually. . At this time, the present invention performs synchronization through a sensor device through step S210, automatic synchronization through data update through the Internet of Things (IoT), and automatic synchronization through server-side software through step S220. It is characterized by performing feedback for error correction according to the implementation of the mirror product through step S230.

동기화 작업은 수작업이 아니라 센서 기기, 사물인터넷(IoT), 그리고 서버(400)에서 수행되는 소프트웨어에 의해 자동으로 이루어진다. 이때, 실제 상점의 오너(또는 점주)는 직접 메타버스 서비스를 통해 미러 상점을 확인할 수 있다. The synchronization task is not performed manually but automatically by sensor devices, the Internet of Things (IoT), and software performed on the server 400. At this time, the owner (or store owner) of the actual store can check the mirror store directly through the Metaverse service.

도 3은 본 발명의 실시예에 따른 사물배치 동기화 구현 방법의 동작 흐름도를 도시한 것이다.Figure 3 shows an operation flowchart of a method for implementing object placement synchronization according to an embodiment of the present invention.

단계 S310에서, 사물인터넷에 연결되는 센서 기기를 등록한다. 사물인터넷으로 연결되는 RFID, NFC, CCTV 및 카메라의 센서 기기는 실제 상점의 판매대에 설치되며, 단계 S310은 적어도 하나 이상의 센서 기기의 특정 위치에 따라 등록할 수 있다. In step S310, a sensor device connected to the Internet of Things is registered. Sensor devices such as RFID, NFC, CCTV, and cameras connected to the Internet of Things are installed at the sales counter of an actual store, and step S310 can register at least one sensor device according to the specific location.

단계 S320 및 단계 S330에서, 센서 기기를 통해 실제 상점에 배치된 실제 상품의 개수 정보 및 위치 정보를 포함하는 실상품 정보를 수신한다. 또한, 단계 S320 및 단계 S330은 진열 위치 및 개수 뿐만이 아니라 재고량 및 상품 종류에 관련된 정보를 수신할 수도 있다. 이때, 본 발명은 블루투스, 와이파이, 5G, LoRa, ANT의 무선 인터넷 통신 연결 수단을 통해 사물인터넷에 연결된 센서 기기로부터 데이터를 수신할 수 있다. In steps S320 and S330, actual product information including number information and location information of actual products placed in an actual store is received through a sensor device. Additionally, steps S320 and S330 may receive information related to inventory amount and product type as well as display location and number. At this time, the present invention can receive data from sensor devices connected to the Internet of Things through wireless Internet communication means such as Bluetooth, Wi-Fi, 5G, LoRa, and ANT.

이후에 본 발명의 실시예에 따른 사물배치 동기화 구현 방법은 실상품 정보를 기반으로 운용하며, 메타버스 공간에서의 시각화를 위한 데이터 동기화하며, 동기화를 위해 실상품 정보를 위치 분석 및 데이터 해석한다(단계 S340, 단계 S350 및 단계 S360). 본 발명의 실시예에 따른 동기화 구현 방법은 데이터 분석 및 메타버스 공간 비주얼라이제이션을 위한 렌더링 소프트웨어를 통해 실상품 정보를 시각화를 위한 렌더링을 통해 실제 상점의 판매대에 진열 및 배치된 실제 상품과 동일하도록 메타버스 공간에 반영하여 데이터 동기화 작업을 자동으로 수행할 수 있다. 이때, 단계 S350은 일차적으로 생성된 실제 상품의 실상품 정보에 대한 렌더링 결과와 CCTV를 통해 획득된 영상 데이터를 매칭하여 메타버스 공간에 반영되는 미러 상품의 오류를 보정하거나, 미러 상품을 더욱 사실적으로 표현할 수 있다. Afterwards, the method of implementing object placement synchronization according to an embodiment of the present invention operates based on actual product information, synchronizes data for visualization in the metaverse space, and analyzes and analyzes the location of actual product information for synchronization ( Step S340, Step S350 and Step S360). The method of implementing synchronization according to an embodiment of the present invention is to render the metaverse so that it is identical to the actual product displayed and placed on the sales shelf of an actual store through rendering for visualization of actual product information through rendering software for data analysis and metaverse space visualization. Data synchronization can be performed automatically by reflecting it in the space. At this time, step S350 matches the rendering result of the actual product information of the primarily generated actual product with the image data acquired through CCTV to correct errors in the mirror product reflected in the metaverse space or to make the mirror product more realistic. It can be expressed.

단계 S370에서, 미러 상점에서 사용자의 미러 상품 구매에 따른 결제 서비스를 제공한다. 일례로, 미러월드 메타버스 공간 내 구현된 미러 상점에서 사용자(또는 유저)가 진열 및 배치된 미러 상품을 구매하고자 하는 경우, 단계 S370은 실제 상점의 재고 관리용 소프트웨어 시스템 혹은 POS(Point Of Sales)와 연동하여 개별적인 결제 서비스를 제공할 수 있다. In step S370, the mirror store provides a payment service according to the user's purchase of the mirror product. For example, if a user (or users) wants to purchase mirror products displayed and arranged in a mirror store implemented in the mirror world metaverse space, step S370 is a software system for inventory management of the actual store or POS (Point Of Sales). Individual payment services can be provided in conjunction with .

도 4는 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템에 대한 구성을 도시한 것으로, 미러월드 메타버스 공간 내 사물배치 동기화 구현 방법을 수행하는 서버 또는 시스템에 대한 개념적인 구성을 나타낸 것이다.Figure 4 shows the configuration of a system for implementing object placement synchronization according to an embodiment of the present invention, and shows the conceptual configuration of a server or system that performs a method for implementing object placement synchronization in the mirror world metaverse space.

도 4를 참조하면, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템(400)은 실상품 정보 수신부(410), 데이터 동기화부(420), 미러상품 구현부(430), 제어부(440) 및 DB(450)를 포함한다.Referring to FIG. 4, the object arrangement synchronization implementation system 400 according to an embodiment of the present invention includes an actual product information reception unit 410, a data synchronization unit 420, a mirror product implementation unit 430, and a control unit 440. and DB 450.

DB(DataBase; 데이터베이스, 450)는 본 발명과 관련된 정보를 저장하는 수단으로, 서비스 운영자와 계약이 체결된 오너 또는 건물주에 대한 정보 및 계약 정보와 메타버스화하기 위한 실제 상점의 구조 및 인테리어, 그리고 실제 상품을 메타버스화하기 위한 데이터를 저장할 수 있다. 물론, DB(450)는 상술한 데이터로 한정되지 않으며, 본 발명의 모든 데이터를 저장할 수 있다. DB (DataBase; Database, 450) is a means of storing information related to the present invention, including information about the owner or building owner who has entered into a contract with the service operator, contract information, the structure and interior of the actual store for metaverse, and You can store data to metaverse actual products. Of course, the DB 450 is not limited to the above-described data and can store all data of the present invention.

실상품 정보 수신부(410)는 실제 상점에 위치하는 사물인터넷(IoT)을 통해 실제 상점에 배치된 실제 상품의 실상품 정보를 수신한다. The actual product information receiving unit 410 receives actual product information of actual products placed in the actual store through the Internet of Things (IoT) located in the actual store.

실상품 정보 수신부(410)는 실제 상점에 사물인터넷에 연결되는 RFID, NFC, CCTV 및 카메라의 센서 기기를 통해 수집되는 이미지 데이터, 태그 정보, 스캐너 정보 및 센싱 정보를 기반으로 하여 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 실상품 정보를 수신할 수 있다. The actual product information receiver 410 displays the actual product display location based on image data, tag information, scanner information, and sensing information collected through sensor devices such as RFID, NFC, CCTV, and cameras connected to the Internet of Things in actual stores. , you can receive actual product information about the number of displays, inventory amount, and product type.

본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템(400)은 현실 맵(reality map)을 기반으로 한 영상 렌더링을 통해 현실 맵 상에 기 설정된 범위의 메타버스 공간을 구현하고, 구현된 메타버스 공간에 실제 상점의 위치 및 구조와 동일하게 미러 상점을 구현할 수 있다. 나아가, 본 발명은 미러 상점 내부에 진열되는 미러 상품 또한 실제 상점에 진열 및 배치된 실제 상품과 동일화하기 위해 실상품 정보 수신부(410)를 통해 실제 상점으로부터 실상품 정보를 수신한다. 이때, 실제 상점 내부의 벽면 또는 판매대 부근에는 적어도 하나 이상의 RFID, NFC, CCTV 및 카메라의 센서 기기는 실제 상품에 관련된 정보를 획득할 수 있도록 위치하며, 실상품 정보 수신부(410)는 센서 기기로부터 진열 및 배치된 실제 상품의 진열 위치, 진열 개수, 재고량 및 상품 종류의 실상품 정보를 수신할 수 있다. The object arrangement synchronization implementation system 400 according to an embodiment of the present invention implements a metaverse space of a preset range on the reality map through image rendering based on a reality map, and implements the implemented metaverse A mirror store can be implemented in space identical to the location and structure of an actual store. Furthermore, the present invention receives actual product information from the actual store through the actual product information receiver 410 in order to make the mirror products displayed inside the mirror store identical to the actual products displayed and placed in the actual store. At this time, at least one sensor device of RFID, NFC, CCTV, and camera is located on the wall or near the sales counter inside the actual store to obtain information related to the actual product, and the actual product information receiver 410 receives information from the sensor device. You can receive actual product information about the display location, display number, inventory amount, and product type of the actual placed product.

실시예에 따라서, 상품 개수 센싱이 불가능한 센서 기기의 경우에는, 실상품 정보 수신부(410)는 해당 센서 기기와 연관된 판매대 위 재고가 없는 상태인 것은 판단할 수 있다. 또한, 삼각측량 등을 통해 실제 상품의 정확한 실내 위치를 파악하는 것이 불가능한 경우에는 특정 위치에 고정된 센서 기기를 추가 설치할 수도 있다. 이에, 실상품 정보 수신부(410)는 센서 기기 각각이 고정된 특정 위치에서 수집되는 상품의 개수 정보 혹은 재고 없음 정보를 수신하게 된다. Depending on the embodiment, in the case of a sensor device that cannot sense the number of products, the actual product information receiver 410 may determine that there is no inventory on the sales shelf associated with the sensor device. Additionally, if it is impossible to determine the exact indoor location of the actual product through triangulation, etc., an additional sensor device fixed to a specific location may be installed. Accordingly, the actual product information receiving unit 410 receives information on the number of products or out-of-stock information collected from a specific location where each sensor device is fixed.

이때, 실상품 정보 수신부(410)는 실상품 정보를 수신하는 업데이트 주기는 오너 또는 운영자에 의해 조정이 가능하나, 정해진 시간 간격마다 업데이트가 이루어지는 타임 드라이븐(Time-driven) 방식이 아니라, 이벤트에 따른 이벤트 드라이븐(Event-driven) 방식으로 실시간 업데이트도 가능하다. 즉, 본 발명은 주기적 업데이트가 아니라 비주기적으로 이벤트가 발생할 때마다 실시간으로 업데이트하는 것이 가능하다. 이때, 이벤트란, 실제 상점에 진열 및 배치된 실제 상품의 움직임을 감지할 때를 나타낼 수 있다. At this time, the update cycle for receiving actual product information can be adjusted by the owner or operator, but the actual product information receiving unit 410 is not a time-driven method in which updates are made at fixed time intervals, but rather according to an event. Real-time updates are also possible using an event-driven method. In other words, the present invention is capable of updating in real time whenever an event occurs aperiodically rather than periodically. At this time, an event may represent a time when the movement of an actual product displayed and placed in an actual store is detected.

데이터 동기화부(420)는 실상품 정보를 기반으로 상품의 위치 분석 및 데이터 해석을 통해 메타버스 공간에서의 시각화를 위한 데이터 동기화한다. The data synchronization unit 420 synchronizes data for visualization in the metaverse space through product location analysis and data interpretation based on actual product information.

데이터 동기화부(420)는 메타버스 공간 시각화 렌더링 소프트웨어를 통해 메타버스 공간에서의 시각화를 위해 필요한 실상품 정보를 자동 동기화할 수 있다. 데이터 동기화부(420)는 데이터 분석 및 메타버스 공간 시각화(비주얼라이제이션)를 위한 렌더링 소프트웨어를 통해 실상품 정보 수신부(410)에서의 실상품 정보를 기반으로 실제 상점의 판매대에 진열 및 배치된 실제 상품과 동일하도록 데이터 동기화 작업을 자동으로 수행할 수 있다. 이때, 데이터 동기화부(420)는 실제 상점에서 사물인터넷에 연결되는 센서 기기를 통해 비주기적으로 발생된 이벤트(event-driven)에 따라 실상품 정보에 대한 데이터를 동기화할 수 있다.The data synchronization unit 420 can automatically synchronize actual product information required for visualization in the metaverse space through metaverse space visualization rendering software. The data synchronization unit 420 uses rendering software for data analysis and metaverse space visualization (visualization) to synchronize the actual products displayed and placed on the sales counter of the actual store based on the actual product information from the actual product information receiving unit 410. Data synchronization can be performed automatically to ensure the same. At this time, the data synchronization unit 420 can synchronize data on actual product information according to an event (event-driven) generated aperiodically through a sensor device connected to the Internet of Things in an actual store.

일례로, 데이터 동기화부(420)는 적어도 하나 이상의 실제 상점에 대한 동기화를 조직적으로 관리할 수 있으며, 적어도 하나 이상의 실제 상품에 진열 및 배치된 실제 상품에 대한 데이터 동기화를 동시에 수행할 수 있다. For example, the data synchronization unit 420 may systematically manage synchronization for at least one or more physical stores and simultaneously perform data synchronization for actual products displayed and placed in at least one or more actual products.

다른 예로, 데이터 동기화부(420)는 동기화 관리자에 의해 데이터 동기화를 수행할 수 있다. 본 발명의 일 실시예에 따른 사물배치 동기화 구현 방법은 자동으로 데이터 동기화를 수행하나, 오류가 있거나 불가피한 경우, 동기화가 수동으로 이루어질 수 있으며, 이는 동기화 관리자에 의해 수행될 수도 있다. 이에, 동기화 관리자는 실제 상점에서의 실제 상품의 업데이트에 따라 데이터 동기화를 수동으로 처리할 수 있으며, 적어도 하나 이상의 실제 상점들을 그룹화하여 동시에 동기화를 수동으로 처리할 수도 있다. As another example, the data synchronization unit 420 may perform data synchronization by a synchronization manager. The object arrangement synchronization implementation method according to an embodiment of the present invention automatically performs data synchronization, but if an error occurs or is unavoidable, synchronization may be performed manually, and this may be performed by a synchronization manager. Accordingly, the synchronization manager can manually process data synchronization according to updates of actual products in actual stores, and can also manually process synchronization at the same time by grouping at least one or more actual stores.

미러상품 구현부(430)는 데이터 동기화에 따라, 미러월드 메타버스 공간에서 실제 상점과 동일한 미러 상점에 실제 상품이 메타버스화된 미러 상품을 구현한다.According to data synchronization, the mirror product implementation unit 430 implements a mirror product in which the actual product has been converted into a metaverse in the same mirror store as the actual store in the mirror world metaverse space.

미러상품 구현부(430)는 데이터 동기화 결과를 반영하여 일차적으로 생성된 렌더링 결과와 센서 기기 내 CCTV를 통해 획득된 영상 데이터를 매칭하여 오류를 보정하거나, 보다 사실적으로 실제 상품을 메타버스화 표현할 수 있다. 미러상품 구현부(430)는 동기화 결과를 반영하여 일차적으로 생성된 실제 상품의 실상품 정보에 대한 렌더링 결과와 CCTV를 통해 획득된 영상 데이터를 매칭하여 오류를 보정하거나, 미러 상품을 더욱 사실적으로 표현할 수 있다. 이때, 미러상품 구현부(430)는 인공지능, 딥러닝, 영상 인식 기술을 적용하여 동기화 결과에 따른 오류 보정이나 합성을 처리할 수 있다. The mirror product implementation unit 430 reflects the data synchronization result and matches the primary generated rendering result with the image data acquired through the CCTV in the sensor device to correct errors or to express the actual product in a metaverse more realistically. there is. The mirror product implementation unit 430 matches the rendering result of the actual product information of the actual product, which is primarily generated by reflecting the synchronization result, with the image data acquired through CCTV to correct errors or express the mirror product more realistically. You can. At this time, the mirror product implementation unit 430 can process error correction or synthesis according to the synchronization result by applying artificial intelligence, deep learning, and image recognition technology.

제어부(440)는 상품 재고로 미러 상점의 판매대를 보충하며, 창고에 적정 재고가 없는 경우, 동기화 관리자에 의해 미러 상품에 대한 재고를 공급하도록 처리할 수 있다.The control unit 440 replenishes the sales counter of the mirror store with product inventory, and when there is no appropriate inventory in the warehouse, the synchronization manager can process the supply of inventory for the mirror product.

제어부(440)는 미러월드 메타버스 공간 내 미러 상점에 미러 상품을 판매하는 직원 캐릭터를 생성할 수 있다. 제어부(440)는 미러 상품의 판매 기한에 따른 재고량에 따라 직원 캐릭터를 통해 미러 상품에 관한 판매 프로모션 이벤트를 제공할 수 있다. 예를 들면, 식료품 또는 공산품의 경우 유통기한이 다가오거나 잘 안팔리는 상품 혹은 너무 잘 팔려서 남은 상품을 처분하고자 할 때, 각각 상품의 가치가 다를 수밖에 없다. 이에, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템(400)은 미러월드 메타버스 공간 내 미러 상점에 직원 캐릭터를 생성하여 직원 캐릭터를 통해 가치가 떨어지는 미러 상품에 대한 타임세일, 폭탄세일, 땡처리 등과 같은 판매 프로모션 이벤트를 제공할 수 있다. 여기서, 상기 판매 프로모션 이벤트는 실제 상점에서 진행되는 이벤트와는 독립적으로 진행되며, 상점 내 재고 관리 시스템과는 동기화되어야 한다. 또한, 상기 직원 캐릭터는 실제 상점의 직원과는 독립적으로 소프트웨어에 의해 생성된 순수 가공의 존재일 수 있다.The control unit 440 can create an employee character who sells mirror products at a mirror store within the mirror world metaverse space. The control unit 440 may provide a sales promotion event for the mirror product through an employee character according to the inventory amount according to the sales deadline of the mirror product. For example, in the case of food or industrial products, the value of each product is bound to be different when the expiration date is approaching, products that are not selling well, or products that are selling too well need to be disposed of. Accordingly, the object arrangement synchronization implementation system 400 according to an embodiment of the present invention creates an employee character in a mirror store within the mirror world metaverse space and offers time sales, bomb sales, and sales for mirror products of low value through the employee character. Sales promotion events such as drop-offs can be provided. Here, the sales promotion event is carried out independently from the event held in the actual store, and must be synchronized with the in-store inventory management system. Additionally, the employee character may be a purely fictitious entity created by software independently of the actual store employee.

제어부(440)는 미러월드 메타버스 공간 내에서 판매가 일어나면, 실제 상점의 재고 관리 시스템이나 ERP 시스템 혹은 전자상거래 배송 시스템 등에 의해 배송이 이루어지도록 처리하며, 기존 상품 재고 시스템이 구비되지 않았을 경우에는 미러 상점을 통한 관리자 및 캐릭터 간의 처리 방식으로 처리할 수 있다. 이에 따라서, 본 발명의 일 실시예에 따른 사물배치 동기화 구현 시스템(400)은 미러 상점에서 실제 상점으로 역방향 동기화의 데이터 플로우를 제시할 수 있다. When a sale occurs within the Mirror World metaverse space, the control unit 440 processes delivery through the actual store's inventory management system, ERP system, or e-commerce delivery system. If an existing product inventory system is not in place, the mirror store It can be handled through processing between the manager and the character. Accordingly, the object placement synchronization implementation system 400 according to an embodiment of the present invention can present a data flow of reverse synchronization from the mirror store to the actual store.

비록, 도 4의 시스템에서 그 설명이 생략되었더라도, 도 4를 구성하는 각 구성 수단은 도 1 내지 도 3에서 설명한 모든 내용을 포함할 수 있으며, 이는 이 기술 분야에 종사하는 당업자에게 있어서 자명하다.Even if the description is omitted in the system of FIG. 4, each component constituting FIG. 4 may include all of the content described in FIGS. 1 to 3, which is obvious to those skilled in the art.

이상에서 설명된 시스템 또는 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(Field Programmable Gate Array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The system or device described above may be implemented with hardware components, software components, and/or a combination of hardware components and software components. For example, devices and components described in embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, and a field programmable gate array (FPGA). , may be implemented using one or more general-purpose or special-purpose computers, such as a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. Additionally, a processing device may access, store, manipulate, process, and generate data in response to the execution of software. For ease of understanding, a single processing device may be described as being used; however, those skilled in the art will understand that a processing device includes multiple processing elements and/or multiple types of processing elements. It can be seen that it may include. For example, a processing device may include a plurality of processors or one processor and one controller. Additionally, other processing configurations, such as parallel processors, are possible.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.Software may include a computer program, code, instructions, or a combination of one or more of these, which may configure a processing unit to operate as desired, or may be processed independently or collectively. You can command the device. Software and/or data may be used on any type of machine, component, physical device, virtual equipment, computer storage medium or device to be interpreted by or to provide instructions or data to a processing device. , or may be permanently or temporarily embodied in a transmitted signal wave. Software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored on one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc., singly or in combination. Program instructions recorded on the medium may be specially designed and configured for the embodiment or may be known and available to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -Includes optical media (magneto-optical media) and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, etc. Examples of program instructions include machine language code, such as that produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter, etc. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with limited examples and drawings, various modifications and variations can be made by those skilled in the art from the above description. For example, the described techniques are performed in a different order than the described method, and/or components of the described system, structure, device, circuit, etc. are combined or combined in a different form than the described method, or other components are used. Alternatively, appropriate results may be achieved even if substituted or substituted by an equivalent.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents of the claims also fall within the scope of the claims described below.

Claims

In a method of implementing object placement synchronization that synchronizes the arrangement of objects in the mirror world metaverse space and the arrangement of objects in the actual space,
Receiving actual product information of actual products placed in the actual store through the Internet of Things (IoT) located in the actual store;
Updating and synchronizing data necessary for visualization in the metaverse space through product location analysis and data interpretation based on the actual product information; and
According to data synchronization, implementing visualization of the mirror product in which the actual product has been metaversed in the same mirror store as the actual store in the mirror world metaverse space
Method of implementing object placement synchronization including.