WO2023136380A1 - System for constructing metaverse utilizing object, and operating method for system - Google Patents

System for constructing metaverse utilizing object, and operating method for system Download PDF

Info

Publication number
WO2023136380A1
WO2023136380A1 PCT/KR2022/000784 KR2022000784W WO2023136380A1 WO 2023136380 A1 WO2023136380 A1 WO 2023136380A1 KR 2022000784 W KR2022000784 W KR 2022000784W WO 2023136380 A1 WO2023136380 A1 WO 2023136380A1
Authority
WO
WIPO (PCT)
Prior art keywords
virtual
information
user terminal
server
user
Prior art date
Application number
PCT/KR2022/000784
Other languages
French (fr)
Korean (ko)
Inventor
고태규
Original Assignee
고태규
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고태규 filed Critical 고태규
Priority to KR1020227004896A priority Critical patent/KR20230111583A/en
Priority to PCT/KR2022/000784 priority patent/WO2023136380A1/en
Publication of WO2023136380A1 publication Critical patent/WO2023136380A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0645Rental transactions; Leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts

Definitions

  • the present disclosure relates to a system implementing a metaverse using objects and a method of operating the system. More specifically, the metaverse system is a system that helps the metaverse to be widely used by simply implementing the metaverse.
  • Rendering is a computer graphics technology used in games, etc., which expresses the real or virtual world. It refers to the process of creating an image from a model using a computer program. This model is a data structure or a strongly defined language. A description of the constructed 3D object.
  • the metaverse system includes a user terminal, an administrator terminal, and a server, and implements a metaverse by utilizing objects.
  • Acquiring log information including a virtual object displayed on the display of the virtual object
  • Acquiring the properties of the virtual object of the operating method of the metaverse system includes acquiring a source image including a real object using an image acquisition device by a manager terminal, and the source image by the manager terminal. Acquiring the properties of the real object from the server, receiving the source video and the real object properties from the manager terminal, the server storing the source video together with the real object properties, and the server storing the source video and real object properties. and acquiring a property of the virtual object based on at least one of the properties of the virtual object.
  • Acquiring information about a virtual person by a user terminal of the operating method of the metaverse system includes the steps of the user terminal acquiring authentication information by scanning a tag attached to an item owned by the user; The user terminal transmits the authentication information, the user's identification information, and the identification information of the user terminal to the server; Corresponds to the virtual item and if it is determined that it is legitimate, the server storing the identification information of the virtual item and the identification information of the user terminal in the user item list corresponding to the user identification information, and the server storing the user item list as the user terminal.
  • the step of transmitting the virtual person, the virtual space, and the virtual object on the display includes the step of displaying the virtual person, the virtual space, and the virtual object on the display, wherein the user terminal uses at least one item from among at least one item included in the user item list based on the user's selection to display the virtual person. It includes the step of obtaining information about.
  • the server requests authentication information obtained by scanning the tag to the user terminal at a predetermined cycle, and in response to the server's request, the user terminal scans the tag Step of outputting information indicating that authentication information needs to be acquired, step of re-receiving, by the server, the authentication information obtained by rescanning the tag, the identification information of the user, and the identification information of the user terminal from the user terminal, the re-received authentication information corresponds to a virtual item, is legitimate, and includes the identification information of the virtual item and the identification information of the re-received user terminal in the user item list corresponding to the re-received user identification code, the server determines the virtual item in the user item list. Maintaining the identification information of the user terminal and the identification information of the user terminal, and if the re-received authentication information does not correspond to the virtual item or is not valid, the server deletes the identification information of the virtual item from the user item list
  • the server when the server does not receive the re-received authentication information, the re-received user identification information, and the re-received user terminal identification information within a predetermined period, the user The method further includes deleting identification information of the virtual item and identification information of the user terminal from the item list.
  • a method of operating the metaverse system includes acquiring authentication information by scanning a tag attached to the item by a purchaser terminal of a purchaser who has purchased an item from a user, and obtaining authentication information by the purchaser terminal, identification of the purchaser by the purchaser terminal.
  • Information and identification information of the purchaser terminal are transmitted to the server, the authentication information corresponds to a pre-stored virtual item and the server determines whether or not it is valid, the authentication information corresponds to the virtual item and is determined to be valid
  • the server deletes the identification information of the virtual item from the user item list, the server stores the identification information of the virtual item and the identification information of the purchaser terminal in the purchaser item list corresponding to the purchaser's identification code, and the server stores the purchaser's terminal identification information.
  • the step of displaying a virtual character, a virtual space, and a virtual object on the display of the operating method of the metaverse system is based on the location information of the space included in the information on the three-dimensional virtual space of the user terminal. locating the virtual space on some of the pre-stored 3D maps, the user terminal determines the direction of light and the intensity of light in the virtual space based on the time information of the virtual space included in the information on the 3D virtual space. determining the intensity, and arranging, by a user terminal, at least one virtual object in the virtual space based on attributes of the virtual object included in information about the 3-dimensional virtual space, wherein the position information of the space is 3 It is dimensional location information.
  • Obtaining log information of the operating method of the metaverse system includes obtaining a resolution of a display of a user terminal, setting a predetermined partial area of the display as an area of interest based on the resolution of the display. and including, in log information, virtual object information of interest including identification information of a virtual object displayed within a region of interest for a predetermined threshold time or longer.
  • the metaverse system of the present disclosure includes a user terminal, an administrator terminal, and a server, and implements a metaverse of hyperreality. Transmitting information on the 3D virtual space including object attributes to the user terminal, obtaining information on the virtual character by the user terminal, and obtaining the information on the 3D virtual space and the virtual character by the user terminal. displaying at least one of a virtual person, a virtual space, and a virtual object on a display based on information about the virtual character, and controlling the user terminal to move the virtual character in the virtual space and interact with the virtual object based on the user's input.
  • the user terminal includes the location of the virtual character in the virtual space, the time the virtual character stayed at the location in the virtual space, the virtual object displayed on the display of the user terminal at the location of the virtual character, and the history of interaction with the virtual object. Acquiring log information, and transmitting, by the user terminal, the log information together with identification information of the user terminal to the server.
  • Acquiring information about a virtual person by a user terminal of the operating method of the metaverse system includes the steps of the user terminal acquiring authentication information by scanning a tag attached to an item owned by the user; The user terminal transmits the authentication information, the user's identification information, and the identification information of the user terminal to the server; Corresponds to the virtual item and if it is determined that it is legitimate, the server storing the identification information of the virtual item and the identification information of the user terminal in the user item list corresponding to the user identification information, and the server storing the user item list as the user terminal.
  • the user terminal uses at least one of at least one item included in the user item list based on the user's selection to display the virtual person. It includes the step of obtaining information about.
  • a method of operating the metaverse system includes the steps of a server requesting authentication information obtained by scanning a tag to a user terminal at a predetermined cycle, and in response to a request from the server, the user terminal scans the tag Step of outputting information indicating that authentication information needs to be acquired, step of re-receiving, by the server, the authentication information obtained by rescanning the tag, the identification information of the user, and the identification information of the user terminal from the user terminal, the re-received authentication information corresponds to a virtual item, is legitimate, and includes the identification information of the virtual item and the identification information of the re-received user terminal in the user item list corresponding to the re-received user identification code, the server determines the virtual item in the user item list. Maintaining the identification information of the user terminal and the identification information of the user terminal, and if the re-received authentication information does not correspond to the virtual item or is not valid, the server deletes the identification information of the
  • the step of displaying a virtual character, a virtual space, and a virtual object on the display of the operating method of the metaverse system is based on the location information of the space included in the information on the three-dimensional virtual space of the user terminal. locating the virtual space on some of the pre-stored 3D maps, the user terminal determines the direction of light and the intensity of light in the virtual space based on the time information of the virtual space included in the information on the 3D virtual space. determining the intensity, and arranging, by a user terminal, at least one virtual object in the virtual space based on the attribute of the virtual object included in the information about the 3-dimensional virtual space, wherein the position information of the space is 3 It is dimensional location information.
  • the step of transmitting the information on the 3D virtual space of the method of operating the metaverse system according to an embodiment of the present disclosure to the user terminal includes the identification information of the user terminal, the identification information of the user, and the virtual space by the manager terminal to the server.
  • Transmitting consent information about information, identification information of a user terminal, and identification information of a user to a server when the server receives the consent information, the identification information of the user terminal and the identification information of the user received from the manager terminal determining whether the identification information of the user terminal and the identification information of the user received from the manager terminal are identical to the identification information of the user terminal and the identification information of the user received from the manager terminal; If it is the same as the identification information, the server includes transmitting information about the 3D virtual space to the user terminal.
  • Obtaining log information of the operating method of the metaverse system includes obtaining a resolution of a display of a user terminal, setting a predetermined partial area of the display as an area of interest based on the resolution of the display. including information on the virtual object of interest, including identification information of a virtual object displayed within a region of interest for a predetermined threshold time or longer, in log information; and including virtual object information in log information.
  • the server of the operating method of the metaverse system determines information about a congestion location that a plurality of users often hear in a virtual space based on log information, and the server determines the actual congestion location corresponding to the congestion location. Determining, by the server, a virtual object frequently used by a plurality of users based on virtual object information of interest included in the log information, and determining, by the server, the frequently used virtual object and transmitting to the manager terminal.
  • a user terminal transmits a purchase signal for a purchase object included in a plurality of candidate virtual objects stored in a server, identification information of a user, and identification information of the user terminal to a server. Transmitting, the server determining whether the purchase signal is legitimate, if the purchase signal is determined to be legitimate, the server adds the identification information of the purchased object and the identification information of the user terminal to a user object list corresponding to the user's identification information.
  • the step of displaying includes displaying the activated purchase object.
  • a program for implementing the method of operating the metaverse system as described above may be recorded on a computer-readable recording medium.
  • FIG. 1 is a block diagram of a metaverse system according to an embodiment of the present disclosure.
  • Figure 2 is a diagram for explaining the hardware of the metaverse system according to an embodiment of the present disclosure.
  • FIG. 3 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 4 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 5 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 6 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 7 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 8 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 9 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
  • FIG 10 shows a screen displayed on the user terminal 130 according to an embodiment of the present disclosure.
  • FIG. 11 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
  • unit used in the specification means a software or hardware component, and “unit” performs certain roles. However, “unit” is not meant to be limited to software or hardware. A “unit” may be configured to reside in an addressable storage medium and may be configured to reproduce on one or more processors. Thus, as an example, “unit” can refer to components such as software components, object-oriented software components, class components and task components, processes, functions, properties, procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables. Functionality provided within components and “parts” may be combined into fewer components and “parts” or further separated into additional components and “parts”.
  • unit may be implemented as a processor and a memory.
  • processor should be interpreted broadly to include general-purpose processors, central processing units (CPUs), microprocessors, digital signal processors (DSPs), controllers, microcontrollers, state machines, and the like.
  • processor may refer to an application specific integrated circuit (ASIC), programmable logic device (PLD), field programmable gate array (FPGA), or the like.
  • ASIC application specific integrated circuit
  • PLD programmable logic device
  • FPGA field programmable gate array
  • processor refers to a combination of processing devices, such as, for example, a combination of a DSP and a microprocessor, a combination of a plurality of microprocessors, a combination of one or more microprocessors in conjunction with a DSP core, or any other such configuration. may also refer to
  • memory should be interpreted broadly to include any electronic component capable of storing electronic information.
  • the term memory includes random access memory (RAM), read-only memory (ROM), non-volatile random access memory (NVRAM), programmable read-only memory (PROM), erasable-programmable read-only memory (EPROM), electrical may refer to various types of processor-readable media, such as erasable PROM (EEPROM), flash memory, magnetic or optical data storage, registers, and the like.
  • RAM random access memory
  • ROM read-only memory
  • NVRAM non-volatile random access memory
  • PROM programmable read-only memory
  • EPROM erasable-programmable read-only memory
  • electrical may refer to various types of processor-readable media, such as erasable PROM (EEPROM), flash memory, magnetic or optical data storage, registers, and the like.
  • a memory is said to be in electronic communication with the processor if the processor can read information from and/or write information to the memory.
  • Memory integrated with the processor is in electronic communication with the
  • FIG. 1 is a block diagram of a metaverse system according to an embodiment of the present disclosure.
  • the metaverse system 100 may include a server 110 , an administrator terminal 120 , and a user terminal 130 .
  • the server 110 is a device in which the metaverse is implemented. That is, the server 110 is a device in which a virtual space is rendered.
  • the server 110 may be connected to the manager terminal 120 and the user terminal 130 by wire or wireless.
  • the manager terminal 120 and the user terminal 130 may transmit and receive data to each other through the server 110 .
  • the metaverse system 100 may implement a metaverse by utilizing a predetermined object.
  • the predetermined object may be created in the server 110 based on data received from the user terminal 130 or the manager terminal 120 .
  • the object may refer to various objects constituting the virtual space.
  • the virtual space is a three-dimensional space, and the virtual space can be filled with objects such as walls, furniture, and street trees. Such an object may be referred to as an object.
  • the server 110 may create a virtual space based on a predetermined object and fill the virtual space using a previously stored object.
  • the server 110 may arrange a virtual person corresponding to the user terminal or the user in the virtual space.
  • the server 110 may control the virtual character to move around the virtual space and control the virtual character to interact with objects. Also, during the interaction process, the server 110 may transform objects in the virtual space.
  • Figure 2 is a diagram for explaining the hardware of the metaverse system according to an embodiment of the present disclosure.
  • the server 110, the manager terminal 120, and the user terminal 130 included in the metaverse system 100 may include a processor 210 and a memory 220.
  • the processor 210 may perform an operation based on instructions stored in the memory 220 .
  • the present invention is not limited thereto, and the server 110, the manager terminal 120, and the user terminal 130 may include only the processor 210 without including a memory.
  • the processor 210 may be configured to output a preset signal to an output line for a preset time based on an input signal.
  • Each component of the server 110, manager terminal 120, and user terminal 130 may perform a preset operation according to a signal.
  • FIG. 3 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • the manager terminal 120 may obtain attributes of the virtual space based on the manager's input.
  • the attribute of virtual space is necessary to create virtual space, and is selected from information about the type of virtual space, size information of virtual space, location information of real space corresponding to virtual space, time information of virtual space, and shape of virtual space. may contain at least one.
  • the virtual space type information may be related to the purpose of the virtual space.
  • the virtual space type information may include at least one of an exhibition hall, an art gallery, an apartment, a temple, and a church.
  • the size information of the virtual space may represent the area of the ground surface of the virtual space. Size information of the virtual space may be represented by the number of pixels (voxels). For example, the size information of the virtual space may include the number of pixels included in the horizontal side and the number of pixels included in the vertical side. In addition, the size information of the virtual space may be expressed as an area of a real space, and the unit may be a square meter or a weekday. The size information of the virtual space may include the height of the space.
  • the location information of the real space corresponding to the virtual space may include GPS coordinate information or address information of the real space.
  • the server of the metaverse system of the present disclosure may use the location information of the real space to implement the virtual space in hyper reality at a location corresponding to the real space.
  • the location information in real space may be 3D coordinate information.
  • the location information in real space may include latitude information, longitude information, and height (altitude) information.
  • location information in real space may further include height information in GPS information, which is 2D information.
  • the server 110 or the user terminal may automatically create a terrain such as a river or mountain in the virtual space, a feature such as a tree or a building, based on location information of a real space corresponding to the virtual space.
  • the server 110 or the user terminal 130 may store information on topography or features corresponding to the location information of the above real space in advance.
  • Time information of virtual space may represent virtual time.
  • the virtual time may include at least one of a date, day, hour, minute, or second.
  • the server 110 or the user terminal 130 determines the position of the sun, the position of the moon, whether street lights are turned on, whether the headlights of the car are turned on, whether lights in the virtual space and surroundings of the virtual space are turned on. can decide As such, since the virtual space and light around the virtual space are automatically controlled based on the time information of the virtual space, the user can feel the virtual space as a real space using the user terminal.
  • Time information of the virtual space may be the same as the current time. But not limited to this. Time information of the virtual space may be determined based on location information of a real space corresponding to the virtual space.
  • the server 110 may determine the time zone corresponding to the location information of the virtual space as the time information of the virtual space.
  • the server 110 may determine the time information of the virtual space differently from the actual time based on the input of the manager terminal 120 or the user terminal 130 .
  • the shape of the virtual space may be a three-dimensional polyhedral shape.
  • the shape of the virtual space may be, for example, a rectangular parallelepiped. However, it is not limited thereto, and when the type information of the virtual space is an apartment, it may have a complex polyhedral shape because it includes a plurality of rooms, a living room, and a kitchen.
  • the server 110 may perform step 311 of obtaining attributes of the virtual space including time information of the virtual space and location information of the real space from the manager terminal 120 . Since the time information of the virtual space and the location information of the real space have been previously described above, a detailed description thereof will be omitted.
  • the attributes of the virtual space may include information for the server 110 to create a skeleton of the virtual space.
  • the server 110 may perform step 321 of generating information on the 3D virtual space based on the attributes of the virtual space.
  • the server 110 may acquire shapes of a plurality of candidate virtual spaces stored in advance based on information on types of virtual spaces from a memory. Also, the server 110 may obtain a plurality of candidate virtual objects that may be disposed in the virtual space based on the type information of the virtual space.
  • the server 110 determines the shape of one virtual space among the shapes of a plurality of candidate virtual spaces based on the signal from the manager terminal 120, and determines a virtual object to be placed in the virtual space among the plurality of candidate virtual objects. can
  • the server 110 may retrieve a 3D map corresponding to location information in real space from a pre-stored 3D map.
  • the 3D map may refer to a map in which topography and features are displayed in 3D.
  • the 3D map may be provided by national organizations or local governments.
  • the 3D map may be the same as the 3D map provided by the Seoul Metropolitan Government.
  • the server 110 may determine the shape of the virtual space based on the shape of the virtual space included in the attributes of the virtual space.
  • the virtual space may have a polyhedral shape.
  • the server 110 may determine the shape of the virtual space based on the size information of the virtual space. For example, when the shape of the virtual space is determined to be a rectangular parallelepiped, the server 110 may automatically determine the shape of the virtual space based on size information of the virtual space. Size information of the virtual space may include a horizontal width, a vertical width, and a height.
  • the location information in real space may be 3D coordinate information. That is, the location in real space may include height information as well as location information on the ground.
  • the server 110 may arrange a polyhedron-shaped virtual space at a location corresponding to the location information of the real space on the 3D map.
  • the server 110 may determine the position of the sun, the position of the moon, whether a street light is turned on, whether the headlights of a car are turned on, and whether lights in the virtual space and surroundings of the virtual space are turned on based on the time information of the virtual space. . For example, when the time information of the virtual space is low, objects capable of emitting light may not light up. Also, when the time information of the virtual space is night, objects capable of emitting light may not be lit. An object capable of emitting light may be the sun, the moon, an indoor light, a street lamp, or an automobile.
  • the server 110 may arrange basic virtual objects around the virtual space without receiving a manager's input from the manager terminal 120 .
  • the basic virtual object may be arranged outside the virtual space to form an atmosphere of the virtual space and implement hyper reality. For example, it may include a tree, sun, moon, street light, tree, grass, terrain, structure (building), or car outside the virtual space.
  • the server 110 may store pre-examined data for each location in the real space.
  • the server 110 may automatically arrange basic virtual objects around the virtual space based on the location of the real space.
  • the pre-examined data may be generated by applying an object recognition program to a street view image. Based on the manager's input received from the manager terminal 120, the server 110 may modify the location, type, or number of the basic virtual object.
  • the server 110 may adjust the number of vehicles on the road based on time information of the virtual space.
  • the server 110 may receive traffic information from an external server.
  • the server 110 may receive information on traffic volume according to day of the week, road, and time.
  • the server 110 may store the traffic volume for a predetermined time.
  • the predetermined time may be 4 weeks or more and 52 weeks or less.
  • the server 110 may obtain an average traffic volume based on the traffic volume obtained for a predetermined period of time.
  • the server 110 may obtain the average traffic volume of roads around the location of the real space corresponding to the virtual space based on the time information of the virtual space.
  • the time information of the virtual space may be related to the day of the week or time.
  • the server 110 may determine the number of vehicles, which are virtual objects, corresponding to the average traffic volume of surrounding roads.
  • the server 110 may store in advance a table in which average traffic volume corresponds to the number of vehicles.
  • the server 110 may control the user terminal 130 to display as many vehicles as the determined number of vehicles on the road.
  • the user terminal 130 may generate noise based on the determined number of vehicles. That is, as the determined number of vehicles increases, noise may increase. Users can experience the level of noise in a virtual space without going to the actual space.
  • the server 110 may cause vehicles to turn on their headlights. Therefore, the user can experience light pollution based on the headlights of the vehicle displayed on the user terminal 130 or enjoy the mood of the night in the real space in advance in the virtual space.
  • the server 110 may perform step 322 of acquiring properties of the virtual object.
  • the virtual object may refer to a virtual object disposed inside or outside the virtual space.
  • the attribute of the virtual object may include at least one of object identification information, type, texture, color, shape, size, and location.
  • Types of virtual objects may include backgrounds (trees, grass, flower beds, artifacts), buildings (walls, stairs, windows, doors), furniture, cars, and the like.
  • Virtual objects may include basic virtual objects.
  • Each virtual object may include identification information.
  • the server 110, the manager terminal 120, and the user terminal 130 may specify a virtual object based on identification information of the virtual object.
  • the server 110 may store the 3D model and color of the virtual object.
  • the description of properties of virtual objects may be applied to properties of virtual items. If virtual objects are used to decorate a virtual space, virtual items can be used to decorate virtual characters.
  • the server 110 may previously store texture information included in the attributes of the virtual object. That is, the server 110 may previously store information on a plurality of textures applicable to virtual objects as a texture database. Texture information may include at least one of 2D information, 3D information, pattern, or color of the surface of the virtual object. For example, even if it is the same wall, if the type of wallpaper is changed, the texture may be different. Similarly, the server 110 may differently set the feel of the surface of the virtual object based on texture information. Texture information can only express information about a unit area. In order to cover an area larger than the unit area of the virtual object, the server 110 may repeatedly reflect texture information on the surface of the virtual object.
  • Texture information may be 2-dimensional information, but is not limited thereto and may have a 3-dimensional form.
  • texture information on an inner wall which is a virtual object
  • texture information on the interior walls may be sufficient as a pattern or color expressed on a 2D surface.
  • texture information according to the present disclosure may include a 3D shape.
  • Texture information may be information representing a relief shape.
  • the 3D texture information may include surface information having a curve with respect to a flat reference plane, and patterns and colors expressed on the surface.
  • the reference plane may be a surface in contact with a virtual object in the virtual space, and the surface information may be a surface opposite to the reference plane, which is visible to the user in the virtual space.
  • the surface information may be a set of points having different distances from the reference plane.
  • the server 110 may include at least one piece of 3D texture information to represent the outer surface of the virtual object.
  • the server 110 may repeatedly apply 3D texture information for a unit area to the surface of the virtual object to configure the surface of the virtual object with a large area.
  • a unit area may be a square.
  • the distance of the edge of the surface information included in the texture information of unit area to the reference plane may be constant. Therefore, even if texture information of a plurality of unit areas is combined, a feeling of being connected may occur. However, it is not limited thereto.
  • the server 110 may set initial texture information for the virtual object.
  • the server 110 may change texture information reflected in the virtual object based on a signal from the manager terminal 120 or the user terminal 130 . More specifically, the server 110 may receive a texture identifier for a virtual object from the manager terminal 120 or the user terminal 130 .
  • the server 110 may reflect texture information corresponding to the received texture identifier to the virtual object.
  • Even objects having the same shape may provide users with a feeling of different virtual objects by applying different texture information. For example, when a virtual space is implemented by applying different texture information to a wall, a user may experience different feelings from the virtual space.
  • a user can easily change intuition information applied to a virtual space by using information on a plurality of textures stored in a texture database, and can implement a virtual space closer to a real space.
  • the user can feel the atmosphere emitted by the space in advance in the virtual space.
  • Texture information may be classified according to the type of virtual object.
  • the user terminal 130 or the manager terminal 120 may first select the type of virtual object.
  • the user terminal 130 or the manager terminal 120 may display a plurality of pieces of texture information corresponding to the type of the selected virtual object.
  • the user terminal 130 or the manager terminal 120 may select one piece of texture information from among a plurality of pieces of output texture information based on a user's or manager's input.
  • the server 110 may receive attributes of virtual objects from the manager terminal 120 or the user terminal 130 .
  • the server 110 may arrange a virtual object in the virtual space based on the attribute of the virtual object received from the manager terminal 120 or the user terminal 130 . That is, the server 110 may arrange a virtual object selected from among a plurality of previously stored candidate virtual objects based on the attribute of the virtual object from the manager terminal 120 or the user terminal 130 in the virtual space.
  • the attribute of the virtual object may be input by a manager or a user, or may be automatically generated by the manager terminal 120 or the user terminal 130 .
  • the server 110 may modify the color, shape, and size of the 3D model of the virtual object based on the attributes of the virtual object received from the manager terminal 120 or the user terminal 130 .
  • Positional information included in the attributes of the virtual object may mean the position of the virtual object in the virtual space.
  • Location information included in the properties of the virtual object may be expressed in a 3D coordinate system.
  • the location information included in the attributes of the virtual object may include orientation information of the virtual object.
  • the orientation information may include an arrangement direction and rotation degree of virtual objects in the virtual space. Arrangement direction and degree of rotation can also be expressed in a three-dimensional coordinate system.
  • the server 110 may perform step 323 of including the attribute of the virtual object in the information about the 3D virtual space. That is, the server 110 may merge and store the attributes of virtual objects disposed in the virtual space with information about the virtual space. Information on the 3D virtual space may include attributes of the virtual space and attributes of the virtual object. Accordingly, when the server 110 transmits only information about the virtual space to the user terminal 130, the user terminal 130 can display the virtual space and virtual objects implemented in the server 110 on the display.
  • the server 110 may perform step 324 of transmitting information about the 3D virtual space to the user terminal 130 .
  • the server 110 may transmit some of the information on the 3D virtual space to the user terminal 130 .
  • the server 110 may transmit only information necessary for the user terminal 130 to display virtual space and virtual objects.
  • the user terminal 130 may receive information about a 3D virtual space.
  • the user terminal 130 may display virtual space and virtual objects on a display based on information about the 3D virtual space.
  • the user terminal 130 may perform step 331 of acquiring information about the virtual person.
  • the user terminal 130 may acquire information about the virtual person from the memory of the user terminal 130 or may receive it from the server 110 .
  • the information on the virtual character may include rendering information about the appearance of the virtual character.
  • the appearance of the virtual character may include a skin color, a body type model, and a face model of the virtual character.
  • the body type model may include a child type, a youth type, an adult type, and an elderly type.
  • the body shape model may include height information.
  • the model of the face may be the position of the eyes, the distance between the eyes, the size of the eyes, the shape of the eyes, the color of the eyes, the position of the nose, the shape of the nose, the height of the nose, the position of the mouth, the shape of the mouth, the hair style, or hair color, etc.
  • the information about the virtual person may include information about the possessed item (item).
  • Possessed items may include clothes, accessories, and bags worn by the virtual character.
  • Information about the virtual character may include at least one of identification information of clothes and color of clothes. Identification information of clothes may vary according to the shape of the clothes.
  • the information about the virtual person may include at least one of accessory identification information, accessory color, bag identification information, and bag color.
  • the user terminal 130 may display a virtual person in a virtual space based on information about the virtual person. In the present disclosure, items are used to decorate virtual characters, and objects are used to decorate virtual spaces.
  • the user terminal 130 may perform step 332 of displaying at least one of a virtual person, a virtual space, and a virtual object on a display based on the information on the 3D virtual space and the information on the virtual person.
  • virtual characters may not be displayed on the display.
  • the user may experience the virtual space from a first-person perspective through the user terminal 130 .
  • the virtual space may be displayed on the display.
  • Users can feel the atmosphere created by the virtual space while experiencing their virtual character in the virtual space.
  • Virtual characters of a plurality of users may be active in the virtual space. However, it is not limited thereto, and only one user's virtual character can be active in the virtual space.
  • step 332 of displaying virtual characters, virtual spaces, and virtual objects on the display by the user terminal 130 together with FIG. 9 will be described in more detail.
  • FIG. 9 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
  • the user terminal 130 may further perform the following process to perform step 332 of displaying a virtual person, a virtual space, and a virtual object on a display.
  • the user terminal 130 may perform step 910 of locating the virtual space on a part of the pre-stored 3D map based on the location information of the space included in the information on the 3D virtual space. That is, in the same way that the server 110 arranges the virtual space at a location corresponding to the location information of the real space on the 3D map, the user terminal 130 has a location corresponding to the location information of the space among the pre-stored 3D maps.
  • a virtual space can be placed in a location.
  • the 3D map used by the server 110 may be the same as the 3D map used by the user terminal 130 .
  • the user terminal 130 may receive and store the 3D map from the server 110 in advance.
  • the user terminal 130 may arrange the basic virtual objects in the virtual space.
  • the basic virtual object may be arranged outside the virtual space to form an atmosphere of the virtual space and implement hyper reality.
  • it may include a tree, sun, moon, street light, tree, grass, terrain, structure (building), or car outside the virtual space.
  • the server 110 may store pre-surveyed data for each location in the real space, and the pre-surveyed data may be transmitted to the user terminal 130 .
  • the user terminal 130 may automatically arrange basic virtual objects around the virtual space based on the location of the real space and pre-surveyed data received from the server. Also, the user terminal 130 may modify the location, type, or number of the basic virtual object based on the user's input.
  • the spatial location information may be 3D location information. That is, it may include values for three axes. Also, location information of a space used by the user terminal 130 may correspond to location information of a real space. The process of determining the number of vehicles around the virtual space by the server 110 has already been described, and the user terminal 130 can also perform the same process.
  • the user terminal 130 may perform step 920 of determining the direction and intensity of light in the virtual space based on the time information of the virtual space included in the information about the 3D virtual space. For example, the user terminal 130 may determine the position of the sun and the position of the moon based on time information of the virtual space. It can also determine the size of the moon. Here, the sun and moon in virtual space may be included in basic virtual objects. The user terminal 130 may render the direction and intensity of light in the virtual space using at least one of the position of the sun, the position of the moon, and the size of the moon. As such, since the direction and intensity of light are determined similarly to reality, the user can feel hyper reality in the virtual space.
  • the user terminal 130 may perform step 930 of arranging at least one virtual object in the virtual space based on the attribute of the virtual object included in the information about the 3D virtual space.
  • Positional information included in the attributes of the virtual object may mean the position of the virtual object in the virtual space.
  • Location information included in the properties of the virtual object may be expressed in a 3D coordinate system.
  • the location information included in the attributes of the virtual object may include orientation information of the virtual object.
  • the orientation information may include an arrangement direction and rotation degree of virtual objects in the virtual space. Arrangement direction and degree of rotation can also be expressed in a three-dimensional coordinate system.
  • the user can experience a hyper-reality virtual space that embodies a real space by using the user terminal 130 . Since the virtual space is implemented at a virtual location corresponding to the location of the real space, the user can experience the real space in advance. For example, objects placed in the virtual space may be past objects in the real space. Therefore, the user can experience the past of the real space in the virtual space. In addition, objects arranged in the virtual space may be future expected objects in the real space. Therefore, the user can experience the future of the real space in the virtual space.
  • the server 110 may store attributes of virtual objects respectively corresponding to a plurality of time zones.
  • the server 110 may obtain attributes of a virtual object corresponding to the corresponding date information or time period information. Also, the server 110 may arrange virtual objects in the virtual space based on the acquired attributes of the virtual objects. Therefore, the user can easily experience the change of space according to time.
  • FIG. 4 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • the user terminal 130 may perform step 410 of controlling the virtual character to move in the virtual space and interact with the virtual object based on the user's input.
  • the virtual character may have a predetermined interaction with the virtual object.
  • the predetermined interaction may transform a posture of a virtual character or a position, color, or shape of a virtual object. For example, if the virtual object is a chair, the virtual character can interact to sit on the virtual object. The virtual character may perform a sitting motion on the virtual object. Also, if the virtual object is a light, the virtual character can take an action to turn on or turn off the light. The virtual object may be turned on or off in response to the motion of the virtual character. If the virtual object is a seesaw, the virtual character can interact to sit on the virtual object, and the seesaw, which is a virtual object, can move in response to the motion of the virtual character sitting down.
  • the user terminal 130 records the location of the virtual character in the virtual space, the time the virtual character stayed at the location in the virtual space, the virtual object displayed on the display of the user terminal at the location of the virtual character, and details of interaction with the virtual object.
  • Step 420 of acquiring log information including the log information may be performed.
  • the position of the virtual character in the virtual space may be represented by 3D coordinates.
  • the user terminal 130 may obtain the position of the virtual person at a predetermined period.
  • the predetermined period may be 5 seconds, 10 seconds or 1 minute, or 10 minutes or the like.
  • a virtual character may divide a virtual space into at least one area. For example, if the virtual space is a house, at least one area may be divided into an entrance, a living room, a kitchen, a room, or a veranda.
  • the user terminal 130 may determine the time the virtual person stays in at least one area as the time the virtual person stays in the location in the virtual space.
  • the user terminal 130 may acquire identification information of at least one area and time spent in the at least one area.
  • the time the virtual character stays in at least one region may have a unit of minutes or seconds.
  • the user terminal 130 may obtain a virtual object displayed on the display of the user terminal at the position of the virtual person.
  • the user terminal 130 may obtain the identification information of the virtual object displayed on the user terminal 130 at predetermined cycles even if the virtual person does not interact with the virtual object.
  • the predetermined period may be 5 seconds, 10 seconds or 1 minute, or 10 minutes or the like.
  • the user terminal 130 may display not only the virtual character sitting on a bench, but also trees, grass, and streetlights around the virtual character.
  • the user terminal 130 may periodically obtain identification information of virtual objects displayed on the user terminal while being around the virtual person.
  • Such displayed virtual object identification information may be utilized as a user's predicted preference object. That is, the displayed virtual object identification information may be used as information representing a user's taste.
  • a process of obtaining log information will be described in more detail with reference to FIG. 10 for a moment.
  • FIG 10 shows a screen displayed on the user terminal 130 according to an embodiment of the present disclosure.
  • the user terminal 130 may further perform the following process in order to perform step 420 of acquiring log information.
  • the user terminal 130 may perform a step of acquiring the resolution of the display 1010 of the user terminal 130 .
  • the resolution of the display 1010 may mean the maximum resolution of the display.
  • the resolution may include the number of horizontal pixels and the number of vertical pixels.
  • the user terminal 130 may perform a step of setting a predetermined partial region of the display as the region of interest 1020 based on the resolution of the display 1010 . For example, the user terminal 130 may determine the area of interest 1020 to have an area greater than 1/8 and less than 1/4 of the area of the resolution of the display 1010 . Also, the user terminal 130 may determine that the center of the region of interest 1020 coincides with the center of the display 1010 .
  • the user terminal 130 may perform a step of including, in the log information, virtual object information of interest including identification information of a virtual object displayed in the region of interest for a predetermined threshold time or longer.
  • the threshold time may have a value of 10 seconds or more. Positioning the virtual object in the center of the screen for at least a predetermined period of time may indicate that the user expressed interest in the virtual object.
  • the user terminal 130 may include identification information of a virtual object displayed in the region of interest for a threshold period of time or longer in the log information.
  • the user terminal 130 or the server 110 may later use the log information as big data to derive virtual objects preferred by the user. Accordingly, the user terminal 130 or the server 110 may provide a user-customized virtual object.
  • the user terminal 130 may perform step 430 of transmitting log information to the server 110 together with identification information of the user terminal.
  • the user terminal 130 may collect log information for a predetermined period of time. Also, the user terminal 130 may transmit log information collected during a predetermined time to the server 110 .
  • the user terminal 130 may transmit log information to the server 110 in response to user identification information.
  • the user terminal 130 may delete log information transmitted to the server 110 .
  • the server 110 may accumulate and store log information. By deleting log information from the user terminal 130 in this way, memory of the user terminal 130 can be saved.
  • the log information is used only as big data in the server 110 and is not utilized in the user terminal 130, it has an effect of being stored only where necessary.
  • FIG. 5 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • step 311 in which the server 110 obtains the property of the virtual object may include the following process.
  • the manager terminal 120 or the user terminal 130 may perform step 511 of obtaining a source image including a real object or real item using an image capture device.
  • the image capture device may be a 2D camera or a 3D camera. If the image capture device is a 2D camera, the manager terminal 120 or the user terminal 130 may obtain source images for six sides of a real object or real item. The six sides may include a front view, a rear view, a left view, a right view, a top view, and a bottom view.
  • the manager terminal 120 or the user terminal 130 may generate information about the 3D shape of a rectangular parallelepiped using 6 plane views of a real object or real item.
  • the manager terminal 120 or the user terminal 130 may acquire information about the 3D shape of a real object or real item as a source image.
  • Information on the 3D shape may be 3D modeling data.
  • Information about a three-dimensional shape may be for a closed polyhedron.
  • a source image including a real object or real item may include at least one of a tag, a 6-side view, and information on a 3D shape of the real object or real item.
  • a tag for a real object or real item may be at least one term for describing the real object or real item.
  • the tag may include at least one of the type and brand of a real object or real item.
  • the tag may be a mark such as QR or barcode attached to a real object or real item.
  • the manager terminal 120 or the user terminal 130 may perform step 512 of obtaining properties of a real object or a property of a real item from a source image.
  • Properties of real objects or properties of real items may correspond to properties of virtual objects or properties of virtual items that have already been described.
  • the property of the real object or the property of the real item may include at least one of identification information, type, texture (texture), color, shape, size, and position of the object or item.
  • a description of the information included in the properties of the real object or the properties of the real item is omitted because it overlaps with the description of the information included in the properties of the virtual object or the virtual item.
  • the manager terminal 120 or the user terminal 130 may receive properties of real objects or properties of real items from the server 110 .
  • the manager terminal 120 or the user terminal 130 may obtain an image of a tag of a real object.
  • the manager terminal 120 or the user terminal 130 may include a photographing unit, and may obtain an image of the tag using the photographing unit.
  • the manager terminal 120 may obtain identification information of a real object from the image of the tag. Identification information of the real object may be associated with at least one of item, serial number, brand, or manufacturing date of the real object.
  • the manager terminal 120 or the user terminal 130 may transmit identification information of a real object to the server 110 .
  • the server 110 may obtain attributes of a real object corresponding to the identification information of the real object from a pre-stored database.
  • the server 110 may transmit the properties of the virtual object to the manager terminal 120 or the user terminal 130 .
  • a user or manager may check properties of the received virtual object. If there is no property of a real object corresponding to identification information of a real object in the pre-stored database, the server 110 transmits a signal requesting the property of the real object to the manager terminal 120 or the user terminal 130.
  • the manager terminal 120 or the user terminal 130 may obtain some of the attributes of the real object based on the source image. For example, the manager terminal 120 or the user terminal 130 may acquire a picture or shape displayed on a real object based on a source image. More specifically, if the actual object is a signboard, the manager terminal 120 or the user terminal 130 may automatically obtain a letter, figure, or picture displayed on the signboard based on the source image.
  • the manager terminal 120 or the user terminal 130 may obtain the type of object by applying an object recognition algorithm to the source image.
  • the object recognition algorithm may be implemented based on a machine learning model.
  • the manager terminal 120 or the user terminal 130 may display the type of recognized object.
  • the manager terminal 120 or the user terminal 130 may determine the type of the real object as the type of the recognized object.
  • the manager terminal 120 or the user terminal 130 may receive identification information included in the property of a real object from a manager or a user. Alternatively, the manager terminal 120 or the user terminal 130 may request the server 110 to generate identification information, and the server 110 may automatically generate identification information. The manager terminal 120 or the user terminal 130 may determine the automatically generated identification information as the identification information of the actual object.
  • the manager terminal 120 or the user terminal 130 may receive the type of real object from the manager or the user.
  • the manager terminal 120 or the user terminal 130 may acquire the texture and color of a real object from a source image.
  • the manager terminal 120 or the user terminal 130 may extract the texture or color of a real object from an area included in the object of the source image.
  • the manager terminal 120 or the user terminal 130 may obtain the shape of the real object from information on the 3D shape.
  • the manager terminal 120 and the user terminal 130 may generate the shape of a real object using a specialized 3D modeling tool.
  • the manager terminal 120 or the user terminal 130 may acquire the size of the actual object from the manager or user or from information about the 3D shape.
  • the manager terminal 120 or the user terminal 130 may obtain the location of the real object from the manager or the user.
  • the server 110 may perform step 513 of receiving a source image and properties of a real object or properties of a real item from the manager terminal 120 or the user terminal 130 .
  • the server 110 may perform step 521 of storing the source image together with properties of real objects or properties of real items.
  • the server 110 may perform step 522 of obtaining a property of a virtual object or a property of a virtual item based on at least one of a source image, a property of a real object, or a property of a real item. More specifically, the server 110 may determine a property of a real object or a property of a real item as a property of a virtual object or a property of a virtual item. In the above manner, the server 110 may accumulate and store the attributes of virtual objects or virtual items.
  • the server 110 may fill the virtual space by using at least one attribute of a plurality of virtual objects based on a control signal of the manager terminal 120 or the user terminal 130 . Also, the server 110 may decorate a virtual person by using at least one of attributes of a plurality of virtual items based on a control signal of the user terminal 130 .
  • a 3D shape of the virtual item may be popped up.
  • the 3D form may be a source image for 6 sides of an actual item. Source images for the 6 faces may be displayed on the surface of the 6 faces. In this case, the reality of the item in the virtual space may be lowered, but the user can show off the item he actually owns in the virtual space, and the effect of easily satisfying the user's desire to show off without causing much problems with the license of the item there is
  • FIG. 6 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • the metaverse system may include the user terminal 130 and the server 110.
  • the user terminal 130 may perform step 611 of acquiring authentication information by scanning a tag attached to an item owned by the user.
  • the items owned by the user may be clothes, bags, electronic products, and shoes that the user actually owns in the real world.
  • a tag may be attached to an item owned by the user.
  • a serial number may be written on an item owned by the user.
  • the serial number may include unique identification information and authentication information of the item. That is, if the serial number has a specific pattern, the corresponding item is genuine, and if it does not have a specific pattern, the corresponding item may not be genuine.
  • the user terminal 130 may capture a tag using a camera.
  • the user terminal 130 may obtain authentication information based on the image of the tag.
  • a tag can be a barcode or QR code. However, it is not limited thereto.
  • the tag may include a communication unit.
  • the communication unit of the tag may communicate with the user terminal 130 .
  • the communication method may use Near Field Communication (NFC) or Bluetooth.
  • the user terminal 130 may acquire authentication information by communicating with the tag.
  • NFC Near Field Communication
  • Bluetooth Bluetooth
  • authentication information may be a One Time Password.
  • Authentication information may have a value that changes over time.
  • an item owned by a user may include a battery and a power generation unit that generates power by light.
  • the control unit of the item owned by the user may receive power from the battery and the power generation unit.
  • the control unit of the item owned by the user may generate an authentication number that changes according to time by applying a predetermined algorithm to the current time.
  • the server 110 may also generate an authentication number that changes according to time by applying a predetermined algorithm to the current time. That is, the authentication number generated by the item owned by the user may be the same as the authentication number generated by the server 110 .
  • the user terminal 130 may automatically or manually obtain an authentication number generated by an item owned by the user.
  • the user terminal 130 may perform step 612 of transmitting authentication information, user identification information, and identification information of the user terminal to the server 110 .
  • User identification information may be unique information for each user.
  • the identification information of the user may include information on at least one of a name, biometric information (iris, fingerprint), resident registration number, date of birth, or phone number.
  • the user's identification information may be unique information generated based on information on at least one of a name, resident registration number, date of birth, or phone number.
  • the user's identification information may be unique information input by the user.
  • the identification information of the user terminal may be unique information for each user terminal. Identification information of the user terminal may include information on at least one of a phone number, a device serial number, a manufacturer, a production number, a production date, or a model name. Also, the identification information of the user terminal may be unique information generated based on information on at least one of a phone number, a device serial number, a manufacturer, a production number, a production date, or a model name.
  • the user terminal 130 may further transmit a command requesting authentication to the server 110.
  • the server 110 may perform authentication on the user terminal 130 based on a command requesting authentication. However, it is not limited thereto. A command requesting authentication from the user terminal 130 may not be transmitted to the server 110 .
  • the server 110 receives authentication information, user identification information, and user terminal identification information, it may perform authentication for the user terminal.
  • the user terminal 130 may encrypt authentication information, user identification information, and identification information of the user terminal, and server 110 may encrypt the authentication information, user identification information, and user terminal identification information. can decrypt.
  • the server 110 may perform step 621 of determining whether the authentication information corresponds to the pre-stored virtual item and is legitimate.
  • the server 110 may store identification information of virtual items in advance.
  • the server 110 may store authentication information to correspond to identification information of a virtual item.
  • the server 110 may compare stored authentication information and virtual item identification information with authentication information and virtual item identification information received from the user terminal 130 . When the stored authentication information and the identification information of the virtual item are the same as the authentication information received from the user terminal 130 and the identification information of the virtual item, the server 110 determines that the authentication information corresponds to the identification information of the virtual item and is legitimate. can decide
  • the server 110 determines that the authentication information does not correspond to the identification information of the virtual item. may or may not be justified.
  • the server 110 may control the user terminal 130 to display an error message when the previously stored authentication information is different from the authentication information received from the user terminal 130 .
  • the server 110 identifies the item owned by the user among the virtual items stored in the server 110.
  • the most similar virtual item may be determined to be legitimate.
  • the server 110 may divide and store previously stored virtual items into a plurality of groups.
  • the server 110 may control the user terminal 130 to display an unlicensed virtual item belonging to the same group as the identification information of the virtual item received from the user terminal 130 .
  • the non-license may mean a virtual item that does not cause a license problem.
  • it may mean a virtual item that can be freely used by a metaverse system provider through a contract in advance or a license-free virtual item.
  • the server 110 may determine one virtual item as a legitimate item based on the user's selection information received from the user terminal 130 .
  • the server 110 stores the identification information of the virtual item and the identification information of the user terminal in the authenticated user item list corresponding to the user's identification code ( 622) can be performed.
  • the server 110 may generate an authenticated user item list for each user.
  • the server 110 may obtain an authenticated user item list corresponding to the user identification code.
  • the server 110 may store the identification information of the virtual item and the identification information of the user terminal in the authenticated user item list corresponding to the user's identification code.
  • the authenticated user item list may include identification information of authenticated virtual items. That is, identification information of virtual items that have not been authenticated by the server 110 may not be included in the authenticated user item list.
  • the reason for simultaneously storing the identification information of the virtual item and the identification information of the user terminal in the user item list may be to determine whether the user's virtual character can wear the virtual item.
  • the server 110 receives a request from the user terminal 130 corresponding to the identification information of the user terminal, and allows the virtual person to wear the virtual item corresponding to the identification information of the virtual item included in the user item list. there is. Accordingly, virtual items may be used only in a specific user terminal 130 . Through this, virtual items can be prevented from being used in a plurality of user terminals 130, and rights of copyright holders or brand licensors can be protected.
  • the server 110 may transmit information indicating that authentication has not been performed to the user terminal 130 .
  • the user terminal 130 may help the user to normally perform authentication by outputting information indicating that authentication has not been performed.
  • the server 110 may perform step 623 of transmitting information on the authenticated user item list to the user terminal 130 .
  • Information on the authenticated user item list may include information on authenticated virtual items.
  • Information on the list of authenticated user items includes the copyright holder of the authenticated virtual item or the item owned by the user, the producer, when the item was produced, when the item was released, the order of production of the item, the brand, the item of the item, the shape of the item, or , may include information on at least one of the materials of the item.
  • the user terminal 130 may perform a step of outputting information on the authenticated user item list. In this way, the user can use the items owned by the user in the metaverse. Accordingly, the user can use the item he or she likes both in real and virtual space, and thus, satisfaction can be increased.
  • the step 332 of displaying the virtual character, virtual space, and virtual object on the display may further include the following process.
  • the user terminal 130 may perform step 631 of obtaining information about the virtual person by using at least one of the at least one item included in the user item list.
  • the information on the virtual character may include information on the item possessed by the virtual character, and at least one virtual item included in the user item list may be determined as the item possessed by the virtual character.
  • Authenticated virtual items can be checked in the virtual space using the user terminal.
  • FIG. 7 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • FIG. 7 may be performed after FIG. 6 .
  • the server 110 may perform step 710 of requesting authentication information acquired by scanning the tag to the user terminal at predetermined intervals.
  • the predetermined period may be one of a week, a month, a year or three years.
  • the predetermined period may be progressively longer based on a time elapsed from the release of the virtual item or the item owned by the user. That is, the predetermined cycle may increase in proportion to a time elapsed from the release time of the virtual item or the item owned by the user. For example, the predetermined cycle up to one month after the release of the virtual item or the item owned by the user may be one week.
  • the predetermined cycle may be one month, and after one year after the release of the virtual item or the item owned by the user, the predetermined cycle may be one year. Also, there may not be a predetermined cycle after a threshold time elapses after the release of a virtual item or an item owned by a user. That is, after the threshold time has elapsed, authentication for virtual items or items owned by the user may not be performed.
  • the server 110 may perform additional authentication regardless of a predetermined period.
  • the server 110 may perform re-authentication as shown in FIG. 5 when a user terminal that is not stored in the user's authenticated user item list tries to access a virtual item.
  • the server 110 may set a predetermined period for each authenticated user item list. When a predetermined period arrives, the server 110 may request authentication information from the user terminal based on identification information of the user terminal stored in the authenticated user item list.
  • the user terminal 130 may perform step 721 of outputting information indicating that authentication information should be obtained by scanning the tag. Based on the output information, the user can scan the tag using the user terminal 130 . The user terminal 130 may obtain authentication information.
  • the server 110 may perform step 722 of re-receiving authentication information obtained by scanning the tag, identification information of the user, and identification information of the user terminal from the user terminal.
  • the server 110 since the server 110 has received authentication information, identification information of the user, and identification information of the user terminal, the information received by the server 110 for re-authentication in FIG. It is referred to as user identification information and re-received identification information of the user terminal.
  • the re-received authentication information corresponds to the re-received identification information of the re-received virtual item and is legitimate, and the re-received identification information of the re-received virtual item in the authenticated user item list corresponding to the re-received user identification code and the re-received user terminal identification information. If the identification information is included, the server 110 may perform a step of maintaining the identification information of the virtual item in the authenticated user item list and the identification information of the user terminal.
  • the server 110 further determines whether or not identification information of the re-received virtual item and identification information of the re-received user terminal are included in the authenticated user item list corresponding to the re-received user identification code. can judge Also, when the condition is satisfied, the server 110 may maintain the identification information of the virtual item in the authenticated user item list and the identification information of the user terminal.
  • the re-received authentication information corresponds to the re-received identification information of the re-received virtual item and is legitimate, and the re-received identification information of the re-received virtual item in the authenticated user item list corresponding to the re-received user identification code and the re-received user terminal identification information. If the identification information is not included, the server 110 may perform a step of storing the identification information of the re-received virtual item and the re-received identification information of the user terminal in the authenticated user item list.
  • the server 110 stores the identification information of the re-received virtual item and the re-received identification information of the user terminal in the authenticated user item list, so that the user forgets his or her virtual item and does not register it in the server 110. can prevent In addition, even if the identification information of a virtual item is deleted from the user item list of the server 110 by error, the identification information of the virtual item can be restored through the above process. Therefore, the user may not feel any inconvenience even if an error occurs.
  • the server 110 may perform a step of deleting the identification information of the virtual item from the authenticated user item list. Therefore, even if the user later requests a virtual item using the user terminal 130 , the server 110 may not provide virtual item data to the user terminal 130 . Accordingly, the virtual person used by the user may not be able to wear the corresponding virtual item.
  • the server 110 may perform step 710 of requesting authentication information from the user terminal 130 at predetermined intervals.
  • the user terminal 130 may output information indicating that authentication information should be obtained. However, since the user does not have an item owned by the user, authentication information may not be obtained from the item owned by the user.
  • the server 110 does not receive a reply from the user terminal within a predetermined period of time after requesting the authentication information, a step of deleting at least one of the identification information of the virtual item and the identification information of the user terminal from the authenticated user item list is performed.
  • the predetermined period may be one week, one month, one year or three years. However, it is not limited thereto.
  • the server 110 may control the predetermined period to increase in proportion to the elapsed time from the release of the virtual item or the item owned by the user. For example, the predetermined period up to one month after the release of the virtual item may be one week.
  • the predetermined period may be one month, and after one year after the release of the virtual item or the item owned by the user, the predetermined period may be one year.
  • the user terminal 130 may perform a step of receiving an input for requesting the use of at least one virtual item among the information on the authenticated user item list from the user.
  • the user terminal 130 may receive information about the authenticated user item list from the server 110 .
  • the user terminal 130 may output information about the authenticated user item list.
  • the output can be video or sound.
  • Information on the list of authenticated user items is at least one of the copyright holder of the authenticated virtual item, the producer, the time of production of the item, the time of release of the item, the order of production of the item, the brand, the item of the item, the shape of the item, or the material of the item. It may contain information about one.
  • the user may use the input unit of the user terminal 130 to input to the user terminal 130 to use one virtual item among information on the authenticated user item list.
  • the user terminal 130 transmits usage request information including identification information for the requested virtual item, user identification information, and identification information of the user terminal to the server ( 110) may be performed.
  • the user terminal 130 transmits the identification information for the requested virtual item, the user identification information, and the identification information of the user terminal to the server 110 without a separate command, and the server 110 ) is requesting the use of a virtual item.
  • the user terminal 130 may transmit a command requesting use to the server 110 together with identification information for the requested virtual item, user identification information, and identification information of the user terminal. .
  • the server 110 may know that the user terminal 130 is requesting use based on the command requesting use.
  • the server 110 may perform a step of determining whether identification information for the requested virtual item and identification information of the user terminal are included in the authenticated user item list corresponding to the identification information of the user included in the use request information.
  • the server 110 may obtain the user's authenticated user item list based on the user's identification information included in the use request information.
  • the server 110 may determine whether identification information for the requested virtual item and identification information of the user terminal included in the play request information are included in the obtained authenticated user item list.
  • the server 110 transmits data of the virtual item corresponding to the identification information of the requested virtual item to the user terminal 130.
  • Data of the virtual item may be stored by the server 110 .
  • the server 110 may control a separate virtual item cloud server to provide virtual item data to the user terminal 130 .
  • data of the virtual item may include modeling data of the virtual item.
  • Data of the virtual item may include content not included in the item owned by the user. For example, although music or video is not played on an item owned by the user, music or video may be played when the virtual person wears the virtual item. Accordingly, the server 110 may induce users to authenticate an item they actually own to the server 110 .
  • FIG. 8 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
  • the purchaser terminal 810 may perform step 821 of acquiring authentication information.
  • the purchaser terminal 810 may be different from the user terminal 130 .
  • the owner of the purchaser terminal 810 may be different from the owner of the user terminal 130 .
  • the user may be a user who initially purchases an item owned by the user.
  • the user terminal 130 may be a user terminal that authenticates an item owned by the user for the first time.
  • the purchaser may be a person who purchases an item owned by the user from the user.
  • the purchaser's terminal 810 may be a purchaser's terminal.
  • a process in which the purchaser terminal 810 obtains authentication information may be the same as a process in which the user terminal 130 obtains authentication information.
  • the purchaser terminal 810 may obtain authentication information from a tag using a camera.
  • a tag may include a communication unit.
  • the communication unit of the tag may communicate with the purchaser terminal 810 .
  • the communication method may use Near Field Communication (NFC) or Bluetooth.
  • the purchaser terminal 810 may obtain authentication information by communicating with the tag.
  • the authentication information may be a One Time Password.
  • a process in which the purchaser terminal 810 obtains authentication information may be different from a process in which the user terminal 130 obtains authentication information.
  • the user terminal 130 may request transmission of authentication information to the purchaser terminal 810 .
  • the user terminal 130 requests transmission of authentication information to the purchaser terminal 810
  • the user terminal 130 distributes and shares transmission/reception detail information for the authentication information to the server, the user terminal, and the purchaser terminal. can be done
  • the server, the user terminal, and the purchaser terminal may be interconnected through a blockchain network.
  • the transmission/reception detail information may include detailed information of the right holder including the name of the copyright holder or trademark holder of the virtual item related to the authentication information.
  • the transmission/reception detail information may include detailed information on virtual items related to authentication information.
  • the transmission/reception detail information may include detailed rights information including whether or not a trademark is registered for a virtual item related to authentication information, a trademark owner, a copyright owner, a copyright expiration date, a limit on the number of times of resale, or an expiration date of resale.
  • the transmission/reception detail information may include detailed information related to a user terminal that purchased or sold a virtual item related to authentication information and a purchaser terminal.
  • the server 110, the user terminal 130, and the purchaser terminal 810 may each perform a step of deriving a hash value based on transmission/reception detail information for authentication information.
  • the server 110, the user terminal 130, and the purchaser terminal 810 may generate a hash value by processing transmission/reception detail information of virtual item data using a hashing algorithm.
  • the purchaser terminal 810 may perform a step of transmitting payment information for authentication information to the server.
  • the hash values generated by each device may be mutually shared. That is, the hash value generated by the server 110 may be shared by the user terminal 130 and the purchaser terminal 810, and the hash value generated by the user terminal 130 is shared by the server 110 and the purchaser terminal 810. , and the hash value generated by the purchaser terminal 810 may be shared by the server 110 and the user terminal 130 .
  • the server 110, the user terminal 130, and the purchaser terminal 810 may determine that the mutually shared hash values match each other.
  • Payment information for authentication information may be payment information for a purchaser to purchase an item owned by the user or data of a virtual item from the user using the purchaser terminal 810 .
  • Payment information may include information necessary for payment.
  • the payment information may include a payment amount, credit card information, or payment bank information.
  • the server 110 may perform a step of transmitting transaction approval information to the user terminal 130 .
  • the transaction approval information may indicate that the server 110 has approved the virtual item data transaction between the user terminal 130 and the purchaser terminal 810 .
  • the server 110 may deliver to the user an amount obtained by subtracting a fee from a service company or a copyright fee from a copyright owner among the amounts received from the purchaser terminal.
  • the user terminal 130 may perform a step of transmitting authentication information to the purchaser terminal 810 . That is, the user terminal 130 may receive transaction approval information and transmit authentication information to the purchaser terminal 810 when it is determined that the transaction approval information is legitimate. Transmission of virtual item data may not occur between the user terminal 130 and the purchaser terminal 810 .
  • the purchaser terminal 810 may receive virtual item data through the server 110 based on authentication information.
  • the purchaser terminal 810 transmits authentication information, identification information of a virtual item based on a real item owned by a user, purchaser identification information, and purchaser terminal identification information to the server 110 ( 822) can be performed.
  • Step 822 may be the same as step 612 or step 722 except that the subject of execution is different. Therefore, redundant descriptions are omitted.
  • the server 110 may perform step 831 of determining whether the authentication information corresponds to the identification information of the virtual item and is legitimate. This step may be the same as step 621. Therefore, redundant descriptions are omitted.
  • the server 110 may perform step 832 of deleting the identification information of the virtual item from the authenticated user item list corresponding to the user's identification code.
  • the server 110 deletes the identification information of the virtual item from the list of authenticated user items corresponding to the user's identification code, thereby preventing the user from using the virtual item any longer. can do.
  • the server 110 transmits information indicating that the identification information of the virtual item will be deleted from the authenticated user item list to the user terminal 130. ) can be transmitted. Accordingly, the user can clearly know that he or she will not be able to use the virtual item.
  • the server 110 may perform step 833 of storing the identification information of the virtual item and the identification information of the purchaser terminal 810 in the authenticated purchaser item list corresponding to the purchaser's identification code. Since the purchaser has secured the legitimate right to the virtual item, the server 110 stores the identification information of the virtual item and the identification information of the purchaser terminal in the purchaser item list, thereby permitting the purchaser terminal 810 to use the virtual item. can
  • the server 110 may perform step 834 of transmitting information about the authenticated buyer item list corresponding to the buyer's identification code to the buyer terminal 810 .
  • Step 834 may be similar to step 623 . Therefore, redundant descriptions are omitted.
  • the purchaser terminal 810 obtains information about the purchaser's virtual character by using at least one item among at least one item included in the purchaser's item list corresponding to the purchaser's identification code based on the purchaser's selection (841). can be performed.
  • Step 841 may be similar to step 631 . Therefore, redundant descriptions are omitted.
  • FIG. 11 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
  • Step 324 of the server 110 transmitting information about the 3D virtual space to the user terminal 130 may include the following process.
  • the manager terminal 120 transmits to the server 110 identification information of the user terminal 130, identification information of the user, and information related to a contract for sale or lease of a real space corresponding to the virtual space. can do.
  • the manager may be one of a real space lessor, a real space seller, or a real space broker.
  • Information related to a contract for sale or lease of a real space corresponding to a virtual space may include the date of the contract, identification information of the subject of the contract, price of the subject of the contract, and information on the parties to the contract and the contents of the contract.
  • the contract subject may be an actual space.
  • the identification information of the subject of the contract may include the location, designation, or area of the actual space.
  • the contents of the contract may include a rental contract or a sales contract.
  • Parties to the contract may include at least one of a buyer, a seller, a lessor, or a lessee.
  • the manager terminal 120 may transmit information related to the contract to the server 110 in order to conclude the contract. That is, the information related to the contract may include various types of information necessary before signing the contract. Through this process, the manager terminal 120 can subscribe for a contract.
  • the server 110 may perform step 1121 of transmitting information related to a sale or lease contract of real space to the user terminal 130 .
  • the server 110 may store information related to a contract for sale or lease of a real space corresponding to a virtual space.
  • the manager terminal 120 since the manager terminal 120 must transmit information related to the contract to the user terminal 130 through the server 110, the possibility of falsification of the contents of the contract can be reduced.
  • the user terminal 130 may perform step 1131 of transmitting acceptance information regarding information related to a contract for sale or rental of real space, identification information of the user terminal, and identification information of the user to the server 110 . That is, the user may accept the contract through the user terminal 130 .
  • the server 110 When the server 110 receives the consent information, the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are combined with the identification information of the user terminal and the identification information of the user received from the user terminal 130. Step 1141 of determining whether they are the same may be performed.
  • the user may also input user identification information and terminal identification information to the manager terminal 120 . That is, users and administrators may need to be in the same space.
  • the server 110 determines that the consent information is legitimate. can decide that The server 110 may receive and store identification information of the manager terminal and manager identification information from the manager terminal 120 and receive and store identification information of the user terminal and user identification information from the user terminal 130 .
  • the server 110 receives consent information, receives and stores identification information of the manager terminal and manager identification information from the manager terminal 120, and receives identification information of the user terminal and user identification information from the user terminal 130. and can be saved. The server 110 may determine that the consent information is legitimate without any confirmation.
  • step 1142 of transmitting information on the 3D virtual space can be performed. Therefore, the user can use the virtual space using the user terminal 130 . Since the user's wandering around the virtual space using the virtual person has already been described in step 410, a duplicate description will be omitted.
  • the server determines whether the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are the same as the identification information of the user terminal and the identification information of the user received from the user terminal 130.
  • step 1142 of transmitting information on a 3D virtual space to the user terminal 130 may be performed.
  • the server 110 When the server 110 receives the consent information, at least one of information related to a contract for sale or rental of a real space corresponding to a virtual space, user identification information, identification information of a user terminal, manager identification information, and identification information of a manager terminal may be stored in an unmodifiable storage of the server 110.
  • the storage may be an Inter-Planetary File System (IPFS).
  • IPFS Inter-Planetary File System
  • the server may issue two NFTs (Non Fungible Tokens) to information related to a sale or lease contract of real space. The issued NFTs can be transmitted to the manager terminal and user terminal, respectively.
  • NFTs Non Fungible Tokens
  • the manager terminal 120 and the user terminal 130 can access information related to a contract for sale or lease of real space stored in IPFS by using the hash value of the NFT, but may not arbitrarily change the contents of the contract. Therefore, the possibility of tampering with the contents of the contract can be greatly reduced.
  • the server 110 may perform step 1142 of transmitting information about the 3D virtual space to the user terminal 130 .
  • the user can manipulate the virtual character in the virtual space using the user terminal 130 .
  • the user can communicate with other users in the virtual space using the user terminal 130 .
  • Other users may also be users who have received information about the 3D virtual space from the server through the above process.
  • the metaverse system according to the present disclosure can implement an apartment complex to be built in a virtual space. Therefore, users who have received an apartment can enjoy life in a real apartment while walking around the apartment in the virtual space. That is, the metaverse system of the present disclosure provides a virtual space in which users experience an apartment complex in advance before moving in, and the virtual space can be used as a space to provide various information related to the situation before moving in. For example, the metaverse system of the present disclosure may inform users of the progress of construction, or inform intermediate payment, balance payment method, payment date, and the like. In addition, the metaverse system of the present disclosure can be utilized as a community of apartments in virtual space. Residents can engage in various social activities in virtual space using the metabus and receive online services.
  • the user terminal 130 may perform step 420 of acquiring log information. More specifically, the user terminal 130 may perform a step of acquiring the resolution of the display 1010 of the user terminal 130 .
  • the resolution of the display may be pre-stored in a memory.
  • the user terminal 130 may perform a step of setting a predetermined partial region of the display as the region of interest 1020 based on the resolution of the display.
  • the user terminal 130 may perform a step of including, in the log information, virtual object information of interest including identification information of a virtual object displayed in the region of interest for a predetermined threshold time or longer.
  • the threshold time may have a value of 10 seconds or more. Positioning the virtual object in the center of the screen for at least a predetermined period of time may indicate that the user expressed interest in the virtual object.
  • the user terminal 130 may include identification information of a virtual object displayed in the region of interest for a threshold period of time or longer in the log information.
  • the user terminal 130 or the server 110 may later use the log information as big data to derive virtual objects preferred by the user. Accordingly, the user terminal 130 or the server 110 may provide a user-customized virtual object.
  • the user terminal 130 may perform a step of including virtual object information of interest, including the virtual object that the virtual character has interacted with and the content of the interaction, in the log information.
  • Interactions between virtual characters and virtual objects may be predetermined.
  • the predetermined interaction may change a posture of a virtual character or a position, color, or shape of a virtual object.
  • the virtual object is a chair
  • the virtual character can interact to sit on the virtual object.
  • the virtual character may perform a sitting motion on the virtual object.
  • the virtual object is a light
  • the virtual character can take an action to turn on or turn off the light.
  • the virtual object may be turned on or off in response to the motion of the virtual character.
  • the virtual character can interact to sit on the virtual object, and the seesaw, which is a virtual object, can move in response to the motion of the virtual character sitting down.
  • Identification information may be assigned to the predetermined interaction.
  • the user terminal 130 may include the identification information of the virtual object with which the virtual character interacted and the identification information of the interaction in interest virtual object information.
  • the user terminal 130 may perform a step of including the conversation contents of the virtual character with other users' virtual characters or non-player characters (NPCs) in the log information.
  • the content of the conversation may include information about what needs to be improved in the virtual space or about virtual objects of interest.
  • the virtual space is an apartment complex before moving in, users who have received a sale can receive You can experience life after moving into an apartment in a virtual space.
  • the commercial space of an apartment complex can be used as a space where residents can receive coupons for promotion.
  • the user can move to a specific space of the virtual space using the user terminal 130 .
  • the specific space may be a space of a location designated by the server 110 .
  • a specific space may be included in the commercial space.
  • the server 110 may issue coupons to virtual characters in the shopping mall. Coupons may include serial numbers, QR codes or barcodes. Users can use coupons received from the metaverse at real stores. Also, the coupon may be a digital discount voucher.
  • the user terminal 130 may transmit the coupon to the server 110 .
  • the server 110 may control to display at least one virtual item corresponding to the coupon on the user terminal 130 . A user may select one of at least one virtual item using the user terminal 130 .
  • the server 110 may store identification information of the virtual item selected in response to the user's selection and identification information of the user terminal in the user item list. Through the above process, the metabus system can induce virtual characters to wander around in the virtual space.
  • the server 110 may accumulate and store movement lines of virtual characters.
  • the server 110 may transmit the corresponding movement to the manager terminal 120 when there is a movement of the virtual characters separated by a predetermined distance or more from a pre-designed road.
  • the manager terminal 120 may display the corresponding movement line on the display.
  • a previously designed road that is more than a predetermined distance apart may be an optimal route when users go from one point to another.
  • roads are not designed in the corresponding traffic line, it may cause inconvenience to residents in reality.
  • the manager can decide whether a road design is required for that route.
  • the server 110 may perform a step of determining information about a congestion location where a plurality of users often hear in a virtual space.
  • the log information may periodically acquire the location of the user.
  • the server 110 may obtain the distribution of virtual characters at the same time.
  • the server 110 may determine congestion locations according to time based on the distribution of virtual characters. For example, if more than a critical number of virtual characters are gathered around a location at one point in time, it may be determined that the location is crowded at one point in time. Also, if less than a critical number of virtual characters are in the vicinity of a location at a point in time, it may be determined that the location is not congested at a point in time.
  • the server 110 may perform a step of determining a rent or sale price of a shopping mall as it is closer to the location of the real space corresponding to the congested location. That is, patterns of real users may be simulated based on patterns of virtual characters in the virtual space, and through this, it is possible to determine a high rent or sale price around a location where congestion is predicted to be high. Therefore, it is possible to realize the realization of the commercial sale price.
  • the server 110 may perform a step of determining a virtual object frequently used by a plurality of users based on the virtual object information of interest included in the log information. Since the virtual object information of interest has already been described, a duplicate description will be omitted.
  • the virtual object information of interest may be obtained for a plurality of virtual characters.
  • the server 110 may obtain virtual object information of interest of a plurality of virtual characters and determine virtual object information of the highest interest or frequently used. Also, the server 110 may perform a step of transmitting frequently used virtual objects to the manager terminal 120 . If the virtual space is still under construction in reality, the administrator can implement frequently used virtual objects in reality. For example, if a virtual character often sits on a bench at a specific location, the number of benches at that location in reality can be increased. In addition, if the preference for one of the benches of various designs is high in the virtual space, the bench in the complex can be implemented as a bench with a high preference in reality.
  • the user terminal 130 may perform a step of transmitting to the server 110 a purchase signal for a purchase object included in a plurality of candidate virtual objects stored in the server 110, identification information of the user, and identification information of the user terminal.
  • a purchase signal for a purchase object may include identification information for the purchase object.
  • the server 110 may perform a step of determining whether the purchase signal is legitimate.
  • the server 110, the user terminal 130, and the manager terminal 120 may each perform a step of deriving a hash value based on transmission/reception detail information on a purchase signal for a purchase object.
  • the server 110, the user terminal 130, and the manager terminal 120 may generate a hash value by processing transmission/reception detail information of a purchase signal for a purchase object using a hashing algorithm.
  • the server 110 may determine that the purchase signal is legitimate.
  • the user terminal 130 may perform a step of transmitting payment information for a purchase signal for a purchase object to the server 110 .
  • the server 110 may perform a step of storing the identification information of the purchase object and the identification information of the user terminal 130 in the user object list corresponding to the user's identification information.
  • the user can electronically own the purchase object.
  • the server may activate the purchase object until the expiration date of the purchase object included in the attributes of the purchase object. That is, the purchase object may have a deadline. The time limit may be infinite. However, the deadline may be finite.
  • the server 110 may delete the identification information of the purchased object from the user object list. Also, the server 110 may determine the purchase object as a virtual object of interest. The server 110 may store the virtual object of interest as log information. Also, the server 110 may determine a virtual object of interest as a virtual object having a high preference.
  • the server 1100 may transmit the virtual object of interest to the manager terminal 120 so that the manager implements a real object corresponding to the virtual object of interest in the real world.
  • the user terminal 130 may perform step 332 of displaying at least one of virtual characters, virtual spaces, and virtual objects on the display. At this time, the user terminal 130 may perform a step of displaying the activated purchase object. That is, the virtual object purchased by the user may be displayed in the virtual space. Conversely, virtual objects not purchased by the user may not be displayed in the virtual space, or only a translucent outline may be displayed.
  • the purchase object may be a virtual object in the shape of a roof tile of a temple.
  • the tile purchased by the user may be displayed as a virtual object as part of a temple building in the virtual space.
  • buyer information of the virtual object may be displayed on the display.
  • the buyer information may be the buyer's name and wish message.
  • the purchase object may be a virtual object in the shape of a roof tile of a temple.
  • the tile purchased by the user may be displayed as a virtual object as part of a temple building in the virtual space.
  • buyer information of the virtual object may be displayed on the display.
  • the buyer information may be the buyer's name and wish message.
  • the user terminal 130 transmits a purchase signal for a purchase space included in a plurality of candidate virtual spaces stored in the server 110, user identification information, and user terminal identification information to the server 110. can be performed.
  • the purchase signal for the purchase space may include identification information for the purchase space.
  • the server 110 may control the user terminal 130 to display the purchase space.
  • the server 110 may control the virtual character to move in the virtual space.
  • the user terminal 130 may control to place at least one object included in the user object list in the purchase space.
  • the above-described embodiments of the present invention can be written as a program that can be executed on a computer, and can be implemented in a general-purpose digital computer that operates the program using a computer-readable recording medium.
  • the computer-readable recording medium includes storage media such as magnetic storage media (eg, ROM, floppy disk, hard disk, etc.) and optical reading media (eg, CD-ROM, DVD, etc.).

Abstract

A metaverse system according to the present disclosure comprises a user terminal, a manager terminal and a server. An operating method for a metaverse system for constructing a metaverse utilizing an object comprises the following steps: a server acquires, from a manager terminal, attributes of a virtual space including location information of a real space and time information of a virtual space; the server generates information about a 3D virtual space on the basis of the attributes of the virtual space; the server acquires attributes of a virtual object; the server includes the attributes of the virtual object in the information about the 3D virtual space; and the server transmits, to a user terminal, information about the 3D virtual space.

Description

오브젝트를 활용하여 메타버스를 구현하는 시스템 및 시스템의 동작 방법A system that implements a metaverse using objects and how the system operates
본 개시는 오브젝트를 활용하여 메타버스를 구현하는 시스템 및 시스템의 동작 방법에 관련된 것이다. 보다 구체적으로 메타버스 시스템은 간단하게 메타버스를 구현하여 메타버스가 널리 이용되는 것을 돕기 위한 시스템이다.The present disclosure relates to a system implementing a metaverse using objects and a method of operating the system. More specifically, the metaverse system is a system that helps the metaverse to be widely used by simply implementing the metaverse.
컴퓨터 기술의 발전으로 하이퍼 리얼리티의 가상공간을 생성하는 것이 가능하게 되었다. 하이퍼 리얼리티의 공간을 생성하기 위해서는 현실의 물체를 랜더링하여 가상공간으로 옮기는 과정이 필요하다.Advances in computer technology have made it possible to create hyper-reality virtual spaces. In order to create a space of hyper reality, it is necessary to render a real object and move it to a virtual space.
랜더링(Randering)은 게임 등에 사용하는 컴퓨터 그래픽 기술로 현실세계 또는 가상의 세계를 표현하는 기술로 컴퓨터 프로그램을 사용하여 모델로부터 영상을 만들어내는 과정을 말하는데 이 모델은 자료구조나 강력하게 정의된 언어로 구성된 3차원 물체에 대한 설명이다.Rendering is a computer graphics technology used in games, etc., which expresses the real or virtual world. It refers to the process of creating an image from a model using a computer program. This model is a data structure or a strongly defined language. A description of the constructed 3D object.
여기에는 기하학, 시점,텍스처 매핑, 조명, 세이딩 정보를 포함하고 있으며, 이러한 영상을 디지털 이미지, 레스터 그래픽스 이미지라고 부르며 그래픽 파이프 라인에서 랜더링은 모델과 애니메이션의 최종 모습을 제공하는 마지막 단계이다.It contains geometry, perspective, texture mapping, lighting, and shading information. These images are called digital images or raster graphics images. Rendering in the graphics pipeline is the final step in providing the final look of models and animations.
이러한 랜더링 기술을 통해 사물이나 장소를 직접 만들거나 가보지 않아도 실제 보는 것과 같은 현실적 체험이 가능한 것이다.Through this rendering technology, it is possible to experience the reality of seeing objects or places without having to directly create or visit them.
최근 비대면 상황의 장기화 및 부동산 가격의 폭등으로 실제 공간에서 전시회, 갤러리, 또는 모델하우스 등을 마련하는 것이 점점 어려워지고 있다. 반면 최근 기술적 한계가 극복되어 가상의 공간에 전시회, 갤러리, 또는 모델하우스를 구현하는 것이 가능하다. 사용자들은 가상의 공간에서 실제와 다르지 않은 전시회, 갤러리, 또는 모델하우스를 감상하는 것이 가능하다. 다만, 가상공간을 구현하는 비용 및 시간이 과도하여, 일반적인 사용자들은 전문 업체에 가상공간의 구현을 맡겨야 하는 상황이다. 또한, 가상공간에 마련된 다양한 오브젝트 들을 수정하는 것도 전문 업체에 일일이 요청을 해야해서 불편함이 많다. 따라서, 일반 사용자들도 간편하게 가상공간을 마련하여 가상의 전시회, 갤러리, 또는 모델하우스를 개최할 수 있는 기술이 요구되는 상황이다.Due to the recent prolonged non-face-to-face situation and skyrocketing real estate prices, it is becoming increasingly difficult to set up exhibitions, galleries, or model houses in real spaces. On the other hand, it is possible to implement an exhibition, gallery, or model house in a virtual space as technical limitations have been overcome recently. Users can enjoy an exhibition, gallery, or model house that is no different from reality in a virtual space. However, since the cost and time to implement the virtual space are excessive, general users have to entrust the implementation of the virtual space to specialized companies. In addition, it is inconvenient to modify various objects prepared in the virtual space by making requests to specialized companies one by one. Therefore, there is a need for a technology that allows ordinary users to easily prepare a virtual space and hold a virtual exhibition, gallery, or model house.
본 개시의 일 실시예에 따른 메타버스 시스템은 사용자 단말기, 관리자 단말기 및 서버를 포함하고, 오브젝트를 활용하여 메타버스를 구현하고, 메타버스 시스템의 동작 방법은, 서버가 가상공간의 시간 정보 및 실제 공간의 위치 정보를 포함하는 가상공간의 속성을 관리자 단말기로부터 획득하는 단계, 서버가 가상공간의 속성에 기초하여 3차원의 가상공간에 대한 정보를 생성하는 단계, 서버가 가상 오브젝트의 속성을 획득하는 단계, 서버가 3차원의 가상공간에 대한 정보에 가상 오브젝트의 속성을 포함하는 단계, 서버가 3차원의 가상공간에 대한 정보를 사용자 단말기로 송신하는 단계, 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계, 사용자 단말기가 3차원의 가상공간에 대한 정보 및 가상인물에 대한 정보에 기초하여 디스플레이에 가상인물, 가상공간 및 가상 오브젝트 중 적어도 하나를 표시하는 단계, 사용자 단말기가 사용자의 입력에 기초하여 가상인물이 가상공간에서 이동하고, 가상 오브젝트와 상호작용하도록 제어하는 단계, 사용자 단말기는 가상인물의 가상공간에서의 위치, 가상인물이 가상공간에서의 위치에 머문 시간, 가상인물의 위치에서 사용자 단말기의 디스플레이에 표시된 가상 오브젝트, 및 가상 오브젝트와 상호작용한 내역을 포함하는 로그 정보를 획득하는 단계, 및 사용자 단말기는 로그 정보를 사용자 단말기의 식별정보와 함께 서버로 송신하는 단계를 포함한다.The metaverse system according to an embodiment of the present disclosure includes a user terminal, an administrator terminal, and a server, and implements a metaverse by utilizing objects. Acquisition of virtual space properties including space location information from an administrator terminal, server generating information on a 3D virtual space based on virtual space properties, server acquiring virtual object properties Steps, the server including the attribute of the virtual object in the information on the 3D virtual space, the server transmitting the information on the 3D virtual space to the user terminal, the user terminal obtaining the information on the virtual person Step of displaying, by the user terminal, at least one of a virtual person, a virtual space, and a virtual object on a display based on information on a three-dimensional virtual space and information on a virtual person; Controlling the virtual character to move in the virtual space and interact with the virtual object, the user terminal determines the location of the virtual character in the virtual space, the time the virtual character stays in the virtual space, and the user terminal at the location of the virtual character. Acquiring log information including a virtual object displayed on the display of the virtual object and details of interaction with the virtual object, and transmitting, by the user terminal, the log information together with identification information of the user terminal to the server.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 가상 오브젝트의 속성을 획득하는 단계는 관리자 단말기가 영상획득장치를 이용하여 실제 오브젝트가 포함된 소스 영상을 획득하는 단계, 관리자 단말기가 소스 영상으로부터 실제 오브젝트의 속성을 획득하는 단계, 서버는 관리자 단말기로부터 소스 영상 및 실제 오브젝트의 속성을 수신하는 단계, 서버는 소스 영상을 실제 오브젝트의 속성과 함께 저장하는 단계, 및 서버는 소스 영상 및 실제 오브젝트의 속성 중 적어도 하나에 기초하여 가상 오브젝트의 속성을 획득하는 단계를 포함한다.Acquiring the properties of the virtual object of the operating method of the metaverse system according to an embodiment of the present disclosure includes acquiring a source image including a real object using an image acquisition device by a manager terminal, and the source image by the manager terminal. Acquiring the properties of the real object from the server, receiving the source video and the real object properties from the manager terminal, the server storing the source video together with the real object properties, and the server storing the source video and real object properties. and acquiring a property of the virtual object based on at least one of the properties of the virtual object.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계는 사용자 단말기가 사용자가 소유한 아이템에 부착된 태그를 스캔하여 인증정보를 획득하는 단계, 사용자 단말기가 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버로 송신하는 단계, 서버가 인증정보가 미리 저장되어 있는 가상 아이템에 대응되며, 정당한 것인지 여부를 결정하는 단계, 인증정보가 가상 아이템에 대응되며, 정당한 것으로 결정된 경우, 서버가 사용자의 식별정보에 대응되는 사용자 아이템 리스트에 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 저장하는 단계, 및 서버가 사용자 아이템 리스트를 사용자 단말기로 송신하는 단계를 포함하고, 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계는 사용자 단말기가 사용자의 선택에 기초하여 사용자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 가상인물에 대한 정보를 획득하는 단계를 포함한다.Acquiring information about a virtual person by a user terminal of the operating method of the metaverse system according to an embodiment of the present disclosure includes the steps of the user terminal acquiring authentication information by scanning a tag attached to an item owned by the user; The user terminal transmits the authentication information, the user's identification information, and the identification information of the user terminal to the server; Corresponds to the virtual item and if it is determined that it is legitimate, the server storing the identification information of the virtual item and the identification information of the user terminal in the user item list corresponding to the user identification information, and the server storing the user item list as the user terminal. The step of transmitting the virtual person, the virtual space, and the virtual object on the display includes the step of displaying the virtual person, the virtual space, and the virtual object on the display, wherein the user terminal uses at least one item from among at least one item included in the user item list based on the user's selection to display the virtual person. It includes the step of obtaining information about.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 서버는 태그를 스캔하여 획득된 인증정보를 미리 결정된 주기로 사용자 단말기에 요청하는 단계, 서버의 요청에 대응하여, 사용자 단말기가 태그를 스캔하여 인증정보를 획득해야 함을 나타내는 정보를 출력하는 단계, 서버가 태그를 재스캔하여 획득된 인증정보, 사용자의 식별정보 및 사용자 단말기의 식별정보를 사용자 단말기로부터 재수신하는 단계, 재수신된 인증정보가 가상 아이템에 대응하며 정당하고, 재수신된 사용자 식별코드에 대응되는 사용자 아이템 리스트 내에 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보가 포함되어 있는 경우, 서버가 사용자 아이템 리스트 내의 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 유지하는 단계, 및 재수신된 인증정보가 가상 아이템에 대응하지 않거나, 정당하지 않은 경우, 서버가 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하는 단계를 더 포함한다.In the method of operating the metaverse system according to an embodiment of the present disclosure, the server requests authentication information obtained by scanning the tag to the user terminal at a predetermined cycle, and in response to the server's request, the user terminal scans the tag Step of outputting information indicating that authentication information needs to be acquired, step of re-receiving, by the server, the authentication information obtained by rescanning the tag, the identification information of the user, and the identification information of the user terminal from the user terminal, the re-received authentication information corresponds to a virtual item, is legitimate, and includes the identification information of the virtual item and the identification information of the re-received user terminal in the user item list corresponding to the re-received user identification code, the server determines the virtual item in the user item list. Maintaining the identification information of the user terminal and the identification information of the user terminal, and if the re-received authentication information does not correspond to the virtual item or is not valid, the server deletes the identification information of the virtual item from the user item list. include
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법은 서버가 미리 정해진 기간 안에 재수신된 인증정보, 재수신된 사용자의 식별정보 및 재수신된 사용자 단말기의 식별정보를 수신하지 못하는 경우, 사용자 아이템 리스트에서 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 삭제하는 단계를 더 포함한다.In the method of operating the metaverse system according to an embodiment of the present disclosure, when the server does not receive the re-received authentication information, the re-received user identification information, and the re-received user terminal identification information within a predetermined period, the user The method further includes deleting identification information of the virtual item and identification information of the user terminal from the item list.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법은 사용자로부터 아이템을 구매한 구매자의 구매자 단말기가 아이템에 부착된 태그를 스캔하여 인증정보를 획득하는 단계, 구매자 단말기가 인증정보, 구매자의 식별정보, 및 구매자 단말기의 식별정보를 서버로 송신하는 단계, 인증정보가 미리 저장되어 있는 가상 아이템에 대응되며, 정당한 것인지 여부를 서버가 결정하는 단계, 인증정보가 가상 아이템에 대응되며, 정당한 것으로 결정된 경우, 서버가 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하는 단계, 서버가 구매자의 식별코드에 대응되는 구매자 아이템 리스트에 가상 아이템의 식별정보 및 구매자 단말기의 식별정보를 저장하는 단계, 서버가 구매자의 식별코드에 대응되는 구매자 아이템 리스트를 구매자 단말기로 송신하는 단계, 및 구매자 단말기가 구매자의 선택에 기초하여 구매자의 식별코드에 대응되는 구매자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 구매자의 가상인물에 대한 정보를 획득하는 단계를 포함한다.A method of operating the metaverse system according to an embodiment of the present disclosure includes acquiring authentication information by scanning a tag attached to the item by a purchaser terminal of a purchaser who has purchased an item from a user, and obtaining authentication information by the purchaser terminal, identification of the purchaser by the purchaser terminal. Information and identification information of the purchaser terminal are transmitted to the server, the authentication information corresponds to a pre-stored virtual item and the server determines whether or not it is valid, the authentication information corresponds to the virtual item and is determined to be valid In this case, the server deletes the identification information of the virtual item from the user item list, the server stores the identification information of the virtual item and the identification information of the purchaser terminal in the purchaser item list corresponding to the purchaser's identification code, and the server stores the purchaser's terminal identification information. Transmitting a purchaser item list corresponding to the identification code of the purchaser terminal to the purchaser terminal, and the purchaser terminal using at least one of at least one item included in the purchaser item list corresponding to the purchaser's identification code based on the purchaser's selection. and obtaining information about the buyer's virtual character.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계는 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 공간의 위치 정보에 기초하여, 미리 저장되어 있는 3차원 맵 중 일부에 가상공간을 위치시키는 단계, 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 가상공간의 시간 정보에 기초하여 가상공간의 빛의 방향 및 빛의 세기를 결정하는 단계, 및 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 가상 오브젝트의 속성에 기초하여 가상공간에 적어도 하나의 가상 오브젝트를 배치하는 단계를 포함하고, 공간의 위치 정보는 3차원 위치정보이다.The step of displaying a virtual character, a virtual space, and a virtual object on the display of the operating method of the metaverse system according to an embodiment of the present disclosure is based on the location information of the space included in the information on the three-dimensional virtual space of the user terminal. locating the virtual space on some of the pre-stored 3D maps, the user terminal determines the direction of light and the intensity of light in the virtual space based on the time information of the virtual space included in the information on the 3D virtual space. determining the intensity, and arranging, by a user terminal, at least one virtual object in the virtual space based on attributes of the virtual object included in information about the 3-dimensional virtual space, wherein the position information of the space is 3 It is dimensional location information.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 로그 정보를 획득하는 단계는 사용자 단말기의 디스플레이의 해상도를 획득하는 단계, 디스플레이의 해상도에 기초하여 디스플레이의 미리 정해진 일부 영역을 관심 영역으로 설정하는 단계, 및 관심 영역 내에 미리 정해진 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계를 포함한다.Obtaining log information of the operating method of the metaverse system according to an embodiment of the present disclosure includes obtaining a resolution of a display of a user terminal, setting a predetermined partial area of the display as an area of interest based on the resolution of the display. and including, in log information, virtual object information of interest including identification information of a virtual object displayed within a region of interest for a predetermined threshold time or longer.
본 개시의 메타버스 시스테은 사용자 단말기, 관리자 단말기 및 서버를 포함하고, 하이퍼리얼리티의 메타버스를 구현하며, 본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법은 서버가 가상공간의 속성 및 가상 오브젝트의 속성을 포함하는 3차원의 가상공간에 대한 정보를 사용자 단말기로 송신하는 단계, 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계, 사용자 단말기가 3차원의 가상공간에 대한 정보 및 가상인물에 대한 정보에 기초하여 디스플레이에 가상인물, 가상공간 및 가상 오브젝트 중 적어도 하나를 표시하는 단계, 사용자 단말기가 사용자의 입력에 기초하여 가상인물이 가상공간에서 이동하고, 가상 오브젝트와 상호작용하도록 제어하는 단계, 사용자 단말기는 가상인물의 가상공간에서의 위치, 가상인물이 가상공간에서의 위치에 머문 시간, 가상인물의 위치에서 사용자 단말기의 디스플레이에 표시된 가상 오브젝트, 및 가상 오브젝트와 상호작용한 내역을 포함하는 로그 정보를 획득하는 단계, 및 사용자 단말기는 로그 정보를 사용자 단말기의 식별정보와 함께 서버로 송신하는 단계를 포함한다.The metaverse system of the present disclosure includes a user terminal, an administrator terminal, and a server, and implements a metaverse of hyperreality. Transmitting information on the 3D virtual space including object attributes to the user terminal, obtaining information on the virtual character by the user terminal, and obtaining the information on the 3D virtual space and the virtual character by the user terminal. displaying at least one of a virtual person, a virtual space, and a virtual object on a display based on information about the virtual character, and controlling the user terminal to move the virtual character in the virtual space and interact with the virtual object based on the user's input. , The user terminal includes the location of the virtual character in the virtual space, the time the virtual character stayed at the location in the virtual space, the virtual object displayed on the display of the user terminal at the location of the virtual character, and the history of interaction with the virtual object. Acquiring log information, and transmitting, by the user terminal, the log information together with identification information of the user terminal to the server.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계는 사용자 단말기가 사용자가 소유한 아이템에 부착된 태그를 스캔하여 인증정보를 획득하는 단계, 사용자 단말기가 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버로 송신하는 단계, 서버가 인증정보가 미리 저장되어 있는 가상 아이템에 대응되며, 정당한 것인지 여부를 결정하는 단계, 인증정보가 가상 아이템에 대응되며, 정당한 것으로 결정된 경우, 서버가 사용자의 식별정보에 대응되는 사용자 아이템 리스트에 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 저장하는 단계, 및 서버가 사용자 아이템 리스트를 사용자 단말기로 송신하는 단계를 포함하고, 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계는 사용자 단말기는 사용자의 선택에 기초하여 사용자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 가상인물에 대한 정보를 획득하는 단계를 포함한다.Acquiring information about a virtual person by a user terminal of the operating method of the metaverse system according to an embodiment of the present disclosure includes the steps of the user terminal acquiring authentication information by scanning a tag attached to an item owned by the user; The user terminal transmits the authentication information, the user's identification information, and the identification information of the user terminal to the server; Corresponds to the virtual item and if it is determined that it is legitimate, the server storing the identification information of the virtual item and the identification information of the user terminal in the user item list corresponding to the user identification information, and the server storing the user item list as the user terminal. Including the step of transmitting, and the step of displaying the virtual person, virtual space, and virtual object on a display, the user terminal uses at least one of at least one item included in the user item list based on the user's selection to display the virtual person. It includes the step of obtaining information about.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법은 서버는 태그를 스캔하여 획득된 인증정보를 미리 결정된 주기로 사용자 단말기에 요청하는 단계, 서버의 요청에 대응하여, 사용자 단말기가 태그를 스캔하여 인증정보를 획득해야 함을 나타내는 정보를 출력하는 단계, 서버가 태그를 재스캔하여 획득된 인증정보, 사용자의 식별정보 및 사용자 단말기의 식별정보를 사용자 단말기로부터 재수신하는 단계, 재수신된 인증정보가 가상 아이템에 대응하며 정당하고, 재수신된 사용자 식별코드에 대응되는 사용자 아이템 리스트 내에 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보가 포함되어 있는 경우, 서버가 사용자 아이템 리스트 내의 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 유지하는 단계, 및 재수신된 인증정보가 가상 아이템에 대응하지 않거나, 정당하지 않은 경우, 서버가 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하는 단계를 더 포함한다.A method of operating the metaverse system according to an embodiment of the present disclosure includes the steps of a server requesting authentication information obtained by scanning a tag to a user terminal at a predetermined cycle, and in response to a request from the server, the user terminal scans the tag Step of outputting information indicating that authentication information needs to be acquired, step of re-receiving, by the server, the authentication information obtained by rescanning the tag, the identification information of the user, and the identification information of the user terminal from the user terminal, the re-received authentication information corresponds to a virtual item, is legitimate, and includes the identification information of the virtual item and the identification information of the re-received user terminal in the user item list corresponding to the re-received user identification code, the server determines the virtual item in the user item list. Maintaining the identification information of the user terminal and the identification information of the user terminal, and if the re-received authentication information does not correspond to the virtual item or is not valid, the server deletes the identification information of the virtual item from the user item list. include
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계는 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 공간의 위치 정보에 기초하여, 미리 저장되어 있는 3차원 맵 중 일부에 가상공간을 위치시키는 단계, 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 가상공간의 시간 정보에 기초하여 가상공간의 빛의 방향 및 빛의 세기를 결정하는 단계, 및 사용자 단말기가 3차원의 가상공간에 대한 정보에 포함된 가상 오브젝트의 속성에 기초하여 가상공간에 적어도 하나의 가상 오브젝트들을 배치하는 단계를 포함하고, 공간의 위치 정보는 3차원 위치정보이다.The step of displaying a virtual character, a virtual space, and a virtual object on the display of the operating method of the metaverse system according to an embodiment of the present disclosure is based on the location information of the space included in the information on the three-dimensional virtual space of the user terminal. locating the virtual space on some of the pre-stored 3D maps, the user terminal determines the direction of light and the intensity of light in the virtual space based on the time information of the virtual space included in the information on the 3D virtual space. determining the intensity, and arranging, by a user terminal, at least one virtual object in the virtual space based on the attribute of the virtual object included in the information about the 3-dimensional virtual space, wherein the position information of the space is 3 It is dimensional location information.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 3차원의 가상공간에 대한 정보를 사용자 단말기로 송신하는 단계는 관리자 단말기가 서버에 사용자 단말기의 식별정보, 사용자의 식별정보, 및 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계, 서버가 사용자 단말기에게 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계, 사용자 단말기가 실제 공간의 매매 또는 임대 계약과 관련된 정보에 대한 승낙 정보 및 사용자 단말기의 식별정보 및 사용자의 식별정보를 서버로 송신하는 단계, 서버는 승낙 정보를 수신한 경우, 관리자 단말기로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한지 결정하는 단계, 및 관리자 단말기로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한 경우, 서버는 사용자 단말기로 3차원의 가상공간에 대한 정보를 송신하는 단계를 포함한다.The step of transmitting the information on the 3D virtual space of the method of operating the metaverse system according to an embodiment of the present disclosure to the user terminal includes the identification information of the user terminal, the identification information of the user, and the virtual space by the manager terminal to the server. Sending information related to a contract for sale or lease of real space corresponding to the step of sending information related to a contract for sale or lease of real space to the user terminal by the server; Transmitting consent information about information, identification information of a user terminal, and identification information of a user to a server, when the server receives the consent information, the identification information of the user terminal and the identification information of the user received from the manager terminal determining whether the identification information of the user terminal and the identification information of the user received from the manager terminal are identical to the identification information of the user terminal and the identification information of the user received from the manager terminal; If it is the same as the identification information, the server includes transmitting information about the 3D virtual space to the user terminal.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 로그 정보를 획득하는 단계는 사용자 단말기의 디스플레이의 해상도를 획득하는 단계, 디스플레이의 해상도에 기초하여 디스플레이의 미리 정해진 일부 영역을 관심 영역으로 설정하는 단계, 관심 영역 내에 미리 정해진 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계, 및 가상인물이 상호작용한 가상 오브젝트 및 상호작용의 내용을 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계를 포함한다.Obtaining log information of the operating method of the metaverse system according to an embodiment of the present disclosure includes obtaining a resolution of a display of a user terminal, setting a predetermined partial area of the display as an area of interest based on the resolution of the display. including information on the virtual object of interest, including identification information of a virtual object displayed within a region of interest for a predetermined threshold time or longer, in log information; and including virtual object information in log information.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법의 서버는 로그 정보에 기초하여, 복수의 사용자들이 가상공간에서 자주 들리는 혼잡 위치에 대한 정보를 결정하는 단계, 서버는 혼잡 위치에 대응하는 실제 공간의 위치로부터 가까울 수록 상가의 임대료를 높게 결정하는 단계, 서버는 로그 정보에 포함된 관심 가상 오브젝트 정보에 기초하여 복수의 사용자들이 자주 이용하는 가상 오브젝트를 결정하는 단계, 및 서버는 자주 이용하는 가상 오브젝트를 관리자 단말기에 송신하는 단계를 포함한다.The server of the operating method of the metaverse system according to an embodiment of the present disclosure determines information about a congestion location that a plurality of users often hear in a virtual space based on log information, and the server determines the actual congestion location corresponding to the congestion location. Determining, by the server, a virtual object frequently used by a plurality of users based on virtual object information of interest included in the log information, and determining, by the server, the frequently used virtual object and transmitting to the manager terminal.
본 개시의 일 실시예에 따른 메타버스 시스템의 동작 방법은 사용자 단말기가 서버에 저장된 복수의 후보 가상 오브젝트에 포함된 구매 오브젝트에 대한 구매 신호, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버로 송신하는 단계, 서버가 구매 신호가 정당한 것인지 여부를 결정하는 단계, 구매 신호가 정당한 것으로 결정된 경우, 서버는 사용자의 식별정보에 대응되는 사용자 오브젝트 리스트에 구매 오브젝트의 식별정보 및 사용자 단말기의 식별정보를 저장하는 단계, 및 구매 신호가 정당한 것으로 결정된 경우, 구매 오브젝트의 속성에 포함된 구매 오브젝트의 기한까지 서버가 구매 오브젝트를 활성화하는 단계를 포함하고, 디스플레이에 가상인물, 가상공간 및 가상 오브젝트 중 적어도 하나를 표시하는 단계는 활성화된 구매 오브젝트를 표시하는 단계를 포함한다.In a method for operating a metaverse system according to an embodiment of the present disclosure, a user terminal transmits a purchase signal for a purchase object included in a plurality of candidate virtual objects stored in a server, identification information of a user, and identification information of the user terminal to a server. Transmitting, the server determining whether the purchase signal is legitimate, if the purchase signal is determined to be legitimate, the server adds the identification information of the purchased object and the identification information of the user terminal to a user object list corresponding to the user's identification information. storing, and if it is determined that the purchase signal is valid, activating the purchase object by the server until the expiration date of the purchase object included in the properties of the purchase object, wherein at least one of a virtual person, a virtual space, and a virtual object is displayed on the display. The step of displaying includes displaying the activated purchase object.
또한, 상술한 바와 같은 메타버스 시스템의 동작 방법을 구현하기 위한 프로그램은 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다.In addition, a program for implementing the method of operating the metaverse system as described above may be recorded on a computer-readable recording medium.
도 1은 본 개시의 일 실시예에 따른 메타버스 시스템의 블록도이다.1 is a block diagram of a metaverse system according to an embodiment of the present disclosure.
도 2는 본 개시의 일 실시예에 따른 메타버스 시스템의 하드웨어를 설명하기 위한 도면이다.Figure 2 is a diagram for explaining the hardware of the metaverse system according to an embodiment of the present disclosure.
도 3은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.3 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 4는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.4 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 5는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.5 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 6은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.6 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 7은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.7 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 8은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.8 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 9는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작을 나타낸 흐름도이다.9 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
도 10은 본 개시의 일 실시예에 따라 사용자 단말기(130)에 표시되는 화면을 나타낸다.10 shows a screen displayed on the user terminal 130 according to an embodiment of the present disclosure.
도 11은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작을 나타낸 흐름도이다.11 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
개시된 실시예의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 개시는 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 개시가 완전하도록 하고, 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것일 뿐이다.Advantages and features of the disclosed embodiments, and methods of achieving them, will become apparent with reference to the following embodiments in conjunction with the accompanying drawings. However, the present disclosure is not limited to the embodiments disclosed below and may be implemented in various different forms, only the present embodiments make the present disclosure complete, and those of ordinary skill in the art to which the present disclosure belongs It is provided only to fully inform the person of the scope of the invention.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 개시된 실시예에 대해 구체적으로 설명하기로 한다. Terms used in this specification will be briefly described, and the disclosed embodiments will be described in detail.
본 명세서에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 관련 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다. The terms used in this specification have been selected from general terms that are currently widely used as much as possible while considering the functions in the present disclosure, but they may vary according to the intention of a person skilled in the related field, a precedent, or the emergence of new technology. In addition, in a specific case, there is also a term arbitrarily selected by the applicant, and in this case, the meaning will be described in detail in the description of the invention. Therefore, terms used in the present disclosure should be defined based on the meaning of the term and the general content of the present disclosure, not simply the name of the term.
본 명세서에서의 단수의 표현은 문맥상 명백하게 단수인 것으로 특정하지 않는 한, 복수의 표현을 포함한다. 또한 복수의 표현은 문맥상 명백하게 복수인 것으로 특정하지 않는 한, 단수의 표현을 포함한다.Expressions in the singular number in this specification include plural expressions unless the context clearly dictates that they are singular. Also, plural expressions include singular expressions unless the context clearly specifies that they are plural.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. When it is said that a certain part "includes" a certain component throughout the specification, it means that it may further include other components without excluding other components unless otherwise stated.
또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어 또는 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.Also, the term “unit” used in the specification means a software or hardware component, and “unit” performs certain roles. However, "unit" is not meant to be limited to software or hardware. A “unit” may be configured to reside in an addressable storage medium and may be configured to reproduce on one or more processors. Thus, as an example, “unit” can refer to components such as software components, object-oriented software components, class components and task components, processes, functions, properties, procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables. Functionality provided within components and "parts" may be combined into fewer components and "parts" or further separated into additional components and "parts".
본 개시의 일 실시예에 따르면 "부"는 프로세서 및 메모리로 구현될 수 있다. 용어 "프로세서" 는 범용 프로세서, 중앙 처리 장치 (CPU), 마이크로프로세서, 디지털 신호 프로세서 (DSP), 제어기, 마이크로제어기, 상태 머신 등을 포함하도록 넓게 해석되어야 한다. 몇몇 환경에서는, "프로세서" 는 주문형 반도체 (ASIC), 프로그램가능 로직 디바이스 (PLD), 필드 프로그램가능 게이트 어레이 (FPGA) 등을 지칭할 수도 있다. 용어 "프로세서" 는, 예를 들어, DSP 와 마이크로프로세서의 조합, 복수의 마이크로프로세서들의 조합, DSP 코어와 결합한 하나 이상의 마이크로프로세서들의 조합, 또는 임의의 다른 그러한 구성들의 조합과 같은 처리 디바이스들의 조합을 지칭할 수도 있다.According to an embodiment of the present disclosure, “unit” may be implemented as a processor and a memory. The term “processor” should be interpreted broadly to include general-purpose processors, central processing units (CPUs), microprocessors, digital signal processors (DSPs), controllers, microcontrollers, state machines, and the like. In some circumstances, “processor” may refer to an application specific integrated circuit (ASIC), programmable logic device (PLD), field programmable gate array (FPGA), or the like. The term "processor" refers to a combination of processing devices, such as, for example, a combination of a DSP and a microprocessor, a combination of a plurality of microprocessors, a combination of one or more microprocessors in conjunction with a DSP core, or any other such configuration. may also refer to
용어 "메모리" 는 전자 정보를 저장 가능한 임의의 전자 컴포넌트를 포함하도록 넓게 해석되어야 한다. 용어 메모리는 임의 액세스 메모리 (RAM), 판독-전용 메모리 (ROM), 비-휘발성 임의 액세스 메모리 (NVRAM), 프로그램가능 판독-전용 메모리 (PROM), 소거-프로그램가능 판독 전용 메모리 (EPROM), 전기적으로 소거가능 PROM (EEPROM), 플래쉬 메모리, 자기 또는 광학 데이터 저장장치, 레지스터들 등과 같은 프로세서-판독가능 매체의 다양한 유형들을 지칭할 수도 있다. 프로세서가 메모리로부터 정보를 판독하고/하거나 메모리에 정보를 기록할 수 있다면 메모리는 프로세서와 전자 통신 상태에 있다고 불린다. 프로세서에 집적된 메모리는 프로세서와 전자 통신 상태에 있다.The term "memory" should be interpreted broadly to include any electronic component capable of storing electronic information. The term memory includes random access memory (RAM), read-only memory (ROM), non-volatile random access memory (NVRAM), programmable read-only memory (PROM), erasable-programmable read-only memory (EPROM), electrical may refer to various types of processor-readable media, such as erasable PROM (EEPROM), flash memory, magnetic or optical data storage, registers, and the like. A memory is said to be in electronic communication with the processor if the processor can read information from and/or write information to the memory. Memory integrated with the processor is in electronic communication with the processor.
아래에서는 첨부한 도면을 참고하여 실시예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략한다.Hereinafter, with reference to the accompanying drawings, embodiments will be described in detail so that those skilled in the art can easily carry out the embodiments. And in order to clearly describe the present disclosure in the drawings, parts irrelevant to the description are omitted.
도 1은 본 개시의 일 실시예에 따른 메타버스 시스템의 블록도이다.1 is a block diagram of a metaverse system according to an embodiment of the present disclosure.
메타버스 시스템(100)은 서버(110), 관리자 단말기(120), 및 사용자 단말기(130)를 포함할 수 있다. 서버(110)는 메타버스가 구현되어 있는 장치이다. 즉, 서버(110)는 가상공간이 렌더링 되어 있는 장치이다. 서버(110)는 관리자 단말기(120) 및 사용자 단말기(130)와 유무선으로 연결되어 있을 수 있다. 관리자 단말기(120) 및 사용자 단말기(130)는 서버(110)를 통하여 서로 데이터를 송수신할 수 있다.The metaverse system 100 may include a server 110 , an administrator terminal 120 , and a user terminal 130 . The server 110 is a device in which the metaverse is implemented. That is, the server 110 is a device in which a virtual space is rendered. The server 110 may be connected to the manager terminal 120 and the user terminal 130 by wire or wireless. The manager terminal 120 and the user terminal 130 may transmit and receive data to each other through the server 110 .
메타버스 시스템(100)은 미리 결정된 오브젝트를 활용하여 메타버스를 구현할 수 있다. 미리 결정된 오브젝트는 사용자 단말기(130) 또는 관리자 단말기(120)로부터 수신한 데이터에 기초하여 서버(110)에서 생성될 수 있다. 오브젝트는 가상공간을 구성하는 다양한 물체를 의미할 수 있다. 가상공간은 3차원으로 이루어진 공간이며, 가상공간은 벽, 가구, 가로수, 등의 물체로 채워질 수 있다. 이러한 물체를 오브젝트라고 할 수 있다. The metaverse system 100 may implement a metaverse by utilizing a predetermined object. The predetermined object may be created in the server 110 based on data received from the user terminal 130 or the manager terminal 120 . The object may refer to various objects constituting the virtual space. The virtual space is a three-dimensional space, and the virtual space can be filled with objects such as walls, furniture, and street trees. Such an object may be referred to as an object.
관리자 단말기(120)의 제어 신호에 기초하여 서버(110)는 미리 결정되어 있는 오브젝트에 기초하여 가상공간을 생성하고, 미리 저장되어 있는 오브젝트를 이용하여 가상공간을 채울 수 있다. Based on the control signal of the manager terminal 120, the server 110 may create a virtual space based on a predetermined object and fill the virtual space using a previously stored object.
사용자 단말기(130)의 제어 신호에 기초하여 서버(110)는 사용자 단말기 또는 사용자에 대응되는 가상인물을 가상공간에 배치할 수 있다. 또한, 사용자 단말기(130)의 제어신호에 기초하여 서버(110)는 가상인물이 가상공간을 돌아다니도록 제어할 수 있으며, 가상인물이 오브젝트와 상호작용하도록 제어할 수 있다. 또한, 상호작용 과정에서, 서버(110)는 가상공간의 오브젝트들을 변형할 수 있다. Based on the control signal of the user terminal 130, the server 110 may arrange a virtual person corresponding to the user terminal or the user in the virtual space. In addition, based on the control signal of the user terminal 130, the server 110 may control the virtual character to move around the virtual space and control the virtual character to interact with objects. Also, during the interaction process, the server 110 may transform objects in the virtual space.
도 2는 본 개시의 일 실시예에 따른 메타버스 시스템의 하드웨어를 설명하기 위한 도면이다.Figure 2 is a diagram for explaining the hardware of the metaverse system according to an embodiment of the present disclosure.
메타버스 시스템(100)에 포함된 서버(110), 관리자 단말기(120) 및 사용자 단말기(130)는 프로세서(210) 및 메모리(220)를 포함할 수 있다. 프로세서(210)는 메모리(220)에 저장되어 있는 명령어에 기초하여 동작을 수행할 수 있다. 하지만 이에 한정되는 것은 아니며, 서버(110), 관리자 단말기(120) 및 사용자 단말기(130)는 메모리를 포함하지 않고 프로세서(210)만 포함할 수 있다. 프로세서(210)는 입력 신호에 기초하여 미리 설정된 신호를 미리 설정된 시간동안 출력 라인으로 출력하도록 설정되어 있을 수 있다. 서버(110), 관리자 단말기(120) 및 사용자 단말기(130)의 각 부품은 신호에 따라 미리 설정된 동작을 수행할 수 있다. The server 110, the manager terminal 120, and the user terminal 130 included in the metaverse system 100 may include a processor 210 and a memory 220. The processor 210 may perform an operation based on instructions stored in the memory 220 . However, the present invention is not limited thereto, and the server 110, the manager terminal 120, and the user terminal 130 may include only the processor 210 without including a memory. The processor 210 may be configured to output a preset signal to an output line for a preset time based on an input signal. Each component of the server 110, manager terminal 120, and user terminal 130 may perform a preset operation according to a signal.
이하, 서버(110), 관리자 단말기(120) 및 사용자 단말기(130)의 동작에 대하여 보다 자세히 설명한다.Hereinafter, operations of the server 110, the manager terminal 120, and the user terminal 130 will be described in more detail.
도 3은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.3 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
관리자 단말기(120)는 관리자의 입력에 기초하여 가상공간의 속성을 획득할 수 있다. 가상공간의 속성은 가상공간을 생성하기 위해 필요한 것으로써, 가상공간의 종류 정보, 가상공간의 크기 정보, 가상공간에 대응되는 실제 공간의 위치 정보, 가상공간의 시간 정보, 및 가상공간의 모양 중 적어도 하나를 포함할 수 있다. The manager terminal 120 may obtain attributes of the virtual space based on the manager's input. The attribute of virtual space is necessary to create virtual space, and is selected from information about the type of virtual space, size information of virtual space, location information of real space corresponding to virtual space, time information of virtual space, and shape of virtual space. may contain at least one.
가상공간의 종류 정보는 가상공간의 목적과 관련된 것일 수 있다. 가상공간의 종류 정보는 전시관, 미술관, 아파트, 절, 및 교회 중 적어도 하나를 포함할 수 있다.The virtual space type information may be related to the purpose of the virtual space. The virtual space type information may include at least one of an exhibition hall, an art gallery, an apartment, a temple, and a church.
가상공간의 크기 정보는, 가상공간의 지표면의 면적을 나타낼 수 있다. 가상공간의 크기 정보는 픽셀(복셀)의 개수로 나타날 수 있다. 예를 들어 가상공간의 크기 정보는 가로 변에 포함된 픽셀의 개수 세로 변에 포함된 픽셀의 개수를 포함할 수 있다. 또한 가상공간의 크기 정보는 실제 공간의 면적으로 나타날 수 있으며, 단위는 평방미터 또는 평일 수 있다. 가상공간의 크기 정보는 공간의 높이를 포함할 수도 있다.The size information of the virtual space may represent the area of the ground surface of the virtual space. Size information of the virtual space may be represented by the number of pixels (voxels). For example, the size information of the virtual space may include the number of pixels included in the horizontal side and the number of pixels included in the vertical side. In addition, the size information of the virtual space may be expressed as an area of a real space, and the unit may be a square meter or a weekday. The size information of the virtual space may include the height of the space.
가상공간에 대응되는 실제 공간의 위치 정보는 실제 공간의 GPS 좌표정보 또는 주소정보를 포함할 수 있다. 본 개시의 메타버스 시스템의 서버는 실제공간에 대응되는 위치에 가상공간을 하이퍼 리얼리티로 구현하기 위하여 실제공간의 위치 정보를 이용할 수 있다. 실제공간의 위치 정보는 3차원 좌표정보일 수 있다. 실제공간의 위치 정보는 위도정보, 경도정보, 및 높이(고도) 정보를 포함할 수 있다. 예를 들어 실제공간의 위치 정보는 2차원 정보인 GPS 정보에 높이 정보를 더 포함할 수 있다. 서버(110) 또는 사용자 단말기는 가상공간에 대응되는 실제 공간의 위치 정보에 기초하여 가상공간의 강 또는 산과 같은 지형, 나무 또는 건물과 같은 지물을 자동으로 생성할 수 있다. 서버(110) 또는 사용자 단말기(130)는 위실제 공간의 위치 정보에 대응되는 지형 또는 지물에 대한 정보를 미리 저장하고 있을 수 있다.The location information of the real space corresponding to the virtual space may include GPS coordinate information or address information of the real space. The server of the metaverse system of the present disclosure may use the location information of the real space to implement the virtual space in hyper reality at a location corresponding to the real space. The location information in real space may be 3D coordinate information. The location information in real space may include latitude information, longitude information, and height (altitude) information. For example, location information in real space may further include height information in GPS information, which is 2D information. The server 110 or the user terminal may automatically create a terrain such as a river or mountain in the virtual space, a feature such as a tree or a building, based on location information of a real space corresponding to the virtual space. The server 110 or the user terminal 130 may store information on topography or features corresponding to the location information of the above real space in advance.
가상공간의 시간 정보는 가상의 시간을 나타낼 수 있다. 가상의 시간은 날짜, 요일, 시, 분, 또는 초 중 적어도 하나를 포함할 수 있다. 가상의 시간에 기초하여 서버(110), 또는 사용자 단말기(130)는 해의 위치, 달의 위치, 가로등의 켜짐 여부, 자동차의 헤드라이트 켜짐 여부, 가상공간 및 가상공간 주변의 조명의 켜짐 여부를 결정할 수 있다. 이와 같이 가상공간의 시간 정보에 기초하여 가상공간 및 가상공간 주변의 빛이 자동으로 제어되므로, 사용자는 사용자 단말기를 이용하여 가상공간을 실제공간처럼 느낄 수 있다. 가상공간의 시간 정보는 현재 시간과 동일할 수 있다. 하지만 이에 한정되지 않는다. 가상공간의 시간 정보는 가상공간에 대응되는 실제 공간의 위치 정보에 기초하여 결정될 수 있다. 즉, 서버(110)는 가상공간의 위치 정보에 대응되는 시간대를 가상공간의 시간 정보로 결정할 수 있다. 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)의 입력에 기초하여 실제 시간과 다르게 가상공간의 시간 정보를 결정할 수 있다.Time information of virtual space may represent virtual time. The virtual time may include at least one of a date, day, hour, minute, or second. Based on the virtual time, the server 110 or the user terminal 130 determines the position of the sun, the position of the moon, whether street lights are turned on, whether the headlights of the car are turned on, whether lights in the virtual space and surroundings of the virtual space are turned on. can decide As such, since the virtual space and light around the virtual space are automatically controlled based on the time information of the virtual space, the user can feel the virtual space as a real space using the user terminal. Time information of the virtual space may be the same as the current time. But not limited to this. Time information of the virtual space may be determined based on location information of a real space corresponding to the virtual space. That is, the server 110 may determine the time zone corresponding to the location information of the virtual space as the time information of the virtual space. The server 110 may determine the time information of the virtual space differently from the actual time based on the input of the manager terminal 120 or the user terminal 130 .
가상공간의 모양은 3차원의 다면체형상일 수 있다. 가상공간의 모양은 예를 들어 직육면체일 수 있다. 하지만 이에 한정되는 것은 아니며, 가상공간의 종류 정보가 아파트인 경우, 복수의 방, 거실, 및 주방 등을 포함하므로 복잡한 다면체 형상을 가질 수 있다.The shape of the virtual space may be a three-dimensional polyhedral shape. The shape of the virtual space may be, for example, a rectangular parallelepiped. However, it is not limited thereto, and when the type information of the virtual space is an apartment, it may have a complex polyhedral shape because it includes a plurality of rooms, a living room, and a kitchen.
관리자 단말기(120)가 가상공간의 속성을 획득하는 과정에 대해서는 추후 보다 자세히 설명한다.A process in which the manager terminal 120 acquires the properties of the virtual space will be described in detail later.
서버(110)는 가상공간의 시간 정보 및 실제 공간의 위치 정보를 포함하는 가상공간의 속성을 관리자 단말기(120)로부터 획득하는 단계(311)를 수행할 수 있다. 가상공간의 시간 정보 및 실제 공간의 위치 정보에 대해서는 위에서 미리 설명하였으므로 자세한 설명은 생략한다. 가상공간의 속성은 서버(110)가 가상공간의 뼈대를 만들기 위한 정보를 포함하고 있을 수 있다.The server 110 may perform step 311 of obtaining attributes of the virtual space including time information of the virtual space and location information of the real space from the manager terminal 120 . Since the time information of the virtual space and the location information of the real space have been previously described above, a detailed description thereof will be omitted. The attributes of the virtual space may include information for the server 110 to create a skeleton of the virtual space.
서버(110)는 가상공간의 속성에 기초하여 3차원의 가상공간에 대한 정보를 생성하는 단계(321)를 수행할 수 있다. 서버(110)는 가상공간의 종류 정보에 기초하여 미리 저장된 복수의 후보 가상공간의 모양을 메모리로부터 획득할 수 있다. 또한 서버(110)는 가상공간의 종류 정보에 기초하여 가상공간에 배치될 수 있는 복수의 후보 가상 오브젝트들을 획득할 수 있다. 서버(110)는 관리자 단말기(120)로부터의 신호에 기초하여 복수의 후보 가상공간의 모양 중 하나의 가상공간의 모양을 결정하고, 복수의 후보 가상 오브젝트들 중 가상공간에 배치될 가상 오브젝트를 결정할 수 있다.The server 110 may perform step 321 of generating information on the 3D virtual space based on the attributes of the virtual space. The server 110 may acquire shapes of a plurality of candidate virtual spaces stored in advance based on information on types of virtual spaces from a memory. Also, the server 110 may obtain a plurality of candidate virtual objects that may be disposed in the virtual space based on the type information of the virtual space. The server 110 determines the shape of one virtual space among the shapes of a plurality of candidate virtual spaces based on the signal from the manager terminal 120, and determines a virtual object to be placed in the virtual space among the plurality of candidate virtual objects. can
서버(110)는 미리 저장되어 있는 3차원 맵에서 실제공간의 위치 정보에 대응되는 3차원 맵을 불러올 수 있다. 여기서 3차원 맵은 지형, 지물을 3차원으로 표시한 지도를 의미할 수 있다. 3차원 맵은 국가기관, 또는 지방자치단체 등에서 제공될 수 있다. 예를 들어 3차원 맵은 서울시에서 제공하는 3차원 맵과 같을 수 있다.The server 110 may retrieve a 3D map corresponding to location information in real space from a pre-stored 3D map. Here, the 3D map may refer to a map in which topography and features are displayed in 3D. The 3D map may be provided by national organizations or local governments. For example, the 3D map may be the same as the 3D map provided by the Seoul Metropolitan Government.
서버(110)는 가상공간의 속성에 포함된 가상공간의 모양에 기초하여 가상공간의 모양을 결정할 수 있다. 가상공간은 다면체형상일 수 있다. The server 110 may determine the shape of the virtual space based on the shape of the virtual space included in the attributes of the virtual space. The virtual space may have a polyhedral shape.
서버(110)는 가상공간의 크기 정보에 기초하여 가상공간의 모양을 결정할 수도 있다. 예를 들어, 가상공간의 모양이 직육면체로 결정된 경우, 서버(110)는 가상공간의 크기 정보에 기초하여 자동으로 가상공간의 모양을 결정할 수 있다. 가상공간의 크기 정보는 가로폭, 세로폭 및 높이를 포함할 수 있다.The server 110 may determine the shape of the virtual space based on the size information of the virtual space. For example, when the shape of the virtual space is determined to be a rectangular parallelepiped, the server 110 may automatically determine the shape of the virtual space based on size information of the virtual space. Size information of the virtual space may include a horizontal width, a vertical width, and a height.
이미 설명한 바와 같이 실제공간의 위치 정보는 3차원 좌표정보일 수 있다. 즉 실제공간의 위치는 지면에서의 위치 정보 뿐만 아니라, 높이 정보를 포함할 수 있다. 서버(110)는 3차원 맵에서 실제공간의 위치 정보에 대응되는 곳에 다면체형상의 가상공간을 배치할 수 있다. As already described, the location information in real space may be 3D coordinate information. That is, the location in real space may include height information as well as location information on the ground. The server 110 may arrange a polyhedron-shaped virtual space at a location corresponding to the location information of the real space on the 3D map.
또한, 서버(110)는 가상공간의 시간 정보에 기초하여 해의 위치, 달의 위치, 가로등의 켜짐 여부, 자동차의 헤드라이트 켜짐 여부, 가상공간 및 가상공간 주변의 조명의 켜짐 여부를 결정할 수 있다. 예를 들어 가상공간의 시간 정보가 낮인 경우, 빛을 낼 수 있는 오브젝트들은 불을 켜지 않을 수 있다. 또한, 가상공간의 시간 정보가 밤인 경우, 빛을 낼 수 있는 오브젝트들은 불을 켜지 않을 수 있다. 빛을 낼 수 있는 오브젝트는, 해, 달, 실내 조명등, 가로등, 또는 자동차 등일 수 있다. In addition, the server 110 may determine the position of the sun, the position of the moon, whether a street light is turned on, whether the headlights of a car are turned on, and whether lights in the virtual space and surroundings of the virtual space are turned on based on the time information of the virtual space. . For example, when the time information of the virtual space is low, objects capable of emitting light may not light up. Also, when the time information of the virtual space is night, objects capable of emitting light may not be lit. An object capable of emitting light may be the sun, the moon, an indoor light, a street lamp, or an automobile.
서버(110)는 관리자 단말기(120)로부터 관리자의 입력을 수신하지 않고도 가상공간의 주변에 배치되는 기본 가상 오브젝트를 가상공간의 주변에 배치할 수 있다. 기본 가상 오브젝트는 가상공간의 외부에 배치되어 가상공간의 분위기를 형성하고, 하이퍼 리얼리티를 구현하기 위한 구성일 수 있다. 예를 들어 가상 공간 외부의 나무, 해, 달, 가로등, 나무, 풀, 지형물, 구조물(건물), 또는 자동차 등을 포함할 수 있다. 서버(110)는 실제공간의 위치 별로 미리 조사된 자료를 저장하고 있을 수 있다. 서버(110)는 실제공간의 위치에 기초하여 기본 가상 오브젝트를 가상공간의 주변에 자동으로 배치할 수 있다. 미리 조사된 자료는 거리뷰 영상에 물체 인식프로그램을 적용하여 생성될 수 있다. 관리자 단말기(120)로부터 수신된 관리자의 입력에 기초하여 서버(110)는 기본 가상 오브젝트의 위치, 종류, 또는 숫자 등을 수정할 수 있다.The server 110 may arrange basic virtual objects around the virtual space without receiving a manager's input from the manager terminal 120 . The basic virtual object may be arranged outside the virtual space to form an atmosphere of the virtual space and implement hyper reality. For example, it may include a tree, sun, moon, street light, tree, grass, terrain, structure (building), or car outside the virtual space. The server 110 may store pre-examined data for each location in the real space. The server 110 may automatically arrange basic virtual objects around the virtual space based on the location of the real space. The pre-examined data may be generated by applying an object recognition program to a street view image. Based on the manager's input received from the manager terminal 120, the server 110 may modify the location, type, or number of the basic virtual object.
또한, 서버(110)는 가상공간의 시간 정보에 기초하여 도로의 차량의 수를 조절할 수 있다. 예를 들어 서버(110)는 교통량에 대한 정보를 외부의 서버로부터 수신할 수 있다. 서버(110)는 요일, 도로, 시간에 따른 교통량에 대한 정보를 수신할 수 있다. 서버(110)는 교통량을 미리 정해진 시간동안 저장할 수 있다. 여기서 미리 정해진 시간은 4주 이상 52주 이하일 수 있다. 또한 서버(110)는 미리 정해진 시간동안 획득된 교통량에 기초하여 평균적인 교통량을 획득할 수 있다. 서버(110)는 가상공간의 시간 정보에 기초하여 가상공간에 대응되는 실제공간의 위치의 주변의 도로의 평균적인 교통량을 획득할 수 있다. 여기서 가상공간의 시간 정보는 요일, 또는 시간과 관련될 수 있다. 또한 서버(110)는 주변의 도로의 평균적인 교통량에 대응되는 가상 오브젝트인 차량의 수를 결정할 수 있다. 서버(110)는 평균적인 교통량과 차량의 수를 대응시킨 테이블을 미리 저장하고 있을 수 있다. 또한 서버(110)는 사용자 단말기(130)가 결정된 차량의 수만큼 차량을 도로에 표시하도록 제어할 수 있다. 사용자 단말기(130)는 결정된 차량의 수에 기초한 소음을 발생시킬 수 있다. 즉, 결정된 차량의 수가 많을 수록 소음이 커질 수 있다. 사용자는 실제 공간에 가보지 않고서도, 가상의 공간에서 소음의 정도를 체감해볼 수 있다. 또한 시간이 밤인 경우, 서버(110)는 차량들이 헤드라이트를 켜도록 할 수 있다. 따라서 사용자는 사용자 단말기(130)에 표시된 차량의 헤드라이트에 기초하여 빛공해를 체험하거나, 실제공간에서의 밤의 정취를 가상공간에서 미리 즐겨볼 수 있다.Also, the server 110 may adjust the number of vehicles on the road based on time information of the virtual space. For example, the server 110 may receive traffic information from an external server. The server 110 may receive information on traffic volume according to day of the week, road, and time. The server 110 may store the traffic volume for a predetermined time. Here, the predetermined time may be 4 weeks or more and 52 weeks or less. In addition, the server 110 may obtain an average traffic volume based on the traffic volume obtained for a predetermined period of time. The server 110 may obtain the average traffic volume of roads around the location of the real space corresponding to the virtual space based on the time information of the virtual space. Here, the time information of the virtual space may be related to the day of the week or time. In addition, the server 110 may determine the number of vehicles, which are virtual objects, corresponding to the average traffic volume of surrounding roads. The server 110 may store in advance a table in which average traffic volume corresponds to the number of vehicles. In addition, the server 110 may control the user terminal 130 to display as many vehicles as the determined number of vehicles on the road. The user terminal 130 may generate noise based on the determined number of vehicles. That is, as the determined number of vehicles increases, noise may increase. Users can experience the level of noise in a virtual space without going to the actual space. Also, when the time is night, the server 110 may cause vehicles to turn on their headlights. Therefore, the user can experience light pollution based on the headlights of the vehicle displayed on the user terminal 130 or enjoy the mood of the night in the real space in advance in the virtual space.
서버(110)는 가상 오브젝트의 속성을 획득하는 단계(322)를 수행할 수 있다. 여기서 가상 오브젝트는 가상공간의 내부 및 외부에 배치되는 가상의 오브젝트를 의미할 수 있다. 가상 오브젝트의 속성은 오브젝트의 식별정보, 종류, 질감(텍스쳐), 색, 모양, 크기, 및 위치 중 적어도 하나를 포함할 수 있다. 가상 오브젝트의 종류는 배경(나무, 풀, 화단, 인공물), 건물(벽, 계단, 창문, 문), 가구, 자동차 등을 포함할 수 있다. 가상 오브젝트는 기본 가상 오브젝트를 포함할 수 있다. 가상 오브젝트 각각은 식별정보를 포함할 수 있다. 서버(110), 관리자 단말기(120) 및 사용자 단말기(130)는 가상 오브젝트의 식별정보에 기초하여 가상 오브젝트를 특정 지을 수 있다. 서버(110)는 가상 오브젝트에 대한 3차원 모델 및 색깔을 저장하고 있을 수 있다. 가상 오브젝트의 속성에 대한 설명은 가상 아이템의 속성에 대해 적용될 수 있다. 가상 오브젝트는 가상공간을 꾸미기 위해 사용된다면, 가상 아이템은 가상인물을 꾸미기 위해 사용될 수 있다.The server 110 may perform step 322 of acquiring properties of the virtual object. Here, the virtual object may refer to a virtual object disposed inside or outside the virtual space. The attribute of the virtual object may include at least one of object identification information, type, texture, color, shape, size, and location. Types of virtual objects may include backgrounds (trees, grass, flower beds, artifacts), buildings (walls, stairs, windows, doors), furniture, cars, and the like. Virtual objects may include basic virtual objects. Each virtual object may include identification information. The server 110, the manager terminal 120, and the user terminal 130 may specify a virtual object based on identification information of the virtual object. The server 110 may store the 3D model and color of the virtual object. The description of properties of virtual objects may be applied to properties of virtual items. If virtual objects are used to decorate a virtual space, virtual items can be used to decorate virtual characters.
서버(110)는 가상 오브젝트의 속성에 포함되는 질감(텍스쳐)의 정보를 미리 저장하고 있을 수 있다. 즉, 서버(110)는 가상 오브젝트에 적용될 수 있는 복수의 질감의 정보를 질감 데이터베이스로써, 미리 저장하고 있을 수 있다. 질감의 정보는 가상 오브젝트의 표면의 2차원 정보, 3차원 정보, 무늬 또는 색 중 적어도 하나를 포함할 수 있다. 예를 들어 동일한 벽이라고 하더라도, 벽지의 종류가 바뀌면 질감이 달라질 수 있다. 마찬가지로 서버(110)는 질감의 정보에 기초하여 가상 오브젝트의 표면의 느낌을 다르게 설정할 수 있다. 질감의 정보는 단위 면적에 대한 정보만 표현할 수 있다. 가상 오브젝트의 단위 면적보다 큰 영역을 커버하기 위하여, 서버(110)는 가상 오브젝트의 표면에 질감의 정보를 반복적으로 반영할 수 있다. The server 110 may previously store texture information included in the attributes of the virtual object. That is, the server 110 may previously store information on a plurality of textures applicable to virtual objects as a texture database. Texture information may include at least one of 2D information, 3D information, pattern, or color of the surface of the virtual object. For example, even if it is the same wall, if the type of wallpaper is changed, the texture may be different. Similarly, the server 110 may differently set the feel of the surface of the virtual object based on texture information. Texture information can only express information about a unit area. In order to cover an area larger than the unit area of the virtual object, the server 110 may repeatedly reflect texture information on the surface of the virtual object.
질감의 정보는 2차원 정보일 수 있으나 이에 한정되는 것은 아니고 3차원을 형태를 가질 수 있다. 질감의 정보가 3차원 정보인 경우, 하이퍼 리얼리티를 보다 쉽게 구현할 수 있다. 예를 들어, 가상 오브젝트인 내벽에 대한 질감의 정보는, 2차원 정보에 표현된 무늬 또는 색일 수 있다. 실제 세계에서 내벽은 대부분 2차원의 벽지로 마감되므로, 내벽에 대한 질감 정보는 2차원의 면에 표현된 무늬 또는 색으로 충분할 수 있다. 하지만, 실제 세계의 외벽의 경우, 벽돌 및 벽돌들 사이의 줄눈이 포함될 수 있으며, 3차원의 굴곡이 있을 수 있다. 이러한 3차원의 질감을 가상 공간에 구현하기 위하여 본 개시의 질감의 정보는 3차원 모양을 포함할 수 있다. 질감의 정보는 부조형태를 나타내는 정보일 수 있다. 즉, 가상 공간에서 외부로 노출되는 부분은 3차원으로 구현되지만, 외부로 노출되지 않는 부분은 평면이거나 구현되지 않을 수 있다. 3차원의 질감의 정보는 평평한 기준면에 대하여 굴곡을 가지는 표면 정보, 표면에 표현되는 무늬 및 색을 포함할 수 있다. 기준면은 가상공간의 가상 오브젝트와 맞닿는 면일 수 있고 표면 정보는 기준면의 반대면으로써, 가상 공간에서 사용자에게 보여지는 면일 수 있다. 표면 정보는 기준면에 대한 서로 다른 거리를 가지는 점들의 집합일 수 있다.Texture information may be 2-dimensional information, but is not limited thereto and may have a 3-dimensional form. When texture information is 3D information, hyper reality can be more easily implemented. For example, texture information on an inner wall, which is a virtual object, may be a pattern or color expressed in 2D information. In the real world, since most interior walls are finished with 2D wallpaper, texture information on the interior walls may be sufficient as a pattern or color expressed on a 2D surface. However, in the case of an outer wall in the real world, bricks and joints between bricks may be included, and there may be three-dimensional curves. In order to implement such a 3D texture in a virtual space, texture information according to the present disclosure may include a 3D shape. Texture information may be information representing a relief shape. That is, a portion exposed to the outside in the virtual space is implemented in 3D, but a portion not exposed to the outside may be flat or not implemented. The 3D texture information may include surface information having a curve with respect to a flat reference plane, and patterns and colors expressed on the surface. The reference plane may be a surface in contact with a virtual object in the virtual space, and the surface information may be a surface opposite to the reference plane, which is visible to the user in the virtual space. The surface information may be a set of points having different distances from the reference plane.
서버(110)는 가상 오브젝트의 외면을 표현하기 위하여 적어도 하나의 3차원의 질감 정보를 포함할 수 있다. 또한 서버(110)는 단위 면적에 대한 3차원의 질감의 정보를 가상 오브젝트의 표면에 반복적으로 적용하여 넓은 면적의 가상 오브젝트의 표면을 구성할 수 있다. 단위 면적은 정사각형일 수 있다. 단위 면적의 질감의 정보에 포함된 표면 정보의 가장자리의 기준면에 대한 거리는 일정할 수 있다. 따라서 복수의 단위 면적의 질감의 정보가 결합되어도 이어지는 느낌이 날 수 있다. 하지만 이에 한정되는 것은 아니다.The server 110 may include at least one piece of 3D texture information to represent the outer surface of the virtual object. In addition, the server 110 may repeatedly apply 3D texture information for a unit area to the surface of the virtual object to configure the surface of the virtual object with a large area. A unit area may be a square. The distance of the edge of the surface information included in the texture information of unit area to the reference plane may be constant. Therefore, even if texture information of a plurality of unit areas is combined, a feeling of being connected may occur. However, it is not limited thereto.
서버(110)는 가상 오브젝트에 대하여 초기 질감의 정보를 설정할 수 있다. 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터의 신호에 기초하여 가상 오브젝트에 반영된 질감의 정보를 변경할 수 있다. 보다 구체적으로 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터 가상 오브젝트에 대한 질감 식별자를 수신할 수 있다. 서버(110)는 수신된 질감 식별자에 대응하는 질감의 정보를 가상 오브젝트에 반영할 수 있다. 같은 모양의 오브젝트라도 서로 다른 질감의 정보가 적용되어 다른 가상 오브젝트의 느낌을 사용자에게 제공할 수 있다. 예를 들어 벽에 서로 다른 질감의 정보가 적용되어 가상 공간이 구현되는 경우, 사용자는 가상 공간으로부터 서로 다른 느낌을 받을 수 있다. 본 개시에 따르면, 질감 데이터베이스에 저장된 복수의 질감의 정보를 이용하여 사용자는 가상 공간에 적용된 직감의 정보를 쉽게 변경할 수 있으며, 가상 공간을 실제공간에 가깝게 구현할 수 있다. 또한 사용자는, 실제 공간에 서로 다른 질감의 마감을 사용할 경우, 공간이 뿜어내는 분위기를 가상공간에서 미리 느껴볼 수 있다. The server 110 may set initial texture information for the virtual object. The server 110 may change texture information reflected in the virtual object based on a signal from the manager terminal 120 or the user terminal 130 . More specifically, the server 110 may receive a texture identifier for a virtual object from the manager terminal 120 or the user terminal 130 . The server 110 may reflect texture information corresponding to the received texture identifier to the virtual object. Even objects having the same shape may provide users with a feeling of different virtual objects by applying different texture information. For example, when a virtual space is implemented by applying different texture information to a wall, a user may experience different feelings from the virtual space. According to the present disclosure, a user can easily change intuition information applied to a virtual space by using information on a plurality of textures stored in a texture database, and can implement a virtual space closer to a real space. In addition, when using different textured finishes in a real space, the user can feel the atmosphere emitted by the space in advance in the virtual space.
질감의 정보는 가상 오브젝트의 종류별로 분류되어 있을 수 있다. 사용자 단말기(130) 또는 관리자 단말기(120)는 먼저 가상 오브젝트의 종류를 선택할 수 있다. 사용자 단말기(130) 또는 관리자 단말기(120)는 선택된 가상 오브젝트의 종류에 대응되는 복수의 질감의 정보를 표시할 수 있다. 사용자 단말기(130) 또는 관리자 단말기(120)는 사용자 또는 관리자의 입력에 기초하여 출력된 복수의 질감 정보 중 하나의 질감 정보를 선택할 수 있다.Texture information may be classified according to the type of virtual object. The user terminal 130 or the manager terminal 120 may first select the type of virtual object. The user terminal 130 or the manager terminal 120 may display a plurality of pieces of texture information corresponding to the type of the selected virtual object. The user terminal 130 or the manager terminal 120 may select one piece of texture information from among a plurality of pieces of output texture information based on a user's or manager's input.
서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터 가상 오브젝트의 속성을 수신할 수 있다. 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터 수신한 가상 오브젝트의 속성에 기초하여 가상공간에 가상 오브젝트를 배치할 수 있다. 즉, 서버(110)는 미리 저장되어 있는 복수의 후보 가상 오브젝트 중에서 관리자 단말기(120) 또는 사용자 단말기(130)로부터 가상 오브젝트의 속성에 기초하여 선택된 가상 오브젝트를 가상공간에 배치할 수 있다. 또한 가상 오브젝트의 속성은 관리자 또는 사용자가 입력한 것일 수도 있고 관리자 단말기(120) 또는 사용자 단말기(130)가 자동으로 생성한 것일 수 있다. 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터 수신한 가상 오브젝트의 속성에 기초하여 가상 오브젝트의 3차원 모델의 색, 모양, 크기를 수정할 수 있다. The server 110 may receive attributes of virtual objects from the manager terminal 120 or the user terminal 130 . The server 110 may arrange a virtual object in the virtual space based on the attribute of the virtual object received from the manager terminal 120 or the user terminal 130 . That is, the server 110 may arrange a virtual object selected from among a plurality of previously stored candidate virtual objects based on the attribute of the virtual object from the manager terminal 120 or the user terminal 130 in the virtual space. Also, the attribute of the virtual object may be input by a manager or a user, or may be automatically generated by the manager terminal 120 or the user terminal 130 . The server 110 may modify the color, shape, and size of the 3D model of the virtual object based on the attributes of the virtual object received from the manager terminal 120 or the user terminal 130 .
가상 오브젝트의 속성에 포함된 위치 정보는 가상공간 내에서 가상 오브젝트의 위치를 의미할 수 있다. 가상 오브젝트의 속성에 포함된 위치 정보는 3차원 좌표계로 표현될 수 있다. 가상 오브젝트의 속성에 포함된 위치 정보는 가상 오브젝트의 오리엔테이션 정보를 포함할 수 있다. 오리엔테이션 정보는 가상공간에서 가상 오브젝트의 배치방향 및 회전정도를 포함할 수 있다. 배치방향 및 회전정도 역시 3차원 좌표계로 표현될 수 있다.Positional information included in the attributes of the virtual object may mean the position of the virtual object in the virtual space. Location information included in the properties of the virtual object may be expressed in a 3D coordinate system. The location information included in the attributes of the virtual object may include orientation information of the virtual object. The orientation information may include an arrangement direction and rotation degree of virtual objects in the virtual space. Arrangement direction and degree of rotation can also be expressed in a three-dimensional coordinate system.
서버(110) 3차원의 가상공간에 대한 정보에 가상 오브젝트의 속성을 포함하는 단계(323)를 수행할 수 있다. 즉, 서버(110)는 가상공간에 배치되는 가상 오브젝트의 속성을 가상공간에 대한 정보에 병합하여 저장할 수 있다. 3차원의 가상공간에 대한 정보는 가상공간의 속성 및 가상 오브젝트의 속성을 포함할 수 있다. 따라서 서버(110)는 가상공간에 대한 정보만을 사용자 단말기(130)에 송신하면, 사용자 단말기(130)는 서버(110)에 구현된 가상공간 및 가상 오브젝트를 디스플레이에 표시할 수 있다.The server 110 may perform step 323 of including the attribute of the virtual object in the information about the 3D virtual space. That is, the server 110 may merge and store the attributes of virtual objects disposed in the virtual space with information about the virtual space. Information on the 3D virtual space may include attributes of the virtual space and attributes of the virtual object. Accordingly, when the server 110 transmits only information about the virtual space to the user terminal 130, the user terminal 130 can display the virtual space and virtual objects implemented in the server 110 on the display.
서버(110)는 3차원의 가상공간에 대한 정보를 사용자 단말기(130)로 송신하는 단계(324)를 수행할 수 있다. 서버(110)는 3차원의 가상공간에 대한 정보 중 일부를 사용자 단말기(130)에 송신할 수도 있다. 예를 들어 서버(110)는 사용자 단말기(130)가 가상공간 및 가상 오브젝트를 표시하는데 필요한 정보만을 송신할 수 있다. 사용자 단말기(130)는 3차원의 가상공간에 대한 정보를 수신할 수 있다. 사용자 단말기(130)는 3차원의 가상공간에 대한 정보에 기초하여 가상공간 및 가상 오브젝트를 디스플레이에 표시할 수 있다.The server 110 may perform step 324 of transmitting information about the 3D virtual space to the user terminal 130 . The server 110 may transmit some of the information on the 3D virtual space to the user terminal 130 . For example, the server 110 may transmit only information necessary for the user terminal 130 to display virtual space and virtual objects. The user terminal 130 may receive information about a 3D virtual space. The user terminal 130 may display virtual space and virtual objects on a display based on information about the 3D virtual space.
사용자 단말기(130)는 가상인물에 대한 정보를 획득하는 단계(331)를 수행할 수 있다. 사용자 단말기(130)는 가상인물에 대한 정보를 사용자 단말기(130)의 메모리에서 획득하거나, 서버(110)로부터 수신할 수 있다. The user terminal 130 may perform step 331 of acquiring information about the virtual person. The user terminal 130 may acquire information about the virtual person from the memory of the user terminal 130 or may receive it from the server 110 .
가상인물에 대한 정보는 가상인물의 외모에 대한 렌더링 정보를 포함할 수 있다. 가상인물의 외모는 가상인물의 피부색, 체형 모델, 얼굴의 모델을 포함할 수 있다. 체형 모델은 어린이 타입, 청소년 타입, 어른 타입, 노인 타입을 포함할 수 있다. 체형 모델은 신장 정보를 포함할 수 있다. 얼굴의 모델은, 눈의 위치, 눈 사이의 거리, 눈의 크기, 눈의 모양, 눈의 색, 코의 위치, 코의 모양, 코의 높이, 입의 위치, 입의 모양, 머리 스타일, 또는 머리 색 등을 포함할 수 있다.The information on the virtual character may include rendering information about the appearance of the virtual character. The appearance of the virtual character may include a skin color, a body type model, and a face model of the virtual character. The body type model may include a child type, a youth type, an adult type, and an elderly type. The body shape model may include height information. The model of the face may be the position of the eyes, the distance between the eyes, the size of the eyes, the shape of the eyes, the color of the eyes, the position of the nose, the shape of the nose, the height of the nose, the position of the mouth, the shape of the mouth, the hair style, or hair color, etc.
가상인물에 대한 정보는 소지아이템(아이템)에 대한 정보를 포함할 수 있다. 소지아이템은 가상인물이 착용하는 옷, 장신구, 가방 등을 포함할 수 있다. 가상인물에 대한 정보는 옷의 식별정보, 옷의 색 중 적어도 하나를 포함할 수 있다. 옷의 식별정보는 옷의 모양에 따라 달라질 수 있다. 가상인물에 대한 정보는 장신구의 식별정보, 장신구의 색, 가방의 식별정보 및 가방의 색 중 적어도 하나를 포함할 수 있다. 사용자 단말기(130)는 가상인물에 대한 정보에 기초하여 가상공간에 가상인물을 표시할 수 있다. 본 개시에서 아이템은 가상인물을 꾸미기 위해 사용되며, 오브젝트는 가상공간을 꾸미기 위해 사용된다.The information about the virtual person may include information about the possessed item (item). Possessed items may include clothes, accessories, and bags worn by the virtual character. Information about the virtual character may include at least one of identification information of clothes and color of clothes. Identification information of clothes may vary according to the shape of the clothes. The information about the virtual person may include at least one of accessory identification information, accessory color, bag identification information, and bag color. The user terminal 130 may display a virtual person in a virtual space based on information about the virtual person. In the present disclosure, items are used to decorate virtual characters, and objects are used to decorate virtual spaces.
사용자 단말기(130)가 3차원의 가상공간에 대한 정보 및 가상인물에 대한 정보에 기초하여 디스플레이에 가상인물, 가상공간 및 가상 오브젝트 중 적어도 하나를 표시하는 단계(332)를 수행할 수 있다. 사용자 단말기(130)가 가상공간을 1인칭 시점으로 구현하는 경우, 가상인물은 디스플레이에 표시되지 않을 수 있다. 사용자는 사용자 단말기(130)를 통하여 1인칭 시점으로 가상공간을 체험할 수 있다. 사용자 단말기(130)가 가상공간을 3인칭 시점으로 구현하는 경우, 가상인물은 디스플레이에 표시될 수 있다. 사용자는 자신의 가상인물이 가상공간에 있는 모습을 체험하면서 가상공간이 풍겨내는 분위기를 느낄 수 있다. 가상공간에서 복수의 사용자의 가상인물이 활동할 수 있다. 하지만 이에 한정되는 것은 아니며, 가상공간에서 하나의 사용자의 가상인물만이 활동할 수 있다.The user terminal 130 may perform step 332 of displaying at least one of a virtual person, a virtual space, and a virtual object on a display based on the information on the 3D virtual space and the information on the virtual person. When the user terminal 130 implements the virtual space as a first-person view, virtual characters may not be displayed on the display. The user may experience the virtual space from a first-person perspective through the user terminal 130 . When the user terminal 130 implements the virtual space as a third-person view, the virtual person may be displayed on the display. Users can feel the atmosphere created by the virtual space while experiencing their virtual character in the virtual space. Virtual characters of a plurality of users may be active in the virtual space. However, it is not limited thereto, and only one user's virtual character can be active in the virtual space.
이하에서는 도 9와 함께, 사용자 단말기(130)가 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계(332)를 보다 자세히 설명한다. Hereinafter, step 332 of displaying virtual characters, virtual spaces, and virtual objects on the display by the user terminal 130 together with FIG. 9 will be described in more detail.
도 9는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작을 나타낸 흐름도이다.9 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
도 9를 참조하면, 사용자 단말기(130)는 디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계(332)를 수행하기 위하여 다음과 같은 과정을 더 수행할 수 있다. 사용자 단말기(130)는 3차원의 가상공간에 대한 정보에 포함된 공간의 위치 정보에 기초하여, 미리 저장되어 있는 3차원 맵 중 일부에 가상공간을 위치시키는 단계(910)를 수행할 수 있다. 즉, 서버(110)가 3차원 맵에서 실제공간의 위치 정보에 대응되는 곳에 가상공간을 배치한 것과 동일하게 사용자 단말기(130)는 미리 저장되어 있는 3차원 맵 중 상기 공간의 위치 정보에 대응되는 위치에 가상공간을 위치시킬 수 있다. 서버(110)가 사용하는 3차원 맵은 사용자 단말기(130)가 사용하는 3차원 맵과 동일할 수 있다. 사용자 단말기(130)는 서버(110)로부터 3차원 맵을 미리 수신하여 저장하고 있을 수 있다.Referring to FIG. 9 , the user terminal 130 may further perform the following process to perform step 332 of displaying a virtual person, a virtual space, and a virtual object on a display. The user terminal 130 may perform step 910 of locating the virtual space on a part of the pre-stored 3D map based on the location information of the space included in the information on the 3D virtual space. That is, in the same way that the server 110 arranges the virtual space at a location corresponding to the location information of the real space on the 3D map, the user terminal 130 has a location corresponding to the location information of the space among the pre-stored 3D maps. A virtual space can be placed in a location. The 3D map used by the server 110 may be the same as the 3D map used by the user terminal 130 . The user terminal 130 may receive and store the 3D map from the server 110 in advance.
서버(110)가 기본 가상 오브젝트를 가상공간의 주변에 배치한 것과 같이, 사용자 단말기(130)는 기본 가상 오브젝트들을 가상공간에 배치할 수 있다. 이미 설명한 바와 같이 기본 가상 오브젝트는 가상공간의 외부에 배치되어 가상공간의 분위기를 형성하고, 하이퍼 리얼리티를 구현하기 위한 구성일 수 있다. 예를 들어 가상 공간 외부의 나무, 해, 달, 가로등, 나무, 풀, 지형물, 구조물(건물), 또는 자동차 등을 포함할 수 있다. 서버(110)는 실제공간의 위치 별로 미리 조사된 자료를 저장하고 있을 수 있으며 미리 조사된 자료는 사용자 단말기(130)로 송신될 수 있다. 사용자 단말기(130)는 실제공간의 위치 및 서버로부터 수신된 미리 조사된 자료에 기초하여 기본 가상 오브젝트를 가상공간의 주변에 자동으로 배치할 수 있다. 또한 사용자 단말기(130)는 사용자의 입력에 기초하여 기본 가상 오브젝트의 위치, 종류, 또는 숫자 등을 수정할 수 있다. 공간의 위치 정보는 3차원 위치정보일 수 있다. 즉 3개의 축에 대한 값을 포함할 수 있다. 또한 사용자 단말기(130)가 사용하는 공간의 위치 정보는 실제 공간의 위치 정보에 대응될 수 있다. 서버(110)가 가상공간 주변의 차량의 수를 결정하는 과정에 대해서는 이미 설명하였으며, 사용자 단말기(130) 역시 동일한 과정을 수행할 수 있다.Just as the server 110 arranges the basic virtual objects around the virtual space, the user terminal 130 may arrange the basic virtual objects in the virtual space. As already described, the basic virtual object may be arranged outside the virtual space to form an atmosphere of the virtual space and implement hyper reality. For example, it may include a tree, sun, moon, street light, tree, grass, terrain, structure (building), or car outside the virtual space. The server 110 may store pre-surveyed data for each location in the real space, and the pre-surveyed data may be transmitted to the user terminal 130 . The user terminal 130 may automatically arrange basic virtual objects around the virtual space based on the location of the real space and pre-surveyed data received from the server. Also, the user terminal 130 may modify the location, type, or number of the basic virtual object based on the user's input. The spatial location information may be 3D location information. That is, it may include values for three axes. Also, location information of a space used by the user terminal 130 may correspond to location information of a real space. The process of determining the number of vehicles around the virtual space by the server 110 has already been described, and the user terminal 130 can also perform the same process.
사용자 단말기(130)는 3차원의 가상공간에 대한 정보에 포함된 가상공간의 시간 정보에 기초하여 가상공간의 빛의 방향 및 빛의 세기를 결정하는 단계(920)를 수행할 수 있다. 예를 들어 사용자 단말기(130)는 가상공간의 시간 정보에 기초하여 태양의 위치 및 달의 위치를 결정할 수 있다. 또한 달의 크기를 결정할 수 있다. 여기서 가상공간의 태양 및 달은 기본 가상 오브젝트에 포함될 수 있다. 사용자 단말기(130)는 태양의 위치, 달의 위치 및 달의 크기 중 적어도 하나를 이용하여 가상공간의 빛의 방향 및 빛의 세기를 렌더링할 수 있다. 이와 같이 빛의 방향 및 빛의 세기가 현실과 유사하게 결정되므로 사용자는 가상공간에서 하이퍼 리얼리티를 느낄 수 있다.The user terminal 130 may perform step 920 of determining the direction and intensity of light in the virtual space based on the time information of the virtual space included in the information about the 3D virtual space. For example, the user terminal 130 may determine the position of the sun and the position of the moon based on time information of the virtual space. It can also determine the size of the moon. Here, the sun and moon in virtual space may be included in basic virtual objects. The user terminal 130 may render the direction and intensity of light in the virtual space using at least one of the position of the sun, the position of the moon, and the size of the moon. As such, since the direction and intensity of light are determined similarly to reality, the user can feel hyper reality in the virtual space.
사용자 단말기(130)는 3차원의 가상공간에 대한 정보에 포함된 가상 오브젝트의 속성에 기초하여 가상공간에 적어도 하나의 가상 오브젝트를 배치하는 단계(930)를 수행할 수 있다. 가상 오브젝트의 속성에 포함된 위치 정보는 가상공간 내에서 가상 오브젝트의 위치를 의미할 수 있다. 가상 오브젝트의 속성에 포함된 위치 정보는 3차원 좌표계로 표현될 수 있다. 가상 오브젝트의 속성에 포함된 위치 정보는 가상 오브젝트의 오리엔테이션 정보를 포함할 수 있다. 오리엔테이션 정보는 가상공간에서 가상 오브젝트의 배치방향 및 회전정도를 포함할 수 있다. 배치방향 및 회전정도 역시 3차원 좌표계로 표현될 수 있다.The user terminal 130 may perform step 930 of arranging at least one virtual object in the virtual space based on the attribute of the virtual object included in the information about the 3D virtual space. Positional information included in the attributes of the virtual object may mean the position of the virtual object in the virtual space. Location information included in the properties of the virtual object may be expressed in a 3D coordinate system. The location information included in the attributes of the virtual object may include orientation information of the virtual object. The orientation information may include an arrangement direction and rotation degree of virtual objects in the virtual space. Arrangement direction and degree of rotation can also be expressed in a three-dimensional coordinate system.
사용자는 사용자 단말기(130)를 이용하여 현실의 공간을 구현한 하이퍼 리얼리티의 가상공간을 체험할 수 있다. 가상 공간은 실제공간의 위치에 대응되는 가상의 위치에 구현되므로, 사용자는 실제공간을 미리 체험해볼 수 있는 효과가 있다. 예를 들어 가상공간에 배치된 오브젝트들은 실제공간의 과거의 오브젝트들일 수 있다. 따라서 사용자는 실제공간의 과거모습을 가상공간에서 체험할 수 있다. 또한 가상공간에 배치된 오브젝트들은 실제공간의 미래 예상 오브젝트들일 수 있다. 따라서 사용자는 실제공간의 미래모습을 가상공간에서 체험할 수 있다. 예를 들어 서버(110)는 복수의 시간대에 각각 대응되는 가상 오브젝트의 속성을 저장하고 있을 수 있다. 또한 서버(110)는 사용자 단말기(130)로부터 날짜 정보 또는 시대 정보를 획득하는 경우, 해당 날짜 정보 또는 시대 정보에 대응되는 가상 오브젝트의 속성을 획득할 수 있다. 또한 서버(110)는 획득된 가상 오브젝트의 속성에 기초하여 가상공간에 가상 오브젝트들을 배치할 수 있다. 따라서 사용자는 시간에 따른 공간의 변화를 쉽게 체험할 수 있다.The user can experience a hyper-reality virtual space that embodies a real space by using the user terminal 130 . Since the virtual space is implemented at a virtual location corresponding to the location of the real space, the user can experience the real space in advance. For example, objects placed in the virtual space may be past objects in the real space. Therefore, the user can experience the past of the real space in the virtual space. In addition, objects arranged in the virtual space may be future expected objects in the real space. Therefore, the user can experience the future of the real space in the virtual space. For example, the server 110 may store attributes of virtual objects respectively corresponding to a plurality of time zones. Also, when obtaining date information or time period information from the user terminal 130, the server 110 may obtain attributes of a virtual object corresponding to the corresponding date information or time period information. Also, the server 110 may arrange virtual objects in the virtual space based on the acquired attributes of the virtual objects. Therefore, the user can easily experience the change of space according to time.
도 4는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.4 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
사용자 단말기(130)가 사용자의 입력에 기초하여 가상인물이 가상공간에서 이동하고, 가상 오브젝트와 상호작용하도록 제어하는 단계(410)를 수행할 수 있다. 가상인물은 가상 오브젝트와 미리 정해져 있는 상호작용할 수 있다. 미리 정해진 상호작용은 가상인물의 자세를 변형하거나, 가상 오브젝트의 위치, 색 또는 형태를 변형할 수 있다. 예를 들어 가상 오브젝트가 의자라면 가상인물은 가상 오브젝트에 앉는 상호작용을 할 수 있다. 가상인물은 가상 오브젝트에 앉는 동작을 취할 수 있다. 또한 가상 오브젝트가 전등이라면, 가상인물은 전등을 켜거나 끄는 동작을 취할 수 있다. 가상 오브젝트는 가상인물의 동작에 대응하여 불이 켜지거나 꺼질 수 있다. 가상 오브젝트가 시소라면, 가상인물은 가상 오브젝트에 앉는 상호작용을 할 수 있으며, 가상 오브젝트인 시소는 가상인물이 앉는 동작에 대응하여 움직일 수 있다.The user terminal 130 may perform step 410 of controlling the virtual character to move in the virtual space and interact with the virtual object based on the user's input. The virtual character may have a predetermined interaction with the virtual object. The predetermined interaction may transform a posture of a virtual character or a position, color, or shape of a virtual object. For example, if the virtual object is a chair, the virtual character can interact to sit on the virtual object. The virtual character may perform a sitting motion on the virtual object. Also, if the virtual object is a light, the virtual character can take an action to turn on or turn off the light. The virtual object may be turned on or off in response to the motion of the virtual character. If the virtual object is a seesaw, the virtual character can interact to sit on the virtual object, and the seesaw, which is a virtual object, can move in response to the motion of the virtual character sitting down.
사용자 단말기(130)는 가상인물의 가상공간에서의 위치, 가상인물이 가상공간에서의 위치에 머문 시간, 가상인물의 위치에서 사용자 단말기의 디스플레이에 표시된 가상 오브젝트, 및 가상 오브젝트와 상호작용한 내역을 포함하는 로그 정보를 획득하는 단계(420)를 수행할 수 있다. The user terminal 130 records the location of the virtual character in the virtual space, the time the virtual character stayed at the location in the virtual space, the virtual object displayed on the display of the user terminal at the location of the virtual character, and details of interaction with the virtual object. Step 420 of acquiring log information including the log information may be performed.
가상인물의 가상공간에서의 위치는 3차원 좌표로 나타날 수 있다. 사용자 단말기(130)는 미리 정해진 주기로 가상인물의 위치를 획득할 수 있다. 미리 정해진 주기는 5초, 10초 또는 1분, 또는 10분 등일 수 있다.The position of the virtual character in the virtual space may be represented by 3D coordinates. The user terminal 130 may obtain the position of the virtual person at a predetermined period. The predetermined period may be 5 seconds, 10 seconds or 1 minute, or 10 minutes or the like.
사용자 단말기(130)는 가상인물이 가상공간을 적어도 하나의 영역으로 나눌 수 있다. 예를 들어 가상공간이 집이라면, 적어도 하나의 영역은, 현관, 거실, 주방, 방, 또는 베란다 등으로 나뉠 수 있다. 사용자 단말기(130)는 가상인물이 적어도 하나의 영역에 머문 시간을 가상공간에서의 위치에 머문 시간으로 결정할 수 있다. 사용자 단말기(130)는 적어도 하나의 영역의 식별정보 및 적어도 하나의 영역에서 머문 시간을 함께 획득할 수 있다. 가상인물이 적어도 하나의 영역에 머문 시간은 분 또는 초의 단위를 가질 수 있다. In the user terminal 130, a virtual character may divide a virtual space into at least one area. For example, if the virtual space is a house, at least one area may be divided into an entrance, a living room, a kitchen, a room, or a veranda. The user terminal 130 may determine the time the virtual person stays in at least one area as the time the virtual person stays in the location in the virtual space. The user terminal 130 may acquire identification information of at least one area and time spent in the at least one area. The time the virtual character stays in at least one region may have a unit of minutes or seconds.
사용자 단말기(130)는 가상인물의 위치에서 사용자 단말기의 디스플레이에 표시된 가상 오브젝트를 획득할 수 있다. 사용자 단말기(130)는 가상인물이 가상 오브젝트와 상호작용하지 않더라도, 사용자 단말기(130)에 표시된 가상 오브젝트의 식별정보를 미리 정해진 주기로 획득할 수 있다. 미리 정해진 주기는 5초, 10초 또는 1분, 또는 10분 등일 수 있다. 예를 들어, 가상공간이 공원이고 가상인물이 공원 벤치에 앉아 있다면, 가상인물은 가상 오브젝트인 공원 벤치와 상호작용하고 있는 것이다. 사용자 단말기(130)는 가상인물이 벤치에 앉아 있는 모습 뿐만 아니라, 가상인물 주위의 나무, 풀, 가로등을 표시할 수 있다. 사용자 단말기(130)는 가상인물 주위에 있으면서, 사용자 단말기에 표시된 가상 오브젝트들의 식별정보를 주기적으로 획득할 수 있다. 이러한 표시된 가상 오브젝트 식별정보는 사용자의 예측된 선호 오브젝트로써 활용될 수 있다. 즉, 표시된 가상 오브젝트 식별정보는 사용자의 취향을 나타내는 정보로써 활용될 수 있다.The user terminal 130 may obtain a virtual object displayed on the display of the user terminal at the position of the virtual person. The user terminal 130 may obtain the identification information of the virtual object displayed on the user terminal 130 at predetermined cycles even if the virtual person does not interact with the virtual object. The predetermined period may be 5 seconds, 10 seconds or 1 minute, or 10 minutes or the like. For example, if the virtual space is a park and the virtual character is sitting on a park bench, the virtual character is interacting with the virtual object, the park bench. The user terminal 130 may display not only the virtual character sitting on a bench, but also trees, grass, and streetlights around the virtual character. The user terminal 130 may periodically obtain identification information of virtual objects displayed on the user terminal while being around the virtual person. Such displayed virtual object identification information may be utilized as a user's predicted preference object. That is, the displayed virtual object identification information may be used as information representing a user's taste.
도 10을 잠시 참조하여 로그 정보를 획득하는 과정을 보다 자세히 설명한다.A process of obtaining log information will be described in more detail with reference to FIG. 10 for a moment.
도 10은 본 개시의 일 실시예에 따라 사용자 단말기(130)에 표시되는 화면을 나타낸다.10 shows a screen displayed on the user terminal 130 according to an embodiment of the present disclosure.
사용자 단말기(130)는 로그 정보를 획득하는 단계(420)를 수행하기 위하여 다음과 같은 과정을 더 수행할 수 있다. 사용자 단말기(130)는 사용자 단말기(130)의 디스플레이(1010)의 해상도를 획득하는 단계를 수행할 수 있다. 디스플레이(1010)의 해상도는 디스플레이의 최대 해상도를 의미할 수 있다. 해상도는 가로 픽셀의 개수 및 세로 픽셀의 개수를 포함할 수 있다. 사용자 단말기(130)는 디스플레이(1010)의 해상도에 기초하여 디스플레이의 미리 정해진 일부 영역을 관심 영역(1020)으로 설정하는 단계를 수행할 수 있다. 예를 들어, 사용자 단말기(130)는 관심 영역(1020)이 디스플레이(1010)의 해상도의 넓이의 1/8이상 1/4이하의 넓이를 가지도록 결정할 수 있다. 또한 사용자 단말기(130)는 관심 영역(1020)의 중점이 디스플레이(1010)의 중점과 일치하도록 결정할 수 있다. 사용자 단말기(130)는 관심 영역 내에 미리 정해진 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계를 수행할 수 있다. 여기서 임계 시간은 10초 이상의 값을 가질 수 있다. 적어도 일정 시간 이상 가상 오브젝트를 화면의 가운데에 위치시켰다는 것은, 사용자가 가상 오브젝트에 관심을 표현하였다는 것을 나타낼 수 있다. 따라서 사용자 단말기(130)는 로그 정보에 관심 영역에 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함할 수 있다. 사용자 단말기(130) 또는 서버(110)는 추후 로그 정보를 빅데이터로 이용하여 사용자에 따라 선호하는 가상 오브젝트를 도출할 수 있다. 따라서 사용자 단말기(130) 또는 서버(110)는 사용자 맞춤형 가상 오브젝트를 제공할 수 있다.The user terminal 130 may further perform the following process in order to perform step 420 of acquiring log information. The user terminal 130 may perform a step of acquiring the resolution of the display 1010 of the user terminal 130 . The resolution of the display 1010 may mean the maximum resolution of the display. The resolution may include the number of horizontal pixels and the number of vertical pixels. The user terminal 130 may perform a step of setting a predetermined partial region of the display as the region of interest 1020 based on the resolution of the display 1010 . For example, the user terminal 130 may determine the area of interest 1020 to have an area greater than 1/8 and less than 1/4 of the area of the resolution of the display 1010 . Also, the user terminal 130 may determine that the center of the region of interest 1020 coincides with the center of the display 1010 . The user terminal 130 may perform a step of including, in the log information, virtual object information of interest including identification information of a virtual object displayed in the region of interest for a predetermined threshold time or longer. Here, the threshold time may have a value of 10 seconds or more. Positioning the virtual object in the center of the screen for at least a predetermined period of time may indicate that the user expressed interest in the virtual object. Accordingly, the user terminal 130 may include identification information of a virtual object displayed in the region of interest for a threshold period of time or longer in the log information. The user terminal 130 or the server 110 may later use the log information as big data to derive virtual objects preferred by the user. Accordingly, the user terminal 130 or the server 110 may provide a user-customized virtual object.
다시 도 4를 참조하면, 사용자 단말기(130)는 로그 정보를 사용자 단말기의 식별정보와 함께 서버(110)로 송신하는 단계(430)를 수행할 수 있다. 사용자 단말기(130)는 로그 정보를 미리 정해진 시간동안 수집할 수 있다. 또한 사용자 단말기(130)는 미리 정해진 시간동안 수집한 로그 정보를 서버(110)로 송신할 수 있다. 사용자 단말기(130)는 로그 정보를 사용자 식별정보에 대응하여 서버(110)에 송신할 수 있다. 사용자 단말기(130)는 서버(110)로 송신된 로그 정보를 삭제할 수 있다. 서버(110)는 로그 정보를 누적하여 저장할 수 있다. 이와 같이 사용자 단말기(130)에서 로그 정보를 삭제함으로써, 사용자 단말기(130)의 메모리를 절약할 수 있다. 또한 로그 정보는 서버(110)에서 빅데이터로 활용될 뿐, 사용자 단말기(130)에서 활용되지 않으므로, 필요한 곳에만 저장되어 있는 효과가 있다.Referring back to FIG. 4 , the user terminal 130 may perform step 430 of transmitting log information to the server 110 together with identification information of the user terminal. The user terminal 130 may collect log information for a predetermined period of time. Also, the user terminal 130 may transmit log information collected during a predetermined time to the server 110 . The user terminal 130 may transmit log information to the server 110 in response to user identification information. The user terminal 130 may delete log information transmitted to the server 110 . The server 110 may accumulate and store log information. By deleting log information from the user terminal 130 in this way, memory of the user terminal 130 can be saved. In addition, since the log information is used only as big data in the server 110 and is not utilized in the user terminal 130, it has an effect of being stored only where necessary.
도 5는 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.5 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 2에서 서버(110)가 가상 오브젝트의 속성을 획득하는 단계(311)는 다음과 같은 과정을 포함할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 영상획득장치를 이용하여 실제 오브젝트 또는 실제 아이템이 포함된 소스 영상을 획득하는 단계(511)를 수행할 수 있다. 영상획득장치는 2D 카메라 또는 3D 카메라일 수 있다. 영상획득장치가 2D카메라인 경우, 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트 또는 실제 아이템의 6면에 대한 소스 영상을 획득할 수 있다. 6면은 정면도, 배면도, 좌측면도, 우측면도, 평면도, 저면도를 포함할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트 또는 실제 아이템의 6면도를 이용하여 직육면체의 3차원 형태에 대한 정보를 생성할 수 있다. 영상획득장치가 3D 카메라인 경우, 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트 또는 실제 아이템의 3차원 형태에 대한 정보를 소스 영상으로써 획득할 수 있다. 3차원 형태에 대한 정보는 3차원 모델링 데이터일 수 있다. 3차원 형태에 대한 정보는 닫힌 다면체에 대한 것일 수 있다. In FIG. 2 , step 311 in which the server 110 obtains the property of the virtual object may include the following process. The manager terminal 120 or the user terminal 130 may perform step 511 of obtaining a source image including a real object or real item using an image capture device. The image capture device may be a 2D camera or a 3D camera. If the image capture device is a 2D camera, the manager terminal 120 or the user terminal 130 may obtain source images for six sides of a real object or real item. The six sides may include a front view, a rear view, a left view, a right view, a top view, and a bottom view. The manager terminal 120 or the user terminal 130 may generate information about the 3D shape of a rectangular parallelepiped using 6 plane views of a real object or real item. When the image capture device is a 3D camera, the manager terminal 120 or the user terminal 130 may acquire information about the 3D shape of a real object or real item as a source image. Information on the 3D shape may be 3D modeling data. Information about a three-dimensional shape may be for a closed polyhedron.
실제 오브젝트 또는 실제 아이템이 포함된 소스 영상은 실제 오브젝트 또는 실제 아이템에 대한 태그, 6면도, 3차원 형태에 대한 정보 중 적어도 하나를 포함할 수 있다. 실제 오브젝트 또는 실제 아이템에 대한 태그는 실제 오브젝트 또는 실제 아이템을 설명하기 위한 적어도 하나의 용어일 수 있다. 태그는, 실제 오브젝트 또는 실제 아이템의 종류, 브랜드, 중 적어도 하나를 포함할 수 있다. 태그는 실제 오브젝트 또는 실제 아이템에 부착된 QR, 또는 바코드 등의 표식일 수 있다.A source image including a real object or real item may include at least one of a tag, a 6-side view, and information on a 3D shape of the real object or real item. A tag for a real object or real item may be at least one term for describing the real object or real item. The tag may include at least one of the type and brand of a real object or real item. The tag may be a mark such as QR or barcode attached to a real object or real item.
관리자 단말기(120) 또는 사용자 단말기(130)는 소스 영상으로부터 실제 오브젝트의 속성 또는 실제 아이템의 속성을 획득하는 단계(512)를 수행할 수 있다. 실제 오브젝트의 속성 또는 실제 아이템의 속성은 이미 설명한 가상 오브젝트의 속성 또는 가상 아이템의 속성에 대응될 수 있다. 실제 오브젝트의 속성 또는 실제 아이템의 속성은 오브젝트 또는 아이템의 식별정보, 종류, 질감(텍스처), 색, 모양, 크기, 및 위치 중 적어도 하나를 포함할 수 있다. 실제 오브젝트의 속성 또는 실제 아이템의 속성에 포함되는 정보들에 대한 설명은 가상 오브젝트의 속성 또는 가상 아이템의 속성에 포함되는 정보들에 대한 설명과 중복되므로 생략한다.The manager terminal 120 or the user terminal 130 may perform step 512 of obtaining properties of a real object or a property of a real item from a source image. Properties of real objects or properties of real items may correspond to properties of virtual objects or properties of virtual items that have already been described. The property of the real object or the property of the real item may include at least one of identification information, type, texture (texture), color, shape, size, and position of the object or item. A description of the information included in the properties of the real object or the properties of the real item is omitted because it overlaps with the description of the information included in the properties of the virtual object or the virtual item.
관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 속성 또는 실제 아이템의 속성을 서버(110)로부터 수신할 수 있다. 예를 들어 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 태그의 영상을 획득할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 촬영부를 포함할 수 있으며, 촬영부를 이용하여 태그의 영상을 획득할 수 있다. 관리자 단말기(120)는 태그의 영상으로부터 실제 오브젝트의 식별정보를 획득할 수 있다. 실제 오브젝트의 식별정보는 실제 오브젝트의 품목, 일렬번호, 브랜드, 또는 제조일자 중 적어도 하나와 관련될 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 식별정보를 서버(110)로 송신할 수 있다. 서버(110)는 실제 오브젝트의 식별정보에 대응되는 실제 오브젝트의 속성을 미리 저장되어 있는 데이터베이스로부터 획득할 수 있다. 서버(110)는 가상 오브젝트의 속성을 관리자 단말기(120) 또는 사용자 단말기(130)로 송신할 수 있다. 사용자 또는 관리자는 수신한 가상 오브젝트의 속성을 확인할 수 있다. 만약 미리 저장되어 있는 데이터베이스에 실제 오브젝트의 식별정보에 대응되는 실제 오브젝트의 속성이 없다면, 서버(110)는 실제 오브젝트의 속성을 요청하는 신호를 관리자 단말기(120) 또는 사용자 단말기(130)로 송신할 수 있다.The manager terminal 120 or the user terminal 130 may receive properties of real objects or properties of real items from the server 110 . For example, the manager terminal 120 or the user terminal 130 may obtain an image of a tag of a real object. The manager terminal 120 or the user terminal 130 may include a photographing unit, and may obtain an image of the tag using the photographing unit. The manager terminal 120 may obtain identification information of a real object from the image of the tag. Identification information of the real object may be associated with at least one of item, serial number, brand, or manufacturing date of the real object. The manager terminal 120 or the user terminal 130 may transmit identification information of a real object to the server 110 . The server 110 may obtain attributes of a real object corresponding to the identification information of the real object from a pre-stored database. The server 110 may transmit the properties of the virtual object to the manager terminal 120 or the user terminal 130 . A user or manager may check properties of the received virtual object. If there is no property of a real object corresponding to identification information of a real object in the pre-stored database, the server 110 transmits a signal requesting the property of the real object to the manager terminal 120 or the user terminal 130. can
관리자 단말기(120) 또는 사용자 단말기(130)는 소스 영상에 기초하여 실제 오브젝트의 속성 중 일부를 획득할 수 있다. 예를 들어 관리자 단말기(120) 또는 사용자 단말기(130)는 소스 영상에 기초하여 실제 오브젝트에 표시된 그림 또는 모양을 획득할 수 있다. 보다 구체적으로 실제 오브젝트가 간판이라면, 관리자 단말기(120) 또는 사용자 단말기(130)는 소스 영상에 기초하여 간판에 표시되는 글자, 도형, 또는 그림을 자동으로 획득 가능할 수 있다.The manager terminal 120 or the user terminal 130 may obtain some of the attributes of the real object based on the source image. For example, the manager terminal 120 or the user terminal 130 may acquire a picture or shape displayed on a real object based on a source image. More specifically, if the actual object is a signboard, the manager terminal 120 or the user terminal 130 may automatically obtain a letter, figure, or picture displayed on the signboard based on the source image.
관리자 단말기(120) 또는 사용자 단말기(130)는 소스 영상에 물체 인식 알고리즘을 적용하여 물체의 종류를 획득할 수 있다. 물체 인식 알고리즘은 기계학습모델에 기반하여 구현될 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 인식된 물체의 종류를 표시할 수 있다. 또한 사용자의 확인 신호를 수신하는 경우, 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 종류를 인식된 물체의 종류로 결정할 수 있다.The manager terminal 120 or the user terminal 130 may obtain the type of object by applying an object recognition algorithm to the source image. The object recognition algorithm may be implemented based on a machine learning model. The manager terminal 120 or the user terminal 130 may display the type of recognized object. In addition, when receiving the user's confirmation signal, the manager terminal 120 or the user terminal 130 may determine the type of the real object as the type of the recognized object.
관리자 단말기(120) 또는 사용자 단말기(130) 실제 오브젝트의 속성에 포함되는 식별정보를 관리자 또는 사용자로부터 수신할 수 있다. 또는 관리자 단말기(120) 또는 사용자 단말기(130)는 서버(110)에서 식별정보를 생성해줄 것을 요청할 수 있고, 서버(110)는 자동으로 식별정보를 생성할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 자동으로 생성된 식별정보를 실제 오브젝트의 식별정보로 결정할 수 있다. The manager terminal 120 or the user terminal 130 may receive identification information included in the property of a real object from a manager or a user. Alternatively, the manager terminal 120 or the user terminal 130 may request the server 110 to generate identification information, and the server 110 may automatically generate identification information. The manager terminal 120 or the user terminal 130 may determine the automatically generated identification information as the identification information of the actual object.
관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 종류를 관리자 또는 사용자로부터 수신할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 질감, 색을 소스 영상으로부터 획득할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 질감 또는 색을 소스 영상의 오브젝트에 포함되는 영역에서 추출할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 모양을 3차원 형태에 대한 정보로부터 획득할 수 있다. 관리자 단말기(120) 및 사용자 단말기(130)는 실제 오브젝트의 모양을 전문적인 3차원 모델링 툴을 이용하여 생성할 수도 있다. 또한 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 크기를 관리자 또는 사용자로부터 획득하거나, 3차원 형태에 대한 정보로부터 획득할 수 있다. 관리자 단말기(120) 또는 사용자 단말기(130)는 실제 오브젝트의 위치를 관리자 또는 사용자로부터 획득할 수 있다.The manager terminal 120 or the user terminal 130 may receive the type of real object from the manager or the user. The manager terminal 120 or the user terminal 130 may acquire the texture and color of a real object from a source image. The manager terminal 120 or the user terminal 130 may extract the texture or color of a real object from an area included in the object of the source image. The manager terminal 120 or the user terminal 130 may obtain the shape of the real object from information on the 3D shape. The manager terminal 120 and the user terminal 130 may generate the shape of a real object using a specialized 3D modeling tool. Also, the manager terminal 120 or the user terminal 130 may acquire the size of the actual object from the manager or user or from information about the 3D shape. The manager terminal 120 or the user terminal 130 may obtain the location of the real object from the manager or the user.
서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)로부터 소스 영상 및 실제 오브젝트의 속성 또는 실제 아이템의 속성을 수신하는 단계(513)를 수행할 수 있다. 서버(110)는 소스 영상을 실제 오브젝트의 속성 또는 실제 아이템의 속성과 함께 저장하는 단계(521)를 수행할 수 있다. 서버(110)는 소스 영상, 실제 오브젝트의 속성 또는 실제 아이템의 속성 중 적어도 하나에 기초하여 가상 오브젝트의 속성 또는 가상 아이템의 속성을 획득하는 단계(522)를 수행할 수 있다. 보다 구체적으로 서버(110)는 실제 오브젝트의 속성 또는 실제 아이템의 속성을 가상 오브젝트의 속성 또는 가상 아이템의 속성으로 결정할 수 있다. 위와 같은 방식으로 서버(110)는 가상 오브젝트의 속성 또는 가상 아이템의 속성을 누적하여 저장할 수 있다. 또한 서버(110)는 관리자 단말기(120) 또는 사용자 단말기(130)의 제어 신호에 기초하여 복수의 가상 오브젝트의 속성 중 적어도 하나를 이용하여 가상공간을 채울 수 있다. 또한 서버(110)는 사용자 단말기(130)의 제어 신호에 기초하여 복수의 가상 아이템의 속성 중 적어도 하나를 이용하여 가상인물을 꾸밀 수 있다. 사용자 또는 다른 사용자가 사용자 단말기를 이용하여 가상인물이 가지고 있는 가상 아이템을 클릭(터치)하는 경우, 가상 아이템의 3차원 형태가 팝업 될 수 있다. 예를 들어 3차원 형태는 실제 아이템의 6면에 대한 소스 영상일 수 있다. 6면에 대한 소스 영상은 6면체의 표면에 표시될 수 있다. 이 경우, 가상 공간에서 아이템의 리얼리티는 떨어질 수 있으나, 사용자가 실제로 소유한 물건을 가상 공간에서 뽐낼 수 있도록 하며, 아이템의 라이센스에 대해 크게 문제를 일으키지 않으면서도 사용자의 과시욕을 쉽게 충족시킬 수 있는 효과가 있다.The server 110 may perform step 513 of receiving a source image and properties of a real object or properties of a real item from the manager terminal 120 or the user terminal 130 . The server 110 may perform step 521 of storing the source image together with properties of real objects or properties of real items. The server 110 may perform step 522 of obtaining a property of a virtual object or a property of a virtual item based on at least one of a source image, a property of a real object, or a property of a real item. More specifically, the server 110 may determine a property of a real object or a property of a real item as a property of a virtual object or a property of a virtual item. In the above manner, the server 110 may accumulate and store the attributes of virtual objects or virtual items. Also, the server 110 may fill the virtual space by using at least one attribute of a plurality of virtual objects based on a control signal of the manager terminal 120 or the user terminal 130 . Also, the server 110 may decorate a virtual person by using at least one of attributes of a plurality of virtual items based on a control signal of the user terminal 130 . When a user or another user clicks (touches) a virtual item possessed by a virtual person using a user terminal, a 3D shape of the virtual item may be popped up. For example, the 3D form may be a source image for 6 sides of an actual item. Source images for the 6 faces may be displayed on the surface of the 6 faces. In this case, the reality of the item in the virtual space may be lowered, but the user can show off the item he actually owns in the virtual space, and the effect of easily satisfying the user's desire to show off without causing much problems with the license of the item there is
도 6은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.6 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
이미 설명한 바와 같이 메타버스 시스템은 사용자 단말기(130) 및 서버(110)를 포함할 수 있다. 사용자 단말기(130)는 사용자가 소유한 아이템에 부착된 태그를 스캔하여 인증정보를 획득하는 단계(611)를 수행할 수 있다. 사용자가 소유한 아이템은 사용자가 현실세계에서 실제로 소유한 의류, 가방, 전자제품, 및 신발, 등일 수 있다. 사용자가 소유한 아이템에는 태그가 부착되어 있을 수 있다. 태그에는 사용자가 소유한 아이템에는 일련번호가 기재되어 있을 수 있다. 일련번호는 아이템의 고유한 식별정보 및 인증정보가 포함되어 있을 수 있다. 즉, 일련번호가 특정 패턴을 가지는 경우 해당 아이템은 진품인 것이며, 특정 패턴을 가지지 않은 경우, 해당 아이템은 진품이 아닐 수 있다.As already described, the metaverse system may include the user terminal 130 and the server 110. The user terminal 130 may perform step 611 of acquiring authentication information by scanning a tag attached to an item owned by the user. The items owned by the user may be clothes, bags, electronic products, and shoes that the user actually owns in the real world. A tag may be attached to an item owned by the user. In the tag, a serial number may be written on an item owned by the user. The serial number may include unique identification information and authentication information of the item. That is, if the serial number has a specific pattern, the corresponding item is genuine, and if it does not have a specific pattern, the corresponding item may not be genuine.
본 개시의 일 실시예에 따르면, 사용자 단말기(130)는 카메라를 이용하여 태그를 촬영할 수 있다. 사용자 단말기(130)는 태그에 대한 영상에 기초하여 인증정보를 획득할 수 있다. 예를 들어 태그는 바코드 또는 QR코드일 수 있다. 하지만 이에 한정되는 것은 아니다. According to an embodiment of the present disclosure, the user terminal 130 may capture a tag using a camera. The user terminal 130 may obtain authentication information based on the image of the tag. For example, a tag can be a barcode or QR code. However, it is not limited thereto.
또한, 태그는 통신부를 포함할 수 있다. 태그의 통신부는 사용자 단말기(130)와 통신할 수 있다. 통신 방식은 NFC(Near Field Communication), 또는 블루투스 등을 이용할 수 있다. 사용자 단말기(130)는 태그와 통신하여 인증정보를 획득할 수 있다. Also, the tag may include a communication unit. The communication unit of the tag may communicate with the user terminal 130 . The communication method may use Near Field Communication (NFC) or Bluetooth. The user terminal 130 may acquire authentication information by communicating with the tag.
본 개시의 다른 실시예에 따르면, 인증정보는 One Time Password일 수 있다. 인증정보는 시간에 따라 변경되는 값을 가질 수 있다. 예를 들어 사용자가 소유한 아이템은 배터리 및 빛에 의하여 발전하는 발전부를 포함할 수 있다. 사용자가 소유한 아이템의 제어부는 배터리 및 발전부에 의하여 전력을 공급받을 수 있다. 또한 사용자가 소유한 아이템의 제어부는 현재 시간에 소정의 알고리즘을 적용하여 시간에 따라 변경되는 인증번호를 생성할 수 있다. 서버(110) 역시 현재 시간에 소정의 알고리즘을 적용하여 시간에 따라 변경되는 인증번호를 생성할 수 있다. 즉 사용자가 소유한 아이템이 생성하는 인증번호는 서버(110)가 생성하는 인증번호와 동일할 수 있다. 사용자 단말기(130)는 자동 또는 수동으로 사용자가 소유한 아이템이 생성한 인증번호를 획득할 수 있다.According to another embodiment of the present disclosure, authentication information may be a One Time Password. Authentication information may have a value that changes over time. For example, an item owned by a user may include a battery and a power generation unit that generates power by light. The control unit of the item owned by the user may receive power from the battery and the power generation unit. In addition, the control unit of the item owned by the user may generate an authentication number that changes according to time by applying a predetermined algorithm to the current time. The server 110 may also generate an authentication number that changes according to time by applying a predetermined algorithm to the current time. That is, the authentication number generated by the item owned by the user may be the same as the authentication number generated by the server 110 . The user terminal 130 may automatically or manually obtain an authentication number generated by an item owned by the user.
사용자 단말기(130)는 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버(110)로 송신하는 단계(612)를 수행할 수 있다. 사용자의 식별정보는 사용자별로 고유한 정보일 수 있다. 사용자의 식별정보는 이름, 생체정보(홍채, 지문), 주민등록번호, 생년월일 또는 전화번호 중 적어도 하나에 대한 정보를 포함할 수 있다. 또한 사용자의 식별정보는 이름, 주민등록번호, 생년월일 또는 전화번호 중 적어도 하나에 대한 정보에 기초하여 생성된 고유 정보일 수 있다. 또한 사용자의 식별정보는 사용자가 입력한 고유 정보일 수 있다.The user terminal 130 may perform step 612 of transmitting authentication information, user identification information, and identification information of the user terminal to the server 110 . User identification information may be unique information for each user. The identification information of the user may include information on at least one of a name, biometric information (iris, fingerprint), resident registration number, date of birth, or phone number. In addition, the user's identification information may be unique information generated based on information on at least one of a name, resident registration number, date of birth, or phone number. Also, the user's identification information may be unique information input by the user.
사용자 단말기의 식별정보는 사용자 단말기 별로 고유한 정보일 수 있다. 사용자 단말기의 식별정보는 전화번호, 기기 시리얼 넘버, 제조사, 생산 번호, 생산 날짜, 또는 모델명 중 적어도 하나에 대한 정보를 포함할 수 있다. 또한 사용자 단말기의 식별정보는 전화번호, 기기 시리얼 넘버, 제조사, 생산 번호, 생산 날짜, 또는 모델명 중 적어도 하나에 대한 정보에 기초하여 생성된 고유 정보일 수 있다.The identification information of the user terminal may be unique information for each user terminal. Identification information of the user terminal may include information on at least one of a phone number, a device serial number, a manufacturer, a production number, a production date, or a model name. Also, the identification information of the user terminal may be unique information generated based on information on at least one of a phone number, a device serial number, a manufacturer, a production number, a production date, or a model name.
단계(612)에서 사용자 단말기(130)는 서버(110)로 인증을 요청하는 명령을 더 송신할 수 있다. 서버(110)는 인증을 요청하는 명령에 기초하여 사용자 단말기(130)에 대한 인증을 수행할 수 있다. 하지만 이에 한정되는 것은 아니다. 사용자 단말기(130)에 인증을 요청하는 명령을 서버(110)에 송신하지 않을 수 있다. 서버(110)는 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 수신하는 경우, 사용자 단말기에 대한 인증을 수행할 수 있다.In step 612, the user terminal 130 may further transmit a command requesting authentication to the server 110. The server 110 may perform authentication on the user terminal 130 based on a command requesting authentication. However, it is not limited thereto. A command requesting authentication from the user terminal 130 may not be transmitted to the server 110 . When the server 110 receives authentication information, user identification information, and user terminal identification information, it may perform authentication for the user terminal.
단계(612)에서 사용자 단말기(130)는 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 암호화할 수 있으며, 서버(110)는 인증정보, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 복호화할 수 있다.In step 612, the user terminal 130 may encrypt authentication information, user identification information, and identification information of the user terminal, and server 110 may encrypt the authentication information, user identification information, and user terminal identification information. can decrypt.
서버(110)는 인증정보가 미리 저장되어 있는 가상 아이템에 대응되며 정당한 것인지 여부를 결정하는 단계(621)를 수행할 수 있다. 서버(110)는 가상 아이템의 식별정보를 미리 저장하고 있을 수 있다. 또한 서버(110)는 인증정보를 가상 아이템의 식별정보에 대응되도록 저장하고 있을 수 있다. 서버(110)는 저장하고 있는 인증정보 및 가상 아이템의 식별정보를 사용자 단말기(130)로부터 수신한 인증정보 및 가상 아이템의 식별정보와 비교할 수 있다. 저장하고 있는 인증정보 및 가상 아이템의 식별정보가 사용자 단말기(130)로부터 수신한 인증정보 및 가상 아이템의 식별정보와 동일한 경우, 서버(110)는 인증정보가 가상 아이템의 식별정보에 대응하며 정당한 것으로 결정할 수 있다. The server 110 may perform step 621 of determining whether the authentication information corresponds to the pre-stored virtual item and is legitimate. The server 110 may store identification information of virtual items in advance. In addition, the server 110 may store authentication information to correspond to identification information of a virtual item. The server 110 may compare stored authentication information and virtual item identification information with authentication information and virtual item identification information received from the user terminal 130 . When the stored authentication information and the identification information of the virtual item are the same as the authentication information received from the user terminal 130 and the identification information of the virtual item, the server 110 determines that the authentication information corresponds to the identification information of the virtual item and is legitimate. can decide
저장하고 있는 인증정보 및 가상 아이템의 식별정보가 사용자 단말기(130)로부터 수신한 인증정보 및 가상 아이템의 식별정보와 동일하지 않은 경우, 서버(110)는 인증정보가 가상 아이템의 식별정보에 대응하지 않거나 정당하지 않은 것으로 결정할 수 있다. 서버(110)는 미리 저장되어 있는 인증정보가 사용자 단말기(130)로부터 수신한 인증정보와 다른 경우, 사용자 단말기(130)가 오류 메시지를 표시하도록 제어할 수 있다. If the stored authentication information and identification information of the virtual item are not the same as the authentication information and identification information of the virtual item received from the user terminal 130, the server 110 determines that the authentication information does not correspond to the identification information of the virtual item. may or may not be justified. The server 110 may control the user terminal 130 to display an error message when the previously stored authentication information is different from the authentication information received from the user terminal 130 .
또한 서버(110)는 미리 저장되어 있는 가상 아이템의 식별정보가 사용자 단말기(130)로부터 수신한 가상 아이템의 식별정보와 다른 경우, 서버(110)에 저장되어 있는 가상 아이템 중 사용자가 소유한 아이템과 가장 유사한 가상 아이템을 정당한 것으로 결정할 수 있다. 서버(110)는 미리 저장되어 있는 가상 아이템을 복수의 그룹으로 나누어서 저장하고 있을 수 있다. 서버(110)는 사용자 단말기(130)로부터 수신한 가상 아이템의 식별정보와 동일한 그룹에 속해 있으면서, 비라이센스의 가상 아이템을 사용자 단말기(130)가 표시하도록 제어할 수 있다. 여기서 비라이센스는 라이센스문제가 생기지 않는 가상 아이템을 의미할 수 있다. 예를 들어, 메타버스 시스템 제공자가 미리 계약을 하여 자유롭게 사용할 수 있는 가상 아이템 또는 라이센스 프리(license free)의 가상 아이템을 의미할 수 있다. 서버(110)는 사용자 단말기(130)로부터 수신한 사용자의 선택 정보에 기초하여 하나의 가상 아이템을 정당한 아이템으로써 결정할 수 있다. In addition, if the identification information of the virtual item stored in advance is different from the identification information of the virtual item received from the user terminal 130, the server 110 identifies the item owned by the user among the virtual items stored in the server 110. The most similar virtual item may be determined to be legitimate. The server 110 may divide and store previously stored virtual items into a plurality of groups. The server 110 may control the user terminal 130 to display an unlicensed virtual item belonging to the same group as the identification information of the virtual item received from the user terminal 130 . Here, the non-license may mean a virtual item that does not cause a license problem. For example, it may mean a virtual item that can be freely used by a metaverse system provider through a contract in advance or a license-free virtual item. The server 110 may determine one virtual item as a legitimate item based on the user's selection information received from the user terminal 130 .
인증정보가 가상 아이템의 식별정보에 대응하며 정당한 것으로 결정된 경우, 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트에 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 저장하는 단계(622)를 수행할 수 있다. 서버(110)는 인증된 사용자 아이템 리스트를 사용자 별로 생성할 수 있다. 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트를 획득할 수 있다. 또한 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트에 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 저장할 수 있다. 인증된 사용자 아이템 리스트는 인증된 가상 아이템의 식별정보를 포함할 수 있다. 즉, 서버(110)에 의하여 인증되지 않은 가상 아이템의 식별정보는 인증된 사용자 아이템 리스트에 포함되지 않을 수 있다. 사용자 아이템 리스트에 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 동시에 저장하는 이유는 사용자의 가상인물이 가상 아이템을 착용할 수 있는지 여부를 결정하기 위해서일 수 있다. 서버(110)는 사용자 단말기의 식별정보에 대응되는 사용자 단말기(130)의 요청이 있었으며, 사용자 아이템 리스트에 포함된 가상 아이템의 식별정보에 대응하는 가상 아이템을 가상인물이 착용할 수 있도록 허용할 수 있다. 따라서 가상 아이템은 특정한 사용자 단말기(130)에서만 사용될 수 있다. 이를 통하여 복수의 사용자 단말기(130)에서 가상 아이템이 사용되는 것이 방지될 수 있으며, 저작권자 또는 브랜드 라이센서의 권리는 보호될 수 있다.When the authentication information corresponds to the identification information of the virtual item and is determined to be valid, the server 110 stores the identification information of the virtual item and the identification information of the user terminal in the authenticated user item list corresponding to the user's identification code ( 622) can be performed. The server 110 may generate an authenticated user item list for each user. The server 110 may obtain an authenticated user item list corresponding to the user identification code. In addition, the server 110 may store the identification information of the virtual item and the identification information of the user terminal in the authenticated user item list corresponding to the user's identification code. The authenticated user item list may include identification information of authenticated virtual items. That is, identification information of virtual items that have not been authenticated by the server 110 may not be included in the authenticated user item list. The reason for simultaneously storing the identification information of the virtual item and the identification information of the user terminal in the user item list may be to determine whether the user's virtual character can wear the virtual item. The server 110 receives a request from the user terminal 130 corresponding to the identification information of the user terminal, and allows the virtual person to wear the virtual item corresponding to the identification information of the virtual item included in the user item list. there is. Accordingly, virtual items may be used only in a specific user terminal 130 . Through this, virtual items can be prevented from being used in a plurality of user terminals 130, and rights of copyright holders or brand licensors can be protected.
인증정보가 가상 아이템의 식별정보에 대응하지 않거나 정당하지 않은 것으로 결정된 경우, 서버(110)는 사용자 단말기(130)에 인증이 되지 않았음을 나타내는 정보를 송신할 수 있다. 사용자 단말기(130)는 인증이 되지 않았음을 나타내는 정보를 출력하여 사용자가 정상적으로 인증을 수행하도록 도울 수 있다.When it is determined that the authentication information does not correspond to the identification information of the virtual item or is invalid, the server 110 may transmit information indicating that authentication has not been performed to the user terminal 130 . The user terminal 130 may help the user to normally perform authentication by outputting information indicating that authentication has not been performed.
서버(110)는 인증된 사용자 아이템 리스트에 대한 정보를 사용자 단말기(130)로 송신하는 단계(623)를 수행할 수 있다. 인증된 사용자 아이템 리스트에 대한 정보는 인증된 가상 아이템에 대한 정보를 포함할 수 있다. 인증된 사용자 아이템 리스트에 대한 정보는 인증된 가상 아이템 또는 사용자가 소유한 아이템의 저작권자, 제작자, 아이템의 제작시기, 아이템의 출시시기, 아이템의 제작순번, 브랜드, 아이템의 품목, 아이템의 형상, 또는, 아이템의 재질 중 적어도 하나에 대한 정보를 포함할 수 있다. 사용자 단말기(130)는 인증된 사용자 아이템 리스트에 대한 정보를 출력하는 단계를 수행할 수 있다. 이와 같이 사용자는 사용자가 소유한 아이템을 메타버스에서 사용할 수 있다. 따라서 사용자는 자신이 좋아하는 아이템을 현실 및 가상공간에서 모두 이용할 수 있어 만족도가 높아질 수 있다.The server 110 may perform step 623 of transmitting information on the authenticated user item list to the user terminal 130 . Information on the authenticated user item list may include information on authenticated virtual items. Information on the list of authenticated user items includes the copyright holder of the authenticated virtual item or the item owned by the user, the producer, when the item was produced, when the item was released, the order of production of the item, the brand, the item of the item, the shape of the item, or , may include information on at least one of the materials of the item. The user terminal 130 may perform a step of outputting information on the authenticated user item list. In this way, the user can use the items owned by the user in the metaverse. Accordingly, the user can use the item he or she likes both in real and virtual space, and thus, satisfaction can be increased.
디스플레이에 가상인물, 가상공간 및 가상 오브젝트를 표시하는 단계(332)는 다음과 같은 과정을 더 포함할 수 있다. 사용자 단말기(130)는 사용자의 선택에 기초하여 사용자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 가상인물에 대한 정보를 획득하는 단계(631)를 수행할 수 있다. 미리 설명한 바와 같이 가상인물에 대한 정보는 가상인물의 소지아이템에 대한 정보를 포함할 수 있으며, 사용자 아이템 리스트에 포함된 적어도 하나의 가상 아이템은 가상인물의 소지아이템으로 결정될 수 있다.The step 332 of displaying the virtual character, virtual space, and virtual object on the display may further include the following process. Based on the user's selection, the user terminal 130 may perform step 631 of obtaining information about the virtual person by using at least one of the at least one item included in the user item list. As described above, the information on the virtual character may include information on the item possessed by the virtual character, and at least one virtual item included in the user item list may be determined as the item possessed by the virtual character.
사용자 단말기를 이용하여 인증된 가상 아이템을 가상공간에 확인할 수 있다.Authenticated virtual items can be checked in the virtual space using the user terminal.
도 7은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.7 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
도 7은 도 6의 이후에 수행될 수 있다. 서버(110)는 태그를 스캔하여 획득된 인증정보를 미리 결정된 주기로 사용자 단말기에 요청하는 단계(710)를 수행할 수 있다. 미리 결정된 주기는 일주일, 한 달, 일년 또는 3년 중 하나일 수 있다. 미리 결정된 주기는 가상 아이템 또는 사용자가 소유한 아이템의 출시 시점으로부터 지난 시간에 기반하여 점점 길어질 수 있다. 즉, 미리 결정된 주기는 가상 아이템 또는 사용자가 소유한 아이템의 출시 시점으로부터 지난 시간에 비례하여 증가할 수 있다. 예를 들어 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 1개월까지 미리 결정된 주기는 일주일일 수 있다. 하지만 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 1개월 이후에는 미리 결정된 주기는 한 달일 수 있으며, 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 1년 이후에는 미리 결정된 주기는 1 년일 수 있다. 또한 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 임계 시간이 지난 이후에는 미리 결정된 주기는 없을 수 있다. 즉, 임계 시간이 지난 이후에는 가상 아이템 또는 사용자가 소유한 아이템에 대한 인증이 수행되지 않을 수 있다.FIG. 7 may be performed after FIG. 6 . The server 110 may perform step 710 of requesting authentication information acquired by scanning the tag to the user terminal at predetermined intervals. The predetermined period may be one of a week, a month, a year or three years. The predetermined period may be progressively longer based on a time elapsed from the release of the virtual item or the item owned by the user. That is, the predetermined cycle may increase in proportion to a time elapsed from the release time of the virtual item or the item owned by the user. For example, the predetermined cycle up to one month after the release of the virtual item or the item owned by the user may be one week. However, after one month after the release of the virtual item or the item owned by the user, the predetermined cycle may be one month, and after one year after the release of the virtual item or the item owned by the user, the predetermined cycle may be one year. Also, there may not be a predetermined cycle after a threshold time elapses after the release of a virtual item or an item owned by a user. That is, after the threshold time has elapsed, authentication for virtual items or items owned by the user may not be performed.
또한 서버(110)는 미리 결정된 주기에 관계없이 추가적인 인증을 수행할 수 있다. 서버(110)는 사용자의 인증된 사용자 아이템 리스트에 저장되지 않은 사용자 단말기가 가상 아이템에 접근하려고 할 때, 도 5와 같은 재인증을 수행할 수 있다.Also, the server 110 may perform additional authentication regardless of a predetermined period. The server 110 may perform re-authentication as shown in FIG. 5 when a user terminal that is not stored in the user's authenticated user item list tries to access a virtual item.
서버(110)는 인증된 사용자 아이템 리스트 별로 미리 결정된 주기를 설정할 수 있다. 서버(110)는 미리 결정된 주기가 도래한 경우 인증된 사용자 아이템 리스트에 저장된 사용자 단말기의 식별정보에 기초하여 사용자 단말기로 인증정보를 요청할 수 있다.The server 110 may set a predetermined period for each authenticated user item list. When a predetermined period arrives, the server 110 may request authentication information from the user terminal based on identification information of the user terminal stored in the authenticated user item list.
서버(110)의 요청에 대응하여, 사용자 단말기(130)가 태그를 스캔하여 인증정보를 획득해야 함을 나타내는 정보를 출력하는 단계(721)를 수행할 수 있다. 출력된 정보에 기초하여 사용자는 사용자 단말기(130)를 이용하여 태그를 스캔할 수 있다. 사용자 단말기(130)는 인증정보를 획득할 수 있다.In response to the request of the server 110, the user terminal 130 may perform step 721 of outputting information indicating that authentication information should be obtained by scanning the tag. Based on the output information, the user can scan the tag using the user terminal 130 . The user terminal 130 may obtain authentication information.
서버(110)는 태그를 스캔하여 획득된 인증정보, 사용자의 식별정보 및 사용자 단말기의 식별정보를 사용자 단말기로부터 재수신하는 단계(722)를 수행할 수 있다. 도 6에서 서버(110)는 인증정보, 사용자의 식별정보 및 사용자 단말기의 식별정보를 수신하였으므로, 도 7에서 재인증을 위하여 서버(110)가 수신한 정보를 재수신된 인증정보, 재수신된 사용자의 식별정보 및 재수신된 사용자 단말기의 식별정보라고 칭한다.The server 110 may perform step 722 of re-receiving authentication information obtained by scanning the tag, identification information of the user, and identification information of the user terminal from the user terminal. In FIG. 6, since the server 110 has received authentication information, identification information of the user, and identification information of the user terminal, the information received by the server 110 for re-authentication in FIG. It is referred to as user identification information and re-received identification information of the user terminal.
재수신된 인증정보가 재수신된 가상 아이템의 식별정보에 대응하며 정당하고, 재수신된 사용자 식별코드에 대응되는 인증된 사용자 아이템 리스트 내에 재수신된 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보가 포함되어 있는 경우, 서버(110)는 인증된 사용자 아이템 리스트 내의 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 유지하는 단계를 수행할 수 있다. The re-received authentication information corresponds to the re-received identification information of the re-received virtual item and is legitimate, and the re-received identification information of the re-received virtual item in the authenticated user item list corresponding to the re-received user identification code and the re-received user terminal identification information. If the identification information is included, the server 110 may perform a step of maintaining the identification information of the virtual item in the authenticated user item list and the identification information of the user terminal.
도 6과와 다르게, 서버(110)는 재수신된 사용자 식별코드에 대응되는 인증된 사용자 아이템 리스트 내에 재수신된 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보가 포함되어 있는지 여부를 더 판단할 수 있다. 또한 서버(110)는 조건을 만족하는 경우, 인증된 사용자 아이템 리스트 내의 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 유지할 수 있다. Unlike FIG. 6, the server 110 further determines whether or not identification information of the re-received virtual item and identification information of the re-received user terminal are included in the authenticated user item list corresponding to the re-received user identification code. can judge Also, when the condition is satisfied, the server 110 may maintain the identification information of the virtual item in the authenticated user item list and the identification information of the user terminal.
재수신된 인증정보가 재수신된 가상 아이템의 식별정보에 대응하며 정당하고, 재수신된 사용자 식별코드에 대응되는 인증된 사용자 아이템 리스트 내에 재수신된 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보가 포함되어 있지 않은 경우, 서버(110)는 인증된 사용자 아이템 리스트에 재수신된 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보를 저장하는 단계를 수행할 수 있다. 서버(110)는 인증된 사용자 아이템 리스트에 재수신된 가상 아이템의 식별정보 및 재수신된 사용자 단말기의 식별정보를 저장함으로써, 사용자가 자신의 가상 아이템을 깜박하고 서버(110)에 등록하지 않는 상황을 방지할 수 있다. 또한, 오류로 서버(110)의 사용자 아이템 리스트에서 가상 아이템의 식별정보가 삭제되어도 위와 같은 과정에 의하여 가상 아이템의 식별정보가 복구할 수 있다. 따라서 사용자는 오류가 발생하더라도 불편을 느끼지 않을 수 있다.The re-received authentication information corresponds to the re-received identification information of the re-received virtual item and is legitimate, and the re-received identification information of the re-received virtual item in the authenticated user item list corresponding to the re-received user identification code and the re-received user terminal identification information. If the identification information is not included, the server 110 may perform a step of storing the identification information of the re-received virtual item and the re-received identification information of the user terminal in the authenticated user item list. The server 110 stores the identification information of the re-received virtual item and the re-received identification information of the user terminal in the authenticated user item list, so that the user forgets his or her virtual item and does not register it in the server 110. can prevent In addition, even if the identification information of a virtual item is deleted from the user item list of the server 110 by error, the identification information of the virtual item can be restored through the above process. Therefore, the user may not feel any inconvenience even if an error occurs.
재수신된 인증정보가 재수신된 가상 아이템의 식별정보에 대응하지 않거나, 정당하지 않은 경우, 서버(110)가 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하는 단계를 수행할 수 있다. 따라서 이후에 사용자가 사용자 단말기(130)를 이용하여 가상 아이템을 요청하더라도, 서버(110)는 가상 아이템 데이터를 사용자 단말기(130)에 제공하지 않을 수 있다. 따라서 사용자가 이용하는 가상인물은 해당 가상 아이템을 착용하지 못할 수 있다.If the re-received authentication information does not correspond to the re-received identification information of the virtual item or is not legitimate, the server 110 may perform a step of deleting the identification information of the virtual item from the authenticated user item list. Therefore, even if the user later requests a virtual item using the user terminal 130 , the server 110 may not provide virtual item data to the user terminal 130 . Accordingly, the virtual person used by the user may not be able to wear the corresponding virtual item.
이미 설명한 바와 같이 서버(110)는 인증정보를 미리 결정된 주기로 사용자 단말기(130)에 요청하는 단계(710)를 수행할 수 있다. 사용자 단말기(130)는 인증정보를 획득해야 함을 나타내는 정보를 출력할 수 있다. 하지만 사용자는 사용자가 소유한 아이템을 가지고 있지 않아서 사용자가 소유한 아이템으로부터 인증정보를 획득하지 못할 수 있다. As already described, the server 110 may perform step 710 of requesting authentication information from the user terminal 130 at predetermined intervals. The user terminal 130 may output information indicating that authentication information should be obtained. However, since the user does not have an item owned by the user, authentication information may not be obtained from the item owned by the user.
인증정보 요청 후 서버(110)가 소정의 기간 안에 사용자 단말기로부터 회신을 수신하지 못하는 경우, 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보 및 사용자 단말기의 식별정보 중 적어도 하나를 삭제하는 단계를 수행할 수 있다. 여기서 소정의 기간은 일주일, 한 달, 일년 또는 3년일 수 있다. 하지만 이에 한정되는 것은 아니다. 서버(110)는 소정의 기간이 가상 아이템 또는 사용자가 소유한 아이템의 출시 시점으로부터 지난 시간에 비례하여 증가되도록 제어할 수 있다. 예를 들어 가상 아이템 출시 후 1개월까지 소정의 기간은 일주일일 수 있다. 하지만 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 1개월 이후에는 소정의 기간은 한 달일 수 있으며, 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 1년 이후에는 소정의 기간은 1 년일 수 있다. 또한 가상 아이템 또는 사용자가 소유한 아이템의 출시 후 임계 시간이 지난 이후에는 소정의 기간은 없을 수 있다. 즉, 임계 시간이 지난 이후에는 가상 아이템 또는 사용자가 소유한 아이템에 대한 인증이 수행되지 않을 수 있다.If the server 110 does not receive a reply from the user terminal within a predetermined period of time after requesting the authentication information, a step of deleting at least one of the identification information of the virtual item and the identification information of the user terminal from the authenticated user item list is performed. can Here, the predetermined period may be one week, one month, one year or three years. However, it is not limited thereto. The server 110 may control the predetermined period to increase in proportion to the elapsed time from the release of the virtual item or the item owned by the user. For example, the predetermined period up to one month after the release of the virtual item may be one week. However, after one month after the release of the virtual item or the item owned by the user, the predetermined period may be one month, and after one year after the release of the virtual item or the item owned by the user, the predetermined period may be one year. In addition, there may be no predetermined period after a threshold time elapses after the release of a virtual item or an item owned by a user. That is, after the threshold time has elapsed, authentication for virtual items or items owned by the user may not be performed.
사용자 단말기(130)는 사용자로부터 인증된 사용자 아이템 리스트에 대한 정보 중 적어도 하나의 가상 아이템의 사용을 요청하기 위한 입력을 수신하는 단계를 수행할 수 있다. 이미 설명한 바와 같이 사용자 단말기(130)는 서버(110)로부터 인증된 사용자 아이템 리스트에 대한 정보를 수신할 수 있다. 사용자 단말기(130)는 인증된 사용자 아이템 리스트에 대한 정보를 출력할 수 있다. 출력은 영상 또는 소리로 될 수 있다. 인증된 사용자 아이템 리스트에 대한 정보는 인증된 가상 아이템의 저작권자, 제작자, 아이템의 제작시기, 아이템의 출시시기, 아이템이 제작순번, 브랜드, 아이템의 품목, 아이템의 형상, 또는, 아이템의 재질 중 적어도 하나에 대한 정보를 포함할 수 있다. 사용자는 사용자 단말기(130)의 입력부를 이용하여 인증된 사용자 아이템 리스트에 대한 정보 중 하나의 가상 아이템을 사용하도록 사용자 단말기(130)에 입력할 수 있다.The user terminal 130 may perform a step of receiving an input for requesting the use of at least one virtual item among the information on the authenticated user item list from the user. As already described, the user terminal 130 may receive information about the authenticated user item list from the server 110 . The user terminal 130 may output information about the authenticated user item list. The output can be video or sound. Information on the list of authenticated user items is at least one of the copyright holder of the authenticated virtual item, the producer, the time of production of the item, the time of release of the item, the order of production of the item, the brand, the item of the item, the shape of the item, or the material of the item. It may contain information about one. The user may use the input unit of the user terminal 130 to input to the user terminal 130 to use one virtual item among information on the authenticated user item list.
적어도 하나의 가상 아이템을 사용하기 위한 입력을 수신하는 것에 대응하여, 사용자 단말기(130)는 요청된 가상 아이템에 대한 식별정보, 사용자 식별정보 및 사용자 단말기의 식별정보를 포함하는 사용 요청 정보를 서버(110)로 송신하는 단계를 수행할 수 있다. In response to receiving an input for using at least one virtual item, the user terminal 130 transmits usage request information including identification information for the requested virtual item, user identification information, and identification information of the user terminal to the server ( 110) may be performed.
본 개시의 일 실시예에 따르면, 사용자 단말기(130)는 별도의 명령어 없이 요청된 가상 아이템에 대한 식별정보, 사용자 식별정보 및 사용자 단말기의 식별정보를 서버(110)에 송신하는 것 만으로도 서버(110)는 가상 아이템의 사용을 요청하고 있다는 것을 알 수 있다. 본 개시의 다른 실시예에 따르면, 사용자 단말기(130)는 사용을 요청하는 명령어를 요청된 가상 아이템에 대한 식별정보, 사용자 식별정보 및 사용자 단말기의 식별정보와 함께 서버(110)로 송신할 수 있다. 서버(110)는 사용을 요청하는 명령어에 기반하여 사용자 단말기(130)가 사용을 요청하고 있다는 것을 알 수 있다.According to an embodiment of the present disclosure, the user terminal 130 transmits the identification information for the requested virtual item, the user identification information, and the identification information of the user terminal to the server 110 without a separate command, and the server 110 ) is requesting the use of a virtual item. According to another embodiment of the present disclosure, the user terminal 130 may transmit a command requesting use to the server 110 together with identification information for the requested virtual item, user identification information, and identification information of the user terminal. . The server 110 may know that the user terminal 130 is requesting use based on the command requesting use.
서버(110)가 사용 요청 정보에 포함되는 사용자의 식별정보에 대응되는 인증된 사용자 아이템 리스트 내에 요청된 가상 아이템에 대한 식별정보 및 사용자 단말기의 식별정보가 포함되는지 결정하는 단계를 수행할 수 있다. 서버(110)는 사용 요청 정보에 포함되는 사용자의 식별정보에 기초하여 사용자의 인증된 사용자 아이템 리스트를 획득할 수 있다. 또한 서버(110)는 획득된 인증된 사용자 아이템 리스트 내에 재생 요청 정보에 포함된 요청된 가상 아이템에 대한 식별정보 및 사용자 단말기의 식별정보가 포함되는지 여부를 결정할 수 있다.The server 110 may perform a step of determining whether identification information for the requested virtual item and identification information of the user terminal are included in the authenticated user item list corresponding to the identification information of the user included in the use request information. The server 110 may obtain the user's authenticated user item list based on the user's identification information included in the use request information. In addition, the server 110 may determine whether identification information for the requested virtual item and identification information of the user terminal included in the play request information are included in the obtained authenticated user item list.
인증된 사용자 아이템 리스트에 요청된 가상 아이템에 대한 식별정보 및 사용자 단말기의 식별정보가 포함되는 경우, 서버(110)는 요청된 가상 아이템에 대한 식별정보에 대응되는 가상 아이템의 데이터를 사용자 단말기(130)로 송신하는 단계를 수행할 수 있다. 가상 아이템의 데이터는 서버(110)가 저장하고 있을 수 있다. 하지만 이에 한정되는 것은 아니며, 서버(110)는 별도의 가상 아이템 클라우드 서버가 가상 아이템의 데이터를 사용자 단말기(130)로 제공하도록 제어할 수 있다. 여기서 가상 아이템의 데이터는 가상 아이템의 모델링 데이터를 포함할 수 있다.When the authenticated user item list includes the identification information of the requested virtual item and the identification information of the user terminal, the server 110 transmits data of the virtual item corresponding to the identification information of the requested virtual item to the user terminal 130. ) can be performed. Data of the virtual item may be stored by the server 110 . However, the present invention is not limited thereto, and the server 110 may control a separate virtual item cloud server to provide virtual item data to the user terminal 130 . Here, data of the virtual item may include modeling data of the virtual item.
가상 아이템의 데이터는 사용자가 소유한 아이템에 포함되지 않은 컨텐츠가 포함될 수 있다. 예를 들어, 사용자가 소유한 아이템에서는 음악 또는 영상이 재생되지 않지만, 가상인물이 가상 아이템을 착용하면 음악 또는 영상이 재생될 수도 있다. 따라서 서버(110)는 사용자들이 자신이 실제로 소유한 아이템을 서버(110)에 인증할 것을 유도할 수 있다.Data of the virtual item may include content not included in the item owned by the user. For example, although music or video is not played on an item owned by the user, music or video may be played when the virtual person wears the virtual item. Accordingly, the server 110 may induce users to authenticate an item they actually own to the server 110 .
도 8은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작방법을 나타내는 흐름도이다.8 is a flowchart illustrating a method of operating a metaverse system according to an embodiment of the present disclosure.
구매자 단말기(810)는 인증정보를 획득하는 단계(821)를 수행할 수 있다. 구매자 단말기(810)는 사용자 단말기(130)와 다를 수 있다. 또한 구매자 단말기(810)의 소유자는 사용자 단말기(130)의 소유자와 다를 수 있다. 사용자는 사용자가 소유한 아이템을 최초로 구입한 사용자일 수 있다. 또한, 사용자 단말기(130)는 사용자가 소유한 아이템을 최초로 인증한 사용자 단말기 일 수 있다. 구매자는 사용자로부터 사용자가 소유한 아이템을 구입한 사람일 수 있다. 구매자 단말기(810)는 구매자의 단말기 일 수 있다.The purchaser terminal 810 may perform step 821 of acquiring authentication information. The purchaser terminal 810 may be different from the user terminal 130 . Also, the owner of the purchaser terminal 810 may be different from the owner of the user terminal 130 . The user may be a user who initially purchases an item owned by the user. Also, the user terminal 130 may be a user terminal that authenticates an item owned by the user for the first time. The purchaser may be a person who purchases an item owned by the user from the user. The purchaser's terminal 810 may be a purchaser's terminal.
본 개시의 일 실시예에 따르면, 구매자 단말기(810)가 인증정보를 획득하는 과정은 사용자 단말기(130)가 인증정보를 획득하는 과정과 동일할 수 있다. 예를 들어, 구매자 단말기(810)는 카메라를 이용하여 태그로부터 인증정보를 획득할 수 있다. 태그는 통신부를 포함할 수 있다. 태그의 통신부는 구매자 단말기(810)와 통신할 수 있다. 통신 방식은 NFC(Near Field Communication), 또는 블루투스 등을 이용할 수 있다. 구매자 단말기(810)는 태그와 통신하여 인증정보를 획득할 수 있다. 이미 설명한 바와 같이 인증정보는 One Time Password일 수 있다.According to an embodiment of the present disclosure, a process in which the purchaser terminal 810 obtains authentication information may be the same as a process in which the user terminal 130 obtains authentication information. For example, the purchaser terminal 810 may obtain authentication information from a tag using a camera. A tag may include a communication unit. The communication unit of the tag may communicate with the purchaser terminal 810 . The communication method may use Near Field Communication (NFC) or Bluetooth. The purchaser terminal 810 may obtain authentication information by communicating with the tag. As already described, the authentication information may be a One Time Password.
본 개시의 일 실시예에 따르면, 구매자 단말기(810)가 인증정보를 획득하는 과정은 사용자 단말기(130)가 인증정보를 획득하는 과정과 다를 수 있다. According to an embodiment of the present disclosure, a process in which the purchaser terminal 810 obtains authentication information may be different from a process in which the user terminal 130 obtains authentication information.
사용자 단말기(130)는 구매자 단말기(810)로 인증정보의 송신을 요청할 수 있다. 사용자 단말기(130)가 구매자 단말기(810)로 인증정보의 송신을 요청하는 경우, 사용자 단말기(130)가 인증정보에 대한 송수신내역정보를 서버, 사용자 단말기, 및 구매자 단말기에 분산하여 공유하는 단계를 수행할 수 있다. 서버, 사용자 단말기, 및 구매자 단말기는 블록체인 네트워크로 상호 연결되어 있을 수 있다.The user terminal 130 may request transmission of authentication information to the purchaser terminal 810 . When the user terminal 130 requests transmission of authentication information to the purchaser terminal 810, the user terminal 130 distributes and shares transmission/reception detail information for the authentication information to the server, the user terminal, and the purchaser terminal. can be done The server, the user terminal, and the purchaser terminal may be interconnected through a blockchain network.
여기서 송수신내역정보는 인증정보와 관련된 가상 아이템에 대한 저작권자명 또는 상표권자명을 포함하는 권리자 상세정보를 포함할 수 있다. 송수신내역정보는 인증정보와 관련된 가상 아이템에 대한 상세정보를 포함할 수 있다. 송수신내역정보는 인증정보와 관련된 가상 아이템에 대한 상표권여부, 상표권자, 저작권자, 저작권만료일, 재판매 가능횟수제한 또는 재판매 유효기간 정보를 포함하는 권리 상세정보를 포함할 수 있다. 송수신내역정보는 인증정보와 관련된 가상 아이템을 구매 또는 판매한 사용자 단말기 및 구매자 단말기 관련 상세정보를 포함할 수 있다.Here, the transmission/reception detail information may include detailed information of the right holder including the name of the copyright holder or trademark holder of the virtual item related to the authentication information. The transmission/reception detail information may include detailed information on virtual items related to authentication information. The transmission/reception detail information may include detailed rights information including whether or not a trademark is registered for a virtual item related to authentication information, a trademark owner, a copyright owner, a copyright expiration date, a limit on the number of times of resale, or an expiration date of resale. The transmission/reception detail information may include detailed information related to a user terminal that purchased or sold a virtual item related to authentication information and a purchaser terminal.
서버(110), 사용자 단말기(130), 및 구매자 단말기(810)는 인증정보에 대한 송수신내역정보에 기초하여 해시값을 각각 도출하는 단계를 수행할 수 있다.The server 110, the user terminal 130, and the purchaser terminal 810 may each perform a step of deriving a hash value based on transmission/reception detail information for authentication information.
서버(110), 사용자 단말기(130), 및 구매자 단말기(810)는 가상 아이템 데이터의 송수신내역정보를 해싱알고리즘에 의해 가공처리하여 해시값을 생성할 수 있다.The server 110, the user terminal 130, and the purchaser terminal 810 may generate a hash value by processing transmission/reception detail information of virtual item data using a hashing algorithm.
서버(110), 사용자 단말기(130), 및 구매자 단말기(810)의 해시값이 상호 일치하면, 구매자 단말기(810)가 인증정보에 대한 결제정보를 서버로 송신하는 단계를 수행할 수 있다. 서버(110), 사용자 단말기(130), 및 구매자 단말기(810)의 해시값이 일치하는지 판단하기 위하여, 각각의 장치에서 생성된 해시값은 상호 공유될 수 있다. 즉, 서버(110)에서 생성된 해시값은 사용자 단말기(130) 및 구매자 단말기(810)로 공유될 수 있고, 사용자 단말기(130)에서 생성된 해시값은 서버(110) 및 구매자 단말기(810)로 공유될 수 있으며, 구매자 단말기(810)에서 생성된 해시값은 서버(110) 및 사용자 단말기(130)로 공유될 수 있다. 서버(110), 사용자 단말기(130), 및 구매자 단말기(810)는 상호 공유된 해시값이 서로 일치함을 결정할 수 있다.When the hash values of the server 110 , the user terminal 130 , and the purchaser terminal 810 match each other, the purchaser terminal 810 may perform a step of transmitting payment information for authentication information to the server. In order to determine whether the hash values of the server 110, the user terminal 130, and the purchaser terminal 810 match, the hash values generated by each device may be mutually shared. That is, the hash value generated by the server 110 may be shared by the user terminal 130 and the purchaser terminal 810, and the hash value generated by the user terminal 130 is shared by the server 110 and the purchaser terminal 810. , and the hash value generated by the purchaser terminal 810 may be shared by the server 110 and the user terminal 130 . The server 110, the user terminal 130, and the purchaser terminal 810 may determine that the mutually shared hash values match each other.
인증정보에 대한 결제정보는 구매자가 구매자 단말기(810)를 이용하여 사용자가 소유한 아이템 또는 가상 아이템의 데이터를 사용자로부터 구입하기 위한 결제정보일 수 있다. 결제정보는 결제에 필요한 정보를 포함할 수 있다. 예를 들어 결제정보는 결제금액, 신용카드에 대한 정보, 또는 결제 은행에 대한 정보 등을 포함할 수 있다. 구매자 단말기(810)가 인증정보에 대한 결제정보를 서버(110)로 송신하는 것은 구매자 단말기(810)가 서버(110)로 결제금액을 지불했음을 의미할 수 있다.Payment information for authentication information may be payment information for a purchaser to purchase an item owned by the user or data of a virtual item from the user using the purchaser terminal 810 . Payment information may include information necessary for payment. For example, the payment information may include a payment amount, credit card information, or payment bank information. When the purchaser terminal 810 transmits payment information for authentication information to the server 110 , it may mean that the purchaser terminal 810 has paid the server 110 the payment amount.
서버(110)가 결제정보를 수신하는 경우, 서버(110)는 사용자 단말기(130)로 거래승인정보를 송신하는 단계를 수행할 수 있다. 거래승인정보는 서버(110)가 사용자 단말기(130) 및 구매자 단말기(810) 사이의 가상 아이템 데이터의 거래를 승인했음을 나타낼 수 있다. 서버(110)는 구매자 단말기로부터 수신한 금액 중 서비스 업체의 수수료 또는 저작권자에 대한 저작권료를 차감한 금액을 사용자에게 전달할 수 있다.When the server 110 receives payment information, the server 110 may perform a step of transmitting transaction approval information to the user terminal 130 . The transaction approval information may indicate that the server 110 has approved the virtual item data transaction between the user terminal 130 and the purchaser terminal 810 . The server 110 may deliver to the user an amount obtained by subtracting a fee from a service company or a copyright fee from a copyright owner among the amounts received from the purchaser terminal.
거래승인정보에 기초하여 사용자 단말기(130)는 구매자 단말기(810)로 인증정보를 송신하는 단계를 수행할 수 있다. 즉, 사용자 단말기(130)는 거래승인정보를 수신하고, 거래승인정보가 정당한 것으로 결정된 경우, 인증정보를 구매자 단말기(810)로 송신할 수 있다. 사용자 단말기(130) 및 구매자 단말기(810) 사이에서는 가상 아이템의 데이터의 전송이 생기지 않을 수 있다. 구매자 단말기(810)는 인증정보에 기초하여 서버(110)를 통하여 가상 아이템의 데이터를 수신할 수 있다.Based on the transaction approval information, the user terminal 130 may perform a step of transmitting authentication information to the purchaser terminal 810 . That is, the user terminal 130 may receive transaction approval information and transmit authentication information to the purchaser terminal 810 when it is determined that the transaction approval information is legitimate. Transmission of virtual item data may not occur between the user terminal 130 and the purchaser terminal 810 . The purchaser terminal 810 may receive virtual item data through the server 110 based on authentication information.
이제까지 구매자 단말기(810)가 인증정보를 수신하는 과정에 대하여 설명하였다. 이하에서는 도 8과 함께 구매자 단말기(810)가 인증정보에 기초하여 서버(110)에 인증된 사용자 아이템 리스트를 갱신하는 과정을 설명한다.So far, the process of receiving authentication information by the purchaser terminal 810 has been described. Hereinafter, a process in which the purchaser terminal 810 updates the authenticated user item list in the server 110 based on authentication information together with FIG. 8 will be described.
도 8을 참조하면, 구매자 단말기(810)가 인증정보, 사용자가 소유한 실물 아이템에 기초한 가상 아이템의 식별정보, 구매자의 식별정보, 및 구매자 단말기의 식별정보를 서버(110)로 송신하는 단계(822)를 수행할 수 있다. 단계(822)는 수행의 주체만 다를 뿐, 단계(612) 또는 단계(722)와 동일할 수 있다. 따라서 중복되는 설명은 생략한다.Referring to FIG. 8 , the purchaser terminal 810 transmits authentication information, identification information of a virtual item based on a real item owned by a user, purchaser identification information, and purchaser terminal identification information to the server 110 ( 822) can be performed. Step 822 may be the same as step 612 or step 722 except that the subject of execution is different. Therefore, redundant descriptions are omitted.
서버(110)는 인증정보가 가상 아이템의 식별정보에 대응하고, 정당한 것인지 여부를 결정하는 단계(831)를 수행할 수 있다. 이 단계는 단계(621)와 동일할 수 있다. 따라서 중복되는 설명은 생략한다.The server 110 may perform step 831 of determining whether the authentication information corresponds to the identification information of the virtual item and is legitimate. This step may be the same as step 621. Therefore, redundant descriptions are omitted.
인증정보가 가상 아이템의 식별정보에 대응하며 정당한 것으로 결정된 경우, 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하는 단계(832)를 수행할 수 있다. 가상 아이템에 대한 사용권리가 사용자에서 구매자로 이전되었으므로, 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제함으로써, 사용자가 더이상 가상 아이템을 사용하지 못하도록 할 수 있다. 서버(110)는 사용자의 식별코드에 대응되는 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보를 삭제하기 전에, 인증된 사용자 아이템 리스트에서 가상 아이템의 식별정보가 삭제될 것임을 나타내는 정보를 사용자 단말기(130)에 전송할 수 있다. 이에 따라 사용자는 자신이 가상 아이템을 사용하지 못하게 될 것임을 명확히 알 수 있다.When it is determined that the authentication information corresponds to the identification information of the virtual item and is legitimate, the server 110 may perform step 832 of deleting the identification information of the virtual item from the authenticated user item list corresponding to the user's identification code. there is. Since the right to use the virtual item is transferred from the user to the purchaser, the server 110 deletes the identification information of the virtual item from the list of authenticated user items corresponding to the user's identification code, thereby preventing the user from using the virtual item any longer. can do. Before deleting the identification information of the virtual item from the authenticated user item list corresponding to the user's identification code, the server 110 transmits information indicating that the identification information of the virtual item will be deleted from the authenticated user item list to the user terminal 130. ) can be transmitted. Accordingly, the user can clearly know that he or she will not be able to use the virtual item.
서버(110)가 구매자의 식별코드에 대응되는 인증된 구매자 아이템 리스트에 가상 아이템의 식별정보 및 구매자 단말기(810)의 식별정보를 저장하는 단계(833)를 수행할 수 있다. 구매자는 가상 아이템에 대한 정당한 권리를 확보하였으므로, 서버(110)는 구매자 아이템 리스트에 가상 아이템의 식별정보 및 구매자 단말기의 식별정보를 저장함으로써, 구매자 단말기(810)가 가상 아이템을 사용할 수 있도록 허용할 수 있다.The server 110 may perform step 833 of storing the identification information of the virtual item and the identification information of the purchaser terminal 810 in the authenticated purchaser item list corresponding to the purchaser's identification code. Since the purchaser has secured the legitimate right to the virtual item, the server 110 stores the identification information of the virtual item and the identification information of the purchaser terminal in the purchaser item list, thereby permitting the purchaser terminal 810 to use the virtual item. can
서버(110)는 구매자의 식별코드에 대응되는 인증된 구매자 아이템 리스트에 대한 정보를 구매자 단말기(810)로 송신하는 단계(834)를 수행할 수 있다. 단계(834)는 단계(623)와 유사할 수 있다. 따라서 중복되는 설명은 생략한다. 또한 구매자 단말기(810)가 구매자의 선택에 기초하여 구매자의 식별코드에 대응되는 구매자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 구매자의 가상인물에 대한 정보를 획득하는 단계(841)를 수행할 수 있다. 단계(841)는 단계(631)와 유사할 수 있다. 따라서 중복되는 설명은 생략한다.The server 110 may perform step 834 of transmitting information about the authenticated buyer item list corresponding to the buyer's identification code to the buyer terminal 810 . Step 834 may be similar to step 623 . Therefore, redundant descriptions are omitted. In addition, the purchaser terminal 810 obtains information about the purchaser's virtual character by using at least one item among at least one item included in the purchaser's item list corresponding to the purchaser's identification code based on the purchaser's selection (841). can be performed. Step 841 may be similar to step 631 . Therefore, redundant descriptions are omitted.
도 11은 본 개시의 일 실시예에 따른 메타버스 시스템의 동작을 나타낸 흐름도이다.11 is a flowchart illustrating the operation of the metaverse system according to an embodiment of the present disclosure.
서버(110)가 3차원의 가상공간에 대한 정보를 사용자 단말기(130)로 송신하는 단계(324)는 다음과 같은 과정을 포함할 수 있다. 관리자 단말기(120)가 서버(110)에 사용자 단말기(130)의 식별정보, 사용자의 식별정보, 및 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계(1111)를 수행할 수 있다. 관리자는 실제 공간의 임대업자, 실제 공간의 판매자, 또는 실제 공간의 중계업자 중 하나일 수 있다. 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보는 계약일자, 계약 대상의 식별정보, 계약 대상의 가격, 계약의 당사자 및 계약 내용에 대한 정보를 포함할 수 있다. 여기서 계약 대상은 실제 공간일 수 있다. 또한 계약 대상의 식별정보는 실제 공간의 소재지, 지목, 또는 넓이를 포함할 수 있다. 계약 내용은 임대계약, 또는 매매계약 등을 포함할 수 있다. 계약의 당사자는, 매수자, 매도자, 임대인, 또는 임차인 중 적어도 하나를 포함할 수 있다. 관리자 단말기(120)는 계약을 체결하기 위하여 서버(110)에 계약과 관련된 정보를 송신할 수 있다. 즉, 계약과 관련된 정보는 계약 체결 전에 필요한 다양한 정보를 포함할 수 있다. 이러한 과정을 통하여 관리자 단말기(120)는 계약의 청약을 할 수 있다.Step 324 of the server 110 transmitting information about the 3D virtual space to the user terminal 130 may include the following process. In step 1111, the manager terminal 120 transmits to the server 110 identification information of the user terminal 130, identification information of the user, and information related to a contract for sale or lease of a real space corresponding to the virtual space. can do. The manager may be one of a real space lessor, a real space seller, or a real space broker. Information related to a contract for sale or lease of a real space corresponding to a virtual space may include the date of the contract, identification information of the subject of the contract, price of the subject of the contract, and information on the parties to the contract and the contents of the contract. Here, the contract subject may be an actual space. In addition, the identification information of the subject of the contract may include the location, designation, or area of the actual space. The contents of the contract may include a rental contract or a sales contract. Parties to the contract may include at least one of a buyer, a seller, a lessor, or a lessee. The manager terminal 120 may transmit information related to the contract to the server 110 in order to conclude the contract. That is, the information related to the contract may include various types of information necessary before signing the contract. Through this process, the manager terminal 120 can subscribe for a contract.
서버(110)는 사용자 단말기(130)에게 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계(1121)를 수행할 수 있다. 서버(110)는 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보를 저장할 수 있다. 본 개시의 메타버스 시스템은 서버(110)를 통하여 관리자 단말기(120)가 사용자 단말기(130)로 계약과 관련된 정보를 전송하여야 하므로 계약 내용의 변조 가능성을 줄일 수 있다.The server 110 may perform step 1121 of transmitting information related to a sale or lease contract of real space to the user terminal 130 . The server 110 may store information related to a contract for sale or lease of a real space corresponding to a virtual space. In the metaverse system of the present disclosure, since the manager terminal 120 must transmit information related to the contract to the user terminal 130 through the server 110, the possibility of falsification of the contents of the contract can be reduced.
사용자 단말기(130)는 실제 공간의 매매 또는 임대 계약과 관련된 정보에 대한 승낙 정보 및 사용자 단말기의 식별정보 및 사용자의 식별정보를 서버(110)로 송신하는 단계(1131)를 수행할 수 있다. 즉 사용자는 사용자 단말기(130)를 통하여 계약의 승낙을 할 수 있다.The user terminal 130 may perform step 1131 of transmitting acceptance information regarding information related to a contract for sale or rental of real space, identification information of the user terminal, and identification information of the user to the server 110 . That is, the user may accept the contract through the user terminal 130 .
서버(110)는 승낙 정보를 수신한 경우, 관리자 단말기(120)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기(130)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한지 결정하는 단계(1141)를 수행할 수 있다. 사용자는 관리자 단말기(120)에도 사용자의 식별정보 및 단말기의 식별정보를 입력할 수 있다. 즉, 사용자와 관리자는 같은 공간에 있어야 할 수 있다. 서버(110)는 관리자 단말기(120)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기(130)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한 경우, 승낙 정보가 정당한 것임을 결정할 수 있다. 서버(110)는 관리자 단말기(120)로부터는 관리자 단말기의 식별정보 및 관리자 식별정보를 수신하여 저장하고, 사용자 단말기(130)로부터 사용자 단말기의 식별정보 및 사용자 식별정보를 수신하여 저장할 수 있다.When the server 110 receives the consent information, the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are combined with the identification information of the user terminal and the identification information of the user received from the user terminal 130. Step 1141 of determining whether they are the same may be performed. The user may also input user identification information and terminal identification information to the manager terminal 120 . That is, users and administrators may need to be in the same space. When the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are the same as the identification information of the user terminal and the identification information of the user received from the user terminal 130, the server 110 determines that the consent information is legitimate. can decide that The server 110 may receive and store identification information of the manager terminal and manager identification information from the manager terminal 120 and receive and store identification information of the user terminal and user identification information from the user terminal 130 .
하지만 이에 한정되는 것은 아니다. 서버(110)는 승낙 정보를 수신하고, 관리자 단말기(120)로부터는 관리자 단말기의 식별정보 및 관리자 식별정보를 수신하여 저장하고, 사용자 단말기(130)로부터 사용자 단말기의 식별정보 및 사용자 식별정보를 수신하여 저장할 수 있다. 서버(110)는 별다른 확인 없이 승낙 정보가 정당한 것이라고 결정할 수 있다.However, it is not limited thereto. The server 110 receives consent information, receives and stores identification information of the manager terminal and manager identification information from the manager terminal 120, and receives identification information of the user terminal and user identification information from the user terminal 130. and can be saved. The server 110 may determine that the consent information is legitimate without any confirmation.
관리자 단말기(120)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기(130)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한 경우, 서버(110)는 사용자 단말기(130)로 3차원의 가상공간에 대한 정보를 송신하는 단계(1142)를 수행할 수 있다. 따라서 사용자는 사용자 단말기(130)를 이용하여 가상공간을 이용할 수 있다. 사용자가 가상인물을 이용하여 가상공간을 돌아다니는 것은 단계(410)에서 이미 설명한 바 있으므로 중복되는 설명은 생략한다. 또한 서버는 관리자 단말기(120)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보가 사용자 단말기(130)로부터 수신한 사용자 단말기의 식별정보 및 사용자의 식별정보와 동일한지 여부에 관계 없이, 사용자 단말기로부터 승낙 정보를 수신한 경우, 사용자 단말기(130)로 3차원의 가상공간에 대한 정보를 사용자 단말기로 송신하는 단계(1142)를 수행할 수 있다.When the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are the same as the identification information of the user terminal and the identification information of the user received from the user terminal 130, the server 110 sends the user terminal 130 ), step 1142 of transmitting information on the 3D virtual space can be performed. Therefore, the user can use the virtual space using the user terminal 130 . Since the user's wandering around the virtual space using the virtual person has already been described in step 410, a duplicate description will be omitted. In addition, the server determines whether the identification information of the user terminal and the identification information of the user received from the manager terminal 120 are the same as the identification information of the user terminal and the identification information of the user received from the user terminal 130. When consent information is received from , step 1142 of transmitting information on a 3D virtual space to the user terminal 130 may be performed.
서버(110)가 승낙 정보를 수신한 경우, 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보 및 사용자 식별정보, 사용자 단말기의 식별정보, 관리자 식별정보 및 관리자 단말기의 식별정보 중 적어도 하나는 서버(110)의 수정불가한 저장소에 저장될 수 있다. 저장소는 IPFS(Inter-Planetary File System)일 수 있다. 서버는 실제 공간의 매매 또는 임대 계약과 관련된 정보에 2개의 NFT(Non Fungible Token)를 발행할 수 있다. 발행된 NFT 는 각각 관리자 단말기 및 사용자 단말기에 송신될 수 있다. 관리자 단말기(120) 및 사용자 단말기(130)는 NFT의 해시값에 의하여 IPFS에 저장된 실제 공간의 매매 또는 임대 계약과 관련된 정보에 접근할 수 있으나, 계약 내용을 임의로 변경하지 못할 수 있다. 따라서 계약 내용의 변조가능성이 크게 줄어들 수 있다.When the server 110 receives the consent information, at least one of information related to a contract for sale or rental of a real space corresponding to a virtual space, user identification information, identification information of a user terminal, manager identification information, and identification information of a manager terminal may be stored in an unmodifiable storage of the server 110. The storage may be an Inter-Planetary File System (IPFS). The server may issue two NFTs (Non Fungible Tokens) to information related to a sale or lease contract of real space. The issued NFTs can be transmitted to the manager terminal and user terminal, respectively. The manager terminal 120 and the user terminal 130 can access information related to a contract for sale or lease of real space stored in IPFS by using the hash value of the NFT, but may not arbitrarily change the contents of the contract. Therefore, the possibility of tampering with the contents of the contract can be greatly reduced.
이미 설명한 바와 같이, 서버(110)는 사용자 단말기(130)로 3차원의 가상공간에 대한 정보를 사용자 단말기로 송신하는 단계(1142)를 수행할 수 있다. 그 이후, 사용자는 사용자 단말기(130)를 이용하여 가상공간 내에서 가상인물을 조작할 수 있다. 또한 사용자는 사용자 단말기(130)를 이용하여 가상공간 내의 다른 사용자들과 소통을 할 수 있다. 다른 사용자들 역시 위와 같은 과정을 통하여 3차원 가상공간에 대한 정보를 서버로부터 수신한 사용자들일 수 있다.As already described, the server 110 may perform step 1142 of transmitting information about the 3D virtual space to the user terminal 130 . After that, the user can manipulate the virtual character in the virtual space using the user terminal 130 . In addition, the user can communicate with other users in the virtual space using the user terminal 130 . Other users may also be users who have received information about the 3D virtual space from the server through the above process.
보다 구체적으로, 우리나라의 아파트 청약 시스템에서 사용자가 아파트를 분양 받은 후 아파트가 지어지기까지 아파트의 삶을 전혀 체험해볼 수 없다. 하지만 본 개시에 따른 메타버스 시스템은 가상공간에 지어질 아파트 단지를 구현해 놓을 수 있다. 따라서 아파트를 분양받은 사용자들은 가상공간의 아파트를 돌아다니면서 실제 아파트에서의 삶을 즐겨볼 수 있다. 즉, 본 개시의 메타버스 시스템은 입주 전에는 사용자들이 아파트 단지를 미리 체험하는 가상공간을 마련하며, 가상공간은 입주 전의 상황과 관련된 다양한 정보를 제공하기 위한 공간으로 활용될 수 있다. 예를 들어 본 개시의 메타버스 시스템은 사용자들에게 공사 진척 상황을 알려주거나 중도금, 잔금 납입 방법, 납입일 등을 알려줄 수 있다. 또한 본 개시의 메타버스 시스템은 가상공간의 아파트의 커뮤니티로 활용될 수 있다. 입주민들은 메타버스를 이용하여 가상공간에서 다양한 친목활동을 할 수 있으며, 온라인 서비스를 제공받을 수 있다.More specifically, in Korea's apartment subscription system, users cannot experience the life of an apartment at all from the time the apartment is sold until the apartment is built. However, the metaverse system according to the present disclosure can implement an apartment complex to be built in a virtual space. Therefore, users who have received an apartment can enjoy life in a real apartment while walking around the apartment in the virtual space. That is, the metaverse system of the present disclosure provides a virtual space in which users experience an apartment complex in advance before moving in, and the virtual space can be used as a space to provide various information related to the situation before moving in. For example, the metaverse system of the present disclosure may inform users of the progress of construction, or inform intermediate payment, balance payment method, payment date, and the like. In addition, the metaverse system of the present disclosure can be utilized as a community of apartments in virtual space. Residents can engage in various social activities in virtual space using the metabus and receive online services.
사용자 단말기(130)는 로그 정보를 획득하는 단계(420)를 수행할 수 있다. 보다 구체적으로, 사용자 단말기(130)는 사용자 단말기(130)의 디스플레이(1010)의 해상도를 획득하는 단계를 수행할 수 있다. 디스플레이의 해상도는 메모리에 미리 저장되어 있을 수 있다. 사용자 단말기(130)는 디스플레이의 해상도에 기초하여 디스플레이의 미리 정해진 일부 영역을 관심 영역(1020)으로 설정하는 단계를 수행할 수 있다. 사용자 단말기(130)는 관심 영역 내에 미리 정해진 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계를 수행할 수 있다. 여기서 임계 시간은 10초 이상의 값을 가질 수 있다. 적어도 일정 시간 이상 가상 오브젝트를 화면의 가운데에 위치시켰다는 것은, 사용자가 가상 오브젝트에 관심을 표현하였다는 것을 나타낼 수 있다. 따라서 사용자 단말기(130)는 로그 정보에 관심 영역에 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함할 수 있다. 사용자 단말기(130) 또는 서버(110)는 추후 로그 정보를 빅데이터로 이용하여 사용자에 따라 선호하는 가상 오브젝트를 도출할 수 있다. 따라서 사용자 단말기(130) 또는 서버(110)는 사용자 맞춤형 가상 오브젝트를 제공할 수 있다.The user terminal 130 may perform step 420 of acquiring log information. More specifically, the user terminal 130 may perform a step of acquiring the resolution of the display 1010 of the user terminal 130 . The resolution of the display may be pre-stored in a memory. The user terminal 130 may perform a step of setting a predetermined partial region of the display as the region of interest 1020 based on the resolution of the display. The user terminal 130 may perform a step of including, in the log information, virtual object information of interest including identification information of a virtual object displayed in the region of interest for a predetermined threshold time or longer. Here, the threshold time may have a value of 10 seconds or more. Positioning the virtual object in the center of the screen for at least a predetermined period of time may indicate that the user expressed interest in the virtual object. Accordingly, the user terminal 130 may include identification information of a virtual object displayed in the region of interest for a threshold period of time or longer in the log information. The user terminal 130 or the server 110 may later use the log information as big data to derive virtual objects preferred by the user. Accordingly, the user terminal 130 or the server 110 may provide a user-customized virtual object.
사용자 단말기(130)는 가상인물이 상호작용한 가상 오브젝트 및 상호작용의 내용을 포함하는 관심 가상 오브젝트 정보를 로그 정보에 포함시키는 단계를 수행할 수 있다. 가상인물과 가상 오브젝트의 상호작용은 미리 정해져 있을 수 있다. 예를 들어, 미리 정해진 상호작용은 가상인물의 자세를 변형하거나, 가상 오브젝트의 위치, 색 또는 형태를 변형할 수 있다. 예를 들어 가상 오브젝트가 의자라면 가상인물은 가상 오브젝트에 앉는 상호작용을 할 수 있다. 가상인물은 가상 오브젝트에 앉는 동작을 취할 수 있다. 또한 가상 오브젝트가 전등이라면, 가상인물은 전등을 켜거나 끄는 동작을 취할 수 있다. 가상 오브젝트는 가상인물의 동작에 대응하여 불이 켜지거나 꺼질 수 있다. 가상 오브젝트가 시소라면, 가상인물은 가상 오브젝트에 앉는 상호작용을 할 수 있으며, 가상 오브젝트인 시소는 가상인물이 앉는 동작에 대응하여 움직일 수 있다. 미리 정해진 상호작용은 식별정보가 부여되어 있을 수 있다. 사용자 단말기(130)는 가상인물이 상호작용한 가상 오브젝트의 식별정보 및 상호작용의 식별정보를 관심 가상 오브젝트 정보에 포함시킬 수 있다.The user terminal 130 may perform a step of including virtual object information of interest, including the virtual object that the virtual character has interacted with and the content of the interaction, in the log information. Interactions between virtual characters and virtual objects may be predetermined. For example, the predetermined interaction may change a posture of a virtual character or a position, color, or shape of a virtual object. For example, if the virtual object is a chair, the virtual character can interact to sit on the virtual object. The virtual character may perform a sitting motion on the virtual object. Also, if the virtual object is a light, the virtual character can take an action to turn on or turn off the light. The virtual object may be turned on or off in response to the motion of the virtual character. If the virtual object is a seesaw, the virtual character can interact to sit on the virtual object, and the seesaw, which is a virtual object, can move in response to the motion of the virtual character sitting down. Identification information may be assigned to the predetermined interaction. The user terminal 130 may include the identification information of the virtual object with which the virtual character interacted and the identification information of the interaction in interest virtual object information.
사용자 단말기(130)는 가상인물이 다른 사용자들의 가상인물들 또는 NPC(non-player character)와 대화한 내용을 로그 정보에 포함시키는 단계를 수행할 수 있다. 대화의 내용에는 가상공간에서 개선되면 하는 점 또는 관심 가상 오브젝트에 대한 내용이 포함되어 있을 수 있다.만약 가상공간이 입주 전의 아파트단지인 경우, 분양을 받은 사용자들은 본 개시의 메타버스 시스템이 제공하는 가상공간에서 아파트 입주 후의 삶을 체험해볼 수 있다. 또한 가상공간에서 아파트 단지의 상가공간은 프로모션차원에서 입주민들이 쿠폰을 수신할 수 있는 공간으로 활용될 수 있다. 예를 들어 사용자는 사용자 단말기(130)를 이용하여 가상공간의 특정 공간으로 이동할 수 있다. 특정 공간은 서버(110)가 지정한 위치의 공간일 수 있다. 특정 공간은 상가공간에 포함될 수 있다. 서버(110)는 상가공간에 있는 가상인물들에게 쿠폰을 발급할 수 있다. 쿠폰은 일련번호, QR코드 또는 바코드를 포함할 수 있다. 사용자는 메타버스에서 수신한 쿠폰을 현실의 매장에서 이용할 수 있다. 또한 쿠폰은 디지털 할인권일 수 있다. 사용자 단말기(130)는 쿠폰을 서버(110)에 송신할 수 있다. 서버(110)는 쿠폰에 대응하는 적어도 하나의 가상 아이템을 사용자 단말기(130)에 표시하도록 제어할 수 있다. 사용자는 사용자 단말기(130)를 이용하여 적어도 하나의 가상 아이템 중 하나를 선택할 수 있다. 서버(110)는 사용자의 선택에 대응하여 선택된 가상 아이템의 식별정보 및 사용자 단말기의 식별정보를 사용자 아이템 리스트에 저장할 수 있다. 위와 같은 과정을 통하여 메타버스 시스템은 가상인물들이 가상공간에서 이곳 저곳을 돌아다니도록 유도할 수 있다.The user terminal 130 may perform a step of including the conversation contents of the virtual character with other users' virtual characters or non-player characters (NPCs) in the log information. The content of the conversation may include information about what needs to be improved in the virtual space or about virtual objects of interest. If the virtual space is an apartment complex before moving in, users who have received a sale can receive You can experience life after moving into an apartment in a virtual space. Also, in the virtual space, the commercial space of an apartment complex can be used as a space where residents can receive coupons for promotion. For example, the user can move to a specific space of the virtual space using the user terminal 130 . The specific space may be a space of a location designated by the server 110 . A specific space may be included in the commercial space. The server 110 may issue coupons to virtual characters in the shopping mall. Coupons may include serial numbers, QR codes or barcodes. Users can use coupons received from the metaverse at real stores. Also, the coupon may be a digital discount voucher. The user terminal 130 may transmit the coupon to the server 110 . The server 110 may control to display at least one virtual item corresponding to the coupon on the user terminal 130 . A user may select one of at least one virtual item using the user terminal 130 . The server 110 may store identification information of the virtual item selected in response to the user's selection and identification information of the user terminal in the user item list. Through the above process, the metabus system can induce virtual characters to wander around in the virtual space.
서버(110)는 가상인물들의 동선을 누적하여 저장할 수 있다. 서버(110)는 가상인물들의 동선 중 미리 설계된 도로 미리 정해진 거리 이상 떨어진 동선이 있는 경우, 해당 동선을 관리자 단말기(120)로 송신할 수 있다. 관리자 단말기(120)는 해당 동선을 디스플레이에 표시할 수 있다. 가상인물들의 동선 중 미리 설계된 도로 미리 정해진 거리 이상 떨어진 동선들은 사용자들이 일 지점에서 다른 지점으로 갈 때, 최적의 경로일 수 있다. 하지만 해당 동선에 도로가 설계되지 않은 경우, 현실에서 거주민의 불편을 초래할 수도 있다. 관리자는 해당 동선에 도로 설계가 필요한지 여부를 결정할 수 있다.The server 110 may accumulate and store movement lines of virtual characters. The server 110 may transmit the corresponding movement to the manager terminal 120 when there is a movement of the virtual characters separated by a predetermined distance or more from a pre-designed road. The manager terminal 120 may display the corresponding movement line on the display. Among the movement lines of the virtual characters, a previously designed road that is more than a predetermined distance apart may be an optimal route when users go from one point to another. However, if roads are not designed in the corresponding traffic line, it may cause inconvenience to residents in reality. The manager can decide whether a road design is required for that route.
서버(110)는 로그 정보에 기초하여, 복수의 사용자들이 가상공간에서 자주 들리는 혼잡 위치에 대한 정보를 결정하는 단계를 수행할 수 있다. 이미 설명한 바와 같이 로그 정보는 사용자의 위치를 주기적으로 획득할 수 있다. 서버(110)는 동일 시간에 가상인물의 분포를 획득할 수 있다. 서버(110)는 가상인물의 분포에 기초하여 시간에 따른 혼잡 위치를 결정할 수 있다. 예를 들어 일 시점에 임계숫자 이상의 가상인물들이 일 위치의 주변에 몰려 있다면, 일 위치는 일 시점에 혼잡하다고 결정할 수 있다. 또한 일 시점에 임계숫자 미만의 가상인물들이 일 위치의 주변에 있다면, 일 위치는 일 시점에 혼잡하지 않다고 결정할 수 있다.Based on the log information, the server 110 may perform a step of determining information about a congestion location where a plurality of users often hear in a virtual space. As described above, the log information may periodically acquire the location of the user. The server 110 may obtain the distribution of virtual characters at the same time. The server 110 may determine congestion locations according to time based on the distribution of virtual characters. For example, if more than a critical number of virtual characters are gathered around a location at one point in time, it may be determined that the location is crowded at one point in time. Also, if less than a critical number of virtual characters are in the vicinity of a location at a point in time, it may be determined that the location is not congested at a point in time.
서버(110)는 혼잡 위치에 대응하는 실제 공간의 위치로부터 가까울 수록 상가의 임대료 또는 매매가를 높게 결정하는 단계를 수행할 수 있다. 즉, 가상공간에서 가상인물들의 패턴에 기초하여 현실의 사용자들의 패턴을 시뮬레이션해볼 수 있으며, 이를 통하여 혼잡도가 높을 것으로 예측된 위치 주변의 임대료 또는 매매가를 높게 결정할 수 있다. 따라서 상가 분양가의 현실화를 이룰 수 있다.The server 110 may perform a step of determining a rent or sale price of a shopping mall as it is closer to the location of the real space corresponding to the congested location. That is, patterns of real users may be simulated based on patterns of virtual characters in the virtual space, and through this, it is possible to determine a high rent or sale price around a location where congestion is predicted to be high. Therefore, it is possible to realize the realization of the commercial sale price.
서버(110)는 로그 정보에 포함된 관심 가상 오브젝트 정보에 기초하여 복수의 사용자들이 자주 이용하는 가상 오브젝트를 결정하는 단계를 수행할 수 있다. 관심 가상 오브젝트 정보는 이미 설명하였으므로 중복되는 설명은 생략한다. 관심 가상 오브젝트 정보는 복수의 가상인물에 대하여 획득될 수 있다. 서버(110)는 복수의 가상인물의 관심 가상 오브젝트 정보를 획득하여, 가장 관심이 높거나 자주 이용하는 가상 오브젝트 정보를 결정할 수 있다. 또한, 서버(110)는 자주 이용하는 가상 오브젝트를 관리자 단말기(120)에 송신하는 단계를 수행할 수 있다. 가상공간이 현실에서 아직 공사 중이라면, 관리자는 자주 이용하는 가상 오브젝트를 현실에서 구현할 수 있다. 예를 들어 가상인물이 특정 위치의 벤치에 앉아 있는 경우가 많다면, 현실의 해당 위치에 벤치의 개수를 늘릴 수 있다. 또한 가상공간에서 다양한 디자인의 벤치 중 하나의 디자인에 대한 선호도가 높다면, 현실에서 선호도가 높은 벤치로 단지 내의 벤치를 구현할 수 있다.The server 110 may perform a step of determining a virtual object frequently used by a plurality of users based on the virtual object information of interest included in the log information. Since the virtual object information of interest has already been described, a duplicate description will be omitted. The virtual object information of interest may be obtained for a plurality of virtual characters. The server 110 may obtain virtual object information of interest of a plurality of virtual characters and determine virtual object information of the highest interest or frequently used. Also, the server 110 may perform a step of transmitting frequently used virtual objects to the manager terminal 120 . If the virtual space is still under construction in reality, the administrator can implement frequently used virtual objects in reality. For example, if a virtual character often sits on a bench at a specific location, the number of benches at that location in reality can be increased. In addition, if the preference for one of the benches of various designs is high in the virtual space, the bench in the complex can be implemented as a bench with a high preference in reality.
사용자 단말기(130)는 서버(110)에 저장된 복수의 후보 가상 오브젝트에 포함된 구매 오브젝트에 대한 구매 신호, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버(110)로 송신하는 단계를 수행할 수 있다. 구매 오브젝트에 대한 구매 신호는 구매 오브젝트에 대한 식별정보를 포함할 수 있다.The user terminal 130 may perform a step of transmitting to the server 110 a purchase signal for a purchase object included in a plurality of candidate virtual objects stored in the server 110, identification information of the user, and identification information of the user terminal. can A purchase signal for a purchase object may include identification information for the purchase object.
서버(110)는 구매 신호가 정당한 것인지 여부를 결정하는 단계를 수행할 수 있다. 예를 들어, 서버(110), 사용자 단말기(130), 및 관리자 단말기(120)는 구매 오브젝트에 대한 구매 신호에 대한 송수신내역정보에 기초하여 해시값을 각각 도출하는 단계를 수행할 수 있다. 서버(110), 사용자 단말기(130), 및 관리자 단말기(120)는 구매 오브젝트에 대한 구매 신호의 송수신내역정보를 해싱알고리즘에 의해 가공처리하여 해시값을 생성할 수 있다. 서버(110), 사용자 단말기(130), 및 관리자 단말기(120)의 해시값이 상호 일치하면, 서버(110)는 구매 신호가 정당한 것으로 결정할 수 있다. 또한 사용자 단말기(130)는 구매 오브젝트에 대한 구매 신호에 대한 결제정보를 서버(110)로 송신하는 단계를 수행할 수 있다.The server 110 may perform a step of determining whether the purchase signal is legitimate. For example, the server 110, the user terminal 130, and the manager terminal 120 may each perform a step of deriving a hash value based on transmission/reception detail information on a purchase signal for a purchase object. The server 110, the user terminal 130, and the manager terminal 120 may generate a hash value by processing transmission/reception detail information of a purchase signal for a purchase object using a hashing algorithm. When the hash values of the server 110, the user terminal 130, and the manager terminal 120 match each other, the server 110 may determine that the purchase signal is legitimate. Also, the user terminal 130 may perform a step of transmitting payment information for a purchase signal for a purchase object to the server 110 .
구매 신호가 정당한 것으로 결정된 경우, 서버(110)는 사용자의 식별정보에 대응되는 사용자 오브젝트 리스트에 구매 오브젝트의 식별정보 및 사용자 단말기(130)의 식별정보를 저장하는 단계를 수행할 수 있다. 따라서 사용자는 구매 오브젝트를 전자적으로 소유할 수 있다. When it is determined that the purchase signal is valid, the server 110 may perform a step of storing the identification information of the purchase object and the identification information of the user terminal 130 in the user object list corresponding to the user's identification information. Thus, the user can electronically own the purchase object.
구매 신호가 정당한 것으로 결정된 경우, 구매 오브젝트의 속성에 포함된 구매 오브젝트의 기한까지 서버가 구매 오브젝트를 활성화하는 단계를 포함할 수 있다. 즉, 구매 오브젝트에는 기한이 있을 수 있다. 기한은 무한대일 수도 있다. 하지만 기한은 유한일 수 있다. 서버(110)는 기한이 도과한 경우, 사용자 오브젝트 리스트에서 구매 오브젝트의 식별정보를 삭제할 수 있다. 또한 서버(110)는 구매 오브젝트를 관심 가상 오브젝트로 결정할 수 있다. 서버(110)는 관심 가상 오브젝트를 로그 정보로 저장할 수 있다. 또한 서버(110)는 관심 가상 오브젝트를 선호도가 높은 가상 오브젝트로 결정할 수 있다. 서버(1100는 관심 가상 오브젝트를 관리자 단말기(120)로 송신하여, 관리자가 현실세계에 관심 가상 오브젝트에 대응되는 실제 오브젝트를 구현하도록 할 수 있다.When it is determined that the purchase signal is legitimate, the server may activate the purchase object until the expiration date of the purchase object included in the attributes of the purchase object. That is, the purchase object may have a deadline. The time limit may be infinite. However, the deadline may be finite. When the deadline has elapsed, the server 110 may delete the identification information of the purchased object from the user object list. Also, the server 110 may determine the purchase object as a virtual object of interest. The server 110 may store the virtual object of interest as log information. Also, the server 110 may determine a virtual object of interest as a virtual object having a high preference. The server 1100 may transmit the virtual object of interest to the manager terminal 120 so that the manager implements a real object corresponding to the virtual object of interest in the real world.
사용자 단말기(130)는 디스플레이에 가상인물, 가상공간 및 가상 오브젝트 중 적어도 하나를 표시하는 단계(332)를 수행할 수 있다. 이 때, 사용자 단말기(130)는 활성화된 구매 오브젝트를 표시하는 단계를 수행할 수 있다. 즉, 사용자가 구매한 가상 오브젝트는 가상공간에 표시될 수 있다. 반대로 사용자가 구매하지 않은 가상 오브젝트는 가상공간에 표시되지 않거나 반투명한 윤곽만 표시될 수 있다. The user terminal 130 may perform step 332 of displaying at least one of virtual characters, virtual spaces, and virtual objects on the display. At this time, the user terminal 130 may perform a step of displaying the activated purchase object. That is, the virtual object purchased by the user may be displayed in the virtual space. Conversely, virtual objects not purchased by the user may not be displayed in the virtual space, or only a translucent outline may be displayed.
보다 구체적으로, 구매 오브젝트는 사찰의 기왓장 형상의 가상 오브젝트일 수 있다. 위와 같은 과정에 의하여 사용자가 기왓장을 구매한 경우, 가상공간의 사찰건물의 일부로써, 사용자가 구매한 기왓장이 가상 오브젝트로써, 표시될 수 있다. 사용자 또는 다른 사용자들이 자신의 단말기를 이용하여 가상 오브젝트인 기왓장을 클릭(터치)하는 경우, 해당 가상 오브젝트의 구매자 정보가 디스플레이에 표시될 수 있다. 예를 들어 구매자 정보는 구매자의 성명 및 소원메시지일 수 있다. 이를 통하여 사용자들이 가상 오브젝트인 기왓장을 구매할 수록 가상공간의 사찰건물이 완성되어갈 수 있다. 따라서 사용자들의 참여를 유도할 수 있다. 또한 사용자가는 자신의 기여로 가상의 공간에 건물이 완성되어 가는 과정을 봄으로써, 성취감을 느낄 수 있으며, 다른 사용자가 자신의 기여를 확인할 수 있으므로 만족감을 느낄 수 있다.More specifically, the purchase object may be a virtual object in the shape of a roof tile of a temple. When a user purchases a tile through the above process, the tile purchased by the user may be displayed as a virtual object as part of a temple building in the virtual space. When the user or other users click (touch) a tile, which is a virtual object, using their terminals, buyer information of the virtual object may be displayed on the display. For example, the buyer information may be the buyer's name and wish message. Through this, as users purchase roof tiles, which are virtual objects, the temple building in the virtual space can be completed. Therefore, participation of users can be induced. In addition, users can feel a sense of accomplishment by seeing the process of building a building being completed in a virtual space with their contributions, and can feel a sense of satisfaction because other users can confirm their contributions.
또한, 구매 오브젝트는 사찰의 기왓장 형상의 가상 오브젝트일 수 있다. 위와 같은 과정에 의하여 사용자가 기왓장을 구매한 경우, 가상공간의 사찰건물의 일부로써, 사용자가 구매한 기왓장이 가상 오브젝트로써, 표시될 수 있다. 사용자 또는 다른 사용자들이 자신의 단말기를 이용하여 가상 오브젝트인 기왓장을 클릭(터치)하는 경우, 해당 가상 오브젝트의 구매자 정보가 디스플레이에 표시될 수 있다. 예를 들어 구매자 정보는 구매자의 성명 및 소원메시지일 수 있다. 이를 통하여 사용자들이 가상 오브젝트인 기왓장을 구매할 수록 가상공간의 사찰건물이 완성되어갈 수 있다. 따라서 사용자들의 참여를 유도할 수 있다.Also, the purchase object may be a virtual object in the shape of a roof tile of a temple. When a user purchases a tile through the above process, the tile purchased by the user may be displayed as a virtual object as part of a temple building in the virtual space. When the user or other users click (touch) a tile, which is a virtual object, using their terminals, buyer information of the virtual object may be displayed on the display. For example, the buyer information may be the buyer's name and wish message. Through this, as users purchase roof tiles, which are virtual objects, the temple building in the virtual space can be completed. Therefore, participation of users can be induced.
위에서는 가상 오브젝트를 기준으로 설명하였으나, 가상공간에 대해서도 동일한 설명이 가능할 수 있다. 보다 구체적으로 사용자 단말기(130)는 서버(110)에 저장된 복수의 후보 가상공간에 포함된 구매 공간에 대한 구매 신호, 사용자의 식별정보, 및 사용자 단말기의 식별정보를 서버(110)로 송신하는 단계를 수행할 수 있다. 구매 공간에 대한 구매 신호는 구매 공간에 대한 식별정보를 포함할 수 있다. 사용자가 구매 공간을 구매한 경우, 서버(110)는 사용자 단말기(130)가 구매 공간을 표시하도록 제어할 수 있다. 서버(110)는 가상공간에서 가상인물이 이동하도록 제어할 수 있다. 또한 사용자 단말기(130)는 사용자 오브젝트 리스트에 포함된 적어도 하나의 오브젝트를 구매 공간에 배치하도록 제어할 수 있다.Although the above has been described based on virtual objects, the same explanation may be possible for virtual spaces. More specifically, the user terminal 130 transmits a purchase signal for a purchase space included in a plurality of candidate virtual spaces stored in the server 110, user identification information, and user terminal identification information to the server 110. can be performed. The purchase signal for the purchase space may include identification information for the purchase space. When the user purchases the purchase space, the server 110 may control the user terminal 130 to display the purchase space. The server 110 may control the virtual character to move in the virtual space. Also, the user terminal 130 may control to place at least one object included in the user object list in the purchase space.
이제까지 다양한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far, we have looked at various embodiments. Those skilled in the art to which the present invention pertains will be able to understand that the present invention can be implemented in a modified form without departing from the essential characteristics of the present invention. Therefore, the disclosed embodiments should be considered from an illustrative rather than a limiting point of view. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the equivalent scope will be construed as being included in the present invention.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.On the other hand, the above-described embodiments of the present invention can be written as a program that can be executed on a computer, and can be implemented in a general-purpose digital computer that operates the program using a computer-readable recording medium. The computer-readable recording medium includes storage media such as magnetic storage media (eg, ROM, floppy disk, hard disk, etc.) and optical reading media (eg, CD-ROM, DVD, etc.).

Claims (8)

  1. 사용자 단말기, 관리자 단말기 및 서버를 포함하고, 하이퍼리얼리티의 메타버스를 구현하는 메타버스 시스템의 동작 방법에 있어서,In the operating method of a metaverse system that includes a user terminal, an administrator terminal, and a server and implements a metaverse of hyperreality,
    상기 서버가 가상공간의 속성 및 가상 오브젝트의 속성을 포함하는 3차원의 가상공간에 대한 정보를 상기 사용자 단말기로 송신하는 단계;transmitting, by the server, information about a three-dimensional virtual space including attributes of virtual space and attributes of virtual objects to the user terminal;
    상기 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계;obtaining, by the user terminal, information about a virtual person;
    상기 사용자 단말기가 상기 3차원의 가상공간에 대한 정보 및 상기 가상인물에 대한 정보에 기초하여 디스플레이에 상기 가상인물, 상기 가상공간 및 상기 가상 오브젝트 중 적어도 하나를 표시하는 단계;displaying, by the user terminal, at least one of the virtual person, the virtual space, and the virtual object on a display based on the information on the 3-dimensional virtual space and the information on the virtual person;
    상기 사용자 단말기가 사용자의 입력에 기초하여 상기 가상인물이 상기 가상공간에서 이동하고, 상기 가상 오브젝트와 상호작용하도록 제어하는 단계;controlling, by the user terminal, the virtual person to move in the virtual space and interact with the virtual object based on a user's input;
    상기 사용자 단말기는 상기 가상인물의 상기 가상공간에서의 위치, 상기 가상인물이 상기 가상공간에서의 위치에 머문 시간, 상기 가상인물의 위치에서 상기 사용자 단말기의 디스플레이에 표시된 가상 오브젝트, 및 상기 가상 오브젝트와 상호작용한 내역을 포함하는 로그 정보를 획득하는 단계; 및The user terminal includes the location of the virtual person in the virtual space, the time the virtual person stays at the location in the virtual space, the virtual object displayed on the display of the user terminal at the location of the virtual person, and the virtual object obtaining log information including details of interactions; and
    상기 사용자 단말기는 상기 로그 정보를 상기 사용자 단말기의 식별정보와 함께 상기 서버로 송신하는 단계를 포함하는 메타버스 시스템의 동작 방법.The user terminal method of operating a metaverse system comprising the step of transmitting the log information to the server together with the identification information of the user terminal.
  2. 제 1 항에 있어서,According to claim 1,
    상기 사용자 단말기가 가상인물에 대한 정보를 획득하는 단계는,The step of obtaining, by the user terminal, information about a virtual person,
    상기 사용자 단말기가 사용자가 소유한 아이템에 부착된 태그를 스캔하여 인증정보를 획득하는 단계;obtaining, by the user terminal, authentication information by scanning a tag attached to an item owned by the user;
    상기 사용자 단말기가 상기 인증정보, 사용자의 식별정보, 및 상기 사용자 단말기의 식별정보를 상기 서버로 송신하는 단계;transmitting, by the user terminal, the authentication information, user identification information, and identification information of the user terminal to the server;
    상기 서버가 상기 인증정보가 미리 저장되어 있는 가상 아이템에 대응되며, 정당한 것인지 여부를 결정하는 단계;determining, by the server, whether the authentication information corresponds to a pre-stored virtual item and is legitimate;
    상기 인증정보가 상기 가상 아이템에 대응되며, 정당한 것으로 결정된 경우, 상기 서버가 상기 사용자의 식별정보에 대응되는 사용자 아이템 리스트에 상기 가상 아이템의 식별정보 및 상기 사용자 단말기의 식별정보를 저장하는 단계; 및storing, by the server, identification information of the virtual item and identification information of the user terminal in a user item list corresponding to the identification information of the user, if the authentication information corresponds to the virtual item and is determined to be valid; and
    상기 서버가 상기 사용자 아이템 리스트를 상기 사용자 단말기로 송신하는 단계를 포함하고, Transmitting, by the server, the user item list to the user terminal;
    상기 디스플레이에 상기 가상인물, 상기 가상공간 및 상기 가상 오브젝트를 표시하는 단계는,The step of displaying the virtual person, the virtual space, and the virtual object on the display,
    상기 사용자 단말기는 사용자의 선택에 기초하여 상기 사용자 아이템 리스트에 포함된 적어도 하나의 아이템 중 적어도 하나를 이용하여 상기 가상인물에 대한 정보를 획득하는 단계를 포함하는 메타버스 시스템의 동작 방법.The user terminal is a method of operating a metaverse system comprising the step of obtaining information on the virtual person using at least one of the at least one item included in the user item list based on the user's selection.
  3. 제 2 항에 있어서,According to claim 2,
    상기 서버는 상기 태그를 스캔하여 획득된 인증정보를 미리 결정된 주기로 상기 사용자 단말기에 요청하는 단계;requesting, by the server, authentication information obtained by scanning the tag to the user terminal at predetermined intervals;
    상기 서버의 요청에 대응하여, 상기 사용자 단말기가 상기 태그를 스캔하여 인증정보를 획득해야 함을 나타내는 정보를 출력하는 단계; outputting information indicating that the user terminal should acquire authentication information by scanning the tag in response to the request of the server;
    상기 서버가 상기 태그를 재스캔하여 획득된 인증정보, 상기 사용자의 식별정보 및 상기 사용자 단말기의 식별정보를 상기 사용자 단말기로부터 재수신하는 단계;re-receiving, by the server, authentication information obtained by rescanning the tag, identification information of the user, and identification information of the user terminal from the user terminal;
    상기 재수신된 인증정보가 상기 가상 아이템에 대응하며 정당하고, 상기 재수신된 사용자 식별코드에 대응되는 상기 사용자 아이템 리스트 내에 상기 가상 아이템의 식별정보 및 상기 재수신된 사용자 단말기의 식별정보가 포함되어 있는 경우, 상기 서버가 상기 사용자 아이템 리스트 내의 상기 가상 아이템의 식별정보 및 상기 사용자 단말기의 식별정보를 유지하는 단계; 및The re-received authentication information corresponds to the virtual item and is legitimate, and the re-received identification information of the virtual item and the re-received identification information of the user terminal are included in the user item list corresponding to the re-received user identification code. If there is, the server maintaining identification information of the virtual item in the user item list and identification information of the user terminal; and
    상기 재수신된 인증정보가 상기 가상 아이템에 대응하지 않거나, 정당하지 않은 경우, 상기 서버가 상기 사용자 아이템 리스트에서 상기 가상 아이템의 식별정보를 삭제하는 단계를 더 포함하는 메타버스 시스템의 동작 방법.If the re-received authentication information does not correspond to the virtual item or is not valid, the server deleting identification information of the virtual item from the user item list.
  4. 제 1 항에 있어서,According to claim 1,
    상기 디스플레이에 상기 가상인물, 상기 가상공간 및 상기 가상 오브젝트를 표시하는 단계는,The step of displaying the virtual person, the virtual space, and the virtual object on the display,
    상기 사용자 단말기가 상기 3차원의 가상공간에 대한 정보에 포함된 상기 공간의 위치 정보에 기초하여, 미리 저장되어 있는 3차원 맵 중 일부에 상기 가상공간을 위치시키는 단계;locating, by the user terminal, the virtual space on a part of a pre-stored 3D map based on location information of the space included in the information on the 3D virtual space;
    상기 사용자 단말기가 상기 3차원의 가상공간에 대한 정보에 포함된 상기 가상공간의 시간 정보에 기초하여 상기 가상공간의 빛의 방향 및 빛의 세기를 결정하는 단계 및determining, by the user terminal, the direction and intensity of light in the virtual space based on the time information of the virtual space included in the information about the three-dimensional virtual space; and
    상기 사용자 단말기가 상기 3차원의 가상공간에 대한 정보에 포함된 상기 가상 오브젝트의 속성에 기초하여 상기 가상공간에 적어도 하나의 가상 오브젝트들을 배치하는 단계를 포함하고,arranging, by the user terminal, at least one virtual object in the virtual space based on an attribute of the virtual object included in the information about the 3-dimensional virtual space;
    상기 공간의 위치 정보는 3차원 위치정보인 메타버스 시스템의 동작 방법.The location information of the space is a method of operating a metaverse system of three-dimensional location information.
  5. 제 1 항에 있어서,According to claim 1,
    상기 3차원의 가상공간에 대한 정보를 상기 사용자 단말기로 송신하는 단계는,The step of transmitting the information on the 3D virtual space to the user terminal,
    상기 관리자 단말기가 상기 서버에 상기 사용자 단말기의 식별정보, 상기 사용자의 식별정보, 및 상기 가상공간에 대응되는 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계;transmitting, by the manager terminal, to the server identification information of the user terminal, identification information of the user, and information related to a contract for sale or lease of a real space corresponding to the virtual space;
    상기 서버가 상기 사용자 단말기에게 상기 실제 공간의 매매 또는 임대 계약과 관련된 정보를 송신하는 단계;transmitting, by the server, information related to a contract for sale or lease of the real space to the user terminal;
    상기 사용자 단말기가 상기 실제 공간의 매매 또는 임대 계약과 관련된 정보에 대한 승낙 정보 및 상기 사용자 단말기의 식별정보 및 상기 사용자의 식별정보를 상기 서버로 송신하는 단계;transmitting, by the user terminal, acceptance information for information related to a sale or rental contract of the real space, identification information of the user terminal, and identification information of the user to the server;
    상기 서버는 상기 승낙 정보를 수신한 경우, 상기 관리자 단말기로부터 수신한 상기 사용자 단말기의 식별정보 및 상기 사용자의 식별정보가 상기 사용자 단말기로부터 수신한 상기 사용자 단말기의 식별정보 및 상기 사용자의 식별정보와 동일한지 결정하는 단계; 및 When the server receives the approval information, the identification information of the user terminal and the identification information of the user received from the manager terminal are the same as the identification information of the user terminal and the identification information of the user received from the user terminal. determining whether; and
    상기 관리자 단말기로부터 수신한 상기 사용자 단말기의 식별정보 및 상기 사용자의 식별정보가 상기 사용자 단말기로부터 수신한 상기 사용자 단말기의 식별정보 및 상기 사용자의 식별정보와 동일한 경우, 상기 서버는 상기 사용자 단말기로 상기 3차원의 가상공간에 대한 정보를 송신하는 단계를 포함하는 메타버스 시스템의 동작 방법.When the identification information of the user terminal and the identification information of the user received from the manager terminal are the same as the identification information of the user terminal and the identification information of the user received from the user terminal, the server sends the user terminal to the third step. A method of operating a metaverse system comprising transmitting information about a dimensional virtual space.
  6. 제 5 항에 있어서,According to claim 5,
    상기 로그 정보를 획득하는 단계는,Obtaining the log information,
    상기 사용자 단말기의 디스플레이의 해상도를 획득하는 단계;obtaining a resolution of a display of the user terminal;
    상기 디스플레이의 해상도에 기초하여 상기 디스플레이의 미리 정해진 일부 영역을 관심 영역으로 설정하는 단계;setting a predetermined partial area of the display as a region of interest based on the resolution of the display;
    상기 관심 영역 내에 미리 정해진 임계 시간 이상 표시된 가상 오브젝트의 식별정보를 포함하는 관심 가상 오브젝트 정보를 상기 로그 정보에 포함시키는 단계; 및including, in the log information, virtual object information including identification information of a virtual object displayed within the region of interest for a predetermined threshold time or longer; and
    상기 가상인물이 상호작용한 가상 오브젝트 및 상호작용의 내용을 포함하는 상기 관심 가상 오브젝트 정보를 상기 로그 정보에 포함시키는 단계를 포함하는 메타버스 시스템의 동작 방법. and including, in the log information, the virtual object information of interest, which includes virtual objects interacted with by the virtual character and contents of the interaction, in the log information.
  7. 제 6 항에 있어서,According to claim 6,
    상기 서버는 상기 로그 정보에 기초하여, 복수의 사용자들이 상기 가상공간에서 자주 들리는 혼잡 위치에 대한 정보를 결정하는 단계;determining, by the server, information on congestion locations frequently heard by a plurality of users in the virtual space based on the log information;
    상기 서버는 상기 혼잡 위치에 대응하는 실제 공간의 위치로부터 가까울 수록 상가의 임대료를 높게 결정하는 단계;determining, by the server, the higher the rent of the shopping mall as it is closer to the location of the real space corresponding to the congested location;
    상기 서버는 상기 로그 정보에 포함된 관심 가상 오브젝트 정보에 기초하여 복수의 사용자들이 자주 이용하는 가상 오브젝트를 결정하는 단계; 및determining, by the server, a virtual object frequently used by a plurality of users based on the virtual object information of interest included in the log information; and
    상기 서버는 상기 자주 이용하는 가상 오브젝트를 상기 관리자 단말기에 송신하는 단계를 포함하는 메타버스 시스템의 동작 방법.The method of operation of the metaverse system comprising the step of the server transmitting the frequently used virtual object to the manager terminal.
  8. 제 7 항에 있어서,According to claim 7,
    상기 사용자 단말기가 상기 서버에 저장된 복수의 후보 가상 오브젝트에 포함된 구매 오브젝트에 대한 구매 신호, 사용자의 식별정보, 및 상기 사용자 단말기의 식별정보를 상기 서버로 송신하는 단계;transmitting, by the user terminal, a purchase signal for a purchase object included in a plurality of candidate virtual objects stored in the server, user identification information, and identification information of the user terminal to the server;
    상기 서버가 상기 구매 신호가 정당한 것인지 여부를 결정하는 단계;determining, by the server, whether the purchase signal is legitimate;
    상기 구매 신호가 정당한 것으로 결정된 경우, 상기 서버는 상기 사용자의 식별정보에 대응되는 사용자 오브젝트 리스트에 상기 구매 오브젝트의 식별정보 및 상기 사용자 단말기의 식별정보를 저장하는 단계; 및storing, by the server, identification information of the purchased object and identification information of the user terminal in a user object list corresponding to the identification information of the user when it is determined that the purchase signal is valid; and
    상기 구매 신호가 정당한 것으로 결정된 경우, 상기 구매 오브젝트의 속성에 포함된 상기 구매 오브젝트의 기한까지 상기 서버가 상기 구매 오브젝트를 활성화하는 단계를 포함하고, If it is determined that the purchase signal is valid, activating the purchase object by the server until the expiration date of the purchase object included in the attributes of the purchase object;
    상기 디스플레이에 상기 가상인물, 상기 가상공간 및 상기 가상 오브젝트 중 적어도 하나를 표시하는 단계는,The step of displaying at least one of the virtual person, the virtual space, and the virtual object on the display,
    상기 활성화된 구매 오브젝트를 표시하는 단계를 포함하는 메타버스 시스템의 동작 방법.Method of operation of the metaverse system comprising the step of displaying the activated purchase object.
PCT/KR2022/000784 2022-01-17 2022-01-17 System for constructing metaverse utilizing object, and operating method for system WO2023136380A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020227004896A KR20230111583A (en) 2022-01-17 2022-01-17 A system that implements a metaverse using objects and how the system operates
PCT/KR2022/000784 WO2023136380A1 (en) 2022-01-17 2022-01-17 System for constructing metaverse utilizing object, and operating method for system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2022/000784 WO2023136380A1 (en) 2022-01-17 2022-01-17 System for constructing metaverse utilizing object, and operating method for system

Publications (1)

Publication Number Publication Date
WO2023136380A1 true WO2023136380A1 (en) 2023-07-20

Family

ID=87279287

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/000784 WO2023136380A1 (en) 2022-01-17 2022-01-17 System for constructing metaverse utilizing object, and operating method for system

Country Status (2)

Country Link
KR (1) KR20230111583A (en)
WO (1) WO2023136380A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010092364A (en) * 2008-10-09 2010-04-22 Yahoo Japan Corp Item management system, item management device, and item management method for acquiring information about user's real life
KR20110054492A (en) * 2009-11-17 2011-05-25 한국예술종합학교 산학협력단 Method for presenting storymap service
KR20140091710A (en) * 2011-12-20 2014-07-22 인텔 코포레이션 Augmented reality representations across multiple devices
KR20210097559A (en) * 2020-01-30 2021-08-09 에스케이텔레콤 주식회사 Method, computer-readable storage medium, computer program and apparatus for building 3 dimensional virtual space
KR102299943B1 (en) * 2020-12-29 2021-09-09 주식회사 버넥트 Method and system for augmented reality content production based on attribute information application

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010092364A (en) * 2008-10-09 2010-04-22 Yahoo Japan Corp Item management system, item management device, and item management method for acquiring information about user's real life
KR20110054492A (en) * 2009-11-17 2011-05-25 한국예술종합학교 산학협력단 Method for presenting storymap service
KR20140091710A (en) * 2011-12-20 2014-07-22 인텔 코포레이션 Augmented reality representations across multiple devices
KR20210097559A (en) * 2020-01-30 2021-08-09 에스케이텔레콤 주식회사 Method, computer-readable storage medium, computer program and apparatus for building 3 dimensional virtual space
KR102299943B1 (en) * 2020-12-29 2021-09-09 주식회사 버넥트 Method and system for augmented reality content production based on attribute information application

Also Published As

Publication number Publication date
KR20230111583A (en) 2023-07-25

Similar Documents

Publication Publication Date Title
US20210304510A1 (en) Three-dimensional virtual environment
CN105051662B (en) Three-dimensional virtual environment
JP6476658B2 (en) Image processing apparatus and method
US20180047094A1 (en) 3-D Immersion Technology in a Virtual Store
WO2008030135A1 (en) Method and system for simulating and operating a single virtual space
JPWO2015037472A1 (en) Image processing apparatus and method
KR101106857B1 (en) 3-dimensional virtual-reality museum
TW200819179A (en) A network game system, a network game terminal, a method of displaying a game screen, a computer program product and a storage medium
JP7296406B2 (en) Program, information processing method, and information processing terminal
CN108805648A (en) Virtual reality system and its control method
US11727123B2 (en) Systems and methods to control access to components of virtual objects
CN108986188A (en) AR video generation device
WO2019099912A1 (en) Integrated operating environment
CN110420465A (en) Mating system, device, equipment and the storage medium of virtual pet
WO2023136380A1 (en) System for constructing metaverse utilizing object, and operating method for system
WO2023136379A1 (en) System for constructing metaverse utilizing object, and operating method for system
WO2014029339A1 (en) Apparatus, method, and storage medium for presenting financial transaction operation data using dynamic image
KR20200009811A (en) A Nail Art Automatic Vending System Supplying an Augmented Reality Image
WO2023177201A1 (en) Metaverse system implementation device for commercial model implementation, and method for operating same
KR102563699B1 (en) System and method for experiencing luxuries based on metaverse
EP4099260A1 (en) Glasses, recommended cosmetics presentation control system, and recommended cosmetics presentation control method
KR100373115B1 (en) Method of internet fashion mall management based on coordinating simulation
KR20230159923A (en) Metaverse system for using non-fungible token and operation methode thereof
KR20230160415A (en) Metaverse system for using modifiable objects and operation methode thereof
KR20170006257A (en) System for providing service of experience realistic, apparatus for providing service of experience realistic based on mobile and method using the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22920713

Country of ref document: EP

Kind code of ref document: A1