KR20130082692A - Apparatus and method for generating virtual world using image - Google Patents

Apparatus and method for generating virtual world using image Download PDF

Info

Publication number
KR20130082692A
KR20130082692A KR1020110134727A KR20110134727A KR20130082692A KR 20130082692 A KR20130082692 A KR 20130082692A KR 1020110134727 A KR1020110134727 A KR 1020110134727A KR 20110134727 A KR20110134727 A KR 20110134727A KR 20130082692 A KR20130082692 A KR 20130082692A
Authority
KR
South Korea
Prior art keywords
virtual world
image
virtual
avatar
generating
Prior art date
Application number
KR1020110134727A
Other languages
Korean (ko)
Inventor
김두현
윤경로
Original Assignee
건국대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 건국대학교 산학협력단 filed Critical 건국대학교 산학협력단
Priority to KR1020110134727A priority Critical patent/KR20130082692A/en
Publication of KR20130082692A publication Critical patent/KR20130082692A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/744—Displaying an avatar, e.g. an animated cartoon character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A63F13/5372—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for tagging characters, objects or locations in the game scene, e.g. displaying a circle under the character controlled by the player
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation

Abstract

PURPOSE: A device for generating a virtual world with an image and a method are provided to generate the virtual world corresponding to a space included in the image by using the image photographed by the camera of a user, thereby easily generating the virtual world of the desired space. CONSTITUTION: An object identification unit (210) identifies a real object which is included in an image photographed by a camera. A virtual object generation unit (220) generates a virtual object by using the real object. A virtual world generation unit (230) generates a virtual world by using the virtual object and the background of the image. An avatar generation unit (240) generates the avatar of a user, who requests the access of the virtual world, in the virtual world. A virtual world image generation unit (250) generates the image of the virtual world according to the position and the direction of the avatar. [Reference numerals] (100) Virtual world generation device; (210) Object identification unit; (220) Virtual object generation unit; (230) Virtual world generation unit; (240) Avatar generation unit; (250) Virtual world image generation unit; (260) Avatar control unit

Description

이미지를 사용한 가상 세계 생성 장치 및 방법{APPARATUS AND METHOD FOR GENERATING VIRTUAL WORLD USING IMAGE}Apparatus and method for creating a virtual world using images {APPARATUS AND METHOD FOR GENERATING VIRTUAL WORLD USING IMAGE}

본 발명은 가상 세계 생성 장치 및 방법에 관한 것으로, 보다 상세하게는 사용자가 휴대 가능한 카메라로 촬영한 이미지를 사용하여 이미지에 포함된 장소에 대응하는 가상 세계를 생성함으로써, 사용자가 원하는 장소의 가상 세계를 생성하는 가상 세계 생성 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for generating a virtual world, and more particularly, to a virtual world of a place desired by a user by generating a virtual world corresponding to a place included in an image using an image captured by a user's portable camera. An apparatus and method for generating a virtual world is described.

최근 들어 사용자가 현실 세계와 유사한 가상 세계에 접속하여 현실 세계에서 해당 장소를 방문한 것과 같은 효과를 가지는 방법이 개발되고 있다.Recently, a method has been developed in which a user accesses a virtual world similar to the real world and has the same effect as visiting a corresponding place in the real world.

한국공개특허 제10-2000-0030491호(공개일 2000년 06월 05일)에는 관람자에게 박람회의 가상 현실 공간을 제공하고, 관람자의 가상 객체가 박람회를 관람하는 기술이 개시되어 있다. 그러나, 종래의 기술은 박람회 개최자가 박람회 관련 정보들을 사용하여 가상 현실 공간을 생성하고 있으므로, 가상 현실 공간을 생성하는데 시간이 걸리며, 사용자가 원하는 장소에 대응하는 가상 현실 공간을 생성하기 어렵다는 한계가 있었다. Korean Patent Laid-Open Publication No. 10-2000-0030491 (published June 05, 2000) discloses a technology in which a virtual object of a fair is provided to a viewer, and a virtual object of the viewer views the fair. However, the conventional technology has a limitation that it is difficult to create a virtual reality space corresponding to a desired place because it takes time to create the virtual reality space because the fair organizer generates the virtual reality space using the exhibition-related information. .

따라서, 사용자가 원하는 장소에 대응하는 가상 현실 공간을 간단하게 생성할 수 있는 방법이 요청되고 있다.Accordingly, there is a demand for a method for easily creating a virtual reality space corresponding to a desired place of a user.

본 발명은 사용자가 휴대 가능한 카메라로 촬영한 이미지를 사용하여 이미지에 포함된 장소에 대응하는 가상 세계를 생성함으로써, 사용자가 원하는 장소의 가상 세계를 생성하는 장치 및 방법을 제공한다.The present invention provides an apparatus and method for generating a virtual world of a place desired by a user by generating a virtual world corresponding to a place included in the image using an image photographed by a portable camera.

또한, 본 발명은 가상 세계에 사용자의 아바타를 생성하고, 아바타의 위치와 방향에 따라 아바타가 보고 있는 가상 세계의 이미지를 생성하여 사용자에게 제공함으로써, 사용자는 특정 공간에서 이동하면서 자신이 원하는 오브젝트들을 관찰하는 것과 같은 느낌을 받도록 하는 장치 및 방법을 제공한다. In addition, the present invention creates an avatar of the user in the virtual world, and provides the user with the image of the virtual world that the avatar is viewing according to the position and direction of the avatar, so that the user can move the object in a specific space and desired objects An apparatus and method are provided for the feeling of observing.

본 발명의 일실시예에 따른 가상 세계 생성 장치는 카메라가 촬영한 이미지에 포함된 현실 오브젝트를 식별하는 오브젝트 식별부; 식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성하는 가상 오브젝트 생성부; 및 카메라가 촬영한 이미지의 배경과 가상 오브젝트를 사용하여 가상 세계를 생성하는 가상 세계 생성부를 포함할 수 있다.An apparatus for generating a virtual world according to an embodiment of the present invention includes: an object identification unit identifying a real object included in an image captured by a camera; A virtual object generating unit generating a virtual object using the identified reality object; And a virtual world generator configured to generate a virtual world by using the background and the virtual object of the image photographed by the camera.

본 발명의 일실시예에 따른 가상 세계 생성 장치는 가상 세계에 접속을 요청한 사용자의 아바타를 가상 세계 안에 생성하는 아바타 생성부; 및 아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성하는 가상 세계 이미지 생성부를 더 포함할 수 있다.An apparatus for generating a virtual world according to an embodiment of the present invention includes an avatar generator for generating an avatar of a user who has requested to access the virtual world in the virtual world; And a virtual world image generator for generating an image of the virtual world to be transmitted to the user according to the position and the direction of the avatar.

본 발명의 일실시예에 따른 가상 세계 생성 장치의 가상 세계 이미지 생성부는 아바타의 방향에 따라 가상 세계의 이미지에 포함할 가상 오브젝트를 결정할 수 있다.The virtual world image generator of the apparatus for generating a virtual world according to an embodiment of the present invention may determine a virtual object to be included in the image of the virtual world according to the direction of the avatar.

본 발명의 일실시예에 따른 가상 세계 생성 장치의 가상 세계 이미지 생성부는 아바타와 가상 오브젝트 간의 거리에 따라 가상 세계의 이미지에 포함된 가상 오브젝트의 크기를 결정할 수 있다.The virtual world image generator of the apparatus for generating a virtual world according to an embodiment of the present invention may determine the size of the virtual object included in the image of the virtual world according to the distance between the avatar and the virtual object.

본 발명의 일실시예에 따른 가상 세계 생성 방법은 카메라가 촬영한 이미지에 포함된 현실 오브젝트를 식별하는 단계; 식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성하는 단계; 및 카메라가 촬영한 이미지의 배경과 가상 오브젝트를 사용하여 가상 세계를 생성하는 단계를 포함할 수 있다.According to one or more exemplary embodiments, a method of generating a virtual world includes: identifying a real object included in an image captured by a camera; Generating a virtual object using the identified reality object; And generating a virtual world using the background of the image photographed by the camera and the virtual object.

본 발명의 일실시예에 의하면, 사용자가 휴대 가능한 카메라로 촬영한 이미지를 사용하여 이미지에 포함된 장소에 대응하는 가상 세계를 생성함으로써, 사용자가 원하는 장소의 가상 세계를 용이하게 생성할 수 있다.According to an embodiment of the present invention, a virtual world corresponding to a place included in an image is generated by using an image photographed by a user's portable camera, thereby easily generating a virtual world of a place desired by the user.

또한, 본 발명의 일실시예에 의하면, 가상 세계에 사용자의 아바타를 생성하고, 아바타의 위치와 방향에 따라 아바타가 보고 있는 가상 세계의 이미지를 생성하여 사용자에게 제공함으로써, 사용자는 특정 공간에서 이동하면서 자신이 원하는 오브젝트들을 관찰하는 것과 같은 느낌을 받을 수 있다.In addition, according to an embodiment of the present invention, by creating an avatar of the user in the virtual world, and by providing an image of the virtual world that the avatar is viewing according to the position and direction of the avatar to the user, the user moves in a specific space You can feel as if you are observing the objects you want.

도 1은 본 발명의 일실시예에 따른 가상 세계 생성 장치와 다른 장치 간의 관계를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 가상 세계 생성 장치를 도시한 블록 다이어그램이다.
도 3은 본 발명의 일실시예에 따른 가상 세계를 표시하는 과정의 일례이다.
도 4는 본 발명의 일실시예에 따른 가상 세계 생성 방법을 도시한 플로우차트이다.1 is a diagram illustrating a relationship between a virtual world generating device and another device according to an embodiment of the present invention.
2 is a block diagram illustrating a virtual world generating apparatus according to an embodiment of the present invention.
3 is an example of a process of displaying a virtual world according to an embodiment of the present invention.
4 is a flowchart illustrating a virtual world creation method according to an embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 본 발명의 일실시예에 따른 가상 세계 생성 방법은 가상 세계 생성 장치에 의해 수행될 수 있다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The virtual world generation method according to an embodiment of the present invention may be performed by a virtual world generation device.

도 1은 본 발명의 일실시예에 따른 가상 세계 생성 장치와 다른 장치 간의 관계를 나타내는 도면이다. 1 is a diagram illustrating a relationship between a virtual world generating device and another device according to an embodiment of the present invention.

본 발명의 일실시예에 따른 가상 세계 생성 장치(100)는 도 1에 도시된 바와 같이 카메라로 특정 장소를 촬영한 현실 세계의 이미지(110)를 사용하여 가상 세계(120)를 생성할 수 있다. 이때, 가상 세계 생성 장치(100)는 현실 세계의 특정 장소에 대응될 수 있도록 가상 세계(120)를 생성함으로써, 사용자 단말기(130)를 통하여 가상 세계(120)에 접속한 사용자가 현실 세계의 특정 장소를 방문한 것과 같은 느낌을 받도록 할 수 있다.As shown in FIG. 1, the apparatus 100 for generating a virtual world according to an embodiment of the present invention may generate the virtual world 120 using the image 110 of the real world photographing a specific place with a camera. . In this case, the virtual world generating apparatus 100 generates the virtual world 120 to correspond to a specific place of the real world, so that a user who accesses the virtual world 120 through the user terminal 130 may specify the real world. You can feel like you've visited the place.

이때, 현실 세계의 이미지(110)는 사용자 단말기(130)에 포함된 카메라가 촬영한 이미지일 수도 있고, 가상 세계 생성 장치(100)에 접속할 수 있는 통신 기능을 구비한 장치의 카메라가 촬영한 이미지일 수도 있다. 또한, 가상 세계 생성 장치(100)는 네트워크를 통하여 통신 기능이 없는 카메라로 촬영한 현실 세계의 이미지(110)를 수신할 수도 있다.In this case, the image 110 of the real world may be an image photographed by a camera included in the user terminal 130, or an image photographed by a camera of a device having a communication function capable of accessing the virtual world generating apparatus 100. It may be. In addition, the virtual world generating apparatus 100 may receive an image of the real world 110 captured by a camera without a communication function through a network.

즉, 가상 세계 생성 장치(100)는 사용자가 휴대 가능한 카메라로 촬영한 이미지(110)를 사용하여 가상 세계(120)를 생성함으로써, 사용자가 원하는 장소의 가상 세계를 용이하게 생성할 수 있다.That is, the virtual world generating apparatus 100 may easily generate a virtual world at a place desired by the user by generating the virtual world 120 using the image 110 photographed by the user's portable camera.

이때, 사용자는 가상 세계(120)에서 사용자 단말기(130)나 사용자 식별 정보에 대응하는 아바타(131)를 제어함으로써, 가상 세계(120)에 포함된 오브젝트나 배경 중에서 사용자가 원하는 오브젝트나 배경을 상세히 주시할 수 있다.In this case, the user controls the avatar 131 corresponding to the user terminal 130 or the user identification information in the virtual world 120 to detail the object or background desired by the user from the objects or the background included in the virtual world 120. You can watch.

도 2는 본 발명의 일실시예에 따른 가상 세계 생성 장치(100)를 도시한 블록 다이어그램이다. 2 is a block diagram illustrating a virtual world generating apparatus 100 according to an embodiment of the present invention.

도 2을 참고하면, 본 발명의 일실시예에 따른 가상 세계 생성 장치(100)는 오브젝트 식별부(210)와 가상 오브젝트 생성부(220), 가상 세계 생성부(230), 아바타 생성부(240), 가상 세계 이미지 생성부(250) 및 아바타 제어부(260)를 포함할 수 있다. Referring to FIG. 2, the apparatus 100 for generating a virtual world according to an exemplary embodiment of the present invention may include an object identifier 210, a virtual object generator 220, a virtual world generator 230, and an avatar generator 240. ), The virtual world image generator 250 and the avatar controller 260 may be included.

오브젝트 식별부(210)는 카메라가 현실 세계의 특정 공간을 촬영한 이미지에 포함된 현실 오브젝트를 식별할 수 있다. 이때, 현실 오브젝트는 현실 세계의 책장이나, 그림, 및 책장과 같이 현실 세계에 있는 오브젝트일 수 있다.The object identifier 210 may identify a real object included in an image of a camera photographing a specific space of the real world. In this case, the real object may be an object in the real world such as a bookshelf, a picture, or a bookshelf in the real world.

구체적으로, 오브젝트 식별부(210)는 이미지에 포함된 영역들의 색상이나 형상에 따라 현실 오브젝트를 식별할 수 있다. 예를 들어 오브젝트 식별부(210)는 현실 오브젝트의 형상 정보 데이터베이스를 포함하고, 이미지에서 형상 정보 데이터베이스에 대응하는 형상을 검색함으로써, 책상이나 책장과 같이 일정한 타입의 형상을 한 현실 오브젝트를 식별할 수 있다. 이때, 형상 정보 데이터베이스는 책장이나, 그림, 및 책장과 같이 현실 세계에 있는 오브젝트들의 외형적 특징이나 형상 자체에 대한 정보들을 관리하는 데이터베이스일 수 있다.In detail, the object identification unit 210 may identify the reality object according to the color or shape of the areas included in the image. For example, the object identification unit 210 may include a shape information database of the reality object and search for a shape corresponding to the shape information database in the image to identify a reality object having a certain type of shape such as a desk or a bookcase. have. In this case, the shape information database may be a database that manages information on the appearance characteristics of the objects in the real world or the shape itself, such as a bookcase, a picture, and a bookcase.

이때, 오브젝트 식별부(210)는 이미지에서 색상이 유사한 영역을 하나의 현실 오브젝트로 판단할 수 있다. 예를 들어, 상면이 갈색이고, 측면이 흑색인 책상을 촬영한 경우, 오브젝트 식별부(210)는 갈색 영역과 흑색 영역이 각각의 판으로 구성된 현실 오브젝트라고 식별할 수 있다. 또한, 오브젝트 식별부(210)는 갈색 영역에 따른 판과 흑색 영역에 따른 판의 위치와 조합을 형상 정보 데이터베이스에서 검색함으로써, 해당 영역을 현실 오브젝트 중 하나인 책상으로 식별할 수 있다.In this case, the object identifying unit 210 may determine an area having similar colors in the image as one real object. For example, when photographing a desk having a brown upper surface and a black side, the object identifying unit 210 may identify that the brown area and the black area are real objects composed of respective plates. In addition, the object identification unit 210 may identify the area as a desk, which is one of the real objects, by searching the shape information database for the position and combination of the plate along the brown area and the plate along the black area.

가상 오브젝트 생성부(220)는 오브젝트 식별부(210)가 식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성할 수 있다. 이때, 가상 오브젝트 생성부(220)는 오브젝트 식별부(210)가 식별한 현실 오브젝트와 동일한 형상으로 가상 오브젝트를 생성할 수 있다. 이때, 가상 오브젝트 생성부(220)는 책상의 뒷면이나 이미지의 반대쪽 측면과 같이 이미지에 포함되지 않은 부분은 현실 오브젝트의 형상 정보 데이터베이스에서 해당 오브젝트에 대응하는 형상 정보를 사용하여 생성할 수 있다.The virtual object generator 220 may generate a virtual object using the reality object identified by the object identifier 210. In this case, the virtual object generator 220 may generate the virtual object in the same shape as the real object identified by the object identifier 210. In this case, the virtual object generator 220 may generate a portion not included in the image, such as the back of the desk or the opposite side of the image, by using shape information corresponding to the object in the shape information database of the real object.

가상 세계 생성부(230)는 카메라가 촬영한 이미지의 배경과 가상 오브젝트 생성부(220)가 생성한 가상 오브젝트를 사용하여 가상 세계를 생성할 수 있다. 구체적으로, 가상 세계 생성부(230)는 이미지에 포함된 방이나 건물, 주차장과 같은 배경을 기초로 배경에 대응하는 가상 세계를 생성하고, 가상 세계에 가상 오브젝트를 배치할 수 있다. 이때, 가상 세계 생성부(230)는 이미지에서 현실 오브젝트가 위치한 장소에 대응하는 가상 세계의 장소에 가상 오브젝트를 배치할 수 있다.The virtual world generator 230 may generate a virtual world using the background of the image photographed by the camera and the virtual object generated by the virtual object generator 220. In detail, the virtual world generator 230 may generate a virtual world corresponding to the background based on a background such as a room, a building, or a parking lot included in the image, and may place a virtual object in the virtual world. In this case, the virtual world generator 230 may place the virtual object in a place of the virtual world corresponding to the place where the real object is located in the image.

아바타 생성부(240)는 가상 세계에 접속을 요청한 사용자의 아바타를 가상 세계 안에 생성할 수 있다. 이때, 아바타 생성부(240)는 사용자가 사용자 단말기(130) 또는 사용자 식별 정보를 통하여 가상 세계에 접속을 요청한 경우, 기 설정된 사용자의 아바타를 가상 세계에 배치하거나, 사용자의 입력에 따라 사용자의 아바타를 생성할 수 있다.The avatar generator 240 may generate an avatar of a user who has requested to access the virtual world in the virtual world. In this case, when the user requests to access the virtual world through the user terminal 130 or the user identification information, the avatar generator 240 arranges the avatar of the preset user in the virtual world or the avatar of the user according to the user's input. Can be generated.

가상 세계 이미지 생성부(250)는 아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성할 수 있다. 이때, 가상 세계 이미지 생성부(250)는 생성한 가상 세계의 이미지를 사용자 단말기(130)로 전송하고, 사용자 단말기(130)는 가상 세계의 이미지를 사용자에게 표시할 수 있다.The virtual world image generator 250 may generate an image of the virtual world to be transmitted to the user according to the position and direction of the avatar. In this case, the virtual world image generator 250 may transmit the generated image of the virtual world to the user terminal 130, and the user terminal 130 may display the image of the virtual world to the user.

현실에서도 동일한 공간에 위치한 사용자들이 방향과 위치에 따라 각기 다른 장면을 볼 수 있는 것과 같이 가상 세계에서도 아바타의 위치와 방향에 따라 사용자가 볼 수 있는 이미지는 다를 수 있다. 따라서, 가상 세계 이미지 생성부(250)는 아바타의 위치와 방향에 따라 아바타가 보고 있는 가상 세계의 이미지를 생성하여 사용자에게 제공함으로써, 사용자는 사용자가 현실 세계의 특정 장소를 방문한 것과 같은 느낌을 받을 수 있다.Just as in the real world, users located in the same space can see different scenes according to their direction and location. In the virtual world, the images that users can see may vary depending on the location and orientation of the avatar. Accordingly, the virtual world image generator 250 generates an image of the virtual world that the avatar is viewing according to the position and direction of the avatar and provides the image to the user so that the user may feel as if the user visits a specific place in the real world. Can be.

이때, 가상 세계 이미지 생성부(250)는 아바타의 방향에 따라 가상 세계의 이미지에 포함할 가상 오브젝트를 결정할 수 있다. 또한, 가상 세계 이미지 생성부(250)는 아바타와 가상 오브젝트 간의 거리에 따라 가상 세계의 이미지에 포함된 가상 오브젝트의 크기를 결정할 수 있다. 구체적으로, 가상 세계의 이미지에 포함된 가상 오브젝트의 크기는 아바타와 거리가 가까운 수록 증가하고, 아바타와 거리가 멀어질수록 감소할 수 있다.In this case, the virtual world image generator 250 may determine a virtual object to be included in the image of the virtual world according to the direction of the avatar. In addition, the virtual world image generator 250 may determine the size of the virtual object included in the image of the virtual world according to the distance between the avatar and the virtual object. In detail, the size of the virtual object included in the image of the virtual world may increase as the distance to the avatar is increased and decrease as the distance to the avatar is far from the avatar.

가상 세계 이미지 생성부(250)가 아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성하는 구성은 이하 도 3을 참조하여 상세히 설명한다.A configuration in which the virtual world image generator 250 generates an image of the virtual world to be transmitted to the user according to the position and direction of the avatar will be described in detail with reference to FIG. 3.

아바타 제어부(260)는 사용자 단말기(130)를 통한 사용자의 요청에 따라 아바타의 위치와 방향을 제어할 수 있다. 이때, 가상 세계 이미지 생성부(250)는 아바타 제어부(260)에서 변경한 아바타의 위치와 방향에 따라 가상 세계의 이미지를 재생성하여 사용자 단말기(130)로 전송할 수 있다.The avatar controller 260 may control the position and direction of the avatar at the request of the user through the user terminal 130. In this case, the virtual world image generator 250 may regenerate an image of the virtual world according to the position and direction of the avatar changed by the avatar controller 260 and transmit the image to the user terminal 130.

즉, 아바타 제어부(260)는 사용자의 요청에 따라 아바타의 위치와 방향을 제어하여 사용자가 관심 있는 오브젝트에 접근할 수 있으며, 가상 세계 이미지 생성부(250)는 아바타의 위치와 방향에 따라 해당 오브젝트를 확대하여 표시함으로써, 사용자는 특정 공간에서 이동하면서 오브젝트들을 관찰하는 것과 같은 느낌을 받을 수 있다.That is, the avatar controller 260 may access the object of interest by controlling the position and direction of the avatar at the request of the user, and the virtual world image generator 250 may access the object according to the position and direction of the avatar. By enlarging and displaying, the user may feel as if observing objects while moving in a specific space.

도 3은 본 발명의 일실시예에 따른 가상 세계를 표시하는 과정의 일례이다.3 is an example of a process of displaying a virtual world according to an embodiment of the present invention.

카메라가 책장, 그림, 책상이 포함된 방을 촬영한 경우, 오브젝트 식별부(210)는 책장, 그림, 책상을 식별하고, 가상 오브젝트 생성부(220)는 오브젝트 식별부(210)의 식별 결과에 따라 책장의 가상 오브젝트(301), 그림의 가상 오브젝트 (302), 책상의 가상 오브젝트(303)를 생성할 수 있다. When the camera photographs a room including a bookcase, a picture, and a desk, the object identifier 210 identifies a bookcase, a picture, and a desk, and the virtual object generator 220 is based on the identification result of the object identifier 210. Accordingly, the virtual object 301 of the bookcase, the virtual object 302 of the figure, and the virtual object 303 of the desk may be generated.

이때, 가상 세계 생성부(230)는 이미지의 배경에 따라 방 형태의 가상 세계(300)를 생성하고, 가상 세계(300)에 책장의 가상 오브젝트(301), 그림의 가상 오브젝트(302), 책상의 가상 오브젝트(303)를 배치할 수 있다.At this time, the virtual world generation unit 230 generates a virtual world 300 in the form of a room according to the background of the image, the virtual object 301 of the bookshelf, the virtual object 302 of the figure, desk in the virtual world 300 The virtual object 303 may be disposed.

그리고, 아바타 생성부(240)는 가상 세계에 접속을 요청한 제1 사용자의 제1 아바타(310) 제2 사용자의 제2 아바타(320) 및 제3 사용자의 제3 아바타(330)를 가상 세계(300) 안에 생성할 수 있다. In addition, the avatar generator 240 connects the first avatar 310 of the first user, the second avatar 320 of the second user, and the third avatar 330 of the third user, to the virtual world ( Within 300).

이때, 가상 세계 이미지 생성부(250)는 아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성할 수 있다. In this case, the virtual world image generator 250 may generate an image of the virtual world to be transmitted to the user according to the position and direction of the avatar.

일례로, 가장 뒤쪽에서 넓게 방을 보고 있는 제1 아바타(310)는 도 3에 도시된 바와 같이 시야 안에 책장의 가상 오브젝트(301), 그림의 가상 오브젝트(302), 책상의 가상 오브젝트(303)가 모두 포함될 수 있다. 따라서, 가상 세계 이미지 생성부(250)는 책장의 가상 오브젝트(301), 그림의 가상 오브젝트(302), 책상의 가상 오브젝트(303)가 모두 포함된 가상 세계 이미지(311)를 생성하여 제1 아바타(310)에 대응하는 사용자 단말기(130)에 전송할 수 있다.For example, the first avatar 310 looking at the room far from the rear has a virtual object 301 of a bookcase, a virtual object 302 of a picture, and a virtual object 303 of a desk, as shown in FIG. 3. All may be included. Accordingly, the virtual world image generator 250 generates a virtual world image 311 including all of the virtual object 301 of the bookshelf, the virtual object 302 of the figure, and the virtual object 303 of the desk to generate the first avatar. The user terminal 130 may transmit to the user terminal 130 corresponding to 310.

이때, 제1 아바타(310)의 위치는 카메라가 방을 촬영한 위치이며, 가상 세계(300)에 아바타가 생성될 경우, 디폴트로 배치되는 위치일 수 있다.In this case, the location of the first avatar 310 is a location where the camera photographs the room, and when the avatar is generated in the virtual world 300, the location of the first avatar 310 may be a default location.

다른 일례로, 제2 사용자의 요청에 따라 그림의 가상 오브젝트(302)에 근접한 제2 아바타(320)는 시야 안에 그림의 가상 오브젝트(302)만 포함될 수 있다. 또한, 제2 아바타(320)와 그림의 가상 오브젝트(302) 간의 거리가 가까우므로, 그림의 가상 오브젝트(302)는 크게 표시될 수 있다. 따라서, 가상 세계 이미지 생성부(250)는 그림의 가상 오브젝트 (302)가 크게 표시된 가상 세계 이미지(321)를 생성하여 제2 아바타(320)에 대응하는 사용자 단말기(130)에 전송할 수 있다.As another example, at the request of the second user, the second avatar 320 proximate the virtual object 302 of the figure may include only the virtual object 302 of the figure within the field of view. In addition, since the distance between the second avatar 320 and the virtual object 302 of the figure is close, the virtual object 302 of the figure may be displayed large. Accordingly, the virtual world image generator 250 may generate a virtual world image 321 in which the virtual object 302 of the figure is large and transmit the generated virtual world image 321 to the user terminal 130 corresponding to the second avatar 320.

또 다른 일례로, 제3 사용자의 요청에 따라 책상의 가상 오브젝트(303)에 근접한 제3 아바타(320)는 시야 안에 책상의 가상 오브젝트(303)만 포함될 수 있다. 또한, 제3 아바타(330)와 책상의 가상 오브젝트(303) 간의 거리가 가까우므로, 책상의 가상 오브젝트(303)는 크게 표시될 수 있다. 따라서, 가상 세계 이미지 생성부(250)는 책상의 가상 오브젝트 (303)가 크게 표시된 가상 세계 이미지(331)를 생성하여 제3 아바타(330)에 대응하는 사용자 단말기(130)에 전송할 수 있다.As another example, the third avatar 320 proximate to the virtual object 303 of the desk may be included only in the field of view of the desk in response to the request of the third user. In addition, since the distance between the third avatar 330 and the virtual object 303 of the desk is close, the virtual object 303 of the desk may be displayed large. Accordingly, the virtual world image generator 250 may generate a virtual world image 331 in which the virtual object 303 of the desk is largely displayed and transmit the generated virtual world image 331 to the user terminal 130 corresponding to the third avatar 330.

즉, 가상 세계 이미지 생성부(250)는 도 3에 도시된 바와 같이 복수의 사용자가 동일한 가상 세계(300)에 접속한 경우, 각 사용자의 아바타의 위치와 방향에 따라 각각 다른 이미지를 생성하여 전송함으로써, 사용자가 현실 세계와 같이 사용자 별로 다른 오브젝트를 보도록 할 수 있다.That is, when a plurality of users access the same virtual world 300 as shown in FIG. 3, the virtual world image generator 250 generates and transmits different images according to the position and direction of each user's avatar. As a result, the user may view different objects for each user as in the real world.

도 4는 본 발명의 일실시예에 따른 가상 세계 생성 방법을 도시한 플로우차트이다.4 is a flowchart illustrating a virtual world creation method according to an embodiment of the present invention.

단계(S410)에서 오브젝트 식별부(210)는 카메라가 현실 세계의 특정 공간을 촬영한 이미지에 포함된 현실 오브젝트를 식별할 수 있다. In operation S410, the object identifier 210 may identify a real object included in an image of a camera photographing a specific space of the real world.

단계(S420)에서 가상 오브젝트 생성부(220)는 단계(S410)에서 식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성할 수 있다.In operation S420, the virtual object generator 220 may generate a virtual object using the reality object identified in operation S410.

단계(S430)에서 가상 세계 생성부(230)는 카메라가 촬영한 이미지의 배경과 단계(S420)에서 생성한 가상 오브젝트를 사용하여 가상 세계를 생성할 수 있다. In operation S430, the virtual world generator 230 may generate a virtual world using the background of the image photographed by the camera and the virtual object generated in operation S420.

단계(S440)에서 아바타 생성부(240)는 단계(S430)에서 생성한 가상 세계에 접속을 요청한 사용자의 아바타를 가상 세계 안에 생성할 수 있다. 이때, 아바타 생성부(240)는 사용자가 사용자 단말기(130) 또는 사용자 식별 정보를 통하여 가상 세계에 접속을 요청한 경우, 기 설정된 사용자의 아바타를 가상 세계에 배치하거나, 사용자의 입력에 따라 사용자의 아바타를 생성할 수 있다.In operation S440, the avatar generator 240 may generate an avatar of the user who has requested to access the virtual world generated in operation S430 in the virtual world. In this case, when the user requests to access the virtual world through the user terminal 130 or the user identification information, the avatar generator 240 arranges the avatar of the preset user in the virtual world or the avatar of the user according to the user's input. Can be generated.

단계(S450)에서 가상 세계 이미지 생성부(250)는 단계(S440)에서 생성된 아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성할 수 있다. In operation S450, the virtual world image generator 250 may generate an image of the virtual world to be transmitted to the user according to the position and direction of the avatar generated in operation S440.

단계(S460)에서 가상 세계 이미지 생성부(250)는 아바타 제어부(260)가 사용자의 요청에 따라 아바타의 위치와 방향을 변경하였는지 여부를 확인할 수 있다. In operation S460, the virtual world image generator 250 may determine whether the avatar controller 260 changes the position and orientation of the avatar at the user's request.

단계(S470)에서 가상 세계 이미지 생성부(250)는 단계(S460)에서 아바타 제어부(260)가 사용자의 요청에 따라 아바타의 위치와 방향을 변경한 것으로 확인된 경우, 변경한 아바타의 위치와 방향에 따라 가상 세계의 이미지를 재생성할 수 있다.In operation S470, when the avatar world controller 250 determines that the avatar controller 260 changes the location and orientation of the avatar at the user's request in operation S460, the virtual world image generator 250 may change the location and orientation of the avatar. The image of the virtual world can be reproduced accordingly.

본 발명은 사용자가 휴대 가능한 카메라로 촬영한 이미지를 사용하여 이미지에 포함된 장소에 대응하는 가상 세계를 생성함으로써, 사용자가 원하는 장소의 가상 세계를 용이하게 생성할 수 있다.The present invention can easily create a virtual world of a place desired by a user by generating a virtual world corresponding to a place included in the image by using an image photographed by a portable camera.

또한, 가상 세계에 사용자의 아바타를 생성하고, 아바타의 위치와 방향에 따라 아바타가 보고 있는 가상 세계의 이미지를 생성하여 사용자에게 제공함으로써, 사용자는 특정 공간에서 이동하면서 자신이 원하는 오브젝트들을 관찰하는 것과 같은 느낌을 받을 수 있다.In addition, by creating a user's avatar in the virtual world, and by providing the user with an image of the virtual world that the avatar is viewing according to the position and direction of the avatar, the user can move in a specific space to observe the objects he wants You can feel the same.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.

100: 가상 세계 생성 장치
130: 사용자 단말기100: virtual world generating device
130: User terminal

Claims (14)

카메라가 촬영한 이미지에 포함된 현실 오브젝트를 식별하는 오브젝트 식별부;
식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성하는 가상 오브젝트 생성부; 및
카메라가 촬영한 이미지의 배경과 가상 오브젝트를 사용하여 가상 세계를 생성하는 가상 세계 생성부
를 포함하는 가상 세계 생성 장치.An object identification unit identifying a reality object included in an image captured by the camera;
A virtual object generating unit generating a virtual object using the identified reality object; And
Virtual world generator to create a virtual world using the background and virtual objects of the image taken by the camera
Virtual world generation device comprising a. 제1항에 있어서,
가상 세계에 접속을 요청한 사용자의 아바타를 가상 세계 안에 생성하는 아바타 생성부; 및
아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성하는 가상 세계 이미지 생성부
를 더 포함하는 가상 세계 생성 장치. The method of claim 1,
An avatar generator configured to generate an avatar of a user who has requested to access the virtual world in the virtual world; And
Virtual world image generation unit for generating an image of the virtual world to be sent to the user according to the position and direction of the avatar
The virtual world generating device further comprising. 제2항에 있어서,
상기 사용자의 요청에 따라 아바타의 위치와 방향을 제어하는 아바타 제어부
를 더 포함하는 가상 세계 생성 장치.The method of claim 2,
Avatar control unit for controlling the position and direction of the avatar in response to the user's request
The virtual world generating device further comprising. 제2항에 있어서,
상기 가상 세계 이미지 생성부는,
아바타의 방향에 따라 가상 세계의 이미지에 포함할 가상 오브젝트를 결정하는 것을 특징으로 하는 가상 세계 생성 장치.The method of claim 2,
The virtual world image generating unit,
And a virtual object to be included in the image of the virtual world according to the direction of the avatar. 제2항에 있어서,
상기 가상 세계 이미지 생성부는,
아바타와 가상 오브젝트 간의 거리에 따라 가상 세계의 이미지에 포함된 가상 오브젝트의 크기를 결정하는 것을 특징으로 하는 가상 세계 생성 장치.The method of claim 2,
The virtual world image generating unit,
And a size of the virtual object included in the image of the virtual world according to the distance between the avatar and the virtual object. 제1항에 있어서,
상기 오브젝트 식별부는
현실 오브젝트들의 외형적 특징이나 형상 자체에 대한 정보들을 관리하는 형상 정보 데이터베이스에서 이미지에 포함된 적어도 하나의 형상을 검색하여 현실 오브젝트를 식별하는 것을 특징으로 하는 가상 세계 생성 장치.The method of claim 1,
The object identification unit
And retrieving at least one shape included in an image from a shape information database that manages external features of the real objects or information about the shape itself. 제6항에 있어서,
상기 가상 오브젝트 생성부는,
상기 형상 정보 데이터베이스를 사용하여 이미지에 포함되지 않은 현실 오브젝트의 부분에 대응하는 가상 오브젝트의 부분을 생성하는 것을 특징으로 하는 가상 세계 생성 장치.The method according to claim 6,
The virtual object generation unit,
And generating a part of the virtual object corresponding to the part of the real object not included in the image by using the shape information database. 카메라가 촬영한 이미지에 포함된 현실 오브젝트를 식별하는 단계;
식별한 현실 오브젝트를 사용하여 가상 오브젝트를 생성하는 단계; 및
카메라가 촬영한 이미지의 배경과 가상 오브젝트를 사용하여 가상 세계를 생성하는 단계
를 포함하는 가상 세계 생성 방법.Identifying a reality object included in an image captured by the camera;
Generating a virtual object using the identified reality object; And
Steps to create a virtual world using the background and virtual objects of the images taken by the camera
Virtual world creation method comprising a. 제8항에 있어서,
가상 세계에 접속을 요청한 사용자의 아바타를 가상 세계 안에 생성하는 단계; 및
아바타의 위치와 방향에 따라 사용자에게 전송할 가상 세계의 이미지를 생성하는 단계
를 더 포함하는 가상 세계 생성 방법. 9. The method of claim 8,
Generating an avatar of the user who has requested to access the virtual world in the virtual world; And
Generating an image of the virtual world to be sent to the user according to the position and orientation of the avatar
Virtual world creation method comprising more. 제9항에 있어서,
상기 사용자의 요청에 따라 아바타의 위치와 방향을 제어하는 단계
를 더 포함하는 가상 세계 생성 방법.10. The method of claim 9,
Controlling the position and direction of the avatar according to the user's request
Virtual world creation method comprising more. 제9항에 있어서,
상기 가상 세계의 이미지를 생성하는 단계는,
아바타의 방향에 따라 가상 세계의 이미지에 포함할 가상 오브젝트를 결정하는 것을 특징으로 하는 가상 세계 생성 방법.10. The method of claim 9,
Generating an image of the virtual world,
And determining the virtual object to be included in the image of the virtual world according to the direction of the avatar. 제9항에 있어서,
상기 가상 세계의 이미지를 생성하는 단계는,
아바타와 가상 오브젝트 간의 거리에 따라 가상 세계의 이미지에 포함된 가상 오브젝트의 크기를 결정하는 것을 특징으로 하는 가상 세계 생성 방법.10. The method of claim 9,
Generating an image of the virtual world,
And determining a size of the virtual object included in the image of the virtual world according to the distance between the avatar and the virtual object. 제8항에 있어서,
상기 현실 오브젝트를 식별하는 단계는
현실 오브젝트들의 외형적 특징이나 형상 자체에 대한 정보들을 관리하는 형상 정보 데이터베이스에서 이미지에 포함된 적어도 하나의 형상을 검색하여 현실 오브젝트를 식별하는 것을 특징으로 하는 가상 세계 생성 방법.9. The method of claim 8,
Identifying the reality object
And retrieving at least one shape included in an image from a shape information database that manages external features of the real objects or information about the shape itself. 제13항에 있어서,
상기 가상 오브젝트를 생성하는 단계는,
상기 형상 정보 데이터베이스를 사용하여 이미지에 포함되지 않은 현실 오브젝트의 부분에 대응하는 가상 오브젝트의 부분을 생성하는 것을 특징으로 하는 가상 세계 생성 방법.The method of claim 13,
Generating the virtual object,
And generating a part of the virtual object corresponding to the part of the real object not included in the image by using the shape information database.
KR1020110134727A 2011-12-14 2011-12-14 Apparatus and method for generating virtual world using image KR20130082692A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110134727A KR20130082692A (en) 2011-12-14 2011-12-14 Apparatus and method for generating virtual world using image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110134727A KR20130082692A (en) 2011-12-14 2011-12-14 Apparatus and method for generating virtual world using image

Publications (1)

Publication Number Publication Date
KR20130082692A true KR20130082692A (en) 2013-07-22

Family

ID=48993888

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110134727A KR20130082692A (en) 2011-12-14 2011-12-14 Apparatus and method for generating virtual world using image

Country Status (1)

Country Link
KR (1) KR20130082692A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170063838A (en) * 2014-10-02 2017-06-08 레고 에이/에스 Game system
KR20180081274A (en) * 2017-01-06 2018-07-16 한국과학기술원 Method and system for making training program based on virtual reality
KR20200068084A (en) 2018-11-27 2020-06-15 문지원 Apparatus and method for providing virtual fairs through virtual reality
KR102481843B1 (en) * 2022-09-26 2022-12-26 김태원 Metaverse service platform using nft based metaverse ticket and method for providing the service
WO2024071941A1 (en) * 2022-09-26 2024-04-04 김태원 Metaverse service platform using nft-based metaverse ticket, and method for providing service

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170063838A (en) * 2014-10-02 2017-06-08 레고 에이/에스 Game system
KR20180081274A (en) * 2017-01-06 2018-07-16 한국과학기술원 Method and system for making training program based on virtual reality
KR20200068084A (en) 2018-11-27 2020-06-15 문지원 Apparatus and method for providing virtual fairs through virtual reality
KR102481843B1 (en) * 2022-09-26 2022-12-26 김태원 Metaverse service platform using nft based metaverse ticket and method for providing the service
WO2024071941A1 (en) * 2022-09-26 2024-04-04 김태원 Metaverse service platform using nft-based metaverse ticket, and method for providing service

Similar Documents

Publication Publication Date Title
KR101918262B1 (en) Method and system for providing mixed reality service
KR101764372B1 (en) Apparatus and method for compositing image in a portable terminal
US20130257858A1 (en) Remote control apparatus and method using virtual reality and augmented reality
JP2019533372A (en) Panorama image display control method, apparatus, and storage medium
CN103472985B (en) A kind of user's edit methods of three-dimensional shopping platform display interface
US20140181630A1 (en) Method and apparatus for adding annotations to an image
KR20160124479A (en) Master device, slave device and control method thereof
US11004256B2 (en) Collaboration of augmented reality content in stereoscopic view in virtualized environment
TWI617930B (en) Method and system for sorting a search result with space objects, and a computer-readable storage device
KR20130082692A (en) Apparatus and method for generating virtual world using image
US11776197B2 (en) Method and apparatus for displaying personalized face of three-dimensional character, device, and storage medium
CN109478342B (en) Image display device and image display system
WO2014094874A1 (en) Method and apparatus for adding annotations to a plenoptic light field
CN114286142A (en) Virtual reality equipment and VR scene screen capturing method
KR101177058B1 (en) System for 3D based marker
JP5834423B2 (en) Terminal device, display method, and program
JP6635573B2 (en) Image processing system, image processing method, and program
JP2022507502A (en) Augmented Reality (AR) Imprint Method and System
Broll Augmented reality
TW202248808A (en) Augmented reality data presentation method, electronic equipment and computer-readable storage medium
JP2012175324A5 (en)
KR102140077B1 (en) Master device, slave device and control method thereof
KR101773891B1 (en) System and Computer Implemented Method for Playing Compoiste Video through Selection of Environment Object in Real Time Manner
JP7452434B2 (en) Information processing device, information processing method and program
JP2023140922A (en) Display terminal, information processing system, communication system, display method, information processing method, communication method, and program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment