KR102027959B1 - Augmented Reality provider system using head mounted display device for attached type - Google Patents

Augmented Reality provider system using head mounted display device for attached type Download PDF

Info

Publication number
KR102027959B1
KR102027959B1 KR1020180125153A KR20180125153A KR102027959B1 KR 102027959 B1 KR102027959 B1 KR 102027959B1 KR 1020180125153 A KR1020180125153 A KR 1020180125153A KR 20180125153 A KR20180125153 A KR 20180125153A KR 102027959 B1 KR102027959 B1 KR 102027959B1
Authority
KR
South Korea
Prior art keywords
augmented reality
mounted display
reality content
display device
head mounted
Prior art date
Application number
KR1020180125153A
Other languages
Korean (ko)
Inventor
조주필
민병준
Original Assignee
군산대학교산학협력단
주식회사 헤드아이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 군산대학교산학협력단, 주식회사 헤드아이티 filed Critical 군산대학교산학협력단
Application granted granted Critical
Publication of KR102027959B1 publication Critical patent/KR102027959B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0176—Head mounted characterised by mechanical features
    • A—HUMAN NECESSITIES
    • A42—HEADWEAR
    • A42B—HATS; HEAD COVERINGS
    • A42B1/00—Hats; Caps; Hoods
    • A42B1/24—Hats; Caps; Hoods with means for attaching articles thereto, e.g. memorandum tablets or mirrors

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to an augmented reality providing system using an attachable head-mounted display device. More specifically, the augmented reality providing system using an attachable head-mounted display device comprises: an attachable head-mounted display device to photograph the front by a mobile terminal included therein to generate a background image, request transmission of augmented reality content for displaying on the background image from an augmented reality providing server to receive the augmented reality content, and couple and display the augmented reality content and the background image; and the augmented reality providing server to search for augmented reality content requested from the attachable head-mounted display device to transmit the searched augmented reality content to the attachable head-mounted display device. Accordingly, the augmented reality providing system using an attachable head-mounted display device selects a suitable position in a background image in accordance with augmented reality content to be displayed and displays the augmented reality content at the selected position to improve user satisfaction.

Description

부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템{Augmented Reality provider system using head mounted display device for attached type}Augmented Reality provider system using head mounted display device for attached type}

본 발명은 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템에 관한 것으로, 더욱 상세하게는 사용자의 머리에 착용되는 모자 또는 헬멧에 부착되는 부착형 헤드 마운트 디스플레이 장치를 이용하여 사용자의 이동 범위와 상관없이 사용자가 원하는 특정 증강현실 콘텐츠를 적합한 위치에서 용이하게 표시할 수 있는 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템에 관한 것이다.The present invention relates to an augmented reality providing system using an attached head mounted display device, and more particularly, to a range of movement of a user using an attached head mounted display device attached to a hat or a helmet worn on a user's head. The present invention relates to an augmented reality providing system using an attachable head mounted display device capable of easily displaying a specific augmented reality content desired by a user at a suitable position.

IT 기술이 급격하게 발달함에 따라 안경처럼 착용하여 사용하는 모니터인 헤드 마운트 디스플레이(Head Mounted Display)가 많은 각광을 받고 있다. With the rapid development of IT technology, head-mounted displays, which are monitors worn like glasses, are receiving a lot of attention.

헤드 마운트 디스플레이란, 안경처럼 얼굴에 착용하고, 영상을 즐길 수 있는 영상표시장치를 나타내는데, 헤드 마운트 디스플레이를 얼굴에 착용하면 양쪽 눈과 근접한 위치에 소형 디스플레이가 위치하여 시차를 이용한 삼차원(3D) 영상을 출력한다. 따라서, 이러한 헤드 마운트 디스플레이를 사용자가 착용하면, 사용자의 움직임을 추적하는 자이로 센서, 움직임에 따라 영상을 만드는 렌더링 기능 등을 이용하여 3D 공간에 있는 것 같은 가상 현실(VR) 또는 증강 현실(AR)을 사용자가 체험할 수 있다. Head-mounted display refers to an image display device that can be worn on the face like a pair of glasses and enjoys images.When the head-mounted display is worn on the face, a small display is positioned near the eyes so that three-dimensional (3D) images using parallax can be used. Outputs Therefore, when the user wears such a head mounted display, a virtual reality (VR) or augmented reality (AR) that is in 3D space using a gyro sensor that tracks the user's movement, a rendering function that creates an image according to the movement, and the like. Can be experienced by the user.

특히, 이러한 헤드 마운트 디스플레이를 이용해 사용자가 증강 현실을 체험하기 위해서는 현실 영상에 증강현실 콘텐츠를 결합하여 사용자에게 디스플레이 해야 한다. 하지만, 이때 사용되는 헤드 마운트 디스플레이는 데스크탑 PC, 게임 콘솔 등에 유선으로 연결되어 사용될 뿐만 아니라, 반구 형태로 이루어지는 헬멧을 반드시 사용자가 머리에 착용해야만 사용이 가능하다. 따라서, 헬멧의 크기가 사용자의 머리 크기와 맞지 않거나, 헬멧 착용에 거부감이 드는 사용자 또는 이동 범위에 구애받지 않고 자유롭게 이동하며 증강 현실을 체험하고자 하는 사용자를 만족시키기 어려운 문제점이 발생했다. In particular, in order for a user to experience augmented reality using such a head mounted display, augmented reality content should be combined with a reality image and displayed to the user. However, the head mounted display used at this time is not only connected to the desktop PC, game console, etc. by wire, but also a hemispherical helmet must be worn on the user's head. Therefore, the size of the helmet does not fit the size of the user's head, or the user who is unwilling to wear a helmet or move freely regardless of the movement range has a problem that it is difficult to satisfy the user who wants to experience augmented reality.

뿐만 아니라, 사용자의 이동 범위와 상관없이 증강현실을 체험하기 위해서는 사용자가 원하는 특정 증강현실 콘텐츠를 현실 영상 내 적합한 위치에 정확하게 배치하기 어려운 문제점 또한 발생했다.In addition, in order to experience augmented reality irrespective of a user's moving range, there is a problem that it is difficult to accurately place a specific augmented reality content desired by a user at a proper position in a real image.

한국 공개특허공보 10-2018-0086633 (2018.08.01.)Korean Laid-Open Patent Publication 10-2018-0086633 (2018.08.01.)

따라서, 본 발명은 이러한 문제점을 해결하기 위한 것으로, 본 발명의 해결하고자 하는 과제는 헤드 마운트 디스플레이 장치를 이용해 사용자의 이동 범위와 상관없이 사용자가 원하는 특정 증강현실 콘텐츠를 최적의 위치에서 디스플레이할 수 있는 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템에 관한 것이다.Accordingly, an object of the present invention is to solve such a problem, and an object of the present invention is to use a head mounted display device to display a specific augmented reality content desired by a user regardless of a moving range at an optimal position. The present invention relates to an augmented reality providing system using an attachable head mounted display device.

본 발명의 일 실시 예에 의한 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템은 내부에 포함된 이동 단말을 통해 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 표시하기 위한 증강현실 콘텐츠의 전송을 증강현실 제공서버로 요청하여 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지와 결합하여 디스플레이하는 부착형 헤드 마운트 디스플레이 장치 및 상기 부착형 헤드 마운트 디스플레이 장치로부터 요청받은 증강현실 콘텐츠를 검색하여, 검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치로 전송하는 증강현실 제공서버를 포함한다. An augmented reality providing system using an attachable head mounted display device according to an embodiment of the present invention generates a background image by photographing the front through a mobile terminal included therein, and displays the augmented reality content for displaying on the background image. Receives a request for transmission to the augmented reality providing server, and attaches the augmented reality content and display the received augmented reality content from the attached head-mounted display device to display the augmented reality content in combination with the background image The augmented reality providing server for transmitting the searched augmented reality content to the attached head-mounted display device.

또한, 상기 부착형 헤드 마운트 디스플레이 장치는 사용자의 머리에 착용되는 모자의 챙 내측 또는 헬멧의 외측에 구비되는 본체부, 상기 본체부의 일측에 위치하여, 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 표시하기 위한 증강현실 콘텐츠의 전송을 상기 증강현실 제공서버로 요청하여 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지에 결합하여 디스플레이하는 이동 단말 및 상기 본체부의 일측 양 끝단으로부터 연장 형성되고, 상기 본체부로부터 절곡되어 회전이동하며 상기 이동 단말의 상부면을 덮는 덮개부를 포함할 수 있다. In addition, the attachable head-mounted display device is located on the inside of the visor of the hat worn on the user's head or the outer side of the helmet, located on one side of the main body, photographing the front to generate a background image, the background Requesting transmission of augmented reality content to be displayed on the image to the augmented reality providing server to receive augmented reality content, and the mobile terminal and one end of both sides of the main body portion to display the received augmented reality content combined with the background image Is formed extending from, and may be bent from the main body portion to include a cover portion that rotates and covers the upper surface of the mobile terminal.

특히, 상기 이동 단말은 상기 배경 이미지 내 적어도 하나의 특징점을 검출하고, 검출한 적어도 하나의 특징점에 상기 증강현실 제공서버로부터 수신한 증강현실 콘텐츠를 표시할 수 있다. In particular, the mobile terminal may detect at least one feature point in the background image and display the augmented reality content received from the augmented reality providing server on the detected at least one feature point.

특히, 상기 이동 단말은 상기 증강현실 제공서버로부터 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠의 종류에 따라 상기 배경 이미지 내 표시되는 위치를 결정하고, 결정된 위치에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 특징점 중 하나의 특징점을 선택한 후, 선택한 특징점에 상기 증강현실 컨텐츠를 표시하여 디스플레이할 수 있다.In particular, the mobile terminal receives augmented reality content from the augmented reality providing server, determines a position displayed in the background image according to the type of the augmented reality content received, and includes in the background image based on the determined position After selecting one feature point among the at least one feature point, the augmented reality content may be displayed and displayed on the selected feature point.

특히, 상기 증강현실 제공서버는 상기 부착형 헤드 마운트 디스플레이 장치로부터 증강현실 콘텐츠의 전송을 위한 요청 메시지를 수신하는 수신부, 상기 요청 메시지에 응답하여 상기 증강현실 콘텐츠를 데이터베이스로부터 검색하는 검색부 및 검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치로 전송하는 전송부를 포함할 수 있다.In particular, the augmented reality providing server is a receiving unit for receiving a request message for transmitting augmented reality content from the attached head-mounted display device, a search unit for searching the augmented reality content from a database in response to the request message and searched It may include a transmission unit for transmitting the augmented reality content to the attached head-mounted display device.

이와 같이, 본 발명에 의한 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템은 디스플레이하고자 하는 증강현실 콘텐츠의 종류에 따라 배경 이미지 내 적합한 위치를 선정하고, 선정한 위치에서 증강현실 콘텐츠를 표시함으로써, 사용자 만족도를 더욱 향상시킬 수 있다.As described above, the augmented reality providing system using the attachable head mounted display device according to the present invention selects a suitable position in the background image according to the type of augmented reality content to be displayed and displays the augmented reality content at the selected position. Satisfaction can be further improved.

또한, 본 발명에 의한 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템은 모자 또는 헬멧에 부착되어 사용되는 부착형 헤드 마운트 디스플레이 장치를 이용하여 사용자에게 증강현실을 체험하도록 함으로써, 상기 사용자의 이동 범위와 상관없이 균일하게 증강현실 콘텐츠를 제공할 수 있다.In addition, the system for providing augmented reality using the attachable head mounted display device according to the present invention allows the user to experience augmented reality using the attachable head mounted display device attached to a hat or a helmet, thereby moving the user. It is possible to provide augmented reality content uniformly regardless of.

도 1은 본 발명의 일 실시 예에 따른 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템의 개략도이다.
도 2는 부착형 헤드 마운트 디스플레이 장치의 사시도이다.
도 3은 본 발명의 일 실시 예에 따른 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템을 구동하는 방법을 나타낸 순서도이다.1 is a schematic diagram of a system for providing augmented reality using an attachable head mounted display device according to an exemplary embodiment.
2 is a perspective view of the attachable head mounted display device.
3 is a flowchart illustrating a method of driving an augmented reality providing system using an attachable head mounted display device according to an exemplary embodiment.

이하 첨부된 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 바람직한 실시 예를 상세히 설명한다. 그러나 이들 실시 예는 본 발명을 보다 구체적으로 설명하기 위한 것으로, 본 발명의 범위가 이에 의하여 제한되지 않는다는 것은 당업계의 통상의 지식을 가진 자에게 자명할 것이다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. However, these examples are intended to illustrate the present invention in more detail, it will be apparent to those skilled in the art that the scope of the present invention is not limited thereto.

본 발명이 해결하고자 하는 과제의 해결 방안을 명확하게 하기 위한 발명의 구성을 본 발명의 바람직한 실시 예에 근거하여 첨부 도면을 참조하여 상세히 설명하되, 도면의 구성요소들에 참조번호를 부여함에 있어서 동일 구성요소에 대해서는 비록 다른 도면상에 있더라도 동일 참조번호를 부여하였으며 당해 도면에 대한 설명 시 필요한 경우 다른 도면의 구성요소를 인용할 수 있음을 미리 밝혀둔다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The configuration of the invention for clarifying the solution to the problem to be solved by the present invention will be described in detail with reference to the accompanying drawings based on the preferred embodiment of the present invention, the same in the reference numerals to the components of the drawings The same reference numerals are given to the components even though they are on different drawings, and it is to be noted that in the description of the drawings, components of other drawings may be cited if necessary. However, this is not intended to limit the present invention to a specific disclosed form, it should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

아울러 본 발명의 바람직한 실시 예에 대한 동작 원리를 상세하게 설명함에 있어 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명 그리고 그 이외의 제반 사항이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명을 생략한다.In addition, in describing the operation principle of the preferred embodiment of the present invention in detail, when it is determined that the detailed description of the known function or configuration and other matters related to the present invention may unnecessarily obscure the subject matter of the present invention, The detailed description is omitted.

덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 '연결'되어 있다고 할 때, 이는 '직접적으로 연결'되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 '간접적으로 연결'되어 있는 경우도 포함한다. 또한, 어떤 구성 요소를 '포함'한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다.In addition, throughout the specification, when a part is 'connected' to another part, it is not only 'directly connected' but also 'indirectly connected' with another element in between. Include. In addition, the term 'comprising' a certain component means that the component may be further included, without excluding the other component unless specifically stated otherwise.

또한, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로 사용될 수 있다. 예를 들어, 본 발명의 권리 범위로부터 이탈되지 않은 채 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.In addition, terms such as first and second may be used to describe various components, but the components should not be limited by the terms. The terms may be used for the purpose of distinguishing one component from another component. For example, without departing from the scope of the present invention, the first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component.

본 발명에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof that is practiced, and that one or more other features or numbers are present. It should be understood that it does not exclude in advance the possibility of the presence or addition of steps, actions, components, parts or combinations thereof.

특별히 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미이다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미인 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless specifically defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as meanings consistent with the meanings in the context of the related art and shall not be construed in ideal or excessively formal meanings unless expressly defined in this application. .

본 발명은 사용자의 이동 범위와 상관없이 사용자가 원하는 증강현실을 더욱 정확하고 실감나게 제공할 수 있는 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템에 관한 것이다. The present invention relates to an augmented reality providing system using an attachable head-mounted display device that can more accurately and realistically provide augmented reality desired by a user regardless of the range of movement of the user.

이하에서는 도 1을 통해, 본 발명의 일시 예에 따른 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템에 대하여 보다 자세히 살펴보도록 한다. Hereinafter, the augmented reality providing system using the attachable head mounted display device according to an embodiment of the present invention will be described in more detail with reference to FIG. 1.

도 1은 본 발명의 일 실시 예에 따른 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템의 개략도이다.1 is a schematic diagram of a system for providing augmented reality using an attachable head mounted display device according to an exemplary embodiment.

도 1에 도시된 바와 같이, 본 발명의 부착형 헤드 마운트 디스플레이 장치(300)는 부착형 헤드 마운트 디스플레이 장치(100) 및 증강현실 제공서버(200)를 포함한다.As shown in FIG. 1, the attachable head mounted display apparatus 300 of the present invention includes an attachable head mounted display apparatus 100 and an augmented reality providing server 200.

부착형 헤드 마운트 디스플레이 장치(100)는 내부에 포함된 이동 단말을 이용해 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 결합하여 표시하기 위한 증강현실 콘텐츠의 전송을 증강현실 제공서버(200)로 요청하여 요청한 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지와 결합하여 디스플레이한다. The attachable head mounted display apparatus 100 generates a background image by photographing the front using a mobile terminal included therein, and transmits augmented reality content for combining and displaying the augmented reality content server 200 to display the combined background image. Receives the requested augmented reality content to request, and displays the received augmented reality content combined with the background image.

예를 들어, 상기 배경 이미지가 집안 거실을 나타내는 이미지인 경우, 상기 부착형 헤드 마운트 디스플레이 장치(100)는 집안 거실에 배치될 수 있는 소파, TV, 탁자 등의 증강현실 콘텐츠의 전송을 요청할 수 있다. For example, when the background image is an image representing a living room in the house, the attachable head mounted display apparatus 100 may request transmission of augmented reality content such as a sofa, a TV, a table, and the like that may be disposed in the living room in the house. .

증강현실 제공서버(200)는 상기 부착형 헤드 마운트 디스플레이 장치(100)로부터 요청받은 증강현실 콘텐츠를 데이터베이스(210)에서 검색하고, 검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치(100)로 전송한다. 이러한 증강현실 제공서버(200)는 수신부, 검색부 및 전송부를 포함한다. The augmented reality providing server 200 searches for the augmented reality content requested from the attached head mounted display device 100 in the database 210, and retrieves the augmented reality content found in the attached head mounted display device 100. To send. The augmented reality providing server 200 includes a receiver, a searcher and a transmitter.

수신부는 상기 부착형 헤드 마운트 디스플레이 장치(100)로부터 증강현실 콘텐츠의 전송을 위한 요청 메시지를 수신한다. The receiver receives a request message for transmitting augmented reality content from the attached head mounted display apparatus 100.

검색부는 수신한 상기 요청 메시지에 응답하여 상기 증강현실 콘텐츠를 데이터베이스(210)로부터 검색한다.The searcher searches for the augmented reality content from the database 210 in response to the received request message.

전송부는 검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치(100)로 전송한다. The transmission unit transmits the retrieved augmented reality content to the attachable head mounted display apparatus 100.

이하, 도 2를 참조하여, 상기 부착형 헤드 마운트 디스플레이 장치(100)에 대하여 보다 자세히 살펴보도록 한다. Hereinafter, the attachment type head mounted display device 100 will be described in detail with reference to FIG. 2.

도 2는 부착형 헤드 마운트 디스플레이 장치의 사시도이다.2 is a perspective view of the attachable head mounted display device.

도 2에 도시된 바와 같이, 부착형 헤드 마운트 디스플레이 장치(100)는 본체부(120), 이동 단말(140) 및 덮개부(160)를 포함한다. As shown in FIG. 2, the attachable head mounted display apparatus 100 includes a main body 120, a mobile terminal 140, and a cover 160.

본체부(120)는 사용자의 머리에 착용되는 모자의 챙 내측 또는 헬멧의 외측에 구비된다.The main body 120 is provided inside the visor of the hat worn on the user's head or outside the helmet.

이동 단말(140)은 상기 본체부(120)의 일측에 위치하여, 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 표시하기 위한 증강현실 콘텐츠의 전송을 증강현실 제공서버(200)로 요청하여 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지에 결합하여 디스플레이한다. The mobile terminal 140 is located at one side of the main body 120 to generate a background image by photographing the front side, and requests the augmented reality providing server 200 to transmit augmented reality content for display on the background image. Receive augmented reality content, and displays the received augmented reality content combined with the background image.

덮개부(160)는 상기 본체부(120)의 일측 양 끝단으로부터 연장 형성되고, 상기 본체부(120)로부터 절곡되어 회전이동하며 상기 이동 단말(140)의 상부면을 덮는다.The cover part 160 extends from both ends of one side of the main body part 120, is bent from the main body part 120, and rotates to cover the upper surface of the mobile terminal 140.

즉, 상기 본체부(120) 중 타측의 일단이 모자(c)의 챙 내측과 결합되고, 상기 타측의 타단은 개방되어, 상기 타측의 타단이 상기 모자(c)의 챙 내측으로부터 수직방향으로 회전 이동할 수 있다. That is, one end of the other side of the main body portion 120 is coupled to the inside of the visor of the hat c, and the other end of the other side is opened, and the other end of the other side rotates from the inside of the visor of the hat c in the vertical direction. I can move it.

이때 만약, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 헬멧에 부착된 경우에는 상기 본체부(120) 중 일측 양 끝단이 헬멧(h)의 외측과 결합된다. 따라서, 본 발명의 부착형 헤드 마운트 디스플레이 장치(100)의 미사용 시에는 헬멧(h)의 외측에 위치하다 사용 시에는 상기 헬멧(h)의 외측으로부터 슬라이드 방식으로 하강 이동하여 사용자의 양안 앞에 위치할 수 있다. In this case, when the attachable head mounted display apparatus 100 is attached to the helmet, both ends of one side of the main body 120 are coupled to the outside of the helmet h. Therefore, when the attached head mounted display apparatus 100 of the present invention is not in use, it is positioned outside the helmet h. In use, the movable head mounted display apparatus 100 moves downward from the outside of the helmet h to be positioned in front of both eyes of the user. Can be.

이러한 모자(c) 및 헬멧(h)에 부착된 부착형 헤드 마운트 디스플레이 장치의 사용 과정을 살펴볼 수 있다. The use of the attachable head mounted display device attached to the hat c and the helmet h may be described.

본 발명의 부착형 헤드 마운트 디스플레이 장치가 모자에 부착된 경우에는 본체부(120) 중 타측의 일단이 상기 모자의 챙 내측과 결합되고, 상기 타측의 타단은 개방된 상태로 위치하다 상기 부착형 헤드 마운트 디스플레이 장치(100)를 사용하고자 하는 경우에는 상기 타측의 타단이 상기 모자(c)의 챙 내측으로부터 수직방향으로 회전 이동할 수 있다. When the attachable head mounted display device of the present invention is attached to the hat, one end of the other side of the main body 120 is coupled to the inside of the visor of the hat, and the other end of the other side is positioned in an open state. When the mount display apparatus 100 is to be used, the other end of the other side may be rotated in a vertical direction from the inside of the visor of the hat c.

이후, 덮개부(160)가 개방될 수 있다. Thereafter, the cover 160 may be opened.

또한, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 헬멧(h)에 부착된 경우에는 본체부(120)의 일측 양 끝단이 상기 헬멧(h)의 외측과 결합된 상태로 위치하다 상기 부착형 헤드 마운트 디스플레이 장치(100)를 사용하고자 하는 경우에는 상기 본체부(120)가 상기 헬멧(h)의 외측으로부터 슬라이드 방식으로 하강 이동하여, 사용자의 양안에 본체부(120)가 위치할 수 있다. In addition, when the attachable head mounted display apparatus 100 is attached to the helmet h, both ends of one side of the main body 120 are coupled to the outside of the helmet h. When the mount display apparatus 100 is to be used, the main body 120 may move downward from the outside of the helmet h in a slide manner so that the main body 120 may be positioned in both eyes of the user.

이후, 덮개부(160)가 개방될 수 있다. Thereafter, the cover 160 may be opened.

이와 같이 상술한 상기 부착형 헤드 마운트 디스플레이 장치(100)는 상술한 본체부(120), 이동 단말(140) 및 덮개부(160) 외에도 전원공급부(미도시) 및 센서부(미도시)를 더 포함할 수 있다. As described above, the attachable head mounted display apparatus 100 further includes a power supply unit (not shown) and a sensor unit (not shown) in addition to the main body unit 120, the mobile terminal 140, and the cover unit 160. It may include.

상기 전원공급부(미도시)는 내부 구성요소들의 동작에 필요한 전원을 공급하는데, 내부에 충전이 가능하도록 이루어지는 내장형 배터리가 포함될 수 있으며, 충전 등을 위해 이동 단말에 착탈 가능하게 결합될 수 있다. 또한, 상기 전원공급부는 연결포트를 포함하여, 배터리의 충전을 위해 전원을 공급하는 외부 충전기가 전기적으로 연결되는 인터페이스가 구성될 수 있다. The power supply unit (not shown) supplies power required for operation of internal components, and may include a built-in battery configured to be charged therein, and may be detachably coupled to the mobile terminal for charging. In addition, the power supply unit may include a connection port, an interface to which an external charger for supplying power for charging the battery is electrically connected.

또한, 상기 전원공급부는 연결포트를 이용하지 않고 무선방식으로 배터리를 충전하도록 이루어질 수 있다. 이러한 경우, 상기 전원공급부는 외부의 무선 전력 전송장치로부터 자기 유도 현상에 기초한 유도 결합(Inductive Coupling) 방식이나 전자기적 공진 현상에 기초한 공진 결합(Magnetic Resonance Coupling) 방식 중 하나 이상을 이용하여 전력을 전달받을 수 있다.In addition, the power supply unit may be configured to charge the battery in a wireless manner without using the connection port. In this case, the power supply unit transfers power from an external wireless power transmitter using at least one of an inductive coupling based on a magnetic induction phenomenon or a magnetic resonance coupling based on an electromagnetic resonance phenomenon. I can receive it.

또한, 센서부는 근접센서, GPS센서, 자이로센서, 가속센서 등을 포함하는 센서부를 더 포함하여, 사용자의 현재 위치 및 움직임 상태를 측정할 수 있다.In addition, the sensor unit may further include a sensor unit including a proximity sensor, a GPS sensor, a gyro sensor, an acceleration sensor, and the like, to measure a current position and a movement state of the user.

이러한 부착형 헤드 마운트 디스플레이 장치(100)는 사용자의 취향에 따라 모자 또는 헬멧에 각각 부착되어 사용될 수 있다. The attachable head mounted display apparatus 100 may be attached to a hat or a helmet according to a user's preference.

특히, 상기 부착형 헤드 마운트 디스플레이 장치(100) 중 이동 단말(140)은 전방을 촬영하여 생성한 배경 이미지로부터 적어도 하나의 특징점을 검출하고, 검출한 적어도 하나의 특징점에 상기 증강현실 제공서버(200)로부터 수신한 증강현실 콘텐츠를 표시하여, 증강현실 콘텐츠가 포함된 증강현실 이미지를 디스플레이 할 수 있다. 상기 이동 단말(140)은 증강현실 제공서버(200)로부터 요청한 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠의 종류에 따라 상기 배경 이미지 내 표시되는 위치를 결정하고, 결정된 위치에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 특징점 중 하나의 특징점을 선택한 후, 선택한 특징점에 상기 증강현실 컨텐츠를 표시하여 증강현실 이미지를 디스플레이할 수 있다. In particular, the mobile terminal 140 of the attachable head mounted display apparatus 100 detects at least one feature point from a background image generated by photographing the front side, and the augmented reality providing server 200 By displaying the augmented reality content received from the), the augmented reality image containing the augmented reality content can be displayed. The mobile terminal 140 receives the augmented reality content requested from the augmented reality providing server 200, determines a position displayed in the background image according to the type of the augmented reality content received, and based on the determined position After selecting one feature point among at least one feature point included in a background image, the augmented reality image may be displayed by displaying the augmented reality content on the selected feature point.

이하에서는 도 3을 참조하여 본 발명의 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템을 구동하는 방법에 대해 보다 자세히 살펴보도록 한다. Hereinafter, a method of driving an augmented reality providing system using the attachable head mounted display device of the present invention will be described in more detail with reference to FIG. 3.

도 3은 본 발명의 일 실시 예에 따른 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템을 구동하는 방법을 나타낸 순서도이다. 3 is a flowchart illustrating a method of driving an augmented reality providing system using an attachable head mounted display device according to an exemplary embodiment.

도 3에 도시된 바와 같이, 본 발명의 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템(300)을 구동하는 방법은 먼저, 부착형 헤드 마운트 디스플레이 장치(100)가 전방을 촬영하여 배경 이미지를 생성한다(S410). 이때 생성된 상기 배경 이미지는 이후 증강현실 콘텐츠가 결합되어 사용자에게 디스플레이 되는데 사용된다. As shown in FIG. 3, in the method of driving the augmented reality providing system 300 using the attachable head mounted display apparatus of the present invention, first, the attachable head mounted display apparatus 100 photographs the front to capture a background image. It generates (S410). The generated background image is then used to be displayed to the user by combining augmented reality content.

이후, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 앞서 생성한 상기 배경 이미지 내 표시하고자 하는 증강현실 컨텐츠의 전송을 위한 요청 메시지를 증강현실 제공서버(200)로 요청한다(S420). Thereafter, the attachable head mounted display apparatus 100 requests a request message for transmitting augmented reality content to be displayed in the background image previously generated to the augmented reality providing server 200 (S420).

예를 들어, 상기 배경 이미지가 집안 거실을 나타내는 경우, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 증강현실 콘텐츠로서, 집안 거실에 구비될 수 있는 콘텐츠 중 소파의 콘텐츠 정보의 전송을 증강현실 제공서버(200)로 요청할 수 있다. For example, when the background image represents a living room in the home, the attachable head mounted display apparatus 100 is augmented reality content, and augmented reality providing server to transmit content information of a sofa among contents that may be provided in the living room in the home. 200 may be requested.

따라서, 상기 증강현실 제공서버(200)가 수신한 요청 메시지에 응답하여, 데이터베이스(210)에 기저장된 다수의 증강현실 콘텐츠로부터 요청 받은 증강현실 컨텐츠를 검색하고(S430), 검색한 증강현실 콘텐츠를 부착형 헤드 마운트 디스플레이 장치(100)로 전송한다. Therefore, in response to the request message received by the augmented reality providing server 200, the augmented reality content requested from a plurality of augmented reality content previously stored in the database 210 is searched (S430), the retrieved augmented reality content Transfer to the head-mounted display device 100 attached.

이후, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 상기 증강현실 제공서버(200)로부터 검색된 증강현실 콘텐츠를 수신한다(S440). Thereafter, the attached head mounted display apparatus 100 receives the augmented reality content retrieved from the augmented reality providing server 200 (S440).

또한, 상기 부착형 헤드 마운트 디스플레이 장치(100)가 앞서 S410 단계에서 촬영한 배경 이미지로부터 적어도 하나의 특징점을 검출한다(S450). In addition, the attachable head mounted display apparatus 100 detects at least one feature point from the background image photographed in step S410 (S450).

예를 들어, 상기 배경 이미지가 집안 거실을 나타낼 때, 상기 배경 이미지 내 특정 화소에서의 명도값, 화소값, 채도값 중 적어도 하나의 값을 주변 화소와 비교한 차이값이 기설정된 기준범위값을 초과하거나 미만인 경우에, 상기 배경 이미지 내 해당 화소를 특징점으로 검출할 수 있다. For example, when the background image represents a living room in a house, a difference value obtained by comparing at least one of brightness, pixel, and saturation values of a specific pixel in the background image with neighboring pixels may be a preset reference range value. When exceeding or less than, the corresponding pixel in the background image may be detected as a feature point.

이어서, 상기 증강현실 제공서버(200)로부터 수신한 증강현실 콘텐츠의 종류에 따라 수신한 증강현실 콘텐츠가 배경 이미지 내 표시되는 위치를 결정한다(S460). Subsequently, according to the type of augmented reality content received from the augmented reality providing server 200, the position where the received augmented reality content is displayed in the background image is determined (S460).

즉, 부착형 헤드 마운트 디스플레이 장치(100)가 상기 증강현실 제공서버(200)로부터 수신한 증강현실 콘텐츠가 4인용 소파인 경우에, 상기 증강현실 콘텐츠의 종류는 가구가 되므로, 앞서 S450 단계에서 검출된 적어도 하나의 특징점 중에서 가구에 대하여 기설정된 소정의 공간이 확보될 수 있는 위치를 배경 이미지 내에서 선택한다. That is, when the augmented reality content received by the attached head mounted display device 100 from the augmented reality providing server 200 is a four-person sofa, the type of the augmented reality content becomes a furniture, and thus detected in step S450. From among the at least one feature point, a position in which a predetermined space predetermined for the furniture can be secured is selected within the background image.

이후, 앞서 결정된 위치에 기초하여 배경 이미지 내 검출된 적어도 하나의 특징점 중 하나의 특징점을 선택한다(S470). Thereafter, one feature point of the at least one feature point detected in the background image is selected based on the previously determined position (S470).

예를 들어, 집안 거실을 나타내는 배경 이미지에서 검출된 특징점 1은 창문 주변의 위치를 나타내고, 특징점 2는 거실 바닥 위치를 나타내며, 특징점 3은 벽면 위치를 나타낸다고 가정한다. 이때, 상기 증강현실 제공서버(200)로부터 수신한 콘텐츠는 4인용 소파이므로, 증강현실 콘텐츠의 종류는 가구가 되고, 미리 설정된 가구 크기인 가로 400cm, 세로 175cm, 높이 65cm 의 공간이 확보되는 소정의 위치와 상기 특징점 1 내지 3간의 거리를 각각 비교하여 가장 근접한 거리에 위치한 특징점 2가 상기 증강현실 콘텐츠를 표시하기 위한 최적의 위치로 선택할 수 있다. 또는, 증강현실 콘텐츠의 종류에 따라 기설정된 소정의 공간을 상기 특징점 1 또는 3이 확보하지 못한 경우에는 거리 비교없이 기설정된 크기의 공간을 확보한 특징점 2를 최적의 위치로 선택할 수 있다. For example, it is assumed that the feature point 1 detected in the background image representing the living room in the house represents the position around the window, the feature point 2 represents the living room floor position, and the feature point 3 represents the wall position. At this time, since the content received from the augmented reality providing server 200 is a four-person sofa, the type of augmented reality content is a furniture, a predetermined size of a predetermined size of the space 400cm, 175cm, 65cm height of the furniture is secured By comparing the distance between the location and the feature points 1 to 3, the feature point 2 located at the closest distance may be selected as the optimal location for displaying the augmented reality content. Alternatively, when the feature points 1 or 3 do not secure a predetermined space according to the type of augmented reality content, the feature point 2 having a space having a predetermined size without distance comparison may be selected as an optimal position.

이와 같이, 상기 배경 이미지 내 포함된 적어도 하나의 특징점 중에서 선택한 하나의 특징점에 수신한 증강현실 콘텐츠를 결합하여 증강현실 이미지를 디스플레이한다(S480). As such, the augmented reality image is displayed by combining the received augmented reality content with one selected feature point among at least one feature point included in the background image (S480).

이와 같이, 본 발명에 의한 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템은 디스플레이하고자 하는 증강현실 콘텐츠의 종류에 따라 배경 이미지 내 적합한 위치를 선정하고, 선정한 위치에서 증강현실 콘텐츠를 표시함으로써, 사용자 만족도를 더욱 향상시킬 수 있다.As described above, the augmented reality providing system using the attachable head mounted display device according to the present invention selects a suitable position in the background image according to the type of augmented reality content to be displayed and displays the augmented reality content at the selected position. Satisfaction can be further improved.

또한, 본 발명에 의한 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템은 모자 또는 헬멧에 부착되어 사용되는 부착형 헤드 마운트 디스플레이 장치를 이용하여 사용자에게 증강현실을 체험하도록 함으로써, 상기 사용자의 이동 범위와 상관없이 균일하게 증강현실 콘텐츠를 제공할 수 있다. In addition, the system for providing augmented reality using the attachable head mounted display device according to the present invention allows the user to experience augmented reality using the attachable head mounted display device attached to a hat or a helmet, thereby moving the user. It is possible to provide augmented reality content uniformly regardless of.

상기한 본 발명의 바람직한 실시 예는 예시의 목적을 위해 개시된 것이고, 본 발명에 대해 통상의 지식을 가진 당업자라면 본 발명의 사상과 범위 안에서 다양한 수정, 변경, 부가가 가능할 것이며, 이러한 수정, 변경 및 부가는 하기의 특허청구범위에 속하는 것으로 보아야 할 것이다.Preferred embodiments of the present invention are disclosed for purposes of illustration, and those skilled in the art will be able to make various modifications, changes, and additions within the spirit and scope of the present invention. Additions should be considered to be within the scope of the following claims.

100: 부착형 헤드 마운트 디스플레이 장치
120: 본체부 140: 이동 단말
160: 덮개부 200: 증강현실 제공서버100: attachable head mounted display device
120: main body 140: mobile terminal
160: cover 200: augmented reality providing server

Claims (5)

내부에 포함된 이동 단말을 통해 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 표시하기 위한 증강현실 콘텐츠의 전송을 증강현실 제공서버로 요청하여 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지와 결합하여 디스플레이하는 부착형 헤드 마운트 디스플레이 장치; 및
상기 부착형 헤드 마운트 디스플레이 장치로부터 요청받은 증강현실 콘텐츠를 검색하여, 검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치로 전송하는 증강현실 제공서버;
를 포함하고,
상기 부착형 헤드 마운트 디스플레이 장치는
사용자의 머리에 착용되는 모자의 챙 내측 또는 헬멧의 외측에 구비되는 본체부;
상기 본체부의 일측에 위치하여, 전방을 촬영하여 배경 이미지를 생성하고, 상기 배경 이미지에 표시하기 위한 증강현실 콘텐츠의 전송을 상기 증강현실 제공서버로 요청하여 증강현실 콘텐츠를 수신하고, 수신한 상기 증강현실 콘텐츠를 상기 배경 이미지에 결합하여 디스플레이하는 이동 단말;
상기 본체부의 일측 양 끝단으로부터 연장 형성되고, 상기 본체부로부터 절곡되어 회전이동하며 상기 이동 단말의 상부면을 덮는 덮개부;
구동에 필요한 전원을 공급하는 전원공급부; 및
상기 사용자의 현재 위치 및 움직임 상태를 측정하도록 근접센서, GPS센서, 자이로센서 및 가속센서를 포함하는 센서부;를 포함하며,
상기 이동 단말은
상기 배경 이미지 내 임의의 특정 화소에서의 명도값, 화소값, 채도값 중 적어도 하나의 값을 상기 특정 화소에 인접한 주변 화소와 비교하고, 비교한 차이값이 기설정된 기준범위값을 초과하거나 또는 미만일 때, 상기 특정 화소를 적어도 하나의 특징점으로 검출하고,
상기 증강현실 제공서버로부터 증강현실 콘텐츠를 수신하고, 상기 적어도 하나의 특징점 중 상기 증강현실 콘텐츠의 종류에 따라 기설정된 크기의 공간이 확보된 위치에 해당하는 하나의 특징점을 선택하고, 선택한 특징점에 상기 증강현실 콘텐츠를 표시하여 디스플레이하고,
상기 증강현실 제공서버는
상기 부착형 헤드 마운트 디스플레이 장치로부터 생성된 배경 이미지 내 표시하고자 하는 증강현실 콘텐츠의 전송을 위한 요청 메시지를 상기 부착형 헤드 마운트 디스플레이 장치로부터 수신하는 수신부;
상기 요청 메시지에 응답하여 상기 증강현실 콘텐츠를 데이터베이스로부터 검색하는 검색부; 및
검색한 상기 증강현실 콘텐츠를 상기 부착형 헤드 마운트 디스플레이 장치로 전송하는 전송부;
를 포함하는 것을 특징으로 하는 부착형 헤드 마운트 디스플레이 장치를 이용한 증강현실 제공 시스템.A background image is generated by photographing the front through a mobile terminal included therein, and the augmented reality providing server receives a request for transmission of augmented reality content for display on the background image, and receives the augmented reality content. An attached head mounted display device for displaying in combination with the image; And
An augmented reality providing server for searching for augmented reality content requested from the attachable head mounted display device and transmitting the retrieved augmented reality content to the attachable head mounted display device;
Including,
The attachable head mounted display device
A main body provided on the inside of the visor of the hat worn on the user's head or the outside of the helmet;
Located on one side of the main body, to generate a background image by photographing the front, to request augmented reality content server to transmit augmented reality content for display on the background image to receive augmented reality content, the received augmented A mobile terminal configured to display and combine real content with the background image;
A cover part extending from both ends of one side of the main body part, the cover part being bent from the main body part and rotating to cover an upper surface of the mobile terminal;
A power supply unit supplying power for driving; And
And a sensor unit including a proximity sensor, a GPS sensor, a gyro sensor, and an acceleration sensor to measure the current position and movement state of the user.
The mobile terminal
At least one of brightness values, pixel values, and saturation values of any particular pixel in the background image is compared with neighboring pixels adjacent to the particular pixel, and the compared difference value is greater than or less than a predetermined reference range value. When the specific pixel is detected as at least one feature point,
Receiving augmented reality content from the augmented reality providing server, selects one feature point corresponding to a position in which a space of a predetermined size is secured according to a type of the augmented reality content of the at least one feature point, and the selected feature point Display and display augmented reality content,
The augmented reality providing server
A receiver configured to receive a request message for transmitting augmented reality content to be displayed in a background image generated from the attached head mounted display device, from the attached head mounted display device;
A searcher for searching the augmented reality content from a database in response to the request message; And
A transmission unit to transmit the retrieved augmented reality content to the attached head mounted display device;
Augmented reality providing system using an attachable head-mounted display device comprising a. 삭제delete 삭제delete 삭제delete 삭제delete
KR1020180125153A 2018-08-03 2018-10-19 Augmented Reality provider system using head mounted display device for attached type KR102027959B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20180090553 2018-08-03
KR1020180090553 2018-08-03

Publications (1)

Publication Number Publication Date
KR102027959B1 true KR102027959B1 (en) 2019-11-04

Family

ID=68578166

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180125153A KR102027959B1 (en) 2018-08-03 2018-10-19 Augmented Reality provider system using head mounted display device for attached type

Country Status (1)

Country Link
KR (1) KR102027959B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220026139A (en) * 2020-08-25 2022-03-04 (주) 사이언스쇼 Mixed reality experience system and control method thereof
WO2022219603A1 (en) * 2021-04-15 2022-10-20 Niantic, Inc. Augmented reality hat
KR20220166981A (en) 2021-06-11 2022-12-20 금오공과대학교 산학협력단 Hybrid image output device for selectively use augmented reality and virtual reality
WO2023282571A1 (en) * 2021-07-05 2023-01-12 주식회사 애니랙티브 Vehicle ar display device and ar service platform

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120050144A1 (en) * 2010-08-26 2012-03-01 Clayton Richard Morlock Wearable augmented reality computing apparatus
KR20140141319A (en) * 2013-05-31 2014-12-10 전자부품연구원 Augmented Reality Information Providing Apparatus and the Method
JP2015192153A (en) * 2014-03-27 2015-11-02 セイコーエプソン株式会社 Head-mounted display device, and control method of head-mounted display device
KR20180086633A (en) 2017-01-23 2018-08-01 세종대학교산학협력단 Method for providing virtual reality contents

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120050144A1 (en) * 2010-08-26 2012-03-01 Clayton Richard Morlock Wearable augmented reality computing apparatus
KR20140141319A (en) * 2013-05-31 2014-12-10 전자부품연구원 Augmented Reality Information Providing Apparatus and the Method
JP2015192153A (en) * 2014-03-27 2015-11-02 セイコーエプソン株式会社 Head-mounted display device, and control method of head-mounted display device
KR20180086633A (en) 2017-01-23 2018-08-01 세종대학교산학협력단 Method for providing virtual reality contents

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220026139A (en) * 2020-08-25 2022-03-04 (주) 사이언스쇼 Mixed reality experience system and control method thereof
KR102430464B1 (en) * 2020-08-25 2022-08-09 (주) 사이언스쇼 Mixed reality experience system and control method thereof
WO2022219603A1 (en) * 2021-04-15 2022-10-20 Niantic, Inc. Augmented reality hat
US11865440B2 (en) 2021-04-15 2024-01-09 Niantic, Inc. Augmented reality hat
KR20220166981A (en) 2021-06-11 2022-12-20 금오공과대학교 산학협력단 Hybrid image output device for selectively use augmented reality and virtual reality
WO2023282571A1 (en) * 2021-07-05 2023-01-12 주식회사 애니랙티브 Vehicle ar display device and ar service platform

Similar Documents

Publication Publication Date Title
KR102027959B1 (en) Augmented Reality provider system using head mounted display device for attached type
EP3427233B1 (en) Method and apparatus for providing augmented reality services
JP6298561B1 (en) Program executed by computer capable of communicating with head mounted device, information processing apparatus for executing the program, and method executed by computer capable of communicating with head mounted device
JP6615732B2 (en) Information processing apparatus and image generation method
KR20160145976A (en) Method for sharing images and electronic device performing thereof
CN105452994A (en) Concurrent optimal viewing of virtual objects
US11991477B2 (en) Output control apparatus, display terminal, remote control system, control method, and non-transitory computer-readable medium
JP6242011B2 (en) Video management system and method for identifying a photographing terminal photographing an arbitrary area
JP2012065327A (en) Mobile terminal and method of controlling the operation of the mobile terminal
KR101784095B1 (en) Head-mounted display apparatus using a plurality of data and system for transmitting and receiving the plurality of data
US11531401B2 (en) Data replacement apparatus, computing device, and program for user and avatar coordination
US10082672B2 (en) Display apparatus and method of displaying using electromechanical faceplate
EP3402410B1 (en) Detection system
KR102140077B1 (en) Master device, slave device and control method thereof
KR102200115B1 (en) System for providing multi-view 360 angle vr contents
JP4232252B2 (en) User identification system
CN209402642U (en) A kind of video capture device showing equipment for virtual reality
KR102178990B1 (en) Method for generating direction information of omnidirectional image and device for performing the method
EP3493541A2 (en) Selecting an omnidirectional image for display
US8674982B2 (en) Information processing system, information processing method, information processing program, server program, server apparatus, and server system, capable of handling multiple-view image data
GB2571286A (en) Virtual reality
US20220230357A1 (en) Data processing
US11310472B2 (en) Information processing device and image generation method for projecting a subject image onto a virtual screen
WO2019102676A1 (en) Information processing device, information processing method, and program
CN109587451A (en) A kind of video capture device and its control method showing equipment for virtual reality

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant