KR20130049351A - Apparatus and method for providing contents matching related information - Google Patents

Apparatus and method for providing contents matching related information Download PDF

Info

Publication number
KR20130049351A
KR20130049351A KR1020110114330A KR20110114330A KR20130049351A KR 20130049351 A KR20130049351 A KR 20130049351A KR 1020110114330 A KR1020110114330 A KR 1020110114330A KR 20110114330 A KR20110114330 A KR 20110114330A KR 20130049351 A KR20130049351 A KR 20130049351A
Authority
KR
South Korea
Prior art keywords
information
augmented reality
poi
reality display
camera
Prior art date
Application number
KR1020110114330A
Other languages
Korean (ko)
Other versions
KR101397873B1 (en
Inventor
홍진원
박승욱
김병국
배상근
김영수
고용석
김찬우
정영래
김세헌
서민철
Original Assignee
인하대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인하대학교 산학협력단 filed Critical 인하대학교 산학협력단
Priority to KR1020110114330A priority Critical patent/KR101397873B1/en
Publication of KR20130049351A publication Critical patent/KR20130049351A/en
Application granted granted Critical
Publication of KR101397873B1 publication Critical patent/KR101397873B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Primary Health Care (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • General Health & Medical Sciences (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Processing Or Creating Images (AREA)

Abstract

PURPOSE: An augmented reality(AR) display device and a method thereof are provided to supply various desired information to a user without additional manipulation by determining information based on an image photographed by a camera. CONSTITUTION: An information determining unit(220) determines information to be provided to a user based on an image photographed by a camera and a direction of a camera(210). A location tracking unit(230) tracks a location of an AR display device(100). A path generating unit(240) generates a path from the generated location information to location information of a POI(Point Of Interest). An AR display unit(260) displays the determined information on the image in AR. [Reference numerals] (100) Augmented reality display device; (210) Camera; (220) Information determining unit; (230) Location tracking unit; (240) Path generating unit; (250) Document registering unit; (260) Augmented reality display unit

Description

증강 현실 표시 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING CONTENTS MATCHING RELATED INFORMATION}[0001] APPARATUS AND METHOD FOR PROVIDING CONTENTS [0002] MATCHING RELATED INFORMATION [0003]

본 발명은 사용자가 원하는 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 장치 및 방법에 관한 것으로, 보다 상세하게는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하여 증강 현실로 표시하는 증강 현실 표시 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for displaying information desired by a user as an augmented reality on an image taken by a camera, and more particularly, to an apparatus and method for displaying information to be provided to a user on the basis of a direction of the camera and an image captured by the camera And an augmented reality display device and method which are represented by augmented reality.

이동 단말기의 대중화와 고성능화에 따라 이동 단말기를 소지한 사용자의 위치에 따른 지리 정보를 제공하는 서비스가 개발되었다.In accordance with the popularization and high performance of the mobile terminal, a service for providing geographical information according to the location of the user having the mobile terminal has been developed.

한국공개특허 제10-2007-0101548호(공개일 2007년 10월 17일)에는 사용자의 요청에 따라 사용자의 위치에 특화된 정보를 제공하는 장치가 개시되어 있다. 종래의 지리 정보 제공 장치는 사용자의 요구에 따라 사용자의 위치에 대응하는 지리 정보를 제공하고 있으나, 날씨와 같은 정보나 특정 POI와 관련된 정보를 검색하기 위해서는 각기 다른 프로그램을 실행해야 하는 불편함이 있었다. Korean Patent Laid-Open No. 10-2007-0101548 (published on October 17, 2007) discloses an apparatus for providing information specific to a user's location at the request of a user. Conventionally, geographic information providing apparatuses provide geographical information corresponding to a user's location according to a user's request. However, there is an inconvenience in executing different programs in order to retrieve information such as weather or information related to a specific POI .

또한, 날씨와 같은 정보나 특정 POI와 관련된 정보 및 지리 정보가 각기 다른 프로그램으로 검색하므로, 지리 정보에 대응하는 날씨 라던지 POI의 지리 정보와 같은 정보를 수집하려면 다른 프로그램의 검색 결과를 사용자가 입력해야 하는 불편함이 있었다.Also, in order to collect information such as weather, geographical information corresponding to geographical information, geographical information of POI or the like, information of a specific POI or information related to a specific POI is retrieved by a different program, There was an inconvenience to do.

따라서, 하나의 프로그램이나 장치에서 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 방법이 요청되고 있다.Accordingly, there is a demand for a method that can provide various information desired by a user without any operation or selection in one program or device.

본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 장치 및 방법을 제공한다. The present invention provides an apparatus and method for providing various information desired by a user without any operation or selection by determining information to be provided to the user based on the direction of the camera and the image taken by the camera.

또한, 본 발명은 POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있는 장치 및 방법을 제공한다.In addition, the present invention provides an apparatus and a method for allowing a user to perceive related information of a POI and an actual POI by displaying information related to the POI as an augmented reality on an image including the POI.

그리고, 본 발명은 POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입하는 장치 및 방법을 제공한다. The present invention provides an apparatus and method for automatically tagging information related to a POI with a video and automatically inputting information and an image into a document when a user creates a document related to the POI.

본 발명의 일실시예에 따른 증강 현실 표시 장치는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 정보 결정부; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부를 포함할 수 있다.An augmented reality display apparatus according to an embodiment of the present invention includes an information determination unit that determines information to be provided to a user based on a direction of a camera and an image captured by the camera; And an augmented reality display unit for displaying the determined information as an augmented reality on an image taken by a camera.

본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다.The information determining unit of the augmented reality display apparatus according to an embodiment of the present invention determines information related to the POI included in the image photographed by the camera as information to be provided to the user when the direction of the camera is directed to a POI .

본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅할 수 있다.The information determination unit of the augmented reality display apparatus according to an exemplary embodiment of the present invention can tag POI related information and POI location information in an image captured by a camera.

본 발명의 일실시예에 따른 증강 현실 표시 장치는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하여 커뮤니티에 등록하는 문서 등록부를 더 포함할 수 있다.When receiving a community document creation request from a user, the augmented reality display device according to an embodiment of the present invention generates a community document by adding information related to the POI and location information of the POI to the text input by the user, And a document registration unit for registering the document registration unit.

본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는, 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. The information determining unit of the augmented reality display apparatus according to an embodiment of the present invention may determine information related to the weather as information to be provided to the user when the direction of the camera is directed toward the sky.

본 발명의 일실시예에 따른 증강 현실 표시 방법은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 단계; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 단계를 포함할 수 있다.A method of displaying an augmented reality according to an embodiment of the present invention includes: determining information to be provided to a user based on a direction of the camera and an image taken by the camera; And displaying the determined information as an augmented reality on an image photographed by the camera.

본 발명의 일실시예에 의하면, 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다. According to one embodiment of the present invention, information to be provided to the user is determined based on the direction of the camera and the image taken by the camera, thereby providing various information desired by the user without any operation or selection.

또한, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있다.In addition, according to an embodiment of the present invention, a user may recognize information related to a POI by correlating information related to the POI by displaying information related to the POI as an augmented reality on an image including the POI.

그리고, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.According to an embodiment of the present invention, information related to a POI is tagged together with an image, and when a user creates a document related to the POI, information and an image are automatically inserted into the document, .

도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치와 다른 장치 간의 관계를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치를 도시한 블록 다이어그램이다.
도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.
도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.
도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.
도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.
도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다.
1 is a diagram illustrating a relationship between an augmented reality display apparatus and another apparatus according to an embodiment of the present invention.
2 is a block diagram illustrating an augmented reality display apparatus according to an embodiment of the present invention.
3 is an example of operation of the augmented reality display apparatus according to an embodiment of the present invention.
4 is another example of the operation of the augmented reality display apparatus according to an embodiment of the present invention.
5 is another example of the operation of the augmented reality display apparatus according to the embodiment of the present invention.
6 is a flowchart illustrating an augmented reality display method according to an embodiment of the present invention.
7 is a flowchart illustrating an information determination process of the augmented reality display method according to an embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 본 발명의 일실시예에 따른 증강 현실 표시 방법은 증강 현실 표시 장치에 의해 수행될 수 있다. 이때, 증강 현실 표시 장치는 영상을 촬영하기 위한 카메라와 정보를 수집하기 위한 네트워크 접속 기능을 포함하는 이동 단말기일 수 있다. 예를 들어 증강 현실 표시 장치는 증강 현실 표시 어플리케이션이 설치된 스마트 폰이나 디지털 카메라 피처폰 중 하나일 수 있다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The augmented reality display method according to an embodiment of the present invention can be performed by an augmented reality display device. At this time, the augmented reality display device may be a mobile terminal including a camera for capturing an image and a network connection function for collecting information. For example, the augmented reality display device can be one of a smartphone or a digital camera feature phone in which an augmented reality display application is installed.

도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)와 다른 장치 간의 관계를 나타내는 도면이다. 1 is a diagram illustrating a relationship between an augmented reality display device 100 and other devices according to an embodiment of the present invention.

본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)의 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자가 원하는 정보를 결정하여 증강 현실로 표시할 수 있다.The augmented reality display device 100 according to an embodiment of the present invention can determine the information desired by the user based on the direction of the camera of the augmented reality display device 100 and the image taken by the camera and display it as an augmented reality .

예를 들어 증강 현실 표시 장치(100)는 도 1에 도시된 바와 같이 POI(point of interest)(110)를 촬영하는 경우, POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 촬영한 영상에 포함된 POI와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다. For example, when the augmented reality display device 100 photographs a POI 110 as shown in FIG. 1, the augmented reality display device 100 may determine information related to the POI as information to be provided to the user. At this time, the augmented reality display device 100 collects information related to the POI included in the image photographed from the POI information server 120, and displays the collected information in addition to the photographed image.

이때, POI와 관련된 정보는 POI의 위치 정보, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서 중 적어도 하나를 포함할 수 있다. 이때, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서는 관련 기관에서 인증 받은 정보인지 여부를 표시함으로써 사용자가 정보의 신뢰도를 판단하는데 도움이 되도록 할 수 잇다.At this time, the information related to the POI may include at least one of location information of the POI, advertisement information registered by the owner of the POI, and documents registered in association with the POI in the community. At this time, the advertisement information registered by the owner of the POI and the document registered in relation with the POI in the community can be displayed to indicate whether or not the information related to the POI is authenticated by the relevant agency, thereby helping the user to judge the reliability of the information.

증강 현실 표시 장치(100)는 POI(point of interest)(110)이 외에 석가탑과 같은 문화제나 물품을 촬영하는 경우에도 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다.The augmented reality display device 100 collects information related to the cultural heritage or the commodity even when photographing a cultural event such as a stone pagoda or an article in addition to the POI 110 and adds the collected information to the photographed image Can be displayed.

증강 현실 표시 장치(100)가 POI를 촬영하는 경우의 동작 과정은 이하 도 3을 참조하여 상세히 설명한다.The operation process when the augmented reality display device 100 captures a POI will be described in detail with reference to FIG.

이때, 증강 현실 표시 장치(100)는 POI와 관련된 정보를 영상을 촬영한 시점에서 증강 현실 표시 장치(100)의 위치 정보와 함께 촬영한 영상에 태깅함으로써, 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, POI와 관련된 정보와 POI의 위치를 용이하게 인식하도록 할 수 있다.At this time, the augmented reality display apparatus 100 tags the information related to the POI to the image photographed together with the positional information of the augmented reality display apparatus 100 at the time of photographing the image, If you want to create it, you can easily identify the POI-related information and the location of the POI.

구체적으로, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다. Specifically, when the user wants to create a document related to the POI 110, the augmented reality display device 100 automatically adds information related to the POI and location information of the POI to the appreciation or evaluation inputted by the user, And can upload the generated community document to the community server 130. [

즉, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 문서에 필요한 정보들을 자동으로 추가함으로써 사용자가 문서를 용이하게 작성하도록 할 수 있다. That is, when the user intends to create a document related to the POI 110, the augmented reality display device 100 can automatically create a document by adding information necessary for the document.

그리고, 증강 현실 표시 장치(100)는 카메라가 지면을 촬영하는 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다. The augmented reality display device 100 can determine the position information as information to be provided to the user when the camera photographs the ground surface. At this time, the augmented reality display device 100 displays at least one of the position of the POI 110 and the position of the augmented reality display device 100 on the map, thereby allowing the user to recognize the POI 110 or its position .

증강 현실 표시 장치(100)가 지면을 촬영하는 경우의 동작 과정은 이하 도 5를 참조하여 상세히 설명한다.The operation process when the augmented reality display device 100 photographs the ground will be described in detail with reference to FIG.

또한, 증강 현실 표시 장치(100)는 카메라가 하늘을 촬영하는 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다. 이때, 날씨와 관련된 정보는 해당 지역의 현재 날씨와 일정 기간의 일기 예보 중 적어도 하나를 포함할 수 있다. Also, the augmented reality display device 100 can determine weather information as information to be provided to the user when the camera photographs the sky. At this time, the augmented reality display device 100 can collect information related to the weather from the weather information server 140 and display it. At this time, the information related to the weather may include at least one of the current weather of the area and the weather forecast of a certain period.

증강 현실 표시 장치(100)가 하늘을 촬영하는 경우의 동작 과정은 이하 도 4를 참조하여 상세히 설명한다.The operation process when the augmented reality display device 100 photographs the sky will be described in detail with reference to FIG.

증강 현실 표시 장치(100)의 상세 구성은 이하 도 2를 참조하여 상세히 설명한다.Detailed configuration of the augmented reality display device 100 will be described in detail with reference to Fig.

도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)를 도시한 블록 다이어그램이다. 2 is a block diagram illustrating an augmented reality display apparatus 100 according to an embodiment of the present invention.

도 2을 참고하면, 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 카메라(210), 정보 결정부(220), 위치 추적부(230), 경로 생성부(240), 문서 등록부(250), 및 증강 현실 표시부(260)를 포함할 수 있다. 2, the augmented reality display apparatus 100 according to an exemplary embodiment of the present invention includes a camera 210, an information determination unit 220, a position tracking unit 230, a path generation unit 240, (250), and an augmented reality display unit (260).

카메라(210)는 카메라의 렌즈가 향한 방향을 촬영하여 영상을 생성할 수 있다. 이때, 카메라(210)는 촬영한 영상을 정보 결정부(220)에 전송할 수 있다.The camera 210 may capture an image of the direction of the lens of the camera to generate an image. At this time, the camera 210 can transmit the photographed image to the information determination unit 220.

정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정할 수 있다.The information determination unit 220 may determine information to be provided to the user based on the direction of the camera 210 and the image captured by the camera 210.

이때, 정보 결정부(220)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 POI 정보 서버(120)에서 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보를 수집할 수 있다. 또한, 정보 결정부(220)는 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보와 POI의 위치 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다.At this time, when the direction of the camera is directed to a point of interest (POI), the information determination unit 220 may determine information related to the POI included in the image captured by the camera as information to be provided to the user. At this time, the information determination unit 220 may collect information related to the POI included in the image photographed by the camera 210 in the POI information server 120. In addition, the information determination unit 220 can tag the information related to the POI included in the image captured by the camera 210 and the position information of the POI on the image captured by the camera 210.

또한, 정보 결정부(220)는 사용자가 입력한 검색어와 관련된 정보를 검색하여 사용자에게 제공할 수 있다. 예를 들어 사용자가 맛 집을 검색하는 경우, 맛 집과 관련된 POI들을 검색하여 사용자에게 제공하고, 사용자가 제공받은 POI 중 하나를 선택하는 경우 해당 POI를 저장할 수 있다.In addition, the information determination unit 220 may search for information related to a search word input by a user and provide the information to a user. For example, when the user searches for a taste store, the POIs related to the taste store are searched and provided to the user, and when the user selects one of the received POIs, the corresponding POI can be stored.

그리고, 정보 결정부(220)는 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 저장한 POI가 있는 경우, 날씨 정보 서버(140)로부터 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다. 또한, 저장한 POI가 없거나 사용자가 원하지 않는 경우, 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다. If the direction of the camera is directed toward the sky, the information determination unit 220 may determine information related to the weather as information to be provided to the user. At this time, when there is the stored POI, the information determination unit 220 may collect information related to the weather of the area where the POI is stored from the weather information server 140 and provide the information to the user. In addition, if the POI is not stored or is not desired by the user, information related to the weather in the area where the augmented reality display device 100 is located can be collected and provided to the user.

위치 추적부(230)는 GPS나 Wi-Fi와 같은 수단으로 증강 현실 표시 장치(100)의 위치를 추적하여 증강 현실 표시 장치(100)의 위치 정보를 생성할 수 있다.The location tracking unit 230 may generate location information of the augmented reality display device 100 by tracking the location of the augmented reality display device 100 by means such as GPS or Wi-Fi.

이때, 정보 결정부(220)는 카메라가 지면을 촬영하는 경우, 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보나 POI와 관련된 정보에 포함된 POI의 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다.In this case, when the camera photographs the ground, the information determination unit 220 determines the location information of the POI included in the information related to the POI or the location information of the augmented reality display device 100 generated by the location tracking unit 230, As the information to provide.

경로 생성부(240)는 위치 추적부(230)가 생성한 증강 현실 표시 장치의 위치 정보에서 POI의 위치 정보로 이동하는 경로를 생성할 수 있다.The path generation unit 240 may generate a path from the position information of the augmented reality display device generated by the position tracking unit 230 to the position information of the POI.

문서 등록부(250)는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 등록할 수 있다.When receiving a community document creation request from a user, the document registration unit 250 generates a community document by adding information related to the POI and location information of the POI to the text input by the user, And registers it in the server 130.

구체적으로, 문서 등록부(250)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다. Specifically, when the user wishes to create a document related to the POI 110, the document registration unit 250 automatically adds information related to the POI and location information of the POI to the appreciation or evaluation inputted by the user, And upload the created community document to the community server 130.

증강 현실 표시부(260)는 정보 결정부(220)가 결정한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다. The augmented reality display unit 260 can display information determined by the information determination unit 220 as an augmented reality on an image captured by the camera 210. [

이때, 증강 현실 표시부(260)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 POI와 관련된 정보를 증강 현실로 표시할 수 있다.At this time, the augmented reality display unit 260 can display information related to the POI as an augmented reality in an image taken by the camera when the direction of the camera is directed to a POI (Point of Interest).

또한, 증강 현실 표시부(260)는 카메라의 방향이 지면을 향하는 경우, 지도를 표시하고, 지도상에 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 표시할 수 있다. 이때, 증강 현실 표시부(260)는 지도상에 표시된 POI(110)의 위치에 POI와 관련된 정보를 더 표시할 수 있다.The augmented reality display unit 260 displays a map when the direction of the camera is directed to the ground and displays the position of the augmented reality display device 100, the position of the POI 110, and the path generation unit 240 And display at least one of the generated paths. At this time, the augmented reality display unit 260 can further display information related to the POI at the position of the POI 110 displayed on the map.

도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.3 is an example of operation of the augmented reality display apparatus according to an embodiment of the present invention.

도 3은 카메라(210)가 POI(point of interest)(110)를 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.3 is an operation example of the augmented reality display device 100 when the camera 210 photographs a point of interest (POI)

증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 카메라(210)가 POI(110)를 촬영하여 POI가 포함된 영상(310)을 생성하는 경우, 영상에 포함된 POI(311)와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 3, the augmented reality display apparatus 100 may be configured such that when the camera 210 generates the image 310 including the POI by photographing the POI 110, the augmented reality display apparatus 100 displays the POI 311 included in the image Information can be determined as information to be provided to the user.

이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다. At this time, the augmented reality display device 100 collects information related to the POI 311 included in the image 310 from the POI information server 120, and displays the collected information by adding the collected information to the captured image.

이때, 증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 영상(310)에 POI와 관련된 정보(320)를 증강 현실로 표시할 수 있다. At this time, the augmented reality display apparatus 100 may display the POI-related information 320 in the image 310 as an augmented reality, as shown in Fig.

도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.4 is another example of the operation of the augmented reality display apparatus according to an embodiment of the present invention.

도 4는 카메라(210)가 카메라가 하늘을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.4 is an example of the operation of the augmented reality display device 100 when the camera 210 photographs the sky.

증강 현실 표시 장치(100)는 도 4에 도시된 바와 같이 카메라(210)가 하늘을 촬영하는 경우 카메라의 방향에 따라 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. As shown in FIG. 4, the augmented reality display apparatus 100 may determine weather information as information to be provided to the user according to the direction of the camera when the camera 210 photographs the sky.

이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다. At this time, the augmented reality display device 100 can collect information related to the weather from the weather information server 140 and display it.

이때, 증강 현실 표시 장치(100)는 디폴트로 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하고, 사용자가 저장한 POI가 있는 경우, 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다. 이때, 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)의 일부에 POI를 선택할 수 있는 입력창(411)를 표시함으로써 사용자가 저장한 POI 중 하나를 선택하도록 할 수 있다. 사용자가 입력창(411)를 없음으로 선택한 경우, 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다.At this time, the augmented reality display device 100 collects information related to the weather of the area where the augmented reality display device 100 is located by default, and when there is a POI stored by the user, Information can be collected. At this time, the augmented reality display apparatus 100 may display an input window 411 for selecting a POI in a part of the sky 410, thereby selecting one of the POIs stored by the user. When the user selects No in the input window 411, the augmented reality display device 100 can collect information related to the weather in the area where the augmented reality display device 100 is located.

다음으로 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)을 날씨와 관련된 정보(412)로 변경하여 표시할 수 있다. 또한, 하늘을 촬영한 영상(410)에 날씨와 관련된 정보(412)를 증강 현실로 표시할 수도 있다.Next, the augmented reality display device 100 can display the image 410 captured by the sky with the information 412 related to the weather. In addition, weather-related information 412 may be displayed as an augmented reality on the image 410 of the sky.

도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.5 is another example of the operation of the augmented reality display apparatus according to the embodiment of the present invention.

도 5는 카메라(210)가 카메라가 지면을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.5 is an example of the operation of the augmented reality display device 100 when the camera 210 photographs the ground.

증강 현실 표시 장치(100)는 도 5에 도시된 바와 같이 카메라(210)가 지면을 촬영하는 경우 카메라의 방향에 따라 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. As shown in FIG. 5, the augmented reality display apparatus 100 may determine the position information to be provided to the user according to the direction of the camera when the camera 210 photographs the ground.

이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치를 표시하는 경우 POI와 관련된 정보를 더 표시할 수도 있다.At this time, the augmented reality display device 100 displays at least one of the position of the POI 110 and the position of the augmented reality display device 100 on the map, thereby allowing the user to recognize the POI 110 or its position . At this time, the augmented reality display apparatus 100 may further display information related to the POI when displaying the position of the POI 110 on the map.

이때, 증강 현실 표시 장치(100)는 지면을 촬영한 영상(510)을 지도(520)으로 변경하고, 지도 상에 증강 현실 표시 장치(100)의 위치(521)과 POI(110)의 위치(522)를 표시할 수 있다. 또한, 사용자의 선택에 따라 증강 현실 표시 장치(100)의 위치(521)에서 POI(110)의 위치(522)로 이동하는 경로를 표시하고 안내할 수도 있다.At this time, the augmented reality display device 100 changes the image 510 of the ground photographing to the map 520 and displays the position 521 of the augmented reality display device 100 and the position of the POI 110 522 can be displayed. In addition, a path for moving from the position 521 of the augmented reality display device 100 to the position 522 of the POI 110 may be displayed and guided according to the user's selection.

도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.6 is a flowchart illustrating an augmented reality display method according to an embodiment of the present invention.

단계(S610)에서 정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하고, 해당 정보를 수집할 수 있다. 정보를 결정하고 수집하는 과정은 이하 도 7을 참조하여 상세히 설명한다.In step S610, the information determination unit 220 determines information to be provided to the user based on the direction of the camera 210 and the image captured by the camera 210, and collects the information. The process of determining and collecting information will be described in detail below with reference to FIG.

단계(S620)에서 증강 현실 표시부(260)는 단계(S610)에서 수집한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다.In step S620, the augmented reality display unit 260 may display the information collected in step S610 as an augmented reality on the image captured by the camera 210. [

단계(S630)에서 정보 결정부(220)는 단계(S620)에서 표시한 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다. 예를 들어 정보 결정부(220)는 POI(110)와 관련된 정보를 POI(110)를 촬영한 영상에 POI(110)의 위치 정보와 함께 태깅하고, 하늘을 촬영한 영상에 하늘을 촬영한 장소의 위치 정보와 날씨 정보를 태깅하여 저장할 수 있다. 또한, 정보 결정부(220)는 지면을 촬영한 영상은 지도로 변경하고, 지도에 표시한 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 태깅할 수 있다.In step S630, the information determination unit 220 may tag the information displayed in step S620 on the image captured by the camera 210. [ For example, the information determination unit 220 may tag the information related to the POI 110 together with the POI 110 position information on the image of the POI 110, The location information and the weather information of the user can be tagged and stored. In addition, the information determination unit 220 changes the image of the ground captured on the map to a map, and displays the position of the augmented reality display device 100 displayed on the map, the position of the POI 110, At least one of the paths can be tagged.

단계(S640)에서 문서 등록부(250)는 사용자가 생성하는 커뮤니티용 문서에 카메라(210)가 촬영한 영상과 단계(S630)에서 태깅된 정보를 자동 삽입하고, 사용자가 텍스트로 입력한 감상이나 평가를 추가함으로써 커뮤니티용 문서를 완성하여 커뮤니티 서버(130)에 업로드 할 수 있다. In step S640, the document registration unit 250 automatically inserts the image photographed by the camera 210 and the information tagged in step S630 into the community document generated by the user, The community document can be completed and uploaded to the community server 130.

도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다. 이때, 단계(S710) 내지 단계(S750)은 앞서 설명한 도 6의 단계(S610)에 포함될 수 있다.7 is a flowchart illustrating an information determination process of the augmented reality display method according to an embodiment of the present invention. At this time, steps S710 to S750 may be included in step S610 of FIG. 6 described above.

단계(S710)에서 정보 결정부(220)는 카메라(210)의 방향이 하늘인지 여부를 판단하고, 하늘인 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. In step S710, the information determination unit 220 determines whether the direction of the camera 210 is sky. If the direction is sky, the information determination unit 220 may determine the weather information as information to be provided to the user.

단계(S720)에서 정보 결정부(220)는 단계(S710)의 결정에 따라 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집할 수 있다. In step S720, the information determination unit 220 may collect weather-related information from the weather information server 140 according to the determination of step S710.

단계(S730)에서 정보 결정부(220)는 카메라(210)의 방향이 지면인지 여부를 판단하고, 지면인 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. In step S730, the information determination unit 220 determines whether the camera 210 is oriented in the direction of the ground. If the direction is the ground, the information determination unit 220 may determine the location information as information to be provided to the user.

단계(S740)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보를 수집하거나, POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보에서 POI의 위치 정보를 추출할 수 있다.In step S740, the information determination unit 220 collects the location information of the augmented reality display device 100 generated by the location tracking unit 230 according to the determination of step S730, or collects the location information of the augmented reality display device 100 from the POI information server 120 Information related to the POI 311 included in the image 310 can be collected and position information of the POI can be extracted from the collected information.

단계(S750)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 카메라(210)의 방향이 지면이나 하늘이 아닌 것이 확인된 경우, POI 정보 서버(120)로부터 카메라가 촬영한 영상에 포함된 POI(311)와 관련된 정보를 수집할 수 있다.If it is determined in step S750 that the direction of the camera 210 is not the ground or sky in accordance with the determination of step S730, the information determination unit 220 determines whether the camera 210 is located on the image taken by the camera from the POI information server 120 Information related to the included POI 311 can be collected.

상기에서 하늘과 지면을 제외하고 사용자가 원하는 대상을 촬영한 경우를 POI로 기재하였으나 POI이외에도 사용자가 촬영한 영상에 포함된 오브젝트는 모두 관련된 정보를 수집하는 대상이 될 수 있다. 예를 들어 석가탑과 같은 문화제나 차량과 같은 물품이 영상에 포함된 경우, 증강 현실 표시 장치는 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 증강 현실로 표시할 수 있다.In the above, except for the sky and the ground, a case in which a user has photographed a desired object is described as a POI, but in addition to the POI, objects included in the image captured by the user can be all objects to collect related information. For example, when an image such as a Buddhist temple is included in an image, the augmented reality display device collects information related to the cultural institution or the article, and displays the collected information as an augmented reality on the photographed image .

본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다. 예를 들어 증강 현실 표시 장치의 방향을 하늘, POI, 지면으로 바꾸는 것만으로 날씨 정보, POI 관련 정보, 위치 정보에서 사용자가 원하는 정보를 수집하여 제공할 수 있다.According to the present invention, information to be provided to a user is determined based on the direction of the camera and the image captured by the camera, thereby providing various information desired by the user without any operation or selection. For example, only by changing the direction of the augmented reality display device to the sky, the POI, and the ground, the user can collect and provide desired information from the weather information, the POI related information, and the location information.

또한, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 관련 정보를 연관하여 인지할 수 있다.Also, by displaying the information related to the POI as an augmented reality on the image including the POI, the user can recognize the actual POI and related information in association with each other.

그리고, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.When the user tags the information related to the POI together with the image and the user creates a document related to the POI, the user can insert the information and the image into the document automatically, thereby allowing the user to easily create the related document.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.

100: 증강 현실 표시 장치
210: 카메라
220: 정보 결정부
250: 문서 등록부
260: 증강 현실 표시부
100: Augmented reality display
210: camera
220: information determining unit
250: Document registration part
260: Augmented Reality Display

Claims (19)

카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 정보 결정부; 및
결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부
를 포함하는 증강 현실 표시 장치.
An information determiner configured to determine information to be provided to a user based on a direction of the camera and an image captured by the camera; And
Augmented reality display unit to display the determined information on the image taken by the camera in augmented reality
Augmented reality display device comprising a.
제1항에 있어서,
상기 정보 결정부는,
카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 1,
Wherein the information determination unit comprises:
When the direction of the camera toward the point of interest (POI), the augmented reality display device is characterized in that the information associated with the POI included in the image taken by the camera to determine the information to provide to the user.
제2항에 있어서,
상기 정보 결정부는,
카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 2,
Wherein the information determination unit comprises:
The augmented reality display device, characterized in that tagging the POI information and the location information of the POI to the image taken by the camera.
제2항에 있어서,
상기 정보 표시부는,
상기 영상에 POI와 관련된 정보를 증강 현실로 표시하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 2,
The information display unit displays,
Augmented reality display device characterized in that for displaying information related to the POI in the image augmented reality.
제2항에 있어서,
사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 커뮤니티에 등록하는 문서 등록부
를 더 포함하는 증강 현실 표시 장치.
The method of claim 2,
When receiving a request for generating a document for a community from a user, a document register that generates a document for a community by adding information related to the POI and location information of the POI to the text input by the user, and registers with the community.
Further comprising:
제1항에 있어서,
증강 현실 표시 장치의 위치를 추적하는 위치 추적부를 더 포함하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 1,
Augmented reality display device further comprises a location tracking unit for tracking the position of the augmented reality display device.
제6항에 있어서,
상기 정보 표시부는,
지도를 표시하고, 지도에서 POI와 대응하는 위치에 POI와 관련된 정보를 표시하는 것을 특징으로 하는 증강 현실 표시 장치.
The method according to claim 6,
The information display unit displays,
And displaying information related to the POI at a location corresponding to the POI on the map.
제6항에 있어서,
증강 현실 표시 장치의 위치에서 POI와 대응하는 위치로 이동하는 경로를 생성하는 경로 생성부를 더 포함하는 증강 현실 표시 장치.
The method according to claim 6,
The augmented reality display device further comprises a path generation unit for generating a path for moving from a location of the augmented reality display device to a location corresponding to the POI.
제1항에 있어서,
상기 정보 결정부는,
카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 1,
Wherein the information determination unit comprises:
When the direction of the camera toward the sky, the augmented reality display device, characterized in that for determining the information related to the weather information to provide to the user.
제1항에 있어서,
상기 정보 결정부는,
사용자가 입력한 검색어와 관련된 정보를 검색하여 사용자에게 제공하는 것을 특징으로 하는 증강 현실 표시 장치.
The method of claim 1,
Wherein the information determination unit comprises:
An augmented reality display device, characterized in that for searching for information related to the search term entered by the user and providing it to the user.
카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 단계; 및
결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 단계
를 포함하는 증강 현실 표시 방법.
Determining information to be provided to the user based on the direction of the camera and the image photographed by the camera; And
Displaying the determined information on the image captured by the camera in augmented reality.
Augmented reality display method comprising a.
제11항에 있어서,
상기 정보를 결정하는 단계는,
카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 방법.
The method of claim 11,
Determining the information,
If the direction of the camera toward the point of interest (POI), augmented reality display method characterized in that the information related to the POI included in the image taken by the camera to determine the information to provide to the user.
제12항에 있어서,
상기 정보를 결정하는 단계는,
카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅하는 것을 특징으로 하는 증강 현실 표시 방법.
The method of claim 12,
Determining the information,
An augmented reality display method characterized by tagging information related to POI and location information of POI on an image captured by a camera.
제12항에 있어서,
상기 정보를 결정하는 단계는,
상기 영상에 POI와 관련된 정보를 증강 현실로 표시하는 것을 특징으로 하는 증강 현실 표시 방법.
The method of claim 12,
Determining the information,
Augmented reality display method characterized in that for displaying information related to the POI in the image augmented reality.
제12항에 있어서,
사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 커뮤니티에 등록하는 단계
를 더 포함하는 증강 현실 표시 방법.
The method of claim 12,
When receiving a request for generating a document for a community from a user, generating a document for a community by adding information related to the POI and location information of the POI to the text input by the user, and registering the document with the community.
Augmented reality display method further comprising.
제11항에 있어서,
증강 현실 표시 방법을 수행하는 증강 현실 표시 장치의 위치를 추적하는 단계
를 더 포함하는 것을 특징으로 하는 증강 현실 표시 방법.
The method of claim 11,
Tracking the position of the augmented reality display device performing the augmented reality display method
Augmented reality display method further comprising.
제16항에 있어서,
지도를 표시하고, 지도에서 POI와 대응하는 위치에 POI와 관련된 정보를 표시하는 단계
를 더 포함하는 증강 현실 표시 방법.
17. The method of claim 16,
Displaying a map and displaying information related to the POI at a location corresponding to the POI on the map
Augmented reality display method further comprising.
제16항에 있어서,
증강 현실 표시 장치의 위치에서 POI와 대응하는 위치로 이동하는 경로를 생성하는 단계
를 더 포함하는 증강 현실 표시 방법.
17. The method of claim 16,
Generating a path from the location of the augmented reality display device to the location corresponding to the POI
Augmented reality display method further comprising.
제11항에 있어서,
상기 정보를 결정하는 단계는,
카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 방법.
The method of claim 11,
Determining the information,
If the direction of the camera toward the sky, the augmented reality display method characterized in that for determining the information related to the weather information to provide to the user.
KR1020110114330A 2011-11-04 2011-11-04 Apparatus and method for providing contents matching related information KR101397873B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110114330A KR101397873B1 (en) 2011-11-04 2011-11-04 Apparatus and method for providing contents matching related information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110114330A KR101397873B1 (en) 2011-11-04 2011-11-04 Apparatus and method for providing contents matching related information

Publications (2)

Publication Number Publication Date
KR20130049351A true KR20130049351A (en) 2013-05-14
KR101397873B1 KR101397873B1 (en) 2014-07-01

Family

ID=48660116

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110114330A KR101397873B1 (en) 2011-11-04 2011-11-04 Apparatus and method for providing contents matching related information

Country Status (1)

Country Link
KR (1) KR101397873B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170042039A (en) * 2015-10-08 2017-04-18 한국과학기술원 A method for guiding based on augmented reality using mobile device
US9876951B2 (en) 2015-09-25 2018-01-23 International Business Machines Corporation Image subject and composition demand
US20210124057A1 (en) * 2019-10-29 2021-04-29 Qualcomm Incorporated Camera-based gnss environment detector
KR102303761B1 (en) * 2021-03-02 2021-09-16 엄태호 Method for providing augmented reality-based photo album

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210109731A (en) * 2020-02-28 2021-09-07 유상규 Portable device camera function that can store location information, address transmission method using this, navigation setting and content providing method
KR102214338B1 (en) 2020-05-25 2021-02-10 조광희 Control method, device and program of electronic device for augmented reality display
KR20220111821A (en) 2021-02-02 2022-08-10 한국부라스 주식회사 Control method of electronic device based on augmented reality display

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101370320B1 (en) * 2009-07-30 2014-03-05 에스케이플래닛 주식회사 Method for Providing Augmented Reality by User Selection Area, Server And Portable Terminal Therefor
KR100982768B1 (en) * 2009-09-21 2010-09-20 (주)올라웍스 Method, terminal and computer-readable recording medium for providing different image information based on angle of terminal

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9876951B2 (en) 2015-09-25 2018-01-23 International Business Machines Corporation Image subject and composition demand
KR20170042039A (en) * 2015-10-08 2017-04-18 한국과학기술원 A method for guiding based on augmented reality using mobile device
US20210124057A1 (en) * 2019-10-29 2021-04-29 Qualcomm Incorporated Camera-based gnss environment detector
US11619745B2 (en) * 2019-10-29 2023-04-04 Qualcomm Incorporated Camera-based GNSS environment detector
KR102303761B1 (en) * 2021-03-02 2021-09-16 엄태호 Method for providing augmented reality-based photo album
WO2022186527A1 (en) * 2021-03-02 2022-09-09 엄태호 Method for providing augmented reality-based photo album

Also Published As

Publication number Publication date
KR101397873B1 (en) 2014-07-01

Similar Documents

Publication Publication Date Title
KR101397873B1 (en) Apparatus and method for providing contents matching related information
US9874454B2 (en) Community-based data for mapping systems
US9497581B2 (en) Incident reporting
US20180188033A1 (en) Navigation method and device
CN102804905B (en) The display of view data and geographic element data
CN112565552B (en) Image pickup apparatus, information acquisition system, recording medium, and server
JP5728775B2 (en) Information processing apparatus and information processing method
JP2011055250A (en) Information providing method and apparatus, information display method and mobile terminal, program, and information providing system
US8254727B2 (en) Method and apparatus for providing picture file
WO2016149918A1 (en) Determining of geographical position of user
KR20100124947A (en) Ar contents providing system and method providing a portable terminal real-time regional information by using augmented reality technology
KR20140130499A (en) Visual ocr for positioning
US20150187139A1 (en) Apparatus and method of providing augmented reality
US20100119121A1 (en) Method, system and computer-readable recording medium for providing service using electronic map
JP6591594B2 (en) Information providing system, server device, and information providing method
CN104298678B (en) Method, system, device and server for searching interest points on electronic map
US9418351B2 (en) Automated network inventory using a user device
US20170199050A1 (en) Route search system, route search device, route search method, program, and information storage medium
JP2006285546A (en) Information providing system, database server, portable communication terminal
KR20150064485A (en) Method for providing video regarding poi, method for playing video regarding poi, computing device and computer-readable medium
US20230050644A1 (en) Generating Computer Augmented Maps from Physical Maps
JP2006112981A (en) Information processing apparatus
US20120155708A1 (en) Apparatus and method for measuring target point in video
JP2014063300A (en) Character recognition device, character recognition processing method, and program
KR102200464B1 (en) Service providing system and method for guiding a point, apparatus and computer readable medium having computer program recorded therefor

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170223

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180406

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190408

Year of fee payment: 6