KR20130049351A - Apparatus and method for providing contents matching related information - Google Patents
Apparatus and method for providing contents matching related information Download PDFInfo
- Publication number
- KR20130049351A KR20130049351A KR1020110114330A KR20110114330A KR20130049351A KR 20130049351 A KR20130049351 A KR 20130049351A KR 1020110114330 A KR1020110114330 A KR 1020110114330A KR 20110114330 A KR20110114330 A KR 20110114330A KR 20130049351 A KR20130049351 A KR 20130049351A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- augmented reality
- poi
- reality display
- camera
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000003190 augmentative effect Effects 0.000 claims abstract description 132
- 238000010586 diagram Methods 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004575 stone Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Primary Health Care (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- General Health & Medical Sciences (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Automation & Control Theory (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
본 발명은 사용자가 원하는 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 장치 및 방법에 관한 것으로, 보다 상세하게는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하여 증강 현실로 표시하는 증강 현실 표시 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for displaying information desired by a user as an augmented reality on an image taken by a camera, and more particularly, to an apparatus and method for displaying information to be provided to a user on the basis of a direction of the camera and an image captured by the camera And an augmented reality display device and method which are represented by augmented reality.
이동 단말기의 대중화와 고성능화에 따라 이동 단말기를 소지한 사용자의 위치에 따른 지리 정보를 제공하는 서비스가 개발되었다.In accordance with the popularization and high performance of the mobile terminal, a service for providing geographical information according to the location of the user having the mobile terminal has been developed.
한국공개특허 제10-2007-0101548호(공개일 2007년 10월 17일)에는 사용자의 요청에 따라 사용자의 위치에 특화된 정보를 제공하는 장치가 개시되어 있다. 종래의 지리 정보 제공 장치는 사용자의 요구에 따라 사용자의 위치에 대응하는 지리 정보를 제공하고 있으나, 날씨와 같은 정보나 특정 POI와 관련된 정보를 검색하기 위해서는 각기 다른 프로그램을 실행해야 하는 불편함이 있었다. Korean Patent Laid-Open No. 10-2007-0101548 (published on October 17, 2007) discloses an apparatus for providing information specific to a user's location at the request of a user. Conventionally, geographic information providing apparatuses provide geographical information corresponding to a user's location according to a user's request. However, there is an inconvenience in executing different programs in order to retrieve information such as weather or information related to a specific POI .
또한, 날씨와 같은 정보나 특정 POI와 관련된 정보 및 지리 정보가 각기 다른 프로그램으로 검색하므로, 지리 정보에 대응하는 날씨 라던지 POI의 지리 정보와 같은 정보를 수집하려면 다른 프로그램의 검색 결과를 사용자가 입력해야 하는 불편함이 있었다.Also, in order to collect information such as weather, geographical information corresponding to geographical information, geographical information of POI or the like, information of a specific POI or information related to a specific POI is retrieved by a different program, There was an inconvenience to do.
따라서, 하나의 프로그램이나 장치에서 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 방법이 요청되고 있다.Accordingly, there is a demand for a method that can provide various information desired by a user without any operation or selection in one program or device.
본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 장치 및 방법을 제공한다. The present invention provides an apparatus and method for providing various information desired by a user without any operation or selection by determining information to be provided to the user based on the direction of the camera and the image taken by the camera.
또한, 본 발명은 POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있는 장치 및 방법을 제공한다.In addition, the present invention provides an apparatus and a method for allowing a user to perceive related information of a POI and an actual POI by displaying information related to the POI as an augmented reality on an image including the POI.
그리고, 본 발명은 POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입하는 장치 및 방법을 제공한다. The present invention provides an apparatus and method for automatically tagging information related to a POI with a video and automatically inputting information and an image into a document when a user creates a document related to the POI.
본 발명의 일실시예에 따른 증강 현실 표시 장치는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 정보 결정부; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부를 포함할 수 있다.An augmented reality display apparatus according to an embodiment of the present invention includes an information determination unit that determines information to be provided to a user based on a direction of a camera and an image captured by the camera; And an augmented reality display unit for displaying the determined information as an augmented reality on an image taken by a camera.
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다.The information determining unit of the augmented reality display apparatus according to an embodiment of the present invention determines information related to the POI included in the image photographed by the camera as information to be provided to the user when the direction of the camera is directed to a POI .
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅할 수 있다.The information determination unit of the augmented reality display apparatus according to an exemplary embodiment of the present invention can tag POI related information and POI location information in an image captured by a camera.
본 발명의 일실시예에 따른 증강 현실 표시 장치는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하여 커뮤니티에 등록하는 문서 등록부를 더 포함할 수 있다.When receiving a community document creation request from a user, the augmented reality display device according to an embodiment of the present invention generates a community document by adding information related to the POI and location information of the POI to the text input by the user, And a document registration unit for registering the document registration unit.
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는, 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. The information determining unit of the augmented reality display apparatus according to an embodiment of the present invention may determine information related to the weather as information to be provided to the user when the direction of the camera is directed toward the sky.
본 발명의 일실시예에 따른 증강 현실 표시 방법은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 단계; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 단계를 포함할 수 있다.A method of displaying an augmented reality according to an embodiment of the present invention includes: determining information to be provided to a user based on a direction of the camera and an image taken by the camera; And displaying the determined information as an augmented reality on an image photographed by the camera.
본 발명의 일실시예에 의하면, 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다. According to one embodiment of the present invention, information to be provided to the user is determined based on the direction of the camera and the image taken by the camera, thereby providing various information desired by the user without any operation or selection.
또한, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있다.In addition, according to an embodiment of the present invention, a user may recognize information related to a POI by correlating information related to the POI by displaying information related to the POI as an augmented reality on an image including the POI.
그리고, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.According to an embodiment of the present invention, information related to a POI is tagged together with an image, and when a user creates a document related to the POI, information and an image are automatically inserted into the document, .
도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치와 다른 장치 간의 관계를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치를 도시한 블록 다이어그램이다.
도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.
도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.
도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.
도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.
도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다.1 is a diagram illustrating a relationship between an augmented reality display apparatus and another apparatus according to an embodiment of the present invention.
2 is a block diagram illustrating an augmented reality display apparatus according to an embodiment of the present invention.
3 is an example of operation of the augmented reality display apparatus according to an embodiment of the present invention.
4 is another example of the operation of the augmented reality display apparatus according to an embodiment of the present invention.
5 is another example of the operation of the augmented reality display apparatus according to the embodiment of the present invention.
6 is a flowchart illustrating an augmented reality display method according to an embodiment of the present invention.
7 is a flowchart illustrating an information determination process of the augmented reality display method according to an embodiment of the present invention.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 본 발명의 일실시예에 따른 증강 현실 표시 방법은 증강 현실 표시 장치에 의해 수행될 수 있다. 이때, 증강 현실 표시 장치는 영상을 촬영하기 위한 카메라와 정보를 수집하기 위한 네트워크 접속 기능을 포함하는 이동 단말기일 수 있다. 예를 들어 증강 현실 표시 장치는 증강 현실 표시 어플리케이션이 설치된 스마트 폰이나 디지털 카메라 피처폰 중 하나일 수 있다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The augmented reality display method according to an embodiment of the present invention can be performed by an augmented reality display device. At this time, the augmented reality display device may be a mobile terminal including a camera for capturing an image and a network connection function for collecting information. For example, the augmented reality display device can be one of a smartphone or a digital camera feature phone in which an augmented reality display application is installed.
도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)와 다른 장치 간의 관계를 나타내는 도면이다. 1 is a diagram illustrating a relationship between an augmented
본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)의 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자가 원하는 정보를 결정하여 증강 현실로 표시할 수 있다.The augmented
예를 들어 증강 현실 표시 장치(100)는 도 1에 도시된 바와 같이 POI(point of interest)(110)를 촬영하는 경우, POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 촬영한 영상에 포함된 POI와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다. For example, when the augmented
이때, POI와 관련된 정보는 POI의 위치 정보, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서 중 적어도 하나를 포함할 수 있다. 이때, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서는 관련 기관에서 인증 받은 정보인지 여부를 표시함으로써 사용자가 정보의 신뢰도를 판단하는데 도움이 되도록 할 수 잇다.At this time, the information related to the POI may include at least one of location information of the POI, advertisement information registered by the owner of the POI, and documents registered in association with the POI in the community. At this time, the advertisement information registered by the owner of the POI and the document registered in relation with the POI in the community can be displayed to indicate whether or not the information related to the POI is authenticated by the relevant agency, thereby helping the user to judge the reliability of the information.
증강 현실 표시 장치(100)는 POI(point of interest)(110)이 외에 석가탑과 같은 문화제나 물품을 촬영하는 경우에도 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다.The augmented
증강 현실 표시 장치(100)가 POI를 촬영하는 경우의 동작 과정은 이하 도 3을 참조하여 상세히 설명한다.The operation process when the augmented
이때, 증강 현실 표시 장치(100)는 POI와 관련된 정보를 영상을 촬영한 시점에서 증강 현실 표시 장치(100)의 위치 정보와 함께 촬영한 영상에 태깅함으로써, 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, POI와 관련된 정보와 POI의 위치를 용이하게 인식하도록 할 수 있다.At this time, the augmented
구체적으로, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다. Specifically, when the user wants to create a document related to the
즉, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 문서에 필요한 정보들을 자동으로 추가함으로써 사용자가 문서를 용이하게 작성하도록 할 수 있다. That is, when the user intends to create a document related to the
그리고, 증강 현실 표시 장치(100)는 카메라가 지면을 촬영하는 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다. The augmented
증강 현실 표시 장치(100)가 지면을 촬영하는 경우의 동작 과정은 이하 도 5를 참조하여 상세히 설명한다.The operation process when the augmented
또한, 증강 현실 표시 장치(100)는 카메라가 하늘을 촬영하는 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다. 이때, 날씨와 관련된 정보는 해당 지역의 현재 날씨와 일정 기간의 일기 예보 중 적어도 하나를 포함할 수 있다. Also, the augmented
증강 현실 표시 장치(100)가 하늘을 촬영하는 경우의 동작 과정은 이하 도 4를 참조하여 상세히 설명한다.The operation process when the augmented
증강 현실 표시 장치(100)의 상세 구성은 이하 도 2를 참조하여 상세히 설명한다.Detailed configuration of the augmented
도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)를 도시한 블록 다이어그램이다. 2 is a block diagram illustrating an augmented
도 2을 참고하면, 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 카메라(210), 정보 결정부(220), 위치 추적부(230), 경로 생성부(240), 문서 등록부(250), 및 증강 현실 표시부(260)를 포함할 수 있다. 2, the augmented
카메라(210)는 카메라의 렌즈가 향한 방향을 촬영하여 영상을 생성할 수 있다. 이때, 카메라(210)는 촬영한 영상을 정보 결정부(220)에 전송할 수 있다.The
정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정할 수 있다.The
이때, 정보 결정부(220)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 POI 정보 서버(120)에서 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보를 수집할 수 있다. 또한, 정보 결정부(220)는 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보와 POI의 위치 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다.At this time, when the direction of the camera is directed to a point of interest (POI), the
또한, 정보 결정부(220)는 사용자가 입력한 검색어와 관련된 정보를 검색하여 사용자에게 제공할 수 있다. 예를 들어 사용자가 맛 집을 검색하는 경우, 맛 집과 관련된 POI들을 검색하여 사용자에게 제공하고, 사용자가 제공받은 POI 중 하나를 선택하는 경우 해당 POI를 저장할 수 있다.In addition, the
그리고, 정보 결정부(220)는 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 저장한 POI가 있는 경우, 날씨 정보 서버(140)로부터 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다. 또한, 저장한 POI가 없거나 사용자가 원하지 않는 경우, 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다. If the direction of the camera is directed toward the sky, the
위치 추적부(230)는 GPS나 Wi-Fi와 같은 수단으로 증강 현실 표시 장치(100)의 위치를 추적하여 증강 현실 표시 장치(100)의 위치 정보를 생성할 수 있다.The
이때, 정보 결정부(220)는 카메라가 지면을 촬영하는 경우, 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보나 POI와 관련된 정보에 포함된 POI의 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다.In this case, when the camera photographs the ground, the
경로 생성부(240)는 위치 추적부(230)가 생성한 증강 현실 표시 장치의 위치 정보에서 POI의 위치 정보로 이동하는 경로를 생성할 수 있다.The
문서 등록부(250)는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 등록할 수 있다.When receiving a community document creation request from a user, the
구체적으로, 문서 등록부(250)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다. Specifically, when the user wishes to create a document related to the
증강 현실 표시부(260)는 정보 결정부(220)가 결정한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다. The augmented
이때, 증강 현실 표시부(260)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 POI와 관련된 정보를 증강 현실로 표시할 수 있다.At this time, the augmented
또한, 증강 현실 표시부(260)는 카메라의 방향이 지면을 향하는 경우, 지도를 표시하고, 지도상에 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 표시할 수 있다. 이때, 증강 현실 표시부(260)는 지도상에 표시된 POI(110)의 위치에 POI와 관련된 정보를 더 표시할 수 있다.The augmented
도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.3 is an example of operation of the augmented reality display apparatus according to an embodiment of the present invention.
도 3은 카메라(210)가 POI(point of interest)(110)를 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.3 is an operation example of the augmented
증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 카메라(210)가 POI(110)를 촬영하여 POI가 포함된 영상(310)을 생성하는 경우, 영상에 포함된 POI(311)와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 3, the augmented
이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다. At this time, the augmented
이때, 증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 영상(310)에 POI와 관련된 정보(320)를 증강 현실로 표시할 수 있다. At this time, the augmented
도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.4 is another example of the operation of the augmented reality display apparatus according to an embodiment of the present invention.
도 4는 카메라(210)가 카메라가 하늘을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.4 is an example of the operation of the augmented
증강 현실 표시 장치(100)는 도 4에 도시된 바와 같이 카메라(210)가 하늘을 촬영하는 경우 카메라의 방향에 따라 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. As shown in FIG. 4, the augmented
이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다. At this time, the augmented
이때, 증강 현실 표시 장치(100)는 디폴트로 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하고, 사용자가 저장한 POI가 있는 경우, 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다. 이때, 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)의 일부에 POI를 선택할 수 있는 입력창(411)를 표시함으로써 사용자가 저장한 POI 중 하나를 선택하도록 할 수 있다. 사용자가 입력창(411)를 없음으로 선택한 경우, 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다.At this time, the augmented
다음으로 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)을 날씨와 관련된 정보(412)로 변경하여 표시할 수 있다. 또한, 하늘을 촬영한 영상(410)에 날씨와 관련된 정보(412)를 증강 현실로 표시할 수도 있다.Next, the augmented
도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.5 is another example of the operation of the augmented reality display apparatus according to the embodiment of the present invention.
도 5는 카메라(210)가 카메라가 지면을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.5 is an example of the operation of the augmented
증강 현실 표시 장치(100)는 도 5에 도시된 바와 같이 카메라(210)가 지면을 촬영하는 경우 카메라의 방향에 따라 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. As shown in FIG. 5, the augmented
이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치를 표시하는 경우 POI와 관련된 정보를 더 표시할 수도 있다.At this time, the augmented
이때, 증강 현실 표시 장치(100)는 지면을 촬영한 영상(510)을 지도(520)으로 변경하고, 지도 상에 증강 현실 표시 장치(100)의 위치(521)과 POI(110)의 위치(522)를 표시할 수 있다. 또한, 사용자의 선택에 따라 증강 현실 표시 장치(100)의 위치(521)에서 POI(110)의 위치(522)로 이동하는 경로를 표시하고 안내할 수도 있다.At this time, the augmented
도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.6 is a flowchart illustrating an augmented reality display method according to an embodiment of the present invention.
단계(S610)에서 정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하고, 해당 정보를 수집할 수 있다. 정보를 결정하고 수집하는 과정은 이하 도 7을 참조하여 상세히 설명한다.In step S610, the
단계(S620)에서 증강 현실 표시부(260)는 단계(S610)에서 수집한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다.In step S620, the augmented
단계(S630)에서 정보 결정부(220)는 단계(S620)에서 표시한 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다. 예를 들어 정보 결정부(220)는 POI(110)와 관련된 정보를 POI(110)를 촬영한 영상에 POI(110)의 위치 정보와 함께 태깅하고, 하늘을 촬영한 영상에 하늘을 촬영한 장소의 위치 정보와 날씨 정보를 태깅하여 저장할 수 있다. 또한, 정보 결정부(220)는 지면을 촬영한 영상은 지도로 변경하고, 지도에 표시한 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 태깅할 수 있다.In step S630, the
단계(S640)에서 문서 등록부(250)는 사용자가 생성하는 커뮤니티용 문서에 카메라(210)가 촬영한 영상과 단계(S630)에서 태깅된 정보를 자동 삽입하고, 사용자가 텍스트로 입력한 감상이나 평가를 추가함으로써 커뮤니티용 문서를 완성하여 커뮤니티 서버(130)에 업로드 할 수 있다. In step S640, the
도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다. 이때, 단계(S710) 내지 단계(S750)은 앞서 설명한 도 6의 단계(S610)에 포함될 수 있다.7 is a flowchart illustrating an information determination process of the augmented reality display method according to an embodiment of the present invention. At this time, steps S710 to S750 may be included in step S610 of FIG. 6 described above.
단계(S710)에서 정보 결정부(220)는 카메라(210)의 방향이 하늘인지 여부를 판단하고, 하늘인 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. In step S710, the
단계(S720)에서 정보 결정부(220)는 단계(S710)의 결정에 따라 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집할 수 있다. In step S720, the
단계(S730)에서 정보 결정부(220)는 카메라(210)의 방향이 지면인지 여부를 판단하고, 지면인 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. In step S730, the
단계(S740)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보를 수집하거나, POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보에서 POI의 위치 정보를 추출할 수 있다.In step S740, the
단계(S750)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 카메라(210)의 방향이 지면이나 하늘이 아닌 것이 확인된 경우, POI 정보 서버(120)로부터 카메라가 촬영한 영상에 포함된 POI(311)와 관련된 정보를 수집할 수 있다.If it is determined in step S750 that the direction of the
상기에서 하늘과 지면을 제외하고 사용자가 원하는 대상을 촬영한 경우를 POI로 기재하였으나 POI이외에도 사용자가 촬영한 영상에 포함된 오브젝트는 모두 관련된 정보를 수집하는 대상이 될 수 있다. 예를 들어 석가탑과 같은 문화제나 차량과 같은 물품이 영상에 포함된 경우, 증강 현실 표시 장치는 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 증강 현실로 표시할 수 있다.In the above, except for the sky and the ground, a case in which a user has photographed a desired object is described as a POI, but in addition to the POI, objects included in the image captured by the user can be all objects to collect related information. For example, when an image such as a Buddhist temple is included in an image, the augmented reality display device collects information related to the cultural institution or the article, and displays the collected information as an augmented reality on the photographed image .
본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다. 예를 들어 증강 현실 표시 장치의 방향을 하늘, POI, 지면으로 바꾸는 것만으로 날씨 정보, POI 관련 정보, 위치 정보에서 사용자가 원하는 정보를 수집하여 제공할 수 있다.According to the present invention, information to be provided to a user is determined based on the direction of the camera and the image captured by the camera, thereby providing various information desired by the user without any operation or selection. For example, only by changing the direction of the augmented reality display device to the sky, the POI, and the ground, the user can collect and provide desired information from the weather information, the POI related information, and the location information.
또한, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 관련 정보를 연관하여 인지할 수 있다.Also, by displaying the information related to the POI as an augmented reality on the image including the POI, the user can recognize the actual POI and related information in association with each other.
그리고, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.When the user tags the information related to the POI together with the image and the user creates a document related to the POI, the user can insert the information and the image into the document automatically, thereby allowing the user to easily create the related document.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.
100: 증강 현실 표시 장치
210: 카메라
220: 정보 결정부
250: 문서 등록부
260: 증강 현실 표시부100: Augmented reality display
210: camera
220: information determining unit
250: Document registration part
260: Augmented Reality Display
Claims (19)
결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부
를 포함하는 증강 현실 표시 장치.An information determiner configured to determine information to be provided to a user based on a direction of the camera and an image captured by the camera; And
Augmented reality display unit to display the determined information on the image taken by the camera in augmented reality
Augmented reality display device comprising a.
상기 정보 결정부는,
카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 1,
Wherein the information determination unit comprises:
When the direction of the camera toward the point of interest (POI), the augmented reality display device is characterized in that the information associated with the POI included in the image taken by the camera to determine the information to provide to the user.
상기 정보 결정부는,
카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 2,
Wherein the information determination unit comprises:
The augmented reality display device, characterized in that tagging the POI information and the location information of the POI to the image taken by the camera.
상기 정보 표시부는,
상기 영상에 POI와 관련된 정보를 증강 현실로 표시하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 2,
The information display unit displays,
Augmented reality display device characterized in that for displaying information related to the POI in the image augmented reality.
사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 커뮤니티에 등록하는 문서 등록부
를 더 포함하는 증강 현실 표시 장치.The method of claim 2,
When receiving a request for generating a document for a community from a user, a document register that generates a document for a community by adding information related to the POI and location information of the POI to the text input by the user, and registers with the community.
Further comprising:
증강 현실 표시 장치의 위치를 추적하는 위치 추적부를 더 포함하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 1,
Augmented reality display device further comprises a location tracking unit for tracking the position of the augmented reality display device.
상기 정보 표시부는,
지도를 표시하고, 지도에서 POI와 대응하는 위치에 POI와 관련된 정보를 표시하는 것을 특징으로 하는 증강 현실 표시 장치.The method according to claim 6,
The information display unit displays,
And displaying information related to the POI at a location corresponding to the POI on the map.
증강 현실 표시 장치의 위치에서 POI와 대응하는 위치로 이동하는 경로를 생성하는 경로 생성부를 더 포함하는 증강 현실 표시 장치.The method according to claim 6,
The augmented reality display device further comprises a path generation unit for generating a path for moving from a location of the augmented reality display device to a location corresponding to the POI.
상기 정보 결정부는,
카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 1,
Wherein the information determination unit comprises:
When the direction of the camera toward the sky, the augmented reality display device, characterized in that for determining the information related to the weather information to provide to the user.
상기 정보 결정부는,
사용자가 입력한 검색어와 관련된 정보를 검색하여 사용자에게 제공하는 것을 특징으로 하는 증강 현실 표시 장치.The method of claim 1,
Wherein the information determination unit comprises:
An augmented reality display device, characterized in that for searching for information related to the search term entered by the user and providing it to the user.
결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 단계
를 포함하는 증강 현실 표시 방법.Determining information to be provided to the user based on the direction of the camera and the image photographed by the camera; And
Displaying the determined information on the image captured by the camera in augmented reality.
Augmented reality display method comprising a.
상기 정보를 결정하는 단계는,
카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 방법.The method of claim 11,
Determining the information,
If the direction of the camera toward the point of interest (POI), augmented reality display method characterized in that the information related to the POI included in the image taken by the camera to determine the information to provide to the user.
상기 정보를 결정하는 단계는,
카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅하는 것을 특징으로 하는 증강 현실 표시 방법.The method of claim 12,
Determining the information,
An augmented reality display method characterized by tagging information related to POI and location information of POI on an image captured by a camera.
상기 정보를 결정하는 단계는,
상기 영상에 POI와 관련된 정보를 증강 현실로 표시하는 것을 특징으로 하는 증강 현실 표시 방법.The method of claim 12,
Determining the information,
Augmented reality display method characterized in that for displaying information related to the POI in the image augmented reality.
사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 커뮤니티에 등록하는 단계
를 더 포함하는 증강 현실 표시 방법.The method of claim 12,
When receiving a request for generating a document for a community from a user, generating a document for a community by adding information related to the POI and location information of the POI to the text input by the user, and registering the document with the community.
Augmented reality display method further comprising.
증강 현실 표시 방법을 수행하는 증강 현실 표시 장치의 위치를 추적하는 단계
를 더 포함하는 것을 특징으로 하는 증강 현실 표시 방법.The method of claim 11,
Tracking the position of the augmented reality display device performing the augmented reality display method
Augmented reality display method further comprising.
지도를 표시하고, 지도에서 POI와 대응하는 위치에 POI와 관련된 정보를 표시하는 단계
를 더 포함하는 증강 현실 표시 방법.17. The method of claim 16,
Displaying a map and displaying information related to the POI at a location corresponding to the POI on the map
Augmented reality display method further comprising.
증강 현실 표시 장치의 위치에서 POI와 대응하는 위치로 이동하는 경로를 생성하는 단계
를 더 포함하는 증강 현실 표시 방법.17. The method of claim 16,
Generating a path from the location of the augmented reality display device to the location corresponding to the POI
Augmented reality display method further comprising.
상기 정보를 결정하는 단계는,
카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정하는 것을 특징으로 하는 증강 현실 표시 방법.The method of claim 11,
Determining the information,
If the direction of the camera toward the sky, the augmented reality display method characterized in that for determining the information related to the weather information to provide to the user.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110114330A KR101397873B1 (en) | 2011-11-04 | 2011-11-04 | Apparatus and method for providing contents matching related information |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110114330A KR101397873B1 (en) | 2011-11-04 | 2011-11-04 | Apparatus and method for providing contents matching related information |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130049351A true KR20130049351A (en) | 2013-05-14 |
KR101397873B1 KR101397873B1 (en) | 2014-07-01 |
Family
ID=48660116
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110114330A KR101397873B1 (en) | 2011-11-04 | 2011-11-04 | Apparatus and method for providing contents matching related information |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101397873B1 (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170042039A (en) * | 2015-10-08 | 2017-04-18 | 한국과학기술원 | A method for guiding based on augmented reality using mobile device |
US9876951B2 (en) | 2015-09-25 | 2018-01-23 | International Business Machines Corporation | Image subject and composition demand |
US20210124057A1 (en) * | 2019-10-29 | 2021-04-29 | Qualcomm Incorporated | Camera-based gnss environment detector |
KR102303761B1 (en) * | 2021-03-02 | 2021-09-16 | 엄태호 | Method for providing augmented reality-based photo album |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210109731A (en) * | 2020-02-28 | 2021-09-07 | 유상규 | Portable device camera function that can store location information, address transmission method using this, navigation setting and content providing method |
KR102214338B1 (en) | 2020-05-25 | 2021-02-10 | 조광희 | Control method, device and program of electronic device for augmented reality display |
KR20220111821A (en) | 2021-02-02 | 2022-08-10 | 한국부라스 주식회사 | Control method of electronic device based on augmented reality display |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101370320B1 (en) * | 2009-07-30 | 2014-03-05 | 에스케이플래닛 주식회사 | Method for Providing Augmented Reality by User Selection Area, Server And Portable Terminal Therefor |
KR100982768B1 (en) * | 2009-09-21 | 2010-09-20 | (주)올라웍스 | Method, terminal and computer-readable recording medium for providing different image information based on angle of terminal |
-
2011
- 2011-11-04 KR KR1020110114330A patent/KR101397873B1/en active IP Right Grant
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9876951B2 (en) | 2015-09-25 | 2018-01-23 | International Business Machines Corporation | Image subject and composition demand |
KR20170042039A (en) * | 2015-10-08 | 2017-04-18 | 한국과학기술원 | A method for guiding based on augmented reality using mobile device |
US20210124057A1 (en) * | 2019-10-29 | 2021-04-29 | Qualcomm Incorporated | Camera-based gnss environment detector |
US11619745B2 (en) * | 2019-10-29 | 2023-04-04 | Qualcomm Incorporated | Camera-based GNSS environment detector |
KR102303761B1 (en) * | 2021-03-02 | 2021-09-16 | 엄태호 | Method for providing augmented reality-based photo album |
WO2022186527A1 (en) * | 2021-03-02 | 2022-09-09 | 엄태호 | Method for providing augmented reality-based photo album |
Also Published As
Publication number | Publication date |
---|---|
KR101397873B1 (en) | 2014-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101397873B1 (en) | Apparatus and method for providing contents matching related information | |
US9874454B2 (en) | Community-based data for mapping systems | |
US9497581B2 (en) | Incident reporting | |
US20180188033A1 (en) | Navigation method and device | |
CN102804905B (en) | The display of view data and geographic element data | |
CN112565552B (en) | Image pickup apparatus, information acquisition system, recording medium, and server | |
JP5728775B2 (en) | Information processing apparatus and information processing method | |
JP2011055250A (en) | Information providing method and apparatus, information display method and mobile terminal, program, and information providing system | |
US8254727B2 (en) | Method and apparatus for providing picture file | |
WO2016149918A1 (en) | Determining of geographical position of user | |
KR20100124947A (en) | Ar contents providing system and method providing a portable terminal real-time regional information by using augmented reality technology | |
KR20140130499A (en) | Visual ocr for positioning | |
US20150187139A1 (en) | Apparatus and method of providing augmented reality | |
US20100119121A1 (en) | Method, system and computer-readable recording medium for providing service using electronic map | |
JP6591594B2 (en) | Information providing system, server device, and information providing method | |
CN104298678B (en) | Method, system, device and server for searching interest points on electronic map | |
US9418351B2 (en) | Automated network inventory using a user device | |
US20170199050A1 (en) | Route search system, route search device, route search method, program, and information storage medium | |
JP2006285546A (en) | Information providing system, database server, portable communication terminal | |
KR20150064485A (en) | Method for providing video regarding poi, method for playing video regarding poi, computing device and computer-readable medium | |
US20230050644A1 (en) | Generating Computer Augmented Maps from Physical Maps | |
JP2006112981A (en) | Information processing apparatus | |
US20120155708A1 (en) | Apparatus and method for measuring target point in video | |
JP2014063300A (en) | Character recognition device, character recognition processing method, and program | |
KR102200464B1 (en) | Service providing system and method for guiding a point, apparatus and computer readable medium having computer program recorded therefor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170223 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20180406 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20190408 Year of fee payment: 6 |