KR101397873B1 - 증강 현실 표시 장치 및 방법 - Google Patents

증강 현실 표시 장치 및 방법 Download PDF

Info

Publication number
KR101397873B1
KR101397873B1 KR1020110114330A KR20110114330A KR101397873B1 KR 101397873 B1 KR101397873 B1 KR 101397873B1 KR 1020110114330 A KR1020110114330 A KR 1020110114330A KR 20110114330 A KR20110114330 A KR 20110114330A KR 101397873 B1 KR101397873 B1 KR 101397873B1
Authority
KR
South Korea
Prior art keywords
information
poi
augmented reality
camera
reality display
Prior art date
Application number
KR1020110114330A
Other languages
English (en)
Other versions
KR20130049351A (ko
Inventor
홍진원
박승욱
김병국
배상근
김영수
고용석
김찬우
정영래
김세헌
서민철
Original Assignee
인하대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인하대학교 산학협력단 filed Critical 인하대학교 산학협력단
Priority to KR1020110114330A priority Critical patent/KR101397873B1/ko
Publication of KR20130049351A publication Critical patent/KR20130049351A/ko
Application granted granted Critical
Publication of KR101397873B1 publication Critical patent/KR101397873B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services

Abstract

카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하여 증강 현실로 표시하는 장치 및 방법이 개시된다.
증강 현실 표시 장치는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 정보 결정부; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부를 포함할 수 있다.

Description

증강 현실 표시 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING CONTENTS MATCHING RELATED INFORMATION}
본 발명은 사용자가 원하는 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 장치 및 방법에 관한 것으로, 보다 상세하게는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하여 증강 현실로 표시하는 증강 현실 표시 장치 및 방법에 관한 것이다.
이동 단말기의 대중화와 고성능화에 따라 이동 단말기를 소지한 사용자의 위치에 따른 지리 정보를 제공하는 서비스가 개발되었다.
한국공개특허 제10-2007-0101548호(공개일 2007년 10월 17일)에는 사용자의 요청에 따라 사용자의 위치에 특화된 정보를 제공하는 장치가 개시되어 있다. 종래의 지리 정보 제공 장치는 사용자의 요구에 따라 사용자의 위치에 대응하는 지리 정보를 제공하고 있으나, 날씨와 같은 정보나 특정 POI와 관련된 정보를 검색하기 위해서는 각기 다른 프로그램을 실행해야 하는 불편함이 있었다.
또한, 날씨와 같은 정보나 특정 POI와 관련된 정보 및 지리 정보가 각기 다른 프로그램으로 검색하므로, 지리 정보에 대응하는 날씨 라던지 POI의 지리 정보와 같은 정보를 수집하려면 다른 프로그램의 검색 결과를 사용자가 입력해야 하는 불편함이 있었다.
따라서, 하나의 프로그램이나 장치에서 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 방법이 요청되고 있다.
본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있는 장치 및 방법을 제공한다.
또한, 본 발명은 POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있는 장치 및 방법을 제공한다.
그리고, 본 발명은 POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입하는 장치 및 방법을 제공한다.
본 발명의 일실시예에 따른 증강 현실 표시 장치는 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 정보 결정부; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 증강 현실 표시부를 포함할 수 있다.
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다.
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는 카메라가 촬영한 영상에 POI와 관련된 정보와 POI의 위치 정보를 태깅할 수 있다.
본 발명의 일실시예에 따른 증강 현실 표시 장치는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하여 커뮤니티에 등록하는 문서 등록부를 더 포함할 수 있다.
본 발명의 일실시예에 따른 증강 현실 표시 장치의 정보 결정부는, 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다.
본 발명의 일실시예에 따른 증강 현실 표시 방법은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하는 단계; 및 결정한 정보를 카메라가 촬영한 영상에 증강 현실로 표시하는 단계를 포함할 수 있다.
본 발명의 일실시예에 의하면, 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다.
또한, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 POI의 관련 정보를 연관하여 인지할 수 있다.
그리고, 본 발명의 일실시예에 의하면, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.
도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치와 다른 장치 간의 관계를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치를 도시한 블록 다이어그램이다.
도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.
도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.
도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.
도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.
도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 본 발명의 일실시예에 따른 증강 현실 표시 방법은 증강 현실 표시 장치에 의해 수행될 수 있다. 이때, 증강 현실 표시 장치는 영상을 촬영하기 위한 카메라와 정보를 수집하기 위한 네트워크 접속 기능을 포함하는 이동 단말기일 수 있다. 예를 들어 증강 현실 표시 장치는 증강 현실 표시 어플리케이션이 설치된 스마트 폰이나 디지털 카메라 피처폰 중 하나일 수 있다.
도 1은 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)와 다른 장치 간의 관계를 나타내는 도면이다.
본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)의 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자가 원하는 정보를 결정하여 증강 현실로 표시할 수 있다.
예를 들어 증강 현실 표시 장치(100)는 도 1에 도시된 바와 같이 POI(point of interest)(110)를 촬영하는 경우, POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 촬영한 영상에 포함된 POI와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다.
이때, POI와 관련된 정보는 POI의 위치 정보, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서 중 적어도 하나를 포함할 수 있다. 이때, POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 POI와 관련하여 등록한 문서는 관련 기관에서 인증 받은 정보인지 여부를 표시함으로써 사용자가 정보의 신뢰도를 판단하는데 도움이 되도록 할 수 잇다.
증강 현실 표시 장치(100)는 POI(point of interest)(110)이 외에 석가탑과 같은 문화제나 물품을 촬영하는 경우에도 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다.
증강 현실 표시 장치(100)가 POI를 촬영하는 경우의 동작 과정은 이하 도 3을 참조하여 상세히 설명한다.
이때, 증강 현실 표시 장치(100)는 POI와 관련된 정보를 영상을 촬영한 시점에서 증강 현실 표시 장치(100)의 위치 정보와 함께 촬영한 영상에 태깅함으로써, 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, POI와 관련된 정보와 POI의 위치를 용이하게 인식하도록 할 수 있다.
구체적으로, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다.
즉, 증강 현실 표시 장치(100)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 문서에 필요한 정보들을 자동으로 추가함으로써 사용자가 문서를 용이하게 작성하도록 할 수 있다.
그리고, 증강 현실 표시 장치(100)는 카메라가 지면을 촬영하는 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다.
증강 현실 표시 장치(100)가 지면을 촬영하는 경우의 동작 과정은 이하 도 5를 참조하여 상세히 설명한다.
또한, 증강 현실 표시 장치(100)는 카메라가 하늘을 촬영하는 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다. 이때, 날씨와 관련된 정보는 해당 지역의 현재 날씨와 일정 기간의 일기 예보 중 적어도 하나를 포함할 수 있다.
증강 현실 표시 장치(100)가 하늘을 촬영하는 경우의 동작 과정은 이하 도 4를 참조하여 상세히 설명한다.
증강 현실 표시 장치(100)의 상세 구성은 이하 도 2를 참조하여 상세히 설명한다.
도 2는 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)를 도시한 블록 다이어그램이다.
도 2을 참고하면, 본 발명의 일실시예에 따른 증강 현실 표시 장치(100)는 카메라(210), 정보 결정부(220), 위치 추적부(230), 경로 생성부(240), 문서 등록부(250), 및 증강 현실 표시부(260)를 포함할 수 있다.
카메라(210)는 카메라의 렌즈가 향한 방향을 촬영하여 영상을 생성할 수 있다. 이때, 카메라(210)는 촬영한 영상을 정보 결정부(220)에 전송할 수 있다.
정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정할 수 있다.
이때, 정보 결정부(220)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 포함된 POI와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 POI 정보 서버(120)에서 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보를 수집할 수 있다. 또한, 정보 결정부(220)는 카메라(210)가 촬영한 영상에 포함된 POI와 관련된 정보와 POI의 위치 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다.
또한, 정보 결정부(220)는 사용자가 입력한 검색어와 관련된 정보를 검색하여 사용자에게 제공할 수 있다. 예를 들어 사용자가 맛 집을 검색하는 경우, 맛 집과 관련된 POI들을 검색하여 사용자에게 제공하고, 사용자가 제공받은 POI 중 하나를 선택하는 경우 해당 POI를 저장할 수 있다.
그리고, 정보 결정부(220)는 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다. 이때, 정보 결정부(220)는 저장한 POI가 있는 경우, 날씨 정보 서버(140)로부터 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다. 또한, 저장한 POI가 없거나 사용자가 원하지 않는 경우, 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하여 사용자에게 제공할 수 있다.
위치 추적부(230)는 GPS나 Wi-Fi와 같은 수단으로 증강 현실 표시 장치(100)의 위치를 추적하여 증강 현실 표시 장치(100)의 위치 정보를 생성할 수 있다.
이때, 정보 결정부(220)는 카메라가 지면을 촬영하는 경우, 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보나 POI와 관련된 정보에 포함된 POI의 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다.
경로 생성부(240)는 위치 추적부(230)가 생성한 증강 현실 표시 장치의 위치 정보에서 POI의 위치 정보로 이동하는 경로를 생성할 수 있다.
문서 등록부(250)는 사용자로부터 커뮤니티용 문서 생성 요청을 수신하는 경우, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 등록할 수 있다.
구체적으로, 문서 등록부(250)는 사용자가 POI(110)와 관련된 문서를 작성하고자 할 경우, 사용자가 입력한 감상이나 평가에 POI와 관련된 정보와 POI의 위치 정보를 자동으로 추가하여 커뮤니티용 문서를 생성하고, 생성한 커뮤니티용 문서를 커뮤니티 서버(130)에 업로드 할 수 있다.
증강 현실 표시부(260)는 정보 결정부(220)가 결정한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다.
이때, 증강 현실 표시부(260)는 카메라의 방향이 POI(Point of Interest)를 향하는 경우, 카메라가 촬영한 영상에 POI와 관련된 정보를 증강 현실로 표시할 수 있다.
또한, 증강 현실 표시부(260)는 카메라의 방향이 지면을 향하는 경우, 지도를 표시하고, 지도상에 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 표시할 수 있다. 이때, 증강 현실 표시부(260)는 지도상에 표시된 POI(110)의 위치에 POI와 관련된 정보를 더 표시할 수 있다.
도 3은 본 발명의 일실시예에 따른 증강 현실 표시 장치의 동작 일례이다.
도 3은 카메라(210)가 POI(point of interest)(110)를 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.
증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 카메라(210)가 POI(110)를 촬영하여 POI가 포함된 영상(310)을 생성하는 경우, 영상에 포함된 POI(311)와 관련된 정보를 사용자에게 제공할 정보로 결정할 수 있다.
이때, 증강 현실 표시 장치(100)는 POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 추가하여 표시할 수 있다.
이때, 증강 현실 표시 장치(100)는 도 3에 도시된 바와 같이 영상(310)에 POI와 관련된 정보(320)를 증강 현실로 표시할 수 있다.
도 4는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 다른 동작 일례이다.
도 4는 카메라(210)가 카메라가 하늘을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.
증강 현실 표시 장치(100)는 도 4에 도시된 바와 같이 카메라(210)가 하늘을 촬영하는 경우 카메라의 방향에 따라 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다.
이때, 증강 현실 표시 장치(100)는 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집하여 표시할 수 있다.
이때, 증강 현실 표시 장치(100)는 디폴트로 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집하고, 사용자가 저장한 POI가 있는 경우, 저장한 POI가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다. 이때, 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)의 일부에 POI를 선택할 수 있는 입력창(411)를 표시함으로써 사용자가 저장한 POI 중 하나를 선택하도록 할 수 있다. 사용자가 입력창(411)를 없음으로 선택한 경우, 증강 현실 표시 장치(100)는 증강 현실 표시 장치(100)가 있는 지역의 날씨와 관련된 정보를 수집할 수 있다.
다음으로 증강 현실 표시 장치(100)는 하늘을 촬영한 영상(410)을 날씨와 관련된 정보(412)로 변경하여 표시할 수 있다. 또한, 하늘을 촬영한 영상(410)에 날씨와 관련된 정보(412)를 증강 현실로 표시할 수도 있다.
도 5는 본 발명의 일실시예에 따른 증강 현실 표시 장치의 또 다른 동작 일례이다.
도 5는 카메라(210)가 카메라가 지면을 촬영하는 경우, 증강 현실 표시 장치(100)의 동작 일례이다.
증강 현실 표시 장치(100)는 도 5에 도시된 바와 같이 카메라(210)가 지면을 촬영하는 경우 카메라의 방향에 따라 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다.
이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치와 증강 현실 표시 장치(100)의 위치 중 적어도 하나를 표시함으로써, 사용자가 POI(110)나 자신의 위치를 인식하도록 할 수 있다. 이때, 증강 현실 표시 장치(100)는 지도 상에 POI(110)의 위치를 표시하는 경우 POI와 관련된 정보를 더 표시할 수도 있다.
이때, 증강 현실 표시 장치(100)는 지면을 촬영한 영상(510)을 지도(520)으로 변경하고, 지도 상에 증강 현실 표시 장치(100)의 위치(521)과 POI(110)의 위치(522)를 표시할 수 있다. 또한, 사용자의 선택에 따라 증강 현실 표시 장치(100)의 위치(521)에서 POI(110)의 위치(522)로 이동하는 경로를 표시하고 안내할 수도 있다.
도 6은 본 발명의 일실시예에 따른 증강 현실 표시 방법을 도시한 플로우차트이다.
단계(S610)에서 정보 결정부(220)는 카메라(210)의 방향과 카메라(210)가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정하고, 해당 정보를 수집할 수 있다. 정보를 결정하고 수집하는 과정은 이하 도 7을 참조하여 상세히 설명한다.
단계(S620)에서 증강 현실 표시부(260)는 단계(S610)에서 수집한 정보를 카메라(210)가 촬영한 영상에 증강 현실로 표시할 수 있다.
단계(S630)에서 정보 결정부(220)는 단계(S620)에서 표시한 정보를 카메라(210)가 촬영한 영상에 태깅할 수 있다. 예를 들어 정보 결정부(220)는 POI(110)와 관련된 정보를 POI(110)를 촬영한 영상에 POI(110)의 위치 정보와 함께 태깅하고, 하늘을 촬영한 영상에 하늘을 촬영한 장소의 위치 정보와 날씨 정보를 태깅하여 저장할 수 있다. 또한, 정보 결정부(220)는 지면을 촬영한 영상은 지도로 변경하고, 지도에 표시한 증강 현실 표시 장치(100)의 위치와 POI(110)의 위치 및 경로 생성부(240)가 생성한 경로 중 적어도 하나를 태깅할 수 있다.
단계(S640)에서 문서 등록부(250)는 사용자가 생성하는 커뮤니티용 문서에 카메라(210)가 촬영한 영상과 단계(S630)에서 태깅된 정보를 자동 삽입하고, 사용자가 텍스트로 입력한 감상이나 평가를 추가함으로써 커뮤니티용 문서를 완성하여 커뮤니티 서버(130)에 업로드 할 수 있다.
도 7은 본 발명의 일실시예에 따른 증강 현실 표시 방법의 정보 결정 과정을 도시한 플로우차트이다. 이때, 단계(S710) 내지 단계(S750)은 앞서 설명한 도 6의 단계(S610)에 포함될 수 있다.
단계(S710)에서 정보 결정부(220)는 카메라(210)의 방향이 하늘인지 여부를 판단하고, 하늘인 경우, 날씨 정보를 사용자에게 제공할 정보로 결정할 수 있다.
단계(S720)에서 정보 결정부(220)는 단계(S710)의 결정에 따라 날씨 정보 서버(140)로부터 날씨와 관련된 정보를 수집할 수 있다.
단계(S730)에서 정보 결정부(220)는 카메라(210)의 방향이 지면인지 여부를 판단하고, 지면인 경우, 위치 정보를 사용자에게 제공할 정보로 결정할 수 있다.
단계(S740)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 위치 추적부(230)가 생성한 증강 현실 표시 장치(100)의 위치 정보를 수집하거나, POI 정보 서버(120)로부터 영상(310)에 포함된 POI(311)와 관련된 정보를 수집하고, 수집한 정보에서 POI의 위치 정보를 추출할 수 있다.
단계(S750)에서 정보 결정부(220)는 단계(S730)의 결정에 따라 카메라(210)의 방향이 지면이나 하늘이 아닌 것이 확인된 경우, POI 정보 서버(120)로부터 카메라가 촬영한 영상에 포함된 POI(311)와 관련된 정보를 수집할 수 있다.
상기에서 하늘과 지면을 제외하고 사용자가 원하는 대상을 촬영한 경우를 POI로 기재하였으나 POI이외에도 사용자가 촬영한 영상에 포함된 오브젝트는 모두 관련된 정보를 수집하는 대상이 될 수 있다. 예를 들어 석가탑과 같은 문화제나 차량과 같은 물품이 영상에 포함된 경우, 증강 현실 표시 장치는 해당 문화제나 물품과 관련된 정보를 수집하고, 수집한 정보를 촬영한 영상에 증강 현실로 표시할 수 있다.
본 발명은 카메라의 방향과 카메라가 촬영한 영상을 기초로 사용자에게 제공할 정보를 결정함으로써, 별다른 조작이나 선택 없이 사용자가 원하는 다양한 정보를 제공할 수 있다. 예를 들어 증강 현실 표시 장치의 방향을 하늘, POI, 지면으로 바꾸는 것만으로 날씨 정보, POI 관련 정보, 위치 정보에서 사용자가 원하는 정보를 수집하여 제공할 수 있다.
또한, POI와 관련된 정보를 POI가 포함된 영상에 증강 현실로 표시함으로써, 사용자가 실제 POI와 관련 정보를 연관하여 인지할 수 있다.
그리고, POI와 관련된 정보를 영상과 함께 태깅하고, 사용자가 해당 POI와 관련된 문서를 작성할 경우, 정보와 영상을 자동으로 문서에 삽입함으로써, 사용자가 관련 문서를 용이하게 작성하도록 할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100: 증강 현실 표시 장치
210: 카메라
220: 정보 결정부
250: 문서 등록부
260: 증강 현실 표시부

Claims (19)

  1. 증강 현실 표시 장치에 있어서,
    카메라에 포함된 렌즈가 향하는 방향에 기초하여 상기 카메라의 방향이 결정되며,
    상기 카메라의 방향이 지도 상에 포함된 관심 지점(POI: Point of Interest)을 향하는 경우, 상기 POI와 관련된 정보를 사용자에게 제공할 정보로 결정하고, 상기 카메라의 방향이 하늘을 향하는 경우, 날씨와 관련된 정보를 상기 사용자에게 제공할 정보로 결정하며, 상기 카메라의 방향이 지면을 향하는 경우, 위치 정보를 상기 사용자에게 제공할 정보로 결정하는 정보 결정부; 및
    증강 현실 방법을 이용하여 결정한 정보를 상기 카메라가 촬영한 영상에 표시하는 증강 현실 표시부
    를 포함하고,
    상기 POI와 관련된 정보는 상기 POI의 위치 정보, 상기 POI의 소유주가 등록한 광고 정보 및 커뮤니티에서 상기 POI와 관련하여 등록한 문서 중 적어도 하나를 포함하고,
    상기 카메라의 방향이 하늘을 향하는 경우, 상기 하늘을 촬영한 영상의 일부에 POI를 선택할 수 있는 입력창이 표시되고, 상기 사용자가 표시된 POI를 선택한 경우에 선택된 POI가 있는 지역의 날씨와 관련된 정보가 표시되며, 상기 사용자가 표시된 POI를 선택하지 않는 경우, 상기 증강 현실 표시 장치가 있는 지역의 날씨와 관련된 정보가 표시되는 증강 현실 표시 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 정보 결정부는,
    카메라가 촬영한 영상에 POI 정보 서버로부터 수집된 POI와 관련된 정보와 POI의 위치 정보를 디스플레이하는 것을 특징으로 하는 증강 현실 표시 장치.
  4. 삭제
  5. 제1항에 있어서,
    커뮤니티용 문서의 생성 요청을 수신하는 경우, 사용자로부터 텍스트를 입력 받고, 사용자가 입력한 텍스트에 POI와 관련된 정보와 POI의 위치 정보를 추가하여 커뮤니티용 문서를 생성하고, 커뮤니티에 등록하는 문서 등록부
    를 더 포함하는 증강 현실 표시 장치.
  6. 제1항에 있어서,
    증강 현실 표시 장치의 위치를 추적하여, 상기 증강 현실 표시부로 상기 추적된 위치에 대한 정보를 제공하는 위치 추적부를 더 포함하는 것을 특징으로 하는 증강 현실 표시 장치.
  7. 제6항에 있어서,
    상기 정보 표시부는,
    지도를 표시하고, 지도에서 POI가 존재하는 위치에 POI와 관련된 정보를 표시하는 것을 특징으로 하는 증강 현실 표시 장치.
  8. 제6항에 있어서,
    상기 위치 추적부가 상기 증강 현실 표지 장치의 위치를 추적하면, 상기 증강 현실 표시 장치의 위치에서 POI가 존재하는 위치로 이동하는 경로를 생성하는 경로 생성부를 더 포함하는 증강 현실 표시 장치.
  9. 삭제
  10. 제1항에 있어서,
    상기 증강 현실 표시부는
    사용자가 입력한 검색어와 관련된 정보를 검색하고, 검색된 정보를 표시하는 것을 특징으로 하는 증강 현실 표시 장치.
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
KR1020110114330A 2011-11-04 2011-11-04 증강 현실 표시 장치 및 방법 KR101397873B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110114330A KR101397873B1 (ko) 2011-11-04 2011-11-04 증강 현실 표시 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110114330A KR101397873B1 (ko) 2011-11-04 2011-11-04 증강 현실 표시 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130049351A KR20130049351A (ko) 2013-05-14
KR101397873B1 true KR101397873B1 (ko) 2014-07-01

Family

ID=48660116

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110114330A KR101397873B1 (ko) 2011-11-04 2011-11-04 증강 현실 표시 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101397873B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102214338B1 (ko) 2020-05-25 2021-02-10 조광희 증강현실 표시를 위한 전자 장치의 제어 방법, 장치 및 프로그램
WO2021172970A3 (ko) * 2020-02-28 2021-10-21 유상규 위치정보저장이 가능한 휴대용기기카메라기능, 이를 활용한 주소전송방법과 네이비게이션설정 및 컨텐츠제공방법
KR20220111821A (ko) 2021-02-02 2022-08-10 한국부라스 주식회사 증강현실 기반 전자 장치의 제어 방법

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9876951B2 (en) 2015-09-25 2018-01-23 International Business Machines Corporation Image subject and composition demand
KR102583243B1 (ko) * 2015-10-08 2023-09-27 한국과학기술원 모바일 디바이스를 이용한 증강 현실 기반 가이드 방법
US11619745B2 (en) * 2019-10-29 2023-04-04 Qualcomm Incorporated Camera-based GNSS environment detector
KR102303761B1 (ko) * 2021-03-02 2021-09-16 엄태호 증강현실 기반 사진 앨범 제공 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100982768B1 (ko) * 2009-09-21 2010-09-20 (주)올라웍스 단말기의 각도에 따라 서로 다른 영상 정보를 제공하기 위한 방법, 단말기 및 컴퓨터 판독 가능한 기록 매체
KR20110012524A (ko) * 2009-07-30 2011-02-09 에스케이 텔레콤주식회사 사용자 선택 지역에 의한 증강 현실을 제공하는 방법과 그를 위한 서버 및 휴대용 단말기

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110012524A (ko) * 2009-07-30 2011-02-09 에스케이 텔레콤주식회사 사용자 선택 지역에 의한 증강 현실을 제공하는 방법과 그를 위한 서버 및 휴대용 단말기
KR100982768B1 (ko) * 2009-09-21 2010-09-20 (주)올라웍스 단말기의 각도에 따라 서로 다른 영상 정보를 제공하기 위한 방법, 단말기 및 컴퓨터 판독 가능한 기록 매체

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021172970A3 (ko) * 2020-02-28 2021-10-21 유상규 위치정보저장이 가능한 휴대용기기카메라기능, 이를 활용한 주소전송방법과 네이비게이션설정 및 컨텐츠제공방법
KR102214338B1 (ko) 2020-05-25 2021-02-10 조광희 증강현실 표시를 위한 전자 장치의 제어 방법, 장치 및 프로그램
KR20220111821A (ko) 2021-02-02 2022-08-10 한국부라스 주식회사 증강현실 기반 전자 장치의 제어 방법

Also Published As

Publication number Publication date
KR20130049351A (ko) 2013-05-14

Similar Documents

Publication Publication Date Title
KR101397873B1 (ko) 증강 현실 표시 장치 및 방법
US10578452B2 (en) Method and apparatus for providing service using a sensor and image recognition in a portable terminal
US9874454B2 (en) Community-based data for mapping systems
CN112565552B (zh) 摄影装置、信息取得系统、记录媒体及服务器
US8483715B2 (en) Computer based location identification using images
US9497581B2 (en) Incident reporting
US8315438B2 (en) Displaying images related to a selected target point on an electronic map based on azimuth and view angle information
US20180188033A1 (en) Navigation method and device
JP2011055250A (ja) 情報提供方法及び装置、情報表示方法及び携帯端末、プログラム、並びに情報提供システム
US8254727B2 (en) Method and apparatus for providing picture file
JP2010509668A (ja) デジタル画像により取得されたオブジェクトを識別する方法及び装置
US20100284566A1 (en) Picture data management apparatus and picture data management method
US20100277365A1 (en) Mobile terminal to provide location management using multimedia data and method thereof
TW201140427A (en) Using a display to select a target object for communication
US20150187139A1 (en) Apparatus and method of providing augmented reality
CN102985901A (zh) 用于为移动设备上基于位置的服务渲染对象的立体图及与其相关的内容的方法和装置
KR20140130499A (ko) 포지셔닝을 위한 시각적 ocr
KR20100124947A (ko) 증강현실을 이용하여 휴대형 단말기에 실시간 지역정보를 제공하는 ａｒ컨텐츠 제공시스템 및 그 제공방법
WO2005124594A1 (en) Automatic, real-time, superimposed labeling of points and objects of interest within a view
US8687853B2 (en) Method, system and computer-readable recording medium for providing service using electronic map
CN104298678B (zh) 在电子地图上搜索兴趣点的方法、系统、装置和服务器
EP1978734A2 (en) Apparatus and method for searching for a television program
JP2006285546A (ja) 情報提供システム、データベースサーバー、及び携帯通信端末
JP2006112981A (ja) 情報処理装置
KR20120069489A (ko) 화면 영상 내의 목표점 측정 장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170223

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180406

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190408

Year of fee payment: 6