KR20220088262A - Ar 및 vr 영상을 이용한 관광지 가이드 방법, 장치 및 이를 위한 시스템 - Google Patents

Abstract

본 발명의 일 실시예에 따른 AR(Augmented Reality) 및 VR(Virtual Reality) 영상 중 적어도 하나를 이용한 관광지 가이드 방법에 있어서, 이미지를 획득하는 단계; 상기 획득한 이미지 중 기설정된 관광지 이미지를 마커로서 인식하는 단계; 상기 인식된 마커와 매칭되는 마커 영상을 로딩하는 단계; 및 상기 로딩한 마커 영상을 상기 인식한 마커에 대응하여 디스플레이하는 단계; 를 포함하되, 상기 마커 영상은 상기 관광지를 가이드하기 위해 사전 제작된 AR 및 VR 영상 중 적어도 하나일 수 있다.

Description

AR 및 VR 영상을 이용한 관광지 가이드 방법, 장치 및 이를 위한 시스템{Tourist attraction guide method and apparatus using AR and VR images, and system therefor}

본 명세서는 AR 및 VR 영상 중 적어도 하나를 이용한 관광지 가이드 방법, 장치 및 이를 위한 시스템을 제안한다.

증강현실(Augmented Reality)은 현실세계에 컴퓨터 그래픽(CG)으로 제작한 가상의 객체(object)를 합성하는 기술이다. 카메라를 통해 주변 환경을 이미지 형태의 데이터로 취득하고, 이미지를 인식하거나 GPS(Global Positioning System)를 사용하여 실제 위치정보를 측위한 뒤, 이미지 위에 객체를 입히고 별도의 디스플레이를 통해 구현 결과를 보여주게 된다.

현재 AR 기술은 박물관이나 전시관 등 실내 공간이나 관광지 등 실외 공간에서 다양한 형태로 활용되고 있다.

최근에는 카메라와 디스플레이, 위치를 측위할 수 있는 GPS 센서, 자세와 각도를 인식해주는 자이로스코프나 가속도 센서 등이 내장되어 있는 모바일 기기는 AR 기술을 효과적으로 구현할 수 있는 도구이고, 기기의 성능은 나날이 높아져가고 있다.

한편, 유적지 등의 관광지는 현실의 공간과 과거의 사건이 결합되어, 관람객에게 더 큰 의미와 감동을 주는 특징이 있다. 이에 유적지에는 해당 장소에서 발생된 과거의 역사적 사실 등을 다양한 정보 제공 수단으로 통해 제공하여 관람객의 흥미와 재미를 유발해왔다.

정보 제공 수단으로는 전통적으로 안내판, 소책자 등이 사용되어 왔으나, 점차 영상을 이용한 출력 콘텐츠를 생성하여 압축적인 방법으로 이용자에게 정보를 제공하고 있다.

그러나 최근에는 다양한 전자 수단의 발달로 인하여, 역사적 사실을 가상현실로 구성하고, 이에 따라 가상공간에서 사용자가 역사적 사실을 체험할 수 있도록 하는 기술이 개발되고 있으며, 대한민국 공개특허 제10-2019-0036864호와 같이, 전망대나 유적지에 많이 설치되는 망원경 형태의 설치물을 이용하여, 사용자에게 해당 유적의 가상 현실 공간을 제공하는 기술이 개시되어 있다.

그러나 이와 같은 종래 기술에서는 단순히 사전 제작된 VR 영상만이 제공됨으로써, 관광객 입장에선 관광지가 아닌 다른 공간에서 VR 영상을 관람하는 것과 별다른 차이가 없어, 관광지의 현장감, 분위기를 관광객이 충분히 만끽하지 못할 뿐 아니라, 오히려 방해 받을 수 있다는 문제점이 있었다.

또한, 관광지 소개를 위한 AR 및 VR 영상은 제한적인 언어로만 제공되므로, 외국인 관광객은 관광지 소개 영상을 이를 충분히 즐길 수 없게 된다는 문제점이 있었다.

이외에도, 개인 또는 소그룹 단위의 외국인 관광객은 비용이 비싼 관광 가이드를 고용할 수 없어 관광지에 대한 설명을 충분히 제공받을 수 없다는 문제점이 있으며, 관광지의 경우 통신 시스템에 완비되어 있지 못한 경우가 많아 어플리케이션 서버로부터 실시간으로 수신되는 관광지 소개 영상의 버퍼링/지연으로 인해, 오히려 관광 영상이 관광 방해 요소로 작용할 수 있다는 문제점 등이 존재하였다.

이러한 문제점을 해결하기 위해, 본 명세서의 일 실시예에 따른 AR(Augmented Reality) 및 VR(Virtual Reality) 영상 중 적어도 하나를 이용한 관광지 가이드 방법에 있어서, 이미지를 획득하는 단계; 상기 획득한 이미지 중 기설정된 관광지 이미지를 마커로서 인식하는 단계; 상기 인식된 마커와 매칭되는 마커 영상을 로딩하는 단계; 및 상기 로딩한 마커 영상을 상기 인식한 마커에 대응하여 디스플레이하는 단계; 를 포함하되, 상기 마커 영상은 상기 관광지를 가이드하기 위해 사전 제작된 AR 및 VR 영상 중 적어도 하나일 수 있다.

본 발명의 일 실시예에 따르면, 사용자의 선택에 따라 현장감을 살린 AR 형태의 관광지 영상의 제공이 가능하므로, 관광지의 현장감, 분위기를 만끽함과 동시에 관광지 영상을 관람할 수 있다는 효과가 있다.

또한, 본 발명의 일 실시예에 따르면, 다양한 언어를 구사할 수 있는 관광 가이드 목록을 제공하므로, 사용자가 외국인 관광객인 경우 자신의 사용 언어와 매칭되는 관광 가이드를 선택함으로써 보다 편리하게 관광지를 관광할 수 있다는 효과가 있다.

또한, 본 발명의 일 실시예에 따르면, 관광 가이드가 직접 동행하는 것이 아니므로, 사용자는 직접 동행하는 관광 가이드에 비해 비교적 저렴한 비용으로 관광 가이드를 고용할 수 있다는 효과가 있다.

또한, 본 발명의 일 실시예에 따르면, 사용자의 위치 및 현재 인식된 마커의 위치 등을 기초로 다음에 인식될 예정인 마커에 대한 마커 영상을 미리 다운받으므로, 통신 장애로 인한 버퍼링/지연이 최소화된다는 효과가 있다.

본 발명의 효과는 이에 제한되지 않으며, 이외의 다양한 효과는 이하에서 각 실시예를 참조하여 상세히 후술하기로 한다.

도 1은 본 발명의 일 실시예에 따른 사용자 장치의 관광 가이드 모드를 예시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 AR 모드에서의 사용자 장치 화면을 예시한 도면이다.
도 3 및 도 4는 본 발명의 일 실시예에 따른 사용자 장치의 마커 영상 로딩 실시예를 예시한 도면이다.
도 5는 본 발명의 일 실시예에 따른 가상 스탬프 수집 실시예를 예시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 가상 관광 가이드 제공 실시예를 예시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 관광 가이드 인터페이스를 이용한 관광 가이드 방법을 예시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 마커 설정 방법을 예시한 도면이다.
도 9는 본 발명의 일 실시예에 따른 마커 인식 인디케이터를 사용한 마커 인식 실시예를 예시한 도면이다.
도 10은 본 발명의 일 실시예에 따른 타사용자 초대 기능을 예시한 도면이다.
도 11은 본 발명의 일 실시예에 따른 관광 가이드 시스템도이다.
도 12는 본 발명의 일 실시예에 따른 사용자 장치의 블록도이다.

이하 설명하는 기술은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 이하 설명하는 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 이하 설명하는 기술의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 해당 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 단지 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 이하 설명하는 기술의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다. 예를 들어, 'A 및/또는 B'는 'A 또는 B 중 적어도 하나'의 의미로 해석될 수 있다. 또한, '/'는 '및' 또는 '또는'으로 해석될 수 있다.

본 명세서에서 사용되는 용어에서 단수의 표현은 문맥상 명백하게 다르게 해석되지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함한다" 등의 용어는 설시된 특징, 개수, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 의미하는 것이지, 하나 또는 그 이상의 다른 특징들이나 개수, 단계 동작 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하지 않는 것으로 이해되어야 한다.

도면에 대한 상세한 설명을 하기에 앞서, 본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능 별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다.

또, 방법 또는 동작 방법을 수행함에 있어서, 상기 방법을 이루는 각 과정들은 문맥상 명백하게 특정 순서를 기재하지 않은 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 과정들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.

또한, 본 명세서에서 '로딩 또는 다운로딩'은 '수신 또는 송수신'으로 대체되어 설명될 수 있다.

본 명세서에서 제안하는 관광 가이드 장치는, 본 명세서에서 제안되는 관광 가이드 방법/실시예를 수행/실행 가능하도록 구현된 어플리케이션/프로그램이 사전에 설치되어 실행 중인 전자 서버/기기/장치에 해당할 수 있다. 따라서, 이하에서 별도로 설명하지 않더라도, 본 명세서에서 제안되는 방법/실시예는 상기 어플리케이션/프로그램이 실행 중인 서버/기기/장치를 통해 수행/실행되는 것으로 해석될 수 있으며, 각 서버/기기/장치의 동작은 상기 어플리케이션/프로그램의 동작/기능으로 해석될 수 있다. 이하에서는 설명의 편의를 위해, 상기 어플리케이션/프로그램이 설치된 사용자의 단말인 '사용자 장치'를 중심으로 설명하나, '사용자 장치'는 '어플리케이션' 또는 상기 어플리케이션/프로그램을 운영/관리/제어하는 '어플리케이션 서버'로 대체되어 설명될 수 있다.

도 1은 본 발명의 일 실시예에 따른 사용자 장치의 관광 가이드 모드를 예시한 도면이다.

도 1을 참조하면, 본 명세서에서 제안되는 관광 가이드 방법에는, AR(Augmented Reality) 모드(110), VR(Virtual Reality) 모드(120) 및 MR(Mixed Reality) 모드(130) 이렇게 크게 3가지 모드가 존재한다.

AR 모드(110)는, 현실의 이미지나 배경을 기초로 AR 영상을 오버랩하여 하나의 영상으로 디스플레이하는 모드를 의미한다. VR 모드(120)는, 사용자가 가상의 세계를 실제와 같이 체험할 수 있도록 제작된 VR 영상이 디스플레이되는 모드를 의미한다. MR 모드(130)는 이러한 AR 모드(110) 및 VR 모드(120)가 결합된 형태의 모드(예를 들어, 전체 이미지에서 특정 부분은 VR 모드(120) 적용, 나머지 부분은 AR 모드(110) 적용 등)를 의미한다.

AR 모드(110)에서 사용자 장치는, 카메라 유닛을 이용하여 획득한 이미지 내에서 (AR) 마커를 인식할 수 있으며, 인식한 마커와 매칭되는/대응되는 마커 영상을 로딩하여 인식된 마커에 대응하여 디스플레이할 수 있다. VR 모드(120)에서 사용자 장치는, 기설정된 VR 영상을 로딩하여 디스플레이할 수 있다. 이때, VR 영상은 360도의 화각으로 촬영된/제작된 VR 영상에 해당할 수 있으며, 사용자 장치는 전체 360도 VR 영상 중 정면 방향(또는 사용자의 시선 방향)의 VR 영상을 선택적으로 디스플레이함으로써 실제 사용자가 체험하는 것과 같은 현실감을 제공할 수 있다.

AR/VR/MR 모드(110~130)는 사용자에 의해 직접 선택되거나 실시예에 따라 자동으로 선택/전환될 수 있으며, 사용자 장치는 적용 모드에 따라 AR 및/또는 VR 영상을 디스플레이할 수 있다. 이때, 디스플레이되는 AR 및/또는 VR 영상은, 관광 가이드를 위해 사전 제작되어 어플리케이션 서버에 저장된 관광 가이드 영상에 해당할 수 있다. 특히, AR 영상은, 각 AR 영상의 디스플레이를 트리거링하는 마커에 대한 정보와 매칭되어 사용자 장치 및/또는 어플리케이션 서버에 저장되어 있을 수 있으며, 사용자 장치가 인식된 마커와 매칭되는 마커 영상을 어플리케이션 서버에 요청할 수 있다. 이에 대한 상세한 설명은 이하에서 각 도면을 참조하여 상세히 후술하기로 한다.

도 2는 본 발명의 일 실시예에 따른 AR 모드에서의 사용자 장치 화면을 예시한 도면이다.

도 2에 도시한 바와 같이, 사용자는 카메라 유닛을 이용하여 관광지(210)를 촬영할 수 있으며, 사용자 장치(230)는 촬영을 통해 이미지(240)를 (실시간으로) 획득할 수 있다. 사용자 장치(230)는 획득한 이미지(240)를 실시간으로 분석/인식하여 마커(220)로 사전 설정된 관광지 이미지를 인식할 수 있다. 이를 위해, 사용자 장치(230)는 이미지 인식 기술을 사용할 수 있으며, 획득한 이미지(240) 내에서 인식되는 관광지 이미지(220)를 사전에 마커로 설정된 관광지 이미지와 비교하고, 기설정된 비율 이상으로 이미지가 상호 매칭되는 마커를 해당 관광지 이미지(220)의 마커로 인식할 수 있다. 예를 들어, 본 도면에 예시한 바와 같이, 사용자 장치(230)는 카메라 유닛을 통해 불국사 촬영 이미지(240)를 획득할 수 있으며, 촬영 이미지(240) 내의 불국사 이미지(220)를 불국사 마커 이미지와 비교 분석하여 불국사 마커(220)를 인식할 수 있다. 이미지 인식 기술에는 이미지 빅데이터와 딥러닝 기술이(예를 들어, CNN(Convolutional Neural Network), RNN(Convolutional Neural Network) 등)이 사용될 수 있다.

나아가, 마커(220) 인식의 정확도 향상을 위해, 사용자 장치(230)는 GPS(Global Positioning System) 센서를 이용하여 사용자 장치(230)의 현재 위치 정보를 추가로 획득할 수 있다. 따라서, 만일 촬영된 이미지(240)의 화질이 낮거나 관광지 이미지(220)에 대응되는 마커가 복수 개 인식되는 경우, 사용자 장치(230)는 추가로 획득한 현재 위치 정보를 이용하여 마커(220)를 보다 정확하게 인식할 수 있다. 예를 들어, 사용자 장치(230)가 획득한 이미지로부터 제1 마커와 제2 마커가 동시에 인식되는 경우 현재 위치 정보를 추가 획득할 수 있으며, 현재 위치 정보와 매칭되는 마커를 최종 인식할 수 있다.

상술한 마커(220) 인식 실시예는 사용자 장치(230) 단독으로 수행될 수 있으나, 어플리케이션 서버와 협동하여 수행될 수도 있다. 후자의 경우, 예를 들어 사용자 장치(230)는 마커(220) 인식에 필요한 인식 정보(예를 들어, 획득한 이미지(240) 내의 관광지 이미지(220) 인식 정보, 현재 위치 정보 등)를 추출할 수 있으며, 추출된 인식 정보가 포함된 마커 인식 요청을 어플리케이션 서버에 전송할 수 있다. 어플리케이션 서버는 수신한 마커 인식 요청을 기초로 마커(220)를 인식하고, 인식 결과를 사용자 장치(230)로 전송해줄 수 있다.

사용자 장치(230)는 인식한 마커(220)와 매칭되는 마커 영상(250)을 로딩할 수 있다. 로딩 방식으로는, 사용자 장치(230)에 구비된 메모리 유닛으로부터 직접 로딩하거나, 어플리케이션 서버에 요청하여 다운로딩하는 방식 이렇게 크게 2가지가 있을 수 있다. 로딩 방식은 실시예에 따라 2가지 방식 중 어느 하나가 선택적으로 적용될 수 있는데, 이에 대해서는 도 3 및 4를 참조하여 이하에서 후술하기로 한다.

사용자 장치(230)는 로딩한 마커 영상(250)을 마커(220)에 대응하여 출력할 수 있다. 예를 들어, 본 도면에 예시한 바와 같이, 사용자 장치(230)는 인식된 불국사 마커(220)에 대응하는 불국사 설명 영상(250)을, 불국사 마커(220)의 우측 하단에 디스플레이할 수 있다.

도 3 및 도 4는 본 발명의 일 실시예에 따른 사용자 장치의 마커 영상 로딩 실시예를 예시한 도면이다.

관광지의 경우, 도심과 떨어져 있는 경우가 많고 보존을 위하여 개발이 최소화되어 통신 시스템이 제대로 갖춰져 있지 않은 경우가 대부분이다. 따라서, 어플리케이션 서버와의 통신을 전제로 한 본 명세서의 관광 가이드 방법이, 관광지에서는 제대로 실행되지 않는 경우가 발생할 수 있다. 이러한 문제점을 방지/해결하기 위해, 본 명세서에서는 아직 인식되지 않았더라도 사용자의 현재 위치에서 가까운 곳에 위치한 마커에 대한 마커 영상을 미리 로딩하는 동작을 수행함으로써 통신 장애로 인한 마커 영상의 버퍼링/지연을 최소화하는 방법에 대해 제안한다.

사용자 장치는 현재 인식되어 마커 영상을 디스플레이 중인 마커로부터 기설정된 거리 범위 내에 위치한 마커를 추출할 수 있다. 단, 추출되는 마커는 현재 획득한 이미지를 통해 인식되지 않은 마커로 제한될 수 있다. 본 실시예를 위한 전제 조건으로서, 사용자 장치는 각 마커별 (상대적) 위치 정보를 사전에 저장하고 있을 수 있다. 사용자 장치는 추출된 마커와 매칭되는 마커 영상을 어플리케이션 서버에 미리 요청하여 미리 다운로딩하여 기설정된 데이터 공간(예를 들어, 메모리 유닛)에 저장해둘 수 있다. 이렇듯 본 명세서에서 제안되는 사용자 장치는, 아직 인식되진 않았으나 사용자의 이동에 따라 곧 인식될 것으로 예측되는 마커를 미리 추출하고, 해당 마커에 대한 마커 영상을 미리 다운로딩함으로써, 통신 장애 및 사용자의 빠른 이동 등으로 마커 영상이 지연되거나 끊기는 현상을 방지할 수 있다. 이를 통해 심리스(seamless)한 관광 가이드 서비스를 제공할 수 있어 사용자의 만족도를 극대화할 수 있다는 효과가 발생한다.

마커 추출 시, 사용자 장치는 사용자의 이동 방향을 인식하여 이를 기초로 마커를 추출하기 위한 기준인 기설정된 거리 범위를 유동적으로 조절할 수도 있다.

예를 들어, 도 3에 도시한 바와 같이, 사용자의 이동 방향이 우측 방향으로 인식된 경우, 사용자 장치는 현재 인식된 마커(즉, 현재 마커 영상이 디스플레이 중인 마커, 도 2의 실시예의 경우 불국사 마커)(310)로부터 우측 방향에 제1 거리(d1) 내에 위치한 적어도 하나의 제1 마커(330)를 추출할 수 있다. 나아가, 사용자 장치는 현재 인식된 마커(310)로부터 우측 방향의 반대 방향인 좌측 방향에 제2 거리(d2) 내에 위치한 적어도 하나의 제2 마커(320)를 추출할 수 있는데, 이때 제2 거리(d2)는 제1 거리(d1)보다 짧은 거리로 설정될 수 있다. 이렇듯 사용자 장치는 기본적으로 사용자의 이동 방향에 위치한 마커(즉, 제1 마커(320))를 추출할 때 이동 방향에 위치하지 않은 마커(즉, 제2 마커(320))를 추출할 때보다 마커 추출 범위를 넓게 설정할 수 있다. 이는, 현재의 이동 방향으로 사용자가 계속 이동할 확률이 높기 때문에, 이동할 가능성이 높은 위치의 마커(330)를 최대한 추출하고 이동할 가능성이 낮은 위치의 마커(320)를 최소한 추출하는 것이, 데이터 소비/공간 측면에서 보다 유리하기 때문이다.

본 실시예에서는 사용자의 이동 방향의 반대 방향에 대해서만 예시하였으나 이에 한정되는 것은 아니며, 사용자의 이동 방향이 아닌 다양한 방향에 대해서 적어도 하나의 제2 마커(320)를 추출할 수 있다. 또한, 본 실시예에서는 사용자의 이동 경로만을 예시하였으나 이에 한정되는 것은 아니며, 관광지 추천 이동 경로 및/또는 사용자의 이동 속도를 기초로도 기설정된 거리 범위가 조절될 수 있다. 예를 들어, 관광지 추천 이동 경로 방향의 기설정된 거리 범위가 그렇지 않은 방향보다 더 길게 조절될 수 있으며, 사용자의 속도에 비례하여 사용자의 이동 방향의 기설정된 거리 범위가 그렇지 않은 방향보다 더 길게 조절될 수 있다.

너무 많은 마커를 미리 추출하여 마커 영상을 다운로딩하게 되면 오히려 사용자 장치의 오버헤드와 불필요한 데이터 소비를 증가시킬 수 있으므로, 추출하는 총 마커의 개수는 기설정된 개수로 제한될 수 있다. 이때 추출이 제한되는 마커는 제2 마커(320)로 설정될 수 있다.

사용자의 이동에 따라 인식되는 마커가 변경되게 되며, 그 결과 미리 추출하는 마커와 미리 다운로딩하는 마커 영상이 실시간으로 업데이트될 수 있다.

예를 들어, 도 4에 도시한 바와 같이, 사용자가 도 3의 상태에서 우측 방향으로 d' 만큼 이동한 경우를 가정해볼 수 있다. 이 경우, 사용자 장치는 사용자의 이동 거리인 d'를 인식할 수 있으며, d'만큼 이동한 위치로부터 기설정된 거리 범위 내에 위치한 마커를 추출할 수 있다. 추출한 마커 중 기설정된 데이터 공간에 미리 다운로딩된 마커 영상이 없는 새로운 마커(410)가 발견된 경우, 사용자 장치는 새로운 마커(410)와 매칭되는 마커 영상을 어플리케이션 서버에 미리 요청하여 다운로딩받을 수 있다. 반대로, 사용자의 이동에 따라 기설정된 데이터 공간에 미리 다운로딩된 마커 영상이 있던 마커(320)가 기설정된 범위를 벗어나게 된 경우, 사용자 장치는 기설정된 데이터 공간에 저장되어 있던 해당 마커 영상을 삭제할 수 있다.

즉, 사용자 장치는 사용자의 이동 거리에 따라 기설정된 범위를 실시간으로 업데이트하고, 실시간으로 업데이트된 기설정된 범위에 포함된 마커에 대해서만 마커 영상을 저장해두는 방식으로 마커 영상을 관리할 수 있다. 이를 통해, 미리 추출된 마커의 수와 미리 다운로딩된 마커 영상의 수가 일정 수준으로 유지되어 무분별한 마커 영상의 다운로딩에 따른 데이터 오버헤드가 방지된다는 효과가 있다.

이렇듯 미리 마커 영상을 다운로딩하는 동작으로 인해, 사용자 장치는 인식한 마커에 대한 마커 영상을 로딩하는 데 있어 다음과 같은 2가지 방식으로 동작할 수 있다.

우선, 사용자 장치는 마커를 인식한 경우, 인식된 마커와 매칭되는 마커 영상을 기설정된 데이터 공간에서 탐색/검색할 수 있다. 만일, 기설정된 데이터 공간에서 매칭되는 마커 영상이 탐색/검색된 경우, 사용자 장치는 검색된 마커 영상을 기설정된 데이터 공간으로부터 로딩하여 디스플레이할 수 있다. 반대로, 기설정된 데이터 공간에서 매칭되는 마커 영상이 탐색/검색되지 않은 경우, 사용자 장치는 인식된 마커에 대한 정보가 포함된 마커 영상 요청을 어플리케이션 서버로 전송할 수 있으며, 해당 마커 영상을 어플리케이션 서버로부터 다운로딩할 수 있다.

도 5는 본 발명의 일 실시예에 따른 가상 스탬프 수집 실시예를 예시한 도면이다.

최근 스탬프 투어라는 새로운 여행 방식이 유행하고 있는데, 이는 지역의 대표적인 명소/관광지 코스를 방문하여 각 구간별로 배치되어 있는 방문 확인 스탬프를 찍으면서 투어하는 방식이다. 최근 코스 완주를 인증하기 위한 인증 샷으로 방문 확인 스탬프가 찍힌 사진이 SNS(Social Network Service)를 통해 많이 업로드되고 있는 실정이다. 이러한 새로운 투어 트렌드에 따라, 본 발명의 일 실시예에 따른 관광 가이드 방법 역시, 관광지 구간 별 가상 스탬프 수집 기능을 제공할 수 있다.

도 5에 도시한 바와 같이, 사용자 장치는 기설정된 카메라 유닛을 획득한 카메라 이미지 내에 가상 스탬프(510)를 디스플레이할 수 있으며, 사용자는 디스플레이된 가상 스탬프에 대한 선택 입력(530)을 수행함으로써 가상 스탬프(510)를 수집할 수 있다. 현재까지 수집된 가상 스탬프(510) 개수 및 잔여 가상 스탬프 개수 등에 관한 정보는, 본 도면에 도시한 바와 같이, GUI(Graphic User Interface)의 형태(520)로 사용자 장치 화면의 기설정된 영역에 디스플레이될 수 있다.

가상 스탬프(510) 역시 마커와 연계되어 디스플레이되거나, 사용자 장치의 현재 위치에 기초하여 디스플레이될 수 있다. 전자의 경우, 사용자 장치는 가상 스탬프(510)와 연계된 마커를 인식하면 해당 가상 스탬프(510)를 디스플레이할 수 있으며, 후자의 경우, 사용자 장치는 가상 스탬프(510)와 연계된 위치/구역에 진입하면 해당 가상 스탬프(510)를 디스플레이할 수 있다.

가상 스탬프(510)는 실시예에 따라 다양한 방식으로 디스플레이될 수 있다. 일 실시예로서, 사용자 장치는 관광지 이미지가 존재하지 않는 여백 공간(예를 들어, 하늘 또는 땅 공간 등)에 가상 스탬프(510)를 디스플레이할 수 있으며, 본 동작을 위해 이미지 인식 기술을 사용할 수 있다. 그리고/또는 다른 실시예로서, 사용자 장치는 인식한 관광지 이미지의 경계선/윤곽선 상에는 가상 스탬프(510)를 디스플레이하지 않을 수 있으며, 본 동작을 위해서도 이미지 인식 기술을 사용할 수 있다.

도 6은 본 발명의 일 실시예에 따른 가상 관광 가이드 제공 실시예를 예시한 도면이다.

본 발명의 일 실시예에 따른 관광 가이드 방법은, 관광 가이드의 고용을 중개하는 기능을 제공할 수 있다. 관광 가이드는 온라인 상에서 이루어지기 때문에, 관광 가이드가 직접 동행할 필요가 없으므로 전 세계 어느 누구라도 통신 연결만 가능하다면 누구라도 관광 가이드가 될 수 있으며, 비용이 저렴하게 형성될 뿐 아니라 새로운 일자리 창출 효과도 있다. 사용자는 본 기능을 통해 저렴한 비용으로 관광 가이드를 고용함으로써 보다 쉽고 편리하게 관광을 즐길 수 있다.

이를 위해, 사용자 장치(610)는 본 도면에 도시한 바와 같이, 관광 가이드 목록(650)을 사용자에게 제공할 수 있다. 관광 가이드(640)는 어플리케이션 서버에 가이드 관련 정보를 입력하여 관광 가이드로 등록할 수 있으며, 어플리케이션 서버는 등록된 관광 가이드 정보를 리스트 업하여 사용자 장치(610)로 전송할 수 있다. 관광 가이드 목록(650)에는 각 관광 가이드(640)별 가이드 경력, 사용 가능 언어, 국적, 가이드할 관광 코스, 가이드 비용 및/또는 가이드 평점 정보 등과 같은 관광 가이드 경력 정보가 제공될 수 있다.

사용자는 관광 가이드 목록(650)을 통해 제공되는 관광 가이드 경력 정보를 확인하고 고용할 관광 가이드(640)에 대한 선택 입력을 수행할 수 있다. 사용자 장치(610)는 선택 입력된 관광 가이드(640)의 가이드 장치(630)와 통신 연결을 수행하여 온라인 관광 가이드가 원활히 수행되도록 지원할 수 있다. 특히, 사용자 장치(610)와 가이드 장치(630)간의 통신 연결이 완료되면, 사용자 장치(610) 및 가이드 장치(630)에 각각 관광 가이드 인터페이스가 제공될 수 있다.

관광 가이드 인터페이스는 사용자와 관광 가이드간의 관광 가이드가 원활히 수행될 수 있도록 지원하기 위한 다양한 기능이 구현된 인터페이스에 해당한다. 관광 가이드 인터페이스에 대한 상세한 설명은 도 7을 참조하여 이하에서 후술하기로 한다.

도 7은 본 발명의 일 실시예에 따른 관광 가이드 인터페이스를 이용한 관광 가이드 방법을 예시한 도면이다.

관광 가이드 인터페이스는 사용자 장치(730)의 화면 공유 기능을 제공할 수 있다. 따라서, 사용자 장치(730)에 디스플레이된 관광지 이미지와 마커 영상 등이 모두(720) 가이드 장치(770)로 실시간 송출될 수 있으며, 가이드 장치(770)는 송출받은 사용자 화면(760)을 실시간으로 디스플레이할 수 있다. 관광 가이드(780)는 이러한 화면(760)을 통해 현재 사용자의 위치가 어느 곳인지, 어느 관광지(710)를 관광 중인지를 쉽게 파악하여 관광 가이드를 수행할 수 있다.

또한, 관광 가이드 인터페이스는 사용자(740)와 관광 가이드(780)간의 음성(750, 790) 공유 기능(또는, 통화 기능)도 제공할 수 있다. 보다 상세하게는, 사용자 장치(730)는 사용자 음성(750)을 입력받아 이를 가이드 장치(770)로 전송할 수 있으며, 가이드 장치(770)는 수신한 사용자 음성(750)을 출력할 수 있다. 이와 동일한 방식으로, 가이드 장치(770) 역시 관광 가이드(780)의 음성(790)을 입력받아 이를 사용자 장치(730)로 전송할 수 있으며, 사용자 장치(730)는 수신한 관광 가이드(780)의 음성(790)을 출력할 수 있다.

따라서, 사용자(740)는 실제 현재 관광 가이드(780)가 함께 동행하고 있는 것과 같은 느낌을 받을 수 있다. 특히, 사용자(740)가 외국인 관광객인 경우, 필요 시 관광 가이드(780)가 직접 실시간 번역 서비스도 제공할 수 있으므로 사용자(740)가 보다 편리하고 편하게 관광을 즐길 수 있다.

도 8은 본 발명의 일 실시예에 따른 마커 설정 방법을 예시한 도면이다.

본 발명의 일 실시예에 따른 관광 가이드 방법은, 사용자(또는 관광 가이드)가 직접 마커를 설정할 수 있는 마커 설정 기능을 제공한다.

도 8을 참조하면, 사용자는 마커로 설정할 관광지 이미지(810)에 대한 마커 설정 입력을 수행할 수 있다. 마커 설정 입력으로는, 특정 관광지 이미지에 대한 선택 입력(830), 특정 관광지 이미지(810)의 경계선/윤곽선을 따라 영역을 구획하는 드래그 입력(820) 등 실시예에 따라 다양한 입력으로 수행될 수 있다. 마커 설정 입력이 수신되면, 사용자 장치는 마커 설정 입력된 관광지 이미지(810)를 마커로 설정할 것인지를 묻는 알림창(840)을 디스플레이할 수 있다. 사용자로부터 알림창(840)에 대한 '네' 입력을 수신한 경우, 사용자 장치는 마커를 통해 디스플레이될 마커 영상을 선택할 수 있는 선택 인터페이스(850)를 디스플레이할 수 있다. 사용자는 선택 인터페이스(850)를 통해 제공된 영상 파일들 중 마커 영상 파일을 선택할 수 있다. 마커 영상 파일이 선택되면, 사용자 장치는 마커 설정 정보를 생성하여 어플리케이션에 전송함으로써 특정 관광지 이미지(810)를 마커로 설정할 수 있다. 마커 설정 정보에는, 마커로 설정된 특정 관광지 이미지(810) 정보, 특정 관광지의 위치 정보 및/또는 선택된 마커 영상 파일 등 마커 설정에 필요한 다양한 정보가 포함되어 있을 수 있다.

마커 설정 입력으로서 특정 관광지 이미지(810)의 경계선/윤곽선을 따라 영역을 구획하는 드래그 입력(820)이 수행되는 경우, 드래그 입력된 경계선(820)은 마커 인식 인디케이터로 사용될 수 있는데, 이에 대해서는 도 9를 참조하여 이하에서 상세히 후술한다.

도 9는 본 발명의 일 실시예에 따른 마커 인식 인디케이터를 사용한 마커 인식 실시예를 예시한 도면이다.

도 9에 도시한 바와 같이, 도 8에서 드래그 입력된 특정 관광지 이미지의 경계선(910)은 마커 인식 인디케이터로서 디스플레이될 수 있다. 마커 인식 인디케이터(910)는 마커 인식 영역을 지시하기 위한 그래픽 인디케이터로서, 사용자는 마커 인식 인디케이터(910) 내부에 마커 인식 인디케이터(910)의 형상/경계선과 부합하는 특정 관광지 이미지(930)를 위치시켜 사용자 장치(920)가 마커를 인식하도록 할 수 있다. 사용자 장치(920)는 마커 인식 인디케이터(910) 내부에 위치하는 이미지를 실시간으로 인식하고, 마커 인식 인디케이터(910)와 매칭되는 특정 관광지 이미지(930)가 내부 영역에서 감지되는지를 실시간으로 판단할 수 있다.

사용자 장치(920)는 현재 위치에 기초하여 마커 인식 인디케이터(910)를 디스플레이할 수 있다. 예를 들어, 사용자 장치(920)는 가장 가까운 위치의 마커에 대한 마커 인식 인디케이터(910)를 디스플레이할 수 있다. 사용자는 디스플레이된 마커 인식 인디케이터(910)와 부합하는 마커(930)를 찾기 위해 사용자 장치(920)의 화각을 조절할 수 있으며, 형상과 부합하는 특정 관광지 이미지(930)를 마커 인식 인디케이터(910) 내부 영역에 위치하도록 화각을 조절함으로써 사용자 장치(920)가 마커(930)를 인식하도록 할 수 있다.

예를 들어, 불국사의 경계선을 구획하는 드래그 입력을 통해 불국사가 마커로 설정되고 현재 위치가 불국사로 인식된 경우, 사용자 장치(920)는 불국사의 경계선을 갖는 마커 인식 인디케이터(910)를 디스플레이할 수 있다. 사용자는 이러한 마커 인식 인디케이터(910) 내에 불국사 이미지(930)가 위치하도록 사용자 장치(920)의 화각을 조절함으로써 사용자 장치(920)가 불국사 마커를 인식하도록 할 수 있다.

사용자 장치(920)는 마커 인식 인디케이터(910)를 통해 마커를 인식한 경우, 인식한 마커에 대하여 설정된 마커 영상을 디스플레이할 수 있다. 이때, 사용자 장치(920)는 마커 인식 인디케이터(910) 내의 모든 이미지를 마커 영상으로 대체하여 디스플레이할 수 있다. 예를 들어, 불국사 마커에 대하여 불국사의 계절별 모습 영상이 마커 영상으로 설정되어 있는 경우, 사용자 장치(920)는 마커 인식 인디케이터(910) 내에 위치한 불국사 이미지(930)를 불국사의 계절별 모습 영상으로 대체하여 디스플레이할 수 있다.

즉, 마커 인식 인디케이터(910)는 마커 영상 출력창으로서의 기능도 수행할 수 있으며, 이때 마커 영상 출력창을 통해 출력되는 마커 영상은 마커를 대체하여 디스플레이되므로 VR 영상으로 한정될 수 있다.

도 10은 본 발명의 일 실시예에 따른 타사용자 초대 기능을 예시한 도면이다.

도 7에서 상술한 관광 가이드 인터페이스는 타사용자 초대 기능을 추가로 제공할 수 있다. 관광 가이드 인터페이스는 타사용자 초대 기능을 수행하기 위한 초대 아이콘(1010)을 제공할 수 있으며, 사용자는 이(1010)에 대한 선택 입력(1020)을 수행함으로써 타사용자를 초대할 수 있다. 사용자 장치는 초대된 타사용자의 사용자 장치를 관광 가이드 인터페이스에 참여시킬 수 있으며, 그 결과 앞서 상술한 도 7의 기능이 초대된 타사용자의 사용자 장치로도 확장되어 사용자의 화면 공유 기능, 참여자간의 음성 공유 기능 등이 모두 수행될 수 있다.

이러한 관광 가이드 인터페이스를 통해 사용자는 원하는 사용자와 함께 관광지를 투어하는 듯한 느낌을 받을 수 있으며, 혼자 관광 온 외국인의 경우에도 동행자가 생기게 되어 관광의 즐거움이 배가 될 수 있다. 또한, 초대된 타사용자 입장에서도 사용자와 함께 직접 관광지를 여행하는 듯한 경험을 할 수 있다.

도 11은 본 발명의 일 실시예에 따른 관광 가이드 시스템도이다.

도 11을 참조하면, 본 발명의 일 실시예에 따른 관광 가이드 시스템은, 적어도 하나의 사용자 장치(1110), 어플리케이션 서버(1120) 및 적어도 하나의 가이드 장치(1130)로 구성될 수 있다. 관광 가이드 시스템에 포함된 사용자 장치(1110), 어플리케이션 서버(1120) 및 가이드 장치(1130)는 본 명세서에서 제안된 실시예가 수행되도록 제작된 어플리케이션(즉, 관광 가이드 어플리케이션)을 매개체로 하여 상호 통신을 수행할 수 있다.

사용자 장치(1110)는 관광 가이드 어플리케이션이 사전 설치되어 실행 중인 사용자(즉, 관광객 또는 관광객이 초대한 타사용자)의 전자/휴대 장치를 의미할 수 있다. 가이드 장치(1130) 역시 관광 가이드 어플리케이션이 사전 설치되어 실행 중인 관광 가이드의 전자/휴대 장치를 의미할 수 있다. 어플리케이션 서버(1120)는 관광 가이드 어플리케이션을 운영/관리하는 서버를 의미할 수 있다.

도 12는 본 발명의 일 실시예에 따른 사용자 장치의 블록도이다.

도 12를 참조하면, 사용자 장치는 프로세서(1210), 카메라 유닛(1220), 디스플레이 유닛(1230), 통신 유닛(1240), 음성 출력 유닛(1250), 센싱 유닛(1260) 및 메모리 유닛(1270)을 포함할 수 있다.

프로세서(1210)는, 본 명세서에서 제안된 실시예를 수행하기 위해 적어도 하나의 다른 유닛(1220~1270)을 제어할 수 있다. 따라서, 상술한 실시예들에서 사용자 장치는 프로세서(1210)로 대체되어 설명될 수 있다. 프로세서(1210)는, CPU(Central Processing Unit), MPU(Micro Processor Unit), MCU(Micro Controller Unit), AP(Application Processor), AP(Application Processor) 또는 본 발명의 기술 분야에 잘 알려진 임의의 형태의 프로세서(1210)를 적어도 하나 포함하여 구성될 수 있다. 프로세서(1210)는 메모리 유닛(1270)에 저장된 다양한 어플리케이션(특히, 관광 가이드 어플리케이션)을 실행하고, 어플리케이션 서버 내부의 데이터를 프로세싱할 수 있다.

카메라 유닛(1220)은 이미지 및 영상 촬영을 수행할 수 있으며, 특히 관광지를 촬영하여 관광지 이미지를 획득할 수 있다. 카메라 유닛(1220)은 마커를 인식/센싱하기 위한 비쥬얼 센서로 사용될 수도 있다.

디스플레이 유닛(1230)은 이미지 및 영상을 디스플레이할 수 있다. 특히 디스플레이 유닛(1230)은 카메라 유닛(1220)을 통해 실시간으로 획득된 이미지/영상과 마커 영상을 비롯해 본 명세서에서 제안된 실시예를 구현하기 위한 다양한 그래픽 객체(예를 들어, 관광 가이드 인터페이스, 마커 인식 인디케이터 등)를 디스플레이할 수 있다.

통신 유닛(1240)은 적어도 하나의 유/무선 통신 프로토콜을 사용하여 통신을 수행, 데이터를 송신/수신할 수 있다. 특히, 사용자 장치의 통신 유닛(1240)은 어플리케이션 서버 및/또는 가이드 장치와 적어도 하나의 유/무선 통신 프로토콜을 사용하여 통신을 수행할 수 있다.

음성 출력 유닛(1250)은 음성/소리/음악을 출력하는 기능을 수행하며, 예를 들어 스피커 또는 이어폰에 해당할 수 있다. 음성 출력 유닛(1250)은 사용자 장치에 내장되거나 통신 유닛(또는 연결 단자)을 통해 페어링되어 사용자 장치와 연결될 수 있다. 특히, 음성 출력 유닛(1250)은 어플리케이션 서버 및/또는 가이드 장치로부터 수신한 다양한 음성 데이터(특히, 관광 가이드의 음성 및/또는 마커 영상에 삽입된 음성/소리/음악 등)를 출력하는 기능을 수행할 수 있다.

센싱 유닛(1260)은 외부 환경을 센싱하기 위한 적어도 하나의 센싱 수단을 통칭하는 것으로, 센싱 결과를 프로세서(1210)에 전달하여 사용자 장치가 센싱 결과에 따른 동작을 수행하도록 할 수 있다. 예를 들어, 센싱 유닛(1260)은 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로스코프 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 밝기 센서, 고도 센서, 후각 센서, 온도 센서, 뎁스 센서, 압력 센서, 밴딩 센서, 오디오 센서, 비디오 센서, GPS(Global Positioning System) 센서, 터치 센서, 음성 센서 및 그립 센서 등의 다양한 센싱 수단 중 적어도 어느 하나를 포함할 수 있다. 이 중 터치 센서는 사용자의 터치 입력을 수신하기 위한 수단으로, 음성 센서는 사용자의 음성 입력을 수신하기 위한 수단으로 사용될 수 있다.

메모리 유닛(1270)은, 영상(특히 마커 영상), 음성, 이미지 및/또는 관광 가이드 어플리케이션 등과 같은 다양한 디지털 데이터를 저장할 수 있다. 예를 들어, 메모리 유닛(1270)은 플래시 메모리, HDD(Hard Disk Drive), SSD(Solid State Drive), ROM, RAM, 클라우드 등과 같은 다양한 디지털 데이터 저장 공간에 해당할 수 있다. 특히, 메모리 유닛(1270)은 미리 어플리케이션 서버로부터 다운로딩한 마커 영상을 저장하는 기설정된 데이터 공간으로서의 기능을 수행할 수 있다. 이외에도, 메모리 유닛(1270)은 마커와 마커 영상간의 매칭 정보, 관광 가이드 목록 정보, 마커 설정 정보 등 본 명세서에서 제안되는 실시예를 구현하기 위해 생성되거나 송/수신된 다양한 정보를 저장하는 기능을 수행할 수 있다.

도 12에서 설명된 사용자 장치의 블록도는, 관광 가이드 장치에도 동일하게 적용될 수 있다. 따라서, 관광 가이드 장치 역시 상술한 프로세서(1210), 카메라 유닛(1220), 디스플레이 유닛(1230), 통신 유닛(1240), 음성 출력 유닛(1250), 센싱 유닛(1260) 및/또는 메모리 유닛(1270)을 포함할 수 있으며, 각 구성은 앞서 상술한 기능을 수행함으로써 본 명세서에서 제안된 실시예를 구현할 수 있다.

어플리케이션 서버는 도 12에서 설명된 구성 중 프로세서(1210), 통신 유닛(1240) 및/또는 메모리 유닛(1270)을 포함하여 본 명세서에서 제안된 실시예를 구현할 수 있다.

본 발명에 따른 실시예는 다양한 수단, 예를 들어, 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다. 하드웨어에 의한 구현의 경우, 본 발명의 일 실시예는 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.

또한, 펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 일 실시예는 이상에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차, 함수 등의 형태로 구현되어, 다양한 컴퓨터 수단을 통하여 판독 가능한 기록매체에 기록될 수 있다. 여기서, 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 예컨대 기록매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치를 포함한다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 이러한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

아울러, 본 발명에 따른 장치나 단말은 하나 이상의 프로세서로 하여금 앞서 설명한 기능들과 프로세스를 수행하도록 하는 명령에 의하여 구동될 수 있다. 예를 들어 그러한 명령으로는, 예컨대 JavaScript나 ECMAScript 명령 등의 스크립트 명령과 같은 해석되는 명령이나 실행 가능한 코드 혹은 컴퓨터로 판독 가능한 매체에 저장되는 기타의 명령이 포함될 수 있다. 나아가 본 발명에 따른 장치는 서버 팜(Server Farm)과 같이 네트워크에 걸쳐서 분산형으로 구현될 수 있으며, 혹은 단일의 컴퓨터 장치에서 구현될 수도 있다.

또한, 본 발명에 따른 장치에 탑재되고 본 발명에 따른 방법을 실행하는 컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 스크립트 혹은 코드로도 알려져 있음)은 컴파일 되거나 해석된 언어나 선험적 혹은 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 혹은 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 반드시 대응하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 혹은 다중의 상호 작용하는 파일(예컨대, 하나 이상의 모듈, 하위 프로그램 혹은 코드의 일부를 저장하는 파일) 내에, 혹은 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상의 스크립트) 내에 저장될 수 있다. 컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.

설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 또한, 본 발명은 상술한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상술한 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

또한, 이상에서는 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 명세서는 상술한 특정의 실시예에 한정되지 아니하며, 청구 범위에서 청구하는 요지를 벗어남이 없이 당해 명세서가 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 명세서의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.

110: AR 모드
120: VR 모드
130: MR 모드

Claims (14)

1. AR(Augmented Reality) 및 VR(Virtual Reality) 영상 중 적어도 하나를 이용한 관광지 가이드 방법에 있어서,
   이미지를 획득하는 단계;
   상기 획득한 이미지 중 기설정된 관광지 이미지를 마커로서 인식하는 단계;
   상기 인식된 마커와 매칭되는 마커 영상을 로딩하는 단계; 및
   상기 로딩한 마커 영상을 상기 인식한 마커에 대응하여 디스플레이하는 단계; 를 포함하되,
   상기 마커 영상은 상기 관광지를 가이드하기 위해 사전 제작된 AR 및 VR 영상 중 적어도 하나인, 관광지 가이드 방법.
2. 제 1 항에 있어서,
   상기 획득한 이미지를 통해 인식되지 않는 마커들 중 상기 인식된 마커로부터 기설정된 거리 범위 내에 위치한 마커를 추출하는 단계; 및
   상기 추출된 마커와 매칭되는 마커 영상을 상기 어플리케이션 서버에 미리 요청하여 미리 다운로딩하는 단계; 를 더 포함하는, 관광지 가이드 방법.
3. 제 2 항에 있어서,
   상기 미리 로딩된 영상은 기설정된 데이터 공간에 저장되는, 관광지 가이드 방법.
4. 제 3 항에 있어서,
   상기 마커 영상을 로딩하는 단계는,
   상기 인식된 마커와 매칭되는 마커 영상을 상기 기설정된 데이터 공간에서 검색하는 단계;
   상기 기설정된 데이터 공간에서 상기 매칭되는 마커 영상이 검색된 경우, 상기 검색된 마커 영상을 상기 기설정된 데이터 공간으로부터 로딩하고,
   상기 기설정된 데이터 공간에서 상기 매칭되는 마커 영상이 검색되지 않은 경우, 상기 인식된 마커에 대한 정보가 포함된 마커 영상 요청을 상기 어플리케이션 서버로 전송하여 상기 매칭되는 마커 영상을 상기 어플리케이션 서버로부터 다운로딩하는 단계; 를 포함하는, 관광지 가이드 방법.
5. 제 3 항에 있어서,
   상기 기설정된 거리 범위 내에 위치한 마커를 추출하는 단계는,
   사용자의 이동 방향을 인식하는 단계;
   상기 인식된 이동 방향에 상기 인식된 마커로부터 제1 거리 내에 위치한 제1 마커를 추출하는 단계; 및
   상기 인식된 이동 방향과 다른 방향에 상기 인식된 마커로부터 제2 거리 내에 위치한 제2 마커를 추출하는 단계; 를 포함하되,
   상기 제1 거리는 상기 제2 거리보다 길게 설정되는, 관광지 가이드 방법.
6. 제 5 항에 있어서,
   상기 사용자의 이동 거리를 인식하는 단계;
   상기 인식된 마커로부터 상기 인식된 이동 거리만큼 이동한 위치를 기준으로, 상기 기설정된 거리 범위 내에 위치한 마커를 추출하는 단계;
   상기 기설정된 데이터 공간에 상기 미리 다운로딩된 마커 영상이 없는 새로운 마커가 추출되는 경우, 상기 새로운 마커와 매칭되는 마커 영상을 상기 어플리케이션 서버에 미리 요청하여 미리 다운로딩하는 단계; 및
   상기 기설정된 데이터 공간에 상기 미리 다운로딩된 마커 영상이 있던 마커가 상기 기설정된 범위를 벗어나게 된 경우, 상기 기설정된 데이터 공간에 저장되어 있던 상기 미리 다운로딩된 영상을 삭제하는 단계; 를 더 포함하는, 관광지 가이드 방법.
7. 제 1 항에 있어서,
   관광 가이드 목록을 제공하는 단계;
   상기 관광 가이드 목록 중 어느 하나의 관광 가이드에 대한 선택 입력을 사용자로부터 수신하는 단계; 및
   상기 선택 입력된 관광 가이드의 가이드 장치와 상기 사용자의 사용자 장치간의 통신 연결을 수행하는 단계; 를 더 포함하는, 관광지 가이드 방법.
8. 제 7 항에 있어서,
   상기 관광 가이드 목록은,
   각 관광 가이드별로, 가이드 경력, 사용 가능 언어, 가이드할 관광 코스, 가이드 비용 및 가이드 평점 정보 중 적어도 하나에 대한 정보를 제공하는, 관광지 가이드 방법.
9. 제 7 항에 있어서,
   상기 사용자 장치와 상기 가이드 장치간의 통신 연결이 완료된 경우, 상기 사용자 장치 및 상기 가이드 장치에 관광 가이드 인터페이스를 제공하는 단계;
   상기 관광 가이드 인터페이스를 통해:
   상기 사용자 장치의 화면을 상기 가이드 장치와 공유하는 단계;
   상기 사용자 장치로 수신된 사용자 음성을 상기 가이드 장치로 전송하는 단계; 및
   상기 관광 가이드 장치로부터 상기 관광 가이드의 음성을 수신하여 출력하는 단계; 를 포함하는, 관광지 가이드 방법.
10. 제 9 항에 있어서,
    특정 사용자에 대한 초대 입력을 수신하는 단계; 및
    상기 특정 사용자의 사용자 장치를 상기 관광 가이드 인터페이스에 참여시키는 단계; 를 더 포함하는, 관광지 가이드 방법.
11. 제 1 항에 있어서,
    특정 관광지 이미지에 대한 마커 설정 입력을 수신하는 단계;
    상기 특정 관광지 이미지에 대해 설정할 마커 영상을 입력받는 단계; 및
    상기 특정 관광지 이미지에 대한 마커 설정 정보를 어플리케이션 서버로 전송하여 상기 특정 관광지 이미지를 상기 마커로 설정하는 단계; 를 포함하되,
    상기 마커 설정 정보는, 상기 특정 관광지 이미지, 상기 특정 관광지의 위치, 및 상기 입력된 마커 영상 중 적어도 하나를 포함하는, 관광지 가이드 방법.
12. 제 11 항에 있어서,
    상기 마커 설정 입력은,
    상기 특정 관광지 이미지의 경계선을 따라 영역을 구획하는 드래그 입력을 포함하는, 관광지 가이드 방법.
13. 제 12 항에 있어서,
    상기 드래그 입력된 특정 관광지 이미지의 경계선을 마커 인식 인디케이터로서 디스플레이하는 단계;
    상기 마커 인식 인디케이터 내에 위치한 상기 특정 관광지 이미지를 인식하는 단계; 및
    상기 마커 인식 인디케이터 내의 모든 이미지를 상기 마커 영상으로 대체하여 디스플레이하는 단계; 를 더 포함하는, 관광지 가이드 방법.
14. 관광지 가이드 어플리케이션에 있어서,
    이미지를 획득하는 기능;
    상기 획득한 이미지 중 기설정된 관광지 이미지를 마커로서 인식하는 기능;
    상기 인식된 마커와 매칭되는 마커 영상을 로딩하는 기능; 및
    상기 로딩한 마커 영상을 상기 인식한 마커에 대응하여 디스플레이하는 기능; 을 실행시키기 위하여 매체에 저장된 관광지 어플리케이션으로서,
    상기 마커 영상은 상기 관광지를 가이드하기 위해 사전 제작된 AR(Augmented Reality) 및 VR(Virtual Reality) 영상 중 적어도 하나인, 관광지 어플리케이션.

Images