KR102027565B1 - 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법 - Google Patents

3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법 Download PDF

Info

Publication number
KR102027565B1
KR102027565B1 KR1020180095379A KR20180095379A KR102027565B1 KR 102027565 B1 KR102027565 B1 KR 102027565B1 KR 1020180095379 A KR1020180095379 A KR 1020180095379A KR 20180095379 A KR20180095379 A KR 20180095379A KR 102027565 B1 KR102027565 B1 KR 102027565B1
Authority
KR
South Korea
Prior art keywords
augmented reality
user
character
screen
information
Prior art date
Application number
KR1020180095379A
Other languages
English (en)
Inventor
조용만
Original Assignee
주식회사 인터포
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 인터포 filed Critical 주식회사 인터포
Priority to KR1020180095379A priority Critical patent/KR102027565B1/ko
Application granted granted Critical
Publication of KR102027565B1 publication Critical patent/KR102027565B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3632—Guidance using simplified or iconic instructions, e.g. using arrows
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3641—Personalized guidance, e.g. limited guidance on previously travelled routes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3647—Guidance involving output of stored or live camera images or video streams
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법으로서, 증강현실 서비스 제공서버에서 투어 경로에 대하여 복수개의 관심지점 위치정보 및 증강현실 정보를 반영한 투어 경로 데이터베이스를 구축하는 단계, 투어 앱이 구동되면, 사용자 단말기에서 단말기 화면 상에 현실 영상과 함께 3차원 캐릭터 이미지를 표시하는 단계, 상기 사용자 단말기에서, 투어 경로를 따라 이동하는 중에 화면 상에서 상기 3차원 캐릭터가 진행 방향을 안내하면서 이동하는 모션을 수행하는 단계 및 상기 사용자 단말기에서, 현재 진행 방향의 일정거리 내에 관심지점이 위치하는 경우 상기 관심지점에 관련된 증강현실 정보를 화면에 표시하는 단계를 포함하는 것을 특징으로 한다.
본 발명에 의하면, 사용자가 재미있게 투어를 하면서 길안내를 받을 수 있고, 여행에 필요한 다양한 정보를 효과적으로 취득할 수 있어 증강현실 기술의 보급에 큰 역할을 할 수 있을 것으로 기대된다.

Description

3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법{A Method For Providing Augmented Reality Walking Navigation Service Using a 3D Character}
본 발명은 증강현실을 이용한 도보 길안내 서비스 제공 기술에 관한 것으로서, 보다 상세하게는 증강현실 이미지로 표현되는 3차원 캐릭터가 앞서 걸어가면서 길 안내를 함과 아울러 주변의 관심지점 지점들을 안내할 수 있고, 투어 중에 증강현실을 통해 코인을 수집하여 포인트를 획득할 수 있도록 하는 기술에 관한 것이다.
증강현실(Augmented Reality, AR)은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술로서, 자신(객체)과 배경·환경 모두 현실이 아닌 가상의 이미지를 사용하는 가상현실(Virtual Reality, VR)과는 다른 개념이다.
증강현실 구현을 위해서는 지리/위치 정보를 송수신하는 GPS 장치 및 중력 센서(또는 자이로스코프 센서), 사용자의 현재 위치 및 움직임 방향에 따른 상세 정보를 수신하여 현실 배경에 표시하는 증강현실 애플리케이션이 구비된 스마트폰 등의 IT 기기가 필요하다.
증강현실 기술은 게임, 교육, 문화, 관광, 의료 등의 여러 분야에서 사용될 수 있는데, 본 발명은 문화 및 관광 분야의 활용을 위한 것이다.
증강현실의 문화,관광 분야의 활용 예로서는 관광지 길 안내 및 주요 관광지 안내 서비스, 박물관 안내 서비스 등이 있다.
현재 주요 문화, 관광용 증강현실 어플리케이션은 유명 관광지 위주로 제작되어 유명 관광지의 주요 유적의 설명 등이 증강현실로 표현되거나 유적 과거 이미지 등이 증강현실로 표현되는 정도에 그쳐 실용성이 높지 않고 사용자 측면에서 재미적인 요소가 떨어져 다운로드 수 및 사용 빈도 수가 매우 낮은 문제점이 있다.
길 안내 서비스의 경우에도 거의 차량용 내비게이션과 유사한 형태로 구현되어 실제 영상의 화면 상에 길 안내를 위한 화살표와 거리 표현을 위한 숫자 등으로 표현되는 정도에 불과하여 증강현실 고유의 특성을 잘 반영하지 못하고 있는 실정이다.
따라서, 유명 관광지 위주의 어플리케이션을 지양하고 활용 분야가 다양하면서도 증강현실의 장점을 잘 반영하여 유용성이 높으면서도 재미적인 요소가 강한 증강현실 어플리케이션에 대한 요구가 높아지고 있는 실정이다.
1. 한국등록특허 제10-1516243호 (명칭 : 태그를 이용한 관광정보 알림장치 및 그 방법) 2. 한국등록특허 제10-1533606호 (명칭 : 위치 기반 여행 서비스 서버 및 시스템) 3. 한국공개특허 제10-2017-0014545호(명칭 : 관심시점 표시 장치 및 방법)
이에, 본 발명은 사정을 감안하여 창출된 것으로, 본 발명의 목적은 재미있고 효율적으로 길 안내와, 관심지점에 대한 표현 및 안내가 이루어질 수 있도록 하는 증강현실 어플리케이션을 제공하는 것이다.
특히, 본 발명은 유명 관광지 뿐만 아니라 골목 투어 등에서 더 유용할 수 있도록 투어 동안 증가현실을 통해 구현되는 코인을 수집하여 골목 투어 중에 해당 코인을 사용할 수 있는 포인트를 획득할 수 있도록 하는 것이 또 다른 목적이다.
그 외에 다양한 기술적 목적은 본 발명의 설명을 통해 잘 이해될 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명의 일측면에 따르면, 증강현실 서비스 제공서버에서 투어 경로에 대하여 복수개의 관심지점 위치정보와 증강현실 정보 및 다수 개의 코인이 배치된 위치 정보를 반영한 투어 경로 데이터베이스를 구축하는 단계; 투어 앱이 구동되면, 사용자 단말기에서 단말기 화면 상에 현실 영상과 함께 3차원 캐릭터 이미지를 표시하는 단계; 상기 사용자 단말기에서, 투어 경로를 따라 이동하는 중에 화면 상에서 상기 3차원 캐릭터가 진행 방향을 안내하면서 이동하는 모션을 수행하는 단계; 및 상기 사용자 단말기에서, 현재 진행 방향의 일정거리 내에 관심지점이 위치하는 경우 상기 관심지점에 관련된 증강현실 정보를 화면에 표시하고 3차원 캐릭터가 해당 관심지점에 대한 안내 표현을 수행하면서 해당 관심지점의 특성정보에 상응하는 행위를 표현함과 더불어, 현재 진행 방향의 일정거리 내에 상기 코인이 위치하는 경우 상기 화면 상의 해당 위치에 코인 이미지를 표시하는 단계 및, 상기 사용자 단말기를 통해 상기 코인 획득을 위한 정보가 입력되면, 코인 획득처리를 수행하고, 획득된 코인 개수에 비례하여 관심지점에서 사용할 수 있는 포인트를 가산하는 단계를 포함하여 구성되고, 상기 사용자 단말기는 단말기 평면 상에 복수 개의 햅틱 수단이 서로 다른 영역에 설치되고, 상기 사용자 단말의 지면에 대한 각도에 기초하여 화면 구동을 정지하는 화면 비구동 모드로 진입하며, 갈림길 위치에서 현재 모드가 화면 비구동 모드인 경우 사용자가 진행하여야 하는 방향에 설치된 햅틱 수단이 동작하여 진행방향을 안내하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법이 제공된다.
삭제
또한, 상기 사용자 단말기에서, 상기 화면 비구동 모드에서 진행 방향의 일정 거리 내에 상기 관심지점 또는 코인이 위치하는 경우 이를 사용자에게 인지시키기 위한 동작을 수행할 수 있다.
삭제
삭제
삭제
그리고, 상기 사용자 단말기에서, 현재 위치의 환경정보를 수집하고, 현재 환경정보를 상기 캐릭터의 상태 또는 표정 변화에 반영하는 것도 가능하다.
더 나아가, 상기 사용자 단말기에서, 사용자를 향하는 방향에 위치한 카메라를 통해 상기 사용자의 얼굴을 촬영하고, 촬영된 얼굴을 분석하여 상기 사용자 표정정보를 생성한 후, 상기 캐릭터의 표정 또는 행동에 상기 사용자 표정정보를 반영하는 것도 가능하다.
또한, 상기 사용자 단말기에서, 사용자 음성이 수신되면, 상기 사용자 음성에 대응되는 행동을 수행하거나 필요한 정보를 증강 이미지로 표시할 수 있고, 상기 사용자 단말기에서, 사용자의 이동 속도가 설정된 도보 속도에 맞지 않는 경우 상기 3차원 캐릭터가 특정 행동 또는 감정 또는 특정 행동을 표현할 수 있다.
삭제
본 발명에 의하면, 사용자가 재미있게 투어를 하면서 길안내를 받을 수 있고, 여행에 필요한 다양한 정보를 효과적으로 취득할 수 있어 증강현실 기술의 보급에 큰 역할을 할 수 있을 것으로 기대된다.
도1은 본 발명에 따른 증강현실 도보 길안내 서비스 제공을 위한 시스템 구성도이다.
도 2는 본 발명에 따른 증강현실 도보 길안내 서비스 제공을 위한 사용자 단말기의 내부 구성을 도시한 것이다.
도 3은 본 발명에 따른 증강현실 도보 길안내 서비스 제공 방법이 수행되는 과정을 도시한 흐름도이다.
도 4는 화면 구동 모드의 변경 과정 및 동작을 도시한 흐름도이다.
도 5는 3차원 캐릭터가 길을 안내하는 동작의 일례를 표현한 것이다.
도 6a는 길 안내 중에 관심지점에 관련된 정보를 표시하는 일례를 도시한 것이고, 도 6b와 도 6c는 3차원 캐릭터가 관심지점을 안내하는 동작의 일례를 표현한 것이다.
도 7은 사용자 단말기 화면 상에 코인이 표시되는 것을 나타낸 것이다.
도 8은 3차원 캐릭터가 환경정보에 따라 상태가 변화하는 것을 예시한 것이다.
본 발명에 기재된 실시예 및 도면에 도시된 구성은 본 발명의 바람직한 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 표현하는 것은 아니므로, 본 발명의 권리범위는 본문에 설명된 실시예 및 도면에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.
여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
도1은 본 발명에 따른 증강현실 도보 길안내 서비스 제공을 위한 시스템 구성도이고, 도 2는 본 발명에 따른 증강현실 도보 길안내 서비스 제공을 위한 사용자 단말기의 내부 구성을 도시한 것이다.
도 1에 도시된 바와 같이, 본 발명에 따른 증강현실 도보 길안내 서비스 제공 시스템은 증강현실 서비스 제공서버(10)와 다수의 사용자 단말기(20)를 포함하여 구성된다.
증강현실 서비스 제공서버(10)는 증강현실 도보 길안내 서비스를 제공하는 회사에 설치된 컴퓨터로서, 적어도 하나 이상의 투어 경로에 대하여 복수개의 관심지점 위치정보, 복수 개의 코인 위치 정보, 각 관심지점에 대한 부가 정보 등을 포함하는 투어 경로 데이터베이스를 구비하고 있다.
증강현실 서비스 제공서버(10)는 현재 증강현실 도보 길안내 서비스 앱을 실행하고 있는 사용자 단말기(20)로부터 단말기 위치정보, 단말기 방향 정보, 자세 정보 등을 수신하면 수신된 정보에 기초하여 사용자 단말기(20)의 화면에 증강현실 형태로 표시되는 정보를 사용자 단말기(20)로 제공한다.
사용자 단말기(20)는 증강현실 도보 길안내 서비스 앱을 설치한 사용자가 보유한 통신 단말기로서 스마트폰이나 착용형 디바이스 등 무선 통신이 가능한 다양한 형태의 디바이스일 수 있다.
도 2에 도시된 바와 같이, 사용자 단말기(20)는 일반적인 스마트폰과 유사한 구성을 갖는다.
표시부(21)는 단말기 화면에 카메라 실사 영상과 증강현실 이미지를 표시하기 위한 것으로서, LCD, OLED 등 다양한 디스플레이 장치가 사용될 수 있고, 화면 상에 터치 입력이 가능한 터치 패널 형태로 구현되는 것이 바람직하다.
카메라(22)는 통상적인 스마트 폰과 같이 단말기의 전면과 후면에 각각 제 1 카메라(22-1)와 제 2 카메라(22-2)가 설치된다. 제 1 카메라(22-1)는 셀프 촬영을 위한 기능과 셀프 촬영에서 사용자의 표정을 인식하기 위한 용도로 사용될 수 있고, 제 2 카메라(22-2)는 카메라 실사 영상을 화면에 표시하기 위한 목적으로 사용될 수 있다.
입력부(23)는 터치 패널 디스플레이에서의 터치입력부와 키 버튼 등을 포함한다.
GPS부는 GPS 위성으로부터 수신된 GPS 정보에 기초하여 단말기의 현재 위치를 산출하기 위한 것이다.
저장부(25)는 일반적인 스토리지 장치로서, 본 발명에서는 증강현실 도보 길안내 서비스 앱이 저장되는 영역을 제공한다.
무선통신부(26)는 3G. LTE 등의 이동통신 모듈로서 기지국을 통해 인터넷에 연결되어 증강현실 서비스 제공서버(10)와 앱 구동시 서비스 제공을 위한 데이터 송수신을 처리한다.
햅틱구현부(27)는 진동 등의 촉감 제공수단으로서 사용자에게 특정 정보 제공, 알람 기능 등을 위해 사용될 수 있다. 특히, 본 발명에서는 단말기에 복수 개의 진동수단을 설치하여 복수 개의 진동수단 중 어느 하나 이상을 선택적으로 구동하여 사용자에게 방향을 인지시키는 기능을 제공할 수 있다.
햅틱구현부(27)는 액정 글라스 뒷면에 투명한 진동패널을 복수 개 설치하는 형태로 구현될 수 있다.
스피커부(28)는 길 안내 동안 후술하는 3차원 캐릭터가 사용자와 인터랙션을 수행하는 방법 중 음성을 이용하기 위한 것으로서, 3차원 캐릭터가 특정 정보를 스피커부(28)를 통해 사용자에게 전달하거나 사용자의 질문에 대해 답변의 수단으로 스피커부(28)를 사용할 수 있다.
자세 검출부(29)는 단말기의 자세를 검출하기 위한 수단으로서, 여기서 단말기의 자세라 함은 단말기의 기울기 각도(단말기 평면이 지면과 이루는 각도), 단말기가 향하고 있는 방향 등을 의미한다. 자세 검출부(29)로는 자이로센서, 중력센서, 가속도 센서 등의 여러 센서 수단이 사용될 수 있다.
제어부(30)는 증강현실 도보 길안내 서비스 앱을 구동하고, 실행 중에 각 구성요소들을 제어하는 기능을 수행한다. 제어부(30)에서 수행되는 구체적인 제어방법들은 이하의 설명에서 구체적으로 설명될 것이다.
도 3은 본 발명에 따른 증강현실 도보 길안내 서비스 제공 방법이 수행되는 과정을 도시한 흐름도이다.
S300 단계는 증강현실 서비스 제공서버(10)에서 본 발명의 서비스 제공을 위해 투어경로 데이터베이스를 구축하는 과정으로서, 상술한 바와 같이, 투어경로 데이터베이스에는 하나 이상의 투어 경로에 대하여 복수개의 관심지점 위치정보, 복수 개의 코인 위치 정보, 각 관심지점에 대한 부가 정보 등을 포함한다. 여기서 투어 경로에 대한 3차원 지리정보를 포함할 수 있고, 보다 현실감있고 정확한 서비스 제공을 위해 해당 투어 경로에 대해 3차원 데이터 맵핑이 구축되어 있는 것이 바람직할 수 있다.
S310 단계 이후는 사용자 단말기(20)에서 증강현실 서비스를 제공하는 절차로서, 우선, 사용자가 자신의 단말기에 설치되어 있는 증강현실 도보 길안내 서비스 앱을 구동하고 가고자 하는 목적지를 설정한다(S310).
그 다음, 사용자 단말기(20)는 제 2 카메라(22-2)를 구동하여 화면에 카메라 촬영 영상을 표시함과 아울러 화면(50)의 일정 영역에 도5와 같은 형태로 3차원 캐릭터 이미지(40)를 표시한다(S320). 이때, 3차원 캐릭터 이미지(40)가 표시되는 위치는 사용자보다 일정 거리(예를 들면 5m) 앞서서 가는 형태로 표현되도록 할 수 있다. 그리고, 적절한 안내 방향을 알아내기 위해 초기에 주변 영역을 인식하는 과정을 수행하는 것도 가능하다. 3차원 캐릭터 이미지(40)의 크기를 선택적으로 조절할 수 있도록 하는 것도 가능하다.
진행 방향이 인식되면, 3차원 캐릭터(40)는 목적지로 가기 위한 경로를 따라 일정속도로 이동하기 시작하고, 사용자의 도보 속도에 따라 3차원 캐릭터(40)가 가까워 보이거나 멀어 보이도록 그 크기가 자동적으로 조절된다(S330). 길 안내시 사용자의 길 안내를 돕기 위한 화살표나 숫자 등의 부가 표시가 증강현실 이미지 형태로 표시되는 것도 가능하다.
길 안내 중에 진행 방향의 화각 범위 내의 부근에 미리 설정된 관심 지점이 있는 경우, 화면에 관심 지점에 대한 부가 정보가 증강현실 이미지 형태로 표시된다(S340). 관심 지점은 골목 투어인 경우 음식점, 카페, 관광 명소 등일 수 있다. 특히, 본 발명이 특화거리 등에서 관광지 안내의 목적으로 사용될 경우 관심 지점은 해당 특화거리 내의 업소이고 업소들은 본 서비스에 가입된 가맹점일 수 있다.
관심 지점이 부근에 나타나면, 도 6a와 같이 해당 관심 지점에 관한 부가정보(업종명, 연락처, 업체의 특징)가 증강현실 형태로 표시되는 형태, 도 6b와 같이 3차원 캐릭터(40)가 손으로 관심 지점을 안내하면서 말풍선 등의 형태로 안내 문구를 표시하거나 음성으로 안내멘트를 표현하는 형태 등 다양항 형태가 있을 수 있다. 그리고 도 6c와 같이 3차원 캐릭터(40)가 해당 관심 지점과 관련된 행동을 표현하여 흥미적인 요소를 배가시키는 것도 가능하다. 예를 들어, 3차원 캐릭터(40)가 카페를 안내하면서 커피를 마시는 모습을 연출하거나 음식점 앞에서 배가 고프다는 표현을 하는 것 등의 다양한 행동 표현이 가능하다.
또한, 길 안내 중에 투어 경로의 여러 위치에 배치되도록 설정된 코인이 위치한 지점이 현재 진행경로 상에 나타나면, 도 7과 같이 화면의 해당영역에 코인이 표시된다(S350). 이때, 3차원 캐릭터(40)가 주변에 코인이 있음을 안내하는 것도 가능하며, 이는 특히 후술하는 화면 비구동 모드에서 유용한 방법이다.
코인의 표시에 있어 경로 주변의 건물 등에 대한 3차원 지리정보에 기초하여 현재 단말기 위치와 코인 위치 간의 주변 환경 요소를 고려하여 코인이 적절한 위치에 표시되도록 하는 것이 바람직하다.
화면 상에 코인이 표시되면, 사용자는 코인을 획득할 수 있다. 코인을 획득하는 방법은 코인을 손가락으로 터치하면 코인이 획득되거나, 코인을 손가락으로 터치하면 3차원 캐릭터가 코인을 주워오거나, 3차원 캐릭터를 코인 방향으로 드래그시키면 3차원 캐릭터가 코인을 주워오는 등의 다양한 방식으로 구현될 수 있다.
그리고, 여러 사람이 동시에 투어를 하는 경우 게임적인 요소를 부가하기 위해 특정 사용자가 코인을 획득하면 해당 코인이 제거되어 다른 사용자는 해당 코인을 획득하지 못하게 하는 것이 바람직하다.
사용자가 코인을 획득하면, 해당 코인의 개수에 비례하여 포인트가 가산될 수 있다(S360). 여기서, 포인트는 앞서 언급한 가맹점 업소에서 사용할 수 있는 쿠폰이나 포인트 형태일 수 있고, 코인은 앞서 언급한 가맹점 업소에서 제공하는 것일 수 있다. 그리고, 가맹점 업소마다 자신이 투어경로 중에 특정 위치에 코인을 배치할 수 있고, 코인의 형태가 자신의 업종과 관련된 형태로 표현되는 것도 가능하다. 예를 들어, 카페가 가맹점인 경우 코인에 커피나 커피잔 모양이 그려져 있거나 코인 자체를 커피콩이나 커피잔 형태로 표현하는 것도 가능하다.
최종적으로 목적지에 도달하면 길 안내가 종료된다(S370).
도 4는 화면 구동 모드의 변경 과정 및 동작을 도시한 흐름도이다.
도 4를 참조하면, 사용자가 투어 앱을 구동하고 단말기를 진행방향으로 세운 상태로 유지하면 정상모드에서 앱이 구동된다(S400). 정상 모드라 함은 단말기 화면에 카메라 영상이 표시되고 3차원 캐릭터(40)가 표시되어 길 안내를 하는 방식을 의미한다.
정상 모드에서 투어 앱이 구동되는 상태에서 제 1 조건이 만족하면 화면 비구동 모드로 진입한다(S410). 화면 비구동 모드는 화면에 실사 영상을 표시하지 않고 꺼진 상태로 유지하는 것일 수 있다. 그리고, 제 1 조건은 단말기의 자세, 이동속도, 사용자 정보 입력 등일 수 있다. 단말기 자세는 예를 들면 단말기의 화면과 지면과의 각도일 수 있다. 즉, 단말기가 지면에 대하여 예를 들어 60도 이상으로 서 있는 경우에는 사용자가 정상적으로 화면을 보면서 길을 찾아가고 있는 것으로 판단하여 정상모드에서 구동되고, 단말기와 지면 간의 각이 그 이하의 각도인 경우에는 사용자가 단말기 화면을 주시하지 않는 것으로 판단하고, 절전을 위해 화면을 비구동할 수 있다.
그리고, 화면 비구동 상태에서 사용자가 목적지를 향해 걸어가는 상태에서 주변에 관심지점이나 코인이 존재하면 사용자 단말기(20)는 이를 사용자에게 인지시키기 위한 동작을 수행한다(S420). 사용자 인지를 위한 동작은 햅틱 동작, 안내 음성 출력 등일 수 있다.
화면 비구동 상태에서 제 2 조건이 만족하면 정상모드로 변경되어 다시 단말기 화면에 실사 영상과 3차원 캐릭터 이미지(40)가 표시된다(S430). 이 때, 제 2 조건은 제 1 조건과 같은 조건일 수 있다. 즉, 단말기의 화면과 지면과의 각도 등의 정보에 따라 사용자가 단말기 화면을 주시하는 것으로 판단되거나 사용자가 다시 이동하거나 특정 버튼이 입력되는 경우 정상모드로 복귀된다. 예를 들어, S420 단계에서 사용자 안내 동작에 의해 사용자가 주변에 코인이 있는 것을 인지한 경우 코인을 획득하기 위해 단말기를 세워 들면 다시 정상 모드 화면이 구동될 수 있는 것이다.
도 8은 3차원 캐릭터가 환경정보에 따라 상태가 변화하는 것을 예시한 것이다. 사용자 단말기(20)는 통신망을 통해 현재 환경정보, 기상 정보 등을 수신하여, 현재 기상정보를 단말기 화면에 반영할 수 있다. 그 방법은 일례로 도 8과 같이 3차원 캐릭터가 날씨에 관한 문구를 표시하거나 음성으로 표현하는 것 또는 이와 함께 날씨에 대한 행동, 표정 등을 표현하는 것이 가능하다. 날씨에 관한 문구에는 온도 정보, 습도 정보, 미세먼지 정보 등의 다양한 기상정보를 표시할 수 있다.
그 외, 도면에 도시되지 않았으나, 사용자를 향하는 방향에 위치한 제 1 카메라(22-1)를 통해 사용자의 얼굴을 촬영하고, 촬영된 얼굴을 분석하여 사용자 표정정보를 생성한 후, 3차원 캐릭터의 표정 또는 행동에 상기 사용자 표정정보를 반영하는 것도 가능하다.
그리고, 사용자가 투어 중에 특정 정보가 필요하거나 3차원 캐릭터(40)와 상호작용을 하고자 하는 경우 음성으로 이를 표출하면, 사용자 단말기(20)가 이 음성을 분석하여, 3차원 캐릭터(40)가 사용자 요구에 대응되는 행동을 수행하거나 필요한 정보를 증강 이미지로 표시하는 것도 가능하다. 예를 들어, 투어 중에 사용자가 어느 문화재를 본 경우 문화재에 대한 질문을 하면, 3차원 캐릭터(40)가 이에 대한 정보를 인터넷으로 검색하여 안내를 하는 것이 가능하다.
그리고, 본 발명의 기능을 확대하여 도보 속도 조절 기능을 제공하는 것도 가능하다. 예를 들어, 사용자의 이동 속도가 미리 설정된 도보 속도보다 느린 경우 즉, 3차원 캐릭터(40)의 이동속도보다 느린 경우 3차원 캐릭터(40)가 빨리 걸을 것을 독촉하는 문자 또는 음성을 표출하거나 화를 내는 표정이나 행동을 표현하는 것 등이 가능하다.
상기에서 단말기 평면 상에 복수 개의 햅틱 수단이 서로 다른 영역에 설치된 경우, 길 안내 중에 갈림길이 있는 위치에서 현재 모드가 화면 비구동 모드인 경우 또는 3차원 캐릭터가 화면에서 벗어난 경우 중 어느 한 경우에 진행하여야 하는 방향에 설치된 햅틱 수단이 동작하도록 할 수 있다.
이상에서 본 발명에 대한 기술 사상을 첨부 도면과 함께 서술하였지만, 이는 본 발명의 가장 양호한 일 실시예를 예시적으로 설명한 것이지 본 발명을 한정하는 것은 아니다. 또한, 이 기술 분야의 통상의 지식을 가진 자이면 누구나 본 발명의 기술 사상의 범주를 이탈하지 않는 범위 내에서 다양한 변형 및 모방이 가능함은 명백한 사실이다.

Claims (11)

  1. 증강현실 서비스 제공서버에서 투어 경로에 대하여 복수개의 관심지점 위치정보와 증강현실 정보 및 다수 개의 코인이 배치된 위치 정보를 반영한 투어 경로 데이터베이스를 구축하는 단계;
    투어 앱이 구동되면, 사용자 단말기에서 단말기 화면 상에 현실 영상과 함께 3차원 캐릭터 이미지를 표시하는 단계;
    상기 사용자 단말기에서, 투어 경로를 따라 이동하는 중에 화면 상에서 상기 3차원 캐릭터가 진행 방향을 안내하면서 이동하는 모션을 수행하는 단계; 및
    상기 사용자 단말기에서, 현재 진행 방향의 일정거리 내에 관심지점이 위치하는 경우 상기 관심지점에 관련된 증강현실 정보를 화면에 표시하고 3차원 캐릭터가 해당 관심지점에 대한 안내 표현을 수행하면서 해당 관심지점의 특성정보에 상응하는 행위를 표현함과 더불어, 현재 진행 방향의 일정거리 내에 상기 코인이 위치하는 경우 상기 화면 상의 해당 위치에 코인 이미지를 표시하는 단계 및,
    상기 사용자 단말기를 통해 상기 코인 획득을 위한 정보가 입력되면, 코인 획득처리를 수행하고, 획득된 코인 개수에 비례하여 관심지점에서 사용할 수 있는 포인트를 가산하는 단계를 포함하여 구성되고,
    상기 사용자 단말기는 단말기 평면 상에 복수 개의 햅틱 수단이 서로 다른 영역에 설치되고, 상기 사용자 단말의 지면에 대한 각도에 기초하여 화면 구동을 정지하는 화면 비구동 모드로 진입하며, 갈림길 위치에서 현재 모드가 화면 비구동 모드인 경우 사용자가 진행하여야 하는 방향에 설치된 햅틱 수단이 동작하여 진행방향을 안내하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1항에 있어서,
    상기 사용자 단말기에서, 상기 화면 비구동 모드에서 진행 방향의 일정 거리 내에 상기 관심지점 또는 코인이 위치하는 경우 이를 사용자에게 인지시키기 위한 동작을 수행하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  7. 제1항에 있어서,
    상기 사용자 단말기에서, 현재 위치의 환경정보를 수집하고, 현재 환경정보를 상기 캐릭터의 상태 또는 표정 변화에 반영하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  8. 제1항에 있어서,
    상기 사용자 단말기에서, 사용자를 향하는 방향에 위치한 카메라를 통해 상기 사용자의 얼굴을 촬영하고, 촬영된 얼굴을 분석하여 상기 사용자 표정정보를 생성한 후, 상기 캐릭터의 표정 또는 행동에 상기 사용자 표정정보를 반영하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  9. 제1항에 있어서,
    상기 사용자 단말기에서, 사용자 음성이 수신되면, 상기 사용자 음성에 대응되는 행동을 수행하거나 필요한 정보를 증강 이미지로 표시하는 것을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  10. 제1항에 있어서,
    상기 사용자 단말기에서, 사용자의 이동 속도가 설정된 도보 속도에 맞지 않는 경우 상기 3차원 캐릭터가 특정 행동 또는 감정을 표현하는 것을을 특징으로 하는 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법.
  11. 삭제
KR1020180095379A 2018-08-16 2018-08-16 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법 KR102027565B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180095379A KR102027565B1 (ko) 2018-08-16 2018-08-16 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180095379A KR102027565B1 (ko) 2018-08-16 2018-08-16 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법

Publications (1)

Publication Number Publication Date
KR102027565B1 true KR102027565B1 (ko) 2019-11-04

Family

ID=68578556

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180095379A KR102027565B1 (ko) 2018-08-16 2018-08-16 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법

Country Status (1)

Country Link
KR (1) KR102027565B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112146649A (zh) * 2020-09-23 2020-12-29 北京市商汤科技开发有限公司 Ar场景下的导航方法、装置、计算机设备及存储介质
CN113989469A (zh) * 2021-11-09 2022-01-28 深圳市商汤科技有限公司 Ar景点显示方法及装置、电子设备和存储介质
KR20220118117A (ko) 2021-02-18 2022-08-25 세명대학교 산학협력단 증강현실 기반의 응급/재난 구호와 방역지원 시스템 및 방법
WO2023120747A1 (ko) * 2021-12-20 2023-06-29 (주)에어패스 음성인식기반 단축키 xr인터렉티브 연동시스템 및 이를 이용한 연동 방법

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012063253A (ja) * 2010-09-16 2012-03-29 Olympus Corp 画像生成システム、プログラム及び情報記憶媒体
KR101516243B1 (ko) 2014-01-16 2015-05-04 주식회사 엠에스네트웍스 태그를 이용한 관광정보 알림장치 및 그 방법
KR101533606B1 (ko) 2012-12-12 2015-07-08 투어파인더(주) 위치 기반 여행 서비스 서버 및 시스템
KR20150081694A (ko) * 2014-01-06 2015-07-15 엘지전자 주식회사 이동 단말기 및 그 동작 방법
KR20150114066A (ko) * 2014-03-31 2015-10-12 현대엠엔소프트 주식회사 내비게이션 장치에서 아바타를 이용한 안내 시스템
KR20150134938A (ko) * 2014-05-23 2015-12-02 경상대학교산학협력단 모바일 장치
KR20160091570A (ko) * 2015-01-26 2016-08-03 에스케이네트웍스서비스 주식회사 혜택 기반 목적지 경로 안내 시스템 및 방법
KR20170014545A (ko) 2015-07-30 2017-02-08 현대엠엔소프트 주식회사 관심지점 표시 장치 및 방법
KR20180117866A (ko) * 2017-04-20 2018-10-30 김현우 증강현실을 이용한 길 안내 시스템

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012063253A (ja) * 2010-09-16 2012-03-29 Olympus Corp 画像生成システム、プログラム及び情報記憶媒体
KR101533606B1 (ko) 2012-12-12 2015-07-08 투어파인더(주) 위치 기반 여행 서비스 서버 및 시스템
KR20150081694A (ko) * 2014-01-06 2015-07-15 엘지전자 주식회사 이동 단말기 및 그 동작 방법
KR101516243B1 (ko) 2014-01-16 2015-05-04 주식회사 엠에스네트웍스 태그를 이용한 관광정보 알림장치 및 그 방법
KR20150114066A (ko) * 2014-03-31 2015-10-12 현대엠엔소프트 주식회사 내비게이션 장치에서 아바타를 이용한 안내 시스템
KR20150134938A (ko) * 2014-05-23 2015-12-02 경상대학교산학협력단 모바일 장치
KR20160091570A (ko) * 2015-01-26 2016-08-03 에스케이네트웍스서비스 주식회사 혜택 기반 목적지 경로 안내 시스템 및 방법
KR20170014545A (ko) 2015-07-30 2017-02-08 현대엠엔소프트 주식회사 관심지점 표시 장치 및 방법
KR20180117866A (ko) * 2017-04-20 2018-10-30 김현우 증강현실을 이용한 길 안내 시스템

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112146649A (zh) * 2020-09-23 2020-12-29 北京市商汤科技开发有限公司 Ar场景下的导航方法、装置、计算机设备及存储介质
KR20220118117A (ko) 2021-02-18 2022-08-25 세명대학교 산학협력단 증강현실 기반의 응급/재난 구호와 방역지원 시스템 및 방법
CN113989469A (zh) * 2021-11-09 2022-01-28 深圳市商汤科技有限公司 Ar景点显示方法及装置、电子设备和存储介质
WO2023120747A1 (ko) * 2021-12-20 2023-06-29 (주)에어패스 음성인식기반 단축키 xr인터렉티브 연동시스템 및 이를 이용한 연동 방법

Similar Documents

Publication Publication Date Title
KR102027565B1 (ko) 3차원 캐릭터를 이용한 증강현실 도보 길안내 서비스 제공 방법
US10547798B2 (en) Apparatus and method for superimposing a virtual object on a lens
US8897498B2 (en) Mobile imaging device as navigator
US9208499B2 (en) Dynamically mapping images on objects in a navigation system
CN111595349A (zh) 导航方法及装置、电子设备和存储介质
US9104293B1 (en) User interface points of interest approaches for mapping applications
US20090289955A1 (en) Reality overlay device
US20170053451A1 (en) Sharing links in an augmented reality environment
US20210252384A1 (en) Linking real world activities with a parallel reality game
US20090319178A1 (en) Overlay of information associated with points of interest of direction based data services
US20170153113A1 (en) Information processing apparatus, information processing method, and program
Coughlan et al. AR4VI: AR as an accessibility tool for people with visual impairments
US20170115749A1 (en) Systems And Methods For Presenting Map And Other Information Based On Pointing Direction
Bartie et al. A dialogue based mobile virtual assistant for tourists: The SpaceBook Project
US9459115B1 (en) Unobstructed map navigation using animation
JP2012118882A (ja) 情報処理システム、その制御方法及びプログラム
KR101413794B1 (ko) 증강 현실을 이용한 에듀테인먼트 컨텐츠 이동 단말기 및 그 제어방법
KR102119950B1 (ko) 모바일 플랫폼을 이용한 온라인 광고방법
RU2744626C2 (ru) Устройство для услуг на основе местоположения
WO2020149257A1 (ja) 案内文生成装置、案内システム、案内文生成方法及びプログラム
US11454511B2 (en) Systems and methods for presenting map and changing direction based on pointing direction
JP6310122B2 (ja) 情報提供システム及び情報提供方法
US20220018679A1 (en) Systems and Methods for Digital Auditory Mapping
US20200126266A1 (en) Systems And Methods For Presenting Map And Other Information Based On Pointing Direction
Arifiani et al. The Use of Location-Based Augmented Reality as Information Media in The Digital Map Application of Jakabaring Sport City

Legal Events

Date Code Title Description
GRNT Written decision to grant