KR101722053B1 - 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법 - Google Patents

목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법 Download PDF

Info

Publication number
KR101722053B1
KR101722053B1 KR1020160033898A KR20160033898A KR101722053B1 KR 101722053 B1 KR101722053 B1 KR 101722053B1 KR 1020160033898 A KR1020160033898 A KR 1020160033898A KR 20160033898 A KR20160033898 A KR 20160033898A KR 101722053 B1 KR101722053 B1 KR 101722053B1
Authority
KR
South Korea
Prior art keywords
image
additional information
specific
view
displayed
Prior art date
Application number
KR1020160033898A
Other languages
English (en)
Inventor
김영덕
Original Assignee
김영덕
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김영덕 filed Critical 김영덕
Priority to KR1020160033898A priority Critical patent/KR101722053B1/ko
Priority to PCT/KR2016/011641 priority patent/WO2017122909A1/ko
Application granted granted Critical
Publication of KR101722053B1 publication Critical patent/KR101722053B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • H04N13/0007
    • H04N13/0242

Abstract

본 발명은 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법을 개시한다. 즉, 본 발명은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환함으로써, 가상 현실 또는 증강 현실 상에서 사용자가 원하는 화면으로의 화면 전환을 용이하게 하여 사용자의 편의성을 향상시킬 수 있다.

Description

목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법{Information apparatus for switching repeatedly to purposes interest image and method thereof}
본 발명은 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법에 관한 것으로, 특히 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환하거나, 상기 부가 정보가 선택되는 경우 해당 객체와 관련한 영상 정보를 상기 전경뷰 상의 일측에 추가로 표시하는 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법에 관한 것이다.
일반적으로, 이동 단말기(Mobile Terminal)는, GPS(Global Positioning System) 기능 및 통화 기능(또는, 호(call) 기능)을 수행하여, 그 수행 결과를 사용자에게 제공하는 장치이다.
이러한 이동 단말기는 세대를 거듭할수록 더 많은 정보를 더 짧은 시간에 송수신할 수 있고, 다양한 기능이 부가되고 있으나, 이러한 기능에 맞춘 사용자 중심의 편의성을 위한 UI(User Interface) 개발이 부족한 상태이다.
한국공개특허 제10-2013-0084274호 [명칭: 3차원 가상현실 인터넷 쇼핑몰]
본 발명의 목적은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환하는 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법을 제공하는 데 있다.
본 발명의 다른 목적은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 부가 정보가 선택되는 경우 해당 객체와 관련한 영상 정보를 상기 전경뷰 상의 일측에 추가로 표시하는 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법을 제공하는 데 있다.
본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 방법은 목적별 관심 영상으로 반복 전환하는 안내 방법에 있어서, 표시부를 통해, 항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰 중 어느 하나의 형태의 화면을 표시하는 단계; 제어부를 통해, 상기 표시부에 표시되는 화면 내에 포함된 복수의 카테고리 중에서 어느 하나의 카테고리가 선택될 때, 상기 화면에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인하는 단계; 상기 제어부를 통해, 상기 화면 내에서의 상기 확인된 객체의 외곽선 정보를 확인하는 단계; 상기 표시부를 통해, 상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰는, 가상 현실로 구현된 상태, 카메라를 통해 촬영된 상태 및 상기 카메라를 통해 촬영된 영상에 증강 현실이 적용된 상태 중 어느 하나의 상태로 구현될 수 있다.
본 발명과 관련된 일 예로서 상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하는 단계는, 상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보에 대한 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태일 수 있다.
본 발명과 관련된 일 예로서 상기 표시부에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체 중에서 특정 객체가 선택될 때, 상기 표시부를 통해, 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 표시하는 단계; 및 상기 표시부를 통해, 적어도 하나의 추가 객체가 포함된 상기 3D 파노라마 영상 내에서 다른 특정 객체가 선택될 때, 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 표시하는 단계를 더 포함하며, 상기 3D 파노라마 영상 및 상기 다른 3D 파노라마 영상은, 상기 3D 파노라마 영상에 포함된 추가 객체 및 상기 다른 3D 파노라마 영상에 포함된 또 다른 추가 객체의 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태일 수 있다.
본 발명과 관련된 일 예로서 상기 표시부에 표시되는 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보 중에서 특정 지명 및 특정 부가 정보 중 어느 하나에 대한 미리 설정된 이벤트가 감지될 때, 상기 표시부를 통해, 특정 지명 및 특정 부가 정보 중 어느 하나와 관련한 추가 정보를 상기 특정 지명 및 특정 부가 정보가 표시되고 있는 화면의 다른 일측에 표시하는 단계; 및 상기 이벤트에 대응하는 기능이 종료될 때, 상기 표시부를 통해, 상기 이벤트 감지 전의 영상인 상기 화면의 일측에 상기 하나 이상의 객체에 대응하는 지명 및 상기 하나 이상의 객체와 관련한 부가 정보가 표시되는 영상으로 복귀하는 단계를 더 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 추가 정보는, 상기 특정 지명 또는 특정 부가 정보와 관련한 특정 객체에 대응하는 홍보 영상 및 상기 특정 객체와 관련한 3D 파노라마 영상 중 어느 하나일 수 있다.
본 발명과 관련된 일 예로서 상기 미리 설정된 이벤트는, 상기 특정 지명 및 상기 특정 부가 정보를 터치한 상태가 유지되는 경우 및, 상기 특정 지명 및 상기 특정 부가 정보에 대한 상기 단말의 사용자에 의한 터치 제스처가 감지되는 경우 중 어느 하나의 경우를 포함하며, 상기 단말의 사용자에 의한 터치 제스처는, 탭(tap), 터치&홀드(touch & hold), 더블 탭(double tap), 드래그(drag), 플릭(flick), 드래그 앤드 드롭(drag & drop), 핀치(pinch) 및 스와이프(swipe) 중 어느 하나를 포함할 수 있다.
본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 장치는 목적별 관심 영상으로 반복 전환하는 안내 장치에 있어서, 항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰 중 어느 하나의 형태의 화면을 표시하는 표시부; 및 상기 표시부에 표시되는 화면 내에 포함된 복수의 카테고리 중에서 어느 하나의 카테고리가 선택될 때, 상기 화면에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인하고, 상기 화면 내에서의 상기 확인된 객체의 외곽선 정보를 확인하고, 상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하도록 상기 표시부를 제어하는 제어부를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보는, 상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보에 대한 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태일 수 있다.
본 발명과 관련된 일 예로서 상기 제어부는, 상기 표시부에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체 중에서 특정 객체가 선택될 때, 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 표시하도록 상기 표시부를 제어하며, 적어도 하나의 추가 객체가 포함된 상기 3D 파노라마 영상 내에서 다른 특정 객체가 선택될 때, 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 표시하도록 상기 표시부를 제어할 수 있다.
본 발명과 관련된 일 예로서 상기 제어부는, 상기 표시부에 표시되는 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보 중에서 특정 지명 및 특정 부가 정보 중 어느 하나에 대한 미리 설정된 이벤트가 감지될 때, 특정 지명 및 특정 부가 정보 중 어느 하나와 관련한 추가 정보를 상기 특정 지명 및 특정 부가 정보가 표시되고 있는 화면의 다른 일측에 표시하도록 상기 표시부를 제어할 수 있다.
본 발명과 관련된 일 예로서 상기 제어부는, 상기 이벤트에 대응하는 기능이 종료될 때, 상기 이벤트 감지 전의 영상인 상기 화면의 일측에 상기 하나 이상의 객체에 대응하는 지명 및 상기 하나 이상의 객체와 관련한 부가 정보가 표시되는 영상으로 복귀하도록 상기 표시부를 제어할 수 있다.
본 발명은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환함으로써, 가상 현실 또는 증강 현실 상에서 사용자가 원하는 화면으로의 화면 전환을 용이하게 하여 사용자의 편의성을 향상시킬 수 있는 효과가 있다.
또한, 본 발명은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 부가 정보가 선택되는 경우 해당 객체와 관련한 영상 정보를 상기 전경뷰 상의 일측에 추가로 표시함으로써, 사용자 편의를 위한 사용자 인터페이스를 제공하고, 현재 화면에서 사용자가 관심을 보이는 객체와 관련한 추가 정보를 제공함에 따른 사용자의 편의성을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 장치의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 단말의 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 POP(Point of Purchase)의 예를 나타낸 도이다.
도 4는 본 발명의 실시예에 따른 전단의 예를 나타낸 도이다.
도 5는 본 발명의 실시예에 따른 배너 광고의 예를 나타낸 도이다.
도 6은 본 발명의 실시예에 따른 포스터 광고의 예를 나타낸 도이다.
도 7은 본 발명의 실시예에 따른 간판의 예를 나타낸 도이다.
도 8은 본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 방법을 나타낸 흐름도이다.
도 9 내지 도 13은 본 발명의 실시예에 따른 단말의 화면을 나타낸 도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 장치(10)의 구성을 나타낸 블록도이다.
도 1에 도시한 바와 같이, 안내 장치(10)는 단말(100) 및 서버(200)로 구성된다. 도 1에 도시된 안내 장치(10)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 안내 장치(10)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 안내 장치(10)가 구현될 수도 있다.
상기 단말(100)은 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal) 등과 같은 다양한 단말기에 적용될 수 있다.
도 2에 도시된 바와 같이, 상기 단말(100)은 통신부(110), 카메라(120), 저장부(130), 표시부(140), 음성 출력부(150) 및 제어부(160)로 구성된다. 도 2에 도시된 단말(100)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 2에 도시된 구성 요소보다 많은 구성 요소에 의해 단말(100)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 단말(100)이 구현될 수도 있다.
상기 통신부(110)는 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결한다. 이때, 상기 외부의 임의의 단말기는 상기 서버(200) 등을 포함할 수 있다. 여기서, 무선 인터넷 기술로는 무선랜(Wireless LAN: WLAN), DLNA(Digital Living Network Alliance), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access: Wimax), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), IEEE 802.16, 롱 텀 에볼루션(Long Term Evolution: LTE), LTE-A(Long Term Evolution-Advanced), 광대역 무선 이동 통신 서비스(Wireless Mobile Broadband Service: WMBS) 등이 있으며, 상기 통신부(110)는 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신하게 된다. 또한, 근거리 통신 기술로는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association: IrDA), UWB(Ultra Wideband), 지그비(ZigBee), 인접 자장 통신(Near Field Communication: NFC), 초음파 통신(Ultra Sound Communication: USC), 가시광 통신(Visible Light Communication: VLC), 와이 파이(Wi-Fi), 와이 파이 다이렉트(Wi-Fi Direct) 등이 포함될 수 있다. 또한, 유선 통신 기술로는 전력선 통신(Power Line Communication: PLC), USB 통신, 이더넷(Ethernet), 시리얼 통신(serial communication), 광/동축 케이블 등이 포함될 수 있다.
또한, 상기 통신부(110)는 유니버설 시리얼 버스(Universal Serial Bus: USB)를 통해 임의의 단말과 정보를 상호 전송할 수 있다.
또한, 상기 통신부(110)는 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 상기 서버(200) 등과 무선 신호를 송수신한다.
또한, 상기 통신부(110)는 상기 제어부(160)의 제어에 의해 상기 서버(200)로부터 전송되는 상기 단말(100)의 현재 위치 또는 상기 단말(100)에서 상기 서버(200)에 전송한 검색어에 대응하는 항공뷰(또는 스카이 뷰/로드 뷰/전경 뷰)를 수신한다.
상기 카메라(120)는 영상 통화 모드, 촬영 모드, 영상 회의 모드 등에서 이미지 센서(카메라 모듈 또는 카메라)에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 즉, 코덱(CODEC)에 따라 상기 이미지 센서에 의해 얻어지는 해당 화상 데이터들을 각 규격에 맞도록 인코딩/디코딩한다. 상기 처리된 화상 프레임은 상기 제어부(170)의 제어에 의해 상기 표시부(140)에 표시될 수 있다. 일 예로, 상기 카메라(120)는 객체(또는 피사체)(사용자 영상 또는 화상 회의자)를 촬영하고, 그 촬영된 영상(피사체 영상)에 대응하는 비디오 신호를 출력한다.
또한, 상기 카메라(120)에서 처리된 화상 프레임은 상기 저장부(130)에 저장되거나 상기 통신부(110)를 통해 외부 단말기(예를 들어 다른 단말, 상기 서버(200) 등 포함)로 전송될 수 있다.
상기 저장부(130)는 다양한 사용자 인터페이스(User Interface: UI), 그래픽 사용자 인터페이스(Graphic User Interface: GUI) 등을 저장한다.
또한, 상기 저장부(130)는 상기 단말(100)이 동작하는데 필요한 데이터와 프로그램 등을 저장한다.
즉, 상기 저장부(130)는 상기 단말(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 단말(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는 단말(100)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 단말(100)상에 존재할 수 있다. 한편, 응용 프로그램은 상기 저장부(130)에 저장되고, 단말(100)에 설치되어, 제어부(160)에 의하여 상기 단말(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 상기 저장부(130)는 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory: RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory: ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, 단말(100)은 인터넷(internet)상에서 저장부(130)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.
또한, 상기 저장부(130)는 상기 통신부(110)를 통해 수신된 상기 단말(100)의 현재 위치 또는 상기 단말(100)에서 상기 서버(200)에 전송한 검색어에 대응하는 항공뷰(또는 스카이 뷰/로드 뷰/전경 뷰)를 저장한다.
상기 표시부(140)는 상기 제어부(160)의 제어에 의해 상기 저장부(120)에 저장된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시할 수 있다. 여기서, 상기 표시부(140)에 표시되는 콘텐츠는 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다. 또한, 상기 표시부(140)는 터치 스크린 일 수 있다.
또한, 상기 표시부(140)는 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode: OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display), 전자잉크 디스플레이(e-ink display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수 있다.
또한, 상기 표시부(140)는 상기 제어부(160)의 제어에 의해 상기 수신된 상기 단말(100)의 현재 위치 또는 상기 단말(100)에서 상기 서버(200)에 전송한 검색어에 대응하는 항공뷰(또는 스카이 뷰/로드 뷰/전경 뷰)를 표시한다.
상기 음성 출력부(150)는 상기 제어부(160)에 의해 소정 신호 처리된 신호에 포함된 음성 정보를 출력한다. 여기서, 상기 음성 출력부(150)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
또한, 상기 음성 출력부(150)는 상기 제어부(160)에 의해 생성된 안내 음성을 출력한다.
또한, 상기 음성 출력부(150)는 상기 제어부(160)에 의해 상기 수신된 상기 단말(100)의 현재 위치 또는 상기 단말(100)에서 상기 서버(200)에 전송한 검색어에 대응하는 항공뷰(또는 스카이 뷰/로드 뷰/전경 뷰)에 대응하는 음성 정보를 출력한다.
상기 제어부(160)는 상기 단말(100)의 전반적인 제어 기능을 실행한다.
또한, 제어부(160)는 저장부(130)에 저장된 프로그램 및 데이터를 이용하여 단말(100)의 전반적인 제어 기능을 실행한다. 제어부(160)는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 저장부(130)에 액세스하여, 저장부(130)에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 저장부(130)에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
또한, 상기 제어부(160)는 상기 서버(200)와의 연동에 의해, 해당 단말(100)의 사용자에 대한 상기 서버(200)로의 회원 가입 절차를 수행한다.
또한, 회원 가입 절차 수행 시, 상기 제어부(160)는 본인 인증 수단(예를 들어 이동 전화, 신용카드, 아이핀, 이메일 등 포함)을 통한 인증 기능을 완료해야 상기 서버(200)에 대한 회원 가입 절차를 정상적으로 완료할 수 있다.
또한, 회원 가입 절차에 의해, 상기 제어부(160)는 생년월일, 남/여 정보, 전화번호, 이메일, 비밀번호, 이름, 주소 등의 사용자 정보를 상기 통신부(110)를 통해 상기 서버(200)에 제공한다.
또한, 상기 단말(100)에 미리 설치된 앱이 실행되는 경우, 상기 제어부(160)는 앱 실행 결과 화면을 상기 표시부(140)에 표시한다. 여기서, 상기 앱 실행 결과 화면은 회원 정보를 입력받거나 전송하기 위한 회원 정보 항목(또는 메뉴/버튼), 이미지 또는 3D 파노라마 영상을 제공하기 위한 영상 정보 항목, 앱의 기능을 설정하기 위한 설정 항목, 단말(100)을 통해 구매한 상품이나 서비스에 대한 구매 이력 정보 등을 관리하기 위한 마이 페이지 항목 등을 포함한다. 이때, 상기 단말(100)은 백그라운드 상태로 해당 앱과 관련한 서버(200)와 통신한다.
또한, 상기 표시부(140)에 표시되는 앱 실행 결과 화면 중에서 회원 정보 항목이 선택되는 경우, 상기 제어부(160)는 상기 선택된 회원 정보 항목에 대응하는 회원 정보를 입력받기(또는 수신하기) 위한 회원 정보 화면을 상기 표시부(140)에 표시한다.
또한, 상기 제어부(160)는 사용자 입력(또는 사용자 터치)에 따른 회원 정보를 수신한다. 여기서, 상기 회원 정보는 이름, 주소, 사용 언어, 배송지 정보, 쇼핑 객체 종류(예를 들어 아바타 종류, 이모티콘 종류 등 포함) 등을 포함한다.
또한, 상기 제어부(160)는 상기 수신된 회원 정보, 상기 단말(100)의 식별 정보 등을 상기 통신부(110)를 통해 상기 서버(200)에 전송한다. 여기서, 구매 단말(100)의 식별 정보는 MDN(Mobile Directory Number), 모바일 IP, 모바일 MAC, Sim(subscriber identity module: 가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
또한, 상기 표시부(140)에 표시되는 앱 실행 결과 화면 중에서 영상 정보 항목이 선택되는 경우, 상기 제어부(160)는 상기 서버(200)로부터 제공되는 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)를 상기 통신부(110)를 통해 수신한다. 이때, 상기 제어부(160)는 사용자 입력에 따른 검색어를 수신하고, 상기 수신된 검색어를 상기 통신부(110)를 통해 상기 서버(200)에 전송하고, 상기 전송에 응답하여 상기 서버(200)로부터 전송되는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)를 상기 통신부(110)를 통해 수신할 수도 있다. 이때, 상기 항공뷰, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 가상 현실로 구현된 상태이거나 또는 카메라 등을 통해 사전에 촬영된 이미지(또는 영상)일 수 있다.
본 발명에서 설명하는 상기 항공뷰는 항공기에 구비된 카메라(미도시)를 통해 촬영된 영상을 나타내며, 상기 스트리트 뷰(또는 로드 뷰/전경 뷰)는 도로나 건물 등에서 상기 카메라(120)나 전용 카메라(미도시) 등을 통해 촬영된 영상을 나타낼 수 있다.
또한, 상기 카메라(120)를 통해 상기 단말(100)이 위치한 지역의 영상을 확인하는 경우, 상기 제어부(160)는 상기 카메라(120)를 통해 확인되는 영상(예를 들어 스트리트 뷰(또는 로드 뷰/전경 뷰))을 상기 표시부(140)(또는 뷰 파인더(view finder))에 표시한다.
또한, 상기 제어부(160)는 상기 단말(100)의 현재 위치, 상기 표시되는 스트리트 뷰(또는 로드 뷰/전경 뷰) 내의 객체에 대한 정보(예를 들어 상기 스트리트 뷰(또는 로드 뷰/전경 뷰) 내에 포함되는 간판 등 포함) 등을 근거로 해당 스트리트 뷰와 관련한 증강 현실 정보를 확인한다.
또한, 상기 제어부(160)는 상기 확인된 증강 현실 정보를 상기 스트리트 뷰(또는 로드 뷰/전경 뷰)에 적용하여, 앞서 카메라(120)를 통해 확인되는 영상에 상기 증강 현실 정보가 적용된 영상을 상기 표시부(140)에 표시한다.
이와 같이, 본 발명에 따른 실시예는, 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등이 실제 이미지, 가상 현실, 증강 현실 등의 형태로 제공될 수 있다.
또한, 상기 표시부(140)에 표시되는 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등의 일측에 표시된 복수의 카테고리 중에서 어느 하나의(또는 적어도 하나의) 카테고리가 선택되는 경우, 상기 제어부(160)는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인한다.
또한, 상기 제어부(160)는 상기 확인되는 객체에 대해서 해당 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에서의 객체의 외곽선(또는 윤곽선/객체가 차지하는 영역) 정보를 확인한다. 이때, 상기 항공뷰, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 가상 현실로 구현된 상태이거나 또는 카메라 등을 통해 촬영된 이미지(또는 영상)일 수 있다. 또한, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 상기 카메라(120) 및 상기 표시부(140)를 통해 증강 현실 상으로 구현된 상태일 수도 있다.
이와 같이, 상기 제어부(160)는 실제 이미지, 가상 현실, 증강 현실 등의 형태로 제공되는 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등에 대해서 해당 화면의 일측에 표시되는 복수의 카테고리 중에서 선택되는 특정 카테고리와 관련한 하나 이상의 객체를 확인할 수 있다.
또한, 상기 제어부(160)는 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)에 대응하는 지명(또는 건물명/명칭)을 확인한다.
또한, 상기 제어부(160)는 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)와 관련한 부가 정보를 확인한다. 이때, 상기 객체와 관련한 부가 정보는 상기 단말(100)의 해당 객체와 관련한 부가 정보 요청에 응답하여 상기 서버(200)로부터 실시간으로 제공되는 정보일 수 있다.
또한, 상기 제어부(160)는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)가 표시되고 있는 상기 표시부(140)의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명(또는 건물명) 및 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)와 관련한 부가 정보를 말 풍선 형태 등으로 표시한다.
즉, 상기 제어부(160)는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에서 확인된 객체에 인접하게 상기 확인된 객체에 대응하는 지명 및 상기 확인된 객체와 관련한 부가 정보를 표시한다. 이때, 상기 표시부(140)에 표시되는 상기 확인된 하나 이상의 객체, 상기 객체에 대응하는 지명 및 상기 객체와 관련한 부가 정보는 해당 객체, 상기 객체에 대응하는 지명, 상기 객체와 관련한 부가 정보 등의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태(또는 점등 상태)에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태(또는 점등 상태)로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다.
또한, 상기 표시부(140)에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체(또는 지명/부가 정보가 표시되는 하나 이상의 객체) 중에서 특정 객체가 선택되는 경우, 상기 제어부(160)는 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 상기 표시부(140)에 표시한다. 여기서, 상기 3D 파노라마 영상은 적어도 하나의 추가 객체를 포함하며, 해당 추가 객체는 상기 추가 객체의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태(또는 점등 상태)에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태(또는 점등 상태)로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다. 이때, 상기 추가 객체는 POP(Point of Purchase), 전단(Leaflet), 배너 광고(Banner), 포스터 광고(Poster), 간판(Signboard), 가격표(Price Tag) 등을 포함한다.
여기서, 도 3에 도시된 바와 같이, 상기 POP(Point of Purchase)는 매장을 찾아온 고객에게 즉석에서 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다.
또한, 도 4에 도시된 바와 같이, 상기 전단(leaflet)(또는 전단 광고/전단지/전단지 광고)은 광고나 선전을 목적으로 배포하는 간단한 인쇄물의 형태를 나타낸다.
또한, 도 5에 도시된 바와 같이, 상기 배너 광고(banner advertisement)는 매장의 특정 위치에 설치되어 특정 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다.
또한, 도 6에 도시된 바와 같이, 상기 포스터 광고(billing)는 광고 선전용으로 제작하여 붙이는 종이를 나타내며, 시각에 호소하는 것이기 때문에 주목을 끌수 있도록 문자, 도형, 문장 등을 고려하여 제작한다.
또한, 도 7에 도시된 바와 같이, 상기 간판(signboard)은 매장과 관련한 회사명, 상점명, 상품명, 서비스명 등을 표시하는 판을 나타낸다.
또한, 상기 표시부(140)에 표시되는 적어도 하나의 추가 객체가 포함된 3D 파노라마 영상 내에서 다른 특정 객체가 선택되는 경우, 상기 제어부(160)는 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 상기 표시부(140)에 표시할 수 있다.
이와 같이, 상기 단말(100)의 현재 화면에 표시되는 앞서 선택된 카테고리와 관련한 3D 파노라마 영상 내에서 미리 설정된 효과가 적용된 객체가 선택되는 경우, 상기 제어부(160)는 상기 단말(100)의 사용자의 목적에 따른 관심 영상(또는 3D 파노라마 영상)으로 반복 전환할 수 있다.
또한, 이와 같이, 상기 제어부(160)는 사용자가 목적으로 하는 화면 전환을 위해서, 상기 표시부(140)에 표시되는 3D 파노라마 영상 중에서 특정 효과가 적용 중인 객체가 선택될 때마다, 선택된 객체에 대응하는 영상으로 상기 표시부(140)에 표시되는 화면을 전환할 수 있다.
또한, 상기 단말(100)의 사용자의 목적에 따른 추가 영상 제공 과정을 통해, 상기 제어부(160)는 상기 서버(200)와의 연동에 의해 상기 단말(100)의 사용자가 선택한 기능과 관련한 구매 기능(또는 결제 기능) 등을 수행할 수 있다.
또한, 상기 표시부(140)에 표시되는 하나 이상의 객체에 대응하는 지명 및/또는 하나 이상의 객체와 관련한 하나 이상의 부가 정보 중에서 특정 지명 및/또는 특정 부가 정보에 대한 미리 설정된 이벤트가 감지되는 경우, 상기 제어부(160)는 상기 특정 지명 및/또는 특정 부가 정보와 관련한 추가 정보(또는 해당 지명 또는 부가 정보와 관련한 객체에 대응하는 추가 정보)를 상기 지명 또는 부가 정보가 표시되고 있는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)의 다른 일측에 표시한다. 여기서, 상기 추가 정보는 상기 특정 지명 또는 특정 부가 정보와 관련한 특정 객체에 대응하는 홍보 영상, 해당 특정 객체와 관련한 3D 파노라마 영상(예를 들어 앞선 과정에서 해당 객체 선택시 화면 전환에 의해 표시되는 3D 파노라마 영상 등 포함) 등을 포함한다. 이때, 상기 미리 설정된 이벤트는, 상기 특정 지명 및/또는 특정 부가 정보를 선택(또는 터치/클릭)한 상태가 유지되는 경우, 상기 특정 지명 및/또는 특정 부가 정보에 대한 상기 단말(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 여기서, 상기 단말(100)의 사용자에 의한 터치 제스터는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
"탭(tap)"은 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후 움직이지 않은 채 화면에서 즉시 들어올리는 동작을 나타낸다.
"터치&홀드(touch & hold)"는 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)을 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후, 임계 시간(예컨대, 2초) 이상 터치 입력을 유지하는 동작을 나타낸다. 즉, 터치-인 시점과 터치-아웃 시점 간의 시간 차이가 임계 시간(예컨대, 2초) 이상인 경우를 의미한다. 터치 입력이 탭인지 터치&홀드인지를 사용자에게 인식시키도록 하기 위하여 터치 입력이 임계 시간 이상 유지되면 시각적 또는 청각적 또는 촉각적으로 피드백 신호를 제공할 수도 있다. 상기 임계 시간은 구현 예에 따라서 변경될 수 있다.
"더블 탭(double tap)"은 사용자가 손가락이나 터치 도구(stylus)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 두 번 터치하는 동작을 나타낸다.
"드래그(drag)"는 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 터치를 유지한 상태에서 손가락이나 터치 도구를 화면 내의 다른 위치로 이동시키는 동작을 의미한다. 드래그 동작으로 인하여 오브젝트가 이동되거나 후술할 패닝 동작이 수행된다.
"플릭(flick)"은 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 사용자가 손가락이나 터치 도구를 이용하여 임계 속도(예컨대, 100 pixel/s) 이상으로 드래그하는 동작을 나타낸다. 손가락이나 터치 도구의 이동 속도가 임계 속도(예컨대, 100 pixel/s) 이상인지에 기초하여 드래그(또는 패닝)와 플릭을 구별할 수 있다.
"드래그 앤드 드롭(drag & drop)"은 사용자가 손가락이나 터치 도구를 이용해 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 화면 내 소정 위치에 드래그한 후 놓는 동작을 의미한다.
"핀치(pinch)"는 사용자가 두 손가락을 화면(예를 들어 객체, 지명, 부가 정보 등 포함) 위에 터치한 상태에서 서로 다른 방향으로 움직이는 동작을 나타낸다.
"스와이프(swipe)"는 손가락이나 터치 도구로 화면 위의 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 터치한 상태에서 수평 또는 수직 방향으로 일정 거리를 움직이는 동작이다. 사선 방향의 움직임은 스와이프 이벤트로 인식되지 않을 수 있다.
또한, 상기 이벤트에 대응하는 기능이 종료되는 경우, 상기 제어부(160)는 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)으로 복귀한다.
즉, 상기 특정 지명 및/또는 상기 특정 부가 정보를 선택한 상태가 해제되는 경우, 상기 제어부(160)는 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)을 상기 표시부(140)에 표시한다.
또한, 상기 단말(100)의 사용자에 의한 터치 제스처 감지 이후 상기 미리 설정된 시간이 경과한 경우, 상기 제어부(160)는 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)을 상기 표시부(140)에 표시한다.
상기 서버(200)는 상기 단말(100) 등과 통신한다.
또한, 상기 서버(200)는 상기 단말(100)과의 연동에 의해, 상기 단말(100)의 사용자에 대한 회원 가입 절차를 수행한다.
또한, 상기 서버(200)는 해당 서버(200)에 포함된 복수의 카메라(미도시)를 통해 오프라인 또는 가두 매장 상의 하나 이상의 매장, 해당 매장 내의 상품, 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판, 가격표 등을 포함하는 제 1 영상과 제 2 영상을 촬영한다. 여기서, 상기 매장은 백화점, 쇼핑몰, 아울렛, 음식점, 병원, 빌딩(또는 건축물) 등을 포함한다. 이때, 상기 서버(200)는 상기 제 1 영상과 제 2 영상을 촬영하는 지점의 위치 정보(예를 들어 GPS 위치 정보 등 포함)를 확인하고, 상기 확인된 위치 정보를 상기 촬영한 제 1 영상과 제 2 영상과 매칭(또는 연동)하여 저장한다.
또한, 상기 서버(200)는 상기 촬영된 제 1 영상 및 제 2 영상에 대해 픽셀의 방향성을 기준으로 상기 제 1 영상 및 제 2 영상이 중첩되는 중첩 영역을 획득한다.
또한, 상기 서버(200)는 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성한다. 이때, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성할 수 있다. 이때, 상기 생성되는 예비 파노라마 영상은 상기 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점(point)(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
즉, 상기 예비 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말의 위치 정보(예를 들어 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.
본 발명의 실시예에서는, 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성하는 것으로 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성할 수도 있다.
이때, 상기 서버(200)는 별도로 구성되는 복수의 카메라(예를 들어 3D 파노라마 영상을 촬영하기 위한 특수 장치, 특수 차량 등에 구성된 복수의 카메라)를 통해서 촬영된 제 1 영상 및 제 2 영상을 근거로 상기 예비 파노라마 영상을 생성할 수도 있다.
또한, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 각각 인식한다. 여기서, 상기 제 1 객체는 상기 오프라인 상에 위치하는 각각의 매장일 수도 있고, 상기 오프라인 상에 위치하거나 각 매장 내에 위치하는 POP, 전단, 배너 광고, 포스터 광고, 간판, 가격표 등을 포함할 수 있다. 이때, 본 발명에서의 상기 제 1 객체는 각 매장에서 제공하는 상품 및 서비스를 제외하거나 또는 포함한 상태일 수 있다. 또한, 상기 POP, 전단, 배너 광고, 포스터 광고, 간판 등은 할인 행사 코드를 나타내며, 상기 가격표는 상품 코드를 나타낼 수 있다.
즉, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 매장을 각각 인식하거나, 상기 예비 파노라마 영상 내에 포함된 POP, 전단, 배너 광고, 포스터 광고, 간판, 가격표 등을 각각 인식한다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 각각 대응하는 판매 광고, 확대 이미지, 동영상(또는 홍보용 동영상), 쿠폰(예를 들어 할인 쿠폰, 무료 쿠폰 등 포함), 기부, 댓글 등의 정보를 제공하기 위한 객체 및/또는 화면 전환을 위한 다른 추가 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다.
즉, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 판매 광고와 관련한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 판매 광고는 POP, 전단, 배너 광고, 포스터 광고, 간판, 가격표 등을 포함한다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 확대 이미지를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 확대 이미지는 냉장고, 세탁기 등의 상품에 대한 내부 사진(또는 상품과 관련한 추가 이미지)이거나 신선 식품의 확대 사진일 수 있으며, 복수인 경우 슬라이드 방식으로 순서별로 정렬된 상태일 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 동영상(또는 홍보용 동영상)을 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 동영상(또는 홍보용 동영상)은 해당 상품 및/또는 서비스와 관련한 영상, 상품의 사용법과 관련한 동영상(예를 들어 화장품의 사용법에 대한 동영상, 의류 착용 예시에 대한 동영상, 장난감 조립 방법에 대한 동영상, 공구 사용법에 대한 동영상, 조리 방법에 대한 동영상 등 포함) 등을 포함하며, 문자 및/또는 음성 메시지를 포함할 수도 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 쿠폰을 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 쿠폰은 해당 상품 구매시 할인이 적용되는 쿠폰이며, 복수인 경우 슬라이드 방식으로 순서별로 정렬된 상태이며, 사용자 선택에 따라 상기 구매 단말(100)에 다운로드 될 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체와 관련한 상품 및/또는 서비스 구매 시 제공되는 기부 정보를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 기부는 해당되는 상품 구매시 적용되는 기부 정보에 대한 상세 안내 정보를 표시하며, 복수의 경우 슬라이드 방식으로 정렬된 상태일 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체와 관련한 상품 및/또는 서비스에 대한 댓글 정보를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 댓글은 해당 상품 및/또는 서비스를 구매한 다른 단말에서 등록한 해당되는 상품 및/또는 서비스와 관련한 정보(예를 들어 구매 소감, 이용 후기 등 포함)를 포함한다.
이때, 상기 예비 파노라마 영상 정보에 추가되는 객체 및/또는 다른 추가 객체는 해당 객체(또는 상기 다른 추가 객체)의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다.
이와 같이, 예비 파노라마 영상 정보에 추가되는 객체 및/또는 다른 추가 객체에 대해서 다양한 효과를 적용하여, 3D 파노라마 영상 정보 내에서의 식별이 용이하도록 구성할 수 있다.
또한, 상기 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
또한, 상기 서버(200)는 언어별 특성을 고려하여 언어별로 상기 3D 파노라마 영상을 생성할 수도 있다.
본 발명의 실시예에 따라 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
즉, 상기 3D 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말(예를 들어 상기 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.
이에 따라, 상기 임의의 단말에서 위치 정보에 대응하는 3D 파노라마 영상을 요청하는 경우, 상기 서버(200)는 미리 저장된 하나 이상의 객체, 상품, 지점 등의 위치 정보를 포함하는 복수의 3D 파노라마 영상 정보 중에서 상기 임의의 단말로부터 요청된 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 해당 단말에 제공할 수 있다.
예를 들어, 상기 서버(200)는 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체가 포함된 3D 파노라마 영상 정보를 확인할 수 있다.
또한, 상기 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체 및/또는 상품이 없는 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 유사한(예를 들어 서울특별시 강남구 역삼로 123-44 또는 123-46 등 포함) 객체 및/또는 상품이 포함된 3D 파노라마 영상 정보를 확인할 수도 있다.
또한, 상기 복수의 3D 파노라마 영상 정보가 미리 설정된 간격으로 구성된 GPS 정보와 매칭된 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 상기 미리 설정된 간격으로 구성된 GPS 정보를 근거로 상기 임의의 단말의 위치 정보에 대응하는(또는 유사한/관련한) 하나의 3D 파노라마 영상 정보를 확인할 수도 있다.
이외에도, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하는 방법은 지도 검색 서비스에서 활용되는 기술들을 적용할 수도 있다.
이와 같이, 본 발명에 의해 생성되는 3D 파노라마 영상 정보는 위치 정보와 연동된 상태로, 임의의 단말로부터 전송되는 특정 위치 정보에 대해서, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 상기 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 상기 특정 위치 정보를 전송한 해당 단말에 제공할 수 있다.
또한, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 앞선 단계들을 반복적으로 수행하여, 새로운 3D 파노라마 영상을 생성한다.
즉, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 상기 복수의 카메라를 통해 실시간으로 촬영되는 영상들을 합성하여 새로운 예비 파노라마 영상을 생성하고, 상기 생성된 새로운 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 인식하고, 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드를 상기 새로운 예비 파노라마 영상 내에 추가하여 상기 새로운 3D 파노라마 영상을 생성한다.
이때, 상기 생성된 새로운 예비 파노라마 영상 내에서 사람이 인식되는 경우, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 윤곽선을 획득(또는 추출)하고, 상기 새로운 예비 파노라마 영상 내에서 상기 인식된 사람을 제거하고, 상기 사람이 제거된 새로운 예비 파노라마 영상 내에 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드 및 상기 획득된(또는 추출된) 사람의 윤곽선을 추가하여 상기 새로운 3D 파노라마 영상을 생성한다. 여기서, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 위치에 상기 획득된 사람의 윤곽선을 추가한다.
이와 같이, 상기 생성되는 새로운 예비 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 예비 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 예비 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.
또한, 상기 서버(200)는 상기 생성된 새로운 3D 파노라마 영상과 앞서 생성된 3D 파노라마 영상(또는 상기 생성된 새로운 3D 파노라마 영상 정보와 앞서 생성된 3D 파노라마 영상 정보) 간의 차이를 확인한다.
또한, 상기 서버(200)는 상기 확인된 차이를 상기 앞서 생성된 3D 파노라마 영상에 실시간으로 보상하여 최신의 3D 파노라마 영상을 유지한다.
즉, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상이 동일한 경우(또는 차이가 없는 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 포함된 하나 이상의 제 1 객체 및/또는 상품의 상태에 변화가 없는 것으로 판단하여, 앞서 생성된 3D 파노라마 영상을 최신의 3D 파노라마 영상으로 그대로 유지한다.
또한, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상에 차이가 있는 경우, 상기 서버(200)는 변화가 있는 부분(또는 상기 확인된 차이)을 상기 앞서 생성된 3D 파노라마 영상에 보상(또는 반영)하여, 비교 대상 3D 파노라마 영상 간의 차이가 보상된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성한다.
또한, 상기 새로운 3D 파노라마 영상에 사람이 포함된 경우(또는 상기 새로운 3D 파노라마 영상에서 사람이 인식된 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 상기 새로운 3D 파노라마 영상 내에 포함된 사람의 윤곽선을 추가하여, 상기 윤곽선 형태의 사람이 포함된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성할 수도 있다.
이와 같이, 상기 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 3D 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.
또한, 상기 새로 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 상기 새로운 3D 파노라마 영상 내에 포함된 사람을 윤곽선 처리하고 해당 윤곽선 처리된 사람 내부 영역은 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면을 표시함에 따라, 해당 사람에 의해 3D 파노라마 영상 내의 객체, 상품 등이 가려져서 보이지 않게 되는 경우를 방지할 수 있다.
이때, 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에서 차이가 있는 부분만을 보상할 수도 있고, 상기 앞서 생성된 3D 파노라마 영상 대신 상기 생성된 새로운 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 대체할 수도 있다.
이와 같이, 상기 서버(200)는 백그라운드 모델링을 통해 실시간으로 최신의 3D 파노라마 영상을 유지할 수 있다.
또한, 상기 서버(200)는 상기 단말(100)로부터 전송되는 검색어, 단말(100)의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 복수의 3D 파노라마 영상 또는 이미지 중에서 상기 검색어에 대응하는 3D 파노라마 영상 또는 이미지를 확인한다.
또한, 상기 서버(200)는 상기 확인된 상기 검색어에 대응하는 3D 파노라마 영상 또는 이미지를 상기 단말(100)에 전송한다.
또한, 상기 단말(100)에 제공된 3D 파노라마 영상 내에 포함된 객체가 선택되는 경우, 상기 서버(200)는 상기 단말(100)로부터 전송되는 해당 객체에 대한 정보를 근거로 상기 객체와 관련한 추가적인 3D 파노라마 영상을 상기 단말(100)에 제공한다.
이와 같이, 상기 단말(100)의 현재 화면에 표시되는 앞서 선택된 카테고리와 관련한 3D 파노라마 영상 내에서 미리 설정된 효과가 적용된 객체가 선택되는 경우, 상기 서버(200)는 상기 단말(100)의 요청에 의해 상기 단말(100)에서 선택된 객체와 관련한 영상(또는 상기 단말(100)의 사용자의 목적에 따른 관심 영상/3D 파노라마 영상)을 반복적으로 상기 단말(100)에 제공할 수 있다.
또한, 상기 단말(100)의 사용자의 목적에 따른 추가 영상 제공 과정을 통해, 상기 서버(200)는 상기 단말(100) 및 결제 서버(미도시)와의 연동에 의해 상기 단말(100)의 사용자가 선택한 기능과 관련한 구매 기능(또는 결제 기능) 등을 수행할 수 있다. 이때, 상기 서버(200)는 상기 단말(100)에서 등록한 (personal identification number)를 근거로 간편 결제 기능에 의해 상기 구매 기능을 수행할 수도 있다. 여기서, 상기 PIN 번호는 상기 단말(100)의 사용자와 관련한 결제 카드 종류에 대응하는 PIN 번호일 수 있다.
이와 같이, 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환할 수 있다.
또한, 이와 같이, 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 부가 정보가 선택되는 경우 해당 객체와 관련한 영상 정보를 상기 전경뷰 상의 일측에 추가로 표시할 수 있다.
이하에서는, 본 발명에 따른 목적별 관심 영상으로 반복 전환하는 안내 방법을 도 1 내지 도 13을 참조하여 상세히 설명한다.
도 8은 본 발명의 실시예에 따른 목적별 관심 영상으로 반복 전환하는 안내 방법을 나타낸 흐름도이다.
먼저, 단말(100)에 표시되는 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등의 일측에 표시된 복수의 카테고리 중에서 어느 하나의(또는 적어도 하나의) 카테고리가 선택되는 경우, 상기 단말(100)은 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인한다. 또한, 상기 단말(100)은 상기 확인되는 객체에 대해서 해당 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에서의 객체의 외곽선(또는 윤곽선/객체가 차지하는 영역) 정보를 확인한다. 이때, 상기 항공뷰, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 가상 현실로 구현된 상태이거나 또는 카메라 등을 통해 촬영된 이미지(또는 영상)일 수 있다. 또한, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 상기 단말(100)에 구비된 카메라(120) 및 표시부(140)를 통해 증강 현실 상으로 구현된 상태일 수도 있다.
즉, 이미지 또는 가상 현실 상의 영상인 경우, 상기 단말(100)은 서버(200)에 접속한 후, 상기 서버(200)로부터 제공되는 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)를 수신하고, 상기 수신된 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)를 표시한다. 이후, 상기 단말(100)에 표시되는 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)의 일측에 표시된 복수의 카테고리 중에서 어느 하나의(또는 적어도 하나의) 카테고리가 선택되는 경우, 상기 단말(100)은 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인할 수 있다.
또한, 증강 현실인 경우, 상기 단말(100)은 상기 단말(100)에 구비된 카메라(120) 및 표시부(140)(또는 뷰 파인더(view finder))를 통해 스트리트 뷰(또는 로드 뷰/전경 뷰)를 표시(또는 상기 카메라(120) 및 상기 표시부(140)를 통해 하나 이상의 객체(예를 들어 건물, 간판 등 포함)를 포함하는 영상을 표시)한다. 이후, 상기 단말(100)의 현재 위치, 상기 표시되는 스트리트 뷰(또는 로드 뷰/전경 뷰) 내의 객체에 대한 정보(예를 들어 상기 스트리트 뷰(또는 로드 뷰/전경 뷰) 내에 포함되는 간판 등 포함) 등을 근거로 해당 스트리트 뷰와 관련한 증강 현실 정보를 확인하고, 상기 확인된 증강 현실 정보를 상기 스트리트 뷰(또는 로드 뷰/전경 뷰)에 적용한다. 이후, 상기 단말(100)에 표시되는 증강 현실 기능이 적용된 스트리트 뷰(또는 로드 뷰/전경 뷰)의 일측에 표시된 복수의 카테고리 중에서 어느 하나의(또는 적어도 하나의) 카테고리가 선택되는 경우, 상기 단말(100)은 상기 스트리트 뷰(또는 로드 뷰/전경 뷰) 내에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인할 수 있다.
이와 같이, 본 발명에 따른 실시예는, 실제 이미지, 가상 현실, 증강 현실 등의 형태로 제공되는 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등에 대해서 해당 화면의 일측에 표시되는 복수의 카테고리 중에서 선택되는 특정 카테고리와 관련한 하나 이상의 객체를 확인할 수 있다.
또한, 상기 단말(100)은 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)에 대응하는 지명(또는 건물명/명칭)을 확인한다.
또한, 상기 단말(100)은 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)와 관련한 부가 정보를 확인한다. 이때, 상기 객체와 관련한 부가 정보는 상기 단말(100)의 해당 객체와 관련한 부가 정보 요청에 응답하여 상기 서버(200)로부터 실시간으로 제공되는 정보일 수 있다.
일 예로, 상기 단말(100)은 해당 단말(100)에 미리 설치된 앱 또는 특정 서버(200)와 관련한 웹 사이트를 통해서 상기 서버(200)에 접속한다. 이후, 상기 단말(100)은 상기 서버(200)로부터 제공되는 제 1 항공뷰를 수신한다. 여기서, 상기 제 1 항공뷰는 상기 단말(100)에서 상기 서버(200)에 전송한 검색어(예를 들어 역삼동 성당)에 대응하는 이미지일 수 있다. 이후, 도 9에 도시된 바와 같이, 상기 단말(100)은 상기 수신된 제 1 항공뷰(900)를 표시한다. 여기서, 상기 제 1 항공뷰(900)의 일측에는 미리 설정된 복수의 카테고리(예를 들어 쇼핑, 호텔, 관광지, 공연, 스포츠, 쿠폰북 등 포함)(911~916)가 표시될 수 있다. 이후, 상기 도 9에 도시된 제 1 항공뷰(900)의 일측에 표시되는 복수의 카테고리 중에서 호텔(912)이 선택될 때, 상기 단말(100)은 상기 제 1 항공뷰(900)에 포함된 복수의 객체(예를 들어 건물, 도로, 다리, 선착장, 나무 등 포함) 중에서 상기 선택된 카테고리인 호텔(912)과 관련한 하나 이상의 객체(예를 들어 상기 제 1 항공뷰(900)에 포함된 객체 중 호텔에 대응하는 ABC 호텔 및 DEF 호텔)를 확인한다. 이후, 상기 단말(100)은 상기 확인된 하나 이상의 객체인 ABC 호텔에 대한 지명(예를 들어 ABC 호텔) 및 상기 DEF 호텔에 대한 지명(예를 들어 DEF 호텔)을 각각 확인한다. 이후, 상기 단말(100)은 상기 확인된 하나 이상의 객체(예를 들어 상기 제 1 항공뷰(900)에 포함된 객체 중 호텔에 대응하는 ABC 호텔 및 DEF 호텔)와 관련한 부가 정보(예를 들어 상기 ABC 호텔과 관련한 제 1 부가 정보, 상기 DEF 호텔과 관련한 제 2 부가 정보)를 확인한다. 여기서, 상기 제 1 부가 정보는 상기 ABC 호텔의 예약 현황 정보 등을 포함하며, 상기 제 2 부가 정보는 상기 DEF 호텔의 예약 현황 정보 등을 포함한다.
다른 일 예로, 도 10에 도시된 바와 같이, 상기 단말(100)은 상기 단말(100)에 구비된 카메라(120) 및 표시부(140)를 통해 해당 단말(100)이 위치한 지역(예를 들어 잠실한강공원 헬기장)에서 한강변을 바라본 영상(또는 제 1 스트리트 뷰)(1000)을 표시한다. 이후, 상기 단말(100)의 현재 위치, 상기 확인되는 영상 내에 포함된 객체에 대한 정보 등을 근거로 해당 영상과 관련한 증강 현실 정보를 확인한다. 이후, 상기 단말(100)은 상기 확인된 증강 현실 정보를 상기 영상에 적용한다. 이후, 도 11에 도시된 바와 같이, 상기 단말(100)은 상기 증강 현실 정보가 적용된 제 1 스트리트 뷰(1100)를 표시한다. 여기서, 상기 제 1 스트리트 뷰(1100)의 일측에는 상기 증강 현실 정보에 대응하는 복수의 카테고리(예를 들어 쇼핑, 호텔, 관광지, 쿠폰북 등 포함)(1111~1114)가 표시될 수 있다. 이후, 상기 도 11에 도시된 제 1 스트리트 뷰(1100)의 일측에 표시되는 복수의 카테고리 중에서 쿠폰북(1114)이 선택될 때, 상기 단말(100)은 상기 제 1 스트리트 뷰(1100)에 포함된 복수의 객체(예를 들어 건물, 도로, 다리, 선착장, 나무 등 포함) 중에서 상기 선택된 쿠폰북(1114)과 관련한 하나 이상의 객체(예를 들어 상기 제 1 스트리트 뷰(1100)에 포함된 객체 중 제 1 마트 및 제 2 쇼핑몰)를 확인한다. 이후, 상기 단말(100)은 상기 확인된 하나 이상의 객체인 제 1 마트에 대한 지명(예를 들어 GHI 마트) 및 제 2 쇼핑몰에 대한 지명(예를 들어 JKH 백화점)을 각각 확인한다. 이후, 상기 단말(100)은 상기 확인된 하나 이상의 객체(예를 들어 상기 제 1 스트리트 뷰(1100)에 포함된 객체 중 제 1 마트 및 제 2 쇼핑몰)와 관련한 부가 정보(예를 들어 제 1 마트와 관련한 제 3 부가 정보, 상기 제 2 쇼핑몰과 관련한 제 4 부가 정보)를 확인한다. 여기서, 상기 제 3 부가 정보는 상기 제 1 마트에서 사용 가능한 할인 쿠폰 정보, 세일 정보 등을 포함하며, 상기 제 4 부가 정보는 상기 제 2 쇼핑몰에서 사용 가능한 할인 쿠폰 정보 등을 포함한다(S810).
이후, 상기 단말(100)은 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)가 표시되고 있는 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명(또는 건물명) 및 상기 확인된 하나 이상의 객체(또는 상기 확인된 상기 카테고리와 관련한 하나 이상의 객체)와 관련한 부가 정보를 표시한다.
즉, 상기 단말(100)은 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰) 내에서 확인된 객체에 인접하게 상기 확인된 객체에 대응하는 지명 및 상기 확인된 객체와 관련한 부가 정보를 표시한다. 이때, 상기 단말(100)에 표시되는 상기 확인된 하나 이상의 객체, 상기 객체에 대응하는 지명 및 상기 객체와 관련한 부가 정보는 해당 객체, 상기 객체에 대응하는 지명, 상기 객체와 관련한 부가 정보 등의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태(또는 점등 상태)에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태(또는 점등 상태)로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다.
일 예로, 도 12에 도시된 바와 같이, 상기 단말(100)은 상기 제 1 항공뷰(900)에서 상기 선택된 카테고리인 호텔과 관련하여 확인된 객체인 ABC 호텔(1211)에 대응하는 지명(예를 들어 ABC 호텔)(1212) 및 제 1 부가 정보(예를 들어 상기 ABC 호텔의 예약 현황 정보인 총 룸 수: 300개, 예약 가능 룸 수: 150개)(1213) 및, 상기 선택된 카테고리인 호텔과 관련하여 확인된 객체인 DEF 호텔(1221)에 대응하는 지명(예를 들어 DEF 호텔)(1222) 및 제 2 부가 정보(예를 들어 상기 DEF 호텔의 예약 현황 정보인 총 룸 수: 1000개, 예약 가능 룸 수: 550개)(1223)를 각각 표시한다. 이때, 상기 단말(100)에 표시되는 ABC 호텔 및 DEF 호텔에 대응하는 각각의 객체(1211, 1221)는 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태(상기 도 12 상에서는 ABC 호텔 및 DEF 호텔에 대해서 패턴을 적용한 상태로 표시)일 수 있다(S820).
이후, 상기 단말(100)에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체(또는 지명/부가 정보가 표시되는 하나 이상의 객체) 중에서 특정 객체가 선택되는 경우, 상기 단말(100)은 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 표시한다. 여기서, 상기 3D 파노라마 영상은 적어도 하나의 추가 객체를 포함하며, 해당 추가 객체는 상기 추가 객체의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태(또는 점등 상태)에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태(또는 점등 상태)로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다. 이때, 상기 추가 객체는 POP(Point of Purchase), 전단(Leaflet), 배너 광고(Banner), 포스터 광고(Poster), 간판(Signboard), 가격표(Price Tag) 등을 포함한다.
또한, 상기 단말(100)에 표시되는 적어도 하나의 추가 객체가 포함된 3D 파노라마 영상 내에서 다른 특정 객체가 선택되는 경우, 상기 단말(100)은 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 표시할 수 있다.
이와 같이, 상기 단말(100)의 현재 화면에 표시되는 앞서 선택된 카테고리와 관련한 3D 파노라마 영상 내에서 미리 설정된 효과가 적용된 객체가 선택되는 경우, 상기 단말(100)은 상기 단말(100)의 사용자의 목적에 따른 관심 영상(또는 3D 파노라마 영상)으로 반복 전환할 수 있다.
일 예로, 상기 도 12에 도시된 바와 같이, 상기 단말(100)에 표시되는 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태의 객체인 ABC 호텔(1211) 및 DEF 호텔(1221) 중에서 상기 DEF 호텔(1221)이 선택될 때, 상기 단말(100)은 상기 선택된 DEF 호텔과 관련한 3D 파노라마 영상을 표시한다. 이때, 상기 DEF 호텔과 관련한 3D 파노라마 영상은 상기 DEF 호텔의 외관(또는 정면에서 본 외관)을 나타내는 영상일 수 있으며, 해당 DEF 호텔과 관련한 3D 파노라마 영상에 포함된 DEF 호텔의 간판은 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태일 수 있다. 또한, 상기 DEF 호텔과 관련한 3D 파노라마 영상 내에 포함된 해당 간판이 선택될 때, 상기 단말(100)은 상기 선택된 간판(또는 DEF 호텔을 나타내는 간판)과 관련한 호텔 내부의 층별 안내 정보에 대응하는 3D 파노라마 영상을 표시한다. 또한, 상기 층별 안내 정보에 대응하는 3D 파노라마 영상 중에서 특정 층이 선택될 때, 상기 단말(100)은 상기 선택된 특정 층과 관련한 3D 파노라마 영상을 표시할 수 있다.
이와 같은 상기 단말(100)의 사용자의 목적에 따른 추가 영상 제공 과정을 통해, 상기 단말(100)은 상기 서버(200)와의 연동에 의해 상기 단말(100)의 사용자가 선택한 특정 룸에 대한 예약 기능, 결제 기능 등을 수행할 수 있다.
이와 같이, 상기 단말(100)은 사용자가 목적으로 하는 화면 전환을 위해서, 상기 단말(100)에 표시되는 3D 파노라마 영상 중에서 특정 효과가 적용 중인 객체가 선택될 때마다, 선택된 객체에 대응하는 영상으로 전환할 수 있다(S830).
또한, 상기 단말(100)에 표시되는 하나 이상의 객체에 대응하는 지명 및/또는 하나 이상의 객체와 관련한 하나 이상의 부가 정보 중에서 특정 지명 및/또는 특정 부가 정보에 대한 미리 설정된 이벤트가 감지되는 경우, 상기 단말(100)은 상기 특정 지명 및/또는 특정 부가 정보와 관련한 추가 정보(또는 해당 지명 또는 부가 정보와 관련한 객체에 대응하는 추가 정보)를 상기 지명 또는 부가 정보가 표시되고 있는 상기 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)의 다른 일측에 표시한다. 여기서, 상기 추가 정보는 상기 특정 지명 또는 특정 부가 정보와 관련한 특정 객체에 대응하는 홍보 영상, 해당 특정 객체와 관련한 3D 파노라마 영상(예를 들어 앞선 과정에서 해당 객체 선택시 화면 전환에 의해 표시되는 3D 파노라마 영상 등 포함) 등을 포함한다. 이때, 상기 미리 설정된 이벤트는, 상기 특정 지명 및/또는 특정 부가 정보를 선택(또는 터치/클릭)한 상태가 유지되는 경우, 상기 특정 지명 및/또는 특정 부가 정보에 대한 상기 단말(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 여기서, 상기 단말(100)의 사용자에 의한 터치 제스터는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
일 예로, 상기 도 12에 도시된 바와 같이, 상기 단말(100)에 표시되는 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태의 ABC 호텔 및 DEF 호텔 중에서 상기 ABC 호텔과 관련한 제 1 부가 정보(1213)에 대한 터치 상태가 유지되는 동안, 도 13에 도시된 바와 같이, 상기 단말(100)은 상기 제 1 부가 정보(1213)가 표시되고 있는 상기 항공뷰의 다른 일측에 상기 제 1 부가 정보와 관련한 제 1 추가 정보에 대응하는 상기 ABC 호텔에 대한 홍보 영상(또는 ABC 호텔 홍보 영상)(1300)을 표시한다.
다른 일 예로, 상기 도 12에 도시된 바와 같이, 상기 단말(100)에 표시되는 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태의 ABC 호텔 및 DEF 호텔 중에서 상기 DEF 호텔과 관련한 제 2 부가 정보(1223)에 대한 스와이프가 감지될 때, 상기 단말(100)은 상기 제 2 부가 정보(1223)가 표시되고 있는 상기 항공뷰의 또 다른 일측에 상기 제 2 부가 정보와 관련한 제 2 추가 정보에 대응하는 상기 DEF 호텔과 관련한 3D 파노라마 영상을 미리 설정된 시간 동안(예를 들어 5초, 10초 등 포함) 표시한다(S840).
이후, 상기 이벤트에 대응하는 기능이 종료되는 경우, 상기 단말(100)은 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)으로 복귀한다.
즉, 상기 특정 지명 및/또는 상기 특정 부가 정보를 선택한 상태가 해제되는 경우, 상기 단말(100)은 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)으로 복귀한다.
또한, 상기 단말(100)의 사용자에 의한 터치 제스처 감지 이후 상기 미리 설정된 시간이 경과한 경우, 상기 단말(100)은 상기 이벤트 감지 전의 영상(또는 상기 항공뷰/스트리트 뷰/로드 뷰/전경 뷰가 표시되고 있는 일측에 상기 하나 이상의 객체에 대응하는 지명, 상기 하나 이상의 객체와 관련한 하나 이상의 부가 정보 등이 표시되는 영상)으로 복귀한다.
일 예로, 상기 ABC 호텔과 관련한 제 1 부가 정보에 대한 터치 상태가 해제될 때, 상기 단말(100)은 상기 도 13의 상기 ABC 호텔에 대한 홍보 영상(1300)의 표시를 중지하고, 앞선 상기 도 12의 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태의 ABC 호텔 및 DEF 호텔(1211, 1221), 관련한 지명(1212, 1222), 관련한 제 1 부가 정보 및 제 2 부가 정보(1213, 1223) 등을 표시하는 화면으로 복귀한다.
다른 일 예로, 상기 제 2 부가 정보(1223)에 대한 스와이프 감지 이후 상기 미리 설정된 시간(예를 들어 5초)이 경과할 때, 상기 단말(100)은 상기 DEF 호텔과 관련한 3D 파노라마 영상의 표시를 중지하고, 앞선 상기 도 12의 미리 설정된 주기로 불빛이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 불빛이 변화하는 효과가 적용된 상태의 ABC 호텔 및 DEF 호텔(1211, 1221), 관련한 지명(1212, 1222), 관련한 제 1 부가 정보 및 제 2 부가 정보(1213, 1223) 등을 표시하는 화면으로 복귀한다(S850).
본 발명의 실시예는 앞서 설명된 바와 같이, 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환하여, 가상 현실 또는 증강 현실 상에서 사용자가 원하는 화면으로의 화면 전환을 용이하게 하여 사용자의 편의성을 향상시킬 수 있다.
또한, 본 발명의 실시예는 앞서 설명된 바와 같이, 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 부가 정보가 선택되는 경우 해당 객체와 관련한 영상 정보를 상기 전경뷰 상의 일측에 추가로 표시하여, 사용자 편의를 위한 사용자 인터페이스를 제공하고, 현재 화면에서 사용자가 관심을 보이는 객체와 관련한 추가 정보를 제공함에 따른 사용자의 편의성을 향상시킬 수 있다.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 가상 현실 또는 증강 현실을 통해 표시되는 전경뷰 등에서 상기 전경뷰의 일측에 표시되는 복수의 카테고리 중 어느 하나의 카테고리가 선택되는 경우, 상기 전경뷰 내에서 상기 카테고리와 관련한 하나 이상의 객체에 대응하는 부가 정보를 상기 전경뷰 상에 추가로 표시하고, 상기 객체가 선택되는 경우 관련 3D 파노라마 영상으로 전환함으로써, 가상 현실 또는 증강 현실 상에서 사용자가 원하는 화면으로의 화면 전환을 용이하게 하여 사용자의 편의성을 향상시킬 수 있는 것으로, 단말 분야, 파노라마 영상 분야, 쇼핑 정보 제공 분야, 마케팅 분야, 서버 분야 등에서 광범위하게 이용될 수 있다.
10: 안내 장치 100: 단말
200: 서버 110: 통신부
120: 카메라 130: 저장부
140: 표시부 150: 음성 출력부
160: 제어부

Claims (12)

  1. 목적별 관심 영상으로 반복 전환하는 안내 방법에 있어서,
    표시부를 통해, 항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰 중 어느 하나의 형태의 화면을 표시하는 단계;
    제어부를 통해, 상기 표시부에 표시되는 화면 내에 포함된 복수의 카테고리 중에서 어느 하나의 카테고리가 선택될 때, 상기 화면에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인하는 단계;
    상기 제어부를 통해, 상기 화면 내에서의 상기 확인된 객체의 외곽선 정보를 확인하는 단계;
    상기 표시부를 통해, 상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하는 단계;
    상기 표시부에 표시되는 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보 중에서 특정 지명 및 특정 부가 정보 중 어느 하나에 대한 미리 설정된 이벤트가 감지될 때, 상기 표시부를 통해, 사용자가 관심을 갖는 목적별 관심 영상으로의 화면 전환을 용이하게 하기 위해서 특정 지명 및 특정 부가 정보 중 어느 하나와 관련한 추가 정보를 상기 특정 지명 및 특정 부가 정보가 표시되고 있는 화면의 다른 일측에 표시하는 단계; 및
    상기 이벤트에 대응하는 기능이 종료될 때, 상기 표시부를 통해, 상기 사용자가 관심을 갖는 목적별 관심 영상으로의 화면 전환을 용이하게 하기 위해서, 상기 표시부의 다른 일측에 표시 중인 상기 추가 정보를 삭제하고, 상기 이벤트 감지 전의 영상인 상기 화면의 일측에 상기 하나 이상의 객체에 대응하는 지명 및 상기 하나 이상의 객체와 관련한 부가 정보가 표시되는 영상으로 복귀하는 단계를 포함하며,
    상기 추가 정보는,
    상기 특정 지명 또는 특정 부가 정보와 관련한 특정 객체에 대응하는 홍보 영상 및 상기 특정 객체와 관련한 3D 파노라마 영상 중 어느 하나이며,
    상기 미리 설정된 이벤트는,
    상기 특정 지명 및 상기 특정 부가 정보를 터치한 상태가 유지되는 경우인 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 방법.
  2. 제 1 항에 있어서,
    상기 항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰는,
    가상 현실로 구현된 상태, 카메라를 통해 촬영된 상태 및 상기 카메라를 통해 촬영된 영상에 증강 현실이 적용된 상태 중 어느 하나의 상태로 구현된 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 방법.
  3. 제 1 항에 있어서,
    상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하는 단계는,
    상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보에 대한 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태인 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 방법.
  4. 제 1 항에 있어서,
    상기 표시부에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체 중에서 특정 객체가 선택될 때, 상기 표시부를 통해, 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 표시하는 단계; 및
    상기 표시부를 통해, 적어도 하나의 추가 객체가 포함된 상기 3D 파노라마 영상 내에서 다른 특정 객체가 선택될 때, 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 표시하는 단계를 더 포함하며,
    상기 3D 파노라마 영상 및 상기 다른 3D 파노라마 영상은,
    상기 3D 파노라마 영상에 포함된 추가 객체 및 상기 다른 3D 파노라마 영상에 포함된 또 다른 추가 객체의 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태인 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 방법.
  5. 삭제
  6. 삭제
  7. 제 1 항에 있어서,
    상기 미리 설정된 이벤트는,
    상기 특정 지명 및 상기 특정 부가 정보에 대한 상기 표시부를 포함하는 단말의 사용자에 의한 터치 제스처가 감지되는 경우를 더 포함하며,
    상기 단말의 사용자에 의한 터치 제스처는,
    탭(tap), 터치&홀드(touch & hold), 더블 탭(double tap), 드래그(drag), 플릭(flick), 드래그 앤드 드롭(drag & drop), 핀치(pinch) 및 스와이프(swipe) 중 어느 하나를 포함하는 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 방법.
  8. 목적별 관심 영상으로 반복 전환하는 안내 장치에 있어서,
    항공뷰, 스트리트 뷰, 로드 뷰 및 전경 뷰 중 어느 하나의 형태의 화면을 표시하는 표시부; 및
    상기 표시부에 표시되는 화면 내에 포함된 복수의 카테고리 중에서 어느 하나의 카테고리가 선택될 때, 상기 화면에 포함된 복수의 객체 중에서 상기 선택된 카테고리와 관련한 하나 이상의 객체를 확인하고, 상기 화면 내에서의 상기 확인된 객체의 외곽선 정보를 확인하고, 상기 화면의 일측에 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보를 각각 표시하도록 상기 표시부를 제어하고,
    상기 표시부에 표시되는 상기 확인된 하나 이상의 객체에 대응하는 지명 및 상기 확인된 하나 이상의 객체와 관련한 부가 정보 중에서 특정 지명 및 특정 부가 정보 중 어느 하나에 대한 미리 설정된 이벤트가 감지될 때, 사용자가 관심을 갖는 목적별 관심 영상으로의 화면 전환을 용이하게 하기 위해서 특정 지명 및 특정 부가 정보 중 어느 하나와 관련한 추가 정보를 상기 특정 지명 및 특정 부가 정보가 표시되고 있는 화면의 다른 일측에 표시하도록 상기 표시부를 제어하고, 상기 이벤트에 대응하는 기능이 종료될 때 상기 사용자가 관심을 갖는 목적별 관심 영상으로의 화면 전환을 용이하게 하기 위해서, 상기 표시부의 다른 일측에 표시 중인 상기 추가 정보를 삭제하여 상기 이벤트 감지 전의 영상인 상기 화면의 일측에 상기 하나 이상의 객체에 대응하는 지명 및 상기 하나 이상의 객체와 관련한 부가 정보가 표시되는 영상으로 복귀하도록 상기 표시부를 제어하는 제어부를 포함하며,
    상기 추가 정보는,
    상기 특정 지명 또는 특정 부가 정보와 관련한 특정 객체에 대응하는 홍보 영상 및 상기 특정 객체와 관련한 3D 파노라마 영상 중 어느 하나이며,
    상기 미리 설정된 이벤트는,
    상기 특정 지명 및 상기 특정 부가 정보를 터치한 상태가 유지되는 경우인 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 장치.
  9. 제 8 항에 있어서,
    상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보는,
    상기 확인된 객체의 외곽선 정보, 상기 지명 및 상기 부가 정보 중 적어도 하나의 정보에 대한 확인이 용이하도록 미리 설정된 주기로 불빛이 점등 상태에서 점차 소등되고 다시 소등 상태에서 점차 점등 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과 및 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 중 어느 하나의 효과가 적용된 상태인 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 장치.
  10. 제 8 항에 있어서,
    상기 제어부는,
    상기 표시부에 표시되는 미리 설정된 효과가 적용 중인 하나 이상의 객체 중에서 특정 객체가 선택될 때, 상기 선택된 특정 객체와 관련한 3D 파노라마 영상을 표시하도록 상기 표시부를 제어하며, 적어도 하나의 추가 객체가 포함된 상기 3D 파노라마 영상 내에서 다른 특정 객체가 선택될 때, 상기 선택된 다른 특정 객체와 관련한 다른 3D 파노라마 영상을 표시하도록 상기 표시부를 제어하는 것을 특징으로 하는 목적별 관심 영상으로 반복 전환하는 안내 장치.
  11. 삭제
  12. 삭제
KR1020160033898A 2016-01-14 2016-03-22 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법 KR101722053B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160033898A KR101722053B1 (ko) 2016-03-22 2016-03-22 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법
PCT/KR2016/011641 WO2017122909A1 (ko) 2016-01-14 2016-10-17 단말 및 그의 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160033898A KR101722053B1 (ko) 2016-03-22 2016-03-22 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020170036129A Division KR20170110045A (ko) 2017-03-22 2017-03-22 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR101722053B1 true KR101722053B1 (ko) 2017-03-31

Family

ID=58500977

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160033898A KR101722053B1 (ko) 2016-01-14 2016-03-22 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR101722053B1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110022219A (ko) * 2009-08-27 2011-03-07 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20120015637A (ko) * 2010-08-12 2012-02-22 주식회사 팬택 Ar 정보창 표시를 위한 사용자 장치 및 그 방법
KR20120015638A (ko) * 2010-08-12 2012-02-22 주식회사 팬택 필터의 선택이 가능한 증강 현실 사용자 장치 및 방법, 그리고, 증강 현실 서버
KR20130084274A (ko) 2013-06-26 2013-07-24 전봉균 3차원 가상현실 인터넷 쇼핑몰
KR20160009233A (ko) * 2014-07-16 2016-01-26 주식회사 도담시스템스 파노라마 영상을 이용한 시뮬레이션 시스템 및 이의 시뮬레이션 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110022219A (ko) * 2009-08-27 2011-03-07 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20120015637A (ko) * 2010-08-12 2012-02-22 주식회사 팬택 Ar 정보창 표시를 위한 사용자 장치 및 그 방법
KR20120015638A (ko) * 2010-08-12 2012-02-22 주식회사 팬택 필터의 선택이 가능한 증강 현실 사용자 장치 및 방법, 그리고, 증강 현실 서버
KR20130084274A (ko) 2013-06-26 2013-07-24 전봉균 3차원 가상현실 인터넷 쇼핑몰
KR20160009233A (ko) * 2014-07-16 2016-01-26 주식회사 도담시스템스 파노라마 영상을 이용한 시뮬레이션 시스템 및 이의 시뮬레이션 방법

Similar Documents

Publication Publication Date Title
US10945094B2 (en) Social media systems and methods and mobile devices therefor
JP6302602B2 (ja) チケット情報ディスプレイ方法、装置、プログラムおよび記録媒体
EP2675143B1 (en) User terminal apparatus providing a navigation function, server and controlling method thereof
US9607094B2 (en) Information communication method and information communication apparatus
EP2987318B1 (en) System and method for the distribution of audio and projected visual content
KR101715828B1 (ko) 단말 및 그의 제어 방법
KR101809673B1 (ko) 단말 및 그의 제어 방법
KR102211453B1 (ko) 쇼핑 정보 제공 시스템
KR101722053B1 (ko) 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법
KR101907885B1 (ko) 단말 및 그의 제어 방법
KR101613282B1 (ko) 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법
KR20170110045A (ko) 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법
JP7210884B2 (ja) 情報処理装置、表示システム及びプログラム
KR20180004643A (ko) 단말 및 그의 제어 방법
KR20170112975A (ko) 이벤트에 따른 경로 정보 제공 장치 및 그 방법
KR20200008359A (ko) Mr 콘텐츠 제공 시스템 및 그 방법
KR101779502B1 (ko) 이벤트에 따른 경로 정보 제공 장치 및 그 방법
KR101489299B1 (ko) 제안 및 수용 정보에 대한 정보를 표시하기 위한 방법, 서버 및 컴퓨터 판독 가능한 기록 매체
KR20180022528A (ko) 단말 및 그의 제어 방법
KR20190043001A (ko) 단말 및 그의 제어 방법
US20240037871A1 (en) Image processing apparatus, image processing method, and image processing system
KR102020352B1 (ko) 3d 객체와 마커를 이용한 mr 콘텐츠 제공 장치 및 그 방법
KR20190140311A (ko) 단말 및 그의 제어 방법
KR20190140310A (ko) 단말 및 그의 제어 방법
KR20190006280A (ko) 시각 및 위치 기반 정보 제공 시스템 및 그 방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
GRNT Written decision to grant