KR20110088774A - 증강 현실 제공 시스템 및 방법 - Google Patents

증강 현실 제공 시스템 및 방법 Download PDF

Info

Publication number
KR20110088774A
KR20110088774A KR1020100008436A KR20100008436A KR20110088774A KR 20110088774 A KR20110088774 A KR 20110088774A KR 1020100008436 A KR1020100008436 A KR 1020100008436A KR 20100008436 A KR20100008436 A KR 20100008436A KR 20110088774 A KR20110088774 A KR 20110088774A
Authority
KR
South Korea
Prior art keywords
augmented reality
reality providing
information data
terminal
information
Prior art date
Application number
KR1020100008436A
Other languages
English (en)
Other versions
KR101096392B1 (ko
Inventor
김성태
김왕천
조용준
남태우
전현준
이시현
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=43385749&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20110088774(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020100008436A priority Critical patent/KR101096392B1/ko
Priority to US12/862,727 priority patent/US20110187744A1/en
Priority to EP10183078A priority patent/EP2355440B1/en
Priority to CN2010105160085A priority patent/CN102142005A/zh
Publication of KR20110088774A publication Critical patent/KR20110088774A/ko
Application granted granted Critical
Publication of KR101096392B1 publication Critical patent/KR101096392B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/33—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections
    • A63F13/332—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections using wireless networks, e.g. cellular phone networks
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/79—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/40—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of platform network
    • A63F2300/406—Transmission via wireless network, e.g. pager or GSM
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55—Details of game data or player data management
    • A63F2300/5546—Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • A63F2300/5573—Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history player location
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/10—Details of telephonic subscriber devices including a GPS signal receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • General Business, Economics & Management (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 단말기 사용자의 현재 위치와 바라보는 방향에 의거하여 사용자가 현재 위치에서 바라보는 방향의 주변 정보 데이터를 제공할 수 있도록 하는 증강 현실 제공 시스템 및 방법에 관한 것이다.
이를 위해, 본 발명은 증강 현실 제공 서버에서 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리하고 있다가, 증강 현실 모드의 실행에 따라 접속된 증강 현실 제공 단말기로부터 단말기의 현재 위치 정보와 방위 정보를 수신하게 되면, 수신한 위치 정보와 방위 정보에 의거하여 데이터베이스에서 단말기가 현재 위치해 있는 구역 내에서 단말기가 향하고 있는 방향의 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 증강 현실 제공 단말기로 전송하고, 증강 현실 제공 단말기는 접속된 증강 현실 제공 서버로부터 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하도록 구성되는 것이 바람직하다.
이에 따라, 본 발명은 마커나 물체의 인식없이 사용자의 현재 위치 정보와 방위 정보만으로 사용자에게 증강 현실 서비스를 제공할 수 있으며, 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리함으로써, 증강 현실 서비스 제공시에 사용자에게 최적의 정보 데이터를 제공할 수 있게 된다.

Description

증강 현실 제공 시스템 및 방법{SYSTEM AND METHOD FOR PROVIDING AUGMENTED REALITY}
본 발명은 증강 현실 제공 시스템 및 방법에 관한 것으로서, 특히 단말기 사용자의 현재 위치와 바라보는 방향에 의거하여 사용자가 현재 위치에서 바라보는 방향의 주변 정보 데이터를 제공할 수 있도록 하는 증강 현실 제공 시스템 및 방법에 관한 것이다.
일반적으로 증강 현실(Augmented Reality)이라 함은 사용자 눈으로 보는 현실세계와 부가 정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주는 기술로, 증강 현실 기술을 이용하여 현실세계를 배경으로 가상세계를 합성하기 위해, 미리 설정된 패턴을 갖는 마커(Marker)를 이용하는 방법과 현실세계에 존재하는 건물이나 조형물 등의 물체(Object)를 이용하는 방법이 있다.
마커를 이용하는 방법은 단말기에 구비되어 있는 카메라를 이용하여 흑색의 바탕에 흰색의 패턴으로 이루어진 마커를 포함하는 현실세계를 촬영하고, 촬영된 마커의 흰색 패턴을 인식한 후, 인식된 패턴에 대응하는 정보 데이터를 현실세계와 합성한 후 화면에 디스플레이하는 것으로, 마커를 인식해야만 정보 데이터를 제공할 수 있는 문제점이 있다.
한편, 현실세계의 물체를 이용하는 방법은 마커를 사용하는 대신 현실세계의 물체를 인식한 후, 인식된 물체에 대응하는 정보 데이터를 현실세계와 합성한 후 화면에 디스플레이하는 것으로, 이 경우에는 인식된 물체와 관련된 모든 정보를 제공해야 하고, 물체를 인식해야만 정보 데이터를 제공할 수 있는 문제점이 있다.
본 발명은 전술한 문제점을 해결하기 위해 안출된 것으로서, 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리함으로써, 마커나 물체를 인식하지 않고도 사용자의 현재 위치와 방향에 의거하여 사용자가 현재 위치에서 바라보는 방향의 주변 정보 데이터를 제공할 수 있도록 하는 증강 현실 제공 시스템 및 방법을 제공함에 그 목적이 있다.
전술한 목적을 달성하기 위한 본 발명의 일 실시예에 따른 증강 현실 제공 시스템은, 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리하는 증강 현실 제공 서버와; 증강 현실 모드의 실행에 따라 상기 증강 현실 제공 서버에 접속하여 자신의 현재 위치 정보를 전송하는 증강 현실 제공 단말기를 포함하되, 상기 증강 현실 제공 서버는, 상기 증강 현실 제공 단말기로부터 수신한 상기 증강 현실 제공 단말기의 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 증강 현실 제공 단말기로 제공하는 것이 바람직하다.
한편, 본 발명의 일 실시예에 따른 증강 현실 제공 단말기는, 단말기의 현재 위치 정보를 제공하는 위치 정보 제공부와; 증강 현실 모드에서 무선 통신부를 통해 접속된 증강 현실 제공 서버로 단말기의 현재 위치 정보를 전송하고, 상기 증강 현실 제공 서버로부터 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 수신하는 정보 데이터 수신부와; 상기 정보 데이터 수신부를 통해 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부에 디스플레이하는 영상 처리부를 포함하여 이루어지는 것이 바람직하다.
한편, 본 발명의 일 실시예에 따른 증강 현실 제공 서버는, 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 저장하고 있는 데이터베이스와; 무선 통신부를 통해 접속된 증강 현실 제공 단말기로부터 수신한 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 무선 통신부를 통해 상기 증강 현실 제공 단말기로 전송하는 증강 현실 제공부를 포함하여 이루어지는 것이 바람직하다.
한편, 본 발명의 일 실시예에 따른 증강 현실 제공 방법은, 증강 현실 제공 서버에서 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 저장하는 과정과; 증강 현실 제공 단말기에서 증강 현실 모드의 실행에 따라 상기 증강 현실 제공 서버에 접속하여 자신의 현재 위치 정보를 전송하는 과정과; 상기 증강 현실 제공 서버에서 상기 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색하여, 이를 상기 증강 현실 제공 단말기로 전송하는 과정과; 상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하는 과정을 포함하여 이루어지는 것이 바람직하다.
본 발명의 증강 현실 제공 시스템 및 방법에 따르면, 마커나 물체를 인식하지 않고도 사용자의 현재 위치 정보와 방향 정보에 의거하여 사용자가 현재 위치에서 바라보는 방향의 주변 정보 데이터를 증강 현실을 통해 사용자에게 제공할 수 있게 되고, 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리함으로써, 증강 현실 서비스 제공시에 사용자에게 사용자가 원하는 최적의 정보 데이터를 제공할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 증강 현실 제공 시스템의 구성을 개략적으로 보인 도면.
도 2는 본 발명에서 적용되는 구역의 모양을 예시적으로 보인 도면.
도 3은 본 발명에 적용되는 증강 현실 제공 단말기의 구성을 개략적으로 보인 도면.
도 4는 본 발명에 적용되는 증강 현실 제공 서버의 구성을 개략적으로 보인 도면.
도 5는 본 발명의 일 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도.
도 6은 본 발명의 다른 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도.
도 7은 본 발명의 또 다른 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도.
이하에서는 첨부한 도면을 참조하여 본 발명의 바람직한 실시예에 따른 증강 현실 제공 시스템 및 방법에 대해서 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 증강 현실 제공 시스템의 구성을 개략적으로 보인 도이다.
도 1에서, 증강 현실 제공 단말기(10)는 증강 현실 모드의 실행에 따라 접속된 증강 현실 제공 서버(20)로 자신의 현재 위치 정보를 전송하여, 증강 현실 제공 서버(20)로부터 자신이 현재 위치해 있는 구역에 대한 모든 방위의 정보 데이터를 수신하고, 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이한다.
또한, 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터 중에서 자신의 현재 방위 정보에 의거하여 자신이 향하고 있는 방향의 정보 데이터를 추출한 후, 추출된 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이한다.
증강 현실 제공 서버(20)는 증강 현실 제공 단말기(10)로부터 증강 현실 제공 단말기(10)의 위치 정보만을 수신하게 되면, 수신한 위치 정보에 의거하여 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 모든 방위의 정보 데이터를 검색하여, 이를 증강 현실 제공 단말기(10)로 전송한다.
본 발명에 적용되는 각각의 정보 데이터는, 구역 식별 정보와 방위 정보를 포함하여 이루어지는 것이 바람직하다.
그리고, 본 발명에서 구역 모양은 원형, 육각형, 팔각형, 12각형, 타원형, 부채꼴 등의 기하학적인 모양으로 다양하게 구현될 수 있다. 또한, 구역 모양은 구, 육면체, 팔면체 등 3차원적으로도 구현될 수 있다.
여기서, 구역은 다양한 크기로 구현될 수 있다.
도 2는 본 발명에서 적용되는 구역의 모양을 예시적으로 보인 도로, 증강 현실 제공 서버(20)에는 각 구역 단위로 사용자에게 제공할 정보 데이터가 데이터베이스화되어 있다. 이에 따라, 구역A 내에서 북쪽을 향하고 있는 증강 현실 제공 단말기(10)들은 증강 현실 제공 서버(20)로부터 동일한 정보 데이터를 수신하게 된다.
한편, 전술한, 증강 현실 제공 단말기(10)는 증강 현실 모드의 실행에 따라 증강 현실 제공 서버(20)에 접속하여 자신의 현재 위치 정보와 함께 방위 정보를 전송하고, 증강 현실 제공 서버(20)로부터 자신이 현재 위치해 있는 구역 내에서 자신이 향하고 있는 방향의 정보 데이터를 수신하면, 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이한다.
증강 현실 제공 서버(20)는 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리하고, 무선 통신망을 통해 접속된 증강 현실 제공 단말기(10)로부터 증강 현실 제공 단말기(10)의 현재 위치 정보와 함께 방위 정보를 수신하게 되면, 수신한 위치 정보와 방위 정보에 의거하여, 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역 내에서 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 검색한 후, 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다.
도 3은 본 발명에 적용되는 증강 현실 제공 단말기의 구성을 개략적으로 보인 도이다.
도 3에서, 무선 통신부(11)는 증강 현실 모드의 실행에 따라 구동된 정보 데이터 수신부(15)의 제어하에 무선 통신망을 통해 증강 현실 제공 서버(20)에 접속한다.
메모리부(12)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 저장한다.
위치 정보 제공부(13)는 증강 현실 제공 단말기(10)의 현재 위치 정보를 제공한다.
전술한, 위치 정보 제공부(13)는 GPS(Global Positioning System)로 구현될 수 있다.
방위 정보 제공부(14)는 증강 현실 제공 단말기(10)가 현재 향하고 있는 방향의 방위 정보를 제공한다.
전술한, 방위 정보 제공부(14)는 전자 나침반으로 구현될 수 있다.
정보 데이터 수신부(15)는 증강 현실 모드의 실행에 따라 구동되어, 무선 통신부(11)를 통해 증강 현실 제공 서버(20)에 접속되면, 정보 데이터를 수신하기 위해 증강 현실 제공 서버(20)로 위치 정보 제공부(13)로부터 제공받은 증강 현실 제공 단말기(10)의 현재 위치 정보를 전송하고, 증강 현실 제공 서버(20)로부터 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 모든 방위의 정보 데이터를 모두 수신하여, 이를 영상 처리부(17)로 전달한다.
또한, 정보 데이터 수신부(15)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터 중에서 방위 정보 제공부(14)로부터 제공받은 방위 정보에 의거하여 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 추출한 후, 추출된 정보 데이터를 영상 처리부(17)로 전달한다.
또한, 정보 데이터 수신부(15)는 접속된 증강 현실 제공 서버(20)로 증강 현실 제공 단말기(10)의 현재 위치 정보와 방위 정보를 전송하고, 증강 현실 제공 서버(20)로부터 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역 내에서 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 수신하여, 이를 영상 처리부(17)로 전달한다.
전술한, 정보 데이터 수신부(15)는 증강 현실 제공 단말기(10)의 이동에 따라 변동되는 위치 정보와 방위 정보를 위치 정보 제공부(13)와 방위 정보 제공부(14)로부터 각각 전달받아 이를 증강 현실 제공 서버(20)로 실시간 전송하고, 위치 정보와 방위 정보의 변동에 따라 증강 현실 제공 서버(20)로부터 새로 수신되는 정보 데이터를 영상 처리부(17)로 전달한다.
또한, 정보 데이터 수신부(15)는 증강 현실 제공 서버(20)로부터 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 정보 데이터를 다운로드받아 메모리부(12)에 저장한 후, 동일 구역 내에서 증강 현실 모드가 재실행되어 증강 현실 제공 서버(20)에 재접속하는 경우, 증강 현실 제공 서버(20)로부터 수신한 해당 구역에 대한 정보 데이터의 버전 정보와 메모리부(12)에 저장되어 있는 해당 구역에 대한 정보 데이터의 버전 정보를 비교하여, 메모리부(12)에 저장되어 있는 해당 구역의 정보 데이터가 구버전인 경우에는 증강 현실 제공 서버(20)로부터 업데이트된 정보 데이터를 다운로드받아, 이를 메모리부(12)에 저장하는 한편, 증강 현실 제공 서버(20)로부터 새로 다운로드한 정보 데이터와 메모리부(12)에서 읽어온 정보 데이터를 영상 처리부(17)로 전달한다.
한편, 메모리부(12)에 저장되어 있는 정보 데이터와 증강 현실 제공 서버(20)에 저장되어 있는 정보 데이터가 동일한 것으로 확인된 경우에는, 메모리부(12)에 저장되어 있는 정보 데이터(증강 현실 제공 단말기가 현재 위치해 있는 구역의 정보 데이터)를 읽어와 이를 영상 처리부(17)로 전달한다.
영상 처리부(17)는 정보 데이터 수신부(15)로부터 전달받은 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 이를 화면 표시부(18)에 디스플레이한다.
전술한, 카메라(16)는 회전 이동이 가능한 카메라로 구현될 수 있으며, 카메라(16)가 회전 이동이 가능한 카메라로 구현되는 경우에는 방위 정보 제공부(14)가 카메라(16)에 내장되어 카메라(16)의 회전 이동에 따라 변동되는 방위 정보를 실시간으로 획득하여 이를 정보 데이터 수신부(15)로 제공하도록 한다. 이러한 경우, 사용자는 직접 몸을 움직이지 않고도 해당 구역에서 원하는 방향의 정보 데이터를 제공받을 수 있게 된다.
한편, 다른 실시예에서 정보 데이터 수신부(15)는 현재 구역A에 위치해 있으면서 구역D의 공간을 보고 싶어하는 사용자로부터 구역D로의 위치 이동을 요청받으면, 위치 이동하고자 하는 구역D의 식별 정보를 입력받아 이를 증강 현실 제공 서버(20)로 전송하고, 증강 현실 제공 서버(20)로부터 구역D에 대한 영상 데이터와 정보 데이터를 수신받아, 이를 영상 처리부(17)로 전달한다. 이에 따라, 사용자는 구역D로 직접 이동하지 않고도 구역A에서 구역D의 정보 데이터를 제공받을 수 있게 된다.
또 다른 실시예에서 정보 데이터 수신부(15)는 현재 구역A에 위치해 있으면서 구역E에 위치해 있는 타 증강 현실 제공 단말기와 공간을 공유하고자 하는 사용자로부터 공간 공유를 요청받으면, 증강 현실 제공 서버(20)로 공간을 공유하고자 하는 타 증강 현실 제공 단말기(10)의 식별 정보를 전송함과 동시에, 무선 통신부(11)를 통해 구역E에 위치해 있는 타 증강 현실 제공 단말기와 영상 호를 설정하여 카메라를 통해 획득한 영상 데이터를 해당 증강 현실 제공 단말기로 전송한다.
전술한 바와 같이, 증강 현실 제공 단말기(10)의 정보 데이터 수신부(15)로부터 타 증강 현실 제공 단말기와의 공간 공유를 요청받은 증강 현실 제공 서버(20)는 구역A에 위치해 있는 증강 현실 제공 단말기(10)로 보내던 정보 데이터를 구역E에 위치해 있는 타 증강 현실 제공 단말기로도 전송한다. 이에 따라, 구역A에 위치해 있는 증강 현실 제공 단말기(10)와 구역E에 위치해 있는 증강 현실 제공 단말기는 서로 다른 공간에 위치해 있음에도 불구하고 동일한 위치에 있는 것처럼 정보 데이터를 공유할 수 있게 된다.
또 다른 실시예에서 정보 데이터 수신부(15)는 현재 구역A에 위치해 있으면서 구역E에 위치해 있는 타 증강 현실 제공 단말기와 구역D의 공간을 공유하고자 하는 사용자로부터 공간 공유를 요청받으면, 증강 현실 제공 서버(20)로 공간을 공유하고자 하는 타 증강 현실 제공 단말기(10)의 식별 정보와 공간을 공유할 구역D의 식별 정보를 전송하고, 증강 현실 제공 서버(20)로부터 구역D에 대한 영상 데이터와 정보 데이터를 수신받아, 이를 영상 처리부(17)로 전달한다. 이에 따라, 현재 구역A에 위치해 있는 증강 현실 제공 단말기(10)는 구역E에 위치해 있는 타 증강 현실 제공 단말기와 구역D의 정보 데이터를 공유할 수 있게 된다.
전술한 바와 같이, 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)를 통해 타 증강 현실 제공 단말기와 공간을 공유하는 중에 청각 효과(음성), 시각 효과(펜 또는 그리기 메뉴 기능을 이용한 십자표, 화살표 등의 이미지), 촉각 효과(진동, 돌출) 등의 다양한 효과를 이용하여 상대방에게 특정 위치에 대한 위치 정보를 제공할 수 있다.
또 다른 실시예에서 정보 데이터 수신부(15)는 사용자로부터 현재 위치해 있는 구역 내에서 찾고자 하는 장소(예를 들어, 화장실, **제과, △△건물 등)를 입력받아, 이를 증강 현실 제공 서버(20)로 전송하고, 그에 대한 응답으로 증강 현실 제공 서버(20)로부터 사용자가 찾고자 하는 장소에 대한 위치 정보를 수신하여, 이를 영상 처리부(17)로 전달한다.
또 다른 실시예에서 정보 데이터 수신부(15)는 사용자로부터 입력받은 녹화 요청에 따라, 카메라(16)를 통해 획득한 영상 데이터와 증강 현실 제공 서버(20)로부터 수신되는 정보 데이터를 메모리부(12)에 실시간으로 저장한다. 사용자는 메모리부(12)에 저장된 영상 데이터와 정보 데이터를 재생하여 이동 경로, 해당 구역의 정보 데이터, 영상 정보 등을 다시 확인할 수 있게 된다.
또 다른 실시예에서 정보 데이터 수신부(15)는 증강 현실 제공 단말기(10)의 각도를 계산한 후, 각도 정보를 증강 현실 제공 서버(20)로 전송하여, 증강 현실 제공 서버(20)로부터 해당 각도에 해당하는 정보 데이터를 수신한다. 예를 들어, 고층 건물에 위치해 있는 사용자가 해당 건물의 지하에서부터 고층까지의 정보 데이터를 얻고자 하는 경우, 증강 현실 제공 단말기(10)의 각도를 조정하게 되면, 조정된 각도에 따라 증강 현실 제공 서버(20)는 각 층의 정보 데이터를 제공하게 된다.
여기서, 정보 데이터 수신부(15)는 해당 건물에 대한 정보 데이터를 모두 수신한 후, 화면 제어를 통해 각 층의 정보 데이터를 제공할 수도 있다.
도 4는 본 발명에 적용되는 증강 현실 제공 서버의 구성을 개략적으로 보인 도이다.
도 4에서, 무선 통신부(21)는 증강 현실 모드의 실행에 따라 접속된 증강 현실 제공 단말기(10)와 통신을 수행한다.
데이터베이스(23)는 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 저장하고 있다.
전술한, 데이터베이스(23)에 구역 단위로 저장되는 각각의 정보 데이터는 구역 식별 정보와 방위 정보를 포함하여 이루어지며, 나아가 상하 정보도 포함하여 이루어질 수 있다.
이에 따라, 특정 구역에 위치한 건물에 대한 정보 데이터를 제공하는 경우에는 각 층별로 정보 데이터를 제공할 수 있게 되고, 별자리 정보나, 달의 위치, 각종 주기 등을 제공할 수 있게 된다.
증강 현실 제공부(25)는 무선 통신부(21)를 통해 접속된 증강 현실 제공 단말기(10)로부터 위치 정보를 수신하게 되면, 수신한 위치 정보에 의거하여 데이터베이스(23)에서 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 모든 방위의 정보 데이터를 검색한 후, 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다.
또한, 증강 현실 제공부(25)는 무선 통신부(21)를 통해 접속된 증강 현실 제공 단말기(10)로부터 위치 정보와 함께 방위 정보를 수신하게 되면, 수신한 위치 정보와 방위 정보에 의거하여 데이터베이스(23)에서 해당 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역 내에서 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 검색한 후, 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다.
또한, 증강 현실 제공부(25)는 증강 현실 제공 단말기(10)로부터 변동되는 위치 정보와 방위 정보가 수신될 때마다, 수신된 위치 정보와 방위 정보에 의거하여 데이터베이스(23)에서 정보 데이터를 재검색한 후, 재검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다.
또한, 증강 현실 제공부(25)는 증강 현실 제공 단말기(10)가 증강 현실 모드의 실행에 따라 특정 구역, 예를 들어, 구역A에서 증강 현실 제공 서버(20)에 접속하여 구역A의 정보 데이터를 다운로드받아 저장하고 있다가, 구역A에서 재접속되면, 증강 현실 제공 단말기(10)로 구역A에 대한 정보 데이터의 버전 정보를 전송한 후, 증강 현실 제공 서버(20)로부터 수신한 구역A에 대한 정보 데이터의 버전 정보와 메모리부에 저장되어 있는 구역A에 대한 정보 데이터의 버전 정보를 비교한 증강 현실 제공 단말기(10)로부터 다운로드 요청이 있으면, 업데이트된 구역A에 대한 정보 데이터를 증강 현실 제공 단말기(10)로 다운로드한다.
다른 실시예에서 증강 현실 제공부(25)는 예를 들어 구역A에 위치해 있는 증강 현실 제공 단말기(10)로부터 구역D로의 위치 이동을 요청받으면, 구역D에 대한 영상 데이터와 정보 데이터를 검색한 후, 검색된 구역D에 대한 영상 데이터와 정보 데이터를 구역A에 위치해 있는 증강 현실 제공 단말기(10)로 전송한다. 여기서, 증강 현실 제공 서버(20)의 증강 현실 제공부(25)에서 제공하는 구역D에 대한 영상 데이터는 구역D의 공간을 가상으로 이미지화한 가상 영상 데이터일 수도 있고 구역D에서 카메라로 직접 확보한 실제 영상 데이터일 수도 있다.
이때, 구역D에 CCTV가 설치되어 있고, 증강 현실 제공 서버(20)와 해당 CCTV가 연동이 가능한 경우, 증강 현실 제공부(25)는 해당 CCTV와의 연동을 통해 획득한 영상 데이터를 구역D의 정보 데이터와 함께 증강 현실 제공 단말기(10)로 전송할 수도 있다.
또한, 증강 현실 제공 단말기(10)가 위치 이동을 요청한 구역D가 상점인 경우, 해당 상점에서 제공하는 메뉴 서비스를 이용하여 증강 현실 제공 단말기(10)가 주문, 구매, 예약 등을 수행할 수 있도록 하는 서비스를 제공할 수도 있다.
또 다른 실시예에서 증강 현실 제공부(25)는 예를 들어 구역A에 위치해 있는 제1증강 현실 제공 단말기로부터 구역E에 위치해 있는 제2증강 현실 제공 단말기와 공간을 공유하겠다는 요청을 수신하게 되면, 제1증강 현실 제공 단말기로부터 수신한 위치 정보와 방위 정보에 의거하여 구역A의 정보 데이터를 검색한 후, 검색된 구역A의 정보 데이터를 제1증강 현실 제공 단말기뿐만 아니라 제2증강 현실 제공 단말기로도 모두 전송한다. 이때, 공간 공유를 요청한 제1증강 현실 제공 단말기는 제2증강 현실 제공 단말기와 영상 호를 설정한 후, 카메라를 통해 획득한 영상 데이터를 제2증강 현실 제공 단말기로 전송하여 서로 다른 공간에 위치해 있는 제2증강 현실 제공 단말기와 자신이 위치해 있는 공간에 대한 영상 데이터와 정보 데이터를 공유할 수 있게 된다.
또 다른 실시예에서 증강 현실 제공부(25)는 예를 들어 구역A에 위치해 있는 제1증강 현실 제공 단말기로부터 구역E에 위치해 있는 제2증강 현실 제공 단말기와 구역D에 대한 공간을 공유하겠다는 요청을 수신하게 되면, 구역D에 대한 영상 데이터와 정보 데이터를 검색한 후, 검색된 구역D에 대한 영상 데이터와 정보 데이터를 구역A에 위치해 있는 제1증강 현실 제공 단말기와 구역E에 위치해 있는 제2증강 현실 제공 단말기 양측에 모두 전송하여, 서로 다른 공간에 위치해 있는 제1증강 현실 제공 단말기와 제2증강 현실 제공 단말기가 제3의 공간을 공유할 수 있도록 한다.
또 다른 실시예에서 증강 현실 제공부(25)는 현재 증강 현실 서비스를 제공받고 있는 증강 현실 제공 단말기(10)로부터 특정 대상이나 장소를 선택받게 되면, 위치 추적 기술을 이용하여 선택받은 대상이나 장소의 위치 정보를 파악한 후, 이를 증강 현실 제공 단말기(10)로 전송한다.
또 다른 실시예에서 증강 현실 제공부(25)는 제1증강 현실 제공 단말기가 증강 현실 제공 서버(20)를 통해 제2증강 현실 제공 단말기로 '현재 위치 구역 정보 타인과 공유 모드'를 요청하여, 제2증강 현실 제공 단말기가 이를 수락하면, 제1증강 현실 제공 단말기로 제2증강 현실 제공 단말기가 현재 위치해 있는 구역의 정보를 전송하여 제1증강 현실 제공 단말기가 제2증강 현실 제공 단말기의 현재 위치 정보를 확인할 수 있도록 한다.
또 다른 실시예에서 증강 현실 제공부(25)는 각각의 구역 내에서 접속된 증강 현실 제공 단말기(10)의 수를 파악하여, 각 구역에 얼마나 많은 사람이 모여 있는 지에 대한 정보를 제공할 수 있다.
또 다른 실시예에서 증강 현실 제공부(25)는 사용자의 이동 속도에 따라 사용자에게 제공되는 정보 데이터의 양과 구역의 범위를 가변적으로 변경한다. 예를 들어, 차량 이동시보다 보행시에 상대적으로 적은 양의 정보 데이터를 제공한다. 즉, 정지<보행<차량 이동 순으로 전송하는 정보 데이터의 량이 가변되도록 한다.
또 다른 실시예에서, 증강 현실 제공부(25)는 사용자가 구역의 중첩 부분에 위치해 있는 경우, 어떤 구역에 대한 정보 데이터를 제공받을 것인 지를 사용자가 선택하도록 하여, 사용자로부터 선택받은 구역에 대한 정보 데이터를 제공하거나, 사용자가 바라보고 있는 방향에 위치한 구역에 대한 정보 데이터를 자동으로 제공하도록 한다.
또 다른 실시예에서 증강 현실 제공부(25)는 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 정보 데이터와 함께 해당 구역에 인접해 있는 적어도 하나 이상의 인접 구역에 대한 정보 데이터를 검색하여, 이를 증강 현실 제공 단말기(10)로 전송할 수도 있다. 예를 들어, 증강 현실 제공 단말기(10)가 구역A에 위치해 있는 경우, 구역A에 속한 정보 데이터뿐만 아니라 구역A의 인접 구역인 구역B~구역G에 대한 정보 데이터도 검색하여 이를 증강 현실 제공 단말기(10)로 전송할 수 있다.
이때, 증강 현실 제공부(25)는 증강 현실 제공 단말기(10)가 위치해 있는 구역A에 대한 정보 데이터는 모두 전송하고, 인접 구역인 구역B~구역G에 대한 정보 데이터는 대표 정보 데이터만을 전송하는 것이 바람직하다.
여기서, 인접 구역의 범위는 서비스 사업자가 용도에 맞게 다양하게 설계하여 제공할 수 있다.
또 다른 실시예에서 증강 현실 제공부(25)는 증강 현실 제공 단말기(10)로부터 위치 정보 및 방위 정보 외에 각도 정보를 수신한 경우, 수신한 각도 정보에 의거하여 증강 현실 제공 단말기(10)가 하늘을 향하고 있는 것으로 확인되면, 증강 현실 제공 단말기(10)가 가리키는 곳에 위치한 별자리 등을 검색하여 제공한다.
또한, 특정 날짜와 시간 정보를 함께 전송받으면 해당 구역 위치에서 해당 날짜와 시간에 일어날 현상(예를 들어, 일식, 월식, 별동별 등) 등에 대한 정보 데이터를 검색하여 제공한다.
도 5는 본 발명의 일 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도이다.
우선, 증강 현실 제공 서버(20)는 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 데이터베이스(23)에 저장한다(S10).
증강 현실 모드 실행에 따라 증강 현실 제공 단말기(10)가 무선 통신망을 통해 증강 현실 제공 서버(20)에 접속하여 자신의 현재 위치 정보를 전송하면(S12, S14), 증강 현실 제공 서버(20)는 증강 현실 제공 단말기(10)로부터 수신한 위치 정보에 의거하여 데이터베이스(23)에서 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역에 대한 모든 방위의 정보 데이터를 모두 검색한 후(S16), 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다(S18).
상기한 과정 S18을 통해 증강 현실 제공 서버(20)로부터 정보 데이터를 수신한 증강 현실 제공 단말기(10)는, 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이하되, 증강 현실 제공 서버(20)로부터 수신한 정보 데이터 중에서 자신의 현재 방위 정보에 의거하여 자신이 향하고 있는 방향의 정보 데이터를 추출한 후(S20), 추출된 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S22).
도 6은 본 발명의 다른 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도이다.
우선, 증강 현실 모드 실행에 따라 증강 현실 제공 단말기(10)가 무선 통신망을 통해 증강 현실 제공 서버(20)에 접속하여 자신의 현재 위치 정보와 방위 정보를 전송하면(S30, S32), 증강 현실 제공 서버(20)는 증강 현실 제공 단말기(10)로부터 수신한 위치 정보 및 방위 정보에 의거하여 데이터베이스(23)에서 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역 내에서 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 검색한 후(S34), 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다(S36).
상기한 과정 S36을 통해 증강 현실 제공 서버(20)로부터 정보 데이터를 수신한 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S38).
전술한 바와 같이, 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하던, 증강 현실 제공 단말기(10)는 사용자의 이동에 따라 증강 현실 제공 단말기(10)의 위치 정보와 방위 정보가 변동되면(S40), 변동된 위치 정보와 방위 정보를 증강 현실 제공 서버(20)로 실시간 전송한다(S42).
한편, 증강 현실 제공 단말기(10)가 실시간으로 전송하는 변동 위치 정보와 방위 정보를 수신한 증강 현실 제공 서버(20)는 증강 현실 제공 단말기(10)로부터 수신한 변동 위치 정보와 방위 정보에 의거하여 정보 데이터를 재검색한 후(S44), 재검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다(S46).
상기한 과정 S46을 통해 증강 현실 제공 서버(20)로부터 정보 데이터를 수신한 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S48).
도 7은 본 발명의 또 다른 실시예에 따른 증강 현실 제공 방법을 설명하기 위한 처리도이다.
우선, 증강 현실 모드 실행에 따라 증강 현실 제공 단말기(10)가 무선 통신망을 통해 증강 현실 제공 서버(20)에 접속하여 자신의 현재 위치 정보와 방위 정보를 전송하면(S60, S62), 증강 현실 제공 서버(20)는 증강 현실 제공 단말기(10)로부터 수신한 위치 정보 및 방위 정보에 의거하여 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역 내에서 증강 현실 제공 단말기(10)가 향하고 있는 방향의 정보 데이터를 검색한 후(S64), 검색된 정보 데이터를 증강 현실 제공 단말기(10)로 전송한다(S66).
상기한 과정 S66을 통해 증강 현실 제공 서버(20)로부터 정보 데이터를 수신한 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S68).
이와 동시에, 증강 현실 제공 단말기(10)는 상기한 과정 S66을 통해 증강 현실 제공 서버(20)로부터 수신한 정보 데이터를 메모리부(12)에 저장한다(S70).
이후, 증강 현실 서비스를 모두 이용한 사용자의 요청에 따라 증강 현실 모드를 종료하고(S72), 증강 현실 서비스를 다시 이용하고자 하는 사용자의 요청에 따라 증강 현실 모드가 다시 실행되면(S74), 증강 현실 제공 단말기(10)는 무선 통신망을 통해 증강 현실 제공 서버(20)에 접속하여 자신의 현재 위치 정보와 방위 정보를 전송한다(S76).
상기한 과정 S76을 통해 증강 현실 제공 단말기(10)로부터 위치 정보와 방위 정보를 수신한 증강 현실 제공 서버(20)는 위치 정보에 의거하여 증강 현실 제공 단말기(10)가 현재 위치해 있는 구역을 파악한 후(S78), 해당 구역에 대한 정보 데이터 버전 정보를 해당 구역의 식별 정보와 함께 증강 현실 제공 단말기(10)로 전송한다(S80).
상기한 과정 S80을 통해 증강 현실 제공 서버(20)로부터 자신이 위치한 구역의 식별 정보와 해당 구역의 정보 데이터 버전 정보를 수신한 증강 현실 제공 단말기(10)는 증강 현실 제공 서버(20)로부터 수신한 자신이 위치해 있는 구역의 정보 데이터 버전 정보와 메모리부(12)에 저장되어 있는 자신이 위치해 있는 구역의 정보 데이터 버전 정보를 비교하여 메모리부(12)에 저장되어 있는 해당 구역의 정보 데이터가 구버전이 아닌 경우에는(S82), 메모리부(12)에 저장되어 있는 자신이 위치해 있는 구역의 정보 데이터를 읽어와 이를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S84).
한편, 상기한 과정 S82의 확인결과 메모리부(12)에 저장되어 있는 해당 구역의 정보 데이터가 구버전인 경우에는, 증강 현실 제공 서버(20)로 업데이트된 정보 데이터의 다운로드를 요청하여(S86), 업데이트된 정보 데이터를 다운로드한다(S88).
이후, 증강 현실 제공 단말기(10)는 상기한 과정 S88을 통해 증강 현실 제공 서버(20)로부터 다운로드한 정보 데이터로 메모리부(12)에 저장되어 있는 해당 구역의 정보 데이터를 업데이트하고(S90), 증강 현실 제공 서버(20)로부터 새로 다운로드한 정보 데이터와 메모리부(12)에서 읽어온 정보 데이터를 카메라(16)를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부(18)에 디스플레이한다(S92).
본 발명의 증강 현실 제공 시스템 및 방법은 전술한 실시예에 국한되지 않고 본 발명의 기술 사상이 허용하는 범위 내에서 다양하게 변형하여 실시할 수 있다.
10. 증강 현실 제공 단말기, 11, 21. 무선 통신부,
12. 메모리부, 13. 위치 정보 제공부,
14. 방위 정보 제공부, 15. 정보 데이터 수신부,
16. 카메라, 17. 영상 처리부,
18. 화면 표시부, 20. 증강 현실 제공 서버,
23. 데이터베이스, 25. 증강 현실 제공부

Claims (29)

  1. 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 관리하는 증강 현실 제공 서버와;
    증강 현실 모드의 실행에 따라 상기 증강 현실 제공 서버에 접속하여 자신의 현재 위치 정보를 전송하는 증강 현실 제공 단말기를 포함하되,
    상기 증강 현실 제공 서버는, 상기 증강 현실 제공 단말기로부터 수신한 상기 증강 현실 제공 단말기의 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 증강 현실 제공 단말기로 제공하는 증강 현실 제공 시스템.
  2. 제 1항에 있어서, 상기 정보 데이터는,
    구역 식별 정보와 방위 정보를 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 시스템.
  3. 제 1항에 있어서, 상기 증강 현실 제공 단말기는,
    상기 증강 현실 제공 서버로부터 수신한 정보 데이터 중에서 자신의 현재 방위 정보에 의거하여, 자신이 향하고 있는 방향의 정보 데이터를 추출한 후, 추출된 정보 데이터를 사용자에게 디스플레이하는 것을 특징으로 하는 증강 현실 제공 시스템.
  4. 제 1항에 있어서, 상기 증강 현실 제공 단말기는, 증강 현실 모드의 실행에 따라 접속된 상기 증강 현실 제공 서버로 자신의 현재 위치 정보와 방위 정보를 전송하고,
    상기 증강 현실 제공 서버는, 상기 증강 현실 제공 단말기로부터 수신한 상기 증강 현실 제공 단말기의 위치 정보와 방위 정보에 의거하여, 단말기가 현재 위치해 있는 구역 내에서 단말기가 향하고 있는 방향의 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 증강 현실 제공 단말기로 제공하는 것을 특징으로 하는 증강 현실 제공 시스템.
  5. 단말기의 현재 위치 정보를 제공하는 위치 정보 제공부와;
    증강 현실 모드에서 무선 통신부를 통해 접속된 증강 현실 제공 서버로 단말기의 현재 위치 정보를 전송하고, 상기 증강 현실 제공 서버로부터 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 수신하는 정보 데이터 수신부와;
    상기 정보 데이터 수신부를 통해 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 화면 표시부에 디스플레이하는 영상 처리부를 포함하여 이루어지는 증강 현실 제공 단말기.
  6. 제 5항에 있어서, 상기 증강 현실 제공 단말기는,
    단말기의 현재 방위 정보를 제공하는 방위 정보 제공부를 더 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 단말기.
  7. 제 6항에 있어서, 상기 정보 데이터 수신부는,
    상기 증강 현실 제공 서버로부터 수신한 정보 데이터 중에서 상기 방위 정보 제공부로부터 전달받은 방위 정보에 의거하여 단말기가 향하고 있는 방향의 정보 데이터를 추출한 후, 추출된 정보 데이터를 상기 영상 처리부로 전달하는 것을 특징으로 하는 증강 현실 제공 단말기.
  8. 제 6항에 있어서, 상기 정보 데이터 수신부는,
    증강 현실 모드의 실행에 따라 접속된 상기 증강 현실 제공 서버로 자신의 현재 위치 정보와 방위 정보를 전송하고, 상기 증강 현실 제공 서버로부터 단말기가 현재 위치해 있는 구역 내에서 단말기가 향하고 있는 방향의 정보 데이터를 수신하는 것을 특징으로 하는 증강 현실 제공 단말기.
  9. 제 6항에 있어서, 상기 정보 데이터 수신부는,
    단말기의 이동에 따라 변동되는 위치 정보와 방위 정보를 상기 증강 현실 제공 서버로 실시간 전송하는 것을 특징으로 하는 증강 현실 제공 단말기.
  10. 제 5항 또는 제 6항 중 어느 한 항에 있어서, 상기 증강 현실 제공 단말기는,
    상기 증강 현실 제공 서버로부터 현재 위치해 있는 구역의 정보 데이터를 다운로드받아 저장하는 메모리부를 더 포함하여 이루어지고,
    상기 정보 데이터 수신부는, 추후 상기 구역 내에서 상기 증강 현실 제공 서버에 재접속한 경우, 상기 구역의 정보 데이터 중에 업데이트된 정보 데이터가 있으면, 상기 증강 현실 제공 서버로부터 업데이트된 정보 데이터를 다운로드받아 상기 메모리부를 업데이트하는 것을 특징으로 하는 증강 현실 제공 단말기.
  11. 제 5항에 있어서, 상기 정보 데이터 수신부는,
    현재 제1구역에 위치해 있는 사용자로부터 제2구역으로의 위치 이동을 요청받으면, 위치 이동하고자 하는 제2구역의 식별 정보를 입력받아 이를 상기 증강 현실 제공 서버로 전송하고, 상기 증강 현실 제공 서버로부터 제2구역에 대한 영상 데이터와 정보 데이터를 수신하여, 이를 상기 영상 처리부로 전달하는 것을 특징으로 하는 증강 현실 제공 단말기.
  12. 제 5항에 있어서, 상기 정보 데이터 수신부는,
    현재 제1구역에 위치해 있는 사용자로부터 제2구역에 위치해 있는 다른 단말기와의 공간 공유를 요청받으면, 공간 공유 요청에 따라 상기 증강 현실 제공 서버로 공간을 공유하고자 하는 상기 다른 단말기의 식별 정보를 전송하고, 무선 통신부를 통해 상기 다른 단말기와 영상 호를 설정하여 카메라를 통해 획득한 영상 데이터를 상기 다른 단말기로 전송하는 것을 특징으로 하는 증강 현실 제공 단말기.
  13. 제 5항에 있어서, 상기 정보 데이터 수신부는,
    사용자로부터 현재 위치해 있는 구역 내에서 찾고자 하는 장소를 입력받으면, 이를 상기 증강 현실 제공 서버로 전송하고, 상기 증강 현실 제공 서버로부터 사용자가 찾고자 하는 장소에 대한 위치 정보를 수신하여, 이를 상기 영상 처리부로 전달하는 것을 특징으로 하는 증강 현실 제공 단말기.
  14. 제 5항에 있어서, 상기 정보 데이터 수신부는,
    사용자의 녹화 요청에 따라, 카메라를 통해 획득한 영상 데이터와 증강 현실 제공 서버로부터 수신되는 정보 데이터를 메모리부에 실시간으로 저장하는 것을 특징으로 하는 증강 현실 제공 단말기.
  15. 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 저장하고 있는 데이터베이스와;
    무선 통신부를 통해 접속된 증강 현실 제공 단말기로부터 수신한 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 무선 통신부를 통해 상기 증강 현실 제공 단말기로 전송하는 증강 현실 제공부를 포함하여 이루어지는 증강 현실 제공 서버.
  16. 제 15항에 있어서, 상기 증강 현실 제공부는,
    상기 증강 현실 제공 단말기로부터 위치 정보와 함께 방위 정보를 수신하게 되면, 단말기가 현재 위치해 있는 구역 내에서 단말기가 향하고 있는 방향의 정보 데이터를 검색한 후, 검색된 정보 데이터를 상기 무선 통신부를 통해 상기 증강 현실 제공 단말기로 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  17. 제 15항에 있어서, 상기 증강 현실 제공부는,
    상기 증강 현실 제공 단말기로부터 실시간 수신되는 변동 위치 정보와 방위 정보에 의거하여 정보 데이터를 재검색한 후, 재검색된 정보 데이터를 상기 증강 현실 제공 단말기로 제공하는 것을 특징으로 하는 증강 현실 제공 서버.
  18. 제 15항에 있어서, 상기 증강 현실 제공부는,
    증강 현실 모드의 실행에 따라 제1구역에서 접속하여 제1구역의 정보 데이터를 다운로드받아 저장하고 있는 증강 현실 제공 단말기가 상기 제1구역에서 재접속되면, 상기 증강 현실 제공 단말기로 상기 제1구역의 정보 데이터 버전 정보를 전송하고, 자신의 메모리부에 저장되어 있는 상기 제1구역의 정보 데이터 버전과 증강 현실 제공 서버로부터 수신한 상기 제1구역의 정보 데이터 버전을 비교한 상기 증강 현실 제공 단말기로부터 업데이트된 정보 데이터에 대한 다운로드 요청이 있으면, 업데이트된 정보 데이터를 상기 증강 현실 제공 단말기로 다운로드하는 것을 특징으로 하는 증강 현실 제공 서버.
  19. 제 15항에 있어서, 상기 증강 현실 제공부는,
    현재 제1구역에 위치해 있는 상기 증강 현실 제공 단말기로부터 제2구역으로의 위치 이동을 요청받으면, 상기 제2구역에 대한 영상 데이터와 정보 데이터를 검색하여, 이를 상기 증강 현실 제공 단말기로 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  20. 제 19항에 있어서, 상기 증강 현실 제공부는,
    상기 제2구역 내에 CCTV가 설치되어 있으면, 상기 CCTV와 연동하여 상기 CCTV를 통해 획득한 영상 데이터를 상기 제2구역의 정보 데이터와 함께 상기 증강 현실 제공 단말기로 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  21. 제 15항에 있어서, 상기 증강 현실 제공부는,
    현재 제1구역에 위치해 있는 제1증강 현실 제공 단말기로부터 제2구역에 위치해 있는 제2증강 현실 제공 단말기와의 공간 공유를 요청받으면, 상기 제1증강 현실 제공 단말기로부터 수신한 위치 정보와 방위 정보에 의거하여 검색된 정보 데이터를 상기 제1증강 현실 제공 단말기와 제2증강 현실 제공 단말기 양측에 모두 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  22. 제 15항에 있어서, 상기 증강 현실 제공부는,
    제1구역에 위치해 있는 제1증강 현실 제공 단말기와 제2구역에 위치해 있는 제2증강 현실 제공 단말기 중에서 어느 한 단말기로부터 제3구역에 대한 공간 공유를 요청받으면, 제3구역에 대한 영상 데이터와 정보 데이터를 검색하여, 이를 상기 제1증강 현실 제공 단말기와 제2증강 현실 제공 단말기 양측에 모두 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  23. 제 15항에 있어서, 상기 증강 현실 제공부는,
    상기 증강 현실 제공 단말기가 현재 위치해 있는 구역의 정보 데이터와 함께 상기 구역에 인접해 있는 적어도 하나 이상의 인접 구역에 대한 정보 데이터를 검색하여, 이를 상기 증강 현실 제공 단말기로 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  24. 제 23항에 있어서, 상기 증강 현실 제공부는,
    상기 증강 현실 제공 단말기로 상기 증강 현실 제공 단말기가 현재 위치해 있는 구역의 정보 데이터와 함께 상기 인접 구역에 대한 정보 데이터를 전송할 때, 인접 구역에 대한 정보 데이터는 대표 정보 데이터만을 전송하는 것을 특징으로 하는 증강 현실 제공 서버.
  25. 증강 현실 제공 서버에서 사용자에게 제공할 정보 데이터를 구역 단위로 데이터베이스화하여 저장하는 과정과;
    증강 현실 제공 단말기에서 증강 현실 모드의 실행에 따라 상기 증강 현실 제공 서버에 접속하여 자신의 현재 위치 정보를 전송하는 과정과;
    상기 증강 현실 제공 서버에서 상기 위치 정보에 의거하여, 단말기가 현재 위치해 있는 구역에 대한 정보 데이터를 검색하여, 이를 상기 증강 현실 제공 단말기로 전송하는 과정과;
    상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터를 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하는 과정을 포함하여 이루어지는 증강 현실 제공 방법.
  26. 제 25항에 있어서, 상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터 중에서 방위 정보를 이용하여 자신이 향하고 있는 방향의 정보 데이터를 추출하는 과정과;
    상기 추출된 정보 데이터를 상기 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하는 과정을 더 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 방법.
  27. 제 25항에 있어서, 상기 증강 현실 제공 단말기에서 증강 현실 모드의 실행에 따라 상기 증강 현실 제공 서버에 접속하여 자신의 현재 위치 정보와 방위 정보를 전송하는 과정과;
    상기 증강 현실 제공 서버에서 상기 위치 정보와 방위 정보에 의거하여, 단말기가 현재 위치해 있는 구역 내에서 단말기가 향하고 있는 방향의 정보 데이터를 검색하는 과정과;
    상기 검색된 정보 데이터를 상기 증강 현실 제공 단말기로 전송하는 과정과;
    상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터를 상기 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하는 과정을 더 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 방법.
  28. 제 25항에 있어서, 상기 증강 현실 제공 단말기에서 단말기의 이동에 따라 변동되는 위치 정보와 방위 정보를 상기 증강 현실 제공 서버로 실시간 전송하는 과정과;
    상기 증강 현실 제공 서버에서 상기 변동 위치 정보와 방위 정보에 의거하여 정보 데이터를 재검색하여 상기 증강 현실 제공 단말기로 전송하는 과정과;
    상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터를 상기 카메라를 통해 획득한 실시간 영상 화면과 합성하여 디스플레이하는 과정을 더 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 방법.
  29. 제 25항에 있어서, 상기 증강 현실 제공 단말기에서 상기 증강 현실 제공 서버로부터 수신한 정보 데이터를 메모리부에 저장하는 과정과;
    증강 현실 모드를 종료한 후, 동일 구역 내에서 상기 증강 현실 제공 단말기가 증강 현실 모드 실행에 따라 상기 증강 현실 제공 서버에 재접속되면, 상기 증강 현실 제공 서버에서 상기 증강 현실 제공 단말기로 상기 구역에 대한 정보 데이터의 버전 정보를 전송하는 과정과;
    상기 증강 현실 제공 단말기에서 상기 메모리부에 저장되어 있는 상기 구역에 대한 정보 데이터의 버전이 구버전인 지를 확인하여 구버전인 경우에는, 상기 증강 현실 제공 서버로부터 업데이트된 정보 데이터를 다운로드하는 과정과;
    상기 증강 현실 제공 서버로부터 다운로드한 업데이트된 정보 데이터를 상기 메모리부에 저장하는 과정을 더 포함하여 이루어지는 것을 특징으로 하는 증강 현실 제공 방법.
KR1020100008436A 2010-01-29 2010-01-29 증강 현실 제공 시스템 및 방법 KR101096392B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020100008436A KR101096392B1 (ko) 2010-01-29 2010-01-29 증강 현실 제공 시스템 및 방법
US12/862,727 US20110187744A1 (en) 2010-01-29 2010-08-24 System, terminal, server, and method for providing augmented reality
EP10183078A EP2355440B1 (en) 2010-01-29 2010-09-30 System, terminal, server, and method for providing augmented reality
CN2010105160085A CN102142005A (zh) 2010-01-29 2010-10-18 提供增强现实的系统、终端、服务器及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100008436A KR101096392B1 (ko) 2010-01-29 2010-01-29 증강 현실 제공 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20110088774A true KR20110088774A (ko) 2011-08-04
KR101096392B1 KR101096392B1 (ko) 2011-12-22

Family

ID=43385749

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100008436A KR101096392B1 (ko) 2010-01-29 2010-01-29 증강 현실 제공 시스템 및 방법

Country Status (4)

Country Link
US (1) US20110187744A1 (ko)
EP (1) EP2355440B1 (ko)
KR (1) KR101096392B1 (ko)
CN (1) CN102142005A (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014025221A1 (ko) * 2012-08-09 2014-02-13 한국전자통신연구원 증강방송 메타데이터 전송 장치, 사용자 단말, 증강방송 메타데이터 전송 방법과 재생 방법
WO2015050288A1 (ko) * 2013-10-01 2015-04-09 목포대학교산학협력단 소셜 증강현실 서비스 시스템 및 방법
KR20190032791A (ko) * 2017-09-20 2019-03-28 (주)다스콘 실시간 위치 측위 시스템 및 이를 이용한 콘텐츠 제공 서비스 시스템
KR101964661B1 (ko) * 2018-01-11 2019-04-02 주식회사 제이슨와이 트래픽 감소를 위한 ｖｒ 영상의 공유 시스템
KR20200094694A (ko) * 2019-01-30 2020-08-07 권도균 증강 현실 방법을 이용하여 장비를 원격 제어하는 가상 현실 구현 장치 및 그 방법 및 이를 이용한 관리 시스템
US20220303588A1 (en) * 2015-06-19 2022-09-22 Serious Simulations, Llc Processes systems and methods for improving virtual and augmented reality applications

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120053420A (ko) * 2010-11-17 2012-05-25 삼성전자주식회사 디바이스 제어 시스템 및 방법
KR101719264B1 (ko) * 2010-12-23 2017-03-23 한국전자통신연구원 방송 기반 증강 현실 콘텐츠 제공 시스템 및 그 제공 방법
WO2012099377A2 (ko) * 2011-01-17 2012-07-26 엘지전자 주식회사 증강 현실 타겟(ar target) 업데이트 방법 및 이를 채용하는 단말 및 서버
KR20120086810A (ko) * 2011-01-27 2012-08-06 삼성전자주식회사 단말기 및 그 단말기에서 이미지 처리 방법
US8488011B2 (en) * 2011-02-08 2013-07-16 Longsand Limited System to augment a visual data stream based on a combination of geographical and visual information
CN102958114B (zh) * 2011-08-27 2017-10-03 中兴通讯股份有限公司 访问增强现实用户上下文的方法
US20130050499A1 (en) * 2011-08-30 2013-02-28 Qualcomm Incorporated Indirect tracking
US9286711B2 (en) 2011-09-30 2016-03-15 Microsoft Technology Licensing, Llc Representing a location at a previous time period using an augmented reality display
US9606992B2 (en) 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
US9268406B2 (en) 2011-09-30 2016-02-23 Microsoft Technology Licensing, Llc Virtual spectator experience with a personal audio/visual apparatus
JP5741390B2 (ja) * 2011-11-11 2015-07-01 トヨタ自動車株式会社 周波数選択方法およびコグニティブ無線システム
US9229231B2 (en) 2011-12-07 2016-01-05 Microsoft Technology Licensing, Llc Updating printed content with personalized virtual data
US9182815B2 (en) * 2011-12-07 2015-11-10 Microsoft Technology Licensing, Llc Making static printed content dynamic with virtual data
TW201331787A (zh) * 2011-12-07 2013-08-01 Microsoft Corp 將虛擬資料顯示為列印的內容
US9183807B2 (en) 2011-12-07 2015-11-10 Microsoft Technology Licensing, Llc Displaying virtual data as printed content
WO2013104820A1 (en) 2012-01-09 2013-07-18 Nokia Corporation Method and apparatus for providing an architecture for delivering mixed reality content
US8620348B2 (en) * 2012-01-24 2013-12-31 Nokia Corporation Directional peer-to-peer networking
JP2013161416A (ja) * 2012-02-08 2013-08-19 Sony Corp サーバ、クライアント端末、システム、およびプログラム
CN103309895B (zh) * 2012-03-15 2018-04-10 中兴通讯股份有限公司 移动增强现实搜索方法、客户端、服务器及搜索系统
WO2013145614A1 (ja) * 2012-03-27 2013-10-03 パナソニック株式会社 情報処理装置、サーバ装置、情報処理方法、およびプログラム
EP2645667A1 (en) * 2012-03-27 2013-10-02 Alcatel-Lucent Apparatus for updating and transmitting augmented reality data
US9165381B2 (en) 2012-05-31 2015-10-20 Microsoft Technology Licensing, Llc Augmented books in a mixed reality environment
CN104364754A (zh) * 2012-06-12 2015-02-18 索尼公司 信息处理设备、信息处理方法及程序
US9395875B2 (en) * 2012-06-27 2016-07-19 Ebay, Inc. Systems, methods, and computer program products for navigating through a virtual/augmented reality
US9129429B2 (en) * 2012-10-24 2015-09-08 Exelis, Inc. Augmented reality on wireless mobile devices
WO2015084349A1 (en) * 2013-12-04 2015-06-11 Intel Corporation Augmented reality viewing initiation based on social behavior
CN103812946B (zh) * 2014-02-27 2017-12-26 广州梦能动漫科技有限公司 一种ar应用程序在线云更新的方法和系统
WO2015160828A1 (en) 2014-04-15 2015-10-22 Huntington Ingalls Incorporated System and method for augmented reality display of dynamic environment information
US9734403B2 (en) 2014-04-25 2017-08-15 Huntington Ingalls Incorporated Augmented reality display of dynamic target object information
US9864909B2 (en) 2014-04-25 2018-01-09 Huntington Ingalls Incorporated System and method for using augmented reality display in surface treatment procedures
CN104596523B (zh) 2014-06-05 2019-05-07 腾讯科技（深圳）有限公司 一种街景目的地引导方法和设备
WO2015191346A1 (en) 2014-06-09 2015-12-17 Huntington Ingalls Incorporated System and method for augmented reality display of electrical system information
US10504294B2 (en) 2014-06-09 2019-12-10 Huntington Ingalls Incorporated System and method for augmented reality discrepancy determination and reporting
US10915754B2 (en) 2014-06-09 2021-02-09 Huntington Ingalls Incorporated System and method for use of augmented reality in outfitting a dynamic structural space
WO2016011149A1 (en) 2014-07-16 2016-01-21 Huntington Ingalls Incorporated System and method for augmented reality display of hoisting and rigging information
US20160086372A1 (en) * 2014-09-22 2016-03-24 Huntington Ingalls Incorporated Three Dimensional Targeting Structure for Augmented Reality Applications
CN105069754B (zh) * 2015-08-05 2018-06-26 意科赛特数码科技(江苏)有限公司 基于在图像上无标记增强现实的系统和方法
CN106097258A (zh) * 2016-05-31 2016-11-09 深圳市元征科技股份有限公司 一种影像处理方法及增强现实设备
KR101768532B1 (ko) * 2016-06-08 2017-08-30 주식회사 맥스트 증강 현실을 이용한 화상 통화 시스템 및 방법
CN105892062A (zh) * 2016-06-24 2016-08-24 北京邮电大学 天文观测设备
CN106302655A (zh) * 2016-08-01 2017-01-04 浪潮(北京)电子信息产业有限公司 一种环境信息数据展示方法及终端
CN106210909A (zh) * 2016-08-15 2016-12-07 深圳Tcl数字技术有限公司 电视显示内容的处理方法、装置及系统
CN106341621A (zh) * 2016-10-24 2017-01-18 福建北极光虚拟视觉展示科技有限公司 一种增强现实交互方法、系统及装置
CN106445169A (zh) * 2016-10-24 2017-02-22 福建北极光虚拟视觉展示科技有限公司 一种基于动态触发源的增强现实交互系统
CN106484118B (zh) * 2016-10-24 2020-01-14 福建北极光虚拟视觉展示科技有限公司 一种基于固定触发源的增强现实交互方法及系统
CN106547874A (zh) * 2016-10-26 2017-03-29 广州酷狗计算机科技有限公司 多媒体推荐方法及装置
CN106780754B (zh) * 2016-11-30 2021-06-18 福建北极光虚拟视觉展示科技有限公司 一种混合现实方法及系统
CN106657368B (zh) * 2016-12-31 2019-12-27 山东汇佳软件科技股份有限公司 一种基于增强现实的服务器管理方法和系统
KR102019299B1 (ko) * 2017-06-30 2019-09-06 강동민 홈 스타일링 서버 및 이를 포함하는 시스템과, 홈 스타일링을 위한 영상 처리 방법
CN107622496A (zh) * 2017-09-11 2018-01-23 广东欧珀移动通信有限公司 图像处理方法及装置
WO2019126665A1 (en) * 2017-12-22 2019-06-27 Magic Leap, Inc. Viewpoint dependent brick selection for fast volumetric reconstruction
CN108499104B (zh) * 2018-04-17 2022-04-15 腾讯科技（深圳）有限公司 虚拟场景中的方位显示方法、装置、电子装置及介质
KR20190140657A (ko) 2018-06-12 2019-12-20 삼성전자주식회사 오브젝트를 생성하는 전자장치 및 시스템
CN112514418B (zh) * 2018-08-03 2022-09-16 华为技术有限公司 用于提供位置相关程序内容的用户节点、网络节点和方法
KR20210109731A (ko) * 2020-02-28 2021-09-07 유상규 위치정보저장이 가능한 휴대용기기카메라기능, 이를 활용한 주소전송방법과 네이비게이션설정 및 컨텐츠제공방법
US11321931B2 (en) 2020-03-31 2022-05-03 Home Box Office, Inc. Creating cloud-hosted, streamed augmented reality experiences with low perceived latency

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002013061A1 (fr) * 2000-08-07 2002-02-14 Sharp Kabushiki Kaisha Dispositif serveur servant a traiter des informations selon des informations concernant la position d'un terminal
JP3608740B2 (ja) * 2001-09-04 2005-01-12 株式会社ソニー・コンピュータエンタテインメント 情報処理システム、端末装置、情報処理方法、情報処理プログラム、及び情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体
US7664124B2 (en) * 2005-05-31 2010-02-16 At&T Intellectual Property, I, L.P. Methods, systems, and products for sharing content
US7734412B2 (en) * 2006-11-02 2010-06-08 Yahoo! Inc. Method of client side map rendering with tiled vector data
CN101378525A (zh) * 2007-08-28 2009-03-04 环达电脑(上海)有限公司 基于位置信息提供相关服务的系统与方法
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
US20090138190A1 (en) * 2007-11-26 2009-05-28 Magellan Navigation, Inc. System and Method of Providing Traffic Data to a Mobile Device
US20090193021A1 (en) * 2008-01-29 2009-07-30 Gupta Vikram M Camera system and method for picture sharing based on camera perspective
CN101340661B (zh) * 2008-08-14 2011-12-28 北京中星微电子有限公司 实现导游控制的移动设备和服务器以及导游控制方法
US20100250581A1 (en) * 2009-03-31 2010-09-30 Google Inc. System and method of displaying images based on environmental conditions
US20110161875A1 (en) * 2009-12-29 2011-06-30 Nokia Corporation Method and apparatus for decluttering a mapping display

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014025221A1 (ko) * 2012-08-09 2014-02-13 한국전자통신연구원 증강방송 메타데이터 전송 장치, 사용자 단말, 증강방송 메타데이터 전송 방법과 재생 방법
WO2015050288A1 (ko) * 2013-10-01 2015-04-09 목포대학교산학협력단 소셜 증강현실 서비스 시스템 및 방법
KR20150039233A (ko) * 2013-10-01 2015-04-10 목포대학교산학협력단 소셜 증강현실 서비스 시스템 및 방법
US20220303588A1 (en) * 2015-06-19 2022-09-22 Serious Simulations, Llc Processes systems and methods for improving virtual and augmented reality applications
KR20190032791A (ko) * 2017-09-20 2019-03-28 (주)다스콘 실시간 위치 측위 시스템 및 이를 이용한 콘텐츠 제공 서비스 시스템
KR101964661B1 (ko) * 2018-01-11 2019-04-02 주식회사 제이슨와이 트래픽 감소를 위한 ｖｒ 영상의 공유 시스템
KR20200094694A (ko) * 2019-01-30 2020-08-07 권도균 증강 현실 방법을 이용하여 장비를 원격 제어하는 가상 현실 구현 장치 및 그 방법 및 이를 이용한 관리 시스템

Also Published As

Publication number Publication date
US20110187744A1 (en) 2011-08-04
KR101096392B1 (ko) 2011-12-22
EP2355440A1 (en) 2011-08-10
EP2355440B1 (en) 2012-10-24
CN102142005A (zh) 2011-08-03

Similar Documents

Publication Publication Date Title
KR101096392B1 (ko) 증강 현실 제공 시스템 및 방법
KR101260576B1 (ko) Ａｒ 서비스를 제공하기 위한 사용자 단말기 및 그 방법
EP3702733B1 (en) Displaying network objects in mobile devices based on geolocation
US6452544B1 (en) Portable map display system for presenting a 3D map image and method thereof
CA2804634C (en) 3d layering of map metadata
US6937763B2 (en) Method and apparatus for processing information of an object
US8174561B2 (en) Device, method and program for creating and displaying composite images generated from images related by capture position
US20150248783A1 (en) System and method for processing displayable content tagged with geo-location data for augmented reality modes of viewing
EP1692863B1 (en) Device, system, method and computer software product for displaying additional information in association with the image of an object
CN102129812A (zh) 在街道级图像的上下文中观看媒体
Zlatanova Augmented reality technology
CN102958114B (zh) 访问增强现实用户上下文的方法
KR20120027346A (ko) 방향 기반의 검색 시스템 및 방법
CN102420936B (zh) 用于提供道路视图的装置和方法
KR101589928B1 (ko) 지피에스 확인을 통한 변경된 지형지물의 수치지도 갱신시스템
US20020085111A1 (en) Method and apparatus for providing travel information
US20090167786A1 (en) Methods and apparatus for associating image data
JP6242011B2 (ja) 任意の領域を撮影している撮影側端末を特定する映像管理システム及び方法
CN105917329B (zh) 信息显示装置和信息显示程序
CN104501797B (zh) 一种基于增强现实ip地图的导航方法
US10102675B2 (en) Method and technical equipment for determining a pose of a device
CN112818240A (zh) 评论信息的展示方法、装置、设备及计算机可读存储介质
KR20130123629A (ko) 파노라마 동영상을 이용하여 원하는 시선방향의 동영상 및 관심지점 정보를 제공하는 방법
JP2004193690A (ja) 現場管理システム及び現場管理システム用管理装置
JP5705793B2 (ja) 拡張現実表示装置、拡張現実表示システム、拡張現実表示方法、及び拡張現実表示プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141212

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151201

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20171205

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190904

Year of fee payment: 9

J204 Request for invalidation trial [patent]
J204 Request for invalidation trial [patent]
J301 Trial decision

Free format text: TRIAL NUMBER: 2019100004109; TRIAL DECISION FOR INVALIDATION REQUESTED 20191224

Effective date: 20200828

Free format text: TRIAL NUMBER: 2020100000062; TRIAL DECISION FOR INVALIDATION REQUESTED 20200108

Effective date: 20200828

J202 Request for trial for correction [limitation]
J301 Trial decision

Free format text: TRIAL NUMBER: 2020105000095; TRIAL DECISION FOR CORRECTION REQUESTED 20201007

Effective date: 20201130

J302 Written judgement (patent court)

Free format text: TRIAL NUMBER: 2020200006644; JUDGMENT (PATENT COURT) FOR INVALIDATION REQUESTED 20201015

Effective date: 20211223

J204 Request for invalidation trial [patent]
J301 Trial decision

Free format text: TRIAL NUMBER: 2022100000658; TRIAL DECISION FOR INVALIDATION REQUESTED 20220310

Effective date: 20220916