KR101925181B1 - Augmented/virtual reality based dynamic information processing method and system - Google Patents

Augmented/virtual reality based dynamic information processing method and system Download PDF

Info

Publication number
KR101925181B1
KR101925181B1 KR1020160082250A KR20160082250A KR101925181B1 KR 101925181 B1 KR101925181 B1 KR 101925181B1 KR 1020160082250 A KR1020160082250 A KR 1020160082250A KR 20160082250 A KR20160082250 A KR 20160082250A KR 101925181 B1 KR101925181 B1 KR 101925181B1
Authority
KR
South Korea
Prior art keywords
user terminal
information
view image
interest
uri
Prior art date
Application number
KR1020160082250A
Other languages
Korean (ko)
Other versions
KR20180003009A (en
Inventor
우운택
김재인
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020160082250A priority Critical patent/KR101925181B1/en
Publication of KR20180003009A publication Critical patent/KR20180003009A/en
Application granted granted Critical
Publication of KR101925181B1 publication Critical patent/KR101925181B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

일실시예에 따르면, 증강/가상 현실 기반 동적 정보 처리 방법은 사용자 단말의 위치 정보를 획득하는 단계; 상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 단계-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-; 상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 단계; 및 상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계를 포함한다.According to one embodiment, a method for processing augmented / virtual reality based dynamic information includes: acquiring location information of a user terminal; Selecting a uniform resource identifier (URI) of at least one object of interest from a database based on location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes a location of each of the plurality of objects of interest Stored in association with information; Invoking information of the at least one interested object based on the URI of the at least one interested object; And transmitting information of the at least one interested object to the user terminal to display information of the at least one interested object on a view image displayed on the screen of the user terminal through the camera of the user terminal The method comprising the steps of:

Description

증강/가상 현실 기반 동적 정보 처리 방법 및 시스템{AUGMENTED/VIRTUAL REALITY BASED DYNAMIC INFORMATION PROCESSING METHOD AND SYSTEM}TECHNICAL FIELD [0001] The present invention relates to a dynamic information processing method,

아래의 실시예들은 증강/가상 현실 기반 동적 정보 처리 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에, 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 기술에 관한 것이다.More particularly, the present invention relates to a system and method for dynamic information processing based on augmented / virtual reality, and more particularly, To a technique for displaying information of an object of interest.

여기서, 적어도 어느 하나의 관심 객체는 현실세계에 존재하는 건물, 도로 등의 객체들 중 사용자 단말과 근접한 위치에 존재하며, 사용자가 관심을 갖는 객체를 의미하고, 뷰 이미지는 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 비춰지는 배경, 객체 등을 포함하는 이미지를 의미한다.Herein, at least one object of interest exists in the vicinity of the user terminal among objects such as buildings and roads existing in the real world, means an object that the user is interested in, and the view image is transmitted through the camera of the user terminal Means an image including a background, an object, and the like, which is displayed on the screen of the user terminal.

최근 증강/가상 현실 기술에서 실험적인 서비스가 활발히 진행되고 있는 곳은 모바일 분야이다. 모바일 단말기는 광범위한 실외에서의 트래킹에 필요한, 카메라, 통신 모듈, 다양한 센서들 및 마이크로프로세서를 갖추고 있다.In recent years, mobile services have been actively undergoing experimental services in Augmented Reality / Virtual Reality technology. The mobile terminal is equipped with cameras, communication modules, various sensors and a microprocessor required for extensive outdoor tracking.

이에, 증강/가상 현실 기술은 2차원 맵 또는 3차원 맵 상에 사용자의 위치를 표시하고, 사용자가 원하는 목적지를 안내하거나, 사용자가 관심을 갖는 객체(관심 객체)의 정보를 디스플레이하는 서비스를 제공한다.Accordingly, the Augmentation / Virtual Reality technology displays a position of a user on a two-dimensional map or a three-dimensional map, guides a user to a desired destination, or provides a service of displaying information of an object (interest object) do.

그러나, 기존의 증강/가상 현실 기술은 관심 객체의 정보를 단순히 2차원 맵 또는 3차원 맵 상에 디스플레이하기 때문에, 관심 객체의 정보가 덜 실감나게 사용자에게 제공되는 단점이 있다.However, the existing enhancement / virtual reality technology displays the information of the object of interest simply on a two-dimensional map or a three-dimensional map, so that the information of the object of interest is provided to the user in a less realistic manner.

이에, 아래의 실시예들은 관심 객체의 정보를 실감나게 시각화하여 사용자에게 제공하는 기술을 제안한다.Thus, the following embodiments propose a technique of visually visualizing the information of the object of interest and providing it to the user.

일실시예들은 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 디스플레이되는 뷰 이미지 상에, 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공한다.One embodiment provides a method and system for dynamic information processing based on augmented / virtual reality, which displays information of at least one object of interest on a view image displayed on a screen of a user terminal through a camera of the user terminal.

구체적으로, 일실시예들은 사용자 단말의 위치 정보 및 시선 정보에 기초하여 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier) 선택한 뒤, 적어도 어느 하나의 관심 객체의 URI를 기반으로 적어도 어느 하나의 관심 객체의 정보를 호출하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공한다.In particular, one embodiment may include selecting a uniform resource identifier (URI) of at least one object of interest based on location information and gaze information of the user terminal, and then selecting at least one interest object based on the URI of at least one object of interest The present invention provides a method and system for dynamic information processing based on augmented / virtual reality in which information of an object is called.

또한, 일실시예들은 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 뷰 이미지 상에 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공한다.In addition, embodiments provide an augmented / virtual reality-based dynamic information processing method and system that displays a virtual object associated with at least one interesting object on a view image.

일실시예에 따르면, 증강/가상 현실 기반 동적 정보 처리 방법은 사용자 단말의 위치 정보를 획득하는 단계; 상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 단계-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-; 상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 단계; 및 상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계를 포함한다.According to one embodiment, a method for processing augmented / virtual reality based dynamic information includes: acquiring location information of a user terminal; Selecting a uniform resource identifier (URI) of at least one object of interest from a database based on location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes a location of each of the plurality of objects of interest Stored in association with information; Invoking information of the at least one interested object based on the URI of the at least one interested object; And transmitting information of the at least one interested object to the user terminal to display information of the at least one interested object on a view image displayed on the screen of the user terminal through the camera of the user terminal The method comprising the steps of:

상기 사용자 단말의 위치 정보를 획득하는 단계는 상기 사용자 단말의 시선 정보를 획득하는 단계를 포함하고, 상기 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계는 상기 사용자 단말의 위치 정보 및 시선 정보에 기초하여 상기 데이터베이스로부터 상기 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계를 포함할 수 있다.Wherein the step of acquiring the location information of the user terminal includes acquiring the sight line information of the user terminal, and the step of selecting the URI of at least one interest object from the database comprises: And selecting a URI of the at least one interesting object from the database based on the URI of the at least one object of interest.

상기 사용자 단말의 시선 정보를 획득하는 단계는 상기 사용자 단말의 중력 센서 또는 가속도 센서를 이용하여 상기 사용자 단말이 향하는 방향 또는 회전하는 방향을 계산하는 단계; 및 상기 사용자 단말이 향하는 방향 또는 회전하는 방향에 기초하여 상기 사용자 단말의 시선 정보를 획득하는 단계를 포함할 수 있다.The step of acquiring gaze information of the user terminal may include calculating a direction or a rotating direction of the user terminal using a gravity sensor or an acceleration sensor of the user terminal; And acquiring gaze information of the user terminal based on a direction of the user terminal or a direction of rotation of the user terminal.

상기 사용자 단말의 시선 정보를 획득하는 단계는 상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계; 및 상기 뷰 이미지를 분석한 결과에 기초하여 상기 사용자 단말의 시선 정보를 획득하는 단계를 포함할 수 있다.The step of acquiring gaze information of the user terminal may include analyzing a view image displayed on a screen of the user terminal; And acquiring gaze information of the user terminal based on a result of analyzing the view image.

상기 증강/가상 현실 기반 동적 정보 처리 방법은 상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계; 상기 뷰 이미지를 분석한 결과를 기반으로 상기 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성하는 단계; 및 상기 뷰 이미지 상에 상기 가상 객체를 디스플레이하는 단계를 더 포함할 수 있다.The method includes: analyzing a view image displayed on a screen of the user terminal; Generating a virtual object related to the at least one interesting object based on a result of analyzing the view image; And displaying the virtual object on the view image.

상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계는 상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이하는 단계를 포함할 수 있다.Wherein displaying the information of the at least one object of interest on the view image may include displaying information of the at least one object of interest on the view image in the form of text or images.

상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이하는 단계는 상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계; 및 상기 뷰 이미지에 포함되는 상기 적어도 어느 하나의 관심 객체 상에 상기 적어도 어느 하나의 관심 객체의 정보를 이미지의 형태로 오버랩하여 디스플레이하는 단계를 더 포함할 수 있다.Wherein the displaying of the information of the at least one interested object in the form of text or image on the view image comprises: analyzing a view image displayed on the screen of the user terminal; And displaying the information of the at least one interesting object in the form of an image on the at least one interested object included in the view image.

상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계는 상기 사용자 단말의 화면에서, 상기 적어도 어느 하나의 관심 객체의 정보를 포함하는 상기 뷰 이미지와 상기 사용자 단말의 위치 정보가 표시되는 맵을 자동으로 전환하며 디스플레이하는 단계를 더 포함할 수 있다.Wherein the step of displaying the information of the at least one interested object on the view image comprises the step of displaying the view image including the information of the at least one interested object and the position information of the user terminal on the screen of the user terminal And automatically switching and displaying the displayed map.

상기 사용자 단말의 위치 정보를 획득하는 단계는 상기 사용자 단말의 GPS 신호 또는 통신 신호를 기반으로 상기 사용자 단말의 위치 정보를 추측하는 단계를 포함할 수 있다.The step of acquiring the location information of the user terminal may include estimating the location information of the user terminal based on the GPS signal or the communication signal of the user terminal.

일실시예에 따르면, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 위치 정보를 획득하는 획득부; 상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 선택부-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-; 상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 호출부; 및 상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 정보 제공부를 포함한다.According to one embodiment, an augmenting / virtual reality based dynamic information processing system includes an acquiring unit acquiring position information of a user terminal; A selection unit for selecting a uniform resource identifier (URI) of at least one object of interest from the database based on the location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes Stored in association with location information; A calling unit for calling information of the at least one interested object based on the URI of the at least one interested object; And transmitting information of the at least one interested object to the user terminal to display information of the at least one interested object on a view image displayed on the screen of the user terminal through the camera of the user terminal And an information providing unit for displaying the information.

상기 획득부는 상기 사용자 단말의 시선 정보를 획득하고, 상기 선택부는 상기 사용자 단말의 위치 정보 및 시선 정보에 기초하여 상기 데이터베이스로부터 상기 적어도 어느 하나의 관심 객체의 URI를 선택할 수 있다.The obtaining unit obtains the gaze information of the user terminal, and the selecting unit may select the URI of the at least one interested object from the database based on the position information and the gaze information of the user terminal.

상기 정보 제공부는 상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이할 수 있다.The information providing unit may display information of the at least one interested object in the form of text or image on the view image.

상기 획득부는 상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하고, 상기 정보 제공부는 상기 뷰 이미지를 분석한 결과를 기반으로 상기 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성하며, 상기 뷰 이미지 상에 상기 가상 객체를 디스플레이할 수 있다.Wherein the acquiring unit analyzes a view image displayed on a screen of the user terminal and the information providing unit generates a virtual object related to the at least one interested object based on a result of analyzing the view image, To display the virtual object.

일실시예들은 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 디스플레이되는 뷰 이미지 상에, 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공할 수 있다.One embodiment may provide a system and method for dynamic information processing based on augmented / virtual reality that displays information of at least one object of interest on a view image displayed on a screen of a user terminal through a camera of the user terminal .

구체적으로, 일실시예들은 사용자 단말의 위치 정보 및 시선 정보에 기초하여 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier) 선택한 뒤, 적어도 어느 하나의 관심 객체의 URI를 기반으로 적어도 어느 하나의 관심 객체의 정보를 호출하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공할 수 있다.In particular, one embodiment may include selecting a uniform resource identifier (URI) of at least one object of interest based on location information and gaze information of the user terminal, and then selecting at least one interest object based on the URI of at least one object of interest Based virtual reality information processing method and system for invoking information of an object.

또한, 일실시예들은 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 뷰 이미지 상에 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 방법 및 시스템을 제공할 수 있다.In addition, one embodiment may provide augmented / virtual reality based dynamic information processing method and system that displays a virtual object associated with at least one interesting object on a view image.

따라서, 일실시예들은 적어도 어느 어느 하나의 관심 객체의 정보를 실감나게 시각화하여 사용자에게 제공할 수 있다.Accordingly, one embodiment can realistically visualize information of at least any one interest object and provide it to a user.

도 1 내지 3은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.
도 4 내지 5는 다른 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.
도 6은 또 다른 일실시예에 따른 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.
도 7은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법이 수행되어 가상 객체가 디스플레이되는 사용자 단말의 화면을 나타낸 도면이다.
도 8은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 나타낸 플로우 차트이다.
도 9는 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템을 나타낸 블록도이다.1 to 3 are views for explaining a dynamic information processing method based on augmentation / virtual reality according to an embodiment.
FIGS. 4 to 5 are views for explaining a dynamic information processing method based on augmentation / virtual reality according to another embodiment.
FIG. 6 is a diagram for explaining a dynamic information processing method based on augmentation / virtual reality according to another embodiment.
FIG. 7 is a diagram illustrating a screen of a user terminal on which a virtual object is displayed by performing an augmentation / virtual reality-based dynamic information processing method according to an exemplary embodiment.
FIG. 8 is a flowchart illustrating a method for processing augmented / virtual reality-based dynamic information according to an embodiment.
FIG. 9 is a block diagram illustrating an augmented / virtual reality-based dynamic information processing system according to an embodiment.

이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. However, the present invention is not limited to or limited by the embodiments. In addition, the same reference numerals shown in the drawings denote the same members.

또한, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 시청자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.Also, terminologies used herein are terms used to properly represent preferred embodiments of the present invention, which may vary depending on the viewer, the intention of the operator, or the custom in the field to which the present invention belongs. Therefore, the definitions of these terms should be based on the contents throughout this specification.

도 1 내지 3은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.1 to 3 are views for explaining a dynamic information processing method based on augmentation / virtual reality according to an embodiment.

도 1 내지 도 3을 참조하면, 사용자 단말(110)이 복수의 관심 객체들(120, 130, 140) 중 제1 관심 객체(120)에 근접한 위치에 있는 경우, 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 위치 정보를 획득한 뒤, 데이터베이스에 저장된 복수의 관심 객체들(120, 130, 140) 중 사용자 단말(110)의 위치 정보와 가장 근접한 위치 정보를 갖는 제1 관심 객체(120)의 URI(uniform resource identifier)(410)를 선택할 수 있다.1 to 3, when the user terminal 110 is in a position close to the first one of the plurality of objects of interest 120, 130, and 140, The real-based dynamic information processing system obtains the position information of the user terminal 110 and then obtains the position information of the user terminal 110 closest to the user terminal 110 among the plurality of interested objects 120, 130 and 140 stored in the database A uniform resource identifier (URI) 410 of the first object of interest 120 with which the user is interested.

이 때, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 GPS 신호 또는 통신 신호를 기반으로 사용자 단말(110)의 위치 정보를 추측할 수 있다.At this time, the augmented / virtual reality-based dynamic information processing system can estimate the location information of the user terminal 110 based on the GPS signal or the communication signal of the user terminal 110.

여기서, 데이터베이스에는 복수의 관심 객체들(120, 130, 140) 각각의 URI가 복수의 관심 객체들(120, 130, 140) 각각의 위치 정보와 연관되어 저장된다. 예를 들어, 데이터베이스에는 제1 관심 객체(120)의 URI(410)가 제1 관심 객체(120)의 위치 정보와 연관되어 저장되고, 제2 관심 객체(130)의 URI가 제2 관심 객체(130)의 위치 정보와 연관되어 저장되며, 제3 관심 객체(140)의 URI가 제3 관심 객체(140)의 위치 정보와 연관되어 저장되어 있을 수 있다. 이러한 데이터베이스는 증강/가상 현실 기반 동적 정보 처리 방법이 수행되기 위하여, 미리 구축되어 있을 수 있다.Here, the URI of each of a plurality of objects of interest 120, 130, and 140 is stored in association with location information of each of a plurality of objects of interest 120, 130, and 140. For example, in the database, the URI 410 of the first ROI 120 is stored in association with the location information of the first ROI 120, and the URI of the second ROI 130 is stored in a second ROI 130 and the URI of the third object of interest 140 may be stored in association with the location information of the third object of interest 140. [ Such a database may be pre-built to perform augmented / virtual reality based dynamic information processing methods.

제1 관심 객체(120)의 URI(410)이 선택되면, 증강/가상 현실 기반 동적 정보 처리 시스템은 도 3의 URI 기반의 정보 처리 예시와 같이 제1 관심 객체(120)의 URI(410)를 기반으로 적어도 어느 하나의 관심 객체(120)의 정보(121)를 호출할 수 있다. 이 때, 적어도 어느 하나의 관심 객체(120)의 정보(121)는 위의 데이터베이스와 구별되는 복수의 데이터베이스들에 분산 저장될 수 있다. 즉, 증강/가상 현실 기반 동적 정보 처리 시스템은 인터넷 상에 떠도는 적어도 어느 하나의 관심 객체(120)의 명칭, 정의, 상세 설명, 또는 이미지 등의 정보(121)를 호출할 수 있도록 제1 관심 객체(120)의 URI(410)를 적어도 어느 하나의 관심 객체(120)의 정보(121)와 연결시켜 둘 수 있다.If the URI 410 of the first object of interest 120 is selected, the augmented / virtual reality-based dynamic information processing system may retrieve the URI 410 of the first object of interest 120, as illustrated in the URI- The information 121 of at least one interested object 120 can be called based on the information 121 of interest. At this time, the information 121 of at least one interested object 120 may be distributedly stored in a plurality of databases that are distinguished from the above database. That is, the augmented / virtual reality-based dynamic information processing system may be configured to call the information 121 such as the name, definition, detailed description, or image of at least one interested object 120 floating on the Internet, The URI 410 of the object 120 may be linked to the information 121 of at least one object 120 of interest.

이와 같이, 데이터베이스가 복수의 관심 객체들(120, 130, 140) 각각의 정보를 직접 저장하는 대신에, 복수의 관심 객체들(120, 130, 140) 각각의 정보를 호출하는 URI만을 저장함으로써, 적은 저장 용량으로 구성될 수 있다.Thus, by storing only the URI that invokes the information of each of the plurality of interested objects 120, 130, 140 instead of storing the information of each of the objects of interest 120, 130, 140 directly, It can be configured with a small storage capacity.

이에, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(120)의 URI(410)를 기반으로 호출된 적어도 어느 하나의 관심 객체(120)의 정보(121)를 사용자 단말(110)로 전송함으로써, 사용자 단말(110)로 하여금 사용자 단말(110)의 카메라를 통하여 사용자 단말(110)의 화면에 디스플레이되는 뷰 이미지(210) 상에 제1 관심 객체(120)의 정보(121)를 디스플레이하도록 할 수 있다.The dynamic information processing system based on the augmented reality / virtual reality may be configured to transmit information 121 of at least one interested object 120 that has been called based on the URI 410 of the first object 120 to the user terminal 110 The user terminal 110 displays the information 121 of the first object of interest 120 on the view image 210 displayed on the screen of the user terminal 110 via the camera of the user terminal 110 .

여기서, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(120)의 정보(121)를 텍스트 또는 이미지의 형태로 디스플레이할 수 있다. 예를 들어, 도 2에 도시된 바와 같이, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(120)의 명칭 및 정의(122)를 텍스트 형태로 뷰 이미지(210) 상에 디스플레이할 수 있고, 제1 관심 객체(120)이 명칭 및 정의(122)에 대한 사용자의 터치 입력에 응답하여, 제1 관심 객체(120)의 상세 설명을 텍스트 형태로 뷰 이미지(210) 상에 더 디스플레이할 수 있다.Here, the augmented / virtual reality-based dynamic information processing system can display information 121 of the first object of interest 120 in the form of text or images. 2, the augmented / virtual reality-based dynamic information processing system can display the name and definition 122 of the first object of interest 120 in text form on the view image 210 And in response to a user's touch input for the name and definition 122 the first interest object 120 further displays on the view image 210 a textual description of the first interest object 120 .

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지(210)를 분석하여, 뷰 이미지(210) 상 제1 관심 객체(120)의 위치 상태를 확인함으로써, 뷰 이미지(210)에 포함되는 제1 관심 객체(120) 상에 제1 관심 객체(120)의 정보(121)를 디스플레이할 수 있다.In addition, the augmented / virtual reality based dynamic information processing system may analyze the view image 210 to identify the position of the first object of interest 120 on the view image 210, The user may display the information 121 of the first object of interest 120 on the object of interest 120.

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(120)의 정보(121)를 텍스트 또는 이미지의 형태로 디스플레이하는 과정에서, 추가적인 사운드를 재생할 수도 있다.In addition, the augmented / virtual reality-based dynamic information processing system may reproduce additional sound in the process of displaying information 121 of the first object of interest 120 in the form of text or images.

이와 같이 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자가 사용자 단말(110)을 통하여 현실 세계의 객체들을 보고 있는 뷰 이미지(210) 상에 제1 관심 객체(120)의 정보(121)를 디스플레이함으로써, 제1 관심 객체(120)의 정보(121)를 실감나게 시각화하여 사용자에게 제공할 수 있다.As described above, the enhancement / virtual reality based dynamic information processing system displays the information 121 of the first object of interest 120 on the view image 210 in which the user views the real world objects through the user terminal 110 , The information 121 of the first interest object 120 can be realistically visualized and provided to the user.

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 화면에 디스플레이되는 맵 상에 사용자 단말(110)의 위치 정보를 표시할 수도 있다. 이러한 경우, 증강/가상 현실 기반 동적 정보 처리 시스템은 도 1에 도시된 맵과 같은 2차원 맵(또는 3차원 맵)을 사용자 단말(110)의 화면에 디스플레이한 뒤, 획득되는 사용자 단말(110)의 위치 정보를 맵 상에 표시하며, 사용자 단말(110)의 위치 정보와 가장 근접한 위치 정보를 갖는 제1 관심 객체(120)의 정보(121)를 맵 상에 더 디스플레이할 수 있다.Also, the augmented / virtual reality based dynamic information processing system may display the location information of the user terminal 110 on the map displayed on the screen of the user terminal 110. [ In this case, the augmented / virtual reality-based dynamic information processing system displays a two-dimensional map (or a three-dimensional map) such as the map shown in FIG. 1 on the screen of the user terminal 110, And further displays information 121 of the first ROI 120 having location information closest to the location information of the user terminal 110 on the map.

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 화면에서, 적어도 하나의 관심 객체(120)의 정보(121)를 포함하는 뷰 이미지(210)와 사용자 단말(110)의 위치 정보가 표시되는 맵을 자동으로 전환하며 디스플레이할 수 있다.In addition, the augmented / virtual reality-based dynamic information processing system includes a view image 210 including information 121 of at least one object of interest 120 and a location of the user terminal 110, It is possible to automatically display and display the map in which the information is displayed.

예를 들어, 사용자 단말(110)이 이동하지 않고, 특정 위치에서 머무는 경우, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 화면에 적어도 하나의 관심 객체(120)의 정보(121)를 포함하는 뷰 이미지(210)를 디스플레이하다가, 사용자 단말(110)의 이동이 감지되는 경우, 사용자 단말(110)의 화면에 사용자 단말(110)의 위치 정보가 표시되는 맵을 디스플레이할 수 있다. 이 때, 사용자 단말(110)의 이동은 미리 설정된 시간 단위로 사용자 단말(110)의 위치 정보를 확인함으로써, 감지될 수 있다.For example, if the user terminal 110 does not move and stays at a specific location, the augmented / virtual reality based dynamic information processing system may display information (121 And displays the map on which the location information of the user terminal 110 is displayed on the screen of the user terminal 110 when the movement of the user terminal 110 is detected while displaying the view image 210 including the location information of the user terminal 110 . At this time, the movement of the user terminal 110 can be detected by confirming the position information of the user terminal 110 by a predetermined time unit.

다른 예를 들면, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(110)의 이동이 감지되고 있는 경우, 사용자 단말(110)의 화면에 사용자 단말(110)의 위치 정보가 표시되는 맵을 디스플레이하다가, 사용자 단말(110)의 이동하지 않고, 특정 위치에서 머물게 되면, 사용자 단말(110)의 화면에 적어도 하나의 관심 객체(120)의 정보(121)를 포함하는 뷰 이미지(210)를 디스플레이할 수 있다.For example, when the movement of the user terminal 110 is detected, the dynamic information processing system based on the augmentation / virtual reality may display a map on which the position information of the user terminal 110 is displayed on the screen of the user terminal 110 A view image 210 including information 121 of at least one object of interest 120 is displayed on the screen of the user terminal 110 when the user terminal 110 does not move and remains at a specific position .

도 4 내지 5는 다른 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.FIGS. 4 to 5 are views for explaining a dynamic information processing method based on augmentation / virtual reality according to another embodiment.

도 4 내지 5를 참조하면, 사용자 단말(410)이 복수의 관심 객체들(420, 330, 340) 중 제1 관심 객체(420) 및 제2 관심 객체(430) 모두에 근접한 위치에 있고, 제1 관심 객체(420)를 향하고 있는 경우, 도 1 내지 3을 참조하여 기재된 방식만으로는 데이터베이스에 저장된 복수의 관심 객체들 중 사용자 단말(410)의 위치 정보와 가장 근접한 위치 정보를 갖는 관심 객체의 URI를 선택할 수 없는 문제가 있다.4 to 5, when the user terminal 410 is in a position close to both the first interest object 420 and the second interest object 430 among the plurality of interest objects 420, 330, and 340, 1 to 3, the URI of the object of interest having the position information closest to the position information of the user terminal 410 among the plurality of objects of interest stored in the database There is a problem that can not be selected.

이에, 다른 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)의 위치 정보를 획득하는 과정에서, 사용자 단말(410)의 시선 정보(411)를 획득함으로써, 데이터베이스에 저장된 복수의 관심 객체들(420, 430, 440) 중 사용자 단말(410)의 위치 정보와 가장 근접한 위치 정보를 갖는 제1 관심 객체(420) 및 제2 관심 객체(430) 각각의 URI를 선택한 뒤, 제1 관심 객체(420) 및 제2 관심 객체(430) 중 사용자 단말(410)의 시선 정보(411)에 대응하는 제1 관심 객체(420)의 URI를 최종적으로 선택할 수 있다.Accordingly, in the process of acquiring the location information of the user terminal 410, the augmented / virtual reality based dynamic information processing system according to another embodiment acquires the sight line information 411 of the user terminal 410, After selecting the URI of each of the first and second objects of interest 420 and 430 having location information closest to the location information of the user terminal 410 among the plurality of objects of interest 420, 430, and 440, The URI of the first ROI 420 corresponding to the gaze information 411 of the user terminal 410 among the first ROI 420 and the second ROI 430 may be finally selected.

여기서, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)의 중력 센서 또는 가속도 센서를 이용하여 사용자 단말(410)이 향하는 방향 또는 회전하는 방향을 계산함으로써, 사용자 단말(410)의 위치 정보를 기반으로 사용자 단말(410)이 향하는 방향 또는 회전하는 방향에 기초하여 사용자 단말(410)의 시선 정보(411)를 획득할 수 있다.Here, the augmented / virtual reality-based dynamic information processing system calculates the direction of the user terminal 410 or the direction of rotation using the gravity sensor or the acceleration sensor of the user terminal 410, The user terminal 410 can obtain the gaze information 411 of the user terminal 410 based on the direction of the user terminal 410 or the direction of the rotation of the user terminal 410. [

이러한 경우, 데이터베이스에는 복수의 관심 객체들(420, 430, 440) 각각의 위치 정보가 특정 좌표를 기준으로 하는 방향 정보를 포함하도록 현실 세계의 2차원 좌표 값으로 표현됨으로써, 복수의 관심 객체들(420, 430, 440) 각각의 정보에 연관되어 저장될 수 있다. 예를 들어, 데이터베이스에는 제1 관심 객체(420)가 특정 좌표를 기준으로 북서쪽에 위치한다는 좌표 값이 제1 관심 객체(420)의 URI와 연관되어 저장되고, 제2 관심 객체(430)가 특정 좌표를 기준으로 북동쪽에 위치한다는 좌표 값이 제2 관심 객체(430)의 URI와 연관되어 저장되며, 제3 관심 객체(440)가 특정 좌표를 기준으로 남동쪽에 위치한다는 좌표 값이 제3 관심 객체(440)의 URI와 연관되어 저장될 수 있다. 마찬가지로, 데이터베이스는 증강/가상 현실 기반 동적 정보 처리 방법이 수행되기 위하여, 미리 구축되어 있을 수 있다.In this case, the database may be represented by a two-dimensional coordinate value of the real world so that the positional information of each of the plurality of interested objects 420, 430, and 440 includes direction information based on a specific coordinate, 420, 430, and 440, respectively. For example, in a database, a coordinate value indicating that a first interest object 420 is located northwest of a specific coordinate is stored in association with a URI of a first interest object 420, and a second interest object 430 is associated with a specific The coordinate value indicating that the third interest object 440 is located in the northeast direction is stored in association with the URI of the second interest object 430 and the coordinate value indicating that the third interest object 440 is located in the southeast direction based on the specific coordinate is stored in association with the third interest object 430. [ RTI ID = 0.0 > 440 < / RTI > Likewise, the database may be pre-built to perform the Augmentation / Virtual Reality based dynamic information processing method.

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)의 화면에 디스플레이되는 뷰 이미지(510)를 분석함으로써, 뷰 이미지(510)를 분석한 결과에 기초하여 사용자 단말(410)의 시선 정보(411)를 획득할 수도 있다. 예를 들어, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)의 화면에 디스플레이되는 뷰 이미지(510)를 분석한 뒤, 데이터베이스에 저장된 복수의 관심 객체들(420, 430, 440) 각각의 URI를 통하여 복수의 관심 객체들(420, 430, 440) 각각의 이미지를 호출함으로써, 뷰 이미지(510)와 복수의 관심 객체들(420, 430, 440) 각각의 이미지를 매칭할 수 있다. 따라서, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)이 복수의 관심 객체들(420, 430, 440) 중 제1 관심 객체(420)를 향하고 있음(사용자 단말(410)의 시선 정보(411)가 제1 관심 객체(420)를 향한 방향 정보라는 점)을 인식할 수 있다.The dynamic information processing system based on the augmented reality and the virtual reality analyzes the view image 510 displayed on the screen of the user terminal 410 and displays the view of the user terminal 410 on the basis of the result of analyzing the view image 510. [ Information 411 may be obtained. For example, the augmented / virtual reality-based dynamic information processing system analyzes a view image 510 displayed on the screen of the user terminal 410, and then displays a plurality of objects of interest 420, 430, and 440 The image of each of the plurality of interest objects 420, 430, 440 may be matched with the view image 510 by calling an image of each of a plurality of objects of interest 420, 430, Accordingly, the augmented / virtual reality-based dynamic information processing system may be configured such that the user terminal 410 is pointing to the first one of the plurality of interested objects 420, 430, 440 (the gaze information of the user terminal 410) (411) is direction information toward the first object of interest 420).

상술한 바와 같이 사용자 단말(410)의 위치 정보 및 시선 정보(411)에 기초하여 제1 관심 객체(420)의 URI를 선택한 뒤, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(420)의 URI를 기반으로 제1 관심 객체(420)의 정보(421)를 호출하고, 이를 사용자 단말(410)로 전송함으로써, 사용자 단말(410)로 하여금 사용자 단말(410)의 카메라를 통하여 사용자 단말(410)의 화면에 디스플레이되는 뷰 이미지(510) 상에 제1 관심 객체(420)의 정보(421)를 디스플레이하도록 할 수 있다.After selecting the URI of the first object of interest 420 based on the location information and the sight line information 411 of the user terminal 410 as described above, the augmented / virtual reality- The user terminal 410 calls the information 421 of the first interest object 420 based on the URI of the user terminal 410 and transmits the information 421 to the user terminal 410, (421) of the first object of interest (420) on the view image (510) displayed on the screen of the first object (410).

이 때, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(420)의 정보(421)를 텍스트의 형태로 디스플레이할 뿐만 아니라, 이미지의 형태로 디스플레이하는 과정에서, 뷰 이미지(510)에 포함되는 제1 관심 객체(420) 상에 제1 관심 객체(420)의 정보(421)를 오버랩하여 디스플레이할 수도 있다. 이에 대한 상세한 설명은 도 6를 참조하여 기재하기로 한다.At this time, the augmented / virtual reality-based dynamic information processing system not only displays the information 421 of the first object of interest 420 in the form of text, but also displays the information 421 in the view image 510 Information 421 of the first object of interest 420 may be overlapped and displayed on the first object of interest 420 included. A detailed description thereof will be described with reference to Fig.

이와 같이 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말(410)의 위치 정보뿐만 아니라, 사용자 단말(410)의 시선 정보를 더 이용함으로써, 사용자가 주시하며 정보를 원하는 대상을 정확하게 선택하여 그 정보를 사용자에게 제공할 수 있다.The dynamic information processing system based on the Augmentation / Virtual Reality can use not only the location information of the user terminal 410 but also the sight line information of the user terminal 410, so that the user can watch and select the desired information accurately, To the user.

도 6은 또 다른 일실시예에 따른 따른 증강/가상 현실 기반 동적 정보 처리 방법을 설명하기 위한 도면이다.FIG. 6 is a diagram for explaining a dynamic information processing method based on augmentation / virtual reality according to another embodiment.

도 6을 참조하면, 또 다른 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템은 도 1 내지 5를 참조하여 기재된 바와 같이 사용자 단말(610)의 뷰 이미지(630)에 제1 관심 객체(620)의 정보(621)를 디스플레이하는 과정에서, 제1 관심 객체(620)의 정보(621)를 뷰 이미지(630)에 포함되는 제1 관심 객체(620) 상에 오버랩하여 디스플레이할 수 있다.Referring to FIG. 6, the augmented / virtual reality based dynamic information processing system according to another embodiment may include a first interest object (e.g., a second interest object) in a view image 630 of a user terminal 610 as described with reference to FIGS. Information 621 of the first ROI 620 may be displayed in an overlapping manner on the first ROI 620 included in the view image 630 in the process of displaying the information 621 of the first ROI 620.

구체적으로, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지(630)를 분석한 뒤, 분석 결과에 기초하여, 데이터베이스에 저장된 제1 관심 객체(620)의 URI를 기반으로 호출되는 제1 관심 객체(620)의 복수의 이미지들 중 뷰 이미지(630)에 대응되는 이미지(621)를 선택함으로써, 뷰 이미지(630)에 포함되는 제1 관심 객체(620) 상에 이미지(621)를 오버랩하여 디스플레이할 수 있다.Specifically, the augmented / virtual reality-based dynamic information processing system analyzes the view image 630 and, based on the analysis results, generates a first interest object 630, which is called based on the URI of the first interest object 620 stored in the database (621) on the first object of interest (620) included in the view image (630) by selecting an image (621) corresponding to the view image (630) can do.

예를 들어, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지(630)에 포함되는 어느 하나의 객체를 기반으로 3차원 좌표계를 생성하고, 3차원 좌표계에 기초하여 뷰 이미지(630) 상 제1 관심 객체(620)의 위치 상태를 분석할 수 있다. 이에, 증강/가상 현실 기반 동적 정보 처리 시스템은 데이터베이스에 저장된 제1 관심 객체(620)의 URI를 기반으로 제1 관심 객체(620)의 복수의 이미지들을 호출하고, 복수의 이미지들 중 뷰 이미지(630) 상 제1 관심 객체(620)의 위치 상태와 동일한 위치 상태를 갖는 이미지(621)를 선택함으로써, 뷰 이미지(630)에 포함되는 제1 관심 객체(620) 상에 이미지(621)를 오버랩하여 디스플레이할 수 있다.For example, the augmented / virtual reality based dynamic information processing system generates a three-dimensional coordinate system based on any one of the objects included in the view image 630, and generates a three-dimensional coordinate system based on the three- The positional state of the object of interest 620 can be analyzed. Thus, the augmented / virtual reality based dynamic information processing system calls a plurality of images of the first object of interest 620 based on the URI of the first object of interest 620 stored in the database, 630 onto the first object of interest 620 included in the view image 630 by selecting the image 621 having the same positional state as the positional state of the first object of interest 620. [ .

여기서, 제1 관심 객체(620)의 이미지(621)는 전제가 제1 관심 객체(620) 상에 오버랩되어 디스플레이될 뿐만 아니라, 일부만이 오버랩되어 디스플레이될 수 있다.Here, the image 621 of the first object of interest 620 is displayed so that not only the premise is overlapped on the first object of interest 620, but only a part of the image is overlapped.

이와 같이, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지(630)를 통하여 실제와 다른 제1 관심 객체(620)를 제공함으로써, 제1 관심 객체(620)에 대한 다양한 정보를 사용자에게 가시화할 수 있다.Thus, the augmented / virtual reality based dynamic information processing system can provide various information about the first object of interest 620 to the user by providing the first object of interest 620 different from the actual one through the view image 630 .

또한, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(620)의 정보(621)뿐만 아니라, 제1 관심 객체(620)와 관련된 가상 객체를 생성하여, 뷰 이미지(630) 상에 가상 객체를 디스플레이할 수도 있다. 이에 대한 상세한 설명은 도 7을 참조하여 기재하기로 한다.In addition, the augmented / virtual reality based dynamic information processing system may generate virtual objects associated with the first interest object 620, as well as information 621 of the first interest object 620, You can also display objects. A detailed description thereof will be described with reference to FIG.

도 7은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법이 수행되어 가상 객체가 디스플레이되는 사용자 단말의 화면을 나타낸 도면이다.FIG. 7 is a diagram illustrating a screen of a user terminal on which a virtual object is displayed by performing an augmentation / virtual reality-based dynamic information processing method according to an exemplary embodiment.

도 7을 참조하면, 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템은 도 1 내지 5를 참조하여 기재된 바와 같이 사용자 단말(710)의 뷰 이미지(730)에 제1 관심 객체(720)의 정보(721)를 디스플레이하는 과정에서, 제1 관심 객체(720)와 관련된 가상 객체(740)를 더 디스플레이할 수 있다.Referring to FIG. 7, augmented / virtual reality based dynamic information processing system according to one embodiment includes a first interest object 720 in a view image 730 of a user terminal 710 as described with reference to FIGS. 1-5, The virtual object 740 associated with the first object of interest 720 may be further displayed in the process of displaying the information 721 of the object of interest 720. [

구체적으로, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지(730)를 분석한 뒤, 분석 결과에 기초하여, 데이터베이스에 저장된 제1 관심 객체(720)의 URI를 기반으로 호출되는 제1 관심 객체(720)의 정보(721)와 관련된 가상 객체(740)를 생성함으로써, 가상 객체(740)를 뷰 이미지(730)에 디스플레이할 수 있다.Specifically, the augmented / virtual reality-based dynamic information processing system analyzes the view image 730 and, based on the analysis results, generates a first interest object 730, which is called based on the URI of the first interest object 720 stored in the database The virtual object 740 can be displayed in the view image 730 by creating a virtual object 740 associated with the information 721 of the virtual object 720. [

이러한 경우, 데이터베이스에는 복수의 관심 객체들 각각의 URI에 복수의 가상 객체들 각각의 정보가 연관되어 저장될 수 있다.In this case, the database may store the information of each of the plurality of virtual objects in association with the URI of each of a plurality of interested objects.

예를 들어, 증강/가상 현실 기반 동적 정보 처리 시스템은 제1 관심 객체(720)의 URI를 기반으로 제1 관심 객체(720)의 정보(721)와 관련된 가상 객체(640)를 선택한 뒤, 뷰 이미지(730)에 포함되는 어느 하나의 객체를 기반으로 생성된 3차원 좌표계 상에 가상 객체(740)를 가시화함으로써, 뷰 이미지(730) 상에 가상 객체(740)를 실감나게 디스플레이할 수 있다.For example, the augmented / virtual reality based dynamic information processing system may select a virtual object 640 associated with the information 721 of the first object of interest 720 based on the URI of the first object of interest 720, The virtual object 740 can be realistically displayed on the view image 730 by visualizing the virtual object 740 on the three-dimensional coordinate system created based on any one of the objects included in the image 730.

이 때, 가상 객체(740)는 사용자 단말(710)을 통한 사용자의 입력과 상호 작용하는 아바타의 형태로 구현되며, 제1 관심 객체(720)의 정보(721)를 사운드 또는 움직임으로 재생하는 역할을 함으로써, 사용자로 하여금, 제1 관심 객체(720)의 정보(721)를 보다 재미있고 직관적으로 수용하도록 도울 수 있다.At this time, the virtual object 740 is implemented in the form of an avatar that interacts with the user's input through the user terminal 710, and plays the sound 720 of the information 721 of the first interest object 720 Thereby helping the user to more conveniently and intuitively accept the information 721 of the first object of interest 720. [

도 8은 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법을 나타낸 플로우 차트이다.FIG. 8 is a flowchart illustrating a method for processing augmented / virtual reality-based dynamic information according to an embodiment.

도 8을 참조하면, 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 방법은 증강/가상 현실 기반 동적 정보 처리 시스템에 의해 수행된다. 여기서, 증강/가상 현실 기반 동적 정보 처리 시스템은 하드웨어 모듈로 구현될 뿐만 아니라, 전자 기기를 구현하는 컴퓨터와 결합하는 매체에 저장된 컴퓨터 프로그램의 형태로 구현될 수도 있다.Referring to FIG. 8, the augmenting / virtual reality based dynamic information processing method according to an embodiment is performed by an augmenting / virtual reality based dynamic information processing system. Here, the augmented / virtual reality based dynamic information processing system may be implemented not only as a hardware module but also as a computer program stored in a medium coupled with a computer implementing the electronic device.

증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 위치 정보를 획득한다(810). 예를 들어, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 GPS 신호 또는 통신 신호를 기반으로 사용자 단말의 위치 정보를 추측함으로써, 사용자 단말의 위치 정보를 획득할 수 있다.The augmented / virtual reality based dynamic information processing system obtains the location information of the user terminal (810). For example, the augmented / virtual reality based dynamic information processing system can obtain the location information of the user terminal by guessing the location information of the user terminal based on the GPS signal or the communication signal of the user terminal.

또한, 810 단계에서, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 화면에 디스플레이되는 맵 상에 사용자 단말의 위치 정보를 표시할 수도 있다.In addition, in step 810, the augmented / virtual reality based dynamic information processing system may display the location information of the user terminal on the map displayed on the screen of the user terminal.

또한, 810 단계에서, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 시선 정보를 획득할 수 있다.Also, in step 810, the augmented / virtual reality based dynamic information processing system may obtain gaze information of the user terminal.

예를 들어, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 중력 센서 또는 가속도 센서를 이용하여 사용자 단말이 향하는 방향 또는 회전하는 방향을 계산함으로써, 사용자 단말이 향하는 방향 또는 회전하는 방향에 기초하여 사용자 단말의 시선 정보를 획득할 수 있다.For example, augmented / virtual reality-based dynamic information processing system may calculate a direction or a rotating direction of a user terminal using a gravity sensor or an acceleration sensor of a user terminal, It is possible to obtain the sight line information of the user terminal.

다른 예를 들면, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함으로써, 뷰 이미지를 분석한 결과에 기초하여 사용자 단말의 시선 정보를 획득할 수 있다.In another example, the augmented / virtual reality based dynamic information processing system can acquire gaze information of a user terminal based on a result of analyzing a view image by analyzing a view image displayed on a screen of the user terminal.

그 다음, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 위치 정보에 기초하여 데이터베이스-데이터베이스에는 복수의 관심 객체들 각각의 URI(uniform resource identifier)가 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-로부터 적어도 어느 하나의 관심 객체의 URI를 선택한다(820).Then, based on the location information of the user terminal, the dynamic information processing system based on the augmented reality / virtual reality may be configured such that a uniform resource identifier (URI) of each of a plurality of objects of interest is associated with location information of each of a plurality of objects of interest (820) the URI of at least one object of interest.

특히, 820 단계에서, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 위치 정보 및 시선 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI를 선택할 수 있다.In particular, in step 820, the augmented / virtual reality-based dynamic information processing system may select a URI of at least one interesting object from the database based on the location information and gaze information of the user terminal.

그 다음, 증강/가상 현실 기반 동적 정보 처리 시스템은 적어도 어느 하나의 관심 객체의 URI를 기반으로 적어도 어느 하나의 관심 객체의 정보를 호출한다(830).Next, the augmented / virtual reality based dynamic information processing system calls 830 information of at least one interested object based on the URI of at least one interested object.

그 후, 증강/가상 현실 기반 동적 정보 처리 시스템은 적어도 어느 하나의 관심 객체의 정보를 사용자 단말로 전송하여, 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 적어도 어느 하나의 관심 객체의 정보를 디스플레이한다(840).Thereafter, the augmented / virtual reality-based dynamic information processing system transmits information of at least one interested object to the user terminal and displays at least one of the at least one interesting object on the view image displayed on the screen of the user terminal through the camera of the user terminal. Information of one interest object is displayed (840).

여기서, 증강/가상 현실 기반 동적 정보 처리 시스템은 뷰 이미지 상에 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이할 수 있다.Here, the augmented / virtual reality-based dynamic information processing system can display information of at least one interested object in the form of text or image on the view image.

더 나아가, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함으로써, 뷰 이미지에 포함되는 적어도 어느 하나의 관심 객체 상에 적어도 어느 하나의 관심 객체의 정보를 이미지의 형태로 오버랩하여 디스플레이할 수 있다.Furthermore, the enhancement / virtual reality-based dynamic information processing system analyzes the view image displayed on the screen of the user terminal so that information of at least one interesting object on at least one interesting object included in the view image Can be overlapped and displayed.

또한, 도면에는 도시되지 않았지만, 증강/가상 현실 기반 동적 정보 처리 시스템은 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함으로써, 뷰 이미지를 분석한 결과를 기반으로 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성할 수 있고, 이에 따라, 뷰 이미지 상에 가상 객체를 디스플레이할 수 있다.Although not shown in the drawing, the augmented / virtual reality-based dynamic information processing system analyzes a view image displayed on a screen of a user terminal, thereby generating a virtual object So that a virtual object can be displayed on the view image.

또한, 증강/가상 현실 반 동적 정보 처리 시스템은 사용자 단말의 화면에서, 적어도 어느 하나의 관심 객체의 정보를 포함하는 뷰 이미지와 사용자 단말의 위치 정보가 표시되는 맵을 자동으로 전환하며 디스플레이할 수 있다.Also, the augmented / virtual reality anti-dynamic information processing system can automatically display and switch a view image including information of at least one interested object and a map in which position information of the user terminal is displayed on the screen of the user terminal .

도 9는 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템을 나타낸 블록도이다.FIG. 9 is a block diagram illustrating an augmented / virtual reality-based dynamic information processing system according to an embodiment.

도 9를 참조하면, 일실시예에 따른 증강/가상 현실 기반 동적 정보 처리 시스템은 획득부(910), 선택부(920), 호출부(930) 및 정보 제공부(940)를 포함한다.9, the enhancement / virtual reality based dynamic information processing system according to an exemplary embodiment includes an acquiring unit 910, a selecting unit 920, a calling unit 930, and an information providing unit 940.

획득부(910)는 사용자 단말의 위치 정보를 획득한다. 예를 들어, 획득부(910)는 사용자 단말의 GPS 신호 또는 통신 신호를 기반으로 사용자 단말의 위치 정보를 추측함으로써, 사용자 단말의 위치 정보를 획득할 수 있다.The acquiring unit 910 acquires position information of the user terminal. For example, the acquiring unit 910 may acquire the location information of the user terminal by guessing the location information of the user terminal based on the GPS signal or the communication signal of the user terminal.

또한, 획득부(910)는 사용자 단말의 시선 정보를 획득할 수 있다.In addition, the acquiring unit 910 can acquire gaze information of the user terminal.

예를 들어, 획득부(910)는 사용자 단말의 중력 센서 또는 가속도 센서를 이용하여 사용자 단말이 향하는 방향 또는 회전하는 방향을 계산함으로써, 사용자 단말이 향하는 방향 또는 회전하는 방향에 기초하여 사용자 단말의 시선 정보를 획득할 수 있다.For example, the acquiring unit 910 may calculate the direction or rotation direction of the user terminal using the gravity sensor or the acceleration sensor of the user terminal, Information can be obtained.

다른 예를 들면, 획득부(910)는 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함으로써, 뷰 이미지를 분석한 결과에 기초하여 사용자 단말의 시선 정보를 획득할 수 있다.Alternatively, the acquiring unit 910 may acquire gaze information of the user terminal based on a result of analyzing the view image by analyzing the view image displayed on the screen of the user terminal.

선택부(920)는 사용자 단말의 위치 정보에 기초하여 데이터베이스-데이터베이스에는 복수의 관심 객체들 각각의 URI(uniform resource identifier)가 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-로부터 적어도 어느 하나의 관심 객체의 URI를 선택한다.The selecting unit 920 may be configured to select, based on the location information of the user terminal, at least a uniform resource identifier (URI) of each of a plurality of objects of interest stored in the database-database in association with location information of each of a plurality of objects of interest Selects the URI of an object of interest.

특히, 선택부(920)는 사용자 단말의 위치 정보 및 시선 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI를 선택할 수 있다.In particular, the selection unit 920 may select a URI of at least one interested object from the database based on the position information and the sight line information of the user terminal.

호출부(930)는 적어도 어느 하나의 관심 객체의 URI를 기반으로 적어도 어느 하나의 관심 객체의 정보를 호출한다.The calling unit 930 calls information of at least one interested object based on the URI of at least one interested object.

정보 제공부(940)는 적어도 어느 하나의 관심 객체의 정보를 사용자 단말로 전송하여, 사용자 단말의 카메라를 통하여 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 적어도 어느 하나의 관심 객체의 정보를 디스플레이한다.The information providing unit 940 transmits information of at least one interested object to the user terminal and displays information of at least one interested object on the view image displayed on the screen of the user terminal through the camera of the user terminal Lt; / RTI >

여기서, 정보 제공부(940)는 뷰 이미지 상에 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이할 수 있다.Here, the information providing unit 940 may display information of at least one interested object in the form of text or image on the view image.

더 나아가, 정보 제공부(940)는 획득부(910)가 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함에 따라, 뷰 이미지에 포함되는 적어도 어느 하나의 관심 객체 상에 적어도 어느 하나의 관심 객체의 정보를 이미지의 형태로 오버랩하여 디스플레이할 수 있다.Further, as the acquiring unit 910 analyzes the view image displayed on the screen of the user terminal, the information providing unit 940 determines whether or not at least any one of the interested objects Information can be displayed in an overlapping manner in the form of an image.

또한, 도면에는 도시되지 않았지만, 정보 제공부(940)는 획득부(910)가 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석함에 따라, 뷰 이미지를 분석한 결과를 기반으로 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성할 수 있고, 이에 따라, 뷰 이미지 상에 가상 객체를 디스플레이할 수 있다.Although the information providing unit 940 analyzes the view image displayed on the screen of the user terminal, the information providing unit 940 may analyze the view image based on the analysis result of the view image, And thus display the virtual object on the view image.

또한, 정보 제공부(940)는 사용자 단말의 화면에 디스플레이되는 맵 상에 사용자 단말의 위치 정보를 표시할 수도 있다.In addition, the information providing unit 940 may display the location information of the user terminal on the map displayed on the screen of the user terminal.

또한, 정보 제공부(940)는 사용자 단말의 화면에서, 적어도 어느 하나의 관심 객체의 정보를 포함하는 뷰 이미지와 사용자 단말의 위치 정보가 표시되는 맵을 자동으로 전환하며 디스플레이할 수 있다.In addition, the information providing unit 940 can automatically display and switch a view image including at least one information of the interested object and a map in which the location information of the user terminal is displayed, on the screen of the user terminal.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (15)

사용자 단말의 위치 정보를 획득하는 단계;
상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 단계-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-;
상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 단계; 및
상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계
를 포함하고,
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계는
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되지 않는 경우, 상기 사용자 단말의 화면에 상기 적어도 어느 하나의 관심 객체의 정보를 포함하는 상기 뷰 이미지를 디스플레이하는 단계; 또는
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되는 경우, 상기 사용자 단말의 화면에 상기 사용자 단말의 위치 정보 및 상기 적어도 어느 하나의 관심 객체의 위치 정보가 표시되는 맵을 디스플레이하는 단계
중 어느 하나의 단계를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.Acquiring location information of a user terminal;
Selecting a uniform resource identifier (URI) of at least one object of interest from a database based on location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes a location of each of the plurality of objects of interest Stored in association with information;
Invoking information of the at least one interested object based on the URI of the at least one interested object; And
Transmitting information of the at least one interested object to the user terminal and displaying information of the at least one interested object on a view image displayed on a screen of the user terminal through a camera of the user terminal Step
Lt; / RTI >
Wherein displaying the information of the at least one object of interest on the view image comprises:
Displaying the view image including information of the at least one interesting object on a screen of the user terminal when movement of the user terminal is not detected as a result of detecting movement of the user terminal; or
When a movement of the user terminal is detected as a result of detecting movement of the user terminal, a map is displayed on the screen of the user terminal, the position information of the user terminal and the position information of the at least one interested object are displayed step
Based virtual reality information processing method. 제1항에 있어서,
상기 사용자 단말의 위치 정보를 획득하는 단계는
상기 사용자 단말의 시선 정보를 획득하는 단계
를 포함하고,
상기 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계는
상기 사용자 단말의 위치 정보 및 시선 정보에 기초하여 상기 데이터베이스로부터 상기 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계
를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.The method according to claim 1,
The step of acquiring the location information of the user terminal
Acquiring gaze information of the user terminal
Lt; / RTI >
The step of selecting a URI of at least one interesting object from the database
Selecting a URI of the at least one interested object from the database based on the location information and the sight line information of the user terminal
/ RTI > and a virtual information-based dynamic information processing method. 제2항에 있어서,
상기 사용자 단말의 시선 정보를 획득하는 단계는
상기 사용자 단말의 중력 센서 또는 가속도 센서를 이용하여 상기 사용자 단말이 향하는 방향 또는 회전하는 방향을 계산하는 단계; 및
상기 사용자 단말이 향하는 방향 또는 회전하는 방향에 기초하여 상기 사용자 단말의 시선 정보를 획득하는 단계
를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.3. The method of claim 2,
The step of acquiring gaze information of the user terminal
Calculating a direction or a rotating direction of the user terminal using the gravity sensor or the acceleration sensor of the user terminal; And
Acquiring gaze information of the user terminal based on a direction of the user terminal or a direction of rotation of the user terminal
/ RTI > and a virtual information-based dynamic information processing method. 제2항에 있어서,
상기 사용자 단말의 시선 정보를 획득하는 단계는
상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계; 및
상기 뷰 이미지를 분석한 결과에 기초하여 상기 사용자 단말의 시선 정보를 획득하는 단계
를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.3. The method of claim 2,
The step of acquiring gaze information of the user terminal
Analyzing a view image displayed on a screen of the user terminal; And
Acquiring gaze information of the user terminal based on a result of analyzing the view image
/ RTI > and a virtual information-based dynamic information processing method. 제1항에 있어서,
상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계;
상기 뷰 이미지를 분석한 결과를 기반으로 상기 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성하는 단계; 및
상기 뷰 이미지 상에 상기 가상 객체를 디스플레이하는 단계
를 더 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.The method according to claim 1,
Analyzing a view image displayed on a screen of the user terminal;
Generating a virtual object related to the at least one interesting object based on a result of analyzing the view image; And
Displaying the virtual object on the view image
Based virtual reality information processing method. 제1항에 있어서,
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계는
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이하는 단계
를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.The method according to claim 1,
Wherein displaying the information of the at least one object of interest on the view image comprises:
Displaying information of the at least one object of interest on the view image in the form of text or image
/ RTI > and a virtual information-based dynamic information processing method. 제6항에 있어서,
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이하는 단계는
상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하는 단계; 및
상기 뷰 이미지에 포함되는 상기 적어도 어느 하나의 관심 객체 상에 상기 적어도 어느 하나의 관심 객체의 정보를 이미지의 형태로 오버랩하여 디스플레이하는 단계
를 더 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.The method according to claim 6,
Wherein displaying the information of the at least one object of interest in the form of text or images on the view image comprises:
Analyzing a view image displayed on a screen of the user terminal; And
Displaying overlapping information of the at least one interesting object in the form of an image on the at least one interested object included in the view image
Based virtual reality information processing method. 삭제delete 제1항에 있어서,
상기 사용자 단말의 위치 정보를 획득하는 단계는
상기 사용자 단말의 GPS 신호 또는 통신 신호를 기반으로 상기 사용자 단말의 위치 정보를 추측하는 단계
를 포함하는 증강/가상 현실 기반 동적 정보 처리 방법.The method according to claim 1,
The step of acquiring the location information of the user terminal
Estimating the location information of the user terminal based on the GPS signal or the communication signal of the user terminal
/ RTI > and a virtual information-based dynamic information processing method. 전자 기기를 구현하는 컴퓨터와 결합하여 증강/가상 현실 기반 동적 정보 처리 방법을 실행시키기 위해 저장매체에 저장된 컴퓨터 프로그램에 있어서,
상기 증강/가상 현실 기반 동적 정보 처리 방법은
사용자 단말의 위치 정보를 획득하는 단계;
상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 단계-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-;
상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 단계; 및
상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계
를 포함하고,
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 단계는
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되지 않는 경우, 상기 사용자 단말의 화면에 상기 적어도 어느 하나의 관심 객체의 정보를 포함하는 상기 뷰 이미지를 디스플레이하는 단계; 또는
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되는 경우, 상기 사용자 단말의 화면에 상기 사용자 단말의 위치 정보 및 상기 적어도 어느 하나의 관심 객체의 위치 정보가 표시되는 맵을 디스플레이하는 단계
중 어느 하나의 단계를 포함하는 저장매체에 저장된 컴퓨터 프로그램.A computer program stored in a storage medium for executing augmented / virtual reality based dynamic information processing method in combination with a computer implementing an electronic device,
The augmented / virtual reality-based dynamic information processing method
Acquiring location information of a user terminal;
Selecting a uniform resource identifier (URI) of at least one object of interest from a database based on location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes a location of each of the plurality of objects of interest Stored in association with information;
Invoking information of the at least one interested object based on the URI of the at least one interested object; And
Transmitting information of the at least one interested object to the user terminal and displaying information of the at least one interested object on a view image displayed on a screen of the user terminal through a camera of the user terminal Step
Lt; / RTI >
Wherein displaying the information of the at least one object of interest on the view image comprises:
Displaying the view image including information of the at least one interesting object on a screen of the user terminal when movement of the user terminal is not detected as a result of detecting movement of the user terminal; or
When a movement of the user terminal is detected as a result of detecting movement of the user terminal, a map is displayed on the screen of the user terminal, the position information of the user terminal and the position information of the at least one interested object are displayed step
≪ RTI ID = 0.0 > 1, < / RTI > 제10항에 있어서,
상기 사용자 단말의 위치 정보를 획득하는 단계는
상기 사용자 단말의 시선 정보를 획득하는 단계
를 포함하고,
상기 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계는
상기 사용자 단말의 위치 정보 및 시선 정보에 기초하여 상기 데이터베이스로부터 상기 적어도 어느 하나의 관심 객체의 URI를 선택하는 단계
를 포함하는 저장매체에 저장된 컴퓨터 프로그램.11. The method of claim 10,
The step of acquiring the location information of the user terminal
Acquiring gaze information of the user terminal
Lt; / RTI >
The step of selecting a URI of at least one interesting object from the database
Selecting a URI of the at least one interested object from the database based on the location information and the sight line information of the user terminal
≪ / RTI > 사용자 단말의 위치 정보를 획득하는 획득부;
상기 사용자 단말의 위치 정보에 기초하여 데이터베이스로부터 적어도 어느 하나의 관심 객체의 URI(uniform resource identifier)를 선택하는 선택부-상기 데이터베이스에는 복수의 관심 객체들 각각의 URI가 상기 복수의 관심 객체들 각각의 위치 정보와 연관되어 저장됨-;
상기 적어도 어느 하나의 관심 객체의 URI를 기반으로 상기 적어도 어느 하나의 관심 객체의 정보를 호출하는 호출부; 및
상기 적어도 어느 하나의 관심 객체의 정보를 상기 사용자 단말로 전송하여, 상기 사용자 단말의 카메라를 통하여 상기 사용자 단말의 화면에 디스플레이되는 뷰(view) 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 디스플레이하는 정보 제공부
를 포함하고,
상기 정보 제공부는
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되지 않는 경우, 상기 사용자 단말의 화면에 상기 적어도 어느 하나의 관심 객체의 정보를 포함하는 상기 뷰 이미지를 디스플레이하고,
상기 사용자 단말의 이동 여부를 감지한 결과 상기 사용자 단말의 이동이 감지되는 경우, 상기 사용자 단말의 화면에 상기 사용자 단말의 위치 정보 및 상기 적어도 어느 하나의 관심 객체의 위치 정보가 표시되는 맵을 디스플레이하는 증강/가상 현실 기반 동적 정보 처리 시스템.An acquiring unit acquiring location information of a user terminal;
A selection unit for selecting a uniform resource identifier (URI) of at least one object of interest from the database based on the location information of the user terminal, wherein the URI of each of the plurality of objects of interest includes Stored in association with location information;
A calling unit for calling information of the at least one interested object based on the URI of the at least one interested object; And
Transmitting information of the at least one interested object to the user terminal and displaying information of the at least one interested object on a view image displayed on a screen of the user terminal through a camera of the user terminal Information provider
Lt; / RTI >
The information providing unit
Displaying the view image including information of the at least one interested object on the screen of the user terminal when the movement of the user terminal is not detected as a result of detecting movement of the user terminal,
When a movement of the user terminal is detected as a result of detecting movement of the user terminal, a map is displayed on the screen of the user terminal, the position information of the user terminal and the position information of the at least one interested object are displayed Augmented / Virtual Reality Based Dynamic Information Processing System. 제12항에 있어서,
상기 획득부는
상기 사용자 단말의 시선 정보를 획득하고,
상기 선택부는
상기 사용자 단말의 위치 정보 및 시선 정보에 기초하여 상기 데이터베이스로부터 상기 적어도 어느 하나의 관심 객체의 URI를 선택하는, 증강/가상 현실 기반 동적 정보 처리 시스템.13. The method of claim 12,
The obtaining unit
Acquiring gaze information of the user terminal,
The selection unit
Wherein the URI of the at least one object of interest is selected from the database based on the location information and the sight line information of the user terminal. 제12항에 있어서,
상기 정보 제공부는
상기 뷰 이미지 상에 상기 적어도 어느 하나의 관심 객체의 정보를 텍스트 또는 이미지의 형태로 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 시스템.13. The method of claim 12,
The information providing unit
And displays information of the at least one interested object in the form of text or image on the view image. 제12항에 있어서,
상기 획득부는
상기 사용자 단말의 화면에 디스플레이되는 뷰 이미지를 분석하고,
상기 정보 제공부는
상기 뷰 이미지를 분석한 결과를 기반으로 상기 적어도 어느 하나의 관심 객체와 관련된 가상 객체를 생성하며, 상기 뷰 이미지 상에 상기 가상 객체를 디스플레이하는, 증강/가상 현실 기반 동적 정보 처리 시스템.13. The method of claim 12,
The obtaining unit
Analyzing a view image displayed on a screen of the user terminal,
The information providing unit
Generating a virtual object related to the at least one interesting object based on a result of analyzing the view image, and displaying the virtual object on the view image.
KR1020160082250A 2016-06-30 2016-06-30 Augmented/virtual reality based dynamic information processing method and system KR101925181B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160082250A KR101925181B1 (en) 2016-06-30 2016-06-30 Augmented/virtual reality based dynamic information processing method and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160082250A KR101925181B1 (en) 2016-06-30 2016-06-30 Augmented/virtual reality based dynamic information processing method and system

Publications (2)

Publication Number Publication Date
KR20180003009A KR20180003009A (en) 2018-01-09
KR101925181B1 true KR101925181B1 (en) 2018-12-04

Family

ID=61000284

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160082250A KR101925181B1 (en) 2016-06-30 2016-06-30 Augmented/virtual reality based dynamic information processing method and system

Country Status (1)

Country Link
KR (1) KR101925181B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102571981B1 (en) * 2023-05-24 2023-08-30 주식회사 엘에스엠케이 Facilities Inspection and Maintenance System based on Augmented Reality

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102482829B1 (en) * 2021-07-05 2022-12-29 주식회사 애니랙티브 Vehicle AR display device and AR service platform

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101380854B1 (en) 2013-03-21 2014-04-04 한국과학기술연구원 Apparatus and method providing augmented reality contents based on web information structure

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101380854B1 (en) 2013-03-21 2014-04-04 한국과학기술연구원 Apparatus and method providing augmented reality contents based on web information structure

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102571981B1 (en) * 2023-05-24 2023-08-30 주식회사 엘에스엠케이 Facilities Inspection and Maintenance System based on Augmented Reality

Also Published As

Publication number Publication date
KR20180003009A (en) 2018-01-09

Similar Documents

Publication Publication Date Title
AU2020202551B2 (en) Method for representing points of interest in a view of a real environment on a mobile device and mobile device therefor
US10453267B2 (en) Method for representing virtual information in a view of a real environment
US11710322B2 (en) Surveillance information generation apparatus, imaging direction estimation apparatus, surveillance information generation method, imaging direction estimation method, and program
US8121353B2 (en) Apparatus, system and method for mapping information
KR101330805B1 (en) Apparatus and Method for Providing Augmented Reality
US20110279478A1 (en) Virtual Tagging Method and System
CN112396686A (en) Three-dimensional scene engineering simulation and live-action fusion system and method
US9392248B2 (en) Dynamic POV composite 3D video system
JP2017021328A (en) Method and system of determining space characteristic of camera
US20130176337A1 (en) Device and Method For Information Processing
CN107084740B (en) Navigation method and device
CN111737603B (en) Method, device, equipment and storage medium for judging whether interest points are visible
KR101996241B1 (en) Device and method for providing 3d map representing positon of interest in real time
US10295403B2 (en) Display a virtual object within an augmented reality influenced by a real-world environmental parameter
KR101925181B1 (en) Augmented/virtual reality based dynamic information processing method and system
US11423647B2 (en) Identification system, model re-learning method and program
JP5664215B2 (en) Augmented reality display system, augmented reality display method used in the system, and augmented reality display program
CN108235764B (en) Information processing method and device, cloud processing equipment and computer program product
Möller et al. Tool support for prototyping interfaces for vision-based indoor navigation
KR101879102B1 (en) Method for implementing augmented reality system
JP2016133701A (en) Information providing system and information providing method
JP4733343B2 (en) Navigation system, navigation device, navigation method, and navigation program
KR101964227B1 (en) Apparatus and method for control military strategy
KR102443049B1 (en) Electric apparatus and operation method thereof
KR20200083747A (en) method of processing VR video

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant