KR102052836B1 - Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof - Google Patents

Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof Download PDF

Info

Publication number
KR102052836B1
KR102052836B1 KR1020180098177A KR20180098177A KR102052836B1 KR 102052836 B1 KR102052836 B1 KR 102052836B1 KR 1020180098177 A KR1020180098177 A KR 1020180098177A KR 20180098177 A KR20180098177 A KR 20180098177A KR 102052836 B1 KR102052836 B1 KR 102052836B1
Authority
KR
South Korea
Prior art keywords
user terminal
information
message
receiver
unit
Prior art date
Application number
KR1020180098177A
Other languages
Korean (ko)
Inventor
박희태
Original Assignee
동아대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동아대학교 산학협력단 filed Critical 동아대학교 산학협력단
Priority to KR1020180098177A priority Critical patent/KR102052836B1/en
Application granted granted Critical
Publication of KR102052836B1 publication Critical patent/KR102052836B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12Messaging; Mailboxes; Announcements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18Service support devices; Network management devices
    • H04W88/184Messaging devices, e.g. message centre

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

The present invention relates to a server for transceiving secret messages using augmented reality, a user terminal for the same, and a method for transceiving secret messages using the same. The server for transceiving secret messages using augmented reality comprises: a message receiving unit to receive message information including identification information including receiver information and positioning information for at least one first object among a plurality of objects arranged in a prescribed space and content data inputted by a first user terminal of a transmitter from the first user terminal; a message information management unit to enumerate the received message information by object in a list to store the message information in a prescribed database; a notification message generation unit to generate a notification message notifying generation of a prescribed message by the first user terminal in an area corresponding to the positioning information; and a communication unit to transmit the generated notification message to a user terminal corresponding to the receiver information immediately after the notification message is generated. Accordingly, if a user is to transfer information to be shared regarding an object present at a certain position to a specific receiver in secret, the user can transmit only information of the position where the object is present to the receiver to allow the receiver to check a secret message when the receiver approaches an object in which the corresponding secret message is hidden at the corresponding position to allow interactions between users by augmented reality information to share memories and knowledge for the same place between the users and obtain discovering fun by treasure hunting.

Description

증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 사용자 단말기 및 이를 이용한 비밀 메시지 송수신 방법{SERVER FOR TRANSMITTING AND RECEIVING SECRET MESSAGES USING AUGMENTED REALITY, AND USER TERMINAL FOR THE SAME, AND METHOD FOR TRANSMITTING AND RECEIVING SECRET MESSAGES USING THEREOF}SERVER FOR TRANSMITTING AND RECEIVING SECRET MESSAGES USING AUGMENTED REALITY, AND USER TERMINAL FOR THE SAME, AND METHOD FOR TRANSMITTING AND RECEIVING SECRET MESSAGES USING THEREOF}

본 발명은 증강현실을 이용하여 소정 공간 내 객체에 대한 비밀 메시지의 생성 시 이를 객체별로 저장 및 관리하는 서버와 이를 위한 사용자 단말기 및 이를 이용한 비밀 메시지 송수신 방법에 관한 것이다.The present invention relates to a server for storing and managing a secret message for an object in a predetermined space by using augmented reality, a user terminal for storing the same, and a method for transmitting and receiving a secret message using the same.

증강현실(Augmented Reality)은 현실의 배경에 3차원의 가상 이미지를 겹쳐서 보여주는 기술로서, 일반적으로 인간과 컴퓨터의 상호 작용 및 의사 전달에 이용할 수 있는 새로운 패러다임을 제공하는 기술 분야를 말한다.Augmented Reality (Augmented Reality) is a technology that displays a three-dimensional virtual image superimposed on the background of reality, and generally refers to a technology that provides a new paradigm that can be used for human-computer interaction and communication.

이러한 증강현실은 사용자가 실제 보고 느낄 수 있는 현실 공간을 배경으로 가상의 정보공간을 정합하는 고도의 기술이 요구되기 때문에, 단순히 그래픽 등을 통해 3차원의 가상공간을 마치 현실과 흡사한 형태로 생성하는 인터페이스에 관한 기술을 주로 일컫는 가상현실(Virtual Reality)과는 차이가 있다.Such augmented reality requires a high level of technology that matches virtual information spaces against the backdrop of real spaces that users can actually see and feel, so creating 3D virtual spaces in a form similar to reality through simple graphics. This is different from Virtual Reality, which is mainly referred to as a description of an interface.

특히, 증강현실 기술의 경우, 연산처리량이 많기 때문에 고성능 사양의 시스템에서 주로 이용되어 왔다. 그러나 최근 출시되는 이동통신 단말기(이하, '단말기'라 함)는 카메라를 기본 사양으로 구비하고 있으며, 계산량이 많은 연산도 처리할 수 있는 높은 사양을 구비하고 있다.In particular, augmented reality technology has been mainly used in high performance system because of the large amount of computational throughput. However, recently released mobile communication terminals (hereinafter, referred to as 'terminals') are equipped with a camera as a basic specification, and has a high specification capable of processing a large amount of computation.

따라서, 3D 렌더링, 또는 카메라 영상 처리 등 다양한 서비스를 사용자에게 제공하고 있으며, 나아가 고성능 데스크탑에서만 가능했던 가상현실 기술이나 증강현실 기술을 제공하고 있다.Therefore, various services such as 3D rendering or camera image processing are provided to the user, and furthermore, virtual reality technology and augmented reality technology that are available only on high-performance desktops are provided.

현재 증강 현실 기술이 방송, 광고, 전시, 게임, 테마파크, 군용, 교육 및 프로모션 등의 분야에 적용되는 사례들은 점차 늘어나고 있긴 하나, 실제에 유용하거나 사용자의 흥미를 끄는 콘텐츠의 부족으로 사용자로부터 많은 관심을 이끌지 못하여 아직 대중적으로 확산되진 않은 상태이다.While augmented reality is currently being applied to broadcasting, advertising, exhibitions, games, theme parks, military, education, and promotions, there are a growing number of cases, but the lack of content that is useful or appealing to users attracts much attention from users. It has not yet spread to the public because it has not led.

특히, 사용자들 사이의 증강현실 정보를 이용한 상호 작용(interaction)이 이루어지지 않으며, 상호 간에 증강현실 정보에 대한 재미나 호감이 증대되지 못하는 문제점이 있다.In particular, the interaction using augmented reality information between the user is not made, there is a problem that the fun or affinity for the augmented reality information between each other does not increase.

KRKR 10-067750210-0677502 B1B1 KRKR 10-145880510-1458805 B1B1

본 발명의 목적은 상기 문제점을 해결하기 위한 것으로서, 증강현실을 이용한 소정 공간 내 객체에 대한 비밀 메시지의 생성 시 이를 객체별로 저장 및 관리하는 서버와 이를 위한 사용자 단말기를 이용하여, 사용자들 사이의 증강현실 정보를 이용한 상호 작용이 이루어질 수 있도록 하는 비밀 메시지 송수신 방법을 제공하는 것을 목적으로 한다.An object of the present invention is to solve the above problems, using a server and a user terminal for storing and managing the secret message for the object in a predetermined space using augmented reality for each object, augmentation between users It is an object of the present invention to provide a method for transmitting and receiving a secret message to enable interaction using real information.

상기와 같은 목적을 달성하기 위한 본 발명의 일면에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버는, 송신자의 제1 사용자 단말기로부터 소정 공간 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체에 대한 측위 정보 및 수신자 정보를 포함하는 식별 코드 정보와 상기 제1 사용자 단말기에 의해 입력된 내용 데이터를 포함하는 메시지 정보를 수신하는 메시지 수신부와, 수신된 메시지 정보를 객체별로 리스트화하여 소정의 데이터베이스에 저장하는 메시지 정보 관리부와, 상기 측위 정보에 대응하는 영역 내에 상기 제1 사용자 단말기에 의한 소정의 메시지가 생성되었음을 알리는 알림 메시지를 생성하는 알림 메시지 생성부와, 상기 생성된 알림 메시지를 생성 직후 바로 상기 수신자 정보에 대응하는 사용자 단말기로 전송하는 통신부를 포함하는 것을 특징으로 한다.A server for transmitting and receiving a secret message using augmented reality according to an aspect of the present invention for achieving the above object, from the sender's first user terminal to at least one first object of the plurality of objects arranged in a predetermined space A message receiving unit for receiving identification code information including location information and recipient information for the message information and message information including content data input by the first user terminal, and receiving the received message information for each object in a predetermined database. A message information management unit for storing the message, a notification message generation unit for generating a notification message for notifying that a predetermined message is generated by the first user terminal in an area corresponding to the positioning information, and immediately after generating the generated notification message; Communication sent to the user terminal corresponding to the receiver information It is characterized by including a wealth.

또한, 본 발명의 다른 일면에 따른 증강현실을 이용한 비밀 메시지의 송신을 위한 사용자 단말기는, 소정의 인터넷망을 이용하는 서버를 경유하여 수신자에게 소정 객체에 대한 메시지 정보를 송신하기 위한 송신자의 사용자 단말기에 있어서, 상기 사용자 단말기는, 전방 또는 후방에 해당하는 소정의 공간 영역에 대한 영상을 촬영하는 카메라부와, 상기 영상을 연속적으로 입력받아 상기 공간 영역 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체를 선택 입력하는 객체 선택부와, 선택된 상기 제1 객체에 대한 소정의 내용 데이터와 수신자 정보를 입력받는 메시지 입력부와, 상기 사용자 단말기의 움직임에 따른 이동 속도 및 이동 방향에 대한 센서값을 감지하는 센서부와, 감지된 센서값에 기초하여 상기 제1 객체에 대한 측위 정보를 산출하는 측위부와, 상기 측위 정보 및 상기 수신자 정보에 기초한 상기 식별 코드 정보와 상기 내용 데이터를 포함하는 메시지 정보를 생성하는 메시지 생성부를 포함하는 것을 특징으로 한다.In addition, a user terminal for transmitting a secret message using augmented reality according to another aspect of the present invention, the sender user terminal for transmitting message information about a predetermined object to the recipient via a server using a predetermined Internet network The user terminal may include a camera unit for capturing an image of a predetermined spatial region corresponding to the front or rear side, and at least one first object among a plurality of objects arranged in the spatial region by continuously receiving the image. An object selection unit for selecting and inputting a message, a message input unit for receiving predetermined content data and receiver information on the selected first object, and a sensor for sensing a sensor value for a moving speed and a moving direction according to the movement of the user terminal And positioning information about the first object based on the detected sensor value. It characterized in that it comprises the wibu, the positioning information and the message generating unit configured to generate a message information including the identification code information and the data information based on the receiver information.

또한, 본 발명의 또 다른 일면에 따른 증강현실을 이용한 비밀 메시지의 송수신 방법은, 소정의 인터넷망을 이용하는 서버와, 상기 서버를 경유하여 데이터 송수신을 수행하는 적어도 하나의 사용자 단말기를 이용한 비밀 메시지의 송수신 방법에 있어서, 송신자의 제1 사용자 단말기에 의해 촬영된 소정의 공간 영역에 대한 영상에서 상기 공간 영역 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체를 선택받는 단계와, 선택된 상기 제1 객체에 대한 소정의 내용 데이터와 수신자 정보를 입력받는 단계와, 상기 제1 사용자 단말기의 움직임에 따른 이동 속도 및 이동 방향에 대한 센서값에 기초하여 상기 제1 객체에 대한 측위 정보를 산출하는 단계와, 상기 측위 정보 및 상기 수신자 정보에 기초한 식별 코드 정보와 상기 내용 데이터를 포함하는 상기 제1 객체에 대한 메시지 정보를 생성하는 단계와, 상기 메시지 정보를 객체별로 리스트화하여 소정의 데이터베이스에 저장하는 단계와, 상기 측위 정보에 대응하는 영역 내에 상기 제1 사용자 단말기에 의한 소정의 메시지가 생성되었음을 알리는 알림 메시지를 생성하는 단계와, 상기 생성된 알림 메시지를 생성 직후 바로 상기 수신자 정보에 대응하는 사용자 단말기로 전송하는 단계를 포함하는 것을 특징으로 한다.In addition, the method for transmitting and receiving a secret message using augmented reality according to another aspect of the present invention, the server using a predetermined Internet network, and the secret message using at least one user terminal for transmitting and receiving data via the server A transmitting and receiving method comprising: selecting at least one first object among a plurality of objects disposed in the space area in an image of a predetermined space area photographed by a first user terminal of a sender, and selecting the selected first object Receiving predetermined content data and receiver information on the mobile terminal, calculating positioning information on the first object based on sensor values of a moving speed and a moving direction according to the movement of the first user terminal; The identification code information and the content data based on the positioning information and the receiver information; Generating message information for an object, storing the message information for each object in a predetermined database, and generating a predetermined message by the first user terminal in an area corresponding to the location information; Generating a notification message informing that the message has been received, and transmitting the generated notification message to a user terminal corresponding to the receiver information immediately after generation.

본 발명에 따르면, 사용자가 어떤 위치에 있는 물체와 관련해 공유하고 싶은 정보를 특정 수신자에게 비밀리에 전달하고자 하는 경우, 수신자에게 상기 물체가 있는 위치 정보만을 전송하여 수신자가 해당 위치에서 비밀 메시지가 숨겨진 물체에 가깝게 근접할 때 해당 비밀 메시지를 확인할 수 있도록 함으로써, 증강 현실 정보를 통한 사용자들 사이의 상호 작용이 이루어져 상호 간에 동일한 장소에 대한 기억과 지식을 공유할 뿐 아니라 보물찾기 방식으로 발견하는 재미 또한 얻을 수 있는 효과가 있다.According to the present invention, when a user wants to secretly transmit information to a specific recipient that he / she wants to share with respect to an object at a certain location, the receiver transmits only the location information where the object is located so that the receiver can hide the secret message at that location. By allowing users to see their secret messages when they are in close proximity, they can interact with users through augmented reality information to share memories and knowledge of the same place with each other, as well as to find fun in a treasure hunt. It can be effective.

또한, 본 발명에 따르면, 송신자가 보낸 비밀 메시지에 대한 수신자의 응답 정도에 대응하는 친밀도 점수를 수치 데이터 형태로 간략하게 산출할 수 있어, 추후 송신자가 메시지를 수신할 수신자를 선택 시 메시지에 대한 응답 정도가 높은 수신자를 직관적으로 파악하여 적절한 수신자를 보다 효과적으로 선택 가능함으로써, 송신자와 수신자 간의 상호 작용의 효율을 향상시킬 수 있는 이점이 있다.In addition, according to the present invention, an intimacy score corresponding to the receiver's response to the secret message sent by the sender can be simply calculated in the form of numerical data, so that when the sender selects a receiver to receive the message later, the response to the message is By intuitively identifying high-level receivers and selecting the appropriate receiver more effectively, there is an advantage that the efficiency of interaction between the sender and the receiver can be improved.

도 1은 본 발명의 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 제1 사용자 단말기 및 제2 사용자 단말기 간에 주고받는 데이터 흐름을 개략적으로 나타낸 도면이고,
도 2는 본 발명의 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 제1 사용자 단말기 및 제2 사용자 단말기의 구성을 나타낸 도면이고,
도 3은 본 발명의 일 실시예에 따른 비밀 메시지의 송수신 방법을 나타낸 순서도이고,
도 4는 도 2의 제1 사용자 단말기에서 제1 객체에 대한 메시지를 생성하는 과정을 설명하기 위한 도면이고,
도 5는 도 2의 서버에 의해 생성된 알림 메시지의 일례를 나타낸 도면이고,
도 6은 도 2의 제2 사용자 단말기의 화면에 표시되는 입력 요청 메시지와 제1 객체에 대한 메시지 정보의 일례를 나타낸 도면이고,
도 7은 본 발명의 다른 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 제1 사용자 단말기 및 제2 사용자 단말기의 구성을 나타낸 도면이고,
도 8은 본 발명의 다른 일 실시예에 따른 비밀 메시지의 송수신 방법을 나타낸 순서도이다.
1 is a diagram schematically illustrating a data flow between a server for transmitting and receiving a secret message using augmented reality and a first user terminal and a second user terminal therefor, according to an embodiment of the present invention;
2 is a diagram illustrating a configuration of a server for transmitting and receiving a secret message using augmented reality and a first user terminal and a second user terminal therefor,
3 is a flowchart illustrating a method of transmitting and receiving a secret message according to an embodiment of the present invention.
4 is a diagram for describing a process of generating a message for a first object in a first user terminal of FIG. 2;
5 is a diagram illustrating an example of a notification message generated by the server of FIG. 2;
FIG. 6 is a diagram illustrating an example of an input request message and message information about a first object displayed on a screen of a second user terminal of FIG. 2.
7 is a diagram showing the configuration of a server for transmitting and receiving a secret message using augmented reality and a first user terminal and a second user terminal for this, according to another embodiment of the present invention,
8 is a flowchart illustrating a method of transmitting and receiving a secret message according to another embodiment of the present invention.

이상과 같은 본 발명에 대한 해결하려는 과제, 과제의 해결수단, 발명의 효과를 포함한 구체적인 사항들은 다음에 기재할 실시예 및 도면에 포함되어 있다. 본 발명의 이점 및 특징, 그리고 그것을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예를 참조하면 명확해질 것이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Specific matters including the problem to be solved, the solution to the problem, and the effects of the present invention as described above are included in the following embodiments and the drawings. Advantages and features of the present invention, and a method of achieving the same will become apparent with reference to the embodiments described below in detail with the accompanying drawings. Like reference numerals refer to like elements throughout.

도 1은 본 발명의 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 제1 사용자 단말기 및 제2 사용자 단말기 간에 주고받는 데이터 흐름을 개략적으로 나타낸 도면이고, 도 2는 본 발명의 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 제1 사용자 단말기 및 제2 사용자 단말기의 구성을 나타낸 도면이고, 도 3은 본 발명의 일 실시예에 따른 비밀 메시지의 송수신 방법을 나타낸 순서도이고, 도 4는 도 2의 제1 사용자 단말기에서 제1 객체에 대한 메시지를 생성하는 과정을 설명하기 위한 도면이고, 도 5는 도 2의 서버에 의해 생성된 알림 메시지의 일례를 나타낸 도면이고, 도 6은 도 2의 제2 사용자 단말기의 화면에 표시되는 입력 요청 메시지와 제1 객체에 대한 메시지 정보의 일례를 나타낸 도면이다.1 is a diagram schematically illustrating a data flow between a server for transmitting and receiving a secret message using augmented reality and a first user terminal and a second user terminal therefor, and FIG. 2 according to an embodiment of the present invention. 3 is a diagram illustrating a configuration of a server for transmitting and receiving a secret message using augmented reality and a first user terminal and a second user terminal therefor, and FIG. 3 is a secret message according to an embodiment of the present invention. 4 is a flowchart illustrating a method of transmitting and receiving a signal, FIG. 4 is a view for explaining a process of generating a message for a first object in a first user terminal of FIG. 2, and FIG. 6 illustrates an example of an input request message and message information about a first object displayed on a screen of the second user terminal of FIG. 2. The figure shown.

이하, 전술한 도면들을 참조하여 본 발명의 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버와 이를 위한 사용자 단말기를 포함하는 비밀 메시지 송수신 시스템에 대해 설명하도록 한다.Hereinafter, a secret message transmission / reception system including a server for transmitting and receiving a secret message using augmented reality and a user terminal therefor according to an embodiment of the present invention will be described with reference to the above-described drawings.

본 발명에 따른 사용자 단말기는 휴대폰, 스마트폰, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), 태블릿PC 등과 같이 네트워크를 통하여 소정의 애플리케이션을 관리하는 외부 서버와 연결될 수 있는 핸드헬드(handheld) 기반의 무선 통신 장치를 포함하는 것이 바람직하다.The user terminal according to the present invention is a handheld capable of being connected to an external server managing a predetermined application through a network such as a mobile phone, a smart phone, a personal digital assistant (PDA), a portable multimedia player (PMP), a tablet PC, and the like. It is desirable to include a wireless communication device based on.

도 1 및 도 2를 참조하면, 본 발명의 일 실시예에 따른 비밀 메시지 송수신 시스템은, 소정 영역 내 객체에 대한 메시지의 송신을 요청하는 송신자의 제1 사용자 단말기(100)와, 상기 영역 내에 위치하는 수신자의 제2 사용자 단말기(200)와, 상기 메시지를 관리하여 상기 제2 사용자 단말기(200)가 정당한 수신자인지에 대한 인증을 수행한 결과에 따라 상기 메시지의 전달 여부를 결정하는 서버(300)를 포함하여 구성된다.1 and 2, a secret message transmission / reception system according to an embodiment of the present invention includes a first user terminal 100 of a sender requesting transmission of a message for an object in a predetermined area, and a location within the area. The server 300 determines whether to deliver the message based on a result of the authentication of the second user terminal 200 of the receiver and the second user terminal 200 by the management of the message as a valid recipient. It is configured to include.

먼저, 제1 사용자 단말기(100)는 송신자의 사용자 단말기에 해당하는 것으로서, 서버(300)와 연결되는 소정의 애플리케이션이 기설치된 상태로, 상기 애플리케이션을 통해 소정 공간 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체에 대한 메시지를 생성하여 소정의 수신자에게 이를 송신할 것을 요청하는 역할을 한다.First, the first user terminal 100 corresponds to a sender's user terminal, and has at least one of a plurality of objects arranged in a predetermined space through the application with a predetermined application connected to the server 300 already installed. And generates a message for the first object of the request and transmits the message to a predetermined receiver.

여기서, 제1 사용자 단말기(100)는 도 2에 도시된 바와 같이, 카메라부(110), 객체 선택부(120), 메시지 입력부(130), 센서부(140), 측위부(150) 및 메시지 생성부(160)를 포함할 수 있다.Here, as shown in FIG. 2, the first user terminal 100 includes a camera unit 110, an object selecting unit 120, a message input unit 130, a sensor unit 140, a positioning unit 150, and a message. It may include a generation unit 160.

카메라부(110)는 전방 또는 후방에 해당하는 소정의 공간 영역에 대한 영상을 촬영하기 위한 것이다.The camera unit 110 is for capturing an image of a predetermined spatial area corresponding to the front or the rear.

전술한 바와 같이 본 발명에 따른 사용자 단말기가 휴대용 무선 통신 장치에 해당하는 경우, 카메라부(110)는 제조 공정 시 전면 또는 후면에 내장되는 카메라 모듈과 외부 입력 단자를 통해 연결 가능한 외부 카메라를 포함할 수 있다.As described above, when the user terminal according to the present invention corresponds to a portable wireless communication device, the camera unit 110 may include an external camera connectable through an external input terminal and a camera module embedded in the front or rear during the manufacturing process. Can be.

객체 선택부(120)는 카메라부(110)에 의해 촬영된 영상을 연속적으로 입력받아 상기 영상의 공간 영역 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체를 선택 입력받기 위한 것으로서, 화면의 소정 영역에 가해지는 터치를 감지하고 터치가 감지된 영역 상에 표시된 객체를 선택적으로 입력받는 터치 입력 수단의 일종일 수 있다.The object selector 120 continuously receives an image photographed by the camera unit 110 and selects and inputs at least one first object from among a plurality of objects arranged in a spatial area of the image. It may be a kind of touch input means for detecting a touch applied to an area and selectively receiving an object displayed on the touched area.

이때, 제1 사용자 단말기(100)의 화면에는 카메라부(110)에 의해 촬영된 영상이 실시간으로 표시되되, 도 4에 도시된 바와 같이, 각각의 객체에 대응하는 영역이 자동으로 검출되어 객체별로 선택 입력 가능한 형태로 표시되는 것이 바람직하다.In this case, an image captured by the camera unit 110 is displayed on the screen of the first user terminal 100 in real time. As shown in FIG. 4, an area corresponding to each object is automatically detected and is displayed for each object. It is preferable to be displayed in the form which can be input by selection.

이 경우, 상기 객체에 대응하는 영역은 라플라시안(Laplacian) 연산을 이용한 2차 미분과 같은 일반적인 에지 검출 알고리즘을 이용하여 윤곽선을 검출함으로써 획득될 수 있으며, 이와 같은 에지 검출 알고리즘은 당업자에게는 자명한 사항이므로 별도의 설명은 생략하기로 한다.In this case, the region corresponding to the object can be obtained by detecting the contour using a general edge detection algorithm such as second order derivative using Laplacian operation, which is obvious to those skilled in the art. A separate description will be omitted.

메시지 입력부(130)는 객체 선택부(120)에 의해 선택된 상기 제1 객체에 대한 소정의 내용 데이터와 수신자 정보를 입력받기 위한 것으로서, 이를 입력받기 위한 입력 UI가 단말기 화면에 표시될 수 있다.The message input unit 130 is for receiving input of predetermined content data and receiver information on the first object selected by the object selecting unit 120, and an input UI for receiving the input may be displayed on the terminal screen.

이때, 상기 수신자 정보는 수신자의 사용자 단말기의 전화번호 정보와 고유식별번호 중 적어도 하나를 포함할 수 있다.In this case, the receiver information may include at least one of telephone number information and a unique identification number of the user terminal of the receiver.

센서부(140)는 제1 사용자 단말기(100)의 움직임에 따른 이동 속도 및 이동 방향에 대한 센서값을 감지한다.The sensor unit 140 detects a sensor value for a moving speed and a moving direction according to the movement of the first user terminal 100.

여기서, 센서부(140)는, 제1 사용자 단말기(100)의 이동에 따른 가속도를 측정하는 3축 가속도 센서와, 제1 사용자 단말기(100)의 이동에 따른 각속도를 측정하는 3축 각속도 센서를 포함할 수 있다.Here, the sensor unit 140, the three-axis acceleration sensor for measuring the acceleration in accordance with the movement of the first user terminal 100, and the three-axis angular velocity sensor for measuring the angular velocity in accordance with the movement of the first user terminal 100 It may include.

이때, 상기 가속도 센서에 의해 측정된 '가속도'에 대한 제1 센서값은 지면을 기준으로 한 제2 사용자 단말기(200)의 높이를 추정하는 데 이용되고, 상기 각속도 센서에 의해 측정된 '각속도'에 대한 제2 센서값은 지면을 기준으로 한 제2 사용자 단말기(200)의 이동 방향을 추정하는 데 이용될 수 있다.In this case, the first sensor value for the 'acceleration' measured by the acceleration sensor is used to estimate the height of the second user terminal 200 based on the ground, and the 'angular velocity' measured by the angular velocity sensor. The second sensor value for may be used to estimate the moving direction of the second user terminal 200 with respect to the ground.

측위부(150)는 센서부(140)에 의해 감지된 센서값에 기초하여 상기 제1 객체에 대한 측위 정보를 산출한다.The positioning unit 150 calculates positioning information on the first object based on the sensor value detected by the sensor unit 140.

여기서, 측위부(150)는 수신 신호 세기(RSSI; Received Signal Strenth Indication)를 이용한 삼각 측량 기법과 센서를 이용한 PDR(Pedestrian Dead Reckoning) 기술과 혼합한 방식에 의해 상기 제1 객체에 대한 측위 정보를 산출할 수 있다. 가령, 제1 사용자 단말기(100)를 기준으로 한 적어도 3개 이상의 기지국 간의 신호 세기 차에 기초한 삼각 측량법을 이용하여 상기 제1 객체의 실외 측위 정보를 산출하고, 센서부(140)에 의해 감지된 센서값에 기초하여 상기 제1 객체에 대한 실내 측위 정보를 산출할 수 있다.Here, the positioning unit 150 combines the positioning information on the first object by a method of mixing with a triangulation technique using Received Signal Strength Indication (RSSI) and a PDR (Pedestrian Dead Reckoning) technique using a sensor. Can be calculated. For example, the outdoor location information of the first object is calculated by using a triangulation method based on a signal strength difference between at least three base stations based on the first user terminal 100, and is detected by the sensor unit 140. The indoor location information on the first object may be calculated based on the sensor value.

이와 관련하여, 전술한 삼각 측량법을 이용한 실외 측위 정보를 산출하는 방법에 대해 구체적으로 설명하면, 만약 제1 사용자 단말기(100)에 인접한 3개의 Wi-Fi 기지국(AP1,AP2,AP3)의 위도 및 경도에 대한 좌표값이 각각 (x1,y1),(x2,y2),(x3,y3)라고 할 때, 측위부(150)는 제1 사용자 단말기(100)의 현재 위치를 기준으로 한 각각의 기지국(AP1,AP2,AP3)으로부터의 수신 신호 세기(RSSI)를 측정한 후, 측정된 RSSI값을 아래의 수학식 1 내지 3에 적용하여 기지국(AP1,AP2,AP3) 각각과 제1 사용자 단말기(100)의 현재 위치의 좌표값을 산출하게 된다. 이때, 제1 사용자 단말기(100)는 제1 객체의 전방에 위치하고 있기 때문에, 제1 사용자 단말기(100)의 좌표값은 곧 상기 제1 객체의 좌표값과 상당 부분 동일한 것으로 간주할 수 있다.In this regard, a method of calculating outdoor location information using the above-described triangulation method will be described in detail. If three Wi-Fi base stations AP1, AP2, and AP3 adjacent to the first user terminal 100 are described, When the coordinate values for the longitude are (x1, y1), (x2, y2), and (x3, y3), respectively, the positioning unit 150 is based on the current position of the first user terminal 100. After measuring the received signal strength (RSSI) from the base stations (AP1, AP2, AP3), the measured RSSI values are applied to the following equations (1) to (3) below and each of the base stations (AP1, AP2, AP3) and the first user terminal The coordinate value of the current position of 100 is calculated. In this case, since the first user terminal 100 is located in front of the first object, the coordinate value of the first user terminal 100 may be regarded as substantially the same as the coordinate value of the first object.

Figure 112018083349516-pat00001
Figure 112018083349516-pat00001

여기서, d1은 제1 기지국(AP1)과 제1 사용자 단말기(100) 간의 거리를 나타내고, d2는 제2 기지국(AP2)과 제1 사용자 단말기(100) 간의 거리를 나타내고, d3은 제3 기지국(AP3)과 제1 사용자 단말기(100) 간의 거리를 나타낸다.Here, d1 represents a distance between the first base station AP1 and the first user terminal 100, d2 represents a distance between the second base station AP2 and the first user terminal 100, and d3 represents a third base station ( The distance between the AP3) and the first user terminal 100 is shown.

Figure 112018083349516-pat00002
Figure 112018083349516-pat00002

여기서, L은 제1 사용자 단말기(100)가 송신한 신호의 손실을 나타내는 것으로서, 즉, 각 기지국(AP)의 신호 전송 세기와 제1 사용자 단말기(100)에서의 수신호 세기의 차이에 대응되는 값이고, λ는 전파의 파장을 나타내고, C는 광속을 나타낸다.Here, L denotes a loss of a signal transmitted by the first user terminal 100, that is, a value corresponding to the difference between the signal transmission strength of each base station AP and the hand signal strength in the first user terminal 100. Is the wavelength of radio waves and C is the luminous flux.

최종적으로 상기 수학식 2에 의해 d1,d2,d3에 해당하는 값을 산출한 후, 상기 수학식 1에 대입함으로써, 제1 사용자 단말기(100)의 현재 위치, 즉, 상기 제1 객체의 좌표값을 구할 수 있게 된다.Finally, after calculating values corresponding to d1, d2, and d3 by Equation 2, and substituting into Equation 1, the current position of the first user terminal 100, that is, the coordinate value of the first object. Will be available.

이때, 상기 실내 측위 정보는 카메라부(110)에 의해 촬영된 영상의 공간 영역에 대응하는 임의의 좌표 영역 내에서의 상기 제1 객체의 상대 위치에 기초한 상대 좌표값에 해당하는 실내 측위 데이터를 포함할 수 있다.In this case, the indoor positioning information includes indoor positioning data corresponding to a relative coordinate value based on the relative position of the first object in an arbitrary coordinate region corresponding to the spatial region of the image photographed by the camera unit 110. can do.

이 경우, 만일 상기 좌표 영역의 X축(Y=0)이 지면을 기준으로 설정된다면, 센서부(140) 중 상기 가속도 센서에 의해 측정된 제1 센서값은 지면을 기준으로 한 상대적인 높이값에 해당하므로 상기 좌표 영역상에서의 Y좌표값에 대응될 수 있고, 센서부(140) 중 상기 각속도 센서에 의해 측정된 제2 센서값은 지면을 기준으로 한 상대적인 각도값에 해당하므로 상기 좌표 영역상의 'X축'에 대한 각도값(θ)에 대응될 수 있다.In this case, if the X-axis (Y = 0) of the coordinate area is set with reference to the ground, the first sensor value measured by the acceleration sensor among the sensor units 140 is relative to the relative height value with respect to the ground. As a result, it may correspond to a Y coordinate value on the coordinate area, and the second sensor value measured by the angular velocity sensor of the sensor unit 140 corresponds to a relative angle value with respect to the ground. It may correspond to the angle value [theta] with respect to X axis'.

메시지 생성부(160)는 측위부(150)에 의해 산출된 상기 측위 정보와 메시지 입력부(130)에 의해 입력받은 상기 수신자 정보에 기초하여 소정의 메시지 정보를 생성한다.The message generating unit 160 generates predetermined message information based on the positioning information calculated by the positioning unit 150 and the receiver information input by the message input unit 130.

이때, 상기 메시지 정보는 상기 측위 정보 및 상기 수신자 정보에 기초한 상기 식별 코드 정보와 상기 내용 데이터를 포함할 수 있으며, 상기 식별 코드 정보는 각각에 대해 유일하게 식별 가능하도록 상기 측위 정보와 상기 수신자 정보를 각각 수치화하여 고유하게 조합한 형태일 수 있다.In this case, the message information may include the identification code information and the content data based on the location information and the recipient information, and the identification code information may be used to identify the location information and the recipient information so as to be uniquely identified for each. Each may be numerically uniquely combined.

이하, 도 3 및 도 4를 참조하여 제1 사용자 단말기(100)의 전술한 구성들을 이용하여 제1 객체(A)에 대한 메시지를 생성하는 과정(S120 내지 S180)에 대해 구체적으로 설명하면 다음과 같다.Hereinafter, a process (S120 to S180) of generating a message for the first object A using the above-described configurations of the first user terminal 100 will be described in detail with reference to FIGS. 3 and 4. same.

먼저, 송신자에 의해 제1 사용자 단말기(100)에 설치된 서버(300)와 연결되는 애플리케이션이 실행되면, 제1 사용자 단말기(100)의 카메라부(110)를 이용해 전방 또는 후방 영역이 촬영되어 단말기 화면을 통해 실시간으로 표시된다. 전방에 복수 개의 객체가 존재한다면, 단말기 화면상에는 복수 개의 객체에 대응하는 영역이 에지 검출 기법에 의해 감지되어 객체별로 선택 입력 가능한 형태로 표시되게 된다.First, when an application connected to the server 300 installed in the first user terminal 100 is executed by the sender, the front or rear region is photographed by using the camera unit 110 of the first user terminal 100 to display the terminal screen. Through it is displayed in real time. If there are a plurality of objects in front of the terminal, an area corresponding to the plurality of objects is detected by the edge detection technique on the terminal screen and displayed in a form that can be selected and input for each object.

이때, 만일 송신자가 제1 사용자 단말기(100)의 화면상에서 복수 개의 객체(A,B) 중 어느 하나의 객체(A)를 객체 선택부(120)를 통해 터치 입력으로 선택하는 경우(S120), 선택된 객체(A)에 대한 메시지 내용과 메시지를 수신할 수신자 정보를 입력할 수 있는 메시지 입력부(130)에 의한 입력창(40)이 오버레이 형태로 표시되게 된다(S140).In this case, if the sender selects any one of the plurality of objects A and B on the screen of the first user terminal 100 as a touch input through the object selecting unit 120 (S120), The input window 40 by the message input unit 130 for inputting the message content and the receiver information for receiving the message on the selected object A is displayed in an overlay form (S140).

이후, 센서부(140)에 의해 송신자의 제1 사용자 단말기(100)의 이동 속도 및 방향에 대한 센서값이 감지되면, 측위부(150)에 의해 상기 센서값에 기초한 위치데이터, 즉, 객체 선택 단계(S120)에 선택된 객체(A)에 대응하는 측위 정보가 산출되게 된다(S160).Subsequently, when a sensor value for a moving speed and a direction of the sender's first user terminal 100 is detected by the sensor unit 140, the positioning unit 150 selects position data based on the sensor value, that is, an object. In step S120, location information corresponding to the selected object A is calculated (S160).

마지막으로, 전술한 S140 단계에 입력된 메시지의 내용 데이터 및 수신자 정보와 S160 단계에 산출된 측위 정보를 모두 포함한 메시지 정보가 생성되게 된다(S180).Finally, message information including both the content data and recipient information of the message input in step S140 described above and the positioning information calculated in step S160 is generated (S180).

한편, 본 발명의 다른 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송신을 위한 제1 사용자 단말기(100)는 전술한 구성들과 더불어 도 7에 도시된 바와 같이 열람부(170)를 더 포함할 수도 있다.Meanwhile, the first user terminal 100 for transmitting a secret message using augmented reality according to another embodiment of the present invention may further include a reading unit 170 as shown in FIG. It may be.

열람부(170)는 서버(300)로부터 상기 메시지 정보에 대응하는 위치로 누군가가 접근한 상태를 나타내는 제1 상태 정보와, 상기 메시지 정보에 대한 정당한 수신자의 인증이 완료된 상태를 나타내는 제2 상태 정보 중 적어도 하나를 수신하는 경우, 이에 대한 응답으로 수신 확인 신호를 생성하여 서버(300)로 전송하는 역할을 한다.The reading unit 170 may include first state information indicating a state in which someone approaches the position corresponding to the message information from the server 300, and second state information indicating a state in which authentication of a legitimate recipient of the message information is completed. When receiving at least one, it generates a reception acknowledgment signal in response to this and transmits to the server 300.

다음으로, 제2 사용자 단말기(200)는 소정 메시지가 생성된 영역 내에 위치하는 수신자의 사용자 단말기에 해당하는 것으로서, 전술한 제1 사용자 단말기(100)와 마찬가지로 서버(300)와 연결되는 소정의 애플리케이션이 기설치된 상태로, 상기 애플리케이션을 통해 실시간으로 전송한 현재 위치정보가 소정 메시지가 생성된 객체의 위치에 대응될 때 서버(300)에 의해 상기 메시지의 정당한 수신자인지에 대한 인증 절차를 수행하는 역할을 한다.Next, the second user terminal 200 corresponds to the user terminal of the receiver located in the region where the predetermined message is generated, and similar to the first user terminal 100 described above, the predetermined application connected to the server 300. In this pre-installed state, when the current location information transmitted in real time through the application corresponds to the location of the object where the predetermined message is generated, the server 300 performs an authentication procedure for whether the message is a valid recipient. Do it.

여기서, 제2 사용자 단말기(200)는 도 2에 도시된 바와 같이, 표시부(210), 사용자코드 입력부(220), 센서부(230), 측위부(240) 및 카메라부(250)를 포함할 수 있다.Here, as shown in FIG. 2, the second user terminal 200 may include a display unit 210, a user code input unit 220, a sensor unit 230, a positioning unit 240, and a camera unit 250. Can be.

이때, 제2 사용자 단말기(200)는, 도 1에 도시된 바와 같이, 서버(300)로부터 수신하는 정보의 종류 및 그 목적에 기초하여, 서버(300)로부터 알림 메시지를 수신(②)하는 수신자 단말기(202)와, 서버(300)로부터 입력 요청 메시지를 수신(③)하는 인증대상 단말기(204)로 구분될 수 있다.In this case, as shown in FIG. 1, the second user terminal 200 receives a notification message from the server 300 based on the type of information received from the server 300 and the purpose thereof (②). The terminal 202 and the authentication target terminal 204 for receiving an input request message (③) from the server 300 may be divided.

수신자 단말기(202)는 제1 사용자 단말기(100)에 의한 메시지 정보의 생성을 알리는 알림 메시지를 수신하여 이를 표시하기 위한 것으로서, 표시부(210)를 필수 구성요소로 포함한다.The receiver terminal 202 receives the notification message indicating the generation of the message information by the first user terminal 100 and displays the notification message. The receiver terminal 202 includes the display unit 210 as an essential component.

여기서, 표시부(210)는 서버(300)에서 제1 사용자 단말기(100)에 의해 생성된 소정의 메시지 정보를 수신하는 경우, 상기 메시지 정보의 생성을 알리는 알림 메시지를 서버(300)로부터 수신하여 표시한다.Here, when the display unit 210 receives the predetermined message information generated by the first user terminal 100 from the server 300, the display unit 210 receives and displays a notification message indicating the generation of the message information from the server 300. do.

이때, 상기 알림 메시지는 상기 식별 코드 정보를 포함하는 UI 형태로 마련될 수 있으며, 도 5에 도시된 바와 같이, 비밀 메시지의 생성을 알리는 문구('나에게 보내는 비밀 메시지가 생성됨')를 화면 일 영역에 표시하되, 해당 비밀 메시지를 생성한 송신자에 대한 정보(예. 휴대폰 번호)와 상기 비밀 메시지가 생성된 위치에 대한 정보(예. 도로명/번지 주소, 지도)를 화면의 다른 일 영역에 각각 표시하는 형태일 수 있다.In this case, the notification message may be provided in the form of a UI including the identification code information, as shown in Figure 5, the screen for displaying the phrase ('secret message to me is generated') to inform the creation of the secret message In the area, information about the sender who generated the secret message (e.g. mobile phone number) and information on the location where the secret message was generated (e.g. road name / address address, map) are displayed on the other area of the screen. It may be in the form of display.

인증대상 단말기(204)는 제1 사용자 단말기(100)에 의해 생성된 메시지 정보의 정당한 수신자에 해당하는지에 대한 인증을 수행하기 위한 것으로서, 표시부(210), 사용자 코드 입력부(220), 센서부(230), 측위부(240) 및 카메라부(250)를 필수 구성요소로 포함한다.The authentication target terminal 204 is for performing authentication as to whether or not it corresponds to a legitimate recipient of the message information generated by the first user terminal 100. The display unit 210, the user code input unit 220, and the sensor unit ( 230, the positioning unit 240 and the camera unit 250 are included as essential components.

여기서, 카메라부(250)는 전방 또는 후방에 해당하는 소정의 공간 영역에 대한 영상을 촬영하기 위한 것으로서, 상기 영상은 실시간으로 단말기 화면에 표시될 수 있으며, 인증대상 단말기(204)가 상기 공간 영역 내 배치된 복수의 객체 중 상기 메시지 정보에 대응하는 객체에 근접한 위치를 찾도록 유도하는 역할을 한다.Here, the camera unit 250 is for capturing an image of a predetermined spatial area corresponding to the front or the rear, and the image may be displayed on the terminal screen in real time, and the terminal to be authenticated 204 is located in the spatial area. It serves to guide the user to find a location close to the object corresponding to the message information among the plurality of objects arranged in the.

이때, 카메라부(250)는 전술한 제1 사용자 단말기(100)의 카메라부(110)의 경우와 마찬가지로, 제조 공정 시 전면 또는 후면에 내장되는 카메라 모듈과 외부 입력 단자를 통해 연결 가능한 외부 카메라를 포함할 수 있다.In this case, as in the case of the camera unit 110 of the first user terminal 100 described above, the camera unit 250 includes an external camera connectable through a camera module and an external input terminal built in the front or rear during the manufacturing process. It may include.

여기서, 표시부(210)는 제2 사용자 단말기(200)의 현재 위치 정보가 소정 객체에 대응하여 기저장된 메시지 정보의 측위 정보에 대응하는 경우, 상기 객체에 대응하는 메시지 정보가 존재함을 알리면서 해당 메시지 정보의 정당한 수신자인지에 대한 인증 여부 판단 시 필요한 소정의 사용자 코드의 입력을 요청하는 입력 요청 메시지를 서버(300)로부터 수신하여 표시한다.Here, when the current location information of the second user terminal 200 corresponds to the location information of the message information previously stored corresponding to the predetermined object, the display unit 210 informs that the message information corresponding to the object exists. Receives and displays an input request message from the server 300 requesting input of a predetermined user code necessary for determining whether to authenticate a valid recipient of message information.

여기서, 사용자 코드 입력부(220)는 제2 사용자 단말기(200)의 화면에 상기 입력 요청 메시지가 표시될 때, 메시지 정보 DB(322)에 기저장된 상기 객체에 대한 상기 식별 코드 정보의 전부 또는 일부와의 일치 여부를 비교하기 위한 소정의 사용자 코드를 제2 사용자 단말기(200)의 사용자로부터 입력받기 위한 것으로서, 단말기에 자체적으로 내장된 키패드 또는 단말기의 외부 입력 단자를 통해 연결 가능한 키 입력 방식의 입력 수단을 포함할 수 있다.Here, when the input request message is displayed on the screen of the second user terminal 200, the user code input unit 220 may include all or part of the identification code information of the object previously stored in the message information DB 322. The input means of the key input method for receiving a predetermined user code from the user of the second user terminal 200 to compare the match of the two or more, and can be connected through a keypad built in the terminal or an external input terminal of the terminal. It may include.

이때, 상기 사용자 코드는 정당한 수신자에 해당하는지를 확인하기 위한 것으로서, 소정의 메시지 정보의 생성 시 상기 메시지 정보의 수신자의 사용자 단말기(202)로 송신되는 알림 메시지에 포함된 식별 코드 정보의 전부 또는 일부에 해당하는 값을 입력하면 정당한 수신자로 인증받게 된다.In this case, the user code is for confirming whether a valid receiver corresponds to all or part of identification code information included in the notification message transmitted to the user terminal 202 of the receiver of the message information when the predetermined message information is generated. If you enter a value, you will be authenticated as a valid recipient.

여기서, 센서부(230)는 제2 사용자 단말기(200)의 움직임에 따른 이동 속도 및 이동 방향에 대한 센서값을 감지하기 위한 것으로서, 제2 사용자 단말기(200)의 이동에 따른 가속도를 측정하는 3축 가속도 센서와, 제2 사용자 단말기(200)의 이동에 따른 각속도를 측정하는 3축 각속도 센서를 포함할 수 있다.Here, the sensor unit 230 detects sensor values for a moving speed and a moving direction according to the movement of the second user terminal 200, and measures the acceleration according to the movement of the second user terminal 200. It may include an axial acceleration sensor and a three-axis angular velocity sensor for measuring the angular velocity according to the movement of the second user terminal 200.

이때, 상기 가속도 센서에 의해 측정된 '가속도'에 대한 제1 센서값은 지면을 기준으로 한 제2 사용자 단말기(200)의 높이를 추정하는 데 이용되고, 상기 각속도 센서에 의해 측정된 '각속도'에 대한 제2 센서값은 제2 사용자 단말기(200)의 이동 방향을 추정하는 데 이용되게 된다.In this case, the first sensor value for the 'acceleration' measured by the acceleration sensor is used to estimate the height of the second user terminal 200 based on the ground, and the 'angular velocity' measured by the angular velocity sensor. The second sensor value for is used to estimate the moving direction of the second user terminal 200.

여기서, 측위부(240)는 센서부(230)에 의해 감지된 센서값에 기초하여 상기 제1 객체에 대한 측위 정보를 산출한다.Here, the positioning unit 240 calculates positioning information on the first object based on the sensor value detected by the sensor unit 230.

여기서, 측위부(240)는 수신 신호 세기(RSSI; Received Signal Strenth Indication)를 이용한 삼각 측량 기법과 센서를 이용한 PDR(Pedestrian Dead Reckoning) 기술과 혼합한 방식에 의해 제2 사용자 단말기(200)에 대한 측위 정보를 산출할 수 있다. 가령, 제2 사용자 단말기(200)를 기준으로 한 적어도 3개 이상의 기지국 간의 신호 세기 차에 기초한 삼각 측량법을 이용하여 실외 측위 정보를 산출하고, 센서부(230)에 의해 감지된 센서값에 기초하여 실내 측위 정보를 산출할 수 있다.Here, the positioning unit 240 is a combination of the triangulation technique using the received signal strength (RSSI; Received Signal Strenth Indication) and the PDR (Pedestrian Dead Reckoning) technique using a sensor for the second user terminal 200 Positioning information can be calculated. For example, the outdoor location information is calculated by using triangulation based on the difference in signal strength between at least three base stations based on the second user terminal 200, and based on the sensor value detected by the sensor unit 230. Indoor positioning information can be calculated.

한편, 센서부(230) 및 측위부(240)는 전술한 제1 사용자 단말기(100)에 포함된 센서부(140) 및 측위부(150)와 동일한 것일 수 있으며, 이에 관한 구체적인 설명은 전술한 바와 동일하므로 생략하도록 한다.Meanwhile, the sensor unit 230 and the positioning unit 240 may be the same as the sensor unit 140 and the positioning unit 150 included in the first user terminal 100 described above. As it is the same as the above, it is omitted.

다음으로, 서버(300)는 소정의 인터넷망을 이용하여 제1 사용자 단말기(100) 및 제2 사용자 단말기(200)와의 데이터 통신을 수행 가능한 상태로, 제1 사용자 단말기(100)에 의해 생성된 메시지를 저장 및 관리하면서 제2 사용자 단말기(200)가 정당한 수신자인지에 대한 인증을 수행한 결과에 따라 제1 사용자 단말기(100)에 의해 생성된 메시지의 전달 여부를 결정한다.Next, the server 300 is generated by the first user terminal 100 in a state capable of performing data communication with the first user terminal 100 and the second user terminal 200 using a predetermined internet network. While storing and managing the message, it is determined whether the message generated by the first user terminal 100 is delivered according to a result of authentication of whether the second user terminal 200 is a legitimate recipient.

여기서, 서버(300)는 제1 사용자 단말기(100)에 의해 생성된 소정 영역 내 객체에 대한 메시지 정보를 저장하되(S220), 상기 영역에 대응하는 위치에 있는 제2 사용자 단말기(200)가 감지되면(S340), 제2 사용자 단말기(200)로부터 입력받은 사용자 코드와 기저장된 식별 코드 정보를 이용하여 정당한 사용자인지를 판단한 결과에 따라 상기 메시지의 전송 여부를 결정할 수 있다(S520,S540).Here, the server 300 stores the message information on the object in the predetermined area generated by the first user terminal 100 (S220), the second user terminal 200 in the position corresponding to the area is detected If it is determined in operation S340, whether the message is transmitted may be determined according to a result of determining whether the user is a legitimate user using the user code received from the second user terminal 200 and previously stored identification code information (S520 and S540).

이와 관련하여, 구체적으로, 서버(300)는 메시지 수신부(310), 메시지 정보 관리부(320), 알림 메시지 생성부(330), 입력 요청 메시지 생성부(340), 메시지 내용 추출부(350) 및 통신부(360)를 포함한다.In this regard, in detail, the server 300 may include a message receiver 310, a message information manager 320, a notification message generator 330, an input request message generator 340, a message content extractor 350, and It includes a communication unit 360.

메시지 수신부(310)는 송신자의 제1 사용자 단말기(100)로부터 소정 공간 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체에 대한 메시지 정보를 수신한다.The message receiver 310 receives message information on at least one first object of a plurality of objects arranged in a predetermined space from the sender's first user terminal 100.

여기서, 상기 메시지 정보는, 전술한 바와 같이 측위 정보 및 수신자 정보를 포함하는 식별 코드 정보와 송신자의 제1 사용자 단말기(100)에 의해 입력된 내용 데이터를 포함할 수 있으며, 상기 식별 코드 정보는 각각에 대해 유일하게 식별 가능하도록 상기 측위 정보와 상기 수신자 정보를 각각 수치화하여 고유하게 조합한 형태일 수 있다.Here, the message information may include identification code information including location information and receiver information and content data input by the sender's first user terminal 100 as described above, and the identification code information may be different. The location information and the recipient information may be digitized and uniquely combined so as to be uniquely identified with respect to.

메시지 정보 관리부(320)는 메시지 수신부(310)에 의해 수신된 메시지 정보를 메시지 정보 DB(322)에 저장 및 관리한다.The message information manager 320 stores and manages the message information received by the message receiver 310 in the message information DB 322.

이때, 메시지 정보 DB(322)는 소정의 데이터베이스 형태로 마련될 수 있으며, 객체정보, 메시지 생성 정보, 식별 코드 정보 및 내용 데이터를 포함하는 메시지 정보를 객체별로 리스트화하여 기저장된 상태일 수 있다.In this case, the message information DB 322 may be provided in a predetermined database form, and may be in a pre-stored state by listing message information including object information, message generation information, identification code information, and content data for each object.

아래의 표 1은 메시지 정보 DB(322)에 기저장된 메시지 정보 리스트의 일례를 나타낸 것이다.Table 1 below shows an example of a message information list previously stored in the message information DB 322.

여기서, '객체 정보'는 소정의 객체에 대응하는 에지 영역을 객체별로 구분할 수 있도록 각각의 에지 영역에 대응되는 고유한 값을 나타내는 것일 수 있고, '메시지 생성 정보'는 메시지의 생성 날짜 및 생성 시간에 대한 정보를 포함할 수 있고, '식별 코드 정보'는 메시지에 대응하는 객체의 측위 정보와 상기 메시지를 수신할 수신자 정보를 포함할 수 있고, '내용 데이터'는 상기 메시지에 대한 내용 데이터를 나타낼 수 있다.Here, the 'object information' may indicate a unique value corresponding to each edge area so that the edge area corresponding to a predetermined object can be distinguished for each object, and the 'message generation information' may indicate a creation date and a generation time of the message. The identification code information may include location information of an object corresponding to the message and recipient information to receive the message, and the content data may indicate content data about the message. Can be.

Figure 112018083349516-pat00003
Figure 112018083349516-pat00003

예컨대, 상기 표 1을 참조하면, 먼저, 객체정보 'A'의 경우, 측위 정보 (X1,Y1)에 대응하는 위치에 있는 '그림이 그려진 액자'에 해당하는 것으로서, 이에 대한 비밀 메시지가 "18/08/01"(날짜)의 "10:02:20"(시간)에 생성되었는데, 이에 대한 비밀 메시지를 수신할 수신자 정보(단말기 전화번호)인 "010-1122-3★★★"와 상기 비밀 메시지의 내용 데이터인 "이 그림은 내가 좋아하는 작가 <고흐>의 <해바라기>라는 작품이야"가 객체정보 'A'에 대응하여 메시지 정보 DB(322)에 저장된 상태임을 확인할 수 있다.For example, referring to Table 1, first, in the case of the object information 'A', it corresponds to the 'picture frame on which a picture is drawn' at a position corresponding to the positioning information (X 1 , Y 1 ). Created at "10:02:20" (time) of "18/08/01" (date), "010-1122-3 ★★★", the recipient information (terminal phone number) to receive a secret message about And the content data of the secret message, "This picture is the work of <Sunflower> of my favorite author <Gogh>" is stored in the message information DB (322) corresponding to the object information "A".

또한, 객체정보 'B'의 경우, 측위 정보 (X2,Y2)에 대응하는 위치에 있는 '책장'에 해당하는 것으로서, 이에 대한 비밀 메시지가 "18/07/27"(날짜)의 "16:13:08"(시간)에 생성되었는데, 이에 대한 비밀 메시지를 수신할 수신자 정보(단말기 전화번호)인 "010-4455-6▲▲▲"와 상기 비밀 메시지의 내용 데이터인 "책장 맨 아랫줄에 있는 <언어의 온도>라는 책을 추천할게. 꼭 읽어봐"가 객체정보 'B'에 대응하여 메시지 정보 DB(322)에 저장된 상태임을 확인할 수 있다.In addition, in the case of the object information 'B', it corresponds to the 'bookshelf' at the position corresponding to the positioning information (X 2 , Y 2 ), and the secret message for this is "18/07/27" (date) of " Created at 16:13:08 "(time)," 010-4455-6 ▲▲▲ "which is the recipient information (terminal's telephone number) to receive the secret message, and the contents data of the secret message" the bottom of the bookcase. " I would recommend the book <Temperature of Language> in the line. You can see that "Read Me" is stored in the message information DB 322 corresponding to the object information 'B'.

또한, 객체정보 'C'의 경우, 측위 정보 (X3,Y3)에 대응하는 위치에 있는 '화분'에 해당하는 것으로서, 이에 대한 비밀 메시지가 "18/07/30"(날짜)의 "18:30:12"(시간)에 생성되었는데, 이에 대한 비밀 메시지를 수신할 수신자 정보(단말기 전화번호)인 "010-7788-9■■■"와 상기 비밀 메시지의 내용 데이터인 "화분 밑에 열쇠를 놔뒀어."가 객체정보 'C'에 대응하여 메시지 정보 DB(322)에 저장된 상태임을 확인할 수 있다.In addition, in the case of the object information 'C', it corresponds to the 'flower pot' at the position corresponding to the positioning information (X 3 , Y 3 ), and the secret message for this is "18/07/30" (date) of " Generated at 18:30:12 "(time), the recipient information (terminal's phone number)" 010-7788-9 ■■■ "to receive the secret message and the contents data of the secret message" key under the pot " It is possible to confirm that "is stored in the message information DB 322 in response to the object information 'C'.

알림 메시지 생성부(330)는 메시지 수신부(310)에 의한 메시지 정보의 수신이 확인되면, 상기 수신된 메시지 정보에 포함되는 측위 정보에 대응하는 영역 내에 제1 사용자 단말기(100)에 의한 소정의 메시지가 생성되었음을 알리는 알림 메시지를 생성한다(S240).When the notification message generating unit 330 confirms that the message information is received by the message receiving unit 310, the predetermined message by the first user terminal 100 is located in an area corresponding to the positioning information included in the received message information. Generate a notification message indicating that the (S240).

이때, 상기 알림 메시지는 상기 식별 코드 정보를 포함할 수 있으며, 도 5에 도시된 바와 같이, 해당 비밀 메시지를 생성한 송신자에 대한 정보(예. 휴대폰 번호)와 상기 비밀 메시지가 생성된 위치에 대한 정보(예. 도로명/번지 주소, 지도)를 포함하는 UI 형태일 수 있다.In this case, the notification message may include the identification code information, as shown in Figure 5, the information on the sender for generating the secret message (eg mobile phone number) and for the location where the secret message is generated It may be in the form of a UI including information (eg road name / address, map).

이 경우, 통신부(360)는 상기 생성된 알림 메시지를 생성 직후 바로 상기 수신자 정보에 대응하는 사용자 단말기, 즉, 수신자 단말기(202)로 전송하게 된다(②).In this case, the communication unit 360 immediately transmits the generated notification message to the user terminal corresponding to the receiver information, that is, the receiver terminal 202 immediately after generation (②).

입력 요청 메시지 생성부(340)는 소정 사용자의 제2 사용자 단말기(200)의 현재 위치 정보가 소정의 제1 객체에 대한 상기 측위 정보에 대응하는 경우(S340), 제2 사용자 단말기(200)가 정당한 수신자인지에 대한 인증을 수행하기 위한 소정의 입력 요청 메시지를 생성한다.The input request message generator 340 is configured to determine whether the current location information of the second user terminal 200 of the given user corresponds to the location information on the first object (S340). Generates a predetermined input request message for performing authentication on whether or not it is a legitimate recipient.

여기서, 상기 입력 요청 메시지는, 상기 제1 객체에 대응되는 소정 메시지가 존재함을 알리면서 상기 제2 사용자 단말기가 상기 메시지의 정당한 수신자인지를 인증하기 위한 소정의 사용자 코드의 입력을 요청하는 메시지의 형태일 수 있다.Here, the input request message may be a message for requesting input of a predetermined user code for authenticating whether the second user terminal is a legitimate recipient of the message while informing that a predetermined message corresponding to the first object exists. It may be in the form.

예컨대, 도 6을 참조하면, 상기 입력 요청 메시지는, 비밀 메시지의 존재를 알리는 문구('이 곳에 누군가가 숨겨놓은 비밀 메시지가 존재합니다.')와 해당 비밀 메시지에 대한 수신자 인증을 진행할지에 대한 확인을 요청하는 문구('계속 진행하시겠습니까?')를 포함하는 첫번째 알림창(61)을 표시한 후, 제2 사용자 단말기의 사용자가 이를 동의할 경우, 수신자 인증 시 필요한 사용자 인증을 요청하는 문구('사용자 코드를 입력하세요')와 이에 대한 입력을 수행할 입력란을 포함하는 두번째 알림창(62)을 표시하는 UI 형태일 수 있다.For example, referring to FIG. 6, the input request message may include a phrase indicating the existence of a secret message ('there is a secret message hidden by someone here') and whether or not to proceed with authenticating the recipient for the secret message. After displaying the first notification window 61 including the phrase requesting confirmation ('Do you want to proceed?'), And if the user of the second user terminal agrees, the phrase requesting user authentication required for authenticating the receiver (' Enter a user code ') and a second notification window 62 including an input field for inputting the same.

이 경우, 통신부(360)에서는 상기 생성된 입력 요청 메시지를 생성 직후 바로 상기 제2 사용자 단말기로 전송하게 된다(③).In this case, the communication unit 360 transmits the generated input request message to the second user terminal immediately after generation (③).

메시지 내용 추출부(350)는 제2 사용자 단말기(200)에 의해 입력된 사용자 코드가 메시지 정보 DB(322)에 기저장된 상기 식별 코드 정보의 전부 또는 일부와 일치하는 경우(S520), 상기 제1 객체에 대응되는 내용 데이터를 추출한다(S540).When the user code input by the second user terminal 200 coincides with all or a part of the identification code information previously stored in the message information DB 322 (S520), the message content extractor 350 matches the first code. The content data corresponding to the object is extracted (S540).

이 경우, 통신부(360)에서는 상기 추출된 내용 데이터를 추출 직후 바로 상기 제2 사용자 단말기(200)로 전송하게 된다(⑤).In this case, the communication unit 360 transmits the extracted content data to the second user terminal 200 immediately after extraction (⑤).

예컨대, 상기 표 1을 참조하면, 인증대상 단말기(204)의 현재 위치정보가 객체정보 'C'의 측위 정보인 (X3,Y3)에 대응된다고 할 때, 만약 인증대상 단말기(204)에 의해 입력된 사용자 코드가 '010-7788-9■■■'이라면, 인증대상 단말기(204)가 정당한 수신자인지에 대한 인증이 완료됨에 따라, 메시지 내용 추출부(350)에 의해 메시지 정보 DB(322)로부터 객체정보 'C'에 대한 메시지 정보의 내용 데이터인 "화분 밑에 열쇠를 놔뒀어."를 추출하게 된다.For example, referring to Table 1 above, when the current position information of the authentication target terminal 204 corresponds to (X 3 , Y 3 ), which is the positioning information of the object information 'C', the authentication target terminal 204 If the user code input by the user is '010-7788-9 ■■■', as the authentication for the authentication target terminal 204 is a valid recipient is completed, the message information DB 322 by the message content extraction unit 350 is completed. ), The content data of the message information on the object information 'C' is extracted.

통신부(360)는 전술한 바와 같이 제2 사용자 단말기(200)와의 데이터 송수신을 수행하기 위한 것으로서, 제1 사용자 단말기(100)에 의해 생성된 메시지 정보의 수신자에 해당하는 수신자 단말기(202)에는 상기 메시지 정보의 생성 사실을 알리는 알림 메시지를 전송(②)하고, 상기 메시지 정보에 포함된 측위 정보에 대응하는 위치에 있는 인증대상 단말기(204)에는 정당한 수신자에 해당하는지에 대한 인증을 수행하기 위한 입력 요청 메시지를 전송(③)한 후 이에 대한 답변에 해당하는 사용자 코드를 수신(④)하여 정당한 수신자에 해당할 경우에 상기 메시지 정보에 대응하는 내용 데이터를 전송(⑤)하는 역할을 한다.As described above, the communication unit 360 performs data transmission and reception with the second user terminal 200. The communication unit 360 corresponds to the receiver terminal 202 corresponding to the receiver of the message information generated by the first user terminal 100. An input for transmitting a notification message (②) informing the fact that the message information has been generated (2) and performing authentication as to whether or not a valid recipient corresponds to the authentication target terminal 204 located at a position corresponding to the positioning information included in the message information. After transmitting the request message (③), the user code corresponding to the response is received (④), and when it corresponds to a legitimate receiver, the content data corresponding to the message information is transmitted (⑤).

비록, 전술한 본 발명에 대한 도면 및 설명에서는 서버(300)에 포함되는 메시지 수신부(310)와 통신부(360)를 데이터 송수신을 수행하는 사용자 단말기의 종류 및 역할에 따라 구분하여 각기 다른 구성으로 표시하였으나, 본 발명은 이에 한정되는 것은 아니며, 사용자 단말기와의 통신으로 데이터 송수신을 수행할 수 있는 적어도 하나의 통신 모듈에 의해 통신부(360) 및 메시지 수신부(310)에 의한 특징이 각각 또는 함께 수행되는 방식일 수도 있다.In the drawings and description of the present invention described above, the message receiving unit 310 and the communication unit 360 included in the server 300 are divided according to the type and role of the user terminal performing data transmission and reception and displayed in different configurations. However, the present invention is not limited thereto, and the features of the communication unit 360 and the message receiving unit 310 may be performed separately or together by at least one communication module capable of transmitting and receiving data through communication with a user terminal. It may be the way.

한편, 본 발명의 다른 일 실시예에 따른 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버(300)는 전술한 구성들과 더불어 도 7에 도시된 바와 같이 상태 정보 생성부(370) 및 친밀도 관리부(380)를 더 포함할 수도 있다.On the other hand, the server 300 for the transmission and reception of secret messages using augmented reality according to another embodiment of the present invention, as shown in Figure 7 with the above-described configuration as shown in FIG. 380 may be further included.

상태 정보 생성부(370)는, 제2 사용자 단말기(200)의 현재 위치 정보와 상기 제1 객체에 대한 상기 측위 정보와의 대응 여부에 기초하여 제1 상태 정보를 생성하고, 제2 사용자 단말기(200)에 의해 입력된 사용자 코드와 메시지 정보 DB(322)에 기저장된 상기 식별 코드 정보의 전부 또는 일부와의 일치 여부에 기초하여 제2 상태 정보를 생성한다.The state information generation unit 370 generates first state information based on whether the current location information of the second user terminal 200 corresponds to the location information on the first object, and generates a second user terminal ( The second state information is generated based on whether or not the user code input by the user 200 and all or part of the identification code information previously stored in the message information DB 322 match.

여기서, 상태 정보 생성부(370)는 도 8에 도시된 바와 같이 제2 사용자 단말기(200)의 현재 위치 정보가 상기 제1 객체에 대한 상기 측위 정보와 대응하는 경우에 제1 상태 정보를 생성하고, 제2 사용자 단말기(200)에 의해 입력된 사용자 코드가 메시지 정보 DB(322)에 기저장된 상기 식별 코드 정보의 전부 또는 일부와 일치하는 경우에 제2 상태 정보를 생성할 수 있다.Here, as shown in FIG. 8, the state information generation unit 370 generates first state information when the current location information of the second user terminal 200 corresponds to the positioning information on the first object. The second state information may be generated when the user code input by the second user terminal 200 matches all or part of the identification code information previously stored in the message information DB 322.

이 경우, 통신부(360)에서는, 상기 제1 상태 정보 및 상기 제2 상태 정보를 생성 직후 바로 제1 사용자 단말기(100)로 전송하게 된다(②-2,④-1).In this case, the communication unit 360 transmits the first state information and the second state information to the first user terminal 100 immediately after generation (②-2, ④-1).

이에 따라, 비밀 메시지를 생성한 송신자에게 해당 비밀 메시지에 접근한 사람이 있는지, 혹은 상기 비밀 메시지를 정당한 수신자가 전달받았는지를 실시간으로 알려주므로, 송신자와 수신자 간에 더욱 효과적인 상호 작용이 가능해지게 된다.Accordingly, the sender who generates the secret message is notified in real time whether there is a person accessing the secret message or whether the legitimate recipient has received the secret message, thereby enabling more effective interaction between the sender and the receiver.

친밀도 관리부(380)는 소정의 제1 사용자 단말기(100)에서 생성한 메시지 정보 각각에 대한 상태 정보에 기초한 소정의 친밀도 점수를 제2 사용자 단말기(200)별로 산출하여 관리하는 역할을 한다.The intimacy management unit 380 calculates and manages a predetermined intimacy score for each of the second user terminals 200 based on state information on each message information generated by the first user terminal 100.

구체적으로, 친밀도 관리부(380)는, 제1 사용자 단말기(100)로부터 제2 사용자 단말기(200)에 기초한 상기 제1 상태 정보 또는 상기 제2 상태 정보에 대한 수신이 확인되는 경우, 상기 제1 상태 정보 또는 상기 제2 상태 정보에 대한 수신 확인 시마다 기설정된 배점을 적용하여 제2 사용자 단말기(200)별로 누적 합산한 친밀도 점수를 산출 및 저장하게 된다.In detail, when the reception of the first state information or the second state information based on the second user terminal 200 is confirmed from the first user terminal 100, the intimacy management unit 380 receives the first state. Each time the acknowledgment of the information or the second state information is applied, a predetermined point is applied to calculate and store an intimacy score accumulated and accumulated for each of the second user terminals 200.

예컨대, 도 8을 참조하면, 만약 제1 상태 정보의 수신 확인에 대한 배점이 "1점"이고, 제2 상태 정보의 수신 확인에 대한 배점이 "3점"으로 기설정되어 있을 때, 제2 사용자 단말기(200)의 현재 위치 정보가 소정의 메시지 정보에 대응되는 제1 객체의 측위 정보에 대응되면(S340), 서버(300)에서 생성된 제1 상태 정보가 제1 사용자 단말기(100)로 전송되고(②-2), 제1 사용자 단말기(100)로부터 상기 제1 상태 정보의 수신에 응답하는 수신 확인 신호가 수신되면, 친밀도 관리부(380)에서 상기 제1 상태 정보의 수신 확인에 대응하는 배점 "1점"을 제2 사용자 단말기(200)에 매칭하여 저장하게 된다.For example, referring to FIG. 8, when the distribution point for acknowledgment of the first state information is "one point" and the distribution point for acknowledgment of the second state information is set to "three points", the second point is determined. When the current location information of the user terminal 200 corresponds to the location information of the first object corresponding to the predetermined message information (S340), the first state information generated by the server 300 is transferred to the first user terminal 100. (2) -2, and when an acknowledgment signal is received from the first user terminal 100 in response to the reception of the first state information, the intimacy manager 380 corresponds to acknowledgment of the first state information. The distribution point "one point" is stored in the second user terminal 200 to match.

이후, 제2 사용자 단말기(200)에 의해 입력된 사용자 코드가 메시지 정보 DB(322)에 기저장된 상기 식별 코드 정보의 전부 또는 일부와 일치하는 경우(S520), 즉, 제2 사용자 단말기(200)가 정당한 수신자인지에 대한 인증이 완료되는 경우에 서버(300)에서 생성된 제2 상태 정보가 제1 사용자 단말기(100)로 전송되고(④-1), 제1 사용자 단말기(100)로부터 상기 제2 상태 정보의 수신에 응답하는 수신 확인 신호가 수신되면, 친밀도 관리부(380)에서 상기 제2 상태 정보의 수신 확인에 대응하는 배점 "3점"과 기저장된 "1점"을 누적 합산한 결과 도출되는 "4점"을 제2 사용자 단말기(200)에 매칭하여 저장하게 된다.Then, when the user code input by the second user terminal 200 matches all or part of the identification code information previously stored in the message information DB (322), that is, the second user terminal 200 When the authentication is completed as to whether the recipient is a legitimate recipient, the second state information generated by the server 300 is transmitted to the first user terminal 100 (④-1), and the first user terminal 100 receives the first state information. 2, when the acknowledgment signal is received in response to the reception of the status information, the intimacy management unit 380 derives the result of accumulating and summing points "three points" and prestored "one point" corresponding to the acknowledgment of the second status information. "4 points" to be matched with the second user terminal 200 and stored.

이 경우, 송신자가 보낸 비밀 메시지에 대한 수신자의 응답 정도에 대응하는 친밀도 점수를 수치 데이터 형태로 간략하게 산출할 수 있어, 추후 송신자가 메시지를 수신할 수신자를 선택 시 메시지에 대한 응답 정도가 높은 수신자를 직관적으로 파악하여 적절한 수신자를 보다 효과적으로 선택 가능함으로써, 송신자와 수신자 간의 상호 작용의 효율을 향상시킬 수 있는 이점이 있다.In this case, the intimacy score corresponding to the receiver's response to the secret message sent by the sender can be simply calculated in the form of numerical data, so that the receiver having a high response to the message when the sender selects a receiver to receive the message later. By intuitively grasping and selecting the appropriate receiver more effectively, there is an advantage to improve the efficiency of the interaction between the sender and the receiver.

이에 따라, 전술한 본 발명에 의하면, 사용자가 어떤 위치에 있는 물체와 관련해 공유하고 싶은 정보를 특정 수신자에게 비밀리에 전달하고자 하는 경우, 수신자에게 상기 물체가 있는 위치 정보만을 전송하여 수신자가 해당 위치에서 비밀 메시지가 숨겨진 물체에 가깝게 근접할 때 해당 비밀 메시지를 확인할 수 있도록 함으로써, 증강 현실 정보를 통한 사용자들 사이의 상호 작용이 이루어져 상호 간에 동일한 장소에 대한 기억과 지식을 공유할 뿐 아니라 보물찾기 방식으로 발견하는 재미 또한 얻을 수 있는 효과가 있다.Accordingly, according to the present invention described above, when a user wants to secretly transmit information to a specific receiver that he / she wants to share with respect to an object at a certain location, the receiver transmits only the location information with the object to the receiver. By allowing secret messages to be identified when they are in close proximity to hidden objects, augmented reality information allows users to interact with each other to share memories and knowledge of the same place, as well as to find treasures. The fun of discovering also has the effect.

이상, 바람직한 실시예를 통하여 본 발명에 관하여 상세히 설명하였으나, 본 발명은 이에 한정되는 것은 아니며 특허청구범위 내에서 다양하게 실시될 수 있다.As mentioned above, the present invention has been described in detail through preferred embodiments, but the present invention is not limited thereto and may be variously implemented within the scope of the claims.

특히, 전술한 내용은 후술할 발명의 청구범위를 더욱 잘 이해할 수 있도록 본 발명의 특징과 기술적 강점을 다소 폭넓게 상술하였으므로, 상술한 본 발명의 개념과 특정 실시예는 본 발명과 유사 목적을 수행하기 위한 다른 형상의 설계나 수정의 기본으로써 즉시 사용될 수 있음이 해당 기술 분야의 숙련된 사람들에 의해 인식되어야 한다.In particular, the foregoing has outlined rather broadly the features and technical advantages of the present invention in order that the claims of the invention that follow may be better understood, and thus, the concept and specific embodiments of the present invention described above serve to accomplish the same purpose as the present invention. It should be recognized by those skilled in the art that it can be used immediately as a basis for designing or modifying other shapes.

또한, 상기에서 기술된 실시예는 본 발명에 따른 하나의 실시예일 뿐이며, 해당 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술적 사상의 범위에서 다양한 수정 및 변경된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 따라서, 개시된 실시예는 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 하고, 이러한 다양한 수정 및 변경 또한 본 발명의 기술적 사상의 범위에 속하는 것으로 전술한 본 발명의 청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.In addition, the embodiment described above is just one embodiment according to the present invention, it can be implemented in various modifications and changes in the scope of the technical idea of the present invention by those skilled in the art. I can understand. Accordingly, the disclosed embodiments should be considered in descriptive sense only and not for purposes of limitation, and such various modifications and changes are also within the scope of the spirit of the present invention as set forth in the claims above and their equivalents All differences within will be construed as being included in the present invention.

100: 제1 사용자 단말기(송신자 단말기)
110: 카메라부
120: 객체 선택부
130: 메시지 입력부
140: 센서부
150: 측위부
160: 메시지 생성부
170: 열람부
200: 제2 사용자 단말기
202: 수신자 단말기
204: 인증대상 단말기
210: 표시부
220: 사용자코드 입력부
230: 센서부
240: 측위부
250: 카메라부
300: 서버
310: 메시지 수신부
320: 메시지 정보 관리부
322: 메시지 정보 DB
330: 알림 메시지 생성부
340: 입력 요청 메시지 생성부
350: 메시지 내용 추출부
360: 통신부
370: 상태 정보 생성부
380: 친밀도 관리부
100: first user terminal (sender terminal)
110: camera unit
120: object selection
130: message input unit
140: sensor unit
150: positioning part
160: message generating unit
170: reading section
200: second user terminal
202: receiver terminal
204: terminal to be authenticated
210: display unit
220: user code input unit
230: sensor unit
240: positioning part
250: camera unit
300: server
310: message receiving unit
320: message information management unit
322: message information DB
330: notification message generator
340: input request message generating unit
350: message content extraction unit
360: communication unit
370: status information generation unit
380: Intimacy Management Department

Claims (10)

송신자의 제1 사용자 단말기로부터 소정 공간 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체에 대한 측위 정보 및 수신자 정보를 포함하는 식별 코드 정보와 상기 제1 사용자 단말기에 의해 입력된 내용 데이터를 포함하는 메시지 정보를 수신하는 메시지 수신부;
상기 측위 정보는 상기 제1 사용자 단말기의 수신 신호 세기(RSSI)를 이용한 삼각 측량 기법을 이용해 산출한 상기 제1 사용자 단말기의 현재 위치, 상기 제1 사용자 단말기의 센서값을 이용해 산출한 지면 기준 상기 제1 사용자 단말기의 높이, 각도를 이용하여 산출한 임의의 좌표 영역 내에서의 상기 제1 객체의 상대 좌표값을 포함하며,
수신된 상기 메시지 정보를 객체별로 리스트화하여 소정의 데이터베이스에 저장하는 메시지 정보 관리부;
상기 측위 정보에 대응하는 영역 내에 상기 제1 사용자 단말기에 의한 소정의 메시지가 생성되었음을 알리는 알림 메시지를 생성하는 알림 메시지 생성부; 및
상기 알림 메시지를 생성 직후 바로 상기 수신자 정보에 대응하는 제2 사용자 단말기로 전송하는 통신부;
상기 제2 사용자 단말기의 현재 위치 정보가 상기 제1 객체에 대한 상기 측위 정보에 대응하는 경우, 상기 제1 객체에 대응되는 소정 메시지가 존재함을 알리면서 상기 제2 사용자 단말기가 상기 메시지의 정당한 수신자인지를 인증하기 위한 소정의 사용자 코드의 입력을 요청하는 입력 요청 메시지를 생성하는 입력 요청 메시지 생성부;
상기 제2 사용자 단말기에 의해 입력된 사용자 코드가 상기 데이터베이스에 기저장된 상기 식별 코드 정보의 전부 또는 일부와 일치하는 경우 상기 제1 객체에 대응되는 내용 데이터를 추출하는 메시지 내용 추출부;
상기 제2 사용자 단말기의 현재 위치 정보와 상기 제1 객체에 대한 상기 측위 정보와의 대응 여부에 기초하여 제1 상태 정보를 생성하고, 상기 제2 사용자 단말기에 의해 입력된 사용자 코드와 상기 데이터베이스에 기저장된 상기 식별 코드 정보의 전부 또는 일부와의 일치 여부에 기초하여 제2 상태 정보를 생성하는 상태 정보 생성부; 및
상기 제1 사용자 단말기로부터 상기 제2 사용자 단말기에 기초한 상기 제1 상태 정보 또는 상기 제2 상태 정보에 대한 수신이 확인되는 경우, 상기 제1 상태 정보 또는 상기 제2 상태 정보에 대한 수신 확인 시마다 기설정된 배점을 적용하여 상기 제2 사용자 단말기별로 누적 합산한 친밀도 점수를 산출 및 저장하는 친밀도 관리부;를 포함하고,
상기 통신부는 상기 입력 요청 메시지 생성부에서 생성된 상기 입력 요청 메시지를 생성 직후 바로 상기 제2 사용자 단말기로 전송하고, 상기 메시지 내용 추출부에서 추출한 상기 내용 데이터를 추출 직후 바로 상기 제2 사용자 단말기로 전송하고, 상기 상태 정보 생성부에서 생성한 상기 제1 상태 정보 및 상기 제2 상태 정보를 생성 직후 바로 상기 제1 사용자 단말기로 전송하는 것을 특징으로 하는 증강현실을 이용한 비밀 메시지의 송수신을 위한 서버.
And identification code information including location information and receiver information of at least one first object of a plurality of objects arranged in a predetermined space from the sender's first user terminal and content data input by the first user terminal. Message receiving unit for receiving the message information;
The positioning information includes a current position of the first user terminal calculated using a triangulation technique using received signal strength (RSSI) of the first user terminal, and a ground reference calculated using sensor values of the first user terminal. 1 includes a relative coordinate value of the first object in an arbitrary coordinate area calculated by using a height and an angle of a user terminal,
A message information manager which lists the received message information for each object and stores the received message information in a predetermined database;
A notification message generating unit generating a notification message informing that a predetermined message by the first user terminal is generated in an area corresponding to the positioning information; And
A communication unit configured to immediately transmit the notification message to a second user terminal corresponding to the receiver information;
If the current location information of the second user terminal corresponds to the positioning information on the first object, the second user terminal is a legitimate recipient of the message while notifying that a predetermined message corresponding to the first object exists. An input request message generator for generating an input request message for requesting input of a predetermined user code for authenticating the recognition;
A message content extracting unit for extracting content data corresponding to the first object when a user code input by the second user terminal matches all or part of the identification code information previously stored in the database;
The first state information is generated based on whether the current location information of the second user terminal corresponds to the location information of the first object, and the first state information is generated. A state information generation unit generating second state information based on whether or not the stored identification code information matches all or part of the stored identification code information; And
When reception of the first state information or the second state information based on the second user terminal is confirmed from the first user terminal, the preset state is set every time acknowledgment of the first state information or the second state information. And an intimacy manager configured to calculate and store an intimacy score accumulated and accumulated for each second user terminal by applying a score.
The communication unit transmits the input request message generated by the input request message generator to the second user terminal immediately after generation, and transmits the content data extracted by the message content extraction unit to the second user terminal immediately after extraction. And transmitting the first state information and the second state information generated by the state information generating unit to the first user terminal immediately after generation of the first state information and the second state information.
삭제delete 삭제delete 소정의 인터넷망을 이용하는 서버를 경유하여 수신자에게 소정 객체에 대한 비밀 메시지 정보를 송신하기 위한 송신자의 사용자 단말기에 있어서,
상기 사용자 단말기는,
전방 또는 후방에 해당하는 소정의 공간 영역에 대한 영상을 촬영하는 카메라부;
상기 영상을 연속적으로 입력받아 상기 공간 영역 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체를 선택 입력하는 객체 선택부;
선택된 상기 제1 객체에 대한 소정의 내용 데이터와 수신자 정보를 입력받는 메시지 입력부;
3축 가속도 센서, 3축 각속도 센서를 포함하여 상기 사용자 단말기의 움직임에 따른 가속도인 제1 센서값, 상기 사용자 단말기의 움직임에 따른 각속도인 제2 센서값을 감지하는 센서부;
상기 사용자 단말기의 수신 신호 세기(RSSI)를 이용한 삼각 측량 기법을 이용하여 상기 사용자 단말기의 현재 위치를 산출하며, 상기 제1 센서값을 이용해 지면을 기준으로 한 상기 사용자 단말기의 높이를 산출하고, 상기 제2 센서값을 이용해 지면을 기준으로 한 상기 사용자 단말기의 각도를 산출하여, 상기 공간 영역에 대응하는 임의의 좌표 영역 내에서의 상기 제1 객체의 상대 위치에 기초한 상대 좌표값을 포함하는 측위 정보를 산출하는 측위부; 및
상기 측위 정보 및 상기 수신자 정보를 포함하는 식별 코드 정보와 상기 내용 데이터를 포함하는 메시지 정보를 생성하는 메시지 생성부;를 포함하고,
상기 수신자 정보는 수신자의 사용자 단말기의 전화번호 정보와 고유식별번호 중 적어도 하나를 포함하는 것을 특징으로 하는 증강현실을 이용한 비밀 메시지의 송신을 위한 사용자 단말기.
A sender's user terminal for sending secret message information for a given object to a recipient via a server using a predetermined internet network,
The user terminal,
A camera unit for capturing an image of a predetermined spatial region corresponding to the front or the rear;
An object selecting unit which receives the image continuously and selectively inputs at least one first object among a plurality of objects arranged in the spatial area;
A message input unit configured to receive predetermined content data and recipient information on the selected first object;
A sensor unit including a three-axis acceleration sensor and a three-axis angular velocity sensor to detect a first sensor value of acceleration according to the movement of the user terminal and a second sensor value of angular velocity according to the movement of the user terminal;
Calculating a current position of the user terminal by using a triangulation technique using the received signal strength (RSSI) of the user terminal; The height of the user terminal based on the ground is calculated using a sensor value, and the angle of the user terminal based on the ground is calculated using the second sensor value, so as to be within an arbitrary coordinate region corresponding to the spatial area. A positioning unit for calculating positioning information including a relative coordinate value based on the relative position of the first object in; And
And a message generator for generating identification code information including the location information and the receiver information and message information including the content data.
And the receiver information comprises at least one of telephone number information and a unique identification number of the receiver's user terminal.
삭제delete 소정의 인터넷망을 이용하는 서버와, 상기 서버를 경유하여 데이터 송수신을 수행하는 적어도 하나의 사용자 단말기를 이용한 비밀 메시지의 송수신 방법에 있어서,
송신자의 제1 사용자 단말기에 의해 촬영된 소정의 공간 영역에 대한 영상에서 상기 공간 영역 내에 배치된 복수의 객체 중 적어도 하나의 제1 객체를 선택받는 단계;
선택된 상기 제1 객체에 대한 소정의 내용 데이터와와 수신자 정보를 입력받는 단계;
상기 제1 사용자 단말기의 수신 신호 세기를 이용한 삼각 측량 기법을 이용하여 상기 제1 사용자 단말기의 현재 위치를 산출하고, 상기 제1 사용자 단말기의 움직임에 따른 가속도 및 각속도에 대한 센서값을 이용해 지면을 기준으로 한 상기 제1 사용자 단말기의 높이 및 각도를 산출하여, 상기 공간 영역에 대응하는 임의의 좌표 영역 내에서 상기 제1 객체의 상대 위치게 기초한 상대 좌표값을 포함하는 측위 정보를 산출하는 단계;
상기 측위 정보 및 상기 수신자 정보에 기초한 식별 코드 정보와 상기 내용 데이터를 포함하는 메시지 정보를 객체별로 리스트화하여 소정의 데이터베이스에 저장하는 단계;
상기 측위 정보에 대응하는 영역 내에 상기 제1 사용자 단말기에 의한 소정의 메시지가 생성되었음을 알리는 알림 메시지를 생성하는 단계;
상기 생성된 알림 메시지를 생성 직후 바로 상기 수신자 정보에 대응하는 제2 사용자 단말기로 전송하는 단계;
상기 제2 사용자 단말기의 현재 위치 정보가 상기 제1 객체에 대한 상기 측위 정보에 대응하는 경우, 상기 제1 객체에 대응되는 소정의 메시지가 존재함을 알리면서 상기 제2 사용자 단말기가 상기 메시지의 정당한 수신자인지를 인증하기 위한 소정의 사용자 코드의 입력을 요청하는 입력 요청 메시지를 생성하는 단계;
상기 생성된 입력 요청 메시지를 생성 직후 바로 상기 제2 사용자 단말기로 전송하는 단계;
상기 제2 사용자 단말기에 의해 입력된 사용자 코드가 상기 데이터베이스에 기저장된 상기 식별 코드 정보의 전부 또는 일부와 일치하는 경우 상기 제1 객체에 대응되는 내용 데이터를 추출하는 단계; 및
상기 제1 객체에 대응되는 내용 데이터를 추출 직후 바로 상기 제2 사용자 단말기로 전송하는 단계;를 포함하는 것을 특징으로 하는 증강현실을 이용한 비밀 메시지의 송수신 방법.

In the method of transmitting and receiving a secret message using a server using a predetermined internet network and at least one user terminal for performing data transmission and reception via the server,
Receiving at least one first object selected from among a plurality of objects disposed in the spatial area in an image of the predetermined spatial area captured by the first user terminal of the sender;
Receiving predetermined content data and recipient information on the selected first object;
Computing the current position of the first user terminal by using a triangulation technique using the received signal strength of the first user terminal, and reference the ground using the sensor values for the acceleration and the angular velocity according to the movement of the first user terminal Calculating height and angle of the first user terminal, and calculating positioning information including relative coordinate values based on relative positions of the first object in an arbitrary coordinate region corresponding to the spatial region;
Storing identification code information based on the positioning information and the receiver information and message information including the content data for each object in a predetermined database;
Generating a notification message indicating that a predetermined message by the first user terminal is generated in an area corresponding to the positioning information;
Immediately transmitting the generated notification message to a second user terminal corresponding to the receiver information;
If the current location information of the second user terminal corresponds to the positioning information for the first object, the second user terminal is a valid message of the message while notifying that a predetermined message corresponding to the first object exists. Generating an input request message requesting input of a predetermined user code for authenticating the receiver;
Transmitting the generated input request message to the second user terminal immediately after generation;
Extracting content data corresponding to the first object when the user code input by the second user terminal matches all or part of the identification code information previously stored in the database; And
And transmitting the content data corresponding to the first object to the second user terminal immediately after extraction of the content data.

삭제delete 삭제delete 삭제delete 삭제delete
KR1020180098177A 2018-08-22 2018-08-22 Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof KR102052836B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180098177A KR102052836B1 (en) 2018-08-22 2018-08-22 Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180098177A KR102052836B1 (en) 2018-08-22 2018-08-22 Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof

Publications (1)

Publication Number Publication Date
KR102052836B1 true KR102052836B1 (en) 2019-12-05

Family

ID=69002318

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180098177A KR102052836B1 (en) 2018-08-22 2018-08-22 Server for transmitting and receiving secret messages using augmented reality, and user terminal for the same, and method for transmitting and receiving secret messages using thereof

Country Status (1)

Country Link
KR (1) KR102052836B1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050021813A (en) * 2003-08-26 2005-03-07 에스케이 텔레콤주식회사 System and Method for Relay of Data Transaction Using Mobile Communication Terminal
KR100677502B1 (en) 2006-01-13 2007-02-02 엘지전자 주식회사 Message composing method in mobile communication terminal based on augmented reality and its mobile communication terminal
KR20110134658A (en) * 2010-06-09 2011-12-15 주식회사 엘지유플러스 System and method for providing location information using augumented reality
KR20110134736A (en) * 2010-06-09 2011-12-15 에스케이플래닛 주식회사 Method for transmitting and receiving augmented reality message, terminal and computer-readable recording medium with program therefor
KR20120007215A (en) * 2010-07-14 2012-01-20 엘지전자 주식회사 Mobile terminal, and method for producing and obtaining message about outside object
KR20120033846A (en) * 2010-09-30 2012-04-09 주식회사 팬택 Apparatus and method for providing augmented reality using virtual object
KR20120073726A (en) * 2010-12-27 2012-07-05 주식회사 팬택 Authentication apparatus and method for providing augmented reality information

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050021813A (en) * 2003-08-26 2005-03-07 에스케이 텔레콤주식회사 System and Method for Relay of Data Transaction Using Mobile Communication Terminal
KR100677502B1 (en) 2006-01-13 2007-02-02 엘지전자 주식회사 Message composing method in mobile communication terminal based on augmented reality and its mobile communication terminal
KR20110134658A (en) * 2010-06-09 2011-12-15 주식회사 엘지유플러스 System and method for providing location information using augumented reality
KR20110134736A (en) * 2010-06-09 2011-12-15 에스케이플래닛 주식회사 Method for transmitting and receiving augmented reality message, terminal and computer-readable recording medium with program therefor
KR101458805B1 (en) 2010-06-09 2014-11-10 에스케이플래닛 주식회사 Method for Transmitting And Receiving Augmented Reality Message, Terminal And Computer-Readable Recording Medium with Program therefor
KR20120007215A (en) * 2010-07-14 2012-01-20 엘지전자 주식회사 Mobile terminal, and method for producing and obtaining message about outside object
KR20120033846A (en) * 2010-09-30 2012-04-09 주식회사 팬택 Apparatus and method for providing augmented reality using virtual object
KR20120073726A (en) * 2010-12-27 2012-07-05 주식회사 팬택 Authentication apparatus and method for providing augmented reality information

Similar Documents

Publication Publication Date Title
CN105100390B (en) A method of control mobile terminal
CN109426333B (en) Information interaction method and device based on virtual space scene
CN104969591B (en) Pass through near-field communication(NFC)The common information of two mobile device users of link sharing
CN102695032B (en) Information processor, information sharing method and terminal device
US8655960B2 (en) Location-aware instant messaging
US8350871B2 (en) Method and apparatus for creating virtual graffiti in a mobile virtual and augmented reality system
KR101382517B1 (en) Method and mobile terminal for processing contacts
KR101562081B1 (en) Social network service providing system, user terminal and relationship setting method for setting relationship between users of mobile terminal
US8745090B2 (en) System and method for exploring 3D scenes by pointing at a reference object
KR101622859B1 (en) Interaction method, user terminal, server, system and computer storage medium
CN104571532A (en) Method and device for realizing augmented reality or virtual reality
KR20120023882A (en) Method and apparatus for authorizing use of augmented reality information
CN109040289A (en) Interest point information method for pushing, server, terminal and storage medium
CN107979628B (en) Method, device and system for acquiring virtual article
KR102079395B1 (en) Method for providing augmented reality contents based on location
KR20120033846A (en) Apparatus and method for providing augmented reality using virtual object
US20140351284A1 (en) System for performing a personalized information search
CN106302129A (en) A kind of chat method based on geographical position and mobile terminal
KR101680667B1 (en) Mobile device and method for controlling the mobile device
CN106211159A (en) Personal identification method based on bluetooth and device
CN103929412B (en) Method for constructing interactive situation in network environment
CN110536236B (en) Communication method, terminal equipment and network equipment
JP5511084B2 (en) COMMUNICATION DEVICE, COMMUNICATION SYSTEM, COMMUNICATION METHOD, AND COMMUNICATION PROGRAM
CN104807461A (en) Indoor navigation method and device
JP2006101013A (en) Guide information display

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant