KR20200095095A - Augmented reality image marker lock - Google Patents

Augmented reality image marker lock Download PDF

Info

Publication number
KR20200095095A
KR20200095095A KR1020190012743A KR20190012743A KR20200095095A KR 20200095095 A KR20200095095 A KR 20200095095A KR 1020190012743 A KR1020190012743 A KR 1020190012743A KR 20190012743 A KR20190012743 A KR 20190012743A KR 20200095095 A KR20200095095 A KR 20200095095A
Authority
KR
South Korea
Prior art keywords
lock
marker
server
image
augmented reality
Prior art date
Application number
KR1020190012743A
Other languages
Korean (ko)
Other versions
KR102153990B1 (en
Inventor
김윤상
최유진
고준호
Original Assignee
한국기술교육대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국기술교육대학교 산학협력단 filed Critical 한국기술교육대학교 산학협력단
Priority to KR1020190012743A priority Critical patent/KR102153990B1/en
Publication of KR20200095095A publication Critical patent/KR20200095095A/en
Application granted granted Critical
Publication of KR102153990B1 publication Critical patent/KR102153990B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Software Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Disclosed is an augmented reality marker device. The augmented reality marker device comprises: a lock (100) with a marker (110); a server (200) that stores an image corresponding to the marker (110); and an application (300) that recognizes the marker (110), and downloads and displays the image from the server (200). Therefore, various information for providing an augmented reality service can be stored in the server (200), the augmented reality service can be provided to a user through the server (200) when the application (300) recognizes the marker (110), and the augmented reality service using the server (200) can provide a consistent user experience when various terminals and various applications (300) provide the augmented reality service.

Description

증강현실 영상 마커 장치{AUGMENTED REALITY IMAGE MARKER LOCK}Augmented reality image marker device {AUGMENTED REALITY IMAGE MARKER LOCK}

본 발명은 증강현실 영상 마커 장치에 관한 것으로, 더욱 상세하게는 증강 현실 서비스를 제공하는 증강현실 영상 마커 장치에 관한 것이다.The present invention relates to an augmented reality image marker device, and more particularly, to an augmented reality image marker device that provides an augmented reality service.

증강 현실 서비스는 사물에 등록된 마커를 식별해서 마커에 대응한 영상을 출력한다. 증강 현실 서비스에 사용되는 마커에는 다양한 도안이 사용될 수 있다. 증강 현실 서비스를 제공하는 앱은 카메라로 주위 환경을 촬영하며 이때 인식되는 마커에 대응한 영상을 출력한다. 증강 현실 서비스는 실제 사물에 더해 가상 영상을 제공함으로써 실제 환경에 더해지는 가상 체험을 사용자에게 제공할 수 있다. 증강 현실 서비스를 제공하는 응용 분야로, 자동차의 경우 내비게이션, 게임의 경우 증강 현실 게임이 있으며 이러한 응용 분야는 각 산업 전반으로 확산될 경향이 있다.The augmented reality service identifies a marker registered on an object and outputs an image corresponding to the marker. Various designs may be used for markers used in augmented reality services. An app that provides an augmented reality service captures the surrounding environment with a camera and outputs an image corresponding to the recognized marker. The augmented reality service can provide a virtual experience added to a real environment to a user by providing a virtual image in addition to a real object. As an application field that provides an augmented reality service, there are navigation in the case of a car and an augmented reality game in the case of a game, and these application fields tend to spread to each industry.

또한, 증강 현실에 사용되는 마커는 해당 마커를 부착한 장비에 별도의 에너지원이 사용되지 않으므로, 오랫동안 그 기능이 유지될 수 있는 장점이 있다. 이러한 장점을 본 발명과 같이 개인의 추억 등을 효과적으로 보관할 수 있는 증강 현실 장치에 결합하려는 시도가 있어왔다.In addition, since the marker used in augmented reality does not use a separate energy source for the device to which the marker is attached, there is an advantage that its function can be maintained for a long time. There have been attempts to combine these advantages with an augmented reality device capable of effectively storing personal memories, such as the present invention.

등록번호: 10-1740178, 증강현실을 이용한 다중 요소 인증 방법 및 시스템Registration number: 10-1740178, Multi-factor authentication method and system using augmented reality

상기와 같은 필요성을 해결하기 위한 본 발명의 목적은, 서버(200)를 이용한 증강 현실 서비스를 제공하는 증강현실 영상 마커 장치를 제공하는데 있다.An object of the present invention for solving the above need is to provide an augmented reality image marker device that provides an augmented reality service using the server 200.

상기 목적을 달성하기 위한 본 발명은, 마커(110)를 가지는 자물쇠(100); 마커(110)에 대응하는 이미지를 저장하는 서버(200); 및 마커(110)를 인식해서 서버(200)로부터 이미지를 다운로드해서 표시하는 앱(300)을 포함한다.The present invention for achieving the above object, the lock 100 having a marker (110); A server 200 that stores an image corresponding to the marker 110; And an app 300 that recognizes the marker 110 and downloads and displays an image from the server 200.

또한, 자물쇠(100)는 식별자인 마커(110); 마커(110) 또는 이미지를 표시하는 표시부(120); 소리를 출력하는 스피커(130); 및 자물쇠(100) 위치를 측정하는 GPS부(140)를 포함한다.In addition, the lock 100 includes a marker 110 that is an identifier; A marker 110 or a display unit 120 that displays an image; A speaker 130 for outputting sound; And a GPS unit 140 that measures the position of the lock 100.

또한, 서버(200)는 마커(110)에 대응하는 이미지를 저장하는 DB(210); DB(210), 자물쇠(100) 및 앱(300) 사이에 정보를 교환하는 인터페이스(220); 및 자물쇠(100) 위치를 저장하는 위치 저장부(230)를 포함한다.In addition, the server 200 includes a DB 210 that stores an image corresponding to the marker 110; An interface 220 for exchanging information between the DB 210, the lock 100, and the app 300; And a location storage unit 230 for storing the location of the lock 100.

또한, 앱(300)은 자물쇠(100)의 마커(110)를 인식하는 마커 인식부(310); 서버(200)에 접속하는 서버 접속부(320); 서버(200)로부터 마커(110)에 대응한 컨텐츠를 다운로드하고 재생하는 컨텐츠 다운로드 재생부(330); 및 자물쇠(100) 위치를 표시하는 위치 표시부(340)를 포함한다.In addition, the app 300 includes a marker recognition unit 310 for recognizing the marker 110 of the lock 100; A server connection unit 320 connected to the server 200; A content download playback unit 330 for downloading and playing content corresponding to the marker 110 from the server 200; And a position display unit 340 that displays the position of the lock 100.

구체적으로, 위치 표시부(340)는 자물쇠(100)에 스피커(130) 구동을 명령해서 사용자가 자물쇠(100) 근처에 접근했을 때 자물쇠(100)가 스피커(130)를 통해 알림음을 출력할 수 있다. 위치 표시부(340)는 자물쇠(100)를 고정된 위치에 설치할 때 자물쇠(100) 또는 서버(200)로부터 자물쇠(100) 위치를 수신해서 저장하거나 앱(300)이 마커(110)를 인식할 때 서버(200)에 접속해서 마커(110)에 대응한 자물쇠(100) 위치를 수신할 수 있다. 위치 표시부(340)는 수신된 자물쇠(100) 위치를 저장하고 앱(300)이 동작하는 위치인 사용자 위치를 측정해서 사용자 위치가 자물쇠(100) 위치에 근접하는 경우 자물쇠(100)에 스피커(130) 구동을 명령할 수 있다. 이를 통해 사용자가 자물쇠(100)를 쉽게 찾을 수 있다. 이후 앱(300)은 자물쇠(100) 마커(110)를 인식해서 마커(110)에 대응한 이미지를 서버(200)로부터 다운로드해서 화면에 출력할 수 있다.Specifically, the location display unit 340 commands the lock 100 to drive the speaker 130 so that the lock 100 can output a notification sound through the speaker 130 when the user approaches the lock 100. have. The location display unit 340 receives and stores the location of the lock 100 from the lock 100 or the server 200 when installing the lock 100 in a fixed position, or when the app 300 recognizes the marker 110 By connecting to the server 200, the position of the lock 100 corresponding to the marker 110 may be received. The location display unit 340 stores the received lock 100 location and measures the user location, which is the location where the app 300 operates, and when the user location approaches the lock 100 location, the speaker 130 is placed on the lock 100. ) Can command drive. Through this, the user can easily find the lock 100. Thereafter, the app 300 may recognize the lock 100 and the marker 110, download an image corresponding to the marker 110 from the server 200, and display the image on the screen.

상기와 같은 본 발명에 따른 증강현실 영상 마커 장치를 이용할 경우에는 서버(200)에 증강 현실 서비스를 제공하기 위한 각종 정보를 저장하고, 앱(300)이 마커(110)를 인식할 때 서버(200)를 통해 증강 현실 서비스를 사용자에게 제공할 수 있다.In the case of using the augmented reality image marker device according to the present invention as described above, various types of information for providing an augmented reality service are stored in the server 200, and when the app 300 recognizes the marker 110, the server 200 ) To provide an augmented reality service to the user.

또한, 서버(200)를 이용한 증강 현실 서비스는 여러 단말기와 여러 앱(300)이 증강 현실 서비스를 제공할 때 일관된 사용자 경험을 제공하는 장점이 있다.In addition, the augmented reality service using the server 200 has the advantage of providing a consistent user experience when various terminals and various apps 300 provide an augmented reality service.

도 1은 증강현실 영상 마커 장치의 구성을 보인 블록도이다.
도 2는 앱(300), 자물쇠(100), 서버(200) 사이에 동작을 도시한 흐름도이다.
도 3은 자물쇠(100)를 보인 예시도이다.
도 4는 자물쇠(100), 서버(200), 앱(300) 사이에 메시지 흐름도이다.
도 5는 앱(300) 동작을 보인 예시도이다.
도 6은 서버(200)의 DB(210)를 보인 블록도이다.
도 7은 증강현실 영상 마커 장치의 블록도이다.1 is a block diagram showing the configuration of an augmented reality image marker device.
2 is a flow chart showing an operation between the app 300, the lock 100, and the server 200.
3 is an exemplary view showing the lock 100.
4 is a message flow diagram between the lock 100, the server 200, and the app 300.
5 is an exemplary view showing the operation of the app 300.
6 is a block diagram showing the DB 210 of the server 200.
7 is a block diagram of an augmented reality image marker device.

명세서에서 사용된 용어는 그 단어가 본래 가지는 의미가 확대 해석될 수 있으며 서로 다른 의미를 가지는 단어와 단어가 하나의 단어로 조합됨으로써 광의의 새로운 의미를 가지는 합성어 형태를 취한다. 예를 들어 영상이라는 단어와 마커라는 단어가 합성되어 영상 마커를 이룸으로써 영상으로 된 마커를 의미하게 된다. 또한, 명세서에서 제시하는 실시예는 실시에 바람직한 실시예이며, 경우에 따라 다른 구성이 부가되거나 본래 있던 구성이 생략됨이 가능하다. 실시예에서 구성을 포함하다 또는 가지다로 실시될 수 있다.The terms used in the specification can be interpreted by expanding the meanings of the original words, and the words and words having different meanings are combined into a single word, thus taking the form of a compound word having a new meaning in a broad sense. For example, the word image and the word marker are combined to form an image marker, which means an image marker. In addition, the embodiments presented in the specification are preferred embodiments for implementation, and it is possible that other components are added or original components are omitted depending on the case. In embodiments, it may be implemented with or without configurations.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

증강현실 영상 마커 장치는 일회용 디지털 카메라 기능을 가지는 자물쇠(100), 자물쇠(100)가 촬영한 영상을 저장하고 스마트폰 앱(300)으로 저장된 영상을 전송하는 서버(200)를 포함한다. 자물쇠(100)는 일회용 디지털 카메라처럼 촬영 버튼을 누르면 영상을 촬영하고 지정된 서버(200)로 영상을 전송한다. 영상은 이미지이거나 짧은 동영상일 수 있다. 서버(200)에 저장된 영상은 앱(300)에서 서버(200)에 로그인하는 사용자 인증 절차를 통과하면 서버(200)에서 앱(300)으로 전송된다. 자물쇠(100)에는 마커가 표시되어 앱(300)이 마커를 식별해서 서버(200)로부터 영상을 다운로드할 수 있지만 사용자 인증 절차를 거치면 서버(200)가 영상을 제공해서 자물쇠(100) 위치를 사용자가 잊어버린 경우에도 영상에 접근할 수 있다.The augmented reality image marker device includes a lock 100 having a disposable digital camera function, a server 200 that stores an image captured by the lock 100 and transmits the stored image to the smartphone app 300. Like a disposable digital camera, the lock 100 captures an image and transmits the image to the designated server 200 by pressing the photographing button. The video can be an image or a short video. The image stored in the server 200 is transmitted from the server 200 to the app 300 when the app 300 passes a user authentication procedure for logging in to the server 200. A marker is displayed on the lock 100, so that the app 300 can identify the marker and download an image from the server 200, but after a user authentication process, the server 200 provides an image to determine the location of the lock 100. You can access the video even if you forget it.

도 1은 증강현실 영상 마커 장치의 구성을 보인 블록도이다.1 is a block diagram showing the configuration of an augmented reality image marker device.

클라우드는 웹서버(200), DB(210), 파일 서버(200), 애플리케이션 서버(200)를 갖추어서, 앱(300)에서 증강 현실을 구성하고, 서버(200)와 자물쇠(100)가 동작할 수 있도록 각종 데이터 처리 및 프로세스가 원할히 수행되도록 보조한다. 서버(200)는 클라우드를 통해 인터넷 환경에서 앱(300)에 자물쇠(100)를 이용한 증강 현실 서비스를 제공할 수 있다. 예를 들어, 서버(200)가 이중화되어 하나의 서버(200)가 동작하지 않더라도 다른 서버(200)가 동작해서 증강 현실 서비스가 끊김 없이 제공될 수 있도록 한다. 또한, 상술한 것과 같이, 사용자가 급격하게 증대되는 경우, 웹서버, DB, 파일 서버, 애플리케이션 서버 등의 역할을 하는 복수의 서버(200)를 클라우드화하여 제공할 수도 있다. 이러한 요구에 부응하는 클라우드는 앱(300)에서 증강 현실 서비스를 제공하는 토대가 된다.The cloud is equipped with a web server 200, a DB 210, a file server 200, and an application server 200 to configure augmented reality in the app 300, and the server 200 and the lock 100 operate. It assists in smoothly performing various data processing and processes to be able to do so. The server 200 may provide an augmented reality service using the lock 100 to the app 300 in an Internet environment through a cloud. For example, even if the server 200 is redundant and one server 200 does not operate, the other server 200 operates so that the augmented reality service can be seamlessly provided. In addition, as described above, when the number of users rapidly increases, a plurality of servers 200 serving as web servers, DBs, file servers, application servers, etc. may be provided in a cloud form. The cloud that meets these needs becomes the basis for providing an augmented reality service in the app 300.

도 2는 앱(300), 자물쇠(100), 서버(200) 사이에 동작을 도시한 흐름도이다.2 is a flow chart showing an operation between the app 300, the lock 100, and the server 200.

앱(300)은 자물쇠(100)와 연동해서 사용자 ID를 설정하고, 자물쇠(100)는 영상을 촬영하고 서버(200)에 등록한다. 자물쇠(100)가 특정 장소에 설치되고, 서버(200)로 촬영된 영상을 전송한다.The app 300 interlocks with the lock 100 to set a user ID, and the lock 100 captures an image and registers it with the server 200. The lock 100 is installed in a specific place and transmits the captured image to the server 200.

앱(300)이 마커(110)를 인식하면 사용자 ID와 마커(110)를 서버(200)로 전송해서 서버(200)의 DB(210)와 비교하여 사용자 ID를 확인한다. 사용자 ID가 확인되면, 서버(200)는 앱(300)으로 영상을 전송하고, 앱(300)은 영상을 사용자에게 제공한다.When the app 300 recognizes the marker 110, the user ID and the marker 110 are transmitted to the server 200 and compared with the DB 210 of the server 200 to check the user ID. When the user ID is confirmed, the server 200 transmits an image to the app 300, and the app 300 provides the image to the user.

도 3은 자물쇠(100)를 보인 예시도이다.3 is an exemplary view showing the lock 100.

자물쇠(100) 전면은 카메라를 탑재하고, 마커(110)를 표시한다. 자물쇠(100) 상단에는 특정 장소에 설치를 위한 걸쇠가 구성된다. 자물쇠(100) 후면에는 디스플레이 패널이 있어 영상을 표시한다. 자물쇠(100) 옆면에는 영상 촬영 버튼, 영상 삭제 버튼, 이전 영상 보기 버튼이 구성된다. 자물쇠(100) 상단에는 마이크가 하단에는 스피커(130)가 장착된다. 자물쇠(100)에는 마커(110)를 이용한 증강 현실 서비스를 제공하기 위한 각종 장치가 구성된다.The front of the lock 100 mounts a camera and displays a marker 110. At the top of the lock 100, a clasp for installation in a specific place is configured. There is a display panel on the back of the lock 100 to display an image. On the side of the lock 100, an image capturing button, an image delete button, and a previous image view button are provided. A microphone is mounted on the top of the lock 100 and a speaker 130 is mounted on the bottom. Various devices for providing an augmented reality service using the marker 110 are configured in the lock 100.

도 4는 자물쇠(100), 서버(200), 앱(300) 사이에 메시지 흐름도이다.4 is a message flow diagram between the lock 100, the server 200, and the app 300.

증강현실 영상 마커 장치에서 메시지 흐름도에 따른 동작 절차로, 자물쇠(100)는 촬영된 영상을 서버(200)로 전송하는 단계; 서버(200)는 영상을 저장하는 단계; 앱(300)이 마커(110)를 인식하면 서버(200)가 사용자 ID 확인을 앱(300)에 요청하는 단계; 앱(300)이 사용자 ID를 입력하면 서버(200)는 DB(210)에서 사용자 ID를 검색해서 일치하면 저장된 영상을 앱(300)으로 전송하는 단계를 포함할 수 있다.In an operation procedure according to a message flow diagram in an augmented reality image marker device, the lock 100 transmits the captured image to the server 200; The server 200 storing an image; When the app 300 recognizes the marker 110, the server 200 requests the app 300 to confirm the user ID; When the app 300 inputs the user ID, the server 200 searches for the user ID from the DB 210 and, if matched, transmitting the stored image to the app 300.

자물쇠(100)는 촬영된 영상을 서버(200)로 전송하고 서버(200)는 영상을 저장한다. 앱(300)이 마커(110)를 인식하면 서버(200)가 사용자 ID 확인을 앱(300)에 요청하고, 앱(300)이 사용자 ID를 입력하면 서버(200)는 DB(210)에서 사용자 ID를 검색해서 일치하면 저장된 영상을 앱(300)으로 전송한다.The lock 100 transmits the captured image to the server 200 and the server 200 stores the image. When the app 300 recognizes the marker 110, the server 200 requests user ID confirmation from the app 300, and when the app 300 inputs the user ID, the server 200 If the ID is searched and matched, the stored image is transmitted to the app 300.

도 5는 앱(300) 동작을 보인 예시도이다.5 is an exemplary view showing the operation of the app 300.

자물쇠(100) 전면에 표시된 마커(110)를 앱(300)이 인식하고, 비밀번호를 입력하면 화면을 통해 자물쇠(100) 마커(110)에 등록된 영상이 제공된다. 자물쇠(100) 마커(110) 마다 다른 영상이 등록될 수 있다.When the app 300 recognizes the marker 110 displayed on the front of the lock 100 and inputs a password, an image registered in the marker 110 of the lock 100 is provided through the screen. Different images may be registered for each marker 110 of the lock 100.

도 6은 서버(200)의 DB(210)를 보인 블록도이다.6 is a block diagram showing the DB 210 of the server 200.

서버(200) DB(210)에는 장치 ID, 사용자 ID, 마커(110), 영상을 저장한다. 장치 ID는 자물쇠(100) 식별자이고, 사용자 ID는 자물쇠(100)에 설정된 사용자 정보이고, 마커(110)는 영상에 대응하는 증강 현실 서비스를 제공하기 위한 식별자이고, 영상은 마커(110)에 대응하여 등록된다.A device ID, a user ID, a marker 110, and an image are stored in the server 200 and DB 210. The device ID is an identifier of the lock 100, the user ID is user information set in the lock 100, the marker 110 is an identifier for providing an augmented reality service corresponding to an image, and the image corresponds to the marker 110 Is registered.

도 7은 증강현실 영상 마커 장치의 블록도이다.7 is a block diagram of an augmented reality image marker device.

증강현실 영상 마커 장치는 마커(110)를 가지는 자물쇠(100); 마커(110)에 대응하는 이미지를 저장하는 서버(200); 및 마커(110)를 인식해서 서버(200)로부터 이미지를 다운로드해서 표시하는 앱(300)을 포함한다.The augmented reality image marker device includes a lock 100 having a marker 110; A server 200 that stores an image corresponding to the marker 110; And an app 300 that recognizes the marker 110 and downloads and displays an image from the server 200.

증강현실 영상 마커 장치를 구성하는 자물쇠(100), 서버(200), 앱(300)을 순서대로 살펴보면, 자물쇠(100)는 식별자인 마커(110); 마커(110) 또는 이미지를 표시하는 표시부(120); 소리를 출력하는 스피커(130); 및 자물쇠(100) 위치를 측정하는 GPS부(140)를 포함한다. GPS부(140)는 자물쇠(100)가 설치될 때 자물쇠(100) 위치를 측정해서 영상과 함께 위치 정보를 서버(200)에 저장할 수 있게 조치한다. 자물쇠(100)는 일회용 디지털 카메라와 같이 촬영시에만 동작하고 사용자가 자물쇠(100)를 조작하지 않으면 동작하지 않아 배터리 소모가 극히 적다. 즉, 마커를 사용하지 않고 외부와 통신을 하도록 형성된 장치의 형태에 비해서, 본 발명의 자물쇠(100)는 외부 이벤트나 통신 동작 등이 적으므로, 자물쇠(100) 동작은 반영구적일 수 있다.Looking at the lock 100, the server 200, and the app 300 constituting the augmented reality image marker device in order, the lock 100 includes a marker 110 that is an identifier; A marker 110 or a display unit 120 that displays an image; A speaker 130 for outputting sound; And a GPS unit 140 that measures the position of the lock 100. When the lock 100 is installed, the GPS unit 140 measures the position of the lock 100 and measures the location information along with the image to be stored in the server 200. The lock 100 operates only when photographing, like a disposable digital camera, and does not operate unless the user manipulates the lock 100, so battery consumption is extremely low. That is, compared to the form of a device formed to communicate with the outside without using a marker, the lock 100 of the present invention has fewer external events or communication operations, and thus the operation of the lock 100 may be semi-permanent.

또한, 서버(200)는 마커(110)에 대응하는 이미지를 저장하는 DB(210); DB(210), 자물쇠(100) 및 앱(300) 사이에 정보를 교환하는 인터페이스(220); 및 자물쇠(100) 위치를 저장하는 위치 저장부(230)를 포함한다.In addition, the server 200 includes a DB 210 that stores an image corresponding to the marker 110; An interface 220 for exchanging information between the DB 210, the lock 100, and the app 300; And a location storage unit 230 for storing the location of the lock 100.

또한, 서버(200)는 추가적으로, 한 사용자가 복수의 자물쇠(100)를 복수의 장소에 디스플레이하여 자신의 추억을 보관하고자 하는 경우에 적합한 서비스를 제공할 수도 있다.In addition, the server 200 may additionally provide a service suitable when a user wants to store his or her own memories by displaying a plurality of locks 100 in a plurality of places.

구체적으로, 사용자 ID의 설정을 기반으로, 동일한 사용자 ID와 각각의 자물쇠(100)에 형성된 비밀번호를 근거로, 서버에서는 가상화된 지도 등에 복수의 자물쇠(100), 복수의 자물쇠(100)에서 업로드한 이미지나 영상, 해당 자물쇠(100)가 생성된 날 등을 사용자에게 별도의 앱 등을 통해 제공할 수도 있다. 이러한 서비스를 통해, 예를 들어 사용자는 자신의 가족이나 반려동물이 커감에 따른 변화 등을 복수의 장소에 보관된 복수의 자물쇠(100)를 통해 추억할 수 있는 효과를 제공할 수도 있다,Specifically, based on the setting of the user ID, based on the same user ID and the password formed in each lock 100, the server uploaded from a plurality of locks 100 and a plurality of locks 100 on a virtualized map, etc. An image or image, the date on which the lock 100 was created, and the like may be provided to the user through a separate app. Through such a service, for example, a user may provide an effect of reminiscing changes according to the increase of his or her family or companion animal through a plurality of locks 100 stored in a plurality of places.

또한, 앱(300)은 자물쇠(100)의 마커(110)를 인식하는 마커 인식부(310); 서버(200)에 접속하는 서버 접속부(320); 서버(200)로부터 마커(110)에 대응한 컨텐츠를 다운로드하고 재생하는 컨텐츠 다운로드 재생부(330); 및 자물쇠(100) 위치를 표시하는 위치 표시부(340)를 포함한다.In addition, the app 300 includes a marker recognition unit 310 for recognizing the marker 110 of the lock 100; A server connection unit 320 connected to the server 200; A content download playback unit 330 for downloading and playing content corresponding to the marker 110 from the server 200; And a position display unit 340 that displays the position of the lock 100.

구체적으로, 위치 표시부(340)는 자물쇠(100)에 스피커(130) 구동을 명령해서 사용자가 자물쇠(100) 근처에 접근했을 때 자물쇠(100)가 스피커(130)를 통해 알림음을 출력할 수 있다. 위치 표시부(340)는 자물쇠(100)를 고정된 위치에 설치할 때 자물쇠(100) 또는 서버(200)로부터 자물쇠(100) 위치를 수신해서 저장하거나 앱(300)이 마커(110)를 인식할 때 서버(200)에 접속해서 마커(110)에 대응한 자물쇠(100) 위치를 수신할 수 있다. 위치 표시부(340)는 수신된 자물쇠(100) 위치를 저장하고 앱(300)이 동작하는 위치인 사용자 위치를 측정해서 사용자 위치가 자물쇠(100) 위치에 근접하는 경우 자물쇠(100)에 스피커(130) 구동을 명령할 수 있다. 이를 통해 사용자가 자물쇠(100)를 쉽게 찾을 수 있다. 이후 앱(300)은 자물쇠(100) 마커(110)를 인식해서 마커(110)에 대응한 이미지를 서버(200)로부터 다운로드해서 화면에 출력할 수 있다.Specifically, the location display unit 340 commands the lock 100 to drive the speaker 130 so that the lock 100 can output a notification sound through the speaker 130 when the user approaches the lock 100. have. The location display unit 340 receives and stores the location of the lock 100 from the lock 100 or the server 200 when the lock 100 is installed in a fixed position, or when the app 300 recognizes the marker 110 By connecting to the server 200, the position of the lock 100 corresponding to the marker 110 may be received. The location display unit 340 stores the received lock 100 location and measures the user location, which is the location where the app 300 operates, and when the user location approaches the lock 100 location, the speaker 130 is placed on the lock 100. ) Can command drive. Through this, the user can easily find the lock 100. Thereafter, the app 300 may recognize the lock 100 and the marker 110, download an image corresponding to the marker 110 from the server 200, and display the image on the screen.

사용자는 지도 위에 표시된 자물쇠 위치를 보고 자물쇠 위치로 이동하고 자물쇠에 접근하면 자물쇠가 알림음을 출력한다. 사용자는 자물쇠 마커(110)를 인식하고 마커(110)에 대응한 영상을 볼 수 있다.The user sees the location of the lock displayed on the map, moves to the location of the lock, and when the lock is approached, the lock sounds an alarm. The user can recognize the lock marker 110 and view an image corresponding to the marker 110.

위치 표시부(340)는 지도 위에 자물쇠 위치를 표시하는 지도 표시부(341); 및 사용자 위치가 자물쇠 위치에 근접하면 자물쇠 스피커(130)를 구동시켜 알림음을 출력하는 알림음 출력부(342)를 포함할 수 있다. 알림음 출력부는 자물쇠 위치 근접을 판단하는 근접 판단부; 및 근접 판단되면 자물쇠 스피커(130) 구동을 명령하는 스피커 구동부를 포함한다. 근접 판단부는 자물쇠 위치 근접을 차등화된 근접 레벨로 분류 판단하고, 스피커 구동부는 판단된 분류 레벨에 따라 자물쇠 근접 알람음을 다르게 출력할 수 있다. 사용자는 자물쇠 근접 정도에 따라 다른 알람음을 듣고 자물쇠에 접근할 수 있고 알람음에 따라 자물쇠 위치를 추적할 수 있다. 또한, 위치 표시부(340)는 사용자 위치가 자물쇠 위치에 최근접한 경우 자물쇠에 구성된 표시부(120)를 깜박이게 하는 표시 알람부를 포함할 수 있다. 자물쇠(100)의 표시부(120)는 깜박이고, 스피커(130)는 알람음을 출력해서 사용자에게 자물쇠 위치를 알릴 수 있다.The location display unit 340 includes a map display unit 341 for displaying a lock position on a map; And a notification sound output unit 342 for outputting a notification sound by driving the lock speaker 130 when the user's position approaches the lock position. The notification sound output unit may include a proximity determination unit that determines proximity of the lock position; And a speaker driving unit for commanding driving of the lock speaker 130 when the proximity is determined. The proximity determination unit may classify the proximity of the lock position into a differentiated proximity level, and the speaker driving unit may differently output a lock proximity alarm sound according to the determined classification level. Users can access the lock by hearing different alarm sounds depending on the proximity of the lock, and track the lock position according to the alarm sound. Further, the location display unit 340 may include a display alarm unit that blinks the display unit 120 configured in the lock when the user's position is closest to the lock position. The display unit 120 of the lock 100 blinks, and the speaker 130 may output an alarm sound to inform the user of the lock position.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described above with reference to preferred embodiments of the present invention, those skilled in the art variously modify and change the present invention without departing from the spirit and scope of the present invention as set forth in the claims below. You can understand that you can.

100: 자물쇠 110: 마커
120: 표시부 130: 스피커
140: GPS부 200: 서버
210: DB 220: 인터페이스
230: 위치 저장부 300: 앱
310: 마커 인식부 320: 서버 접속부
330: 컨텐츠 다운로드 재생부 340: 위치 표시부100: lock 110: marker
120: display unit 130: speaker
140: GPS unit 200: server
210: DB 220: interface
230: location storage unit 300: app
310: marker recognition unit 320: server connection unit
330: content download playback unit 340: location display unit

Claims (5)

마커(110)를 가지는 자물쇠(100);
상기 마커(110)에 대응하는 이미지를 저장하는 서버(200); 및
상기 마커(110)를 인식해서 상기 서버(200)로부터 이미지를 다운로드해서 표시하는 앱(300)을 포함하는 증강현실 영상 마커 장치.A lock 100 with a marker 110;
A server 200 that stores an image corresponding to the marker 110; And
An augmented reality image marker device comprising an app 300 that recognizes the marker 110 and downloads and displays an image from the server 200. 제1항에 있어서,
상기 자물쇠(100)는 식별자인 마커(110);
상기 마커(110) 또는 이미지를 표시하는 표시부(120);
소리를 출력하는 스피커(130); 및
상기 자물쇠(100) 위치를 측정하는 GPS부(140)를 포함하는 증강현실 영상 마커 장치.The method of claim 1,
The lock 100 includes a marker 110 that is an identifier;
A display unit 120 that displays the marker 110 or an image;
A speaker 130 for outputting sound; And
Augmented reality image marker device including a GPS unit 140 for measuring the position of the lock 100. 제2항에 있어서,
상기 서버(200)는 상기 마커(110)에 대응하는 이미지를 저장하는 DB(210);
상기 DB(210), 상기 자물쇠(100) 및 상기 앱(300) 사이에 정보를 교환하는 인터페이스(220); 및
상기 자물쇠(100) 위치를 저장하는 위치 저장부(230)를 포함하는 증강현실 영상 마커 장치.According to claim 2,
The server 200 includes a DB 210 that stores an image corresponding to the marker 110;
An interface 220 for exchanging information between the DB 210, the lock 100, and the app 300; And
Augmented reality image marker device comprising a location storage unit 230 for storing the position of the lock 100. 제3항에 있어서,
상기 앱(300)은 상기 자물쇠(100)의 상기 마커(110)를 인식하는 마커 인식부(310);
상기 서버(200)에 접속하는 서버 접속부(320);
상기 서버(200)로부터 상기 마커(110)에 대응한 컨텐츠를 다운로드하고 재생하는 컨텐츠 다운로드 재생부(330); 및
상기 자물쇠(100) 위치를 표시하는 위치 표시부(340)를 포함하는 증강 현실 영상 마커 장치.The method of claim 3,
The app 300 may include a marker recognition unit 310 that recognizes the marker 110 of the lock 100;
A server connection unit 320 connected to the server 200;
A content download playback unit 330 for downloading and playing content corresponding to the marker 110 from the server 200; And
An augmented reality image marker device comprising a position display unit 340 for displaying the position of the lock 100. 제4항에 있어서,
상기 위치 표시부(340)는 상기 자물쇠(100)에 스피커(130) 구동을 명령하는 증강 현실 영상 마커 장치.According to claim 4,
The position display unit 340 commands the lock 100 to drive the speaker 130.
KR1020190012743A 2019-01-31 2019-01-31 Augmented reality image marker lock KR102153990B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190012743A KR102153990B1 (en) 2019-01-31 2019-01-31 Augmented reality image marker lock

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190012743A KR102153990B1 (en) 2019-01-31 2019-01-31 Augmented reality image marker lock

Publications (2)

Publication Number Publication Date
KR20200095095A true KR20200095095A (en) 2020-08-10
KR102153990B1 KR102153990B1 (en) 2020-09-09

Family

ID=72049650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190012743A KR102153990B1 (en) 2019-01-31 2019-01-31 Augmented reality image marker lock

Country Status (1)

Country Link
KR (1) KR102153990B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022045584A1 (en) * 2020-08-28 2022-03-03 머지리티 주식회사 Image integration method and system

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102282520B1 (en) 2020-08-28 2021-07-27 머지리티 주식회사 Method of image dependent contents integration
KR20230054236A (en) 2021-10-15 2023-04-24 알비언 주식회사 Apparatus and method for providing an image object corresponding to image information of an object
KR102577688B1 (en) 2021-10-15 2023-09-12 알비언 주식회사 Apparatus and method for providing comment information corresponding to image information of an object
KR20230054237A (en) 2021-10-15 2023-04-24 알비언 주식회사 Apparatus and method for providing a user avatar corresponding to image information of an object

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101049090B1 (en) * 2010-09-17 2011-07-15 성준형 Augmented reality marker and method for distributing contents using augmented reality
KR20140081213A (en) * 2012-12-21 2014-07-01 이기호 System for charging electronic card and method thereof
KR101740178B1 (en) 2016-02-18 2017-05-25 인하대학교 산학협력단 Multi-factor authentication method and the system using augmented reality

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101049090B1 (en) * 2010-09-17 2011-07-15 성준형 Augmented reality marker and method for distributing contents using augmented reality
KR20140081213A (en) * 2012-12-21 2014-07-01 이기호 System for charging electronic card and method thereof
KR101740178B1 (en) 2016-02-18 2017-05-25 인하대학교 산학협력단 Multi-factor authentication method and the system using augmented reality

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022045584A1 (en) * 2020-08-28 2022-03-03 머지리티 주식회사 Image integration method and system

Also Published As

Publication number Publication date
KR102153990B1 (en) 2020-09-09

Similar Documents

Publication Publication Date Title
KR102153990B1 (en) Augmented reality image marker lock
US11566915B2 (en) Method, device and system for processing a flight task
US10003730B2 (en) Method and device for sharing a camera feature
CN109905318B (en) Equipment control method, device and storage medium
US11989400B2 (en) Data sharing method and device
CN112118477B (en) Virtual gift display method, device, equipment and storage medium
CN109640125B (en) Video content processing method, device, server and storage medium
KR101769852B1 (en) System for mediating real estate trading using dron
CN106254467A (en) Sharing files method and device
CN104509089A (en) Information processing device, information processing method, and program
CN111400610A (en) Vehicle-mounted social contact method and device and computer storage medium
CN114173000A (en) Method, electronic equipment and system for replying message
CN111739517A (en) Speech recognition method, speech recognition device, computer equipment and medium
CN113689171A (en) Method and device for fusing family schedules
CA2802293C (en) Method and device for sharing a camera feature
JP6359704B2 (en) A method for supplying information associated with an event to a person
WO2022095712A1 (en) Data sharing method, apparatus and system, and electronic device
CN112423011B (en) Message reply method, device, equipment and storage medium
CN112818240A (en) Comment information display method, comment information display device, comment information display equipment and computer-readable storage medium
CN110134902B (en) Data information generating method, device and storage medium
CN112559795A (en) Song playing method, song recommending method, device and system
CN111130985B (en) Incidence relation establishing method, device, terminal, server and storage medium
US20220103639A1 (en) Server apparatus, communication system and communication method
CN114816600B (en) Session message display method, device, terminal and storage medium
CN114900559A (en) Management system, terminal, management method, and storage medium

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant