KR101229523B1 - Led-information code data system with led-id - Google Patents

Led-information code data system with led-id Download PDF

Info

Publication number
KR101229523B1
KR101229523B1 KR1020120001473A KR20120001473A KR101229523B1 KR 101229523 B1 KR101229523 B1 KR 101229523B1 KR 1020120001473 A KR1020120001473 A KR 1020120001473A KR 20120001473 A KR20120001473 A KR 20120001473A KR 101229523 B1 KR101229523 B1 KR 101229523B1
Authority
KR
South Korea
Prior art keywords
led
information
code
data
information code
Prior art date
Application number
KR1020120001473A
Other languages
Korean (ko)
Inventor
차재상
정순호
김대호
Original Assignee
서울과학기술대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울과학기술대학교 산학협력단 filed Critical 서울과학기술대학교 산학협력단
Priority to KR1020120001473A priority Critical patent/KR101229523B1/en
Application granted granted Critical
Publication of KR101229523B1 publication Critical patent/KR101229523B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/1097—Optical sensing of electronic memory record carriers, such as interrogation of RFIDs with an additional optical interface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06046—Constructional details
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/10881—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices constructional details of hand-held scanners
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/1095—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices the scanner comprising adaptations for scanning a record carrier that is displayed on a display-screen or the like
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/35—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements being liquid crystals

Abstract

PURPOSE: A system for transmitting both LED-information code data and an LED-ID is provided to overcome the limited amount of information by expressing information codes represented as a QR code on one LED panel without the constraint of space. CONSTITUTION: A data server(100) transmits shape information of an information code encoded with data information and additional information not encoded on the information coed through a wire/wireless communication network. An LED panel(200) is a panel member on which LED elements are vertically and horizontally arranged and selectively lights the LED elements to match the elements with patterns of the information code stored in the shape information based on the shape information received from the data server in order to display the information code. A mobile terminal(300) photographs the information code displayed on the LED panel to decode the information code as a data code. [Reference numerals] (100) Data server; (200) LED panel; (300) Mobile terminal; (310) LED-ID reader unit; (AA) Generating a QR code mapped with data; (BB) Determining a blinking pattern mapped with data; (CC) Controlling on-off of each LED to be mapped with the QR code; (DD) Controlling the blinking of the LED according to the blinking pattern

Description

ＬＥＤ-ＩＤ를 겸한 ＬＥＤ-정보코드 데이터 전송 시스템{LED-Information Code Data System With LED-ID}LED-Information Code Data System With LED-ID

본 발명은 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템에 관한 것으로, QR코드로 대표되는 정보코드를 LED패널에 현시하여 이를 촬영하는 모바일단말기에 정보를 제공함과 동시에 LED소자에 적용되는 LED-ID기술을 이용하여 위치정보, 상품정보 등의 추가정보를 전송하도록 구현된 시스템에 관한 것이다.
The present invention relates to an LED-information code data transmission system that also serves as an LED-ID, and provides an information code represented by a QR code on an LED panel to provide information to a mobile terminal photographing the same, and at the same time applied to an LED device. The present invention relates to a system implemented to transmit additional information such as location information and product information using ID technology.

거리를 걷다 보면 좌우에 즐비한 광고판에는 광고문구뿐만 아니라 작지만 뚜렷한 QR코드가 삽입되어 있어 지나가는 사람들의 눈길을 끄는 것을 자주 볼 수 있다. 최근 들어 정보코드의 일종인 QR코드가 마케팅의 일환으로 활용되는 사례가 급증했기 때문이다. 과거에는 물건정보를 저장하는 물류,유통에 바코드를 사용하는 것이 거의 대부분이었던 것을 일본의 DENSO WAVE라는 회사가 바코드를 단점을 개선한 QR코드를 개발하여 사용되고 있다. 이는 바코드는 한 방향으로만 정보를 가지고 있는 반면 QR코드는 가로, 세로 두 방향으로 정보를 기록할 수 있으므로 정보량을 비약적으로 증가시킨 코드이다. 이외에 미국,영국 등 각국마다 PDF417코드, DataMatrix 코드, Maxi Code 등이 있으나 모두 QR코드와 동일한 개념으로 제작되는 것인 바 QR코드를 대표적인 2차원 정보코드로 볼 수 있다.As you walk down the street, billboards on the left and right are not only advertising but also a small but distinct QR code is inserted to catch the attention of people passing by. Recently, the use of QR code, which is a kind of information code, as part of marketing has surged. In the past, the use of barcodes for logistics and distribution to store product information has been mostly used. A Japanese company, DENSO WAVE, has developed and used QR codes to improve the disadvantages of barcodes. This is a code that dramatically increases the amount of information because the barcode has information in only one direction while the QR code can record information in two directions. In addition, there are PDF417 codes, DataMatrix codes and Maxi Codes in each country such as the United States and the United Kingdom, but all are produced in the same concept as QR codes.

또한 광고판이나 알림표시판에서 주로 사용되는 패널은 다양한 방식과 재료를 이용하여 제작될 수 있으나, 야간발광성과 전기 효율이 좋은 LED패널을 이용하는 정도가 급증하고 있다. LED패널을 제작하는데 이용되는 LED는 Light Emitting Diode의 약자로서 P-N 접합 다이오드인 P형 반도체와 N형 반도체의 접합형태가 4족 원소에 3족 또는 5족 원소의 불순물을 혼합하여 에너지준위차를 생성하고 이를 통해 방출된 에너지가 광자입자로 방출되어 빛이 생성되는 원리를 이용한 기술이다. In addition, the panels mainly used in advertising billboards or notice boards can be manufactured using various methods and materials, but the use of LED panels having good light emission and electric efficiency is rapidly increasing. LED, which is used for manufacturing LED panel, stands for Light Emitting Diode, and the junction type of P-type semiconductor, which is PN junction diode and N-type semiconductor, mixes impurities of group 3 or group 5 elements with group 4 elements to generate energy level difference. It is a technology that uses the principle that the energy emitted through this is emitted to the photon particles to generate light.

특히, LED 기술을 이용하여 무선통신을 할 수 있는 시스템이 개발된 바 있는데 특허등록 제10-0654935에 의하면, 가시광통신 기술은 가정의 조명기기, 옥외광고나 신호기기의 표시기, 자동차 전구 등 LED를 사용하는 기기에서 나오는 가시광선(RGB)을 이용해서 정보를 전달하는 기술로서, 특히 OOK-CDMA를 기반으로 하거나 on-off offset를 사용하여 OOK 신호를 PSK로 변환하는 형태의 시스템을 기반으로 하여, 무선광 통신을 위해서 차세대 조명기기로 각광받고 있는 가시광을 발산하는 LED(White-LED 및 Red, Green, Blue, Yellow LED)를 사용하여 무선 광통신을 수행하는데 적당하도록 한 가시광선을 발산하는 LED를 이용할 수 있음을 알 수 있다.In particular, a system for wireless communication using LED technology has been developed. According to Patent Registration No. 10-0654935, visible light communication technology uses LEDs such as home lighting equipment, outdoor advertising or signaling equipment, and automobile bulbs. A technology for transmitting information using visible light (RGB) from a device used, in particular, based on a system that converts OOK signals to PSK based on OOK-CDMA or using an on-off offset. For wireless light communication, it is possible to use LEDs that emit visible light suitable for performing wireless optical communication using LEDs (White-LED, Red, Green, Blue, and Yellow LED) that emit visible light, which is spotlighted as next generation lighting equipment. It can be seen that.

이러한 상기 기술들을 이용하여 led 패널을 이용하여 QR코드를 현시하여 정보전달을 실현시키는 기술이 가능함을 보여주고 있다. 그러나, QR코드의 제작은 제작에 필요한 이차원의 공간이 필요한 바, 필요한 정보코드의 갯수만큼의 이차원 면적을 준비해야 하는 점과 QR코드의 정보저장량에 한계가 있다는 문제점이 있다.Using these techniques, the LED panel is used to show a QR code to realize a technology for realizing information transmission. However, the production of the QR code requires a two-dimensional space required for the production, there is a problem in that the number of two-dimensional area to prepare the number of the required information code and there is a limit in the amount of information storage of the QR code.

따라서 상기 QR코드와 같은 정보코드의 문제점을 LED 패널에서 송출되는 LED발광소자를 이용하는 LED-ID기술과 접목시켜 해결하는 방법의 논의가 필요하다.
Therefore, it is necessary to discuss a method of solving the problem of the information code such as the QR code by combining with the LED-ID technology using the LED light emitting device emitted from the LED panel.

본 발명의 목적은 한정된 크기의 LED패널에 복수 개의 정보코드를 다양하게 현시할 수 있도록 구성하여 정보전달의 효율성을 높임과 동시에, LED패널인 점에 주목하여 LED 소자의 발광에 가시광통신을 적용하여 추가적인 정보를 전송하도록 구현한 시스템을 제공하는 데 있다.An object of the present invention is to configure a plurality of information codes on a LED panel of a limited size to increase the efficiency of information transmission, while at the same time pay attention to the LED panel to apply visible light communication to the light emitting LED device It is to provide a system implemented to transmit additional information.

본 발명은 LED-ID를 겸한 LED-정보코드 데이터 전송시스템을 구축하기 위하여 1) 데이터서버를 구축하여 LED패널에 설정된 정보코드의 형태와 동일하게 LED소자 각각을 점등 또는 점멸하여 정보코드를 현시하고, 2) 데이터서버의 명령에 따라 현시되는 정보코드가 변경될 수 있도록 하며, 3) 현시되는 정보코드와 함께 LED-ID로서의 기능을 수행하여 추가적인 정보전송이 이루어지도록 하는 시스템을 구축하고자 한다.
The present invention to build an LED-information code data transmission system that combines LED-ID 1) to build a data server to light up or flash each LED element in the same manner as the type of information code set on the LED panel to display the information code , 2) The information code to be displayed can be changed according to the command of the data server, and 3) The system will be constructed to perform additional information transmission by performing the function as LED-ID together with the information code.

본 발명은 데이터정보가 인코딩된 정보코드의 형태정보 및 상기 정보코드에 인코딩되지 않은 추가정보를 유·무선 통신망을 통해 송신하는 데이터 서버(100); 다수개의 LED소자가 종횡으로 배열된 판형부재로서, 상기 데이터 서버로부터 상기 형태정보를 수신하여 상기 형태정보에 저장된 정보코드의 패턴과 매칭되도록 LED소자를 선택적으로 발광시켜 정보코드를 현시하고, 상기 데이터 서버로부터 수신한 추가정보를 상기 LED소자의 발광신호를 LED-ID 태그로 이용하여 송신하는 LED패널(200); 및 상기 LED패널에 현시된 정보코드를 촬영하여 상기 정보코드를 데이터정보로 디코딩하고, LED-ID 리더부(310)가 장착되어 있어 상기 LED소자의 발광을 통하여 송신되는 추가정보를 수신하는 모바일단말기(300);를 포함하여 구성되어, 상기 모바일단말기가 상기 LED패널로부터 정보코드의 데이터정보뿐만 아니라 LED-ID태그로 전달되는 추가정보까지 이중으로 정보를 수신하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 제공한다.
The present invention provides a data server for transmitting form information of an information code encoded with data information and additional information not encoded in the information code through a wired / wireless communication network; A plate member having a plurality of LED elements arranged vertically and horizontally, receiving the shape information from the data server and selectively emitting the LED elements so as to match the pattern of the information code stored in the shape information, and expressing the information code. LED panel 200 for transmitting the additional information received from the server using the light emitting signal of the LED device as an LED-ID tag; And photographing the information code displayed on the LED panel to decode the information code into data information, and equipped with an LED-ID reader 310 to receive additional information transmitted through light emission of the LED device. 300, wherein the mobile terminal combines the LED-ID, characterized in that the mobile terminal receives information from the LED panel as well as data information of the information code in addition to the additional information delivered in the LED-ID tag. Provides LED information code data transmission system.

본 발명에 따르면 다음과 같은 효과가 있다.The present invention has the following effects.

1. 본 발명에 의하면 QR코드로 대표되는 정보코드 다수개를 공간적 제약없이 하나의 LED패널에 표현할 수 있어 한정적인 정보량을 극복할 수 있다.1. According to the present invention, a plurality of information codes represented by QR codes can be expressed in one LED panel without spatial limitations, thereby overcoming a limited amount of information.

2. 또한 본 발명에 의하면 정보코드를 LED패널에 현시하는 것 이외에도 LED-ID기술을 접목시켜 추가적인 정보교환이 가능하여 정보제공량을 확대시킬 수 있어 효과적이다. 2. In addition, according to the present invention, in addition to the display of the information code on the LED panel, by combining the LED-ID technology, additional information can be exchanged, and thus the amount of information can be expanded.

3. 특히 LED-ID기술을 이용하여 위치데이터를 전송하게 되면 LED패널에 현시된 정보코드에서 제공하는 이벤트, 프로모션의 위치를 간편하게 확인할 수 있으므로 효과적이다. 3. In particular, if the location data is transmitted using the LED-ID technology, the location of the events and promotions provided by the information code displayed on the LED panel can be easily identified.

4. 한편 따르면 LED-ID기술의 근거리성에 기반하므로 보안성이 강화되어 보안이 필요한 경우에도 효과적으로 이용할 수 있다.
4. On the other hand, based on the short-range technology of LED-ID technology, security is enhanced and can be effectively used even when security is required.

[도 1]은 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템의 대략적인 모식도이다.
[도 2]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템의 실시예이다.
[도 3]은 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 위치정보가 함께 송신되어 현시되는 모습의 실시예이다.
[도 4]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템이 실내에서 구현되는 경우의 실시예이다.
[도 5]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 LED-ID 리더부에 장착되는 PIN포토다이오드의 실시예이다.
[도 6]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 LED-ID 리더부에 장착되는 APD의 실시예이다.1 is a schematic diagram of an LED-information code data transmission system as well as an LED-ID according to the present invention.
2 is an embodiment of an LED-information code data transmission system as well as an LED-ID according to the present invention.
Figure 3 is an embodiment of the appearance is shown by transmitting the position information together in the LED-information code data transmission system combined with LED-ID according to the present invention.
4 is an embodiment when the LED-ID code data transmission system that combines the LED-ID according to the present invention is implemented indoors.
5 is an embodiment of a PIN photodiode mounted on the LED-ID reader in the LED-ID code data transmission system combined with the LED-ID according to the present invention.
6 is an embodiment of the APD mounted to the LED-ID reader unit in the LED-information code data transmission system combined with the LED-ID according to the present invention.

본 발명은 데이터정보가 인코딩된 정보코드의 형태정보 및 상기 정보코드에 인코딩되지 않은 추가정보를 유·무선 통신망을 통해 송신하는 데이터 서버(100); 다수개의 LED소자가 종횡으로 배열된 판형부재로서, 상기 데이터 서버로부터 상기 형태정보를 수신하여 상기 형태정보에 저장된 정보코드의 패턴과 매칭되도록 LED소자를 선택적으로 발광시켜 정보코드를 현시하고, 상기 데이터 서버로부터 수신한 추가정보를 상기 LED소자의 발광신호를 LED-ID 태그로 이용하여 송신하는 LED패널(200); 및 상기 LED패널에 현시된 정보코드를 촬영하여 상기 정보코드를 데이터정보로 디코딩하고, LED-ID 리더부(310)가 장착되어 있어 상기 LED소자의 발광을 통하여 송신되는 추가정보를 수신하는 모바일단말기(300);를 포함하여 구성되어, 상기 모바일단말기가 상기 LED패널로부터 정보코드의 데이터정보뿐만 아니라 LED-ID태그로 전달되는 추가정보까지 이중으로 정보를 수신하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 제공한다.The present invention provides a data server for transmitting form information of an information code encoded with data information and additional information not encoded in the information code through a wired / wireless communication network; A plate member having a plurality of LED elements arranged vertically and horizontally, receiving the shape information from the data server and selectively emitting the LED elements so as to match the pattern of the information code stored in the shape information, and expressing the information code. LED panel 200 for transmitting the additional information received from the server using the light emitting signal of the LED device as an LED-ID tag; And photographing the information code displayed on the LED panel to decode the information code into data information, and equipped with an LED-ID reader 310 to receive additional information transmitted through light emission of the LED device. 300, wherein the mobile terminal combines the LED-ID, characterized in that the mobile terminal receives information from the LED panel as well as data information of the information code in addition to the additional information delivered in the LED-ID tag. Provides LED information code data transmission system.

또한 본 발명은 상기 LED패널은 상기 데이터 서버로부터 수신한 복수 개의 정보코드를 미리 설정된 순서 또는 시간에 따라 반복적으로 현시하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.In another aspect, the present invention provides an LED-information code data transmission system with a LED-ID, characterized in that the LED panel repeatedly displays a plurality of information codes received from the data server in a predetermined order or time. .

또한 본 발명은 상기 데이터 서버가 상기 복수 개의 정보코드를 송신하는 경우에 각 정보코드별로 추가정보를 함께 송신하되, 상기 LED패널에서 현시되는 정보코드에 따라 그에 대응되는 추가정보를 상기 LED-ID 리더부로 송신함으로써, 현시되는 정보코드가 변경되면 송신되는 추가정보의 내용도 변경되는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.In addition, the present invention, when the data server transmits the plurality of information codes, the additional information for each information code is transmitted together, the corresponding information according to the information code manifested in the LED panel the LED-ID reader By transmitting to the negative, it provides a LED-information code data transmission system with a LED-ID, characterized in that the content of the additional information to be transmitted is also changed when the information code displayed changes.

또한 본 발명은 상기 추가정보는 위치정보의 데이터를 포함하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.In addition, the present invention provides the LED-information code data transmission system with the LED-ID, wherein the additional information includes the data of the location information.

또한 본 발명은 상기 데이터서버는 상기 LED패널의 LED소자 발광의 깜박임(Blinking) 속도를 제어하되 상기 정보코드와 매칭되는 패턴으로 발광된 LED소자만 제어하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.In another aspect, the present invention, the data server controls the blinking (Blinking) speed of the LED device light emission of the LED panel, LED-ID combined, characterized in that for controlling only the LED device that is emitted in a pattern matching the information code Provides information code data transmission system.

또한 본 발명은 상기 LED-ID 리더부는 PIN(Positive-Intrinsic-Negative)포토다이오드를 이용하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.In another aspect, the present invention provides a LED-ID code data transmission system with a LED-ID, characterized in that using a positive-intrinsic-negative (PIN) photodiode.

또한 본 발명은 상기 LED-ID 리더부는 APD(Avalanche Photodiode)를 이용하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템을 함께 제공한다.
In another aspect, the present invention provides a LED-ID code data transmission system with a LED-ID, characterized in that the LED-ID reader unit uses an Avalanche Photodiode (APD).

[도 1]은 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템의 대략적인 모식도이다. 이를 참고하여 이하에서는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템을 각 구성요소별로 상세히 설명하고자 한다.
1 is a schematic diagram of an LED-information code data transmission system as well as an LED-ID according to the present invention. With reference to this it will be described in detail for each component of the LED-information code data transmission system combined with the LED-ID according to the present invention.

1. 데이터 서버(100)1. Data Server (100)

상기 데이터 서버(100)는 저장되어 있는 데이터정보 중 상기 LED패널에 현시하여 나타내고자 하는 데이터정보를 하나 이상을 선별해서 정보코드를 생성시키는 역할을 담당한다. 상기 데이터서버(100)는 상기 데이터정보를 디코딩하여 정보코드를 생성시키고, 상기 LED패널(200)의 전면에 상기 정보코드의 형태가 현시될 수 있도록 각 LED발광소자의 점등 또는 점멸을 결정한다. The data server 100 is responsible for generating an information code by selecting one or more data information to be displayed and displayed on the LED panel among the stored data information. The data server 100 decodes the data information to generate an information code, and determines the lighting or blinking of each LED light emitting device so that the form of the information code is displayed on the front surface of the LED panel 200.

상기 데이터서버는 데이터정보를 미리 저장해 둘 수도 있으며, 실시간으로 현시요청을 받아 즉시 LED패널로 송신할 수도 있다. 하나 이상의 정보코드를 송신하는 경우에는 상기 정보코드의 현시 순서를 정하여 두거나, 정보코드의 현시가 변경되는 간격을 설정하여 해당 정보를 함께 송신하는 것이 바람직하다. The data server may store the data information in advance, or may receive the present request in real time and immediately transmit it to the LED panel. In the case of transmitting one or more information codes, it is preferable to set the order of appearance of the information codes or to set the interval at which the information codes are changed and transmit the information together.

또한 상기 데이터서버는 상기 정보코드로 인코딩되는 데이터정보 이외에 LED-ID기술을 이용하여 제공될 추가정보를 상기 LED패널로 송신할 수도 있으며, 사전 또는 사후에 추가적으로 송신할 수도 있다.
In addition, the data server may transmit additional information to be provided by using the LED-ID technology to the LED panel in addition to the data information encoded by the information code, and may further transmit before or after.

2. LED패널(200)2. LED Panel (200)

상기 LED패널(200)은 다수개의 LED발광소자가 패널 전면에 종횡으로 배열되어 있어 상기 데이터서버(100)에서 송신되는 정보코드의 형태정보에 맞게 패턴을 형성할 수 있도록 상기 LED소자를 선택적으로 점등 또는 점멸시킨다.The LED panel 200 selectively turns on the LED device so that a plurality of LED light emitting devices are arranged vertically and horizontally in front of the panel to form a pattern according to the shape information of the information code transmitted from the data server 100. Or flashes.

상기 정보코드의 현시순서나 현시간격에 관한 정보가 수신된 것이 있는 경우에는 그에 따라 각 정보코드의 현시를 제어할 수 있으나, 그러한 정보가 수신되지 않는 경우에는 상기 LED패널의 제어부에서 임의적으로 순서 및 간격을 설정한다.
In the case where the information about the present order of the information code or the information about the present time interval is received, the present information code can be controlled accordingly. However, when such information is not received, the control unit of the LED panel can arbitrarily determine the order and Set the interval.

또한 상기 LED패널(200)은 상기 LED소자 자체가 LED-ID태그로 역할하도록 구성할 수 있다. LED-ID 기술은 LED 조명에서 발생되는 가시광을 이용하여 정보전달기능을 수행하도록 하는 광통신기술의 일종으로 RFID보다 개선된 진보기술에 해당한다. 이는 LED를 이용하여 특정 상품, 물품 등의 정보를 구별하기 위해 사용되는 경우가 많다. 특히 LED-ID 기술은 가시광선을 이용하므로 정보의 전송가능범위를 인지 또는 예상할 수 있어 상기 모바일단말기(300)의 접근정도를 이용자가 효율적으로 조정할 수 있다. In addition, the LED panel 200 may be configured such that the LED device itself serves as an LED-ID tag. LED-ID technology is a kind of optical communication technology that performs information transfer function using visible light generated from LED lighting, and is an advanced technology improved than RFID. This is often used to distinguish information of a specific product, article, etc. using the LED. In particular, since the LED-ID technology uses visible light, the transmission range of information can be recognized or predicted so that the user can adjust the access degree of the mobile terminal 300 efficiently.

상기 LED소자에서는 상기 정보코드에 저장되지 않은 정보, 즉 추가정보가 송출될 수 있는데, 이는 상기 모바일단말기(300)의 LED-ID 리더부에서 감지하여 수신하게 된다. 상기 추가정보는 상품을 식별하기 위한 식별정보나 물품의 위치정보 등 다양한 정보를 포함할 수 있다. 상기 LED소자의 정보송신은 상기 LED패널에 상기 정보코드가 현시될 때 추가적으로 이루어지는데, 해당 추가정보와 매핑되는 깜박거림(Blinking) 패턴을 정하여 상기 LED소자의 점등을 제어함으로써 상기 추가정보를 송출하는 역할을 한다. The LED device may transmit information not stored in the information code, that is, additional information, which is detected by the LED-ID reader of the mobile terminal 300 and received. The additional information may include various information such as identification information for identifying a product or location information of the article. The information transmission of the LED device is additionally performed when the information code is displayed on the LED panel. The additional information is transmitted by controlling the lighting of the LED device by setting a blinking pattern mapped to the additional information. Play a role.

[도 2]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템의 실시예이다. 이를 참고하면 정보코드의 발광과 LED-ID기술을 통하여 정보를 송수신하는 두가지 정보제공의 방식을 확인할 수 있다.
2 is an embodiment of an LED-information code data transmission system as well as an LED-ID according to the present invention. Referring to this, two types of information providing method of transmitting and receiving information through light emitting information code and LED-ID technology can be confirmed.

3. 모바일단말기(300)3. Mobile terminal 300

상기 모바일단말기(300)는 유·무선통신회선을 사용할 수 있는 단말기를 모두 포함한다. 노트북, 데스크탑뿐만 아니라 3G 또는 WIFI가 가능한 스마트폰을 포함하는 바, 특히 LED패널이 일반적으로 건물 외벽과 같이 노출된 장소에 설치되어 다수인에게 일정 정보를 제공하고자 하는 목적으로 사용되는 경우가 많으므로, 단말기라 하더라도 휴대성이 뛰어나고, 상기 LED패널에 현시되는 정보코드를 촬영할 수 있고, LED-ID 태그를 감지할 수 있는 영역에 접근가능한 조건을 만족하는 모바일단말기(300)가 바람직하다. The mobile terminal 300 includes both terminals capable of using wired / wireless communication lines. This includes not only laptops and desktops but also 3G or WIFI-enabled smartphones. Especially, LED panels are generally installed in exposed places such as exterior walls of buildings, so they are often used to provide schedule information to many people. Even if the terminal is excellent in portability, the mobile terminal 300 that satisfies the conditions that can photograph the information code displayed on the LED panel, accessible to the area to detect the LED-ID tag is preferred.

특히 상기 모바일단말기(300)는 상기 정보코드가 현시된 LED패널을 촬영하여 수집한 정보코드의 이미지를 분석하여 디코딩할 수 있는 어플리케이션 또는 프로그램이 장착되어 있는 것이 바람직하다. 상기 이미지는 디코딩되어 데이터정보로 변환저장되는 방식으로, QR코드가 정보코드의 대표적 예로 볼 수 있다.
In particular, the mobile terminal 300 is preferably equipped with an application or a program capable of analyzing and decoding the image of the information code collected by photographing the LED panel, the information code is manifested. The image is decoded and converted into data information, and the QR code is a representative example of the information code.

또한 상기 모바일단말기는 LED-ID 리더부(310)가 장착되어 있는 것을 특징으로 한다. 상기 LED-ID 리더부(310)는 상기 LED패널에서 송신되는 광통신(VLC)을 검출하기 위한 센서를 포함하여 구성된다. 이는 포토다이오드, 즉 반도체의 접합부에 빛이 조사되면 전자와 정공의 흐름이 생겨 기전력이 발생되는 광기전력 효과를 이용한 소자로 구성된다. In addition, the mobile terminal is characterized in that the LED-ID reader 310 is mounted. The LED-ID reader 310 includes a sensor for detecting optical communication (VLC) transmitted from the LED panel. This is composed of a device using a photovoltaic effect that generates electromotive force by the flow of electrons and holes when light is irradiated to the junction of the photodiode, that is, the semiconductor.

특히 PN포토다이오드의 동작원리로는 입사광의 에너지가 반도체의 공핍증 전계에 의해서 정공은 P형으로, 전자는 N형으로 이동해 분리되고 P형은 정(+)으로 N형은 부(-)로 대전된다. 이 양단을 결선하면 P형에서 결선을 통하여 N형으로 전류가 흐르고 빛이 조사되고 있는 동안은 외부 전원없이 전류가 흐를 수 있게 된다. Particularly, the operation principle of PN photodiode is that the energy of incident light is transferred to P-type, electrons are moved to N-type and separated by depletion electric field of semiconductor, P-type is positive and N-type is negative. It is charged. If both ends are connected, current flows from P type to N type through wiring and current can flow without external power while light is being irradiated.

광통신용 광검출을 위한 센서는 PIN(Positive-Intrinsic-Negative), APD(Avalanche-Photodiode) 등을 이용할 수 있다. PIN 포토다이오드는 상기 PN포토다이오드의 단점을 개선하기 위해 Intrinsic 영역을 두고 있다. [도 5]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 LED-ID 리더부에 장착되는 PIN포토다이오드의 실시예이다. 이에 의하면 공핍층(Intrinsic)에서 흡수되는 광량이 증가하여 응답도와 응답속도가 높아지는 효과가 있음을 추론할 수 있다.
Sensors for optical communication optical detection may use a positive-intrinsic-negative (PIN), an avalanche-photodiode (APD), or the like. The PIN photodiode has an intrinsic region to improve the disadvantage of the PN photodiode. 5 is an embodiment of a PIN photodiode mounted on the LED-ID reader in the LED-ID code data transmission system combined with the LED-ID according to the present invention. According to this, it can be inferred that the amount of light absorbed by the depletion layer (Intrinsic) is increased to increase the response and response speed.

또한 상기 LED-ID 리더부에 APD(Avalanche Photodiode)를 장착하여 이용할 수 있는데, APD는 흡수영역과 이득영역을 구분하여 에벌란치 효과에 의해 전류를 급증시키는 효과가 있다. [도 6]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 LED-ID 리더부에 장착되는 APD의 실시예이다. 이를 참고하면 흡수영역에서 입사광을 흡수하여 1차 전자-정공을 생성하고, 전자는 PN+접합으로 드리프트하여 이득영역의 강한 전계에 의하여 충격이온화가 발생되어 2차 전자-정공이 생성되고 이 때 에벌란치 효과에 의하여 전류가 급증하게 된다.
In addition, an APD (Avalanche Photodiode) may be mounted to the LED-ID reader to use the APD, which distinguishes the absorption region from the gain region and increases the current by the avalanche effect. 6 is an embodiment of the APD mounted to the LED-ID reader unit in the LED-information code data transmission system combined with the LED-ID according to the present invention. Referring to this, a primary electron-hole is generated by absorbing incident light in an absorption region, and electrons drift to a PN + junction to generate ionization by impact ionization by a strong electric field in a gain region. The current increases rapidly due to the value effect.

[도 3]은 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템에서 위치정보가 함께 송신되어 현시되는 모습의 실시예이다. 이를 참고하면 상기 추가정보가 위치정보에 관한 것일 경우에는 상기 정보코드를 통하여 이벤트, 광고등의 내용을 제공하고, 상기 추가정보를 통하여 해당 이벤트의 위치를 제공하는 등 정보를 분산시켜 전송시키는 실시예를 확인할 수 있다.
Figure 3 is an embodiment of the appearance is shown by transmitting the position information together in the LED-information code data transmission system combined with LED-ID according to the present invention. Referring to this, when the additional information is about location information, the information code provides an event, an advertisement, and the like through the information code, and the information is distributed and transmitted by providing the location of the corresponding event through the additional information. You can check.

[도 4]는 본 발명에 따른 LED-ID를 겸한 LED-정보코드 데이터 전송시스템이 실내에서 구현되는 경우의 실시예이다. 상기 구성요소에 의하여 구현되는 [도 4]를 참고하면 다음과 같은 실시예를 볼 수 있다. 4 is an embodiment when the LED-ID code data transmission system that combines the LED-ID according to the present invention is implemented indoors. Referring to [FIG. 4] implemented by the above components, the following embodiments can be seen.

먼저 상기 데이터서버(100)가 데이터정보를 정보코드로 변화하여 생성시킨 정보코드의 형태에 따라 상기 LED패널의 LED소자별로 점등과 점멸을 결정하여 실내 또는 실외에 설치되어 있는 LED패널에 정보를 송신하여 상기 LED패널에 현시하는 과정이 있고, 이와 동시에 상기 데이터서버(100)로부터 상기 정보코드 이외에 추가정보를 수신하여 점등된 LED소자가 LED-ID 태그의 역할을 수행하여, 상기 LED소자로부터 송출되는 가시광선을 이용하여 상기 추가정보를 상기 모바일단말기(300)의 LED-ID 리더부(310)로 송신하는 과정으로 진행된다. 상기 추가정보는 실내 매장의 상품들의 정보나 물품 태그정보 등의 식별정보를 포함하는 것이 바람직하다.
First, the data server 100 determines the lighting and blinking of each LED element of the LED panel according to the form of the information code generated by changing the data information into the information code and transmits the information to the LED panel installed indoors or outdoors. There is a process to be displayed on the LED panel, and at the same time the LED device is turned on by receiving additional information in addition to the information code from the data server 100 serves as an LED-ID tag, which is sent out from the LED device The additional information is transmitted to the LED-ID reader 310 of the mobile terminal 300 by using visible light. The additional information may preferably include identification information such as information on goods of the indoor store or item tag information.

본 발명은 위에서 언급한 바와 같이 첨부된 도면과 관련하여 설명되었으나 본 발명의 요지를 벗어남이 없는 범위 내에서 다양한 수정 및 변형이 가능하며, 다양한 분야에서 사용 가능하다. 따라서 본 발명의 청구범위는 이건 발명의 진정한 범위 내에 속하는 수정 및 변형을 포함한다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the invention. Therefore, the claims of the present invention include modifications and variations that fall within the true scope of the invention.

100 : 데이터 서버 200 : LED패널
300 : 모바일단말기 310 : LED-ID 리더부
100: data server 200: LED panel
300: mobile terminal 310: LED-ID reader unit

Claims (7)

데이터정보가 인코딩된 정보코드의 형태정보 및 상기 정보코드에 인코딩되지 않은 추가정보를 유·무선 통신망을 통해 송신하는 데이터 서버(100);
다수개의 LED소자가 종횡으로 배열된 판형부재로서, 상기 데이터 서버로부터 상기 형태정보를 수신하여 상기 형태정보에 저장된 정보코드의 패턴과 매칭되도록 LED소자를 선택적으로 발광시켜 정보코드를 현시하고, 상기 데이터 서버로부터 수신한 추가정보를 상기 LED소자의 발광신호를 LED-ID 태그로 이용하는 LED패널(200); 및
상기 LED패널에 현시된 정보코드를 촬영하여 상기 정보코드를 데이터정보로 디코딩하고, LED-ID 리더부(310)가 장착되어 있어 상기 LED-ID 리더부를 통해 상기 LED소자의 발광신호에 기록된 추가정보를 감지하는 모바일단말기(300);를 포함하여 구성되어,
상기 모바일단말기가 상기 LED패널로부터 정보코드의 데이터정보뿐만 아니라 LED-ID태그로 전달되는 추가정보까지 이중으로 정보를 수신하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
A data server 100 for transmitting the form information of the information code encoded with the data information and the additional information not encoded in the information code through a wired / wireless communication network;
A plate member having a plurality of LED elements arranged vertically and horizontally, receiving the shape information from the data server and selectively emitting the LED elements so as to match the pattern of the information code stored in the shape information, and expressing the information code. LED panel 200 using the additional information received from the server using the light emitting signal of the LED device as an LED-ID tag; And
The information code displayed on the LED panel is photographed to decode the information code into data information, and an LED-ID reader 310 is mounted to record the information code recorded in the light emitting signal of the LED device through the LED-ID reader. It is configured to include; mobile terminal 300 for detecting information;
LED-ID code data transmission system with a LED-ID, characterized in that the mobile terminal receives information from the LED panel as well as data information of the information code, as well as additional information delivered in the LED-ID tag double.
제1항에서,
상기 LED패널은 상기 데이터 서버로부터 수신한 복수 개의 정보코드를 미리 설정된 순서 또는 시간에 따라 반복적으로 현시하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
In claim 1,
The LED panel is an LED-ID code data transmission system with a LED-ID, characterized in that to repeatedly display a plurality of information codes received from the data server in a predetermined order or time.
제2항에서
상기 데이터 서버가 상기 복수 개의 정보코드를 송신하는 경우에 각 정보코드별로 추가정보를 함께 송신하되, 상기 LED패널에서 현시되는 정보코드에 따라 그에 대응되는 추가정보를 상기 LED-ID 리더부로 송신함으로써,
현시되는 정보코드가 변경되면 송신되는 추가정보의 내용도 변경되는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
In paragraph 2
When the data server transmits the plurality of information codes, by transmitting additional information for each information code together, by transmitting additional information corresponding to the information code displayed on the LED panel to the LED-ID reader unit,
LED-ID code data transmission system with an LED-ID, characterized in that if the information code displayed changes the content of the additional information to be transmitted.
제1항에서,
상기 추가정보는 위치정보의 데이터를 포함하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
In claim 1,
The additional information LED-ID code data transmission system, characterized in that it comprises the data of the location information.
제1항에서,
상기 데이터서버는 상기 LED패널의 LED소자 발광의 깜박임(Blinking) 속도를 제어하되 상기 정보코드와 매칭되는 패턴으로 발광된 LED소자만 제어하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
In claim 1,
The data server controls the blinking speed of the LED device light emission of the LED panel, but controls only the LED devices that emit light in a pattern matching the information code. system.
제1항에서,
상기 LED-ID 리더부는 PIN(Positive-Intrinsic-Negative)포토다이오드를 이용하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.
In claim 1,
And the LED-ID reader unit uses a positive-intrinsic-negative (PIN) photodiode.
제1항에서,
상기 LED-ID 리더부는 APD(Avalanche Photodiode)를 이용하는 것을 특징으로 하는 LED-ID를 겸한 LED-정보코드 데이터 전송 시스템.

In claim 1,
The LED-ID reader unit using the LED-ID code, characterized in that the use of APD (Avalanche Photodiode).

KR1020120001473A 2012-01-05 2012-01-05 Led-information code data system with led-id KR101229523B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120001473A KR101229523B1 (en) 2012-01-05 2012-01-05 Led-information code data system with led-id

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120001473A KR101229523B1 (en) 2012-01-05 2012-01-05 Led-information code data system with led-id

Publications (1)

Publication Number Publication Date
KR101229523B1 true KR101229523B1 (en) 2013-02-04

Family

ID=47898842

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120001473A KR101229523B1 (en) 2012-01-05 2012-01-05 Led-information code data system with led-id

Country Status (1)

Country Link
KR (1) KR101229523B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023185461A1 (en) * 2022-03-27 2023-10-05 深圳市美矽微半导体有限公司 Flexible screen and display apparatus comprising same

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007058296A (en) 2005-08-22 2007-03-08 Fujifilm Holdings Corp Information providing system
KR100867422B1 (en) 2007-11-15 2008-11-06 삼성전기주식회사 System for acquiring imformation with camera and method thereof
KR101054051B1 (en) 2011-01-04 2011-08-03 에이큐 주식회사 A smart advertising information offer system
KR20110109993A (en) * 2010-03-29 2011-10-06 경희대학교 산학협력단 Led-identification system and information providing method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007058296A (en) 2005-08-22 2007-03-08 Fujifilm Holdings Corp Information providing system
KR100867422B1 (en) 2007-11-15 2008-11-06 삼성전기주식회사 System for acquiring imformation with camera and method thereof
KR20110109993A (en) * 2010-03-29 2011-10-06 경희대학교 산학협력단 Led-identification system and information providing method thereof
KR101054051B1 (en) 2011-01-04 2011-08-03 에이큐 주식회사 A smart advertising information offer system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023185461A1 (en) * 2022-03-27 2023-10-05 深圳市美矽微半导体有限公司 Flexible screen and display apparatus comprising same

Similar Documents

Publication Publication Date Title
US10564253B2 (en) Methods and apparatus for light-based positioning and navigation
US9437086B2 (en) Systems and apparatus for the light-based communication of service orders and personal objects identification
CN104115563A (en) Wavelength sensing lighting system and associated methods for national security application
US10177848B1 (en) Visual light communication using starburst or haze of the light source
CN109691232A (en) Lamp with encoded light function
KR101222470B1 (en) Data Providing System by LED Infomation Code
CN109791216A (en) By means of flood positioning and the signal sending of intelligent lighting
Vieira et al. Light-emitting diodes aided indoor localization using visible light communication technology
KR101229523B1 (en) Led-information code data system with led-id
Huang et al. Indoor positioning method based on metameric white light sources and subpixels on a color image sensor
CN106209230A (en) A kind of visible light communication system identifying striations code based on APP
Vieira et al. Coupled data transmission and indoor positioning by using transmitting trichromatic white LEDs and a SiC optical MUX/DEMUX mobile receiver
CN108535691B (en) Indoor positioning system and method based on visible light communication
KR101229519B1 (en) Data Providing Method by LED Infomation Code
Le-Minh et al. Short-range visible light communications
Lovisolo et al. Visible Light‐Based Communication and Localization
Mahajan et al. Design and Development of Li-Fi Visitor Tracker System
Kumar et al. Visible light communication
Janjua et al. Oslo: Optical sensor localization through mesh networked cameras
Shingala Li-Fi application using ambient light sensor
Priyadharshini et al. Visible Light Communication Appliances Used in Indoor Communication
Habibur A Wide Range Visible Light Indoor Positioning System Using Mobile CMOS Image Sensor
Vieira et al. Visible light communication and indoor positioning using a-SiCH device as receiver
Vieira et al. A fine-grained visible light communication position detection system
Vieira et al. Indoor wayfinding using visible light communication

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160222

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170119

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180326

Year of fee payment: 6