KR101830109B1 - The apparatus of visible light communications for automatic driving object indoor - Google Patents

The apparatus of visible light communications for automatic driving object indoor Download PDF

Info

Publication number
KR101830109B1
KR101830109B1 KR1020170085211A KR20170085211A KR101830109B1 KR 101830109 B1 KR101830109 B1 KR 101830109B1 KR 1020170085211 A KR1020170085211 A KR 1020170085211A KR 20170085211 A KR20170085211 A KR 20170085211A KR 101830109 B1 KR101830109 B1 KR 101830109B1
Authority
KR
South Korea
Prior art keywords
visible light
data
unit
led
signal
Prior art date
Application number
KR1020170085211A
Other languages
Korean (ko)
Inventor
차재상
Original Assignee
서울과학기술대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울과학기술대학교 산학협력단 filed Critical 서울과학기술대학교 산학협력단
Priority to KR1020170085211A priority Critical patent/KR101830109B1/en
Application granted granted Critical
Publication of KR101830109B1 publication Critical patent/KR101830109B1/en

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0242Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using non-visible light signals, e.g. IR or UV signals
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/116Visible light communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N5/335

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Optical Communication System (AREA)

Abstract

A visible light communication indoor self-driving device based on a solid state imaging device comprises: a data transmitting part (100), a data receiving part (200), a visible light transmitting module (300) of smart LED ceiling lamp type, a visible light receiving module (400) of indoor self-driving object type, a smart control module (500). The object of the present invention is to provide a visible light communication indoor self-driving device based on a solid state imaging device for activating an indoor self-driving navigation market.

Description

고체촬상소자 기반 가시광통신 실내자율주행장치{THE APPARATUS OF VISIBLE LIGHT COMMUNICATIONS FOR AUTOMATIC DRIVING OBJECT INDOOR}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a self-

본 발명에서는 LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방사시키고 고체촬상 소자(카메라 이미지센서)를 내장한 단말기를 통해 수신하여, LED 천장등과 가시광수신섹터존에 위치한 실내자율주행객체를 가시광통신을 통해 이동제어시킬 수 있는 고체촬상소자 기반 가시광통신 실내자율주행장치에 관한 것이다.In the present invention, an LED ceiling light is emitted, a visible light LED ID data communication signal including positional information of a desired positioning point and multi-information is radiated together, and is received through a terminal having a solid-state image sensor (camera image sensor) The present invention relates to an autonomous navigation system for a visible light communication system based on a solid-state image sensor capable of controlling movement of an indoor autonomous traveling object located in an LED ceiling or the like in a visible light receiving sector zone through visible light communication.

실내 환경에 운용되는 실내주행객체(일예 : 로봇, 지게차)는 GPS 신호의 수신제약으로 위치 추정에 어려움이 따른다.Indoor travel objects (eg, robots, forklifts) operating in an indoor environment have difficulty in location estimation due to restrictions on receipt of GPS signals.

이는 현재 위치를 시작으로 목표 지점을 찾아가는 경로 계획에 제약 조건으로 작용한다.It acts as a constraint on the path planning to get to the target point starting from the current position.

이러한 문제점을 해결하기 위해 RF(Radio Frequency), 이미지에 기반을 둔 방법들이 제안되었다.To solve these problems, methods based on radio frequency (RF) and images have been proposed.

하지만, RF 기반형 실내주행객체는 신호의 간섭, 외란의 영향으로 mm단위의 정밀한 위치정보를 얻기가 어려웠다.However, it is difficult to obtain precise position information of mm based on RF interference due to signal interference and disturbance.

또한, 이미지기반형 실내주행객체는 높은 정밀도를 가지지만 높은 프로세싱 능력과 비용이 비싼 문제점이 있었다.In addition, the image-based indoor traveling objects have high precision but high processing ability and high cost.

그리고, 특정공간에 복수개의 실내주행객체가 위치해 있을 경우에, 이웃하는 실내주행객체끼리 부딪히고, 주행을 방해시켜 특정명령이벤트를 제대로 수행하지 못해, 실내자율주행시장이 점점 위축되는 문제점이 있었다.In addition, when a plurality of indoor traveling objects are located in a specific space, neighboring indoor traveling objects collide with each other and interfere with traveling, thereby failing to properly perform specific command events, and the indoor autonomous traveling market is gradually shrunk.

국내공개특허공보 제10-2012-0080055호Korean Patent Publication No. 10-2012-0080055

상기의 문제점을 해결하기 위해 본 발명에서는 LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방사시켜, LED 천장등과 가시광수신섹터존에 위치한 실내자율주행객체를 가시광통신을 통해 이동제어시킬 수 있고, 복수개의 실내자율주행객체가 구성되더라도, 충돌사고방지를 향상시킬 수 있으며, 기존의 실내자율주행객체에 실내자율주행객체형 가시광수신모듈만을 탈부착식으로 설치할 수 있고, 정지상태가 아닌 이동중에도 실시간으로 가시광통신을 수행할 수 있어, 실내자율주행시장을 활성화시킬 수 있는 고체촬상소자 기반 가시광통신 실내자율주행장치를 제공하는데 그 목적이 있다. In order to solve the above problems, in the present invention, an LED ceiling light is emitted, and a visible light LED ID data communication signal including position information of a desired positioning point and multi-information is radiated together to form an LED ceiling light and a visible light receiving sector zone It is possible to improve the prevention of a collision accident even if a plurality of indoor autonomous traveling objects are constituted. In addition, it is possible to improve the indoor autonomous traveling object in which the indoor autonomous traveling object type visible light receiving module And it is an object of the present invention to provide an autonomous traveling device for a visible light communication indoor unit based on a solid-state image pickup device which can perform visible light communication in real time even when moving, not in a stationary state, .

상기의 목적을 달성하기 위해 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치는According to an aspect of the present invention, there is provided an autonomous navigation apparatus for visible light communication in a solid-state imaging device,

LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방출시켜, LED 천장등과 1m~10m 근거리에 위치한 실내자율주행객체쪽으로 위치정보와 멀티정보를 1:1 타켓방식으로 가시광통신시키도록 구성됨으로서 달성된다.LED ceiling light is emitted and the visible light ID information data including the location information of the desired positioning point and the multi information is emitted together and the positional information and the multi information of the indoor autonomous traveling object located at a distance of 1m ~ Information is communicated in visible light in a 1: 1 target manner.

보다 구체적으로는, More specifically,

스마트제어모듈로부터 전달받은 가시광 LED ID 데이터를 ASK변조시킨 후, 전원으로 공급되는 220V 데이터을 통하여 데이터를 하이브리드형 스마트 LED 램프가 연결된 데이터수신부로 송신시키는 데이터송신부(100)와,A data transmission unit 100 for ASK-modulating the visible light LED ID data received from the smart control module and transmitting the data to the data receiving unit connected with the hybrid type smart LED lamp through the 220V data supplied from the power source,

데이터을 통해 전달된 AC 220V ASK변조신호를 수신받아 AC 220V ASK변조신호에 포함된 가시광 LED ID 데이터를 복구시킨 후, 복구시킨 가시광 LED ID 데이터를 AC 220V 전원과 함께, 출력단 일측에 연결된 스마트 LED 천장등형 가시광송신모듈쪽으로 전달시키는 데이터수신부(200)와,Receiving the AC 220V ASK modulated signal transmitted through the data, restoring the visible light LED ID data included in the AC 220V ASK modulated signal, and then connecting the recovered visible light LED ID data to the AC 220V power source and the smart LED ceiling light Type visible light transmission module,

데이터수신부와 연결되어, LED 천장등 내부에 위치되고, 데이터수신부로부터 가시광 LED ID 데이터를 전달받아, LED 광원을 사용하여 가시광 LED ID 데이터가 포함된 신호광을 주변의 실내자율주행객체쪽으로 방사시키는 스마트 LED 천장등형 가시광송신모듈(300)과,A smart LED that is connected to the data receiving unit and is located inside the LED ceiling or the like and receives the visible light LED ID data from the data receiving unit and emits the signal light including the visible light LED ID data to the surrounding self- A ceiling light type visible light transmission module 300,

실내자율주행객체 내부에 모듈화되어 탈부착식으로 설치되고, LED 천장등과 가시광수신섹터존에 위치되면, LED 천장등형 가시광송신모듈을 통해 전송된 가시광 ID데이터 통신신호를 수신받아, 복조를 거쳐 가시광 LED ID 데이터 통신신호로 복원시켜 실내자율주행객체를 이동제어시키면서, 화면상에 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보를 표출시키는 실내자율주행객체형 가시광수신모듈(400)과,When the LED ceiling or the like is located in the visible light receiving sector zone, the visible light ID data communication signal transmitted through the visible light transmitting module of the LED ceiling light is received and demodulated, An indoor autonomous traveling object type visible light receiving module 400 for displaying the position information and the multi information contained in the visible light LED ID data communication signal on the screen while moving the indoor autonomous traveling object by restoring to the LED ID data communication signal,

데이터송신부를 위치별, 공간별로 그룹화시킨 상태에서, 그룹화된 존(Zone)에 위치한 복수개의 데이터송신부와 연결되어, 특정공간에 위치한 데이터송신부에 1:1로 측위지점의 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)가 포함된 고유의 가시광 LED ID 데이터 통신신호를 설정시키는 스마트제어모듈(500)로 구성되는 것을 주요 특징으로 한다.The data transmission unit is connected to a plurality of data transmission units located in a grouped zone in a state where the data transmission units are grouped by location and space so that position information of the positioning point and multi information And a smart control module 500 for setting a unique visible light LED ID data communication signal including control information, direction and speed control information, and object loading and ejection information.

이상에서 설명한 바와 같이, 본 발명에서는 As described above, in the present invention,

첫째, LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방사시켜, LED 천장등과 가시광수신섹터존에 위치한 실내자율주행객체를 가시광통신을 통해 이동제어시킬 수 있어, 주행율과 특정명령수행율을 기존에 비해 80% 향상시킬 수 있다.First, the LED ceiling light is emitted. At the same time, the visible light LED ID data communication signal including the position information of the desired positioning point and the multi-information is radiated together so that the indoor autonomous traveling object located in the LED ceiling and the visible light receiving sector zone can be visibly transmitted So that the traveling rate and the specific command execution rate can be improved by 80%.

둘째, 복수개의 실내자율주행객체가 구성되더라도, 장애물감지와 회피모드를 통해, 충돌사고방지를 70% 향상시킬 수 있다.Second, even if a plurality of indoor autonomous traveling objects are constructed, the collision avoidance can be improved by 70% through the obstacle detection and avoidance modes.

셋째, 기존의 실내자율주행객체에 실내자율주행객체형 가시광수신모듈만을 탈부착식으로 설치하면 되므로, 호환성이 좋아 설치비용과 설치시간을 기존에 비해 70% 줄일 수 있다.Third, only the indoor autonomous moving object type visible light receiving module can be installed in the existing indoor autonomous traveling object in a detachable manner, so that the installation cost and installation time can be reduced by 70%.

넷째, 화소병렬분해능부와 전자제어셔터부를 통해 1kHz~10Mhz의 넓은 주파수범위로 가변시키면서, 30비트~120비트의 가시광데이터용량과, 50kbps~300kbps의 빠른 전송속도를 제공할 수 있어, 정지상태가 아닌 이동중에도 실시간으로 가시광통신을 수행할 수 있고, 이로 인해 실내자율주행시장을 활성화시킬 수 있다.Fourth, it is possible to provide a visible light data capacity of 30 bits to 120 bits and a fast transmission speed of 50 kbps to 300 kbps while varying the wide frequency range from 1 kHz to 10 MHz through the pixel parallel resolution unit and the electronically controlled shutter unit, It is possible to perform visible light communication in real time even on the move, thereby enabling the indoor self-running market to be activated.

도 1은 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치(1)의 구성요소를 도시한 구성도,
도 2는 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치(1)의 구성요소를 도시한 사시도,
도 3은 본 발명에 따른 데이터송신부의 구성요소를 도시한 블럭도,
도 4는 본 발명에 따른 데이터수신부의 구성요소를 도시한 블럭도,
도 5는 본 발명에 따른 스마트 LED 천장등형 가시광송신모듈의 구성요소를 도시한 블럭도,
도 6은 본 발명에 따른 스마트 LED 데이터제어모듈의 구성요소를 도시한 블럭도,
도 7은 본 발명에 따른 실내자율주행객체형 가시광수신모듈의 구성요소를 도시한 블럭도,
도 78은 본 발명에 따른 고체촬상소자의 구성요소를 도시한 블럭도,
도 9는 본 발명에 따른 화소병렬분해능부의 구성요소를 도시한 블럭도,
도 10은 본 발명에 따른 화소병렬분해능부가 가시광신호모델링제어부를 통해 추출된 가시광신호데이터를 복수개의 캐패시터를 가지는 버티컬스캐너(Vertical scanner)와 호리잰털스캐너(Horizontal scanner)를 통해 화소병렬구조로 형성되도록 16비트로 고속분해능시키는 것을 도시한 일실시예도,
도 11은 본 발명에 따른 전자제어셔터부에서 화소병렬분해능부를 통해 고속분해능된 화소병렬구조데이터를 수평의 행구조를 x축으로 설정시키고, 수직의 열구조를 y축으로 설정시킨 후, x축 상단부의 첫번째 행/열방향에 복수개의 단위셀을 형성시키고, 그 단위셀에 화소병렬구조데이터 중 "0"신호를 블랙화시키고, "1"신호를 화이트화시켜 "0"과 "1"을 하나의 행/열방향에 연속셀교번스트리밍으로 변환시키면서, x축 상단부에서 y축 하단부방향으로 화소병렬구조데이터를 읽어들이고, 리셋시키는 것을 도시한 일실시예도,
도 12는 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치의 동작과정을 도시한 일실시예도.
Fig. 1 is a configuration diagram showing components of an autonomous travel apparatus 1 for visible light communication based on a solid-state image pickup device according to the present invention,
FIG. 2 is a perspective view showing the constituent elements of the autonomous travel apparatus 1 for visible light communication based on the solid-state image pickup device according to the present invention,
3 is a block diagram illustrating components of a data transmission unit according to the present invention.
4 is a block diagram illustrating components of a data receiving unit according to the present invention.
FIG. 5 is a block diagram illustrating components of a smart LED ceiling light transmission module according to the present invention;
Figure 6 is a block diagram illustrating the components of a smart LED data control module in accordance with the present invention;
FIG. 7 is a block diagram illustrating components of an indoor autonomous moving object type visible light receiving module according to the present invention.
78 is a block diagram showing components of a solid-state imaging device according to the present invention,
9 is a block diagram showing the components of the pixel parallel resolution unit according to the present invention,
10 is a diagram illustrating a pixel parallel resolution structure according to an embodiment of the present invention in which visible light signal data extracted through a visible light signal modeling control unit is formed into a pixel parallel structure through a vertical scanner having a plurality of capacitors and a horizontal scanner In one embodiment that illustrates fast resolution to 16 bits,
FIG. 11 is a graph showing the relationship between the pixel parallel structure data and the pixel parallel structure data of the electronically controlled shutter unit according to the present invention, in which the horizontal row structure is set to the x axis and the vertical column structure is set to the y axis, A plurality of unit cells are formed in the first row / column direction of the upper part, and a "0" signal is blackened in the pixel parallel structure data in the unit cell, and "0" and "1" One embodiment showing that the pixel parallel structure data is read and reset in the direction from the x-axis upper end portion to the y-axis lower end portion while converting into the continuous cell alternating streaming in one row / column direction is also performed,
12 is a view illustrating an operation process of an autonomous travel apparatus in a visible light communication indoor based on a solid-state image pickup device according to an embodiment of the present invention.

먼저, 본 발명에서 설명되는 가시광 통신(Visible Light Communication, VLC)은 사람 눈에 보이는 가시광 영역을 이용한 통신으로서, 백열전구와 형광등과 같은 조명이 발광 다이오드(LED) 조명으로 교체되는 인프라를 사용하여 정보를 전송하고 이를 재이용하는 새로운 정보통신기술을 말한다.First, Visible Light Communication (VLC) described in the present invention is a communication using a visible light region visible to the human eye and uses information such as an incandescent lamp and a fluorescent lamp to be replaced with a light emitting diode (LED) Which is a new information and communication technology that transmits and reuses information.

LED는 고속으로 점멸하는 능력이 있으며, 이 가시광 소자를 사람의 눈에는 느껴지지 않을 정도의 고속으로 점멸시켜서 데이터를 송신할 수가 있다.The LED is capable of blinking at a high speed, and the visible light element can be turned on and off at a speed not felt by the human eye, and data can be transmitted.

상기 가시광 통신 기술의 기본 개념은 데이터를 0과 1의 조합으로 변환해서 정보를 전송한다는 점에서 디지털 통신과 같지만, 데이터가 '0'일 때 빛이 오프되고, '1'일 때 빛이 온되는 점멸이나 밝기에 따른 명암으로 치환해서 송신한다는 점을 이용한 것이다.The basic concept of the visible light communication technology is the same as digital communication in that data is converted into a combination of 0 and 1 to transmit information, but light is turned off when data is' 0 'and light is turned on when data is' It is replaced with a contrast depending on blinking or brightness and transmitted.

또한, 가시광은 780nm에서 380nm의 파장에 해당되고, 가시광 무선통신에서 사용하는 파장을 주파수로 바꾸면,385THz에서 789THz에 해당되며,가청 주파수 대역은 20Hz에서 20,000Hz에 해당한다.Further, visible light corresponds to a wavelength of 380 nm at 780 nm, and when a wavelength used for visible light wireless communication is changed to a frequency, it corresponds to 789 THz at 385 THz, and the audible frequency band corresponds to 20,000 Hz at 20 Hz.

가시광 무선통신은 870-900nm를 사용하는 IrDA와 가장 유사한 파장을 사용하지만, 조명과 동시에 통신을 할 수 있다는 것이 특징이며 장점을 갖는다.Visible light wireless communication uses the wavelength most similar to IrDA using 870-900 nm, but it is characterized by being able to communicate simultaneously with illumination.

이러한 가시광무선통신을 본 발명에서는 LED 천장등에 응용시켜, LED 천장등을 발광시킴과 동시에 원하는 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호로 발생시켜 방출시키도록 구성하는 것을 주요 특징으로 한다.In the present invention, such a visible light wireless communication is applied to an LED ceiling or the like to emit an LED ceiling light and generate and emit visible light LED ID data communication signals including desired location information and multi-information .

또한, 본 발명에서 설명되는 실내자율주행객체는 실내에 위치되어, 가시광통신을 통해 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 수신받아 특정위치로 이동하거나, 특정명령에 따른 구동을 수행시키는 지게차, 로봇을 모두 포함한다.In addition, the indoor autonomous traveling object described in the present invention is located in a room, receives visible light LED ID data communication signals including position information and multi-information through visible light communication, moves to a specific position, A forklift, and a robot.

이하, 본 발명에 따른 바람직한 실시예를 도면을 첨부하여 설명한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.

도 1은 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치(1)의 구성요소를 도시한 구성도에 관한 것이고, 도 2는 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치(1)의 구성요소를 도시한 사시도에 관한 것으로, 이는 LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방사시켜, LED 천장등과 가시광수신섹터존에 위치한 실내자율주행객체를 가시광통신을 통해 이동제어시키도록 구성된다.FIG. 1 is a block diagram showing components of an autonomous travel apparatus 1 for a visible light communication based on a solid-state image pickup device according to the present invention. FIG. 2 is a block diagram of a self- 1), which emits an LED ceiling light and emits a visible light LED ID data communication signal including position information of a desired positioning point and multi-information, and transmits the LED ceiling light and visible light And controls movement of the indoor autonomous traveling object located in the received sector zone through visible light communication.

상기 고체촬상소자 기반 가시광통신 실내자율주행장치(1)는 보다 구체적으로는, 데이터송신부(100), 데이터수신부(200), 스마트 LED 천장등형 가시광송신모듈(300), 실내자율주행객체형 가시광수신모듈(400), 스마트제어모듈(500)로 구성된다.More specifically, the solid-state imaging device-based visible light communication indoor self-traveling device 1 includes a data transmission unit 100, a data reception unit 200, a visible LED ceiling light type visible light transmission module 300, an indoor self- A receiving module 400, and a smart control module 500.

먼저, 본 발명에 따른 데이터송신부(100)에 관해 설명한다.First, a data transmission unit 100 according to the present invention will be described.

상기 데이터송신부(100)는 스마트제어모듈로부터 전달받은 가시광 LED ID 데이터를 유무선통신망을 통해 하이브리드형 스마트 LED 램프가 연결된 데이터수신부로 송신시키는 역할을 한다.The data transmitter 100 transmits the visible light LED ID data received from the smart control module to a data receiving unit through which the hybrid type smart LED lamp is connected through a wired / wireless communication network.

이는 무선통신모듈로서 송신용 블루투스통신모듈(110), 송신용 지그비통신모듈(120), 송신용 WiFi통신모듈(130)이 구성되고, 유선통신모듈로서 BACNET TCP/IP, BACNET MS/TP, Modbus RTU 중 어느 하나가 선택되어 구성된다.As the wireless communication module, a transmitting Bluetooth communication module 110, a transmitting Zigbee communication module 120, and a sending WiFi communication module 130 are constituted. As a wired communication module, BACNET TCP / IP, BACNET MS / TP, Modbus RTU is selected and configured.

상기 송신용 블루투스 통신모듈(110)은 10미터 이내의 초단거리에서 저전력무선연결하여, 정보를 교환시키는 역할을 한다.The transmitting Bluetooth communication module 110 performs low power wireless connection and exchanges information at an extremely short distance within 10 meters.

이는 ISM(Industrial Scientific and Medical) 주파수 대역인 2400~2483.5MHz를 사용한다. 이 중 위아래 주파수를 쓰는 다른 시스템들의 간섭을 막기 위해 2400MHz 이후 2MHz, 2483.5MHz 이전 3.5MHz까지의 범위를 제외한 2402~2480MHz, 총 79개 채널을 쓴다.It uses the Industrial Scientific and Medical (ISM) frequency band of 2400 to 2483.5 MHz. In order to prevent the interference of other systems that use the upper and lower frequencies, we use a total of 79 channels, ranging from 2400MHz to 2MHz and 2483.5MHz to 3.5MHz, except 2402 ~ 2480MHz.

그리고, 시스템간 전파 간섭을 해소하기 위해, 주파수 호핑(Frequency Hopping) 방식으로 구성된다.In addition, in order to eliminate interference between systems, a frequency hopping scheme is used.

주파수 호핑은 많은 수의 채널을 특정 패턴에 따라 빠르게 이동하며 패킷(데이터)을 조금씩 전송하는 기법으로, 본 발명에 서는 79개 채널을 1초당 1600번 호핑하도록 구성된다.Frequency hopping is a technique for rapidly moving a large number of channels according to a specific pattern and transmitting packets (data) little by little. In the present invention, 79 channels are configured to hop 1600 times per second.

상기 송신용 지그비통신모듈(120)은 2.4GHz의 주파수 대역을 이용하여 근거리(10m~75m)에 위치한 스마트 디바이스쪽으로 250kbps의 데이터 전송률을 제공하는 역할을 한다.The transmitting Zigbee communication module 120 provides a data rate of 250 kbps toward a smart device located near (10 m to 75 m) using the frequency band of 2.4 GHz.

상기 송신용 WiFi통신모듈(130)은 무선기술을 접목한 것으로, 고성능 무선통신을 가능하게 하는 무선랜 기술로 구성된다.The transmitting WiFi communication module 130 is composed of a wireless LAN technology that enables high performance wireless communication.

상기 무선랜은 네트워크 구축시 유선을 사용하지 않고 전파나 빛등을 이용하여 네트워크를 구축하는 방식으로서, 2.4GHz의 주파수 대역을 사용한다.The wireless LAN uses a frequency band of 2.4 GHz, which is a method of building a network using radio wave or light without using a wire when constructing a network.

다음으로, 본 발명에 따른 데이터수신부(200)에 관해 설명한다.Next, the data receiving unit 200 according to the present invention will be described.

상기 데이터수신부(200)는 유무선통신망을 통해 전달된 가시광 LED ID 데이터를 스마트 LED 천장등형 가시광송신모듈쪽으로 전달시키는 역할을 한다.The data receiving unit 200 transmits the visible light LED ID data transmitted through the wired / wireless communication network to the smart LED ceiling light type visible light transmission module.

이는 무선통신모듈로서 수신용 블루투스통신모듈(210), 수신용 지그비통신모듈(220), 수신용 WiFi통신모듈(230)이 구성되고, 유선통신모듈로서 BACNET TCP/IP, BACNET MS/TP, Modbus RTU 중 어느 하나가 선택되어 구성된다.The Bluetooth communication module 210, the receiving Zigbee communication module 220 and the receiving WiFi communication module 230 are constituted as a wireless communication module and the BACNET TCP / IP, BACNET MS / TP, Modbus RTU is selected and configured.

상기 수신용 블루투스 통신모듈(210)은 10미터 이내의 초단거리에서 저전력무선연결하여, 정보를 교환시키는 역할을 한다.The receiving Bluetooth communication module 210 performs low power wireless connection at a very short distance within 10 meters to exchange information.

이는 ISM(Industrial Scientific and Medical) 주파수 대역인 2400~2483.5MHz를 사용한다. 이 중 위아래 주파수를 쓰는 다른 시스템들의 간섭을 막기 위해 2400MHz 이후 2MHz, 2483.5MHz 이전 3.5MHz까지의 범위를 제외한 2402~2480MHz, 총 79개 채널을 쓴다.It uses the Industrial Scientific and Medical (ISM) frequency band of 2400 to 2483.5 MHz. In order to prevent the interference of other systems that use the upper and lower frequencies, we use a total of 79 channels, ranging from 2400MHz to 2MHz and 2483.5MHz to 3.5MHz, except 2402 ~ 2480MHz.

그리고, 시스템간 전파 간섭을 해소하기 위해, 주파수 호핑(Frequency Hopping) 방식으로 구성된다.In addition, in order to eliminate interference between systems, a frequency hopping scheme is used.

주파수 호핑은 많은 수의 채널을 특정 패턴에 따라 빠르게 이동하며 패킷(데이터)을 조금씩 전송하는 기법으로, 본 발명에 서는 79개 채널을 1초당 1600번 호핑하도록 구성된다.Frequency hopping is a technique for rapidly moving a large number of channels according to a specific pattern and transmitting packets (data) little by little. In the present invention, 79 channels are configured to hop 1600 times per second.

상기 수신용 지그비통신모듈(220)은 2.4GHz의 주파수 대역을 이용하여 근거리(10m~75m)에 위치한 스마트 디바이스쪽으로 250kbps의 데이터 전송률을 제공하는 역할을 한다.The receiving Zigbee communication module 220 functions to provide a data rate of 250 kbps toward a smart device located near (10 m to 75 m) using the frequency band of 2.4 GHz.

상기 수신용 WiFi통신모듈(230)은 무선기술을 접목한 것으로, 고성능 무선통신을 가능하게 하는 무선랜 기술로 구성된다.The receiving WiFi communication module 230 is composed of a wireless LAN technology that enables high performance wireless communication.

상기 무선랜은 네트워크 구축시 유선을 사용하지 않고 전파나 빛등을 이용하여 네트워크를 구축하는 방식으로서, 2.4GHz의 주파수 대역을 사용한다.The wireless LAN uses a frequency band of 2.4 GHz, which is a method of building a network using radio wave or light without using a wire when constructing a network.

다음으로, 본 발명에 따른 스마트 LED 천장등형 가시광송신모듈(300)에 관해 설명한다.Next, the smart LED ceiling light visible light transmission module 300 according to the present invention will be described.

상기 스마트 LED 천장등형 가시광송신모듈(300)은 데이터수신부와 연결되어, LED 천장등 내부에 위치되고, 데이터수신부로부터 가시광 LED ID 데이터를 전달받아, LED 광원을 사용하여 가시광 LED ID 데이터가 포함된 신호광을 선택변조시켜 주변의 실내자율주행객체쪽으로 방사시키는 역할을 한다.The smart LED ceiling light type visible light transmission module 300 is connected to a data reception unit and is located inside an LED ceiling or the like and receives visible light LED ID data from a data reception unit and receives visible light LED ID data using an LED light source, Modulates the signal light and radiates it to the surrounding autonomous traveling object.

이는 도 5에 도시한 바와 같이, 램프본체(310), 전원공급부(320), 정류회로부(330), LED 천장등(340), 스마트 LED 데이터제어모듈(350)로 구성된다.As shown in FIG. 5, the LED lamp 300 includes a lamp body 310, a power supply unit 320, a rectifier circuit unit 330, an LED ceiling lamp 340, and a smart LED data control module 350.

첫째, 본 발명에 따른 램프본체(310)에 관해 설명한다.First, the lamp body 310 according to the present invention will be described.

상기 램프본체(310)는 각 기기를 외압으로부터 보호하고 지지하는 역할을 한다.The lamp body 310 protects and supports each device from external pressure.

둘째, 본 발명에 따른 전원공급부(320)에 관해 설명한다.Second, the power supply unit 320 according to the present invention will be described.

상기 전원공급부(320)는 램프본체 일측에 연결된 파워라인부를 통해 AC 220V 전원을 전달받아 각 기기에 전원을 공급시키는 역할을 한다.The power supply unit 320 receives AC 220V power through the power line unit connected to one side of the lamp body, and supplies power to each device.

이는 정전압 레귤레이터IC가 포함되어 구성된다.It consists of a constant voltage regulator IC.

상기 정전압 레귤레이어IC는 입력전압을 각 기기에 맞는 정전압으로 바꾸어 주는 역할을 한다.The constant-voltage regulator IC converts the input voltage into a constant voltage suitable for each device.

셋째, 본 발명에 따른 정류회로부(330)에 관해 설명한다.Third, the rectifying circuit unit 330 according to the present invention will be described.

상기 정류회로부(330)는 전원공급부로부터 입력된 AC 220V를 정류하여 정류전압을 출력시키는 역할을 한다.The rectifying circuit part 330 rectifies the AC 220V input from the power supply part and outputs a rectified voltage.

넷째, 본 발명에 따른 LED 천장등(340)에 관해 설명한다.Fourth, the LED ceiling lamp 340 according to the present invention will be described.

상기 LED 천장등(340)은 스마트 LED 데이터제어모듈의 제어신호에 따라 구동되어 LED 불빛을 발광시키는 역할을 한다.The LED ceiling light 340 is driven according to a control signal of the smart LED data control module to emit LED light.

다섯째, 본 발명에 따른 스마트 LED 데이터제어모듈(350)에 관해 설명한다.Fifth, the smart LED data control module 350 according to the present invention will be described.

상기 스마트 LED 데이터제어모듈(350)은 정류전압에 따른 검출 전류변화를 검출 전압으로 검출하여 현재 정류전압상태에 따른 LED 천장등의 발광을 제어하면서, 데이터수신부를 통해 전달받은 가시광 LED ID 데이터를 LED 천장등 발광시, LED 불빛과 함께 가시광 LED ID 데이터를 OOK(On-Off Keying)변조, 부반송파 위상 변조(SC-PSK:SubcarrierPhaseShiftKeying), 부반송파 이진 위상 변조(subcarrierbinary phase-shiftkeying: SC-BPSK), Variable-PPM 변조, Chirp SS(Spread Spectrum)변조, DS-SS(Direct Sequence-Spread Spectrum)변조 중 어느 하나로 선택변조시켜 방사시키도록 제어하는 역할을 한다.The smart LED data control module 350 detects the change of the detection current according to the rectified voltage as a detection voltage and controls the light emission of the LED ceiling according to the current rectified voltage state and outputs visible light LED ID data, In the case of ceiling light emission, the LED ID data is converted to visible light LED ID data by using on-off keying (OOK) modulation, subcarrier phase shift keying (SC-PSK), subcarrier phase shift keying (SC-BPSK) -PPM modulation, Chirp SS (Spread Spectrum) modulation, and DS-SS (Direct Sequence-Spread Spectrum) modulation.

이는 도 6에 도시한 바와 같이, OOK(On-Off Keying)변조부(351), 부반송파 주파수 변조(SC-FSK:SubcarrierFrequency ShiftKeying)부(352), 부반송파 위상 변조(SC-PSK:SubcarrierPhaseShiftKeying)부(353), 부반송파 이진 위상 변조(subcarrierbinary phase-shiftkeying: SC-BPSK)부(354), Variable-PPM 변조부(355), Chirp SS(Spread Spectrum)변조부(356), DS-SS(Direct Sequence-Spread Spectrum)변조부(357) 중 어느 하나가 선택되어 구성된다.6, an on-off keying (OOK) modulating unit 351, a subcarrier frequency shift keying (SC-FSK) unit 352, a subcarrier phase shift keying (SC- A subcarrier phase shift keying (SC-BPSK) unit 354, a variable-PPM modulating unit 355, a Chirp SS (Spread Spectrum) modulating unit 356, a Direct Sequence- Spread Spectrum) modulation unit 357 is selected and configured.

상기 OOK(On-Off Keying)변조부(351)는 소정의 스위칭회로를 통하여 단극형 확산코드 신호에 특정한 주파수 대역을 가지는 반송파 캐리어를 곱하여 OOK(On-Off Keying)변조를 수행시키는 역할을 한다.The on-off keying (OOK) modulator 351 performs on-off keying (OOK) modulation by multiplying a unipolar spreading code signal through a predetermined switching circuit by a carrier having a specific frequency band.

여기서, 단극형 확산 코드는 코드간의 상호상관특성이 한지점에서 "0"이되는 한점 직교이거나 일정시간구간 동안 연속적으로 상호상관특성이 "0"이되는 ZCD(Zero corelation duration) 특성을 가지거나 또는 일정시간구간 동안 연속적으로 상호상관특성이 "0"에 근접한 특성을 갖는 것을 말한다.Here, the unipolar spreading code has a Zero Corelation Duration (ZCD) characteristic in which the cross-correlation characteristic between codes is one point orthogonal to the point where the cross-correlation characteristic is "0" or continuously cross-correlation characteristic is "0" Quot; 0 "characteristic of the cross-correlation characteristic continuously over a predetermined time interval.

상기 부반송파 주파수 변조(SC-FSK:SubcarrierFrequency ShiftKeying)부(352)는 부반송파의 주파수를 변화시킴에 의해 가시광 LED ID 데이터 통신신호를 전송시키는 역할을 한다.The subcarrier frequency shift keying (SC-FSK) unit 352 serves to transmit a visible light LED ID data communication signal by changing the frequency of a subcarrier.

상기 부반송파 위상 변조(SC-PSK:SubcarrierPhaseShiftKeying)부(353)는 부반송파의 위상을 변조시키는 것에 의해 가시광 LED ID 데이터 통신신호를 전송시키는 역할을 한다.The Subcarrier Phase Shift Keying (SC-PSK) unit 353 modulates the phase of the subcarrier to transmit the visible light LED ID data communication signal.

상기 부반송파 이진 위상 변조(subcarrierbinary phase-shiftkeying: SC-BPSK)부(354)는 가시광 LED ID 데이터 통신신호를 부반송파로 위상변조 시킨 후 광반송파를 강도 변조시키는 역할을 한다.The subcarrier binary phase-shift keying (SC-BPSK) unit 354 performs phase modulation of the visible light LED ID data communication signal with a subcarrier and intensity-modulates the optical carrier.

이는 수신 측에 광전력 변환 후 위상 변조 방식에 대응하여 변조한다.This modulates the optical power corresponding to the phase modulation method after the optical power conversion to the receiving side.

상기 Variable-PPM 변조부(355)는 2-PPM 변조와 PWM 변조를 하이브리드식으로 구성한 변조 역할을 한다.The Variable-PPM modulator 355 serves as a modulation in which the 2-PPM modulation and the PWM modulation are configured in a hybrid manner.

상기 2-PPM 변조는 펄스의 위치에 따라 비트 “0”과 “1”을 표현하는 역할을 한다.The 2-PPM modulation serves to express bits "0" and "1" according to the position of the pulse.

상기 PWM 변조는 펄스의 폭을 변화시킴으로써 광원의 밝기를 조절하는 역할을 한다.The PWM modulation controls the brightness of the light source by changing the width of the pulse.

상기 Chirp SS(Spread Spectrum)변조부(356)는 다중접속을 고려하지 않은 고정 부호화를 사용하는 스펙트럼 확산통신의 변조를 수행시키는 역할을 한다.The Chirp SS (Spread Spectrum) modulator 356 performs modulation of spread spectrum communication using fixed coding without consideration of multiple access.

이는 구조가 간단하면서도 잡음이나 감쇄가 심한 채널 환경에서 좋은 성능을 가진다.This is a simple structure, but has good performance in a channel environment where noise or attenuation is severe.

상기 DS-SS(Direct Sequence-Spread Spectrum)변조부(357)는 확산 코드를 직접 가시광 LED ID 데이터 통신신호에 곱해서 확산 신호를 얻은 후 변조를 수행시키는 역할을 한다. The DS-SS (Direct Sequence-Spread Spectrum) modulator 357 multiplies the spread code directly to the visible light LED ID data communication signal to obtain a spread signal and perform modulation.

이는 잡음과 재밍에 대한 성능이 좋은 효과가 있다.This has a good effect on noise and jamming.

다음으로, 본 발명에 따른 실내자율주행객체형 가시광수신모듈(400)에 관해 설명한다.Next, the indoor autonomous traveling object type visible light receiving module 400 according to the present invention will be described.

상기 실내자율주행객체형 가시광수신모듈(400)은 실내자율주행객체 내부에 모듈화되어 탈부착식으로 설치되고, LED 천장등과 가시광수신섹터존에 위치되면, LED 천장등형 가시광송신모듈을 통해 전송된 가시광 ID데이터 통신신호를 수신받아, 복조를 거쳐 가시광 LED ID 데이터 통신신호로 복원시켜 실내자율주행객체를 이동제어시키면서, 화면상에 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보를 표출시키는 역할을 한다.The indoor autonomous traveling object type visible light receiving module 400 is modularly installed in the indoor autonomous traveling object in a detachable manner and is installed in an LED ceiling and a visible light receiving sector zone and is transmitted through an LED ceiling light type visible light transmitting module Receiving the visible light ID data communication signal, demodulating and restoring the visible light LED ID data communication signal to move and control the indoor self-traveling object, and displaying the position information and the multi-information included in the visible light LED ID data communication signal on the screen It plays a role.

이는 도 7에 도시한 바와 같이, 고체촬상소자(410), 왜곡보정부(420), 가시광신호모델링제어부(430), 화소병렬분해능부(440), 전자제어셔터부(450), 실내자율주행객체제어부(460)로 구성된다.7, the solid-state image pickup device 410, the distortion correction unit 420, the visible light signal modeling control unit 430, the pixel parallel resolution unit 440, the electronically controlled shutter unit 450, And an object control unit 460.

첫째, 본 발명에 따른 고체촬상소자(410)에 관해 설명한다.First, the solid-state image pickup device 410 according to the present invention will be described.

상기 고체촬상소자(410)는 LED 신호등형 가시광송신모듈을 통해 전송된 가시광 LED ID 데이터가 포함된 신호광을 수신받아 가시광이미지화시키는 역할을 한다.The solid-state image pickup device 410 receives the signal light including the visible light LED ID data transmitted through the visible light transmission module of the LED signal light type, and converts the received signal light into a visible light image.

이는 카메라 이미지센서로서, 도 8에 도시한 바와 같이, 이미지렌즈부(411), IR 커트필터부(412), 이미지센서부(413)로 구성된다.This is a camera image sensor, which is composed of an image lens unit 411, an IR cut filter unit 412, and an image sensor unit 413, as shown in Fig.

상기 이미지렌즈부(411)는 피사체의 영상을 투과시키는 역할을 한다.The image lens unit 411 serves to transmit an image of a subject.

상기 IR 커트필터부(412)는 영상촬영시 외부의 적외선 빛을 차단시키는 역할을 한다.The IR cut filter unit 412 blocks external infrared light during image capturing.

상기 이미지센서부(413)는 영상을 전기적 신호로 변환시키는 역할을 한다.The image sensor unit 413 converts an image into an electrical signal.

이는 CCD소자, CMOS소자 중 어느 하나가 선택되어 구성된다.This is accomplished by selecting either a CCD device or a CMOS device.

둘째, 본 발명에 따른 왜곡보정부(420)에 관해 설명한다.Second, the distortion correction unit 420 according to the present invention will be described.

상기 왜곡보정부(420)는 고체촬상소자에서 촬영된 가시광이미지영상을 입력받아 영상의 왜곡을 보정시키는 역할을 한다.The distortion correction unit 420 receives the visible light image photographed by the solid state image sensor and corrects distortion of the image.

이는 교정 패턴으로부터 고체촬상소자의 렌즈 초점 거리와 촬영대상물의 위치 등으로 구성된 내부 파라미터, 그리고, 회전과 위치 정보로 구성된 외부 파라미터를 찾음으로써 고체촬상소자의 왜곡 모델을 추정한다. This estimates a distortion model of the solid-state image pickup device by searching an external parameter composed of internal parameters including the lens focal length of the solid-state image pickup device, the position of the object to be picked up, and rotation and position information from the calibration pattern.

이어서, 추정된 고체촬상소자의 모델로부터 역으로 코너점을 다시 추출하여 검증하고, Subsequently, the corner points are again extracted from the model of the estimated solid-state imaging element and verified,

마지막으로, 검증된 고체촬상소자의 모델을 이용하여 영상의 왜곡을 보정한다. Finally, the distortion of the image is corrected using the model of the verified solid-state image sensor.

셋째, 본 발명에 따른 가시광신호모델링제어부(430)에 관해 설명한다.Third, the visible light signal modeling controller 430 according to the present invention will be described.

상기 가시광신호모델링제어부(430)는 왜곡보정부를 통해 왜곡보정된 가시광이미지영상에서 영상객체와 가시광신호를 분할시킨 후, 영상객체를 제거하고, 가시광신호만을 추출시키는 역할을 한다.The visible light signal modeling controller 430 divides the image object and the visible light signal from the distortion-corrected visible light image through the distortion correction unit, and then removes the image object and extracts only the visible light signal.

이는 획득한 가시광이미지영상으로부터 가시광신호만을 추적하여 추출하고, 가시광신호과 영상객체가 서로 겹쳐진 영상이 있다면, 영상객체만을 제거하는 과정을 거쳐 가시광신호만을 수집하도록 구성된다.If the visible light signal and the image object are overlapped with each other, only the image object is removed and only the visible light signal is collected by tracing and extracting only the visible light signal from the acquired visible light image.

즉, 가시광신호은 항상 고정되어 있고, 영상객체는 움직이고 있기 때문에 t프레임과 t-1프레임의 차이값이 움직인 영역이기 때문에 가시광신호만을 추출한다.That is, since the visible light signal is always fixed and the image object is moving, only the visible light signal is extracted because the difference value between the t frame and the t-1 frame moves.

그리고, 가시광신호를 추출하기 위해서 고체촬상소자의 파라미터를 알아야 하기 때문에, 고체촬상소자 캘리브레이션 과정을 수행한다.Since the parameters of the solid-state imaging device must be known in order to extract the visible light signal, the solid-state imaging device calibration process is performed.

여기서, 고체촬상소자 캘리브레이션은 촬영대상물에 따라 여러 종류에 따라 그 기준을 달리 적용시키지만, 본 발명에서는 촬영대상물을 천장에 부착된 LED 조명기기로 하기 때문에, 고체촬상소자 캘리브레이션을 LED 조명기기를 이용하여 설정한다.Herein, the calibration of the solid-state image sensor is applied differently according to various kinds of objects according to the object to be photographed. In the present invention, since the object to be photographed is an LED lighting device attached to the ceiling, the solid- Setting.

본 발명에 따른 가시광신호모델링제어부는 가시광신호모델링을 하기 위해서 가시광신호만을 추출을 해야 하기 때문에, 1차로 혼합가우시안 추출부, 2차로 대비지도·움직임정보부, 3차로 계층적 영역 구조부를 이용하여 구성된다.Since the visible light signal modeling control unit according to the present invention needs to extract only the visible light signal in order to model the visible light signal, it is constructed using the mixed Gaussian extracting unit, the second order contrast map / motion information unit, and the third order hierarchical region structure unit .

상기 혼합가우시안 추출부(Mixure of Gaussian, MoG)는 배경화소모델을 구하고, 배경모델링 기법으로 객체를 분리한 후, 미디언 필터와 모폴로지 연산을 통해 잡음을 제거하여 임계값을 이용하여 객체를 추출하도록 구성된다.The Mixed of Gaussian (MoG) extracts the background pixel model, separates the object by the background modeling technique, removes the noise through the median filter and the morphology operation, and extracts the object using the threshold value .

상기 대비지도·움직임정보부는 대비지도와 웨이블렛 변환을 이용하여 중요 특징점을 찾아내고 이를 이용하여 대략적인 집중윈도우(AW:Attention Window)를 생성하여 LED 조명기기이미지 정보를 추정하고, 윤곽선 차이를 추출하여 가시광신호만을 추출하는 역할을 한다.The contrast map / motion information unit finds important feature points using a contrast map and a wavelet transform and uses them to generate an approximate focus window (AW) to estimate the LED lighting apparatus image information, extract the contour difference And extracts only visible light signals.

상기 계층적영역구조부는 워터쉐드 알고리즘을 이용하여 영상을 분할하고, 분할된 영역 중 유사한 속성을 가진 영역을 병합하여 계층 구조를 만들어 가시광신호만을 추출하는 역할을 한다.The hierarchical region structure unit divides an image using a watermark algorithm and merges regions having similar attributes among the divided regions to form a hierarchical structure to extract only visible light signals.

넷째, 본 발명에 따른 화소병렬분해능부(440)에 관해 설명한다.Fourth, the pixel parallel resolution unit 440 according to the present invention will be described.

상기 화소병렬분해능부(440)는 가시광신호모델링제어부를 통해 추출된 가시광신호데이터를 복수개의 캐패시터를 가지는 버티컬스캐너(Vertical scanner)와 호리잰털스캐너(Horizontal scanner)를 통해 화소병렬구조로 형성되도록 16비트~64비트로 고속분해능시키는 역할을 한다.The pixel parallel resolution unit 440 converts the visible light signal data extracted through the visible light signal modeling control unit into a 16-bit pixel signal through a vertical scanner having a plurality of capacitors and a horizontal scanner, To 64-bit resolution.

이는 도 9에 도시한 바와 같이, 버티컬스캐너부(441), 호리잰털스캐너(Horizontal scanner)(442), 저조도분해능부(443), 고조도분해능부(444)로 구성된다.As shown in Fig. 9, the image processing apparatus includes a vertical scanner unit 441, a horizontal scanner 442, a low-resolution resolution unit 443, and a high-resolution resolution unit 444.

상기 버티컬스캐너부(441)는 화소의 열병렬구조에 1:1 맞춤형으로 복수개의 캐패시터를 설치하여 수직방향으로 스캐너시키는 역할을 한다.The vertical scanner unit 441 has a function of arranging a plurality of capacitors in a one-to-one customized manner in a column parallel structure of pixels to scan in a vertical direction.

상기 호리잰털스캐너(Horizontal scanner)(442)는 화소의 행병렬구조에 1:1 맞춤형으로 복수개의 캐패시터를 설치하여 수평방향으로 스캐너시키는 역할을 한다.The horizontal scanner 442 has a function of arranging a plurality of capacitors in a one-to-one customized manner in a row-parallel structure of pixels to horizontally scan the pixels.

상기 저조도분해능부(443)는 이미지센서부의 포화전하량 이하의 저조도에서는 FD(플로레인)만을 적용시켜 분해능시키는 역할을 한다.The low-resolution resolution unit 443 serves to apply resolution only by applying FD (fluorine) only at a low luminance level below the saturated charge amount of the image sensor unit.

상기 고조도분해능부(444)는 이미지센서부의 포화전하량 이상의 고조도에서는 OFD(오버플로레인)만을 적용시켜 분해능시키는 역할을 한다.The high-resolution resolution unit 444 applies resolution only by applying OFD (overflow) only at a higher level of saturation than the amount of charge of the image sensor unit.

본 발명에 따른 화소병렬분해능부(440)는 일예로, 이미지센서부의 수평방향의 하단부에 M개의 캐패시터를 나열시키고, 수직방향의 측단부에 N개의 캐패시터를 나열시킨다.In the pixel parallel resolution unit 440 according to the present invention, for example, M capacitors are arranged at the lower end in the horizontal direction of the image sensor unit, and N capacitors are arranged at the side ends in the vertical direction.

이때, 상단의 수직방향에서 하단의 수평방향으로 스캐닝하면서, 어느 행(n행)의 M개의 화소 전부의 신호를 동시에 출력하여 이 M개의 캐패시터에 샘플홀드한 후, M개의 데이터를 차례로 16비트~64비트로 분해능시켜 출력해나간다.At this time, signals of all the M pixels in a certain row (n rows) are simultaneously output while being scanned in the horizontal direction of the lower end from the vertical direction at the upper end, and the M data are sampled and held in the M capacitors, 64-bit resolution and output.

그리고, 샘플홀드한 직후에 출력한 행(n행)의 화소 전부에 리셋(축적된 신호전하를 클리어)한다.Then, all the pixels of the row (n-th row) outputted immediately after the sample hold are reset (the accumulated signal charge is cleared).

이 과정을 n=1부터 n=N까지 행하고, 1플레임분의 화상출력을 완료시킨다.This process is performed from n = 1 to n = N, and image output for one frame is completed.

이때, 샘플홀더에 필요한 시간을 TSH라고 설정시키고, 캐패시터 어레이에서 출력한 시간(스캔 시간)을 TSCAN이라고 설정시킨다.At this time, the time required for the sample holder is set to be TSH, and the time (scan time) output from the capacitor array is set to TSCAN.

즉, 1행 출력에 필요한 시간(Trow)은 다음의 수학식 1과 같이 표현된다.That is, the time (Trow) required for outputting one row is expressed by the following equation (1).

Figure 112017064238140-pat00001
Figure 112017064238140-pat00001

여기서, 축적시간 Tint는 Tint=NTrow가 되고, 이것이 보통 1 플레임시간이 된다.Here, the accumulation time Tint becomes Tint = NTrow, which is usually one frame time.

도 10에서 도시한 바와 같이, 캐패시터 어레이를 2조 준비하고, n행 째를 첫번째의 캐패시터 어레이에 출력하고, 리셋한 직후에 n-Δ행째를 또 한 개의 캐패시터 어레이에 출력하고 리셋한다.As shown in Fig. 10, two sets of capacitor arrays are prepared, the n-th row is outputted to the first capacitor array, and the n-delta row is output to another capacitor array immediately after resetting and reset.

따라서 최초의 출력행의 축적시간 Tint 1은 Tint 1 = Trow(N-Δ)가 되어, 2개째의 출력행의 축적시간 Tint2는 Tint2=ΔTrow가 된다.Therefore, the accumulation time Tint 1 of the first output row becomes Tint 1 = Trow (N-Δ), and the accumulation time Tint 2 of the second output row becomes Tint 2 = ΔTrow.

일예로, N=480, Δ=2라고 하면 축적시간비는 약 240:1로 분해능이 되어, 고조도 측으로의 대응이 가능하도록 구성된다.For example, when N = 480 and? = 2, the accumulation time ratio becomes about 240: 1, and the resolution can be made to correspond to the high illuminance side.

본 발명에 따른 화소병렬분해능부(440)는 AD변환회로가 내장되어 구성됨으로서, 640×512 화소 어레이에서 32비트로 분해능시킬 수 있고, 1024×1024 화소 어레이에서 64비트로 분해능시킬 수가 있다.The pixel parallel resolution unit 440 according to the present invention is constructed by incorporating an AD conversion circuit so that resolution can be made to 32 bits in a 640x512 pixel array and resolution can be made to 64 bits in a 1024x1024 pixel array.

이처럼, 버티컬스캐너부(441), 호리잰털스캐너(Horizontal scanner)(442), 저조도분해능부(443), 고조도분해능부(444)로 이루어진 화소병렬분해능부(440)가 구성됨으로서, 저조도부터 고조도까지 랜덤 노이즈 0.15m Vrms, FPN 0.15mvrms에서 16비트~64비트로 고속분해능시킬 수가 있다.The pixel parallel resolution unit 440 including the vertical scanner unit 441, the horizontal scanner 442, the low-resolution resolution unit 443, and the high-resolution resolution unit 444 constitutes the low- High resolution can be achieved from 16 bits to 64 bits at random noise 0.15m Vrms and FPN 0.15mvrms.

다섯째, 본 발명에 따른 전자제어셔터부(450)에 관해 설명한다.Fifth, the electronically controlled shutter unit 450 according to the present invention will be described.

상기 전자제어셔터부(450)는 화소병렬분해능부를 통해 고속분해능된 화소병렬구조데이터 중 화소에 포함된 가시광 데이터신호를 주파수변조시킨 후, 행/열방향 연속셀교번스트리밍의 전자제어셔터방식으로 고속변조시키는 역할을 한다.The electronically controlled shutter unit 450 frequency-modulates the visible light data signal included in the pixel among the pixel-parallel structure data of high resolution through the pixel parallel resolution unit, It serves to modulate.

이는 도 11에서 도시한 바와 같이, 화소병렬분해능부를 통해 고속분해능된 화소병렬구조데이터를 수평의 행구조를 x축으로 설정시키고, 수직의 열구조를 y축으로 설정시킨 후, x축 상단부의 첫번째 행/열방향에 복수개의 단위셀을 형성시키고, 그 단위셀에 화소병렬구조데이터 중 "0"신호를 블랙화시키고, "1"신호를 화이트화시켜 "0"과 "1"을 하나의 행/열방향에 연속셀교번스트리밍으로 변환시키면서, x축 상단부에서 y축 하단부방향으로 화소병렬구조데이터를 읽어들이고, 리셋시킨다.As shown in FIG. 11, the pixel parallel structure data of high resolution through the pixel parallel resolution unit is set to the x-axis of the horizontal row structure, the vertical column structure is set to the y-axis, Quot; 0 "signal in the pixel parallel structure data is blackened in the unit cell, and the" 1 "signal is made white, so that" 0 " / Pixel parallel structure data in the direction from the upper end portion of the x-axis to the lower end portion of the y-axis while resetting it to the continuous cell alternating streaming in the column direction.

그리고, 도 11에서 도시한 바와 같이, x축을 시간으로 설정시키고, y축을 라인으로 설정시킨 행/열방향 연속셀교번스트리밍 그래프를 활성화시킨다.Then, as shown in Fig. 11, the x-axis is set to time, and the row / column direction continuous cell alternating streaming graph in which the y-axis is set as a line is activated.

이때, 전자제어셔터 그래프는 하나의 라인상에 변조시간(Transfer time)과, 리셋시퀀스(Reset Sequence)를 순차적으로 나열시킨다.At this time, the electronically controlled shutter graph sequentially arranges the modulation time (Transfer time) and the reset sequence (Reset Sequence) on one line.

그리고, 특정 열방향의 변조시간을 기준으로 스타트라인과 엔드라인 사이를 하나의 프레임레이트(Frame rate)로 설정시키고, 엔드라인의 스타트 리셋시퀀스와 엔드라인의 엔드 리셋시퀀스 사이를 표출시간(Exposure time)으로 설정시킨 후, 프레임레이트와 표출시간을 기준으로 화소에 포함된 가시광 데이터신호를 주파수변조시킨다.Then, a frame rate is set between the start line and the end line on the basis of the modulating time in a specific column direction, and the time between the start reset sequence of the end line and the end reset sequence of the end line is set to the exposure time ), And frequency-modulates the visible light data signal included in the pixel based on the frame rate and the display time.

이처럼, 본 발명에 따른 전자제어셔터부는 하나의 프레임레이트와 표출시간을 기준으로 화소에 포함된 가시광 데이터신호를 주파수변조시킬 수가 있어, 첫번째 데이터프레임과, 연속으로 이어지는 두번째 데이터프레임간의 딜레이타임(Delay Time)까지 고려하여 넘길 수 있어, 데이터끊김의 버퍼링현상없이, 1kHz~10Mhz의 넓은 주파수범위로 가변시키면서, 30비트~120비트의 가시광데이터용량과, 50kbps~300kbps의 빠른 전송속도를 제공할 수 있다.As described above, the electronically controlled shutter unit according to the present invention can frequency-modulate the visible light data signal included in the pixel on the basis of one frame rate and the display time, and the delay time between the first data frame and the successive second data frame Time), and it is possible to provide a visible light data capacity of 30 bits to 120 bits and a fast transmission speed of 50 kbps to 300 kbps while varying the frequency range from 1 kHz to 10 MHz without buffering phenomenon of data interruption .

이어서, 전자제어셔터방식으로 화소병렬구조데이터 중 또 다른 화소에 포함된 가시광 데이터신호를 주파수변조시킨다.Subsequently, the visible light data signal included in another pixel among the pixel-parallel structure data is frequency-modulated by an electronically controlled shutter system.

이러한 과정을 통해 화소병렬구조데이터 중 화소에 포함된 가시광 데이터신호를 1kHz, 2kHz로 고속변조시킨다.Through this process, the visible light data signal included in the pixel among the pixel parallel structure data is rapidly modulated at 1 kHz and 2 kHz.

여섯째, 본 발명에 따른 실내자율주행객체제어부(460)에 관해 설명한다.Sixth, the indoor autonomous traveling object control unit 460 according to the present invention will be described.

상기 실내자율주행객체제어부(460)는 제어셔터부를 통해 고속변조된 가시광데이터신호를 슈퍼임포즈(Superimpose)하면서 그 점멸주파수를 디코드함으로써, 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)에 따라 실내자율주행객체를 이동제어시키면서, 화면상에 위치정보와 멀티정보를 표출시키도록 제어하는 역할을 한다.The indoor autonomous traveling object control unit 460 superimposes the visible light data signal that has been modulated at a high speed through the control shutter unit and decodes the blink frequency thereof to generate position information and multi information Controlling the movement of the indoor autonomous traveling objects according to the traveling direction and the speed, the control information about the traveling direction and the speed, and the information about the loading and discharging of the objects), and displaying the position information and the multi information on the screen.

다음으로, 본 발명에 따른 스마트제어모듈(500)에 관해 설명한다.Next, the smart control module 500 according to the present invention will be described.

상기 스마트제어모듈(500)은 데이터송신부를 위치별, 공간별로 그룹화시킨 상태에서, 그룹화된 존(Zone)에 위치한 복수개의 데이터송신부와 연결되어, 특정공간에 위치한 데이터송신부에 1:1로 측위지점의 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)가 포함된 고유의 가시광 LED ID 데이터 통신신호를 설정시키는 역할을 한다.The smart control module 500 is connected to a plurality of data transmission units located in a grouped zone in a state where the data transmission units are grouped by location and space, And a multi-information (control information on the moving direction and speed, object loading and discharging information) of the visible light LED ID data communication signal.

이는 데이터송신부와 연결되는 유무선통신망이 포함되어 구성된다.It includes a wired / wireless communication network connected to a data transmission unit.

또한, 본 발명에 따른 실내자율주행객체는 실내자율주행객체형 가시광수신모듈이외에, 몸체, 바퀴부, 구동모터, 집게로봇, 장애물감지부가 포함되어 구성된다.In addition, the indoor autonomous traveling object according to the present invention includes a body, a wheel unit, a driving motor, a pliers robot, and an obstacle sensing unit in addition to an indoor autonomous traveling object type visible light receiving module.

여기서, 집게로봇은 집게 형상으로 형성되어, 집어서 몸체에 물건을 적재하거나 실을 수 있도록 보조해주는 역할을 한다.Here, the tongue robot is formed in the form of a pincer, and serves to assist picking up or threading objects on the body.

상기 장애물감지부는 레이저센서로 이루어져, 일정 거리(1m~3m)이내에 또 다른 실내자율주행객체가 접근하면, 이를 감지하여 실내자율주행객체제어부로 전달시키는 역할을 한다.The obstacle sensing unit includes a laser sensor, and when another indoor autonomous traveling object approaches within a predetermined distance (1m to 3m), the obstacle sensing unit senses it and transmits it to the indoor autonomous traveling object control unit.

이때, 실내자율주행객체제어부는 장애물감지부로부터 장애물감지신호가 입력되면, 구동모터의 회전속도와 회전방향을 제어하여, 장애물을 회피시키는 회피모드를 구동시킨다.At this time, when the obstacle detection signal is inputted from the obstacle detection unit, the indoor autonomous traveling object control unit drives the avoidance mode for avoiding the obstacle by controlling the rotational speed and the rotational direction of the driving motor.

이로 인해, 복수개의 실내자율주행객체가 구성되더라도, 장애물감지와 회피모드를 통해, 충돌사고방지를 70% 향상시킬 수 있다.Therefore, even if a plurality of indoor self-running objects are constructed, the collision avoidance can be improved by 70% through the obstacle detection and avoidance mode.

이하, 본 발명에 따른 고체촬상소자 기반 가시광통신 실내자율주행장치에 관해 설명한다.Hereinafter, an autonomous travel apparatus for a visible light communication indoor based on a solid-state image sensor according to the present invention will be described.

먼저, 도 12에 도시한 바와 같이, 스마트제어모듈에서 특정공간에 위치한 데이터송신부에 1:1로 측위지점의 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)가 포함된 고유의 가시광 LED ID 데이터 통신신호를 설정시킨다. First, as shown in FIG. 12, location information of a positioning point and multi-information (control information on moving direction and speed, and object loading and discharging information) are transmitted to the data transmitting unit located in a specific space in the smart control module And sets the inherent visible light LED ID data communication signal included.

다음으로, 데이터송신부를 통해 스마트제어모듈로부터 전달받은 가시광 LED ID 데이터를 ASK변조시킨 후, 전원으로 공급되는 220V 데이터을 통하여 데이터를 하이브리드형 스마트 LED 램프가 연결된 데이터수신부로 송신시킨다.Next, after modulating the visible light LED ID data received from the smart control module through the data transmission unit, the data is transmitted through the 220V data supplied to the power source to the data receiving unit to which the hybrid type smart LED lamp is connected.

다음으로, 데이터수신부에서, 데이터을 통해 전달된 AC 220V ASK변조신호를 수신받아 AC 220V ASK변조신호에 포함된 가시광 LED ID 데이터를 복구시킨 후, 복구시킨 가시광 LED ID 데이터를 AC 220V 전원과 함께, 출력단 일측에 연결된 스마트 LED 천장등형 가시광송신모듈쪽으로 전달시킨다.Next, the data receiving unit receives the AC 220V ASK modulation signal transmitted through the data, restores the visible light LED ID data included in the AC 220V ASK modulation signal, and outputs the recovered visible light LED ID data together with the AC 220V power source, Smart LED connected to one side Transmits to ceiling light type visible light transmission module.

다음으로, 스마트 LED 천장등형 가시광송신모듈을 통해 데이터수신부로부터 가시광 LED ID 데이터를 전달받아, LED 광원을 사용하여 가시광 LED ID 데이터가 포함된 신호광을 주변의 실내자율주행객체쪽으로 방사시킨다.Next, the visible light LED ID data is received from the data receiving unit through the smart LED ceiling light type visible light transmission module, and the signal light including the visible light LED ID data is emitted toward the surrounding self-traveling object using the LED light source.

끝으로, 실내자율주행객체형 가시광수신모듈에서, LED 천장등형 가시광송신모듈을 통해 전송된 가시광 ID데이터 통신신호를 수신받아, 복조를 거쳐 가시광 LED ID 데이터 통신신호로 복원시켜 실내자율주행객체를 이동제어시키면서, 화면상에 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보를 표출시킨다.Finally, in the indoor autonomous mobile object type visible light receiving module, the visible light ID data communication signal transmitted through the LED ceiling light type visible light transmitting module is received, and demodulated and restored to the visible light LED ID data communication signal, And displays the positional information and the multi-information contained in the visible light LED ID data communication signal on the screen while controlling the movement.

1 : 고체촬상소자 기반 가시광통신 실내자율주행장치 100 : 데이터송신부
200 : 데이터수신부
300 : 스마트 LED 천장등형 가시광송신모듈
400 : 실내자율주행객체형 가시광수신모듈 500 : 스마트제어모듈
1: a solid-state imaging device-based visible light communication indoor self-driving device 100:
200: Data receiving unit
300: Smart LED ceiling light type visible light transmission module
400: Indoor self-running object type visible light receiving module 500: Smart control module

Claims (7)

LED 천장등을 발광시킴과 동시에 원하는 측위지점의 위치정보와 멀티정보가 포함된 가시광 LED ID 데이터 통신신호를 같이 방사시켜, LED 천장등과 가시광수신섹터존에 위치한 실내자율주행객체를 가시광통신을 통해 이동제어시키는 고체촬상소자 기반 가시광통신 실내자율주행장치로 이루어지고,
상기 고체촬상소자 기반 가시광통신 실내자율주행장치는
스마트제어모듈로부터 전달받은 가시광 LED ID 데이터를 유무선통신망을 통해 하이브리드형 스마트 LED 램프가 연결된 데이터수신부로 송신시키는 데이터송신부(100)와,
유무선통신망을 통해 전달된 가시광 LED ID 데이터를 스마트 LED 천장등형 가시광송신모듈쪽으로 전달시키는 데이터수신부(200)와,
데이터수신부와 연결되어, LED 천장등 내부에 위치되고, 데이터수신부로부터 가시광 LED ID 데이터를 전달받아, LED 광원을 사용하여 가시광 LED ID 데이터가 포함된 신호광을 선택변조시켜 주변의 실내자율주행객체쪽으로 방사시키는 스마트 LED 천장등형 가시광송신모듈(300)과,
실내자율주행객체 내부에 모듈화되어 탈부착식으로 설치되고, LED 천장등과 가시광수신섹터존에 위치되면, LED 천장등형 가시광송신모듈을 통해 전송된 가시광 ID데이터 통신신호를 수신받아, 복조를 거쳐 가시광 LED ID 데이터 통신신호로 복원시켜 실내자율주행객체를 이동제어시키면서, 화면상에 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보를 표출시키는 실내자율주행객체형 가시광수신모듈(400)과,
데이터송신부를 위치별, 공간별로 그룹화시킨 상태에서, 그룹화된 존(Zone)에 위치한 복수개의 데이터송신부와 연결되어, 특정공간에 위치한 데이터송신부에 1:1로 측위지점의 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)가 포함된 고유의 가시광 LED ID 데이터 통신신호를 설정시키는 스마트제어모듈(500)로 구성되는 고체촬상소자 기반 가시광통신 실내자율주행장치에 있어서,
상기 실내자율주행객체형 가시광수신모듈(400)은
LED 신호등형 가시광송신모듈을 통해 전송된 가시광 LED ID 데이터가 포함된 신호광을 수신받아 가시광이미지화시키는 고체촬상소자(410)와,
고체촬상소자에서 촬영된 가시광이미지영상을 입력받아 영상의 왜곡을 보정시키는 왜곡보정부(420)와,
왜곡보정부를 통해 왜곡보정된 가시광이미지영상에서 영상객체와 가시광신호를 분할시킨 후, 영상객체를 제거하고, 가시광신호만을 추출시키는 가시광신호모델링제어부(430)와,
가시광신호모델링제어부를 통해 추출된 가시광신호데이터를 복수개의 캐패시터를 가지는 버티컬스캐너(Vertical scanner)와 호리잰털스캐너(Horizontal scanner)를 통해 화소병렬구조로 형성되도록 16비트~64비트로 고속분해능시키는 화소병렬분해능부(440)와,
화소병렬분해능부를 통해 고속분해능된 화소병렬구조데이터 중 화소에 포함된 가시광 데이터신호를 주파수변조시킨 후, 행/열방향 연속셀교번스트리밍의 전자제어셔터방식으로 고속변조시키는 전자제어셔터부(450)와,
전자제어셔터부를 통해 고속변조된 가시광데이터신호를 슈퍼임포즈(Superimpose)하면서 그 점멸주파수를 디코드함으로써, 가시광 LED ID 데이터 통신신호에 포함된 위치정보와 멀티정보(이동방향 및 속도에 관한 제어정보, 물건 적재 및 배출정보)에 따라 실내자율주행객체를 이동제어시키면서, 화면상에 위치정보와 멀티정보를 표출시키도록 제어하는 실내자율주행객체제어부(460)로 구성되는 것을 특징으로 하는 고체촬상소자 기반 가시광통신 실내자율주행장치.
The LED ceiling light is emitted and the visible light LED ID data communication signal including the position information of the desired positioning point and the multi information is radiated together so that the indoor autonomous traveling object located in the LED ceiling and the visible light receiving sector zone is transmitted through the visible light communication And controlling the movement of the visible light communication indoor self-traveling device based on the solid-state image sensing device,
The solid-state imaging device-based visible light communication indoor self-traveling device
A data transmission unit 100 for transmitting the visible light LED ID data received from the smart control module to a data reception unit connected to the hybrid type smart LED lamp through a wired / wireless communication network,
A data receiving unit 200 for transmitting the visible light LED ID data transmitted through the wired / wireless communication network to the smart LED ceiling type visible light transmitting module,
Receiving the visible light LED ID data from the data receiving unit, selectively modulating the signal light including the visible light LED ID data by using the LED light source, and emitting the light to the indoor self-traveling object in the vicinity A smart LED ceiling light type visible light transmission module 300,
When the LED ceiling or the like is located in the visible light receiving sector zone, the visible light ID data communication signal transmitted through the visible light transmitting module of the LED ceiling light is received and demodulated, An indoor autonomous traveling object type visible light receiving module 400 for displaying the position information and the multi information contained in the visible light LED ID data communication signal on the screen while moving the indoor autonomous traveling object by restoring to the LED ID data communication signal,
The data transmission unit is connected to a plurality of data transmission units located in a grouped zone in a state where the data transmission units are grouped by location and space so that position information of the positioning point and multi information And a smart control module (500) for setting an inherent visible light LED ID data communication signal including control information, direction information, direction information, and object information for loading and discharging information,
The indoor autonomous traveling object type visible light receiving module 400
A solid-state image pickup device 410 receiving signal light including visible light LED ID data transmitted through an LED signal light type visible light transmission module and converting the received signal light into visible light image,
A distortion correcting unit 420 for correcting the distortion of the image by receiving the visible light image imaged by the solid state imaging device,
A visible light signal modeling controller 430 for dividing the image object and the visible light signal from the distortion-corrected visible image through the distortion correcting unit, removing the image object, and extracting only the visible light signal,
A pixel parallel resolution that high-speeds the visible light signal data extracted through the visible light signal modeling controller to 16 bits to 64 bits so as to form a pixel parallel structure through a vertical scanner having a plurality of capacitors and a horizontal scanner 440,
An electronically controlled shutter unit 450 for frequency-modulating the visible light data signal included in the pixel among the pixel-parallel structure data that has been fast-resolved through the pixel-parallel resolution unit and then modulating the visible light data signal at high speed by an electronically controlled shutter system of alternating- Wow,
Speed light modulated by the electronically controlled shutter unit and superimposes the visible light data signal while superimposing the visible light data signal at high speed through the electronically controlled shutter unit so that the positional information and the multi-information included in the visible light LED ID data communication signal (control information on the moving direction and speed, And an indoor self-driving object control unit (460) for controlling the indoor self-driving object to move and control the positional information and the multi-information on the screen in accordance with the object information Visible light communication indoor self - driving device.
삭제delete 삭제delete 삭제delete 삭제delete 제1항에 있어서, 상기 고체촬상소자(410)는
피사체의 영상을 투과시키는 이미지렌즈부(411)와,
영상촬영시 외부의 적외선 빛을 차단시키는 IR 커트필터부(412)와,
영상을 전기적 신호로 변환시키는 이미지센서부(413)로 구성되는 것을 특징으로 하는 고체촬상소자 기반 가시광통신 실내자율주행장치.
The solid-state image pickup device according to claim 1, wherein the solid-state image pickup device (410)
An image lens unit 411 for transmitting an image of a subject,
An IR cut filter unit 412 for cutting off infrared light from the outside when shooting an image,
And an image sensor unit (413) for converting the image into an electrical signal.
제1항에 있어서, 상기 화소병렬분해능부(440)는
화소의 열병렬구조에 1:1 맞춤형으로 복수개의 캐패시터를 설치하여 수직방향으로 스캐너시키는 버티컬스캐너부(441)와,
화소의 행병렬구조에 1:1 맞춤형으로 복수개의 캐패시터를 설치하여 수평방향으로 스캐너시키는 호리잰털스캐너(Horizontal scanner)(442)와,
이미지센서부의 포화전하량 이하의 저조도에서는 FD(플로레인)만을 적용시켜 분해능시키는 저조도분해능부(443)와,
이미지센서부의 포화전하량 이상의 고조도에서는 OFD(오버플로레인)만을 적용시켜 분해능시키는 고조도분해능부(444)로 구성되는 것을 특징으로 하는 고체촬상소자 기반 가시광통신 실내자율주행장치.
The image display device according to claim 1, wherein the pixel parallel resolution unit (440)
A vertical scanner unit 441 for vertically installing a plurality of capacitors in a 1: 1 customized manner in a column parallel structure of pixels,
A horizontal scanner 442 for horizontally installing a plurality of capacitors in a 1: 1 customized manner in a row-parallel structure of pixels,
A low-illuminance resolution section 443 for applying resolution only by using FD (fluorine) at a low illuminance lower than the saturated charge amount of the image sensor section,
And a high-contrast resolution unit (444) that applies resolution only by applying OFD (over-flow) at a high level of luminance higher than the saturation charge amount of the image sensor unit.
KR1020170085211A 2017-07-05 2017-07-05 The apparatus of visible light communications for automatic driving object indoor KR101830109B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170085211A KR101830109B1 (en) 2017-07-05 2017-07-05 The apparatus of visible light communications for automatic driving object indoor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170085211A KR101830109B1 (en) 2017-07-05 2017-07-05 The apparatus of visible light communications for automatic driving object indoor

Publications (1)

Publication Number Publication Date
KR101830109B1 true KR101830109B1 (en) 2018-02-20

Family

ID=61394671

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170085211A KR101830109B1 (en) 2017-07-05 2017-07-05 The apparatus of visible light communications for automatic driving object indoor

Country Status (1)

Country Link
KR (1) KR101830109B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109368455A (en) * 2018-12-19 2019-02-22 上海昶屹机电科技有限公司 Elevator visible light indoor locating system and method
CN114762139A (en) * 2019-09-20 2022-07-15 浦项工科大学校产学协力团 Transparent ultrasonic sensor and method for manufacturing same

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100996180B1 (en) * 2008-08-12 2010-11-23 한국생산기술연구원 Localization system and method for mobile object using led light
KR101258666B1 (en) * 2010-03-29 2013-04-26 경희대학교 산학협력단 Led-identification system and information providing method thereof
KR101501600B1 (en) * 2014-01-17 2015-03-19 서울과학기술대학교 산학협력단 The apparatus and method of visible light communication coupled with led lamp

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100996180B1 (en) * 2008-08-12 2010-11-23 한국생산기술연구원 Localization system and method for mobile object using led light
KR101258666B1 (en) * 2010-03-29 2013-04-26 경희대학교 산학협력단 Led-identification system and information providing method thereof
KR101501600B1 (en) * 2014-01-17 2015-03-19 서울과학기술대학교 산학협력단 The apparatus and method of visible light communication coupled with led lamp

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109368455A (en) * 2018-12-19 2019-02-22 上海昶屹机电科技有限公司 Elevator visible light indoor locating system and method
CN114762139A (en) * 2019-09-20 2022-07-15 浦项工科大学校产学协力团 Transparent ultrasonic sensor and method for manufacturing same

Similar Documents

Publication Publication Date Title
Rajagopal et al. Visual light landmarks for mobile devices
KR102165399B1 (en) Gated Sensor Based Imaging System With Minimized Delay Time Between Sensor Exposures
US20160352422A1 (en) Multi-functional smart led systems with visible light communication and ip-based radiofrequency connectivity
CN106125081B (en) Laser radar with optical communication
JP7090233B2 (en) Visible light communication system
CN101159821B (en) Device for realizing acceptanceand output of optical communication signal by light receiver area array sensor
JP7113261B2 (en) Receiving device, program, transmitting device, light emitting device, and communication system
JP2018119942A (en) Imaging device, method of monitoring the same, and program
KR101950850B1 (en) The apparatus and method of indoor positioning with indoor posioning moudule
KR101830109B1 (en) The apparatus of visible light communications for automatic driving object indoor
US11863236B2 (en) Transmission method, reception method, transmission device, and reception device
US20170148310A1 (en) Detection of coded light
US10764562B2 (en) Depth generation system with adjustable light intensity
Kim et al. Performance improvement of visible light communications using optical beamforming
JP2019012329A (en) Optical id transmission device, and optical id communication system
Kondo et al. Multiple-access capability of LED visible light communication with low-frame-rate CMOS camera for control and data transmission of mobile objects
US20170093490A1 (en) Sub-sampling raster lines in rolling shutter mode for light-based communication
JP2020532908A (en) Optical communication devices and systems, and corresponding information transmission and reception methods
US20210135753A1 (en) Detecting coded light
Teli et al. The first study of mimo scheme within rolling-shutter based optical camera communications
KR100950567B1 (en) Cctv camera system
US10602071B2 (en) Imaging device and control method
US20230137928A1 (en) Adaptive flash with pulse width modulation
WO2018073870A1 (en) Transmission apparatus, reception apparatus, communication system, transmission method, reception method, transmission-use computer program, and reception-use computer program
Kurimoto et al. Visible light communication system using low-speed image sensor and two-dimensional optical scanner

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant