KR101252671B1 - Vehicle imeging system and method of controlling intensity of rafiation - Google Patents

Vehicle imeging system and method of controlling intensity of rafiation Download PDF

Info

Publication number
KR101252671B1
KR101252671B1 KR1020110040457A KR20110040457A KR101252671B1 KR 101252671 B1 KR101252671 B1 KR 101252671B1 KR 1020110040457 A KR1020110040457 A KR 1020110040457A KR 20110040457 A KR20110040457 A KR 20110040457A KR 101252671 B1 KR101252671 B1 KR 101252671B1
Authority
KR
South Korea
Prior art keywords
imaging
trigger
delay time
driving command
driving
Prior art date
Application number
KR1020110040457A
Other languages
Korean (ko)
Other versions
KR20120122362A (en
Inventor
김영모
차기욱
김송희
김현우
Original Assignee
주식회사 디아이랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디아이랩 filed Critical 주식회사 디아이랩
Priority to KR1020110040457A priority Critical patent/KR101252671B1/en
Publication of KR20120122362A publication Critical patent/KR20120122362A/en
Application granted granted Critical
Publication of KR101252671B1 publication Critical patent/KR101252671B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Abstract

본 발명의 차량 촬상 시스템은, 미리 정해둔 영역을 촬상하는 촬상장치;와, 상기 촬상장치에 촬상을 명령하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 동기시키고, 상기 촬상장치를 통한 촬상시마다 상기 촬상 트리거를 상기 촬상장치로 제공함과 아울러, 그 촬상 트리거에 동기된 구동명령 트리거를 상기 조명장치들로 전송하는 제어장치;를 구비함을 특징으로 한다. According to an aspect of the present invention, there is provided a vehicle imaging system comprising: an imaging apparatus for imaging a predetermined area; and an imaging trigger for instructing imaging to the imaging apparatus and a drive command trigger for transmitting to an illumination apparatus located in the periphery thereof, wherein the imaging is performed. And a control device for providing the imaging trigger to the imaging apparatus every time the imaging is performed by the apparatus, and transmitting a driving command trigger synchronized with the imaging trigger to the lighting apparatuses.

Description

차량 촬상 시스템 및 그를 위한 광량 제어 방법{VEHICLE IMEGING SYSTEM AND METHOD OF CONTROLLING INTENSITY OF RAFIATION}VEHICLE IMEGING SYSTEM AND METHOD OF CONTROLLING INTENSITY OF RAFIATION}

본 발명은 교통 법규 위반 차량을 단속하거나 차량를 관리하기 위해 차량을 촬상하는 장치에 관한 것으로, 더욱 상세하게는 촬상을 위해 요구되는 광량을 조절하는 차량 촬상 시스템 및 그를 위한 광량 제어 방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an apparatus for photographing a vehicle to control a vehicle or to manage a vehicle that violates a traffic law. More particularly, the present invention relates to a vehicle imaging system for adjusting an amount of light required for imaging and a light amount control method therefor.

일반적으로 자동차 교통 사고의 원인은 운전자의 법규 위반, 도로 구조 및 도로 환경의 미흡, 차량 구비 조건의 불비, 보차도의 혼재와 무질서 등이 요인이지만, 직접적인 교통 사고의 원인은 운전자의 교통 법규 위반이라고 할 수 있다.In general, the causes of automobile traffic accidents are drivers 'violations, lack of road structures and road conditions, lack of vehicle conditions, mixed roads and disorders, but direct traffic accidents are caused by drivers' violations. Can be.

이러한 교통 법규 위반을 방지하기 위하여 일차적으로는 운전자의 준법 정신이 중요하다고 하겠으나, 효율적인 단속 또한 중요한 요소이다.First of all, the driver's compliance spirit is important to prevent such traffic violations, but efficient enforcement is also an important factor.

그런데, 상기한 교통 법규 위반으로는 과속, 중앙선 침범, 신호 위반, 정지선 위반, 불법 주정차 등이 있다. However, such traffic violations include speeding, centerline violations, signal violations, stopline violations, illegal parking, and the like.

상기한 교통 법규 위반 차량의 단속을 위한 경찰의 인력이 부족하여 상시 단속이 불가능함에 따라, 경찰에 의한 단속을 함정 단속이나 과잉 단속 등으로 오인하여 위반자가 단속에 대한 불만을 가지기 쉬웠다. 또한 교통 법규 위반에 대한 증명이 곤란함에 따라 단속 결과에 대해 불신도 가지기 쉬웠다. As the police manpower for the crackdown of the above-mentioned traffic laws violates, it is impossible to constantly crack down, and it is easy for the violator to complain about the crackdown by misunderstanding the crackdown by the police as a trap crackdown or excessive crackdown. In addition, it was easy to distrust the consequences of the crackdown as it was difficult to prove the violation of traffic regulations.

이에따라 종래에는 상시 단속이 가능한 무인 단속 시스템을 개발하여 상용하였다. Accordingly, in the related art, an unmanned enforcement system capable of constant enforcement is developed and commercially available.

상기 무인 단속 시스템을 도 1을 참조하여 설명한다. The unmanned enforcement system will be described with reference to FIG. 1.

상기 무인 단속 시스템에 구비되는 촬상장치(102)는 단속 영역에 위치하는 차량(C)에 대해 촬상을 이행하고, 그 촬상에 따른 촬상 정보를 제어장치(100)로 제공한다. 상기 제어장치(100)는 상기 촬상 정보를 처리하여 교통 법규를 위반한 차량을 판별함과 아울러 번호판(N) 등의 차량 정보를 추출하고, 교통 법규 위반에 대한 증빙 정보 및 차량 정보를 중앙 제어 서버로 전송하는 것이다. The imaging device 102 provided in the unmanned control system performs imaging on the vehicle C located in the intermittent area, and provides the control device 100 with imaging information according to the imaging. The control device 100 processes the imaging information to determine a vehicle in violation of traffic regulations, extracts vehicle information such as a license plate N, and provides evidence information and vehicle information for violation of traffic laws and a central control server. Will be sent to.

상기한 촬상장치(102)는 내부 조명 장치를 구비하여, 고품위의 촬상을 위한 광을 단속 영역에 제공하므로, 도 1의 (a)에 도시한 바와 같이 차량(C)이 촬상장치(102)에 근접한 경우에는 촬상 정보로부터 번호판(N) 등의 차량 정보를 용이하게 획득할 수 있었다. 그러나 도 1의 (b)에 도시한 바와 같이 차량(C)이 촬상장치(102)로부터 멀리 이격된 경우에는 차량(C)에 미치는 광량이 부족하여 고품위의 촬상이 불가능하였고, 이에 따라 촬상 정보로부터 번호판(N) 등의 차량 정보를 획득할 수가 없었다. Since the imaging device 102 includes an internal lighting device and provides light for high quality imaging to the intermittent area, the vehicle C is provided to the imaging device 102 as shown in FIG. In the proximity, vehicle information such as the license plate N could be easily obtained from the imaging information. However, as shown in (b) of FIG. 1, when the vehicle C is far from the imaging device 102, the amount of light on the vehicle C is insufficient and high quality imaging is impossible. Vehicle information such as license plate N could not be obtained.

이에따라 종래에는 촬상장치(102)와 차량(C) 사이가 멀리 이격되더라도 고품위의 촬상을 수행할 수 있도록 광량을 조절하는 기술의 개발이 절실히 요망되었다. Accordingly, in the related art, there is an urgent need for the development of a technology for adjusting the amount of light so that high quality imaging can be performed even when the imaging apparatus 102 and the vehicle C are far apart.

또한 교통 법규 단속 또는 주차 관리 등을 이행하는 경우에는 상시 촬상을 이행하여야 하는 경우가 있다. 이와 같이 상시 촬상을 이행하는 경우에도 고품위의 촬상을 위해 내부 조명 장치를 계속하여 구동하였으나, 이는 전력 소모가 큰 문제가 있었다. In addition, when carrying out traffic regulation enforcement or parking management, it is sometimes necessary to carry out imaging. As described above, even when the continuous imaging is performed, the internal lighting device is continuously driven for high-quality imaging, but there is a large power consumption problem.

이에따라 종래에는 차량에 대한 상시 모니터링을 위해 촬상장치가 상시 촬상하는 경우에 전력 소모는 최소화함과 동시에 차량의 상시 모니터링을 가능하게 하는 기술의 개발이 절실히 요망되었다. Accordingly, in the related art, there is an urgent need for the development of a technology that enables the constant monitoring of the vehicle while minimizing the power consumption when the image capturing apparatus is always imaged for the constant monitoring of the vehicle.

본 발명은 촬상 장치와 멀리 이격된 차량에 대한 촬상시에도 충분한 광량이 차량에 제공될 수 있도록 촬상 장치와 주변 조명장치를 동기시켜 구동하는 차량 촬상 시스템 및 그를 위한 광량 제어 방법을 제공하는 것을 그 목적으로 한다. SUMMARY OF THE INVENTION An object of the present invention is to provide a vehicle imaging system and a method for controlling the amount of light for synchronizing and driving an imaging device and an ambient lighting device so that a sufficient amount of light can be provided to a vehicle even when imaging a vehicle spaced apart from the imaging device. It is done.

또한 본 발명의 다른 목적은 상시 촬상을 이행하는 촬상장치가 조명장치를 통해 저휘도의 광을 출력하여 촬상을 이행하다가, 미리 설정해둔 관심(ROI) 영역에 차량의 번호판이 위치할 때에는 관심(ROI) 영역에 대한 정보가 촬상모듈로 입력되는 시간동안 고휘도의 광을 출력하도록 조명장치를 제어하는 차량 촬상 시스템 및 그를 위한 광량 제어 방법을 제공하는 것이다. In addition, another object of the present invention is to take an image when the license plate of the vehicle is located in the region of interest (ROI) that is set in advance while the image pickup device that performs continuous imaging outputs light of low luminance through the lighting device and performs imaging. It is to provide a vehicle imaging system and a method for controlling the amount of light for controlling the lighting device to output high-brightness of light during the time information on the area is input to the imaging module.

상기한 목적을 달성하기 위한 본 발명의 차량 촬상 시스템은, 미리 정해둔 영역을 촬상하는 촬상장치;와, 상기 촬상장치에 촬상을 명령하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 동기시키고, 상기 촬상장치를 통한 촬상시마다 상기 촬상 트리거를 상기 촬상장치로 제공함과 아울러, 그 촬상 트리거에 동기된 구동명령 트리거를 상기 조명장치들로 전송하는 제어장치;를 구비함을 특징으로 한다. According to an aspect of the present invention, there is provided a vehicle imaging system comprising: an imaging apparatus for imaging a predetermined area; a driving command for transmitting an imaging trigger for instructing imaging to the imaging apparatus and lighting devices located in the periphery And a controller for synchronizing a trigger, providing the imaging trigger to the imaging apparatus every time the imaging through the imaging apparatus is performed, and transmitting a driving command trigger synchronized with the imaging trigger to the lighting apparatuses. do.

상기한 본 발명은 촬상 장치와 주변 조명장치를 동기시켜 구동하여 촬상 장치와 멀리 이격된 차량에 대한 촬상시에도 충분한 광량을 얻을 수 있게 하는 효과를 야기한다. The present invention described above causes the effect of enabling a sufficient amount of light to be obtained even when imaging the vehicle spaced apart from the imaging device by driving the imaging device and the ambient lighting device in synchronization.

또한 본 발명은 상시 촬상을 이행하는 촬상장치가 조명장치를 통해 저휘도의 광을 출력하여 촬상을 이행하다가, 미리 설정해둔 관심(ROI) 영역에 차량의 번호판이 위치할 때에는 관심(ROI) 영역에 대한 정보가 촬상모듈로 입력되는 시간동안 고휘도의 광을 출력하여, 전력 소모는 최소화함과 동시에 차량의 상시 모니터링을 가능하게 하는 효과를 야기한다. In addition, the present invention outputs low-brightness light through the lighting device to perform the imaging, the image pickup device that performs the constant image pickup, when the license plate of the vehicle is located in the ROI region previously set in the ROI region Outputting high-brightness of light during the time information is input to the imaging module, thereby minimizing power consumption and at the same time causes the effect of enabling the monitoring of the vehicle.

도 1은 종래 기술에 따른 무인 단속 장치를 예시한 도면.
도 2는 본 발명의 바람직한 실시예에 따른 차량 촬상 시스템의 구성도.
도 3은 본 발명의 바람직한 실시예에 따른 차량 촬상 시스템의 설치예를 도시한 도면.
도 4 및 도 5는 본 발명의 바람직한 실시예에 따른 차량 촬상 시스템의 처리 흐름도.
도 6은 본 발명의 바람직한 실시예에 따른 상시 모니터링 방법의 처리 흐름도.
도 7은 본 발명의 바람직한 실시예에 따른 상시 모니터링시의 촬상정보를 예시한 도면.
도 8은 본 발명의 바람직한 실시예에 따른 상시 모니터링시의 광량 제어 상태를 예시한 도면.
1 illustrates an unmanned enforcement apparatus according to the prior art.
2 is a block diagram of a vehicle imaging system according to a preferred embodiment of the present invention.
3 is a diagram showing an installation example of a vehicle imaging system according to a preferred embodiment of the present invention.
4 and 5 are process flowcharts of a vehicle imaging system according to a preferred embodiment of the present invention.
6 is a process flow diagram of a continuous monitoring method according to a preferred embodiment of the present invention.
7 is a view illustrating image pickup information during constant monitoring according to a preferred embodiment of the present invention.
8 is a view illustrating a light quantity control state during constant monitoring according to a preferred embodiment of the present invention.

본 발명은 촬상 장치와 주변 조명장치를 동기시켜 구동하여 촬상 장치와 멀리 이격된 차량에 대한 촬상시에도 충분한 광량을 얻을 수 있게 한다. The present invention makes it possible to obtain a sufficient amount of light even during imaging of a vehicle spaced apart from the imaging device by driving the imaging device and the ambient lighting device in synchronization.

또한 본 발명은 상시 촬상을 이행하는 촬상장치가 조명장치를 통해 저휘도의 광을 출력하여 촬상을 이행하다가, 미리 설정해둔 관심(ROI) 영역에 차량의 번호판이 위치할 때에는 관심(ROI) 영역에 대한 정보가 찰상모듈로 입력되는 시간동안 고휘도의 광을 출력하도록 조명장치를 제어하여, 전력 소모는 최소화함과 동시에 차량의 상시 모니터링을 가능하게 한다.
In addition, the present invention outputs low-brightness light through the lighting device to perform the imaging, the image pickup device that performs the constant image pickup, when the license plate of the vehicle is located in the ROI region previously set in the ROI region The lighting device is controlled to output high-brightness light during the time information is input to the scratch module, thereby minimizing power consumption and enabling constant monitoring of the vehicle.

<차량 촬상 시스템의 구성><Configuration of the Vehicle Imaging System>

본 발명의 바람직한 실시예에 따른 차량 촬상 시스템의 구성을 도 2를 참조하여 설명한다. A configuration of a vehicle imaging system according to a preferred embodiment of the present invention will be described with reference to FIG.

상기 차량 촬상 시스템은 제어장치(200)와 촬상장치(202)로 구성된다.The vehicle imaging system includes a control device 200 and an imaging device 202.

상기 촬상장치(202)는 미리 정해둔 영역을 촬상하는 촬상모듈(214)과, 상기 영역에 광을 제공하는 내부 조명장치(216)로 구성된다. The imaging device 202 includes an imaging module 214 for imaging a predetermined area, and an internal lighting device 216 for providing light to the area.

상기 제어장치(200)는 상기 촬상장치(202)에 촬상을 명령하는 촬상 트리거와 주변에 위치하는 다수의 조명장치(2041~204N)로 전송하는 구동명령 트리거를 동기시키고, 상기 촬상장치(202)를 통한 촬상시마다 상기 촬상 트리거를 상기 촬상장치(202)로 제공함과 아울러, 그 촬상 트리거에 동기된 구동명령 트리거를 상기 다수의 조명장치(2041~204N)로 전송한다. The controller 200 synchronizes an imaging trigger for instructing the imaging apparatus 202 to capture an image with a driving command trigger for transmitting to a plurality of lighting apparatuses 2041 to 204N located nearby, and the imaging apparatus 202 The image capturing trigger is provided to the image capturing apparatus 202 at each image capturing operation, and a driving command trigger synchronized with the image capturing trigger is transmitted to the plurality of lighting apparatuses 2041 to 204N.

특히 상기 제어장치(200)는 상기 촬상장치(202)를 구동하는 촬상 트리거와 주변에 위치하는 다수의 조명장치(2041~204N)로 전송하는 구동명령 트리거를 생성하고, 그 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서, 상기 촬상장치(202)를 통해 촬상을 이행하고, 그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 검출하고, 그 지연시간을 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정한다. 여기서, 상기 지연시간은 구동명령 트리거가 촬상 트리거에 비해 선행될 수 있다. 이와 같이 촬상 트리거와 구동명령 트리거가 지연되게 설정하는 것은 촬상 트리거에 의해 실제 촬상이 이루어지는 데에 소요되는 시간과 구동명령 트리거에 의해 조명장치가 실제로 광을 촬상대상에 출사하는 데에 소요되는 시간이 상이하기 때문이다. In particular, the control device 200 generates an imaging trigger for driving the imaging device 202 and a driving command trigger for transmitting to a plurality of illumination devices 2041 to 204N located nearby, and the imaging trigger and the driving command trigger are generated. While changing the delay time within a predetermined range, imaging is performed through the imaging device 202, and a delay time for the imaging information having the highest luminance among the imaging information according to the imaging is detected, and the delay is performed. Set the time as the delay time for synchronization between the imaging trigger and the drive command trigger. In this case, the delay time may be preceded by the driving command trigger as compared with the imaging trigger. As described above, setting the delay of the imaging trigger and the driving command trigger means that the time required for actual imaging is performed by the imaging trigger and the time required for the illumination device to actually emit light to the imaging target by the driving command trigger. Because it is different.

또한 상기 제어장치(200)는, 상기 촬상장치(202)를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들(2041~204N)로 전송하는 구동명령 트리거를 생성하고, 촬상 대상의 위치들 각각에 대해, 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서, 상기 촬상장치(202)를 통해 상기 촬상 대상을 촬상하고, 그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 해당 위치에서의 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정할 수도 있다. In addition, the control device 200 generates an imaging trigger for driving the imaging device 202 and a driving command trigger for transmitting to the illumination devices 2041 to 204N located nearby, and to each of the positions of the imaging target. On the other hand, while changing the delay time between the image capturing trigger and the drive command trigger within a predetermined range, the image capturing target is imaged through the image capturing apparatus 202, and the image capturing information having the highest luminance among the image capturing informations according to the image capturing. The delay time may be set as a delay time for synchronization between the imaging trigger and the driving command trigger at the corresponding position.

상기 제어장치(200)는 상시 모니터링을 위하여 상기 촬상모듈(214)에는 계속 촬상을 명령함과 아울러, 상기 내부 조명장치(216)에는 저휘도 발광을 위한 구동전류의 구동전원을 공급하면서 상기 촬상에 따른 촬상정보에서 번호판을 검출하고, 그 번호판이 미리 정해둔 관심(ROI) 영역에 존재하면, 상기 관심(ROI) 영역에 대한 정보가 입력되는 시간동안에는 상기 내부 조명장치(216)에 고휘도 발광을 위한 구동전류의 구동전원을 공급한다. 여기서, 상기 저휘도 발광을 위한 구동전류를 공급하는 동작 모드를 제1조명 제어 모드라 일컫고, 한 프레임에 대한 정보를 입력받는 시간 중 관심(ROI) 영역에 대한 정보가 입력되는 시간동안에는 고휘도 발광을 위한 구동전류를 공급하고 나머지 시간동안에는 저휘도 발광을 위한 구동전류의 구동전원을 공급하는 동작 모드를 제2조명 제어 모드라 일컫는다. The control device 200 continuously commands imaging to the imaging module 214 for constant monitoring, and supplies the driving power of the driving current for low luminance light emission to the internal lighting device 216. If the license plate is detected in the image pickup information, and the license plate is present in a predetermined ROI region, the internal illumination device 216 may emit light for high luminance during a time when information on the ROI region is input. Supply the driving power of the driving current. The operation mode for supplying a driving current for low luminance light emission is referred to as a first lighting control mode, and high luminance light emission is generated during a time when information on a region of interest (ROI) is input among information for receiving one frame. The operation mode for supplying a driving current for supplying the driving current for the low luminance light emission for the rest of the time is referred to as a second lighting control mode.

상기한 제어장치(200)는 제어모듈(206)과 메모리부(208)와 제1통신모듈(210)과 제2통신모듈(212)로 구성된다.The control device 200 includes a control module 206, a memory unit 208, a first communication module 210, and a second communication module 212.

상기 제어모듈(206)는 차량 촬상 시스템의 각부를 전반적으로 제어하며, 특히 상기 촬상장치(202)의 촬상모듈(214) 및 내부 조명장치(216)를 제어함은 물론이며, 제1통신모듈(210)을 통해 원격지의 중앙제어서버(218)와 통신하며, 제2통신모듈(212)을 통해 외부의 조명장치(2041~204N)와 통신을 이행한다. The control module 206 generally controls the respective parts of the vehicle imaging system, and in particular, controls the imaging module 214 and the internal lighting device 216 of the imaging device 202, as well as the first communication module ( Communicate with the central control server 218 of the remote location through the 210, and communicates with the external lighting devices (2041 ~ 204N) through the second communication module (212).

상기 메모리부(208)는 상기 제어모듈(206)의 처리 프로그램을 포함하는 다양한 정보를 저장한다. The memory unit 208 stores various information including a processing program of the control module 206.

상기 제1통신모듈(210)은 유무선 통신방식을 통해 네트워크에 접속하여, 상기 제어모듈(206)과 상기 원격지의 중앙제어서버(218)와의 통신을 이행한다. The first communication module 210 connects to a network through a wired or wireless communication method, and performs communication between the control module 206 and the central control server 218 at the remote location.

상기 제2통신모듈(212)은 근거리 무선 통신방식을 통해 주변에 위치하는 다수의 조명장치(2041~204N)와 제어모듈(206)과의 통신을 이행하다. 특히 상기 다수의 조명장치(2041~204N)는 도 3에 도시한 바와 같이 상기 촬상장치(202)의 촬상모듈(214)의 촬상 영역에 설치된 가로등 또는 보안등 등이 될 수 있다.
The second communication module 212 performs communication with the plurality of lighting devices 2041 to 204N and the control module 206 located in the vicinity through a short range wireless communication method. In particular, the plurality of lighting devices 2041 to 204N may be street lights or security lamps installed in the imaging area of the imaging module 214 of the imaging device 202, as shown in FIG. 3.

<광량 조절 방법><Light intensity adjustment method>

이제 상기한 바와 같이 구성되는 차량 촬상 시스템에 적용 가능한 광량 조절방법을 도 4를 참조하여 설명한다. Now, a light amount adjusting method applicable to the vehicle imaging system configured as described above will be described with reference to FIG. 4.

상기 차량 촬상 시스템의 제어장치(200)는 촬상 명령 트리거와 주변 조명장치들(2041~204N)에 대한 구동명령 트리거 사이의 초기 지연시간을 설정한다(300단계).The control apparatus 200 of the vehicle imaging system sets an initial delay time between an imaging command trigger and a driving command trigger for the ambient lighting apparatuses 2041 to 204N (step 300).

이후 상기 제어장치(200)는 설정된 지연시간에 따라 미리 정해진 영역들 각각에 위치하는 차량에 대해 촬상 명령 트리거 및 주변 조명장치들(2041~204N)에 대한 구동 명령 트리거를 발생한다(302단계). Thereafter, the control apparatus 200 generates an imaging command trigger and a driving command trigger for the peripheral lighting apparatuses 2041 to 204N for the vehicles located in each of the predetermined regions according to the set delay time (step 302).

이후 상기 제어장치(200)는 상기 촬상명령 트리거에 의해 촬상장치(202)가 촬상을 이행하여 촬상정보를 제공하면, 그 촬상정보의 휘도를 검출하고, 그 검출된 휘도와 그 때의 지연시간을 서로 대응시켜 저장한다(304단계). Thereafter, when the imaging apparatus 202 performs imaging by providing the imaging information by the imaging command trigger, the control apparatus 200 detects the luminance of the imaging information, and detects the detected luminance and the delay time at that time. Corresponding to each other and storing (step 304).

이후 상기 제어장치(200)는 촬상 명령 트리거와 주변 조명 장치 구동명령 트리거 사이의 지연시간을 미리 정해둔 간격만큼 변경하고(306단계), 그 변경된 지연시간이 미리 정해둔 범위를 벗어나지 않았다면(308단계), 상기 302 단계로 복귀하여 촬상 및 촬상정보의 휘도 검출 및 그때의 지연시간을 저장하는 과정을 반복한다. Thereafter, the control device 200 changes the delay time between the image capturing command trigger and the ambient lighting device driving command trigger by a predetermined interval (step 306), and if the changed delay time does not deviate from the predetermined range (step 308). In step 302, the process of repeating the process of detecting the image capturing and the luminance of the image capturing information and storing the delay time at that time is repeated.

상기 변경된 지연시간이 미리 정해둔 범위를 벗어났으면, 상기 제어장치(200)는 촬상 정보의 휘도가 가장 큰 값인 지연 시간을 최적 동기를 위한 지연시간으로 설정하여 저장한다(310단계).
If the changed delay time is out of a predetermined range, the control apparatus 200 sets and stores the delay time, which is the value of the brightness of the imaging information, as the delay time for optimal synchronization (step 310).

상기한 바와 같이 최적 동기를 위한 지연시간의 설정후에, 상기 제어장치(200)는 촬상이 요청될 때마다(400단계), 그 촬상 대상의 위치에 대응되는 최적 동기를 위한 지연시간을 리드하고, 그 지연시간에 따라 상기 촬상 명령 트리거와 주변 조명 장치들(2041~204N)에 대한 구동명령 트리거를 출력하며, 상기 촬상 명령 트리거는 상기 촬상장치(202)로 제공되고 상기 주변 조명 장치들(2041~204N)에 대한 구동명령 트리거는 다수의 주변 조명장치(2041~204N)로 전달된다(402단계). 이에 따라 도 3에 도시한 바와 같이 촬상장치(202)로부터 멀리 이격된 차량(C)의 번호판(N)에 주변 조명장치들(2041,2042)에 의해 충분한 광량이 공급됨과 동시에 그 충분한 광을 공급받는 차량(C)을 촬상장치(202)가 촬상하게 되어 촬상정보의 품위는 물론이고 번호판(N)의 인식률을 높일 수 있다.
After setting the delay time for optimal synchronization as described above, whenever the imaging device is requested (step 400), the control apparatus 200 reads the delay time for the optimum synchronization corresponding to the position of the imaging target, The imaging command trigger and the driving command triggers for the ambient lighting devices 2041 to 204N are output according to the delay time, and the imaging command trigger is provided to the imaging device 202 and the ambient lighting devices 2041 to 204 are output. The driving command trigger for 204N is transmitted to the plurality of ambient lighting apparatuses 2041 to 204N (step 402). Accordingly, as shown in FIG. 3, a sufficient amount of light is supplied to the license plate N of the vehicle C spaced apart from the imaging device 202 by the peripheral lighting devices 2041 and 2042, and at the same time, the sufficient light is supplied. The imaging device 202 captures the image of the received vehicle C, thereby increasing the recognition rate of the license plate N as well as the quality of the imaging information.

상기한 본 발명의 실시예와는 달리, 촬상장치가 광각의 렌즈를 구비하여 넓은 영역에 대해 촬상을 이행한다면 제어장치는 촬상영역별로 각기 상이한 동기를 위한 지연시간을 검출할 수도 있다. Unlike the above-described embodiment of the present invention, if the imaging device includes a wide-angle lens to perform imaging for a wide area, the control device may detect a delay time for different synchronization for each imaging area.

즉, 상기 제어장치는, 상기 촬상장치를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 생성하고, 촬상 대상의 위치들 각각에 대해, 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서, 상기 촬상장치를 통해 상기 촬상 대상을 촬상하고, 그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 해당 위치에서의 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정할 수도 있다.
That is, the control device generates a driving command trigger for transmitting the imaging trigger for driving the imaging device and the lighting apparatuses located in the periphery, and for each of the positions of the imaging target, between the imaging trigger and the driving command trigger. The image capturing target is imaged through the image capturing apparatus while the delay time is changed within a predetermined range, and a delay time for image capturing information having the highest luminance among the image capturing information according to the image capturing is driven with the image capturing trigger at the corresponding position. It can also be set as the delay time for synchronization between command triggers.

<상시 모니터링 방법><Always monitoring method>

이제 상기한 차량 촬상 시스템에 적용가능한 본 발명의 바람직한 실시예에 따른 상시 모니터링 방법을 도 6을 참조하여 설명한다. A continuous monitoring method according to a preferred embodiment of the present invention applicable to the above-described vehicle imaging system will now be described with reference to FIG. 6.

상기 제어장치(200)는 상시 모니터링시에는 제1조명 제어 모드와 제2조명 제어 모드에 따라 내부 조명 장치(216)를 구동한다. 즉 제1조명 제어 모드는 도 8의 (a)에 도시한 바와 같이 풀 프레임에 대한 정보가 촬상 모듈(214)로 입력될 때까지 내부 조명 장치(216)에 저전류의 구동전원을 공급하여 저휘도의 광이 출력되도록 하는 것이고, 제2조명 제어 모드는 도 8의 (b)에 도시한 바와 같이 미리 정해둔 시간동안은 내부 조명 장치(216)에 고전류의 구동전원을 공급하여 고휘도의 광이 출력되도록 함과 아울러 나머지 시간은 저전류의 구동전원을 공급하여 저휘도의 광이 출력되도록 하는 것이다. 상기 미리 정해둔 시간은 풀 프레임 중 미리 정해둔 관심(ROI)영역에 대한 정보가 촬상 모듈(214)로 입력되는 시간이다.The control device 200 drives the internal lighting device 216 according to the first lighting control mode and the second lighting control mode at all times during monitoring. That is, in the first lighting control mode, as shown in (a) of FIG. 8, a low current driving power is supplied to the internal lighting device 216 until the information on the full frame is input to the imaging module 214. In the second lighting control mode, a high current driving power is supplied to the internal lighting device 216 for a predetermined time as shown in FIG. In addition to the output time, the remaining time is to supply a low current driving power to output low-brightness light. The predetermined time is a time at which information on a predetermined ROI of a full frame is input to the imaging module 214.

상기 제1조명 제어 모드에 따른 촬상 정보는 도 7의 (a)에 도시한 바와 같이 풀 프레임에 대해 휘도가 낮은 촬상정보가 획득되고, 상기 제2조명 제어 모드에 따른 촬상 정보는 도 7의 (b)에 도시한 바와 같이 관심(ROI) 영역에 대해서만 휘도가 높고 나머지는 휘도가 낮은 촬상정보가 획득된다. In the imaging information according to the first illumination control mode, as shown in FIG. 7A, imaging information with low luminance is obtained for a full frame, and the imaging information according to the second illumination control mode is illustrated in FIG. As shown in b), imaging information having a high luminance only for the ROI region and a low luminance remaining is obtained.

상기 제어장치(200)는 상시 모니터링 모드로의 동작이 개시되면 제1조명 제어 모드로 내부 조명 장치(216)를 구동함과 아울러 촬상 모듈(214)을 통해 계속 촬상을 이행한다(600단계). 상기 촬상 모듈(214)로부터 출력되는 촬상정보로부터 상기 제어장치(200)는 미리 정해진 번호판 규격에 대응되는 패턴을 검출하고, 그 미리 정해진 번호판 규격에 대응되는 패턴이 검출되고, 그 검출된 위치가 프레임상에 미리 정해둔 관심(ROI) 영역인지를 체크한다(602,604단계). When the control device 200 starts to operate in the always-monitoring mode, the control device 200 drives the internal lighting device 216 in the first lighting control mode and continuously performs imaging through the imaging module 214 (step 600). From the imaging information output from the imaging module 214, the control device 200 detects a pattern corresponding to a predetermined license plate standard, a pattern corresponding to the predetermined license plate standard is detected, and the detected position is a frame. It is checked whether the ROI is a predetermined region of interest (steps 602, 604).

상기 번호판 규격에 대응되는 패턴이 검출되고, 그 검출된 위치가 프레임상에 미리 정해둔 관심(ROI) 영역이면, 상기 제어장치(200)는 제2조명 제어 모드로의 동작을 개시한다(606단계). 즉 촬상을 개시함과 아울러 그 촬상에 따른 프레임 중 관심(ROI) 영역에 대해서만 휘도가 높고 나머지는 휘도가 낮은 광을 출력하도록 내부 조명장치(216)에 공급되는 구동전원을 조절한다.
If a pattern corresponding to the license plate standard is detected and the detected position is a predetermined ROI region on the frame, the control apparatus 200 starts the operation in the second lighting control mode (step 606). ). In other words, the driving power supplied to the internal lighting device 216 is adjusted to output light having high luminance only for the ROI region of the frame according to the image capturing and the remaining low luminance.

상기한 본 발명의 실시예에서는 내부 조명 장치의 광량을 제어하는 것만을 예시하였으나, 주변의 조명장치를 연동하여 사용하는 경우에는 주변의 조명장치의 광량도 본 발명에 따라 조절할 수도 있으며, 이는 본 발명에 의해 자명하다.
In the above-described embodiment of the present invention, only the control of the amount of light of the internal lighting device is illustrated, but when using in conjunction with the surrounding lighting device, the amount of light of the surrounding lighting device may also be adjusted according to the present invention. Self-explanatory by

200 : 제어장치
202 : 촬상장치
2041~204N : 다수의 조명장치
218 : 중앙 제어 서버
200: Control device
202: imaging device
2041 ~ 204N: Multiple lighting devices
218: central control server

Claims (8)

차량 촬상 시스템에 있어서,
미리 정해둔 영역을 촬상하는 촬상장치;와,
상기 촬상장치에 촬상을 명령하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 동기시키고,
상기 촬상장치를 통한 촬상시마다 상기 촬상 트리거를 상기 촬상장치로 제공함과 아울러, 그 촬상 트리거에 동기된 구동명령 트리거를 상기 조명장치들로 전송하는 제어장치;를 구비하며,
상기 제어장치가,
상기 촬상장치를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 생성하고,
그 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서,
상기 촬상장치를 통해 촬상을 이행하고,
그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 검출하고,
그 지연시간을 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정함을 특징으로 하는 차량 촬상 시스템.
In a vehicle imaging system,
An imaging device for imaging a predetermined area; and
Synchronizes an imaging trigger for instructing the imaging apparatus with an imaging device trigger and a driving command trigger for transmitting to illumination devices located in the periphery;
And a control device which provides the imaging trigger to the imaging device every time the imaging is performed by the imaging device, and transmits a driving command trigger synchronized with the imaging trigger to the lighting devices.
The control device comprising:
Generating an imaging trigger for driving the imaging apparatus and a driving command trigger for transmitting to an illumination apparatus located around the apparatus;
While changing the delay time between the imaging trigger and the driving command trigger within a predetermined range,
Imaging is performed through the imaging device;
Detecting a delay time for the image pickup information having the highest luminance among the image pickup information according to the image pickup,
And the delay time is set as a delay time for synchronization between the imaging trigger and the drive command trigger.
삭제delete 제1항에 있어서,
상기 제어장치는,
상기 촬상장치를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 생성하고,
촬상 대상의 위치들 각각에 대해,
촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서,
상기 촬상장치를 통해 상기 촬상 대상을 촬상하고,
그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 해당 위치에서의 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정함을 특징으로 하는 차량 촬상 시스템.
The method of claim 1,
The control device includes:
Generating an imaging trigger for driving the imaging apparatus and a driving command trigger for transmitting to an illumination apparatus located around the apparatus;
For each of the positions of the imaging target,
While changing the delay time between the imaging trigger and the driving command trigger within a predetermined range,
Photographing the imaging target through the imaging device;
And a delay time for the imaging information having the highest luminance among the imaging information according to the imaging as a delay time for synchronization between the imaging trigger and the driving command trigger at the corresponding position.
삭제delete 차량 촬상을 위한 광량 제어방법에 있어서,
제어장치가, 미리 정해둔 영역을 촬상하는 촬상장치에 촬상을 명령하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 동기시키는 제1단계;
상기 제어장치가, 상기 촬상장치를 통한 촬상시마다 상기 촬상 트리거를 상기 촬상장치로 제공함과 아울러, 그 촬상 트리거에 동기된 구동명령 트리거를 상기 조명장치들로 전송하는 제2단계;를 구비하며,
상기 제1단계가,
상기 제어장치가, 상기 촬상장치를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 생성하는 단계;
그 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서, 상기 촬상장치를 통해 촬상을 이행하고, 그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 검출하는 단계;
상기 휘도가 가장 높은 촬상정보에 대한 지연시간을 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정하는 단계로 구성됨을 특징으로 하는 차량 촬상을 위한 광량 제어방법.
In the light amount control method for vehicle imaging,
A first step of the controller synchronizing an imaging trigger for instructing imaging to an imaging apparatus for imaging a predetermined area and a driving command trigger for transmitting to an illumination apparatus located in the periphery;
And a second step of providing, by the control apparatus, the imaging trigger to the imaging apparatus every time the imaging is performed by the imaging apparatus, and transmitting a driving command trigger synchronized with the imaging trigger to the lighting apparatuses.
Wherein the first step comprises:
Generating, by the control apparatus, a driving command trigger for transmitting the imaging trigger for driving the imaging apparatus to lighting apparatuses located in the periphery;
While changing the delay time between the imaging trigger and the drive command trigger within a predetermined range, imaging is carried out through the imaging device, and the delay time for the imaging information having the highest luminance among the imaging information according to the imaging is detected. Making;
And setting a delay time for the imaging information having the highest luminance as a delay time for synchronization between an imaging trigger and a driving command trigger.
삭제delete 제5항에 있어서,
상기 제1단계가,
상기 제어장치가, 상기 촬상장치를 구동하는 촬상 트리거와 주변에 위치하는 조명장치들로 전송하는 구동명령 트리거를 생성하는 단계;
촬상 대상의 위치들 각각에 대해, 촬상 트리거와 구동명령 트리거 사이의 지연시간을 미리 정해둔 범위내에서 변경하면서, 상기 촬상장치를 통해 상기 촬상 대상을 촬상하고, 그 촬상에 따른 촬상정보 중 휘도가 가장 높은 촬상정보에 대한 지연시간을 해당 위치에서의 촬상 트리거와 구동명령 트리거 사이의 동기를 위한 지연시간으로 설정하는 단계;로 구성됨을 특징으로 하는 차량 촬상을 위한 광량 제어방법.
The method of claim 5,
Wherein the first step comprises:
Generating, by the control apparatus, a driving command trigger for transmitting the imaging trigger for driving the imaging apparatus to lighting apparatuses located in the periphery;
For each of the positions of the imaging target, the imaging target is picked up through the imaging device while the delay time between the imaging trigger and the driving command trigger is changed within a predetermined range, and the brightness of the imaging information according to the imaging is increased. And setting a delay time for the highest imaging information as a delay time for synchronization between the imaging trigger and the driving command trigger at the corresponding position.
삭제delete
KR1020110040457A 2011-04-29 2011-04-29 Vehicle imeging system and method of controlling intensity of rafiation KR101252671B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110040457A KR101252671B1 (en) 2011-04-29 2011-04-29 Vehicle imeging system and method of controlling intensity of rafiation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110040457A KR101252671B1 (en) 2011-04-29 2011-04-29 Vehicle imeging system and method of controlling intensity of rafiation

Publications (2)

Publication Number Publication Date
KR20120122362A KR20120122362A (en) 2012-11-07
KR101252671B1 true KR101252671B1 (en) 2013-04-09

Family

ID=47508635

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110040457A KR101252671B1 (en) 2011-04-29 2011-04-29 Vehicle imeging system and method of controlling intensity of rafiation

Country Status (1)

Country Link
KR (1) KR101252671B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101737973B1 (en) * 2016-07-13 2017-05-29 주식회사 아프로시스템즈 Shooting synchronous control device, vehicle number recognition System Using the Closed Circuit Tele-Vision
US9953210B1 (en) 2017-05-30 2018-04-24 Gatekeeper Inc. Apparatus, systems and methods for improved facial detection and recognition in vehicle inspection security systems
US11501541B2 (en) 2019-07-10 2022-11-15 Gatekeeper Inc. Imaging systems for facial detection, license plate reading, vehicle overview and vehicle make, model and color detection
US11538257B2 (en) 2017-12-08 2022-12-27 Gatekeeper Inc. Detection, counting and identification of occupants in vehicles
US11736663B2 (en) 2019-10-25 2023-08-22 Gatekeeper Inc. Image artifact mitigation in scanners for entry control systems

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020027648A1 (en) * 2018-07-31 2020-02-06 Kulim Technology Ideas Sdn Bhd Apparatus and method for imaging
WO2020027645A2 (en) * 2018-07-31 2020-02-06 Kulim Technology Ideas Sdn Bhd Apparatus and method for imaging
WO2020027646A2 (en) * 2018-07-31 2020-02-06 Kulim Technology Ideas Sdn Bhd Apparatus and method for imaging

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002260165A (en) 2001-02-27 2002-09-13 Mitsubishi Heavy Ind Ltd Vehicle monitoring system
KR100822426B1 (en) * 2008-01-07 2008-04-16 주식회사 엘리소프트 System for recognizing number of vechicle and method for controlling thereof
JP2009086782A (en) 2007-09-28 2009-04-23 Sumitomo Electric Ind Ltd License number reading device
KR200451773Y1 (en) 2010-08-20 2011-01-12 김종삼 Underground Parking Lot Lighting Control System

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002260165A (en) 2001-02-27 2002-09-13 Mitsubishi Heavy Ind Ltd Vehicle monitoring system
JP2009086782A (en) 2007-09-28 2009-04-23 Sumitomo Electric Ind Ltd License number reading device
KR100822426B1 (en) * 2008-01-07 2008-04-16 주식회사 엘리소프트 System for recognizing number of vechicle and method for controlling thereof
KR200451773Y1 (en) 2010-08-20 2011-01-12 김종삼 Underground Parking Lot Lighting Control System

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101737973B1 (en) * 2016-07-13 2017-05-29 주식회사 아프로시스템즈 Shooting synchronous control device, vehicle number recognition System Using the Closed Circuit Tele-Vision
US9953210B1 (en) 2017-05-30 2018-04-24 Gatekeeper Inc. Apparatus, systems and methods for improved facial detection and recognition in vehicle inspection security systems
US11538257B2 (en) 2017-12-08 2022-12-27 Gatekeeper Inc. Detection, counting and identification of occupants in vehicles
US11501541B2 (en) 2019-07-10 2022-11-15 Gatekeeper Inc. Imaging systems for facial detection, license plate reading, vehicle overview and vehicle make, model and color detection
US11736663B2 (en) 2019-10-25 2023-08-22 Gatekeeper Inc. Image artifact mitigation in scanners for entry control systems

Also Published As

Publication number Publication date
KR20120122362A (en) 2012-11-07

Similar Documents

Publication Publication Date Title
KR101252671B1 (en) Vehicle imeging system and method of controlling intensity of rafiation
CN109383362B (en) Automobile headlamp control method and device
KR101846663B1 (en) Intelligent traffic light control method and controller by vision image analysis
CN104732779B (en) Traffic congestion dispersion method based on traffic signal controller and video monitoring linkage
CN114141021B (en) Smart city traffic signal lamp control system and control method thereof
CN108538059B (en) Control method of electronic police light supplement system
CN202939800U (en) Intelligent high-definition toll-gate system
KR20090008964A (en) Apparatus for controlling of traffic signal lamp by cars number
CN201718085U (en) Novel light compensating lamp with intelligent bayonet function
CN108364479A (en) The system of electronic police Intelligent supplemental lighting
CN105006156A (en) Automatic adjusting and control system used for traffic signal lamp
CN108470450A (en) Electronic police Intelligent supplemental lighting system
CN103956059A (en) Method, device and system for identifying road conditions of traffic light road junctions
US11682219B2 (en) Asymmetrical license plate reading (ALPR) camera system
KR101479178B1 (en) Intelligent camera device for street light replacement
KR20090035394A (en) Violation car enforcement system
CN111489558B (en) License plate recognition method and system
KR20190005343A (en) Movable regulation system for stoping and parking car and that of method for identifying drive on or not
KR100861572B1 (en) System and method regulating a no-parking and no-stoppage zone
KR100925382B1 (en) Violation Car Enforcement System
KR20070094568A (en) The system and method for towing illegal stopping and parking vehicles
KR20060025407A (en) System for monitoring illegal parking and method of the same
CN112565618B (en) Exposure control device
JP2002152560A (en) Image pickup device
CN210515657U (en) Mobile supervision system and bus

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160128

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170209

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180402

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee