WO2021132935A1 - 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템 - Google Patents

인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템 Download PDF

Info

Publication number
WO2021132935A1
WO2021132935A1 PCT/KR2020/017751 KR2020017751W WO2021132935A1 WO 2021132935 A1 WO2021132935 A1 WO 2021132935A1 KR 2020017751 W KR2020017751 W KR 2020017751W WO 2021132935 A1 WO2021132935 A1 WO 2021132935A1
Authority
WO
WIPO (PCT)
Prior art keywords
pedestrian
module
crosswalk
traffic light
detection
Prior art date
Application number
PCT/KR2020/017751
Other languages
English (en)
French (fr)
Inventor
박영석
이재일
김영진
Original Assignee
주식회사 엠제이비전테크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엠제이비전테크 filed Critical 주식회사 엠제이비전테크
Priority to US17/789,503 priority Critical patent/US12002350B2/en
Publication of WO2021132935A1 publication Critical patent/WO2021132935A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/005—Traffic control systems for road vehicles including pedestrian guidance indicator
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54—Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/096—Arrangements for giving variable traffic instructions provided with indicators in which a mark progresses showing the time elapsed, e.g. of green phase
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/095—Traffic lights

Definitions

  • the present invention relates to a method of detecting a pedestrian in a crosswalk and a method of preventing an accident by judging a dangerous situation and guiding a warning message before the corresponding situation occurs.
  • the purpose of the embodiments of the present invention for improving the above-described problems is to detect and analyze pedestrian detection and pedestrians ignoring signals and jaywalking with artificial intelligence, and predict dangerous situations to prevent accidents. To provide a sidewalk pedestrian detection and accident prevention system.
  • Another object of the embodiments of the present invention is to detect an object called a pedestrian through deep learning-based data learning and recognize the pedestrian's behavior to predict the situation of jaywalking in advance and provide a method for preventing accidents. It is to provide a detection and accident prevention system.
  • the artificial intelligence-based pedestrian detection and accident prevention system is installed on the crosswalk installed at the top of the traffic light pole installed in the crosswalk to photograph the crosswalk surrounding and pedestrians.
  • camera device a pedestrian detection module for detecting a pedestrian in the image captured by the camera device through a pre-installed image analysis solution;
  • color detection module for detecting a current blinking color of a traffic light composed of a walking traffic light and a driving signal light;
  • warning signal output module for outputting an unauthorized crossing warning message to a pedestrian waiting for a crosswalk according to the detection result of the color detection module and the detection result of the pedestrian detection module.
  • This artificial intelligence-based pedestrian detection and accident prevention system for crosswalks includes: a safety induction block module installed on the floor of the crosswalk and flickering to be controlled in conjunction with the traffic light; a communication module for transmitting the determination result to the outside when the detection result of the color detection module and the detection result of the pedestrian detection module are determined to be jaywalking or abnormal behavior of a pedestrian; a database for storing the detection result of the color detection module, the detection result of the pedestrian detection module, and judgment progress information on jaywalking or abnormal behavior analyzed by the warning signal output module; and a control module for controlling the operation of the camera device, the pedestrian detection module, the color detection module, the warning signal output module, the safety induction block module, the safety induction block module, the communication module, and the database.
  • the warning signal output module is characterized in that it detects the current blinking color of the traffic light based on the blinking information of the safety induction block module obtained from the camera device.
  • the warning signal output module is characterized in that it determines whether there is an abnormal behavior pattern of the pedestrian through a pre-installed behavior analysis solution in the image taken from the camera device.
  • the control module is characterized in that when the traffic light operates as a flashing signal at night, when a pedestrian is detected by the pedestrian detection module, the control module converts the traffic light into a general flashing signal, and operates the safety induction block module.
  • the warning signal output module is characterized in that it comprises an LED lighting controller installed on the lower side of the crossbar.
  • the control module is coupled to the camera device of the crosspiece and installed on the crosspiece, or it is characterized in that it is installed to be located inside the housing on one side of the supporter installed perpendicularly to the ground.
  • the artificial intelligence-based crosswalk pedestrian detection and accident prevention system detects and analyzes pedestrian detection and a situation in which a pedestrian ignores a signal and crosses without permission, and predicts a dangerous situation to prevent an accident It can be prevented.
  • an embodiment of the present invention can provide a method of predicting a jaywalking situation in advance and preventing an accident by detecting an object called a pedestrian and recognizing the behavior of a pedestrian through deep learning-based data learning.
  • FIG. 1 is a diagram illustrating an AI-based pedestrian detection and accident prevention system in a crosswalk according to an embodiment of the present invention.
  • FIG. 2 is a view showing an artificial intelligence-based pedestrian detection and accident prevention system in a crosswalk according to another embodiment of the present invention.
  • FIG. 3 is a block diagram schematically illustrating an AI-based pedestrian detection and accident prevention system in a crosswalk according to an embodiment of the present invention.
  • first, second, etc. used in the present invention may be used to describe the components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
  • a first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.
  • FIG. 1 is a view showing an artificial intelligence-based pedestrian detection and accident prevention system in a crosswalk according to an embodiment of the present invention
  • FIG. 2 is an artificial intelligence-based pedestrian detection and accident prevention system in a crosswalk according to another embodiment of the present invention
  • 3 is a block diagram schematically showing an artificial intelligence-based pedestrian detection and accident prevention system in a crosswalk according to an embodiment of the present invention.
  • the artificial intelligence-based pedestrian detection and accident prevention system is an embodiment in which a local controller is installed at each traffic light, a camera device 10, a local It includes a controller 100 , a warning signal output module 200 , and a safety induction block module 300 .
  • a crosswalk is located across the road, and traffic light poles are installed on both sides of the sidewalk.
  • the traffic light pole is provided with a pole (1) installed perpendicular to the ground and a crossbar (3) installed on the upper end of the pole (1).
  • a walking traffic light 2 is installed on the pole 1 of the traffic light pole, and a driving signal light (not shown), a camera device 10 and a local controller 100 are installed on the pole 3 of the traffic light pole.
  • the local controller 100 is installed on the crossbar 3 of the traffic light pole, but in FIG. 2 , which is another embodiment, the local controller 1000 is installed on the support 3 of the traffic light pole.
  • the local controllers 100 and 1000 have a pedestrian detection module 110 , a color detection module 120 , a communication module 130 , a database 140 and a control module 150 in a single housing in the form of a PCB. It may be provided as a coupled to the camera device 10 or may be installed alone on the support stand (1).
  • the local controller 100 analyzes the pedestrian signal or driving signal of the crosswalk to detect and analyze the pedestrian detection and the situation where the pedestrian ignores the signal and crosses without permission, predicts a dangerous situation, and a warning signal output module (200) can be used to display the prohibition of jaywalking on the road, and the current traffic light state can be displayed by operating the safety guidance block module 300 provided on the crosswalk.
  • the camera device 10 is installed on the crossbar 3 installed at the top of the traffic light pole installed in the crosswalk, and is a device for photographing the pedestrians around the crosswalk.
  • the camera device 10 acquires image information of all pedestrians by illuminating the entire crosswalk as a network or integrated camera.
  • the image acquired by the camera device 10 is stored in the local controller 100 and at the same time, pedestrian detection and situation analysis are performed using the local controller 100 based on artificial intelligence.
  • the image information acquired by the camera autonomy may be stored in the database 140 and searched, or may be transmitted to a management terminal or a server device through a communication unit provided in the control module 150 .
  • the image information acquired by the camera device 10 may not be stored in the database 140 to be free from personal information infringement.
  • This camera device 10 is installed on the upper side of the crosswalk 3 of the pole of the traffic light and monitors the behavior of pedestrians by photographing around the crosswalk.
  • the camera device 10 may photograph not only pedestrians but also vehicles. That is, although the driver can recognize the pedestrian by providing the driver with information about the pedestrian, it is preferable that the pedestrian also recognizes the vehicle and pays attention to the road walking, and for this purpose, the camera device 10 is photographed It is desirable to enable the camera to simultaneously photograph the pedestrian and the vehicle so that the vehicle information can be notified to the pedestrian.
  • two cameras may be separately installed to allow one side to photograph the pedestrian and the other to photograph the vehicle.
  • the pedestrian detection module 110 is a device for detecting a pedestrian from image information captured by the camera device 10 through a pre-installed image analysis solution.
  • the image analysis solution is an artificial intelligence-based image analysis program, and recognizes a pedestrian in real time from video data transmitted from the camera device 10 (ie, a network camera or an integrated camera) that illuminates the location of the pedestrian.
  • the camera device 10 ie, a network camera or an integrated camera
  • Such an image analysis solution is an image analysis solution that has been known and used to detect the motion of a human body, and a detailed description thereof will be omitted.
  • the image analysis solution communicates with an LED landscape lighting controller (not shown) provided in the warning signal output module 200 according to a mutually agreed standard by wire or wirelessly to control the lighting output from the warning signal output module 200 do.
  • the image analysis solution controls the color of the safety induction block module 300 by communicating with the safety induction block module 300 (ie, the LED safety induction block) according to the mutually agreed standard by wire or wirelessly.
  • the pedestrian detection module 110 detects the presence of a pedestrian in the waiting area set as a predetermined area on the sidewalk adjacent to the crosswalk by placing a separate additional sensor device (not shown) in addition to detecting the pedestrian using the image analysis solution. can do.
  • the sensor may be a motion detection sensor, a Doppler sensor, an ultrasonic sensor, or a combination of at least one of these sensors for detecting the movement of a pedestrian in the waiting area or the walking completion area.
  • the sensor device may detect whether the pedestrian moves to a walking completion area set as a predetermined area. At this time, the projection area is set inside the walking completion area, and the waiting area is set inside the projection area.
  • the warning signal output module 200 can be operated only while it is changed to a blinking yellow light at night as a result of the detection using the color detection module 120 .
  • the warning signal output module 200 projects a predetermined guide message to the area including the waiting area, that is, the projection area.
  • the guide message may be a guide message indicating that pedestrians are trespassing before crossing the crosswalk.
  • the guide message may be projected using the warning signal output module 200 .
  • the guide message may notify the pedestrian by sound.
  • a speaker is further installed in the warning signal output module 200 , and a guide message may be output to the speaker together with the existing warning signal.
  • the color detection module 120 is a device for detecting the current blinking color of a traffic light composed of a walking signal light and a driving signal light. That is, the color detection module 120 detects the blinking colors of the current walking signal light and the driving signal light from the control module 150 or through a separate color identification means (not shown), and provides it to the control module 150 and controls it. The operation of the warning signal output module 200 may be controlled through the module 150 .
  • the warning signal output module 200 is a device for outputting an unauthorized crossing warning message to a pedestrian waiting for a crosswalk according to the detection result of the color detection module 120 and the detection result of the pedestrian detection module 110 .
  • the warning signal output module 200 detects the current state of the traffic light in the crosswalk, and when a pedestrian waiting for a signal is detected, informs the risk of jaywalking in advance.
  • the warning signal output module 200 may detect the current blinking color of the traffic light based on blinking information of the safety induction block module 300 obtained from the camera device 10 .
  • the camera device 10 is provided separately from the aforementioned camera device 10 to detect the current blinking color of the traffic light.
  • the warning signal output module 200 determines whether there is an abnormal behavior pattern of the pedestrian through a pre-installed behavior analysis solution in the image captured by the camera device 10 .
  • the behavior analysis solution is an analysis program that analyzes a pedestrian's behavior pattern by deep-learning, and compares the user's behavior pattern big data stored in advance with the pedestrian's behavior pattern to determine whether the pedestrian has abnormal behavior.
  • the behavior analysis solution is a kind of image analysis solution, and detects abnormalities such as when it is determined that the pedestrian is excessively on the road and is in an accident risk situation, or when it is determined that the pedestrian is crossing outside the crosswalk area. It is regarded as an action and this situation is transmitted to the warning signal output module 200 or the control module 150 .
  • the warning signal output module 200 may include an LED lighting controller (not shown) installed on the lower side of the crossbar 3 .
  • This LED lighting controller adjusts the intensity of the LED landscape lighting under the control of the control module 150 to display a trespassing warning message so that pedestrians on standby can be alert.
  • the warning signal output module 200 warns the pedestrian that there is a driving vehicle around or warns the driver of the driving vehicle that there is a pedestrian can be configured to
  • the warning signal output module 200 may be configured to output a warning message to the front of the pedestrian or the driver of the driving vehicle in consideration of the moving direction of the pedestrian or the driving vehicle.
  • the warning signal output module 200 provides a pedestrian with "Be careful as a vehicle approaches", “Do not cross a vehicle as it is passing.” Appropriate warning phrases can be output, such as “Stop because there are pedestrians”, “Slow down because there are pedestrians”, “Slow down because there are elk.” It is possible to output appropriate warning phrases such as
  • the warning signal output module 200 may be configured with LED lights to illuminate the crosswalk so that pedestrians can safely pass the crosswalk, and when there is no pedestrian, reduce power consumption by lowering the illuminance through the LED lighting controller. , it is desirable to prevent glare of the vehicle driver.
  • the safety induction block module 300 is a device installed on the floor surface of the crosswalk and flickering so as to interlock control with a traffic light.
  • the safety induction block module 300 is interlocked so that the LED safety induction block displays the same color as the traffic light when a pedestrian waits for a signal.
  • the safety induction block module 300 is a light-emitting case in the form of a rectangle with both sides and the bottom open, and the light is transmitted through the upper surface of the substrate so that light can be irradiated to the upper part of the light-emitting case.
  • a plurality of LEDs are installed on the upper part of the light emitting case, and the LED lighting board is inserted into the upper part of the light emitting case, and the LED lighting board inserted in the upper part of the light emitting case can be supported.
  • a buffer member installed between the substrate support block and the base block inside the light emitting case to prevent the light emitting case and the LED lighting substrate from being damaged by a temporary and strong vertical load applied from the upper part of the light emitting case; , a base block inserted into the lower part of the light emitting case to support the light emitting case by landing on the bottom surface, the light emitting case, the LED lighting board, and the board support block are integrally combined, and light is emitted to prevent moisture from penetrating into the LED lighting board It is composed of filled epoxy between the inner top of the case and the top of the LED lighting board, and between the bottom of the LED lighting board and the top of the board support block.
  • the communication module 130 transmits the detection result of the color detection module 120 and the detection result of the pedestrian detection module 110 to the outside (ie, a management terminal or a server device) ) is an interface device that transmits
  • the database 140 stores the detection result of the color detection module 120, the detection result of the pedestrian detection module 110, and the determination progress information on jaywalking or abnormal behavior analyzed by the warning signal output module 200.
  • the stored information may be transmitted to a remote management terminal (not shown) or a server device (not shown) through the communication module 130 provided in the control module 150 as described above.
  • the control module 150 includes a camera device 10, a pedestrian detection module 110, a color detection module 120, a warning signal output module 200, a safety induction block module 300, and a safety according to a previously installed driving program. It is a device that controls the operation of the induction block module 300 , the communication module and the database 140 .
  • the control module 150 converts the traffic light into a normal blinking signal when a pedestrian is detected by the pedestrian detection module 110 when the traffic light operates as a blinking signal at night, and operates the safety induction block module 300 .
  • the control module 150 is coupled to the camera device 10 of the crossbar 3 as shown in FIG. 1 and installed inside the local controller 100, or a post 1 installed vertically on the ground as shown in FIG. 2 . It may be installed on one side of the housing to be located inside the local controller 1000 .
  • the control module 150 predicts the risk of jaywalking in advance by comprehensively analyzing the state of the traffic light and the behavior of pedestrians, and generates a warning message when jaywalking or abnormal behavior is analyzed to induce pedestrians to stop their behavior can do.
  • control module 150 transmits a message that can know the situation to the relevant institution in real time when trespassing or abnormal behavior continues, and when an accident occurs due to trespassing or abnormal behavior continues It can also perform the function of delivering messages to organizations in real time.
  • control module 150 detects pedestrians and all result data of behavior analysis are stored in the database 140 to perform big data analysis, and the analyzed results are expressed as jaywalking statistics for each time zone. can make it
  • control module 150 may obtain the image data of the safety induction block module 300 and analyze the current signal state.
  • control module 150 analyzes whether or not people have invaded a specific area, and when it is determined as an intrusion situation, sends out an intrusion warning by projecting an LED landscape light, and displays related phrases or images according to the type of detected object. It can be projected through landscape lighting.
  • control module 150 when a person is detected at the crosswalk during the operation of the flashing traffic light at night, switches from the flashing to the general traffic light signal and operates the safety induction block module 300 .
  • a flexible solar cell module may be further provided on one side of the crossbar 3 or the post 1 of the shopping street traffic light, and receives sunlight through this to generate electricity, and the generated electricity is converted means is converted and stored in the storage battery, and the electricity stored in the capacitor is designed to be supplied to an electric device including a lighting lamp under the control of the control module 150 .
  • the electricity generated by the solar cell module is converted into electricity that can be supplied to each electric appliance constituting the traffic light of the present invention under the control of the control module 150, and is stored in the capacitor.
  • warning signal output module 300 safety induction block module

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템에 관한 것으로, 횡단보도에 설치된 신호등주의 상단에 설치된 가로대에 설치되어 횡단보도 주변 및 보행자를 촬영하는 카메라 장치; 미리 설치된 영상분석 솔루션을 통하여 상기 카메라 장치에 의하여 촬영된 영상에서 보행자를 검출하는 보행자 검출 모듈; 보행 신호등 및 주행 신호등으로 구성된 신호등의 현재 점멸색을 검출하는 색 검출 모듈; 및 상기 색 검출 모듈의 검출결과와 상기 보행자 검출 모듈의 검출결과에 따라 횡단보도 대기중인 보행자에게 무단 횡단 경고 메시지를 출력하는 경고신호 출력모듈을 포함하여, 보행자 검출과 보행자가 신호를 무시하고 무단횡단하는 상황을 인공지능으로 검출 및 분석을 하고 위험한 상황을 예측하여 사고 발생을 예방할 수 있는 효과가 있다.

Description

인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템
본 발명은 횡단보도에서 보행자를 검출하는 방법과 위험한 상황을 판단하여 해당 상황이 발생하기 전에 경고 메시지를 안내하여 사고를 예방하는 방법에 관한 것이다.
사고예방 캠페인 증가와 ITS 관련 기술이 발달함에 따라 한 해 교통사고로 인해 사망하는 보행자의 수는 지속적으로 감소하고 있다. 하지만 여전히 대한민국은 OECD 국가 평균보다 보행자 사망자의 수가 높은 편이다.
여전히 높은 보행자의 사망률을 낮추기 위해서 교차로나 횡단보도에서 보행자 인식, 위험한 상황을 인지하고 예방하는 기술의 도입이 점점 증가되고 있다.
하지만, 기존의 시스템은 센서기반으로 보행자의 움직임을 찾는 정도의 수준에 머물러 있어서 실제로 보행자의 위험한 상황을 미리 예측하지 못하고, 나아가 움직임만을 판단 근거로 하기 때문에 오탐지율이 증가하여 사고 예방률이 떨어진다는 문제점이 있었다.
전술한 문제점을 개선하기 위한 본 발명 실시예들의 목적은 보행자 검출과 보행자가 신호를 무시하고 무단횡단하는 상황을 인공지능으로 검출 및 분석을 하고 위험한 상황을 예측하여 사고 발생을 예방해주는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 제공하는 것이다.
본 발명 실시예들의 다른 목적은 딥러닝기반의 데이터 학습을 통해서 보행자라는 객체를 검출하고 보행자의 행동을 인식하여 무단횡단이라는 상황을 미리 예측하고 사고를 예방하는 방법을 제공하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 제공하는 것이다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 의한 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템은 횡단보도에 설치된 신호등주의 상단에 설치된 가로대에 설치되어 횡단보도 주변 및 보행자를 촬영하는 카메라 장치; 미리 설치된 영상분석 솔루션을 통하여 상기 카메라 장치에 의하여 촬영된 영상에서 보행자를 검출하는 보행자 검출 모듈; 보행 신호등 및 주행 신호등으로 구성된 신호등의 현재 점멸색을 검출하는 색 검출 모듈; 및 상기 색 검출 모듈의 검출결과와 상기 보행자 검출 모듈의 검출결과에 따라 횡단보도 대기중인 보행자에게 무단 횡단 경고 메시지를 출력하는 경고신호 출력모듈을 포함하는 것을 특징으로 한다.
본 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템은 상기 횡단보도의 바닥면에 설치되어 상기 신호등과 상호 연동제어되도록 점멸되는 안전유도블록모듈; 상기 색 검출 모듈의 검출결과와 상기 보행자 검출 모듈의 검출결과, 보행자의 무단횡단이나 이상행동으로 판정되는 경우 판정결과를 외부로 송출하는 통신 모듈; 상기 색 검출 모듈의 검출결과, 상기 보행자 검출 모듈의 검출결과, 상기 경고신호 출력모듈에 의하여 분석된 무단횡단 또는 이상행동에 대한 판정경과 정보를 저장하는 데이터베이스; 및 상기 카메라 장치, 보행자 검출 모듈, 색 검출 모듈, 경고신호 출력모듈, 안전유도블록모듈, 안전유도블록모듈, 통신 모듈 및 데이터베이스의 동작을 제어하는 제어모듈;을 더 포함하는 것을 특징으로 한다.
상기 경고신호 출력모듈은 상기 카메라 장치로부터 획득된 상기 안전유도블록모듈의 점멸 정보를 기초로 상기 신호등의 현재 점멸색을 검출하는 것을 특징으로 한다.
상기 경고신호 출력모듈은 상기 카메라 장치로부터 촬영된 영상에서 미리 설치된 행동 분석 솔루션을 통하여 보행자의 이상 행동 패턴 여부를 판정하는 것을 특징으로 한다.
상기 제어모듈은 상기 신호등이 야간 점멸신호로 동작하는 경우, 상기 보행자 검출 모듈에 의하여 보행자가 검출되면 상기 신호등을 일반 점멸신호로 전환시키고, 상기 안전유도블록모듈을 동작시키는 것을 특징으로 한다.
상기 경고신호 출력모듈은 상기 가로대의 하부측에 설치되는 LED 조명제어기를 포함하는 것을 특징으로 한다.
상기 제어모듈은 상기 가로대의 카메라 장치와 결합되어 상기 가로대에 설치되거나, 상기 지면에 수직으로 설치된 지주대의 일측에 하우징의 내부에 위치되도록 설치되는 것을 특징으로 한다.
본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템은 보행자 검출과 보행자가 신호를 무시하고 무단횡단하는 상황을 인공지능으로 검출 및 분석을 하고 위험한 상황을 예측하여 사고 발생을 예방할 수 있다.
또한, 본 발명의 일 실시예는 딥러닝기반의 데이터 학습을 통해서 보행자라는 객체를 검출하고 보행자의 행동을 인식하여 무단횡단이라는 상황을 미리 예측하고 사고를 예방하는 방법을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 나타내는 도면이다.
도 2는 본 발명의 다른 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 개략적으로 나타내는 블럭도이다.
상기한 바와 같은 본 발명을 첨부된 도면들과 실시예들을 통해 상세히 설명하도록 한다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서, "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들, 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 나타내는 도면이고, 도 2는 본 발명의 다른 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 나타내는 도면이며, 도 3은 본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템을 개략적으로 나타내는 블럭도이다.
도 1 및 도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템은 각각의 신호등에 로컬제어기가 설치된 실시예로서, 카메라 장치(10), 로컬 제어기(100), 경고신호 출력모듈(200) 및 안전유도블록모듈(300)을 포함한다.
우선, 차도를 가로질러 횡단보도가 위치하고, 인도의 양측에는 각각 신호등주가 설치되어 있다. 상기 신호등주는 지면에 수직하여 설치되는 지주대(1)와 지주대(1)의 상단에 설치되는 가로대(3)가 구비되어 있다.
이때, 상기 신호등주의 지주대(1)에는 보행 신호등(2)이 설치되고, 신호등주의 가로대(3)에는 주행 신호등(미도시), 카메라 장치(10) 및 로컬 제어기(100)가 설치된다. 도 1에서는 신호등주의 가로대(3)에 로컬 제어기(100)가 설치되어 있으나, 또 다른 실시예인 도 2에서는 신호등주의 지주대(3)에 로컬 제어기(1000)가 설치되어 있다.
본 실시예에서 로컬 제어기(100, 1000)에는 보행자 검출 모듈(110), 색 검출 모듈(120), 통신모듈(130), 데이터베이스(140) 및 제어모듈(150)이 하나의 하우징 내부에 PCB 형태로 구비되어 카메라 장치(10)에 결합되거나 지주대(1)에 단독으로 설치될 수 있다.
상기 로컬 제어기(100)는 횡단보도의 보행자신호 또는 주행신호를 분석하여 보행자 검출과 보행자가 신호를 무시하고 무단횡단하는 상황을 인공지능으로 검출 및 분석을 하고 위험한 상황을 예측하여, 경고신호 출력모듈(200)을 활용하여 무단횡단 금지 문구를 도로 상에 표시하고, 횡단보도 상에 구비된 안전유도블록모듈(300)을 작동시켜 현재 신호등 상태를 표시할 수 있다.
상기 카메라 장치(10)는 횡단보도에 설치된 신호등주의 상단에 설치된 가로대(3)에 설치되어 횡단보도 주변 및 보행자를 촬영하는 장치이다. 상기 카메라 장치(10)는 네트워크 또는 일체형 카메라로서 횡단보도 전체를 비추어서 전체 보행자의 영상정보를 획득한다. 상기 카메라 장치(10)에 의하여 획득한 영상은 로컬 제어기(100)에 저장하고 동시에 로컬 제어기(100)를 이용하여 인공지능 기반으로 보행자 검출 및 상황 분석을 진행한다. 또한, 상기 카메라 자치에 의하여 획득한 영상 정보는 데이터베이스(140)에 저장하여 검색하게 할 수도 있고, 제어모듈(150)에 구비된 통신부를 통하여 관리 단말이나 서버 장치에 전송할 수 있다. 다만, 상기 카메라 장치(10)에 의하여 획득된 영상 정보는 개인정보침해에 자유롭도록 데이터베이스(140)에 저장하지 않을 수도 있다.
이러한 카메라 장치(10)는 신호등주의 가로대(3)의 상측에 설치되어 횡단보도 주위를 촬영하여 보행자의 행동을 감시한다.
또한, 상기 카메라 장치(10)는 보행자뿐만 아니라 차량도 촬영할 수 있다. 즉, 운전자에게 보행자의 정보를 제공함에 의해 운전자가 보행자를 인지할 수 있게 할 수 있지만, 보행자도 차량을 인지하여 도로 보행에 주위를 기울일 수 있는 것이 바람직하고, 이를 위해 카메라 장치(10)에서 촬영된 차량 정보를 보행자에게 알릴 수 있도록 카메라로 보행자와 차량을 동시에 촬영할 수 있게 할 수 있게 하는 것이 바람직하다.
물론, 보행자의 행동반경과 차량의 이동 반경이 다르므로 두 개의 카메라를 따로 설치하여 일측은 보행자를 촬영하고, 다른 것은 차량을 촬영할 수 있게 할 수도 있다.
상기 보행자 검출 모듈(110)은 미리 설치된 영상분석 솔루션을 통하여 카메라 장치(10)에 의하여 촬영된 영상 정보에서 보행자를 검출하는 장치이다.
이때, 상기 영상분석 솔루션은 인공지능 기반 영상분석 프로그램으로서, 보행자 위치를 비추는 카메라 장치(10)(즉, 네트워크 카메라 또는 일체형 카메라)로부터 전송되는 동영상 데이터로부터 실시간으로 보행자를 인식한다. 이러한 영상분석 솔루션은 기존에 공지되어 인체의 동작을 검출하는 사용되고 있는 영상분석 솔루션으로서, 그에 대한 상세한 설명은 생략하기로 한다.
상기 영상분석 솔루션은 경고신호 출력모듈(200)에 구비된 LED 경관 조명 제어기(미도시)와 유선 또는 무선으로 상호 약속된 규격에 따라 통신을 하여 경고신호 출력모듈(200)에서 출력되는 조명을 제어한다.
또한, 상기 영상분석 솔루션은 안전유도블록모듈(300)(즉, LED 안전유도블럭)과 유선 또는 무선으로 상호 약속된 규격에 따라 통신을 하여 안전유도블록모듈(300)의 색상을 제어한다.
상기 보행자 검출 모듈(110)은 영상분석 솔루션을 이용하여 보행자를 검출하는 것 이외에, 별도의 추가 센서장치(미도시)를 두어 횡단보도와 인접한 인도에 소정영역으로 설정된 대기영역에 보행자가 존재를 검출할 수 있다. 이때, 상기 센서는 대기영역이나 보행완료 영역에 보행자의 움직임을 검출하는 움직임 검출센서, 도플러센서, 초음파 센서, 이들을 적어도 하나 이상의 조합된 센서일 수 있다.
추가적으로 상기 센서 장치는 소정영역으로 설정된 보행완료 영역에 보행자가 이동하는 지를 검출할 수 있다. 이때, 보행완료영역의 내부에 투사영역이 설정되어 있고, 상기 투사영역의 내부에 대기영역이 설정되어 있다.
상기 경고신호 출력모듈(200)은 색 검출 모듈(120)을 이용하여 파악된 결과, 야간에 점멸 황색등으로 변경되는 동안에만 작동될 수 있다. 상기 경고신호 출력모듈(200)은 대기영역을 포함한 영역, 즉 투사영역에 소정의 안내 메시지를 투사한다. 상기 안내 메시지는 보행자가 횡단보도를 건너기 이전에 무단 횡단 임을 나타내는 안내 메시지일 수 있다.
상기 안내 메시지는 경고신호 출력모듈(200)을 사용해 투사될 수 있다. 다른 실시예로서, 상기 안내 메시지는 소리로 보행자에게 알릴 수 있다. 이를 위해 상기 경고신호 출력모듈(200)에는 스피커가 더욱 부가 설치되고, 기존에 경고 신호와 함께 스피커로 안내 메시지를 출력할 수 있다.
상기 색 검출 모듈(120)은 보행 신호등 및 주행 신호등으로 구성된 신호등의 현재 점멸색을 검출하는 장치이다. 즉, 상기 색 검출 모듈(120)은 현재 보행 신호등과 주행 신호등의 점멸색을 제어모듈(150)로부터 또는 별도의 색 식별수단(미도시)을 통하여 검출하여 제어모듈(150)로 제공하고, 제어모듈(150)을 통하여 경고신호 출력모듈(200)의 동작을 제어하게 할 수 있다.
즉, 상기 경고신호 출력모듈(200)은 색 검출 모듈(120)의 검출결과와 보행자 검출 모듈(110)의 검출결과에 따라 횡단보도 대기중인 보행자에게 무단 횡단 경고 메시지를 출력하는 장치이다.
다시 말해, 상기 경고신호 출력모듈(200)은 횡단보도에서 현재 신호등의 상태를 파악하고 신호 대기중인 보행자가 검출이 되면 무단횡단의 위험을 미리 알려준다.
또한, 상기 경고신호 출력모듈(200)은 카메라 장치(10)로부터 획득된 안전유도블록모듈(300)의 점멸 정보를 기초로 신호등의 현재 점멸색을 검출할 수도 있다. 이러한 경우에는 카메라 장치(10)는 상술한 카메라 장치(10)와 별도로 구비되어 신호등의 현재 점멸색을 검출하게 된다.
상기 경고신호 출력모듈(200)은 카메라 장치(10)로부터 촬영된 영상에서 미리 설치된 행동 분석 솔루션을 통하여 보행자의 이상 행동 패턴 여부를 판정한다. 상기 행동 분석 솔루션은 딥-러닝에 의해 보행자의 행동 패턴을 분석하는 분석프로그램으로서, 미리 저장된 사용자의 행동 패턴 빅데이터와 보행자의 행동 패턴을 비교하여 보행자의 이상 행동 여부를 판단하게 된다. 예를 들어, 상기 행동 분석 솔루션은 영상 분석 솔루션의 일종으로써, 보행자가 도로에 과도하게 있어 사고 위험 상황으로 판단되는 경우, 또는 보행자가 횡단 보도 영역을 벗어나서 횡단 하는 것으로 판단되는 경우 등을 검출하여 이상 행동으로 간주하여 경고신호 출력모듈(200)이나 제어모듈(150)로 이러한 상황을 전달하게 된다.
상기 경고신호 출력모듈(200)은 가로대(3)의 하부측에 설치되는 LED 조명제어기(미도시)를 포함할 수 있다.
이러한 LED 조명제어기는 제어모듈(150)의 제어에 의하여 LED 경관 조명의 세기를 조절하여 무단횡단 경고메시지를 보여주어 대기중인 보행자가 경각심을 가질 수 있도록 한다.
또한, 상기 경고신호 출력모듈(200)은 영상분석 솔루션을 통하여 횡단보도 상에 보행자 및 주행 차량이 식별되는 경우, 보행자에게 주변에 주행 차량이 있음을 경고하거나 주행 차량의 운전자에게 보행자가 있음을 경고하도록 구성될 수 있다.
이럴 경우, 상기 경고신호 출력모듈(200)은 보행자 또는 주행 차량의 이동 방향을 고려하여 보행자나 주행 차량의 운전자의 전방으로 경고 메시지를 출력하도록 구성될 수 있다.
예를 들어, 상기 경고신호 출력모듈(200)은 보행자에게는 "차량이 접근하니 조심하세요", "차량이 지나가니 건너지마세요." 등의 적합한 경고 문구를 출력할 수 있으며, 운전자에게는 "보행자가 있으니 정지하세요."라든가 "보행자가 있으니 서행하세요.", "고라니가 있으니 서행하세요." 등의 적합한 경고 문구를 출력할 수 있다.
상기 경고신호 출력모듈(200)은 보행자가 안전하게 횡단보도를 통행할 수 있도록 횡단보도를 비추도록 LED 조명으로 구성될 수 있고, 보행자가 없을 때에는 LED 조명제어기를 통하여 조도를 낮춤에 의해 전력 소비를 줄이고, 차량 운전자의 눈부심을 방지하는 것이 바람직하다.
상기 안전유도블록모듈(300)은 횡단보도의 바닥면에 설치되어 신호등과 상호 연동제어되도록 점멸되는 장치이다.
상기 안전유도블록모듈(300)은 보행자가 신호를 대기할 때 LED 안전유도블럭이 신호등과 동일한 색깔을 표시하도록 상호 연동된다.
도시되어 있지는 않지만, 상기 안전유도블록모듈(300)은 상부면으로 빛이 투과되는 것으로, 양측과 하단이 개구된 장방형의 형태인 발광케이스와, 발광케이스의 상부로 빛을 조사할 수 있도록 기판의 상부에 다수의 LED가 설치된 형태로 발광케이스의 내부 상부에 삽입 설치된 LED 조명기판과, 발광케이스의 내부 상부에 삽입된 LED 조명기판을 지지할 수 있도록 발광케이스 내부의 LED 조명기판의 하부에 삽입 설치된 기판지지블록과, 발광케이스의 상부로부터 가해지는 일시적이고 강력한 수직 하중에 의해 발광케이스 및 LED 조명기판이 파손되는 것을 방지할 수 있도록 발광케이스 내부의 기판지지블록과 베이스블록의 사이에 설치된 완충부재와, 바닥면에 착지되어 발광케이스를 지지하도록 발광케이스의 내부 하부에 삽입 설치된 베이스블록과, 발광케이스와 LED 조명기판, 그리고 기판지지블록을 일체로 결합하고, LED 조명 기판에 수분이 침투하지 못하도록 발광케이스의 내부 상단과 LED 조명기판의 상단 사이 및 그리고 LED 조명기판의 하단과 기판지지블록의 상단 사이에 충전된 에폭시를 포함하여 구성된다.
상기 통신모듈(130)은 색 검출 모듈(120)의 검출결과와 보행자 검출 모듈(110)의 검출결과, 보행자의 무단횡단이나 이상행동으로 판정되는 경우 판정결과를 외부(즉, 관리 단말이나 서버 장치)로 송출하는 인터페이스 장치이다.
상기 데이터베이스(140)는 색 검출 모듈(120)의 검출결과, 보행자 검출 모듈(110)의 검출결과, 경고신호 출력모듈(200)에 의하여 분석된 무단횡단 또는 이상행동에 대한 판정경과 정보를 저장하는 장치로서, 저장된 정보는 상기한 바와 같이 제어모듈(150)에 구비된 통신모듈(130)을 통해 원격의 관리 단말(미도시)이나 서버 장치(미도시)로 전송될 수 있다.
상기 제어모듈(150)은 미리 설치된 구동 프로그램에 의하여 카메라 장치(10), 보행자 검출 모듈(110), 색 검출 모듈(120), 경고신호 출력모듈(200), 안전유도블록모듈(300), 안전유도블록모듈(300), 통신 모듈 및 데이터베이스(140)의 동작을 제어하는 장치이다.
상기 제어모듈(150)은 신호등이 야간 점멸신호로 동작하는 경우, 보행자 검출 모듈(110)에 의하여 보행자가 검출되면 신호등을 일반 점멸신호로 전환시키고, 안전유도블록모듈(300)을 동작시키게 된다.
상기 제어모듈(150)은 도 1에서와 같이 가로대(3)의 카메라 장치(10)와 결합되어 로컬 제어기(100) 내부에 설치되거나, 도 2에서와 같이 지면에 수직으로 설치된 지주대(1)의 일측에 하우징 형태의 로컬 제어기(1000)의 내부에 위치되도록 설치될 수 있다.
상기 제어모듈(150)은 신호등의 상태와 보행자의 행동을 종합적으로 분석하여 무단횡단의 위험을 미리 예측하게 하고, 무단횡단이나 이상 행동이 분석될 경우 경고 메시지를 발생하여 보행자가 행동을 중단하도록 유도할 수 있다.
또한, 상기 제어모듈(150)은 무단횡단이나 이상행동이 지속될 경우 해당 유관기관에 해당 상황을 알 수 있는 메시지를 실시간으로 전달하고, 무단횡단이나 이상행동이 지속이 되어 사고가 발생했을 경우 해당 유관 기관에 메시지를 실시간으로 전달하는 기능을 수행할 수도 있다.
또한, 상기 제어모듈(150)은 보행자를 검출하고 행동 분석을 한 모든 결과 자료는 데이터베이스(140)에 저장이 되어 빅데이터 분석을 수행하도록 할 수 있고, 분석된 결과는 시간대별 무단횡단 통계로 표출하도록 할 수 있다.
또한, 상기 제어모듈(150)은 안전유도블록모듈(300)의 영상 데이터를 획득하여 현재 신호 상태를 분석할 수도 있다.
또한, 상기 제어모듈(150)은 특정한 영역에 사람들의 침입 여부를 분석하고 침입 상황으로 판단되면 LED 경관 조명을 투사하여 침입 경고를 송출하고, 검출되는 객체의 종류에 따라 연관성 있는 문구나 이미지를 LED 경관 조명을 통해서 투사할 수 있다.
또한, 상기 제어모듈(150)은 야간 점멸신호등 동작시 횡단보도에 사람이 검출이 되면 점멸에서 일반신호등 신호로 전환하고 안전유도블록모듈(300)을 동작시킨다.
도시되어 있지는 않지만, 상가 신호등의 가로대(3) 또는 지주대(1)의 일측에는 플랙시블 솔라셀 모듈이 더 구비될 수 있고, 이를 통하여 태양광을 받아 전기를 생성하고, 생성된 전기는 변환수단을 통해 변환되어 축전지에 저장되며, 제어모듈(150)의 제어에 의해 축전기에 저장된 전기가 조명등을 포함하는 전기장치에 공급되도록 설계된다.
즉, 상기 솔라셀 모듈에 의해 발전된 전기는 제어모듈(150)의 제어에 의해 본 발명의 신호등을 구성하는 각 전기제품에 공급될 수 있는 전기로 변환되고, 축전기에 저장된다.
이상에서는 본 발명에 따른 바람직한 실시예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
*부호의 설명*
1: 지주대 2: 보행 신호등
3: 가로대 10: 카메라 장치
100: 로컬제어기 110: 보행자 검출 모듈
120: 색 검출 모듈 130: 통신모듈
140: 데이터베이스 150: 제어모듈
200: 경고신호 출력모듈 300: 안전유도블록모듈

Claims (7)

  1. 횡단보도에 설치된 신호등주의 상단에 설치된 가로대에 설치되어 횡단보도 주변 및 보행자를 촬영하는 카메라 장치;
    미리 설치된 영상분석 솔루션을 통하여 상기 카메라 장치에 의하여 촬영된 영상에서 보행자를 검출하는 보행자 검출 모듈;
    보행 신호등 및 주행 신호등으로 구성된 신호등의 현재 점멸색을 검출하는 색 검출 모듈; 및
    상기 색 검출 모듈의 검출결과와 상기 보행자 검출 모듈의 검출결과에 따라 횡단보도 대기중인 보행자에게 무단 횡단 경고 메시지를 출력하는 경고신호 출력모듈을 포함하는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  2. 제1항에 있어서,
    상기 횡단보도의 바닥면에 설치되어 상기 신호등과 상호 연동제어되도록 점멸되는 안전유도블록모듈;
    상기 색 검출 모듈의 검출결과와 상기 보행자 검출 모듈의 검출결과, 보행자의 무단횡단이나 이상행동으로 판정되는 경우 판정결과를 외부로 송출하는 통신 모듈;
    상기 색 검출 모듈의 검출결과, 상기 보행자 검출 모듈의 검출결과, 상기 경고신호 출력모듈에 의하여 분석된 무단횡단 또는 이상행동에 대한 판정경과 정보를 저장하는 데이터베이스; 및
    상기 카메라 장치, 보행자 검출 모듈, 색 검출 모듈, 경고신호 출력모듈, 안전유도블록모듈, 안전유도블록모듈, 통신 모듈 및 데이터베이스의 동작을 제어하는 제어모듈;을 더 포함하는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  3. 제2항에 있어서,
    상기 경고신호 출력모듈은 상기 카메라 장치로부터 획득된 상기 안전유도블록모듈의 점멸 정보를 기초로 상기 신호등의 현재 점멸색을 검출하는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  4. 제2항에 있어서,
    상기 경고신호 출력모듈은 상기 카메라 장치로부터 촬영된 영상에서 미리 설치된 행동 분석 솔루션을 통하여 보행자의 이상 행동 패턴 여부를 판정하는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  5. 제2항에 있어서,
    상기 제어모듈은 상기 신호등이 야간 점멸신호로 동작하는 경우, 상기 보행자 검출 모듈에 의하여 보행자가 검출되면 상기 신호등을 일반 점멸신호로 전환시키고, 상기 안전유도블록모듈을 동작시키는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  6. 제1항에 있어서,
    상기 경고신호 출력모듈은 상기 가로대의 하부측에 설치되는 LED 조명제어기를 포함하는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
  7. 제2항에 있어서,
    상기 제어모듈은 상기 가로대의 카메라 장치와 결합되어 상기 가로대에 설치되거나, 상기 지면에 수직으로 설치된 지주대의 일측에 하우징의 내부에 위치되도록 설치되는 것을 특징으로 하는 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템.
PCT/KR2020/017751 2019-12-26 2020-12-07 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템 WO2021132935A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/789,503 US12002350B2 (en) 2019-12-26 2020-12-07 System for detecting pedestrian at crosswalk and preventing accident on basis of artificial intelligence

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2019-0175596 2019-12-26
KR1020190175596A KR102322831B1 (ko) 2019-12-26 2019-12-26 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템

Publications (1)

Publication Number Publication Date
WO2021132935A1 true WO2021132935A1 (ko) 2021-07-01

Family

ID=76574425

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/017751 WO2021132935A1 (ko) 2019-12-26 2020-12-07 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템

Country Status (2)

Country Link
KR (1) KR102322831B1 (ko)
WO (1) WO2021132935A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117156641A (zh) * 2023-09-18 2023-12-01 上海领路人科技股份有限公司 一种基于景观灯光控制系统的直流载波通讯装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102462965B1 (ko) * 2021-10-15 2022-11-04 (주)삼진콘크리트 아파트 단지내 차선유도 칼라블럭을 이용한 보행자 안전보조 시스템
KR102420766B1 (ko) * 2022-02-14 2022-07-14 주식회사 세화 스마트 건널목 시스템
KR102482356B1 (ko) * 2022-07-15 2022-12-29 주식회사 세타 수평 영역 감지 라이다 센서를 이용한 보행신호 음성안내 융복합 장치
KR20240050759A (ko) 2022-10-12 2024-04-19 호남대학교 산학협력단 인공지능 모델을 이용한 교통사고 모니터링 방법
KR102584708B1 (ko) * 2022-12-13 2023-10-05 주식회사 인텔리빅스 과소 및 과밀 환경을 지원하는 군중위험관리시스템 및 방법
KR102626817B1 (ko) * 2023-06-20 2024-01-18 김병기 교통사고 방지를 위한 횡단보도용 안전도어

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080018333A (ko) * 2006-08-24 2008-02-28 전자부품연구원 시각 장애인용 신호등 시스템 및 이를 이용한 신호등 제어방법
KR101233929B1 (ko) * 2012-08-31 2013-02-15 민규식 통행 위반 경고 시스템
KR20160095276A (ko) * 2015-02-02 2016-08-11 사단법인 캠틱종합기술원 보행신호등에 독립적 장착 및 동작 가능한 경보장치
KR20180028170A (ko) * 2016-09-08 2018-03-16 주식회사김스애드 횡단보도 안전장치
KR101906569B1 (ko) * 2018-07-11 2018-12-05 권성국 횡단보도 보행자 안전 시스템

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102027119B1 (ko) 2019-04-29 2019-10-02 주식회사 천일 횡단보도 사고예방장치를 구비한 가로등

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080018333A (ko) * 2006-08-24 2008-02-28 전자부품연구원 시각 장애인용 신호등 시스템 및 이를 이용한 신호등 제어방법
KR101233929B1 (ko) * 2012-08-31 2013-02-15 민규식 통행 위반 경고 시스템
KR20160095276A (ko) * 2015-02-02 2016-08-11 사단법인 캠틱종합기술원 보행신호등에 독립적 장착 및 동작 가능한 경보장치
KR20180028170A (ko) * 2016-09-08 2018-03-16 주식회사김스애드 횡단보도 안전장치
KR101906569B1 (ko) * 2018-07-11 2018-12-05 권성국 횡단보도 보행자 안전 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117156641A (zh) * 2023-09-18 2023-12-01 上海领路人科技股份有限公司 一种基于景观灯光控制系统的直流载波通讯装置
CN117156641B (zh) * 2023-09-18 2024-03-08 上海领路人科技股份有限公司 一种基于景观灯光控制系统的直流载波通讯装置

Also Published As

Publication number Publication date
KR20210083025A (ko) 2021-07-06
US20230045677A1 (en) 2023-02-09
KR102322831B1 (ko) 2021-11-10

Similar Documents

Publication Publication Date Title
WO2021132935A1 (ko) 인공지능 기반 횡단보도 보행자 검출 및 사고 예방 시스템
KR100916632B1 (ko) 카메라를 이용한 보행자 및 차량 자동안전안내 송출을 통한횡단보도 교통안전시스템
WO2019135587A1 (ko) 저고도 설치형 저전력 스마트 가로등 시스템
KR102484348B1 (ko) 교통약자 횡단보도 구역 보행자 위치 추적 스마트폴시스템
WO2011046410A2 (ko) 지능형 가로등 시스템
WO2015142005A1 (ko) 횡단보도 교통 안전 시스템
KR101590420B1 (ko) 횡단보도 안전장치
WO2015023090A1 (ko) 교통 표지판
CN102958257A (zh) 一种楼梯照明装置控制系统和方法
KR102231298B1 (ko) 스마트 횡단보도 등기구
KR101279166B1 (ko) 유에스엔 태양광 가로등의 점등제어장치
KR20200073477A (ko) 횡단보도 안전 조명 시스템
WO2021112277A1 (ko) 횡단보도 보행자의 안전 관리 시스템
KR20090118653A (ko) 횡단보도용 신호등 어셈블리
KR20200098853A (ko) 스마트폰 사용자의 횡단보도 보행 안전을 관리하는 스마트 신호등 경보장치
KR20180001731A (ko) 보행자 보호를 위한 횡단보도 조명제어장치 및 그 방법
KR102027119B1 (ko) 횡단보도 사고예방장치를 구비한 가로등
JP2008100782A (ja) エレベータおよびその安全装置
WO2019216517A1 (ko) 적응적 전력 절약 및 밝기 조절이 가능한 휴대용 조명장치
KR20180082788A (ko) 도로의 점멸신호 안전관리 시스템
CN112258831A (zh) 一种智能斑马线安全防护系统
CN210324568U (zh) 一种行人过街综合杆
KR101074470B1 (ko) 가로등용 옥외 비상 호출부를 이용한 위치 확인 시스템
WO2012169691A1 (ko) 차량 사고 방지를 위한 횡단 보도용 가로등
US12002350B2 (en) System for detecting pedestrian at crosswalk and preventing accident on basis of artificial intelligence

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20908203

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20908203

Country of ref document: EP

Kind code of ref document: A1