WO2023195355A1 - 検知システム、検知装置、及び検知装置の設置方法 - Google Patents

検知システム、検知装置、及び検知装置の設置方法 Download PDF

Info

Publication number
WO2023195355A1
WO2023195355A1 PCT/JP2023/011684 JP2023011684W WO2023195355A1 WO 2023195355 A1 WO2023195355 A1 WO 2023195355A1 JP 2023011684 W JP2023011684 W JP 2023011684W WO 2023195355 A1 WO2023195355 A1 WO 2023195355A1
Authority
WO
WIPO (PCT)
Prior art keywords
sensor
area
detection
crosswalk
image sensor
Prior art date
Application number
PCT/JP2023/011684
Other languages
English (en)
French (fr)
Inventor
峻也 浅野
Original Assignee
住友電気工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 住友電気工業株式会社 filed Critical 住友電気工業株式会社
Publication of WO2023195355A1 publication Critical patent/WO2023195355A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/07Controlling traffic signals
    • G08G1/08Controlling traffic signals according to detected number or speed of vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/095Traffic lights
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present disclosure relates to a detection system, a detection device, and a method for installing the detection device.
  • This application claims priority based on Japanese Application No. 2022-064297 filed on April 8, 2022, and incorporates all the contents described in the said Japanese application.
  • sensors are installed on the roadside to detect objects on the road (vehicles, pedestrians, etc.).
  • Various sensors such as image sensors and millimeter wave sensors are conventionally known as roadside sensors (roadside sensors).
  • roadside sensors roadside sensors
  • the composite sensor includes, for example, an image sensor and a millimeter wave sensor. This composite sensor increases detection accuracy when detecting objects on the road by integrating sensor data from an image sensor and sensor data from a millimeter wave sensor.
  • Patent Document 1 A road sensing system using such a composite sensor is disclosed in Patent Document 1 listed below.
  • the road sensing system disclosed in Patent Document 1 uses a plurality of sensors to detect objects on the road.
  • the plurality of sensors includes a radar sensor with a first field of view and a camera (image sensor) with a second field of view.
  • the plurality of sensors have a common field of view where at least a portion of the first field of view and the second field of view overlap. In the common field of view, sensor data from the radar sensor and sensor data from the camera are integrated.
  • the road sensing system of Patent Document 1 is configured to be able to detect pedestrians crossing a crosswalk.
  • Each sensor is installed at a position looking down the target crosswalk (a position away from the target crosswalk), and the common field of view, which is the overlap between the first field of view and the second field of view, is towards the crosswalk. is set to be located.
  • the common field of view which is the overlap between the first field of view and the second field of view, is towards the crosswalk. is set to be located.
  • a detection system includes a first sensor installed above a first area adjacent to a crosswalk, and a first detection target area in which the first sensor detects an object is in the first area.
  • a first sensor including at least a part of the crosswalk, and a second sensor installed above the first area, wherein a second detection target area in which the second sensor detects an object includes at least a part of the crosswalk;
  • the second sensor has a different detection characteristic from the first sensor.
  • a detection device includes a first sensor, a second sensor having different detection characteristics from the first sensor, and a housing that unitizes the first sensor and the second sensor.
  • the body is installed on a support member provided in a first area adjacent to a crosswalk, and in a state where the housing is installed on the support member, a first detection target area where the first sensor detects an object is in the first area.
  • the second detection target area in which the second sensor detects the object includes at least a portion of the crosswalk.
  • a detection device installation method is an installation method of installing the detection device on a support member provided above a first area adjacent to a crosswalk, the detection device being installed in a first area adjacent to a crosswalk.
  • An image sensor whose detection target area is at least a part of the area, a millimeter wave sensor whose detection target area is a crosswalk, a housing that unitizes the image sensor and the millimeter wave sensor, and installation of the housing on the support member. It includes an installation angle adjustment device that adjusts the angle and an imaging direction adjustment device that adjusts the imaging direction of the image sensor, and the installation method includes a step of attaching a casing to a support member and an operator operating the imaging direction adjustment device.
  • the detection target area of the millimeter-wave sensor can be adjusted by adjusting the imaging direction of the image sensor to the detection direction of the millimeter-wave sensor and by having the worker operate the installation angle adjustment device based on the image information from the image sensor.
  • the area to be detected by the image sensor is adjusted by adjusting the installation angle of the housing so as to include at least a portion of the crosswalk, and by having the worker operate the imaging direction adjustment device based on the image information from the image sensor. adjusting the imaging direction of the image sensor so that the first area includes at least a portion of the first area.
  • FIG. 1 is a diagram for explaining the overall configuration of a detection system according to a first embodiment.
  • FIG. 2 is a plan view for explaining the detection system shown in FIG. 1.
  • FIG. 3 is a diagram for explaining the detection system shown in FIG. 1.
  • FIG. 4 is a diagram for explaining the detection system shown in FIG. 1.
  • FIG. 5 is a block diagram showing a configuration example of the detection system shown in FIG. 1.
  • FIG. 6 is a block diagram showing an example of the configuration of the integrated processing section.
  • FIG. 7 is a flowchart showing an example of a control structure of a program executed in the detection system shown in FIG.
  • FIG. 8 is a detailed flow of step S1000 in FIG.
  • FIG. 9 is a detailed flowchart of step S1020 in FIG. 7.
  • FIG. 10 is a diagram showing an example of the operation of the detection system shown in FIG. 1.
  • FIG. 11 is a diagram showing an example of the operation of the detection system shown in FIG. 1.
  • FIG. 12 is a diagram for explaining a detection system of a comparative example.
  • FIG. 13 is a plan view for explaining a detection system according to Modification 1.
  • FIG. 14 is a plan view for explaining a detection system according to modification 2.
  • FIG. 15 is a block diagram showing a configuration example of a detection system according to the second embodiment.
  • FIG. 16 is a diagram for explaining the detection system shown in FIG. 15.
  • FIG. 17 is a flowchart showing an example of a control structure of a program executed in the detection system shown in FIG. 15.
  • FIG. 18 is a perspective view showing a configuration example of a detection system (detection device) according to the third embodiment.
  • FIG. 19 is a side view showing a configuration example of the detection system (detection device) shown in FIG. 18.
  • FIG. 20 is a block diagram showing a configuration example of the detection system (detection device) shown in FIG. 18.
  • FIG. 21 is a block diagram showing a configuration example of a detection device according to modification 3.
  • FIG. 22 is a block diagram showing a configuration example of a detection device according to modification 4.
  • FIG. 23 is a perspective view showing a configuration example of a detection system (detection device) according to the fourth embodiment.
  • FIG. 24 is a side view showing a configuration example of the detection system (detection device) shown in FIG. 23.
  • FIG. 25 is a block diagram showing a configuration example of the detection system (detection device) shown in FIG. 23.
  • FIG. 26 is a block diagram showing a configuration example of an imaging direction adjustment device.
  • FIG. 27 is a block diagram showing a configuration example of the installation angle adjustment device.
  • FIG. 28 is a diagram showing an example of a terminal device that communicates with the detection system (detection device) shown in FIG. 23.
  • FIG. 29 is a sequence diagram showing the process of installing and adjusting the detection device shown in FIG. 23.
  • FIG. 30 is a diagram for explaining a detection system according to the fifth embodiment.
  • FIG. 31 is a diagram for explaining the detection system shown in FIG. 30.
  • FIG. 32 is a flowchart showing an example of a control structure of a program executed in the detection system shown in FIG.
  • FIG. 33 is a diagram for explaining another configuration example of the detection system.
  • FIG. 34 is a diagram for explaining still another configuration example of the detection system.
  • each sensor is installed at a position looking diagonally downward at the target crosswalk.
  • an existing support member such as a pole
  • the detection area is to be extended to the pedestrian waiting area around the crosswalk (hereinafter simply referred to as the "waiting area")
  • the installation position of the sensor is changed accordingly.
  • a new support member must be installed for installing the sensor. If a new support member is installed, additional construction costs will be incurred. Therefore, the cost burden increases.
  • a traffic light pole for pedestrians is installed near the waiting area. If this signal lamp pole can be used to install sensors, the increase in cost burden can be suppressed.
  • the installation position of each sensor is restricted because pedestrians at a crosswalk are detected in a common field of view. Therefore, it is difficult to use existing signal lamp pillars for installing each sensor.
  • the present disclosure has been made to solve the above-mentioned problems, and one purpose of the present disclosure is to provide a detection system and a detection device that have a high degree of freedom in installing sensors and can detect a wider area. It is to provide.
  • Another object of the present disclosure is to provide a method for installing a detection device that has a high degree of installation freedom and can detect a wider area.
  • the detection system includes a first sensor installed above a first area adjacent to a crosswalk, and a first detection target area where the first sensor detects an object. a first sensor that includes at least a part of the first area; and a second sensor that is installed above the first area, and the second detection target area in which the second sensor detects an object covers at least a part of the crosswalk. and a second sensor having different detection characteristics from the first sensor.
  • the first sensor sets an area that includes at least a portion of the first area adjacent to the crosswalk as a detection target area.
  • the second sensor uses at least a portion of the crosswalk as a detection target area.
  • the first sensor can be installed near the crosswalk, and the second sensor can be installed near the first sensor. Therefore, the first sensor and the second sensor can be installed near a crosswalk, which has been difficult to install in the past. That is, the degree of freedom in installing each sensor can be increased.
  • the existing support members can be easily used for installing each sensor, so it is possible to suppress an increase in cost due to installing new support members.
  • the first sensor and the second sensor are used to detect different areas as detection target areas, it is possible to detect objects in a wider area. Furthermore, the first sensor is used to detect objects in the first area, and the second sensor, which has different detection characteristics from the first sensor, is used to detect objects in the crosswalk, so that the sensor is suitable for detecting objects in each area. sensors can be used as the first sensor and the second sensor. Thereby, it is possible to suppress a decrease in object detection accuracy.
  • At least a portion of the first detection target area may be configured to overlap with the second detection target area in the first area or the crosswalk. This makes it easier to provide information about the object detected by the first sensor to the second sensor.
  • the second sensor can recognize an object that has moved from the first area to the crosswalk by receiving object information from the first sensor, and can therefore track the object at the crosswalk.
  • the overlapping area where the first detection target area and the second detection target area overlap is defined as any of the first detection target area excluding the overlapping area and the second detection target area excluding the overlapping area.
  • the configuration may be smaller than the area. Thereby, the area in which objects are detected can be easily expanded.
  • the detection target area of the second sensor may be larger than the detection target area of the first sensor.
  • the first sensor includes an image sensor that detects an object that exists in the first area, and the second sensor detects an object that exists at a crosswalk.
  • the configuration may include a millimeter wave sensor.
  • the detection system may be configured to further include a casing that unitizes the first sensor and the second sensor. This makes it easy to install multiple sensors.
  • the casing has a first surface and a second surface intersecting the first surface, and the first sensor is provided on the second surface of the casing, and the first sensor is provided on the second surface of the casing.
  • the sensor may be provided at a position corresponding to the first surface inside the housing.
  • the millimeter wave sensor includes an antenna that emits a detection signal in the millimeter wave band and receives a reflected wave of the emitted detection signal from an object, and the antenna is located inside the housing.
  • the structure may be provided in parallel to the first surface.
  • the detection system may further include an imaging direction adjustment device that adjusts the imaging direction of the image sensor. Thereby, the imaging direction of the image sensor can be easily adjusted.
  • the detection system may further include a lighting device that illuminates the first area. Thereby, it is possible to suppress a decrease in recognition accuracy of the image sensor due to a decrease in illuminance.
  • the first sensor is installed on the support member provided in the first area
  • the second sensor is installed on the support member provided in the first area.
  • the configuration may be such that the This makes it easier to use the existing support member by installing each sensor.
  • the casing is installed on a support member provided in the first area, and further includes an installation angle adjustment device that adjusts the installation angle of the casing. There may be. Thereby, the installation angle of the casing and, by extension, the installation angle of each sensor can be easily adjusted.
  • the detection system identifies the type and orientation of the object existing in the first area based on the sensor data from the first sensor, and according to the identification result.
  • the configuration may further include a processing unit that executes a process of causing the second sensor to track the identified object at the crosswalk. This makes it possible to track objects in conjunction with object recognition in the first area.
  • the processing unit may be configured to further execute a predetermined process according to the identification result of the object in the first area or the tracking status of the object at the crosswalk. This makes it possible to support traffic safety by effectively utilizing tracking status information.
  • the predetermined processing includes notifying a vehicle attempting to enter a crosswalk of the presence of an object, recording the trajectory of the object at the crosswalk, and
  • the configuration may include at least one control of a traffic light device for a passenger. This makes it easier to support traffic safety.
  • a detection device includes a first sensor, a second sensor having different detection characteristics from the first sensor, and a housing that unitizes the first sensor and the second sensor.
  • the housing is installed on a support member provided in a first area adjacent to the crosswalk, and the first detection target area where the first sensor detects an object while the housing is installed on the support member. includes at least a portion of the first area, and a second detection target area in which the second sensor detects an object includes at least a portion of the crosswalk.
  • the first sensor By unitizing a plurality of sensors with a housing, the first sensor can be installed near the detection target area, and the second sensor can be installed near the first sensor. Therefore, the first sensor and the second sensor can be installed at a location close to a crosswalk, which has been difficult to install in the past. That is, the degree of freedom in installing each sensor can be increased. By increasing the degree of freedom in installing each sensor, the existing support member can be easily used for installing each sensor. As a result, it is possible to suppress an increase in cost due to newly installing a support member.
  • the first sensor covers at least a part of the first area adjacent to the crosswalk as a detection target area
  • the second sensor covers at least a part of the crosswalk as a detection target area.
  • the detection device may have a configuration in which the detection system further includes a lighting device that is provided in the housing and illuminates the first area. Thereby, it is possible to suppress a decrease in recognition accuracy of the first sensor due to a decrease in illuminance.
  • the first sensor includes an image sensor that detects an object that exists in the first area
  • the second sensor includes a millimeter-wave sensor that detects an object that exists in the second area.
  • the structure may include a sensor.
  • a detection device installation method is an installation method in which the detection device is installed on a support member provided above a first area adjacent to a crosswalk, the detection device being installed on a support member provided above a first area adjacent to a crosswalk. , an image sensor whose detection target area is at least a part of the first area, a millimeter wave sensor whose detection target area is a crosswalk, a casing that unitizes the image sensor and the millimeter wave sensor, and a casing for the support member. It includes an installation angle adjustment device that adjusts the installation angle of the body, and an imaging direction adjustment device that adjusts the imaging direction of the image sensor.
  • the operator adjusts the imaging direction of the image sensor to the detection direction of the millimeter-wave sensor by operating the operator, and the operator operates the installation angle adjustment device based on the image information from the image sensor to detect the millimeter-wave sensor.
  • the present disclosure can be realized not only as a detection system, a detection device, and a method for installing the detection device including such a characteristic configuration, but also in the characteristic steps performed by the detection system or the detection device, or the detection system.
  • the present invention can also be implemented as a program for causing a computer to execute the characteristic steps executed in the device installation method, and a recording medium on which the program is recorded.
  • it can also be realized as a detection system or other system or device including a detection device.
  • a detection system 50 is a system installed on the roadside.
  • This detection system 50 detects objects on the road (vehicles, pedestrians, etc.) using roadside sensors.
  • the detection system 50 includes a plurality of sensors as roadside sensors.
  • the plurality of sensors include, for example, the image sensor 100 and the millimeter wave sensor 200, which is a sensor with different detection characteristics from the image sensor 100.
  • Image sensor 100 is typically a camera.
  • Image sensor 100 may be either a monocular camera or a stereo camera.
  • the millimeter wave sensor 200 is a radar sensor that detects the distance, direction, and speed of an object using radio waves in the millimeter wave band.
  • the image sensor 100 mainly detects objects (for example, people such as the waiting person P) in the waiting area 10.
  • the millimeter wave sensor 200 mainly detects objects (for example, people such as pedestrians) on the crosswalk 20. Millimeter wave sensor 200 also has a function of tracking detected objects. In this way, the image sensor 100 and the millimeter wave sensor 200 detect objects in different areas. Furthermore, the image sensor 100 has a function of recognizing objects in the waiting area 10.
  • the image sensor 100 recognizing an object means that the image sensor 100 has obtained data indicating the type of object, as will be described later.
  • the image sensor 100 recognizes is not limited to the type of object, but may also be the orientation of a person, the presence of an object that has entered the crosswalk from the waiting area, or the presence of a crosswalk that has crossed the crosswalk.
  • the image sensor 100 identifies the movement direction of the person by tracking the movement of the person before stopping in the waiting area 10 in time series using a Kalman filter, and the identified movement direction is determined by tracking the movement of the person before stopping in the waiting area 10. Recognize the direction.
  • the image sensor 100 identifies the direction of the line of sight of the person who has stopped in the waiting area 10 or the direction from the person's back to the chest through image analysis, and recognizes the identified direction as the direction of the person who has stopped in the waiting area 10. do.
  • a traffic light pole 30 for pedestrians is provided near the waiting area 10.
  • the image sensor 100 and the millimeter wave sensor 200 are installed on the signal lamp column 30 via the arm member 32.
  • the arm member 32 is attached to the signal lamp column 30 so as to be located above the waiting area 10. That is, the image sensor 100 and the millimeter wave sensor 200 are attached to an existing support member called the signal lamp column 30.
  • the roadway extends in a direction that intersects the direction of travel of the crosswalk, and a sidewalk is installed at a position across the roadway and the crosswalk.
  • Roadways include crosswalks, and sidewalks include waiting areas.
  • the two lines that extend straight along the road and curve in the middle are the boundaries between the road and the sidewalk.
  • a standby area 10 is located directly below the image sensor 100, and the image sensor 100 defines an area including the standby area 10 (first area) as a detection target area 60.
  • the waiting area is an area near a crosswalk where people wait until they can cross the crosswalk.
  • the detection target area 60 of the image sensor 100 is preferably set to include the entire standby area 10.
  • the detection target area 60 of the image sensor 100 since there is no clear boundary line in the waiting area, the detection target area 60 of the image sensor 100 only needs to be set so that the target waiting person can be detected. Therefore, the detection target area 60 of the image sensor 100 may be set to include the standby area 10. Since the size of the waiting area also changes depending on the size of the crosswalk, etc., the detection target area 60 of the image sensor 100 is changed as appropriate depending on the size of the crosswalk.
  • the area corresponding to the crosswalk 20 (second area) is adjacent to the waiting area 10.
  • the millimeter wave sensor 200 sets a second area (crosswalk 20) adjacent to the waiting area 10 as a detection target area 70.
  • the detection target area 70 of the millimeter wave sensor 200 is preferably set to cover the entire crosswalk 20. However, the detection target area 70 of the millimeter wave sensor 200 may be set to cover a part of the crosswalk 20. In that case, the remaining area of the crosswalk 20 may be included in the detection target area of a sensor other than the millimeter wave sensor 200 (for example, the image sensor 100).
  • An image sensor 100a similar to the image sensor 100 is provided in the waiting area 12 of the crosswalk 20.
  • a traffic light pole 40 for pedestrians is also provided near the waiting area 12.
  • This image sensor 100a is installed on the signal lamp column 40 via an arm member 42.
  • a standby area 12 is located directly below the installation position of the image sensor 100a.
  • the image sensor 100a detects objects in the standby area 12 by setting the area including the standby area 12 as the detection target area 62.
  • the image sensor 100 is mounted facing downward so that the imaging direction faces the standby area 10, that is, the area directly below is the subject of imaging.
  • An image sensor 100a provided above the standby area 12 is also attached in the same manner.
  • the millimeter wave sensor 200 is installed so as to look diagonally downward at the crosswalk 20.
  • a signal lamp 34 is provided on the signal lamp column 30 where the image sensor 100 and the millimeter wave sensor 200 are installed, and a signal lamp 34 is provided on the signal lamp column 40 where the image sensor 100a is installed.
  • a container 44 is provided.
  • At least a portion of the detection target area 60 of the image sensor 100 overlaps with the detection target area 70 of the millimeter wave sensor 200 at the crosswalk 20 (second area).
  • the detection target area 70 of the millimeter wave sensor 200 overlaps with the detection target area 60 of the image sensor 100 in the standby area 10 (first area).
  • an overlapping area 64 is formed between the detection target area 60 of the image sensor 100 and the detection target area 70 of the millimeter wave sensor 200.
  • an overlapping area 66 is formed between the detection target area 62 of the image sensor 100a and the detection target area 70 of the millimeter wave sensor 200.
  • detection target area 70 of millimeter wave sensor 200 is larger than detection target area 60 of image sensor 100.
  • An overlapping area 64 where the detection target area 70 of the millimeter wave sensor 200 and the detection target area 60 of the image sensor 100 overlap is the detection target area 60 of the image sensor 100 excluding the overlapping area 64 and the millimeter wave sensor excluding the overlapping area 64. It is smaller than any of the 200 detection target areas 70.
  • the detection target area 70 of the millimeter wave sensor 200 is larger than the detection target area 62 of the image sensor 100a.
  • An overlapping area 66 where the detection target area 70 of the millimeter wave sensor 200 and the detection target area 62 of the image sensor 100a overlap is the detection target area 62 of the image sensor 100a excluding the overlapping area 66, and the millimeter wave sensor excluding the overlapping area 66. It is smaller than any of the 200 detection target areas 70.
  • detection system 50 includes an image sensor 100, a millimeter wave sensor 200, and an integrated processing section 300.
  • Image sensor 100 includes an imaging section 110 and an image processing section 120.
  • the imaging unit 110 includes a lens, an imaging device, and the like.
  • the image processing unit 120 processes information captured by the imaging unit 110.
  • the millimeter wave sensor 200 includes an antenna 210 that transmits and receives radio waves, a transmitter 220 that irradiates a target with millimeter wave radio waves (detection signals) via the antenna 210, and a wave reflected by the target of the irradiated radio waves. It includes a receiving section 230 that receives data via an antenna 210, and a processing circuit section 240.
  • the processing circuit section 240 detects the distance, direction, and speed of an object by processing information on transmission and reception of radio waves by the transmitting section 220 and the receiving section 230.
  • the image sensor 100 and the millimeter wave sensor 200 perform time synchronization by acquiring time information from, for example, an NTP (Network Timing Protocol) server (not shown).
  • NTP Network Timing Protocol
  • the integration processing unit 300 performs processing for integrating sensor data from the image sensor 100 and sensor data from the millimeter wave sensor 200, processing for causing the millimeter wave sensor 200 to track an object, and processing for controlling a signal lamp according to the tracking status of the object. Executes various processes such as control processes.
  • the integrated processing unit 300 also has a function of communicating with the image sensor 100a provided above the standby area 12.
  • the image sensor 100a also performs time synchronization with the image sensor 100 and the millimeter wave sensor 200 by acquiring time information from, for example, an NTP server (not shown).
  • the detection system 50 may include an image sensor 100a provided above the standby area 12.
  • integrated processing section 300 includes a calculation section 302, memory 304, and communication section 306.
  • the calculation unit 302 includes a calculation element (processor) such as a CPU (Central Processing Unit) or an MPU (MicroProcessing Unit).
  • the memory 304 is, for example, a nonvolatile storage device.
  • Software (computer program) executed by the calculation unit 302 is stored in the memory 304 in advance.
  • the communication unit 306 communicates information with each sensor including the image sensor 100 and the millimeter wave sensor 200, and with equipment such as a signal lamp by wire or wirelessly.
  • this program includes a step S1000 in which an object in the waiting area is recognized by an image sensor, and is executed after step S1000, in which the integrated processing unit sends a switching instruction to switch the signal lamp to a green light.
  • step S1010 which is executed after step S1010, in which the integrated processing unit causes the millimeter wave sensor to track a pedestrian crossing the crosswalk; and step S1020, which is executed after step S1020, and a switching instruction to switch the signal lamp to a red light.
  • the process includes step S1030 in which the integrated processing unit transmits the information to the signal lamp concerned, and step S1040, which is executed after step S1030 and waits until a predetermined time has elapsed. In step S1040, when a predetermined period of time has elapsed, control returns to step S1000.
  • FIG. 8 is a detailed flow of step S1000 in FIG. 7. Referring to FIG. 8, this routine is executed after step S1100, which detects an object in the waiting area by processing sensor data of an image sensor, and determines whether there is a person in the waiting area. , and step S1110 of branching the flow of control according to the determination result. If it is determined in step S1110 that there is no one in the waiting area, control returns to step S1100.
  • step S1110 This routine is further executed when it is determined in step S1110 that there is a person in the waiting area, and step S1120 is performed to recognize the direction of the detected person by processing sensor data of the image sensor (image processing). and step S1130, which is executed after step S1120 and determines whether the detected person has been facing the crosswalk for more than t seconds, and branches the flow of control according to the determination result.
  • step S1130 it is determined whether the detected person has been facing the crosswalk for, for example, 5 to 15 seconds or more. If it is determined in step S1130 that the detected person has not faced the crosswalk for t seconds or more, control returns to step S1120.
  • This routine is further executed when it is determined in step S1130 that the detected person has been facing the crosswalk for t seconds or more, and includes step S1140 in which it is determined that there is a person who wishes to cross, and this routine is ended.
  • FIG. 9 is a detailed flowchart of step S1020 in FIG. 7.
  • this routine is executed after step S1200 in which the image sensor provides (sends) information on people detected in the waiting area (crosser information) to the millimeter wave sensor, and step S1200.
  • the process includes step S1210 of controlling a millimeter wave sensor to track a person crossing a crosswalk, and step S1220 of notifying a vehicle approaching the crosswalk of information on the person crossing the crosswalk.
  • This routine further includes step S1230, which is executed after step S1220 and uses an image sensor to detect the pedestrians who have crossed the crosswalk;
  • the process includes step S1240 in which it is determined whether or not the case is true, and the flow of control is branched depending on the determination result.
  • This routine is further executed when it is determined in step S1240 that all the detected persons have not completely crossed the crosswalk, and it is determined whether a predetermined time has elapsed since the light changed to green;
  • the process includes step S1250 in which the flow of control is branched depending on the determination result. If it is determined in step S1250 that the predetermined time has not elapsed since the light was switched to green, the control returns to step S1210.
  • This routine further executes this routine when it is determined in step S1240 that all the detected persons have crossed the crosswalk, or in step S1250, when it is determined that a predetermined time has elapsed since the light changed to green.
  • the routine includes step S1260, which is executed and ends tracking of the pedestrian by the millimeter wave sensor, and ends this routine.
  • the detection system 50 operates as follows.
  • the image sensor 100 of the detection system 50 recognizes objects in the waiting area 10. It is assumed that there are a person A and a person B in the waiting area 10. Image sensor 100 detects person A and person B present in waiting area 10 (YES in step S1100 and step S1110 in FIG. 8), and assigns a label (object ID) to the detected person. The image sensor 100 recognizes the direction of the detected person (step S1120), and based on the recognition result, determines whether there is a person who has been facing the crosswalk 20 for t seconds or more. Person B is facing in a direction other than the crosswalk 20, while person A is facing in the direction of the crosswalk 20.
  • the image sensor 100 determines that there is a person facing the crosswalk 20 for more than t seconds (YES in step S1130), and determines that there is a person who wishes to cross (step S1140). .
  • the integrated processing unit 300 transmits an instruction to switch to a green signal to the signal lamp 34 and the signal lamp 44 in response to the determination by the image sensor 100 that there is a person who wishes to cross (step S1010 in FIG. 7).
  • the signal light device 34 and the signal light device 44 switch to green, the person A starts crossing the crosswalk 20.
  • an image sensor 100 collects information on pedestrians entering a crosswalk 20 (crosser information: for example, a label given to a detected object, a point of entry into a crosswalk, a direction, etc.). It is sent to the millimeter wave sensor 200.
  • the integration processing unit 300 (see FIG. 5) integrates the sensor data from the image sensor 100 and the sensor data from the millimeter wave sensor 200 in the overlapping area 64, thereby reducing the number of pedestrians entering the crosswalk 20.
  • information on the person here, information on person A
  • step S1200 in FIG. 9 is provided to the millimeter wave sensor 200 (step S1200 in FIG. 9).
  • the millimeter wave sensor 200 recognizes the person A who has entered the crosswalk 20 based on the pedestrian information from the image sensor 100, and starts tracking the person crossing the street (person A) (step S1210).
  • the integrated processing unit 300 notifies a vehicle attempting to enter the crosswalk 20 that there is a pedestrian crossing the crosswalk 20 (step S1220).
  • the image sensor 100a on the outflow side of the crosswalk 20 detects objects in the waiting area 12.
  • the image sensor 100a on the outflow side uses a millimeter wave sensor to collect information on pedestrians flowing out from the crosswalk 20 (crosser information: for example, a label given to a detected object, a point of entry into the crosswalk, a direction, etc.). Receive from 200.
  • the integration processing unit 300 integrates the sensor data from the image sensor 100a and the sensor data from the millimeter wave sensor 200 in the overlapping area 64, thereby collecting pedestrian information flowing from the crosswalk 20 (here Now, information on person A) is given to the image sensor 100a.
  • the image sensor 100a on the outflow side recognizes the pedestrian who has crossed the crosswalk 20, and sends the information to the integrated processing unit 300.
  • the integrated processing unit 300 detects the crosswalks that have crossed the crosswalk 20 based on the information from the image sensor 100a on the outflow side (step S1230), and detects that all the detected crosswalks have completely crossed the crosswalk 20. Determine whether or not.
  • the only person crossing the crosswalk 20 is person A, so when person A crosses the crosswalk 20, the integrated processing unit 300 determines that all the detected persons have crossed the crosswalk 20. (YES in step S1240).
  • the millimeter wave sensor 200 ends tracking (step S1260), and the integrated processing unit 300 transmits an instruction to switch to a red light to the signal lamp 34 and signal lamp 44 (step S1030 in FIG. 7).
  • the integrated processing unit 300 detects that if the elapsed time after transmitting the instruction to switch to a green signal to the signal lamp device 34 and the signal lamp device 44 becomes a predetermined time or more, all the people detected will cross the crosswalk 20. Regardless of whether the crossing has been completed or not, an instruction to switch to a red light is transmitted to the signal lamp device 34 and signal lamp device 44 (step S1030 in FIG. 7).
  • the detection system 50 waits for a predetermined time with the red light on, and when the predetermined time has elapsed (YES in step S1040), repeats the above-described operation.
  • the detection system 50 according to the present embodiment has the following effects.
  • a composite sensor 1000 including an image sensor and a millimeter wave sensor integrates sensor data from the image sensor and sensor data from the millimeter wave sensor to detect objects on the road. Improve detection accuracy. Therefore, the image sensor and the millimeter wave sensor use the same detection target area. Since it is difficult for both the image sensor and the millimeter wave sensor to obtain a wide viewing angle in the vertical direction, the composite sensor 1000 is installed so as to look down on the crosswalk 20 diagonally. If the composite sensor 1000 is installed in the signal lamp column 30 near the waiting area 10 in this way, it becomes difficult to detect objects in the waiting area 10. Therefore, it is necessary to newly install a support member 1010 such as a pole in a place set back from the standby area 10, and install the composite sensor 1000 there. In this case, construction costs for newly installing the support member 1010 are additionally incurred, increasing the cost burden.
  • a detection system 50 has an image sensor 100 and a millimeter wave sensor 200 configured to detect different areas as detection target areas. Make the area detectable. Specifically, the image sensor 100 sets an area including the waiting area 10 adjacent to the crosswalk 20 as the detection target area 60.
  • the millimeter wave sensor 200 uses at least a portion of the crosswalk 20 as a detection target area 70. Thereby, the image sensor 100 can be installed near the detection target area 60, and the millimeter wave sensor 200 can be installed near the image sensor 100. Since the degree of freedom in installing each sensor can be increased, the signal lamp column 30, which is an existing support member, can be used for installing each sensor. Therefore, it is possible to suppress an increase in cost burden due to newly installing a support member.
  • the image sensor 100 covers the waiting area 10 adjacent to the crosswalk 20 as the detection target area 60, and the crosswalk 20 is covered by the detection target area 70 of the millimeter wave sensor 200. Cover.
  • the image sensor 100 and the millimeter wave sensor 200 By setting the image sensor 100 and the millimeter wave sensor 200 to detect different areas as detection target areas, objects in a wider area can be detected.
  • a suitable sensor can be used. Thereby, it is possible to suppress a decrease in object detection accuracy.
  • the detection system 50 at least part of the detection area 60 of the image sensor 100 overlaps with the detection area 70 of the millimeter wave sensor 200 at the crosswalk 20, and at least part of the detection area 70 of the millimeter wave sensor 200 overlaps with the detection area 70 of the millimeter wave sensor 200 at the crosswalk 20. , overlaps with the detection target area 60 of the image sensor 100 in the standby area 10 .
  • This makes it easier to provide information about objects detected by the image sensor 100 to the millimeter wave sensor 200.
  • the millimeter wave sensor 200 can recognize an object that has moved from the waiting area 10 to the crosswalk 20 by receiving object information from the image sensor 100, and can therefore track the object at the crosswalk 20. Note that the above configuration also makes it easier to provide information about objects detected by millimeter wave sensor 200 to image sensor 100.
  • the overlapping area 64 where the detection target area 60 of the image sensor 100 and the detection target area 70 of the millimeter wave sensor 200 overlap is defined as the detection target area 60 of the image sensor 100 excluding the overlapping area 64 and the millimeter wave sensor excluding the overlapping area 64.
  • the image sensor 100 Since the image sensor 100 is installed facing downward in order to detect objects in the waiting area 10, the image sensor 100 can be focused on detection and recognition directly below. This makes it possible to use a camera with low sensitivity as the image sensor 100. Furthermore, since the image sensor 100 is installed with the lens facing downward, it is possible to prevent the lens from getting dirty. Since the lens of the image sensor 100 faces downward, it becomes easier to clean the lens using, for example, a long-handled mop.
  • the image sensor 100a provided in the standby area 12 also has a similar effect.
  • waiting area 10 may not be located directly below image sensor 100 depending on the position of signal lamp column 30 or the surrounding situation of crosswalk 20.
  • the image sensor 100 is installed such that the area 80 directly below the image sensor 100 includes at least a part of the standby area 10. That is, the image sensor 100 sets an area that includes at least a portion of the standby area 10 as a detection target area 82 for the standby area 10 that includes at least a portion of the area 80 directly below the image sensor 100 .
  • the area 80 corresponding to directly below the image sensor 100 can be, for example, an area that can be detected by the image sensor 100 when the image sensor 100 is facing directly below.
  • the detection target area 82 can be set to include at least a portion of the standby area 10.
  • the detection system of Modification 2 differs from the above-described embodiment in that the detection target area 72 of millimeter wave sensor 200 is wider. Specifically, the detection target area 72 of the millimeter wave sensor 200 includes at least a portion of the waiting area 12 in addition to the crosswalk 20. That is, the millimeter wave sensor 200 detects objects in the waiting area 12 in addition to objects in the crosswalk 20. Thereby, an image sensor for detecting objects in the standby area 12 can be omitted. Note that FIG. 14 shows an example in which the detection target area 84 of the image sensor 100 is set to include a part of the standby area 10.
  • a detection system 50A includes a lighting device 320 that illuminates the waiting area, and an image sensor 150 instead of the image sensor 100 (see FIG. 5). This is different from the first embodiment. Other configurations are similar to those of the first embodiment.
  • the lighting device 320 includes a white LED (Light Emitting Diode) that emits visible light.
  • Image sensor 150 further has a function as an illuminance sensor.
  • the image sensor 150 detects objects in the waiting area 10 and measures the illuminance of the waiting area 10 based on captured image data.
  • the image sensor 150 outputs an ON signal to the lighting device 320 when the illuminance of the waiting area 10 becomes less than the reference value, and outputs an OFF signal to the lighting device 320 when the illuminance of the waiting area 10 exceeds the reference value.
  • the reference value can be, for example, an illuminance at which the detection performance of the image sensor 150 deteriorates due to insufficient light amount.
  • an image sensor 150a is installed on the signal lamp column 40 provided in the waiting area 12, and a lighting device that illuminates the waiting area 12 may be provided near the image sensor 150a.
  • the image sensor 150a measures the illuminance of the standby area 12. Similar to the image sensor 150, the image sensor 150a outputs an ON signal to the lighting device when the illuminance of the waiting area 12 becomes below the reference value, and outputs an ON signal to the lighting device when the illuminance of the waiting area 12 exceeds the reference value. Outputs an OFF signal.
  • step S2000 of measuring the illuminance of the waiting area step S2010, which determines whether the illuminance of the waiting area is below a reference value and branches the flow of control according to the determination result. including. If it is determined in step S2010 that the illuminance of the standby area is not lower than the reference value, control returns to step S2000.
  • This program is further executed when it is determined in step S2010 that the illuminance of the waiting area is below the reference value, and is executed after step S2020 of turning on the lighting device 320 (see FIG. 15), Step S2030 of measuring the illuminance of the waiting area; and Step S2040, which is executed after step S2030, determines whether the illuminance of the waiting area exceeds a reference value, and branches the flow of control according to the determination result. . If it is determined in step S2040 that the illuminance of the standby area does not exceed the reference value, control returns to step S2030.
  • This program further includes step S2050, which is executed when it is determined in step S2040 that the illuminance of the waiting area exceeds the reference value, and turns off the lighting device 320 and returns the control to step S2000.
  • the detection system 50A operates as follows. Note that operations other than the operation of controlling the lighting device 320 are the same as those in the first embodiment.
  • image sensor 150 measures the illuminance of standby area 10 based on image information of standby area 10.
  • the image sensor 150 outputs an ON signal to the lighting device 320 (see FIG. 15) (step S2020).
  • the lighting device 320 supplies power to the white LED in response to an ON signal from the image sensor 150 to illuminate the standby area 10.
  • the image sensor 150 measures the illuminance of the waiting area 10 (step S2030), and when the illuminance of the waiting area 10 exceeds the reference value (YES in step S2040), it outputs an OFF signal to the lighting device 320 (step S2050). .
  • the lighting device 320 stops supplying power to the white LED in response to the OFF signal from the image sensor 150, and finishes irradiating the standby area 10 with visible light.
  • the image sensor 150a provided above the standby area 12 similarly measures the illuminance of the standby area 12, and outputs an ON signal to the lighting device when the illuminance of the standby area 12 becomes less than the reference value.
  • the lighting device illuminates the standby area 12 by supplying power to the white LED in response to an ON signal from the image sensor 150a.
  • the image sensor 150a outputs an OFF signal to the lighting device.
  • the lighting device stops supplying power to the white LED in response to the OFF signal from the image sensor 150a, and finishes irradiating the standby area 12 with visible light.
  • the detection system 50A includes the lighting device 320 that illuminates the waiting area, thereby suppressing a decrease in recognition accuracy of the image sensor 150 due to a decrease in illuminance.
  • the image sensor 150a also has a similar effect.
  • the second embodiment shows an example in which the image sensor has the function of an illuminance sensor
  • the present disclosure is not limited to such an embodiment.
  • a configuration may be adopted in which an illuminance sensor is provided separately.
  • the lighting device may be configured to include an illuminance sensor so that the lighting device is turned on and off independently according to the illuminance of the waiting area.
  • the lighting device may be separate from the image sensor or may be integrated with the image sensor.
  • a detection system 50B according to the present embodiment is different from the first and second embodiments in that the image sensor 100 and the millimeter wave sensor 200 are unitized by a housing 330. is different. That is, the detection system 50B according to the present embodiment integrates the image sensor 100 and the millimeter wave sensor 200 by providing the image sensor 100 and the millimeter wave sensor 200 in one housing 330.
  • the detection device 400 is configured by unitizing the image sensor 100 and the millimeter wave sensor 200 with the housing 330. That is, the detection system 50B includes a detection device 400 in which an image sensor 100 and a millimeter wave sensor 200 are integrated into a unit by a housing 330. A first surface 332 and a second surface 334 disposed below the first surface 332 are provided on the front surface of the housing 330. Millimeter wave sensor 200 is provided inside housing 330 at a position corresponding to first surface 332 . The image sensor 100 is provided on the second surface 334 of the housing 330. Specifically, a radome 336 that is a cover for protecting the antenna 210 (see FIG.
  • Millimeter wave sensor 200 is provided on the first surface 332 of the housing 330.
  • Millimeter wave sensor 200 is provided inside housing 330 at a position corresponding to first surface 332 .
  • the antenna 210 is arranged inside the housing 330 so as to face the radome 336. That is, the antenna 210 is provided parallel to the first surface 332. However, the antenna 210 may be provided with some inclination with respect to the first surface 332.
  • Image sensor 100 is attached to second surface 334 of housing 330.
  • the second surface 334 of the housing 330 intersects the first surface 332 at a predetermined angle Y.
  • the predetermined angle Y is such that when the housing 330 is installed on a roadside support member (for example, a traffic light pole) so that the detection area of the millimeter wave sensor 200 corresponds to a crosswalk, the detection area of the image sensor 100 corresponds to a crosswalk.
  • the angle includes at least a portion of the waiting area.
  • a detection device 400 has a configuration in which an image sensor 100 and a millimeter wave sensor 200 are provided in a housing 330.
  • the integrated processing unit is configured separately from the detection device 400, and the detection device 400 executes predetermined processing by communicating with the integrated processing unit.
  • the image sensor 100 and the millimeter wave sensor 200 are unitized with the housing 330, it is possible to easily install a plurality of sensors. Furthermore, by providing the millimeter wave sensor 200 at a position corresponding to the first surface 332 inside the casing 330 and providing the image sensor 100 on the second surface 334 that intersects the first surface 332 at a predetermined angle Y, the image Installation of the sensor 100 and the millimeter wave sensor 200 can be facilitated.
  • a detection device 400A according to modification 3 differs from the third embodiment in that it further includes an integrated processing unit 300.
  • a detection device 400B according to modification 4 differs from the third embodiment in that it further includes a lighting device 320 that illuminates the waiting area.
  • the detection device 400B may be configured to further include an integrated processing unit as in the third modification.
  • a detection system 50C according to the present embodiment is different from the third embodiment in that the imaging direction of the image sensor and the installation angle of the casing can be adjusted. It is different from.
  • the other configurations are similar to the third embodiment.
  • the detection system 50C includes a detection device 500.
  • Detection device 500 includes an image sensor 100, a millimeter wave sensor 200, and a housing 340 that houses them.
  • the housing 340 has a similar shape to the housing 330 shown in the third embodiment (see FIGS. 18 and 19).
  • the front surface of the housing 340 is provided with a first surface 332 and a second surface 334 disposed below the first surface 332.
  • Millimeter wave sensor 200 is provided inside housing 340 at a position corresponding to first surface 332 .
  • An imaging direction adjustment device 520 for adjusting the imaging direction of the image sensor 100 is provided on the second surface 334 of the housing 340, and the image sensor 100 is connected to the imaging direction adjustment device 520.
  • the second surface 334 of the housing 340 intersects the first surface 332 at a predetermined angle Y (see FIG. 19).
  • the detection device 500 further includes an installation angle adjustment device 510 for adjusting the installation angle of the housing 340.
  • the housing 340 is fixed to the arm member 32 by a fixture 350.
  • the installation angle adjustment device 510 is provided between the back surface of the housing 340 and the fixture 350.
  • detection device 500 further includes a control section 530 that controls imaging direction adjustment device 520 and installation angle adjustment device 510.
  • the control unit 530 includes a communication unit 532 that communicates with the terminal device 600 wirelessly or by wire (here, wirelessly).
  • the control unit 530 drives the imaging direction adjustment device 520 and the installation angle adjustment device 510 in response to a control command from the terminal device 600.
  • the detection device 500 may have a configuration including an integrated processing section, as shown in the third modification.
  • the detection device 500 may further include a lighting device that illuminates the waiting area, as shown in Modification 4.
  • the imaging direction adjustment device 520 includes a movable coupling section 512 for attaching the image sensor 100 to the housing 340, and a motor 514 for driving the movable coupling section 512.
  • the motor 514 is, for example, a stepping motor, and drives the movable coupling section 512 in accordance with instructions from the control section 530 (see FIG. 25). By driving the movable connecting portion 512 by the motor 514, the imaging direction of the image sensor 100 changes.
  • the installation angle adjustment device 510 includes a movable connecting portion 522 provided between the housing 340 and the fixture 350 (see FIGS. 23 and 24), and a movable connecting portion 522 for driving the movable connecting portion 522. and a motor 524.
  • the motor 524 is, for example, a stepping motor, and drives the movable coupling section 522 in accordance with instructions from the control section 530 (see FIG. 25).
  • the installation angle of the housing 340 is changed by driving the movable connecting portion 522 by the motor 524.
  • terminal device 600 is, for example, a smartphone.
  • Terminal device 600 includes a touch panel display 610 that displays information and accepts user operation input by touch.
  • the terminal device 600 is configured such that the installation angle of the housing 340 and the imaging direction of the image sensor 100 can be adjusted.
  • the touch panel display 610 includes an image display area 612 that displays an image captured by the image sensor 100, and an operation area 614 that accepts an operation to change the installation angle of the housing 340 and the imaging direction of the image sensor 100.
  • the detection device 500 may further include a device, such as a gyro sensor, that measures the orientation of the image sensor 100 and the orientation of the casing. In that case, the detection device 500 may transmit the orientation of the image sensor 100 and the orientation of the housing 340 measured by the device to the terminal device 600 via the control unit 530. Thereby, the user of the terminal device 600 can know the orientation of the image sensor 100 and the orientation of the housing 340 via the terminal device 600.
  • a device such as a gyro sensor
  • FIG. 29 is a sequence diagram showing the process of installing and adjusting the detection device 500 by an operator. A method for installing and adjusting the detection device 500 will be described with reference to FIG. 29.
  • the worker attaches the sensor housing (detection device 500) to the arm member 32 of the signal lamp column (step S3000).
  • the detection device 500 transmits the image (image information) captured by the image sensor 100 to the terminal device 600 (step S3010).
  • the terminal device 600 displays the image captured by the image sensor 100 in the image display area 612 (see FIG. 28) (step S3020).
  • the operator performs an operation on the terminal device 600 to set the millimeter wave sensor 200 and the image sensor 100 in the same direction (step S3030).
  • the terminal device 600 receives the operator's operation and transmits a corresponding control command to the detection device 500 (step S3040).
  • the detection device 500 drives the imaging direction adjustment device 520 in accordance with the control command from the terminal device 600, and adjusts the imaging direction of the image sensor 100 to the direction of the millimeter wave sensor 200 (radio wave irradiation direction) (step S3050).
  • the operator performs an operation on the terminal device 600 to adjust the installation angle of the housing 340 while viewing the image displayed in the image display area 612 of the terminal device 600 (step S3060).
  • the terminal device 600 receives the operator's operation and transmits a corresponding control command to the detection device 500 (step S3070).
  • the detection device 500 drives the installation angle adjustment device 510 according to the control command from the terminal device 600 (step S3080), and changes the installation angle of the housing 340.
  • the area imaged by the image sensor 100 generally coincides with the radio wave irradiation area of the millimeter wave sensor 200. That is, the image display area 612 displays an area where the millimeter wave sensor 200 can detect an object.
  • the worker walks along the outer periphery of the crosswalk and adjusts the angle of the millimeter wave sensor 200 while confirming that his or her own image is reflected in the image display area 612 of the terminal device 600. If there are multiple workers, other workers may walk along the outer periphery of the crosswalk. Thereby, the worker can visually align the detection target area (radio wave irradiation area) of the millimeter wave sensor 200 with the crosswalk.
  • the operator instructs the terminal device 600 to adjust the imaging direction (camera angle) of the image sensor 100 so that the target waiting area is reflected in the image display area 612.
  • the terminal device 600 receives the operator's operation and transmits a corresponding control command to the detection device 500 (step S3100).
  • the detection device 500 drives the imaging direction adjustment device 520 in accordance with the control command from the terminal device 600 (step S3110), and changes the imaging direction (camera angle) of the image sensor 100.
  • the operator determines the position where the target waiting area is displayed in the image display area 612 as the imaging direction of the image sensor 100. This completes the installation and adjustment work for the detection device 500.
  • the terminal device 600 is not limited to a smartphone, and may be, for example, a tablet terminal, a personal computer (laptop PC), or the like.
  • the detection system 50C can remotely adjust each detection target area of the image sensor 100 and the millimeter wave sensor 200.
  • Settings for each detection target area can be adjusted on the ground. Thereby, the settings for each detection target area can be easily adjusted. In addition, it is possible to reduce manual work at high places, which contributes to the safety of workers.
  • the detection system 50C can be applied to crosswalks of various sizes.
  • the detection system according to this embodiment differs from the above-described embodiments in the safety support method for pedestrians crossing a crosswalk.
  • the detection system according to this embodiment also differs from the above-described embodiments in that the image sensor and the millimeter wave sensor are installed on the signal lamp column without using an arm member.
  • the other configurations are the same as those of the embodiment described above.
  • the image sensor 100 and the millimeter wave sensor 200 are installed on the signal lamp column 30 via the arm member 32.
  • the image sensor 100 and the millimeter wave sensor 200 may be installed on the signal lamp column 30 without using the arm member 32.
  • an image sensor 100 and a millimeter wave sensor 200 are installed on a support arm 34a for supporting a signal lamp 34, for example.
  • the image sensor 100a (see FIG. 4) may also be installed on a signal lamp column like the image sensor 100. Referring to FIG.
  • detection system 50D further executes a process of extending the green light depending on the crossing situation of the person crossing the crosswalk 20.
  • the detection system 50D recognizes (discriminates) the traffic restricted person A1 waiting in the waiting area 10 and the waiting area 12 using the image sensor 100 and the image sensor 100a, and when the traffic restricted person A1 starts crossing the crosswalk 20.
  • Traffic restricted person A1 is tracked by millimeter wave sensor 200.
  • a person with transportation restrictions refers to a person who is subject to restrictions such as requiring human assistance or equipment, or having difficulty moving safely in terms of transportation behavior. Specifically, these include people who require wheelchairs and visually impaired people who use white canes.
  • the person may be recognized as a person with a traffic restriction by recognizing a wheelchair, a white cane, or the like.
  • the detection system 50D determines whether the traffic restricted person A1 can cross the crosswalk 20 during the green light based on information such as the remaining time of the green light and the position and speed of the traffic restricted person A1.
  • the detection system 50D transmits an extension instruction to the signal lamp 34 and the signal lamp 44 to extend the time of the green light.
  • the detection system 50D calculates the time required for the traffic restricted person A1 to cross the crosswalk 20 based on information such as the position and speed of the traffic restricted person A1, and issues an instruction to extend the green light specifying the extension time.
  • the configuration may be such that the information is transmitted to the signal lamp device 34 and the signal lamp device 44.
  • the object to be recognized in the waiting area 10 and the waiting area 12 is not limited to people with traffic restrictions, but may be people (pedestrians), bicycles, etc.
  • Step S4010 includes determining whether the signal light device 44 is a green light or not, and branching the flow of control according to the determination result. If it is determined in step S4010 that the light is not green, control returns to step S4000.
  • objects people, bicycles, traffic restricted persons, etc.
  • This program further includes step S4020, which is executed when it is determined in step S4010 that the signal light device 34 and the signal light device 44 are green lights, and the millimeter wave sensor 200 tracks the pedestrian. Furthermore, this program is executed after step S4020, and determines whether it is necessary to extend the green light based on the remaining time of the green light and information such as the position and speed of the person crossing the road, and depending on the determination result, It includes step S4030 of branching the flow of control. This program is further executed when it is determined in step S4030 that it is necessary to extend the green light, and the step is to transmit a green signal extension instruction to the signal lamp device 34 and the signal lamp device 44, and return the control to step S4020.
  • the process includes step S4040 and step S4050, which is executed when it is determined in step S4030 that there is no need to extend the green light, and ends tracking of the pedestrian and returns control to step S4000.
  • the signal lamp device 34 and signal lamp device 44 that have received the extension instruction extend the green signal for a predetermined period of time.
  • the signal lamp device 34 and the signal lamp device 44 extend the green signal for the specified time.
  • the detection system 50D can effectively support the safety of people crossing the road, especially those with traffic restrictions.
  • safety support for crossers, it is also possible to provide safety support other than the above.
  • a vehicle approaching a crosswalk may be notified of the type of person crossing the street and the presence of the person crossing the street.
  • the image sensor 100 and the image sensor 100a recognize objects in the standby area 10 and the standby area 12, respectively.
  • Object recognition includes recognition of the type of object (pedestrian, bicycle, person in traffic restriction, etc.).
  • the millimeter wave sensor 200 tracks the pedestrian A2 crossing the crosswalk 20.
  • Crossing person A2 is here assumed to be a person riding a bicycle.
  • the detection system 50E determines whether or not the person crossing the road A2 is dangerous based on the tracking information (type, position, speed, etc.) of the person crossing the road A2 obtained by the millimeter wave sensor 200.
  • the detection system 50E determines whether or not the person crossing the road A2 is dangerous based on whether the current position of the person crossing the road A2 is in a blind spot of the right-turning vehicle V1 or the left-turning vehicle V2.
  • the detection system 50E notifies the vehicle making a right or left turn of the presence of the person crossing the road A2 as well as the type of person crossing the road A2 (bicycle).
  • information detected by the image sensor and the millimeter wave sensor may be stored in a storage device and used to understand the accident situation.
  • the image sensor 100 and the image sensor 100a recognize objects in the standby area 10 and the standby area 12, respectively.
  • Object recognition includes recognition of the type of object (pedestrian, bicycle, person in traffic restriction, etc.).
  • the millimeter wave sensor 200 tracks the pedestrian A3 crossing the crosswalk 20.
  • the detection data (recognition results, etc.) of the image sensor 100 and the image sensor 100a and the detection data (tracking results, etc.) of the millimeter wave sensor 200 are stored, for example, in the memory of the integrated processing unit as history information.
  • the detection system 50F receives the operation of the administrator when an accident occurs at the crosswalk 20, and receives the recognition results of the image sensor 100 and the image sensor 100a and the tracking result of the millimeter wave sensor 200, which are stored as historical information.
  • a trajectory T of movement of the victim (crosser A2) is calculated based on the following. When an accident occurs, the trajectory T of the victim's movement can be used to understand the situation of the accident.
  • an image sensor and a millimeter wave sensor are combined is shown, but the present disclosure is not limited to such an embodiment.
  • LiDAR Light Detection and Ranging
  • Other combinations of sensors may be used.
  • a function may be provided to automatically detect lens dirt based on the detection results of the image sensor (camera).
  • the lens be configured to be able to automatically remove dirt from the lens using a wiper, air duster, or the like.
  • the present disclosure is not limited to such an embodiment.
  • the configuration may be such that either one of the installation angle adjustment device and the imaging direction adjustment device is provided in the detection device.
  • the installation angle of the housing of the detection device and the imaging direction of the image sensor can be adjusted remotely using the installation angle adjustment device and the imaging direction adjustment device.
  • the present invention is not limited to this embodiment.
  • the installation angle adjustment device and the imaging direction adjustment device may be manually adjustable devices such as ball joints, for example.
  • the integrated processing unit was provided separately from the sensor (image sensor, millimeter wave sensor), but the present disclosure is not limited to such an embodiment.
  • the integrated processing unit may be incorporated as a function of a sensor (image sensor, millimeter wave sensor, etc.).
  • the embodiment described above shows an example in which a plurality of sensors (image sensor, millimeter wave sensor) are installed on the same support member, the present disclosure is not limited to such an embodiment.
  • the image sensor and the millimeter wave sensor may be installed on separate support members.
  • the image sensor performs object recognition processing
  • the present disclosure is not limited to such an embodiment.
  • the object recognition process may be executed in a device other than the image sensor, such as an integrated processing unit.
  • each process (each function) of the above-described embodiment may be realized by a processing circuit (Circuitry) including one or more processors.
  • the processing circuit may be composed of an integrated circuit or the like in which one or more memories, various analog circuits, and various digital circuits are combined.
  • the one or more memories store programs (instructions) that cause the one or more processors to execute each of the above processes.
  • the one or more processors may execute each of the above processes according to the program read from the one or more memories, or may execute each of the above processes using a logic circuit designed in advance to execute each of the above processes. May be executed.
  • the processor may be a variety of processors suitable for computer control, such as a CPU, a GPU (Graphics Processing Unit), a DSP (Digital Signal Processor), an FPGA (Field Programmable Gate Array), or an ASIC (Application Specific Integrated Circuit).
  • the plurality of physically separated processors may cooperate with each other to execute each of the above processes.
  • the processors installed in each of a plurality of physically separated computers cooperate with each other via a network such as a LAN (Local Area Network), WAN (Wide Area Network), or the Internet to execute the above processes. You can.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

横断歩道に隣接する第1エリアの上方に設置された第1センサであって、前記第1センサが物体を検知する第1検知対象エリアが前記第1エリアの少なくとも一部を含む前記第1センサと、前記第1エリアの上方に設置された第2センサであって、前記第2センサが物体を検知する第2検知対象エリアが前記横断歩道の少なくとも一部を含み、前記第1センサとは検出特性が異なる前記第2センサと、を備える検知システム。

Description

検知システム、検知装置、及び検知装置の設置方法
 本開示は、検知システム、検知装置、及び検知装置の設置方法に関する。
 本出願は、2022年4月8日出願の日本出願第2022-064297号に基づく優先権を主張し、前記日本出願に記載された全ての記載内容を援用するものである。
 道路の交通状況を把握するために、道路上の物体(車両、歩行者等)を検知するセンサが路側に設置されている。路側に設置されるセンサ(路側センサ)として、従来、画像センサ、ミリ波センサ等の種々のセンサが知られている。また近年、検出特性の異なる複数のセンサからなる複合センサを路側センサとして用いることが提案されている。複合センサは、例えば画像センサとミリ波センサとを含む。この複合センサは、画像センサからのセンサデータとミリ波センサからのセンサデータとを統合することで、道路上の物体を検知する際の検知精度を高める。
 このような複合センサを用いた道路センシングシステムが後掲の特許文献1に開示されている。特許文献1の道路センシングシステムは、複数のセンサを用いて道路上の物体を検出する。複数のセンサは、第1の視野を持つレーダセンサ、及び第2の視野を持つカメラ(画像センサ)を含む。複数のセンサは、第1の視野と第2の視野との少なくとも一部が重複する共通視野を持つ。共通視野においては、レーダセンサからのセンサデータとカメラからのセンサデータとが統合される。
 特許文献1の道路センシングシステムは横断歩道を横断する歩行者を検知することが可能に構成されている。各センサは対象の横断歩道を斜め下に見下ろす位置(対象の横断歩道から離れた位置)に設置され、かつ、第1の視野と第2の視野との重複部分である共通視野が横断歩道に位置するように設定されている。道路センシングシステムは、共通視野において横断歩道を横断している歩行者を検知すると、その検知結果を横断歩道に近づいてくる車両に通知する。
米国特許出願公開第2018/0350231号明細書
 本開示のある局面に係る検知システムは、横断歩道に隣接する第1エリアの上方に設置された第1センサであって、第1センサが物体を検知する第1検知対象エリアが第1エリアの少なくとも一部を含む第1センサと、第1エリアの上方に設置された第2センサであって、第2センサが物体を検知する第2検知対象エリアが横断歩道の少なくとも一部を含み、第1センサとは検出特性が異なる第2センサと、を備える。
 本開示の他の局面に係る検知装置は、第1センサと、第1センサとは検出特性が異なる第2センサと、第1センサと第2センサとをユニット化する筐体とを含み、筐体は、横断歩道に隣接する第1エリアに設けられた支持部材に設置され、筐体が支持部材に設置された状態において、第1センサが物体を検知する第1検知対象エリアが第1エリアの少なくとも一部を含み、第2センサが物体を検知する第2検知対象エリアが横断歩道の少なくとも一部を含む。
 本開示のさらに他の局面に係る検知装置の設置方法は、横断歩道に隣接する第1エリアの上方に設けられた支持部材に検知装置を設置する設置方法であって、検知装置は、第1エリアの少なくとも一部を検知対象エリアとする画像センサと、横断歩道を検知対象エリアとするミリ波センサと、画像センサとミリ波センサとをユニット化する筐体と、支持部材に対する筐体の設置角度を調整する設置角度調整装置と、画像センサの撮像方向を調整する撮像方向調整装置とを含み、設置方法は、支持部材に筐体を取り付ける工程と、撮像方向調整装置を作業者が操作することにより、画像センサの撮像方向をミリ波センサの検知方向に合わせる工程と、画像センサからの画像情報に基づいて設置角度調整装置を作業者が操作することにより、ミリ波センサの検知対象エリアが横断歩道の少なくとも一部を含むように、筐体の設置角度を調整する工程と、画像センサからの画像情報に基づいて撮像方向調整装置を作業者が操作することにより、画像センサの検知対象エリアが第1エリアの少なくとも一部を含むように、画像センサの撮像方向を調整する工程とを含む、検知装置の設置方法。
図1は、第1の実施の形態に係る検知システムの全体構成を説明するための図である。 図2は、図1に示す検知システムを説明するための平面図である。 図3は、図1に示す検知システムを説明するための図である。 図4は、図1に示す検知システムを説明するための図である。 図5は、図1に示す検知システムの構成例を示すブロック図である。 図6は、統合処理部の構成例を示すブロック図である。 図7は、図1に示す検知システムにおいて実行されるプログラムの制御構造の一例を示すフローチャートである。 図8は、図7のステップS1000の詳細なフローである。 図9は、図7のステップS1020の詳細なフローである。 図10は、図1に示す検知システムの動作の一例を示す図である。 図11は、図1に示す検知システムの動作の一例を示す図である。 図12は、比較例の検知システムを説明するための図である。 図13は、変形例1に係る検知システムを説明するための平面図である。 図14は、変形例2に係る検知システムを説明するための平面図である。 図15は、第2の実施の形態に係る検知システムの構成例を示すブロック図である。 図16は、図15に示す検知システムを説明するための図である。 図17は、図15に示す検知システムにおいて実行されるプログラムの制御構造の一例を示すフローチャートである。 図18は、第3の実施の形態に係る検知システム(検知装置)の構成例を示す斜視図である。 図19は、図18に示す検知システム(検知装置)の構成例を示す側面図である。 図20は、図18に示す検知システム(検知装置)の構成例を示すブロック図である。 図21は、変形例3に係る検知装置の構成例を示すブロック図である。 図22は、変形例4に係る検知装置の構成例を示すブロック図である。 図23は、第4の実施の形態に係る検知システム(検知装置)の構成例を示す斜視図である。 図24は、図23に示す検知システム(検知装置)の構成例を示す側面図である。 図25は、図23に示す検知システム(検知装置)の構成例を示すブロック図である。 図26は、撮像方向調整装置の構成例を示すブロック図である。 図27は、設置角度調整装置の構成例を示すブロック図である。 図28は、図23に示す検知システム(検知装置)と通信する端末装置の一例を示す図である。 図29は、図23に示す検知装置の設置・調整の工程を示すシーケンス図である。 図30は、第5の実施の形態に係る検知システムを説明するための図である。 図31は、図30に示す検知システムを説明するための図である。 図32は、図30に示す検知システムにおいて実行されるプログラムの制御構造の一例を示すフローチャートである。 図33は、検知システムの他の構成例を説明するための図である。 図34は、検知システムのさらに他の構成例を説明するための図である。
[本開示が解決しようとする課題]
 特許文献1の道路センシングシステムでは、上記のように、各センサが対象の横断歩道を斜め下に見下ろす位置に設置される。しかし、そのような位置に、センサを支持するための既設の支持部材(ポール等)があるとは限らない。さらに、横断歩道の周辺の歩行者待機エリア(以下、単に「待機エリア」と呼ぶ。)まで検知エリアを拡張しようとすると、それに応じてセンサの設置位置を変える必要がある。その場合、既設の支持部材に各センサを設置することが益々困難になる。このような場合、センサを設置するための支持部材を新設しなければならない。支持部材を新設するとなると、そのための工事費用が別途発生する。そのため、費用負担が大きくなる。
 通常、待機エリア近辺には歩行者用の信号灯器柱が設けられている。この信号灯器柱をセンサの設置に利用できれば費用負担の増加を抑制できる。しかし、特許文献1の道路センシングシステムは、横断歩道の歩行者を共通視野にて検知するために各センサの設置位置が制約される。そのため、既設の信号灯器柱を各センサの設置に利用するのが困難である。
 本開示は、上記のような課題を解決するためになされたものであり、本開示の1つの目的は、センサの設置自由度が高く、より広いエリアを検知可能な検知システム、及び検知装置を提供することである。
 本開示のもう1つの目的は、設置自由度が高く、より広いエリアを検知可能な検知装置の設置方法を提供することである。
[本開示の効果]
 本開示によれば、センサの設置自由度が高く、より広いエリアを検知可能な検知システム、及び検知装置を提供できる。本開示によればさらに、設置自由度が高く、より広いエリアを検知可能な検知装置の設置方法を提供できる。
[本開示の実施形態の概要]
 本開示の好適な実施形態を列記して説明する。以下に記載する実施形態の少なくとも一部を任意に組合せてもよい。
 (1)本開示の第1の局面に係る検知システムは、横断歩道に隣接する第1エリアの上方に設置された第1センサであって、第1センサが物体を検知する第1検知対象エリアが第1エリアの少なくとも一部を含む第1センサと、第1エリアの上方に設置された第2センサであって、第2センサが物体を検知する第2検知対象エリアが横断歩道の少なくとも一部を含み、第1センサとは検出特性が異なる第2センサと、を備える。
 第1センサは、横断歩道に隣接する第1エリアの少なくとも一部を含むエリアを検知対象エリアとする。第2センサは、横断歩道の少なくとも一部を検知対象エリアとする。これにより、第1センサを横断歩道の近くに設置できるとともに、第2センサを第1センサの近くに設置できる。したがって、従来、設置が困難であった横断歩道の近くに第1センサ及び第2センサを設置できる。すなわち、各センサの設置自由度を高めることができる。各センサの設置自由度を高めることによって、既設の支持部材を各センサの設置に利用し易くできるので、支持部材を新設することによる費用負担の増加を抑制できる。
 また、第1センサと第2センサとが互いに異なるエリアを検知対象エリアとすることにより、より広いエリアの物体を検知可能にできる。さらに、第1エリアの物体の検知に第1センサを用い、横断歩道の物体の検知に、第1センサとは検出特性が異なる第2センサを用いることによって、各々のエリアにおける物体の検知に適したセンサを第1センサ及び第2センサとして用いることができる。これにより、物体の検出精度が低下するのを抑制できる。
 (2)上記(1)において、第1検知対象エリアの少なくとも一部は、第1エリア又は横断歩道において、第2検知対象エリアと重複する構成であってもよい。これにより、第1センサが検知した物体の情報を第2センサに提供しやすくできる。第2センサは、第1センサから物体の情報を受け取ることによって、第1エリアから横断歩道に移動した物体を認識できるので、横断歩道においてその物体を追跡できる。
 (3)上記(2)において、第1検知対象エリアと第2検知対象エリアが重複する重複エリアは、重複エリアを除く第1検知対象エリア、及び重複エリアを除く第2検知対象エリアのいずれのエリアよりも小さい構成であってもよい。これにより、物体を検知するエリアを容易に広げることができる。さらに、第2センサの検知対象エリアは、第1センサの検知対象エリアよりも大きくしてもよい。
 (4)上記(1)から(3)のいずれかにおいて、第1センサは、第1エリアに存在する物体を検知する画像センサを含み、第2センサは、横断歩道に存在する物体を検知するミリ波センサを含む構成であってもよい。これにより、各々のエリアにおける物体をセンサにより検知する際に、物体の検出精度が低下するのを効果的に抑制できる。
 (5)上記(1)から(4)のいずれかにおいて、検知システムは、第1センサと第2センサとをユニット化する筐体をさらに含む構成であってもよい。これにより、複数のセンサの設置を容易にできる。
 (6)上記(5)において、筐体は、第1面と、第1面に対して交差する第2面とを持ち、第1センサは、筐体の第2面に設けられ、第2センサは、筐体の内部の第1面に対応する位置に設けられる構成であってもよい。これにより、第1センサ及び第2センサの各検知対象エリアがそれぞれ第1エリア及び横断歩道となるように、各センサを容易に設置できる。
 (7)上記(6)において、ミリ波センサは、ミリ波帯の検知信号を照射するとともに、照射された検知信号の物体による反射波を受信するアンテナを含み、前記アンテナは、筐体の内部において、第1面と平行に設けられる構成であってよい。
 (8)上記(4)から(7)のいずれかにおいて、検知システムは、画像センサの撮像方向を調整する撮像方向調整装置をさらに含む構成であってもよい。これにより、画像センサの撮像方向を容易に調整できる。
 (9)上記(1)から(8)において、検知システムは、第1エリアを照らす照明装置をさらに含む構成であってもよい。これにより、照度低下に起因する画像センサの認識精度の低下を抑制できる。
 (10)上記(1)から(9)のいずれかにおいて、第1センサは、第1エリアに設けられた支持部材に設置され、第2センサは、第1センサが設置される支持部材に設置される構成であってもよい。これにより、既設の支持部材を各センサの設置により一層利用し易くできる。
 (11)上記(5)から(9)のいずれかにおいて、筐体は、第1エリアに設けられた支持部材に設置され、筐体の設置角度を調整する設置角度調整装置をさらに含む構成であってもよい。これにより、筐体の設置角度、ひいては各センサの設置角度を容易に調整できる。
 (12)上記(1)から(11)のいずれかにおいて、検知システムは、第1センサからのセンサデータに基づいて、第1エリアに存在する物体の種類及び向きを識別し、識別結果に応じて、識別した物体を横断歩道において第2センサに追跡させる処理を実行する処理部をさらに含む構成であってもよい。これにより、第1エリアの物体認識に連携した物体の追跡を可能にできる。
 (13)上記(12)において、処理部は、第1エリアにおける物体の識別結果又は横断歩道における物体の追跡状況に応じて、所定の処理をさらに実行する構成であってもよい。これにより、追跡状況の情報を有効に活用した交通安全の支援を行うことができる。
 (14)上記(13)において、所定の処理は、横断歩道に進入しようとする車両への物体の存在の通知、横断歩道において物体が移動した軌跡の記録、及び、横断歩道に設けられた歩行者用交通信号灯器の制御の少なくとも1つを含む構成であってもよい。これにより、交通安全の支援をより容易に行うことができる。
 (15)本開示の第2の局面に係る検知装置は、第1センサと、第1センサとは検出特性が異なる第2センサと、第1センサと第2センサとをユニット化する筐体とを含み、筐体は、横断歩道に隣接する第1エリアに設けられた支持部材に設置され、筐体が支持部材に設置された状態において、第1センサが物体を検知する第1検知対象エリアが第1エリアの少なくとも一部を含み、第2センサが物体を検知する第2検知対象エリアが横断歩道の少なくとも一部を含む。
 複数のセンサを筐体によってユニット化することにより、第1センサを検知対象エリアの近くに設置できるとともに、第2センサを第1センサの近くに設置できる。したがって、従来、設置が困難であった横断歩道に近い場所に第1センサ及び第2センサを設置できる。すなわち、各センサの設置自由度を高めることができる。各センサの設置自由度を高めることによって、既設の支持部材を各センサの設置に利用し易くできる。その結果、支持部材を新設することによる費用負担の増加を抑制できる。
 第1センサは、横断歩道に隣接する第1エリアの少なくとも一部を検知対象エリアとしてカバーし、横断歩道の少なくとも一部を第2センサが検知対象エリアとしてカバーする。第1センサと第2センサとが互いに異なるエリアを検知対象エリアとすることにより、より広いエリアの物体を検知可能にできる。さらに、第1エリアの物体の検知に第1センサを用い、横断歩道の物体の検知に、第1センサとは検出特性が異なる第2センサを用いることによって、各々のエリアにおける物体の検知に適したセンサを第1センサ及び第2センサとして用いることができる。これにより、物体の検出精度が低下するのを抑制できる。
 (16)上記(15)において、検知装置は、検知システムは、筐体に設けられ、第1エリアを照らす照明装置をさらに含む構成であってもよい。これにより、照度低下に起因する第1センサの認識精度の低下を抑制できる。
 (17)上記(15)又は(16)において、第1センサは、第1エリアに存在する物体を検知する画像センサを含み、第2センサは、第2エリアに存在する物体を検知するミリ波センサを含む構成であってもよい。これにより、各々のエリアにおける物体をセンサにより検知する際に、物体の検出精度が低下するのを効果的に抑制できる。
 (18)本開示の第3の局面に係る検知装置の設置方法は、横断歩道に隣接する第1エリアの上方に設けられた支持部材に検知装置を設置する設置方法であって、検知装置は、第1エリアの少なくとも一部を検知対象エリアとする画像センサと、横断歩道を検知対象エリアとするミリ波センサと、画像センサとミリ波センサとをユニット化する筐体と、支持部材に対する筐体の設置角度を調整する設置角度調整装置と、画像センサの撮像方向を調整する撮像方向調整装置とを含み、設置方法は、支持部材に筐体を取り付ける工程と、撮像方向調整装置を作業者が操作することにより、画像センサの撮像方向をミリ波センサの検知方向に合わせる工程と、画像センサからの画像情報に基づいて設置角度調整装置を作業者が操作することにより、ミリ波センサの検知対象エリアが横断歩道の少なくとも一部を含むように、筐体の設置角度を調整する工程と、画像センサからの画像情報に基づいて撮像方向調整装置を作業者が操作することにより、画像センサの検知対象エリアが第1エリアの少なくとも一部を含むように、画像センサの撮像方向を調整する工程とを含む。これにより、ミリ波センサの検知対象エリアを横断歩道に容易に設定できるとともに、画像センサの検知対象エリアを横断歩道に隣接する第1エリアの少なくとも一部を含むように容易に設定できる。そのため、設置自由度が高く、より広いエリアを検知可能な検知装置の設置を容易化できる。
 本開示は、このような特徴的な構成を含む検知システム、検知装置、及び検知装置の設置方法として実現できるだけではなく、本検知システム、又は本検知装置が実行する特徴的なステップ、又は本検知装置の設置方法において実行される特徴的なステップをコンピュータに実行させるためのプログラム、及びそのプログラムを記録した記録媒体として実現することもできる。さらに、検知システム又は検知装置を含むその他のシステム又は装置として実現することもできる。
 [本開示の実施形態の詳細]
 本開示の実施形態に係る検知システム、検知装置、及び検知装置の設置方法の具体例を、以下に図面を参照しつつ説明する。以下の実施の形態では、横断歩道、及びその周辺の待機エリアにおける物体を検知する例について説明する。なお、以下の実施の形態では、同一の部品には同一の参照番号を付してある。それらの機能及び名称も同一である。したがって、それらについての詳細な説明は繰返さない。
 (第1の実施の形態)
 [全体構成]
 図1を参照して、本実施の形態に係る検知システム50は路側に設置されるシステムである。この検知システム50は、路側センサにより道路上の物体(車両、歩行者等)を検知する。検知システム50は、路側センサとしての複数のセンサを含む。複数のセンサは、例えば、画像センサ100、及び、画像センサ100とは検出特性が異なるセンサであるミリ波センサ200を含む。画像センサ100は典型的にはカメラである。画像センサ100は、単眼カメラ、及びステレオカメラのいずれであってもよい。ミリ波センサ200は、ミリ波帯の電波を使って対象物の距離、方向及び速度を検知するレーダセンサである。
 本実施の形態では、画像センサ100は、主として待機エリア10の物体(例えば、待機者P等の人)を検知する。ミリ波センサ200は、主として横断歩道20における物体(例えば、横断者等の人)を検知する。ミリ波センサ200は、検知した物体を追跡する機能をも持つ。このように、画像センサ100とミリ波センサ200とは、別々のエリアの物体を検知する。また、画像センサ100は、待機エリア10の物体を認識する機能を持つ。ここで、画像センサ100が物体を認識するとは、後述するように、画像センサ100が、物体の種別を示すデータを得たことを指す。ただし、画像センサ100が認識する対象は、物体の種別に限らず、人の向き、待機エリアから横断歩道に侵入した物体の存在、横断歩道を渡りきった横断者の存在であってもよい。例えば、画像センサ100は、待機エリア10に停止する前の人の移動をカルマンフィルタで時系列的に追跡することで人の移動方向を特定し、特定した移動方向を待機エリア10に停止した人の向きと認識する。また、画像センサ100は、画像解析により待機エリア10に停止した人の視線の方向、又は人の背中から胸を貫く方向を特定し、特定した方向を待機エリア10に停止した人の向きと認識する。
 待機エリア10の近辺には歩行者用の信号灯器柱30が設けられている。画像センサ100及びミリ波センサ200は、アーム部材32を介して、信号灯器柱30に設置される。アーム部材32は、待機エリア10の上方に位置するように信号灯器柱30に取り付けられる。すなわち、画像センサ100及びミリ波センサ200は、信号灯器柱30という既設の支持部材に取り付けられる。
 図2を参照して、横断歩道の進行方向と交差する方向に車道が伸びており、車道と横断歩道を挟んだ位置に歩道が設置されている。車道は横断歩道を含み、歩道は待機エリアを含む。車道に沿って直線状に伸び、途中で湾曲している2つの線は、それぞれ車道と歩道の境界線である。画像センサ100の直下には待機エリア10が位置しており、画像センサ100は待機エリア10(第1エリア)を含むエリアを検知対象エリア60とする。待機エリアとは、横断歩道近傍のエリアであって、その横断歩道を横断することが可能な状態になるまで人が待機するエリアである。画像センサ100の検知対象エリア60は、待機エリア10全体を含むように設定されているとよい。ただし、待機エリアには明確な境界線が存在しないため、画像センサ100の検知対象エリア60は、対象とする待機者を検知可能に設定されていればよい。そのため、画像センサ100の検知対象エリア60は、待機エリア10を含むように設定されていればよい。待機エリアの大きさは横断歩道の規模等によっても変わるため、画像センサ100の検知対象エリア60は、横断歩道の規模等に応じて適宜変更される。
 横断歩道20に対応するエリア(第2エリア)は待機エリア10に隣接する。ミリ波センサ200は、待機エリア10に隣接する第2エリア(横断歩道20)を検知対象エリア70とする。ミリ波センサ200の検知対象エリア70は、横断歩道20の全体をカバーするように設定されているとよい。ただし、ミリ波センサ200の検知対象エリア70は、横断歩道20の一部をカバーするように設定されていてもよい。その場合、横断歩道20の残りのエリアは、ミリ波センサ200以外のセンサ(例えば画像センサ100)の検知対象エリアに含まれるようにしてもよい。
 横断歩道20の待機エリア12には、画像センサ100と同様の画像センサ100aが設けられている。待機エリア12の近辺にも歩行者用の信号灯器柱40が設けられている。この画像センサ100aは、アーム部材42を介して、信号灯器柱40に設置されている。画像センサ100aの設置位置の直下には待機エリア12が位置することになる。画像センサ100aは、画像センサ100と同様、待機エリア12を含むエリアを検知対象エリア62とすることにより、待機エリア12の物体を検知する。
 図3及び図4を参照して、画像センサ100は、撮像方向が待機エリア10を向くように、すなわち、略直下のエリアが撮影対象となるように下向きに取り付けられる。待機エリア12の上方に設けられた画像センサ100aも同様に取り付けられる。一方、ミリ波センサ200は横断歩道20を斜め下に見下ろすように取り付けられる。なお、図4に示すように、画像センサ100及びミリ波センサ200が設置される信号灯器柱30には信号灯器34が設けられており、画像センサ100aが設置される信号灯器柱40には信号灯器44が設けられている。
 再び図2を参照して、画像センサ100の検知対象エリア60の少なくとも一部は、横断歩道20(第2エリア)においてミリ波センサ200の検知対象エリア70と重複する。ミリ波センサ200からすると、ミリ波センサ200の検知対象エリア70の少なくとも一部は、待機エリア10(第1エリア)において画像センサ100の検知対象エリア60と重複する。これにより、画像センサ100の検知対象エリア60とミリ波センサ200の検知対象エリア70とに重複エリア64が形成されている。同様に、待機エリア12の上方に設けられた画像センサ100aにおいても、画像センサ100aの検知対象エリア62とミリ波センサ200の検知対象エリア70とに重複エリア66が形成されている。
 図2から図4を参照して、ミリ波センサ200の検知対象エリア70は、画像センサ100の検知対象エリア60よりも大きい。ミリ波センサ200の検知対象エリア70と画像センサ100の検知対象エリア60とが重複する重複エリア64は、重複エリア64を除く画像センサ100の検知対象エリア60、及び重複エリア64を除くミリ波センサ200の検知対象エリア70のいずれのエリアよりも小さい。ミリ波センサ200の検知対象エリア70は、画像センサ100aの検知対象エリア62よりも大きい。ミリ波センサ200の検知対象エリア70と画像センサ100aの検知対象エリア62とが重複する重複エリア66は、重複エリア66を除く画像センサ100aの検知対象エリア62、及び重複エリア66を除くミリ波センサ200の検知対象エリア70のいずれのエリアよりも小さい。
 [ハードウェア構成]
 図5を参照して、検知システム50は、画像センサ100、ミリ波センサ200、及び統合処理部300を含む。画像センサ100は、撮像部110及び画像処理部120を含む。撮像部110は、レンズ、及び撮像素子等を含む。画像処理部120は撮像部110が撮影した情報を処理する。ミリ波センサ200は、電波を送受信するアンテナ210、ミリ波帯の電波(検知信号)を、アンテナ210を介して対象物に照射する送信部220、照射された電波の対象物による反射波を、アンテナ210を介して受信する受信部230、及び、処理回路部240を含む。処理回路部240は、送信部220及び受信部230による電波の送受信の情報を処理することにより、物体の距離、方向及び速度を検知する。画像センサ100及びミリ波センサ200は、例えばNTP(Network Timing Protocol)サーバ(図示せず。)から時刻情報を取得することにより、時刻同期を行う。
 統合処理部300は、画像センサ100からのセンサデータとミリ波センサ200からのセンサデータとを統合する処理、ミリ波センサ200に物体を追跡させる処理、物体の追跡状況等に応じて信号灯器を制御する処理等の種々の処理を実行する。統合処理部300はまた、待機エリア12の上方に設けられた画像センサ100aと通信する機能を持つ。画像センサ100aも例えばNTPサーバ(図示せず。)から時刻情報を取得することにより、画像センサ100及びミリ波センサ200に対して時刻同期を行う。なお、検知システム50は、待機エリア12の上方に設けられた画像センサ100aを含む構成であってもよい。
 図6を参照して、統合処理部300は、演算部302、メモリ304、及び通信部306を含む。演算部302は、CPU(Central Processing Unit)又はMPU(MicroProcessing Unit)等の演算素子(プロセッサ)を含む。メモリ304は例えば不揮発性の記憶装置である。メモリ304には、演算部302が実行するソフトウェア(コンピュータプログラム)が予め記憶されている。通信部306は、画像センサ100及びミリ波センサ200を含む各センサ、並びに、信号灯器等の機器と有線又は無線により情報を通信する。
 [ソフトウェア構成]
 図7から図9を参照して、待機エリア又は横断歩道にいる人を検知して、横断歩道の横断を支援するために検知システム50が実行するコンピュータプログラムの制御構造について説明する。このプログラムは、例えば管理者による開始の指示に応じて開始する。
 図7を参照して、このプログラムは、画像センサにより待機エリアの物体を認識するステップS1000と、ステップS1000の後に実行され、信号灯器を青信号に切替える切替指示を統合処理部が当該信号灯器に送信するステップS1010と、ステップS1010の後に実行され、統合処理部が横断歩道を横断する横断者をミリ波センサに追跡させるステップS1020と、ステップS1020の後に実行され、信号灯器を赤信号に切替える切替指示を統合処理部が当該信号灯器に送信するステップS1030と、ステップS1030の後に実行され、所定の時間が経過するまで待機するステップS1040とを含む。ステップS1040において、所定の時間が経過すると、制御はステップS1000に戻る。
 図8は、図7のステップS1000の詳細なフローである。図8を参照して、このルーチンは、画像センサのセンサデータを処理することにより待機エリアの物体を検知するステップS1100と、ステップS1100の後に実行され、待機エリアに人がいるか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS1110とを含む。ステップS1110において、待機エリアに人がいないと判定された場合は、制御はステップS1100に戻る。
 このルーチンはさらに、ステップS1110において、待機エリアに人がいると判定された場合に実行され、画像センサのセンサデータを処理(画像処理)することにより、検知された人の向きを認識するステップS1120と、ステップS1120の後に実行され、検知された人がt秒以上横断歩道を向いているか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS1130とを含む。ステップS1130では、検知された人が例えば5秒から15秒以上横断歩道を向いているか否かが判定される。ステップS1130において、検知された人がt秒以上横断歩道を向いていないと判定された場合は、制御はステップS1120に戻る。
 このルーチンはさらに、ステップS1130において、検知された人がt秒以上横断歩道を向いていると判定された場合に実行され、横断希望者有りと判断し、このルーチンを終了するステップS1140を含む。
 図9は、図7のステップS1020の詳細なフローである。図9を参照して、このルーチンは、待機エリアにおいて検知された人の情報(横断者情報)を、画像センサがミリ波センサに提供(送付)するステップS1200と、ステップS1200の後に実行され、ミリ波センサを制御して、横断歩道の横断者を追跡するステップS1210と、追跡している横断者情報を横断歩道に進入してくる車両に通知するステップS1220とを含む。
このルーチンはさらに、ステップS1220の後に実行され、画像センサにより横断歩道を渡りきった横断者を検知するステップS1230と、ステップS1230の後に実行され、検知された全ての人が横断歩道を渡りきったか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS1240を含む。このルーチンはさらに、ステップS1240において、検知された全ての人が横断歩道を渡りきっていないと判定された場合に実行され、青信号に切替えてから所定の時間が経過したか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS1250を含む。ステップS1250において、青信号に切替えてから所定の時間が経過していないと判定された場合は、制御はステップS1210に戻る。
 このルーチンはさらに、ステップS1240において、検知された全ての人が横断歩道を渡りきったと判定された場合、又は、ステップS1250において、青信号に切替えてから所定の時間が経過したと判定された場合に実行され、ミリ波センサによる横断者の追跡を終了し、このルーチンを終了するステップS1260を含む。
 [動作]
 本実施の形態に係る検知システム50は以下のように動作する。
 図10を参照して、検知システム50の画像センサ100は待機エリア10の物体を認識する。待機エリア10には、人A及び人Bがいるとする。画像センサ100は、待機エリア10に存在する人A及び人Bを検知し(図8のステップS1100及びステップS1110においてYES)、検知した人に対してラベル(物体ID)を付与する。画像センサ100は、検知した人の向きを認識し(ステップS1120)、その認識結果に基づいて、t秒以上横断歩道20を向いている人がいるか否かを判定する。人Bは横断歩道20以外の方向を向いている一方、人Aは横断歩道20の方向を向いている。人Aがt秒間この状態を継続すると、画像センサ100は、t秒以上横断歩道20を向いている人がいると判定し(ステップS1130においてYES)、横断希望者有りと判断する(ステップS1140)。
 統合処理部300は画像センサ100による横断希望者有りの判断に応じて、信号灯器34及び信号灯器44に対して青信号への切替指示を送信する(図7のステップS1010)。信号灯器34及び信号灯器44が青信号に切り替わると、人Aは横断歩道20の横断を開始する。
 図11を参照して、画像センサ100は横断歩道20に流入する歩行者の情報(横断者情報:例えば、検知した物体に対して付与されるラベル、横断歩道への流入地点、方向等)をミリ波センサ200に送付する。具体的には、統合処理部300(図5参照)が、画像センサ100からのセンサデータとミリ波センサ200からのセンサデータとを重複エリア64において統合することにより、横断歩道20に流入する歩行者の情報(ここでは、人Aの情報)をミリ波センサ200に与える(図9のステップS1200)。
 ミリ波センサ200は、横断歩道20に流入した人Aを画像センサ100からの横断者情報に基づいて認識し、横断者(人A)の追跡を開始する(ステップS1210)。統合処理部300は、横断歩道20を横断する横断者がいることを、横断歩道20に進入しようとする車両に対して通知する(ステップS1220)。横断歩道20の流出側の画像センサ100aは、待機エリア12の物体を検知する。流出側の画像センサ100aは、横断歩道20から流出する歩行者の情報(横断者情報:例えば、検知した物体に対して付与されるラベル、横断歩道への流入地点、方向等)をミリ波センサ200から受け取る。具体的には、統合処理部300が、画像センサ100aからのセンサデータとミリ波センサ200からのセンサデータとを重複エリア64において統合することにより、横断歩道20から流出する歩行者の情報(ここでは、人Aの情報)を画像センサ100aに与える。
 流出側の画像センサ100aは、横断歩道20を渡りきった横断者を認識し、その情報を統合処理部300に送信する。統合処理部300は、流出側の画像センサ100aからの情報に基づいて、横断歩道20を渡りきった横断者を検知し(ステップS1230)、検知している全ての人が横断歩道20を渡りきったか否かを判定する。図11に示す例では、横断歩道20を横断する横断者は人Aのみであるため、人Aが横断歩道20を渡りきると、統合処理部300は、横断歩道20を検知者の全員が渡ったと判定する(ステップS1240においてYES)。ミリ波センサ200は追跡を終了し(ステップS1260)、統合処理部300は信号灯器34及び信号灯器44に対して赤信号への切替指示を送信する(図7のステップS1030)。
 一方、横断歩道20の横断者が多い場合、検知している全ての人が横断歩道20を渡りきるまで待っていると、青信号の状態が長時間維持される。そのため、統合処理部300は、信号灯器34及び信号灯器44に対して青信号への切替指示を送信してからの経過時間が所定時間以上になると、検知している全ての人が横断歩道20を渡りきったか否かに関わらず、信号灯器34及び信号灯器44に対して赤信号への切替指示を送信する(図7のステップS1030)。
 検知システム50は、赤信号の状態で所定時間待機し、所定時間が経過すると(ステップS1040においてYES)、上記した動作を繰返す。
 なお、横断者の横断方向が上記とは逆の場合は、画像センサ100と画像センサ100aとの役割が逆になる。その他の動作は同様である。
 [本実施の形態の効果]
 以上の説明から明らかなように、本実施の形態に係る検知システム50は以下に述べる効果を奏する。
 図12を参照して、画像センサ及びミリ波センサを含む複合センサ1000は、画像センサからのセンサデータとミリ波センサからのセンサデータとを統合することにより、道路上の物体を検知する際の検知精度を高める。そのため、画像センサとミリ波センサとは同じエリアを検知対象エリアとする。画像センサ及びミリ波センサは、いずれも垂直方向に広い視野角を得るのが困難なため、複合センサ1000は横断歩道20を斜め下に見下ろすように設置される。待機エリア10近辺の信号灯器柱30にそのように複合センサ1000を設置した場合、待機エリア10の物体を検知するのが困難になる。そのため、待機エリア10から後ろに下がった場所にポール等の支持部材1010を新設して、そこに複合センサ1000を設置する必要がある。この場合、支持部材1010を新設するための工事費用が別途発生し、費用負担が大きくなる。
 図4を参照して、本実施の形態に係る検知システム50は、画像センサ100及びミリ波センサ200を互いに異なるエリアを検知対象エリアとすることにより、センサの設置自由度を高めつつ、より広いエリアを検知可能とする。具体的には、画像センサ100は、横断歩道20に隣接する待機エリア10を含むエリアを検知対象エリア60とする。ミリ波センサ200は、横断歩道20の少なくとも一部を検知対象エリア70とする。これにより、画像センサ100を検知対象エリア60の近くに設置できるとともに、ミリ波センサ200を画像センサ100の近くに設置できる。各センサの設置自由度を高めることができるので、既設の支持部材である信号灯器柱30を各センサの設置に利用できる。したがって、支持部材を新設することによる費用負担の増加を抑制できる。
 各センサを信号灯器柱30に設置した状態において、画像センサ100は、横断歩道20に隣接する待機エリア10を検知対象エリア60としてカバーし、横断歩道20をミリ波センサ200の検知対象エリア70がカバーする。画像センサ100とミリ波センサ200とが互いに異なるエリアを検知対象エリアとすることにより、より広いエリアの物体を検知可能にできる。さらに、待機エリア10の物体の検知に画像センサ100を用い、横断歩道20の物体の検知に、画像センサ100とは検出特性が異なるミリ波センサ200を用いることによって、各々のエリアにおける物体の検知に適したセンサを用いることができる。これにより、物体の検出精度が低下するのを抑制できる。
 検知システム50において、画像センサ100の検知対象エリア60の少なくとも一部は、横断歩道20においてミリ波センサ200の検知対象エリア70と重複し、ミリ波センサ200の検知対象エリア70の少なくとも一部は、待機エリア10において画像センサ100の検知対象エリア60と重複する。これにより、画像センサ100が検知した物体の情報をミリ波センサ200に提供しやすくできる。ミリ波センサ200は、画像センサ100から物体の情報を受け取ることによって、待機エリア10から横断歩道20に移動した物体を認識できるので、横断歩道20においてその物体を追跡できる。なお、上記構成により、ミリ波センサ200が検知した物体の情報を画像センサ100に提供しやすくすることもできる。
 画像センサ100の検知対象エリア60とミリ波センサ200の検知対象エリア70とが重複する重複エリア64を、重複エリア64を除く画像センサ100の検知対象エリア60、及び重複エリア64を除くミリ波センサ200の検知対象エリア70のいずれのエリアよりも小さくすることによって、物体を検知するエリアを容易に広げることができる。
 画像センサ100は、待機エリア10の物体を検知するために下向きに設置されるため、画像センサ100を直下付近の検知と認識に注力させることができる。これにより、画像センサ100として感度の低いカメラを用いることも可能となる。さらに、画像センサ100はレンズが下側を向いて設置されるためレンズが汚れるのを抑制できる。画像センサ100のレンズが下側を向くことによって、例えば柄の長いモップ等を用いたレンズの掃除が容易になる。
 なお、待機エリア12に設けられた画像センサ100aについても同様の効果を有する。
 (変形例1)
 図13を参照して、信号灯器柱30の位置、又は横断歩道20の周辺状況等によっては、画像センサ100の直下に待機エリア10が位置しないこともあり得る。変形例1では、画像センサ100の直下に対応するエリア80が待機エリア10の少なくとも一部を含むように当該画像センサ100が設置される。すなわち、画像センサ100は、当該画像センサ100の直下に対応するエリア80の少なくとも一部を含む待機エリア10に対して、待機エリア10の少なくとも一部を含むエリアを検知対象エリア82とする。画像センサ100の直下に対応するエリア80とは、例えば、画像センサ100を真下に向けた場合に、画像センサ100で検知可能なエリアとすることができる。検知対象エリア82は、待機エリア10の少なくとも一部を含むように設定できる。
 (変形例2)
 図14を参照して、変形例2の検知システムは、ミリ波センサ200の検知対象エリア72がより広くなっている点において、上記した実施の形態とは異なる。具体的には、ミリ波センサ200の検知対象エリア72は、横断歩道20に加えて、待機エリア12の少なくとも一部を含む。すなわち、ミリ波センサ200は、横断歩道20の物体に加えて、待機エリア12の物体をも検知する。これにより、待機エリア12の物体を検知する画像センサを省くことができる。なお、図14では、画像センサ100の検知対象エリア84が待機エリア10の一部を含むように設定される例が示されている。
 (第2の実施の形態)
 図15を参照して、本実施の形態に係る検知システム50Aは、待機エリアを照らす照明装置320を含む点、及び、画像センサ100(図5参照)に変えて画像センサ150を含む点において、第1の実施の形態とは異なる。その他の構成は、第1の実施の形態と同様である。
 照明装置320は、可視光を照射する白色LED(Light Emitting Diode)を含む。画像センサ150は、照度センサとしての機能をさらに持つ。画像センサ150は、待機エリア10の物体を検知するとともに、撮像した画像データに基づいて待機エリア10の照度を測定する。画像センサ150は、待機エリア10の照度が基準値以下になると照明装置320に対してON信号を出力し、待機エリア10の照度が基準値を上回ると照明装置320に対してOFF信号を出力する。基準値は、例えば、光量不足により画像センサ150の検知性能が低下する照度とすることができる。
 図16を参照して、待機エリア12に設けられた信号灯器柱40には画像センサ150aが設置されており、画像センサ150aの近傍に待機エリア12を照らす照明装置を設けてもよい。この場合、画像センサ150aが待機エリア12の照度を測定する。画像センサ150と同様に、画像センサ150aは、待機エリア12の照度が基準値以下になると照明装置に対してON信号を出力し、待機エリア12の照度が基準値を上回ると照明装置に対してOFF信号を出力する。
 第2の実施の形態におけるその他の構成は、第1の実施の形態と同様である。
 [ソフトウェア構成]
 図17を参照して、待機エリアを照らす照明装置を制御するために、画像センサにおいて実行されるコンピュータプログラムの制御構造について説明する。このプログラムは、画像センサの電源が投入されたことに応じて開始する。
 このプログラムは、待機エリアの照度を計測するステップS2000と、ステップS2000の後に実行され、待機エリアの照度が基準値以下か否かを判定し、判定結果に応じて制御の流れを分岐させるステップS2010とを含む。ステップS2010において、待機エリアの照度が基準値以下ではないと判定された場合は、制御はステップS2000に戻る。
 このプログラムはさらに、ステップS2010において、待機エリアの照度が基準値以下であると判定された場合に実行され、照明装置320(図15参照)をオンするステップS2020と、ステップS2020の後に実行され、待機エリアの照度を計測するステップS2030と、ステップS2030の後に実行され、待機エリアの照度が基準値を上回ったか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS2040とを含む。ステップS2040において、待機エリアの照度が基準値を上回っていないと判定された場合は、制御はステップS2030に戻る。
 このプログラムはさらに、ステップS2040において、待機エリアの照度が基準値を上回ったと判定された場合に実行され、照明装置320をオフして制御をステップS2000に戻すステップS2050を含む。
 [動作]
 本実施の形態に係る検知システム50Aは以下のように動作する。なお、照明装置320を制御する動作以外の動作については、第1の実施の形態と同様である。
 図16を参照して、画像センサ150は、待機エリア10の画像情報に基づいて待機エリア10の照度を計測している。夜間等、待機エリア10の照度が低下して基準値以下になると(図17のステップS2010においてYES)、画像センサ150は照明装置320(図15参照)にON信号を出力する(ステップS2020)。照明装置320は、画像センサ150からのON信号に応じて白色LEDに電力を供給し待機エリア10を照らす。
 画像センサ150は待機エリア10の照度を計測しており(ステップS2030)、待機エリア10の照度が基準値を上回ると(ステップS2040においてYES)、照明装置320にOFF信号を出力する(ステップS2050)。照明装置320は、画像センサ150からのOFF信号に応じて白色LEDへの電力供給を停止し、待機エリア10への可視光の照射を終了する。
 待機エリア12の上方に設けられた画像センサ150aも同様に待機エリア12の照度を測定しており、待機エリア12の照度が基準値以下になると照明装置に対してON信号を出力する。照明装置は、画像センサ150aからのON信号に応じて白色LEDに電力を供給し待機エリア12を照らす。待機エリア12の照度が基準値を上回ると、画像センサ150aは照明装置にOFF信号を出力する。照明装置は、画像センサ150aからのOFF信号に応じて白色LEDへの電力供給を停止し、待機エリア12への可視光の照射を終了する。
 [効果]
 本実施の形態に係る検知システム50Aは、待機エリアを照らす照明装置320を含むことによって、照度低下に起因する画像センサ150の認識精度の低下を抑制できる。画像センサ150aについても同様の効果を有する。
 第2の実施の形態におけるその他の効果は、第1の実施の形態と同様である。
 第2の実施の形態では、画像センサに照度センサの機能を持たせた例について示したが、本開示はそのような実施の形態には限定されない。例えば、照度センサを別途設ける構成であってもよい。照明装置が照度センサを含むことによって、待機エリアの照度に応じて照明装置が自立的にオンオフする構成であってもよい。照明装置は、画像センサと別体であってもよいし、画像センサと一体であってもよい。
 (第3の実施の形態)
 図18を参照して、本実施の形態に係る検知システム50Bは、画像センサ100とミリ波センサ200とが筐体330によってユニット化されている点において、第1及び第2の実施の形態とは異なる。すなわち、本実施の形態に係る検知システム50Bは、1つの筐体330に画像センサ100とミリ波センサ200とを設けることによって、これらのセンサを一体化している。
 画像センサ100及びミリ波センサ200を筐体330によってユニット化することにより、検知装置400が構成される。すなわち、検知システム50Bは、筐体330によって画像センサ100及びミリ波センサ200がユニット化された検知装置400を含む。筐体330の正面には、第1面332と第1面332の下側に配される第2面334とが設けられている。筐体330の内部の第1面332に対応する位置には、ミリ波センサ200が設けられている。筐体330の第2面334には、画像センサ100が設けられている。具体的には、筐体330の第1面332には、ミリ波センサ200のアンテナ210(図15参照)を保護するためのカバーであるレドーム336が設けられている。ミリ波センサ200は、筐体330の内部における第1面332に対応する位置に設けられている。アンテナ210は、筐体330の内部において、レドーム336に対向するように配置されている。すなわち、アンテナ210は、第1面332と平行に設けられる。ただし、アンテナ210は第1面332に対して多少の傾きを持って設けられてもよい。画像センサ100は、筐体330の第2面334に取付けられている。
 図19を参照して、筐体330の第2面334は、第1面332に対して所定の角度Yをもって交差する。所定の角度Yは、ミリ波センサ200の検知対象エリアが横断歩道に対応するように筐体330を路側の支持部材(例えば信号灯器柱)に設置したときに、画像センサ100の検知対象エリアが待機エリアの少なくとも一部を含むようになる角度とされる。
 図20を参照して、検知装置400は、筐体330に画像センサ100及びミリ波センサ200が設けられた構成を有する。統合処理部は検知装置400とは別体として構成されており、検知装置400は統合処理部と通信することにより所定の処理を実行する。
 このように、画像センサ100とミリ波センサ200とを筐体330によってユニット化することにより、複数のセンサの設置を容易にできる。また、筐体330の内部の第1面332に対応する位置にミリ波センサ200を設け、第1面332と所定の角度Yをもって交差する第2面334に画像センサ100を設けることによって、画像センサ100及びミリ波センサ200の設置を容易化できる。
 さらに、画像センサ100とミリ波センサ200とをユニット化することによって、画像センサ100とミリ波センサ200との間の時刻の同期、及び横断者情報等の情報の共有が容易になる。
 その他の構成及び効果は、上記第1又は第2の実施の形態と同様である。
 (変形例3)
 図21を参照して、変形例3に係る検知装置400Aは、統合処理部300をさらに含む点において第3の実施の形態とは異なる。
 (変形例4)
 図22を参照して、変形例4に係る検知装置400Bは、待機エリアを照らす照明装置320をさらに含む点において第3の実施の形態とは異なる。検知装置400Bは、変形例3のように、統合処理部をさらに含む構成であってもよい。
 (第4の実施の形態)
 図23及び図24を参照して、本実施の形態に係る検知システム50Cは、画像センサの撮像方向、及び筐体の設置角度を調整可能に構成されている点において、第3の実施の形態とは異なる。その他の構成は、第3の実施の形態と同様である。
 検知システム50Cは検知装置500を含む。検知装置500は、画像センサ100、ミリ波センサ200、及びこれらを収容する筐体340を含む。筐体340は、第3の実施の形態で示した筐体330(図18及び図19参照)と同様の形状を有する。筐体340の正面には、第1面332と第1面332の下側に配される第2面334とが設けられている。筐体340の内部の第1面332に対応する位置には、ミリ波センサ200が設けられている。筐体340の第2面334には、画像センサ100の撮像方向を調整するための撮像方向調整装置520が設けられており、撮像方向調整装置520には画像センサ100が接続されている。筐体340の第2面334は、第1面332に対して所定の角度Y(図19参照)をもって交差する。
 検知装置500はさらに、筐体340の設置角度を調整するための設置角度調整装置510を含む。筐体340は、固定具350によってアーム部材32に固定される。設置角度調整装置510は、筐体340の裏面と固定具350との間に設けられる。
 図25を参照して、検知装置500は、撮像方向調整装置520及び設置角度調整装置510を制御する制御部530をさらに含む。制御部530は、端末装置600と無線又は有線(ここでは無線)により通信する通信部532を含む。制御部530は、端末装置600からの制御指令に応じて、撮像方向調整装置520及び設置角度調整装置510を駆動させる。なお、検知装置500は、変形例3で示したように、統合処理部を含む構成であってもよい。検知装置500はさらに、変形例4で示したように、待機エリアを照らす照明装置を含む構成であってもよい。
 図26を参照して、撮像方向調整装置520は、画像センサ100を筐体340に取り付けるための可動連結部512と、可動連結部512を駆動するためのモータ514とを含む。モータ514は、例えばステッピングモータであり、制御部530(図25参照)からの指示に応じて可動連結部512を駆動する。モータ514によって可動連結部512が駆動することにより、画像センサ100の撮像方向が変わる。
 図27を参照して、設置角度調整装置510は、筐体340と固定具350(図23及び図24参照)との間に設けられる可動連結部522と、可動連結部522を駆動するためのモータ524とを含む。モータ524は、例えばステッピングモータであり、制御部530(図25参照)からの指示に応じて可動連結部522を駆動する。モータ524によって可動連結部522が駆動することにより、筐体340の設置角度が変わる。
 図28を参照して、端末装置600は例えばスマートフォンである。端末装置600は、情報を表示するとともにタッチによるユーザの操作入力を受け付ける、タッチパネルディスプレイ610を含む。端末装置600は、筐体340の設置角度、及び画像センサ100の撮像方向の調整が可能に構成されている。タッチパネルディスプレイ610には、画像センサ100が撮像した画像を表示する画像表示領域612と、筐体340の設置角度、及び画像センサ100の撮像方向の変更操作を受け付ける操作領域614とを含む。
 検知装置500は、ジャイロセンサのような、画像センサ100の向き、及び筐体の向きを測定する機器をさらに含む構成であってもよい。その場合、検知装置500は、機器が測定した画像センサ100の向き、及び筐体340の向きを、制御部530を介して端末装置600に送信してもよい。これにより、端末装置600のユーザは、端末装置600を介して画像センサ100の向き、及び筐体340の向きを知ることができる。
 [検知装置500の設置・調整方法]
 図29は、作業者による検知装置500の設置・調整の工程を示すシーケンス図である。図29を参照して、検知装置500の設置・調整方法について説明する。
 作業者は、信号灯器柱のアーム部材32にセンサ筐体(検知装置500)を取り付ける(ステップS3000)。検知装置500は画像センサ100が撮像した映像(画像情報)を端末装置600に送信する(ステップS3010)。端末装置600は画像センサ100が撮像した映像を画像表示領域612(図28参照)に表示する(ステップS3020)。
 作業者は、ミリ波センサ200と画像センサ100とを同じ向きに設定する操作を端末装置600に対して行う(ステップS3030)。端末装置600は作業者の操作を受け付けて、それに応じた制御指令を検知装置500に送信する(ステップS3040)。検知装置500は、端末装置600からの制御指令に応じて撮像方向調整装置520を駆動し、画像センサ100の撮像方向をミリ波センサ200の向き(電波の照射方向)に合わせる(ステップS3050)。
 作業者は、端末装置600の画像表示領域612に表示されている映像を見ながら、筐体340の設置角度を調整する操作を端末装置600に対して行う(ステップS3060)。端末装置600は作業者の操作を受け付けて、それに応じた制御指令を検知装置500に送信する(ステップS3070)。検知装置500は、端末装置600からの制御指令に応じて設置角度調整装置510を駆動し(ステップS3080)、筐体340の設置角度を変更する。これにより、ミリ波センサ200の電波照射エリアが変わる。画像センサ100が撮像している領域は、ミリ波センサ200の電波照射エリアと概ね一致している。すなわち、画像表示領域612は、ミリ波センサ200による物体検知が可能なエリアを表示している。作業者は、例えば横断歩道の外周部分を歩き、端末装置600の画像表示領域612に自身の姿が映っていることを確認しながら、ミリ波センサ200の角度を調整する。作業者が複数人いる場合は、他の作業者が横断歩道の外周部分を歩いてもよい。これにより、作業者は、目視にてミリ波センサ200の検知対象エリア(電波照射エリア)を横断歩道に合わせることができる。
 ミリ波センサ200の角度調整が終わると、作業者は、画像表示領域612に対象の待機エリアが映るように、画像センサ100の撮像方向(カメラの角度)を調整する操作を端末装置600に対して行う(ステップS3090)。端末装置600は作業者の操作を受け付けて、それに応じた制御指令を検知装置500に送信する(ステップS3100)。検知装置500は、端末装置600からの制御指令に応じて撮像方向調整装置520を駆動し(ステップS3110)、画像センサ100の撮像方向(カメラの角度)を変更する。作業者は、対象の待機エリアが画像表示領域612に表示された位置を画像センサ100の撮像方向として決定する。これにより、検知装置500の設置調整作業が終了となる。
 なお、端末装置600はスマートフォンに限定されず、例えばタブレット端末、パーソナルコンピュータ(ラップトップPC)等であってもよい。
 [効果]
 本実施の形態に係る検知システム50Cは、上記した構成により、画像センサ100及びミリ波センサ200の各検知対象エリアの調整を遠隔にて行うことができる。各検知対象エリアの設定調整を地上にて行うことができる。これにより、各検知対象エリアの設定調整を容易に行うことができる。加えて、高所において手作業により行う作業を減らすことができるので、作業者の安全に資することもできる。
 さらに筐体340の設置角度、及び、画像センサ100の撮像方向を調整できるので、大小さまざまな規模の横断歩道に検知システム50Cを適用できる。
 その他の効果は、第1から第3の実施の形態と同様である。
 (第5の実施の形態)
 本実施の形態に係る検知システムは、横断歩道を横断する横断者の安全支援方法が上記した実施の形態とは異なる。本実施の形態に係る検知システムはさらに、画像センサ及びミリ波センサがアーム部材を介さずに信号灯器柱に設置されている点においても上記した実施の形態とは異なる。その他の構成は、上記した実施の形態と同様である。
 図1を参照して、上記した実施の形態では、アーム部材32を介して、画像センサ100及びミリ波センサ200を信号灯器柱30に設置する例について示した。しかし、本開示はこのような実施の形態には限定されない。画像センサ100及びミリ波センサ200は、アーム部材32を介さずに、信号灯器柱30に設置される構成であってもよい。図30を参照して、検知システム50Dは、画像センサ100及びミリ波センサ200が例えば信号灯器34を支持するための支持アーム34aに設置されている。画像センサ100a(図4参照)についても、画像センサ100と同様に信号灯器柱に設置してもよい。図31を参照して、検知システム50Dはさらに、横断歩道20を横断する横断者の横断状況に応じて青信号を延長する処理を実行する。検知システム50Dは、例えば、画像センサ100及び画像センサ100aにより待機エリア10及び待機エリア12にて待機する交通制約者A1を認識(判別)し、交通制約者A1が横断歩道20の横断を開始するとミリ波センサ200により交通制約者A1を追跡する。交通制約者とは、交通行動上、人の介助又は機器等を必要としたり、安全な移動が困難であったり等の制約を受ける人を指す。具体的には車椅子を必要とする人、白杖を持つ視覚障害者等である。交通制約者の認識においては、車椅子、白杖等を認識することにより、交通制約者と認識してもよい。検知システム50Dは、青信号の残り時間と交通制約者A1の位置、速度等の情報に基づいて、交通制約者A1が青信号の間に横断歩道20を渡りきれるか否かを判断する。検知システム50Dは、交通制約者A1が青信号の間に横断歩道20を渡りきれないと判断すると、青信号の時間を延長する延長指示を信号灯器34及び信号灯器44に対して送信する。
 検知システム50Dは、交通制約者A1の位置、速度等の情報に基づいて、交通制約者A1が横断歩道20を渡りきるのに要する時間を算出し、延長時間を指定した、青信号の延長指示を信号灯器34及び信号灯器44に対して送信する構成であってもよい。
 待機エリア10及び待機エリア12における物体の認識対象は交通制約者に限定されず、人(歩行者)、自転車等であってもよい。
 図32を参照して、検知システム50Dが実行するコンピュータプログラムの制御構造について説明する。
 このプログラムは、画像センサ100及び画像センサ100aにより待機エリア10及び待機エリア12の物体を認識するステップS4000と、ステップS4000の後に実行され、信号灯器34及び信号灯器44と通信して信号灯器34及び信号灯器44が青信号か否かを判定し、判定結果に応じて制御の流れを分岐させるステップS4010とを含む。ステップS4010において、青信号ではないと判定された場合は、制御はステップS4000に戻る。ステップS4000では、待機エリア10及び待機エリア12に存在する物体(人、自転車、交通制約者等)が認識される。
 このプログラムはさらに、ステップS4010において、信号灯器34及び信号灯器44が青信号であると判定された場合に実行され、ミリ波センサ200により横断者を追跡するステップS4020を含む。また、このプログラムは、ステップS4020の後に実行され、青信号の残り時間と横断者の位置、速度等の情報に基づいて、青信号を延長する必要があるか否かを判定し、判定結果に応じて制御の流れを分岐させるステップS4030を含む。このプラグラムはさらに、ステップS4030において、青信号を延長する必要があると判定された場合に実行され、信号灯器34及び信号灯器44に対して青信号の延長指示を送信し、制御をステップS4020に戻すステップS4040と、ステップS4030において、青信号を延長する必要がないと判定された場合に実行され、横断者の追跡を終了して制御をステップS4000に戻すステップS4050とを含む。
 延長指示を受けた信号灯器34及び信号灯器44は、所定の時間、青信号を延長する。延長指示に延長時間が指定されている場合は、信号灯器34及び信号灯器44は、指定された時間、青信号を延長する。
 検知システム50Dは、上記構成を有することにより、横断者の安全支援、特に交通制約者の安全支援を効果的に行うことができる。
 横断者の安全支援については、上記以外の安全支援を行うことも可能である。例えば、横断歩道に進入してくる車両に対して、横断者の種別とともに横断者の存在を通知するようにしてもよい。
 図33を参照して、このような検知システム50Eについて説明する。検知システム50Eは、画像センサ100及び画像センサ100aがそれぞれ待機エリア10及び待機エリア12の物体を認識する。物体の認識は、物体の種別(歩行者、自転車、交通制約者等)の認識を含む。ミリ波センサ200は横断歩道20の横断者A2を追跡する。横断者A2はここでは自転車で走行する人とする。検知システム50Eは、ミリ波センサ200による横断者A2の追跡情報(種別、位置、速度等)に基づいて、横断者A2が危険であるか否かを判断する。例えば、検知システム50Eは、横断者A2の現在位置が右折車両V1又は左折車両V2の死角になる位置か否かに基づいて、横断者A2が危険であるか否かを判断する。検知システム50Eは、右左折車両に対して、横断者A2の種別(自転車)とともに横断者A2の存在を通知する。
 さらに、横断歩道で事故が発生した場合に備えて、画像センサ及びミリ波センサが検知した情報を記憶装置に記憶しておき、事故の状況把握に役立てるようにしてもよい。
 図34を参照して、このような検知システム50Fについて説明する。検知システム50Fは、画像センサ100及び画像センサ100aがそれぞれ待機エリア10及び待機エリア12の物体を認識する。物体の認識は、物体の種別(歩行者、自転車、交通制約者等)の認識を含む。ミリ波センサ200は横断歩道20の横断者A3を追跡する。画像センサ100及び画像センサ100aの検知データ(認識結果等)及びミリ波センサ200の検知データ(追跡結果等)は、例えば、統合処理部のメモリに履歴情報として保管される。
 検知システム50Fは、横断歩道20において事故が発生した際に管理者の操作を受け付けて、履歴情報として保管されている、画像センサ100及び画像センサ100aの認識結果、及びミリ波センサ200の追跡結果に基づいて被害者(横断者A2)の移動の軌跡Tを算出する。事故が発生した際に、被害者の移動の軌跡Tを事故の状況把握に役立てることができる。
 上記実施の形態では、画像センサとミリ波センサとを組合せた例について示したが、本開示はそのような実施の形態には限定されない。例えば、画像センサに代えて、又は画像センサとともに、LiDAR(Light Detection and Ranging)を用いてもよい。複数のセンサの組合せはこれら以外であってもよい。画像センサを用いる場合、画像センサ(カメラ)の検知結果から自動的にレンズ汚れを検知する機能を設けてもよい。この場合さらに、ワイパー、エアダスター等により自動的にレンズ汚れを除去できるように構成されているとよい。
 上記実施の形態では、及び撮像方向調整装置の両方を検知装置に設けた例について示したが、本開示はそのような実施の形態には限定されない。設置角度調整装置及び撮像方向調整装置のいずれか一方を検知装置に設ける構成であってもよい。
 上記実施の形態では、検知装置の筐体の設置角度、及び画像センサの撮像方向を、設置角度調整装置及び撮像方向調整装置により遠隔で調整可能とする例について示したが、本開示はそのような実施の形態には限定されない。設置角度調整装置及び撮像方向調整装置は、例えばボールジョイントのような手動により調整可能な装置であってもよい。
 上記実施の形態では、統合処理部をセンサ(画像センサ、ミリ波センサ)とは別に設けた例について示したが、本開示はそのような実施の形態には限定されない。統合処理部はセンサ(画像センサ、又はミリ波センサ等)の機能として組み込んでもよい。
 上記実施の形態では、複数のセンサ(画像センサ、ミリ波センサ)を同一の支持部材に設置する例について示したが、本開示はそのような実施の形態には限定されない。例えば、画像センサとミリ波センサとを別々の支持部材の設置するようにしてもよい。
 上記実施の形態では、画像センサが物体の認識処理を実行する例について示したが、本開示はそのような実施の形態には限定されない。物体の認識処理は、例えば統合処理部等の画像センサ以外の装置において実行してもよい。
 なお、上述の実施形態の各処理(各機能)は、1又は複数のプロセッサを含む処理回路(Circuitry)により実現されてもよい。上記処理回路は、上記1又は複数のプロセッサに加え、1又は複数のメモリ、各種アナログ回路、各種デジタル回路が組み合わされた集積回路等により構成されてもよい。上記1又は複数のメモリは、上記各処理を上記1又は複数のプロセッサに実行させるプログラム(命令)を格納する。上記1又は複数のプロセッサは、上記1又は複数のメモリから読み出した上記プログラムに従い上記各処理を実行してもよいし、予め上記各処理を実行するように設計された論理回路によって上記各処理を実行してもよい。上記プロセッサは、CPU、GPU(Graphics Processing Unit)、DSP(Digital Signal Processor)、FPGA(Field Programmable Gate Array)、ASIC(Application Specific Integrated Circuit)等、コンピュータの制御に適合する種々のプロセッサであってよい。なお物理的に分離した上記複数のプロセッサが互いに協働して上記各処理を実行してもよい。例えば物理的に分離した複数のコンピュータのそれぞれに搭載された上記プロセッサがLAN(Local Area Network)、WAN(Wide Area Network)、インターネット等のネットワークを介して互いに協働して上記各処理を実行してもよい。
 なお、上記実施の形態において開示された技術を適宜組合せて得られる実施形態についても、本開示の技術的範囲に含まれる。
 今回開示された実施の形態は単に例示であって、本開示が上記した実施の形態のみに限定されるわけではない。本開示の範囲は、発明の詳細な説明の記載を参酌した上で、特許請求の範囲の各請求項によって示され、そこに記載された文言と均等の意味及び範囲内での全ての変更を含む。
 10、12   待機エリア
 20   横断歩道
 30、40   信号灯器柱
 32、42   アーム部材
 34、44   信号灯器
 34a   支持アーム
 50、50A、50B、50C、50D、50E、50F   検知システム
 60、62、70、72、82、84   検知対象エリア
 64、66   重複エリア
 80   直下に位置するエリア
 100、100a、150、150a   画像センサ
 110   撮像部
 120   画像処理部
 200   ミリ波センサ
 210   アンテナ
 220   送信部
 230   受信部
 240   処理回路部
 300   統合処理部
 302   演算部
 304   メモリ
 306、532   通信部
 320   照明装置
 330、340   筐体
 332   第1面
 334   第2面
 336   レドーム
 350   固定具
 400、400A、400B、500   検知装置
 510   設置角度調整装置
 512、522   可動連結部
 514、524   モータ
 520   撮像方向調整装置
 530   制御部
 600   端末装置
 610   タッチパネルディスプレイ
 612   画像表示領域
 614   操作領域
 1000   複合センサ
 1010   支持部材
 A、B   人
 A1   交通制約者
 A2、A3   横断者
 P   待機者
 V1   右折車両
 V2   左折車両
 T   軌跡

Claims (18)

  1.  横断歩道に隣接する第1エリアの上方に設置された第1センサであって、前記第1センサが物体を検知する第1検知対象エリアが前記第1エリアの少なくとも一部を含む前記第1センサと、
     前記第1エリアの上方に設置された第2センサであって、前記第2センサが物体を検知する第2検知対象エリアが前記横断歩道の少なくとも一部を含み、前記第1センサとは検出特性が異なる前記第2センサと、
     を備える検知システム。
  2.  前記第1検知対象エリアの少なくとも一部は、前記第1エリア又は前記横断歩道において、前記第2検知対象エリアと重複する、請求項1に記載の検知システム。
  3.  前記第1検知対象エリアと前記第2検知対象エリアが重複する重複エリアは、前記重複エリアを除く前記第1検知対象エリア、及び前記重複エリアを除く前記第2検知対象エリアのいずれのエリアよりも小さい、請求項2に記載の検知システム。
  4.  前記第1センサは、前記第1エリアに存在する物体を検知する画像センサを含み、
     前記第2センサは、前記横断歩道に存在する物体を検知するミリ波センサを含む、請求項1から請求項3のいずれか1項に記載の検知システム。
  5.  前記第1センサと前記第2センサとをユニット化する筐体をさらに含む、請求項4に記載の検知システム。
  6.  前記筐体は、第1面と、前記第1面に対して交差する第2面とを持ち、
     前記第1センサは、前記筐体の前記第2面に設けられ、
     前記第2センサは、前記筐体の内部の前記第1面に対応する位置に設けられる、請求項5に記載の検知システム。
  7.  前記ミリ波センサは、ミリ波帯の検知信号を照射するとともに、照射された検知信号の物体による反射波を受信するアンテナを含み、
     前記アンテナは、前記筐体の内部において、前記第1面と平行に設けられる、請求項6に記載の検知システム。
  8.  前記画像センサの撮像方向を調整する撮像方向調整装置をさらに含む、請求項4から請求項7のいずれか1項に記載の検知システム。
  9.  前記第1エリアを照らす照明装置をさらに含む、請求項1から請求項8のいずれか1項に記載の検知システム。
  10.  前記第1センサは、前記第1エリアに設けられた支持部材に設置され、
     前記第2センサは、前記第1センサが設置される前記支持部材に設置される、請求項1から請求項9のいずれか1項に記載の検知システム。
  11.  前記筐体は、前記第1エリアに設けられた支持部材に設置され、
     前記筐体の設置角度を調整する設置角度調整装置をさらに含む、請求項5から請求項9のいずれか1項に記載の検知システム。
  12.  前記第1センサからのセンサデータに基づいて、前記第1エリアに存在する物体の種類及び向きを識別し、識別結果に応じて、識別した前記物体を前記横断歩道において前記第2センサに追跡させる処理を実行する処理部をさらに含む、請求項1から請求項11のいずれか1項に記載の検知システム。
  13.  前記処理部は、前記第1エリアにおける前記物体の識別結果又は前記横断歩道における前記物体の追跡状況に応じて、所定の処理をさらに実行する、請求項12に記載の検知システム。
  14.  前記所定の処理は、前記横断歩道に進入しようとする車両への前記物体の存在の通知、前記横断歩道において前記物体が移動した軌跡の記録、及び、前記横断歩道に設けられた歩行者用交通信号灯器の制御の少なくとも1つを含む、請求項13に記載の検知システム。
  15.  第1センサと、
     前記第1センサとは検出特性が異なる第2センサと、
     前記第1センサと前記第2センサとをユニット化する筐体とを含み、
     前記筐体は、横断歩道に隣接する第1エリアに設けられた支持部材に設置され、
     前記筐体が前記支持部材に設置された状態において、前記第1センサが物体を検知する第1検知対象エリアが前記第1エリアの少なくとも一部を含み、前記第2センサが物体を検知する第2検知対象エリアが前記横断歩道の少なくとも一部を含む、検知装置。
  16.  前記筐体に設けられ、前記第1エリアを照らす照明装置をさらに含む、請求項15に記載の検知装置。
  17.  前記第1センサは、前記第1エリアに存在する物体を検知する画像センサを含み、
     前記第2センサは、前記横断歩道に存在する物体を検知するミリ波センサを含む、請求項15又は請求項16に記載の検知装置。
  18.  横断歩道に隣接する第1エリアの上方に設けられた支持部材に検知装置を設置する設置方法であって、
     前記検知装置は、前記第1エリアの少なくとも一部を検知対象エリアとする画像センサと、前記横断歩道を検知対象エリアとするミリ波センサと、前記画像センサと前記ミリ波センサとをユニット化する筐体と、前記支持部材に対する前記筐体の設置角度を調整する設置角度調整装置と、前記画像センサの撮像方向を調整する撮像方向調整装置とを含み、
     前記設置方法は、
      前記支持部材に前記筐体を取り付ける工程と、
      前記撮像方向調整装置を作業者が操作することにより、前記画像センサの撮像方向を前記ミリ波センサの検知方向に合わせる工程と、
      前記画像センサからの画像情報に基づいて前記設置角度調整装置を作業者が操作することにより、前記ミリ波センサの検知対象エリアが前記横断歩道の少なくとも一部を含むように、前記筐体の設置角度を調整する工程と、
      前記画像センサからの画像情報に基づいて前記撮像方向調整装置を作業者が操作することにより、前記画像センサの検知対象エリアが前記第1エリアの少なくとも一部を含むように、前記画像センサの撮像方向を調整する工程とを含む、検知装置の設置方法。
PCT/JP2023/011684 2022-04-08 2023-03-24 検知システム、検知装置、及び検知装置の設置方法 WO2023195355A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022064297 2022-04-08
JP2022-064297 2022-04-08

Publications (1)

Publication Number Publication Date
WO2023195355A1 true WO2023195355A1 (ja) 2023-10-12

Family

ID=88242919

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/011684 WO2023195355A1 (ja) 2022-04-08 2023-03-24 検知システム、検知装置、及び検知装置の設置方法

Country Status (1)

Country Link
WO (1) WO2023195355A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021507420A (ja) * 2017-12-21 2021-02-22 ルミレッズ リミテッド ライアビリティ カンパニー 道路照明
JP2021179803A (ja) * 2020-05-13 2021-11-18 オムロン株式会社 物体追跡装置、物体追跡方法、および物体追跡プログラム
JP2022024833A (ja) * 2020-07-28 2022-02-09 トヨタ自動車株式会社 車両管理システム、管理方法、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021507420A (ja) * 2017-12-21 2021-02-22 ルミレッズ リミテッド ライアビリティ カンパニー 道路照明
JP2021179803A (ja) * 2020-05-13 2021-11-18 オムロン株式会社 物体追跡装置、物体追跡方法、および物体追跡プログラム
JP2022024833A (ja) * 2020-07-28 2022-02-09 トヨタ自動車株式会社 車両管理システム、管理方法、及びプログラム

Similar Documents

Publication Publication Date Title
KR101661237B1 (ko) 횡단보도의 교통신호안전시스템
US6281806B1 (en) Driver road hazard warning and illumination system
KR101547807B1 (ko) 교통신호 보조안전시스템
US11355014B1 (en) System for warning about intersection danger based on situation prediction
EP1775692B1 (en) Safety procedure and device for vehicle junctions
US20170007459A1 (en) Vision aiding method and apparatus integrated with a camera module and a light sensor
JP6510654B2 (ja) 自律移動体及び信号制御システム
BR102020016058A2 (pt) Sistema de instrução remota de veículos e dispositivo de instrução remota
KR102153487B1 (ko) 스마트 도로 반사경
US20050278088A1 (en) Method and apparatus for collision avoidance and enhanced visibility in vehicles
KR20090013937A (ko) 교통 통제 로봇과 이를 이용한 교통 통제 시스템 및 그제어 방법
KR101904929B1 (ko) 지능형 스마트 횡단보도 보행안전 시스템
FR2794271A1 (fr) Systeme pour ameliorer la securite du trafic de vehicules
KR101635477B1 (ko) 횡단보도의 교통신호안전시스템
JP7165093B2 (ja) 車両制御システム
KR101800007B1 (ko) 횡단보도 보행자를 위한 안전지킴 cctv 시스템
KR102080698B1 (ko) 정지선 위반 차량 감지 시스템
CN112870033A (zh) 用于非结构化道路的智能导盲头盔系统及导航方法
CN111035543A (zh) 一种智能导盲机器人
KR101250566B1 (ko) 나이트 비전 시스템 및 그 제어방법
US20200307638A1 (en) Vehicle control system
KR102399951B1 (ko) 도로 통합 관제 시스템
WO2023195355A1 (ja) 検知システム、検知装置、及び検知装置の設置方法
JP2020135044A (ja) 自動運転システム
JP6913564B2 (ja) 交通制御システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23784645

Country of ref document: EP

Kind code of ref document: A1