WO2022239348A1 - レーダ装置、信号処理方法、及びプログラム - Google Patents
レーダ装置、信号処理方法、及びプログラム Download PDFInfo
- Publication number
- WO2022239348A1 WO2022239348A1 PCT/JP2022/006158 JP2022006158W WO2022239348A1 WO 2022239348 A1 WO2022239348 A1 WO 2022239348A1 JP 2022006158 W JP2022006158 W JP 2022006158W WO 2022239348 A1 WO2022239348 A1 WO 2022239348A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- signal
- threshold
- noise
- vehicle
- radar device
- Prior art date
Links
- 238000003672 processing method Methods 0.000 title claims description 17
- 238000001228 spectrum Methods 0.000 claims abstract description 117
- 238000001514 detection method Methods 0.000 claims abstract description 90
- 238000000605 extraction Methods 0.000 claims abstract description 53
- 238000012545 processing Methods 0.000 claims abstract description 50
- 239000000284 extract Substances 0.000 claims abstract description 26
- 230000005540 biological transmission Effects 0.000 claims description 27
- 230000001131 transforming effect Effects 0.000 claims description 13
- 238000004891 communication Methods 0.000 description 71
- 238000005516 engineering process Methods 0.000 description 33
- 238000000034 method Methods 0.000 description 27
- 230000008569 process Effects 0.000 description 12
- 238000005259 measurement Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000033001 locomotion Effects 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 6
- 238000009825 accumulation Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000010391 action planning Effects 0.000 description 4
- 230000004927 fusion Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 206010062519 Poor quality sleep Diseases 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000015541 sensory perception of touch Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/06—Systems determining position data of a target
- G01S13/08—Systems for measuring distance only
- G01S13/32—Systems for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
- G01S13/34—Systems for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated using transmission of continuous, frequency-modulated waves while heterodyning the received signal, or a signal derived therefrom, with a locally-generated signal related to the contemporaneously transmitted signal
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/06—Systems determining position data of a target
- G01S13/08—Systems for measuring distance only
- G01S13/32—Systems for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
- G01S13/34—Systems for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated using transmission of continuous, frequency-modulated waves while heterodyning the received signal, or a signal derived therefrom, with a locally-generated signal related to the contemporaneously transmitted signal
- G01S13/343—Systems for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated using transmission of continuous, frequency-modulated waves while heterodyning the received signal, or a signal derived therefrom, with a locally-generated signal related to the contemporaneously transmitted signal using sawtooth modulation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/35—Details of non-pulse systems
- G01S7/352—Receivers
- G01S7/354—Extracting wanted echo-signals
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/28—Details of pulse systems
- G01S7/285—Receivers
- G01S7/292—Extracting wanted echo-signals
- G01S7/2921—Extracting wanted echo-signals based on data belonging to one radar period
- G01S7/2922—Extracting wanted echo-signals based on data belonging to one radar period by using a controlled threshold
Definitions
- This technology relates to a radar device, a signal processing method, and a program that can be mounted on a vehicle.
- Patent Document 1 discloses a radar device capable of suppressing erroneous detection of internal reflection signals of a vehicle.
- CFAR Constant False Alarm Rate
- an object of the present technology is to provide a radar device, a signal processing method, and a program capable of improving target detection accuracy.
- a radar device includes a first extractor, a second extractor, and a peak detector.
- the first extraction unit performs CFAR (Constant False Alarm Rate) processing on a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave to obtain a first is set, and noise signals are extracted from signals smaller than the first threshold in the frequency spectrum.
- the second extraction unit sets a second threshold based on the noise signal, and extracts a signal larger than the second threshold from the frequency spectrum as a detection signal.
- the peak detector detects a peak of the detection signal.
- CFAR processing is performed on the frequency spectrum, a first threshold is set, and noise signals are extracted from signals smaller than the first threshold in the frequency spectrum. Also, a second threshold is set based on the noise signal, and signals larger than the second threshold in the frequency spectrum are extracted as detection signals. By detecting the peak of the detection signal, it is possible to improve the target detection accuracy.
- the first extraction unit may extract a signal smaller than the first threshold or a part of the signal smaller than the first threshold as the noise signal.
- the first extraction unit may extract, as the noise signal, a signal included in a predetermined range among signals smaller than the first threshold.
- the first extraction unit may extract, as the noise signal, a signal other than a signal corresponding to a reflected wave from a stationary object, among the signals smaller than the first threshold.
- the second extraction unit may calculate a noise floor based on the noise signal, and set a value larger than the calculated noise floor as the second threshold.
- the second extraction unit may calculate an average value, a variance value, or a standard deviation of the noise signal as the noise floor.
- the second extraction unit may set a value obtained by multiplying the noise floor by a predetermined coefficient or a value obtained by adding a predetermined constant to the noise floor as the second threshold.
- the radar device further emits a frequency modulated continuous wave (FMCW) signal obtained by frequency-modulating a continuous wave as a transmission signal, and emits the radar wave, and generates a beat signal based on the reception signal and the transmission signal.
- FMCW frequency modulated continuous wave
- the first extraction unit may obtain, as the frequency spectrum, a frequency spectrum related to distance generated by Fourier transforming the beat signal in the distance direction.
- the radar device may further include a target information generation unit that detects targets existing in the vicinity based on the detection result of the peak detection unit.
- the radar device may be configured to be mounted on a mobile object.
- the first extraction unit extracts the first Of the signals smaller than the threshold, signals other than signals corresponding to reflected waves from stationary objects may be extracted as the noise signals.
- the radar device further emits the radar wave as a transmission signal that is a frequency modulated continuous wave (FMCW) signal obtained by frequency-modulating a continuous wave, and generates a beat signal based on the reception signal and the transmission signal.
- FMCW frequency modulated continuous wave
- You may comprise the transmission-and-reception part which carries out.
- the first extractor may generate a frequency spectrum related to relative velocity by Fourier transforming the frequency spectrum related to distance generated by Fourier transforming the beat signal in the direction of distance in the direction of relative velocity. may be obtained as the frequency spectrum.
- a signal processing method is an information processing method executed by a computer system, and includes a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave.
- CFAR Constant False Alarm Rate
- processing is performed to set a first threshold, and noise signals are extracted from signals smaller than the first threshold in the frequency spectrum.
- a second threshold is set based on the noise signal, and a signal greater than the second threshold in the frequency spectrum is extracted as a detection signal. A peak of the detection signal is detected.
- a program causes a computer system to execute the following steps.
- a first threshold is set by performing CFAR (Constant False Alarm Rate) processing on a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave, and the frequency Extracting noise signals from signals in the spectrum that are below the first threshold. setting a second threshold based on the noise signal, and extracting a signal greater than the second threshold from the frequency spectrum as a detection signal; detecting a peak of the detection signal;
- CFAR Constant False Alarm Rate
- FIG. 1 is a block diagram showing a configuration example of a vehicle control system
- FIG. FIG. 4 is a diagram showing an example of a sensing area
- It is a schematic diagram which shows the structural example of a radar apparatus.
- FIG. 10 is a graph showing CFAR thresholds set for range spectra;
- FIG. FIG. 11 is a graph showing noise thresholds set for range spectra;
- FIG. FIG. 11 is a graph showing an example of a distance spectrum according to azimuth.
- FIG. 2 is a graph showing an example of a two-dimensional spectrum with distance (Range) and relative speed (Speed) as two axes;
- FIG. 1 is a block diagram showing a configuration example of a vehicle control system 11, which is an example of a mobile device control system to which the present technology is applied.
- the vehicle control system 11 is provided in the vehicle 1 and performs processing related to driving support and automatic driving of the vehicle 1.
- the vehicle control system 11 includes a vehicle control ECU (Electronic Control Unit) 21, a communication unit 22, a map information accumulation unit 23, a position information acquisition unit 24, an external recognition sensor 25, an in-vehicle sensor 26, a vehicle sensor 27, a storage unit 28, a travel Assistance/automatic driving control unit 29 , DMS (Driver Monitoring System) 30 , HMI (Human Machine Interface) 31 , and vehicle control unit 32 .
- vehicle control ECU Electronic Control Unit
- communication unit 22 includes a communication unit 22, a map information accumulation unit 23, a position information acquisition unit 24, an external recognition sensor 25, an in-vehicle sensor 26, a vehicle sensor 27, a storage unit 28, a travel Assistance/automatic driving control unit 29 , DMS (Driver Monitoring System) 30 , HMI (Human Machine Interface) 31 , and vehicle control unit 32 .
- HMI Human Machine Interface
- Vehicle control ECU 21, communication unit 22, map information storage unit 23, position information acquisition unit 24, external recognition sensor 25, in-vehicle sensor 26, vehicle sensor 27, storage unit 28, driving support/automatic driving control unit 29, driver monitoring system ( DMS) 30 , human machine interface (HMI) 31 , and vehicle control unit 32 are connected via a communication network 41 so as to be able to communicate with each other.
- the communication network 41 is, for example, a CAN (Controller Area Network), a LIN (Local Interconnect Network), a LAN (Local Area Network), a FlexRay (registered trademark), or an in-vehicle communication network conforming to a digital two-way communication standard such as Ethernet (registered trademark). It is composed of a communication network, a bus, and the like.
- the communication network 41 may be used properly depending on the type of data to be transmitted. For example, CAN may be applied to data related to vehicle control, and Ethernet may be applied to large-capacity data. Each part of the vehicle control system 11 performs wireless communication assuming relatively short-range communication such as near field communication (NFC (Near Field Communication)) or Bluetooth (registered trademark), for example, without going through the communication network 41. may be connected directly using NFC (Near Field Communication)) or Bluetooth (registered trademark), for example, without going through the communication network 41. may be connected directly using NFC (Near Field Communication)
- Bluetooth registered trademark
- the vehicle control ECU 21 is composed of various processors such as a CPU (Central Processing Unit) and an MPU (Micro Processing Unit).
- the vehicle control ECU 21 controls the functions of the entire vehicle control system 11 or a part thereof.
- the communication unit 22 communicates with various devices inside and outside the vehicle, other vehicles, servers, base stations, etc., and transmits and receives various data. At this time, the communication unit 22 can perform communication using a plurality of communication methods.
- the communication unit 22 is, for example, 5G (fifth generation mobile communication system), LTE (Long Term Evolution), DSRC (Dedicated Short Range Communications), etc., via a base station or access point, via a wireless communication system, on the external network communicates with a server (hereinafter referred to as an external server) located in the external network.
- the external network with which the communication unit 22 communicates is, for example, the Internet, a cloud network, or a provider's own network.
- the communication method that the communication unit 22 performs with the external network is not particularly limited as long as it is a wireless communication method that enables digital two-way communication at a communication speed of a predetermined value or more and a distance of a predetermined value or more.
- the communication unit 22 can communicate with a terminal existing in the vicinity of the own vehicle using P2P (Peer To Peer) technology.
- Terminals in the vicinity of one's own vehicle are, for example, terminals worn by mobile bodies such as pedestrians and bicycles that move at a relatively low speed, terminals installed at fixed locations such as stores, or MTC (Machine Type Communication) terminal.
- the communication unit 22 can also perform V2X communication.
- V2X communication includes, for example, vehicle-to-vehicle communication with other vehicles, vehicle-to-infrastructure communication with roadside equipment, etc., and vehicle-to-home communication. , and communication between the vehicle and others, such as vehicle-to-pedestrian communication with a terminal or the like possessed by a pedestrian.
- the communication unit 22 can receive, for example, a program for updating software that controls the operation of the vehicle control system 11 from the outside (Over The Air).
- the communication unit 22 can also receive map information, traffic information, information around the vehicle 1, and the like from the outside. Further, for example, the communication unit 22 can transmit information about the vehicle 1, information about the surroundings of the vehicle 1, and the like to the outside.
- the information about the vehicle 1 that the communication unit 22 transmits to the outside includes, for example, data indicating the state of the vehicle 1, recognition results by the recognition unit 73, and the like.
- the communication unit 22 performs communication corresponding to a vehicle emergency call system such as e-call.
- the communication unit 22 receives electromagnetic waves transmitted by a road traffic information communication system (VICS (Vehicle Information and Communication System) (registered trademark)) such as radio wave beacons, optical beacons, and FM multiplex broadcasting.
- VICS Vehicle Information and Communication System
- radio wave beacons such as radio wave beacons, optical beacons, and FM multiplex broadcasting.
- the communication unit 22 can communicate with each device in the vehicle using, for example, wireless communication.
- the communication unit 22 performs wireless communication with devices in the vehicle using a communication method such as wireless LAN, Bluetooth, NFC, and WUSB (Wireless USB) that enables digital two-way communication at a communication speed higher than a predetermined value. can be done.
- the communication unit 22 can also communicate with each device in the vehicle using wired communication.
- the communication unit 22 can communicate with each device in the vehicle by wired communication via a cable connected to a connection terminal (not shown).
- the communication unit 22 performs digital two-way communication at a predetermined communication speed or higher by wired communication such as USB (Universal Serial Bus), HDMI (High-Definition Multimedia Interface) (registered trademark), and MHL (Mobile High-definition Link). can communicate with each device in the vehicle.
- wired communication such as USB (Universal Serial Bus), HDMI (High-Definition Multimedia Interface) (registered trademark), and MHL (Mobile High-definition Link).
- equipment in the vehicle refers to equipment that is not connected to the communication network 41 in the vehicle, for example.
- in-vehicle devices include mobile devices and wearable devices possessed by passengers such as drivers, information devices that are brought into the vehicle and temporarily installed, and the like.
- the map information accumulation unit 23 accumulates one or both of the map obtained from the outside and the map created by the vehicle 1. For example, the map information accumulation unit 23 accumulates a three-dimensional high-precision map, a global map covering a wide area, and the like, which is lower in accuracy than the high-precision map.
- High-precision maps are, for example, dynamic maps, point cloud maps, vector maps, and the like.
- the dynamic map is, for example, a map consisting of four layers of dynamic information, quasi-dynamic information, quasi-static information, and static information, and is provided to the vehicle 1 from an external server or the like.
- a point cloud map is a map composed of a point cloud (point cloud data).
- a vector map is, for example, a map adapted to ADAS (Advanced Driver Assistance System) and AD (Autonomous Driving) by associating traffic information such as lanes and positions of traffic lights with a point cloud map.
- the point cloud map and the vector map may be provided, for example, from an external server or the like, or may be a map for matching with a local map, which will be described later, based on sensing results from the camera 51, the radar device 52, the LiDAR 53, and the like. may be created in the vehicle 1 and stored in the map information storage unit 23 . Further, when a high-precision map is provided from an external server or the like, in order to reduce the communication capacity, map data of, for example, several hundred meters square, regarding the planned route that the vehicle 1 will travel from now on, is acquired from the external server or the like. .
- the position information acquisition unit 24 receives GNSS signals from GNSS (Global Navigation Satellite System) satellites and acquires position information of the vehicle 1 .
- the acquired position information is supplied to the driving support/automatic driving control unit 29 .
- the location information acquisition unit 24 is not limited to the method using GNSS signals, and may acquire location information using beacons, for example.
- the external recognition sensor 25 includes various sensors used for recognizing situations outside the vehicle 1 and supplies sensor data from each sensor to each part of the vehicle control system 11 .
- the type and number of sensors included in the external recognition sensor 25 are arbitrary.
- the external recognition sensor 25 includes a camera 51 , a radar device 52 , a LiDAR (Light Detection and Ranging, Laser Imaging Detection and Ranging) 53 and an ultrasonic sensor 54 .
- the configuration is not limited to this, and the external recognition sensor 25 may be configured to include one or more types of sensors among the camera 51 , the radar device 52 , the LiDAR 53 and the ultrasonic sensor 54 .
- the number of cameras 51 , radar devices 52 , LiDAR 53 , and ultrasonic sensors 54 is not particularly limited as long as it is a number that can be realistically installed in the vehicle 1 .
- the type of sensor provided in the external recognition sensor 25 is not limited to this example, and the external recognition sensor 25 may be provided with other types of sensors. An example of the sensing area of each sensor included in the external recognition sensor 25 will be described later.
- the imaging method of the camera 51 is not particularly limited.
- cameras of various types such as a ToF (Time Of Flight) camera, a stereo camera, a monocular camera, and an infrared camera, which are capable of distance measurement, can be applied to the camera 51 as necessary.
- the camera 51 is not limited to this, and may simply acquire a photographed image regardless of distance measurement.
- the external recognition sensor 25 can include an environment sensor for detecting the environment with respect to the vehicle 1.
- the environment sensor is a sensor for detecting the environment such as weather, climate, brightness, etc., and can include various sensors such as raindrop sensors, fog sensors, sunshine sensors, snow sensors, and illuminance sensors.
- the external recognition sensor 25 includes a microphone used for detecting the sound around the vehicle 1 and the position of the sound source.
- the in-vehicle sensor 26 includes various sensors for detecting information inside the vehicle, and supplies sensor data from each sensor to each part of the vehicle control system 11 .
- the types and number of various sensors included in the in-vehicle sensor 26 are not particularly limited as long as they are the types and number that can be realistically installed in the vehicle 1 .
- in-vehicle sensors 26 may comprise one or more of cameras, radar devices, seat sensors, steering wheel sensors, microphones, biometric sensors.
- cameras of various shooting methods capable of distance measurement such as a ToF camera, a stereo camera, a monocular camera, and an infrared camera, can be used.
- the camera included in the in-vehicle sensor 26 is not limited to this, and may simply acquire a photographed image regardless of distance measurement.
- the biosensors included in the in-vehicle sensor 26 are provided, for example, on a seat, a steering wheel, or the like, and detect various biometric information of a passenger such as a driver.
- the vehicle sensor 27 includes various sensors for detecting the state of the vehicle 1, and supplies sensor data from each sensor to each section of the vehicle control system 11.
- the types and number of various sensors included in the vehicle sensor 27 are not particularly limited as long as the types and number are practically installable in the vehicle 1 .
- the vehicle sensor 27 includes a speed sensor, an acceleration sensor, an angular velocity sensor (gyro sensor), and an inertial measurement unit (IMU (Inertial Measurement Unit)) integrating them.
- the vehicle sensor 27 includes a steering angle sensor that detects the steering angle of the steering wheel, a yaw rate sensor, an accelerator sensor that detects the amount of operation of the accelerator pedal, and a brake sensor that detects the amount of operation of the brake pedal.
- the vehicle sensor 27 includes a rotation sensor that detects the number of rotations of an engine or a motor, an air pressure sensor that detects tire air pressure, a slip rate sensor that detects a tire slip rate, and a wheel speed sensor that detects the rotational speed of a wheel.
- a sensor is provided.
- the vehicle sensor 27 includes a battery sensor that detects the remaining battery level and temperature, and an impact sensor that detects external impact.
- the storage unit 28 includes at least one of a nonvolatile storage medium and a volatile storage medium, and stores data and programs.
- the storage unit 28 is used, for example, as an EEPROM (Electrically Erasable Programmable Read Only Memory) and a RAM (Random Access Memory). And a magneto-optical storage device can be applied.
- the storage unit 28 stores various programs and data used by each unit of the vehicle control system 11 .
- the storage unit 28 includes an EDR (Event Data Recorder) and a DSSAD (Data Storage System for Automated Driving), and stores information on the vehicle 1 before and after an event such as an accident and information acquired by the in-vehicle sensor 26 .
- EDR Event Data Recorder
- DSSAD Data Storage System for Automated Driving
- the driving support/automatic driving control unit 29 controls driving support and automatic driving of the vehicle 1 .
- the driving support/automatic driving control unit 29 includes an analysis unit 61 , an action planning unit 62 and an operation control unit 63 .
- the analysis unit 61 analyzes the vehicle 1 and its surroundings.
- the analysis unit 61 includes a self-position estimation unit 71 , a sensor fusion unit 72 and a recognition unit 73 .
- the self-position estimation unit 71 estimates the self-position of the vehicle 1 based on the sensor data from the external recognition sensor 25 and the high-precision map accumulated in the map information accumulation unit 23 . For example, the self-position estimation unit 71 generates a local map based on sensor data from the external recognition sensor 25, and estimates the self-position of the vehicle 1 by matching the local map and the high-precision map. The position of the vehicle 1 is based on, for example, the center of the rear wheel versus axle.
- the local map is, for example, a three-dimensional high-precision map created using a technique such as SLAM (Simultaneous Localization and Mapping), an occupancy grid map, or the like.
- the three-dimensional high-precision map is, for example, the point cloud map described above.
- the occupancy grid map is a map that divides the three-dimensional or two-dimensional space around the vehicle 1 into grids (lattice) of a predetermined size and shows the occupancy state of objects in grid units.
- the occupancy state of an object is indicated, for example, by the presence or absence of the object and the existence probability.
- the local map is also used, for example, by the recognizing unit 73 for detection processing and recognition processing of the situation outside the vehicle 1 .
- the self-position estimation unit 71 may estimate the self-position of the vehicle 1 based on the position information acquired by the position information acquisition unit 24 and the sensor data from the vehicle sensor 27.
- the sensor fusion unit 72 combines a plurality of different types of sensor data (for example, image data supplied from the camera 51 and sensor data supplied from the radar device 52) to perform sensor fusion processing to obtain new information. conduct.
- Methods for combining different types of sensor data include integration, fusion, federation, and the like.
- the recognition unit 73 executes a detection process for detecting the situation outside the vehicle 1 and a recognition process for recognizing the situation outside the vehicle 1 .
- the recognition unit 73 performs detection processing and recognition processing of the situation outside the vehicle 1 based on information from the external recognition sensor 25, information from the self-position estimation unit 71, information from the sensor fusion unit 72, and the like. .
- the recognition unit 73 performs detection processing, recognition processing, and the like of objects around the vehicle 1 .
- Object detection processing is, for example, processing for detecting the presence or absence, size, shape, position, movement, and the like of an object.
- Object recognition processing is, for example, processing for recognizing an attribute such as the type of an object or identifying a specific object.
- detection processing and recognition processing are not always clearly separated, and may overlap.
- the recognition unit 73 detects objects around the vehicle 1 by clustering the point cloud based on sensor data from the radar device 52 or the LiDAR 53 for each group of point groups. As a result, presence/absence, size, shape, and position of objects around the vehicle 1 are detected.
- the recognizing unit 73 detects the movement of objects around the vehicle 1 by performing tracking that follows the movement of the cluster of points classified by clustering. As a result, the speed and traveling direction (movement vector) of the object around the vehicle 1 are detected.
- the recognition unit 73 detects or recognizes vehicles, people, bicycles, obstacles, structures, roads, traffic lights, traffic signs, road markings, etc. based on image data supplied from the camera 51 . Further, the recognition unit 73 may recognize types of objects around the vehicle 1 by performing recognition processing such as semantic segmentation.
- the recognition unit 73 based on the map accumulated in the map information accumulation unit 23, the estimation result of the self-position by the self-position estimation unit 71, and the recognition result of the object around the vehicle 1 by the recognition unit 73, Recognition processing of traffic rules around the vehicle 1 can be performed. Through this processing, the recognition unit 73 can recognize the position and state of traffic lights, the content of traffic signs and road markings, the content of traffic restrictions, the lanes in which the vehicle can travel, and the like.
- the recognition unit 73 can perform recognition processing of the environment around the vehicle 1 .
- the surrounding environment to be recognized by the recognition unit 73 includes the weather, temperature, humidity, brightness, road surface conditions, and the like.
- the action plan section 62 creates an action plan for the vehicle 1.
- the action planning unit 62 creates an action plan by performing route planning and route following processing.
- global path planning is the process of planning a rough path from the start to the goal. This route planning is called trajectory planning, and in the planned route, trajectory generation (local path planning) that allows safe and smooth progress in the vicinity of the vehicle 1 in consideration of the motion characteristics of the vehicle 1 is performed. It also includes the processing to be performed.
- Route following is the process of planning actions to safely and accurately travel the route planned by route planning within the planned time.
- the action planning unit 62 can, for example, calculate the target speed and the target angular speed of the vehicle 1 based on the result of this route following processing.
- the motion control unit 63 controls the motion of the vehicle 1 in order to implement the action plan created by the action planning unit 62.
- the operation control unit 63 controls a steering control unit 81, a brake control unit 82, and a drive control unit 83 included in the vehicle control unit 32, which will be described later, so that the vehicle 1 can control the trajectory calculated by the trajectory plan. Acceleration/deceleration control and direction control are performed so as to advance.
- the operation control unit 63 performs cooperative control aimed at realizing ADAS functions such as collision avoidance or shock mitigation, follow-up driving, vehicle speed maintenance driving, collision warning of own vehicle, and lane deviation warning of own vehicle.
- the operation control unit 63 performs cooperative control aimed at automatic driving in which the vehicle autonomously travels without depending on the operation of the driver.
- the DMS 30 performs driver authentication processing, driver state recognition processing, etc., based on sensor data from the in-vehicle sensor 26 and input data input to the HMI 31, which will be described later.
- As the state of the driver to be recognized for example, physical condition, wakefulness, concentration, fatigue, gaze direction, drunkenness, driving operation, posture, etc. are assumed.
- the DMS 30 may perform authentication processing for passengers other than the driver and processing for recognizing the state of the passenger. Further, for example, the DMS 30 may perform recognition processing of the situation inside the vehicle based on the sensor data from the sensor 26 inside the vehicle. Conditions inside the vehicle to be recognized include temperature, humidity, brightness, smell, and the like, for example.
- the HMI 31 inputs various data, instructions, etc., and presents various data to the driver.
- the HMI 31 comprises an input device for human input of data.
- the HMI 31 generates an input signal based on data, instructions, etc. input from an input device, and supplies the input signal to each section of the vehicle control system 11 .
- the HMI 31 includes operators such as a touch panel, buttons, switches, and levers as input devices.
- the HMI 31 is not limited to this, and may further include an input device capable of inputting information by a method other than manual operation using voice, gestures, or the like.
- the HMI 31 may use, as an input device, a remote control device using infrared rays or radio waves, or an external connection device such as a mobile device or wearable device corresponding to the operation of the vehicle control system 11 .
- the presentation of data by HMI 31 will be described schematically.
- the HMI 31 generates visual information, auditory information, and tactile information for the passenger or outside the vehicle.
- the HMI 31 performs output control for controlling the output, output content, output timing, output method, and the like of each generated information.
- the HMI 31 generates and outputs visual information such as an operation screen, a status display of the vehicle 1, a warning display, an image such as a monitor image showing the situation around the vehicle 1, and information indicated by light.
- the HMI 31 also generates and outputs information indicated by sounds such as voice guidance, warning sounds, warning messages, etc., as auditory information.
- the HMI 31 generates and outputs, as tactile information, information given to the passenger's tactile sense by force, vibration, movement, or the like.
- a display device that presents visual information by displaying an image by itself or a projector device that presents visual information by projecting an image can be applied.
- the display device displays visual information within the passenger's field of view, such as a head-up display, a transmissive display, and a wearable device with an AR (Augmented Reality) function. It may be a device.
- the HMI 31 can also use a display device provided in the vehicle 1, such as a navigation device, an instrument panel, a CMS (Camera Monitoring System), an electronic mirror, a lamp, etc., as an output device for outputting visual information.
- Audio speakers, headphones, and earphones can be applied as output devices for the HMI 31 to output auditory information.
- a haptic element using haptic technology can be applied as an output device for the HMI 31 to output tactile information.
- a haptic element is provided at a portion of the vehicle 1 that is in contact with a passenger, such as a steering wheel or a seat.
- the vehicle control unit 32 controls each unit of the vehicle 1.
- the vehicle control section 32 includes a steering control section 81 , a brake control section 82 , a drive control section 83 , a body system control section 84 , a light control section 85 and a horn control section 86 .
- the steering control unit 81 detects and controls the state of the steering system of the vehicle 1 .
- the steering system includes, for example, a steering mechanism including a steering wheel, an electric power steering, and the like.
- the steering control unit 81 includes, for example, a steering ECU that controls the steering system, an actuator that drives the steering system, and the like.
- the brake control unit 82 detects and controls the state of the brake system of the vehicle 1 .
- the brake system includes, for example, a brake mechanism including a brake pedal, an ABS (Antilock Brake System), a regenerative brake mechanism, and the like.
- the brake control unit 82 includes, for example, a brake ECU that controls the brake system, an actuator that drives the brake system, and the like.
- the drive control unit 83 detects and controls the state of the drive system of the vehicle 1 .
- the drive system includes, for example, an accelerator pedal, a driving force generator for generating driving force such as an internal combustion engine or a driving motor, and a driving force transmission mechanism for transmitting the driving force to the wheels.
- the drive control unit 83 includes, for example, a drive ECU that controls the drive system, an actuator that drives the drive system, and the like.
- the body system control unit 84 detects and controls the state of the body system of the vehicle 1 .
- the body system includes, for example, a keyless entry system, smart key system, power window device, power seat, air conditioner, air bag, seat belt, shift lever, and the like.
- the body system control unit 84 includes, for example, a body system ECU that controls the body system, an actuator that drives the body system, and the like.
- the light control unit 85 detects and controls the states of various lights of the vehicle 1 .
- Lights to be controlled include, for example, headlights, backlights, fog lights, turn signals, brake lights, projections, bumper displays, and the like.
- the light control unit 85 includes a light ECU that controls the light, an actuator that drives the light, and the like.
- the horn control unit 86 detects and controls the state of the car horn of the vehicle 1 .
- the horn control unit 86 includes, for example, a horn ECU for controlling the car horn, an actuator for driving the car horn, and the like.
- FIG. 2 is a diagram showing an example of sensing areas by the camera 51, the radar device 52, the LiDAR 53, the ultrasonic sensor 54, etc. of the external recognition sensor 25 in FIG. 2 schematically shows the vehicle 1 viewed from above, the left end side is the front end (front) side of the vehicle 1, and the right end side is the rear end (rear) side of the vehicle 1.
- a sensing region 101F and a sensing region 101B are examples of sensing regions of the ultrasonic sensor 54 .
- the sensing area 101 ⁇ /b>F covers the periphery of the front end of the vehicle 1 with a plurality of ultrasonic sensors 54 .
- the sensing area 101B covers the periphery of the rear end of the vehicle 1 with a plurality of ultrasonic sensors 54 .
- the sensing results in the sensing area 101F and the sensing area 101B are used, for example, for parking assistance of the vehicle 1 and the like.
- Sensing areas 102F to 102B are examples of sensing areas of the radar device 52 for short or medium range.
- the sensing area 102F covers the front of the vehicle 1 to a position farther than the sensing area 101F.
- the sensing area 102B covers the rear of the vehicle 1 to a position farther than the sensing area 101B.
- the sensing area 102L covers the rear periphery of the left side surface of the vehicle 1 .
- the sensing area 102R covers the rear periphery of the right side surface of the vehicle 1 .
- the sensing result in the sensing area 102F is used, for example, to detect vehicles, pedestrians, etc. existing in front of the vehicle 1.
- the sensing result in the sensing area 102B is used for the rear collision prevention function of the vehicle 1, for example.
- the sensing results in the sensing area 102L and the sensing area 102R are used, for example, to detect an object in a blind spot on the side of the vehicle 1, or the like.
- Sensing areas 103 ⁇ /b>F to 103 ⁇ /b>B are examples of sensing areas by the camera 51 .
- the sensing area 103F covers the front of the vehicle 1 to a position farther than the sensing area 102F.
- the sensing area 103B covers the rear of the vehicle 1 to a position farther than the sensing area 102B.
- the sensing area 103L covers the periphery of the left side surface of the vehicle 1 .
- the sensing area 103R covers the periphery of the right side surface of the vehicle 1 .
- the sensing results in the sensing area 103F can be used, for example, in recognition of traffic lights and traffic signs, lane departure prevention support systems, and automatic headlight control systems.
- a sensing result in the sensing area 103B can be used for parking assistance and a surround view system, for example.
- Sensing results in the sensing area 103L and the sensing area 103R can be used, for example, in a surround view system.
- a sensing area 104 shows an example of the sensing area of the LiDAR 53 .
- the sensing area 104 covers the front of the vehicle 1 to a position farther than the sensing area 103F.
- the sensing area 104 has a narrower lateral range than the sensing area 103F.
- the sensing results in the sensing area 104 are used, for example, to detect objects such as surrounding vehicles.
- a sensing area 105 is an example of a sensing area of the radar device 52 for long range.
- the sensing area 105 covers the front of the vehicle 1 to a position farther than the sensing area 104 .
- the sensing area 105 has a narrower lateral range than the sensing area 104 .
- the sensing results in the sensing area 105 are used, for example, for ACC (Adaptive Cruise Control), emergency braking, and collision avoidance.
- ACC Adaptive Cruise Control
- emergency braking emergency braking
- collision avoidance collision avoidance
- the sensing regions of the camera 51, the radar device 52, the LiDAR 53, and the ultrasonic sensor 54 included in the external recognition sensor 25 may have various configurations other than those shown in FIG. Specifically, the ultrasonic sensor 54 may also sense the sides of the vehicle 1 , and the LiDAR 53 may sense the rear of the vehicle 1 . Moreover, the installation position of each sensor is not limited to each example mentioned above. Also, the number of each sensor may be one or plural.
- FIG. 3 is a schematic diagram showing a configuration example of the radar device 52.
- FIG. 4 is a schematic diagram for explaining radar waves transmitted from a transmitting antenna.
- the radar device 52 has a transmitting antenna 110 , multiple receiving antennas 111 , a signal generator 112 , multiple mixers 113 , an AD converter 114 and a controller 115 .
- the transmission antenna 110 emits radar waves (transmission waves) based on transmission signals generated by the signal generator 112 .
- the signal generator 112 generates an FMCW (Frequency Modulated Continuous Wave) signal obtained by frequency-modulating a continuous wave as a transmission signal.
- An FMCW-modulated radar wave is emitted from the transmitting antenna 110 .
- a radar wave whose frequency monotonically increases is emitted during modulation time T.
- FIG. 4A Such radar waves are also called chirps.
- N radar waves are continuously transmitted with a modulation time T as an interval.
- a chirp frame with these N radar waves as one set is transmitted from the transmitting antenna 110 .
- the radar wave it is possible to use, for example, a millimeter wave radar with a wavelength of 4 mm and a radar wave whose frequency changes in the frequency band of 76 to 77 GHz.
- the wavelength, start frequency, frequency band, amplitude, modulation time, frequency increase rate, etc. of the radar wave are not limited to this, and may be set arbitrarily.
- the specific configuration of the transmitting antenna 110 is not limited, and any configuration may be adopted.
- a plurality of receiving antennas 111 are arranged in a row in the horizontal direction. Each receiving antenna 111 receives a reflected wave generated by a radar wave reflected by a target and outputs a received signal. As shown in FIG. 4, one mixer 113 is arranged for each of the plurality of receiving antennas 111 . Therefore, the receiving antenna 111 outputs a received signal obtained by receiving the reflected wave to the mixer 113 arranged for itself.
- a specific configuration of the receiving antenna 111 is not limited, and any configuration may be adopted.
- the signal generator 112 generates a transmission signal (FMCW signal) for emitting an FMCW-modulated radar wave and outputs it to the transmission antenna 110 .
- the signal generator 112 also outputs the generated transmission signal to each of the plurality of mixers 113 .
- a specific configuration of the signal generator 112 is not limited, and any configuration may be adopted.
- Each of the plurality of mixers 113 mixes the transmission signal output from the signal generator 112 and the reception signal output from the reception antenna 111, and uses the frequency difference between the transmission signal and the reception signal as the frequency component. Generate a beat signal (frequency difference signal). That is, each of the plurality of mixers 113 generates a beat signal based on the received signal and the transmitted signal. A beat signal is also called an IF (Intermediate Frequency) signal. Each of the multiple mixers 113 outputs the generated beat signal to the AD converter 114 .
- a specific configuration of the mixer 113 is not limited, and any configuration may be adopted.
- the AD converter 114 samples the analog data beat signal output from each mixer 113 and converts it into a digital data beat signal.
- the digital data beat signal is output to the controller 115 .
- a specific configuration of the AD converter 114 is not limited, and any configuration may be adopted.
- a set of N radar waves are transmitted from the transmitting antenna 110 at intervals of the modulation time T.
- FIG. A beat signal of digital data is generated corresponding to each radar wave in the chirp frame. Therefore, beat signals of N digital data are sequentially output to the controller 115 .
- beat signals of N digital data are generated in each channel and output to the controller 115 in response to chirp frame transmission.
- the controller 115 controls the operation of each block of the radar device 52 .
- the controller 115 has hardware circuits necessary for a computer, such as a CPU and memory (RAM, ROM). Various processes are executed by the CPU executing the program according to the present technology stored in the memory.
- a device such as a PLD (Programmable Logic Device) such as an FPGA (Field Programmable Gate Array) or an ASIC (Application Specific Integrated Circuit) may be used.
- the CPU of the controller 115 executes the program according to the present technology so that the functional blocks include the frequency analysis unit 116, the threshold setting unit 117, the noise signal extraction unit 118, the detection signal extraction unit 119, and the peak detection.
- a unit 120 and a target object information generation unit 121 are implemented. These functional blocks execute the signal processing method according to the present embodiment. In order to implement each functional block, dedicated hardware such as an IC (integrated circuit) may be used as appropriate.
- the program is installed in the radar device 52 via a recording medium, for example. Alternatively, the program may be installed in the radar device 52 via a global network or the like. In addition, any computer-readable non-transitory storage medium may be used.
- a signal processing method executed by the radar device 52 will be described.
- the controller 115 executes the signal processing method described below on the beat signal of digital data.
- FIG. 5 is a flow chart showing an example of a signal processing method.
- the frequency analysis unit 116 Fourier-transforms the beat signal in the direction of distance to generate a frequency spectrum related to distance (hereinafter referred to as distance spectrum) (step 101).
- a fast Fourier transform (FFT) is performed as the Fourier transform.
- FFT fast Fourier transform
- the method for generating the distance spectrum is not limited to Fourier transform.
- a process such as compressed sensing may be used to calculate the distance spectrum.
- a spectrum is also called a spectrum.
- FIG. 6 is a graph showing an example of a distance spectrum obtained when measurement is performed by the radar device 52 in a state where the surrounding environment is known. That is, it is a distance spectrum obtained by actual measurement in an environment in which there are other vehicles and buildings as objects in the vicinity. Note that the horizontal axis is converted into a distance (Range (m)) according to the frequency component.
- Figures 6A and B are the results of measured distance and signal strength, respectively, in different ambient environments.
- the peak marked with two cross marks overlapping each other at an angle of 45 degrees is the target ( This is the peak generated by the target).
- a cross mark This is the peak generated by the target.
- four cross-marked peaks occur in a row. These are peaks generated corresponding to a building having a length (width). For example, even when there is a guardrail or the like, a plurality of peaks are generated in a row.
- Threshold setting unit 117 performs CFAR (Constant False Alarm Rate) processing on the distance spectrum and sets a CFAR threshold (step 102).
- FIG. 7 is a graph showing the CFAR thresholds set for the range spectra shown in FIGS. 6A and B;
- a specific algorithm for CFAR processing is not limited. For example, arbitrary CFAR processing such as GO (Greatest Of)-CFAR processing and CA (Cell Averaging)-CFAR processing may be performed.
- the noise signal extraction unit 118 extracts a noise signal from the signal smaller than the CFAR threshold in the distance spectrum (step 103). For example, all of the signals in the range spectrum that are smaller than the CFAR threshold, or some of the signals in the range spectrum that are smaller than the CFAR threshold are extracted as noise signals. For example, among signals smaller than the CFAR threshold, signals included in a predetermined range may be extracted as noise signals. As the predetermined range, for example, a range regarding signal intensity (Intensity) is defined. For example, signals included in a range from a first signal strength to a second signal strength that is greater than the first signal strength are extracted as noise signals. Arbitrary values may be set as the first signal strength and the second signal strength.
- a signal whose difference in signal strength from the CFAR threshold is greater than a predetermined threshold may be extracted as a noise signal. That is, a signal smaller than a value obtained by subtracting a predetermined threshold from the CFAR threshold may be extracted as a noise signal.
- the predetermined threshold may be set arbitrarily.
- a signal whose difference in signal intensity from the CFAR threshold is smaller than a predetermined threshold may be extracted as a noise signal. That is, a signal that is greater than a value obtained by subtracting a predetermined threshold from the CFAR threshold may be extracted as a noise signal.
- the predetermined threshold may be set arbitrarily.
- a range in distance may be defined.
- signals included in a range from a first distance to a second distance that is greater than the first distance are extracted as noise signals.
- Arbitrary values may be set as the first distance and the second distance.
- a signal whose distance is greater than a predetermined threshold may be extracted as a noise signal.
- a signal whose distance is smaller than a predetermined threshold may be extracted as a noise signal. Note that the predetermined threshold may be set arbitrarily.
- FIG. 8 is a graph showing noise thresholds set for the range spectra shown in FIGS. 6A and B; As shown in FIGS. 8A and 8B, a predetermined signal strength is set as the noise threshold.
- the noise floor is calculated based on the noise signal, and a value greater than the calculated noise floor is set as the noise threshold.
- the noise floor for example, the mean value, variance value or standard deviation of the noise signal is used.
- arbitrary statistical processing such as minimum value, maximum value, mode (mode), median (median value), etc. may be performed on the noise signal, and the result may be calculated as the noise floor.
- the noise threshold for example, a value obtained by multiplying the noise floor by a predetermined coefficient or a value obtained by adding a predetermined constant is used. Of course, it is not limited to this, and a value larger than the noise floor may be set as appropriate.
- the noise threshold may be set by multiplying a value between 1.0 and 2.0 as a predetermined coefficient.
- a predetermined constant 0.0 to 20 dB may be added to set the noise threshold.
- the noise threshold may be calculated directly from the noise signal without calculating the noise floor.
- the noise threshold may be calculated based on the mean, variance, or standard deviation of the noise signal.
- the signal for detection extraction unit 119 extracts a signal larger than the noise threshold in the distance spectrum as a signal for detection (step 105). Among the distance spectra shown in FIGS. 8A and 8B, signals larger than the noise threshold are extracted as detection signals.
- the peak detector 120 detects the peak of the detection signal (step 106).
- the target information generation unit 121 generates target information about targets existing in the vicinity (step 107).
- the target object information generation unit 121 detects targets existing in the vicinity based on the detection result by the peak detection unit 120 . Also, the distance of the target is detected.
- the relative velocity, angle (azimuth), etc. of the target existing in the vicinity may be generated. All of these pieces of information may be generated, or at least one piece of information may be generated.
- the distance spectrum illustrated in FIG. 6 and the like is generated for each of the N beat signals corresponding to the charm frame. Therefore, N range spectra are generated corresponding to the transmission of the charm frame.
- a frequency spectrum related to relative velocity (hereinafter referred to as a relative velocity spectrum) is generated by Fourier transforming the same distance data of these N distance spectra in the direction of relative velocity.
- the relative velocity of the target can be detected according to the peak frequency of the relative velocity spectrum. Note that the method for generating the relative velocity spectrum is not limited to Fourier transform.
- a process such as compression sensing may be used to calculate the relative velocity spectrum. Further, by performing a Fourier transform in the angular direction on the same distance and same speed data of the relative speed spectrum calculated for each of a plurality of receiving antennas (a plurality of channels), the frequency spectrum related to the angle (hereinafter referred to as the angle spectrum) ) is generated. The angle of the target can be detected according to the peak frequency of the angle spectrum.
- the method for generating the angular spectrum is not limited to Fourier transform.
- a high resolution algorithm such as Capon or MUSIC may be used. Based on the distance spectrum in this way, it is possible to detect the relative velocity and angle of the target.
- the target information generated by the target information generation unit 121 is output as sensing data (sensing results) to each block such as the driving support/automatic driving control unit 29 shown in FIG.
- the distance spectrum illustrated in FIG. 6 and the like is an embodiment of the frequency spectrum generated based on the reception signal obtained by receiving the reflected wave of the radar wave.
- the CFAR threshold is one embodiment of the first threshold in accordance with the present technology.
- the noise threshold is one embodiment of a second threshold in accordance with the present technology.
- the threshold setting unit 117 and the noise signal extraction unit 118 perform CFAR processing on the frequency spectrum to set a first threshold, and extract noise signals from signals smaller than the first threshold in the frequency spectrum.
- a first extractor is implemented.
- a second threshold value is set based on the noise signal by the threshold value setting unit 117 and the detection signal extraction unit 119, and a signal larger than the second threshold value in the frequency spectrum is extracted as the detection signal.
- a transmission antenna 110, a plurality of reception antennas 111, a signal generator 112, a plurality of mixers 113, and an AD converter 114 radiate radar waves using FMCW signals as transmission signals, and a transmission signal to generate a beat signal.
- the peak detector 120 is an embodiment of the peak detector according to the present technology.
- the target information generation unit 121 is an embodiment of the target information generation unit according to the present technology. The target information generation unit 121 can also be said to be a target extraction unit.
- a CFAR threshold is set by performing CFAR processing on the range spectrum.
- a technique of detecting the distance to the target by performing peak processing on signals larger than the CFAR threshold is also conceivable. For example, suppose peak detection is performed on signals above the CFAR threshold shown in FIGS. 7A and B to calculate the distance to the target. In this case, as can be seen by comparing the graphs of FIGS. 6 and 7, there are cases where the cross-marked peak, that is, the peak generated by the actual presence of the target, falls below the CFAR threshold and is not detected. obtain. In the examples shown in FIGS. 6A and 7A, the sixth peak from the left falls below the CFAR threshold and is not detected.
- peak detection using the CFAR threshold may erroneously detect noise. For example, in the examples shown in FIGS. 6A and 7A, although the peak of the triangular mark is noise, it exceeds the CFAR threshold and is detected. It is believed that this is because very weak noise pulls the threshold and the noise immediately following results in a signal that is larger than the CFAR threshold. In this way, in an area where only noise occurs, noise may be detected as a signal larger than the CFAR threshold depending on the strength of the noise.
- a major feature of the present technology is that a CFAR threshold value obtained by CFAR processing is used for noise signal extraction and noise floor detection. That is, the CFAR threshold is used to separate noise from peaks caused by the presence of targets in the range spectrum. For example, the target extraction rate (the number of data exceeding the CFAR threshold/total bins) by peak detection using the CFAR threshold is only about 1%, and the remaining 99% is likely to be noise. Therefore, it is considered that the noise floor can be detected by regarding the remaining 99% of the data as noise and performing statistical processing such as averaging.
- a noise threshold is set based on the noise signal (noise floor), and signals greater than the noise threshold are extracted as detection signals.
- FIG. 9 is a graph showing an example of a distance spectrum according to azimuth.
- FIG. 9A all signals of the range spectrum for each azimuth are used.
- FIG. 9B detection signals that are greater than the noise threshold are extracted.
- the noise floor When the noise floor is detected based on the noise signal, it is possible to improve the noise floor detection accuracy by excluding the influence of scattering from stationary objects such as the road surface. For example, multipath reflections from stationary objects can cause the noise floor to be larger than it actually is.
- the noise signal extracting unit 118 extracts, among signals smaller than the CFAR threshold, signals other than signals corresponding to reflected waves from stationary objects as noise signals. By using the noise signal, the noise floor can be detected with high accuracy.
- FIG. 10 is a graph showing an example of a two-dimensional spectrum with distance (Range) and relative speed (Speed) as two axes.
- the two-dimensional spectrum shown in FIG. 10 is composed of a distance spectrum and a relative velocity spectrum generated by Fourier transforming the distance spectrum in the relative velocity direction.
- the noise signal extraction unit 118 acquires the own vehicle speed.
- the signal of the stationary object bin corresponds to the signal corresponding to the reflected wave from the stationary object.
- the noise signal may be extracted based on the vehicle speed and the relative speed spectrum.
- the vehicle 1 on which the radar device 52 is mounted is an embodiment of a moving body.
- the own vehicle speed corresponds to the speed of the moving object.
- the CFAR process is performed on the range spectrum, the CFAR threshold is set, and the noise signal is extracted from the signals smaller than the CFAR threshold in the range spectrum.
- a noise threshold is set based on the noise signal, and signals larger than the noise threshold in the distance spectrum are extracted as detection signals.
- the setting of the first threshold (CFAR threshold), the extraction of the noise signal (detection of the noise floor), the setting of the second threshold (noise threshold), the extraction of the signal for detection, and the peak Detection has been performed.
- the setting of the first threshold (CFAR threshold), the extraction of the noise signal (detection of the noise floor), the setting of the second threshold (noise threshold), the detection signal extraction and peak detection may be performed. That is, the first extraction unit may acquire the relative velocity spectrum or the angle spectrum as a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave.
- This technology can also be applied to radar devices other than the FMCW system.
- the signal processing method and program according to the present technology may be executed by a plurality of computers communicably connected via a network or the like to construct the controller of the radar device according to the present technology. That is, the signal processing method and program according to the present technology can be executed not only in a computer system configured by a single computer, but also in a computer system in which a plurality of computers operate in conjunction with each other.
- a system means a set of multiple components (devices, modules (parts), etc.), and it does not matter whether all the components are in the same housing. Therefore, a plurality of devices housed in separate housings and connected via a network, and a single device housing a plurality of modules within a single housing, are both systems.
- the signal processing method according to the present technology and execution of the program by a computer system include, for example, first threshold setting, noise signal extraction, noise floor detection, second threshold setting, detection signal extraction, and peak detection. etc. are executed by a single computer, and each process is executed by a different computer. Execution of each process by a predetermined computer includes causing another computer to execute part or all of the process and obtaining the result. That is, the information processing method and program according to the present technology can also be applied to a configuration of cloud computing in which a plurality of devices share and jointly process one function via a network.
- each configuration of the radar device, each processing flow, etc. described with reference to each drawing are merely one embodiment, and can be arbitrarily modified within the scope of the present technology. That is, any other configuration, algorithm, or the like for implementing the present technology may be employed.
- expressions using "more than” such as “greater than A” and “less than A” encompass both the concept including the case of being equivalent to A and the concept not including the case of being equivalent to A. is an expression contained in For example, “greater than A” is not limited to not including equal to A, but also includes “greater than or equal to A.” Also, “less than A” is not limited to “less than A”, but also includes “less than A”. When implementing the present technology, specific settings and the like may be appropriately adopted from concepts included in “greater than A” and “less than A” so that the effects described above are exhibited.
- a first threshold is set by performing CFAR (Constant False Alarm Rate) processing on a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave, and the frequency a first extraction unit that extracts a noise signal from a signal smaller than the first threshold in the spectrum; a second extraction unit that sets a second threshold value based on the noise signal and extracts a signal greater than the second threshold value from the frequency spectrum as a detection signal;
- a radar device comprising: a peak detector that detects a peak of the detection signal.
- the radar device (3) The radar device according to (1) or (2), The first extraction unit extracts, as the noise signal, a signal included in a predetermined range among signals smaller than the first threshold. (4) The radar device according to (1) or (2), The first extraction unit extracts, as the noise signal, a signal other than a signal corresponding to a reflected wave from a stationary object, among signals smaller than the first threshold. (5) The radar device according to any one of (1) to (4), The second extraction unit calculates a noise floor based on the noise signal, and sets a value larger than the calculated noise floor as the second threshold. Radar device.
- the radar device according to (5), The radar device, wherein the second extractor calculates an average value, a variance value, or a standard deviation of the noise signal as the noise floor.
- the radar device according to (5) or (6), The second extraction unit sets a value obtained by multiplying the noise floor by a predetermined coefficient or a value obtained by adding a predetermined constant to the noise floor as the second threshold. Radar device.
- the radar device according to any one of (1) to (7), further comprising: A transmitting/receiving unit that emits the radar wave using a frequency modulated continuous wave (FMCW) signal obtained by frequency-modulating a continuous wave as a transmission signal, and generates a beat signal based on the reception signal and the transmission signal, The first extraction unit acquires, as the frequency spectrum, a frequency spectrum related to distance generated by Fourier transforming the beat signal in a distance direction. Radar device. (9) The radar device according to any one of (1) to (8), further comprising: A radar apparatus comprising a target object information generation unit that detects targets existing in the vicinity based on the detection result of the peak detection unit.
- FMCW frequency modulated continuous wave
- the radar device configured to be mounted on a mobile body
- the first extraction unit is configured to, based on the velocity of the moving body and the frequency spectrum related to the relative velocity generated by Fourier transforming the frequency spectrum related to the distance in the relative velocity direction, determine A radar apparatus that extracts, as the noise signal, signals other than signals corresponding to reflected waves from stationary objects among small signals.
- the radar device according to any one of (1) to (7), further comprising: A transmitting/receiving unit that emits the radar wave using a frequency modulated continuous wave (FMCW) signal obtained by frequency-modulating a continuous wave as a transmission signal, and generates a beat signal based on the reception signal and the transmission signal,
- the first extraction unit extracts a frequency spectrum related to relative velocity generated by Fourier transforming a frequency spectrum related to distance generated by Fourier transforming the beat signal in the direction of distance in the direction of relative velocity into the frequency spectrum related to relative velocity.
- Radar equipment acquired as a frequency spectrum.
- a first threshold is set by performing CFAR (Constant False Alarm Rate) processing on a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave, and the frequency Extracting a noise signal from a signal smaller than the first threshold in the spectrum, setting a second threshold based on the noise signal, extracting a signal greater than the second threshold from the frequency spectrum as a detection signal;
- CFAR Constant False Alarm Rate
- a first threshold is set by performing CFAR (Constant False Alarm Rate) processing on a frequency spectrum generated based on a received signal obtained by receiving a reflected wave of a radar wave, and the frequency extracting noise signals from signals in the spectrum below the first threshold; setting a second threshold based on the noise signal, and extracting a signal greater than the second threshold from the frequency spectrum as a detection signal;
- CFAR Constant False Alarm Rate
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
本技術の一形態に係るレーダ装置は、第1の抽出部と、第2の抽出部と、ピーク検出部とを具備する。前記第1の抽出部は、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する。前記第2の抽出部は、前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する。前記ピーク検出部は、前記検出用信号のピークを検出する。
Description
本技術は、車両等に搭載可能なレーダ装置、信号処理方法、及びプログラムに関する。
特許文献1には、車両の内部反射信号の誤検出を抑制可能なレーダ装置について開示されている。このレーダ装置では、雑音電力に基づいて閾値を検出する方法として、CFAR(Constant False Alarm Rate)検出が実行される。
車両等に搭載されるレーダ装置において、物標の検出精度を向上させるための技術が求められている。
以上のような事情に鑑み、本技術の目的は、物標の検出精度を向上させることが可能なレーダ装置、信号処理方法、及びプログラムを提供することにある。
上記目的を達成するため、本技術の一形態に係るレーダ装置は、第1の抽出部と、第2の抽出部と、ピーク検出部とを具備する。
前記第1の抽出部は、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する。
前記第2の抽出部は、前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する。
前記ピーク検出部は、前記検出用信号のピークを検出する。
前記第1の抽出部は、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する。
前記第2の抽出部は、前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する。
前記ピーク検出部は、前記検出用信号のピークを検出する。
このレーダ装置では、周波数スペクトルに対してCFAR処理が実行されて第1の閾値が設定され、周波数スペクトルのうち第1の閾値よりも小さい信号からノイズ信号が抽出される。また、ノイズ信号に基づいて第2の閾値が設定され、周波数スペクトルのうち第2の閾値よりも大きい信号が、検出用信号として抽出される。検出用信号のピークを検出することで、物標の検出精度を向上させることが可能となる。
前記第1の抽出部は、前記第1の閾値よりも小さい信号、又は前記第1の閾値よりも小さい信号の一部の信号を、前記ノイズ信号として抽出してもよい。
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち所定の範囲に含まれる信号を、前記ノイズ信号として抽出してもよい。
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出してもよい。
前記第2の抽出部は、前記ノイズ信号に基づいてノイズフロアを算出し、算出された前記ノイズフロアよりも大きい値を、前記第2の閾値として設定してもよい。
前記第2の抽出部は、前記ノイズ信号の平均値、分散値、又は標準偏差を、前記ノイズフロアとして算出してもよい。
前記第2の抽出部は、前記ノイズフロアに所定の係数を乗じた値、又は前記ノイズフロアに所定の定数を加算した値を、前記第2の閾値として設定してもよい。
前記レーダ装置は、さらに、連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備してもよい。この場合、前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルを、前記周波数スペクトルとして取得してもよい。
前記レーダ装置は、さらに、前記ピーク検出部による検出結果に基づいて、周辺に存在する物標を検出する物標情報生成部を具備してもよい。
前記レーダ装置は、移動体に搭載されるように構成されてもよい。この場合、前記第1の抽出部は、前記移動体の速度と、前記距離に関する周波数スペクトルを相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルとに基づいて、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出してもよい。
前記レーダ装置であって、さらに、連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備してもよい。この場合、前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルに対して相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルを、前記周波数スペクトルとして取得してもよい。
本技術の一形態に係る信号処理方法は、コンピュータシステムが実行する情報処理方法であって、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出することを含む。
前記ノイズ信号に基づいて第2の閾値が設定され、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号が検出用信号として抽出される。
前記検出用信号のピークが検出される。
前記ノイズ信号に基づいて第2の閾値が設定され、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号が検出用信号として抽出される。
前記検出用信号のピークが検出される。
本技術の一形態に係るプログラムは、以下のステップを、コンピュータシステムに実行させる。
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出するステップ。
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出するステップと、
前記検出用信号のピークを検出するステップ。
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出するステップ。
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出するステップと、
前記検出用信号のピークを検出するステップ。
以下、本技術に係る実施形態を、図面を参照しながら説明する。
[車両制御システムの構成例]
図1は、本技術が適用される移動装置制御システムの一例である車両制御システム11の構成例を示すブロック図である。
図1は、本技術が適用される移動装置制御システムの一例である車両制御システム11の構成例を示すブロック図である。
車両制御システム11は、車両1に設けられ、車両1の走行支援及び自動運転に関わる処理を行う。
車両制御システム11は、車両制御ECU(Electronic Control Unit)21、通信部22、地図情報蓄積部23、位置情報取得部24、外部認識センサ25、車内センサ26、車両センサ27、記憶部28、走行支援・自動運転制御部29、DMS(Driver Monitoring System)30、HMI(Human Machine Interface)31、及び、車両制御部32を備える。
車両制御ECU21、通信部22、地図情報蓄積部23、位置情報取得部24、外部認識センサ25、車内センサ26、車両センサ27、記憶部28、走行支援・自動運転制御部29、ドライバモニタリングシステム(DMS)30、ヒューマンマシーンインタフェース(HMI)31、及び、車両制御部32は、通信ネットワーク41を介して相互に通信可能に接続されている。
通信ネットワーク41は、例えば、CAN(Controller Area Network)、LIN(Local Interconnect Network)、LAN(Local Area Network)、FlexRay(登録商標)、イーサネット(登録商標)といったディジタル双方向通信の規格に準拠した車載通信ネットワークやバス等により構成される。
通信ネットワーク41は、伝送されるデータの種類によって使い分けられてもよい。例えば、車両制御に関するデータに対してCANが適用され、大容量データに対してイーサネットが適用されるようにしてもよい。なお、車両制御システム11の各部は、通信ネットワーク41を介さずに、例えば近距離無線通信(NFC(Near Field Communication))やBluetooth(登録商標)といった比較的近距離での通信を想定した無線通信を用いて直接的に接続される場合もある。
通信ネットワーク41は、例えば、CAN(Controller Area Network)、LIN(Local Interconnect Network)、LAN(Local Area Network)、FlexRay(登録商標)、イーサネット(登録商標)といったディジタル双方向通信の規格に準拠した車載通信ネットワークやバス等により構成される。
通信ネットワーク41は、伝送されるデータの種類によって使い分けられてもよい。例えば、車両制御に関するデータに対してCANが適用され、大容量データに対してイーサネットが適用されるようにしてもよい。なお、車両制御システム11の各部は、通信ネットワーク41を介さずに、例えば近距離無線通信(NFC(Near Field Communication))やBluetooth(登録商標)といった比較的近距離での通信を想定した無線通信を用いて直接的に接続される場合もある。
なお、以下、車両制御システム11の各部が、通信ネットワーク41を介して通信を行う場合、通信ネットワーク41の記載を省略するものとする。例えば、車両制御ECU21と通信部22とが通信ネットワーク41を介して通信を行う場合、単に車両制御ECU21と通信部22とが通信を行うと記載する。
車両制御ECU21は、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)といった各種のプロセッサにより構成される。車両制御ECU21は、車両制御システム11全体又は一部の機能の制御を行う。
通信部22は、車内及び車外の様々な機器、他の車両、サーバ、基地局等と通信を行い、各種のデータの送受信を行う。このとき、通信部22は、複数の通信方式を用いて通信を行うことができる。
通信部22が実行可能な車外との通信について、概略的に説明する。
通信部22は、例えば、5G(第5世代移動通信システム)、LTE(Long Term Evolution)、DSRC(Dedicated Short Range Communications)等の無線通信方式により、基地局又はアクセスポイントを介して、外部ネットワーク上に存在するサーバ(以下、外部のサーバと呼ぶ)等と通信を行う。
通信部22が通信を行う外部ネットワークは、例えば、インターネット、クラウドネットワーク、又は、事業者固有のネットワーク等である。通信部22が外部ネットワークに対して行う通信方式は、所定以上の通信速度、且つ、所定以上の距離間でディジタル双方向通信が可能な無線通信方式であれば、特に限定されない。
通信部22は、例えば、5G(第5世代移動通信システム)、LTE(Long Term Evolution)、DSRC(Dedicated Short Range Communications)等の無線通信方式により、基地局又はアクセスポイントを介して、外部ネットワーク上に存在するサーバ(以下、外部のサーバと呼ぶ)等と通信を行う。
通信部22が通信を行う外部ネットワークは、例えば、インターネット、クラウドネットワーク、又は、事業者固有のネットワーク等である。通信部22が外部ネットワークに対して行う通信方式は、所定以上の通信速度、且つ、所定以上の距離間でディジタル双方向通信が可能な無線通信方式であれば、特に限定されない。
また例えば、通信部22は、P2P(Peer To Peer)技術を用いて、自車の近傍に存在する端末と通信を行うことができる。自車の近傍に存在する端末は、例えば、歩行者や自転車等の比較的低速で移動する移動体が装着する端末、店舗等に位置が固定されて設置される端末、又は、MTC(Machine Type Communication)端末である。
さらに、通信部22は、V2X通信を行うこともできる。V2X通信とは、例えば、他の車両との間の車車間(Vehicle to Vehicle)通信、路側器等との間の路車間(Vehicle to Infrastructure)通信、家との間(Vehicle to Home)の通信、及び、歩行者が所持する端末等との間の歩車間(Vehicle to Pedestrian)通信等の、自車と他との通信をいう。
さらに、通信部22は、V2X通信を行うこともできる。V2X通信とは、例えば、他の車両との間の車車間(Vehicle to Vehicle)通信、路側器等との間の路車間(Vehicle to Infrastructure)通信、家との間(Vehicle to Home)の通信、及び、歩行者が所持する端末等との間の歩車間(Vehicle to Pedestrian)通信等の、自車と他との通信をいう。
通信部22は、例えば、車両制御システム11の動作を制御するソフトウエアを更新するためのプログラムを外部から受信することができる(Over The Air)。
通信部22は、さらに、地図情報、交通情報、車両1の周囲の情報等を外部から受信することができる。また例えば、通信部22は、車両1に関する情報や、車両1の周囲の情報等を外部に送信することができる。
通信部22が外部に送信する車両1に関する情報としては、例えば、車両1の状態を示すデータ、認識部73による認識結果等がある。さらに例えば、通信部22は、eコール等の車両緊急通報システムに対応した通信を行う。
通信部22は、さらに、地図情報、交通情報、車両1の周囲の情報等を外部から受信することができる。また例えば、通信部22は、車両1に関する情報や、車両1の周囲の情報等を外部に送信することができる。
通信部22が外部に送信する車両1に関する情報としては、例えば、車両1の状態を示すデータ、認識部73による認識結果等がある。さらに例えば、通信部22は、eコール等の車両緊急通報システムに対応した通信を行う。
例えば、通信部22は、電波ビーコン、光ビーコン、FM多重放送等の道路交通情報通信システム(VICS(Vehicle Information and Communication System)(登録商標))により送信される電磁波を受信する。
通信部22が実行可能な車内との通信について、概略的に説明する。
通信部22は、例えば無線通信を用いて、車内の各機器と通信を行うことができる。通信部22は、例えば、無線LAN、Bluetooth、NFC、WUSB(Wireless USB)といった、無線通信により所定以上の通信速度でディジタル双方向通信が可能な通信方式により、車内の機器と無線通信を行うことができる。
これに限らず、通信部22は、有線通信を用いて車内の各機器と通信を行うこともできる。例えば、通信部22は、図示しない接続端子に接続されるケーブルを介した有線通信により、車内の各機器と通信を行うことができる。
通信部22は、例えば、USB(Universal Serial Bus)、HDMI(High-Definition Multimedia Interface)(登録商標)、MHL(Mobile High-definition Link)といった、有線通信により所定以上の通信速度でディジタル双方向通信が可能な通信方式により、車内の各機器と通信を行うことができる。
通信部22は、例えば無線通信を用いて、車内の各機器と通信を行うことができる。通信部22は、例えば、無線LAN、Bluetooth、NFC、WUSB(Wireless USB)といった、無線通信により所定以上の通信速度でディジタル双方向通信が可能な通信方式により、車内の機器と無線通信を行うことができる。
これに限らず、通信部22は、有線通信を用いて車内の各機器と通信を行うこともできる。例えば、通信部22は、図示しない接続端子に接続されるケーブルを介した有線通信により、車内の各機器と通信を行うことができる。
通信部22は、例えば、USB(Universal Serial Bus)、HDMI(High-Definition Multimedia Interface)(登録商標)、MHL(Mobile High-definition Link)といった、有線通信により所定以上の通信速度でディジタル双方向通信が可能な通信方式により、車内の各機器と通信を行うことができる。
ここで、車内の機器とは、例えば、車内において通信ネットワーク41に接続されていない機器を指す。車内の機器としては、例えば、運転者等の搭乗者が所持するモバイル機器やウェアラブル機器、車内に持ち込まれ一時的に設置される情報機器等が想定される。
地図情報蓄積部23は、外部から取得した地図及び車両1で作成した地図の一方又は両方を蓄積する。例えば、地図情報蓄積部23は、3次元の高精度地図、高精度地図より精度が低く、広いエリアをカバーするグローバルマップ等を蓄積する。
高精度地図は、例えば、ダイナミックマップ、ポイントクラウドマップ、ベクターマップ等である。ダイナミックマップは、例えば、動的情報、準動的情報、準静的情報、静的情報の4層からなる地図であり、外部のサーバ等から車両1に提供される。
ポイントクラウドマップは、ポイントクラウド(点群データ)により構成される地図である。ベクターマップは、例えば、車線や信号機の位置といった交通情報等をポイントクラウドマップに対応付け、ADAS(Advanced Driver Assistance System)やAD(Autonomous Driving)に適合させた地図である。
ポイントクラウドマップは、ポイントクラウド(点群データ)により構成される地図である。ベクターマップは、例えば、車線や信号機の位置といった交通情報等をポイントクラウドマップに対応付け、ADAS(Advanced Driver Assistance System)やAD(Autonomous Driving)に適合させた地図である。
ポイントクラウドマップ及びベクターマップは、例えば、外部のサーバ等から提供されてもよいし、カメラ51、レーダ装置52、LiDAR53等によるセンシング結果に基づいて、後述するローカルマップとのマッチングを行うための地図として車両1で作成され、地図情報蓄積部23に蓄積されてもよい。
また、外部のサーバ等から高精度地図が提供される場合、通信容量を削減するため、車両1がこれから走行する計画経路に関する、例えば数百メートル四方の地図データが外部のサーバ等から取得される。
また、外部のサーバ等から高精度地図が提供される場合、通信容量を削減するため、車両1がこれから走行する計画経路に関する、例えば数百メートル四方の地図データが外部のサーバ等から取得される。
位置情報取得部24は、GNSS(Global Navigation Satellite System)衛星からGNSS信号を受信し、車両1の位置情報を取得する。取得した位置情報は、走行支援・自動運転制御部29に供給される。なお、位置情報取得部24は、GNSS信号を用いた方式に限定されず、例えば、ビーコンを用いて位置情報を取得してもよい。
外部認識センサ25は、車両1の外部の状況の認識に用いられる各種のセンサを備え、各センサからのセンサデータを車両制御システム11の各部に供給する。外部認識センサ25が備えるセンサの種類や数は任意である。
例えば、外部認識センサ25は、カメラ51、レーダ装置52、LiDAR(Light Detection and Ranging、Laser Imaging Detection and Ranging)53、及び、超音波センサ54を備える。これに限らず、外部認識センサ25は、カメラ51、レーダ装置52、LiDAR53、及び、超音波センサ54のうち1種類以上のセンサを備える構成でもよい。
カメラ51、レーダ装置52、LiDAR53、及び、超音波センサ54の数は、現実的に車両1に設置可能な数であれば特に限定されない。また、外部認識センサ25が備えるセンサの種類は、この例に限定されず、外部認識センサ25は、他の種類のセンサを備えてもよい。外部認識センサ25が備える各センサのセンシング領域の例は、後述する。
カメラ51、レーダ装置52、LiDAR53、及び、超音波センサ54の数は、現実的に車両1に設置可能な数であれば特に限定されない。また、外部認識センサ25が備えるセンサの種類は、この例に限定されず、外部認識センサ25は、他の種類のセンサを備えてもよい。外部認識センサ25が備える各センサのセンシング領域の例は、後述する。
なお、カメラ51の撮影方式は、特に限定されない。例えば、測距が可能な撮影方式であるToF(Time Of Flight)カメラ、ステレオカメラ、単眼カメラ、赤外線カメラといった各種の撮影方式のカメラを、必要に応じてカメラ51に適用することができる。これに限らず、カメラ51は、測距に関わらずに、単に撮影画像を取得するためのものであってもよい。
また、例えば、外部認識センサ25は、車両1に対する環境を検出するための環境センサを備えることができる。環境センサは、天候、気象、明るさ等の環境を検出するためのセンサであって、例えば、雨滴センサ、霧センサ、日照センサ、雪センサ、照度センサ等の各種センサを含むことができる。
さらに、例えば、外部認識センサ25は、車両1の周囲の音や音源の位置の検出等に用いられるマイクロフォンを備える。
車内センサ26は、車内の情報を検出するための各種のセンサを備え、各センサからのセンサデータを車両制御システム11の各部に供給する。車内センサ26が備える各種センサの種類や数は、現実的に車両1に設置可能な種類や数であれば特に限定されない。
例えば、車内センサ26は、カメラ、レーダ装置、着座センサ、ステアリングホイールセンサ、マイクロフォン、生体センサのうち1種類以上のセンサを備えることができる。
車内センサ26が備えるカメラとしては、例えば、ToFカメラ、ステレオカメラ、単眼カメラ、赤外線カメラといった、測距可能な各種の撮影方式のカメラを用いることができる。これに限らず、車内センサ26が備えるカメラは、測距に関わらずに、単に撮影画像を取得するためのものであってもよい。
車内センサ26が備える生体センサは、例えば、シートやステアリングホイール等に設けられ、運転者等の搭乗者の各種の生体情報を検出する。
車内センサ26が備えるカメラとしては、例えば、ToFカメラ、ステレオカメラ、単眼カメラ、赤外線カメラといった、測距可能な各種の撮影方式のカメラを用いることができる。これに限らず、車内センサ26が備えるカメラは、測距に関わらずに、単に撮影画像を取得するためのものであってもよい。
車内センサ26が備える生体センサは、例えば、シートやステアリングホイール等に設けられ、運転者等の搭乗者の各種の生体情報を検出する。
車両センサ27は、車両1の状態を検出するための各種のセンサを備え、各センサからのセンサデータを車両制御システム11の各部に供給する。車両センサ27が備える各種センサの種類や数は、現実的に車両1に設置可能な種類や数であれば特に限定されない。
例えば、車両センサ27は、速度センサ、加速度センサ、角速度センサ(ジャイロセンサ)、及び、それらを統合した慣性計測装置(IMU(Inertial Measurement Unit))を備える。
例えば、車両センサ27は、ステアリングホイールの操舵角を検出する操舵角センサ、ヨーレートセンサ、アクセルペダルの操作量を検出するアクセルセンサ、及び、ブレーキペダルの操作量を検出するブレーキセンサを備える。
例えば、車両センサ27は、エンジンやモータの回転数を検出する回転センサ、タイヤの空気圧を検出する空気圧センサ、タイヤのスリップ率を検出するスリップ率センサ、及び、車輪の回転速度を検出する車輪速センサを備える。
例えば、車両センサ27は、バッテリの残量及び温度を検出するバッテリセンサ、並びに、外部からの衝撃を検出する衝撃センサを備える。
例えば、車両センサ27は、ステアリングホイールの操舵角を検出する操舵角センサ、ヨーレートセンサ、アクセルペダルの操作量を検出するアクセルセンサ、及び、ブレーキペダルの操作量を検出するブレーキセンサを備える。
例えば、車両センサ27は、エンジンやモータの回転数を検出する回転センサ、タイヤの空気圧を検出する空気圧センサ、タイヤのスリップ率を検出するスリップ率センサ、及び、車輪の回転速度を検出する車輪速センサを備える。
例えば、車両センサ27は、バッテリの残量及び温度を検出するバッテリセンサ、並びに、外部からの衝撃を検出する衝撃センサを備える。
記憶部28は、不揮発性の記憶媒体及び揮発性の記憶媒体のうち少なくとも一方を含み、データやプログラムを記憶する。記憶部28は、例えばEEPROM(Electrically Erasable Programmable Read Only Memory)及びRAM(Random Access Memory)として用いられ、記憶媒体としては、HDD(Hard Disc Drive)といった磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、及び、光磁気記憶デバイスを適用することができる。
記憶部28は、車両制御システム11の各部が用いる各種プログラムやデータを記憶する。例えば、記憶部28は、EDR(Event Data Recorder)やDSSAD(Data Storage System for Automated Driving)を備え、事故等のイベントの前後の車両1の情報や車内センサ26によって取得された情報を記憶する。
記憶部28は、車両制御システム11の各部が用いる各種プログラムやデータを記憶する。例えば、記憶部28は、EDR(Event Data Recorder)やDSSAD(Data Storage System for Automated Driving)を備え、事故等のイベントの前後の車両1の情報や車内センサ26によって取得された情報を記憶する。
走行支援・自動運転制御部29は、車両1の走行支援及び自動運転の制御を行う。例えば、走行支援・自動運転制御部29は、分析部61、行動計画部62、及び、動作制御部63を備える。
分析部61は、車両1及び周囲の状況の分析処理を行う。分析部61は、自己位置推定部71、センサフュージョン部72、及び、認識部73を備える。
自己位置推定部71は、外部認識センサ25からのセンサデータ、及び、地図情報蓄積部23に蓄積されている高精度地図に基づいて、車両1の自己位置を推定する。
例えば、自己位置推定部71は、外部認識センサ25からのセンサデータに基づいてローカルマップを生成し、ローカルマップと高精度地図とのマッチングを行うことにより、車両1の自己位置を推定する。車両1の位置は、例えば、後輪対車軸の中心が基準とされる。
例えば、自己位置推定部71は、外部認識センサ25からのセンサデータに基づいてローカルマップを生成し、ローカルマップと高精度地図とのマッチングを行うことにより、車両1の自己位置を推定する。車両1の位置は、例えば、後輪対車軸の中心が基準とされる。
ローカルマップは、例えば、SLAM(Simultaneous Localization and Mapping)等の技術を用いて作成される3次元の高精度地図、占有格子地図(Occupancy Grid Map)等である。
3次元の高精度地図は、例えば、上述したポイントクラウドマップ等である。
占有格子地図は、車両1の周囲の3次元又は2次元の空間を所定の大きさのグリッド(格子)に分割し、グリッド単位で物体の占有状態を示す地図である。物体の占有状態は、例えば、物体の有無や存在確率により示される。
ローカルマップは、例えば、認識部73による車両1の外部の状況の検出処理及び認識処理にも用いられる。
3次元の高精度地図は、例えば、上述したポイントクラウドマップ等である。
占有格子地図は、車両1の周囲の3次元又は2次元の空間を所定の大きさのグリッド(格子)に分割し、グリッド単位で物体の占有状態を示す地図である。物体の占有状態は、例えば、物体の有無や存在確率により示される。
ローカルマップは、例えば、認識部73による車両1の外部の状況の検出処理及び認識処理にも用いられる。
なお、自己位置推定部71は、位置情報取得部24により取得される位置情報、及び、車両センサ27からのセンサデータに基づいて、車両1の自己位置を推定してもよい。
センサフュージョン部72は、複数の異なる種類のセンサデータ(例えば、カメラ51から供給される画像データ、及び、レーダ装置52から供給されるセンサデータ)を組み合わせて、新たな情報を得るセンサフュージョン処理を行う。異なる種類のセンサデータを組合せる方法としては、統合、融合、連合等がある。
認識部73は、車両1の外部の状況の検出を行う検出処理、及び、車両1の外部の状況の認識を行う認識処理を実行する。
例えば、認識部73は、外部認識センサ25からの情報、自己位置推定部71からの情報、センサフュージョン部72からの情報等に基づいて、車両1の外部の状況の検出処理及び認識処理を行う。
具体的には、例えば、認識部73は、車両1の周囲の物体の検出処理及び認識処理等を行う。物体の検出処理とは、例えば、物体の有無、大きさ、形、位置、動き等を検出する処理である。
物体の認識処理とは、例えば、物体の種類等の属性を認識したり、特定の物体を識別したりする処理である。ただし、検出処理と認識処理とは、必ずしも明確に分かれるものではなく、重複する場合がある。
物体の認識処理とは、例えば、物体の種類等の属性を認識したり、特定の物体を識別したりする処理である。ただし、検出処理と認識処理とは、必ずしも明確に分かれるものではなく、重複する場合がある。
例えば、認識部73は、レーダ装置52又はLiDAR53等によるセンサデータに基づくポイントクラウドを点群の塊毎に分類するクラスタリングを行うことにより、車両1の周囲の物体を検出する。これにより、車両1の周囲の物体の有無、大きさ、形状、位置が検出される。
例えば、認識部73は、クラスタリングにより分類された点群の塊の動きを追従するトラッキングを行うことにより、車両1の周囲の物体の動きを検出する。これにより、車両1の周囲の物体の速度及び進行方向(移動ベクトル)が検出される。
例えば、認識部73は、カメラ51から供給される画像データに基づいて、車両、人、自転車、障害物、構造物、道路、信号機、交通標識、道路標示等を検出又は認識する。また、認識部73は、セマンティックセグメンテーション等の認識処理を行うことにより、車両1の周囲の物体の種類を認識してもよい。
例えば、認識部73は、地図情報蓄積部23に蓄積されている地図、自己位置推定部71による自己位置の推定結果、及び、認識部73による車両1の周囲の物体の認識結果に基づいて、車両1の周囲の交通ルールの認識処理を行うことができる。認識部73は、この処理により、信号機の位置及び状態、交通標識及び道路標示の内容、交通規制の内容、並びに、走行可能な車線等を認識することができる。
例えば、認識部73は、車両1の周囲の環境の認識処理を行うことができる。認識部73が認識対象とする周囲の環境としては、天候、気温、湿度、明るさ、及び、路面の状態等が想定される。
行動計画部62は、車両1の行動計画を作成する。例えば、行動計画部62は、経路計画、経路追従の処理を行うことにより、行動計画を作成する。
なお、経路計画(Global path planning)とは、スタートからゴールまでの大まかな経路を計画する処理である。この経路計画には、軌道計画と言われ、計画した経路において、車両1の運動特性を考慮して、車両1の近傍で安全かつ滑らかに進行することが可能な軌道生成(Local path planning)を行う処理も含まれる。
経路追従とは、経路計画により計画された経路を計画された時間内で安全かつ正確に走行するための動作を計画する処理である。行動計画部62は、例えば、この経路追従の処理の結果に基づき、車両1の目標速度と目標角速度を計算することができる。
動作制御部63は、行動計画部62により作成された行動計画を実現するために、車両1の動作を制御する。
例えば、動作制御部63は、後述する車両制御部32に含まれる、ステアリング制御部81、ブレーキ制御部82、及び、駆動制御部83を制御して、軌道計画により計算された軌道を車両1が進行するように、加減速制御及び方向制御を行う。
例えば、動作制御部63は、衝突回避又は衝撃緩和、追従走行、車速維持走行、自車の衝突警告、自車のレーン逸脱警告等のADASの機能実現を目的とした協調制御を行う。例えば、動作制御部63は、運転者の操作によらずに自律的に走行する自動運転等を目的とした協調制御を行う。
例えば、動作制御部63は、衝突回避又は衝撃緩和、追従走行、車速維持走行、自車の衝突警告、自車のレーン逸脱警告等のADASの機能実現を目的とした協調制御を行う。例えば、動作制御部63は、運転者の操作によらずに自律的に走行する自動運転等を目的とした協調制御を行う。
DMS30は、車内センサ26からのセンサデータ、及び、後述するHMI31に入力される入力データ等に基づいて、運転者の認証処理、及び、運転者の状態の認識処理等を行う。認識対象となる運転者の状態としては、例えば、体調、覚醒度、集中度、疲労度、視線方向、酩酊度、運転操作、姿勢等が想定される。
なお、DMS30が、運転者以外の搭乗者の認証処理、及び、当該搭乗者の状態の認識処理を行うようにしてもよい。また、例えば、DMS30が、車内センサ26からのセンサデータに基づいて、車内の状況の認識処理を行うようにしてもよい。認識対象となる車内の状況としては、例えば、気温、湿度、明るさ、臭い等が想定される。
HMI31は、各種のデータや指示等の入力と、各種のデータの運転者等への提示を行う。
HMI31によるデータの入力について、概略的に説明する。
HMI31は、人がデータを入力するための入力デバイスを備える。HMI31は、入力デバイスにより入力されたデータや指示等に基づいて入力信号を生成し、車両制御システム11の各部に供給する。
HMI31は、入力デバイスとして、例えばタッチパネル、ボタン、スイッチ、及び、レバーといった操作子を備える。これに限らず、HMI31は、音声やジェスチャ等により手動操作以外の方法で情報を入力可能な入力デバイスをさらに備えてもよい。
さらに、HMI31は、例えば、赤外線又は電波を利用したリモートコントロール装置や、車両制御システム11の操作に対応したモバイル機器又はウェアラブル機器等の外部接続機器を入力デバイスとして用いてもよい。
HMI31は、人がデータを入力するための入力デバイスを備える。HMI31は、入力デバイスにより入力されたデータや指示等に基づいて入力信号を生成し、車両制御システム11の各部に供給する。
HMI31は、入力デバイスとして、例えばタッチパネル、ボタン、スイッチ、及び、レバーといった操作子を備える。これに限らず、HMI31は、音声やジェスチャ等により手動操作以外の方法で情報を入力可能な入力デバイスをさらに備えてもよい。
さらに、HMI31は、例えば、赤外線又は電波を利用したリモートコントロール装置や、車両制御システム11の操作に対応したモバイル機器又はウェアラブル機器等の外部接続機器を入力デバイスとして用いてもよい。
HMI31によるデータの提示について、概略的に説明する。
HMI31は、搭乗者又は車外に対する視覚情報、聴覚情報、及び、触覚情報の生成を行う。また、HMI31は、生成された各情報の出力、出力内容、出力タイミング及び出力方法等を制御する出力制御を行う。
HMI31は、視覚情報として、例えば、操作画面、車両1の状態表示、警告表示、車両1の周囲の状況を示すモニタ画像等の画像や光により示される情報を生成及び出力する。また、HMI31は、聴覚情報として、例えば、音声ガイダンス、警告音、警告メッセージ等の音により示される情報を生成及び出力する。
さらに、HMI31は、触覚情報として、例えば、力、振動、動き等により搭乗者の触覚に与えられる情報を生成及び出力する。
HMI31は、搭乗者又は車外に対する視覚情報、聴覚情報、及び、触覚情報の生成を行う。また、HMI31は、生成された各情報の出力、出力内容、出力タイミング及び出力方法等を制御する出力制御を行う。
HMI31は、視覚情報として、例えば、操作画面、車両1の状態表示、警告表示、車両1の周囲の状況を示すモニタ画像等の画像や光により示される情報を生成及び出力する。また、HMI31は、聴覚情報として、例えば、音声ガイダンス、警告音、警告メッセージ等の音により示される情報を生成及び出力する。
さらに、HMI31は、触覚情報として、例えば、力、振動、動き等により搭乗者の触覚に与えられる情報を生成及び出力する。
HMI31が視覚情報を出力する出力デバイスとしては、例えば、自身が画像を表示することで視覚情報を提示する表示装置や、画像を投影することで視覚情報を提示するプロジェクタ装置を適用することができる。
なお、表示装置は、通常のディスプレイを有する表示装置以外にも、例えば、ヘッドアップディスプレイ、透過型ディスプレイ、AR(Augmented Reality)機能を備えるウエアラブルデバイスといった、搭乗者の視界内に視覚情報を表示する装置であってもよい。
また、HMI31は、車両1に設けられるナビゲーション装置、インストルメントパネル、CMS(Camera Monitoring System)、電子ミラー、ランプ等が有する表示デバイスを、視覚情報を出力する出力デバイスとして用いることも可能である。
なお、表示装置は、通常のディスプレイを有する表示装置以外にも、例えば、ヘッドアップディスプレイ、透過型ディスプレイ、AR(Augmented Reality)機能を備えるウエアラブルデバイスといった、搭乗者の視界内に視覚情報を表示する装置であってもよい。
また、HMI31は、車両1に設けられるナビゲーション装置、インストルメントパネル、CMS(Camera Monitoring System)、電子ミラー、ランプ等が有する表示デバイスを、視覚情報を出力する出力デバイスとして用いることも可能である。
HMI31が聴覚情報を出力する出力デバイスとしては、例えば、オーディオスピーカ、ヘッドホン、イヤホンを適用することができる。
HMI31が触覚情報を出力する出力デバイスとしては、例えば、ハプティクス技術を用いたハプティクス素子を適用することができる。ハプティクス素子は、例えば、ステアリングホイール、シートといった、車両1の搭乗者が接触する部分に設けられる。
車両制御部32は、車両1の各部の制御を行う。車両制御部32は、ステアリング制御部81、ブレーキ制御部82、駆動制御部83、ボディ系制御部84、ライト制御部85、及び、ホーン制御部86を備える。
ステアリング制御部81は、車両1のステアリングシステムの状態の検出及び制御等を行う。ステアリングシステムは、例えば、ステアリングホイール等を備えるステアリング機構、電動パワーステアリング等を備える。
ステアリング制御部81は、例えば、ステアリングシステムの制御を行うステアリングECU、ステアリングシステムの駆動を行うアクチュエータ等を備える。
ステアリング制御部81は、例えば、ステアリングシステムの制御を行うステアリングECU、ステアリングシステムの駆動を行うアクチュエータ等を備える。
ブレーキ制御部82は、車両1のブレーキシステムの状態の検出及び制御等を行う。ブレーキシステムは、例えば、ブレーキペダル等を含むブレーキ機構、ABS(Antilock Brake System)、回生ブレーキ機構等を備える。
ブレーキ制御部82は、例えば、ブレーキシステムの制御を行うブレーキECU、ブレーキシステムの駆動を行うアクチュエータ等を備える。
ブレーキ制御部82は、例えば、ブレーキシステムの制御を行うブレーキECU、ブレーキシステムの駆動を行うアクチュエータ等を備える。
駆動制御部83は、車両1の駆動システムの状態の検出及び制御等を行う。駆動システムは、例えば、アクセルペダル、内燃機関又は駆動用モータ等の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構等を備える。
駆動制御部83は、例えば、駆動システムの制御を行う駆動ECU、駆動システムの駆動を行うアクチュエータ等を備える。
駆動制御部83は、例えば、駆動システムの制御を行う駆動ECU、駆動システムの駆動を行うアクチュエータ等を備える。
ボディ系制御部84は、車両1のボディ系システムの状態の検出及び制御等を行う。ボディ系システムは、例えば、キーレスエントリシステム、スマートキーシステム、パワーウインドウ装置、パワーシート、空調装置、エアバッグ、シートベルト、シフトレバー等を備える。
ボディ系制御部84は、例えば、ボディ系システムの制御を行うボディ系ECU、ボディ系システムの駆動を行うアクチュエータ等を備える。
ボディ系制御部84は、例えば、ボディ系システムの制御を行うボディ系ECU、ボディ系システムの駆動を行うアクチュエータ等を備える。
ライト制御部85は、車両1の各種のライトの状態の検出及び制御等を行う。制御対象となるライトとしては、例えば、ヘッドライト、バックライト、フォグライト、ターンシグナル、ブレーキライト、プロジェクション、バンパーの表示等が想定される。
ライト制御部85は、ライトの制御を行うライトECU、ライトの駆動を行うアクチュエータ等を備える。
ライト制御部85は、ライトの制御を行うライトECU、ライトの駆動を行うアクチュエータ等を備える。
ホーン制御部86は、車両1のカーホーンの状態の検出及び制御等を行う。ホーン制御部86は、例えば、カーホーンの制御を行うホーンECU、カーホーンの駆動を行うアクチュエータ等を備える。
図2は、図1の外部認識センサ25のカメラ51、レーダ装置52、LiDAR53、及び、超音波センサ54等によるセンシング領域の例を示す図である。なお、図2において、車両1を上面から見た様子が模式的に示され、左端側が車両1の前端(フロント)側であり、右端側が車両1の後端(リア)側となっている。
センシング領域101F及びセンシング領域101Bは、超音波センサ54のセンシング領域の例を示している。
センシング領域101Fは、複数の超音波センサ54によって車両1の前端周辺をカバーしている。センシング領域101Bは、複数の超音波センサ54によって車両1の後端周辺をカバーしている。
センシング領域101Fは、複数の超音波センサ54によって車両1の前端周辺をカバーしている。センシング領域101Bは、複数の超音波センサ54によって車両1の後端周辺をカバーしている。
センシング領域101F及びセンシング領域101Bにおけるセンシング結果は、例えば、車両1の駐車支援等に用いられる。
センシング領域102F乃至センシング領域102Bは、短距離又は中距離用のレーダ装置52のセンシング領域の例を示している。
センシング領域102Fは、車両1の前方において、センシング領域101Fより遠い位置までカバーしている。センシング領域102Bは、車両1の後方において、センシング領域101Bより遠い位置までカバーしている。
センシング領域102Lは、車両1の左側面の後方の周辺をカバーしている。センシング領域102Rは、車両1の右側面の後方の周辺をカバーしている。
センシング領域102Fは、車両1の前方において、センシング領域101Fより遠い位置までカバーしている。センシング領域102Bは、車両1の後方において、センシング領域101Bより遠い位置までカバーしている。
センシング領域102Lは、車両1の左側面の後方の周辺をカバーしている。センシング領域102Rは、車両1の右側面の後方の周辺をカバーしている。
センシング領域102Fにおけるセンシング結果は、例えば、車両1の前方に存在する車両や歩行者等の検出等に用いられる。センシング領域102Bにおけるセンシング結果は、例えば、車両1の後方の衝突防止機能等に用いられる。センシング領域102L及びセンシング領域102Rにおけるセンシング結果は、例えば、車両1の側方の死角における物体の検出等に用いられる。
センシング領域103F乃至センシング領域103Bは、カメラ51によるセンシング領域の例を示している。
センシング領域103Fは、車両1の前方において、センシング領域102Fより遠い位置までカバーしている。センシング領域103Bは、車両1の後方において、センシング領域102Bより遠い位置までカバーしている。
センシング領域103Lは、車両1の左側面の周辺をカバーしている。センシング領域103Rは、車両1の右側面の周辺をカバーしている。
センシング領域103Fは、車両1の前方において、センシング領域102Fより遠い位置までカバーしている。センシング領域103Bは、車両1の後方において、センシング領域102Bより遠い位置までカバーしている。
センシング領域103Lは、車両1の左側面の周辺をカバーしている。センシング領域103Rは、車両1の右側面の周辺をカバーしている。
センシング領域103Fにおけるセンシング結果は、例えば、信号機や交通標識の認識、車線逸脱防止支援システム、自動ヘッドライト制御システムに用いることができる。センシング領域103Bにおけるセンシング結果は、例えば、駐車支援、及び、サラウンドビューシステムに用いることができる。
センシング領域103L及びセンシング領域103Rにおけるセンシング結果は、例えば、サラウンドビューシステムに用いることができる。
センシング領域103L及びセンシング領域103Rにおけるセンシング結果は、例えば、サラウンドビューシステムに用いることができる。
センシング領域104は、LiDAR53のセンシング領域の例を示している。
センシング領域104は、車両1の前方において、センシング領域103Fより遠い位置までカバーしている。一方、センシング領域104は、センシング領域103Fより左右方向の範囲が狭くなっている。
センシング領域104は、車両1の前方において、センシング領域103Fより遠い位置までカバーしている。一方、センシング領域104は、センシング領域103Fより左右方向の範囲が狭くなっている。
センシング領域104におけるセンシング結果は、例えば、周辺車両等の物体検出に用いられる。
センシング領域105は、長距離用のレーダ装置52のセンシング領域の例を示している。
センシング領域105は、車両1の前方において、センシング領域104より遠い位置までカバーしている。一方、センシング領域105は、センシング領域104より左右方向の範囲が狭くなっている。
センシング領域105は、車両1の前方において、センシング領域104より遠い位置までカバーしている。一方、センシング領域105は、センシング領域104より左右方向の範囲が狭くなっている。
センシング領域105におけるセンシング結果は、例えば、ACC(Adaptive Cruise Control)、緊急ブレーキ、衝突回避等に用いられる。
なお、外部認識センサ25が含むカメラ51、レーダ装置52、LiDAR53、及び、超音波センサ54の各センサのセンシング領域は、図2以外に各種の構成をとってもよい。具体的には、超音波センサ54が車両1の側方もセンシングするようにしてもよいし、LiDAR53が車両1の後方をセンシングするようにしてもよい。また、各センサの設置位置は、上述した各例に限定されない。また、各センサの数は、1つでもよいし、複数であってもよい。
[レーダ装置の構成]
レーダ装置52について詳しく説明する。本実施形態では、FMCW(Frequency Modulated Continuous Wave)方式のレーダ装置を例に挙げて説明を行う。
図3は、レーダ装置52の構成例を示す模式図である。
図4は、送信アンテナから送信されるレーダ波を説明するための模式図である。
レーダ装置52について詳しく説明する。本実施形態では、FMCW(Frequency Modulated Continuous Wave)方式のレーダ装置を例に挙げて説明を行う。
図3は、レーダ装置52の構成例を示す模式図である。
図4は、送信アンテナから送信されるレーダ波を説明するための模式図である。
レーダ装置52は、送信アンテナ110と、複数の受信アンテナ111と、信号発生器112と、複数のミキサ(混合器)113と、ADコンバータ114と、コントローラ115とを有する。
送信アンテナ110は、信号発生器112により生成された送信信号に基づいて、レーダ波(送信波)を出射する。
本実施形態では信号発生器112により、送信信号として、連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号が生成される。そして送信アンテナ110からFMCW変調されたレーダ波が出射される。
送信アンテナ110は、信号発生器112により生成された送信信号に基づいて、レーダ波(送信波)を出射する。
本実施形態では信号発生器112により、送信信号として、連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号が生成される。そして送信アンテナ110からFMCW変調されたレーダ波が出射される。
具体的には、図4A及びBに示すように、変調時間Tにおいて、周波数が単調増加するレーダ波が出射される。このようなレーダ波は、チャープとも呼ばれる。
また本実施形態では、図4Cに示すように、変調時間Tを間隔としてN個のレーダ波が連続的に送信される。これらN個のレーダ波を1組とするチャープフレームが、送信アンテナ110から送信される。
レーダ波として、例えば波長4mmのミリ波レーダであり、76~77GHzの周波数帯域で周波数が変化するレーダ波を用いることが可能である。これに限定されず、レーダ波の波長、開始周波数、周波数帯域、振幅、変調時間、周波数の増加率等は限定されず、任意に設定されてよい。
また、送信アンテナ110の具体的な構成も限定されず、任意の構成が採用されてよい。
また本実施形態では、図4Cに示すように、変調時間Tを間隔としてN個のレーダ波が連続的に送信される。これらN個のレーダ波を1組とするチャープフレームが、送信アンテナ110から送信される。
レーダ波として、例えば波長4mmのミリ波レーダであり、76~77GHzの周波数帯域で周波数が変化するレーダ波を用いることが可能である。これに限定されず、レーダ波の波長、開始周波数、周波数帯域、振幅、変調時間、周波数の増加率等は限定されず、任意に設定されてよい。
また、送信アンテナ110の具体的な構成も限定されず、任意の構成が採用されてよい。
複数の受信アンテナ111は、水平方向に一列に配置される。各受信アンテナ111は、レーダ波が物標 により反射されて生じた反射波を受信して受信信号を出力する。
図4に示すように、複数の受信アンテナ111の各々に対して、1つずつミキサ113が配置される。従って、受信アンテナ111は、自身に対して配置されるミキサ113に対して、反射波を受信することで得られる受信信号を出力する。
受信アンテナ111の具体的な構成は限定されず、任意の構成が採用されてよい。
図4に示すように、複数の受信アンテナ111の各々に対して、1つずつミキサ113が配置される。従って、受信アンテナ111は、自身に対して配置されるミキサ113に対して、反射波を受信することで得られる受信信号を出力する。
受信アンテナ111の具体的な構成は限定されず、任意の構成が採用されてよい。
信号発生器112は、FMCW変調されたレーダ波を出射するための送信信号(FMCW信号)を生成し、送信アンテナ110に出力する。また信号発生器112は、生成した送信信号を、複数のミキサ113の各々に出力する。
信号発生器の112の具体的な構成は限定されず、任意の構成が採用されてよい。
信号発生器の112の具体的な構成は限定されず、任意の構成が採用されてよい。
複数のミキサ113の各々は、信号発生器112から出力された送信信号と、受信アンテナ111から出力された受信信号とを混合して、送信信号と受信信号との周波数の差分を周波数成分とするビート信号(周波数差信号)を生成する。
すなわち複数のミキサ113の各々は、受信信号と送信信号とに基づいて、ビート信号を生成する。ビート信号は、IF(Intermediate Frequency:中間周波数)信号とも呼ばれる。
複数のミキサ113の各々は、生成したビート信号を、ADコンバータ114に出力する。
ミキサ113の具体的な構成は限定されず、任意の構成が採用されてよい。
すなわち複数のミキサ113の各々は、受信信号と送信信号とに基づいて、ビート信号を生成する。ビート信号は、IF(Intermediate Frequency:中間周波数)信号とも呼ばれる。
複数のミキサ113の各々は、生成したビート信号を、ADコンバータ114に出力する。
ミキサ113の具体的な構成は限定されず、任意の構成が採用されてよい。
ADコンバータ114は、各ミキサ113から出力されるアナログデータのビート信号をサンプリングして、デジタルデータのビート信号に変換する。デジタルデータのビート信号は、コントローラ115に出力される。
ADコンバータ114の具体的な構成は限定されず、任意の構成が採用されてよい。
ADコンバータ114の具体的な構成は限定されず、任意の構成が採用されてよい。
図4Cに示すように、本実施形態では、送信アンテナ110により、変調時間Tを間隔としたN個1組のレーダ波(チャープフレーム)が送信される。
チャープフレーム内の各レーダ波に対応して、デジタルデータのビート信号が生成される。従って、N個のデジタルデータのビート信号が順次コントローラ115に出力される。
複数の受信アンテナ111を複数のチャンネルとした場合は、チャープフレームの送信に対応して、各チャンネルにてN個のデジタルデータのビート信号が生成され、コントローラ115に出力される。
チャープフレーム内の各レーダ波に対応して、デジタルデータのビート信号が生成される。従って、N個のデジタルデータのビート信号が順次コントローラ115に出力される。
複数の受信アンテナ111を複数のチャンネルとした場合は、チャープフレームの送信に対応して、各チャンネルにてN個のデジタルデータのビート信号が生成され、コントローラ115に出力される。
コントローラ115は、レーダ装置52が有する各ブロックの動作を制御する。コントローラ115は、例えばCPUやメモリ(RAM、ROM)等のコンピュータに必要なハードウェア回路を有する。CPUがメモリに記憶されている本技術に係るプログラムを実行することにより、種々の処理が実行される。
コントローラ115として、例えばFPGA(Field Programmable Gate Array)等のPLD(Programmable Logic Device)、その他ASIC(Application Specific Integrated Circuit)等のデバイスが用いられてもよい。
本実施形態では、コントローラ115のCPUが本技術に係るプログラムを実行することで、機能ブロックとして、周波数解析部116、閾値設定部117、ノイズ信号抽出部118、検出用信号抽出部119、ピーク検出部120、及び物標情報生成部121が実現される。
そしてこれらの機能ブロックにより、本実施形態に係る信号処理方法が実行される。なお各機能ブロックを実現するために、IC(集積回路)等の専用のハードウェアが適宜用いられてもよい。
プログラムは、例えば記録媒体を介してレーダ装置52にインストールされる。あるいは、グローバルネットワーク等を介してプログラムがレーダ装置52にインストールされてもよい。その他、コンピュータ読み取り可能な非一過性の任意の記憶媒体が用いられてよい。
コントローラ115として、例えばFPGA(Field Programmable Gate Array)等のPLD(Programmable Logic Device)、その他ASIC(Application Specific Integrated Circuit)等のデバイスが用いられてもよい。
本実施形態では、コントローラ115のCPUが本技術に係るプログラムを実行することで、機能ブロックとして、周波数解析部116、閾値設定部117、ノイズ信号抽出部118、検出用信号抽出部119、ピーク検出部120、及び物標情報生成部121が実現される。
そしてこれらの機能ブロックにより、本実施形態に係る信号処理方法が実行される。なお各機能ブロックを実現するために、IC(集積回路)等の専用のハードウェアが適宜用いられてもよい。
プログラムは、例えば記録媒体を介してレーダ装置52にインストールされる。あるいは、グローバルネットワーク等を介してプログラムがレーダ装置52にインストールされてもよい。その他、コンピュータ読み取り可能な非一過性の任意の記憶媒体が用いられてよい。
[信号処理方法]
レーダ装置52により実行される信号処理方法について説明する。本実施形態では、コントローラ115により、デジタルデータのビート信号に対して、以下に説明する信号処理方法が実行される。
レーダ装置52により実行される信号処理方法について説明する。本実施形態では、コントローラ115により、デジタルデータのビート信号に対して、以下に説明する信号処理方法が実行される。
図5は、信号処理方法の一例を示すフローチャートである。
周波数解析部116により、ビート信号が距離方向にフーリエ変換され、距離に関する周波数スペクトル(以下、距離スペクトルと記載する)が生成される(ステップ101)。
フーリエ変換としては、高速フーリエ変換(FFT:Fast Fourier Transform)が実行される。なお、距離スペクトルの生成方法は、フーリエ変換に限定されない。例えば圧縮センシングのような処理を用いて距離スペクトルを算出してもよい。
またスペクトルは、スペクトラムとも呼ばれる。
周波数解析部116により、ビート信号が距離方向にフーリエ変換され、距離に関する周波数スペクトル(以下、距離スペクトルと記載する)が生成される(ステップ101)。
フーリエ変換としては、高速フーリエ変換(FFT:Fast Fourier Transform)が実行される。なお、距離スペクトルの生成方法は、フーリエ変換に限定されない。例えば圧縮センシングのような処理を用いて距離スペクトルを算出してもよい。
またスペクトルは、スペクトラムとも呼ばれる。
図6は、周辺環境が既知の状態で、レーダ装置52による計測を実行した場合に得られた距離スペクトルの一例を示すグラフである。すなわち、周辺に物表として他の車両や建物が存在している環境にて実測で得られた距離スペクトルである。なお、横軸は、周波数成分に応じた距離(Range(m))に変換されている。
図6A及びBは、異なる周辺環境でそれぞれ計測された距離と信号強度の結果である。
図6A及びBは、異なる周辺環境でそれぞれ計測された距離と信号強度の結果である。
図6A及びBにおいて、2つのクロスマークが互いに45度の角度でずれて重なっているマーク(以下、単にクロスマークと記載する)が付されているピークは、周辺に存在している物標(ターゲット)により発生しているピークである。
図6Bの楕円形状の枠により囲まれている領域には、クロスマークが付された4つのピークが、連なった状態で発生している。これらは、長さ(幅)を持った建物に対応して発生するピークとなる。例えば、ガードレール等が存在する場合も、複数のピークが連なった状態で発生する。
図6Bの楕円形状の枠により囲まれている領域には、クロスマークが付された4つのピークが、連なった状態で発生している。これらは、長さ(幅)を持った建物に対応して発生するピークとなる。例えば、ガードレール等が存在する場合も、複数のピークが連なった状態で発生する。
閾値設定部117により、距離スペクトルに対してCFAR(Constant False Alarm Rate:一定誤警報確率)処理が実行され、CFAR閾値が設定される(ステップ102)
図7は、図6A及びBに示す距離スペクトルに対して設定されたCFAR閾値を示すグラフである。
CFAR処理の具体的なアルゴリズムは限定されない。例えば、GO(Greatest Of)-CFAR処理や、CA(Cell Averaging)-CFAR処理等、任意のCFAR処理が実行されてよい。
図7は、図6A及びBに示す距離スペクトルに対して設定されたCFAR閾値を示すグラフである。
CFAR処理の具体的なアルゴリズムは限定されない。例えば、GO(Greatest Of)-CFAR処理や、CA(Cell Averaging)-CFAR処理等、任意のCFAR処理が実行されてよい。
ノイズ信号抽出部118により、距離スペクトルのうちCFAR閾値よりも小さい信号からノイズ信号が抽出される(ステップ103)。
例えば、距離スペクトルのうちCFAR閾値よりも小さい信号の全て、又は距離スペクトルのうちCFAR閾値よりも小さい信号の一部の信号が、ノイズ信号として抽出される。
例えば、CFAR閾値よりも小さい信号のうち所定の範囲に含まれる信号が、ノイズ信号として抽出されてもよい。
所定の範囲として、例えば、信号強度(Intensity)に関する範囲が規定される。例えば、第1の信号強度から第1の信号強度よりも大きい第2の信号強度までの範囲に含まれる信号が、ノイズ信号として抽出される。第1の信号強度及び第2の信号強度としては、任意の値が設定されてよい。
あるいは、CFAR閾値との信号強度の差が、所定の閾値よりも大きい信号が、ノイズ信号として抽出されてもよい。すなわち、CFAR閾値から所定の閾値を差分した値よりも小さい信号が、ノイズ信号として抽出されてもよい。なお所定の閾値は任意に設定されてよい。
逆に、CFAR閾値との信号強度の差が、所定の閾値よりも小さい信号が、ノイズ信号として抽出されてもよい。すなわち、CFAR閾値から所定の閾値を差分した値よりも大きい信号が、ノイズ信号として抽出されてもよい。なお所定の閾値は任意に設定されてよい。
例えば、距離スペクトルのうちCFAR閾値よりも小さい信号の全て、又は距離スペクトルのうちCFAR閾値よりも小さい信号の一部の信号が、ノイズ信号として抽出される。
例えば、CFAR閾値よりも小さい信号のうち所定の範囲に含まれる信号が、ノイズ信号として抽出されてもよい。
所定の範囲として、例えば、信号強度(Intensity)に関する範囲が規定される。例えば、第1の信号強度から第1の信号強度よりも大きい第2の信号強度までの範囲に含まれる信号が、ノイズ信号として抽出される。第1の信号強度及び第2の信号強度としては、任意の値が設定されてよい。
あるいは、CFAR閾値との信号強度の差が、所定の閾値よりも大きい信号が、ノイズ信号として抽出されてもよい。すなわち、CFAR閾値から所定の閾値を差分した値よりも小さい信号が、ノイズ信号として抽出されてもよい。なお所定の閾値は任意に設定されてよい。
逆に、CFAR閾値との信号強度の差が、所定の閾値よりも小さい信号が、ノイズ信号として抽出されてもよい。すなわち、CFAR閾値から所定の閾値を差分した値よりも大きい信号が、ノイズ信号として抽出されてもよい。なお所定の閾値は任意に設定されてよい。
所定の範囲として、例えば、距離(Range)おける範囲が規定されてもよい。例えば、第1の距離から第1の距離よりも大きい第2の距離までの範囲に含まれる信号が、ノイズ信号として抽出される。第1の距離及び第2の距離としては、任意の値が設定されてよい。
あるいは、距離が所定の閾値よりも大きい信号が、ノイズ信号として抽出されてもよい。逆に、距離が所定の閾値よりも小さい信号が、ノイズ信号として抽出されてもよい。なお、所定の閾値は任意に設定されてよい。
あるいは、距離が所定の閾値よりも大きい信号が、ノイズ信号として抽出されてもよい。逆に、距離が所定の閾値よりも小さい信号が、ノイズ信号として抽出されてもよい。なお、所定の閾値は任意に設定されてよい。
閾値設定部117により、ノイズ信号に基づいてノイズ閾値が設定される(ステップ104)。
図8は、図6A及びBに示す距離スペクトルに対して設定されたノイズ閾値を示すグラフである。図8A及びBに示すように、ノイズ閾値として、所定の信号強度が設定される。
図8は、図6A及びBに示す距離スペクトルに対して設定されたノイズ閾値を示すグラフである。図8A及びBに示すように、ノイズ閾値として、所定の信号強度が設定される。
本実施形態では、ノイズ信号に基づいてノイズフロアが算出され、算出されたノイズフロアよりも大きい値がノイズ閾値として設定される。
ノイズフロアとして、例えばノイズ信号の平均値、分散値、又は標準偏差が用いられる。その他、最小値、最大値、モード(最頻値)やメジアン(中央値)等、ノイズ信号に対して任意の統計処理が実行され、その結果がノイズフロアとして算出されてもよい。
ノイズフロアとして、例えばノイズ信号の平均値、分散値、又は標準偏差が用いられる。その他、最小値、最大値、モード(最頻値)やメジアン(中央値)等、ノイズ信号に対して任意の統計処理が実行され、その結果がノイズフロアとして算出されてもよい。
ノイズ閾値は、例えばノイズフロアに所定の係数を乗じた値、又は所定の定数を加算した値が用いられる。もちろんこれに限定されず、ノイズフロアよりも大きい値が適宜設定されてよい。
例えば、所定の係数として1.0~2.0の値が乗算されてノイズ閾値が設定されてもよい。また所定の定数として、0.0~20dBが加算されてノイズ閾値が設定されてもよい。
なお、後にも説明するように、本開示において、「Aより大きい」「Aより小さい」といった「より」を使った表現は、Aと同等である場合を含む概念と、Aと同等である場合を含まない概念の両方を包括的に含む表現である。例えば「Aよりも大きい」は、Aと同等は含まない場合に限定されず、「A以上」も含む。従って、ノイズ閾値として、ノイズフロアと同じ値が用いられてもよい。
また、ノイズフロアを算出することなく、ノイズ信号からノイズ閾値が直接的に算出されてもよい。例えば、ノイズ信号の平均値、分散値、又は標準偏差に基づいて、ノイズ閾値が算出されてもよい。
例えば、所定の係数として1.0~2.0の値が乗算されてノイズ閾値が設定されてもよい。また所定の定数として、0.0~20dBが加算されてノイズ閾値が設定されてもよい。
なお、後にも説明するように、本開示において、「Aより大きい」「Aより小さい」といった「より」を使った表現は、Aと同等である場合を含む概念と、Aと同等である場合を含まない概念の両方を包括的に含む表現である。例えば「Aよりも大きい」は、Aと同等は含まない場合に限定されず、「A以上」も含む。従って、ノイズ閾値として、ノイズフロアと同じ値が用いられてもよい。
また、ノイズフロアを算出することなく、ノイズ信号からノイズ閾値が直接的に算出されてもよい。例えば、ノイズ信号の平均値、分散値、又は標準偏差に基づいて、ノイズ閾値が算出されてもよい。
検出用信号抽出部119により、距離スペクトルのうちノイズ閾値よりも大きい信号が検出用信号として抽出される(ステップ105)。図8A及びBに示す距離スペクトルのうち、ノイズ閾値よりも大きい信号が、検出用信号として抽出される。
ピーク検出部120により、検出用信号のピークが検出される(ステップ106)。
ピーク検出部120により、検出用信号のピークが検出される(ステップ106)。
物標情報生成部121により、周辺に存在する物標に関する物標情報が生成される(ステップ107)。
本実施形態では、物標情報生成部121により、ピーク検出部120による検出結果に基づいて、周辺に存在する物標が検出される。また物標の距離が検出される。
本実施形態では、物標情報生成部121により、ピーク検出部120による検出結果に基づいて、周辺に存在する物標が検出される。また物標の距離が検出される。
物標情報として、周辺に存在する物標に関する相対速度、角度(方位)等が生成されてもよい。これら全部の情報が生成されてもよいし、少なくとも1つの情報が生成されてもよい。
例えば、チャームフレームに対応するN個のビート信号の各々に対して、図6等に例示する距離スペクトルが生成される。従って、チャームフレームの送信に対応してN個の距離スペクトルが生成される。
これらN個の距離スペクトルの同距離のデータに対して、相対速度方向にフーリエ変換することで、相対速度に関する周波数スペクトル(以下、相対速度スペクトルと記載する)が生成される。相対速度スペクトルのピーク周波数に応じて、物標の相対速度を検出することが可能となる。なお、相対速度スペクトルの生成方法は、フーリエ変換に限定されない。例えば圧縮センシングのような処理を用いて相対速度スペクトルを算出してもよい。
また、複数の受信アンテナ(複数のチャンネル)の各々において算出される相対速度スペクトルの同距離同速度データに対して、角度方向にフーリエ変換することで、角度に関する周波数スペクトル(以下、角度スペクトルと記載する)が生成される。角度スペクトルのピーク周波数に応じて、物標の角度を検出することが可能となる。なお、角度スペクトルの生成方法は、フーリエ変換に限定されない。例えばCaponやMUSICといった高分解能アルゴリズムを用いてもよい。
このように距離スペクトルに基づいて、物標の相対速度、及び角度を検出することが可能である。また距離スペクトルのうちノイズ閾値よりも大きい検出用信号を用いて、物標の相対速度、及び角度を検出することも可能である。
物標情報生成部121により生成された物標情報は、センシングデータ(センシング結果)として、図1に示す走行支援・自動運転制御部29等の各ブロックに出力される。
例えば、チャームフレームに対応するN個のビート信号の各々に対して、図6等に例示する距離スペクトルが生成される。従って、チャームフレームの送信に対応してN個の距離スペクトルが生成される。
これらN個の距離スペクトルの同距離のデータに対して、相対速度方向にフーリエ変換することで、相対速度に関する周波数スペクトル(以下、相対速度スペクトルと記載する)が生成される。相対速度スペクトルのピーク周波数に応じて、物標の相対速度を検出することが可能となる。なお、相対速度スペクトルの生成方法は、フーリエ変換に限定されない。例えば圧縮センシングのような処理を用いて相対速度スペクトルを算出してもよい。
また、複数の受信アンテナ(複数のチャンネル)の各々において算出される相対速度スペクトルの同距離同速度データに対して、角度方向にフーリエ変換することで、角度に関する周波数スペクトル(以下、角度スペクトルと記載する)が生成される。角度スペクトルのピーク周波数に応じて、物標の角度を検出することが可能となる。なお、角度スペクトルの生成方法は、フーリエ変換に限定されない。例えばCaponやMUSICといった高分解能アルゴリズムを用いてもよい。
このように距離スペクトルに基づいて、物標の相対速度、及び角度を検出することが可能である。また距離スペクトルのうちノイズ閾値よりも大きい検出用信号を用いて、物標の相対速度、及び角度を検出することも可能である。
物標情報生成部121により生成された物標情報は、センシングデータ(センシング結果)として、図1に示す走行支援・自動運転制御部29等の各ブロックに出力される。
本実施形態において、図6等に例示する距離スペクトルは、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルの一実施形態となる。
CFAR閾値は、本技術に係る第1の閾値の一実施形態となる。
ノイズ閾値は、本技術に係る第2の閾値の一実施形態となる。
また、閾値設定部117及びノイズ信号抽出部118により、周波数スペクトルに対してCFAR処理を実行して第1の閾値を設定し、周波数スペクトルのうち第1の閾値よりも小さい信号からノイズ信号を抽出する第1の抽出部が実現される。
また、閾値設定部117及び検出用信号抽出部119により、ノイズ信号に基づいて第2の閾値を設定し、周波数スペクトルのうち第2の閾値よりも大きい信号を検出用信号として抽出する第2の抽出部が実現される。
また、送信アンテナ110と、複数の受信アンテナ111と、信号発生器112と、複数のミキサ(混合器)113と、ADコンバータ114とにより、FMCW信号を送信信号としてレーダ波を放射し、受信信号と送信信号とに基づいてビート信号を生成する送受信部が実現される。
また、ピーク検出部120は、本技術に係るピーク検出部の一実施形態となる。
また、物標情報生成部121は、本技術に係る物標情報生成部の一実施形態となる。物標情報生成部121は、物標抽出部ともいえる。
CFAR閾値は、本技術に係る第1の閾値の一実施形態となる。
ノイズ閾値は、本技術に係る第2の閾値の一実施形態となる。
また、閾値設定部117及びノイズ信号抽出部118により、周波数スペクトルに対してCFAR処理を実行して第1の閾値を設定し、周波数スペクトルのうち第1の閾値よりも小さい信号からノイズ信号を抽出する第1の抽出部が実現される。
また、閾値設定部117及び検出用信号抽出部119により、ノイズ信号に基づいて第2の閾値を設定し、周波数スペクトルのうち第2の閾値よりも大きい信号を検出用信号として抽出する第2の抽出部が実現される。
また、送信アンテナ110と、複数の受信アンテナ111と、信号発生器112と、複数のミキサ(混合器)113と、ADコンバータ114とにより、FMCW信号を送信信号としてレーダ波を放射し、受信信号と送信信号とに基づいてビート信号を生成する送受信部が実現される。
また、ピーク検出部120は、本技術に係るピーク検出部の一実施形態となる。
また、物標情報生成部121は、本技術に係る物標情報生成部の一実施形態となる。物標情報生成部121は、物標抽出部ともいえる。
[本技術の効果についての説明]
距離スペクトルに対してCFAR処理を実行することでCFAR閾値を設定する。そして、CFAR閾値よりも大きい信号に対してピーク処理を実行することで、物標までの距離を検出する技術も考えられる。
例えば、図7A及びBに示すCFAR閾値よりも大きい信号に対してピーク検出を実行し、物標までの距離を算出するとする。
この場合、図6及び図7のグラフを比較するとわかるように、クロスマークの付いたピーク、すなわち実際に物標が存在することにより発生するピークが、CFAR閾値を下回ってしまい検出されない場合が起こり得る。
図6A及び図7Aに示す例では、左から6番目のピークがCFAR閾値よりも小さくなってしまい検出から漏れてしまう。これは、左から5番目の強いピークにCFAR閾値が引っ張られてしまうことが原因であると考えられる。
すなわちCFAR閾値を用いたピーク検出では、強いピークに閾値が引っ張られてしまい、強いピークのすぐ後ろの弱いピークが検出しづらくなるという問題がある。
距離スペクトルに対してCFAR処理を実行することでCFAR閾値を設定する。そして、CFAR閾値よりも大きい信号に対してピーク処理を実行することで、物標までの距離を検出する技術も考えられる。
例えば、図7A及びBに示すCFAR閾値よりも大きい信号に対してピーク検出を実行し、物標までの距離を算出するとする。
この場合、図6及び図7のグラフを比較するとわかるように、クロスマークの付いたピーク、すなわち実際に物標が存在することにより発生するピークが、CFAR閾値を下回ってしまい検出されない場合が起こり得る。
図6A及び図7Aに示す例では、左から6番目のピークがCFAR閾値よりも小さくなってしまい検出から漏れてしまう。これは、左から5番目の強いピークにCFAR閾値が引っ張られてしまうことが原因であると考えられる。
すなわちCFAR閾値を用いたピーク検出では、強いピークに閾値が引っ張られてしまい、強いピークのすぐ後ろの弱いピークが検出しづらくなるという問題がある。
図6B及び図7Bに示す例では、長さ(幅)を持った建物やガードレール等により発生する連なった状態の4つのピークが、CFAR閾値よりも小さくなってしまい検出から漏れてしまっている。
すなわち、CFAR閾値を用いたピーク検出では、長さ(幅)を持った建物やガードレール等により発生する連なった状態のピークを検出することも難しい。
このように、CFAR閾値を用いたピーク検出では、周辺に存在する物標を見逃す可能性がある。
すなわち、CFAR閾値を用いたピーク検出では、長さ(幅)を持った建物やガードレール等により発生する連なった状態のピークを検出することも難しい。
このように、CFAR閾値を用いたピーク検出では、周辺に存在する物標を見逃す可能性がある。
またCFAR閾値を用いたピーク検出では、ノイズを誤検出してしまう可能性もある。例えば、図6A及び図7Aに示す例では、三角マークのピークがノイズであるにもかかわらずCFAR閾値を上回ってしまい検出されてしまっている。
これは、非常に弱いノイズに閾値が引っ張られてしまい、すぐ後のノイズがCFAR閾値よりも大きい信号となってしまうことが原因であると考えられる。
このように、ノイズのみが発生している領域においては、ノイズの強弱によって、ノイズがCFAR閾値よりも大きい信号として検出されてしまう可能性がある。
これは、非常に弱いノイズに閾値が引っ張られてしまい、すぐ後のノイズがCFAR閾値よりも大きい信号となってしまうことが原因であると考えられる。
このように、ノイズのみが発生している領域においては、ノイズの強弱によって、ノイズがCFAR閾値よりも大きい信号として検出されてしまう可能性がある。
本技術では、CFAR処理により得られるCFAR閾値が、ノイズ信号の抽出及びノイズフロアの検出に用いられる点が大きな特徴である。すなわち距離スペクトル内の物標の存在により発生するピークと、ノイズとの分離に、CFAR閾値が用いられる。
例えば、CFAR閾値を用いたピーク検出による物標抽出率(CFAR閾値以上のデータの数/全ビン)はたかだか1%程度であり、残り99%近くはほとんどノイズである可能性が高い。
従って、この残り99%のデータをノイズであるとみなし、平均化等の統計処理をすればノイズフロアが検知可能であると考えられる。
例えば、CFAR閾値を用いたピーク検出による物標抽出率(CFAR閾値以上のデータの数/全ビン)はたかだか1%程度であり、残り99%近くはほとんどノイズである可能性が高い。
従って、この残り99%のデータをノイズであるとみなし、平均化等の統計処理をすればノイズフロアが検知可能であると考えられる。
ノイズ信号(ノイズフロア)に基づいてノイズ閾値が設定され、ノイズ閾値よりも大きい信号が検出用信号として抽出される。この検出用信号に対してピーク検出を実行することで、周辺に存在する物標を見逃してしまう可能性を十分に抑制することが可能となる。すなわち、周辺に存在する物標の検出精度を十分に向上させることが可能となる。また高い精度で、ノイズを除去することが可能となる。
図8に示すように、ノイズ閾値よりも大きい検出用信号に対してピーク検出を実行することで、図6に示すクロスマークの付いたピークを精度よく検出することが可能となる。また、図7Aに示す三角マークのピーク、すなわちノイズが検出されてしまうことも防止されている。
図9は、方位角(Azimuth)に応じた距離スペクトルの一例を示すグラフである。
図9Aでは、方位角ごとの距離スペクトルの全ての信号が用いられている。図9Bでは、ノイズ閾値よりも大きい検出用信号が抽出されている。
図9Aでは、方位角ごとの距離スペクトルの全ての信号が用いられている。図9Bでは、ノイズ閾値よりも大きい検出用信号が抽出されている。
本技術を適用することで、物標の存在により発生するピークとノイズとを高精度に分離することが可能となり、物表の検出精度を向上させることが可能となる。またノイズの誤検知を十分に抑制することが可能となる。
例えば、強いピークのすぐ後ろの弱いピークを共に検出することが可能となる。これにより、例えば車両と、その車両のすぐ後ろにいる歩行者や自転車等の強度差の大きい物標同士を分離し、精度よく検出することが可能となる。
また本技術を適用することで、連なった状態で発生する複数のピークを精度よく検出することが可能となる。これにより、例えば、長さ(幅)を持った建物やガードレール等を高精度に検出することが可能となる。
例えば、強いピークのすぐ後ろの弱いピークを共に検出することが可能となる。これにより、例えば車両と、その車両のすぐ後ろにいる歩行者や自転車等の強度差の大きい物標同士を分離し、精度よく検出することが可能となる。
また本技術を適用することで、連なった状態で発生する複数のピークを精度よく検出することが可能となる。これにより、例えば、長さ(幅)を持った建物やガードレール等を高精度に検出することが可能となる。
[ノイズフロアの検出精度の向上]
ノイズ信号に基づいてノイズフロアが検出される際に、路面等の静止物体からの散乱による影響を除外することで、ノイズフロアの検出精度を向上させることが可能となる。例えば静止物体からのマルチパスによる反射の影響により、ノイズフロアが実際の値よりも大きくなってしまう場合があり得る。
例えば、ノイズ信号抽出部118により、CFAR閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号が、ノイズ信号として抽出される。当該ノイズ信号を用いることで、ノイズフロアを高精度に検出することが可能となる。
ノイズ信号に基づいてノイズフロアが検出される際に、路面等の静止物体からの散乱による影響を除外することで、ノイズフロアの検出精度を向上させることが可能となる。例えば静止物体からのマルチパスによる反射の影響により、ノイズフロアが実際の値よりも大きくなってしまう場合があり得る。
例えば、ノイズ信号抽出部118により、CFAR閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号が、ノイズ信号として抽出される。当該ノイズ信号を用いることで、ノイズフロアを高精度に検出することが可能となる。
図10は、距離(Range)及び相対速度(Speed)を2軸とする2次元的なスペクトルの一例を示すグラフである。
図10に示す2次元スペクトルは、距離スペクトルと、距離スペクトルを相対速度方向にフーリエ変換することで生成される相対速度スペクトルとにより構成されている。
ノイズ信号抽出部118により、自車速度が取得される。自車速度は、例えば図1に示す車両制御ECU21等から取得することが可能である。
自車に対して相対速度が(-自車速度)となる物標を、静止物体と見做すことが可能である。従って、相対速度スペクトルの静止物体のビン(=-自車速度のビン)の信号が除去される。この静止物体のビン(=-自車速度のビン)の信号が、静止物体からの反射波に対応する信号に相当する。
ノイズ信号抽出部118は、CFAR閾値よりも小さい信号のうち、相対速度スペクトルの静止物体のビン(=-自車速度のビン)の信号以外の信号を、ノイズ信号として抽出する。このノイズ信号に基づいて、精度の高いノイズフロアを検出することが可能となる。
精度の高いノイズフロアが検出されるので、ノイズ閾値の精度も向上する。この結果、ノイズ閾値よりも大きい検出用信号に基づいて、周辺に存在する物標を精度よく検出することが可能となる。
なお、相対速度スペクトルの静止物体のビンの信号のみならず、静止物体のビンの周辺の信号も合わせて除去されてもよい。例えば、静止物体のビンの周辺±10%の範囲のビンの信号が除去されてもよい。もちろん周辺の範囲(±%)は任意に設定されてよい。
図10に示す2次元スペクトルは、距離スペクトルと、距離スペクトルを相対速度方向にフーリエ変換することで生成される相対速度スペクトルとにより構成されている。
ノイズ信号抽出部118により、自車速度が取得される。自車速度は、例えば図1に示す車両制御ECU21等から取得することが可能である。
自車に対して相対速度が(-自車速度)となる物標を、静止物体と見做すことが可能である。従って、相対速度スペクトルの静止物体のビン(=-自車速度のビン)の信号が除去される。この静止物体のビン(=-自車速度のビン)の信号が、静止物体からの反射波に対応する信号に相当する。
ノイズ信号抽出部118は、CFAR閾値よりも小さい信号のうち、相対速度スペクトルの静止物体のビン(=-自車速度のビン)の信号以外の信号を、ノイズ信号として抽出する。このノイズ信号に基づいて、精度の高いノイズフロアを検出することが可能となる。
精度の高いノイズフロアが検出されるので、ノイズ閾値の精度も向上する。この結果、ノイズ閾値よりも大きい検出用信号に基づいて、周辺に存在する物標を精度よく検出することが可能となる。
なお、相対速度スペクトルの静止物体のビンの信号のみならず、静止物体のビンの周辺の信号も合わせて除去されてもよい。例えば、静止物体のビンの周辺±10%の範囲のビンの信号が除去されてもよい。もちろん周辺の範囲(±%)は任意に設定されてよい。
このように、自車速度と、相対速度スペクトルとに基づいてノイズ信号が抽出されてもよい。なお、本実施形態において、レーダ装置52が搭載される車両1は、移動体の一実施形態となる。また自車速度は、移動体の速度に相当する。
以上、本実施形態に係るレーダ装置52では、距離スペクトルに対してCFAR処理が実行されてCFAR閾値が設定され、距離スペクトルのうちCFAR閾値よりも小さい信号からノイズ信号が抽出される。
また、ノイズ信号に基づいてノイズ閾値が設定され、距離スペクトルのうちノイズ閾値よりも大きい信号が、検出用信号として抽出される。
検出用信号のピークを検出することで、物標の検出精度を向上させることが可能となる。
本技術を適用することで、レーダによる物標検出において誤検出及び検出漏れを十分に防ぐことが可能となる。
また、ノイズ信号に基づいてノイズ閾値が設定され、距離スペクトルのうちノイズ閾値よりも大きい信号が、検出用信号として抽出される。
検出用信号のピークを検出することで、物標の検出精度を向上させることが可能となる。
本技術を適用することで、レーダによる物標検出において誤検出及び検出漏れを十分に防ぐことが可能となる。
<その他の実施形態>
本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
上記では、距離スペクトルに対して、第1の閾値(CFAR閾値)の設定、ノイズ信号の抽出(ノイズフロアの検出)、第2の閾値(ノイズ閾値)の設定、検出用信号の抽出、及びピーク検出が実行された。
これに限定されず、相対速度スペクトル又は角度スペクトルに対して、第1の閾値(CFAR閾値)の設定、ノイズ信号の抽出(ノイズフロアの検出)、第2の閾値(ノイズ閾値)の設定、検出用信号の抽出、及びピーク検出が実行されてもよい。
すなわち、第1の抽出部により、相対速度スペクトル又は角度スペクトルが、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルとして取得されてもよい。
これに限定されず、相対速度スペクトル又は角度スペクトルに対して、第1の閾値(CFAR閾値)の設定、ノイズ信号の抽出(ノイズフロアの検出)、第2の閾値(ノイズ閾値)の設定、検出用信号の抽出、及びピーク検出が実行されてもよい。
すなわち、第1の抽出部により、相対速度スペクトル又は角度スペクトルが、レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルとして取得されてもよい。
本技術は、FMCW方式以外のレーダ装置にも適用可能である。
ネットワーク等を介して通信可能に接続された複数のコンピュータが協働することで、本技術に係る信号処理方法及びプログラムが実行され、本技術に係るレーダ装置のコントローラが構築されてもよい。
すなわち本技術に係る信号処理方法、及びプログラムは、単体のコンピュータにより構成されたコンピュータシステムのみならず、複数のコンピュータが連動して動作するコンピュータシステムにおいても実行可能である。
なお本開示において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれもシステムである。
コンピュータシステムによる本技術に係る信号処理方法、及びプログラムの実行は、例えば第1の閾値の設定、ノイズ信号の抽出、ノイズフロアの検出、第2の閾値の設定、検出用信号の抽出、ピーク検出等が、単体のコンピュータにより実行される場合、及び各処理が異なるコンピュータにより実行される場合の両方を含む。また所定のコンピュータによる各処理の実行は、当該処理の一部または全部を他のコンピュータに実行させその結果を取得することを含む。
すなわち本技術に係る情報処理方法及びプログラムは、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成にも適用することが可能である。
すなわち本技術に係る信号処理方法、及びプログラムは、単体のコンピュータにより構成されたコンピュータシステムのみならず、複数のコンピュータが連動して動作するコンピュータシステムにおいても実行可能である。
なお本開示において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれもシステムである。
コンピュータシステムによる本技術に係る信号処理方法、及びプログラムの実行は、例えば第1の閾値の設定、ノイズ信号の抽出、ノイズフロアの検出、第2の閾値の設定、検出用信号の抽出、ピーク検出等が、単体のコンピュータにより実行される場合、及び各処理が異なるコンピュータにより実行される場合の両方を含む。また所定のコンピュータによる各処理の実行は、当該処理の一部または全部を他のコンピュータに実行させその結果を取得することを含む。
すなわち本技術に係る情報処理方法及びプログラムは、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成にも適用することが可能である。
各図面を参照して説明した車両制御システム、レーダ装置の各構成、各処理フロー等はあくまで一実施形態であり、本技術の趣旨を逸脱しない範囲で、任意に変形可能である。すなわち本技術を実施するための他の任意の構成やアルゴリズム等が採用されてよい。
本開示において、説明の理解を容易とするために、「略」「ほぼ」「おおよそ」等の文言が適宜使用されている。一方で、これら「略」「ほぼ」「おおよそ」等の文言を使用する場合と使用しない場合とで、明確な差異が規定されるわけではない。
すなわち、本開示において、「中心」「中央」「均一」「等しい」「同じ」「直交」「平行」「対称」「延在」「軸方向」「円柱形状」「円筒形状」「リング形状」「円環形状」等の、形状、サイズ、位置関係、状態等を規定する概念は、「実質的に中心」「実質的に中央」「実質的に均一」「実質的に等しい」「実質的に同じ」「実質的に直交」「実質的に平行」「実質的に対称」「実質的に延在」「実質的に軸方向」「実質的に円柱形状」「実質的に円筒形状」「実質的にリング形状」「実質的に円環形状」等を含む概念とする。
例えば「完全に中心」「完全に中央」「完全に均一」「完全に等しい」「完全に同じ」「完全に直交」「完全に平行」「完全に対称」「完全に延在」「完全に軸方向」「完全に円柱形状」「完全に円筒形状」「完全にリング形状」「完全に円環形状」等を基準とした所定の範囲(例えば±10%の範囲)に含まれる状態も含まれる。
従って、「略」「ほぼ」「おおよそ」等の文言が付加されていない場合でも、いわゆる「略」「ほぼ」「おおよそ」等を付加して表現され得る概念が含まれ得る。反対に、「略」「ほぼ」「おおよそ」等を付加して表現された状態について、完全な状態が必ず排除されるというわけではない。
すなわち、本開示において、「中心」「中央」「均一」「等しい」「同じ」「直交」「平行」「対称」「延在」「軸方向」「円柱形状」「円筒形状」「リング形状」「円環形状」等の、形状、サイズ、位置関係、状態等を規定する概念は、「実質的に中心」「実質的に中央」「実質的に均一」「実質的に等しい」「実質的に同じ」「実質的に直交」「実質的に平行」「実質的に対称」「実質的に延在」「実質的に軸方向」「実質的に円柱形状」「実質的に円筒形状」「実質的にリング形状」「実質的に円環形状」等を含む概念とする。
例えば「完全に中心」「完全に中央」「完全に均一」「完全に等しい」「完全に同じ」「完全に直交」「完全に平行」「完全に対称」「完全に延在」「完全に軸方向」「完全に円柱形状」「完全に円筒形状」「完全にリング形状」「完全に円環形状」等を基準とした所定の範囲(例えば±10%の範囲)に含まれる状態も含まれる。
従って、「略」「ほぼ」「おおよそ」等の文言が付加されていない場合でも、いわゆる「略」「ほぼ」「おおよそ」等を付加して表現され得る概念が含まれ得る。反対に、「略」「ほぼ」「おおよそ」等を付加して表現された状態について、完全な状態が必ず排除されるというわけではない。
本開示において、「Aより大きい」「Aより小さい」といった「より」を使った表現は、Aと同等である場合を含む概念と、Aと同等である場合を含まない概念の両方を包括的に含む表現である。例えば「Aより大きい」は、Aと同等は含まない場合に限定されず、「A以上」も含む。また「Aより小さい」は、「A未満」に限定されず、「A以下」も含む。
本技術を実施する際には、上記で説明した効果が発揮されるように、「Aより大きい」及び「Aより小さい」に含まれる概念から、具体的な設定等を適宜採用すればよい。
本技術を実施する際には、上記で説明した効果が発揮されるように、「Aより大きい」及び「Aより小さい」に含まれる概念から、具体的な設定等を適宜採用すればよい。
以上説明した本技術に係る特徴部分のうち、少なくとも2つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
なお、本技術は以下のような構成も採ることができる。
(1)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する第1の抽出部と、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する第2の抽出部と、
前記検出用信号のピークを検出するピーク検出部と
を具備するレーダ装置。
(2)(1)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号、又は前記第1の閾値よりも小さい信号の一部の信号を、前記ノイズ信号として抽出する
レーダ装置。
(3)(1)又は(2)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち所定の範囲に含まれる信号を、前記ノイズ信号として抽出する
レーダ装置。
(4)(1)又は(2)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。
(5)(1)から(4)のうちいずれか1つに記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号に基づいてノイズフロアを算出し、算出された前記ノイズフロアよりも大きい値を、前記第2の閾値として設定する
レーダ装置。
(6)(5)に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号の平均値、分散値、又は標準偏差を、前記ノイズフロアとして算出する
レーダ装置。
(7)(5)又は(6)に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズフロアに所定の係数を乗じた値、又は前記ノイズフロアに所定の定数を加算した値を、前記第2の閾値として設定する
レーダ装置。
(8)(1)から(7)のうちいずれか1つに記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。
(9)(1)から(8)のうちいずれか1つに記載のレーダ装置であって、さらに、
前記ピーク検出部による検出結果に基づいて、周辺に存在する物標を検出する物標情報生成部を具備する
レーダ装置。
(10)(8)又は(9)に記載のレーダ装置であって、
移動体に搭載されるように構成され、
前記第1の抽出部は、前記移動体の速度と、前記距離に関する周波数スペクトルを相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルとに基づいて、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。
(11)(1)から(7)のうちいずれか1つに記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルに対して相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。
(12)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出し、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出し、
前記検出用信号のピークを検出する
ことをコンピュータシステムが実行する信号処理方法。
(13)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出するステップと、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出するステップと、
前記検出用信号のピークを検出するステップと
をコンピュータシステムに実行させるプログラム。
(1)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する第1の抽出部と、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する第2の抽出部と、
前記検出用信号のピークを検出するピーク検出部と
を具備するレーダ装置。
(2)(1)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号、又は前記第1の閾値よりも小さい信号の一部の信号を、前記ノイズ信号として抽出する
レーダ装置。
(3)(1)又は(2)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち所定の範囲に含まれる信号を、前記ノイズ信号として抽出する
レーダ装置。
(4)(1)又は(2)に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。
(5)(1)から(4)のうちいずれか1つに記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号に基づいてノイズフロアを算出し、算出された前記ノイズフロアよりも大きい値を、前記第2の閾値として設定する
レーダ装置。
(6)(5)に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号の平均値、分散値、又は標準偏差を、前記ノイズフロアとして算出する
レーダ装置。
(7)(5)又は(6)に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズフロアに所定の係数を乗じた値、又は前記ノイズフロアに所定の定数を加算した値を、前記第2の閾値として設定する
レーダ装置。
(8)(1)から(7)のうちいずれか1つに記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。
(9)(1)から(8)のうちいずれか1つに記載のレーダ装置であって、さらに、
前記ピーク検出部による検出結果に基づいて、周辺に存在する物標を検出する物標情報生成部を具備する
レーダ装置。
(10)(8)又は(9)に記載のレーダ装置であって、
移動体に搭載されるように構成され、
前記第1の抽出部は、前記移動体の速度と、前記距離に関する周波数スペクトルを相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルとに基づいて、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。
(11)(1)から(7)のうちいずれか1つに記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルに対して相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。
(12)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出し、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出し、
前記検出用信号のピークを検出する
ことをコンピュータシステムが実行する信号処理方法。
(13)
レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出するステップと、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出するステップと、
前記検出用信号のピークを検出するステップと
をコンピュータシステムに実行させるプログラム。
1…車両
11…車両制御システム
21…車両制御ECU
52…レーダ装置
110…送信アンテナ
111…受信アンテナ
112…信号発生器
113…ミキサ
114…ADコンバータ
115…コントローラ
116…周波数解析部
117…閾値設定部
118…ノイズ信号抽出部
119…検出用信号抽出部
120…ピーク検出部
121…物標情報生成部
11…車両制御システム
21…車両制御ECU
52…レーダ装置
110…送信アンテナ
111…受信アンテナ
112…信号発生器
113…ミキサ
114…ADコンバータ
115…コントローラ
116…周波数解析部
117…閾値設定部
118…ノイズ信号抽出部
119…検出用信号抽出部
120…ピーク検出部
121…物標情報生成部
Claims (13)
- レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出する第1の抽出部と、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出する第2の抽出部と、
前記検出用信号のピークを検出するピーク検出部と
を具備するレーダ装置。 - 請求項1に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号、又は前記第1の閾値よりも小さい信号の一部の信号を、前記ノイズ信号として抽出する
レーダ装置。 - 請求項1に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち所定の範囲に含まれる信号を、前記ノイズ信号として抽出する
レーダ装置。 - 請求項1に記載のレーダ装置であって、
前記第1の抽出部は、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。 - 請求項1に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号に基づいてノイズフロアを算出し、算出された前記ノイズフロアよりも大きい値を、前記第2の閾値として設定する
レーダ装置。 - 請求項5に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズ信号の平均値、分散値、又は標準偏差を、前記ノイズフロアとして算出する
レーダ装置。 - 請求項5に記載のレーダ装置であって、
前記第2の抽出部は、前記ノイズフロアに所定の係数を乗じた値、又は前記ノイズフロアに所定の定数を加算した値を、前記第2の閾値として設定する
レーダ装置。 - 請求項1に記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。 - 請求項1に記載のレーダ装置であって、さらに、
前記ピーク検出部による検出結果に基づいて、周辺に存在する物標を検出する物標情報生成部を具備する
レーダ装置。 - 請求項8に記載のレーダ装置であって、
移動体に搭載されるように構成され、
前記第1の抽出部は、前記移動体の速度と、前記距離に関する周波数スペクトルを相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルとに基づいて、前記第1の閾値よりも小さい信号のうち静止物体からの反射波に対応する信号以外の信号を、前記ノイズ信号として抽出する
レーダ装置。 - 請求項1に記載のレーダ装置であって、さらに、
連続波が周波数変調されたFMCW(Frequency Modulated Continuous Wave)信号を送信信号として前記レーダ波を放射し、前記受信信号と前記送信信号とに基づいてビート信号を生成する送受信部を具備し、
前記第1の抽出部は、前記ビート信号を距離方向にフーリエ変換することで生成される距離に関する周波数スペクトルに対して相対速度方向にフーリエ変換することで生成される相対速度に関する周波数スペクトルを、前記周波数スペクトルとして取得する
レーダ装置。 - レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出し、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出し、
前記検出用信号のピークを検出する
ことをコンピュータシステムが実行する信号処理方法。 - レーダ波が反射された反射波を受信することで得られる受信信号に基づいて生成される周波数スペクトルに対してCFAR(Constant False Alarm Rate)処理を実行して第1の閾値を設定し、前記周波数スペクトルのうち前記第1の閾値よりも小さい信号からノイズ信号を抽出するステップと、
前記ノイズ信号に基づいて第2の閾値を設定し、前記周波数スペクトルのうち前記第2の閾値よりも大きい信号を検出用信号として抽出するステップと、
前記検出用信号のピークを検出するステップと
をコンピュータシステムに実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US18/556,876 US20240219551A1 (en) | 2021-05-12 | 2022-02-16 | Radar apparatus, signal processing method, and program |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021080992A JP2022174938A (ja) | 2021-05-12 | 2021-05-12 | レーダ装置、信号処理方法、及びプログラム |
JP2021-080992 | 2021-05-12 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2022239348A1 true WO2022239348A1 (ja) | 2022-11-17 |
Family
ID=84029021
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2022/006158 WO2022239348A1 (ja) | 2021-05-12 | 2022-02-16 | レーダ装置、信号処理方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240219551A1 (ja) |
JP (1) | JP2022174938A (ja) |
WO (1) | WO2022239348A1 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005059588A1 (ja) * | 2003-12-16 | 2005-06-30 | Murata Manufacturing Co., Ltd. | レーダ |
JP2006292597A (ja) * | 2005-04-13 | 2006-10-26 | Nec Corp | レーダ信号処理装置及びそれに用いるcfar処理方法 |
JP2017522577A (ja) * | 2014-06-27 | 2017-08-10 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | Fmcwレーダーを用いて対象物の位置を決定する方法 |
US20200278431A1 (en) * | 2019-03-01 | 2020-09-03 | Didi Research America, Llc | Constant false alarm rate detection in pulsed lidar systems |
US10958287B1 (en) * | 2019-12-03 | 2021-03-23 | Qualcomm Incorporated | Efficient compression of radar data |
CN112684428A (zh) * | 2021-01-15 | 2021-04-20 | 浙江大学 | 一种基于信号代理的多目标恒虚警率检测方法 |
JP2021067461A (ja) * | 2019-10-17 | 2021-04-30 | パナソニックIpマネジメント株式会社 | レーダ装置及びレーダ信号処理方法 |
-
2021
- 2021-05-12 JP JP2021080992A patent/JP2022174938A/ja active Pending
-
2022
- 2022-02-16 WO PCT/JP2022/006158 patent/WO2022239348A1/ja active Application Filing
- 2022-02-16 US US18/556,876 patent/US20240219551A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005059588A1 (ja) * | 2003-12-16 | 2005-06-30 | Murata Manufacturing Co., Ltd. | レーダ |
JP2006292597A (ja) * | 2005-04-13 | 2006-10-26 | Nec Corp | レーダ信号処理装置及びそれに用いるcfar処理方法 |
JP2017522577A (ja) * | 2014-06-27 | 2017-08-10 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | Fmcwレーダーを用いて対象物の位置を決定する方法 |
US20200278431A1 (en) * | 2019-03-01 | 2020-09-03 | Didi Research America, Llc | Constant false alarm rate detection in pulsed lidar systems |
JP2021067461A (ja) * | 2019-10-17 | 2021-04-30 | パナソニックIpマネジメント株式会社 | レーダ装置及びレーダ信号処理方法 |
US10958287B1 (en) * | 2019-12-03 | 2021-03-23 | Qualcomm Incorporated | Efficient compression of radar data |
CN112684428A (zh) * | 2021-01-15 | 2021-04-20 | 浙江大学 | 一种基于信号代理的多目标恒虚警率检测方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2022174938A (ja) | 2022-11-25 |
US20240219551A1 (en) | 2024-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230230368A1 (en) | Information processing apparatus, information processing method, and program | |
CN114424265B (zh) | 信号处理设备、信号处理方法、程序和移动设备 | |
CN112534297A (zh) | 信息处理设备和信息处理方法、计算机程序、信息处理系统以及移动设备 | |
US20220172484A1 (en) | Information processing method, program, and information processing apparatus | |
WO2023153083A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラム及び移動装置 | |
US20230245423A1 (en) | Information processing apparatus, information processing method, and program | |
WO2022239348A1 (ja) | レーダ装置、信号処理方法、及びプログラム | |
WO2023021756A1 (ja) | 情報処理システム、情報処理装置、及び情報処理方法 | |
US20240019539A1 (en) | Information processing device, information processing method, and information processing system | |
US20240168152A1 (en) | Information processing device, and information processing method | |
WO2023145460A1 (ja) | 振動検出システムおよび振動検出方法 | |
US20240272285A1 (en) | Light source control device, light source control method, and distance measuring device | |
WO2023074419A1 (ja) | 情報処理装置、情報処理方法、及び、情報処理システム | |
WO2024024471A1 (ja) | 情報処理装置、情報処理方法、及び、情報処理システム | |
WO2022107532A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US20230267746A1 (en) | Information processing device, information processing method, and program | |
WO2023063145A1 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
WO2024157658A1 (ja) | 車載カメラ | |
WO2023068116A1 (ja) | 車載通信装置、端末装置、通信方法、情報処理方法及び通信システム | |
WO2024048671A1 (ja) | レーダ装置および車載センシングシステム | |
WO2023162497A1 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
US20230206596A1 (en) | Information processing device, information processing method, and program | |
WO2023079881A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20240235034A1 (en) | Antenna device, radar device and vehicle control system | |
US20240241227A1 (en) | Distance measuring device and distance measuring method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 22807055 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 18556876 Country of ref document: US |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 22807055 Country of ref document: EP Kind code of ref document: A1 |