JP7327257B2 - 車載センサシステム - Google Patents

車載センサシステム Download PDF

Info

Publication number
JP7327257B2
JP7327257B2 JP2020071587A JP2020071587A JP7327257B2 JP 7327257 B2 JP7327257 B2 JP 7327257B2 JP 2020071587 A JP2020071587 A JP 2020071587A JP 2020071587 A JP2020071587 A JP 2020071587A JP 7327257 B2 JP7327257 B2 JP 7327257B2
Authority
JP
Japan
Prior art keywords
vehicle
observation
sensor
information
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020071587A
Other languages
English (en)
Other versions
JP2021168065A (ja
Inventor
猛 山川
康生 上原
修 米田
一喜 平元
和宏 宮里
昌武 千葉
尚秀 内田
英明 澤田
正樹 猪飼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2020071587A priority Critical patent/JP7327257B2/ja
Priority to RU2021107625A priority patent/RU2763800C1/ru
Priority to KR1020210038805A priority patent/KR20210127088A/ko
Priority to EP21166856.1A priority patent/EP3896485A1/en
Priority to US17/222,115 priority patent/US11780436B2/en
Priority to CN202110374464.9A priority patent/CN113538966B/zh
Priority to BR102021006989-9A priority patent/BR102021006989A2/pt
Publication of JP2021168065A publication Critical patent/JP2021168065A/ja
Application granted granted Critical
Publication of JP7327257B2 publication Critical patent/JP7327257B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/865Combination of radar systems with lidar systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/87Combinations of radar systems, e.g. primary radar and secondary radar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87Combinations of systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/28Details of pulse systems
    • G01S7/285Receivers
    • G01S7/32Shaping echo pulse signals; Deriving non-pulse signals from echo pulse signals
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/40Means for monitoring or calibrating
    • G01S7/4004Means for monitoring or calibrating of parts of a radar system
    • G01S7/4026Antenna boresight
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/411Identification of targets based on measurements of radar reflectivity
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/415Identification of targets based on measurements of movement associated with the target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4802Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • B60W2050/009Priority selection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/10Number of lanes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/50Barriers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/53Road markings, e.g. lane marker or crosswalk
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/30Sensors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9315Monitoring blind spots
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/932Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles using own vehicle data, e.g. ground speed, steering wheel direction
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9322Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles using additional data, e.g. driver condition, road state or weather data
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93271Sensor installation details in the front of the vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93272Sensor installation details in the back of the vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93274Sensor installation details on the side of the vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Radar Systems Or Details Thereof (AREA)

Description

本発明は、車載センサシステムの技術分野に関する。
この種のシステムとして、例えば、車載カメラによる種別識別結果の情報と、レーダ装置による種別識別結果の情報とに基づいて、レーダ装置における種別識別判定に用いられるデータベースを更新するシステムが提案されている(特許文献1参照)。その他関連する技術として特許文献2が挙げられる。特許文献2には、捜索ビームの検出結果に基づいて追尾目標を決定し、該追尾目標に向けて追尾レーダを照射する技術が記載されている。
特開2017-207348号公報 特開平10-246778号公報
例えば、より高度な自動運転を実現するためには、自車両の周囲についてセンサによる高精度な(言い換えれば、精密な)観測結果が要求される。ここで、センサによる自車両の周囲の観測に要する時間は、要求される精度が高くなるほど長くなる傾向にある。加えて、移動を前提とする車両では、1回の観測に費やすことのできる時間に限りがある。特許文献1に記載の技術において、例えばレーダ装置を高精度化した場合(即ち、角度分解能を向上した場合)、1回の観測時間が大幅に増加してしまい、実用に適さなくなるおそれがある。
本発明は、上記問題点に鑑みてなされたものであり、観測時間を抑制しつつ高精度な観測結果を取得することができる車載センサシステムを提供することを課題とする。
本発明の一態様に係る車載センサシステムは、自車両の周囲の状況を検出する第1センサと、前記第1センサより角度分解能の高い第2センサと、を備える車載センサシステムであって、前記第1センサによる検出結果を取得する取得手段と、前記検出結果に基づいて、前記自車両の周囲のうち前記第2センサが観測すべき観測範囲を決定する範囲決定手段と、を備えるというものである。
当該車載センサシステムでは、第2センサの観測範囲について比較的高精度な観測が行われる一方で、その他の範囲については、第1センサによる検出結果を利用することができる。このため、当該車載センサシステムによれば、観測時間を抑制しつつ、高精度な観測結果を取得することができる。
実施形態に係るセンサシステムの構成の一例を示すブロック図である。 実施形態に係る粗測センサの視野の一例を示す図である。 実施形態に係る精測センサの視野の一例を示す図である。 実施形態に係るセンサシステムの動作を示すフローチャートである。 実施形態に係るセンサシステムの構成の他の例を示すブロック図である。 実施形態に係る粗測センサにより観測される範囲の一例を示す図である。 車両1が走行する道路の一例を示す図である。 実施形態に係る粗測センサによる観測結果の概念を示す概念図である。 実施形態に係る脅威度判定を示すフローチャートである。 脅威度と距離と観測優先順位との関係を規定するテーブルの一例である。 実施形態に係る観測計画の生成動作を示すフローチャートである。 走査パターンの一例を示す図である。 実施形態に係る観測順序の入替動作を示すフローチャートである。
車載センサシステムに係る実施形態について説明する。実施形態に係る車載センサシステムは、自車両の周囲の状況を検出する第1センサと、該第1センサより角度分解能の高い第2センサとを備える。ここで、第2センサは、第1センサより角度分解能が高い限りにおいて、第1センサと同一種別のセンサであってもよいし、第1センサとは異なる種別のセンサであってもよい。尚、第1センサは、一つに限らず複数であってよい。第2センサも、一つに限らず複数であってよい。
センサに係る分解能は、単位面積当たりの観測点数(即ち、観測密度)により評価できる。単位面積当たりの観測点数が増えるほど(言い換えれば、観測密度が高くなるほど)、分解能の評価は高くなる。他方で、具体的な分解能は、センサにより識別可能な最小の距離又は角度により表される。識別可能な最小の距離又は角度が小さいほど、分解能(即ち、対象を識別する能力)は高くなる。つまり、識別可能な最小の距離又は角度が小さいほど、観測密度を高めることができる。「角度分解能」は、分解能を、識別可能な最小の角度で表した指標である。「第1センサより角度分解能が高い」とは、「第1センサが識別可能な最小の角度より小さい角度まで識別可能である」ことを意味する。
例えば、複数の検出素子が2次元に配列された検出部を有し、該検出部の視野範囲を一時に観測するセンサ(例えば、カメラ等)では、解像度が上記観測密度に相当する。この場合、一つの検出素子の視野角(即ち、瞬時視野)が「角度分解能」の一具体例に相当する。
例えば、観測波(光、電波等)を出射し、出射された観測波の反射波を観測するセンサ(例えば、LiDAR(Light Detection and Ranging)、レーダ等)では、単位面積当たりに照射されるレーザ又はビームの本数が、上記観測密度に相当する。例えばLiDARの場合、一の面までの距離を“x”、該一の面におけるレーザスポット間の距離を“d”とすると、「角度分解能」は、おおよそ“d・2tan-1(1/2x)”と表される(この値は、スキャンステップ角に対応する)。例えばレーダの場合、角度で表されたビーム幅が「角度分解能」の一具体例に相当する。
「自車両の周囲の状況」とは、ある一時点における自車両の周囲の様子を意味する。「自車両の周囲の状況」には、例えば、自車両の周囲に存在する物体、自車両が走行している道路の形状及び構造、該道路の路面に係る情報等が含まれる。「自車両の周囲の状況」には、更に、降雨量や降雪量等の気象に係る情報が含まれていてもよい。
上記「自車両の周囲に存在する物体」には、例えばガードレール、ポール、縁石等の地面に固定された設置物、例えば駐車車両、ロードコーン等の静止物、例えば走行車両、歩行者等の動体、等が含まれてよい。ここに例示した、設置物、静止物及び動体を、以降、適宜「障害物」と称する。尚、第1センサ及び第2センサ各々は、例えば物体の特性(例えば反射率、色等)に基づいて(即ち、上記区分とは異なる区分で)、物体を識別してよい。例えば道路標識について、道路標識本体と、該道路標識本体を支持する支柱とが別々の物体として識別されてよい。
上記「道路の形状及び構造」には、例えば、車線数、車線幅、道路幅、曲率、右折専用車線、合流部、分流部、交差点、等が含まれてよい。上記「路面に係る情報」には、例えば、路面に記された道路標示に係る情報、路面の凹凸に係る情報、等が含まれてよい。
当該車載センサシステムは、取得手段及び範囲決定手段を備える。取得手段は、第1センサによる検出結果を取得する。第1センサがカメラである場合、検出結果は、該カメラにより撮像された画像であってよい。第1センサがLiDARやレーダである場合、検出結果は、例えば第1センサから反射点までの距離や反射強度を含むデータであってよい。
範囲決定手段は、取得手段により取得された検出結果に基づいて、自車両の周囲のうち第2センサが観測すべき観測範囲を決定する。ここで「観測範囲」は、第2センサが実際に観測する範囲であり、第2センサが、その性能上観測できる範囲である観測可能範囲より狭い範囲である。第2センサが、例えばズーム機能付きカメラである場合、「観測可能範囲」は、焦点距離が最も短いときの画角に相当する。第2センサが、走査型のLiDARやレーダである場合、「観測可能範囲」は、例えばカタログ等に記載の視野角に相当する。
「検出結果に基づいて」とは、検出結果そのもの(所謂生データ)に基づくことに限らず、例えば、検出結果を加工したデータや、検出結果に何らかの処理(例えば分析処理等)を施すことにより得られたデータ等に基づくことも含む概念である。
検出結果に基づいて、自車両の周囲に存在する障害物に係る情報が得られる場合、範囲決定手段は、例えば、障害物周辺が観測範囲に含まれるように、該観測範囲を決定してよい。このとき、範囲決定手段は、例えば上記障害物周辺以外の領域が観測範囲に含まれないように、該観測範囲を決定してよい。或いは、検出結果に基づいて、自車両の周囲に存在する複数の障害物に係る情報が得られる場合、範囲決定手段は、例えば、動体に相当する障害物が優先して観測範囲に含まれるように、該観測範囲を決定してよい。或いは、検出結果に基づいて、自車両の前方に交差点の存在が確認される場合、範囲決定手段は、交差点周辺が観測範囲に含まれるように、該観測範囲を決定してよい。このとき、範囲決定手段は、例えば上記交差点周辺以外の領域が観測範囲に含まれないように、該観測範囲を決定してよい。
例えば、より高度な自動運転を実現するためには、自車両の周囲について車載センサによる高精度な観測結果が要求される。高精度な観測結果を出力する高精度なセンサとして、例えばペンシルビームを走査するフェーズドアレイレーダが提案されている。しかしながら、ペンシルビームはそのビーム幅が比較的狭いが故に、フェーズドアレイレーダは、例えばファンビームを発信するレーダに比べて、数倍から数百倍の観測時間を要する。このため、複雑環境である路上を走行する車両に、例えばフェーズドアレイレーダ等の高精度なセンサが搭載されたとしても、車両の周囲の環境変化に対して観測時間が不足してしまう(例えば、自車両が移動したり、周囲の他車両等が移動したりすることにより、観測結果が得られた時点において、該観測結果により示される位置に、対応するものが存在しないということが起こり得る)。つまり、高精度なセンサが車両に搭載されたとしても、その性能を十分に発揮させることが難しい。
しかるに、当該車載センサシステムでは、角度分解能が比較的低い第1センサの検出結果に基づいて、角度分解能が比較的高い第2センサ(上述の高精度なセンサに相当)が観測すべき観測範囲が決定される。
ここで、第1センサの角度分解能は比較的低いので、第1センサによる自車両の周囲の状況の検出に係る処理に要する時間は比較的短い。加えて、第1センサの角度分解能が比較的低いので、第1センサによる検出結果のデータ量は比較的小さい。このため、第1センサによる自車両の周囲の状況の検出から、第2センサの観測範囲が決定されるまでに要する時間を比較的短くすることができる。そして、第2センサの観測範囲は、該第2センサの観測可能範囲より狭いので(言い換えれば、第2センサが観測すべき範囲が限定されているので)、観測範囲の観測に要する時間は、観測可能範囲全体の観測に要する時間より短くなる。
他方で、第2センサの観測範囲は、例えば障害物や交差点等、自車両が走行するときに注目すべきポイント(言い換えれば、自車両の走行に比較的大きな影響を及ぼす可能性があるポイント)が含まれるように決定されてよい。このように構成すれば、該注目すべきポイントについて比較的高精度な観測結果を得ることができる。
つまり、当該車載センサシステムでは、第2センサの観測範囲について比較的高精度な観測が行われつつ、その他の範囲について比較的低精度な観測が行われる。このため、当該車載センサシステムによれば、観測時間を抑制しつつ、高精度な観測結果を取得することができる。従って、当該車載センサシステムによれば、例えば、自車両の走行に比較的大きな影響を及ぼす可能性があるポイントについては比較的高精度な観測結果を取得する一方で、自車両の走行に影響を及ぼさない又は及ぼさない可能性が高いポイントについては比較的低精度な観測結果のみを取得するシステムを実現することができる。
実施形態に係る車載センサシステムの一具体例としてのセンサシステム100について図1乃至図4を参照して説明する。
図1において、センサシステム100は、上述した自車両の一例に相当する車両1に搭載されている。センサシステム100は、中央処理・制御装置10と、粗測センサ20と、精測センサ30とを備えて構成されている。図1では、粗測センサ20及び精測センサ30が一つずつ描かれているが、粗測センサ20及び精測センサ30は、夫々複数個備えられていてよい。
粗測センサ20及び精測センサ30は、夫々、上述した第1センサ及び第2センサの一例に相当する。このため、精測センサ30の角度分解能は、粗測センサ20の角度分解能よりも高い。
粗測センサ20の配置について図2を参照して説明する。図2において、扇状の範囲は各粗測センサ20の視野を示している。粗測センサ20は、例えば車両1の前部正面、前部左、前部右、後部左及び後部右に配置されてよい。このとき、一の粗測センサ20の視野が、他の粗測センサ20の視野の少なくとも一部と重なるように、各粗測センサ20が配置されてよい。
精測センサ30の配置について図3を参照して説明する。図3において、扇状の範囲は各精粗センサ30の視野(上述した第2センサの観測可能範囲に相当)を示している。精測センサ30は、例えば車両1の屋根に配置されてよい。このとき、一の精測センサ30の視野が、他の精測センサ30の視野の少なくとも一部と重なるように、各精測センサ30が配置されてよい。
尚、粗測センサ20及び精測センサ30各々の個数及び配置は一例であり、これらに限定されるものではない。
中央処理・制御装置10は、その内部に論理的に実現される処理ブロックとして、又は、物理的に実現される処理回路として、粗測データ処理部11及び精測データ処理部12を備える。粗測データ処理部11は、粗測センサ20に係るデータ処理を行う。精測データ処理部12は、精測センサ30に係るデータ処理を行う。
粗測データ処理部11及び精測データ処理部12の動作について図4のフローチャートを参照して説明する。
図4において、粗測データ処理部11は、粗測センサ20による観測情報(例えば、車両1の周囲に存在する障害物に対応する物標等に係る情報)を取得する(ステップS1)。粗測データ処理部11は、観測情報から、車両1の周囲に存在する障害物の未来の位置や軌道を予測する(ステップS2)。尚、障害物の軌道の予測は、障害物が動体である場合に行われてよい。次に、粗測データ処理部11は、ステップS2の処理の結果と、車両1の挙動とに基づいて、障害物の脅威度を判定する。脅威度は、例えば車両1と障害物との衝突可能性等に基づいて判定されてよい。粗測データ処理部11は、脅威度の判定結果を精測データ処理部12に送信する。
精測データ処理部12は、粗測データ処理部11から受信した脅威度の判定結果に基づいて、障害物のうち精測センサ30の観測対象を決定する。精測データ処理部12は、該決定された観測対象について観測順序を設定するとともに、精測センサ30の観測範囲を設定する(ステップS4)。精測データ処理部12は、観測順序及び観測範囲の設定結果に従って観測対象を観測するように精測センサ30を制御する(ステップS5)。
実施形態に係るセンサシステムの他の具体例としてのセンサシステム110について図5乃至図13を参照して説明する。センサシステム110は、上述したセンサシステム100の構成をより実践的にしたものである。図面上における共通箇所には同一符号を付して示し、センサシステム100と重複する説明を適宜省略する。
図5において、センサシステム110は、車両1に搭載されている。センサシステム110は、中央処理・制御装置10(以降、適宜“制御装置10”と称する)と、複数の粗測センサ20と、複数の精測センサ30と、自車運動センサ40と、を備えて構成されている。センサシステム110は、インターフェイス装置50を介して、車両1の車両制御装置60に接続されている。
尚、図5には、2つの粗測センサ20が描かれているが、粗測センサ20は2つに限定されるものではない(即ち、粗測センサ20は3以上であってもよいし、一つであってもよい)。同様に、精測センサ30も2つに限定されるものではない。
複数の粗測センサ20は、同一種別のセンサに限らず、互いに異なる種別のセンサであってよい。粗測センサ20の具体例としては、カメラ、ファンビームを発信するレーダ、フラッシュ型LiDAR等が挙げられる。同様に、複数の精測センサ30も、同一種別のセンサに限らず、互いに異なる種別のセンサであってよい。精測センサ30の具体例としては、アクティブフェーズドアレイレーダ、走査型LiDAR、FM-CW(Frequency Modulated Continuous Wave)レーダ、FMCW-LiDAR、ジンバル搭載カメラ等が挙げられる。
粗測センサ20は、観測情報を得る観測部と、該観測部から出力される観測生データ(例えば画像、反射波情報等)を処理して、例えば物体を識別し、点群や物標に変換する探知部と、後述する粗測データ処理部11からの指示を受信して、観測パラメータを設定する制御部と、を有する。尚、粗測センサ20の構成は一例であり、これに限定されるものではない。
精測センサ30は、観測情報を得る観測部と、該観測部を走査する走査部と、例えば物体を識別し、点群や物標に変換する探知部と、後述する精測データ処理部12からの指示を受信して、観測パラメータを設定する制御部と、を有する。尚、粗測センサ30の構成は一例であり、これに限定されるものではない。
自車運動センサ40は、車両1の運動情報を検知する複数のセンサを含んで構成されている。自車運動センサ40には、例えば位置センサ(Global Positioning System:GPS等)、加速度センサ、角速度センサ等が含まれていてよい。
制御装置10は、その内部に論理的に実現される処理ブロックとして、又は、物理的に実現される処理回路として、粗測データ処理部11、精測データ処理部12及び観測データ統合・確認部13を備える。
(粗測データ処理部)
粗測データ処理部11は、探知データ統合部111、動体検出部112、脅威度判定部113、粗測情報管理部114及び粗測センサ観測制御部115を有する。
探知データ統合部111は、複数の粗測センサ20各々から送られてくるデータを統合する。具体的には、探知データ統合部111は、各粗測センサ20から送られてくるデータに対して、例えば観測タイミングの時刻同期、各粗測センサ20の取り付け角、取り付け誤差及び取り付け誤差の補正、並びに、センサ基準座標系から車両1を中心とする座標系への座標変換を行う。このとき、必要に応じて観測点のゆがみ補正が行われてよい。
探知データ統合部111は、その後、共通の座標空間(即ち、車両1を中心とする座標系)上で全ての粗測センサ20のデータを統合する。このとき、探知データ統合部111は、一の粗測センサ20の視野と他の粗測センサ20の視野とが重なる領域について、データの一致判定を行い、同一物体に係る観測点の統合を行う(例えば、観測点に係る値の平均値を求める、一方の観測点を削除する等)。尚、共通の座標空間は、車両1を中心とする座標系に代えて、例えば慣性座標系等の車両1の中心以外を原点とする座標系であってもよい。
この結果、探知データ統合部111により、車両1の周囲(例えば図6の網掛け部分に相当する領域)に係る統合観測データが生成される。探知データ統合部111は、統合観測データに時刻情報を付与して、該統合観測データを、動体検出部112及び粗測情報管理部114に逐次送信する。尚、上述したデータの統合方法は一例であり、これに限定されるものではない。つまり、データの統合方法には、既存の各種態様を適用可能である。
動体検出部112は、上記統合観測データから動体を検出する。具体的には、動体検出部112は、自車運動センサ40の出力に基づいて車両1の運動状態を検出する。そして、動体検出部112は、統合観測データから、車両1の運動に起因する要素を除いて、物体の動きを判定することにより動体を検出する。尚、動体の検出方法は、粗測センサ20の種別に応じて適宜決定されてよい。動体の検出方法には、既存の各種態様を適用可能であるので、その詳細についての説明は省略する。
動体検出部112は、検出された動体について特徴量の識別を行う。特徴量としては、例えば速度、加速度、移動方向、車両1に対する相対距離、大きさ、粗測センサ固有の情報(Radar Cross-Section:RCS、光反射強度、色、形状等)、等が挙げられる。動体検出部112は、また、統合観測データに含まれる物体のうち動体として検出されなかった物体を静止物として検出する。動体検出部112は、検出された静止物についても特徴量の識別を行う。特徴量としては、例えば車両1に対する相対距離、大きさ、粗測センサ固有の情報、等が挙げられる。動体検出部112は、動体及び静止物に係る検出結果を、脅威度判定部113に送信する。
ここで、車両1が、例えば図7に示すような道路を走行している場合を考える。図7において、歩行者511は、車両1の前方の横断歩道を渡ろうとしている。歩行者512は、車両1が走行している道路に沿って歩いている。対向車520は、車両1が走行している道路の対向車線を車両1に向かって走行している。車両1の前方の横断歩道付近に、横断歩道の存在を伝える道路標識532が設置されている。車両1が走行している道路の両側には街路樹が植わっている。尚、図7において、矢印は動体(例えば歩行者、車両等)の移動方向を示している。
粗測センサ20の角度分解能は比較的低いので、例えば図8に円形範囲で示すように、歩行者511等の各物体は比較的低い精度で観測される。このため、物体同士が比較的接近していると、それらが別々の物体として識別されないことがある。尚、図8において、比較的濃い網掛けが施された円形範囲は動体を示しており、比較的薄い網掛けが施された円形範囲は静止物を示している。
脅威度判定部113は、動体検出部112により検出された動体及び静止物の脅威度を判定する。脅威度判定部113は、動体の脅威度を判定する動体処理部113aと、静止物の脅威度を判定する静止物処理部113bとを有する。
脅威度判定部113における脅威度判定の具体例について図9及び図10を参照して説明する。
図9のフローチャートにおいて、探知データ統合部111により生成された統合観測データが動体検出部112に入力されると(ステップS101)、上述したように、動体検出部112において運動判定が行われる(即ち、物体の動きが判定される)(ステップS102)。その後、動体に係る検出結果は動体処理部113aに入力されるとともに、静止物に係る検出結果は静止物処理部113bに入力される。
動体処理部113aは、動体の特徴量から該動体(ここでは、以降“目標物”と称する)についての未来位置及び軌道(即ち、目標物が現在位置から未来位置まで移動する軌道)を予測する(ステップS103)。動体処理部113aは、ステップS103の処理と並行して又は相前後して、自車運動センサ40の出力に基づいて車両1の運動状態を検出する(例えば車両1の未来位置を予測する)。
動体処理部113aは、目標物の未来位置及び軌道と車両1の未来位置(更には、車両1が現在位置から未来位置まで移動する軌道)とに基づいて、目標部と車両1との衝突判定を行う(ステップS104)。このステップS104の処理において、動体処理部113aは、(i)車両1が目標物と衝突する、(ii)車両1と目標物とは衝突はしないが、その進路が交錯する、又は、(iii)車両1と目標物とは衝突も、その進路が交錯することもない、と判定する。つまり、動体処理部113aは、車両1と目標物との相対位置及び相対運動に基づいて上記衝突判定を行う。
図7に示す例では、動体処理部113aは、歩行者511について、(i)車両1が目標物と衝突する、又は、(ii)車両1と目標物とは衝突はしないが、その進路が交錯する、と判定する。他方で、動体処理部113aは、歩行者512及び対向車520各々について、(iii)車両1と目標物とは衝突も、その進路が交錯することもない、と判定する。
車両1が目標物と衝突すると判定された場合(ステップS104:衝突)、動体処理部113aは、目標物を高脅威目標と識別する(ステップS105)。動体処理部113aは更に、高脅威目標と識別された目標物の特徴量から、例えば車両1から該目標物までの距離を判定する(ステップS106)。その後、動体処理部113aは、高脅威目標と識別された複数の目標物を、車両1からの距離が近い順に配列する(ステップS107)。
車両1と目標物との進路が交錯すると判定された場合(ステップS104:進路交錯)、動体処理部113aは、目標物を中脅威目標と識別する(ステップS108)。動体処理部113aは更に、中脅威目標と識別された目標物の特徴量から、例えば車両1から該目標物までの距離を判定する(ステップS109)。その後、動体処理部113aは、中脅威目標と識別された複数の目標物を、車両1からの距離が近い順に配列する(ステップS110)。
車両1と目標物とは衝突も、その進路が交錯することもないと判定された場合(ステップS104:それ以外)、動体処理部113aは、目標物を低脅威目標と識別する(ステップS111)。動体処理部113aは更に、低脅威目標と識別された目標物の特徴量から、例えば車両1から該目標物までの距離を判定する(ステップS112)。その後、動体処理部113aは、低脅威目標と識別された複数の目標物を、車両1からの距離が近い順に配列する(ステップS113)。
動体処理部113aは、ステップS107、110及び113の処理の結果と、例えば図10に示す観測優先順位を規定するテーブルとに基づいて、各目標物の観測優先順位(図10に示すテーブル中の数値に相当)を判定(決定)する(ステップS114)。ステップS114の処理において、動体処理部113aは、観測優先順位の高い順に各目標物を再配列する。尚、図10に示すテーブルに記載されている数値は一例であり、これに限定されるものではない。
図7に示す例では、歩行者511は、高脅威目標又は中脅威目標と判定される。車両1から歩行者511までは比較的遠いので、歩行者511の観測優先順位は“6(高脅威目標)”又は“9(中脅威目標)”となる。歩行者512及び対向車520は、低脅威目標と判定される。歩行者512は、対向車520よりも車両1に近いので、歩行者512の観測優先順位は、例えば“11”となり、対向車520の観測優先順位は、例えば“12”となる。この場合、動体処理部113aは、観測優先順位に基づいて、歩行者511、歩行者512、対向車520の順に配列する。
静止物処理部113bは、静止物の特徴量から、例えば該静止物の位置、車両1からの距離、大きさ等を特定する。静止物処理部113bは、また、自車運動センサ40の出力に基づいて車両1の運動状態を検出する(例えば車両1の未来位置を予測する)。その後、静止物処理部113bは、静止物の位置等と車両1の未来位置とに基づいて、静止物と車両1との衝突判定を行う(ステップS115)。このステップS115の処理において、静止物処理部113bは、(i)車両1が静止物と衝突する、又は、(ii)車両1と静止物とは衝突しない、と判定する。つまり、静止物処理部113bは、車両1と静止物との相対位置及び相対運動に基づいて上記衝突判定を行う。
車両1が静止物と衝突すると判定された場合(ステップS115:衝突)、静止物処理部113bは、静止物を進路上静止物と識別する(ステップS116)。静止物処理部113bは更に、進路上静止物と識別された静止物の特徴量から、例えば車両1から該静止物までの距離を判定する(ステップS117)。その後、静止物処理部113bは、進路上静止物と識別された複数の静止物を、車両1からの距離が近い順に配列する(ステップS118)。
車両1と静止物とは衝突しないと判定された場合(ステップS115:それ以外)、静止物処理部113bは、静止物を脅威無と識別する。脅威無と識別された静止物は、以降の処理対象から外れる。
脅威度判定部113は、動体処理部113aの結果(即ち、ステップS114の処理の結果)と、静止物処理部113bの結果(即ち、ステップS118の処理の結果)とを統合する(ステップS119)。
具体的には、脅威度判定部113は、先ず、静止物処理部113bの結果と、例えば図10に示すテーブルとに基づいて、進路上静止物と識別された静止物の観測優先順位を判定する。このとき、脅威度判定部113は、図10に示すテーブルにおける「進路上静止物」に係る行の数値を参照して、進路上静止物と識別された静止物の観測優先順位を判定する。
脅威度判定部113は、次に、動体処理部113aの結果と、進路上静止物と識別された静止物の観測優先順位とに基づいて、観測優先順位の高い順に、動体及び静止物を再配列する。
脅威度判定部113は、ステップS119の処理の結果を、粗測脅威度情報として、粗測情報管理部114に送信する。この粗測脅威度情報には時刻情報が付与されている。粗測脅威度情報には、各物体(即ち、動体又は静止物)に係る観測優先順位の他に、例えば位置、距離、サイズ、形状、移動方向等が含まれていてよい。
本実施形態では、上述したように、車両1の運動状態(例えば未来位置)と、動体の軌道及び未来位置との関係、並びに、車両1の運動状態と静止物の未来位置との関係に基づいて、物体の脅威が判定される。そして、物体の脅威と、車両1から物体までの距離と、物体の種別(ここでは、動体か静止物か)に応じて、各物体の観測優先順位が決定される。つまり、センサシステム110では、車両1と各物体との相対位置及び相対運動、並びに、物体の種別から観測優先順位が決定される。尚、観測優先順位は、車両1と各物体との相対位置及び相対運動、並びに、物体の種別の少なくとも一つから決定されてよい。
粗測情報管理部114は、探知データ統合部111から統合観測データを受信するとともに、脅威度判定部113から粗測脅威度情報を受信する。粗測情報管理部114は、統合観測データ及び粗測脅威度情報を、夫々に付与されている時刻情報に基づいて、相互に関連付ける。この結果、観測データ及び粗測脅威度情報が蓄積される。
粗測情報管理部114は、粗測脅威度情報を、精測データ処理部12の精測目標決定・観測計画部121に送信する。このとき、粗測情報管理部114は、インターフェイス装置50を介して送信される車両制御装置60の要求に応じて、粗測情報管理部114から精測目標決定・観測計画部121に送信する情報を制限してもよいし、該送信する情報に加工を施してもよい。粗測情報管理部114は、統合観測データを観測データ統合・認識部13に送信する。
粗測情報管理部114は、インターフェイス装置50を介して送信される車両制御装置60の要求に応じて、粗測センサ20に係る処理パラメータを調整してよい。粗測情報管理部114は、該調整された処理パラメータを、粗測センサ観測制御部115に送信してよい。
粗測センサ観測制御部115は、粗測情報管理部114からの指示に従って、各粗測センサ20を制御する。このとき、粗測センサ観測制御部115は、上記調整された処理パラメータに基づいて、各粗測センサ20を制御してよい。
(精測データ処理部)
精測データ処理部12は、精測目標決定・観測計画部121(以降、適宜“観測計画部121”と称する)、精測センサ観測制御部122、探知データ受信部123及び精測情報管理部124を有する。
観測計画部121は、粗測情報管理部114から送信された粗測脅威度情報に基づいて、各精測センサ30の観測目標を決定するとともに、該観測目標の観測順序や観測範囲を設定する。
具体的には、観測計画部121は、各精測センサ30に係るセンサスペック情報(例えば観測方式、角度分解能等の観測性能、観測可能範囲(視野)、走査方式、走査速度、等)を考慮して、粗測脅威度情報により示される観測優先順位の高い(即ち、車両1への脅威が大きい)物体から順に観測されるように、観測計画を立てる。このとき、観測計画部121は、予め設定された観測間隔(例えば1フレーム期間)に、全ての物体の観測を完了できない場合、粗測脅威度情報により示される観測優先順位の低い物体を観測目標から除外してよい。
観測計画部121の動作について図11のフローチャートを参照して説明を加える。図11において、観測計画部121は、先ず、粗測脅威度情報を受信する(ステップS201)。観測計画部121は、粗測脅威度情報に含まれる観測優先順位に基づいて、観測目標の観測順序を設定する(ステップS202)。
観測計画部121は、上述したステップS202の処理と並行して、粗測脅威度情報に含まれる観測目標(即ち、動体又は静止物)に係る目標座標(即ち、観測目標の位置)に基づいて、各観測目標についての観測エリア(即ち、精測センサ30が観測すべき範囲)を判定する(ステップS203)。そして、観測計画部121は、該観測エリアに基づいて、精測センサ30の割付を行う(ステップS204)。尚、観測エリアは、上述した観測範囲の一例に相当する。
観測計画部121は、例えば図7に示す歩行者511についての観測エリアを、例えば図8に示す観測エリアA1と判定する。同様に、観測計画部121は、例えば図7に示す対向車520及び歩行者512についての観測エリアを、夫々、例えば図8に示す観測エリアA2及び観測エリアA3と判定する。観測計画部121は、観測エリアA1に、例えば車両1の左前方を観測可能な精測センサ30を割り付ける。また、観測計画部121は、観測エリアA2及びA3に、例えば車両1の右前方を観測可能な精測センサ30を割り付ける。
観測計画部121は、上述したステップS202乃至S204の処理と並行して、粗測脅威度情報に含まれる観測目標に係る目標サイズ及び距離に基づいて、観測目標を観測するための観測範囲を判定する(ステップS205)。観測計画部121は、ステップS205の処理の結果から各精測センサ30の観測範囲を設定する(ステップS206)。
観測計画部121は、上述したステップS202乃至S206の処理と並行して、精測センサ30の分解能を判定する(ステップS207)。ステップS207の処理では、観測計画部121は、各精測センサ30の角度分解能を取得してよい。
ところで、精測センサ30の角度分解能が、例えば0.2度の場合、例えば、車両1の前方30mでの距離分解能は約10cmであるのに対し、車両1の前方10mでの距離分解能は約3.5cmである。車両1の前方10mに観測目標が存在している場合に、約3.5cmという距離分解能で観測目標が観測された結果に係る観測精度が、車両制御上要求される観測精度よりも高いことがある。このとき、分解能をあえて低下させることにより、観測に要する時間を抑制してもよい。つまり、観測計画部121は、ステップS207の処理において、例えば車両制御上要求される精測センサ30の分解能を判定してよい。
次に、観測計画部121は、ステップS207の処理において判定された分解能と、粗測脅威度情報に含まれる観測目標の形状及び運動情報(例えば移動方向等)とに基づいて、走査ステップ、走査パターン及びビームサイズを設定する(ステップS208)。
走査パターンとしては、例えば図12(a)に示す、ラスタースキャンのような走査パターンや、例えば図12(b)に示す、観測目標の外形形状に沿ってビームスポットsが移動するような走査パターンが挙げられる。尚、ビームサイズ(例えば観測目標の位置におけるビームスポットのサイズ)は、観測目標のサイズの、例えば10分の1から100分の1であることが好ましい。
図11に戻り、観測計画部121は、ステップS204、S206及びS208の処理の結果に基づいて、各精測センサ30の観測パラメータを決定する(ステップS209)。その後、観測計画部121は、ステップS202及びS209の処理の結果と、予め設定された観測許容時間とに基づいて、観測許容時間内に観測可能な目標数を設定する(ステップS210)。尚、観測許容時間は、データ更新周期の1周期に相当する時間であってよい。例えば1秒間に50回データが更新される場合、データ更新周期は20ミリ秒となる。
その後、観測計画部121は、ステップS210の処理の結果に基づいて、精測センサ30により実際に観測する観測目標を決定して、観測計画を生成する(ステップS211)。このように、センサシステム110では、観測優先順位の高い観測目標(物体)が、観測優先順位の低い観測目標に優先して観測される。言い換えれば、センサシステム110では、観測優先順位の高い観測目標が、観測優先順位の低い観測目標に優先して精測センサ30の観測エリアに含まれるように、該観測エリアが決定される。
ところで、例えば図8において、観測エリアA1には、歩行者511(図7参照)に対応する円形範囲に加えて、道路標識532(図7参照)に対応する円形範囲も含まれる。この場合、歩行者511及び道路標識532が同時に観測されることで、観測効率が向上することがある。
そこで、観測計画部121は、例えば、上述したステップS210とステップS211との間に、図13に示す動作を行ってもよい。即ち、観測計画部121は、観測優先順位の高い高優先度目標周辺の他の観測目標の有無を判定する(ステップS301)。このとき、「周辺」をどのような範囲にするかは、例えば精測センサ30等の仕様に応じて適宜決定されてよい。
観測計画部121は、ステップS301の処理の結果に基づいて、他の観測目標があるか否かを判定する(ステップS302)。ステップS302の処理において、他の観測目標があると判定された場合(ステップS302:Yes)、観測計画部121は、ステップS301の処理において基準となった高優先度目標と、他の観測目標との同時観測が可能であるか否かを判定する(ステップS303)。
ステップS303の処理において、同時観測が可能であると判定された場合(ステップS303:Yes)、観測計画部121は、同時観測に要する時間を判定する(ステップS304)。その後、観測計画部121は、ステップS304の処理の結果(即ち、同時観測に要する時間)に基づいて、上記高優先度目標と上記他の観測目標との同時観測が可能であるか否かを再度判定する(ステップS305)。
ステップS305の処理において、同時観測が可能であると判定された場合(ステップS305:Yes)、観測計画部121は、上記他の観測目標が上記高優先度目標と同時観測されるように観測順序を入れ替える(ステップS306)。
ステップS302の処理において、他の観測目標がないと判定された場合(ステップS302:No)、ステップS303の処理において、同時観測が可能でないと判定された場合(ステップS303:No)、又は、ステップS305の処理において、同時観測が可能でないと判定された場合(ステップS305:No)、観測計画部121は、観測順序を入れ替えることなく、図13に示す動作を終了する(ステップS307)。
観測計画部121は、上述のように生成された観測計画を、精測センサ観測制御部122及び精測情報管理部124に送信する。
精測センサ観測制御部122は、観測計画部121から受信した観測計画に従って、各精測センサ30の制御部に対して観測指示を送信する。各精測センサ30の制御部は、精測センサ観測制御部122から受信した観測指示に従って、例えば観測範囲、走査パターン、走査ステップ、ビームサイズ等を設定するための情報を、走査部及び観測部に送信する。尚、各精測センサ30の制御部の動作は、各精測センサ30の種別や仕様に応じて異なっていてよい。
探知データ受信部123は、複数の精測センサ30各々から観測データを受信する。探知データ受信部123は、自車運動センサ40の出力に基づいて車両1の運動状態を検出する。そして、探知データ受信部123は、上記観測データから、車両1の運動に起因する要素を除去する。この結果、観測目標の移動に起因する要素のみを含む観測データである精測情報が生成される。探知データ受信部123は、該精測情報を、精測情報管理部124に送信する。
精測センサ30がLiDAR又はレーダである場合、探知データ受信部123は、上記観測データとしての点群データに対して、精測センサ30の特徴に合わせた処理を施してもよい。具体的には、精測センサ30がLiDARである場合、探知データ受信部123は、セカンドエコーを利用したエッジ検出を行ってよい。或いは、精測センサ30がレーダである場合、探知データ受信部123は、ドップラーシフトによる観測目標の分離を行ってよい。
精測情報管理部124は、観測計画部121から受信した観測計画と、探知データ受信部123から受信した精測情報(即ち、観測計画に従った各精測センサ30の観測結果)とを関連付ける。精測情報管理部124は、互いに関連付けられた観測計画及び精測情報を、観測データ統合・認識部13に送信する。
(観測データ統合・認識部)
観測データ統合・認識部13は、粗測管理情報管理部114から受信した統合観測データと、精測情報管理部124から受信した観測計画及び精測情報とを統合して、車両1周辺の認識マップを生成する。観測データ統合・認識部13は、該認識マップを参照して、例えば高脅威目標に係る観測結果を、インターフェイス装置40を介して、車両制御装置50に送信する。観測データ統合・認識部13は、車両制御装置50からの要求に応じて、粗測センサ20による観測結果(例えば、上記統合観測データ)や、粗測センサ20による観測結果に、精測センサ30による観測結果を埋め込んだマップ(例えば、上記認識マップ)等を、車両制御装置50に送信してよい。
観測データ統合・認識部13は、認識マップを蓄積していてよい。この場合、観測データ統合・認識部13は、車両制御装置50からの要求に応じて、過去の認識マップ、或いは、過去の認識マップに含まれる情報の一部を、車両制御装置50に送信してよい。
(技術的効果)
公道を走行する車両の周囲には、複数の物体が存在している。そして、該複数の物体が互いに近接していることが多い。このとき、角度分解能の比較的低いセンサによる観測結果では、互いに近接する2つ(又は3以上)の物体が、単一の物体として観測される可能性がある。つまり、角度分解能が比較的低いが故に、センサが、互いに近接する2つ(又は3以上)の物体を、分離して認識できない可能性がある。
特に、車両が自動運転により走行しているときに、センサの視野内において、例えば、歩行者等の動体と、街路樹や植え込み等の静止物とが重なっている場合や、互いに異なる方向に進む2つの動体が重なっている場合に、動体が他から分離して認識されにくいことは、車両制御上問題となる。
他方で、角度分解能の比較的高いセンサによれば、互いに近接する2つ(又は3以上)の物体を、分離して認識できることが期待できる。しかしながら、角度分解能が比較的高いが故に、観測に要する時間が比較的長くなってしまう。
具体的な数値を挙げて説明を加える。例えば時速60kmで走行している車両の停止距離は40m程度である。安全性の観点からは、例えば車両の前方50mに存在する歩行者を認識可能であることが要求される。車両の前方50mに存在する歩行者を認識可能な角度分解能は、例えば0.2度である。このとき、車両の前方50mでの距離分解能は約18cmである。
1回の観測に要する時間(即ち、センサの観測可能範囲全体の観測に要する時間)が、例えば20ミリ秒である場合、1回の観測の間に、時速60kmで走行する車両は約30cm移動する。つまり、1回の観測の間に、観測の基準となるセンサの位置が約30cmずれることになる。上述した車両の前方50mでの距離分解能の値に鑑みれば、この約30cmのずれが、センサの観測結果に与える影響は比較的大きいと考えらえる。従って、移動する車両の周囲全てを、角度分解能の比較的高いセンサだけで観測することは現実的ではない。
しかるにセンサシステム110では、先ず、粗測センサ20による観測結果(統合観測データ)に基づいて、例えば高脅威目標が存在するおおよその位置に対して精測センサ30の観測エリアが設定される(即ち、精測センサ30が観測すべき範囲が限定される)。そして、該設定された観測エリアの観測が精測センサ30により行われる。このため、センサシステム110によれば、例えば高脅威目標等の車両1の走行に影響を及ぼす可能性のある目標についてだけ精測センサ30により観測を行うことにより、1回の観測に要する時間を抑制しつつ、比較的高精度な観測結果を取得することができる。従って、センサシステム110によれば、1回の観測に要する時間を抑制しつつ、例えば互いに近接する2つの物体を分離して認識することができる。
<変形例>
(第1変形例)
脅威度判定部113は、静止物についての観測優先順位を決定するときに、図9のフローチャートに示す動作に代えて又は加えて、例えば道路案内標識等の車両1の上方に位置する静止物と、車両1が走っている道路の路面上に位置する静止物とを識別する。そして、脅威度判定部113は、路面上に位置する静止物だけを高脅威目標に設定してよい(このとき、車両1の上方に位置する静止物は、観測目標から除外されてよい)。つまり、脅威度判定部113は、路面上に位置する静止物の観測優先順位を、車両1の上方に位置する静止物の観測優先順位より高くしてよい。
(第2変形例)
脅威度判定部113の動体処理部113aは、統合観測データから歩行者に相当する物体を検出した場合、歩行者に相当する物体の未来位置等から、該物体が車両1の進路上に進入すると推定(判定)された場合に、該物体を高脅威目標に設定してよい。動体処理部113aは、特に、例えば車両1に係る走行計画、車両1が右折専用レーンを走行していること等から車両1の右折又は左折を検出した場合に、右折又は左折に伴う車両1の軌道を推定してよい。そして、動体処理部113aは、該推定された軌道に沿って走行する車両1の進路上に、歩行者に相当する物体が進入すると推定された場合に、該物体を高脅威目標に設定してよい。この結果、脅威度判定部113により、歩行者と識別された物体の観測優先順位は比較的高くなる。
このように構成すれば、自車運動センサ40により予め検出することが難しい車両1の進行方向の大きな変化を、予め推定することができ、例えば現時点では車両1の進路上に進入しないが、車両1が右折又は左折した場合に該車両1の進路上に進入する歩行者に相当する物体について精測センサ30による観測を行うことができる。
(第3変形例)
脅威度判定部113の動体処理部113aは、統合観測データに含まれる、粗測センサ20としてのレーダセンサによる観測結果(即ち、夫々複数の反射点から構成される複数の物標に関する情報である物標情報)から、RCS(反射断面積)が比較的低く、且つ、速度が比較的低い動体に相当する物標を検出した場合、該物標を歩行者と識別してよい。ここで、歩行者は、車両とは異なり急に進路を変更することがある。このため、動体処理部113aは、歩行者と識別された物標を、その位置等にかかわらず、高脅威目標に設定してよい。この結果、脅威度判定部113により、歩行者と識別された物標の観測優先順位は比較的高くなる。
尚、RCSが比較的低いか否かは、RCSが第1所定値以下であるか否かを判定することにより決定されてよい。ここで、第1所定値は、実験的若しくは経験的に又はシミュレーションによって、動体が歩行者である場合に取り得るRCSの範囲を求めて、該求められた範囲に基づいて決定すればよい。また、動体の速度が比較的低いか否かは、速度が第2所定値以下であるか否かを判定することにより決定されてよい。ここで、第2所定値は、実験的若しくは経験的に又はシミュレーションによって、動体が歩行者である場合に取り得る速度範囲を求めて、該求められた速度範囲に基づいて決定すればよい。
(第4変形例)
図2及び図3に示すように、粗測センサ20の視野と、精測センサ30の視野とは異なっている。車両1が、例えば見通しの悪い細い道を走行している場合、第1時点において、粗測センサ20の視野に含まれるが、精測センサ30の視野に含まれない高脅威目標が存在することがある。この場合、精測データ処理部12の観測計画部121は、第1時点よりも後の第2時点において、上記高脅威目標が精測センサ30の視野に入ったときに、該高脅威目標が、精測センサ30の観測エリアに含まれるように、該観測エリアを決定してよい。
(第5変形例)
脅威度判定部113は、動体処理部113aによる処理結果に加えて、地図情報を用いて各動体についての観測優先順位を決定してよい。例えば交差点近傍に位置する動体は、それ以外に位置する動体に比べて、その進路を急に変更する可能性が高い(例えば、歩行者であれば道路を横断するため、車両であれば右折又は左折するため)。このため、車両1から動体までの距離だけでなく、地図情報を用いれば、動体についての観測優先順位をより適切に決定することができる。
(第6変形例)
上述した実施形態では、粗測センサ20により観測された複数の物体から精測センサ30の観測対象が決定される。しかしながら、粗測センサ20により物体が観測されなかった領域を精測センサ30が観測してもよい。
具体的には、粗測データ処理部11は、例えば粗測センサ20としてのカメラにより撮像された車両1の前方の画像から、車両1の前方の車線に関する情報である車線情報を取得する。粗測データ処理部11は、該車線情報を観測計画部121に送信する。観測計画部121は、受信した車線情報から車両1の前方に右折専用車線が存在していることを検出し、且つ、例えば自車運動センサ40の出力に基づく車両1の運動状態等から、車両1が右折専用車線に進入したことを検出した場合に、右折する車両1が通過する領域が、精測センサ30の観測エリアに含まれるように、該観測エリアを決定してよい。
また、粗測データ処理部11は、例えば粗測センサ20としてのカメラにより撮像された車両1の前方の画像から、車両1の前方の道路に関する情報である道路情報を取得する。粗測データ処理部11は、該道路情報を観測計画部121に送信する。観測計画部121は、受信した道路情報から車両1の前方において車線数が減少していることを検出した場合、車線数が減少する地点である合流ポイントが、精測センサ30の観測エリアに含まれるように、該観測エリアを決定してよい。
また、粗測データ処理部11は、例えば粗測センサ20としてのカメラにより撮像された画像から、車両1の周囲に存在する道路標識及び道路標示の少なくとも一方に関する情報である標識情報を取得する。粗測データ処理部11は、該標識情報を観測計画部121に送信する。観測計画部121は、標識情報に基づいて精測センサ30の観測エリアを決定してよい。
図7に示す例において、粗測センサ20により、道路標示531及び道路標識532の少なくとも一方が観測されたものとする。道路標示531及び道路標識532はいずれも、車両1の前方に横断歩道が存在することを示している。この場合、観測計画部121は、横断歩道が精測センサ30の観測エリアに含まれるように、該観測エリアを決定してよい。
上記のように構成すれば、車両1の進路上に進入する動体が比較的多い領域についての比較的高精度な観測情報を取得することができる。
<応用例>
(第1応用例)
センサシステム110は、単一の車両に限らず、例えば互いに通信を行うことにより隊列走行する複数の車両にも適用可能である。この場合、隊列の先頭を走行する先頭車両にのみ粗測センサ20を搭載し、該先頭車両に追従する他の車両には粗測センサ20が搭載されなくてよい。つまり、他の車両は、先頭車両に搭載された粗測センサ20による観測結果を先頭車両から受信することにより、上述したセンサシステム110と同様の動作を実現してよい。
(第2応用例)
センサシステム110は、車両に限らず、例えばドローン等の無人移動体にも適用可能である。また、センサシステム110は、編隊又は隊列を組んで移動する複数の無人移動体にも適用可能である。この場合、複数の無人移動体は、粗測センサ20のみを搭載した無人移動体と、精測センサ30のみを搭載した無人移動体とを含んでよい。また、複数の無人移動体は、センサシステム110のうち制御装置10に相当する機能のみを有する無人移動体を含んでよい。つまり、複数の無人移動体全体で、一のセンサシステム110が実現されてよい。
以上に説明した実施形態及び変形例から導き出される発明の各種態様を以下に説明する。
発明の一態様に係る車載センサシステムは、自車両の周囲の状況を検出する第1センサと、前記第1のセンサより角度分解能の高い第2センサと、を備える車載センサシステムであって、前記第1センサによる検出結果を取得する取得手段と、前記検出結果に基づいて、前記自車両の周囲のうち前記第2センサが観測すべき観測範囲を決定する範囲決定手段と、を備えるというものである。上述の実施形態においては、粗測センサ20が第1センサの一例に相当し、精測センサ30が第2センサの一例に相当し、探知データ統合部111が取得手段の一例に相当し、精測目標決定・観測計画部121が範囲決定手段の一例に相当する。
当該車載センサシステムの一態様では、前記取得手段は、前記検出結果として、前記自車両の周囲に存在する複数の障害物に関する情報である障害物情報を取得し、当該車載センサシステムは、前記障害物情報に基づく前記複数の障害物各々と前記自車両との相対位置及び相対運動、並びに、前記複数の障害物各々の種別の少なくとも一つから、前記複数の障害物各々について検出優先度を決定する優先度決定手段を備え、前記決定手段は、前記検出優先度の高い障害物が、前記検出優先度の低い障害物に優先して前記観測範囲に含まれるように、前記観測範囲を決定する。
「相対位置」は、自車両をその上方から平面的に見た場合の(即ち、2次元座標系での)自車両と障害物との相対的な位置関係に限らず、高さ方向も含めた3次元座標系での自車両と障害物との相対的な位置関係も含む概念である。「相対位置から検出優先度を決定」とは、相対位置そのものから検出優先度が決定されることに限らず、相対位置から導かれる物理量又はパラメータ(例えば自車両と障害物との間の距離等)から検出優先度が決定されることも含んでよい。尚、上述の実施形態においては、脅威度判定部113が優先度決定手段の一例に相当し、観測優先順位が検出優先度の一例に相当する。
優先度決定手段を備える態様では、前記複数の障害物に、前記自車両の上方に位置する第1静止物と、前記自車両が走行している道路の路面上に位置する第2静止物とが含まれている場合、前記優先度決定手段は、前記第1静止物と前記自車両との相対位置、及び、前記第2静止物と前記自車両との相対位置から、前記第1静止物についての検出優先度よりも、前記第2静止物についての検出優先度を高くしてよい。
優先度決定手段を備える態様では、前記複数の障害物に歩行者が含まれている場合、前記優先度決定手段は、前記歩行者と前記自車両との相対運動から、前記歩行者が前記自車両の進路上に進入すると推定された場合は、前記歩行者が前記自車両の進路上に進入すると推定されない場合に比べて、前記歩行者についての検出優先度を高くしてよい。
優先度決定手段を備える態様では、前記第1センサは、レーダセンサであり、前記取得手段は、前記障害物情報として、夫々複数の反射点から構成される複数の物標に関する情報である物標情報を取得し、前記複数の物標に、動体に対応する物標であって、その速度が所定速度以下であり、且つ、その反射断面積が所定断面積以下の物標である特定物標が含まれている場合、前記優先度決定手段は、前記複数の物標のうち前記特定物標以外の物標の少なくとも一部に比べて、前記特定物標についての検出優先度を高くしてよい。上述した実施形態においては、歩行者と識別された物標が、特定物標の一例に相当する。
優先度決定手段を備える態様では、前記自車両が停止している場合、前記第2センサの観測可能範囲の少なくとも一部は、前記第1センサの検出範囲と異なっており、前記範囲決定手段は、第1時点において、前記検出優先度の高い障害物が、前記観測可能範囲外にある場合、前記第1時点よりも後の第2時点において、前記検出優先度の高い障害物が前記観測可能範囲に入ったときに、前記検出優先度の高い障害物が前記観測範囲に含まれるように、前記観測範囲を決定してよい。上述の実施形態においては、粗測センサ20の視野が、第1センサの検出範囲の一例に相当し、精測センサ30の視野が、第2センサの観測可能範囲の一例に相当する。
優先度決定手段を備える態様では、前記優先度決定手段は、前記複数の障害物のうち少なくとも一部を含む領域に対応する地図情報を更に用いて、前記複数の障害物各々について検出優先度を決定してよい。
当該車載センサシステムの他の態様では、前記取得手段は、前記検出結果として、前記自車両の前方の車線に関する情報である車線情報を取得し、前記範囲決定手段は、前記車線情報から前記自車両の前方に右折専用車線が存在していることを検出し、且つ、前記自車両が前記右折専用車線に進入したことを検出した場合、右折する前記自車両が通過する領域が前記観測範囲に含まれるように、前記観測範囲を決定する。
当該車載センサシステムの他の態様では、前記取得手段は、前記検出結果として、前記自車両の前方の道路に関する情報である道路情報を取得し、前記範囲決定手段は、前記道路情報から前記自車両の前方において車線数が減少していることを検出した場合、前記自車両の前方において車線数が減少する地点である合流ポイントが前記観測範囲に含まれるように、前記観測範囲を決定する。
当該車載センサシステムの他の態様では、前記取得手段は、前記検出結果として、前記自車両の周囲に存在する道路標識及び道路標示の少なくとも一方に関する情報である標識情報を取得し、前記範囲決定手段は、前記標識情報に基づいて前記観測範囲を決定する。
当該車載センサシステムの他の態様では、前記第2センサは、ペンシルビームを出射可能なセンサであり、当該車載センサシステムは、前記ペンシルビームの出射方向を制御する制御手段を備え、前記取得手段は、前記検出結果として、前記自車両の周囲に存在する障害物の形状に関する情報である形状情報を取得し、前記範囲決定手段は、前記形状情報に基づいて、前記観測範囲を決定し、前記制御手段は、前記形状情報に基づいて、前記ペンシルビームが前記障害物の外形形状に沿って走査されるように、前記出射方向を制御する。
本発明は、上述した実施形態に限られるものではなく、特許請求の範囲及び明細書全体から読み取れる発明の要旨或いは思想に反しない範囲で適宜変更可能であり、そのような変更を伴う車載センサシステムもまた本発明の技術的範囲に含まれるものである。
1…車両、10…中央処理・制御装置、11…粗測データ処理部、12…精測データ処理部、13…観測データ統合・確認部、20…粗測センサ、30…精測センサ、40…自車運動センサ、60…車両制御装置、100、110…センサシステム、111…探知データ統合部、112…動体検出部、113…脅威度判定部、114…粗測情報管理部、115…粗測センサ観測制御部、121…精測目標決定・観測計画部、122…精測センサ観測制御部、123…探知データ受信部、124…精測情報管理部

Claims (11)

  1. 自車両の周囲の状況を検出する第1センサと、前記第1センサより角度分解能の高い第2センサと、を備える車載センサシステムであって、
    前記第1センサによる検出結果を取得する取得手段と、
    前記検出結果に基づいて、前記自車両の周囲のうち前記第2センサが観測すべき観測範囲を決定する範囲決定手段と、
    を備えることを特徴とする車載センサシステム。
  2. 前記取得手段は、前記検出結果として、前記自車両の周囲に存在する複数の障害物に関する情報である障害物情報を取得し、
    当該車載センサシステムは、前記障害物情報に基づく前記複数の障害物各々と前記自車両との相対位置及び相対運動、並びに、前記複数の障害物各々の種別の少なくとも一つから、前記複数の障害物各々について検出優先度を決定する優先度決定手段を備え、
    前記範囲決定手段は、前記検出優先度の高い障害物が、前記検出優先度の低い障害物に優先して前記観測範囲に含まれるように、前記観測範囲を決定する
    ことを特徴とする請求項1に記載の車載センサシステム。
  3. 前記複数の障害物に、前記自車両の上方に位置する第1静止物と、前記自車両が走行している道路の路面上に位置する第2静止物とが含まれている場合、前記優先度決定手段は、前記第1静止物についての検出優先度よりも、前記第2静止物についての検出優先度を高くすることを特徴とする請求項2に記載の車載センサシステム。
  4. 前記複数の障害物に歩行者が含まれている場合、前記優先度決定手段は、前記歩行者と前記自車両との相対運動から、前記歩行者が前記自車両の進路上に進入すると推定された場合は、前記歩行者が前記自車両の進路上に進入すると推定されない場合に比べて、前記歩行者についての検出優先度を高くすることを特徴とする請求項2又は3に記載の車載センサシステム。
  5. 前記第1センサは、レーダセンサであり、
    前記取得手段は、前記障害物情報として、夫々複数の反射点から構成される複数の物標に関する情報である物標情報を取得し、
    前記複数の物標に、動体に対応する物標であって、その速度が所定速度以下であり、且つ、その反射断面積が所定断面積以下の物標である特定物標が含まれている場合、前記優先度決定手段は、前記複数の物標のうち前記特定物標以外の物標の少なくとも一部に比べて、前記特定物標についての検出優先度を高くする
    ことを特徴とする請求項2乃至4のいずれか一項に記載の車載センサシステム。
  6. 前記自車両が停止している場合、前記第2センサの観測可能範囲の少なくとも一部は、前記第1センサの検出範囲と異なっており、
    前記範囲決定手段は、第1時点において、前記検出優先度の高い障害物が、前記観測可能範囲外にある場合、前記第1時点よりも後の第2時点において、前記検出優先度の高い障害物が前記観測可能範囲に入ったときに、前記検出優先度の高い障害物が前記観測範囲に含まれるように、前記観測範囲を決定する
    ことを特徴とする請求項2乃至5のいずれか一項に記載の車載センサシステム。
  7. 前記優先度決定手段は、前記複数の障害物のうち少なくとも一部を含む領域に対応する地図情報を更に用いて、前記複数の障害物各々について検出優先度を決定することを特徴とする請求項2乃至6のいずれか一項に記載の車載センサシステム。
  8. 前記取得手段は、前記検出結果として、前記自車両の前方の車線に関する情報である車線情報を取得し、
    前記範囲決定手段は、前記車線情報から前記自車両の前方に右折専用車線が存在していることを検出し、且つ、前記自車両が前記右折専用車線に進入したことを検出した場合、右折する前記自車両が通過する領域が前記観測範囲に含まれるように、前記観測範囲を決定する
    ことを特徴とする請求項1乃至7のいずれか一項に記載の車載センサシステム。
  9. 前記取得手段は、前記検出結果として、前記自車両の前方の道路に関する情報である道路情報を取得し、
    前記範囲決定手段は、前記道路情報から前記自車両の前方において車線数が減少していることを検出した場合、前記自車両の前方において車線数が減少する地点である合流ポイントが前記観測範囲に含まれるように、前記観測範囲を決定する
    ことを特徴とする請求項1乃至8のいずれか一項に記載の車載センサシステム。
  10. 前記取得手段は、前記検出結果として、前記自車両の周囲に存在する道路標識及び道路標示の少なくとも一方に関する情報である標識情報を取得し、
    前記範囲決定手段は、前記標識情報に基づいて前記観測範囲を決定する
    ことを特徴とする請求項1乃至9のいずれか一項に記載の車載センサシステム。
  11. 前記第2センサは、ペンシルビームを出射可能なセンサであり、
    当該車載センサシステムは、前記ペンシルビームの出射方向を制御する制御手段を備え、
    前記取得手段は、前記検出結果として、前記自車両の周囲に存在する障害物の形状に関する情報である形状情報を取得し、
    前記範囲決定手段は、前記形状情報に基づいて、前記観測範囲を決定し、
    前記制御手段は、前記形状情報に基づいて、前記ペンシルビームが前記障害物の外形形状に沿って走査されるように、前記出射方向を制御する
    ことを特徴とする請求項1乃至10のいずれか一項に記載の車載センサシステム。
JP2020071587A 2020-04-13 2020-04-13 車載センサシステム Active JP7327257B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2020071587A JP7327257B2 (ja) 2020-04-13 2020-04-13 車載センサシステム
RU2021107625A RU2763800C1 (ru) 2020-04-13 2021-03-23 Бортовая сенсорная система
KR1020210038805A KR20210127088A (ko) 2020-04-13 2021-03-25 차량 탑재 센서 시스템
EP21166856.1A EP3896485A1 (en) 2020-04-13 2021-04-02 On-board sensor system
US17/222,115 US11780436B2 (en) 2020-04-13 2021-04-05 On-board sensor system
CN202110374464.9A CN113538966B (zh) 2020-04-13 2021-04-07 车载传感器系统
BR102021006989-9A BR102021006989A2 (pt) 2020-04-13 2021-04-12 Sistema de sensor a bordo

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020071587A JP7327257B2 (ja) 2020-04-13 2020-04-13 車載センサシステム

Publications (2)

Publication Number Publication Date
JP2021168065A JP2021168065A (ja) 2021-10-21
JP7327257B2 true JP7327257B2 (ja) 2023-08-16

Family

ID=75377691

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020071587A Active JP7327257B2 (ja) 2020-04-13 2020-04-13 車載センサシステム

Country Status (7)

Country Link
US (1) US11780436B2 (ja)
EP (1) EP3896485A1 (ja)
JP (1) JP7327257B2 (ja)
KR (1) KR20210127088A (ja)
CN (1) CN113538966B (ja)
BR (1) BR102021006989A2 (ja)
RU (1) RU2763800C1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230334966A1 (en) * 2022-04-14 2023-10-19 Iqbal Khan Ullah Intelligent security camera system
US20230408684A1 (en) * 2022-06-20 2023-12-21 Honeywell International Inc. Integrated surveillance radar system
JP2024035974A (ja) * 2022-09-05 2024-03-15 日立Astemo株式会社 車両制御装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222538A (ja) 2004-01-26 2005-08-18 Ibeo Automobile Sensor Gmbh 車道上のマークの認識方法
JP2009032067A (ja) 2007-07-27 2009-02-12 Mitsubishi Electric Corp 情報提供車載装置
JP2011145812A (ja) 2010-01-13 2011-07-28 Ihi Corp レーザセンサ及びこれを用いた検出対象判定方法
JP2011150633A (ja) 2010-01-25 2011-08-04 Toyota Central R&D Labs Inc 対象物検出装置及びプログラム
JP2018021776A (ja) 2016-08-02 2018-02-08 株式会社リコー 視差演算システム、移動体及びプログラム
WO2020039840A1 (ja) 2018-08-23 2020-02-27 日立オートモティブシステムズ株式会社 レーダ処理装置
JP2020035439A (ja) 2018-08-23 2020-03-05 株式会社Jvcケンウッド 画像処理装置、警告システム、画像処理方法及びプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10246778A (ja) 1997-03-04 1998-09-14 Mitsubishi Electric Corp 目標探知追尾装置
JP4016826B2 (ja) * 2002-12-10 2007-12-05 株式会社デンソー 物標識別方法及び装置、プログラム
EP1785743B1 (en) * 2005-11-09 2011-10-05 Saab Ab Multi-Sensor System
US8050863B2 (en) * 2006-03-16 2011-11-01 Gray & Company, Inc. Navigation and control system for autonomous vehicles
JP5634046B2 (ja) * 2009-09-25 2014-12-03 クラリオン株式会社 センサコントローラ、ナビゲーション装置、センサ制御方法
JP5558440B2 (ja) * 2011-09-08 2014-07-23 三菱電機株式会社 物体検出装置
US9383753B1 (en) * 2012-09-26 2016-07-05 Google Inc. Wide-view LIDAR with areas of special attention
US9437111B2 (en) * 2014-05-30 2016-09-06 Ford Global Technologies, Llc Boundary detection system
US9625582B2 (en) * 2015-03-25 2017-04-18 Google Inc. Vehicle with multiple light detection and ranging devices (LIDARs)
JP6473685B2 (ja) * 2015-11-19 2019-02-20 日立建機株式会社 車両制御装置及び作業機械
EP3223034B1 (en) * 2016-03-16 2022-07-20 Ricoh Company, Ltd. Object detection apparatus and moveable apparatus
JP6223504B1 (ja) 2016-05-18 2017-11-01 三菱電機株式会社 レーダ装置およびこれを用いたセンサフュージョン装置
JP6384534B2 (ja) * 2016-09-29 2018-09-05 マツダ株式会社 車両用物標検出システム
CN110691990B (zh) * 2017-06-02 2021-10-26 华为技术有限公司 一种障碍物检测方法及设备
JP6525406B1 (ja) 2017-11-02 2019-06-05 マツダ株式会社 車両制御装置
US10884115B2 (en) * 2018-03-09 2021-01-05 Waymo Llc Tailoring sensor emission power to map, vehicle state, and environment

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222538A (ja) 2004-01-26 2005-08-18 Ibeo Automobile Sensor Gmbh 車道上のマークの認識方法
JP2009032067A (ja) 2007-07-27 2009-02-12 Mitsubishi Electric Corp 情報提供車載装置
JP2011145812A (ja) 2010-01-13 2011-07-28 Ihi Corp レーザセンサ及びこれを用いた検出対象判定方法
JP2011150633A (ja) 2010-01-25 2011-08-04 Toyota Central R&D Labs Inc 対象物検出装置及びプログラム
JP2018021776A (ja) 2016-08-02 2018-02-08 株式会社リコー 視差演算システム、移動体及びプログラム
WO2020039840A1 (ja) 2018-08-23 2020-02-27 日立オートモティブシステムズ株式会社 レーダ処理装置
JP2020035439A (ja) 2018-08-23 2020-03-05 株式会社Jvcケンウッド 画像処理装置、警告システム、画像処理方法及びプログラム

Also Published As

Publication number Publication date
EP3896485A1 (en) 2021-10-20
BR102021006989A2 (pt) 2021-10-26
US11780436B2 (en) 2023-10-10
CN113538966B (zh) 2023-02-28
RU2763800C1 (ru) 2022-01-11
KR20210127088A (ko) 2021-10-21
US20210316723A1 (en) 2021-10-14
CN113538966A (zh) 2021-10-22
JP2021168065A (ja) 2021-10-21

Similar Documents

Publication Publication Date Title
JP7327257B2 (ja) 車載センサシステム
US9759812B2 (en) System and methods for intersection positioning
JP5206752B2 (ja) 走行環境認識装置
JP4862036B2 (ja) 自動車の制御装置及び制御方法
US11898855B2 (en) Assistance control system that prioritizes route candidates based on unsuitable sections thereof
US11157751B2 (en) Traffic guide object recognition device, traffic guide object recognition method, and storage medium
US10852426B2 (en) System and method of utilizing a LIDAR digital map to improve automatic driving
US10325163B2 (en) Vehicle vision
JPH10300493A (ja) 車両位置推定装置と車両位置推定方法、および、走行車線維持装置と走行車線維持方法
US10591923B2 (en) Method and apparatus for parallel illumination by a VCSEL array
US11828610B2 (en) Roadway information detection sensor device/system for autonomous vehicles
WO2020145053A1 (ja) 走行車線推定装置、走行車線推定方法、制御プログラム、およびコンピュータ読み出し可能持続的記録媒体
US20200174492A1 (en) Autonomous driving method and system using road view or aerial view map information
US11983935B2 (en) Estimating auto exposure values of camera by prioritizing object of interest based on contextual inputs from 3D maps
US10836385B2 (en) Lane keeping assistance system
JP2021076422A (ja) 物体認識方法及び物体認識装置
WO2017013692A1 (ja) 走行車線判定装置及び走行車線判定方法
US11987245B2 (en) Method for controlling vehicle and vehicle control device
CN113093201A (zh) 用于多方向远距离感知的传感器操纵
CN109964132B (zh) 用于在运动物体上配置传感器的方法、设备和系统
CN114212106B (zh) 一种车辆的可行驶区域内安全概率的确定方法及装置
EP3796031B1 (en) A method for reducing the amount of sensor data from a forward-looking vehicle sensor
JP2023084412A (ja) 物体判定装置、物体判定用コンピュータプログラム及び物体判定方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220314

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230502

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230717

R151 Written notification of patent or utility model registration

Ref document number: 7327257

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151