CN107176161A - 识别结果提示装置、识别结果提示方法以及自主移动体 - Google Patents

识别结果提示装置、识别结果提示方法以及自主移动体 Download PDF

Info

Publication number
CN107176161A
CN107176161A CN201710061084.3A CN201710061084A CN107176161A CN 107176161 A CN107176161 A CN 107176161A CN 201710061084 A CN201710061084 A CN 201710061084A CN 107176161 A CN107176161 A CN 107176161A
Authority
CN
China
Prior art keywords
recognition result
identification object
risk factor
personage
reminding method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710061084.3A
Other languages
English (en)
Other versions
CN107176161B (zh
Inventor
小冢和纪
藤村亮太
渕上哲司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2016210328A external-priority patent/JP6933457B2/ja
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Publication of CN107176161A publication Critical patent/CN107176161A/zh
Application granted granted Critical
Publication of CN107176161B publication Critical patent/CN107176161B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/503Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking using luminous text or symbol displays in or on the vehicle, e.g. static text
    • B60Q1/5035Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking using luminous text or symbol displays in or on the vehicle, e.g. static text electronic displays
    • B60Q1/5037Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking using luminous text or symbol displays in or on the vehicle, e.g. static text electronic displays the display content changing automatically, e.g. depending on traffic situation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/506Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking specific to silent vehicles, e.g. for warning that a hybrid or electric vehicle is approaching
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/507Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking specific to autonomous vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • B60Q5/006Arrangement or adaptation of acoustic signal devices automatically actuated indicating risk of collision between vehicles or with pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0248Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means in combination with a laser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/175Autonomous driving
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77Instrument locations other than the dashboard
    • B60K2360/797Instrument locations other than the dashboard at the vehicle exterior
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/549Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking for expressing greetings, gratitude or emotions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2400/00Special features or arrangements of exterior signal lamps for vehicles
    • B60Q2400/50Projected symbol or information, e.g. onto the road or car body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8033Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for pedestrian protection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/804Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Theoretical Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Traffic Control Systems (AREA)

Abstract

提供一种能够切实地对识别对象通知识别对象已被自主移动体识别到这一情况的识别结果提示装置、识别结果提示方法以及自主移动体。识别结果提示装置具备:人物检测部(12),其对在自动驾驶车辆的周围存在的识别对象(人物)进行检测;和提示部(114),其对通过人物检测部(12)检测到的识别对象(人物)提示识别结果,所述识别结果表示通过由人物检测部(12)检测到识别对象(人物)而自动驾驶车辆已识别出识别对象(人物)的识别结果。

Description

识别结果提示装置、识别结果提示方法以及自主移动体
技术领域
本公开涉及提示对在自主移动体的周围存在的识别对象进行了识别的结果的识别结果提示装置、识别结果提示方法以及自主移动体。
背景技术
近年来,正在开展自主驾驶车辆的开发。自主驾驶车辆对在自主驾驶车辆的周围存在的行人进行识别,根据识别结果来控制自主驾驶车辆的行驶。
例如,在专利文献1中公开有如下方案:搭载于车辆的车载用显示装置取得车载用控制装置所输出的驾驶行动内容和驾驶行动决定因素,使用图像显示或语音输出来通知驾驶行动内容和驾驶行动决定因素。
另外,例如,在专利文献2中公开有如下方案:自主驾驶车辆对行人通知自主驾驶车辆中正在发生什么或自主驾驶车辆当前正在做什么。
另外,例如,在专利文献3中公开有如下方案:自动行驶的移动体的报知机构针对所检测到的监视对象所在的范围区域的各个方向,在车体等显示或语音输出所检测到的信息、所诊断出的诊断结果、所检测到的移动状态来向外部报知。
现有技术文献
专利文献
专利文献1:国际公开第2015/156146号
专利文献2:美国专利第9196164号说明书
专利文献3:日本特开2015-186944号公报
发明内容
发明要解决的问题
然而,在上述以往的技术中,无法切实地对识别对象通知已被自主移动体识别到这一情况,需要进一步的改善。
本公开是为了解决上述问题而做出的,目的在于提供一种能够切实地对识别对象通知识别对象已被自主移动体识别到这一情况的识别结果提示装置、识别结果提示方法以及自主移动体。
用于解决问题的技术方案
本公开的一个方案所涉及的识别结果提示装置是提示对在自主移动体的周围存在的识别对象进行了识别的结果的识别结果提示装置,具备:检测部,其对在所述自主移动体的周围存在的所述识别对象进行检测;和提示部,其对通过所述检测部检测到的所述识别对象提示识别结果,所述识别结果表示通过由所述检测部检测到所述识别对象而所述自主移动体已识别出所述识别对象。
发明的效果
根据本公开,能够切实地对识别对象通知识别对象已被自主移动体识别到这一情况。
附图说明
图1是示出本实施方式1所涉及的自动驾驶车辆的构成的框图。
图2是示出本实施方式1的识别结果提示装置的构成的图。
图3是用于对本实施方式1的识别结果提示装置的工作进行说明的流程图。
图4是用于对本实施方式1中的拍摄图像的取得、人物的检测以及拍摄图像的坐标变换进行说明的示意图。
图5是用于对本实施方式1中的提示识别结果的处理进行说明的图。
图6是用于对本实施方式1的第1变形例中的提示识别结果的处理进行说明的图。
图7是用于对本实施方式1的第2变形例中的提示识别结果的处理进行说明的图。
图8是用于对本实施方式1的第2变形例中的在多辆自动驾驶车辆存在于预定范围内的情况下提示识别结果的处理进行说明的图。
图9是用于对本实施方式1的第3变形例中的提示识别结果的处理进行说明的图。
图10是用于对本实施方式1的第4变形例中的提示识别结果的处理进行说明的图。
图11是用于对本实施方式1的第5变形例中的提示识别结果的处理进行说明的图。
图12是示出本实施方式2的识别结果提示装置的构成的图。
图13是示出本实施方式3的识别结果提示装置的构成的图。
图14是用于对本实施方式3中的对危险度高的识别对象优先照射光的处理进行说明的图。
图15是用于对本实施方式3中的对危险度高的识别对象优先输出声音的处理进行说明的图。
附图标记说明
1、1a、1b:自动驾驶车辆;
2、3:人物;
11:车道检测部;
12:人物检测部;
13:坐标变换部;
14:属性判定部;
15:提示方法决定部;
16:危险度判定部;
17:提示方法决定部;
21:地图数据;
22:坐标变换映射数据;
31:摄像头;
32:激光照射部;
33:显示部;
34:声音输出部;
101:自动驾驶系统;
102:指示器;
103:车辆控制处理器;
104:制动器控制系统;
105:加速器控制系统;
106:转向控制系统;
107:车辆导航系统;
108:GPS;
111:处理器;
112:存储器;
113:用户输入部;
114:提示部;
115:传感器;
121:自动驾驶程序;
122:数据;
221:坐标变换映射数据保存部。
具体实施方式
(发明本公开所涉及的一个方案的经过)
近年来,正在开展自主驾驶车辆的开发。自主驾驶车辆对在自主驾驶车辆的周围存在的行人进行识别,根据识别结果来控制自主驾驶车辆的行驶。
例如,在专利文献1中公开有如下方案:搭载于车辆的车载用显示装置取得车载用控制装置所输出的驾驶行动内容和驾驶行动决定因素,使用图像显示或语音输出来通知驾驶行动内容和驾驶行动决定因素。
另外,例如,在专利文献2中公开有如下方案:自主驾驶车辆对行人通知自主驾驶车辆中正在发生什么或自主驾驶车辆当前正在做什么。
另外,例如,在专利文献3中公开有如下方案:自动行驶的移动体的报知机构针对所检测到的监视对象所在的范围区域的各个方向,在车体等显示或语音输出所检测到的信息、所诊断出的诊断结果、所检测到的移动状态来向外部报知。
在上述专利文献1中,对乘员通知车辆的驾驶行动内容,在专利文献2中,对行人通知自主驾驶车辆的动作。因此,自主驾驶车辆周围的行人不知道自身是否已被自主驾驶车辆识别到,无法判断是否可以在自主驾驶车辆之前横穿。
另外,在上述专利文献3中,虽然通过使检测到存在监视对象物的方向的LED(发光二极管)点亮来报知已识别到监视对象物这一情况,但在同一方向上存在多个监视对象物的情况下,并没有对每个监视对象物报知其已被识别到。因此,在同一方向上存在多个行人的情况下,没有对多个行人中的已被识别到的行人和未被识别到的行人进行特定,所以各行人无法确认自身是否已被自主驾驶车辆识别到。
为了解决以上的问题,本公开的一个方案所涉及的识别结果提示装置,提示对在自主移动体的周围存在的识别对象进行了识别的结果,具备:检测部,其对在所述自主移动体的周围存在的所述识别对象进行检测;和提示部,其对通过所述检测部检测到的所述识别对象提示识别结果,所述识别结果表示通过由所述检测部检测到所述识别对象而所述自主移动体已识别出所述识别对象。
根据该构成,检测在自主移动体的周围存在的识别对象。并且,对所检测到的识别对象提示识别结果,该识别结果表示通过检测到所述识别对象而所述自主移动体已识别出所述识别对象。
因此,能够切实地对识别对象通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,所述提示部包括向所述识别对象所在的方向照射光的光照射部。
根据该构成,能够通过向识别对象所在的方向照射的光来切实地通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,所述光照射部朝向所述识别对象所在的位置的地面照射预定形状的光。
根据该构成,能够通过朝向识别对象所在的位置的地面照射的预定形状的光来切实地通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,所述光照射部朝向所述识别对象所在的位置的地面照射预定形状的光,并且向连接所述识别对象所在的位置的地面和所述自主移动体所在的位置的地面的直线上照射光。
根据该构成,能够通过朝向识别对象所在的位置的地面照射的预定形状的光、和向连接识别对象所在的位置的地面与自主移动体所在的位置的地面的直线上照射的光来切实地通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,所述提示部包括向所述识别对象所在的方向输出预定声音的声音输出部。
根据该构成,能够通过向识别对象所在的方向输出的预定声音来切实地通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,还具备拍摄所述自主移动体周围的图像的拍摄部,所述检测部对所述图像内的所述识别对象进行检测,所述提示部包括显示部,所述显示部配置于所述自主移动体的表面,并对以能够辨识的形式来表示通过所述检测部检测到的所述识别对象的所述图像进行显示。
根据该构成,拍摄自主移动体周围的图像。检测图像内的识别对象。在配置于自主移动体的表面的显示部,对以能够辨识的形式来表示所检测到的识别对象的图像进行显示。
因此,通过在配置于自主移动体的表面的显示部显示的、以能够辨识的形式来表示所检测到的识别对象的图像,能够切实地通知识别对象已被自主移动体识别到这一情况。
另外,也可以是,在上述识别结果提示装置中,所述显示部使所述图像左右反转来进行显示。
根据该构成,因为使图像左右反转来进行显示,所以所检测到的识别对象被显示成如同映在镜子中那样,能够直观地掌握识别结果。
另外,也可以是,所述识别对象是人物,上述识别结果提示装置还具备:属性判定部,其对通过所述检测部检测到的所述人物的属性进行判定;和提示方法决定部,其根据通过所述属性判定部判定的所述属性来决定提示方法,所述提示部按照通过所述提示方法决定部决定的所述提示方法来提示所述识别结果。
根据该构成,识别对象是人物。判定所检测到的人物的属性。根据所判定的属性来决定提示方法。按照所决定的提示方法来提示识别结果。
因此,能够按照与所检测到的人物的属性相应的适当的提示方法来提示识别结果。
另外,也可以是,在上述识别结果提示装置中,还具备:危险度判定部,其对通过所述检测部检测到的所述识别对象的危险度进行判定;和提示方法决定部,其根据通过所述危险度判定部判定的所述危险度来决定提示方法,所述提示部按照通过所述提示方法决定部决定的所述提示方法来提示所述识别结果。
根据该构成,对所检测到的识别对象的危险度进行判定。根据所判定的危险度来决定提示方法。按照所决定的提示方法来提示识别结果。
因此,能够按照与所检测到的识别对象的危险度相应的适当的提示方法来提示识别结果。
另外,也可以是,在上述识别结果提示装置中,所述危险度包括第1危险度和比所述第1危险度低的第2危险度,所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的提示方法与通过所述危险度判定部判定为是所述第2危险度的情况下的提示方法不同。
根据该构成,危险度包括第1危险度和比第1危险度低的第2危险度。使判定为是第1危险度的情况下的提示方法与判定为是第2危险度的情况下的提示方法不同。
因此,因为危险度高的情况下的提示方法与危险度低的情况下的提示方法不同,所以识别对象能够通过确认根据危险度而提示的识别结果来认识自身的危险度。
另外,也可以是,在上述识别结果提示装置中,所述提示部包括向所述识别对象所在的方向照射光的光照射部,所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的所述光的颜色与通过所述危险度判定部判定为是所述第2危险度的情况下的所述光的颜色不同。
根据该构成,向识别对象所在的方向照射光。使判定为是第1危险度的情况下的光的颜色与判定为是第2危险度的情况下的光的颜色不同。
因此,识别对象能够通过确认所照射的光的颜色来认识自身的危险度。
另外,也可以是,在上述识别结果提示装置中,所述提示部包括向所述识别对象所在的方向输出预定声音的声音输出部,所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的所述声音与通过所述危险度判定部判定为是所述第2危险度的情况下的所述声音不同。
根据该构成,向识别对象所在的方向输出预定声音。使判定为是第1危险度的情况下的声音与判定为是第2危险度的情况下的声音不同。
因此,识别对象能够通过确认所输出的预定声音来认识自身的危险度。
另外,也可以是,在上述识别结果提示装置中,所述识别对象包括多个识别对象,所述检测部对所述多个识别对象进行检测,所述危险度判定部对通过所述检测部检测到的所述多个识别对象各自的所述危险度进行判定,所述提示部从所述多个识别对象中的所述危险度最高的识别对象起依次提示所述识别结果。
根据该构成,识别对象包括多个识别对象。对多个识别对象进行检测。对所检测到的多个识别对象各自的危险度进行判定。从多个识别对象中的危险度最高的识别对象起依次提示识别结果。
因此,因为从多个识别对象中的危险度最高的识别对象起依次提示识别结果,所以多个识别对象分别能够认识到自身的危险度。
本公开的另一方案所涉及的自主移动体具备任何一种上述识别结果提示装置和基于所述识别结果提示装置的所述识别结果来控制自主移动体的移动的控制部。
根据该构成,能够将任何一种上述识别结果提示装置应用于自主移动体。
本公开的另一方案所涉及的识别结果提示方法是识别结果提示装置中的识别结果提示方法,所述识别结果提示装置提示对在自主移动体的周围存在的识别对象进行了识别的结果,所述识别结果提示方法包括:对在所述自主移动体的周围存在的所述识别对象进行检测;对所检测到的所述识别对象提示识别结果,所述识别结果表示通过由所述检测部检测到所述识别对象而所述自主移动体已识别出所述识别对象。
根据该构成,对在自主移动体的周围存在的识别对象进行检测。并且,对所检测到的识别对象提示识别结果,所述识别结果表示通过检测到所述识别对象而自主移动体已识别出识别对象。
因此,能够切实地对识别对象通知识别对象已被自主移动体识别到这一情况。
以下参照附图对本公开的实施方式进行说明。此外,以下的实施方式是将本公开具体化的一例,不限定本公开的技术范围。
(实施方式1)
图1是示出本实施方式1所涉及的自动驾驶车辆的构成的框图。图1所示的自动驾驶车辆1具备:自动驾驶系统101、指示器102、车辆控制处理器103、制动器控制系统104、加速器控制系统105、转向控制系统106、车辆导航系统107以及GPS(Global PositioningSystem:全球定位系统)108。
作为自主移动体的一例,自动驾驶车辆1是进行自主行驶的车辆。虽然在本实施方式1中自动驾驶车辆1是汽车,但本公开不特别限定于此,自动驾驶车辆1也可以是摩托车、卡车、公交车、电车以及飞行体等各种移动体。
自动驾驶系统101具备处理器111、存储器112、用户输入部113、提示部114以及传感器115。
存储器112是计算机可读取的记录介质,例如是硬盘驱动器、ROM(Read OnlyMemory:只读存储器)、RAM(Random Access Memory:随机存取存储器)、光盘以及半导体存储器等。存储器112存储有通过处理器111执行的自动驾驶程序121和由处理器111利用的数据122。
数据122包括地图数据21和坐标变换映射数据22。地图数据21包括:地形信息、表示行驶车道的车道信息、关于交叉点的交叉点信息、以及表示限制速度的限制速度信息等。此外,地图数据21不限于上述信息。坐标变换映射数据22是使通过摄像头31拍摄到的拍摄图像上的各像素的位置与实际空间上的位置相关联的坐标变换映射。
处理器111例如是CPU(中央运算处理装置),执行存储于存储器112的自动驾驶程序121。通过处理器111执行自动驾驶程序121,自动驾驶车辆1自主地行驶。另外,处理器111从存储器112读出数据122、对存储器112写入数据122、对存储器112所存储的数据122进行更新。
自动驾驶程序121使处理器111作为车道检测部11、人物检测部12以及坐标变换部13来发挥功能。
车道检测部11根据通过摄像头31拍摄到的拍摄图像来对画在道路上的车道线进行识别,对自动驾驶车辆1行驶的车道进行检测。
人物检测部12根据通过摄像头31拍摄到的拍摄图像来检测在自动驾驶车辆1的周围存在的人物(识别对象)。人物检测部12例如通过深度学习(deep learning)对多层构造的神经网络(neural network)进行机器学习,向进行了机器学习的神经网络输入拍摄图像,由此检测拍摄图像所包含的人物。人物检测部12以矩形的框围起拍摄图像中的所检测到的人物。
坐标变换部13使用坐标变换映射数据22将拍摄图像的坐标变换成实际空间的坐标。
用户输入部113受理用户的对各种信息的输入。用户输入部113例如由按钮或触摸面板构成。
提示部114对各种信息进行提示。提示部114对通过人物检测部12检测到的人物(识别对象)提示识别结果,该识别结果表示通过由人物检测部12检测到人物(识别对象)而自动驾驶车辆1已识别出人物(识别对象)。提示部114包括激光照射部32。激光照射部32配置于自动驾驶车辆1的前方部分,朝向在自动驾驶车辆1的前方存在的人物照射激光。此外,激光照射部32不仅针对自动驾驶车辆1的前方,也可以朝向在自动驾驶车辆1的后方、自动驾驶车辆1的右方以及自动驾驶车辆1的左方等自动驾驶车辆1的周围存在的人物照射激光。另外,激光照射部32优选向激光照射部32与人物之间的地面上照射直线状的激光。
激光照射部32朝向通过坐标变换部13变换成了实际空间上的坐标的人物位置照射激光。此外,在通过人物检测部12确定了人物所在的方向和自动驾驶车辆1到人物的距离的情况下,激光照射部32也可以朝向人物(识别对象)所在的位置的地面照射预定形状的激光。
传感器115对自动驾驶车辆1的周围的环境和自动驾驶车辆1的内部的环境进行测定。传感器115例如包括:计测自动驾驶车辆1的速度的速度计、计测自动驾驶车辆1的加速度的加速度计、计测自动驾驶车辆1的朝向的陀螺仪、以及发动机温度传感器等。此外,传感器115不限于上述传感器。
传感器115包括摄像头31。摄像头31是拍摄部的一例,其配置于自动驾驶车辆1的后视镜的附近,拍摄自动驾驶车辆1的前方的图像。此外,摄像头31不仅针对自动驾驶车辆1的前方,也可以拍摄自动驾驶车辆1的后方、自动驾驶车辆1的右方以及自动驾驶车辆1的左方等自动驾驶车辆1的周围的图像。
指示器102是用于在自动驾驶车辆1左转、右转或变道时将该方向指示给周围的装置。车辆控制处理器103控制自动驾驶车辆1。制动器控制系统104控制自动驾驶车辆1以使其减速。加速器控制系统105控制自动驾驶车辆1的速度。转向控制系统106对自动驾驶车辆1的行进方向进行调节。车辆导航系统107决定自动驾驶车辆1的行驶路径和/或对自动驾驶车辆1的行驶路径进行提示。GPS108取得自动驾驶车辆1的当前位置。
处理器111基于传感器115的感测结果、车道检测部11的检测结果以及人物检测部12的检测结果来控制自动驾驶车辆1的方向和速度。处理器111通过加速器控制系统105使自动驾驶车辆1加速,通过制动器控制系统104使自动驾驶车辆1减速,通过转向控制系统106使自动驾驶车辆1的方向变化。
图2是示出本实施方式1的识别结果提示装置的构成的图。图2所示的识别结果提示装置具备摄像头31、人物检测部12、坐标变换部13、激光照射部32以及坐标变换映射数据保存部221。
在图2所示的识别结果提示装置中对与图1相同的构成标注相同的附图标记并省略说明。坐标变换映射数据保存部221由图1的存储器112构成,存储坐标变换映射数据22。
接下来,对本实施方式1的识别结果提示装置的工作进行说明。
图3是用于对本实施方式1的识别结果提示装置的工作进行说明的流程图。图4是用于对本实施方式1中的拍摄图像的取得、人物的检测以及拍摄图像的坐标变换进行说明的示意图。
首先,在步骤S1中,摄像头31拍摄自动驾驶车辆1的行进方向的图像。此时,摄像头31配置于能够对自动驾驶车辆1的前方进行拍摄的位置,拍摄自动驾驶车辆1的前方。此外,优选的是,在自动驾驶车辆1前进的情况下通过配置于自动驾驶车辆1的前方的摄像头来进行拍摄,在自动驾驶车辆1后退的情况下通过配置于自动驾驶车辆1的后方的摄像头来进行拍摄。
接下来,在步骤S2中,人物检测部12取得通过摄像头31拍摄到的拍摄图像201。图4所示的拍摄图像201包含人物2、3。
接下来,在步骤S3中,人物检测部12对从摄像头31取得的拍摄图像所包含的人物进行检测。在图4中,人物检测部12对拍摄图像201所包含的人物2、3中的人物2进行检测,在检测到的人物2的周围添加矩形的框202。此外,在图4中,人物3未被检测为人物。这样,根据检测精度等,不一定检测到拍摄图像内的全部人物。
接下来,在步骤S4中,坐标变换部13判断是否通过人物检测部12从拍摄图像中检测到人物。在此,在判断为没有检测到人物的情况下(步骤S4:否),返回步骤S1的处理。
另一方面,在判断为检测到人物的情况下(步骤S4:是),在步骤S5中,坐标变换部13使用坐标变换映射数据22将拍摄图像的坐标变换成实际空间的坐标。如图4所示,通过对拍摄图像201进行坐标变换,生成与实际空间的坐标对应的实际空间图像203。
接下来,在步骤S6中,激光照射部32朝向通过人物检测部12检测到的人物的位置照射激光。此时,激光照射部32根据通过坐标变换部13进行变换后的实际空间图像203内的人物2的坐标位置来确定人物2实际存在的位置,并朝向所确定出的位置照射激光。之后,返回步骤S1的处理。
此外,从自动驾驶车辆1的电源接通(on)起到断开(off)为止,进行步骤S1~步骤S6的处理。
图5是用于对本实施方式1中的提示识别结果的处理进行说明的图。如图5所示,在检测到人物2的情况下,激光照射部32朝向所检测到的人物2的位置照射激光211。另外,因为人物3未被检测到,所以人物3不被照射激光211。因此,人物2、3分别能够知道自身是否已被自动驾驶车辆1识别到,能够决定是否在自动驾驶车辆1之前横穿等相对于自动驾驶车辆1的行动。
这样,因为对所检测到的识别对象提示识别结果,所以能够切实地对识别对象通知识别对象已被自动驾驶车辆1识别到这一情况,所述识别结果表示通过检测到识别对象而自动驾驶车辆1已识别出识别对象。
此外,虽然在本实施方式1中向人物照射激光,但本公开不特别限定于此,也可以向人物照射来自发光二极管等其他光源的光。
另外,提示部114也可以具备投影机,也可以朝向人物照射来自投影机的光(图像)。在该情况下,投影机优选向投影机与人物之间的地面上照射直线状的光。
图6是用于对本实施方式1的第1变形例中的提示识别结果的处理进行说明的图。
在本实施方式1的第1变形例中,朝向识别对象所在的位置的地面照射预定形状的光。若通过传感器115获知了人物所在的方向和距人物的距离,则能够向所检测到的人物的脚下照射激光。如图6所示,在检测到人物2的情况下,激光照射部32朝向人物2所在的位置的地面照射预定形状的激光212。在图6中照射圆形的激光212。另外,因为人物3未被检测到,所以人物3不被照射圆形的激光212。因此,人物2、3分别能够知道自身是否已被自动驾驶车辆1识别到,能够决定是否在自动驾驶车辆1之前横穿等相对于自动驾驶车辆1的行动。
图7是用于对本实施方式1的第2变形例中的提示识别结果的处理进行说明的图。
在本实施方式1的第2变形例中,识别结果提示装置取代具备坐标变换部13、坐标变换映射数据保存部221以及激光照射部32而具备显示部33,所述显示部33配置于自动驾驶车辆1的表面,对以能够辨识的形式来表示通过人物检测部12检测到的人物(识别对象)的图像进行显示。
如图7所示,显示部33例如是液晶显示装置,配置于自动驾驶车辆1的表面。此外,显示部33配置于自动驾驶车辆1的前面、后面、右侧面以及左侧面中的至少一方的位置。人物检测部12对拍摄图像201所包含的人物2、3中的人物2进行检测,在所检测到的人物2的周围添加矩形的框202。显示部33实时地显示对所检测到的人物2的周围添加了矩形的框202的图像。另外,因为人物3未被检测到,所以不在人物3的周围显示矩形的框202。因此,人物2、3分别能够知道自身是否已被自动驾驶车辆1识别到,能够决定是否在自动驾驶车辆1之前横穿等相对于自动驾驶车辆1的行动。
此外,显示部33优选使图像左右反转来进行显示。由此,人物被显示成如同映在镜子中那样,因此人物能够直观地掌握识别结果。
图8是用于对本实施方式1的第2变形例中的在多辆自动驾驶车辆存在于预定范围内的情况下提示识别结果的处理进行说明的图。
如图8所示,在人物2、3的附近存在多辆自动驾驶车辆1a、1b。在通过自动驾驶车辆1a检测到人物2的情况下,自动驾驶车辆1a的显示部33实时地显示对所检测到的人物2的周围添加了矩形的框202的图像。另外,因为人物3未被自动驾驶车辆1a检测到,所以不在人物3的周围显示矩形的框202。
另外,在通过自动驾驶车辆1b检测到人物2和人物3的情况下,自动驾驶车辆1b的显示部33实时地显示对所检测到的人物2和人物3的周围添加了矩形的框202的图像。
因此,在人物的附近存在多辆自动驾驶车辆的情况下,人物能够容易确认自身已被哪辆自动驾驶车辆识别到、未被哪辆自动驾驶车辆识别到。
图9是用于对本实施方式1的第3变形例中的提示识别结果的处理进行说明的图。
在本实施方式1的第3变形例中,识别结果提示装置取代具备坐标变换部13、坐标变换映射数据保存部221以及激光照射部32而具备声音输出部34,所述声音输出部34向识别对象所在的方向输出预定声音。
如图9所示,声音输出部34例如是指向性扬声器,对所检测到的人物所在的方向输出具有指向性的预定声音。另外,因为人物3未被检测到,所以不对人物3输出预定声音。另外,因为从声音输出部34输出的声音具有指向性,所以仅人物2能听见,人物3听不见。因此,人物2、3分别能够知道自身是否已被自动驾驶车辆1识别到,能够决定是否在自动驾驶车辆1之前横穿等相对于自动驾驶车辆1的行动。
图10是用于对本实施方式1的第4变形例中的提示识别结果的处理进行说明的图。
在本实施方式1的第4变形例中,激光照射部32朝向识别对象所在的位置的地面照射预定形状的光,并且向连接识别对象所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射光。
如图10所示,在人物2、3的附近存在多辆自动驾驶车辆1a、1b。在通过自动驾驶车辆1a检测到人物2的情况下,自动驾驶车辆1a的激光照射部32朝向人物2所在的位置的地面照射预定形状的激光212,并且向连接人物2所在的位置的地面和自动驾驶车辆1a所在的位置的地面的直线上照射激光213。在图10中照射圆形的激光212。另外,因为人物3未被自动驾驶车辆1a检测到,所以不向连接人物3所在的位置的地面和自动驾驶车辆1a所在的位置的地面的直线上照射激光213。
另外,在通过自动驾驶车辆1b检测到人物3的情况下,自动驾驶车辆1b的激光照射部32朝向人物3所在的位置的地面照射预定形状的激光212,并且向连接人物3所在的位置的地面和自动驾驶车辆1b所在的位置的地面的直线上照射激光213。在图10中照射圆形的激光212。另外,因为人物2未被自动驾驶车辆1b检测到,所以不向连接人物2所在的位置的地面和自动驾驶车辆1b所在的位置的地面的直线上照射激光213。
因此,因为朝向人物所在的位置的地面照射预定形状的光,并且向连接人物所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射光,所以在人物的附近存在多辆自动驾驶车辆的情况下,人物能够容易确认自身已被哪辆自动驾驶车辆识别到、未被哪辆自动驾驶车辆识别到。
此外,激光照射部32也可以在检测到人物的情况下始终向连接人物所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射激光213,还可以仅在附近存在其他自动驾驶车辆的情况下照射激光213。在该情况下,自动驾驶车辆也可以进一步具备通信部,所述通信部在预定范围内广播表示自身存在这一情况的信息(例如,标识信息),并且接收由位于预定范围内的其他自动驾驶车辆发送的信息(例如,标识信息)。并且,也可以是,激光照射部32在接收到由其他自动驾驶车辆发送的信息的情况下,向连接人物所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射激光213。
这样,因为仅在预定范围内存在多辆自动驾驶车辆的情况下,向连接人物所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射激光213,所以能够减少消耗电力。
图11是用于对本实施方式1的第5变形例中的提示识别结果的处理进行说明的图。
在本实施方式1的第5变形例中,识别结果提示装置取代具备坐标变换部13、坐标变换映射数据保存部221以及激光照射部32而具备声音输出部34,所述声音输出部34向识别对象所在的方向输出预定声音。声音输出部34例如是指向性扬声器,对所检测到的人物所在的方向输出具有指向性的预定声音。
另外,识别结果提示装置还具备通信部。通信部在预定范围内广播对标识自身的标识信息和表示自身所输出的声音的种类的声音信息,并且接收由位于预定范围内的其他自动驾驶车辆发送的标识信息和声音信息。声音输出部34能够输出多种声音。在通过通信部从其他自动驾驶车辆接收到标识信息和声音信息的情况下,声音输出部34判断自身所输出的当前的声音的种类与所接收到的声音信息所表示的其他自动驾驶车辆的声音的种类是否相同。声音输出部34在判断为自身的声音的种类与其他自动驾驶车辆的声音的种类相同的情况下,将当前的声音的种类变更为其他声音的种类。
如图11所示,在人物2、3的附近存在多辆自动驾驶车辆1a、1b。在通过自动驾驶车辆1a检测到人物2的情况下,自动驾驶车辆1a的声音输出部34朝向人物2所在的方向输出第1声音。声音输出部34被初始设定为输出第1声音。另外,因为人物3未被自动驾驶车辆1a检测到,所以不向人物3所在的方向输出第1声音。自动驾驶车辆1a的通信部在预定范围内广播标识自动驾驶车辆1a的标识信息和表示自动驾驶车辆1a所输出的声音的种类(第1声音)的声音信息。
自动驾驶车辆1b的通信部接收由位于预定范围内的自动驾驶车辆1a发送的标识信息和声音信息。声音输出部34判断自动驾驶车辆1b所输出的当前的声音的种类(第1声音)与所接收到的声音信息所表示的自动驾驶车辆1a的声音的种类(第1声音)是否相同。声音输出部34在判断为自动驾驶车辆1b的声音的种类与自动驾驶车辆1a的声音的种类相同的情况下,将声音的种类(第1声音)变更为其他声音的种类(第2声音)。
并且,在通过自动驾驶车辆1b检测到人物2的情况下,自动驾驶车辆1b的声音输出部34朝向人物2所在的方向输出与第1声音不同的第2声音。另外,因为人物3未被自动驾驶车辆1b检测到,所以不向人物3所在的方向输出第2声音。之后,自动驾驶车辆1b的通信部在预定范围内广播标识自动驾驶车辆1b的标识信息和表示自动驾驶车辆1b所输出的声音的种类(第2声音)的声音信息。
这样,在多辆自动驾驶车辆存在于预定范围内的情况下,多辆自动驾驶车辆输出各自不同的声音,在人物的附近存在多辆自动驾驶车辆的情况下,人物能够容易确认自身已被哪辆自动驾驶车辆识别到、未被哪辆自动驾驶车辆识别到。
此外,也可以是,在本实施方式1中,在自动驾驶车辆的表面配置模拟人脸的人脸装置,通过使人脸装置的视线朝向通过人物检测部12检测到的人物(识别对象)眨眼,对表示自动驾驶车辆已识别出人物(识别对象)这一情况的识别结果进行提示。
另外,虽然本实施方式1的识别对象是人物,但本公开不特别限定于此,识别对象也可以是自行车和汽车等其他车辆、狗和猫等动物、以及婴儿车。另外,也可以对移动的识别对象进行检测。
另外,在本实施方式1中,传感器115包括摄像头31,人物检测部12从通过摄像头31拍摄到的图像中检测人物,但本公开不特别限定于此,传感器115也可以包括对有无位于特定方向上的物体进行检测的障碍物传感器。在该情况下,人物检测部12也可以在通过障碍物传感器检测到物体时判断为检测到人物。激光照射部32优选配置于障碍物传感器的附近。另外,传感器115也可以包括在水平方向上线状地配置的多个距离传感器。在该情况下,人物检测部12也可以在通过多个距离传感器中的至少一个距离传感器检测到物体时判断为检测到人物,并对物体所在的方向和距物体的距离进行确定。进而,传感器115也可以包括对自动驾驶车辆1的周围的空间的三维形状进行测定的三维测定装置。在该情况下,人物检测部12也可以在通过三维测定装置检测到人物时,对人物所在的方向和距人物的距离进行确定。
另外,在实施方式1中,提示部114也可以包括激光照射部32、显示部33以及声音输出部34中的至少一方。即,也可以组合激光照射部32对识别结果的提示、显示部33对识别结果的提示以及声音输出部34对识别结果的提示中的任意两方或全部。
(实施方式2)
图12是示出本实施方式2的识别结果提示装置的构成的图。图12所示的识别结果提示装置具备:摄像头31、人物检测部12、坐标变换部13、属性判定部14、提示方法决定部15、提示部114以及坐标变换映射数据保存部221。
除自动驾驶程序121还包括属性判定部14和提示方法决定部15的功能这一点以外,实施方式2的自动驾驶车辆的构成与图1所示出的自动驾驶车辆的构成相同。在图12所示的识别结果提示装置中对与图1和图2相同的构成标注相同的附图标记并省略说明。
属性判定部14对通过人物检测部12检测到的人物的属性进行判定。在此,属性例如是指儿童或老年人。属性判定部14根据通过人物检测部12检测到的人物的特征来判定人物的属性。例如,属性判定部14根据拍摄图像来推定通过人物检测部12检测到的人物的身高,在所推定的身高为预定的身高以下的情况下,判定为人物的属性是儿童。另外,例如,属性判定部14对通过人物检测部12检测到的人物的图像和示出腰弯曲等老年人特征的图像进行比较,在所检测到的人物的图像与示出老年人特征的图像一致的情况下,判定为人物的属性是老年人。
提示方法决定部15根据通过属性判定部14判定的属性来决定提示方法。例如,提示方法决定部15在通过属性判定部14判定的人物的属性是儿童的情况下,决定为不使用文字而使用标识(标记)的提示方法。另外,例如,提示方法决定部15在通过属性判定部14判定的人物的属性是老年人的情况下,决定为使激光更亮的提示方法或使要输出的声音更大的提示方法。
提示部114按照通过提示方法决定部15决定的提示方法来提示识别结果。提示部114包括激光照射部32、显示部33以及声音输出部34中的至少一方。
例如,在通过提示方法决定部15决定为不使用文字而使用标识的提示方法的情况下,显示部33对以能够辨识的形式来表示通过人物检测部12检测到的人物(识别对象)的图像进行显示,并且在该图像上不重叠文字而重叠标识来进行显示。若所检测到的人物不是儿童,则显示部33例如在拍摄图像上重叠“注意”这一文字来进行显示,若所检测到的人物是儿童,则显示部33例如在拍摄图像上重叠促使“注意”的标识来进行显示。由此,对看不懂文字的儿童也能够传达文字的意思。
另外,例如,在通过提示方法决定部15决定为使激光更亮的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的人物(识别对象)照射亮度更高的激光。
另外,例如,在通过提示方法决定部15决定为使要输出的声音更大的提示方法的情况下,声音输出部34朝向通过人物检测部12检测到的人物(识别对象)输出音量更大的声音。
(实施方式3)
图13是示出本实施方式3的识别结果提示装置的构成的图。图13所示出的识别结果提示装置具备:摄像头31、人物检测部12、坐标变换部13、危险度判定部16、提示方法决定部17、提示部114以及坐标变换映射数据保存部221。
除自动驾驶程序121还包括危险度判定部16和提示方法决定部17的功能这一点以外,实施方式3的自动驾驶车辆的构成与图1所示出的自动驾驶车辆的构成相同。在图13所示出的识别结果提示装置中对与图1和图2相同的构成标注相同的附图标记并省略说明。
危险度判定部16对通过人物检测部12检测到的人物(识别对象)的危险度进行判定。危险度包括第1危险度和比第1危险度低的第2危险度。例如,危险度判定部16根据拍摄图像来推定自动驾驶车辆1距人物的距离,在所推定的距离为预定的距离以下的情况下,判定为是危险度高的第1危险度,在所推定的距离比预定的距离长的情况下,判定为是危险度低的第2危险度。
提示方法决定部17根据通过危险度判定部16判定的危险度来决定提示方法。提示方法决定部17使通过危险度判定部16判定为是第1危险度的情况下的激光的颜色与通过危险度判定部16判定为是第2危险度的情况下的激光的颜色不同。例如,提示方法决定部17在判定为是第1危险度的情况下决定为使激光为红色的提示方法,在判定为是第2危险度的情况下决定为使激光为蓝色的提示方法。
提示部114按照通过提示方法决定部17决定的提示方法来提示识别结果。提示部114包括激光照射部32、显示部33以及声音输出部34中的至少一方。
例如,在通过提示方法决定部17决定为使激光为红色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第1危险度的人物(识别对象)照射红色的激光。例如,在通过提示方法决定部17决定为使激光为蓝色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第2危险度的人物(识别对象)照射蓝色的激光。由此,识别对象能够根据所照射的光的颜色来识别危险度为何种程度。
另外,例如也可以是,在通过提示方法决定部17决定为使激光为红色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第1危险度的人物(识别对象)所在的位置的地面照射红色的预定形状的激光。例如也可以是,在通过提示方法决定部17决定为使激光为蓝色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第2危险度的人物(识别对象)所在的位置的地面照射蓝色的预定形状的激光。
另外,例如也可以是,在通过提示方法决定部17决定为使激光为红色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第1危险度的人物(识别对象)所在的位置的地面照射红色的预定形状的激光,并且向连接人物(识别对象)所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射红色的激光。例如也可以是,在通过提示方法决定部17决定为使激光为蓝色的提示方法的情况下,激光照射部32朝向通过人物检测部12检测到的第2危险度的人物(识别对象)所在的位置的地面照射蓝色的预定形状的激光,并且向连接人物(识别对象)所在的位置的地面和自动驾驶车辆所在的位置的地面的直线上照射蓝色的激光。
另外,也可以是,提示方法决定部17使通过危险度判定部16判定为是第1危险度的情况下的声音与通过危险度判定部16判定为是第2危险度的情况下的声音不同。例如,提示方法决定部17在判定为是第1危险度的情况下决定为输出第1声音的提示方法,在判定为是第2危险度的情况下决定为输出与第1声音不同的第2声音的提示方法。并且,也可以是,在决定为输出第1声音的提示方法的情况下,声音输出部34朝向通过人物检测部12检测到的第1危险度的人物(识别对象)输出第1声音。另外,也可以是,在决定为输出第2声音的提示方法的情况下,声音输出部34朝向通过人物检测部12检测到的第2危险度的人物(识别对象)输出第2声音。
另外,例如也可以是,提示方法决定部17在判定为是第1危险度的情况下决定为使在所检测到的人物的周围添加的矩形框的颜色为红色的提示方法,在判定为是第2危险度的情况下决定为使在所检测到的人物的周围添加的矩形框的颜色为蓝色的提示方法。并且,也可以是,在决定为使在所检测到的人物的周围添加的矩形框的颜色为红色的提示方法的情况下,显示部33显示在通过人物检测部12检测到的第1危险度的人物(识别对象)的周围添加了红色的矩形框的图像。另外,也可以是,在决定为使在所检测到的人物的周围添加的矩形框的颜色为蓝色的提示方法的情况下,显示部33显示在通过人物检测部12检测到的第2危险度的人物(识别对象)的周围添加了蓝色的矩形框的图像。
另外,也可以是,在通过人物检测部12检测到多个人物(识别对象)的情况下,危险度判定部16对通过人物检测部12检测到的多个人物(识别对象)各自的危险度进行判定。并且,也可以是,提示部114从多个人物(识别对象)中的危险度最高的人物(识别对象)起依次提示识别结果。例如,在通过人物检测部12检测到多个人物的情况下,危险度判定部16根据拍摄图像来推定自动驾驶车辆1距多个人物的各人物的距离,从所推定的距离最近(短)的人物起依次判定为危险度高。并且,提示部114对多个人物中的危险度最高的人物优先提示识别结果。
例如,在激光照射部32一次能够照射的激光的数量有限的情况下,激光照射部32对多个人物中的危险度最高的人物优先照射激光。
图14是用于对本实施方式3中的对危险度高的识别对象优先照射光的处理进行说明的图。在图14中,通过自动驾驶车辆1的人物检测部12检测到人物2、3。因为人物2比人物3更靠近自动驾驶车辆1,所以判定为人物2的危险度比人物3的危险度高。在激光照射部32一次能够射出一条激光的情况下,激光照射部32仅对多个人物2、3中的危险度最高的人物2照射激光。
另外,也可以是,在激光照射部32一次能够射出两条激光的情况下,激光照射部32对多个人物2、3中的危险度最高的人物2和危险度第二高的人物3照射激光。此时,优选两条激光彼此颜色不同。
另外,例如,在声音输出部34一次能够输出的声音的数量有限的情况下,声音输出部34对多个人物中的危险度最高的人物优先输出声音。
图15是用于对本实施方式3中的对危险度高的识别对象优先输出声音的处理进行说明的图。在图15中,通过自动驾驶车辆1a和自动驾驶车辆1b的各人物检测部12检测到人物2、3。因为人物2比人物3靠近自动驾驶车辆1a和自动驾驶车辆1b,所以判定为人物2的危险度比人物3的危险度高。在声音输出部34一次能够输出一个声音的情况下,声音输出部34仅对多个人物2、3中的危险度最高的人物2输出声音。
另外,也可以是,在声音输出部34一次能够输出两个声音的情况下,声音输出部34对多个人物2、3中的危险度最高的人物2和危险度第二高的人物3输出声音。此时,优选两个声音是彼此不同的声音。
此外,虽然在本实施方式3中危险度判定部16根据人物与自动驾驶车辆之间的距离来判定危险度,但本公开不特别限定于此,也可以对人物的移动方向进行检测,并在所检测到的移动方向朝向自动驾驶车辆的行进方向的情况下判定为危险度高。能够通过对当前的拍摄图像和过去的拍摄图像进行比较来检测人物的移动方向。另外,能够通过对当前的自动驾驶车辆的位置和过去的自动驾驶车辆的位置进行比较来检测自动驾驶车辆的行进方向。
此外,在实施方式1~3中,也可以是,自动驾驶车辆的检测部对在距自动驾驶车辆预定范围内的驾驶者所驾驶的手动驾驶车辆进行检测,提示部对手动驾驶车辆提示表示自动驾驶车辆已识别出手动驾驶车辆这一情况的识别结果。
另外,在实施方式1~3中,也可以是,能够经由网络与识别结果提示装置进行通信的服务器,具备识别结果提示装置的构成要素的一部分。
在本公开中,单元、装置、部件或功能部的全部或者一部分或图示的框图的功能块的全部或者一部分也可以由包括半导体装置、半导体集成电路(IC)、或LSI(Large ScaleIntegration:大规模集成电路)的一个或多个电子电路来执行。LSI或IC可以集成于一个芯片,也可以组合多个芯片而构成。例如,存储元件以外的功能块也可以集成于一个芯片。在此,虽然称为LSI、IC,但也可以根据集成的程度而改变称呼,称为系统LSI、VLSI(VeryLarge Scale Integration:超大规模集成电路)、或ULSI(Ultra Large ScaleIntegration:特大规模集成电路)。也可以以相同的目的来使用在LSI制造后可编程的FPGA(Field Programmable Gate Array;现场可编程门阵列)、或者能够进行LSI内部的接合关系的重建或LSI内部的电路划分的格局的可重构逻辑器件(Reconfigurable LogicDevice)。
进而,单元、装置、部件或功能部的全部或者一部分的功能或操作可以由软件处理来执行。在该情况下,软件被记录于一个或多个ROM、光盘、硬盘驱动器等非暂时性记录介质,在软件由处理装置(Processor)执行时,由该软件确定的功能通过处理装置(Processor)和周边装置来执行。系统或装置也可以具备:记录有软件的一个或多个非暂时性记录介质、处理装置(Processor)以及所需要的硬件设备例如接口。
产业上的可利用性
本公开所涉及的识别结果提示装置、识别结果提示方法以及自主移动体,作为提示对在自主移动体的周围存在的识别对象进行了识别的结果的识别结果提示装置、识别结果提示方法以及自主移动体是有用的。

Claims (15)

1.一种识别结果提示装置,提示对在自主移动体的周围存在的识别对象进行了识别的结果,具备:
检测部,其对在所述自主移动体的周围存在的所述识别对象进行检测;和
提示部,其对通过所述检测部检测到的所述识别对象提示识别结果,所述识别结果表示通过由所述检测部检测到所述识别对象而所述自主移动体已识别出所述识别对象。
2.根据权利要求1所述的识别结果提示装置,
所述提示部包括向所述识别对象所在的方向照射光的光照射部。
3.根据权利要求2所述的识别结果提示装置,
所述光照射部朝向所述识别对象所在的位置的地面照射预定形状的光。
4.根据权利要求3所述的识别结果提示装置,
所述光照射部朝向所述识别对象所在的位置的地面照射预定形状的光,并且向连接所述识别对象所在的位置的地面和所述自主移动体所在的位置的地面的直线上照射光。
5.根据权利要求1所述的识别结果提示装置,
所述提示部包括向所述识别对象所在的方向输出预定声音的声音输出部。
6.根据权利要求1所述的识别结果提示装置,
还具备拍摄所述自主移动体周围的图像的拍摄部,
所述检测部对所述图像内的所述识别对象进行检测,
所述提示部包括显示部,所述显示部配置于所述自主移动体的表面,并对以能够辨识的形式来表示通过所述检测部检测到的所述识别对象的所述图像进行显示。
7.根据权利要求6所述的识别结果提示装置,
所述显示部使所述图像左右反转来进行显示。
8.根据权利要求1所述的识别结果提示装置,
所述识别对象是人物,
所述识别结果提示装置还具备:
属性判定部,其对通过所述检测部检测到的所述人物的属性进行判定;和
提示方法决定部,其根据通过所述属性判定部判定的所述属性来决定提示方法,
所述提示部按照通过所述提示方法决定部决定的所述提示方法来提示所述识别结果。
9.根据权利要求1所述的识别结果提示装置,还具备:
危险度判定部,其对通过所述检测部检测到的所述识别对象的危险度进行判定;和
提示方法决定部,其根据通过所述危险度判定部判定的所述危险度来决定提示方法,
所述提示部按照通过所述提示方法决定部决定的所述提示方法来提示所述识别结果。
10.根据权利要求9所述的识别结果提示装置,
所述危险度包括第1危险度和比所述第1危险度低的第2危险度,
所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的提示方法与通过所述危险度判定部判定为是所述第2危险度的情况下的提示方法不同。
11.根据权利要求10所述的识别结果提示装置,
所述提示部包括向所述识别对象所在的方向照射光的光照射部,
所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的所述光的颜色与通过所述危险度判定部判定为是所述第2危险度的情况下的所述光的颜色不同。
12.根据权利要求10所述的识别结果提示装置,
所述提示部包括向所述识别对象所在的方向输出预定声音的声音输出部,
所述提示方法决定部使通过所述危险度判定部判定为是所述第1危险度的情况下的所述声音与通过所述危险度判定部判定为是所述第2危险度的情况下的所述声音不同。
13.根据权利要求9所述的识别结果提示装置,
所述识别对象包括多个识别对象,
所述检测部对所述多个识别对象进行检测,
所述危险度判定部对通过所述检测部检测到的所述多个识别对象各自的所述危险度进行判定,
所述提示部从所述多个识别对象中的所述危险度最高的识别对象起依次提示所述识别结果。
14.一种自主移动体,具备:
权利要求1~13中任一项所述的识别结果提示装置;和
基于所述识别结果提示装置的所述识别结果来控制自主移动体的移动的控制部。
15.一种识别结果提示方法,是识别结果提示装置中的识别结果提示方法,所述识别结果提示装置提示对在自主移动体的周围存在的识别对象进行了识别的结果,所述识别结果提示方法包括:
对在所述自主移动体的周围存在的所述识别对象进行检测;
对所检测到的所述识别对象提示识别结果,所述识别结果表示通过由所述检测部检测到所述识别对象而所述自主移动体已识别出所述识别对象。
CN201710061084.3A 2016-03-10 2017-01-25 识别结果提示装置、识别结果提示方法以及自主移动体 Active CN107176161B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201662306181P 2016-03-10 2016-03-10
US62/306181 2016-03-10
JP2016210328A JP6933457B2 (ja) 2016-03-10 2016-10-27 認識結果提示装置、認識結果提示方法及び自律移動体
JP2016-210328 2016-10-27

Publications (2)

Publication Number Publication Date
CN107176161A true CN107176161A (zh) 2017-09-19
CN107176161B CN107176161B (zh) 2021-11-23

Family

ID=58231361

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710061084.3A Active CN107176161B (zh) 2016-03-10 2017-01-25 识别结果提示装置、识别结果提示方法以及自主移动体

Country Status (3)

Country Link
US (2) US10248873B2 (zh)
EP (1) EP3216653B1 (zh)
CN (1) CN107176161B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109159733A (zh) * 2018-09-10 2019-01-08 百度在线网络技术(北京)有限公司 无人车路口通行的方法、装置、设备及存储介质
CN109969077A (zh) * 2017-12-28 2019-07-05 株式会社小糸制作所 车辆用照明系统及车辆
CN112292286A (zh) * 2018-06-13 2021-01-29 里德视觉有限公司 骑乘者辅助系统和方法
CN113226848A (zh) * 2018-12-28 2021-08-06 株式会社小糸制作所 车辆用灯具
CN113396449A (zh) * 2019-02-18 2021-09-14 株式会社日立物流 辅助驾驶系统及辅助驾驶方法
CN113421449A (zh) * 2021-06-17 2021-09-21 广州小鹏汽车科技有限公司 提示方法、车载终端及车辆
CN114340951A (zh) * 2019-09-11 2022-04-12 大陆汽车有限公司 自动驾驶车辆与弱势使用者之间的交互系统

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016027289A1 (ja) * 2014-08-21 2016-02-25 三菱電機株式会社 運転支援装置、運転支援方法及びプログラム
DE112015007054B4 (de) 2015-11-20 2019-11-28 Mitsubishi Electric Corp. Fahrunterstützungsvorrichtung, fahrunterstützungssystem, fahrunterstützungsverfahren und fahrunterstützungsprogramm
JP6504040B2 (ja) * 2015-12-01 2019-04-24 株式会社デンソー 報知処理装置
CN107176161B (zh) * 2016-03-10 2021-11-23 松下电器(美国)知识产权公司 识别结果提示装置、识别结果提示方法以及自主移动体
DE102016205339A1 (de) * 2016-03-31 2017-10-05 Siemens Aktiengesellschaft Verfahren und System zum Erkennen von Hindernissen in einem Gefahrraum vor einem Schienenfahrzeug
JP6986662B2 (ja) * 2016-11-18 2021-12-22 パナソニックIpマネジメント株式会社 通知装置、自動運転車両、通知方法、プログラム、非一時的記録媒体、および通知システム
KR20180069147A (ko) * 2016-12-14 2018-06-25 만도헬라일렉트로닉스(주) 차량의 보행자 경고장치
FR3063941B1 (fr) * 2017-03-15 2020-10-30 Valeo Vision Dispositif lumineux d'identification du type de propulsion d'un vehicule automobile
JP6554131B2 (ja) * 2017-03-15 2019-07-31 株式会社Subaru 車両の表示システム及び車両の表示システムの制御方法
JP6579144B2 (ja) * 2017-03-28 2019-09-25 株式会社Soken 障害物検知装置
CN111247033B (zh) * 2017-10-19 2023-06-23 株式会社小糸制作所 车辆用灯系统
DE102017223434B4 (de) 2017-12-20 2019-08-08 Audi Ag Verkürzung von Lichtführungsfunktionen
JP7101001B2 (ja) * 2018-03-14 2022-07-14 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
US11495028B2 (en) * 2018-09-28 2022-11-08 Intel Corporation Obstacle analyzer, vehicle control system, and methods thereof
JP7352341B2 (ja) 2018-09-28 2023-09-28 株式会社小糸製作所 自動車用照明灯
JP7139902B2 (ja) * 2018-11-14 2022-09-21 トヨタ自動車株式会社 報知装置
KR102619558B1 (ko) 2018-11-16 2024-01-02 현대모비스 주식회사 자율주행차의 제어시스템 및 그 제어방법
US10897788B2 (en) * 2018-11-29 2021-01-19 Lenovo (Singapore) Pte. Ltd. Wireless connection establishment between devices
EP3892509B1 (en) * 2018-12-03 2023-07-26 Nissan Motor Co., Ltd. Vehicle travel control device and vehicle travel control method for parking
JP7202208B2 (ja) * 2019-02-13 2023-01-11 株式会社Subaru 自動運転システム
US10933803B2 (en) * 2019-03-31 2021-03-02 Gm Cruise Holdings Llc Autonomous vehicle visual based communication
US11188094B2 (en) * 2019-04-30 2021-11-30 At&T Intellectual Property I, L.P. Autonomous vehicle signaling system
LU101212B1 (en) 2019-05-15 2020-11-16 Alpha Ec Ind 2018 S A R L Bus with a safety lighting system for road users
LU101213B1 (en) * 2019-05-15 2020-11-16 Alpha Ec Ind 2018 S A R L Bus with a variable height warning signal
US10773643B1 (en) * 2019-07-29 2020-09-15 Waymo Llc Maintaining road safety when there is a disabled autonomous vehicle
FR3100650B1 (fr) 2019-09-11 2021-08-27 Continental Automotive Gmbh Système d’interaction entre un véhicule autonome et un piéton ou cycliste daltonien
WO2021237201A1 (en) 2020-05-22 2021-11-25 Optimus Ride, Inc. Display system and method
CN111798698B (zh) * 2020-06-24 2022-04-08 中国第一汽车股份有限公司 一种前方目标车辆的确定方法、装置及车辆
JP2023018497A (ja) 2021-07-27 2023-02-08 トヨタ自動車株式会社 移動体
DE102021208422A1 (de) * 2021-08-04 2023-02-09 Zf Friedrichshafen Ag Verfahren, Computerprogramm, eingebettetes System und Fahrsystem zur Kommunikation eines Fahrzeuges mit Verkehrsteilnehmern
CN114312559B (zh) * 2021-12-28 2023-01-31 东风柳州汽车有限公司 车辆行驶提醒方法、装置、设备及存储介质
CN114312560B (zh) * 2022-01-25 2024-04-02 海信集团控股股份有限公司 车辆及其喇叭控制方法

Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000132799A (ja) * 1998-10-29 2000-05-12 Mitsubishi Electric Corp 制御対象選別装置
WO2007023899A1 (ja) * 2005-08-24 2007-03-01 Pioneer Corporation 運転支援装置、運転支援方法、運転支援プログラムおよび記録媒体
JP2008143510A (ja) * 2006-11-17 2008-06-26 Toyota Central R&D Labs Inc 注意喚起照射装置
JP2010191793A (ja) * 2009-02-19 2010-09-02 Denso It Laboratory Inc 警告表示装置及び警告表示方法
EP2420986A1 (en) * 2010-08-19 2012-02-22 Koito Manufacturing Co., Ltd. Vehicle illumination system
CN102415096A (zh) * 2009-04-23 2012-04-11 本田技研工业株式会社 车辆周围监测装置
CN103578115A (zh) * 2012-07-31 2014-02-12 电装It研究所 移动体识别系统以及移动体识别方法
US20140062685A1 (en) * 2012-08-31 2014-03-06 Denso Corporation Pedestrian notification apparatus
CN104488010A (zh) * 2012-07-21 2015-04-01 奥迪股份公司 基于车外数据和车内数据警告使用者预防危险状况的机动车运行方法以及相应运行的机动车
US20150109118A1 (en) * 2012-05-09 2015-04-23 Toyota Jidosha Kabushiki Kaisha Driving assist device
CN104583888A (zh) * 2012-09-28 2015-04-29 株式会社日立制作所 自主移动装置及自主移动系统
CN104787046A (zh) * 2014-01-21 2015-07-22 哈曼国际工业有限公司 道路投影系统
DE102014200963A1 (de) * 2014-01-21 2015-07-23 Robert Bosch Gmbh Rückspiegeleinrichtung, Fahrzeug und Verfahren zum Betreiben einer Rückspiegeleinrichtung
US20150251599A1 (en) * 2014-03-04 2015-09-10 Magna Electronics Inc. Vehicle alert system utilizing communication system
WO2015156146A1 (ja) * 2014-04-09 2015-10-15 日立オートモティブシステムズ株式会社 走行制御装置、車載用表示装置、及び走行制御システム
JP2015186944A (ja) * 2014-03-26 2015-10-29 株式会社日本総合研究所 車両状態を報知する自動走行移動体及び車両状態報知方法
US20150336502A1 (en) * 2014-05-22 2015-11-26 Applied Minds, Llc Communication between autonomous vehicle and external observers
CN105280021A (zh) * 2014-06-04 2016-01-27 丰田自动车株式会社 驾驶辅助装置
CN105291984A (zh) * 2015-11-13 2016-02-03 中国石油大学(华东) 一种基于多车协作的行人及车辆检测的方法及系统
US20160052394A1 (en) * 2014-08-22 2016-02-25 Toyota Jidosha Kabushiki Kaisha In-vehicle device, control method of in-vehicle device, and computer- readable storage medium
JP2016031660A (ja) * 2014-07-29 2016-03-07 クラリオン株式会社 車両制御装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4478510B2 (ja) * 2004-06-03 2010-06-09 キヤノン株式会社 カメラシステム、カメラ、及びカメラの制御方法
US9196164B1 (en) 2012-09-27 2015-11-24 Google Inc. Pedestrian notifications
JP5927591B2 (ja) * 2013-08-07 2016-06-01 パナソニックIpマネジメント株式会社 症例表示装置、症例表示方法およびプログラム
US9517755B1 (en) * 2015-05-25 2016-12-13 Automotive Research & Testing Center Autonomous braking system and autonomous braking method
CN107176161B (zh) * 2016-03-10 2021-11-23 松下电器(美国)知识产权公司 识别结果提示装置、识别结果提示方法以及自主移动体
US10474907B2 (en) * 2016-03-10 2019-11-12 Panasonic Intellectual Property Corporation Of America Apparatus that presents result of recognition of recognition target
CN107298021B (zh) * 2016-04-15 2022-03-08 松下电器(美国)知识产权公司 信息提示控制装置、自动驾驶车及其驾驶辅助系统

Patent Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000132799A (ja) * 1998-10-29 2000-05-12 Mitsubishi Electric Corp 制御対象選別装置
WO2007023899A1 (ja) * 2005-08-24 2007-03-01 Pioneer Corporation 運転支援装置、運転支援方法、運転支援プログラムおよび記録媒体
JP2008143510A (ja) * 2006-11-17 2008-06-26 Toyota Central R&D Labs Inc 注意喚起照射装置
JP2010191793A (ja) * 2009-02-19 2010-09-02 Denso It Laboratory Inc 警告表示装置及び警告表示方法
CN102415096A (zh) * 2009-04-23 2012-04-11 本田技研工业株式会社 车辆周围监测装置
EP2420986A1 (en) * 2010-08-19 2012-02-22 Koito Manufacturing Co., Ltd. Vehicle illumination system
US20150109118A1 (en) * 2012-05-09 2015-04-23 Toyota Jidosha Kabushiki Kaisha Driving assist device
CN104488010A (zh) * 2012-07-21 2015-04-01 奥迪股份公司 基于车外数据和车内数据警告使用者预防危险状况的机动车运行方法以及相应运行的机动车
CN103578115A (zh) * 2012-07-31 2014-02-12 电装It研究所 移动体识别系统以及移动体识别方法
US20140062685A1 (en) * 2012-08-31 2014-03-06 Denso Corporation Pedestrian notification apparatus
CN104583888A (zh) * 2012-09-28 2015-04-29 株式会社日立制作所 自主移动装置及自主移动系统
CN104787046A (zh) * 2014-01-21 2015-07-22 哈曼国际工业有限公司 道路投影系统
DE102014200963A1 (de) * 2014-01-21 2015-07-23 Robert Bosch Gmbh Rückspiegeleinrichtung, Fahrzeug und Verfahren zum Betreiben einer Rückspiegeleinrichtung
US20150251599A1 (en) * 2014-03-04 2015-09-10 Magna Electronics Inc. Vehicle alert system utilizing communication system
JP2015186944A (ja) * 2014-03-26 2015-10-29 株式会社日本総合研究所 車両状態を報知する自動走行移動体及び車両状態報知方法
WO2015156146A1 (ja) * 2014-04-09 2015-10-15 日立オートモティブシステムズ株式会社 走行制御装置、車載用表示装置、及び走行制御システム
US20150336502A1 (en) * 2014-05-22 2015-11-26 Applied Minds, Llc Communication between autonomous vehicle and external observers
CN105280021A (zh) * 2014-06-04 2016-01-27 丰田自动车株式会社 驾驶辅助装置
JP2016031660A (ja) * 2014-07-29 2016-03-07 クラリオン株式会社 車両制御装置
US20160052394A1 (en) * 2014-08-22 2016-02-25 Toyota Jidosha Kabushiki Kaisha In-vehicle device, control method of in-vehicle device, and computer- readable storage medium
CN105291984A (zh) * 2015-11-13 2016-02-03 中国石油大学(华东) 一种基于多车协作的行人及车辆检测的方法及系统

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109969077A (zh) * 2017-12-28 2019-07-05 株式会社小糸制作所 车辆用照明系统及车辆
CN109969077B (zh) * 2017-12-28 2023-04-28 株式会社小糸制作所 车辆用照明系统及车辆
CN112292286A (zh) * 2018-06-13 2021-01-29 里德视觉有限公司 骑乘者辅助系统和方法
CN109159733A (zh) * 2018-09-10 2019-01-08 百度在线网络技术(北京)有限公司 无人车路口通行的方法、装置、设备及存储介质
CN109159733B (zh) * 2018-09-10 2021-01-05 百度在线网络技术(北京)有限公司 无人车路口通行的方法、装置、设备及存储介质
US11390212B2 (en) 2018-09-10 2022-07-19 Apollo Intelligent Driving (Beijing) Technology Co Method and apparatus for unmanned vehicle passing through intersection, device and storage medium
CN113226848A (zh) * 2018-12-28 2021-08-06 株式会社小糸制作所 车辆用灯具
CN113396449A (zh) * 2019-02-18 2021-09-14 株式会社日立物流 辅助驾驶系统及辅助驾驶方法
CN114340951A (zh) * 2019-09-11 2022-04-12 大陆汽车有限公司 自动驾驶车辆与弱势使用者之间的交互系统
CN113421449A (zh) * 2021-06-17 2021-09-21 广州小鹏汽车科技有限公司 提示方法、车载终端及车辆

Also Published As

Publication number Publication date
EP3216653B1 (en) 2018-10-31
US10248873B2 (en) 2019-04-02
CN107176161B (zh) 2021-11-23
US10528827B2 (en) 2020-01-07
US20190156130A1 (en) 2019-05-23
US20170262715A1 (en) 2017-09-14
EP3216653A1 (en) 2017-09-13

Similar Documents

Publication Publication Date Title
CN107176161A (zh) 识别结果提示装置、识别结果提示方法以及自主移动体
JP6933457B2 (ja) 認識結果提示装置、認識結果提示方法及び自律移動体
JP6788477B2 (ja) 認識結果提示装置及び認識結果提示方法
CN105988467B (zh) 自动驾驶装置
CN105984464B (zh) 车辆控制装置
CN105835886B (zh) 驾驶辅助装置
CN103105174B (zh) 一种基于ar增强现实技术的车载实景安全导航方法
US10474907B2 (en) Apparatus that presents result of recognition of recognition target
US7394356B2 (en) Information presenting apparatus and method
KR101680023B1 (ko) 차량에 장착된 차선 인식 시스템과 교통 표지 인식 시스템의 융합 방법
CN107615353A (zh) 汽车周边信息显示系统
US9779626B2 (en) Vehicle, and apparatus and method for controlling vehicle
CN107298021A (zh) 信息提示控制装置、自动驾驶车及其驾驶辅助系统
CN108128243A (zh) 车辆用显示装置
JP6834704B2 (ja) 走行支援装置及びコンピュータプログラム
CN107545232A (zh) 车道探测系统和方法
CN107449440A (zh) 行车提示信息的显示方法及显示装置
CN107004362A (zh) 驾驶辅助装置及驾驶辅助方法
CN106364480A (zh) 车辆控制装置
CN109643497A (zh) 通过增强现实和共享数据增强的安全性
CN107179767A (zh) 驾驶控制装置、驾驶控制方法以及非瞬时性记录介质
CN110936963A (zh) 用于显示交通信息的驾驶员辅助系统和方法
CN110796007A (zh) 场景识别的方法与计算设备
CN110371123A (zh) 车辆控制装置、车辆控制方法及存储介质
CN107111741A (zh) 用于具有摄像机的机动车的方法,设备和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant