CN115214634A - 信息提供方法、存储介质及信息提供装置 - Google Patents

信息提供方法、存储介质及信息提供装置 Download PDF

Info

Publication number
CN115214634A
CN115214634A CN202210292701.1A CN202210292701A CN115214634A CN 115214634 A CN115214634 A CN 115214634A CN 202210292701 A CN202210292701 A CN 202210292701A CN 115214634 A CN115214634 A CN 115214634A
Authority
CN
China
Prior art keywords
degree
vigilance
information providing
providing method
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210292701.1A
Other languages
English (en)
Inventor
安井裕司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN115214634A publication Critical patent/CN115214634A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/161—Decentralised systems, e.g. inter-vehicle communication
    • G08G1/162—Decentralised systems, e.g. inter-vehicle communication event-triggered
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09—Taking automatic action to avoid collision, e.g. braking and steering
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095—Predicting travel path or likelihood of collision
    • B60W30/0956—Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2300/00—Indexing codes relating to the type of vehicle
    • B60W2300/36—Cycles; Motorcycles; Scooters
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供一种能够使利用者的便利性提高的信息提供方法、存储介质及信息提供给装置。信息提供方法使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：取得图像；基于从所述图像获得的所述移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是第一警戒程度、还是警戒程度比所述第一警戒程度小的第二警戒程度；以及根据所述判定的结果，使所述终端装置的在设置有所述相机的壳体上设置的显示部显示与警戒程度相应的信息。

Description

信息提供方法、存储介质及信息提供装置
技术领域
本发明涉及信息提供方法、存储介质及信息提供装置。
背景技术
以往，已知一种具备拍摄装置和警报装置并基于由摄像装置拍摄出的图像的处理结果来向警报装置输出警报的车辆(日本特开2019-96056号公报)。
发明内容
然而，在上述的技术中，有时对于移动体的利用者而言便利性低。
本发明是考虑这样的情况而完成的，其目的之一在于提供一种能够使利用者的便利性提高的信息提供方法、存储介质及信息提供给装置。
用于解决课题的方案
本发明所涉及的信息提供方法、存储介质及信息提供装置采用了以下的结构。
(1)：信息提供方法使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：取得图像；基于从所述图像获得的所述移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及根据所述判定的结果，使所述终端装置的在设置有所述相机的壳体上设置的显示部显示与警戒程度相应的信息。
(2)：信息提供方法使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：取得图像；基于从所述图像获得的所述移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是否为规定的程度以上；以及在所述警戒程度为规定的程度以上的情况下，使所述终端装置的在设置有所述相机的壳体上设置的显示部显示表示警戒程度为规定的程度以上的信息，并且使发光部进行超车指示。
(3)：在上述(1)或(2)的方案的基础上，使所述计算机还执行如下处理：基于所述周边的状况，来判定所述操作者应该警戒的方向；以及使所述显示部显示表示所述警戒的方向的图像。
(4)：在上述(1)至(3)中的任一方案的基础上，使所述计算机还执行如下处理：在所述警戒程度为第一警戒程度的情况下，使所述显示部显示第一色彩的图像；以及在所述警戒程度是比所述第一警戒程度小的第二警戒程度的情况下，使所述显示部显示与所述第一色彩不同的第二色彩的图像。
(5)：在上述(1)至(4)中的任一方案的基础上，使所述计算机还执行如下处理：基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及根据所述判定的结果，来使所述显示部显示与所述警戒程度相应的信息。
(6)：在上述(1)至(5)中的任一方案的基础上，使所述计算机还执行如下处理：在注视的对象的交通参加者存在于距所述终端装置第一距离的范围内、或者预测为在从当前的时刻起规定时间以内存在于所述第一距离的范围内的情况下，判定为所述警戒程度是第一警戒程度；在所述交通参加者存在于距所述终端装置比所述第一距离远的第二距离的范围内、或者预测为在从当前的时刻起规定时间以内存在于所述第二距离的范围内的情况下，判定为所述警戒程度是比所述第一警戒程度小的第二警戒程度。
(7)：在上述(1)至(6)中的任一方案的基础上，使所述计算机还执行如下处理：在交通参加者存在于或者预测为存在于警戒区域的情况下，以所述警戒程度为规定的程度以上的方式使显示部显示所述信息，所述警戒区域是以基准方向为基准的规定的角度的范围的区域，在所述移动体直行的情况下，在所述移动体的前方设定所述警戒区域，在所述移动体左转的情况下，在所述移动体的前方且左方向设定所述警戒区域，在所述移动体右转的情况下，在所述移动体的前方且右方向设定所述警戒区域。
(8)：在上述(7)的方案的基础上，使所述计算机还执行如下处理：在交通参加者存在于或预测为交通参加者存在于区域a、区域b及区域c的情况下，将所述警戒程度判定为第一警戒程度，且使显示部显示关于与所述交通参加者存在或预测为存在的区域相应的所述第一警戒程度的信息；以及在交通参加者存在于或预测为交通参加者存在于区域d、区域e及区域f的情况下，将所述警戒程度判定为比所述第一警戒程度小的第二警戒程度，且使显示部显示关于与所述交通参加者存在或预测为存在的区域相应的所述第二警戒程度的信息，区域a是以基准方向为基准的第一角度的范围，且是距所述终端装置第一距离的范围，区域b是所述基准方向的左方向上的、所述第一角度与以所述基准方向为基准的比所述第一角度大的第二角度之间的范围，且是所述第一距离的范围，区域c是所述基准方向的右方向上的、所述第一角度与以所述基准方向为基准的所述第二角度之间的范围，且是所述第一距离的范围，区域d是所述第一角度与以所述基准方向为基准的所述第二角度之间的范围，且是所述第一距离与距所述终端装置比所述第一距离远的第二距离之间的范围，区域e是所述基准方向的左方向上的、所述第一角度与所述第二角度之间的范围，且是所述第一距离与所述第二距离之间的范围，区域f是所述基准方向的右方向上的、所述第一角度与所述第二角度之间的范围，且是所述第一距离与所述第二距离之间的范围。
(9)：在上述(8)的方案的基础上，使所述计算机还执行如下处理：在交通参加者存在于或预测为交通参加者存在于所述区域a、区域b或区域c的情况下，使显示部显示表示以所述第一警戒程度分别警戒所述移动体的前方方向、左方向或右方向的信息；以及在交通参加者存在于或预测为交通参加者存在于所述区域d、区域e或区域f的情况下，使显示部显示表示以所述第二警戒程度分别警戒所述移动体的前方方向、左方向或右方向的信息。
(10)：在上述(1)至(9)中的任一方案的基础上，使所述计算机还执行如下处理：基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及在存在有在所述移动体的附近存在且在与所述移动体的行进方向相同的方向上相连的物体的列的情况下，判定为是所述第三警戒程度。
(11)：在上述(10)的方案的基础上，使所述计算机还执行如下处理：在所述相连的物体间的距离为第一阈值以下、且所述相连的物体与所述移动体之间的横向距离为第二阈值以下的情况下，判定为是所述第三警戒程度。
(12)：在上述(1)至(11)中的任一方案的基础上，使所述计算机还执行如下处理：基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及在第一道路上行进的所述移动体进入与所述第一道路连接的第二道路的情况下，在所述第一道路上、在所述第一道路的延伸方向上的所述第一道路与所述第二道路之间的连接部位的前后存在有物体时，判定为是所述第三警戒程度。
(13)：在上述(12)的方案的基础上，使所述计算机还执行如下处理：在所述连接部位的前后的物体中的、正要进入所述连接部位的所述物体与所述物体的后方的物体之间的距离为第三阈值以下的情况下，判定为是所述第三警戒程度。
(14)：在上述(1)至(9)中的任一方案的基础上，使所述计算机还执行如下处理：根据警戒程度，来使基于所述计算机的指示而被控制的发光部进行超车指示。
(15)：在上述(14)的方案的基础上，所述发光部设置于移动体，且能够与所述计算机通信，该移动体是二轮车辆，使所述计算机还执行如下处理：与所述发光部通信，使所述发光部进行超车指示。
(16)：在上述(14)或(15)的方案的基础上，使所述计算机还执行如下处理：在所述警戒程度为第一警戒程度的情况下，与所述警戒程度是比所述第一警戒程度小的第二警戒程度的情况相比，缩短所述超车指示的周期。
(17)：在上述(14)至(16)中的任一方案的基础上，使所述计算机还执行如下处理：基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；在存在有在所述移动体的附近存在且在与所述移动体的行进方向相同的方向上相连的物体的列的情况下，判定为是所述第三警戒程度，或者在第一道路上行进的所述移动体进入与所述第一道路连接的第二道路的情况下，在所述第一道路上、在所述第一道路的延伸方向上的所述第一道路与所述第二道路之间的连接部位的前后存在有物体时，判定为是所述第三警戒程度；在是所述第一警戒程度或所述第二警戒程度的情况下，使所述显示部显示所述信息，并且进行所述超车指示；以及在是所述第三警戒程度的情况下，不进行所述超车指示而使所述显示部显示所述信息。
(18)：本发明的一方案的存储介质所存储的应用程序使终端装置的计算机执行如下处理：取得图像；基于从所述图像获得的移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及根据所述判定的结果，使显示部显示与警戒程度相应的信息。
(19)：本发明的一方案的信息提供装置具备：相机，其设置于壳体；显示部，其设置于所述壳体；判定部，其基于从由所述相机拍摄出的图像获得的移动体的周边的状况，来判定对于所述移动体的操作者而言警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及显示控制部，其根据所述判定的结果，来使在设置有所述相机的所述壳体上设置的显示部显示与警戒程度相应的信息。
发明效果
根据(1)-(19)，信息提供方法、存储介质所存储的应用程序或终端装置使终端装置的在设置有相机的壳体上设置的显示部显示与警戒程度相应的信息，由此能够提高利用者的便利性。
根据(2)，信息提供方法使显示部显示表示警戒程度为规定的程度以上这一情况的信息，并且进行超车指示，由此能够对移动体的操作者和移动体的周边进行报告。
根据(3)，信息提供方法使显示部显示操作者应该警戒的方向，由此操作者能够容易地识别应该警戒的方向，能够采取抑制与物体接近的行动。
根据(4)，信息提供方法使显示部显示与警戒程度相应的信息，由此利用者能够容易地识别警戒程度。
根据(7)，信息提供方法根据移动体的行进方向来设定恰当的警戒区域，由此能够使显示部显示与更为恰当的警戒程度相应的信息。
根据(8)或(9)，信息提供方法使显示部显示与应该警戒的区域相应的信息，由此能够进一步向操作者提供有益的信息。
根据(10)或(11)，信息提供方法例如在车辆拥堵而形成有车列的状况下，判定交通参加者从车辆与车辆之间接近过来的可能性，由此能够向利用者通知交通参加者接近过来的可能性。其结果是，利用者能够采取用于避免与存在接近过来的可能性的交通参加者接近的行动。
根据(12)或(13)，信息提供方法例如在交叉路口附近车辆拥堵而形成有车列的状况下，判定交通参加者从拥堵着的车辆的横向接近过来的可能性，由此能够向利用者通知交通参加者接近过来的可能性。其结果是，利用者能够采取用于避免与存在接近过来的可能性的交通参加者接近的行动。
根据(14)-(17)，信息提供方法根据警戒程度来进行超车指示，由此能够使周边的交通参加者等识别移动体的存在。
附图说明
图1是用于说明支援系统的概要的图。
图2是表示与支援相关的场景的一例的图。
图3是表示与支援相关的场景的另一例的图。
图4是表示与支援相关的场景的另一例的图。
图5是表示与支援相关的场景的另一例的图。
图6是表示支援系统的功能结构的一例的图。
图7是表示安装于本车辆的终端装置的一例的图。
图8是表示终端装置的功能部等结构的一例的图。
图9是表示由应用程序(终端装置)执行的处理的流程的一例的流程图。
图10是表示在终端装置的显示部显示的图像的一例的图。
图11是用于说明与移动量的推定相关的处理的图。
图12是用于说明与姿势的判定相关的处理的图。
图13是表示由处理部执行的处理的流程的一例的流程图。
图14是用于说明检知交通参加者的处理的图。
图15是用于说明对检知到的交通参加者的行动进行预测的处理的图。
图16是表示直行时的风险的定义的一例的图。
图17是表示判定本车辆直行时的风险的处理的一例的图。
图18是表示左转时的风险的定义的一例的图。
图19是表示判定本车辆左转时的风险的处理的一例的图。
图20是表示右转时的风险的定义的一例的图。
图21是表示判定本车辆右转时的风险的处理的一例的图。
图22是用于说明推定潜在风险的处理的一例的图。
图23是表示由处理部执行的处理的流程的一例的流程图。
图24是表示与警报/注意相关的处理的流程的一例的流程图。
图25是用于说明产生前方向警报风险的场景及通知的图。
图26是用于说明产生左方向警报风险或右方向警报风险的场景及通知的图。
图27是用于说明产生注意风险的场景及通知的图。
图28是用于说明产生潜在风险的场景及通知的图。
具体实施方式
以下，参照附图来说明本发明的实施方式所涉及的存储介质、信息提供方法及终端装置。
以下，参照附图来说明本发明的实施方式所涉及的信息提供方法、存储介质及信息提供装置。
[概要1]
图1是用于说明支援系统1的概要的图。在本实施方式中，作为一例，说明移动体是二轮车辆(以下，有时称作“本车辆”)的情况，但也可以适用于轻型车辆、三轮的车辆等各种移动体。以下，有时将本车辆的前后方向称作X方向，将与前后方向正交的方向称作Y方向，将与X方向及Y方向正交的方向称作Z方向。
支援系统1包括超车指示灯PL、终端装置(例如智能手机)SP、以及安装于终端装置SP的应用程序AP。超车指示灯PL例如在前照灯的周边等以灯朝向正X方向(前方向)发光(超车指示：passing)的方式安装。超车指示灯PL中的超车指示灯PL-R安装于车辆的正Y方向，超车指示灯PL中的超车指示灯PL-L安装于车辆的负Y方向。
在终端装置SP上，在终端装置SP的第一面搭载有相机及灯，在与第一面相反一侧的第二面显示有显示部。终端装置SP安装于本车辆。终端装置SP安装于相机能够对车辆的正X方向进行拍摄、且灯朝向正X方向发光(超车指示)这样的位置。终端装置SP设置于驾驶员(操作者)能够视觉辨识显示部的位置。
支援系统1使用终端装置SP的闪光灯及超车指示灯PL中的一方或双方来对交通参加者进行超车指示。支援系统1进一步使终端装置SP的显示部显示警报。以下，有时将进行超车指示、使警报显示这两方称作“支援”。
例如，二轮车辆存在制动距离长的倾向，因此存在避免与交通参加者的接近的能力低的倾向。支援系统1为了抑制与交通参加者的接近，早期向驾驶员报告与交通参加者的接近，通过由超车指示灯进行的自动超车指示来向交通参加者传达接近的可能性，并委托对于接近的抑制的协力(减速、停止、躲避等)。
支援系统1如图2所示进行抑制迎头撞上的接近的支援。例如，支援系统1进行用于避免本车辆与行人、二轮车辆或四轮车辆接近的支援。
支援系统1如图3所示进行抑制在交叉路口与交通参加者接近的支援。支援系统1如图4所示进行抑制在四轮车辆拥堵中本车辆从四轮车辆的横向挤过时与交通参加者接近的支援，或者进行抑制与停止于前方的交通参加者接近的支援。
支援系统1如图5所示进行抑制基于潜在风险的接近的支援。支援系统1例如抑制在四轮车辆拥堵中本车辆右转时的风险，或者抑制交通参加者从停车车辆的后方突然跑过来的风险。例如，在本实施方式中，如图5的右图那样，存在有在本车辆的附近存在且在与本车辆的行进方向相同的方向上相连的物体(四轮车辆)的列的情况下，判定为存在潜在风险。在本实施方式中，如图5的左图那样，在第一道路上行进的本车辆进入与第一道路连接的第二道路(在第一道路右转而进入第二道路)的情况下，在第一道路上、在第一道路的延伸方向上的第一道路与第二道路的连接部位(交叉路口)的前后存在有物体(四轮车辆)时，判定为存在潜在风险。以下，说明它们的详细情况。
[支援系统的功能结构]
图6是表示支援系统1的功能结构的一例的图。支援系统1例如如在图1中说明的那样，具备终端装置SP和超车指示灯PL。例如，超车指示灯PL及终端装置SP通过电力线与本车辆M的蓄电池BT连接，从蓄电池BT接受电力的供给而工作。终端装置SP也可以经由超车指示灯PL从蓄电池BT接受电力的供给而工作，也可以通过搭载于终端装置SP的蓄电池的电力来工作。
终端装置SP和超车指示灯PL由通信线连接，能够互相通信线。例如，终端装置SP发送使超车指示灯PL动作的执行信号，超车指示灯PL根据该执行信号来执行超车指示。
终端装置SP如图7所示由保持件安装于本车辆。例如，安装成终端装置SP的相机Cam对正X方向进行拍摄，终端装置SP的灯Lig朝向正X方向发光，而且显示部Dis面向负X方向。
图8是表示终端装置SP的功能部等结构的一例的图。终端装置SP例如具备取得部10、处理部20、通知部30及存储部50。取得部10、处理部20及通知部30例如通过CPU(CentralProcessing Unit)等硬件处理器执行存储于存储部50的应用程序AP(软件)来实现。应用程序AP例如由提供应用程序AP的服务器装置提供。该应用程序AP例如也可以是制造、销售本车辆的运营商提供。应用程序AP例如包括作为DNN(Deep Neural Network)52发挥功能的信息，关于该DNN的详细情况，见后述。
上述的功能部的构成要素中的一部分或全部也可以通过LSI(Large ScaleIntegration)、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等硬件(包括电路部：circuitry)来实现，也可以通过软件与硬件的协同配合来实现。应用程序AP也可以如上所述预先保存于存储部50的闪存器等存储装置(具备非暂时性的存储介质的存储装置)，也可以保存于SD卡等能够装卸的存储介质，并通过存储介质(非暂时性的存储介质)装配于终端装置SP而安装于终端装置SP的存储部。
取得部10取得由相机Cam拍摄出的图像。处理部20对图像进行解析，并基于解析的结果来执行各种处理。通知部30基于处理部20的处理结果，向驾驶员进行表示警报、注意等的警告。关于它们的处理的详细情况，见后述。
[流程图]
图9是表示由应用程序(终端装置SP)执行的处理的流程的一例的流程图。首先，终端装置SP推定移动量(步骤S100)，并推定姿势(步骤S110)。移动量是指交通参加者的移动量或本车辆的移动量。姿势是指本车辆的姿势。
接着，终端装置SP检知交通参加者(步骤S120)，并预测所检知到的交通参加者的行动(步骤S130)。接着，终端装置SP检知直行时的本车辆的风险(步骤S140)，检知左转时的风险(步骤S150)，并检知右转时的风险(步骤S160)。接着，终端装置SP检知潜在风险(步骤S170)。接着，终端装置SP执行判定处理(步骤S180)。
终端装置SP在上述的判定处理中，根据判定的结果，使终端装置SP的显示部显示图10所示那样的警报等级报告或注意等级报告。警报等级报告或注意等级报告是与前方相关的报告、与左方或左前相关的报告、与右方或右前相关的报告等。由此，本流程图的1例程的处理结束。以下说明这些处理的详细情况。
[移动量的推定]
图11是用于说明与移动量的推定相关的处理的图。终端装置SP的取得部10取得由相机Cam拍摄出的时间序列(k…k-n)的图像(“在不同的时刻拍摄出的图像”)(步骤S101)。接着，终端装置SP的处理部20导出所取得的图像中的、当前的时刻拍摄出的图像与i时间前拍摄出的图像之间的差量(步骤S102)。接着，处理部20将所导出的差量二值化(步骤S104)，并求全像素值的总和(步骤S106)。全像素值的总和是指判定为存在差量的像素的总和。例如，处理部20按每个像素导出亮度值的差量，并根据所导出的差量是阈值以上还是小于阈值，来将差量二值化。例如，差量为阈值以上的像素由黑表现，差量小于阈值的像素由白表现。也可以使用RGB成分的差量。在该情况下，也可以比较将各成分的差量统计性地处理而得到的值与阈值而按每个像素进行二值化。
例如，在本车辆未移动的情况(停车的情况)下，由于图像间的差量小(由于类似度高)，因此在将差量二值化时白色度变大，例如，在本车辆移动的情况下，由于差量大(由于类似度低)，因此在将差量二值化时白色度变小。
接着，处理部20判定全像素值的总和是否为阈值以下(步骤S108)。在总和为阈值以下的情况(白色度大的情况)下，处理部20判定为本车辆停止(F_RUN＝0)(步骤S110)。在总和不是阈值以下的情况(白色度小的情况)下，处理部20判定为本车辆行驶中或周边的交通参加者的移动量大(F_RUN＝1)(步骤S110)。
如上述那样，终端装置SP能够基于图像容易地判定本车辆的状态、交通参加者的状态。
[姿势的推定]
图12是用于说明与姿势的判定相关的处理的图。处理部20从时间序列的图像中的k时刻的图像中截出矩形区域AR1。该矩形区域AR1是以图像的中央部为中心的区域、且是将图像的基准位置(例如重心等)设定为中心的区域。处理部20从时间序列的图像中的k-i时刻的图像中截出与k时刻的图像所拍摄出的区域相同或近似的区域，并将截出的区域的图像以接近k时刻的图像的方式放大。该处理是“使从在所述第一时刻拍摄出的图像中截出特定的区域得到的截出图像的大小接近于在所述第二时刻拍摄出的图像的大小的”处理的一例。
关于上述的图像的放大，也可以如以下这样决定图像的放大量。例如，在通过对终端装置SP的位置进行测定的测位装置而获得本车辆的移动速度的情况下，处理部20也可以根据本车辆的速度，以i采样时刻的移动量的量放大图像。例如，处理部20参照将速度与放大程度建立了对应关系的信息来放大图像。例如，处理部20也可以在如上述那样获得了速度的情况下，以与速度相应的放大程度放大图像，在未获得速度的情况下，将图像放大规定值的量。
也可以代替上述的放大的处理，通过图像处理以使k时刻的图像的拍摄范围与k-1时刻的图像的拍摄范围吻合的方式进行调整。处理部20例如也可以从k时刻的图像和k-1时刻的图像取得包含规定的风景在内的区域，并将从k时刻的图像取得的包含上述的区域在内的图像的大小以接近于从k-1时刻的图像取得的包含上述的区域在内的图像的大小的方式缩小。
接着，处理部20取得使放大后的图像以基准位置为起点向左方向及右方向各旋转规定角度而得到的多个图像。例如，取得以图像的基准位置为中心沿逆时针方向、顺时针方向旋转而得到的图像。根据旋转程度而对图像赋予参数ID。例如，取得赋予了参数ID正1…正n的向左方向旋转得到的图像及赋予了参数ID负1…负n的向右方向旋转得到的图像。
处理部20在以赋予了参数ID的图像的中央部为中心的区域设定矩形区域AR2。矩形区域AR2例如是与矩形区域AR1对应的区域。矩形区域AR2是不受图像的旋转的影响而以图像的中央部为中心将图像的基准位置设定为中心的区域。
接着，处理部20将k时刻的矩形区域AR1的图像(“第二图像”的一例)与赋予了参数ID的矩形区域AR1的图像(“第一图像”的一例)分别进行比较而导出差量。接着，处理部20将导出的差量分别二值化，并针对各个图像求全像素值的总和。而且，处理部20选择全像素的总和(判定为存在差量的像素的总和)成为最小的图像的参数ID。
在k时刻及k-i时刻，本车辆直行着的情况下，选择图12的参数ID“0”。在k-i时刻及k时刻，本车辆正要左转的情况下，例如选择图12的参数ID“+n”，在k-i时刻及k时刻，本车辆正要右转的情况下，例如选择图12的参数ID“-n”。
图13是表示由处理部20执行的处理的流程的一例的流程图。首先，处理部20判定参数ID是否比阈值+a大(步骤S110)。在参数ID比阈值+a大的情况下，图像正在左旋转，因此，处理部20判定为本车辆存在左转意图(步骤S112)。判定为“F_LTURN＝1”、“F_RTURN＝0”。
在参数ID不比阈值+a大的情况下，处理部20判定参数ID是否比阈值-a小(步骤S114)。在参数ID比阈值-a小的情况下，图像正在右旋转，因此，处理部20判定为本车辆存在右转意图(步骤S116)。判定为“F_LTURN＝0”、“F_RTURN＝1”。
在参数ID不比阈值-a小的情况下，处理部20判定为是本车辆直行的意图(步骤S118)。判定为“F_LTURN＝0”、“F_RTURN＝0”。由此，本流程图的1例程结束。
如上述那样，终端装置SP能够基于在不同的时刻拍摄出的图像，精度良好地判定本车辆是否存在右转、左转或直行的意图。
也可以是，处理部20代替上述的处理(或在此基础上还)基于搭载于终端装置SP的能够检知终端装置SP的倾斜的加速度传感器的检知结果，来判定本车辆的左转的意图、右转的意图或直行的意图。例如，处理部20也可以判定为本车辆存在向终端装置SP所倾斜的方向转弯的意图。
在上述例子中，说明了准备多个各旋转规定角度而得到的图像的情况，但也可以将向左方向旋转而得到的一个图像及向右方向旋转而得到的一个图像分别与在k时刻拍摄出的图像进行比较，判定为本车辆正要向与差异小的一方的图像对应的方向行进。在上述的例子中，说明了将图像的中央部彼此进行比较的情况，但也可以代替中央部而比较其他区域。而且，在拍摄图像的间隔为规定值以下、调整时间序列的图像中的k-i时刻的图像或k时刻的图像的大小的处理(例如放大k-1时刻的图像的处理)也可以省略，在能够精度良好地判定本车辆的右转、左转或直行的意图的情况下，也可以省略上述的处理。
[检知交通参加者]
图14是用于说明检知交通参加者的处理的图。处理部20利用DNN52来确定图像中的交通参加者的类别。DNN52是当输入图像时输出表示图像所包含的交通参加者的类别的信息、用于确定该交通参加者的位置的信息的学习完毕模型。交通参加者的类别例如是指四轮车辆、二轮车辆、自行车、行人等类别。作为用于确定位置的信息，例如，交通参加者与作为矩形的区域的检测框建立对应关系。该检测框例如是以包含交通参加者的方式设定的区域。
[预测所检知到的交通参加者的行动的处理]
图15是用于说明对检知到的交通参加者的行动进行预测的处理的图。处理部20基于在通过不同的时刻而拍摄出的图像中确定出的交通参加者的位置的变化，来推定交通参加者的移动方向，并基于推定的结果，来预测交通参加者的行动。
处理部20在与从k时刻的图像得到的交通参加者建立了对应关系的检测框相对于与从k-1时刻的图像得到的交通参加者建立了对应关系的检测框放大的情况下，判定为本车辆与交通参加者存在靠近的倾向。在该情况下，例如，交通参加者靠近本车辆，或者本车辆靠近交通参加者。
处理部20在与从k时刻的图像得到的交通参加者建立了对应关系的检测框相对于与从k-1时刻的图像得到的交通参加者建立了对应关系的检测框缩小的情况下，判定为本车辆与交通参加者存在远离的倾向。在该情况下，例如，交通参加者远离本车辆，或者本车辆远离交通参加者。处理部20基于检测框的放大量、缩小量，来推定交通参加者的移动量。
处理部20在k时刻的检测框的位置相对于k-1时刻的检测框的位置向右移动的情况下，判定为交通参加者向右移动，在k时刻的检测框的位置向左移动的情况下，判定为交通参加者向左移动。处理部20基于检测框的移动量，来推定交通参加者的移动量。
处理部20如上述那样，推定交通参加者的移动方向及移动量，并预测交通参加者的行动。处理部20基于k-1时刻的交通参加者的位置及k时刻的交通参加者的位置的检测结果，来预测将来的交通参加者的位置。
[检知风险的处理]
(关于直行时的风险)
图16是表示直行时的风险的定义的一例的图。直行时的风险(直行风险)在本车辆的前方的规定的范围设定。以本车辆的行进方向或道路的延伸方向(基准方向)的线段(d1)为基准在第一角度范围设定直行风险。以行进方向的线段为基准比第一角度小的第二角度范围是前方风险范围。第一角度范围与第二角度范围之间的范围中，左方向的范围是左方风险范围，右方向的范围是右方风险范围。上述的风险范围中的距本车辆第一距离的范围是警戒等级范围，距本车辆第二距离的范围是注意等级范围。
以下，有时将以基准方向(行进方向)为基准的第一角度范围、且第一距离的范围的区域称作“区域a”，将左方向的第一角度与第二角度(也可以是与上述的第二角度不同的角度。以下同样。)之间的范围、且第一距离的范围的区域称作“区域b”，将右方向的第一角度与第二角度之间的范围、且第一距离的范围的区域称作“区域c”(参照后述的图17、图19、图21)。
有时将以基准方向(行进方向)为基准的第一角度与第二角度之间的范围、且第一距离与第二距离之间的范围的区域称作“区域d”，将左方向的第一角度与第二角度之间的范围、且第一距离与第二距离之间的范围的区域称作“区域e”，将右方向的第一角度与第二角度之间的范围、且第一距离与第二距离之间的范围的区域称作“区域f”(参照后述的图17、图19、图21。
图17是表示判定本车辆直行时的风险的处理的一例的图。处理部20基于上述的处理的结果，来判定本车辆是否直行(步骤S300)。在本车辆未直行的情况下，进入后述的图19的步骤S400的处理。
在本车辆直行的情况下，处理部20判定本车辆的风险存在于区域a-区域e中的哪个区域。例如，处理部20在上述的处理中判定对象的交通参加者(例如存在于距本车辆最近的位置的交通参加者)的位置(对象位置)或交通参加者的将来的位置(对象位置)位于区域a-区域e中的哪个区域。图中，“★”是对象位置。
例如，在对象位置位于区域a的情况下，赋予标志“F_FR＝1”，在对象位置位于区域b的情况下，赋予标志“F_LR＝1”，在对象位置位于区域c的情况下，赋予标志“F_RR＝1”。
例如，在对象位置位于区域d的情况下，赋予标志“F_FC＝1”，在对象位置位于区域d的情况下，赋予标志“F_LC＝1”，在对象位置位于区域e的情况下，赋予标志“F_RC＝1”。上述以外的情况赋予其他的标志＝0。
(关于左转时的风险)
图18是表示左转时的风险的定义的一例的图。左转时的风险(左转风险)将本车辆的左前方设定为中心。直行风险以本车辆的行进方向为基准方向设定了风险，左转风险代替行进方向的线段而以使本车辆的行进方向的线段向左方向旋转规定角度而得到的线段(dL)为基准方向，来设定风险。规定角度是例如30度-60度的范围内的角度、根据道路的形状而设定的角度。
图19是表示判定本车辆左转时的风险的处理的一例的图。处理部20基于上述的处理的结果，来判定本车辆是否左转中或存在左转意图(步骤S400)。在本车辆未处于左转中且也不存在左转的意图的情况下，进入图21的步骤S500的处理。在本车辆左转中或存在左转的意图的情况下，处理部20判定本车辆的风险存在于区域a-区域e中的哪个区域。
如图17所说明的那样，在对象位置与区域的关系中，赋予标志“F_FR＝1”、标志“F_LR＝1”、标志“F_RR＝1”、标志“F_FC＝1”、标志“F_LC＝1”、标志“F_RC＝1”或其他的标志＝0。
(关于右转时的风险)
图20是表示右转时的风险的定义的一例的图。右转时的风险(右转风险)将本车辆的右前方设定为中心。直行风险以本车辆的行进方向为基准方向设定了风险，右转风险代替行进方向的线段而以使本车辆的行进方向的线段向右方向旋转规定角度而得到的线段(dR)为基准方向，来设定风险。规定角度例如是30度-60度的范围内的角度、根据道路的形状而设定的角度。
图21是表示判定本车辆右转时的风险的处理的一例的图。处理部20基于上述的处理的结果，来判定本车辆是否为右转中或存在右转的意图(步骤S500)。在本车辆未处于右转中且也不存在右转的意图的情况下，进入图23的步骤S600的处理。在本车辆右转中或存在右转的意图的情况下，处理部20判定本车辆的风险存在于区域a-区域e中的哪个区域。
如图17所说明的那样，在对象位置与区域的关系中，赋予标志“F_FR＝1”、标志“F_LR＝1”、标志“F_RR＝1”、标志“F_FC＝1”、标志“F_LC＝1”、标志“F_RC＝1”或其他的标志＝0。
如上述那样，处理部20在本车辆直行的情况下，在本车辆的前方设定风险(警戒区域)，在本车辆左转的情况下，在本车辆的前方且左方向没定风险，在本车辆右转的情况下，在本车辆的前方且右方向设定风险，由此能够设定与本车辆的行进方向相应的恰当的风险。
[潜在风险的推定]
图22是用于说明推定潜在风险的处理的一例的图。处理部20基于图像的其他车辆的位置，来检测平均车间距离Lvv_ave及横向距离Lev。平均车间距离Lvv_ave例如是检测出的从本车辆到存在于其他车辆侧的规定的车辆(例如全部车辆)的平均车间距离。其他车辆是指存在于距本车辆最近的位置的车辆。车辆间的车间距离例如是在行进方向上形成列的车辆的基准位置彼此的距离。在车辆仅存在1台的情况下，车间距离设定为预先设定的距离(例如，30m)等大的值。
横向距离Lev是本车辆与其他车辆之间的横向的距离。关于其他车辆，例如，其他车辆是存在于距本车辆最近的位置的车辆。上述的平均车间距离Lvv_ave及横向距离Lev在以下的与潜在风险的推定相关的处理中使用。
图23是表示由处理部20执行的处理的流程的一例的流程图。处理部20判定平均车间距离Lvv_ave是否为阈值Lvv_LR(步骤S600)。平均车间距离Lvv_ave例如是接下来正要进入交叉路口(第一道路与第二道路的连接部位)的第一物体与该第一物体的后方的第二物体之间的纵向的距离、或基于从第一物体到存在于比第二物体靠后方的位置的第n物体为止的各个物体的车间距离而得到的平均车间距离。在步骤S600中，也可以判定是否其他车辆停止、且平均车间距离Lvv_ave为阈值Lvv_LR。为了在本处理中降低运算负荷，省略其他车辆是否停止的判定处理，在平均车间距离Lvv_ave为阈值Lvv_LR的情况下，代替地判定为其他车辆停止。在平均车间距离Lvv_ave不是阈值Lvv_LR的情况下，进入图24的步骤S700的处理。
在平均车间距离Lvv_ave为阈值Lvv_LR的情况下，处理部20判定本车辆是否右转中或存在右转的意图(步骤S602)。在本车辆右转中或存在右转的意图的情况下，处理部20判定为在左方向存在潜在风险(步骤S604)。在左方向存在潜在风险的情况下，设定标志“F_LLR＝1”。
在本车辆未处于右转中或不存在右转的意图的情况下，处理部20判定本车辆是否左转中或存在左转的意图(步骤S606)。在本车辆左转中或存在左转的意图的情况下，处理部20判定为在右方向存在潜在风险(步骤S608)。在右方向存在潜在风险的情况下，设定标志“F_RLR＝1”。
在本车辆左转的情况下，存在交通参加者从左方向向本车辆接近过来的可能性，但由于车辆的驾驶员能够在左转前从车辆与车辆之间的间隙识别存在接近过来的可能性的交通参加者的存在，因此，在此着眼于难以识别出的从右侧接近过来的交通参加者。驾驶员在左转时着眼于左方向，不能否定由于驾驶员使面部向该侧移动而驾驶员的驾驶变得不稳定的可能性，因此为了抑制该可能性，而着眼于右侧。
在本车辆未处于左转中或不存在左转的意图的情况下，处理部20判定横向距离|Lev|是否小于阈值Lev_LR(步骤S610)。在横向距离|Lev|小于阈值Lev_LR的情况下，处理部20判定为在本车辆的前方存在潜在风险(步骤S612)。在前方存在潜在风险的情况下，设定标志“F_FLR＝1”。
在横向距离|Lev|不小于阈值Lev_LR的情况下，处理部20判定为在前方不存在潜在风险(步骤S614)。在该情况下，设定标志“F_LLR＝0”、“F_RLR＝0”及“F_FLR＝0”。
[与警报/注意相关的处理]
图24是表示与警报/注意相关的处理(判定处理)的流程的一例的流程图。处理部20判定本车辆是否处于移动中(步骤S700)。在本车辆未处于移动中的情况下，本流程图的1例程结束。
(与警报风险相关的处理)
在本车辆处于移动中的情况下，处理部20判定是否存在前方警报风险(步骤S702)。在不存在前方警报风险的情况下，处理部20判定是否存在左方向警报风险(步骤S704)。在不存在左方向警报风险的情况下，处理部20判定是否存在右方向警报风险(步骤S706)。
在存在前方警报风险、左方向警报风险或右方向警报风险的情况下，通知部30进行与警报风险相应的显示(步骤S708)，进一步进行第一方式的超车指示(步骤S710)。在如前述的图17、图19、图21所说明的那样设定有标志“F_FR＝1(存在前方警报风险的标志)”、“F_LR＝1(存在左方向警报风险的标志)”或“F_RR＝1(存在右方向警报风险的标志)”的情况下，执行步骤S708及步骤S710的处理。关于它们的详细情况，参照后述的图25、图26来说明。
(与注意风险相关的处理)
在不存在右方向警报风险的情况下，处理部20判定是否存在前方注意风险(步骤S712)。在不存在前方注意风险的情况下，处理部20判定是否存在左方向注意风险(步骤S714)。在不存在左方向注意风险的情况下，处理部20判定是否存在右方向注意风险(步骤S716)。
在存在前方注意风险、左方向注意风险或右方向注意风险的情况下，通知部30进行与注意风险相应的显示(步骤S718)，进一步进行第二方式的超车指示(步骤S720)。在如前述的图17、图19、图21所说明的那样设定有标志“F_FC＝1(存在前方注意风险的标志)”、“F_LC＝1(存在左方向注意风险的标志)”或“F_RC＝1(存在右方向注意风险的标志)”的情况下，执行步骤S718及步骤S720的处理。关于它们的详细情况，参照后述的图27来说明。
(与潜在风险相关的处理)
在不存在右方向注意风险的情况下，处理部20判定是否存在前方潜在风险(步骤S722)。在不存在前方潜在风险的情况下，处理部20判定是否存在左方向潜在风险(步骤S724)。在不存在左方向潜在风险的情况下，处理部20判定是否存在右方向潜在风险(步骤S726)。
在存在前方潜在风险、左方向潜在风险或右方向潜在风险的情况下，通知部30进行与潜在风险相应的显示(步骤S728)。在如前述的图17、图19、图21所说明的那样设定有标志“F_FLR＝1(存在前方潜在风险的标志)”、“F_LLR＝1(存在左方向潜在风险的标志)”或“F_RLR＝1(存在右方向潜在风险的标志)”的情况下，执行步骤S728的处理。关于它们的详细情况，参照后述的图28来说明。由此本流程图的1例程的处理结束。
[与警报风险(第一警戒程度)相应的通知]
图25是用于说明产生前方向警报风险的场景及通知的图。在前方向存在警报风险的情况下，通知部30使显示部显示表示在前方向存在警报风险的警报信息，进一步执行第一方式的超车指示。该警报显示是如图示那样示出前方向的箭头(例如红色的箭头)等规定的显示。第一方式是使超车指示灯PL以高周期发光的方式。
图26是用于说明产生左方向警报风险或右方向警报风险的场景及通知的图。在左方向存在警报风险的情况下，通知部30使显示部显示表示在左方向存在警报风险的警报信息，进一步执行第一方式的超车指示。该警报显示是如图示那样示出左方向的箭头(例如红色的箭头)等规定的显示。
在右方向存在警报风险的情况下，通知部30使显示部显示表示在右方向存在警报风险的警报信息，进一步执行第一方式的超车指示。该警报显示是如图示那样示出右方向的箭头(例如红色的箭头)等规定的显示。
[与注意风险(第二警戒程度)相应的通知]
图27是用于说明产生注意风险的场景及通知的图。在前方向存在注意风险的情况下，通知部30使显示部显示表示在前方向存在注意风险的注意信息，进一步执行第二方式的超车指示。该注意显示是如图示那样示出前方向的箭头(例如黄色的箭头)等规定的显示。第二方式是使超车指示灯PL以低周期发光的方式。
在左方向存在注意风险的情况下，通知部30使显示部显示表示在左方向存在注意风险的注意信息，进一步执行第二方式的超车指示。该注意显示是如图示那样示出左方向的箭头(例如黄色的箭头)等规定的显示。
在右方向存在注意风险的情况下，通知部30使显示部显示表示在右方向存在注意风险的注意信息，进一步执行第二方式的超车指示。该注意显示是如图示那样示出右方向的箭头(例如黄色的箭头)等规定的显示。如上述那样，在存在注意风险的情况下显示于显示部的图像(箭头等表示警戒的图像)的色彩与在存在警报风险的情况下显示于显示部的图像(箭头等表示警戒的图像)的色彩不同。
[与潜在风险(第三警戒程度)相应的通知]
图28是用于说明产生潜在风险的场景及通知的图。在前方向存在潜在风险的情况下，通知部30使显示部显示表示在前方向存在潜在风险的潜在风险信息。该潜在风险显示是如图示那样示出前方向的箭头(例如黄色的箭头)等规定的显示。
在左方向存在潜在风险的情况下，通知部30使显示部显示表示在左方向存在潜在风险的警报信息。该潜在风险显示是如图示那样示出前方向的箭头(例如黄色的箭头)等规定的显示。在存在潜在风险的情况下，也有时不存在接近过来的交通参加者，因此不执行超车指示。
在上述的例子中，说明了相机及显示部设置于终端装置SP的情况，但也可以是，相机或显示部的一方或双方不设置于终端装置SP而设置于其他装置、移动体等。在该情况下，终端装置SP与其他装置、移动体进行通信，取得图像或者使显示部显示信息。
在上述的实施方式中，说明了判定是第一警戒程度还是第二警戒程度，并在第一警戒程度和第二警戒程度中提供不同的信息的情况，但也可以代替于此(或在此基础上还是)，应用程序不判定是第一警戒程度还是第二警戒程度，在是应该警戒的状况的情况下(警戒程度为规定的程度以上的情况下)，使显示部显示与警戒相关的信息。而且，在该情况下，应用程序也可以执行超车指示。应该警戒的状况是指，是第一警戒程度的状况、是第二警戒程度的状况或存在潜在风险的状况。
根据以上说明的实施方式，应用程序使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：取得图像；基于从图像获得的移动体的周边的状况，来判定对于移动体的操作者而言的警戒程度是第一警戒程度还是警戒程度比第一警戒程度小的第二警戒程度；以及根据判定的结果，使终端装置的在设置有相机的壳体上设置的显示部显示与警戒程度相应的信息，由此能够使利用者的便利性提高。
根据以上说明的实施方式，应用程序使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：取得在不同的时刻拍摄出的图像；基于在不同的时刻拍摄出的图像，来推定移动体是否存在右转或左转的意图；基于推定的结果，来使终端装置的在设置有所述相机的壳体上设置的显示部显示与交通参加者的存在相关的报告的图像，由此能够更加精度良好地推定移动体的行动的意图。
以上使用实施方式说明了本发明的具体实施方式，但本发明丝毫不被这样的实施方式限定，在不脱离本发明的主旨的范围内能够施加各种变形及替换。

Claims (19)

1.一种信息提供方法，其中，
所述信息提供方法使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：
取得图像；
基于从所述图像获得的所述移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及
根据所述判定的结果，使所述终端装置的在设置有所述相机的壳体上设置的显示部显示与警戒程度相应的信息。
2.一种信息提供方法，其中，
所述信息提供方法使搭载有相机且安装于移动体的终端装置的计算机执行如下处理：
取得图像；
基于从所述图像获得的所述移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是否为规定的程度以上；以及
在所述警戒程度为规定的程度以上的情况下，使所述终端装置的在设置有所述相机的壳体上设置的显示部显示表示警戒程度为规定的程度以上的信息，并且使发光部进行超车指示。
3.根据权利要求1或2所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
基于所述周边的状况，来判定所述操作者应该警戒的方向；以及
使所述显示部显示表示所述警戒的方向的图像。
4.根据权利要求1至3中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在所述警戒程度为第一警戒程度的情况下，使所述显示部显示第一色彩的图像；以及
在所述警戒程度是比所述第一警戒程度小的第二警戒程度的情况下，使所述显示部显示与所述第一色彩不同的第二色彩的图像。
5.根据权利要求1至4中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及
根据所述判定的结果，来使所述显示部显示与所述警戒程度相应的信息。
6.根据权利要求1至5中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在注视的对象的交通参加者存在于距所述终端装置第一距离的范围内、或者预测为在从当前的时刻起规定时间以内存在于所述第一距离的范围内的情况下，判定为所述警戒程度是第一警戒程度；以及
在所述交通参加者存在于距所述终端装置比所述第一距离远的第二距离的范围内、或者预测为在从当前的时刻起规定时间以内存在于所述第二距离的范围内的情况下，判定为所述警戒程度是比所述第一警戒程度小的第二警戒程度。
7.根据权利要求1至6中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在交通参加者存在于或者预测为存在于警戒区域的情况下，以所述警戒程度为规定的程度以上的方式使显示部显示所述信息，所述警戒区域是以基准方向为基准的规定的角度的范围的区域，
在所述移动体直行的情况下，在所述移动体的前方设定所述警戒区域，
在所述移动体左转的情况下，在所述移动体的前方且左方向设定所述警戒区域，
在所述移动体右转的情况下，在所述移动体的前方且右方向设定所述警戒区域。
8.根据权利要求7所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在交通参加者存在于或预测为交通参加者存在于区域a、区域b及区域c的情况下，将所述警戒程度判定为第一警戒程度，且使显示部显示关于与所述交通参加者存在或预测为存在的区域相应的所述第一警戒程度的信息；以及
在交通参加者存在于或预测为交通参加者存在于区域d、区域e及区域f的情况下，将所述警戒程度判定为比所述第一警戒程度小的第二警戒程度，且使显示部显示关于与所述交通参加者存在或预测为存在的区域相应的所述第二警戒程度的信息，
区域a是以基准方向为基准的第一角度的范围，且是距所述终端装置第一距离的范围，
区域b是所述基准方向的左方向上的、所述第一角度与以所述基准方向为基准的比所述第一角度大的第二角度之间的范围，且是所述第一距离的范围，
区域c是所述基准方向的右方向上的、所述第一角度与以所述基准方向为基准的所述第二角度之间的范围，且是所述第一距离的范围，
区域d是所述第一角度与以所述基准方向为基准的所述第二角度之间的范围，且是所述第一距离与距所述终端装置比所述第一距离远的第二距离之间的范围，
区域e是所述基准方向的左方向上的、所述第一角度与所述第二角度之间的范围，且是所述第一距离与所述第二距离之间的范围，
区域f是所述基准方向的右方向上的、所述第一角度与所述第二角度之间的范围，且是所述第一距离与所述第二距离之间的范围。
9.根据权利要求8所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在交通参加者存在于或预测为交通参加者存在于所述区域a、区域b或区域c的情况下，使显示部显示表示以所述第一警戒程度分别警戒所述移动体的前方方向、左方向或右方向的信息；以及
在交通参加者存在于或预测为交通参加者存在于所述区域d、区域e或区域f的情况下，使显示部显示表示以所述第二警戒程度分别警戒所述移动体的前方方向、左方向或右方向的信息。
10.根据权利要求1至9中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及
在存在有在所述移动体的附近存在且在与所述移动体的行进方向相同的方向上相连的物体的列的情况下，判定为是所述第三警戒程度。
11.根据权利要求10所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在所述相连的物体间的距离为第一阈值以下、且所述相连的物体与所述移动体之间的横向距离为第二阈值以下的情况下，判定为是所述第三警戒程度。
12.根据权利要求1至11中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；以及
在第一道路上行进的所述移动体进入与所述第一道路连接的第二道路的情况下，在所述第一道路上、在所述第一道路的延伸方向上的所述第一道路与所述第二道路之间的连接部位的前后存在有物体时，判定为是所述第三警戒程度。
13.根据权利要求12所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在所述连接部位的前后的物体中的、正要进入所述连接部位的所述物体与所述物体的后方的物体之间的距离为第三阈值以下的情况下，判定为是所述第三警戒程度。
14.根据权利要求1至13中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
根据警戒程度，来使基于所述计算机的指示而被控制的发光部进行超车指示。
15.根据权利要求14所述的信息提供方法，其中，
所述发光部设置于移动体，且能够与所述计算机通信，该移动体是二轮车辆，
所述信息提供方法使所述计算机还执行如下处理：
与所述发光部通信，使所述发光部进行超车指示。
16.根据权利要求14或15所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
在所述警戒程度为第一警戒程度的情况下，与所述警戒程度是比所述第一警戒程度小的第二警戒程度的情况相比，缩短所述超车指示的周期。
17.根据权利要求14至16中任一项所述的信息提供方法，其中，
所述信息提供方法使所述计算机还执行如下处理：
基于所述周边的状况，来判定所述警戒程度是第一警戒程度、还是所述警戒程度比所述第一警戒程度小的第二警戒程度、或者是警戒程度比所述第二警戒程度小的第三警戒程度；
在存在有在所述移动体的附近存在且在与所述移动体的行进方向相同的方向上相连的物体的列的情况下，判定为是所述第三警戒程度，或者在第一道路上行进的所述移动体进入与所述第一道路连接的第二道路的情况下，在所述第一道路上、在所述第一道路的延伸方向上的所述第一道路与所述第二道路之间的连接部位的前后存在有物体时，判定为是所述第三警戒程度；
在是所述第一警戒程度或所述第二警戒程度的情况下，使所述显示部显示所述信息，并且进行所述超车指示；以及
在是所述第三警戒程度的情况下，不进行所述超车指示而使所述显示部显示所述信息。
18.一种存储介质，其存储有应用程序，其中，
所述应用程序使终端装置的计算机执行如下处理：
取得图像；
基于从所述图像获得的移动体的周边的状况，来判定对于所述移动体的操作者而言的警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及
根据所述判定的结果，使显示部显示与警戒程度相应的信息。
19.一种信息提供装置，其中，
所述信息提供装置具备：
相机，其设置于壳体；
显示部，其设置于所述壳体；
判定部，其基于从由所述相机拍摄出的图像获得的移动体的周边的状况，来判定对于所述移动体的操作者而言警戒程度是第一警戒程度还是警戒程度比所述第一警戒程度小的第二警戒程度；以及
显示控制部，其根据所述判定的结果，来使在设置有所述相机的所述壳体上设置的显示部显示与警戒程度相应的信息。
CN202210292701.1A 2021-03-30 2022-03-23 信息提供方法、存储介质及信息提供装置 Pending CN115214634A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021057600A JP7253000B2 (ja) 2021-03-30 2021-03-30 アプリケーションプログラム、情報提供方法、および情報提供装置
JP2021-057600 2021-03-30

Publications (1)

Publication Number Publication Date
CN115214634A true CN115214634A (zh) 2022-10-21

Family

ID=83450543

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210292701.1A Pending CN115214634A (zh) 2021-03-30 2022-03-23 信息提供方法、存储介质及信息提供装置

Country Status (3)

Country Link
US (1) US11935412B2 (zh)
JP (1) JP7253000B2 (zh)
CN (1) CN115214634A (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6097311A (en) 1995-10-17 2000-08-01 Calsonic Corporation Warning device for distance between cars
JP2005149021A (ja) * 2003-11-13 2005-06-09 Denso Corp 衝突可能性判定装置
JP6253467B2 (ja) * 2014-03-24 2017-12-27 東芝アルパイン・オートモティブテクノロジー株式会社 画像処理装置および画像処理プログラム
US10559196B2 (en) * 2017-10-20 2020-02-11 Zendrive, Inc. Method and system for vehicular-related communications
JP6972960B2 (ja) 2017-11-22 2021-11-24 スズキ株式会社 運転支援装置
US20220327932A1 (en) * 2019-08-29 2022-10-13 Sanyo Electric Co., Ltd. Dangerous driving vehicle alert system, dangerous driving vehicle alert device and dangerous driving vehicle alert program, and computer-readable storage medium or storage device storing the program
US11396271B2 (en) * 2020-06-18 2022-07-26 Ford Global Technologies, Llc System and method for communicating between autonomous vehicle and vulnerable road users

Also Published As

Publication number Publication date
US11935412B2 (en) 2024-03-19
US20220319325A1 (en) 2022-10-06
JP7253000B2 (ja) 2023-04-05
JP2022154525A (ja) 2022-10-13

Similar Documents

Publication Publication Date Title
EP3217377B1 (en) Vehicle lighting system
CN112289067B (zh) 信号显示推定系统
US10810446B2 (en) Parking space line detection method and device
US10163016B2 (en) Parking space detection method and device
JP6551209B2 (ja) 運転支援装置
JP4885793B2 (ja) 障害物監視装置
US11180164B2 (en) Vehicle control apparatus, vehicle, and control method
CN107953882B (zh) 使用前方监测设备的驾驶辅助设备和驾驶辅助方法
US10600323B2 (en) Vehicle external notification device
US11752929B2 (en) Notification device
JP2010113601A (ja) 車両用警告装置
US11260789B2 (en) Out-of-vehicle notification device
CN115071702A (zh) 车辆控制装置、车辆控制方法以及车辆控制用计算机程序
KR20180065527A (ko) 차량 후측방 경고 장치 및 이를 이용한 경고 방법
JP2018081363A (ja) 運転支援装置
JP5416193B2 (ja) 障害物監視装置
EP1496486A2 (en) Vehicle drive assist apparatus
CN115214634A (zh) 信息提供方法、存储介质及信息提供装置
CN115139907A (zh) 信息提供方法、存储介质及终端装置
US20220292686A1 (en) Image processing apparatus, image processing method, and computer-readable storage medium storing program
US11688180B2 (en) Lane departure warning without lane lines
CN112298196B (zh) 信号器信息管理系统
US20230382704A1 (en) Obstacle notification device for industrial vehicle and industrial vehicle
JP7415393B2 (ja) 運転支援装置
JP2022075947A (ja) 運転支援装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination