CN116994356A - 信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质 - Google Patents

信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质 Download PDF

Info

Publication number
CN116994356A
CN116994356A CN202310271000.4A CN202310271000A CN116994356A CN 116994356 A CN116994356 A CN 116994356A CN 202310271000 A CN202310271000 A CN 202310271000A CN 116994356 A CN116994356 A CN 116994356A
Authority
CN
China
Prior art keywords
information
target
vehicle
recognized
captured image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310271000.4A
Other languages
English (en)
Inventor
栉引有辉也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN116994356A publication Critical patent/CN116994356A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/96—Management of image or video recognition tasks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/02—Registering or indicating driving, working, idle, or waiting time only
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808—Diagnosing performance data
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08—Detecting or categorising vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本发明提供一种信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质。信息处理装置包括：取得部，取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息；预处理部，在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息；及诊断部，关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。

Description

信息处理装置、驾驶诊断方法及计算机可读非暂时性记录 介质
技术领域
本发明涉及信息处理装置、驾驶诊断方法及程序。
背景技术
在日本特开2021-118002中公开了基于车辆影像来测定车间距离的车辆距离的测定方法。该车辆距离的测定方法包括：获得由行驶中的第一车辆的拍摄装置拍摄到的行驶影像的步骤；从获得的行驶影像检测第二车辆的步骤；若从行驶影像未检测到第二车辆，则从构成行驶影像的多个帧中的未检测到第二车辆的帧前的与检测到第二车辆的帧对应的第一帧检测第二车辆区域的第一特征点的步骤；通过追踪检测到的第一特征点来检测与当前的帧对应的第二帧内的第二特征点的步骤；算出第一特征点和第二特征点的特征点变化值的步骤；及基于算出的特征点变化值来算出从第一车辆的拍摄装置到第二车辆为止的距离的步骤。
发明内容
在利用车辆外部的服务器等来进行驾驶诊断的情况下，在以往技术中，需要从车辆向服务器发送图像数据，对通信电路的负担大。
本发明的目的在于提供能够抑制在车辆外部进行驾驶诊断的情况下的通信量的信息处理装置、驾驶诊断方法及程序。
技术方案1所述的信息处理装置包括：取得部，取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息；预处理部，在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息；及诊断部，关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
在技术方案1所述的信息处理装置中，取得部取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息。在此，目标例如是前方车辆、信号机等。预处理部在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息。诊断部关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。在此，应该注意的事件例如是正在缩短车间距离、在起步时相对于前方车辆显著延迟、尽管是红灯信号却未停止等。基于目标的形态及行驶信息的条件是用于诊断为发生了应该注意的事件的使用目标的形态及行驶信息而规定的条件。
在该信息处理装置中，取得与车辆的行驶相关联的行驶信息和是否从由搭载于车辆的相机拍摄到的拍摄图像中识别到目标的信息。因而，根据该信息处理装置，能够抑制在车辆外部进行驾驶诊断的情况下的通信量。
技术方案2所述的信息处理装置根据技术方案1所述的信息处理装置，其中，所述信息处理装置还包括提取部，该提取部以满足所述检测条件的情况为契机而提取所述拍摄图像。
在技术方案2所述的信息处理装置中，以满足所述检测条件的情况为契机而提取所述拍摄图像。根据该信息处理装置，能够记录发生了应该注意的事件时的拍摄图像。
技术方案3所述的信息处理装置根据技术方案2所述的信息处理装置，其中，所述提取部以变得不满足所述检测条件的情况为契机而结束所述拍摄图像的提取。
在技术方案3所述的信息处理装置中，以变得不满足所述检测条件的情况为契机而结束所述拍摄图像的提取。根据该信息处理装置，能够合适地结束诊断为发生了应该注意的事件时的拍摄图像的提取。
技术方案4所述的信息处理装置根据技术方案2或3所述的信息处理装置，其中，所述提取部在满足基于所述行驶信息的规定的检测解除条件的情况下，将提取出的所述拍摄图像删除。
在技术方案4所述的信息处理装置中，所述提取部在满足基于所述行驶信息的规定的检测解除条件的情况下，将提取出的所述拍摄图像删除。根据该信息处理装置，在此，规定的检测解除条件是用于删除发生了应该注意的事件这一诊断且诊断为未发生应该注意的事件的条件。根据该信息处理装置，在暂且诊断为发生了应该注意的事件后诊断为未发生应该注意的事件时，能够将提取出的拍摄图像删除。
在技术方案5所述的驾驶诊断方法中，计算机执行以下处理：取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息，在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息，关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
在技术方案5所述的驾驶诊断方法中，计算机取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息。计算机在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息。计算机关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
在该驾驶诊断方法中，取得与车辆的行驶相关联的行驶信息和是否从由搭载于车辆的相机拍摄到的拍摄图像中识别到目标的信息。因而，根据该驾驶诊断方法，能够抑制在车辆外部进行驾驶诊断的情况下的通信量。
技术方案6所述的程序使计算机执行以下处理：取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息，在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息，关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
执行技术方案6所述的程序的计算机取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息。计算机在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息。计算机关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
在该程序中，取得与车辆的行驶相关联的行驶信息和是否从由搭载于车辆的相机拍摄到的拍摄图像中识别到目标的信息。因而，根据该程序，能够抑制在车辆外部进行驾驶诊断的情况下的通信量。
根据本发明，能够抑制在车辆外部进行驾驶诊断的情况下的通信量。
附图说明
本发明的典型实施例的特征、优点及技术上和工业上的意义将会在下面参照附图来描述，在这些附图中，同样的标记表示同样的要素，其中：
图1是示出本实施方式涉及的驾驶诊断系统的概略结构的图。
图2是示出本实施方式的车辆的硬件结构的框图。
图3是示出本实施方式的车载器的ROM的结构的框图。
图4是示出本实施方式的车载器的储存设备的结构的框图。
图5是示出本实施方式的车载器的功能结构的框图。
图6是示出本实施方式的中央服务器的硬件结构的框图。
图7是示出本实施方式的中央服务器的功能结构的框图。
图8是示出在本实施方式的车载器中执行的目标信息发送处理的流程的流程图。
图9是示出在本实施方式的中央服务器中执行的驾驶诊断处理的流程的流程图。
图10是示出在本实施方式的中央服务器中执行的驾驶诊断处理的流程的流程图。
具体实施方式
对包括本发明的信息处理装置的驾驶诊断系统进行说明。驾驶诊断系统是使用在搭载于车辆的相机的拍摄图像中识别到的目标的信息和车辆的行驶信息来进行驾驶诊断的系统。另外，在驾驶诊断系统中，记录判断为发生了应该注意的事件时的拍摄图像。
(整体结构)
如图1所示，本实施方式的驾驶诊断系统10构成为包括车辆12和作为信息处理装置的中央服务器30。另外，在车辆12搭载有车载器20。车载器20及中央服务器30通过网络N而相互连接。需要说明的是，在图1中，相对于1个中央服务器30图示了1台车辆12及车载器20，但车辆12及车载器20的数量不限于此。
中央服务器30例如设置于制造车辆12的制造商、汽车经销商或任意的商家。
(车辆)
如图2所示，本实施方式涉及的车辆12构成为包括车载器20、多个ECU(ElectronicControl Unit：电子控制单元)22及多个车载设备24。
车载器20构成为包括CPU(Central Processing Unit：中央处理单元)20A、ROM(Read Only Memory：只读存储器)20B、RAM(Random Access Memory：随机存取存储器)20C、储存设备20D、无线通信I/F(Interface：接口)20E及车内通信I/F20F。CPU20A、ROM20B、RAM20C、储存设备20D、无线通信I/F20E及车内通信I/F20F经由内部总线20G而以能够相互通信的方式连接。
CPU20A是中央运算处理单元，执行各种程序，并控制各部分。即，CPU20A从ROM20B或储存设备20D读出程序，将RAM20C作为作业区域来执行程序。
ROM20B存储有各种程序及各种数据。如图3所示，在本实施方式的ROM20B中存储有控制程序100。控制程序100是用于将从相机的拍摄图像识别到的目标的信息向中央服务器30发送的程序。
如图2所示，RAM20C作为作业区域而暂时地存储程序或数据。
作为存储器的储存设备20D由HDD(Hard Disk Drive：硬盘驱动器)或SSD(SolidState Drive：固态驱动器)构成，存储有各种程序及各种数据。如图4所示，在本实施方式的储存设备20D中存储有识别到的目标的信息的数据组即目标信息DB(数据库)120。需要说明的是，也可以是，储存设备20D存储控制程序100及目标信息DB120。
如图2所示，无线通信I/F20E是用于与中央服务器30通信的无线通信模块。该无线通信模块例如使用5G、LTE、Wi-Fi(注册商标)等通信标准。无线通信I/F20E相对于网络N连接。
车内通信I/F20F是用于与各ECU22连接的接口。该接口使用基于CAN协议的通信标准。车内通信I/F20F相对于外部总线20H连接。
ECU22至少包括ADAS(Advanced Driver Assistance System：先进驾驶辅助系统)-ECU22A。
ADAS-ECU22A统括控制先进驾驶辅助系统。在ADAS-ECU22A上连接有构成车载设备24的车速传感器24A及相机24C。相机24C是拍摄车辆12的周围的相机。
如图5所示，在本实施方式的车载器20中，CPU20A通过执行控制程序100而作为取得部200、处理部210及发送部220发挥功能。
取得部200具有取得车辆信息及拍摄图像的功能。车辆信息是车载设备24的状态及从车载设备24得到的车辆12的状态等信息。拍摄图像是由车辆12的相机24C拍摄到的车辆12外部的拍摄图像。本实施方式中的车辆信息包括位置信息或车速等行驶信息。
处理部210具有使在取得部200中取得的车辆信息向储存设备20D存储、从由相机24C拍摄到的拍摄图像中识别目标从而信息化成目标的信息的功能。具体而言，本实施方式的处理部210将车辆信息及目标的信息暂且存储于储存设备20D，之后，将车辆信息及目标的信息利用发送部220而向中央服务器30发送。另外，处理部210在从中央服务器30有请求的情况下，将拍摄图像利用发送部220而向中央服务器30发送。另外，处理部210根据由相机24C拍摄到的拍摄图像，通过图像识别处理而信息化成目标的信息。
更具体而言，处理部210作为拍摄图像所表示的目标而识别前方车辆、信号机的信号，信息化成前方车辆的信息(表示前方车辆的有无的标志、与前方车辆的车间距离、车间时间)、信号机的信号的信息(表示红灯信号的有无的标志、表示绿灯信号的有无的标志、与信号机之间的距离)。车间时间根据车间距离和车速而算出。
发送部220具有将存储于储存设备20D的车辆信息及目标的信息向中央服务器30发送的功能。具体而言，本实施方式的发送部220在从中央服务器30有请求的情况下，将存储于储存设备20D的车辆信息及目标的信息向中央服务器30发送。
另外，发送部220在从中央服务器30有请求的情况下，将由相机24C拍摄到的拍摄图像向中央服务器30发送。
(中央服务器)
如图6所示，中央服务器30构成为包括CPU30A、ROM30B、RAM30C、储存设备30D及通信I/F30E。CPU30A、ROM30B、RAM30C、储存设备30D及通信I/F30E经由内部总线30G而以能够相互通信的方式连接。CPU30A、ROM30B、RAM30C、储存设备30D及通信I/F30E的功能与上述的车载器20的CPU20A、ROM20B、RAM20C、储存设备20D及无线通信I/F20E的功能相同。需要说明的是，通信I/F30E也可以进行基于有线的通信。CPU30A是处理器的一例。
在本实施方式的储存设备30D中存储有作为程序的处理程序150、目标信息DB160及提取图像DB170。需要说明的是，也可以是，ROM30B存储处理程序150。
处理程序150是用于控制中央服务器30的程序。伴随于处理程序150的执行，中央服务器30从车辆12取得目标的信息及行驶信息，对车辆12的行驶信息执行用于进行驾驶诊断的各处理。
在目标信息DB160中存储有从车辆12取得的目标的信息。
具体而言，存储有从车辆12取得的前方车辆的信息(表示前方车辆的有无的标志、与前方车辆的车间距离、车间时间)、信号机的信号的信息(表示红灯信号的有无的标志、表示绿灯信号的有无的标志、与信号机之间的距离)。
在提取图像DB170中存储有诊断为发生了应该注意的事件时的拍摄图像。
如图7所示，在本实施方式的中央服务器30中，CPU30A通过执行处理程序150而作为取得部260、预处理部270、诊断部280及提取部290发挥功能。
取得部260具有从车辆12的车载器20取得车辆12的车辆信息及目标的信息的功能。取得部260将取得的目标的信息存储于目标信息DB160。
预处理部270在包括某时刻的一定区间内取得的目标的信息中包括表示识别到目标的信息的情况下，即使在该时刻下是表示未识别到目标的信息，也更新为表示识别到目标的信息。
具体而言，预处理部270在识别到的目标是前方车辆且目标的信息是表示存在前方车辆的标志的情况下，记录前方车辆标志。并且，为了避免前方车辆的误检测、未检出，通过进行将表示存在前方车辆的标志置换为作为一定区间的前后0.2秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
另外，预处理部270在识别到的目标是信号机的信号且目标的信息是表示是红灯信号的标志的情况下，记录红灯信号标志。并且，为了避免红灯信号的误检测、未检出，通过进行将表示是红灯信号的标志置换为作为一定区间的前后1秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
另外，预处理部270在识别到的目标是信号机的信号且目标的信息是表示是绿灯信号的标志的情况下，记录绿灯信号标志。并且，为了避免绿灯信号的误检测、未检出，通过进行将表示是绿灯信号的标志置换为作为一定区间的前后1秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
诊断部280基于从车辆12的车载器20取得的车辆信息及目标的信息，关于各时刻，在从车辆12的车载器20取得的目标的信息是表示识别到目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，该检测条件基于目标的形态及从车辆12的车载器20取得的车辆信息中包含的行驶信息。
具体而言，诊断部280将在行驶中或停车中正在缩短车间距离作为检测条件来诊断是否发生了应该注意的事件。
例如，将是表示存在前方车辆的标志且车辆12为行驶中(车速>10km/h)且车间时间<0.5秒作为检测条件。另外，将是表示存在前方车辆的标志且车辆12为停止中(车速<0.5km/h)且车间距离<1500mm作为检测条件。
另外，诊断部280将在交叉路口、拥堵中的起步时相对于前方车辆显著延迟作为检测条件来诊断是否发生了应该注意的事件。
例如，在是表示存在前方车辆的标志且车速<0.5km/h的情况下，临时诊断为发生了应该注意的事件，若在停车中存在前方车辆且停车中的最大车间距离-最小车间距离≥25000mm，则诊断为发生了应该注意的事件。
另外，在停车时间>120秒的情况下，视为驻车停车，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。另外，在与前方车辆之间的距离>15000mm的情况下，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。另外，在是左右转弯时(转向灯开关为接通)的情况下，成为起步延迟的可能性高，因此删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。
另外，诊断部280将尽管是红灯信号却未停止作为检测条件来诊断是否发生了应该注意的事件。
例如，若表示是红灯信号的标志为有效(ON)，则临时诊断为发生了应该注意的事件，在最低车速低于阈值(1km/h)的情况下，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。
另外，在转向灯开关为接通的情况下，视为出现了箭头信号，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。
另外，在红灯信号的识别中与信号机始终相隔10m以上的情况下，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。
另外，在从红灯信号立即切换为绿灯信号的情况下，删除发生了应该注意的事件这一临时诊断，诊断为未发生应该注意的事件。
提取部290以满足检测条件的情况为契机，向车辆12的车载器20请求拍摄图像，提取从车辆12的车载器20取得的拍摄图像，并存储于提取图像DB170。
另外，提取部290以变得不满足检测条件的情况为契机，结束从车辆12的车载器20取得的拍摄图像的提取，将提取出的拍摄图像存储于提取图像DB170。
另外，提取部290在满足基于行驶信息的规定的检测解除条件的情况下，将提取出的拍摄图像删除。
具体而言，以满足是表示存在前方车辆的标志且车辆12为行驶中(车速>10km/h)且车间时间<0.5秒这一检测条件或者是表示存在前方车辆的标志且车辆12为停止中(车速<0.5km/h)且车间距离<1500mm这一检测条件的情况为契机，开始从车辆12的车载器20取得的拍摄图像的提取，在变得不满足该检测条件的情况下，结束拍摄图像的提取，将提取出的拍摄图像存储于提取图像DB170。
以满足是表示存在前方车辆的标志且车速<0.5km/h这一检测条件的情况为契机，开始从车辆12的车载器20取得的拍摄图像的提取，在变得不满足该检测条件的情况下，结束拍摄图像的提取。并且，若在停车中存在前方车辆且停车中的最大车间距离-最小车间距离≥25000mm，则将提取出的拍摄图像存储于提取图像DB170。
另外，将停车时间>120秒作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
另外，将与前方车辆之间的距离>15000mm作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
另外，将是左右转弯时(转向灯开关为接通)作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
另外，以满足表示是红灯信号的标志为有效(ON)这一检测条件的情况为契机，开始从车辆12的车载器20取得的拍摄图像的提取，以变得不满足检测条件的情况为契机，结束拍摄图像的提取，将提取出的拍摄图像存储于提取图像DB170。
并且，将最低车速低于阈值(1km/h)作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
另外，将转向灯开关为接通作为检测解除条件，在满足检测解除条件的情况下，视为出现了箭头信号，将提取出的拍摄图像删除。
另外，将在红灯信号的识别中与信号机始终相隔10m以上作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
另外，将从红灯信号立即切换为绿灯信号作为检测解除条件，在满足检测解除条件的情况下，将提取出的拍摄图像删除。
(控制的流程)
关于由本实施方式的驾驶诊断系统10执行的处理的流程，使用图8～图10的流程图来说明。车载器20中的处理通过车载器20的CPU20A作为取得部200、处理部210及发送部220发挥功能而执行。另外，中央服务器30中的处理通过中央服务器30的CPU30A作为取得部260、预处理部270、诊断部280及提取部290发挥功能而执行。
首先，在车辆12正在行驶时，在车载器20中，CPU20A反复执行图8所示的目标信息发送处理。
在图8的步骤S100中，取得部200取得由相机24C拍摄到的车辆12外部的拍摄图像，并且取得行驶信息。
在步骤S102中，处理部210通过从由相机24C拍摄到的拍摄图像中识别目标而信息化成目标的信息，并暂且存储于目标信息DB120。
在步骤S104中，处理部210判定是否通过上述步骤S102的处理而识别到目标。在通过上述步骤S102的处理而识别到目标的情况下，移向步骤S106。另一方面，在通过上述步骤S102的处理未识别到目标的情况下，结束目标信息发送处理。
在步骤S106中，发送部220将作为上述步骤S102的识别结果而得到的目标的信息与行驶信息一起向中央服务器30发送，结束目标信息发送处理。
另外，在中央服务器30中，CPU30A反复执行图9～图10所示的驾驶诊断处理。
具体而言，CPU30A反复执行用于诊断正在缩短车间距离的情况作为应该注意的事件的图9所示的驾驶诊断处理。
在图9的步骤S110中，取得部260从车辆12的车载器20取得车辆12的行驶信息。
在步骤S112中，取得部260从车辆12的车载器20取得目标的信息。
在步骤S114中，预处理部270在识别到的目标是前方车辆的情况下，若是表示存在前方车辆的标志，则记录前方车辆标志。并且，为了避免前方车辆的误检测、未检出，通过进行将表示存在前方车辆的标志置换为作为一定区间的前后0.2秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
在步骤S116中，诊断部280将在行驶中或停车中正在缩短车间距离作为检测条件来诊断是否发生了应该注意的事件。在满足检测条件的情况下，诊断为发生了应该注意的事件，移向步骤S118。另一方面，在不满足检测条件的情况下，移向步骤S120。
在步骤S118中，提取部290向车辆12的车载器20请求拍摄图像，开始从车辆12的车载器20取得的拍摄图像的提取。
在步骤S120中，提取部290判定是否是拍摄图像的提取中。在是拍摄图像的提取中的情况下，移向步骤S122，结束拍摄图像的提取，将提取出的拍摄图像存储于提取图像DB170。另一方面，在不是拍摄图像的提取中的情况下，结束驾驶诊断处理。
另外，CPU30A反复执行用于诊断在起步时相对于前方车辆显著延迟的情况作为应该注意的事件的图10所示的驾驶诊断处理。需要说明的是，关于与上述图9同样的处理，附加同一标号而进行说明。
在图10的步骤S110中，取得部260从车辆12的车载器20取得车辆12的行驶信息。
在步骤S112中，取得部260从车辆12的车载器20取得目标的信息。
在步骤S114中，预处理部270在识别到的目标是前方车辆的情况下，若是表示存在前方车辆的标志，则记录前方车辆标志。并且，通过进行将表示存在前方车辆的标志置换为作为一定区间的前后0.2秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
在步骤S116中，诊断部280将在交叉路口、拥堵中的起步时相对于前方车辆显著延迟作为检测条件来诊断是否发生了应该注意的事件。在满足检测条件的情况下，诊断为发生了应该注意的事件，移向步骤S118。另一方面，在不满足检测条件的情况下，移向步骤S120。
在步骤S118中，提取部290向车辆12的车载器20请求拍摄图像，开始从车辆12的车载器20取得的拍摄图像的提取。
在步骤S120中，提取部290判定是否是拍摄图像的提取中。在是拍摄图像的提取中的情况下，移向步骤S122，结束拍摄图像的提取，将提取出的拍摄图像存储于提取图像DB170。另一方面，在不是拍摄图像的提取中的情况下，结束驾驶诊断处理。
在步骤S200中，提取部290将停车时间>120秒、与前方车辆之间的距离>15000mm或者是左右转弯时(转向灯开关为接通)作为检测解除条件来判定是否满足检测解除条件。在不满足检测解除条件的情况下，结束驾驶诊断处理。另一方面，在满足检测解除条件的情况下，移向步骤S202。
在步骤S202中，提取部290将发生了应该注意的事件这一诊断及提取出的拍摄图像删除，结束驾驶诊断处理。
另外，CPU30A与用于诊断在起步时相对于前方车辆显著延迟的驾驶诊断处理同样地反复执行用于诊断尽管是红灯信号却未停止的情况作为应该注意的事件的上述图10所示的驾驶诊断处理。
在此，在步骤S114中，预处理部270在识别到的目标是信号机的信号的情况下，若是表示是红灯信号的标志，则记录红灯信号标志。并且，通过进行将表示是红灯信号的标志置换为作为一定区间的前后1秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
另外，若是表示是绿灯信号的标志，则预处理部270记录绿灯信号标志。并且，通过进行将表示是绿灯信号的标志置换为作为一定区间的前后1秒的最大值的过滤处理，从而以该最大值更新一定区间的全部的标志。
在步骤S116中，诊断部280将尽管是红灯信号却未停止作为检测条件来诊断是否发生了应该注意的事件。在满足检测条件的情况下，诊断为发生了应该注意的事件，移向步骤S118。另一方面，在不满足检测条件的情况下，移向步骤S120。
在步骤S200中，提取部290将最低车速低于阈值(1km/h)、转向灯开关为接通、在红灯信号的识别中与信号机始终相隔10m以上或者从红灯信号立即切换为绿灯信号作为检测解除条件来判定是否满足检测解除条件。在不满足检测解除条件的情况下，结束驾驶诊断处理。另一方面，在满足检测解除条件的情况下，移向步骤S202。
(实施方式的总结)
本实施方式的中央服务器30取得与车辆的行驶相关联的行驶信息和是否从由搭载于车辆的相机拍摄到的拍摄图像中识别到目标的信息，在满足检测条件的情况下，诊断为发生了应该注意的事件，该检测条件基于目标的形态及所述行驶信息。因而，根据中央服务器30，不需要为了驾驶诊断而进行拍摄图像的发送，能够抑制在车辆外部进行驾驶诊断的情况下的与车辆之间的通信量。
另外，本实施方式的中央服务器30以满足应该注意的事件的检测条件的情况为契机而提取拍摄图像。因而，根据中央服务器30，能够记录诊断为发生了应该注意的事件时的拍摄图像。
另外，本实施方式的中央服务器30在满足基于行驶信息的规定的检测解除条件的情况下，将提取出的拍摄图像删除。因而，根据中央服务器30，在暂且诊断为发生了应该注意的事件后诊断为未发生应该注意的事件时，能够将提取出的拍摄图像删除。
[附注]
也可以由CPU以外的各种处理器执行在上述实施方式中CPU20A及CPU30A读入软件(程序)而执行的各种处理。作为该情况下的处理器，可例示FPGA(Field-ProgrammableGate Array：现场可编程门阵列)等在制造后能够变更电路结构的PLD(ProgrammableLogic Device：可编程门阵列)及ASIC(Application Specific Integrated Circuit：专用集成电路)等具有为了执行特定的处理而专用地设计的电路结构的处理器即专用电路等。另外，可以由这些各种处理器中的1个执行上述的各处理，也可以由同种或异种的2个以上的处理器的组合(例如，多个FPGA及CPU与FPGA的组合等)执行上述的各处理。另外，这些各种处理器的硬件构造更具体而言是将半导体元件等电路元件组合而成的电路。
另外，在上述实施方式中，各程序以预先存储(安装)于计算机可读非暂时性记录介质的形态进行了说明。例如，车载器20中的控制程序100预先存储于ROM20B，中央服务器30中的处理程序150预先存储于储存设备30D。但是，不限于此，各程序也可以以记录于CD-ROM(Compact Disc Read Only Memory：光盘只读存储器)、DVD-ROM(Digital VersatileDisc Read Only Memory：数字通用光盘只读存储器)及USB(Universal Serial Bus：通用串行总线)存储器等非暂时性记录介质的方式提供。另外，程序也可以设为经由网络而从外部装置下载的方式。
在上述实施方式中说明的处理的流程是一例，也可以在不脱离主旨的范围内删除不需要的步骤、追加新的步骤、调换处理顺序。

Claims (6)

1.一种信息处理装置，包括：
取得部，取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息；
预处理部，在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息；及
诊断部，关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
2.根据权利要求1所述的信息处理装置，其中，
所述信息处理装置还包括提取部，该提取部以满足所述检测条件的情况为契机而提取所述拍摄图像。
3.根据权利要求2所述的信息处理装置，其中，
所述提取部以变得不满足所述检测条件的情况为契机而结束所述拍摄图像的提取。
4.根据权利要求2或3所述的信息处理装置，其中，
所述提取部在满足基于所述行驶信息的规定的检测解除条件的情况下，将提取出的所述拍摄图像删除。
5.一种驾驶诊断方法，其中，
计算机执行以下处理：
取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息，
在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息，
关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
6.一种计算机可读非暂时性记录介质，存储有程序，该程序使计算机执行以下处理：
取得与车辆的行驶相关联的行驶信息和是否从由搭载于所述车辆的相机拍摄到的拍摄图像中识别到目标的信息，
在包括某时刻的一定区间内取得的所述信息中包括表示识别到所述目标的信息的情况下，即使在该时刻下是表示未识别到所述目标的信息，也更新为表示识别到所述目标的信息，
关于各时刻，在存在表示识别到所述目标的信息且满足检测条件的情况下，诊断为发生了应该注意的事件，所述检测条件基于所述目标的形态及所述行驶信息。
CN202310271000.4A 2022-05-02 2023-03-16 信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质 Pending CN116994356A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-076207 2022-05-02
JP2022076207A JP2023165318A (ja) 2022-05-02 2022-05-02 情報処理装置、運転診断方法及びプログラム

Publications (1)

Publication Number Publication Date
CN116994356A true CN116994356A (zh) 2023-11-03

Family

ID=88512432

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310271000.4A Pending CN116994356A (zh) 2022-05-02 2023-03-16 信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质

Country Status (3)

Country Link
US (1) US20230351762A1 (zh)
JP (1) JP2023165318A (zh)
CN (1) CN116994356A (zh)

Also Published As

Publication number Publication date
US20230351762A1 (en) 2023-11-02
JP2023165318A (ja) 2023-11-15

Similar Documents

Publication Publication Date Title
US9240080B2 (en) Server request for downloaded information from a vehicle-based monitor
JP6499514B2 (ja) ドライブレコーダ、データ記録システム、データ記録方法、及び、プログラム
CN111091706B (zh) 信息处理系统和信息处理方法
EP4360956A2 (en) Managing the camera acquiring interior data
JP2008102762A (ja) 画像収集システム、記録装置
US20190217872A1 (en) Display device for a vehicle
CN111262903B (zh) 服务器装置及车辆
JP5874553B2 (ja) 運転特性診断システム、運転特性診断装置
CN114179822A (zh) 用于控制配备有自动化驾驶功能的车辆的操作的方法、计算机程序和设备
JP2020113212A (ja) 異常検出装置、異常検出プログラム、異常検出方法、異常検出システム及び車載器
US20190213876A1 (en) Image distribution device, image distribution method, and storage medium storing image distribution program
CN113705479A (zh) 数据处理方法、装置、设备、系统和存储介质
US11594038B2 (en) Information processing device, information processing system, and recording medium recording information processing program
CN116994356A (zh) 信息处理装置、驾驶诊断方法及计算机可读非暂时性记录介质
CN112580418A (zh) 车室内检测装置、车室内检测方法及非暂时性存储介质
JP6600044B2 (ja) 車載装置、及び、サーバ装置
CN115131774A (zh) 一种车内宠物信息的提示方法和装置
CN116994439A (zh) 信息处理装置、驾驶诊断方法及存储介质
CN113052791A (zh) 图像处理系统、装置、方法以及非暂时性存储介质
US20230322230A1 (en) Driving diagnostic device, driving diagnostic method, and storage medium
CN116985815A (zh) 信息处理装置、驾驶诊断方法及记录介质
US20230322239A1 (en) Driving diagnostic device, driving diagnostic method, and storage medium
US20240177600A1 (en) Information processing device and non-transitory storage medium
JP2020071594A (ja) 履歴蓄積装置、及び履歴蓄積プログラム
US20230110843A1 (en) Image extraction device, image extraction system, image extraction method, and computer-readable storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination