CN113034724B - 信息记录与再现装置、非暂时性存储介质和信息记录与再现系统 - Google Patents

信息记录与再现装置、非暂时性存储介质和信息记录与再现系统 Download PDF

Info

Publication number
CN113034724B
CN113034724B CN202011490210.5A CN202011490210A CN113034724B CN 113034724 B CN113034724 B CN 113034724B CN 202011490210 A CN202011490210 A CN 202011490210A CN 113034724 B CN113034724 B CN 113034724B
Authority
CN
China
Prior art keywords
information
driver
vehicle
abnormal behavior
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011490210.5A
Other languages
English (en)
Other versions
CN113034724A (zh
Inventor
前田敦史
石原佑真
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN113034724A publication Critical patent/CN113034724A/zh
Application granted granted Critical
Publication of CN113034724B publication Critical patent/CN113034724B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3605—Destination input or retrieval
    • G01C21/3617—Destination input or retrieval using user history, behaviour, conditions or preferences, e.g. predicted or inferred from previous use or current movement
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808—Diagnosing performance data
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0816—Indicating performance data, e.g. occurrence of a malfunction
    • G07C5/0825—Indicating performance data, e.g. occurrence of a malfunction using optical means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0816—Indicating performance data, e.g. occurrence of a malfunction
    • G07C5/0833—Indicating performance data, e.g. occurrence of a malfunction using audio means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872—Driver physiology
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/10—Longitudinal speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/12—Lateral speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/221—Physiology, e.g. weight, heartbeat, health or special needs
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/223—Posture, e.g. hand, foot, or seat position, turned or inclined
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00—Input parameters relating to infrastructure
    • B60W2552/53—Road markings, e.g. lane marker or crosswalk
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00—Input parameters relating to objects
    • B60W2554/80—Spatial relation or speed relative to objects
    • B60W2554/802—Longitudinal distance
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/10—Historical data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2756/00—Output or target parameters relating to data
    • B60W2756/10—Involving external transmission of data to or from the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning

Abstract

本申请公开了一种信息记录与再现装置、非暂时性存储介质和信息记录与再现系统。信息记录与再现装置包括处理器，该处理器包括硬件，并且被配置为：从安装在车辆中的第一装置获取表示与驾驶员的行为有关的信息的第一信息；从安装在车辆中的第二装置获取表示与车辆的行为有关的信息的第二信息；并且以同步可再现的方式将第一信息和第二信息累积在存储器中。

Description

信息记录与再现装置、非暂时性存储介质和信息记录与再现 系统
技术领域
本公开涉及一种信息记录与再现装置、非暂时性存储介质和信息记录与再现系统。
背景技术
日本未审查专利申请公开第2014-044691号(JP 2014-044691 A)公开了一种行车记录仪系统，该系统包括设置在车厢的内部和外部的照相机，并且当行车记录仪系统检测到驾驶员的异常行为(例如睡着)时，发出警报(警告)并记录车厢的内部。
发明内容
存在对于有助于对驾驶员的异常行为的原因进行分析的技术的需求。
本公开提供一种信息记录与再现装置、信息记录与再现程序以及信息记录与再现系统，其允许获取有助于对异常行为的原因进行分析的数据。
根据本公开的信息记录与再现装置包括处理器，该处理器包括硬件。该处理器被配置为：从安装在车辆中的第一装置获取表示与驾驶员的行为有关的信息的第一信息；从安装在车辆中的第二装置获取表示与车辆的行为有关的信息的第二信息；并且以同步可再现的方式将第一信息和第二信息累积在存储器中。
根据本公开的非暂时性存储介质，其存储有指令，该指令能够由包括硬件的一个以上处理器执行并且使该一个以上处理器执行功能，该功能包括：从安装在车辆中的第一装置获取表示与驾驶员的行为有关的信息的第一信息；从安装在车辆中的第二装置获取表示与车辆的行为有关的信息的第二信息；以及以同步可再现的方式将第一信息和第二信息累积在为信息记录与再现装置设置的存储器中。
根据本公开的信息记录与再现系统包括：第一装置，其包括第一处理器，第一处理器包括硬件，第一装置安装在车辆中，并且被配置为发送表示与驾驶员的行为有关的信息的第一信息；第二装置，其包括第二处理器，第二处理器包括硬件，第二处理器安装在车辆中，并且第二处理器被配置为发送表示与车辆的行为有关的信息的第二信息；以及包括第三处理器的服务器。第三处理器包括硬件，并且第三处理器被配置为从第一装置获取第一信息，从第二装置获取第二信息，并且以同步可再现的方式将第一信息和第二信息累积在存储器中。
根据本公开，能够在稍后的时刻彼此同步地再现车辆行为信息和驾驶员行为信息。这使得能够有助于对异常行为的原因进行分析，这提高了作为用于分析的数据的信息的有用性。
附图说明
下面将参照附图描述本发明的示例性实施例的特征、优点以及技术和工业意义，其中，相同的标号示出相同的元件，并且其中：
图1是示意性地示出根据第一实施例的包括信息记录与再现装置的信息记录与再现系统的配置的框图；
图2是示出由根据第一实施例的信息记录与再现装置的显示控制单元在显示单元上显示的显示画面的示例的图；
图3是示出由根据第一实施例的信息记录与再现系统执行的信息记录与再现方法的处理过程的流程图；以及
图4是示意性地示出根据第二实施例的包括信息记录与再现装置的信息记录与再现系统的配置的框图。
具体实施方式
第一实施例
将参照图1至图3描述根据本公开的第一实施例的信息记录与再现装置、信息记录与再现程序以及信息记录与再现系统。注意，以下实施例的组成元件包括可以由本领域技术人员替换和容易实现的元件和基本上相同的元件。
信息记录与再现系统
将参照图1描述根据第一实施例的包括信息记录与再现装置的信息记录与再现系统。信息记录与再现系统是用于累积和再现来自车载装置的输出数据的系统。如图1所示，信息记录与再现系统包括服务器1、数字式自记速度仪3和驾驶员状态监视器(以下称为“DSM”)4。具体地，根据第一实施例的信息记录与再现系统由服务器1实现。
数字式自记速度仪3和DSM 4作为车载装置安装在车辆2中。车辆2是可与外部通信的移动体，并且除了数字式自记速度仪3和DSM 4之外，车辆2还包括通信单元5、电子控制单元(ECU)6、扬声器7和麦克风8。尽管在图1中仅示出了一辆车辆2，但是可以设置多辆车辆2。
服务器1、数字式自记速度仪3、DSM 4和车辆2的通信单元5被配置为可经由网络NW彼此通信。网络NW例如由互联网和移动电话网络构成。
服务器
服务器1经由网络NW获取从数字式自记速度仪(第二装置)3输出的数据(例如，车辆行为信息(第二信息))和从DSM(第一装置)4输出的数据(例如，驾驶员行为信息(第一信息))，以同步可再现的状态累积以上输出数据，并且彼此同步地再现数据。服务器1包括控制单元11、通信单元12、存储单元13、显示单元(显示器)14、扬声器15和麦克风16。
具体地，控制单元11包括具有中央处理单元(CPU)、数字信号处理器(DSP)和现场可编程门阵列(FPGA)等的处理器，以及具有随机存取存储器(RAM)和只读存储器(ROM)等的存储器(主存储单元)。
控制单元11通过将存储在存储单元13中的程序加载到主存储单元的工作区，执行该程序，并通过执行该程序来控制各个构成单元，来实现与预定目的相匹配的功能。控制单元11通过执行程序而用作同步单元111和显示控制单元112。
同步单元111以同步可再现的方式将经由网络NW接收的车辆行为信息和驾驶员行为信息累积在存储单元13中。在从数字式自记速度仪3接收(获取)车辆行为信息和从DSM 4接收驾驶员行为信息之后，同步单元111基于在车辆行为信息和驾驶员行为信息中包括的时间信息在时间上将车辆行为信息和驾驶员行为信息同步，并将同步的信息累积在存储单元13中。
这里，车辆行为信息是与车辆2的行为有关的信息，并且由数字式自记速度仪3生成。车辆行为信息包括由传感器组36检测的传感器值(例如车速、角速度、与周围车辆的车辆间距离、重力加速度(G)值(前后G、左右G和垂直G))，由定位单元35检测的车辆位置(坐标)，与车辆2的异常行为是否发生有关的信息以及时间信息。车辆2的异常行为的示例包括车辆2的快速加速、急转弯、快速接近周围车辆或越过车道标记线。数字式自记速度仪3向服务器1的同步单元111输出由照相机34拍摄的视频图像(图像)和上述车辆行为信息。
驾驶员行为信息是与车辆2的驾驶员的行为有关的且由DSM 4生成的信息。驾驶员行为信息包括关于驾驶员的异常行为是否存在的信息，例如驾驶员转移视线(驾驶员侧视)、驾驶员的闭眼(睡着)、驾驶员的头部摇晃以及驾驶员的驾驶姿势受到干扰。DSM 4向服务器1的同步单元111输出由照相机44拍摄的视频图像(图像)和上述驾驶员行为信息。
例如，将在预定的时间沿着预定的路线行驶的运输车辆和路线公共汽车假设为利用根据第一实施例的信息记录和再现系统操作的车辆2。也就是说，将专门从事驾驶的专业驾驶员假设为车辆2的驾驶员。因此，可以说车辆行为信息和驾驶员行为信息是从在相同时间(在一天中的同一时间)沿着相同路线重复地行驶的车辆2接收的信息。
显示控制单元112将车辆行为信息与驾驶员行为信息同步，并使显示单元14显示同步的信息。图2示出了显示控制单元112使显示单元14显示的显示画面9的示例。例如，显示画面9被配置为包括图像显示区域91、操作区域92、驾驶员行为信息显示区域93和车辆行为信息显示区域94，其中，图像显示区域91显示由为数字式自记速度仪3设置的照相机34中的拍摄车辆2中的驾驶员的视频图像的照相机34拍摄的视频图像(以下称为“车内视频图像”)，在操作区域92中能够进行再现车内视频图像的操作，驾驶员行为信息显示区域93显示驾驶员行为信息，车辆行为信息显示区域94显示车辆行为信息。图2中的图像显示区域91显示车内视频图像。然而，图像显示区域91可以显示由为数字式自记速度仪3设置的照相机34中的拍摄车辆2的外部的图像的照相机34拍摄的视频图像(以下称为“外部视频图像”)。此外，显示控制单元112可以在图像显示区域91中显示切换按钮等，以在车内视频图像与外部视频图像之间进行切换。
例如，显示控制单元112在图像显示区域91中显示坐在驾驶员座位上的驾驶员Dr的车内视频图像。显示控制单元112在操作区域92中显示操作按钮组921和搜索条922，操作按钮组921例如包括用于车内视频图像的播放按钮、暂停按钮、停止按钮、倒退按钮和快进按钮。操作按钮组921和搜索条922可由诸如鼠标的指示装置操作。搜索条922的可移动方向(图2中的左右方向)与时间轴方向一致。因此，通过向右和向左移动搜索条922，可以在图像显示区域91中显示对应于某一时间点的车内视频图像。
当显示控制单元112将车辆行为信息与驾驶员行为信息同步并且在显示单元14上显示同步的信息时，显示控制单元112将不同的颜色应用于异常行为的类型(例如，驾驶员转移视线，驾驶员的闭眼，驾驶员的头部摇晃以及驾驶员的驾驶姿势受到干扰)，并依据应用于异常行为的颜色显示驾驶员的异常行为发生的区间。如图2所示，例如，显示控制单元112在驾驶员行为信息显示区域93中沿着时间轴方向并排地显示以预定时间划分的网格状的区域，并且以与异常行为的类型相应的不同的颜色显示网格。例如，图2中的部分A中的网格中的颜色表示驾驶员闭上了他或她的眼睛。如上所述，根据异常行为的类型，以不同的颜色显示驾驶员的异常行为发生的区间。这使得能够一目了然地掌握驾驶员的异常行为。
如图2所示，例如，显示控制单元112在车辆行为信息显示区域94中显示表示关于例如车速、角速度、与周围车辆的车辆间距离以及G值的信息的曲线图。此外，除了图2中所示的曲线图之外，显示控制单元112还可以在地图上显示例如车辆位置的坐标，或者使用与异常行为的类型(例如，车辆2快速加速、急转弯、快速接近周围车辆或越过车道标记线)相对应的不同的颜色显示车辆2的异常行为发生的区间。如上所述，在曲线图中显示车辆2的行为或者使用不同的颜色显示车辆2的异常行为发生的区间使得能够一目了然地掌握车辆2的异常行为。
当显示控制单元112将车辆行为信息与驾驶员行为信息同步并且在显示单元14上显示同步的信息时，显示控制单元112可以仅显示驾驶员信息中包括的驾驶员的异常行为持续的区间。也就是说，如图2中的部分A所示，显示控制单元112可以提取驾驶员的相同异常行为(例如，闭眼)持续的部分的信息和视频图像，并且在显示单元14上显示提取的信息和视频图像。利用这种配置，管理服务器1的用户(以下称为“操作者”)可以仅优先检查驾驶员的异常行为很可能发生的部分。
此外，当显示控制单元112将车辆行为信息与驾驶员行为信息同步并且在显示单元14上显示同步的信息时，显示控制单元112可以仅提取车辆行为信息中包括的驾驶员的异常行为持续的部分的信息和视频图像，并且在显示单元14上显示提取的信息和视频图像。因此，操作者可以仅优先检查驾驶员的异常行为很可能发生的部分。
例如，通信单元12被配置为包括局域网(LAN)接口板和用于执行无线通信的无线通信电路。通信单元12连接至网络NW(例如作为公共通信网络的互联网)。通信单元12连接至网络NW以与数字式自记速度仪3、DSM 4和车辆2的通信单元5通信。
存储单元13被配置为包括诸如可擦可编程ROM(EPROM)、硬盘驱动器(HDD)和可移动介质的记录介质。可移动介质的示例包括通用串行总线(USB)存储器和诸如光盘(CD)、数字多功能光盘(DVD)和蓝光(注册商标)光盘(BD)的盘记录介质。存储单元13可以存储操作系统(OS)、各种程序、各种表格和各种类型的数据库(DB)等。
存储单元13包括车辆行为DB 131和驾驶员行为DB 132。上述数据库以由控制单元11执行的数据库管理系统(DBMS)的程序控制要存储在存储单元13中的数据的方式构建。
例如，车辆行为DB 131被配置为包括以可搜索的方式存储从数字式自记速度仪3接收的车辆行为信息的关系数据库。此外，例如，驾驶员行为DB 132被配置为包括以可搜索的方式存储从DSM 4接收的驾驶员行为信息的关系数据库。
例如，显示单元14被配置为包括液晶显示器(LCD)或有机电致发光显示器(OLED)。显示单元14基于由显示控制单元112执行的控制彼此同步地显示车辆行为信息和驾驶员行为信息。显示单元14还能够基于由显示控制单元112执行的控制实时地彼此同步地显示车辆行为信息和驾驶员行为信息，或者能够在稍后的时刻使车辆行为信息与驾驶员行为信息同步的同时，显示在不同的时刻存储在存储单元13中的车辆行为信息和驾驶员行为信息。
扬声器15是向管理服务器1的操作者输出语音信息的输出单元。例如，当操作者经由网络NW与车辆2的驾驶员进行对话时，使用扬声器15。另外，扬声器15可以用于在车辆2或驾驶员的异常行为发生时向操作者通知警报的目的。
麦克风16是接收来自操作者的语音输入的输入单元。例如，当操作者经由网络NW与车辆2的驾驶员进行对话时，使用麦克风16。
数字式自记速度仪(车辆信息获取单元)3包括控制单元31、通信单元32、存储单元33、照相机34、定位单元35和传感器组36。控制单元31、通信单元32和存储单元33在物理上与控制单元11、通信单元12和存储单元13相同。控制单元31通过执行存储在存储单元33中的程序来用作车辆行为检测单元311和通知单元312。
车辆行为检测单元311基于从传感器组36输入的传感器数据来检测车辆2的行为(例如，车速、角速度、与周围车辆的车辆间距离、G值和车辆位置)以及车辆2的异常行为(例如，快速加速、急转弯、快速接近周围车辆或车辆2越过车道标记线)是否发生。
例如，车辆行为检测单元311针对车速、角速度、与周围车辆的车辆间距离、G值以及到车道标记线的距离来设定阈值(第二判定标准)。当从传感器组36输入的传感器数据超过阈值时或者基于超过阈值后经过的时间，车辆行为检测单元311判定车辆2的异常行为发生。
当车辆行为检测单元311检测到车辆2的异常行为时，通知单元312经由安装在车辆2中的扬声器7向驾驶员通知警报。注意，通知单元312可以输出提示对异常行为进行校正的语音(例如，当车辆越过车道标记线时，指示“车辆越过车道标记线”的语音)来替代警报。此外，数字式自记速度仪3本身可以包括扬声器，并且可以从扬声器输出警报或语音。
各个照相机34例如是具有诸如电荷耦合器件(CCD)或CMOS图像传感器(CIS)的内置成像元件的照相机。照相机34设置在车厢的内部和外部，并且各个照相机34布置在例如能够拍摄车辆2的前方的图像的位置、能够拍摄车辆2的后方的图像的位置以及能够拍摄车辆2中的驾驶员的图像的位置。照相机34将拍摄到的视频图像(图像)数据输出到车辆行为检测单元311。
定位单元35从全球定位系统(GPS)卫星接收无线电波并检测车辆位置。检测车辆位置的方法不限于使用GPS卫星的方法，可以是将光检测和测距或激光成像检测和测距(LiDAR)与三维数字地图等结合的方法。
传感器组36被配置为包括车速传感器、发动机转速传感器、G传感器和陀螺仪传感器等。传感器组36将检测到的传感器数据输出到控制单元31。
DSM(驾驶员信息获取单元)4包括控制单元41、通信单元42、存储单元43和照相机44。控制单元41、通信单元42和存储单元43在物理上与控制单元11、通信单元12和存储单元13相同。控制单元41通过执行存储在存储单元43中的程序来用作驾驶员行为检测单元411和通知单元412。
驾驶员行为检测单元411通过分析由照相机44拍摄的图像来检测驾驶员的异常行为。当驾驶员行为检测单元411检测驾驶员的异常行为时，驾驶员行为检测单元411可以使用诸如深度学习的机器学习技术。
例如，驾驶员行为检测单元411针对基于图像进行分析的驾驶员的面部的角度、驾驶员的眼睛的睁开程度以及驾驶员的头部和身体的位置等预先设定阈值(第一判定标准)。驾驶员行为检测单元411在图像分析的结果超过阈值时或者基于超过阈值后经过的时间来判定驾驶员的异常行为发生。
当驾驶员行为检测单元411检测到驾驶员的异常行为时，通知单元412经由安装在车辆2中的扬声器7向驾驶员通知警报。注意，通知单元412可以输出提示对异常行为进行校正的语音(例如，当驾驶员侧视时，指示“注意前方”的语音)来替代警报。此外，DSM 4本身可以包括扬声器，并且可以从扬声器输出警报或语音。
照相机44例如是红外照相机，并且被布置在可以拍摄车辆2中的驾驶员的图像的位置。照相机44将拍摄的视频图像(图像)数据输出到车辆行为检测单元311。
例如，通信单元5被配置为包括数据通信模块(DCM)，并且经由网络NW通过无线通信与服务器1通信。ECU 6对安装在车辆2中的构成元件的操作执行集中控制。扬声器7和麦克风8设置在车辆2中，并且在物理上与扬声器15和麦克风16相同。扬声器7和麦克风8可以设置在数字式自记速度仪3和DSM 4中的每一个中。
信息记录与再现方法
将参照图3描述由根据第一实施例的信息记录与再现系统执行的信息记录与再现方法。下面将描述的处理流程在车辆2的点火开关从关闭状态切换至开启状态的时刻开始，并且例程进行到步骤S1。此外，数字式自记速度仪3的处理(步骤S1至S3)和DSM 4的处理(步骤S4至S6)可以在如图3所示的不同的时刻执行，或者可以在相同的时刻执行。
首先，数字式自记速度仪3的控制单元31开始车辆行为信息的数据记录(步骤S1)。然后，车辆行为检测单元311基于从传感器组36输入的传感器数据来检测车辆2的行为(步骤S2)。然后，车辆行为检测单元311将车辆行为信息和由照相机34拍摄的视频图像(图像)发送到服务器1(步骤S3)。
随后，DSM 4的控制单元41开始驾驶员行为信息的数据记录(步骤S4)。然后，驾驶员行为检测单元411基于从照相机44输入的图像来检测驾驶员的行为(步骤S5)。然后，驾驶员行为检测单元411向服务器1发送驾驶员行为信息和由照相机44拍摄的视频图像(图像)(步骤S6)。
随后，服务器1的同步单元111以同步可再现的方式将从数字式自记速度仪3接收到的车辆行为信息和从DSM 4接收到的驾驶员行为信息累积在存储单元13中(步骤S7)。利用以上流程，信息记录与再现方法的处理结束。
如上所述，利用根据第一实施例的信息记录与再现装置、信息记录与再现程序以及信息记录与再现系统，可以在稍后的时刻彼此同步地再现车辆行为信息和驾驶员行为信息。这使得能够有助于对异常行为的原因进行分析，这提高了作为用于分析的数据的信息的有用性。也就是说，通过相互关联地分析车辆2的行为和驾驶员的行为，可以识别驾驶员的异常行为(例如，睡着)的原因，这使得能够提前防止驾驶员的异常行为的发生。
第二实施例
将参照图4描述根据本公开的第二实施例的信息记录与再现装置、信息记录与再现程序以及信息记录与再现系统。
信息记录与再现系统
除了信息记录和再现系统包括服务器1A来代替服务器1之外，根据第二实施例的信息记录和再现系统具有与根据第一实施例的信息记录和再现系统类似的配置。因此，下面将仅描述服务器1A的配置。
服务器
服务器1A包括控制单元11A、通信单元12、存储单元13、显示单元14、扬声器15和麦克风16。控制单元11A在物理上与控制单元11相同。通过执行存储在存储单元13中的程序，控制单元11A用作同步单元111、显示控制单元112和分析单元113以及学习单元114。
这里，数字式自记速度仪3的车辆行为检测单元311基于预定的第一判定标准(阈值)来判定车辆2的异常行为是否发生。此外，DSM 4的驾驶员行为检测单元411基于预定的第二判定标准(阈值)来判定驾驶员的异常行为是否发生。
根据第二实施例的分析单元113分析从车辆行为检测单元311获取的车辆行为信息和从驾驶员行为检测单元411获取的驾驶员行为信息，并且基于分析结果变更第一判定标准和第二判定标准。反馈车辆行为信息和驾驶员行为信息的分析结果以变更在检测异常行为时要使用的阈值(第一判定标准和第二判定标准)。因此，可以提高异常行为的检测精度。
此外，根据第二实施例的学习单元114对DSM 4的驾驶员行为检测单元411判定的有无驾驶员的异常行为与有无实际异常行为之间的关系进行机器学习来生成学习模型。然后，替代由驾驶员行为检测单元411进行的判定，学习单元114使用如上生成的学习模型来判定驾驶员的异常行为是否发生。利用该配置，可以使用学习模型来提高异常行为的检测精度，在该学习模型中，学习了所判定的驾驶员的异常行为的有无与实际异常行为的有无之间的关系。
如上所述，利用根据第二实施例的信息记录与再现装置、信息记录与再现程序以及信息记录与再现系统，提高了车辆2和驾驶员的异常行为的检测精度。
本领域的技术人员可以容易地得出进一步的效果和变型示例。因此，本发明的更广泛的方案不限于以上表示和描述的具体细节和代表性实施例。因此，在不脱离由所附权利要求及其等同物所限定的总体发明构思的精神和范围的情况下，可以进行各种修改。
例如，在第一实施例和第二实施例中，没有具体限制车辆行为信息和驾驶员行为信息的同步时刻。在第一实施例和第二实施例中，从数字式自记速度仪3接收的车辆行为信息与从DSM 4接收的驾驶员行为信息在时间上同步，并且同步的信息被累积在存储单元13中。然而，车辆行为信息和驾驶员行为信息可以在车辆行为信息与驾驶员行为信息在时间上不同步的状态下累积在存储单元13中，并且可以在再现时同步。在这种情况下，在显示控制单元112从存储单元13读取车辆行为信息和驾驶员行为信息之后，显示控制单元112基于在车辆行为信息和驾驶员行为信息中包括的时间信息将车辆行为信息与驾驶员行为信息在时间上同步，并且在显示单元14上显示同步的信息。

Claims (17)

1.一种信息记录与再现装置，其特征在于，包括
处理器，其包括硬件，并且被配置为：
从安装在车辆中的第一装置获取表示与驾驶员的异常行为有关的信息的第一信息；
从安装在所述车辆中的第二装置获取表示与所述车辆的异常行为有关的信息的第二信息；并且
以同步可再现的方式将所述第一信息和所述第二信息累积在存储器中；以及
显示器，其被配置为彼此同步地显示所述第一信息和所述第二信息，以便相互关联地分析所述车辆的所述异常行为和所述驾驶员的所述异常行为，
所述处理器被配置为，当所述第一信息和所述第二信息彼此同步并且显示在所述显示器上时，仅显示所述第一信息中包括的所述驾驶员的所述异常行为或所述第二信息中包括的所述车辆的所述异常行为持续的区间。
2.根据权利要求1所述的信息记录与再现装置，其特征在于，所述处理器被配置为，当所述第一信息和所述第二信息彼此同步并且显示在所述显示器上时，将发生所述驾驶员的所述异常行为的区间显示为与所述异常行为的类型相对应的颜色被应用于所述区间。
3.根据权利要求1或2所述的信息记录与再现装置，其特征在于：
所述第一装置被配置为基于预定的第一判定标准来判定所述驾驶员的异常行为是否发生；
所述第二装置被配置为基于预定的第二判定标准来判定所述车辆的异常行为是否发生；并且
所述处理器被配置为分析所述第一信息和所述第二信息，并且基于分析结果变更所述第一判定标准和所述第二判定标准。
4.根据权利要求3所述的信息记录与再现装置，其特征在于，所述处理器被配置为，通过对所述第一装置判定的有无所述驾驶员的所述异常行为与有无实际异常行为之间的关系进行机器学习来生成学习模型，并且，代替由所述第一装置执行的所述判定，使用所述学习模型来判定所述驾驶员的所述异常行为是否发生。
5.根据权利要求1或2所述的信息记录与再现装置，其特征在于，所述第一信息和所述第二信息是从被配置为在相同时间在相同路线上重复地行驶的车辆获取的信息。
6.根据权利要求1或2所述的信息记录与再现装置，其特征在于：
所述第一装置是驾驶员状态监视器，其包括被配置为拍摄所述驾驶员的图像的照相机；
所述第二装置是数字式自记速度仪，所述数字式自记速度仪包括设置在车厢的内部和外部的照相机和传感器；并且
所述驾驶员的所述异常行为包括所述驾驶员转移视线、所述驾驶员的闭眼、所述驾驶员的头部摇晃以及所述驾驶员的驾驶姿势受到干扰中的至少一种，并且所述车辆的所述异常行为包括所述车辆快速加速、急转弯、快速接近周围车辆以及越过车道标记线中的至少一种。
7.一种非暂时性存储介质，其存储有指令，所述指令能够由包括硬件的一个以上处理器执行并且使所述一个以上处理器执行功能，其特征在于，所述功能包括：
从安装在车辆中的第一装置获取表示与驾驶员的异常行为有关的信息的第一信息；
从安装在所述车辆中的第二装置获取表示与所述车辆的异常行为有关的信息的第二信息；
以同步可再现的方式将所述第一信息和所述第二信息累积在为信息记录与再现装置设置的存储器中；
彼此同步地显示所述第一信息和所述第二信息，以便相互关联地分析所述车辆的所述异常行为和所述驾驶员的所述异常行为；以及
当所述第一信息和所述第二信息彼此同步并且显示在被配置为显示所述第一信息和所述第二信息的显示器上时，仅在所述显示器上显示所述第一信息中包括的所述驾驶员的所述异常行为或所述第二信息中包括的所述车辆的所述异常行为持续的区间。
8.根据权利要求7所述的非暂时性存储介质，其特征在于，所述功能还包括：当所述第一信息和所述第二信息彼此同步并且显示在所述显示器上时，将发生所述驾驶员的所述异常行为的区间显示为与所述异常行为的类型相对应的颜色被应用于所述区间。
9.根据权利要求7或8所述的非暂时性存储介质，其特征在于：
所述第一装置被配置为基于预定的第一判定标准来判定所述驾驶员的异常行为是否发生；
所述第二装置被配置为基于预定的第二判定标准来判定所述车辆的异常行为是否发生；并且
所述功能还包括分析所述第一信息和所述第二信息，以及基于分析结果变更所述第一判定标准和所述第二判定标准。
10.根据权利要求9所述的非暂时性存储介质，其特征在于，所述功能还包括：
通过对所述第一装置判定的有无所述驾驶员的所述异常行为与有无实际异常行为之间的关系进行机器学习来生成学习模型；以及
代替由所述第一装置执行的所述判定，使用所述学习模型来判定所述驾驶员的所述异常行为是否发生。
11.根据权利要求7或8所述的非暂时性存储介质，其特征在于，所述第一信息和所述第二信息是从被配置为在相同时间在相同路线上重复地行驶的车辆获取的信息。
12.根据权利要求7或8所述的非暂时性存储介质，其特征在于：
所述第一装置是驾驶员状态监视器，其包括被配置为拍摄所述驾驶员的图像的照相机；
所述第二装置是数字式自记速度仪，所述数字式自记速度仪包括设置在车厢的内部和外部的照相机和传感器；并且
所述驾驶员的所述异常行为包括所述驾驶员转移视线、所述驾驶员的闭眼、所述驾驶员的头部摇晃以及所述驾驶员的驾驶姿势受到干扰中的至少一种，并且所述车辆的所述异常行为包括所述车辆快速加速、急转弯、快速接近周围车辆以及越过车道标记线中的至少一种。
13.一种信息记录与再现系统，其特征在于，包括：
第一装置，其包括第一处理器，所述第一处理器包括硬件，所述第一处理器安装在车辆中，并且所述第一处理器被配置为发送表示与驾驶员的异常行为有关的信息的第一信息；
第二装置，其包括第二处理器，所述第二处理器包括硬件，所述第二处理器安装在所述车辆中，并且所述第二处理器被配置为发送表示与所述车辆的异常行为有关的信息的第二信息；以及
服务器，其包括第三处理器以及显示器，所述第三处理器包括硬件，并且所述第三处理器被配置为从所述第一装置获取所述第一信息，从所述第二装置获取所述第二信息，并且以同步可再现的方式将所述第一信息和所述第二信息累积在存储器中；所述显示器被配置为彼此同步地显示所述第一信息和所述第二信息，以便相互关联地分析所述车辆的所述异常行为和所述驾驶员的所述异常行为，
所述第三处理器被配置为，当所述第一信息和所述第二信息彼此同步并且显示在所述显示器上时，仅显示所述第一信息中包括的所述驾驶员的所述异常行为或所述第二信息中包括的所述车辆的所述异常行为持续的区间。
14.根据权利要求13所述的信息记录与再现系统，其特征在于，所述第三处理器被配置为，当所述第一信息和所述第二信息彼此同步并且显示在所述显示器上时，将发生所述驾驶员的所述异常行为的区间显示为与所述异常行为的类型相对应的颜色被应用于所述区间。
15.根据权利要求13或14所述的信息记录与再现系统，其特征在于：
所述第一处理器被配置为基于预定的第一判定标准来判定所述驾驶员的异常行为是否发生；
所述第二处理器被配置为基于预定的第二判定标准来判定所述车辆的异常行为是否发生；并且
所述第三处理器被配置为分析所述第一信息和所述第二信息，并且基于分析结果变更所述第一判定标准和所述第二判定标准。
16.根据权利要求15所述的信息记录与再现系统，其特征在于，所述第三处理器被配置为，通过对所述第一装置判定的有无所述驾驶员的所述异常行为与有无实际异常行为之间的关系进行机器学习来生成学习模型，并且，代替由所述第一装置执行的所述判定，使用所述学习模型来判定所述驾驶员的所述异常行为是否发生。
17.根据权利要求13或14所述的信息记录与再现系统，其特征在于，所述第一信息和所述第二信息是从被配置为在相同时间在相同路线上重复地行驶的车辆获取的信息。
CN202011490210.5A 2019-12-25 2020-12-16 信息记录与再现装置、非暂时性存储介质和信息记录与再现系统 Active CN113034724B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-234640 2019-12-25
JP2019234640A JP7243616B2 (ja) 2019-12-25 2019-12-25 情報記録再生装置、情報記録再生プログラムおよび情報記録再生システム

Publications (2)

Publication Number Publication Date
CN113034724A CN113034724A (zh) 2021-06-25
CN113034724B true CN113034724B (zh) 2023-01-31

Family

ID=76459241

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011490210.5A Active CN113034724B (zh) 2019-12-25 2020-12-16 信息记录与再现装置、非暂时性存储介质和信息记录与再现系统

Country Status (3)

Country Link
US (1) US20210197835A1 (zh)
JP (1) JP7243616B2 (zh)
CN (1) CN113034724B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7127661B2 (ja) * 2020-03-24 2022-08-30 トヨタ自動車株式会社 開眼度算出装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102750755A (zh) * 2012-06-11 2012-10-24 上海博闻汽车配件有限公司 车辆行驶定位视频安全系统主机实施方法
CN103813139A (zh) * 2013-12-31 2014-05-21 南宁市公安局 一种车载监控设备
CN103871243A (zh) * 2014-04-16 2014-06-18 武汉欧普威科技有限公司 基于主动安全平台的无线车辆管理系统及方法
CN109804418A (zh) * 2016-09-29 2019-05-24 株式会社电装 车辆运行管理系统
CN110558998A (zh) * 2019-09-17 2019-12-13 广东工业大学 一种基于adas系统的汽车疲劳驾驶检测控制方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9041561B2 (en) * 2006-10-05 2015-05-26 Trimble Navigation Limited Method for controlling power usage of a reporting device
JP2008107535A (ja) * 2006-10-25 2008-05-08 Jidosha Anzen Unten Center 車両運転教育装置
JP2008186174A (ja) * 2007-01-29 2008-08-14 Toyota Motor Corp 走行状況記録装置
JP2010130577A (ja) * 2008-11-28 2010-06-10 Fujitsu Ten Ltd 常時記録画像処理プログラム
CN201707720U (zh) * 2010-06-28 2011-01-12 宁波四维科技有限公司 Gps车载硬盘录像机
JP2014044691A (ja) * 2012-08-29 2014-03-13 Toyoda Gosei Co Ltd ドライブレコーダシステム
US9500865B2 (en) * 2013-03-04 2016-11-22 Alex C. Chen Method and apparatus for recognizing behavior and providing information
US20150094929A1 (en) * 2013-09-30 2015-04-02 Ford Global Technologies, Llc Vehicle diagnostic and prognostic systems and methods
JP6315974B2 (ja) * 2013-12-18 2018-04-25 株式会社ユピテル システム及びプログラム
JP2016057490A (ja) * 2014-09-10 2016-04-21 スズキ株式会社 運転支援システム
CN104363429B (zh) * 2014-11-28 2018-03-23 哈尔滨威克技术开发公司 一种机车运行监视系统
US9925987B1 (en) * 2015-12-11 2018-03-27 Lytx, Inc. Driving abnormality detection
WO2017171005A1 (ja) * 2016-04-01 2017-10-05 株式会社ｗｉｓｅ ３ｄグラフィック生成、人工知能の検証・学習システム、プログラム及び方法
CN205788318U (zh) * 2016-05-25 2016-12-07 广州通易科技有限公司 一种可同时记录和展示驾驶动作及行车视频的设备
JP6972629B2 (ja) * 2017-04-14 2021-11-24 ソニーグループ株式会社 情報処理装置、情報処理方法、及び、プログラム
JP2018195301A (ja) * 2017-05-15 2018-12-06 キヤノン株式会社 制御装置及び制御方法
JP6927773B2 (ja) * 2017-07-12 2021-09-01 矢崎エナジーシステム株式会社 記録画像処理方法、記録画像処理装置、およびデータ処理システム
JP2019152942A (ja) * 2018-03-01 2019-09-12 矢崎エナジーシステム株式会社 点呼システム
US20200086788A1 (en) * 2018-09-19 2020-03-19 Richard J. Pivnicka Method and system for alerting drivers with direction specific audio system
CN112622916A (zh) * 2019-10-08 2021-04-09 株式会社斯巴鲁 车辆的驾驶辅助系统
KR20210052634A (ko) * 2019-10-29 2021-05-11 엘지전자 주식회사 운전자의 부주의를 판단하는 인공 지능 장치 및 그 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102750755A (zh) * 2012-06-11 2012-10-24 上海博闻汽车配件有限公司 车辆行驶定位视频安全系统主机实施方法
CN103813139A (zh) * 2013-12-31 2014-05-21 南宁市公安局 一种车载监控设备
CN103871243A (zh) * 2014-04-16 2014-06-18 武汉欧普威科技有限公司 基于主动安全平台的无线车辆管理系统及方法
CN109804418A (zh) * 2016-09-29 2019-05-24 株式会社电装 车辆运行管理系统
CN110558998A (zh) * 2019-09-17 2019-12-13 广东工业大学 一种基于adas系统的汽车疲劳驾驶检测控制方法

Also Published As

Publication number Publication date
JP2021103449A (ja) 2021-07-15
JP7243616B2 (ja) 2023-03-22
CN113034724A (zh) 2021-06-25
US20210197835A1 (en) 2021-07-01

Similar Documents

Publication Publication Date Title
KR101783982B1 (ko) 차량용 감시 카메라를 이용한 통합 관제 시스템 및 그 방법
CN110462702B (zh) 行驶路径提供系统及其控制方法、以及介质
US11068727B2 (en) Information processing system, non-transitory storage medium storing program, and control method
CN105957310A (zh) 驾驶过程中的休息提醒方法、装置和设备
CN106482740A (zh) 生成导航线路的方法及装置
JP2012155516A (ja) 車両挙動記録システム
JP4445493B2 (ja) 運転支援装置
JP2013032949A (ja) 車両用表示処理システムおよび車両用表示処理方法並びにプログラム
CN113034724B (zh) 信息记录与再现装置、非暂时性存储介质和信息记录与再现系统
JP6345572B2 (ja) 走行映像記録システムおよびこれに用いるドライブレコーダ、並びに記録走行映像のアップロード方法
US20210179131A1 (en) Driver assistance device, non-transitory storage medium storing driver assistance program, and driver assistance system
JP6518309B1 (ja) 走行状態再現システム
JP7057074B2 (ja) 車載器および運転支援装置
JP2020201753A (ja) 運転支援装置、方法、プログラム及びシステム
JP5085693B2 (ja) 運転支援装置および運転支援方法
JP2017016483A (ja) 車間情報表示装置
US20200111202A1 (en) Image processing apparatus, image processing method, and non-transitory readable recording medium storing program
JP2021176107A (ja) ドライブレコーダ、接近検知方法、及び接近検知プログラム
JP5139480B2 (ja) 運転支援装置、運転支援システム、運転支援ソフトおよび運転支援方法
JP6833322B2 (ja) 探索装置、探索方法、探索プログラム及び記録媒体、並びにナビゲーション装置
JP2014154125A (ja) 走行支援システム、走行支援方法及びコンピュータプログラム
JP2018169667A (ja) 運転情報記録システム、運転情報記録方法、及びプログラム
KR102309033B1 (ko) 영상들을 동기화하는 방법 및 장치
US11881065B2 (en) Information recording device, information recording method, and program for recording information
JP2009295189A (ja) 運転支援装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant