CN116670738A - 检测功能控制装置、检测功能控制方法以及程序 - Google Patents

检测功能控制装置、检测功能控制方法以及程序 Download PDF

Info

Publication number
CN116670738A
CN116670738A CN202280008295.XA CN202280008295A CN116670738A CN 116670738 A CN116670738 A CN 116670738A CN 202280008295 A CN202280008295 A CN 202280008295A CN 116670738 A CN116670738 A CN 116670738A
Authority
CN
China
Prior art keywords
vehicle
detection function
function control
detection
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280008295.XA
Other languages
English (en)
Inventor
孝治吉春
小野寺毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Publication of CN116670738A publication Critical patent/CN116670738A/zh
Pending legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/21—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/223—Posture, e.g. hand, foot, or seat position, turned or inclined
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Combined Controls Of Internal Combustion Engines (AREA)

Abstract

检测功能控制装置包括：车辆状况判定部，基于点火状态、是否就座于座位、车辆的加速度、车辆的位置、车辆的速度和所采集的声音中的任一个以上的检测结果来判定车辆的状况；以及检测功能控制部，基于由车辆状况判定部判定出的状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。

Description

检测功能控制装置、检测功能控制方法以及程序
技术领域
本发明涉及检测功能控制装置、检测功能控制方法以及程序。
背景技术
已知在小型的终端上搭载AI(Artificial Intelligence，人工智能)功能，进行利用者的面部认证、瞌睡的检测等的技术。例如，已知有在不设置相机的情况下检测瞌睡的装置(专利文献1)。
现有技术文献
专利文献
专利文献1：日本特开2010-250577号公报
发明内容
AI功能需要根据其目的而执行不同的推论模型。在推论模型的执行中需要大量的计算资源(CPU资源或专用电路资源)。因此，在小型终端中能够同时执行的推论模型的数量存在界限。
在近年来的高性能行车记录仪中，有搭载DMS(Driver Monitoring System，驾驶员监控系统)的行车记录仪。在该DMS中，例如搭载有检测驾驶员的面部认证、分心、瞌睡、通话动作等并警告危险驾驶的功能。然而，在小型终端中，多数情况下不存在用于执行这些所有功能的计算力。因此，难以在小型的终端上安装DMS那样的功能。
对于保有的计算能力要求能够运行更多的检测功能。
本实施方式是鉴于上述方面而完成的，提供一种能够针对保有的计算能力来运行更多的检测功能的检测功能控制装置、检测功能控制方法以及程序。
本实施方式是为了解决上述的课题而完成的，本实施方式的一个方式是一种检测功能控制装置，包括：车辆状况判定部，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及检测功能控制部，基于由所述车辆状况判定部判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
另外，在本实施方式的一个方式中，在上述的检测功能控制装置中，当所述车辆状况判定部判定为所述加速度、所述位置、所述速度的全部的变化量小于规定、且所述车辆状况判定部判定为点火接通之后处于规定时间以内时，或者当所述车辆状况判定部判定为就座状态发生了变化时，所述检测功能控制部运行面部认证功能。
另外，在本实施方式的一个方式中，在上述的检测功能控制装置中，当所述车辆状况判定部判定为所述加速度、所述位置、所述速度中的任一个以上的变化量为规定以上时，所述检测功能控制部运行用于判定分心驾驶的功能。
另外，在本实施方式的一个方式中，在上述的检测功能控制装置中，当所述车辆状况判定部判定为驾驶员正在讲话时，所述检测功能控制部运行用于判定通话动作的图像识别功能。
另外，在本实施方式的一个方式中，在上述的检测功能控制装置中，当所述车辆状况判定部判定为驾驶员沉默时，所述检测功能控制部运行用于判定瞌睡驾驶的图像识别功能。
另外，本实施方式的一个方式是一种检测功能控制方法，具有：车辆状况判定步骤，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及检测功能控制步骤，基于由所述车辆状况判定步骤判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
另外，本实施方式的一个方式是一种程序，用于使计算机执行：车辆状况判定步骤，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及检测功能控制步骤，基于由所述车辆状况判定步骤判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
根据本实施方式，能够对于保有的计算能力而运行更多的检测功能。
附图说明
图1是示出本实施方式所涉及的行车记录仪的硬件结构的一个示例的图。
图2是示出本实施方式所涉及的行车记录仪的功能结构的一个示例的图。
图3是示出本实施方式所涉及的车辆状况和是否运行多个检测功能的关系的一个示例的图。
图4是示出本实施方式所涉及的检测功能控制处理的一个示例的图。
图5是示出本实施方式所涉及的检测功能控制处理的一个示例的图。
具体实施方式
(实施方式)
以下，参照附图对本实施方式进行详细说明。在本实施方式中，作为一个例子，对在行车记录仪1中搭载有检测驾驶员的面部认证、分心、瞌睡、通话动作等多个检测项目的AI的情况进行说明。行车记录仪1搭载于由驾驶员2(未图示)驾驶的车辆3(未图示)。行车记录仪1例如主要设置在车辆3(未图示)的仪表板或挡风玻璃上。
[行车记录仪的结构]
图1是示出本实施方式所涉及的行车记录仪1的硬件结构的一个示例的图。行车记录仪1包括加速度传感器10、陀螺仪传感器11、GPS接收部12、车辆信号电缆13、相机14、扬声器15、显示器16、操作按钮17、麦克风18、计时器19、CPU110、ROM111、RAM112、以及通信模块113。加速度传感器10、陀螺仪传感器11、GPS接收部12、车辆信号电缆13、相机14、扬声器15、显示器16、操作按钮17、麦克风18、计时器19、CPU110、ROM111、RAM112和通信模块113通过信号线彼此连接。
加速度传感器10测量车辆3的加速度。
陀螺仪传感器11测量车辆3的角速度。
GPS接收部12利用GPS(Global Positioning System，全球定位系统)获取表示车辆3的当前位置的信息。
车辆信号电缆13从车辆3获取车辆信号。车辆信号是表示车辆3的状态的信号。车辆信号电缆13从车辆3的ECU(Electronic Control Unit，电子控制单元)获取各种车辆信号。各种车辆信号例如包括点火开关信号、车速信号、表示车辆3的转向角的信号、表示施加于车辆3的座位的压力值的信号等。
相机14包括第一相机和第二相机。第一相机拍摄驾驶员2的身体的一部分或全部。第二相机拍摄和记录车辆3行驶中的运动图像。
扬声器15输出基于声音的警告音。
显示器16显示各种画面。显示器16例如是液晶显示器或有机电致发光(EL：Electroluminescence)显示器等。
操作按钮17是用于用户操作行车记录仪1的按钮。
此外，显示器16也可以是触摸面板，在该情况下，操作按钮17也可以与显示器16成为一体而构成。或者，也可以构成为操作按钮17的一部分与显示器16成为一体。
麦克风18采集声音。该声音中包含驾驶员2的讲话声音。
计时器19进行计时。
CPU110从ROM111读入程序，按照读入的程序来执行各种控制。CPU110内置有多个缓存器等内部存储介质。CPU110从ROM111向内部存储介质暂时存储数据，对其进行运算处理。CPU110将运算结果输出到缓存器，进而从缓存器输出到RAM112、外部的存储介质。
ROM111是存储有用于CPU110进行各种运算、控制的各种程序、数据和参数等的主存储装置。即使在向ROM111供给的电力为零的状态下，ROM111也能够保持存储内容。
RAM112是在CPU110中作为工作存储器使用的主存储装置。RAM112通过CPU110进行程序、数据等的写入和删除。RAM112例如使用半导体存储装置等存储装置而构成。
通信模块113经由无线网络NW进行各种信息的发送和接收。通信模块113具备通信接口(I/F)。
图2是示出本实施方式所涉及的行车记录仪1的功能结构的一个示例的图。行车记录仪1包括控制部20、加速度获取部21、角速度获取部22、位置获取部23、车辆信号获取部24、采集部25、拍摄部26、计时部27、操作部28、声音输出部29、显示部210、通信部211和存储部212。
控制部20进行关于行车记录仪1的各种控制。控制部20例如具备CPU，进行各种运算、信息的收发。控制部20所具备的各功能部通过CPU从ROM读入程序并执行处理来实现。关于控制部20所具备的各功能部，在后面叙述。控制部20包括图1所示的CPU110、ROM111和RAM112。
加速度获取部21获取车辆3的加速度。加速度获取部21基于获取的加速度生成加速度数据A1。加速度数据A1表示车辆3的加速度。加速度获取部21包括图1所示的加速度传感器10。
角速度获取部22获取车辆3的角速度。角速度获取部22基于所获取的角速度来生成角速度数据B1。角速度数据B1表示车辆3的角速度。角速度获取部22包括图1所示的陀螺仪传感器11。
位置获取部23获取车辆3的位置。位置获取部23基于获取的位置来生成位置数据C1。位置数据C1表示车辆3的位置。位置获取部23包括图1所示的GPS接收部12。
车辆信号获取部24获取车辆3的车辆信号。车辆信号获取部24基于获取到的车辆信号来生成车辆信号数据D1。车辆信号数据D1包括表示点火接通或断开的数据、表示车辆3的车速的数据、转向角数据、以及就座数据。转向角数据表示车辆3的转向角。就座数据表示施加于车辆3的座位的压力值。车辆信号获取部24包括图1所示的车辆信号电缆13。
采集部25对驾驶员2的讲话所产生的声音进行采集。采集部25进行采集的结果是生成声音数据E1。声音数据E1表示驾驶员2的讲话所产生的声音。采集部25包括图1所示的麦克风18。
拍摄部26拍摄驾驶员2的面部、驾驶员2的动作中的任一个以上。拍摄部26拍摄的结果生成图像数据F1。图像数据F1表示驾驶员2的面部、驾驶员2的动作的任一个以上。拍摄部26包含图1所示的相机14。
计时部27进行各种计时。计时部27根据来自控制部20的信号进行计时的开始和停止。计时部27根据计时的结果生成计时数据G1。计时数据G1例如包括从控制部20获取计时开始的信号起到获取计时停止的信号为止所经过的时间。计时部27有时并行进行多个计时。在并行进行多个计时的情况下，在计时数据G1中包含这些多个计时的结果。另外，计时数据G1中也可以包含当前时刻。
计时部27包括图1所示的计时器19。
操作部28接收用户对行车记录仪1进行的各种操作。操作部28包括图1所示的操作按钮17。另外，在操作按钮17与显示器16成为一体而作为触摸面板而设置的情况下，操作部28包含该触摸面板。
声音输出部29输出各种声音。声音输出部29输出的声音例如包括对驾驶员2进行检测的结果为在检测到异常的情况下作为警告音输出的声音。
显示部210显示各种画面。在显示部210所显示的画面中，例如包含对驾驶员2进行检测的结果为在检测到异常的情况下作为警告而显示的警告画面。显示部210包括图1所示的显示器16和RAM112。RAM112包括警告画面的图像数据。
通信部211与外部装置进行通信。通信部211进行通信的外部装置包括服务器(未图示)。通信部211包括图1所示的通信模块113。
存储部212存储各种信息。存储部212包含图1所示的RAM112。
在此，对控制部20所具备的各功能部进行说明。控制部20包括获取部200、操作接收部2010、显示控制部2011、警告部2012、检测执行部30和检测功能管理部31。
获取部200获取各种信息。获取部200包括加速度数据获取部201、角速度数据获取部202、转向角数据获取部203、位置信息获取部204、车辆信号数据获取部205、就座数据获取部206、声音数据获取部207、拍摄图像获取部208、以及计时数据获取部209。
加速度数据获取部201从加速度获取部21获取加速度数据A1。
角速度数据获取部202从角速度获取部22获取角速度数据B1。
转向角数据获取部203从车辆信号获取部24获取车辆信号数据D1所包含的转向角数据。
位置信息获取部204从位置获取部23获取位置数据C1。
车辆信号数据获取部205从车辆信号获取部24获取车辆信号数据D1。
就座数据获取部206从车辆信号获取部24获取车辆信号数据D1所包含的施压数据。
声音数据获取部207从采集部25获取声音数据E1。
拍摄图像获取部208从拍摄部26获取图像数据F1。
计时数据获取部209从计时部27获取计时数据G1。
操作接收部2010接收对操作部28进行的各种操作。
显示控制部2011控制显示部210，使显示部210显示各种画面。
警告部2012执行警告。例如，警告部2012控制声音输出部29，使声音输出部29输出警告音。
检测执行部30具备AI功能，检测通话动作等多个检测项目。换言之，检测执行部30根据多个检测项目分别执行多个检测功能。另外，用于检测执行部30进行各种判定的已学习的模型存储在存储部212中。检测执行部30相当于驾驶员监控系统(DMS：DriverMonitoring System)。
检测执行部30包括面部认证部300、分心驾驶判定部301、瞌睡驾驶判定部302和通话动作判定部303。
面部认证部300对驾驶员2的面部进行认证。面部认证部300通过对拍摄图像获取部208获取的图像数据F1所表示的驾驶员2的面部与存储于存储部212的车辆3的持有者的面部图像(未图示)进行比较，从而基于AI功能进行认证。面部认证部300收集面部认证的结果作为驾驶员的信息。面部认证例如是用于在车辆3为业务用车辆等的情况下防止不允许或无关的人驾驶的认证。例如，面部认证部300在面部认证的结果是判定为驾驶员2为不允许的人的情况下，使警告部2012执行警告。或者，面部认证也可以用于以防盗为目的，验证驾驶员2是否是车辆3的持有者。
分心驾驶判定部301判定分心驾驶。分心驾驶判定部301基于拍摄图像获取部208获取的图像数据F1所表示的驾驶员2的动作(例如，面部的朝向、视线的朝向等)，来判定驾驶员2是否在分心。在分心驾驶判定部301判定为驾驶员2正在分心的情况下，使警告部2012执行警告。
瞌睡驾驶判定部302判定瞌睡驾驶。瞌睡驾驶判定部302基于拍摄图像获取部208获取的图像数据F1所表示的驾驶员2的动作(例如，头部的摆动、眼睑是否打开等)，判定是否在瞌睡。瞌睡驾驶判定部302在判定为驾驶员2正在瞌睡的情况下，使警告部2012执行警告。
通话动作判定部303判定通话动作。通话动作判定部303基于声音数据获取部207获取的声音数据E1所表示的驾驶员2的声音来判定通话动作。通话动作判定部303也可以基于拍摄图像获取部208所获取的图像数据F1所表示的驾驶员2的动作(例如，将移动电话贴到耳边等)，来判定通话动作。通话动作判定部303在判定为驾驶员2正在通话的情况下，使警告部2012执行警告。
检测功能管理部31判定是否运行由检测执行部30执行的多个检测功能中的任一个。换言之，检测功能管理部31选择该多个检测功能中使其运行的检测功能。作为判定(或选择)的结果，检测功能管理部31可以运行一个检测功能，也可以运行多个检测功能。
在以下的说明中，也将检测功能管理部31执行的处理称为检测功能控制处理。
检测功能管理部31包括车辆状况判定部310和检测功能控制部311。
车辆状况判定部310基于规定的检测项目的检测结果来判定车辆状况。在此，规定的检测项目例如是点火状态、是否就座于座位、车辆的加速度、车辆3的位置、车辆3的速度和所采集的声音中的任一个以上。车辆状况是指车辆3的状况。车辆状况例如包括车辆3的移动状况、进行了驾驶的开始或者驾驶员更换的状况、驾驶员2讲话的状况等。车辆3的移动状况例如包括车辆3正在移动、车辆3向前方直行等。
此外，规定的检测项目也可以是点火状态、是否就座于座位、车辆的加速度、车辆3的位置、车辆3的速度和所采集的声音中的任一个以上。
检测功能控制部311基于由车辆状况判定部310判定出的车辆状况来判定是否运行用于检测危险驾驶的一个以上的检测功能中的任一个。检测功能控制部311将判定结果输出到检测执行部30，使检测执行部30运行多个检测功能中的该判定结果表示的检测功能。
在此，参照图3对车辆状况和是否运行多个检测功能的关系进行说明。图3是示出本实施方式所涉及的车辆状况和是否运行多个检测功能的关系的一个示例的图。
在图3中，作为车辆状况，示出了车辆3停止、车辆3正在移动、车辆3旋转、驾驶员2沉默、驾驶员2正在讲话。在图3中，在这些车辆状况的每一个的情况下，分别针对面部认证、分心、瞌睡和通话动作的检测项目示出是否运行检测机构。
需要进行基于面部认证的驾驶员信息的收集的是驾驶开始时和驾驶员更换时。仅在根据加速度传感器、GPS数据、车速脉冲数据等检测出车辆3未移动(停止)时执行面部认证，未检测到那些的剩余时间停止面部认证。
需要进行基于分心驾驶的检测的危险驾驶警告的是车辆3向前方直行时。仅在根据加速度传感器、GPS数据、车速脉冲数据等检测出车辆3正在移动、根据陀螺仪传感器、转向角数据等检测出车辆3未转弯(正在直行)时，才执行分心驾驶的检测功能，未检测到那些的剩余时间停止分心驾驶的检测功能。另外，在是否执行分心驾驶的检测功能的判定中，不需要驾驶员的沉默的检测、或者驾驶员的讲话的检测。
需要进行基于瞌睡检测的危险驾驶警告的是车辆3处于移动中且驾驶员2沉默时。仅在根据加速度传感器、GPS数据、车速脉冲数据等检测出车辆3正在移动、根据陀螺仪传感器、转向角数据等检测出车辆3正在转弯、根据从麦克风收集的声音数据检测出驾驶员沉默时，才执行瞌睡检测功能，未检测到那些的剩余时间停止瞌睡检测功能。
需要进行基于通话检测的危险驾驶警告的是车辆3处于移动中且驾驶员2正在讲话时。仅在根据加速度传感器、GPS数据、车速脉冲数据等检测出车辆3正在移动、根据陀螺仪传感器、转向角数据等检测出车辆3正在转弯、根据从麦克风收集的声音数据检测出驾驶员正在讲话时，才执行通话检测功能，未检测到那些的剩余时间停止通话检测功能。
[检测功能控制处理]
接着，参照图4和图5对检测功能控制处理的具体例进行说明。控制部20例如在行车记录仪1的电源接通的期间，分别并行地反复执行图4和图5所示的检测功能控制处理。另外，也可以仅执行图4和图5所示的检测功能控制处理中的任一个。
在图4和图5所示的检测功能控制处理开始之前，多个检测功能被判定为不运行。即，控制部20不使在多个检测功能中在图4和图5所示的检测功能控制处理中未判定为运行的检测功能运行。然而，由于反复执行图4和图5所示的检测功能控制处理，因此即使是在某个时间点判定为不运行的检测功能，有时也会在下次的检测功能控制处理中判定为运行。同样地，即使是在某一时间点判定为运行的检测功能，有时也会在下次的检测功能控制处理中判定为不运行。
图4是示出本实施方式所涉及的检测功能控制处理的一个示例的图。
步骤S10：车辆状况判定部310获取各种检测结果。在此，车辆状况判定部310从加速度数据获取部201获取加速度数据A1。车辆状况判定部310从位置信息获取部204获取位置数据C1。车辆状况判定部310从车辆信号数据获取部205获取车辆信号数据D1。车辆状况判定部310从计时数据获取部209获取计时数据G1。车辆状况判定部310从就座数据获取部206获取施压数据。
步骤S20：车辆状况判定部310判定车辆3的加速度、车辆3的位置、车辆3的速度的全部变化量是否小于规定。车辆状况判定部310例如针对加速度的变化量通过将加速度数据A1所表示的加速度除以计时数据G1所表示的规定时间来计算出该变化量。车辆状况判定部310例如针对位置的变化量，通过将位置数据C1所表示的多个位置之间的距离除以计时数据G1所表示的规定时间来计算出该变化量。车辆状况判定部310例如针对车速的变化量，基于车辆信号数据D1所表示的车速信号和计时数据G1所表示的规定时间来计算出该变化量。
车辆3的加速度的规定的变化量例如是超过发动机等的持续振动的变化量。该加速度的规定的变化量既可以预先决定，也可以根据过去规定时间内的加速度的变化量的平均值或者中央值等代表值来随时求出。
车辆3的位置的规定的变化量例如是指单位时间1秒后的GPS的位置的变化为规定距离1米。单位时间不限于1秒后，也可以设为10毫秒以上10秒以下的适当时间。另外，规定距离不限于1米，也可以设为0米以上10米以下的适当距离。
车辆3的速度的规定的变化量例如是时速3公里。不限于时速3公里，也可以设为时速0公里以上5公里以下的适当速度。
车辆状况判定部310在判定为车辆3的加速度、车辆3的位置、车辆3的速度的全部变化量小于规定的情况下(步骤S20；是)，执行步骤S30的处理。另一方面，在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量为规定以上的情况下(步骤S20；否)，检测功能管理部31执行步骤S50的处理。
步骤S30：车辆状况判定部310判定点火接通之后是否在规定时间以内或者座位的就座传感器是否存在变化。座位的就座传感器存在变化表示就座于座位的乘员的位置或人数有变化。
为了判定点火接通之后是否在规定时间以内，车辆状况判定部310在表示车辆信号数据D1变为点火接通的情况下，使计时部27开始计时。车辆状况判定部310基于计时数据G1将从变为点火接通起经过的时间与规定时间进行比较来进行判定。
另外，为了判定点火接通之后是否在规定时间以内，也可以基于车辆信号数据D1以外的车辆信号进行判定。
为了判定座位的就座传感器是否存在变化，车辆状况判定部310基于由施压数据表示的施加于车辆3的座位的压力值来进行判定。
车辆状况判定部310在判定为点火接通之后在规定时间以内或者座位的就座传感器存在变化的情况下(步骤S30；是)，检测功能管理部31执行步骤S40的处理。另一方面，在车辆状况判定部310判定为点火接通之后不在规定时间以内且座位的就座传感器没有变化的情况下(步骤S30；否)，检测功能管理部31结束检测功能控制处理。
步骤S40：检测功能控制部311判定为运行面部认证功能。检测功能控制部311使面部认证部300执行面部认证功能。
步骤S50：检测功能控制部311判定为运行判定分心驾驶的功能。检测功能控制部311使分心驾驶判定部301执行判定分心驾驶的功能。即，检测功能控制部311在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量为规定以上的情况下，运行判定分心驾驶的功能。
以上，检测功能管理部31结束检测功能控制处理。
另外，需要面部认证的是驾驶员2更替时。图4所示的检测功能控制处理基于假设驾驶员2更替的是车辆3未移动的情况。在图4所示的检测功能控制处理中，作为车辆3未移动的条件的一个示例，使用了点火接通之后在规定时间以内的条件。
另外，需要进行分心驾驶的判定的是车辆3正在行驶时。在图4所示的检测功能控制处理中，作为车辆3正在行驶的条件的一个示例，使用了车辆3的加速度、车辆3的位置、车辆3的速度各自的变化量为规定以上这样的条件。
此外，如上所述，在图4所示的检测功能控制处理中，说明了判定是否运行面部认证功能、是否运行判定分心驾驶的功能两种的情况的一个示例，但不限于此。在图4所示的检测功能控制处理中，也可以省略是否运行面部认证功能、是否运行判定分心驾驶的功能中的任一个的判定。
在省略了是否运行面部认证功能的判定的情况下，在图4所示的检测功能控制处理中省略步骤S30和步骤S40的各处理。在该情况下，在步骤S20中，在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度的全部的变化量小于规定的情况下(步骤S20；是)，检测功能管理部31结束检测功能控制处理。另一方面，在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量为规定以上的情况下(步骤S20；否)，检测功能管理部31执行步骤S50的处理。
在省略了是否运行判定分心驾驶的功能的判定的情况下，在图4所示的检测功能控制处理中省略步骤S20和步骤S50的各处理。在该情况下，步骤S30的处理在步骤S10的处理之后执行。在步骤S30中，车辆状况判定部310在判定为点火接通之后在规定时间以内、或者座位的就座传感器存在变化的情况下(步骤S30；是)，检测功能管理部31执行步骤S40的处理。另一方面，在车辆状况判定部310判定为点火接通之后不在规定时间以内、且座位的就座传感器没有变化的情况下(步骤S30；否)，检测功能管理部31结束检测功能控制处理。
另外，座位的就座传感器存在变化是在就座状态发生变化的一个示例。就座状态发生变化的另一个示例是车辆3的车门被开关。车辆状况判定部310为了判定就座状态是否发生了变化，也可以判定车辆3的车门是否被开关。在该情况下，在车辆信号数据D1中包含表示车门开关的信号。车辆状况判定部310基于该信号判定车辆3的车门是否被开关。
另外，车辆状况判定部310为了判定就座状态是否发生了变化，也可以判定座位的就座传感器是否存在变化、车辆3的车门是否被开关这两者。
如上所述，在步骤S30中，车辆状况判定部310判定点火接通之后是否在规定时间以内或者就座状态是否发生了变化即可。因此，检测功能控制部311在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度的全部的变化量小于规定、且车辆状况判定部310判定为点火接通之后在规定时间以内的情况下或者车辆状况判定部310判定为就座状态发生了变化的情况下运行面部认证功能。
图5是示出本实施方式所涉及的检测功能控制处理的一个示例的图。
步骤S110：车辆状况判定部310获取各种检测结果。在此，车辆状况判定部310从声音数据获取部207获取声音数据E1。
步骤S120：车辆状况判定部310判定驾驶员2是否正在讲话。310基于声音数据E1所表示的驾驶员2的声音来判定驾驶员2是正在讲话还是沉默。
在车辆状况判定部310判定为驾驶员2正在讲话的情况下(步骤S120；是)，检测能管理部31执行步骤S130的处理。另一方面，在车辆状况判定部310判定为驾驶员2未讲话(沉默)的情况下(步骤S120；否)，检测功能管理部31执行步骤S140的处理。
步骤S130：检测功能控制部311判定为运行判定通话动作的图像识别功能。检测功能控制部311使通话动作判定部303执行判定通话动作的图像识别功能。因此，检测功能控制部311在车辆状况判定部310判定为驾驶员2正在讲话的情况下运行判定通话动作的图像识别功能。
步骤S140：检测功能控制部311判定为运行判定瞌睡驾驶的图像识别功能。检测功能控制部311使瞌睡驾驶判定部302执行判定瞌睡驾驶的图像识别功能。因此，检测功能控制部311在车辆状况判定部310判定为驾驶员2沉默的情况下，运行判定瞌睡驾驶的图像识别功能。
以上，检测功能管理部31结束检测功能控制处理。
另外，在图5所示的检测功能控制处理中，说明了根据驾驶员2是否正在讲话来判定是否运行判定瞌睡驾驶的图像识别功能的情况的一个示例，但不限于此。例如，也可以基于驾驶员2的讲话和转向角来判定是否运行判定瞌睡驾驶的图像识别功能。在该情况下，在驾驶员2沉默且转向角为规定以上的情况下，认为存在瞌睡的可能性，检测功能控制部311运行该功能。
如以上说明的那样，本实施方式所涉及的检测功能控制装置(在本实施方式中，行车记录仪1)包括车辆状况判定部310和检测功能控制部311。
车辆状况判定部310基于点火状态、是否就座于座位、车辆3的加速度、车辆3的位置、车辆3的速度和所采集的声音中的任一个以上的检测结果来判定车辆3的状况(在本实施方式中为车辆状况)。
检测功能控制部311基于由车辆状况判定部310判定出的状况(在本实施方式中为车辆状况)来判定是否运行用于检测危险驾驶的一个以上的检测功能(在本实施方式中，面部认证部300、分心驾驶判定部301、瞌睡驾驶判定部302、通话动作判定部303)中的任一个。
根据该结构，在本实施方式所涉及的检测功能控制装置(在本实施方式中为行车记录仪1)中，关于用于检测危险驾驶的一个以上的检测功能，能够根据车辆3的状况仅运行所需的功能，因此能够针对保有的计算能力而运行更多的检测功能。如上所述，检测功能基于AI。在本实施方式所涉及的检测功能控制装置中，即使在计算能力不高的小型终端所具备的DMS中，也能够安装并执行更多的危险驾驶警告功能。
另外，在本实施方式所涉及的检测功能控制装置(在本实施方式中，为行车记录仪1)中，检测功能控制部311当车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度的全部的变化量小于规定，且车辆状况判定部310判定为点火接通之后在规定时间以内时或者检测功能控制部311判定为就座状态发生了变化时，运行面部认证功能(在本实施方式中为面部认证部300)，当车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量为规定以上时，运行判定分心驾驶的功能(在本实施方式中为分心驾驶判定部301)。
根据该结构，在本实施方式所涉及的检测功能控制装置(在本实施方式中为行车记录仪1)中，能够基于车辆3未移动来判定是否发生了驾驶员2的更替，因此在发生了驾驶员2的更替的情况下，能够运行面部认证功能。另外，在本实施方式所涉及的检测功能控制装置中，由于能够判定车辆3是否处于行驶中，因此在车辆3处于行驶中的情况下，能够运行判定分心驾驶的功能。
另外，检测功能控制装置用于运行面部认证功能或判定分心驾驶的功能的条件不限于上述的条件。例如，检测功能控制部311也可以在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量小于规定且车辆状况判定部310判定为点火接通之后在规定时间以内的情况下，运行面部认证部300。另外，检测功能控制部311也可以在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度的全部的变化量为规定以上的情况下，运行分心驾驶判定部301。
另外，检测功能控制部311也可以在车辆状况判定部310判定为车辆3的加速度、车辆3的位置、车辆3的速度中的任一个以上的变化量小于规定的情况下，运行面部认证部300。检测功能控制部311也可以在车辆状况判定部310判定为点火接通之后在规定时间以内的情况下，运行面部认证部300。
另外，在本实施方式所涉及的检测功能控制装置(在本实施方式中为行车记录仪1)中，检测功能控制部311当车辆状况判定部310判定为驾驶员2正在讲话时，运行判定通话动作的图像识别功能(在本实施方式中为通话动作判定部303)，当车辆状况判定部310判定为驾驶员2沉默时，运行判定瞌睡驾驶的图像识别功能(在本实施方式中为瞌睡驾驶判定部302)。
根据该结构，在本实施方式所涉及的检测功能控制装置(在本实施方式中为行车记录仪1)中，能够判定驾驶员2是否正在讲话，因此在驾驶员2沉默的情况下，能够运行判定瞌睡驾驶的图像识别功能。
另外，也可以从检测执行部30的结构中省略面部认证部300、分心驾驶判定部301、瞌睡驾驶判定部302或者通话动作判定部303中的任一个以上。另外，在检测执行部30的结构中，除了面部认证部300、分心驾驶判定部301、瞌睡驾驶判定部302和通话动作判定部303以外，或者代替它们中的任一个，也可以具备具有其他检测功能的功能部。
另外，车辆状况判定部310作为车辆状况也可以来处理昼夜的识别。白天认为不需要瞌睡驾驶的检测。在该情况下，行车记录仪1也可以具备照度传感器。在车辆状况判定部310判定为照度传感器测定的亮度为规定以上的情况下，检测功能控制部311不使瞌睡驾驶判定部302运行判定瞌睡驾驶的图像识别功能。
另外，行车记录仪1除了图2中说明的功能以外，还具备将由相机14始终录像的影像存储于存储部212的记录功能。
另外，行车记录仪1也可以进行冲击检测时处理。在冲击检测时处理中，在检测到规定大小以上的冲击的情况下，包括使声音输出部29输出警告音的处理、使显示部210显示警告画面的处理。另外，在冲击检测时处理中包含生成事件信息并使存储部212存储事件信息的处理。
此外，控制部20也可以作为除行车记录仪以外的种类的搭载于车辆3的设备的功能而配置。在该设备是小型终端的情况下，优选使用控制部20的结构。在此，小型终端是指，计算能力不太高因此难以同时发挥多个AI功能的终端。
另外，也可以通过计算机来实现上述实施方式中的行车记录仪1的一部分、例如控制部20。在该情况下，也可以通过将用于实现该控制功能的程序记录于计算机可读取的记录介质，使计算机系统读入并执行记录于该记录介质的程序来实现。另外，这里所说的“计算机系统”是内置于行车记录仪1的计算机系统，包括OS、周边设备等硬件。另外，“计算机可读取的记录介质”是指软盘、光磁盘、ROM、CD-ROM等可移动介质、内置于计算机系统的硬盘等存储装置。并且，“计算机可读取的记录介质”也可以包括如经由互联网等网络或电话线路等通信线路发送程序的情况下的通信线那样在短时间内动态地保持程序的介质、如成为该情况下的服务器、客户端的计算机系统内部的易失性存储器那样保持一定时间程序的介质。另外，上述程序可以是用于实现前述的功能的一部分的程序，还可以是能够通过与已经记录在计算机系统中的程序的组合来实现前述的功能的程序。
另外，也可以将上述的实施方式中的行车记录仪1的一部分或全部作为LSI(LargeScale Integration，大规模集成电路)等集成电路来实现。行车记录仪1的各功能块既可以单独地处理器化，也可以将一部分或全部集成而处理器化。另外，集成电路化的方法不限于LSI，也可以通过专用电路或通用处理器来实现。另外，在随着半导体技术的进步而出现了代替LSI的集成电路化的技术的情况下，也可以使用基于该技术的集成电路。
以上，参照附图对本发明的一个实施方式进行了详细说明，但具体的结构并不限定于上述的结构，在不脱离本发明的主旨的范围内能够进行各种设计变更等。
产业上的可利用性
本实施方式所涉及的检测功能控制装置能够作为行车记录仪搭载于车辆来利用。
符号说明
1：行车记录仪；
2：驾驶员；
3：车辆；
310：车辆状况判定部；
311：检测功能控制部；
300：面部认证部；
301：分心驾驶判定部；
302：瞌睡驾驶判定部；
303：通话动作判定部。

Claims (7)

1.一种检测功能控制装置，包括：
车辆状况判定部，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及
检测功能控制部，基于由所述车辆状况判定部判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
2.根据权利要求1所述的检测功能控制装置，其中，
当所述车辆状况判定部判定为所述加速度、所述位置、所述速度的全部的变化量小于规定、且所述车辆状况判定部判定为点火接通之后处于规定时间以内时，或者当所述车辆状况判定部判定为就座状态发生了变化时，所述检测功能控制部运行面部认证功能。
3.根据权利要求1或2所述的检测功能控制装置，其中，
当所述车辆状况判定部判定为所述加速度、所述位置、所述速度中的任一个以上的变化量为规定以上时，所述检测功能控制部运行用于判定分心驾驶的功能。
4.根据权利要求1至3中任一项所述的检测功能控制装置，其中，
当所述车辆状况判定部判定为驾驶员正在讲话时，所述检测功能控制部运行用于判定通话动作的图像识别功能。
5.根据权利要求1至4中任一项所述的检测功能控制装置，其中，
当所述车辆状况判定部判定为驾驶员沉默时，所述检测功能控制部运行用于判定瞌睡驾驶的图像识别功能。
6.一种检测功能控制方法，具有：
车辆状况判定步骤，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及
检测功能控制步骤，基于由所述车辆状况判定步骤判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
7.一种程序，用于使计算机执行：
车辆状况判定步骤，基于点火状态、是否就座于座位、车辆的加速度、所述车辆的位置、所述车辆的速度和所采集的声音中的任一个以上的检测结果来判定所述车辆的状况；以及
检测功能控制步骤，基于由所述车辆状况判定步骤判定出的所述状况来判定是否运行用于检测危险驾驶的一个以上检测功能中的任一个。
CN202280008295.XA 2021-03-04 2022-01-14 检测功能控制装置、检测功能控制方法以及程序 Pending CN116670738A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021034404A JP2022134915A (ja) 2021-03-04 2021-03-04 検知機能制御装置、検知機能制御方法、及びプログラム
JP2021-034404 2021-03-04
PCT/JP2022/001149 WO2022185736A1 (ja) 2021-03-04 2022-01-14 検知機能制御装置、検知機能制御方法、及びプログラム

Publications (1)

Publication Number Publication Date
CN116670738A true CN116670738A (zh) 2023-08-29

Family

ID=83153977

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280008295.XA Pending CN116670738A (zh) 2021-03-04 2022-01-14 检测功能控制装置、检测功能控制方法以及程序

Country Status (4)

Country Link
US (1) US20230382397A1 (zh)
JP (1) JP2022134915A (zh)
CN (1) CN116670738A (zh)
WO (1) WO2022185736A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240034332A1 (en) * 2022-07-29 2024-02-01 Motorola Mobility Llc Driving condition detection and indication to a remote device during a communication session

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3797237B2 (ja) * 2002-02-06 2006-07-12 株式会社デンソー 車室内モニタ装置、車室内モニタ制御装置、車両泥棒特定システム
JP6047318B2 (ja) * 2012-07-06 2016-12-21 矢崎総業株式会社 ドライバ状態検出装置及びドライバ状態報知装置
JP5853897B2 (ja) * 2012-08-03 2016-02-09 株式会社デンソー 操作制御装置、及び、操作制御プログラム
JP6052062B2 (ja) * 2013-05-29 2016-12-27 株式会社デンソー 人物探索システム
WO2016052507A1 (ja) * 2014-09-30 2016-04-07 エイディシーテクノロジー株式会社 自動運転制御装置
JP3207515U (ja) * 2016-08-12 2016-11-17 田中　久生 車両における居眠り検出装置

Also Published As

Publication number Publication date
US20230382397A1 (en) 2023-11-30
JP2022134915A (ja) 2022-09-15
WO2022185736A1 (ja) 2022-09-09

Similar Documents

Publication Publication Date Title
US11210873B2 (en) Safety for vehicle users
US20210197849A1 (en) Warning device and driving tendency analysis method
CN108961681B (zh) 疲劳驾驶提醒方法、装置及存储介质
JP4058455B1 (ja) 携帯端末
US20090167516A1 (en) Look-away detecting device, method and program
CN112622917A (zh) 用于认证交通工具的乘员的系统和方法
CN105100503B (zh) 一种驾驶时移动终端的安全便捷使用方法及装置
CN110660398B (zh) 声纹特征更新方法、装置、计算机设备及存储介质
CN108437999A (zh) 一种注意力辅助系统
US20230382397A1 (en) Detection function control device, detection function control method, and non-transitory computer readable medium
JP2019091292A (ja) 異常検知装置、異常検知方法および異常検知プログラム、並びに車両用記録装置
CN112055670A (zh) 影像输出装置、影像输出方法及计算机程序
US20230393619A1 (en) System and method for assessing device usage
US11260874B2 (en) Driver assistance device that can be mounted on a vehicle
JP4487633B2 (ja) 車両内コミュニケーション装置
JP2005051427A (ja) 携帯端末装置、携帯端末装置の制御方法、及びプログラム
JP2019092077A (ja) 記録制御装置、記録制御方法およびプログラム
CN111292493A (zh) 一种振动提醒方法、装置、电子设备及系统
US11203325B2 (en) System and method for identifying a driver of a vehicle after the vehicle has been started
JP5762993B2 (ja) 携帯端末装置、携帯端末装置の動作制御方法および携帯端末装置の動作制御プログラム
US11881065B2 (en) Information recording device, information recording method, and program for recording information
US12033446B2 (en) Safety for vehicle users
CN216119022U (zh) 一种疲劳驾驶状态检测装置
US20240208295A1 (en) Information processing device
US20230401907A1 (en) Information processing device, information processing method, and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination