CN115366798A - 显示控制装置、显示控制方法及显示控制程序 - Google Patents

显示控制装置、显示控制方法及显示控制程序 Download PDF

Info

Publication number
CN115366798A
CN115366798A CN202210507699.5A CN202210507699A CN115366798A CN 115366798 A CN115366798 A CN 115366798A CN 202210507699 A CN202210507699 A CN 202210507699A CN 115366798 A CN115366798 A CN 115366798A
Authority
CN
China
Prior art keywords
driver
display
possibility
display control
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210507699.5A
Other languages
English (en)
Inventor
鹫尾宏太
真锅周平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN115366798A publication Critical patent/CN115366798A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/29—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area inside the vehicle, e.g. for viewing passengers or cargo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供显示控制装置、显示控制方法以及显示控制程序。显示控制装置具备：取得部，取得由拍摄部拍摄到的车辆的驾驶者的面部图像；判定部，基于所述取得部取得的所述面部图像判定所述驾驶者是否适合继续驾驶；及控制部，在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。

Description

显示控制装置、显示控制方法及显示控制程序
技术领域
本发明涉及显示控制装置、显示控制方法及显示控制程序。
背景技术
在日本特开2007-304705中，公开了促使驾驶者更强烈的清醒的技术。
发明内容
在日本特开2007-304705的技术中，电子控制装置基于由照相机拍摄的驾驶者的面部的图像来检测驾驶者的眨眼的状态，并基于该检测到的驾驶者的眨眼的状态来判定驾驶者是否感到睡意。
但是，在上述的电子控制装置基于驾驶者的眨眼的状态判定有无睡意的情况下，例如，有可能会在偶尔有异物进入眼中而长时间闭眼时误判定为有睡意。在基于这样的误判定对驾驶者进行了警告的情况下，会给驾驶者带来烦扰。另外，例如，在由于有眼镜而驾驶者的眨眼的检测不充分的情况下，尽管有睡意，也有可能误判定为没有睡意。在基于这样的误判定不向驾驶者进行警告的情况下，有可能对车辆的安全的运行带来障碍。因此，对于具有睡意这样的不适于继续驾驶的驾驶者，在不带来烦扰且在适当的定时进行警告方面存在改善的余地。
因此，本发明的目的在于提供显示控制装置、显示控制方法及显示控制程序，能够引导管理者在适当的定时进行警告而不会给不适于继续驾驶的驾驶者带来烦扰。
本公开的第一方式的显示控制装置具备：取得部，取得由拍摄部拍摄到的车辆的驾驶者的面部图像；判定部，基于所述取得部取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；及控制部，在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
在上述第一方式所涉及的显示控制装置中，取得部取得由拍摄部拍摄到的车辆的驾驶者的面部图像。另外，判定部基于取得部取得的面部图像来判定驾驶者是否适合继续驾驶。然后，控制部在由判定部判定为存在驾驶者不适合继续驾驶的可能性的情况下，使管理驾驶者的管理者侧的显示部显示被判定为存在驾驶者不适合继续驾驶的可能性时的面部图像。由此，在该显示控制装置中，通过使管理者侧的显示部显示被判定为存在驾驶者不适合继续驾驶的可能性时的面部图像，能够基于该面部图像来决定管理者是否向驾驶者发出注意及警告等的指示。因此，在该显示控制装置中，能够引导管理者在适当的定时进行警告而不给不适于继续驾驶的驾驶者带来烦扰。
在上述第一方式中，在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，所述控制部使所述显示部显示能够唯一地确定所述驾驶者的信息。
在上述方式的显示控制装置中，控制部在由判定部判定为存在驾驶者不适合继续驾驶的可能性的情况下，使管理者侧的显示部显示能够唯一地确定驾驶者的信息。由此，在该显示控制装置中，通过使管理者侧的显示部显示能够唯一地确定驾驶者的信息，管理者能够基于该信息来确定存在不适合继续驾驶的可能性的驾驶者。
在上述方式中，在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，所述控制部使所述显示部显示所述驾驶者的联系方式。
在上述方式的显示控制装置中，控制部在由判定部判定为存在驾驶者不适合继续驾驶的可能性的情况下，使管理者侧的显示部显示驾驶者的联系方式。由此，在该显示控制装置中，通过使管理者侧的显示部显示驾驶者的联系方式，管理者能够使用该联系方式容易地与存在不适合继续驾驶的可能性的驾驶者进行联系。
在上述方式中，所述判定部基于所述取得部取得的所述面部图像来判定所述驾驶者有无睡意，作为所述驾驶者是否适合继续驾驶，在由所述判定部判定为存在所述驾驶者有睡意的可能性的情况下，所述控制部使所述显示部显示被判定为存在所述驾驶者有睡意的可能性时的所述面部图像。
在上述方式的显示控制装置中，判定部基于取得部取得的面部图像来判定驾驶者有无睡意，作为驾驶者是否适合继续驾驶。然后，控制部在由判定部判定为存在驾驶者有睡意的可能性的情况下，使管理者侧的显示部显示被判定为存在驾驶者有睡意的可能性时的面部图像。由此，在该显示控制装置中，通过使管理者侧的显示部显示被判定为存在驾驶者有睡意的可能性时的面部图像，管理者能够基于该面部图像来决定是否向驾驶者发出注意及警告等指示。因此，在该显示控制装置中，能够引导管理者在适当的定时进行警告而不给不适于继续驾驶的驾驶者带来烦扰。
在上述方式中，在由所述判定部判定为存在所述驾驶者有睡意的可能性的情况下，所述控制部使所述显示部显示与被判定为存在所述驾驶者有睡意的可能性时的状况相关的信息。
在上述方式的显示控制装置中，控制部在由判定部判定为存在驾驶者有睡意的可能性的情况下，使管理者侧的显示部显示与被判定为存在驾驶者有睡意的可能性时的状况相关的信息。由此，在该显示控制装置中，通过使管理者侧的显示部显示与被判定为存在驾驶者有睡意的可能性时的该信息，能够提高管理者对驾驶者有无睡意的预测精度。
本公开的第二方式的显示控制方法是由计算机执行如下处理的显示控制方法：取得由拍摄部拍摄到的车辆的驾驶者的面部图像；基于取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；在判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
本公开的第三方式的显示控制程序用于使计算机执行如下处理：取得由拍摄部拍摄到的车辆的驾驶者的面部图像；基于取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；在判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
发明效果
如以上说明的那样，在本发明所涉及的显示控制装置、显示控制方法及显示控制程序中，能够引导管理者在适当的定时进行警告而不给不适于继续驾驶的驾驶者带来烦扰。
附图说明
下面将参考附图描述本发明的示例性实施例的特征、优点以及技术和工业意义，其中相同的符号表示相同的元件，并且其中：
图1是表示本实施方式所涉及的显示控制系统的概略结构的图。
图2是表示本实施方式所涉及的显示控制装置、管理者终端及驾驶者终端的硬件结构的框图。
图3是表示本实施方式所涉及的显示控制装置的功能结构的例子的框图。
图4是表示本实施方式所涉及的车辆的硬件结构的框图。
图5是表示本实施方式所涉及的显示控制装置进行的显示处理的流程的流程图。
图6是显示于本实施方式所涉及的管理者终端的Web应用程序的显示例。
具体实施方式
以下，对本实施方式所涉及的显示控制系统10进行说明。
本实施方式所涉及的显示控制系统10是进行出租车公司及运输公司等管理运行车辆的运营商的驾驶者的管理者能够阅览的Web应用程序的显示控制的系统。
图1是表示显示控制系统10的概略结构的图。
如图1所示，显示控制系统10包括显示控制装置20、管理者终端40、车辆60及驾驶者终端80。显示控制装置20、管理者终端40、车辆60及驾驶者终端80经由网络N连接，能够相互通信。而且，作为一例，与网络N连接的车辆60是搭乘利用者而行驶的汽车。
显示控制装置20是管理车辆60的运营商所持有的服务器计算机。
管理者终端40是管理者所持有的终端。在管理者终端40中，作为一例，应用服务器计算机或PC等通用的计算机装置或可携带的个人计算机(笔记本PC)、智能手机或平板终端等便携终端。在本实施方式中，作为一例，管理者终端40为PC。
车辆60可以是汽油车辆、混合动力车辆及电动汽车中的任一种，但在本实施方式中，作为一例，车辆60为汽油车辆。
驾驶者终端80是车辆60的驾驶者所持有的便携终端。作为一例，在驾驶者终端80中应用笔记本PC、智能手机或平板终端等。在本实施方式中，作为一例，驾驶者终端80为智能手机。
接下来，对显示控制装置20、管理者终端40及驾驶者终端80的硬件结构进行说明。图2是表示显示控制装置20、管理者终端40及驾驶者终端80的硬件结构的框图。此外，显示控制装置20、管理者终端40及驾驶者终端80基本上是一般的计算机结构，因此以显示控制装置20为代表进行说明。
如图2所示，显示控制装置20具备CPU21(Central Processing Unit：中央处理单元)，ROM22(Read Only Memory：只读存储器)，RAM23(Random Access Memory：随机存取存储器)、存储部24、输入部25、显示部26及通信部27。各结构经由总线28以能够相互通信的方式连接。
CPU21是中央运算处理单元，执行各种程序或控制各部。即，CPU21从ROM22或存储部24读出程序，将RAM23作为作业区域来执行程序。CPU21按照记录在ROM22或存储部24中的程序，进行上述各结构的控制及各种运算处理。
ROM22存储各种程序及各种数据。RAM23作为作业区域而暂时存储程序或数据。
存储部24由HDD(Hard Disk Drive：硬盘驱动器)、SSD(Solid State Drive：固态驱动器)或闪存等存储装置构成，存储各种程序及各种数据。在本实施方式中，在存储部24中至少存储用于执行后述的显示处理的显示控制程序24A。
输入部25包括鼠标等指示设备、键盘、麦克风及照相机等，用于进行各种的输入。
显示部26例如是液晶显示器，显示各种信息。显示部26也可以采用触摸面板方式，作为输入部25发挥功能。
通信部27是用于与其他设备进行通信的接口。该通信例如使用以太网(注册商标)或FDDI等有线通信的标准或4G、5G或者Wi-Fi(注册商标)等的无线通信的标准。
在执行上述的显示控制程序24A时，显示控制装置20使用上述的硬件资源，执行基于该显示控制程序24A的处理。
接下来，对显示控制装置20的功能结构进行说明。
图3是表示本实施方式所涉及的显示控制装置20的功能结构的例子的框图。
如图3所示，作为功能结构，显示控制装置20的CPU21具有取得部21A、判定部21B及控制部21C。各功能结构通过CPU21读出并执行存储于存储部24中的显示控制程序24A来实现。
取得部21A取得由后述的照相机75拍摄到的车辆60的驾驶者的面部图像。该面部图像只要包含驾驶者的面部的图像即可，可以仅由驾驶者的面部的图像构成，也可以除了驾驶者的面部的图像之外还包含身体的图像而构成。
判定部21B基于取得部21A取得的面部图像来判定驾驶者是否适合继续驾驶。在本实施方式中，判定部21B基于取得部21A取得的面部图像来判定驾驶者有无睡意，作为驾驶者是否适合继续驾驶。具体而言，判定部21B通过使用取得部21A取得的面部图像而执行例如日本特开平8-153288所记载的公知的睡意判定处理，从而对驾驶者有无睡意进行判定。
控制部21C在由判定部21B判定为存在驾驶者有睡意的可能性的情况下，使管理者终端40的显示部46显示判定为存在驾驶者有睡意的可能性时的驾驶者信息。显示部46是“管理者侧的显示部”的一例。作为一例，驾驶者信息中包含驾驶者的面部图像、作为能够唯一地确定驾驶者的信息的驾驶者ID(identification：身份证明)、驾驶者的联系方式及后述的时间信息。此外，显示于显示部46的驾驶者信息的具体例将在后面叙述。另外，作为一例，驾驶者信息存储于存储部24。
接下来，对车辆60的硬件结构进行说明。图4是表示车辆60的硬件结构的框图。
如图4所示，车辆60构成为包括车载器15、多个ECU(Electronic Control Unit：电子控制单元)70、转向角传感器71、加速度传感器72、车速传感器73、麦克风74、照相机75、输入开关76、监视器77、扬声器78及GPS装置79。
车载器15构成为包括CPU61、ROM62、RAM63、存储部64、车内通信I/F(Inter Face：接口)65、输入输出I/F66及无线通信I/F67。CPU61、ROM62、RAM63、存储部64、车内通信I/F65、输入输出I/F66及无线通信I/F67经由内部总线68以能够相互通信的方式连接。
CPU61是中央运算处理单元，执行各种程序或控制各部。即，CPU61从ROM62或存储部64读出程序，将RAM63作为作业区域来执行程序。CPU61按照记录在ROM62或存储部64中的程序，进行上述各结构的控制及各种的运算处理。
ROM62存储各种程序及各种数据。RAM63作为作业区域暂时存储程序或数据。
存储部64由HDD、SSD或闪存等存储装置构成，存储各种程序及各种数据。
车内通信I/F65是用于与ECU70连接的接口。该接口使用基于CAN协议的通信标准。车内通信I/F65与外部总线90连接。
ECU70针对车辆60的每个功能而设置有多个，在本实施方式中，设置有ECU70A及ECU70B。关于ECU70A，例示电动动力转向用ECU，在ECU70A连接有转向角传感器71。另外，关于ECU70B，例示VSC(Vehicle Stability Control：车辆稳定性控制)用ECU，在ECU70B连接有加速度传感器72及车速传感器73。此外，在ECU70B，除了连接有加速度传感器72及车速传感器73之外，还可以连接横摆率传感器。
转向角传感器71是用于检测方向盘的转向角的传感器。在转向角传感器71中检测出的转向角被存储于存储部64，并且被发送到显示控制装置20。
加速度传感器72是用于检测作用于车辆60的加速度的传感器。作为一例，加速度传感器72是3轴的加速度传感器，检测在作为X轴方向的车辆前后方向、作为Y轴方向的车宽方向、作为Z轴方向的车辆高度方向上施加的加速度。在加速度传感器72中检测出的加速度被存储于存储部64，并且被发送到显示控制装置20。
车速传感器73是用于检测车辆60的车速的传感器。车速传感器73例如是设置于车轮的传感器。在车速传感器73中检测出的车速被存储于存储部64，并且被发送到显示控制装置20。
输入输出I/F66是用于与搭载于车辆60的麦克风74、照相机75、输入开关76、监视器77、扬声器78及GPS装置79通信的接口。
麦克风74设置于车辆60的前柱或仪表板等，是收集车辆60的驾驶者发出的声音的装置。此外，麦克风74也可以设置于后述的照相机75。
作为一例，照相机75构成为包括CCD(Charge Coupled Device：电荷耦合器件)图像传感器。作为一例，照相机75在车辆60中设置于前窗的上部或仪表板，面向驾驶者。而且，照相机75拍摄包括驾驶者的面部的范围。由照相机75拍摄到的驾驶者的面部图像被存储于存储部64，并且被发送到显示控制装置20。此外，照相机75也可以经由ECU70(例如，照相机ECU)而与车载器15连接。照相机75是“拍摄部”的一例。
输入开关76设置于仪表板、中央控制台、方向盘等，是输入驾驶者的手指进行的操作的开关。作为输入开关76，例如能够采用按钮式的数字键及触摸板等。
监视器77设置于仪表板或仪表面板等，是用于显示与车辆60的功能相关的工作的建议及与该功能的说明相关的图像的液晶监视器。监视器77也可以设置为兼作输入开关76的触摸面板。
扬声器78设置于仪表板、中央控制台、前柱或仪表板等，是用于输出与车辆60的功能相关的工作的建议及与该功能的说明相关的声音的装置。此外，扬声器78也可以设置于监视器77。
GPS装置79是测定车辆60的当前位置的装置。GPS装置79包括接收来自GPS卫星的信号的未图示的天线。此外，GPS装置79也可以经由与ECU70(例如，多媒体ECU)连接的汽车导航系统而与车载器15连接。
无线通信I/F67是用于与显示控制装置20进行通信的无线通信模块。该无线通信模块例如使用5G、LTE、Wi-Fi(注册商标)等的通信标准。无线通信I/F67与网络N连接。
图5是表示由显示控制装置20进行的将判定为驾驶者有睡意的可能性时的驾驶者信息显示于显示部46的显示处理的流动的流程图。CPU21从存储部24读出显示控制程序24A，在RAM23中展开并执行，由此进行显示处理。
在图5所示的步骤S10中，CPU21从车辆60取得驾驶者的面部图像。然后，进入步骤S11。在本实施方式中，定期地从车辆60向显示控制装置20发送该面部图像。
在步骤S11中，CPU21基于在步骤S10中取得的面部图像来判定驾驶者有无睡意，作为驾驶者是否适合继续驾驶。然后，进入步骤S12。
在步骤S12中，CPU21判定是否存在驾驶者有睡意的可能性，在判定为存在驾驶者有睡意的可能性的情况下(步骤S12：是)，进入步骤S13。另一方面，在由CPU21判定为不存在驾驶者有睡意的可能性的情况下(步骤S12：否)，结束该处理。作为一例，CPU21使用在步骤S10中取得的面部图像来执行公知的睡意判定处理，判定驾驶者有无睡意。
在步骤S13中，CPU21使管理者终端40的显示部46显示被判定为存在驾驶者有睡意的可能性时的驾驶者信息。然后，结束该处理。
接下来，对在图5所示的步骤S13中在管理者终端40的显示部46中显示的Web应用程序的显示例进行说明。
图6是在管理者终端40的显示部46显示的Web应用程序的显示例。CPU21在图5所示的步骤S12中判定为“存在驾驶者有睡意的可能性”的情况下，向管理者终端40发送推送通知。而且，作为一例，图6所示的显示例通过在管理者终端40打开从显示控制装置20发送的推送通知来显示。
在图6所示的显示例中，显示有第一显示部50、第二显示部51、第三显示部52、第四显示部53、第五显示部54。
第一显示部50是显示在图5所示的步骤S10中取得的面部图像作为被判定为存在驾驶者有睡意的可能性时的驾驶者的面部图像的部分。作为一例，在图6所示的第一显示部50中显示有在图5所示的步骤S10中取得的驾驶者A的面部图像F。
第二显示部51是显示被判定为存在驾驶者有睡意的可能性的驾驶者的驾驶者ID的部分。作为一例，在图6所示的第二显示部51中显示有驾驶者A的驾驶者ID为“12345”的情况。
第三显示部52是显示驾驶者终端80的电话号码作为被判定为存在驾驶者有睡意的可能性的驾驶者的联系方式的部分。作为一例，在图6所示的第三显示部52中显示有驾驶者A持有的驾驶者终端80的电话号码为“012-3456-7890”的情况。
第四显示部53是显示与时间相关的时间信息作为与被判定为存在驾驶者有睡意的可能性时的状况相关的信息的部分。具体而言，作为时间信息，在第四显示部53中显示有被判定为存在驾驶者有睡意的可能性时的时刻。作为一例，在图6所示的第四显示部53中显示有被判定为存在驾驶者A有睡意的可能性时的时刻为“5点30分”的情况。
第五显示部54是显示被判定为存在驾驶者有睡意的可能性时的时间信息的部分。具体而言，作为时间信息，在第五显示部54中显示有被判定为存在驾驶者有睡意的可能性时的车辆60的连续运转时间。作为一例，在图6所示的第五显示部54中显示有被判定为存在驾驶者A有睡意的可能性时的车辆60的连续运转时间为“6个小时”的情况。此外，在本实施方式中，作为一例，将未图示的点火传感器接通的时间点视为车辆60的行驶开始时间点、将点火传感器断开的时间点视为车辆60的行驶结束时间点来计算连续运转时间。
如上所述，在本实施方式中，CPU21取得由照相机75拍摄到的车辆60的驾驶者的面部图像。另外，CPU21基于取得的面部图像来判定驾驶者有无睡意，作为驾驶者是否适合继续驾驶。然后，CPU21在判定为存在驾驶者有睡意的可能性的情况下，使管理者终端40的显示部46显示判定为存在驾驶者有睡意的可能性时的面部图像。由此，在本实施方式中，通过使显示部46显示判定为存在驾驶者有睡意的可能性时的面部图像，能够基于该面部图像来决定管理者是否向驾驶者发出注意及警告等的指示。因此，在本实施方式中，能够引导管理者在适当的定时进行警告而不给不适于继续驾驶的驾驶者带来烦扰。
另外，在本实施方式中，CPU21在判定为存在驾驶者有睡意的可能性的情况下，使管理者终端40的显示部46显示该驾驶者的驾驶者ID。由此，在本实施方式中，通过使显示部46显示驾驶者ID，管理者能够基于该驾驶者ID确定存在有睡意的可能性的驾驶者。
另外，在本实施方式中，CPU21在判定为存在驾驶者有睡意的可能性的情况下，使管理者终端40的显示部46显示该驾驶者的联系方式。由此，在本实施方式中，通过使显示部46显示驾驶者的联系方式，管理者能够使用该联系方式容易地与存在有睡意的可能性的驾驶者联系。
另外，在本实施方式中，CPU21在判定为存在驾驶者有睡意的可能性的情况下，作为与判定为存在驾驶者有睡意的可能性时的状况相关的信息，使管理者终端40的显示部46显示与时间相关的时间信息。具体而言，作为时间信息，CPU21使显示部46显示判定为存在驾驶者有睡意的可能性时的时刻及车辆60的连续运转时间。在此，申请人的调查结果判明，在出租车公司及运输公司等运行车辆的运营商的驾驶者中，没有在工作中不感到睡意的驾驶者。另外，申请人的调查结果判明，该运营商的驾驶者的事故在黎明时分发生的比例高，另外，黎明时分的事故是重大的事故的比例高。因此，在本实施方式中，通过使显示部46显示判定为存在驾驶者有睡意的可能性时的时刻，管理者能够考虑该时刻来对驾驶者有无睡意进行预测。另外，在本实施方式中，通过使显示部46显示判定为存在驾驶者有睡意的可能性时的车辆60的连续运转时间，管理者能够考虑该连续运转时间来对驾驶者有无睡意进行预测。因此，在本实施方式中，通过使显示部46显示判定为存在驾驶者有睡意的可能性时的时间信息，能够提高管理者对驾驶者有无睡意的预测精度。
(其他)
在上述的实施方式中，作为驾驶者是否适合继续驾驶，对驾驶者有无睡意进行判定，但并不限定于此，作为驾驶者是否适合继续驾驶，也可以对驾驶者的身体状况的好坏及所谓的驾驶的有无等进行判定。
在上述的实施方式中，基于取得的驾驶者的面部图像来判定驾驶者是否适合继续驾驶，但是否适合继续驾驶的判定不限于使用面部图像，也可以使用其他要素来进行。作为其他例子，可以取得驾驶者的心电图、心跳、脉搏、呼吸及脑电波等的信息作为驾驶者的面部图像这样的与驾驶者相关的信息，可以使用取得的该信息来判定驾驶者是否适合继续驾驶。另外，也可以代替使用与驾驶者相关的信息或者在此基础上，使用与车辆相关的车辆信息来判定驾驶者是否适合继续驾驶。在该情况下，也可以使用作为车辆信息而取得的方向盘的转向角及各踏板操作等来判定驾驶者是否适合继续驾驶。
在上述的实施方式中，在判定为存在驾驶者有睡意的可能性的情况下，作为判定为存在驾驶者有睡意的可能性时的驾驶者信息，使管理者终端40的显示部46显示驾驶者的面部图像、驾驶者的驾驶者ID、驾驶者的联系方式及时间信息。但是，作为驾驶者信息显示的信息至少包含驾驶者的面部图像即可，也可以包含其他的驾驶者的驾驶者ID、驾驶者的联系方式及时间信息，也可以不包含一部分信息。
在上述的实施方式中，将能够唯一地确定驾驶者的信息的一例设为驾驶者ID，但并不限定于此，能够唯一地确定驾驶者的信息的一例也可以是“驾驶者的姓名”等其他信息。
在上述的实施方式中，将驾驶者的联系方式的一例设为驾驶者终端80的电话号码，但并不限定于此，驾驶者的联系方式的一例也可以是“驾驶者终端80的邮件地址”等其他信息。
在上述的实施方式中，显示控制系统10构成为包括显示控制装置20、管理者终端40、车辆60及驾驶者终端80。但是，并不限定于此，也可以在显示控制系统10中不包含管理者终端40，1台装置具备显示控制装置20及管理者终端40的功能。
此外，也可以由CPU以外的各种处理器执行在上述的实施方式中CPU21读入软件(程序)而执行的显示处理。作为该情况下的处理器，例示了FPGA(Field-Programmble GateArray：现场可编程门阵列)等在制造后能够变更电路结构的PLD(Programmble LogicDevice：可编程逻辑器件)及ASIC(Aplicatio Specific Integrated Circuit：专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。另外，既可以通过这些各种处理器中的1个执行显示处理，也可以通过相同种类或不同种类的2个以上的处理器的组合(例如，多个FPGA及CPU和FPGA的组合等)来执行显示处理。另外，更具体而言，这些各种处理器的硬件结构是组合了半导体元件等电路元件的电路。
另外，在上述的实施方式中，对显示控制程序24A预先存储(安装)于存储部24的方式进行了说明，但并不限定于此。显示控制程序24A也可以以记录于CD-ROM(Compact DiskRead Only Memory：光盘只读存储器)、DVD-ROM(Digidal Viersatile Disk Read OnlyMemory：数字化通用盘只读存储器)及USB(Universal Serial Bus：通用串行总线)存储器等的记录介质的方式提供。另外，显示控制程序24A也可以是经由网络N从外部装置下载的方式。

Claims (7)

1.一种显示控制装置，具备：
取得部，取得由拍摄部拍摄到的车辆的驾驶者的面部图像；
判定部，基于所述取得部取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；及
控制部，在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
2.根据权利要求1所述的显示控制装置，其中，
在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，所述控制部使所述显示部显示能够唯一地确定所述驾驶者的信息。
3.根据权利要求1或2所述的显示控制装置，其中，
在由所述判定部判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，所述控制部使所述显示部显示所述驾驶者的联系方式。
4.根据权利要求1至3中任一项所述的显示控制装置，其中，
所述判定部基于所述取得部取得的所述面部图像来判定所述驾驶者有无睡意，作为所述驾驶者是否适合继续驾驶，
在由所述判定部判定为存在所述驾驶者有睡意的可能性的情况下，所述控制部使所述显示部显示被判定为存在所述驾驶者有睡意的可能性时的所述面部图像。
5.根据权利要求4所述的显示控制装置，其中，
在由所述判定部判定为存在所述驾驶者有睡意的可能性的情况下，所述控制部使所述显示部显示与被判定为存在所述驾驶者有睡意的可能性时的状况相关的信息。
6.一种显示控制方法，由计算机执行如下处理：
取得由拍摄部拍摄到的车辆的驾驶者的面部图像；
基于取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；
在判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
7.一种显示控制程序，用于使计算机执行如下处理：
取得由拍摄部拍摄到的车辆的驾驶者的面部图像；
基于取得的所述面部图像来判定所述驾驶者是否适合继续驾驶；
在判定为存在所述驾驶者不适合继续驾驶的可能性的情况下，使管理所述驾驶者的管理者侧的显示部显示被判定为存在所述驾驶者不适合继续驾驶的可能性时的所述面部图像。
CN202210507699.5A 2021-05-20 2022-05-11 显示控制装置、显示控制方法及显示控制程序 Pending CN115366798A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021085568A JP2022178626A (ja) 2021-05-20 2021-05-20 表示制御装置、表示制御方法、及び表示制御プログラム
JP2021-085568 2021-05-20

Publications (1)

Publication Number Publication Date
CN115366798A true CN115366798A (zh) 2022-11-22

Family

ID=84060622

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210507699.5A Pending CN115366798A (zh) 2021-05-20 2022-05-11 显示控制装置、显示控制方法及显示控制程序

Country Status (3)

Country Link
US (1) US20220377286A1 (zh)
JP (1) JP2022178626A (zh)
CN (1) CN115366798A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240034335A1 (en) * 2022-07-26 2024-02-01 Toyota Research Institute, Inc. Adaptive dynamic driver training systems and methods

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021043571A (ja) * 2019-09-09 2021-03-18 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、移動装置、情報処理システム、および方法、並びにプログラム

Also Published As

Publication number Publication date
US20220377286A1 (en) 2022-11-24
JP2022178626A (ja) 2022-12-02

Similar Documents

Publication Publication Date Title
CN115366798A (zh) 显示控制装置、显示控制方法及显示控制程序
JP7517266B2 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
US20230025611A1 (en) Part diagnostic device, part diagnostic system, part diagnostic method, and part diagnostic program
US20230401905A1 (en) Information processing device, information processing method, and storage medium
US20240029583A1 (en) Information processing device, information processing method, and non-transitory storage medium
JP7563307B2 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
JP2023180909A (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
US11654930B2 (en) Display control device, display control method, and display control program
US20220375282A1 (en) Display control device, display control method, and display control program
US20230356722A1 (en) Information processing device, information processing method, and storage medium
EP4216135A1 (en) Information processing device, information processing method, and recording medium storing an information processing program
CN111002989A (zh) 驾驶安全监测方法、车载终端及计算机可读存储介质
JP7496484B2 (ja) 車両運行情報表示システム、方法及びプログラム
US12094263B2 (en) Driving evaluation device, driving evaluation method, and driving evaluation program
JP2024026499A (ja) 情報提供装置、制御方法、及びプログラム
JP2024049060A (ja) 提案装置及び提案システム
JP2023165316A (ja) 個人特性管理装置、個人特性管理方法、プログラム及び学習済みモデルの生成方法
JP2022091573A (ja) 制御装置、システム、車両、プロブラム及び制御装置の動作方法
CN116994357A (zh) 个体特征管理系统和方法以及非暂时性存储介质
JP2011150559A (ja) 車載装置および危険運転警告出力記録方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination