CN105916262A - 数字装置及其驾驶员监控方法 - Google Patents

数字装置及其驾驶员监控方法 Download PDF

Info

Publication number
CN105916262A
CN105916262A CN201510357927.5A CN201510357927A CN105916262A CN 105916262 A CN105916262 A CN 105916262A CN 201510357927 A CN201510357927 A CN 201510357927A CN 105916262 A CN105916262 A CN 105916262A
Authority
CN
China
Prior art keywords
unit
lighting unit
driver
camera unit
brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510357927.5A
Other languages
English (en)
Other versions
CN105916262B (zh
Inventor
金冠亨
权宁满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN105916262A publication Critical patent/CN105916262A/zh
Application granted granted Critical
Publication of CN105916262B publication Critical patent/CN105916262B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0881Seat occupation; Driver or passenger presence
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B29/00Checking or monitoring of signalling or alarm systems; Prevention or correction of operating errors, e.g. preventing unauthorised operation
    • G08B29/18Prevention or correction of operating errors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及数字装置及驾驶员监控方法。监控驾驶员的方法包括:从第一和第二相机单元获得图像;检查是否从第一相机单元获得的图像的亮度等于或大于参考值或是否根据从第二相机单元获得的图像检测到驾驶员,如果从第一相机单元获得的图像的亮度不等于或大于参考值或如果根据从第二相机单元获得的图像没有检测到驾驶员,则通过关断第二照明单元从第一相机单元获得第一比较图像并通过接通第二照明单元从第一相机单元获得第二比较图像;检查是否在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或大于参考差值;和如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或大于参考差值,则关断第二照明单元。

Description

数字装置及其驾驶员监控方法
技术领域
本发明涉及一种数字装置,并且更加特别地,涉及一种数字装置及其驾驶员监控方法。虽然本发明适合于广范围的应用,但是其特别地适合于检测驾驶员的状态。
背景技术
最近,对于通过将相机安装在车辆中监控驾驶员的状态的技术的需求日益增长。监控驾驶员的技术是使用在相机与分别被布置在驾驶员的两侧上的红外线照明之间的视差获得各种驾驶员信息等等的技术。
在本实例中,通常使用红外线照明。对于此的理由是,防止驾驶员识别到照明的存在。然而,当使用红外线照明并且驾驶员接近红外线照明时,如果在驾驶员的眼睛和红外线照明之间的距离太小,则驾驶员的眼睛可能受损。
为了避免这样的问题,如果驾驶员在预定的距离内接近,则使用包括距离传感器等等的附加的部件关断红外线照明。然而,这提高材料的整体成本。此外,当采用上述技术时,除了驾驶员之外的物体接近红外线照明,因为识别为驾驶员正在接近,所以红外线照明被关断。因此,这样的技术提高驾驶员识别的错误率。因此,因为附加的辅助方法被进一步要求,所以其变成材料成本增加的另一因素。
发明内容
因此,本发明的实施例针对数字装置及其驾驶员监控方法,其本质地避免由于现有技术的限制和缺点造成的一个或者多个问题。
本发明的一个目的是为了提供一种数字装置及其驾驶员监控方法,通过其能够检测到驾驶员的状态。
从本发明可获得的技术任务没有限制上述技术任务。另外,在本发明属于的技术领域的普通技术人员从下面的描述能够清楚地理解其它未提及的技术任务。
在本公开以及附图中在此将会提出本发明的附加优点、目的和特征。在此基于本公开本领域的技术人员也可以理解这样的方面。
为了实现这些目的和其它的优点并且根据本发明的用途,如在此具体化和广泛地描述的,在包括第一照明单元、第二照明单元、第一相机单元以及第二相机单元的数字装置中,根据本发明的实施例的监控驾驶员的方法可以包括下述步骤:从第一相机单元和第二相机单元获得图像;检查是否从第一相机单元获得的图像的亮度等于或者大于参考值,或者是否根据从第二相机单元获得的图像检测到驾驶员,如果从第一相机单元获得的图像的亮度不等于或者大于参考值,或者如果根据从第二相机单元获得的图像没有检测到驾驶员,则通过关断第二照明单元从第一相机单元获得第一比较图像并且通过接通第二照明单元从第一相机单元获得第二比较图像;检查是否在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值;并且如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则关断第二照明单元。
在本发明的另一方面中,如在此具体化和广泛地描述的,根据本发明的实施例的数字装置可以包括:第一照明单元,该第一照明单元被配置成产生第一光;第二照明单元,该第二照明单元被配置成产生第二光;第一相机单元,该第一相机单元被配置成获得第一图像;第二相机单元,该第二相机单元被配置成获得第二图像;以及控制单元,该控制单元主要检查是否从第一相机单元获得的图像的亮度等于或者大于参考值,或者是否根据从第二相机单元获得的图像检测到驾驶员,如果从第一相机单元获得的图像的亮度不等于或者大于参考值,或者如果根据从第二相机单元获得的图像没有检测到驾驶员,则控制单元其次检查是否在通过关断第二照明单元从第一相机单元获得的第一比较图像的亮度与通过接通第二照明单元从第一相机单元获得的第二比较图像的亮度之间的差值等于或者大于参考差值,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则控制器控制第一照明单元、第二照明单元、第一相机单元以及第二相机单元以关断第二照明单元。
从本发明可获得的效果没有受到在上面提及的效果的限制。另外,对本发明属于的技术领域的普通技术人员来说根据下面的描述能够清楚地理解其它未提及的效果。
本发明前面的一般描述和后面的详细描述都是示例性和解释性的,并且意在提供对所要求保护的本发明的进一步解释。
附图说明
附图被包括以提供本发明的进一步理解并且被并入且组成本说明书的一部分,附图图示了本发明的实施例并且连同描述一起用作解释本发明的原理。结合附图,在考虑优选实施例的下述描述之后本发明的以上和其它方面、特征、以及优点将会变得显而易见。在附图中:
图1是图示根据本发明的一个实施例的描述数字装置的配置的框图;
图2是图示根据本发明的另一实施例的描述数字装置的配置的框图;
图3是图示根据本发明的实施例的数字装置的驾驶员监控装置的配置的框图;
图4和图5是描述在照明单元和相机单元之间的布置关系的图;
图6至图10是描述根据本发明的实施例的数字装置的驾驶员监控过程的图;
图11是图示用于驾驶员监控装置的错误的报警通知的图;
图12是描述根据本发明的一个实施例的数字装置的驾驶员监控方法的流程图;
图13是描述根据本发明的第二实施例的数字装置的驾驶员监控方法的流程图;
图14是描述根据本发明的第三实施例的数字装置的驾驶员监控方法的流程图;
图15是描述根据本发明的第四实施例的数字装置的驾驶员监控方法的流程图;
图16是描述根据本发明的第五实施例的数字装置的驾驶员监控方法的流程图;以及
图17是描述根据本发明的第六实施例的数字装置的驾驶员监控方法的流程图。
具体实施方式
参考附图,根据在此公开的实施例现在详细地给出描述。为了参考附图简要描述,相同的或者等效的组件可以被提供有相同或者相似的附图标记,并且其描述将不会被重复。通常,诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此旨在仅有助于说明书的描述,并且后缀本身旨在没有给予任何特定的意义或者功能。
附图被用于帮助容易理解各种技术特征并且应理解附图没有限制在此提出的实施例。正因如此,除了在附图中特别陈述的之外,本公开应被解释为延伸到任何变更、等同物以及替代。
在下面的描述中,参考附图解释根据本发明的实施例的各种实施例。特别地,图1是根据本发明的实施例的包括数字接收器200的示意图。
数字接收器200可以包括网络接口201、TCP/IP管理器202、服务递送管理器203、SI(系统信息、服务信息或信令信息)解码器204、解复用器205、音频解码器206、视频解码器207、显示A/V和OSD(在屏显示)模块208、服务控制管理器209、服务发现管理器210、SI与元数据数据库(DB)211、元数据管理器212、应用管理器等。
网络接口201可以通过网络接收或发送包括服务数据的IP分组。换句话说,网络接口201可以通过网络从与其连接的服务器接收包括用于SNS的文本数据、图像数据、音频数据和视频数据以及服务和应用中的至少一种的IP分组。
TCP/IP管理器202可以涉及发送到数字接收器200的IP分组和从数字接收器200发送的IP分组的递送,即,源与目的地之间的分组的递送。TCP/IP管理器202可以根据适当的协议对接收到的分组进行分类,并且将分类的分组输出到服务递送管理器203、服务发现管理器210、服务控制管理器209、以及元数据管理器212。
服务递送管理器203可以控制服务数据的分类和处理。服务递送管理器203可以例如使用实时协议/实时控制协议(RTP/RTCP)来控制实时流式数据。换句话说,在服务管理器213的控制下,服务递送管理器203可以根据RTP来解析基于RTP发送的实时流式数据分组,并且将经解析的数据分组发送到解复用器205或者将经解析的数据分组存储在SI与元数据DB 211中。服务递送管理器203能够基于RTP将网络接收信息反馈回给服务器。
解复用器205可以通过分组标识符(PID)筛选从接收到的分组中解复用音频数据、视频数据、SI,并且将解复用的数据发送到对应的处理器,即,音频解码器206/视频解码器207和SI解码器204。
SI解码器204可以对SI数据进行解析和/或解码,SI数据诸如是节目专用信息(PSI)、节目与系统信息协议(PSIP)、数字视频广播服务信息(DVB-SI)等。SI解码器204可以将解析的和/或解码的SI数据存储在SI与元数据DB 211中。存储在SI与元数据DB 211中的SI数据能够被读取或提取,并且由需要SI数据的组件使用。还能够从SI与元数据DB 211中读取EPG数据。这将在下文中进行详细的描述。
音频解码器206与视频解码器207分别可以对通过解复用器205解复用的音频数据与视频数据进行解码。可以通过显示单元208向用户提供经解码的音频数据和视频数据。
应用管理器可以包括服务管理器213和用户界面(UI)管理器214、管理数字接收器200的总体状态、提供UI,并且管理其它的管理器。UI管理器214能够接收来自用户的键输入,并且通过OSD提供对应于键输入的与接收器操作有关的图形用户界面(GUI)。
服务管理器213可以控制并且管理与服务有关的管理器,诸如服务递送管理器203、服务发现管理器210、服务控制管理器209以及元数据管理212。服务管理器213可以配置频道映射并且基于该频道映射应用户请求启用频道控制。服务管理器213可以从SI解码器204接收与频道相对应的服务信息,并且将选择的频道的音频/视频PID设置到解复用器205以便控制解复用器205的解复用过程。
当用户请求SNS时,应用管理器能够配置OSD图像或者控制OSD图像的配置,以在屏幕的预定区上提供用于SNS的窗口。应用管理器能够配置OSD图像或者控制OSD图像的配置,使得能够在考虑到例如广播服务的其它服务的情况下,应用户的请求来确定并且提供SNS窗口。换句话说,当数字接收器200可以通过屏幕上的图像提供服务(例如,SNS)时,数字接收器200可以配置图像使得能够在考虑到与其它服务的关系、优先级等的情况下适当地处理请求。
应用管理器能够从相关外部服务器,诸如SNS提供服务器或制造商提供的服务器,接收用于SNS的数据,并且将所接收到的数据存储在存储器中,使得数据被用来配置OSD用于应用户请求而提供SNS,并且可以通过屏幕的预定区域来提供SNS。此外,数字接收器200能够以类似的方式将与服务有关的并且在服务期间通过用户输入的数据存储在存储器中,使得数据被用来配置服务。此外,如有需要,则将数据处理为对于另一数字接收器所需要的形式,以及将所处理的数据发送到另一数字接收器或有关的服务服务器。
此外,当用户在使用SNS的同时进行请求时,应用管理器、控制器或数字接收器能够控制与用户请求相对应的信息或动作被执行。例如,当用户在使用SNS的同时选择另一用户的输入数据,或与输入数据相对应的区时,应用管理器、控制器或数字接收器可以控制用于处置所选择的数据或区的第一处理和/或第二处理被执行,并且控制第一结果和/或第二结果以适当的形式输出。第一结果和/或第二结果能够包括信息、动作、有关的UI等,并且以诸如文本、图像、音频/视频数据等的各种形式来配置。第一结果和/或第二结果能够通过数字接收器手动地或自动地提供和执行。
当用户通过拖放来将第一结果(例如,图像数据)移动到广播节目或广播服务输出区域时,数字接收器能够使用电子节目指南(EPG)或电子服务指南(ESG)(在下文中被称为“广播指南”)(即,搜索引擎)对与第一结果有关的数据执行第二处理(例如,搜索处理)以提供第二结果。在这里,能够以与用作搜索引擎的广播指南类似的形式提供第二结果,或者将其提供为单独配置的UI。当以广播指南的形式来提供第二结果时,能够与第二结果一起提供其它数据。在本实例中,第二结果能够被配置成使得其不同于其它数据,以便允许用户容易地识别第二数据。为了从其它数据中辨别第二结果,能够将第二结果加亮、加阴影、以及提供三维(3D)形式。
在第二处理的执行中,数字接收器能够自动地确定第二处理的类型以及是否基于第一结果的位置变化执行第二处理。在本实例中,屏幕的坐标信息能够被用于确定第一结果的位置是否改变,或用于关于在第二处理与第一结果之间的改变的位置的信息。例如,当可以在屏幕上显示服务和/或OSD时,数字接收器能够确定并且存储关于被显示的服务和/或OSD的坐标信息。因此,数字接收器能够提前知道关于正被提供给屏幕的服务和数据的坐标信息,并且因此能够基于该坐标信息识别第一结果的位置(信息)方面的变化,并且基于第一结果的位置执行第二处理。
服务发现管理器210可以提供选择提供服务的服务提供商所需要的信息。一旦接收到用于从服务管理器213选择频道的信号,服务发现管理器210基于所接收到的信号发现服务。服务控制管理器209可以选择并且控制服务。例如,当用户选择实况广播服务时,使用IGMP(互联网组管理协议)或实时流协议(RTSP),并且当用户选择视频点播(VOD)服务时,使用RTSP,服务控制管理器209可以执行服务选择和控制。
为了解释的方便,例示了本说明书中描述的方案或协议以便于帮助对本发明的理解,并且本发明的范围不限于此。因此,能够在考虑到不同于被例示的方案或协议的情况下确定方案或协议,并且能够使用其它的方案或协议。
元数据管理器212可以管理元数据相关服务,并且将元数据存储在SI与元数据DB 211中。SI与元数据DB 211可以存储由SI解码器204解码的SI数据、由元数据管理器212管理的元数据、以及由服务发现管理器210提供的选择服务提供商所需要的信息。此外,SI与元数据DB 211能够存储系统设定数据。IMS(IP多媒体子系统)网关250可以包括访问基于IMS的IPTV服务所需要的功能。
图2是根据本发明的实施例的移动终端的框图。参考图2,移动终端300包括无线通信单元310、A/V(音频/视频)输入单元320、用户输入单元330、感测单元340、输出单元350、存储器360、接口单元370、控制器380、以及电源单元390。图2示出具有各种组件的移动终端300,但是不要求实现全部所图示的组件。可根据各种实施例实现更多或更少的组件。
无线通信单元310通常包括一个或多个允许在移动终端300和移动终端300所位于的无线通信系统或网络之间进行无线通信的组件。例如,无线通信单元310能够包括广播接收模块311、移动通信模块312、无线互联网模块313、短程通信模块314、以及位置定位模块315。
广播接收模块311经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和陆地信道。能够在移动终端300中提供至少两个广播接收模块311,以有助于同时接收至少两个广播信道或广播信道切换。
广播管理服务器通常是产生和发送广播信号和/或广播相关信息的服务器,或者是提供有先前产生的广播信号和/或广播相关信息,然后将所提供的信号或信息发送至终端的服务器。广播信号可被实现为TV广播信号、无线电广播信号和/或数据广播信号,以及其他信号。如果需要,广播信号还可包括与TV或无线电广播信号组合的广播信号。
广播相关信息包括与广播频道、广播节目或广播服务提供商相关联的信息。此外,能够经由移动通信网络提供广播相关信息。在本实例中,能够由移动通信模块312接收广播相关信息。
广播相关信息能够以各种形式实现。例如,广播相关信息可包括数字多媒体广播(DMB)的电子节目指南(EPG)和手持数字视频广播(DVB-H)的电子服务指南(ESG)。
广播接收模块311可被配置为接收从各种类型的广播系统发送的广播信号。通过非限制性示例,这样的广播系统可以包括:陆地数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、手持数字视频广播(DVB-H)、数字视频广播-广播和移动服务融合(DVB-CBMS)、开放移动联盟广播(OMA-BCAST)、被称为仅媒体前向链路(MediaFLOTM)的数据广播系统、以及陆地综合服务数字广播(ISDB-T)。可选地,能够将广播接收模块311配置为适合于其他广播系统,以及上述数字广播系统。可将广播接收模块311接收的广播信号和/或广播相关信息存储在适当的设备中,诸如存储器360中。
移动通信模块312经由诸如GSM(全球移动通信系统)、CDMA(码分多址)、或WCDMA(宽带CDMA)等等的移动网络将无线信号发送到一个或多个网络实体(例如,基站、外部终端、和/或服务器等等)/从一个或多个网络实体接收无线信号。这样的无线信号可以承载音频、视频和根据文本/多媒体消息的数据。
无线互联网模块313支持移动终端300的互联网接入。该模块可内部或外部耦合至移动终端300。无线互联网技术能够包括WLAN(无线LAN)、Wi-Fi、WibroTM(无线宽带)、WimaxTM(全球微波接入互操作技术)、HSDPA(高速下行链路分组接入)、GSM、CDMA、WCDMA、或者LTE(长期演进)。
通过WibroTM、HSDPA、GSM、CDMA、WCDMA、或者LTE的无线互联网接入经由移动通信网络被实现。在这方面,无线互联网模块313可以被认为是经由移动通信网络执行无线互联网接入的一种移动通信模块312。
短程通信模块314有助于相对短程的通信。用于实现该模块的适当技术包括射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、以及通常称为蓝牙(BluetoothTM)和紫蜂(ZigBeeTM)的网络技术,等等。
位置定位模块315识别或以其他方式获得移动终端300的定位。根据一个实施例,可利用全球定位系统(GPS)模块实现该模块。GPS模块315能够通过计算距至少三颗卫星的距离信息和精确的时间信息,然后对计算的信息应用三角测量,基于至少经度、纬度或高度以及方向(或取向),来精确地计算当前的三维位置信息。使用三颗卫星计算位置信息和时间信息,然后使用另一颗卫星修正(或者校正)所计算的位置和一条或者多条时间信息的误差。此外,GPS模块315还能够通过连续计算实时当前定位来计算速度信息。
继续参考图2,音频/视频(A/V)输入单元320被配置为向移动终端300提供音频或视频信号输入。如图所示,A/V输入单元320包括相机321和麦克风322。相机321接收和处理在视频呼叫模式或拍摄模式下由图像传感器获得的静止图片或视频的图像帧。此外,能够在显示器351上显示经处理的图像帧。
由相机321处理的图像帧能够被存储在存储器360中,或者能够经由无线通信单元310被发送到外部接收者。可选地,根据使用环境,能够在移动终端300中提供至少两个相机321。
当便携式设备处于诸如电话呼叫模式、记录模式和语音识别的特殊模式时,麦克风322接收外部音频信号。该音频信号被处理和转换为电音频数据。在呼叫模式下,经由移动通信模块312将经处理的音频数据转换为可被发送至移动通信基站的格式。麦克风322通常包括配套的噪声去除算法,以去除接收外部音频信号过程中生成的噪声。
用户输入单元330响应于相关联的一个或多个输入设备的用户操纵而生成输入数据。这样的设备的示例包括小键盘、薄膜开关、触摸板(例如,静压/电容)、滚动轮、以及滚动开关。
感测单元340提供感测信号,用于使用移动终端的各个方面的状态测量来控制移动终端300的操作。例如,感测单元340可以检测移动终端300的开启/闭合状态、移动终端300的组件(例如,显示器和小键盘)的相对方位、移动终端300或移动终端300的组件的位置(或定位)变化、用户与移动终端300接触的存在或不存在,以及移动终端300的取向或加速度/减速度。作为示例,考虑将移动终端300配置为滑盖式移动终端。在该配置中,感测单元340可感测移动终端的滑动部分是否开启或闭合。根据其它示例,感测单元340感测由电源单元390提供的电力的存在或不存在以及在接口单元370和外部设备之间的耦合或其他连接的存在或不存在。根据一个实施例,感测单元340能够包括接近传感器341。
输出单元350生成与视觉、听觉、以及触摸的感测有关的输出。此外,输出单元350包括显示器351、音频输出模块352、报警单元353触觉模块354、投影仪模块355等。显示器351通常被实施为视觉显示(输出)与移动终端300相关联的信息。例如,如果移动终端在电话呼叫模式下操作,则显示器通常将提供用户界面(UI)或图形用户界面(GUI),其包括与电话呼叫的拨打、进行和终止相关联的信息。作为另一示例,如果移动终端300处于视频呼叫模式或拍摄模式下,则显示器351可以另外或可替换地显示与这些模式相关联的图像、UI或GUI。
可使用已知的显示技术实现显示模块351。这些技术例如包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器和三维显示器。移动终端300可以包括一个或多个这样的显示器。
显示器的一些能够被实现为透明或光透射式,即,透明显示器。透明显示器的代表性示例是TOLED(透明OLED)。显示器351的后部构造也能够被实现为光透射式。在该构造中,用户能够在终端主体的显示器351的一部分上来观察位于终端主体后部的物体。
根据移动终端300的一个实施例,能够在移动终端300中提供至少两个显示器351。例如,多个显示器能够被布置成相互隔开或者在移动终端300的单个面上形成单个主体。可替选地,能够将多个显示器布置在移动终端300的不同面上。
如果显示器351和用于检测触摸动作的传感器(下文中称为“触摸传感器”)被配置成相互分层结构(下文中称为“触摸屏”),则显示器351可用作输入设备以及输出设备。在本实例中,触摸传感器能够被配置为触摸膜、触摸片、或者触摸板。
触摸传感器能够被配置为将向显示器351的特定部分施加的压力或从显示器351的特定部分生成的电容变化转换为电输入信号。此外,触摸传感器可以被配置成检测触摸的压力以及触摸位置或尺寸。如果向触摸传感器进行触摸输入,则对应于该触摸输入的一个或多个信号就被传送到触摸控制器。触摸控制器处理该一个或多个信号,然后将经处理的一个或多个信号传送到控制器380。因此,控制器380意识到何时显示器351的规定部分被触摸。
参考图2,能够在由触摸屏包围的或触摸屏周围的移动终端300的内部区域处提供接近传感器341。接近传感器是在不进行机械接触的情况下使用电磁场强度或红外线来检测接近指定检测表面的物体或者存在于(位于)接近传感器周围的物体的存在或不存在。因此,接近传感器341比接触式传感器更加耐久,并且也具有比接触式传感器更广的实用性。
接近传感器341能够包括透射光电传感器、直接反射光电传感器、镜反射光电传感器、射频振荡接近传感器、静电电容接近传感器、磁接近传感器、以及红外接近传感器中的一个。如果触摸屏包括静电电容接近传感器,则其被配置为使用根据指示器的接近的电场的变化来检测指示器的接近。在此配置中,能够将触摸屏(触摸传感器)视为接近传感器。
为了清晰和便于解释,可将使得能够将接近触摸屏的指示器识别为被放置在触摸屏上的动作称为“接近触摸”,并且将使得指示器能够实际接触触摸屏的动作可以称为“接触触摸”。此外,使用指示器进行接近接触触摸屏的位置可意味着当指示器进行接近触摸时指示器垂直对应于触摸屏的位置。
接近传感器检测接近触摸和接近触摸样式(例如,接近触摸距离、接近触摸持续时间、接近触摸位置、接近触摸移位状态等等)。能够将对应于所检测的接近触摸动作和所检测的接近触摸样式的信息输出至触摸屏。
音频输出模块352在各种模式下起作用,包括呼叫接收模式、呼叫拨打模式、记录模式、语音识别模式、以及广播接收模式,以输出从无线通信单元310接收的或存储在存储器360中的音频数据。在操作期间,音频输出模块352输出关于特定功能(例如,接收的呼叫、接收的消息)的音频。可以使用一个或多个扬声器、蜂鸣器、其他音频发生设备以及这些设备的组合实现音频输出模块352。
报警单元353输出用于通知发生了与移动终端300相关联的特定事件的信号。典型事件包括接收到呼叫、接收到消息和接收到触摸输入。报警单元353能够通过振动以及视频或音频信号输出用于通知事件发生的信号。能够经由显示器351或音频输出模块352输出视频或音频信号。因此,能够将显示器351或音频输出模块352视为报警单元353的一部分。
触觉模块354生成能够由用户感知的各种触觉效果。振动是由触觉模块354生成的一种代表性触觉效果。由触觉模块354生成的振动强度和样式是可控的。例如,不同振动能够通过合成在一起的方式被输出,或者能够被依次输出。
触觉模块354能够生成各种触觉效果以及振动。例如,触觉模块354可以生成归因于相对接触皮肤表面垂直移动的针的布置的效果;归因于空气通过喷射/吸入孔的喷射/吸入力的效果;归因于在皮肤表面上掠过的效果;归因于接触电极的效果;归因于静电力的效果;归因于使用吸热或发热设备表现的热/冷感觉的效果。
能够实现触觉模块354以使得用户能够通过手指或手臂的肌肉感知来感测到触觉效果,以及通过直接接触传递触觉效果。可选地,根据移动终端300的实施例,能够在移动终端300中提供至少两个触觉模块354。
存储器单元360通常用于存储各种类型的数据,以支持移动终端300的处理、控制和存储需求。这样的数据的示例包括:用于在移动终端300上操作的应用的程序指令、联系人数据、电话本数据、消息、音频、静止图片(或照片)、以及移动图片。此外,能够在存储器单元360中存储每种数据的最近使用历史或累计使用频率(例如,每个电话本、每条消息或每个多媒体文件的使用频率)。此外,能够在存储器360中存储用于响应于对触摸屏的触摸输入输出的振动和/或声音的各种模式的数据。
可以使用任何类型的适当的易失和非易失存储器或存储设备或其组合实现存储器360,包括:硬盘、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、电可擦可编程只读存储器(EEPROM)、可擦可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘、多媒体卡微型存储器、卡式存储器(例如,SD存储器、或者XD存储器),或者其他类似的存储器或数据存储设备。此外,移动终端300能够结合用于在互联网上执行存储器360的存储功能的网络存储来操作。
接口单元370可以被实现为将移动终端300和外部设备相耦合。接口单元370从外部设备接收数据,或者被供电,然后接口单元370将数据或电力传送至移动终端300的相应的元件,或者使得能够将移动终端300内的数据传送至外部设备。使用有线/无线头戴式端口、外部充电器端口、有线/无线数据端口、存储器卡端口、用于耦合至具有标识模块的设备的端口、音频输入/输出端口、视频输入/输出端口、以及/或者耳机端口来配置接口单元370。
标识模块是存储用于验证移动终端300的使用权限的各种信息的芯片,并且能够包括用户标识模块(UIM)、订户标识模块(SIM)和/或通用订户标识模块(USIM)。能够将具有标识模块的设备(下文中称为“标识模块”)制造为智能卡。因此,标识模块可经由对应的端口连接到移动终端300。
当将移动终端300连接至外部支架时,接口单元370变为用于从支架向移动终端300供电的通道,或者变为用于将用户从支架输入的各种命令信号传递至移动终端300的通道。从支架输入的各种命令信号或者电力中的每一个都能够起到使移动终端300识别到其已经正确装载在支架中的信号的作用。
控制器380通常控制移动终端300的整体操作。例如,控制器380执行与语音呼叫、数据通信、以及视频呼叫相关联的控制和处理。控制器380能够包括多媒体模块381,其提供多媒体回放。多媒体模块381可被配置成控制器380的一部分,或者可作为单独的组件实现。
此外,控制器380能够执行模式(或图像)识别处理,用于将在触摸屏上执行的书写输入和绘图输入分别识别为字符或图像。电源单元390向移动终端300提供各种组件所需的电力。该电力可以是内部电力、外部电力或内部和外部电力的组合。
例如,可在使用计算机软件、硬件或计算机软件和硬件的一些组合在计算机可读介质中实现在此所述的各种实施例。对于硬件实施,可在一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编辑门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计用于执行在此所述功能的其他电子单元、或其选择性组合中实现在此所述的实施例。也可通过控制器380实现这样的实施例。
对于软件实施,可通过单独的软件模块实现在此所述的实施例,软件模块诸如是程序和函数,其中的每一个都执行在此所述的一个或多个功能或操作。能够以任何适当的编程语言编写的软件应用实现软件代码,并且可将软件代码存储在诸如存储器360的存储器中,并且由诸如控制器380的控制器或处理器来执行。
图3是图示根据本发明的实施例的数字装置的驾驶员监控装置的配置的框图。参考图3,驾驶员监控装置包括第一照明单元1100、第二照明单元1200、第一相机单元1300、第二相机单元1400以及控制单元1500。另外,驾驶员监控装置包括存储单元1600和报警显示单元1700。
特别地,第一照明单元1100产生第一光并且第二照明单元1200产生第二光。从第一照明单元1100产生的第一光和从第二照明单元1200产生的第二光中的每一个可以包括红外线波长范围中的光。从第一照明单元110产生的第一光的强度可以等于从第二照明单元1200产生的第二光的强度。
在本实例中,第一照明单元1100和第二照明单元1200可以通过参考驾驶员的位置相互对称被布置。在第一照明单元1100和驾驶员的眼睛之间的距离可以等于在第二照明单元1200和驾驶员的眼睛之间的距离。在一些情况下,从第一照明单元1100产生的第一光的强度可以不同于从第二照明单元1200产生的第二光的强度。
虽然通过相互对称布置第一照明单元1100和第二照明单元1200,但是在第一照明单元1100和驾驶员的眼睛之间的距离可以不同于在第二照明单元1200和驾驶员之间的距离。例如,如果第一照明单元1100和驾驶员的眼睛之间的距离大于在第二照明单元1200和驾驶员的眼睛之间的距离,则从第一照明单元1100产生的第一光的强度可以大于从第二照明单元1200产生的第二光的强度。
第一相机单元1300能够获得第一图像并且第二相机单元1400能够获得第二图像。在本实例中,第一相机单元1300可以被布置在第一照明单元1100附近并且第二相机单元1400可以被布置在第二照明单元1200附近。特别地,第一相机单元1300和第二相机单元1400可以通过参考驾驶员的眼睛的位置相互对称被布置。
在第一相机单元1300和驾驶员的眼睛之间的距离可以等于在第二相机单元1400和驾驶员的眼睛之间的距离。第一相机单元1300和第一照明单元1100可以通过被相互配对被布置。第一相机单元1300和第一照明单元1100可以分别被制造成不同的模块。第一相机单元1300和第一照明单元1100可以被制造成单个模块。
第二相机单元1400和第二照明单元1200可以通过相互配对被布置。第二相机单元1400和第二照明单元1200可以分别被制造成不同的模块。第二相机单元1400和第二照明单元1200可以被制造成单个模块。例如,第一照明单元1100和第一相机单元1300可以被配置有第一模块,而第二照明单元1200和第二相机单元1400可以被配置有第二模块。
在一些情况下,第一照明单元1100被配置有第一模块,第一相机单元1300被配置成第二模块,第二照明单元1200被配置成第三模块,并且第二相机单元1400被配置有第四模块。同时,控制单元1500能够主要地检查是否从第一相机单元1300获得的图像的亮度等于或者大于参考值或者是否根据从第二相机单元1400获得的图像检测到驾驶员。
如果从第一相机单元1300获得的图像的亮度不等于或者大于参考值或者根据从第二相机单元1400获得的图像没有检测到驾驶员,则控制单元1500其次能够检查是否在通过关断第二照明单元1200从第一相机单元1300获得的第一比较图像的亮度与通过接通第二照明单元1200从第一相机单元1300获得的第二比较图像的亮度之间的差值等于或者大于参考差值。
另外,如果获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差,则控制单元1500能够控制第一照明单元1100、第二照明单元1200、第一相机单元1300以及第二相机单元1400以关断第二照明单元1200。
此外,当控制单元1500通过关断第二照明单元1200从第一相机单元1300获得第一比较图像并且也通过接通第二照明单元1200从第一相机单元1300获得第二比较图像时,控制单元1500能够控制关断第二照明单元1200的时序点和接通第二照明单元1200的时序点以具有预定的时间间隔。
在本实例中,对于关断第二照明单元1200的时序点和接通第二照明单元1200的时序点以具有预定的时间间隔的理由是,使第一相机单元1300具有用于获得第一比较图像的时间。
在控制单元1500已经关断第二照明单元1200之后,控制单元1500检查是否第一照明单元1100和第二照明单元1200都被关断。如果第一照明单元1100和第二照明单元1200都被关断,则控制单元1500向驾驶员显示报警并且能够控制第一照明单元1100和第二照明单元1200两者以被接通。
此外,在从向驾驶员显示报警的时序点开始的预定时间的流逝之后,控制单元1500能够接通第一照明单元1100和第二照明单元1200两者。特别地,对于在从向驾驶员显示报警的时序点开始的预定时间的流逝之后接通第一照明单元1100和第二照明单元1200的理由是,给出用于从开始重启驾驶员监控算法的重置时间。
在控制单元1500已经关断第二照明单元1200之后,控制单元1500检查是否第一照明单元1100和第二照明单元1200都被关断。如果第一照明单元1100和第二照明单元1200都被关断,则控制单元1500从第一相机单元1300和第二相机单元1400获得图像。
另外,控制单元1500检查是否根据从第一相机单元1300和第二相机单元1400获得的图像中的每一个检测到驾驶员。如果根据从第一相机单元1300和第二相机单元1400获得的图像中的每一个中检测到驾驶员,则控制单元1500能够控制第二照明单元1200被接通。此外,如果根据从第一相机单元1300和第二相机单元1400获得的图像中的每一个中没有检测到驾驶员,则控制单元1500能够控制第二照明单元1200被关断。
同时,如果获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差,则控制单元1500检查是否第一照明单元1100和第二照明单元1200两者被关断。如果第一照明单元1100和第二照明单元1200两者被关断,则控制单元1500向驾驶员显示报警并且能够控制第一照明单元1100和第二照明单元1200两者被接通。
如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差,则控制单元1500从第一相机单元1300和第二相机单元1400获得图像并且然后检查是否根据从第一相机单元1300和第二相机单元1400获得的图像中的每一个中检测到驾驶员。如果根据从第一相机单元1300和第二相机单元1400获得的图像中的每一个中检测到驾驶员,则控制单元1500能够控制第二照明单元1200以被接通。
同时,用于图像亮度的差值和参考差值被事先设置并且然后能够被保存在存储单元1600中。在一些情况下,驾驶员可以改变被事先存储在存储单元1600中的用于图像差分的参考值和参考差值。此外,如果驾驶员改变用于图像亮度的参考值和参考差值,则数字装置的控制单元1500可以通过显示单元1720另外提供变化设置窗口。
在本实例中,取决于驾驶员的内部车辆环境,用于图像亮度的参考值可以被确定。例如,当太阳落下或者天气是多云的时,如果驾驶员的内部车辆环境变暗,则通过相对地降低用于图像亮度的参考值检测图像亮度。在其它的实例中,当太阳升起或者天气是晴朗的时,如果驾驶员的内部车辆环境变得明亮,则通过相对升高用于图像亮度的参考值检测图像亮度。
当第一照明单元1100和第二照明单元1200两者被关断时,如果异常的错误被发现,则报警显示单元1700能够响应于控制单元1500的控制信号向驾驶员显示报警。在本实例中,报警显示单元1700可以包括显示单元1720和报警通知照明单元1740。例如,报警显示单元1700能够通过创建报警消息并且然后在显示单元1720上显示创建的报警消息的第一方法和在预定的时间内连续地接通/关断报警通知照明单元1740的报警通知照明的第二方法中的至少一个执行报警显示。
因此,本发明的数字装置可以通过被安装在车辆上监控驾驶员的状态。可替选地,本发明的数字装置可以通过被安装在一般的数字装置等等上来监控用户的状态。本发明主要使用第一照明单元1100、第二照明单元1200、第一相机单元1300以及第二相机单元1400分析获得的图像并且然后其次分析通过接通/关断照明获得的比较图像。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。此外,因为本发明没有要求附加的部件或者组件,所以能够防止材料的成本上升。
图4和图5是描述在照明单元和相机单元之间的布置关系的图。参考图4,数字装置的驾驶员监控装置可以包括第一照明单元2100、第二照明单元3100、第一相机单元2200以及第二相机单元3200。特别地,第一相机单元2200和第一照明单元2100配置一对并且能够被布置成第一模块2000。第二相机单元3200和第二照明单元3100配置另一对并且能够被布置成第二模块3000。
更加详细地,第一模块2000以第一相机单元2200和第一照明单元2100被布置在第一基板2300上的方式被配置,而第二模块3000以第二相机单元3200和第二照明单元3100被布置在第二基板3300上的方式被布置。此外,如果驾驶员监控装置被布置在车辆内,则第一模块2000和第二模块3000能够以通过紧握车辆的手柄12当前驾驶车辆的驾驶员10为中心被对称地布置在驾驶员10的前面。例如,第一模块2000和第二模块3000能够通过参考驾驶员10的眼睛的位置被相互对称布置。在第一模块2000与驾驶员10的眼睛之间的距离d1可以等于在第二模块3000和驾驶员10的眼睛之间的距离d2。
在一些情况下,从第一模块2000的第一照明单元2100产生的第一光的强度可以不同于从第二模块3000的第二照明单元3100产生的第二光的强度。在本实例中,虽然关于驾驶员10的眼睛的位置对称地布置第一模块2000和第二模块3000,但是在第一照明单元2100和驾驶员10的眼睛之间的距离可以不同于在第二照明单元3100和驾驶员10的眼睛之间的距离。
例如,如果在第一照明单元2100和驾驶员10的眼睛之间的距离大于在第二照明单元3100和驾驶员10的眼睛之间的距离,则从第一照明单元2100产生的第一光的强度可以大于从第二照明单元3100产生的第二光的强度。
参考图5,照明单元4100可以被配置有第一模块4010,第一相机单元4300可以被配置有第二模块4020,第二照明单元5200可以被配置有第三模块5010,并且第二相机单元5300可以被配置成第四模块5020。例如,第一模块4010以第一照明单元4100被布置在第一基板4200上的方式被配置,第二模块4020以第一相机单元4300被布置在第二基板4400上的方式被配置,第三模块5010以第二照明单元5100被布置在第三基板5200上的方式被配置,并且第四模块5200以第二相机单元5300被布置在第四基板5400上的方式被配置。
在本实例中,可以通过与包括第一相机单元4300的第二模块4020相邻布置包括第一照明单元4100的第一模块4010,而通过与包括第二相机单元5300的第四模块5020相邻可以布置包括第二照明单元5200的第三模块5010。此外,如果驾驶员监控装置被布置在车辆内,则第一模块4010、第二模块4020、第三模块5010以及第四模块5020能够以通过紧握车辆的手柄12当前驾驶车辆的驾驶员10为中心被对称地布置在驾驶员10的前面。
例如,第一模块4010和第三模块5010能够通过关于驾驶员10的眼睛的位置相互对称被布置,并且第二模块4020和第四模块5020能够通过相互对称被布置。在第一模块4010和驾驶员10的眼睛之间的距离d21可以等于在第三模块5010和驾驶员10的眼睛之间的距离d22。在第二模块4020和驾驶员10的眼睛之间的距离d11可以等于在第四模块5020和驾驶员10的眼睛之间的记录d12。
在一些情况下,从第一模块4010的第一照明单元4100产生的第一光的强度可以不同于从第三模块5010的第二照明单元5100产生的第二光的强度。在本实例中,虽然第一模块4010和第三模块5010关于驾驶员10的眼睛的位置被对称地布置,但在第一照明单元4100和驾驶员10的眼睛之间的距离可以不同于在第二照明单元5100和驾驶员10的眼睛之间的距离。
例如,如果在第一照明单元4100和驾驶员10的眼睛之间的距离大于在第二照明单元5100和驾驶员10的眼睛之间的距离,则从第一照明单元4100产生的第一光的强度可以大于从第二照明单元5100产生的第二光的强度。
图6至图10是描述根据本发明的实施例的数字装置的驾驶员监控过程的图。参考图6至图10,根据本发明的实施例的数字装置可以包括第一照明单元6010、第二照明单元6020、第一相机单元7010以及第二相机单元7020。
特别地,第一相机单元7010和第一照明单元6010配置一对并且能够被布置成第一模块。第二相机单元7020和第二照明单元6020配置另一对并且能够被布置成第二模块。更加详细地,包括第一相机单元7010和第一照明单元6010的第一模块和包括第二相机单元7020和第二照明单元6020的第二模块能够以通过紧握车辆的手柄8030当前驾驶车辆的驾驶员10为中心被对称地布置在驾驶员8010的前面。
如果上述驾驶员监控装置接收从驾驶员或者车辆接收到的驾驶员监控请求信号,参考图6,驾驶员监控装置接通第一照明单元6010、第二照明单元6020、第一相机单元7010以及第二相机单元7020并且然后从第一相机单元7010和第二相机单元7020获得驾驶员8010的图像。另外,驾驶员监控装置检查是否从第一相机单元7010获得的图像的亮度等于或者大于参考值或者是否根据从第二相机单元7020获得的图像检测驾驶员。
参考图7,如果驾驶员8010从驾驶员座8020移动到包括第二相机单元7020和第二照明单元6020的第二模块,则驾驶员8010的眼睛可能受到从第二照明单元6020产生的红外线光6120的损害。因此,驾驶员监控装置需要用于检查是否包括第二相机单元7020和第二照明单元6020的第二模块附近的物体实际上是驾驶员的过程。
驾驶员监控装置检查是否从第一相机单元7010获得的图像的亮度等于或者大于参考值或者是否根据从第二相机单元7020获得的图像检测到驾驶员。如果驾驶员8010移向第二模块,则因为驾驶员8010阻挡第二照明单元6020,所以从第一相机单元7010获得的图像的亮度可能小于参考值。此外,如果驾驶员8010移向第二模块,则因为驾驶员8010偏离第二相机单元7020的拍摄范围,所以不可以根据从第二相机单元7020获得的图像检测驾驶员8010。
因此,如果从第一相机单元7010获得的图像的亮度不等于或者大于参考值或根据从第二相机单元7020获得的图像没有检测到参考值,则驾驶员监控装置通过关断第二照明单元6020从第一相机单元7010获得第一比较图像并且通过接通第二照明单元6020也从第一相机单元7010获得第二比较图像。
参考图8,如果驾驶员8010没有从驾驶座8020移动而是不同的被指定的物体移向包括第二相机单元7020和第二照明单元6020的第二模块,则因为驾驶员监控装置在识别驾驶员8010接近第二模块中犯错误,所以驾驶员监控装置可以关断第二照明单元6020。
在本实例中,因为驾驶员监控装置关断第二照明单元6020,尽管驾驶员8010正在正常地驾驶相对应的车辆,所以驾驶员监控装置不能够继续地监控驾驶员8010的状态。为了评估这样的错误过程,驾驶员监控装置通过关断第二照明单元6020从第一相机单元7010获得第一比较图像并且通过接通第二照明单元6020也从第一相机单元7010获得第二比较图像。
另外,驾驶员监控装置检查是否在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值。如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则驾驶员监控装置关断第二照明单元6020以保护驾驶员的眼睛。
如果驾驶员接近第二模块,则通过关断第二照明单元6020从第一相机单元7010获得的第一比较图像的亮度可以不具有与通过接通第二照明单元6020从第一相机单元7010获得的第二比较图像的亮度大的差。
在本实例中,因为仅通过第一照明单元6010确定第一比较图像的亮度并且也仅通过第一照明单元6010确定第二比较图像的亮度,所以如果驾驶员接近第二模块,则在第一比较图像的亮度和第二比较图像的亮度之间将不存在大的差。
但是,如果被指定的对象接近第二模块替代驾驶员,则通过关断第二照明单元6020从第一相机单元7010获得的第一比较图像的亮度可以具有与通过接通第二照明单元6020从第一相机单元7010获得的第二比较图像的亮度大的差。
在本实例中,因为仅通过第一照明单元6010确定第一比较图像的亮度并且也通过第一照明单元6010和第二照明单元6020确定第二比较图像的亮度,所以如果除了驾驶员之外的被指定的物体接近第二模块,则在第一比较图像的亮度和第二比较图像的亮度之间将存在大的差。
同时,参考图9,如果驾驶员8010从驾驶座8020移向包括第一相机单元7010和第一照明单元6010的第一模块,则从第一照明单元6010产生的红外光6110可能损坏驾驶员8010的眼睛。因此,驾驶员监控装置需要用于检查是否在包括第一相机单元7010和第一照明单元6010的第一模块附近的物体实际上是驾驶员的过程。
驾驶员监控装置检查是否从第二相机单元7020获得的图像的亮度等于或者大于参考值或者根据从第一相机单元7010获得的图像检测到驾驶员。如果驾驶员8010移向第一模块,则因为驾驶员8010阻挡第一照明单元6010,所以从第二相机单元7020获得的图像的亮度可能小于参考值。
此外,如果驾驶员8010移向第一模块,则因为驾驶员8010偏离第一相机单元7010的拍摄范围,所以不可以根据从第一相机单元7010获得的图像检测到驾驶员8010。因此,如果从第二相机单元7020获得的图像的亮度不等于或者大于参考值或者根据从第一相机单元7010获得的图像没有检测到驾驶员,则驾驶员监控装置通过关断第一照明单元6010从第二相机单元7020获得第三比较图像并且通过接通第一照明单元6010也从第二相机单元7020获得第四比较图像。
参考图10,如果驾驶员8010没有从驾驶座8020移动而是不同的被指定的物体移向包括第一相机单元7010和第一照明单元6010的第一模块,则因为驾驶员监控装置在识别驾驶员8010接近第一模块中犯错误,所以驾驶员监控装置可以关断第一照明单元6010。
在本实例中,因为驾驶员监控装置关断第一照明单元6010,尽管驾驶员8010正在正常地驾驶相对应的车辆,所以驾驶员监控装置不能够连续地监控驾驶员8010的状态。为了消除这样的错误的过程,驾驶员监控装置通过关断第一照明单元6010从第二相机单元7020获得第三比较图像并且也通过接通第一照明单元6010从第二相机单元7020获得第四比较图像。
另外,驾驶员监控装置检查是否在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值。如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值不等于或者大于参考差值,则驾驶员监控装置关断第一照明单元6010以保护驾驶员的眼睛。
如果驾驶员接近第一模块,则通过关断第一照明单元6010从第二相机单元7020获得的第三比较图像的亮度可以不具有与通过接通第一照明单元6010从第二相机单元7020获得的第四比较图像的亮度大的差。
在本实例中,因为仅通过第二照明单元6020确定第三比较图像的亮度并且也仅通过第二照明单元6020确定第四比较图像的亮度,所以如果驾驶员接近第一模块,则在第三比较图像的亮度和第四比较图像的亮度之间将不存在大的差。
但是,如果除了驾驶员之外的被指定的对象接近第二模块,则通过关断第一照明单元6010从第二相机单元7020获得的第四比较图像的亮度可以具有与通过接通第一照明单元6010从第二相机单元7020获得的第四比较图像的亮度大的差。
在本实例中,因为仅通过第二照明单元6020确定第三比较图像的亮度并且通过第一照明单元6010和第二照明单元6020确定第四比较图像的亮度,所以如果除了驾驶员之外的被指定的物体接近第一模块,则在第三比较图像的亮度和第四比较图像的亮度之间将会存在大的差。
因此,本发明使用第一照明单元、第二照明单元、第一相机单元以及第二相机单元主要地分析获得的图像并且然后其次分析通过接通/关断照明获得的比较图像。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。
图11是图示用于驾驶员监控装置的错误的报警通知的图。参考图11,根据本发明的实施例的驾驶员监控装置从第一相机单元和第二相机单元获得图像,并且然后检查是否从第一相机获得的图像的亮度等于或者大于参考值或者是否根据从第二相机单元获得的图像检测到驾驶员。
另外,如果从第一相机获得的图像的亮度不等于或大于参考值或者如果根据从第二相机单元获得的图像没有检测到驾驶员,则驾驶员监控装置通过关断第二照明单元从第一相机获得第一比较图像并且通过接通第二照明单元从第一相机单元也获得第二比较图像。
另外,驾驶员监控装置检查是否在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值。如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则驾驶员监控装置关断第二照明单元。
另外,驾驶员监控装置检查是否第一照明单元和第二照明单元两者被关断。如果第一照明单元和第二照明单元两者被关断,则驾驶员监控装置向驾驶员9010显示报警并且能够接通第一照明单元和第二照明单元两者。
此外,驾驶员监控装置能够通过创建报警消息9120并且然后在显示单元9100上显示创建的报警消息9120的第一方法和在预定的时间内连续地接通/关断报警通知照明9200的第二方法中的一个执行报警显示。
特别地,在从向驾驶员9010显示报警的时序点开始的预定时间的流逝之后,驾驶员监控装置可以接通第一照明单元和第二照明单元两者。因此,当第一照明单元和第二照明单元两者被关断时,如果异常的错误被发现,则本发明向驾驶员显示报警。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。此外,本发明能够通过被安装在一般数字装置等等上能够监控用户的状态以及通过被安装在车辆上能够监控驾驶员的状态。
图12是描述根据本发明的第一实施例的数字装置的驾驶员监控方法的流程图。参考图12,数字装置的控制单元从第一相机单元和第二相机单元获得图像(S11)。在从第一相机单元和第二相机单元获得图像之后,如果驾驶员监控请求信号被外部地接收,则控制单元能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。
在一些情况下,如果数字装置被安装在车辆上,则车辆一启动控制单元就能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。如果数字装置被安装在一般的数字装置上,则数字装置一启动控制单元就能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。
另外,控制单元检查是否从第一相机获得的图像的亮度是否等于或者大于参考值或者是否根据从第二相机单元获得的图像检测到驾驶员(S13)。在本实例中,用于图像亮度的参考值可以被事先确定并且被存储在存储单元中。此外,取决于驾驶员的内部车辆环境可以确定用于图像亮度的参考值。
例如,当太阳落下或者天气是多云的时,如果驾驶员的内部车辆环境变暗,则通过相对地降低用于图像亮度的参考值检测到图像亮度。在其它的实例中,当太阳升起或者天气是晴朗的时,如果驾驶员的内部车辆环境变得明亮,则通过相对地提高用于图像亮度的参考值检测到图像亮度。
因此,取决于数字装置的监控装置被安装的地点的外部环境,用于图像亮度的参考值能够被设置为各种值。在一些情况下,驾驶员或者用户可以改变用于被事先存储在存储单元中的图像亮度的参考值。此外,如果驾驶员或者用户改变用于图像亮度的参考值,则数字装置的控制单元可以通过显示单元另外提供变化设置窗口。
作为检查的结果,如果从第一相机单元获得的图像的亮度不等于或者大于参考值或者根据从第二相机单元获得的图像没有检测到驾驶员,则控制单元能够通过关断第二照明单元从第一相机获得第一比较图像并且通过接通第二照明单元从第一相机单元也获得第二比较图像(S15)。
在本实例中,关断第二照明单元的时序点和接通第二照明单元的时序点可以具有预定的时间间隔。另外,预定的时间间隔可以包括用于从第一相机单元获得第一比较图像的时间。特别地,如果从第一相机单元获得的图像的亮度不等于或者大于参考值或者根据从第二相机单元获得的图像没有检测到驾驶员,则控制单元主要确定驾驶员已经紧密地接近第二照明单元。
此外,作为检查的结果,如果从第一相机单元获得的图像的亮度等于或者大于参考值或者根据从第二相机单元获得的图像检测到驾驶员,则控制单元能够继续地执行从第一相机单元和第二相机单元获得图像的步骤S11。另外,控制单元检查是否在从第一相机单元获得的第一比较图像的亮度和从第二相机单元获得的第二比较图像的亮度之间的差值等于或者参考差值(S17)。
在本实例中,参考差值可以被事先确定或者存储在存储单元中。此外,用于第一比较图像的亮度和第二比较图像的亮度的参考差值可以取决于驾驶员的内部车辆环境被确定。
例如,当太阳落下或者天气是多云的时,如果驾驶员的内部车辆环境变暗,则通过相对地降低用于比较图像亮度的参考差值检测到图像亮度。在其它的实例中,当太阳升起或者天气是晴朗的时,如果驾驶员的内部车辆环境变得明亮,则通过相对地提高用于比较图像亮度的参考值检测到图像亮度。
因此,取决于数字装置的监控装置被安装的地点的外部环境,用于比较图像亮度的参考值能够被设置为各种值。在一些情况下,驾驶员或者用户可以改变用于被事先存储在存储单元中的比较图像亮度的参考值。
此外,如果驾驶员或者用户改变用于比较图像亮度的参考值,则数字装置的控制单元可以通过显示单元另外提供变化设置窗口。另外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第二照明单元(S19)。
特别地,如果在第一比较图像的亮度和第二比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第二照明单元并且然后能够关断第二照明单元。此外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值,则控制单元连续地执行从第一相机单元和第二相机单元获得图像的步骤S11。
特别地,如果在第一比较图像的亮度和第二比较图像的亮度之间存在大的差,则控制单元确定驾驶员还没有紧密地接近第二照明单元并且没有关断第二照明单元。在一些情况下,在控制单元已经关断第二照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S21)。
另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S11(S23)。
特别地,如果第一照明单元并且然后第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。
此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。此外,控制单元能够在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。
特别地,对于在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。但是,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S11。
因此,如果从第一相机获得的图像的亮度不等于或者大于参考值或者根据从第二相机单元获得的图像没有检测到驾驶员,本发明主要地确定驾驶员已经紧密地接近第二照明单元。
另外,如果在第一比较图像的亮度和第二比较图像的亮度之间几乎不存在大的差,则本发明其次确定驾驶员已经紧密地接近第二照明单元。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。
此外,如果第一照明单元和第二照明单元两者被关断,则本发明确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。因此,驾驶员监控装置的错误率能够被相当地减少并且驾驶员监控装置的可靠性能够被增加。
图13是描述根据本发明的第二实施例的数字装置的驾驶员监控方法的流程图。参考图13,因为本发明的第二实施例的步骤S41、S43以及S45与本发明的第一实施例的步骤S11、S13以及S15相同,所以为了描述的清楚起见将会省略它们的详情。
数字装置的控制单元检查是否在从第一相机单元获得的第一比较图像的亮度和第二比较图像的亮度之间的差值等于或者大于参考差值(S47)。另外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第二照明单元(S49)。
特别地,如果在第一比较图像的亮度和第二比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第二照明单元并且然后能够关断第二照明单元。此外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值,则控制单元检查是否第一照明单元和第二照明单元两者被关断(S51)。
另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S41(S53)。
特别地,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值,则控制单元能够通过检查是否第一照明单元和第二照明单元两者被关断来检查驾驶员监控装置的错误存在或者不存在。同时,在控制单元已经关断第二照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S51)。
另外,作为检查的结果,如果第一照明单元并且然后第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S41(S53)。特别地,如果第一照明单元和第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。
此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。此外,控制单元能够在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。
特别地,对于在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。但是,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够从第一相机单元和第二相机单元获得图像(S55)。
另外,控制单元检查是否根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员(S57)。另外,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员,则控制单元接通第二照明单元并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S41(S59)。但是,如果根据从第一相机单元和第二相机单元获得的所有图像中没有检测到驾驶员,则控制单元能够重复地执行关断第二照明单元的步骤S49和在步骤S49之后的剩下的步骤。
因此,根据本发明的第二实施例,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值,则能够通过检查是否第一照明单元和第二照明单元两者被关断检查驾驶员监控装置的错误存在或者不存在。
此外,根据本发明的第二实施例,如果根据从第一相机单元和第二相机单元获得的所有图像中检测到驾驶员,则第二照明单元被接通。此外,如果根据从第一相机单元和第二相机单元获得的所有图像没有检测到驾驶员,则第二照明单元被关断。因此,驾驶员监控装置的错误率能够被减少。
图14是描述根据本发明的第三实施例的数字装置的驾驶员监控方法的流程图。参考图14,因为本发明的第三实施例的步骤S71、S73以及S75与本发明的第一实施例的步骤S11、S13以及S15相同,为了描述的清楚起见将会省略它们的详情。
数字装置的控制单元检查是否在从第一相机单元获得的第一比较图像的亮度和第二比较图像的亮度之间的差值等于或者大于参考差值(S77)。另外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第二照明单元(S79)。
特别地,如果在第一比较图像的亮度和第二比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第二照明单元并且然后能够关断第二照明单元。此外,作为检查的结果,如果在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值,则控制单元从第一相机单元和第二相机单元获得图像(S85)并且然后检查是否根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员(S87)。
同时,在控制单元已经关断第二照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S81)。另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S71(S83)。
特别地,如果第一照明单元和第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。
此外,控制单元能够在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。特别地,对于在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。
但是,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够从第一相机单元和第二相机单元获得图像(S85)。另外,控制单元检查是否根据从第一相机单元和第二相机单元获得的所有图像检测驾驶员(S87)。另外,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员,则控制单元接通第二照明单元并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S71(S89)。
但是,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像中没有检测到驾驶员,则控制单元能够重复地执行关断第二照明单元的步骤S79和在步骤S79之后的剩下的步骤。因此,根据本发明的第三实施例,当在获得的第一比较图像的亮度和获得的第二比较图像的亮度之间的差值等于或者大于参考差值时,如果根据从第一相机单元和第二相机单元获得的所有图像中检测到驾驶员,则第二照明单元被接通。此外,如果根据从第一相机单元和第二相机单元获得的所有图像中没有检测到驾驶员,则第二照明单元被关断。因此,能够减少驾驶员监控装置的错误率。
此外,根据本发明的第三实施例,通过检查是否第一照明单元和第二照明单元两者被关断,能够检查驾驶员监控装置中的错误的存在或者不存在。
图15是描述根据本发明的第四实施例的数字装置的驾驶员监控方法的流程图。参考图15,数字装置的控制单元从第一相机单元和第二相机单元获得图像(S111)。在从第一相机单元和第二相机单元获得图像之前,如果驾驶员监控请求信号被外部地接收,则控制单元能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。
在一些情况下,如果数字装置被安装在车辆上,则车辆一启动控制单元就能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。如果数字装置被安装在一般的数字装置上,则数字装置一启动控制单元就能够接通第一照明单元、第二照明单元、第一相机单元以及第二相机单元。
另外,控制单元检查是否从第二相机获得的图像的亮度等于或者大于参考值或者是否根据从第一相机单元获得的图像检测到驾驶员(S113)。在本实例中,用于图像亮度的参考值可以被事先确定并且被存储在存储单元中。此外,取决于驾驶员的内部车辆环境可以确定用于图像亮度的参考值。
例如,当太阳落下或者天气是多云的时,如果驾驶员的内部车辆环境变暗,则通过相对地降低用于图像亮度的参考值检测到图像亮度。在其它的实例中,当太阳升起或者天气是晴朗的时,如果驾驶员的内部车辆环境变得明亮,则通过相对地提高用于图像亮度的参考值检测到图像亮度。因此,取决于数字装置的监控装置被安装的地点的外部环境,用于图像亮度的参考值能够被设置为各种值。
在一些情况下,驾驶员或者用户可以改变用于被事先存储在存储单元中的图像亮度的参考值。此外,如果驾驶员或者用户改变用于图像亮度的参考值,则数字装置的控制单元可以通过显示单元另外提供变化设置窗口。
作为检查的结果,如果从第一相机单元获得的图像的亮度不等于或者大于参考值或者根据从第一相机单元获得的图像没有检测到驾驶员,则控制单元能够通过关断第一照明单元从第二相机获得第三比较图像并且通过接通第一照明单元也从第二相机单元获得第四比较图像(S115)。
在本实例中,关断第一照明单元和的时序点和接通第一照明单元的时序点可以具有预定的时间间隔。另外,预定的时间间隔可以包括用于从第二相机单元获得第二比较图像的时间。
特别地,如果从第二相机单元获得的图像的亮度不等于或者大于参考值或者根据从第一相机单元获得的图像没有检测到驾驶员,则控制单元主要确定驾驶员已经紧密地接近第一照明单元。
此外,作为检查的结果,如果从第二相机单元获得的图像的亮度等于或者大于参考值或者根据从第一相机单元获得的图像检测到驾驶员,则控制单元能够继续地执行从第一相机单元和第二相机单元获得图像的步骤S111。
另外,控制单元检查是否在从第二相机单元获得的第三比较图像的亮度和第四比较图像的亮度之间的差值等于或者参考差值(S117)。在本实例中,参考差值可以被事先确定或者存储在存储单元中。此外,用于第三比较图像的亮度和第四比较图像的亮度的参考差值可以取决于驾驶员的内部车辆环境被确定。
例如,当太阳落下或者天气是多云的时,如果驾驶员的内部车辆环境变暗,则通过相对地降低用于比较图像亮度的参考差值检测到图像亮度。在其它的实例中,当太阳升起或者天气是晴朗的时,如果驾驶员的内部车辆环境变得明亮,则通过相对地提高用于比较图像亮度的参考值检测到图像亮度。
因此,取决于数字装置的监控装置被安装的地点的外部环境用于比较图像亮度的参考值能够被设置为各种值。在一些情况下,驾驶员或者用户可以改变用于被事先存储在存储单元中的比较图像亮度的参考差值。
此外,如果驾驶员或者用户改变用于比较图像亮度的参考值,则数字装置的控制单元可以通过显示单元另外提供变化设置窗口。另外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第一照明单元(S119)。
特别地,如果在第三比较图像的亮度和第四比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第一照明单元并且然后能够关断第一照明单元。此外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值,则控制单元连续地执行从第一相机单元和第二相机单元获得图像的步骤S111。
特别地,如果在第三比较图像的亮度和第四比较图像的亮度之间存在大的差,则控制单元确定驾驶员还没有紧密地接近第一照明单元并且不关断第一照明单元。在一些情况下,在控制单元已经关断第一照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S121)。
另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S111(S123)。
特别地,如果第一照明单元并且然后第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。
此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。此外,控制单元能够在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。
特别地,对于在从向用户显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。但是,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S111。
因此,如果从第一相机获得的图像的亮度不等于或者大于参考值或者根据从第二相机单元获得的图像没有检测到驾驶员,则本发明主要地确定驾驶员已经紧密地接近第一照明单元。
另外,如果在第三比较图像的亮度和第四比较图像的亮度之间几乎不存在大的差,则本发明其次确定驾驶员已经紧密地接近第二照明单元。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。
此外,如果第一照明单元和第二照明单元两者被关断,则本发明确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。因此,驾驶员监控装置的错误率能够被相当地减少并且驾驶员监控装置的可靠性能够被增加。
图16是描述根据本发明的第五实施例的数字装置的驾驶员监控方法的流程图。参考图16,因为本发明的第五实施例的步骤S141、S143以及S145与本发明的第四实施例的步骤S111、S113以及S115相同,所以为了描述的清楚起见将会省略它们的详情。
数字装置的控制单元检查是否在从第二相机单元获得的第三比较图像的亮度和第四比较图像的亮度之间的差值等于或者大于参考差值(S147)。另外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第一照明单元(S149)。
特别地,如果在第三比较图像的亮度和第四比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第一照明单元并且然后能够关断第一照明单元。此外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值,则控制单元检查是否第一照明单元和第二照明单元两者被关断(S151)。
另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S141(S153)。
特别地,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值,则控制单元能够通过检查是否第一照明单元和第二照明单元两者被关断检查驾驶员监控装置的错误的存在或者不存在。
同时,在控制单元已经关断第一照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S151)。另外,作为检查的结果,如果第一照明单元并且然后第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤1S41(S153)。
特别地,如果第一照明单元和第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元两者重置驾驶员监控装置。此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。
此外,控制单元能够在从向驾驶员显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。特别地,对于在从向驾驶员显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。
但是,作为检查的结果,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够从第一相机单元和第二相机单元获得图像(S155)。另外,控制单元检查是否根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员(S157)。
另外,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员,则控制单元接通第一照明单元并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S141(S159)。但是,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像中没有检测到驾驶员,则控制单元能够重复地执行关断第一照明单元的步骤S149和在步骤S149之后的剩下的步骤。
因此,根据本发明的第五实施例,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值,则能够通过检查是否第一照明单元和第二照明单元两者被关断来检查驾驶员监控装置的错误的存在或者不存在。
此外,根据本发明的第五实施例,如果根据从第一相机单元和第二相机单元获得的所有图像中检测到驾驶员,则第一照明单元被接通。此外,如果根据从第一相机单元和第二相机单元获得的所有图像没有检测到驾驶员,则第二照明单元被关断。因此,驾驶员监控装置的错误率能够被减少。
图17是描述根据本发明的第六实施例的数字装置的驾驶员监控方法的流程图。参考图17,因为本发明的第六实施例的步骤S171、S173以及S175与本发明的第四实施例的步骤S111、S113以及S115相同,所以为了描述的清楚起见将会省略它们的详情。
数字装置的控制单元检查是否在从第二相机单元获得的第三比较图像的亮度和第四比较图像的亮度之间的差值等于或者大于参考差值(S177)。另外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值不等于或者大于参考差值,则控制单元能够关断第一照明单元(S179)。
特别地,如果在第三比较图像的亮度和第四比较图像的亮度之间几乎不存在差,则控制单元确定驾驶员已经紧密地接近第一照明单元并且然后能够关断第一照明单元。
此外,作为检查的结果,如果在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值,则控制单元从第一相机单元和第二相机单元获得图像(S185)并且然后检查是否根据从第一相机单元和第二相机单元获得的所有图像中检测到驾驶员(S187)。
同时,在控制单元已经关断第一照明单元之后,控制单元检查是否第一照明单元和第二照明单元两者被关断(S181)。另外,作为检查的结果,如果第一照明单元和第二照明单元两者被关断,则控制单元向驾驶员显示报警,接通第一照明单元和第二照明单元两者,并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S171(S183)。
特别地,在第一照明单元和第二照明单元两者被关断,则控制单元确定在驾驶员监控装置中存在错误,向驾驶员显示报警,并且然后能够通过接通第一照明单元和第二照明单元重置驾驶员监控装置。
此外,控制单元能够通过创建报警消息并且然后在显示单元显示创建的报警显示的第一方法和在预定的时间内连续地接通/关断报警通知照明的第二方法中的至少一个向用户显示报警。此外,控制单元能够在从向驾驶员显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元两者。
特别地,对于在从向驾驶员显示报警的时序点开始的预定时间的流逝之后接通第一照明单元和第二照明单元的理由是,给出用于从开始重启驾驶员监控算法的重置时间。但是,作为检查的结果,如果第一照明单元和第二照明单元两者没有被关断,则控制单元能够从第一相机单元和第二相机单元获得图像(S185)。
另外,控制单元检查是否根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员(S187)。另外,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像检测到驾驶员,则控制单元接通第一照明单元并且然后能够连续地执行从第一相机单元和第二相机单元获得图像的步骤S171(S189)。
但是,作为检查的结果,如果根据从第一相机单元和第二相机单元获得的所有图像中没有检测到驾驶员,则控制单元能够重复地执行关断第一照明单元的步骤S179和在步骤S179之后的剩下的步骤。
因此,根据本发明的第六实施例,当在获得的第三比较图像的亮度和获得的第四比较图像的亮度之间的差值等于或者大于参考差值时,如果根据从第一相机单元和第二相机单元获得的所有图像中检测到驾驶员,则第一照明单元被接通。此外,如果根据从第一相机单元和第二相机单元获得的所有图像没有检测到驾驶员,则第一照明单元被关断。因此,能够减少驾驶员监控装置的错误率。
此外,根据本发明的第六实施例,通过检查是否第一照明单元和第二照明单元两者被关断,能够检查驾驶员监控装置中的错误的存在或者不存在。
因此,本发明的实施例提供各种作用和/或者特征。首先,本发明使用第一照明单元、第二照明单元、第一相机单元以及第二照明单元主要地分析获得的图像并且然后通过接通/关断照明其次分析比较图像。因此,错误率被相当地减少,驾驶员的稳定性被确保,并且驾驶员识别性能被改进。其次,本发明没有要求附加的部件或者组件,能够防止材料成本的上升。
对于本领域内的技术人员来说显然的是,在不偏离本发明的精神或范围的情况下,能够在本发明中进行各种修改和变化。因此,旨在本发明涵盖本发明的修改和变化,只要它们落在所附权利要求和其等同物的范围内。

Claims (15)

1.一种数字装置,包括:
第一照明单元,所述第一照明单元被配置成产生第一光;
第二照明单元,所述第二照明单元被配置成产生第二光;
第一相机单元;
第二相机单元;以及
控制单元,所述控制单元被配置成:
检查是否从所述第一相机单元获得的图像的亮度等于或者大于参考值,或者是否根据从所述第二相机单元获得的图像检测到驾驶员,
如果从所述第一相机单元获得的图像的亮度不等于或者大于所述参考值,或者如果没有根据从所述第二相机单元获得的图像检测到所述驾驶员,则检查是否在通过关断所述第二照明单元从所述第一相机单元获得的第一比较图像的亮度与通过接通所述第二照明单元从所述第一相机单元获得的第二比较图像的亮度之间的差值等于或者大于参考差值,并且
如果在所述获得的第一比较图像的亮度和所述获得的第二比较图像的亮度之间的差值不等于或者大于所述参考差值,则关断所述第二照明单元。
2.根据权利要求1所述的数字装置,其中,所述第一相机单元被布置为与所述第一照明单元相邻,并且
其中,所述第二相机单元被布置为与所述第二照明单元相邻。
3.根据权利要求1所述的数字装置,其中,所述第一照明单元和所述第一相机被配置成第一模块,并且
其中,所述第二照明单元和所述第二相机被配置成第二模块。
4.根据权利要求1所述的数字装置,其中,从所述第一照明单元产生的所述第一光和从所述第二照明单元产生的所述第二光中的每一个包括红外线波长范围的光。
5.一种控制用于监控驾驶员的数字装置的方法,所述数字装置包括第一照明单元、第二照明单元、第一相机单元以及第二相机单元,所述方法包括:
从所述第一相机单元和所述第二相机单元获得图像;
经由所述数字装置的控制单元,检查是否从所述第一相机单元获得的图像的亮度等于或者大于参考值,或者是否根据从所述第二相机单元获得的图像检测到驾驶员;
如果从所述第一相机单元获得的图像的亮度不等于或者大于所述参考值,或者如果没有根据从所述第二相机单元获得的图像检测到所述驾驶员,则通过关断所述第二照明单元从所述第一相机单元获得第一比较图像并且通过接通所述第二照明单元从所述第一相机单元获得第二比较图像;
检查是否在所述获得的第一比较图像的亮度和所述获得的第二比较图像的亮度之间的差值等于或者大于参考差值;以及
如果在所述获得的第一比较图像的亮度和所述获得的第二比较图像的亮度之间的差值不等于或者大于所述参考差值,则关断所述第二照明单元。
6.根据权利要求5所述的方法,进一步包括:
接收驾驶员监控请求信号;和
接通所述第一照明单元、所述第二照明单元、所述第一相机单元以及所述第二相机单元。
7.根据权利要求5所述的方法,其中,用于图像亮度的所述参考值被预设并且保存。
8.根据权利要求5所述的方法,其中,关断所述第二照明单元的时序点和接通所述第二照明单元的时序点具有预定的时间间隔。
9.根据权利要求8所述的方法,其中,所述预定的时间间隔包括用于从所述第一相机单元获得所述第一比较图像的时间。
10.根据权利要求5所述的方法,其中,所述参考差值被预设和保存。
11.根据权利要求5所述的方法,进一步包括:
检查是否所述第一照明单元和所述第二照明单元两者被关断;以及
如果所述第一照明单元和所述第二照明单元两者被关断,则向所述驾驶员显示报警并且接通所述第一照明单元和所述第二照明单元两者。
12.根据权利要求11所述的方法,进一步包括:
如果所述第一照明单元和所述第二照明单元两者没有被关断,则从所述第一相机单元和所述第二相机单元获得图像;
检查是否根据从所述第一相机单元和所述第二相机单元获得的图像中的每一个检测到所述驾驶员;以及
如果根据从所述第一相机单元和所述第二相机单元获得的图像中的每一个中检测到所述驾驶员,则接通所述第二照明单元。
13.根据权利要求12所述的方法,其中,如果没有根据从所述第一相机单元和所述第二相机单元获得的图像中的每一个检测到所述驾驶员,则关断所述第二照明并且重复地执行在关断所述第二照明的步骤之后的步骤。
14.根据权利要求5所述的方法,其中,检查所述差值是否等于或者大于所述参考差值包括:
如果在所述获得的第一比较图像的亮度和所述获得的第二比较图像的亮度之间的差值等于或者大于所述参考差值,则检查所述第一照明单元和所述第二照明单元两者是否被关断;以及
如果所述第一照明单元和所述第二照明单元两者被关断,则向所述驾驶员显示报警并且接通所述第一照明单元和所述第二照明单元两者。
15.根据权利要求5所述的方法,其中,检查所述差值是否等于或者大于所述参考差值包括:
如果在所述获得的第一比较图像的亮度和所述获得的第二比较图像的亮度之间的差值等于或者大于所述参考差值,则从所述第一相机单元和所述第二相机单元获得图像;
检查是否根据从所述第一相机单元和所述第二相机单元获得的图像中的每一个检测到所述驾驶员;以及
如果根据从所述第一相机单元和所述第二相机单元获得的图像中的每一个检测到所述驾驶员,则接通所述第二照明单元。
CN201510357927.5A 2015-02-25 2015-06-25 数字装置及其驾驶员监控方法 Active CN105916262B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0026305 2015-02-25
KR1020150026305A KR102381140B1 (ko) 2015-02-25 2015-02-25 디지털 디바이스 및 그의 운전자 모니터링 방법

Publications (2)

Publication Number Publication Date
CN105916262A true CN105916262A (zh) 2016-08-31
CN105916262B CN105916262B (zh) 2019-01-04

Family

ID=53189554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510357927.5A Active CN105916262B (zh) 2015-02-25 2015-06-25 数字装置及其驾驶员监控方法

Country Status (4)

Country Link
US (1) US10015411B2 (zh)
EP (1) EP3062262B1 (zh)
KR (1) KR102381140B1 (zh)
CN (1) CN105916262B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107567140A (zh) * 2017-09-14 2018-01-09 崔涛 电动汽车夜间驾驶安全辅助系统
CN110662476A (zh) * 2017-05-25 2020-01-07 日本电气株式会社 信息处理装置、控制方法和程序

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9862315B2 (en) * 2015-08-12 2018-01-09 Lytx, Inc. Driver coaching from vehicle to vehicle and vehicle to infrastructure communications
JP2018045373A (ja) * 2016-09-13 2018-03-22 富士通株式会社 情報処理プログラム、情報処理端末及び情報処理方法
JP2018128974A (ja) * 2017-02-10 2018-08-16 トヨタ自動車株式会社 ドライバ状態監視装置
DE102017205386A1 (de) * 2017-03-30 2018-10-04 Robert Bosch Gmbh Fahrerbeobachtungsvorrichtung und Verfahren zum Beobachten eines Fahrers in einem Fahrzeug zum Bestimmen zumindest einer Position des Fahrers in dem Fahrzeug
US10726574B2 (en) * 2017-04-11 2020-07-28 Dolby Laboratories Licensing Corporation Passive multi-wearable-devices tracking
JP2019046273A (ja) * 2017-09-05 2019-03-22 オムロン株式会社 運転者状態把握装置、運転者状態把握システム、及び運転者状態把握方法
US20210385432A1 (en) * 2019-03-15 2021-12-09 Lg Electronics Inc. Vehicle control device
KR20230041490A (ko) * 2021-09-17 2023-03-24 삼성전자주식회사 전기 변색 소자를 포함하는 전자 장치 및 그 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100990305B1 (ko) * 2010-05-13 2010-10-26 정성호 영상촬상소자를 직접 연결한 바이너리 cdma 영상 송수신 시스템
CN102030232A (zh) * 2009-09-24 2011-04-27 东芝电梯株式会社 电梯监视装置、电梯监视方法以及电梯远程监视系统
US20120150387A1 (en) * 2010-12-10 2012-06-14 Tk Holdings Inc. System for monitoring a vehicle driver
CN103594003A (zh) * 2013-11-13 2014-02-19 安徽三联交通应用技术股份有限公司 一种用于驾驶人的远程监控与异常预警的系统及方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7415126B2 (en) 1992-05-05 2008-08-19 Automotive Technologies International Inc. Occupant sensing system
JPH01158579A (ja) 1987-09-09 1989-06-21 Aisin Seiki Co Ltd 像認識装置
US5689241A (en) 1995-04-24 1997-11-18 Clarke, Sr.; James Russell Sleep detection and driver alert apparatus
JP3316725B2 (ja) 1995-07-06 2002-08-19 三菱電機株式会社 顔画像撮像装置
JP3355076B2 (ja) * 1995-09-14 2002-12-09 三菱電機株式会社 顔画像処理装置
DE19722227A1 (de) * 1997-05-28 1998-12-03 Mannesmann Vdo Ag Verfahren zum Erzeugen eines Warnsignals zum Einschalten der Lichtanlage eines Fahrzeugs und Vorrichtung zur Verwendung bei dem Verfahren
JP3607509B2 (ja) 1998-10-08 2005-01-05 株式会社リコー オートフォーカス装置
JP3651571B2 (ja) 1999-03-31 2005-05-25 株式会社東芝 ドライバ状態検知システム
DE19921488A1 (de) 1999-05-08 2000-11-16 Bosch Gmbh Robert Verfahren und Vorrichtung zur Überwachung des Innenraums und des Umfeldes eines Fahrzeugs
DE19950504A1 (de) * 1999-10-20 2001-05-10 Porsche Ag Verfahren und Vorrichtung zur Steuerung der Lichtvertielung einer Scheinwerferanordnung eines Fahrzeuges
US7777778B2 (en) 2004-10-27 2010-08-17 Delphi Technologies, Inc. Illumination and imaging system and method
US8970372B2 (en) * 2006-09-29 2015-03-03 Hubbell Incorporated Occupancy sensor with dimmer feature and night light and method of lighting control using the same
JP5212927B2 (ja) 2011-01-25 2013-06-19 株式会社デンソー 顔撮影システム
WO2013176265A1 (ja) 2012-05-25 2013-11-28 国立大学法人静岡大学 瞳孔検出方法、角膜反射検出方法、顔姿勢検出方法及び瞳孔追尾方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102030232A (zh) * 2009-09-24 2011-04-27 东芝电梯株式会社 电梯监视装置、电梯监视方法以及电梯远程监视系统
KR100990305B1 (ko) * 2010-05-13 2010-10-26 정성호 영상촬상소자를 직접 연결한 바이너리 cdma 영상 송수신 시스템
US20120150387A1 (en) * 2010-12-10 2012-06-14 Tk Holdings Inc. System for monitoring a vehicle driver
CN103594003A (zh) * 2013-11-13 2014-02-19 安徽三联交通应用技术股份有限公司 一种用于驾驶人的远程监控与异常预警的系统及方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662476A (zh) * 2017-05-25 2020-01-07 日本电气株式会社 信息处理装置、控制方法和程序
US11553829B2 (en) 2017-05-25 2023-01-17 Nec Corporation Information processing apparatus, control method and program
CN107567140A (zh) * 2017-09-14 2018-01-09 崔涛 电动汽车夜间驾驶安全辅助系统
CN107567140B (zh) * 2017-09-14 2019-04-19 上海紫声信息科技有限公司 电动汽车夜间驾驶安全辅助系统

Also Published As

Publication number Publication date
EP3062262A1 (en) 2016-08-31
KR102381140B1 (ko) 2022-03-31
EP3062262B1 (en) 2020-07-01
CN105916262B (zh) 2019-01-04
KR20160103675A (ko) 2016-09-02
US20160248957A1 (en) 2016-08-25
US10015411B2 (en) 2018-07-03

Similar Documents

Publication Publication Date Title
CN105916262A (zh) 数字装置及其驾驶员监控方法
CN104869230B (zh) 移动终端控制方法及装置
EP2991064B1 (en) Method for removing image sticking in display device
CN104731502B (zh) 基于虚拟分区触摸屏的双击识别方法、装置及移动终端
CN103092504B (zh) 移动终端及其控制方法
EP2698973B1 (en) Mobile terminal and controlling method thereof
EP2755370B1 (en) Mobile terminal and controlling method thereof
US9226093B2 (en) Method for generating recipe information in mobile terminal
US20130091443A1 (en) Mobile terminal and controlling method thereof
EP3809349A1 (en) Method of displaying user interface on device, and device
EP2290928A2 (en) Mobile terminal and method for controlling a camera preview image
US20130090101A1 (en) Mobile terminal and controlling method thereof
CN104144260B (zh) 移动终端来电免打扰控制方法及装置
US20160055778A1 (en) Self-diagnosing system and method of self-diagnosing of a display device
CN105511776B (zh) 一种移动终端及其控制方法
CN106488305B (zh) 数字设备及其控制方法
CN105242923B (zh) 数据处理进度的显示控制装置和方法
CN104780451B (zh) 显示装置及其控制方法
US10324595B2 (en) Digital device configured to connect with plurality of operation devices and method of displaying second user interface associated with second operation device in response to dragging of first user interface associated with first operation device in the same
EP2827249A1 (en) Mobile terminal with user-interface for managing backups
CN109005446A (zh) 一种截屏处理方法及装置、电子设备、存储介质
CN106227424A (zh) 画面的显示处理方法及装置
CN109739429A (zh) 屏幕切换处理方法及移动终端终端设备
CN108713346A (zh) 信道监测方法、装置、系统及存储介质
US20190079876A1 (en) Digital device and method for controlling the same

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant