CN105189177B - 用于防止驾驶员分心的方法和移动装置 - Google Patents

用于防止驾驶员分心的方法和移动装置 Download PDF

Info

Publication number
CN105189177B
CN105189177B CN201480011432.0A CN201480011432A CN105189177B CN 105189177 B CN105189177 B CN 105189177B CN 201480011432 A CN201480011432 A CN 201480011432A CN 105189177 B CN105189177 B CN 105189177B
Authority
CN
China
Prior art keywords
mobile device
seat belt
image
slope
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480011432.0A
Other languages
English (en)
Other versions
CN105189177A (zh
Inventor
B·R·琼斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN105189177A publication Critical patent/CN105189177A/zh
Application granted granted Critical
Publication of CN105189177B publication Critical patent/CN105189177B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/027Services making use of location information using location based information parameters using movement velocity, acceleration information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/656Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being a passenger
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/593Recognising seat occupancy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/122Instrument input devices with reconfigurable control functions, e.g. reconfigurable menus
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/195Blocking or enabling display functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/197Blocking or enabling of input functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/566Mobile devices displaying vehicle information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/569Vehicle controlling mobile device functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00Safety belts or body harnesses in vehicles
    • B60R22/48Control systems, alarms, or interlock systems, for the correct application of the belt or harness
    • B60R2022/4883Interlock systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00Safety belts or body harnesses in vehicles
    • B60R22/48Control systems, alarms, or interlock systems, for the correct application of the belt or harness

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Environmental & Geological Engineering (AREA)
  • Telephone Function (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Position Fixing By Use Of Radio Waves (AREA)
  • Image Analysis (AREA)
  • Automation & Control Theory (AREA)

Abstract

一种用于停用移动装置上的至少一个文本应用的处理器实施的方法、计算机可读媒体和移动装置,其包括:处理在车辆中通过所述移动装置捕获(425A)的图像(430)以识别所述图像中的安全带;确定所述安全带(430)相对于水平线的斜率,其中所述水平线是使用在捕获所述图像时关于所述移动装置相对于参考坐标系(435,440)的位置及取向的信息确定的;确定所述移动装置(415)的速度;以及基于所述安全带的斜率和所述移动装置的所述速度停用(450、455)所述移动装置上的至少一个文本应用(410)。

Description

用于防止驾驶员分心的方法和移动装置
相关申请案的交叉参考
本申请案主张2013年3月6日递交的标题为“防止驾驶员分心”的第13/787,741号美国申请案的权益和优先权,所述申请案转让给本受让人并且以引用的方式全文并入本文中。
技术领域
本文中所揭示的标的物涉及防止在车辆运行期间移动装置的使用。
背景技术
驾驶员在驾驶的同时由于使用例如智能电话等移动装置而分心是现今的道路上持续增长的危害。根据一项国家高速公路交通安全管理局(NHTSA)研究,在2009年,电话使用是造成超过5,000条生命的丧生和400,000起交通相关损伤的促成因素。举例来说,驾驶员通常在驾驶的同时发送和/或接收文本消息-实践中广泛已知为“发短信”。为了解决发短信问题,政府已经通过了限制或法律禁止驾驶员在车辆中使用智能电话的法律。另外,已经尝试通过围绕发短信的风险对驾驶员进行教育来改变驾驶员行为。
还已经提出在车辆中使用GPS和/或端口(例如,OBDII端口)来检测在车辆移动期间的电话使用的技术解决方案。还已经提出尝试在车辆处于运动中的同时检测电话活动的其它技术解决方案。然而,当前技术解决方案要么并不区分驾驶员与乘客的电话的使用和/或要么需要车辆改造。因此,它们通常依赖于驾驶员的协作来工作。
一般来说,关于驾驶员发短信的问题的当前技术解决方案遭受的若干缺点包含:a)需要车辆安装传感器或对车辆进行其它改造,或b)无法自动区分驾驶员发短信与乘客发短信,或c)由于解决方案可以轻易地失败而缺乏稳固性,或d)以上各者的组合。
因此,存在对解决驾驶员发短信问题的简单、有效、自动且稳固的解决方案的需要。
发明内容
在一些实施例中,用于停用移动装置上的至少一个文本应用的处理器实施的方法可以包括:处理在车辆中通过移动装置捕获的图像以识别所述图像中的安全带;确定所述安全带相对于水平线的斜率,其中水平线是在捕获图像时相对于参考坐标系使用关于移动装置的位置及取向的信息确定的;确定移动装置的速度;以及至少部分基于安全带的斜率和移动装置的速度停用移动装置上的至少一个文本应用。当移动装置开启或者从休眠状态中被唤醒或者解锁时,可以在移动装置上执行所述方法。在一些实施例中,在停用文本应用时可以显示紧急号码。
在一些实施例中,安全带可以通过检测图像中的至少一个边缘识别,其中至少一个所检测的边缘对应于安全带的两个边缘中的一个。在一些实施例中,安全带相对于水平线的斜率可以通过以下项确定:在图像中产生一对线中的至少一条,所述对中的每条线对应于安全带的所检测的边缘;以及确定所述至少一条线相对于水平线的斜率,其中安全带的斜率是从至少一条线的斜率中确定的。
另外,在一些实施例中,移动装置上的至少一个文本应用可以部分基于对应于移动装置的当前位置的管辖区中的移动装置使用规则、所述管辖区中的车辆的驾驶配置并且基于移动装置的用户是否是车辆的驾驶员的确定而停用。在一些实施例中,移动装置上的至少一个文本应用的停用进一步部分基于来自移动装置上的一或多个传感器的输入。所述移动装置的所述用户是否是驾驶员的确定可以部分基于安全带的斜率。
在一些实施例中,移动装置可以包括摄像头并且所述摄像头可用于捕获车辆中的图像。摄像头的位置及取向可用作移动装置的位置及取向的代表。另外,移动装置可以位于车辆内并且移动装置的速度可以充当车辆的速度的代表。
在一些实施例中,对应于移动装置的当前位置的管辖区可以基于以下各项中的至少一者确定:从服务移动装置的蜂窝网络中的位置服务器(LCS)中接收的信息;或者与所述移动装置通信的卫星定位系统(SPS)。
在一些实施例中,在相对于参考坐标系捕获图像时部分基于来自容纳在所述移动装置中的惯性测量单元(IMU)的测量结果获得关于移动装置的速度以及移动装置的位置及取向的信息,所述惯性测量单元可以包括加速计。
所揭示实施例还涉及包括以下项的移动装置:摄像头,其能够捕获车辆中的图像;惯性测量单元(IMU),其耦合到所述摄像头并且能够确定在捕获图像时移动装置的速度以及所述摄像头相对于参考坐标系的位置及取向;以及处理器,其耦合到所述摄像头和所述IMU。在一些实施例中,所述处理器可以被适配成处理通过所述摄像头捕获的图像以:识别所述图像中的安全带;确定所述安全带相对于水平线的斜率,其中所述水平线是使用通过所述IMU提供的在捕获所述图像时关于所述摄像头相对于参考坐标系的位置及取向的信息确定的;以及至少部分基于所述安全带的斜率和速度停用在所述移动装置上的至少一个文本应用的执行。
在一些实施例中,移动装置可以包括:成像装置,所述成像装置用于捕获车辆中的图像;惯性测量装置,其耦合到所述成像装置,所述惯性测量装置用于确定在捕获图像时所述移动装置的速度以及所述成像装置相对于参考坐标系的位置及取向;以及处理装置,其耦合到所述成像装置和所述惯性测量装置,所述处理装置用于处理由所述摄像头捕获的图像。所述处理装置可以进一步包括:用于识别所述图像中的安全带的装置;用于确定所述安全带相对于水平线的斜率的装置,其中所述水平线是使用通过所述惯性测量装置提供的在捕获所述图像时关于所述成像装置相对于参考坐标系的位置及取向的信息确定的;以及用于至少部分基于所述安全带的斜率和所述速度停用所述移动装置上的至少一个文本应用的执行的装置。
所揭示实施例还涉及包括指令的非暂时性计算机可读媒体,所述指令在由处理器执行时执行方法中的步骤,其中所述步骤包括:处理在车辆中通过移动装置捕获的图像以识别所述图像中的安全带;确定所述安全带相对于水平线的斜率,其中所述水平线是使用在捕获所述图像时关于所述成像装置相对于参考坐标系的位置及取向的信息确定的;以及至少部分基于所述安全带的斜率和所述移动装置的速度停用所述移动装置上的至少一个文本应用。
所揭示的实施例还涉及包含用于执行本文中所揭示的方法的指令的设备、系统和计算机可读媒体。
附图说明
图1A示出了可用于以符合本文中所揭示的实施例的方式防止驾驶员发短信的示范性移动装置。
图1B示出了车辆,其中MS 100可以呈现并且与一或多个无线网络通信。
图2A示出了示范性图像,其在一些情况下可以通过由车辆中的乘客使用的移动装置上的摄像头捕获。
图2B示出了示范性图像,其在一些情况下可以通过由车辆中的驾驶员使用的移动装置上的摄像头捕获。
图2C、2D和2E示出了示范性图像,其在一些情况下可以通过由车辆中的乘客使用的移动装置上的摄像头捕获。
图2F和2G示出示范性图像,其在一些情况下可以通过车辆中的驾驶员使用的移动装置上的摄像头捕获。
图2H示出了车辆中可以捕获图像的各种位置。
图2I示出了表示乘客的安全带的具有X-Z平面中的负斜率的线。
图2J示出了表示驾驶员的安全带的具有X-Z平面中的正斜率的线。
图2K示出了示范性图像,其在一些情况下可以通过由车辆中的乘客使用的移动装置上的摄像头捕获。
图2L示出了示范性图像,其在一些情况下可以通过由车辆中的驾驶员使用的移动装置上的摄像头捕获。
图3A示出了在尝试通过触摸输入使用移动装置上的应用时呈现给驾驶员的示范性UI。
图3B示出了在尝试通过触摸输入使用移动装置上的应用时呈现给乘客的示范性UI。
图4A示出了以符合所揭示的实施例的方式防止驾驶员发短信的示范性方法的流程图。
图4B示出了以符合所揭示的实施例的方式防止驾驶员发短信的另一示范性方法的流程图。
具体实施方式
下文结合附图阐述的具体实施方式意图作为一些示范性非限制性实施例的描述并且如同对本领域的技术人员显而易见的可以实践和设想各种其它实施例。所描述的实施例仅作为实例或本发明的说明而提供。具体实施方式出于提供本发明的透彻理解的目的包含具体细节。然而,对于所属领域的技术人员而言显而易见的是可以实践本发明而无需这些具体细节中的一或多个。在一些例子中,众所周知的结构和装置未以框图的形式示出以便避免混淆本发明的概念。首字母缩写词和其它描述性术语可仅出于便利及清晰的目的而使用,且并非意图限制本发明的范围。
本文中描述的用于移动装置中的技术可以结合各种卫星定位系统(SPS)和/或例如无线局域网(WLAN)、无线个域网(WPAN)、无线广域网(WWAN)等等无线网络实施。
术语“发短信”和“文本输入”在本文档中广泛地使用以意味着用户触摸输入到移动装置或其中运行的应用。触摸输入可以包含手指滑动、轻触屏幕、与移动装置屏幕上的真实或虚拟按钮交互、使用真实或虚拟键盘、使用触控笔或其它指向装置、手或手指移动,和/或其它设计为提供输入到在移动装置上运行的应用的手势。术语“发短信应用”用于意味着可在执行期间利用和/或请求用户文本输入的任何应用。发短信应用包含(但不限于)请求使用者输入的软件应用、操作系统图形用户接口(GUI)或请求用户输入以调用其它应用和/或解锁或唤醒移动装置的“家庭屏幕”。
发短信的冲动产生自仍然保持联系的心理需要并且通常超越了安全考虑。发短信与驾驶竞争认知、视觉和运动功能并且导致驾驶员注意力不集中并且最终造成道路安全下降。当前技术解决方案要么并不区分驾驶员与乘客的电话的使用和/或要么需要车辆改造。举例来说,在常规方法中,用户可以通过他们的状态的屏幕请求确认呈现为车辆中的非驾驶员乘客。犯错误的驾驶员能够通过错误地将他们的状态确认为乘客而规避所述系统。此外,此类屏幕仅增大驾驶员使用移动装置所需的努力由此潜在地增大驾驶员分心的程度。
因此,本文中所揭示了有助于防止车辆操作者发短信的装置、系统和方法。
图1A示出了说明可用于以符合本文中所揭示的实施例的方式防止驾驶员发短信的移动装置或移动台(MS)100的某些示范性特征的示意框图。MS 100也可被称作移动终端、用户设备(UE)、接入终端(AT)、订户台、台(STA)等。术语“移动台”还意图包含可与个人导航装置(PND)通信的装置,例如,通过使用短程无线、红外、有线连接或其它连接。并且,MS 100可为蜂窝式电话、个人数字助理(PDA)、平板计算机、手持式装置、无线装置、笔记本电脑等,它们都能够与服务器无线通信。
移动装置或移动台(MS)100可例如包含:一或多个处理器102、存储器104、收发器110(例如,无线网络接口)、卫星定位系统(SPS)接收器140(如果适用的话)、一或多个摄像头130、可移除媒体驱动器120,并且如果适用的话,加速计132、惯性测量单元(IMU)134和/或传感器136。MS 100中的功能单元可以通过一或多个连接件106(例如,总线、线路、纤维、链路等)以操作方式耦合。在某些实例实施方案中,移动终端120的全部或部分可呈芯片组和/或类似物的形式。
示范性移动装置100可以符合本发明的方式以各种方法修改,例如,通过组合(或省略)所示的一或多个功能块。举例来说,在一些实施例中,IMU 134可以包括加速计132。在其它实施例中,IMU 134可以包括三轴加速计、三轴陀螺仪和/或磁力计的一些组合。另外,在某些实例实施方案中,移动装置100的部分可呈一或多个芯片组和/或类似物的形式。
可以使得SPS接收器140能够接收与一或多个SPS资源(包含例如,卫星和伪卫星)相关联的信号。卫星定位系统(SPS)通常包含发射器系统,其经定位以使得实体能够至少部分基于从发射器接收的信号确定其在地球上或上方的位置。此发射器通常发射标记有设定数目的芯片的重复伪随机噪声(PN)码的信号且可位于基于地面的控制台、用户设备及/或宇宙飞船上。在特定实例中,此类发射器可位于地球轨道卫星运载火箭(SV)上。如本文所使用,SPS可以包含一或多个全球导航卫星系统(例如,伽利略定位系统、GPS、格洛纳斯等)和/或例如卫星系统(例如,QZSS、北斗、IRNSS等)和/或扩增系统等区域性导航卫星系统的任何组合。其它SPS信号可以包含SPS、相似SPS和/或与此类一或多个SPS相关联的其它信号,例如,伪卫星和/或辅助GPS(A-GPS)信号。
收发器110可(例如)包含经启用以通过一或多种类型的无线通信网络发射一或多个信号的发射器112,以及接收通过所述一或多种类型的无线通信网络发射的一或多个信号的接收器114。收发器110可允许基于例如(但不限于)Wi-Fi网络或无线局域网(WLAN)等多种技术与无线网络通信,其可以基于IEEE 802.11族标准。WPAN使用蓝牙、红外或基于IEEE 802.15族标准的其它技术。在一些实施例中,收发器110可促进使用近场通信(NFC)和/或毫微微小区通信。收发器110也可以允许通过例如LTE、WiMAX等无线广域网(WWAN)通信。在一些实施例中,MS 100可使用接入点(AP)接入以上网络中的一或多个,所述接入点可以在车辆外部或者可以容纳在车辆中。
WWAN或蜂窝式网络可以包含码分多址(CDMA)1X网络、高速包数据网络(HRPD)网络、宽带CDMA(WCDMA)网络、全球移动通信系统(GSM)网络、通用包无线电服务(GPRS)网络、长期演进(LTE)网络或一些其它无线网络。GSM、WCDMA和GPRS是通用移动通讯系统(UMTS)的一部分。LTE是演进分组系统(EPS)的一部分。CDMA 1X和HRPD是cdma2000的一部分。GSM、WCDMA、GPRS和LTE描述于来自名称为“第三代合作伙伴计划”(3GPP)的联盟的文档中。CDMA 1X和HRPD描述于来自名称为“第三代合作伙伴计划2”(3GPP2)的联盟的文档中。WLAN可以包含例如,与电气电子工程师学会(IEEE)802.11x族标准兼容的无线网络,其也可被称作Wi-Fi网络。WPAN可以包含蓝牙网络、基于IEEE 802.15x族标准的网络或一些其它类型的网络。
在一个实施例中,MS 100能够与车载处理器或使用蓝牙的车辆导航系统或使用收发器110的WLAN通信。举例来说,MS 100能够使用蓝牙或WLAN连接从容纳在车辆中的处理器和/或导航系统中获得车辆位置信息或其它车辆相关信息。在另一实施例中,MS 110能够在WWAN上与蜂窝网络提供商服务器通信,而同时使用SPS接收器140获得位置信息。
可以使用硬件、固件和软件的组合来实施处理器102。在一些实施例中,处理单元102可以包含驾驶员输入停用模块(DIDM)116,其可处理通过摄像头130捕获的一或多个图像连同来自加速计132、IMU 134、传感器136、收发器110和/或SPS接收器140中的一或多个的输入,以防止或减少驾驶员发短信。举例来说,在一个实施例中,驾驶员输入停用模块116可根据所揭示的实施例处理通过摄像头130捕获的图像连同从加速计132和/或IMU 134接收的同时期的输入以防止驾驶员发短信。在另一实施例中,基于来自SPS接收器140的输入的例如位置、速度等位置相关信息还可以由DIDM 116处理。本文中使用的术语速度指的是车辆在一段时间周期中行进的距离而无需考虑行进方向。在一些实施例中,驾驶员输入停用模块116可请求和/或报告无线网络信号的接收信号强度指示符(RSSI)测量,例如,来自车辆中的接入点(AP)的蓝牙信号,并且可以使用测量结果结合通过摄像头130捕获的图像以确定和/或验证车辆内MS 100的位置。
处理器102还能够直接地或结合图1中所示的一或多个其它功能块处理其它信息。举例来说,处理器102可以处理和组合来自加速计132、IMU 134、传感器136和/或SPS接收器的原始测量结果以推导额外信息。举例来说,处理器102能够基于来自SPS接收器140和/或IMU 134的输入确定车辆位置和/或速度。在一些实施例中,处理器102可以表示一或多个电路,所述电路是可配置的以通过符合所揭示的实施例的方式执行与驾驶员输入的停用相关的计算程序或过程的至少一部分。
传感器136可以包含一或多个各种类型的传感器。在一些实施例中,处理器102和DIDM 116可经配置以接纳和处理来自可在MS 100上供使用的传感器的输入。传感器136能够检测和测量RF能量(例如,RSSI)和/或执行测距以检测MS 100的位置和/或运动。其它传感器可以包含环境光传感器,所述环境光传感器可以用于测量环境光并且调节摄像头130的设置。在一些实施例中,可以进一步处理来自传感器136的输入以确定可以输入到驾驶员输入停用模块116的多种信息,所述模块随后使用所述信息以确定是否停用发短信。在一些实施例中,传感器136可以包含声学传感器,例如,麦克风和/或扬声器。在一个实施例中,可以处理来自声学传感器的输入并且所述输入用于确定车辆中MS 100的位置。举例来说,来自声学传感器的输入可以用于环境噪声分类,以针对自身位置和/或针对语音或机器噪声识别确定回声/混响,并且可以通过处理器102处理所述输入以确定车辆内MS的可能的位置。作为另一实例,可以处理来自加速计132和/或IMU 136的输入以确定相对运动、速度、距离和/或装置取向。
在一些实施例中,摄像头130可以包含前置摄像头和后置摄像头并且还可以并入CMOS传感器以用于图像识别、运动和凝视检测。在装置的正常操作期间前置摄像头130可以面向用户,而后置摄像头130可以在装置的正常操作期间背对用户。在一些实施例中,DIDM 116可以接收通过前置摄像头和后置摄像头捕获的图像并且可以处理一或多个所捕获的图像以确定是否停用MS 100上的发短信应用。在另一实施例中,摄像头130可以包含深度或距离传感器,其可以针对所捕获的图像中的每个像素提供深度或距离相关的信息。来自深度传感器的输入可以在确定是否停用MS 100上的发短信应用中由DIDM 116使用。在一些实施例中,在分析所捕获的图像中摄像头的焦距和其它参数还可以由MS 100上的发短信应用使用。
取决于应用,可由各种装置来实施本文中所描述的方法。举例来说,这些方法可用硬件、固件、软件或其任何组合来实施。对于硬件实施方案,处理器102可实施于一或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器、嵌人式处理器核心、电子装置、经设计以执行本文中所描述功能的其它电子单元,或其组合内。
对于固件和/或软体实施方案,可使用执行本文中所描述的功能的程序、功能等等来实施所述方法。任何有形地体现指令的非暂时性机器可读媒体可以用于实施本文中描述的方法。非暂时性计算机可读媒体可以包含物理计算机存储媒体。存储媒体可以是可以由计算机访问的任何可供使用的媒体。在一个实施例中,关于驾驶员输入停用的软件代码可以存储于非暂时性计算机可读媒体中并且使用可移除媒体驱动器120读取并且通过至少一个处理器102执行。举例来说,本文中所呈现的方法和/或设备可以整体或部分采用可以包含程序代码的计算机可读媒体的形式从而以符合所揭示的实施例的方式支持驾驶员输入停用。
非暂时性计算机可读媒体可以包含多种物理计算机存储媒体。借助于实例而非限制,此类非暂时性计算机可读媒体可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置,磁盘存储装置或其它磁性存储装置,或任何其它可用于存储指令或数据结构的形式的所需程序代码且可由计算机存取的媒体;如本文所使用,磁盘和光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD),软盘和蓝光光盘,其中磁盘通常以磁性方式再现数据,而光盘用激光以光学方式再现数据。上述各项的组合也应包含在计算机可读媒体的范围内。在一些实施例中,计算机可读媒体和/或存储器104可以存储用于DIDM 116的程序代码和数据。举例来说,包含以下各项的管辖区相关信息可以存储于计算机可读媒体和/或存储器104上的数据库中:在使用中的当前安全带标准;针对移动装置运行的速度阈值(如果存在的话);车辆驾驶配置,其涉及管辖区是使用左手侧驾驶还是右手侧驾驶等。
存储器104可以在处理器102内部和/或处理器102外部实施。如本文中所使用,术语“存储器”是指任何类型的长期、短期、易失性、非易失性或其它存储器,且不应限于任何特定类型的存储器或任何特定数目的存储器或存储存储器的媒体的类型。一般来说,存储器104可表示任何数据存储机构。存储器104可以包含(例如)主存储器和/或辅助存储器。主存储器可包含(例如)随机存取存储器、只读存储器等。虽然在图1中说明为与处理器102分离,但应理解,主存储器的全部或部分可提供于处理器102内或另外与处理器102处于相同位置/与处理器102耦合。
辅助存储器可包含(例如)与主存储器相同或类似类型的存储器和/或一或多个数据存储装置或系统,例如,闪存/USB存储器驱动器、存储卡驱动器、磁盘驱动器、光学光盘驱动器、磁带驱动器、固态存储器驱动器等。在某些实施方案中,辅助存储器可以是以可操作方式接受的或以其它方式可经配置以耦合到可移除媒体驱动器120中的非暂时性计算机可读媒体。在一些实施例中,非暂时性计算机可读媒体可以形成存储器104的一部分。
除了存储在计算机可读媒体上之外,还可将指令和/或数据提供为包含于通信设备中的传输媒体上的信号。举例来说,收发器可以接收指示指令和数据的信号。指令和数据可以使得一或多个处理器实施在发明内容中概述的功能。也就是说,所述设备包含具有指示执行所揭示的功能的信息的信号的传输媒体。
图1B示出了车辆,其中MS 100可以呈现并且与一或多个无线网络通信。在图1B中,虽然MS 100在车辆内,但是出于描述性目的MS 100已经被放大并且示出为在车辆外部。MS 100可以通过接入点122-1和122-2与SV 180和/或无线网络125通信。来自SV 180的SPS信号,例如,GPS信号,可用于通过MS 100推导位置和速度相关信息。
在一些实施例中,当GPS/A-GPS信号是不可供使用的时,基于网络的定位方法可用于估计MS 100的位置和速度,其可以充当车辆的速度的代表。基于网络的定位方法可以包含使用RSSI或往返时间(RTT)测量结果的三边测量、到达角度(AoA)和其它技术。在一些情况下,MS 110的位置可以使用IMU 130接收的信息得到进一步优化。
在一些实施例中,使用来自SPS和/或GPS/A-GPS的信息、基于网络的定位方法和/或基于IMU的测量结果的一些组合获得的最近的位置固定可用于估计位置MS 100。在一些实施例中,MS 100可以在无线网络125上从服务器150中接收位置辅助信息并且可以使用所述位置辅助信息来确定其位置。一般来说,网络125可以包含各种额外实体(未示出),例如,位置服务器(LCS)、LCS客户端、其它服务器等。
在一些实施例中,MS 100或DIDM 116还可以从服务器150下载、请求、更新和/或接收管辖区相关信息,所述信息可以本地存储在存储器104中。管辖区相关信息可以涉及在该管辖区中使用的安全带标准、移动装置运行的速度阈值(如果存在的话)和/或车辆驾驶配置,其可以规定所述管辖区是使用左手侧驾驶还是右手侧驾驶。在一些实施例中,MS 100还可以确定适当的管辖区相关信息,方法是基于可移除媒体驱动器120中的计算机可读媒体上的数据库中的其当前位置查找管辖区相关信息。在一些实施例中,MS 100中本地数据库上的信息可以通过服务器150周期性地更新。
图2A示出了示范性图像200,其可以是通过由车辆中的乘客使用的移动装置100上的摄像头130捕获的若干图像中的一个。图2B示出了示范性图像250,其可以是通过由车辆中的驾驶员使用的移动装置100上的摄像头130捕获的若干图像中的一个。举例来说,当移动装置100的用户是乘客时,图像200可以由面向用户的摄像头130(例如,前置摄像头130)捕获;而当移动装置的用户是驾驶员时,图像250可以由面向用户的摄像头130捕获。应注意如上文所述图像200和250可以表示其中车辆配备有左手侧驾驶配置(例如,美国)的管辖区,在左手侧驾驶配置驾驶杆定位到车辆的左侧。
然而,本文中所揭示的方法和技术还可以通过对管辖区的适当的修改而应用,在所述管辖区中车辆使右手侧驾驶配置(例如,英国)并且驾驶杆位于车辆的右侧。在右手侧驾驶车辆中,图像200将向用户呈现谁是驾驶员,而图像250将向用户呈现谁是乘客。出于以下讨论的目的,除非另外指出否则假定左手侧驾驶。
在一些实施例中,在车辆运行期间停用驾驶员输入的算法可以使用图像(例如图像200或250中的一个)作为输入来确定移动装置100的用户是乘客还是驾驶员。在一些实施例中,所述算法可以通过驾驶员输入停用模块116整体或部分实施。在一些实施例中,图像200或图像250可以是通过摄像头130捕获的一系列图像中的一个。
图2C、2D和2E示出图像202、204和206,其相应地是乘客210通过摄像头130捕获的其它图像。如图2C、2D和2E中示出,摄像头130可以捕获图像200的某一部分或图像250的某一部分。举例来说,取决于摄像头130的取向,图像200、202、204和206可以包括乘客210的图像的某一部分,并且图像可以处于各种角取向。
图2F和2G示出图像207和209,其相应地是驾驶员260通过摄像头130捕获的其它图像。如图2C、2D和2E中所示,摄像头130可以捕获图像250的一些部分。举例来说,取决于摄像头130的取向,图像250、207和209可以包括乘客260的图像的某一部分,并且图像可以处于各种角取向。
图2H示出了车辆中可以捕获图像的各种位置。如图2H中示出,图像200和/或250可以在车辆中的各种位置处被捕获。位置221和223是其中驾驶员可以尝试使用MS 100的位置的实例,而位置227和229是其中乘客可以尝试使用MS 100的位置的实例。
在一些实施例中,用于停用驾驶员发短信的算法可以使用后置摄像头捕获图像同时通过前置摄像头捕获图像。在一些实施例中,通过后置摄像头捕获的图像可以经处理以确定其它不同特征的存在,例如,挡风玻璃、方向盘的部分、仪表盘、贮物箱和/或仪表板。在一些实施例中,停用用户访问发短信应用的决策可以部分基于通过后置摄像头捕获的处理图像的结果。
在一些实施例中,在由用户拿着或放置/安装在仪表盘上时,例如,处于位置225处或车辆中的另一位置时,当用户尝试使用移动装置100时图像200、202、204、206、207、209和/或图像250可以被捕获。
在一些实施例中,图像的序列可以预定间隔在唤醒或启动过程期间或在用户尝试解锁装置以进行使用期间通过摄像头130捕获并且来自所述序列的一或多个图像可以经选择以用于处理。在一些实施例中,预定间隔可以通过DIDM 116设置。举例来说,当驾驶员260尝试唤醒移动装置100时图像250可以是在移动装置100唤醒序列期间通过摄像头130捕获的图像的序列中的一个。
参考图2A,图像200示出了乘客210佩戴座椅约束或安全带230,而图像250示出了驾驶员260佩戴安全带240。术语安全带用于意味着任何车辆乘员约束机构,例如(但不限于)肩部安全带、三点式安全带、座椅安装式安全带、自动或半自动安全带。如对于所属领域的一般技术人员将是显而易见的,本文中所揭示的技术和方法可以适应于并且适用于各种限制机构。
通常,座椅安全带230和270的宽度、乘坐者的躯体大小以及锚定点235(例如,示范性锚定点235-1和235-2)的位置是标准化的。举例来说,第210和571.210号美国联邦客车安全管理局(FMCSA)标准确立了针对安全带组件锚固的要求以确保它们的适当位置以用于有效的乘坐者约束并且减少它们故障的可能性。因此,可以使关于安全带厚度和锚固点的信息可用于在车辆运行期间停用驾驶员输入的应用,示范性驾驶员输入停用模块116。在一些实施例中,信息可以存储于MS 100和/或服务器150上的数据库中。
在一些实施例中,通过摄像头130捕获的图像200可以经处理以确定线240,所述线可用于表示安全带230。类似地,图像250可以经处理以确定和提取线280,所述线可以用于表示安全带270。各种众所周知的计算机视觉、图像处理和特征提取算法,例如,霍夫变换、Canny边缘检测算法及其变体、二阶算法,以及其它边缘和形状检测和/或形状识别算法可用于相应地从图像200和250中确定线240或线280中的任一者。边缘检测器使用数学技术来识别数字图像中的线。可以对其中图像具有不连续性的点的集合进行分组以形成线。
在一些实施例中,以上标准(例如,FMCSA标准)可用于设置用于边缘检测算法的参数,所述参数用于检测数字图像中的安全带。在一些实施例中,例如在其中图像旋转、偏斜和/或处于角取向的实例中,如图2D和2E中的图像204和206相应地示出,图像可以在处理之前旋转和或对齐。在一些实施例中,可以部分使用来自IMU 134或加速计132的输入以在图像的进一步处理之前校正通过摄像头130捕获的图像的取向。举例来说,由MS 100的用户佩戴的安全带230或270的边缘可以通过边缘检测算法来检测,其可以是DIDM 116的一部分并且可用于推导线240或280。
在一些实施例中,停用驾驶员发短信的方法可以基于所捕获的图像确定表示安全带的线的斜率。举例来说,使用线240来使用图像200(其表示乘客210的图像),它可以被确定为安全带230在图像中从左到右向下倾斜。可以基于图像250(其表示驾驶员260的图像)和线280作出安全带270在图像中从右到左向下倾斜的类似确定。因此,在一些实施例中,如果对应于通过摄像头130捕获的图像中的安全带的线从左到右向下倾斜,那么停用驾驶员发短信的程序可以将用户识别为乘客。相反地,如果对应于通过摄像头130捕获的图像中的安全带的线从右到左向下倾斜,那么停用驾驶员发短信的程序可以将用户识别为驾驶员。
在一个实施例中,可以基于在重力的方向上的Z轴使用彼此正交的X、Y和Z轴构造示范性参考坐标系。因此,可以参考Z轴选择可以跨越车辆横向取向的正交的X轴和可以从车辆的前部到后部纵向取向的正交的Y轴。上文所述的参考坐标系是示范性的并且仅出于描述性目的。一般来说,各种其它参考坐标系可以通过本文中所揭示的实施例的适当的修改而使用,如对于所属领域的一般技术人员将是显而易见的。
如图2I中所示,在X-Z平面中,表示乘客210的安全带230的线240具有负斜率。如图2J中所示,表示驾驶员260的安全带240的线280具有正斜率。在X-Z平面中线(例如,线240和280)的斜率可以通过Δz/Δy给出,其中Δz表示针对沿着线的两个点的y的值的改变Δy的z的值的改变。因此,对于两个点(x1,z1)和(x2,z2),斜率可以通过给出。在图2I和2J中,示范性点(x1,z1)和(x2,z2)是针对线240和280示出的。线240和280的斜率相应地表示相对于参考坐标系安全带230和270的取向。在一些实施例中,可以部分使用线240的斜率或线280的斜率以确定移动装置100的用户是否是车辆的驾驶员或乘客。
在一些实施例中,在捕获图像时来自加速计132和/或IMU 134的输入可用于相对于人工局部水平线注册图像200或图像250以便确定线240或线280的斜率。人工水平线指示在MS运行期间水平线的位置。水平线可以提供摄像头或移动装置相对于所述轴的取向。如果移动装置100的形状因子足够小,那么摄像头的位置及取向可以被移动装置的位置及取向的代表替代或用作移动装置的位置及取向的代表(或反之亦然)。
在一些实施例中,线240或线280的斜率可以相对于水平线确定。举例来说,在一个实施例中,在图2I和2J中水平线可用作参考坐标系中的X轴。在一些实施例中,在相对于参考坐标系捕获图像时加速计132和/或IMU 134测量结果可用于获得移动电话100和/或摄像头130的位置及取向。举例来说,可以提供在捕获图像时相对于地面和/或重力的移动电话100或摄像头130的一或多个轴的取向。作为一个实例,加速计可以提供在捕获图像时移动电话100相对于Z轴(重力)的倾斜。在一些实施例中,在捕获图像时来自加速计132和/或IMU 134的输入可用于确定相对于参考坐标系的图像取向。
在一些实施例中,各种众所周知的计算机视觉和图像处理算法可用于确定水平线和相对于水平线的线240或线280的斜率。在图2A-2G中示出了对应于安全带的边缘的线240和280。另外,在一些实施例中,在处理图像之前图像可以基于来自加速计132和/或IMU 134的输入旋转和/或与参考坐标系对齐以识别和或确定线240或线280的斜率。
在一些实施例中,标准可用于告知或设置用于对数字图像操作的边缘检测算法的参数。举例来说,基于标准和来自传感器的输入,在所捕获图像已经旋转和去除偏斜之后可以相对于人工局部水平线的角程识别线。举例来说,具有在范围θL≤θi≤θM中的角度的边缘可以被识别和/或被认为是表示安全带的边缘,其中θL和θM是规定用于相对于水平线的边缘ⅰ的角度θi的上限和下限阈值的角度。在一些实施例中,一或多个所检测的边缘可以接合以获得线240和/或280。在一些实施例中,角程可以增大所检测的边缘对应于安全带的边缘的概率。例如最小边缘长度等各种其它技术可用于识别所检测的边缘中的一者作为安全带的边缘。
在一些实施例中,线240或280的斜率可用于确定用户是否是驾驶员或乘客。在用户是驾驶员的情况下,来自一或多个额外传感器的输入可以由在车辆运行期间停用驾驶员发短信或输入应用使用以确定驾驶员是否可以被锁定而离开一或多个应用。举例来说,车辆的速度和位置可以是应用的参数以确定在车辆运行期间是否停用驾驶员发短信。在一个实施例中,如果图像识别MS 100的用户为驾驶员,那么基于来自MS 100中的其它传感器或功能单元的输入,用户可以被拒绝访问发短信应用。举例来说,如果来自SPS接收器140的输入指示车辆以高于阈值速度行进,那么DIDM 116可以拒绝被识别为驾驶员的用户的发短信应用访问。在DIDM 116检测用户是乘客的情况下,可以允许乘客访问所请求的发短信应用。举例来说,可以允许乘客210发送文本消息
在一个实施例中,在车辆运行期间如果车辆的速度超过一定速度阈值,那么停用驾驶员输入的应用可以减少驾驶员260使用发短信应用。在另一实施例中,在车辆运行期间如果驾驶员的位置被确定为在允许移动装置的使用和发短信应用的管辖区中,那么在车辆运行期间停用驾驶员输入的应用可以允许驾驶员260使用发短信应用,所述驾驶员的位置可以使用来自SPS接收器140的测量结果、基于RSSI或RTT测量结果的三边测量和/或IMU 134的一些组合确定。在一些实施例中,在车辆运行期间停用驾驶员输入的应用可以查询驻留在存储器104中或存储于移动装置100上的可移除媒体120中或从网络服务器150接收的数据库以确定驾驶员260是否可以访问一或多个发短信应用。
图2K示出了示范性图像290,所述图像可以通过车辆中的乘客使用的移动装置100上的摄像头130捕获。图2L示出了示范性图像292,所述图像可以通过车辆中的驾驶员使用的移动装置100上的摄像头130捕获。举例来说,当移动装置100的用户是乘客时,图像290可以由面向用户的摄像头130(例如,前置摄像头130)捕获;而当移动装置的用户是驾驶员时,图像292可以通过面向用户的摄像头130捕获。在一些实施例中,DIDM116或停用驾驶员发短信的另一应用可以处理图像292和/或294以相应地识别安全带230和270的第一边缘。在图2K和2L中,图像292中的第一线244和图像294中的线284相应地表示安全带230和270的第一检测边缘。在一些实施例中,安全带230和270的第二边缘还可以如相应地通过第二线242和282所示得到检测。在一些实施例中,安全带标准可用于告知或设置用于对数字图像操作的边缘检测算法的参数。举例来说,基于所述标准,在所捕获图像已经旋转和去除偏斜之后可以相对于人工局部水平线的角程识别线。
关于图2K,在一些实施例中,线244和242的斜率可以相对于水平线确定。如果线244和242在图像292中并不相交并且两条线的斜率都是负的,那么所述线可以被看作表示安全带230。在一些实施例中,线244与242之间的接近性阈值或距离还可以基于在管辖区中使用的安全带标准(例如,第210和571.210号FMCSA标准)和在获取图像292时与摄像头130相关联的参数以及来自其它传感器的输入建立。在图2L中,对应于安全带270的第二边缘的第二线282可以在图像294中得到类似地检测。在一些实施例中,安全带230和/或270的第二边缘的检测可以是可选的。举例来说,第二线242和/或282可以相应地从图像292和294中提取,因为证实了第一边缘244和283对应于安全带的实际边缘。
图3A示出了在尝试通过触摸输入使用移动装置100上的应用时呈现给驾驶员的示范性UI。如在图3A中所示,在一些实施例中,如果驾驶员尝试使用移动电话100上的发短信应用,那么在车辆运行期间停用驾驶员输入的应用可以将屏幕310呈现给驾驶员,这可以将使用限制为紧急呼叫。举例来说,驾驶员能够呼叫“911”,但是可以被锁定离开其它应用。
图3B示出了在尝试使用示范性移动装置100上的发短信应用之后呈现给乘客的示范性UI。如图3B中所示,乘客可以通过虚拟键盘330具有对发短信应用320的完整访问。
图4A示出了以符合所揭示的实施例的方式防止驾驶员发短信的示范性方法400的流程图。在一些实施例中,可以通过驾驶员输入停用模块116实施方法400中的一些或全部。在一些实施例中,方法400可以通过移动装置100上的处理器102实施。
在步骤405中,用户可以开启或唤醒移动装置,例如,示范性移动装置100。接下来,在步骤410中,所述算法可以确定发短信应用是否被激活。如果发短信应用未被激活(在步骤410中为“否”),那么,在步骤460中,用于非发短信应用的正常应用UI可以显示给用户。举例来说,MS 100可以允许接收语音命令和/或播放音频的应用被激活。
如果文本输入应用被激活(在步骤410中为“是”),那么在步骤415中,可以获得车辆输入速度。术语速度用于指车辆在一段时间周期中行进的距离而无需考虑行进方向。举例来说,速度可以通过处理器102和/或SPS接收器140使用GPS读数、IMU 134和/或使用来自传感器136中的一个的输入确定。因为移动装置位于车辆内,所以用于车辆的速度和位置信息可以基于针对移动装置确定的位置和速度信息。举例来说,移动装置的位置和速度可相应地用作车辆的位置和速度的代表。
在步骤420中,可以使用所述算法比较所确定的速度与阈值速度T(T≥0)。如果车辆速度并不大于T,那么在步骤460中,正常应用UI可以显示给用户。
在一些实施例中,如果车辆速度大于T,那么在一些实施例中,可以同时执行步骤425和425A。在步骤425中,可以从加速计132和/或IMU 134中获得数据,并且同时在步骤425A中,可以通过摄像头或CMOS传感器捕获一或多个图像。在一些实施例中,图像可以自动捕获且无需用户输入。举例来说,图像250可以在同时从加速计132和IMU134获得读数的同时通过摄像头130捕获。在一些实施例中,当摄像头130被唤醒、解锁、开启时,或者当用户尝试访问MS 100上的发短信应用时,摄像头130可以捕获一系列图像。另外,读数可以与来自加速计132、IMU 134和/或MS 100上的其它传感器的图像的系列的捕获同时获得。在一些实施例中,加速计132和/或IMU 134的读数可以通过由摄像头130图像捕获而自动触发。一般来说,加速计和IMU读数可以基于所需精度、设计考量和摄像头130、加速计132和/或IMU 134的规范要么同时获得要么在捕获的每个图像的较小时间窗口内依次获得。
在一些实施例中,在步骤425和425A中还可以要么同时要么在图像捕获的较小时间窗口内从一或多个其它传感器或功能单元接收输入。举例来说,通过后置摄像头捕获的一或多个图像还可以在步骤425A中接收。作为另一实例,包含与车辆上车载的蓝牙或无线测量结果相关的任何测量结果的来自音频传感器、深度传感器、环境光传感器的感官输入、RSSI或RTT测量值、可以通过MS 100无线地获得的车辆仪器测量结果等可以结合通过摄像头130捕获的图像接收。
在步骤430中,所捕获图像中的一或多个可以经处理以确定安全带的相对取向。举例来说,在一些实施例中,加速计132和IMU 134输入可用于相对于水平线注册图像,安全带的边缘可以在一或多个图像中得到检测,并且表示安全带的线(例如,线240或280中的一个)的斜率可以相对于水平线确定。在一些实施例中,可以识别一对线,例如,相应地对应于安全带230和270的两个边缘的线244和242,或者282和284,并且可以确定所述线相对于水平线的斜率。在一些实施例中,安全带标准可用于告知或设置用于数字图像上的边缘检测的参数。举例来说,基于所述标准,可以在相对于局部水平线的角程中识别边缘。在一些实施例中,通过摄像头130捕获的图像的系列可以得到处理直至可以在图像中确定存在或不存在安全带。在一些实施例中,在已经对图像进行处理之后,可以基于与所述算法相关联的参数处理额外图像。举例来说,在一个实施例中,如果在图像中尚未识别安全带,那么额外图像可以经处理以确定安全带的边缘。在另一实施例中,一旦已经在图像中识别安全带,那么额外图像可以经处理以出于证实和/或出于其它原因识别额外图像中安全带的边缘。
在步骤435中,可以关于移动装置100的当前位置寻求额外信息。举例来说,可以查询位置服务器(LCS)数据库以确定移动装置100的位置。
接下来,在步骤440中,可以查询用于当前位置的规则。在一些实施例中,关于移动装置的使用的相关规则可以是在存储于移动装置100上的数据库中和/或在存储于远程服务器上的数据库中可供使用的,所述远程服务器例如可通过移动装置100无线地访问的服务器150。
在一些实施例中,确定用户是否是驾驶员还是乘客可以部分基于移动装置目前所位于的国家。举例来说,线240或线280的斜率的解译可以取决于移动装置目前所位于的国家是否遵循右手侧驾驶或左手侧驾驶。在一些实施例中,当移动装置100通过蜂窝网络注册时移动装置100可以接收关于它目前所位于的国家的信息并且可以在存储器104中存储所述信息。在一些实施例中,如果未检测到安全带,例如,在驾驶员尝试抵御传感器时,发短信应用可以停用但是移动装置可以包含佩戴安全带的额外听觉警告。
在步骤445中,表示安全带的线的斜率可用于确定用户是否是车辆中的驾驶员还是乘客。在步骤445中,如果用户不是驾驶员(在步骤445中是“否”),那么在步骤460中,可以显示与用户所需的文本应用相关联的常见屏幕或图形用户界面(GUI)。在一些实施例中,如果用户是驾驶员(在步骤445中是“是”),那么在步骤450中,关于当前位置的规则的额外信息可用于确定发短信应用的使用是否是允许的。
在一些实施例中,在步骤450中,如果方法400确定位置(移动装置目前所位于的管辖区)的规则允许在车辆运行期间通过驾驶员的移动装置的使用和文本应用(在步骤450中是“是”),那么在步骤460中,显示与用户所需的文本应用相关联的常见屏幕或GUI。另一方面如果算法确定在车辆运行期间通过驾驶员的文本应用的使用是不允许的(在步骤450中是“否”),那么在步骤455中,可以向用户呈现到紧急号码的移动装置的受限使用的屏幕或界面。举例来说,可以向用户呈现屏幕310,其可以将使用限制于紧急呼叫或一或多个预定号码。
在一些实施例中,来自额外传感器(例如,示范性传感器136)或后置摄像头的输入可以由在车辆运行期间停用或允许驾驶员发短信的应用使用。举例来说,来自加速计和话筒的振动和环境噪声分析可用于覆写安全带检测器以在速度高于阈值时允许在飞机和火车上合法的发短信。作为另一实例通过移动装置100上的后置摄像头获取的图像可用于区分车辆中的驾驶员与后座乘客。在一些实施例中,环境噪声传感器或振动传感器可用于区分驾驶员与其它乘客并且可以提供在车辆运行期间到停用驾驶员发短信的应用的证实输入。在另一实施例中,通过移动装置100上的扬声器发射的且通过车辆扬声器系统中继的声音的分析可用于证实用户的位置。在一些实施例中,测量结果结合使用车辆内的蓝牙或其它无线装置的通信可用于提供在车辆运行期间停用驾驶员发短信的应用的证实。在一些实施例中,通过一或多个深度传感器提供的深度信息可用于确定图像中一或多个对象与摄像头的距离并且所确定的距离可用于区分驾驶员与其它乘客并且可以提供证实输入到在车辆运行期间停用驾驶员发短信的应用。举例来说,仪表盘、仪表板、方向盘或一或多个乘坐者相对于摄像头的距离可以使用深度传感器提供的信息确定,并且所确定的距离可用作到在车辆运行期间停用驾驶员发短信的应用的输入。一般来说在车辆内部获取的图像的各种其它独特元素和/或通过传感器136捕获的其它特征/测量结果可用于证实通过DIDM 116的检测。
一般来说,在车辆运行期间停用驾驶员发短信的应用可以使用来自多种额外传感器的信息并且可以基于当前环境对来自额外传感器的输入进行加权,通过可靠性和其它试探法以及因素以确定用户是否是乘客还是驾驶员并且确定是否允许在车辆运行期间文本应用的使用。
在一些实施例中,在方法400中的步骤中叙述的功能可以符合本文中所揭示的实施例的方式重新布置、组合或者改变。举例来说,图4B示出了以符合所揭示的实施例的方式防止驾驶员发短信的替代方法470的流程图。在图4B中,标记有与图4A中的块相同标识符的块执行类似功能。在一些实施例中,方法470中的一些或全部可以通过DIDM116和/或通过移动装置100上的处理器102实施。
在步骤405中,用户可以开启、唤醒、解锁和/或尝试使用移动装置,例如,示范性移动装置100。接下来,在步骤410中,所述方法可以确定发短信应用是否被激活。如果发短信应用未被激活(在步骤410中为“否”),那么,在步骤460中,用于非发短信应用的正常应用UI可以显示给用户。举例来说,MS 100可以允许接收语音命令和/或播放音频的应用被激活。
如果文本输入应用被激活(在步骤410中为“是”),那么在步骤415中,可以获得车辆输入速度。举例来说,移动装置的位置和速度可相应地用作车辆的位置和速度的代表。
在步骤420中,可以使用所述方法比较所确定的速度与阈值速度T(T≥0)。如果车辆速度并不大于T,那么在步骤460中,正常应用UI可以显示给用户。
在一些实施例中,如果车辆速度大于T,那么在一些实施例中,可以同时执行步骤425和425A。在步骤425中,可以从加速计132和/或IMU 134中获得数据,并且同时在步骤425A中,可以通过摄像头或CMOS传感器自动捕获一或多个图像。在一些实施例中,在步骤425和425A中还可以要么同时要么在图像捕获的较小时间窗口内从一或多个其它传感器或功能单元接收输入。举例来说,通过后置摄像头捕获的一或多个图像还可以在步骤425A中接收。作为另一实例,包含与车辆上车载的蓝牙或无线测量结果相关的任何测量结果的来自音频传感器、深度传感器、环境光传感器的感官输入、RSSI或RTT测量值、可以通过MS 100无线地获得的车辆仪器测量结果等可以结合通过摄像头130捕获的图像接收。
在步骤430中,所捕获图像中的一或多个可以经处理以确定安全带的相对取向。在一些实施例中,安全带的取向可以关于参考坐标系确定。举例来说,在一些实施例中,加速计132和IMU 134输入可用于相对于水平线注册图像,安全带的边缘可以在一或多个图像中得到检测,并且表示安全带的线(例如,线240或280中的一个)的斜率可以相对于水平线确定。在一些实施例中,可以识别一对线,例如,相应地对应于安全带230和270的两个边缘的线244和242,或者282和284,并且可以确定所述线相对于水平线的斜率。在一些实施例中,安全带标准可用于告知或设置用于数字图像上的边缘检测的参数。
在步骤445中,表示安全带的线的斜率可用于确定用户是否是车辆中的驾驶员还是乘客。在步骤445中,如果用户不是驾驶员(在步骤445中是“否”),那么在步骤460中,可以显示与用户所需的文本应用相关联的常见屏幕或图形用户界面(GUI)。在一些实施例中,如果用户是驾驶员(在步骤445中是“是”),那么在步骤455中,可以向用户呈现到紧急和/或选择的预定号码的移动装置的受限使用的屏幕或界面。在一些实施例中,可以假定默认速度阈值和驾驶配置并且可以基于默认速度阈值和驾驶配置确定用户是否是驾驶员。
在一些实施例中,在通过网络注册之后,关于位置特定的管辖区规则的信息(例如,驾驶配置)可以对DIDM 116是可用的并且预编程到MS 100中,和/或下载到MS 100中。所述信息可用于基于对应于安全带的线的斜率确定用户是否是驾驶员。在位置信息不可供使用的一些实施例中,可以基于其中信息是可供使用的最后一个已知/最近位置假定速度阈值和默认驾驶配置。在一些实施例中,MS上的“时区”或其它配置设置或网络“归属位置”可用于推断MS 100的位置并且基于所推断的位置获得驾驶配置和速度阈值。
尽管出于指导性目的关于描绘具体实施例的附图来描述本发明,但本发明并不限于所述具体实施例。在不脱离本发明的范围的情况下可作出各种调适及修改。因此,不应将所附权利要求书的精神和范围限于前述描述。

Claims (45)

1.一种处理器实施的方法,其包括:
处理在车辆中通过移动装置捕获的图像以识别所述图像中的安全带;
确定所述安全带相对于水平线的斜率,其中所述水平线是使用在捕获所述图像时关于所述移动装置相对于参考坐标系的位置及取向的信息确定的;
确定所述移动装置的速度;以及
至少部分基于所述安全带的所述斜率和所述移动装置的所述速度以及以下的一者或多者而停用所述移动装置上的至少一个文本应用:对应于所述移动装置的当前位置的管辖区中的移动装置使用规则、所述管辖区中的车辆的驾驶配置、或者所述移动装置的用户是否是所述车辆的驾驶员的确定。
2.根据权利要求1所述的处理器实施的方法,其中处理所述所捕获图像以识别所述安全带进一步包括检测所述图像中的至少一个边缘,其中所述至少一个所检测的边缘对应于所述安全带的两个边缘中的一个。
3.根据权利要求1所述的处理器实施的方法,其中相对于所述水平线确定所述安全带的所述斜率进一步包括:
在所述图像中产生一对线中的至少一条,所述对中的每条线对应于所述安全带的所检测的边缘;以及
确定所述至少一条线相对于所述水平线的斜率,其中所述安全带的所述斜率是依据所述至少一条线的所述斜率确定的。
4.根据权利要求1所述的处理器实施的方法,其中停用所述移动装置上的所述至少一个文本应用进一步部分基于来自所述移动装置上的一或多个传感器的输入。
5.根据权利要求1所述的处理器实施的方法,其中确定所述移动装置的所述用户是否是所述驾驶员部分基于所述安全带的所述斜率。
6.根据权利要求1所述的处理器实施的方法,其中所述移动装置包括摄像头并且所述摄像头用于捕获所述车辆中的所述图像。
7.根据权利要求6所述的处理器实施的方法,其中所述摄像头的位置及取向被用作所述移动装置的所述位置及取向的代表。
8.根据权利要求1所述的处理器实施的方法,其中所述移动装置位于所述车辆内并且所述移动装置的所述速度充当所述车辆的速度的代表。
9.根据权利要求1所述的处理器实施的方法,其中所述方法在所述移动装置开启或者从休眠状态中醒来或者解锁时执行。
10.根据权利要求1所述的处理器实施的方法,其中对应于所述移动装置的所述当前位置的所述管辖区是基于以下各项中的至少一者确定的:
从服务所述移动装置的蜂窝网络中的位置服务器中接收的信息,或者
与所述移动装置通信的卫星定位系统。
11.根据权利要求1所述的处理器实施的方法,其中在相对于所述参考坐标系捕获图像时关于所述移动装置的所述速度以及所述移动装置的所述位置及取向的信息是部分基于容纳在所述移动装置中的惯性测量单元的测量结果获得的。
12.根据权利要求11所述的处理器实施的方法,其中所述惯性测量单元包括加速计。
13.根据权利要求1所述的处理器实施的方法,其进一步包括在停用所述文本应用时显示呼叫的紧急号码。
14.根据权利要求1所述的处理器实施的方法,其中所述方法在所述移动装置上执行。
15.一种移动装置,其包括:
摄像头,其能够捕获车辆中的图像;
惯性测量单元,其耦合到所述摄像头并且能够确定在捕获图像时所述移动装置的速度以及所述摄像头相对于参考坐标系的位置及取向;以及
处理器,其耦合到所述摄像头和所述惯性测量单元,其中所述处理器被配置成处理通过所述摄像头捕获的所述图像以:
识别所述图像中的安全带;
确定所述安全带相对于水平线的斜率,其中所述水平线是使用通过所述惯性测量单元提供的在捕获所述图像时关于所述摄像头相对于参考坐标系的位置及取向的信息确定的;以及
至少部分基于所述安全带的所述斜率和所述速度以及以下的一者或多者而停用在所述移动装置上的至少一个文本应用的执行:对应于所述移动装置的当前位置的管辖区中的移动装置使用规则、所述管辖区中的车辆的驾驶配置、或者所述移动装置的用户是否是所述车辆的驾驶员的确定。
16.根据权利要求15所述的移动装置,其中为了识别所述安全带,所述处理器进一步经配置以检测所述图像中的至少一个边缘,其中所述至少一个所检测的边缘对应于所述安全带的两个边缘中的一个。
17.根据权利要求15所述的移动装置,其中为了确定所述安全带相对于所述水平线的所述斜率,所述处理器进一步经配置以:
在所述图像中产生一对线中的至少一条,所述对中的每条线对应于所述安全带的所检测的边缘;以及
确定所述至少一条线相对于所述水平线的斜率,其中所述安全带的所述斜率是从所述至少一条线的所述斜率中确定的。
18.根据权利要求15所述的移动装置,其进一步包括耦合到所述处理器的一或多个传感器;以及
其中所述处理器经配置以停用所述移动装置上的所述至少一个文本应用进一步部分基于来自所述一或多个传感器的输入。
19.根据权利要求15所述的移动装置,其中所述处理器经配置以确定所述移动装置的所述用户是否是所述驾驶员部分基于所述安全带的所述斜率。
20.根据权利要求15所述的移动装置,其进一步包括:
收发器,其耦合到所述处理器并且能够在蜂窝网络上与位置服务器通信以确定所述移动装置的所述当前位置;以及
其中所述处理器经配置以部分基于所述移动装置的所述当前位置而确定所述管辖区。
21.根据权利要求15所述的移动装置,其中所述移动装置进一步包括:
卫星定位系统接收器,其耦合到所述处理器并且能够确定所述移动装置的所述当前位置;以及
其中所述处理器经配置以部分基于所述移动装置的当前位置而确定所述管辖区。
22.根据权利要求15所述的移动装置,其进一步包括耦合到处理器的屏幕,以及
其中在停用所述文本应用时所述处理器经配置以在所述屏幕上显示呼叫的紧急号码。
23.根据权利要求15所述的移动装置,其中所述惯性测量单元包括加速计。
24.一种移动装置,其包括:
成像装置,所述成像装置用于捕获车辆中的图像;
惯性测量装置,其耦合到所述成像装置,所述惯性测量装置用于确定在捕获图像时所述移动装置的速度以及所述成像装置相对于参考坐标系的位置及取向;以及
处理装置,其耦合到所述成像装置和所述惯性测量装置,所述处理装置用于处理由所述成像装置捕获的所述图像并且进一步包括:
用于识别所述图像中的安全带的装置;
用于确定所述安全带相对于水平线的斜率的装置,其中所述水平线是使用通过所述惯性测量装置提供的在捕获所述图像时关于所述成像装置相对于参考坐标系的位置及取向的信息确定的;以及
用于至少部分基于所述安全带的所述斜率和所述速度以及以下的一者或多者而停用所述移动装置上的至少一个文本应用的执行的装置:对应于所述移动装置的当前位置的管辖区中的移动装置使用规则、所述管辖区中的车辆的驾驶配置、或者所述移动装置的用户是否是所述车辆的驾驶员的确定。
25.根据权利要求24所述的移动装置,其中用于识别所述安全带的装置进一步包括用于检测所述图像中的至少一个边缘的装置,其中所述至少一个所检测的边缘对应于所述安全带的两个边缘中的一个。
26.根据权利要求24所述的移动装置,其中用于确定所述安全带相对于所述水平线的所述斜率的装置进一步包括:
用于在所述图像中产生一对线中的至少一条的装置,所述对中的每条线对应于所述安全带的所检测的边缘;以及
用于确定所述至少一条线相对于所述水平线的斜率的装置,其中所述安全带的所述斜率是从所述至少一条线的所述斜率中确定的。
27.根据权利要求24所述的移动装置,其进一步包括耦合到所述处理装置的一或多个感测装置;以及
其中用于停用所述至少一个文本应用的所述装置进一步部分基于来自所述一或多个感测装置的输入。
28.根据权利要求24所述的移动装置,其中所述确定所述移动装置的所述用户是否是所述驾驶员部分基于所述安全带的所述斜率。
29.根据权利要求24所述的移动装置,其进一步包括:
收发器装置,其耦合到所述处理装置,所述收发器装置用于在蜂窝网络上与位置服务器通信以确定所述移动装置的所述当前位置;以及其中所述用于停用所述移动装置上的所述至少一个文本应用的装置进一步包括用于部分基于所述移动装置的所述当前位置而确定所述管辖区的装置。
30.根据权利要求24所述的移动装置,其中所述移动装置进一步包括:卫星定位系统接收装置,其耦合到所述处理装置并且能够确定所述移动装置的所述当前位置;以及其中用于停用所述移动装置上的所述至少一个文本应用的所述装置进一步包括用于部分基于所述移动装置的所述当前位置而确定所述管辖区的装置。
31.根据权利要求24所述的移动装置,其进一步包括显示装置,所述显示装置耦合到所述处理装置,以及
其中所述显示装置在停用所述文本应用时显示呼叫的紧急号码。
32.根据权利要求24所述的移动装置,其中所述惯性测量装置进一步包括加速计装置。
33.一种非暂时性计算机可读媒体,其包括指令,所述指令在由处理器执行时执行方法中的步骤,所述步骤包括:
处理在车辆中通过移动装置捕获的图像以识别所述图像中的安全带;
确定所述安全带相对于水平线的斜率,其中所述水平线是使用在捕获所述图像时关于所述移动装置相对于参考坐标系的位置及取向的信息确定的;
确定所述移动装置的速度;以及
至少部分基于所述安全带的所述斜率和所述移动装置的所述速度以及以下的一者或多者而停用所述移动装置上的至少一个文本应用:对应于所述移动装置的当前位置的管辖区中的移动装置使用规则、所述管辖区中的车辆的驾驶配置、或者所述移动装置的用户是否是所述车辆的驾驶员的确定。
34.根据权利要求33所述的计算机可读媒体,其中处理所述所捕获的图像以识别所述安全带进一步包括检测所述图像中的至少一个边缘,其中所述至少一个所检测的边缘对应于所述安全带的两个边缘中的一个。
35.根据权利要求33所述的计算机可读媒体,其中相对于所述水平线确定所述安全带的所述斜率进一步包括:
在所述图像中产生一对线中的至少一条,所述对中的每条线对应于所述安全带的所检测的边缘;以及
确定所述至少一条线相对于所述水平线的斜率,其中所述安全带的所述斜率是从所述至少一条线的所述斜率中确定的。
36.根据权利要求33所述的计算机可读媒体,其中停用所述移动装置上的所述至少一个文本应用进一步部分基于来自所述移动装置上的一或多个传感器的输入。
37.根据权利要求33所述的计算机可读媒体,其中确定所述移动装置的所述用户是否是所述驾驶员部分基于所述安全带的所述斜率。
38.根据权利要求33所述的计算机可读媒体,其中所述移动装置包括摄像头并且所述摄像头用于捕获所述车辆中的所述图像。
39.根据权利要求38所述的计算机可读媒体,其中所述摄像头的位置及取向被用作所述移动装置的所述位置及取向的代表。
40.根据权利要求33所述的计算机可读媒体,其中所述移动装置位于所述车辆内并且所述移动装置的所述速度充当所述车辆的速度的代表。
41.根据权利要求33所述的计算机可读媒体,其中所述方法在所述移动装置开启或者从休眠状态中醒来或者解锁时执行。
42.根据权利要求33所述的计算机可读媒体,其中对应于所述移动装置的所述当前位置的所述管辖区是基于以下各项中的至少一者确定的:
从服务所述移动装置的蜂窝网络中的位置服务器中接收的信息,或者
与所述移动装置通信的卫星定位系统。
43.根据权利要求33所述的计算机可读媒体,其中在相对于所述参考坐标系捕获图像时关于所述移动装置的所述速度以及所述移动装置的所述位置及取向的信息是部分基于容纳在所述移动装置中的惯性测量单元的测量结果获得的。
44.根据权利要求43所述的计算机可读媒体,其中所述惯性测量单元包括加速计。
45.根据权利要求33所述的计算机可读媒体,其进一步包括在停用所述文本应用时显示呼叫的紧急号码。
CN201480011432.0A 2013-03-06 2014-02-26 用于防止驾驶员分心的方法和移动装置 Expired - Fee Related CN105189177B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/787,741 2013-03-06
US13/787,741 US9020482B2 (en) 2013-03-06 2013-03-06 Preventing driver distraction
PCT/US2014/018796 WO2014137711A1 (en) 2013-03-06 2014-02-26 Method and mobile device for preventing driver distraction

Publications (2)

Publication Number Publication Date
CN105189177A CN105189177A (zh) 2015-12-23
CN105189177B true CN105189177B (zh) 2016-11-09

Family

ID=50342491

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480011432.0A Expired - Fee Related CN105189177B (zh) 2013-03-06 2014-02-26 用于防止驾驶员分心的方法和移动装置

Country Status (6)

Country Link
US (1) US9020482B2 (zh)
EP (1) EP2964479B1 (zh)
JP (1) JP6328671B2 (zh)
KR (1) KR20150122242A (zh)
CN (1) CN105189177B (zh)
WO (1) WO2014137711A1 (zh)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9319845B1 (en) 2012-04-25 2016-04-19 Scott D. Rownin Mobile device lock-out system
US11222534B2 (en) 2013-12-20 2022-01-11 Sfara, Inc. System and method for smartphone communication during vehicle mode
US9414221B1 (en) * 2012-12-21 2016-08-09 Apio Systems, Inc. System and method for determining compromised driving
US9191783B2 (en) * 2013-03-13 2015-11-17 Qualcomm Incorporated Driver distraction detection and reporting
US9414203B2 (en) * 2013-03-15 2016-08-09 Synchronoss Technologies, Inc. Device usage controller and methods thereof
US10931816B2 (en) 2013-03-15 2021-02-23 Cbros Technologies, Llc System and method for limiting mobile device functionality in a geographic area
US10104224B2 (en) * 2013-03-15 2018-10-16 Cbros Technologies, Llc Limiting mobile device functionality in a vehicle
US10268530B2 (en) 2013-05-08 2019-04-23 Cellcontrol, Inc. Managing functions on an iOS-based mobile device using ANCS notifications
US10805861B2 (en) 2013-05-08 2020-10-13 Cellcontrol, Inc. Context-aware mobile device management
US10271265B2 (en) 2013-05-08 2019-04-23 Cellcontrol, Inc. Detecting mobile devices within a vehicle based on cellular data detected within the vehicle
US11751123B2 (en) 2013-05-08 2023-09-05 Cellcontrol, Inc. Context-aware mobile device management
US10477454B2 (en) 2013-05-08 2019-11-12 Cellcontrol, Inc. Managing iOS-based mobile communication devices by creative use of CallKit API protocols
US10212269B2 (en) 2013-11-06 2019-02-19 Google Technology Holdings LLC Multifactor drive mode determination
US9037125B1 (en) 2014-04-07 2015-05-19 Google Inc. Detecting driving with a wearable computing device
US9258409B1 (en) * 2014-07-29 2016-02-09 Verizon Patent And Licensing Inc. Determining that a user is in a vehicle or driving a vehicle based on sensor data gathered by a user device
US10200529B2 (en) 2014-09-26 2019-02-05 Airwatch Llc Restrictions on mobile device usage when driving a vehicle
US9830665B1 (en) * 2014-11-14 2017-11-28 United Services Automobile Association Telematics system, apparatus and method
US9690292B1 (en) 2015-01-13 2017-06-27 State Farm Mutual Automobile Insurance Company Apparatuses, systems and methods for transitioning between autonomous and manual modes of vehicle operations
US9749824B2 (en) * 2015-02-12 2017-08-29 Foster Products Inc. Selective mobile device component lockdown in moving vehicles
WO2016170480A1 (en) * 2015-04-21 2016-10-27 University Of Zululand A safety system and method for a driver's mobile telephone
US9576322B1 (en) 2015-06-29 2017-02-21 State Farm Mutual Automobile Insurance Company System and method for determining an indication of a location of a device in a vehicle
US9457754B1 (en) * 2015-07-13 2016-10-04 State Farm Mutual Automobile Insurance Company Method and system for identifying vehicle collisions using sensor data
US20170145669A1 (en) * 2015-10-19 2017-05-25 Michael Edward Klicpera Apparatus for Recycling Water for a Shower or Bath
US9854405B2 (en) 2015-11-10 2017-12-26 At&T Intellectual Property I, L.P. Mobile application and device feature regulation based on profile data
US10414406B2 (en) 2016-03-01 2019-09-17 International Business Machines Corporation Measuring driving variability under potentially distracting conditions
CN105809152B (zh) * 2016-04-06 2019-05-21 清华大学 一种基于多源信息融合的驾驶员认知分心监测方法
US9912802B2 (en) 2016-06-06 2018-03-06 Toyota Motor Engineering & Manufacturing North America, Inc. Methods, systems, and vehicles for disabling a function of one or more mobile devices within a passenger cabin of a vehicle
US10182137B2 (en) * 2016-09-02 2019-01-15 Text Free Enterprises, LLC System and method for preventing cell phone use while driving
US10555133B1 (en) * 2016-09-22 2020-02-04 Apple Inc. Systems and methods for locating mobile devices within a vehicle
US10045157B2 (en) 2017-01-05 2018-08-07 International Business Machines Corporation Targeting notifications intended for drivers to a trusted automobile passenger
US11321951B1 (en) 2017-01-19 2022-05-03 State Farm Mutual Automobile Insurance Company Apparatuses, systems and methods for integrating vehicle operator gesture detection within geographic maps
US10230834B2 (en) 2017-02-27 2019-03-12 Jonathan William Bachmann Applications, methods, and systems for preventing a mobile device user from operating functions of a mobile device while operating a motor vehicle
US11178272B2 (en) * 2017-08-14 2021-11-16 Cellcontrol, Inc. Systems, methods, and devices for enforcing do not disturb functionality on mobile devices
US10885781B2 (en) 2017-09-25 2021-01-05 Blackberry Limited Method and system for a proxy vehicular intelligent transportation system station
US10046735B1 (en) * 2017-11-22 2018-08-14 Marco Johnson Methods for monitoring safety belt usage
US10255794B1 (en) * 2017-11-28 2019-04-09 Titan Health & Security Technologies, Inc. Systems and methods for providing augmented reality emergency response solutions
US11694435B2 (en) 2018-06-18 2023-07-04 Magic Leap, Inc. Systems and methods for temporarily disabling user control interfaces during attachment of an electronic device
WO2019246044A1 (en) 2018-06-18 2019-12-26 Magic Leap, Inc. Head-mounted display systems with power saving functionality
JP7378431B2 (ja) 2018-06-18 2023-11-13 マジック リープ, インコーポレイテッド フレーム変調機能性を伴う拡張現実ディスプレイ
US11180158B1 (en) * 2018-07-31 2021-11-23 United Services Automobile Association (Usaa) Routing or driving systems and methods based on sleep pattern information
US10990437B2 (en) * 2018-12-12 2021-04-27 Paypal, Inc. Interface data display optimization during device operation
US10759441B1 (en) * 2019-05-06 2020-09-01 Cambridge Mobile Telematics Inc. Determining, scoring, and reporting mobile phone distraction of a driver
US10672249B1 (en) 2019-05-06 2020-06-02 Cambridge Mobile Telematics Inc. Determining, scoring, and reporting mobile phone distraction of a driver
US10785604B1 (en) * 2019-07-26 2020-09-22 Allstate Insurance Company Multi-computer processing system for dynamically executing response actions based on movement data
CN111860280A (zh) * 2020-07-15 2020-10-30 南通大学 一种基于深度学习的驾驶员违章行为识别系统
CN111931642A (zh) 2020-08-07 2020-11-13 上海商汤临港智能科技有限公司 一种安全带佩戴检测的方法、装置、电子设备及存储介质
WO2022232875A1 (en) * 2021-05-05 2022-11-10 Seeing Machines Limited Systems and methods for detection of mobile device use by a vehicle driver

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1669251A1 (en) * 2004-12-07 2006-06-14 IEE INTERNATIONAL ELECTRONICS & ENGINEERING S.A. Child seat detection system
US8457838B1 (en) 2005-11-14 2013-06-04 Nvidia Corporation System and method for safe operation of a vehicle based electronic device while the vehicle is in motion
US20070198632A1 (en) * 2006-02-03 2007-08-23 Microsoft Corporation Transferring multimedia from a connected capture device
AU2008223015B2 (en) 2007-03-02 2015-03-12 Aegis Mobility, Inc. Management of mobile device communication sessions to reduce user distraction
JP2009287936A (ja) * 2008-05-27 2009-12-10 Toyota Industries Corp 運転者眼球位置検出装置
US20100087137A1 (en) 2008-10-03 2010-04-08 Fischer John J Vehicle safety system
DE102009008492A1 (de) 2009-02-11 2010-08-19 Audi Ag Kraftfahrzeug mit einer Wiedergabeeinrichtung zur in Abhängigkeit der erfassten Sitzposition des Fahrers steuerbare Wiedergabe von Bildinformationen
US8145199B2 (en) * 2009-10-31 2012-03-27 BT Patent LLC Controlling mobile device functions
JP2011172195A (ja) * 2010-02-22 2011-09-01 Fujitsu Ltd 車載機、携帯機器、および制御プログラム
US9140560B2 (en) * 2011-11-16 2015-09-22 Flextronics Ap, Llc In-cloud connection for car multimedia
US20120214463A1 (en) 2010-11-05 2012-08-23 Smith Michael J Detecting use of a mobile device by a driver of a vehicle, such as an automobile
US20120176232A1 (en) 2011-01-11 2012-07-12 International Business Machines Corporation Prevention of texting while operating a motor vehicle
FI20115502A0 (fi) 2011-05-23 2011-05-23 Teknologian Tutkimuskeskus Vtt Oy Järjestelmä, tunnistusyksikkö, menetelmä ja tietokoneohjelma matkustajien turvavyökäytön tunnistamiseksi ajoneuvossa
US8942692B2 (en) * 2011-12-02 2015-01-27 Text Safe Teens, Llc Remote mobile device management
US8538402B2 (en) * 2012-02-12 2013-09-17 Joel Vidal Phone that prevents texting while driving
CN102717773A (zh) 2012-06-01 2012-10-10 浙江吉利汽车研究院有限公司杭州分公司 一种汽车安全带的检测控制方法及装置

Also Published As

Publication number Publication date
JP6328671B2 (ja) 2018-05-23
JP2016522767A (ja) 2016-08-04
WO2014137711A1 (en) 2014-09-12
EP2964479B1 (en) 2017-04-26
US9020482B2 (en) 2015-04-28
KR20150122242A (ko) 2015-10-30
WO2014137711A4 (en) 2014-12-18
EP2964479A1 (en) 2016-01-13
CN105189177A (zh) 2015-12-23
US20140256303A1 (en) 2014-09-11

Similar Documents

Publication Publication Date Title
CN105189177B (zh) 用于防止驾驶员分心的方法和移动装置
US11097690B2 (en) Identifying and authenticating autonomous vehicles and passengers
US20220182482A1 (en) Restricting mobile device usage
JP6295554B2 (ja) プログラム、情報処理装置
JP2022526932A (ja) 車両ユーザの安全性
US9800716B2 (en) Restricting mobile device usage
US8538402B2 (en) Phone that prevents texting while driving
US20130281079A1 (en) Phone that prevents concurrent texting and driving
US20190115049A1 (en) Recording device and recording method
CN111448574A (zh) 用于从移动设备请求运输交通工具的方法和装置
US10717413B2 (en) Actuation of vehicle systems using device-as-key and computer vision techniques
JP2020077237A (ja) 運行データレコーディングシステム、運行データレコーダ、端末装置、および運行データレコーディング方法
KR101565653B1 (ko) 페어링된 사용자 단말기를 이용한 긴급 구조 요청 시스템
JPWO2018220852A1 (ja) 機能制限付き携帯端末装置及びその機能制限方法、及びそれに用いる処理プログラム
US11943566B2 (en) Communication system
EP3591589A1 (en) Identifying autonomous vehicles and passengers
WO2008038333A1 (en) Data recording device, data recording method, data recording program, and computer readable recording medium
KR101902657B1 (ko) 스마트카에서 차량을 회수하기 위한 IoT 보안 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
KR102490788B1 (ko) 충격감지 기술을 활용한 이륜차량의 도난 감지 시스템
CN209785247U (zh) 一种视频与惯性导航相结合的单车停放监测系统
KR20170041480A (ko) 택시용 올인원 시스템에서의 영상 정보 제공 방법 및 컴퓨터 프로그램
US20230063761A1 (en) Occupant-dependent setting system for vehicle, and vehicle
KR20220121942A (ko) 이륜차 주행에 대한 운전자 특정 사고 시뮬레이션의 정보 제공을 위한 장치 및 방법
JP2019220991A (ja) 判定装置、判定方法および判定プログラム
CN118279539A (zh) 车辆通行管理方法、装置、计算设备及车辆

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161109

Termination date: 20190226