CN113119982A

CN113119982A - 操作状态识别与处理方法、装置、设备、介质及程序产品

Info

Publication number: CN113119982A
Application number: CN202110444509.5A
Authority: CN
Inventors: 肖资; 齐涛; 王金凤; 瞿进圆; 周昊; 刘璋勇
Original assignee: Kunshan Bao Innovative Energy Technology Co Ltd
Current assignee: Kunshan Bao Innovative Energy Technology Co Ltd
Priority date: 2021-04-23
Filing date: 2021-04-23
Publication date: 2021-07-16

Abstract

本申请提供了一种操作状态识别与处理系统方法、装置、设备、介质及程序产品，通过获取用户在预设操作区的位姿信息以及接触识别信息，然后将位姿信息以及接触识别信息与标准操作信息进行比对，以确定用户是否处于标准操作状态，若否，则控制被操控对象执行预设调整程序，以使用户以及被操控对象回到满足预设安全规则的状态。解决了如何识别用户的操作状态是否处于标准状态，并对非标准状态采取主动规避危险的处理措施的技术问题。达到了在各种场景中需要人工待命或者是人工操作时，保障操作人员保持标准操作状态，有效避免安全事故的技术效果。

Description

操作状态识别与处理方法、装置、设备、介质及程序产品

技术领域

本申请涉及智能控制领域，尤其涉及一种操作状态识别与处理方法、装置、设备、介质及程序产品。

背景技术

虽然自动控制技术发展到现在已经取得了与很大进步，但是在某些复杂或特殊场景下，依然还是需要依赖人工操控的介入来辅助完成某些特定的功能，或者处理意外的突发状况。

目前，人工值守待命或者是人工操作时，由于用户的非标准操作，时常会造成被操控对象不能及时处理突发状况，或者是用户误操作造成各类安全事故。例如，现有新能源汽车在自动驾驶时，还不足以应对所有的突发状况，只能依赖手动操作规避危险，但是如果此时驾驶员并没有处于标准的待命状态，如双手并没有握持方向盘，那么就无法及时接管车辆，从而造成危险规避失败，引发交通事故。

即如何识别用户的操作状态是否处于标准状态，并对非标准状态采取主动规避危险的处理措施是目前亟需解决的技术问题。

发明内容

本申请提供一种操作状态识别与处理方法、装置、设备、介质及程序产品，以解决如何识别用户的操作状态是否处于标准状态，并对非标准状态采取主动规避危险的处理措施的技术问题。

第一个方面，本申请提供一种操作状态识别与处理方法，包括：

获取用户在预设操作区的位姿信息以及接触识别信息；

将位姿信息以及接触识别信息与标准操作信息进行比对，以确定用户是否处于标准操作状态，标准操作信息与被操控对象在预设时间内的运行状态相对应；

若否，则控制被操控对象执行预设调整程序，以使用户以及被操控对象回到满足预设安全规则的状态。

在一种可能的设计中，位姿信息包括：用户的至少一个身体部位的位置信息与姿势信息，接触识别信息包括：预设操作区上的压力传感器所检测到的接触压力值；

将位姿信息以及接触识别信息与标准操作信息进行比对，以确定用户是否处于标准操作状态，包括：

获取被操控对象的运行环境信息以及运行状态；

根据运行环境信息以及运行状态，确定身体部位的标准位置、标准姿势以及标准压力值；

并确定位置信息与标准位置的位置偏差、姿势信息与标准姿势的姿势偏差、接触压力值与标准压力值的压力偏差，是否均满足各自的预设条件。

在一种可能的设计中，被操控对象包括：车辆，预设操作区包括：方向盘，和/或，操纵杆上的预设标准握持区，对应的，接触压力值包括：用户的手部对方向盘，和/或，操纵杆的握力值，位置信息包括：手部位置，姿势信息包括：手部姿势；

对应的，确定位置信息与标准位置的位置偏差、姿势信息与标准姿势的姿势偏差、接触压力值与标准压力值的压力偏差，是否均满足各自的预设条件，包括：

实时监测手部位置与预设标准握持区的位置偏差是否在预设位置偏离范围内；

若否，则进入异常计时模式，并判断异常时长是否小于第一时间阈值；

若否，则确定用户处于第一非标准操作状态；

对应的，控制被操控对象执行预设调整程序，包括：

控制车辆向用户发送报警提示信息。

在一种可能的设计中，在控制车辆向用户发送报警提示信息之后，还包括：

判断异常时长是否小于第二时间阈值，第二时间阈值大于第一时间阈值；

若否，则确定用户处于第二非标准操作状态；

对应的，控制被操控对象执行预设调整程序，包括：

根据环境信息确定安全停止位置；

控制车辆减速靠边行驶，直至停靠在安全停止位置。

在一种可能的设计中，在实时监测手部位置与预设标准握持区的位置偏差是否在预设位置偏离范围内之后，还包括：

若是，则实时监测手部姿势与标准姿势的姿势偏差是否在预设姿势偏离范围内；

若否，则进入异常计时模式，判断异常时长是否小于第一时间阈值，和/或，是否小于第二时间阈值；

以确定用户处于第一非标准操作状态，或第二非标准操作状态，并控制被操控对象执行对应的预设调整程序。

在一种可能的设计中，在实时监测手部姿势与标准姿势的姿势偏差是否在预设姿势偏离范围内之后，还包括：

若是，则实施监测握力值与标准压力值的压力偏差是否在预设压力偏离范围内；

第二方面，本申请提供一种操作状态识别与处理装置，包括：

获取模块，用于获取用户在预设操作区的位姿信息以及接触识别信息；

处理模块，用于将所述位姿信息以及所述接触识别信息与标准操作信息进行比对，以确定所述用户是否处于标准操作状态，所述标准操作信息与被操控对象在预设时间内的运行状态相对应；

若否，则处理模块，还用于控制所述被操控对象执行预设停止程序，以使所述用户以及所述被操控对象回到满足预设安全规则的状态。

所述获取模块，还用于获取被操控对象的运行环境信息以及运行状态；

所述处理模块，用于根据运行环境信息以及运行状态，确定身体部位的标准位置、标准姿势以及标准压力值；并确定位置信息与标准位置的位置偏差、姿势信息与标准姿势的姿势偏差、接触压力值与标准压力值的压力偏差，是否均满足各自的预设条件。

所述处理模块，具体用于：

若否，则确定用户处于第一非标准操作状态；

所述处理模块，还用于控制车辆向用户发送报警提示信息。

在一种可能的设计中，所述处理模块，还用于：

判断异常时长是否小于第二时间阈值，第二时间阈值大于或等于第一时间阈值；

若否，则确定用户处于第二非标准操作状态；

对应的，所述处理模块，还用于根据运行环境信息确定安全停止位置；控制车辆减速靠边行驶，直至停靠在安全停止位置。

在一种可能的设计中，所述处理模块，还用于：

实时监测手部姿势与标准姿势的姿势偏差是否在预设姿势偏离范围内；

第三个方面，本申请提供一种电子设备，包括：

存储器，用于存储程序指令；

处理器，用于调用并执行所述存储器中的程序指令，执行第一方面所提供的任意一种可能的操作状态识别与处理方法。

第四方面，本申请提供一种存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序用于执行第一方面所提供的任意一种可能的操作状态识别与处理方法。

第七方面，本申请还提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现第一方面所提供的任意一种可能的操作状态识别与处理系统方法。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。

图1本申请提供的一种操作状态识别与处理方法的流程示意图；

图2a-2d为本申请实施例提供的一种预设操作区的示意图；

图3为本申请实施提供的另一种操作状态识别与处理方法的流程示意图；

图4为本申请实施例提供的一种操作状态识别与处理装置的结构示意图；

图5为本申请提供的一种电子设备的结构示意图。

通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，包括但不限于对多个实施例的组合，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

随着全自动控制是自动控制技术发展的终极目标，但是目前真正意义上的无场景差别，足以应对所有突发状况的全自动控制依然没有实现，在复杂的应用场景或者是突发状况下，仍然需要人为操作的介入，才能能够确保某些功能的实现或者是进行紧急避险的操作。

需要人工待命，或人工监视的半自动辅助控制是目前的主流，也将在今后很长的时间内都是自动控制领域的常态化状况。

本申请发明人发现，人工待命、人工监视或人工操作的时候，由于用户或者说是操作者没有按照标准状态操作，即按照安全规范的要求进行操作。如汽车驾驶时，方向盘不能离手；摩托车驾驶时，不能单手握把或双手脱把；工程切割机或钻孔机(如隧道、矿洞挖掘、勘探)在工作时，监视人员没有在紧急介入界面进行待命操作；驾校教练在陪练时，脚没有放在制动踏板上，导致学员在危险驾驶时，没有及时制止而产生事故等等。

各类应用场景，都可以看到非标准操作状态导致了极大的安全隐患。虽然目前出现了一些针对非标准操作状态的识别进行提醒的解决方案，但是其仅仅只是粗略的判定，现有的解决方案经常出现识别不够准确的情况，如识别误判，或者过渡灵敏。例如，现有的车道偏离预警，在车辆正常变道时，也会发出车道偏离警告，这对驾驶员来说，反而会引起使用不适，干扰正常驾驶。

因此，如何准确识别用户的操作状态是否处于标准状态，并对非标准状态采取主动规避危险的处理措施，就成为了亟待解决的技术问题。

本申请通过提炼多场景，多维度的操作状态识别方式提供了一种新的操作状态识别与处理方法。本申请的发明构思是：

通过在不同环境或者说是不同应用场景中，利用位置、姿势、是否合理接触或非接触等要素，建立起多维度的标准操作状态表征模型。并且标准操作信息不是一成不变的，而是会随着用户、被操作对象在不同时间，不同状态下的改变而做出相应的调整，以避免误判或过敏等现象的出现。同时，对识别出非标准操作状态后，所需要采取的主动安全措施进行细化，让安全隐患从被动预防转为主动消除，提高了用户操作的安全性。

下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。

图1为本申请实施例提供的一种操作状态识别与处理方法的流程示意图。如图1所示，该操作状态识别与处理方法的具体步骤，包括：

S101、获取用户在预设操作区的位姿信息以及接触识别信息。

在本步骤中，位姿信息包括：位置信息和姿态信息；

接触识别信息包括：接触式感应物理参数以及非接触式感应物理参数；

预设操作区是指用户在对被操作对象执行人工操作，或者是用户待命且能够实时从自动控制状态中接管被操作对象的操作区域，预设操作区可以是在被操作物上，也可以是位于被操作物之外。

对于不同的场景，上述各个要素会有不同的表现形式或实施方式。

值得说明的是，本实施例的操作状态识别与处理方法所对应的应用场景至少包括：

对交通工具的操作，该交通工具包括：陆、海、空中任意一种交通工具，以及外太空航天器，如乘用车(包括传统燃油车以及新能源电动车)、运输车、火车、地铁、飞机；

对工程工具的操作，该工程工具包括：挖掘机、隧道挖钻机、深海探测器、无人机、伐木机、推土机、割草机、碎石机、搅拌机。

对农用工具的操作，该农用工具包括：播种机、插秧机、收割机、翻地机、果实或枝叶采摘器。

对遥控工具的操作，该遥控工具包括：按键式遥控器、触摸式遥控器、操纵杆。

图2a-2d为本申请实施例提供的一种预设操作区的示意图。如图2a所示，预设操作区为方向盘上处于左右手水平位置的区域，即方向盘标准握持区101，可以理解的是，方向盘可以不限制于圆形方向盘，但是标准握持区一般都是在左右手水平握持的位置，如果以时钟上刻度划分，标准握持区101对应的区域在2至4点区域以及8至10点区域。

如图2b所示，预设操作区为轮舵操作盘上在轮舵处于无转向的直行正方向时，或者是转向机构处于0角度转向时，左右两个凸起把手所对应的位置，或者是左右任意一个位置。

如图2c所示，预设操作区为操纵杆上的握持部位102。

如图2d所示，预设操作区可以分为多个分区，如图2d中分为左右两个分区：第一操作区104和第二操作区105，第一操作区104上设置有档杆和或按钮，第二操作区105为触屏或按钮，与图2a-2c不同的是，在此场景中，采用非接触检测，比如通过热量传感器或电/磁场传感器，识别用户双手是否悬浮在第一操作区104和第二操作区105正上方。

具体的，位姿信息包括了用户整个身体，或者是身体上的至少一个部分所处的位置信息以及姿势信息，比如图2a中，通过摄像头获取用户的双手的位置在标准握持区101。对于姿势信息，双手的标准姿势也如图2a所示，左右互换的交叉握持、搭靠等，都是非标准姿势。此外为了防止虚握，在标准握持区101上还设置有压力传感器，用于检测握力值是否满足预设要求，即接触识别信息是否满足预设要求。

需要说明的是，接触识别信息不一定要接触，通过热传感器或者红外线传感器，或者通过佩戴磁性手环，利用电磁场传感器，也能够检测到接触识别信息。例如，如图2d所示，如果人手停留的位置在操作区正上方，此时，通过热量传感器或电磁传感器可以检测人手的位置是否过高或者过低，过高增加了反应时长，过低容易引起误操作。

总的来说，接触识别信息包括了接触式感应物理参数以及非接触式感应物理参数。

S102、将位姿信息以及接触识别信息与标准操作信息进行比对，以确定用户是否处于标准操作状态。

在本步骤中，标准操作信息与用户以及被操控对象在预设时间内的运行状态相对应。

预设时间包括：当前时刻、预设运行周期中的至少一个时间段或时间点、非周期运行中的至少一个时间段或时间点。

具体步骤包括：

获取被操控对象的运行环境信息以及运行状态；

例如，在一种可能的应用场景中，当被操控对象为车辆，预设时间为当前时刻时，若车辆正在高速公路上以85km/h的时速进行高速直线行驶，此时的标准操作信息是，如图2a中所示，双手必须以非交叉的形式，握持在标准握持区101上，左右手握力值范围均为3-5N。

设置在车辆上的摄像头实时采集方向盘区域的图像，检测驾驶员双手是否处于标准握持区101，双手的姿势是否为标准握持姿势，而设置在方向盘标准握持区101的压力传感器实时检测驾驶员双手的握力值。

车辆控制器将摄像头采集到的图像数据利用图像识别技术分析得到驾驶员双手的位置信息以及姿态信息，再利用图像对齐模型，判断位置信息以及姿态信息与标准握持位置和标准握持姿势是否对应，或者是否在预设偏差范围内，若都满足，再检验握力值是否在标准握力值的范围内。

S103、若否，则控制被操控对象执行预设调整程序，以使用户以及被操控对象回到满足预设安全规则的状态。

在本步骤中，预设调整程序包括：向用户发送提醒信息，并监视用户是否做出正确的预设调节响应，如果用户仍然没有进行调整，则进一步地，自动控制器将接管被操控对象的控制权，然后按照预设的停止程序，停止被操控对象，并检测用户的生理体征是否正常，如体温、心跳、呼吸频率、血压等，若出现异常，则自动向急救中心(如医院或警察局)发出求救信号。

本实施例提供了一种操作状态识别与处理系统方法，通过获取用户在预设操作区的位姿信息以及接触识别信息，然后将位姿信息以及接触识别信息与标准操作信息进行比对，以确定用户是否处于标准操作状态，若否，则控制被操控对象执行预设调整程序，以使用户以及被操控对象回到满足预设安全规则的状态。解决了如何识别用户的操作状态是否处于标准状态，并对非标准状态采取主动规避危险的处理措施的技术问题。达到了在各种场景中需要人工待命或者是人工操作时，保障操作人员保持标准操作状态，有效避免安全事故的技术效果。

为了便于理解，下面以车辆作为被操控对象，对车辆驾驶的标准操作状态识别和处理，这个应用场景对本申请的操作状态识别与处理方法做进一步的说明举例。

对于其它应用场景，可以参考车辆的操作进行对比理解。

图3为本申请实施提供的另一种操作状态识别与处理方法的流程示意图。如图3所示，该操作状态识别与处理方法的具体步骤包括：

S301、获取用户在预设操作区的位姿信息以及接触识别信息。

在本步骤中，位姿信息包括：所述用户的至少一个身体部位的位置信息与姿势信息。接触识别信息包括：所述预设操作区上的压力传感器所检测到的接触压力值。

需要说明的是，身体部位包括：上肢体、下肢体以及头部等。

在本实施例中，被操控对象包括：车辆，所述车辆包括：乘用车(如轿车、巴士、公交车、越野车、摩托车、电动车、新能源汽车)、卡车、货车等等。

预设操作区包括：方向盘，和/或，操纵杆上的预设标准握持区，对应的，接触压力值包括：用户的手部对方向盘，和/或，操纵杆的握力值，位置信息包括：手部位置，姿势信息包括：手部姿势。

具体的，如图2a和图2c所示，车辆的操纵部件可以是图2a中的方向盘，也可以是图2c中的操纵杆，车辆上在驾驶座上方设置有摄像头，用于采集驾驶员的双手位置以及手部姿势，方向盘的标准握持区101或者操纵杆的握持部位102上设置有压力传感器，用于检测手部握力，放置虚握。

在一种可能的设计中，摄像头还采集驾驶员下肢的位姿信息，例如，通过装在座位下方，或车辆操控台下方的摄像头，采集驾驶员腿部和脚部的位置信息和姿态信息。避免驾驶员跷二郎腿、盘腿坐在位置上，而无法及时踩刹车制动。

进一步的，还可以检测制动踏板或者油门踏板上的压力值，确保用户踏在了踏板上，以便于随时接管车辆，即加油门或制动。

在一种可能的设计中，摄像头还采集驾驶员头部的位姿信息，例如，监测驾驶员是否长时间回头说话，或者频繁回头说话，或者没有目视前方，或者眼神涣散，处于打瞌睡的状态。此时，车辆可以发出相应的提醒警告，或者自动减速靠边停车。

为了便于说明，以下步骤中以方向盘为例进行说明，操纵杆可以对应参考方向盘的标准握持区101进行理解。

S302、获取被操控对象的运行环境信息以及运行状态。

在本步骤中，运行环境信息包括车辆所处的行驶环境，例如，可以包括：城市工况、郊区工况、高速路工况、拥堵工况、事故易发区域工况等等。

运行状态，是车辆各个传感器所传递的车辆各个零部件或者整车的工作状态，包括：高速模式、低速模式、自适应巡航模式、导航模式、新手模式、驾校训练模式等等。

对于运行环境信息，可以通过车联网或互联网获取以车辆所在区域的行驶环境状况，或者是导航路线所经过的行驶环境的信息。还可以通过车外摄像头采集周边环境的图像，经过图像识别技术的分析，获取到运行环境信息。

需要说明的是，在本实施例中，以车辆处于城市工况的低速模式运行为例进行说明，对于其它运行环境，本领域技术人员可以根据实际情况进行相应的调整，本申请不作限定。

S303、根据运行环境信息以及运行状态，确定身体部位的标准位置、标准姿势以及标准压力值。

S304、实时监测手部位置与预设标准握持区的位置偏差是否在预设位置偏离范围内。

在本步骤中，若是，则执行步骤S310，若否，则执行步骤S305。

S305、进入异常计时模式，并判断异常时长是否小于第一时间阈值。

在本步骤中，若是，则不作处理，继续进行异常计时；若否，则执行步骤S306。

S306、确定用户处于第一非标准操作状态，控制车辆向用户发送报警提示信息。

在本实施例中，报警提示信息包括：语音或蜂鸣提示，和/或，振动提示。

具体的，对于步骤S305～S306，当进入异常计时模式的时间即异常时长达到第一时间阈值，如15S时，开始向用户发送语音提示音或蜂鸣提示音，如“请注意(双手)正确握持方向盘(操纵杆)”；

和/或，

在发送语音提示音的同时，或者，在语音提示音播次数达到预定次数时，或者在语音提示音播报完成后的预设时间内，如5S内，用户仍然没有采取调整措施时，让车辆上的振动装置发送振动提示。

需要说明的是，振动装置安装的位置包括：座椅、方向盘(操纵杆)、车门、车顶、车辆A柱/B柱、前操作台等位置。

例如，当监测到用户单手离开方向盘或操纵杆，或者双手全都离开方向盘或操纵杆时，若车辆处于转弯状态，将第一时间阈值设置为15S，在15S内，用户恢复双手握持的标准操作，则不采取任何措施，若大于或等于15S，则向用户发送语音提示，和/或，振动提示；

若车辆处于直行状态，则将第一时间阈值设置为0S，立即向用户发送语音提示，和/或，振动提示。

S307、判断异常时长是否小于第二时间阈值。

在本步骤中，第二时间阈值大于或等于第一时间阈值。

具体的，在异常计时到达第一阈值后，除非用户采取了对应的调整措施结束异常计时模式，否则，异常计时将继续累积。

若异常技术累积大于或等于第二时间阈值，如30S，则执行步骤S308～S309。

S308、确定用户处于第二非标准操作状态，并根据运行环境信息确定安全停止位置。

S309、控制车辆减速靠边行驶，直至停靠在安全停止位置。

例如，接着S306中的例子，若车辆处于转弯状态，当转向车轮转动小于预设转向角时，第一时间阈值设置为15S，第二时间阈值设置为30S，在15至30S时，车辆仅发出提示信息，在异常计时大于或等于30S后，车辆控制器就会接管车辆控制权，并获取当前道路状况，以及车辆周边的环境情况，判断车辆是否需要变道到慢速车道或高速公路的应急车道，若是，则减速变道，开启双闪报警灯，逐渐靠边停靠到安全的位置。

需要说明的是，当车辆转向角度较大时，即转向车轮转动大于或等于预设转向角时，则设置第一时间阈值等于第二时间阈值，如都设置为30S，车辆在发出提示的同时，立即采取上述减速靠边停车的措施。

S310、实时监测手部姿势与标准姿势的姿势偏差是否在预设姿势偏离范围内。

在本步骤中，若是，则执行步骤S311；若否，则执行步骤S305。

需要说明的是，监测手部姿势的目的是防止，如驾驶员单手持方向盘，或者双手交叉握持，或者仅用手指按压而非握持等等非正常握持动作，现有技术中一般会忽略此项监测，从而造成识别不够准确的情况。本申请使得非标准操作状态的识别更为准确，提高了操作安全性，避免了事故的发生。

S311、实施监测握力值与标准压力值的压力偏差是否在预设压力偏离范围内。

在本步骤中，若是，则确定用户的操作状态处于标准操作状态；若否，则执行步骤S305。

需要说明的是，监测握力值是为了防止驾驶员虚握方向盘或操纵杆，因为驾驶员长时间握持后，由于手心出汗等原因，可能会虚握方向盘。或者驾驶员以握方向盘的姿势在操作手机或平板电脑，等等危险操作行为，需要监测握力值，来进一步提高非标准操作状态的识别准确度。

可选的，在方向盘或者操纵杆上，可以设置汗液传感器或湿度传感器，及时提示用户擦拭，避免危险驾驶行为的出现。

图4为本申请实施例提供的一种操作状态识别与处理装置的结构示意图。该操作状态识别与处理装置400可以通过软件、硬件或者两者的结合实现。

如图4所示，该操作状态识别与处理装置400包括：

获取模块401，用于获取用户在预设操作区的位姿信息以及接触识别信息；

处理模块402，用于将所述位姿信息以及所述接触识别信息与标准操作信息进行比对，以确定所述用户是否处于标准操作状态，所述标准操作信息与被操控对象在预设时间内的运行状态相对应；

若否，则处理模块402，还用于控制所述被操控对象执行预设停止程序，以使所述用户以及所述被操控对象回到满足预设安全规则的状态。

所述获取模块401，还用于获取被操控对象的运行环境信息以及运行状态；

所述处理模块402，用于根据运行环境信息以及运行状态，确定身体部位的标准位置、标准姿势以及标准压力值；并确定位置信息与标准位置的位置偏差、姿势信息与标准姿势的姿势偏差、接触压力值与标准压力值的压力偏差，是否均满足各自的预设条件。

所述处理模块402，具体用于：

若否，则确定用户处于第一非标准操作状态；

所述处理模块402，还用于控制车辆向用户发送报警提示信息。

在一种可能的设计中，所述处理模块402，还用于：

若否，则确定用户处于第二非标准操作状态；

对应的，所述处理模块402，还用于根据运行环境信息确定安全停止位置；控制车辆减速靠边行驶，直至停靠在安全停止位置。

在一种可能的设计中，所述处理模块402，还用于：

值得说明的是，图4所示实施例提供的装置，可以执行上述任一方法实施例中所提供的方法，其具体实现原理、技术特征、专业名词解释以及技术效果类似，在此不再赘述。

图5为本申请实施例提供的一种电子设备的结构示意图。如图5所示，该电子设备500，可以包括：至少一个处理器501和存储器502。图5示出的是以一个处理器为例的电子设备。

存储器502，用于存放程序。具体地，程序可以包括程序代码，程序代码包括计算机操作指令。

存储器502可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。

处理器501用于执行存储器502存储的计算机执行指令，以实现以上各方法实施例所述的方法。

其中，处理器501可能是一个中央处理器(central processing unit，简称为CPU)，或者是特定集成电路(application specific integrated circuit，简称为ASIC)，或者是被配置成实施本申请实施例的一个或多个集成电路。

可选地，存储器502既可以是独立的，也可以跟处理器501集成在一起。当所述存储器502是独立于处理器501之外的器件时，所述电子设备500，还可以包括：

总线503，用于连接所述处理器501以及所述存储器502。总线可以是工业标准体系结构(industry standard architecture，简称为ISA)总线、外部设备互连(peripheralcomponent，PCI)总线或扩展工业标准体系结构(extended industry standardarchitecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等，但并不表示仅有一根总线或一种类型的总线。

可选的，在具体实现上，如果存储器502和处理器501集成在一块芯片上实现，则存储器502和处理器501可以通过内部接口完成通信。

本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random accessmemory，RAM)、磁盘或者光盘等各种可以存储程序代码的介质，具体的，该计算机可读存储介质中存储有程序指令，程序指令用于上述各方法实施例中的方法。

本申请实施例还提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由本申请的权利要求书指出。

应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims

1.一种操作状态识别与处理方法，其特征在于，包括：

获取用户在预设操作区的位姿信息以及接触识别信息；

将所述位姿信息以及所述接触识别信息与标准操作信息进行比对，以确定所述用户是否处于标准操作状态，所述标准操作信息与所述用户以及被操控对象在预设时间内的运行状态相对应；

若否，则控制所述被操控对象执行预设调整程序，以使所述用户以及所述被操控对象回到满足预设安全规则的状态。

2.根据权利要求1所述的操作状态识别与处理方法，其特征在于，所述位姿信息包括：所述用户的至少一个身体部位的位置信息与姿势信息，所述接触识别信息包括：所述预设操作区上的压力传感器所检测到的接触压力值；

所述将所述位姿信息以及所述接触识别信息与标准操作信息进行比对，以确定所述用户是否处于标准操作状态，包括：

获取所述被操控对象的运行环境信息以及所述运行状态；

根据所述运行环境信息以及所述运行状态，确定所述身体部位的标准位置、标准姿势以及标准压力值；

并确定所述位置信息与所述标准位置的位置偏差、所述姿势信息与所述标准姿势的姿势偏差、所述接触压力值与所述标准压力值的压力偏差，是否均满足各自的预设条件。

3.根据权利要求2所述的操作状态识别与处理方法，其特征在于，所述被操控对象包括：车辆，所述预设操作区包括：方向盘，和/或，操纵杆上的预设标准握持区，对应的，所述接触压力值包括：所述用户的手部对所述方向盘，和/或，所述操纵杆的握力值，所述位置信息包括：手部位置，所述姿势信息包括：手部姿势；

对应的，所述确定所述位置信息与所述标准位置的位置偏差、所述姿势信息与所述标准姿势的姿势偏差、所述接触压力值与所述标准压力值的压力偏差，是否均满足各自的预设条件，包括：

实时监测所述手部位置与所述预设标准握持区的所述位置偏差是否在预设位置偏离范围内；

若否，则确定所述用户处于第一非标准操作状态；

对应的，所述控制所述被操控对象执行预设调整程序，包括：

控制所述车辆向所述用户发送报警提示信息。

4.根据权利要求3所述的操作状态识别与处理方法，其特征在于，在所述控制所述车辆向所述用户发送报警提示信息之后，还包括：

判断所述异常时长是否小于第二时间阈值，所述第二时间阈值大于或等于所述第一时间阈值；

若否，则确定所述用户处于第二非标准操作状态；

根据所述运行环境信息确定安全停止位置；

控制所述车辆减速靠边行驶，直至停靠在所述安全停止位置。

5.根据权利要求4所述的操作状态识别与处理方法，其特征在于，在所述实时监测所述手部位置与所述预设标准握持区的所述位置偏差是否在预设位置偏离范围内之后，还包括：

若是，则实时监测所述手部姿势与所述标准姿势的所述姿势偏差是否在预设姿势偏离范围内；

若否，则进入所述异常计时模式，判断所述异常时长是否小于所述第一时间阈值，和/或，是否小于所述第二时间阈值；

以确定所述用户处于所述第一非标准操作状态，或所述第二非标准操作状态，并控制所述被操控对象执行对应的预设调整程序。

6.根据权利要求5所述的操作状态识别与处理方法，其特征在于，在所述实时监测所述手部姿势与所述标准姿势的所述姿势偏差是否在预设姿势偏离范围内之后，还包括：

若是，则实施监测所述握力值与所述标准压力值的所述压力偏差是否在预设压力偏离范围内；

7.一种操作状态识别与处理装置，其特征在于，包括：

处理模块，用于将所述位姿信息以及所述接触识别信息与标准操作信息进行比对，以确定所述用户是否处于标准操作状态，所述标准操作信息与所述用户以及被操控对象在预设时间内的运行状态相对应；

8.一种电子设备，其特征在于，包括：

处理器；以及，

存储器，用于存储所述处理器的计算机程序；

其中，所述处理器配置为经由执行所述计算机程序来执行权利要求1至6任一项所述的操作状态识别与处理方法。

9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6任一项所述的操作状态识别与处理方法。

10.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6任一项所述的操作状态识别与处理方法。