CN112230815B

CN112230815B - 智能求助方法、装置、设备及存储介质

Info

Publication number: CN112230815B
Application number: CN202011133671.7A
Authority: CN
Inventors: 胡玮; 胡路苹; 胡传杰
Original assignee: Bank of China Ltd
Current assignee: Bank of China Ltd
Priority date: 2020-10-21
Filing date: 2020-10-21
Publication date: 2022-03-15
Anticipated expiration: 2040-10-21
Also published as: CN112230815A

Abstract

本申请实施例公开了一种智能求助方法、装置、设备及存储介质，基于目标应用进行智能求助，其中，目标应用在检测到针对目标应用的图标的第一目标输入操作时，展示第一界面。若监测到针对目标应用的图标的第二目标输入操作，采集用户的手势信息和用户所处环境的环境信息；若手势信息匹配目标手势，至少根据手势信息和环境信息判断是否需要联动与目标手势对应的求助系统；在判断结果为需要联动求助系统时，获取求助相关信息，并将求助相关信息传输给求助系统；求助相关信息包括：用户的标识信息、联系方式以及环境信息。提供了一种基于应用的求助方案。

Description

智能求助方法、装置、设备及存储介质

技术领域

本申请涉及信息处理技术领域，更具体地说，涉及一种智能求助方法、装置、设备及存储介质。

背景技术

目前，当人们遇到事故需要求助时，通常是拨打报警电话进行求助。这种求助方式单一，应用范围较小。因此，如何提供新的求助方式成为亟待解决的技术问题。

发明内容

本申请的目的是提供一种智能求助方法、装置、设备及存储介质，以至少部分的克服现有技术中存在的技术问题。

为实现上述目的，本申请提供了如下技术方案：

一种智能求助方法，应用于目标应用，所述目标应用在监测到针对所述目标应用的图标的第一目标输入操作时，展示第一界面；所述方法包括：

若监测到针对所述图标的第二目标输入操作，采集用户的手势信息和所述用户所处环境的环境信息；

至少根据所述手势信息和所述环境信息判断是否需要联动与目标手势对应的求助系统；

在判断结果为需要联动所述求助系统时，获取求助相关信息，并将所述求助相关信息传输给所述求助系统；所述求助相关信息包括：所述用户的标识信息、联系方式以及所述环境信息。

上述方法，优选的，所述目标应用为具有支付功能的应用。

上述方法，优选的，若监测到针对所述目标应用的图标的第二目标输入操作，还包括：展示所述第一界面。

上述方法，优选的，所述至少根据所述手势信息和所述环境信息判断是否需要联动与所述目标手势对应的求助系统，包括：

至少将所述手势信息和所述环境信息输入预先训练好的判别模型，以确定是否需要联动与所述目标手势对应的求助系统。

上述方法，优选的，所述至少将所述手势信息和所述环境信息输入预先训练好的判别模型，以确定是否需要联动与目标手势对应的求助系统，包括：

获取所述用户的历史求助信息，所述历史求助信息包括：预设历史时长内所述用户针对所述图标执行的各次求助操作，以及每一次求助操作对应的是否关联求助系统的结果；所述求助操作包括：第二目标输入操作和手势输入操作；

将所述历史求助信息，所述手势信息和所述环境信息输入预先训练好的判别模型，以确定是否需要联动与目标手势对应的求助系统。

上述方法，优选的，还包括：

获取针对目标求助系统的手势设置请求；所述目标求助系统为所述目标应用能够联动的多个求助系统中的任意一个求助系统；

响应于所述手势设置请求，采集用户手势图像；

对所述手势图像进行处理，以确定用户手势；

将所述用户手势转换为简笔画，保存并显示所述简笔画。

上述方法，优选的，所述至少根据所述手势信息和所述环境信息判断是否需要联动与目标手势对应的求助系统，包括：

将所述手势信息对应的手势转换为第一简笔画；

至少根据所述第一简笔画和所述环境信息判断是否需要联动与目标手势对应的求助系统。

一种智能求助装置，应用于目标应用，所述目标应用在监测到针对所述目标应用的图标的第一目标输入操作时，展示第一界面；所述装置包括：

采集模块，用于若监测到针对所述图标的第二目标输入操作，采集用户的手势信息和所述用户所处环境的环境信息；

判断模块，用于至少根据所述手势信息和所述环境信息判断是否需要联动与目标手势对应的求助系统；

联动模块，用于在所述判别模型的输出结果为需要联动所述求助系统时，获取求助相关信息，并将所述求助相关信息传输给所述求助系统；所述求助相关信息包括：所述用户的标识信息、联系方式以及所述环境信息。

一种电子设备，包括存储器和处理器；

所述存储器用于存储程序；

所述处理器用于执行所述存储器中存储的程序，以实现如上任意一项所述的智能求助方法的各个步骤。

一种计算机可读存储介质，其上存储有程序，所述程序被处理器执行时，实现如上任意一项所述的智能求助方法的各个步骤。

本申请提供的智能求助方法、装置、设备及存储介质，基于目标应用进行智能求助，其中，目标应用在检测到针对目标应用的图标的第一目标输入操作时，展示第一界面。若监测到针对目标应用的图标的第二目标输入操作，采集用户的手势信息和用户所处环境的环境信息；若手势信息匹配目标手势，至少根据手势信息和环境信息判断是否需要联动与目标手势对应的求助系统；在判断结果为需要联动求助系统时，获取求助相关信息，并将求助相关信息传输给求助系统；求助相关信息包括：用户的标识信息、联系方式以及环境信息。提供了一种基于应用的求助方案。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的智能求助方法的一种实现流程图；

图2为本申请实施例提供的智能求助装置的一种结构示意图；

图3为本申请实施例提供的电子设备的硬件结构框图。

说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的部分，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示的以外的顺序实施。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请提供的智能求助方法和装置可以应用于各类应用(为便于叙述，记为目标应用)中，该目标应用不是专用于提供求助功能的应用，也就是说该目标用于主要用于为用户提供非求助功能，比如，该应用可以是地图类应(比如，百度地图，高德地图等)用，或者，可以是社交类应用(比如，微信、微博等)，或者，可以是新闻类应用(头条、腾讯新闻等)等。

目标应用在检测到针对目标应用的图标的第一目标输入操作(比如单击)时，展示一界面(为便于叙述，记为第一界面)，该第一界面可以为用户提供非求助功能，其中，目标应用可以提供的用于提供非求助功能的界面有多个(具体在哪个有目标应用的处理逻辑确定)，第一界面可以是该多个界面中的任意一个界面。

本申请提供的智能求助方法的一种实现流程图如图1所示，可以包括：

步骤S11：若监测到针对目标应用的图标的第二目标输入操作，采集用户的手势信息和用户所处环境的环境信息。

本申请实施例中，目标应用实时监测是否有针对目标应用的图标的输入操作，若监测到针对目标应用的图标的输入操作，则如果该输入操作是第一目标输入操作(比如单击)，则显示第一界面，该第一界面可以用户最后一次退出目标应用时的界面，或者，可以是目标应用预定义的其它显示界面。如果该输入操作是第二目标输入操作(比如双击)，则采集用户的手势信息和用户所处环境的环境信息。

具体的，可以调用目标应用所在电子设备(比如，手机、PAD等)的图像采集单元来采集用户的手势信息，基于此，用户可以在针对目标应用的图标执行第二目标输入后，执行手势动作，以便目标应用通过图像采集单元采集用户的手势信息。当然，目标应用还可以通过图像采集单元采集用户所出环境的环境信息，通过图像采集单元只能采集用户所处环境的现场可视物体或人，用户所处环境的环境信息除了现场可视物或人外，还可以包括现场的地理位置，地理位置可以通过电子设备的定位单元获取，可选的，用户所处环境的环境信息还可以包括用户所处环境的现场声音信息，声音信息可以通过电子设备的语音采集单元获取。可选的，用户所处环境的环境信息还可以包括用户所处环境的现场温度、湿度、亮度等信息，温度可以通过电子设备的温度传感器获取，湿度可以通过电子设备的湿度传感器获取，亮度可以通过电子设备的亮度传感器获取。

其中，为了保持求助的隐蔽性，在采集用户手势信息后环境信息时，不显示图像采集的预览界面。

可选的，对应不同的求助系统，所需的环境信息可以相同，也可以不同，具体每个求助系统需要哪些环境信息可以根据需要确定。

步骤S12：至少根据采集的手势信息和采集的环境信息判断是否需要联动与目标手势对应的求助系统。

本申请实施例中，不同的求助系统对应不同的手势，本申请在采集到手势信息后，不是直接利用手势信息判断是否要联动求助系统，而是至少根据采集的手势信息和采集的环境信息判断是否需要联动与目标手势对应的求助系统。

对应每一个求助系统，可以将采集的手势信息与该求助系统对应的手势(为便于叙述，记为目标手势)进行匹配，确定采集的手势信息是否与目标手势匹配，若采集的手势信息与目标手势匹配，说明用户有可能需要求助，但本申请在采集的手势信息与目标手势匹配时，并不是直接联动目标手势对应的求助系统，而是再根据采集的环境信息判断是否需要联动与目标手势对应的求助系统。

比如，假设用户输入的手势信息所表征的手势是与交通事故求助系统对应的手势，但是根据用户的环境信息确定用户是在家里，这就说明用户没有发生交通事故，不需要联动交通事故求助系统。

可选的，可以针对每个求助系统，预先设置环境信息与是否联动该求助系统的对应关系，则在确定采集的手势信息表征目标手势时，根据采集的环境信息以及该对应关系，确定是否联动目标手势对应的求助系统。

步骤S13：在判断结果为需要联动求助系统时，获取求助相关信息，并将求助相关信息传输给求助系统；其中，求助相关信息包括：用户的标识信息、联系方式以及环境信息。

可选的，用户的标识信息可以是用户的身份证号或其它能够识别用户身份的信息，比如，姓名、手机号或者头像等。

在判断出需要联动求助系统时，再联动求助系统，具体为：获取求助相关信息并将该求助相关信息传输给求助系统，以便求助系统为用户提供帮助，或求助系统通知相关人员为用户提供帮助。

本申请实施例提供的智能求助方法，借助于目标应用实现智能求助，目标应用在采集到用户手势信息后，不是直接利用手势信息确定是否联动求助系统，而是至少根据采集的手势信息和采集的环境信息判断是否需要联动与目标手势对应的求助系统，如果判断结果为是，再联动目标手势对应的求助系统，提高了求助的准确性，降低误求助的概率，也就是降低求助系统接收无效求助信息的概率，从而提高求助系统的有效利用率。

在一可选的实施例中，在一些场景下，比如在用户受胁迫的场景下，用户被要求转账，为了保证求助的隐蔽性，目标应用可以为具有支付功能的应用，比如，手机银行、支付宝等。

在一可选的实施例中，不同求助系统对应的手势可以是表征数字的手势，一方面，数字容易表示，另一方面，在一些场景下，数字不容易引起注意，比如在用户受胁迫被要求转账的情况下，进一步提高求助的隐蔽性。

在一可选的实施例中，为了进一步提高求助的隐蔽性，若监测到针对所述目标应用的图标的第二目标输入操作，除了集用户的手势信息和用户所处环境的环境信息外，还可以展示所述第一界面，让人误以为用户只是在正常操作目标应用。

在一可选的实施例中，上述至少根据手势信息和环境信息判断是否需要联动与目标手势对应的求助系统的一种实现方式可以包括：

至少将手势信息和环境信息输入预先训练好的判别模型，以确定是否需要联动与目标手势对应的求助系统。

该判别模型的训练过程可以包括：

将样本信息输入所述判别模型，得到预测判别结果，该预测判别结果表征是否需要联动与目标手势对应的求助系统的；目标手势是各个求助系统对应的手势中的任意一个手势。其中，每个样本信息均至少包括同时采集的手势信息和环境信息。

根据判别结果与样本信息的标签的差异，对判别模型的参数进行更新。具体更新参数所使用的算法可以是已有的一些参数更新算法，由于不是本案的重点，这里不再详述。样本信息的标签表征样本信息对应的真实判别结果，即真实的是否需要联动与目标手势对应的求助系统。

为了提高判别模型的判别精度，输入判别模型的除了手势信息和环境信息外，还可以包括用户的历史求助信息，该历史求助信息包括：预设历史时长内用户针对目标应用的图标执行的各次求助操作，以及每一次求助操作对应的是否关联求助系统的结果；所述求助操作包括：第二目标输入操作和手势输入操作；

也就是说，上述至少将手势信息和环境信息输入预先训练好的判别模型，以确定是否需要联动求助系统，包括：

获取用户的历史求助信息；

将用户的历史求助信息，采集的手势信息和环境信息输入预先训练好的判别模型，以确定是否需要联动求助系统。

基于此，在训练判别模型时，样本信息中除了包括同时采集的手势信息和环境信息外，还可以包括采集手势信息和环境信息前，用户的历史求助信息。

本申请实施例中，在判断是否需要联动与目标手势对应的求助系统时，增加了用户的历史求助记录这一参考指标，从而用户的历史求助记录能够体现用户的操作习惯，从而能够提高判别模型的判别精度。

在一可选的实施例中，目标应用可以与多个求助系统联动，用户可以在目标应用中针对各个求助系统分别设置对应的手势。基于此，本申请实施例提供的智能求助方法还可以包括手势设置过程，具体的，本申请的实施例提供的智能求助方法还可以包括：

获取针对目标求助系统的手势设置请求；目标求助系统为目标应用能够联动的多个求助系统中的任意一个求助系统。本申请实施例中，目标应用可以为用户提供设置界面，该设置界面上显示有该目标应用可以联动的各个求助系统的标识。用户可以针对任意一个求助系统的标识执行预设操作，从而触发手势设置请求。

响应于手势设置请求，采集用户手势图像。在获取到针对目标求助系统的手势设置请求后，可以调起图像采集单元，以便采集用户手势图像，此时，为了保证采集的准确性，可以显示预览界面，以便图像采集单元采集到手势。

对手势图像进行处理，以确定用户手势。具体实现过程可以参看已有的手势识别方案，这里不再详述。

将用户手势转换为简笔画，保存并显示简笔画。上一步骤确定的用户手势是图像形式本申请在确定用户手势后，不是直接保存手势，是将用户手势描述成简笔画形式的手势，进而将该简笔画形式的手势与目标求助系统相关联的保存，同时显示该简笔画形式的手势，以便用户确认是否是其设定的手势。通过将手势描述成简笔画，方便用户更清楚的查看录入的手势是否正确。

可选的，可以利用预先训练好的转换模型将用户手势转换为简笔画。具体在训练时，转换模型的输入是手势图像样本，输出为手势图像样本对应的简笔画，根据手势图像样本对应的简笔画与手势图像样本的标签的差异对转换模型的参数进行更新。

可选的，上述至少根据手势信息和环境信息判断是否需要联动与目标手势对应的求助系统的一种实现方式可以为：

将手势信息对应的手势转换为第一简笔画；

至少根据第一简笔画和环境信息判断是否需要联动与目标手势对应的求助系统。

由于简笔画的数据量小于图像的数据量，因此，基于简笔画和环境信息判断是否需要联动与目标手势对应的求助系统可以减小系统的计算量，节约计算资源。

与方法实施例相对应，本申请实施例还提供一种智能求助装置，应用于目标应用，该目标应用在检测到针对目标应用的图标的第一目标输入操作时，展示第一界面；该智能求助装置的一种结构示意图如图2所示，可以包括：

采集模块21，判断模块22和联动模块23；其中，

采集模块21用于若监测到针对所述图标的第二目标输入操作，采集用户的手势信息和所述用户所处环境的环境信息；

判断模块22用于至少根据所述手势信息和所述环境信息判断是否需要联动与目标手势对应的求助系统；

联动模块23用于在所述判别模型的输出结果为需要联动所述求助系统时，获取求助相关信息，并将所述求助相关信息传输给所述求助系统；所述求助相关信息包括：所述用户的标识信息、联系方式以及所述环境信息。

本申请实施例提供的智能求助装置，借助于目标应用实现智能求助，目标应用在采集到用户手势信息后，不是直接利用手势信息确定是否联动求助系统，而是至少根据采集的手势信息和采集的环境信息判断是否需要联动与目标手势对应的求助系统，如果判断结果为是，再联动目标手势对应的求助系统，提高了求助的准确性，降低误求助的概率，也就是降低求助系统接收无效求助信息的概率，从而提高求助系统的有效利用率。

在一可选的实施例中，上述目标应用为具有支付功能的应用。

在一可选的实施例中，还包括：

展示模块，用户若监测到针对所述目标应用的图标的第二目标输入操作，还包括：展示所述第一界面。

在一可选的实施例中，所述判断模块具体用于：

在一可选的实施例中，所述判断模块包括：

获取模块，用于获取所述用户的历史求助信息，所述历史求助信息包括：预设历史时长内所述用户针对所述图标执行的各次求助操作，以及每一次求助操作对应的是否关联求助系统的结果；所述求助操作包括：第二目标输入操作和手势输入操作；

输入模块，用户将所述历史求助信息，所述手势信息和所述环境信息输入预先训练好的判别模型，以确定是否需要联动与目标手势对应的求助系统。

在一可选的实施例中，还包括设置模块，用于：

响应于所述手势设置请求，采集用户手势图像；

对所述手势图像进行处理，以确定用户手势；

将所述用户手势转换为简笔画，保存并显示所述简笔画。

在一可选的实施例中，所述判断模块具体用于：

将所述手势信息对应的手势转换为第一简笔画；

本申请实施例提供的智能求助装置可应用于电子设备中，如PC终端、云平台、服务器及服务器集群等。可选的，图3示出了本申请实施例提供的电子设备的硬件结构框图，参照图3，该电子设备的硬件结构可以包括：

至少一个处理器1，至少一个通信接口2，至少一个存储器3和至少一个通信总线4。

在本申请实施例中，处理器1、通信接口2、存储器3、通信总线4的数量为至少一个，且处理器1、通信接口2、存储器3通过通信总线4完成相互间的通信；

处理器1可能是一个中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路等；

存储器3可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatilememory)等，例如至少一个磁盘存储器；

其中，存储器存储有程序，处理器可调用存储器存储的程序，所述程序用于：

在监测到针对目标应用的图标的第一目标输入操作时，展示第一界面；

可选的，所述程序的细化功能和扩展功能可参照上文描述。

本申请实施例还提供一种存储介质，该存储介质可存储有适于处理器执行的程序，所述程序用于：

可选的，所述程序的细化功能和扩展功能可参照上文描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

应当理解，本申请实施例中，从权、各个实施例、特征可以互相组合结合，都能实现解决前述技术问题。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims

1.一种智能求助方法，应用于目标应用，所述目标应用在监测到针对所述目标应用的图标的第一目标输入操作时，展示用于提供非求助功能的第一界面；其特征在于，所述目标应用为具有支付功能的应用，所述方法包括：

若监测到针对所述图标的第二目标输入操作，展示所述第一界面，并采集用户的手势信息和所述用户所处环境的环境信息；

2.根据权利要求1所述的方法，其特征在于，所述至少根据所述手势信息和所述环境信息判断是否需要联动与所述目标手势对应的求助系统，包括：

3.根据权利要求2所述的方法，其特征在于，所述至少将所述手势信息和所述环境信息输入预先训练好的判别模型，以确定是否需要联动与目标手势对应的求助系统，包括：

4.根据权利要求1所述的方法，其特征在于，还包括：

响应于所述手势设置请求，采集用户手势图像；

对所述手势图像进行处理，以确定用户手势；

将所述用户手势转换为简笔画，保存并显示所述简笔画。

5.根据权利要求4所述的方法，其特征在于，所述至少根据所述手势信息和所述环境信息判断是否需要联动与目标手势对应的求助系统，包括：

将所述手势信息对应的手势转换为第一简笔画；

6.一种智能求助装置，应用于目标应用，所述目标应用在监测到针对所述目标应用的图标的第一目标输入操作时，展示用于提供非求助功能的第一界面；其特征在于，所述目标应用为具有支付功能的应用，所述装置包括：

采集模块，用于若监测到针对所述图标的第二目标输入操作，展示所述第一界面，并采集用户的手势信息和所述用户所处环境的环境信息；

联动模块，用于在判别模型的输出结果为需要联动所述求助系统时，获取求助相关信息，并将所述求助相关信息传输给所述求助系统；所述求助相关信息包括：所述用户的标识信息、联系方式以及所述环境信息。

7.一种电子设备，其特征在于，包括存储器和处理器；

所述存储器用于存储程序；

所述处理器用于执行所述存储器中存储的程序，以实现如权利要求1-5任意一项所述的智能求助方法的各个步骤。

8.一种计算机可读存储介质，其上存储有程序，其特征在于，所述程序被处理器执行时，实现如权利要求1-5任意一项所述的智能求助方法的各个步骤。