CN107765966A - 基于图片的事件触发方法、装置、智能终端及存储介质 - Google Patents

Abstract

本发明实施例公开了一种基于图片的事件触发方法、装置、智能终端及存储介质。所述方法包括：当收到截图指令时，根据所述截图指令截取目标图片；识别并获取所述目标图片对应的目标字符；根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。通过本发明的技术方案，能够简化操作流程，提高操作过程的精确性和可靠性，提升用户体验。

Description

基于图片的事件触发方法、装置、智能终端及存储介质

技术领域

本发明涉及人机交互技术，尤其涉及一种基于图片的事件触发方法、装置、智能终端及存储介质。

背景技术

随着智能终端设备的不断发展，人们对人机交互便利性的要求越来越高。特别是针对提取手机图片中的电话号码等信息进行拨打电话等操作的问题，传统的操作方式是通过人工识别并记忆图片中的电话号码等信息，再退出查看图片界面，并进入相应的操作界面手动输入图片中的电话号码等信息，再进行拨打电话等操作。这种方法由于需要用户记忆图片中的信息才能进行相应的手动输入，因而可能会导致需要反复查看图片并多次切换操作界面才能完成相应的信息输入，不仅操作流程复杂，而且信息输入的准确性较低，容易因为输入错误而导致误操作等问题。

发明内容

本发明实施例提供一种基于图片的事件触发方法、装置、智能终端及存储介质，以实现简化操作流程，提高操作过程的精确性和可靠性，提升用户体验。

第一方面，本发明实施例提供了一种基于图片的事件触发方法，包括：

当收到截图指令时，根据所述截图指令截取目标图片；

识别并获取所述目标图片对应的目标字符；

根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

第二方面，本发明实施例还提供了一种基于图片的事件触发装置，该装置包括：

图片截取模块，用于当收到截图指令时，根据所述截图指令截取目标图片；

字符获取模块，用于识别并获取所述目标图片对应的目标字符；

事件触发模块，用于根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

第三方面，本发明实施例还提供了一种智能终端，该智能终端包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的基于图片的事件触发方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的基于图片的事件触发方法。

本发明实施例通过截取目标图片并获取目标图片对应的目标字符，再根据该目标字符以及基于该目标字符选择的目标功能，触发相应的目标事件，利用了直接使用图片中的字符来触发事件的优点，解决了传统操作方式中因需要人工识别和手动输入相应的信息，而导致的操作流程复杂、容易误操作等问题，实现了简化操作流程，提高操作过程的精确性和可靠性，提升用户体验的效果。

附图说明

图1是本发明实施例一提供的一种基于图片的事件触发方法的流程示意图；

图2是本发明实施例二提供的一种基于图片的事件触发方法的流程示意图；

图3是本发明实施例三提供的一种基于图片的事件触发装置的结构示意图；

图4是本发明实施例四提供的一种智能终端的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1为本发明实施例一提供的一种基于图片的事件触发方法的流程示意图。该方法可适用于基于图片来触发事件的情况，该方法可以由基于图片的事件触发装置来执行，该装置可由硬件和/或软件组成，并一般可集成在手机以及所有包含事件触发功能的智能终端中。具体包括如下：

S110、当收到截图指令时，根据截图指令截取目标图片。

可选的，若检测到用户触发截图功能的操作，则确认收到截图指令。其中，触发截图功能的操作包括但不限于点击截图图标、按下截图快捷键等操作。

可选的，根据截图指令截取的目标图片可以是，图片查看界面中显示的整张图片，也可以是从被选中的整张图片中截取的部分图片。

由于在整张图片中可能会包含除目标字符以外的其他字符，因此，如果截取的目标图片过大，可能会造成后续目标字符识别不准确，截取目标图片的目的在于，实时截取包含目标字符的目标图片，以提高后续步骤中对目标字符的识别精度，同时可以避免识别太多的其他字符，节省获取目标字符的时间，提高目标字符的识别效率。

优选的，根据截图指令截取目标图片，包括：

根据截图指令确定图片截取范围；

截取图片截取范围内的目标图片。

示例性的，当用户选择截图功能后，可生成相应的截图指令，根据该指令在图片查看界面上显示一个可拖动、可缩放的框选区域，通过用户人工定位目标字符，并拖动和/或缩放该框选区域，将目标字符框选在该框选区域内，当用户点击确定按钮则将此框选区域确定为图片截取范围，并截取该图片截取范围内的部分作为目标图片。在一个具体例子中，当智能手机获取到截图指令时，可根据手势轨迹从左上角拖动至右下角生成一个框选区域，同时，还可对框选区域的任意边界进行移动，以改变框选区域的大小，在确定框选区域的大小后，还可通过滑动触摸将框选区域拖动至屏幕的任意位置。

S120、识别并获取目标图片对应的目标字符。

可选的，目标字符可以是特定种类的字符，例如字母字符和/或数字字符。示例性的，可由智能终端自动对目标图片中特定种类的字符进行识别，也可以先由智能终端对目标图片中的所有字符进行识别，再由智能终端从所有字符中挑选出符合预设条件的字符作为目标字符。

识别并获取目标图片对应的目标字符的目的在于，通过图片文字识别自动将图片中的目标字符转变为文本形式的字符，从而可直接对文本形式的字符进行编辑处理，以直接用于触发相应的目标事件，免去了人工进行识别并根据记忆手动进行输入才能触发相应的目标事件，提高了字符的输入效率及准确性。

优选的，识别并获取目标图片对应的目标字符，包括：

识别目标图片中包含的所有字符；

从所有字符中获取匹配的目标字符。

示例性的，可先采用图片文字识别技术识别目标图片中包含的所有字符，其中，采用的图片文字识别技术可以是先通过字符分割技术获取所有字符图片，并提取每个字符图片的特征，再通过预先训练的分类器对每个字符图片进行分类，从而得到每个字符图片对应的字符；当然，还可以采用其他的图片文字识别技术，在此不作限定。当所有字符都识别出来后，根据预设的字符种类条件，获取匹配该预设种类条件的字符为目标字符，例如，若想要获取图片中的电子邮件，则可通过从所有字符中获取的字母字符和数字字符作为目标字符。

S130、根据目标字符以及基于目标字符选择的目标功能，触发相应的目标事件。

可选的，可根据目标字符的种类对应划分不同的功能以供用户选择，例如，若目标字符为数字字符，则对应的功能可以为通讯类功能；若目标字符为数字、字母以及某些特殊符号(例如“@”和“.”)的组合字符，则对应的功能可以为邮件类功能。示例性的，当用户在目标字符对应的功能中选择了其中某一功能，即目标功能，则可根据该目标功能以及获取的目标字符触发相应的目标事件。

以一个具体实例而言，目标字符为字母、数字和某些特殊符号(例如“//”、“/”、“:”和“.”)的组合字符，则对应的功能可以为网页类功能，其中，网页类功能可包含“打开网页”、“复制链接”、“网页分享”等，若用户基于该网页类功能选择的目标功能是“打开网页”，则触发打开目标字符所表示的网址的事件。

根据目标字符以及基于目标字符选择的目标功能触发相应的目标事件的好处在于，可以由智能终端代替人工完成对图片中所包含信息的识别，以及基于该识别信息所要完成的操作，根据用户选择的功能自动触发相应的操作事件，从而节约了事件触发的操作时间，简化了操作流程，提高了操作的精确性和可靠性，提升了用户体验。

优选的，根据目标字符以及基于目标字符选择的目标功能，触发相应的目标事件，包括：

弹出与目标字符对应的功能选择提示框；

根据功能选择提示框中选择的目标功能获取相应的界面跳转指令；

根据界面跳转指令将当前显示界面跳转至目标界面；

将目标图片对应的目标字符填充至目标界面中的对应区域；

若收到针对目标事件的点击指令，则基于目标界面执行相应的目标事件。

以一个具体例子而言，目标字符为数字、字母以及某些特殊符号(例如“@”和“.”)的组合字符，则在获取该目标字符后，弹出对应的邮件类功能选择提示框，该提示框中可包含“发送邮件”、“复制地址”以及“保存地址”等功能，当用户选择了“发送邮件”功能时，获取跳转至邮箱的界面跳转指令，并根据该指令将当前显示界面跳转至邮箱界面，然后，将获取的目标字符填充至邮箱界面中的收件人编辑区域，当用户编辑完其他相应内容后，点击邮件发送按钮，则智能终端可收到针对邮件发送事件的点击指令，进而可触发邮件发送事件，将邮件发送至目标字符所表示的收件人邮箱。

优选的，在识别并获取目标图片对应的目标字符之后，还包括：

以悬浮方式在当前显示界面上显示目标图片；

若检测到对获取的目标字符有修改操作，则将修改后的目标字符作为目标图片对应的目标字符。

示例性的，当获取到目标字符之后，可将目标图片缩小并悬浮在当前显示界面的一角，以方便用户对获取的目标字符进行人工比对确认，若对目标字符的识别有误，则可方便用户对照悬浮的目标图片进行手动修改，提高操作精确性及可靠性，以避免误操作。可选的，人工比对确认过程可设置在对目标功能的选择之后，也可设置在对目标功能的选择之前。例如，在识别出目标字符之后可先基于该目标字符进行功能选择，并根据选择的功能进行界面跳转，并在跳转后的界面上悬浮显示该目标图片，在将目标字符填充至界面上的设定区域后，用户可对照悬浮显示的目标图片与填充后的目标字符，对目标字符进行比对确认，若有不符，则可对获取的目标字符进行修改，当智能设备检测到该修改操作，则该设定区域内直接显示该修改后的目标字符，并基于该修改后的目标字符触发相应的目标事件。而另一个例子中，在识别出目标字符之后可先形成一个可修改的文本框，并将获取的目标字符填充至该文本框中，用户根据悬浮在一角的目标图片对目标字符进行比对确认，若有修改，则基于修改后的目标字符进行相应的功能选择，并触发相应的目标事件。当然，人工比对确认过程还可发生在获取目标字符后的其他任意时刻，在此不作限定。

本实施例的技术方案，通过截取目标图片并获取目标图片对应的目标字符，再根据该目标字符以及基于该目标字符选择的目标功能，触发相应的目标事件，利用了直接使用图片中的字符来触发事件的优点，解决了传统操作方式中因需要人工识别和手动输入相应的信息，而导致的操作流程复杂、容易误操作等问题，实现了简化操作流程，提高操作过程的精确性和可靠性，提升用户体验的效果。

实施例二

图2为本发明实施例二提供的一种基于图片的事件触发方法的流程示意图。本实施例以上述实施例为基础进行优化，提供了优选的基于图片的事件触发方法，具体是，将目标字符进一步优化为数字字符。具体包括如下：

S210、当收到截图指令时，根据截图指令截取目标图片。

S220、识别并获取目标图片对应的数字字符。

优选的，数字字符可以为连续的数字字符。

S230、弹出与数字字符对应的通讯功能选择提示框。

其中，通讯功能选择提示框中包括但不限于“拨打电话”、“发送信息”、“添加通讯录”等功能。弹出通讯功能选择提示框的目的在于提示用户可基于该获取的数字字符进行功能选择，以触发相应的功能操作。

S240、根据通讯功能选择提示框中选择的目标通讯功能获取相应的通讯界面跳转指令。

示例性的，若用户选择通讯功能选择提示框中的某一功能，即目标通讯功能，则可获取该目标通讯功能对应的通讯界面跳转指令，以使智能终端可根据该指令跳转至通讯界面。例如，若用户选择通讯功能选择提示框中的“拨打电话”功能，则可获取相应的拨号界面跳转指令。

S250、根据通讯界面跳转指令将当前显示界面跳转至通讯界面。

示例性的，通讯界面与选择的通讯功能相对应，不同的通讯功能可获取不同的通讯界面跳转指令，进而将当前显示界面跳转至不同的通讯界面。例如，若选择的目标通讯功能为“发送信息”，则获取的通讯界面跳转指令可以是短信界面跳转指令，可将当前显示界面跳转至短信界面。具体的，通讯功能与通讯界面之间的对应关系可在数据表中对应设置。

S260、将目标图片对应的数字字符填充至通讯界面中的号码填写区域。

示例性的，号码填写区域可以是通讯界面中支持数字编辑的区域，例如拨号界面的电话号码输入区域，通讯录界面的联系人电话输入区域，短信界面的收件人输入区域，等。这样设置的好处在于，可以自动将目标图片中的目标字符经识别和获取后填写至需要该目标字符的地方，以代替人工完成目标字符的输入过程，进而提高了操作效率，提高了操作过程的精确性和可靠性，用户只需基于已填写完毕的目标字符进行相应的操作，从而提升了用户体验。

S270、若收到针对目标通讯操作的点击指令，则基于通讯界面执行目标通讯操作。

示例性的，在不同的通讯界面中可触发并执行不同的通讯操作，例如，在拨号界面可触发并执行拨打操作、新建通讯录等操作，若用户点击拨打操作对应的按钮，则可确认收到针对拨打操作的点击指令，进而在拨号界面中根据该点击指令执行拨打电话的操作，即拨打目标字符代表的电话号码。

本实施例的技术方案，通过截取目标图片，并根据获取的目标图片对应的目标字符弹出相应的通讯功能选择提示框，进而根据在提示框中选择的目标通讯功能将当前的显示界面跳转至通讯界面，最终在该通讯界面上完成目标字符的填充以及对应目标通讯操作的执行过程，实现了基于图片进行电话拨打等操作的自动化过程，简化了操作流程，提高了操作效率，提升了用户体验。

实施例三

图3为本发明实施例三提供的一种基于图片的事件触发装置的结构示意图。参考图3，基于图片的事件触发装置包括：图片截取模块310、字符获取模块320以及事件触发模块330，下面对各模块进行具体说明。

图片截取模块310，用于当收到截图指令时，根据所述截图指令截取目标图片；

字符获取模块320，用于识别并获取所述目标图片对应的目标字符；

事件触发模块330，用于根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

可选的，所述图片截取模块310，具体可以用于：

根据所述截图指令确定图片截取范围；

截取所述图片截取范围内的目标图片。

可选的，所述字符获取模块320，具体可以用于：

识别所述目标图片中包含的所有字符；

从所述所有字符中获取匹配的目标字符。

可选的，所述事件触发模块330，具体可以用于：

弹出与所述目标字符对应的功能选择提示框；

根据所述功能选择提示框中选择的目标功能获取相应的界面跳转指令；

根据所述界面跳转指令将当前显示界面跳转至目标界面；

将所述目标图片对应的目标字符填充至所述目标界面中的对应区域；

若收到针对目标事件的点击指令，则基于所述目标界面执行相应的目标事件。

可选的，还包括：

图片显示模块，用于在识别并获取所述目标图片对应的目标字符之后，以悬浮方式在当前显示界面上显示所述目标图片；

字符修改模块，用于若检测到对获取的目标字符有修改操作，则将修改后的目标字符作为所述目标图片对应的目标字符。

可选的，所述目标字符为数字字符；

相应的，所述事件触发模块330，具体可以用于：

弹出与所述数字字符对应的通讯功能选择提示框；

根据所述通讯功能选择提示框中选择的目标通讯功能获取相应的通讯界面跳转指令；

根据所述通讯界面跳转指令将当前显示界面跳转至通讯界面；

将所述目标图片对应的数字字符填充至所述通讯界面中的号码填写区域；

若收到针对目标通讯操作的点击指令，则基于所述通讯界面执行目标通讯操作。

上述产品可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块和有益效果。

实施例四

图4为本发明实施例四提供的一种智能终端的结构框图，如图4所示，本实施例提供的一种智能终端，包括：处理器41和存储器42。该智能终端中的处理器可以是一个或多个，图4中以一个处理器41为例，所述智能终端中的处理器41和存储器42可以通过总线或其他方式连接，图4中以通过总线连接为例。

本实施例中智能终端的处理器41中集成了上述实施例提供的基于图片的事件触发装置。此外，该智能终端中的存储器42作为一种计算机可读存储介质，可用于存储一个或多个程序，所述程序可以是软件程序、计算机可执行程序以及模块，如本发明实施例中基于图片的事件触发方法对应的程序指令/模块(例如，附图3所示的基于图片的事件触发装置中的模块，包括：图片截取模块310、字符获取模块320以及事件触发模块330)。处理器41通过运行存储在存储器42中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述方法实施例中基于图片的事件触发方法。

存储器42可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器42可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器42可进一步包括相对于处理器41远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

并且，当上述智能终端所包括一个或者多个程序被所述一个或者多个处理器41执行时，程序进行如下操作：

当收到截图指令时，根据所述截图指令截取目标图片；识别并获取所述目标图片对应的目标字符；根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

实施例五

本发明实施例五还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被基于图片的事件触发装置执行时实现如本发明实施例一提供的基于图片的事件触发方法，该方法包括：当收到截图指令时，根据所述截图指令截取目标图片；识别并获取所述目标图片对应的目标字符；根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

当然,本发明实施例所提供的一种计算机可读存储介质,其上存储的计算机程序被执行时不限于实现如上所述的方法操作,还可以实现本发明任意实施例所提供的基于图片的事件触发方法中的相关操作。

通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

值得注意的是，上述基于图片的事件触发装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种基于图片的事件触发方法，其特征在于，包括：

当收到截图指令时，根据所述截图指令截取目标图片；

识别并获取所述目标图片对应的目标字符；

根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

2.根据权利要求1所述的方法，其特征在于，所述根据所述截图指令截取目标图片，包括：

根据所述截图指令确定图片截取范围；

截取所述图片截取范围内的目标图片。

3.根据权利要求1所述的方法，其特征在于，所述识别并获取所述目标图片对应的目标字符，包括：

识别所述目标图片中包含的所有字符；

从所述所有字符中获取匹配的目标字符。

4.根据权利要求1所述的方法，其特征在于，所述根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件，包括：

弹出与所述目标字符对应的功能选择提示框；

根据所述功能选择提示框中选择的目标功能获取相应的界面跳转指令；

根据所述界面跳转指令将当前显示界面跳转至目标界面；

将所述目标图片对应的目标字符填充至所述目标界面中的对应区域；

若收到针对目标事件的点击指令，则基于所述目标界面执行相应的目标事件。

5.根据权利要求4所述的方法，其特征在于，在识别并获取所述目标图片对应的目标字符之后，还包括：

以悬浮方式在当前显示界面上显示所述目标图片；

若检测到对获取的目标字符有修改操作，则将修改后的目标字符作为所述目标图片对应的目标字符。

6.根据权利要求1-5任一项所述的方法，其特征在于，所述目标字符为数字字符；

相应的，所述根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件，包括：

弹出与所述数字字符对应的通讯功能选择提示框；

根据所述通讯功能选择提示框中选择的目标通讯功能获取相应的通讯界面跳转指令；

根据所述通讯界面跳转指令将当前显示界面跳转至通讯界面；

将所述目标图片对应的数字字符填充至所述通讯界面中的号码填写区域；

若收到针对目标通讯操作的点击指令，则基于所述通讯界面执行目标通讯操作。

7.一种基于图片的事件触发装置，其特征在于，包括：

图片截取模块，用于当收到截图指令时，根据所述截图指令截取目标图片；

字符获取模块，用于识别并获取所述目标图片对应的目标字符；

事件触发模块，用于根据所述目标字符以及基于所述目标字符选择的目标功能，触发相应的目标事件。

8.根据权利要求7所述的装置，其特征在于，所述事件触发模块具体用于：

弹出与所述目标字符对应的功能选择提示框；

根据所述功能选择提示框中选择的目标功能获取相应的界面跳转指令；

根据所述界面跳转指令将当前显示界面跳转至目标界面；

将所述目标图片对应的目标字符填充至所述目标界面中的对应区域；

若收到针对目标事件的点击指令，则基于所述目标界面执行相应的目标事件。

9.一种智能终端，其特征在于，所述智能终端包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的基于图片的事件触发方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的基于图片的事件触发方法。