CN104850330B - 信息处理方法、系统及电子设备 - Google Patents

信息处理方法、系统及电子设备 Download PDF

Info

Publication number
CN104850330B
CN104850330B CN201410053945.XA CN201410053945A CN104850330B CN 104850330 B CN104850330 B CN 104850330B CN 201410053945 A CN201410053945 A CN 201410053945A CN 104850330 B CN104850330 B CN 104850330B
Authority
CN
China
Prior art keywords
recognized
panel
plane
identified
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410053945.XA
Other languages
English (en)
Other versions
CN104850330A (zh
Inventor
冯晓毅
孔云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201410053945.XA priority Critical patent/CN104850330B/zh
Publication of CN104850330A publication Critical patent/CN104850330A/zh
Application granted granted Critical
Publication of CN104850330B publication Critical patent/CN104850330B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种信息处理方法及系统,应用于电子设备,电子设备至少具有第一面板,第一面板的第一面设置有显示单元和至少一个图像采集装置,当第一面板斜立于一平面时,至少一个图像采集装置位于显示单元的下方。至少一个图像采集装置采集待识别物体和平面的图像后,依据所采集的图像判断待识别物体是否接触平面;当判断出待识别物体接触平面时,检测待识别物体的位置变化信息,依据待识别物体的位置变化信息,触发相应操作。当用户需要通过手势进行控制时,需要在电子设备的放置平面上进行相应手势变换才能对电子设备进行控制,而不再需要悬空进行手势变换,方便了用户操作,用户不易疲劳。

Description

信息处理方法、系统及电子设备
技术领域
本发明涉及信息处理技术领域,更具体地说,涉及一种信息处理方法、系统及电子设备。
背景技术
随着电子技术的快速发展,通过手势识别实现对电子设备的控制越开越得到广泛应用,然而,目前的手势控制需要手处于悬空状态,容易使用户疲劳,且控制精度低。
发明内容
本发明的目的是提供一种信息处理方法、系统及电子设备,以减轻用户疲劳,提高控制精度。
为实现上述目的,本发明提供了如下技术方案:
一种信息处理方法,应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元下方,所述方法包括:
通过所述至少一个图像采集装置采集待识别物体和所述平面的图像;
依据所采集的图像判断所述待识别物体是否接触所述平面;
当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息;
依据所述待识别物体的位置变化信息,触发相应操作。
上述方法,优选的,所述依据所述待识别物体的位置变化信息,触发相应操作包括:
依据所述待识别物体的位置变化信息,相应改变通过所述显示单元显示的光标的位置。
上述方法,优选的,所述电子设备具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接;
在通过所述至少一个图像采集装置采集待识别物体的图像之前,所述方法还包括:
监测所述第一面板和所述第二面板之间的角度;
当所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置。
上述方法,优选的,当所述第一面板的第一面设置有一个图像采集装置时,所述依据所采集的图像判断所述待识别物体是否接触所述平面包括:
分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
当所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
上述方法,优选的,所述检测所述待识别物体的位置变化信息包括:
逐帧检测所述待识别物体在图像中的位置;
当所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
上述方法,优选的,当所述第一面板的第一面设置有至少两个图像采集装置时,所述依据所采集的图像判断所述待识别物体是否接触所述平面包括:
将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标,以及所述平面中各个点的坐标;
依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
上述方法,优选的,所述检测所述待识别物体的位置变化信息包括:
分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
上述方法,优选的,还包括:
当检测出所述待识别物体与所述平面分离时,停止检测所述待识别物体的位置变化信息。
一种信息处理系统,应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方,所述至少一个图像采集装置用于采集待识别物体和所述平面的图像,所述系统包括:
判断模块,用于依据所述至少一个图像采集装置采集的图像判断所述待识别物体是否接触所述平面;
检测模块,用于当所述判断模块判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息;
触发模块,用于依据所述待识别物体的位置变化信息,触发相应操作。
上述系统,优选的,所述触发模块包括:
光标控制单元,用于依据所述待识别物体的位置变化信息,相应改变所述显示单元显示的光标的位置。
上述系统,优选的,所述电子设备具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接;
所述系统还包括:
监测模块,用于监测所述第一面板和所述第二面板之间的角度;
开启模块,用于当所述监测模块监测到的所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置。
上述系统,优选的,当所述第一面板的第一面设置有一个图像采集装置时,所述判断模块包括:
第一获取单元,用于分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
第一确定单元,用于在所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
上述系统,优选的,所述检测模块包括:
位置检测单元,用于当所述判断模块判断出所述待识别物体接触所述平面时,逐帧检测所述待识别物体在图像中的位置;
第二确定单元,用于在所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
上述系统,优选的,当所述第一面板的第一面设置有至少两个图像采集装置时,所述判断模块包括:
合成单元,用于将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标;
第三确定单元,用于依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
上述系统,优选的,所述检查模块包括:
第二获取单元,用于分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
第四确定单元,用于当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
上述系统,优选的,还包括:
控制模块,用于当所述判断模块判断出所述待识别物体接触所述平面时,开启所述检测模块;当所述判断模块判断出所述待识别物体与所述平面分离时,关闭所述检测模块。
一种电子设备,包括如上任意一项所述的信息处理系统。
通过以上方案可知,本申请提供的一种信息处理方法及系统,应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方。所述至少一个图像采集装置采集待识别物体和所述平面的图像后,依据所采集的图像判断所述待识别物体是否接触所述平面;当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息,依据待识别物体的位置变化信息,触发相应操作。也就是说,只有物体在所述电子设备的放置平面时电子设备才会对物体进行有效识别,进而对电子设备进行控制。因此,当用户需要通过手势进行控制时,需要在电子设备的放置平面上进行相应手势变换才能对电子设备进行控制,而不再需要悬空进行手势变换,方便了用户操作,用户不易疲劳。而且由于用户的手在电子设备的放置平面上移动比手的悬空移动更容易控制,因此使得待识别物体的位置检测更精确,从而提高了控制精度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种电子设备的结构示意图;
图2为本申请实施例提供的一种信息处理方法的流程图;
图3为本申请实施例提供的电子设备为笔记本模式时的示意图;
图4为本申请实施例提供的电子设备为帐篷模式时的示意图;
图5为本申请实施例提供的另一种信息处理方法的流程图;
图6为本申请实施例提供的依据所采集的图像判断所述待识别物体是否接触所述平面的一种实现流程图;
图7为本申请实施例提供的检测所述待识别物体的位置变化信息的一种实现流程图;
图8为本申请实施例提供的另一种电子设备的结构示意图;
图9为本申请实施例提供的依据所采集的图像判断所述待识别物体是否接触所述平面的另一种实现流程图;
图10为本申请实施例提供的检测所述待识别物体的位置变化信息的另一种实现流程图;
图11为本申请实施例提供的一种信息处理系统的结构示意图;
图12为本申请实施例提供的触发模块的一种结构示意图;
图13为本申请实施例提供的另一种信息处理系统的结构示意图;
图14为本申请实施例提供的判断模块的一种结构示意图;
图15为本申请实施例提供的检测模块的一种结构示意图;
图16为本申请实施例提供的判断模块的另一种结构示意图;
图17为本申请实施例提供的检测模块的另一种结构示意图;
图18为本申请实施例提供的又一种信息处理系统的结构示意图。
说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的部分,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示的以外的顺序实施。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请实施例提供的信息处理方法应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面(如桌面,或其它可以放置电子设备的地方)时,所述至少一个图像采集装置位于所述显示单元的下方,如图1所示,图1为本申请实施例提供的位于第一面板的第一面上的显示单元和所述至少一个图像采集装置的位置关系示意图。
请参阅图2,图2为本申请实施例提供的一种信息处理方法的流程图,包括:
步骤S21:通过所述至少一个图像采集装置采集待识别物体和所述平面的图像;
如图1所示,当所述电子设备的第一面板斜立于平面时,所述至少一个图像采集装置位于电子设备的靠近平面的一侧下部,因此,可以采集到放置所述电子设备的平面的图像。当有物体在所述至少一个图像采集装置的可视范围内时,所述至少一个图像采集装置还可以采集物体的图像。
步骤S22:依据所采集的图像判断所述待识别物体是否接触所述平面;
当采集到待识别物体的图像时,通过所采集的图像判断该待识别物体是否与放置所述电子设备的平面相接触。
步骤S23:当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息。
本申请实施例中,只有判断出所述待识别物体与放置所述电子设备的平面相接触时,才检测所述待识别物体的位置变化信息。例如,假设待识别物体为人的手,那么只有检测到手接触到放置所述电子设备的平面时,才开始检测人的手的位置变化信息。
步骤S24:依据所述待识别物体的位置变化信息,触发相应操作。
其中,所述触发的相应操作可以根据电子设备当前正在运行的应用确定,例如,如果电子设备当前正在运行的应用为音频或视频播放器,那么,当检测到待识别物体在第一方向上的位置变化时,所述触发相应操作可以是指触发音量调节;当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是指变更所要播放的音频或视频,具体的,如果播放歌曲,当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是播放下一首歌曲或播放上一首歌曲。如果电子设备当前正在运行的应用为与阅读相关的应用,如幻灯片、电子书或网页等,那么,当检测到待识别物体在第一方向上的位置变化时,所述触发相应操作可以是指翻页(上一页或下一页);当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是指调节字号大小等。
本申请提供的一种信息处理方法,应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方。所述至少一个图像采集装置采集待识别物体和所述平面的图像后,依据所采集的图像判断所述待识别物体是否接触所述平面;当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息,依据待识别物体的位置变化信息,触发相应操作。也就是说,只有物体在所述电子设备的放置平面时电子设备才会对物体进行有效识别,进而对电子设备进行控制。因此,当用户需要通过手势进行控制时,需要在电子设备的放置平面上进行相应手势变换才能对电子设备进行控制,而不再需要悬空进行手势变换,方便了用户操作,用户不易疲劳。而且由于用户的手在电子设备的放置平面上移动比手的悬空移动更容易控制,因此使得待识别物体的位置检测更精确,从而提高了控制精度。
上述实施例中,优选的,为了更方便用户操作,所述触发相应操作可以包括:
依据所述待识别物体的位置变化信息,相应改变通过所述显示单元显示的光标的位置。
具体的,当所述电子设备只具有一个图像采集装置时,可以将图像采集装置能够采集到的区域的边缘,以及图像采集装置能够采集到的区域的中线作为参考位置,通过判断待识别物体与上述区域的边缘之间的距离及,以及待识别物体与上述区域的中线之间的距离确定待识别物体的具体位置变化信息,将该位置变化信息根据预设的映射规则映射为光标的位置变化信息,即光标的移动方向及移动距离,所述移动距离具体可以是指像素数,在确定光标的位置变化信息后,就可以依据所确定的位置变化信息移动光标。
当所述电子设备具有至少两个图像采集装置时可以将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标,以及所述平面中各个点的坐标;通过所述待识别物体的坐标可以精确确定待识别物体的位置变化信息(即,移动距离和移动方向),将该位置变化信息根据预设的映射规则映射为光标的位置变化信息,即光标的移动方向及移动距离,所述移动距离具体可以是指像素数,在确定光标的位置变化信息后,就可以依据所确定的位置变化信息移动光标。
本申请实施例中,为了使用户更好的对电子设备进行控制,可以将所述待识别物体的位置变化信息转换为光标的位置变化信息,例如,当用户当前正在使用的应用为画板时,可以将待识别物体的位置变化信息转换为虚拟画笔的位置变化,从而实现画画的目的,或者将待识别物体的位置变化信息转换为虚拟橡皮擦的位置变化,以擦除所移动位置的笔迹。
需要说明的是,本申请实施例提供的信息处理方法,在触发相应操作时,可以将待识别物体的位置变化信息转换为光标的位置变化信息,从而控制光标移动,以实现控制的目的;也可以不将待识别物体的位置变化信息转换为光标的位置变化信息,即直接根据待识别物体的位置变化信息触发相应操作,具体选用哪种方式不做具体限定,可以根据实际需要选择相应的触发方式。
上述实施例中,所述电子设备可以只有第一面板,例如,所述电子设备可以为平板电脑;
所述电子设备也可以具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接,例如,所述电子设备可以为笔记本电脑。本申请实施例中,当所述电子设备具有第一面板和第二面板时,所述电子设备可以具有至少两种使用模式,一种为笔记本模式,如图3所示,第一面板31和第二面板32通过转轴33可活动连接,当所述第一面板31和所述第二面板32闭合时,所述第一面板31的第一面311与所述第二面板32的第一面321相接近。第一面板31的第一面311上设置有显示单元3111和至少一个图像采集装置3112,此时,所述至少一个图像采集装3112在所述显示单元3111的上方;另一种为帐篷模式,如图4所示,此时,所述至少一个图像采集装置3112在所述第一面板的显示单元3111的下方,所述第一面板31的第一面311与所述第二面板的第一面321(即图4中第二面板的第二面322的对立面)的夹角大于180°。
当所述电子设备具有第一面板和第二面板时,本申请实施例提供的另一种信息处理方法的流程图如图5所示,在通过所述至少一个图像采集转置采集待识别物体的图像之前,还可以包括:
步骤S51:监测所述第一面板和所述第二面板之间的角度;
本申请实施例中,当所述第一面板的第一面和所述第二面板的第一面相互接近时,所述第一面板和所述第二面板之间的角度逐渐变小,当所述第一面板的第一面和所述第二面板的第一面相互远离时,所述第一面板和所述第二面板之间的角度逐渐变大。
步骤S52:当所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置。
本申请实施例中,当所述第一面板和所述第二面板之间的角度大于预设阈值时,说明所述电子设备处于帐篷模式,如图4所示。
也就是说,本申请实施例中,当电子设备处于帐篷模式时,自动打开所述至少一个图像采集装置,而不需用户手动开启所述至少一个图像采集装置,简化了用户操作。
上述实施例,优选的,当所述第一面板的第一面设置有一个图像采集装置时,所述依据所采集的图像判断所述待识别物体是否接触所述平面的实现流程如图6所示,可以包括:
步骤S61:分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
所述图像采集装置没采集一张图像,提取待识别物体的边缘特征和平面的边缘特征,从而获取该图像中的识别物体的边缘数据和该图像中的平面的边缘数据。
步骤S62:当所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
在图6所示实施例的基础上,本申请实施例提供的检测所述待识别物体的位置变化信息的具体实现流程图如图7所示,可以包括:
步骤S71:逐帧检测所述待识别物体在图像中的位置;
在确定待识别物体接触所述平面后,每获取一帧图像,检测一次待识别物体在图像中的位置。
步骤S72:当所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
当所述待识别物体在当前帧图像中的位置与所述待识别物体在前一帧图像中的位置不同时,说明所述待识别物体在平面上的位置发生了变化,即所述待识别物体的物理位置发生了变化。
上述实施例,优选的,当所述第一面板的第一面设置有至少两个图像采集装置时,如图8所示,图8为本申请实施例提供的又一种电子设备的结构示意图,相应的,所述依据所采集的图像判断所述待识别物体是否接触所述平面的具体实现流程如图9所示,可以包括:
步骤S91:将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标,以及所述平面中各个点的坐标;
每一个时刻,各个图像采集装置都采集一帧图像,本申请实施例中,将各个图像采集装置同一时刻采集的图像合成为一帧深度图像,具体如何合成属于本领域的公知常识,这里不再赘述。
步骤S92:依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
具体的,当所述待识别物体上至少一个点的坐标与所述平面的至少一个点的坐标相重合时,说明所述待识别物体接触所述平面。
在图9所示实施例的基础上,本申请实施例提供的检测所述待识别物体的位置变化信息的又一实现流程如图10所示,可以包括:
步骤S101:分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
本申请实施例中,通过待识别物体在深度图像中的位置判断待识别物体的位置是否发生变化。
步骤S102:当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
优选的,当待识别物体在当前时刻的深度图像中的坐标与在前一时刻的深度图像中的坐标不同时,确定待识别物体在平面上的位置发生了变化,即所述待识别物体的物理位置发生了变化。
上述实施例,优选的,当检测出待识别物体与所述平面分离时,停止检测所述待识别物体的位置变化信息。
本申请实施例中,为了降低功耗,当检测出待识别物体与所述平面分离时,不再检测待识别物体的位置变化信息。
与方法实施例相对应,本申请实施例还提供一种信息处理系统,该信息处理系统应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方,所述至少一个图像采集装置用于采集待识别物体和所述平面的图像,本申请实施例提供的一种信息处理系统的结构示意图如图11所示,可以包括:
判断模块111、检测模块112和触发模块113;其中,
判断模块111用于依据所述至少一个图像采集装置采集的图像判断所述待识别物体是否接触所述平面;
检测模块112用于在所述判断模块111判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置的变化信息;
触发模块113用于依据所述待识别物体的位置变化信息,触发相应操作。
其中,所触发的相应操作可以根据电子设备当前正在运行的应用确定,例如,如果电子设备当前正在运行的应用为音频或视频播放器,那么,当检测到待识别物体在第一方向上的位置变化时,所述触发相应操作可以是指触发音量调节;当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是指变更所要播放的音频或视频,具体的,如果播放歌曲,当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是播放下一首歌曲或播放上一首歌曲。如果电子设备当前正在运行的应用为与阅读相关的应用,如幻灯片、电子书或网页等,那么,当检测到待识别物体在第一方向上的位置变化时,所述触发相应操作可以是指翻页(上一页或下一页);当检测到待识别物体在第二方向上的位置变化时,所述触发相应操作可以是指调节字号大小等。
本申请实施例中,只有判断出所述待识别物体与放置所述电子设备的平面相接触时,才检测所述待识别物体的位置变化信息,进而对电子设备进行控制。例如,假设待识别物体为人的手,那么只有检测到手接触到放置所述电子设备的平面时,才开始检测人的手的位置变化信息,进而根据手的位置变化信息对电子设备进行控制。
本申请提供的一种信息处理系统,应用于电子设备,所述电子设备至少具有第一面板,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方。所述至少一个图像采集装置采集待识别物体和所述平面的图像后,依据所采集的图像判断所述待识别物体是否接触所述平面;当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息,依据待识别物体的位置变化信息,触发相应操作。也就是说,只有物体在所述电子设备的放置平面时电子设备才会对物体进行有效识别,进而对电子设备进行控制。因此,当用户需要通过手势进行控制时,需要在电子设备的放置平面上进行相应手势变换才能对电子设备进行控制,而不再需要悬空进行手势变换,方便了用户操作,用户不易疲劳。而且由于用户的手在电子设备的放置平面上移动比手的悬空移动更容易控制,因此使得待识别物体的位置检测更精确,从而提高了控制精度。
图11所示实施例中,本申请实施例提供的所述触发模块113一种结构示意图如图12所示,可以包括:
光标控制单元1131,用于依据所述待识别物体的位置变化信息,相应改变所述显示单元显示的光标的位置。
具体的,当所述电子设备只具有一个图像采集装置时,可以将图像采集装置能够采集到的区域的边缘,以及图像采集装置能够采集到的区域的中线作为参考位置,通过判断待识别物体与上述区域的边缘之间的距离及,以及待识别物体与上述区域的中线之间的距离确定待识别物体的具体位置变化信息,将该位置变化信息根据预设的映射规则映射为光标的位置变化信息,即光标的移动方向及移动距离,所述移动距离具体可以是指像素数,在确定光标的位置变化信息后,光标控制单元1131就可以依据所确定的光标的位置变化信息移动光标。
当所述电子设备具有至少两个图像采集装置时可以将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标,以及所述平面中各个点的坐标;通过所述待识别物体的坐标可以精确确定待识别物体的位置变化信息(即,移动距离和移动方向),将该位置变化信息根据预设的映射规则映射为光标的位置变化信息,即光标的移动方向及移动距离,所述移动距离具体可以是指像素数,在确定光标的位置变化信息后,光标控制单元1131就可以依据所确定的位置变化信息移动光标。
本申请实施例中,为了使用户更好的对电子设备进行控制,可以将所述待识别物体的位置变化信息转换为光标的位置变化信息,例如,当用户当前正在使用的应用为画板时,可以将待识别物体的位置变化信息转换为虚拟画笔的位置变化,从而实现画画的目的,或者将待识别物体的位置变化信息转换为虚拟橡皮擦的位置变化,以擦除所移动位置的笔迹。
需要说明的是,本申请实施例中,在触发相应操作时,可以将待识别物体的位置变化信息转换为光标的位置变化信息,从而控制光标移动,以实现控制的目的;也可以不将待识别物体的位置变化信息转换为光标的位置变化信息,即直接根据待识别物体的位置变化信息触发相应操作,具体选用哪种方式不做具体限定,可以根据实际需要选择相应的触发方式。
上述实施例中,所述电子设备可以只有第一面板,例如,所述电子设备可以为平板电脑;
所述电子设备也可以具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接,例如,所述电子设备可以为笔记本电脑。本申请实施例中,当所述电子设备具有第一面板和第二面板时,所述电子设备可以具有至少两种使用模式,一种为笔记本模式,如图3所示,第一面板31和第二面板32同转轴33可活动连接,当所述第一面板31和所述第二面板32闭合时,所述第一面板31的第一面311与所述第二面板32的第一面321相接近。第一面板31的第一面311上设置有一显示单元3111和至少一个图像采集装置3112,此时,所述至少一个图像采集装3112在所述显示单元3111的上方;另一种为帐篷模式,如图4所示,此时,所述至少一个图像采集装置3112在所述第一面板的显示单元3111的下方,所述第一面板31的第一面311与所述第二面板的第一面321(即图4中第二面板的第二面322的对立面)的夹角大于180°。
在图11所示实施例的基础上,当所述电子设备具有第一面板和第二面板时,本申请实施例提供的另一种信息处理系统的结构示意图如图13所示,还可以包括:
监测模块131和开启模块132;其中,
监测模块131用于监测所述第一面板和所述第二面板之间的角度;
本申请实施例中,当所述第一面板的第一面和所述第二面板的第一面相互接近时,所述第一面板和所述第二面板之间的角度逐渐变小,当所述第一面板的第一面和所述第二面板的第一面相互远离时,所述第一面板和所述第二面板之间的角度逐渐变大。
开启模块132用于当所述监测模块监测到的所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置。
本申请实施例中,当所述第一面板和所述第二面板之间的角度大于预设阈值时,说明所述电子设备处于帐篷模式,如图4所示。
也就是说,本申请实施例中,当电子设备处于帐篷模式时,自动打开所述至少一个图像采集装置,而不需用户手动开启所述至少一个图像采集装置,简化了用户操作。
上述实施例,优选的,当所述第一面板的第一面设置有一个图像采集装置时,所述判断模块111的一种结构示意图如图14所示,可以包括:
第一获取单元141和第一确定单元142;其中,
第一获取单元141用于分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
第一确定单元142用于在所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
在图14所示实施例的基础上,本申请实施例提供的检测模块112的一种结构示意图如图15所示,可以包括:
位置检测单元151和第二确定单元152;其中,
位置检测单元151用于当所述判断模块判断出所述待识别物体接触所述平面时,逐帧检测所述待识别物体在图像中的位置;
第二确定单元152用于在所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
上述实施例,优选的,当所述第一面板的第一面设置有至少两个图像采集装置时,所述判断模块111的另一种结构示意图如图16所示,可以包括:
合成单元161和第三确定单元162;其中,
合成单元161用于将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标;
第三确定单元162用于依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
在图16所示实施例的基础上,本申请实施例提供的检测模块112的另一种结构示意图如图17所示,可以包括:
第二获取单元171和第四确定单元172;其中,
第二获取单元171用于分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
第四确定单元172用于当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
上述实施例,优选的,本申请实施例提供的又一种信息处理系统的结构示意图如图18所示,还可以包括:
控制模块181,用于当所述判断模块判断出所述待识别物体接触所述平面时,开启所述检测模块;当所述判断模块判断出所述待识别物体与所述平面分离时,关闭所述检测模块。
本申请实施例中,为了降低功耗,当检测出待识别物体与所述平面分离时,不再检测待识别物体的位置变化信息。
本申请实施例还提供一种电子设备,该电子设备具有如上任一实施例公开的信息处理系统。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (13)

1.一种信息处理方法,应用于电子设备,所述电子设备具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,其特征在于,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元下方,所述方法包括:
监测所述第一面板和所述第二面板之间的角度;
当所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置;
通过所述至少一个图像采集装置采集待识别物体和所述平面的图像;
依据所采集的图像判断所述待识别物体是否接触所述平面;
当判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息;
依据所述待识别物体的位置变化信息,触发相应操作;
当检测出所述待识别物体与所述平面分离时,停止检测所述待识别物体的位置变化信息。
2.根据权利要求1所述的方法,其特征在于,所述依据所述待识别物体的位置变化信息,触发相应操作包括:
依据所述待识别物体的位置变化信息,相应改变通过所述显示单元显示的光标的位置。
3.根据权利要求1-2任意一项所述的方法,其特征在于,当所述第一面板的第一面设置有一个图像采集装置时,所述依据所采集的图像判断所述待识别物体是否接触所述平面包括:
分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
当所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
4.根据权利要求3所述的方法,其特征在于,所述检测所述待识别物体的位置变化信息包括:
逐帧检测所述待识别物体在图像中的位置;
当所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
5.根据权利要求1-2任意一项所述的方法,其特征在于,当所述第一面板的第一面设置有至少两个图像采集装置时,所述依据所采集的图像判断所述待识别物体是否接触所述平面包括:
将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标,以及所述平面中各个点的坐标;
依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
6.根据权利要求5所述的方法,其特征在于,所述检测所述待识别物体的位置变化信息包括:
分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
7.一种信息处理系统,应用于电子设备,所述电子设备具有第一面板和第二面板,所述第一面板和所述第二面板通过转轴可活动连接,所述第一面板的第一面设置有显示单元和至少一个图像采集装置,其特征在于,当所述第一面板斜立于一平面时,所述至少一个图像采集装置位于所述显示单元的下方,所述至少一个图像采集装置用于采集待识别物体和所述平面的图像,所述系统包括:
监测模块,用于监测所述第一面板和所述第二面板之间的角度;
开启模块,用于当所述监测模块监测到的所述第一面板和所述第二面板之间的角度大于预设阈值时,开启所述至少一个图像采集装置;
判断模块,用于依据所述至少一个图像采集装置采集的图像判断所述待识别物体是否接触所述平面;
检测模块,用于当所述判断模块判断出所述待识别物体接触所述平面时,检测所述待识别物体的位置变化信息;
触发模块,用于依据所述待识别物体的位置变化信息,触发相应操作;
控制模块,用于当所述判断模块判断出所述待识别物体接触所述平面时,开启所述检测模块;当所述判断模块判断出所述待识别物体与所述平面分离时,关闭所述检测模块。
8.根据权利要求7所述的系统,其特征在于,所述触发模块包括:
光标控制单元,用于依据所述待识别物体的位置变化信息,相应改变所述显示单元显示的光标的位置。
9.根据权利要求7-8任意一项所述的系统,其特征在于,当所述第一面板的第一面设置有一个图像采集装置时,所述判断模块包括:
第一获取单元,用于分别获取所述待识别物体的边缘数据和所述平面的边缘数据;
第一确定单元,用于在所述待识别物体的边缘数据和所述平面的边缘数据存在交集时,确定所述待识别物体与所述平面相接触。
10.根据权利要求9所述的系统,其特征在于,所述检测模块包括:
位置检测单元,用于当所述判断模块判断出所述待识别物体接触所述平面时,逐帧检测所述待识别物体在图像中的位置;
第二确定单元,用于在所述待识别物体在图像中的位置发生变化时,确定所述待识别物体的位置发生变化。
11.根据权利要求7-8任意一项所述的系统,其特征在于,当所述第一面板的第一面设置有至少两个图像采集装置时,所述判断模块包括:
合成单元,用于将所述至少两个图像采集装置同一时刻采集的图像合成为一帧深度图像,所述深度图像携带有所述待识别物体的坐标;
第三确定单元,用于依据所述待识别物体的坐标,以及所述平面的各个点的坐标确定所述待识别物体是否接触所述平面。
12.根据权利要求11所述的系统,其特征在于,所述检测模块包括:
第二获取单元,用于分别获取相邻两帧深度图像中所携带的待识别物体的坐标;
第四确定单元,用于当所述相邻两帧深度图像中携带的待识别物体的坐标不同时,判断所述待识别物体的位置发生变化。
13.一种电子设备,其特征在于,包括如权利要求7-12任意一项所述的信息处理系统。
CN201410053945.XA 2014-02-18 2014-02-18 信息处理方法、系统及电子设备 Active CN104850330B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410053945.XA CN104850330B (zh) 2014-02-18 2014-02-18 信息处理方法、系统及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410053945.XA CN104850330B (zh) 2014-02-18 2014-02-18 信息处理方法、系统及电子设备

Publications (2)

Publication Number Publication Date
CN104850330A CN104850330A (zh) 2015-08-19
CN104850330B true CN104850330B (zh) 2018-12-14

Family

ID=53850009

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410053945.XA Active CN104850330B (zh) 2014-02-18 2014-02-18 信息处理方法、系统及电子设备

Country Status (1)

Country Link
CN (1) CN104850330B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102662436A (zh) * 2012-03-26 2012-09-12 联想(北京)有限公司 电子设备和驱动图像采集单元的方法
CN102981617A (zh) * 2012-11-14 2013-03-20 鸿富锦精密工业(深圳)有限公司 手势识别系统及手势识别方法
CN103294260A (zh) * 2012-04-02 2013-09-11 微软公司 触敏用户界面
CN103365410A (zh) * 2012-04-03 2013-10-23 纬创资通股份有限公司 手势感测装置及具有手势输入功能的电子系统
CN103472907A (zh) * 2012-06-05 2013-12-25 纬创资通股份有限公司 操作区的决定方法与系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102662436A (zh) * 2012-03-26 2012-09-12 联想(北京)有限公司 电子设备和驱动图像采集单元的方法
CN103294260A (zh) * 2012-04-02 2013-09-11 微软公司 触敏用户界面
CN103365410A (zh) * 2012-04-03 2013-10-23 纬创资通股份有限公司 手势感测装置及具有手势输入功能的电子系统
CN103472907A (zh) * 2012-06-05 2013-12-25 纬创资通股份有限公司 操作区的决定方法与系统
CN102981617A (zh) * 2012-11-14 2013-03-20 鸿富锦精密工业(深圳)有限公司 手势识别系统及手势识别方法

Also Published As

Publication number Publication date
CN104850330A (zh) 2015-08-19

Similar Documents

Publication Publication Date Title
US10761610B2 (en) Vehicle systems and methods for interaction detection
TWI659331B (zh) 用於智慧終端機的截取螢幕方法和裝置
US9020194B2 (en) Systems and methods for performing a device action based on a detected gesture
US10042546B2 (en) Systems and methods to present multiple frames on a touch screen
CN103164022B (zh) 多指触摸方法和装置、便携式终端设备
US20160062533A1 (en) Method of disambiguating water from a finger touch on a touch sensor panel
CN107608508B (zh) 一种信息处理方法及电子设备
TW201428597A (zh) 觸摸屏電子裝置及其控制方法
CN103985137A (zh) 应用于人机交互的运动物体跟踪方法及系统
TW201135517A (en) Cursor control device, display device and portable electronic device
EP2550578A2 (en) Associated file
US20170075548A1 (en) Information processing device, information processing method, and program
CN102841676A (zh) 网页浏览控制系统及方法
CN103324410A (zh) 用于检测触摸的方法和装置
CN105302404A (zh) 鼠标指针快速移动的方法及系统
CN106845190B (zh) 显示控制系统及方法
CN110007748B (zh) 终端的控制方法、处理装置、存储介质及终端
CN104850215B (zh) 信息处理方法、系统及电子设备
WO2017211108A1 (zh) 一种显示方法及装置
US20130181894A1 (en) Display device and method for large screen
CN104850330B (zh) 信息处理方法、系统及电子设备
CN104914985A (zh) 手势控制方法及系统与视频流处理装置
CN201936250U (zh) 无线手势输入装置
TWI584644B (zh) 使用者部分部位之虛擬表示型態技術
CN104994242B (zh) 一种手机屏幕亮度的调节结构

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant