CN104077784B - 提取目标对象的方法和电子设备 - Google Patents

提取目标对象的方法和电子设备 Download PDF

Info

Publication number
CN104077784B
CN104077784B CN201310109703.3A CN201310109703A CN104077784B CN 104077784 B CN104077784 B CN 104077784B CN 201310109703 A CN201310109703 A CN 201310109703A CN 104077784 B CN104077784 B CN 104077784B
Authority
CN
China
Prior art keywords
electronic equipment
destination object
identified
image
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310109703.3A
Other languages
English (en)
Other versions
CN104077784A (zh
Inventor
侯欣如
彭世峰
杨振奕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201310109703.3A priority Critical patent/CN104077784B/zh
Publication of CN104077784A publication Critical patent/CN104077784A/zh
Application granted granted Critical
Publication of CN104077784B publication Critical patent/CN104077784B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种提取目标对象的方法和电子设备。根据本发明实施例的提取目标对象的方法,应用于包括显示单元的电子设备。所述方法包括:在显示单元的显示区域中显示第一图像;检测电子设备的空间操作区域中是否出现了操作体,其中显示区域与空间操作区域相对应;当确定电子设备的空间操作区域中出现了操作体时,获得操作体的运动轨迹;确定运动轨迹是否形成了闭合曲线;当确定运动轨迹形成了闭合曲线时,获得闭合曲线围成的区域在第一图像中的映射区域;对第一图像中的对象进行识别;在所识别的对象中,确定位于映射区域中的目标对象;提取所获得的目标对象的边缘;以及以第一线条显示目标对象的边缘。

Description

提取目标对象的方法和电子设备
技术领域
本发明涉及一种应用于包括显示单元的电子设备的提取目标对象的方法和相应的电子设备。
背景技术
近年来,例如笔记本计算机、平板式计算机、智能手机、相机、和便携式多媒体播放器之类的电子设备被广泛应用。在这些电子装备中,通常包括用于接收用户的输入的触摸感应单元以方便用户的操作。触摸感应单元可包括可由电容式触摸传感器或者电阻式触摸传感器之类传感器元件构成的触摸感应区域。用户可在触摸控制区域上进行诸如单击、双击、拖曳等动作来实现相应的控制功能。然而,随着技术的发展,处理器的处理能力提高,电子设备可为用户提供的功能不断增多。以上例如单击、双击之类的简单的触摸操作已经不能满足用户越来越多样化的操作需要。
另一方面,通过触摸感应单元进行输入并不适用于所有电子设备。例如,对于电视机之类的非便携式电子设备,用户通常需要通过遥控器进行操作,这导致用户在进行例如选择当前电子设备所显示的画面中的某个对象(例如人物图像)时需要进行的操作较为繁琐。又例如,对于头戴式电子设备,用户不能看到设置在头戴式电子设备上的触摸感应单元,因此难以进行复杂的操作。
发明内容
本发明实施例的目的在于提供一种提取目标对象的方法和相应的电子设备,以解决上述问题。
本发明实施例提供了一种提取目标对象的方法,应用于包括显示单元的电子设备。所述方法包括:在显示单元的显示区域中显示第一图像;检测电子设备的空间操作区域中是否出现了操作体,其中显示区域与空间操作区域相对应;当确定电子设备的空间操作区域中出现了操作体时,获得操作体的运动轨迹;确定运动轨迹是否形成了闭合曲线;当确定运动轨迹形成了闭合曲线时,获得闭合曲线围成的区域在第一图像中的映射区域;对第一图像中的对象进行识别;在所识别的对象中,确定位于映射区域中的目标对象;提取所获得的目标对象的边缘;以及以第一线条显示目标对象的边缘。
本发明另一实施例提供了一种电子设备,包括:显示单元,配置来在显示区域中显示第一图像;操作体识别单元,配置来检测电子设备的空间操作区域中是否出现了操作体,其中显示区域与空间操作区域相对应;轨迹获取单元,配置来当确定电子设备的空间操作区域中出现了操作体时,获得操作体的运动轨迹;轨迹确定单元,配置来确定运动轨迹是否形成了闭合曲线;区域获取单元,配置来当确定运动轨迹形成了闭合曲线时,获得闭合曲线围成的区域在第一图像中的映射区域;对象识别单元,配置来对第一图像中的对象进行识别;对象确定单元,配置来在所识别的对象中,确定位于映射区域中的目标对象;以及边缘提取单元,配置来提取所获得的目标对象的边缘,其中显示单元还配置来以第一线条显示目标对象的边缘。
在上述本发明实施例提供的方案中,用户在选择电子设备所显示的图像,特别是电子设备所拍摄的实时图像,中的特定对象时,只需要粗略地在输入在所显示的图像中其感兴趣的对象所在的范围,而不需要精确地输入所显示的图像中其感兴趣的对象的轮廓,简化了用户的输入。此外,通过以第一线条显示所述目标对象的边缘,可清楚地向用户指示该用户所选择的第一图像中的对象。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例的描述中所需要使用的附图作简单地介绍。下面描述中的附图仅仅是本发明的示例性实施例。
图1是描述了根据本发明实施例的提取目标对象的方法的流程图。
图2是示出了根据本发明的一个示例,在实时图像中确定目标对象的示例情形的说明图。
图3是示出了根据本发明的一个示例,显示目标对象的边缘的示例情形的说明图。
图4是示出根据本发明实施例的电子设备的示范性结构框图。
图5是示出了图4中所示的电子设备为眼镜式电子设备的一个示例情形的说明图。
图6是示出了根据电子设备中的显示单元的示例性框图。
图7是示出了图6所示的显示单元的一个示意情形的说明图。
具体实施方式
在下文中,将参考附图详细描述本发明的优选实施例。注意,在本说明书和附图中,具有基本上相同步骤和元素用相同的附图标记来表示,且对这些步骤和元素的重复解释将被省略。
在本发明的以下实施例中,电子设备的具体形式包括但不限于智能电视机、智能移动电话、台式计算机、个人数字助手、便携式计算机、平板式计算机、多媒体播放器等。根据本发明的一个示例,电子设备可以是手持式电子设备。根据本发明的另一示例,电子设备可以是头戴式电子设备。此外,根据本发明的另一示例,电子设备还可以是例如台式计算机、电视机之类的非便携式终端设备。在根据本发明的实施例中,电子设备可包括显示单元。
图1是描述了根据本发明实施例的提取目标对象的方法100的流程图。下面,将参照图1来描述根据本发明实施例的提取目标对象的方法。提取目标对象的方法100可用于上述电子设备。
如图1所示,在步骤S101中,在电子设备的显示单元的显示区域中显示第一图像。然后,在步骤S102在中,检测电子设备的空间操作区域中是否出现了操作体,其中显示区域与空间操作区域相对应。例如,操作体可以是用户的手指。可替换地,操作体也可以是预先设置的操作笔等。
根据本发明的一个示例,电子设备的空间操作区域可位于电子设备的显示区域与使用电子设备的用户之间。例如,在电子设备为智能电视机之类的非便携式终端设备的情况下,空间操作区域可位于电视机与观看电视的用户之间。更具体地,电子设备可包括例如红外检测装置之类的检测单元,以检测电子设备的空间操作区域中是否出现了操作体。此外,电子设备也可包括例如摄像头之类的图像采集单元,以获得关于电子设备的空间操作区域的图像,并且电子设备可识别图像采集部件所采集的图像以确定空间操作区域的图像中是否出现了操作体。在此情况下,第一图像可以是视频、图片、或者包括可选频道、节目信息之类的第一操作界面等。
根据本发明的另一示例,显示区域位于空间操作区域与使用电子设备的用户之间。具体地,电子设备可以是手持电子设备或者头戴电子设备。并且电子设备还可包括镜片部件以及与镜片部件对应设置的采集单元。此外,显示单元也与镜片部件对应设置。例如,显示单元的至少一部分可设置在镜片部件中。在此情况下,图1中所述的方法100还可包括当镜片部件位于用户的可视区域中时,通过采集单元对用户透过镜片部件观看的第一场景进行采集,并获得实时图像作为第一图像。如上所述,显示区域位于空间操作区域与使用电子设备的用户之间。更具地体地,用户透过镜片部件可观看到空间操作区域。在步骤S102中,可根据第一图像,确定检测电子设备的空间操作区域中是否出现了操作体。
在步骤S103中,当确定电子设备的空间操作区域中出现了操作体时,获得操作体的运动轨迹。然后在步骤S104中,确定运动轨迹是否形成了闭合曲线。当确定运动轨迹形成了闭合曲线时,在步骤S105中,获得闭合曲线围成的区域在第一图像中的映射区域。例如,在电子设备为上述智能电视机之类的非便携式终端设备的情况下,电子设备可通过检测单元或图像采集单元获得操作体在空间操作区域中的运动轨迹,并且当确定操作体的运动轨迹形成了闭合曲线时,将操作体的运动轨迹映射到显示单元所显示的例如视频当前帧、图片、或者第一操作界面上。又例如,在电子设备为上述手持电子设备或者头戴电子设备的情况下,电子设备可通过采集单元所采集的实时图像获得操作体在空间操作区域中的运动轨迹,也就是说,操作体在空间操作区域中的运动可被反应在所显示的实时图像(即,第一图像)中。可通过所采集的实时图像获得该图像中的操作体的轨迹映射区域。
然后,在步骤S106中,例如通过边缘提取等图像处理技术或者人物识别等识别技术对第一图像中的对象进行识别。然后在步骤S107中,在所识别的对象中,确定位于映射区域中的目标对象。目标对象至少部分位于映射区域中。根据本发明的一个示例,可预先规定目标对象位于映射区域中的部分占该对象整体的比例应大于或等于预定值。从而在步骤S107中在所识别的对象中,能够根据对象位于映射区域中的部分在该对象中所占的比例确定目标对象。
在电子设备为上述手持电子设备或者头戴电子设备并且采集单元对用户透过镜片部件观看的第一场景进行采集的实时图像为第一图像的情况下,图1中所示的方法还可包括确定在第一场景中与对象对应的物体与电子设备之间的第一距离。例如,采集单元可包括设置在电子设备的不同位置上的多个采集部件。根据第一场景中与每个对象对应的物体在多个采集模块所采集的图像中的位置偏移,可确定该物体与电子设备之间的第一距离。在根据本发明的示例中,第一场景中的物体可以是没有生命的物体,例如建筑物、树木等。此外,第一场景中的物体也可以是有生命的物体,例如人、动物等。
在此情况下,步骤S107可包括在所识别的对象中,确定其位于映射区域中的部分在该对象中所占的比例大于或等于预定比例的第一对象;在第一对象中,根据每个第一对象所对应的物体与电子设备之间的第一距离,确定其所对应的物体与电子设备之间的第一距离最短的第一候选对象;在除了第一候选对象的第一对象中,根据每个第一对象所对应的物体与电子设备之间的第一距离,确定其所对应的物体与电子设备之间的第一距离与第一候选对象所对应的物体与电子设备之间的第一距离之间的差异小于或等于预定距离的第二候选对象;以及将第一候选对象和第二候选对象确定为目标对象。
图2是示出了根据本发明的一个示例,在实时图像中确定目标对象的示例情形的说明图。在图2所示的示例中,显示所采集的第一场景的实时图像200并且可识别出实时图像200中的对象221、222、223和224。如图2所示,可确定其位于操作体的轨迹的映射区域210中的部分在该对象中所占的比例大于或等于预定比例的第一对象222、223和224。并且在第一对象222、223和224中,根据每个第一对象所对应的物体与电子设备之间的第一距离,可确定第一对象223所对应的物体与电子设备之间的第一距离最短,因此将第一对象223作为第一候选对象。然后在在除了第一候选对象223以外的第一对象222和224中,根据每个第一对象所对应的物体与电子设备之间的第一距离,确定其所对应的物体与电子设备之间的第一距离与第一候选对象所对应的物体与电子设备之间的第一距离之间的差异小于或等于预定距离(例如0.5米)对象224为第二候选对象。然后将第一候选对象223和第二候选对象224确定为目标对象。从而用户可一次指定在实时图像中的多个目标对象,而不需要逐一对目标对象进行指定,方便了用户的操作。此外,还可避免将远离目标对象的、用户不感兴趣的其他对象误识别成目标对象。
返回图1,在步骤S108中,提取所获得的目标对象的边缘。并且在步骤S109中,以第一线条显示所提取的目标对象的边缘。从而,当用户进行例如复制、剪切之类的操作时,可清楚直接地看到其选择的对象。
根据本发明的一个示例,图1所示的方法还可包括第二线条显示所述映射区域。并且在步骤S109中,在提取所获得的目标对象的边缘后,可将第二线条改变到所提取的目标对象的边缘以作为第一线条。
图3是示出了根据本发明的一个示例,显示目标对象的边缘的示例情形的说明图。如图3所示,在第一图像300中,以第二线条320显示对应于操作体的运动轨迹的映射区域。在提取所获得的目标对象330的边缘后,如图3中的箭头所示,可将第二线条320从其所在的位置改变到所提取的目标对象330的边缘以作为第一线条310。从而用户可直观地看到代表操作体运动轨迹的第二线条320吸附到其选择的目标对象的边缘。
此外,根据本发明的另一示例,在确定位于映射区域中的目标对象之后,图1中所示的方法还包括确定目标对象是否移动。例如,可通过计算映射区域中的对象的运动速度来确定是否是目标对象在移动。更具体地,在目标对象之前处于静止的情况下,当映射区域中出现快速移动的对象时由于处于静止的对象通常不能立刻具有较高的速度,因此可知不是目标对象在移动。
此外,当确定目标对象在移动时,可继续以第一线条显示移动的目标对象的边缘。从而可始终向用户提示其选择的目标对象。此外,在对目标对象进行了设置的情况下,在目标对象移动时可始终保持该设置。例如在调高目标对象的显示亮度以使其显示得更加突出的情况下,在目标对象移动时可始终保持以调高后的亮度显示目标对象。
在本实施例的提取目标对象的方法中,用户在选择电子设备所显示的图像,特别是电子设备所拍摄的实时图像,中的特定对象时,只需要粗略地在输入在所显示的图像中其感兴趣的对象所在的范围,而不需要精确地输入所显示的图像中其感兴趣的对象的轮廓,简化了用户的输入。此外,通过以第一线条显示所述目标对象的边缘,可清楚地向用户指示该用户所选择的第一图像中的对象。
下面,参照图4说明根据本发明的实施例的图像采集设备。图4是示出根据本发明实施例的电子设备400的示范性结构框图。如图4中所示,本实施例的电子设备400包括显示单元410、操作体识别单元420、轨迹获取单元430、轨迹确定单元440、区域获取单元450、对象识别单元460、对象确定单元470和边缘提取单元480。电子设备400的各个模块执行上述图1中的匹配设备的方法100的各个步骤/功能,因此,为了描述简洁,不再具体描述。
例如,显示单元410可在其显示区域中显示第一图像。然后,操作体识别单元420可检测电子设备的空间操作区域中是否出现了操作体,其中显示区域与空间操作区域相对应。例如,操作体可以是用户的手指。可替换地,操作体也可以是预先设置的操作笔等。
根据本发明的一个示例,电子设备的空间操作区域可位于电子设备的显示区域与使用电子设备的用户之间。例如,在电子设备为智能电视机之类的非便携式终端设备的情况下,空间操作区域可位于电视机与观看电视的用户之间。更具体地,电子设备可包括例如红外检测装置之类的检测单元,以操作体识别单元420可根据检测结果确定电子设备的空间操作区域中是否出现了操作体。此外,电子设备也可包括例如摄像头之类的图像采集单元,以获得关于电子设备的空间操作区域的图像,并且操作体识别单元420可识别图像采集部件所采集的图像以确定空间操作区域的图像中是否出现了操作体。在此情况下,第一图像可以是视频、图片、或者包括可选频道、节目信息之类的第一操作界面等。
根据本发明的另一示例,显示区域位于空间操作区域与使用电子设备的用户之间。具体地,电子设备可以是手持电子设备或者头戴电子设备。并且电子设备还可包括镜片部件以及与镜片部件对应设置的采集单元。此外,显示单元也与镜片部件对应设置。例如,显示单元的至少一部分可设置在镜片部件中。在此情况下,图1中所述的方法100还可包括当镜片部件位于用户的可视区域中时,通过采集单元对用户透过镜片部件观看的第一场景进行采集,并获得实时图像作为第一图像。如上所述,显示区域位于空间操作区域与使用电子设备的用户之间。更具地体地,用户透过镜片部件可观看到空间操作区域。操作体识别单元420可根据第一图像,确定电子设备的空间操作区域中是否出现了操作体。
当确定电子设备的空间操作区域中出现了操作体时,轨迹获取单元430可获得操作体的运动轨迹。然后轨迹确定单元440可确定运动轨迹是否形成了闭合曲线。当确定运动轨迹形成了闭合曲线时,区域获取单元450可获得闭合曲线围成的区域在第一图像中的映射区域。例如,在电子设备为上述智能电视机之类的非便携式终端设备的情况下,电子设备可通过检测单元或图像采集单元获得操作体在空间操作区域中的运动轨迹,并且当确定操作体的运动轨迹形成了闭合曲线时,区域获取单元450将操作体的运动轨迹映射到显示单元所显示的例如视频当前帧、图片、或者第一操作界面上。又例如,在电子设备为上述手持电子设备或者头戴电子设备的情况下,电子设备可通过采集单元所采集的实时图像获得操作体在空间操作区域中的运动轨迹,也就是说,操作体在空间操作区域中的运动可被反应在所显示的实时图像(即,第一图像)中。区域获取单元450可通过所采集的实时图像获得该图像中的操作体的轨迹映射区域。
然后,对象识别单元460例如通过边缘提取等图像处理技术或者人物识别等识别技术对第一图像中的对象进行识别。对象确定单元470可在所识别的对象中,确定位于映射区域中的目标对象。目标对象至少部分位于映射区域中。根据本发明的一个示例,可预先规定目标对象位于映射区域中的部分占该对象整体的比例应大于或等于预定值。从而对象确定单元470在所识别的对象中,可根据对象位于映射区域中的部分在该对象中所占的比例确定目标对象。
在电子设备为上述手持电子设备或者头戴电子设备并且采集单元对用户透过镜片部件观看的第一场景进行采集的实时图像为第一图像的情况下,图4中所示的电子设备400还可包括距离确定单元。距离确定单元可确定在第一场景中与对象对应的物体与电子设备之间的第一距离。例如,采集单元可包括设置在电子设备的不同位置上的多个采集部件。距离确定单元可根据第一场景中与每个对象对应的物体在多个采集模块所采集的图像中的位置偏移,确定该物体与电子设备之间的第一距离。在根据本发明的示例中,第一场景中的物体可以是没有生命的物体,例如建筑物、树木等。此外,第一场景中的物体也可以是有生命的物体,例如人、动物等。
在此情况下,对象确定单元470可包括第一对象确定模块、第一候选对象确定模块、第二候选对象确定模块和目标对象确定模块。具体地,第一对象确定模块可在所识别的对象中,确定其位于映射区域中的部分在该对象中所占的比例大于或等于预定比例的第一对象。第一候选对象确定模块可在所确定的第一对象中,根据每个第一对象所对应的物体与电子设备之间的第一距离,确定其所对应的物体与电子设备之间的第一距离最短的第一候选对象。而第二候选对象确定模块可在除了第一候选对象的第一对象中,根据每个第一对象所对应的物体与电子设备之间的第一距离,确定其所对应的物体与电子设备之间的第一距离与第一候选对象所对应的物体与电子设备之间的第一距离之间的差异小于或等于预定距离的第二候选对象。最后,目标对象确定模块可将第一候选对象和第二候选对象确定为目标对象。
从而用户可一次指定在实时图像中的多个目标对象,而不需要逐一对目标对象进行指定,方便了用户的操作。此外,还可避免将远离目标对象的、用户不感兴趣的其他对象误识别成目标对象。
边缘提取单元480可提取所获得的目标对象的边缘。并且显示单元410可以第一线条显示所提取的目标对象的边缘。从而,当用户进行例如复制、剪切之类的操作时,可清楚直接地看到其选择的对象。
根据本发明的一个示例,显示单元410还可以第二线条显示所述映射区域。并且电子设备400还可包括线条处理单元。在提取所获得的目标对象的边缘后,线条处理单元可将第二线条改变到所提取的目标对象的边缘以作为第一线条。从而用户可直观地看到代表操作体运动轨迹的第二线条320吸附到其选择的目标对象的边缘。
此外,根据本发明的另一示例,电子设备400还可包括移动确定单元。在确定位于映射区域中的目标对象之后移动确定单元可确定目标对象是否移动。例如,移动确定单元可通过计算映射区域中的对象的运动速度来确定是否是目标对象在移动。更具体地,在目标对象之前处于静止的情况下,当映射区域中出现快速移动的对象时由于处于静止的对象通常不能立刻具有较高的速度,因此移动确定单元可确定不是目标对象在移动。
此外,当确定目标对象在移动时,显示单元可继续以第一线条显示移动的目标对象的边缘。从而可始终向用户提示其选择的目标对象。此外,在对目标对象进行了设置的情况下,在目标对象移动时可始终保持该设置。例如在调高目标对象的显示亮度以使其显示得更加突出的情况下,在目标对象移动时可始终保持以调高后的亮度显示目标对象。
在本实施例的电子设备中,用户在选择电子设备所显示的图像,特别是电子设备所拍摄的实时图像,中的特定对象时,只需要粗略地在输入在所显示的图像中其感兴趣的对象所在的范围,而不需要精确地输入所显示的图像中其感兴趣的对象的轮廓,简化了用户的输入。此外,通过以第一线条显示所述目标对象的边缘,可清楚地向用户指示该用户所选择的第一图像中的对象。
此外,如上所述,优选地,根据本发明的一个示例,电子设备可以是头戴电子设备。例如,电子设备为眼镜式电子设备。图5是示出了图4中所示的电子设备400为眼镜式电子设备的一个示例情形的说明图。为了简洁,不再结合图5描述眼镜式电子设备500与电子设备400类似的部分。
如图5所示,电子设备500还可包括镜框模块510、镜片部件520以及固定单元。镜片部件520设置在镜框模块510中。电子设备500的固定单元包括第一支撑臂531和第二支撑臂532。如图3所示,第一支撑臂包含第一连接部分531(如图5中的阴影部分所示)和第一保持部分532。第一连接部分531连接镜框模块510和第一保持部分532。第二支撑臂包含第二连接部分541(如图5中的阴影部分所示)和第二保持部分542。第二连接部分541连接镜框模块510和第二保持部分542。此外,可在镜框模块510上设置第三保持部分(未示出)。具体地,第三保持部分可设置在镜框模块510位于两个镜片之间的位置上。通过第一保持部分、第二保持部分和第三保持部分,头戴式电子设备被保持在用户的头部。具体地,第一保持部分和第二保持部分可用于将第一支撑臂和第二支撑臂支撑在用户的耳部,而第三保持部分可用于将镜框模块510支撑在用户的鼻梁处。
在本实施例中,电子设备500的采集单元(未示出)可与镜片部件520对应地设置,以确定采集单元所采集的图像与用户看到的景象基本一致。例如,采集单元可设置在两个镜片部件之间的镜框模块510上。可替换地,电子设备500的采集单元也可与镜片部件中的一个对应地设置在镜框模块510上。此外,电子设备500的采集单元也可包括两个采集模块,并且与两个镜片分别对应地设置在镜框模块510上,采集单元可对两个采集模块所采集的图像进行处理,以结合两个采集模块所采集的图像,使得处理后的图像更接近用户真实看到的景象。
图6是示出了根据电子设备500中的显示单元600的示例性框图。如图6所示,显示单元600可包括第一显示模块610、第一光学系统620、第一光导部件630和第二光导部件640。图5是示出了图6所示的显示单元600的一个示意情形的说明图。
第一显示模块610可设置在镜框模块510中,并且与第一数据传输线相连接。第一显示模块610可根据电子设备500的第一数据传输线传送的第一视频信号显示第一图像。第一数据传输线可设置在固定单元和镜框模块中。第一数据传输线可将显示信号传送到显示单元。显示单元可根据显示信号向用户进行显示。此外,在本实施例中虽然以数据传输线为例进行了描述,但是本发明不限于此,例如,根据本发明的另一示例,还可通过无线传输方式,将显示信号传送到显示单元。此外,根据本发明的一个示例,第一显示模块610可以是尺寸较小的微型显示屏的显示模块。
第一光学系统620也可设置在镜框模块510中。第一光学系统620可接收从第一显示模块发出的光线,并对从第一显示模块发出的光线进行光路转换,以形成第一放大虚像。也就是说,第一光学系统620具有正屈光力。从而用户可清楚观看第一图像,并且用户所观看的图像的尺寸不受显示单元的尺寸的限制。
例如,光学系统可包括以凸透镜。可替换地,为了减少像差、避免色散等对成像造成的干扰,带给用户更好的视觉体验,光学系统也可由包含凸透镜和凹透镜的多个透镜形成透镜组件。此外,根据本发明的一个示例,可沿4光学系统的光轴对应地设置第一显示模块610和第一光学系统620。可替换地,根据本发明的另一示例,显示单元还可包括第五光导部件,以将从第一显示模块610发射的光线传送到第一光学系统620。
如图7所示,在第一光学系统620收从第一显示模块610发出的光线,并对从第一显示模块610发出的光线进行光路转换后,第一光导部件630可将经过第一光学系统的光线传送到第二光导部件640。第二光导部件640可设置在镜片部件520中。并且第二光导部件可接收通过第一光导部件630传送的光线,并将第一光导部件630传送的光线向佩戴头戴式电子设备的用户的眼睛进行反射。
返回图5,镜片部件520在从内侧到外侧的方向上满足第一预定透光率,使得用户能够在观看第一放大虚像的同时能够观看周围环境。例如,图像生成单元根据所述图像设置,生成关于所述目标对象的第一图像的情况下,显示单元显示所生成的第一图像,使得用户在透过镜片看到第一场景中的目标对象的同时,看到显示单元所显示的叠加在目标对象上的第一图像。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现。并且软件模块可以置于任意形式的计算机存储介质中。为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
本领域技术人员应该理解,可依赖于设计需求和其它因素对本发明进行各种修改、组合、部分组合和替换,只要它们在所附权利要求书及其等价物的范围内。

Claims (15)

1.一种提取目标对象的方法,应用于包括显示单元的电子设备,所述方法包括:
在所述显示单元的显示区域中显示第一图像;
检测所述电子设备的空间操作区域中是否出现了操作体,其中所述显示区域与所述空间操作区域相对应;
当确定所述电子设备的空间操作区域中出现了所述操作体时,获得所述操作体的运动轨迹;
确定所述运动轨迹是否形成了闭合曲线;
当确定所述运动轨迹形成了闭合曲线时,获得所述闭合曲线围成的区域在所述第一图像中的映射区域;
对所述第一图像中的对象进行识别;
在所识别的对象中,确定位于所述映射区域中的目标对象;
提取所获得的目标对象的边缘;以及
以第一线条显示所述目标对象的边缘;
其中,所述空间操作区域位于所述显示区域与使用电子设备的用户之间,或所述显示区域位于所述空间操作区域与使用电子设备的用户之间。
2.如权利要求1所述的方法,其中
所述第一图像为第一操作界面。
3.如权利要求1所述的方法,其中
所述电子设备还包括镜片部件以及与所述镜片部件对应设置的采集单元;
所述显示单元与所述镜片部件对应设置;
所述显示区域位于所述空间操作区域与使用所述电子设备的用户之间;
所述方法还包括:
当所述镜片部件位于用户的可视区域中时,通过所述采集单元对所述用户透过所述镜片部件观看的第一场景进行采集,并获得实时图像作为所述第一图像,
所述检测所述电子设备的空间操作区域中是否出现了操作体包括:
根据所述第一图像,确定所述检测所述电子设备的空间操作区域中是否出现了操作体。
4.如权利要求3所述的方法,其中所述在所识别的对象中,确定位于所述映射区域中的目标对象包括:
在所识别的对象中,根据所识别的对象位于所述映射区域中的部分在该所识别的对象中所占的比例确定所述目标对象。
5.如权利要求4所述的方法,还包括:
确定在所述第一场景中与所述所识别的对象对应的物体与所述电子设备之间的第一距离,
所述在所识别的对象中,根据所识别的对象位于所述映射区域中的部分在该所识别的对象中所占的比例确定所述目标对象包括:
在所识别的对象中,确定所识别的对象位于所述映射区域中的部分在该所识别的对象中所占的比例大于或等于预定比例的第一对象;
在所述第一对象中,根据每个所述第一对象所对应的物体与所述电子设备之间的第一距离,确定其所对应的物体与所述电子设备之间的第一距离最短的第一候选对象;
在除了所述第一候选对象以外的所述第一对象中,根据每个所述第一对象所对应的物体与所述电子设备之间的第一距离,确定其所对应的物体与所述电子设备之间的第一距离与所述第一候选对象所对应的物体与所述电子设备之间的第一距离之间的差异小于或等于预定距离的第二候选对象;以及
将第一候选对象和所述第二候选对象确定为所述目标对象。
6.如权利要求1所述的方法,在所述确定位于所述映射区域中的目标对象之后还包括:
确定所述目标对象是否移动;以及
当所述目标对象移动时,继续以所述第一线条显示移动的所述目标对象的边缘。
7.如权利要求1所述的方法,还包括:
以第二线条显示所述映射区域;
所述以第一线条显示所述目标对象的边缘包括:
在提取所获得的目标对象的边缘后,将所述第二线条改变到所提取的目标对象的边缘以作为所述第一线条。
8.一种电子设备,包括:
显示单元,配置来在显示区域中显示第一图像;
操作体识别单元,配置来检测所述电子设备的空间操作区域中是否出现了操作体,其中所述显示区域与所述空间操作区域相对应;
轨迹获取单元,配置来当确定所述电子设备的空间操作区域中出现了所述操作体时,获得所述操作体的运动轨迹;
轨迹确定单元,配置来确定所述运动轨迹是否形成了闭合曲线;
区域获取单元,配置来当确定所述运动轨迹形成了闭合曲线时,获得所述闭合曲线围成的区域在所述第一图像中的映射区域;
对象识别单元,配置来对所述第一图像中的对象进行识别;
对象确定单元,配置来在所识别的对象中,确定位于所述映射区域中的目标对象;以及
边缘提取单元,配置来提取所获得的目标对象的边缘,
其中所述显示单元还配置来以第一线条显示所述目标对象的边缘;
其中,所述空间操作区域位于所述显示区域与使用电子设备的用户之间,或所述显示区域位于所述空间操作区域与使用电子设备的用户之间。
9.如权利要求8所述的电子设备,其中
所述第一图像为第一操作界面。
10.如权利要求8所述的电子设备,还包括:
镜片部件;以及
与所述镜片部件对应设置的采集单元,配置来当所述镜片部件位于用户的可视区域中时,通过所述采集单元对所述用户透过所述镜片部件观看的第一场景进行采集,并获得实时图像作为所述第一图像,
其中所述显示单元与所述镜片部件对应设置,
所述显示区域位于所述空间操作区域与使用所述电子设备的用户之间,以及
所述操作体识别单元根据所述第一图像,确定所述空间操作区域中是否出现了操作体。
11.如权利要求10所述的电子设备,其中
所述对象确定单元在所识别的对象中,根据所识别的对象位于所述映射区域中的部分在该所识别的对象中所占的比例确定所述目标对象。
12.如权利要求11所述的电子设备,还包括:
距离确定单元,配置来确定在所述第一场景中与所述所识别的对象对应的物体与所述电子设备之间的第一距离,
所述对象确定单元包括:
第一对象确定模块,配置来在所识别的对象中,确定所识别的对象位于所述映射区域中的部分在该所识别的对象中所占的比例大于或等于预定比例的第一对象;
第一候选对象确定模块,配置来在所述第一对象中,根据每个所述第一对象所对应的物体与所述电子设备之间的第一距离,确定其所对应的物体与所述电子设备之间的第一距离最短的第一候选对象;
第二候选对象确定模块,配置来在除了所述第一候选对象以外的所述第一对象中,根据每个所述第一对象所对应的物体与所述电子设备之间的第一距离,确定其所对应的物体与所述电子设备之间的第一距离与所述第一候选对象所对应的物体与所述电子设备之间的第一距离之间的差异小于或等于预定距离的第二候选对象;以及
目标对象确定模块,配置来将第一候选对象和所述第二候选对象确定为所述目标对象。
13.如权利要求8所述的电子设备,还包括:
移动确定单元,配置来在确定位于所述映射区域中的目标对象之后确定所述目标对象是否移动,
其中当所述目标对象移动时,所述显示单元还配置来继续以所述第一线条显示移动的所述目标对象的边缘。
14.如权利要求8所述的电子设备,其中
所述显示单元还配置来以第二线条显示所述映射区域;
所述电子设备还包括:
线条处理单元,配置来在提取所获得的目标对象的边缘后,将所述第二线条改变到所提取的目标对象的边缘以作为所述第一线条。
15.如权利要求10所述的电子设备,其中所述电子设备为眼镜式电子设备,所述电子设备还包括:
镜框部件,其中所述镜片部件设置在所述镜框部件中;
固定单元包括:
第一支撑臂,包含第一连接部分和第一保持部分,其中所述第一连接部分配置来连接所述镜框部件和所述第一保持部分;
第二支撑臂,包含第二连接部分和第二保持部分,其中所述第二连接部分配置来连接所述镜框部件和所述第二保持部分,
其中,所述镜框部件包括第三保持部分,
所述第一保持部分、所述第二保持部分和所述第三保持部分配置来将所述电子设备保持在用户的头部,
所述采集单元与所述镜片部件对应地设置,
所述显示单元,包含:
第一显示模块,设置在所述镜框部件中;
第一光学系统,设置在所述镜框部件中,配置来接收从所述第一显示模块发出的光线,并对从所述第一显示模块发出的光线进行光路转换,以形成第一放大虚像;
第一光导部件,配置来将经过所述第一光学系统的光线传送到第二光导部件;
所述第二光导部件,设置在所述镜片部件中,配置来将所述第一光导部件传送的光线向佩戴所述电子设备的用户的眼睛进行反射。
CN201310109703.3A 2013-03-29 2013-03-29 提取目标对象的方法和电子设备 Active CN104077784B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310109703.3A CN104077784B (zh) 2013-03-29 2013-03-29 提取目标对象的方法和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310109703.3A CN104077784B (zh) 2013-03-29 2013-03-29 提取目标对象的方法和电子设备

Publications (2)

Publication Number Publication Date
CN104077784A CN104077784A (zh) 2014-10-01
CN104077784B true CN104077784B (zh) 2018-02-27

Family

ID=51599026

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310109703.3A Active CN104077784B (zh) 2013-03-29 2013-03-29 提取目标对象的方法和电子设备

Country Status (1)

Country Link
CN (1) CN104077784B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105786163B (zh) * 2014-12-19 2019-04-26 联想(北京)有限公司 显示处理方法和显示处理装置
CN105808051B (zh) * 2016-02-26 2019-12-24 联想(北京)有限公司 一种图像处理方法及电子设备
CN107832795B (zh) * 2017-11-14 2021-07-27 深圳码隆科技有限公司 物品识别方法、系统以及电子设备
CN111710018B (zh) * 2020-06-29 2023-05-05 广东小天才科技有限公司 一种手动涂抹杂物的方法、装置、电子设备和存储介质
CN115147617B (zh) * 2022-09-06 2022-11-22 聊城集众环保科技有限公司 基于计算机视觉的污水处理智能监控方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102063727A (zh) * 2011-01-09 2011-05-18 北京理工大学 一种基于协方差匹配的主动轮廓跟踪方法
CN102681651A (zh) * 2011-03-07 2012-09-19 刘广松 一种用户交互系统和方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102063727A (zh) * 2011-01-09 2011-05-18 北京理工大学 一种基于协方差匹配的主动轮廓跟踪方法
CN102681651A (zh) * 2011-03-07 2012-09-19 刘广松 一种用户交互系统和方法

Also Published As

Publication number Publication date
CN104077784A (zh) 2014-10-01

Similar Documents

Publication Publication Date Title
WO2017118075A1 (zh) 人机交互系统、方法及装置
US9442571B2 (en) Control method for generating control instruction based on motion parameter of hand and electronic device using the control method
Berman et al. Sensors for gesture recognition systems
US9900498B2 (en) Glass-type terminal and method for controlling the same
US20140240225A1 (en) Method for touchless control of a device
US9262780B2 (en) Method and apparatus for enabling real-time product and vendor identification
CN104321730B (zh) 3d图形用户接口
US11017257B2 (en) Information processing device, information processing method, and program
JP4681629B2 (ja) 表示デバイスのキャリブレーション方法及び装置
EP2824541B1 (en) Method and apparatus for connecting devices using eye tracking
CN107390863B (zh) 设备的控制方法及装置、电子设备、存储介质
CN104077784B (zh) 提取目标对象的方法和电子设备
CN108027654B (zh) 输入设备、输入方法和程序
CN105122201A (zh) 眼镜上的多点触摸交互
CN108027656B (zh) 输入设备、输入方法和程序
CN105306084A (zh) 眼镜型终端及其控制方法
US20120229509A1 (en) System and method for user interaction
US11016559B2 (en) Display system and display control method of display system
KR102110208B1 (ko) 안경형 단말기 및 이의 제어방법
CN103176605A (zh) 一种手势识别控制装置及控制方法
CN109839827B (zh) 一种基于全空间位置信息的手势识别智能家居控制系统
CN103713387A (zh) 电子设备和采集方法
CN204166478U (zh) 头戴式智能设备
CN104239877A (zh) 图像处理的方法和图像采集设备
WO2018076609A1 (zh) 一种操作终端的方法和终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant