CN111147750B - 对象显示方法、电子设备及介质 - Google Patents

对象显示方法、电子设备及介质 Download PDF

Info

Publication number
CN111147750B
CN111147750B CN201911415570.6A CN201911415570A CN111147750B CN 111147750 B CN111147750 B CN 111147750B CN 201911415570 A CN201911415570 A CN 201911415570A CN 111147750 B CN111147750 B CN 111147750B
Authority
CN
China
Prior art keywords
virtual
target
assembly
tool
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911415570.6A
Other languages
English (en)
Other versions
CN111147750A (zh
Inventor
杨牧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201911415570.6A priority Critical patent/CN111147750B/zh
Publication of CN111147750A publication Critical patent/CN111147750A/zh
Application granted granted Critical
Publication of CN111147750B publication Critical patent/CN111147750B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种对象显示方法、电子设备及介质。其中,对象显示方法包括:在拍摄预览界面中,显示目标物体对应的第一虚拟对象;在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。利用本发明实施例能够解决现有技术中对物体的安装难度较大、安装效率较低的问题。

Description

对象显示方法、电子设备及介质
技术领域
本发明实施例涉及电子设备技术领域,尤其涉及对象显示方法、电子设备及介质。
背景技术
目前,当用户想要对家具进行组装时,需要阅读说明书,根据说明书学习家具的每个部分的安装流程。
但是,在零件繁多或者相似的零件较多的情况下,用户在只看说明书的情况下,家具的安装难度较大、安装效率较低。
发明内容
本发明实施例提供一种对象显示方法、电子设备及介质,能够解决现有技术中对物体的安装难度较大、安装效率较低的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种对象显示方法,应用于电子设备,包括:
在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。
第二方面,本发明实施例提供了一种电子设备,包括:
第一显示模块,用于在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
第二显示模块,用于在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。
第三方面,本发明实施例提供了一种电子设备,包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序,计算机程序被处理器执行时实现如第一方面所述的对象显示方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,计算机程序被处理器执行时实现如第一方面所述的对象显示方法的步骤。
在本发明实施例中,能够在拍摄预览界面中显示目标物体对应的第一虚拟对象,并且在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示组装目标物体相关联的物体对应的第二虚拟对象,以使用户能够利用电子设备的拍摄功能快速获取与第一虚拟对象的目标区域相关联的第二虚拟对象,能够快速、准确、直观地为用户提示所需要的物体对应的第二虚拟对象,提高了查找第二虚拟对象对应的物体的效率,降低了目标物体的安装难度,提高了目标物体的安装效率。
附图说明
图1为本发明一个实施例提供的对象显示方法的流程示意图;
图2为本发明一个实施例提供的第一虚拟对象显示界面的界面示意图;
图3为本发明一个实施例提供的第二虚拟对象显示界面的界面示意图;
图4为本发明一个实施例提供的第一提示信息的提示界面示意图;
图5为本发明一个实施例提供的对第一虚拟对象拆分后的界面示意图;
图6为本发明一个实施例提供的对焦框对准组装工具实物的界面示意图;
图7为本发明一个实施例提供的第二提示信息的提示界面示意图;
图8为本发明一个实施例提供的对第一虚拟对象拆分后的界面示意图;
图9为本发明一个实施例提供的对准框对准目标虚拟零件对象的界面示意图;
图10为本发明一个实施例提供的第三提示信息的提示界面示意图;
图11为本发明一个实施例提供的显示组装零件实物的界面示意图;
图12为本发明一个实施例提供的第四提示信息的提示界面示意图;
图13为本发明一个实施例提供的电子设备的结构示意图;
图14为实现本发明各个实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1示出了本发明一个实施例提供的对象显示方法的流程示意图。图1所示的对象显示方法可以应用于电子设备,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
如图1所示,该对象显示方法可以包括:
步骤110、在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
步骤120、在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。
可选的,本发明实施例中,上述虚拟对象可以为增强现实(Augmented Reality,AR)对象。需要说明的是,AR对象可以理解为:AR设备对现实对象进行分析,以得到现实对象的特征信息,例如现实对象的类型信息、现实对象的外观信息(例如结构、颜色、形状等)和现实对象在空间中的位置信息等,并根据该特征信息在AR设备中构建的AR模型。
可选的,本发明实施例中,上述虚拟对象具体可以为虚拟图像、虚拟图案等。
在本发明实施例中,能够在拍摄预览界面中显示目标物体对应的第一虚拟对象,并且在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示组装目标物体相关联的物体对应的第二虚拟对象,以使用户能够利用电子设备的拍摄功能快速获取与第一虚拟对象的目标区域相关联的第二虚拟对象,能够快速、准确、直观地为用户提示所需要的物体对应的第二虚拟对象,提高了查找第二虚拟对象对应的物体的效率,降低了目标物体的安装难度,提高了目标物体的安装效率。
在本发明一些实施例中,拍摄预览界面用于在拍摄模式下显示电子设备的摄像头所采集的对象。其中,目标物体可以为摄像头所采集的对象中的实物物体,第一虚拟对象可以为目标物体对应的三维图像或者AR对象。例如,目标物体可以为待组装的家具实物,第一虚拟对象可以为该家具实物对应的AR对象。
具体地,电子设备可以将摄像头所采集的对象与目标物体的三维图像或者AR对象叠加在一起进行显示,使目标物体的三维图像或者AR对象作为拍摄预览界面的前景,形成虚拟对象,而摄像头所采集的对象作为拍摄预览界面的后景,即为实际对象。
图2示出了本发明一个实施例提供的第一虚拟对象显示界面的界面示意图。如图2所示,在拍摄预览界面中可以显示有家具实物“桌子”对应的第一虚拟对象201。
在本发明一些实施例中,步骤110的具体方法可以包括:
在拍摄预览界面中,通过对焦框扫描目标物体的组装说明书内的目标识别标签,得到目标识别标签中的标签信息;
根据标签信息,获取目标物体对应的第一虚拟对象;
在拍摄预览界面中,显示第一虚拟对象。
其中,目标识别标签可以为条形码标签、二维码标签或者射频标签,标签信息可以为条形码信息、二维码信息或者射频标签信息,该标签信息可以包括第一虚拟对象的获取地址信息。
以目标识别标签为二维码标签、标签信息为二维码信息为例,具体地,在拍摄预览界面中,可以通过对焦框扫描目标物体的组装说明书内的二维码标签,得到二维码标签中的二维码信息,并解析二维码信息,得到第一虚拟对象的获取地址信息,从而根据获取地址信息获取目标物体对应的第一虚拟对象,最后,在拍摄预览界面中,显示第一虚拟对象,以在显示摄像头所采集的对象的同时,在摄像头所采集的对象内同时显示第一虚拟对象。
在本发明另一些实施例中,步骤110的具体方法可以包括:
在拍摄预览界面中,利用对焦框扫描目标物体的组装说明书,获取组装说明书中的说明书内容;
根据说明书内容中的组装步骤说明自主学习目标物体的样式结构或者实体结构,并再现目标物体的三维图像第一虚拟对象,以在显示摄像头所采集的对象的同时,在摄像头所采集的对象内同时显示目标物体的样式结构或者实体结构的第一虚拟对象。
在本发明实施例中,对焦框所对准的第一虚拟对象的目标区域不相同,会导致所显示的第二虚拟对象不相同。下面,将以两种情况分别进行说明。
第一种情况
在本发明一些实施例中,目标区域为第一虚拟对象所在的区域,第二虚拟对象为与组装目标物体相关联的组装工具实物对应的虚拟工具对象。
图3示出了本发明一个实施例提供的第二虚拟对象显示界面的界面示意图。如图3所示,步骤120中所述的对焦框对准第一虚拟对象的目标区域的具体方法可以为:
在组装工具匹配模式下,用户可以左右、上下移动电子设备,改变电子设备的摄像头的角度,从而使对焦框扫描整个第一虚拟对象201,并最终对准第一虚拟对象201所在的目标区域,然后,在拍摄预览界面内的对焦框以外的其他区域显示与组装目标物体相关联的组装工具实物对应的虚拟工具对象202,并提示用户可以准备虚拟工具对象202对应的组装工具实物,以使用户根据虚拟工具对象202准备组装工具。
其中,电子设备可以通过互联网查询预先设置的与第一虚拟对象相关联的虚拟工具对象。虚拟工具对象202可以为组装工具实物对应的三维图像或者AR对象。
在本发明一些实施例中,在步骤120之后,该对象显示方法还可以包括:
在对焦框对准N个组装工具实物的情况下,确定虚拟工具对象中的目标虚拟工具对象,目标虚拟工具对象为N个组装工具实物相对于虚拟工具对象所缺失的对象,N≥1;
输出第一提示信息,第一提示信息用于提示缺少目标虚拟工具对象。
具体地,在拍摄预览界面内显示有与目标区域相关联的第二虚拟对象之后,若摄像头所采集的对象变为组装工具实物,即对焦框对准N个组装工具实物,则可以识别对焦框所对准的每个组装工具实物与每个虚拟工具对象的匹配度,若任一个组装工具实物与一个虚拟工具对象的匹配度高于设定的第一匹配度阈值,则确定该组装工具实物与该虚拟工具对象相匹配。在识别了全部的组装工具实物与每个虚拟工具对象的匹配度之后,可以判断是否每个虚拟工具对象均有相匹配的组装工具实物,如果任一个虚拟工具对象不具有相匹配的组装工具实物,则将其确定为目标虚拟工具对象,即相对于虚拟工具对象所缺失的对象,并输出第一提示信息。
其中,第一提示信息可以包括语音信息、文字信息或者图像标识等。
图4示出了本发明一个实施例提供的第一提示信息的提示界面示意图。首先,继续参见图3,当在拍摄预览界面内显示虚拟工具对象202以后,用户可以点击“已完成”按钮203,用于进入组装工具实物识别模式。在进入组装工具实物识别模式后,图3中所述的第一虚拟对象201可以缩小显示于图4所示的拍摄预览界面的左上角,对焦框可以对准用户所准备的组装工具实物,在对焦框对准组装工具实物识别出目标虚拟工具对象后,可以在拍摄预览界面内的对焦框以外的其他区域显示第一语音信息播放控件204,如果目标虚拟工具对象为“扳手”,则在触发第一语音信息播放控件204后,电子设备可以播放“缺少扳手,请补充”的语音信息。同时,可以在目标虚拟工具对象的右上角添加角标图像标识205,例如角标图像标识内可以为文字“缺失”,再例如角标图像标识内可以为符号“!”。另外,还可以在虚拟工具对象上增加背景图像标识206,例如,目标虚拟工具对象的背景图像标识可以为灰色,其他虚拟工具对象的背景图像标识可以为黑色。
因此,本发明实施例能够以随处移动的虚拟对象丰富用户的操作,大大提升沉浸感和逼真度,并且可以方便用户快速查询组装目标物体所需要的组装工具,并且在开始组装目标物体之前,检查用户所准备的组装工具是否齐全,避免中途去找寻工具,提高了目标物体的安装效率。
第二种情况
在本发明一些实施例中,目标物体可以包括至少两个组装零件实物,对应地,第一虚拟对象可以包括至少两个虚拟零件对象,一个虚拟零件对象与一个组装零件实物对应,并且,目标区域为目标虚拟零件对象所在的区域,因此,第二虚拟对象为目标虚拟零件对象。
在一些实施例中,步骤120的具体方法可以包括:
在对焦框对准目标虚拟零件对象所在的区域的时长达到第一预定时长的情况下,隐藏拍摄预览界面中除目标虚拟零件对象以外的所有虚拟零件对象。
例如,第一预定时长可以为1.5s,在对焦框对准目标零件虚拟对象超过1.5s的情况下,可以锁定该目标零件虚拟对象,并且隐藏拍摄预览界面中除目标虚拟零件对象以外的所有虚拟零件对象,即仅在拍摄预览界面中显示目标虚拟零件对象。
此时,用户可以随处移动目标零件虚拟对象,并且可以从不同的角度不受限制的观察甚至通过手势进入目标零件虚拟对象内部,以查看其内部结构。
在另一些实施例中,在步骤120之前,该对象显示方法还可以包括:
接收用户对第一虚拟对象的第一输入;
响应于第一输入,将第一虚拟对象拆分为至少两个虚拟零件对象。
其中,第一输入用于触发对第一虚拟对象进行拆分的输入。例如,第一输入可以为用户对电子设备输入的分解手势,当电子设备接收到分解手势之后,可以将第一虚拟对象拆分为至少两个虚拟零件对象。
具体地,电子设备可以根据分解手势的手势变化程度,确定对第一虚拟对象的拆分程度,当手势变化程度最小时,仅将第一虚拟对象拆分为多个虚拟组件对象,每个虚拟组件对象对应一个组装组件实物,每个组装组件实物由至少一个组装零件实物构成,由此,每个虚拟组件对象由至少一个虚拟零件对象构成。当手势变化程度最大时,第一虚拟对象的所有虚拟零件对象均被拆分显示。
在本发明实施例中,当拍摄预览界面内所显示的第二虚拟对象为目标虚拟零件对象时,可以向用户提示用于进入不同的操作模式的操作控件,例如,组装零件实物查找模式和安装流程教学模式,用户在点击任意操作控件后,可以进入对应的操作模式。下面,将根据不同的操作模式进行分别说明。
在组装零件实物查找模式下,在步骤120之后,该对象显示方法还可以包括:
在对焦框对准M个组装零件实物的情况下,确定M个组装零件实物中与目标虚拟零件对象相匹配的I个第一组装零件实物,M≥1,1≤I≤M;
输出第二提示信息,第二提示信息用于提示第一组装零件实物与目标虚拟零件对象相匹配。
具体地,在拍摄预览界面内显示有与目标区域相关联的第二虚拟对象之后,若摄像头所采集的对象变为组装零件实物,即对焦框对准M个组装零件实物,则可以识别对焦框所对准的每个组装零件实物与目标虚拟零件对象的匹配度,若任一个组装零件实物与目标虚拟零件对象的匹配度高于设定的第二匹配度阈值,则确定该组装零件实物与目标虚拟零件对象相匹配。在识别了全部的组装工具实物与目标虚拟零件对象的匹配度之后,可以判断与目标虚拟零件对象相匹配的组装工具实物,则将其确定为第一组装零件实物,从而输出第二提示信息。
其中,第二提示信息可以包括语音信息、文字信息或者图像标识等。
图5示出了本发明一个实施例提供的对第一虚拟对象拆分后的界面示意图。第一虚拟对象被拆分为4个虚拟零件对象“桌腿”209和1个虚拟零件对象“桌板”。在进入组装零件实物查找模式后,若目标区域为其中一个虚拟零件对象“桌腿”209所在的区域,在对焦框对准目标区域的时长达到1.5s的情况下,则可以确定第二虚拟对象为虚拟零件对象“桌腿”209,即目标虚拟零件对象可以为虚拟零件对象“桌腿”209。
图6示出了本发明一个实施例提供的对焦框对准组装工具实物的界面示意图。如图6所示,目标虚拟零件对象可以为虚拟零件对象“桌腿”209,虚拟零件对象“桌腿”209可以缩小显示于图6所述的拍摄预览界面的左上角,对焦框可以对准用户所准备的组装零件实物。
图7示出了本发明一个实施例提供的第二提示信息的提示界面示意图。如图7所示,在对焦框对准组装零件实物并且识别出第一组装零件实物后,可以在第一组装零件实物的右上角添加指示图像标识211,例如指示图像标识可以为指向第一组装零件实物的箭头。另外,还可以在将左上角显示的虚拟零件对象“桌腿”209作为对象图像标识叠加显示于第一组装零件实物的下方,并且隐藏原虚拟零件对象“桌腿”209。同时,在所找到的第一组装零件实物的数量大于1时,可以在拍摄预览界面内的对焦框以外的其他区域显示第二语音信息播放控件210,在触发第二语音信息播放控件210后,电子设备可以播放“已为您找到四件与之相匹配的零件”的语音信息。
在又一些实施例中,在将第一虚拟对象拆分为至少两个虚拟零件对象之后,该对象显示方法还可以包括:
显示每个虚拟零件对象对应的安装顺序标识。
从而,可以向用户提示组装目标物体的每个组装零件实物的安装顺序,使用户能够更直观地了解其当前应该安装的组装零件。
图8示出了本发明一个实施例提供的对第一虚拟对象拆分后的界面示意图。如图8所示,从拍摄预览界面的底部至顶部的方向,按照安装顺序由前向后的顺序显示了多个虚拟零件对象207,相同类型的虚拟零件对象中位于最左侧的虚拟零件对象对应显示有安装顺序标识208。
在安装流程教学模式下,在步骤120之后,该对象显示方法还可以包括:
在对焦框对准第二组装零件实物的时长达到第二预定时长的情况下,输出第三提示信息;
其中,第三提示信息用于提示目标虚拟零件对象对应的第一组装零件实物的安装流程,第三提示信息包括与安装流程相关的物体对应的虚拟对象、文字提示信息和语言提示信息中的至少一种;第二组装零件实物为待安装第一组装零件实物的组装零件实物。
在一些实施例中,与安装流程相关的物体对应的虚拟对象可以为将第二组装零件实物与第一组装零件实物固定所需的组装工具实物对应的虚拟工具对象。
例如,第二预定时长可以为3s,在对焦框对准第二组装零件实物超过3s的情况下,可以输出第三提示信息。
图9示出了本发明一个实施例提供的对准框对准目标虚拟零件对象的界面示意图。如图9所示,在第一虚拟对象被拆分为4个虚拟零件对象“桌腿”、4个虚拟零件对象“插销”212、4个虚拟零件对象“垫圈”和1个“桌板”虚拟零件对象。在进入安装流程教学模式后,若目标区域为其中一个虚拟零件对象“插销”212所在的区域,在对焦框对准目标区域的时长达到3s的情况下,则可以确定第二虚拟对象为虚拟零件对象“插销”212,即目标虚拟零件对象可以为虚拟零件对象“插销”212。
图10示出了本发明一个实施例提供的第三提示信息的提示界面示意图。如图10所示,目标虚拟零件对象可以为虚拟零件对象“插销”212,虚拟零件对象“插销”212可以显示于图10所示的拍摄预览界面的左上角,拍摄预览界面中可以显示第二组装零件实物“桌板”213,并且在第二组装零件实物“桌板”213上方显示由虚拟零件对象“插销”212和虚拟工具对象“螺钉”214,以及在第二组装零件实物“桌板”213、虚拟零件对象“插销”212和虚拟工具对象“螺钉”214之间显示指示安装方向的安装方向标识“单向箭头”215。同时,可以在左上角的虚拟零件对象“插销”212上显示指示旋转方向的旋转方向标识“旋转箭头”216。同时,可以显示第三语音信息播放控件217,在触发第三语音信息播放控件217后,电子设备可以播放“请将物体缺口旋转按照图示方向和位置详细安装进对应的位置”的语音信息。
在安装流程教学模式下,在输出第三提示信息之后,该对象显示方法还可以包括:
在对焦框对准由第一组装零件实物和第二组装零件实物组合成的组合物实物的情况下,检测第一组装零件实物的安装结果;
在检测到安装结果为安装正确的情况下,输出第四提示信息,第四提示信息用于提示第一组装零件实物安装正确;
在检测到安装结果为安装不准确的情况下,输出第五提示信息,第五提示信息用于提示第一组装零件实物安装不正确。
其中,第四提示信息和第五提示信息可以包括语音信息、文字信息或者图像标识等。
具体地,在对焦框对准由第一组装零件实物和第二组装零件实物组合成的组合物实物的情况下,用户可以输入语音指令,电子设备可以在接收到语音指令后,检测第一组装零件实物的安装结果。例如,用户可以输入“检查是否安装完成”的语音指令,使电子设备检测第一组装零件实物的安装结果,并且在检测到安装结果为安装正确的情况下,输出第四提示信息,在检测到安装结果为安装不准确的情况下,输出第五提示信息。
进一步地,在电子设备可以在接收到语音指令后,可以输出第六提示信息,第六提示信息用于提示用户根据要求调整对准框内的组合物实物拍摄角度,以使用户根据第六提示信息调整对准框,从而扫描组合物实物,得到第一组装零件实物的安装结果。
其中,第六提示信息可以包括语音信息、文字信息或者图像标识等。
图11示出了本发明一个实施例提供的显示组装零件实物的界面示意图。如图11所示,当拍摄预览界面内显示有摄像头所采集的第一组装零件实物和第二组装零件实物组合成的组合物实物220的情况下,如果接收到用户输入的语音指令“检查是否安装完成”,则确定对焦框是否对准组合物实物220,如果对焦框对准组合物实物220,则可以检测第一组装零件实物的安装结果。
图12示出了本发明一个实施例提供的第四提示信息的提示界面示意图。如图12所示,可以在图12中的拍摄预览界面的左上角显示第四语音信息播放控件218,并播放“手机向左移动”的语音信息。在检测到安装结果为安装正确的情况下,输出带有“安装正确”字样的提示图标标识219。
在本发明实施例中,电子设备可以准确高效地提示用户每个组装零件实物的安装流程,并且告诉用户安装技巧,在安装每个组装零件实物后,可以及时帮助用户检测是否安装正确或到位,节省了目标物体的安装时间,使用起来更加方便快捷。
图13示出了本发明一个实施例提供的电子设备的结构示意图。图13所示的电子设备可以包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
如图13所示,该电子设备可以包括:
第一显示模块310,用于在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
第二显示模块320,用于在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。
在本发明实施例中,能够在拍摄预览界面中显示目标物体对应的第一虚拟对象,并且在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示组装目标物体相关联的物体对应的第二虚拟对象,以使用户能够利用电子设备的拍摄功能快速获取与第一虚拟对象的目标区域相关联的第二虚拟对象,能够快速、准确、直观地为用户提示所需要的物体对应的第二虚拟对象,提高了查找第二虚拟对象对应的物体的效率,降低了目标物体的安装难度,提高了目标物体的安装效率。
在本发明一些实施例中,目标区域可以为第一虚拟对象所在的区域,第二虚拟对象可以为与组装目标物体相关联的组装工具实物对应的虚拟工具对象。
在这些实施例中,可选地,该电子设备还可以包括:
工具匹配模块,用于在显示与目标区域相关联的第二虚拟对象之后,在对焦框对准N个组装工具实物的情况下,确定虚拟工具对象中的目标虚拟工具对象,目标虚拟工具对象为N个组装工具实物相对于虚拟工具对象所缺失的对象,N≥1;
第一信息输出模块,用于输出第一提示信息,第一提示信息用于提示缺少目标虚拟工具对象。
在本发明另一些实施例中,目标物体可以包括至少两个组装零件实物,第一虚拟对象可以包括至少两个虚拟零件对象,一个虚拟零件对象与一个组装零件实物对应,目标区域可以为目标虚拟零件对象所在的区域,第二虚拟对象可以为目标虚拟零件对象。
在这些实施例中,可选地,第二显示模块320可以具体用于:
在对焦框对准目标虚拟零件对象所在的区域的时长达到第一预定时长的情况下,隐藏拍摄预览界面中除目标虚拟零件对象以外的所有虚拟零件对象。
在这些实施例中,可选地,该电子设备还可以包括:
第一输入接收模块,用于在所述拍摄预览界面的对焦框对准所述第一虚拟对象的目标区域的情况下,显示与所述目标区域相关联的第二虚拟对象之前,接收用户对第一虚拟对象的第一输入;
第三显示模块,用于响应于第一输入,将第一虚拟对象拆分为至少两个虚拟零件对象。
在这些实施例中,可选地,该电子设备还可以包括:
第四显示模块,用于在将第一虚拟对象拆分为至少两个虚拟零件对象之后,显示每个虚拟零件对象对应的安装顺序标识。
在这些实施例中,可选地,该电子设备还可以包括:
零件匹配模块,用于在显示与目标区域相关联的第二虚拟对象之后,在对焦框对准M个组装零件实物的情况下,确定M个组装零件实物中与目标虚拟零件对象相匹配的I个第一组装零件实物,M≥1,1≤I≤M;
第二信息输出模块,用于输出第二提示信息,第二提示信息用于提示第一组装零件实物与目标虚拟零件对象相匹配。
在这些实施例中,可选地,该电子设备还可以包括:
第三信息输出模块,用于在显示与目标区域相关联的第二虚拟对象之后,在对焦框对准第二组装零件实物的时长达到第二预定时长的情况下,输出第三提示信息;
其中,第三提示信息用于提示目标虚拟零件对象对应的第一组装零件实物的安装流程,第三提示信息包括与安装流程相关的物体对应的虚拟对象、文字提示信息和语言提示信息中的至少一种;第二组装零件实物为待安装第一组装零件实物的组装零件实物。
在这些实施例中,可选地,该电子设备还可以包括:
安装结果检测模块,用于在输出第三提示信息之后,在对焦框对准由第一组装零件实物和第二组装零件实物组合成的组合物实物的情况下,检测第一组装零件实物的安装结果;
第四信息输出模块,用于在检测到安装结果为安装正确的情况下,输出第四提示信息,第四提示信息用于提示第一组装零件实物安装正确。
本发明实施例提供的电子设备能够实现图1至图12的方法实施例中电子设备实现的各个过程和效果,为避免重复,这里不再赘述。
图14为实现本发明各个实施例的一种电子设备的硬件结构示意图。如图14所示,该电子设备400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、处理器410、以及电源411等部件。本领域技术人员可以理解,图14中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,显示单元406,用于在拍摄预览界面中,显示目标物体对应的第一虚拟对象;在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示与目标区域相关联的第二虚拟对象,第二虚拟对象为与组装目标物体相关联的物体对应的虚拟对象。
在本发明实施例中,能够在拍摄预览界面中显示目标物体对应的第一虚拟对象,并且在拍摄预览界面的对焦框对准第一虚拟对象的目标区域的情况下,显示组装目标物体相关联的物体对应的第二虚拟对象,以使用户能够利用电子设备的拍摄功能快速获取与第一虚拟对象的目标区域相关联的第二虚拟对象,能够快速、准确、直观地为用户提示所需要的物体对应的第二虚拟对象,提高了查找第二虚拟对象对应的物体的效率,降低了目标物体的安装难度,提高了目标物体的安装效率。
应理解的是,本发明实施例中,射频单元401可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器410处理;另外,将上行的数据发送给基站。通常,射频单元401包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元401还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块402为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元403可以将射频单元401或网络模块402接收的或者在存储器409中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元403还可以提供与电子设备400执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元403包括扬声器、蜂鸣器以及受话器等。
输入单元404用于接收音频或视频信号。输入单元404可以包括图形处理器(Graphics Processing Unit,GPU)4041和麦克风4042,图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元406上。经图形处理器4041处理后的图像帧可以存储在存储器409(或其它存储介质)中或者经由射频单元401或网络模块402进行发送。麦克风4042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元401发送到移动通信基站的格式输出。
电子设备400还包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板4061的亮度,接近传感器可在电子设备400移动到耳边时,关闭显示面板4061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器405还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元406用于显示由用户输入的信息或提供给用户的信息。显示单元406可包括显示面板4061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板4061。
用户输入单元407可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板4071上或在触控面板4071附近的操作)。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器410,接收处理器410发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板4071。除了触控面板4071,用户输入单元407还可以包括其他输入设备4072。具体地,其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板4071可覆盖在显示面板4061上,当触控面板4071检测到在其上或附近的触摸操作后,传送给处理器410以确定触摸事件的类型,随后处理器410根据触摸事件的类型在显示面板4061上提供相应的视觉输出。虽然在图14中,触控面板4071与显示面板4061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板4071与显示面板4061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元408为外部装置与电子设备400连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元408可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备400内的一个或多个元件或者可以用于在电子设备400和外部装置之间传输数据。
存储器409可用于存储软件程序以及各种数据。存储器409可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器409可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器410是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器409内的软件程序和/或模块,以及调用存储在存储器409内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器410可包括一个或多个处理单元;优选的,处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器410中。
电子设备400还可以包括给各个部件供电的电源411(比如电池),优选的,电源411可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备400包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种电子设备,包括处理器410,存储器409,存储在存储器409上并可在所述处理器410上运行的计算机程序,该计算机程序被处理器410执行时实现上述对象显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述对象显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (11)

1.一种对象显示方法,应用于电子设备,其特征在于,包括:
在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
在所述拍摄预览界面的对焦框对准所述第一虚拟对象的目标区域的情况下,显示与所述目标区域相关联的第二虚拟对象,所述第二虚拟对象为与组装所述目标物体相关联的物体对应的虚拟对象;
所述目标区域为所述第一虚拟对象所在的区域,所述第二虚拟对象为与组装所述目标物体相关联的组装工具实物对应的虚拟工具对象;所述显示与所述目标区域相关联的第二虚拟对象之后,还包括:
在所述对焦框对准N个组装工具实物的情况下,确定所述虚拟工具对象中的目标虚拟工具对象,所述目标虚拟工具对象为所述N个组装工具实物相对于所述虚拟工具对象所缺失的对象,N≥1;
输出第一提示信息,所述第一提示信息用于提示缺少所述目标虚拟工具对象。
2.根据权利要求1所述的方法,其特征在于,所述目标物体包括至少两个组装零件实物,所述第一虚拟对象包括至少两个虚拟零件对象,一个所述虚拟零件对象与一个所述组装零件实物对应,所述目标区域为目标虚拟零件对象所在的区域,所述第二虚拟对象为所述目标虚拟零件对象。
3.根据权利要求2所述的方法,其特征在于,所述在所述拍摄预览界面的对焦框对准所述第一虚拟对象的目标区域的情况下,显示与所述目标区域相关联的第二虚拟对象,包括:
在所述对焦框对准所述目标虚拟零件对象所在的区域的时长达到第一预定时长的情况下,隐藏所述拍摄预览界面中除所述目标虚拟零件对象以外的所有虚拟零件对象。
4.根据权利要求3所述的方法,其特征在于,所述在所述拍摄预览界面的对焦框对准所述第一虚拟对象的目标区域的情况下,显示与所述目标区域相关联的第二虚拟对象之前,还包括:
接收用户对所述第一虚拟对象的第一输入;
响应于所述第一输入,将所述第一虚拟对象拆分为至少两个所述虚拟零件对象。
5.根据权利要求4所述的方法,其特征在于,所述将所述第一虚拟对象拆分为至少两个所述虚拟零件对象之后,还包括:
显示每个所述虚拟零件对象对应的安装顺序标识。
6.根据权利要求2所述的方法,其特征在于,所述显示与所述目标区域相关联的第二虚拟对象之后,还包括:
在所述对焦框对准M个组装零件实物的情况下,确定所述M个组装零件实物中与所述目标虚拟零件对象相匹配的I个第一组装零件实物,M≥1,1≤I≤M;
输出第二提示信息,所述第二提示信息用于提示所述第一组装零件实物与所述目标虚拟零件对象相匹配。
7.根据权利要求2所述的方法,其特征在于,所述显示与所述目标区域相关联的第二虚拟对象之后,还包括:
在所述对焦框对准第二组装零件实物的时长达到第二预定时长的情况下,输出第三提示信息;
其中,所述第三提示信息用于提示所述目标虚拟零件对象对应的第一组装零件实物的安装流程,所述第三提示信息包括与所述安装流程相关的物体对应的虚拟对象、文字提示信息和语言提示信息中的至少一种;所述第二组装零件实物为待安装所述第一组装零件实物的组装零件实物。
8.根据权利要求7所述的方法,其特征在于,所述输出第三提示信息之后,还包括:
在所述对焦框对准由所述第一组装零件实物和所述第二组装零件实物组合成的组合物实物的情况下,检测所述第一组装零件实物的安装结果;
在检测到所述安装结果为安装正确的情况下,输出第四提示信息,所述第四提示信息用于提示所述第一组装零件实物安装正确。
9.一种电子设备,其特征在于,包括:
第一显示模块,用于在拍摄预览界面中,显示目标物体对应的第一虚拟对象;
第二显示模块,用于在所述拍摄预览界面的对焦框对准所述第一虚拟对象的目标区域的情况下,显示与所述目标区域相关联的第二虚拟对象,所述第二虚拟对象为与组装所述目标物体相关联的物体对应的虚拟对象;
所述目标区域为所述第一虚拟对象所在的区域,所述第二虚拟对象为与组装所述目标物体相关联的组装工具实物对应的虚拟工具对象;
所述电子设备还包括:
工具匹配模块,用于显示与所述目标区域相关联的第二虚拟对象之后,在所述对焦框对准N个组装工具实物的情况下,确定所述虚拟工具对象中的目标虚拟工具对象,所述目标虚拟工具对象为所述N个组装工具实物相对于所述虚拟工具对象所缺失的对象,N≥1
第一信息输出模块,用于输出第一提示信息,所述第一提示信息用于提示缺少所述目标虚拟工具对象。
10.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的对象显示方法的步骤。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的对象显示方法的步骤。
CN201911415570.6A 2019-12-31 2019-12-31 对象显示方法、电子设备及介质 Active CN111147750B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911415570.6A CN111147750B (zh) 2019-12-31 2019-12-31 对象显示方法、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911415570.6A CN111147750B (zh) 2019-12-31 2019-12-31 对象显示方法、电子设备及介质

Publications (2)

Publication Number Publication Date
CN111147750A CN111147750A (zh) 2020-05-12
CN111147750B true CN111147750B (zh) 2021-08-10

Family

ID=70522731

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911415570.6A Active CN111147750B (zh) 2019-12-31 2019-12-31 对象显示方法、电子设备及介质

Country Status (1)

Country Link
CN (1) CN111147750B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111753791A (zh) * 2020-06-30 2020-10-09 联想(北京)有限公司 一种检测方法及检测设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106202269A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种获取增强现实操作指导的方法、装置及移动终端
CN108388142A (zh) * 2018-04-10 2018-08-10 百度在线网络技术(北京)有限公司 用于控制家居设备的方法、装置和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104794940B (zh) * 2015-04-03 2018-02-23 福建省纳金网信息技术有限公司 一种通过移动终端对机械维修教学的方法
US20180060663A1 (en) * 2016-08-25 2018-03-01 Marc Baskin Augmented Reality Application for Mobile Devices
CA3005051A1 (en) * 2017-05-16 2018-11-16 Michael J. Schuster Augmented reality task identification and assistance in construction, remodeling, and manufacturing
CN107968742B (zh) * 2017-12-04 2021-01-22 北京小米移动软件有限公司 影像显示方法、装置及计算机可读存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106202269A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种获取增强现实操作指导的方法、装置及移动终端
CN108388142A (zh) * 2018-04-10 2018-08-10 百度在线网络技术(北京)有限公司 用于控制家居设备的方法、装置和系统

Also Published As

Publication number Publication date
CN111147750A (zh) 2020-05-12

Similar Documents

Publication Publication Date Title
CN110740259B (zh) 视频处理方法及电子设备
CN109240577B (zh) 一种截屏方法及终端
CN110109593B (zh) 一种截屏方法及终端设备
CN107742072B (zh) 人脸识别方法及移动终端
CN111031398A (zh) 一种视频控制方法及电子设备
CN109495616B (zh) 一种拍照方法及终端设备
CN109710349B (zh) 一种截屏方法及移动终端
CN109523253B (zh) 一种支付方法和装置
CN110096203B (zh) 一种截图方法及移动终端
CN109618218B (zh) 一种视频处理方法及移动终端
CN109901761B (zh) 一种内容显示方法及移动终端
CN109144393B (zh) 一种图像显示方法及移动终端
CN110908627A (zh) 投屏方法及第一电子设备
CN111079030A (zh) 一种群组搜索方法及电子设备
JP7408627B2 (ja) 文字入力方法及び端末
CN110413363B (zh) 一种截图方法及终端设备
CN109947988B (zh) 一种信息处理方法、装置、终端设备及服务器
KR102497444B1 (ko) 대상 인식 방법 및 이동 단말
CN110209324B (zh) 一种显示方法及终端设备
CN109472825B (zh) 一种对象搜索方法及终端设备
CN108062370B (zh) 一种应用程序搜索方法及移动终端
CN111147750B (zh) 对象显示方法、电子设备及介质
CN111130995B (zh) 图像控制方法、电子设备及存储介质
CN110515507B (zh) 一种图标显示方法及终端
CN109491572B (zh) 一种移动终端的截屏方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant