CN110347261A - 信息显示方法、装置、存储介质及增强现实设备 - Google Patents

信息显示方法、装置、存储介质及增强现实设备 Download PDF

Info

Publication number
CN110347261A
CN110347261A CN201910625399.5A CN201910625399A CN110347261A CN 110347261 A CN110347261 A CN 110347261A CN 201910625399 A CN201910625399 A CN 201910625399A CN 110347261 A CN110347261 A CN 110347261A
Authority
CN
China
Prior art keywords
information
flat site
augmented reality
real world
world images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910625399.5A
Other languages
English (en)
Inventor
李华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910625399.5A priority Critical patent/CN110347261A/zh
Publication of CN110347261A publication Critical patent/CN110347261A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例公开了一种信息显示方法、装置、存储介质及增强现实设备。其中,方法包括:接收关联终端发送的信息;采集现实图像,识别所述现实图像中的平坦区域;将所述信息在所述平坦区域进行增强现实显示。本申请实施例通过采用上述技术方案,使得在避免信息遗漏的同时,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。

Description

信息显示方法、装置、存储介质及增强现实设备
技术领域
本申请实施例涉及增强现实技术领域,尤其涉及一种信息显示方法、装置、存储介质及增强现实设备。
背景技术
随着增强现实技术的不断发展,诸如增强现实设备等的头戴增强现实设备被用户广泛接受和应用。
目前的增强现实设备不具有通信功能,尤其是在用户佩戴头戴增强现实设备时,有来电或者信息时,需要用户摘下头戴增强现实设备,寻找手机等智能设备才能查看信息,操作不便。
发明内容
本申请实施例提供一种信息显示方法、装置、存储介质及增强现实设备,提高信息处理的智能化。
第一方面,本申请实施例提供了一种信息显示方法,应用于头戴增强现实设备,包括:
接收关联终端发送的信息;
采集现实图像,识别所述现实图像中的平坦区域;
将所述信息在所述平坦区域进行增强现实显示。
第二方面,本申请实施例提供了一种信息显示方法,包括:
信息接收模块,用于接收关联终端发送的信息;
平坦区域确定模块,用于采集现实图像,识别所述现实图像中的平坦区域;
信息显示模块,用于将所述信息在所述平坦区域进行增强现实显示。
第三方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例所述的信息显示方法。
第四方面,本申请实施例提供了一种增强现实设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的信息显示方法。
本申请实施例中提供的技术方案,通过在移动终端接收信息时,将信息发送至关联的增强现实设备,增强现实设备将接收的信息在现实图像的平坦区域显示该信息,使得在避免信息遗漏的同时,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。
附图说明
图1A是本申请实施例提供的一种增强现实眼镜的结构示意图;
图1B是本申请实施例提供的增强现实眼镜的侧边框及内部部件剖视结构示意图;
图2为本申请实施例提供的另一种信息显示方法的流程示意图;
图3为本申请实施例提供的另一种信息显示方法的流程示意图;
图4为本申请实施例提供的另一种信息显示方法的流程示意图;
图5为本申请实施例提供的另一种信息显示方法的流程示意图;
图6为本申请实施例提供的一种信息显示装置的结构示意图;
图7为本申请实施例提供的一种增强现实设备的结构示意图;
图8为本申请实施例提供的另一种增强现实设备的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
本申请提供的增强现实设备包括但不限于增强现实眼镜、具有增强现实功能的手机、平板电脑等电子设备。以头戴增强现实设备(增强现实眼镜)为例,示例性的,参见图1A,图1A是本申请实施例提供的一种增强现实眼镜101的结构示意图,其中,增强现实眼镜101包括镜架104、左眼镜片、右眼镜片,分别设置在左眼镜片、右眼镜片上的左眼衍射整合器102、右眼衍射整合器103、处理单元105、摄像头107、操作部件106,其中,左眼衍射整合器102和右眼衍射整合器103均为具有表面浮雕衍射光栅的紫外光固话/热固化树脂层构成,用于将虚拟图像反射入人眼。增强现实眼镜101还包括微显示器,微显示器可以是设置在镜腿上,用于输出虚拟图像,可以是与处理单元105电连接。摄像头107、操作部件106分别与处理单元105电连接连接,其中,操作部件106可用于接收用户对增强现实眼镜101的输入操作,并将输入操作发送至处理单元105,操作部件106可以是由一个或多个按键组成。处理单元105用于接受操作部件106传输的操作指令,还用于控制摄像头107获取现实信息,处理单元105还可以是通过无线传输等方式与其他设备108无线连接,其他设备108可以是但不限于手机、平板电脑等的移动设备,还可以是计算机、服务器等设备。
示例性的,参见图1B,图1B是本申请实施例提供的增强现实眼镜的侧边框及内部部件剖视结构示意图。图1B中,虚线表示由微显示器109发射的虚拟光信号,透过镜片的实线为现实光信号,虚拟光信号和现实光信号同时摄入目标瞳孔,在目标瞳孔中形成增强现实图像。其中,现实光信号为携带现实物体信息的光信息后,虚拟光信号为电信号转换得到的,携带虚拟图像信息的光信号,目标瞳孔可以是佩戴或者使用增强现实设备的用户的瞳孔。
图2为本申请实施例提供的一种信息显示方法的流程示意图,该方法可以由信息显示装置执行,其中该装置可由软件和/或硬件实现,一般可集成在增强现实设备中。如图2所示,该方法包括:
步骤201、接收关联终端发送的信息。
步骤202、采集现实图像,识别所述现实图像中的平坦区域。
步骤203、将所述信息在所述平坦区域进行增强现实显示。
其中,关联终端可以是手机、平板电脑或者智能手表等的移动终端,与增强现实设备连接的移动终端可以是一个或多个。移动终端与增强现实设备建立连接关系,示例性的,可以是蓝牙连接、近距离无线通信连接等。移动终端接收信息,该信息可以包括但不限于即时通信信息、来电信息、通知信息、推送信息等。移动终端在接收信息后,将信息发送至建立连接、正在运行的增强现实设备中,增强现实设备在接收信息后,将信息进行增强现实显示,使得目标对象无需寻找移动终端,以及无需对移动终端进行任何操作可即视线范围内查看移动终端接收的信息,解决了目标对象(佩戴或使用增强现实设备的用户)在操作或佩戴增强现实设备时,无法操作移动终端导致的信息遗漏的问题,同时提高了信息查看的便捷性和智能化。
现实图像为现实光信号射入人眼,在人眼中形成的图像。以图1A为例,摄像头可以是设置在左眼镜片与右眼镜片之间的镜框上,基于上述摄像头采集的图像与人眼观看的现实图像内容相似或相同,即通过摄像头采集现实图像。
对于任意图像,当图像中包含信息时,可以是将包含信息的区域称为非平坦区域,将不包含信号或者包含少量信息的区域称为平坦区域,示例性的,现实图像为一张白纸上放置一个黑色纽扣,可以是将纽扣所在区域称为非平坦区域,将白纸上除纽扣区域外的其他区域称为平坦区域。平坦区域中的各像素点的像素值相同或在预设范围内微小变化,示例性的,平坦区域可以是但不限于不包含文字的盒子表面、未放置东西的桌子表面、墙面、地面以及没有图案的衣服表面。需要说明的是,平坦区域可以是任意颜色,不局限与白色和黑色。
识别现实图像的平坦区域,将信息内容显示在现实图像的平坦区域,避免在信息显示时,对现实内容的遮挡,同时平坦区域不存在其他信息,可清晰地展示信息内容,提高信息内容的清晰度,兼顾了现实图像和信息的查看。需要说明的是,当增强现实设备正在进行增强现实显示,即正在显示虚拟图像时,步骤202可以是将采集的现实图像和虚拟图像融合得到目标对象观看的增强现实图像,确定该增强现实图像中的平坦区域,示例性的,现实图像可以是用户A,虚拟图像可以是一顶帽子,通过图像融合得到的增强现实图像为戴着帽子的用户A,相应的,识别该增强现实图像中的平坦区域,例如可以是用户A身侧的空白墙壁,将信息通过增强现实的方式显示在空白墙壁,在不影响现实信息和虚拟信息展示的基础上,对移动终端发送的信息显示在目标对象的视线范围内,达到智能化的信息显示。
可选的,识别现实图像或者增强现实图像的平坦区域,可以是通过边缘检测,根据检测结果将不包含边缘信息或者包含少量边缘信息的区域确定为平坦区域。可选的,识别现实图像或者增强现实图像的平坦区域,还可以是以任一像素点为中心,确定预设区域的像素值变化趋势,将变化趋势小于预设值的区域确定为平坦区域。
在上述实施例的基础上,当所述平坦区域的数量大于1时,确定显示所述信息所需的区域面积;根据所述区域面积确定显示所述信息的目标平坦区域,其中,所述显示所述信息的平坦区域面积大于或等于显示所述信息所需的区域面积。当现实图像中存在两个以上的平坦区域时,根据显示信息所需的面积筛除不满足面积要求的平坦区域,在满足面积要求的平坦区域中随机选择目标平坦区域。在上述实施例的基础上,可以是将面积最大的平坦区域确定为显示信息的目标平坦区域,或者将与图像中心距离最近的平坦区域确定为显示信息的目标平坦区域。
需要说明的是,当检测得到的平坦区域均不满足面积要求时,可以是将面积最大的平坦区域确定为目标平坦区域,并调节信息内容的字体大小,或者将信息内容分批显示。还可以是将间隔距离小于预设值的两个或以上的平坦区域进行合并,得到满足面积要求的目标平坦区域。
可选的,将所述信息在所述平坦区域进行增强现实显示,包括:根据所述平坦区域在所述现实图像中的位置,生成包含信息内容的虚拟图像,将所述虚拟图像进行增强现实显示,其中,所述虚拟图像中信息内容的显示位置与所述平坦区域在所述现实图像中的位置相匹配。当虚拟图像与现实图像尺寸相同时,虚拟图像中信息内容的显示位置与平坦区域在所述现实图像中的位置相同,确定平坦区域在现实图像中的第一坐标,根据虚拟图像中第一坐标对应区域确定信息内容的显示位置。当虚拟图像与现实图像尺寸不相同时,确定虚拟图像与现实图像的尺寸比例,确定平坦区域在现实图像中的第一坐标,基于该尺寸比例和第一坐标可确定信息内容的显示位置在虚拟图像中的第二坐标,其中。第二坐标可以是基于第一坐标和尺寸比例的乘积得到。
本申请实施例中提供的信息显示方法,通过在移动终端接收信息时,将信息发送至关联的增强现实设备,增强现实设备将接收的信息在现实图像的平坦区域显示该信息,使得在避免信息遗漏的同时,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。
图3为本申请实施例提供的另一种信息显示方法的流程示意图,本实施例是上述实施例的一个可选方案,相应的,如图3所示,本实施例的方法包括如下步骤:
步骤301、接收关联终端发送的信息。
步骤302、采集现实图像,对所述现实图像进行分块处理,得到多个图像区块,并确定所述图像区块的像素差异值。
步骤303、当所述图像区块的像素差异值小于或等于预设值时,确定所述图像区块属于平坦区块。
步骤304、基于相邻的平坦区域确定所述现实图像的至少一个平坦区域。
步骤305、将所述信息在所述平坦区域进行增强现实显示。
在本实施例中,可以是根据用户需求对现实图像进行分块,当要求精度高时,将现实图像划分为数量较多的小区块,当要求计算速度时,可将现实图像划分为数量较少的大区块。
对于任一个图像区块,所述图像区块中像素差异值可以是通过如下公式计算:
其中,A为图像区块的像素差异值,p为图像区块中像素点的总数,gb(b=1,2,…p)为图像区块中每一个像素点的亮度分量,为图像区块的局部亮度均值,p和b均为大于0的正整数。
像素差异值表示图像区块中各个像素点的亮度信息的差异情况,例如像素差异值越大,表明该图像区块中各个像素点的亮度信息存在较大差异,像素差异值越小,表明该图像区块中各个像素点的亮度信息相似性越高。将像素差异值小于或等于预设值的图像区块确定为平坦区域,将相邻的平坦区块进行拼接,形成平坦区域,将像素差异值大于预设值的非平坦区块进行拼接,形成非平坦区域。可选的,用于确定平坦区域和非平坦区域的预设值与低频图像的平均局部差异值相关,具体的,根据图像区块的数量,以及各图像区块的像素差异值A,可确定低频图像的平均局部差异值引入系数λ,上述预设值可以是即当图像区块的像素差异值时,该图像区块为平坦区块,当图像区块的像素差异值时,该图像区块为非平坦区块。
通过对相邻的平坦区域进行拼接,得到至少一个平坦区域,其中,每一个平坦区域包括至少一个平坦区块。可根据待显示的信息在至少一个平坦区域中选择目标平坦区域,将信息在目标平坦区域进行显示。
需要说明的是,当增强现实设备正在显示虚拟图像时,确定增强现实设备的平坦区域的过程同上,此处不再赘述。
本申请实施例中提供的信息显示方法,通过计算现实图像中每一个区块的像素差异值,以准确确定现实图像中的平坦区域,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。
图4为本申请实施例提供的另一种信息显示方法的流程示意图,本实施例是上述实施例的一个可选方案,相应的,如图4所示,本实施例的方法包括如下步骤:
步骤401、接收关联终端发送的信息。
步骤402、采集现实图像,识别所述现实图像中的平坦区域。
步骤403、根据所述平坦区域的颜色,确定所述信息中字符的字体颜色,所述字体颜色在所述平坦区域中突出显示。
步骤404、将所述信息在所述平坦区域进行增强现实显示。
本实施例中,信息可以是包括字符、数字、汉字和图像中的至少一项,通过调节字体颜色,可避免字体颜色与平坦区域颜色相近或相同时,用户无法辨别信息内容的问题。
其中,根据现实图像中平坦区域的颜色针对性地调节信息字体颜色,使得调节后的信息内容突出显示,便于浏览。示例性的,当平坦区域的颜色为白色时,可以是将字体颜色确定为黑色,当平坦区域的颜色为黑色时,可以是将字体颜色确定为白色,当平坦区域的颜色为绿色时,可以是将字体颜色设置为红色。本实施例中,对平坦区域的颜色与字体颜色的对应关系不做限定,可以根据用户需求预先设置。需要说明的是,由于平坦区域的颜色的不单一性,同一信息中的字体颜色可以不一致,每一个字体颜色与所在平坦区域的颜色相关,提高了信息内容与平坦区域的颜色对比度,提高了信息内容的清晰度,便于用户浏览。
本申请实施例中提供的信息显示方法,通过在显示信息之前,根据平坦区域的颜色调节信息中字体颜色,避免字体颜色与平坦区域颜色相近或相同时导致的信息无法准确识别的问题,提高了信息内容与平坦区域的颜色对比度,便于用户快速浏览。
图5为本申请实施例提供的另一种信息显示方法的流程示意图,本实施例是上述实施例的一个可选方案,相应的,如图5所示,本实施例的方法包括如下步骤:
步骤501、接收关联终端发送的提示信息,将所述提示信息进行增强现实显示。
步骤502、对目标对象的预设关键点进行追踪,确定所述预设关键点的轨迹。
步骤503、将所述预设关键点的轨迹与标准轨迹进行比对。
步骤504、当比对成功时,接收关联终端发送的信息。
步骤505、采集现实图像,识别所述现实图像中的平坦区域。
步骤506、将所述信息在所述平坦区域进行增强现实显示。
移动终端在接收信息后,基于接收的信息生成提示信息(例如可以包括提示信息中可以是包括信息类型、信息发送人、信息重要等级中的一项或多项),将提示信息通过关联的增强现实设备向用户展示,对用户进行提示,并采集用户的反馈信息,根据反馈信息确定对信息的处理方式。其中处理方式可以是增强现实的信息显示和信息暂存。其中,处理方式为增强现实的信息显示时,通过增强现实的方式在用户实现范围内显示该信息;当处理方式为信息统一回复时,根据预先设置的回复内容对该信息进行回复;当处理方式为信息暂存时,将该信息存储在移动终端和/或增强现实设备中,以便用户在后续进行查看。示例性的,当用户正在驾驶车辆时,移动终端(例如手机)接收信息,将提示信息发送至用户佩戴的增强现实眼镜中,用户可通过预设关键点的动作轨迹控制该信息的处理方式,例如,将信息暂存或者统一回复(例如驾驶车辆中,稍后回复)等,避免信息直接显示对用户视线遮挡或者被频繁打扰,提高用户的安全性。
本实施例中,根据目标对象的预设关键点的轨迹确定反馈信息。可选的,所述预设关键点包括目标对象的头部、手部或瞳孔。可以是基于位置传感器或者追踪摄像头对预设关键点进行追踪,得到预设关键点的轨迹,将得到的轨迹于标准轨迹进行匹配,当匹配成功时,基于增强现实的方式显示该信息,当匹配失败时,将该信息暂存至移动终端内,便于用户后续查看。
可选的,当预设关键点为头部时,采集头部轨迹可以是基于预设时间间隔,采集所述增强现实设备的空间位置;将预设时间段内所述增强现实设备的空间位置根据采集时刻进行连接,生成所述目标对象的头部轨迹。其中,增强现实设备为头戴增强现实设备,增强现实眼镜的轨迹与目标对象的头部轨迹一致。通过增强现实设备设置的位置传感器采集增强现实设备的空间位置,例如可以是三维坐标信息,根据空间位置的采集时刻将采集到的空间位置进行排序和连接,得到目标对象的头部轨迹。
可选的,当预设关键点为瞳孔时,基于预设时间间隔,采集目标对象的眼部图像;基于所述眼部图像确定所述目标对象的瞳孔位置;将预设时间段内所述目标对象的瞳孔位置根据采集时刻进行连接,生成所述目标对象的瞳孔轨迹。其中,可以是基于增强现实设备的追踪摄像头确定瞳孔轨迹,具体的,确定每一张人眼图像中瞳孔相对于人眼的位置,将每一张人眼图像中人眼进行对齐,根据人眼图像的采集顺序对瞳孔位置进行连接,得到瞳孔轨迹。可选的,基于所述眼部图像确定所述目标对象的瞳孔位置,包括:对所述眼部图像进行边缘检测,确定眼部轮廓和瞳孔轮廓;根据所述眼部轮廓和所述瞳孔轮廓的相对关系确定所述目标对象的瞳孔位置。
同理,当当预设关键点为手部时,基于追踪摄像头采集手部轨迹,此处不再赘述。
本申请实施例中提供的信息显示方法,通过在移动终端接收到信息时,生成并显示提示信息,采集目标对象的预设关键点的轨迹,当轨迹比对成功时,在现实图像的平坦区域显示信息内容。通过提示信息避免用户遗漏信息,同时,根据用户的反馈信息确定是否显示信息,降低了实时对信息进行增强现实显示对用户的干扰,可在一些特定场景(诸如驾驶车辆时)降低安全风险。
图6为本申请实施例提供的一种信息显示装置的结构框图,该装置可由软件和/或硬件实现,一般集成在增强现实设备中,可通过执行增强现实设备的信息显示方法来对桌面布局进行编辑。如图6所示,该装置包括:信息接收模块601、平坦区域确定模块602和信息显示模块603。
信息接收模块601,用于接收关联终端发送的信息;
平坦区域确定模块602,用于采集现实图像,识别所述现实图像中的平坦区域;
信息显示模块603,用于将所述信息在所述平坦区域进行增强现实显示。
本申请实施例中提供的信息显示装置,通过在移动终端接收信息时,将信息发送至关联的增强现实设备,增强现实设备将接收的信息在现实图像的平坦区域显示该信息,使得在避免信息遗漏的同时,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。
在上述实施例的基础上,信息显示模块603包括:
虚拟图像生成单元,用于根据所述平坦区域在所述现实图像中的位置,生成包含信息内容的虚拟图像,其中,所述虚拟图像中信息内容的显示位置与所述平坦区域在所述现实图像中的位置相匹配;
信息显示单元,用于将所述虚拟图像进行增强现实显示。
在上述实施例的基础上,平坦区域确定模块602,包括:
分块处理单元,用于对所述现实图像进行分块处理,得到多个图像区块,并确定所述图像区块的像素差异值;
平坦区块确定单元,用于当所述图像区块的像素差异值小于或等于预设值时,确定所述图像区块属于平坦区块;
平坦区域确定单元,用于基于相邻的平坦区域确定所述现实图像的至少一个平坦区域。
在上述实施例的基础上,还包括:
区域面积确定单元,用于当所述平坦区域的数量大于1时,确定显示所述信息所需的区域面积;
目标平坦区域确定单元,用于根据所述区域面积确定显示所述信息的目标平坦区域,其中,所述显示所述信息的平坦区域面积大于或等于显示所述信息所需的区域面积。
在上述实施例的基础上,还包括:
信息调节模块,用于在识别所述现实图像中的平坦区域之后,根据所述平坦区域的颜色,确定所述信息中字符的字体颜色,所述字体颜色在所述平坦区域中突出显示。
在上述实施例的基础上,还包括:
提示信息显示模块,用于在接收关联终端发送的信息之前,接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
轨迹确定模块,用于对目标对象的预设关键点进行追踪,确定所述预设关键点的轨迹;
轨迹比对模块,用于将所述预设关键点的轨迹与标准轨迹进行比对。
在上述实施例的基础上,所述预设关键点包括目标对象的头部、手部或瞳孔。
本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行信息显示方法,该方法包括:
接收关联终端发送的信息;
采集现实图像,识别所述现实图像中的平坦区域;
将所述信息在所述平坦区域进行增强现实显示。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDRRAM、SRAM、EDORAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的信息显示操作,还可以执行本申请任意实施例所提供的信息显示方法中的相关操作。
本申请实施例提供了一种增强现实设备,该增强现实设备中可集成本申请实施例提供的信息显示装置。图7为本申请实施例提供的一种增强现实设备的结构示意图。增强现实设备700可以包括:存储器701,处理器702及存储在存储器701上并可在处理器702运行的计算机程序,所述处理器702执行所述计算机程序时实现如本申请实施例所述的信息显示方法。
本申请实施例提供的增强现实设备,通过在移动终端接收信息时,将信息发送至关联的增强现实设备,增强现实设备将接收的信息在现实图像的平坦区域显示该信息,使得在避免信息遗漏的同时,减小对现实信息的遮挡程度,降低对现实信息的影响,提高了信息显示的智能化。
图8为本申请实施例提供的另一种增强现实设备的结构示意图。该增强现实设备可以包括:壳体(图中未示出)、存储器801、中央处理器(central processing unit,CPU)802(又称处理器,以下简称CPU)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述CPU802和所述存储器801设置在所述电路板上;所述电源电路,用于为所述增强现实设备的各个电路或器件供电;所述存储器801,用于存储可执行程序代码;所述CPU802通过读取所述存储器801中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序,以实现以下步骤:
接收关联终端发送的信息;
采集现实图像,识别所述现实图像中的平坦区域;
将所述信息在所述平坦区域进行增强现实显示。
所述增强现实设备还包括:外设接口803、RF(Radio Frequency,射频)电路805、音频电路806、扬声器811、电源管理芯片808、输入/输出(I/O)子系统809、其他输入/控制设备810、触摸屏812、其他输入/控制设备810以及外部端口804,这些部件通过一个或多个通信总线或信号线807来通信。
应该理解的是,图示增强现实设备800仅仅是增强现实设备的一个范例,并且增强现实设备800可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于对信息显示操作的增强现实设备进行详细的描述,该增强现实设备以手机为例。
存储器801,所述存储器801可以被CPU802、外设接口803等访问,所述存储器801可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口803,所述外设接口803可以将设备的输入和输出外设连接到CPU802和存储器801。
I/O子系统809,所述I/O子系统809可以将设备上的输入输出外设,例如触摸屏812和其他输入/控制设备810,连接到外设接口803。I/O子系统809可以包括显示控制器8091和用于控制其他输入/控制设备810的一个或多个输入控制器8092。其中,一个或多个输入控制器8092从其他输入/控制设备810接收电信号或者向其他输入/控制设备810发送电信号,其他输入/控制设备810可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器8092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏812,所述触摸屏812是用户增强现实设备与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。
I/O子系统809中的显示控制器8091从触摸屏812接收电信号或者向触摸屏812发送电信号。触摸屏812检测触摸屏上的接触,显示控制器8091将检测到的接触转换为与显示在触摸屏812上的用户界面对象的交互,即实现人机交互,显示在触摸屏812上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路805,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,RF电路805接收并发送RF信号,RF信号也称为电磁信号,RF电路805将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路805可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder,编译码器)芯片组、用户标识模块(Subscriber Identity Module,SIM)等等。
音频电路806,主要用于从外设接口803接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器811。
扬声器811,用于将手机通过RF电路805从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片808,用于为CPU802、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
上述实施例中提供的信息显示装置、存储介质及增强现实设备可执行本申请任意实施例所提供的信息显示方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的信息显示方法。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。

Claims (10)

1.一种信息显示方法,应用于头戴增强现实设备,其特征在于,包括:
接收关联终端发送的信息;
采集现实图像,识别所述现实图像中的平坦区域;
将所述信息在所述平坦区域进行增强现实显示。
2.根据权利要求1所述的方法,其特征在于,将所述信息在所述平坦区域进行增强现实显示,包括:
根据所述平坦区域在所述现实图像中的位置,生成包含信息内容的虚拟图像,其中,所述虚拟图像中信息内容的显示位置与所述平坦区域在所述现实图像中的位置相匹配;
将所述虚拟图像进行增强现实显示。
3.根据权利要求1所述的方法,其特征在于,识别所述现实图像中的平坦区域,包括:
对所述现实图像进行分块处理,得到多个图像区块,并确定所述图像区块的像素差异值;
当所述图像区块的像素差异值小于或等于预设值时,确定所述图像区块属于平坦区块;
基于相邻的平坦区域确定所述现实图像的至少一个平坦区域。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
当所述平坦区域的数量大于1时,确定显示所述信息所需的区域面积;
根据所述区域面积确定显示所述信息的目标平坦区域,其中,所述显示所述信息的平坦区域面积大于或等于显示所述信息所需的区域面积。
5.根据权利要求1-4任一所述的方法,其特征在于,在识别所述现实图像中的平坦区域之后,还包括:
根据所述平坦区域的颜色,确定所述信息中字符的字体颜色,所述字体颜色在所述平坦区域中突出显示。
6.根据权利要求1所述的方法,其特征在于,在接收关联终端发送的信息之前,还包括:
接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
对目标对象的预设关键点进行追踪,确定所述预设关键点的轨迹;
将所述预设关键点的轨迹与标准轨迹进行比对。
7.根据权利要求6所述的方法,其特征在于,所述预设关键点包括目标对象的头部、手部或瞳孔。
8.一种信息显示方法,其特征在于,包括:
信息接收模块,用于接收关联终端发送的信息;
平坦区域确定模块,用于采集现实图像,识别所述现实图像中的平坦区域;
信息显示模块,用于将所述信息在所述平坦区域进行增强现实显示。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的信息显示方法。
10.一种增强现实设备,其特征在于,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-7任一所述的信息显示方法。
CN201910625399.5A 2019-07-11 2019-07-11 信息显示方法、装置、存储介质及增强现实设备 Pending CN110347261A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910625399.5A CN110347261A (zh) 2019-07-11 2019-07-11 信息显示方法、装置、存储介质及增强现实设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910625399.5A CN110347261A (zh) 2019-07-11 2019-07-11 信息显示方法、装置、存储介质及增强现实设备

Publications (1)

Publication Number Publication Date
CN110347261A true CN110347261A (zh) 2019-10-18

Family

ID=68175070

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910625399.5A Pending CN110347261A (zh) 2019-07-11 2019-07-11 信息显示方法、装置、存储介质及增强现实设备

Country Status (1)

Country Link
CN (1) CN110347261A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111308708A (zh) * 2020-02-24 2020-06-19 Oppo广东移动通信有限公司 头戴式设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105229584A (zh) * 2013-05-29 2016-01-06 三菱电机株式会社 信息显示装置
US20160118015A1 (en) * 2012-01-06 2016-04-28 Google Inc. Device Control Utilizing Optical Flow
CN106204423A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种基于增强现实的图片调整方法、装置及终端
CN107179822A (zh) * 2017-06-23 2017-09-19 联想(北京)有限公司 信息处理方法及装置、显示设备及计算机存储介质
CN107645600A (zh) * 2017-09-26 2018-01-30 上海爱优威软件开发有限公司 一种信息显示方法、终端、穿戴设备及系统
CN109088815A (zh) * 2018-08-30 2018-12-25 Oppo广东移动通信有限公司 消息提醒方法、装置、存储介质、移动终端及穿戴式设备
CN109146814A (zh) * 2018-08-20 2019-01-04 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
US20190096105A1 (en) * 2017-09-27 2019-03-28 Microsoft Technology Licensing, Llc Augmented and virtual reality bot infrastructure

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160118015A1 (en) * 2012-01-06 2016-04-28 Google Inc. Device Control Utilizing Optical Flow
CN105229584A (zh) * 2013-05-29 2016-01-06 三菱电机株式会社 信息显示装置
CN106204423A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种基于增强现实的图片调整方法、装置及终端
CN107179822A (zh) * 2017-06-23 2017-09-19 联想(北京)有限公司 信息处理方法及装置、显示设备及计算机存储介质
CN107645600A (zh) * 2017-09-26 2018-01-30 上海爱优威软件开发有限公司 一种信息显示方法、终端、穿戴设备及系统
US20190096105A1 (en) * 2017-09-27 2019-03-28 Microsoft Technology Licensing, Llc Augmented and virtual reality bot infrastructure
CN109146814A (zh) * 2018-08-20 2019-01-04 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109088815A (zh) * 2018-08-30 2018-12-25 Oppo广东移动通信有限公司 消息提醒方法、装置、存储介质、移动终端及穿戴式设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111308708A (zh) * 2020-02-24 2020-06-19 Oppo广东移动通信有限公司 头戴式设备

Similar Documents

Publication Publication Date Title
CN109688147B (zh) 应用登录方法、装置、终端、服务器、系统及存储介质
EP3432212B1 (en) Electronic device and method for recognizing real face and storage medium
US20200184968A1 (en) Artificial intelligence device
CN110412765B (zh) 增强现实图像拍摄方法、装置、存储介质及增强现实设备
KR101695699B1 (ko) 이동 단말기 및 그 이동 단말기의 제어 방법
CN109741288A (zh) 图像处理方法、装置、存储介质及电子设备
CN110392375B (zh) WiFi网络信道修改方法、终端、服务器及存储介质
CN110362204A (zh) 信息提示方法、装置、存储介质及增强现实设备
CN109784252A (zh) 图像处理方法、装置、存储介质及电子设备
KR20200103411A (ko) 전자 장치 및 그의 동작 방법
EP4099260A1 (en) Glasses, recommended cosmetics presentation control system, and recommended cosmetics presentation control method
CN110333785B (zh) 信息处理方法、装置、存储介质及增强现实设备
CN110349271B (zh) 透镜颜色调节方法、装置、存储介质及增强现实设备
CN110347261A (zh) 信息显示方法、装置、存储介质及增强现实设备
CN109889858A (zh) 虚拟物品的信息处理方法、装置及计算机可读存储介质
CN107851248B (zh) 移动终端及其控制方法
CN110362203B (zh) 信息处理方法、装置、存储介质及增强现实设备
CN113099378B (zh) 定位方法、装置、设备及存储介质
CN114826799B (zh) 信息获取方法、装置、终端及存储介质
KR20170074371A (ko) 이동 단말기 및 그 제어 방법
US11558555B2 (en) Mobile terminal and method for controlling same
CN113064981A (zh) 群组头像生成方法、装置、设备及存储介质
KR20180047694A (ko) 이동 단말기
KR20210085256A (ko) 사용자의 위치를 제공하기 위한 전자 장치 및 방법
CN109974658A (zh) 测量方法、装置、存储介质及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191018

RJ01 Rejection of invention patent application after publication