CN110333785B - 信息处理方法、装置、存储介质及增强现实设备 - Google Patents
信息处理方法、装置、存储介质及增强现实设备 Download PDFInfo
- Publication number
- CN110333785B CN110333785B CN201910626005.8A CN201910626005A CN110333785B CN 110333785 B CN110333785 B CN 110333785B CN 201910626005 A CN201910626005 A CN 201910626005A CN 110333785 B CN110333785 B CN 110333785B
- Authority
- CN
- China
- Prior art keywords
- information
- augmented reality
- target object
- processing
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了信息处理方法、装置、存储介质及增强现实设备。其中方法包括:接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;采集目标对象的手势;根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理。本申请实施例通过采用上述技术方案,目标对象的手势表征了目标对象的信息处理需求,根据目标对象的需求对信息处理,在对关联终端接收信息进行及时提醒的同时,降低了实时对信息进行增强现实显示对用户的干扰。
Description
技术领域
本申请实施例涉及增强现实技术领域,尤其涉及一种信息处理方法、装置、存储介质及增强现实设备。
背景技术
随着增强现实技术的不断发展,诸如增强现实设备等的头戴增强现实设备被用户广泛接受和应用。
目前的增强现实设备不具有通信功能,尤其是在用户佩戴头戴增强现实设备时,有来电或者信息时,需要用户摘下头戴增强现实设备,寻找手机等智能设备才能查看信息,操作不便。
发明内容
本申请实施例提供一种信息处理方法、装置、存储介质及增强现实设备,提高信息处理的智能化。
第一方面,本申请实施例提供了一种信息处理方法,应用于头戴增强现实设备,包括:
接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
采集目标对象的手势;
根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理。
第二方面,本申请实施例提供了一种信息处理装置,包括:
提示信息显示模块,用于接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
手势采集模块,用于采集目标对象的手势;
处理方式确定模块,用于根据所述目标对象的手势确定对信息的处理方式;
信息处理模块,用于根据确定的处理方式对信息进行处理。
第三方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例所述的信息处理方法。
第四方面,本申请实施例提供了一种增强现实设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的信息处理方法。
本申请实施例中提供的技术方案,通过在移动终端接收到信息时,生成并显示提示信息,采集目标对象的手势,根据手势匹配确定信息的处理方式。通过上述技术方案,目标对象的手势表征了目标对象的信息处理需求,根据目标对象的需求对信息处理,在对关联终端接收信息进行及时提醒的同时,降低了实时对信息进行增强现实显示对用户的干扰,在一些特定场景可降低安全风险。
附图说明
图1A是本申请实施例提供的一种增强现实眼镜的结构示意图;
图1B是本申请实施例提供的增强现实眼镜的侧边框及内部部件剖视结构示意图;
图2为本申请实施例提供的一种信息处理方法的流程示意图;
图3为本申请实施例提供的另一种信息处理方法的流程示意图;
图4为本申请实施例提供的一种信息处理装置的结构示意图;
图5为本申请实施例提供的一种增强现实设备的结构示意图;
图6为本申请实施例提供的另一种增强现实设备的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
本申请提供的增强现实设备包括但不限于增强现实眼镜、具有增强现实功能的手机、平板电脑等电子设备。以头戴增强现实设备(增强现实眼镜)为例,示例性的,参见图1A,图1A是本申请实施例提供的一种增强现实眼镜101的结构示意图,其中,增强现实眼镜101包括镜架104、左眼镜片、右眼镜片,分别设置在左眼镜片、右眼镜片上的左眼衍射整合器102、右眼衍射整合器103、处理单元105、现实信息采集器107、操作部件106,其中,左眼衍射整合器102和右眼衍射整合器103均为具有表面浮雕衍射光栅的紫外光固话/热固化树脂层构成,用于将虚拟图像反射入人眼。增强现实眼镜101还包括微显示器,微显示器可以是设置在镜腿上,用于输出虚拟图像,可以是与处理单元105电连接。现实信息采集器107、操作部件106分别与处理单元105电连接连接,其中,操作部件106可用于接收用户对增强现实眼镜101的输入操作,并将输入操作发送至处理单元105,操作部件106可以是由一个或多个按键组成。处理单元105用于接受操作部件106传输的操作指令,还用于控制现实信息采集器107获取现实信息,处理单元105还可以是通过无线传输等方式与其他设备108无线连接,其他设备108可以是但不限于手机、平板电脑等的移动设备,还可以是计算机、服务器等设备。
示例性的,参见图1B,图1B是本申请实施例提供的增强现实眼镜的侧边框及内部部件剖视结构示意图。图1B中,虚线表示由微显示器109发射的虚拟光信号,透过镜片的实线为现实光信号,虚拟光信号和现实光信号同时摄入目标瞳孔,在目标瞳孔中形成增强现实图像。其中,现实光信号为携带现实物体信息的光信息后,虚拟光信号为电信号转换得到的,携带虚拟图像信息的光信号,目标瞳孔可以是佩戴或者使用增强现实设备的用户的瞳孔。
图2为本申请实施例提供的一种信息处理方法的流程示意图,该方法可以由信息处理装置执行,其中该装置可由软件和/或硬件实现,一般可集成在增强现实设备中。如图2所示,该方法包括:
步骤201、接收关联终端发送的提示信息,将所述提示信息进行增强现实显示。
步骤202、采集目标对象的手势。
步骤203、根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理。
其中,关联终端可以是手机、平板电脑或者智能手表等的移动终端,与增强现实设备连接的移动终端可以是一个或多个。移动终端与增强现实设备建立连接关系,示例性的,可以是蓝牙连接、近距离无线通信连接等,相应的,建立连接关系后,移动终端为该增强现实设备的关联终端,该增强现实设备为移动终端的关联增强现实设备。移动终端接收信息,该信息可以包括但不限于即时通信信息、来电信息、通知信息、推送信息等。根据该信息的特征参数生成提示信息,该提示信息中可以是包括信息类型、信息发送人、信息重要等级中的一项或多项。其中,信息类型可以是来电信息、即时通信信息、通知信息或者推送信息,信息重要等级可以是通过识别发信人和信息内容确定,示例性的,发信人的预设等级越高,该信息的信息重要等级越高。示例性的,还可以是识别信息内容中是否存在预设关键字,根据识别的关键字对应的重要等级确定信息的信息重要等级,在本实施例中,当移动终端接收信息时,基于预先训练的机器学习模型确定该信息的重要等级,其中,预先训练的机器学习模型可以是神经网络模型。可选的,当移动终端接收信息之后,确定与移动终端关联的增强现实设备是否正在运行,若是,则生成提示信息,将提示信息发送至关联的增强现实设备。
增强现实设备接收关联终端发送的提示信息,将所述提示信息进行增强现实显示,包括:根据所述提示信息中包括的信息类型和信息的特征参数,确定所述提示信息的显示标识;将所述信息标识添加至当前虚拟图像的预设位置,进行增强现实显示。本实施例中,通过在用户的视线范围内显示表征提示信息的显示标识,使得用户可根据显示标识确定关联终端接收的信息,以及信息的特征参数,并进一步确定是否查看或回复该信息。可选的,显示标识与信息类型相关,不同的信息类型可对应不同的显示标识,示例性的,来电信息的显示标识可以是电话图标,即时通信信息、通知信息和推送信息的显示标识可以是根据发送或者接收信息的APP确定,示例性的,上述信息的显示标识可以是发送或者接收信息的APP图标。可选的,显示标识中还可以是包括信息的特征参数,例如发信人和/或重要等级。
根据显示标识的预设位置生成虚拟图像,示例性的,预设位置可以是虚拟图像的左上角或右上角,可根据用户视觉习惯确定,对此不作限定。将显示标识添加在当前虚拟图像的预设位置,形成新的虚拟图像,参见图1B,将新的虚拟图像转换为虚拟光信号,并射入目标对象的瞳孔,使得目标对象可看到增强现实的显示标识。
在一些实施例中,确定所述提示信息的显示标识之后,还包括:根据所述信息的重要等级确定所述显示标识的尺寸和/或颜色。示例性的,信息的重要等级越高,显示标识的尺寸越大。示例性的,每一个重要等级均对应一个颜色,根据信息重要等级可确定该信息的显示标识颜色。通过调节显示标识的尺寸和大小,便于目标对象(佩戴或者使用增强现实设备的用户)通过显示标识的外观直观地获知信息的重要等级,并根据信息的重要等级确定是否查看该信息,便于目标对象快速了解信息并确定处理方式。
在本实施例中,通过将提示信息进行增强现实显示,便于用户在使用增强现实设备的过程中,可获知移动终端接收的信息,避免信息遗漏。在显示提示信息之后,通过获取目标对象的手势,得到目标对象对移动终端接收的信息的处理方式,根据用户需求对信息进行处理,避免信息直接显示,尤其是在信息数量较多时,频繁显示的信息遮挡用户视线的问题。
根据所述目标对象的手势确定对信息的处理方式,包括:将所述目标对象的手势在信息处理轨迹集中进行匹配,信息处理轨迹集中包括各标准手势以及所述标准手势对应的处理方式;当匹配成功时,根据匹配成功的标准手势确定信息处理方式。其中,在接收提示信息之后,控制增强现实设备的现实信息采集器获取目标对象的手势,其中,现实信息采集器可以是摄像头,以图1A所示的增强现实眼镜为例,现实信息采集器可以是设置在左眼镜片和右眼镜片之间的镜框上。
本实施例中,目标对象的手势可以是静态手势,还可以是运动手势。示例性的,静态手势可以包括但不限于大拇指手势(大拇指竖起,其他手指合拢)、小拇指手指(小拇指竖起,其他手指合拢)、V手势(任意相邻手指竖起,其他手指合拢,形成V字形)、OK手势等。在获取提示信息后的预设时间段内,通过摄像头获取目标对象的手部图像,并识别手部图像中的手势,将识别到的手势与标准手势进行匹配,当存在任一手部图像的手势匹配成功时,将匹配成功的标准手势对应的处理方式确定为该信息的处理方式。
示例性的,运动手势可以是手部或手部任一部分(任一手指)的运动轨迹,示例性的,运动手势包括但不限于手指摆动手势(任一手指竖起并左右摆动,其他手指合拢)、手部由伸直到合拢的握拳手势等。在获取提示信息后的预设时间段内,根据预设时间段采集手部图像并识别每一个张手部图像中的手部姿态,根据手部图像的采集时刻,将手部姿态进行连接,形成运动手势。将运动手势与标准运动手势进行匹配,将匹配成功的标准手势对应的处理方式确定为该信息的处理方式。
每一个标准手势对应一个信息处理方式,可选的,所述信息处理方式包括增强现实的信息显示、信息统一回复和信息暂存。其中,处理方式为增强现实的信息显示时,通过增强现实的方式在用户实现范围内显示该信息;当处理方式为信息统一回复时,根据预先设置的回复内容对该信息进行回复;当处理方式为信息暂存时,将该信息存储在移动终端和/或增强现实设备中,以便用户在后续进行查看。示例性的,当用户正在驾驶车辆时,移动终端(例如手机)接收信息,将提示信息发送至用户佩戴的增强现实眼镜中,用户可通过预设关键点的动作轨迹控制该信息的处理方式,例如,将信息暂存或者统一回复(例如驾驶车辆中,稍后回复)等,避免信息直接显示对用户视线遮挡或者被频繁打扰,提高用户的安全性。
需要说明的是,当信息为来电信息时,处理方式还包括来电接听、来电挂断和来电统一回复,其中,来电接听、来电挂断和来电统一回复对应的标准轨迹可以是与增强现实的信息显示、信息暂存和信息统一回复的标准手势相同。
将目标对象的手势分别与标准手势进行匹配,确定相似度,当相似度大于预设值时确定匹配成功,示例性的,预设值可以是80%。需要说明的是,若在显示提示信息的预设时间段内,未采集到手势或者采集的手势匹配失败时,将确定该信息的处理方式为信息暂存。
本申请实施例中提供的信息处理方法,通过在移动终端接收到信息时,生成并显示提示信息,采集目标对象的手势,根据手势匹配确定信息的处理方式。通过上述技术方案,目标对象的手势表征了目标对象的信息处理需求,根据目标对象的需求对信息处理,在对关联终端接收信息进行及时提醒的同时,降低了实时对信息进行增强现实显示对用户的干扰,在一些特定场景可降低安全风险。
图3为本申请实施例提供的另一种信息处理方法的流程示意图,本实施例是上述实施例的一个可选方案,相应的,如图3所示,本实施例的方法包括如下步骤:
步骤301、接收关联终端发送的提示信息,将所述提示信息进行增强现实显示。
步骤302、采集目标对象的手势。
步骤303、根据所述目标对象的手势确定对信息的处理方式。
步骤304、当所述信息处理方式为增强现实的信息显示时,获取信息内容,根据所述信息内容更新当前虚拟图像。
步骤305、将更新后的当前虚拟图像转换为虚拟光信号,将所述虚拟光信号射入目标对象的瞳孔。
在本实施例中,当信息处理方式为增强现实的信息显示时,增强现实设备向关联终端发送信息请求,接收关联终端基于信息请求发送的信息内容,其中,信息内容可以是文字、字符和图像中的至少一种。当增强现实设备正在运行时,将信息内容添加至当前虚拟图像,形成新的虚拟图像,将新的虚拟图像转换为虚拟光信号,将虚拟光信号射入目标对象的瞳孔,虚拟光信号和透过透镜射入的现实光信号在人眼中形成增强现实图像,使得目标对象可在无需移动终端时,在视线范围内看到信息。
在上述实施例的基础上,根据所述信息内容更新当前虚拟图像,包括:采集现实图像,确定现实图像的背景颜色;根据所述现实图像的背景颜色调节信息中字体颜色;根据调节后的信息内容更新当前虚拟图像。本实施例中,根据现实图像的背景颜色调节信息字体,使得调节后的信息内容突出显示,示例性的,当背景颜色为白色时,可以是将字体颜色确定为黑色,当背景颜色为黑色时,可以是将字体颜色确定为白色,当背景颜色为绿色时,可以是将字体颜色设置为红色,本实施例中,对背景颜色与字体颜色的对应关系不做限定,可以根据用户需求预先设置。需要说明的是,由于背景颜色的不单一性,同一信息中的字体颜色可以不一致,每一个字体颜色与所在背景的颜色相关,提高了信息内容的清晰度,便于用户浏览。
在上述实施例的基础上,可以是根据用户观看需要确定信息显示位置,示例性的,信息显示位置可以是视线习惯停留区域,例如,视线范围的中心区域,便于用户快速方便的阅读信息。
在上述实施例的基础上,可以是采集现实图像,确定现实图像中的平坦区域,其中,平坦区域为图像边缘较少的区域,该平坦区域中包括少量或者不包括纹理,示例性的,不包含文字的盒子表面、未放置东西的桌子表面、墙面以及没有图案的衣服表面等均属于平坦区域,将现实图像中的平坦区域确定为信息显示位置,相应的,在当前虚拟图像与该平坦区域对应的位置添加信息,生成新的虚拟图像。本实施例中,通过将信息显示在现实图像中的平坦区域,避免信息显示时对现实图像内容的遮挡,同时提高信息显示的清晰度,便于目标对象对信息的浏览。进一步的,识别平坦区域的背景颜色,根据平坦区域的背景颜色调节信息的字体颜色,以突出显示信息内容,便于目标对象的浏览。
在上述实施例的基础上,在信息显示过程中,还包括采集目标对象预设关键点的轨迹,根据该轨迹进一步对信息进行处理,示例性的,可以是对信息进行回复,当确定对信息进行回复时,采集目标对象的语音,将语音转换为文字,形成回复文本,将回复文本发送至关联终端,以使关联终端将所述回复文本发送至回复对象,该回复对象可以是信息的发信人。可选的,信息的显示时间可以是与信息内容量正相关,信息内容量越多,显示时间越,便于目标对象充分越多信息内容;可选的,信息的显示时间还可以是信息的重要等级正相关,信息的重要等级越高,显示时间越长。
图4为本申请实施例提供的一种信息处理装置的结构框图,该装置可由软件和/或硬件实现,一般集成在增强现实设备中,可通过执行增强现实设备的信息处理方法来对桌面布局进行编辑。如图4所示,该装置包括:提示信息显示模块401、手势采集模块402、处理方式确定模块403和信息处理模块404。
提示信息显示模块401,用于接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
手势采集模块404,用于采集目标对象的手势;
处理方式确定模块403,用于根据所述目标对象的手势确定对信息的处理方式;
信息处理模块404,用于根据确定的处理方式对信息进行处理。
本申请实施例中提供的信息处理装置,通过在移动终端接收到信息时,生成并显示提示信息,采集目标对象的手势,根据手势匹配确定信息的处理方式。通过上述技术方案,目标对象的手势表征了目标对象的信息处理需求,根据目标对象的需求对信息处理,在对关联终端接收信息进行及时提醒的同时,降低了实时对信息进行增强现实显示对用户的干扰,在一些特定场景可降低安全风险。
在上述实施例的基础上,提示信息显示模块401包括:
显示标识确定单元,用于根据所述提示信息中包括的信息类型和信息的特征参数,确定所述提示信息的显示标识;
提示信息显示单元,用于将所述信息标识添加至当前虚拟图像的预设位置,进行增强现实显示。
在上述实施例的基础上,所述提示信息中还包括信息的重要等级。
在上述实施例的基础上,提示信息显示模块401还包括:
显示标识调节单元,用于确定所述提示信息的显示标识之后,根据所述信息的重要等级确定所述显示标识的尺寸和/或颜色。
在上述实施例的基础上,处理方式确定模块403用于:
将所述目标对象的手势在信息处理轨迹集中进行匹配,信息处理轨迹集中包括各标准手势以及所述标准手势对应的处理方式;
当匹配成功时,根据匹配成功的标准手势确定信息处理方式。
在上述实施例的基础上,所述信息处理方式包括增强现实的信息显示、信息统一回复和信息暂存。
在上述实施例的基础上,当所述信息处理方式为增强现实的信息显示时,信息处理模块404包括:
虚拟图像更新单元,用于获取信息内容,根据所述信息内容更新当前虚拟图像;
虚拟图像转换单元,用于将更新后的当前虚拟图像转换为虚拟光信号,将所述虚拟光信号射入目标对象的瞳孔。
在上述实施例的基础上,虚拟图像更新单元用于:
采集现实图像,确定现实图像的背景颜色;
根据所述现实图像的背景颜色调节信息中字体颜色;
根据调节后的信息内容更新当前虚拟图像。
本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行信息处理方法,该方法包括:
接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
采集目标对象的手势;
根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDRRAM、SRAM、EDORAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的信息处理操作,还可以执行本申请任意实施例所提供的信息处理方法中的相关操作。
本申请实施例提供了一种增强现实设备,该增强现实设备中可集成本申请实施例提供的信息处理装置。图5为本申请实施例提供的一种增强现实设备的结构示意图。增强现实设备500可以包括:存储器501,处理器502及存储在存储器501上并可在处理器502运行的计算机程序,所述处理器502执行所述计算机程序时实现如本申请实施例所述的信息处理方法。
本申请实施例提供的增强现实设备,通过在移动终端接收到信息时,生成并显示提示信息,采集目标对象的手势,根据手势匹配确定信息的处理方式。通过上述技术方案,目标对象的手势表征了目标对象的信息处理需求,根据目标对象的需求对信息处理,在对关联终端接收信息进行及时提醒的同时,降低了实时对信息进行增强现实显示对用户的干扰,在一些特定场景可降低安全风险。
图6为本申请实施例提供的另一种增强现实设备的结构示意图。该增强现实设备可以包括:壳体(图中未示出)、存储器601、中央处理器(central processing unit,CPU)602(又称处理器,以下简称CPU)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述CPU602和所述存储器601设置在所述电路板上;所述电源电路,用于为所述增强现实设备的各个电路或器件供电;所述存储器601,用于存储可执行程序代码;所述CPU602通过读取所述存储器601中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序,以实现以下步骤:
接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
采集目标对象的手势;
根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理。
所述增强现实设备还包括:外设接口603、RF(Radio Frequency,射频)电路605、音频电路606、扬声器611、电源管理芯片608、输入/输出(I/O)子系统609、其他输入/控制设备610、触摸屏612、其他输入/控制设备610以及外部端口604,这些部件通过一个或多个通信总线或信号线607来通信。
应该理解的是,图示增强现实设备600仅仅是增强现实设备的一个范例,并且增强现实设备600可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于对信息处理操作的增强现实设备进行详细的描述,该增强现实设备以手机为例。
存储器601,所述存储器601可以被CPU602、外设接口603等访问,所述存储器601可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口603,所述外设接口603可以将设备的输入和输出外设连接到CPU602和存储器601。
I/O子系统609,所述I/O子系统609可以将设备上的输入输出外设,例如触摸屏612和其他输入/控制设备610,连接到外设接口603。I/O子系统609可以包括显示控制器6091和用于控制其他输入/控制设备610的一个或多个输入控制器6092。其中,一个或多个输入控制器6092从其他输入/控制设备610接收电信号或者向其他输入/控制设备610发送电信号,其他输入/控制设备610可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器6092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏612,所述触摸屏612是用户增强现实设备与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。
I/O子系统609中的显示控制器6091从触摸屏612接收电信号或者向触摸屏612发送电信号。触摸屏612检测触摸屏上的接触,显示控制器6091将检测到的接触转换为与显示在触摸屏612上的用户界面对象的交互,即实现人机交互,显示在触摸屏612上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路605,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,RF电路605接收并发送RF信号,RF信号也称为电磁信号,RF电路605将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路605可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder,编译码器)芯片组、用户标识模块(Subscriber Identity Module,SIM)等等。
音频电路606,主要用于从外设接口603接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器611。
扬声器611,用于将手机通过RF电路605从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片608,用于为CPU602、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
上述实施例中提供的信息处理装置、存储介质及增强现实设备可执行本申请任意实施例所提供的信息处理方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的信息处理方法。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。
Claims (9)
1.一种信息处理方法,应用于头戴增强现实设备,其特征在于,包括:
接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;所述提示信息中包括信息类型、信息发送人、信息重要等级中的一项或多项;采集目标对象的手势;
根据所述目标对象的手势确定对信息的处理方式,并根据确定的处理方式对信息进行处理;
当所述信息处理方式为增强现实的信息显示时,根据确定的处理方式对信息进行处理,包括:
获取信息内容,根据所述信息内容更新当前虚拟图像;
将更新后的当前虚拟图像转换为虚拟光信号,将所述虚拟光信号射入目标对象的瞳孔;
所述提示信息包括信息的重要等级;所述信息的重要等级通过识别发信人和信息内容确定。
2.根据权利要求1所述的方法,其特征在于,接收关联终端发送的提示信息,将所述提示信息进行增强现实显示,包括:
根据所述提示信息中包括的信息类型和信息的特征参数,确定所述提示信息的显示标识;
将所述信息标识添加至当前虚拟图像的预设位置,进行增强现实显示。
3.根据权利要求2所述的方法,其特征在于,确定所述提示信息的显示标识之后,还包括:
根据所述信息的重要等级确定所述显示标识的尺寸和/或颜色。
4.根据权利要求1所述的方法,其特征在于,根据所述目标对象的手势确定对信息的处理方式,包括:
将所述目标对象的手势在信息处理轨迹集中进行匹配,信息处理轨迹集中包括各标准手势以及所述标准手势对应的处理方式;
当匹配成功时,根据匹配成功的标准手势确定信息处理方式。
5.根据权利要求1-4任一所述的方法,其特征在于,所述信息处理方式包括信息统一回复和信息暂存。
6.根据权利要求5所述的方法,其特征在于,根据所述信息内容更新当前虚拟图像,包括:
采集现实图像,确定现实图像的背景颜色;
根据所述现实图像的背景颜色调节信息中字体颜色;
根据调节后的信息内容更新当前虚拟图像。
7.一种信息处理装置,其特征在于,包括:
提示信息显示模块,用于接收关联终端发送的提示信息,将所述提示信息进行增强现实显示;
手势采集模块,用于采集目标对象的手势;
处理方式确定模块,用于根据所述目标对象的手势确定对信息的处理方式;
信息处理模块,用于根据确定的处理方式对信息进行处理;
所述提示信息中包括信息类型、信息发送人、信息重要等级中的一项或多项;
当所述信息处理方式为增强现实的信息显示时,所述信息处理模块包括:
虚拟图像更新单元,用于获取信息内容,根据所述信息内容更新当前虚拟图像;
虚拟图像转换单元,用于将更新后的当前虚拟图像转换为虚拟光信号,将所述虚拟光信号射入目标对象的瞳孔;
所述提示信息包括信息的重要等级;所述信息的重要等级通过识别发信人和信息内容确定。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6中任一所述的信息处理方法。
9.一种增强现实设备,其特征在于,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-6任一所述的信息处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910626005.8A CN110333785B (zh) | 2019-07-11 | 2019-07-11 | 信息处理方法、装置、存储介质及增强现实设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910626005.8A CN110333785B (zh) | 2019-07-11 | 2019-07-11 | 信息处理方法、装置、存储介质及增强现实设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110333785A CN110333785A (zh) | 2019-10-15 |
CN110333785B true CN110333785B (zh) | 2022-10-28 |
Family
ID=68146531
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910626005.8A Active CN110333785B (zh) | 2019-07-11 | 2019-07-11 | 信息处理方法、装置、存储介质及增强现实设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110333785B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111062312B (zh) * | 2019-12-13 | 2023-10-27 | RealMe重庆移动通信有限公司 | 手势识别方法、手势控制方法、装置、介质与终端设备 |
CN113280477B (zh) * | 2021-04-27 | 2023-01-20 | Tcl空调器(中山)有限公司 | 空调显示屏的显示控制方法及装置 |
CN113432251A (zh) * | 2021-06-08 | 2021-09-24 | Tcl空调器(中山)有限公司 | 空调显示屏控制方法、装置、空调及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105264460A (zh) * | 2013-04-12 | 2016-01-20 | 微软技术许可有限责任公司 | 全息图对象反馈 |
CN106415444A (zh) * | 2014-01-23 | 2017-02-15 | 微软技术许可有限责任公司 | 注视滑扫选择 |
CN109426783A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 基于增强现实的手势识别方法及系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102303115B1 (ko) * | 2014-06-05 | 2021-09-16 | 삼성전자 주식회사 | 웨어러블 디바이스 및 웨어러블 디바이스 의 증강 현실 정보 제공 방법 |
SG10201913907YA (en) * | 2016-03-30 | 2020-03-30 | Agency Science Tech & Res | Methods for providing task related information to a user, user assistance systems, and computer-readable media |
US10607230B2 (en) * | 2016-12-02 | 2020-03-31 | Bank Of America Corporation | Augmented reality dynamic authentication for electronic transactions |
CN110546666A (zh) * | 2017-02-10 | 2019-12-06 | 维萨国际服务协会 | 增强现实和虚拟现实操作系统 |
CN109088815A (zh) * | 2018-08-30 | 2018-12-25 | Oppo广东移动通信有限公司 | 消息提醒方法、装置、存储介质、移动终端及穿戴式设备 |
CN109446876B (zh) * | 2018-08-31 | 2020-11-06 | 百度在线网络技术(北京)有限公司 | 手语信息处理方法、装置、电子设备和可读存储介质 |
CN109343703B (zh) * | 2018-09-10 | 2021-12-03 | 中国科学院计算机网络信息中心 | 多终端协同的信息处理方法、装置、系统和存储介质 |
-
2019
- 2019-07-11 CN CN201910626005.8A patent/CN110333785B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105264460A (zh) * | 2013-04-12 | 2016-01-20 | 微软技术许可有限责任公司 | 全息图对象反馈 |
CN106415444A (zh) * | 2014-01-23 | 2017-02-15 | 微软技术许可有限责任公司 | 注视滑扫选择 |
CN109426783A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 基于增强现实的手势识别方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110333785A (zh) | 2019-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106062763B (zh) | 一种显示应用、图片的方法、装置及电子设备 | |
CN109324749B (zh) | 绘图方法、装置、存储介质及电子设备 | |
CN110333785B (zh) | 信息处理方法、装置、存储介质及增强现实设备 | |
WO2019105227A1 (zh) | 应用图标的显示方法、终端及计算机可读存储介质 | |
CN109089043B (zh) | 拍摄图像预处理方法、装置、存储介质及移动终端 | |
CN108920071B (zh) | 基于异形显示屏的控制方法、装置、存储介质及移动终端 | |
WO2016113693A1 (en) | Wearable data processing and control platform apparatuses, methods and systems | |
CN108958606B (zh) | 分屏显示方法、装置、存储介质和电子设备 | |
CN112163406B (zh) | 互动消息显示方法、装置、计算机设备及存储介质 | |
CN108958587B (zh) | 分屏处理方法、装置、存储介质和电子设备 | |
CN106896900B (zh) | 一种移动终端的显示控制方法、装置及移动终端 | |
CN108833779B (zh) | 拍摄控制方法及相关产品 | |
CN112068762A (zh) | 应用程序的界面显示方法、装置、设备及介质 | |
KR20200101014A (ko) | 아바타 추천 및 다운로드를 지원하는 전자 장치 | |
CN108984142B (zh) | 分屏显示方法、装置、存储介质和电子设备 | |
CN109062634A (zh) | 一种应用启动方法及移动终端 | |
CN110198421B (zh) | 视频处理方法及相关产品 | |
CN108229139A (zh) | 一种密码输入方法及移动终端 | |
CN109684011B (zh) | 界面显示控制方法、电子装置及计算机可读存储介质 | |
CN113253964A (zh) | 数据管理方法、装置、设备及存储介质 | |
CN110362203B (zh) | 信息处理方法、装置、存储介质及增强现实设备 | |
CN110719361B (zh) | 信息发送方法、移动终端和存储介质 | |
WO2020103091A1 (zh) | 锁定触控操作的方法及电子设备 | |
US10613622B2 (en) | Method and device for controlling virtual reality helmets | |
CN108304709A (zh) | 人脸解锁方法及相关产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |