CN109343703A - 信息处理方法、装置、系统、存储介质和处理器 - Google Patents
信息处理方法、装置、系统、存储介质和处理器 Download PDFInfo
- Publication number
- CN109343703A CN109343703A CN201811052655.8A CN201811052655A CN109343703A CN 109343703 A CN109343703 A CN 109343703A CN 201811052655 A CN201811052655 A CN 201811052655A CN 109343703 A CN109343703 A CN 109343703A
- Authority
- CN
- China
- Prior art keywords
- target
- augmented reality
- reality equipment
- information
- processing result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种信息处理方法、装置、系统、存储介质和处理器。其中,该方法包括:获取目标终端上显示的目标参数;通过增强现实设备在目标空间中显示与目标参数对应的目标信息;通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果;通过增强现实设备在目标空间中显示与处理结果对应的目标内容。通过本发明,达到了提高信息处理效率的效果。
Description
技术领域
本发明涉及信息处理领域,具体而言,涉及一种信息处理方法、装置、系统、存储介质和处理器。
背景技术
目前,信息处理可以通过可视化平台进行,传统的可视化平台通常是以鼠标事件作为信息交互的方式,但是这种信息交互方式单一,并不能实现复杂的信息交互,并且对于多人协同交互也不友好,信息处理的效率低。
另外,传统的可视化平台是以显示器作为信息展示的载体,所展示的内容的数量也常常受限于显示器的大小,展示方式也受限于显示器的二维(2D)属性,信息处理的效率低。
针对现有技术中信息处理的效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明的主要目的在于提供一种信息处理方法、装置、系统、存储介质和处理器,以至少解决信息处理效率低的技术问题。
为了实现上述目的,根据本发明的一个方面,提供了一种信息处理方法。该信息处理方法包括:获取目标终端上显示的目标参数;通过增强现实设备在目标空间中显示与目标参数对应的目标信息;通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果;通过增强现实设备在目标空间中显示与处理结果对应的目标内容。
可选地,通过增强现实设备在目标空间中显示与目标参数对应的目标信息包括:通过增强现实设备在目标空间中显示与目标参数对应的三维信息。
可选地,在通过增强现实设备在目标空间中显示与处理结果对应的目标内容之前,该方法还包括:获取目标对象在目标空间中的第一位置;通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:通过增强现实设备在目标空间中与第一位置对应的第二位置上,显示与处理结果对应的目标内容。
可选地,在基于目标手势对目标信息进行处理,得到处理结果之后,该方法还包括:通过目标标识信息对处理结果进行标识,得到标识后的处理结果;通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:通过增强现实设备在目标空间中显示与标识后的处理结果对应的目标内容。
可选地,获取目标终端上显示的目标参数包括:至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数;通过增强现实设备在目标空间中显示与目标参数对应的目标信息包括:至少通过第一增强现实设备在目标空间中显示与第一目标参数对应的第一目标信息,通过第二增强现实设备在目标空间中显示与第二目标参数对应的第二目标信息;通过增强现实设备在目标空间中显示与目标参数对应的目标信息包括:至少通过第一增强现实设备在目标空间中显示与第一目标参数对应的第一目标信息,通过第二增强现实设备在目标空间中显示与第二目标参数对应的第二目标信息;通过增强现实设备获取目标对象的目标手势,并基于目标手势对目标信息进行处理,得到处理结果包括:至少通过第一增强现实设备获取第一目标对象的第一目标手势和通过第二增强现实设备获取第二目标对象的第二目标手势,并基于第一目标手势对第一目标信息进行处理,得到第一处理结果,基于第二目标手势对第二目标信息进行处理,得到第二处理结果,其中,第一增强现实设备和第一目标终端相对应,第二增强现实设备和第二目标终端相对应;通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备在目标空间中显示第一目标内容和第二目标内容。
可选地,至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备在目标空间中显示第一目标内容和第二目标内容包括:至少通过第一增强现实设备将目标空间中已显示的内容,更新为与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备同步将目标空间中已显示的内容,更新为第一目标内容和第二目标内容。
为了实现上述目的,根据本发明的另一方面,还提供了一种信息处理装置。该信息处理装置包括:获取单元,用于获取目标终端上显示的目标参数;第一显示单元,用于通过增强现实设备在目标空间中显示与目标参数对应的目标信息;处理单元,用于通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果;第二显示单元,用于通过增强现实设备在目标空间中显示与处理结果对应的目标内容。
为了实现上述目的,根据本发明的另一方面,还提供了一种信息处理系统。该信息处理系统包括:目标终端,用于显示目标参数;增强现实设备,与目标终端相连接,用于在目标空间中显示与目标参数对应的目标信息,并获取目标对象对目标信息进行的目标手势;中央服务器,与目标终端和增强现实设备相连接,用于基于目标手势对目标信息进行处理,得到处理结果,其中,增强现实设备用于在目标空间中显示与处理结果对应的目标内容。
为了实现上述目的,根据本发明的另一方面,还提供了一种存储介质。该存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行本发明实施例的信息处理方法。
为了实现上述目的,根据本发明的另一方面,还提供了一种处理器。该处理器用于运行程序,其中,程序运行时执行本发明实施例的信息处理方法。
在本发明实施例中,获取目标终端上显示的目标参数;通过增强现实设备在目标空间中显示与目标参数对应的目标信息;通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果;通过增强现实设备在目标空间中显示与处理结果对应的目标内容。由于以目标终端和增强现实设备为硬件平台,基于目标终端上的目标参数和增强现实设备的目标手势进行信息处理,并且通过增强现实设备在目标空间中显示目标内容,达到了对信息进行交互的目的,避免了通过鼠标事件进行信息交互所导致的信息交互方式单一,解决了信息处理效率低的技术问题,进而达到了提高信息处理效率的技术效果。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种信息处理系统的示意图;
图2是根据本发明实施例的一种信息方法的流程图;
图3是根据本发明实施例的一种可视化信息处理系统的示意图;
图4是根据本发明实施例的一种可视化信息处理系统的功能模块的示意图;以及
图5是根据本发明实施例的一种信息处理装置的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
本发明实施例提供了一种信息处理系统。
图1是根据本发明实施例的一种信息处理系统的示意图。如图1所示,该信息处理系统包括:目标终端10、增强现实设备20和中央服务器30。
目标终端10,用于显示目标参数。
在该实施例中,目标终端10可以为在可视化管理平台中,具有用户控制界面的移动终端,比如,为平板电脑、智能手机等可以进行点击、拖拽、缩放等操作的移动终端,此处不做任何限制,其中,用户控制界面为用于使用户进行操作的界面,该界面友好、美观,各可视化元素之间罗列合理、自然,符合人们的视觉标准。该目标终端10显示的目标参数可以为用户输入的操作参数,包括用户输入的设置参数,该设置参数可以为设置内容展示的参数,用于对内容展示进行设置,比如,对展示的图像进行设置。可选地,该目标终端10可以多级显示目标参数。
在该实施例中,目标终端10可以包括展示模块和传输模块。其中,展示模块,可以用于显示上述用户控制界面;传输模块,可以用于将目标参数向中央服务器30传输,可以通过无线网络(Wireless-Fidelity,简称为WIFI)将目标参数向中央服务器30传输。
增强现实设备20,与目标终端10相连接,用于在目标空间中显示与目标参数对应的目标信息,并获取目标对象对目标信息进行的目标手势。
在该实施例中,增强现实设备20可以为可穿戴增强现实设备,比如,为可穿戴增强现实眼镜,可以用于在目标空间中显示与目标参数对应的目标信息,其中,目标空间可以为用户所处的空间,在目标空间中显示的与目标参数对应的目标信息可以为出现在目标空间中的与设置内容展示的参数对应的场景信息和内容信息等,比如,内容展示的参数为设置显示图像的参数,则目标信息为根据设置的图像的参数所显示出的图像。
该实施例的增强现实设备20还获取目标对象对目标信息进行的目标手势,以通过目标手势对目标信息进行处理。该实施例的目标对象可以为处于目标空间中的用户,目标手势为用户在目标空间中对目标信息进行的交互手势,比如,为滑动手势、点击手势、双击手势、手掌张开手势、握拳手势等,此处不做任何限制。
可选地,该实施例的增强现实设备20包括展示模块、手势模块、传输与同步模块。其中,展示模块,可以用于展示场景和内容;手势模块,可以用于获取目标对象的目标手势并对目标手势进行处理;传输与同步模块,可以用于传输目标对象的目标手势和同步实时场景和内容。
中央服务器30,与目标终端10和增强现实设备20相连接,用于基于目标手势对目标信息进行处理,得到处理结果,其中,增强现实设备20用于在目标空间中显示与处理结果对应的目标内容。
在该实施例中,中央服务器30与目标终端10和增强现实设备20可以通过无线方式进行连接,比如,通过无线网络(Wireless-Fidelity,简称为WIFI)进行连接。中央服务器30可以通过增强现实设备20获取目标手势,并基于目标手势对目标信息进行处理,得到处理结果。增强现实设备20在目标空间中显示与处理结果对应的目标内容,实现场景的内容的同步和更新。
举例而言,目标参数为设置显示图像的参数,目标信息为图像,目标手势为对图像进行放大的手势,则基于对图像进行放大的手势对图像进行处理,得到的处理结果用于指示对图像进行放大,则增强现实设备20在目标空间中显示放大的图像。
可选地,该实施例的中央服务器30包括图像处理模块、交互解析模块、网络模块、数据管理模块、内容同步模块和用户管理模块。其中,图像处理模块,可以用于处理从目标摄像设备传来的目标图像,根据目标图像来分析用户的相对位置并对用户进行标识,将处理后的参数向交互解析模块传输;交互解析模块,可以用于处理所有的目标手势和对场景进行设置,可以通过网络模块从目标终端10获取目标参数,从增强现实设备20获取目标手势,且对从目标摄像设备获取到的相对位置和交互用户进行处理,得到处理结果,再根据处理结果从数据管理模块拉取对应的数据,将拉取到的数据向内容同步模块传输;网络模块,可以用于通过网络传输与接收数据;数据管理模块,可以用于管理所有的后台数据,以为其它模块提供数据支持;内容同步模块,可以用于根据获取到的数据生成场景和内容,然后将场景和内容通过网络模块进行分发;用户管理模块,可以用于管理可视化平台中的所有使用用户。
需要说明的是,上述目标摄像设备可以通过有线连接方式与中央服务器30相连接,比如,通过通用串行总线(Universal Serial Bus,简称为USB)进行连接,用于捕捉目标空间中的整个场景的实时图像,将捕捉到的实时图像向中央服务器30进行传输,以进一步分析出交互用户和位置信息等。
该实施例的信息交互系统可以应用在可视化交互平台中,对于每一个使用者,需要穿戴可穿戴增强现实设备并且手持目标终端。在操作过程中,用户可以通过目标终端设置目标参数。对于出现在目标空间内的场景和内容,用户可以通过目标手势对其进行操作,该过程操作简便、自然,且更加符合用户的使用习惯,从而在提高了信息处理的效率的过程中,提升了用户体验。
另外,该实施例目标终端和增强现实设备为一套设备,供一个用户使用,整个信息处理系统中可以出现多套设备,支持多人之间协同操作。在多人协同操作的过程中,交互方式与单人相同,每个用户在对目标参数进行设置,且通过目标手势进行交互之后,所有用户的场景和内容都将进行同步更新,并且该实施例还可以根据用户在目标空间中的不同位置,来显示场景内容,也即,当用户在目标空间中的位置发生变化时,场景内容的显示位置也发生变化。
该实施例的信息处理系统通过目标终端显示目标参数,通过增强现实设备,与目标终端相连接,在目标空间中显示与目标参数对应的目标信息,并获取目标对象对目标信息进行的目标手势,通过中央服务器,与目标终端和增强现实设备相连接,基于目标手势对目标信息进行处理,得到处理结果,其中,增强现实设备用于在目标空间中显示与处理结果对应的目标内容。由于以目标终端和增强现实设备为硬件平台,基于目标终端上的目标参数和增强现实设备的目标手势进行信息处理,并且通过增强现实设备在目标空间中显示目标内容,达到了对信息进行交互的目的,避免了通过鼠标事件进行信息交互,解决了信息处理效率低的技术问题,进而达到了提高信息处理效率的技术效果。
实施例2
本发明实施例提供了一种信息处理方法。需要说明的是,该实施例的信息处理方法可以由本发明实施例的信息处理系统执行。
图2是根据本发明实施例的一种信息方法的流程图。如图2所示,该方法包括以下步骤:
步骤S202,获取目标终端上显示的目标参数。
在本发明上述步骤S202提供的技术方案中,目标终端可以为在可视化管理平台中,具有用户控制界面的移动终端,用户控制界面为用于使用户进行操作的界面。获取目标终端上显示的目标参数,该目标终端显示的目标参数可以为用户输入的操作参数,包括用户输入的设置参数,该设置参数可以为设置内容展示的参数,用于对内容展示进行设置,比如,对展示的图像进行设置。可选地,获取目标终端上多级显示的目标参数。
可选地,该实施例通过目标终端中的展示模块显示目标参数,通过中央服务器中的网络模块从目标终端获取目标参数。目标终端的用户控制界面友好、美观,各可视化元素之间罗列合理、自然,符合人们的视觉标准。
步骤S204,通过增强现实设备在目标空间中显示与目标参数对应的目标信息。
在本发明上述步骤S204提供的技术方案中,在获取目标终端上显示的目标参数之后,通过增强现实设备在目标空间中显示与目标参数对应的目标信息。
该实施例的增强现实设备可以为可穿戴增强现实设备,比如,为可穿戴增强现实眼镜,可以用于在目标空间中显示与目标参数对应的目标信息,其中,目标空间可以为用户所处的空间,目标参数可以为设置内容展示的参数,在目标空间中显示的与目标参数对应的目标信息可以为出现在目标空间中的与设置内容展示的参数对应的场景信息和内容信息等,比如,内容展示的参数为设置显示图像的参数,则目标信息为根据设置的图像的参数所显示出的图像。
可选地,该实施例通过增强现实设备的展示模块在目标空间中显示与目标参数对应的目标信息。
步骤S206,通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果。
在本发明上述步骤S206提供的技术方案中,在通过增强现实设备在目标空间中显示与目标参数对应的目标信息之后,通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果。
该实施例的目标对象可以为处于目标空间中的用户,目标手势为用户对目标信息在目标空间进行的交互手势,比如,为滑动手势、点击手势、双击手势、手掌张开手势、握拳手势等,此处不做任何限制。
可选地,该实施例通过增强现实设备中的手势模块获取目标对象对目标信息进行的目标手势,通过增强现实设备中的传输与同步模块传输目标对象的目标手势,通过中央服务器中的交互解析模块基于目标手势对目标信息进行处理,得到处理结果,该处理结果可以用于指示在目标空间中需要显示的目标内容。
步骤S208,通过增强现实设备在目标空间中显示与处理结果对应的目标内容。
在本发明上述步骤S208提供的技术方案中,在通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果之后,通过增强现实设备在目标空间中显示与处理结果对应的目标内容。
在该实施例中,中央服务器中的内容同步模块可以将与处理结果对应的目标内容通过网络模块进行分发,增强现实设备可以通过展示模块在目标空间中显示与处理结果对应的目标内容,从而实现场景的内容的同步和更新。
举例而言,目标参数为设置显示图像的参数,目标信息为图像,目标手势为对图像进行放大的手势,则基于对图像进行放大的手势对图像进行处理,得到的处理结果用于指示对图像进行放大,则通过增强现实设备在目标空间中显示放大的图像。
通过上述步骤S202至步骤S208,获取目标终端上显示的目标参数;通过增强现实设备在目标空间中显示与目标参数对应的目标信息;通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果;通过增强现实设备在目标空间中显示与处理结果对应的目标内容。由于以目标终端和增强现实设备为硬件平台,基于目标终端上的目标参数和增强现实设备的目标手势进行信息处理,并且通过增强现实设备在目标空间中显示目标内容,达到了对信息进行交互的目的,避免了通过鼠标事件进行信息交互,解决了信息处理效率低的技术问题,进而达到了提高信息处理效率的技术效果。
作为一种可选的实施方式,步骤S204,通过增强现实设备在目标空间中显示与目标参数对应的目标信息包括:通过增强现实设备在目标空间中显示与目标参数对应的三维信息。
在该实施例中,目标信息可以为三维信息,可以通过增强现实设备的混合增强显示技术,在目标空间中显示与目标参数对应的三维信息,而不受限于显示器的二维属性,从而使得信息显示的效果更加生动、形象,提高了信息显示的效率。
作为一种可选的实施方式,在步骤S208,通过增强现实设备在目标空间中显示与处理结果对应的目标内容之前,该方法还包括:获取目标对象在目标空间中的第一位置;步骤S208,通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:通过增强现实设备在目标空间中与第一位置对应的第二位置上,显示与处理结果对应的目标内容。
在该实施例中,目标对象在目标空间中的位置可以固定,也可以移动。目标对象在目标空间中的第一位置可以由目标对象在目标空间中的坐标信息进行指示,比如,由目标对象在目标空间中的三维坐标信息进行指示。可选地,通过目标摄像设备获取目标对象在目标空间中的图像信息,通过中央服务器的图像处理模块在图像信息中识别出目标对象在目标空间中的第一位置,其中,目标摄像设备可以为高清摄像头,用于捕捉目标空间中的整个场景的实时图像。
该实施例在目标空间中显示与处理结果对应的目标内容时,也有显示的第二位置,该第二位置可以与第一位置具有对应关系,当第一位置发生变化时,第二位置也发生变化,也即,在目标空间中显示与处理结果对应的目标内容的位置,随着目标对象的位置的变化而变化,从而实现了根据目标对象的不同位置,显示目标内容的位置也不同的目的,提高了信息处理的效率。
作为一种可选的实施方式,在步骤S206,基于目标手势对目标信息进行处理,得到处理结果之后,该方法还包括:通过目标标识信息对处理结果进行标识,得到标识后的处理结果;步骤S208,通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:通过增强现实设备在目标空间中显示与标识后的处理结果对应的目标内容。
在该实施例中,目标标识信息可以为目标对象的标识信息,用于唯一确定目标对象,可以通过中央服务器的图像处理模块对目标对象进行标识。在基于目标手势对目标信息进行处理,得到处理结果之后,可以通过目标标识信息对处理结果进行标识,得到标识后的处理结果,以使处理结果与目标对象相对应,也即,指示该处理结果是通过基于目标对象的目标手势对目标信息进行处理得到的,进而通过增强现实设备在目标空间中显示与标识后的处理结果对应的目标内容,使得在信息交互的过程中,目标内容与目标对象相对应,比如,在多人协同操作中,就可以通过与标识后的处理结果对应的目标内容来确定具体操作的是哪一个用户,从而提高了信息处理的效率。
作为一种可选的实施方式,步骤S202,获取目标终端上显示的目标参数包括:至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数;步骤S204,通过增强现实设备在目标空间中显示与目标参数对应的目标信息包括:至少通过第一增强现实设备在目标空间中显示与第一目标参数对应的第一目标信息,通过第二增强现实设备在目标空间中显示与第二目标参数对应的第二目标信息;步骤S206,通过增强现实设备获取目标对象的目标手势,并基于目标手势对目标信息进行处理,得到处理结果包括:至少通过第一增强现实设备获取第一目标对象的第一目标手势和通过第二增强现实设备获取第二目标对象的第二目标手势,并基于第一目标手势对第一目标信息进行处理,得到第一处理结果,基于第二目标手势对第二目标信息进行处理,得到第二处理结果,其中,第一增强现实设备和第一目标终端相对应,第二增强现实设备和第二目标终端相对应;步骤S208,通过增强现实设备在目标空间中显示与处理结果对应的目标内容包括:至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备在目标空间中显示第一目标内容和第二目标内容。
该实施例的信息处理方法不仅支持单人操作,也可以支持多人协同操作。可选地,该实施例的目标终端为至少一个。可选地,目标终端包括第一目标终端和第二目标终端,至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数,其中,目标参数包括第一目标参数和第二目标参数。
在至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数之后,至少通过第一增强现实设备在目标空间中显示与第一目标参数对应的第一目标信息,通过第二增强现实设备在目标空间中显示与第二目标参数对应的第二目标信息,至少通过第一增强现实设备获取第一目标对象的第一目标手势和通过第二增强现实设备获取第二目标对象的第二目标手势,并基于第一目标手势对第一目标信息进行处理,得到第一处理结果,基于第二目标手势对第二目标信息进行处理,得到第二处理结果,其中,增强现实设备包括第一增强现实设备和第二增强现实设备,第一增强现实设备和第一目标终端相对应,第二增强现实设备和第二目标终端相对应,也即,第一增强设备和第一目标终端为一套设备,可以供第一目标对象使用,第二增强设备和第二目标终端为一套设备,可以供第二目标对象使用。
在至少基于第一目标手势对第一目标信息进行处理,得到第一处理结果,基于第二目标手势对第二目标信息进行处理,得到第二处理结果之后,至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备也在目标空间中显示第一目标内容和第二目标内容,也即,第一目标内容和第二目标内容至少均通过第一增强现实设备和第二增强现实设备显示,以实现信息的多人协同交互。
需要说明的是,上述第一目标终端、第二目标终端、第一增强现实设备和第二增强现实设备仅为本发明实施例的一种举例,并不代表本发明实施例的目标终端仅包括第一目标终端和第二目标终端,增强现实设备仅包括第一增强现实设备和第二增强现实设备,该目标终端还可以为两个以上的终端,增强现实设备还可以为两个以上的增强现实设备,从而实现多人协同交互,提高了信息处理的效率。
作为一种可选的实施方式,至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备在目标空间中显示第一目标内容和第二目标内容包括:至少通过第一增强现实设备将目标空间中已显示的内容,更新为与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备同步将目标空间中已显示的内容,更新为第一目标内容和第二目标内容。
在该实施例中,目标空间中现实的内容可以随着用户的操作进行实时更新,至少通过第一增强现实设备将目标空间中已显示的内容,更新为与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备同步将目标空间中已显示的内容,更新为第一目标内容和第二目标内容,使得第一目标对象和第二目标对象都可以获取到第一目标内容和第二目标内容,从而实现信息交互的事件与响应的内容实时同步,所有用户场景和内容同步更新,从而便于用户实时分析、探讨和交流,提高了信息处理的效率。
该实施例采用目标终端和增强现实设备为硬件平台,作为可视化平台的展示载体,以目标终端的点击、拖拽、缩放和增强现实设备获取的空间手势为交互方式,且可以使三维的内容展示效果更加生动、形象,另外采用多级展示的设计理念,在目标终端中展示用户的控制界面,在增强现实设备中展示可视化平台的内容,并且通过增强现实设备显示的内容为多人实时共享,便于多内容的展示与多人的实时交流,从而提升了用户体验和交互效率。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
实施例3
下面结合优选的实施方式对本发明的技术方案进行说明,具体以目标终端为平板电脑,增强现实设备为可穿戴增强现实眼镜进行举例说明。
图3是根据本发明实施例的一种可视化信息处理系统的示意图。如图3所示,该系统包括:平板电脑1、平板电脑2、平板电脑3、可穿戴增强现实眼镜4、可穿戴增强现实眼镜5、可穿戴增强现实眼镜6、高清摄像头7、中央服务器8。
在该实施例中,高清摄像头7通过USB与中央服务器8相连接,平板电脑1和可穿戴增强现实眼镜4、平板电脑2和可穿戴增强现实眼镜5、平板电脑3和可穿戴增强现实眼镜6分别通过WIFI与中央服务器8相连接。平板电脑1和可穿戴增强现实眼镜4、平板电脑2和可穿戴增强现实眼镜5、平板电脑3和可穿戴增强现实眼镜6分别为一套设备,供一个用户使用,整个可视化信息处理系统中可以出现多套平板电脑和可穿戴增强现实眼镜。
在该实施例中,高清摄像头7用于捕捉整个空间场景的实时图像,且将捕捉到的图像传输给中央服务器8进行分析。
平板电脑1、平板电脑2、平板电脑3用于展示操作界面和获取用户的操作参数,且将获取到的用户参数通过WIFI传输给中央服务器8进行分析。
可穿戴增强现实眼镜4、可穿戴增强现实眼镜5、可穿戴增强现实眼镜6用于进行内容展示和获取用户的空间交互手势,且将获取到的空间交互手势通过WIFI传输给中央服务器8进行分析,并且实时进行场景内容的同步和更新。
需要说明的是,上述平板电脑1、平板电脑2、平板电脑3、可穿戴增强现实眼镜4、可穿戴增强现实眼镜5、可穿戴增强现实眼镜6仅为本发明实施例的一种举例,并不代表本发明实施例的平板电脑仅包括上述平板电脑1、平板电脑2、平板电脑3,可穿戴增强现实眼镜仅包括上述可穿戴增强现实眼镜4、可穿戴增强现实眼镜5、可穿戴增强现实眼镜6,任何可以支持多人协同操作的平板电脑和可穿戴增强现实眼镜均在本发明实施例的范围之内,此处不再一一举例说明。
图4是根据本发明实施例的一种可视化信息处理系统的功能模块的示意图。如图4所示,可视化信息处理系统A包括:平板电脑40、可穿戴增强现实眼镜50和中央服务器60。其中,平板电脑40包括:第一展示模块41和传输模块42,可穿戴增强现实眼镜50包括:第二展示模块51、手势模块52和传输与同步模块53,中央服务器60包括:图像处理模块61、交互解析模块62、网络模块63、数据管理模块64、内容同步模块65和用户管理模块66。
平板电脑40包括的第一展示模块41,用于展示用户控制界面;平板电脑40包括的传输模块42,用于将用户设置的参数通过WIFI传输给中央服务器60进行分析。
可穿戴增强现实眼镜50包括的第二展示模块51,用于展示场景和内容;可穿戴增强现实眼镜50包括的手势模块52,用于获取用户的空间手势并进行处理,可穿戴增强现实眼镜50包括的传输与同步模块53,用于传输用户交互手势和同步实时场景和内容。
中央服务器60包括的图像处理模块61用于处理从高清摄像头传来的图像,从图像中分析用户的相对位置并标识交互用户,将处理后参数传输给交互解析模块62。
中央服务器60包括的交互解析模块62,用于处理所有的交互手势和场景设置,该模块可以通过网络模块63从平板电脑40获取控制参数,从可穿戴增强现实眼镜50获取交互手势,通过图像处理模块61从摄像头获取交互用户和用户位置,然后进行处理,得到处理结果,根据处理结果从数据管理模块64拉取对应的数据,将数据传输给内容同步模块65。
中央服务器60包括的网络模块63,用于网络数据的传输与接收。
中央服务器60包括的数据管理模块64,用于管理所有的后台数据,以为其它模块提供数据的支持。
中央服务器60包括的内容同步模块65,根据数据生成场景和内容,然后将场景和内容通过网络模块63进行分发。
中央服务器60包括的用户管理模块66,用于管理可视化平台中所有的使用用户。
该实施例的可视化信息处理系统采用平板电脑和可穿戴增强现实眼镜为硬件平台,以平板电脑的点击、拖拽、缩放和可穿戴增强现实眼镜的空间手势为交互方式,操作简便、自然,更加符合用户的自然习惯。对于每一个使用者,需要穿戴可穿戴增强现实眼镜设备并且手持平板电脑。在操作过程中用户通过平板电脑进行设置内容展示的参数。对于出现在空间内的场景和内容,用户可以通过交互手势对其进行操作。
该实施例可以支持多人协同操作,在多人协同操作的过程中,交互方式与单人相同,在每个用户对平板电脑的内容参数进行设置,且通过空间手势进行交互之后,所有用户的场景和内容将进行同步更新,便于实时交流和探讨,并且场景和内容的展现位置可以根据用户位置的不同而不同,从而可以实现复杂的交互,提升了用户体验和交互效率。
实施例4
本发明实施例还提供了一种信息处理装置。需要说明的是,该实施例的信息处理装置可以用于执行本发明实施例的信息处理方法。
图5是根据本发明实施例的一种信息处理装置的示意图。如图5所示,该信息处理装置包括:获取单元70、第一显示单元80、处理单元90和第二显示单元100。
获取单元70,用于获取目标终端上显示的目标参数。
第一显示单元80,用于通过增强现实设备在目标空间中显示与目标参数对应的目标信息。
处理单元90,用于通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果。
第二显示单元100,用于通过增强现实设备在目标空间中显示与处理结果对应的目标内容。
可选地,第一显示单元80包括:第一显示模块,用于通过增强现实设备在目标空间中显示与目标参数对应的三维信息。
可选地,该装置还包括:第一获取单元,用于在通过增强现实设备在目标空间中显示与处理结果对应的目标内容之前,获取目标对象在目标空间中的第一位置;第二显示单元100包括第二显示模块,用于通过增强现实设备在目标空间中与第一位置对应的第二位置上,显示与处理结果对应的目标内容。
可选地,该装置还包括:标识单元,用于在基于目标手势对目标信息进行处理,得到处理结果之后,通过目标标识信息对处理结果进行标识,得到标识后的处理结果;第二显示单元100包括:第三显示模块,用于通过增强现实设备在目标空间中显示与标识后的处理结果对应的目标内容。
可选地,获取单元70包括:获取模块,用于至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数;第一显示单元80包括:第四显示模块,用于至少通过第一增强现实设备在所述目标空间中显示与所述第一目标参数对应的第一目标信息,通过第二增强现实设备在所述目标空间中显示与所述第二目标参数对应的第二目标信息;处理单元90包括:处理模块,用于至少通过第一增强现实设备获取第一目标对象的第一目标手势和通过第二增强现实设备获取第二目标对象的第二目标手势,并基于第一目标手势对第一目标信息进行处理,得到第一处理结果,基于第二目标手势对第二目标信息进行处理,得到第二处理结果,其中,第一增强现实设备和第一目标终端相对应,第二增强现实设备和第二目标终端相对应;第二显示单元100包括:第五显示模块,用于至少通过第一增强现实设备在目标空间中显示与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备在目标空间中显示第一目标内容和第二目标内容。
第五显示模块包括显示子模块,用于至少通过第一增强现实设备将目标空间中已显示的内容,更新为与第一处理结果对应的第一目标内容和与第二处理结果对应的第二目标内容,且通过第二增强现实设备同步将目标空间中已显示的内容,更新为第一目标内容和第二目标内容。
该实施例通过获取单元70获取目标终端上显示的目标参数,第一显示单元80通过增强现实设备在目标空间中显示与目标参数对应的目标信息,处理单元90通过增强现实设备获取目标对象对目标信息进行的目标手势,并基于目标手势对目标信息进行处理,得到处理结果,第二显示单元100通过增强现实设备在目标空间中显示与处理结果对应的目标内容。由于以目标终端和增强现实设备为硬件平台,基于目标终端上的目标参数和增强现实设备的目标手势进行信息处理,并且通过增强现实设备在目标空间中显示目标内容,达到了对信息进行交互的目的,避免了通过鼠标事件进行信息交互,解决了信息处理效率低的技术问题,进而达到了提高信息处理效率的技术效果。
实施例5
本发明实施例还提供了一种存储介质。该存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行本发明实施例的信息处理方法。
实施例6
本发明实施例还提供了一种处理器。该处理器用于运行程序,其中,程序运行时执行本发明实施例的信息处理方法。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种信息处理方法,其特征在于,包括:
获取目标终端上显示的目标参数;
通过增强现实设备在目标空间中显示与所述目标参数对应的目标信息;
通过所述增强现实设备获取目标对象对所述目标信息进行的目标手势,并基于所述目标手势对所述目标信息进行处理,得到处理结果;
通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的目标内容。
2.根据权利要求1所述的方法,其特征在于,通过所述增强现实设备在所述目标空间中显示与所述目标参数对应的所述目标信息包括:
通过所述增强现实设备在所述目标空间中显示与所述目标参数对应的三维信息。
3.根据权利要求1所述的方法,其特征在于,
在通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的所述目标内容之前,所述方法还包括:获取所述目标对象在所述目标空间中的第一位置;
通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的所述目标内容包括:通过所述增强现实设备在所述目标空间中与所述第一位置对应的第二位置上,显示与所述处理结果对应的所述目标内容。
4.根据权利要求1所述的方法,其特征在于,
在基于所述目标手势对所述目标信息进行处理,得到所述处理结果之后,所述方法还包括:通过目标标识信息对所述处理结果进行标识,得到标识后的所述处理结果;
通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的目标内容包括:通过所述增强现实设备在所述目标空间中显示与标识后的所述处理结果对应的所述目标内容。
5.根据权利要求1至4中任意一项所述的方法,其特征在于,
获取所述目标终端上显示的所述目标参数包括:至少获取第一目标终端上显示的第一目标参数和第二目标终端上显示的第二目标参数;
通过所述增强现实设备在所述目标空间中显示与所述目标参数对应的所述目标信息包括:至少通过第一增强现实设备在所述目标空间中显示与所述第一目标参数对应的第一目标信息,通过第二增强现实设备在所述目标空间中显示与所述第二目标参数对应的第二目标信息;
通过所述增强现实设备获取所述目标对象的所述目标手势,并基于所述目标手势对所述目标信息进行处理,得到所述处理结果包括:至少通过第一增强现实设备获取第一目标对象的第一目标手势和通过第二增强现实设备获取第二目标对象的第二目标手势,并基于所述第一目标手势对所述第一目标信息进行处理,得到第一处理结果,基于所述第二目标手势对所述第二目标信息进行处理,得到第二处理结果,其中,所述第一增强现实设备和所述第一目标终端相对应,所述第二增强现实设备和所述第二目标终端相对应;
通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的所述目标内容包括:至少通过所述第一增强现实设备在所述目标空间中显示与所述第一处理结果对应的第一目标内容和与所述第二处理结果对应的第二目标内容,且通过所述第二增强现实设备在所述目标空间中显示所述第一目标内容和所述第二目标内容。
6.根据权利要求5所述的方法,其特征在于,至少通过所述第一增强现实设备在所述目标空间中显示与所述第一处理结果对应的所述第一目标内容和与所述第二处理结果对应的所述第二目标内容,且通过所述第二增强现实设备在所述目标空间中显示所述第一目标内容和所述第二目标内容包括:
至少通过所述第一增强现实设备将所述目标空间中已显示的内容,更新为与所述第一处理结果对应的所述第一目标内容和与所述第二处理结果对应的所述第二目标内容,且通过所述第二增强现实设备同步将所述目标空间中已显示的内容,更新为所述第一目标内容和所述第二目标内容。
7.一种信息处理装置,其特征在于,包括:
获取单元,用于获取目标终端上显示的目标参数;
第一显示单元,用于通过增强现实设备在目标空间中显示与所述目标参数对应的目标信息;
处理单元,用于通过所述增强现实设备获取目标对象对所述目标信息进行的目标手势,并基于所述目标手势对所述目标信息进行处理,得到处理结果;
第二显示单元,用于通过所述增强现实设备在所述目标空间中显示与所述处理结果对应的目标内容。
8.一种信息处理系统,其特征在于,包括:
目标终端,用于显示目标参数;
增强现实设备,与所述目标终端相连接,用于在目标空间中显示与所述目标参数对应的目标信息,并获取目标对象对所述目标信息进行的目标手势;
中央服务器,与所述目标终端和所述增强现实设备相连接,用于基于所述目标手势对所述目标信息进行处理,得到处理结果,其中,所述增强现实设备用于在所述目标空间中显示与所述处理结果对应的目标内容。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至6中任意一项所述的信息处理方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至6中任意一项所述的信息处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811052655.8A CN109343703B (zh) | 2018-09-10 | 2018-09-10 | 多终端协同的信息处理方法、装置、系统和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811052655.8A CN109343703B (zh) | 2018-09-10 | 2018-09-10 | 多终端协同的信息处理方法、装置、系统和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109343703A true CN109343703A (zh) | 2019-02-15 |
CN109343703B CN109343703B (zh) | 2021-12-03 |
Family
ID=65305137
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811052655.8A Active CN109343703B (zh) | 2018-09-10 | 2018-09-10 | 多终端协同的信息处理方法、装置、系统和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109343703B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110333785A (zh) * | 2019-07-11 | 2019-10-15 | Oppo广东移动通信有限公司 | 信息处理方法、装置、存储介质及增强现实设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150016777A1 (en) * | 2012-06-11 | 2015-01-15 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
CN105530368A (zh) * | 2014-10-17 | 2016-04-27 | Lg电子株式会社 | 可佩戴设备和用于支持与该设备的通信的移动终端 |
CN106200944A (zh) * | 2016-06-30 | 2016-12-07 | 联想(北京)有限公司 | 一种对象的控制方法、控制装置和控制系统 |
CN106406538A (zh) * | 2016-10-08 | 2017-02-15 | 上海理湃光晶技术有限公司 | 一种带有交互功能的头戴显示设备硬件模块 |
CN106774929A (zh) * | 2016-12-30 | 2017-05-31 | 维沃移动通信有限公司 | 一种虚拟现实终端的显示处理方法和虚拟现实终端 |
CN107943278A (zh) * | 2017-10-26 | 2018-04-20 | 努比亚技术有限公司 | 一种图像显示调整方法及图像显示调整设备 |
CN108334199A (zh) * | 2018-02-12 | 2018-07-27 | 华南理工大学 | 基于增强现实的移动式多模态交互方法及装置 |
CN108389138A (zh) * | 2018-02-11 | 2018-08-10 | 上海乐装网络科技有限公司 | 一种基于vr技术的装修平台 |
-
2018
- 2018-09-10 CN CN201811052655.8A patent/CN109343703B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150016777A1 (en) * | 2012-06-11 | 2015-01-15 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
CN105530368A (zh) * | 2014-10-17 | 2016-04-27 | Lg电子株式会社 | 可佩戴设备和用于支持与该设备的通信的移动终端 |
CN106200944A (zh) * | 2016-06-30 | 2016-12-07 | 联想(北京)有限公司 | 一种对象的控制方法、控制装置和控制系统 |
CN106406538A (zh) * | 2016-10-08 | 2017-02-15 | 上海理湃光晶技术有限公司 | 一种带有交互功能的头戴显示设备硬件模块 |
CN106774929A (zh) * | 2016-12-30 | 2017-05-31 | 维沃移动通信有限公司 | 一种虚拟现实终端的显示处理方法和虚拟现实终端 |
CN107943278A (zh) * | 2017-10-26 | 2018-04-20 | 努比亚技术有限公司 | 一种图像显示调整方法及图像显示调整设备 |
CN108389138A (zh) * | 2018-02-11 | 2018-08-10 | 上海乐装网络科技有限公司 | 一种基于vr技术的装修平台 |
CN108334199A (zh) * | 2018-02-12 | 2018-07-27 | 华南理工大学 | 基于增强现实的移动式多模态交互方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110333785A (zh) * | 2019-07-11 | 2019-10-15 | Oppo广东移动通信有限公司 | 信息处理方法、装置、存储介质及增强现实设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109343703B (zh) | 2021-12-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9639988B2 (en) | Information processing apparatus and computer program product for processing a virtual object | |
US20120124509A1 (en) | Information processor, processing method and program | |
JP6849612B2 (ja) | ビジネスオブジェクトを伝送する方法及び装置 | |
Andersen et al. | Virtual annotations of the surgical field through an augmented reality transparent display | |
JP7209474B2 (ja) | 情報処理プログラム、情報処理方法及び情報処理システム | |
CN106683196A (zh) | 一种增强现实的展示方法、系统以及智能终端 | |
CN106844063A (zh) | 跨平台数据处理方法、系统和跨平台数据共享系统 | |
CN109117779A (zh) | 一种穿搭推荐方法、装置及电子设备 | |
CN104199547A (zh) | 人机交互式虚拟触控装置、系统及方法 | |
CN110427100A (zh) | 一种基于深度摄像头的动作姿态捕捉系统 | |
CN105446626A (zh) | 基于增强现实技术的商品信息获取方法、系统及移动终端 | |
CN107766024A (zh) | 一种基于拼接墙的ppt放映控制方法和系统 | |
JP2013164697A (ja) | 画像処理装置、画像処理方法、プログラム及び画像処理システム | |
TW200803505A (en) | A transition and display system of image and cursor and the method thereof | |
CN106774870A (zh) | 一种增强现实交互方法及系统 | |
CN104199548A (zh) | 人机交互式虚拟触控装置、系统及方法 | |
CN106302524B (zh) | 一种操控远端应用软件的方法 | |
CN108961424A (zh) | 虚拟信息处理方法、设备及存储介质 | |
CN109343703A (zh) | 信息处理方法、装置、系统、存储介质和处理器 | |
CN205281405U (zh) | 一种基于增强现实的图像识别系统 | |
CN109571507A (zh) | 一种服务机器人系统及服务方法 | |
CN211062003U (zh) | 一种基于计算机视觉的多人协同系统 | |
CN108958690B (zh) | 多屏互动方法、装置、终端设备、服务器及存储介质 | |
CN109034167A (zh) | 视觉标记方法、系统、电子终端、及计算机可读存储介质 | |
CN206282360U (zh) | 博物馆临时展览规划设计的系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |