CN104076910A - 一种信息处理的方法及电子设备 - Google Patents
一种信息处理的方法及电子设备 Download PDFInfo
- Publication number
- CN104076910A CN104076910A CN201310097863.0A CN201310097863A CN104076910A CN 104076910 A CN104076910 A CN 104076910A CN 201310097863 A CN201310097863 A CN 201310097863A CN 104076910 A CN104076910 A CN 104076910A
- Authority
- CN
- China
- Prior art keywords
- distance value
- value
- softcam
- user
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2016—Rotation, translation, scaling
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Architecture (AREA)
- User Interface Of Digital Computer (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种信息处理的方法及电子设备,该方法应用于一电子设备中,该电子设备包括或连接有一显示单元,该方法包括:获取包含第一显示图像和与该第一显示图像不同的第二显示图像的第一目标对象;以第一显示参数显示该第一显示图像以及以与该第一显示参数不同的第二显示参数显示该第二显示图像,进而使使用该电子设备的第一用户感知该第一目标对象的显示位置所在平面距离该显示单元所在平面的第一距离值大于零;检测获得该第一用户所对应的用户位置信息;基于该用户位置信息确定该第一用户与该第一目标对象间的第二距离值。通过上述方式达到了对用户所感知的用户与第一目标体之间的距离的确定更加精确的技术效果。
Description
技术领域
本发明涉及三维显示技术领域,特别涉及一种信息处理的方法及电子设备。
背景技术
随着科学技术的不断发展,电子技术也得到了飞速的发展,电子产品的种类也越来越多,人们也享受到了科技发展带来的各种便利。现在人们可以通过各种类型的电子设备,享受随着科技发展带来的舒适生活。
另外,目前3D(三维)技术发展迅速,3D显示的虚拟图标也可以作为显示设别操作时的按钮。在这种场景中,虚拟图标在空间中的显示位置一般设置在人的正前方,在现有技术中,可以通过对同一位置的多个用户进行采样,进而基于这多个用户的估计,进而确定虚拟图标相对于所述位置的距离。
本申请发明人在实现本申请实施例技术方案的过程中,至少发现现有技术中存在如下技术问题:
由于在现有技术中,是通过多个用户的估测来确定用户所感知的虚拟图标相对于用户的第一距离,而用户的估测往往存在误差,故而存在着对于虚拟图标所对应的第一距离的确定不够准确的技术问题。
发明内容
本发明实施例提供一种控制信息处理的方法及电子设备,用于解决现有技术中对于虚拟图标所对应的第一距离的确定不够准确的技术问题。
一方面,本申请通过一实施例提供如下技术方案:
一种信息处理的方法,所述方法应用于一电子设备中,所述电子设备包括或连接有一显示单元,所述方法包括:
获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
检测获得所述第一用户所对应的用户位置信息;
基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值。
可选的,所述检测获得所述第一用户所对应的用户位置信息,具体为:
检测获得所述第一用户的眼睛距离所述显示单元所在平面的第三距离值,所述第三距离值即为所述用户位置信息。
可选的,所述基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值,具体包括:
确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值;
检测获得所述第一用户的瞳间距值;
基于所述第三距离值、所述第一分离度值以及所述瞳间距值确定所述第二距离值。
可选的,在所述确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值之前,所述方法还包括:
获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;
通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值;
通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值。
可选的,所述确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值,具体包括:
确定所述显示单元的实际宽度值;
基于所述实际宽度值、所述虚拟宽度值以及所述第二分离度值确定所述第一分离度值。
可选的,所述通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值,具体包括:
确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;
确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值;
确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值;
基于所述第四距离值、所述第五距离值以及所述第六距离值确定所述第二分离度值。
可选的,在基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值之后,所述方法还包括:
获得所述第一用户的第一操作;
判断所述第一操作与所述第二距离值是否满足一预定关系;
在所述第一操作与所述第二距离值满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
可选的,所述判断所述第一操作与所述第二距离值是否满足一预定关系,具体包括:
确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;
判断所述第七距离值与所述第二距离值的差值绝对值是否小于一预设距离阈值;
其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值满足所述预定关系。
另一方面,本申请通过另一实施例提供如下技术方案:
一种电子设备,所述电子设备包括或连接有一显示单元,所述电子设备包括:
第一获取模块,用于获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
显示模块,用于以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
检测模块,用于检测获得所述第一用户所对应的用户位置信息;
确定模块,用于基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值。
可选的,所述检测模块,具体用于:
检测获得所述第一用户的眼睛距离所述显示单元所在平面的第三距离值,所述第三距离值即为所述用户位置信息。
可选的,所述确定模块,具体包括:
第一确定单元,用于确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值;
检测单元,用于检测获得所述第一用户的瞳间距值;
第二确定单元,用于基于所述第三距离值、所述第一分离度值以及所述瞳间距值确定所述第二距离值。
可选的,所述电子设备还包括:
获得模块,用于在确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值之前,获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;
第二获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值;
第三获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值。
可选的,所述第一确定单元,具体包括:
第一确定子单元,用于确定所述显示单元的实际宽度值;
第二确定子单元,用于基于所述实际宽度值、所述虚拟宽度值以及所述第二分离度值确定所述第一分离度值。
可选的,所述第三获取模块,具体包括:
第三确定单元,用于确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;
第四确定单元,用于确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值;
第五确定单元,用于确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值;
第六确定单元,用于基于所述第四距离值、所述第五距离值以及所述第六距离值确定所述第二分离度值。
可选的,所述电子设备还包括:
采集模块,用于在基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值之后,获得所述第一用户的第一操作;
判断模块,用于判断所述第一操作与所述第二距离值是否满足一预定关系;
响应模块,用于在所述第一操作与所述第二距离值满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
可选的,所述判断模块,具体包括:
第七确定单元,用于确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;
判断单元,用于判断所述第七距离值与所述第二距离值的差值绝对值是否小于一预设距离阈值;
其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值满足所述预定关系。
本申请实施例中提供的一个或多个技术方案,至少具有如下技术效果或优点:
(1)由于在本申请实施例中,可以通过第一用户的用户位置信息确定所述第一用户所感知的所述第一用户与所述第一目标对象之间的第二距离值,由于所述用户位置信息为一准确数据,而非估测的数据,故而达到了对所述第二距离值的确定更加精确的技术效果。
(2)由于在本申请实施例中,在确定所述第二距离值之后,还可以获得所述第一用户的第一操作,其中,在所述第一操作与所述第二距离值满足一预定关系时,则响应所述第一操作生成所述第一操作所对应的第一控制指令,其中,由于所述第二距离值确定的更加精确,故而达到了对所述第一操作的响应更加精确、防止了错误响应的技术效果。
附图说明
图1为本申请实施例中信息处理的方法的流程图;
图2为本申请实施例信息处理的方法中瞳间距值、第三距离值、第一分离度值和第二距离值的位置关系示意图;
图3为本申请实施例信息处理的方法中第四距离值、第五距离值、第六距离值以及所述第二分离度值的位置关系示意图;
图4为本申请实施例信息处理的方法中生成第一控制指令的流程图;
图5为本申请实施例中电子设备的结构图。
具体实施方式
本发明实施例提供一种控制信息处理的方法及电子设备,用于解决现有技术中对于虚拟图标所对应的第一距离的确定不够精确的技术问题。
本申请实施例中的技术方案为解决上述的技术问题,总体思路如下:
提供一种信息处理的方法,所述方法应用于一电子设备中,所述电子设备包括或连接有一显示单元,所述方法包括:获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;检测获得所述第一用户所对应的用户位置信息;基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值。
由于在上述方案中,可以通过第一用户的用户位置信息确定所述第一用户所感知的所述第一用户与所述第一目标对象之间的第二距离值,由于所述用户位置信息为一准确数据,而非估测的数据,故而达到了对所述第二距离值的确定更加精确的技术效果。
为了更好的理解上述技术方案,下面通过附图以及具体实施例对本发明技术方案做详细的说明,应当理解本发明实施例以及实施例中的具体特征是对本发明技术方案的详细的说明,而不是对本发明技术方案的限定,在不冲突的情况下,本发明实施例以及实施例中的技术特征可以相互组合。
一方面,本申请实施例提供一种信息处理的方法,所述方法应用于一电子设备中,所述电子设备包括或连接有一显示单元,所述电子设备例如为:3D成像设备。
请参考图1,所述信息处理的方法包括如下步骤:
步骤S101:获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
步骤S102:以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
步骤S103:检测获得所述第一用户所对应的用户位置信息;
步骤S104:基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值A。
通常情况下,3D成像设备能够输出不同的两幅图像,比如:第一显示图像和第二显示图像,这两幅图像会在3D成像设备的显示单元上同时显示,其中,这两幅图像在显示时在所述显示单元上会存在第一分离度值,而由第一用户的视角看去,这两幅图像则合成第一目标对象,并且所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零,也就是所述第一用户所看到的所述第一目标对象为凸出于所述显示单元显示。故而,在步骤S101中,在获得所述第一目标对象时,就能够确定所述第一目标对象所对应的第一显示图像和第二显示图像。
其中,步骤S102中,为了使所述第一显示图像和所述第二图像所构成的所述第一目标对象能够凸出所述显示单元显示,故而需要不同的显示参数显示所述第一显示图像和所述第二显示图像,例如:将所述第一显示图像和所述第二显示图像显示于所述显示单元的不同位置。
其中,步骤S103中,可以在所述电子设备所处环境中设置一实体摄像头,比如:将所述实体摄像头设置于所述电子设备的外壳,然后通过所述实体摄像头检测所述用户位置信息,所述用户位置信息例如为:所述第一用户的眼睛距离所述电子设备的第三距离值b。
其中,步骤S104中,基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值A,具体又可以包括如下步骤:确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值D;检测获得所述第一用户的瞳间距值a;基于所述第三距离值b、所述第一分离度值D以及所述瞳间距值a确定所述第二距离值A。
如图2所示,为所述瞳间距值a、所述第三距离值b、所述第一分离度值D和所述第二距离值A的位置关系示意图,由图2可知,所述瞳间距值a、所述第三距离值b、所述第一分离度值D和所述第二距离值A分别与两个相似三角形存在对应关系,故而可以确定如下等比三角形公式:
a/D=A/(b-A)……………………………………………[1]
进而可以确定所述第二距离值A具体可以采用如下公式获得:
A=a*b/(a+D)……………………………………………[2]
在具体实施过程中,所述瞳间距值a和所述第三距离值b可以通过设置于所述3D成像设备表面的实体摄像头采集获得,也就是说只要确定出所述第一分离度值D,就可以确定所述第二距离值A。
在具体实施过程中,在确定所述第一分离度值D之前,需要执行如下步骤:
获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值k;通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值d。
具体来讲,也就是在对所述第一目标对象所在3D场景进行3D建模时,在所述3D场景中设置第一虚拟摄像头和第二虚拟摄像头,分别抓取在实际观看中第一用户的左眼和右眼所看到的图像。其中,通过所述第一虚拟摄像头和所述第二虚拟摄像头可以抓取所述3D成像设备的虚拟宽度值k,然后通过所述第一虚拟摄像头和所述第二虚拟摄像头确定所述第二分离度值d。
在具体实施过程中,所述第二分离度值d可以采用如下方式获得:
确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值y,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值β;确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值x;基于所述第四距离值y、所述第五距离值β以及所述第六距离值x确定所述第二分离度值d。
其中,所述第四距离值y、所述第五距离值β以及所述第六距离值x都可以由所述3D场景的参数信息中直接获得,由图3可知,所述第四距离值y、所述第五距离值β、所述第六距离值x以及所述第二分离度值dd之间和两个相似三角形存在对应关系,故而可以获得如下等比公式:
d/β=(x-y)/x……………………………………………[3]
进而可以确定出所述第二分离度值d的计算公式如下:
d=β*(x-y)/x……………………………………………[4]
在获得所述虚拟宽度值k、所述第二分离度值d之后,则可以通过如下方式获得所述第一分离度值D:确定所述显示单元的实际宽度值K;基于所述实际宽度值K、所述虚拟宽度值k以及所述第二分离度值d确定所述第一分离度值D。
在具体实施过程中可以通过所述3D成像设备的屏幕的参数确定所述显示单元的实际宽度值K,通过所述第一虚拟摄像头和所述第二虚拟摄像头所采集的所述显示单元的虚拟宽度值k与所述实际宽度值K之间的的比例为第一比例,所述第一虚拟摄像头和所述第二虚拟摄像头所采集的所述第二分离度值d与所述第一分离度值D之间的比例为第二比例,其中,所述第一比例与所述第二比例相同,故而可以确定如下公式:
k/K=d/D……………………………………………[5]
由此可知,具体可以采用如下公式获得所述第一分离度值D:
D=K*d/k……………………………………………[6]
将公式[4]代入上述公式[6],那么可以确定所述第一分离度值D为:
D=K*β*(x-y)/(x*k)……………………………………………[7]
将上述公式[7]代入前面的公式[2],那么可以确定所述第二距离值A可以采用如下公式获得:
A=a*b/[a+K*β*(x-y)/(x*k)]…………………………[8]
由于在上述公式[8]中,x、y、β、k都可以从3D场景的参数中获取;K可以从3D成像设备的参数中获取;a、b可以通过实体摄像头获取,故而通过上述公式即可直接获取所述第二距离值A。
在具体实施过程中,在基于步骤S104确定所述第二距离值A之后,如图4所示,还可以执行如下操作:
步骤S401:获得所述第一用户的第一操作;
步骤S402:判断所述第一操作与所述第二距离值A是否满足一预定关系;
步骤S403:在所述第一操作与所述第二距离值A满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
其中,步骤S401中,可以通过设置于所述3D成像设备表面的实体摄像头检测所述第一操作,所述第一操作例如为:虚空点击操作、虚空滑动操作等等,对于所述第一操作为何种操作,本申请实施例不作限制。
其中,步骤S402中,所述预定关系可以为任意关系,进而所述判断过程也不用,下面列举其中的两种进行介绍,当然,在具体实施过程中,不限于以下两种情况。
第一种,所述判断所述第一操作与所述第二距离值A是否满足一预定关系,具体包括:确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;判断所述第七距离值与所述第二距离值A的差值绝对值是否小于一预设距离阈值;其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值A满足所述预定关系。
在具体实施过程中,所述第一目标对象可以为一虚拟按钮,其中,用户产生所述第一操作的目的就是为了操作所述虚拟按钮,故而所述第七距离值与所述第二距离值A之间的差值绝对值应该小于一预设距离阈值,其中,在所述第一操作对应一个较大区域时,可以为所述第一操作区域中的任意点与所述第一用户之间的第七距离值与所述第二距离值A之间的差值绝对值小于所述预设距离阈值;也可以为所述第一操作区域中所有点与所述第一用户之间的第七距离值与所述第二距离值A之间差值绝对值小于所述预设距离阈值;或者所述第一操作区域中与所述第一目标对象重叠的第一操作子区域与所述第一用户之间的第七距离值与所述第二距离值A之间的差值小于所述预设距离阈值,对此,本申请实施例不作限制。
在具体实施过程中,所述第七距离值可以大于所述第二距离值A,也可以小于所述第二距离值A,故而取所述第一距离值与所述第二距离值A的差值绝对值,也就是不管所述第七距离值大于所述第二距离值A还是所述第七距离值小于所述第二距离值A,只要所述第一操作区域在所述第一用户所感知的所述第一目标对象所在平面的一预设范围之内,所述第一操作都满足所述第一预设条件。
其中,所述差值绝对值可以为任意值,作为一优选实施例,所述差值绝对值为0,当然,通常情况下,由于为悬空操作,故而所述差值绝对值并不会为绝对的0,只要与0相差不大即可。
第二种,所述判断所述第一操作与所述第二距离值A是否满足一预定关系,具体包括:确定所述第一操作所对应的第一手势;判断所述第一手势是否为与所述第二距离值A满足第二预定关系的手势。
在具体实施过程中,所述第一手势可以为任意手势,比如:为划波浪状的手势、划直线的手势等等。
其中,所述第一手势与所述第二距离值A满足所述第二预定关系也可以为多种预定关系,比如:所述第一手势中的多个点与所述第二距离值A之差大于一预设值;而所述第一手势中的其他点与所述第二距离值A之差小于所述预设值;又或者所述第一手势中的全部点与所述第二距离值A之差的绝对值都小于所述预设值等等,对于所述第二预定关系为何种预定关系,本申请实施例不作限制。
其中,步骤S403中,可以在所述3D成像设备中存储多个操作与多个控制指令之间的对应关系,在确定所述第一操作满足所述第一预设条件之后,就从这个对应关系中确定所述第一操作所对应的第一控制指令,进而执行所述第一控制指令以实现所述第一操作所对应的第一功能。
在具体实施过程中,可以在所述电子设备采集到所述第一操作之后,就存储所述第一操作,同时获取所述第二距离值A,在获取所述第二距离值A之后,再从电子设备的存储器获取所述第一操作,进而判断所述第一操作与所述第二距离值A是否满足预定关系;也可以预先存储所述第二距离值A,在采集到所述第一操作之后,直接从电子设备的存储器中调用所述第二距离值A,然后判断所述第一操作与所述第二距离值A之间是否满足预定关系,本申请实施例对此不作限制。
由以上描述可知,由于在本申请实施例中,在确定所述第二距离值之后,还可以获得所述第一用户的第一操作,其中,在所述第一操作与所述第二距离值满足一预定关系时,则响应所述第一操作生成所述第一操作所对应的第一控制指令,其中,由于所述第二距离值确定的更加精确,故而达到了对所述第一操作的响应更加精确、防止了错误响应的技术效果。
下面将通过几个具体的应用环境介绍本申请实施例所介绍的信息处理的方法,需要说明的是,本发明中的实施例只用于解释本发明,而不能用于限制本发明。一切符合本发明思想的实施例均在本发明的保护范围之内,本领域技术人员自然知道应该如何根据本发明的思想进行变形。
实施例一
在本实施例中,以所述电子设备为3D电视、所述第一用户为用户A、所述用户位置信息为用户A的眼睛与所述3D电视之间的第三距离值b为例进行介绍,其中,所述3D电视机的外壳上设置有一实体摄像头。
在T1时刻,用户A使用所述3D电视机观看3D电影,其中,所述3D电视机的显示单元上除了显示所述3D电影所对应的视频文件之外,还显示用于对所述视频文件进行控制的多个按钮,下面将以所述按钮为快进按钮为例,介绍如何检测获得所述用户A所感知的所述快进按钮相对于所述用户A的第二距离值A1。
在用户A观看3D电影同时,所述3D电视机通过设置于所述3D电视机外壳的实体摄像头检测出所述用户A与所述3D电视机的第三距离值为:b1,所述用户A的瞳间距值为:a1;并且通过所述3D电视机的参数信息读取出所述3D电视机的实际宽度值为:K1;另外,从所述3D电影的3D建模场景中确定出第六距离值为:x1,第四距离值为:y1,第五距离值为:β1。然后通过前面的公式[8]即可以确定出所述用户A所感知的所述暂停按钮相对于所述用户A的第二距离值A1如下:
A1=a1*b1/[a1+K1*β1*(x1-y1)/(x1*k1)]…………………………[9]
按照同样的方式,所述3D电视机可以用户A所感知的确定出其它按钮相对于所述用户A的距离值。然后所述3D电视机将所述用户A所感知的多个按钮的相对于所述用户A的距离值存储于所述3D电视机的存储器。
在T2时刻,用户A产生一悬空点击所述暂停按钮的暂停操作,所述3D电视机的摄像头在检测到所述暂停操作之后,确定所述暂停操作与电视机之间的距离为:A2。
然后,所述3D电视机从所述3D电视机的存储器中读取所述用户A与所述暂停按钮所对应的第二距离值为A1,进而所述3D电视机对A1和A2取差值的绝对值,进而确定出所述绝对值小于预设距离阈值,故而确定所述暂停操作满足与所述第二距离值A1之间满足预定关系,进而响应所述暂停操作,控制所述3D电影处于暂停播放状态。
在T3时刻,用户A产生一悬空点击所述播放器的关闭按钮的关闭操作,所述实体摄像头采集到所述关闭操作之后,确定所述第二操作与所述3D电视机之间的距离值为A3;然后所述3D电视机从所述3D电视机的存储器中读取所述用户A与所述关闭按钮的第二距离值为:A3,进而所述3D电视机对A3和A1作差值绝对值,并且确定出所述差值绝对值大于所述预设距离阈值,故而确定所述关闭操作与所述第二距离值A1之间不满足所述预定关系,因而不响应所述关闭操作。
实施例二
在本实施例中,以所述电子设备为3D电视机、所述第一用户为用户B、所述用户位置信息为用户A的眼睛与所述3D电视机之间的第三距离值为例进行介绍,其中,所述3D电视机所处环境中,有一与所述3D电视机存在数据连接的实体摄像头。
在T4时刻,用户B开启所述3D电视机播放3D电影,其中所述3D电影通过一播放器进行播放,所述用户B所感知的所述3D电影的视频文件和播放所述3D电影的播放器都处于凸出所述3D电视机的显示单元的显示状态。
在T5时刻,用户B产生一点击所述播放器的快进按钮的快进操作,所述实体摄像头在检测到所述快进操作之后,将所述快进操作发送至所述3D电视机,3D电视机在接收到到所述快进操作之后,控制所述实体摄像头检测获得所述第三距离值为:b2,并检测出所述用户B的瞳间距值为:a2;然后所述3D电视机从所述3D电视机的参数中读取出所述3D电视机的宽度为:K2;接着所述3D电视机从所述3D电影的3D建模场景中读取出第六距离值为:x2,第四距离值为:y2,第五距离值为:β2。然后通过前面的公式[8]即可以确定出所述用户B所感知的所述快进按钮相对于所述用户B的第二距离值A4如下:
A4=a2*b2/[a2+K2*β2*(x2-y2)/(x2*k2)]…………………………[10]
同时,所述3D电视机基于所述摄像头所检测到的所述快进操作,进而确定出所述快进操作所对应的第七距离值为:A5,然后所述3D电视机对所述第七距离值A5和所述第二距离值A4作差值绝对值,并且判断出所述差值绝对值小于一预设阈值,故而确定所述快进操作与所述第二距离值A4之间满足所述预定关系,因而响应所述快进操作,进而生成对所述3D电影进行快进的控制指令。
对应本发明实施例中一种信息处理的方法,本发明实施例还提供了一种电子设备,所述电子设备包括或连接有一显示单元,请参考图5,所述电子设备具体包括:
第一获取模块501,用于获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
显示模块502,用于以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
检测模块503,用于检测获得所述第一用户所对应的用户位置信息;
确定模块504,用于基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值A。
在具体实施过程中,所述检测模块503,具体用于:
检测获得所述第一用户的眼睛距离所述显示单元所在平面的第三距离值b,所述第三距离值b即为所述用户位置信息。
在具体实施过程中,所述确定模块504,具体包括:
第一确定单元,用于确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值D;
检测单元,用于检测获得所述第一用户的瞳间距值a;
第二确定单元,用于基于所述第三距离值b、所述第一分离度值D以及所述瞳间距值a确定所述第二距离值A。
在具体实施过程中,所述电子设备还包括:
获得模块,用于在确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值D之前,获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;
第二获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值k;
第三获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值d。
在具体实施过程中,所述第一确定单元,具体包括:
第一确定子单元,用于确定所述显示单元的实际宽度值K;
第二确定子单元,用于基于所述实际宽度值K、所述虚拟宽度值k以及所述第二分离度值d确定所述第一分离度值D。
在具体实施过程中,所述第三获取模块,具体包括:
第三确定单元,用于确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值y,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;
第四确定单元,用于确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值β;
第五确定单元,用于确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值x;
第六确定单元,用于基于所述第四距离值y、所述第五距离值β以及所述第六距离值x确定所述第二分离度值d。
在具体实施过程中,所述电子设备还包括:
采集模块,用于在基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值A之后,获得所述第一用户的第一操作;
判断模块,用于判断所述第一操作与所述第二距离值A是否满足一预定关系;
响应模块,用于在所述第一操作与所述第二距离值A满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
在具体实施过程中,所述判断模块,具体包括:
第七确定单元,用于确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;
判断单元,用于判断所述第七距离值与所述第二距离值A的差值绝对值是否小于一预设距离阈值;
其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值A满足所述预定关系。
由于上述电子设备,为实施例本申请实施例中信息处理的方法所采用的电子设备,故而基于本申请实施例所介绍的信息处理的方法,本领域所属技术人员能够了解上述电子设备的具体结构及变形,故而在此对于上述电子设备不再详细介绍,只要是实施例本申请实施例中信息处理的方法所采用的电子设备,都属于本申请所欲保护的范围。
本申请提供的一个或多个技术方案,至少具有如下技术效果或优点:
(1)由于在本申请实施例中,可以通过第一用户的用户位置信息确定所述第一用户所感知的所述第一用户与所述第一目标对象之间的第二距离值,由于所述用户位置信息为一准确数据,而非估测的数据,故而达到了对所述第二距离值的确定更加精确的技术效果。
(2)由于在本申请实施例中,在确定所述第二距离值之后,还可以获得所述第一用户的第一操作,其中,在所述第一操作与所述第二距离值满足一预定关系时,则响应所述第一操作生成所述第一操作所对应的第一控制指令,其中,由于所述第二距离值确定的更加精确,故而达到了对所述第一操作的响应更加精确的技术效果。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (16)
1.一种信息处理的方法,所述方法应用于一电子设备中,所述电子设备包括或连接有一显示单元,其特征在于,所述方法包括:
获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
检测获得所述第一用户所对应的用户位置信息;
基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值。
2.如权利要求1所述的方法,其特征在于,所述检测获得所述第一用户所对应的用户位置信息,具体为:
检测获得所述第一用户的眼睛距离所述显示单元所在平面的第三距离值,所述第三距离值即为所述用户位置信息。
3.如权利要求2所述的方法,其特征在于,所述基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值,具体包括:
确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值;
检测获得所述第一用户的瞳间距值;
基于所述第三距离值、所述第一分离度值以及所述瞳间距值确定所述第二距离值。
4.如权利要求3所述的方法,其特征在于,在所述确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值之前,所述方法还包括:
获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;
通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值;
通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值。
5.如权利要求4所述的方法,其特征在于,所述确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值,具体包括:
确定所述显示单元的实际宽度值;
基于所述实际宽度值、所述虚拟宽度值以及所述第二分离度值确定所述第一分离度值。
6.如权利要求4所述的方法,其特征在于,所述通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值,具体包括:
确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;
确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值;
确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值;
基于所述第四距离值、所述第五距离值以及所述第六距离值确定所述第二分离度值。
7.如权利要求1所述的方法,其特征在于,在基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值之后,所述方法还包括:
获得所述第一用户的第一操作;
判断所述第一操作与所述第二距离值是否满足一预定关系;
在所述第一操作与所述第二距离值满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
8.如权利要求7所述的方法,其特征在于,所述判断所述第一操作与所述第二距离值是否满足一预定关系,具体包括:
确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;
判断所述第七距离值与所述第二距离值的差值绝对值是否小于一预设距离阈值;
其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值满足所述预定关系。
9.一种电子设备,所述电子设备包括或连接有一显示单元,其特征在于,所述电子设备包括:
第一获取模块,用于获取包含第一显示图像和与所述第一显示图像不同的第二显示图像的第一目标对象;
显示模块,用于以第一显示参数显示所述第一显示图像以及以与所述第一显示参数不同的第二显示参数显示所述第二显示图像,进而使使用所述电子设备的第一用户感知所述第一目标对象的显示位置所在平面距离所述显示单元所在平面的第一距离值大于零;
检测模块,用于检测获得所述第一用户所对应的用户位置信息;
确定模块,用于基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值。
10.如权利要求9所述的电子设备,其特征在于,所述检测模块,具体用于:
检测获得所述第一用户的眼睛距离所述显示单元所在平面的第三距离值,所述第三距离值即为所述用户位置信息。
11.如权利要求10所述的电子设备,其特征在于,所述确定模块,具体包括:
第一确定单元,用于确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值;
检测单元,用于检测获得所述第一用户的瞳间距值;
第二确定单元,用于基于所述第三距离值、所述第一分离度值以及所述瞳间距值确定所述第二距离值。
12.如权利要求11所述的电子设备,其特征在于,所述电子设备还包括:
获得模块,用于在确定所述第一显示图像与所述第二显示图像在所述显示单元上的第一分离度值之前,获得第一三维模型,所述第一三维模型具体为:通过第一虚拟摄像头和第二虚拟摄像头模拟所述第一用户的眼睛观看所述第一目标图像的三维模型;
第二获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述显示单元的虚拟宽度值;
第三获取模块,用于通过所述第一虚拟摄像头和所述第二虚拟摄像头获取所述第一目标图像的第二分离度值。
13.如权利要求12所述的电子设备,其特征在于,所述第一确定单元,具体包括:
第一确定子单元,用于确定所述显示单元的实际宽度值;
第二确定子单元,用于基于所述实际宽度值、所述虚拟宽度值以及所述第二分离度值确定所述第一分离度值。
14.如权利要求12所述的电子设备,其特征在于,所述第三获取模块,具体包括:
第三确定单元,用于确定在所述第一三维模型中所述第一目标对象与第一连线之间的第四距离值,其中,所述第一连线具体为:所述第一虚拟摄像头和所述第二虚拟摄像头之间的连线;
第四确定单元,用于确定所述第一虚拟摄像头与所述第二虚拟摄像头之间的第五距离值;
第五确定单元,用于确定所述第一虚拟摄像头和所述第二虚拟摄像头的视线焦点与所述第一连线之间的第六距离值;
第六确定单元,用于基于所述第四距离值、所述第五距离值以及所述第六距离值确定所述第二分离度值。
15.如权利要求9所述的电子设备,其特征在于,所述电子设备还包括:
采集模块,用于在基于所述用户位置信息确定所述第一用户与所述第一目标对象间的第二距离值之后,获得所述第一用户的第一操作;
判断模块,用于判断所述第一操作与所述第二距离值是否满足一预定关系;
响应模块,用于在所述第一操作与所述第二距离值满足所述预定关系时,响应所述第一操作,生成与所述第一操作所对应的第一控制指令。
16.如权利要求15所述的电子设备,其特征在于,所述判断模块,具体包括:
第七确定单元,用于确定所述第一操作的第一操作区域与所述第一用户之间的第七距离值;
判断单元,用于判断所述第七距离值与所述第二距离值的差值绝对值是否小于一预设距离阈值;
其中,在所述差值绝对值小于所述预设距离阈值时,则确定所述第一操作与所述第二距离值满足所述预定关系。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310097863.0A CN104076910B (zh) | 2013-03-25 | 2013-03-25 | 一种信息处理的方法及电子设备 |
US14/215,298 US9552059B2 (en) | 2013-03-25 | 2014-03-17 | Information processing method and electronic device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310097863.0A CN104076910B (zh) | 2013-03-25 | 2013-03-25 | 一种信息处理的方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104076910A true CN104076910A (zh) | 2014-10-01 |
CN104076910B CN104076910B (zh) | 2017-11-03 |
Family
ID=51568780
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310097863.0A Active CN104076910B (zh) | 2013-03-25 | 2013-03-25 | 一种信息处理的方法及电子设备 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9552059B2 (zh) |
CN (1) | CN104076910B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104536566A (zh) * | 2014-12-22 | 2015-04-22 | 深圳市金立通信设备有限公司 | 一种页面内容的处理方法 |
CN104571858B (zh) * | 2014-12-22 | 2019-05-14 | 深圳市金立通信设备有限公司 | 一种终端 |
CN104898996B (zh) * | 2015-05-04 | 2022-04-22 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6064354A (en) * | 1998-07-01 | 2000-05-16 | Deluca; Michael Joseph | Stereoscopic user interface method and apparatus |
CN102736728A (zh) * | 2011-04-11 | 2012-10-17 | 宏碁股份有限公司 | 三维立体虚拟物体的操控方法、操控系统及处理装置 |
CN102870078A (zh) * | 2010-02-10 | 2013-01-09 | 微晶片科技德国第二公司 | 用于对三维移动空间中的手势进行非接触式检测与辨识的系统及方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110107216A1 (en) * | 2009-11-03 | 2011-05-05 | Qualcomm Incorporated | Gesture-based user interface |
US9030487B2 (en) * | 2011-08-01 | 2015-05-12 | Lg Electronics Inc. | Electronic device for displaying three-dimensional image and method of using the same |
KR101888082B1 (ko) * | 2011-09-27 | 2018-09-10 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
US9303982B1 (en) * | 2013-05-08 | 2016-04-05 | Amazon Technologies, Inc. | Determining object depth information using image data |
JP6020923B2 (ja) * | 2013-05-21 | 2016-11-02 | パナソニックIpマネジメント株式会社 | 焦点可変レンズを有するビューア、および映像表示システム |
-
2013
- 2013-03-25 CN CN201310097863.0A patent/CN104076910B/zh active Active
-
2014
- 2014-03-17 US US14/215,298 patent/US9552059B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6064354A (en) * | 1998-07-01 | 2000-05-16 | Deluca; Michael Joseph | Stereoscopic user interface method and apparatus |
CN102870078A (zh) * | 2010-02-10 | 2013-01-09 | 微晶片科技德国第二公司 | 用于对三维移动空间中的手势进行非接触式检测与辨识的系统及方法 |
CN102736728A (zh) * | 2011-04-11 | 2012-10-17 | 宏碁股份有限公司 | 三维立体虚拟物体的操控方法、操控系统及处理装置 |
Also Published As
Publication number | Publication date |
---|---|
US20140285430A1 (en) | 2014-09-25 |
US9552059B2 (en) | 2017-01-24 |
CN104076910B (zh) | 2017-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5846662B2 (ja) | 3次元で表示されるオブジェクトのユーザの選択ジェスチャに応答する方法およびシステム | |
JP4900741B2 (ja) | 画像認識装置および操作判定方法並びにプログラム | |
EP3286601B1 (en) | A method and apparatus for displaying a virtual object in three-dimensional (3d) space | |
US20120056989A1 (en) | Image recognition apparatus, operation determining method and program | |
US9086742B2 (en) | Three-dimensional display device, three-dimensional image capturing device, and pointing determination method | |
JP5734422B2 (ja) | 設備制御装置、操作受付方法及びプログラム | |
CN104040457A (zh) | 移动显示设备 | |
CN107741782B (zh) | 一种设备虚拟漫游方法和装置 | |
EP2558924B1 (en) | Apparatus, method and computer program for user input using a camera | |
CN104081307A (zh) | 图像处理装置、图像处理方法和程序 | |
KR101441882B1 (ko) | 포인터를 사용하지 않는 가상 터치 장치에서의 디스플레이 표시면 둘레의 가상 평면을 사용하여 전자기기를 제어하는 방법 | |
CN106873886B (zh) | 一种立体显示的控制方法、装置和电子设备 | |
JP2011175623A (ja) | 画像認識装置および操作判定方法並びにプログラム | |
CN102736728A (zh) | 三维立体虚拟物体的操控方法、操控系统及处理装置 | |
CN104317398A (zh) | 一种手势控制方法、穿戴式设备及电子设备 | |
JP2012247838A (ja) | 表示装置、表示制御方法及びプログラム | |
CN104699249A (zh) | 一种信息处理方法及电子设备 | |
CN109743566A (zh) | 一种用于识别vr视频格式的方法与设备 | |
US9122346B2 (en) | Methods for input-output calibration and image rendering | |
CN104076910A (zh) | 一种信息处理的方法及电子设备 | |
CN105867597B (zh) | 3d交互方法及3d显示设备 | |
EP3088991B1 (en) | Wearable device and method for enabling user interaction | |
CN108227968B (zh) | 光标控制方法和装置 | |
KR20100113251A (ko) | 디스플레이장치 및 그의 제어 방법 | |
Yousefi et al. | Interactive 3D visualization on a 4K wall-sized display |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |