CN109597204A - 一种基于平面镜反射获取用户光学图像信息的方法及系统 - Google Patents

一种基于平面镜反射获取用户光学图像信息的方法及系统 Download PDF

Info

Publication number
CN109597204A
CN109597204A CN201811574708.2A CN201811574708A CN109597204A CN 109597204 A CN109597204 A CN 109597204A CN 201811574708 A CN201811574708 A CN 201811574708A CN 109597204 A CN109597204 A CN 109597204A
Authority
CN
China
Prior art keywords
plane mirror
user
image information
optical
optical image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811574708.2A
Other languages
English (en)
Inventor
梁枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201811574708.2A priority Critical patent/CN109597204A/zh
Publication of CN109597204A publication Critical patent/CN109597204A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Optical Communication System (AREA)

Abstract

本发明公开了一种基于平面镜反射获取用户光学图像信息的方法及系统,方法包括:平面镜获取经用户本身反射过来的光束;光束被平面镜反射,射向用户佩戴的AR眼镜;用户佩戴的AR眼镜中的光学传感器接收平面镜反射的光束,得到用户的光学图像信息;将所述光学图像信息存储并输出。本发明通过使用AR眼镜的中光学传感器发出测量光束并基于平面镜反射原理,实现对平面镜中用户的光学图像信息的获取,并将获取的光学图像信息存储并输出,以使该AR眼镜实现视频通信,相对于传统的手持手机进行视频通话,本发明的操作简单,给用户的使用提供了方便。

Description

一种基于平面镜反射获取用户光学图像信息的方法及系统
技术领域
本发明涉及通信技术领域,具体涉及一种基于平面镜反射获取用户光学图像信息的方法及系统。
背景技术
随着信息技术的高速发展,现有的很多智能终端均可以实现用户图像的获取,进而实现视频通话,例如现有的手机就可以实现视频通话。
但是,现有的智能终端在对用户图像获取以及实现视频通话的操作极其不便。例如,现实生活中,用户常用的是利用手机的前置摄像头进行用户图像获取以及视频通话,用户在具体操作的时候需要将手机立起或者手持手机,以使手机的前置摄像头正对用户,进而采集到用户的图像信息,操作比较麻烦。
因此,现有技术还有待于改进和发展。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供一种基于平面镜反射获取用户光学图像信息的方法及系统,旨在解决现有技术中的智能终端在进行用户图像获取以及视频通话的操作不便的问题。
本发明解决技术问题所采用的技术方案如下:
一种基于平面镜反射获取用户光学图像信息的方法,其中,所述方法包括:
平面镜获取经用户本身反射过来的光束;
光束被平面镜反射,射向用户佩戴的AR眼镜;
用户佩戴的AR眼镜中的光学传感器接收平面镜反射的光束,得到用户的光学图像信息;
将所述光学图像信息存储并输出。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,所述光学传感器与用户的眼睛同向。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,所述平面镜获取经用户本身反射过来的光束步骤,具体包括:
利用环境光充当光源,环境光打在用户身上后经用户本身反射,并向预设的平面镜射去;
或者,所述光学传感器自身发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,并经用户本身反射,再次向预设的平面镜射去。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,当利用环境光充当光源时,所述AR眼镜中的光学传感器为普通的光学摄像头,且光束仅需经平面镜一次反射后就被光学传感器接收。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,当所述光学传感器自身发射出激光光束时,所述激光光束需要经平面镜两次反射后,再被所述光学传感器接收。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,当所述光学传感器自身发射出激光光束时,所述AR眼镜中的光学传感器为光学建模传感器,所述光学建模传感器采用TOF 3D摄像头,包括用于发射激光的TOF发射器以及用于接收激光的TOF接收器。
所述的基于平面镜反射获取用户光学图像信息的方法,其中,所述将所述光学图像信息存储并输出的步骤,具体包括:
光学传感器将所述光学图像信息存储,并将所述光学图像信息发送至与AR眼镜进行通讯连接的终端设备,实现视频通信。
一种基于平面镜反射获取用户光学图像信息的系统,其中,所述系统包括:用户佩戴的AR眼镜以及预设的平面镜,所述平面镜用于对光束进行反射;
所述AR眼镜包括:
接收模块,用于接收经平面镜反射的光束;
信息获取模块,用于从所述光束中获取光学图像信息;
存储与输出模块,用于将光学图像信息存储并发送至与AR眼镜进行通讯连接的终端设备。
所述的基于平面镜反射获取用户光学图像信息的系统,其中,所述用户佩戴的AR眼镜中的光学传感器为普通光学摄像头;当光学传感器为普通光学摄像头时,利用环境光充当光源,环境光打在用户身上后经用户本身反射,并向预设的平面镜射去。
所述的基于平面镜反射获取用户光学图像信息的系统,其中,所述用户佩戴的AR眼镜中的光学传感器为光学建模传感器,所述光学建模传感器自身发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,并经用户本身反射,再次向预设的平面镜射去。
本发明的有益效果:本发明通过使用AR眼镜的中光学传感器发出测量光束并基于平面镜反射原理,实现对平面镜中用户的光学图像信息的获取,并将获取的光学图像信息存储并输出,以使该AR眼镜实现视频通信,相对于传统的手持手机进行视频通话,本发明的操作简单,给用户的使用提供了方便。
附图说明
图1是本发明的基于平面镜反射获取用户光学图像信息的方法的较佳实施例的流程图。
图2是本发明的基于平面镜反射获取用户光学图像信息的方法中光学传感器利用环境光充当光源时的光学原理图。
图3是本发明的基于平面镜反射获取用户光学图像信息的方法中光学传感器自身发出激光时的光学原理图。
图4是本发明的基于平面镜反射获取用户光学图像信息的系统中AR眼镜的原理框图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚、明确,以下参照附图并举实施例对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本实施例提供一种基于平面镜反射获取用户光学图像信息的方法,具体如图1中所示,在本实施例中,AR眼镜是通过接收外设的平面镜反射来的光束,并从光束中获取光学图像信息,从而使的AR眼镜具备获取用户光学图像信息的功能。
具体地,本实施例的基于平面镜反射获取用户光学图像信息的方法包括以下步骤:
步骤S100、平面镜获取经用户本身反射过来的光束;
步骤S200、光束被平面镜反射,射向用户佩戴的AR眼镜;
步骤S300、用户佩戴的AR眼镜中的光学传感器接收平面镜反射的光束,得到用户的光学图像信息;
步骤S400、将所述光学图像信息存储并输出。
具体实施时,在本实施例中是需要借助外设平面镜来实现对测量光束的反射。优选地,本实施例中用户是通过佩戴AR眼镜来实现对整个光学图像获取过程的。由于AR眼镜中是存在光学传感器的,该光学传感器是与用户的眼睛同向,继而借助外设平面镜就可以接收到由平面镜反射过来的光束。相对于传统的手持终端来进行图像获取以及视频通话的方法中,本实施例无需手持AR眼镜,而仅仅只需将AR眼镜佩戴,并通过AR眼镜接收反射回的光束来对实现对光学图像信息的获取,操作十分方便。
进一步地,本实施例中光学传感器可以使用普通的光学摄像头也可以使用光学建模传感器,例如使用具有TOF(Time of Flight飞行时间) 3D摄像头。具体地,当光学传感器为普通的光学摄像头时,其具体的光路原理图如图2中所示。本实施例中利用环境光充当光源,当外界环境光照射在用户身上,被用户本身反射,并向外设的平面镜射去,此时的光束是包括用户的光学图像信息的,当光束到达平面镜后,再由平面镜反射,反射后的光束进入AR眼镜的光学传感器中,得到用户的光学图像信息,并进行存储与输出。由此可见,当光学传感器为普通的光学摄像头时,光束只需经过平面镜的一次反射就可以被光学传感器接收。
当光学传感器为光学建模传感器时,本实施例中的光学建模传感器采用TOF 3D摄像头为例进行说明,由于TOF 3D摄像头不能利用环境光,因此其自身发出激光光束,具体的光路原理图如图3中所示。TOF 3D摄像头中包括发射激光的TOF发射器以及用于接收激光的TOF接收器。在本实施例中,TOF 3D摄像头中的TOF 3D发射器发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,然后光束被用户本身反射,再次向预设的平面镜射去,光束到达平面镜后被平面镜反射,然后被TOF接收器接收,从而得到用户的光学图像信息。由此可见,在本实施例中,光束需要被平面镜反射两次才能被光学传感器接收。
进一步地,当光学传感器接收到光束后,从光束中提取用户光学图像信息,具包括各种光学参数,并将用户光学图像信息进行存储。较佳地,本实施例中还可以将所述光学图像信息发送至与AR眼镜进行通讯连接的终端设备,这样就可以实现视频通信。例如,当本实施例的AR眼镜A与另一个AR眼镜B进行通讯连接,当用户佩戴AR眼镜A后,并借助外设平面镜来对光束进行反射,就可以使AR眼镜A接收到用户自身的光学图像信息,并将光学图像信息发送至AR眼镜B实现视频通话,同样地AR眼镜B也可以通过同样地方式来将其获取的光学图像信息发送给AR眼镜A。
由于光学传感器可以为普通光学摄像头也可以为光学建模传感器,因此在进行视频通话的效果也是不一样的。当光学传感器为普通光学摄像头时,此时,该普通光学摄像头就相当于用户的眼睛,平面镜中呈现着用户的平面图像,环境光打在用户身上并被用户反射后,经过平面镜反射后进入该普通光学摄像头,因此视频通话所呈现的是平面图像。而当光学传感器为光学建模传感器时,可以实现3D视频通话。具体地,结合图3中的光路原理图对TOF 3D摄像头获取3D图像信息的原理进行说明。用户与平面镜的距离,其中,为光束被平面镜反射与被光学传感器接收的时间差,c为光速,优选地d可用几何学矫正,以减少误差。当光学建模传感器发出的激光光束经过平面镜反射后打在用户身上后,用户身上的某一点与平面镜的距离为,其中为激光光束被光学建模传感器发出以及接收的时间差,通过发射出多束激光光束,计算用户身上某一点与平面镜的距离即可得到一个所有点的集合,该集合保存着用户身体的3D信息,这样就得到了用户的3D光学图像信息。为了实现更加精确的图像获取,本实施例中可以利用几何学与统计学对所有点的集合进行综合分析。进一步地,当获取到3D光学图像信息后,光学建模传感器对用户的3D光学图像信息进行图像建模,并发送至与该AR眼镜通讯连接的智能终端中,即可实现3D视频通话。
较佳地,本实施例还可以将普通光学摄像头所获取的用户平面图像信息进行立体建模,从而创建出用户的立体图像,该立体图像可以保存,用户可以对该立体图像进行编辑,例如化妆、装饰等,从而创建出用户自己的立体人物形象。更进一步地,本实施例中的光学建模传感器在进行建模时,可以利用平面镜反射原理同时对用户的前面与后面同时进行建模,通过平面镜反射(设置多个平面镜),使得可以同时获取用户前面与后面的3D图像信息,进而进行前面与后面同时进行建模,缩短建模时间。
本发明的应用场景广泛,例如可以应用在视频会议,当单人视频会议时(即普通的单人视频通话),用户需要面对平面镜。而当进行多人视频会议时,无需设置平面镜,只需参加会议的人相对而坐就可以从对方的光学传感器中得到自己的光学图像信息。
本发明的应用除了上述示例的以外,还包括其他需要获取用户自身样貌的场景,比如在AR游戏中用户需要自身样貌创建游戏角色或者用户利用AR眼镜进行自拍等,都是可以基于本发明的技术方案实现的。
基于上述实施例,本发明还提供一种,基于平面镜反射获取用户光学图像信息的系统,该系统包括:用户佩戴的AR眼镜以及预设的平面镜,所述平面镜用于对光束进行反射。具体地,如图4中所示,该AR眼镜包括:接收模块410,用于接收经平面镜反射的光束;信息获取模块420,用于从所述光束中获取光学图像信息;存储与输出模块430,用于将光学图像信息存储并发送至与AR眼镜进行通讯连接的终端设备。
优选地,本实施例中的AR眼镜中的光学传感器为普通光学摄像头;当光学传感器为普通光学摄像头时,利用环境光充当光源,环境光打在用户身上后经用户本身反射,并向预设的平面镜射去。所述AR眼镜中的光学传感器还可以为光学建模传感器,所述光学建模传感器自身发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,并经用户本身反射,再次向照射在用户身上的光束被用户本身反射,射向预设的平面镜射去。具体的原理参照上述方法实施例的描述。
综上所述,本发明提供了一种基于平面镜反射获取用户光学图像信息的方法及系统,方法包括:平面镜获取经用户本身反射过来的光束;光束被平面镜反射,射向用户佩戴的AR眼镜;用户佩戴的AR眼镜中的光学传感器接收平面镜反射的光束,得到用户的光学图像信息;将所述光学图像信息存储并输出。本发明通过使用AR眼镜的中光学传感器发出测量光束并基于平面镜反射原理,实现对平面镜中用户的光学图像信息的获取,并将获取的光学图像信息存储并输出,以使该AR眼镜实现视频通信,相对于传统的手持手机进行视频通话,本发明的操作简单,给用户的使用提供了方便。
应当理解的是,本发明的应用不限于上述的举例,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种基于平面镜反射获取用户光学图像信息的方法,其特征在于,所述方法包括:
平面镜获取经用户本身反射过来的光束;
光束被平面镜反射,射向用户佩戴的AR眼镜;
用户佩戴的AR眼镜中的光学传感器接收平面镜反射的光束,得到用户的光学图像信息;
将所述光学图像信息存储并输出。
2.根据权利要求1所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,所述光学传感器与用户的眼睛同向。
3.根据权利要求1所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,所述平面镜获取经用户本身反射过来的光束的步骤,具体包括:
利用环境光充当光源,环境光打在用户身上后经用户本身反射,并向预设的平面镜射去;
或者,所述光学传感器自身发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,并经用户本身反射,再次向预设的平面镜射去。
4.根据权利要求3所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,当利用环境光充当光源时,所述AR眼镜中的光学传感器为普通的光学摄像头,且光束仅需经平面镜一次反射后就被光学传感器接收。
5.根据权利要求3所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,当所述光学传感器自身发射出激光光束时,所述激光光束需要经平面镜两次反射后,再被所述光学传感器接收。
6.根据权利要求5所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,当所述光学传感器自身发射出激光光束时,所述AR眼镜中的光学传感器为光学建模传感器,所述光学建模传感器采用TOF 3D摄像头,包括用于发射激光的TOF发射器以及用于接收激光的TOF接收器。
7.根据权利要求1所述的基于平面镜反射获取用户光学图像信息的方法,其特征在于,所述将所述光学图像信息存储并输出的步骤,具体包括:
光学传感器将所述光学图像信息存储,并将所述光学图像信息发送至与AR眼镜进行通讯连接的终端设备,实现视频通信。
8.一种基于平面镜反射获取用户光学图像信息的系统,其特征在于,所述系统包括:用户佩戴的AR眼镜以及预设的平面镜,所述平面镜用于对光束进行反射;
所述AR眼镜包括:
接收模块,用于接收经平面镜反射的光束;
信息获取模块,用于从所述光束中获取光学图像信息;
存储与输出模块,用于将光学图像信息存储并发送至与AR眼镜进行通讯连接的终端设备。
9.根据权利要求8所述的基于平面镜反射获取用户光学图像信息的系统,其特征在于,所述用户佩戴的AR眼镜中的光学传感器为普通光学摄像头;当光学传感器为普通光学摄像头时,利用环境光充当光源,环境光打在用户身上后经用户本身反射,并向预设的平面镜射去。
10.根据权利要求8所述的基于平面镜反射获取用户光学图像信息的系统,其特征在于,所述用户佩戴的AR眼镜中的光学传感器为光学建模传感器,所述光学建模传感器自身发射出激光光束,并向预设的平面镜发射,所述激光光束被预设的平面镜反射后,打在用户身上,并经用户本身反射,再次向预设的平面镜射去。
CN201811574708.2A 2018-12-21 2018-12-21 一种基于平面镜反射获取用户光学图像信息的方法及系统 Pending CN109597204A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811574708.2A CN109597204A (zh) 2018-12-21 2018-12-21 一种基于平面镜反射获取用户光学图像信息的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811574708.2A CN109597204A (zh) 2018-12-21 2018-12-21 一种基于平面镜反射获取用户光学图像信息的方法及系统

Publications (1)

Publication Number Publication Date
CN109597204A true CN109597204A (zh) 2019-04-09

Family

ID=65964282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811574708.2A Pending CN109597204A (zh) 2018-12-21 2018-12-21 一种基于平面镜反射获取用户光学图像信息的方法及系统

Country Status (1)

Country Link
CN (1) CN109597204A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104269079A (zh) * 2014-09-30 2015-01-07 张启熙 基于镜面反射和增强现实技术的移动终端幼教系统及方法
CN105556508A (zh) * 2013-08-04 2016-05-04 艾斯适配有限公司 虚拟镜子的装置、系统和方法
CN105874785A (zh) * 2013-11-04 2016-08-17 At&T知识产权部有限合伙公司 用于利用可穿戴显示设备实现镜子视频聊天的系统和方法
CN107274725A (zh) * 2017-05-26 2017-10-20 华中师范大学 一种基于镜面反射的移动增强现实型卡片识别方法
CN207366834U (zh) * 2017-10-31 2018-05-15 深圳增强现实技术有限公司 智能ar眼镜
EP3382505A1 (en) * 2017-03-29 2018-10-03 Vestel Elektronik Sanayi ve Ticaret A.S. Improved method and system for vr interaction

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105556508A (zh) * 2013-08-04 2016-05-04 艾斯适配有限公司 虚拟镜子的装置、系统和方法
CN105874785A (zh) * 2013-11-04 2016-08-17 At&T知识产权部有限合伙公司 用于利用可穿戴显示设备实现镜子视频聊天的系统和方法
CN104269079A (zh) * 2014-09-30 2015-01-07 张启熙 基于镜面反射和增强现实技术的移动终端幼教系统及方法
EP3382505A1 (en) * 2017-03-29 2018-10-03 Vestel Elektronik Sanayi ve Ticaret A.S. Improved method and system for vr interaction
CN107274725A (zh) * 2017-05-26 2017-10-20 华中师范大学 一种基于镜面反射的移动增强现实型卡片识别方法
CN207366834U (zh) * 2017-10-31 2018-05-15 深圳增强现实技术有限公司 智能ar眼镜

Similar Documents

Publication Publication Date Title
EP3872658B1 (en) Face recognition method and electronic device
CN105306082B (zh) 一种眼镜式通信装置、系统及方法
CN1934874B (zh) 用于个人电子装置的三维获取和显像系统
EP2984541B1 (en) Near-plane segmentation using pulsed light source
WO2022170863A1 (zh) 超宽带定位方法及系统
CN107623817B (zh) 视频背景处理方法、装置和移动终端
CN208724035U (zh) 一种3d深度摄像头组件及带有该组件的装置
US10916025B2 (en) Systems and methods for forming models of three-dimensional objects
CN106415444A (zh) 注视滑扫选择
CN109190484A (zh) 图像处理方法、装置和图像处理设备
CN109862275A (zh) 电子设备和移动平台
CN106302132A (zh) 一种基于增强现实的3d即时通讯系统与方法
CN107219517A (zh) 基于led可见光通信的手机安卓相机定位系统及其方法
CN109104583A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
JP7025539B2 (ja) カメラ装置
CN110383289A (zh) 人脸识别的装置、方法和电子设备
CN111083453A (zh) 一种投影装置、方法及计算机可读存储介质
CN206378680U (zh) 基于结构光多模块360度空间扫描和定位的3d相机
CN107864372A (zh) 立体拍照方法、装置及终端
CN109597204A (zh) 一种基于平面镜反射获取用户光学图像信息的方法及系统
KR101718090B1 (ko) 피규어 제조 시스템 및 이를 이용한 방법
CN109660731B (zh) 电子设备和移动平台
CN109842791A (zh) 一种图像处理方法及装置
WO2022183906A1 (zh) 成像方法、装置、设备及存储介质
CN107220986A (zh) 一种基于智能终端的图像抠图方法及抠图系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190409

RJ01 Rejection of invention patent application after publication