CN111523629A - 一种二维码的视觉优化方法、装置、电子设备及存储介质 - Google Patents

一种二维码的视觉优化方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111523629A
CN111523629A CN202010288241.6A CN202010288241A CN111523629A CN 111523629 A CN111523629 A CN 111523629A CN 202010288241 A CN202010288241 A CN 202010288241A CN 111523629 A CN111523629 A CN 111523629A
Authority
CN
China
Prior art keywords
dimensional code
visual
background image
mask
visual difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010288241.6A
Other languages
English (en)
Other versions
CN111523629B (zh
Inventor
徐明亮
王可
卢洋
姜晓恒
吕培
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou University
Original Assignee
Zhengzhou University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou University filed Critical Zhengzhou University
Priority to CN202010288241.6A priority Critical patent/CN111523629B/zh
Publication of CN111523629A publication Critical patent/CN111523629A/zh
Application granted granted Critical
Publication of CN111523629B publication Critical patent/CN111523629B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06046Constructional details
    • G06K19/06103Constructional details the marking being embedded in a human recognizable image, e.g. a company logo with an embedded two-dimensional code

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及二维码生成技术领域,具体涉及一种二维码的视觉优化方法、装置、电子设备及存储介质。该优化方法包括以下步骤:获得背景图像的显著性区域与原始二维码的视觉差异度;将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;将所述二维码与所述背景图像融合,得到优化二维码,该优化二维码凸显出了背景图像的显著性区域,提高了视觉注意力焦点。

Description

一种二维码的视觉优化方法、装置、电子设备及存储介质
技术领域
本发明涉及二维码生成技术领域,具体涉及一种二维码的视觉优化方法、装置、电子设备及存储介质。
背景技术
传统的二维码由单调的黑白或彩色编码模块组成,缺乏视觉美感,无法与二维码表示的信息或代表的品牌建立直观的联系。为了美化二维码的视觉效果,将二维码与背景图像融合,生成带有背景图像的二维码。
申请号为201611062539.5的专利公开了一种与图像融合的艺术化二维码生成方法及装置,该方法是通过结合图像视觉显著性与高斯约旦消元法,调整二维码码字,生成二维码与图像结合的二值艺术化二维码;建立二维码模块的扫描误差模型,设置预期的二维码模块扫描误差约束,局部调整二维码模块的灰度值,与输入图像的灰度化结果融合,生成灰度艺术化二维码;建立图像亮度调整方案,调整彩色原图的像素值,使其转化为灰度图后结果与灰度艺术化二维码一致,生成彩色艺术化二维码。装置包括编码信息及图像获取模块、信息编码模块、二维码与图像融合模块和结果图像输出或显示模块。
发明人在实践中,发现上述现有技术存在以下缺陷:
上述专利最终获得了具有彩色背景图像的二维码,但是该背景图像的整体性呈现,无法突出的视觉焦点。
发明内容
为了解决上述技术问题,本发明的目的在于提供一种二维码的视觉优化方法、装置、电子设备及存储介质,所采用的技术方案具体如下:
第一方面,本发明一个实施例提供了一种二维码的视觉优化方法,该优化方法包括以下步骤:
获得背景图像的显著性区域与原始二维码的视觉差异度;
将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;
将所述二维码与所述背景图像融合,得到优化二维码。
第二方面,本发明另一个实施例提供了一种二维码的视觉优化装置,该装置包括:
视觉差异度获取模块,用于获得显著性区域内的背景图像与原始二维码的视觉差异度;
掩码处理模块,用于将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;
融合模块,用于将所述二维码与所述背景图像融合,得到优化二维码。
第三方面,本发明另一个实施例提供了一种电子设备,包括:
处理器;
用于存储处理器可执行程序的存储器;
其中,所述处理器执行程序时实现上述二维码的视觉优化方法。
第四方面,本发明另一个实施例提供了一种存储介质,该存储介质中存储有计算机可读的程序指令,所述程序指令被处理器执行时实现上述所述二维码的视觉优化方法。
本发明具有如下有益效果:
本发明实施例提供了一种二维码的视觉优化方法,通过获得显著性区域内的背景图像与原始二维码的视觉差异度;将视觉差异度作为标准惩罚项计算每种掩码的惩罚值,最后将选择的二维码与所述背景图像融合得到优化二维码,该优化二维码凸显出了背景图像的显著性区域,提高了视觉注意力焦点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1为本发明一个实施例所提供的二维码的视觉优化方法的流程图;
图2为本发明一个实施例提供的二维码的视觉优化方法的具体流程图;
图3为本发明一个实施例所提供的背景图像的示意图;
图4为提取的图3的显著性区域的示意图;
图5为本发明一个实施例提供的二维码的视觉优化装置的结构框图;
图6为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种二维码的视觉优化方法、装置、电子设备及存储介质,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构、或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
下面结合附图具体的说明本发明所提供的一种二维码的视觉优化方法、装置、电子设备及存储介质的具体方案。
请参阅图1和图2,图1示出了本发明一个实施例提供的二维码的视觉优化方法的流程图,图2示出了本发明一个实施例提供的二维码的视觉优化方法的具体流程图。该二维码的视觉优化方法包括以下步骤:
步骤S001,获得背景图像的显著性区域与原始二维码的视觉差异度。
在获得背景图像的显著性区域与原始二维码的视觉差异度之前,还包括获取背景图像显著性区域的步骤和获取原始二维码的步骤。
需要说明的是,该实施例中所称的原始二维码是未经掩码处理的原始二维码。
优选的,显著性区域的提取方法可以采用将经过预处理后的背景图像输入预训练的基于视觉注意力机制的深度神经网络,得到与背景图像等尺寸的注意力权重矩阵,该注意力权重矩阵中的元素表示对应图象位置被关注的程度,数值越大意味着越被关注。可以用[0,1]区间内的数值表示软注意力,通过设定阈值得到图像的显著性区域,也可以用0或1的二值表示应注意力,取值为1的区域为图像的显著性区域。请参阅图3和图4,图3为背景图像,图4为提取到的背景图像的显著性区域。
需要说明的是,由于显著性区域的提取算法并不是本发明的主要发明点,本发明实施例不对上述基于视觉注意力机制的深度神经网络的具体模型做出限定,只要能获得图像显著性区域的提取方法均可应用到本实施中,例如LC算法。
该视觉差异度D的计算方法为:
Figure BDA0002449358310000031
其中,(i,j)代表像素点的位置,S为提取的背景图像的显著性区域,C(i,j)表示二维码图案在(i,j)处的像素值,I(i,j)表示背景图案的在(i,j)处的像素值。
计算背景图像的显著性区域与原始二维码之间的视觉差异度的目的是为了后续生成具有相应的显著性区域的图像二维码,以提高视觉焦点。
优选的,获取原始二维码的步骤,该原始二维码的获得是根据二维码生成标准,对需要存储于二维码中的待编码信息进行编码,生成包括位置探测图形、校正图形、定位图形、原始数据码字和纠错码字等在内的原始二维码。
需要说明的是,提取背景图像显著性区域的步骤与获取原始二维码步骤之间并没有严格的先后顺序。例如,电子设备可在执行提取背景图像显著性区域的步骤之后,再执行获取原始二维码的步骤;又例如,电子设备可在执行获取原始二维码的步骤之后,再执行提取背景图像显著性区域的步骤。
步骤S002,将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码。
作为一个示例,根据QR码的生成规则,需要分别计算八种掩码的惩罚值,并选择惩罚值最小的掩码的处理后的二维码作为掩码处理的最终结果;其中,每种掩码的惩罚值是由相应掩码的四个标准惩罚项决定的。本实施例在原有的四项标准惩罚项的基础上增加了一项视觉差异度作为第五项标准惩罚项。
具体的,将视觉差异度D作为一个新的标准惩罚项纳入到标准的二维码掩码选择算法中之后,每一种掩码的惩罚值P的计算方式为:
Figure BDA0002449358310000041
其中,
Figure BDA0002449358310000042
表示二维码掩码算法中的4个标准惩罚项,γ为预设系数。γ用于调节视觉差异度的惩罚项在惩罚值P中所占的权重。
根据惩罚值的计算公式,分别计算八种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码作为掩码处理的最终结果。
步骤S003,将步骤S002中得到的二维码与所述背景图像融合,得到优化二维码。
将所选择的掩码处理后的二维码,加入格式和版本信息后得到标准二维码,将该标准二维码与背景图像融合后得到的优化二维码。
需要说明的是,背景图像与二维码的融合采用现有的融合方法,该融合方法并不是本发明的主要发明点,在此不做限定,只要能将两者进行融合的方法均可应用到本实施中。
优选的,背景图像的在提取显著性区域之间,还包括对背景图像的预处理步骤,例如,突出和美化背景主体的操作:裁剪、缩放、旋转、锐化等。
优选的,为了减少算法的复杂度,在获得显著性区域之前,将背景图像转换为灰度图,然后计算该背景图像的显著性区域的灰度图与原始二维码之间的视觉差异度。
优选的,为了更好的减少算法的复杂度,在计算视觉差异度之前,若背景图像为彩色图像,则需要将获得的背景图像的显著性区域转换为灰度图,然后计算该灰度图与原始二维码之间的视觉差异度。
综上所述,本发明实施例提供了一种二维码的视觉优化方法,通过获得显著性区域内的背景图像与原始二维码的视觉差异度;将视觉差异度作为标准惩罚项计算每种掩码的惩罚值,最后将选择的二维码与所述背景图像融合得到优化二维码,该优化二维码凸显出了背景图像的显著性区域,提高了视觉注意力焦点。
基于与上述方法实施例相同的发明构思,本发明实施例还提供了一种二维码的视觉优化装置。
请参阅图5,其示出了一种二维码的视觉优化装置的结构框图,该视觉优化装置包括视觉差异度获取模块501、掩码处理模块502和融合模块503。具体的,视觉差异度获取模块501用于获得显著性区域内的背景图像与原始二维码的视觉差异度;掩码处理模块502用于将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;融合模块503用于将所述二维码与所述背景图像融合,得到优化二维码。
优选的,该转置还包括显著性区域提取模块和原始二维码获取模块,该显著性区域提取模块用于提取背景图像的显著性区域;该原始二维码获取模块用于根据二维码生成标准,对需要存储于二维码中的待编码信息进行编码,生成包括位置探测图形、校正图形、定位图形、原始数据码字和纠错码字等在内的二维码。
优选的,该装置包括灰度转换模块用于将所述背景图像转化为灰度图。
优选的,该灰度转换模块用于将所述背景图像的显著性区域转换为灰度图。
请参阅图6,图6示出了上述实施例中所涉及的电子设备的一种可能的结构示意图。该电子设备可以包括:处理单元601、存储单元602和通信单元603。处理单元601可以设置为与存储单元602通信。存储单元602用于保存电子设备的程序代码和数据等。该通信单元603用于支持该电子设备与其他网络实体的通信,以实现数据交互等功能,如该通信模块603支持电子设备与其他智能终端的通信,以实现数据交互功能。
其中,处理单元601可以是处理器或控制器。通信模块603可以是收发器、RF电路或通信接口等。存储模块602可以是存储器。
图6仅仅是本申请实施例的一种可能的实现方式,在实际应用中,该电子设备还可以包括更多或更少的部件,这里不作限制。
需要说明的是,该电子设备可以是服务器,也可以是智能终端,该智能终端可以是计算机、平板电脑或者智能手机等。
本发明实施例还提供了一种存储介质,该存储介质中存储有计算机可读的程序指令,所述程序指令被处理器执行时实现上述任意一个实施例中所提供的二维码的视觉优化方法。例如,该计算机可读存储介质可以是只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、只读光盘(Compact Disc Read-OnlyMemory,CD-ROM)、磁带、软盘和光数据存储设备等。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置和服务器实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种二维码的视觉优化方法,其特征在于,该优化方法包括以下步骤:
获得背景图像的显著性区域与原始二维码的视觉差异度;
将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;
将所述二维码与所述背景图像融合,得到优化二维码。
2.根据权利要求1所述的一种二维码的视觉优化方法,其特征在于,所述获得背景图像的显著性区域与原始二维码的视觉差异度之前,还包括以下步骤:
将所述背景图像转化为灰度图。
3.根据权利要求1所述的一种二维码的视觉优化方法,其特征在于,所述获得背景图像的显著性区域与原始二维码的视觉差异度之前,还包括以下步骤:
将所述背景图像的显著性区域转换为灰度图。
4.根据权利要求1~3任意一项所述的一种二维码的视觉优化方法,其特征在于,所述惩罚值的计算方式为:
Figure FDA0002449358300000011
其中,
Figure FDA0002449358300000012
表示四个标准惩罚项,γ为预设系数,D为视觉差异度。
5.一种二维码的视觉优化装置,其特征在于,该装置包括:
视觉差异度获取模块,用于获得显著性区域内的背景图像与原始二维码的视觉差异度;
掩码处理模块,用于将所述视觉差异度作为标准惩罚项计算每种掩码的惩罚值,选择惩罚值最小的掩码所对应的二维码;
融合模块,用于将所述二维码与所述背景图像融合,得到优化二维码。
6.根据权利要求5所述的一种二维码的视觉优化装置,其特征在于,该装置包括:灰度转换模块,用于将所述背景图像转化为灰度图。
7.根据权利要求5所述的一种二维码的视觉优化装置,其特征在于,该装置包括:灰度转换模块,用于将所述背景图像的显著性区域转换为灰度图。
8.根据权利要求5~7任意一项所述的一种二维码的视觉优化装置,其特征在于,所述惩罚值的计算方式为:
Figure FDA0002449358300000013
其中,
Figure FDA0002449358300000021
表示四个标准惩罚项,γ为预设系数,D为视觉差异度。
9.一种电子设备,其特征在于,包括:
处理单元;
用于存储处理单元可执行程序的存储单元;
其中,所述处理单元执行程序时实现如权利要求1~4中任意一项所述的方法。
10.一种存储介质,该存储介质中存储有计算机可读的程序指令,其特征在于,所述程序指令被处理器执行时实现权利要求1~4中任意一项所述的方法。
CN202010288241.6A 2020-04-14 2020-04-14 一种二维码的视觉优化方法、装置、电子设备及存储介质 Active CN111523629B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010288241.6A CN111523629B (zh) 2020-04-14 2020-04-14 一种二维码的视觉优化方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010288241.6A CN111523629B (zh) 2020-04-14 2020-04-14 一种二维码的视觉优化方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111523629A true CN111523629A (zh) 2020-08-11
CN111523629B CN111523629B (zh) 2023-01-10

Family

ID=71902163

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010288241.6A Active CN111523629B (zh) 2020-04-14 2020-04-14 一种二维码的视觉优化方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111523629B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016122750A1 (en) * 2015-01-28 2016-08-04 Ojai Retinal Technology, Llc Subthreshold micropulse laser prophylactic treatment for chronic progressive retinal diseases
US20170076191A1 (en) * 2015-09-10 2017-03-16 Alibaba Group Holding Limited Generating and decoding two-dimensional code
CN106778995A (zh) * 2016-11-25 2017-05-31 北京矩石科技有限公司 一种与图像融合的艺术化二维码生成方法及装置
CN108229234A (zh) * 2017-12-07 2018-06-29 北京航空航天大学 一种融合数字编码的可扫描图像生成方法
CN110246141A (zh) * 2019-06-13 2019-09-17 大连海事大学 一种基于联合角点池化的复杂交通场景下车辆图像分割方法
CN110598610A (zh) * 2019-09-02 2019-12-20 北京航空航天大学 一种基于神经选择注意的目标显著性检测方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016122750A1 (en) * 2015-01-28 2016-08-04 Ojai Retinal Technology, Llc Subthreshold micropulse laser prophylactic treatment for chronic progressive retinal diseases
US20170076191A1 (en) * 2015-09-10 2017-03-16 Alibaba Group Holding Limited Generating and decoding two-dimensional code
CN106778995A (zh) * 2016-11-25 2017-05-31 北京矩石科技有限公司 一种与图像融合的艺术化二维码生成方法及装置
CN108229234A (zh) * 2017-12-07 2018-06-29 北京航空航天大学 一种融合数字编码的可扫描图像生成方法
CN110246141A (zh) * 2019-06-13 2019-09-17 大连海事大学 一种基于联合角点池化的复杂交通场景下车辆图像分割方法
CN110598610A (zh) * 2019-09-02 2019-12-20 北京航空航天大学 一种基于神经选择注意的目标显著性检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MICHAEL WEBER等: "《Direct 3D Detection of Vehicles in Monocular Images with a CNN based 3D Decoder》", 《2019 IEEE INTELLIGENT VEHICLES SYMPOSIUM(IV)》 *
徐明亮等: "呈现人脸显著性特征的二维码视觉优化", 《计算机辅助设计与图形学学报》 *

Also Published As

Publication number Publication date
CN111523629B (zh) 2023-01-10

Similar Documents

Publication Publication Date Title
CN109376830B (zh) 二维码生成方法及装置
CN110322416B (zh) 图像数据处理方法、装置以及计算机可读存储介质
US20230080693A1 (en) Image processing method, electronic device and readable storage medium
CN111190600B (zh) 基于gru注意力模型的前端代码自动生成的方法及系统
CN112330574A (zh) 人像修复方法、装置、电子设备及计算机存储介质
CN111028142B (zh) 图像处理方法、装置和存储介质
CN110070484B (zh) 图像处理、图像美化方法、装置和存储介质
CN108734653B (zh) 图像风格转换方法及装置
CN116934907A (zh) 图像生成方法、设备和存储介质
CN116012488A (zh) 风格化图像生成方法、装置、计算机设备和存储介质
CN117576264B (zh) 图像生成方法、装置、设备及介质
CN113781164B (zh) 虚拟试衣模型训练方法、虚拟试衣方法和相关装置
CN112836625A (zh) 人脸活体检测方法、装置、电子设备
CN116452706A (zh) 演示文稿的图像生成方法及装置
CN117292020B (zh) 图像生成方法、装置、电子设备及存储介质
CN112348739B (zh) 图像处理方法、装置、设备及存储介质
CN111523629B (zh) 一种二维码的视觉优化方法、装置、电子设备及存储介质
CN116386105A (zh) 人脸表情识别方法、电子设备及存储介质
CN116363561A (zh) 一种时序动作定位方法、装置、设备及存储介质
CN115311152A (zh) 图像处理方法、装置、电子设备以及存储介质
CN114092320A (zh) 图像转换方法、装置、电子设备以及存储介质
CN113052043A (zh) 一种降低误检率的手部检测方法及装置
CN118135062B (zh) 一种图像编辑方法、装置、设备及存储介质
CN118333910B (zh) 一种人脸图像修复方法、系统、装置、介质
Jain et al. Styled-QReal: A real-time technique for QR code stylisation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant