CN101308571A - 一种利用主动网格与人脸识别结合生成新人脸的方法 - Google Patents
一种利用主动网格与人脸识别结合生成新人脸的方法 Download PDFInfo
- Publication number
- CN101308571A CN101308571A CNA200710040666XA CN200710040666A CN101308571A CN 101308571 A CN101308571 A CN 101308571A CN A200710040666X A CNA200710040666X A CN A200710040666XA CN 200710040666 A CN200710040666 A CN 200710040666A CN 101308571 A CN101308571 A CN 101308571A
- Authority
- CN
- China
- Prior art keywords
- face
- human face
- people
- recognition
- active mesh
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Collating Specific Patterns (AREA)
Abstract
本发明公开了一种利用主动网格与人脸识别结合生成新人脸的方法,包括如下步骤:建立人脸图像数据库;以人脸的主动网格为基础,获取输入人脸照片中的特征点;在人脸图像数据库中检索,以获取相似人脸;采用无缝拼接技术进行纹理映射,获得新的人脸照片。本发明的变脸技术是以生物特征为基础,完全自动化实现了人像的表情变换、年龄变换、角色变换等,可广泛应用于电影制作中的特技,互联网上的照片合成。它保留了人像关键的生物特征,以便于身份的直观辨认。同时借助计算机处理图像,获得给定条件下的视觉效果,最终使处理过的人脸图像照片,具有熟悉的特征和预期的艺术效果。具有计算复杂度低、方法直观明晰、效果逼真等特点。
Description
技术领域
本发明涉及一种人脸识别和图像处理技术,具体地说,涉及一种利用主动网格与人脸识别结合生成新人脸的方法。
背景技术
随着图像处理技术的发展,人脸图像也成为一门新兴的研究课题。一张人脸图像变到另一张有意义的图像,由于具有广泛的应用前景而备受人们的关注。
例如,在侦破刑事案件过程中,案犯经常会通过乔装打扮来躲避警方的注意,而当一个犯罪嫌疑人藏匿多年,再经过装扮,警方就更难对其进行辨认。如果能够建立一个人脸识别的数据库,将案犯人脸图像根据年龄匹配变换到多年后的样子,显然对刑事侦查有很大的帮助。同样,人脸变换技术还可用于人脸识别、人脸预测、数字娱乐等场合。
现在的人脸变换,基本是以美工人员通过软件手工调整得到,其最终效果取决于美工人员的技术和经验,难以高效率、大批量的处理,故不能得到广泛的应用。
发明内容
本发明要解决的技术问题是提供一种利用主动网格与人脸识别结合生成新人脸的方法,对于给定的人脸图像,可自动生成与照片相似的多年龄序列照片以及具有特定脸部特征的照片,且处理效率高。
为了达到上述目的,本发明的技术方案如下:
一种利用主动网格与人脸识别结合生成新人脸的方法,包括如下步骤:建立人脸图像数据库;以人脸的主动网格为基础,获取输入人脸照片中的特征点;在人脸图像数据库中检索,以获取相似人脸;采用无缝拼接技术进行纹理映射,获得新的人脸照片。
本发明的变脸技术是以生物特征为基础,完全自动化实现了人像的表情变换、年龄变换、角色变换等,可广泛应用于电影制作中的特技,互联网上的照片合成。它保留了人像关键的生物特征,以便于身份的直观辨认。同时借助计算机处理图像,获得给定条件下的视觉效果,最终使处理过的人脸图像照片,具有熟悉的特征和预期的艺术效果。具有计算复杂度低、方法直观明晰、效果逼真等特点。
采用人机交互模式,通过ASM和弹性图匹配的方法找到精确的人脸的主动网格。
以MPEG-4所定义的人脸特征点标准为模板,通过ASM算法自动定位出人脸的特征点,在此基础上结合局部搜索和活动外观模型,调整ASM定位出的人脸特征点的结果。
在人脸图像数据库中的检索通过SVM,k-NN人脸识别模块进行。
以人脸定位模块获得的特征点分布为基础,基于Hausdorff距离按照权重投票的方式提取人脸形状参数用于和人脸数据库中的数据进行比对,来获取相似人脸。
特征点涵盖嘴、眼、眉、鼻、脸形五部分。
根据嘴、眼、眉、鼻、脸形五部分的特征点集,权重按照脸型0.3,眼睛0.2,嘴巴0.2,鼻子0.2,眉毛0.1来计算输入人脸照片与数据库照片中的人脸特征点集加权距离,人脸特征点集加权距离做为人脸相似度的比对依据。
所述无缝拼接技术采用图像梯度域编辑方法。与直接拷贝源图像的像素值不同,我们拷贝图像的梯度信息,即图像像素的变化信息,这将导致较自然的结果。
附图说明
图1是本发明的利用主动网格与人脸识别结合生成新人脸的方法的流程图;
图2显示了人脸特征自动定位的效果,图中人脸上的黑点为特征点;
图3显示了本发明的相似性图像检索的界面;
图4a至图4c显示了人脸图像变换的过程,图4a和图4b中的是源图像,图4c中的是图4a和图4b拼合图像。
图5a和图5b显示了采用图像梯度域编辑方法进行无缝拼接的过程。
具体实施方式
下面根据图1至图5b,给出本发明一个较好实施例,并予以详细描述,使能更好地理解本发明的功能、特点。
图1显示了本发明的生成新人脸的方法的流程。如图所示,本发明的人脸合成系统包括了照片输入模块、人脸定位模块、人脸形状参数提取模块、数据库检索模块、五官无缝拼接人脸合成模块五个模块。
照片输入模块可采用视频实时采集和打开图像文件两种方式实现。人脸定位模块采用人脸主动网格获取人脸照片中的特征点分布。人脸形状参数提取模块以人脸定位模块获得的特征点分布为基础,基于Hausdorff距离按照权重投票的方式提取人脸形状参数用于和人脸数据库中的数据进行比对。数据库检索模块以人脸形状参数提取模块提取出来的参数为基础,运用现代模式识别的分类方法SVM,k-NN从建立的大规模人脸数据库中发现相关人脸。五官无缝拼接人脸合成模块采用图像梯度域编辑方法,将用户照片五官与待合成的人脸五官进行替换和纹理合成,从而获得明星脸或者不同年龄脸的人脸合成效果。
本发明基于图像的形状和纹理分析,结合局部搜索和活动外观模型,实现对输入的照片自动检测出人脸,并以MPEG-4标准对输入的人脸照片的网格点实现主动网格点(特征点)的精确定位,所定位的特征点可描述对人脸的形状以及五官的特征,如图2所示。
1)采集的不同年龄段的人脸照片库,经过美工人员的横向年龄段扩展,覆盖所需要的各年龄段的各种脸型以及五官的形状,可充分保证最终获取的照片与输入照片的相似度,从而可以保证系统运行达到理想效果。
2)采用人脸识别的方法,从人脸特征库中进行相似性检索,发现相关人脸。
在人脸定位的基础上,以自己定义的人脸相似度参数为标准,加上人脸年龄权值,从人脸特征库中进行对应年龄段的相似性检索,从而获得输入人脸的相似脸形及相似五官。图3给出了基于相似性进行图像检索的例子。
3)将检索得到的相似五官拼接到人脸上,同时对图像添加纹理细节,以增强真实感。采用无缝拼接方法获得人脸的纹理图像,将纹理映射到输入到2)中获取的相关人脸,得出输入人脸的各年龄段人脸序列图。
根据人脸自动定位得到的特征点,计算待拼接五官的有效区域,利用我们的五官克隆技术(采用图像梯度域编辑方法),将不同部分人脸拼接后,可以达到逼真的效果。图像梯度域编辑处理流程为:首先,在源图上选中一个区域,如图5a中选中的区域,计算该区域的梯度信息,我们定义为梯度场V;然后,为了将图5a中选中的区域里内容拼接到图5b中选择的区域里,使合成后图5b中选中的区域中的梯度信息与梯度场V相同。以图5b区域的边界的像素为基准,从图5b的边界开始,其区域内的新的像素值由该像素左边的像素值和与该像素位置对应的梯度场V的值相加得到。
图4a至图4b给出了人脸五官克隆的过程。其中图4a和图4b中的是源图像,图4c中的是将图4a中的眼、鼻部分拷贝到图4b后的图像。
本发明的方法主要应用在人脸年龄变换、明星相似脸制作、父母照片预测子女脸等方面。下面分别对人脸年龄变换、明星相似脸制作、父母照片预测子女脸三种具体应用做出说明。
实例一:人脸年龄变换
在人脸年龄变换系统中,用户输入照片,以MPEG-4所定义的人脸特征点标准为模板,采用人机交互模式,通过ASM和弹性图匹配的方法找到精确的人脸的主动网格。相对于局部人脸特征点定位方法,活动形状模型(ActiveShape Models,ASM)方法可以同时定位很多人脸特征点,速度快、精度高。但是ASM方法对模型的初始位置非常敏感,如果初始模型中特征点位置靠近实际特征点位置,ASM方法将会非常快速且准确地找到所有特征点,但如果初始位置远离实际特征点位置,ASM方法通常可能给出错误的定位而无法用于识别。因此,在ASM算法基础上,还结合局部搜索和活动外观模型,调整ASM定位出的人脸特征点的结果,从而得到如图2所示的精确的人脸特征点,所定位的特征点可描述对人脸的形状以及五官的特征。根据嘴、眼、眉、鼻、脸形五部分的特征点集,权重按照脸型0.3,眼睛0.2,嘴巴0.2,鼻子0.2,眉毛0.1来计算输入照片与数据库照片中的人脸特征点集加权距离,人脸特征点集加权距离做为人脸相似度的比对依据,从不同年龄段人脸数据库中选取最为相似的人脸,即人脸特征点集加权距离最小的人脸。利用系统中的无缝拼接技术将数据库中的相似人脸做五官替换,从而获得不同年龄段的人脸变换效果,可用于娱乐或刑侦中。
实例二:明星相似脸制作
在明星相似脸制作系统中,用户可输入自己的照片以及想进行变换的明星照片,与人脸年龄变换系统特征点定位方法相同,系统自动定位出两张照片的特征点。对人脸库中的嘴、眼、眉、鼻、脸形五部分的特征点集做统计,获得人脸这五部分的平均特征,计算明星脸与平均点集的距离,距离最大的部分也就最能反映出明星脸的最明显特征,将此部分利用系统中的无缝拼接技术替换到用户照片中,从而获得具有明星特征的人脸照片,达到娱乐的效果。
实例三:父母照片预测子女脸
在预测子女脸系统中,用户可输入一男一女两张照片,与人脸年龄变换系统特征点定位方法相同,系统自动定位出两张照片的特征点。如人脸年龄变换系统中的搜索方法,可选择女性照片或男性照片在小孩数据库中搜索,得到最相似的小孩。按照明星相似脸制作系统中统计明显特征的方法,将男性和女性照片中最明显的特征部分与小孩照片做将无缝拼接合成,从而获得即有爸爸特征又有妈妈特征的小孩照片,达到娱乐的效果。
本发明实现了一种利用主动网格与人脸识别结合生成新人脸的方法,给定一张人脸照片,可自动生成与照片相似的多年龄序列照片以及与明星相似的照片。在此方法的基础上,本发明实现了一种利用主动网格与人脸识别结合生成新人脸的系统,本系统应用在人脸年龄变换、明星相似脸制作方面的应用。
以上所述的,仅为本发明的较佳实施例,并非用以限定本发明的范围,即凡是依据本发明申请的权利要求书及说明书内容所作的简单、等效变化与修饰,皆落入本发明专利的权利要求保护范围。
Claims (8)
1、一种利用主动网格与人脸识别结合生成新人脸的方法,包括如下步骤:
建立人脸图像数据库;
以人脸的主动网格为基础,获取输入人脸照片中的特征点;
在人脸图像数据库中检索,以获取相似人脸;
采用无缝拼接技术进行纹理映射,获得新的人脸照片。
2、如权利要求1所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,采用人机交互模式,通过ASM和弹性图匹配的方法找到精确的人脸的主动网格。
3、如权利要求2所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,以MPEG-4所定义的人脸特征点标准为模板,通过ASM算法自动定位出人脸的特征点,在此基础上结合局部搜索和活动外观模型,调整ASM定位出的人脸特征点的结果。
4、如权利要求1所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,在人脸图像数据库中的检索通过SVM,k-NN人脸识别模块进行。
5、如权利要求4所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,以人脸定位模块获得的特征点分布为基础,基于Hausdorff距离按照权重投票的方式提取人脸形状参数用于和人脸数据库中的数据进行比对,来获取相似人脸。
6、如权利要求5所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,特征点涵盖嘴、眼、眉、鼻、脸形五部分。
7、如权利要求6所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,根据嘴、眼、眉、鼻、脸形五部分的特征点集,权重按照脸型0.3,眼睛0.2,嘴巴0.2,鼻子0.2,眉毛0.1来计算输入人脸照片与数据库照片中的人脸特征点集加权距离,人脸特征点集加权距离做为人脸相似度的比对依据。
8、如权利要求1至7中任一权利要求所述的利用主动网格与人脸识别结合生成新人脸的方法,其特征在于,所述无缝拼接技术采用图像梯度域编辑方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA200710040666XA CN101308571A (zh) | 2007-05-15 | 2007-05-15 | 一种利用主动网格与人脸识别结合生成新人脸的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA200710040666XA CN101308571A (zh) | 2007-05-15 | 2007-05-15 | 一种利用主动网格与人脸识别结合生成新人脸的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101308571A true CN101308571A (zh) | 2008-11-19 |
Family
ID=40125009
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA200710040666XA Pending CN101308571A (zh) | 2007-05-15 | 2007-05-15 | 一种利用主动网格与人脸识别结合生成新人脸的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101308571A (zh) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102043965A (zh) * | 2009-10-21 | 2011-05-04 | 索尼公司 | 信息处理设备,信息处理方法和程序 |
CN101770649B (zh) * | 2008-12-30 | 2012-05-02 | 中国科学院自动化研究所 | 一种人脸图像自动合成方法 |
CN102800131A (zh) * | 2012-07-24 | 2012-11-28 | 中国铁道科学研究院电子计算技术研究所 | 火车票实名制验票系统 |
CN103621054A (zh) * | 2011-04-23 | 2014-03-05 | 罗思+韦伯有限责任公司 | 利用拼接方法的大幅面扫描系统的扫描方法 |
CN103646245A (zh) * | 2013-12-18 | 2014-03-19 | 清华大学 | 儿童面部形状的模拟方法 |
CN103823678A (zh) * | 2014-02-21 | 2014-05-28 | 联想(北京)有限公司 | 图像处理方法和图像处理装置 |
CN104751408A (zh) * | 2015-03-26 | 2015-07-01 | 广东欧珀移动通信有限公司 | 人脸头像的调整方法和装置 |
CN105704419A (zh) * | 2014-11-27 | 2016-06-22 | 程超 | 一种基于可调模板头像的人人交互的方法 |
CN105868716A (zh) * | 2016-03-29 | 2016-08-17 | 中国科学院上海高等研究院 | 一种基于面部几何特征的人脸识别方法 |
CN106161933A (zh) * | 2016-06-30 | 2016-11-23 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN106203304A (zh) * | 2016-06-30 | 2016-12-07 | 维沃移动通信有限公司 | 一种图像生成方法及其移动终端 |
CN107123160A (zh) * | 2017-05-02 | 2017-09-01 | 成都通甲优博科技有限责任公司 | 基于三维立体图像的模拟整容系统、方法及移动终端 |
WO2017193906A1 (zh) * | 2016-05-09 | 2017-11-16 | 腾讯科技(深圳)有限公司 | 一种图像处理方法及处理系统 |
CN108257081A (zh) * | 2018-01-17 | 2018-07-06 | 百度在线网络技术(北京)有限公司 | 用于生成图片的方法和装置 |
CN108334886A (zh) * | 2018-03-08 | 2018-07-27 | 殷韩 | 图像预测方法、终端设备及可读存储介质 |
CN109255807A (zh) * | 2017-07-13 | 2019-01-22 | 腾讯科技(深圳)有限公司 | 一种图像信息处理方法及服务器、计算机存储介质 |
CN110147458A (zh) * | 2019-05-24 | 2019-08-20 | 涂哲 | 一种照片筛选方法、系统及电子终端 |
CN110263642A (zh) * | 2013-10-28 | 2019-09-20 | 谷歌有限责任公司 | 用于替换图像的部分的图像缓存 |
CN112699265A (zh) * | 2019-10-22 | 2021-04-23 | 商汤国际私人有限公司 | 图像处理方法及装置、处理器、存储介质 |
-
2007
- 2007-05-15 CN CNA200710040666XA patent/CN101308571A/zh active Pending
Cited By (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101770649B (zh) * | 2008-12-30 | 2012-05-02 | 中国科学院自动化研究所 | 一种人脸图像自动合成方法 |
CN102043965A (zh) * | 2009-10-21 | 2011-05-04 | 索尼公司 | 信息处理设备,信息处理方法和程序 |
CN103621054B (zh) * | 2011-04-23 | 2016-05-11 | 罗思+韦伯有限责任公司 | 利用拼接方法的大幅面扫描系统的扫描方法 |
CN103621054A (zh) * | 2011-04-23 | 2014-03-05 | 罗思+韦伯有限责任公司 | 利用拼接方法的大幅面扫描系统的扫描方法 |
CN102800131A (zh) * | 2012-07-24 | 2012-11-28 | 中国铁道科学研究院电子计算技术研究所 | 火车票实名制验票系统 |
CN110263642A (zh) * | 2013-10-28 | 2019-09-20 | 谷歌有限责任公司 | 用于替换图像的部分的图像缓存 |
CN103646245A (zh) * | 2013-12-18 | 2014-03-19 | 清华大学 | 儿童面部形状的模拟方法 |
CN103646245B (zh) * | 2013-12-18 | 2017-02-15 | 清华大学 | 儿童面部形状的模拟方法 |
CN103823678A (zh) * | 2014-02-21 | 2014-05-28 | 联想(北京)有限公司 | 图像处理方法和图像处理装置 |
CN105704419A (zh) * | 2014-11-27 | 2016-06-22 | 程超 | 一种基于可调模板头像的人人交互的方法 |
CN105704419B (zh) * | 2014-11-27 | 2018-06-29 | 程超 | 一种基于可调模板头像的人人交互的方法 |
CN104751408A (zh) * | 2015-03-26 | 2015-07-01 | 广东欧珀移动通信有限公司 | 人脸头像的调整方法和装置 |
CN104751408B (zh) * | 2015-03-26 | 2018-01-19 | 广东欧珀移动通信有限公司 | 人脸头像的调整方法和装置 |
CN105868716B (zh) * | 2016-03-29 | 2019-08-13 | 中国科学院上海高等研究院 | 一种基于面部几何特征的人脸识别方法 |
CN105868716A (zh) * | 2016-03-29 | 2016-08-17 | 中国科学院上海高等研究院 | 一种基于面部几何特征的人脸识别方法 |
WO2017193906A1 (zh) * | 2016-05-09 | 2017-11-16 | 腾讯科技(深圳)有限公司 | 一种图像处理方法及处理系统 |
US10810742B2 (en) | 2016-05-09 | 2020-10-20 | Tencent Technology (Shenzhen) Company Limited | Dynamic and static image processing method and system |
CN106161933B (zh) * | 2016-06-30 | 2019-05-17 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN106161933A (zh) * | 2016-06-30 | 2016-11-23 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN106203304A (zh) * | 2016-06-30 | 2016-12-07 | 维沃移动通信有限公司 | 一种图像生成方法及其移动终端 |
CN107123160A (zh) * | 2017-05-02 | 2017-09-01 | 成都通甲优博科技有限责任公司 | 基于三维立体图像的模拟整容系统、方法及移动终端 |
CN109255807A (zh) * | 2017-07-13 | 2019-01-22 | 腾讯科技(深圳)有限公司 | 一种图像信息处理方法及服务器、计算机存储介质 |
CN109255807B (zh) * | 2017-07-13 | 2023-02-03 | 腾讯科技(深圳)有限公司 | 一种图像信息处理方法及服务器、计算机存储介质 |
CN108257081B (zh) * | 2018-01-17 | 2022-05-13 | 百度在线网络技术(北京)有限公司 | 用于生成图片的方法和装置 |
CN108257081A (zh) * | 2018-01-17 | 2018-07-06 | 百度在线网络技术(北京)有限公司 | 用于生成图片的方法和装置 |
CN108334886A (zh) * | 2018-03-08 | 2018-07-27 | 殷韩 | 图像预测方法、终端设备及可读存储介质 |
CN108334886B (zh) * | 2018-03-08 | 2020-09-22 | 殷韩 | 图像预测方法、终端设备及可读存储介质 |
CN110147458A (zh) * | 2019-05-24 | 2019-08-20 | 涂哲 | 一种照片筛选方法、系统及电子终端 |
WO2021077620A1 (zh) * | 2019-10-22 | 2021-04-29 | 商汤国际私人有限公司 | 图像处理方法及装置、处理器、存储介质 |
CN112699265A (zh) * | 2019-10-22 | 2021-04-23 | 商汤国际私人有限公司 | 图像处理方法及装置、处理器、存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101308571A (zh) | 一种利用主动网格与人脸识别结合生成新人脸的方法 | |
Wang et al. | Deep 3D human pose estimation: A review | |
US10719759B2 (en) | System for building a map and subsequent localization | |
JP6831769B2 (ja) | 画像検索装置、画像検索方法、及び、それに用いる設定画面 | |
CN103731583B (zh) | 用于拍照智能化合成、打印处理方法 | |
Liu et al. | Real-time robust vision-based hand gesture recognition using stereo images | |
CN102567716B (zh) | 一种人脸合成系统及实现方法 | |
CN102332095B (zh) | 一种人脸运动跟踪方法和系统以及一种增强现实方法 | |
Fouhey et al. | People watching: Human actions as a cue for single view geometry | |
CN108388882A (zh) | 基于全局-局部rgb-d多模态的手势识别方法 | |
CN104050449A (zh) | 一种人脸识别方法及装置 | |
CN110399809A (zh) | 多特征融合的人脸关键点检测方法及装置 | |
CN102880634A (zh) | 基于云的智能人脸识别检索方法 | |
CN108960288B (zh) | 基于卷积神经网络的三维模型分类方法及系统 | |
CN110263768A (zh) | 一种基于深度残差网络的人脸识别方法 | |
US20210375045A1 (en) | System and method for reconstructing a 3d human body under clothing | |
CN112348937A (zh) | 人脸图像处理方法及电子设备 | |
CN103428537A (zh) | 一种视频处理方法和装置 | |
CN109410119A (zh) | 面具图像变形方法及其系统 | |
WO2022267653A1 (zh) | 图像处理方法、电子设备及计算机可读存储介质 | |
US20210335021A1 (en) | Method and system for creating virtual image based deep-learning | |
Zhan et al. | Pose-normalized and appearance-preserved street-to-shop clothing image generation and feature learning | |
WO2014100449A1 (en) | Capturing photos without a camera | |
Liu et al. | 4D facial analysis: A survey of datasets, algorithms and applications | |
Peng et al. | RGB-D human matting: A real-world benchmark dataset and a baseline method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20081119 |