CN111339866A - 一种基于DPN与Faster RCNN的火车票图像生成方法 - Google Patents

一种基于DPN与Faster RCNN的火车票图像生成方法 Download PDF

Info

Publication number
CN111339866A
CN111339866A CN202010098298.XA CN202010098298A CN111339866A CN 111339866 A CN111339866 A CN 111339866A CN 202010098298 A CN202010098298 A CN 202010098298A CN 111339866 A CN111339866 A CN 111339866A
Authority
CN
China
Prior art keywords
dpn
train ticket
train
image
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010098298.XA
Other languages
English (en)
Inventor
安程治
李锐
金长新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jinan Inspur Hi Tech Investment and Development Co Ltd
Original Assignee
Jinan Inspur Hi Tech Investment and Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jinan Inspur Hi Tech Investment and Development Co Ltd filed Critical Jinan Inspur Hi Tech Investment and Development Co Ltd
Priority to CN202010098298.XA priority Critical patent/CN111339866A/zh
Publication of CN111339866A publication Critical patent/CN111339866A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种基于DPN与Faster RCNN的火车票图像生成方法,属于计算机图像检测领域,该方法实现过程包括:采集含有火车票的原始图像;标注出步骤S1所采集到原始图像中的火车票,并保存成xml文件作为标签使用;对所获得的原始图像与标签进行数据增强;搭建Faster RCNN深度学习网络模型,将增强后的数据集随机分为训练集、验证集与测试集进行训练;依据模型在验证集与测试集上的表现情况,对Faster RCNN进行调优,获得Faster RCNN在测试集上的表现最优模型;利用DPN网络结构,训练一个用于数据增强的模型,形成最佳的行动策略;使用已训练完毕的DPN网络生成火车票图像。本发明能解决传统人工检票方式效率低下,容易漏检误检的缺陷,为火车票验票的深度学习模型提供海量的数据支撑。

Description

一种基于DPN与Faster RCNN的火车票图像生成方法
技术领域
本发明涉及深度学习理论中的计算机图像检测领域,人工智能算法中的效用理论,具体地说是一种基于DPN与Faster RCNN的火车票图像生成方法。
背景技术
车票检验技术是各大交通枢纽最为重要的技术之一。火车站、汽车站、船坞、机场等关键交通枢纽均依靠车票检验技术保证车次人流的有序运行。现有车票均以纸质形式发售,以人工检验与标记的方式来实现验票。近年来,我国交通网络基础设施不断完善,尤其在高铁与动车的建设方面,取得了举世瞩目的成就。以“和谐号”、“复兴号”为排头兵,带领着我国经济高速发展。然而,在耀眼光芒的背后,高速铁路所带来的问题也日益凸显。载客量的提升极大地挑战了各城市交通枢纽的客流吞吐能力。每逢节假日,火车站、汽车站等地的旅客数量激增,工作人员往往需要增加人手来加快进站验票的速度,避免候车室过于拥挤。但这种人工检票的方式不仅耗费人力物力,且效率低下,而且容易漏检误检。近十年来出现了自动检票机、身份证验票等自动化验票功能,但依然无法摆脱纸质车票。纸质车票在未来很长的一段时间内依然会占据一席之地。若利用人工智能技术,对传统验票方式进行改造,可以大大加快检票速度,提升交通枢纽的客流量吞吐能力。
车票检测问题大体可以分为两类。一类是从图像中抽取火车票,另外一类是从火车票中抽取有效信息。无论是哪一类问题,深度学习都是目前除了电子化车票之外,以软件为载体的最佳解决方案。但深度学习所需要的巨大的数据量是难以获取的。尤其是各类票据作为带有个人信息的隐私物品,对其进行大规模收集整理将会遇到极大的阻力。为了获得足够进行训练的数据量,利用计算机图形学相关知识进行图像生成是成本相对较低的解决方案。
图像生成方法隶属于计算机图形学(Computer Graphic,CG)的范畴。萨瑟兰在1963年完成的关于人机通信图形系统的博士论文,为计算机图形学的未来发展奠定了基础。后来计算机图形学从在显示屏上进行简单的点、线、面显示开始,历经长足发展,到目前的光线追踪技术,虚拟现实技术等等,产生了。随着近年来人工智能的兴起,计算机图形学也发起了“人工智能革命”。尤其以Generative adversarial network(GAN)为代表,与深度学习结合的图像生成方法可以快速生成非常真实的CG图像。
发明内容
本发明的技术任务是针对现有技术的不足,使用人工智能算法代替人工检票的方式,提出了一种基于Dynamic Planning Network(DPN)与Faster Region ConvolutionalNeural Network(Faster RCNN)的火车票图像生成方法,为火车票验票的深度学习模型提供海量的数据支撑。
本发明解决其技术问题所采用的技术方案是:
一种基于DPN与Faster RCNN的火车票图像生成方法,该方法的实现过程包括:
S1.采集含有火车票的原始图像,图像来源不限且鼓励收集不同来源的图像;
S2.标注出步骤S1所采集到原始图像中的火车票,并保存成xml文件作为标签使用;
S3.对步骤S1所获得的原始图像与步骤S2的标签进行数据增强,在图像增强的同时,其标签也需要做相应的变换,以准确标注出变换后图像中火车票的位置;
S4.在Keras深度学习框架的基础下,搭建Faster RCNN深度学习网络模型,将增强后的数据集随机分为训练集、验证集与测试集,将训练集输送给Faster RCNN网络,进行训练;
S5.依据模型在验证集与测试集上的表现情况,对Faster RCNN网络的参数、优化器的超参数以及训练批次、训练步长、训练轮次进行调优,获得Faster RCNN在测试集上的表现最优模型;
S6.利用DPN网络结构,训练一个用于数据增强的模型,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略;
S7.使用已训练完毕的DPN网络生成火车票图像。经过训练的DPN网络会生成一套特有的图像增强策略。与利用计算机视觉库进行纯人工的数据增强相比,该策略所获得的增强图像更广泛、更平滑、更具有针对性。将训练数据集输入到DPN网络中运行多个轮次,DPN网络会根据不同的图像选择相应的最优增强方式。
方案优选地,在步骤S6中DPN网络是关于真实环境的模拟,具体操作内容如下:
以一张原始火车票作为“初始状态”,以各种图像变换方式作为“行为”;
在“初始状态”的情况下DPN做出某种“行为”,以获取“奖励”,该奖励是由FasterRCNN对做出“行为”后图像中火车票位置预测值与实际标签的差值来表示的;
重复该过程,鼓励DPN对各种各样的“行为”进行探索;
变换结果难以被Faster-RCNN识别的“行为”将获得较少的奖励,甚至负奖励,变换结果具有较高识别率的“行为”将获得正奖励。
方案优选地,在步骤S6中构建DPN网络,以trial-and-error的方式,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略,实现奖励的最大化。以前面几步所训练的Faster RCNN为评判标准,对DPN网络进行。
方案优选地,在步骤S1中通过相机拍摄、网络爬虫爬取等方式,获取含有火车票的原始图像。
方案优选地,步骤S1中含有火车票的原始图像不小于200*200像素大小,图像中的火车票允许有一定程度的模糊、弯折、缺损,但不能到人眼难以辨别的地步。
方案优选地,在步骤S2中使用Github上的开源工具labelImg,将步骤S1所采集到原始图像中的火车票标注出来,并以xml文件的形式保存,作为标签使用。
方案优选地,在步骤S3中数据增强的方式包括但不限于图像的缩放、旋转、平移、灰度化、二值化、噪声混入、背景填充。
方案优选地,在步骤S3中利用OpenCV计算机视觉库,编写脚本,对原始图像进行数据增强。
方案优选地,步骤S4中训练集、验证集与测试集,三个数据集的比例为60%,20%,20%,步骤S4中数据集可用于训练其他的火车票识别模型,如基于CTPN、RNN的文字识别模型等。
方案优选地,在步骤S4中将训练集以Mini-Batch的形式输送给Faster RCNN网络,进行训练。
本发明的一种基于DPN与Faster RCNN的火车票图像生成方法,与现有技术相比所产生的有益效果是:
本发明研发了一种融合RPN与Faster RCNN来生成火车票的方法,该产品可以为公司内部火车票检测、票务检测模型提供足够庞大的训练数据,能解决传统人工检票方式效率低下,容易漏检误检的缺陷,为火车票验票的深度学习模型提供海量的数据支撑。
该产品除了产生票务数据之外,还可以稍作改动,对其他类型的图像进行数据增强,例如数字图像、汉字图像等等。
附图说明
为了更清楚地描述本发明一种基于DPN与Faster RCNN的火车票图像生成方法的工作原理,下面将附上简图作进一步说明。
附图1是本发明的方法流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明的一种基于DPN与Faster RCNN的火车票图像生成方法,该方法的实现过程包括:
S1.采集含有火车票的原始图像,图像来源不限且鼓励收集不同来源的图像;含有火车票的原始图像不能小于200*200像素大小,图像中的火车票允许有一定程度的模糊、弯折、缺损,但不能到人眼难以辨别的地步。
S2.标注出步骤S1所采集到原始图像中的火车票,并保存成xml文件作为标签使用;
S3.对步骤S1所获得的原始图像与步骤S2的标签进行数据增强,在图像增强的同时,其标签也需要做相应的变换,以准确标注出变换后图像中火车票的位置;
S4.在Keras深度学习框架的基础下,搭建Faster RCNN深度学习网络模型,网络模型的搭建参考Ren,S.,He,K.,Girshick,R.and Sun,J.,2015.Faster r-cnn:Towardsreal-time object detection with region proposal networks.In Advances inneural information processing systems(pp.91-99).,将增强后的数据集随机分为训练集、验证集与测试集,将训练集输送给Faster RCNN网络,进行训练;
S5.依据模型在验证集与测试集上的表现情况,对Faster RCNN网络的参数、优化器的超参数以及训练批次、训练步长、训练轮次进行调优,获得Faster RCNN在测试集上的表现最优模型;
S6.利用DPN网络结构,训练一个用于数据增强的模型,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略;
S7.使用已训练完毕的DPN网络生成10万张火车票图像。经过训练的DPN网络会生成一套特有的图像增强策略。与利用计算机视觉库进行纯人工的数据增强相比,该策略所获得的增强图像更广泛、更平滑、更具有针对性。将训练数据集输入到DPN网络中运行多个轮次,DPN网络会根据不同的图像选择相应的最优增强方式。
步骤S6中根据Tasfi,N.L.and Capretz,M.,2018.Dynamic Planning Networks.中所描述的DPN网络结构,构建DPN网络,以trial-and-error的方式,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略,实现奖励的最大化。以前面几步所训练的FasterRCNN为评判标准,对DPN网络进行。
步骤S6中,DPN网络是关于真实环境的模拟,具体操作内容如下:
以一张原始火车票作为“初始状态”,以各种图像变换方式作为“行为”;
在“初始状态”的情况下DPN做出某种“行为”,以获取“奖励”,该奖励是由FasterRCNN对做出“行为”后图像中火车票位置预测值与实际标签的差值来表示的;
重复该过程,鼓励DPN对各种各样的“行为”进行探索;
变换结果难以被Faster-RCNN识别的“行为”将获得较少的奖励,甚至负奖励,变换结果具有较高识别率的“行为”将获得正奖励。
在步骤S1中通过相机拍摄、网络爬虫爬取等方式,获取含有火车票的原始图像。
在步骤S2中使用Github上的开源工具labelImg,将步骤S1所采集到原始图像中的火车票标注出来,并以xml文件的形式保存,作为标签使用。
在步骤S3中数据增强的方式包括但不限于图像的缩放、旋转、平移、灰度化、二值化、噪声混入、背景填充。
在步骤S3中利用OpenCV计算机视觉库,编写脚本,对原始图像进行数据增强。
步骤S4中训练集、验证集与测试集,三个数据集的比例为60%,20%,20%,步骤S4中数据集可用于训练其他的火车票识别模型,如基于CTPN、RNN的文字识别模型等。
在步骤S4中将训练集以Mini-Batch的形式输送给Faster RCNN网络,进行训练。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
除说明书所述的技术特征外,均为本专业技术人员的已知技术。

Claims (10)

1.一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,该方法的实现过程包括:
S1.采集含有火车票的原始图像;
S2.标注出步骤S1所采集到原始图像中的火车票,并保存成xml文件作为标签使用;
S3.对步骤S1所获得的原始图像与步骤S2的标签进行数据增强,在图像增强的同时,其标签也需要做相应的变换,以准确标注出变换后图像中火车票的位置;
S4.在Keras深度学习框架的基础下,搭建Faster RCNN深度学习网络模型,将增强后的数据集随机分为训练集、验证集与测试集,将训练集输送给Faster RCNN网络,进行训练;
S5.依据模型在验证集与测试集上的表现情况,对Faster RCNN网络的参数、优化器的超参数以及训练批次、训练步长、训练轮次进行调优,获得Faster RCNN在测试集上的表现最优模型;
S6.利用DPN网络结构,训练一个用于数据增强的模型,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略;
S7.使用已训练完毕的DPN网络生成火车票图像。
2.根据权利要求1所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S6中DPN网络是关于真实环境的模拟,具体操作内容如下:
以一张原始火车票作为“初始状态”,以各种图像变换方式作为“行为”;
在“初始状态”的情况下DPN做出某种“行为”,以获取“奖励”,该奖励是由Faster RCNN对做出“行为”后图像中火车票位置预测值与实际标签的差值来表示的;
重复该过程,鼓励DPN对各种各样的“行为”进行探索;
变换结果难以被Faster-RCNN识别的“行为”将获得较少的奖励,甚至负奖励,变换结果具有较高识别率的“行为”将获得正奖励。
3.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S6中构建DPN网络,以trial-and-error的方式,推动DPN不断逼近真实火车票的情景,形成最佳的行动策略,实现奖励的最大化。以前面几步所训练的Faster RCNN为评判标准,对DPN网络进行。
4.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S1中通过相机拍摄、网络爬虫爬取方式,获取含有火车票的原始图像。
5.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,步骤S1中含有火车票的原始图像不小于200*200像素大小,图像中的火车票允许有一定程度的模糊、弯折、缺损,但不能到人眼难以辨别的地步。
6.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S2中使用Github上的开源工具labelImg,将步骤S1所采集到原始图像中的火车票标注出来,并以xml文件的形式保存,作为标签使用。
7.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S3中数据增强的方式包括但不限于图像的缩放、旋转、平移、灰度化、二值化、噪声混入、背景填充。
8.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S3中利用OpenCV计算机视觉库,编写脚本,对原始图像进行数据增强。
9.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,步骤S4中训练集、验证集与测试集,三个数据集的比例为60%,20%,20%,步骤S4中数据集可用于训练基于CTPN、RNN的文字识别模型。
10.根据权利要求1或2所述的一种基于DPN与Faster RCNN的火车票图像生成方法,其特征在于,在步骤S4中将训练集以Mini-Batch的形式输送给Faster RCNN网络,进行训练。
CN202010098298.XA 2020-02-18 2020-02-18 一种基于DPN与Faster RCNN的火车票图像生成方法 Pending CN111339866A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010098298.XA CN111339866A (zh) 2020-02-18 2020-02-18 一种基于DPN与Faster RCNN的火车票图像生成方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010098298.XA CN111339866A (zh) 2020-02-18 2020-02-18 一种基于DPN与Faster RCNN的火车票图像生成方法

Publications (1)

Publication Number Publication Date
CN111339866A true CN111339866A (zh) 2020-06-26

Family

ID=71183445

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010098298.XA Pending CN111339866A (zh) 2020-02-18 2020-02-18 一种基于DPN与Faster RCNN的火车票图像生成方法

Country Status (1)

Country Link
CN (1) CN111339866A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112613543A (zh) * 2020-12-15 2021-04-06 重庆紫光华山智安科技有限公司 增强策略验证方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110135395A (zh) * 2019-05-27 2019-08-16 济南浪潮高新科技投资发展有限公司 一种利用深度学习技术识别火车票的方法
US20190354817A1 (en) * 2018-05-18 2019-11-21 Google Llc Learning Data Augmentation Strategies for Object Detection
US20190354895A1 (en) * 2018-05-18 2019-11-21 Google Llc Learning data augmentation policies

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190354817A1 (en) * 2018-05-18 2019-11-21 Google Llc Learning Data Augmentation Strategies for Object Detection
US20190354895A1 (en) * 2018-05-18 2019-11-21 Google Llc Learning data augmentation policies
CN110135395A (zh) * 2019-05-27 2019-08-16 济南浪潮高新科技投资发展有限公司 一种利用深度学习技术识别火车票的方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
EKIN D. CUBUK ET AL.: "AutoAugment: Learning Augmentation Strategies from Data", 《2019 IEEE/CVF CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *
NORMAN TASFI AND MIRIAM CAPRETZ: "Dynamic Planning Networks", 《ARXIV:1812.11240V2》 *
程文雄: "基于多尺度并行网络的抗遮挡车辆检测", 《中国优秀硕士学位论文全文数据库 工程科技II辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112613543A (zh) * 2020-12-15 2021-04-06 重庆紫光华山智安科技有限公司 增强策略验证方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN109902622B (zh) 一种用于登机牌信息验证的文字检测识别方法
CN111160440B (zh) 一种基于深度学习的安全帽佩戴检测方法及装置
CN111242024A (zh) 基于机器学习识别图纸内图例及文字的方法及系统
CN102129568B (zh) 利用改进的高斯混合模型分类器检测图像垃圾邮件的方法
CN109165275B (zh) 基于深度学习的智能变电站操作票信息智能搜索匹配方法
CN106022363A (zh) 一种适用于自然场景下的中文文字识别方法
CN102194275A (zh) 一种车票自动检票方法
CN112580684B (zh) 基于半监督学习的目标检测方法、装置及存储介质
CN106934392A (zh) 基于多任务学习卷积神经网络的车标识别及属性预测方法
CN112052850A (zh) 车牌识别方法、装置、电子设备及存储介质
CN111652233A (zh) 一种针对复杂背景的文本验证码自动识别方法
CN112052845A (zh) 图像识别方法、装置、设备及存储介质
CN109977830A (zh) 基于颜色纹理双通道卷积神经网络及循环神经网络的人脸融合检测方法
CN110610124A (zh) 一种基于生成对抗网络的图像生成方法
CN110619326A (zh) 一种基于扫描的英语试卷作文检测识别系统及方法
CN112686243A (zh) 智能识别图片文字的方法、装置、计算机设备及存储介质
CN113033543A (zh) 曲形文本识别方法、装置、设备及介质
CN104182771A (zh) 基于带丢包自动编码技术的时间序列数据图形化分析方法
CN113034406A (zh) 扭曲文档恢复方法、装置、设备及介质
CN111259950B (zh) 一种基于3d模型训练yolo神经网络的方法
CN113222063A (zh) 快递纸箱垃圾分类方法、装置、设备及介质
CN111339866A (zh) 一种基于DPN与Faster RCNN的火车票图像生成方法
Arsenovic et al. Deep learning driven plates recognition system
Zhang et al. License plate recognition model based on CNN+ LSTM+ CTC
CN106033546A (zh) 基于自上而下学习的行为分类方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200626