CN110889366A - 一种基于面部表情判断用户兴趣度的方法及系统 - Google Patents
一种基于面部表情判断用户兴趣度的方法及系统 Download PDFInfo
- Publication number
- CN110889366A CN110889366A CN201911156035.3A CN201911156035A CN110889366A CN 110889366 A CN110889366 A CN 110889366A CN 201911156035 A CN201911156035 A CN 201911156035A CN 110889366 A CN110889366 A CN 110889366A
- Authority
- CN
- China
- Prior art keywords
- image
- integral
- user
- expression
- expressions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于面部表情判断用户兴趣度的方法及系统,方法包括初始化步骤、获取图像步骤、图像预处理步骤、表情识别分类步骤和判断步骤。图像预处理步骤:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;表情识别分类步骤:获取到图像数据中眼睛和嘴巴的位置后,创建要素图,之后通过表情模型分析图像数据中表情,并对表情进行分类;判断步骤:通过用户的表情打分值判断用户对浏览内容块的兴趣度,表情打分值依赖于表情分类,根据不同的分类表情赋予分值,分值为正值或者负值,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。本发明提高了用户内容推荐的准确率,极大提高了内容推荐和用户喜好标签精度。
Description
技术领域
本发明属于图像识别技术领域,涉及一种基于人脸检测的方法,特别涉及一种基于面部表情判断用户兴趣度的方法及系统。
背景技术
目前,互联网已经非常发达,很多公司通过大数据分析用户的需求,然后再做到内容的精准推送或者分发。通常的内容推荐分发都是根据用户的浏览、阅读以及搜索,这种情况必须达到量级以及不断训练才能达到推荐分发给用户的内容是用户真正想看的,但是要结合用户当时的心情等多种因素这种方式还是不能保证用户真正想浏览这些内容,所以必须增加判断推荐下发内容准确度。
目前关于人脸检测的技术已经比较成熟,大多数仅适用于安全等领域,但是在用户面部表情分析方面还没有用在比较实用的领域。基于人脸检测技术,本发明将其与信息推送等实用领域相结合,判断用户对于相关内容的兴趣度,为精准的内容推荐分发提供条件。
发明内容
本发明所要解决的问题在于克服传统大数据分析推荐分发下用户感兴趣内容的分析精度不足,提供一种基于面部表情判断用户兴趣度的方法,该方法在人脸检测的基础上进行改进,直接判断出用户对当前内容的兴趣程度,从而提高数据推荐分发的准确度。
本发明的目的是通过以下技术方案来实现的:
一种基于面部表情判断用户兴趣度的方法,
初始化步骤:打开应用程序,应用程序初始化;
获取图像步骤:通过摄像头采集数据,获取到人脸图像;
图像预处理步骤:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类步骤:获取到图像数据中眼睛和嘴巴的位置后,创建要素图,之后通过表情模型分析图像数据中表情,并对表情进行分类;
判断步骤:通过用户的表情打分值判断用户对浏览内容块的兴趣度,表情打分值依赖于表情分类,根据不同的分类表情赋予分值,分值为正值或者负值,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
作为优选方式,在获取图像步骤中,先获取上层设备的摄像头权限,开启摄像头设备并获取场景内容,通过native方法逐帧传递到C++底层处理。
作为优选方式,把C++中对每一帧ARGB图像数据利用加权平均法灰度化和单通道处理。
作为优选方式,在图像预处理步骤中,检测眼睛和嘴巴的位置前需要找到脸部区域。
作为优选方式,获取图像的积分图,具体为:通过HAAR算法计算脸部特征,然后利用积分公式获得积分图,积分图中每一点(x,y)都是在这个点对应左上角区域所有值的和,并且只需要遍历一遍图像就可以得到积分图;
积分公式如下:
其中ii(x,y)表示积分图,i(x,y)表示原始图像。
作为优选方式,(x,y)积分图可以这样计算ii(x,y)=ii(x,y)+i(x,y)+ii(x,y-1)-ii(x-1,y-1),利用积分图高效的计算图像中的特征区域。
作为优选方式,结合AdaBoost算法训练级联分类器对积分图中的每一块进行分类,若某一矩形区域通过了级联分类器就被判别为人脸图像,然后把人脸这一块标记出来去检测眼睛和嘴巴的坐标位置角度大小数据。
作为优选方式,对表情进行分类后形成图像表情库,图像表情库中分为愤怒,厌恶,恐惧,快乐,悲伤,惊讶和中立。
一种基于面部表情判断用户兴趣度的系统,包括初始化模块、摄像头模块、图像预处理模块、表情识别分类模块以及判断模块;
初始化模块:在打开应用程序后,对系统进行初始化;
摄像头模块:初始化系统程序后,开启摄像头,通过摄像头获取镜头前的图像;
图像预处理模块:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类模块:根据图像中脸部的分类信息进行打分,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
本发明的有益效果是:
本发明结合了图像检测以及表情识别,用于分析用户对浏览内容的兴趣度,利用用户浏览内容真实的表情反应用户真实的兴趣度,更准确的提高了推荐分发数据时内容的准确率,完善了大数据分析机器学习成本高,精度不够的问题,同时增强用户体验。
本发明提高了用户内容推荐的准确率,极大提高了内容推荐和用户喜好标签精度,从而可以根据用户兴趣度更加准确的了解用户真正想浏览的内容。
附图说明
图1为本发明的流程示意图;
图2为实施例中Haar-like特征在图中的位置示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
实施例一
如图1所示,一种基于面部表情判断用户兴趣度的方法,
初始化步骤:打开应用程序,应用程序初始化;
获取图像步骤:通过摄像头采集数据,获取到人脸图像;
图像预处理步骤:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类步骤:获取到图像数据中眼睛和嘴巴的位置后,创建要素图,之后通过表情模型分析图像数据中表情,并对表情进行分类;
判断步骤:通过用户的表情打分值判断用户对浏览内容块的兴趣度,表情打分值依赖于表情分类,根据不同的分类表情赋予分值,分值为正值或者负值,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
本发明通过积分图、要素图等图像处理方式以及表情模型分析表情,最后通过打分的形式对图像中的人脸表情进行打分,通过打分值来判断用户对于浏览内容的兴趣度。本发明创新性地引入了人脸检测内容,将其与浏览内容进行结合,判断出用户对浏览内容的兴趣度,提到了用户对于浏览内容感兴趣度的准确性。由于该方法不同于传统的大数据统计方法,因此,在判断准确性和判断效率方面都得到了极大的提高。
实施例二
对于获取图像步骤,本发明先获取上层设备的摄像头权限,开启摄像头设备并获取场景内容,通过native方法逐帧传递到C++底层处理。因为上层设备一般为30帧每秒,在传输过程中需要使用消息队列。native方法主要用于加载文件和动态链接库,将浏览信息传递到操作系统底层,之后再通过C++在操作系统的底层进行数据处理。
由于后续处理必须需要对图片进行对应处理,在计算机中灰度色彩空间在人脸检测中特别有效,所以需要把C++中对每一帧ARGB图像数据利用加权平均法灰度化和单通道处理,降低了数据处理量,且能够提高数据处理效率。
实施例三
在图像预处理步骤中,检测眼睛和嘴巴的位置前需要找到脸部区域。获取图像的积分图,具体为:通过HAAR算法计算脸部特征,然后利用积分公式获得积分图,积分图中每一点(x,y)都是在这个点对应左上角区域所有值的和,并且只需要遍历一遍图像就可以得到积分图;
积分公式如下:
其中ii(x,y)表示积分图,i(x,y)表示原始图像。
本发明在已有的图像识别基础上增加了面部表情分析的算法,用来针对用户对内容的兴趣程度以便对内容打分。(x,y)积分图可以这样计算ii(x,y)=ii(x,y)+i(x,y)+ii(x,y-1)-ii(x-1,y-1),利用积分图高效的计算图像中的特征区域。
以一种HAAR-like边缘特征为例:
假设需要计算的这种Haar-like特征在图中的位置如图2所示:
那么,A,B区域所构成的HAAR-like边缘特征是:
HarrA-B=Sum(A)-Sum(B)=[SAT4+SAT1-SAT2-SAT3]-[SAT6+SAT3-SAT4-SAT5](4)(4)HarrA-B=Sum(A)-Sum(B)=[SAT4+SAT1-SAT2-SAT3]-[SAT6+SAT3-SAT4-SAT5]
对一个灰度图而言,事先将其积分图构建好,当需要计算灰度图某个区域内所有像素点的像素值之和的时候,利用积分图,通过查表运算,可以迅速得到结果
结合AdaBoost算法训练级联分类器对积分图中的每一块进行分类,若某一矩形区域通过了级联分类器就被判别为人脸图像,然后把人脸这一块标记出来去检测眼睛和嘴巴的坐标位置角度大小数据。
实施例四
对表情进行分类后形成图像表情库,图像表情库中分为愤怒,厌恶,恐惧,快乐,悲伤,惊讶和中立,但是在实际测试中厌恶和愤怒存在不平衡,因此厌恶和愤怒划分到一类。根据这七中表情制定对应评分规则,分值越高证明用户对当前内容越感兴趣,反之亦然。
根据具体业务场景对表情库进行划分打分规则,用户在一定时间内表情变化对浏览内容块则进行权重打分并求和,根据表情的定义可以给正的权重或者负的权重,甚至权重可以很大。考虑到某一种表情出现过高的频率,需要引入时间衰退机制,本发明采用指数衰减来实现,越远的行为衰减的越快,即对原始的分乘上一个指数系数y=exp(-α*time)其中α是冷却因子,越大y的值变化就越明显;time则是想要衰减的时间。根据以上权重打分机制,可以得出用户对当前内容块的兴趣度。
实施例五
与实施例一到实施例四相对应的,本发明提供了一种基于面部表情判断用户兴趣度的系统,包括初始化模块、摄像头模块、图像预处理模块、表情识别分类模块以及判断模块;
初始化模块:在打开应用程序后,对系统进行初始化;
摄像头模块:初始化系统程序后,开启摄像头,通过摄像头获取镜头前的图像;
图像预处理模块:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类模块:根据图像中脸部的分类信息进行打分,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
本实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以下步骤:
初始化步骤:打开应用程序,应用程序初始化;
获取图像步骤:通过摄像头采集数据,获取到人脸图像;
图像预处理步骤:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类步骤:获取到图像数据中眼睛和嘴巴的位置后,创建要素图,之后通过表情模型分析图像数据中表情,并对表情进行分类;
判断步骤:通过用户的表情打分值判断用户对浏览内容块的兴趣度,表情打分值依赖于表情分类,根据不同的分类表情赋予分值,分值为正值或者负值,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
上述系统内的各单元之间的信息交互、执行过程等内容,由于与本发明方法实施例基于同一构思,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
本领域所属技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储在计算机可读取的存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质中。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,应当指出的是,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。因此,以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,应当指出的是,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (9)
1.一种基于面部表情判断用户兴趣度的方法,其特征在于:
初始化步骤:打开应用程序,应用程序初始化;
获取图像步骤:通过摄像头采集数据,获取到人脸图像;
图像预处理步骤:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类步骤:获取到图像数据中眼睛和嘴巴的位置后,创建要素图,之后通过表情模型分析图像数据中表情,并对表情进行分类;
判断步骤:通过用户的表情打分值判断用户对浏览内容块的兴趣度,表情打分值依赖于表情分类,根据不同的分类表情赋予分值,分值为正值或者负值,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
2.根据权利要求1所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:在获取图像步骤中,先获取上层设备的摄像头权限,开启摄像头设备并获取场景内容,通过native方法逐帧传递到C++底层处理。
3.根据权利要求2所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:把C++中对每一帧ARGB图像数据利用加权平均法灰度化和单通道处理。
4.根据权利要求1所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:在图像预处理步骤中,检测眼睛和嘴巴的位置前需要找到脸部区域。
6.根据权利要求5所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:(x,y)积分图可以这样计算ii(x,y)=ii(x,y)+i(x,y)+ii(x,y-1)-ii(x-1,y-1),利用积分图高效的计算图像中的特征区域。
7.根据权利要求6所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:结合AdaBoost算法训练级联分类器对积分图中的每一块进行分类,若某一矩形区域通过了级联分类器就被判别为人脸图像,然后把人脸这一块标记出来去检测眼睛和嘴巴的坐标位置角度大小数据。
8.根据权利要求1所述的一种基于面部表情判断用户兴趣度的方法,其特征在于:对表情进行分类后形成图像表情库,图像表情库中分为愤怒,厌恶,恐惧,快乐,悲伤,惊讶和中立。
9.一种基于面部表情判断用户兴趣度的系统,其特征在于:包括初始化模块、摄像头模块、图像预处理模块、表情识别分类模块以及判断模块;
初始化模块:在打开应用程序后,对系统进行初始化;
摄像头模块:初始化系统程序后,开启摄像头,通过摄像头获取镜头前的图像;
图像预处理模块:获取图像的积分图,通过积分图计算图像中的特征区域,检测眼睛和嘴巴的位置;
表情识别分类模块:根据图像中脸部的分类信息进行打分,分值的绝对值越大代表用户对当前浏览内容块越感兴趣。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911156035.3A CN110889366A (zh) | 2019-11-22 | 2019-11-22 | 一种基于面部表情判断用户兴趣度的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911156035.3A CN110889366A (zh) | 2019-11-22 | 2019-11-22 | 一种基于面部表情判断用户兴趣度的方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110889366A true CN110889366A (zh) | 2020-03-17 |
Family
ID=69748411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911156035.3A Pending CN110889366A (zh) | 2019-11-22 | 2019-11-22 | 一种基于面部表情判断用户兴趣度的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110889366A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111897466A (zh) * | 2020-08-10 | 2020-11-06 | 北京达佳互联信息技术有限公司 | 一种数据处理方法、装置、电子设备及存储介质 |
CN112507243A (zh) * | 2021-02-07 | 2021-03-16 | 深圳市阿卡索资讯股份有限公司 | 一种基于表情的内容推送方法与装置 |
CN117575662A (zh) * | 2024-01-17 | 2024-02-20 | 深圳市微购科技有限公司 | 基于视频分析的商业智能化经营决策支撑系统及方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150254447A1 (en) * | 2014-03-10 | 2015-09-10 | FaceToFace Biometrics, Inc. | Expression recognition in messaging systems |
CN107785061A (zh) * | 2017-10-10 | 2018-03-09 | 东南大学 | 孤独症谱系障碍儿童情绪能力干预系统 |
CN108536803A (zh) * | 2018-03-30 | 2018-09-14 | 百度在线网络技术(北京)有限公司 | 歌曲推荐方法、装置、设备及计算机可读介质 |
CN109446880A (zh) * | 2018-09-05 | 2019-03-08 | 广州维纳斯家居股份有限公司 | 智能用户参与度评价方法、装置、智能升降桌及存储介质 |
-
2019
- 2019-11-22 CN CN201911156035.3A patent/CN110889366A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150254447A1 (en) * | 2014-03-10 | 2015-09-10 | FaceToFace Biometrics, Inc. | Expression recognition in messaging systems |
CN107785061A (zh) * | 2017-10-10 | 2018-03-09 | 东南大学 | 孤独症谱系障碍儿童情绪能力干预系统 |
CN108536803A (zh) * | 2018-03-30 | 2018-09-14 | 百度在线网络技术(北京)有限公司 | 歌曲推荐方法、装置、设备及计算机可读介质 |
CN109446880A (zh) * | 2018-09-05 | 2019-03-08 | 广州维纳斯家居股份有限公司 | 智能用户参与度评价方法、装置、智能升降桌及存储介质 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111897466A (zh) * | 2020-08-10 | 2020-11-06 | 北京达佳互联信息技术有限公司 | 一种数据处理方法、装置、电子设备及存储介质 |
CN112507243A (zh) * | 2021-02-07 | 2021-03-16 | 深圳市阿卡索资讯股份有限公司 | 一种基于表情的内容推送方法与装置 |
CN112507243B (zh) * | 2021-02-07 | 2021-05-18 | 深圳市阿卡索资讯股份有限公司 | 一种基于表情的内容推送方法与装置 |
CN117575662A (zh) * | 2024-01-17 | 2024-02-20 | 深圳市微购科技有限公司 | 基于视频分析的商业智能化经营决策支撑系统及方法 |
CN117575662B (zh) * | 2024-01-17 | 2024-06-07 | 深圳市微购科技有限公司 | 基于视频分析的商业智能化经营决策支撑系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021073417A1 (zh) | 表情生成方法、装置、设备及存储介质 | |
CN106557778B (zh) | 通用物体检测方法和装置、数据处理装置和终端设备 | |
EP2568429A1 (en) | Method and system for pushing individual advertisement based on user interest learning | |
US10068154B2 (en) | Recognition process of an object in a query image | |
CN110889366A (zh) | 一种基于面部表情判断用户兴趣度的方法及系统 | |
CN111258433B (zh) | 基于虚拟场景的教学互动系统 | |
EP2587826A1 (en) | Extraction and association method and system for objects of interest in video | |
CN104572804A (zh) | 一种视频物体检索的方法及其系统 | |
CN103098079A (zh) | 个性化节目选择系统和方法 | |
CN103988232A (zh) | 使用运动流形来改进图像匹配 | |
US20220301334A1 (en) | Table generating method and apparatus, electronic device, storage medium and product | |
CN111405360A (zh) | 视频处理方法、装置、电子设备和存储介质 | |
WO2022087847A1 (zh) | 手写文本识别方法、装置和系统,手写文本搜索方法和系统,以及计算机可读存储介质 | |
CN116152870A (zh) | 人脸识别方法、装置、电子设备及计算机可读存储介质 | |
Du | High-precision portrait classification based on mtcnn and its application on similarity judgement | |
AU2021240205B1 (en) | Object sequence recognition method, network training method, apparatuses, device, and medium | |
CN111881775B (zh) | 一种人脸实时识别方法和装置 | |
CN111738252A (zh) | 图像中的文本行检测方法、装置及计算机系统 | |
CN113705310A (zh) | 特征学习的方法、目标物体的识别方法和对应装置 | |
Cai et al. | Robust facial expression recognition using RGB-D images and multichannel features | |
CN113326829B (zh) | 视频中手势的识别方法、装置、可读存储介质及电子设备 | |
CN111507421A (zh) | 一种基于视频的情感识别方法及装置 | |
CN113920291A (zh) | 基于图片识别结果的纠错方法、装置、电子设备及介质 | |
US20220261856A1 (en) | Method for generating search results in an advertising widget | |
CN113763313A (zh) | 文本图像的质量检测方法、装置、介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200317 |
|
RJ01 | Rejection of invention patent application after publication |