CN115331266B - 一种猪只唯一化识别去重警报方法 - Google Patents
一种猪只唯一化识别去重警报方法 Download PDFInfo
- Publication number
- CN115331266B CN115331266B CN202211264008.XA CN202211264008A CN115331266B CN 115331266 B CN115331266 B CN 115331266B CN 202211264008 A CN202211264008 A CN 202211264008A CN 115331266 B CN115331266 B CN 115331266B
- Authority
- CN
- China
- Prior art keywords
- pig
- key points
- weight
- suspected
- key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Collating Specific Patterns (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明提供一种猪只唯一化识别去重警报方法,涉及关键点检测、图像处理、计算机视觉、姿态估计技术领域,包括判断体重信息步骤和判断关键点信息步骤;所述判断体重信息步骤包括接口读入体重数值,同时给个体编号子步骤、对所有个体按照体重从小到大的顺序进行排序子步骤和判断每个个体与其后个体的体重差是否不超过2kg子步骤;所述判断关键点信息步骤包括PigPose相关接口获取姿态关键点信息、对关键点坐标进行归一化、计算对应关键点之间欧氏距离,小于极小值判据的认定为重合、判断关键点重合率是否大于阈值,若大于则判定重复并移交人工处理;本发明为科学化的猪只养殖提供了保障,以新兴技术领域为传统工农业赋能。
Description
技术领域
本发明涉及计算机视觉深度学习、姿态估计技术领域,具体涉及一种猪只唯一化识别去重警报方法。
背景技术
生猪养殖行业中,猪只体重是一项极其重要的指标,而传统的称量体重方式为人工驱赶猪只轮流上秤,称重示数稳定后再进行人工记录。在此过程中,生猪适应环境变化需要时间,并且由于猪天性喜静的特性,人工驱赶猪会使其受到惊吓,进而导致生猪的健康受到不良影响。
体重记录员精力有限并且猪场工作环境条件较差,导致记录结果不能保证完全准确,极有可能出现记错体重,重复记录同一猪只体重等情况。并且单日工作量非常有限,效率低下。
为减少驱赶猪只其健康造成的不良影响,减少饲养员与记录员的无效精力消耗,提高称重效率,本方法基于计算机视觉技术、关键点检测技术与AI智能称重系统实现了全自动识别称重过程中是否存在重复称重情况的功能,若疑似重复称重则立刻向用户发送反馈,以便人工进行确认是否存在重复称重的情况,从而从称重层面上实现猪只唯一化的功能。
发明内容
本发明的目的在于克服现有技术的缺点,提供了一种猪只唯一化识别去重警报方法。
本发明的目的通过以下技术方案来实现:
一种猪只唯一化识别去重警报方法,包括以下步骤:
步骤1:读取猪只信息,判断是否存在疑似重复称重猪只;
步骤2:对疑似重复称重猪只进行核查。
具体的,所述猪只信息包括猪只体重、猪只序列号和猪只图片信息。
具体的,步骤1所述疑似重复称重猪只判断,包括以下子步骤:
步骤11:根据猪只体重对猪只个体进行排序;
步骤12:检查每个猪只个体体重与其后各个猪只个体的体重之差是否在预设的体重差以内,若是,进入步骤2;若否,重复步骤11,直至所有猪只检查完毕。
具体的,基于磅秤示数获得猪只体重可以通过OCR技术等多种方式。
具体的,所述体重差为2kg。
具体的,步骤2所述对疑似重复称重猪只核查,包含以下子步骤:
步骤21:对疑似重复的猪只个体的图片使用PigPose模型检测其关键点,并将关键点坐标归一化成 [0,1] 之间的数值,以减少由于照片拍摄角度和距离的细微差异造成的透视原理影响;
步骤22:计算同一位置的关键点归一化后坐标的欧氏距离,所述欧氏距离如小于预设的极小值ε,则视为两个关键点在生理结构上是重合的;
步骤23:若重复的关键点的数量与有效关键点的数量的比值大于等于阈值t,则认定这两个个体疑似出现了重复称重的情况。
具体的,所述使用PigPose模型检测其关键点具体为:
运用猪只骨架模型作为唯一化识别的主要参考,对于疑似重复称重的猪只的图片提取全身22个关键点,并得到关键点的坐标信息;
所述22个关键点包括:猪左耳、猪右耳、猪鼻子最前端、猪左前肢肩胛骨中心位置、猪左前肢尺骨与臂骨的交接点、猪左前肢腕与臂交接处、猪左前肢系的中心处、猪右前肢肩胛骨中心处、猪右前肢尺骨与臂骨的交接点、猪右前肢腕与臂交接处、猪右前肢系的中心处、猪左后肢髋骨与股骨连接处的位置、猪左后肢股骨与胫骨的交界点、猪左后肢腓骨与跌骨连接处、猪左后肢系的中心位置、猪右后肢髋骨与股骨连接处的位置、猪右后肢股骨与胫骨的交界点、猪右后肢腓骨与跌骨连接处位置、猪右后肢系的中心位置、猪背、腰处中点处和猪下腹中点处。
具体的,步骤21所述关键点坐标归一化的计算式为:
式中,分别为归一化后的关键点x轴坐标值与y轴坐标值,x、y为关键点原始坐标的x轴分量值与原始坐标的y轴分量值,分别为猪只识别框的左边界、右边界、下边界、上边界,分别表示所有关键点坐标中的x轴分量的最小值、最大值与所有关键点坐标中的y轴分量的最小值、最大值。
具体的,步骤22所述欧氏距离的计算式为:
具体的,检测到的、无效的关键点的x轴分量和y轴分量,用-1表示。
基于上述技术方案,可产生如下技术效果:
本方法创造性地提出了一种基于计算机视觉技术、关键点检测技术与AI智能称重系统的全自动识别称重过程中是否存在重复称重情况的算法技术。相较于传统的全人工流程,效率提高了多个量级,减轻了从业人员进行称重工作所面临的风险,大大减轻了测温过程对猪只健康的不良影响,大幅度降低了人力成本。本方法对关键点信息使用的归一化处理降低了拍摄角度和距离引起的透视原理的影响,提高了二次检验的可信度。总而言之,本方法是一种低成本、高效率、广适应性、高鲁棒性于一体的科学化规模化猪只称重过程大幅改良方案。
依托于计算机视觉与深度学习等计算机科学领域的快速发展,本方法为现代化、科学化的猪只养殖提供了有力保障,在真正意义上实现了养殖学、食品工程、材料科学与计算机科学等多学科的交叉融合,以新兴技术领域为传统工农业赋能。同时,本方法在现代化养殖产业中具有较高的技术优势和市场价值,适合于生产中的实际应用与技术上的进一步推广。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1 为本发明的方法流程图;
图2 为本发明的读取猪只信息流程图;
图3为本发明的重复称重猪只核查流程图。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。且应到注意到,相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明的一部分实施例,而不是全部的实施例,在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在一个优选的实施例中:
如图1所示,一种猪只唯一化识别去重警报方法,包括以下步骤:
步骤1:读取猪只信息,判断是否存在疑似重复称重猪只;
步骤2:对疑似重复称重猪只进行核查。
具体的,所述猪只信息包括猪只体重、猪只序列号和猪只图片信息。
如图2所示,具体的,步骤1所述疑似重复称重猪只判断,包括以下子步骤:
步骤11:根据猪只体重对猪只个体进行排序;
步骤12:检查每个猪只个体体重与其后各个猪只个体的体重之差是否在预设的体重差以内,若是,进入步骤2;若否,重复步骤11,直至所有猪只检查完毕。
具体的,基于磅秤示数获得猪只体重可以通过OCR技术等多种方式。
具体的,所述体重差为2kg。
如图3所示,具体的,步骤2所述对疑似重复称重猪只核查,包含以下子步骤:
步骤21:对疑似重复的猪只个体的图片使用PigPose模型检测其关键点,并将关键点坐标归一化成 [0,1] 之间的数值,以减少由于照片拍摄角度和距离的细微差异造成的透视原理影响;
步骤22:计算同一位置的关键点归一化后坐标的欧氏距离,所述欧氏距离如小于预设的极小值ε,则视为两个关键点在生理结构上是重合的;
步骤23:若重复的关键点的数量与有效关键点的数量的比值大于等于阈值t,则认定这两个个体疑似出现了重复称重的情况。
具体的,所述使用PigPose模型检测其关键点具体为:
运用猪只骨架模型作为唯一化识别的主要参考,对于疑似重复称重的猪只的图片提取全身22个关键点,并得到关键点的坐标信息;
所述22个关键点包括:猪左耳、猪右耳、猪鼻子最前端、猪左前肢肩胛骨中心位置、猪左前肢尺骨与臂骨的交接点、猪左前肢腕与臂交接处、猪左前肢系的中心处、猪右前肢肩胛骨中心处、猪右前肢尺骨与臂骨的交接点、猪右前肢腕与臂交接处、猪右前肢系的中心处、猪左后肢髋骨与股骨连接处的位置、猪左后肢股骨与胫骨的交界点、猪左后肢腓骨与跌骨连接处、猪左后肢系的中心位置、猪右后肢髋骨与股骨连接处的位置、猪右后肢股骨与胫骨的交界点、猪右后肢腓骨与跌骨连接处位置、猪右后肢系的中心位置、猪背、腰处中点处和猪下腹中点处。
具体的,步骤21所述关键点坐标归一化的计算式为:
式中,分别为归一化后的关键点x轴坐标值与y轴坐标值,x、y为关键点原始坐标的x轴分量值与原始坐标的y轴分量值,分别为猪只识别框的左边界、右边界、下边界、上边界,分别表示所有关键点坐标中的x轴分量的最小值、最大值与所有关键点坐标中的y轴分量的最小值、最大值。
具体的,步骤22所述欧氏距离的计算式为:
具体的,检测到的、无效的关键点的x轴分量和y轴分量,用-1表示。
本文揭露的结构、功能和连接形式,可以通过其它方式实现。例如,以上所描述的实施例仅是示意性的,例如盖板和压板可以有其他安装方式,例如多个组件可以结合或者集成于另一个组件;另外,在本文各个实施例中的各功能组件可以集成在一个功能组件中,也可以是各个功能组件单独物理存在,也可以两个或两个以上功能组件集成为一个功能组件。
以上所述仅是本发明的优选实施方式,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。
Claims (7)
1.一种猪只唯一化识别去重警报方法,其特征在于,包括以下步骤:
步骤1:读取猪只信息,判断是否存在疑似重复称重猪只;步骤1所述疑似重复称重猪只判断,包括以下子步骤:
步骤11:根据猪只体重对猪只个体进行排序;
步骤12:检查每个猪只个体体重与其后各个猪只个体的体重之差是否在预设的体重差以内,若是,进入步骤2;若否,重复步骤11,直至所有猪只检查完毕;
步骤2:对疑似重复称重猪只进行核查;步骤2所述对疑似重复称重猪只核查,包含以下子步骤:
步骤21:对疑似重复的猪只个体的图片使用PigPose模型检测其关键点,并将关键点坐标归一化成 [0,1] 之间的数值,以减少由于照片拍摄角度和距离的细微差异造成的透视原理影响;
步骤22:计算同一位置的关键点归一化后坐标的欧氏距离,所述欧氏距离如小于预设的极小值ε,则视为两个关键点在生理结构上是重合的;
步骤23:若重复的关键点的数量与有效关键点的数量的比值大于等于阈值t,则认定这两个个体疑似出现了重复称重的情况。
2.根据权利要求1所述的一种猪只唯一化识别去重警报方法,其特征在于,所述猪只信息包括猪只体重、猪只序列号和猪只图片信息。
3.根据权利要求1所述的一种猪只唯一化识别去重警报方法,其特征在于,所述体重差为2kg。
4.根据权利要求1所述的一种猪只唯一化识别去重警报方法,其特征在于,所述使用PigPose模型检测其关键点具体为:
运用猪只骨架模型作为唯一化识别的参考,对于疑似重复称重的猪只的图片提取全身22个关键点,并得到关键点的坐标信息;
所述22个关键点包括:猪左耳、猪右耳、猪鼻子最前端、猪左前肢肩胛骨中心位置、猪左前肢尺骨与臂骨的交接点、猪左前肢腕与臂交接处、猪左前肢系的中心处、猪右前肢肩胛骨中心处、猪右前肢尺骨与臂骨的交接点、猪右前肢腕与臂交接处、猪右前肢系的中心处、猪左后肢髋骨与股骨连接处的位置、猪左后肢股骨与胫骨的交界点、猪左后肢腓骨与跌骨连接处、猪左后肢系的中心位置、猪右后肢髋骨与股骨连接处的位置、猪右后肢股骨与胫骨的交界点、猪右后肢腓骨与跌骨连接处位置、猪右后肢系的中心位置、猪背、腰处中点处和猪下腹中点处。
7.根据权利要求5所述的一种猪只唯一化识别去重警报方法,其特征在于,检测到的、无效的关键点的x轴分量和y轴分量,用-1表示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211264008.XA CN115331266B (zh) | 2022-10-17 | 2022-10-17 | 一种猪只唯一化识别去重警报方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211264008.XA CN115331266B (zh) | 2022-10-17 | 2022-10-17 | 一种猪只唯一化识别去重警报方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115331266A CN115331266A (zh) | 2022-11-11 |
CN115331266B true CN115331266B (zh) | 2023-02-10 |
Family
ID=83915211
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211264008.XA Active CN115331266B (zh) | 2022-10-17 | 2022-10-17 | 一种猪只唯一化识别去重警报方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115331266B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115862060B (zh) * | 2022-11-25 | 2023-09-26 | 天津大学四川创新研究院 | 基于猪脸识别与猪只重识别的猪只唯一化识别方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109632058A (zh) * | 2018-12-13 | 2019-04-16 | 北京小龙潜行科技有限公司 | 一种智能养猪群养测重方法、装置、电子设备及存储介质 |
CN111161214A (zh) * | 2019-12-09 | 2020-05-15 | 江苏大学 | 一种基于双目视觉的猪只体重测量及饮水行为识别系统及方法 |
CN114049137A (zh) * | 2021-11-25 | 2022-02-15 | 国农(重庆)生猪大数据产业发展有限公司 | 一种基于区块链的生猪运营用溯源系统 |
CN114170292A (zh) * | 2021-10-27 | 2022-03-11 | 广州华农大智慧农业科技有限公司 | 一种基于深度图像的猪只体重估测方法和设备 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100498213C (zh) * | 2007-07-25 | 2009-06-10 | 中国农业大学 | 一种利用双目视觉技术监测猪生长的方法 |
US8755570B2 (en) * | 2011-04-27 | 2014-06-17 | Steve Gomas | Apparatus and method for estimation of livestock weight |
US10701905B2 (en) * | 2017-12-06 | 2020-07-07 | International Business Machines Corporation | Imaging and three dimensional reconstruction for weight estimation |
CN108151838B (zh) * | 2017-12-14 | 2020-10-27 | 深圳市沃特沃德股份有限公司 | 体重测量方法和装置 |
CN108319954B (zh) * | 2018-02-12 | 2021-10-22 | 深圳市盈华讯方通信技术有限公司 | 一种无接触测重方法 |
KR102269532B1 (ko) * | 2019-04-19 | 2021-06-25 | 주식회사 일루베이션 | 3차원 이미지를 활용한 가축 무게 측정 시스템 및 이를 이용한 가축 무게 측정 방법 |
CN110426112B (zh) * | 2019-07-04 | 2022-05-13 | 平安科技(深圳)有限公司 | 一种生猪体重测量方法及装置 |
CN213404449U (zh) * | 2020-08-28 | 2021-06-11 | 山西农业大学 | 一种猪饲养系统 |
CN113096178A (zh) * | 2021-04-25 | 2021-07-09 | 中国农业大学 | 猪只体重的估测方法、装置、设备和存储介质 |
CN113808113A (zh) * | 2021-09-23 | 2021-12-17 | 长沙鹏阳信息技术有限公司 | 基于计算机视觉辅助的通道式智能猪群称重与计数方法 |
-
2022
- 2022-10-17 CN CN202211264008.XA patent/CN115331266B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109632058A (zh) * | 2018-12-13 | 2019-04-16 | 北京小龙潜行科技有限公司 | 一种智能养猪群养测重方法、装置、电子设备及存储介质 |
CN111161214A (zh) * | 2019-12-09 | 2020-05-15 | 江苏大学 | 一种基于双目视觉的猪只体重测量及饮水行为识别系统及方法 |
CN114170292A (zh) * | 2021-10-27 | 2022-03-11 | 广州华农大智慧农业科技有限公司 | 一种基于深度图像的猪只体重估测方法和设备 |
CN114049137A (zh) * | 2021-11-25 | 2022-02-15 | 国农(重庆)生猪大数据产业发展有限公司 | 一种基于区块链的生猪运营用溯源系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115331266A (zh) | 2022-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110659636B (zh) | 基于深度学习的指针式仪表读数识别方法 | |
CN100361131C (zh) | 信息处理设备、信息处理方法 | |
CN111914635B (zh) | 人体测温方法、装置、系统和电子设备 | |
CN115331266B (zh) | 一种猪只唯一化识别去重警报方法 | |
CN113856186B (zh) | 一种引体向上动作判定与计数的方法、系统及装置 | |
CN105894002B (zh) | 一种基于机器视觉的仪表示数识别方法 | |
US10776978B2 (en) | Method for the automated identification of real world objects | |
CN109598229A (zh) | 基于动作识别的监控系统及其方法 | |
CN104616002A (zh) | 用于年龄段判断的面部识别设备 | |
CN108764210B (zh) | 一种基于参照物的猪重识别的方法及系统 | |
CN113537175B (zh) | 一种基于计算机视觉的同栏猪群平均体重估算方法 | |
CN109840480B (zh) | 一种智能手表的交互方法及交互系统 | |
CN111695405A (zh) | 一种狗脸特征点的检测方法、装置、系统及存储介质 | |
CN113597614A (zh) | 图像处理方法和装置、电子设备及存储介质 | |
CN114049325A (zh) | 轻量化人脸口罩佩戴检测模型的构建方法及应用 | |
CN109238264A (zh) | 一种家畜位置姿势归一化方法及装置 | |
CN110148234B (zh) | 校园刷脸接送交互方法、存储介质及系统 | |
CN116392800A (zh) | 一种基于目标检测和图像处理的立定跳远测距方法及系统 | |
CN109858363B (zh) | 一种狗鼻纹特征点的检测方法、装置、系统及存储介质 | |
CN116580359A (zh) | 基于时空特征的施工人员重度疲劳检测系统及方法 | |
CN115937971A (zh) | 一种举手投票识别方法及装置 | |
CN115797972A (zh) | 一种居于ai图像识别判定四肢运动能力的系统 | |
CN115331308A (zh) | 一种适用于婴儿运动姿势的识别方法 | |
CN113449674B (zh) | 一种猪脸识别方法及系统 | |
CN114202530A (zh) | 分析损伤程度的方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |