CN113047729A - 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质 - Google Patents

一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质 Download PDF

Info

Publication number
CN113047729A
CN113047729A CN202110401324.6A CN202110401324A CN113047729A CN 113047729 A CN113047729 A CN 113047729A CN 202110401324 A CN202110401324 A CN 202110401324A CN 113047729 A CN113047729 A CN 113047729A
Authority
CN
China
Prior art keywords
voiceprint
instruction
human body
module
agent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110401324.6A
Other languages
English (en)
Inventor
薛寒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dilu Technology Co Ltd
Original Assignee
Dilu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dilu Technology Co Ltd filed Critical Dilu Technology Co Ltd
Priority to CN202110401324.6A priority Critical patent/CN113047729A/zh
Publication of CN113047729A publication Critical patent/CN113047729A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J5/00Doors
    • B60J5/10Doors arranged at the vehicle rear
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E05F15/76Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects responsive to devices carried by persons or objects, e.g. magnets or reflectors
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E05F2015/763Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects using acoustical sensors
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E05F2015/765Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects using optical sensors
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E05F2015/767Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects using cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Lock And Its Accessories (AREA)

Abstract

本发明提供了一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及储存介质,控制系统包括人体检测模块、声纹识别模块、控制模块以及尾门驱动模块,本发明通过安装在尾门的人体检测模块与声纹识别模块,识别分析实际使用人的对应姿态是否为不方便启闭后尾门,若是则通过语音识别判断实际使用人是否有打开后尾门的声纹指令,若有声纹控制指令,则处理器执行模块控制打开汽车尾门,整个控制系统还包括控制模块和尾门驱动模块,用于执行启闭尾门动作。使得汽车尾门打开的实际使用的场景应用更加的贴近用户的生活,诠释出车为人服务的生活理念。

Description

一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方 法、设备及存储介质
技术领域
本发明涉及车辆自动控制技术领域,具体涉及一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质。
背景技术
目前汽车的智能化研究越来越成熟,汽车智能化的范围也越来越广泛,汽车后尾门是用于车辆后方储物空间的车门,目前汽车后尾门的打开是通过手动按动尾门按钮进行打开和脚踢感应打开来完成的。传统的手动启闭后尾门:当用户从车内向外搬运大件物品时或双手搬运大件物品搬到车上时,双手因搬运东西无法进行手动打开后尾门。其次脚踢感应打开后尾门:当用户搬运大件物品,双脚均站立也无法轻松的通过脚踢感应进行打开后尾门,况且脚踢感应的安全性弊端也较多,比如在自动停车场当传动臂伸进汽车底部时,感应器感应到传动臂的划过从而会触了后备箱感应开关,导致在汽车传送过程中后备箱被打开从而造成了车辆的损毁,而且脚踢电动尾门电子部件较多在安装与后期维护成本都比较高。因此在此场景下,打开后尾门比较费时费力安全性较低且体验度较差,在车辆智能化越来越完善的今天此场景的不和谐显得格外突出。
发明内容
为解决上述问题,本发明提供了一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质。
为实现上述目的,本发明的技术方案为:
一种基于人体检测和声纹识别启闭汽车尾门的控制系统,包括:
人体检测模块,被配置为检测其覆盖区域内的行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体,若是则判断行为人是否方便手动打开尾门;
声纹识别模块,被配置为当人体检测模块判定行为人不方便手动打开尾门时,判断行为人是否发出打开尾门的声纹指令,当行为人发出声纹指令时判断所述声纹指令与预设声纹指令是否匹配;
控制模块,被配置为接收声纹识别模块的判断结果并执行与所述预设声纹指令相匹配的控制指令;
尾门驱动模块,被配置为执行包含启动尾门的控制指令。
进一步的,所述人体检测模块具有图像获取模块、身份识别模块以及动作识别模块,所述图像获取模块通过外置摄像头获取行为人的人体特征信息和人体姿势信息,所述身份识别模块将所述人体特征信息与预设车辆使用人的人体特征信息进行匹配,当匹配结果是行为人为车辆使用人时,所述动作识别模块根据人体姿势信息识别所述行为人是否方便手动打开尾门。
进一步的,所述人体特征信息包括头、肩膀、手以及脚的第一特征信息,所述人体姿势信息包括举手、半蹲、弯腰、手拎物品、搬运物品以及跳跃的第二特征信息。
进一步的,所述声纹识别模块具有声纹信息获取模块与声纹信息识别模块,所述声纹信息获取模块通过外置麦克风获取行为人的声纹指令,所述声纹信息识别模块将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,所述声纹信息识别模块将匹配结果发送至控制模块。
一种基于人体检测和声纹识别启闭汽车尾门的控制方法,包括如下步骤:
获取行为人的人体特征信息和人体姿势信息;
检测行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体;若当前时刻行为人的动作姿态为搬运物体,则判断行为人是否方便手动打开尾门;
若行为人不方便手动打开尾门,则获取行为人的声纹指令;
将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,输出匹配结果;
根据匹配结果发送控制指令;
根据控制指令打开或关闭尾门。
进一步的,所述预设声纹指令包括打开尾门指令、关闭尾门指令以及车辆使用人的声纹特征信息。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现基于人体检测和声纹识别启闭汽车尾门的控制方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现基于人体检测和声纹识别启闭汽车尾门的控制方法的步骤。
与现有技术相比,本发明的有益效果在于:
本发明通过安装在尾门的人体检测模块与声纹识别模块,识别分析实际使用人的对应姿态是否为不方便启闭后尾门,若是则通过语音识别判断实际使用人是否有打开后尾门的声纹指令,若有声纹控制指令,则处理器执行模块控制打开汽车尾门,整个控制系统还包括控制模块和尾门驱动模块。使得汽车尾门打开的实际使用的场景应用更加的贴近用户的生活,诠释出车为人服务的生活理念。
附图说明
图1为本发明实施例中基于人体检测和声纹识别启闭汽车尾门的控制系统结构示意图。
图2为本发明实施例中基于人体检测和声纹识别启闭汽车尾门的控制方法步骤流程图。
具体实施方式
下面结合附图详述本发明的实施例,实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
实施例:
请参阅图1,本发明实施例提供了一种基于人体检测和声纹识别启闭汽车尾门的控制系统,包括人体检测模块、声纹识别模块、控制模块以及尾门驱动模块,其中,人体检测模块被配置为检测其覆盖区域内的行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体,若是则判断行为人是否方便手动打开尾门;声纹识别模块被配置为当人体检测模块判定行为人不方便手动打开尾门时,判断行为人是否发出打开尾门的声纹指令,当行为人发出声纹指令时判断所述声纹指令与预设声纹指令是否匹配;控制模块被配置为接收声纹识别模块的判断结果并执行与所述预设声纹指令相匹配的控制指令;尾门驱动模块被配置为执行包含启动尾门的控制指令。
所述人体检测模块具有图像获取模块、身份识别模块以及动作识别模块,所述图像获取模块通过外置摄像头获取行为人的人体特征信息和人体姿势信息,所述身份识别模块将所述人体特征信息与预设车辆使用人的人体特征信息进行匹配,当匹配结果是行为人为车辆使用人时,所述动作识别模块根据人体姿势信息识别所述行为人是否方便手动打开尾门。
所述人体特征信息包括头、肩膀、手以及脚的第一特征信息,所述人体姿势信息包括举手、半蹲、弯腰、手拎物品、搬运物品以及跳跃的第二特征信息。
所述声纹识别模块具有声纹信息获取模块与声纹信息识别模块,所述声纹信息获取模块通过外置麦克风获取行为人的声纹指令,所述声纹信息识别模块将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,所述声纹信息识别模块将匹配结果发送至控制模块。
请参阅图2,本发明实施例还提供了一种基于人体检测和声纹识别启闭汽车尾门的控制方法,包括如下步骤:
步骤1:获取行为人的人体特征信息和人体姿势信息;
步骤2:检测行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体;若当前时刻行为人的动作姿态为搬运物体,则判断行为人是否方便手动打开尾门;
步骤3:若行为人不方便手动打开尾门,则获取行为人的声纹指令;
步骤4:将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,输出匹配结果;
步骤5:根据匹配结果发送控制指令;
步骤6:根据控制指令打开或关闭尾门。
所述预设声纹指令包括打开尾门指令、关闭尾门指令以及车辆使用人的声纹特征信息。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种基于人体检测和声纹识别启闭汽车尾门的控制系统,其特征在于,包括:
人体检测模块,被配置为检测其覆盖区域内的行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体,若是则判断行为人是否方便手动打开尾门;
声纹识别模块,被配置为当人体检测模块判定行为人不方便手动打开尾门时,判断行为人是否发出打开尾门的声纹指令,当行为人发出声纹指令时判断所述声纹指令与预设声纹指令是否匹配;
控制模块,被配置为接收声纹识别模块的判断结果并执行与所述预设声纹指令相匹配的控制指令;
尾门驱动模块,被配置为执行包含启闭尾门的控制指令。
2.根据权利要求1所述的基于人体检测和声纹识别启闭汽车尾门的控制系统,其特征在于:所述人体检测模块具有图像获取模块、身份识别模块以及动作识别模块,所述图像获取模块通过外置摄像头获取行为人的人体特征信息和人体姿势信息,所述身份识别模块将所述人体特征信息与车辆使用人的人体特征信息进行匹配,当匹配结果是行为人为车辆使用人时,所述动作识别模块根据人体姿势信息识别所述行为人是否方便手动打开尾门。
3.根据权利要求2所述的基于人体检测和声纹识别启闭汽车尾门的控制系统,其特征在于:所述人体特征信息包括头、肩膀、手以及脚的第一特征信息,所述人体姿势信息包括举手、半蹲、弯腰、手拎物品、搬运物品以及跳跃的第二特征信息。
4.根据权利要求1所述的基于人体检测和声纹识别启闭汽车尾门的控制系统,其特征在于:所述声纹识别模块具有声纹信息获取模块与声纹信息识别模块,所述声纹信息获取模块通过外置麦克风获取行为人的声纹指令,所述声纹信息识别模块将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,所述声纹信息识别模块将匹配结果发送至控制模块。
5.一种基于人体检测和声纹识别启闭汽车尾门的控制方法,其特征在于包括如下步骤:
获取行为人的人体特征信息和人体姿势信息;
检测行为人是否为车辆使用人,若是则判断当前时刻行为人的动作姿态是否为搬运物体;若当前时刻行为人的动作姿态为搬运物体,则判断行为人是否方便手动打开尾门;
若行为人不方便手动打开尾门,则获取行为人的声纹指令;
将行为人的声纹指令与预设声纹指令进行匹配,当匹配结果是行为人为车辆使用人时,输出匹配结果;
根据匹配结果发送控制指令;
根据控制指令打开或关闭尾门。
6.根据权利要求5所述的基于人体检测和声纹识别启闭汽车尾门的控制方法,其特征在于:所述预设声纹指令包括打开尾门指令、关闭尾门指令以及车辆使用人的声纹特征信息。
7.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求5和6任一项所述的基于人体检测和声纹识别启闭汽车尾门的控制方法的步骤。
8.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求5和6任一项所述的基于人体检测和声纹识别启闭汽车尾门的控制方法的步骤。
CN202110401324.6A 2021-04-14 2021-04-14 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质 Pending CN113047729A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110401324.6A CN113047729A (zh) 2021-04-14 2021-04-14 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110401324.6A CN113047729A (zh) 2021-04-14 2021-04-14 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质

Publications (1)

Publication Number Publication Date
CN113047729A true CN113047729A (zh) 2021-06-29

Family

ID=76519658

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110401324.6A Pending CN113047729A (zh) 2021-04-14 2021-04-14 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113047729A (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106593174A (zh) * 2017-01-09 2017-04-26 广东东箭汽车用品制造有限公司 一种汽车、电动尾门开合控制方法及装置
CN106882023A (zh) * 2017-03-16 2017-06-23 广州汽车集团股份有限公司 汽车尾门开启控制系统、方法和装置
CN108876998A (zh) * 2018-06-13 2018-11-23 上海快鱼电子有限公司 基于生物特征识别的人证合一的门禁实现方法和系统
CN109785471A (zh) * 2018-10-30 2019-05-21 长城汽车股份有限公司 车辆及其后背门的控制方法、控制装置
CN110126783A (zh) * 2019-06-10 2019-08-16 奇瑞汽车股份有限公司 车辆控制方法及装置
CN110176232A (zh) * 2019-04-01 2019-08-27 广州市安路宝电子科技有限公司 一种汽车尾门声控电路及其控制方法
CN110242151A (zh) * 2019-05-13 2019-09-17 浙江吉利控股集团有限公司 一种汽车尾门自动关闭控制方法、装置及汽车
CN110593707A (zh) * 2019-08-08 2019-12-20 广汽蔚来新能源汽车科技有限公司 尾门控制方法、装置、系统、计算机设备和存储介质
CN111703510A (zh) * 2020-06-22 2020-09-25 潍坊歌尔微电子有限公司 语音采集装置、尾门控制装置及尾门控制方法
CN111736500A (zh) * 2020-05-21 2020-10-02 宁波吉利汽车研究开发有限公司 一种车辆尾门开启的控制方法、装置、系统、设备及介质
US20210046900A1 (en) * 2019-08-15 2021-02-18 Volkswagen Aktiengesellschaft Method for door or tailgate operation in a vehicle, authentication element and vehicle

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106593174A (zh) * 2017-01-09 2017-04-26 广东东箭汽车用品制造有限公司 一种汽车、电动尾门开合控制方法及装置
CN106882023A (zh) * 2017-03-16 2017-06-23 广州汽车集团股份有限公司 汽车尾门开启控制系统、方法和装置
CN108876998A (zh) * 2018-06-13 2018-11-23 上海快鱼电子有限公司 基于生物特征识别的人证合一的门禁实现方法和系统
CN109785471A (zh) * 2018-10-30 2019-05-21 长城汽车股份有限公司 车辆及其后背门的控制方法、控制装置
CN110176232A (zh) * 2019-04-01 2019-08-27 广州市安路宝电子科技有限公司 一种汽车尾门声控电路及其控制方法
CN110242151A (zh) * 2019-05-13 2019-09-17 浙江吉利控股集团有限公司 一种汽车尾门自动关闭控制方法、装置及汽车
CN110126783A (zh) * 2019-06-10 2019-08-16 奇瑞汽车股份有限公司 车辆控制方法及装置
CN110593707A (zh) * 2019-08-08 2019-12-20 广汽蔚来新能源汽车科技有限公司 尾门控制方法、装置、系统、计算机设备和存储介质
US20210046900A1 (en) * 2019-08-15 2021-02-18 Volkswagen Aktiengesellschaft Method for door or tailgate operation in a vehicle, authentication element and vehicle
CN111736500A (zh) * 2020-05-21 2020-10-02 宁波吉利汽车研究开发有限公司 一种车辆尾门开启的控制方法、装置、系统、设备及介质
CN111703510A (zh) * 2020-06-22 2020-09-25 潍坊歌尔微电子有限公司 语音采集装置、尾门控制装置及尾门控制方法

Similar Documents

Publication Publication Date Title
CN106951842A (zh) 汽车后备箱智能开启系统及方法
CN107921849A (zh) 车辆前车门电力打开系统
CN107472195A (zh) 一种基于人脸图像追踪识别的车门自动开启系统及方法
CN109559416B (zh) 一种基于人脸识别及手势识别的车锁控制系统
JP2015017495A (ja) パワートランクまたはパワーテールゲート制御システム
CN205737725U (zh) 一种汽车后备箱自动开启系统及车辆
US11624229B2 (en) Vehicle control device and method of operating an opening and closing body
CN109003604A (zh) 一种实现低功耗待机的语音识别方法及系统
CN107337066A (zh) 一种电梯防夹安全控制器
CN113047729A (zh) 一种基于人体检测和声纹识别启闭汽车尾门的控制系统、方法、设备及存储介质
CN203198842U (zh) 一种基于汽车车门的提示系统
KR101962891B1 (ko) 트렁크 자동 열림 장치 및 방법
CN205363921U (zh) 一种新型智能机器人
CN113053000A (zh) 一种全自动智能锁管理方法及系统
CN207966025U (zh) 智能酒柜的语音控制系统
CN213683665U (zh) 基于语音识别的电动尾门控制系统
CN113807292A (zh) 一种车辆后背门的控制方法、装置、存储介质及系统
CN115126378A (zh) 一种后备箱辅助系统控制方法
CN104091381A (zh) 汽车无钥匙开、关门系统
CN205405644U (zh) 智能机器人
CN205930164U (zh) 一种客车车门
CN204913914U (zh) 一种能够快速启动的老人用智能机器人
CN109941854A (zh) 一种用于住宅小区的智能电梯控制系统
CN213948354U (zh) 一种汽车后备箱声控开关电路及汽车
CN111818497A (zh) 一种电动尾门自动开启系统、方法、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210629

RJ01 Rejection of invention patent application after publication