CN113259521A - 基于5g的人脸识别音视频通话电话机及其通讯方法 - Google Patents

基于5g的人脸识别音视频通话电话机及其通讯方法 Download PDF

Info

Publication number
CN113259521A
CN113259521A CN202110694770.0A CN202110694770A CN113259521A CN 113259521 A CN113259521 A CN 113259521A CN 202110694770 A CN202110694770 A CN 202110694770A CN 113259521 A CN113259521 A CN 113259521A
Authority
CN
China
Prior art keywords
module
audio
control module
video
voip
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110694770.0A
Other languages
English (en)
Inventor
邵伟劭
苏冠军
邓忠波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANDONG KAER ELECTRIC CO Ltd
Original Assignee
SHANDONG KAER ELECTRIC CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANDONG KAER ELECTRIC CO Ltd filed Critical SHANDONG KAER ELECTRIC CO Ltd
Priority to CN202110694770.0A priority Critical patent/CN113259521A/zh
Publication of CN113259521A publication Critical patent/CN113259521A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/253Telephone sets using digital voice transmission
    • H04M1/2535Telephone sets using digital voice transmission adapted for voice communication over an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/006Networks other than PSTN/ISDN providing telephone service, e.g. Voice over Internet Protocol (VoIP), including next generation networks with a packet-switched transport layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/006Networks other than PSTN/ISDN providing telephone service, e.g. Voice over Internet Protocol (VoIP), including next generation networks with a packet-switched transport layer
    • H04M7/0078Security; Fraud detection; Fraud prevention

Abstract

本发明提供一种基于5G的人脸识别音视频通话电话机及其通讯方法,其包括融合调度主控模块、VOIP通讯控制模块、5G通讯控制模块、人脸识别模块、音频控制通道、视频采集模块、视频显示模块、手柄和按键模块、VOIP音视频数据编解码和AT指令发送模块。其解决了现有通讯方式需要多台电话机来实现音视频通话和用户验证等功能,造成成本高、使用不方便、不实用的技术问题。本发明可广泛应用于通讯领域。

Description

基于5G的人脸识别音视频通话电话机及其通讯方法
技术领域
本发明涉及一种通讯设备及其方法,特别是涉及一种基于5G的人脸识别音视频通话电话机及其通讯方法。
背景技术
近些年,随着电信运营商通讯技术的不断发展,5G已经普及,网络带宽和速度极大增长,同时资费逐渐下降,网络通讯的技术也已逐渐成熟,同时随着技术发展进步,人脸识别作为用户身份验证手段也日益成熟,使用方便且先天规避了使用密码验证用户身份存在的密码泄露、使用密码卡存在丢失风险等安全问题。目前,5G资费逐渐下调,5G已经成为对外的语音沟通的主流方式,同时便宜的网络资费使视频通话成为沟通交流的常用方式。而对于一些国际业务的沟通或支持网络通话客户的音视频沟通则可以以VOIP为主要方式;以及,在需要限制电话使用权限的场景,需要一种简单易行的方法来限制电话使用人员。这样不仅需要多台不同用途的电话机,使用成本高、使用不方便,且不实用。
发明内容
本发明针对现有通讯方式需要多台电话机来实现音视频通话和用户验证等功能,造成成本高、使用不方便、不实用的技术问题,提供一种能够集5G、音视频通话、用户身份验证于一体的基于5G的人脸识别音视频通话电话机及其通讯方法。
为此,本发明的技术方案是,一种基于5G的人脸识别音视频通话电话机,包括融合调度主控模块、VOIP通讯控制模块、5G通讯控制模块、人脸识别模块、音频控制通道、视频采集模块、视频显示模块、手柄和按键模块、VOIP音视频数据编解码和AT指令发送模块;
所述融合调度主控模块分别与所述VOIP通讯控制模块、人脸识别模块的输出端、VOIP音视频数据编解码和AT指令发送模块、视频显示模块、视频采集模块的输出端连接,所述视频显示模块与所述融合调度主控模块的输出端连接,所述5G通讯控制模块分别与所述VOIP音视频数据编解码和AT指令发送模块、音频控制通道连接,所述VOIP音视频数据编解码和AT指令发送模块还与所述VOIP通讯控制模块连接,所述音频控制通道还分别与所述VOIP通讯控制模块、手柄和按键模块连接,所述人脸识别模块与所述视频采集模块的输出端连接。
优选的,还包括虚拟拨号盘模块,所述虚拟拨号盘模块与所述融合调度主控模块连接。
优选的,还设有声音采集和放大模块,所述声音采集和放大模块与所述手柄和按键模块连接。
优选的,所述融合调度主控模块包括主控CPU、Flash存储和通讯接口,所述Flash存储和通讯接口分别与所述主控CPU连接。
一种基于5G的人脸识别音视频通话的通讯方法,包括以下步骤:
步骤1,电话机供电初始化;
步骤2,应用融合调度主控模块检测是否有摘机信号,若检测到摘机信号,则进入步骤3;若未检测到摘机信号,则重复步骤2;
步骤3,应用人脸识别模块对当前用户进行人脸识别,如果识别出用户则进行步骤4;如果不能识别用户则返回步骤2;
步骤4,手柄和按键模块发出模拟摘机音;
步骤5,虚拟拨号盘模块发送拨号信息给融合调度主控模块;
步骤6,融合调度主控模块判断检测到的拨号信号是否为5G号码,如果是,则进入步骤7;如果不是5G号码,则进入步骤8;
步骤7,融合调度主控模块发送指令到VOIP音视频数据编解码和AT指令发送模块控制5G通讯控制模块工作进行语音通话,同时融合调度主控模块判断检测到的拨号信号是否为视频拨号,如果是,融合调度主控模块控制视频采集模块工作以进行视频通话;
步骤8,融合调度主控模块判断检测到的拨号信号是否为VOIP号码,如果是,则进入步骤9;如果不是则返回步骤5;
步骤9,融合调度主控模块发送指令到VOIP音视频数据编解码和AT指令发送模块控制VOIP通讯控制模块工作进行语音通话,同时融合调度主控模块判断检测到的拨号信号是否为视频拨号,如果是视频拨号,融合调度主控模块控制视频采集模块和视频显示模块工作进行视频通话。
优选的,所述步骤4中,融合调度主控模块通过音频控制通道控制手柄和按键模块发出模拟450Hz摘机音。
优选的,所述VOIP号码由VOIP平台提供。
本发明有益效果是,
(1)本申请方案的电话机可以同时具备5G、VOIP通信功能,同时支持音频通话和视频通话,并能通过人脸识别进行用户身份验证,一台电话机可替代传统的两台电话机,使用方便、成本低,用户身份验证过程简单方便,有效避免密码验证带来的安全隐患;
(2)可以根据用户的不同需求选择不同的通话模式,给客户提供更加经济、方便、实用的服务,大大节约了用户的通话成本,提高了用户的工作效率,节省了用户的使用空间。
附图说明
图1是本发明实施例的系统框架示意图。
图2是本发明实施例的通讯方法流程示意图。
图中符号说明:
10.融合调度主控模块;20.音频控制通道;30. 5G通讯控制模块;40. VOIP音视频数据编解码和AT指令发送模块;50.VOIP通讯控制模块;60.手柄和按键;70.声音采集和放大模块;80.人脸识别模块;90.视频采集模块;100.视频显示模块;110.虚拟拨号盘模块。
具体实施方式
下面结合实施例对本发明做进一步描述。
如图1所示,一种基于5G的人脸识别音视频通话电话机,包括融合调度主控模块10、VOIP通讯控制模块50、5G通讯控制模块30、人脸识别模块80、音频控制通道20、视频采集模块90、视频显示模块100、手柄和按键模块60、VOIP音视频数据编解码和AT指令发送模块40、虚拟拨号盘模块110、声音采集和放大模块70,融合调度主控模块10包括主控CPU、Flash存储和通讯接口,Flash存储和通讯接口分别与主控CPU连接;5G通讯控制模块30连接有SIM卡。
融合调度主控模块10分别与VOIP通讯控制模块50、人脸识别模块80的输出端、VOIP音视频数据编解码和AT指令发送模块40、视频采集模块90的输出端连接,视频显示模块100与融合调度主控模块10的输出端连接,人脸识别模块80与视频采集模块90的输出端连接。5G通讯控制模块30分别与VOIP音视频数据编解码和AT指令发送模块40、音频控制通道20连接,VOIP音视频数据编解码和AT指令发送模块40还与VOIP通讯控制模块50连接,音频控制通道20还分别与VOIP通讯控制模块50、手柄和按键模块60连接,人脸识别模块80与视频采集模块90的输入端连接,声音采集和放大模块70与手柄和按键模块60连接。
VOIP通讯控制模块50通过串口与融合调度主控模块10的主控CPU连接,VOIP音视频数据编解码和AT指令发送模块40与融合调度主控模块10的通讯接口连接,视频显示模块100与融合调度主控模块10的通讯接口连接,VOIP音视频数据编解码和AT指令发送模块40解码的视频信号传送给融合调度主控模块10,融合调度主控模块10传送视频信号给视频显示模块100显示视频。
视频采集模块90与融合调度主控模块10的通讯接口连接,5G通讯控制模块30设有USB接口和天线,5G通讯控制模块30由5G通讯子单元和5G语音子单元构成,5G语音子单元集成在5G模块内部完成音频的采集,5G通讯子单元与VOIP音视频数据编解码和AT指令发送模块40通过串口进行连接,实现摘机拨号等动作的传递,5G通讯子单元通过USB口连接实现AT指令拨号、接通、挂机等功能。
融合调度主控模块10的主控CPU与音频控制通道20连接。音频控制通道20设有电子开关,该电子开关与融合调度主控模块10的主控CPU连接,主控CPU通过控制电子开关的动作以选择VOIP通讯控制模块50或5G通讯控制模块30输出信号传送给手柄和按键模块60。视频采集模块90采集到的视频信号传送给融合调度主控模块10,由融合调度主控模块10传送给VOIP音视频数据编解码和AT指令发送模块40进行编码后传送给VOIP通讯控制模块50或5G通讯控制模块30。
融合调度主控模块10采用ARM级CPU(如MT6762),可以实现控制调度功能,可用于检测虚拟拨号盘模块110的按键、通过音频控制通道20控制手柄和按键模块发出模拟450Hz摘机音及模拟拨号音等。融合调度主控模块10在软件上可以实现电话本、通话记录、短信记录等信息的保存、查询等功能。
VOIP通讯控制模块50由网络通讯子单元、VOIP语音子单元构成,通过由软件在安卓系统内部实现。网络通讯子单元可以通过LAN(有线网口)、WIFI和5G连接网络,VOIP语音子单元的语音采集部分由声音采集和放大模块采集经手柄和按键模块60中转传输到VOIP通讯控制模块50,语音的压缩传输由安卓APP应用软件实现。
VOIP音视频数据编解码和AT指令发送模块40实现的功能是将手柄和按键模块60采集来的模拟语音信号和视频采集模块90采集的视频信号进行数字化、然后将数字化的数据进行编码,编码方式采用国际电信联盟(ITU-T)制定的G711音频编码和由ITU-T视频编码专家组(VCEG)和ISO/IEC动态图像专家组(MPEG)联合组成的联合视频组(JVT,Joint VideoTeam)制定的H264视频编码,最后通过网络进行数据的交互;而从网络上接收到的网络数据在VOIP音视频数据编解码和AT指令发送模块40中经过G711解码后将数字音频信号模拟化通过手柄和按键模块60连接的声音采集和放大模块70播放并将视频信号经H264解码后通过视频显示模块100显示出来。
VOIP音视频数据编解码和AT指令发送模块40还具有AT指令的控制作用,在接收到主控CPU的摘机、拨号、通话、挂机等操作指令后会通过USB接口向5G通讯控制模块30发送相应的AT指令实现呼叫通话的功能,VOIP音视频数据编解码和AT指令发送模块40还会接收来自5G通讯控制模块40的振铃、来电、通话、挂机等AT指令,然后做出相应的AT指令响应并完成被叫通话的功能。
如图2所示,一种基于5G的人脸识别音视频通话的通讯方法,包括以下步骤:
步骤1,电话机供电初始化;
步骤2,应用融合调度主控模块10检测是否有摘机信号,若检测到摘机信号,则进入步骤3;若未检测到摘机信号,则重复步骤2;
步骤3,应用人脸识别模块80对当前用户进行人脸识别,如果识别出用户则进行步骤4;如果不能识别用户则返回步骤2;
步骤4,手柄和按键模块60发出模拟摘机音:融合调度主控模块10通过音频控制通道20控制手柄和按键模块60发出模拟450Hz摘机音;
步骤5,虚拟拨号盘模块110发送拨号信息给融合调度主控模块10;
步骤6,融合调度主控模块10判断检测到的拨号信号是否为5G号码,如果是,则进入步骤7;如果不是5G号码,则进入步骤8;
步骤7,融合调度主控模块10发送指令到VOIP音视频数据编解码和AT指令发送模块40控制5G通讯控制模块30工作进行语音通话,同时融合调度主控模块10判断检测到的拨号信号是否为视频拨号,如果是视频拨号,融合调度主控模块10控制视频采集模块90和视频显示模块100工作以进行视频通话;其中,5G号码由运营商预先设定,可以为130、131、132、124、135、138、139、0开头的号码(比如010、0631)、400电话号码以及110、112、114、119号码等;
步骤8,融合调度主控模块10判断检测到的拨号信号是否为VOIP号码,如果是,发送指令到VOIP音视频数据编解码和AT指令发送模块40控制VOIP通讯控制模块50工作进行语音通话,同时融合调度主控模块10判断检测到的拨号信号是否为视频拨号,如果是视频拨号,融合调度主控模块10控制视频采集模块90和视频显示模块100工作以进行视频通话;如果不是VOIP号码,则返回步骤5,其中,VOIP号码由VOIP平台提供,VOIP的号码根据不同的平台会有不同的规则,如716130开头的号码等。
步骤7和步骤8中所涉及的5G号码和VOIP号码均存储在融合调度主控模块10的flash存储中,上述各种号码可以根据现场实际应用的不同进行修改,因此灵活性和适应性非常的强。
本申请方案的电话机同时具备5G、VOIP通信功能,同时支持音频通话和视频通话,并能通过人脸识别进行用户身份验证,一台电话机可替代传统的三台电话机,使用方便、成本低,用户身份验证过程简单方便,有效避免密码验证带来的安全隐患;用户采用该电话机能够在输入号码后点击不同拨号按键自由选择不同的通话方式,可以实现通过5G通讯信道拨打5G电话,或通过VOIP拨打网络电话,十分方便用户的操作,同时音频通话或视频通话由用户自行选择,以便用户根据带宽和资费自行决定。本申请技术方案可以实现根据用户的不同需求选择不同的通话模式,给客户提供更加经济、方便、实用的服务,大大节约了用户的通话成本,提高了用户的工作效率,节省了用户的使用空间。
惟以上所述者,仅为本发明的具体实施例而已,当不能以此限定本发明实施的范围,故其等同组件的置换,或依本发明专利保护范围所作的等同变化与修改,皆应仍属本发明权利要求书涵盖之范畴。

Claims (7)

1.一种基于5G的人脸识别音视频通话电话机,其特征在于,包括融合调度主控模块、VOIP通讯控制模块、5G通讯控制模块、人脸识别模块、音频控制通道、视频采集模块、视频显示模块、手柄和按键模块、VOIP音视频数据编解码和AT指令发送模块;
所述融合调度主控模块分别与所述VOIP通讯控制模块、人脸识别模块的输出端、VOIP音视频数据编解码和AT指令发送模块、视频显示模块、视频采集模块的输出端连接,所述视频显示模块与所述融合调度主控模块的输出端连接,所述5G通讯控制模块分别与所述VOIP音视频数据编解码和AT指令发送模块、音频控制通道连接,所述VOIP音视频数据编解码和AT指令发送模块还与所述VOIP通讯控制模块连接,所述音频控制通道还分别与所述VOIP通讯控制模块、手柄和按键模块连接,所述人脸识别模块与所述视频采集模块的输出端连接。
2.根据权利要求1所述的基于5G的人脸识别音视频通话电话机,其特征在于,所述还包括虚拟拨号盘模块,所述虚拟拨号盘模块与所述融合调度主控模块连接。
3.根据权利要求1所述的基于5G的人脸识别音视频通话电话机,其特征在于,还设有声音采集和放大模块,所述声音采集和放大模块与所述手柄和按键模块连接。
4.根据权利要求1所述的基于5G的人脸识别音视频通话电话机,其特征在于,所述融合调度主控模块包括主控CPU、Flash存储和通讯接口,所述Flash存储和通讯接口分别与所述主控CPU连接。
5.一种如权利要求1-4任一所述的基于5G的人脸识别音视频通话的通讯方法,其特征在于,其包括以下步骤:
步骤1,电话机供电初始化;
步骤2,应用融合调度主控模块检测是否有摘机信号,若检测到摘机信号,则进入步骤3;若未检测到摘机信号,则重复步骤2;
步骤3,应用人脸识别模块对当前用户进行人脸识别,如果识别出用户则进行步骤4;如果不能识别用户则返回步骤2;
步骤4,手柄和按键模块发出模拟摘机音;
步骤5,虚拟拨号盘模块发送拨号信息给融合调度主控模块;
步骤6,融合调度主控模块判断检测到的拨号信号是否为5G号码,如果是,则进入步骤7;如果不是5G号码,则进入步骤8;
步骤7,融合调度主控模块发送指令到VOIP音视频数据编解码和AT指令发送模块控制5G通讯控制模块工作进行语音通话,同时融合调度主控模块判断检测到的拨号信号是否为视频拨号,如果是,融合调度主控模块控制视频采集模块工作以进行视频通话;
步骤8,融合调度主控模块判断检测到的拨号信号是否为VOIP号码,如果是,则进入步骤9;如果不是则返回步骤5;
步骤9,融合调度主控模块发送指令到VOIP音视频数据编解码和AT指令发送模块控制VOIP通讯控制模块工作进行语音通话,同时融合调度主控模块判断检测到的拨号信号是否为视频拨号,如果是,融合调度主控模块控制视频采集模块工作进行视频通话。
6.根据权利要求5所述的基于5G的人脸识别音视频通话的通讯方法,其特征在于,所述步骤4中,融合调度主控模块通过音频控制通道控制手柄和按键模块发出模拟450Hz摘机音。
7.根据权利要求5所述的基于5G的人脸识别音视频通话的通讯方法,其特征在于,步骤8中,所述VOIP号码由VOIP平台提供。
CN202110694770.0A 2021-06-23 2021-06-23 基于5g的人脸识别音视频通话电话机及其通讯方法 Pending CN113259521A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110694770.0A CN113259521A (zh) 2021-06-23 2021-06-23 基于5g的人脸识别音视频通话电话机及其通讯方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110694770.0A CN113259521A (zh) 2021-06-23 2021-06-23 基于5g的人脸识别音视频通话电话机及其通讯方法

Publications (1)

Publication Number Publication Date
CN113259521A true CN113259521A (zh) 2021-08-13

Family

ID=77189216

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110694770.0A Pending CN113259521A (zh) 2021-06-23 2021-06-23 基于5g的人脸识别音视频通话电话机及其通讯方法

Country Status (1)

Country Link
CN (1) CN113259521A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100066083A (ko) * 2008-12-09 2010-06-17 김동우 무선랜을 이용한 3g 스마트폰의 화상전화 구현 알고리즘
CN103825805A (zh) * 2014-02-27 2014-05-28 黄晓峰 一种融合话音和数据功能的个人通信系统及实现方法
CN204046692U (zh) * 2014-09-22 2014-12-24 山东卡尔电气股份有限公司 一种由智能手机与双模固定电话机组成的通讯装置
CN105430145A (zh) * 2015-12-09 2016-03-23 山东卡尔电气股份有限公司 融合4g、pstn和voip的智能电话机及通讯方法
CN111314541A (zh) * 2019-12-09 2020-06-19 山东卡尔电气股份有限公司 一种基于人脸识别打电话的方法及其系统
CN212850667U (zh) * 2020-09-25 2021-03-30 深圳三信通讯软件科技有限公司 一种具有pstn和voip的双模组拨号系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100066083A (ko) * 2008-12-09 2010-06-17 김동우 무선랜을 이용한 3g 스마트폰의 화상전화 구현 알고리즘
CN103825805A (zh) * 2014-02-27 2014-05-28 黄晓峰 一种融合话音和数据功能的个人通信系统及实现方法
CN204046692U (zh) * 2014-09-22 2014-12-24 山东卡尔电气股份有限公司 一种由智能手机与双模固定电话机组成的通讯装置
CN105430145A (zh) * 2015-12-09 2016-03-23 山东卡尔电气股份有限公司 融合4g、pstn和voip的智能电话机及通讯方法
CN111314541A (zh) * 2019-12-09 2020-06-19 山东卡尔电气股份有限公司 一种基于人脸识别打电话的方法及其系统
CN212850667U (zh) * 2020-09-25 2021-03-30 深圳三信通讯软件科技有限公司 一种具有pstn和voip的双模组拨号系统

Similar Documents

Publication Publication Date Title
CN100466718C (zh) 混合媒体电信呼叫建立
CN100438624C (zh) 一种基于第三代移动通讯平台上的无线视频监控方法及系统
CN102131305B (zh) 一种语音业务的实现方法和系统
CN100417209C (zh) 用于移动无线电通信的系统和设备
CA2529672A1 (en) Services and transactions in a telephony network
JPH10145761A (ja) 通信途中に通信モードを変更することができる画像電話機及び方法
CN102469293A (zh) 一种在视频业务中获取用户输入信息的实现方法及装置
CN2847716Y (zh) 具有传统电话及网络电话功能的电话机
CN105430145B (zh) 融合4g、pstn和voip的智能电话机及通讯方法
CN113259521A (zh) 基于5g的人脸识别音视频通话电话机及其通讯方法
JPH02113761A (ja) テレビ電話装置
KR20080000719A (ko) 이동통신 시스템에서 화상통화 연결 장치 및 방법
CN1997081B (zh) 一种基于蓝牙接口的无线终端接入方法及其设备
KR20030012745A (ko) 이동통신 단말기의 이미지 송수신 방법 및 시스템
CN102035923A (zh) 一种三网一体电话
US6580922B1 (en) Method of transmitting telephone number in wireless local loop system
CN101998073A (zh) 一种具备电话功能的电视机
CN101754004A (zh) 一种3g可视电话及其工作方法
TWI695612B (zh) 網路協定電視(iptv)電話認證之系統及其方法
JP3137348B2 (ja) 通信装置
KR100572009B1 (ko) 인터넷 통신용 음성통신 단말기, 인터넷 통신 및피에스티엔 통신 겸용 음성통신 단말기
JPH104450A (ja) 赤外線インターフェース機能付き公衆通信装置
KR20000030396A (ko) 일반전화기로 pc를 통한 인터넷 폰을 하기 위한 교환기
KR100406114B1 (ko) 일반 공중 전화망을 이용한 디지털 유선 전화기
KR100564238B1 (ko) 디지털 음성 녹취 시스템 및 이 시스템을 위한 피씨아이모듈

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210813