CN109493859A - 一种语音设备拾音装置和语音空调 - Google Patents

一种语音设备拾音装置和语音空调 Download PDF

Info

Publication number
CN109493859A
CN109493859A CN201811213584.5A CN201811213584A CN109493859A CN 109493859 A CN109493859 A CN 109493859A CN 201811213584 A CN201811213584 A CN 201811213584A CN 109493859 A CN109493859 A CN 109493859A
Authority
CN
China
Prior art keywords
component
microphone array
connecting shaft
soundproof
soundproof plate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811213584.5A
Other languages
English (en)
Other versions
CN109493859B (zh
Inventor
董明珠
张新
毛跃辉
廖湖锋
王慧君
王现林
陶梦春
余明养
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201811213584.5A priority Critical patent/CN109493859B/zh
Publication of CN109493859A publication Critical patent/CN109493859A/zh
Application granted granted Critical
Publication of CN109493859B publication Critical patent/CN109493859B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/50—Control or safety arrangements characterised by user interfaces or communication
    • F24F11/52—Indication arrangements, e.g. displays
    • F24F11/526—Indication arrangements, e.g. displays giving audible indications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166—Microphone arrays; Beamforming

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

本发明涉及音频采集技术领域，公开了一种语音设备拾音装置和语音空调，该语音设备拾音装置包括：架体；麦克风阵列组件，麦克风阵列组件通过连接轴可旋转的安装于架体，麦克风阵列组件可根据声源位置获取位置信号；隔音板组件，隔音板组件包括安装于连接轴且位置可调的两个隔音板，至少一个隔音板可绕连接轴的轴心线旋转，麦克风阵列组件沿连接轴轴心线的周向安装于两个隔音板之间；与麦克风阵列组件和隔音板组件信号连接的驱动组件，驱动组件根据麦克风阵列组件获得的位置信号驱动麦克风阵列组件和隔音板组件动作。该语音设备拾音装置通过对麦克风阵列组件拾音区域的调整和远程识音过程中对噪音的隔离，使得远程环境下语音识别效果更佳。

Description

一种语音设备拾音装置和语音空调
技术领域
本发明涉及音频采集技术领域，特别涉及一种语音设备拾音装置和语音空调。
背景技术
传统的语音识别系统基本为近场识别，如手机、遥控器，由于近场情况下信噪比比较高，信号清晰，识别有效可靠。随着智能家居的发展，远场环境的识别越来越重要，但远场识别不能用手接触设备，噪声比较大，识别效果不理想。
远场环境例如家庭环境下，麦克风阵列一般是固定不可调整，因此当人远离麦克风阵列进行输入时，识别效果差，麦克风拾音区域固定且有限和远程识音过程中存在的较大噪音使得目前远程识别效果不理想。
发明内容
本发明提供了一种语音设备拾音装置和语音空调，上述语音设备拾音装置通过对麦克风阵列组件拾音区域的调整和远程识音过程中对噪音的隔离，使得远程环境下语音识别效果更佳。
为达到上述目的，本发明提供以下技术方案：
一种语音设备拾音装置，包括：
架体；
麦克风阵列组件，所述麦克风阵列组件通过连接轴可旋转的安装于所述架体，所述麦克风阵列组件可根据声源位置获取位置信号；
隔音板组件，所述隔音板组件包括安装于所述连接轴且位置可调的两个隔音板，至少一个所述隔音板可绕所述连接轴的轴心线旋转，所述麦克风阵列组件沿所述连接轴轴心线的周向安装于两个所述隔音板之间；
与所述麦克风阵列组件和所述隔音板组件信号连接的驱动组件，所述驱动组件根据所述麦克风阵列组件获得的位置信号驱动所述麦克风阵列组件和所述隔音板组件动作。
上述语音设备拾音装置中包括架体、麦克风阵列组件、隔音板组件和驱动组件，其中，麦克风阵列组件用于定位声源的位置并获取位置信号，与麦克风阵列组件信号连接的驱动组件根据位置信号驱动麦克风阵列组件旋转至与声源位置相对的位置，以最大限度的收集音频；隔音板组件用于根据声源的距离调节两个隔音板之间张开夹角的度数，以保证夹角之外的音频被隔离，更纯净的音频被麦克风阵列组件拾取，隔音板组件与驱动组件信号连接，驱动组件根据克风阵列组件获取的位置信号控制隔音板组件中两个隔音板之间张开夹角的度数，由此便实现了远场环境下，对麦克风阵列组件拾音区域的调整和远程识音过程中对噪音的隔离，使得远程环境下语音识别效果更佳。
优选地，还包括安装于所述驱动组件的转体。
优选地，所述麦克风阵列组件通过所述转体安装于所述连接轴。
优选地，所述驱动组件包括用于控制所述转体转动以带动所述连接轴转动的第一电机和用于控制所述隔音板组件动作的第二电机。
优选地，所述麦克风阵列组件包括麦克风和连接板，其中，所述连接板安装于所述连接轴，所述麦克风阵列组件安装于所述连接板，所述连接板设置于两个所述隔音板之间。
优选地，所述驱动组件包括用于控制所述连接轴转动的第一电机和用于控制所述隔音板组件动作的第二电机。
优选地，所述连接板的材料为隔音材料。
优选地，所述隔音板组件中，一个所述隔音板固定设置于所述连接轴，另一个绕所述连接轴的轴心线旋转设置于所述连接轴。
优选地，所述隔音板组件中，两个所述隔音板绕所述连接轴的轴心线旋转设置于所述连接轴。
本发明还提供了一种语音空调，包括上述技术方案中提供的任意一种语音设备拾音装置。
附图说明
图1为本发明提供的一种语音设备拾音装置的俯视图示意图；
图2为本发明提供的一种语音设备拾音装置的待唤醒状态下的俯视图示意图；
图3为本发明提供的一种语音设备拾音装置的唤醒状态下的俯视图示意图；
图4为本发明提供的另一种语音设备拾音装置的俯视图示意图；
图5为本发明提供的另一种语音设备拾音装置的主视图示意图。
图标：
1-麦克风阵列组件；2-隔音板组件；3-连接轴；4-转体；5-连接板。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参考图1，本发明提供一种语音设备拾音装置，包括：
架体；
麦克风阵列组件1，麦克风阵列组件1通过连接轴3可旋转的安装于架体，麦克风阵列组件1可根据声源位置获取位置信号；
隔音板组件2，隔音板组件2包括安装于连接轴3且位置可调的两个隔音板，至少一个隔音板可绕连接轴3的轴心线旋转，麦克风阵列组件1沿连接轴3轴心线的周向安装于两个隔音板之间；
与麦克风阵列组件1和隔音板组件2信号连接的驱动组件，驱动组件根据麦克风阵列组件1获得的位置信号驱动麦克风阵列组件1和隔音板组件2动作。
上述语音设备拾音装置中包括架体、麦克风阵列组件1、隔音板组件2和驱动组件，其中，麦克风阵列组件1用于定位声源的位置并获取位置信号，与麦克风阵列组件1信号连接的驱动组件根据位置信号驱动麦克风阵列组件1旋转至与声源位置相对的位置，以最大限度的收集音频；隔音板组件2用于根据声源的距离调节两个隔音板之间张开夹角的度数，以保证夹角之外的音频被隔离，更纯净的音频被麦克风阵列组件1拾取，隔音板组件2与驱动组件信号连接，驱动组件根据克风阵列组件获取的位置信号控制隔音板组件2中两个隔音板之间张开夹角的度数，由此便实现了远场环境下，对麦克风阵列组件1拾音区域的调整和远程识音过程中对噪音的隔离，使得远程环境下语音识别效果更佳。
隔音板组件2包括初始工位、角度调节工位和调节完成工位，当隔音板组件2处于初始工位时，如图2所示，两个隔音板之间张开最大夹角，最大夹角的度数为180°；当隔音板组件2处于角度调节工位时，如图3所示，隔音板组件2动作以调节两个隔音板之间夹角的度数；当隔音板组件2处于调节完成工位时，保持角度调节工位调节后的角度。
本发明提供了一种语音空调，包括上述技术方案中提供的语音设备拾音装置，语音空调在联网后将具备通讯条件，包括待唤醒状态，具体为：语音空调需要用一个唤醒词将其唤醒，唤醒后可在固定的一段时间内进行多轮对话。上述语音设备拾音装置在使用过程中，当语音空调处于待唤醒状态时，隔音板组件2处于初始工位，麦克风阵列组件1的朝向为语音空调的正前方，这样可以保证全方位接收到唤醒命令；用户通过唤醒词唤醒空调后，麦克风阵列组件1可用声源定位方法实现对声源方向的估计并获取位置信号，其中，声源定位方法一般可分为三类,一种是基于TDOA的两步算法(two-stage algorithm)，一种是基于空间谱估计如MUSIC等，还有就是基于beamforming的可控波束响应(steered-responsepower)算法。语音设备拾音装置在通过麦克风阵列组件1获取到位置信号之后，将位置信号传递给驱动装置，并由驱动装置根据位置信号来调整麦克风阵列组件1的朝向以对准声源且调整隔音板组件2的角度为适合的角度，以保证角度之外的音频被隔离，更纯净的音频被麦克风阵列拾取。其中合适的角度可以结合声源与语音设备拾音装置之间的距离来计算，越近角度越大，越远角度越小。考虑到麦克风阵列组件1所占角度，两个隔音板之间的角度范围为大于麦克风阵列组件1所占角度且小于180度。
例如：麦克风阵列组件1所占角度为60度。两个隔音板之间的角度范围为60度至180度。设定用户距离空调的距离为L：
当L<1m时，两个隔音板之间的角度为180度；
当1m<L<3m时，两个隔音板之间的角度为120度；
当3m<L<5m时，两个隔音板之间的角度为90度；
当L>5m时，两个隔音板之间的角度为60度。
具体地，还包括安装于驱动组件的转体4。
具体地，麦克风阵列组件1通过转体4安装于连接轴3。
具体地，驱动组件包括用于控制转体4转动以带动连接轴3转动的第一电机和用于控制隔音板组件2动作的第二电机。
一种实施方式中，语音设备拾音装置包括安装于驱动组件的转体4，麦克风阵列组件1安装于转体4，此时转体4和连接轴3一起带动麦克风阵列组件1转动；其中转体4的形状为环状，隔音板组件2安装于连接轴3，两个隔音板之间形成容纳转体4的间隙。
具体地，如图4和图5所示，麦克风阵列组件1包括麦克风和连接板5，其中，连接板5安装于连接轴3，麦克风阵列组件1安装于连接板5，连接板5设置于两个隔音板之间。
连接板5固定安装于连接轴3，在驱动装置驱动连接轴3转动时带动连接板5转动从而实现麦克风阵列组件1与声源位置相对，以最大限度的收集音频；连接板5设置于两个隔音板之间，两个隔音板根据声源的距离调节两个隔音板之间张开夹角的度数，以保证夹角之外的音频被隔离，更纯净的音频被麦克风阵列组件1拾取。
具体地，驱动组件包括用于控制连接轴3转动的第一电机和用于控制隔音板组件2动作的第二电机。
具体地，连接板5的材料为隔音材料。
连接板5的材料采用隔音材料，增加了语音设备拾音装置的滤噪效果，以便麦克风阵列组件1拾取更纯净的音频。
具体地，隔音板组件2中，一个隔音板固定设置于连接轴3，另一个绕连接轴3的轴心线旋转设置于连接轴3。
在这种实施方式中，活动的隔音板可由第二电机直接驱动其绕连接轴3的轴心线旋转，以调节两个隔音板之间夹角的度数。
具体地，隔音板组件2中，两个隔音板绕连接轴3的轴心线旋转设置于连接轴3。
在这种实施方式中，两个活动的隔音板可设置有连接端，连接端上设置有螺纹孔，两个螺纹孔之间通过一根两端旋向相反的螺纹杆连接，当螺纹杆沿第一方向旋转时，两个隔音板之间的角度减小，当螺纹杆沿与第一方向相反的第二方向旋转时，两个隔音板之间的角度增大，第二电机控制螺纹杆沿第一方向或第二方向旋转。
具体地，两个隔音板采用隔音材料。
两个隔音板采用隔音材料，增加了语音设备拾音装置的滤噪效果，以便麦克风阵列组件1拾取更纯净的音频。显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种语音设备拾音装置，其特征在于，包括：
架体；
麦克风阵列组件，所述麦克风阵列组件通过连接轴可旋转的安装于所述架体，所述麦克风阵列组件可根据声源位置获取位置信号；
隔音板组件，所述隔音板组件包括安装于所述连接轴且位置可调的两个隔音板，至少一个所述隔音板可绕所述连接轴的轴心线旋转，所述麦克风阵列组件沿所述连接轴轴心线的周向安装于两个所述隔音板之间；
与所述麦克风阵列组件和所述隔音板组件信号连接的驱动组件，所述驱动组件根据所述麦克风阵列组件获得的位置信号驱动所述麦克风阵列组件和所述隔音板组件动作。
2.根据权利要求1所述的语音设备拾音装置，其特征在于，还包括安装于所述驱动组件的转体。
3.根据权利要求2所述的语音设备拾音装置，其特征在于，所述麦克风阵列组件通过所述转体安装于所述连接轴。
4.根据权利要求2所述的语音设备拾音装置，其特征在于，所述驱动组件包括用于控制所述转体转动以带动所述连接轴转动的第一电机和用于控制所述隔音板组件动作的第二电机。
5.根据权利要求1或2所述的语音设备拾音装置，其特征在于，所述麦克风阵列组件包括麦克风和连接板，其中，所述连接板安装于所述连接轴，所述麦克风阵列组件安装于所述连接板，所述连接板设置于两个所述隔音板之间。
6.根据权利要求5所述的语音设备拾音装置，其特征在于，所述驱动组件包括用于控制所述连接轴转动的第一电机和用于控制所述隔音板组件动作的第二电机。
7.根据权利要求5所述的语音设备拾音装置，其特征在于，所述连接板的材料为隔音材料。
8.根据权利要求1所述的语音设备拾音装置，其特征在于，所述隔音板组件中，一个所述隔音板固定设置于所述连接轴，另一个绕所述连接轴的轴心线旋转设置于所述连接轴。
9.根据权利要求1所述的语音设备拾音装置，其特征在于，所述隔音板组件中，两个所述隔音板绕所述连接轴的轴心线旋转设置于所述连接轴。
10.一种语音空调，其特征在于，包括权利要求1-9任一项所述的语音设备拾音装置。
CN201811213584.5A 2018-10-18 2018-10-18 一种语音设备拾音装置和语音空调 Active CN109493859B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811213584.5A CN109493859B (zh) 2018-10-18 2018-10-18 一种语音设备拾音装置和语音空调

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811213584.5A CN109493859B (zh) 2018-10-18 2018-10-18 一种语音设备拾音装置和语音空调

Publications (2)

Publication Number Publication Date
CN109493859A true CN109493859A (zh) 2019-03-19
CN109493859B CN109493859B (zh) 2023-11-28

Family

ID=65691402

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811213584.5A Active CN109493859B (zh) 2018-10-18 2018-10-18 一种语音设备拾音装置和语音空调

Country Status (1)

Country Link
CN (1) CN109493859B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109991575A (zh) * 2019-04-04 2019-07-09 上海市金山区青少年活动中心 定位系统、定位方法及身份识别方法
CN117412223A (zh) * 2023-12-14 2024-01-16 深圳市声菲特科技技术有限公司 远场拾音的方法、装置、设备与存储介质
CN117412223B (zh) * 2023-12-14 2024-06-07 深圳市声菲特科技技术有限公司 远场拾音的方法、装置与设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201018653Y (zh) * 2007-03-27 2008-02-06 王建 便携式话筒隔音器
CN101297587A (zh) * 2006-04-21 2008-10-29 雅马哈株式会社 拾音装置和语音会议设备
CN104093094A (zh) * 2014-06-16 2014-10-08 华南理工大学 基于自适应旋转对准的室内语音采集方法与装置
CN105551495A (zh) * 2015-12-15 2016-05-04 青岛海尔智能技术研发有限公司 一种声音滤噪装置及方法
CN106847298A (zh) * 2017-02-24 2017-06-13 海信集团有限公司 一种基于弥漫式语音交互的拾音方法和装置
CN108172236A (zh) * 2018-01-12 2018-06-15 歌尔科技有限公司 一种拾音降噪方法以及智能电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101297587A (zh) * 2006-04-21 2008-10-29 雅马哈株式会社 拾音装置和语音会议设备
CN201018653Y (zh) * 2007-03-27 2008-02-06 王建 便携式话筒隔音器
CN104093094A (zh) * 2014-06-16 2014-10-08 华南理工大学 基于自适应旋转对准的室内语音采集方法与装置
CN105551495A (zh) * 2015-12-15 2016-05-04 青岛海尔智能技术研发有限公司 一种声音滤噪装置及方法
CN106847298A (zh) * 2017-02-24 2017-06-13 海信集团有限公司 一种基于弥漫式语音交互的拾音方法和装置
CN108172236A (zh) * 2018-01-12 2018-06-15 歌尔科技有限公司 一种拾音降噪方法以及智能电子设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109991575A (zh) * 2019-04-04 2019-07-09 上海市金山区青少年活动中心 定位系统、定位方法及身份识别方法
CN117412223A (zh) * 2023-12-14 2024-01-16 深圳市声菲特科技技术有限公司 远场拾音的方法、装置、设备与存储介质
CN117412223B (zh) * 2023-12-14 2024-06-07 深圳市声菲特科技技术有限公司 远场拾音的方法、装置与设备

Also Published As

Publication number Publication date
CN109493859B (zh) 2023-11-28

Similar Documents

Publication Publication Date Title
CN101828410A (zh) 用于无线听力辅助的方法和系统
CN105376668A (zh) 一种耳机降噪方法及装置
CN109493859A (zh) 一种语音设备拾音装置和语音空调
CN208367199U (zh) 分离式麦克风阵列
WO2021258724A1 (zh) 一种终端、发声方法、存储介质及电子装置
CN208707875U (zh) 一种麦克防风结构及音频设备
CN210725224U (zh) 一种全频全方向扩散式音箱
CN209731531U (zh) 一种可调音质的耳机及其调音工具
CN105163212A (zh) 入耳送话器及包括入耳送话器和扬声器耳机的控制电路
CN207089121U (zh) 汽车关门声音美化系统
CN213025388U (zh) 一种语音控制的智能开关面板
CN215379218U (zh) 麦克风收声装置
CN213236663U (zh) 一种手机支架云台
CN208400485U (zh) 便携式降噪器
CN112333605B (zh) 声音输出控制方法及系统
CN212876099U (zh) 智能旋转音响
CN110855927B (zh) 一种会议摄像声音追踪装置
CN103179482A (zh) 单轴耳壳全方位角度自动调节装置
CN111428517B (zh) 一种便携式智能指向型翻译装置
CN208707900U (zh) 一种降噪耳机
CN202613678U (zh) 一种语音控制空调
CN105513512A (zh) 一种文化传播用智能设备
CN206932369U (zh) 一种耳机控制系统
CN220493149U (zh) 一种扩音装置
CN221081504U (zh) 基于无线网络的智能音柱

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant