CN102917119B - 一种移动终端基于语音识别处理音乐的方法及系统 - Google Patents

一种移动终端基于语音识别处理音乐的方法及系统 Download PDF

Info

Publication number
CN102917119B
CN102917119B CN201210353193.XA CN201210353193A CN102917119B CN 102917119 B CN102917119 B CN 102917119B CN 201210353193 A CN201210353193 A CN 201210353193A CN 102917119 B CN102917119 B CN 102917119B
Authority
CN
China
Prior art keywords
music
user speech
music file
mobile terminal
voice recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210353193.XA
Other languages
English (en)
Other versions
CN102917119A (zh
Inventor
郭海明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Dongguan Yulong Telecommunication Technology Co Ltd
Original Assignee
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Dongguan Yulong Telecommunication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yulong Computer Telecommunication Scientific Shenzhen Co Ltd, Dongguan Yulong Telecommunication Technology Co Ltd filed Critical Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Priority to CN201210353193.XA priority Critical patent/CN102917119B/zh
Publication of CN102917119A publication Critical patent/CN102917119A/zh
Application granted granted Critical
Publication of CN102917119B publication Critical patent/CN102917119B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Telephone Function (AREA)

Abstract

本发明公开了一种移动终端基于语音识别处理音乐的方法,包括以下步骤:S1、当音乐播放软件播放一个音乐文件时,同时开始采集用户语音;S2、当采集到的所述用户语音超过预设时间后,判断所述用户语音与正在播放的所述音乐文件是否相似;S3、如果相似,将所述音乐文件按照预设方式进行处理。本发明还公开了一种用于实施该方法的移动终端基于语音识别处理音乐的系统。本发明的移动终端基于语音识别处理音乐的方法及系统使用简单方便。

Description

一种移动终端基于语音识别处理音乐的方法及系统
技术领域
本发明涉及移动终端,更具体的说,涉及一种移动终端基于语音识别处理音乐的方法及系统。
背景技术
现在智能手机等移动终端都具有音乐播放功能,用户在播放音乐时,往往将移动终端切到后台,或者使其处于待机状态,当用户听到自己喜欢的音乐想要进行收藏时,需要手动打开音乐播放界面,并进行添加操作。
如果用户正在开车或处理其他事务不方便操作,或者移动终端置于包中或其他不方便取出的位置,现有的收藏音乐的方法会给用户带来极大的不便。
发明内容
本发明要解决的技术问题在于,针对现有技术中的缺陷,提供一种使用简单方便的移动终端基于语音识别处理音乐的方法及系统。
本发明解决其技术问题所采用的技术方案是:提供一种移动终端基于语音识别处理音乐的方法,包括以下步骤:
S1、当音乐播放软件通过无线通讯网络或从本地音乐库获取并播放音乐文件时,检测用户语音,当检测到所述用户语音时开始持续采集所述用户语音;
S2、当采集到的所述用户语音超过预设时间后,通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似;
S3、如果相似,将所述音乐文件按照预设方式进行处理;
其中,将所述音乐文件按照预设方法进行的处理包括:将所述音乐文件收藏或者保存在特定的目录下。
优选地,所述步骤S3具体包括:
如果不相似,则检测所述音乐文件的剩余时间是否少于所述预设时间,如果是则放弃收藏,否则重新采集用户语音并返回步骤S2。
优选地,所述步骤S3具体包括:
如果相似,收藏所述音乐文件,并将所述音乐文件通过无线通讯网络发送给网络服务器。
提供一种移动终端基于语音识别处理音乐的系统,包括语音采集单元、语音比较单元和处理单元;
所述语音采集单元用于当音乐播放软件通过无线通讯网络或本地音乐库获取并播放音乐文件时,检测用户语音,当检测到所述用户语音时开始持续采集所述用户语音;
所述语音比较单元用于当采集到的所述用户语音超过预设时间后,通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似;
所述处理单元用于在所述用户语音与所述音乐文件相似时,将所述音乐文件按照预设方式进行处理,其中,将所述音乐文件按照预设方法进行的处理包括:将所述音乐文件收藏或者保存在特定的目录下。
优选地,移动终端基于语音识别处理音乐的系统还包括检测单元,所述检测单元用于在所述用户语音与所述音乐文件不相似时检测所述音乐文件的剩余时间是否少于所述预设时间并在多于所述预设时间时指示所述语音采集单元重新采集用户语音。
优选地,移动终端基于语音识别处理音乐的系统还包括通讯单元;
所述处理单元还用于在所述用户语音与所述音乐文件相似时收藏所述音乐文件并指示所述通讯单元将所述音乐文件通过无线通讯网络发送给网络服务器。
本发明的移动终端基于语音识别处理音乐的方法及系统具有以下有益效果:本发明以检测用户是否跟唱为依据而来判断播放的音乐是否为用户喜欢的音乐,通常只有用户碰到自己喜欢的音乐时,才会主动或下意识的进行跟唱,以欣赏音乐或者学习新的音乐。本发明中用户不需对移动终端进行任何操作,移动终端会自动检测用户语音,如果与播放的音乐相似,则认为用户正在跟唱,则移动终端视其为用户喜爱的音乐并进行收藏,简单而方便。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明一种移动终端基于语音识别处理音乐的方法的流程图;
图2是图1的一个具体实施例的流程图;
图3是图1的另一个具体实施例的流程图;
图4是本发明一种移动终端基于语音识别处理音乐的系统的原理框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并3/5页不用于限定本发明。
如图1所示的是一种移动终端基于语音识别处理音乐的方法,该方法包括以下步骤:
S1、当音乐播放软件播放一个音乐文件时,同时开始采集用户语音;
S2、当采集到的所述用户语音超过预设时间后,判断所述用户语音与正在播放的所述音乐文件是否相似;
S3、如果相似,将所述音乐文件按照预设方式进行处理。
该方法实际上是以检测用户是否跟唱为依据而来判断播放的音乐是否为用户喜欢的音乐,通常只有用户碰到自己喜欢的音乐时,才会主动或下意识的进行跟唱,以欣赏音乐或者学习新的音乐。本发明中用户不需对移动终端进行任何操作,移动终端会自动检测用户语音并将其喜爱的音乐文件进行处理,如收藏或保存在特定的目录下,简单而方便。
本发明中采集的用户语音实际上是用户跟唱的声音,由于用户可能第一次听该音乐,其音调不一定准确,在判断时只需两者相似即可,而不需完全相同,此外,通过比较、判断,也是为了防止将聊天的声音或附近的其他响声误认为是用户语音,导致误判。
预设时间的设置,是为了确定用户对该音乐的喜好程度,其长度可以根据实际情况进行设置,如10秒、20秒或30秒,如果跟唱的时间比预设时间短,则可以认为该音乐文件并非用户喜爱的音乐,跟唱只是一时兴起的自然行为。
播放的音乐文件可以是通过播放软件联网获取的网络音乐也可以是预存在移动终端的本地音乐。如果音乐文件来自网络,音乐播放软件通过无线通讯网络获取音乐文件并播放;通过播放软件从网络上获取的网络音乐一般来说是一个缓存文件,在一段时间后可能会被清除或其他缓存文件所替换。如果音乐文件来自本地音乐库,音乐播放软件读取预先存储在本地音乐库的音乐即可。
如图2所示,步骤S1还可以包括:检测用户语音,当检测到用户语音时开始持续采集。相应的,采集到的用户语音超过预设时间后,开始比较判断工作。此外,该步骤的另一种实施方式也可以是在音乐开始播放时就开始持续采集用户语音,当音乐播放完后,判断用户语音中与播放的音乐相似的片段其时间是否超过预设时间,如果超过预设时间,即可认为是用户喜爱的音乐,并将其进行收藏。
具体的,本发明中可以通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似。音节是听觉能感受到的最自然的语音单位,有一个或几个音素按一定规律组合而成。汉语中一个汉字就是一个音节,每个音节由声母、韵母和声调三个部分组成;英语中一个元音音素可构成一个音节,一个元音音素和一个或几个辅音音素结合也可以构成一个音节,本发明在判断前可以根据实际需求对音节的判定规则进行定义。此外,还可以是在预设时间内,如果相同音节达到一定数量则认为其为用户喜爱的音乐,即可将其收藏。
由于本发明中当采集到的用户语音超过预设时间即可进行一次判断,但采集到的用户语音可能是聊天的声音或者其他不相关的声音导致不相似而使收藏失败,考虑到用户之后还可能会开始跟唱,所以需要重复判断的步骤,如图3所示,步骤S3具体包括:
如果相似,收藏该音乐文件,否则检测音乐的剩余时间是否少于预设时间,如果是则放弃收藏,否则重新采集用户语音并返回步骤S2。由于其为持续采集过程,当再次采集得4/5页到的用户语音超过预设时间后,又会进行一次判断。在这里,如果音乐文件来自网络,则应该将其下载到指定收藏目录,如果其为本地文件,则可以将该文件复制或剪切到特定的收藏目录下。
有些用户喜欢将自己喜爱的音乐上传到网络上存储或分享,如图4所示,步骤S3还可以进一步包括:
如果相似,收藏该音乐文件,并通过无线通讯网络将其发送给网络服务器,否则放弃收藏即可。这里的网络服务器可以是网盘,可以是QQ空间、博客等,也可以是优酷、音悦台等音视频网站。
如图4所示的是一种移动终端基于语音识别处理音乐的系统,该系统包括语音采集单元2、语音比较单元3和处理单元4。其中,
语音采集单元2用于当音乐播放软件播放一个音乐文件时开始采集用户语音;
语音比较单元3当采集到的所述用户语音超过预设时间后,判断所述用户语音与正在播放的所述音乐文件是否相似;
处理单元4用于在所述用户语音与所述音乐文件相似时,将所述音乐文件按照预设方式进行处理。该系统实际上是以检测用户是否跟唱为依据而来判断播放的音乐文件是否为用户喜欢的音乐,通常只有用户碰到自己喜欢的音乐时,才会主动或下意识的进行跟唱,以欣赏音乐或者学习新的音乐。本发明中用户不需对移动终端进行任何操作,移动终端会自动检测用户语音并将其喜爱的音乐进行处理,如收藏等,简单而方便。语音采集单元2应该包括相关的采集硬件及麦克风。为了防止播放的音乐与用户语音混合,一种优选的实施方式是用户通过耳机听音乐,而用户语音通过麦克风进行采集。
本发明中语音采集单元2所采集的用户语音实际上是用户跟唱的声音,由于用户可能第一次听该音乐,其音调不一定准确,语音比较单元3在判断时只需两者相似即可,而不需完全相同,此外,通过语音比较单元3的比较、判断,也是为了防止将聊天的声音或附近的其他响声误认为是用户语音,导致误判。
预设时间的设置,是为了确定用户对该音乐的喜好程度,其长度可以根据实际情况进行设置,如10秒、20秒或30秒,如果跟唱的时间比预设时间短,则可以认为该音乐并非用户喜爱的音乐,跟唱只是一时兴起的自然行为。
播放的音乐文件可以是通过音乐播放软件联网获取的网络音乐也可以是预存在移动终端的本地音乐。
移动终端基于语音识别处理音乐的系统还包括通讯单元5,通讯单元5用于通过无线通讯网络获取音乐并保持至网络音乐缓存区403中,其中,通过播放软件从网络上获取的音乐一般来说是一个缓存文件,在一段时间后可能会被清除或其他缓存文件所替换。
音乐播放单元首先读取存储在本地音乐存储区402或网络音乐缓存区403中的音乐然后再将读取的音乐进行播放。
进一步的,语音采集单元2还可以首先检测用户语音,只有在检测到用户语音后才开始持续采集。当然,其开始采集的时间可以根据实际情况进行设置。
具体的,语音比较单元3可以通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似。音节是听觉能感受到的最自然的语音单位,有一个或几个音素按一定规律组合而成。汉语中一个汉字就是一个音节,每个音5/5页节由声母、韵母和声调三个部分组成;英语中一个元音音素可构成一个音节,一个元音音素和一个或几个辅音音素结合也可以构成一个音节,本发明在判断前可以根据实际需求对音节的判定规则进行定义。此外,还可以是在预设时间内,如果相同音节达到一定数量则认为其为用户喜爱的音乐,即可将其收藏。
此外,由于本发明中当采集到的用户语音超过预设时间即可进行一次判断,但采集到的用户语音可能是聊天的声音或者其他不相关的声音导致其与音乐不相似,这样的情况就会使收藏失败,但用户之后还可能会开始跟唱,如果再次进行比较判断还是有可能再次对音乐文件进行处理。
但如果音乐剩余的时间少于预设时间,语音采集单元2即使将用户语音全部采集,也不可能全部将音乐收藏成功,此时,直接放弃收藏也是一样的。移动终端基于语音识别处理音乐的系统还可以设置检测单元6,检测单元6用于当用户语音与音乐不相似时检测音乐的剩余时间是否少于预设时间并在多于预设时间时指示语音采集单元2重新采集用户语音。
当音乐的剩余时间多于预设时间时,检测单元6指示语音采集单元2重新采集用户语音,语音比较单元3将会在采集到的用户语音再次超过预设时间后重新进行判断,而如果剩余时间少于预设时间,则直接放弃收藏即可,因为该音乐将不可能收藏成功。
此外,鉴于有些用户喜欢将自己喜爱的音乐上传到网络上存储或分享,移动终端基于语音识别处理音乐的系统还包括通讯单元;处理单元4在用户语音与音乐文件相似时收藏所述音乐文件并指示所述通讯单元5将所述音乐文件通过无线通讯网络发送给网络服务器。这里的网络服务器可以是网盘,可以是QQ空间、博客等,也可以是优酷、音悦台等音视频网站。
虽然本发明是通过具体实施例进行说明的,本领域技术人员应当明白,在不脱离本发明范围的情况下,还可以对本发明进行各种变换及等同替代。另外,针对特定情形或材料,可以对本发明做各种修改,而不脱离本发明的范围。因此,本发明不局限于所公开的具体实施例,而应当包括落入本发明权利要求范围内的全部实施方式。

Claims (6)

1.一种移动终端基于语音识别处理音乐的方法,其特征在于,包括以下步骤:
S1、当音乐播放软件通过无线通讯网络或从本地音乐库获取并播放音乐文件时,检测用户语音,当检测到所述用户语音时开始持续采集所述用户语音;
S2、当采集到的所述用户语音超过预设时间后,通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似;
S3、如果相似,将所述音乐文件按照预设方式进行处理;
其中,将所述音乐文件按照预设方法进行的处理包括:将所述音乐文件收藏或者保存在特定的目录下。
2.根据权利要求1所述的移动终端基于语音识别处理音乐的方法,其特征在于,所述步骤S3具体包括:
如果不相似,则检测所述音乐文件的剩余时间是否少于所述预设时间,如果是则放弃收藏,否则重新采集用户语音并返回步骤S2。
3.根据权利要求1所述的移动终端基于语音识别处理音乐的方法,其特征在于,所述步骤S3具体包括:
如果相似,收藏所述音乐文件,并将所述音乐文件通过无线通讯网络发送给网络服务器。
4.一种移动终端基于语音识别处理音乐的系统,其特征在于,包括语音采集单元(2)、语音比较单元(3)和处理单元(4);
所述语音采集单元(2)用于当音乐播放软件通过无线通讯网络或本地音乐库获取并播放音乐文件时,检测用户语音,当检测到所述用户语音时开始持续采集所述用户语音;
所述语音比较单元(3)用于当采集到的所述用户语音超过预设时间后,通过语音频谱线性或者预设时间内相同音节的个数判断所述用户语音与正在播放的所述音乐文件是否相似;
所述处理单元(4)用于在所述用户语音与所述音乐文件相似时,将所述音乐文件按照预设方式进行处理,其中,将所述音乐文件按照预设方法进行的处理包括:将所述音乐文件收藏或者保存在特定的目录下。
5.根据权利要求4所述的移动终端基于语音识别处理音乐的系统,其特征在于,移动终端基于语音识别处理音乐的系统还包括检测单元(6),所述检测单元(6)用于在所述用户语音与所述音乐文件不相似时检测所述音乐文件的剩余时间是否少于所述预设时间并在多于所述预设时间时指示所述语音采集单元(2)重新采集用户语音。
6.根据权利要求4所述的移动终端基于语音识别处理音乐的系统,其特征在于,移动终端基于语音识别处理音乐的系统还包括通讯单元(5);
所述处理单元(4)还用于在所述用户语音与所述音乐文件相似时收藏所述音乐文件并指示所述通讯单元(5)将所述音乐文件通过无线通讯网络发送给网络服务器。
CN201210353193.XA 2012-09-19 2012-09-19 一种移动终端基于语音识别处理音乐的方法及系统 Active CN102917119B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210353193.XA CN102917119B (zh) 2012-09-19 2012-09-19 一种移动终端基于语音识别处理音乐的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210353193.XA CN102917119B (zh) 2012-09-19 2012-09-19 一种移动终端基于语音识别处理音乐的方法及系统

Publications (2)

Publication Number Publication Date
CN102917119A CN102917119A (zh) 2013-02-06
CN102917119B true CN102917119B (zh) 2014-09-24

Family

ID=47615344

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210353193.XA Active CN102917119B (zh) 2012-09-19 2012-09-19 一种移动终端基于语音识别处理音乐的方法及系统

Country Status (1)

Country Link
CN (1) CN102917119B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104091596B (zh) * 2014-01-20 2016-05-04 腾讯科技(深圳)有限公司 一种乐曲识别方法、系统和装置
CN104021151A (zh) * 2014-05-19 2014-09-03 联想(北京)有限公司 一种信息处理方法及电子设备
CN104243689B (zh) * 2014-07-04 2016-12-07 宁夏宁信信息科技有限公司 一种基于采集音频信号控制闹钟的方法及其移动终端
CN105278858A (zh) * 2015-09-08 2016-01-27 广东欧珀移动通信有限公司 一种控制闹铃的方法及用户终端
CN105824861A (zh) * 2015-09-18 2016-08-03 维沃移动通信有限公司 一种推荐音频的方法和移动终端
CN105373585B (zh) * 2015-10-14 2019-02-12 小米科技有限责任公司 歌曲收藏方法和装置
CN105527827A (zh) * 2016-01-13 2016-04-27 广东小天才科技有限公司 闹钟响铃的方法、装置及智能设备
CN108536737A (zh) * 2018-03-06 2018-09-14 广州蓝豹智能科技有限公司 基于音频播放设备的音频收藏方法、装置及计算机设备
CN108536417A (zh) * 2018-03-16 2018-09-14 珠海市魅族科技有限公司 音乐处理方法和装置、计算机装置及可读存储介质
CN112650420B (zh) * 2019-10-10 2022-06-21 北京搜狗科技发展有限公司 一种语音处理方法、装置和介质
CN110970027B (zh) * 2019-12-25 2023-07-25 博泰车联网科技(上海)股份有限公司 一种语音识别方法、装置、计算机存储介质及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1380642A (zh) * 2001-04-11 2002-11-20 华邦电子股份有限公司 跟唱学习评分装置及方法
CN101551997A (zh) * 2009-02-25 2009-10-07 北京派瑞根科技开发有限公司 一种乐曲辅助学习系统
CN101567933A (zh) * 2008-04-25 2009-10-28 乐金电子(中国)研究开发中心有限公司 卡拉ok手机及用于手机卡拉ok功能的数据处理方法
CN102521302A (zh) * 2011-11-30 2012-06-27 上海博泰悦臻电子设备制造有限公司 车载多媒体系统的音乐媒体信息获取方法和系统
CN102522083A (zh) * 2011-11-29 2012-06-27 北京百纳威尔科技有限公司 一种应用移动终端搜索哼唱歌曲的方法及其移动终端

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060179077A1 (en) * 2005-01-27 2006-08-10 Viktors Berstis Receiver content saving system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1380642A (zh) * 2001-04-11 2002-11-20 华邦电子股份有限公司 跟唱学习评分装置及方法
CN101567933A (zh) * 2008-04-25 2009-10-28 乐金电子(中国)研究开发中心有限公司 卡拉ok手机及用于手机卡拉ok功能的数据处理方法
CN101551997A (zh) * 2009-02-25 2009-10-07 北京派瑞根科技开发有限公司 一种乐曲辅助学习系统
CN102522083A (zh) * 2011-11-29 2012-06-27 北京百纳威尔科技有限公司 一种应用移动终端搜索哼唱歌曲的方法及其移动终端
CN102521302A (zh) * 2011-11-30 2012-06-27 上海博泰悦臻电子设备制造有限公司 车载多媒体系统的音乐媒体信息获取方法和系统

Also Published As

Publication number Publication date
CN102917119A (zh) 2013-02-06

Similar Documents

Publication Publication Date Title
CN102917119B (zh) 一种移动终端基于语音识别处理音乐的方法及系统
CN104575539B (zh) 一种音乐播放控制方法及装置
US10664511B2 (en) Fast identification method and household intelligent robot
CN104202469B (zh) 管理通话连接的方法、装置和终端
CN105096977B (zh) 一种多媒体播放的控制方法及移动终端
CN105390144B (zh) 一种音频处理方法和音频处理装置
CN105335455A (zh) 一种阅读文字的方法及装置
CN106168958B (zh) 一种音频信息的推荐方法以及服务器
CN101206898B (zh) 自动断句的复读装置与复读方法
KR102084979B1 (ko) 오디오 파일 재 녹음 방법, 장치 및 저장매체
CN107609034A (zh) 一种智能音箱的音频播放方法、音频播放装置及存储介质
CN101739437A (zh) 一种网络搜音机的实现方法及其专用设备
CN103177750A (zh) 音频播放装置及其控制方法
CN105812581A (zh) 音量自动调节方法及装置
CN103347070B (zh) 推送语音数据的方法、终端、服务器及系统
CN110636403A (zh) 一种无线耳机的配对方法、系统和存储介质
KR20160106075A (ko) 오디오 스트림에서 음악 작품을 식별하기 위한 방법 및 디바이스
CN104464743B (zh) 一种在语音聊天室中播放背景音乐的方法及移动终端
CN102737690B (zh) 音乐应用启动的方法及终端
CN105006240B (zh) 一种基于音频播放设备的音乐声音控制方法及系统
CN102881309B (zh) 歌词文件生成方法及装置
CN108733341B (zh) 一种语音交互方法及装置
JP2009145785A (ja) 携帯端末装置、音声コンテンツの再生方法、及び音声コンテンツの再生プログラム
CN105550377B (zh) 多媒体文件的处理方法及装置
CN103366779A (zh) 自动设置音效参数的方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant