CN102664007B - 用于生成字符标识内容的方法、客户端及系统 - Google Patents
用于生成字符标识内容的方法、客户端及系统 Download PDFInfo
- Publication number
- CN102664007B CN102664007B CN201210085925.1A CN201210085925A CN102664007B CN 102664007 B CN102664007 B CN 102664007B CN 201210085925 A CN201210085925 A CN 201210085925A CN 102664007 B CN102664007 B CN 102664007B
- Authority
- CN
- China
- Prior art keywords
- character
- mark
- audio
- character mark
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提供了用于生成字符标识内容的方法、客户端及系统,属于计算机、软件技术领域。该方法包括:步骤1,采集包含有音频信息的数据内容;步骤2,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;步骤3,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。利用本发明,能够针对于音频信息进行识别,然后将其转变成字符标识内容进行表达。
Description
技术领域
本发明属于计算机、软件技术领域。
技术背景
在当前的技术条件下,人们广泛使用语音的方式进行通信。比如目前常用的即时通信工具,就有一种通信方式,是录下一段音频信息,然后将该音频信息发给对方。所录下的声音,对方接收之后,一般是用音频信息的图标进行表达的。进一步,通常还设置有相应的数字信息,来说明该音频信息所持续的时间长度。
这种通信方式虽有一定的便利性,但是,语音信息所包含的字符内容,在数量上就无法得到表达;另外,如果想听部分的数据信息,在选择起来也很困难。
发明内容
本发明的目的,是提供一种用以生成字符标识内容的方法,以及对应的客户端及系统,利用本发明,能够针对于音频信息进行识别,然后将其转变成字符标识内容进行表达。
一种用以生成字符标识内容的方法,它包括:
步骤1,采集包含有音频信息的数据内容;
步骤2,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
步骤3,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。
进一步,所述的包含有音频信息的数据内容,是仅包括有音频信息的音频文件,或是包括有音频信息的多媒体文件。
进一步,在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是利用音频识别软件,对其语音信息进行识别,经识别之后,获得所对应的字符内容,将字符内容一一对应着字符标识进行转换,获得的识别内容仅仅有字符标识,而不包含字符数据的识别内容。
进一步,在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是采集获得的数据内容,将其音频信息进行解析,按照字符之间的音频停顿规则来进行划分,划分出独立的停顿单元,然后将单个的或者多个的停顿视为一个字符单位,将每个字符单位对应着相应的单个字符标识。
进一步,在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是采集录制的音频信息,判定具有语音数据的时间段,将具有语音数据的时间段按照预设的间隔规则,不进行识别而直接进行划分,将划分的每个内容段,对应着一个字符标识。
进一步,所述的方法,包括有如下步骤,
步骤S210,采集通信过程中所接收到的数据信息;
步骤S220,判定前述的数据信息中,是否包含有音频数据信息;
步骤S230,在判断具有音频信息的情况下,调取对音频信息进行识别的语音识别模块,进行数据识别;
步骤S240,将识别结果所获得的字符内容,每一个字符内容对应着一个字符标识,来生成由字符标识所组成的标记内容;
步骤S250,将所生成的字符标识,与该字符标识所对应的音频信息进行关联,在触发所选择字符标识时,触发所对应的音频信息部分进入播报状态;
步骤S260,采集用户针对于前述字符标识的删除操作信息,在采集获得对应删除操作信息的情况下,将对应的音频信息进行删除处理。
进一步,所描述的字符标识和对应音频信息之间建立关联,其建立步骤为,
针对于音频数据,采用语音识别模块进行字符识别;
将包含有字符语音的数据内容,对应着相应的字符进行关联;
将关联有对应音频信息的字符,转变为对应的独立字符标识时,将相应的对应音频信息的链接转移到对应的字符标识上。
进一步,所描述的字符标识和对应音频信息之间建立关联,其建立步骤为,通过判定声音停顿来分隔字符标识的情况下,判定获得的声音停顿的位置,将音频数据中的相应声音数据与其构成对应关系。
进一步,所述音频数据的传输程序中,设置有用以接收用户针对于字符标识进行选择或编辑的代理程序,所述的代理程序是在传输前述音频数据的程序中嵌入的,或者是独立存在的,但和前述的用以传输音频数据的程序,具有数据处理方面的关联关系。
进一步,所述的代理程序在处理针对于字符标识的操作信息时,包括有如下步骤,
采集针对于字符标识的操作信息,该操作信息包括针对于字符标识的选择,或者针对于字符标识的删除,或者针对于字符标识的复制,或者针对于字符标识的粘贴操作;
在针对于字符标识进行选择时,采集所对应的字符标识,然后根据字符标识查找出所对应的音频信息,将其音频信息转入到播报状态;
在采集获得针对于字符标识进行删除处理的消息时,采集对应着删除处理的字符标识的音频信息,或者所述的音频信息对应有视频信息的情况下,还包括对相应时间段内的视频信息,作删除处理;
当采集获得针对于字符标识的复制信息时,将和对应的字符标识相对应的音频或者视频数据进行复制;
当采集获得针对于字符标识进行粘贴的数据信息时,将粘贴的字符标识所对应的数据信息,进行采集并存储。
进一步,通过字符标识获得对应数据内容的方式,是基于用户所选择的字符标识在整个音频信息的字符标识中的位置,来获得所对应的数据信息。
进一步,所述的字符标识,是中空的方格,或者圆圈,或者“*”符号。
进一步,将字符标识的尺寸,和对应音频信息的声音强度之间建立比例关系,其步骤如下,
采集获得的音频数据信息;
将音频数据信息的声音强度,按照参照值进行计量,获得每一个字符所对应的声音强度数值;
将获得的声音强度数值进行计量,获得平均的数值;
将平均数值所对应字符的高度,取为预设高度;
采集对应着音频数据的每一个字符标识的声音强度最高值,和前述的平均数值进行比较,获得比值关系,利用该比值关系和前一步骤预设的高度值相乘,获得对应字符标识的高度值。
进一步,将前述的字符标识,设置色彩,而色彩的类型,来自于对音频信息部分的数据内容的感情色彩识别,或者来自于对音频信息部分声音本身的感情色彩的识别。
进一步,所述的字符标识设置色彩的步骤为,
预先建立字符感情色彩和字符标识颜色之间的映射列表;
采集所获得的音频数据信息;
针对于音频数据信息进行识别,将其转换为识别获得的字符;
判定识别所获得的字符的感情色彩;
根据所获得的感情色彩,来比较前面所建立起来的映射列表,获得字符标识需要设置的颜色;
针对于前面所获得的字符标识的颜色,来对输出的字符标识根据该颜色输出。
进一步,所述的映射列表的设定方式为,
针对于高兴感情色彩的字符内容,将其字符标识的颜色设置为红色;
将悲伤感情色彩的字符内容,将其字符标识的颜色设置为灰色;
将发怒感情色彩的字符内容,将其字符标识的颜色设置为紫色;
将没有判定出感情色彩的字符,将其字符标识的颜色设置为黑色。
进一步,判定声音消息本身的感情色彩,根据声音信息本身的感情色彩来输出字符标识色彩的步骤为,
建立感情色彩和音频信息之间的识别关系,以及建立感情色彩与字符标识颜色之间的映射列表;
采集所获得的音频信息,与前面所建立起来的识别关系进行比对;
根据比对结果判定声音信息的感情色彩;
通过前述的映射列表,将字符标识所对应的音频信息的感情色彩进行比对,获得字符标识的对应颜色;
利用前述的颜色,处理字符标识之后将其输出。
进一步,将字符标识的形状由用户来设置,其步骤为,
针对于字符标识,设置字符标识选择列表,在该选择列表中,输出由系统提供商所提供的标识符号;
采集用户的选择信息,将选择的标识符号作为字符标识。
进一步,将字符标识的形状由用户来设置,其步骤为,
针对于字符标识,设置字符标识载入控件;
采集用户所载入的字符标识的图像信息,判断是否符合字符标识格式,如果符合转入到下一步骤,如果不符合,将其调整为符合后输出,如果无法调整,则输出提醒;
根据用户所载入的数据信息,设置对应的字符标识。
进一步,将字符标识的形状由用户来设置,其步骤为,
设置用以采集用户绘制信息的字符标识绘制控件;
将采集获得的用户绘制信息,转变为字符标识格式;
将前述的转变为字符标识格式的数据信息,设定为字符标识。
进一步,所述的字符标识,在一次输出的内容中,还可以有两种或两种以上的表达形式。
进一步,通过判定用户音频信息的感情色彩,来调整字符标识的类型,其实施步骤为,
建立不同感情色彩的字符标识,所对应不同图像内容的映射列表;
采集音频信息,判定音频信息的感情色彩;
将前述的音频信息所对应的字符标识,按照前述的映射列表进行比对,获得特定感情色彩的字符标识所对应的图像内容;
以前述的图像内容,来排布与音频信息相对应的字符标识。
进一步,在所述的字符标识中,嵌入标识附加信息,其操作步骤为,
采集用户针对于字符标识所嵌入的标识附加信息;
将前述的标识附加信息,转换成目标符号之后,嵌入到字符标识中,
或者,将前述的标识附加信息,不经过转换而直接嵌入到字符标识中,
或者,将前述的标识附加信息,进行尺寸和格式的处理之后,直接以图片的形式作为字符标识;
将获得的字符标识,对应着音频信息进行数据输出。
进一步,所述的目标符号,为二维条码。
进一步,在同一次发送的音频信息包括有两个或两个以上字符标识时,采用至少一个但非全部字符标识,来嵌入标识附加信息。
本发明还提供一种用以生成字符标识内容的客户端,该客户端包括:
数据采集模块,采集包含有音频信息的数据内容;
字符量识别模块,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
字符标识生成模块,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。
本发明还提供一种用以生成字符标识内容的系统,该系统包括:
发送方客户端,它包括,
客户端数据采集模块,采集包含有音频信息的数据内容;
客户端数据发送模块,用以将客户端数据采集模块所采集获得的包含有音频信息的数据内容,向对应的接收方客户端进行发送操作;
服务器,它包括,
服务器数据采集模块,采集发送方客户端向接收方客户端所发送的包含有音频信息的数据内容;
服务器字符量识别模块,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
服务器字符标识生成模块,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示;
服务器字符标识发送模块,和前述的服务器字符标识生成模块相连接,用以将生成的字符标识,发送至下述的接收方客户端;
接收方客户端,它包括,
数据接收模块,用以接收来自于前述发送方客户端所发送的包含有音频信息的数据内容与来自于服务器字符标识发送模块所发送的对应字符标识,或者仅接收来自于服务器字符标识发送模块所发送的字符标识及对应包含有音频信息的数据内容;
字符标识输出模块,与数据接收模块相连接,对应着包含有音频信息的数据内容输出字符标识。
进一步,所述的系统为即时通信系统,其中的发送方客户端,对应着即时通信发送方客户端,其中的接收方客户端,对应着即时通信的接收方客户端,其中的服务器,对应着即时通信的系统服务器。
附图说明
图1是本发明所述方法的流程图。
图2是本发明所述客户端的结构框图。
图3是本发明所述系统的结构框图。
具体实施方式
在本发明中,能够将包含有音频信息的数据内容,针对于其音频信息进行字符识别,但在识别时,并不识别具体的字符数据,而是根据用户的发音方式,或声音与字符之间的对应规则,来对声音内容进行识别。识别时仅仅判定字符的数量,而不具体识别字符的内容。
下面结合着图1所示,来对本发明所描述的方法进行说明,该方法包括有如下步骤:
步骤S110,采集包含有音频信息的数据内容;
步骤S120,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
步骤S130,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。
针对于前述的步骤S110,描述如下:
这儿所述的包含有音频信息的数据内容,首先指的是仅仅包括有音频信息的音频文件。其次,还可以是包括有音频信息的多媒体文件。针对于多媒体文件中的音频信息内容,同样可以采集其中的音频信息,利用本发明所描述的方式进行处理。
针对于前述的步骤S120,描述如下:
将采集获得的数据内容,在进行字符识别时,能够使用的识别方式,作为举例而非限定,有如下类型:
(1)利用音频识别软件,对其语音信息进行识别,经识别之后,获得所对应的字符内容,将字符内容一一对应着字符标识进行转换,获得的识别内容仅仅有字符标识,而不包含字符数据的识别内容。
作为举例,目前常用的语音识别软件,比如IBM的ViaVoice,或者其它公司的语音识别产品,均能够对音频信息部分,按照预设的语音库和文字规则,对其音频信息进行解析,然后进行识别,获得对应的识别字符。
(2)采集获得的数据内容,将其音频信息进行解析,按照字符之间的音频停顿规则来进行划分,划分出独立的停顿单元,然后将单个的或者多个的停顿视为一个字符单位,将每个字符单位对应着相应的单个字符标识。
(3)采集录制的音频信息,判定具有语音数据的时间段,将具有语音数据的时间段按照预设的间隔规则,不进行识别而直接进行划分,将划分的每个内容段,对应着一个字符标识。这种方式下,所述的语音数据,指的是音频数据的内容中,仅仅对应着语音数据部分的内容,而不包括语音数据的内容,则不是语音内容。比如,用户所录制的一段音频内容,中间可能有长时间的停顿,而这些停顿并不对应着语音数据,于是就不对应着字符。在人们进行音频通话时,所采集的音频信息,针对于语音播报的信息部分,声音的音强通常高于没有声音播报的时间段的音强,于是,就可以通过声音的音强来判断何时具有语音数据的时间段。进而,将具有语音数据的时间段进行分隔,比如说,以每秒种能够容放3个字符标识的方式进行分隔,那么,在用户具有声音播报的时间段内,将其以每秒钟分为3个字符标识的方式进行分隔,就可以了。
针对于前述的步骤S130,描述如下:
在该步骤中,利用前面所描述的音频数据部分的处理方式,针对于数据内容中的音频信息,逐个进行处理,将其转变为由字符标识所组成的数据内容。
下面通过一个具体的实施例,来对本发明作进一步描述。该实施例包括有如下的步骤:
步骤S210,采集通信过程中所接收到的数据信息;
步骤S220,判定前述的数据信息中,是否包含有音频数据信息;
步骤S230,在判断具有音频信息的情况下,调取对音频信息进行识别的语音识别模块,进行数据识别;
步骤S240,将识别结果所获得的字符内容,每一个字符内容对应着一个字符标识,来生成由字符标识所组成的标记内容;
步骤S250,将所生成的字符标识,与该字符标识所对应的音频信息进行关联,在触发所选择字符标识时,触发所对应的音频信息部分进入播报状态;
步骤S260,采集用户针对于前述字符标识的删除操作信息,在采集获得对应删除操作信息的情况下,将对应的音频信息进行删除处理。
前述的通信过程,可以是即时通信过程,也可以是利用手机来实现的对应通信过程,或者是利用其它的通信装置来实现的通信过程,具体是不限定的。
前面所描述的字符标识和对应音频信息建立关联的方式,作为举例而非限定,可以这样来实施:
针对于音频数据,采用语音识别模块进行字符识别;
将包含有字符语音的数据内容,对应着相应的字符进行关联;
将关联有对应音频信息的字符,转变为对应的独立字符标识时,将相应的对应音频信息的链接转移到对应的字符标识上。
另外,如果所述的字符标识,是通过前面所描述的第二种方式,仅通过判定声音停顿的数量来进行关联的话,那么,所判定获得的声音停顿的位置对应着相应字符时,将音频数据中的相应声音数据与其构成对应关系。
另外,如果所述的字符标识,是通过前面所描述的第三种方式,针对于包含有语音部分的数据内容,利用常规的说话语速的判定方式,比如每秒钟3个字符的形式,来进行机械式地分隔的话,那么,包含有语音数据的内容,被分隔为相应的时间段。比如,每秒钟对应着3个字符标识的话,那么,每个字符标识就对应着三分之一秒的播报时间。在对应的播报时间之内,按照音频信息的先后顺序进行分配。
另外,所述的音频数据,需要通过对应的程序进行传输,比如即时通信程序。在所述的程序中,作为举例而非限定,设置有用以接收用户针对于字符标识进行选择或编辑的代理程序。所述的代理程序是在传输前述音频数据的程序中嵌入的;或者是独立存在的,但和前述的用以传输音频数据的程序,具有数据处理方面的关联关系。
所述的代理程序,作为举例而非限定,处理针对于字符标识的操作信息时,包括有如下过程:
采集针对于字符标识的操作信息,该操作信息包括针对于字符标识的选择,或者针对于字符标识的删除,或者针对于字符标识的复制,或者针对于字符标识的粘贴操作;
在针对于字符标识进行选择时,采集所对应的字符标识,然后根据字符标识查找出所对应的音频信息,将其音频信息转入到播报状态;
在采集获得针对于字符标识进行删除处理的消息时,采集对应着删除处理的字符标识的音频信息,或者所述的音频信息对应有视频信息的情况下,还包括对相应时间段内的视频信息,作删除处理;
当采集获得针对于字符标识的复制信息时,将和对应的字符标识相对应的音频或者视频数据进行复制;
当采集获得针对于字符标识进行粘贴的数据信息时,将粘贴的字符标识所对应的数据信息,进行采集并存储。
前述的通过字符标识获得对应数据内容的方式,还有一种实现形式,是基于用户所选择的字符标识在整个音频信息的字符标识中的位置,来获得所对应的数据信息。
其中,在判定字符标识所处位置时,还可以用如下的方式来实现:
针对于每一个字符标识,对应有所在数据信息内的时间量,该时间量是一个包含有起点和终点的时间段。比如,用户输了一段有10秒钟的话,进行字符识别之后,判定其中所对应的字符标识一共有17个。于是,将每一个字符标识,在前述的10秒钟音频信息中,对应有相应的一段音频数据。其中,如果有不发音的部分,则不发音的部分不对应着字符标识。于是,每一个字符标识和所在音频信息或者包含有视频信息的数据内容,来进行相应的剪辑,相应的内容剪辑分段之后,和相应的字符标识进行关联。
前面所述的字符标识,可以有不同的实现形式,作为举例,可以通过中空的方格来进行标识,而方格本身也可以作为字符,在所对应的通信界面中,能够通过对字符大小的调整,来对其进行调整。也就是说,所述的字符标识,可以通过方格一类的字符来进行标识。
适合作为字符标识的标识类型具体是不限定的。比如,利用圆圈也同样可以表示字符标识;或者,利用“*”来表示字符标识,或者采用其它的符号形式。
进一步,还可以设置这样的功能:将字符标识的尺寸,和对应音频信息的声音强度之间建立比例关系,具体来说,可以通过如下的方式来实施:
采集获得的音频数据信息;
将音频数据信息的声音强度,按照参照值进行计量,获得每一个字符所对应的声音强度数值;
将获得的声音强度数值进行计量,获得平均的数值;
将平均数值所对应字符的高度,取为预设高度;
采集对应着音频数据的每一个字符标识的声音强度最高值,和前述的平均数值进行比较,获得比值关系,利用该比值关系和前一步骤预设的高度值相乘,获得对应字符标识的高度值。
比如说,针对于平均值的字符高度取为四号字体的大小,将其作为标准的参照尺寸,于是,如果所采集的字符标识对应的声音强度的最大值,为前述平均值的1.5倍,那么,如果字符标识是以空心的方格形式来表示的话,就可以将前述的字符标识的下部宽度保持不变,而将方格的高度调整为前述参照标准的1.5倍。
通过这种方式,就能够获得表达声音强度的字符标识。
进一步,还可以设置这样的功能:将前述的字符标识,设置色彩,而色彩的类型,来自于对音频信息部分的数据内容的感情色彩识别,或者来自于对音频信息部分声音本身(无关乎内容)的感情色彩的识别。作为举例而非限定,该功能可以通过如下的步骤来实施:
预先建立字符感情色彩和字符标识颜色之间的映射列表;
采集所获得的音频数据信息;
针对于音频数据信息进行识别,将其转换为识别获得的字符;
判定识别所获得的字符的感情色彩;
根据所获得的感情色彩,来比较前面所建立起来的映射列表,获得字符标识需要设置的颜色;
针对于前面所获得的字符标识的颜色,来对输出的字符标识根据该颜色输出。
作为举例,前述的映射列表可以这样来设定:
针对于高兴感情色彩的字符内容,将其字符标识的颜色设置为红色;
将悲伤感情色彩的字符内容,将其字符标识的颜色设置为灰色;
将发怒感情色彩的字符内容,将其字符标识的颜色设置为紫色;
将没有判定出感情色彩的字符,将其字符标识的颜色设置为黑色。
于是,当采集的音频信息,对其识别之后,判定为有高兴感情色彩的内容,就将字符标识转变为红色进行输出就可以了。这种情况下,为了增加标识的醒目性,还可以将整个字符标识所占据的区域填满,均为红色。
另外,也可以直接判定声音消息本身的感情色彩(无关于本身所携带的含义),根据声音信息本身的感情色彩来输出对应的色彩。作为举例,可以按照如下的步骤来实施:
建立感情色彩和音频信息之间的识别关系,以及建立感情色彩与字符标识颜色之间的映射列表;
采集所获得的音频信息,与前面所建立起来的识别关系进行比对;
根据比对结果判定声音信息的感情色彩;
通过前述的映射列表,将字符标识所对应的音频信息的感情色彩进行比对,获得字符标识的对应颜色;
利用前述的颜色,处理字符标识之后将其输出。
前述的识别关系,可以通过不同感情下说话声音的特征来进行判定。这种方式不需要对用户的音频信息的内容进行识别,直接通过感情色彩的判定就可以实现。
另外,本发明还可以实现这样的功能:将字符标识进行个性化设置,由用户来设置字符标识的形状。作为举例而非限定,可以按照如下的方式来实施:
针对于字符标识,设置字符标识选择列表,在该选择列表中,输出由系统提供商所提供的标识符号;
采集用户的选择信息,将选择的标识符号作为字符标识。
或者这样来实施:
针对于字符标识,设置字符标识载入控件;
采集用户所载入的字符标识的图像信息,判断是否符合字符标识格式,如果符合转入到下一步骤,如果不符合,将其调整为符合后输出,如果无法调整,则输出提醒;
根据用户所载入的数据信息,设置对应的字符标识。
或者这样来实施:
设置用以采集用户绘制信息的字符标识绘制控件;
将采集获得的用户绘制信息,转变为字符标识格式;
将前述的转变为字符标识格式的数据信息,设定为字符标识。
比如,用户绘制了一个笑脸图像,就可以将这种笑脸图像进行转变之后,来作为字符标识的形式呈现。
进一步,所述的字符标识,在一次输出的内容中,还可以有两种或两种以上的表达形式,通过变换的方式来产生具有差异性的效果。比如说,在同一行的字符标识中,就可以将有的字符标识设定为“*”,将有的字符标识设定为方框,将有的字符标识设定为三角形,将有的字符标识设定为小红旗的外形,将有的字符标识设定为笑脸的外形,等等。
进一步,还可以通过判定用户音频信息的感情色彩,来调整字符标识的类型。
比如说,将高兴感情色彩的音频信息,对应着笑脸的图标;将悲伤感情色彩的音频信息,设定为哭脸的图标。本领域的技术人员可以明白,具有感情色彩的简易图标是易于实现的,并且数据量很小。在具体操作时,作为举例而非限定,可以按照如下的步骤实施:
建立不同感情色彩的字符标识,所对应不同图像内容的映射列表;
采集音频信息,判定音频信息的感情色彩;
将前述的音频信息所对应的字符标识,按照前述的映射列表进行比对,获得特定感情色彩的字符标识所对应的图像内容;
以前述的图像内容,来排布与音频信息相对应的字符标识。
利用这种方式,能够生成表达感情色彩的字符标识。
进一步,在所述的字符标识中,还可以嵌入标识附加信息。
作为举例,如果将字符标识采用小方框来代表的话,那么,就可以在每一个小方框中嵌入二维条码信息。前述二维条码信息所代表的内容,可以是用户的名称,或者用户的姓氏,或者用户的宠物名,或者是用户的手机号码,或者是用户的即时通信识别号,或者用户所设定的昵称,等等,具体是不限定的。
于是,每一个小方框由哪一个人发出的,直接通过字符标识中小方框内的二维条码的识别,就可以实现了。当然,嵌入的信息并不局限于二维条码。
在实施时,作为举例而非限定,可以按照如下的步骤进行:
采集用户针对于字符标识所嵌入的标识附加信息;
将前述的标识附加信息,转换成目标符号之后,嵌入到字符标识中,
或者,将前述的标识附加信息,不经过转换而直接嵌入到字符标识中,
或者,将前述的标识附加信息,进行尺寸和格式的处理之后,直接以图片的形式作为字符标识;
将获得的字符标识,对应着音频信息进行数据输出。
前述的标识附加信息,可以是各种用户希望通过字符标识的形式所附加的内容,比如,可以是自己的名字或者手机号码或者宠物名等字符信息,也可以是某个小数据量的图片,等等。
比如,用户的名字叫“李红”,将该名字作为用户的标识附加信息。将“李红”利用二维条码的表达形式处理之后,转变成二维条码的数据。然后,将获得的二维条码数据,置放在字符标识所对应的小方框之中。进而,将置放有二维条码数据的小方框,作为字符标识使用,来对应着音频信息进行数据输出。
另外,在同一次发送的音频信息包括有两个或两个以上字符标识时,还可以将同一次发送的字符标识中,采用至少一个但非全部字符标识,来嵌入标识附加信息。并不需要将全部的字符标识均嵌入标识附加信息,这样能够使得输出的字符标识更为简洁。
基于前面所提供的方法,本发明还提供一种对应的客户端100,该客户端100包括:
数据采集模块110,采集包含有音频信息的数据内容;
字符量识别模块120,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
字符标识生成模块130,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。
所述的客户端100,能够应用的终端设备类型是不限定的,只要有音频信息方面的表达需求,都可以应用于本发明。
在实现本发明时,通过所设置的数据采集模块110,来采集包含有音频信息的数据内容。既可以采集独立的音频数据信息,也可以采集包含有其它的数据信息的情况下,同时也包含有音频数据信息的数据内容,比如包含有音频信息的多媒体内容等。进而,通过字符量识别模块120,将采集获得的数据信息,对其音频信息部分进行字符识别。识别的方式,可参看前面方法部分的描述。在本发明中,针对于所识别获得的结果,主要采集识别字符的数量信息。需要指出的是,这儿所述的识别字符,并非必须是真正的字符形式,也可以仅仅为所采集音频信息所在时间段的一种分段格式。把字符量识别模块120所识别获得的字符数量,通过所述的字符标识生成模块130进行采集,逐个对应着生成字符标识。这儿所述的字符标识,可以是符号,也可以是用户所设置的图案,或者是能够和用户的身份或者感情色彩相对应的表达形式,在前面的方法部分均有相应的描述,此处不再赘述。
基于前面所提供的方法及客户端,本发明还提供一种系统200。该系统200包括:
发送方客户端210,它包括,
客户端数据采集模块211,采集包含有音频信息的数据内容;
客户端数据发送模块212,用以将客户端数据采集模块211所采集获得的包含有音频信息的数据内容,向对应的接收方客户端230进行发送操作;
服务器220,它包括,
服务器数据采集模块221,采集发送方客户端210向接收方客户端230所发送的包含有音频信息的数据内容;
服务器字符量识别模块222,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
服务器字符标识生成模块223,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示;
服务器字符标识发送模块224,和前述的服务器字符标识生成模块223相连接,用以将生成的字符标识,发送至下述的接收方客户端230;
接收方客户端230,它包括,
数据接收模块231,用以接收来自于前述发送方客户端210所发送的包含有音频信息的数据内容与来自于服务器字符标识发送模块224所发送的对应字符标识,或者仅接收来自于服务器字符标识发送模块224所发送的字符标识及对应包含有音频信息的数据内容;
字符标识输出模块232,与数据接收模块231相连接,对应着包含有音频信息的数据内容输出字符标识。
这儿所描述的系统200,它是一个具有通信功能的系统结构,包括发送方客户端210、服务器220以及接收方客户端230。所述的发送方客户端210,设置有客户端数据采集模块211,用以采集包含有音频信息的数据内容,该数据内容可以是独立的音频信息,作为举例,也可以是包含有音频信息的多媒体数据。进而,通过所设置的客户端数据发送模块212,将通过客户端数据采集模块211所采集获得的包含有音频信息的数据内容,进行数据发送操作,发送的对象是所述的接收方客户端230。
进而,通过服务器220,采集发送方客户端210所发送的包含有音频信息的数据,来对其进行识别。将包括有音频信息的数据内容,用字符标识的方式进行表达。其中,通过所设置的服务器数据采集模块221,采集发送方客户端210向接收方客户端230进行数据发送时,同步向服务器220所发送的包含有音频信息的数据内容。进而通过服务器字符量识别模块222,对所采集获得的数据内容,将其音频信息部分进行字符识别。识别的方式,在前面的方法部分已有描述。进而,获得了所采集音频信息内容的字符数量的识别信息。进而,通过服务器字符标识生成模块223,对应着所识别获得的独立字符,逐个生成对应的字符标识,该字符标识的形式,参见前面的描述。然后,通过服务器字符标识发送模块224,将所生成的字符标识,发送到接收方客户端230。
在接收方客户端230中,设置有数据接收模块231,用以接收来自于发送方客户端210的数据或者来自于服务器220的数据。
其中,接收数据的模式有两种,第一种方式,是从前述的发送方客户端210接收包含有音频信息的数据内容,而从服务器220中,仅接收对应着前述包含有音频信息的数据内容的字符标识。这种实施方式下,针对于包含有音频信息的数据内容,可以通过发送方客户端210和接收方客户端230两者进行点对点的数据传输操作,能够减少服务器220的数据传输负担,从服务器220中,直接接收识别获得的字符标识就可以了。当然,该字符标识需要和对应的音频信息建立有相应的映射列表,通过该映射列表和所接收的音频信息进行匹配;第二种方式,是通过前述的服务器220,来接收字符标识以及对应着该字符标识的包含有音频信息的数据内容。
进而,通过接收方客户端230中的字符标识输出模块232,将获得的包含有音频信息的数据内容,连带着字符标识进行数据输出。
前述的系统200,在应用中,作为举例,可以是即时通信系统。其中的发送方客户端210,对应着即时通信发送方客户端,其中的接收方客户端230,对应着即时通信的接收方客户端,其中的服务器220,对应着即时通信的系统服务器。当然,也可以有其它的实施例,具体是不限定的。
以上是对本发明的描述而非限定,基于本发明思想的其它任何实施例,亦均在本发明的保护范围之中。
Claims (26)
1.一种用以生成字符标识内容的方法,其特征在于该方法包括有如下步骤:
步骤1,采集包含有音频信息的数据内容;
步骤2,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
步骤3,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示;
其中,将字符标识的尺寸和对应音频信息的声音强度之间建立比例关系,步骤如下:采集获得的音频数据信息,对字符的声音强度数值进行计量,获得平均数值,将平均数值所对应字符的高度取为预设高度;采集对应着音频数据的每一个字符标识的声音强度最高值,和前述平均数值进行比较,获得比值关系,利用该比值关系和前一步骤的预设高度值相乘,获得对应字符标识的高度值;
或者,通过判定用户音频信息的感情色彩来调整字符标识的类型,步骤如下:建立不同感情色彩的字符标识,所对应不同图像内容的映射列表;采集音频信息,判定音频信息的感情色彩;将前述的音频信息所对应的字符标识,按照前述的映射列表进行比对,获得特定感情色彩的字符标识所对应的图像内容;以前述的图像内容,来排布与音频信息相对应的字符标识。
2.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所述的包含有音频信息的数据内容,是仅包括有音频信息的音频文件,或是包括有音频信息的多媒体文件。
3.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是利用音频识别软件,对其语音信息进行识别,经识别之后,获得所对应的字符内容,将字符内容一一对应着字符标识进行转换,获得的识别内容仅仅有字符标识,而不包含字符数据的识别内容。
4.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是采集获得的数据内容,将其音频信息进行解析,按照字符之间的音频停顿规则来进行划分,划分出独立的停顿单元,然后将单个的或者多个的停顿视为一个字符单位,将每个字符单位对应着相应的单个字符标识。
5.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:在所述的步骤2中,采集获得的数据内容进行字符识别的方式,是采集录制的音频信息,判定具有语音数据的时间段,将具有语音数据的时间段按照预设的间隔规则,不进行识别而直接进行划分,将划分的每个内容段,对应着一个字符标识。
6.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所描述的字符标识和对应音频信息之间建立关联,其建立步骤为,
针对于音频数据,采用语音识别模块进行字符识别;
将包含有字符语音的数据内容,对应着相应的字符进行关联;
将关联有对应音频信息的字符,转变为对应的独立字符标识时,将相应的对应音频信息的链接转移到对应的字符标识上。
7.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所描述的字符标识和对应音频信息之间建立关联,其建立步骤为,通过判定声音停顿来分隔字符标识的情况下,判定获得的声音停顿的位置,将音频数据中的相应声音数据与其构成对应关系。
8.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所述音频数据的传输程序中,设置有用以接收用户针对于字符标识进行选择或编辑的代理程序,所述的代理程序是在传输前述音频数据的程序中嵌入的,或者是独立存在的,但和前述的用以传输音频数据的程序,具有数据处理方面的关联关系。
9.根据权利要求8所述的一种用以生成字符标识内容的方法,其特征在于:所述的代理程序在处理针对于字符标识的操作信息时,包括有如下步骤,
采集针对于字符标识的操作信息,该操作信息包括针对于字符标识的选择,或者针对于字符标识的删除,或者针对于字符标识的复制,或者针对于字符标识的粘贴操作;
在针对于字符标识进行选择时,采集所对应的字符标识,然后根据字符标识查找出所对应的音频信息,将其音频信息转入到播报状态;
在采集获得针对于字符标识进行删除处理的消息时,采集对应着删除处理的字符标识的音频信息,或者所述的音频信息对应有视频信息的情况下,还包括对相应时间段内的视频信息,作删除处理;
当采集获得针对于字符标识的复制信息时,将和对应的字符标识相对应的音频或者视频数据进行复制;
当采集获得针对于字符标识进行粘贴的数据信息时,将粘贴的字符标识所对应的数据信息,进行采集并存储。
10.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:通过字符标识获得对应数据内容的方式,是基于用户所选择的字符标识在整个音频信息的字符标识中的位置,来获得所对应的数据信息。
11.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所述的字符标识,是中空的方格,或者圆圈,或者“*”符号。
12.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:将前述的字符标识设置色彩,而色彩的类型,来自于对音频信息部分的数据内容的感情色彩识别,或者来自于对音频信息部分声音本身的感情色彩的识别。
13.根据权利要求12所述的一种用以生成字符标识内容的方法,其特征在于:所述的字符标识设置色彩的步骤为,
预先建立字符感情色彩和字符标识颜色之间的映射列表;
采集所获得的音频数据信息;
针对于音频数据信息进行识别,将其转换为识别获得的字符;
判定识别所获得的字符的感情色彩;
根据所获得的感情色彩,来比较前面所建立起来的映射列表,获得字符标识需要设置的颜色;
针对于前面所获得的字符标识的颜色,来对输出的字符标识根据该颜色输出。
14.根据权利要求13所述的一种用以生成字符标识内容的方法,其特征在于:所述的映射列表的设定方式为,
针对于高兴感情色彩的字符内容,将其字符标识的颜色设置为红色;
将悲伤感情色彩的字符内容,将其字符标识的颜色设置为灰色;
将发怒感情色彩的字符内容,将其字符标识的颜色设置为紫色;
将没有判定出感情色彩的字符,将其字符标识的颜色设置为黑色。
15.根据权利要求12所述的一种用以生成字符标识内容的方法,其特征在于:判定声音消息本身的感情色彩,根据声音信息本身的感情色彩来输出字符标识色彩的步骤为,
建立感情色彩和音频信息之间的识别关系,以及建立感情色彩与字符标识颜色之间的映射列表;
采集所获得的音频信息,与前面所建立起来的识别关系进行比对;
根据比对结果判定声音信息的感情色彩;
通过前述的映射列表,将字符标识所对应的音频信息的感情色彩进行比对,获得字符标识的对应颜色;
利用前述的颜色,处理字符标识之后将其输出。
16.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:将字符标识的形状由用户来设置,其步骤为,
针对于字符标识,设置字符标识选择列表,在该选择列表中,输出由系统提供商所提供的标识符号;
采集用户的选择信息,将选择的标识符号作为字符标识。
17.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:将字符标识的形状由用户来设置,其步骤为,
针对于字符标识,设置字符标识载入控件;
采集用户所载入的字符标识的图像信息,判断是否符合字符标识格式,如果符合转入到下一步骤,如果不符合,将其调整为符合后输出,如果无法调整,则输出提醒;
根据用户所载入的数据信息,设置对应的字符标识。
18.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:将字符标识的形状由用户来设置,其步骤为,
设置用以采集用户绘制信息的字符标识绘制控件;
将采集获得的用户绘制信息,转变为字符标识格式;
将前述的转变为字符标识格式的数据信息,设定为字符标识。
19.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:所述的字符标识,在一次输出的内容中,有两种或两种以上的表达形式。
20.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:
将音频数据信息的声音强度,按照参照值进行计量,获得每一个字符所对应的声音强度数值;
将获得的声音强度数值进行计量,获得平均的数值;
将平均数值所对应字符的高度,取为预设高度。
21.根据权利要求1所述的一种用以生成字符标识内容的方法,其特征在于:在所述的字符标识中,嵌入标识附加信息,其操作步骤为,
采集用户针对于字符标识所嵌入的标识附加信息;
将前述的标识附加信息,转换成目标符号之后,嵌入到字符标识中,
或者,将前述的标识附加信息,不经过转换而直接嵌入到字符标识中,
或者,将前述的标识附加信息,进行尺寸和格式的处理之后,直接以图片的形式作为字符标识;
将获得的字符标识,对应着音频信息进行数据输出。
22.根据权利要求21所述的一种用以生成字符标识内容的方法,其特征在于:所述的目标符号,为二维条码。
23.根据权利要求21所述的一种用以生成字符标识内容的方法,其特征在于:在同一次发送的音频信息包括有两个或两个以上字符标识时,采用至少一个但非全部字符标识,来嵌入标识附加信息。
24.一种实施权利要求1所述方法的用以生成字符标识内容的客户端,其特征在于该客户端包括:
数据采集模块,采集包含有音频信息的数据内容;
字符量识别模块,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
字符标识生成模块,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示。
25.一种实施权利要求1所述方法的用以生成字符标识内容的系统,其特征在于该系统包括:
发送方客户端,它包括,
客户端数据采集模块,采集包含有音频信息的数据内容;
客户端数据发送模块,用以将客户端数据采集模块所采集获得的包含有音频信息的数据内容,向对应的接收方客户端进行发送操作;
服务器,它包括,
服务器数据采集模块,采集发送方客户端向接收方客户端所发送的包含有音频信息的数据内容;
服务器字符量识别模块,将采集获得的数据内容,对音频信息内容进行字符识别,采集识别字符的数量信息;
服务器字符标识生成模块,将音频信息中所对应的独立字符,逐个生成对应的字符标识进行表示;
服务器字符标识发送模块,和前述的服务器字符标识生成模块相连接,用以将生成的字符标识,发送至下述的接收方客户端;
接收方客户端,它包括,
数据接收模块,用以接收来自于前述发送方客户端所发送的包含有音频信息的数据内容与来自于服务器字符标识发送模块所发送的对应字符标识,或者仅接收来自于服务器字符标识发送模块所发送的字符标识及对应包含有音频信息的数据内容;
字符标识输出模块,与数据接收模块相连接,对应着包含有音频信息的数据内容输出字符标识。
26.根据权利要求25所述的一种用以生成字符标识内容的系统,其特征在于:所述的系统为即时通信系统,其中的发送方客户端,对应着即时通信发送方客户端,其中的接收方客户端,对应着即时通信的接收方客户端,其中的服务器,对应着即时通信的系统服务器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210085925.1A CN102664007B (zh) | 2012-03-27 | 2012-03-27 | 用于生成字符标识内容的方法、客户端及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210085925.1A CN102664007B (zh) | 2012-03-27 | 2012-03-27 | 用于生成字符标识内容的方法、客户端及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102664007A CN102664007A (zh) | 2012-09-12 |
CN102664007B true CN102664007B (zh) | 2016-08-31 |
Family
ID=46773473
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210085925.1A Active CN102664007B (zh) | 2012-03-27 | 2012-03-27 | 用于生成字符标识内容的方法、客户端及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102664007B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103065625A (zh) * | 2012-12-25 | 2013-04-24 | 广东欧珀移动通信有限公司 | 一种数字语音标签的添加方法及装置 |
CN104281252B (zh) * | 2013-07-12 | 2017-12-26 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104090902B (zh) * | 2014-01-20 | 2016-06-08 | 腾讯科技(深圳)有限公司 | 音频标签设置方法及装置 |
US11303951B2 (en) * | 2016-10-27 | 2022-04-12 | Evixar Inc. | Content reproduction program and content reproduction device |
CN107516533A (zh) * | 2017-07-10 | 2017-12-26 | 阿里巴巴集团控股有限公司 | 一种会话信息处理方法、装置、电子设备 |
CN107945804A (zh) * | 2017-12-07 | 2018-04-20 | 杭州测质成科技有限公司 | 基于语音识别的任务管理与量具数据提取系统及其方法 |
CN111160051B (zh) * | 2019-12-20 | 2024-01-26 | Oppo广东移动通信有限公司 | 数据处理方法、装置、电子设备及存储介质 |
CN115150349B (zh) * | 2021-03-30 | 2024-07-30 | 北京字节跳动网络技术有限公司 | 消息处理方法、装置、设备和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1261181A (zh) * | 1999-01-19 | 2000-07-26 | 国际商业机器公司 | 自动进行音频内容分析的系统和方法 |
CN1328322A (zh) * | 2000-06-14 | 2001-12-26 | 日本电气株式会社 | 字符信息接收装置 |
CN101194224A (zh) * | 2005-04-12 | 2008-06-04 | 夏普株式会社 | 音频再现方法、字符码使用设备、分发服务系统和字符码管理方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2444539A (en) * | 2006-12-07 | 2008-06-11 | Cereproc Ltd | Altering text attributes in a text-to-speech converter to change the output speech characteristics |
KR101466027B1 (ko) * | 2008-04-30 | 2014-11-28 | 엘지전자 주식회사 | 이동 단말기 및 그 통화내용 관리 방법 |
-
2012
- 2012-03-27 CN CN201210085925.1A patent/CN102664007B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1261181A (zh) * | 1999-01-19 | 2000-07-26 | 国际商业机器公司 | 自动进行音频内容分析的系统和方法 |
CN1328322A (zh) * | 2000-06-14 | 2001-12-26 | 日本电气株式会社 | 字符信息接收装置 |
CN101194224A (zh) * | 2005-04-12 | 2008-06-04 | 夏普株式会社 | 音频再现方法、字符码使用设备、分发服务系统和字符码管理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102664007A (zh) | 2012-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102664007B (zh) | 用于生成字符标识内容的方法、客户端及系统 | |
CN101223813B (zh) | 用于建立和控制服务连接的方法 | |
CN104836977B (zh) | 即时通讯过程中的视频通讯方法及系统 | |
US9626984B2 (en) | Instant messaging method and system, communication information processing method, terminal, and storage medium | |
KR100657065B1 (ko) | 휴대단말기의 캐릭터 처리 장치 및 방법 | |
US20100141662A1 (en) | Communication network and devices for text to speech and text to facial animation conversion | |
CN102075605A (zh) | 来电的显示方法及系统、移动终端 | |
KR20040026606A (ko) | 피호출측 또는 호출측의 이전 지식/경험 및 적은 통신자원을 사용하는 네트워크에서의 미디어 정보 다중화시스템 및 그 방법 | |
CN102118501B (zh) | 一种移动终端及其用户界面管理方法 | |
CN106228451A (zh) | 一种漫画聊天系统 | |
US20180139158A1 (en) | System and method for multipurpose and multiformat instant messaging | |
CN102938807A (zh) | 一种推荐联系人和消息的方法及装置 | |
KR100733772B1 (ko) | 이동통신 가입자를 위한 립싱크 서비스 제공 방법 및 이를위한 시스템 | |
CN107943395A (zh) | 一种来电处理方法、装置、计算机装置及计算机可读存储介质 | |
CN104363325B (zh) | 终端呼叫方法和系统 | |
CN109327381A (zh) | 快速将人员加入群组与新建群组的方法及装置 | |
CN109246301A (zh) | 多sim卡管理方法、装置、计算机装置及计算机存储介质 | |
CN102594964A (zh) | 一种移动终端智能添加联系人的方法 | |
CN101541003A (zh) | 一种基于第三代移动通信业务的手机管理系统和方法 | |
CN101119545B (zh) | 基于编码标签的信息处理系统与信息处理方法 | |
CN106470404B (zh) | 实现短信接收个性化签名的方法、签名业务平台和系统 | |
CN106357868A (zh) | 隐私联系人通信方法及用户终端 | |
CN106130884A (zh) | 信息共享方法、信息共享装置和终端 | |
CN104539777B (zh) | 实现连续通讯的方法及装置 | |
CN101931915A (zh) | 一种在呼叫过程中传输即时信息的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |