CN102467939A - 一种歌曲音频切割装置及方法 - Google Patents

一种歌曲音频切割装置及方法 Download PDF

Info

Publication number
CN102467939A
CN102467939A CN2010105319640A CN201010531964A CN102467939A CN 102467939 A CN102467939 A CN 102467939A CN 2010105319640 A CN2010105319640 A CN 2010105319640A CN 201010531964 A CN201010531964 A CN 201010531964A CN 102467939 A CN102467939 A CN 102467939A
Authority
CN
China
Prior art keywords
lyrics
repeated
lyric
song
cutting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010105319640A
Other languages
English (en)
Other versions
CN102467939B (zh
Inventor
孙武
倪雯
邓周辉
赵凌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING CAIYUN ONLINE Technology Co Ltd
Original Assignee
BEIJING CAIYUN ONLINE Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING CAIYUN ONLINE Technology Co Ltd filed Critical BEIJING CAIYUN ONLINE Technology Co Ltd
Priority to CN201010531964.0A priority Critical patent/CN102467939B/zh
Publication of CN102467939A publication Critical patent/CN102467939A/zh
Application granted granted Critical
Publication of CN102467939B publication Critical patent/CN102467939B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

本发明公开了一种歌曲音频切割装置及方法,该方法包括:获取歌曲音频文件的歌词文本文件;分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合;针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;利用歌曲切割工具从该切割起始点开始,切割该歌曲音频文件。本发明可自动批量识别并切割歌曲音频文件的高潮部分,保证较高的歌曲高潮识别的准确度。

Description

一种歌曲音频切割装置及方法
技术领域
本发明涉及音频处理领域,特别是涉及一种歌曲音频切割装置及方法。
背景技术
移动通信终端的软硬件发展十分迅速,为使用者提供各种周边服务以改善用户体验成为产业中的大势所趋。
移动通信终端的铃声服务获得使用者的青睐,今年来市场中对于各种铃声的需求量非常巨大。
其中,很大一部分使用者喜欢采用歌曲中的高潮部分作为自己的铃声,以体现自身的喜好与个性。相应的,对于歌曲的高潮部分的准确定位以及切割,成为产业中面临的问题。
现有技术中大多采用人工手动识别的方式。这样的做的优点在于:定位十分准确,能够符合使用者对一首歌曲的心理预期。但是,其同样存在缺点,人工手动识别的速度慢,效率低下,无法针对大量的歌曲进行处理。
发明内容
本发明解决的问题在于,公开一种歌曲音频切割装置及方法,用于针对歌曲音频文件自动识别并切割其高潮部分。
更进一步,可以将切割得到的该高潮部分作为铃声。
更进一步的,本发明可自动对大量歌曲音频文件进行批量的音频文件切割,避免人工识别切割,提高效率。
更进一步的,保证较高的歌曲高潮识别的准确度。
为解决上述问题,本发明公开了一种歌曲音频切割方法,包括:
步骤一,获取歌曲音频文件的歌词文本文件;
步骤二,分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合;
步骤三,针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;
步骤四,根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;
步骤五,利用歌曲切割工具从该切割起始点开始,切割该歌曲音频文件。
本发明还公开了一种歌曲音频切割装置,包括:数据接口模块,用于获取歌曲音频文件的歌词文本文件;歌词文本文件处理模块,分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合,针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;切割起始点确定模块,根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;歌曲音频文件切割模块,从该切割起始点开始,切割该歌曲音频文件。
本发明针对歌曲音频文件自动识别并切割其高潮部分。可以将切割得到的该高潮部分作为铃声。本发明可自动对大量歌曲音频文件进行批量的音频文件切割,避免人工识别切割,提高效率。保证较高的歌曲高潮识别的准确度。
附图说明
图1所示为本发明的歌曲音频切割装置的结构示意图;
图2所示为本发明歌曲音频切割方法的流程图;
图3所示为本发明的歌曲音频切割装置的结构示意图;
图4A、4B所示为本发明歌曲音频切割方法的流程图;
图5所示为本发明的歌曲音频切割装置的结构示意图;
图6所示为本发明歌曲音频切割方法的流程图;
图7所示为本发明的歌曲音频切割装置的结构示意图;
图8所示为本发明歌曲音频切割方法的流程图;
图9所示为本发明的歌曲音频切割装置的结构示意图;
图10所示为本发明歌曲音频切割方法的流程图。
具体实施方式
以下通过具体实施例,详细描述本发明的实现过程,以使本领域的技术人员能够据以实现本发明。
本发明用于针对歌曲音频文件自动识别并切割其高潮部分。特别是,可以将切割得到的该高潮部分作为铃声。另外,本发明可自动对大量歌曲音频文件进行批量的音频文件切割,避免因人工识别切割导致速度较低,提高效率。同时,可以保证较高的歌曲高潮识别的准确度。
本领域的技术人员可以知道,歌曲音频文件通常具备对应的歌词文本文件,以lrc为扩展名的歌词文本文件可以在各类数码播放器中同步显示。LRC歌词是一种包含着“*:*”形式的“标签(tag)”的、基于纯文本的歌词专用格式。同时,LRC歌词是一种通过编辑器把歌词按歌曲歌词出现的时间编辑成的文件。lrc歌词文本文件中含有两类标签,一是标识标签,主要包含以下预定义的标签:[ar:歌手名]、[ti:歌曲名]、[al:专辑名]、[by:编辑者(指lrc歌词的制作人)]、[offset:时间补偿值];二是时间标签,形式为“[timestamp1]……[timestampN]lyric”,时间标签需位于某句歌词中的句首部分。当利用播放器播放该歌曲到达某一时间点时,播放器通常会自动寻找对应的时间标签并显示标签后面的歌词文本,这样就完成了现有技术中“歌词同步”的功能。
本发明基于歌曲高潮部分的歌词通常反复重复的特点,进行高潮部分的识别。高潮部分通常出现段落性的反复重复,即,多句歌词组成的段落会反复的顺序出现。本发明基于该特点,重点识别反复出现的歌词,特别是段落性反复重复的歌词。
以下描述本发明的第一实施例,请参阅图1所示为本发明的歌曲音频切割装置的结构示意图。
歌曲音频切割装置100包括相互连接的如下模块:数据接口模块11、歌词文本文件处理模块12、切割起始点确定模块13、歌曲音频文件切割模块14。
该数据接口模块11用于获取歌曲音频文件,从中提取歌词文本文件。具体的说,该数据接口模块11负责读写数据来源装置,该数据来源装置例如为song_lib数据库或者其他可以提供歌曲音频文件的装置,从该数据来源装置中提取一歌曲音频文件的歌词文本文件,特别是从中获取每句歌词与时间的对应关系序列。
该数据接口模块11所提取出的歌词文本文件被传送至该歌词文本文件处理模块12。该歌词文本文件处理模块12包括一完全重复处理模块121,用于分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合。具体的说,完全重复处理模块121扫描该歌词文本文件,寻找完全重复的歌词,并记录同一句歌词的重复次数。例如歌词lyric1出现了3次,记录<lyric1,3>。该重复程度包括歌词的完全重复次数。该完全重复指完全相同一字不差的重复。当某句歌词的重复程度超过特定阈值2时,视为重复歌词,加入一候选集合中。即,该候选集合中均为至少在歌词文本文件中出现了2次的歌词。该特定阈值可根据需要预先设置,通常为不小于2的整数。
该歌词文本文件处理模块12包括一段落处理模块122。该段落处理模块122用于针对该候选集合中的重复歌词,分析获取其分布位置,连续分布的多句重复歌词组成段落。例如,该段落处理模块122分析得到歌词a在第2、6句重复出现,歌词b在第3、7、10句重复出现,歌词c在第4、8句重复出现。由于歌词a、b、c在第2、3、4句连续出现,段落处理模块122认定歌词a、b、c组成一个段落A并记录。同时,歌词a、b、c还在第6、7、8句连续出现。即,该段落重复出现。段落处理模块122记录该段落的重复出现。
切割起始点确定模块13用于根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点。具体的说,切割起始点确定模块13针对该候选集合中的每句重复歌词依次进行评分,以选择一切割起始点。在本发明中,认定重复次数多的歌词属于高潮的几率越高,同时,在所属段落中位置越靠前,其为歌曲高潮部分的起始句的可能性越高。切割起始点确定模块13依照以下公式为每句歌词评分:
Score1i=重复程度i*权重1+在所属段落中的位置i*权重2      (1)
其中,Score1i为第i句歌词的最终评分,重复程度i为第i句歌词在歌词文本文件中的重复程度,在所属段落中的位置i为第i句歌词在段落中的位置。在段落中的位置越靠前,“在所属段落中的位置i”越大。参数“在所属段落中的位置i”通常大于0,且可通过查表方式获得,即,预先为段落中的每个位置确定一对应的参数值。公式(1)中的各个权重值可根据多次实验统计的结果进行设定。也就是说,重复程度越大,在段落中位置越靠前(如上例中歌词a比歌词c靠前),Score1i越大。切割起始点确定模块13选择Score1i最大的一句重复歌词作为高潮的起点,即,作为切割起始歌词,确定该句切割起始歌词的开始时间点,并以该开始时间点作为该歌曲音频文件的切割起始点。如果某句歌词仅仅是重复多次,但是,没有出现在任一段落中,则该句歌词的参数“在所属段落中的位置i”值为0,其被识别为高潮部分的起始点的几率将大为降低。对公式(1)的各种等效变型也在本发明的公开范围内。
更为优化的,为获得更精确的高潮起点,切割起始点确定模块13选择Score1i最大的一句重复歌词所处段落第一次出现时,该句重复歌词对应的时间点作为开始时间点。详细的说,歌词a在第2、6句都出现,选择歌词a在段落A首次出现时的位置,也就是第2句对应的时间点,作为开始时间点。
歌曲音频文件切割模块14可通过歌曲切割工具mp3Splt实现,从该开始时间点开始进行切割,可切割一固定时间长度的音频,例如切割48秒的音频文件。或者,歌曲音频文件切割模块14可以从该开始时间点开始切割,到该切割起始歌词所属段落的最后一句结束为止,该切割长度可根据需要而确定,不以此为限。而切割得到的音频文件可以作为手机铃声、彩铃、各种提示音、电影的特定音效等加以利用。
对应上述歌曲音频切割装置,本发明还包括一歌曲音频切割方法,如图2所示为本发明歌曲音频切割方法的流程图。
步骤201,获取歌曲音频文件的歌词文本文件;
步骤202,分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合;
步骤203,针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;
步骤204,根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;
步骤205,利用歌曲切割工具从该切割起始点开始,切割该歌曲音频文件。
本发明通过上述的第一实施例,可以自动对大批量的歌曲音频文件进行切割处理,执行的效率高,而且,基于重复歌词的重复程度、段落连续性以及其在所属段落中的位置来识别歌曲高潮起始点的识别准确度高。
以下说明本发明的第二实施例。如图3所示为本发明的歌曲音频切割装置的结构示意图。与图1的基础上,本实施例的歌曲音频切割装置100进一步包括一RAP排除模块15。与图1相同部分未做重复说明。
在歌曲中,RAP部分不是歌曲的高潮部分,不能作为高潮被切割。针对歌曲RAP部分通常速度很快,比歌曲其他演唱部分速度快的特点,本发明通过RAP排除模块15对歌曲音频文件中的RAP部分进行直接排除,不对其进行高潮识别的后续步骤,以提高识别效率,避免不必要的处理能力的浪费。
该数据接口模块11所提取出的歌词文本文件首先传送至该RAP排除模块15。RAP排除模块15计算该歌词文本文件中的每句歌词的歌唱速度,对于高于特定速度的歌词,不传送至该歌词文本文件处理模块12,对于不高于该特定速度的歌词,传送至该歌词文本文件处理模块12进行后续处理。其中,RAP排除模块15可通过一句歌词的开始时间以及下一句歌词的开始时间的差获得当前歌词的时长,通过歌词字数与时长的比值,获得歌唱速度。或者,RAP排除模块15根据一句歌词所包括的音节数与时长的比值,获得歌唱速度。
该特定速度为预先设定,为通常情况下说唱RAP的最低阈值。
更为优化的,RAP排除模块15在计算得到多句(例如5句以上或者10句以上,可根据需要设置)连续的歌词的歌唱速度都高于该特定速度,才不传送至该歌词文本文件处理模块12,也就是说,对于零星出现的几句歌词,即使其速度较快,超过该特定速度,也不视为RAP,继续执行歌词文本文件处理模块12的处理。
如图4A、4B所示为本发明歌曲音频切割方法的流程图。如图4A所示:
在该步骤201之后执行步骤401,计算该歌词文本文件中的每一句歌词的歌唱速度;
步骤402,判断每句歌词的歌唱速度是否高于一特定速度;
步骤403,对于不高于该特定速度的歌词,执行步骤202,对于高于特定速度的歌词,不执行步骤202,对于该句歌词的处理流程结束。
更为优化的,如图4B所示:
在该步骤201之后执行步骤401’,计算该歌词文本文件中的每一句歌词的歌唱速度;
步骤402’,判断每句歌词的歌唱速度是否高于一特定速度;
步骤403’,对于不高于该特定速度的歌词,执行步骤202;对于高于该特定速度的歌词,判断这些高于特定速度的歌词是否连续出现且连续出现超过预定句数(例如连续5句或10句,不以此为限),对于连续出现超过预定句数的多句歌词,不执行步骤202,对于该多句歌词的处理流程结束,对于未连续出现或未连续出现超过预定句数的歌词,执行步骤202。
该第二实施例可对歌词文本文件中的所有歌词进行初始筛选,排除不可能是高潮的歌词,缩小后续高潮识别处理过程的目标范围,提高整体计算的效率,提高高潮部分识别的准确性。
以下通过第三实施例进一步描述本发明的内容,如图5所示为本发明的歌曲音频切割装置的结构示意图。为实现更为优化的效果,图3的基础上,本实施例的歌曲音频切割装置100进一步包括一相似重复处理模块123。与图3相同部分未做重复说明。另外,第三实施例也可基于图1所述方案增加该相似重复处理模块123。所增方案如下所述。
相似重复处理模块123用于分析该候选集合中的任意两句重复歌词之间的相似度,对于相似度高于一相似阈值的两句重复歌词,合并其重复程度。
在本发明中,除了认为歌词之间一字不差完全相同为重复外,个别少量文字的变化也可认为两句歌词是重复的,即,相似重复。有些歌曲的歌词可能在有一些语气词或发语词等些微变化,但是核心歌词是一样的,可能对应的是同一旋律或歌曲中不同乐章的同一位置,因此,识别相似重复的歌词,对于高潮部分的识别能够起到较好的补充作用。
如图6所示为本发明歌曲音频切割方法的流程图。
在步骤202之后,执行步骤601,分析该候选集合中的任意两句重复歌词之间的相似度,对于相似度高于一相似阈值的两句重复歌词,合并其重复程度,执行步骤203。
该计算两句重复歌词之间的相似度可通过现有技术中所公开的各种文本相似度计算方法来实现,例如通过字符串的编辑距离来计算两句歌词间的相似度,不以此为限。该相似阈值为预先设定,也可通过多次实验统计得到。
具体来说,假设该候选集合中的歌词lyric1和lyric2之间的相似度高于该相似阈值,且lyric1和lyric2的重复程度(重复次数)均为2,则lyric1视为与lyric2相似重复,且lyric1、lyric2的重复程度均变为4。
在后续执行步骤203时,lyric1、lyric2视为同一句歌词,在分析段落组成以及所处位置时,与完全重复的处理方式完全相同。
为了获得更为优化的技术效果,该相似重复的处理过程可进一步细化。被视为相似重复的歌词需进一步确定其最大连续公共字符串长度,只有在该最大连续公共字符串长度大于一预设标准值时,认定该两句歌词确实为相似重复,才能执行步骤203。
更进一步的,当lyric1存在与之相似度均高于该相似阈值的多句歌词时,也就是说,当lyric1与lyric2、lyric1与lyric3……lyric1与lyricN之间的相似度均高于该相似阈值时,识别这些相似度中的最大相似度,例如,lyric1与lyric3之间的相似度为最大相似度,此时,该相似重复处理模块123认定lyric1与lyric3为相似重复,合并lyric1与lyric3的重复程度。
更进一步的,当与同一句重复歌词的相似度均高于该相似阈值,且包括多个最大相似度的多句重复歌词时,即,lyric1与lyric2、lyric1与lyric3之间的相似度一样,均高于相似阈值且为lyric1与lyric2、lyric1与lyric3……lyric1与lyricN之间所有相似度中的最大值时,计算该最大相似度对应的每对重复歌词的连续公共字符串长度(计算lyric1与lyric2、lyric1与lyric3的连续公共字符串长度),合并其中最大的连续公共字符串长度对应的两句重复歌词的重复程度。
更进一步的,如果lyric1与lyric2、lyric1与lyric3的连续公共字符串长度也相同,选择出现靠前的歌词进行重复程度的合并。即,如果lyric2比lyric3的出现位置靠前(时间点在先),则将lyric2与lyric1的重复程度进行合并。
该第三实施例通过扩大可被认定为重复歌词的范围的方式,以应对实际歌曲中歌词千变万化的不同高潮组成,以期识别出更加符合使用者感受的高潮部分,提高歌曲高潮识别的准确性。
以下通过第四实施例进一步描述本发明的内容,如图7所示为本发明的歌曲音频切割装置的结构示意图。为实现更为优化的效果,图5的基础上,本实施例的歌曲音频切割装置100进一步包括一歌曲名称判断模块124。与图5相同部分未做重复说明。另外,第四实施例也可基于图1、3所述方案增加该歌曲名称判断模块124,所增方案如下所述。
该歌曲名称判断模块124用于对于该重复程度低于该特定阈值的歌词,判断其是否包括歌曲名称,如果包括,将该歌词加入该候选集合。
如图8所示为本发明歌曲音频切割方法的流程图。
在步骤202之后进一步包括步骤801:该歌曲名称判断模块124针对该重复程度低于该特定阈值的歌词,依次判断其是否包括该歌曲的歌曲名称,如果包括,将该歌词加入该候选集合,执行步骤203,如果不包括,对该句歌词而言处理流程结束。
同时,在步骤204中,该切割起始点确定模块13将依据每句重复歌词的重复程度、在段落中的位置以及是否包括该歌曲名称,确定该候选集合中的一句歌词作为该切割起始歌词。
也就是说,通常该歌曲名称会出现在歌曲的高潮部分,因而,当歌词中出现该歌词名称时,认定其存在被包括于歌曲高潮部分的可能性。该切割起始点确定模块13可通过如下方式为每句歌词评分:
Score1i=重复程度i*权重1+在所属段落中的位置i*权重2+title*权重3(2)
该参数“title”对应该句歌词是否包括歌曲名称,如果未包括,赋值为“0”,如果包括赋值为1(或者其他大于0的数字,根据需要确定),权重3可根据多次实验统计的结果进行设定,调整权重1、2、3的不同比例。
对公式(2)的各种等效变型也在本发明的公开范围内。
在该第四实施例中,进一步丰富了识别高潮部分的识别依据,利用对歌词是否包括该歌曲名称的判断,使得高潮识别过程更加细腻、准确。
以下通过第五实施例进一步描述本发明的内容。如图9所示为本发明的歌曲音频切割装置的结构示意图。为实现更为优化的效果,除了通过识别重复歌词的角度确定切割起始点,本发明还可采用旋律分析的方式确定切割起始点,利用多种不同的方式共同进行识别,可降低识别失误率,保证准确性。
图7的基础上,图9所示本实施例的歌曲音频切割装置100进一步包括一旋律判断模块16。与图7相同部分未做重复说明。另外,第五实施例也可基于图1、3、5所述方案增加该旋律判断模块16,所增方案如下所述。
旋律判断模块16,用于计算从该重复歌词开始的多个段落间的旋律曲线相似度,和/或,从该重复歌词开始的段落的音节长度。
同时,该切割起始点确定模块根据每句重复歌词是否包括该歌曲名称、该旋律曲线相似度、该音节长度中的一种或多种,以及每句重复歌词的重复程度、在段落中的位置,确定该候选集合中的一句歌词作为该切割起始歌词。
该旋律判断模块16针对候选集合中的每句重复歌词进行分析。接续前例,针对歌词a,从歌词a开始的段落有2个,分别是第2、3、4句以及第6、7、8句组成的段落。该旋律判断模块16计算这两个段落间的旋律曲线相似度。利用音高、音频等旋律变化分析计算旋律曲线相似度为现有技术,本领域的技术人员可以自行实施,不做赘述。另外,如果从歌词a开始的段落有3个或3个以上,则计算这多个段落间的旋律曲线相似度。
针对歌词b,从歌词b开始的段落有2个,分别是第3、4句以及第7、8句组成的段落。该旋律判断模块16计算这两个段落间的旋律曲线相似度。
在本发明中,两个段落的旋律越相像,该参数“旋律曲线相似度”的赋值越大。该旋律判断模块16计算得到的“旋律曲线相似度”传送至该切割起始点确定模块13进行后续计算。
在本实施例中,该切割起始点确定模块13基于以下公式进行计算:
Score2i=旋律曲线相似度i*权重4                 (3)
该权重值权重4可根据经验预先设定。Score2i为第i句歌词的旋律曲线部分的评分。旋律曲线相似度i为从第i句歌词开始的段落间的旋律曲线相似度。对公式(3)的各种等效变型也在本发明的公开范围内。
同时,综合上述通过歌词重复分析以及歌曲旋律分析计算得到的Score1i、Score2i,综合分析进行切割起始点的确定。具体通过如下方式:针对候选集合中的每句歌词依照以下公式进行评分,评分最高的歌词,作为切割起始歌词,其开始时间点作为该歌曲音频文件的切割起始点。
Scorei=Score1i*(1-权重x)+Score2i*权重x            (4)
Scorei为第i句歌词的最终评分,也是评价每句歌词是否能够作为切割起始歌词的最终依据。权重x可根据经验值设定。
对公式(4)的各种等效变型也在本发明的公开范围内。
在另一种实现方式中,该旋律判断模块16可以针对候选集合中每句重复歌词引领的音节长度进行分析。
接续前例,针对歌词a,从歌词a开始的段落有2个,分别是第2、3、4句以及第6、7、8句组成的段落。该旋律判断模块16计算从歌词a开始的段落所包含的音节长度,即第2、3、4句所总共包括的音节长度,或第6、7、8句所总共包括的音节长度。如果发生从歌词a开始的不同段落音节长度不同的情况,以较多者进行记录。
针对歌词b,从歌词b开始的段落有2个,分别是第3、4句以及第7、8句组成的段落。该旋律判断模块16计算从歌词b开始的段落所包含的音节长度,即第3、4句所总共包括的音节长度,或第7、8句所总共包括的音节长度。如果发生从歌词b开始的不同段落音节长度不同的情况,以较多者进行记录。
该旋律判断模块16计算得到的“音节长度”传送至该切割起始点确定模块13进行后续计算。
在本实施例中,该切割起始点确定模块13基于以下公式进行计算:
Score2i=音节长度i*权重5                            (5)
该权重值权重5可根据经验预先设定。Score2i为第i句歌词的音节长度部分的评分。音节长度i为从第i句歌词开始的段落的音节长度。对公式(5)的各种等效变型也在本发明的公开范围内。
同样的,该切割起始点确定模块13基于公式(4)进行最终评分,评分最高的歌词,作为切割起始歌词,其开始时间点作为该歌曲音频文件的切割起始点。
更进一步的,该旋律判断模块16可以同时针对候选集合中每句重复歌词引领的段落的旋律曲线相似度以及音节长度进行分析。该旋律判断模块16将针对每句重复歌词计算得到的“旋律曲线相似度”以及“音节长度”都传送至该切割起始点确定模块13进行后续计算。则该切割起始点确定模块13基于以下公式进行计算:
Score2i=旋律曲线相似度i*权重4+音节长度i*权重5          (6)
同样的,基于公式(6)计算得到的Score2i,该切割起始点确定模块13基于公式(4)进行最终评分。评分最高的歌词,作为切割起始歌词,其开始时间点作为该歌曲音频文件的切割起始点。对公式(6)的各种等效变型也在本发明的公开范围内。
如图10所示为本发明歌曲音频切割方法的流程图。
在步骤203之后,执行步骤1001,计算从每一句重复歌词开始的不同段落间的旋律曲线相似度,和/或,从每一句重复歌词开始的段落的音节长度;
步骤204’,根据每句重复歌词是否包括该歌曲名称、该旋律曲线相似度、该音节长度中的一种或多种,以及每句重复歌词的重复程度、在段落中的位置,确定该候选集合中的一句重复歌词作为该切割起始歌词,执行步骤205。
在此基础上更进一步的,本发明还可针对公式(4)中的权重x做更为详细的规定,以使得权重x的数值设定更加贴合对歌曲高潮部分的识别的需求,提高识别准确度。
本发明可预先利用丰富的音乐库以及音乐的分类标签,根据音乐的旋律变化规律,归纳出n个分类(C1,C2,C3,……Cn),例如忧郁类、欢快类等,有的分类旋律平缓,有的分类激昂高潮突出。分析各分类旋律变化的特点,根据每种分类的旋律高潮突出程度给出一个权重x。
旋律判断模块16根据候选集合中的歌词对应的旋律曲线,基于歌曲分类的规则,计算该首歌曲所处分类,进而可以获得该分类对应的权重x,该权重x即应用于公式(4)中。
当歌曲所属分类旋律变化的高潮突出时,权重x值偏大,当歌曲所属分类旋律变化平淡,高潮不突出时,权重x值偏小。
从而倾向性的调整Score1、Score2的不同比重,使得高潮识别的结果更加准确。
另外,对于基于以上多个实施例的技术方案,对大量歌曲音频文件进行批量处理的结果进行统计,根据大量的切割起始点的分布,可得到一经验起始点。对于完全没有重复歌词或者歌曲音频文件不存在歌词文本文件的情况,可根据该经验起始点直接进行切割。
另外,该mp3Splt需针对mp3文件进行切割,当歌曲音频文件不是mp3文件时,需获取对应的wma文件,将wma文件转换为mp3文件再进行切割。
上述技术方案可针对歌曲音频文件自动识别并切割其高潮部分。特别是,可以将切割得到的该高潮部分作为铃声。另外,本发明可自动对大量歌曲音频文件进行批量的音频文件切割,避免人工识别切割,提高效率。同时,可以保证较高的歌曲高潮识别的准确度。

Claims (13)

1.一种歌曲音频切割方法,其特征在于,包括:
步骤一,获取歌曲音频文件的歌词文本文件;
步骤二,分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合;
步骤三,针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;
步骤四,根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;
步骤五,利用歌曲切割工具从该切割起始点开始,切割该歌曲音频文件。
2.如权利要求1所述的方法,其特征在于,该步骤一之后还包括:计算该歌词文本文件中的每句歌词的歌唱速度,对于不高于特定速度的歌词,执行步骤二,对于高于该特定速度的歌词,结束;或者,
该步骤一之后还包括:计算该歌词文本文件中的每句歌词的歌唱速度,对于高于该特定速度的歌词,判断是否连续出现超过预定句数,对于连续出现超过预定句数的多句歌词,不执行步骤二,结束,其余歌词执行步骤二。
3.如权利要求1所述的方法,其特征在于,该步骤二之后进一步包括:
分析该候选集合中的任意两句重复歌词之间的相似度,对于相似度高于一相似阈值的两句重复歌词,合并其重复程度。
4.如权利要求3所述的方法,其特征在于,该合并其重复程度的步骤进一步包括:
对于与同一句重复歌词的相似度均高于该相似阈值的多句重复歌词,选择该多句重复歌词的多个相似度中的最大相似度,合并该最大相似度对应的两句重复歌词的重复程度;或
对于与同一句重复歌词的相似度均高于该相似阈值,且包括多个最大相似度的多句重复歌词,计算该最大相似度对应的每对重复歌词的连续公共字符串长度,合并其中最大的连续公共字符串长度对应的两句重复歌词的重复程度。
5.如权利要求1-4中任一所述的方法,其特征在于,该步骤二与步骤三之间还包括:
对于该重复程度低于该特定阈值的歌词,判断其是否包括歌曲名称,如果包括,将该歌词加入该候选集合;
该步骤四还包括:根据每句重复歌词的重复程度、在段落中的位置以及是否包括该歌曲名称,确定该候选集合中的一句歌词作为该切割起始歌词。
6.如权利要求5所述的方法,其特征在于,该步骤三之后进一步包括:
计算从每一句重复歌词开始的不同段落间的旋律曲线相似度,和/或,从每一句重复歌词开始的段落的音节长度;
该步骤四进一步包括:根据每句重复歌词是否包括该歌曲名称、该旋律曲线相似度、该音节长度中的一种或多种,以及每句重复歌词的重复程度、在段落中的位置,确定该候选集合中的一句重复歌词作为该切割起始歌词。
7.如权利要求1所述的方法,其特征在于,该歌曲切割工具包括mp3Splt。
8.一种歌曲音频切割装置,其特征在于,包括:
数据接口模块,用于获取歌曲音频文件的歌词文本文件;
歌词文本文件处理模块,分析该歌词文本文件中的每句歌词的重复程度,将该重复程度高于一特定阈值的重复歌词加入一候选集合,针对该候选集合中的重复歌词进行分析,获取其分布位置,连续分布的多句重复歌词组成段落;
切割起始点确定模块,根据每句重复歌词的重复程度以及在段落中的位置,确定一句重复歌词作为切割起始歌词,以该切割起始歌词的开始时间点作为该歌曲音频文件的切割起始点;
歌曲音频文件切割模块,从该切割起始点开始,切割该歌曲音频文件。
9.如权利要求8所述的装置,其特征在于,该装置进一步包括一RAP排除模块,用于计算该歌词文本文件中的每句歌词的歌唱速度,对于高于特定速度的歌词,不传送至该歌词文本文件处理模块,对于不高于该特定速度的歌词,传送至该歌词文本文件处理模块进行处理。
10.如权利要求8所述的装置,其特征在于,该歌词文本文件处理模块进一步包括一相似重复处理模块,用于分析该候选集合中的任意两句重复歌词之间的相似度,对于相似度高于一相似阈值的两句重复歌词,合并其重复程度。
11.如权利要求10所述的装置,其特征在于,该相似重复处理模块对于与同一句重复歌词的相似度均高于该相似阈值的多句重复歌词,选择该多句重复歌词的多个相似度中的最大相似度,合并该最大相似度对应的两句重复歌词的重复程度;或
该相似重复处理模块对于与同一句重复歌词的相似度均高于该相似阈值,且包括多个最大相似度的多句重复歌词,计算该最大相似度对应的每对重复歌词的连续公共字符串长度,合并其中最大的连续公共字符串长度对应的两句重复歌词的重复程度。
12.如权利要求8-11所述的装置,其特征在于,该歌词文本文件处理模块还包括一歌曲名称判断模块,用于对于该重复程度低于该特定阈值的歌词,判断其是否包括歌曲名称,如果包括,将该歌词加入该候选集合;
同时,该切割起始点确定模块根据每句重复歌词的重复程度、在段落中的位置以及是否包括该歌曲名称,确定该候选集合中的一句歌词作为该切割起始歌词。
13.如权利要求12所述的装置,其特征在于,该装置还包括一旋律判断模块,用于计算从每一句重复歌词开始的不同段落间的旋律曲线相似度,和/或,从每一句重复歌词开始的段落的音节长度;
同时,该切割起始点确定模块根据每句重复歌词是否包括该歌曲名称、该旋律曲线相似度、该音节长度中的一种或多种,以及每句重复歌词的重复程度、在段落中的位置,确定该候选集合中的一句重复歌词作为该切割起始歌词。
CN201010531964.0A 2010-11-04 2010-11-04 一种歌曲音频切割装置及方法 Expired - Fee Related CN102467939B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201010531964.0A CN102467939B (zh) 2010-11-04 2010-11-04 一种歌曲音频切割装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010531964.0A CN102467939B (zh) 2010-11-04 2010-11-04 一种歌曲音频切割装置及方法

Publications (2)

Publication Number Publication Date
CN102467939A true CN102467939A (zh) 2012-05-23
CN102467939B CN102467939B (zh) 2014-08-13

Family

ID=46071480

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010531964.0A Expired - Fee Related CN102467939B (zh) 2010-11-04 2010-11-04 一种歌曲音频切割装置及方法

Country Status (1)

Country Link
CN (1) CN102467939B (zh)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880648A (zh) * 2012-08-24 2013-01-16 北京百度网讯科技有限公司 一种对歌曲进行分析的方法及装置
CN103400593A (zh) * 2013-07-03 2013-11-20 网易(杭州)网络有限公司 一种试听音频的方法及装置
CN104078063A (zh) * 2014-06-19 2014-10-01 深圳市中兴移动通信有限公司 音频文件播放方法和系统
CN104361897A (zh) * 2014-11-21 2015-02-18 网易(杭州)网络有限公司 一种制作铃音的方法及装置
CN104778221A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种歌曲串烧拼接的方法及装置
CN104778219A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种预设效果歌曲拼接的方法及装置
CN104778958A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种含噪声歌曲拼接的方法及装置
CN104778220A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种清唱歌曲拼接的方法及装置
CN104978974A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN104978961A (zh) * 2015-05-25 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法、装置及终端
CN105047203A (zh) * 2015-05-25 2015-11-11 腾讯科技(深圳)有限公司 一种音频处理方法、装置及终端
CN105161116A (zh) * 2015-09-25 2015-12-16 广州酷狗计算机科技有限公司 多媒体文件高潮片段的确定方法及装置
WO2016015181A1 (zh) * 2014-07-26 2016-02-04 华为技术有限公司 一种音频文件的剪辑方法及装置
CN106448713A (zh) * 2015-08-11 2017-02-22 腾讯科技(深圳)有限公司 音频播放方法和装置
CN109087669A (zh) * 2018-10-23 2018-12-25 腾讯科技(深圳)有限公司 音频相似度检测方法、装置、存储介质及计算机设备
CN109584905A (zh) * 2019-01-22 2019-04-05 腾讯音乐娱乐科技(深圳)有限公司 一种衡量音乐速度的方法、终端及计算机可读介质
EP3340238A4 (en) * 2015-05-25 2019-06-05 Guangzhou Kugou Computer Technology Co., Ltd. METHOD AND APPARATUS FOR AUDIO PROCESSING, AND TERMINAL
CN111081272A (zh) * 2019-12-16 2020-04-28 腾讯科技(深圳)有限公司 歌曲高潮片段识别方法及装置
CN111782862A (zh) * 2020-06-24 2020-10-16 腾讯音乐娱乐科技(深圳)有限公司 音频处理方法、装置及存储介质
CN112037764A (zh) * 2020-08-06 2020-12-04 杭州网易云音乐科技有限公司 一种音乐结构的确定方法、装置、设备及介质
CN112133327A (zh) * 2020-09-17 2020-12-25 腾讯音乐娱乐科技(深圳)有限公司 一种音频样本的提取方法、设备、终端及存储介质
CN112667845A (zh) * 2020-12-23 2021-04-16 腾讯音乐娱乐科技(深圳)有限公司 一种歌曲推荐方法、装置、电子设备及可读存储介质
CN112989109A (zh) * 2021-04-14 2021-06-18 腾讯音乐娱乐科技(深圳)有限公司 一种音乐结构分析方法、电子设备及存储介质
CN113255348A (zh) * 2021-05-26 2021-08-13 腾讯音乐娱乐科技(深圳)有限公司 一种歌词分段方法、装置、设备、介质
CN113377992A (zh) * 2021-06-21 2021-09-10 腾讯音乐娱乐科技(深圳)有限公司 歌曲分段方法、设备和存储介质
CN114120207A (zh) * 2021-12-14 2022-03-01 北京雷石天地电子技术有限公司 歌词提取方法、装置、系统及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1878217A (zh) * 2006-06-30 2006-12-13 深圳市杰特电信控股有限公司 一种手机的铃声制作方法
KR100696876B1 (ko) * 2006-03-08 2007-03-20 주식회사 엔터기술 가사 및 화음 분석을 이용한 곡명선택장치 및 방법
CN100461168C (zh) * 2004-02-24 2009-02-11 微软公司 生成音频缩略图的系统和方法
CN101546587A (zh) * 2008-03-25 2009-09-30 国际商业机器公司 在播放歌曲时自动显示视觉元素的方法和装置
CN101587708A (zh) * 2009-06-26 2009-11-25 清华大学 歌曲情绪压力分析方法及系统
TW201020962A (en) * 2008-11-18 2010-06-01 Peer Holding Group Llc A Method and system of on-line editing phone ring tone/ring back tone

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100461168C (zh) * 2004-02-24 2009-02-11 微软公司 生成音频缩略图的系统和方法
KR100696876B1 (ko) * 2006-03-08 2007-03-20 주식회사 엔터기술 가사 및 화음 분석을 이용한 곡명선택장치 및 방법
CN1878217A (zh) * 2006-06-30 2006-12-13 深圳市杰特电信控股有限公司 一种手机的铃声制作方法
CN101546587A (zh) * 2008-03-25 2009-09-30 国际商业机器公司 在播放歌曲时自动显示视觉元素的方法和装置
TW201020962A (en) * 2008-11-18 2010-06-01 Peer Holding Group Llc A Method and system of on-line editing phone ring tone/ring back tone
CN101587708A (zh) * 2009-06-26 2009-11-25 清华大学 歌曲情绪压力分析方法及系统

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880648A (zh) * 2012-08-24 2013-01-16 北京百度网讯科技有限公司 一种对歌曲进行分析的方法及装置
CN103400593A (zh) * 2013-07-03 2013-11-20 网易(杭州)网络有限公司 一种试听音频的方法及装置
CN103400593B (zh) * 2013-07-03 2016-02-24 网易(杭州)网络有限公司 一种试听音频的方法及装置
CN104078063A (zh) * 2014-06-19 2014-10-01 深圳市中兴移动通信有限公司 音频文件播放方法和系统
WO2016015181A1 (zh) * 2014-07-26 2016-02-04 华为技术有限公司 一种音频文件的剪辑方法及装置
CN104978974A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN104361897A (zh) * 2014-11-21 2015-02-18 网易(杭州)网络有限公司 一种制作铃音的方法及装置
CN104778958A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种含噪声歌曲拼接的方法及装置
CN104778220A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种清唱歌曲拼接的方法及装置
CN104778220B (zh) * 2015-03-20 2019-04-05 Oppo广东移动通信有限公司 一种清唱歌曲拼接的方法及装置
CN104778219A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种预设效果歌曲拼接的方法及装置
CN104778221A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种歌曲串烧拼接的方法及装置
CN104778219B (zh) * 2015-03-20 2018-05-29 广东欧珀移动通信有限公司 一种预设效果歌曲拼接的方法及装置
CN104978961A (zh) * 2015-05-25 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法、装置及终端
CN105047203A (zh) * 2015-05-25 2015-11-11 腾讯科技(深圳)有限公司 一种音频处理方法、装置及终端
CN104978961B (zh) * 2015-05-25 2019-10-15 广州酷狗计算机科技有限公司 一种音频处理方法、装置及终端
EP3340238A4 (en) * 2015-05-25 2019-06-05 Guangzhou Kugou Computer Technology Co., Ltd. METHOD AND APPARATUS FOR AUDIO PROCESSING, AND TERMINAL
CN106448713B (zh) * 2015-08-11 2021-05-14 腾讯科技(深圳)有限公司 音频播放方法和装置
CN106448713A (zh) * 2015-08-11 2017-02-22 腾讯科技(深圳)有限公司 音频播放方法和装置
CN105161116A (zh) * 2015-09-25 2015-12-16 广州酷狗计算机科技有限公司 多媒体文件高潮片段的确定方法及装置
CN105161116B (zh) * 2015-09-25 2019-01-01 广州酷狗计算机科技有限公司 多媒体文件高潮片段的确定方法及装置
CN109087669A (zh) * 2018-10-23 2018-12-25 腾讯科技(深圳)有限公司 音频相似度检测方法、装置、存储介质及计算机设备
CN109584905A (zh) * 2019-01-22 2019-04-05 腾讯音乐娱乐科技(深圳)有限公司 一种衡量音乐速度的方法、终端及计算机可读介质
CN109584905B (zh) * 2019-01-22 2021-09-28 腾讯音乐娱乐科技(深圳)有限公司 一种衡量音乐速度的方法、终端及计算机可读介质
CN111081272A (zh) * 2019-12-16 2020-04-28 腾讯科技(深圳)有限公司 歌曲高潮片段识别方法及装置
CN111081272B (zh) * 2019-12-16 2024-04-05 腾讯科技(深圳)有限公司 歌曲高潮片段识别方法及装置
CN111782862A (zh) * 2020-06-24 2020-10-16 腾讯音乐娱乐科技(深圳)有限公司 音频处理方法、装置及存储介质
CN111782862B (zh) * 2020-06-24 2024-05-14 腾讯音乐娱乐科技(深圳)有限公司 音频处理方法、装置及存储介质
CN112037764B (zh) * 2020-08-06 2024-07-19 杭州网易云音乐科技有限公司 一种音乐结构的确定方法、装置、设备及介质
CN112037764A (zh) * 2020-08-06 2020-12-04 杭州网易云音乐科技有限公司 一种音乐结构的确定方法、装置、设备及介质
CN112133327B (zh) * 2020-09-17 2024-02-13 腾讯音乐娱乐科技(深圳)有限公司 一种音频样本的提取方法、设备、终端及存储介质
CN112133327A (zh) * 2020-09-17 2020-12-25 腾讯音乐娱乐科技(深圳)有限公司 一种音频样本的提取方法、设备、终端及存储介质
CN112667845A (zh) * 2020-12-23 2021-04-16 腾讯音乐娱乐科技(深圳)有限公司 一种歌曲推荐方法、装置、电子设备及可读存储介质
CN112989109A (zh) * 2021-04-14 2021-06-18 腾讯音乐娱乐科技(深圳)有限公司 一种音乐结构分析方法、电子设备及存储介质
CN113255348B (zh) * 2021-05-26 2023-02-28 腾讯音乐娱乐科技(深圳)有限公司 一种歌词分段方法、装置、设备、介质
CN113255348A (zh) * 2021-05-26 2021-08-13 腾讯音乐娱乐科技(深圳)有限公司 一种歌词分段方法、装置、设备、介质
CN113377992A (zh) * 2021-06-21 2021-09-10 腾讯音乐娱乐科技(深圳)有限公司 歌曲分段方法、设备和存储介质
CN114120207A (zh) * 2021-12-14 2022-03-01 北京雷石天地电子技术有限公司 歌词提取方法、装置、系统及计算机可读存储介质

Also Published As

Publication number Publication date
CN102467939B (zh) 2014-08-13

Similar Documents

Publication Publication Date Title
CN102467939B (zh) 一种歌曲音频切割装置及方法
US10229669B2 (en) Apparatus, process, and program for combining speech and audio data
CN106652997B (zh) 一种音频合成的方法及终端
CN106486128B (zh) 一种双音源音频数据的处理方法及装置
US8604327B2 (en) Apparatus and method for automatic lyric alignment to music playback
CN112382257B (zh) 一种音频处理方法、装置、设备及介质
Schuller et al. Determination of nonprototypical valence and arousal in popular music: features and performances
JP2000081892A (ja) 効果音付加装置および効果音付加方法
WO2018121368A1 (zh) 一种歌词的配乐生成方法和相关装置
CN103823867A (zh) 一种基于音符建模的哼唱式音乐检索方法及系统
US20070245375A1 (en) Method, apparatus and computer program product for providing content dependent media content mixing
CN103035235A (zh) 一种将语音转换为旋律的方法和装置
US20140000441A1 (en) Information processing apparatus, information processing method, and program
CN108172211B (zh) 可调节的波形拼接系统及方法
CN110741430B (zh) 歌唱合成方法及歌唱合成系统
CN111213200A (zh) 用于自动生成音乐输出的系统和方法
CN112995756A (zh) 短视频的生成方法及装置、短视频生成系统
CN113676772A (zh) 视频生成方法及装置
CN107025902B (zh) 数据处理方法及装置
JP2014013340A (ja) 作曲支援装置、作曲支援方法、作曲支援プログラム、作曲支援プログラムを格納した記録媒体およびメロディ検索装置
JP5085577B2 (ja) プレイリスト作成装置、楽曲再生装置、プレイリスト作成方法およびプレイリスト作成プログラム
CN115103225A (zh) 视频片段提取方法、装置、电子设备和存储介质
CN114974184A (zh) 音频制作方法、装置、终端设备及可读存储介质
CN113140202A (zh) 信息处理方法、装置、电子设备及存储介质
JP5699496B2 (ja) 音合成用確率モデル生成装置、特徴量軌跡生成装置およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140813

Termination date: 20161104