CN106448630A - 歌曲的数字乐谱文件的生成方法和装置 - Google Patents

歌曲的数字乐谱文件的生成方法和装置 Download PDF

Info

Publication number
CN106448630A
CN106448630A CN201610816111.9A CN201610816111A CN106448630A CN 106448630 A CN106448630 A CN 106448630A CN 201610816111 A CN201610816111 A CN 201610816111A CN 106448630 A CN106448630 A CN 106448630A
Authority
CN
China
Prior art keywords
tlv triple
audio
file
fundamental frequency
note
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610816111.9A
Other languages
English (en)
Other versions
CN106448630B (zh
Inventor
赵伟峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610816111.9A priority Critical patent/CN106448630B/zh
Publication of CN106448630A publication Critical patent/CN106448630A/zh
Priority to PCT/CN2017/101008 priority patent/WO2018045988A1/zh
Priority to US16/059,109 priority patent/US10923089B2/en
Application granted granted Critical
Publication of CN106448630B publication Critical patent/CN106448630B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G3/00Recording music in notation form, e.g. recording the mechanical operation of a musical instrument
    • G10G3/04Recording music in notation form, e.g. recording the mechanical operation of a musical instrument using electrical means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • G10H1/0025Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/433Query formulation using audio data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/361Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H3/00Instruments in which the tones are generated by electromechanical means
    • G10H3/12Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument
    • G10H3/125Extracting or recognising the pitch or fundamental frequency of the picked up signal
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/061Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of musical phrases, isolation of musically relevant segments, e.g. musical thumbnail generation, or for temporal structure analysis of a musical piece, e.g. determination of the movement sequence of a musical work
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/066Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for pitch analysis as part of wider processing for musical purposes, e.g. transcription, musical performance evaluation; Pitch recognition, e.g. in polyphonic sounds; Estimation or use of missing fundamental
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/071Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for rhythm pattern analysis or rhythm style recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/086Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for transcription of raw audio or music data to a displayed or printed staff representation or to displayable MIDI-like note-oriented data, e.g. in pianoroll format
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • G10H2220/011Lyrics displays, e.g. for karaoke applications
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • G10H2220/015Musical staff, tablature or score displays, e.g. for score reading during a performance.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/441Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes
    • G10H2220/451Scanner input, e.g. scanning a paper document such as a musical score for automated conversion into a musical file format
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2230/00General physical, ergonomic or hardware implementation of electrophonic musical tools or instruments, e.g. shape or architecture
    • G10H2230/005Device type or category
    • G10H2230/015PDA [personal digital assistant] or palmtop computing devices used for musical purposes, e.g. portable music players, tablet computers, e-readers or smart phones in which mobile telephony functions need not be used
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/011Files or data streams containing coded musical information, e.g. for transmission
    • G10H2240/016File editing, i.e. modifying musical data files or streams as such

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

本发明公开了一种歌曲的数字乐谱文件的生成方法和装置。其中,该方法包括:从歌曲对应的清唱音频文件中获取候选满足预设条件的清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据;根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。本发明解决了相关技术中数字乐谱文件的制作效率低的技术问题。

Description

歌曲的数字乐谱文件的生成方法和装置
技术领域
本发明涉及计算机领域,具体而言,涉及一种歌曲的数字乐谱文件的生成方法和装置。
背景技术
目前,数字乐谱文件的制作主要采用人工制作的方式,比如,音乐数字设备接口文件(Musical Instrument Digital Instrument,简称为MIDI)文件均采用人工制作的方式,数字乐谱文件在制作的过程中由于人工的参与,一方面造成数字乐谱文件的制作成本较大,另一方面制作完的数字乐谱文件也没有有效的方法对其质量进行检测,从而造成数字乐谱文件的制作效率比较低。
针对上述的相关技术中数字乐谱文件的制作效率低的技术问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种歌曲的数字乐谱文件的生成方法和装置,以至少解决相关技术中数字乐谱文件的制作效率低的技术问题。
根据本发明实施例的一个方面,提供了一种歌曲的数字乐谱文件的生成方法。该歌曲的数字乐谱文件的生成方法包括:从歌曲对应的清唱音频文件中获取候选清唱音频文件,其中,候选清唱音频文件包括用户对候选满足预设条件的清唱音频文件对应的歌曲进行演唱的清唱数据;根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
根据本发明实施例的另一方面,还提供了一种歌曲的数字乐谱文件的生成装置。该歌曲的数字乐谱文件的生成装置包括:获取单元,用于从歌曲对应的清唱音频文件中获取候选清唱音频文件;划分单元,用于根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;提取单元,用于提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及生成单元,用于根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
在本发明实施例中,从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据;根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,从而实现了提高清唱音频文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种歌曲的数字乐谱文件的生成方法的硬件环境的示意图;
图2是根据本发明实施例的一种歌曲的数字乐谱文件的生成方法的流程图;
图3是根据本发明实施例的一种根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段的方法的流程图;
图4是根据本发明实施例的一种提取出多个有效音频片段的音符信息的方法的流程图;
图5是根据本发明实施例的一种对多个有效音频片段执行处理的方法的流程图;
图6是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图;
图7是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图;
图8是根据本发明实施例的一种合并音符值的方法的流程图;
图9是根据本发明实施例的一种生成多个有效音频片段对应的三元组的方法的流程图;
图10是根据本发明实施例的一种根据多个有效音频片段的音符信息生成数字乐谱文件的方法的流程图;
图11是根据本发明实施例的一种获取候选清唱音频文件的方法的流程图;
图12是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图;
图13是根据本发明实施例的一种根据多个有效音频片段的音符信息生成数字乐谱文件的视化格式的示意图;
图14是根据本发明实施例的一种歌曲的数字乐谱文件的生成装置的示意图;
图15是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图;
图16是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图;
图17是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图;以及
图18是根据本发明实施例的一种终端的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种歌曲的数字乐谱文件的生成方法实施例。
可选地,在本实施例中,上述歌曲的数字乐谱文件的生成方法可以应用于如图1所示的由服务器102和终端104所构成的硬件环境中。图1是根据本发明实施例的一种歌曲的数字乐谱文件的生成方法的硬件环境的示意图。如图1所示,服务器102通过网络与终端104进行连接,上述网络包括但不限于:广域网、城域网或局域网,终端104并不限定于PC、手机、平板电脑等。本发明实施例的歌曲的数字乐谱文件的生成方法可以由服务器102来执行,也可以由终端104来执行,还可以是由服务器102和终端104共同执行。其中,终端104执行本发明实施例的歌曲的数字乐谱文件的生成方法也可以是由安装在其上的客户端来执行。
图2是根据本发明实施例的一种歌曲的数字乐谱文件的生成方法的流程图。如图2所示,该歌曲的数字乐谱文件的生成方法可以包括以下步骤:
步骤S202,从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件。
在本申请上述步骤S202提供的技术方案中,从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据。候选清唱音频文件为满足预设条件的包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据的清唱音频文件,且为用于生成数字乐谱文件的文件。在清唱音频文件上传之后,大量的其他用户可以对上传的清唱音频文件进行欣赏,并对其进行评价,当评价结果达到预设阈值时,则确定上传的清唱音频文件达到候选标准,则确定上传的清唱音频文件为候选清唱音频文件。
候选清唱音频文件包括候选清唱音频文件对应的清唱数据。用户演唱候选清唱音频文件的歌曲保留清唱数据。可选地,在确定上传的清唱音频文件达到候选标准之后,再由特定的制作人员对达到候选标准的清唱音频文件进行试听,确定达到候选标准的清唱音频文件的演唱音准是否准确,也即,确定对达到候选标准的清唱音频文件进行演唱的用户的演唱音准是否达到可用标准。如果确定达到候选标准的清唱音频文件的演唱音准准确,则确定上传的清唱音频文件为候选清唱音频文件。
可选地,判断歌曲是否存在对应的清唱音频文件,如果判断出歌曲中不存在对应的清唱音频文件,则发送用于请求上传清唱音频文件的上传请求。
可选地,在发送上传请求之前,对接收上传请求的对象进行筛选。可以获取数据库中存储的用户所演唱的歌曲的历史演唱数据。根据历史演唱数据确定用于表示用户演唱水平的等级数据,将等级数据达到预设阈值的用户确定为目标用户,该目标用户对歌曲进行演唱所生成的清唱音频文件优选为候选清唱音频文件,则收录该目标用户的音频文件的终端也即接收上传请求的对象。
在对接收上传请求的对象进行筛选时,还可以从数据库中获取对用户所演唱的歌曲进行评价的评价数据和对歌曲进行打分的打分数据,根据评价数据和打分数据确定用于表示用户演唱水平的等级数据,进而将等级数据达到预设阈值的用户确定为目标用户,获取该目标用户对歌曲进行演唱所生成的清唱音频文件。
举例而言,待生成数字乐谱文件的歌曲为新歌,暂时没有用户对其进行演唱,则有奖邀请高水平的用户对新歌进行演唱以获取上述新歌对应的清唱音频文件。
步骤S204,根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段。
在本申请上述步骤S204提供的技术方案中,一首歌曲对应一个歌词文件,歌词文件包括每句歌词对应的时间信息。歌词文件中的每一句对应一个音频片段。可选地,将具有歌词且没有多余噪音的音频片段确定为候选清唱音频文件的有效音频片段。在获取候选清唱音频文件之后,从候选清唱音频文件中划分出多个有效音频片段,可选地,获取候选清唱音频文件对应的歌词文件中的每一句的时长信息,按照每一句歌词文件的时长信息对候选清唱音频文件进行划分,得到划分结果,并检测划分结果是否有多余的噪音,从而将没有歌词的部分去除掉,并且确保有效音频片段没有多余的噪音。
步骤S206,提取出多个有效音频片段的音符信息。
在本申请上述步骤S206提供的技术方案中,提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值。
音符信息为包括一个或多个三元组的信息,该三元组由具有映射关系的音符的起始时间,音符的持续时间,音符的音符值组成,其中,音符的起始时间也即为三元组的起始时间,该起始时间的单位可以为毫秒,音符的持续时间也即为三元组的持续时间,该持续时间的单位可以为毫秒,音符的音符值也即为三元组的音符值。在从候选清唱音频文件中划分出多个有效音频片段之后,提取出多个有效音频片段的音符信息。
步骤S208,根据多个有效音频片段的音符信息生成数字乐谱文件。
在本申请上述步骤S208提供的技术方案中,根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
在提取出多个有效音频片段的音符信息之后,获取到多个有效音频片段的起始时间,音符的持续时间,音符的音符值,根据多个有效音频片段的起始时间,音符的持续时间,音符的音符值生成数字乐谱文件。可选地,将音符信息中的多个三元组组成三元组序列,对三元组序列进行规整,得到数字乐谱文件,最后按照预设格式输出数字乐谱文件,并且可以对数字乐谱文件进行质量检测,降低了人工对数字乐谱文件的制作成本,提高了数字乐谱文件的制作效率。
可选地,该数字乐谱文件为MIDI文件,从而通过上述步骤有效地降低了制作MIDI文件的人工成本,并且提高了MIDI文件的制作质量,提高了MIDI文件的制作效率。
可选地,该实施例从歌曲对应的清唱音频文件中获取的候选清唱音频文件可以为一个,也可以为多个。当候选音频文件为多个候选音频文件时,根据歌曲的时间信息对每个候选清唱音频文件进行划分,得到每个候选清唱音频文件的多个有效音频片段,根据每个候选清唱音频文件对应的多个有效音频片段的音符信息生成每个候选清唱音频文件对应的数字乐谱文件,每个候选清唱音频文件对应的数字乐谱文件可以为MIDI文件。可选地,每个候选清唱音频文件对应的数字乐谱文件可以由用户自主选择,将选择到的候选清唱音频文件对应的数字乐谱文件确定为该歌曲最终的数字乐谱文件按,也可以对每个候选清唱音频文件对应的数字乐谱文件进行质量检测,得到质量检测结果,将质量检测结果最高的数字乐谱文件确定为该歌曲最终的数字乐谱文件。
通过上述步骤S202至步骤S208,通过从歌曲对应的清唱音频文件中获取候选满足预设条件的清唱音频文件;根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及根据多个有效音频片段的音符信息生成数字乐谱文件,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,避免了通过人工制作数字乐谱文件的高成本,从而实现了提高数字乐谱文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
作为一种可选的实施方式,步骤S204,根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段,通过根据歌词文件中每句歌词对应的时间信息将将候选清唱音频文件中划分出多个有效音频片段进行实现。
图3是根据本发明实施例的一种根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段的方法的流程图。如图3所示,该从候选清唱音频文件中划分出多个有效音频片段的方法包括以下步骤:
步骤S301,获取歌曲对应的歌词文件。
在本申请上述步骤S301提供的技术方案中,一首歌曲对应一个歌词文件,获取歌曲对应的歌词文件,该歌词文件包括每句歌词对应的时间信息。
候选清唱音频文件自带歌词文件,根据候选清唱音频文件对应的歌词文件获取候选清唱音频文件中每个音频片段的播放时长,歌词文件中包括用于指示播放时长的指示信息,也即,通过指示信息可以确定歌词文件中的每个音频片段在播放过程中的播放时长。
步骤S302,根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分出多个有效音频片段。
在本申请上述步骤S302提供的技术方案中,每句歌词对应时间信息,该时间信息,也即,候选清唱音频文件中每个音频片段的播放时长。在获取歌曲对应的歌词文件之后,根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分,得到多个音频片段,将每个音频片段中没有歌词的部分去掉,并且去除掉具有多余噪音的部分,从而从多个有效音频片段中提取多个有效音频片段。
可选地,获取候选清唱音频文件中的原始音频数据,根据每句歌词对应的时间信息对原始音频数据进行划分,得到多个音频片段,将每个音频片段中没有歌词的部分去掉,并且去除掉具有多余噪音的部分,从而从多个有效音频片段中提取多个有效音频片段,进而实现了根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分出多个有效音频片段的目的。
该实施例通过获取歌曲对应的歌词文件,根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分出多个有效音频片段,从而实现了根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段的目的,进而达到提高数字乐谱文件的制作效率的技术效果。
作为一种可选的实施方式,步骤S206,提取出多个有效音频片段的音符信息包括:在多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和超过预设时间的情况下对多个有效音频片段执行处理,得到基频段,通过对基频段中的基频值执行音符化处理得到的音符值进行合并,实现了对有效音频片段的音符信息的提取。
图4是根据本发明实施例的一种提取出多个有效音频片段的音符信息的方法的流程图。如图4所示,该提取出多个有效音频片段的音符信息的方法包括以下步骤:
步骤S401,提取多个有效音频片段的基频信息。
在本申请上述步骤S401提供的技术方案中,提取多个有效音频片段的基频信息,其中,基频信息包括音频片段的基频值。
在从候选清唱音频文件中划分出多个有效音频片段之后,提取多个有效音频片段的基频信息,该基频信息可以为帧移为10毫秒,帧长为30毫秒的基频,该基频信息包括音频片段的基频值。由于人们在发声时带震动产生的频率经过声道过滤后会产生大量的泛音,为了便于后续对候选清唱音频文件的处理,需要从音频信息中提取直接表现声带震动频率的基音,该基音也决定了整个音符的音高,也即,基频值。
步骤S402,获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和。
在本申请上述步骤S402提供的技术方案中,获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和。
在提取多个有效音频片段的基频信息之后,获取多个有效音频片段的基频值,获取基频值为非零的音频片段,并对基频值为非零的音频片段在播放时的播放时长进行求和计算,从而获取到多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和。
可选地,根据前后基频点的基频值的差异检测出奇异基频点,并将奇异基频点置零,进而获取基频值为非零的音频片段。
步骤S403,判断播放时长之和是否超过预设时间。
在本申请上述步骤S403提供的技术方案中,判断播放时长之和是否超过预设时间。
在获取多个有效音频片段中基频值为非零的有效音频片段在播放时的播放时长之和之后,判断播放时长之和是否超过预设时间,其中,预设时间可以为10秒,判断基频值为非零的有效音频片段的播放时长之和是否超过10秒。
步骤S404,对多个有效音频片段执行处理,得到基频段。
在本申请上述步骤S404提供的技术方案中,如果判断出播放时长之和超过预设时间,对多个有效音频片段执行处理,得到基频段,得到基频段。
在判断播放时长之和是否超过预设时间之后,如果判断出播放时长之和超过预设时间,对多个有效音频片段执行处理,可选地,对多个有效音频片段执行滤波处理,得到基频段。
步骤S405,获取基频段中的基频值。
在本申请上述步骤S405提供的技术方案中,获取基频段中的基频值。
在对有效音频片段执行处理,得到基频段之后,获取基频段中的基频值。可选地,对基频段中小于预设帧数的零基频段值设置为基频段最后一帧基频值。
步骤S406,对基频值执行音符化处理,得到基频值的音符值。
在本申请上述步骤S406提供的技术方案中,对基频值执行音符化处理,得到基频值的音符值。
在获取基频段中的基频值之后,对基频值进行符号化处理,比如,通过公式计算基频值的音符值f(x),其中,x为基频段的基频值。可选地,对基频段中的全部基频值进行音符化,得到音符值。
步骤S407,合并音符值,得到有效音频片段的音符信息。
在本申请上述步骤S407提供的技术方案中,合并音符值,得到有效音频片段的音符信息。
在对基频值执行音符化处理,得到基频值的音符值之后,合并音符值,合并音符值,将音符值相同的点连在一起,这样就得到一个三元组序列W=Oii,i∈[1,k],其中O为三元组(s,m,l),其中s为该三元组的起始时间(单位为毫秒)、m为该三元组的音符值、l为该三元组的持续时间(单位为毫秒),k为三元组此句话对应的三元组个数,从而得到有效音频片段的音符信息。
该实施例通过提取多个有效音频片段的基频信息,其中,基频信息包括音频片段的基频值;获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和;判断播放时长之和是否超过预设时间;如果判断出播放时长之和超过预设时间,对多个有效音频片段执行处理,得到基频段;获取基频段中的基频值;对基频值执行音符化处理,得到基频值的音符值;以及合并音符值,得到有效音频片段的音符信息,实现了提取出多个有效音频片段的音符信息的目的,进而达到了提高清唱音频文件的制作效率的目的。
作为一种可选的实施方式,步骤S404,对多个有效音频片段执行处理包括:根据音频片段对应的长度对音频片段执行滤波处理,得到滤波片段,获取滤波片段的基频值。
图5是根据本发明实施例的一种对多个有效音频片段执行处理的方法的流程图。如图5所示,对多个有效音频片段执行处理的方法包括以下步骤:
步骤S501,获取多个有效音频片段对应的长度。
在本申请上述步骤S501提供的技术方案中,获取多个有效音频片段对应的长度。
音频片段对应的长度,也即,基频段长度,单位为帧,获取多个有效音频片段对应的长度。
步骤S502,对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段。
在本申请上述步骤S502提供的技术方案中,对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段。
在获取多个有效音频片段对应的长度之后,判断多个有效音频片段对应的长度是否小于第一预设值,对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段,比如,第一预设值为35帧,对基频段长度小于35帧的音频片段直接进行窗长为基频段长度的中值滤波,得到第一滤波片片段。
步骤S503,对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段。
在本申请上述步骤S503提供的技术方案中,对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段。
在获取多个有效音频片段对应的长度之后,判断多个有效音频片段对应的长度是否小于第一预设值,对长度大于等于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段,比如,第一预设值为35帧,对基频段长度大于等于35帧的音频片段,每帧做10点中值滤波,得到第二滤波片段。
可选地,获取基频段中的基频值包括:获取第一滤波片段的基频值和第二滤波片段的基频值。
该实施例通过获取多个有效音频片段对应的长度;对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段;对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段,达到了对多个有效音频片段执行处理的目的,进而达到了提高数字乐谱文件的制作效率的目的。
作为一种可选的实施方式,在获取多个有效音频片段对应的长度之后,在长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值。
图6是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图。如图6所示,该歌曲的数字乐谱文件的生成方法还包括以下步骤:
步骤S601,判断长度小于第二预设值的有效音频片段中是否存在零音频片段。
在本申请上述步骤S601提供的技术方案中,在获取多个有效音频片段对应的长度之后,判断长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,零音频片段为基频值为零的音频片段。
零音频片段为基频值为零的音频片段,第二预设值可以为15帧,判断长度小于15帧的音频片段中是否存在零音频片段。
步骤S602,将零音频片段的基频值设置为预设基频值。
在本申请上述步骤S602提供的技术方案中,如果判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值。
在判断长度小于第二预设值的有效音频片段中存在零音频片段之后,如果判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值,可选地,预设基频值为基频段最后一帧基频值,可以将基频段后面小于15帧的零极品片段的基频值都置为基频段最后一帧基频值。
可选地,获取基频段中的基频值包括:获取第一滤波片段的基频值、第二滤波片段的基频值和预设基频值。
该实施例通过在获取多个有效音频片段对应的长度之后,判断长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,零音频片段为基频值为零的音频片段;如果判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值;获取第一滤波片段的基频值、第二滤波片段的基频值和预设基频值,达到了对多个有效音频片段执行处理的目的,进而达到了提高清唱音频文件的制作效率的目的。
作为一种可选的实施方式,在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,通过在相邻音频片段的基频值的差值满足预设条件的情况下,将相邻音频片段的基频值置零。
图7是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图。如图7所示,该歌曲的数字乐谱文件的生成方法还包括以下步骤:
步骤S701,获取多个有效音频片段中相邻音频片段的基频值。
在本申请上述步骤S701提供的技术方案中,在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,获取多个有效音频片段中相邻音频片段的基频值。
步骤S702,计算相邻音频片段的基频值的差值。
在本申请上述步骤S702提供的技术方案中,计算相邻音频片段的基频值的差值。
在获取多个有效音频片段中相邻音频片段的基频值之后,对相邻音频片段的基频值进行计算,得到相邻音频片段的基频值的差值。
步骤S703,判断差值是否满足预设条件。
在本申请上述步骤S703提供的技术方案中,判断差值是否满足预设条件。
在计算相邻音频片段的基频值的差值之后,判段差值是否满足预设条件,根据前后基频点的基频值的差异检测奇异基频点。
步骤S704,将相邻音频片段的基频值置零。
在本申请上述步骤S704提供的技术方案中,如果判断出差值满足预设条件,则根据前后基频点的基频值的差异确定出奇异基频点,将相邻音频片段的基频值置零。
该实施例通过在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,获取多个有效音频片段中相邻音频片段的基频值;计算相邻音频片段的基频值的差值;判断差值是否满足预设条件;如果判断出差值满足预设条件,将相邻音频片段的基频值置零,实现了对音频片段进行置零处理的操作,进而提高了清唱音频文件的制作效率。
作为一种可选的实施方式,步骤S407,合并音符值,得到有效音频片段的音符信息包括:根据音符值中的相同音符值生成多个有效音频片段对应的三元组,将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
图8是根据本发明实施例的一种合并音符值的方法的流程图。如图8所示,该合并音符值的方法包括以下步骤:
步骤S801,将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组。
在本申请上述步骤S801提供的技术方案中,将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组。
获取音符值中的相同音符值,将相同音符值的点连在一起,并生成多个有效音频片段对应的三元组,多个有效音频片段对应的三元组包括三元组的起始时间,三元组的音符值,三元组的持续时间。
步骤S802,将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
在本申请上述步骤S802提供的技术方案中,将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
在将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组之后,将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
该实施例通过将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组;以及将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列,实现了合并音符值,得到有效音频片段的音符信息的目的。
作为一种可选的实施方式,步骤S801,生成多个有效音频片段对应的三元组包括:根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
图9是根据本发明实施例的一种生成多个有效音频片段对应的三元组的方法的流程图。如图9所示,生成多个有效音频片段对应的三元组的方法包括以下步骤:
步骤S901,获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间。
在本申请上述步骤S901提供的技术方案中,获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间。
步骤S902,根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
在本申请上述步骤S902提供的技术方案中,在获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间之后,根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
该实施例通过获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间;根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组,达到了生成多个有效音频片段对应的三元组的目的,进而提高了清唱音频文件的制作效率。
作为一种可选的实施方式,第一三元组序列包括第一三元组和第二三元组,步骤S208,根据多个有效音频片段的音符信息生成数字乐谱文件包括在不同条件下得到第二三元组序列,将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
图10是根据本发明实施例的一种根据多个有效音频片段的音符信息生成数字乐谱文件的方法的流程图。如图10所示,该根据多个有效音频片段的音符信息生成数字乐谱文件的方法包括以下步骤:
步骤S1001,合并第一三元组和第二三元组,得到第三三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列。
在本申请上述步骤S1001提供的技术方案中,获取第一三元组的起始时间,第二三元组的起始时间和第二三元组的持续时间,当第一三元组的起始时间等于第二三元组的起始时间与第二三元组的持续时间之和时,合并第一三元组和第二三元组,得到第三三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列。
步骤S1002,合并第四三元组和第一三元组,得到第五三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列。
在本申请上述步骤S1002提供的技术方案中,获取第四三元组的起始时间,当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,当第四三元组的起始时间等于第一三元组的起始时间与第一三元组的持续时间之和时,合并第四三元组和第一三元组,得到第五三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列。
步骤S1003,从第一三元组序列中删除第一三元组,得到第二三元组序列。
在本申请上述步骤S1003提供的技术方案中,当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,且当第四三元组的起始时间不等于第一三元组的起始时间与第一三元组的持续时间之和时,从第一三元组序列中删除第一三元组,得到第二三元组序列。
步骤S1004,将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
在本申请上述步骤1004提供的技术方案中,将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
在通过步骤S1001、步骤S1002、步骤S1003不同条件下得到的第二三元组之后,将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
作为一种可选的实施方式,当si=si-1+li-1成立时,通过l'i-1=li-1+li计算第三三元组的持续时间l'i-1,其中,si为第一三元组的起始时间,si-1为第二三元组的起始时间,li-1为第二三元组的持续时间,li为第一三元组的持续时间;当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算第五三元组的持续时间l'i+1,通过s'i+1=si计算第五三元组的起始时间s'i+1,其中,si+1为第四三元组的起始时间,li+1为第四三元组的持续时间。
作为一种可选的实施方式,步骤S202,从歌曲对应的清唱音频文件中获取候选清唱音频文件包括:获取对多个原始清唱音频文件的回复信息,在回复信息所表示的质量等级达到预定等级的情况下,将原始清唱音频文件确定为候选清唱音频文件。
图11是根据本发明实施例的一种获取候选清唱音频文件的方法的流程图。如图11所示,该获取候选清唱音频文件的方法包括以下步骤:
步骤S1101,获取上传的多个原始清唱音频文件。
在本申请上述步骤1101提供的技术方案中,获取上传的多个原始清唱音频文件。
原始清唱音频文件可以为用户演唱歌曲上传的清唱音频文件。
步骤S1102,获取对多个原始清唱音频文件的回复信息。
在本申请上述步骤1102提供的技术方案中,获取对多个原始清唱音频文件的回复信息,其中,回复信息用于表示原始清唱音频文件的质量等级。
在获取上传的多个原始清唱音频文件之后,获取对多个原始清唱音频文件的回复信息,该回复信息用于表示原始清唱音频文件的质量等级,可以为用户演唱歌曲在上传之后,其他用户对其作品进行欣赏及评价,通过评价从而确定质量等级。
步骤S1103,判断回复信息所表示的质量等级是否达到预定等级。
在本申请上述步骤1103提供的技术方案中,在获取对多个原始清唱音频文件的回复信息之后,判断回复信息所表示的质量等级是否达到预定等级。
步骤S1104,将原始清唱音频文件确定为候选清唱音频文件。
在本申请上述步骤1104提供的技术方案中,如果判断出回复信息所表示的质量等级达到预定等级,则将原始清唱音频文件确定为候选清唱音频文件。
可选地,当用户评价达到某一阈值后,则认为此用户演唱歌曲达到候选标准,将原始清唱音频文件确定为候选清唱音频文件。
该实施例通过获取上传的多个原始清唱音频文件;获取对多个原始清唱音频文件的回复信息,回复信息用于表示原始清唱音频文件的质量等级;判断回复信息所表示的质量等级是否达到预定等级;以及如果判断出回复信息所表示的质量等级达到预定等级,则将原始清唱音频文件确定为候选清唱音频文件,达到了获取候选清唱音频文件的目的。
作为一种可选的实施方式,确定原始清唱音频文件符合第一预设条件包括:在判断出评价指标符合预设评价指标的情况下,获取原始清唱音频文件的音准数据;判断音准数据是否符合预设音准;以及如果判断出音准数据符合预设音准,确定原始清唱音频文件为候选清唱音频文件,实现了度候选清唱音频文件的获取。
可选地,在获取候选清唱音频文件之后,将候选清唱音频文件的格式调整为预设格式,比如,16k16bit pcm得到调整清唱音频文件,根据调整清唱音频文件中的文本信息提取有效音频数据。
该实施例通过获取候选清唱音频文件,候选清唱音频文件包括用户候选清唱音频文件对应的歌曲进行演唱的清唱数据;从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,从而实现了提高清唱音频文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
实施例2
下面结合优选的实施例对本发明的技术方案进行说明。
图12是根据本发明实施例的另一种歌曲的数字乐谱文件的生成方法的流程图。如图12所示,该歌曲的数字乐谱文件的生成方法包括以下步骤:
步骤S1201,基于用户评价选取候选用户演唱歌曲。
用户演唱的清唱音频文件在上传之后,会有大量其他用户对其作品进行欣赏及评分,当用户评价达到某一阈值y后,则认为此用户演唱歌曲达到候选标准,再由之前的清唱音频文件的制作人员进行试听,确定其用户演唱音准是否可用的标准,如果达到可用的标准则执行步骤S1202。
可选地,如果要生成清唱音频文件的歌曲为新歌,暂时没有人演唱,则有奖邀请资深高水平用户演唱即可。
步骤S1202,根据歌词文件提取有效数据段。
歌曲自带的歌词文件中,包含了每一句歌曲的时长信息,通过此时长信息将原始音频数据按照每一句的时间进行切割,将没有歌词的部分扔掉,确保无效部分没有多余的噪音,这样就得到一系列的音频片段{x1,x2…xn},其中n为歌词文件中的句子的个数。
步骤S1203,音符提取。
将用户上传的清唱音频文件规整为16k16bit pcm格式。提取该音频的基频信息(帧移10ms,帧长30ms),由于人在发声时声带震动产生的频率经过声道过滤后会产生大量泛音,为了便于后续操作,需要从音频中提取直接表现声带震动频率的基音,基音也决定了整个音符的音高。根据与前后基频点基频值的差异检测奇异基频点,并置零。判断基频值非零的段落时间和是否超过10秒,如果低于10秒则直接判定为未过关。基频段长度小于35帧,直接进行窗长为基频段长度的中值滤波;基频长度大于等于35帧时,每帧做10点中值滤波。对基频段后面小于15帧的零基频段的基频值都置为基频段最后一帧基频值实现了零基频点填充。
在获取基频段中的基频值之后,对基频值进行符号化处理,比如,通过公式计算基频值的音符值f(x),其中,x为基频段的基频值。可选地,对基频段中的全部基频值进行音符化,得到音符值。
合并音符值,将音符值相同的点连在一起,这样就得到一个三元组序列W=Oii,i∈[1,k],其中O为三元组(s,m,l),其中s为该三元组的起始时间(单位为毫秒)、m为该三元组的音符值、l为该三元组的持续时间(单位为毫秒),k为三元组此句话对应的三元组个数,从而得到有效音频片段的音符信息。
步骤S1204,后端规整。
将所有n个单句音频片段x1对应的三元组Wi连到一起,直接将每一句对应的三元组起始时间s加上该句在整个歌曲中的起始时间即可,得到整首歌对应的三元组序列Wa=Oii∈[1,t],其中t为此三元组序列的三元组个数。去奇异音符,当第i个三元组满足以下条件(i>1and i<t),则对Oi进行特殊处理(其中mi为第i个三元组的音符值,si表示第i个三元组的起始时间,li表示第i个三元组的持续时间):
1)|mi-mi-1|≥6;
2)|mi-mi+1|≥6;
3)|mi-1-mi+1|≤3;
对三元组进行处理:
当si=si-1+li-1成立时,则合并第i-1与第i个二元组,也即,通过l'i-1=li-1+li计算第i-1个三元组的持续时间l'i-1,并删除第i个三元组,其中,si为第i个三元组的起始时间,si-1为第i-1个三元组的起始时间,li-1为第i-1个三元组的持续时间,li为第i个三元组的持续时间。
当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算第五三元组的持续时间l'i+1,通过s'i+1=si计算第i+1个三元组的起始时间s'i+1,并删除第i个三元组的持续时间,其中,si+1为第i+1个三元组的起始时间,li+1为第i+1个三元组的持续时间。
当si=si-1+li-1不成立时,si+1=si+li也不成立时,直接删除第i个三元组。
本发明实施例通过候选清唱音频文件生成数字乐谱文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据,从而使用户的声音自动生成数字乐谱文件,而不需要人工制作,降低了数字乐谱文件制作的成本,提高了数字乐谱文件制作的效率。
实施例3
本发明实施例的应用环境可以但不限于参照上述实施例中的应用环境,本实施例中对此不再赘述。本发明实施例提供了用于实施上述信息获取、传输方法的一种可选的具体应用。
图13是根据本发明实施例的一种根据多个有效音频片段的音符信息生成数字乐谱文件的视化格式的示意图。如图13所示,数字乐谱文件的视化格式为将三元组序列按照每一行(例如,3600015055)表示一个三元组,第一列(例如,36000 36150 36200 3633036960)为音符的起始时间(单位ms),第二列为音符持续时间(单位ms),第三列为音符的音符值。
在全民k歌应用中,每一首可供演唱的歌曲都会有一个对应的MIDI文件,此文件描述了原唱歌手演绎此歌曲的音高走势。此文件则为可以使用的MIDI文件,其作用有很多,比如,给用户提供可视化音高参考曲线、对于用户不足之处进行修音、对用户演唱进行评价等,之前MIDI文件均采用人工制作的方式,这样一方面人工成本较大,另一方面制作完的MIDI文件也没有有效的办法进行质量检测,通过本发明实施例的获取候选清唱音频文件;从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,从而实现了提高清唱音频文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例4
根据本发明实施例,还提供了一种用于实施上述歌曲的数字乐谱文件的生成方法的歌曲的数字乐谱文件的生成装置。图14是根据本发明实施例的一种歌曲的数字乐谱文件的生成装置的示意图。如图14所示,该装置可以包括:获取单元10、划分单元20、提取单元30和生成单元40。
获取单元10,用于从歌曲对应的清唱音频文件中获取候选满足预设条件的清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据。
划分单元20,用于根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段。
提取单元30,用于提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值。
生成单元40,用于根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
图15是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图。如图15所示,该装置可以包括:获取单元10、划分单元20、提取单元30和生成单元40。其中,划分单元20包括:第一获取模块21、划分模块22。
需要说明的是,该实施例的获取单元10、划分单元20、提取单元30和生成单元40与图14所示实施例的歌曲的数字乐谱文件的生成装置中的作用相同,此处不再赘述。
第一获取模块21,用于获取歌曲对应的歌词文件,歌词文件包括每句歌词对应的时间信息。
划分模块22,用于根据歌词文件中每句歌词对应的时间信息将候选的清唱音频文件划分为多个有效音频片段。
图16是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图。如图16所示,该装置可以包括:获取单元10、划分单元20、提取单元30和生成单元40,提取单元30包括:提取模块31、第二获取模块32、判断模块33、第一处理模块34、第三获取模块35、第二处理模块36和合并模块37。
需要说明的是,获取单元10、划分单元20、提取单元30和生成单元40与图14所示实施例的歌曲的数字乐谱文件的生成装置中的作用相同,此处不再赘述。
提取模块31,用于提取多个有效音频片段的基频信息,其中,基频信息包括音频片段的基频值。
第二获取模块32,用于获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和。
判断模块33,用于判断播放时长之和是否超过预设时间。
第一处理模块34,用于在判断出播放时长之和超过预设时间时,对多个有效音频片段执行处理,得到基频段。
第三获取模块35,用于获取基频段中的基频值。
第二处理模块36,用于对基频值执行音符化处理,得到基频值的音符值。
合并模块37,用于合并音符值,得到有效音频片段的音符信息。
可选地,该歌曲的数字乐谱文件的生成装置还包括:计算单元、第一判断单元和置零单元。其中,获取单元10用于在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,获取多个有效音频片段中相邻音频片段的基频值;计算单元用于计算相邻音频片段的基频值的差值;第一判断单元用于判断差值是否满足预设条件;置零单元用于在判断出差值满足预设条件时,将相邻音频片段的基频值置零。
可选地,合并模块37包括生成模块和组合模块。其中,生成模块,用于将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组;组合模块用于将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
可选地,生成模块用于获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间,以及根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
可选地,第一三元组序列包括第一三元组和第二三元组,生成单元40用于当第一三元组的起始时间等于第二三元组的起始时间与第二三元组的持续时间之和时,合并第一三元组和第二三元组,得到第三三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,当第四三元组的起始时间等于第一三元组的起始时间与第一三元组的持续时间之和时,合并第四三元组和第一三元组,得到第五三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,且当第四三元组的起始时间不等于第一三元组的起始时间与第一三元组的持续时间之和时,从第一三元组序列中删除第一三元组,得到第二三元组序列;以及将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
可选地,当si=si-1+li-1成立时,通过l'i-1=li-1+li计算第三三元组的持续时间l'i-1,其中,si为第一三元组的起始时间,si-1为第二三元组的起始时间,li-1为第二三元组的持续时间,li为第一三元组的持续时间;当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算第五三元组的持续时间l'i+1,通过s'i+1=si计算第五三元组的起始时间s'i+1,其中,si+1为第四三元组的起始时间,li+1为第四三元组的持续时间。
图17是根据本发明实施例的另一种歌曲的数字乐谱文件的生成装置的示意图。如图17所示,该装置可以包括:获取单元10、划分单元20、提取单元30和生成单元40。其中,提取单元30包括:提取模块31、第二获取模块32、判断模块33、第一处理模块34、第三获取模块35、第二处理模块36和合并模块37,其中,第一处理模块34包括:获取子模块341、第一处理子模块342和第二处理子模块343。
需要说明的是,该实施例的获取单元10、划分单元20、提取单元30和生成单元40,提取模块31、第二获取模块32、判断模块33、第一处理模块34、第三获取模块35、第二处理模块36和合并模块37与图16所示实施例的歌曲的数字乐谱文件的生成装置中的作用相同,此处不再赘述。
获取子模块341,用于获取多个有效音频片段对应的长度。
第一处理子模块342,用于对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段。
第二处理子模块343,用于对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段。
第三获取模块35用于获取第一滤波片段的基频值和第二滤波片段的基频值。
可选地,该歌曲的数字乐谱文件的生成装置还包括:第二判断单元和设置单元。其中,第二判断单元,用于在获取多个有效音频片段对应的长度之后,判断长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,零音频片段为基频值为零的音频片段;设置单元,用于在判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值;第三获取模块35用于获取第一滤波片段的基频值、第二滤波片段的基频值和预设基频值。
可选地,获取单元10包括第四获取模块、第五获取模块和确定模块。其中,第四获取模块,用于获取上传的多个原始清唱音频文件;第五获取模块用于获取对多个原始清唱音频文件的回复信息,其中,回复信息用于表示原始清唱音频文件的质量等级;确定模块,用于判断回复信息所表示的质量等级是否达到预定等级,在判断出回复信息所表示的质量等级达到预定等级,则将原始清唱音频文件确定为候选清唱音频文件。
需要说明的是,该实施例中的获取单元10可以用于执行本申请实施例1中的步骤S202,该实施例中的划分单元20可以用于执行本申请实施例1中的步骤S204,该实施例中的提取单元30可以用于执行本申请实施例1中的步骤S206,该实施例中的生成单元40可以用于执行本申请实施例1中的步骤S208。
在该实施例中,通过获取单元10从歌曲对应的清唱音频文件中获取候选满足预设条件的清唱音频文件,通过划分单元20根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段,通过提取单元30提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值,通过生成单元40根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,从而实现了提高清唱音频文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
此处需要说明的是,上述单元和模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在如图1所示的硬件环境中,可以通过软件实现,也可以通过硬件实现,其中,硬件环境包括网络环境。
实施例5
根据本发明实施例,还提供了一种用于实施上述歌曲的数字乐谱文件的生成方法的服务器或终端。
图18是根据本发明实施例的一种终端的结构框图。如图18所示,该终端可以包括:一个或多个(图中仅示出一个)处理器181、存储器183、以及传输装置185,如图18所示,该终端还可以包括输入输出设备187。
其中,存储器183可用于存储软件程序以及模块,如本发明实施例中的歌曲的数字乐谱文件的生成方法和装置对应的程序指令/模块,处理器181通过运行存储在存储器183内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的歌曲的数字乐谱文件的生成方法。存储器183可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器183可进一步包括相对于处理器181远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述的传输装置185用于经由一个网络接收或者发送数据,还可以用于处理器与存储器之间的数据传输。上述的网络具体实例可包括有线网络及无线网络。在一个实例中,传输装置185包括一个网络适配器(Network Interface Controller,NIC),其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中,传输装置185为射频(Radio Frequency,RF)模块,其用于通过无线方式与互联网进行通讯。
其中,具体地,存储器183用于存储应用程序。
处理器181可以通过传输装置185调用存储器183存储的应用程序,以执行下述步骤:
从歌曲对应的清唱音频文件中获取候选满足预设条件的清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据;
根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;
提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;
根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
处理器181还用于执行下述步骤:获取歌曲对应的歌词文件,歌词文件包括每句歌词对应的时间信息;根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分出多个有效音频片段。
处理器181还用于执行下述步骤:提取多个有效音频片段的基频信息,其中,基频信息包括音频片段的基频值;获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和;判断播放时长之和是否超过预设时间;如果判断出播放时长之和超过预设时间,对多个有效音频片段执行处理,得到基频段;获取基频段中的基频值;对基频值执行音符化处理,得到基频值的音符值;以及合并音符值,得到有效音频片段的音符信息。
处理器181还用于执行下述步骤:获取多个有效音频片段对应的长度;对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段;对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段;获取第一滤波片段的基频值和第二滤波片段的基频值。
处理器181还用于执行下述步骤:在获取多个有效音频片段对应的长度之后,判断长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,零音频片段为基频值为零的音频片段;如果判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值;获取第一滤波片段的基频值、第二滤波片段的基频值和预设基频值。
处理器181还用于执行下述步骤:在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,获取多个有效音频片段中相邻音频片段的基频值;计算相邻音频片段的基频值的差值;判断差值是否满足预设条件;以及如果判断出差值满足预设条件,将相邻音频片段的基频值置零。
处理器181还用于执行下述步骤:将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组;以及将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
处理器181还用于执行下述步骤:获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间;以及根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
处理器181还用于执行下述步骤:第一三元组序列包括第一三元组和第二三元组,当第一三元组的起始时间等于第二三元组的起始时间与第二三元组的持续时间之和时,合并第一三元组和第二三元组,得到第三三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,当第四三元组的起始时间等于第一三元组的起始时间与第一三元组的持续时间之和时,合并第四三元组和第一三元组,得到第五三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,且当第四三元组的起始时间不等于第一三元组的起始时间与第一三元组的持续时间之和时,从第一三元组序列中删除第一三元组,得到第二三元组序列;以及将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
处理器181还用于执行下述步骤:当si=si-1+li-1成立时,通过l'i-1=li-1+li计算第三三元组的持续时间l'i-1,其中,si为第一三元组的起始时间,si-1为第二三元组的起始时间,li-1为第二三元组的持续时间,li为第一三元组的持续时间;当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算第五三元组的持续时间l'i+1,通过s'i+1=si计算第五三元组的起始时间s'i+1,其中,si+1为第四三元组的起始时间,li+1为第四三元组的持续时间。
处理器181还用于执行下述步骤:获取上传的多个原始清唱音频文件;获取对多个原始清唱音频文件的回复信息,其中,回复信息用于表示原始清唱音频文件的质量等级;判断回复信息所表示的质量等级是否达到预定等级;以及如果判断出回复信息所表示的质量等级达到预定等级,则将原始清唱音频文件确定为候选清唱音频文件。
在本发明实施例中,获取候选清唱音频文件;从候选清唱音频文件中划分出多个有效音频片段;提取出多个有效音频片段的音符信息,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部,通过用户候选清唱音频文件对应的歌曲进行演唱的清唱数据生成数字乐谱文件,达到了自动生成数字乐谱文件的目的,从而实现了提高清唱音频文件的制作效率的技术效果,进而解决了相关技术中数字乐谱文件的制作效率低的技术问题。
可选地,本实施例中的具体示例可以参考上述实施例中所描述的示例,本实施例在此不再赘述。
本领域普通技术人员可以理解,图18所示的结构仅为示意,终端可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile InternetDevices,MID)、PAD等终端设备。图18其并不对上述电子装置的结构造成限定。例如,终端还可包括比图18中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图18所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(RandomAccess Memory,RAM)、磁盘或光盘等。
实施例6
本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以用于执行歌曲的数字乐谱文件的生成方法的程序代码。
可选地,在本实施例中,上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:
从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件,其中,候选清唱音频文件包括用户对候选清唱音频文件对应的歌曲进行演唱的清唱数据;
根据歌曲的时间信息从候选清唱音频文件中划分出多个有效音频片段;
提取出多个有效音频片段的音符信息,其中,音符信息包括一个或多个三元组,每个三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;
根据多个有效音频片段的音符信息生成数字乐谱文件,其中,数字乐谱文件包括三元组中的部分或全部。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:获取歌曲对应的歌词文件,歌词文件包括每句歌词对应的时间信息;根据歌词文件中每句歌词对应的时间信息将候选清唱音频文件划分出多个有效音频片段。
存储介质还被设置为存储用于执行以下步骤的程序代码:提取多个有效音频片段的基频信息,其中,基频信息包括音频片段的基频值;获取多个有效音频片段中基频值为非零的音频片段在播放时的播放时长之和;判断播放时长之和是否超过预设时间;如果判断出播放时长之和超过预设时间,对多个有效音频片段执行处理,得到基频段;获取基频段中的基频值;对基频值执行音符化处理,得到基频值的音符值;以及合并音符值,得到有效音频片段的音符信息。
存储介质还被设置为存储用于执行以下步骤的程序代码:获取多个有效音频片段对应的长度;对长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段;对长度大于等于第一预设值的音频片段执行第二滤波处理,得到第二滤波片段;获取第一滤波片段的基频值和第二滤波片段的基频值。
存储介质还被设置为存储用于执行以下步骤的程序代码:在获取多个有效音频片段对应的长度之后,判断长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,零音频片段为基频值为零的音频片段;如果判断出长度小于第二预设值的有效音频片段中存在零音频片段,将零音频片段的基频值设置为预设基频值;获取第一滤波片段的基频值、第二滤波片段的基频值和预设基频值。
存储介质还被设置为存储用于执行以下步骤的程序代码:在获取多个有效音频片段中基频值为非零的音频片段在播放时的时长之和之前,获取多个有效音频片段中相邻音频片段的基频值;计算相邻音频片段的基频值的差值;判断差值是否满足预设条件;以及如果判断出差值满足预设条件,将相邻音频片段的基频值置零。
存储介质还被设置为存储用于执行以下步骤的程序代码:将音符值中的相同音符值进行合并,并生成多个有效音频片段对应的三元组;以及将多个有效音频片段对应的三元组组合成用于表示音符信息的第一三元组序列。
存储介质还被设置为存储用于执行以下步骤的程序代码:获取相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间;以及根据相同音符值、多个有效音频片段对应的三元组的起始时间、多个有效音频片段对应的三元组的持续时间生成多个有效音频片段对应的三元组。
存储介质还被设置为存储用于执行以下步骤的程序代码:第一三元组序列包括第一三元组和第二三元组,当第一三元组的起始时间等于第二三元组的起始时间与第二三元组的持续时间之和时,合并第一三元组和第二三元组,得到第三三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,当第四三元组的起始时间等于第一三元组的起始时间与第一三元组的持续时间之和时,合并第四三元组和第一三元组,得到第五三元组,并从第一三元组序列中删除第一三元组,得到第二三元组序列;当第一三元组的起始时间不等于第二三元组的起始时间与第二三元组的持续时间之和时,且当第四三元组的起始时间不等于第一三元组的起始时间与第一三元组的持续时间之和时,从第一三元组序列中删除第一三元组,得到第二三元组序列;以及将第二三元组序列中的三元组按照预设格式输出,得到数字乐谱文件。
存储介质还被设置为存储用于执行以下步骤的程序代码:当si=si-1+li-1成立时,通过l'i-1=li-1+li计算第三三元组的持续时间l'i-1,其中,si为第一三元组的起始时间,si-1为第二三元组的起始时间,li-1为第二三元组的持续时间,li为第一三元组的持续时间;当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算第五三元组的持续时间l'i+1,通过s'i+1=si计算第五三元组的起始时间s'i+1,其中,si+1为第四三元组的起始时间,li+1为第四三元组的持续时间。
存储介质还被设置为存储用于执行以下步骤的程序代码:获取上传的多个原始清唱音频文件;获取对多个原始清唱音频文件的回复信息,其中,回复信息用于表示原始清唱音频文件的质量等级;判断回复信息所表示的质量等级是否达到预定等级;以及如果判断出回复信息所表示的质量等级达到预定等级,则将原始清唱音频文件确定为候选清唱音频文件。
可选地,本实施例中的具体示例可以参考上述实施例中所描述的示例,本实施例在此不再赘述。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取的存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在存储介质中,包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的客户端,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (15)

1.一种歌曲的数字乐谱文件的生成方法,其特征在于,包括:
从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件,其中,所述候选清唱音频文件包括用户对所述候选清唱音频文件对应的歌曲进行演唱的清唱数据;
根据所述歌曲的时间信息从所述候选清唱音频文件中划分出多个有效音频片段;
提取出所述多个有效音频片段的音符信息,其中,所述音符信息包括一个或多个三元组,每个所述三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及
根据所述多个有效音频片段的音符信息生成数字乐谱文件,其中,所述数字乐谱文件包括所述三元组中的部分或全部。
2.根据权利要求1所述的方法,其特征在于,根据所述歌曲的时间信息从所述候选清唱音频文件中划分出多个有效音频片段包括:
获取所述歌曲对应的歌词文件,所述歌词文件包括每句歌词对应的时间信息;以及
根据所述歌词文件中每句歌词对应的时间信息将所述候选清唱音频文件划分出多个有效音频片段。
3.根据权利要求1所述的方法,其特征在于,所述提取出所述多个有效音频片段的音符信息包括:
提取所述多个有效音频片段的基频信息,其中,所述基频信息包括音频片段的基频值;
获取所述多个有效音频片段中所述基频值为非零的音频片段在播放时的播放时长之和;
判断所述播放时长之和是否超过预设时间;
如果判断出所述播放时长之和超过所述预设时间,对所述多个有效音频片段执行处理,得到基频段;
获取所述基频段中的基频值;
对所述基频值执行音符化处理,得到所述基频值的音符值;以及
合并所述音符值,得到所述多个有效音频片段的音符信息。
4.根据权利要求3所述的方法,其特征在于,
对所述多个有效音频片段执行处理包括:获取所述多个有效音频片段对应的长度;对所述长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段;对所述长度大于等于所述第一预设值的音频片段执行第二滤波处理,得到第二滤波片段;
获取所述基频段中的基频值包括:获取所述第一滤波片段的基频值和所述第二滤波片段的基频值。
5.根据权利要求4所述的方法,其特征在于,
在获取所述多个有效音频片段对应的长度之后,所述方法还包括:判断所述长度小于第二预设值的有效音频片段中是否存在零音频片段,其中,所述零音频片段为所述基频值为零的音频片段;如果判断出所述长度小于所述第二预设值的有效音频片段中存在所述零音频片段,将所述零音频片段的基频值设置为预设基频值;
获取所述基频段中的基频值包括:获取所述第一滤波片段的基频值、所述第二滤波片段的基频值和所述预设基频值。
6.根据权利要求3所述的方法,其特征在于,在获取所述多个有效音频片段中所述基频值为非零的音频片段在播放时的时长之和之前,所述方法还包括:
获取所述多个有效音频片段中相邻音频片段的基频值;
计算所述相邻音频片段的基频值的差值;
判断所述差值是否满足预设条件;以及
如果判断出所述差值满足所述预设条件,将所述相邻音频片段的基频值置零。
7.根据权利要求3所述的方法,其特征在于,合并所述音符值,得到所述有效音频片段的音符信息包括:
将所述音符值中的相同音符值进行合并,并生成所述多个有效音频片段对应的三元组;以及
将所述多个有效音频片段对应的三元组组合成用于表示所述音符信息的第一三元组序列。
8.根据权利要求7所述的方法,其特征在于,生成所述多个有效音频片段对应的三元组包括:
获取所述相同音符值、所述多个有效音频片段对应的三元组的起始时间、所述多个有效音频片段对应的三元组的持续时间;以及
根据所述相同音符值、所述多个有效音频片段对应的三元组的起始时间、所述多个有效音频片段对应的三元组的持续时间生成所述多个有效音频片段对应的三元组。
9.根据权利要求7所述的方法,其特征在于,所述第一三元组序列包括第一三元组和第二三元组,根据所述多个有效音频片段的音符信息生成所述数字乐谱文件包括:
当所述第一三元组的起始时间等于所述第二三元组的起始时间与所述第二三元组的持续时间之和时,合并所述第一三元组和所述第二三元组,得到第三三元组,并从所述第一三元组序列中删除所述第一三元组,得到第二三元组序列;
当所述第一三元组的起始时间不等于所述第二三元组的起始时间与所述第二三元组的持续时间之和时,当第四三元组的起始时间等于所述第一三元组的起始时间与所述第一三元组的持续时间之和时,合并所述第四三元组和所述第一三元组,得到第五三元组,并从所述第一三元组序列中删除所述第一三元组,得到所述第二三元组序列;
当所述第一三元组的起始时间不等于所述第二三元组的起始时间与所述第二三元组的持续时间之和时,且当所述第四三元组的起始时间不等于所述第一三元组的起始时间与所述第一三元组的持续时间之和时,从所述第一三元组序列中删除所述第一三元组,得到所述第二三元组序列;以及
将所述第二三元组序列中的三元组按照预设格式输出,得到所述数字乐谱文件。
10.根据权利要求9所述的方法,其特征在于,
当si=si-1+li-1成立时,通过l'i-1=li-1+li计算所述第三三元组的持续时间l'i-1,其中,si为所述第一三元组的起始时间,si-1为所述第二三元组的起始时间,li-1为所述第二三元组的持续时间,li为所述第一三元组的持续时间;
当si=si-1+li-1不成立,si+1=si+li成立时,通过l'i+1=li+1+li计算所述第五三元组的持续时间l'i+1,通过s'i+1=si计算所述第五三元组的起始时间s'i+1,其中,si+1为所述第四三元组的起始时间,li+1为所述第四三元组的持续时间。
11.根据权利要求1所述的方法,其特征在于,获取所述候选清唱音频文件包括:
获取上传的多个原始清唱音频文件;
获取对所述多个原始清唱音频文件的回复信息,其中,所述回复信息用于表示所述原始清唱音频文件的质量等级;
判断所述回复信息所表示的质量等级是否达到预定等级;以及
如果判断出所述回复信息所表示的质量等级达到所述预定等级,则将所述原始清唱音频文件确定为所述候选清唱音频文件。
12.一种歌曲的数字乐谱文件的生成装置,其特征在于,包括:
获取单元,用于从歌曲对应的清唱音频文件中获取满足预设条件的候选清唱音频文件,其中,所述候选清唱音频文件包括用户对所述候选清唱音频文件对应的歌曲进行演唱的清唱数据;
划分单元,用于根据所述歌曲的时间信息从所述候选清唱音频文件中划分出多个有效音频片段;
提取单元,用于提取出所述多个有效音频片段的音符信息,其中,所述音符信息包括一个或多个三元组,每个所述三元组包括具有映射关系的音符的起始时间,音符的持续时间,音符的音符值;以及
生成单元,用于根据所述多个有效音频片段的音符信息生成数字乐谱文件,其中,所述数字乐谱文件包括所述三元组中的部分或全部。
13.根据权利要求12所述的装置,其特征在于,所述划分单元包括:
第一获取模块,用于获取所述歌曲对应的歌词文件,所述歌词文件包括每句歌词对应的时间信息;以及
划分模块,用于根据所述歌词文件中每句歌词对应的时间信息将所述候选的清唱音频文件划分为多个有效音频片段。
14.根据权利要求12所述的装置,其特征在于,所述提取单元包括:
提取模块,用于提取所述多个有效音频片段的基频信息,其中,所述基频信息包括音频片段的基频值;
第二获取模块,用于获取所述多个有效音频片段中所述基频值为非零的音频片段在播放时的播放时长之和;
判断模块,用于判断所述播放时长之和是否超过预设时间;
第一处理模块,用于在判断出所述播放时长之和超过所述预设时间时,对所述多个有效音频片段执行处理,得到基频段;
第三获取模块,用于获取所述基频段中的基频值;
第二处理模块,用于对所述基频值执行音符化处理,得到所述基频值的音符值;以及
合并模块,用于合并所述音符值,得到所述多个有效音频片段的音符信息。
15.根据权利要求14所述的装置,其特征在于,
所述第一处理模块包括:获取子模块,用于获取所述多个有效音频片段对应的长度;第一处理子模块,用于对所述长度小于第一预设值的音频片段执行第一滤波处理,得到第一滤波片段;第二处理子模块,用于对所述长度大于等于所述第一预设值的音频片段执行第二滤波处理,得到第二滤波片段;
所述第三获取模块用于获取所述第一滤波片段的基频值和所述第二滤波片段的基频值。
CN201610816111.9A 2016-09-09 2016-09-09 歌曲的数字乐谱文件的生成方法和装置 Active CN106448630B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610816111.9A CN106448630B (zh) 2016-09-09 2016-09-09 歌曲的数字乐谱文件的生成方法和装置
PCT/CN2017/101008 WO2018045988A1 (zh) 2016-09-09 2017-09-08 歌曲的数字乐谱文件的生成方法、装置和存储介质
US16/059,109 US10923089B2 (en) 2016-09-09 2018-08-09 Method and apparatus for generating digital score file of song, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610816111.9A CN106448630B (zh) 2016-09-09 2016-09-09 歌曲的数字乐谱文件的生成方法和装置

Publications (2)

Publication Number Publication Date
CN106448630A true CN106448630A (zh) 2017-02-22
CN106448630B CN106448630B (zh) 2020-08-04

Family

ID=58167614

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610816111.9A Active CN106448630B (zh) 2016-09-09 2016-09-09 歌曲的数字乐谱文件的生成方法和装置

Country Status (3)

Country Link
US (1) US10923089B2 (zh)
CN (1) CN106448630B (zh)
WO (1) WO2018045988A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107452361A (zh) * 2017-08-08 2017-12-08 腾讯音乐娱乐(深圳)有限公司 歌曲分句方法及装置
WO2018045988A1 (zh) * 2016-09-09 2018-03-15 腾讯科技(深圳)有限公司 歌曲的数字乐谱文件的生成方法、装置和存储介质
CN107978323A (zh) * 2017-12-01 2018-05-01 腾讯科技(深圳)有限公司 音频识别方法、装置及存储介质
CN108492817A (zh) * 2018-02-11 2018-09-04 北京光年无限科技有限公司 一种基于虚拟偶像的歌曲数据处理方法及演唱交互系统
CN108630240A (zh) * 2017-03-23 2018-10-09 北京小唱科技有限公司 一种合唱方法及装置
CN108766452A (zh) * 2018-04-03 2018-11-06 北京小唱科技有限公司 修音方法及装置
CN110060708A (zh) * 2018-01-09 2019-07-26 丰田自动车株式会社 音频设备
CN110096515A (zh) * 2019-05-10 2019-08-06 天津大学深圳研究院 一种基于三元组的rdf数据管理方法、装置及存储介质
CN110134335A (zh) * 2019-05-10 2019-08-16 天津大学深圳研究院 一种基于键值对的rdf数据管理方法、装置及存储介质
CN110379400A (zh) * 2018-04-12 2019-10-25 森兰信息科技(上海)有限公司 一种用于生成乐谱的方法及系统
CN110516102A (zh) * 2019-07-18 2019-11-29 杭州电子科技大学 一种基于语谱图识别的歌词时间戳生成方法
CN112071287A (zh) * 2020-09-10 2020-12-11 北京有竹居网络技术有限公司 用于生成歌谱的方法、装置、电子设备和计算机可读介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019196052A1 (en) * 2018-04-12 2019-10-17 Sunland Information Technology Co., Ltd. System and method for generating musical score
CN111159465B (zh) * 2019-12-31 2023-09-29 杭州网易云音乐科技有限公司 一种歌曲分类方法及装置
CN113689836B (zh) * 2021-08-12 2023-08-18 福建星网视易信息系统有限公司 一种将音频转换成音符并显示的方法及终端
US11922911B1 (en) * 2022-12-02 2024-03-05 Staffpad Limited Method and system for performing musical score
CN115985273B (zh) * 2023-03-21 2023-12-26 北京卓颜翰景科技有限公司 基于多传感器数据融合的记谱方法及系统

Citations (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1240978A (zh) * 1998-03-11 2000-01-12 松下电器产业株式会社 音频信号编码装置、解码装置及音频信号编码、解码装置
US20030163524A1 (en) * 2002-02-22 2003-08-28 Hideo Gotoh Information processing system, information processing apparatus, information processing method, and program
US20040020348A1 (en) * 2002-08-01 2004-02-05 Kenji Ishida Musical composition data editing apparatus, musical composition data distributing apparatus, and program for implementing musical composition data editing method
JP2005196090A (ja) * 2004-01-09 2005-07-21 Yamaha Corp 運指表示装置及びそのプログラム
US20060130640A1 (en) * 2004-12-22 2006-06-22 Yamaha Corporation Music data modifier for music data expressing delicate nuance, musical instrument equipped with the music data modifier and music system
CN101521788A (zh) * 2008-02-25 2009-09-02 徐连彦 无线音频图像调制解调器
CN101894552A (zh) * 2010-07-16 2010-11-24 安徽科大讯飞信息科技股份有限公司 基于语谱切分的唱歌评测系统
CN101916250A (zh) * 2010-04-12 2010-12-15 电子科技大学 一种基于哼唱的音乐检索方法
CN101968958A (zh) * 2010-11-02 2011-02-09 安徽科大讯飞信息科技股份有限公司 一种音频数据的比较方法和装置
CN102014195A (zh) * 2010-08-19 2011-04-13 上海酷吧信息技术有限公司 一种可生成音乐的手机及其实现方法
JP2012022221A (ja) * 2010-07-16 2012-02-02 Ryukoku Univ 拍時刻推定装置および拍時刻推定方法
CN102521281A (zh) * 2011-11-25 2012-06-27 北京师范大学 一种基于最长匹配子序列算法的哼唱计算机音乐检索方法
CN102522083A (zh) * 2011-11-29 2012-06-27 北京百纳威尔科技有限公司 一种应用移动终端搜索哼唱歌曲的方法及其移动终端
CN102547524A (zh) * 2011-12-15 2012-07-04 无锡中星微电子有限公司 一种蓝牙耳机中处理音频数据的方法、装置及设备
US20120297959A1 (en) * 2009-06-01 2012-11-29 Matt Serletic System and Method for Applying a Chain of Effects to a Musical Composition
CN102880693A (zh) * 2012-09-20 2013-01-16 浙江大学 一种基于个体发声能力的音乐推荐方法
CN102915725A (zh) * 2012-09-10 2013-02-06 福建星网视易信息系统有限公司 人机互动的歌曲演唱系统、方法
BRPI1101173A2 (pt) * 2011-03-30 2013-06-04 Alessandro Paolone De Medeiros programa relativo ao funcionamento de um conjunto de processamento de dados, destinado Á escrita e ediÇço de partitura de mésica tocada por instrumento solista
CN103440250A (zh) * 2013-07-22 2013-12-11 北京承芯卓越科技有限公司 基于16位dsp平台应用的嵌入式哼唱检索方法及系统
US8829322B2 (en) * 2012-10-26 2014-09-09 Avid Technology, Inc. Metrical grid inference for free rhythm musical input
CN104143324A (zh) * 2014-07-14 2014-11-12 电子科技大学 一种乐音音符识别方法
CN104200818A (zh) * 2014-08-06 2014-12-10 重庆邮电大学 一种音高检测方法
CN104978973A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN104978380A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN105469807A (zh) * 2015-12-30 2016-04-06 中国科学院自动化研究所 一种多基频提取方法及装置
CN105788589A (zh) * 2016-05-04 2016-07-20 腾讯科技(深圳)有限公司 一种音频数据的处理方法及装置
WO2018045988A1 (zh) * 2016-09-09 2018-03-15 腾讯科技(深圳)有限公司 歌曲的数字乐谱文件的生成方法、装置和存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5038658A (en) * 1988-02-29 1991-08-13 Nec Home Electronics Ltd. Method for automatically transcribing music and apparatus therefore
US5693903A (en) * 1996-04-04 1997-12-02 Coda Music Technology, Inc. Apparatus and method for analyzing vocal audio data to provide accompaniment to a vocalist
KR100412196B1 (ko) * 2001-05-21 2003-12-24 어뮤즈텍(주) 악보 추적 방법 및 그 장치
WO2006066075A1 (en) * 2004-12-15 2006-06-22 Museami, Inc System and method for music score capture and synthesized audio performance with synchronized presentation
US7667125B2 (en) * 2007-02-01 2010-02-23 Museami, Inc. Music transcription
US7754955B2 (en) * 2007-11-02 2010-07-13 Mark Patrick Egan Virtual reality composer platform system
JP6160599B2 (ja) * 2014-11-20 2017-07-12 カシオ計算機株式会社 自動作曲装置、方法、およびプログラム
US9721551B2 (en) * 2015-09-29 2017-08-01 Amper Music, Inc. Machines, systems, processes for automated music composition and generation employing linguistic and/or graphical icon based musical experience descriptions
CN105741835B (zh) * 2016-03-18 2019-04-16 腾讯科技(深圳)有限公司 一种音频信息处理方法及终端

Patent Citations (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1240978A (zh) * 1998-03-11 2000-01-12 松下电器产业株式会社 音频信号编码装置、解码装置及音频信号编码、解码装置
US20030163524A1 (en) * 2002-02-22 2003-08-28 Hideo Gotoh Information processing system, information processing apparatus, information processing method, and program
US20040020348A1 (en) * 2002-08-01 2004-02-05 Kenji Ishida Musical composition data editing apparatus, musical composition data distributing apparatus, and program for implementing musical composition data editing method
JP2005196090A (ja) * 2004-01-09 2005-07-21 Yamaha Corp 運指表示装置及びそのプログラム
US20060130640A1 (en) * 2004-12-22 2006-06-22 Yamaha Corporation Music data modifier for music data expressing delicate nuance, musical instrument equipped with the music data modifier and music system
CN101521788A (zh) * 2008-02-25 2009-09-02 徐连彦 无线音频图像调制解调器
US20120297959A1 (en) * 2009-06-01 2012-11-29 Matt Serletic System and Method for Applying a Chain of Effects to a Musical Composition
CN101916250A (zh) * 2010-04-12 2010-12-15 电子科技大学 一种基于哼唱的音乐检索方法
JP2012022221A (ja) * 2010-07-16 2012-02-02 Ryukoku Univ 拍時刻推定装置および拍時刻推定方法
CN101894552A (zh) * 2010-07-16 2010-11-24 安徽科大讯飞信息科技股份有限公司 基于语谱切分的唱歌评测系统
CN102014195A (zh) * 2010-08-19 2011-04-13 上海酷吧信息技术有限公司 一种可生成音乐的手机及其实现方法
CN101968958A (zh) * 2010-11-02 2011-02-09 安徽科大讯飞信息科技股份有限公司 一种音频数据的比较方法和装置
BRPI1101173A2 (pt) * 2011-03-30 2013-06-04 Alessandro Paolone De Medeiros programa relativo ao funcionamento de um conjunto de processamento de dados, destinado Á escrita e ediÇço de partitura de mésica tocada por instrumento solista
CN102521281A (zh) * 2011-11-25 2012-06-27 北京师范大学 一种基于最长匹配子序列算法的哼唱计算机音乐检索方法
CN102522083A (zh) * 2011-11-29 2012-06-27 北京百纳威尔科技有限公司 一种应用移动终端搜索哼唱歌曲的方法及其移动终端
CN102522083B (zh) * 2011-11-29 2014-03-05 北京百纳威尔科技有限公司 一种应用移动终端搜索哼唱歌曲的方法及其移动终端
CN102547524A (zh) * 2011-12-15 2012-07-04 无锡中星微电子有限公司 一种蓝牙耳机中处理音频数据的方法、装置及设备
CN102915725A (zh) * 2012-09-10 2013-02-06 福建星网视易信息系统有限公司 人机互动的歌曲演唱系统、方法
CN102880693A (zh) * 2012-09-20 2013-01-16 浙江大学 一种基于个体发声能力的音乐推荐方法
US8829322B2 (en) * 2012-10-26 2014-09-09 Avid Technology, Inc. Metrical grid inference for free rhythm musical input
CN103440250A (zh) * 2013-07-22 2013-12-11 北京承芯卓越科技有限公司 基于16位dsp平台应用的嵌入式哼唱检索方法及系统
CN104143324A (zh) * 2014-07-14 2014-11-12 电子科技大学 一种乐音音符识别方法
CN104200818A (zh) * 2014-08-06 2014-12-10 重庆邮电大学 一种音高检测方法
CN104978973A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN104978380A (zh) * 2014-10-22 2015-10-14 腾讯科技(深圳)有限公司 一种音频处理方法及装置
CN105469807A (zh) * 2015-12-30 2016-04-06 中国科学院自动化研究所 一种多基频提取方法及装置
CN105788589A (zh) * 2016-05-04 2016-07-20 腾讯科技(深圳)有限公司 一种音频数据的处理方法及装置
WO2018045988A1 (zh) * 2016-09-09 2018-03-15 腾讯科技(深圳)有限公司 歌曲的数字乐谱文件的生成方法、装置和存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
张文俊: ""基于MIDI1.0协议的工尺谱乐谱音乐信息数字存储格式"", 《计算机系统应用》 *
陈根方: ""基于数学形态学和记谱法的数字乐谱音乐信息提取"", 《计算机应用与软件》 *

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018045988A1 (zh) * 2016-09-09 2018-03-15 腾讯科技(深圳)有限公司 歌曲的数字乐谱文件的生成方法、装置和存储介质
US10923089B2 (en) 2016-09-09 2021-02-16 Tencent Technology (Shenzhen) Company Limited Method and apparatus for generating digital score file of song, and storage medium
CN108630240A (zh) * 2017-03-23 2018-10-09 北京小唱科技有限公司 一种合唱方法及装置
CN108630240B (zh) * 2017-03-23 2020-05-26 北京小唱科技有限公司 一种合唱方法及装置
CN107452361B (zh) * 2017-08-08 2020-07-07 腾讯音乐娱乐(深圳)有限公司 歌曲分句方法及装置
CN107452361A (zh) * 2017-08-08 2017-12-08 腾讯音乐娱乐(深圳)有限公司 歌曲分句方法及装置
CN107978323A (zh) * 2017-12-01 2018-05-01 腾讯科技(深圳)有限公司 音频识别方法、装置及存储介质
CN110060708A (zh) * 2018-01-09 2019-07-26 丰田自动车株式会社 音频设备
CN110060708B (zh) * 2018-01-09 2021-02-02 丰田自动车株式会社 音频设备
CN108492817B (zh) * 2018-02-11 2020-11-10 北京光年无限科技有限公司 一种基于虚拟偶像的歌曲数据处理方法及演唱交互系统
CN108492817A (zh) * 2018-02-11 2018-09-04 北京光年无限科技有限公司 一种基于虚拟偶像的歌曲数据处理方法及演唱交互系统
CN108766452B (zh) * 2018-04-03 2020-11-06 北京小唱科技有限公司 修音方法及装置
CN108766452A (zh) * 2018-04-03 2018-11-06 北京小唱科技有限公司 修音方法及装置
CN110379400A (zh) * 2018-04-12 2019-10-25 森兰信息科技(上海)有限公司 一种用于生成乐谱的方法及系统
CN110379400B (zh) * 2018-04-12 2021-09-24 森兰信息科技(上海)有限公司 一种用于生成乐谱的方法及系统
CN110134335B (zh) * 2019-05-10 2022-08-12 天津大学深圳研究院 一种基于键值对的rdf数据管理方法、装置及存储介质
CN110134335A (zh) * 2019-05-10 2019-08-16 天津大学深圳研究院 一种基于键值对的rdf数据管理方法、装置及存储介质
CN110096515A (zh) * 2019-05-10 2019-08-06 天津大学深圳研究院 一种基于三元组的rdf数据管理方法、装置及存储介质
CN110516102A (zh) * 2019-07-18 2019-11-29 杭州电子科技大学 一种基于语谱图识别的歌词时间戳生成方法
CN110516102B (zh) * 2019-07-18 2021-05-11 杭州电子科技大学 一种基于语谱图识别的歌词时间戳生成方法
CN112071287A (zh) * 2020-09-10 2020-12-11 北京有竹居网络技术有限公司 用于生成歌谱的方法、装置、电子设备和计算机可读介质

Also Published As

Publication number Publication date
CN106448630B (zh) 2020-08-04
WO2018045988A1 (zh) 2018-03-15
US20180350336A1 (en) 2018-12-06
US10923089B2 (en) 2021-02-16

Similar Documents

Publication Publication Date Title
CN106448630A (zh) 歌曲的数字乐谱文件的生成方法和装置
CN108305641B (zh) 情感信息的确定方法和装置
CN104395953B (zh) 来自音乐音频信号的拍子、和弦和强拍的评估
CN105096941A (zh) 语音识别方法以及装置
CN105788592A (zh) 一种音频分类方法及装置
CN106375780B (zh) 一种多媒体文件生成方法及其设备
CN106991163A (zh) 一种基于演唱者声音特质的歌曲推荐方法
CN104657438A (zh) 信息处理方法及电子设备
CN103714812A (zh) 一种语音识别方法及装置
CN107103915A (zh) 一种音频数据处理方法以及装置
CN106898339A (zh) 一种歌曲的合唱方法及终端
CN108764114B (zh) 一种信号识别方法及其设备、存储介质、终端
CN105161116A (zh) 多媒体文件高潮片段的确定方法及装置
CN106302987A (zh) 一种音频推荐方法及设备
CN103955490A (zh) 一种播放音频的方法和设备
CN106611603A (zh) 一种音频处理方法及装置
CN108877835A (zh) 评价语音信号的方法及系统
CN109903748A (zh) 一种基于自定义语音库的语音合成方法及装置
CN111210850B (zh) 歌词对齐方法及相关产品
JP2008516288A (ja) 音声信号の基礎となるメロディの抽出
CN110347864A (zh) 一种智能调节音频参数的方法及系统
CN105895079A (zh) 语音数据的处理方法和装置
KR101813704B1 (ko) 사용자 음색 분석 장치 및 음색 분석 방법
CN106919583A (zh) 音频文件的推送方法及装置
CN107025902B (zh) 数据处理方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant