CN104380371A - 用于生成输入音乐数据的伴奏的装置、系统和方法 - Google Patents
用于生成输入音乐数据的伴奏的装置、系统和方法 Download PDFInfo
- Publication number
- CN104380371A CN104380371A CN201380029343.4A CN201380029343A CN104380371A CN 104380371 A CN104380371 A CN 104380371A CN 201380029343 A CN201380029343 A CN 201380029343A CN 104380371 A CN104380371 A CN 104380371A
- Authority
- CN
- China
- Prior art keywords
- music
- music data
- accompaniment
- pattern
- musical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 63
- 238000004458 analytical method Methods 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 9
- 238000009826 distribution Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 6
- 230000011218 segmentation Effects 0.000 claims description 6
- 230000002596 correlated effect Effects 0.000 claims description 3
- 239000000969 carrier Substances 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 9
- 230000000875 corresponding effect Effects 0.000 description 8
- 238000000605 extraction Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000033764 rhythmic process Effects 0.000 description 2
- 229940061368 sonata Drugs 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000012946 outsourcing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000010223 real-time analysis Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/021—Background music, e.g. for video sequences or elevator music
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/101—Music Composition or musical creation; Tools or processes therefor
- G10H2210/141—Riff, i.e. improvisation, e.g. repeated motif or phrase, automatically added to a piece, e.g. in real time
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
- G10H2240/121—Musical libraries, i.e. musical databases indexed by musical parameters, wavetables, indexing schemes using musical parameters, musical rule bases or knowledge bases, e.g. for automatic composing methods
- G10H2240/131—Library retrieval, i.e. searching a database or selecting a specific musical piece, segment, pattern, rule or parameter set
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Library & Information Science (AREA)
- Acoustics & Sound (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Auxiliary Devices For Music (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
一种用于自动生成输入音乐数据的实时伴奏的装置包括接收音乐数据的音乐输入部。音乐分析器分析接收到的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述。查询生成器生成对音乐数据库的查询,该音乐数据库包括音乐模式和包括所述音乐模式的一个或多个特性的相关联的元数据,从所述音乐数据描述和从描述所述实时伴奏的参数选择的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询。查询界面使用生成的查询来查询所述音乐数据库并通过使用所述查询接收选自所述音乐数据库的音乐模式。音乐输出部输出所述接收的音乐模式。
Description
技术领域
本公开涉及用于自动生成输入音乐数据的实时伴奏的装置、系统和方法。进一步地,本发明涉及用于生成在用于自动生成音乐的装置和方法中所使用的音乐数据库的装置和方法。更进一步地,本发明涉及计算机程序、计算机可读非临时性介质和音乐数据库。
背景技术
音乐即兴演奏,尤其是爵士既是吸引人的活动又是非常令人沮丧的活动。由人类音乐家即兴演奏需要音乐思想与感官运动过程之间的亲密关系:音乐家必须倾听、思考、开拓思路并很快移动他/她的手指。速度和时间的缺乏是即兴演奏的关键因素,这是令人兴奋的因素。这也是令人沮丧的因素:初学者以及有经验的即兴演奏者都绝对地受限于自身的技术能力和乐器的形态。
在美国2002/0194984 A1中公开了允许通过持续阶段生成作为音乐数据的输入序列的实时连续的音乐的装置和方法。美国8,097,801 B2公开了用于基于现有乐曲的预录演出的数据库生成乐曲的系统和方法。
本文中所提供的“背景技术”描述以总体呈现本公开的内容为目的。目前署名的发明人的工作,某种程度上描述在该背景技术部分,以及申请时未另限定为现有技术的说明方面,既没有明示也没有暗示承认作为本发明的现有技术。
发明内容
本公开的目的是提供一种用于自动生成能够跟随输入音乐数据的输入音乐数据的实时伴奏的装置、系统和方法并且提供更好的伴奏。本发明的另一个目的是提供用于生产在用于自动生成音乐的装置和方法中使用的音乐数据库的改进装置和方法,特别是提供输入音乐数据的实时伴奏。本发明的另一个目的是提供用于实现上述方法的对应的计算机程序、对应的计算机可读非暂时性介质和适合的音乐数据库。
根据本公开的一个方面,提供了一种用于自动生成输入音乐数据的实时伴奏的装置,所述装置包括:
-音乐输入部,接收音乐数据;
-音乐分析器,分析接收到的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述;
-查询生成器,生成对包括音乐模式(music pattern)和相关联的元数据的音乐数据库的查询,所述相关联的元数据包括所述音乐模式的一个或多个特性,从所述音乐数据描述(music data description)和从描述所述实时伴奏的参数选择(preference)的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询;
-查询界面,使用生成的查询来查询所述音乐数据库并且接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-音乐输出部,输出所述接收的音乐模式。
根据本公开的再一个方面,提供了一种用于自动生成输入音乐数据的实时伴奏的方法,所述方法包括:
-接收音乐数据;
-分析接收的音乐数据以获得包括所述分析的音乐数据的一个或多个特性的音乐数据描述;
-生成对包括音乐模式和包括所述音乐模式的一个或多个特性的相关联的元数据的音乐数据库的查询;
-使用生成的查询来查询所述音乐数据库;
-接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-输出所述接收的音乐模式。
根据本公开的再一个方面,提供了一种用于自动生成输入音乐数据的实时伴奏的系统,所述系统包括:
-根据本发明的装置,用于自动地生成作为输入音乐数据的实时伴奏的音乐;以及
-音乐数据库,包括音乐模式和包括所述音乐模式的一个或多个特性的相关联的元数据,所述音乐数据库被配置为通过使用查询由所述装置查询并且用于提供通过使用所述查询从所述音乐数据库选择的音乐模式。
根据本公开的另一个方面,提供了用于生成在用于自动生成音乐的装置和方法中使用的音乐数据库的装置,所述装置包括:
-音乐输入部,其接收音乐数据;
-处理单元,其将所述音乐数据分段为音乐模式并且提取音乐模式的多个特性作为所述音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-音乐输出部,其将音乐模式和相关联的元数据存储在音乐数据库中。
根据本公开的另一个方面,提供了用于生成在用于自动生成音乐的装置和方法中使用的音乐数据库的方法,所述方法包括:
-接收音乐数据;
-将所述音乐数据分段为多个音乐模式;
-提取音乐模式的多个特性作为所述音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-将音乐模式和相关联的元数据存储在音乐数据库中。
根据本公开的另一个方面,提供了一种音乐数据库,包括:
-音乐模式,其包括从音乐数据分段的音乐的分段;以及
-元数据,其包括音乐模式的多个特性,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高。
根据又一个方面,提供了计算机程序,其包括程序代码手段,当述计算机上在执行所述计算机程序时,使计算机执行根据本公开的方法的步骤;以及计算机可读非临时性介质,其具有存储于其上的指令,当在计算机上执行时,所述指令使所述计算机进行根据本公开的方法的步骤。
在从属权利要求中限定了本发明的优选实施例。应理解的是,所要求保护的系统、所要求保护的方法、所要求保护的计算机程序和所要求保护的计算机可读介质具有与如所要求保护的装置和如在从属权利要求中限定的优选实施例类似和/或相同的优选实施例。
本公开描述了用于生成伴奏的装置和方法,其可提供更大的灵活性并且使用更多信息来生成伴奏。此外,本公开描述了用于生成音乐数据库,的装置和方法,该数据库可提供灵活伴奏。在实施例中,生成的音乐数据库可用于以下装置和方法中:其中生成输入音乐数据的音乐数据描述并且用于查询音乐数据库以搜索并且提供适合于输入音乐数据的音乐模式。音乐数据描述可包括分析(对应)的音乐数据的一个或多个特性,并且因此可反映出现在输入音乐数据中的本质变化,例如,如果音乐家改变音乐风格、演奏的风格、调、能量等。因此,有可能生成“跟随(follows)”输入音乐数据的伴奏,即如果输入音乐数据中的任何这种本质变化出现,伴奏即相应地做出反应。
由于输入音乐数据的分析,通常音乐数据库的生成和查询是在现场和百忙之中进行,例如当音乐家演奏时,伴奏可现场生成,使得可以以适当和灵活的方式为音乐家伴奏,即使音乐家改变了音乐风格、演奏的风格、调、能量等。
当优选地从由音乐家或一组音乐家演奏的现场音乐(即现场音频信号)获得输入音乐数据时,其也可从所录制的音乐(例如音乐家的音频录音,其被重放且伴奏应加入其中)获得。音乐数据也可以是原始音频信号、乐器指令数字化接口数据或其它预处理的音乐数据而不是原始音频信号。
音乐数据描述可包括各种数据,其表征为用于在音乐数据库中搜索音乐模式的查询中所使用的分析的音乐数据。优选地,音乐数据描述包括所分析的音乐数据的音高、小节、调、速度(tempo,拍子)、能量、音量、一个或多个乐器的类型以及曲调中的一个或多个。已知特征提取或特征生成算法可被用于此目的,诸如开发以提取在MPEG-7标准中描述的描述符的技术。此外,可与诸如Pachet,F.和Zils,A.在“Automatic Extraction ofMusic Descriptors from Acoustic Signals”编辑X.Serra,ISMIR 2004的会议录,第353-356页,巴塞罗那,西班牙,2004年中描述的通用方法互换使用。
除了音乐数据描述之外,伴奏描述描述了所述实时伴奏的参数选择和/或描述音乐的一般规则的音乐规则可用于生成查询。
伴奏描述优选地描述一组参数选择中的一个或多个参数选择,其包括伴奏所基于的曲调、用于生成的伴奏一个或多个乐器、用于生成的伴奏的一个或多个音乐家、用于生成的伴奏的音乐风格和乐器之间的相互作用。包括在此伴奏描述中的一个或多个参数通常优选地提前或在现场(即,也可在伴奏过程中改变)由用户设置。可替代地或另外地,可在一个实施例中提供包括在此伴奏描述中的一个或多个参数的自动设置。
音乐规则描述一组规则的音乐的一个或多个一般规则,其包含优选的变调、非优选的变调、和声、与连续性相关的规则(例如不会经常从一个风格跳到另一个风格,仅在例如强拍或声部中的第一小节等的某些测量位置跳跃)或与表演的整体能量级相关的规则(例如,当其它媒介(agent)的能量级已经很高时而不超过某一能量级;可替代地,“如果其他媒介不演奏,则更大声地演奏”)等。所述音乐规则通常被预先确定并且应当被理解为应(或者必须)由从用于伴奏的音乐数据库检索的音乐模式符合的条件。音乐规则可用于查询的生成,使得仅服从所述音乐规则的音乐模式被考虑并从数据库检索。可替代地,它们可用于在接收响应于查询所检索的音乐模式后的检查以选择(最佳)符合音乐规则的检索的音乐模式。
音乐模式是存储在音乐数据库中的预录制(或预生成)的音乐片段(有时也被称为“即兴重复段(riffs)”)。(在对应于一定数量的小节的长度的一个实施例中)音乐模式优选地具有很短的持续时间,例如在10毫秒与几秒之间,优选地在100毫秒与5秒之间,这从在音乐家演奏的时候录制的音乐获得。优选地,一个或多个音乐家演奏音乐,例如,音乐的不同的标题、不同的艺术加工、不同的风格等(优选地使用不同的乐器),以获得音乐数据库中的音乐模式的大集合。可替代地,音乐数据库可仅包含少量的音乐模式,例如对应于由一个音乐家演奏的单个音乐片段的五到十个不同的艺术加工。
存储在数据库中的音乐模式设置有描述对应的音乐模式的元数据。所述元数据优选地在录制(或生成)的音乐的分析中获得。在此分析中,音乐被分成上述短音乐模式,其然后被分析以获得相关的元数据。元数据优选包括一组元数据中的一个或多个数据,其包括和弦、能量(例如每拍或小节)、音符的密度、和弦符号、调号、音阶、和弦引伸、相同调号的根音(relative roots,相关根音)、音区、平均能量、风格、乐器等。因此,音乐模式的特征在于元数据,其可用于搜索符合当前查询的一个或多个音乐模式。
因此,本公开实现能够使装置、系统和方法自动生成音乐作为输入音乐数据的实时伴奏,其能够跟随例如由音乐家演奏的现场音乐的输入音乐数据,并提供比已知的方法和装置更好的伴奏。
已经通过一般介绍的方式提供了前述段落,当并不旨在限制所附权利要求的范围。将通过参考结合附图的下面的详细描述最好地理解所描述的实施例与其它优点。
附图说明
当结合附图考虑时,通过参照以下详细描述将很容易获得并且同样更好地理解本公开的更完整的认识及其许多伴随的优点,在附图中:
图1示出根据本公开的用于自动生成音乐的系统和装置的示意图;
图2示出根据本公开的用于自动生成音乐的装置的实施例的示意图;
图3示出根据本公开的用于自动生成音乐的方法的流程图;
图4示出用于在根据本公开的用于自动生成音乐的装置中使用的查询生成器和查询界面的实施例的示意图;以及
图5示出用于生成音乐数据库的装置的实施例的示意图。
具体实施方式
现在参考附图,其中相似的参考标号指代贯穿几个视图中的相同或对应的部件,图1示出根据本公开的用于自动生成音乐的系统和装置的示意图。系统1包括根据本公开的装置2,该装置用于自动生成作为输入音乐数据4的实时伴奏的音乐3。此外,系统1包括根据本公开的音乐数据库5,该音乐数据库包括音乐模式和包括所述音乐模式的一个或多个特性的相关联的元数据,所述音乐数据库被配置用于通过使用查询6由所述装置进行查询和用于提供通过使用所述查询6从所述音乐数据库5选择的音乐模式7。
应注意,在音乐数据库可通过使用一种数据结构来组织,其还被用于通过使用音乐描述数据来查询音乐数据库的这个上下文中。然而,不是必需的是,音乐数据库包括用于组织存储在其中的数据的这样的数据结构。特别地,在其它实施例中,音乐数据库可仅包括一些(相当小数量)的音乐模式和相关联的元数据。这样(小数量)的音乐数据库可被集成在例如用户定义的较大数据库中或其中用户已收集了其它(小数量)的音乐数据库的其它预定的数据库。
音乐数据库5可通过使用装置8生成(其是可选的,但不一定是所要求保护的系统1的一部分),然后,其例如在线分配或在记录载体9上分配这些音乐数据库5中的一个或多个。例如,对于每个音乐家来说,可以提供用于出售的不同的音乐数据库,然后用户通过该音乐数据库自动生成音乐,通过其用户可在他/她演奏音乐时由所述音乐家(人工)伴奏。
输入音乐数据4可因此是由用户实时演奏的音乐,并且生成的音乐3是在现场生成的音乐,并作为输入音乐数据4的实时伴奏自动地现场为用户伴奏。换言之,生成的音乐3由要求保护的系统生成1,使得其跟随输入音乐数据4,因此,即使用户改变他/她的演奏音乐风格,用户还遵循速度、和弦或如下面解释的其它音乐特征。
音乐数据库5可被存储在记录载体上,例如由装置2内的对应的驱动读出的CD、DVD或BD9上。可替代地,音乐数据库5可被下载并存储在装置2内的内部存储器上,例如PC的硬盘。在另外的其它替代实施例中,音乐数据库5可被设置在网络内(例如云10内)或在预定服务器上在线存储在互联网内,装置2通过提交查询6和接收对应的音乐模式7对音乐数据库进行在线访问。
用于自动生成音乐的装置2和/或用于生成音乐数据库的装置优选地被实施为处理器件,诸如对应的计算机程序(软件)在其上运行的计算机或工作站。在一个实施例中,相同的处理器件(例如相同的计算机)可被实施为两个装置2和8。然而,在更实际的情形中,用于自动生成音乐的装置2由用户的计算机或音乐生成系统(优选为音乐家)表示,然而用于生成所述音乐数据库的装置8被设置在音乐公司和音乐工作室中,其中几位音乐家录制他们的音乐且这些音乐录制被用于生成音乐数据库5。
在实施例中,装置2、音乐数据库5和装置8中的一个或多个还可被包括在云10中。在图1中所描绘的实施例中,仅音乐数据库5包括在云10内,即查询6被发送到云10内的音乐数据库且所选择的音乐模型7被从云10中的音乐数据库5发送回装置2。然而,如所提到的,这仅仅是一个实例,其它实施例也在实践中使用。其中分离元件被存储且它们是如何实施的事实对于本公开来说一般不是必不可少的。
一般地,“云计算”的概念包括利用一组共享计算资源(例如,服务器),其典型地合并在一个或多个数据中心位置。例如,云计算系统可被实施为网页(web)服务,其使用户在第三方数据中心启动和管理计算资源(例如,虚拟服务器实例)。在云环境中,计算机资源可以是不同尺寸和构造,使得不同资源类型可被专用于满足不同用户的特定需求。例如,一个用户可能希望使用小型实例作为网页服务器且另一较大实例作为数据库服务器,或甚至更大实例用于处理器密集型应用。云计算提供了这种类型的外包灵活性(outsourced flexibility),而无需管理组织内的额外硬件资源的购买和操作。基于云的计算资源被认为在“云”中执行或驻留在其中的某处,这可能是公司内部网络或公共互联网。从应用开发者或信息技术管理员的角度来看,云计算使得能够实现呈现出可量测性(例如,根据需要增加或降低资源利用)、性能(例如,高效且快速执行)和可靠性(例如,从来没有、或至少很少失败)的应用的开发和部署,而完全没有对底层基础设施的性质或位置的任何考虑。
在图2中更详细地示出了根据本公开的装置2的实施例的示意图。装置2包括音乐输入部21,例如,麦克风或用于耦接麦克风、用于接收音乐数据4的接口,以及音乐输出部22,例如,扬声器或用于耦接扬声器或合成器的接口(例如音频接口和乐器指令数字化接口),用于输出生成的音乐3作为输入音乐数据4的实时伴奏。
装置2进一步包括音乐分析器23,其分析接收到的音乐数据4以获得包括分析后的音乐数据的一个或多个特性的音乐数据描述24。设置查询生成器25,其接收所述音乐数据描述并生成对音乐数据库5的查询6,如上所述。然而,为了生成所述查询6,查询生成器25不仅使用音乐数据描述24,而且另外使用描述所述实时伴奏的参数选择的伴奏描述26和/或使用描述音乐的一般规则的音乐规则27。
通过使用查询界面28,使用生成的查询6查询音乐数据库5,响应于所述查询,从所述音乐数据库5接收音乐模式7。所述音乐模式7然后被提供到音乐输出部22,用于输出作为音乐模式3的输出。
在图3中示出了根据本公开的用于自动生成音乐的所提出的方法的基本步骤的流程图。在步骤S1中,音乐数据4被接收。在步骤S2中,接收的音乐数据4被分析以获得包括分析的音乐数据的一个或多个特性的音乐数据描述24。在步骤S3中,生成对包括音乐模式的音乐数据库和包括所述音乐模式中的一个或多个特性的相关联的元数据的查询。在步骤S4中,使用所生成的查询6查询音乐数据库5。在步骤S5中,接收通过使用所述查询6从所述音乐数据库5选择的音乐模式7。最后,在步骤S6中,输出接收的音乐模式。
在优选的实施例中,音乐分析器23被配置为获得音乐数据描述,其包括分析的音乐数据的音高、小节、调、速度、能量的分布、平均能量、能量的峰、能量级、风格、和弦、音量、音符的密度、音符的数量、平均音高、平均音程(mean interval,平均间隔)、最高音高、最低音高、音高变化、和声持续时间、旋律持续时间、音程持续时间(interval duration,间隔持续时间)、和弦符号、音阶、和弦引伸(chord extension)、相同调号的根音、音区、乐器类型和曲调中的一个或多个。特定接收的音乐数据部分的音乐数据描述实际上包含上述数据中的哪一个会取决于由其生成所述音乐数据的音乐类型和乐器类型。优选地,音乐分析器23被配置为根据节奏连续地或以规律的间隔(interval),特别地以在从10毫秒(msec)到10秒的范围内的音长(length)的间隔(优选地从100毫秒到4秒))并且以从10毫秒至1秒(优选地从100毫秒到500毫秒)的范围内的时间间隔(distance)分析接收的音乐数据4。用于音乐数据的分析和用于生成音乐数据描述的方法在本领域中一般是已知的并且包括如上所述的方法。
在实施例中,查询生成器25被配置为使用伴奏描述26生成查询6,该伴奏描述描述包括即兴演奏的曲调、即兴演奏的一个或多个乐器、即兴演奏的一个或多个音乐家、即兴演奏的音乐风格和乐器之间的交互的一组参数选择中的一个或多个参数选择。例如,在实施例中,如图2中所示,提供了用户界面29,允许用户输入所述伴奏描述26的一个或多个参数选择。用户可以例如输入他/她想与鼓手(例如,某知名鼓手)演奏的表演和/或将表演/即兴演奏的某首音乐的表演。因此,这个参数选择被包括在伴奏描述26中并且然后将在生成查询6时被查询生成器25使用,使得已经由用户输入某个鼓手的情况下,包含由所述鼓手记录的音乐模式和/或包括存储的模仿所述特定鼓手的风格的音乐模式的对应的音乐数据库用于被查询。
再给出另一个实例,伴奏描述还可包含指示乐器之间的相互作用/影响的参数选择。例如,可定义其中乐器可演奏的模进(sequence)、它们可能会开始/停止演奏的模进、特定乐器将在什么条件下演奏的更大声音或更安静。此外,作为实例,可定义鼓在第一声部(或模进)中应保持恒定,即独立于从其它乐器提取的任何音乐描述符,但是后来应取决于第二声部(或模进)中的贝司的能量级。
在另一个实施例中,查询生成器25被配置为使用描述伴奏应遵循所述输入音乐数据4的哪一个参数的伴奏描述26以用于生成所述查询6。例如,可规定,伴奏应遵循演奏输入音乐数据4的特定乐器的能量。其它实例是贝司应该“向上”或“向下”演奏,这取决于例如吉他独奏的音高范围,或取决于鼓的能量级,可替代地,钢琴应演奏更多或更少音符,这取决于由(人)独奏家演奏的每秒的音符数。
如以上所解释的,由伴奏描述26描述的参数选择可由用户通过用户界面29输入。此外或作为替代的,可通过使用在图2中用虚线示出的伴奏描述生成器31自动生成所述伴奏描述26的一个或多个参数选择。例如,所述伴奏描述生成器31可被配置为自动决定哪些乐器与输入音乐数据4最适合和/或哪些音乐风格应该被即兴演奏以最适合于输入音乐数据4。
作为可替代的或除了伴奏描述之外,查询生成器26使用描述包括优选的变调、非优选的变调、和声、与连续性相关的规则或与表演的整体能量级相关的规则的一组音乐的规则的一个或多个一般的音乐规则27以用于生成查询6。所述音乐规则优选地被存储在音乐规则数据库30中并且通常是预定的(但也可至少部分地由用户设置)。所述音乐规则例如可包括禁止某些变调或限定优选的和声或禁止的不和谐的规则。优选每个乐器、每个音乐家和/或每个音乐风格均定义那些音乐规则,即可在音乐规则数据库30中存在可用的音乐规则的各种子数据库,其可在特定情况下根据需要由查询生成器25访问。
在该上下文中,即在音乐的上下文下,变调通常被理解为中间部分或正式功能,而主要的主旋律是起点,且从属的主旋律是结局。传统的可能是奏鸣曲形式的呈示部(Sonata form's exposition)的一部分,其中作曲家从第一主题的调调节到第二的主题的调,虽然很多经典的时代作品从第一到第二主题组直线移动,而没有任何变调。
更进一步地,在实施例中,查询生成器可被配置为每个即兴演奏的乐器生成查询6。这在图4中示意地描绘。在本实施例中应作为实例,假设三个不同的乐器(例如鼓、贝司和吉他)将即兴演奏来为现场演奏萨克斯管的音乐家伴奏。查询生成器25'因此为即兴演奏的三个不同乐器中的每个生成不同的查询6a、6b、6c。在本实施例中,查询界面28'包括三个查询子界面28a、28b、28c,均用于处理和使用所述三个查询6a、6b、6c中的一个来查询不同音乐数据库5a(包括针对贝司的音乐模式)、5b(包括针对吉他的音乐模式)和5c(包括针对鼓手的音乐模式)。作为响应,接收针对即兴演奏的不同乐器的三个音乐模式7a、7b、7c,其然后由查询界面28'输出到音乐输出部22。
当然,图4中所示的实施例仅应被理解为实例。可能会有更多的可用音乐数据库,例如,针对其它乐器、不同音乐家、不同音乐风格、不同曲调等。如上所述,音乐数据库可供在线出售或在记录载体上使用,使得用户可决定哪个音乐数据库对他/她的目的来说是有用的。例如,在线商店可提供多个音乐数据库,例如,均包括来自不同音乐家的音乐、不同音乐作品、不同风格的艺术处理等。用户可选择一个音乐数据库、下载并将其添加到现有数据库和/或将其保持为单独的数据库。在特定查询中,也可规定哪个特定音乐数据库应由查询界面28'访问,其中查询生成器25'当然优选地知道哪个音乐数据库可用于被查询。
在以上描述中,与生成作为输入音乐数据的实时伴奏的音乐相关的所有可用信息一般用于生成查询,即音乐数据描述24、伴奏描述26和/或音乐规则27通常被用于生成特定查询6。可替代地或另外地,这些数据的部分或所有可用于可选的检查模块32(参见图2),以检查是否从音乐数据库中选择的一个或多个接收的音乐的模式5符合所有规定的标准和/或用于选择最符合包含在音乐数据描述24、伴奏描述26和/或音乐规则27中的所有规定标准的音乐模式。例如,在实施例中,仅音乐数据描述24和伴奏描述可被用于生成查询6,其可导致三种不同音乐模式7的选择。在可选的检查模块32中,音乐规则27然后可额外地用于从三个所选的音乐模式中选择最符合音乐规则27的音乐模式,然后,该音乐模式被提供给输出单元22。
另外地或可替代地,在多于一个音乐模式在响应于查询6被返回的情况下,检查模块32可服务随机选择一个返回的音乐模式来作为输出音乐模式的目的。在其它实施例中,选择可基于一个或多个额外的音乐数据描述项(例如,通过音乐分析器23从输入音乐获得音乐数据描述项,但其不用于查询)。
图5示出了用于生成音乐数据82,特别是用于在上述系统中使用的根据本公开的装置8和用于自动生成音乐,特别是用于自动生成输入音乐数据的实时伴奏的根据本公开的方法的实施例。该装置8包括用于接收音乐(特别是音频数据,由音乐家现场演奏或由音乐家提前录制)的音乐输入部81。接收的音乐数据82被提供到处理单元83,其处理音乐数据82以生成音乐模式84和包括所述音乐模式84的一个或多个特性的相关联的元数据85。所述音乐模式84和相关联的元数据85然后被提供给输出界面86,其将所述音乐模式84和相关联的元数据85记录在音乐数据库5中,其然后被输出,例如存储在记录载体上或存储在服务器(例如网上商店以销售给用户)上。
为了生成音乐数据库,优选的是音乐家以不同风格、不同节奏、不同能量演奏和即兴演奏许多不同的曲调,以具有可用于检索音乐模式和相关联的元数据的可用的许多不同音乐数据,使得演奏和即兴演奏所述音乐家的音乐的方式最好由针对该特定音乐家的存储在音乐数据库5中的数据来表示。可用的音乐数据82优选地在处理单元83中被分段成音乐模式(即短的音频数据片段),其然后被分析以提取音乐模式的特性特征。对于该特性,可使用已知的特征提取算法,例如,如在Pachet,F.和Zils,A.的“Automatic Extraction of Music Descriptors from Acoustic Signals”,编辑X.Serra,ISMIR 2004会议录,第353-356页,巴塞罗那,西班牙,2004年中描述的提取发现系统(EDS)。
因此,可提取相同的(或基本或部分相同)的特性特征,用于由上述的音乐分析器23生成音乐数据描述(或者更确切地说,当数据库5被创建时,相同的特征由音乐分析器23从由处理单元83提取的输入音乐数据提取以描述音乐模式)。特别地,音高、小节、调、速度、能量的分布、平均能量、能量的峰、能量级、风格、和弦、音量、音符的密度、音符的数量、平均音高、平均音程、最高音高、最低音高、音高变化、和声持续时间、旋律持续时间、音程持续时间、和弦符号、音阶、和弦引伸、相同调号的根音、音区、乐器类型和输入音乐数据的曲调中的一个或多个被提取并与对应的音乐模式一起被存储为元数据。音乐模式通常是具有从100毫秒至几秒的范围内的时间长度的小音乐片段。优选地,音乐变调使人具有很大兴趣且主要与对应的元数据一起作为音乐模式存储在音乐数据库中。
在下文中,提供了示出数据库项和查询的实例的音乐数据库的实例。钢琴曲目数据库的提取可如下:
小节索引 | 能量 | 击打次数 | 调性 | 风格 |
… | … | ... | … | … |
121 | 0.56 | 2 | C | 琶音 |
122 | 0.12 | 2 | D | 连奏和弦 |
123 | 0.26 | 4 | C | 琶音 |
124 | 0.16 | 4 | C | 连奏和弦 |
125 | 0.21 | 3 | C | 连奏和弦 |
126 | 0.4 | 4 | C小调 | 琶音 |
… | … | ... | … | … |
应假设系统需要具有低能量和连奏演奏的和弦的调性C(大调)中的小节。对应的查询应是:SELECT(TONALITY=C;ENERGY<0.25;STYLE=“LEGATO CHORDS”)。结果会是:小节124和小节125。小节124和小节125之间的选择可取决于由钢琴演奏的之前的小节。例如,如果立即在小节122之前,然后124小节演奏的钢琴优选地作为122与124之间的能量差,|0.16-0.12|=0.04小于122与125之间的能量差,其为|0.21-0.12|=0.09,且这使连续性最大化。
通过本公开,提供了用于生成音乐数据库的装置和方法,该音乐数据库用于在用于自动生成音乐的装置和方法中使用,特别在用于自动生成音乐作为输入音乐数据的实时伴奏的装置和方法中使用,其能够实现与输入音乐数据起作用并提供比已知系统和方法更好的伴奏。通过根据本公开生成的音乐数据库,特别可能的是提供输入音乐的实时分析和其是灵活的且适应于由现场音乐家演奏的音乐的伴奏的实时生成,即使现场音乐家改变他或她的音乐或音乐风格,或他/她当前正在演奏的任何其它相关特征,本公开的系统相应地做出反应。没有必要手动设置许多参数,且本公开的系统和方法不严格遵循由用户预先设置的特定参数,但本公开的方法和系统提供更优化和天然的伴奏。
在权利要求中,单词“包括(comprising)”不排除其它元件或步骤,且不定冠词“一(a)”或“一个(an)”不排除多个。单个元件或其它单元可实现权利要求中记载的几项的功能。某些措施被记载在相互不同的从属权利要求中的单纯事实不代表这些措施的组合不可被有利地使用。
计算机程序可被存储/分布在合适的非临时性介质上,诸如光学存储介质或与其它硬件一起提供的或作为其一部分的固态介质,但也可以其它形式分布,诸如经由互联网或其它有线或无线电信系统。
权利要求中的任何附图标记不应当被解释为限制范围。
因此,前述讨论仅公开和描述了本公开的示例实施例。如本领域的技术人员应理解的,在不脱离本公开的精神或其基本特性的情况下,本公开可以其它特定形式来体现。因此,本公开的公开内容旨在是说明性的,而不是限制本公开以及其它权利要求的范围。本公开包括本文的教导的任何容易辨别的变化的部分限定前述权利要求术语的范围,使得非创造性的主题专用于公众。
本申请要求于2012年6月4日在欧洲专利局提交的欧洲专利申请第12 170 706.1号和于2012年11月28日在欧洲专利局提交的第12 194 679.2号的权益,其全部内容通过引用的方式并入本文中。
以下是另外的实施例的列表:
1.一种用于自动生成输入音乐数据的实时伴奏的装置,所述装置包括:
-音乐输入部,接收音乐数据;
-音乐分析器,分析接收到的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述;
-查询生成器,生成对包括音乐模式和相关联的元数据的音乐数据库的查询,所述相关联的元数据包括所述音乐模式的一个或多个特性,从所述音乐数据描述和从描述所述实时伴奏的参数选择的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询;
-查询界面,使用生成的查询来查询所述音乐数据库并且接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-音乐输出部,输出所述接收的音乐模式。
2.如实施例1中所定义的装置,
其中,所述音乐分析器被配置为获得音乐数据描述,所述音乐数据描述包括所述分析的音乐数据的一个或多个小节、调、速度、能量的分布、平均能量、能量的峰、能量级、风格、和弦、音量、音符的密度、音符的数量、平均音高、平均音程、最高音高、最低音高、音高变化、和声持续时间、旋律持续时间、音程持续时间、和弦符号、音阶、和弦引伸、相同调号的根音、音区、一个或多个乐器的类型以及曲调中的一个或多个。
3.如任何前述实施例中所定义的装置,
其中,所述音乐分析器被配置为连续地分析接收的音乐数据。
4.如实施例1或2中所定义的装置,
其中,所述音乐分析器被配置为以规律的间隔分析接收到的音乐数据,特别地以从10毫秒至10秒的范围内的音长的间隔和以从10毫秒至1秒的范围内的时间间隔。
5.如任何前述实施例中所定义的装置,
其中,所述查询生成器被配置为使用伴奏描述以生成所述查询,所述伴奏描述描述包括即兴演奏的曲调、即兴演奏的一个或多个乐器、即兴演奏的一个或多个音乐家、即兴演奏的音乐风格和乐器之间的相互作用的一组参数选择中的一个或多个参数选择。
6.如任何前述实施例中所定义的装置,
其中,所述查询生成器被配置为使用伴奏描述以生成所述查询,所述伴奏描述描述伴奏应遵循所述输入数据的哪一个参数。
7.如任何前述实施例中所定义的装置,
其中,所述查询生成器被配置为使用音乐规则以生成所述查询,所述音乐规则描述包括优选的变调、非优选的变调、和声、与连续性相关的规则或与表演的整体能量级(global energy level)相关的规则的一组规则的一个或多个音乐的一般规则。
8.如任何前述实施例中所定义的装置,
其中,所述查询生成器被配置为使用每个乐器、每个音乐家和/或每个音乐风格的音乐规则以生成所述查询。
9.如任何前述实施例中所定义的装置,
其中,所述查询生成器被配置为生成即兴演奏的每个乐器的查询(6a、6b、6c)。
10.如任何前述实施例中所定义的装置,
进一步包括用户界面,其允许用户输入所述伴奏描述的一个或多个参数选择。
11.如任何前述实施例中所定义的装置,
进一步包括伴奏描述生成器,所述伴奏描述生成器从所述输入音乐数据自动地生成所述伴奏描述的一个或多个参数选择。
12.如任何前述实施例中所定义的装置,
进一步包括音乐规则数据库,存储所述音乐规则。
13.如任何前述实施例中所定义的装置,
进一步包括检查模块,所述检查模块用于检查与所述音乐数据描述、所述伴奏描述和/或所述音乐规则相对的一个或多个选择的一个或多个音乐模式。
14.一种用于自动生成输入音乐数据的实时伴奏的方法,所述方法包括
-接收音乐数据;
-分析接收的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述;
-生成对包括音乐模式和相关联的元数据的音乐数据库的查询,所述相关联的元数据包括所述音乐模式的一个或多个特性,从所述音乐数据描述和从描述所述实时伴奏的参数选择的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询;
-使用生成的查询来查询所述音乐数据库;
-接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-输出所述接收的音乐模式。
15.一种计算机程序,其包括程序代码手段,其用于在所述计算机程序在计算机上被执行时使计算机进行如实施例14中所定义的所述方法的步骤。
16.一种计算机可读的非临时性介质,其具有存储于其上的指令,当在计算机上执行时,所述指令使计算机进行如实施例14中所定义的方法的步骤。
17.一种用于自动生成输入音乐数据的实时伴奏的系统,所述系统包括:
-如实施例1至13中任一项所定义的装置,自动生成作为输入音乐数据的实时伴奏的音乐;以及
-音乐数据库,包括音乐模式和相关联的元数据,所述相关联的元数据包括所述音乐模式的一个或多个特性,所述音乐数据库被配置用于通过使用查询而被所述装置查询并且用于提供通过使用所述查询从所述音乐数据库选择的音乐模式。
18.如实施例17中所定义的系统,
进一步包括装置,其生成所述音乐数据库。
19.如实施例17或18中所定义的系统,
进一步包括云,所述云包括自动生成音乐的装置、所述音乐数据库和生成所述音乐数据库的所述装置中的至少一个。
20.一种用于生成音乐数据库的装置,所述音乐数据库用于在用于自动生成音乐的装置和方法中使用,所述装置包括:
-音乐输入部,接收音乐数据;
-处理单元,将所述音乐数据分段为音乐模式并且提取所述音乐模式的多个特性作为所述音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-音乐输出部,将所述音乐模式和相关联的元数据存储在所述音乐数据库中。
21.如实施例20中所定义的装置,
其中,所述处理单元被配置为提取作为小节、音调、速度、能量的分布、平均能量、能量的峰、能量级、风格、和弦、音量、音符密度、音符数、平均音高、平均音程、最高音高、最低音高、音高变化、和声持续时间、旋律持续时间、音程持续时间、和弦符号、音阶、和弦引伸、相同调号的根音、音区、乐器类型和曲调中的一个或多个的其它特性。
22.如实施例20至21中的任何前述实施例中所定义的装置,
其中,所述处理单元被配置为应用特性提取算法,特别提取发现系统算法,以用于音乐模式的特性的提取。
23.如实施例20至22中的任何前述实施例中所定义的装置,
其中,所述处理单元被配置为以规律的间隔分析接收的音乐数据,特别地以从10毫秒到10秒的范围内的音长的间隔和以从1毫秒至1秒的范围内的时间间隔。
24.如实施例20至23中的任何前述实施例中所定义的装置,
其中,所述处理单元被配置为选择所述接收的音乐数据的变调,以使用所述变调作为音乐模式并且用于提取音乐模式的多个特性作为所述变调的元数据。
25.一种用于生成音乐数据库的方法,所述音乐数据库用于在用于自动生成音乐的装置和方法中使用,所述方法包括:
-接收音乐数据;
-将所述音乐数据分段为音乐模式;
-提取所述音乐模式的多个特性作为所述音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-将所述音乐模式和相关联的元数据存储在音乐数据库中。
26.一种计算机程序,其包括程序代码手段,其用于在计算机程序在计算机上被执行时使所述计算机进行如实施例25中所定义的所述方法的步骤。
27.一种计算机可读的非临时性介质,其具有存储于其上的指令,当在计算机上执行时,所述指令使计算机进行如实施例25中所定义的方法的步骤。
28.一种音乐数据库,其包括:
-音乐模式,包括从音乐数据分段的音乐的分段;以及
-元数据,包括所述音乐模式的多个特性,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高。
29.如实施例28中所定义的音乐数据库,
包括从由相同音乐家演奏的音乐的获得的音乐模式。
30.如实施例28中所定义的音乐数据库,
包括从由不同音乐家演奏的音乐的获得的音乐模式。
31.如实施例28中所定义的音乐数据库,
包括以一种或多种音乐风格演奏的相同音乐曲调获得的音乐模式。
32.一种计算机可读的记录载体,其存储如实施例18中所定义的音乐数据库。
33.在用于自动生成作为输入音乐数据的实时即兴演奏的音乐的方法或装置中使用根据实施例28所述的音乐数据库。
Claims (21)
1.一种用于自动生成输入音乐数据的实时伴奏的装置,所述装置包括:
-音乐输入部,接收音乐数据;
-音乐分析器,分析接收到的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述;
-查询生成器,生成对包括音乐模式和相关联的元数据的音乐数据库的查询,所述相关联的元数据包括所述音乐模式的一个或多个特性,从所述音乐数据描述和从描述所述实时伴奏的参数选择的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询;
-查询界面,使用生成的查询来查询所述音乐数据库并且接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-音乐输出部,输出所接收的音乐模式。
2.根据权利要求1所述的装置,
其中,所述音乐分析器被配置为获得音乐数据描述,所述音乐数据描述包括所述分析的音乐数据的一个或多个小节、调、速度、能量的分布、平均能量、能量的峰、能量级、风格、和弦、音量、音符的密度、音符的数量、平均音高、平均音程、最高音高、最低音高、音高变化、和声持续时间、旋律持续时间、音程持续时间、和弦符号、音阶、和弦引伸、相同调号的根音、音区、一个或多个乐器的类型以及曲调中的一个或多个。
3.根据权利要求1所述的装置,
其中,所述音乐分析器被配置为以规律的间隔分析接收到的音乐数据,特别地以从10毫秒至10秒范围内的音长的间隔和以从10毫秒至1秒的范围内的时间间隔。
4.根据权利要求1所述的装置,
其中,所述查询生成器被配置为使用伴奏描述以生成所述查询,所述伴奏描述描述包括即兴演奏的曲调、即兴演奏的一个或多个乐器、即兴演奏的一个或多个音乐家、即兴演奏的音乐风格和乐器之间的相互作用的一组参数选择中的一个或多个参数选择。
5.根据权利要求1所述的装置,
其中,所述查询生成器被配置为使用伴奏描述以生成所述查询,所述伴奏描述描述伴奏应遵循所述输入数据中的哪一个参数。
6.根据权利要求1所述的装置,
其中,所述查询生成器被配置为使用音乐规则以生成所述查询,所述音乐规则描述包括优选的变调、非优选的变调、和声、与连续性相关的规则或与表演的整体能量级相关的规则的一组规则中的一个或多个音乐的一般规则。
7.根据权利要求1所述的装置,
其中,所述查询生成器被配置为使用每个乐器、每个音乐家和/或每个音乐风格的音乐规则以生成所述查询。
8.根据权利要求1所述的装置,
其中,所述查询生成器被配置为生成即兴演奏的每个乐器的查询。
9.根据权利要求1所述的装置,
进一步包括伴奏描述生成器,所述伴奏描述生成器从所述输入音乐数据自动地生成所述伴奏描述的一个或多个参数选择。
10.根据权利要求1所述的装置,
进一步包括检查模块,所述检查模块用于检查与所述音乐数据描述、所述伴奏描述和/或所述音乐规则相对的一个或多个选择的音乐模式。
11.一种用于自动生成输入音乐数据的实时伴奏的方法,所述方法包括:
-接收音乐数据;
-分析接收的音乐数据以获得包括分析的音乐数据的一个或多个特性的音乐数据描述;
-生成对包括音乐模式和相关联的元数据的音乐数据库的查询,所述相关联的元数据包括所述音乐模式的一个或多个特性,从所述音乐数据描述和从描述所述实时伴奏的参数选择的伴奏描述和/或描述音乐的一般规则的音乐规则生成所述查询;
-使用生成的查询来查询所述音乐数据库;
-接收通过使用所述查询从所述音乐数据库选择的音乐模式;以及
-输出所接收的音乐模式。
12.一种用于自动生成输入音乐数据的实时伴奏的系统,所述系统包括:
-根据权利要求1至13中任一项定义的装置,自动地生成作为输入音乐数据的实时伴奏的音乐;以及
-音乐数据库,包括音乐模式和相关联的元数据,所述相关联的元数据包括所述音乐模式的一个或多个特性,所述音乐数据库被配置用于通过使用查询而被所述装置查询并且用于提供通过使用所述查询从所述音乐数据库选择的音乐模式。
13.根据权利要求12所述的系统,
进一步包括云,所述云包括自动生成音乐的装置、所述音乐数据库和生成所述音乐数据库的所述装置中的至少一个。
14.一种用于生成音乐数据库的装置,所述音乐数据库用于在用于自动生成音乐的装置和方法中使用,所述装置包括:
-音乐输入部,接收音乐数据;
-处理单元,将所述音乐数据分段为音乐模式并且提取所述音乐模式的多个特性作为所述音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-音乐输出部,将所述音乐模式和相关联的元数据存储在所述音乐数据库中。
15.一种用于生成音乐数据库的方法,所述音乐数据库用于在用于自动生成音乐的装置和方法中使用,所述方法包括:
-接收音乐数据;
-将所述音乐数据分段为多个音乐模式;
-提取音乐模式的多个特性作为该音乐模式的元数据,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高;
-将多个音乐模式和相关联的元数据存储在音乐数据库中。
16.一种计算机程序,包括程序代码手段,当在计算机上执行所述计算机程序时,所述程序代码手段用于使计算机执行根据权利要求11或15所述的方法的步骤。
17.一种计算机可读的非临时性介质,具有存储在其上的指令,当在计算机上执行所述指令时使所述计算机执行根据权利要求11或15所述的方法的步骤。
18.一种音乐数据库,包括:
-多个音乐模式,包括从音乐数据分段的音乐的多个分段;以及
-元数据,包括音乐模式的多个特性,所述特性包括音乐模式的至少和弦、每拍和/或小节的能量、音符的密度和音高。
19.根据权利要求18所述的音乐数据库,
包括:从由相同的音乐家、由不同的音乐家演奏演奏的音乐或由不同的音乐家以一种或多种音乐风格演奏的相同的音乐曲调获得的多个音乐模式。
20.一种计算机可读记录载体,存储根据权利要求18所述的音乐数据库。
21.在用于自动生成作为输入音乐数据的实时即兴演奏的音乐的方法或装置中使用根据权利要求18所述的音乐数据库。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP12170706 | 2012-06-04 | ||
EP12170706.1 | 2012-06-04 | ||
EP12194679 | 2012-11-28 | ||
EP12194679.2 | 2012-11-28 | ||
PCT/EP2013/061372 WO2013182515A2 (en) | 2012-06-04 | 2013-06-03 | Device, system and method for generating an accompaniment of input music data |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104380371A true CN104380371A (zh) | 2015-02-25 |
CN104380371B CN104380371B (zh) | 2020-03-20 |
Family
ID=48607226
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380029343.4A Active CN104380371B (zh) | 2012-06-04 | 2013-06-03 | 用于生成输入音乐数据的伴奏的装置、系统和方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US9798805B2 (zh) |
CN (1) | CN104380371B (zh) |
WO (1) | WO2013182515A2 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110402464A (zh) * | 2017-03-22 | 2019-11-01 | 雅马哈株式会社 | 变调装置、变调方法及程序 |
CN112955948A (zh) * | 2018-09-25 | 2021-06-11 | 宅斯楚蒙特公司 | 用于实时音乐生成的乐器和方法 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IES86526B2 (en) | 2013-04-09 | 2015-04-08 | Score Music Interactive Ltd | A system and method for generating an audio file |
US10032443B2 (en) * | 2014-07-10 | 2018-07-24 | Rensselaer Polytechnic Institute | Interactive, expressive music accompaniment system |
EP4218975A3 (en) * | 2015-05-19 | 2023-08-30 | Harmonix Music Systems, Inc. | Improvised guitar simulation |
GB2538994B (en) | 2015-06-02 | 2021-09-15 | Sublime Binary Ltd | Music generation tool |
NO340707B1 (en) * | 2015-06-05 | 2017-06-06 | Qluge As | Methods, devices and computer program products for interactive musical improvisation guidance |
US10424280B1 (en) | 2018-03-15 | 2019-09-24 | Score Music Productions Limited | Method and system for generating an audio or midi output file using a harmonic chord map |
SE1851056A1 (en) | 2018-09-05 | 2020-03-06 | Spotify Ab | System and method for non-plagiaristic model-invariant training set cloning for content generation |
US11812240B2 (en) * | 2020-11-18 | 2023-11-07 | Sonos, Inc. | Playback of generative media content |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5218153A (en) * | 1990-08-30 | 1993-06-08 | Casio Computer Co., Ltd. | Technique for selecting a chord progression for a melody |
US5510572A (en) * | 1992-01-12 | 1996-04-23 | Casio Computer Co., Ltd. | Apparatus for analyzing and harmonizing melody using results of melody analysis |
WO2002077853A1 (en) * | 2001-03-27 | 2002-10-03 | Tauraema Iraihamata Eruera | Composition assisting device |
CN101796587A (zh) * | 2007-09-07 | 2010-08-04 | 微软公司 | 声音旋律的自动伴奏 |
CN102760428A (zh) * | 2011-04-21 | 2012-10-31 | 雅马哈株式会社 | 使用表示乐音生成模式的查询的演奏数据搜索 |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2638021B2 (ja) | 1987-12-28 | 1997-08-06 | カシオ計算機株式会社 | 自動伴奏装置 |
DE8915063U1 (de) | 1989-12-22 | 1991-04-25 | Behr-Thomson Dehnstoffregler GmbH & Co, 7014 Kornwestheim | Thermostatventil |
US5451709A (en) | 1991-12-30 | 1995-09-19 | Casio Computer Co., Ltd. | Automatic composer for composing a melody in real time |
JP3356182B2 (ja) * | 1992-02-07 | 2002-12-09 | ヤマハ株式会社 | 作編曲アシスト装置 |
DE69426588T2 (de) * | 1993-10-08 | 2001-08-23 | Yamaha Corp., Hamamatsu | Elektronische Musikvorrichtung |
US5627335A (en) * | 1995-10-16 | 1997-05-06 | Harmonix Music Systems, Inc. | Real-time music creation system |
US5990407A (en) * | 1996-07-11 | 1999-11-23 | Pg Music, Inc. | Automatic improvisation system and method |
JP3728814B2 (ja) * | 1996-07-23 | 2005-12-21 | ヤマハ株式会社 | 自動伴奏装置 |
AUPP547898A0 (en) * | 1998-08-26 | 1998-09-17 | Canon Kabushiki Kaisha | System and method for automatic music generation |
GB9918611D0 (en) * | 1999-08-07 | 1999-10-13 | Sibelius Software Ltd | Music database searching |
US7305273B2 (en) * | 2001-03-07 | 2007-12-04 | Microsoft Corporation | Audio generation system manager |
EP1274069B1 (en) | 2001-06-08 | 2013-01-23 | Sony France S.A. | Automatic music continuation method and device |
EP1326228B1 (en) * | 2002-01-04 | 2016-03-23 | MediaLab Solutions LLC | Systems and methods for creating, modifying, interacting with and playing musical compositions |
TWI244838B (en) * | 2002-01-07 | 2005-12-01 | Compal Electronics Inc | Method of karaoke by network system |
JP3843841B2 (ja) * | 2002-01-10 | 2006-11-08 | ヤマハ株式会社 | 電子楽器 |
AU2003275290B2 (en) * | 2002-09-30 | 2008-09-11 | Verax Technologies Inc. | System and method for integral transference of acoustical events |
JP2004287099A (ja) * | 2003-03-20 | 2004-10-14 | Sony Corp | 歌声合成方法、歌声合成装置、プログラム及び記録媒体並びにロボット装置 |
US7109406B2 (en) * | 2003-10-10 | 2006-09-19 | Stone Christopher L | System and method for dynamic note assignment for musical synthesizers |
US7227074B2 (en) * | 2004-09-24 | 2007-06-05 | Microsoft Corporation | Transport control for initiating play of dynamically rendered audio content |
US20070137467A1 (en) * | 2005-12-19 | 2007-06-21 | Creative Technology Ltd. | Portable media player |
US7842874B2 (en) * | 2006-06-15 | 2010-11-30 | Massachusetts Institute Of Technology | Creating music by concatenative synthesis |
KR100765803B1 (ko) * | 2006-07-26 | 2007-10-12 | 주식회사 엔터기술 | 실시간 저장 및 재생기능을 구비한 영상 노래반주기 |
US20080167739A1 (en) * | 2007-01-05 | 2008-07-10 | National Taiwan University Of Science And Technology | Autonomous robot for music playing and related method |
US20080300702A1 (en) * | 2007-05-29 | 2008-12-04 | Universitat Pompeu Fabra | Music similarity systems and methods using descriptors |
US8097801B2 (en) | 2008-04-22 | 2012-01-17 | Peter Gannon | Systems and methods for composing music |
DE102008039967A1 (de) * | 2008-08-27 | 2010-03-04 | Breidenbrücker, Michael | Verfahren zum Betrieb eines elektronischen Klangerzeugungsgerätes und zur Erzeugung kontextabhängiger musikalischer Kompositionen |
US8088985B1 (en) * | 2009-04-16 | 2012-01-03 | Retinal 3-D, L.L.C. | Visual presentation system and related methods |
JP5594052B2 (ja) * | 2010-10-22 | 2014-09-24 | ソニー株式会社 | 情報処理装置、楽曲再構成方法及びプログラム |
JP5701011B2 (ja) * | 2010-10-26 | 2015-04-15 | ローランド株式会社 | 電子楽器 |
US8907195B1 (en) * | 2012-01-14 | 2014-12-09 | Neset Arda Erol | Method and apparatus for musical training |
US9721551B2 (en) * | 2015-09-29 | 2017-08-01 | Amper Music, Inc. | Machines, systems, processes for automated music composition and generation employing linguistic and/or graphical icon based musical experience descriptions |
-
2013
- 2013-06-03 CN CN201380029343.4A patent/CN104380371B/zh active Active
- 2013-06-03 US US14/401,311 patent/US9798805B2/en active Active
- 2013-06-03 WO PCT/EP2013/061372 patent/WO2013182515A2/en active Application Filing
-
2017
- 2017-10-11 US US15/730,366 patent/US11574007B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5218153A (en) * | 1990-08-30 | 1993-06-08 | Casio Computer Co., Ltd. | Technique for selecting a chord progression for a melody |
US5510572A (en) * | 1992-01-12 | 1996-04-23 | Casio Computer Co., Ltd. | Apparatus for analyzing and harmonizing melody using results of melody analysis |
WO2002077853A1 (en) * | 2001-03-27 | 2002-10-03 | Tauraema Iraihamata Eruera | Composition assisting device |
CN101796587A (zh) * | 2007-09-07 | 2010-08-04 | 微软公司 | 声音旋律的自动伴奏 |
CN102760428A (zh) * | 2011-04-21 | 2012-10-31 | 雅马哈株式会社 | 使用表示乐音生成模式的查询的演奏数据搜索 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110402464A (zh) * | 2017-03-22 | 2019-11-01 | 雅马哈株式会社 | 变调装置、变调方法及程序 |
CN112955948A (zh) * | 2018-09-25 | 2021-06-11 | 宅斯楚蒙特公司 | 用于实时音乐生成的乐器和方法 |
Also Published As
Publication number | Publication date |
---|---|
US20180046709A1 (en) | 2018-02-15 |
CN104380371B (zh) | 2020-03-20 |
US9798805B2 (en) | 2017-10-24 |
US11574007B2 (en) | 2023-02-07 |
US20150127669A1 (en) | 2015-05-07 |
WO2013182515A2 (en) | 2013-12-12 |
WO2013182515A3 (en) | 2014-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104380371A (zh) | 用于生成输入音乐数据的伴奏的装置、系统和方法 | |
Dannenberg et al. | A comparative evaluation of search techniques for query‐by‐humming using the MUSART testbed | |
Orio | Music retrieval: A tutorial and review | |
Casey et al. | Content-based music information retrieval: Current directions and future challenges | |
Logan et al. | A Music Similarity Function Based on Signal Analysis. | |
Lidy et al. | On the suitability of state-of-the-art music information retrieval methods for analyzing, categorizing and accessing non-western and ethnic music collections | |
EP2096626A1 (en) | Method for visualizing audio data | |
CN102053998A (zh) | 一种利用声音方式检索歌曲的方法及系统装置 | |
US20160196812A1 (en) | Music information retrieval | |
US11271993B2 (en) | Streaming music categorization using rhythm, texture and pitch | |
Goto et al. | Recent studies on music information processing | |
KR20180025084A (ko) | 음원 제공 서버의 불특정 다수에 의한 음원 제작 방법, 음원 제공 서버 및 음원 제작 단말 | |
Abreu et al. | Computer-aided musical orchestration using an artificial immune system | |
Dannenberg et al. | Panel: new directions in music information retrieval | |
Smith | A comparison and evaluation of approaches to the automatic formal analysis of musical audio | |
Herrera et al. | SIMAC: Semantic interaction with music audio contents | |
Müller et al. | Content-based audio retrieval | |
Van Balen | Automatic recognition of samples in musical audio | |
Leman et al. | Tendencies, perspectives, and opportunities of musical audio-mining | |
Herrera et al. | A proposal for the description of audio in the context of MPEG-7 | |
KR102122195B1 (ko) | 인공지능 합주 시스템 및 인공지능 합주 방법 | |
Tzanetakis et al. | Music analysis and retrieval systems for audio signals | |
KR102165940B1 (ko) | Cbmr 기반 음을 이용한 음악 검색 서비스 제공 시스템 및 방법 | |
Tian | A cross-cultural analysis of music structure | |
Lemström et al. | Music information retrieval |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |