CN115050344A - 一种根据图像生成音乐的方法及终端 - Google Patents
一种根据图像生成音乐的方法及终端 Download PDFInfo
- Publication number
- CN115050344A CN115050344A CN202210653028.XA CN202210653028A CN115050344A CN 115050344 A CN115050344 A CN 115050344A CN 202210653028 A CN202210653028 A CN 202210653028A CN 115050344 A CN115050344 A CN 115050344A
- Authority
- CN
- China
- Prior art keywords
- information
- scale
- note
- music score
- generating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000006243 chemical reaction Methods 0.000 claims abstract description 7
- 238000004590 computer program Methods 0.000 claims description 8
- 230000001965 increasing effect Effects 0.000 claims description 6
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 239000003550 marker Substances 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 9
- 238000010422 painting Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 230000033764 rhythmic process Effects 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 230000001020 rhythmical effect Effects 0.000 description 1
- 125000006850 spacer group Chemical group 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10G—REPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
- G10G3/00—Recording music in notation form, e.g. recording the mechanical operation of a musical instrument
- G10G3/04—Recording music in notation form, e.g. recording the mechanical operation of a musical instrument using electrical means
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
- G10H7/002—Instruments in which the tones are synthesised from a data store, e.g. computer organs using a common processing for different operations or calculations, and a set of microinstructions (programme) to control the sequence thereof
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
- G10H7/08—Instruments in which the tones are synthesised from a data store, e.g. computer organs by calculating functions or polynomial approximations to evaluate amplitudes at successive sample points of a tone waveform
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Optimization (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Analysis (AREA)
- Algebra (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Auxiliary Devices For Music (AREA)
Abstract
本发明提供了一种根据图像生成音乐的方法及终端，包括步骤：通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值；根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱；本发明将乐谱细分为音阶、音级、时值以及出现顺序，根据用户绘图过程中产生的图像的图形信息、颜色信息以及绘制顺序信息得到细分后乐谱的各个部分，再将各个部分拼接成为一个完整的乐谱，加强了最终生成的乐谱与图像之间的关联关系，为用户提供更深的参与感，并且因保存乐谱时的粒度较细，也方便了后续用户对乐谱的修改。
Description
技术领域
本发明涉及信号处理领域，尤其涉及一种根据图像生成音乐的方法及终端。
背景技术
现有的幼儿早教和青少年时期的教育常常会忽略音乐素养的培养，而枯燥的乐理知识学习和简单的歌曲演唱练习通常也无法勾起孩子的兴趣，从而影响到自小的乐感培养；并且现有虽然有一些将图形转换成相应音乐的方法，但设置较为简单，与幼儿和青少年在绘画时发散的想象力不匹配，也就无法引起兴趣，从而错过最好的音乐扫盲年龄段，无法进一步进行音乐潜能的培养。
发明内容
本发明所要解决的技术问题是：提供一种根据图像生成音乐的方法及终端，实现将图像变为音乐。
为了解决上述技术问题，本发明采用的一种技术方案为：
一种根据图像生成音乐的方法，包括步骤：
通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；
判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值；
根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱。
为了解决上述技术问题，本发明采用的另一种技术方案为：
一种根据图像生成音乐的终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；
判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值；
根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱。
本发明的有益效果在于：将乐谱细分为音阶、音级、时值以及出现顺序，根据用户绘图过程中产生的图像的图形信息、颜色信息以及绘制顺序信息得到细分后乐谱的各个部分，再将各个部分拼接成为一个完整的乐谱，将乐谱和用户绘制的图像通过细节对应，加强了最终生成的乐谱与图像之间的关联关系，为用户提供更深的参与感，并且因保存乐谱时的粒度较细，也方便了后续用户对乐谱的修改。
附图说明
图1为本发明实施例的一种根据图像生成音乐的方法的步骤流程图；
图2-10为本发明实施例的一种根据图像生成音乐的方法的实例示意图；
图11为本发明实施例的一种根据图像生成音乐的终端的结构示意图；
标号说明：
1、一种根据图像生成音乐的终端；2、处理器；3、存储器。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果，以下结合实施方式并配合附图予以说明。
请参照图1，一种根据图像生成音乐的方法，包括步骤：
通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；
判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值；
根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱。
从上述描述可知，本发明的有益效果在于：将乐谱细分为音阶、音级、时值以及出现顺序，根据用户绘图过程中产生的图像的图形信息、颜色信息以及绘制顺序信息得到细分后乐谱的各个部分，再将各个部分拼接成为一个完整的乐谱，将乐谱和用户绘制的图像通过细节对应，加强了最终生成的乐谱与图像之间的关联关系，为用户提供更深的参与感，并且保证了乐谱的可欣赏性，同时，因保存乐谱时的粒度较细，也方便了用户对乐谱的修改。
进一步地，所述绘制顺序信息为所述图形信息或所述颜色信息对应的绘制顺序；
所述根据所述图形信息以及颜色信息得到音阶、音级以及时值包括：
根据所述图形信息得到第一音级及第一时值；
根据所述颜色信息得到第二音级及第二音阶；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱包括：
根据所述第一音级以及第一时值得到第一音符；
根据所述第二音级以及第二音阶得到第二音符；
根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱。
由上述描述可知，将图形和颜色分别生成对应的音符，并且根据图形和颜色被用户绘制的顺序将音符排列得到目标乐谱，则用户在绘制图像时的每个操作都能够直接匹配到对应的音符，可通过绘图进行乐谱的创作，提升探索的乐趣。
进一步地，所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之前包括：
获取默认音阶以及默认时值；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱还包括：
根据所述第一音级、第一时值以及默认音阶得到第一音符；
根据所述第二音级、第二音阶以及默认时值得到第二音符；
根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱。
由上述描述可知，预先设定了默认音阶和默认时值，对缺少相应属性的音符进行填充，在保证音符完整性的情况下，确保了最终生成的乐谱的规范和可欣赏性。
进一步地，所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之前包括：
获取所述图形信息对应的第一绘制顺序信息；
获取所述颜色信息对应的第二绘制顺序信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱包括：
根据所述音阶、音级、时值以及第一绘制顺序信息得到第一乐谱；
根据所述音阶、音级、时值以及第二绘制顺序信息得到第二乐谱；
拼接所述第一乐谱以及第二乐谱生成目标乐谱。
由上述描述可知，根据图形的绘制顺序生成对应的第一乐谱，根据颜色信息的绘制顺序生成对应的第二乐谱，能够得到一个音符排列顺序不同的目标乐谱，提供给用户更多选择，并且将绘制顺序信息在最后分类型进行处理，能够提高乐谱的生成效率。
进一步地，所述根据所述图形信息得到第一音级及第一时值包括：
根据所述图形信息判断图形类型，所述图形类型包括封闭式图形和开放式图形；
若所述图形信息对应的图形类型为封闭式图形，则根据预设第一音级对照表获取所述第一音级；
若所述图形信息对应的图形类型为开放式图形，则根据预设第二音级对照表获取所述第一音级。
由上述描述可知，进一步封闭式图形和开放式图形区分，封闭式图形如圆形、矩形、三角形等，是能够计算面积的图形，开放式图形如曲线及直线，没有对应的面积；将图形信息进一步细分，丰富了目标乐谱的调式，避免目标乐谱中调式过于单一的情况。
进一步地，所述根据所述颜色信息得到第二音级及第二音阶包括：
根据所述颜色信息获取颜色类型及颜色明度；
根据所述颜色类型以及预设第三音级对照表得到所述第二音级；
根据所述颜色明度以及预设第一音阶对照表得到第二音阶。
由上述描述可知，将颜色信息拆分为颜色类型和明度，分别与音级和音阶对应，还可以加入色块面积，根据色块面积确定第二时值，进一步减少音符中需要预设的属性，使得音符的生成更加随机，则最终得到的目标乐谱可以更加具有多变性，激发用户的好奇心和动力。
进一步地，还包括接收节拍信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱还包括：
根据所述第一音符、第二音符、绘制顺序信息以及节拍信息填充乐谱小节，生成目标乐谱。
由上述描述可知，根据预设的节拍将音符填充进乐谱小节中，使得最终的目标乐谱更加具有节奏感，节拍信息可以用户自定义，也可以在根据用户的绘制过程得到乐谱后，匹配一个最适配的节拍。
进一步地，还包括接收填词信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之后包括：
匹配所述填词信息与所述目标乐谱，得到每一个字与每一个音符的对应关系，所述音符包括所述第一音符或第二音符；
判断所述字的语调是否和所述音符匹配，若否，则将所述音符对应的音阶升高或降低预设高度后，返回判断所述字的语调是否和所述音符匹配的步骤；若是，则显示带有所述填词信息的所述目标乐谱。
由上述描述可知，在生成目标乐谱之后，用户还可进行填词，填词信息中的字与音符进行匹配，因汉字带有语调，若语调与音符不匹配会带来歌词听不清、歌词含义表达不清等问题，在生成最终的匹配关系之前，根据填词的语调对音符的音阶进行修改，使得最终字的语调和音符更加匹配，提升用户的演唱体验。
进一步地，还包括接收标记信息；
所述根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱之前包括：
根据所述标记信息修改所述第一音符或第二音符。
由上述描述可知，在完整的创作过程中，音符通常还对应很多标记，如渐强、渐弱、附点、休止符等，可通过用户自定义的方法接收标记信息，也可根据用户的操作生成对应的标记信息，如判断用户在两次绘制操作之间的停顿大于预设值则标记一个休止符，用户在绘制结束后笔尖未离开绘板大于预设值则标记一个附点等。
请参照图2，一种根据图像生成音乐的终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的一种根据图像生成音乐的方法中的步骤。
本发明上述一种根据图像生成音乐的方法能够适用于需要将图像转化成音乐的场景中，以下通过具体实施方式进行说明。
请参照图1，本发明的实施例一为：
一种根据图像生成音乐的方法，包括步骤：
S1、通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；
其中，绘制顺序信息为所述图形信息或所述颜色信息对应的绘制顺序；
在一种可选的实施方式中，读取画笔数据，画笔数据包括轨迹数据、颜色数据和动作数据，其中颜色数据和画笔一对一绑定，根据轨迹数据获取图形信息，根据颜色数据获取颜色信息，根据动作数据获取绘制顺序信息；如画笔经过的轨迹是圆，则图形信息为圆形，画笔中存储的颜色色号为红色，则颜色信息为红色，画笔中存储的动作数据为1-移动-轨迹1；2-移动-轨迹2，轨迹1对应圆形，轨迹2对应方形，则绘制顺序信息为圆形-方形；
在一种可选的实施方式中，通过读取画笔数据和画板数据获取图像绘制信息，具体的，画笔数据包括颜色数据，通过画笔中放置的NFC(Near Field Communication，近场通信)芯片的数据，获取画笔对应的颜色数据，每一只画笔只对应一种颜色，根据颜色数据获取颜色信息，通过画板上的点阵传感器获取图形信息，并根据时间顺序存储动作数据，根据顺序的动作数据获取绘制顺序信息；其中，可通过与NFC芯片对应的NFC传感器实现NFC芯片中内容的读取，NFC芯片传感器可放置在画板中读取后上传，也可放置在终端中读取后上传，在此不对NFC传感器的设置位置进行限定；
S2、判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值，包括：
S201、根据所述图形信息得到第一音级及第一时值；根据所述颜色信息得到第二音级及第二音阶；
具体的，根据图形信息得到第一音级及第一时值包括：根据所述图形信息判断图形类型，所述图形类型包括封闭式图形和开放式图形；若所述图形信息对应的图形类型为封闭式图形，则根据预设第一音级对照表获取所述第一音级，并根据所述封闭式图形的面积得到第一时值；若所述图形信息对应的图形类型为开放式图形，则根据预设第二音级对照表获取所述第一音级，并根据所述开放式图形的长度得到第一时值；
在一种可选的实施方式中，第一音级对照表为：do-方形；re-圆形；mi-半圆形；fa-三角形；sol-梯形；La-菱形；si-扇形；此处扇形是指除半圆形之外的扇形；第二音级对照表为：do-横线；re-竖线；mi-斜线；fa-折线；sol-弧线；la-波浪线；si-锯齿线；
在一种可选的实施方式中，根据封闭式图形的面积得到第一时值包括：全音符：图形尺寸“直径16公分＝4拍”以直径最宽的尺寸点为准，超过16公分宽度可自动叠加音符时值；二分音符：图形尺寸“直径8公分＝2拍”以直径最宽的尺寸点为准，超过8公分宽度可自动叠加音符时值；四分音符：图形尺寸“直径4公分＝1拍”以直径最宽的尺寸点为准，超过4公分宽度可自动叠加音符时值；八分音符：图形尺寸“直径2公分＝1/2拍”以直径最宽的尺寸点为准，超过2公分宽度可自动叠加音符时值；十六分音符：图形尺寸“直径1公分＝1/4拍”以直径最宽的尺寸点为准，超过1公分宽度可自动叠加音符时值；三十二分音符：图形尺寸“直径0.5公分＝1/8拍”以直径最宽的尺寸点为准，超过0.5公分宽度可自动叠加音符时值；其中，时值是代表音频播放的声时值值长短，所画的图形直径尺寸如超过设定宽度，系统会自动叠加音符，叠加的音符时值将根据图形的直径宽度叠加生成音频长短；若遇到长短尺寸对不上指定音符时值时，采用四舍五入的方式处理；
例如，请参照图2，选择拍号2/4拍(每小节四拍)以上图形相加得出的结论是播放的音频声音等于头半拍+身1拍+嘴、尾、脚等共四个1/8拍，合计等于＝半拍+1拍+半拍，正好2/4拍小节的时值，划线长度如果超过第一小节，延伸至第二小节，而延伸的时值又不足第二小节时值，这时候不足小节的时值系统就会自动再叠加生成时值休止符以满足小节时值的需要，以此类推；或者用户遇到第二小节时值不够2/4拍，也可以自行选择使用休止符或者附点等节奏型进行填充，使该小节成为完整的小节，进入到下一个小节；(遇到长短尺寸对不上指定音符时值时，采用四舍五入的方式处理)；
例如，请参照图7以及图8，圆形re(1个)＝直径8公分＝时值二分音符；竖线re(1条)＝长度8公分＝时值二分音符；横线do(1条)＝长度8公分＝时值二分音符；左弧线sol.5(1条)＝长度4公分＝时值四分音符；右弧线sol(1条)＝长度4公分＝时值四分音符；
在一种可选的实施方式中，根据所述开放式图形的长度得到第一时值包括：全音符(四拍)长度“16公分”，超过长度可自动叠加音符时值；二分音符(二拍)长度“8公分”，超过长度可自动叠加音符时值；四分音符(一拍)长度“4公分”，超过长度可自动叠加音符时值；八分音符(半拍)长度“2公分”，超过长度可自动叠加音符时值；十六分音符(四分之一)长度“1公分”超过长度可自动叠加音符时值；三十二分音符(八分之一拍)长度“0.5公分”超过长度可自动叠加音符时值；其中，时值是代表音频播放的声时值值长短，所画线条超过设定长度会自动叠加音符，增加的音符时值将根据画线增加的长度叠加生成音频长短。线条所画长短时值多出或者少于对应音符时值长度时，系统自动采用“四舍五入”计算方式，将多出的长度或短少的长度比例直接往前后左右的拍数长度归纳；例如，画一条横线选择拍号2/4拍(每小节二拍)选择四分音符(设定长度为4公分)4公分超过2公分＝1个四分音符+1个八分音符“多出0.3公分”还有超过的不到0.5公分的长度，归纳到前一个音符对应的时值或后一个音符对应的时值中；则以上长度相加得出结论是播放的音频声时值值等于1拍(四分音符)+超过的半拍(八分音符)，也就是1拍+半拍＝1拍半，还不够2/4拍小节的时值，如果划线长度继续增加，将2.3公分延长达到4公分，就会再生成一个四分音符，满足2/4小节的时值，以此类推，如果划线长度不够1小节时值，用户也可以选择用休止符或者附点等节奏型进行填充，使该小节成为完整的小节，进入到下一个小节；上述例子中的0.3公分可以自动生成为0.5公分即1/8拍，如果是只长出0.2公分，按照四舍五入计算方式(相较于0.5)可以忽略不计；
根据所述颜色信息得到第二音级及第二音阶包括：根据所述颜色信息获取颜色类型及颜色明度；根据所述颜色类型以及预设第三音级对照表得到所述第二音级；根据所述颜色明度以及预设第一音阶对照表得到第二音阶；其中，颜色类型包括色号；
在一种可选的实施方式中，所述第三音级对照表为do-赤；re-橙；mi-黄；fa-绿；sol-青；la-蓝；si-紫；第一音阶对照表为：高音区-浅色；中音区-中性色；低音区-深重色；
如提供一颜色在第一音阶对照表中的示例：高音区-第一赤(ff3434)；中音区-第二赤(FF0000)；低音区-第三赤(b30404)；
S3、根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱，包括：
S301、根据所述第一音级以及第一时值得到第一音符；根据所述第二音级以及第二音阶得到第二音符；
在一种可选的实施方式中，S201还包括根据颜色信息获取色块面积，根据色块面积得到第二时值；则S301包括根据第二音级、第二音阶及第二时值得到第二音符；
在一种可选的实施方式中，全音符：色块面积“直径16公分＝4拍”以直径最宽的尺寸点为准，超过16公分宽度可自动叠加音符时值；二分音符：色块面积“直径8公分＝2拍”以直径最宽的尺寸点为准，超过8公分宽度可自动叠加音符时值；四分音符：色块面积“直径4公分＝1拍”以直径最宽的尺寸点为准，超过4公分宽度可自动叠加音符时值；八分音符：色块面积“直径2公分＝1/2拍”以直径最宽的尺寸点为准，超过2公分宽度可自动叠加音符时值；十六分音符：色块面积“直径1公分＝1/4拍”以直径最宽的尺寸点为准，超过1公分宽度可自动叠加音符时值；三十二分音符——色块面积“直径0.5公分＝1/8拍”以直径最宽的尺寸点为准，超过0.5公分宽度可自动叠加音符时值；时值是对应音频播放的声时值值长短，所画的图形直径尺寸如超过设定宽度，系统会自动叠加音符时值，叠加的音符时值将根据图形的直径宽度叠加生成音频长短；(遇到长短尺寸对不上指定音符时值时，采用四舍五入的方式处理)；
S302、根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱。
在一种可选的实施方式中，S2之前包括：获取默认音阶以及默认时值；则S301可替换为311；S311、根据所述第一音级、第一时值以及默认音阶得到第一音符；根据所述第二音级、第二音阶以及默认时值得到第二音符信息；
在一种可选的实施方式中，在S3之后还包括：当点击播放欣赏聆听图形音符旋律音频时，可根据声音(音乐)表现需求，用户可对其中的音符音高进行升高或降低调节，对休止符和附点可以进行长短调整，调整后的音符旋律可以重新点击播放聆听，也可以反复更改；
在一种可选的实施方式中，S3之后还包括：获取所述目标乐谱中音符的音域，若音域的音高超过预设值，则调整超过预设值的所述音符；如，设定高音区控制在小字二组的fa音上，低音区音域控制在小字组的sol音上，上下接近二个八度的音域，若有超过该范围的音符，则不予展示；
在一种可选的实施方式中，可将用户停顿识别为转换请求，则在用户停顿时可以同步播放对应的目标乐谱，即每次停顿时播放与前一次所得目标乐谱的差额部分，实现实时聆听。
本发明的实施例二为：
一种根据图像生成音乐的方法，其与其余实施例的区别在于：
S3之前包括：
获取所述图形信息对应的第一绘制顺序信息；
获取所述颜色信息对应的第二绘制顺序信息；
则S3替换为：
S321、根据所述音阶、音级、时值以及第一绘制顺序信息得到第一乐谱；
S322、根据所述音阶、音级、时值以及第二绘制顺序信息得到第二乐谱；
S323、拼接所述第一乐谱以及第二乐谱生成目标乐谱。
本发明的实施例三为：
一种根据图像生成音乐的方法，其与其余实施例的区别在于：
还包括接收节拍信息、填词信息、乐器信息以及标记信息；
S3之后包括：
S4、根据所述第一音符、第二音符、绘制顺序信息以及节拍信息填充乐谱小节，生成目标乐谱；
在一种可选的实施方式中，小节节拍自定义为1/4、2/4、3/4、4/4拍、3/8拍、6/8拍、2/2拍等，用户事先选定一种拍号，当音符时值符合第一小节时值时，即会自动跳转下个小节；
在一种可选的实施方式中，还包括：验证乐谱小节是否完整，若是则填充下一小节，音符时值组合如不足一小节或者音符时值组合与小节拍号时值不符时，系统会提示用户应当调整本小节音符时值，或者用户使用休止符、附点等补充时值并呈现完整小节节奏为止，方可进入下一个小节；
S51、匹配所述填词信息与所述目标乐谱，得到每一个字与每一个音符的对应关系，所述音符包括所述第一音符或第二音符；
S52、判断所述字的语调是否和所述音符匹配，若否，则将所述音符对应的音高升高或降低预设高度后，返回判断所述字的语调是否和所述音符匹配的步骤；若是，则显示带有所述填词信息的所述目标乐谱；
在一种可选的实施方式中，将常用汉字按照十三辙分表存储，用户输入对应的韵母可检索符合韵母的汉字；如，系统检索功能将汉字语音发声按照“阴平、阳平、上声、去声”顺序，将汉字输入到系统中供用户检索使用；同步增加了词组的选择功能，便于用户在玩旋律填词游戏时寻找词组或造句填词；S6、根据所述乐器信息演奏所述目标乐谱；用户可以在乐器及其音色模块的工具栏中，寻找自己喜欢的乐器及音色，对原有的旋律音色进行替换，改变声音呈现效果，也让用户更多地了解乐器及音乐常识；
S7、根据所述标记信息修改所述第一音符或第二音符；
在一种可选的实施方式中，标记信息包括休止符、附点、渐强、渐弱、连音、延音、倚音等；当用户做填词创作的时候，觉得某个地方旋律需要换气、停顿、切分、终止等，都可以调用休止符或附点进行替换；用户设定拍号后使用到休止符或附点，按照时值组合，系统会自动进行搭配组合形成小节，小节中的音符、休止符、附点等的时值组合不足一小节或者超过一小节设定拍号时值，电脑系统会提示用户，请对小节中的音符、休止符、附点等进行调整；
在一种可选的实施方式中，节拍信息、填词信息以及标记信息可以都接收也可以选择几种接收，在此不做限定，对应的，S4-S7可以都执行，也可以选择一个或多个执行，与接收的信息对应；
在一种可选的实施方式中，每个创作图形或线条完成之后，均可点击播放图形或线条生成的音符旋律，旋律将根据音符的长短转换成选择的节奏型小节，同步播放音频。
请参照图2，本发明的实施例四为：
一种根据图像生成音乐的终端1，包括处理器2、存储器3及存储在存储器3上并可在所述处理器2上运行的计算机程序，所述处理器2执行所述计算机程序时实现实施例一至实施例三中的各个步骤。
本发明的实施例五为：
一种根据图像生成音乐的系统，包括画笔、画板以及处理终端；
所述画笔包括NFC芯片，所述画板包括NFC读取器和点阵传感器；
所述NFC芯片用于存储颜色信息；
所述NFC读取器用于读取颜色信息；
所述点阵传感器用于读取图形信息；具体的，图形信息记录图形的面积、长度或直径信息；
所述处理终端用于根据所述颜色信息以及所述图形信息生成目标乐谱；具体的，处理终端根据颜色信息得到音阶以及音级，并根据面积、长度或直径信息得到时值；根据音阶、音级以及时值生成目标乐谱；
其中，画笔、画板和处理终端共同配合实现实施例一至实施例三中的各个步骤。
综上所述，本发明提供了一种根据图像生成音乐的方法及终端；将音乐的乐谱和图像都拆分为细粒度的元素之后再进行对应，在保证根据图像能够成功生成对应乐谱的情况下，确保了乐谱的变化性，避免生成乐谱较多时，乐谱可能重复的问题；并且将绘画过程和音乐的创作过程相结合，提升用户的使用体验，提升用户的参与感，特别适用于青少年以及幼儿乐感的培养，寓教于乐，并且能够激发用户的音乐潜能，实现对适龄人员的音乐扫盲；同时，绘制图像的过程是一个创作过程，在根据图像得到一个目标乐谱之后，能够通过提供的工具对目标乐谱进行进一步的修改、如增加附点、间隔符等标记；选择节拍；填词；为用户提供了音乐的创作体验。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等同变换，或直接或间接运用在相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种根据图像生成音乐的方法，其特征在于，包括步骤：
通过读取画笔数据获取图像绘制信息，所述图像绘制信息包括图形信息、颜色信息以及绘制顺序信息；
判断是否接收到转换请求，若是，则根据所述图形信息以及颜色信息得到音阶、音级以及时值；
根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱。
2.根据权利要求1所述的一种根据图像生成音乐的方法，其特征在于，所述绘制顺序信息为所述图形信息或所述颜色信息对应的绘制顺序；
所述根据所述图形信息以及颜色信息得到音阶、音级以及时值包括：
根据所述图形信息得到第一音级及第一时值；
根据所述颜色信息得到第二音级及第二音阶；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱包括：
根据所述第一音级以及第一时值得到第一音符；
根据所述第二音级以及第二音阶得到第二音符；
根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱。
3.根据权利要求2所述的一种根据图像生成音乐的方法，其特征在于，所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之前包括：
获取默认音阶以及默认时值；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱还包括：
根据所述第一音级、第一时值以及默认音阶得到第一音符；
根据所述第二音级、第二音阶以及默认时值得到第二音符；
根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱。
4.根据权利要求1所述的一种根据图像生成音乐的方法，其特征在于，所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之前包括：
获取所述图形信息对应的第一绘制顺序信息；
获取所述颜色信息对应的第二绘制顺序信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱包括：
根据所述音阶、音级、时值以及第一绘制顺序信息得到第一乐谱；
根据所述音阶、音级、时值以及第二绘制顺序信息得到第二乐谱；
拼接所述第一乐谱以及第二乐谱生成目标乐谱。
5.根据权利要求2或3所述的一种根据图像生成音乐的方法，其特征在于，所述根据所述图形信息得到第一音级及第一时值包括：
根据所述图形信息判断图形类型，所述图形类型包括封闭式图形和开放式图形；
若所述图形信息对应的图形类型为封闭式图形，则根据预设第一音级对照表获取所述第一音级；
若所述图形信息对应的图形类型为开放式图形，则根据预设第二音级对照表获取所述第一音级。
6.根据权利要求2或3所述的一种根据图像生成音乐的方法，其特征在于，所述根据所述颜色信息得到第二音级及第二音阶包括：
根据所述颜色信息获取颜色类型及颜色明度；
根据所述颜色类型以及预设第三音级对照表得到所述第二音级；
根据所述颜色明度以及预设第一音阶对照表得到第二音阶。
7.根据权利要求2或3所述的一种根据图像生成音乐的方法，其特征在于，还包括接收节拍信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱还包括：
根据所述第一音符、第二音符、绘制顺序信息以及节拍信息填充乐谱小节，生成目标乐谱。
8.根据权利要求2或3所述的一种根据图像生成音乐的方法，其特征在于，还包括接收填词信息；
所述根据所述音阶、音级、时值以及绘制顺序信息生成目标乐谱之后包括：
匹配所述填词信息与所述目标乐谱，得到每一个字与每一个音符的对应关系，所述音符包括所述第一音符或第二音符；
判断所述字的语调是否和所述音符匹配，若否，则将所述音符对应的音高升高或降低预设高度后，返回判断所述字的语调是否和所述音符匹配的步骤；若是，则显示带有所述填词信息的所述目标乐谱。
9.根据权利要求2或3所述的一种根据图像生成音乐的方法，其特征在于，还包括接收标记信息；
所述根据所述第一音符、第二音符以及绘制顺序信息生成目标乐谱之前包括：
根据所述标记信息修改所述第一音符或第二音符。
10.一种根据图像生成音乐的终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-9任一所述的一种根据图像生成音乐的方法中的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210653028.XA CN115050344A (zh) | 2022-06-09 | 2022-06-09 | 一种根据图像生成音乐的方法及终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210653028.XA CN115050344A (zh) | 2022-06-09 | 2022-06-09 | 一种根据图像生成音乐的方法及终端 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115050344A true CN115050344A (zh) | 2022-09-13 |
Family
ID=83160922
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210653028.XA Pending CN115050344A (zh) | 2022-06-09 | 2022-06-09 | 一种根据图像生成音乐的方法及终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115050344A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20210287643A1 (en) * | 2016-05-27 | 2021-09-16 | Zi Hao QIU | Method and apparatus for converting color data into musical notes |
-
2022
- 2022-06-09 CN CN202210653028.XA patent/CN115050344A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20210287643A1 (en) * | 2016-05-27 | 2021-09-16 | Zi Hao QIU | Method and apparatus for converting color data into musical notes |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109345905B (zh) | 一种互动数字音乐教学系统 | |
| CN109949783B (zh) | 歌曲合成方法及系统 | |
| US7877259B2 (en) | Prosodic speech text codes and their use in computerized speech systems | |
| US8383923B2 (en) | System and method for musical game playing and training | |
| CN109493684B (zh) | 一种多功能数字音乐教学系统 | |
| KR101859268B1 (ko) | 영어 단어의 음절과 연동된 악보 제공 시스템 | |
| CN108520650A (zh) | 一种智能语言训练系统和方法 | |
| WO2019176950A1 (en) | Machine learning method, audio source separation apparatus, audio source separation method, electronic instrument and audio source separation model generation apparatus | |
| CN109377818A (zh) | 一种数字音乐教学系统的乐谱播放模块组件 | |
| CN115050344A (zh) | 一种根据图像生成音乐的方法及终端 | |
| Pauwels et al. | Exploring real-time visualisations to support chord learning with a large music collection | |
| Berliner | The art of Mbira: Musical inheritance and legacy | |
| CN113707111A (zh) | 将多行展示的乐谱数据处理为播放数据的方法及计算机程序 | |
| CN110853457B (zh) | 可互动的音乐教学指导方法 | |
| KR100888267B1 (ko) | 언어의 문자이미지와 음성을 매칭 시키는 언어 학습방법 및학습장치 | |
| CN110956870A (zh) | 一种视唱练耳教学方法及装置 | |
| Farbood | Hyperscore: A new approach to interactive, computer-generated music | |
| CN108922505B (zh) | 信息处理方法及装置 | |
| JP2000293181A (ja) | 歌詞画像描出機能に特徴を有するカラオケ装置 | |
| Weinberg | Interconnected musical networks: bringing expression and thoughtfulness to collaborative group playing | |
| CN111695777A (zh) | 教学方法、装置、电子设备以及存储介质 | |
| JP2000242267A (ja) | 音楽学習支援装置及び音楽学習支援プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| CN1164085A (zh) | 演奏风格变换装置和卡拉ok装置 | |
| JP7473781B2 (ja) | 音要素入力媒体、読取変換装置、及び、楽器システム、並びに、楽音生成方法 | |
| JP4232582B2 (ja) | 音生成機能を有するデータ処理装置およびそのプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |