CN103594075A - 音乐信息显示控制方法和音乐信息显示控制设备 - Google Patents

Abstract

本发明公开了音乐信息显示控制设备及方法。音乐信息显示控制设备包括：一个或多个处理器，其被构造为在显示装置上显示音符序列图像，在音符序列图像中，每个音符的音符图标图像布置在设置有时间轴的乐谱区域中。该一个或多个处理器在音符图标图像的附近布置了接收来自用户的指令的操作图标图像，并且根据移动操作图标图像的指令来改变音符图标图像在时间轴方向上的显示长度或显示位置。

Description

音乐信息显示控制方法和音乐信息显示控制设备

技术领域

本发明涉及显示多个音符的时间序列的技术。

背景技术

以往已经提出了显示多个音符的时间序列并且接收来自用户的编辑指令的各种技术。例如，JP-B-4508196公开了一种在设置有时间轴和音高轴的钢琴角色屏幕上显示多个音符的时间序列、并且通过诸如鼠标之类的定位装置进行的操作使两个连续音符之间的连接点（每个音符的端点）在时间轴方向上移动从而编辑每个音符的持续时间的技术。

但是，存在用户很难提供编辑音符的指令的情况。例如，在触摸板被用作提供编辑音符的指令的输入装置的情况下，当想要编辑音符的持续时间的用户使他/她的手指靠近音符时，音符隐藏在手指的后面，从而不能被用户看见，这使得很难在准确地指定期望音符的端点的同时指示期望的移动量。鉴于这些情况，本公开的目的是方便用户提供用于编辑显示在显示装置上的音符的指令。

发明内容

为了解决以上提到的问题，根据本公开，提供了一种音乐信息显示控制方法，包括步骤：

在显示装置上显示音符序列图像，在该音符序列图像中，每个音符的音符图标图像布置在设置有时间轴的乐谱区域中；

将操作图标图像布置在音符图标图像的附近；

接收来自用户的对操作图标图像的指令；以及

根据移动操作图标图像的指令来改变音符图标图像在时间轴方向上的显示长度或显示位置。

例如，操作图标图像布置在音符图标图像在时间轴方向上的尾部的附近；以及根据使操作图标图像在时间轴方向上移动的指令来改变音符图标图像的尾部的显示位置。

例如，音乐信息显示控制方法还包括步骤：在显示和不显示所述操作图标图像之间进行切换。

例如，操作图标图像仅布置在用户所选择的音符图标图像的附近，并且操作图标图像不布置在用户没有选择的音符图标图像的附近。

例如，根据乐谱区域的显示放大倍率来切换操作图标图像的显示和不显示。

例如，在布置步骤中，当指定乐谱区域中的多个音符图标图像时，针对多个音符图标图像布置一个操作图标图像；以及在改变步骤中，根据移动所述一个操作图标图像的指令来改变该多个音符图标图像中的至少一个音符图标图像在时间轴方向上的显示长度。

例如，针对每个音符，基本信息指定该音符的音高和发音期，属性信息指定该音符的音乐表达，并且音乐信息显示控制方法还包括步骤：根据音符图标图像附近的操作图标图像上的来自用户的指令，改变与音符图标图像相对应的音符的属性信息。

例如，在乐谱区域中设置音高轴；以及根据移动操作图标图像的指令，在保持音符图标图像在时间轴方向上的显示长度或显示位置的同时，改变音符图标图像在音高轴方向上的显示位置。

例如，在所述乐谱区域中设置音高轴；以及根据使操作图标图像在音高轴方向上移动的指令，改变音符图标图像在音高轴方向上的显示位置。

例如，在布置步骤中，操作图标图像布置在相对于音符图标图像的预定显示位置处，并且当另一音符图标图像布置在所述预定显示位置处时，操作图标图像布置在与所述预定显示位置不同并且与另一音符图标图像不重叠的显示位置处。

例如，音乐信息显示控制方法还包括步骤：在显示装置上显示歌曲图像，该歌曲图像包括设置有时间轴的歌曲区域、根据来自用户在歌曲区域中的指令的编辑对象区段、以及接收来自用户的指令的区段操作图标图像；根据使区段操作图标图像在时间轴方向上移动的指令来改变编辑对象区段在时间轴方向上的显示长度或显示位置；以及根据来自用户的指令在显示装置上显示与编辑对象区段相对应的音符序列图像。

根据本公开，提供了一种音乐信息显示控制设备，包括：

一个或多个处理器，其被构造为在显示装置上显示音符序列图像，在该音符序列图像中，每个音符的音符图标图像布置在设置有时间轴的乐谱区域中，

其中所述一个或多个处理器将接收来自用户的指令的操作图标图像布置在音符图标图像的附近，并且根据移动操作图标图像的指令来改变音符图标图像在时间轴方向上的显示长度或显示位置。

例如，所述一个或多个处理器将操作图标图像布置在音符图标图像在时间轴方向上的端部附近；以及所述一个或多个处理器根据使操作图标图像在时间轴方向上移动的指令来改变音符图标图像的端部的显示位置。

例如，所述一个或多个处理器在显示和不显示操作图标图像之间进行切换。

例如，所述一个或多个处理器仅将操作图标图像布置在用户所选择的音符图标图像的附近，而不将操作图标图像布置在用户没有选择的音符图标图像的附近。

例如，所述一个或多个处理器根据乐谱区域的显示放大倍率来切换操作图标图像的显示和不显示。

例如，在音乐信息显示控制设备中，当指定了乐谱区域中的多个音符图标图像时，所述一个或多个处理器针对多个音符图标图像指定一个操作图标图像，并且根据移动所述一个操作图标图像的指令来改变该多个音符图标图像中的至少一个音符图标图像在时间轴方向上的显示长度。

例如，音乐信息显示控制设备还包括：信息管理器，其被构造为针对每个音符，管理指定该音符的音高和发音期的基本信息以及指定该音符的音乐表达的属性信息，信息管理器根据来自用户的对音符图标图像附近的操作图标图像的指令，来改变与音符图标图像相对应的音符的属性信息。

例如，在所述乐谱区域中设置有音高轴，以及所述一个或多个处理器根据移动操作图标图像的指令，在保持音符图标图像在时间轴方向上的显示长度或显示位置的同时，改变音符图标图像在音高轴方向上的显示位置。

例如，在所述乐谱区域中设置有音高轴，以及所述一个或多个处理器根据使操作图标图像在音高轴方向上移动的指令来改变音符图标图像在音高轴方向上的显示位置。

例如，所述一个或多个处理器将操作图标图像布置在相对于音符图标图像的预定显示位置处；以及当另一音符图标图像布置在该预定显示位置处时，所述一个或多个处理器将操作图标图像布置在与该预定显示位置不同并且与另一音符图标图像不重叠的显示位置处。

例如，所述一个或多个处理器在所述显示装置上显示歌曲图像，该歌曲图像包括设置有时间轴的歌曲区域、根据来自用户在歌曲区域中的指令的编辑对象区段、以及接收来自用户的指令的区段操作图标图像；所述一个或多个处理器根据使区段操作图标图像在时间轴方向上移动的指令来改变编辑对象区段在时间轴方向上的显示长度或显示位置；以及所述一个或多个处理器根据来自用户的指令在显示装置上显示与编辑对象区段相对应的音符序列图像。

附图说明

通过参照附图对优选示例性实施例进行详细的描述，本公开的以上目的和优点将会变得更加清楚，附图中：

图1是根据本公开的第一实施例的声音合成设备的框图；

图2是音乐信息的示意图；

图3是音符序列图像的示意图；

图4是所选音符的音符图标图像（iconic image）的放大视图；

图5是示出了根据第一实施例的声音合成设备的操作的流程图；

图6是根据第一实施例的更新音符序列图像的处理的具体示例；

图7是根据第二实施例的更新音符序列图像的处理的具体示例；

图8是第三实施例的乐谱区域的示意图；

图9是根据第三实施例的更新音符序列图像的处理的具体示例；

图10是第四实施例的操作的说明性视图；

图11是根据第四实施例的更新音符序列图像的处理的具体示例；

图12是第五实施例的操作的说明性视图；

图13是根据第五实施例的更新音符序列图像的处理的具体示例；

图14是第六实施例的操作的说明性视图；

图15是根据第六实施例的更新音符序列图像的处理的具体示例；

图16是歌曲图像的示意图；

图17是根据第七实施例的声音合成设备的操作的流程图；

图18是根据第七实施例的更新歌曲图像的处理的具体示例；

图19是变形例中的操作的说明性视图；

图20是变形例中的操作的说明性视图；

图21是变形例中的操作的说明性视图；

图22是变形例中的操作的说明性视图；以及

图23是变形例中的操作的说明性视图。

具体实施方式

<第一实施例>

图1是根据本公开的第一实施例的声音合成设备100的框图。声音合成设备100是通过片段连接型声音合成来生成歌唱声（歌声）的声音信号V的信号处理设备，如图1所示，该声音合成设备100被实现为设置有运算处理单元10、存储装置12、显示装置14、输入装置16以及发声装置18的计算机系统。例如，声音合成设备100被实现为固定式信息处理设备（个人计算机）或者便携式信息处理设备（例如，便携式电话或智能手机）。

运算处理单元10执行存储在存储装置12中的程序PGM，由此实现多种功能（声音合成器22、显示控制器24、信息管理器26）。也可以采用以下结构：将运算处理单元10的功能分配给多个集成电路；并且专用电子电路（DSP）实现这些功能中的一些。运算处理单元10可以有一个或多个处理器构成。

显示装置14（例如，液晶显示面板）在运算处理单元10的控制下显示图像。输入装置16接收来自用户的指令。在第一实施例中，将与显示装置14一体化地形成并且检测用户对显示屏的触摸（触摸操作）的触摸面板用作输入装置16。发声装置18（例如，耳机或扬声器）发出与运算处理单元10生成的声音信号V对应的声波。

存储装置12存储运算处理单元10执行的程序PGM和运算处理单元10使用的各种数据（声音片段组G、音乐信息S）。采用诸如半导体记录介质或磁记录介质、或者多种记录介质的组合之类的已知记录介质作为存储装置12。

声音片段组G是一组用作声音合成素材的多个声音片段（声音合成库）。声音片段是音素（例如，元音或辅音）或音素链（例如，双音素或三音素），音素是语言意义上区分的最小单元，音素链中有多个音素耦接在一起。

音乐信息S指定多个音符的时间序列。如图2所示，第一实施例的音乐信息S是排列了各自与歌曲中的音符对应的多条音符信息N的时间序列数据（乐谱数据）。这些音符信息N各自包括指定音符的基本信息NA和指定音符的音乐表达的属性信息NB。

基本信息NA指定音高X1、发音期X2和声音符号X3。音高X1是代表音符的音高的数值（分配给每个音高的音符数（notenumber））。发音期X2表示发出音符的期间，并且由开始发出音符的时刻TA（在下文中，称为“发音时刻”）和持续发出音符的时间长度TB（在下文中，称为“持续时间”）来定义。发音期X2可以由发音时刻TA和声音消失时刻（结束发出音符的时刻）来定义。声音符号X3是代表诸如歌词之类的发音内容（字素）的符号。

属性信息NB针对每个音符指定应用于对声音信号V所表示的歌唱声的音乐表达的控制的各个变量的数值。第一实施例的属性信息NB指定变量Y1和变量Y2的数值。例如，变量Y1对应于定义颤音的特性的变量（例如，颤音的类型（深度）和期间长度），例如，变量Y2对应于音量（力度）、速度（发音的上升速度）以及清晰度（亮度）。

图1的声音合成器22通过使用声音片段组G和音乐信息S来生成声音信号V。具体地，第一，声音合成器22从声音片段组G中相继选择与音乐信息S中的每条音符信息N所指定的声音符号X3相对应的声音片段，第二，将每个声音片段调整为每条音符信息N所指定的音高X1和发音期X2（发音时刻TA和持续时间TB）。第三，声音合成器22将所调整的声音片段相互连接，并且根据每条音符信息N的属性信息NB来添加音乐表达（例如，音高和音量的变化），由此生成声音信号V。声音合成器22生成的声音信号V被提供到发声装置18并且被重放为声波。对于根据音乐信息S生成声音信号V，任意采用已知的声音合成技术。

图1的显示控制器24在显示装置14上显示图3的音符序列图像30，该音符序列图像30在可视地表达了音乐信息S的内容。如图3所示，第一实施例的音符序列图像30包括乐谱区域32和变量区域34。乐谱区域32是设置有相互交叉的时间轴（水平轴）和音高轴（垂直轴）的钢琴角色类型坐标平面。

在乐谱区域32中，表示音乐信息S所指定的音符的音符图标图像42按照时间顺序排列。根据来自用户的指令，与音乐信息S所表达的歌曲的部分中的音符相对应的音符图标图像42布置在乐谱区域32中。第一实施例的音符图标图像42为矩形形状。根据音符信息N的基本信息NA所指定的音高X1来设置音符图标图像42在音高轴方向上的显示位置，根据音符信息N的基本信息NA所指定的发音期X2的发音时刻TA来设置音符图标图像42在时间轴方向上的显示位置。根据音符信息N的基本信息NA所指定的发音期X2的持续时间TB（从发音时刻TA到声音消失时刻的时间长度）来设置每个音符图标图像42在时间轴方向上的显示长度Dt。也就是说，持续时间TB越长，音符图标图像42的显示长度Dt也越长。将音符信息N的基本信息NA所指定的声音符号X3（发音文字）添加到每个音符图标图像42。

图1的信息管理器26在音符序列图像30上根据来自用户的指令来管理（生成或编辑）音乐信息S。例如，当用户提供了将音符图标图像42添加至乐谱区域32的指令时，信息管理器26将与音符图标图像42的音符（音高X1、发音期X2、声音符号X3）相对应的音符信息N添加至音乐信息S。当用户提供了编辑现有音符图标图像42（例如，改变音高X1、发音期X2和声音符号X3）的指令时，信息管理器26根据来自用户的指令改变音符图标图像42的音符信息N。

在乐谱区域32中的每个音符图标图像42的附近，布置了编辑图像44。用户可以通过对乐谱区域32中的期望音符的编辑图像44进行操作，来提供改变属性信息NB中的变量Y1（颤音特性）的指令。信息管理器26根据来自用户的对编辑图像44的指令，改变与编辑图像44相对应的音符的属性信息NB的变量Y1的数值。

在图3的变量区域34中，显示了音乐信息S的属性信息NB所指定的变量Y2的数值。具体地，在设置有与乐谱区域32共同的时间轴（水平轴）和属性信息NB所指定的变量Y2的数值轴（垂直轴）的变量区域34中，针对乐谱区域32中的每个音符，布置了线形变量图标图像48，根据由属性信息NB指定的变量的数值来选择线形变量图标图像48在数值轴的方向上的显示长度。用户可以通过对变量区域34中的每个变量图标图像48进行操作来提供改变每个音符的变量Y2的指令。根据来自用户对变量区域34的指令，显示控制器24改变变量图标图像48的显示长度Dy，信息管理器26改变属性信息NB的变量Y2的数值。适当改变变量区域34中的变量Y2的显示形式。例如，可以在变量区域34中显示代表变量Y2的时间变化的曲线和折线。

用户可以通过对输入装置16进行操纵（例如，触摸音符图标图像42的操纵）来选择乐谱区域32中的任意音符图标图像42。例如，图3示出了其中用户选择了"く[k-M]"被指定为声音符号X3的音符图标图像42的情况作为一个示例。显示控制器24以与未选择的音符图标图像42不同的显示形式（例如，颜色或灰度）显示用户所选择的音符图标图像42。

用户可以通过适当地操纵输入装置16（例如，触摸音符图标图像42的操纵）在每个音符图标图像42的选择和不选择之间进行切换。当用户选择了期望的音符（在下文中，称为“所选音符”）的音符图标图像42时，如图3所示，显示控制器24将接收来自用户的操纵的操作图标图像46布置在所选音符的音符图标图像42的附近。图4是所选音符的音符图标图像42的放大视图。第一实施例的操作图标图像46是用于用户提供改变所选音符的音符图标图像42的显示长度Dt（所选音符的持续时间TB）的指令的图像（图标）。如图3和图4所示，第一实施例的操作图标图像46布置在音符图标图像42沿着时间轴的方向的尾端（右端）附近。具体地，操作图标图像46与音符图标图像42的位置关系（距离等）被选择为使得用户可以从乐谱区域32中的多个音符图标图像42中识别出与操作图标图像46相对应的一个音符图标图像42。例如，将操作图标图像46布置在穿过音符图标图像42的尾端的直线Q上沿着音高轴的方向远离音符图标图像42预定距离的位置（与音符图标图像42或编辑图像44不重叠的位置）处。另一方面，不针对未选择音符图标图像42显示操作图标图像46。因此，在用户没有指定任何音符图标图像42的情况下，在乐谱区域32中不显示操作图标图像46。如上所述，第一实施例的显示控制器24在操作图标图像46的显示和不显示之间进行切换。

用户可以通过适当地操纵输入装置16来在时间轴方向上任意地移动操作图标图像46。具体地，如图4所示，用户可以通过用手指F触摸显示装置14的显示屏幕并且沿着时间轴方向拖动操作图标图像46，使操作图标图像46向着时间轴方向上的下游侧（时间流逝的方向）或者向着时间轴方向上的上游侧（时间倒流的方向）移动期望的距离（用手指F触摸显示屏幕来移动操作图标图像46）。操作图标图像46在音高轴方向上的移动被禁止。

显示控制器24根据操作图标图像46的移动量来改变所选音符的音符图标图像42在时间轴方向上的显示长度Dt。具体地，如图4所示，当用户将操作图标图像46向着时间轴方向上的下游侧（时间轴上时间流逝的方向）移动时，显示控制器24通过将音符图标图像42的尾端向着时间轴方向上的下游侧移动与操作图标图像46的移动量相对应的距离、同时保持音符图标图像42的起始端（左端）的位置，来增加显示长度Dt。另一方面，当用户将操作图标图像46向着时间轴方向上的上游侧（时间轴上的回溯方向）移动时，显示控制器24通过将音符图标图像42的尾端向着时间轴方向上的上游侧移动与操作图标图像46的移动量相对应的距离、同时保持音符图标图像42的起始端的位置，来减小显示长度Dt。在第一实施例中，操作图标图像46在音高轴方向上的移动没有反映在音符图标图像42中。操作图标图像46在音高轴方向上的移动可以被禁止。

图1的信息管理器26根据由操作图标图像46的移动导致的音符图标图像42的显示长度Dt的改变来更新所选音符的音符信息N。具体地，信息管理器26将音乐信息S的持续时间TB（其被所选音符的音符信息N指定）更新为与改变后的显示长度Dt相对应的时间长度。

图5是声音合成设备100（运算处理单元10）的操作的流程图。例如，当用户提供了显示音符序列图像30的指令时，开始图5的处理。运算处理单元10在显示装置14上显示音符序列图像30（SA1）。然后，运算处理单元10等待来自用户的对输入装置16的操作（SA2），当接收了来自用户的操纵时，运算处理单元10根据操纵内容来改变音符序列图像30的内容（SA3）。此外，运算处理单元10（信息管理器26）根据来自用户的指令来改变音乐信息S（SA4）。具体地，当用户提供了编辑音符图标图像42的指令（例如，改变显示长度Dt的指令）时，运算处理单元10根据来自用户的指令来改变音符图标图像42的音符信息N。运算处理单元10重复以上处理直至用户提供了结束对音符序列图像30的操作的指令（SA5：否），并且当接收了结束指令时（SA5：是），运算处理单元10结束图5的处理。

图6是运算处理单元10（显示控制器24）根据来自用户的对输入装置16的操纵来改变音符序列图像30的内容的处理（图5的步骤SA3）的一个具体示例的流程图。运算处理单元10判定在图5的步骤SA2中接收到的操纵是否是选择乐谱区域32中的音符图标图像42的操纵（SB1）。当接收到音符图标图像42的选择时（SB1：是），运算处理单元10以与未选择的音符图标图像42的显示形式不同的显示形式（例如，颜色或灰度）来显示用户所选择的音符图标图像42，并且将操作图标图像46布置在所选音符图标图像42的附近（SB2）。另一方面，当没有接收到音符图标图像42的选择时（SB1：否），运算处理单元10判定从用户接收到的操纵是否为提供不选择（取消选择）乐谱区域32中的音符图标图像42的指令的操纵（SB3）。当接收到不选择音符图标图像42的指令时（SB3:是），运算处理单元10将用户所选的音符图标图像42的显示形式改变为不选择的形式，并且消除置于不选择的音符图标图像42附近的操作图标图像46（SB4）。另一方面，当没有接收到不选择音符图标图像42的指令时（SB3：否），运算处理单元10判定从用户接收的操纵是否是在时间轴方向上移动操作图标图像46的操纵（SB5）。当接收到在时间轴方向上移动操作图标图像46的操纵时，运算处理单元10在时间轴方向上移动操作图标图像46，从而改变音符图标图像42在时间轴方向上的显示长度Dt（SB6）。此外，运算处理单元10根据除如以上示例所示的操纵以外的操纵来改变音符序列图像30的内容（SB7），然后结束图6的处理（图5的步骤SA3）。

如上所述，根据第一实施例，由于通过对与音符图标图像42分开布置的操作图标图像46进行的操作改变了所选音符的音符图标图像42的显示长度Dt（所选音符的持续时间TB），因此与通过对音符图标图像42的直接操作来改变显示长度Dt的结构相比，具有容易编辑音符的优势。具体地，从图4了解到，即使当用户为了移动操作图标图像46而利用手指F来触摸显示屏时，音符图标图像也不隐藏到手指F的后面。因此，通过在连续地检查音符图标图像42和相关信息（声音符号X3和编辑图像44）的同时移动操作图标图像46，可以容易地并且准确地将音符图标图像42的显示长度Dt改变为用户所期望的长度。

此外，根据第一实施例，由于做出了操作图标图像46的显示和不显示之间的切换，因此与固定地显示与每个音符图标图像42相对应的操作图标图像46的结构相比，具有抑制音符序列图像30变复杂（可以容易地检查音符图标图像42）的优势。根据第一实施例，特别地，由于操作图标图像46显示在乐谱区域32中的多个音符图标图像42中的用户所选择的音符图标图像42的附近，因此抑制音符序列图像30变复杂的效果尤其显著。但是，可以采用在乐谱区域32中固定地显示与每个音符图标图像42相对应的操作图标图像46的结构。

此外，根据第一实施例，由于音符图标图像42的尾端连同布置在音符图标图像42的尾端附近的操作图标图像46的移动一起移动，因此还具有用户可以直观地掌握对操作图标图像46的操作和音符图标图像42的改变之间的关系的优势。

<第二实施例>

以下将描述本公开的第二实施例。在以下作为示例示出的实施例中，针对与第一实施例中的工作或功能类似的元件，使用第一实施例的描述中提及的参考标记，并且适当地省略其详细描述。

在第二实施例中，用户可以通过适当地操纵输入装置16来改变乐谱区域32的显示放大倍率R。显示控制器24在乐谱区域32中布置具有与用户所选择的显示方法倍率R对应的显示尺寸的音符图标图像42和编辑图像44。根据显示放大倍率R的增加，乐谱区域32中的音符图标图像42和编辑图像44变大从而它们显示在乐谱区域32中的数量减少。另一方面，根据显示放大倍率R的减小，音符图标图像42和编辑图像44变小从而它们显示在乐谱区域32中的数量增加。

第二实施例的显示控制器24根据乐谱区域32的显示放大倍率R在操作图标图像46的显示和不显示之间进行切换。具体地，当显示放大倍率R大于预定的阈值RTH时（放大），与第一实施例中相同，显示控制器24将操作图标图像46布置在用户所选择的音符的音符图标图像42的附近。另一方面，当显示放大倍率R低于预定的阈值RTH时（缩小），即使当用户指定乐谱区域32中的音符作为所选音符，显示控制器24也不将操作图标图像46布置在乐曲区32中。

在第二实施例中，同样实现了与第一实施例相似的效果。在显示放大倍率R低的情况下，由于大量的音符图标图像42和编辑图像44布置在乐谱区域32中，因此当添加操作图标图像46时显示内容的复杂性是显而易见的。根据第二实施例，由于当显示放大倍率R低于阈值RTH时不显示操作图标图像46，因此具有可以抑制显示内容变复杂的优势。

图7是第二实施例中的运算处理单元10的操作的流程图。执行图7的处理，而不是执行示为第一实施例中的示例的图6的处理。在图7的处理中，步骤SC1至步骤SC5被添加至图6的处理。当步骤SB5的判定结果为否定时，运算处理单元10判定在图5的步骤SA2中接收的操作是否为改变乐谱区域32的显示放大倍率R的操作（SC1）。当接收到显示放大倍率R的改变时（SC1：是），运算处理单元10根据用户已经改变的显示放大倍率R来改变音符图标图像42和编辑图像44的显示尺寸（SC2）。此外，运算处理单元10判定所改变的显示放大倍率R是否低于预定的阈值RTH（SC3）。当显示放大倍率R等于或高于阈值RTH（SC3：否）时，运算处理单元10显示操作图标图像46（SC4），然而当显示放大倍率R低于阈值RTH时（SC3：是），运算处理单元10使操作图标图像46不被显示（SC5）。另一方面，当没有接收到显示放大倍率R的改变时（SC1：否），运算处理单元10将该处理转移到步骤SB7。运算处理单元10执行的剩余步骤与第一实施例（图6）中的相似。

<第三实施例>

在第一实施例中，作为示例示出了在用户指定乐曲区32中的一个音符图标图像42的情形。在第三实施例中，用户可以指定乐谱区域32中的多个音符图标图像42。图8是第三实施例的乐谱区域32的示意图。如图8所示，通过适当地操纵输入装置16而在乐谱区域32中指定任意的区域（在下文中，称为“所选区域”）50，用户可以指定分别与所选区域50中的多个音符图标图像42相对应的多个音符作为所选音符。

当用户指定乐谱区域32中的区域50时，显示控制器24将一个操作图标图像46布置在乐谱区域32的所选区域50的附近。也就是说，针对多个所选音符显示一个操作图标图像46。具体地，操作图标图像46布置在穿过暂时置于所选区域50中的多个音符图标图像42的末端处的音符图标图像42的尾端的直线Q上在音高轴方向上远离所选区域50预定距离的位置处。

与第一实施例中的相同，用户可以通过操纵输入装置16（例如，在显示屏上拖动）来在时间轴方向上移动操作图标图像46。显示控制器24根据操作图标图像46的移动量来改变所选区域50中的多个音符图标图像42在时间轴方向上的显示长度Dt。具体地，所选区域50中的多个音符图标图像42的显示长度Dt以与操作图标图像46的移动量对应的放大倍率来增加或减小。信息管理器26将音乐信息S的与所选区域50中的每个音符图标图像42相对应的音符信息N中的持续时间TB更新为与每个音符图标图像42的改变后的显示长度Dt相对应的时间长度。

图9是第三实施例中的运算处理单元10的操作的流程图。执行图9的处理，而不是执行示为第一实施例中的示例的图6的处理。在图9的处理中，图6的步骤SB1至SB4被替代为图9的步骤SD1和步骤SD2。首先，运算处理单元10判定图5的步骤SA2处接收的操作是否为指定所选区域50的操纵（SD1）。当接收到所选区域50的指定时（SD1:是），运算处理单元10将一个操作图标图像46布置在乐谱区域32的所选区域50的附近（SD2）。然后，当接收到在时间轴方向上移动操作图标图像46的操纵时（SB5:是），运算处理单元10根据操作图标图像46的移动量来改变所选区域50中的多个音符图标图像42的每一个在时间轴方向上的显示长度Dt（SB6）。运算处理单元10执行的剩余的处理与第一实施例（图6）中的类似。

在第三实施例中，同样实现了与第一实施例中相似的效果。此外，根据第三实施例，由于所选区域50中的每个音符图标图像42的显示长度Dt连同一个操作图标图像46的移动一起改变，因此具有减小用户在一次编辑多个音符图标图像42时的负担的优势。

在以上范例中，所选区域50中的所有音符图标图像42的显示长度Dt均根据操作图标图像46的移动而改变。但是，例如，根据操作图标图像46的移动，至少可以改变所选区域50中的多个音符图标图像42中显示长度Dt最大的音符图标图像42。也就是说，第三实施例的显示控制器24被理解为根据操作图标图像46的移动来改变所选区域50中的多个音符图标图像42中的至少一个的显示长度Dt的元件。

<第四实施例>

在第一实施例中，所选音符的音符图标图像42的显示长度Dt（所选音符的持续时间TB）根据操作图标图像46在时间轴方向上的移动而改变。在第四实施例中，除了音符图标图像42的显示长度Dt之外，所选音符的音符信息N的属性信息NB也根据来自用户的对操作图标图像46的指令而改变。

图10是第四实施例的操作的说明性视图。图10中作为示例示出了乐谱区域32中的所选音符的音符图标图像42以及代表所选音符的变量Y2的数值的变量区域34中的变量图标图像48。在第一实施例中，当用户在时间轴方向上移动布置在所选音符的音符图标图像42的附近的操作图标图像46时，音符图标图像42在时间轴方向上的显示长度Dt（所选音符的持续时间TB）根据操作图标图像46的移动量来变化。

在第四实施例中，用户通过适当地操纵输入装置16（例如，拖动操作图标图像46），不仅可以在时间轴方向上还可以在音高轴方向上移动操作图标图像46。显示控制器24根据操作图标图像46在音高轴方向上的移动量来改变与变量区域34中的所选音符相对应的变量图标图像48的显示长度Dy。具体地，如图10所示，当用户向上（向着音高轴方向上的高音高侧）移动操作图标图像46时，显示控制器24使与所选图标对应的变量图标图像48的显示长度Dy增加与操作图标图像46的移动量对应的改变量。另一方面，当用户向下（向着音高轴方向上的低音高侧）移动操作图标图像46时，显示控制器24使与所选音符对应的变量图标图像48的显示长度Dy减小与操作图标图像46的移动量对应的改变量。此外，信息管理器26将与所选音符对应的属性信息NB的变量Y2更新为与改变后的显示长度Dy对应的数值。在属性信息NB包括多种变量Y2的结构中，用户从多种变量Y2中选择的一种或多种变量Y2的数值可以根据对显示长度Dy的操纵来更新。此外，可以采用通过用户不选择每个变量Y2来取消根据显示长度Dy更新变量Y2的功能的结构。

图11是第四实施例中的运算处理单元10的操作的流程图。执行图11的处理，而不是执行示为第一实施例中的示例的图6的处理。在图11的处理中，将步骤SE1和步骤SE2添加至图6的处理。运算处理单元10判定图5的步骤SA2处接收的操作是否是在音高轴方向上移动操作图标图像46的操纵（SE1）。当接收到在音高轴方向上移动操作图标图像46的操纵时（SE1：是），运算处理单元10根据操作图标图像46在音高轴方向上的移动量来改变与变量区域34中的所选音符相对应的变量图标图像48的显示长度Dy（SE2）。运算处理单元10执行的剩余的处理与第一实施例（图6）中的相似。

在第四实施例中，也可以实现与第一实施例的效果相似的效果。此外，根据第四实施例，由于用于改变音符图标图像42的显示长度Dt（所选音符的持续时间TB）的操作图标图像46也用于改变所选音符的属性信息NB（变量Y2），因此有助于编辑音符编辑的效果尤其显著。

尽管在以上范例中变量图标图像48的显示长度Dy（所选音符的属性信息NB）根据操作图标图像46在音高方向上的移动来改变，但用户提供改变所选音符的属性信息NB的指令的操作不限制于在音高轴方向上移动操作图标图像46的操作。例如，可以采用以下结构：在该结构中，当用户选择操作图标图像46时（例如，当轻击显示屏时），所选音符的属性信息NB的编辑屏幕显示在显示装置14上，并且接收来自用户的指令（即，不需要操作图标图像46在音高轴方向上的移动的结构）。也就是说，作为第四实施例的示例示出的结构被理解为所选音符的属性信息NB根据来自用户的对操作图标图像46的指令而改变的结构。

此外，尽管在以上范例中操作图标图像46被用来改变变量Y2，但操作图标图像46可以被用来改变除变量Y2以外的元素。例如，以下结构是合适的：当操纵操作图标图像46（例如，轻击显示屏）时，所选音符的音符信息N（例如，基本信息NA的声音符号X3或属性信息NB的变量Y1）的编辑屏幕显示在显示装置14上并且来自用户的指令被接收；以及音符信息N的内容（各音符的特性）显示在显示装置14上。此外，还可以采用这样的结构：其中，当用户在音高轴方向上重复地上下移动操作图标图像46时，将颤音（例如，深度与操作图标图像46的上下移动的幅度相对应的颤音）添加至所选音符。此外，根据对操作图标图像46的操作的种类来改变操作的结构也适用。例如，当操作图标图像46被双击时，显示音符信息N的编辑屏幕，而当长按操作图标图像46时，显示音符信息N的内容。

<第五实施例>

图12是第五实施例的操作的说明性视图。在第五实施例中，与第四实施例相同，可以根据对输入装置16的操作来在音高轴方向上移动操作图标图像46，以及根据操作图标图像46在时间轴方向上的移动来改变所选音符的音符图标图像42的显示长度Dt（所选音符的持续时间长度TB）。

显示控制器24根据操作图标图像46在音高轴方向上的移动量来在音高轴方向上移动所选音符的音符图标图像42。具体地，如图12所示，当用户向上（向着音高轴方向上的高音高侧）移动操作图标图像46时，显示控制器24使所选音符的音符图标图像42向着音高轴方向上的高音高侧移动与操作图标图像46的移动量对应的距离。另一方面，当用户向下（向着音高方向的低音高侧）移动操作图标图像46时，显示控制器24使所选音符的音符图标图像42向着音高轴方向的低音高侧移动与操作图标图像46的移动量对应的距离。此外，信息管理器26根据操作图标图像46的移动来更新所选音符的音符信息N的音高X1。具体地，信息管理器26将利用所选音符的音符信息N所选择的音高X1更新为音符图标图像42的目标音高。

在第五实施例中，也可以实现与第一实施例相似的效果。此外，根据第五实施例，由于用于改变所选音符的音符图标图像42的显示长度Dt（所选音符的持续时间TB）的操作图标图像46也被用于改变所选音符的音高X1，因此有助于编辑音符的效果尤其显著。

图13是第五实施例中的运算处理单元10的操作的流程图。执行图13的处理，而不是执行示为第一实施例中的示例的图6的处理。在图13的处理中，将步骤SF1和步骤SF2添加至图6的处理。运算处理单元10确定图5的步骤SA2处接收的操作是否是在音高轴方向上移动操作图标图像46的操纵（SF1）。当接收到在音高轴方向上移动操作图标图像46的操纵时（SF1：是），运算处理单元10使所选音符的音符图标图像42在音高轴方向上移动与操作图标图像46的移动量对应的距离（SF2）。运算处理单元10执行的剩余处理与第一实施例（图6）的相似。

<第六实施例>

在第一实施例中，所选音符的音符图标图像42的显示长度根据来自用户的对操作图标图像46的指令而改变。在第六实施例中，根据来自用户的对操作图标46的指令，在保持音符图标图像42的显示长度Dt的同时，改变音符图标图像42在时间轴方向上的显示位置。

图14是第六实施例的操作的说明性视图。如图14所示，当用户在时间轴的正方向（流逝方向）上移动操作图标图像46时，显示控制器24使所选音符的音符图标图像42在时间轴的正方向上移动与操作图标图像46的移动量对应的距离。另一方面，当用户在时间轴的负方向（回顾的方向）上移动操作图标图像46时，显示控制器24使所选音符的音符图标图像42在时间轴的负方向上移动与操作图标图像46的移动量对应的距离。第六实施例的信息管理器26根据音符图标图像42的移动在保持所选音符的持续时间TB的情况下更新音乐信息S中的发音时刻TA。

在第六实施例中，由于通过对与音符图标图像42分开布置的操作图标图像46的操纵来改变音符图标图像42在时间轴方向上的显示位置，因此与通过对音符图标图像42进行直接操作来改变显示位置的结构相比，具有容易编辑音符的优势。

图15是第六实施例中的运算处理单元10的操作的流程图。执行图15的处理，而不是执行示为第一实施例中的示例的图6的处理。在图15的处理中，图6的步骤SB6被图15的步骤SG1替换。当接收到在时间轴方向上移动操作图标图像46的操纵时（SB5：是），运算处理单元10使所选音符的音符图标图像42在时间轴方向上移动与操作图标图像46的移动量对应的距离（SG1）。运算处理单元10所执行的剩余处理与第一实施例（图6）中的相似。

<第七实施例>

第七实施例的歌曲由与不同的歌唱声对应的多个歌唱部分构成。存储装置12存储与该歌曲的不同歌唱部分相对应的多条音乐信息S。也就是说，针对每个歌唱部分分别指定了歌唱声的时间序列（音高X1、发音期X2、声音符号X3）。声音合成器22根据该歌曲的每个歌唱部分的音乐信息S生成每个歌唱部分的声音信号，并且通过合成多个歌唱部分的声音信号来生成声音信号V。

本实施例的显示控制器24在显示装置14上显示图16的歌曲图像60，供用户检查歌曲的多个歌唱部分的歌唱声。歌曲图像60包括歌曲区域62、编辑对象区段64和区段操作图标图像66。在歌曲区域62中，设置了相互交叉的时间轴（横轴）和排列轴（纵轴）。歌曲区域62中的时间轴上的时间点与歌曲的时间点对应。

歌曲区域62被分成与歌曲的不同歌唱部分对应的多个单元区域68。单元区域68各自是沿着时间轴延伸的带状区域，并且多个单元区域68在排列轴方向上平行排列。图16示出了分别与歌曲的主旋律（Main）的歌唱部分、歌曲的副旋律（Harmony）的歌唱部分、以及合唱声（Chorus）的歌唱部分相对应的各单元区域68。

通过适当地操纵输入装置16，用户可以将时间轴上的与期望歌唱部分对应的单元区域68中的任何区段指定作为编辑对象区段64，并且从多个指定的编辑对象区段64中选择任何单个编辑对象区段64（在下文中，称为“指定编辑对象区段64A”）。显示控制器24以与单元区域68的其与区段不同的形式（例如，颜色或灰度）来显示用户指定的编辑对象区段64，并且以与其他编辑对象区段64不同的形式来显示用户从多个编辑对象区段64中选择的指定编辑对象区段64A。

当用户通过操纵输入装置16（例如，双击指定编辑对象区段64A）来指定期望的歌唱部分的指定编辑对象区段64A时，显示控制器24在显示装置14上显示与指定编辑对象区段64A对应的音符序列图像30。也就是说，在显示装置14上显示与歌曲的指定编辑对象区段64A对应的一个歌唱部分的音符序列图像，用于在指定编辑对象区段64A中编辑音符序列。与第一实施例中的相同，信息管理器26接收来自用户的对音符序列图像30的指令，并且根据来自用户的指令来产生或更新与指定编辑对象区段64A相对应的歌唱部分的音乐信息S。当已经在指定编辑对象区段64A中编辑了音符序列的用户将预定的操作施加到输入装置16上时，显示控制器24在显示装置14上重新显示歌曲图像60。如图16所示，表示已经在音符序列图像30上被编辑的音符序列的图像被添加至编辑对象区段64。因此，通过可视地检查歌曲图像60，用户可以检查在多个歌唱部分的音符序列的概况以及各歌唱部分的音符序列之间的关联。不可能通过操纵编辑对象区段64（歌曲图像60）直接编辑音乐信息S。

区段操作图标图像66布置在与指定编辑对象64A对应的位置，并且接收来自用户的指令。具体地，区段操作图标图像66布置于在排列轴方向上穿过编辑对象区段64的尾端的直线上远离歌曲区域62预定距离的位置。显示控制器24根据来自用户的对区段操作图标图像66的指令来改变编辑对象区段64在时间轴方向上的显示长度L。具体地，用户可以通过操纵输入装置16（例如，在显示屏上拖动）在时间轴方向上移动区段操作图标图像66。显示控制器24根据区段操作图标图像66的移动量来改变（拉长或缩短）编辑对象区段64在时间轴方向上的显示长度L。从以上描述可以了解到，用户可以通过操纵区段操作图标图像66来适当地改变要在歌曲的特定歌唱部分的音符序列图像30上被显示和被编辑的区段（指定编辑对象区段64A的显示长度L）。

图17是第七实施例中的运算处理单元10的操作的流程图。例如，当用户提供显示歌曲图像60的指令时开始图17的处理。运算处理单元10在显示装置14上显示歌曲图像60（SH1），并且等待来自用户的对输入装置16的操作（SH2）。当接收到来自用户的操纵时（SH2：是），运算处理单元10根据操作的内容来改变歌曲图像60的内容（SH3）。运算处理单元10重复以上处理直到用户提供结束操作歌曲图像60的指令（SH4：否），并且当接收到结束指令时（SH4：是），运算处理单元10结束图17的处理。

图18是当接收到来自用户的对输入装置16的指令时运算处理单元10（显示控制器24）控制显示装置24的显示的处理（图17的步骤SH3）的具体示例的流程图。运算处理单元10判定从用户接收的操作是否是选择歌曲区域62中的编辑对象区段64的操纵（SJ1）。当接收到编辑对象区段64的选择时（SJ1：是），运算处理单元10布置与指定编辑对象区段64A对应的区段操作图标图像66并且以与未选择的编辑对象区段64不同的显示形式（例如，颜色或灰度）来显示指定编辑对象区段64A。另一方面，当没有接收到编辑对象区段64的选择时（SJ：否），运算处理单元10判定从用户接收的操作是否是在时间轴方向上移动区段操作图标图像66的操纵（SJ3）。当接收到在时间轴方向上移动区段操作图标图像66的操纵时（SJ3：是），运算处理单元10根据区段操作图标图像66的移动量来改变指定编辑对象区段64A在时间轴方向上的显示长度L。

当没有提供移动区段操作图标图像66的指令时（SJ3：否），运算处理单元10判定是否从用户接收到指定编辑对象区段64A的指定（SJ5）。当接收到指定编辑对象区段64A的指定时（SJ5：是），通过执行图5的上述处理，运算处理单元10在显示装置14上显示与指定编辑对象区段64A对应的音符序列图像30，并且根据来自用户的指令来更新音符序列图像30（SJ6）。当接收到除上述作为示例的操作以外的操纵时（SJ5：否），运算处理单元10根据用户的操作来改变歌曲图像60的内容（SJ7），并且结束图17的处理（图5的步骤SH3）。

在第七实施例中，实现了与第一实施例中相似的效果。此外，在第七实施例中，由于显示了包括歌曲区域62和编辑对象区段64的歌曲图像60，因此容易把掌整个歌曲的音符序列。此外，通过操作与歌曲图像60的编辑对象区段64分开显示的区段操作图标图像66，来改变编辑对象区段64（指定编辑对象区段64A）在时间轴方向上的显示长度L。利用以上结构，即使当用户用手指触摸显示屏以移动区段操作图标图像66时，指定编辑对象区段64A也不隐藏到手指的后面，使得同样产生了这样的优势：用户可以在检查指定编辑对象区段64A在时间轴上的位置和显示长度L以及指定编辑对象区段64A与其他编辑对象区段64之间的关系的同时，容易地改变指定编辑对象区段64A的显示长度L。

<变形例>

可以对上述实施例进行各种修改。具体的变形将作为示例示出。可以适当地组合任意选自以下范例中的两个或多个实施例。

（1）尽管在上述实施例中操作图标图像46布置在相对于所选音符的音符图标图像42的预定位置（在下文中，称为“参考位置”），但可能存在将操作图标图像46布置在相对于音符图标图像42的参考位置不合适的情况。因此，可以适当地采用这样的结构：根据是否满足与操作图标图像46的布置是否合适相关的预定条件，来切换是否将操作图标图像46布置在相对于所选音符的音符图标图像42的参考位置处。例如，当满足预定的条件时可以将操作图标图像46布置在相对于所选音符的音符图标图像42的参考位置处，而当不满足预定的条件时，可以将操作图标图像46布置在与参考位置不同的位置处。

例如，如图19所示，当在用户选择音符图标图像42-1时在相对于音符图标图像42-1的参考位置（图19的虚线部分）存在预定的音符图标图像42-2时，若将操作图标图像46布置在该参考位置，则操作图标图像46和音符图标图像42-2相互重叠，这使得用户很难单独地对它们进行检查。因此，如图19所述，当预定的音符图标图像42-2布置在相对于所选音符的音符图标图像42-1的参考位置时，显示控制器24将操作图标图像46布置在与音符图标图像42-2不重叠的位置（与参考位置不同的位置）。图19示出了这样的情况的一个示例：操作图标图像46布置在沿音高轴方向的直线Q上与音符图标图像42-2或者其附近的编辑图像44不重叠的位置（音符图标图像42-2的下方的位置），直线Q穿过所选音符的音符图标图像42-1的尾端。

此外，例如如图20所示，这样的结构是合适的：当相对于用户选择的音符图标图像42的参考位置（图20中的虚线）被置于乐谱区域32的外部时，显示控制器24将操作图标图像46布置在乐谱区域32中的特定位置（与参考位置不同的位置）处。图20示出了这样的情况的示例：操作图标图像46布置在沿音高轴方向的直线Q上的音符图标图像42的上方的位置处，该直线Q穿过所选音符的音符图标图像42的尾端。

从以上范例可以了解到，这样的结构是合适的：操作图标图像46布置在乐谱区域32的位于所选音符的音符图标图像42附近的空白区域（即，乐谱区域32中既没有布置预定的音符图标图像42也没有布置编辑图像44的区域）中。根据上述结构，由于操作图标图像46布置在适当的位置（不与另一音符图标图像42重叠的位置或乐谱区域32内部的位置）中，因此容易编辑音符的效果尤其显著。

此外，用户可以选择操作图标图像46的位置的结构同样适用。例如如图21所示，显示控制器24根据用户对输入装置16的操作（例如，在音高轴方向上拖动操作图标图像46），将布置在相对于所选音符的音符图标图像42的参考位置的操作图标图像46在音高轴方向上移动到任意位置。在移动操作图标图像46之前和之后不改变音符图标图像42的位置和显示长度Dt。根据这个结构，由于操作图标图像46被移动到用户期望的位置，因此容易编辑音符的效果尤其显著。

（2）尽管在第一实施例中根据用户的选择的存在和不存在来控制是否显示操作图标图像46并且在第二实施例中根据显示放大倍率R来控制是否显示操作图标图像46，但是控制是否显示操作图标图像46的方法不限于以上范例。例如，当所选音符的音符图标图像42的尾端置于乐谱区域32的外部时（当尾端没有被显示时），可以不显示操作图标图像46。此外，还采用这样的结构：针对显示长度Dt小于预定值的所选音符的音符图标图像42，不显示操作图标图像46。

（3）尽管在上述实施例中，操作图标图像46布置在所选音符的音符图标图像42的尾端附近，但也采用图22所示的结构，其中操作图标图像46布置在音符图标图像42的起始端附近，并且音符图标图像42在时间轴方向上的起始端的位置（发音时刻TA）连同操作图标图像46在时间轴方向上的移动一起移动。根据该结构，根据操作图标图像46的移动来改变音符图标图像42的起始端的位置和显示长度Dt（所选音符的发音时刻TA和持续时间TB）。此外，可以将独立的操作图标图像46布置在音符图标图像42的起始端和尾端的每一个的附近，使得音符图标图像42的起始端或尾端根据操作图标图像46的移动而移动。在图22的结构中，可以根据操作图标图像46的位置仅改变音符图标图像42在时间轴方向上的位置（不改变显示长度Dt）。

（4）在操作图标图像46布置在所选音符的音符图标图像42的尾端附近的结构中，也采用了这样的结构：当所选音符的音符图标图像42置于乐谱区域32中的右端附近时，操作图标图像46相对于音符图标图像42的位置与正常位置（当音符图标图像42置于乐谱区域32的中央部分时操作图标图像46的位置）相比向左移动。此外，如图22的范例，在操作图标图像46布置在所选音符的音符图标图像42的起始端附近的结构中，也采用这样的结构：当所选音符的音符图标图像42置于乐谱区域32中的左端附近时，操作图标图像46相对于音符图标图像42的位置与正常位置相比向右移动。

（5）在第二实施例中，当显示放大倍率R低时不显示操作图标图像46。但是，可以假设这样的情形：当显示放大倍率R低时，缩小音符图标图像42和编辑图像44并且易于隐藏在用户的手指F的后面。因此，也可以采用这样的结构：当显示放大倍率R低于阈值RTH（缩小）时，操作图标图像46布置在所选音符的音符图标图像42的附近，并且当显示放大倍率R大于阈值RTH（放大）时，操作图标图像46不布置在所选音符的音符图标图像42的附近。

（6）用户选择音符的方法不限于上述示例。例如，除了上述实施例中通过指定乐谱区域32中的期望音符图标图像42（例如，触摸显示屏）来选择音符的方法外，还可以采用以下方法：用户指定变量区域34中的期望变量图标图像48由此选择与该变量图标图像48对应的音符作为所选音符的方法；以及用户指定乐谱区域32中的期望编辑图像44由此选择与该编辑图像44对应的音符作为所选音符的方法。

可以适当地省去上述实施例中作为示例示出的元件。例如，可以从第四和第五实施例中省去根据操作图标图像46的移动来改变音符图标图像42的显示长度Dt（所选音符的显示长度Dt）的结构。也就是，第四实施例被确定为根据操作图标图像46的移动来改变所选音符的属性信息NB的结构，第五实施例被确定为根据操作图标图像46的移动来改变所选音符的音高X1的结构。

此外，可以针对每个要控制的元素（变量）来单独地布置操作图标图像46。例如，可以采用这样的结构：在所选音符的音符图标图像42的附近布置用于编辑音符图标图像42的显示长度Dt（所选音符的持续时间TB）的操作图标图像46、用于编辑所选音符的音高X1的操作图标图像46、以及用于编辑所选音符的属性信息NB的操作图标图像46。图23示出了在所选音符的音符图标图像42的附近布置用于编辑音符图标图像42的显示长度Dt的操作图标图像46A和用于编辑所选音符的音高X1的操作图标图像46B的情况。例如，操作图标图像46B布置在直线P上并且在音符图标图像42的附近，直线P沿时间轴穿过音符图标图像42的重心。根据图23的操作图标图像46A在时间轴上的移动来改变（伸长或缩短）所选音符的音符图标图像42的显示长度Dt，并且根据操作图标图像46B在音高轴上的移动来改变所选音符的音符图标图像42在音高轴上的位置（音高X1）。

（8）尽管在第一实施例中根据操作图标图像46在时间轴方向上的移动来改变音符图标图像42的显示长度Dt（所选音符的持续时间TB），在第四实施例中根据操作图标图像46在音高轴方向上的移动来改变变量图标图像48的显示长度Dy（变量Y2的数值），以及在第五实施例中根据操作图标图像46在音高轴方向上的移动来改变音符图标图像42在音高轴方向上的位置（所选音符的音高X1），但可以适当地改变对操作图标图像46的操作的内容（例如，操作图标图像46的移动方向）与要控制的对象之间的关系。具体地，采用这样的结构：根据操作图标图像46的移动量来更新属性信息NB（变量Y2），其中，当在时间轴方向上移动操作图标图像46时和当在音高轴方向上移动操作图标图像46时该属性信息NB不同。例如，当操作图标图像46在时间轴方向上移动时可以更新音量（变量Y2），当操作图标图像46在音高轴方向上移动时可以更新清晰度。此外，也可以采用这样的结构：根据操作图标图像46在时间轴方向上的移动来更新属性信息NB（变量图标图像48的显示长度Dy），并且根据操作图标图像46在音高轴方向上的移动来更新音符图标图像42在音高轴方向上的位置（所选音符的音高X1）。此外，尽管在第三实施例中，根据操作图标图像46的移动来改变所选区域50中的音符图标图像42的显示长度Dt，但也可以采用这样的结构：所选区域50中的每个音符图标图像42在时间轴上的显示位置连同操作图标图像46的移动一起移动。

（9）尽管在上述实施例中将矩形操作图标图像46示为示例，但操作图标图像46的形式不限于上述实施例。例如，可以布置添加了表示通过操纵操作图标图像46来控制的对象（例如，持续时间TB）的符号或图标图像的操作图标图像46（图标），或者可以布置添加了通过操纵操作图标图像46来控制的对象的数值（例如，持续时间TB的数值）的操作图标图像46。

（10）可以根据来自用户的指令在倾斜的方向（相对于时间轴和音高轴倾斜的方向）上移动操作图标图像46。当操作图标图像46在倾斜的方向上移动时，时间轴方向上的移动分量对应于上述实施例中的“在时间轴方向上的移动”，音高轴方向上的移动分量对应于上述实施例中的“在音高轴方向上的移动”。从以上描述可以了解到，“操作图标图像在时间轴方向上的移动”是除了包括仅在时间轴方向上的线性移动以外，还包括例如当操作图标图像在倾斜方向上移动时在时间轴方向上的移动分量的概念。同样地，“操作图标图像在音高轴方向上的移动”是除了包括仅在音高轴方向上的线性移动以外还包括例如当操作图标图像在倾斜方向上移动时在音高轴方向上的移动分量的概念。

尽管在上述实施例中操作图标图像46布置在与音高轴平行的直线Q上，但可以适当地改变直线Q的方向。例如，操作图标图像46可以布置在与音高轴平行的直线Q、相对于时间轴或音高轴形成预定角度的直线Q（即，相对于时间轴或音高轴倾斜的直线）上。根据来自用户的指令，操作图标图像46可以沿着直线Q移动。例如，从防止音符图标图像42隐藏在用户的手指F的后面的角度来看，以下结构是合适的：操作图标图像46布置在音符图标图像42的尾端的右下方的结构；以及操作图标图像46布置在音符图标图像42的起始端的左下方的结构。

（11）尽管在上述实施例中将用于声音合成的音乐信息S作为示例示出，但音乐信息S不限于应用于声音合成的数据。例如，本公开同样适用于在显示装置14上显示表示歌曲的乐谱的音乐信息S的情况（不管是否进行声音合成）。因此，在上述实施例中的声音合成器22和信息管理器26对本公开不是必不可少的，并且可以省去声音符号X3和属性信息NB。从以上描述可以了解到，本公开被理解为提供有显示控制器（例如，上述实施例的显示控制器24）的音乐信息显示控制设备，该显示控制器用于在显示装置14上显示音符序列图像30，在音符序列图像30中，每个音符的音符图标图像42和接收来自用户指令的操作图标图像46排列在设置有时间轴和音高轴的乐谱区域32中。

（12）在上述实施例中，在操作时具有彼此不同的控制内容的多个操作图标图像46可以布置在音符图标图像42的附近。例如，考虑到，在不同的操作图标图像46分别布置在音符图标图像42的尾端和起始端附近的情况下，根据对布置在尾端的附近的操作图标图像46的操纵来改变音符图标图像42的显示长度Dt，根据对布置在尾端附近的操作图标图像46的操纵来改变音符图标图像42在时间轴方向上的位置。此外，例如，考虑将不同的操作图标图像46布置在音符图标图像42在时间轴方向上的中心以及音符图标图像42的尾端（或起始端）的附近，并且根据对布置在尾端附近的操作图标图像46的操纵来改变音符图标图像42的显示长度Dt，以及根据对布置在音符图标图像42中心的操作图标图像46的操纵来改变音符图标图像42在时间轴方向上的位置。可以分别以不同的显示形式来显示与不同的操作内容对应的多个操作图标图像46。

（13）尽管在上述实施例中为了方便起见示出了直线Q和直线P,但直线Q和直线P实际上可以作为辅助线显示在显示装置14上，用于表明音符图标图像42和操作图标图像46之间的位置关系。显示控制器连同操作图标图像46的移动一起移动这些辅助线。

（14）举例说明了根据对操作图标图像46的操纵来控制音符图标图像42的各实施例同样地适用于根据对区段操作图标图像66的操纵来对编辑对象区段64的控制。例如，和根据使操作图标图像46在音高轴方向上移动的指令来使音符图标图像42在音高轴方向上移动的第五实施例一样，在第七实施例中，可以根据使区段操作图标图像66在排列轴方向移动的指令来使编辑对象区段64在排列轴方向上移动（即，可以将指定编辑对象区段64A移动到另一单元区域68）。此外，和根据使操作图标图像46在时间轴方向上移动的指令来使音符图标图像42在时间轴方向上移动的第六实施例一样，在第七实施例中，可以根据使区段操作图标图像66在时间轴方向上的移动来使编辑对象区段64在时间轴方向上移动。

（15）在第七实施例中，根据来自用户的指令而对区段操作图标图像66的控制的内容不限制于上述示例（指定编辑对象区段64A的长度L的改变）。具体地，可以根据使区段操作图标图像66在时间轴方向上或排列轴方向上移动的指令来改变与指定编辑对象区段64A中的每个音符对应的音乐信息S。例如，可以改变指定编辑对象区段64A中的每个音符的音高X1或属性信息NB的变量（例如，定义音量的变量Y2）。此外，可以根据使区段操作图标图像66在排列轴方向上的移动来改变歌曲区域62（编辑对象区段64）的显示放大倍率。

（16）尽管在第七实施例中，当用户选择了期望的指定编辑对象区段64A时，在显示装置14上显示与指定编辑对象区段64A对应的与第一实施例中类似的音符序列图像30，在第七实施例中显示的音符序列图像30不限制于上述示例。例如，可以显示省去了操作图标图像46的音符序列图像30。也就是说，第一至第六实施例中的根据对操作图标图像46的指令来控制音符图标图像42的显示的结构对于根据对区段操作图标图像66的指令来控制编辑对象区段64的显示的结构而言不是必不可少的。

这里，将以上实施例总结如下。

提供了一种音乐信息显示控制方法，包括：

在显示装置上显示音符序列图像，在该音符序列图像中，每个音符的音符图标图像布置在设置有音高轴和时间轴的乐谱区域中；

将操作图标图像布置在所述音符图标图像的附近；

接收来自用户的对所述操作图标图像的指令；以及

根据移动所述操作图标图像的指令来改变所述音符图标图像在时间轴方向上的显示长度和显示位置。

根据该结构，由于通过对与音符图标图像分开布置的操作图标图像的操纵来改变音符图标图像的显示长度或显示位置，因此与通过对音符图标图像的直接操纵来改变显示长度或显示位置的结构相比，具有容易编辑音符的优势。

音符图标图像的附近表示用户可以可视地识别乐谱区域中与操作图标图像对应的音符图标图像。例如，操作图标图像布置在音符图标图像的端部（例如，时间轴方向上的起始端或尾端）附近。例如，可以考虑以下结构：操作图标图像布置在穿过音符图标图像的端部并且相对于时间轴或音高轴形成预定角度（例如，直角）的直线上的结构（例如，操作图标图像的重心点在时间轴或音高轴上的位置与音符图标图像的端部一致的结构）。此外，操作图标图像与音符图标图像局部重叠的位置以及操作图标图像远离音符图标图像的位置（在时间轴方向或音高轴方向上距音符图标图像预定距离的位置）均可以被“音符图标图像的附近”的概念包含。

例如，显示控制器将操作图标图像布置在音符图标图像在时间轴方向上的端部附近，并且根据在时间轴方向上移动操作图标图像的指令来改变该端部的位置。根据该结构，由于根据布置在该端部附近的操作图标图像的移动来移动音符图标图像的该端部，因此具有用户可以直观地掌握对操作图标图像的操作和音符图标图像的改变之间的关系。

例如，显示控制器在操作图标图像的显示和不显示之间进行切换。在该情况下，由于做出操作图标图像的显示和不显示之间的切换，因此例如与固定地显示与每个音符图标图像对应的操作图标图像的结构相比，具有抑制音符序列图像复杂（可以容易地检查音符图标图像）的优势。例如，可以适当地采用以下结构：操作图标图像显示在用户所选择的音符图标图像的附近并且没有针对未选择音符布置操作图标图像的结构；以及根据乐谱区域的显示放大倍率来做出操作图标图像的显示和不显示之间的切换的结构。但是，可以固定地显示与每个音符图标图像对应的操作图标图像。

例如，当用户选择乐谱区域中的多个音符图标图像时，显示控制器针对该多个音符图标图像显示一个操作图标图像，并且根据使操作图标图像在时间轴方向上移动的指令来改变该多个音符图标图像中至少一个音符图标图像在时间轴方向上的显示长度或显示位置。在该情况下，针对用户选择的多个音符图标图像布置一个操作图标图像，并且根据对操作图标图像的操作来改变至少一个音符图标图像。因此，具有减小用户同时编辑多个音符图标图像的负担的优势。

例如，音乐信息显示控制设备包括信息管理器，其被构造为针对每个音符管理指定该音符的音高和发音期的基本信息以及指定该音符的音乐表达的属性信息，并且信息管理器根据来自用户的对音符图标图像附近的操作图标图像的指令来改变与音符图标图像对应的音符的属性信息。例如，这样的结构是合适的：根据在音高轴方向上移动音符图标图像附近的操作图标图像的指令，改变与音符图标图像对应的音符的属性信息。

例如，根据来自用户的对操作图标图像的指令，显示控制器在保持音符图标图像的位置和显示长度的同时改变操作图标图像在音高轴方向上的位置。根据该结构，由于根据来自用户的指令来改变操作图标图像在音高轴方向上的位置，因此可以将操作图标图像移动到方便用户可视地识别和操作的位置。此外，根据使操作图标图像在音高轴方向上移动的指令来改变音符图标图像在音高轴方向上的位置的结构同样合适。

例如，显示控制器将操作图标图像布置在相对于音符图标图像的预定位置处，并且当另一音符图标图像布置在该预定位置处时，显示控制器将操作图标图像布置在与该预定位置不同并且与另一音符图标图像不重叠的位置处。根据该结构，由于防止了音符图标图像和操作图标图像相互重叠，因此具有用户可以容易地检查音符图标图像的优势。

即使对于用户任意地指定显示在显示装置上的时间轴上的歌曲的要编辑的区段（编辑对象区段）的结构，正如在提供了编辑音符的指令的上述情况中，也存在很难提供改变编辑对象区段的显示长度和显示位置的指令的情况。例如，当触摸板被用作用于指定编辑对象区段的输入装置时，若想要改变编辑对象区段的显示长度或显示位置的用户使他/她的手指靠近显示屏，则目标编辑对象区段隐藏在手指的后面，使得很难在准确地掌握编辑对象区段的同时指示期望的改变量。鉴于以上情况，根据本公开的另一实施例的音乐信息显示控制设备包括显示控制器，其用于在显示装置上显示歌曲图像，该歌曲图像包括：歌曲区域，其中设置有时间轴；根据来自用户的在歌曲区域中的指令的编辑对象区段；以及区段操作图标图像，其接收来自用户的指令，并且显示控制器根据使区段操作图标图像在时间轴方向上移动的指令来改变编辑对象区段在时间轴方向上的显示长度或显示位置。利用以上结构，由于通过操纵与编辑对象区段分开地布置的区段操作图标图像来改变编辑对象区段的显示长度或显示位置，因此与通过直接对编辑对象区段进行操作来改变显示长度或显示位置的结构相比，获得了容易改变编辑对象区段的优势。详细地，根据来自用户的对编辑对象区段的指令，显示控制器在显示装置上显示音符序列图像，在该音符序列图像中，乐谱区域中排列了歌曲的各编辑对象区段中的音符的音符图标图像。

根据本公开的音乐信息显示控制设备通过诸如CPU（中央处理单元）之类的通用运算处理单元与程序之间的协作来实现以及还通过诸如DSP（数字信号处理器）之类的专用于音乐信息显示的硬件来实现。本公开的程序是使计算机执行在显示装置上显示音符序列图像的显示控制处理的程序，在音符序列图像中，针对每个音符的音符图标图像布置在设置有音高轴和时间轴的乐谱区域中，并且在显示控制处理中，接收来自用户的指令的操作图标图像布置在音符图标图像的附近，并且根据使操作图标图像在时间轴方向上移动的指令来改变音符图标图像在时间轴方向上的显示长度。根据该程序，实现了与本公开的声音合成设备相似的作用和效果。本公开的程序以通过通信网络分发的形式来提供而安装在计算机上，还以存储在计算机可读记录介质中的形式来提供而安装在计算机中。

尽管针对特定的优选实施例已经示出并描述了本发明，但对本领域的技术人员显而易见的是，可以基于本发明的教导做出各种改变和变形。显然，所述改变和变形在所附权利要求所限定的本发明的精神、范围和意图内。

本申请基于2012年8月14日提交的日本专利申请No.2012-179860以及2013年6月6日提交的日本专利申请No.2013-120277，其内容通过引用方式并入于此。

Claims (22)

1.一种音乐信息显示控制方法，包括步骤：

在显示装置上显示音符序列图像，在所述音符序列图像中，每个音符的音符图标图像布置在设置有时间轴的乐谱区域中；

将操作图标图像布置在所述音符图标图像的附近；

接收来自用户的对所述操作图标图像的指令；以及

根据移动所述操作图标图像的指令来改变所述音符图标图像在时间轴方向上的显示长度或显示位置。

2.如权利要求1所述的音乐信息显示控制方法，其中所述操作图标图像布置在所述音符图标图像在时间轴方向上的尾部的附近；以及

其中根据使所述操作图标图像在时间轴方向上移动的指令来改变所述音符图标图像的尾部的显示位置。

3.如权利要求1或2所述的音乐信息显示控制方法，还包括步骤：

在显示和不显示所述操作图标图像之间进行切换。

4.如权利要求1或2所述的音乐信息显示控制方法，其中所述操作图标图像仅布置在用户所选择的音符图标图像的附近，并且所述操作图标图像不布置在用户没有选择的音符图标图像的附近。

5.如权利要求3所述的音乐信息显示控制方法，其中根据所述乐谱区域的显示放大倍率来切换所述操作图标图像的显示和不显示。

6.如权利要求1或2所述的音乐信息显示控制方法，其中在所述布置步骤中，当指定了所述乐谱区域中的多个音符图标图像时，针对所述多个音符图标图像布置一个操作图标图像；以及

其中在所述改变步骤中，根据移动所述一个操作图标图像的指令来改变所述多个音符图标图像中的至少一个音符图标图像在时间轴方向上的显示长度。

7.如权利要求1或2所述的音乐信息显示控制方法，其中针对每个音符，基本信息指定该音符的音高和发音期，属性信息指定该音符的音乐表达，

所述音乐信息显示控制方法还包括步骤：

根据来自用户的对所述音符图标图像附近的所述操作图标图像的指令，改变与所述音符图标图像相对应的音符的属性信息。

8.如权利要求1或2所述的音乐信息显示控制方法，其中在所述乐谱区域中设置有音高轴；以及

其中根据移动所述操作图标图像的指令，在保持所述音符图标图像在时间轴方向上的显示长度或显示位置的同时，改变所述音符图标图像在音高轴方向上的显示位置。

9.如权利要求1或2所述的音乐信息显示控制方法，其中在所述乐谱区域中设置有音高轴；以及

其中根据使所述操作图标图像在音高轴方向上移动的指令，改变所述音符图标图像在音高轴方向上的显示位置。

10.如权利要求1或2所述的音乐信息显示控制方法，其中在所述布置步骤中，所述操作图标图像布置在相对于所述音符图标图像的预定显示位置处，并且当另一音符图标图像布置在所述预定显示位置处时，所述操作图标图像布置在与所述预定显示位置不同并且与所述另一音符图标图像不重叠的显示位置处。

11.如权利要求1或2所述的音乐信息显示控制方法，还包括步骤：

在所述显示装置上显示歌曲图像，所述歌曲图像包括设置有时间轴的歌曲区域、根据来自用户在所述歌曲区域中的指令的编辑对象区段、以及接收来自用户的指令的区段操作图标图像；

根据使所述区段操作图标图像在时间轴方向上移动的指令来改变所述编辑对象区段在时间轴方向上的显示长度或显示位置；以及

根据来自用户的指令在所述显示装置上显示与所述编辑对象区段相对应的音符序列图像。

12.一种音乐信息显示控制设备，包括：

一个或多个处理器，其被构造为在显示装置上显示音符序列图像，在所述音符序列图像中，每个音符的音符图标图像布置在设置有时间轴的乐谱区域中，

其中所述一个或多个处理器将接收来自用户的指令的操作图标图像布置在所述音符图标图像的附近，并且根据移动所述操作图标图像的指令来改变所述音符图标图像在时间轴方向上的显示长度或显示位置。

13.如权利要求12所述的音乐信息显示控制设备，其中所述一个或多个处理器将所述操作图标图像布置在所述音符图标图像在时间轴方向上的端部附近；以及

其中所述一个或多个处理器根据使所述操作图标图像在时间轴方向上移动的指令来改变所述音符图标图像的所述端部的显示位置。

14.如权利要求12或13所述的音乐信息显示控制设备，其中所述一个或多个处理器在显示和不显示所述操作图标图像之间进行切换。

15.如权利要求12或13所述的音乐信息显示控制设备，其中所述一个或多个处理器仅将所述操作图标图像布置在用户所选择的音符图标图像的附近，而不将所述操作图标图像布置在用户没有选择的音符图标图像的附近。

16.如权利要求14所述的音乐信息显示控制设备，其中所述一个或多个处理器根据所述乐谱区域的显示放大倍率来切换所述操作图标图像的显示和不显示。

17.如权利要求12或13所述的音乐信息显示控制设备，其中当指定了所述乐谱区域中的多个音符图标图像时，所述一个或多个处理器针对所述多个音符图标图像指定一个操作图标图像，并且根据移动所述一个操作图标图像的指令来改变所述多个音符图标图像中的至少一个音符图标图像在时间轴方向上的显示长度。

18.如权利要求12或13所述的音乐信息显示控制设备，还包括：

信息管理器，其被构造为针对每个音符，管理指定该音符的音高和发音期的基本信息以及指定该音符的音乐表达的属性信息，

其中所述信息管理器根据来自用户对所述音符图标图像附近的所述操作图标图像的指令，来改变与所述音符图标图像相对应的音符的属性信息。

19.如权利要求12或13所述的音乐信息显示控制设备，其中在所述乐谱区域中设置有音高轴；以及

其中所述一个或多个处理器根据移动所述操作图标图像的指令，在保持所述音符图标图像在时间轴方向上的显示长度或显示位置的同时，改变所述音符图标图像在音高轴方向上的显示位置。

20.如权利要求12或13所述的音乐信息显示控制设备，其中在所述乐谱区域中设置有音高轴；以及

其中所述一个或多个处理器根据使所述操作图标图像在音高轴方向上移动的指令来改变所述音符图标图像在音高轴方向上的显示位置。

21.如权利要求12或13所述的音乐信息显示控制设备，其中所述一个或多个处理器将所述操作图标图像布置在相对于所述音符图标图像的预定显示位置处；以及

其中当另一音符图标图像布置在所述预定显示位置处时，所述一个或多个处理器将所述操作图标图像布置在与所述预定显示位置不同并且与所述另一音符图标图像不重叠的显示位置处。

22.如权利要求12或13所述的音乐信息显示控制设备，其中所述一个或多个处理器在所述显示装置上显示歌曲图像，所述歌曲图像包括设置有时间轴的歌曲区域、根据来自用户在所述歌曲区域中的指令的编辑对象区段、以及接收来自用户的指令的区段操作图标图像；

其中所述一个或多个处理器根据使所述区段操作图标图像在时间轴方向上移动的指令来改变所述编辑对象区段在时间轴方向上的显示长度或显示位置；以及

其中所述一个或多个处理器根据来自用户的指令在所述显示装置上显示与所述编辑对象区段相对应的音符序列图像。

Images