CN102682752A - 乐谱信息生成装置及其方法、乐音生成控制装置及其方法 - Google Patents

Abstract

本发明涉及乐谱信息生成装置及其方法、乐音生成控制装置及其方法。乐谱要素提取部基于作为乐谱的构成要素的连谱线、五线及小节线的位置，确定乐谱中的小节的各自的区域及小节号码。音乐数据分割部基于音乐数据文件中的时间信息，将所述音乐数据文件分割，生成多个以每小节为单位的包含有表示音高的信息及时间信息的单位音乐数据文件，并且基于作为乐谱的构成要素的反复记号的种类及其位置、连谱线、五线及小节线的位置，确定反复记号所处的小节，将由于反复而重复的单位音乐数据文件从多个单位音乐数据文件中除去，取得没有反复的最终的单位音乐数据文件，将最终的单位音乐数据文件和小节号码建立对应。

Description

乐谱信息生成装置及其方法、乐音生成控制装置及其方法

关联申请的引用：本申请基于2011年3月7日提交的日本在先特许申请2011-48524和2011-48525、2011年4月5日提交的2011-83430、2011年7月8日提交的2011-151390并要求它们的优先权，其全部内容通过引用包括于此。

技术领域

本发明涉及乐谱信息生成装置、乐音生成控制装置、乐谱信息生成方法及乐音生成控制方法，使用将与显示的乐谱有关的乐谱数据和与基于该乐谱的乐曲的演奏有关的音乐数据建立了关联的乐谱信息，控制基于音乐数据的乐曲的再现。

背景技术

提出有如下的技术：在电子乐器和音乐再现装置中，通过在显示部的画面上显示乐谱的同时发出与在乐谱上显示的音符对应的乐音，来实现乐曲的演奏。

例如，在日本专利第3077269号公报中，提出有如下装置：比较对键盘进行按键而得到的演奏数据和乐谱数据，检索演奏者正在演奏的乐谱的位置，并显示乐谱中的被检索到的位置。

此外，在日本特开平10-240117号公报中，使用了MIDI数据文件、保存有表示分小节的乐谱的乐谱图像数据的乐谱图像数据文件、以及包含有有针对各小节的控制代码的练习支援数据。控制代码包括用于对乐谱上的所属页码、MIDI(乐器数字接口)数据的对应部分、对应的乐谱图像数据进行指定的代码。专利文献2所示的装置构成为，基于控制代码，识别成为练习对象的小节的所属页码，并显示与属于该页码的小节对应的乐谱。

实际的乐谱通常包含有有各种反复记号，同一小节被多次演奏。另一方面，用于演奏乐曲的音乐数据(例如保存有MIDI数据的SMF(StandardMidi File：标准MIDI文件))由与发音开始对应的音符开启事件(note-onevents)、与发音结束(消音)对应的音符关闭事件(note-off events)、以及事件间的时间信息构成，所以未考虑反复。因此，乐谱上的音符和音乐数据上的事件未必唯一地对应，所以在指定了乐谱上的规定位置(例如小节)的情况下，有时无法进行合适的乐曲的演奏。

此外，该反复记号的形状与作为构成乐谱的其他要素的五线、小节线相比较为复杂，所以从图像数据识别该反复记号的精度是较低的。因此，作为乐谱的构成要素，在乐谱的图像数据上分别确定某多个反复记号及其位置多数比较困难。

发明内容

本发明的目的在于生成将乐谱数据和对基于乐谱的乐曲进行演奏的音乐数据适当地建立对应的乐谱信息。

本发明的目的通过以下乐谱信息生成装置来实现，该乐谱信息生成装置，具备：存储单元，保存有音乐数据和图像数据，该音乐数据包括表示构成乐曲的各乐音的音高的音高信息和表示发音定时的时间信息，该图像数据对所述乐曲的乐谱进行表示；小节确定单元，基于作为所述乐谱的构成要素的连谱线、五线及小节线的位置，确定各小节的区域及小节号码；单位音乐数据生成单元，基于所述音乐数据中的时间信息，将所述音乐数据分割，生成多个以每小节为单位的包含有音高信息及时间信息的单位音乐数据；反复记号位置确定单元，基于作为所述乐谱的构成要素的反复记号的种类及其位置、以及所述连谱线、五线及小节线的位置，确定反复记号所处的小节；单位音乐数据取得单元，从所述多个的单位音乐数据取得没有重复的最终的单位音乐数据，并且，将该最终的单位音乐数据和所述小节号码建立对应地保存于所述存储单元；以及乐谱要素数据生成单元，生成乐谱要素数据并保存于所述存储单元，该乐谱要素数据包含有所述乐谱中的连谱线、五线及小节线所存在的位置、该各小节的区域及小节号码、以及所述反复记号的种类及位置。

附图说明

图1是表示本发明的实施方式的乐音再现系统的结构的框图。

图2是表示本实施方式的终端装置的结构的框图。

图3是表示本实施方式的终端装置的外观的大致正视图。

图4是表示本实施方式的中心装置10的功能的框图。

图5是表示本实施方式的乐谱要素提取部所执行的处理(直线等检测处理)的例子的流程图。

图6是表示基于乐谱数据的乐谱的例子的图。

图7是详细表示步骤502(连谱线的检测处理)的处理例的流程图。

图8是详细表示步骤503(五线的检测处理)的处理例的流程图。

图9是表示在被二值化的乐谱中针对各个y坐标的像素数的图表。

图10是详细表示步骤504(小节线的检测处理)的处理例的流程图。

图11是表示本实施方式的反复记号的检测处理的例子的流程图。

图12a～图12e是表示反复记号及对应的符号的例子的图。

图13a～图13d是表示反复记号及对应的符号的例子的图。

图14是本实施方式的乐谱要素数据文件的生成处理的例子的流程图。

图15是表示由音乐数据分割部执行的单位音乐数据文件生成处理的例子的流程图。

图16a是概略地表示某乐曲的乐谱的构造的图，图16b是概略地表示该乐曲的原始音乐数据的构造的图。

图17是表示所取得的无反复的多个单位音乐数据文件的例子的图。

图18是表示在本实施方式的终端装置中执行的处理的例子的流程图。

图19是表示本实施方式的面板开关处理的例子的流程图。

图20是表示本实施方式的歌曲选择处理的例子的流程图。

图21是表示本实施方式的开始·停止开关处理的例子的流程图。

图22是表示本实施方式的演奏操作检测处理的例子的流程图。

图23是表示本实施方式的演奏操作检测处理的例子的流程图。

图24是表示本实施方式的演奏操作检测处理的例子的流程图。

图25是表示在终端装置的显示部的画面上显示有乐谱的例子的图。

图26是详细表示图22的步骤2203的流程图。

图27是详细表示图22的步骤2203的流程图。

图28是详细表示图27的步骤2703的流程图。

图29是表示本实施方式的重复记号处理的例子的流程图。

图30是表示本实施方式的歌曲处理的例子的流程图。

图31是详细表示步骤1504的处理例的流程图。

图32是表示本实施方式的图像更新处理的例子的流程图。

具体实施方式

以下参照附图说明本发明的实施方式。图1是表示本发明的实施方式的乐音再现系统的结构的框图。如图1所示，本实施方式的乐音再现系统具有中心装置10和终端装置30。本实施方式的中心装置10具有：CPU11、输入部12、显示部13、ROM14、RAM15、闪存器16、通信接口(I/F)17及音响系统18。作为中心装置10，例如可以使用个人计算机或服务器。

在本实施方式中，中心装置10将包含有用于演奏乐曲的音乐数据的音乐数据文件和包含有乐曲的乐谱的图像数据的乐谱数据文件保存于存储装置(例如闪存器16等)中。中心装置10生成包含有用于将上述音乐数据与图像数据建立关联的数据(后述的乐谱要素数据)的文件即乐谱要素数据文件，并将其与音乐数据文件和乐谱数据文件一起发送给终端装置30。

CPU11执行如下等处理：读出乐谱数据，提取乐谱数据中的五线和小节线等乐谱要素的处理；基于提取的乐谱要素，按照每小节将音乐数据分割，生成包含有以小节为单位的音乐数据的单位音乐数据文件的处理。输入部12包括键盘、鼠标等输入装置。此外，显示部13包括例如液晶显示装置。

ROM14保存如下等处理的处理程序：读出乐谱数据，提取乐谱数据中的五线和小节线等乐谱要素的处理；基于提取的乐谱要素，按照每小节将音乐数据分割，生成包含有以小节为单位的音乐数据的单位音乐数据文件的处理。RAM15存储从ROM14读出的程序、在处理过程中产生的数据。此外，在闪存器16中保存有包含有各种乐曲的音乐数据的音乐数据文件及包含有该乐曲的乐谱数据的乐谱数据文件。

通信I/F17控制经由因特网等外部网络进行的数据收发。音响系统18具有音源部19、音频电路20及扬声器21。

图2是表示本实施方式的终端装置的结构的框图。如图2所示，本实施方式的终端装置30具有：CPU31、触摸面板32、显示部13、ROM34、RAM35、闪存器36、通信接口(I/F)37及音响系统38。作为终端装置30，例如可以使用智能手机。

在本实施方式中，终端装置30从中心装置10接收音乐数据文件(后述的单位音乐数据文件)、乐谱数据文件及乐谱要素数据文件，基于这些数据文件所包含的数据来显示乐谱，并且，从所指定的小节开始演奏乐曲，或者反复所指定的小节。

CPU31执行以下各种处理：应该显示在显示部13的画面上的乐谱和项目等的显示、向触摸面板的接触的检测、基于乐谱要素数据文件及单位音乐数据文件进行的乐曲的演奏等。触摸面板32与包含有液晶显示装置的显示部33重叠配置。

ROM34保存以下各种处理的处理程序：应该显示在显示部13的画面上的乐谱和项目等的显示、向触摸面板的接触的检测、基于乐谱要素数据文件及单位音乐数据文件进行的乐曲的演奏等。RAM35存储从ROM34读出的程序、在处理过程中产生的数据。闪存器36能够保存接收到的乐谱数据文件、乐谱要素数据文件及单位音乐数据文件。通信I/F37控制经由因特网等外部网络进行的数据收发。音响系统38具有音源部39、音频电路40及扬声器41。

图3是表示本实施方式的终端装置的外观的大致正视图。如图3所示，终端装置30与触摸面板32和包含有液晶显示装置的显示部33重叠配置。在显示部33的画面上，例如显示有乐谱(参照附图标记300)和包含有各种项目(参照附图标记310～312)的输入部301。使用者通过触摸乐谱300的期望的位置，能够指定乐谱中的小节等。此外，使用者通过触摸期望的项目，能够输入指令。

以下，说明由中心装置10执行的处理。图4是表示本实施方式的中心装置10的功能的框图。如图4所示，中心装置10具有乐谱要素提取部42、数据文件生成部43及音乐数据分割部44。在本实施方式中，在中心装置10的闪存器16中保存有原始(original)音乐数据文件400和原始乐谱数据文件401，所述原始音乐数据文件400包含有作为乐曲的音乐数据的原始音乐数据，所述原始乐谱数据文件401包含有作为该乐曲的乐谱数据的原始乐谱数据。

原始音乐数据文件400是所谓的标准MIDI文件(SMF)，其包含有：表示包含乐音发音的事件之间的时间间隔的时间信息(时间差(deltatime))、表示音符开启事件或音符关闭事件等事件的种类的信息等。此外，原始乐谱数据文件401是例如PDF文件等已知格式的图像数据文件。

乐谱要素提取部42读出原始乐谱数据文件401，根据文件中的数据生成用于发送给终端装置30的显示用乐谱数据文件403。显示用乐谱数据文件403是例如PNG(Portable Network Graphic：流式网络图形)文件。当然也可以是PNG以外的其他格式的图像数据。此外，乐谱要素提取部42将原始乐谱数据文件401二值化，生成例如位图(bitmap)的二值化数据文件402。

进而，乐谱要素提取部42参照二值化数据文件402，提取作为乐谱的构成要素的连谱线(part line)、五线(staff)和小节线等。另外，在本实施方式中，乐谱构成要素包含有乐谱中的五线、连谱线和小节线等用于规定乐谱中的时间区域或分谱(part)的线、以及反复记号。乐谱构成要素中不包含直接规定在乐曲中演奏的乐曲的音符。

此外，乐谱要素提取部42取得所提取的乐谱的构成要素的坐标数据。数据文件生成部43基于由乐谱要素提取部42取得的信息，生成乐谱要素数据文件404，该乐谱要素数据文件404包含有用于确定乐谱要素的种类及其位置的信息。生成的显示用乐谱数据文件403、二值化数据文件402、乐谱要素数据文件404保存于例如闪存器16中。

音乐数据分割部44基于原始音乐数据文件400中的音乐数据和乐谱要素数据文件中的乐谱要素数据404，将音乐数据分割为每小节的单位音乐数据，并且除去基于反复记号等的反复，生成规定的单位音乐数据文件405。单位音乐数据文件405也保存于例如闪存器16中。

另外，乐谱要素提取部42、数据文件生成部43及音乐数据分割部44主要通过图1所示的CPU11来实现。以下，详细说明由它们执行的处理。图5是表示由本实施方式的乐谱要素提取部执行的处理(直线等检测处理)的例子的流程图。如图4所示，图像要素提取部42将原始乐谱数据二值化，并将包含有生成的二值化数据的二值化数据文件保存到RAM15中(步骤501)。例如，二值化数据是位图数据。另外，在原始图像数据文件已经是二值化数据的情况下，省略步骤501。

接着，乐谱要素提取部42从二值化数据检测连谱线(步骤502)。连谱线也称为起线垂直线。图6是表示基于乐谱数据的乐谱的例子的图。连谱线表示用连谱线连结的分谱同时演奏，用于规定乐谱的段。通常，连谱线位于乐谱的左端。在图6中，附图标记601所示的线是连谱线。在该例中，通过所谓的连谱线划定大谱表。在所谓的总谱中多个分谱的五线的左端通过连谱线进行连结。

图7是详细表示步骤502(连谱线的检测处理)的处理例的流程图。如图7所示，乐谱要素提取部42在乐谱的图像中，从左端起在规定范围的区域内检测多于规定值连续的垂直线(步骤701)。在检测到了垂直线的情况下(步骤702：是)，乐谱要素提取部42确定与垂直线相当的像素群(步骤703)，进而参照位于所找到的垂直线的下方的像素，检测多于规定值连续的其他垂直线(步骤704)。

在检测到该其他垂直线的情况下(步骤705：是)，乐谱要素提取部42确定与该其他垂直线相当的像素群(步骤706)。另外，乐谱要素提取部42通过将上述像素群的位置信息预先存储在RAM15中，能够确定像素群。乐谱要素提取部42判断是否在乐谱的图像中到下端为止都结束了垂直线的检索(步骤707)。在步骤707中判断为否的情况下，回到步骤704。另一方面，在步骤707中判断为是的情况下，乐谱要素提取部42将检测到的垂直线的位置信息(坐标)保存到RAM15中(步骤708)，然后结束连谱线的检测处理。

在连谱线的检测处理中，在图6中，检测到位于左端的垂直线即连谱线(附图标记601)。此外，检测位于检测到的垂直线(参照附图标记601)的下方(参照附图标记619)的其他垂直线(在图6中未图示)。

若连谱线的检测处理结束，则乐谱要素提取部42检测乐谱中的五线(步骤503)。图8是详细表示步骤503(五线的检测处理)的处理例的流程图。如图8所示，乐谱要素提取部42在垂直方向上确定连谱线所处的范围(步骤801)。接着，乐谱要素提取部42在由步骤801确定的范围内，对与水平方向上的黑点相当的像素数进行计数(步骤802)。乐谱要素提取部42判断是否在连谱线所处的全部范围内结束了像素数的计数(步骤803)。在步骤803中判断为否的情况下，回到步骤802。

在步骤802中，在连谱线所处的范围内，按照y轴方向(垂直方向)的每个坐标(y坐标)来参照具有同一y坐标的像素各自的值(像素值)，如果是表示黑点的值，则将计数值自加一。这样，针对连谱线所位于的每个y坐标，取得与横方向(x轴方向)的黑点相当的像素数，作为计数值。图9是表示针对每个y坐标的像素数的图表。在图9中，横轴表示y轴方向(垂直方向)的位置，纵轴表示像素数(计数值)。

从图6可知，在乐谱中，在构成五线(附图标记602、603)的线(第1线～第5线)的位置，直线沿水平方向延伸。因此，该位置的像素数(计数值)与其他位置相比显著地较大。在图9的例中，如附图标记901～905所示，一定间隔的5个位置的计数值与其他位置的计数值(例如参照附图标记910、911)相比显著地较大。在本实施方式中，像这样找出以一定间隔5个一组存在的、计数值显著较大的位置，将该位置判断为五线的位置。为了判定这样的五线的位置，执行步骤804以下的处理。

乐谱要素提取部42将示出了比计数值的最大值(计数最大值)小规定比例(例如20％)的计数值的位置从五线的候补位置中排除(步骤804)。接着，乐谱要素提取部42找出计数值的极大值，对示出极大值的位置及其周边规定范围的位置进行合并(步骤805)。在步骤805中，将所述周边的规定范围看作同一位置，对于规定范围的位置也赋予所找出的极大值就可以了。此外，乐谱要素提取部42计算计数值的最大偏差σ，将示出了其规定倍(例如3倍：3σ)以下计数值的位置从五线的候补位置中排除(步骤806)。乐谱要素提取部42将被从候补位置中排除掉的位置除外地确定以规定间隔存在的5个计数值(步骤807)。该5个位置成为五线位置。乐谱要素提取部42将该五线位置的信息保存到RAM15中(步骤808)。

若五线的检测处理结束，则乐谱要素提取部42检测乐谱中的小节线(步骤504)。图10是详细表示步骤504(小节线的检测处理)的处理例的流程图。小节线是用于对某小节与下一小节进行区分的、五线上的或与连谱线同样长度的垂直线(参照图6的附图标记604～606)。如图10所示，乐谱要素提取部42首先检测在五线谱的线上或线间配置的音符(参照附图标记1010)。

更详细地说，乐谱要素提取部42在垂直方向上确定包含有连谱线及其上下规定范围的长方形区域(步骤1001)。所确定的区域大体对应于可能配置有音符的区域。接着，检测大小与构成五线的线的间隔一致的椭圆形(步骤1002)。在步骤1002中，例如将检测到的椭圆形的中心位置的坐标保存到RAM15中。乐谱要素提取部42判断是否对于全部连谱线执行了步骤1002(步骤1003)。在步骤1003中判断为否的情况下，回到步骤1002，在针对下一连谱线确定出的区域内检测音符的符头的位置。

在步骤1003中判断为是的情况下，乐谱要素提取部42在包含有上述连谱线及其上下规定范围的区域内，找出相对于与检测到的音符对应的椭圆形离开了规定距离以上、并且长度与连谱线近似的垂直线(步骤1004)。乐谱要素提取部42将检测到的垂直线的信息保存到RAM15中(步骤1005)。乐谱要素提取部42判断是否针对全部连谱线执行了步骤1004、1005(步骤1006)。在步骤1006中判断为否的情况下，回到步骤1004，在针对下一连谱线确定出的区域内执行同样的处理。在步骤1006中判断为是的情况下，结束小节线的检测处理。

若小节线的检测(图5的步骤504)结束，则乐谱要素提取部42检测反复记号。图11是表示本实施方式的反复记号的检测处理的例子的流程图。如图11所示，乐谱要素检测部42取得RAM15所保存的被二值化的乐谱数据(步骤1101)。接着，乐谱要素检测部42选择成为检测对象的反复记号。作为反复记号(重复记号)，如图12、图13所示，包括：反复的开头记号

(附图标记1201)、反复的末端记号

(附图标记1211)、不同结尾反复记号的带数字1尾括号

(附图标记1231)、不同结尾反复记号的带数字2的括号

(附图标记1241)、反复省略记号的省略首端

(To Coda)(附图标记1301)、表示跳跃到相同记号之处的记号或反复省略记号的省略尾端

(Coda Mark)(附图标记1311)、

记号(附图标记1321)、D.S.记号(附图标记1331)、D.C.记号(未图示)等。包含有这些反复记号的图形的图像数据被预先保存于RAM15中，在步骤1102中，乐谱要素提取部42读出规定的记号的图像数据即可。

接着，乐谱要素提取部42基于五线的行距宽度将记号的尺寸标准化(步骤1103)。接着，乐谱要素提取部42计算记号与乐谱数据的规定区之间的一致系数(相关值)(步骤1104)。例如，将记号的图像数据的像素和规定区的图像数据的像素进行比较，在像素值一致的情况下，将一致系数自加一，将最终的一致系数作为相关值。乐谱要素提取部42在乐谱数据中，通过将区移动，计算全部区的相关值。乐谱要素提取部42确定相关值为最大的区(步骤1105)，取出该区的像素数据(步骤1106)。

接着，乐谱要素提取部42将取出的图像数据的像素与乐谱数据中的规定区的图像数据的像素进行比较，计算相关值(步骤1107)。在步骤1105中检测到的区中存在的反复记号是在该乐谱中使用的记号，所以能够更高精度地检测同一记号，所以在步骤1107中，使用检测到的区的图像数据，再次检测记号。乐谱要素提取部42确定相关值大于一定阈值的区(步骤1108)。然后，乐谱要素提取部42在乐谱数据中，在所确定的区内，描绘与反复记号对应的规定的符号(步骤1109)。乐谱要素提取部42判断是否对全部反复记号结束了处理(步骤1110)。在步骤1110中判断为是的情况下，结束处理，在步骤1110中判断为否的情况下，回到步骤1102。

以下说明与反复记号对应的符号。在图12a～图12e、图13a～图13d中，将与记载于右侧的反复记号(参照附图标记1200～1240、1300～1330)对应的符号在左侧表示(参照附图标记1201～1241、1301～1331)。与反复的开头记号

1201对应的符号1200由规定数量的像素构成。在此，上侧2点(参照附图标记1202)用于表示反复的开头记号

反复的末端记号

不同结尾反复记号的带数字1的括号

不同结尾反复记号的带数字2的括号

下侧2点(参照附图标记1203)用于表示反复省略记号的省略首端

反复省略记号的省略尾端

记号、D.S.记号、D.C.记号。反复的开头记号

和末端记号通过在第1层的上侧反向地配置黑的像素来区别(参照附图标记1200、1210、1220)。此外，反复的结尾括号通过在第1层的下侧反向地配置黑的像素来区别(参照附图标记1230、1240)。此外，向反复省略记号的省略尾端

(Coda)的跳转的指示(反复省略记号的省略首端

)和反复省略记号的省略尾端

通过在第2层的下侧反向地配置黑的像素来区别(参照附图标记1300，1310)，

记号及D.S.记号通过在第2层的上侧反向地配置黑的像素来区别。

在步骤1109中，在被二值化的乐谱数据中，在所检测到的区或其附近，描绘由上述规定数量的像素构成的符号。符号在制作后述的像素要素数据文件时被参照。另外，在本实施方式中，检测反复记号，在被二值化的乐谱数据中，在检测到该反复记号的位置附近，配置对应的符号。但是，不限于该方法，也可以在检测到反复记号时将其种类及位置信息保存到RAM15中。

若反复记号的检测(图5的步骤505)结束，则数据文件生成部43基于在步骤502～505中得到的信息，生成乐谱要素数据文件(步骤506)。图14是表示本实施方式的乐谱要素数据文件的生成处理的例子的流程图。如图14所示，数据文件生成部43将保存于RAM15中的五线的位置信息、连谱线及小节线的位置信息，以规定的顺序及形式保存到RAM15中的乐谱要素数据文件(步骤1401、1402)。接着，数据文件生成部43基于连谱线的位置、小节线的位置及五线的位置，将小节号码和具有该小节号码的小节的位置建立对应地保存于RAM15中的乐谱要素数据文件(步骤1403)。进而，数据文件生成部43判断在连谱线及小节线各自的附近是否存在反复记号的符号。在存在符号的情况下，将与符号建立了对应的反复记号的种类及其位置信息(例如表示反复记号所位于的小节号码、与反复记号邻接的连谱线或小节线的信息)保存于RAM15中的乐谱要素数据文件(步骤1404)。这样，能够生成保存了下述的乐谱要素的信息的乐谱要素数据文件，该乐谱要素包含有乐谱所含有的五线、连谱线、小节线、反复记号及小节的位置。进而，在乐谱包含有多个分谱的情况下，在乐谱要素文件中，优选保存将五线的位置和分谱(音色)建立了对应的信息。

音乐数据分割部44将原始音乐数据文件分割为以小节为单位的数据文件(单位音乐数据文件)，并且参照乐谱要素数据文件，确定基于反复记号进行反复的小节，将反复的单位音乐数据文件的一方删除。图15是由音乐数据分割部执行的单位音乐数据文件生成处理的例子的流程图。如图15所示，音乐数据分割部44取得闪存器16所保存的原始音乐数据文件(步骤1501)。原始音乐数据文件除了含有表示包含乐音的发音(音符开启事件)的事件间的时间间隔的时间信息(时间差)、表示包含音符开启事件的事件的信息之外，还含有表示时间的单位的信息(表示单位时间将4分音符分辨得怎样的分辨率，例如240的分辨率)、表示乐曲的拍子的信息。根据音符开启事件和音符关闭事件之间的时间信息，能够掌握与音符开启相关的音符的长度。

音乐数据分割部44在原始音乐数据中，从乐曲的开始部分起，参照表示事件的信息及时间信息，基于上述分辨率，计算音符的长度(步骤1502)，生成单位音乐数据文件，该单位音乐数据文件在1个文件中包含有表示1小节量的事件的信息及时间信息(步骤1503)。生成的单位音乐数据文件保存于RAM15中。接着，音乐数据分割部44基于与乐谱要素数据文件所包含的反复记号有关的信息(反复记号的种类及其位置信息)，将相重复的单位音乐数据文件删除(步骤1504)。

图16a是概略地表示某乐曲的乐谱的构造的图，图16b是概略地表示该乐曲的原始音乐数据的构造的图。在图16a及图16b中，括弧内的数字表示小节号码。此外，在图16b中，在小节号码之前附加的数字是单位音乐数据文件的文件号码。文件号码例如可以在图15的步骤1503中生成文件时，由音乐数据分割部44来赋予。例如，图16b中的开头的单位音乐数据文件(参照附图标记1621)的文件号码为1号，如括弧内所示，表示与第1小节对应。

如图16a所示，在该乐曲中，在第5小节(附图标记1605)的开头有反复的开头记号及

记号，在第8小节(附图标记1608)的开头有不同结尾反复记号的带数字1的括号

后端有反复的末端记号

在第9小节(附图标记1609)的开头存在不同结尾反复记号的带数字2的括号

此外，在第12小节(附图标记1612)的开头存在反复省略记号的省略首端

在第13小节(附图标记1613)的后端存在D.S.记号，在第14小节(附图标记1614)的开头存在反复省略记号的省略尾端

从原始音乐数据文件中以小节为单位分割出的单位音乐数据文件如图16b所示，存在28个。由于存在反复，所以与第5小节相当的单位音乐数据文件多次出现(参照附图标记1625、1629、1637、2641)。

图31是详细表示图15的步骤1504的处理例的流程图。如图31所示，音乐数据分割部44将表示文件号码的参数初始化为“1”(步骤3101)，针对文件号码所表示的单位音乐数据文件，参照反复记号，计算乐谱中的小节号码(步骤3102)。小节号码与单位音乐数据文件的文件号码建立对应地保存于RAM15中(步骤3103)。音乐数据分割部44针对具有最后的文件号码的文件，判断小节号码的计算是否已结束(步骤3104)。在步骤3104中判断为否的情况下，音乐数据分割部44将文件号码自加一(步骤3105)，回到步骤3102。

在步骤3104中判断为是的情况下，音乐数据分割部44再次将文件号码初始化为“1”(步骤3106)，判断与文件号码所表示的音乐数据文件建立了对应的小节号码是否已经出现过(步骤3107)。在步骤3107中判断为是的情况下，除去具有该反复的小节号码的单位音乐数据文件(步骤3108)。音乐数据分割部44针对具有最后的文件号码的文件判断处理是否已结束(步骤3109)。在步骤3109中判断为否的情况下，音乐数据分割部44将文件号码自加一(步骤3110)，回到步骤3107。通过这样的处理，未被除去的单位音乐数据文件成为没有重复的最终的单位音乐数据文件。音乐数据分割部44将未被除去的单位音乐数据文件作为最终的单位音乐数据文件，与小节号码建立对应地保存到RAM15中(步骤3111)。

在图17所示的例子中，音乐数据分割部44参照乐谱要素数据文件，基于第5小节～第7小节被反复这一情况，判断为文件号码为第9号～第11号的单位音乐数据文件是反复的第5小节～第7小节，由此，判断为应该将第9号～第11号的单位音乐数据文件移除。同样地，检测到通过乐谱要素数据文件中的D.S.记号而从第13小节回到第5小节这一情况，还考虑到上述的反复记号及第12小节的反复省略记号的省略首端及第14小节的反复省略记号的省略尾端

判断出第17号～第26号的单位音乐数据文件反复，判断为应该将这些移除。

这样，音乐数据分割部44如图17所示，能够得到无反复的15个最终的单位音乐数据文件。此外，音乐数据分割部44对单位音乐数据文件的每一个按照文件的顺序附加小节号码。例如，附图标记1701、1705所示的文件表示单位音乐数据文件。作为除去了反复的结果，单位音乐数据文件仅由与图16(a)所示这样的乐谱的小节号码对应的文件构成，此外，单位音乐数据文件的顺序也与乐谱的小节号码的顺序一致。

如以下详述，在将单位音乐数据文件再现而发出乐音时，能够参照乐谱要素数据文件中的反复记号，根据反复记号能够确定应该再现的单位音乐数据文件。

以下，说明本实施方式的终端装置中的处理。图18是表示在本实施方式的终端装置中执行的处理的例子的流程图。如图18所示，若终端装置30的CPU31被接入终端装置30的电源，则执行初始化处理，该初始化处理包括RAM35中的数据和显示部33的显示画面的清除(步骤1801)。

若初始化处理(步骤1801)结束，则CPU31检测触摸面板32上的开关的各自的操作，执行面板开关处理(步骤1802)，该面板开关处理基于检测到的操作执行处理。例如，在显示部33的画面上显示有各种项目(参照图3的附图标记301)，通过由用户触摸项目，由CPU31检测触摸面板32上的开关操作。图19是表示本实施方式的面板开关处理的例子的流程图。

如图19所示，面板开关处理中包含有歌曲选择处理(步骤1901)、开始·停止开关处理(步骤1902)、其他面板开关处理(步骤1903)。图20是表示本实施方式的歌曲选择处理的例子的流程图。如图20所示，CPU31判断在触摸面板32上与歌曲按钮对应的位置是否被开启(步骤2001)。在步骤2001中判断为否的情况下，歌曲选择处理结束。

在步骤2001中判断为是的情况下，CPU31指示通信I/F37对中心装置10发送歌曲列表发送委托(步骤2002)。响应于此，通信I/F37对中心装置10发送歌曲列表发送委托，从中心装置10接收歌曲列表。CPU31将受理的歌曲列表显示在显示部33的画面上(步骤2003)。用户通过触摸显示部33上显示的光标按钮，能够指定期望的歌曲名。CPU31将在显示部33的画面上显示的歌曲列表中光标所处的歌曲名进行强调显示(步骤2004)。

CPU31若检测到显示部33所显示的决定开关已开启(步骤2005：是)，则指示通信I/F37对中心装置10发送所决定的歌曲名的乐曲的显示用乐谱数据文件、一系列的单位音乐数据文件及乐谱要素数据文件的发送委托(步骤2006)。响应于此，通信I/F37向中心装置10发送规定乐曲的显示用乐谱数据文件、一系列的单位音乐数据文件及乐谱要素数据文件的发送委托，从中心装置10受理该乐曲的显示用乐谱数据文件、一系列的单位音乐数据文件及乐谱要素数据文件(步骤2007)。CPU31将受理的显示用乐谱数据文件、一系列的单位音乐数据文件及乐谱要素数据文件保存到闪存器36中(步骤2007)。

接着，CPU31基于乐谱数据文件，在显示部33的画面上显示乐谱(步骤2008)。此外，CPU31基于乐谱要素数据文件中的垂直线及小节线的坐标，将乐谱中与开头小节对应的区域进行强调显示(步骤2009)。作为强调显示，例如可以仅将该部分做成其他颜色(红色)的半透明显示。

接着，说明开始·停止开关处理。图21是表示本实施方式的开始·停止开关处理的例子的流程图。如图21所示，CPU31判断是否对显示在显示部33上的开始·停止开关进行了操作(步骤2101)。在步骤2101中判断为否的情况下，结束开始·停止开关处理。

在步骤2101中判断为是的情况下，CPU31使保存于RAM35中的开始标志STF反转(步骤2102)，判断开始标志STF是否为“1”(步骤2103)。在步骤2103中判断为是的情况下，CPU31参照乐谱要素数据文件，确定规定的单位音乐数据文件(步骤2104)。例如，如果是最初的开始·停止开关的开启，则CPU31将开头的单位音乐数据文件确定为规定的单位音乐数据文件。或者，如果是通过开始·停止开关的操作而使乐曲的再现停止了的状态，那么CPU31将与停止的位置对应的单位音乐数据文件确定为规定单位音乐数据文件。

接着，CPU31在所确定的单位音乐数据文件中取得规定地址的数据记录(步骤2105)。所取得的数据记录例如保存于RAM35中。例如，如果是最初的开始·停止开关的开启，则CPU31取得开头地址的数据记录。或者，如果是通过开始·停止开关的操作而使乐曲的再现停止了的状态，则CPU31取得与停止的位置对应的数据记录。

此外，CPU31开始定时器中断(time interrupt)(步骤2106)。通过将定时器中断解除，以规定的时间间隔执行定时器中断处理，将设置在CPU31内部的定时器自加一。另外，在步骤2103中判断为否的情况下，即STF为“0”的情况下，CPU31将定时器中断停止(步骤2107)。

然后，CPU31执行其他面板开关处理(步骤1903)。其他面板开关处理中包含有通过拍子开关(tempo-switch)的操作进行的、对拍子数据的设定和将拍子数据向RAM23的保存等。

若面板开关处理(步骤1802)结束，则CPU31执行图像更新处理(步骤1803)。在图像更新处理中，CPU31在乐曲的再现正进行时，在显示的乐谱中将当前正演奏的小节的区域强调显示，或对显示在显示部33的画面上的乐谱的部分进行变更。将在后面再次说明图像更新处理。

若图像更新处理(步骤1803)结束，则CPU31执行演奏操作检测处理(步骤1804)。图22～图24是表示本实施方式的演奏操作检测处理的例子的流程图。如图22所示，CPU31判断是否对在显示部33中显示有乐谱的区域进行了操作(用户的接触)(步骤2201)。图25是表示在终端装置的显示部的画面上显示有乐谱的例子的图。在图25中，例如虚线2501的内侧区域为显示乐谱的区域。

在步骤2201中判断为是的情况下，CPU31取得用户所接触的位置的坐标(步骤2202)。在步骤2202中除了位置的坐标以外，还得到操作次数、操作时刻、操作时间(接触的时间长度)以及与上次操作之间的时间差值(时间推移)，将这些保存到RAM35中。接着，CPU31基于用户所接触的位置的坐标及乐谱要素数据文件，取得与接触的位置对应的小节号码(步骤2203)。

图26、27是详细表示图22的步骤2203的流程图。如图26所示，CPU31取得RAM35所保存的、被操作的位置的坐标、操作次数、操作时刻、操作时间(接触的时间长度)以及与上次操作之间的差值。接着，CPU31判断被操作的位置是否为小节线的附近(步骤2602)。在此，可以判断被操作的位置是否在包含小节线在内的前后左右规定的长方形的区域内。

在步骤2602中判断为是的情况下，CPU31参照乐谱要素数据文件，对于位于被操作的位置附近的小节线，判断是否存在重复记号(步骤2603)。在步骤2603中判断为是的情况下，CPU31将RAM35中的重复标志置位为“1”，并且将重复记号的信息保存到RAM35中(步骤2604)。

接着，CPU31判断被操作的位置是否是小节的范围内、即由五线和小节线围成的区域内(步骤2605)。在步骤2605中判断为是的情况下，CPU31参照乐谱要素数据文件，取得与被操作的位置对应的小节号码(步骤2606)。此外，CPU31判断操作时间是否大于规定的阈值Th1(步骤2607)。在步骤2607中判断为是的情况下，CPU31将静音标志置位为“1”(步骤2608)。在步骤2608中，除了静音标志的置位之外，CPU31还参照乐谱要素数据文件中的连谱线及五线的位置，在所显示的乐谱是由多个分谱构成的情况下，将与被操作的位置对应的分谱作为静音分谱，在RAM35中保存表示分谱的信息。作为表示分谱的信息，可以利用应该设为静音的五线的位置信息。

接着，CPU31判断是否是本次被操作的位置距离上次的操作位置在规定的范围内、并且作为操作间隔的差值小于规定的阈值Th2(步骤2701)。在步骤2701中判断为是的情况下，在操作次数上加上本次的操作次数，将新的操作次数保存到RAM35中(步骤2702)。然后，CPU31通过用户在乐谱上的操作，取得接下来应该演奏的小节号码(步骤2703)。

图28是详细表示图27的步骤2703的流程图。如图28所示，CPU31判断RAM35所保存的反复的结束次数是否为反复次数以下(步骤2801)。在步骤2801中判断为是的情况下，小节的反复未结束。这种情况下，CPU31判断反复次数是否为2以上(步骤2802)。在步骤2802中判断为是的情况下，CPU31将下一小节号码作为与当前的小节号码相同的号码保存到RAM35中(步骤2803)。接着，CPU31将表示RAM35中的结束次数的参数自加一(步骤2804)。在步骤2801中判断为否的情况下，即结束次数多于反复次数的情况下，CPU31将保存于RAM35中的表示反复次数的参数及表示结束次数的参数重置为“0”(步骤2805)。

在步骤2802中判断为否的情况下，或者在步骤2805之后，CPU31判断RAM35所保存的重复标志是否为“0”(步骤2806)。在步骤2806中判断为是的情况下，CPU31将下一小节号码作为在当前的小节号码上加上“1”之后的号码，保存到RAM35中(步骤2807)。在步骤2806中判断为否的情况下，意味着存在重复记号。因此，CPU31执行重复目标决定处理(步骤2808)。关于重复目标决定处理将在后面详述。

若图22的步骤2203结束，则CPU31判断开始标志STF是否为“1”(步骤2204)。在步骤2204中，判断当前是否正在演奏乐曲。在步骤2204中判断为是的情况下，CPU31判断是否是RAM35中的重复标志为“0”并且静音标志为“0”(步骤2205)。在步骤2205中，在乐曲演奏中显示的乐谱上进行了操作时，判断为其不是分谱的静音或反复的指示。

在步骤2205中判断为是的情况下，进而判断表示RAM35中的反复次数的参数是否为“0”(步骤2206)。在步骤2206中判断为是的情况下，CPU31针对单位音乐数据文件的数据记录中之中的、当前正发音的乐音，生成音符关闭事件，并指示给音源部39(步骤2207)。此外，CPU31停止定时器中断(步骤2208)，并且将开始标志STF重置为“0”(步骤2209)。

在步骤2204～2206的任一个中判断为否的情况下，或者在执行了步骤2209之后，进入步骤2301。在步骤2301中，CPU31判断是否是开始标志STF为“1”并且静音标志为“1”(步骤2301)。在步骤2301中判断为是的情况下，CPU31针对单位音乐数据文件的数据记录之中的、与静音分谱对应的音色、音高的乐音生成音符关闭事件，并指示给音源部39(步骤2302)。基于乐谱要素数据文件中的应该静音的五线的位置信息，能够决定应该静音的分谱的音色。

此外，CPU31判断下一小节号码是否与当前的小节号码不一致(步骤2303)。在步骤2303中判断为是的情况下，取得与下一小节号码对应的单位音乐数据文件(步骤2304)。然后，取得所取得的单位音乐数据文件的开头地址的数据记录，并保存到RAM35中(步骤2305)。然后，CPU31将定时器中断解除(步骤2306)，并且将开始标志STF置位为“1”(步骤2307)。

在步骤2201中判断为否的情况下，CPU31判断开始标志是否为“1”(步骤2401)。在步骤2401中判断为是的情况下，CPU31参照单位音乐数据文件，判断当前发音中的乐音是否为小节的末尾的乐音(步骤2402)。在步骤2401或2402中判断为否的情况下，结束演奏操作检测处理。

在步骤2402中判断为是的情况下，CPU31参照乐谱要素数据文件，确定下一小节号码(步骤2403)。如后所述，在乐谱要素数据文件中，在当前的小节的末尾不存在重复记号的情况下，CPU31将下一小节号码作为在当前的小节号码上加上“1”之后的号码保存到RAM35中。此外，在乐谱要素数据文件中，在当前的小节的末尾存在重复记号的情况下，或者得到了在当前的小节号码上加上“1”之后的下一小节号码的情况下，在与该下一小节号码对应的小节的开头存在重复记号的情况下(步骤2404：是)，CPU31执行重复目标决定处理(步骤2405)。在步骤2404中判断为否的情况下，或在步骤2405之后，进入步骤2304。

图29是表示本实施方式的重复记号处理的例子的流程图。在本实施方式中，重复记号被分为第1群和第2群，所述第1群包含有所谓的反复的开头记号

及末端记号

以及与此关联的带号码的括号，所述第2群包含有D.S.记号、D.C.记号、反复省略记号的省略首端

表示跳跃到相同记号之处的记号(反复省略记号的省略尾端

)、

记号。此外，对于第1群及第2群的每一个，各记号与开始(Start)、结束(End)、目的地(To)、出发地(From)这4个记号种类建立有对应。

例如，属于第1群的重复记号与以下的记号种类建立有对应。

反复的开头记号开始(Start)

反复的结束记号：结束(End)

带号码的括号中的、最终号码以外的括号：出发地(From)

带号码的括号中的、最终号码的括号：目的地(To)。

此外，属于第2群的重复记号与以下的记号种类建立有对应。

D.C.记号：结束(End)

D.S.记号：结束(End)

曲开头：开始(Start)，但仅限于存在D.C.记号的情况

记号：开始(Start)

表示跳跃到相同记号之处的记号：出发地(From)

反复省略记号的省略尾端目的地(To)。

因此，在乐谱要素数据文件中，与小节号码相对应地，包含有重复记号所属的群(第1群或第2群)及重复记号的名称及记号种类。此外，对于带号码的括号，除了上述信息以外，还附加有重复指定数(即与反复号码相当的数字)。

重复记号处理按照每个群来执行。因此，针对第1群的重复记号的重复记号处理及针对第2群的重复记号的重复记号处理被分别执行。如图29所示，CPU31参照重复记号种类(步骤2901)。重复记号种类为开始(Start)的情况下，CPU31保存当前的小节号码作为RAM35中的重复位置(步骤2902)。

在重复种类为结束(End)的情况下，CPU31作为RAM35中的下一小节号码，设置重复位置的小节号码(步骤2903)。此外，CPU31将表示与RAM35中的重复记号有关的反复次数的参数自加一(步骤2904)。在重复记号种类为目的地(To)的情况下，结束处理。

在重复希望种类为出发地(From)的情况下，CPU31判断RAM35中的与重复记号有关的反复次数是否为重复指定数以上(步骤2905)。在步骤2905中判断为否的情况下，结束处理。另一方面，在步骤2905中判断为是的情况下，CPU31在乐谱要素数据文件中检索包含有表示重复记号种类的目的地(To)的重复记号的小节(步骤2906)。另外，在此，检索属于同一群的重复记号。CPU31作为RAM35中的下一小节号码，设置检索到的小节号码(步骤2907)。此外，CPU31将与重复记号有关的反复次数重置为“0”(步骤2908)。

若演奏操作检测处理(图18的步骤1804)结束，则CPU31执行歌曲处理(步骤1805)。图30是表示本实施方式的歌曲处理的例子的流程图。如图30所示，CPU31使单位音乐数据文件的地址递增(步骤3001)。在步骤3001中，通过地址的递增，成为表示时间的数据记录的地址。CPU31判断地址是否已经成为单位音乐数据文件的末尾(步骤3002)。在步骤3002中判断为是的情况下，CPU31参照保存于RAM35中的下一小节号码，取得具有该下一小节号码的单位音乐数据文件(步骤3003)。

然后，CPU31在单位音乐数据文件中，参照地址所示的数据记录中的时间信息(步骤3004)，判断当前时刻是否已到达基于时间信息的下一事件的执行定时(步骤3005)。在步骤3005中判断为是的情况下，CPU31判断RAM35中的静音标志是否为“0”(步骤3006)。在步骤3006中判断为否的情况下，CPU31参照后续于时间信息的数据记录，判断事件是否与静音分谱的音色相关联(步骤3007)。在步骤3007中判断为是的情况下，结束歌曲处理。

在步骤3006中判断为是、或在步骤3007中判断为否的情况下，CPU31执行发音·消音处理(步骤3008)。在步骤3008中，CPU31参照后续于时间信息的数据记录，如果该事件是音符开启事件，则生成表示数据记录所示的音色及音高下的发音的音符开启事件，并输出到音源部39。此外，如果事件为音符关闭事件，则CPU31参照对数据记录所示的音色及音高下发音中的乐音进行消音的音符关闭事件，并输出到音源部39。

若歌曲处理(步骤1805)结束，则在音源部39中执行音源发音处理(步骤1806)。在音源发音处理中，音源部39若从CPU31受理音符开启事件，则基于音符开启事件所包含的音高及音色信息，以基于音高的速度从ROM34读出规定的音色的波形数据，生成规定的乐音数据。此外，音源部39若从CPU31受理音符关闭事件，则对音符关闭事件所示的音色及音高的乐音进行消音。

若音源发音处理(步骤1806)结束，则CPU31执行其他处理(步骤1807)，回到步骤1802。其他处理包括经由通信I/F37的与中心装置10之间的数据收发、从存储卡等外部存储介质(未图示)的数据读出、向外部存储介质的数据写入等。

接着，再次说明图18的步骤1803的图像更新处理。图32是表示本实施方式的图像更新处理的例子的流程图。如图32所示，CPU32判断开始标志STF是否为“1”(步骤3201)。在步骤3201中判断为否的情况下，结束图像更新处理。在步骤3201中判断为是的情况下，CPU31判断在RAM35中是否保存有下一小节号码(步骤3202)。在步骤3202中判断为是的情况下，将与下一小节号码对应的小节的区域进行强调显示(步骤3203)。然后，CPU31将下一小节号码作为当前的小节号码保存到RAM35中，并且将下一小节号码清除(步骤3204)。

然后，CPU31取得当前强调显示的小节的区域的位置(步骤3205)，判断该位置是否在图像中右下的显示范围内(步骤3206)。在步骤3206中，判断当前演奏中的小节是否位于图像中的右下侧(末端)。在步骤3206中判断为是的情况下，CPU31将当前强调显示的小节作为开头，读出与规定小节数对应的乐谱数据文件的部分(步骤3207)，将读出的乐谱数据文件的区域显示在显示部33的画面上(步骤3208)。

根据本实施方式，乐谱要素提取部42在图像数据文件中的乐谱中，基于作为该乐谱的构成要素的连谱线、五线及小节线的位置，确定所述乐谱中的小节的各自的区域及小节号码。音乐数据分割部44基于音乐数据文件中的时间信息，将音乐数据文件分割，生成以每小节为单位的、包含有表示音高的信息及时间信息的、多个单位音乐数据文件。此外，音乐数据分割部44在图像数据文件中的乐谱中，基于作为该乐谱的构成要素的反复记号的种类及其位置、以及连谱线、五线及小节线的位置，确定反复记号所处的小节，从多个单位音乐数据文件中除去由于反复而相重复的单位音乐数据文件，取得没有重复的最终的单位音乐数据文件，并且将最终的单位音乐数据文件与小节号码建立对应地保存到RAM35中。因此，在本实施方式中，能够得到分别与乐谱的小节1对1对应的单位音乐数据文件。

此外，在本实施方式中，能够使用上述图像数据文件、单位音乐数据文件、乐谱要素数据文件，从用户期望的位置开始数据再现。终端装置30具有：显示部33，显示基于图像数据的乐谱的图像；以及触摸面板32，与显示部33重叠配置，用于检测显示部33上的操作位置。CPU31读出单位音乐数据文件，基于所述音乐数据，对乐音生成单元指示乐音的发音。特别是，CPU31参照乐谱要素数据文件，确定与所述位置检测单元检测到的操作位置对应的、在所述显示的乐谱中的位置，基于与所述乐谱中的位置对应的单位音乐数据文件中的音乐数据，对所述乐音生成单元指示乐音的发音。因此，通过由用户在显示于显示部33的乐谱中指示期望的位置，能够再现所指定的小节的乐曲。

此外，在本实施方式中，乐谱要素数据文件包含有反复记号的种类及位置，在多个单位音乐数据文件中，基于所述乐谱中的作为该乐谱的构成要素的反复记号的种类及位置，除去由于反复而相重复。因此，能够进行包含有反复记号的乐谱的显示、基于该乐谱中的位置对单位音乐文件的指定。

在本实施方式中，CPU31结束了基于单位音乐数据文件的音乐数据的发音的指示后，对单位音乐数据文件读出与下一小节对应的单位音乐数据文件，基于该读出的单位音乐数据文件中的音乐数据来指示发音。由此，能够实现基于所指定的乐谱中的位置的小节以后的乐曲的再现。

此外，在本实施方式中，CPU31检测向触摸面板32的操作次数，基于操作位置及操作次数，确定所显示的乐谱中的位置及其操作次数。此外，CPU31使基于与乐谱中的位置对应的单位音乐数据文件的音乐数据进行的发音指示反复进行操作次数的次数。由此，用户能够以期望的次数反复乐曲中的期望的小节的再现。

进而，在本实施方式中，CPU31以操作次数反复了基于单位音乐数据文件的音乐数据进行的发音指示后，对单位音乐数据文件读出与下一小节对应的单位音乐数据文件，基于该读出的单位音乐数据文件中的音乐数据来指示发音。由此，能够在小节反复规定次数后，实现从下一小节开始的再现。

本发明不限于以上的实施方式。例如，在所述实施方式中，由中心装置10生成显示用乐谱数据文件、乐谱要素数据文件及单位音乐数据文件，所生成的数据文件被发送给终端装置30。终端装置30将接收到的显示用乐谱数据文件显示在显示部33的画面上，并且一边参照乐谱要素数据文件一边实现基于单位音乐数据文件的乐曲演奏。但是，在中心装置10中，也可以利用包含有音源部19的音响系统18，中心装置10一边参照乐谱要素数据文件一边进行基于单位音乐数据文件的乐曲演奏。同样地，也可以在中心装置10中实现基于显示用乐谱数据文件的乐谱的显示和小节的指定等。

以上详细说明了本发明的实施方式，但是本发明的范围不限于上述的实施方式，权利要求书中记载的发明及其等同范围包含于本发明的范围内。

Claims (17)

1.一种乐谱信息生成装置，其中，具备：

存储单元，保存有音乐数据和图像数据，该音乐数据包括表示构成乐曲的各乐音的音高的音高信息和表示发音定时的时间信息，该图像数据对所述乐曲的乐谱进行表示；

小节确定单元，基于作为所述乐谱的构成要素的连谱线、五线及小节线的位置，确定各小节的区域及小节号码；

单位音乐数据生成单元，基于所述音乐数据中的时间信息，将所述音乐数据分割，生成多个以每小节为单位的包含有音高信息及时间信息的单位音乐数据；

反复记号位置确定单元，基于作为所述乐谱的构成要素的反复记号的种类及其位置、以及所述连谱线、五线及小节线的位置，确定反复记号所处的小节；

单位音乐数据取得单元，从所述多个单位音乐数据取得没有重复的最终的单位音乐数据，并且，将该最终的单位音乐数据和所述小节号码建立对应地保存于所述存储单元；以及

乐谱要素数据生成单元，生成乐谱要素数据并保存于所述存储单元，该乐谱要素数据包含有所述乐谱中的连谱线、五线及小节线所存在的位置、该各小节的区域及小节号码、以及所述反复记号的种类及位置。

2.如权利要求1所述的乐谱信息生成装置，其中，

具备：

位置检测单元，从所述图像数据检测作为所述乐谱的构成要素的连谱线、五线及小节线所存在的位置。

3.如权利要求2所述的乐谱信息生成装置，其中，

所述位置检测单元在所述乐谱中从左端起在规定的范围内，检测与垂直线相当的像素群，基于该像素群检测所述连谱线的位置。

4.如权利要求2所述的乐谱信息生成装置，其中，

所述位置检测单元沿垂直方向在所述连谱线所存在的范围内，对与水平方向的黑点相当的像素数进行计数，基于该像素数，确定构成五线的线，检测五线所存在的位置。

5.如权利要求2所述的乐谱信息生成装置，其中，

所述位置检测单元沿垂直方向在所述连谱线所存在的范围内，检测与在乐谱上位于该连谱线右侧的垂直线相当的像素群，基于该像素群检测所述小节线的位置。

6.如权利要求1所述的乐谱信息生成装置，其中，

具备：

反复记号检测单元，检测作为所述乐谱的构成要素的反复记号的种类及位置。

7.如权利要求1所述的乐谱信息生成装置，其中，

所述单位音乐数据取得单元具有：

小节号码计算单元，计算与每个所述单位音乐数据对应的小节号码；以及

除去单元，判断具有该计算出的小节号码的单位音乐数据是否已经存在，在存在的情况下，除去具有该小节号码的单位音乐数据。

8.如权利要求1所述的乐谱信息生成装置，其中，

所述乐谱信息生成装置还具有：

符号描绘单元，在所述反复记号被确定的位置，描绘与该确定的反复记号的种类对应的符号，

所述单位音乐数据取得单元在所述乐谱中，基于作为该乐谱的构成要素的所述连谱线、五线及小节线的位置、以及所述描绘的符号及其位置，确定该符号所处的小节。

9.如权利要求1所述的乐谱信息生成装置，其中，

所述反复记号确定单元具有：

计算单元，计算所述乐谱的图像数据中的各区的图像与成为确定对象的反复记号的图像之间的相关值；

最大相关值区检测单元，检测由所述计算单元计算出的相关值成为最大的区；以及

区确定单元，计算所述最大相关值区检测单元检测到的区的图像数据与所述乐谱的图像数据中的各区的图像之间的相关值，并且，确定该计算出的相关值大于一定阈值的区；

将所述乐谱的图像数据上的该确定的区的位置作为成为所述确定对象的反复记号的位置。

10.一种乐音生成控制装置，其中，具有：

权利要求1所述的乐谱信息生成装置；

显示单元，显示乐谱的图像，该乐谱的图像基于对所述乐曲的乐谱进行表示的图像数据；

位置检测单元，与所述显示单元重叠配置，用于检测所述显示单元上的操作位置；

位置确定单元，参照所述保存的乐谱要素数据，确定与所述位置检测单元检测到的操作位置对应的在所述显示的乐谱中的位置；以及

发音控制单元，从所述存储单元读出与所述确定的在乐谱中的位置对应的最终的单位音乐数据，并且，基于该读出的音乐数据对乐音生成单元指示乐音的发音。

11.如权利要求10所述的乐音生成控制装置，其中，

所述发音控制单元在结束了基于所述最终的单位音乐数据中的音乐数据进行的发音指示后，针对该最终的单位音乐数据读出与下一小节对应的单位音乐数据，基于该读出的单位音乐数据中的音乐数据来指示发音。

12.如权利要求10所述的乐音生成控制装置，其中，

所述位置确定单元检测所述显示单元上的操作次数，基于所述操作位置及所述操作次数，确定所述显示的乐谱中的位置及其操作次数；

所述发音控制单元以所述操作次数来反复进行基于与所述乐谱中的位置对应的所述最终的单位音乐数据的音乐数据进行的发音指示。

13.如权利要求12所述的乐音生成控制装置，其中，

所述发音控制单元在以所述操作次数反复了基于所述单位音乐数据的音乐数据进行的发音指示后，针对所述单位音乐数据读出与下一小节对应的单位音乐数据，基于该读出的单位音乐数据中的音乐数据来指示发音。

14.一种乐音生成控制装置，其中，具备：

权利要求1所述的乐谱信息生成装置；以及

发音控制单元，参照所述保存的乐谱要素数据，检测与包含有应该发出的乐音的所述最终的单位音乐数据对应的反复记号，基于该反复记号，决定接下来应该读出的最终的单位音乐数据，并从所述存储单元读出该决定的最终的单位音乐数据，基于所述音乐数据对乐音生成单元指示乐音的发音。

15.如权利要求14所述的乐音生成控制装置，其中，

作为所述反复记号的种类，包含有反复的开头记号及反复的末端记号；

所述发音控制单元，

对于所述单位音乐数据，在乐谱要素数据中作为反复记号含有反复的开头记号的情况下，作为重复位置，将该单位音乐数据的小节号码保存于存储单元，

对于所述单位音乐数据，在乐谱要素数据中作为反复记号含有反复的末端记号的情况下，基于在所述存储单元中作为重复位置所保存的小节号码，决定接下来应该读出的最终的单位音乐数据。

16.如权利要求14所述的乐音生成控制装置，其中，

作为所述反复记号的种类，包含有带号码的括号；

所述发音控制单元，

对于所述单位音乐数据，在乐谱要素数据中作为反复记号含有带号码的括号的情况下，如果该号码小于表示反复次数的重复指定数，则根据作为所述重复位置的小节号码，决定接下来应该读出的最终的单位音乐数据，如果所述号码为所述重复指定数以上，则基于所述乐谱要素数据所包含的、表示目的地的小节号码，决定接下来应该读出的最终的单位音乐数据。

17.一种乐谱信息生成方法，应用于具有存储单元的乐谱信息生成装置，该存储单元存储音乐数据和图像数据，该音乐数据包含有表示构成乐曲的各乐音的音高的音高信息和表示发音定时的时间信息，该图像数据对所述乐曲的乐谱进行表示，该乐谱信息生成方法具有以下步骤：

小节确定步骤，基于作为所述乐谱的构成要素的连谱线、五线及小节线的位置，确定所述乐谱中的各小节的区域及小节号码；

单位音乐数据文件生成步骤，基于所述音乐数据中的时间信息，将所述音乐数据分割，生成多个以每小节为单位的包含有音高信息及时间信息的单位音乐数据；

反复记号位置确定步骤，基于作为所述乐谱的构成要素的反复记号的种类及其位置、以及所述连谱线、五线及小节线的位置，确定反复记号所处的小节；

单位音乐数据取得步骤，从所述多个单位音乐数据取得没有重复的最终的单位音乐数据文件，并且，将该最终的单位音乐数据和所述小节号码建立对应地保存于所述存储单元；以及

乐谱要素数据生成步骤，生成乐谱要素数据并保存于所述存储单元，所述乐谱要素数据包含有所述乐谱中的连谱线、五线及小节线所存在的位置、该各小节的区域及小节号码、所述反复记号的种类及位置。

Images