CN1225117C - 图像以及声音的重放装置及方法 - Google Patents

Abstract

本发明提供一种将通过数码照相机、数码摄像机等的图像获取装置得到的图像信号及声音信号自动连续地重放的图像及声音的重放装置以及方法。将记录了图像信号的数据、记录了声音信号的数据或者多重记录了图像信号与声音信号的数据中的至少之一与三者中至少之一或记载有相关于任意地组合这三者之后的重放的信息的重放信息数据保持在存储装置中。在该重放信息数据中用户能自由容易组合地记载图像数据、声音数据、图像/声音多重数据且能对它们进行编集。CPU根据该重放信息数据从存储装置读出图像数据、声音数据并进行解码，根据需要变换数据格式并利用同步控制装置同步地重放图像与声音。

Description

图像以及声音的重放装置及方法

技术领域

本发明涉及将通过数码照相机、数码摄像机等的图像获取装置得到的图像信号以及声音信号自动连续地进行重放的图像以及声音的重放装置以及方法。

背景技术

作为利用数码相机的图像显示系统的一示例已知特开平11-88808号公报所揭示的装置。该装置如图37所示，用户在存储卡(闪速存储卡)上作为显示管理信息文件3702而作成由数码相机选择的视频文件3701的文件名。图37中的控制液晶显示装置等的显示装置3703的显示控制装置3705利用显示管理信息获取装置3704从存储卡的显示管理信息文件3702中获得要显示的图像的文件名并且顺次在显示装置3703上进行显示。

然而，在上述以往的示例中，处理文件仅是记录了图像信号的文件，例如不能够将单独的声音数据以及与取得图像同时地被记录的声音数据与图像同步地进行重放，而且至今还未提出解决这个问题的技术。

发明内容

本发明针对上述问题目的在于提供一种用户自由且容易地组合图像数据、声音数据、多重记录的图像与声音数据，并自动连续地进行重放的装置以及方法。

为了解决上述问题，本发明的第一方面提供了一种图像以及声音的重放装置，其特征在于，具备存储媒体，分别独立保持图像数据的文件、声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件、以及自动重放控制文件，其中，所述自动重放控制文件记载了与所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的自动重放相关的信息或者记载了与将这些文件任意组合形成的文件的自动重放相关的信息；读出装置，读出所述存储媒体的存储内容；解码器，将从所述存储媒体中读出的图像数据的文件、声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件进行解码并重放；同步控制装置，对由所述解码器解码的图像信号和声音信号进行同步控制；写入装置，将自动重放控制文件写入所述存储媒体；以及中央处理器，在写入时控制所述写入装置，在重放时根据从所述存储媒体读出的自动重放控制文件控制所述读出装置与所述同步控制装置，在保持于所述存储媒体中的自动重放控制文件中，重放的对象即所述图像数据的文件被指定为图像数据、重放的对象即所述声音数据的文件被指定为声音数据、多重存放了图像数据和声音数据的文件的图像数据部分作为重放的对象被指定为图像数据、多重存放了图像数据和声音数据的文件的声音数据部分作为重放的对象被指定为声音数据，所述声音数据的文件、多重存放了图像数据和声音数据的文件的声音数据部分，能够被独立地指定为与图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分同步地被重放，所述图像数据的文件、多重存放了图像数据和声音数据的文件的图像数据部分能够被独立地指定为与声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分同步地被重放。

本发明的第二方面提供了一种图像以及声音的重放方法，其特征在于，包括下述步骤：从存储媒体，根据记载了与图像数据的文件、声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的自动重放相关的信息或者记载了与将这些文件任意组合形成的文件的自动重放相关的信息的自动重放控制文件，读出所述存储媒体中存储的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件；以及对从所述存储媒体读出的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件进行同步控制并同时进行解码；在保持于所述存储媒体中的自动重放控制文件中，重放的对象即所述图像数据的文件被指定为图像数据、重放的对象即所述声音数据的文件被指定为声音数据、多重存放了图像数据和声音数据的文件的图像数据部分作为重放的对象被指定为图像数据、多重存放了图像数据和声音数据的文件的声音数据部分作为重放的对象被指定为声音数据，所述声音数据的文件、多重存放了图像数据和声音数据的文件的声音数据部分，能够被独立地指定为与图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分同步地被重放，所述图像数据的文件、多重存放了图像数据和声音数据的文件的图像数据部分能够被独立地指定为与声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分同步地被重放。

根据这样的构造或者方法以及以下的种种展开，按照所述相关于重放的信息用户能够自由并且简单地组合记录了图像信号的数据文件、记录了声音信号的数据文件以及多重记录了图像信号及声音信号的数据文件的那样的不同形式的数据，或者使得图像信号与声音信号同步、或者在图像以及声音上附加各种附加信息、或者附加改变重放数据顺序等的变更而能够容易地连续地进行重放。

在上述本发明中，在所述重放信息数据中预先记载有用于特定保持于所述存储装置的数据中作为重放对象的数据的信息。

又，在所述重放信息数据中预先记载有重放保持于所述存储装置的数据的顺序。

又，在所述重放信息数据中预先记载有表示重放保持于所述存储装置的数的时间的信息。

又，在所述重放信息数据中预先记载有表示重放保持于所述存储装置的数的时刻的信息。

又，在所述重放信息数据中，当指定多重记录了图像信号与声音信号的数据时，能够将多重记录了所述图像信号与声音信号的数据的图像信号部分与声音信号部分分别个别地作为重放对象进行指定。

又，在所述重放信息数据中将相关于所述数据的重放的信息每归纳成至少一组地进行记载，在所述组内至少能够记载一个用于特定作为重放对象的数据的信息。

又，在所述重放信息数据中将相关于所述数据的重放的信息每归纳成至少一组地进行记载，在所述组内分别一个一个地记载用于特定记录了图像信号的数据或者多重记录了图像信号与声音信号的数据的图像信号部分中的任意之一以及记录了声音信号的数据或者多重记录图像信号与声音信号的数据的声音信号部分中的任意之一的信息。

再者，在所述重放信息数据的组中，当记载用于特定多重记录了图像信号与声音信号的数据的信息时，在同一组内没有记载用于特定记录了图像信号的数据、多重记录了图像信号与声音信号的数据的图像信号部分、记录了声音信号的数据或者多重记录了图像信号与声音信号的数据的声音信号部分的信息。

对于本发明以及上述的各种展开的方面，通过以组为单位来编集重放信息数据而能够生成新的重放信息数据。

对于本发明以及上述的展开，能够通过格式变换装置变换根据所述重放信息数据被重放的记录了图像信号的数据、记录了声音信号的数据或者多重记录了图像信号与声音信号的数据的格式。

对于本发明以及上述的展开，能够通过编码装置将根据所述重放信息数据被重放的图像信号与声音信号进行编码。

对于本发明以及上述的展开，将存放了使得与记录了图像信号的数据、记录了声音信号的数据或者多重记录了图像信号与声音信号的数据中至少之一合成的信息的合成信息数据存储到所述存储装置中，在所述重放信息数据中能够记载用于特定作为重放对象的数据的信息以及用于特定一个以上的所述合成信息数据的信息。

对于本发明以及上述的展开的一部分，用于特定作为所述重放对象的数据的信息可以指赋与作为重放对象的数据的名称。

对于本发明的上述展开，其特征在于，采用重放装置根据所述重放信息数据从保持于所述存储装置中的数据起进行图像信号与声音信号的重放。

对于所述展开，作为所述重放装置，能够采用对数据进行译码的解码器或者从存储装置读出数据的读出装置以及对数据进行解码的解码器中的任意之一。

对于上述展开中的采用合成信息的方面，所述合成信息文件可以是包含于记录了图像信号的数据文件、记录了声音信号的数据文件或者多重记录了图像信号与声音信号的数据文件中的图像、声音、文本中的任意之一。

附图简述

图1是表述本发明实施形态1～5的图像以及声音的重放装置的框图。

图2是表示该实施形态1～4的图像以及声音的重放装置的操作面的配置图。

图3是表示存储在该实施形态1～4的存储装置中的图像文件、声音文件、图像/声音多重文件的模式图。

图4表示该实施形态1的自动重放控制文件的内容。

图5表示该实施形态1中的自动重放动作的流程图。

图6是用于说明该实施形态1中被自动重放的图像与声音的说明图。

图7表示该实施形态2中的自动重放控制文件的内容。

图8表示该实施形态2中被自动重放的图像与声音的说明图。

图9表示该实施形态3中自动重放的控制文件的内容。

图10该实施形态3中的自动重放动作的流程图。

图11是用于说明该实施形态3中的被自动重放的图像与声音的说明图。

图12表示该实施形态4的自动重放控制文件的内容。

图13是表示该实施形态4的自动重放动作的流程图。

图14是用于说明该实施形态4中的被自动重放的图像与声音的说明图。

图15是在该实施形态4中用于说明以文字列“CMP_SRC”所指定的文件的群内记载方法的示例的说明图。

图16表示用于说明在该实施形态4中以文字列“CMP_SRC”所指定的文件的群内记载方法示例的自动重放控制文件的不适当的记载内容。

图17表示用于说明在该实施形态4中以文字列“CMP_SRC”所指定的文件的群内记载方法示例的自动重放控制文件的适当的记载内容。

图18表示该实施形态5的图像以及声音的重放装置的操作面的配置图。

图19表示该实施形态5的自动重放控制文件的内容。

图20是用于说明该实施形态5中的被自动重放的图像与声音的说明图。

图21是用于说明从该实施形态5的多个自动重放控制文件中编集新的自动重放控制文件的方法的概念的说明图。

图22是表示该实施形态6的图像以及声音的重放装置的框图。

图23是表示该实施形态6的图像以及声音的重放装置的其他示例的框图。

图24是表示该实施形态7中的图像以及声音的重放装置的框图。

图25是表示该实施形态7中的解码器/合成装置的框图。

图26是该实施形态7中的图像以及声音的重放装置的操作面的配置图。

图27是表示该实施形态7的存储装置上存储的附加信息文件的模式图。

图28表示该实施形态7的自动重放控制文件的内容。

图29是该实施形态7的自动重放动作的流程图。

图30是用于说明该实施形态7中被自动重放的图像、声音与附加信息文件的合成的说明图。

图31是该实施形态8的图像以及声音的重放装置的操作面的配置图。

图32表示该实施形态8中的自动重放控制文件的内容。

图33表示该实施形态8的自动重放动作的流程图。

图34是用于说明该实施形态8中的被自动重放的图像与声音的重放时间的说明图。

图35表示该实施形态8中的自动重放控制文件的其他示例。

图36表示该实施形态8中自动重放控制文件的其他示例。

图37是表示以往示例的自动重放装置的示例的框图。

具体实施形态

以下参照附图对于本发明的实施形态进行说明。

(实施形态1)

图1是表示本发明的实施形态1～5的图像以及声音的重放装置构造的框图。在图1中，存储装置101存储利用数码照相机、数码摄像机或者扫描器等的设备获得(编码)的图像以及声音的数字数据。存储装置101在下述所有的实施形态中可以是硬盘装置那样的固定装置，也可以是闪速存储卡那样的可以取出的装置。而且，存储媒体可以是半导体存储器、磁性盘片、磁带、光盘等任意的。图像文件102是记录在存储装置101中的图像数据的文件，声音文件103是相同的声音数据的文件，图像/声音多重文件104是将相同的图像数据与声音数据多重地存放在1个文件内的文件。又，自动重放控制文件105是存放表示组合并连续重放图像文件102、声音文件103、图像/声音多重文件104时重放数据以及重放顺序的信息的文件。然而，在图1中，为了简单化，仅表示了各一个图像文件102、声音文件103、图像/声音多重文件104、自动重放控制文件105，而不仅限于此，实际上可以分别存在多个文件。又，不一定将图像文件102、声音文件103、图像/声音多重文件104都记录到存储装置101，例如也存在没有将图像文件102记录到存储装置101中的情况。

读出装置106是读出记录在存储装置101中的各文件的装置，它是重放装置之一。写入装置107是将自动重放控制文件105写入到存储装置101的装置。解码器108是作为重放装置的用于将从存储装置101读出的图像文件102、声音文件103、图像/声音多重文件104解码重放的装置。作为重放装置可以仅指解码器108，也可以指解码器108与读出装置106。此时，同步控制装置109根据自动重放控制文件105的信息控制在解码器108中的解码使得从解码器108输出的图像信号与声音信号符合自动重放控制文件105的信息而形成规定的同步关系。

中央处理器(CPU)110根据来自操作键111的输入生成自动重放控制文件105，或者根据自动重放控制文件105的信息控制读出装置106、同步控制装置109并且控制图像文件等的读出以及读出后的文件在解码器108的解码及重放。

显示装置112是显示由解码器108解码后的图像信号的液晶显示装置以及阴极射线管装置(CRT)这样的显示装置，扬声器113是用于重放由解码器108解码后的声音信号的装置。

图2表示实施形态1～4的图像以及声音重放装置的操作面的配置。

按键201～209是构成图1所示的操作键111的各种按键，键输入信号被送往图1所示的CPU110。各自的主要功能如下所述。

当按下图像文件重放模式选择按键201时，成为存储装置101上的图像文件的重放模式，CPU110控制读出装置106并且读出记录在存储装置101的图像文件以及图像/声音多重文件的其中之一，在利用解码器108的解码之后，在显示装置112上显示读出的文件的图像。

当按下声音文件重放模式选择按键202时，成为存储装置101上的声音文件的重放模式，CPU110控制读出装置106并且读出记录在存储装置101的声音文件以及图像/声音多重文件的其中之一，在利用解码器108的解码之后，通过扬声器113重放读出的文件的声音。

当按下图像/声音多重文件重放模式选择按键203时，成为存储装置101上的图像/声音多重文件的重放模式，CPU110控制读出装置106并且读出记录在存储装置101的图像/声音多重文件的其中之一，在利用解码器108的解码之后，在显示装置112上显示读出的文件的图像、通过扬声器113重放声音。

移动按键204是在重放与当前重放中的文件不同的其他文件时所按的按键，返回按键205是重放前一重放的文件时所按的按键。确认按键206是作为自动重放的对象选择重放后的文件时所按的按键。

当按下组化按键207时，CPU110将组ID序号附加给特定的文件组，与特定的文字列同时将文件名写入到自动重放控制文件中。

当按下新的重放控制文件作成按键208时，CPU110控制写入装置107并且在存储装置101上重新作成自动重放控制文件。

当按下自动重放按键209时，CPU110根据自动重放控制文件105的信息控制读出装置106、同步控制装置109并且读出存储装置101上的文件而自动地进行重放。

图3是表示实施形态1～4中存储在存储装置101中的图像文件、声音文件、图像/声音多重文件的模式图。在图3中，图像文件A、B、C是分别存放了图像数据的文件。声音文件A、B、C是分别存放了声音数据的文件。图像/声音多重文件A、B是分别是在一个文件中多重存放图像与声音的数据的文件。以下，对于在存储装置101上记录了图3所示的8个文件的情况进行说明。

以下，对于上述构造的本实施形态的动作进行说明。

用户自由地合并记录在存储装置101上的图像文件、声音文件、图像/声音多重文件并进行重放时，首先按照下述步骤生成自动重放控制文件105。

首先，用户在图3所示的8个文件中的图像方面以下述顺序连续重放图像文件B与图像/声音多重文件A的图像部分，对于声音方面以下述顺序连续重放声音文件A与图像/声音多重文件B的声音部分，再者，对于希望与图像文件B的重放开始同步地进行声音文件A的重放时，采用表示图4的自动重放控制文件的内容的图进行说明。

最初，用户按下新的重放控制文件作成按键208。接受该按键的输入并且开始新的自动重放控制文件的编集，CPU110控制写入装置107并且在存储装置101上作成例如“AUTOPLY1”这样的文件名的文件。

其次，用于为了选择自动重放的图像而按下图像文件重放模式选择按键201，在显示装置112上重放显示存储装置101上的图像文件。此时例如，在显示装置112上重放图像文件A并且利用移动按键204或者返回按键205改变显示图像，由此在显示装置112上顺次显示图像文件B、图像文件C、图像/声音多重文件A的图像部分、图像/声音多重文件B的图像部分。然后，当用户希望顺次连续重放图像文件B、图像/声音多重文件A的图像部分时，用户操作移动按键204或者返回按键205并且使得在显示装置112上显示最初要重放的图像文件B。此后，按下确认按键206。CPU110在其内部具有暂时存储信息的临时存储器，通过按下确认按键206，在该临时存储器中在用于表明图像文件的重放模式下用户作为要重放的图像选择了该文件的“IMG_SRC＝”的文字列之后记录图像文件B的文件名。其次，通过移动按键204或者返回按键205显示图像/声音多重文件A的图像。然后，再次按下确认按键206。由此，在CPU110内的临时存储器中同样地在“IMG_SRC＝”的文字列之后记录图像/声音多重文件A的文件名。根据上述的步骤，选择图像文件B与图像/声音多重文件A并且它们的文件名以要进行重放的顺序与“IMG_SRC”的文字列同时记录在CPU110内。

其次，为了选择自动重放的声音而按下声音文件重放模式选择按键202，通过扬声器113重放存储装置101中的声音文件。此时例如，在扬声器113重放声音文件A并且利用移动按键204或者返回按键205改变重放的声音，由此在扬声器113中顺次重放声音文件B、声音文件C、图像/声音多重文件A的声音部分、图像/声音多重文件B的声音部分。然后，当用户希望顺次连续重放声音文件A、图像/声音多重文件B的声音部分时，用户操作移动按键204或者返回按键205并且使得在扬声器113中重放最初要重放的声音文件A。此后，按下确认按键206。由此，在CPU110内部的临时存储器中，在用于表明声音文件的重放模式下用户作为要重放的声音选择了该文件的“SND_SRC＝”的文字列之后记录声音文件A的文件名。其次，通过移动按键204或者返回按键205重放图像/声音多重文件B的声音部分。然后，再次按下确认按键206。由此，在CPU110内的临时存储器中同样地在“SND_SRC＝”的文字列之后记录图像/声音多重文件B的文件名。根据上述的步骤，选择声音文件A与图像/声音多重文件B并且它们的文件名以要进行重放的顺序与“SND_SRC＝”的文字列同时记录在CPU110内。

在该状态下当接着按下组化按键207时，CPU110将先前选择的图像文件B与图像/声音多重文件A、声音文件A与图像/声音多重文件B作为一个组进行识别并且将固有的ID序号(例如001)附加给组并且控制写入装置107在存储装置101上的自动重放控制文件“AUTOPLY1”中写入组固有的ID序号与存储在CPU110的临时存储器中的内容。图4表示写入的自动重放控制文件“AUTOPLY1”的内容。图4所示的“GID”是组的ID序号，在图4的示例中作为001。又，“IMG_SRC”是表示图像文件或者图像/声音多重文件的图像部分的文字列，由此表明图像文件B与图像/声音多重文件A的图像部分是由用户选择的要重放的图像。又，“SND_SRC”是表示声音文件或者图像/声音多重文件的声音部分的文字列，表明声音文件A与图像/声音多重文件B的声音部分是由用户选择的要重放的声音。特别地，对于图像/声音多重文件，通过文字列“IMG_SRC”以及“SND_SRC”能够分离并指定其图像部分与声音部分，能够使得图像/声音多重文件如同仅由图像数据形成的图像文件或者仅由声音数据形成的声音文件那样进行处理。

“IMG_SRC”、“SND_SRC”所表示的文件之中各个行数较小的文件作时间上先重放的文件。

以上是自动重放控制文件105的生成步骤。其次，对于根据图4所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106并且读出自动重放控制文件105并获得其内容。CPU110从自动重放控制文件105的第1行起搜索GID，从最初的“GID”到下一“GID”之前识别一个组。又，自动重放控制文件105中的最后一组作为从最后的GID到文件结束的部分。在本实施形态中为一组，从最初的GID到自动重放控制文件105的最后是一组。

在自动重放控制文件105中按重放顺序记载文件名。又，由“IMG_SRC”形成的文字列指定图像文件或者图像/声音多重文件的图像部分、“SND_SRC”形成的文字列指定声音文件或者图像/声音多重文件的声音部分。因此，CPU110从这些文字列中判断作为对象的文件是关于图像重放的还是关于声音重放的文件。然后，若相关于图像则从存储装置101中依次读出并且解码重放图像文件B、图像/声音多重文件A的图像部分，若相关于声音则从存储装置101中依次读出并且解码重放声音文件A、图像/声音多重文件B的声音部分。此时，从自动重放控制文件105的第1行记载起判断这些文件组是否为附有组ID的一个组，由同步控制装置109控制解码器108中的解码以使得开始重放包含于组中的图像文件中最初被重放的图像文件B与开始重放包含于组中的声音文件中最初被重放的声音文件A同步。

具体地，CPU将表示要同步重放的图像与声音的信息传送到同步控制装置109。解码器108在内部具有暂时存储结果的临时存储器，将从存储装置101读出的文件解码并且依次写入该临时存储器。这是当对不同文件产生解码所需时间差时用于校正该时间差的措施。同步控制装置109监视要同步重放的图像与声音的解码的进程，在直至能够同步输出图像与声音而完成解码的时刻同步地输出存储在临时存储器中的图像与声音。如此，使得同步进行图像与声音的重放。

上述一连串的文件重放的流程如图5的流程图所示。在图5中，在步骤501等待来自自动重放按键209的输入，当按下自动重放按键209时进入步骤502。在步骤502中CPU110控制读出装置106并且从存储装置101中读出自动重放控制文件105。在步骤503中CPU110从读出的自动重放控制文件105中搜索组ID序号并且检出组。然后，在步骤504中对于每个检出的组检出由表示图像的文字列“IMG_SRC”所指定的文件名，在步骤505中同样地检出由表示声音的文字列“SND_SRC”指定的文件名。然后，在步骤506中如上所述控制从存储装置101的文件的读出、解码器108的解码、根据同步控制装置109的图像与声音的同步重放。

又，在图6中模式性地表示图像与声音的重放情况。即对于图像以文件B、图像/声音多重文件的图像部分的顺序进行重放并且与该图像文件B的开始重放同步地对于声音重放文件A，接着重放图像声音多重文件B的声音部分。由此，用能够按照自己指定重放图像与声音。

如上述那样，根据本实施形态，如图4所示那样在自动重放控制文件105中以组的形式记载要使得同步开始重放的图像文件与声音文件。根据该自动重放控制文件105控制从存储装置101的文件的读出以及在解码器108中的解码使得开始重放包含于组中的图像文件中最初重放的图像文件与开始重放包含于同组的声音文件中的最初重放的声音文件同步。由此，用户能够自由容易地组合图像数据、声音数据、多重化图像与声音的数据，能够同步地开始规定图像与数据的重放。

(实施形态2)

在本发明的实施形态1中，对于在自动重放控制文件105内由多个文件形成1组的构造进行了说明，此时仅能够实现包含于组中的文件群在重放开始时刻的图像与声音的同步，以后的图像与声音并不一定同步。然而，有时希望更加细致地使得图像与声音同步地进行重放。关于这样的情况的实施形态，以下参照用于表示自动重放控制文件内容的图7进行说明。在本实施形态中所说明的图像以及声音的重放装置的构造与图1所示的框图相同，而且由于图像以及声音的重放装置的操作面的配置图也与图2相同，因此省略说明。

例如，在图3所示的文件中，依次重放图像文件A、图像文件B并且此时使得同步地开始重放图像文件A与声音文件B而且要同步地开始重放图像文件B与图像/声音多重文件B的声音部分时，按照下述步骤，首先生成自动重放控制文件105。

最初，用户与实施形态1相同地按下新的重放控制文件作成按键208。由此，在存储装置101中例如作成“AUTOPLY2”文件名的文件。

其次，用户为了选择自动重放图像而按下图像文件重放模式选择按键201，使得在显示装置112中重放显示存储装置101中的图像文件，利用移动按键204或者返回按键205改变显示图像使得显示图像文件A。然后，按下确认按键206。由此，在CPU110内的临时存储器中接着“IMG_SRC＝”的文字列记载图像文件A的文件名。其次，为了选择进行自动重放的声音而按下声音文件重放模式选择按键202，通过扬声器113重放存储装置101中的声音文件，利用移动按键204或者返回按键205改变重放声音并且重放声音文件B，然后，按下确认按键206。由此，在CPU110内的暂时存储器中接着“SND_SRC＝”文字列记录声音文件B的文件名。

在该状态下，接着当按下组群化按键207时，CPU110将选择的图像文件A与声音文件B作为1组进行识别并且对于每组附加固有的ID序号(例如001)，控制写入装置107并且在存储装置101中的自动重放控制文件“AUTOPLY2”中写入组固有的ID序号以及存储在CPU110的临时存储器中的内容。

其次，与上述相同地，分别重放并选择图像文件B与图像/声音多重文件B的声音部分，按下组化按键207。由此，CPU110将图像文件B与图像/声音多重文件B的声音部分作为一组进行识别并且付与固有的ID序号(例如002)。然后控制写入装置107并且在存储装置101上的自动重放控制文件“AUTOPLY2”中添加并写入组固有的ID序号以及存储在CPU110的临时存储器中的内容。图7表示作成的自动重放控制文件“AUTOPLY2”的内容。图7所示的“GID”是组的ID序号，在图7的示例中，对于组群化的2个组分别附加不同号码。又，与图4相同地“IMG_SRC”表示图像文件或者图像/声音多重文件的图像部分的文字列，“SND_SRC”表示声音文件或者图像/声音多重文件的声音部分的文字列。然后，将具有行数小的GID的组群作为先进行重放的组群。

以上是自动重放控制文件105的生成步骤。其次，对于根据图7所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106并且读出自动重放控制文件105并获得其内容。CPU110从自动重放控制文件105的第1行起搜索GID，从最初的“GID”到下一“GID”之前识别作为一个组。又，自动重放控制文件105中的最后一组为从最后的GID到文件结束的部分。根据自动重放控制文件105的记载，识别图像文件A与声音文件B作为一组、识别图像文件B与图像/声音多重文件B的声音部分作为一组。然后，对于图像以图像文件A、图像文件B的顺序、对于声音以声音文件B、图像/声音多重文件B的声音部分的顺序从存储装置101读出这些文件并且进行解码重放。接着此时由于图像文件A与声音文件B为一组、图像文件B与图像/声音多重文件B的声音部分为一组，通过同步控制装置109控制解码器108中的解码使得图像文件A与声音文件B同步地开始重放并且图像文件B与图像/声音多重文件B的声音部分同步地开始重放。这些一连串的重放过程与实施形态1中所示的图5相同。又，在图8模式性地表示上述图像与声音的重放情况，用户能够按照自己的指定进行重放图像与声音。

如上所述，根据本发明的实施形态2，通过将数个由多个文件形成的组存放到1个自动重放控制文件内，能够精确地设定使得图像与声音的重放同步，用户能够自由容易地组合图像数据、声音数据、多重了图像与声音的数据并且能够使得图像与声音同步地开始重放。

(实施形态3)

在本实施形态1以及2中，对于向自动重放控制文件105内的多个文件附加组ID序号并且将多个文件看作为一个组进行图像与声音的同步重放的构造进行了说明。在该示例中，图像/声音多重文件以分割成图像部分与声音部分的形式记载在自动重放控制文件105中。然而，通过数码照相机以及数码摄像机获得的图像/声音多重文件被看作为在取得本来图像的同时也获得声音的文件并且也可以说是以图像与声音同步为当然前提所记录的文件。由此，当重放这样性质的文件时，对于用户来说以特意分割成图像部分与声音部分的形式在自动重放控制文件上进行记载是较为麻烦的，也有可能产生混乱。

这里，参照表示图9的自动重放控制文件的内容的附图，对于没有将图像/声音多重文件分割为图像部分与声音部分而在维持图像与声音的同步关系的基础上根据自动重放控制文件进行重放的实施形态进行说明。本实施形态中所说明的图像以及声音的重放装置的构造与图1所示的框图相同而且图像以及声音的重放装置的操作面的配置图也与图2相同，因此省略说明。

例如，在图3所示的文件中，当用户依次希望连续地重放图像/声音多重文件A与图像/声音多重文件B时，按照以下的步骤首先生成自动重放控制文件。

最初用户与本发明的实施形态1相同地按下新重放控制文件作成按键208。由此，在存储装置101上作成例如“AUTOPLY3”这样的文件名的文件。

其次，用户为了选择自动重放的图像/声音多重文件而按下图像/声音多重文件重放模式选择按键203，使得重放存储装置101上的图像/声音多重文件。利用移动按键204或者返回按键205改变进行重放的文件并且在使得重放图像声音多重文件A之后，按下确认按键206。由此，在CPU110内的临时存储器中在用于表示图像/声音多重文件的重放模式下用户作为要重放的文件即图像与声音多重化的文件而选择了该文件的“CMP_SRC＝”的文字列之后记录图像/声音多重文件A的文件名。同样地重放图像/声音多重文件B，通过按下确认按键206，在CPU110内的临时存储器中在“CMP_SRC＝”的文字列之后记录图像/声音多重文件B的文件名。根据上述的步骤，选择图像/声音多重文件A与图像/声音多重文件B并且以进行重放的顺序将它们的文件名与“IMG_SRC＝”的文字列同时记录在CPU110内。

在该状态下当接着按下组化按键207时，CPU110将先前选择的图像/声音多重文件A与图像/声音多重文件B作为一个组进行识别并且将固有的ID序号(例如001)附加给组。控制写入装置107在存储装置101上的自动重放控制文件“AUTOPLY3”中写入组固有的ID序号与存储在CPU110的临时存储器中的内容。图9表示写入的自动重放控制文件“AUTOPLY3”的内容。图9所示的“GID”是组的ID序号，“CMP_SRC”是表示图像/声音多重文件的文字列，由此表明图像/声音多重文件A及B是由用户选择的要重放的图像与声音的数据。又，将具有行数小的GID的文件群作为先重放的文件群。

以上是自动重放控制文件105的生成步骤。其次，对于根据图9所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106而读出自动重放控制文件105并取得其内容。在自动重放控制文件105中以进行重放的顺序记载着文件名。由于以“CMP_SRC”文字列指定图像/声音多重文件，故从该文字列可以判断该文件多重记录着图像与声音。结果，从存储装置101中读出图像/声音多重文件A、图像/声音多重文件B并且通过解码器108进行解码而同步地重放图像以及声音。

具体地，CPU110将表示要同步重放的文件的信息传送到同步控制装置109。解码器108在内部具有暂时存储结果的临时存储器，将从存储装置101读出的文件解码之后依次写入该临时存储器。这是当对于图像/声音多重文件在图像部分与声音部分解码所花的时间产生差时用于校正该时间差的措施。同步控制装置109监视要同步重放的图像与声音的解码的进程，在直至能够同步输出图像与声音而完成解码的时刻同步地输出存储在临时存储器中的图像与声音。如此，使得同步进行图像与声音的重放。

上述一连串的文件重放的流程如图10的流程图所示。在图10中，在步骤501～步骤503与图5相同，故省略对它们的说明。在步骤1001是对于每个检出的组检出以表示图像的文字列“CMP_SRC”所指定的文件名的步骤。然后，在步骤1002中CPU110按组固有的ID序号从小开始的顺序从存储装置101中读出指定的图像/声音多重文件并且控制解码器108的解码以及同步控制装置109的图像及声音的同步重放。

又，图11模式性地表示上述图像与声音的重放情况，用户能够按照自己的指定重放图像与声音。

如上所述，根据本发明的实施形态3，没有将图像与声音多重化的数据分割成图像部分与声音部分，而在维持图像与声音的同步关系的形式下用户能够自由容易地进行组合而使得同步地重放图像与声音。

(实施形态4)

在本发明的实施形态3中，以在自动重放控制文件105内记载仅由图像/声音多重文件形成的组而进行自动重放的示例进行了说明。其次，参照图12的表示自动重放控制文件的内容的图，对于用户在进行包含图像文件、声音文件的自动重放时的实施形态进行说明。本实施形态所说明的图像以及声音的重放装置的构造与图1所示的框图相同，而且图像以及声音的重放装置的操作面的配置图也与图2相同，因此省略对此的说明。

例如，在图3所示的文件中，用户依次重放图像文件B、图像/声音多重文件B、图像文件C并且此时使得同步地开始图像文件B与声音文件A的重放，并且使得图像/声音多重文件B的图像部分与同文件的声音部分同步而图像文件C与图像/声音文件多重文件A的声音部分的开始重放同步时，通过以下步骤，首先生成自动重放控制文件。

最初，用户与本发明的实施形态1相同地按下新重放控制文件作成按键208。由此，在存储装置101上例如作成“AUTOPLY4”文件名的文件。

其次，为了选择进行自动重放的图像，按下图像文件重放模式选择按键201，在显示装置112上重放并且显示存储在101中的图像文件，利用移动按键204或者返回按键205改变显示图像并且使得显示图像文件B。然后，按下确认按键206。由此，在CPU110内的临时存储器中在图像文件的重放模式下在用于表示用户作为要重放的图像选择了该文件的“IMG_SRC＝”文字列之后记录图像文件B的文件名。其次，为了选择自动重放的声音，按下声音文件重放模式选择按键202，通过扬声器113重放存储装置101中的声音文件，利用移动按键204或者返回按键205改变重放声音并且使得重放声音文件A。按下确认按键206。由此，在CPU110内的临时存储器中在声音文件的重放模式下在用于表示用户作为要重放的声音选择了该文件的“SND_SRC＝”文字列之后记录声音文件A的文件名。

在该状态下，接着当按下组群化按键207时，CPU110将选择的图像文件B与声音文件A作为1组进行识别并且对于每组附加固有的ID序号(例如001)，控制写入装置107并且在存储装置101中的自动重放控制文件“AUTOPLY4”中写入组固有的ID序号以及存储在CPU110的临时存储器中的内容。

其次，为了选择进行自动重放的图像/声音文件，按下图像/声音多重文件重放模式选择按键203并且重放存储装置101中的图像声音多重文件。利用移动按键204或者返回按键205改变显示图像并且在重放图像/声音多重文件B之后按下确认按键206。由此，在CPU110内的临时存储器中在图像/声音多重文件的重放模式下在用于表示用户作为要重放的多重化了图像与声音的文件选择了该文件的“CMP_SRC＝”文字列之后记录图像/声音多重文件B的文件名。

在该状态下，接着当按下组群化按键207时，CPU110将选择的图像/声音多重文件B作为1组进行识别并且对于每组附加固有的ID序号(例如002)，控制写入装置107并且在存储装置101中的自动重放控制文件“AUTOPLY4”中写入组固有的ID序号以及存储在CPU110的临时存储器中的内容。

其次接着，用于为了选择进行自动重放的图像，按下图像文件重放模式选择按键201，在显示装置112上重放并且显示存储在101中的图像文件，利用移动按键204或者返回按键205改变显示图像并且使得显示图像文件C。然后，按下确认按键206。由此，在CPU110内的临时存储器中在图像文件的重放模式下在“IMG_SRC＝”文字列之后记录图像文件C的文件名。其次接着，为了选择自动重放的声音而按下声音文件重放模式选择按键202，通过扬声器113重放存储装置101中的声音文件，利用移动按键204或者返回按键205改变重放声音并且使得重放图像/声音多重文件A的声音部分。按下确认按键206。由此，在CPU110内的临时存储器中在“SND_SRC＝”文字列之后记录图像/声音文件A的文件名。

在该状态下，接着当按下组群化按键207时，CPU110将选择的图像文件C与图像/声音文件A的声音部分作为1组进行识别并且对于每组附加固有的ID序号(例如003)，控制写入装置107并且在存储装置101中的自动重放控制文件“AUTOPLY4”中进一步追加写入组固有的ID序号以及存储在CPU110的临时存储器中的内容。图12表示写入的自动重放控制文件“AUTOPLY4”的内容。图12所示的“GID”是组ID序号，在图12的示例中分别对于分组后的3组附加不同序号。又，与图4相同地“IMG_SRC”是表示图像文件或者图像/声音多重文件的图像部分的文字列，“SND_SRC”是表示声音文件或者图像/声音多重文件的声音部分的文字列，又，与图9相同地，“CMP_SRC”表示图像/声音多重文件的文字列。而且，将具有行数较少的GID的组作为先重放的组，在组内以“IMG_SRC”等文字列所示的文件中，将相同文字列所示的行数小的文件先进行重放。

以上是自动重放控制文件105的生成步骤。其次，对于根据了图12所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106并且读出自动重放控制文件105并获得其内容。CPU110从自动重放控制文件105的第1行起搜索GID，从最初的“GID”到下一“GID”之前识别为一个组。又，自动重放控制文件105中的最后一组为从最后的GDI到文件结束的部分。根据自动重放控制文件105的记载将图像文件B与声音文件A、将图像/声音多重文件B、图像文件C与图像/声音多重文件A的声音部分分别作为一组进行识别。然后，从存储装置101中读出图像文件B、声音文件A、图像/声音多重文件B、图像文件C、图像/声音多重文件A的声音部分，并且由解码器108进行解码重放。接着此时图像文件B与声音文件A为一组、图像/声音多重文件B为一组、图像文件C与图像/声音多重文件A的声音部分为一组。因此，如图14的说明那样，由同步控制装置109控制解码器108中的解码，由此使得同步地开始图像文件B的重放与声音文件A的重放，并且此后同步地重放图像/声音多重文件B的图像部分与声音部分，而且最后使得同步地开始图像文件C与图像/声音多重文件A的声音部分。这一连串的重放过程以流程图来表示如图13所示。

在图13中，步骤501到505与图5相同，又，由于步骤1001与图10相同而省略对其的说明。步骤1301是对于检出的每个组重放文件的步骤，如本发明的实施形态1～3所说明，CPU110控制从存储装置101的文件的读出、利用解码器108的解码、利用同步控制装置109的图像与声音的同步重放。

如此，用户能够按照自己的指定来重放图像与声音。

如上所述，根据本发明的实施形态4，当组合图像文件、声音元件、图像/声音多重文件这3个种类的文件并且自动地重放图像与声音的情况下，没有将多重化了图像与声音的数据分割成图像部分与声音部分而是以维持图像与声音的同步关系的形式、或者根据需要分割成图像部分与声音部分，用户能够自由容易地组合3个种类的文件并且能够同步地重放图像与声音。

又，在本本发明的实施形态4中，当将文件进行分组时，没有使得以文字列“CMP_SRC”所指定的图像/声音多重文件与以文字列“IMG_SRC”以及“SND_SRC”所指定的文件混合在一起。即当在一组内放置以文字列“CMP_SRC”所指定的图像/声音多重文件时仅由以文字列“CMP_SRC”所指定的图像/声音多重文件构成一组。例如，在图12中，在GID为002的组中，仅包含以文字列“CMP_SRC”所指定的图像/声音多重文件。以下，对于采用上述形式的理由进行说明。

例如，如图15所示，使得图像文件B与声音文件A同步地开始重放，在声音文件A之后重放声音文件B，此后同步地重放图像/声音多重文件B的图像与声音，最后同步地重放图像文件C与图像/声音多重文件A的声音部分。此时，如至此那样的将作成自动重放控制文件的方法作为示例进行说明，采用下述的步骤。首先，通过按下新重放控制文件作成按键208开始编集自动重放控制文件105，操作图像文件重放模式选择按键201、移动按键204、返回按键225，在显示装置112上显示图像文件B之后，利用确认按键206在CPU110中接着“IMG_SRC”之后存储该文件名。其次，同样地操作图像/声音多重文件重放模式选择按键203、移动按键204、返回按键205，在重放图像/声音多重文件B之后，利用确认按键206在CPU110中接着文字列“CMP_SRC”存储该文件名。然后，再次操作图像文件重放模式选择按键201、移动按键204、返回按键205，在显示装置112上显示图像文件C之后，利用确认按键206在CPU110中接着文字列“IMG_SRC”存储该文件名。由此，在CPU110的临时存储器中按照图像文件B、图像/声音多重文件B、图像文件C的顺序存储要进行重放的文件名。

对于声音文件，以要进行重放的顺序对于声音文件A、声音文件B、图像/声音多重文件A的声音部分操作声音文件重放模式选择按键202、移动按键204、返回按键205，通过扬声器113重放于声音文件A、声音文件B、图像/声音多重文件A的声音部分，此后分别通过确认按键206在CPU110中接着文字列“SND_SRC”存储它们的文件名。然后，通过按下组化按键207将选择的文件分组并且将其与组ID序号(例如001)都写入到自动重放控制文件。

通过上述的步骤作成的自动重放控制文件105如图16所示。该自动重放控制文件105以图16所示的一个的组ID(GID)将6个文件作为一组。

其次，根据图16所示的自动重放控制文件105研究进行多个文件的自动重放的情况。

在图16的自动重放控制文件105中，顺次排列图像文件B、图像/声音多重文件B、图像文件C并且可以判断只要以该顺序重放图像就可。然而，对于声音文件，可以判断以声音文件A、声音文件B、图像/声音多重文件A的声音部分的顺序进行重放，以及可以判断为了使得包含于组中的图像文件中最初重放的图像文件的重放开始与包含于同组中的声音文件中最初重放的声音文件的重放开始同步，而只要重放声音文件即可，即可以判断只要使得同步地开始重放图像文件B与声音文件A就可。然而，图像/声音多重文件B的声音部分与声音文件B以及图像/声音多重文件A的声音部分时间上的位置关系不能够通过图16的自动重放控制文件105的记载进行判定。具体地，必须与比图像/声音多重文件B先重放的图像文件B同步的声音文件A必须要比图像/声音多重文件B的声音部分先行重放，而除了使得声音文件B与图像/声音多重文件A的声音部分在声音文件A之后重放以外不能够从图16的自动重放控制文件进行判断。

因此，若以此前所说明的步骤作成自动重放控制文件，必须将用于表明图像/声音多重文件B的声音部分与声音文件B以及图像/声音多重文件A的声音部分时间上的位置关系的信息附加记载到自动重放控制文件中。然而，此时自动重放控制文件的记载变得复杂而且根据该自动重放控制文件自动地重放图像以及声音的设备为了分析自动重放控制文件而负担增大。具体地，重放设备必须具备用于分析更加复杂的自动重放控制文件的硬件或者软件。又，作成自动重放控制文件的工夫变得更加复杂，对于用户来说增加了负担。

这里，如图12以及图14所示那样，以文字列“CMP_SRC”指定图像/声音多重文件并且将图像与声音作为同步重放的一个组进行处理时，没有将文字列“IMG_SRC”以及“SBD_SRC”所指定的文件混合而仅由以文字列“CMP_SRC”所指定的图像/声音多重文件构成一组。即如图像/声音多重文件那样，在文件性质上在一组的文件内维持图像与声音的同步关系的文件若将相同形式的文件归成一组，即使与其他的本来不具有图像与声音的同步关系的文件一起构成自动重放控制文件，文件间的时间上的位置关系也不会不明了。

又，也可将多个以“CMP_SRC”所指定的文件放置在一个组内，这在本发明实施形态3可以明确。

通过上述那样定义文件的作成方法，不必在自动重放控制文件中附加用于表示声音文件或者图像/声音多重文件的声音部分相互的时间位置关系的信息，通过简单的自动重放控制文件的记载，能够明了地指定文件间时间上的位置关系。而且，这样不会增加自动地重放声音的设备用于分析自动重放控制文件的负担，用户作成自动重放控制文件的负担也不会增大。

又，如图15所示那样作为同步关系下重放图像与声音时的自动重放控制文件的示例，可以列举图17所示的示例。如图17所示那样，将表示图像/声音多重文件B的重放的部分作为GID＝002，若与指定其他文件的GID分离，则由此前的说明可以明了，能够明确地规定各文件间时间上的位置关系。

又，也存在用户错误地将以文字列“CMP_SRC”所指定的文件与以文字例“IMG_SRC”以及“SND_SRC”所指定的文件混合在同一组中而作成自动重放控制文件的情况，此时在显示装置112上显示表示操作错误的错误信息等并且能够引导用户正确地作成自动重放控制文件。

(实施形态5)

在本发明的实施形态1～4中，对于通过在自动重放控制文件105内记载多个文件形成的组而组合图像文件、声音文件、图像/声音多重文件这3种类型的文件并且使得同步地重放图像与声音的方法进行了说明。其次，对于排列交换记载在自动重放控制文件105中的组而进行重放的示例进行说明。

本实施形态5中所说明的图像以及声音的重放装置的构造由于与图1所示的框图相同，故省略说明。图18是本发明实施形态5中说明的图像以及声音的重放装置的操作面的配置图。图2所示的配置图与图18所示的配置的差异仅在于，在图18中新设置了组重放模式选择按键1801与组编集结束按键1802。又，显示装置112、扬声器113也与图2相同。

按键201到209由于具有与图2所示的图像以及声音的重放装置的相同功能，这里省略对它们的说明。组重放模式选择按键1801与组编集结束按键1802的主要功能如下所述。

当按下组重放模式选择按键1801时，对于记载在存储装置101上的自动重放控制文件105中的每组成为重放图像以及声音的模式，CPU110根据自动重放控制文件105的记载，控制读出装置106并且读出记录在存储装置101中的图像文件、声音文件、图像/声音多重文件并且以组为单位重放图像与声音。组编集结束按键1802是结束组的排列交换的按键。

对于上述那样构成的本发明的实施形态5，采用表示图19的自动重放控制文件内容的图对其动作进行说明。

例如，在存储装置101中存储图3所示的文件与本发明实施形态4中说明的图12所示那样内容的自动重放控制文件“AUTOPLY4”。这里，研究将记载在自动重放控制文件“AUTOPLY4”中的组ID序号为001的组(图像文件B与声音文件A形成的组)与组ID序号为003的组(图像文件C与图像/声音多重文件A的声音部分形成的组)的重放顺序反转进行重放的情况。此时，通过下述的步骤，首先生成新的自动重放控制文件。

最初，用户与实施形态1相同地按下新重放控制文件作成按键208。由此，在存储装置101上例如作成“AUTOPLY5”文件名的文件。

其次，用户为了选择进行自动重放的组，按下组重放模式选择按键1801，对于记载在自动重放控制文件中的每组重放图像以及声音。此时，例如还研究在存储装置101上存储多个自动重放控制文件的情况，在本发明的实施形态5中，在按下组重放模式选择按键1801之后所参照的自动重放控制文件作为上述的“AUTOPLY4”通过按下组重放模式选择按键1801根据“AUTOPKY4”的记载而进行分组后的图像与声音的重放。在按下组重放模式选择按键1801之后，利用显示装置112以及扬声器113重放由图像文件B与声音文件A形成的组并且通过移动按键204或者返回按键205改变重放对象。由此，重放由图像/声音多重文件B的图像与声音形成的组、图像文件C与图像/声音多重文件A的声音部分形成的组。

然后，研究最初重放由图像文件C与图像/声音多重文件A的声音部分、接着重放图像/声音多重文件B的图像与声音、最后重放图像文件B与声音文件A的情况。此时，用户操作移动按键204或者返回按键205并且首先重放最初希望重放的图像文件C与图像/声音多重文件A的声音部分构成组。然后，按下确认按键206。CPU110根据确认按键206的按下将重放了的组的组ID序号、记载在组内的文字列与文件名存储在内部的临时存储器中。即将从图12的第6行到第8行的记载原封不动地存储在临时存储器中。

其次，将接着要重放的组即由图像/声音多重文件B的图像与声音形成的组以与上述同样的步骤进行重放，通过按下确认按键206，在内部的临时存储器中附加并且存储重放了的组的组ID序号、记载在组内的文字列与文件名。即将图12的第4行到第5行的记载就此附加存储在临时存储器中。然后，以与上述相同的步骤重放最后要重放的组即由图像文件B与声音文件A形成的组，根据按下确认按键206，将重放了的组的组ID序号与记载在组内的文字列与文件名附加存储到内部的临时存储器中。即将图12的第1行到第3行的记载就此附加存储到临时存储器中。

在该状态下，当按下组编集结束按键1802时，CPU110控制写入装置107并且向存储装置101上的自动重放控制文件“AUTOPLY5”写入存储在CPU110的临时存储器中的内容。此时，从行数较小方开始顺次重新赋与组ID序号(GID)。

例如，将最初的组ID序号作为001、第2组的ID序号作为002、最后组的ID序号作为003。图19中表示写入的自动重放控制文件“AUTOPLY5”的内容。图19所示的“GID”是组的ID序号，在图19的示例中，图12所示的分组后的3个组改变它们的顺序并且成为重新附加了GID的内容。

以上是自动重放控制文件“AUTOPLY5”的生成顺序。若采用这样生成的自动重放控制文件“AUTOPLY5”，则如本发明的实施形态4所示那样，以每组同步地开始图像与声音的重放的状态下进行重放。此时，对于采用自动重放控制文件“AUTOPLY5”的重放，能够以与本发明实施形态4所示的自动重放控制文件“AUTOPLY4”的情况不同的重放顺序来重放图像与声音。如图20所示，模式性地表示了采用自动重放控制文件“AUTOPLY5”的图像与声音的重放情况。

如上所述，根据本发明的实施形态5，当组合图像文件、声音文件、图像/声音多重文件3种类的文件并且自动地重放图像与声音时，能够自由地排列交换记载在自动重放控制文件105中的组并且进行重放。

又，在本发明的实施形态5中，在按下组重放模式选择按键1801之后所参照的自动重放控制文件并不限于上述的“AUTOPLY4”，例如也可以在存储器101中存在多个的自动重放控制文件并且用户能够在其中任意地选择使用于自动重放的自动重放控制文件。此时，排列交替多个记载在自动重放控制文件中的组并且生成新的自动重放控制文件。例如，当按下组重放模式选择按键1801之后，附加选择多个重放时进行参照的自动重放控制文件的功能，以此前所说明的步骤操作按键对于每个记载在多个自动重放控制文件中的组重放图像以及声音，通过按下确认按键206来选择希望自动重放的图像以及声音，可以编集新的自动重放控制文件(例如，作为“AUTOPLY5-1”)。作为一示例，将记载在此前的说明中所采用的自动重放控制文件“AUTOPLY2”与“AUTOPLY5”中的组，例如记载在图7所示的“AUTOPLY2”的由图像文件A与声音文件B形成的组以及记载在图19所示的“AUTOPLY5”的由图像文件C与图像/声音多重文件A的声音部分形成的组，重新编集成自动重放控制文件“AUTOPLY5-1”，由此进行图像与声音的重放的情况如图21所示。图21所示那样，能够编集2个自动重放控制文件并且生成新的自动重放控制文件。

(实施形态6)

至此所说明的图像以及声音的重放装置根据自动重放控制文件的内容能够进行图像与声音的重放，而对于不具备这样的自动重放功能的设备，当然不能够实行上述那样的图像与声音的重放。这里，若将进行自动重放的图像与声音变换成其他的通用的格式，则在其他设备上也可以将它们进行重放。这里，在本发明的实施形态6中，对于根据自动重放控制文件105的记载重新作成获得与重放图像与声音后的结果相同的重放结果的数据文件的构造进行说明。

图22是表示本发明的实施形态6的图像以及声音重放装置的框图。在该图中，从符号101到113的部分与参照图1说明的本发明的实施形态1相同，故这里省略对它们的说明，以下，仅对于与图1的不同部分进行说明。

在图22中，格式变换装置2201是变换从存储装置101读出的图像文件102、声音文件103、图像/声音多重文件104的格式的装置。记录装置2202是记录利用格式变换装置2201变换格式后的文件的装置，它可以是硬盘装置那样固定在设备上的装置，也可以是闪速存储卡那样可以脱卸的装置。

说明以上那样结构的本发明的实施形态6的动作。

例如，使得在存储装置101中存储图3所示的文件与本发明的实施形态4中所说明的图12所示那样内容的自动重放控制文件“AUTOPLY4”。当将根据自动重放控制文件“AUTOPLY4”的记载被重放的图像与声音变换成其他格式并且进行保存时，CPU110从存储装置101中读出必要的图像文件、声音文件、图像/声音多重文件并且控制格式变换装置2201，为了使得保持自动重放控制文件所记载的图像与声音的同步关系而将这些文件变换成其他由图像数据与声音数据形成的格式的数据。作为变换后的格式，例如由于图像与声音为自动重放的对象，可以采用将从存储装置101中读出的各种文件归成一个图像/声音多重文件的格式的方法。如此，利用格式变换装置2201作成的图像/声音多重文件可以在能够进行图像/声音多重文件重放的设备上进行重放。

如上所述，若根据本发明的实施形态6，利用本发明的实施形态1～5中所说明的图像以及声音的重放装置重放的图像与声音根据自动重放控制文件即使在不具备自动重放功能的其他设备上也能够同样地进行重放。

又，在图22所示的构造中，采用了利用格式变换装置2201对于从存储装置101读出的各种文件进行格式变换的构造，而其他也可以如图23所示那样，采用将利用解码器108解码后的图像信号与声音信号再次由编码器2301进行编码记录在记录装置2302中的方法。这种情况下，也能够根据自动重放控制文件将由本实施形态1～5所说明的图像以及声音的重放装置重放的图像与声音在不具自动重放功能的其他设备上相同地进行重放。

又，在本发明的实施形态6中可以明确，利用格式变换装置2201变换后的文件格式无论为何种格式本发明都可以发挥作用。又，在上述中，作为变换后的格式，对于将图像与声音多重存放在一个文件形式内的图像/声音多重文件进行了说明，而并不仅限于此。例如，根据重放图像与声音的设备，可以将独立的图像文件与声音文件看作一对并且采用能够同时地重放图像与声音的设备，当假设采用这样的设备进行重放时，可以采用下述构造，即对于图像仅将图像数据归在一个文件中、对于声音仅将声音数据归在文件中并且以格式变换装置2201生成这些图像与声音分别归纳的图像文件与声音文件的对。又，并不一定需要利用格式变换装置2201作成相关于图像与声音的文件的双方，根据需要也可以作成仅记录了图像、声音一方的文件。

同样地，可知利用编码器2301的编码为任何方式本发明都可以发挥作用。再者，利用编码器2301进行编码的信号可以是图像信号与声音信号中的任意之一。

又，在本发明的实施形态6中，记录在记录装置2202以及2302中的信息可以是数字化的信息，也可以是模拟信号。再者，记录装置2202以及2302可以是硬盘那样的盘片装置，也可以是半导体存储器或者磁带。

又，在本发明的实施形态6中，利用格式变换装置2201以及编码器2301进行了格式变换或者编码的信息可以存储在存储装置101中。此时，在同一设备中没有必要需要2个记录装置，这样能够使得设备小型化以及省电化。

(实施形态7)

在实施形态1～4中，对于通过在自动重放控制文件105内记载由多个文件形成的组而组合图像文件、声音文件、图像/声音多重文件的3种类型的文件并且使得同步地重放图像与声音的方法进行了说明。其次，对于当根据自动重放控制文件105的记载重放图像以及声音时附加与上述不同的信息来重放的示例进行说明。

图24是表示本发明实施形态7所说明的图像以及声音的重放装置的构造的框图。图1所示的本发明的实施形态1～4的框图与图24所示的框图的差异在于，图24中在存储装置101中存储附加信息文件2401、新设解码/合成装置2402。

图24中的符号101～113所示的部分与图1所示的图像以及声音的重放装置相同，故这里省略说明，仅对于与图1的构造不同的部分进行说明。

附加信息文件2401是存放了附加到图像文件102、声音文件103、图像/声音多重文件104中的合成信息的文件，例如，可以是重叠在图像上进行显示的框架图像以及标题图像，或者是以文字代码表示的摄影时间、摄影地点、文件名、摄影者姓名、联络地址、图像说明等的文本，或者是表示摄影条件、摄影状态的数值数据及记号，或者重叠在声音上进行重放的特殊效果声音等。解码/合成装置2402是用于获得合成从存储装置101读出的图像文件102、声音文件103、图像/声音多重文件104与附加信息文件2401后的信号的装置。然而，在图24中为了简单化，仅表示了一个附件信息文件2401，而并不限定于此，实际上也可以分别存在多个文件。

图25是表示解码/合成装置2402的构造的框图。在图25中，解码器2501是与图1所示的解码器108相同的将图像文件、声音文件、图像/声音多重文件解码的装置。又，解码器2502也是相同的装置，而它是用于解码附加信息文件2401而设置的。合成装置2503是实施将解码器2501以及2502解码后的信息相互重合等的合成处理并且输出的装置。

图26是表示本发明的实施形态7所说明的图像以及声音的重放装置的操作面的配置图。图2所示的配置图与图26所示的配置图的差异在于，在图26中新设了附加信息重放模式选择按键2601。

按键201～209是与图2所示的图像以及声音的重放装置相同的按键，这里省略说明。附加信息重放模式选择按键2601的功能如下所述。又，图26的显示装置112、扬声器113也与图2相同。

当按下附加信息重放模式选择按键2601时，CPU110控制读出装置106并且读出记录在存储装置101中的附加信息文件2401的其中之一，利用解码器2402进行解码之后，通过显示装置112或者扬声器113重放附加信息文件的内容。此时，由解码器2502解码后的信号通过合成装置2503被输出，而在合成装置2503中没有实施任何处理，直接输出解码器2502的输出。

图27是表示存储在存储装置101中的附加信息文件的模式图。在图27中，框架图像文件A、B以及文本文件A、B是通过与图像文件合成而来装饰图像文件或者用于附加文字信息的附件信息文件。效果声音文件A、B是通过与声音文件合成而用于在重放声音上叠加特殊效果声音的附加信息文件。以下，对于将图27所示的6个附加信息文件与图3所示的8个图像文件、声音文件、图像/声音多重文件一起记录在存储装置101上的情况进行说明。

对于上述这样构成的本发明的实施形态7，以与本发明实施形态1的不同部分为中心对于它们的动作进行说明。

当将记录在存储装置101上的附加信息文件2401附加到图像文件102、声音文件103、图像/声音多重文件104进行重放时，通过下述的步骤生成图28所示的自动重放控制文件。

首先，使得用户从图3所示的8个文件中通过与本发明实施形态1相同的组合重放图像与声音并且将框架图像文件B与图像文件B合成、文本文件A与图像/声音多重文件A的图像部分合成、将效果声音文件B与声音文件A合成进行重放。

最初，用户按下新重放控制文件作成按键208。CPU110接受该按键输入重新开始编集自动重放控制文件并且控制写入装置107而在存储装置101上作成例如名为“AUTOPLY6”的文件名的文件。

其次，用户与本发明实施形态1相同地为了选择进行自动重放的图像而按下图像文件重放模式选择按键201并且在显示装置112上重放显示存储装置101上的图像文件，操作移动按键204或者返回按键205在显示装置112上显示最初要重放的图像文件B。然后，按下确认按键206。通过按下确认按键206，CPU110在其内部的临时存储器中接着“IMG_SRC”文字列之后记录图像文件B的文件名。其次，为了选择与图像文件B进行合成的附加信息文件，按下附加信息重放模式选择按键2601并且重放存储装置101中的附加信息文件2401。此时，重放对象的附加信息文件若为框架图像文件则在显示装置112上显示该图像、若为文本文件则在显示装置112上显示包含在文件中的文本、若为效果声音文件则通过扬声器重放该效果声音。然后，以与选择图像文件相同的要领重放要叠加的附加信息文件，通过按下确认按键206，在CPU110的临时存储器中存储该附加信息文件名。此时，在用于表明此为附件信息文件的“ADD_SRC”文字列之后存储框架图像B的文件名。

与上述说明的步骤同样地，在选择图像/声音多重文件A的图像部分之后，作为附加信息文件选择文本文件A，然后在选择声音文件A之后作为附加信息文件选择效果声音文件B，再者作为声音信息选择图像/声音多重文件B的文件名，如此，要重放的图像文件、声音文件、图像/声音多重文件的文件名与附加信息文件的文件名同上述说明的文字列一起存储在CPU110的临时存储器上。

然后，在该状态下当按下组化按键207时，CPU110将先前选择的图像文件B与图像/声音多重文件A的图像部分、声音文件A与图像/声音多重文件B的声音部分以及作为它们各自的附加信息的框架图像文件B、文本文件A、效果声音文件B作为一组进行识别并且给组赋与固有的ID序号(例如001)，控制写入装置107将组固有的ID序号与存储在CPU110的临时存储器中的内容以存储的顺序写入“AUTOPLY6”。在图28中表示写入的自动重放控制文件“AUTOPLY6”的内容。

以“IMG_SRC”、“SND_SRC”所示的文件中将行数小的文件作时间上先重放的文件，将“ADD_SRC”所指定的文件作为与从较小行开始数的第一行所记载的文件进行合成的附加信息文件。

以上是自动重放控制文件105的生成步骤。其次，对于根据图28所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106并且读出自动重放控制文件105并获得其内容。CPU110从自动重放控制文件105的第1行起搜索GID，从最初的“GID”到下一“GID”之前识别为一个组。又，将自动重放控制文件105中的最后一组作为从最后的GID到文件结束的部分。

在自动重放控制文件中，以进行重放的顺序记载文件名。又，“ADD_SRC”所指定的文件由于是附加信息文件，当重放记载“ADD_SRC”的前一行中记载的文件时，合成该附加信息文件并且进行重放。具体地，将表示要合成的文件的信息通过同步控制装置109送至合成装置2503。合成装置2503在从解码器2501与2502传送来的信息中根据通过同步控制装置109的CPU110的指示来判别要合成的信息并且进行合成处理。

结果是当重放图像文件B时合成框架图像文件B、当重放图像/声音多重文件A的图像部分时合成文本文件A，又，对于声音方面，当重放声音文件A时合成效果声音文件B。对于图像/声音多重文件B的声音部分，由于没有指示附加信息文件的合成，则就此重放图像/声音多重文件B的声音部分。

上述一连串的文件的重放过程若以流程图表示则如图29所示。在图29中，由于从步骤501～505与图5相同，故省略说明。步骤2901是对于每个检出的组检出以表示附加信息文件的文字列“ADD_SRC”所指定的文件名的步骤。然后，在步骤2902中，CPU110从存储装置101中读出指定的各文件与附加信息文件并且控制解码器2501、2502进行的解码以及合成装置2503进行的将图像或声音与附加信息文件的合成。

又，图30模式性地表示上述图像与声音的重放情况。即，图像以合成框图B的图像文件B、合成文本文件A的图像/声音多重文件A的图像部分的顺序进行重放，与开始重放图像文件B同步地以合成效果声音文件的声音文件A、与图像/声音多重文件A的图像部分同步地以图像/声音多重文件B的声音部分的顺序进行重放。如此，用户能够按照自己的指定以合成附加信息文件的形式重放图像与声音。

如上所述，根据本发明的实施形态7，当按照自动重放控制文件105的记载组合图像文件、声音文件、图像/声音多重文件的3种类型的文件并且同步地重放图像与声音时能够指示附加信息文件的合成，由此能够以将图像及声音与附加信息文件合成的形式自动地进行重放。

又，在本发明的实施形态7中，并不一定需要图25所示2个解码器2501以及解码器2502，也可以共用一个解码器。

又，在本发明的实施形态7中，作为附加信息的示例，例举了框架图像文件、文本文件、效果声音文件，而附加在重放的图像以及声音上的信息并不仅限于此。

又，在本发明的实施形态7中，作为指定附加信息文件的文字列使用了“ADD_SRC”，而这仅是示例并不作为限定。

(实施形态8)

在本发明的实施形态1～4，对于通过在自动重放控制文件105内记载由多个文件形成的组而组合图像文件、声音文件、图像/声音多重文件这3种类的文件并且使得同步地重放图像与声音的方法进行了说明。其中，并没有特别涉及对于图像以及声音的重放时间，其次，对于当根据自动重放控制文件105的记载重放图像以及声音时指定各图像与声音的重放时间进行重放的示例进行了说明。

图31是本发明实施形态8要说明的图像以及声音的重放装置的操作面的配置图。图2所示的配置图与图31所示的配置的差异在于，在图31中新设了重放时间设定按键3101与数值输入用刻度盘3102。

按键201～209是与图2所示的图像以及声音的重放装置相同的按键，这里省略对它们的说明。重放时间设定按键3101与数值输入用刻度盘3102的主要功能如下所述。

当按下重放时间设定按键3010时，进入对选择的文件进行重放时间设定的模式。通过旋转数值输入用刻度盘3102，能够任意地输入数值。

由于本发明实施形态8要说明的图像以及声音的重放装置的构造如图1所示的框图相同，故省略说明。

对于上述构成的本发明的实施形态8，以与本发明实施形态1的不同之处为中心，对其动作进行说明。

对于记录在存储装置101上的图像文件102、声音文件103、图像/声音多重文件104指定它们的重放时间进行重放时，通过下述的步骤生成自动重放控制文件。

首先，用户从图3所示的8个文件中与本发明实施形态1相同地进行组合并且重放图像与声音，而且指定各自的重放时间。

最初，用户按下新重放控制文件作成按键208。CPU110接受该按键的输入而重新开始编集图32所示的自动重放控制文件并且控制写入装置107而在存储装置101上例如作成名为“AUTOPLY7”文件名的文件。

其次，用户与本发明实施形态1相同地为了选择自动重放的图像而按下图像文件重放模式选择按键201并且在显示装置112上重放显示存储装置101上的图像文件，操作移动按键204或者返回按键205并且在显示装置112上显示最初要重放的图像文件B。然后，按下确认按键206。通过按下确认按键206，CPU110在其内部的临时存储器中接着“IMG_SRC＝”的文字列记录图像文件B的文件名。其次，为了指定重放时间而按下重放时间设定按键3101时，在显示装置112上例如以秒为单位显示重放时间的候补值。该候补值例如可以是由设备预先设定的初值。然后，当用户旋转数值输入用刻度盘3102时，根据该旋转，上述的重放时间的候补值发生变化，当重放时间为所要求的值时停止数值输入用刻度盘3102的旋转。例如，要在10秒间重放图像文件B时，为了在显示装置112上显示重放时间为10秒而旋转数值输入用刻度盘3102。其次，当按下确认按键206时，将显示在该显示装置112上的重放时间存储到CPU110的临时存储器中。此时，接着用于表明重放时间的“PLY_DUR”的文字列之后以秒为单位存储重放时间。

通过上述说明的步骤相同地在选择了图像/声音多重文件A的图像部分之后，设定重放时间为15秒，接着在选择声音文件A之后设定重放时间为20秒，最后设定图像/声音多重文件B的声音部分的重放时间为5秒。

然后，在完成重放文件的选择以及重放时间的设定之后，当按下组化按键207时，CPU110将选择的2个图像文件B与图像/声音多重文件A、声音文件A与图像/声音多重文件B的声音部分作为一组进行识别而赋与固有的ID序号(例如001)，并且控制写入装置107而在存储装置101中的自动重放控制文件“AUTOPLY7中以存储的顺序写入组固有的ID序号与存储在CPU110的临时存储器中的内容。图32表示写入的自动重放控制文件“AUTOPLY7”的内容。

在“IMG_SRC”、“SND_SRC”所示的文件中将行数较小的文件作为时间上先重放的文件，“PLY_DUR”所指定的数字以秒为单位表示重放时间。在图32的自动重放控制文件“AUTOPLY7”的示例中表示了使得图像文件B的重放时间为10秒、使得图像/声音多重文件A的图像部分的重放时间为15秒、使得声音文件A的重放时间为20秒、使得图像/声音多重文件B的声音部分的重放时间为5秒。又，使得由“PLY_DUR”所指定的重放时间为从行数小的开始数的前一行所记载的文件的重放时间。

以上是自动重放控制文件105的生成步骤。其次，对于根据图32所示的自动重放控制文件105的文件的重放进行说明。

当用户按下自动重放按键209时，CPU110控制读出装置106并且读出自动重放控制文件105并获得其内容。CPU110从自动重放控制文件105的第1行起搜索GID，从最初的“GID”到下一“GID”之前识别为一个组。又，自动重放控制文件105中的最后一组为从最后的GID到文件的最后行。

在自动重放控制文件中，以重放的顺序记载文件名。又，由于“PLY_DUR”所指定的数值是秒为单位的重放时间，当重放记载“PLY_DUR”的前一行中记载的文件时，仅在该重放时间进行重放。具体地，CPU110将表示要同步重放的文件的信息与相关于重放时间的信息送至同步控制装置109。同步控制装置109监视被重放的图像与声音的解码进程，若图像与声音完成了相当于所指定的重放时间的数据的解码，停止解码器108的解码，其次开始要解码的图像与声音的解码。如此，控制图像与声音的重放时间。

结果，使得图像文件B进行10秒重放、接着使得图像/声音多重文件A的图像部分进行15秒重放。由于图像文件B的重放同步地开始声音文件A的重放，在20秒的重放之后接着使得进行5秒的图像/声音多重文件B的声音部分的重放，然后一连串的图像与声音的重放结束。

上述一连串的文件的重放过程若以流程图表示则如图33所示。在图33中，由于从步骤501～505与图5相同，故省略说明。步骤3301是对于每个检出的组检出以表示附加信息文件的文字列“PLY_DUR”所指定的文件名的步骤。然后，在步骤3302中，CPU110从存储装置101中读出指定的各文件与重放时间并且向同步控制装置109指示要同步重放的文件与重放时间。同步控制装置109控制解码器108的解码并且控制图像与声音的同步重放与重放时间。

又，图34模式性地表示上述图像与声音的重放情况，用户能够仅在按照自己指定的时间重放图像与声音。

如上所述，根据本发明的实施形态8，当根据自动重放控制文件105的记载来组合画图像文件、声音文件、图像/声音多重文件的3种类型的文件并且同步地重放图像与声音时能够指定各文件的重放时间，由此，能够仅以自由指定的时间重放图像与声音。

又，在本发明的实施形态8中，对于将重放时间的指定作为各文件的重放时间进行了说明，而并不限定于此，例如，也可以将最初重放的文件的重放开始时刻作为0而以从该重放开始时刻起的绝对时间设定文件的重放时间。例如，如图35所示，由“PLY_TTL”指定进行自动重放的各文件的重放时间的总和并由“PLY_TIM”指定各文件的重放开始时刻，与上述的说明相同地，能够对于每个文件设定进行重放的文件的重放时间。在图35的示例中，指定自动重放的总共时间为25秒，以“PLY_TIM”形成的文字列指定最初重放的图像文件B的重放开始时刻为0秒，以“PLY_TIM”形成的文字例指定接着重放的图像/声音多重文件A的图像部分的重放时刻为10秒，若这样则与参照图32以及图34所说明的相同地能够进行文件的重放。

又，在本发明的实施形态8中，对于将当按下重放时间设定按键3101时显示于显示装置112上的重放时间的候补值作为设备预先设定的初值的情况进行了说明，而并不限定于此，例如，从各文件内的数据中判断本来用于重放存放在图像文件、声音文件、图像/声音多重文件的各文件中的全部数据所必须的时间(例如，对于存放了5秒运动图像的图像文件须5秒。对于存放了10秒声音数据的文件须10秒)并且将其最初显示在显示装置112上。

又，在本发明的实施形态8中，以秒为单位设定重放时间，而并不限定于此，还可以是包含小数的任何时间单位。

又，在本发明的实施形态8中，图像文件以及图像/声音多重文件的图像部分也可以是多帧形成的运动图像，也可以是一帧形成的静止图像，当图像为静止的图像时仅在指定的时间连续显示静止图像。

又，在本发明的实施形态8中，图像文件以及图像/声音多重文件的图像部分为运动图像的情况下仅所指定的时间重放文件时采用从该运动图像的最初进行重放的方法以及采用用户任意设定开始重放的位置的方法。当用户任意地指定开始重放的位置时，例如以运动图像的最初部分起的时间表示开始重放运动图像的位置，作为表示上述情况的文字列例如采用“PLY_STR”并且采用在自动重放控制文件中接着文字列“PLY_DUR”进行记载等的方法。以图32所示的自动控制文件为基础例举一示例，当图像文件B为30秒的运动图像并且在其最初起3秒后的位置10秒重放图像文件B时，自动重放控制文件的记载如图36所示。将文字列“PLY_STR”作为表示动画开始重放的位置并且由它指定为“3”，由此能够指定图像文件B开始重放的位置。又，对于文字列“PLY_STR”，不仅可以指定图像文件B还可以指定图像/声音多重文件的图像部分以及声音文件的开始重放的位置。又，当没有以文字列“PLY_STR”指定开始重放的位置时，例如可以定为无条件地从动画的最初起进行重放。

又，在本发明的实施形态8中，在重放对象的文件为运动动画时所指定重放的时间比本来重放图像文件、图像/声音多重文件的各文件内存放的全部图像数据所必须要的时间更长时，在指定时间内地运动图像的重放结束之后，也可以显示设备备有的蓝色背景等。具体地，对于3秒间的动画指示10秒间的重放等时，在最初的3秒间显示图像，在剩下的7秒间显示蓝色背景等。又，对于声音也是同样地，当指定重放的时间比本来重放存放在声音文件、图像/声音多重文件的各文件中的全部声音数据所必须的时间更长时，当指定时间内的声音重放结束之后，可以重放设备备有的声音或者使得没有声音。

又，在本发明的实施形态8中，在重放对象的文件为运动图像时当指定进行重放的时间比本来重放存放在图像文件、图像/声音多重文件的各文件中的全部图像数据所必须要的时间长时，在显示装置112上显示错误信息等并且引导用户使之设定本来重放全部图像数据所必要的时间。

又，在本发明的实施形态8中，作为指定重放时间等的文字列使用了PLY_DUR”、“PLY_TTL”、“PLY_TIM”、“PLY_STR”，而这仅仅是一示例，并不仅限于此。

又，在本发明的所有的实施形态中，对于图像文件、声音文件、图像/声音多重文件的编码方式、文件格式等并没有作特别的限定，显然，这些文件可以采用任意的编码方式进行编码、也可以是任意文件格式，都可以实现本发明。再者，即使图像文件、声音文件、图像/声音多重文件是压缩信息的文件或者非压缩的文件，或者是具有标题等的附加信息的文件都可以实现本发明。

又，在本发明所有的实施形态中，作为指定文件的文字列采用了“IMG_SRC”、“SND_SRC”、“CMP_SRC”，这仅是一个示例而并不限定于此。

又，在本发明所有的实施形态中，解码器108为包含将数字信号变换成模拟信号的数字-模拟变换器的构造。

又，在本发明所有的实施形态中，对于操作按键111的按键输入是通过图2的按键202～208所示那样的按下而进行按键的输入，而并不仅限于此，也可以采用显示在液晶显示装置上的接触面板以及从菜单显示中选择必要的操作的方法。

又，在本发明所有的实施形态中，对于使用于重放时的自动重放控制文件在存储装置101上仅存在一个的情况进行了说明，而并不仅限于此，例如可以在存储装置101中存在多个自动重放控制文件，用户能够从其中任意地选择自动重放所使用的自动重放控制文件。此时，例如在显示装置112上显示存储装置101中的所有自动重放控制文件，用户能够通过按键输入等从其中自由地选择自动重放控制文件，当然并不仅限于此。

又，在本发明的所有实施形态中，对于将自动重放控制文件记录在存储装置101中进行了说明，而这并不仅限于此，例如也可以存储到存储装置101之外的其他存储装置上。

又，在本发明所有的实施形态中，对于作成自动重放控制文件时重放图像以及声音使用的构造进行了说明，而并不仅限于此，例如也可以采用即使没有重放图像以及声音而在显示装置112上显示它们的文件名并从该文件名中选择进行自动重放的文件的方法等。

又，在本发明所有的实施形态中，对于作成自动重放控制文件时重放图像以及声音的构造进行了说明，而也可以采用对于图像显示其略图(thumb nail)的构造。又，也可以采用对于声音仅重放其一部分例如开头部分的构造。

又，在本发明所有实施形态中，对于图像文件以及图像/声音多重文件的图像部分的帧数并没有特别提及，而可以是1帧的静止图像也可以是多帧组成的运动图像。

又，在本发明所有的实施形态中，对于作成自动重放控制文件时使得重放图像以及声音的构造进行了说明，而可以采用当图像为多帧组成的运动图像时仅显示其一部分的图像的构造。

又，在本发明所有的实施形态中，当然至少通过CPU110进行的处理是由软件实现，该软件可以预先存储在存储器中，也可以由其他存储媒体提供。

工业利用性

如上所述，根据本发明提供一种实现下述内容的设备，用户能够自由简单地组合记录了图像信号的数据文件、记录了声音信号的数据文件以及多重记录图像信号与声音信号的数据文件这样不同形式的文件，而且还可以在图像以及声音上附加各种附加信息或者附加进行改变重放顺序等的变化而进行连续地重放，此时，能够实现同步地开始重放规定的图像与声音。

Claims (32)

1.一种图像以及声音的重放装置，其特征在于，具备

存储媒体，分别独立保持图像数据的文件、声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件、以及自动重放控制文件，其中，所述自动重放控制文件记载了与所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的自动重放相关的信息或者记载了与将这些文件任意组合形成的文件的自动重放相关的信息；

读出装置，读出所述存储媒体的存储内容；

解码器，将从所述存储媒体中读出的图像数据的文件、声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件进行解码并重放；

同步控制装置，对由所述解码器解码的图像信号和声音信号进行同步控制；

写入装置，将自动重放控制文件写入所述存储媒体；以及

中央处理器，在写入时控制所述写入装置，在重放时根据从所述存储媒体读出的自动重放控制文件控制所述读出装置与所述同步控制装置，

在保持于所述存储媒体中的自动重放控制文件中，重放的对象即所述图像数据的文件被指定为图像数据、重放的对象即所述声音数据的文件被指定为声音数据、多重存放了图像数据和声音数据的文件的图像数据部分作为重放的对象被指定为图像数据、多重存放了图像数据和声音数据的文件的声音数据部分作为重放的对象被指定为声音数据，

所述声音数据的文件、多重存放了图像数据和声音数据的文件的声音数据部分，能够被独立地指定为与图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分同步地被重放，

所述图像数据的文件、多重存放了图像数据和声音数据的文件的图像数据部分能够被独立地指定为与声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分同步地被重放。

2.如权利要求1所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中记载有：用于在保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件或者将它们任意组合形成的文件中确定作为重放对象的文件的信息。

3.如权利要求1所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中记载有：重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的顺序。

4.如权利要求1所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中记载有：表示重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的时间的信息。

5.如权利要求1所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中记载有：表示重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的时刻的信息。

6.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中，将与保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件的重放相关的信息归纳在至少一组中进行记载，在上述组内至少记载一个用于确定作为重放对象的所述各文件的信息，所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

7.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

在所述存储媒体的自动重放控制文件中，将与保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的重放相关的信息归纳在至少一组中进行记载，在所述组内分别各记载一个用于确定图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分的任意之一以及声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分的任意之一的信息。

8.如权利要求1或2所述的图像以声音的重放装置，其特征在于，

在保持于所述存储媒体中的自动重放控制文件的组中，当记载了用于确定多重存放了图像数据和声音数据的文件的信息时，在同一组内没有记载用于确定图像数据的文件、多重存放了图像数据和声音数据的文件中的图像数据部分、声音数据的文件或者多重存放了图像数据和声音数据的文件中的声音数据部分的信息。

9.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

通过以组为单位编集保持于所述存储媒体中的自动重放控制文件来生成新的自动重放控制文件。

10.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

具有格式变换手段，所述格式变换手段变换根据保持于所述存储媒体中的自动重放控制文件进行重放的图像数据的文件、声音数据的文件或多重存放了图像数据和声音数据的文件的数据格式。

11.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

具有将根据保持于所述存储媒体中的自动重放控制文件进行重放的图像信号与声音信号进行编码的编码装置。

12.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

将存放了与保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中至少之一合成的信息的附加信息文件存储在所述存储媒体中，

在保持于所述存储媒体的自动重放控制文件中记载有：用于确定作为重放对象的所述各文件的信息以及用于确定一个以上所述附加信息文件的信息，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

13.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，

用于确定作为所述重放对象的保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件的信息是指赋与作为重放对象的所述各文件的名称，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

14.如权利要求1或2所述的图像以及声音的重放装置，其特征在于，还具有：

重放装置，该重放装置根据所述存储媒体的自动重放控制文件从保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件进行图像信号与声音信号的重放。

15.如权利要求14所述的图像以及声音的重放装置，其特征在于，

所述重放装置是将保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件进行译码的译码器、从存储媒体读出所述各文件的所述读出装置以及将所述各文件解码的所述解码器的任意之一，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

16.如权利要求12所述的图像以及声音的重放装置，其特征在于，

所述附加信息文件是合成到所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件的至少一个文件上的图像、声音、文本的任意之一。

17.一种图像以及声音的重放方法，其特征在于，包括下述步骤：

从存储媒体，根据记载了与图像数据的文件、声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的自动重放相关的信息或者记载了与将这些文件任意组合形成的文件的自动重放相关的信息的自动重放控制文件，读出所述存储媒体中存储的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件；以及

对从所述存储媒体读出的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件进行同步控制并同时进行解码；

在保持于所述存储媒体中的自动重放控制文件中，重放的对象即所述图像数据的文件被指定为图像数据、重放的对象即所述声音数据的文件被指定为声音数据、多重存放了图像数据和声音数据的文件的图像数据部分作为重放的对象被指定为图像数据、多重存放了图像数据和声音数据的文件的声音数据部分作为重放的对象被指定为声音数据，

所述声音数据的文件、多重存放了图像数据和声音数据的文件的声音数据部分，能够被独立地指定为与图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分同步地被重放，

所述图像数据的文件、多重存放了图像数据和声音数据的文件的图像数据部分能够被独立地指定为与声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分同步地被重放。

18.如权利要求17所述的图像以及声音的重放方法，其特征在于，

在所述自动重放控制文件中记载有：用于在保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中确定作为重放对象的文件的信息。

19.如权利要求17所述的图像以及声音的重放方法，其特征在于，

在所述自动重放控制文件中记载有：重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的顺序。

20.如权利要求17所述的图像以及声音的重放方法，其特征在于，

在所述自动重放控制文件中记载有：表示重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的时间的信息。

21.如权利要求17所述的图像以及声音的重放方法，其特征在于，

在所述自动重放控制文件中记载有：表示重放保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的时刻的信息。

22.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，

在所述自动重放控制文件中，将与所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的自动重放相关的信息或者与将这些文件任意组合形成的文件的自动重放相关的信息归纳在至少一组中进行记载，在上述组内至少记载一个用于确定作为重放对象的各文件的信息，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

23.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，

在所述存储媒体的自动重放控制文件中，将与保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件的重放相关的信息归纳在至少一组中进行记载，在所述组内分别各记载一个用于确定图像数据的文件或多重存放了图像数据和声音数据的文件的图像数据部分的任意之一以及声音数据的文件或多重存放了图像数据和声音数据的文件的声音数据部分的任意之一的信息。

24.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，

在保持于所述存储媒体中的自动重放控制文件的组中，当记载了用于确定多重存放了图像数据和声音数据的文件的信息时，在同一组内没有记载用于确定图像数据的文件、多重存放了图像数据和声音数据的文件中的图像数据部分、声音数据的文件或者多重存放了图像数据和声音数据的文件中的声音数据部分的信息。

25.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，还包括

通过以组为单位进行编集保持于所述存储媒体中自动重放控制文件来生成新的自动重放控制文件的步骤。

26.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，还包括

将根据保持于所述存储媒体中的自动重放控制文件进行重放的图像数据的文件、声音数据的文件或者多重存放了图像数据和声音数据的文件的数据格式进行变换的步骤。

27.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，还包括

将根据保持于所述存储媒体的自动重放控制文件进行重放的图像信号与声音信号采用编码装置进行编码的步骤。

28.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，

将存放了与保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中至少之一合成的信息的附加信息文件存储在所述存储媒体中，在所述自动重放控制文件中记载用于确定作为重放对象的所述各文件的信息以及用于确定一个以上所述附加信息文件的信息，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

29.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，

用于确定作为所述重放对象的保持于所述存储媒体的所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据与声音数据的文件的信息是指赋与作为重放对象的所述各文件的名称，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

30.如权利要求17或18所述的图像以及声音的重放方法，其特征在于，还具有

利用重放装置根据所述存储媒体的自动重放控制文件从保持于所述存储媒体的所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中进行图像信号与声音信号的重放的步骤。

31.如权利要求30所述的图像以及声音的重放方法，其特征在于，

在所述重放步骤中的所述重放装置，是将保持于所述存储媒体中的所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件中的至少一个文件进行译码的译码器、从所述存储媒体读出所述各文件的读出装置以及将各文件解码的解码器的任意之一，

所述各文件包含所述图像数据的文件、所述声音数据的文件以及多重存放了图像数据和声音数据的文件中的至少一个文件或者将这些文件任意组合形成的文件。

32.如权利要求28所述的图像以及声音的重放方法，其特征在于，

所述附加信息文件是合成到所述图像数据的文件、所述声音数据的文件及多重存放了图像数据和声音数据的文件的至少一个文件上的图像、声音、文本的任意之一。

Images