CN100515017C - 图像与声频再现设备、图像与声频再现方法 - Google Patents

Abstract

图像与声频再现设备，包括显示设备；用于存储被采集图像数据、声频数据以及时间数据的装置，该声频数据在该图像数据的采集定时之前与采集定时时刻产生，而该时间数据表示该采集定时；用于再现该声频数据的装置；用于再现该图像数据以便在该显示设备上显示图像的装置；以及用于根据该时间数据控制该图像数据再现装置以便报告该采集定时的装置。

Description

图像与声频再现设备、图像与声频再现方法

技术领域

本发明涉及图像与声频再现设备、图像与声频再现方法以及用于对被采集静止图像及随该被采集静止图像一道记录的声频信号进行再现的程序。

背景技术

近来，有人提出一种数码相机，响应一次快门操作来获得并记录被采集图像，还记录该图像被采集前后产生的声频信号(参见日本公示专利申请号2000-78516)。可供摄制一个画面的数码相机探测周围的声音并在声频记录介质(譬如一个环形缓冲器)中加以记录。

当一个快门按键被操作时，就获得对象的一个图像信号，所获得的图像信号与该声频记录介质上记录的声频信号关联，而且该图像信号被记录到存储器介质。在回放方式中，记录在该存储器介质中的图像信号被加以再现以便显示该对象的图像，同时，与该图像信号关联的声频信号也从给定的记录部分加以再现。

发明内容

在前述传统数码相机的再现方式中，视频信号及与之关联的声频信号均被再现，所以一位用户不能确认该被再现声频信号与用来摄制一个画面的定时之间的关系。该被记录声频信号与被记录视频信号的再现既没有给用户以生动的感觉，也没有给用户以身临图像采集场面的感受。

本发明已经考虑到前述传统相机中所涉及的问题。本发明提供一个图像与声频再现设备以及一种图像与声频再现方法及程序，能提供身临该被记录声频与视频信号再现环境的乐趣与效果。

根据本发明的一个方面，提供一种图像与声频再现设备，包括：

显示设备；

用于存储被采集图像数据、声频数据以及时间数据的装置，该声频数据在该图像数据的采集定时之前或采集定时时刻产生，该时间数据表示该采集定时；

用于再现该声频数据的装置；以及

中央控制装置，用于根据通知该采集定时的该时间数据来控制该图像数据在所述显示设备上的再现以便该图像数据的显示状态在该采集定时之前或该采集定时之后逐步地变化。

根据本发明的另一方面，该控制装置包括当在该采集定时时刻产生的声频数据被再现时用于控制该图像数据再现装置以便显示该图像数据的装置。

当在该采集定时前产生的声频数据被再现的同时，如果在该采集定时时刻产生的声频数据也被再现，那么该被采集图像数据就会被再现并被显示在该显示设备上。所以，用户确认该被再现声频数据与该图像的采集定时之间的关系，并享受具有声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的又一个方面，该控制装置包括用于在该显示设备上显示产生该被再现声频数据的定时与该采集定时之间的关系的装置。

用户在该显示设备上从视觉确认产生该被再现声频数据的定时与该采集定时之间的关系，并满怀乐趣地等待该图像在该显示设备上出现。

根据本发明的再一个方面，该控制装置包括用于在该显示设备上显示产生该被再现声频数据的定时与该采集定时之间的关系的装置。

用户在该显示设备上从视觉确认产生该被再现声频数据的定时与该采集定时之间的关系，并享受具有声音与图像的生动感觉以及身临记录场面的感觉。

另外，根据本发明的一个方面，该控制装置包括用于在该采集定时时刻产生的声频数据被再现时改变该显示设备上所显示的图像的装置。

用户确认该被显示图像已被改变，所以能够在该显示设备上确认产生该被再现声频数据的定时与该采集定时之间的关系。用户享受具有声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的另一个方面，该控制装置包括逐渐改变该显示设备上所显示的图像、直到该采集定时时刻产生的声频数据被再现为止的装置。

用户确认该图像正被逐渐改变，所以能够在该显示设备上确认产生该被再现声频数据的定时与该采集定时之间的关系。用户可以享受具有声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的又一个方面，该存储装置还存储该采集定时后产生的声频数据，而且该控制装置包括用于在该采集定时时刻产生的声频数据被再现的时刻之后控制该声频数据再现装置的装置。

用户听见该采集定时前后产生的被再现声音，所以能够在该显示设备上确认产生该被再现数据的定时与该采集定时之间的时间关系。用户享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的再一个方面，该存储装置还存储该采集定时后产生的声频数据，而且该控制装置包括用于在该采集定时时刻产生的声频数据被再现的时刻之后再现该声频数据的装置以及用于在该采集定时时刻产生的声频数据被再现的时刻之后逐渐改变该显示设备上所显示的图像的装置。

用户听见该采集定时前后产生的被再现声音，所以能够在该显示设备上确认产生该被再现数据的定时与该采集定时之间的时间关系。另外，用户确认该图像正被逐渐改变，所以能够在该显示设备上确认产生该被再现声频数据的定时与该采集定时之间的时间关系。用户享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的又一个方面，该图像与声频再现装置还包括：

用于有选择地禁止该控制装置的装置，而且

其中该控制装置控制该图像数据再现装置以便在该显示设备上显示表示该采集定时的信息。

用户能够决定该图像数据与该声频数据的再现是否按照本发明加以执行。所以，用户只在他或她需要时才享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的再一个方面，该存储装置存储多组彼此关联的声频数据与图像数据，而且该图像与声频再现装置还包括：

用于选择该存储装置中存储的一组声频数据与图像数据的装置，而且其中

该声频数据再现装置再现由该选择装置选定的声频数据，而且

该图像数据再现装置再现由该选择装置选定的图像数据。

用户能够从多份图像文件中选择他或她所需要的一份图像文件。包含在所选图像文件中的声频数据与图像数据会被再现，用户则享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

另外，根据本发明的另一个方面，该图像与声频再现装置还包括：

用于确定该存储装置是否存储了该采集定时之前及该采集定时时刻产生的声频数据的装置，而且

其中当该确定装置认定该存储装置存储了该采集定时之前及该采集定时时刻产生的声频数据时，该控制装置控制该图像数据再现装置以便在该显示设备上显示表示该采集定时的信息。

只是当该采集定时之前产生的声频数据被包含在该图像文件之内时，用户才享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本方面的又一个方面，该控制装置包括用于选择该采集定时之前及该采集定时时刻产生的一组声频数据与图像数据、以及用于将所选定的组作为该选择单元的一个候选组加以提交的装置。

只要该图像文件按照本发明加以再现，那么不用知道该图像文件是否包含该采集定时之前的声频数据，用户就能享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的再一个方面，该图像与声频再现设备包括一台数码相机，该数码相机包括：

用于采集图像以便输出该采集图像数据的装置；以及

用于记录声音以便输出该声频数据的装置。

一个被采集的图像按照提示加以再现并被显示，用户在该显示设备上确认产生该被再现声频数据的定时与该采集定时之间的时间关系，所以用户享受具有该被再现声音与图像的生动感觉以及身临记录场面的感觉。

根据本发明的又一个方面，提供一种图像与声频再现方法，该方法包括如下步骤：从存储器装置读取被采集图像数据、声频数据以及时间数据，该声频数据在该图像数据的采集定时之前与采集定时时刻产生，而该时间数据表示该采集定时；再现该声频数据；根据报告该采集定时的该时间数据来控制该图像数据在所述显示设备上的再现以便该图像数据的显示状态在该采集定时之前或该采集定时之后逐步地变化。

附图说明

编入并构成本说明书之一部分的所附附图演示了本发明的当前首选实施例，与前面所给的总体说明以及后面所给的希望实施例的详细说明一道用于阐明本发明的原理及范围。

图1演示本发明的实施例中共同使用的电子照相机的结构的框图。

图2是说明图像文件的结构的示意图。

图3是表示在第一实施例的再现方式中所执行的程序的流程图。

图4A、4B与4C演示该第一实施例中显示设备上的一个显示屏幕的示例。

图5是表示第二实施例的再现方式中所执行的程序的流程图。

图6A、6B与6C演示该第二实施例中显示设备上的一个显示屏幕的示例。

图7是表示第三实施例的再现方式中所执行的程序的流程图。

图8A、8B、8C与8D演示该第三实施例中显示设备上的一个显示屏幕的示例。

图9是表示一个第四实施例的再现方式中所执行的程序的流程图。

图10A、10B、10C、10D与10E演示该第四实施例中显示设备上的一个显示屏幕的示例。

图11是表示第五实施例的再现方式中所执行的程序的流程图。

具体实施方式

现在参考所附附图来详细说明本发明的实施例。

【第一实施例】

图1是演示一台将在本发明的每个实施例中使用的照相机1的结构的框图。电子照相机1具有可以被交替选择的记录方式以及再现方式，包括一个CCD 2以及一个DSP/CPU 3。DSP/CPU 3由一个单芯片微计算机构成，用于控制电子照相机1中的各个单元，该微计算机具有各种数字信号处理功能，譬如用于压缩以及/或者展开过程图像数据以及声频数据过程的处理。

DSP/CPU 3被连接到一个用于驱动CCD 2的定时信号发生器(TG)4，而定时发生器4则被连接到接收被采集信号的一个单元电路5，该信号代表由CCD 2输出的、一个对象的光学图像。单元电路5包括用于保持所接收到的被采集信号的CDS、用于放大该被采集信号的自动增益控制放大器(AGC)以及用于将该放大的被采集信号变换为数字被采集信号的A/D变换器(AD)。一个输出信号(即一个来自CCD 2的数字信号)通过单元电路5被发送到DSP/CPU 3。

DSP/CPU 3与显示设备6、键盘输入单元7、定时单元8以及声频信号处理单元9相连，还通过地址数据总线10与缓冲存储器(DRAM)11、内部闪存12以及可分离存储器内存13相连。

缓冲存储器11被用来作为对采用CCD 2采集该对象所得到的对象数字图像数据进行临时存储的一个缓冲存储器，并被用作以循环方式存储声频信号的一个环形缓冲存储器，而且它还被用来作为一个工作内存。存储在缓冲存储器11中的图像数据与声频数据由DSP/CPU 3压缩并编码，从而获得一个具有预定格式(譬如JPEG格式)的图像文件，如此获得的图像文件被记录在存储器内存13之中。

内部闪存12中存储供DSP/CPU 3使用的一个运行程序以及用于控制各种单元的各类数据。DSP/CPU 3按照该运行程序来实现控制单元、再现控制单元、显示控制单元、声频控制单元以及图像控制单元的功能。

显示设备6被用来作为本发明的显示单元，包括一个彩色液晶显示器(彩色LCD)以及它的驱动电路。在可以进行采集的状态下，显示设备6将利用CCD采集而获得的对象图像显示为一个直达图像(through image)，而在可以再现一个被记录图像的状态下，显示设备6显示从存储器内存13读出并展开的被记录图像。

键盘输入单元7包括多个操作键，譬如一个快门键、一个电源键、一个菜单键以及一个横向键，而且将一个键盘输入信号输出到DSP/CPU 3。定时单元8具有计数一个日期的日历功能以及计数一个时间的时钟功能，在可供摄制一个画面的状态下产生需要的日期数据及时间数据，并将其发送到DSP/CPU 3。定时单元8也被用作一个定时器。

声频信号处理单元9包括内置扩音器、放大器、A/D变换器以及内置扬声器。声频信号处理单元9在按照“连同声频采集”方式进行采集时将通过该内置扩音器获得的一个声频信号变换为一个数字信号，并将变换后的数字信号发送到DSP/CPU 3。发送到DSP/CPU 3的声频信号被包含到该图像文件，并被存储到存储器内存13。存储在存储器内存13中的声频数据与该图像文件的相应图像数据一道被再现，并通过该内置扬声器加以输出。

在具有上述结构的电子照相机1中，当设置为连同声频采集方式时，在所有时间都连续执行声频记录操作，通过声频信号处理单元9的内置扩音器所获得的声频数据被变换为一个数字信号，而且该数字信号被记录到缓冲存储器11(譬如一个环形缓冲器)。

当操作该快门键时，一个静止图像采集程序就利用CCD 2开始采集该对象以便获得该对象的图像。所获得的对象图像被变换为数字图像数据，该数字图像数据被临时存储在缓冲存储器11之中。利用临时存储在缓冲存储器11中的声频数据及图像数据，就会生成图2所示的一份图像文件并将其存储到存储器内存13。

更具体地讲，图2是一幅示意图，演示附加有过去声频数据与未来声频数据的一份图像文件20，该过去声频数据在操作快门键的采集定时时刻前的一个几秒钟时段内获得，而未来声频数据则在该采集定时时刻后的一个几秒钟时段内获得。图像文件20包括一个声频旗标21、一个过去旗标22、一个未来旗标23、代表记录操作开始的时刻与采集一个静止图像的定时之间的一段时间的时间数据24、一个记录时间25、声频数据26以及图像数据27。

声频旗标21表示图像文件20中是否增加了声频数据。过去旗标22表示图像文件20中是否增加了过去声频数据。未来旗标23表示图像文件20中是否增加了未来声频数据。

代表记录操作开始的时刻与采集一个静止图像的时刻之间的一段时间的时间数据24表示记录过去声频数据的一段记录时间，记录时间25则表示记录过去声频数据及未来声频数据的一段总记录时间。如果只记录过去声频数据，则不需要该记录时间，所以不记录该记录时间。声频数据26是包括该过去声频数据及未来声频数据在内的一系列声频数据。图像数据27是在快门键操作时获得的、该对象的静止图像数据，被临时存储在存储器内存13中。如前所述，每次操作快门键时，在存储器内存13中接连不断地添加并存储一份新的图像文件20。

在设置为再现方式时，DSP/CPU 3按照一个向上/向下键的操作来滚动图像文件，从而不断地在显示设备6上显示包含在这些图像文件中的图像数据。当一位用户选择任何一份图像文件时，DSP/CPU 3就开始执行图3所示的一个图像选择程序。

更具体地讲，在步骤S101中根据声频旗标21确定该用户选定的图像数据的图像文件是否为一份包含声频数据的静止图像文件。如果该图像文件不是包含声频数据的静止图像文件，而是一份只包含图像数据27的图像文件，那么就在步骤S102中根据图像数据27加以再现并在显示设备6上显示一个静止图像。

如果在步骤S101中确定该图像文件是包含声频数据的静止图像文件，那么就在步骤S103中根据过去旗标22来确定该图像文件是否为包含过去声频数据的静止图像文件。如果在步骤S103中确定该图像文件不是包含过去声频数据的静止图像文件，那么该图像文件就是只包含未来声频数据的静止图像文件。如果该图像文件是只包含未来声频数据的静止图像文件，那么就在步骤S104中从未来声频数据26再现一个声频信号，而且一个静止图像则在步骤S105中从图像数据27加以再现并被显示在显示设备6上。

结果，就根据在操作该快门键的时刻之后的某段时间内记录的未来声频数据、从声频信号处理单元9的内置扬声器输出一个声音，同时，在操作该快门键的时刻所采集到的一个图像被显示在显示设备6上。然后，在步骤S106中确定基于该未来声频数据的一个声频再现操作是否结束。该声音根据未来声频数据26被不断输出，直到该声频再现操作结束为止，而且该图像也根据图像数据27加以连续显示。当该声频再现操作结束时，一个图像显示操作也就结束。

此时，如果在步骤S103中确定该图像文件是包含过去声频数据的静止图像文件，那么就在步骤S107中根据该声频数据从头再现一个过去声频信号。在再现该声频信号的过程中，执行该声频信号再现操作时要使该过去声频数据再现操作所需的一段时间准确符合时间数据24，而时间数据24则代表记录操作开始的时刻与采集一个静止图像的定时之间的时间段。然后，在步骤S108中对一个声频信号被再现的持续时间与采集一个静止图像的定时之间的关系加以计数，并将其显示在显示设备6上。

更具体地讲，一开始，包含在该图像文件中的、代表该记录操作开始的时刻与摄制一个画面的定时之间的时间段的时间数据24被作为最长时间显示在显示设备6上，然后如图4A所示，一个代表时间数据24的数字31随着该声频信号再现操作的时间流逝而减小。所以，当该静止图像上显示的数字31变为“0”时，用户就能够确认用于采集显示设备6上当前所显示的静止图像的定时已经开始。

在另一个示例中，时间数据24由一个圆形统计图32显示为100％，从该声频信号再现操作开始进行计数的一个时间T由图4B所示的圆形统计图32来表示。用户能够确认，圆形统计图32中用黑色显示的流逝时间T就表示采集显示设备6上当前所显示的静止图像P的定时。所以，当圆形统计图32全部变黑时，用户就可以确认，用于采集显示设备6上当前所显示的静止图像的定时已经开始。

在又一个示例中，时间数据24在一个条形图33中被显示为100％，从声频信号再现操作开始进行定时的一个时间T由图4C所示的条形图33来表示。用户能够确认，条形图33中用黑色显示的流逝时间T就表示采集显示设备6上当前所显示的静止图像的定时。所以，当条形图33全部变黑时，用户就可以确认，用于采集显示设备6上当前所显示的静止图像P的定时已经开始。

在步骤S109中确定是否已经到达与采集一个静止图像的定时相应的定时，或者确定在该声频信号再现过程中从该过去声频数据开始被再现的时刻起算是否已经经过了时间段24。上述倒计数显示一直继续到采集一个静止图像的定时开始为止。如果采集一个静止图像的定时已经开始，就在步骤S110中根据未来旗标23确定该图像文件是否为包含未来声频数据的静止图像文件。如果该图像文件是包含未来声频数据的静止图像文件，那么一个静止图像就在步骤S111中根据该图像数据中包含的图像数据27加以再现，并被显示在显示设备6上。

所以，当一个包含声频信号的静止图像被再现时，在摄制一个画面的定时前已经被记录的过去声频信号就从声频信号处理单元9的内置扬声器中输出，同时，在摄制一个画面的定时时刻所采集的一个静止图像则被显示在显示设备6上。

所以，用户能够识别声音已被再现的持续时间与该显示设备上当前所显示的静止图像被采集的时刻之间的时间关系。另外，在观看前面所提出的图像显示时，用户等待他最期待的静止图像的显示，而且能够享受具有该被再现声音与该被显示图像的生动感觉以及身临记录场面的感觉。

在步骤S112中确定用于再现该声频数据(未来声频数据)的声频数据再现操作是否已经结束。一个声音始终根据声频数据26而被输出，一个图像也始终根据图像数据27加以显示，直到该声频信号再现操作结束为止。在该声频信号再现结束之后，就不再输出声音，也不再显示图像。所以，在摄制一个画面的定时时刻所采集的图像被显示在显示设备6上之后，就根据该未来声频数据从声频信号再现单元9的内置扬声器输出一个声音，该声音与图像就给用户以身临画面摄制现场的感觉。

如果在步骤S110中确定该图像文件不是包含未来声频数据的静止图像文件，那么一个静止图像就在步骤S113中根据包含在图像文件20中的图像数据27加以再现并在显示设备6上显示。所以，如果仅仅是该过去声频数据被包含在所记录的声频数据之中，那么在该过去声频数据的声频再现操作结束的同时，摄制一个画面的定时时刻所采集的静止图像就出现在该显示设备上。

在本实施例中，如果该图像文件是包含未来声频数据的静止图像文件(步骤S110：是)，那么该图像就在到达与摄制一个画面的定时相应的定时之后被显示出来，并一直保持到该未来声频数据的声频数据再现操作结束为止。但该实施例也可以加以修改，以便只在摄制一个画面的定时时刻来开始再现与显示该图像。另外，在本实施例中，在步骤S108中计算剩余时间，并将其显示在显示设备6上，但是该实施例也可以加以修改，以便在摄制一个画面的时刻突然显示该静止图像而不在显示设备6上显示该剩余时间，这将能够使该声频信号与视频信号被生动再现。

【第二实施例】

图5是一幅流程图，表示在本发明的一个第二实施例中由DSP/CPU 3执行的一个程序。在被设置为再现方式时，每份图像文件所包含的图像数据在显示设备6上按照该向上与向下键的操作而滚动并被接连不断地显示。如果用户在显示设备6上选择具有过去声频数据的图像文件中所包含的图像数据，那么包含所选图像数据的图像文件就按照图5所示的流程图加以处理。

在步骤S201中，该过去声频信号根据该声频数据从头加以再现。该过去声频数据的再现操作在与时间数据24相同的时间段内执行，而时间数据24则代表该记录操作开始的时刻与摄制一个画面的定时之间的时间段。

在步骤S202中，一个静止图像在显示设备6上根据图像文件20中所包含的图像数据27加以显示，同时，也对该声频信号已被再现的持续时间与采集一个静止图像的定时之间的关系进行倒计数，并将其显示在显示设备6上。

更具体地讲，如图6A所示，在显示设备6所显示的静止图像P的部分上，一开始显示一个数字(用数字31表示)，代表该记录操作开始的时刻与摄制一个画面的定时之间的时间段24，然后，该数字随着再现时间的流逝而递减并被显示。所以，当该静止图像上显示的数字31变为“0”时，用户就能够确认，用于采集显示设备6上当前所显示的静止图像P的定时已经开始。

另外，如图6B所示，在显示设备6所显示的静止图像P的部分上，时间段24在圆形统计图32中被显示为100％，而从开始该声频信号再现操作起所经过的时间T则以圆形统计图32来表示。用户能够确认，在圆形统计图32中以黑色显示的流逝时间T就表示采集显示设备6上当前所显示的静止图像P的定时。所以，当圆形统计图32全部变黑时，用户就能够确认，用于采集显示设备6上当前所显示的静止图像P的定时已经开始。

在另一个示例中，在显示设备6所显示的静止图像P的部分上，时间段24在条形图33中被显示为100％，从该声频信号再现操作的开始所经过的时间T则在图6C所示的条形图33中以黑色来表示。用户能够确认，在条形图33中以黑色显示的流逝时间T就表示采集显示设备6上当前所显示的静止图像P的定时。所以，当条形图33全部变黑时，用户就能够确认，用于采集显示设备6上当前所显示的静止图像P的定时已经开始。

在步骤S203中确定基于包含在图像文件20中的声频数据26的声频信号再现操作是否已经结束。如果没有结束，就重复执行步骤S202中的一个过程。如果该未来声频数据被包含在图像文件20之中，那么就从该未来声频数据的再现操作开始时刻计数一个时间。

所以，在图6A中，数字31从该未来声频数据再现开始的时刻递增，观看递增数字31，用户就能够识别该未来数据的再现已经开始。如图6B所示，圆形统计图中的黑色部分从该未来声频数据的再现开始逐渐减小，而在图6C中，条形图中的黑色部分从该未来声频数据的再现开始时刻起逐渐减小。所以，观看这些图形中递减的黑色部分，用户就能够识别该未来声频数据的再现已经开始。

当基于包含在图像文件20中的声频数据26的声频信号再现操作结束时，符合图5流程图的程序就结束。

【第三实施例】

图7是一幅流程图，表示在本发明的一个第三实施例中由DSP/CPU 3执行的一个程序。在设置为再现方式时，每份图像文件所包含的图像数据在显示设备6上按照向上/向下键的操作而滚动并被接连不断地显示。如果用户在显示设备6上选择具有过去声频数据的图像文件中所包含的图像数据，那么包含所选图像数据的、具有过去声频数据的图像文件就按照图7所示的流程图加以处理。

在步骤S301中，该过去声频信号根据该声频数据被从头再现。该过去声频数据的再现操作在与时间数据24相同的时间段内执行，而时间数据24则代表该记录操作开始的时刻与摄制一个画面的定时之间的时间段。

在步骤S302中，一个静止图像在显示设备6上根据包含在图像文件20中的图像数据27加以再现并被显示。然后，静止图像P在步骤S302中如图8A所示被显示在显示设备6上。在步骤S303中确定与摄制一个画面的定时相应的定时是否已经开始，或者确定在该过去声频数据再现操作开始之后，该记录操作开始的时刻与摄制一个画面的定时之间的时间段24是否已经过去。该静止图像一直被显示在显示设备6上，直到摄制一个画面的定时已经开始为止，而且当摄制一个画面的定时已经开始时，在步骤S304中执行一个特定的显示程序。

在该特定显示程序中，如图8A与8B所示，该静止图像被显示在显示设备6上，而黑色部分34与34则在显示设备6上被显示在它的显示屏的顶部一侧与底部一侧。然后，这些黑色部分如图8C所示向一条水平中心线扩展。最后，如图8D所示，显示设备6的整个显示屏变黑，就彷佛一个快门已经被喀嚓按下，以便表示摄制一个画面的定时已经开始。

观看即刻变黑的显示屏，用户就能够识别声音已被再现的持续时间与当前显示的图像被采集的时刻之间的时间关系。所以，用户能够享受具有该被再现声音与该被显示图像的生动感觉以及身临记录场面的感觉。

该特定显示程序并不限于上述参考图8A～8D提出的程序，而是可以采用任何不同于该静止图像P的显示(包括一个图标和一条消息)或者一个闪光显示，只要这种显示能够清楚表示摄制一个画面的定时已经开始即可。

在步骤S305中根据未来旗标23确定该图像文件是否为具有未来声频数据的静止图像文件。如果该图像文件是包含未来声频数据的静止图像文件，那么一个静止图像就在步骤S306中根据包含在图像文件20中的图像数据27被显示在显示设备6上。就是说，图8D所示的显示设备6上的黑色显示屏变为或返回到图8A所示的静止图像P的显示。

观看再次显示的静止图像P，用户就能够识别该未来声频数据的再现已经开始。

另外，在步骤S307中确定该声频数据(未来声频数据)的声频信号再现操作是否已经结束，而且一个声音则根据该声频数据被持续输出，一个图像也根据图像数据27被持续显示，直到该声频数据的声频信号再现操作结束为止。如果在步骤S305中确定：该图像文件不是包含未来声频数据的静止图像文件，那么本程序就结束。

【第四实施例】

图9是一幅流程图，表示在本发明的一个第四实施例中由DSP/CPU 3执行的一个程序。在被设置为再现方式时，每份图像文件所包含的图像数据在显示设备6上按照向上/向下键的操作而滚动并被接连不断地显示。如果用户在显示设备6上选择具有过去声频数据的图像文件中所包含的图像数据，那么包含所选图像数据的、具有过去声频数据的图像文件就按照图9所示的流程图加以处理。

在图9流程图的步骤S401中，过去声频信号根据该声频数据被从头再现。该过去声频数据的再现操作在与时间数据24相同的时间段内执行，而时间数据24代表记录操作开始的时刻与摄制一个画面的定时之间的时间段。

另外，在步骤S401中，一个静止图像的尺寸被缩小到预定的显示尺寸，并根据图像文件20所包含的图像数据27在显示设备6上加以显示。

在步骤S402中，被再现静止图像的尺寸根据包含在图像文件20中的图像数据27被逐渐放大，并在显示设备6上加以显示。换句话说，随声频信号的再现时间的流逝而被放大的静止图像被显示在显示设备6上。然后，在步骤S403中确定摄制一个画面的定时是否已经开始，或者确定在该过去声频数据再现操作开始后，记录操作开始的时刻与摄制一个画面的定时之间的时间段24是否已经过去。随声频信号的再现时间的流逝而被放大的静止图像被持续显示在显示设备6上，直到摄制一个画面的定时已经开始为止，而且在摄制一个画面的定时开始后，该静止图像在步骤S404中以最大尺寸加以显示。

观看以最大尺寸显示的静止图像，用户就能够识别该声音已经被再现的持续时间与当前显示的静止图像被采集的时刻之间的时间关系。所以，用户就能够享受具有该被再现声音与该被显示图像的生动感觉以及身临记录场面的感觉。

该程序进到步骤S405中的一个处理过程，在该过程中根据未来旗标23确定该图像文件是否为包含未来声频数据的静止图像。如果在步骤S405中确定该图像文件是包含未来声频数据的静止图像，那么在步骤S406中，显示设备6上以最大尺寸显示的静止图像就在显示设备6上逐渐缩小。

所以，观看以缩小尺寸显示的静止图像，用户就能够识别该未来声音的再现已经开始。

另外，在步骤S407中确定基于该声频数据(当时的未来声频数据)的声频信号再现操作是否结束。一个声音根据声频数据26被持续输出，一个静止图像的尺寸被不断缩小并在显示设备6上加以显示，直到基于该声频数据的声频信号再现操作结束为止。当该声频信号再现操作结束时，该静止图像的显示也停止，从而完成该再现方式中的程序。

图10A～图10E演示显示设备6上显示的静止图像，在该第四实施例中，该图像尺寸在摄制一个画面的定时期间被逐渐放大与缩小。

当在步骤S401中该声频信号再现操作开始时，一个静止图像就如图10A所示根据包含在图像文件20中的图像数据27、按照预定尺寸被显示在显示设备6上。在该声频信号再现操作的执行期间，该静止图像如图10B所示在显示设备6上按照显示尺寸被逐渐放大。如果在步骤S403确定：该声频信号再现操作一直被执行到与摄制一个画面的定时相应的定时，那么该静止图像就如图10C所示在显示设备6上按照最大尺寸显示。

如果该图像文件是包含未来声频数据的静止图像文件，那么在该声频信号再现操作根据包含在该静止图像文件中的未来声频数据被执行的同时，该静止图像如图10D所示那样按照显示尺寸被逐渐缩小。当基于该未来声频数据的声频信号再现操作结束时，就显示尺寸被缩小的、如图10E所示的静止图像，本发明的程序便告完成。

举例来说，为改变该静止图像的显示尺寸，可以采用众所周知的使象素稀疏的补插技术，从而减少包含在该静止图像中的象素。

可以提出各种方法来以给定速率放大或缩小要在显示设备6上加以显示的静止图像的显示尺寸。举例来说，如果在该声频信号再现操作开始时固定该静止图像的初始显示尺寸，那么该静止图像的显示尺寸就可以利用包含在图像文件20中的时间数据(代表该记录操作开始的时刻与摄制一个画面的定时之间的时间段)以不变的速率放大，以便在摄制一个画面的定时开始的时刻达到最大尺寸。换句话说，被显示静止图像的一条边的长度可以按照速率增加，或者被显示静止图像的区域按照速率增加，从而表示采集静止图像的定时即将来临。

另外，该静止图像的尺寸可以按照预定速率增大或减小。在这种情况下，被显示静止图像的显示尺寸在从该记录操作开始时刻到摄制一个画面的定时的时间段内不必增大到它的最大值(图10C)。但是，在摄制一个画面的定时开始之前最好增大该静止图像的显示尺寸，然后在摄制一个画面的定时开始之后减小该显示尺寸。相反，被显示静止图像的显示尺寸也可以在摄制一个画面的定时开始之前增大到它的最大值。在这种情况下，该静止图像可以按照它的最大尺寸显示，直到摄制一个画面的定时开始为止。

在该第四实施例中，显示设备6在该声频信号再现操作开始时就开始显示该静止图像。但是，可以修改该实施例以便在该预定时间段内按照增大或减小的尺寸来显示该静止图像。

另外，在该第四实施例中，其显示尺寸逐渐被改变的静止图像被显示在显示设备6上，但是，可以修改该实施例，以便在摄制一个画面的定时开始之前逐渐提高该静止图像的清晰度，并在摄制一个画面的定时开始时降低该清晰度，或者逐渐改变被显示图像的颜色，譬如在摄制一个画面的定时开始之前由单色显示变为彩色显示，而在摄制一个画面的定时开始之后由彩色显示变为单色显示。能够逐渐改变该静止图像显示状态的任何修改都可以被采用。

【第五实施例】

图11是一幅流程图，表示在本发明的一个第五实施例中由DSP/CPU 3执行的一个程序。

在本实施例中，用户在步骤S501中选择一种图像再现方法。就是说，用户决定根据本发明来再现一个图像信号及一个声频信号或者按照常规方法进行再现。

在步骤S502中决定从根据本发明的一种图像与声频再现方法或常规再现方法中选择任何一种再现方法。如果选择常规再现方法，那么记录在记录介质中的一个文件名清单就被显示在显示设备6上以供用户在步骤S503与S504中进行选择。如果用户选择了一份供再现的文件，那么包含在所选文件(图像文件)中的图像数据与声频数据就在步骤S505中进行再现，该程序便结束(该图像文件的常规再现)。

与此同时，如果在步骤S502中确定：用户选择了根据本发明的图像与声频再现，那么在步骤S506中，一个计数器“n”被设置为“1”，并在步骤S507中确定第n份文件(当时的第一份文件)是否包括摄制一个画面的定时前所记录的声频数据。

如果在步骤S507中确定：该第一图像文件包括摄制一个画面的定时前所记录的声频数据，那么该图像文件的名称或计数器“n”的一个值就在步骤S508中被临时包含在、并被记录到一个候选清单，以便成为后面(步骤S111)描述的一份候选文件。该程序进到步骤S509中的一个过程，在该过程中确定步骤S507中的决定与步骤S508中的过程是否对所有图像文件执行。

计数器“n”在步骤S510中递增，步骤S507到步骤S509中的过程被重复执行，直到对所有图像文件都成功地确定了它们是否包含摄制一个画面的定时之前所记录的声频数据为止。

如果在步骤S509中认定：对所有图像文件都已经确定了它们是否包含该声频数据，那么就从该候选清单中读出候选文件，并加以显示以供用户在步骤S511中进行选择，而DSP/CPU 3则在步骤S512中等待该用户的选择。

如果该图像文件被用户选中，那么所选中的图像文件就在步骤S513中经受本发明的图像与声频再现程序处理，程序便告结束。

在步骤S513中要被执行的图像与声频再现程序已经在上述每个实施例中作了描述，所以这里省略对他们的进一步说明。

尽管上述说明涉及本发明的特定实施例，但应当理解，可以作出许多修改而不偏离它的精神。所附权利要求试图覆盖这些将会属于本发明的真实范围与精神之内的修改。所以，目前公布的实施例在各个方面来讲应被认为属于演示性质而非限制，由所附的权利要求、而非由前面的说明来表示的本发明的范围以及从与这些权利要求等效的含义与范围派生的所有改变都预期被包括在这些权利要求之中。举例来说，在每个实施例中，该图像与声频信号从包含声频数据26及图像数据27的同一份图像文件20中加以再现。在一个修改后的实施例中，一份要被再现的文件可以按照任何记录格式生成。举例来说，可以分别独立生成一份声频文件及一份图像文件，并使他们彼此关联来加以记录。

在这些实施例中，已经按照用于电子照相机的再现方式对本发明进行了描述。但是，本发明可以与具有一台内置相机的蜂窝电话、具有一台内置相机的PDA、具有一台内置相机的笔记本型个人计算机中提供的再现功能一道使用，而且也可以与不具有采集功能的一部蜂窝电话、PDA、一台笔记本型个人计算机中提供的再现功能一道使用。本发明可以与具有图像与声频数据再现功能的任何设备一道使用。

已特别参考某些希望的实施例对本发明进行了说明，但是应当理解，在本发明的精神与范围内可以实现许多变化形式与修改。

如上所述，用户能够期望识别声音已被再现的持续时间与当前显示的或过去显示的静止图像被采集的时刻之间的时间关系，所以，用户能够享受具有该被再现声音与该被显示图像的生动感觉以及身临记录场面的感觉。由于在采集一个静止图像的定时开始之前的这段时间内的声音都被已再现，所以根据本发明的视频与声频再现设备可以被用户满怀乐趣并倍感兴趣地加以使用。

Claims (21)

1、一种图像与声频再现设备，包括：

显示设备；

存储装置，用于存储被采集图像数据、声频数据以及时间数据，该声频数据在该图像数据的采集定时或该采集定时之前产生，该时间数据表示该采集定时；

声频数据再现装置，用于再现该声频数据的装置；以及

中央处理装置，用于根据通知该采集定时的该时间数据来控制该图像数据在所述显示设备上的再现以便图像的显示状态在该采集定时之前或该采集定时之后逐步地变化。

2、如权利要求1的图像与声频再现设备，其中所述中央处理装置控制所述图像数据的再现以便所述图像的显示状态按照预定方式逐步地变化直到所述采集定时，并且在该采集定时之后以相反方式逐步地变化。

3、如权利要求2的图像与声频再现设备，其中所述中央处理装置控制所述图像数据的再现以便所述图像的尺寸在所述采集定时之前逐步地增大，并且在所述采集定时之后逐步地减小。

4、如权利要求3的图像与声频再现设备，其中所述中央处理装置控制所述图像数据的再现以便所述图像的尺寸在所述采集定时之前从初始还原尺寸逐步地增大到全尺寸显示，并且在所述采集定时之后从全尺寸显示逐步地减小到所述初始还原尺寸。

5、如权利要求2的图像与声频再现设备，其中所述中央处理装置控制所述图像数据的再现以便所述图像的清晰度在所述采集定时之前逐步增大并且在该采集定时之后逐步地减小。

6、如权利要求2的图像与声频再现设备，其中所述中央处理装置控制所述图像数据的再现以便在所述采集定时之前所述图像由单色显示逐步地变化到彩色显示，并且在所述采集定时之后由彩色显示逐步地变化到单色显示。

7、按照权利要求1的图像与声频再现设备，其中

该中央处理装置进一步控制当在该采集定时所产生的声频数据被再现时显示该图像数据。

8、按照权利要求1的图像与声频再现设备，其中

该中央处理装置进一步控制采用条形图、圆形统计图及数字表达式中的一种形式来显示该关系。

9、按照权利要求1的图像与声频再现设备，其中

该中央处理装置进一步控制逐渐改变该显示设备上所显示的图像，直到该采集定时产生的声频数据被再现为止。

10、按照权利要求9的图像与声频再现设备，其中该中央处理装置进一步控制：

在该声频数据再现开始时缩小该显示设备上所显示的图像尺寸；以及

逐渐增大该显示设备上所显示的图像尺寸，直到该采集定时产生的声频数据被再现的时刻为止。

11、按照权利要求7的图像与声频再现设备，其中

该存储装置还存储该采集定时之后产生的声频数据，而且

该中央处理装置进一步在该采集定时产生的声频数据被再现的时刻之后控制该声频数据再现装置。

12、按照权利要求9的图像与声频再现设备，其中

该存储装置还存储该采集定时之后产生的声频数据，而且

该中央处理装置进一步在该采集定时产生的声频数据被再现的时刻之后控制再现该声频数据，以及在该采集定时产生的声频数据被再现的时刻之后控制逐渐改变该显示设备上所显示的图像。

13、按照权利要求1的图像与声频再现设备，

其中该中央处理装置在没有被选择性地禁止时控制在该显示设备上显示表示该采集定时的信息。

14、按照权利要求1的图像与声频再现设备，其中

该存储装置存储多组彼此关联的声频数据与图像数据，而且

该中央处理装置进一步控制选择该存储装置中存储的一组声频数据与图像数据，

该声频数据再现装置再现所选定的声频数据，

相应地再现所选定的图像数据。

15、按照权利要求14的图像与声频再现设备，

所述中央处理装置确定该存储装置是否存储该采集定时之前及该采集定时产生的声频数据，而且

其中该中央处理装置在确定该存储装置存储了该采集定时之前与该采集定时产生的声频数据时控制在该显示设备上显示表示该采集定时的信息。

16、按照权利要求14的图像与声频再现设备，其中该中央处理装置进一步控制选择一组在该采集定时之前与该采集定时产生的声频数据以及图像数据，而且将所选组作为一个候选组呈现。

17、按照权利要求1的图像与声频再现设备，其中该图像与声频再现设备包括数码相机，该相机包括：

用于采集图像以输出该采集图像数据的装置；以及

用于记录声音以输出该声频数据的装置。

18、一种图像与声频再现方法，该方法包括如下步骤：

从存储器装置读取被采集图像数据、声频数据以及时间数据，该声频数据在该图像数据的采集定时或该采集定时之前产生，而该时间数据表示该采集定时；

再现该声频数据；

根据报告该采集定时的该时间数据来控制该图像数据在所述显示设备上的再现以便图像的显示状态在该采集定时之前或该采集定时之后逐步地变化。

19、按照权利要求18的方法，进一步包括：

当该采集定时产生的声频数据被再现时显示该图像数据。

20、按照权利要求18的方法，进一步包括：

当该采集定时产生的声频数据被再现时改变该显示设备上所显示的图像。

21、按照权利要求18的方法，进一步包括：

逐渐改变该显示设备上所显示的图像，直到该采集定时产生的声频数据被再现为止。

Images