CN101404724A - 显示控制设备、显示控制方法和显示控制程序 - Google Patents

Abstract

本发明提供了显示控制设备、显示控制方法和显示控制程序。一种显示控制设备包括：合成图像生成单元，该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及显示控制单元，该显示控制单元被配置为在显示单元的显示屏幕上显示该合成图像。

Description

显示控制设备、显示控制方法和显示控制程序

技术领域

本发明涉及显示控制设备、显示控制方法和显示控制程序，它们能够适当地应用于能够以静止图像的形式拍摄对象(在下文中，以静止图像的形式拍摄对象也可以被称为“静止图像拍摄”)并且还能够以运动图像的形式拍摄对象(在下文中，以运动图像的形式拍摄对象也可以被称为“运动图像拍摄”)的数字静态相机(digital still camera)。

背景技术

对于现有技术来说，当数字静态相机对对象执行静止图像拍摄时，作为拍摄结果获得的静止图像被生成并记录。另外，当数字静态相机对对象执行静止图像拍摄时，由于稀疏静止图像的像素并且缩小大小而获得的静止图像(在下文中也称为“静止图像缩略图”)被生成并记录。

另外，对于现有技术来说，当数字静态相机对对象执行运动图像拍摄时，作为拍摄结果获得的由时间上连续的多个单位图像(unit image)(场图像或帧图像)形成的运动图像被生成并记录。另外，当数字静态相机对对象执行静止图像拍摄时，表示运动图像的单位图像被从运动图像中提取出来，并且由于稀疏单位图像的像素并且缩小大小而获得的静止图像(在下文中也称为“单位图像缩略图”)被生成并记录。

对于现有技术来说，数字静态相机在显示单元的显示屏幕上显示布置成矩阵形式的多个静止图像缩略图和多个单位图像缩略图的列表。从而，数字静态相机使得用户能够通过显示单元的显示屏幕上显示的静止图像缩略图和单位图像缩略图来搜索将要被播放的静止图像和运动图像(例如，日本未实审专利申请公布No.2006-295236(第8页和第11页，图10))。

发明内容

现在，根据现有技术的一些数字静态相机除了执行单独地拍摄对象的静止图像和运动图像的操作之外，还执行根据单次快门操作以时分方式拍摄静止图像和运动图像的操作。更具体而言，在拍摄静止图像之后，运动图像被自动拍摄。但是，即使对于这种配置的数字静态相机来说，多个静止图像缩略图和多个单位图像缩略图的列表也仍像上述根据现有技术的数字静态相机中那样以布置成矩阵的形式被显示在显示单元的显示屏幕上。

也就是说，对于这种配置的数字静态相机来说，没有考虑在显示上将通过时分方式的静止图像拍摄和运动图像拍摄生成的有关静止图像和运动图像的静止图像缩略图和单位图像缩略图与其他静止图像缩略图和单位图像缩略图区分开来。

已经了解到对提供这样一种显示控制设备、显示控制方法和显示控制程序的需求，该显示控制设备、显示控制方法和显示控制程序使得相关联的静止图像和运动图像能够很容易被区分。

根据本发明实施例的一种显示控制设备，包括：合成图像生成单元，该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及显示控制单元，该显示控制单元被配置为在显示单元的显示屏幕上显示该合成图像。

利用此配置，充当合成图像的相关联的静止图像和运动图像的静止图像和运动图像的单位图像可以被显示以便与其他静止图像和运动图像的单位图像区别开来。

利用上述配置，可以实现一种显示控制设备、显示控制方法和显示控制程序，其中通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上，并且在显示单元的显示屏幕上显示该合成图像，从而充当合成图像的相关联的静止图像和运动图像的静止图像和运动图像的单位图像可以被显示以便与其他静止图像和运动图像的单位图像区别开来，因此相关联的静止图像和运动图像可以很容易被辨别。

附图说明

图1A至1C是图示出根据本发明的数字静态相机的外部视图的略图；

图2是图示出根据本发明实施例的数字静态相机的电路配置的一种布置的框图；

图3是用于描述主静止图像数据的生成的略图；

图4是用于描述主运动图像数据的生成的略图；

图5是图示出文件名的配置的略图；

图6是用于描述缩略图的列表显示的略图；

图7是图示出合成缩略图的配置的略图；

图8是图示出主合成图像的配置的略图；

图9是用于描述从主合成图像显示到主运动图像显示的切换(1)的略图；

图10是用于描述对于主合成图像的叠加增强处理(1)的略图；

图11是用于描述对于主合成图像的叠加增强处理(2)的略图；

图12是用于描述对于主合成图像的叠加增强处理(3)的略图；

图13是用于描述从主合成图像显示到主运动图像显示的切换(2)的略图；

图14是用于描述从主合成图像显示到主运动图像显示的切换(3)的略图；

图15是用于描述从主合成图像显示到主运动图像显示的切换(4)的略图；

图16是用于描述从主合成图像显示到主运动图像显示的切换(5)的略图；

图17是图示出合成缩略图显示处理的过程的流程图；

图18是图示出连续重放处理的过程的流程图；

图19A至19C是用于描述根据另一个实施例的相关联的主静止图像和主运动图像的主单位图像的显示的略图；

图20是图示出根据另一实施例的主合成图像配置(1)的略图；

图21是图示出根据另一实施例的主合成图像配置(2)的略图；

图22是图示出根据另一实施例的主合成图像配置(3)的略图；

图23是用于描述根据另一实施例的合成缩略图显示(1)的略图；

图24是用于描述根据另一实施例的合成缩略图显示(2)的略图；

图25是图示出播放列表的配置的略图。

具体实施方式

将参考附图详细描述本发明的实施例。

第一实施例

1.配置

1-1数字静态相机的外部配置

在图1A至1C中，标号1表示应用了本发明的数字静态相机，其整体外部视图在这里示出。数字静态相机1具有由盒状外壳形成的主单元2。

主单元2的上面2A上设置有快门按钮3，并且拍摄透镜4被定位在主单元2的正面2B。从而，主单元2被配置成使得拍摄透镜4能够连同正面2B指向对象，并且在这种快门按钮3在这种状态中被按下的情况下，对象的静止图像拍摄和运动图像拍摄可被执行。

另外，在主单元2的正面2B钻出了孔2BX，以便经由孔2BX通过存放在主单元2内的麦克风来收集外部声音。这使得在对对象进行运动图像拍摄时，能够经由孔2BX通过内部麦克风收集外部声音。

另外，在主单元2的背面2C上，部署了由液晶显示屏或有机EL(电致发光)显示屏配置成的显示单元5，其中暴露出方形显示屏幕5A。显示单元5被形成为使得显示屏幕5A具有例如16∶9的宽高比(也称为“屏幕宽高比”)。应当注意，显示屏幕5A的屏幕宽高比是显示屏幕5A在屏幕横向方向(即水平方向)的长度与纵向方向(即垂直方向)的长度之间的比率。

另外，在主单元2的背面2C上，设置了各种操作按钮6以用于输入命令，以便执行各种设定和显示等等。因此，基于通过对对象的静止图像拍摄生成的静止图像数据，可以根据用户对操作按钮6的操作在显示单元5的显示屏幕5A上显示静止图像。另外，基于通过对对象的静止图像拍摄生成的运动图像数据，可以根据用户对操作按钮6的操作在显示单元5的显示屏幕5A上显示运动图像。

此外，主单元2的侧面2D上设置有介质插槽7，其中安装了内置有半导体存储器的小型扁平矩形记录介质。从而，通过对对象的静止图像拍摄生成的静止图像数据和通过对对象的运动图像拍摄生成的运动图像数据可以被记录在记录介质中。

在主单元2的侧面2D上还设置有外部端子8，用于与诸如外部电视接收器或个人计算机之类的外部设备(图中未示出)相连接。从而，在经由外部端子8连接到外部设备的情况下，通过播放由对对象的静止图像拍摄生成的静止图像数据而获得的静止图像以及通过播放由对对象的运动图像拍摄生成的运动图像数据而获得的运动图像，可以根据用户对操作按钮6的操作而被输出到外部设备。从而，基于静止图像数据的静止图像和基于运动图像数据的运动图像也可以被显示在外部设备上。

1-2数字静态相机的电路配置

接下来，将参考图2描述数字静态相机1的电路配置。数字静态相机1除了CPU(中央处理单元)10外，还具有各种电路块，例如具有电池的电源块11。

CPU 10依靠从电源块11提供来的功率工作，并且还使得电源块11向每个电路块提供电功率，使得电路块适当地工作。另外，CPU 10经由总线13将存储在ROM(只读存储器)12中的诸如显示控制程序之类的程序读出到RAM(随机访问存储器)14。CPU 10根据加载到RAM 14的各种程序控制整个数字静态相机1，并且根据用户操作执行从由快门按钮3和操作按钮6构成的操作单元15输入的各种类型的命令。从而，当处于静止图像拍摄模式中时，CPU 10通过向相机块16发送控制信号来控制相机块16。

注意，相机块16具有上述拍摄透镜4和相机透镜单元16A，其中诸如光圈之类的用于调节曝光的光学元件按顺序被部署在光轴上。相机块16还具有部署在相机透镜单元16A之后的成像器件16B，例如CCD(电荷耦合器件)图像传感器或CMOS(互补金属氧化物半导体)图像传感器。

成像器件16B是利用具有例如4∶3的宽高比的方形感光面形成的(在下文中，这可以被称为“感光面宽高比”)。注意，感光面的感光面宽高比是感光面的水平和垂直方向的比率。

相机块16还设置有信号处理单元16C、A/D转换器16D和相机控制器16E。相机控制器16E根据从CPU 10提供来的控制信号执行对相机透镜单元16A的驱动控制，以便调节对象的对焦、曝光等等。相机控制器16E还根据从CPU 10来的控制信号对成像器件16B、信号处理单元16C和A/D转换器16D进行控制。

从而，成像器件16B在感光面处接收来自对象的、经过了相机透镜单元16A的成像光L1。从而，成像器件16B顺序地执行在感光面处接收的成像光L1的光电转换并且根据成像光L1生成模拟光电转换信号，并顺序地输出所生成的光电转换信号到信号处理单元16C。

每次信号处理单元16C接收到以这种方式顺序生成的图像信号时，信号处理单元16C就利用A/D转换器16D执行A/D转换处理，并且将其作为数字图像数据输出到缓冲存储器21以便其被临时存储。

现在，由相机块16生成的图像数据具有与成像器件16B的感光面的像素数目(在下文中，可以称为“有效像素”)相同的像素数目，并且还具有与感光面宽高比相同的宽高比。

此时，图像修改单元22从缓冲存储器21顺序读出临时记录的图像数据，并且使得已被读出的图像数据经历根据屏幕宽高比的修剪处理(或者剪切处理)。图像修改单元22还执行图像缩小处理，其中像素根据显示屏幕5A的分辨率(即，显示屏幕5A的每单位长度的像素数目)被稀疏。因此，图像修改单元22生成由具有例如16∶9的宽高比并且在时间上连续的多个单位图像构成的成像图像的图像数据。

应当注意，单位图像的16∶9的宽高比是单位图像在图像的水平方向(在下文中也称为“图像横向方向”)上的长度与在图像的垂直方向(在下文中也称为“图像纵向方向”)上的长度之间的比率。

图像修改单元22以这种方式生成成像图像数据，并且同时将成像图像数据发送到CPU 10。此时，CPU 10利用D/A转换器23执行对图像修改单元22提供的成像图像数据的D/A转换处理，并且作为模拟成像图像信号输出到显示控制器24。

显示控制器24将从CPU 10提供来的成像图像信号发送到显示单元5，从而使得成像图像基于成像图像信号被显示在显示单元5的显示屏幕5A上。从而，CPU 10使得用户能够通过显示单元5的显示屏幕5A上显示的成像图像来确认对象的成像状态。

在用户在这种状态中按下快门按钮3使得静止图像拍摄命令被从操作单元15输入到CPU 10的情况下，在输入时刻在相机块16处生成并临时存储在缓冲存储器21处的一组图像数据被取得，作为针对静止图像拍摄的图像数据。

图像修改单元22随后从缓冲存储器21读出针对静止图像拍摄的图像数据，并且使得已被读出的该针对静止图像拍摄的图像数据经历根据为静止图像拍摄预定的4∶3宽高比的修剪处理(或剪切处理)。

另外，图像修改单元22使得针对静止图像拍摄的图像数据经历图像缩小处理，其中根据预先确定的静止图像的预定记录图像大小(在下文中，也称为“静止图像大小”)来稀疏像素。注意，静止图像大小是按照静止图像的图像水平方向上的像素数目和图像垂直方向上的像素数目来表达的。从而，图像修改单元22基于针对静止图像拍摄的图像数据来生成具有4∶3的宽高比的用于要记录的静止图像的图像数据。注意，在下文中，基于针对静止图像拍摄的图像数据生成的用于记录的静止图像的静止图像数据将被称为“主静止图像数据”，并且基于此静止图像数据的静止图像将被称为“主静止图像”。

另外，在以下的描述中，为静止图像预定的4∶3宽高比也将被称为“静止图像宽高比”。注意，静止图像宽高比是静止图像的水平方向上的长度(在下文中也称为“静止图像横向长度”)与图像的垂直方向上的长度(在下文中也称为“静止图像纵向长度”)之间的比率。

如图3所示，作为具体示例，图像修改单元22从缓冲存储器21读出具有4∶3的宽高比的图像G1的图像数据，作为针对静止图像拍摄的图像数据。图像修改单元22擦除图像G1的从图像水平方向上的右侧延伸到左侧的、图像垂直方向上的顶部的带状部分G11(在下文中，也称为“上部带状部分”)，并且还擦除图像G1的从图像水平方向上的右侧延伸到左侧的、图像垂直方向上的底部的带状部分G12(在下文中，也称为“下部带状部分”)。

从而，图像修改单元22基于针对静止图像拍摄的图像数据，从具有4∶3的宽高比的图像G1生成具有16∶9的宽高比的图像G2。另外，图像修改单元22擦除图像G2的从图像垂直方向上的顶部延伸到底部的、图像水平方向上的右侧的带状部分G21(在下文中，也称为“右侧带状部分”)，并且还擦除图像G2的从图像垂直方向上的顶部延伸到底部的、图像水平方向上的左侧的带状部分G22(在下文中，也称为“左侧带状部分”)。

从而，图像修改单元22从具有16∶9的宽高比的图像G2生成静止图像G3。图像修改单元22随后根据静止图像大小在不改变静止图像宽高比的情况下稀疏静止图像G3的像素(即，执行图像缩小处理)，从而生成主静止图像MG1的主静止图像数据。

图像修改单元22在以这种方式生成了主静止图像数据后，将所生成的主静止图像数据发送到缓冲存储器21以便临时记录。此时，静止图像处理单元25从缓冲存储器21读取临时记录的主静止图像数据。

静止图像处理单元25利用静止图像压缩编码方法执行对主静止图像数据的压缩处理，以生成压缩静止图像数据，并且将所生成的压缩静止图像数据发送到缓冲存储器21以便临时记录。

另外，CPU 10从缓冲存储器21读出压缩静止图像数据，并且将已被读出的压缩静止图像数据经由介质接口26发送到记录介质27。从而，记录介质27将压缩静止图像数据记录在记录介质27中，并且以这种方式用户可以执行对对象的静止图像拍摄。

另外，CPU 10被布置成使得在运动图像拍摄模式中，基于成像图像信号的成像图像以与上述静止图像拍摄模式中相同的方式被显示在显示单元5的显示屏幕5A上，以便用户能够确认对象的成像状态。

在用户在这种状态中按下快门按钮3使得运动图像拍摄命令被从操作单元15输入到CPU 10的情况下，从输入时刻直到经过预定量的时间为止的时段，或者从输入时刻直到用户按下快门按钮3使得运动图像拍摄结束命令被从操作单元15输入为止的时段，被作为运动图像拍摄时段。

CPU 10取得在运动图像拍摄时段期间在相机块16处顺序生成并临时记录在缓冲存储器21中的多组图像数据，作为针对运动图像拍摄的图像数据。此时，图像修改单元22从缓冲存储器21读出针对运动图像拍摄的多组图像数据，并且使得已被读出的该针对运动图像拍摄的图像数据经历根据为运动图像拍摄预定的16∶9宽高比的修剪处理(或剪切处理)。

另外，图像修改单元22使得针对运动图像拍摄的多组图像数据经历图像缩小处理，其中根据预先确定的运动图像的预定记录图像大小(在下文中，也称为“运动图像大小”)来稀疏像素。注意，运动图像大小是按照构成运动图像的单位图像(即场图像或帧图像)的图像水平方向上的像素数目和图像垂直方向上的像素数目来表达的。从而，图像修改单元22基于针对运动图像拍摄的图像数据来生成具有16∶9的宽高比的用于要通过多个时间上连续的单位图像来记录的运动图像的图像数据。

注意，在下文中，基于针对运动图像拍摄的多组图像数据生成的用于记录的运动图像的运动图像数据将被称为“主运动图像数据”，并且基于此运动图像数据的运动图像将被称为“主运动图像”。另外，在下文中，构成主运动图像的多个单位图像也可以各自被称为“主单位图像”，并且主单位图像的单位图像数据可以被称为“主单位图像数据”。

另外，在以下的描述中，为运动图像预定的16∶9宽高比也可以被称为“运动图像宽高比”。注意，运动图像宽高比是构成运动图像的单位图像的水平方向上的长度(在下文中也称为“运动图像横向长度”)与图像的垂直方向上的长度(在下文中也称为“运动图像纵向长度”)之间的比率。

如图4所示，作为具体示例，图像修改单元22从缓冲存储器21读出具有4∶3的宽高比(即感光面宽高比)的多个时间上连续的图像G1的图像数据，作为针对运动图像拍摄的图像数据。图像修改单元22从多个图像G1的顶部和底部擦除上部带状部分G11和下部带状部分G12。从而，图像修改单元22从具有4∶3的宽高比的图像G1生成具有运动图像宽高比的多个单位图像G2。

然后，图像修改单元22通过根据运动图像大小在不改变运动图像宽高比的情况下稀疏多个单位图像G2中的每一个的像素，来从多个单位图像G2生成多个主单位图像MV1至MVN(即，执行图像缩小处理)。

图像修改单元22在以这种方式生成了主运动图像数据后，将所生成的主运动图像数据发送到缓冲存储器21以便临时记录。此时，运动图像处理单元28从缓冲存储器21读取临时记录的主运动图像数据，利用运动图像压缩编码方法执行对主运动图像数据的压缩处理以生成压缩运动图像数据，并且将所生成的压缩运动图像数据发送到缓冲存储器21以便临时记录。

另外，CPU 10在运动图像拍摄时段期间利用麦克风29收集环境声音并生成模拟音频信号，并且还利用A/D转换器30执行音频信号的A/D转换，以便作为音频数据发出到音频处理单元31。音频处理单元31利用音频压缩编码方法执行对经由A/D转换器30从麦克风29提供来的音频数据的压缩编码以生成压缩音频数据，并将所生成的压缩音频数据发送到缓冲存储器21以便临时记录。

CPU 10将临时记录的压缩运动图像数据和压缩音频从记录有它们的缓冲存储器21中读出，并且执行时分复用，从而生成运动图像流。CPU 10还经由介质接口26将运动图像流发送到记录介质27，从而将运动图像流记录在记录介质27中。从而，CPU 10使得用户能够执行对对象的运动图像拍摄。

注意，CPU 10并不限于只是对对象的静止图像拍摄或者对对象的运动图像拍摄，静止图像拍摄和运动图像拍摄可以根据对快门按钮3的单次快门操作而以时分方式执行。

在以时分方式执行对对象的静止图像拍摄和运动图像拍摄的时分拍摄模式中，基于成像图像信号的成像图像以与上述静止图像拍摄模式中相同的方式被显示在显示单元5的显示屏幕5A上，以便用户能够确认对象的成像状态。

在用户在这种状态中按下快门按钮3使得时分图像拍摄命令被从操作单元15输入到CPU 10的情况下，在输入时刻对对象的静止图像拍摄被执行，紧接这之后，运动图像拍摄也被自动执行。

在这种情况下，CPU 10取得在时分图像拍摄命令输入时刻在相机块16处生成并临时存储在缓冲存储器21处的一组图像数据，作为针对时分拍摄的图像数据。从而，以与上述静止图像拍摄模式中相同的方式，CPU10基于针对静止图像拍摄的图像数据生成压缩静止图像数据，并且将其记录在记录介质27中。

另外，当在相机块16处生成针对静止图像拍摄的图像数据后，在下一图像数据被生成时，从该下一图像数据被生成的时刻直到经过预定量的时间为止的时段，或者从该下一图像数据被生成的时刻直到用户按下快门按钮3使得时分图像拍摄结束命令被从操作单元15输入为止的时段，被作为运动图像拍摄时段。

CPU 10取得在运动图像拍摄时段期间在相机块16处顺序生成并临时记录在缓冲存储器21中的多组图像数据，作为针对运动图像拍摄的图像数据。注意，针对运动图像拍摄的多组图像数据是从相机块16在针对静止图像拍摄的图像数据之后生成的图像数据到在运动图像拍摄时段结束时刻生成的图像数据的多组图像数据。

从而，以与上述运动图像拍摄模式中相同的方式，CPU 10基于多组图像数据生成运动图像流，并将其记录在记录介质27中。因此，CPU 10可以实现对对象的时分静止图像拍摄和运动图像拍摄。

现在，在执行对对象的静止图像拍摄并生成压缩静止图像数据后，CPU 10将压缩图像数据作为文件记录在记录介质27中。另外，在执行对对象的运动图像拍摄并生成运动图像流后，CPU 10将图像数据文件作为文件记录在记录介质27中。另外，CPU 10为形成为文件的压缩静止图像数据(在下文中也称为“静止图像文件”)和形成为文件的运动图像流(在下文中也称为“运动图像文件”)赋予唯一的文件名。从而，CPU 10使得能够按文件名来管理静止图像文件和运动图像文件。

如图5所示，赋予静止图像文件和运动图像文件的文件名FNA是由按该顺序连接的文件名主体FH以及之后的句点PR和后缀KC形成的。在这种情况下，文件名主体FH存储用于辨别文件(即是静止图像文件还是运动图像文件)的文件辨别信息FH1，以及用于为静止图像文件和运动图像文件编号的序号FH2。

文件名主体FH中的文件辨别信息FH1例如在静止图像文件的情况下是文本串“IMG”，并且在运动图像文件的情况下是文本串“MOV”。另外，后缀KC用于标识文件格式，例如在静止图像文件的情况下它可以是文本串“JPG”，并且在运动图像文件的情况下它可以是文本串“MPG”。因此，可以通过后缀KC和文件名主体FH中的文件辨别信息FH1来检测被赋予文件名FNA的文件是静止图像文件还是运动图像文件。

现在，在仅执行对对象的静止图像拍摄并生成静止图像文件时(即，在处于静止图像拍摄模式中时生成静止图像文件的情况下)，CPU 10存储此静止图像文件的文件名FNA中的唯一序号FH2，以免重复另一静止图像文件或运动图像文件的序号。

另外，在仅执行对对象的运动图像拍摄并生成运动图像文件时(即，在处于运动图像拍摄模式中时生成运动图像文件的情况下)，CPU 10存储此运动图像文件的文件名FNA中的唯一序号FH2，以免重复另一运动图像文件或静止图像文件的序号。

另一方面，在以时分方式执行对对象的静止图像拍摄和运动图像拍摄并生成静止图像文件和运动图像文件时(即，在处于时分拍摄模式中时生成静止图像文件和运动图像文件的情况下)，CPU 10存储静止图像文件的文件名FNJ和运动图像文件的文件名FNM中的单个唯一序号FH2，以免重复其他运动图像文件或静止图像文件的序号。也就是说，在以时分方式执行对对象的静止图像拍摄和运动图像拍摄并生成静止图像文件和运动图像文件时，CPU 10存储静止图像文件和运动图像文件的文件名FNJ和FNM中的同一序号FH2。

从而，通过文件名FNJ和FNM中的同一序号FH2，CPU 10将通过以时分方式执行对对象的静止图像拍摄和运动图像拍摄而生成的静止图像文件和运动图像文件(即主静止图像数据和主运动图像数据)作为通过以时分方式执行对单个对象的静止图像拍摄和运动图像拍摄生成的而关联起来。

另外，在根据对对象的静止图像拍摄生成主静止图像数据时，图像修改单元22通过在不改变静止图像宽高比的情况下稀疏像素(即，缩小静止图像大小)，来使主静止图像数据经历图像缩小处理。因此，图像修改单元22基于主静止图像数据生成缩小的静止图像的静止图像数据(在下文中，缩小的静止图像可以被称为“静止图像缩略图”，并且静止图像缩略图的静止图像数据可以被称为“静止图像缩略图数据”)。

除了图像大小不同之外，静止图像缩略图基本上与缩小前的主静止图像相同，并且示出了静止图像的内容。与缩小前的主静止图像相比，静止图像缩略图被显示在显示屏幕5A的较小的区域上，因此可以与其他静止图像缩略图等等一起被显示在显示屏幕5A上。从而，静止图像缩略图可被用作用来搜索主静止图像数据的索引。

在如上所述生成静止图像缩略图的静止图像缩略图数据后，图像修改单元22将所生成的静止图像缩略图数据发送到缓冲存储器21以便临时记录。

在将压缩静止图像数据作为静止图像文件记录在记录介质27中时，CPU 10从缓冲存储器21读出相应的静止图像缩略图数据。CPU 10随后将压缩静止图像数据与相应的静止图像缩略图数据一起经由介质接口26发送到记录介质27。因此，CPU 10以与静止图像文件相关联的方式将静止图像缩略图数据记录在记录介质27中。

另外，在根据对对象的运动图像拍摄生成主运动图像数据时，图像修改单元22从主运动图像数据中提取在时间上处于前端的单位图像的主单位图像数据，作为表示主运动图像的内容的一个主单位图像的主单位图像数据。注意，在以下的描述中，构成主运动图像的时间上连续的多个主单位图像中在时间上处于前端的单位图像将被具体称为“前端(head)单位图像”，并且此前端单位图像的主图像数据将被称为“前端单位图像数据”。

另外，图像修改单元22通过在不改变运动图像宽高比的情况下稀疏像素(即，缩小运动图像大小)，来使前端单位图像数据经历图像缩小。因此，图像修改单元22基于前端单位图像数据生成缩小的前端单位图像的前端单位图像数据(在下文中，缩小的前端单位图像将被称为“单位图像缩略图”，并且单位图像缩略图的前端单位图像数据可以被称为“单位图像缩略图数据”)。

单位图像缩略图被形成为图像的垂直长度与静止图像缩略图的垂直长度相同。另外，除了图像大小不同之外，单位图像缩略图基本上与缩小前的前端单位图像相同。与缩小前的主静止图像相比，单位图像缩略图被显示在显示屏幕5A的较小的区域上，因此可以与其他单位图像缩略图和静止图像缩略图等等一起被显示在显示屏幕5A上。从而，单位图像缩略图可被用作用来搜索主运动图像数据的索引。

在如上所述生成单位图像缩略图的单位图像缩略图数据后，图像修改单元22将所生成的单位图像缩略图数据发送到缓冲存储器21以便临时记录。

在将压缩运动图像数据作为运动图像文件记录在记录介质27中时，CPU 10从缓冲存储器21读出相应的单位图像缩略图数据。CPU 10随后将运动图像流与相应的单位图像缩略图数据一起经由介质接口26发送到记录介质27。因此，CPU 10以与运动图像文件相关联的方式将单位图像缩略图数据记录在记录介质27中。

这样，当执行对对象的静止图像拍摄或运动图像拍摄时，CPU 10将静止图像缩略图数据和运动图像缩略图数据与主静止图像数据和主运动图像数据一起生成。

应当注意，CPU 10提供具有关联信息的静止图像缩略图数据，该关联信息存储有能够辨别数据类型(即，是静止图像缩略图数据还是单位图像缩略图数据)的辨别信息，以及与相应静止图像文件的文件名FNA(或FNJ)内的序号FN2相同的序号。另外，CPU 10提供具有关联信息的单位图像缩略图数据，该关联信息存储有能够辨别数据类型(即，是静止图像缩略图数据还是单位图像缩略图数据)的辨别信息，以及与相应运动图像文件的文件名FNA(或FNM)内的序号FN2相同的序号。

注意，能够辨别是静止图像缩略图数据还是单位图像缩略图数据的辨别信息是具有指示静止图像缩略图数据的值“0”或者指示单位图像缩略图数据的值“1”的标志。

这样，CPU 10通过关联信息将静止图像缩略图数据和单位图像缩略图数据关联到静止图像文件和运动图像文件。另外，CPU 10通过关联信息(即，通过关联信息中存储的同一序号)，来将通过以时分方式执行对对象的静止图像拍摄和运动图像拍摄而生成的静止图像缩略图数据和单位图像缩略图数据关联起来。

现在，当处于重放模式中时，在外部设备未经由外部端子8连接到数字静态相机1的情况下，CPU 10利用为数字静态相机1设置的显示单元5显示主静止图像和主运动图像。另一方面，在外部设备经由外部端子8连接到数字静态相机1的情况下，CPU 10利用为外部设备设置的显示单元显示主静止图像和主运动图像。因此，下面将描述数字静态相机1的显示单元5在重放模式中被用于显示主静止图像和主运动图像的情况，然后描述外部设备的显示单元被用于显示主静止图像和主运动图像的情况。

当处于重放模式中时，在处于数字静态相机1未连接到外部设备的状态中时通过用户操作从操作单元15输入用于显示静止图像缩略图和单位图像缩略图的列表的列表显示命令的情况下，静止图像缩略图数据和单位图像缩略图数据经由介质接口26被从记录介质27读出。

CPU 10基于添加到静止图像缩略图数据和单位图像缩略图数据的关联信息来检测相关联的静止图像缩略图数据和单位图像缩略图数据，并且合成相关联的静止图像缩略图数据和单位图像缩略图数据以便生成合成图像数据(在下文中，可以被称为“合成缩略图数据”)。除合成缩略图数据外，CPU 10还利用其他不相关联的静止图像缩略图数据和单位图像缩略图数据生成列表显示数据。CPU 10随后使列表显示数据经历D/A转换器23进行的D/A转换处理，并且作为模拟列表显示信号经由显示控制器24发送到显示单元5。

因此，CPU 10基于列表显示信号，在显示单元5的显示屏幕5A上以矩阵方式显示基于合成缩略图数据的合成缩略图40、基于彼此不相关联的静止图像缩略图数据的静止图像缩略图41、以及基于单位图像缩略图数据的单位图像缩略图42，如图6所示。

在这种情况下，如图7所示，合成缩略图40由相关联的静止图像缩略图40A和单位图像缩略图40B配置而成。具体而言，合成缩略图40是利用叠加在具有运动图像宽高比的单位图像缩略图40B的中央部分处的具有静止图像宽高比的静止图像缩略图40A形成的，其中二者的顶部和底部在垂直方向上匹配，以便整体上具有运动图像宽高比。

注意，单位图像缩略图40B在静止图像缩略图40A上的叠加指的是这样一种状态，其中缩略图40B和静止图像缩略图40A通过单位图像缩略图40B的中央部分被覆写在静止图像缩略图40A处(即，单位图像缩略图40B的中央部分被覆写在静止图像缩略图40A上)而被合成。

因此，利用缩略图40，可以示出整个静止图像缩略图40A，并且同时还可以示出单位图像缩略图40B的左端和右端未被叠加的静止图像缩略图40A所覆盖而是被暴露的暴露部分(即，单位图像缩略图40B从静止图像缩略图40A伸出的部分)。

现在，作为合成缩略图40的成分的静止图像缩略图40A已通过对通过以时分方式对对象进行静止图像拍摄和运动图像拍摄而获得的主静止图像的静止图像大小进行缩小来生成，因此基本上具有与主静止图像相同的图片。另外，作为合成缩略图40的成分的单位图像缩略图40B已通过对通过以时分方式对对象进行静止图像拍摄和运动图像拍摄而获得的主运动图像中包括的前端单位图像的运动图像大小进行缩小来生成，因此基本上具有与前端单位图像相同的图片。

以时分方式对对象进行的静止图像拍摄和运动图像拍摄是通过在对对象的静止图像拍摄之后立即开始运动图像拍摄来执行的，意味着存在微小的时间偏移。因此，对于以时分方式对对象进行的静止图像拍摄和运动图像拍摄来说，在拍摄期间对象或数字静态相机1的运动越大，主静止图像和主运动图像中包括的前端单位图像之间的图片的差异就越大。这意味着在拍摄期间对象或数字静态相机1的运动越大，静止图像缩略图40A和单位图像缩略图40B之间的图片的差异就越大。

因此，对于合成缩略图40来说，静止图像缩略图40A和单位图像缩略图40B之间的图片的差异越大，静止图像缩略图40A的右边缘和左边缘与缩略图40B在右端的暴露部分(在下文中，可以称为“右端暴露部分”)和缩略图40B在左端的暴露部分(在下文中，可以称为“左端暴露部分”)之间的图片的连续性损失就越大。这使得单位图像缩略图40B的右边缘部分和左边缘部分与单位图像缩略图40B的右端暴露部分和左端暴露部分之间的边界更加明显。

但是，对于以时分方式对对象进行的静止图像拍摄和运动图像拍摄来说，如果在拍摄期间对象或数字静态相机1几乎没有运动，那么主静止图像和主运动图像中包括的前端单位图像之间就几乎不存在图片的差异。这意味着如果在以时分方式对对象进行的静止图像拍摄和运动图像拍摄期间对象或数字静态相机1几乎没有运动，则静止图像缩略图40A和单位图像缩略图40B之间就几乎不存在图片的差异。

如果在静止图像缩略图40A和单位图像缩略图40B之间几乎不存在图片的差异，那么静止图像缩略图40A的右边缘部分和左边缘部分与单位图像缩略图40B的右端暴露部分和左端暴露部分之间的边界就不明显。因此，对于合成缩略图40来说，静止图像缩略图40A的右边缘部分和左边缘部分以及单位图像缩略图40B的右端暴露部分和左端暴露部分的图片可以好像它们是单个图像那样被连接起来，并且可以看起来像是仅由单位图像缩略图40B配置而成的。

因此，在生成合成缩略图40时，在静止图像缩略图40A的右边缘部分和左边缘部分与单位图像缩略图40B的右端暴露部分和左端暴露部分之间的边界部分处，CPU 10叠加平行且垂直延伸的、相对粗黑的边界线的图像43A和43B(在下文中，可以称为“边界线图像”)。

注意，CPU 10可以仅在静止图像缩略图40A的右端和左端或者仅在单位图像缩略图40B的右端暴露部分和左端暴露部分与静止图像缩略图40A的边界部分处将边界线图像43A和43B叠加在合成缩略图40上。另外，CPU 10可以将边界线图像43A和43B叠加在合成缩略图40上，以便跨越单位图像缩略图40B的右端暴露部分和左端暴露部分与静止图像缩略图40A的边界部分。

因此，不论静止图像缩略图40A和单位图像缩略图40B之间的图片差异如何，合成缩略图40都以边界线图像43A和43B的形式清楚地示出静止图像缩略图40A和单位图像缩略图40B的边界。也就是说，CPU 10使得用户能够很容易且清楚地了解到合成缩略图40具有叠加在单位图像缩略图40B上的、比单位图像缩略图40B更窄的静止图像缩略图40A。从而，合成缩略图40可以很容易地与显示单元5的显示屏幕5A上的其他不相关联的缩略图(即静止图像缩略图41和单位图像缩略图42)区分开来。

另外，CPU 10生成具有4∶3的静止图像宽高比的主静止图像，并且生成具有16∶9的运动图像宽高比的构成主运动图像的多个主单位图像，并且在显示单元5的显示屏幕5A中所示的合成缩略图40中，将具有静止图像宽高比的静止图像缩略图40A叠加在具有运动图像宽高比的单位图像缩略图40B上。因此，CPU 10可以使得用户通过合成缩略图40直观地识别出与单位图像缩略图40B相对应的主运动图像和与静止图像缩略图40A相对应的静止图像由于以时分方式对图像执行的静止图像拍摄和运动图像拍摄而相关联。

CPU 10将静止图像缩略图41和单位图像缩略图42与合成缩略图40一起显示在显示单元5的显示屏幕5A上，从而用户可以利用操作单元15随意地从合成缩略图40、静止图像缩略图41和单位图像缩略图42中进行选择。

如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择静止图像缩略图41，则CPU 10执行与所选择的静止图像缩略图41相对应的主静止图像数据的重放处理。在这种情况下，CPU 10经由介质接口26从记录介质27读出与所选择的静止图像缩略图41相对应的压缩静止图像数据，并且发送到缓冲存储器21以便临时记录。

此时，静止图像处理单元25从缓冲存储器21读出压缩静止图像数据并通过对已被读出的压缩静止图像数据进行解码来生成原始主静止图像数据，并且将所生成的主静止图像数据发送到图像修改单元22。

通过在不改变静止图像宽高比的情况下从主静止图像中稀疏像素，图像修改单元22对从静止图像处理单元25提供来的主静止图像数据执行图像缩小处理。图像修改单元22生成其中主静止图像被缩小到能够显示在显示单元5的显示屏幕5A上的静止图像垂直长度和静止图像水平长度的主静止图像数据，并将所生成的主静止图像数据发送到CPU 10。

此时，CPU 10通过D/A转换器23执行从图像修改单元22提供的主静止图像数据的D/A转换，并且作为模拟主静止图像信号发送到显示控制器24。显示控制器24将从CPU 10提供来的主静止图像信号发送到显示单元5，从而主静止图像基于主静止图像信号被显示在显示单元5的显示屏幕5A上。从而，CPU可以播放通过仅对对象进行静止图像拍摄而生成的主静止图像数据，并且向用户示出主静止图像。

在主静止图像数据已被播放了预定量的时间之后，CPU 10结束静止图像数据的播放处理。如果在主静止图像数据被播放预定量的时间之前播放停止命令被输入，则CPU 10在该时刻停止静止图像数据的播放，并且结束静止图像数据的播放处理。

在以这种方式结束静止图像数据的播放处理后，CPU 10再次在显示单元5的显示屏幕5A上显示合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择将要被播放的主静止图像数据和主运动图像数据。

如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择单位图像缩略图42，则CPU 10执行与所选择的单位图像缩略图42相对应的主运动图像数据的重放处理。在这种情况下，CPU 10经由介质接口26从记录介质27读出与所选择的单位图像缩略图42相对应的压缩运动图像数据，并且发送到缓冲存储器21以便临时记录。CPU 10将运动图像流分成压缩图像数据和压缩音频数据，并且将压缩图像数据和压缩音频数据发送到缓冲存储器21以便被临时记录。

此时，运动图像处理单元28从缓冲存储器21读出压缩运动图像数据并通过对已被读出的压缩运动图像数据进行解码来生成原始主运动图像数据，并且将所生成的主运动图像数据发送到图像修改单元22。

图像修改单元22使主运动图像数据经历在不改变宽高比的情况下从主运动图像中稀疏像素的图像缩小处理。从而，图像修改单元22生成其中主运动图像被缩小到能够显示在显示单元5的显示屏幕5A上的运动图像垂直长度和运动图像水平长度的主运动图像数据，并将所生成的主运动图像数据发送到CPU 10。

此时，CPU 10通过D/A转换器23执行从图像修改单元22提供的主运动图像数据(即，多个主单位图像数据的序列)的D/A转换，并且作为模拟主运动图像信号(即，多个主单位图像信号)发送到显示控制器24。显示控制器24将从CPU 10提供来的主运动图像信号(即，多个主单位图像数据的序列)发送到显示单元5，从而主运动图像基于主运动图像信号(即，通过基于在时间上连续的多个主单位图像信号来顺序切换主单位图像)被显示在显示单元5的显示屏幕5A上。

另外，此时，音频处理单元31从缓冲存储器21读出压缩音频数据并对已被读出的压缩音频数据进行解码，并且生成原始音频数据。音频处理单元31随后利用D/A转换器33执行音频数据的D/A转换以形成模拟音频信号并发送到扬声器34，从而基于音频信号的音频可以伴随着显示单元5的显示屏幕5A上主运动图像的显示被从扬声器34输出。

从而，CPU可以播放通过仅对对象进行运动图像拍摄而生成的主运动图像数据和音频数据，并且向用户展现主运动图像和音频。

在主运动图像数据和音频数据已被播放到结束之后，CPU 10结束运动图像数据的播放处理。如果在主运动图像数据和音频数据被播放到结束之前播放停止命令被输入，则CPU 10在该时刻停止运动图像数据的播放，并且结束运动图像数据的播放处理。

在以这种方式结束运动图像数据的播放处理后，CPU 10再次在显示单元5的显示屏幕5A上显示合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择将要被播放的主静止图像数据和主运动图像数据。

如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择合成缩略图40，则CPU 10执行与所选择的合成缩略图40相对应的主静止图像数据和主运动图像数据的重放处理。

在这种情况下，CPU 10经由介质接口26从记录介质27读出与所选择的合成缩略图40(即，作为合成缩略图40的成分的静止图像缩略图40A)相对应的压缩静止图像数据，并且发送到缓冲存储器21以便临时记录。另外，CPU 10经由介质接口26从记录介质27读出与所选择的合成缩略图40(即，作为合成缩略图40的成分的运动图像缩略图40B)相对应的运动图像流。CPU 10还将运动图像流分成压缩图像数据和压缩音频数据，并且还将压缩图像数据发送到缓冲存储器21以便临时记录。

也就是说，CPU 10从记录介质27读取相关联的压缩静止图像数据(即，主静止图像数据)和运动图像流(即，主运动图像数据)，以及静止图像缩略图40A和单位图像缩略图40B。

此时，静止图像处理单元25从缓冲存储器21读出压缩静止图像数据并通过对已被读出的压缩静止图像数据进行解码来生成原始主静止图像数据，并且将所生成的主静止图像数据发送到图像修改单元22。另外，运动图像处理单元28从缓冲存储器21读出压缩运动图像数据并通过对已被读出的压缩运动图像数据进行解码来生成原始主运动图像数据，并且将所生成的主运动图像数据发送到图像修改单元22。

通过在不改变静止图像宽高比的情况下从主静止图像中稀疏像素，图像修改单元22对从静止图像处理单元25提供来的主静止图像数据执行图像缩小处理。图像修改单元22生成其中主静止图像被缩小到能够显示在显示单元5的显示屏幕5A上的静止图像垂直长度和静止图像水平长度的主静止图像数据，并将所生成的主静止图像数据发送到CPU 10。

另外，图像修改单元22使主运动图像数据经历在不改变宽高比的情况下从主运动图像中稀疏像素的图像缩小处理。从而，图像修改单元22生成其中主运动图像被缩小到能够显示在显示单元5的显示屏幕5A上的运动图像垂直长度和运动图像水平长度的主运动图像数据。

此时，图像修改单元22对主静止图像数据和前端单位图像数据两者都执行图像缩小处理，从而生成主静止图像和主前端单位图像的主静止图像数据和前端单位图像数据，使得静止图像垂直长度和运动图像垂直长度相同。图像修改单元22随后将以这种方式经历了图像缩小处理的前端单位图像数据发送到CPU 10。

此时，CPU 10通过对从图像修改单元22提供来的主静止图像数据和前端单位图像数据进行合成来生成合成图像的合成图像数据(在下文中，合成图像数据可以被称为“主合成图像数据”，并且合成图像数据的合成图像可以被称为“主合成图像”)。

此时，CPU 10通过D/A转换器23执行主合成图像数据的D/A转换，并且作为模拟主合成图像信号发送到显示控制器24。显示控制器24将从CPU 10提供来的主合成图像信号发送到显示单元5，从而如图8所示的主合成图像45基于主合成图像信号被显示在显示单元5的整个显示屏幕5A上。

此时，主合成图像45由相关联的主静止图像45A和前端单位图像45B(即，充当与主静止图像45A相关联的主运动图像的前端单位图像45B)配置而成。具体而言，主合成图像45是利用叠加在具有运动图像宽高比的前端单位图像缩略图45B的中央部分处的具有静止图像宽高比的主静止图像缩略图45A形成的，其中二者的顶部和底部在垂直方向上匹配，以便整体上具有运动图像宽高比。

注意，前端单位图像缩略图45B在静止图像缩略图45A上的叠加指的是这样一种状态，其中前端单位图像缩略图45B和静止图像缩略图45A通过前端单位图像缩略图45B的中央部分被覆写在静止图像缩略图45A处(即，前端单位图像缩略图45B的中央部分被覆写在静止图像缩略图45A上)而被合成。

因此，利用缩略图45，可以示出整个静止图像缩略图45A，并且同时还可以示出前端单位图像缩略图45B的左端和右端未被叠加的静止图像缩略图45A所覆盖而是被暴露的暴露部分(即，前端单位图像缩略图45B从静止图像缩略图45A伸出的部分)。

在执行相关联的主静止图像数据和主运动图像数据的连续重放处理时，CPU 10首先将主静止图像数据与主运动图像的前端单位图像数据一起作为主合成数据播放并且显示主合成图像45，因此可以利用主合成图像45向用户示出主静止图像45A。

如图9所示，在主合成图像45已在显示单元5的显示屏幕5A上显示了预定量的时间后，CPU 10仅使前端单位图像45B的前端单位图像数据而不是主合成图像数据经历利用D/A转换器23的D/A转换，并且作为模拟前端单位图像信号发送到显示控制器24。因此，显示控制器24将从CPU 10提供来的前端单位图像信号发送到显示单元5，并且在显示单元5的整个显示屏幕5A上仅显示基于前端单位图像信号的前端单位图像45B。

从而，CPU 10从在显示单元5的显示屏幕5A上显示主合成图像45切换到只显示构成主合成图像45的主静止图像45A和前端单位图像45B中的前端单位图像45B。在以这种方式在显示单元5的显示屏幕5A上将显示从主合成图像45切换到前端单位图像45B后，CPU 10以与上述相同的方式开始运动图像流的播放处理。

从而，CPU 10控制运动图像处理单元28和图像修改单元22生成主运动图像数据，并且还控制音频处理单元31生成音频数据。因此，在主运动图像数据被从图像修改单元22提供来之后，CPU 10利用D/A转换器23执行主运动图像数据的D/A转换处理并且作为模拟主运动图像信号发送到显示控制器24。因此，显示控制器24将从CPU 10提供来的主运动图像信号发送到显示单元5，从而在显示单元5的显示屏幕5A上显示基于主运动图像信号的主运动图像，来取代前端单位图像45B。

另外，CPU 10利用D/A转换器33执行由音频处理单元31生成的音频数据的D/A转换处理，并且作为模拟音频信号发送到扬声器34，从而基于音频信号的音频可以伴随显示单元5的显示屏幕5A上主运动图像的显示被从扬声器34输出。

从而，在通过以时分方式对对象进行的静止图像拍摄和运动图像拍摄生成的主静止图像数据和主运动图像数据中，CPU 10可以首先播放主静止图像数据，在此之后也可以自动播放主运动图像数据。

在自动连续播放相关联的主静止图像数据和主运动图像数据的情况下，当主运动图像数据已被播放到结束时，CPU 10结束运动图像数据的播放处理。在播放主运动图像数据的中途用户输入播放停止命令的情况下，CPU 10在该时刻停止运动图像数据的播放，并且结束运动图像数据的播放处理。

在以这种方式结束连续播放处理后，CPU 10再次在显示单元5的显示屏幕5A上显示合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示，从而用户可以从显示单元5的显示屏幕5A上的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择将要播放的主静止图像数据和主运动图像数据。

现在，在将主合成图像45显示在显示单元5的显示屏幕5A上的情况下，CPU 10在主合成图像45中将具有静止图像宽高比的主静止图像45A叠加在具有运动图像宽高比的主合成图像45上。因此，用户可以从主合成图像45直观地识别出与前端单位图像45B相对应的主运动图像和主静止图像45A通过以时分方式对对象进行的静止图像拍摄和运动图像拍摄而相关联。

也就是说，在CPU 10可以使得用户通过在显示单元5的显示屏幕5A上显示的合成缩略图40识别出主静止图像45A和主运动图像相互关联的同时，主静止图像45A和主运动图像相互关联这一事实也可以从主合成图像45被识别出来。

但是，对于主合成图像45来说，与合成缩略图40的情况中一样，如果在主静止图像45A和前端单位图像45B之间几乎不存在图片差异，那么主静止图像45A的右边缘部分和左边缘部分与前端单位图像45B的右端暴露部分和左端暴露部分的图片可能连接起来，就好像它们是单个图像一样，并且可能看起来像是仅仅由前端单位图像45B配置而成的。

因此，虽然CPU 10可以生成主合成图像45使得主静止图像45A只是被简单地叠加在前端单位图像45B上(图8)，但是也可以使主静止图像45A和前端单位图像45B中的至少一个经历叠加增强处理，以便强调主静止图像45A在前端单位图像45B上的叠加。CPU 10可以允许用户在生成主合成图像45时随意选择是否执行叠加增强处理，或者可以允许用户选择并设定是否自动判定是否要执行叠加增强。

另外，可以设想对主静止图像45A和前端单位图像45B中的至少一个执行的若干类型的叠加增强。因此，在预先设定了叠加增强的执行的情况下，或者在自动判定是否执行叠加增强的情况下，要对主静止图像45A和前端单位图像45B中的至少一个执行的一种叠加增强处理可以被从多类叠加增强中选择出来并被用户设定。

现在，以与上述合成缩略图40中相同的方式，存在这样一种叠加增强处理，其中边界线图像被叠加在主静止图像45A和前端单位图像45B中的至少一个上。

另一类叠加增强是将前端单位图像46A的至少右端暴露部分和左端暴露部分改变成与原始亮度不同的亮度(即，低于原始亮度的亮度)，如图10所示。利用这种叠加增强，前端单位图像46A的亮度低于(暗于)主合成图像46中的主静止图像45A，因此充当中央部分的主静止图像45A和充当背景的前端单位图像46A(即，前端单位图像46A的右端暴露部分和左端暴露部分)被清楚地区分，并且其间的边界可以被清楚地辨别。

另一种类型的叠加增强是将前端单位图像47A的至少右端暴露部分和左端暴露部分改变成与原始颜色饱和度不同的颜色饱和度(即，低于原始颜色饱和度的颜色饱和度)，如图11所示。利用这种叠加增强，前端单位图像47A的颜色饱和度低于主合成图像47中的主静止图像45A(或者说比主静止图像45A更黑白或暗淡)，因此充当中央部分的主静止图像45A和充当背景的前端单位图像47A(即，前端单位图像47A的右端暴露部分和左端暴露部分)被清楚地区分，并且其间的边界可以被清楚地辨别。

另一种类型的叠加增强是将前端单位图像47A的至少右端暴露部分和左端暴露部分改变成与原始色调不同的色调。利用这种叠加增强，前端单位图像47A的色调不同于主合成图像47中的主静止图像45A，因此充当中央部分的主静止图像45A和充当背景的前端单位图像47A(即，前端单位图像47A的右端暴露部分和左端暴露部分)被清楚地区分，并且其间的边界可以被清楚地辨别。

另一种类型的叠加增强是在前端单位图像47A的右端暴露部分和左端暴露部分的一部分上叠加怀旧式电影边缘的装饰性图像49A和49B，如图12所示。利用这种叠加增强，由于显示了装饰性图像49A和49B，也可以将主合成图像48与仅显示主静止图像或仅显示主运动图像的情况清楚地区分开来。

在已经预先进行了执行叠加增强处理的设定的情况下，CPU 10根据用户设定对主静止图像45A和前端单位图像47A中的至少一个执行上述叠加增强处理，并且生成主合成图像46至48。

另外，在设定成自动判定是否执行叠加增强处理的情况下，在主静止图像45A的右端部分和左端部分与前端单位图像45B的右端暴露部分和左端暴露部分处的边界部分处，CPU 10将主静止图像45A和前端单位图像45B上的彼此相邻的像素相比较。

CPU 10比较主静止图像45A和前端单位图像45B之间的边界部分处的像素，检测其中所比较的像素的像素值(例如，亮度或颜色)的差异超过预设差异的像素的百分比。在其结果表明主静止图像45A和前端单位图像45B的边界处的超过预设差异的像素值的百分比等于或超过某个阈值的情况下，判定主静止图像45A和前端单位图像45B之间的图片差异相对较大。在这种情况下，CPU 10不对主静止图像45A和前端单位图像45B执行叠加增强处理，因为只要通过叠加就能清楚地辨别主静止图像45A和前端单位图像45B之间的边界。

另一方面，在其结果表明主静止图像45A和前端单位图像45B的边界处的超过预设差异的像素值的百分比低于某个阈值的情况下，判定主静止图像45A和前端单位图像45B之间的图片差异相对较小。在这种情况下，因为通过简单的叠加不容易辨别主静止图像45A和前端单位图像45B之间的边界，所以CPU 10根据用户设定对主静止图像45A和前端单位图像45B中的至少一个执行上述叠加增强处理之一，并且生成主合成图像46至48。

如图13至15所示，如果在经历了叠加增强处理(即，改变亮度、颜色饱和度或色调，或者叠加装饰性图像49A和49B)的主合成图像46至48被显示在显示单元5的显示屏幕5A上的状态中执行连续重放处理，则根据用户设定，执行从显示主合成图像46至48到单独显示前端单位图像45B的切换(即，擦除主静止图像45A)以及前端单位图像45B、46A和47A上的叠加增强处理效果的取消(即，将前端单位图像45B恢复到叠加增强处理之前的状态)(不一定按该顺序执行)。

在将显示单元5的显示屏幕5A上的主合成图像46至48切换到仅限构成主合成图像46至48的前端单位图像45B后，CPU 10在单独显示前端单位图像45B之后以与上述相同的方式自动开始运动图像流播放处理。

但是，如果在经历了其中装饰性图像49A和49B被叠加在前端单位图像45B上的叠加增强处理的主合成图像48被显示在显示单元5的显示屏幕5A上的状态中执行连续重放处理，如图16所示，则根据用户设定，从显示主合成图像48切换到单独显示构成主合成图像48的前端单位图像45B(即，擦除主静止图像45A)。

另外，CPU 10可以在单独显示在显示单元5的显示屏幕5A上的前端单位图像45B上保留叠加增强处理效果(即，保持装饰性图像49A和49B叠加在前端单位图像45B上)。另外，如果在从在显示单元5的显示屏幕5A上显示主合成图像48切换到显示其上叠加了装饰性图像49A和49B的前端单位图像45B之后开始运动图像流的播放处理，则CPU 10可以根据用户设定显示其中装饰性图像49A和49B仍被显示出来的主运动图像。另外，CPU 10可以在显示单元5的显示屏幕5A上执行没有叠加装饰性图像49A和49B的主运动图像的显示。

注意，当在显示单元5的显示屏幕5A上显示主合成图像45至48时，CPU 10例如在缓冲存储器21处生成主合成图像数据。具体而言，CPU 10通过将前端单位图像数据临时记录在缓冲存储器21中来呈现缓冲存储器21中的前端单位图像数据，从而形成前端单位图像45B、46A和47A。CPU 10同时进行呈现缓冲存储器21中的前端单位图像数据和从缓冲存储器21读出前端单位图像数据作为主合成图像数据的处理。

另外，在结束缓冲存储器21中前端单位图像数据的临时记录后，在呈现缓冲存储器21中的主静止图像数据并将主静止图像45A覆写(叠加)在前端单位图像45B、46A和47A的中央部分处的同时，CPU 10同时进行在缓冲存储器21中临时记录主静止图像数据的处理。

另外，在将主静止图像数据的已被临时记录的部分与前端单位图像一起从缓冲存储器21读出以作为主合成图像数据的同时，CPU 10同时进行在缓冲存储器21中临时记录主静止图像数据的处理。

因此，从通过用户对操作单元15的操作而从显示单元5的显示屏幕5A任意选择一个主合成缩略图40到在显示单元5的显示屏幕5A上显示主合成图像45至48的时间量大大的减小了。

但是，这意味着在将前端单位图像数据和主静止图像数据作为主合成图像数据从缓冲存储器21读出之后，在显示单元5的显示屏幕5A上显示的主合成图像45至48的内容被逐渐从仅限前端单位图像45B、46A和47A的显示改变到叠加有主静止图像45A的显示。如果CPU 10根据其处理能力以相对较高的速度在显示单元5的显示屏幕5A上执行主合成图像45至48的显示，那么主合成图像45和48的内容看起来可能是闪烁的，这可能降低视觉识别度。

因此，在从用户通过操作单元15从显示单元5的显示屏幕5A任意选择一个合成缩略图40到前端单位图像数据和主静止图像数据被顺序记录在缓冲存储器21中并且主合成图像数据的生成完成为止的时间期间，CPU10执行生成主合成图像数据并将其发送到显示控制器24的操作，但是关断显示单元5的显示屏幕5A(即，显示屏幕5A处于关断状态)。在主合成图像数据的生成完成的时刻，CPU 10接通显示单元5的显示屏幕5A(即，显示屏幕5A处于接通状态)，以便显示主合成图像45至48。

因此，CPU 10在主合成图像45至48被显示在显示单元5的显示屏幕5A上时避免其可能导致视觉识别度降低的闪烁。另外，利用对显示单元5的显示屏幕5A的类似显示控制，CPU 10执行上述的合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示的显示。

另一方面，当处于重放模式中时，如果在数字静态相机1连接到外部设备的状态中通过用户操作从操作单元15输入用于显示静止图像缩略图和运动图像缩略图的列表的列表显示命令的情况下，则静止图像缩略图数据和单位图像缩略图数据经由介质接口26被从记录介质27读出。CPU 10随后以与上述相同的方式生成列表显示数据，并且经由外部接口35和外部端子8将所生成的列表显示数据顺序输出到外部设备。

因此，CPU 10基于列表显示信号，在外部设备的显示屏幕上以矩阵形式显示合成缩略图40、静止图像缩略图41和单位图像缩略图42，如图6所示。

如果我们假定用户利用操作单元15从外部设备的显示屏幕上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择了静止图像缩略图41，则CPU 10执行与所选择的静止图像缩略图41相对应的主静止图像数据的重放处理。在这种情况下，CPU 10以与上述相同的方式控制静止图像处理单元25和图像修改单元22生成主静止图像数据。

在主静止图像数据被从图像修改单元22提供来后，主静止图像数据经由外部接口35和外部端子8被输出到外部设备。从而，CPU 10可以在外部设备的显示单元的显示屏幕上显示主静止图像数据的主静止图像，以便被用户观看。

另外，如果用户利用操作单元15从外部设备的显示屏幕上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择了单位图像缩略图42，则CPU 10执行与所选择的单位图像缩略图42相对应的主运动图像数据的重放处理。在这种情况下，CPU 10控制运动图像处理单元28和图像修改单元22生成主运动图像数据，并且还控制音频处理单元31生成音频数据。

在主运动图像数据被从图像修改单元22提供来后，主运动图像数据经由外部接口35和外部端子8被输出到外部设备。另外，CPU 10从音频处理单元31获取音频数据，并且还经由外部接口35和外部端子8将音频数据输出到外部设备。从而，CPU 10可以在外部设备的显示单元的显示屏幕上显示主运动图像数据的主运动图像，并且伴随着主运动图像的显示从外部设备的扬声器输出基于音频数据的音频，以便被用户观看。

另外，如果用户利用操作单元15从外部设备的显示屏幕上显示的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择了合成缩略图40，则CPU 10执行与所选择的合成缩略图40相对应的主静止图像数据和主运动图像数据的连续重放处理。在这种情况下，CPU 10以与上述相同的方式控制静止图像处理单元25、运动图像处理单元28和图像修改单元22生成前端单位图像和主静止图像数据。

在主静止图像数据和前端单位图像数据被从图像修改单元22提供来后，主单位图像数据和主静止图像数据被合成，并且生成了主合成图像数据。CPU 10随后经由外部接口35和外部端子8将所生成的合成图像数据输出到外部设备。从而，CPU 10可以基于合成图像数据在外部设备的显示单元的显示屏幕上显示主合成图像45至48。

CPU 10通过播放相关联的主静止图像数据和主运动图像数据的前端单位图像数据，从而在外部设备处显示主合成图像45至48，因此用户可以以合成图像45至48的形式看到主静止图像45A。

在主合成图像45至48已在外部设备处显示了预定量的时间后，CPU10将外部设备上主合成图像45至48的显示切换到仅限构成主合成图像45至48的主静止图像45A和前端单位图像45B之中的前端单位图像45B的显示，然后切换到主运动图像的显示，并且还伴随主运动图像的显示输出音频，如上所述。因此，在播放主静止图像数据之后，CPU 10还可以自动播放与该主静止图像数据相关联的主运动图像数据，以便被用户观看。

同样，当在外部设备处显示主静止图像和主运动图像的情况下，如上所述，在以这种方式结束连续重放处理后，CPU 10再次在外部设备的显示单元的显示屏幕上显示合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合成缩略图40、静止图像缩略图41和单位图像缩略图42中选择将要播放的主静止图像数据和主运动图像数据。

接下来，将参考图17所示的流程图来描述在处于重放模式中时显示合成缩略图40的合成缩略图显示处理过程RT1。

例如，在通过用户在操作单元15处的输入而输入列表显示命令后，CPU 10根据预先存储在ROM 12中的显示控制程序，开始图17所示的合成缩略图显示处理过程RT1。

在开始合成缩略图显示处理过程RT1后，在步骤SP1中，CPU 10从记录介质27中读出多组静止图像缩略图数据和多组单位图像缩略图数据，并且前进到下一步骤SP2。

在步骤SP2中，CPU 10从多组静止图像缩略图数据和多组单位图像缩略图数据中检测相关联的静止图像缩略图数据和单位图像缩略图数据，并且前进到下一步骤SP3。

在步骤SP3中，CPU 10对相关联的静止图像缩略图数据和单位图像缩略图数据进行合成以生成合成缩略图数据，并且前进到下一步骤SP4。

在步骤SP4中，CPU 10将合成缩略图数据与其他静止图像缩略图数据和单位图像缩略图数据一起发送到数字静态相机1(或外部设备)的显示单元5，以作为列表显示数据。从而，CPU 10基于列表显示数据，在显示单元5的显示屏幕5A上(外部设备的显示单元的显示屏幕上)显示作为合成缩略图40的叠加在具有运动图像宽高比的单位图像缩略图40B的一部分上的具有静止图像宽高比的静止图像缩略图40A，并且还显示其他静止图像缩略图41和单位图像缩略图42，以作为列表，并且前进到下一步骤SP5。

在步骤SP5中，CPU 10结束合成缩略图显示处理过程RT1。

接下来，将参考图18所示的流程图描述在重放模式中连续播放相关联的主静止图像数据和主运动图像数据的连续重放处理过程RT2。

在合成缩略图40被显示在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上的状态中，在通过用户在操作单元15处的操作而在显示屏幕5A(或者外部设备的显示单元的显示屏幕)上选择合成缩略图40之后，CPU 10根据预先存储在ROM 12中的显示控制程序，开始图18所示的连续重放处理过程RT2。

在连续重放处理过程RT2开始后，在步骤SP11中，CPU 10使显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)转换到关断状态，并且前进到下一步骤SP12。

在步骤SP12中，CPU 10从记录介质27读出与用户选择的合成缩略图40相对应的、相关联的压缩静止图像数据和运动图像流中的压缩静止图像数据。CPU 10随后利用静止图像处理单元25和图像修改单元22基于压缩静止图像数据生成主静止图像数据，并且前进到下一步骤SP13。

在步骤SP13中，CPU 10从记录介质27读出与用户选择的合成缩略图40相对应的、相关联的压缩静止图像数据和运动图像流中的运动图像流。CPU 10随后利用运动图像处理单元28和图像修改单元22基于运动图像流中包括的压缩运动图像生成前端单位图像数据，并且前进到下一步骤SP14。

在步骤SP14中，CPU 10判定是否对主静止图像数据和前端数据中的至少一个执行叠加增强处理。

在步骤SP14中获得肯定结果意味着用户已经预先执行了设定以便执行叠加增强处理，或者已经基于主静止图像45A和前端单位图像45B的像素自动判定应当执行叠加增强处理。在获得这种肯定结果的情况下，CPU10前进到下一步骤SP15。

在步骤SP15中，CPU 10例如对相关联的主静止图像数据和前端单位图像数据中的前端单位图像数据执行叠加增强处理，并且前进到下一步骤SP16。

在步骤SP16中，CPU 10对主静止图像数据和前端单位图像数据进行合成以生成主合成数据，并且前进到下一步骤SP17。

另一方面，在步骤SP14中获得否定结果意味着用户没有预先执行设定以便执行叠加增强处理(或者已经作了相反的设定)，并且也没有基于主静止图像45A和前端单位图像45B的像素自动判定应当执行叠加增强处理。如果在步骤SP14中获得这种否定结果，CPU 10则跳过步骤SP15中的处理，并前进到下一步骤SP16。

注意，在执行步骤SP16的处理并生成主合成图像数据的同时，相机块16还在向数字静态相机1的显示单元5(或者向外部设备)发送主合成图像数据。

在主合成数据的生成完成后，在步骤SP17中，CPU 10接通显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)，并且前进到下一步骤SP18。

在步骤SP18中，CPU 10在显示单元5的显示屏幕5A(外部设备的显示单元的显示屏幕)上显示叠加在具有运动图像宽高比的前端单位图像45B、46A和47A的一部分上的具有静止图像宽高比的主静止图像45A，以作为基于主合成图像数据的主合成图像45至48。从而，CPU 10使得用户能够以主合成图像45至48的形式观看相关联的主静止图像45A和主运动图像中的主静止图像45A，并且前进到下一步骤SP19。

在步骤SP19中，CPU 10在开始主合成数据45至48的显示之后待机某一时间段，并且在该时间段经过之后进行到下一步骤SP20。

在步骤SP20中，CPU 10在叠加增强的效果被取消的情况下在显示单元5的显示屏幕5A(外部设备的显示单元的显示屏幕)上仅显示构成主合成图像45至48的前端单位图像45B来取代主合成图像45至48，并且前进到下一步骤SP21。

在步骤SP21中，CPU 10开始播放与到该时刻为止向用户示出的主静止图像45A的主静止图像数据相关联的主运动图像数据。因此，CPU 10可以通过运动图像处理单元28和图像修改单元22生成与主静止图像数据相关联的主运动图像数据以及压缩运动图像数据，并且将所生成的主运动图像数据发送到显示单元5(或者外部设备)。从而，CPU 10可以显示将要在显示单元5的显示屏幕5A(外部设备的显示单元的显示屏幕)上显示的基于主运动图像数据的主运动图像，来取代前端单位图像45B。

现在，在主运动图像数据的播放结束或者其播放响应于播放停止请求而被取消的情况下，CPU 10前进到下一步骤SP22。

在步骤SP22中，CPU 10结束连续重放处理过程RT2。

1-3操作和优点

利用上述配置，在数字静态相机1的CPU以时分方式执行对对象的静止图像拍摄和运动图像拍摄的情况下，CPU 10生成具有静止图像宽高比的主静止图像45A的主静止图像数据，以及由具有不同于静止图像宽高比的运动图像宽高比的多个时间上连续的主单位图像形成的主运动图像的主运动图像数据，并且将它们关联起来。

另外，数字静态相机1的CPU 10生成相关联的主静止图像数据和主运动图像的、作为用来搜索静止图像数据的索引的、具有静止图像宽高比的静止图像缩略图40A的静止图像缩略图数据。

另外，数字静态相机1的CPU 10生成相关联的主静止图像数据和主运动图像的、作为用来搜索运动图像数据的索引的、具有运动图像宽高比的单位图像缩略图40B的单位图像缩略图数据。

另外，数字静态相机1的CPU 10将静止图像缩略图数据和单位图像缩略图数据关联起来，并且将相关联的静止图像缩略图数据和单位图像缩略图数据与主静止图像数据和主运动图像数据一起记录。

数字静态相机1的CPU 10随后在处于重放模式中时合成相关联的静止图像缩略图数据和单位图像缩略图数据，以生成合成缩略图数据。

另外，数字静态相机1的CPU 10将合成缩略图数据发送到显示单元5(或者外部设备)，从而使得静止图像缩略图40A在叠加于单位图像缩略图40B的一部分上的情况下作为基于合成缩略图数据的合成缩略图40被显示在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)上。

因此，数字静态相机1的CPU 10可以在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)上执行显示，使得示出相关联的主静止图像和主运动图像的内容的静止图像缩略图40A和单位图像缩略图40B以能够与示出不相关联的主静止图像和主运动图像的内容的其他静止图像缩略图和运动图像缩略图相区别开来的方式被作为合成缩略图40显示。

因此，数字静态相机1的CPU 10可以使得通过以时分方式对对象进行静止图像拍摄和运动图像拍摄而生成并且相关联的主静止图像和主运动图像能够很容易地与通过对对象单独执行静止图像拍摄和运动图像拍摄获得的主静止图像和主运动图像相区别开来。

根据以上配置，数字静态相机1针对相关联的主静止图像和主运动图像，通过对与主静止图像相对应的具有静止图像宽高比的静止图像缩略图40A和与主运动图像相对应的具有运动图像宽高比的单位图像缩略图40B进行合成来生成合成缩略图40，并且在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示叠加在单位图像缩略图40B的一部分上的静止图像缩略图40A，来作为合成缩略图40。

因此，数字静态相机1可以通过以能够与示出不相关联的主静止图像和主运动图像的内容的其他静止图像缩略图和运动图像缩略图相区别开来的方式在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示与相关联的主静止图像和主运动图像相对应的静止图像缩略图40A和单位图像缩略图40B，来作为合成缩略图40。从而，数字静态相机1使得用户能够很容易地辨别相关联的主静止图像和主运动图像。

另外，利用数字静态相机1，当合成缩略图40在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)处被选择后，主静止图像数据和主运动图像数据中包括的前端单位图像数据被合成，并且生成了关于相关联的主静止图像数据和主运动图像数据的主合成缩略图数据。

数字静态相机1将主合成图像数据发送到显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)，并且在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示在前端单位图像45B的一部分上的主静止图像45A，来作为基于主合成图像数据的主合成图像45。

因此，在将主合成图像45显示在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上的情况下，数字静态相机1仍能够以与不相关联的静止图像和主运动图像的前端单位图像相区分开来的方式来显示相关联的主静止图像和主运动图像的主静止图像和前端单位图像。因此，数字静态相机1使得用户能够很容易地辨别相关联的主静止图像和主运动图像。

另外，数字静态相机1在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示前端单位图像45B的水平方向上的右端部分和左端部分，以便在水平方向上从主静止图像45A的右端和左端略微伸出，以作为主合成图像45。

当在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)上显示主合成图像45之后过去一定量的时间后，构成主合成图像45的主静止图像45A和前端单位图像45B中的前端单位图像45B被单独显示，并且在显示前端单位图像45B之后，主运动图像数据被自动播放，从而前端单位图像作为其一部分的主运动图像取代前端单位图像45B被显示。

因此，在对相关联的主静止图像和主运动图像进行自动连续播放并且从主静止图像45A切换到宽高比不同的主运动图像时，可以避免引起不自然的感觉的、在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)上顺序显示的整体图像形状和图像长度(垂直长度和水平长度)的突变。

另外，在生成合成缩略图40时，数字静态相机1使前端单位图像45B和主静止图像45A中的至少一个经历叠加增强处理。因此，当在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)处显示合成缩略图40时，即使在合成缩略图40中单位图像缩略图40B和将要叠加在其上的静止图像缩略图40A的图片几乎相同的情况下，由于叠加增强处理的效果，数字静态相机1也使得用户能够清楚辨别单位图像缩略图40B和静止图像缩略图40A的边界。

因此，数字静态相机1可以避免这样一种情形，即合成缩略图40被错误地识别为具有相同的运动图像宽高比并被独立显示的单位图像缩略图42，从而使得难以将与相关联的主静止图像和主运动图像相对应的静止图像缩略图40A和单位图像缩略图40B和与不相关联的主静止图像和主运动图像相对应的其他静止图像缩略图和单位图像缩略图区别开来。

另外，对于数字静态相机1来说，在生成主合成图像45时，对主静止图像45A和前端单位图像45B中的至少一个执行叠加处理。因此，当在显示单元5的显示屏幕5A(或外部设备的显示单元的显示屏幕)上显示主合成图像45时，即使在主合成图像45中前端单位图像45B和将要叠加在其上的主静止图像45A的图片几乎相同的情况下，由于叠加增强处理的效果，数字静态相机1也使得前端单位图像45B和前端单位图像45B的边界能够被清楚地辨别。

因此，在显示主合成图像45的情况下，数字静态相机1也能够避免主合成图像45被错误地识别为未叠加有主静止图像45A的前端单位图像45B，这种错误识别会使得难以将相关联的主静止图像和主运动图像与不相关联的主静止图像和主运动图像区别开来。

其他实施例

2-1第二实施例

利用上述的第一实施例，已经描述了将通过以时分方式执行对对象的静止图像拍摄和运动图像拍摄而获得的主静止图像数据和主运动图像数据关联起来的情况，但是本发明并不限于该布置，也可以进行这样一种布置，其中通过以时分方式执行对对象的静止图像拍摄和运动图像拍摄而获得的主静止图像数据和主运动图像数据例如可以根据拍摄的日期和时间、拍摄的位置、对象等等被任意地选择和关联。

在以这种方式任意选择和关联主静止图像数据和主运动图像数据的情况下，仍能通过合成缩略图40和主合成图像45将相关联的主静止图像数据和主运动图像数据与其他不相关联的主静止图像数据和主运动图像数据区别开来。

此外，本发明并不限于将单个主静止图像数据和单个主运动图像数据关联起来，主静止图像数据和主运动图像数据中的至少一种的数目可以是两个或更多个。

在该配置的情况下，如图19A所示，进行这样一种布置，其中，例如，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像(或合成缩略图)50，在多个主运动图像的每个前端单位图像(或单位图像缩略图)的一部分上叠加并显示一个主静止图像数据(或者一个静止图像缩略图)52。

或者，在该配置的情况下，如图19B所示，进行这样一种配置，其中，例如，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像(或者合成缩略图)53，在单个主运动图像的前端单位图像(或单位图像缩略图)54的一部分上叠加并显示多个主静止图像(或者多个静止图像缩略图)55A至55D。

或者，在该配置的情况下，如图19C所示，进行这样一种配置，其中，例如，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像(或者合成缩略图)56，在多个主运动图像的每个前端单位图像(或单位图像缩略图)51A至51D的一部分上叠加并显示多个主静止图像(或者多个静止图像缩略图)55A至55D。

2-2第三实施例

另外，虽然已将第一实施例描述为在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，在前端单位图像45B(或者前端单位图像缩略图40B)的中央部分处叠加并显示主静止图像45A(或者静止图像缩略图40A)作为主合成图像45(或者合成缩略图40)，但是，本发明并不限于这种布置，而是也可以进行如图20所示的这样一种布置，其中，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像60(或者合成缩略图)，在前端单位图像60A(或者前端单位图像缩略图)上右对齐地叠加并显示主静止图像60B(或者静止图像缩略图)。或者，可以进行如图21所示的这样一种布置，其中，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像61(或者合成缩略图)，在前端单位图像61A(或者前端单位图像缩略图)上左对齐地叠加并显示主静止图像61B(或者静止图像缩略图)。

另外，可以进行如图22所示的这样一种布置，其中，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，作为主合成图像62(或者合成缩略图)，在前端单位图像62A的中央部分处叠加并显示具有比前端单位图像62A的运动图像垂直长度更短的静止图像垂直长度的主静止图像62B(或静止图像缩略图)。

2-3第四实施例

另外，虽然已将第一实施例描述为响应于列表显示命令的输入而在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上以矩阵形式显示合成缩略图40、静止图像缩略图41和单位图像缩略图42，但是，本发明并不限于这种布置，例如，如图23和24所示，可以在屏幕的垂直方向上的一列中或者屏幕的水平方向上的一行中显示至少t个合成缩略图，以便在适当时被滚动。

2-4第五实施例

另外，虽然已将第一实施例描述为静止图像缩略图40A被显示成叠加在单位图像缩略图40B的一部分上，使得单位图像缩略图40B的一部分被静止图像缩略图40A所替换(即，静止图像缩略图40A被覆写在单位图像缩略图40B的一部分上)，来作为显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示的合成缩略图，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，作为在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示的合成缩略图40，静止图像缩略图40A被显示成叠加在单位图像缩略图40B的一部分上，使得单位图像缩略图40B的该部分被透射(即，处于单位图像缩略图40B的该部分透过静止图像缩略图40A可见的状态中)。另外，对于主合成图像45来说，也可以进行这样一种布置，其中，作为在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上显示的主合成图像45，主静止图像45A被显示成叠加在前端单位图像45B的一部分上，使得前端单位图像45B的该部分被透射(即，处于前端单位图像45B的该部分透过主静止图像45A可见的状态中)。

2-5第六实施例

另外，以上已经利用第一实施例描述了这样一种布置，其中在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，列表显示由合成缩略图40、静止图像缩略图41和单位图像缩略图42构成，使得可以从中选择将要播放的主静止图像数据或者主运动图像数据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，例如，不进行合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示，而是不论相关联与否，都例如按记录的日期和时间的顺序来播放主静止图像数据和主运动图像数据。

还可以进行这样一种布置，其中，仅在相关联的主静止图像数据和主运动图像数据将要被播放的情况下，才在主合成图像45被如上所述地显示的情况下自动连续播放主静止图像数据和主运动图像数据。

2-6第七实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中主运动图像数据中包括的多组主单位图像数据的前端单位图像数据被用来生成合成缩略图40或主合成图像45，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，在主运动图像数据中包括的多组主单位图像数据中，在时间上晚于前端单位图像数据的主单位图像数据(末端的主单位图像数据，或者前端单位图像数据和末端单位图像数据之间的主单位图像数据)被用来生成合成缩略图40或主合成图像45。

2-7第八实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中相关联的主静止图像数据和主运动图像数据被自动连续播放，并且在主运动图像数据的播放结束后，显示返回到列表显示，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，相关联的主静止图像数据和主运动图像数据被自动连续播放，并且在主运动图像数据的播放结束后，主合成图像45再次被显示。在该布置的情况下，可以通过将主运动图像数据与主运动图像数据中包括的除前端单位图像数据之外的主单位图像数据(例如，末端主单位图像数据)相合成，来生成在主运动图像数据的播放结束的时刻将要显示的主合成图像45。

2-8第九实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，列表显示由合成缩略图40、静止图像缩略图41和单位图像缩略图42构成，并且在用户任意选择合成缩略图40的情况下，与所选择的合成缩略图40相对应的、相关联的主静止图像数据和主运动图像数据被自动连续播放，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，例如，在以时分方式对对象进行的静止图像拍摄和运动图像拍摄时，对构成主运动图像数据的多个主单位图像数据中的每一个执行图像缩小处理。

利用该布置，生成由在时间上连续的多个单位图像缩略图(即，多个单位图像缩略图数据)形成的运动图像(在下文中称为“运动图像缩略图”)的运动图像数据(在下文中称为“运动图像缩略图数据”)，其中该运动图像缩略图数据与静止图像缩略图数据相关联并被记录。

利用该布置，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上，列表显示由合成缩略图40、静止图像缩略图41和单位图像缩略图42构成，并且在用户任意选择合成缩略图40的情况下，列表显示例如被维持，并且其中只有构成合成缩略图40的静止图像缩略图40A和单位图像缩略图40B中的单位图像缩略图40B取代所选择的合成缩略图40被显示，在此之后运动图像缩略图数据被自动播放。

因此，利用该布置，基于运动图像缩略图数据的运动图像缩略图(即在时间上连续的多个单位图像缩略图)取代作为合成缩略图40的成分的单位图像缩略图40B被显示在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上。

从而，可以进行这样一种布置，其中，在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上列表显示由合成缩略图40、静止图像缩略图41和单位图像缩略图42构成的状态中，相关联的静止图像缩略图数据和运动图像缩略图数据作为合成缩略图数据和运动图像缩略图数据被自动连续播放。

根据此配置，即使在显示单元5的显示屏幕5A(或者外部设备的显示单元的显示屏幕)上列表显示由合成缩略图40、静止图像缩略图41和单位图像缩略图42构成的状态中，与主静止图像数据相关联的主运动图像数据也可作为运动图像缩略图被播放，从而基于主运动图像数据的主运动图像作为运动图像缩略图被示出。

另外，可以进行这样一种布置，其中，如图25所示，编制播放列表70，其中多组相关联的主静止图像数据和主运动图像数据通过文件名被按顺序注册。这里还可以进行这样一种布置，其中，根据播放列表，对于每个相关联的主静止图像数据和主运动图像数据，主静止图像数据作为主合成图像数据被播放，之后主运动图像数据被自动播放(即，充当主静止图像数据的主合成图像数据的播放和主运动图像数据的播放按顺序交替)。

注意，图25所示的播放列表70例如可以形成为文件，并且被利用文件名(例如LINK0000.DAT)来管理。利用该文件名，序号可被存储在文件名主体中，以便能够单独管理多类播放文件。

2-9第十实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中生成了具有16∶9的运动图像宽高比的主运动图像的主运动图像数据和具有4∶3的静止图像宽高比的主静止图像的主静止图像数据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中生成不同种类的具有运动图像宽高比的主运动图像的主运动图像数据和具有静止图像宽高比的主静止图像的主静止图像数据，例如生成具有4∶3的运动图像宽高比的主运动图像的主运动图像数据和具有3∶2的静止图像宽高比的主静止图像的主静止图像数据。

2-10第十一实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，当通过对对象的静止图像拍摄和运动图像拍摄而生成主运动图像数据和主静止图像数据时，也生成静止图像缩略图数据和单位图像缩略图数据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，静止图像缩略图数据和单位图像缩略图数据是在请求合成缩略图40、静止图像缩略图41和单位图像缩略图42的列表显示时生成的，并且合成缩略图是利用这些来生成的。

2-11第十二实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，针对静止图像拍摄的一个图像数据经历修剪处理(或剪切处理)，并且经历图像缩小处理，以便生成具有4∶3的宽高比的主静止图像的主静止图像数据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，根据为静止图像预设的静止图像大小，针对静止图像拍摄的一个图像数据经历修剪处理(或者剪切处理)以生成具有4∶3的宽高比的主静止图像的主静止图像数据。以相同的方式，可以进行这样一种布置，其中，根据为运动图像预设的运动图像大小，针对运动图像拍摄的多个图像数据经历修剪处理(或者剪切处理)，以生成由多个时间上连续的、具有16∶9的宽高比的单位图像形成的主运动图像的主运动图像数据。

2-12第十三实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，不论静止图像缩略图40A和单位图像缩略图40B的图片差异度如何，都对合成缩略图40执行叠加增强处理，但是本发明并不限于这种布置，而是也可以进行一种针对合成缩略图40的布置，其中，与主合成图像45的情况一样，在生成合成缩略图40时是否执行叠加增强处理是由用户预先选择和设定的，或者是否自动判定是否执行叠加增强处理被设定，并且在设定之后在适当时对合成缩略图40执行叠加增强处理。

另外，与主合成图像的情况一样，对于要对合成缩略图40执行的叠加增强处理的类型，用户可以从多类叠加增强处理中任意选择一种叠加增强处理。

2-13第十四实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，根据本发明实施例的显示控制程序被应用于预先存储在数字静态相机1的ROM 12中的显示控制程序，并且数字静态相机1的CPU 10根据存储在ROM 12中的显示控制程序来执行图17所示的合成缩略图显示处理过程RT1和图18所示的连续重放处理过程RT2，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中显示控制程序通过其中安装了显示控制程序的计算机可读介质而被安装到数字静态相机1中，并且数字静态相机1的CPU 10根据所安装的显示控制程序来执行合成缩略图显示处理过程RT1和连续重放处理过程RT2。

数字静态相机1还可以利用诸如局域网、因特网、数字卫星广播等等之类的线缆或无线通信介质或者计算机设备从外部来源安装显示控制程序。

另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算机可读记录介质例如可以包括诸如柔性盘之类的封装介质。

另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算机可读记录介质例如可以包括诸如CD-ROM(致密盘-只读存储器)之类的封装介质。

另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算机可读记录介质例如可以包括诸如DVD(数字多功能盘)之类的封装介质。

另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算机可读记录介质并不限于封装介质，而是也可以通过其中可以临时或永久记录各种类型的程序的半导体存储器或磁盘等等来实现。

另外，可以利用诸如局域网、因特网、数字卫星广播等等之类的线缆或无线通信介质来提供显示控制程序以便记录在计算机可读记录介质中。另外，可以利用诸如路由器和调制解调器之类的各种类型的通信接口来提供显示控制程序以便记录在计算机可读记录介质中。

2-14第十五实施例

另外，虽然以上已经利用第一实施例描述了这样一种布置，其中显示控制设备被应用于参考图1至25描述的数字静态相机1，但是本发明并不限于这种布置，而是可以广泛地应用于各种配置的显示控制设备，这些显示控制设备能够记录具有不同宽高比的主静止图像的主静止图像数据和主运动图像的主运动图像数据，或者从诸如个人计算机、蜂窝电话、PDA(个人数字助理)以及类似的信息处理设备、硬盘记录器以及类似的记录/重放设备等等之类的外部获取并播放它们。

2-15第十六实施例

另外，虽然以上已经进行了描述，其中以上参考图1至25描述的CPU 10被应用作为合成图像生成单元，用于通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上，但是本发明并不限于这种布置，而是也可以应用很多种其他合成图像生成单元，例如微处理器和V-RAM(视频-随机访问存储器)，或者硬件电路配置的合成图像生成电路，用于通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上。

2-16第十七实施例

另外，虽然以上已经进行了描述，其中以上参考图1至25描述的CPU 10被应用作为用于在显示单元的显示屏幕上显示合成图像的显示控制单元，但是本发明并不限于这种布置，而是也可以应用很多种其他显示控制电路，例如微处理器，或者用于在显示单元的显示屏幕上显示合成图像的硬件电路配置的显示控制电路。

2-17第十八实施例

另外，虽然以上已经进行了描述，其中以上参考图1至25描述的CPU 10被应用作为叠加增强处理单元，用于向合成图像的前端单位图像和静止图像之间的边界部分应用强调静止图像在前端单位图像上的叠加的叠加增强处理，但是本发明并不限于这种布置，而是也可以应用很多种其他叠加增强处理单元，例如微处理器，或者硬件电路配置的叠加增强处理电路，用于向合成图像的前端单位图像和静止图像之间的边界部分应用强调静止图像在前端单位图像上的叠加的叠加增强处理(例如叠加怀旧式的照片边框、电视监视器边框等等的图像)

本领域的技术人员应当理解，取决于设计要求和其他因素，可以进行各种修改、组合、子组合和变更，只要它们处于所附权利要求或其等同物的范围之内。

本发明包含与2007年10月3日向日本专利局提交的日本专利申请JP2007-260113和2008年8月7日向日本专利局提交的日本专利申请JP2008-204567相关的主题，这里通过引用将上述申请的全部内容并入。

Claims (8)

1.一种显示控制设备，包括：

合成图像生成单元，该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及

显示控制单元，该显示控制单元被配置为在显示单元的显示屏幕上显示所述合成图像。

2.根据权利要求1所述的显示控制设备，其中，当在所述显示单元的所述显示屏幕上显示所述合成图像之后，所述显示控制单元仅显示作为所述合成图像的成分的所述单位图像，并且在仅显示所述单位图像之后，自动显示取代所述单位图像的所述运动图像。

3.根据权利要求1所述的显示控制设备，其中，所述合成图像生成单元通过对以下图像进行合成来生成所述合成图像：

所述静止图像，以及

作为所述运动图像的所述单位图像的、在时间上处于构成所述运动图像的多个所述单位图像的前端的前端单位图像。

4.根据权利要求3所述的显示控制设备，其中，所述合成图像生成单元通过对所述前端单位图像和所述静止图像进行合成以使得所述前端单位图像在水平方向上的右端部分和左端部分在水平方向上从所述静止图像的左端和左端伸出，来生成所述合成图像。

5.根据权利要求4所述的显示控制设备，还包括：

叠加增强处理单元，该叠加增强处理单元被配置为在所述合成图像中的所述前端单位图像和所述静止图像之间的边界部分处执行用于强调所述静止图像在所述前端单位图像上的叠加的叠加增强处理。

6.根据权利要求5所述的显示控制设备，其中，所述合成图像生成单元执行生成以下各项中的至少一种：

通过对以下图像进行合成来生成所述合成图像：

作为所述运动图像的所述前端单位图像的、用于记录所述运动图像的运动图像大小的主单位图像，以及

作为所述静止图像的、用于记录所述静止图像的静止图像大小的主静止图像；以及

通过对以下图像进行合成来生成所述合成图像：

作为所述运动图像的所述前端单位图像的、通过从所述运动图像大小的所述主单位图像中稀疏像素而获得的单位图像缩略图，以及

作为所述静止图像的、通过从静止图像大小的所述静止图像中稀疏像素而获得的静止图像缩略图。

7.一种显示控制方法，包括以下步骤：

通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及

显示所述合成图像。

8.一种显示控制程序，用于使得计算机以下步骤：

通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及

显示所述合成图像。

Images