CN102007765A - 执行运动图像的记录以及播放的装置 - Google Patents

Abstract

对拍摄到的运动图像数据进行编码，在作为运动图像编码数据记录到记录介质中时，对摄像器的规定动作进行检测，并根据该检测进行提示位置的确定以及GOP结构的变更。据此，不仅无需用户的直接操作就能够指定提示位置，而且能够变更提示位置的GOP结构，因此还能够在编辑和播放运动图像数据时防止画质劣化、削减多余的传送处理。

Description

执行运动图像的记录以及播放的装置

技术领域

本发明涉及对运动图像数据进行记录的装置、进行播放的装置和记录、进行记录的的方法、进行播放的方法以及适于所述记录的半导体集成电路，更详细而言涉及适于播放运动图像数据时迅速访问希望的场景的技术。

背景技术

以往提出了各种能够在播放运动图像数据时，迅速向上述运动图像数据的特定位置移动或提示(頭出し)的运动图像记录装置以及运动图像播放装置(例如，参考专利文献1)。

专利文献1所述的运动图像记录装置(以下简称为现有例)包括：比特率检查器，检查运动图像数据的比特率；以及章节设定器，当运动图像数据的比特率发生了一定值以上的变化时，对运动图像数据设定章节(チヤプタ)。在现有例中，将运动图像数据的比特率发生了一定值以上变化的位置看做是用户想看的场景来设定章节。

专利文献1：日本特开2007-150528号公报

然而，在现有例中，虽然将运动图像数据的比特率发生了一定值以上变化的位置看做是用户想看的场景来设定章节，但是用户希望的场景并不一定与比特率发生了一定值以上变化的位置相一致。因此，有时未对用户希望的场景设定章节而在不需要的位置设定了章节。

另外，由于在现有例中假设是记录TV节目，因此不能说是适于数码摄像机这样具有摄像器的运动图像记录装置的结构。

发明内容

有鉴于此，本发明的目的在于在具有摄像机等摄像器的运动图像记录装置中，根据对运动图像数据进行记录的过程中用户的动作，对用户想看的场景进行检测并设定章节，在播放所记录的运动图像数据时，易于访问用户想看的场景。为了达到上述目的，本发明的运动图像记录装置包括：

摄像器，拍摄图像并获得数字视频信号；

图像编码处理器，以由多个帧构成的图像组GOP为单位对所述数字视频信号进行编码，生成运动图像编码数据；

记录器，将所述运动图像编码数据记录到记录介质中；以及

提示位置生成器，

所述提示位置生成器包括：

第一处理部，在所述记录器将所述运动图像编码数据记录到所述记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理部，根据所述第一处理部对所述规定动作的检测，对所述图像编码处理器进行所述运动图像编码数据中的GOP结构变更指示。

由生成作为运动图像编码数据源的数字视频信号的摄像器实施的规定动作，多与运动图像编码数据的提示位置连动产生。本发明着眼于此，在将以数字视频信号为源的运动图像编码数据记录到记录介质中时，如果由摄像器检测出规定动作，则对实施了检测出的规定动作的数据位置(提示位置)处的GOP结构进行变更。在运动图像编码数据中施加这种数据变更之后，能够在播放时和编辑时准确且于短时间内检测到运动图像编码数据中的提示位置。据此，无需用户的直接操作就能够确定运动图像编码数据中的提示位置。

本发明具有以下形态：所述第二处理部对所述图像编码处理器进行将所述运动图像编码数据中的GOP结构从OpenGOP变更为ClosedGOP的指示。

这样，无需在编辑和播放运动图像数据时准备前向参考GOP，在防止画质劣化的基础上削减多余的传送处理。

本发明具有以下形态：

所述摄像器能够调整摄影视场角，

所述第一处理部将基于所述摄像器的所述摄影视场角调整动作作为所述规定动作进行检测。

这样，能够将摄像器的所述摄影视场角调整动作看做是用户希望的场景，并生成提示位置。

本发明具有以下形态：所述第二处理部在进行所述GOP结构变更指示并经过一定时间后，对所述图像编码处理器进行将GOP结构恢复原状的指示。

这样，经过一定时间后恢复到原来的GOP结构，从而能够提高编码效率。例如，在根据GOP结构变更指示将一定时间的GOP结构变更为ClosedGOP之后，经过一定时间后恢复到原来的OpenGOP。

本发明具有以下形态：所述第二处理部根据所述第一处理部对所述规定动作的检测，

·进一步对所述图像编码处理器进行章节显示用图像的生成指示；

或者，

·进一步对所述记录器进行所述运动图像编码数据的分割指示。

这样，能够在GOP结构变更指示位置(提示位置)生成章节。

本发明具有以下形态：所述第二处理部根据所述第一处理部对所述规定动作的检测，进一步对所述图像编码处理器进行将所述规定动作的相关信息作为附加信息附加到所述运动图像编码数据中的指示。

这样，能够将规定动作的相关信息作为附加信息附加到运动图像编码数据中。

本发明具有以下形态：

进一步包括：传感器，对所述摄像器的倾斜进行检测，

所述第一处理部根据所述传感器的传感器输出，将所述摄像器的倾斜作为所述规定动作进行检测。

这样，在数码摄像机等运动图像记录装置中，即使在拍摄过程中将摄像机朝下而误拍摄了地面时，也能够根据对规定动作的检测结果对该场景的提示位置进行判断并变更其GOP结构。这样，当用户在之后将拍摄了地面的场景等判断为不需要的场景时，能够在编辑时容易地删除该场景。

本发明具有以下形态：

进一步包括：管理信息记录部，记录用于管理所述运动图像编码数据的管理信息，

所述提示位置生成器进一步包括第三处理部，

所述第三处理部在从所述记录器获取表示数据位置的信息之后，将获取的所述信息作为所述管理信息记录到所述管理信息记录部中，所述数据位置为通过所述第二处理部实施GOP结构变更的所述运动图像编码数据的数据位置。

这样，由于将表示实施了GOP结构变更的所述运动图像编码数据的数据位置的时间信息记录到管理信息记录部中进行管理，因此即使在不对提示位置生成章节时，也能够在播放时迅速向希望的场景移动或提示。

本发明的运动图像播放装置包括：

读出器，从记录介质读出运动图像编码数据的附加信息；以及

播放器，根据所述附加信息，从所述记录介质读出所述运动图像编码数据并进行播放，

所述播放器在对所述读出器读出的所述附加信息中是否记录有在拍摄所述运动图像编码数据时实施的规定动作的相关信息进行判断之后，当判断为记录有所述信息时，能够从该信息中被确定为执行所述规定动作的位置的数据位置处开始，播放所述运动图像编码数据。

据此，如果附加信息中记录有在拍摄运动图像编码数据时实施的规定动作的相关信息，则能够从执行规定动作的数据位置处开始，播放运动图像编码数据。

本发明具有以下形态：

进一步包括：编辑器，能够将所述运动图像编码数据中图像特征量的变化为规定量以上的数据位置，设定为所述运动图像编码数据中的提示位置。

这里，图像特征量是指对可从图像中提取的眼、鼻、口等构成脸的部位的大小、位置、相对配置、脸部轮廓等进行参数化后而得到的特征量。据此，例如通过使用公知的脸部检测技术，即针对运动图像内的画面中央附近，找出眼、鼻、口等形状具有特征的部位，如果类似度高则看做脸部的脸部检测技术，从而能够识别出人物为被拍摄物，并将该场景设定为提示位置。

另外，本发明的运动图像记录方法包括：

拍摄步骤，由摄像器拍摄图像并获得数字视频信号；

图像编码步骤，由图像编码处理器以由多个帧构成的图像组GOP为单位对所述数字视频信号进行编码，生成运动图像编码数据；

记录步骤，由记录器将所述运动图像编码数据记录到记录介质中；以及

提示位置生成步骤，

所述提示位置生成步骤包括：

第一处理步骤，在由所述记录步骤将所述运动图像编码数据记录到记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理步骤，根据所述第一处理步骤对所述规定动作的检测，对所述图像编码处理器进行GOP结构变更指示。

本发明的运动图像播放方法包括：

读出步骤，从记录有包含附加信息的运动图像编码数据的记录介质读出所述附加信息；以及

播放步骤，根据由所述读出步骤读出的所述附加信息，从所述记录介质读出所述运动图像编码数据并进行播放，

在所述播放步骤中，在对由所述读出步骤读出的所述附加信息中是否记录有在拍摄所述运动图像编码数据时实施的规定动作的相关信息进行判断之后，当判断为记录有所述信息时，能够从该信息中被确定为执行所述规定动作的位置的数据位置处开始，播放所述运动图像编码数据。

另外，本发明的半导体集成电路包括：

图像编码处理器，与外部的摄像器连接，以由多个帧构成的图像组GOP为单位对从所述摄像器输入的数字视频信号进行编码，生成运动图像编码数据；

记录器，与外部的记录介质连接，将所述运动图像编码数据记录到所述记录介质中；以及

提示位置生成器，

所述提示位置生成器包括：

第一处理部，在所述记录器将所述运动图像编码数据记录到所述记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理部，根据所述第一处理部对所述规定动作的检测，对所述图像编码处理器进行所述运动图像编码数据中的GOP结构变更指示。

此外，本发明不仅可以作为装置和方法实现，还可以作为使计算机执行构成该装置的功能、方法的步骤的程序实现，或是作为记录了该程序的计算机可读取的CD-ROM等记录介质实现，或是作为表示该程序的信息、数据或信号实现。而且，这些程序、信息、数据以及信号也可以通过互联网等通信网络来发布。

根据本发明，具有以下效果：在数码摄像机这样具有摄像器的运动图像记录装置或运动图像播放装置中，在播放所记录的运动图像数据时，易于访问用户想看的场景。而且，通过变更GOP结构，还具有易于编辑所记录的运动图像数据的效果。

附图说明

图1是示出本发明的实施方式1中的运动图像记录装置的结构的框图；

图2是示出本发明的实施方式1中的提示位置生成器的动作流程的流程图；

图3A是示出GOP的第一结构的图；

图3B是示出GOP的第二结构的图；

图4是示出本发明的实施方式2中的运动图像记录播放装置的结构的框图；

图5是示出本发明的实施方式2中的提示位置生成器的动作流程的流程图；

图6是示出本发明的实施方式2中的播放器的动作流程的流程图。

具体实施方式

(实施方式1)

下面对本发明的实施方式1中的运动图像记录装置进行说明。图1是示出本发明的实施方式1中的运动图像记录装置的结构的框图。该运动图像记录装置包括：摄像器101、图像编码处理器102、在记录介质104中记录数据的记录器103、提示位置生成器105以及管理信息存储部106。在运动图像记录装置中，至少图像编码处理器102、记录器103以及提示位置生成器105可由半导体集成电路构成。

摄像器101例如包括：拍摄用光学系统，包括可调整缩放(调整视场角)的可变焦距镜头；拍摄设备(包括将通过拍摄用光学系统获得的光信息转换为电信号的CCD、CMOS等光电转换元件)；以及图像信号处理器，在将从拍摄设备输出的电信号转换为数字视频信号之后，对该数字视频信号实施数字信号处理。

图像编码处理器102对由摄像器101获得的数字视频信号实施基于规定方式的压缩编码处理。例如，作为压缩编码方式，可以举出MPEG2-Video或MPEG4-AVC/H.264(以下记为MPEG)等。在MPEG中，通过以一定的帧间隔插入使用了帧内编码的I图像，从而以由多个帧构成的图像组(GOP，Group Of Pictures)为单位进行编码。

GOP中有可在GOP边界进行帧间预测的开放图像组(OpenGOP)、以及禁止在GOP边界进行帧间预测的封闭图像组(ClosedGOP)。由于OpenGOP依赖于包含参考帧的GOP，因此在进行MPEG数据中的随机访问时需要参考GOP。另一方面，由于ClosedGOP是不依赖于其他GOP的独立的GOP，因此在随机访问时有效。此外，OpenGOP通过设定死链接(BrokenLink)标记，从而能够随机访问，但由于不能播放前向参考的帧，因此会导致画质劣化。另外，在编码效率方面，ClosedGOP具有因禁止在GOP边界进行帧间预测而比OpenGOP降低的特点。在本实施方式中，拍摄过程中的GOP结构仅在拍摄开始时被设定为ClosedGOP，之后就被设定为OpenGOP(但是，检测出规定动作时被设定为ClosedGOP)。

记录器103将由图像编码处理器102获得的运动图像编码数据以每规定单位向记录介质104进行写入处理。记录器103在将用于管理运动图像编码数据的管理信息保存在存储器等管理信息记录部106中之后，从管理信息记录部106读出管理信息，并与运动图像编码数据一起写入记录介质104。在实施方式1中，未对音频数据进行描述，当存在音频数据时，由记录器103对运动图像编码数据与音频数据进行多路复用，对各个数据付与用于实现同步的时间戳。作为记录介质104，可以举出HDD、SD卡、光盘(DVD、BD等)等。

提示位置生成器105具有第一处理部105a和第二处理部105b。第一处理部105a在记录器103将由图像编码处理器102获得的运动图像编码数据记录到记录介质104中时，对摄像器101的规定动作进行检测。第二处理部105b根据第一处理部105a对规定动作的检测而对图像编码处理器102进行GOP结构变更指示。当实施方式1的提示位置生成器105在拍摄过程中作为规定动作而检测到摄像器101的可变焦距镜头的放大(ズ一ムイン)动作(视场角缩小调整)或缩小(ズ一ムアウト)动作(视场角扩大调整)之后，根据该检测结果对图像编码处理器102进行将GOP结构从OpenGOP向ClosedGOP变更的指示。对放大动作或缩小动作的检测可以根据基于来自摄像器101的缩放操作的信号来进行。第一处理部105a所检测的摄像器101的规定动作优选为作为图像扩大(视场角缩小)或图像缩小(视场角扩大)的例子的放大动作或缩小动作。

摄像器101的拍摄操作的拍摄方式是多种多样的，例如有望远拍摄(使视场角缩小的状态下的拍摄)、广角拍摄(使视场角扩大的状态下的拍摄)、高亮度状态下的拍摄、低亮度状态下的拍摄、对比度可变状态下的拍摄等，第一处理部105a所检测的摄像器101的规定动作并不限于视场角调整动作，还可以检测其他动作。

在实施方式1中，第二处理部105b进一步针对在根据第一处理部105a的检测而对图像编码处理器进行GOP结构变更指示之后是否经过了一定时间进行判断，当判断为经过了一定时间时，进行GOP结构变更指示以将GOP结构恢复原状。

作为本发明的其他实施方式，第二处理部105b也可以根据第一处理部105a的检测而对图像编码处理器102进行章节显示用图像生成指示，或者，也可以根据提示位置生成器105的第一处理部105a的检测而对记录器103进行运动图像编码数据分割指示，或者，也可以根据提示位置生成器105的第一处理部105a的检测而对图像编码处理器102进行将摄像器101的规定动作信息作为附加信息附加到运动图像编码数据中的指示，也可以组合上述方式来进行处理。

记录在管理信息记录部106中的管理信息是通过记录器103，与图像编码数据一起记录到记录介质104中的数据，包含有图像编码数据的所谓时间戳等信息。

下面对实施方式1中的提示位置生成器105的以下动作进行说明。这里所说的动作是指，对摄像器101的视场角调整动作进行检测，直到对图像编码处理器102进行GOP结构变更指示为止的动作。

在该动作中，作为将运动图像数据记录到记录介质中的运动图像记录方法中所包含的步骤，包含有：

·拍摄步骤，使用摄像器101拍摄图像并获得数字视频信号；

·图像编码步骤，由图像编码处理器102对通过拍摄步骤获得的数字视频信号进行编码，生成运动图像编码数据；

·记录步骤，由记录器103将运动图像编码数据记录到记录介质104中。

进一步，包含有：

·第一处理步骤，通过提示位置生成器105，在由记录步骤将运动图像编码数据记录到记录介质104中时，对摄像器101的规定动作(在实施方式中为视场角调整动作)进行检测；

·第二处理步骤，根据第一处理步骤的检测，对图像编码处理器102进行GOP结构变更指示。

图2是示出执行第一、第二处理步骤的提示位置生成器105的动作流程的流程图。提示位置生成器105，首先对是否执行了摄像器101的可变焦距镜头的放大动作或缩小动作(以下记为缩放动作)进行判断(S101)。当在S101中判断为未执行缩放动作(否)时，提示位置生成器105不对图像编码处理器102进行GOP结构变更指示。当在S101中判断为执行了缩放动作(是)时，提示位置生成器105对图像编码处理器102是否处于正在对数字视频信号(由摄像器101获取)实施压缩编码处理的过程中进行判断(S102)。当在S102中判断为图像编码处理器102未处于压缩编码处理过程中(否)时，提示位置生成器105不对图像编码处理器102进行GOP结构变更指示。当判断为处于压缩编码处理过程中(是)时，提示位置生成器105对摄像器101的缩放动作是否已停止进行判断(S103)。当在S103中判断为缩放动作未停止(否)时，提示位置生成器105再次对缩放动作是否已停止进行判断(S103)，以后重复S103的处理直到缩放动作停止为止。

在S103的处理中，当判断为摄像器101的缩放动作停止时，提示位置生成器105对图像编码处理器102进行将GOP结构从OpenGOP变更为ClosedGOP的指示(S104)。图像编码处理器102按照提示位置生成器105的要求，将运动图像编码数据的GOP结构从OpenGOP变更为ClosedGOP。

提示位置生成器105在对图像编码处理器102进行将GOP结构从OpenGOP变更为ClosedGOP的指示之后，当经过一定时间时，再次对图像编码处理器102进行将GOP结构从ClosedGOP恢复到OpenGOP的变更指示。在实施方式1中，假设插入一个ClosedGOP。因此，上述一定时间设定为约0.5秒。

此外，在实施方式1中，提示位置生成器105根据对摄像器101中的可变焦距镜头的缩放动作的检测而进行GOP结构变更指示，但也可以根据对其他动作的检测而进行GOP结构变更指示。例如，有的数码摄像机为了防止在拍摄过程中将摄像机朝下而误拍摄地面，而搭载有可对摄像机的倾斜进行检测的加速度传感器120(图1中示出)。在这种结构的数码摄像机中，当加速度传感器120检测出的倾斜达到规定值时，拍摄动作被强制停止。但是这样的话，即使有意识地将摄像机朝下时，拍摄动作也会被停止。因此，在拍摄地面等垂直向下方向时，需要关闭(OFF)对摄像机的倾斜进行检测的功能。

当在具有这种结构的数码摄像机中实施本发明时，提示位置生成器105对加速度传感器120检测出的倾斜值进行检测，用以代替对摄像器101的可变焦距镜头的缩放动作进行检测。然后，提示位置生成器105根据检测到的倾斜值进行GOP结构的变更。例如，当摄像机朝向垂直向下方向时，提示位置生成器105在根据加速度传感器120的传感器输出而检测出摄像器101的方向之后，将此时的场景判断为提示位置，将GOP结构从OpenGOP变更为ClosedGOP。另外，即使在摄像机的方向从垂直向下方向恢复到水平方向时，提示位置生成器105也在根据加速度传感器120的传感器输出而检测出摄像器101的方向之后，将此时的场景判断为提示位置，将GOP结构从OpenGOP变更为ClosedGOP。

通过进行以上的GOP结构变更处理，在编辑时用户能够在各场景之中容易地删除被判断为不需要的场景。此外，根据提示位置生成器105的指示，变更为ClosedGOP的位置的时间信息也可以记录到管理信息106中。

图3A、图3B是示出GOP结构的图，图3A示出跨越GOP间进行前向预测的OpenGOP的结构，图3B示出不利用跨越GOP间的预测的ClosedGOP的结构。在上述图中，I表示帧内编码图像(I-Picture)，P表示前向预测编码图像(P-Picture)，B表示双向预测图像(B-Picture)，图中的箭头表示编码图像所参考的参考图像。

在图3A的OpenGOP中，例如，当从GOP1开始进行播放时，由于GOP1的I-Picture之前的B-Picture参考GOP0，因此难以进行正确的解码。但是，在图3B的ClosedGOP中，例如，当从GOP1开始进行播放时，由于GOP1的I-Picture之前的B-Picture不参考GOP0，因此能够进行正确的解码。

而且，在编辑时，在图3A的OpenGOP中，GOP1的I-Picture之前的B-Picture参考GOP0，因此如果删除GOP0则无法进行解码，导致画质下降。但是，在图3B的ClosedGOP中，GOP1的I-Picture之前的B-Picture不参考GOP0，因此即使删除GOP0也不会产生画质的劣化。

由此可知，通过根据对场景的提示检测，将GOP结构从OpenGOP变更为ClosedGOP，不仅提示变得容易，而且删除提示位置的前向GOP等编辑也变得容易。

如此，根据实施方式1，用户在通过检测出摄像器101的放大动作或缩小动作这样的缩放动作的执行等，从而检测出场景的提示位置之后，将检测出的场景的提示位置的GOP结构变更为ClosedGOP，从而在播放时不仅能够迅速向该场景移动或提示，还因无需参考GOP而能够防止多余的数据传送处理以及画质劣化。

(实施方式2)

下面，参考附图对本发明的实施方式2中的运动图像记录播放装置进行说明。图4是示出本发明的实施方式2中的运动图像记录播放装置的框图。该运动图像记录播放装置是将与实施方式1具有相同结构的运动图像记录器110与运动图像播放器111一体化的装置。此外，作为本发明的其他实施方式，还可以省略运动图像记录器110而构成运动图像播放装置。

本实施方式的运动图像记录播放装置包括：摄像器101、图像编码处理器102、在记录介质104中进行记录的记录器103、提示位置生成器105、管理信息记录部106、显示装置107以及播放器108。在上述结构单元之中，至少图像编码处理器102、记录器103、提示位置生成器105以及播放器108由半导体集成电路构成。此外，在运动图像播放器111中设置有编辑器121，该编辑器121在对运动图像编码数据的规定的图像特征量是否发生了一定量以上的变化进行检测之后，能够根据该检测结果设定提示位置。

摄像器101例如包括：拍摄用光学系统，包括缩放调整用的可变焦距镜头；拍摄设备(包括将通过拍摄用光学系统获得的光信息转换为电信号的CCD、CMOS等光电转换元件)；以及图像信号处理器，在将从拍摄设备输出的电信号转换为数字视频信号之后，对该数字视频信号实施数字信号处理。

图像编码处理器102对由摄像器101获得的数字视频信号实施基于规定方式的压缩编码处理。例如，作为压缩编码方式，可以举出MPEG2-Video或MPEG等。在MPEG中，以GOP为单位进行编码。在本实施方式中，拍摄过程中的GOP结构仅在拍摄开始时被设定为ClosedGOP，以后就被设定为OpenGOP(但是，检测出规定动作时被设定为ClosedGOP)。

记录器103将由图像编码处理器102获得的运动图像编码数据以每规定单位向记录介质104进行写入处理。记录器103在将具有用于管理运动图像编码数据的规定信息的管理信息保存在存储器等管理信息记录部106中之后，从管理信息记录部106读出管理信息，并与运动图像编码数据一起写入记录介质104。在实施方式2中，未对音频数据进行描述，当存在音频数据时，在由记录器103对运动图像编码数据与音频数据进行多路复用之后，对各个数据付与用于实现同步的时间戳。作为记录介质104，可以举出HDD、SD卡、光盘(DVD、BD等)等。

提示位置生成器105具有第一处理部105a、第二处理部105b以及第三处理部105c。第一处理部105a在记录器103将由图像编码处理器102获得的运动图像编码数据记录到记录介质104中时，对摄像器101的规定动作进行检测。第二处理部105b根据第一处理部105a对规定动作的检测而对图像编码处理器102进行GOP结构变更指示。当实施方式2的提示位置生成器105在拍摄过程中作为规定动作而检测到摄像器101的可变焦距镜头的放大动作或缩小动作之后，根据该检测结果对图像编码处理器102进行将GOP结构从OpenGOP向ClosedGOP变更的指示。第三处理部105c根据第二处理部105b的处理结果，对将从记录器103获取的提示位置的时间信息记录到管理信息106中的处理进行控制。

进一步，第二处理部105b根据第一处理部105a对规定动作的检测而对图像编码处理器102进行将摄像器101的规定动作作为附加信息附加到运动图像编码数据中的指示。在实施方式2中，上述规定动作与摄像器101中的缩放动作相对应，第二处理部105b控制图像编码处理器102，以在压缩编码时将缩放动作信息作为用户数据附加到运动图像编码数据头部的用户数据区域中。管理信息是通过记录器103，与图像编码数据一起记录到记录介质104中的数据，包含有图像编码数据的所谓时间戳等信息。显示装置107例如可以举出液晶监视器等。播放器108在从记录介质104读出运动图像编码数据的附加信息并进行解析之后，根据该解析结果读出运动图像编码数据并进行播放。然后，当确认出附加信息中记录有拍摄时的规定动作信息时，播放器108能够从拍摄时执行规定动作的位置处开始进行播放。如此，播放器108作为读出器和播放器发挥作用。

作为附加信息，当拍摄时的摄像器101的缩放动作信息作为规定动作信息被记录在记录介质104中时，播放器108能够在缩放动作信息中从缩放动作结束的位置(或者开始的位置)处开始进行播放。

编辑器121能够将在运动图像编码数据中图像特征量的变化具有规定量以上的数据位置，设定为运动图像编码数据中的提示位置。图像特征量是指对可从图像中提取的眼、鼻、口等构成脸的部位的大小、位置、相对配置、脸部轮廓等进行参数化后而得到的特征量。据此，例如通过使用公知的脸部检测技术，即针对运动图像内的画面中央附近，找出眼、鼻、口等形状具有特征的部位，如果类似度高则看做脸部的脸部检测技术，能够识别出人物为被拍摄物，并将该场景设定为提示位置。

下面对实施方式2中的提示位置生成器105的以下动作进行说明。这里所说的动作是指，对摄像器101的缩放动作进行检测并对图像编码处理器102进行GOP结构变更指示，直到进一步进行将摄像器101的缩放动作信息作为用户数据附加到图像编码数据头部的用户数据区域中的指示为止的动作。

图5是示出提示位置生成器105的动作流程的流程图。提示位置生成器105，首先对是否执行了摄像器101的可变焦距镜头的放大动作或缩小动作(以下记为缩放动作)进行判断(S201)。当在S201中判断为未执行缩放动作(否)时，提示位置生成器105不对图像编码处理器102进行GOP结构变更指示。当在S201中判断为执行了缩放动作(是)时，提示位置生成器105对图像编码处理器102是否处于正在对数字视频信号(由摄像器101获取)实施压缩编码处理的过程中进行判断(S202)。当在S202中判断为图像编码处理器102未处于压缩编码处理过程中(否)时，提示位置生成器105不对图像编码处理器102进行GOP结构变更指示。当判断为处于压缩编码处理过程中(是)时，提示位置生成器105对摄像器101的缩放动作是否已停止进行判断(S203)。当在S203中判断为缩放动作未停止(否)时，提示位置生成器105再次对缩放动作是否已停止进行判断(S203)，以后重复S203的处理直到缩放动作停止为止。

当在S203的处理中判断为摄像器101的缩放动作停止时，提示位置生成器105对图像编码处理器102进行将GOP结构从OpenGOP变更为ClosedGOP的指示(S204)。进一步，提示位置生成器105对图像编码处理器102进行将已执行摄像器101的缩放动作的信息作为附加信息附加到运动图像编码数据中的指示(S205)。图像编码处理器102按照提示位置生成器105的要求，将GOP结构从OpenGOP变更为ClosedGOP，进一步在运动图像编码数据头部的用户数据区域设定缩放动作执行标记。

提示位置生成器105在对图像编码处理器102进行将GOP结构从OpenGOP变更为ClosedGOP的指示之后，当经过一定时间时，再次对图像编码处理器102进行将GOP结构从ClosedGOP恢复到OpenGOP的变更指示。在实施方式2中，假设插入一个ClosedGOP。因此，上述一定时间设定为约0.5秒。

此外，在实施方式2中，提示位置生成器105进行GOP结构变更指示，但也可以根据对其他动作的检测(通过加速度传感器120对摄像器120的倾斜进行检测等)而进行GOP结构变更指示。

下面，参考图6对发明的实施方式2中播放器108的以下动作，即从记录介质104读出图像编码数据，播放图像编码数据，直到向显示器107输出为止的动作进行说明。图6是示出播放器108的动作流程的流程图。

播放器108首先从记录介质104读出运动图像编码数据(S301)。接着，播放器108对从记录介质104读出的运动图像编码数据头部(附加信息)进行解析，对在头部中设置的用户数据区域中是否设定有拍摄时的可变焦距镜头的缩放动作执行标记进行判断(S302)。当在S302的处理中判断为在用户数据区域中设定有缩放动作执行标记时，播放器108使得该用户数据区域的某个场景作为提示位置可被选择(S303)。作为使得作为提示位置可被选择的处理，例如可以举出缩略图显示。，当用户从作为提示位置可被选择的希望的场景开始对运动图像记录播放装置进行播放指示时，根据该指示，将用户数据区域的某个场景作为提示位置而将运动图像编码数据输出到显示装置107。当在S302中判断为在用户数据区域中未设定缩放动作执行标记时，播放器108并不特别进行处理。

如上所述，根据实施方式2，当用户执行摄像器101的放大动作或缩小动作这样的缩放动作时，在将该场景的GOP结构变更为ClosedGOP之后，将缩放动作信息作为附加信息付与到运动图像编码数据的头部。因此，在播放时能够将拍摄时进行过缩放动作的场景看做是提示位置并迅速向该场景移动或提示。进一步，由于无需参考GOP，因此能够防止多余的数据传送处理以及画质劣化。

以上根据实施方式对本发明的运动图像记录装置以及运动图像记录播放装置进行了说明，但本发明并不限定于上述实施方式。只要不脱离本发明的宗旨，在本实施方式中实施本领域技术人员想到的各种变形，或组合不同实施方式中的结构单元而构建的方式也包含在本发明的范围内。

本发明一般能够适用于执行运动图像的记录、播放的设备，特别是数码摄像机、移动电话等包含摄像功能的电子设备。

符号说明

101摄像器

102图像编码处理器

103记录器

104记录介质

105提示位置生成器

106管理信息

107显示装置

108播放器

Claims (17)

1.一种运动图像记录装置，包括：

摄像器，拍摄图像并获得数字视频信号；

图像编码处理器，以由多个帧构成的图像组GOP为单位对所述数字视频信号进行编码，生成运动图像编码数据；

记录器，将所述运动图像编码数据记录到记录介质中；以及

提示位置生成器，

所述提示位置生成器包括：

第一处理部，在所述记录器将所述运动图像编码数据记录到所述记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理部，根据所述第一处理部对所述规定动作的检测，对所述图像编码处理器进行所述运动图像编码数据中的GOP结构变更指示。

2.根据权利要求1所述的运动图像记录装置，

所述第二处理部对所述图像编码处理器进行将所述运动图像编码数据中的GOP结构从开放图像组OpenGOP变更为封闭图像组ClosedGOP的指示。

3.根据权利要求1所述的运动图像记录装置，

所述摄像器能够调整摄影视场角，

所述第一处理部将所述摄像器的所述摄影视场角调整动作作为所述规定动作进行检测。

4.根据权利要求1所述的运动图像记录装置，

所述第二处理部在进行所述GOP结构变更指示并经过一定时间后，对所述图像编码处理器进行将GOP结构恢复原状的指示。

5.根据权利要求1所述的运动图像记录装置，

所述第二处理部根据所述第一处理部对所述规定动作的检测，进一步对所述图像编码处理器进行章节显示用图像的生成指示。

6.根据权利要求1所述的运动图像记录装置，

所述第二处理部根据所述第一处理部对所述规定动作的检测，进一步对所述记录器进行所述运动图像编码数据的分割指示。

7.根据权利要求1所述的运动图像记录装置，

所述第二处理部根据所述第一处理部对所述规定动作的检测，进一步对所述图像编码处理器进行将所述规定动作的相关信息作为附加信息附加到所述运动图像编码数据中的指示。

8.根据权利要求1所述的运动图像记录装置，

进一步包括：

传感器，对所述摄像器的倾斜进行检测，

所述第一处理部根据所述传感器的传感器输出，将所述摄像器的倾斜作为所述规定动作进行检测。

9.根据权利要求1所述的运动图像记录装置，

进一步包括：

管理信息记录部，记录用于管理所述运动图像编码数据的管理信息，

所述提示位置生成器进一步包括第三处理部，

所述第三处理部在从所述记录器获取表示数据位置的信息之后，将获取的所述信息作为所述管理信息记录到所述管理信息记录部中，所述数据位置为通过所述第二处理部实施GOP结构变更的所述运动图像编码数据的数据位置。

10.一种运动图像播放装置，包括：

读出器，从记录介质读出运动图像编码数据的附加信息；以及

播放器，根据所述附加信息，从所述记录介质读出所述运动图像编码数据并进行播放，

所述播放器在对所述读出器读出的所述附加信息中是否记录有在拍摄所述运动图像编码数据时实施的规定动作的相关信息进行判断之后，当判断为记录有所述信息时，能够从该信息中被确定为执行所述规定动作的位置的数据位置处开始，播放所述运动图像编码数据。

11.根据权利要求10所述的运动图像播放装置，

所述规定动作为摄像器的摄影视场角调整动作，所述摄像器拍摄作为所述运动图像编码数据源的数字视频信号。

12.根据权利要求10所述的运动图像播放装置，

进一步包括：

编辑器，能够将所述运动图像编码数据中图像特征量的变化为规定量以上的数据位置，设定为所述运动图像编码数据中的提示位置。

13.一种运动图像记录方法，包括：

拍摄步骤，由摄像器拍摄图像并获得数字视频信号；

图像编码步骤，由图像编码处理器以由多个帧构成的图像组GOP为单位对所述数字视频信号进行编码，生成运动图像编码数据；

记录步骤，由记录器将所述运动图像编码数据记录到记录介质中；以及

提示位置生成步骤，

所述提示位置生成步骤包括：

第一处理步骤，在由所述记录步骤将所述运动图像编码数据记录到记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理步骤，根据所述第一处理步骤对所述规定动作的检测，对所述图像编码处理器进行GOP结构变更指示。

14.根据权利要求13所述的运动图像记录方法，

所述摄像器能够调整摄影视场角，

在所述第一处理步骤中，将所述摄像器的所述摄影视场角调整动作作为所述规定动作进行检测。

15.一种运动图像播放方法，包括：

读出步骤，从记录有包含附加信息的运动图像编码数据的记录介质读出所述附加信息；以及

播放步骤，根据由所述读出步骤读出的所述附加信息，从所述记录介质读出所述运动图像编码数据并进行播放，

在所述播放步骤中，在对由所述读出步骤读出的所述附加信息中是否记录有在拍摄所述运动图像编码数据时实施的规定动作的相关信息进行判断之后，当判断为记录有所述信息时，能够从该信息中被确定为执行所述规定动作的位置的数据位置处开始，播放所述运动图像编码数据。

16.根据权利要求15所述的运动图像播放方法，

所述规定动作为摄像器的摄影视场角调整动作，所述摄像器拍摄作为所述运动图像编码数据源的数字视频信号。

17.一种半导体集成电路，包括：

图像编码处理器，与外部的摄像器连接，以由多个帧构成的图像组GOP为单位对从所述摄像器输入的数字视频信号进行编码，生成运动图像编码数据；

记录器，与外部的记录介质连接，将所述运动图像编码数据记录到所述记录介质中；以及

提示位置生成器，

所述提示位置生成器包括：

第一处理部，在所述记录器将所述运动图像编码数据记录到所述记录介质中时，对由所述摄像器实施的规定动作进行检测；以及

第二处理部，根据所述第一处理部对所述规定动作的检测，对所述图像编码处理器进行所述运动图像编码数据中的GOP结构变更指示。

Images