CN101690191A - 运动图像重放装置和运动图像重放方法 - Google Patents

Abstract

在中断了重放时也能够尽早且在无偏差的定时显示基于内容的图像的一览的运动图像重放装置。在该装置中，运动图像重放单元(120)对编码后的运动图像数据进行解码并重放运动图像。监视器(130)显示重放了的运动图像，而且显示基于内容的图像的一览。在中断了重放时，重放位置信息生成单元(140)对在包含中断了的时刻的规定时间内显示的图像的显示图像数据进行帧内编码。一览信息形成单元(150)指示重放开始位置图像数据存储单元(113)将重放开始位置图像数据输出到运动图像重放单元(120)，并从运动图像重放单元(120)取得进行了解码处理的重放开始位置图像数据，生成基于内容的图像的一览。

Description

运动图像重放装置和运动图像重放方法

技术领域

本发明特别涉及一览地显示内容的运动图像重放装置和运动图像重放方法。

背景技术

以往，记录和重放运动图像时，由于图像数据的数据量膨大，所以存在用于不劣化画质而将记录的数据量抑制得较小的技术即编码技术。

当前，作为使用编码技术来抑制运动图像的图像数据的数据量的一种代表性技术，已广泛普及了由国际标准化团体标准化了的ISO/IEC 14496Part2，该标准通常被称为MPEG-4。

在MPEG-4中，为了压缩并削减时间上连续的图像的数据量，同时使用了画面间编码(以下记载为“帧间编码”)和画面内编码(以下记载为“帧内编码”)。

帧间编码是指下述编码方法，即，计算时间上前一帧的图像与当前帧的图像之间的差分，并仅对该差分信息进行编码而记录。

与所述帧间编码不同，帧内编码是指下述编码方法，即，并不是对差分信息而是对当前帧的数据本身进行编码而记录。一般而言，帧内编码的压缩效率不像帧间编码那么高。但是，在无法参照前一帧的第一帧的编码、或与前一帧之间的差分过大时利用帧间编码反而使压缩效率降低等情况下，使用帧内编码。

进行了帧间编码的帧，由于仅包含差分信息，所以在前一帧的数据不存在时无法进行重放。也就是说，帧间编码方法是不能从中途重放运动图像数据的编码方法。

因此，以往在对运动图像数据进行编码时，为了能从中途进行重放，在帧间编码后的运动图像数据中，通常以一定时间间隔定期地插入进行了帧内编码的帧，该间隔为任意的间隔。

另外，在重放多个运动图像内容的运动图像数据的运动图像重放装置中，为了容易地选择要重放的运动图像内容，采用了在选择时的一览显示中，显示代表运动图像内容的图像的方法(例如，参照专利文献1)。在专利文献1中，预先记录用于确定中断了重放的部分的重放时间，一览地显示与所记录的重放时间有关的图像，从而使用户容易地选择运动图像内容。具体而言，在专利文献1中，预先仅记录重放时间，在中断了重放时，基于中断了重放时的重放时间，生成一览显示的图像。

专利文献1：特开2004-32375号公报

发明内容

本发明需要解决的问题

但是，在专利文献1中，进行了帧内编码的帧的间隔取决于记录时的记录装置的规格，在重放装置无法进行选择。因此，记录装置中所设定的、进行了帧内编码的帧的间隔极大时，存在为了生成一览显示的图像而需要较长的时间的问题。而且，在专利文献1中存在下述问题，根据前一次中断了重放的定时是进行了帧内编码的帧间隔的哪一定时，一览显示的图像显示出来的时间有时快有时慢而产生偏差，所以用户难以预见直至一览显示的图像显示出来的时间，因此使用户感到困惑且对用户而言便利性较差。

本发明的目的在于提供在中断了重放时也能够尽早且在无偏差的定时显示基于内容的图像的一览的运动图像重放装置和运动图像重放方法。

解决问题的方案

本发明的运动图像重放装置采用的结构包括：运动图像重放单元，对编码后的运动图像数据进行解码而重放运动图像；存储单元，存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；一览生成单元，生成所述存储单元存储的所述图像数据的各个内容的图像的一览；以及显示单元，显示由所述运动图像重放单元重放了的运动图像，而且显示由所述一览生成单元生成的所述一览。

本发明的运动图像重放方法包括以下步骤：对编码后的运动图像数据进行解码而重放运动图像；存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；生成所存储的所述图像数据的各个内容的图像的一览；以及显示重放了的所述运动图像，而且显示所述一览。

发明效果

根据本发明，在中断了重放时也能够尽早且在无偏差的定时显示基于内容的图像的一览。

附图说明

图1是表示本发明实施方式1的运动图像重放装置的结构的方框图。

图2是表示本发明实施方式1的运动图像重放装置的记录与一览显示之间的对应关系的示意图。

图3是表示本发明实施方式1的运动图像重放装置的重放中断时的动作的流程图。

图4是表示本发明实施方式1的运动图像重放装置的再开始重放时的动作的流程图。

图5是表示本发明实施方式2的运动图像重放装置的结构的方框图。

具体实施方式

以下，参照附图详细地说明本发明的实施方式。

(实施方式1)

图1是表示本发明实施方式1的运动图像重放装置1的结构的方框图。

在图1中，运动图像重放装置1主要包括：控制单元100、存储单元110、运动图像重放单元120、监视器130、重放位置信息生成单元140以及一览信息形成单元150。

控制单元100控制整个运动图像重放装置1。另外，控制单元100基于来自未图示的操作单元的指令，产生用于开始或中断运动图像重放装置1的重放动作的控制信号，并将其输出到运动图像重放单元120、重放位置信息生成单元140以及一览信息形成单元150。而且，控制单元100产生用于指定在一览信息形成单元150形成一览时的图像的图像选择信号，并将其输出到运动图像重放单元120。例如，控制单元100产生用于选择图像的图像选择信号，所述图像为中断了重放的时刻之前监视器130上显示的图像、中断了重放时监视器130上显示的图像、或中断了重放的时刻之后监视器130上显示的图像。

存储单元110包括：运动图像数据存储单元111、重放开始位置信息存储单元112以及重放开始位置图像数据存储单元113。存储单元110例如由硬盘装置等构成。另外，存储单元110并不限于硬盘装置，其也可以由DVD装置或闪速存储器等半导体存储装置构成。

运动图像数据存储单元111存储进行了帧内编码的运动图像数据或者同时使用了帧内编码和帧间编码的运动图像数据。

重放开始位置信息存储单元112存储从重放位置信息生成单元140输入的、表示了从开始运动图像数据的重放至中断该重放为止的重放时间的信息即重放开始位置信息。

重放开始位置图像数据存储单元113存储从重放位置信息生成单元140输入的、显示图像数据即重放开始位置图像数据。

运动图像重放单元120从运动图像数据存储单元111读出运动图像数据存储单元111存储的运动图像数据。然后，运动图像重放单元120在读出的运动图像数据进行了帧内编码时通过与帧内编码对应的方法对其进行解码，在读出的运动图像数据进行了帧间编码时通过与帧间编码对应的方法对其进行解码，并依次重放显示图像而输出到监视器130。

另外，在从控制单元100输入用于中断重放动作的控制信号时，运动图像重放单元120中断重放。然后，运动图像重放单元120将从开始重放至中断该重放为止的重放时间以及在包含中断了重放的时刻的规定时间内监视器130上显示的图像的显示图像数据输出到重放位置信息生成单元140。例如，运动图像重放单元120具有存储监视器130的三个画面的各个图像的存储器，依次将解码后的图像存储到存储器。然后，运动图像重放单元120在从控制单元100接收到中断重放动作的控制信号时，根据从控制单元100输入的图像选择信号，选择存储器中存储的最旧的图像，并将其输出到重放位置信息生成单元140。由此，运动图像重放单元120输出中断了重放动作的时刻之前监视器130上显示的图像。而且，运动图像重放单元120在接收到中断重放动作的控制信号时，根据从控制单元100输入的图像选择信号，选择存储器中存储的最新的图像，并将其输出到重放位置信息生成单元140。由此，运动图像重放单元120输出中断了重放动作的时刻之后监视器130上要显示的图像。而且，运动图像重放单元120在接收到中断重放动作的控制信号时，根据从控制单元100输入的图像选择信号，选择存储器中存储的、中断重放时监视器130上显示的图像，并将其输出到重放位置信息生成单元140。

另外，运动图像重放单元120从在包含中断了重放的时刻的规定时间内显示的图像中，选择以画面内编码方式进行了编码的最近的图像数据间的、通过画面间编码或双向预测编码(一般称为B帧)进行了编码的图像数据，并将其输出到重放位置信息生成单元140。而且，运动图像重放单元120对从重放开始位置图像数据存储单元113取得的重放开始位置图像数据进行解码处理，并将其输出到一览信息形成单元150。

重放位置信息生成单元140将从运动图像重放单元120输入的重放时间作为重放开始位置信息输出到重放开始位置信息存储单元112。而且，重放位置信息生成单元140将从运动图像重放单元120输入的显示图像数据的图像尺寸变更为与在显示器130一览地显示时的纵向和横向的像素数具有相同的纵向和横向的像素数的图像尺寸。而且，重放位置信息生成单元140对变更尺寸后的图像的显示图像数据进行编码处理。然后，重放位置信息生成单元140将编码处理后的显示图像数据作为重放开始位置图像数据，使其与重放开始位置信息关联对应，并将其输出到重放开始位置图像数据存储单元113。

一览信息形成单元150判定在存储单元110内的重放开始位置信息存储单元112中是否存储了重放开始位置信息。在判定出存储了重放开始位置信息时，一览信息形成单元150指示将存储单元110内的重放开始位置图像数据存储单元113存储的重放开始位置图像数据输出到运动图像重放单元120，并从运动图像重放单元120取得进行了解码处理的重放开始位置图像数据。另一方面，在判定出未存储重放开始位置信息时，一览信息形成单元150请求运动图像重放单元120输出第一帧的显示图像而取得显示图像。进而，一览信息形成单元150基于从存储单元110内的重放开始位置信息存储单元112取得的重放开始位置信息、以及从运动图像重放单元120取得的进行了解码处理的重放开始位置图像数据或者从运动图像重放单元120取得的显示图像，生成缩略(thumbnail)图像，并将生成的缩略图像输出到监视器130。

监视器130显示由运动图像重放单元120重放的显示图像。而且，监视器130显示从一览信息形成单元150输入的缩略图像。

图2是示意性地表示存储单元110的存储内容与监视器130的显示内容之间的对应关系的图。

在图2中，运动图像数据存储单元111例如存储四个运动图像内容Video1至Video4。在四个运动图像内容Video1至Video4中，运动图像内容Video1至Video3表示了重放结束，与此相对，运动图像内容Video4表示在高尔夫的场景下中断了重放。

另外，在图2中，对于运动图像内容Video4，重放开始位置信息存储单元112存储了“00小时15分34秒00”作为重放开始位置信息。也就是说，对于运动图像内容Video4，重放开始位置信息存储单元112存储从重放开始时刻开始视听到经过了15分34秒00后中断重放、即重放时间为15分34秒00的事实。而且，对于运动图像内容Video1至Video3，重放开始位置信息存储单元112存储了“00小时00分00秒00”作为重放开始位置信息。也就是说，对于运动图像内容Video1至Video3，重放开始位置信息存储单元112存储重放已结束的事实。

在图2中，重放开始位置图像数据存储单元113存储中断了重放时的、运动图像内容的高尔夫的场景。也就是说，重放开始位置图像数据存储单元113以图像数据来存储在高尔夫的内容下中断重放后、再开始重放时应从高尔夫的场景开始重放的事实。

在图2中，监视器130将四个运动图像内容Video1至Video4作为运动图像内容一览而以图像数据来显示，而且对于中断了重放的运动图像内容Vidco4，显示中断了重放的高尔夫的场景。另外，监视器130显示各个运动图像内容Video1至Video3的开头画面作为运动图像内容Video1至Video3的代表性图像数据。因此，用户预先关联对应地识别开头画面与各个运动图像内容，从而通过观看由监视器130显示的开头画面，能够把握运动图像数据存储单元111存储的各个运动图像内容。

接着，用图3说明运动图像重放装置1中断了重放动作时的动作。图3是表示运动图像重放装置1中断了重放动作时的动作的流程图。

首先，在用户的视听中，控制单元100指示运动图像重放装置120进行重放处理(S1)。

接着，运动图像重放单元120依次读出存储单元110的运动图像数据存储单元111所记录的运动图像数据，在进行了解码处理后，将重放图像输出到监视器130(S2)，监视器130显示重放图像，由此用户通过监视器130连续地视觉辩认重放图像(S3：“是”，S2)。

此后，控制单元100在接收到中断重放的指令时(S3：“否”)，将中断指示输出到重放位置信息生成单元140和运动图像重放单元120。

接着，运动图像重放单元120在将接收到中断指示时的重放时间和接收到中断指示时的显示图像数据输出到重放位置信息生成单元140。接着重放位置信息生成单元140取得从运动图像重放单元120输入的重放时间作为重放开始位置信息，并保存到存储单元110内的重放开始位置信息存储单元112(S4)。

接着，重放位置信息生成单元140将从运动图像重放单元120输入的显示图像数据变更为一览信息显示时使用的图像尺寸的显示图像数据，在以与运动图像数据相同的编码方式进行帧内编码后，将其保存到存储单元110内的重放开始位置图像数据存储单元113(S5)，运动图像重放装置1结束视听处理(S6)。

接着，使用图4说明与运动图像重放装置1中的运动图像内容的一览显示和运动图像内容的选择对应的动作。图4是表示与运动图像重放装置1中的运动图像内容的一览显示和运动图像内容的选择对应的动作的流程图。

再开始视听后(S11)，控制单元100指示一览信息形成单元150生成一览信息(S12)。

接着，一览信息形成单元150从存储单元110内的重放开始位置信息存储单元112读出重放开始位置信息，确认有无重放开始位置信息(S13)。

接着，在保存了重放开始位置信息时(S14：“是”)，一览信息形成单元150指示将重放开始位置图像数据存储单元113存储的重放开始位置图像数据输出到运动图像重放单元120，并取得由运动图像重放单元120进行了解码处理的重放开始位置图像数据(S15)。

在未保存重放开始位置信息时(S14：“否”)，一览信息形成单元150请求运动图像重放单元120输出第一帧的重放图像数据，运动图像重放单元120取得第一帧的重放图像数据(S16)。

接着，一览信息形成单元150基于在步骤S15或在步骤S16获得的重放开始位置图像数据，将运动图像数据的一览信息以及其缩略图像输出到监视器130。接着，例如图2的监视器130所示，监视器130显示包含有已完成重放的三个运动图像内容Video1至Video3以及中断了重放的运动图像内容Video4的运动图像内容一览(S17)。

接着，用户观看监视器130上显示的运动图像内容一览，从其中选择想视听的运动图像数据后，控制单元100对运动图像重放单元120输出指令，指令其重放相对应的运动图像内容(S18)，运动图像重放单元120重放该运动图像内容并在监视器130上进行显示，再开始用户自身所期望的运动图像内容的视听(S19)。

另外，在上述情况下，记载了未保存重放开始位置信息时，对第一帧的重放图像进行解码而显示，但也可以预先将第一帧的重放图像作为重放开始位置图像数据保存在重放开始位置图像数据存储单元113，在生成一览信息时，从重放开始位置图像数据存储单元113读入重放开始位置图像数据。

如上所述，根据本实施方式，在中断了重放时也能够尽早且在无偏差的定时显示基于内容的图像的一览，提高使用者的便利性。特别是，在存储单元110大容量地存储多数运动图像内容时，显示用户容易识别的重放开始位置图像数据，所以用户能够可靠地选择所期望的运动图像内容并再开始重放。而且，根据本实施方式，对显示图像数据进行帧内编码后进行存储，所以能够减小保存的图像数据的容量。而且，根据本实施方式，在对运动图像数据存储单元111所存储的运动图像数据进行帧内编码时，以与运动图像数据的编码方式相同的编码方式对显示图像数据进行编码，所以能够使存储单元110存储的运动图像数据以及重放开始位置图像数据的编码方式相同，并抑制显示运动图像数据以及重放开始位置图像数据作为图像时的处理负荷的增加。而且，根据本实施方式，将显示图像变更为与一览上显示时的纵向和横向的像素数具有相同的纵向和横向的像素数的显示图像数据来存储，所以能够进一步减小保存的图像数据的容量。而且，根据本实施方式，在判定有无重放开始位置信息之后读出重放开始位置图像数据，所以能够容易地判断有无中断了重放的内容，而且容易地形成一览。

(实施方式2)

图5是表示本发明实施方式2的运动图像重放装置10的结构的方框图。

相对于图1所示的实施方式1的运动图像重放装置1，图5所示的运动图像重放装置10包括一览信息形成单元510来代替一览信息形成单元150。另外，在图5中，对与图1相同的结构部分附加相同的标号，并省略其说明。

控制单元100控制整个运动图像重放装置10。另外，控制单元100基于来自未图示的操作单元的指令，产生用于开始或中断运动图像重放装置10的重放动作的控制信号，并将其输出到运动图像重放单元120、重放位置信息生成单元140以及一览信息形成单元510。而且，控制单元100产生用于指定在一览信息形成单元510形成一览信息时的图像的图像选择信号，并将其输出到运动图像重放单元120。

运动图像重放单元120对从重放开始位置图像数据存储单元113取得的重放开始位置图像数据进行解码处理，并将其输出到一览信息形成单元510。另外，图5的运动图像重放单元120中的其他的处理与图1的运动图像重放单元120中的处理相同，所以省略其说明。

一览信息形成单元510判定在存储单元110内的重放开始位置信息存储单元112中是否存储了重放开始位置信息。在判定出存储了重放开始位置信息时，一览信息形成单元510指示将存储单元110内的重放开始位置图像数据存储单元113存储的重放开始位置图像数据输出到运动图像重放单元120，并从运动图像重放单元120取得进行了解码处理的重放开始位置图像数据。另一方面，在判定出未存储重放开始位置信息时，一览信息形成单元510请求运动图像重放单元120输出第一帧的显示图像而取得显示图像。进而，一览信息形成单元510基于从存储单元110内的重放开始位置信息存储单元112取得的重放开始位置信息、以及从运动图像重放单元120取得的进行了解码处理的重放开始位置图像数据或者从运动图像重放单元120取得的显示图像，生成缩略图像，并将生成的缩略图像输出到监视器130。

另外，一览信息形成单元510读入运动图像数据存储单元111所记录的运动图像数据，判定其是否为可以重放的内容。然后，一览信息形成单元510生成基于可以重放的基于内容的图像的一览信息。另一方面，在判定为所有的内容都不能重放时，一览信息形成单元510生成不包含图像的一览信息。例如，一览信息形成单元510在生成一览信息时通过判定是否因著作权而限制了内容的重放、或者重放内容的操作是否处于可执行的期间内、或者是否能正确地读取重放中不可欠缺的重要的报头信息，从而判定其是否为可以重放的内容。此时，在没有因著作权而限制内容的重放时、重放内容的操作处于可执行的期间内时或能够正确地读取重放中不可欠缺的报头信息时，一览信息形成单元510判定其为可重放内容。

监视器130显示由运动图像重放单元120重放的显示图像。而且，监视器130显示从一览信息形成单元510输入的缩略图像。

这样，根据本实施方式，除了上述实施方式1的效果以外，由于不一览地显示无法重放的内容的图像，所以能够防止尽管选择了一览显示的内容也无法重放所选择的内容的状态。

工业实用性

本发明的运动图像重放装置和运动图像重放方法特别适合于一览地显示内容。

权利要求书(按照条约第19条的修改)

1、运动图像重放装置，包括：

运动图像重放单元，对编码后的运动图像数据进行解码而重放运动图像；

存储单元，存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；

一览生成单元，生成所述存储单元存储的所述图像数据的各个可重放的内容的图像的一览；以及

显示单元，显示由所述一览生成单元生成的所述一览。

2、如权利要求1所述的运动图像重放装置，所述存储单元存储所述中断了时所述显示单元显示的图像的图像数据。

3、如权利要求1所述的运动图像重放装置，还包括：重放位置信息生成单元，以画面内编码方式对所述图像数据进行编码，

所述存储单元存储以画面内编码方式进行了编码的所述图像数据。

4、如权利要求3所述的运动图像重放装置，所述重放位置信息生成单元以与所述运动图像数据的编码方式相同的编码方式即画面内编码方式，对所述图像数据进行编码。

5、如权利要求1所述的运动图像重放装置，还包括：重放位置信息生成单元，对将所述规定时间内通过所述重放显示的图像的尺寸变更为所述一览上显示时的图像的尺寸所得到的图像的图像数据进行编码，

所述存储单元存储由所述重放位置信息生成单元进行了编码的所述图像数据。

6、如权利要求1所述的运动图像重放装置，所述存储单元存储存在于以画面内编码方式进行了编码的图像数据间的、以画面间预测编码方式进行了编码的图像数据或以双向预测编码方式进行了编码的图像数据。

7、如权利要求1所述的运动图像重放装置，所述一览生成单元在所有的内容都不能重放时，生成不包含图像的一览信息。

8、运动图像重放方法，包括以下步骤：

对编码后的运动图像数据进行解码而重放运动图像；

存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；

生成所存储的所述图像数据的各个可重放的内容的图像的一览；以及

显示所述一览。

Claims (8)

1、运动图像重放装置，包括：

运动图像重放单元，对编码后的运动图像数据进行解码而重放运动图像；

存储单元，存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；

一览生成单元，生成所述存储单元存储的所述图像数据的各个内容的图像的一览；以及

显示单元，显示由所述运动图像重放单元重放了的运动图像，而且显示由所述一览生成单元生成的所述一览。

2、如权利要求1所述的运动图像重放装置，所述存储单元存储所述中断了时所述显示单元显示的图像的图像数据。

3、如权利要求1所述的运动图像重放装置，还包括：重放位置信息生成单元，以画面内编码方式对所述图像数据进行编码，

所述存储单元存储以画面内编码方式进行了编码的所述图像数据。

4、如权利要求3所述的运动图像重放装置，所述重放位置信息生成单元以与所述运动图像数据的编码方式相同的编码方式即画面内编码方式，对所述图像数据进行编码。

5、如权利要求1所述的运动图像重放装置，还包括：重放位置信息生成单元，对将所述规定时间内通过所述重放显示的图像的尺寸变更为所述一览上显示时的图像的尺寸所得到的图像的图像数据进行编码，

所述存储单元存储由所述重放位置信息生成单元进行了编码的所述图像数据。

6、如权利要求1所述的运动图像重放装置，所述一览生成单元生成可重放的内容的所述图像数据的图像的所述一览。

7、如权利要求1所述的运动图像重放装置，所述存储单元存储存在于以画面内编码方式进行了编码的图像数据间的、以画面间预测编码方式进行了编码的图像数据或以双向预测编码方式进行了编码的图像数据。

8、运动图像重放方法，包括以下步骤：

对编码后的运动图像数据进行解码而重放运动图像；

存储在包含中断了所述重放时的所述中断了的时刻的规定时间内通过所述重放显示的图像的图像数据；

生成所存储的所述图像数据的各个内容的图像的一览；以及

显示重放了的所述运动图像，而且显示所述一览。

Images