CN102598657B

CN102598657B - 视频回放设备和用于控制视频回放设备的方法

Info

Publication number: CN102598657B
Application number: CN200980162133.6A
Authority: CN
Inventors: 关口洋平; 水留敦
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2009-10-27
Filing date: 2009-10-27
Publication date: 2015-03-25
Anticipated expiration: 2029-10-27
Also published as: JP5295381B2; CN102598657A; WO2011052045A1; US20110097059A1; JPWO2011052045A1

Abstract

提供了能够根据正在回放的视频内容的帧率适应性地设定慢回放的速度并且执行适合于视频内容的慢回放的视频回放设备以及用于控制该设备的方法。回放速度确定单元110参考用于根据视频帧率的值预先确定的慢回放的回放速度信息。回放速度信息是在其中慢回放的回放速度与视频帧率的值的范围关联的信息。回放速度确定单元110通过使用当前正被回放的视频的帧率的值和存储在存储单元中的用于慢回放的回放速度信息来确定用于对当前正被回放的视频执行慢回放的回放速度(S206)。解码单元104执行当前正被回放的视频数据的输出帧的内插和选择以及输出定时的调节，使得以所确定的慢回放速度回放视频(S207)。

Description

视频回放设备和用于控制视频回放设备的方法

技术领域

本发明涉及能够执行视频的特殊回放(诸如快进回放)的视频回放设备，并且涉及用于控制该视频回放设备的方法。

背景技术

近来，流通中的视频流数据的帧率(frame rate)已经变得范围较宽。例如，通常的电视广播的视频流数据的帧率为30fps，而对于移动终端的广播的视频流数据的帧率为15fps。此外，随着图像捕获设备的发展，具有高帧率(诸如240fps或480fps)的视频内容已经增多。

此外，能够对在一段视频流数据中具有多个帧率的视频进行编码的H.264/SVC(可伸缩视频编码)技术已经被标准化。通过使用该技术，可以通过例如将具有高帧率(诸如480fps)的视频添加到标准的30fps的视频来执行编码。也就是说，即使在一段视频内容中，也可以选择和回放具有与回放设备的显示能力对应的帧率的视频。

适应性地控制在视频内容的特殊回放中的回放速度的技术包括基于视频流数据的比特率控制回放速度的技术(参见PTL1)。

引文列表

专利文献

PTL 1：日本专利公开No.2008-227744

发明内容

技术问题

传统地，在一般的显示装置中，在很多情况下显示视频时的刷新速率是60Hz。然而，近来，已经出现能够以更高速度执行显示并且可与120Hz或240Hz兼容的显示装置。另一方面，在移动设备(诸如移动电话)中，刷新速率一般为30Hz。刷新速率指示每秒显示的图像(帧)的数量。

因此，例如，在60Hz的显示装置上显示30fps的视频内容的情况下，一个帧被重复地输出两倍或者在内插处理中在帧之间产生新的帧，由此每秒30帧实质上被处理为60帧。由于在日本电视广播中使用交错式(interlace)信号，因此每秒存在30个偶数场和30个奇数场。每秒30帧图像可以通过将交错信号转换成渐进的(progressive)信号来产生，并且此外，每秒60帧图像可以通过在帧之间产生内插帧来构造。

另一方面，当在视频具有比显示装置的刷新速率高的帧率的情况下以显示装置的刷新速率显示视频的所有帧时，视频被看到为比实际动作慢的动作(这被称为慢动作或者简单地被称为慢)。例如，在60Hz的显示装置上显示480fps的视频的所有帧的情况下，每秒480帧以60Hz在480÷60＝8秒内显示，使得视频被看到为比实际动作慢8倍的动作。也就是说，实时1秒内的动作被显示成8秒内的慢动作。与此对比，在以等于实时的速度回放具有比显示装置的刷新速率高的帧率的视频的情况下，可以在使帧变稀疏的情况下显示该视频。例如，在以等于实时的速度在60Hz的显示装置上显示480fps的视频的情况下，每8帧中的1帧可以被周期性地提取并且显示。

因此，即使视频内容具有与显示装置的刷新速率不同的帧率，视频内容也可以根据显示装置的刷新速率以等于实时的速度被回放。

此外，当用户期望在其中以慢动作回放视频内容的所谓的慢回放时，优选的是使用视频内容的帧率的特性执行回放处理。例如，具有高帧率的视频(其具有每单位时间的帧数较大的特性)可以被应用于与具有典型帧率的视频相比更精细且更流畅的慢回放。与此对比，具有低帧率的视频每单位时间具有较小的帧数，并且因此即使慢回放的速度减小也被看到为没有视频的变化的逐帧的视频。

然而，当前视频回放设备的慢回放功能强制用户以预定的回放速度执行回放，而不考虑视频本身的帧率的差别。在当前慢回放功能中，在按压慢回放按钮时仅仅执行以1/2×的速度的慢回放。或者，在慢回放功能中，固定值(诸如1/2×的速度、1/8×的速度、1/16×的速度等)被顺序地切换，而不考虑视频本身的帧率的差别。也就是说，在当前视频回放设备中对于确定慢回放速度并不考虑视频本身的帧率。

另外，上述PTL1中公开的技术控制特殊回放中的回放速度，但是为了控制回放速度参考视频数据的比特率，并且不执行基于帧率的控制。

因此，本发明的一个目的在于，提供能够根据正在回放的视频内容的帧率适应性地设定慢回放的速度并且执行适合于视频内容的慢回放的视频回放设备以及用于控制该视频回放设备的方法。

问题的解决方案

为了实现上述目的，根据本发明的视频回放设备是能够对蓄积在蓄积单元中的视频数据执行慢回放处理的视频回放设备。所述视频回放设备包括：检测装置，用于检测视频数据的帧率的值；确定装置，用于基于由所述检测装置检测的帧率的值来确定用于对具有所述帧率的视频数据执行慢回放的慢回放速度；以及回放装置，用于通过使用由所述确定装置确定的慢回放速度来对所述视频数据执行慢回放处理。

此外，为了实现上述目的，根据本发明的用于控制视频回放设备的方法是用于控制能够对蓄积在蓄积单元中的视频数据执行慢回放处理的视频回放设备的方法。所述方法包括：检测步骤，检测视频数据的帧率的值；确定步骤，基于在所述检测步骤中检测的帧率的值来确定用于对具有所述帧率的视频数据执行慢回放的慢回放速度；以及回放步骤，通过使用在所述确定步骤中确定的慢回放速度来对所述视频数据执行慢回放处理。

本发明的有利效果

如上所述，根据本发明，可以提供能够根据正在回放的视频内容的帧率适应性地设定慢回放的速度并且执行适合于视频内容的慢回放的视频回放设备以及用于控制该视频回放设备的方法。

附图说明

图1是示出根据本发明的视频回放设备的配置的框图。

图2是根据本发明第一实施例的流程图。

图3是示出根据本发明第一实施例的回放速度信息的示图。

图4是根据本发明第二实施例的流程图。

图5是示出根据本发明第三实施例的H.264/SVC的数据结构的示图。

图6是示出根据本发明第三实施例的回放速度信息的示图。

图7是根据本发明第三实施例的流程图。

具体实施方式

在下文中，将参考附图描述本发明的实施例。

第一实施例

(视频回放设备100的配置)

将描述本发明的第一实施例。根据本实施例的视频回放设备是用于回放在具有60Hz的刷新速率的显示面板上显示的视频的设备。具体地，将在该设备是包括视频记录/回放单元的电视机的假设下进行描述。当然，根据本发明的视频回放设备可以是具有与显示面板分离的配置的广播记录器。

要被回放的视频内容是具有MPEG2 TS(传输流)格式的流数据。在MPEG2 TS的流数据中，利用H.264/SVC编码的视频数据和音频数据被多路复用(multiplex)。假设利用H.264/SVC编码的视频数据包括被分层编码的具有30fps的帧率的视频数据和具有480fps的帧率的视频数据。H.264/SVC是已知的技术，因此在这里省略了其描述。

图1是示出根据第一实施例的视频回放设备100的配置的框图。蓄积单元101蓄积用作视频内容的流数据。流数据通过广播或者通信而被接收并且被蓄积在蓄积单元101中。

读取控制单元102读取蓄积在蓄积单元101中的MPEG2 TS的流数据并且将其输出到分离单元103。分离单元103将输入到其的流数据中的视频流数据和音频流数据彼此分离，并且将视频流数据和音频流数据输出到解码单元104。此外，分离单元103将与输出到解码单元104的视频流数据相同的视频流数据输出到帧率检测单元111。

解码单元104对输入到其的视频流数据和音频流数据进行解码，并且将解码后的视频数据输出到结合单元106并且将解码后的音频数据输出到音频输出单元105。从解码单元104输出的解码后的视频数据是以帧为单位的视频数据。解码单元104将以帧为单位的视频数据的帧率控制为60fps，使得帧率与显示面板的刷新速率同步。与从解码单元104输出的视频的回放有关的帧率(被称为回放帧率)不管输入的视频数据的帧率和视频数据的回放速度如何都总是恒定的。与此对比，由输入到解码单元104的视频初始保持的视频数据的帧率(被称为视频帧率)根据视频内容而变化。

音频输出单元105将解码后的音频数据输出到扬声器。扬声器可以被包括在视频回放设备内或者可以与其分离。

结合单元106根据需要执行将图形数据(诸如从控制单元108输出的菜单屏幕)与解码后的视频数据结合的处理。当然，在不必要结合图形数据时，解码后的视频数据通过结合单元106。视频输出单元107将从结合单元106输出的视频数据输出到显示面板。

控制单元108是控制整个视频回放设备100的控制单元，诸如CPU。特别地，控制单元108根据来自用户的指令或者视频回放设备100的内部状态来控制图形数据(诸如呈现给用户的菜单)的产生。此外，控制单元108执行产生图形数据的处理，并且将产生的图形数据输出到结合单元106。

在下述的慢回放操作中，在用户已经按压了在遥控(remotecontrol)中设置的慢回放按钮之后，控制单元108向回放速度确定单元110通知慢回放按钮已经被按压。为了描述简单，在图1中控制单元108仅仅连接到结合单元106和回放速度确定单元110，但是控制单元108还经由未示出的信号线连接到其它功能单元。

遥控信号接收单元109接收在用户操作遥控时输入的并且与来自用户的操作指令对应的遥控信号。

回放速度确定单元110确定视频数据的回放速度，并且将指示所确定的速度的控制命令输出到解码单元104。

帧率检测单元111分析从分离单元103输入的视频数据，并且检测输入的视频帧率的值。下面将描述由帧率检测单元111执行的检测视频帧率的值的处理。

由帧率检测单元111检测的视频帧率的值被输入到回放速度确定单元110。回放速度确定单元110根据输入到其的视频帧率的值将指示回放速度的控制命令输出到解码单元104。当用户经由遥控输入关于特殊回放(诸如快进、快退或慢回放)的指令时，回放速度确定单元110从已经接收该指令的输入的控制单元108接收与该指令的输入对应的控制信号。然后，回放速度确定单元110通过使用所接收的指令的输入、视频帧率以及关于当前回放速度的信息来确定与来自用户的指令对应的回放速度，并且将其作为控制命令输出到解码单元104。

(使用视频回放设备100回放视频数据的处理)

接下来，将给出关于使用上述视频回放设备100回放视频数据的操作的描述。

如上所述，假设通过广播或者通信接收的视频内容的流数据被蓄积在蓄积单元101中。当用户经由遥控提供回放视频内容的指令时，控制单元108响应于该指令指示读取控制单元从蓄积单元101读取由用户指定的视频内容。读取控制单元102基于来自控制单元108的指令从蓄积单元101读取指定的视频内容的传输流数据，并且将其输出到分离单元103。

分离单元103执行将输入到其的传输流数据中的视频流数据和音频流数据彼此分离的处理。由分离单元103分类的视频流数据被输入到解码单元104和帧率检测单元111。

帧率检测单元111分析输入到其的视频流数据并且检测视频流数据的帧率。所检测的视频帧率的值被输入到回放速度确定单元110。

回放速度确定单元110参考输入到其的视频帧率的值以及来自控制单元108的关于回放速度的指令的输入，并且将指示回放速度的控制命令发送到解码单元104。

例如，在作为对视频流数据分析的结果，视频流数据的帧率为60fps并且没有从控制单元108输入关于特殊回放的指令的情况下，可以确定用户期望以等于实时速度的速度回放。因此，视频数据可以以1×的速度被显示，以便在具有60Hz的刷新速率的显示面板上以等于实时速度的速度回放具有60fps的视频帧率的视频数据。然后，回放速度确定单元110将用于以1×的速度显示60fps的视频数据的控制命令发送到解码单元104。

响应于从回放速度确定单元110发送的控制命令，解码单元104将视频流数据解码成以帧为单位的视频数据，并且以所指定的回放速度回放解码后的帧图像。此外，解码单元104将所回放的视频数据输出到结合单元106。在以等于实时速度的速度显示60fps的视频数据的情况下，可以在没有使解码后的帧图像稀疏或者重复地输出帧图像的处理的情况下每秒输出60帧。也就是说，在该情况下，视频帧率匹配回放帧率，并且回放速度为1×的速度，并且因此对帧进行稀疏或者内插的处理是不必要的。

另一方面，在以等于实时速度的速度回放具有480fps的帧率的视频并且显示视频的情况下，每秒480帧不能被原样输出。因此，解码单元104从每秒480帧中提取60帧，并且将该60帧输出到结合单元106。因此，为了以等于实时速度的速度回放480fps的视频数据，与以60Hz显示所有帧的情况相比，以8×的速度执行回放。

另外，在提取60帧的处理中，简单地从每8帧中提取1帧，由此可以以规则的间隔从480帧中提取60帧。然而，当使用这种简单方法时，存在于所提取出的帧之间的七个帧中的动作信息被丢失，使得逐帧前进地显示视频。然后，为了防止动作信息的损失，解码单元104可以从480帧通过内插产生60帧。作为在这种情况中使用的产生方法，可以使用关于产生存储动作信息的帧的各种技术。

(在视频的回放期间慢回放速度的控制)

接下来，将给出关于在作为本发明的特征处理的慢回放处理期间的控制的描述。注意，在本发明中的慢回放处理除了沿回放方向的前进(向前方向)之外还包括沿倒带方向的后退(向后方向)。此外，在本实施例中，慢回放具有打开和关闭的两个选择。当慢回放被关闭时，以等于实时的速度执行回放。在慢回放的打开和关闭之间的选择通过按压遥控器的慢回放按钮来执行。也就是说，当在慢回放期间按压慢回放按钮时，执行用于关闭慢回放的控制。

此外，假设利用上述H.264/SVC标准对正在回放的视频内容进行编码，并且具有两种类型帧率(即480fps和30fps)的视频数据被包括作为视频数据。

图2是示出在回放视频内容的处理期间的控制的流程图。

首先，在步骤S201中，用户选择在蓄积单元101中蓄积的视频内容，并且向遥控输入回放所选择的视频内容的指令，由此控制单元108接收从遥控信号接收单元109输出的回放视频的指令。因此，控制单元108认识到遥控器的回放按钮已经被按压。

随后，确定被指定要被回放的视频内容的视频帧率。当视频内容不是具有H.264/SVC等形式的内容并且是具有一般的单一帧率的视频内容时，视频内容的帧率本身被用作视频帧率。例如，当视频内容具有60fps的单一帧率时，视频帧率自然是60fps。另一方面，在H.264/SVC的视频内容的情况下，对具有多个帧率的视频数据进行编码并且因此必须选择要被解码的视频帧率。各种方法可以被用来选择视频帧率，但是在本实施例中用于使用户选择视频帧率的方法被用来确定要被解码的视频帧率。可以由帧率检测单元111通过参考H.264/SVC的视频数据的头部(header)信息来获得视频内容的帧率。控制单元108通过使用关于该帧率的信息来产生用于选择帧率的UI，并且经由结合单元106使显示面板显示它。用户经由所显示的UI选择要被解码的视频帧率。

在视频帧率已经被确定之后，处理进行到步骤S203。在步骤S203中，回放速度确定单元110基于视频帧率的值确定等于实时速度的回放速度。如上所述，在60Hz的显示面板中视频内容具有60fps的要被解码的视频帧率的情况下，作为等于实时的速度的回放速度是1×的速度。另一方面，在480fps的视频内容的情况下，作为等于实时的速度的回放速度是8×的速度。

在步骤S204中，回放速度确定单元110将所确定的回放速度通知给解码单元104。解码单元104以与显示面板的刷新速率对应的60fps构造通过解码视频流数据获得的帧图像，从而实现指定的回放速度，并且将其输出到结合单元106。

在步骤S205中，控制单元108确定在以等于实时的速度回放视频期间是否从用户输入了慢回放的指令。当确定输入了慢回放的指令(在步骤S206中为是)时，控制单元108将该事实通知给回放速度确定单元110。

在步骤S206中，回放速度确定单元110参考根据视频帧率的值预先确定的慢回放的回放速度信息，并且执行确定与对应帧率的值对应的回放速度的处理。

图3是示出回放速度信息的概要的示图。回放速度信息是存储在存储单元(未示出)中的信息。在回放速度信息中，多种类型的慢回放时的回放速度与被假设为在可以由该视频回放设备回放的视频中可用的多个视频帧率的各个值关联。注意，回放速度指示在等于实时的速度为1×的速度的情况下的速度的倍率。回放速度确定单元110通过使用当前正被回放的视频的帧率的值和存储在存储单元中的慢回放的回放速度信息来确定要对当前正被回放的视频执行慢回放的回放速度。

根据要被解码的视频帧率的差别改变慢回放的回放速度的理由如下。与具有低视频帧率的视频(例如，30fps的视频数据)相比，具有高视频帧率的视频(例如，480fps的视频数据)每单位时间具有更大的帧数。因此，在执行慢回放的情况下，具有更高帧率的视频适于以低速回放。这是因为，在每单位时间具有更大帧数的视频中帧以更短间隔存在，并且即使在以低速回放视频时帧间的视频也可以被流畅地回放。在以更低速度更流畅地慢回放的情况下，用户可以看到在以一般速度慢回放中看不见的瞬间的视频。换句话说，如果不管帧率的差别都以恒定的慢回放速度执行慢回放，则不能充分地利用正在回放的视频的高帧率的优点。

自然，即使以与高帧率相同的非常低的慢回放速度回放具有低视频帧率的视频，也不能实现流畅的慢回放的显示，因为初始帧数较小。也就是说，通过根据视频帧率的差别使用适当的慢回放速度来执行慢回放，可以呈现对于用户更吸引人的慢回放视频。

在当前正被回放的视频的视频帧率的值为60fps的情况下，在回放速度信息中指定相对于实时1/2×的速度作为在慢回放时的回放速度。然后，回放速度确定单元110将用于提供以1/2×的速度执行回放的指令的控制命令发送到解码单元。也就是说，在两秒内回放60帧，并且因此1帧被重复地显示两次。在正在回放的视频的视频帧率的值为480fps的情况下，回放速度确定单元110将用于提供以相对于实时1/16×的速度执行回放的指令的控制命令发送到解码单元。以作为等于实时的速度的、8×的速度回放具有480fps的帧率的视频。因此，当以相对于实时1/16×的速度回放视频时，其意指以1/2×的速度回放视频。这对应于在16秒中显示每秒的480帧，并且1帧被重复地显示两次。

在步骤S207中，解码单元104执行当前正被回放的视频数据的输出帧的选择和内插、以及输出定时的调节，从而实现使用从回放速度确定单元110发送的控制命令通知的回放速度。因此，与视频帧率对应的慢回放视频可以被适应性地提供给用户。

在步骤S208中，控制单元108确定是否已经经由遥控输入了停止慢回放的指令。如果控制单元108确定已经输入了停止慢回放的指令，则处理回到步骤S204，在其中控制命令被发给解码单元104从而执行切换到以在步骤S203中由回放速度确定单元110确定的回放速度回放。

在步骤S209中，控制单元108确定在以等于实时的速度回放期间或者在慢回放期间是否输入停止视频的回放的指令。如果控制单元108确定已经输入了停止视频的回放的指令，则控制单元108将停止视频的回放的指令提供给各个功能单元(诸如读取控制单元102和解码单元104)，并且执行控制以使得没有视频被显示在显示面板上。

利用上述处理，根据正在回放的视频内容的帧率适应性地设定慢回放的速度，使得可以执行适合于视频内容的慢回放。

第二实施例

接下来，将描述本发明的第二实施例。在上述第一实施例中，根据视频数据的视频帧率预先确定优选的慢回放速度，并且在慢回放执行时通过根据正在回放的视频的视频帧率的值设定慢回放速度来执行慢回放。

与此对比，本实施例的特征在于，在其中可以自由地选择多个视频帧率的视频数据的慢回放的执行时通过选择具有更适合于慢回放的视频帧率的视频数据来执行慢回放。其中可以自由地选择多个视频帧率的视频数据的示例包括以H.264/SVC标准编码的视频数据，但是本实施例不限于此。例如，具有不同帧率的两个独立的视频流可以通过同步其回放位置在其之间切换的同时被回放。在任何情况下，根据第二实施例的视频回放设备是能够回放在具有相同内容和不同的视频帧率的值的多段视频数据之中的具有该视频帧率中的任何一个视频帧率的视频数据的设备。

根据第二实施例的视频回放设备的配置与图1中示出的根据第一实施例的视频回放设备的配置类似，并且因此省略了其描述。

图4是示出在根据第二实施例的回放视频内容的处理中的控制的流程图。

步骤S401到S405中的控制等于根据上述第一实施例的图2中的流程图中的步骤S201到S205中的控制，因此省略了其描述。

在步骤S406中，帧率检测单元111检测在正在回放的视频内容中的最高视频帧率的值。实质上，在步骤S402中检测帧率信息，并且因此优选的是在那时存储检测结果，并且在步骤S406中使用该信息。

将描述用于检测视频帧率的具体方法。图5是示出H.264/SVC的数据结构的示图。H.264/SVC的视频数据由称为“序列(sequence)”的单元形成。序列包括SPS(序列参数集)和AU(存取单元)。SPS是在其中描述了关于序列的编码的信息的头部。AU是通过对视频本身编码获得的数据。

在H.264/SVC中，作为对多层视频进行编码的机制，多个SPS可以被布置在一个序列中。也就是说，当通过使用在其中描述了低帧率信息的SPS执行解码时，可以执行解码以获得具有作为低帧率的第一帧率的视频。与此对比，当通过使用在其中描述了高帧率信息的SPS对AU解码时，可以执行解码以获得具有作为高帧率的第二帧率的视频。

帧率检测单元111检测在多个SPS的帧率信息中的最高帧率的值。在图5的情况下，480fps被检测出。这是被执行以检测具有更适合于慢回放处理的视频帧率的视频数据作为要对其执行慢回放处理的视频数据的处理。

在步骤S406中由帧率检测单元111检测的视频帧率的值被传送到回放速度确定单元110。

在步骤S407中，回放速度确定单元110通过使用最高帧率的值确定慢回放速度。该确定处理通过参考根据上述第一实施例的回放速度信息来执行。例如，由于最高帧率是480fps，因此慢回放速度被确定为1/16×的速度。

在步骤S408中，回放速度确定单元110确定是否通过对具有在步骤S406中检测的最高帧率的视频进行解码获得当前正被回放的视频。在步骤S403中在确定回放速度时获得关于当前正被回放的视频的视频帧率的信息。通过将信息存储在存储单元中，可以在步骤S408中使用该信息。

如果回放速度确定单元110确定当前正被回放的视频的帧率等于最高帧率，则处理进行到步骤S410。如果回放速度确定单元110确定帧率不等于最高帧率，则处理进行到步骤S409。

在步骤S409中，回放速度确定单元110指示解码单元104将要被解码的视频帧率变为最高帧率。具体地，回放速度确定单元110向解码单元104输出命令使用480fps的SPS对AU进行解码的命令。

在步骤S410中，解码单元104执行当前正被回放的视频数据的输出帧的选择和内插、以及输出定时的调节，从而实现使用从回放速度确定单元110发送的控制命令通知的回放速度。因此，与每个帧率对应的慢回放视频可以被提供给用户。

在本实施例中，将指定在步骤S407中确定的慢回放速度的控制命令从回放速度确定单元110发送到解码单元104。该命令包括以相对于实时1/16×的速度执行回放的指令。根据该指令，解码单元104对视频数据进行解码以使得其帧率为480fps，并且执行以60fps的回放帧率回放解码后的视频数据的处理，以便以1/16×的速度回放解码后的视频数据。在第一实施例中已经描述了用于实现1/16×的速度的方法，因此在本实施例中省略了其描述。

在步骤S411到S413中的处理类似于在第一实施例中描述的在步骤S208到S210中的处理，因此省略了其描述。

步骤S414是在步骤S411中控制单元108接收到停止慢回放的指令的输入时指示解码单元104将帧率变为在步骤S402中确定的视频帧率从而以等于实时的速度再次执行回放的处理。如果在执行慢回放之前视频帧率是最高帧率，其意指在步骤S402中确定的视频帧率是最高帧率，因此不必要执行步骤S414中的处理。在步骤S414中的处理之后，处理回到步骤S403。

根据本实施例，在可以通过从多个视频帧率之中选择任意视频帧率回放视频的情况下，可以选择适合于慢回放的视频帧率，并且可以以适合于视频帧率的回放速度执行慢回放。

在本实施例中，通过使用具有最高视频帧率的值的视频数据执行慢回放处理。可替代地，可以使用具有比以等于实时的速度正在回放的视频数据的帧率的值高的帧率的值的视频数据。这是因为，在对具有比以等于实时的速度正在回放的视频数据高的帧率的值的视频数据的段执行以相同慢回放速度的慢回放时，可以对具有更高帧率的那段执行更流畅的慢回放。

在上述实施例中的每一个中，帧率检测单元111从视频数据检测帧率的值，但是可以从关于视频的元数据检测该值。具体地，可以从在MPEG2TS上多路复用的片段(section)数据检测帧率的值。在该情况下，分离单元103从MPEG2TS分离片段数据(诸如PSI/SI)，并且将其输出到帧率检测单元111。帧率检测单元111可以分析输入的片段数据以检测帧率的值。

另外，在上述实施例中的每一个中，通过参考预先确定的回放速度信息执行慢回放速度的确定。可替代地，可以使用帧率的值通过计算获得慢回放速度。例如，可以通过将预先确定的值除以获得的视频帧率的值来确定慢回放速度。例如，预先确定的值是30。该值被定义为在慢回放期间每秒显示的视频的帧数。也就是说，定义在任何视频帧率时使用每秒30帧执行回放。在视频帧率是60fps时，30÷60＝1/2，因此以1/2×的速度执行慢回放。另一方面，在视频帧率是480fps时，30÷480＝1/16，因此以1/16×的速度执行慢回放。以这种方式，可以在计算处理中确定与视频帧率对应的慢回放速度。

第三实施例

接下来，将描述本发明的第三实施例。在上述第一和第二实施例中，根据视频帧率设定一个慢回放速度。然而，可以设定多个慢回放速度，并且可以通过用户操作改变慢回放速度。

图6是指定根据各个视频帧率预先确定的慢回放速度的回放速度信息。与图3中示出的回放速度信息相比指定了多个慢回放速度。此外，分开地指定初始慢回放速度，其被设为在以等于实时的速度执行回放的状态中开始执行慢回放时的默认慢回放速度。

例如，在对具有480fps的视频帧率的视频数据执行慢回放的情况下，由回放速度确定单元110向解码单元104首先指定的慢回放速度是相对于实时1/16×的速度。当在正在执行以1/16×的速度的慢回放的同时用户经由遥控执行预先确定的操作时，可以选择除1/16×的速度以外的慢回放速度(1/2×的速度、1/4×的速度、1/8×的速度或者1/24×的速度)。

可以利用在其中当用户按压遥控的慢回放按钮时沿低速方向或者高速方向顺序地切换慢回放速度的配置来实现慢回放速度的选择。当在选择1/2×的速度之后再次按压慢回放按钮时，执行切换以使得以1/24×的速度执行慢回放，使得可以利用简单的操作选择用户期望的慢回放速度。

图7是示出慢回放速度的切换控制的流程图。该流程图与在图2中示出的第一实施例中的流程图的步骤S207和图4中示出的第二实施例中的流程图的步骤S410中执行的内部处理对应。

另外，假设在作为在执行根据该流程图的控制之前的步骤的步骤S206或者步骤S407中，选择在确定的视频帧率中的初始慢回放速度并且执行慢回放。例如，在第一实施例中，当正在回放的视频的视频帧率是60fps时，以1/2×的速度执行慢回放。在第二实施例中，当最高帧率是480fps时，以1/16×的速度执行慢回放。

在步骤S701中，控制单元108根据来自接收遥控信号的遥控信号接收单元109的通知确定用户是否已经经由遥控输入了改变慢回放速度的指令。如果控制单元108确定已经接收了改变慢回放速度的指令，则控制单元108将该信息通知给回放速度确定单元110。

在步骤S702中，回放速度确定单元110针对正在对其执行慢回放的视频的视频帧率参考存储在存储单元中的图6中示出的回放速度信息。

在步骤S703中，回放速度确定单元110通过使用参考的回放速度信息确定是否对于正在对其执行慢回放的视频的视频帧率设定了与当前慢回放的回放速度不同的其它慢回放速度。作为在步骤S703中的确定的结果，如果确定不存在其它慢回放速度，则处理进行到步骤S706。回放速度确定单元110将用于提供将指示慢回放速度不能改变的UI与视频结合的指令的信息通知给控制单元108。已经接收该信息的控制单元108产生指示慢回放速度不能改变的UI，并且将其输出到结合单元106。结合单元106将由控制单元108产生的UI与已经输入到结合单元106的视频结合。

如果回放速度确定单元110在步骤S703中确定设定了与当前慢回放的回放速度不同的其它慢回放速度，则处理进行到步骤S704。

在步骤S704中，回放速度确定单元110根据在回放速度信息中指定的慢回放速度的选择顺序来选择紧接在当前慢回放速度之后要被选择的慢回放速度。关于选择顺序的信息未被示出在图6中的回放速度信息中，但是优选地该选择顺序是慢回放速度的升序。因此，在480fps的视频帧率中当前选择的慢回放速度是1/16×的速度的情况下，紧接在该回放速度之后应该被选择的慢回放速度是1/8×的速度。

在步骤S705中，回放速度确定单元110将控制命令发送到解码单元104以便以在步骤S704中确定的慢回放速度回放视频数据。

在本实施例中，根据视频帧率的值设定适合于视频帧率的多个慢回放速度，并且允许用户任意地选择慢回放速度。因此，可以提供对于用户更方便的视频回放设备。此外，即使在存在多个慢回放速度的情况下，也设定在向慢回放转变时应用的初始慢回放速度作为适合于视频的帧率的慢回放速度。因此，具有适合于帧率的慢回放速度的慢动作视频可以在没有多次改变慢回放速度的情况下向用户呈现。

另外，在上述实施例中的每一个中描述的要素和处理可以作为硬件、软件或者其组合被装载。用于装载那些要素和处理的部分或者全部的软件(程序)以及存储该软件的存储介质被包括在本发明的范围内。

Claims

1.一种视频回放设备，能够对蓄积在蓄积单元中的视频数据执行慢回放处理，能够以与实时速度对应的速度回放视频数据，并且能够从具有相同内容且具有不同的帧率的值的多段视频数据之中选择具有该帧率中的任何一个帧率的一段视频数据并且回放该段视频数据，所述视频回放设备包括：

检测装置，用于在视频数据的慢回放处理执行时检测是否存在具有比以与实时速度对应的速度回放的视频数据的帧率高的帧率的值并且具有与回放的视频数据相同的内容的视频数据；

确定装置，用于在所述检测装置检测到存在具有更高帧率的值并且具有相同内容的视频数据的情况下基于视频数据的帧率的值来确定要在对视频数据执行慢回放处理中使用的慢回放速度；以及

回放装置，用于通过使用由所述确定装置确定的慢回放速度来对具有更高的帧率的值的视频数据执行慢回放处理。

2.根据权利要求1所述的视频回放设备，

其中在具有更高帧率的值的视频数据包括多段视频数据的情况下，

所述确定装置确定要在对所述多段视频数据中的具有最高帧率的值的一段视频数据执行慢回放处理中使用的慢回放速度，并且

所述回放装置对所述多段视频数据中的具有最高帧率的值的该段视频数据执行慢回放处理。

3.根据权利要求1或2所述的视频回放设备，

其中所述确定装置通过使用在其中要在执行慢回放处理中使用的至少一个慢回放速度与可用作视频数据的帧率的多个值中的每一个关联的回放速度信息来确定要对其执行慢回放处理的视频数据的慢回放速度。

4.根据权利要求3所述的视频回放设备，

其中，在回放速度信息中多个慢回放速度与可用作视频数据的帧率的值关联的情况下，所述多个慢回放速度是在对具有关联的帧率的视频数据执行慢回放处理时能够根据来自用户的指令的输入选择的慢回放速度。

5.一种用于控制视频回放设备的方法，所述视频回放设备能够对蓄积在蓄积单元中的视频数据执行慢回放处理，能够以与实时速度对应的速度回放视频数据，并且能够从具有相同内容且具有不同的帧率的值的多段视频数据之中选择具有该帧率中的任何一个帧率的一段视频数据并且回放该段视频数据，所述方法包括如下步骤：

检测步骤，在视频数据的慢回放处理执行时检测是否存在具有比以与实时速度对应的速度回放的视频数据的帧率高的帧率的值并且具有与回放的视频数据相同的内容的视频数据；

确定步骤，在所述检测步骤中检测到存在具有更高帧率的值并且具有相同内容的视频数据的情况下基于视频数据的帧率的值来确定要在对视频数据执行慢回放处理中使用的慢回放速度；以及

回放步骤，通过使用在所述确定步骤中确定的慢回放速度来对具有更高的帧率的值的视频数据执行慢回放处理。

6.根据权利要求5所述的用于控制视频回放设备的方法，

所述确定步骤确定要在对所述多段视频数据中的具有最高帧率的值的一段视频数据执行慢回放处理中使用的慢回放速度，并且

所述回放步骤对所述多段视频数据中的具有最高帧率的值的该段视频数据执行慢回放处理。

7.根据权利要求5或6所述的用于控制视频回放设备的方法，

其中所述确定步骤通过使用在其中要在执行慢回放处理中使用的至少一个慢回放速度与可用作视频数据的帧率的多个值中的每一个关联的回放速度信息来确定要对其执行慢回放处理的视频数据的慢回放速度。

8.根据权利要求7所述的用于控制视频回放设备的方法，

9.一种视频回放设备，能够回放视频数据，所述视频回放设备包括：

回放装置，能够通过使用慢回放速度执行慢回放，每个慢回放速度根据视频数据的帧率的类型来确定，

其中慢回放速度被确定为使得以与第二帧率对应的慢回放速度的慢回放能够用比以与第一帧率对应的慢回放速度的慢回放更低的速度被执行，第二帧率比第一帧率高。

10.根据权利要求9所述的视频回放设备，还包括：

存储单元，存储回放速度信息，在所述回放速度信息中用于执行慢回放处理的至少一个慢回放速度与可用作视频数据的帧率的多个值中的每一个关联；

回放速度确定单元，通过使用所述存储单元所存储的所述回放速度信息，根据要回放的视频数据的帧率的类型来确定慢回放速度。

11.一种用于控制能够回放视频数据的视频回放设备的方法，所述方法包括如下步骤：

回放步骤，能够通过使用慢回放速度执行慢回放，每个慢回放速度根据视频数据的帧率的类型来确定，

12.根据权利要求11所述的方法，还包括：

存储回放速度信息，在所述回放速度信息中用于执行慢回放处理的至少一个慢回放速度与可用作视频数据的帧率的多个值中的每一个关联；

通过使用所存储的回放速度信息，根据要回放的视频数据的帧率的类型来确定慢回放速度。