CN102984449B - 能控制再生速度的运动图像再生装置 - Google Patents

Abstract

本发明提供一种能控制再生速度的运动图像再生装置。该运动图像再生装置具备：再生单元(11)，其再生运动图像；设定单元(19)，其在由所述再生单元进行再生中的运动图像帧内设定规定的区域；检测单元(9)，其检测在所述规定的区域内是否包含规定的被摄体；选择单元(10)，其根据所述检测单元的检测定时来切换选择第1再生速度和第2再生速度；和控制单元(10)，其按照所述选择单元的选择结果来控制所述再生单元的再生速度。

Description

能控制再生速度的运动图像再生装置

技术领域

本发明涉及运动图像再生装置、运动图像再生方法以及存储了程序的记录介质，详细而言涉及能控制在运动图像再生时可快进地发现关注场景的再生速度的运动图像再生装置、运动图像再生方法以及存储了程序的记录介质。

背景技术

在体育运动的练习中经常采用运动图像摄影。例如，以运动图像来拍摄高尔夫球的挥杆，当场再生并确认影像。亲眼观看并判断挥杆的好坏，从而能够进行有效的练习。

然而，在被摄体本身进行摄影的情况下，需要：首先(i)在照相机的旁边进行摄影的开始操作，(ii)在返回到摄影地点进行了所需的运动(如果为高尔夫球则为挥杆)之后，(iii)再次在照相机的旁边进行摄影的停止操作。这种情况下，存在下述不良情况：在运动图像的前后会进入无用的摄影场景……(i)的场景和(iii)的场景……。

为了避免这种不良情况，例如在下述的专利文献1中公开了如下技术：判定在摄影中的影像的规定的区域内是否包含规定的被摄体，并在该判定结果为肯定的情况下进行影像的记录。

由此，例如若以之前高尔夫球练习为例，则由于在摄影范围进入了进行高尔夫球挥杆的被摄体之时开始了影像的记录，所以能够进行尽量不包含无用场景的高尔夫球练习的运动图像记录。

专利文献1：日本特开2010-252141号公报

然而，专利文献1的技术是考虑运动图像的“摄影时”而不是考虑运动图像的“再生时”的技术。为此，例如在想要发现并再生运动图像的关注场景的情况下，存在着必须进行快进等麻烦操作的问题。

因而，期望在运动图像再生时快进地发现关注场景。

发明内容

本发明的一个方式是能控制再生速度的运动图像再生装置，其特征在于具备：

再生单元，其再生运动图像；

设定单元，其在由所述再生单元进行再生中的运动图像帧内设定规定的区域；

检测单元，其检测在所述规定的区域内是否包含规定的被摄体；

选择单元，其根据所述检测单元的检测定时来切换选择第1再生速度和第2再生速度；和

控制单元，其按照所述选择单元的选择结果来控制所述再生单元的再生速度。

另外，本发明的另一方式是能控制再生速度的运动图像再生装置的控制方法，其特征在于包括：

再生步骤，再生运动图像；

设定步骤，在由所述再生步骤进行再生中的运动图像帧内设定规定的区域；

检测步骤，检测在所述规定的区域内是否包含规定的被摄体；

选择步骤，根据所述检测步骤的检测定时来切换选择第1再生速度和第2再生速度；和

控制步骤，按照所述选择步骤的选择结果来控制所述再生步骤的再生速度。

此外，本发明的另一方式是记录了能控制再生速度的运动图像再生装置的控制程序的记录介质，其特征在于记录了使运动图像再生装置的计算机作为下述单元发挥功能的程序：

再生单元，其再生运动图像；

设定单元，其在由所述再生单元进行再生中的运动图像帧内设定规定的区域；

检测单元，其检测在所述规定的区域内是否包含规定的被摄体；

选择单元，其根据所述检测单元的检测定时来切换选择第1再生速度和第2再生速度；和

控制单元，其按照所述选择单元的选择结果来控制所述再生单元的再生速度。

附图说明

图1是实施方式涉及的运动图像再生装置的构成图。

图2是运动图像再生装置1的功能示意图。

图3是表示运动图像再生装置1的动作流程的图。

图4是运动图像再生装置1的作用说明图。

图5A-C是在实用方面优选的实施方式的说明图。

图6是增加了关注区域17和被摄体指定框18的设定功能的运动图像再生装置1的功能示意图。

图7是表示实施方式的其他例子的图。

具体实施方式

以下，参照附图来说明本发明的实施方式。

图1是实施方式涉及的运动图像再生装置的构成图。在该图中，运动图像再生装置1具有：运动图像输入部3，其取入运动图像数据2；操作部4，其用于进行运动图像再生时所需的各种操作；控制部5，其由计算机构成；液晶显示器等的显示部6；触摸面板7，其覆盖该显示部6的画面来进行安装。此外，显示部6和触摸面板7也可以是位于运动图像再生装置1外部的外部元件。

控制部5由CPU5a、ROM5b、RAM5c以及未图示的外围电路构成，是通过将存储于ROM5b的控制程序等的软件加载到RAM5c中并由CPU5a执行，从而总括控制该运动图像再生装置1的各部的动作的程序控制方式的控制要素。

此外，图示的运动图像再生装置1既可以如影像播放器那样以单体的方式动作(以下称为单体型)，或者也可以组合到任意的电子设备中(以下称为组合型)。作为任意的电子设备，例如考虑数码摄像机、或附带运动图像摄影功能的数码照相机、便携电话机等，但并不限定于这些电子设备。只要是能再生并显示运动图像数据的电子设备即可，例如可以是个人计算机(无论是固定型还是便携型均可)等。

图2是运动图像再生装置1的功能示意图。在该图中，运动图像再生装置1具有通过存储于控制部5的ROM5b中的软件和CPU5a等的硬件的有机结合来实现的几个功能。

第一个功能是输入任意的运动图像数据(参照图1的运动图像数据2)的“运动图像输入”(相当于图1的运动图像输入部3)。以下，设该功能是指运动图像输入部8，该运动图像输入部8以介质传送或电缆、无线的方式取入并输入预先由其他设备拍摄到的运动图像数据(也称为运动图像文件)(单体型的情况)、或者输入由未图示的照相机部拍摄并记录到的运动图像数据(组合型的情况)。

第二个功能是从运动图像数据之中检测规定的被摄体的功能。设该功能是指被摄体检测部9。被摄体检测部9主要是在控制部5中由软件实现的功能。规定的被摄体例如可以是人物的脸。在设为人物的脸的情况下，能够应用公知的脸识别技术。

第三个功能是对运动图像再生时的再生速度进行变更的功能。设该功能是指再生速度变更部10。与被摄体检测部9同样地，该再生速度变更部10也是主要在控制部5中由软件实现的功能。

再生速度是指每单位时间(一般是指1秒)再生几幅构成运动图像的单位图像(称为帧或画面)。将标准的再生速度称为“等速”，等速再生是指以与运动图像的记录速度(一般是指每1秒30帧)相同的速度进行再生。另外，将以等速的n倍(其中，n＞1)的速度进行再生的情形称为“快进”，相反地将等速的n倍(其中，n＜1)的速度进行再生的情形称为“慢放”。或者，将在任意的场景中再生速度为0的情形称为“暂时停止”。

再生速度变更部10由此可以变更成“等速”、“快进”、“慢放”或“暂时停止”的各种再生速度，但是在这里为了简化说明，假定可变更成“等速”和“快进”这两个再生速度，并且由被摄体检测部9没有检测到规定的被摄体的情况下，变更成“快进”的再生速度，并且在由被摄体检测部9检测到规定的被摄体的情况下，变更成“等速”的再生速度。

也就是说，没有检测到规定的被摄体→设定为“快进”，检测到规定的被摄体→设定为“等速”。

第四个功能是以规定的再生速度(快进或等速)再生被输入至运动图像输入部8的运动图像数据的功能，以下设将该功能是指运动图像再生部11，该运动图像再生部11以与再生速度变更部10的输出(快进或等速)相应的再生速度来再生并显示运动图像数据。

图3是表示运动图像再生装置1的动作流程的图。在该流程中，运动图像再生装置1首先取入运动图像数据(步骤S1)，开始运动图像再生(步骤S2)，按照每个再生帧来判定在该运动图像中是否包含规定的被摄体(步骤S3)。

并且，若在运动图像中不包含规定的被摄体(步骤S3的“否”判定)，则变更成相当于上述的“快进”的第1再生速度(步骤S4)，再次返回到步骤S3，另一方面，若在运动图像中包含规定的被摄体(步骤S3的“是”判定)，则变更成相当于上述的“等速”的第2再生速度(步骤S5)，进而判定是否为运动图像的结束(终端)(步骤S6)。

接着，如果不是运动图像的结束，则再次返回到步骤S3，如果是运动图像的结束，则停止运动图像再生(步骤S7)，之后结束流程。

图4是运动图像再生装置1的作用说明图。在该图中，考虑一个人物12从横轴的左端走到右端的情景，并对该情景进行运动图像摄影。

其中，运动图像的摄影范围13设为在横轴的中央附近被绘制的虚线的横宽矩形框内。运动图像的摄影开始为横轴的左端附近，摄影结束为横轴的右端附近。

在这种情况下，由于运动图像的摄影范围13为横轴的中央附近，所以在运动图像数据的前1/3部分(A部)和后1/3部分(C部)没有拍到人物12。也就是说，人物12只在中央的1/3部分(B部)被拍到，所以在再生了相关的运动图像数据的情况下，(A部)和(C部)的再生是无用的。此时，虽然一般进行快进等的操作，但是却费时且麻烦。

因此，在实施方式的运动图像再生装置1中，在运动图像数据不包含规定的被摄体(图4的人物12)的情况下，将再生速度设为第1再生速度，在包含被摄体的情况下，将再生速度设为第2再生速度，并将各个再生速度设为“第1再生速度→快进、第2再生速度→等速”，由此能够减少无用再生所需的时间，能够快速地发现关注场景(B部)。

如以上，关于实施方式中的技术思想的原理，以在运动图像数据的再生时如果在该运动图像数据中不包含规定的被摄体则设为第1再生速度，而如果在该运动图像数据中包含规定的被摄体则设为第2再生速度作为基础，优选将第1速度设为相当于快进的再生速度，将第2再生速度设为相当于等速的再生速度，由此能够减少上述课题、即无用再生所需的时间，能够快速地发现关注场景，但是并不限定于此，从实用性的观点出发也可例如下述那样。

图5是在实用上优选的实施方式的说明图。例如，在高尔夫球练习中，球15碰撞杆头14的瞬间(撞击的瞬间)是确认挥杆的重要一点。一般，在再生整个挥杆的运动图像之中，在撞击(inpact)的瞬间进行慢放或暂时停止的操作，但是操作麻烦且操作性差。

因此，提议自动地检测撞击的瞬间并能变更成期望的再生速度的结构。首先，用户操作触摸面板7，并在显示部6的画面16的任意位置处设定关注区域17。关注区域17是指在该区域中进入了被摄体之时用于将再生速度变更成规定的速度的检测窗。

现在，将被摄体设为杆头(club head)14，该杆头14进入关注区域17之前的再生速度为第1再生速度，该杆头14进入关注区域17之后的再生速度为第2再生速度，并且设定“第1再生速度→快进、第2再生速度→等速”。

这样一来，从(a)的挥杆顶点到(b)的撞击之前成为快进再生，从(b)的撞击到(c)的随球动作(follow-through)成为等速再生，所以能够减少(a)的场景的无用再生所需的时间，且能够迅速地找到(b)的关注场景的开头，从而能够使用(b)～(c)的场景来进行挥杆确认。

此外，在以上的说明中，由于将规定的被摄体设为杆头14，所以需要用于对杆头14进行图像识别来检测的结构。作为这种结构，例如，如(a)所示，考虑设定用于指定杆头(虽然在该图中为杆头，但是这只是一例。可以是任意的被摄体部分。)的被摄体指定框18。也可将被摄体指定框18中所包含的图像(这里是指杆头14)作为基准图像来登记，按每个帧来检测并追踪与该基准图像对应的图像。这样一来，能够从(a)的挥杆顶点至(c)的随球动作检测并追踪作为被摄体的杆头14，能够在杆头14进入关注区域17之后变更成规定的再生速度。

另外，通过在杆头以外的任意的被摄体部分设定被摄体指定框18，从而可以将任意的被摄体部分作为追踪对象。

另外，在高尔夫球挥杆的情况下，不仅撞击之后，撞击之前的规定时间也很重要，为了应对这种情况，也可将在运动图像再生中进行被摄体部分的检测的定时、和显示被再生的图像的定时错开，仅在检测定时之前的规定时间内变更成再生速度(从检测定时追溯至过去而变更成再生速度)。

也就是说，变更再生速度的定时不仅是被摄体进入关注区域17之后，也可以设定为被摄体进入关注区域17之前的规定时间，或者设定为被摄体进入关注区域17之前后的规定时间。

以图5的例子进行说明，也可将杆头14进入关注区域17的规定时间之前的再生速度设为第1再生速度，从此时间点起将再生速度切换成第2再生速度，从杆头14进入关注区域17起到规定时间之后将再生速度维持在第2再生速度，从该时间点起再次将再生速度切换成第1再生速度。

这样一来，因为从(a)的挥杆顶点到(b)的撞击的稍前成为快进再生，(b)的撞击的前后成为等速再生，(c)的随球动作以后成为快进再生，所以能够减少(a)、(c)的场景的无用再生所需的时间，并且能够使用(b)的关注场景快速地进行挥杆确认。

这种情况下，用户可以个别地设定前面的规定时间和后面的规定时间。

另外，关于杆头14的检测、追踪以及用于检测是否进入关注区域17的处理，虽然是逐次检测杆头14的位置坐标，追踪被逐次检测的位置坐标的变化，检测追踪中的位置坐标是否进入关注区域17的区域坐标内，但是也可如下述那样不包括追踪动作。

也就是说，也可以仅对关注区域17的区域坐标内逐次进行图像识别，并检测杆头14是否进入关注区域17的区域坐标内。

图6是增加了关注区域17和被摄体指定框18的设定功能的运动图像再生装置1的功能示意图。在该图中，与前面的图2不同之处在于：增加了都主要在控制部5中由软件实现的关注区域的设定功能(以下称为关注区域设定部19)、和被摄体指定框的设定功能(以下称为被摄体指定框设定部20)。

关注区域设定部19检测对触摸面板7进行的用户的触摸操作，在显示部6的画面16的触摸位置处设定关注区域17(参照图5)，另外被摄体指定框设定部20同样地检测用户的触摸操作，在显示部6的画面16的触摸位置处设定被摄体指定框18(参照图5)。被摄体检测部9检测在关注区域17中是否包含规定的被摄体，或者在由被摄体指定框18指定了被摄体的情况下，将该被摄体作为规定的被摄体进行检测、追踪。

另外，在以上的实施方式中，虽然分别设定关注区域17和被摄体指定框18，但是也可如下那样。

图7是表示实施方式的其他例子的图。在该图中，在球15的附近握住杆头14摆出击球姿势的状态下，因为杆头14位于关注区域17的区域内，所以也可与关注区域17的设定同时地设定位于该关注区域17的区域内的针对杆头14的被摄体指定框18。这样，能够与关注区域17的设定同时地设定被摄体指定框18，能够简化设定操作，故优选。

另外，在以上的说明中，直到规定的被摄体进入关注区域17的期间，将再生速度维持在第1再生速度，并将该第1再生速度设定为相当于快进的“一定的再生速度”，但是并不限于此，例如也可与规定的被摄体的运动速度相匹配地对第1再生速度进行“可变设定”。也就是说，第1再生速度的目的在于减少无用再生所需的时间，所以也可设为规定的被摄体的运动速度越慢则第1再生速度越快(跳过的帧数越多)。

另外，在想要慢速再生关注场景的情况下，也可将第1再生速度设为等速，在所指定的被摄体部分进入关注区域17之后变更成慢放。

此外，在以上的说明中，虽然“在规定的被摄体进入关注区域17之时变更再生速度”，但是并不限于此。也可在运动图像再生的开始时在规定的被摄体已经进入关注区域17的情况下，等到该被摄体从关注区域17离开之后，进行所述的再生速度的变更、即“在规定的被摄体进入关注区域17之时变更再生速度”这一动作。

Claims (9)

1.一种运动图像再生装置，其特征在于，具备：

再生单元，其再生运动图像；

设定单元，其在由所述再生单元进行再生中的运动图像帧内设定规定的区域；

指定单元，其指定被摄体；

追踪单元，其追踪由所述指定单元所指定的被摄体；

检测单元，其通过所述追踪单元的追踪来检测在由所述设定单元所设定的所述规定的区域内是否包含被指定的所述被摄体；

确定单元，其确定所述检测单元的检测定时；

选择单元，其根据由所述确定单元所确定的检测定时来切换选择第1再生速度和第2再生速度；和

控制单元，其按照所述选择单元的选择结果来控制所述再生单元的再生速度。

2.根据权利要求1所述的运动图像再生装置，其特征在于，

所述设定单元基于用户操作而在所述运动图像帧内的任意的位置处设定所述规定的区域。

3.根据权利要求2所述的运动图像再生装置，其特征在于，

所述第1再生速度是相当于快进的再生速度，所述第2再生速度是相当于等速再生或慢放再生或暂时停止的再生速度。

4.根据权利要求3所述的运动图像再生装置，其特征在于，

所述选择单元在包括所述检测单元的检测定时在内的规定期间中选择所述第2再生速度，在除此之外的期间中选择所述第1再生速度。

5.根据权利要求1所述的运动图像再生装置，其特征在于，

所述指定单元基于用户操作而将存在于所述运动图像帧内的任意的被摄体指定为所述规定的被摄体。

6.根据权利要求5所述的运动图像再生装置，其特征在于，

所述追踪单元追踪由所述指定单元所指定的任意的被摄体。

7.根据权利要求1所述的运动图像再生装置，其特征在于，

所述运动图像再生装置还具备可变单元，该可变单元与由所述追踪单元所追踪的被摄体的运动速度相匹配地对所述第1再生速度进行可变设定。

8.根据权利要求1所述的运动图像再生装置，其特征在于，

所述检测单元在由所述再生单元开始运动图像再生时，在所述规定的区域内包含规定的被摄体的情况下，在等到该被摄体从所述规定的区域离开之后，执行检测在所述规定的区域内是否包含规定的被摄体的检测动作。

9.一种运动图像再生方法，其特征在于，包括：

再生步骤，再生运动图像；

设定步骤，在由所述再生步骤进行再生中的运动图像帧内设定规定的区域；

指定步骤，指定被摄体；

追踪步骤，追踪由所述指定步骤所指定的被摄体；

检测步骤，通过所述追踪步骤的追踪来检测在由所述设定步骤所设定的所述规定的区域内是否包含被指定的所述被摄体；

确定步骤，确定所述检测步骤的检测定时；

选择步骤，根据由所述确定步骤所确定的检测定时来切换选择第1再生速度和第2再生速度；和

控制步骤，按照所述选择步骤的选择结果来控制所述再生步骤的再生速度。