CN101290787A - 改变视频回放速度比率 - Google Patents
改变视频回放速度比率 Download PDFInfo
- Publication number
- CN101290787A CN101290787A CNA2008100910745A CN200810091074A CN101290787A CN 101290787 A CN101290787 A CN 101290787A CN A2008100910745 A CNA2008100910745 A CN A2008100910745A CN 200810091074 A CN200810091074 A CN 200810091074A CN 101290787 A CN101290787 A CN 101290787A
- Authority
- CN
- China
- Prior art keywords
- digital video
- speed ratio
- key frame
- playback speed
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008859 change Effects 0.000 claims abstract description 79
- 238000000034 method Methods 0.000 claims abstract description 41
- 230000011218 segmentation Effects 0.000 claims description 123
- 230000007704 transition Effects 0.000 claims description 83
- 230000003068 static effect Effects 0.000 claims description 36
- 238000004891 communication Methods 0.000 claims description 7
- 230000003993 interaction Effects 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 abstract description 11
- 230000014509 gene expression Effects 0.000 abstract description 4
- 230000002045 lasting effect Effects 0.000 abstract 2
- 230000006870 function Effects 0.000 description 42
- 238000004590 computer program Methods 0.000 description 14
- 239000012634 fragment Substances 0.000 description 11
- 230000001133 acceleration Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 230000001105 regulatory effect Effects 0.000 description 10
- 241001481833 Coryphaena hippurus Species 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 239000003550 marker Substances 0.000 description 7
- 238000003825 pressing Methods 0.000 description 4
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 208000036693 Color-vision disease Diseases 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 201000007254 color blindness Diseases 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000001550 time effect Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/005—Reproducing at a different information rate from the information rate of recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/326—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is a video-frame or a video-field (P.I.P.)
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
Abstract
本公开内容包括涉及改变视频回放速度比率的系统和技术。通常,本说明中所描述主题的一个方面可以在一种包括以下步骤的方法中实现:提供用于数字视频编辑系统的用户界面,该用户界面包括数字视频序列的回放速度比率和回放持续时间的图形表示,并且该用户界面包括指向该数字视频序列中各自帧的已定义点;接收指明数字视频序列的回放速度比率的改变的输入;以及显示数字视频序列的回放速度比率的改变以及对应的回放持续时间的改变,该显示包括根据已定义点中的一个点所指向的对应帧的新时间位置来移动已定义点中的那个点。
Description
相关申请交叉引用
本申请涉及与本申请同一天提交的(代理卷号No.07844-818001/P718)Paul E.Young的名称为“GENERATING TRANSITIONS FORREMAPPING VIDEO PLAYBACK TIME”的申请号待定的美国专利申请,并涉及与本申请同一天提交的(代理卷号No.07844-835001/P737)David Kuspa的名称为“INDICATING DIFFERENT VIDEOPLAYBACK RATES”的申请号待定的美国专利申请。在此通过参考引入上述申请的全部公开内容。
技术领域
本公开内容涉及在数字视频编辑系统中改变视频回放速度比率(rate)和回放时间。
背景技术
存在将源媒体帧映射到输出媒体帧的各种时间重映射方法。时间重映射(也称为可变速度回放)包括动态控制视频片段的速度、以及在向前和反向回放两者中的速度范围以及冻结帧之间交替。通常,时间重映射软件特征使用速度/速率图,其中设置有控制点,并且类贝塞尔曲线指示在控制点之间的回放速度和方向。每个控制点可以在图中移动,允许视频编辑者来控制该控制点处的回放速度比率。在每次这种控制点移动之后,重新计算连接控制点的类贝塞尔曲线,由此确定控制点之间的回放速度(和方向)。此外,为了帮助区分各种回放速度比率,用于时间重映射特征的至少一个用户界面已经包括直的、竖直的等值标记(tic mark),其间隔较为紧密或较为稀疏以指示减速或加速,并且包括红色等值标记以指示反向回放方向。
发明内容
本说明书描述的技术涉及在数字视频编辑系统中改变视频回放速度比率和回放时间。通常,本说明书中所描述主题的一个方面可以在一种包括以下步骤的方法中实现:提供用于数字视频编辑系统的用户界面,该用户界面包括数字视频序列的回放速度比率和回放持续时间的图形表示,并且该用户界面包括指向该数字视频序列中各个帧的已定义点;接收指明数字视频序列的回放速度比率的改变的输入;以及显示数字视频序列的回放速度比率的改变以及对应的回放持续时间的改变,该显示包括根据所述已定义点中的一个点所指向的对应帧的新时间位置来移动所述已定义点中的所述一个点。这方面的其他实施方式包括对应的系统、装置和计算机程序产品。
这些和其他实施方式可以可选地包括以下特征中的一个或多个。提供所述用户界面包括提供时间线界面,该时间线界面包括重叠在该时间线界面的轨道中的轨道项之上的图形表示,该轨道项对应于数字视频序列,该图形表示在这样的图中包括回放速度比率的线图(plot),该图具有代表回放持续时间的横轴和代表回放速度比率的纵轴,以及接收指明回放速度比率的改变的输入包括接收由对该线图的分段执行的拖拽操作所定义的输入。移动所述已定义点中的所述一个点包括移动时间线界面中的轨道项的结束点,并且在所述结束点移动超过所述轨道中的下一个轨道项的开始点时,裁剪(trim)时间线界面中的所述轨道项。
所述方法可以包括接收定义第一关键帧点的输入,该第一关键帧点指向所述数字视频序列中的特定帧,所述已定义点包括该第一关键帧点,以及其中所述移动包括移动该第一关键帧点以及所述已定义点中的所述一个点。所述方法可以包括:接收定义第二关键帧点的输入,该第二关键帧点指向数字视频序列中的其他帧,所述已定义点包括该第二关键帧点,以及描述数字视频序列的至少三个不同的分段,所述至少三个不同分段中的每一个具有来自数字视频序列的对应的帧子集;接收指定回放速度比率的改变的输入包括接收对所述至少三个不同分段中的一个分段的回放速度比率的调节;对于所述至少三个不同分段中的所有分段,维护分段与帧的对应关系,同时对所述至少三个不同分段中的所述一个分段进行所述回放速度比率的调节;以及显示回放速度比率的改变以及对应的回放持续时间的改变可以包括,根据所述回放速度比率的调节来更新数字视频序列的总持续时间。
接收指定回放速度比率的改变的输入可以包括接收关于所述第一关键帧点而指定静态帧回放的持续时间的输入。接收指定回放速度比率的改变的输入包括接收关于所述第一关键帧点而指定反向回放的持续时间的输入。
所述第一关键帧点可以包括可分割的关键帧点,所述用户界面包括可变比率速度控制,配置以针对该可分割关键帧点定义相关联的关键帧元素,该关键帧元素包括开始元素、结束元素以及中间时间元素,并且所述方法可以包括:通过所述可变比率速度控制来接收输入,该输入定义与数字视频序列相关的至少一个所述关键帧元素;以及基于所述输入来产生时间过渡函数,用于重映射所述数字视频序列的回放时间,其中该时间过渡函数维持进入所述开始元素的视频帧的预定义速度、维持离开所述结束元素的视频帧的预定义速度、并且根据与所述中间时间元素相关联的一个或多个值来将视频速度从开始速度值改变为结束速度值,其中该开始速度值与所述开始元素相关联,该结束速度值与所述结束元素相关联。而且,产生所述时间过渡函数可以包括确定所述开始元素的第一位置和所述结束元素的第二位置之间的两个曲线的结合,该两个曲线环绕该第一和第二位置之间的中心点旋转对称。
显示回放速度比率的改变可以包括提供沿着数字视频序列的图形显示的标记,该标记包括代表至少两个不同回放速度比率的不同形状。而且,所述显示可以包括使用索引到图形表示中的位置的不同形状来表示回放速度比率的变化程度,并且所述不同形状可以包括小于号和大于号。
本说明书中所描述的主题的其他方面可以在包括如下步骤的方法中实现:提供用于数字视频编辑系统的用户界面,该用户界面包括可变比率速度控制,配置以定义相关联的关键帧元素,该关键帧元素包括开始元素、结束元素和中间时间元素;通过所述可变比率速度控制接收输入,该输入定义与数字视频序列相关的至少一个所述关键帧元素;以及基于所述输入来产生时间过渡函数,以用于重映射所述数字视频序列的回放时间,其中该时间过渡函数维持进入所述开始元素的视频帧的预定义速度、维持离开所述结束元素的视频帧的预定义速度、并且根据与所述中间时间元素相关联的一个或多个值来将视频速度从开始速度值改变为结束速度值,其中该开始速度值与所述开始元素相关联,该结束速度值与所述结束元素相关联。这方面的其他实施方式包括对应的系统、装置和计算机程序产品。
这些和其他实施方式可以可选地包括以下特征中的一个或多个。提供用户界面可以包括给出单个控制柄,所述控制柄可以用于定义中间时间元素的一个或多个值,该一个或多个值定义了开始元素和结束元素之间的非线性过渡,以及接收输入可以包括通过该单个控制柄接收中间时间元素的一个或多个值。提供用户界面可以包括给出可用于定义开始元素值的第一控制柄以及可用于定义结束元素值的第二控制柄,并且接收输入可以包括:通过该第一和第二控制柄中的至少一个来接收指向源的输入,所述输入指定数字视频序列中的位置;并且通过该第一和第二控制柄中的至少一个来单独地接收指向目标的输入,其指定时间过渡函数的持续时间。
产生时间过渡函数可以包括将开始速度值设置为与进入开始元素的视频帧相关联的恒定开始速度,并且将结束速度设置为与离开结束元素的视频帧相关联的恒定结束速度。产生时间过渡函数可以包括在较大计时函数中计算时间过渡函数,所述较大计时函数包括进入开始元素的视频帧的预定义速度、离开结束元素的视频帧的预定义速度、以及时间过渡函数,使得该较大计时函数的一阶导数对应于连续函数。而且,产生时间过渡函数可以包括防止时间过渡函数超过进入开始元素的视频帧的预定义速度或离开结束元素的视频帧的预定义速度。
产生时间过渡函数可以包括确定开始元素的第一位置和结束元素的第二位置之间的两个曲线的结合,该两个曲线环绕该第一和第二位置之间的中心点旋转对称。接收输入可以包括接收用于中间时间元素的指数权重,并且确定两个曲线的结合可以包括根据该指数权重来确定两个曲线。
本说明书中所描述主题的另一方面可以在包括以下步骤的方法中实现:提供用于数字视频编辑系统的用户界面,该用户界面包括数字视频序列的回放时间的图形表示;接收指明数字视频序列的回放速度比率的改变的输入;以及显示回放速度比率的改变,该显示包括提供沿着数字视频序列的回放时间的图形显示的标记;其中所述标记包括用来表示至少两个不同回放速度比率的不同形状。这方面的其他实施方式包括对应的系统、装置和计算机程序产品。
这些和其他实施方式可以可选地包括以下特征中的一个或多个。所述标记可以包括表示向前回放、反向回放和静态帧回放的不同形状。所述不同形状可以包括表示向前回放的大于号、表示反向回放的小于号、以及表示静态帧回放的竖直线。显示回放速率比率的改变可以包括使用索引到回放时间的图形表示中的位置的不同形状来表示回放速度比率的变化程度。使用不同形状可以包括根据索引位置处的回放速度比率来调节代表向前回放和反向回放的标记的密度。而且,使用不同形状可以包括根据索引位置处的回放速度比率来修改小于号和大于号的角度。
可以实现本说明书中所描述主题的特定实施方式,以便实现以下优点中的一个或多个。数字视频编辑系统的用户界面可以使用时间重映射特征,其提供用于随着时间动态调节视频片段分段的回放速度的更快且更为直观的可预测方法。该用户界面可以提供较容易理解和控制的视频回放速度的图形表示,这可以在进行回放速度比率调节的同时避免不希望的结果,例如不希望的反向回放、静态帧、或者源媒体丢失,并且,在期望反向回放和静态帧分段的情况下还可以提供容易地创建和调节反向回放和静态帧分段的能力。可以通过与用户界面进行较少交互来实现用户想要的结果。
对回放速度比率的调节可限制于视频片段的特定分段,由此防止对视频片段一个部分的调节引起该视频片段随后部分的不期望的回放速度改变。这可以产生更为有效的工作流,因为用户可以根据期望指定视频片段的部分,并继而对所指定的部分进行独立的回放速度比率调节,而不会影响其他部分。应用于一个特定部分的速度设置可以持续,而不论对视频片段的其他部分进行的任何回放速度改变。在速度调节过程中,将两个特定部分分开的每个关键帧点可以维持锁定至期望的媒体帧(除非用户有意将该关键帧点解锁定),因此用户试图改变其速度的源媒体中的重要事件不会无意识地失去与媒体的同步。
无需使用速度图方法(其中,通过45度角的任何线代表100%的速度,较陡的角度代表较快的回放,较低的角度代表较慢的回放,平线代表静态图像,并且从左到右斜向下的线代表反向运动)。然而,回放速度比率和回放持续时间的图形表示可以在这样的图中包括回放速度比率的线图,该图具有代表回放持续时间的横轴和代表回放速度比率的纵轴,其中静态图像对应于纵轴上的零,并且反向回放对应于纵轴上的负值,并且该线图本身可以作为用于调节回放速度比率的控制界面的一部分。
而且,回放速度比率的线图可以重叠在用以编辑时间线序列的时间线界面中的轨道中的轨道项上。因此,可以直接在时间线序列中调节片段的回放速度比率,并且响应于这些调节,可以在时间线中自动更新片段的持续时间,因此用户可以在编辑和回放期间立即知道可变速度片段的持续时间。在某些实现中,所有回放速度比率调节控制可以自包含在时间线序列中的轨道项中,并且无需使用分离的工具、对话框或者效果面板。
给定一个场景,其具有需要减慢或加快的部分,可以沿着时间线使用用户界面(UI)条线,其中条线代表场景的百分比速度。可以使用关键帧点将条线分段为新的条线,其中关键帧点对应于现在所定义的需要受到时间影响的分段的开始帧和结束帧。在UI中可以抓取百分比速度条线,以及将其向上拖动或者向下拖动,而使分段加速或者减速至与条线相对应的作为原始速度百分比的速度。该关键帧点之外的其他条线可以保持完全不受这些速度调节的影响(除了在时间线序列中的可能的位移之外),并且在进行调节时,分段可以缩短或增长时间线中所显示的整个场景。此外,可以使用水平线来显示条线是位于100%的速度之上还是之下,并且也可以使用阴影和颜色。
数字视频编辑系统的用户界面可以使用时间重映射特征,其能够相对于在用户希望回放速度比率保持恒定的其他时间,来清晰地描绘存在回放速度比率改变的时间范围。如果希望,回放速度比率的改变可限制在视频序列的指定部分,并且该部分可以由视频编辑系统的用户指定。这可以防止对视频序列的一部分做出的回放速度比率改变在该视频序列的其他部分中引起不希望的改变。而且,可以使用包括可分割关键帧点在内的改进的用户界面,来指定将要发生回放速度比率过渡的视频序列部分。
可以在视频序列中两个用户指定的关键帧点之间定义时间过渡函数,其中用户可以控制所述两个用户指定的关键帧点之间的时间重映射过渡,而无需移动这两个关键帧点。可以在过渡区域内提供控制点,并且可以在进入和离开该控制点的全部时间范围内向用户提供精确控制。而且,可以在提供该控制的同时还提供从第一关键帧点、经过过渡区域、到最后关键帧点的回放速度比率的平滑过渡。因此,时间重映射系统的用户可以容易地在数字视频的不同速率部分之间创建准确的加速度部分(正的和负的两者)。对于恒定速率部分的大多数普通时间重映射情况而言,通过在其间清晰定义的加速度区域,这允许用户获得一致的良好结果。
而且,可以使用沿着数字视频序列回放时间的图形表示的标记来表示回放速度比率的改变,其中所述标记包括表示向前回放、反向回放和静态帧回放的不同形状。用户界面可以使用户容易明白视频的哪些分段是向前回放、哪些是反向回放、哪些是静态帧对,而无需实际回放该序列。因此,在较长的分段延展上,可以一看便知回放速度比率的变化(包括回放方向和加速度的变化)。在进行回放速度比率调节时,用户可以容易地避免偶然造成反向回放或静态帧回放。而且,可以通过标记来容易地辨认在回放的一般方向中的回放速度比率变化。
该用户界面可以更好的适用于色盲用户、或者使用单色监视器的那些用户,因为可以使用具有不同形状(例如,大于号和小于号)的标记来区分向前回放和反向回放,而不是像传统方法一样使用制作为红色的直的、竖直的等值标记(其间隔较紧密或较稀疏,以指示减速或加速)来指示反向回放方向。尽管可以与本发明的系统和技术结合使用颜色,但是无需将颜色的使用作为用户界面中向前和反向回放之间的唯一区别。
可以通过扫描整个序列而容易地定位特定的慢动作或反向动作分段,而无需回放该序列。质量控制可以得到加强,这是因为可以容易地通过眼睛扫视序列的长度,以查找不希望的回放方向或速度。在编辑过程中,可以在序列中查看回放速度在何处变化以及回放方向在何处改变、而无需实际回放该序列或者手动标记事件,这是十分有益的,诸如当基于序列中的计时来定位其他片段以及创建事件的时候。例如,如果用户希望在背景片段中使添加的标题出现在回放从向前切换为反向方向的点处时,则用户可以将标题拖拽到时间线中的轨道中,并将其开始处与背景片段中显示的方向改变指示符对准。
将在附图和下文的描述中阐明本发明的一个或多个实施方式的细节。根据该描述、附图以及权利要求书,本发明的其他特征、方面和优点将变得明显。
附图说明
图1示出了用来改变数字视频的回放速度比率、指示不同的视频回放速度比率、以及产生重映射视频回放时间的过渡的示例系统。
图2示出了改变视频回放速度比率的示例过程。
图3A示出了诸如可以与图1的系统结合使用的示例用户界面。
图3B-图3G示出了用以改变视频回放速度比率的与用户界面的示例交互。
图4示出了产生重映射视频回放时间的过渡的示例过程。
图5A-图5B示出了用以产生重映射视频回放时间的过渡的与用户界面的示例交互。
图6示出了产生在重映射数字视频序列的回放时间中使用的时间过渡函数的示例过程。
图7示出了用以定义过渡区域的示例用户界面控制。
图8示出了指示不同视频回放速度比率的示例过程,其中包括指示不同的回放方向和变化的回放速度比率。
图9A-图9D示出了用以改变视频回放速度比率的与用户界面的示例交互以及得到的关于不同视频回放速度比率的指示。
图10A-图10D示出了使用标记来指示不同视频回放速度比率的各种示例。
在各个附图中,使用相似的参考数字和标示来指示相似的元素。
具体实施方式
图1示出了用以改变数字视频的回放速度比率、指示不同的视频回放速度比率、以及产生重映射视频回放时间的过渡的示例系统。数据处理装置110可以包括硬件/固件、操作系统、以及包括数字视频编辑程序120在内的一个或多个程序。视频编辑程序120与数据处理装置110结合操作,以实现本说明书中描述的各种操作。因此,程序120与处理器和计算机可读介质(例如,存储器)相结合而代表系统中的一个或多个结构性组件。
视频编辑程序120可以是视频编辑应用或视频编辑应用一部分。这里使用的“应用”是指被用户作为用于所定义目的的独特的计算机工具的计算机程序。应用可以完全构建在数据处理装置110的操作系统(OS)中,或者应用可以具有位于不同位置的不同组件(例如,OS或内核模式下的一部分、用户模式下的一部分、以及远程服务器中的一部分),并且应用可以在用作装置110的软件平台的应用执行环境(例如,向应用提供各种功用服务的虚拟机或运行库)上构建。而且,应用可以是图形用户界面应用(例如,Web浏览器),其通过数据通信网络180(例如,因特网)连接到一个或多个处理器190(例如,一个或多个Web服务器)并将计算机工具作为网络服务而提供。
视频编辑程序120可以包括关注不同类型的图像处理的不同类型的软件(或是被包括在其中),例如视觉效果、图像编辑和视频编辑(例如,After软件、 软件、 软件,每个软件均可以从加利福尼亚州圣何塞市的AdobeSystems Incorporated公司获得)。因此,视频编辑程序120可以对来自多个不同来源的数字图像进行操作,并且可以涉及各种图像处理工作流。而且,数字视频(为了简洁,将简称为视频)不一定对应于文件。视频可以存储在保存其他视频和图像的文件的部分中、保存在专门用于给定视频片段的单个文件中、或保存在多个协同文件中。
数据处理装置110包括一个或多个处理器130以及至少一个计算机可读介质140(例如,随机访问存储器、存储设备等)。数据处理装置110还可以包括通信接口150、一个或多个用户界面设备160、以及一个或多个附加设备170。用户界面设备160可以包括显示屏幕、键盘(例如,定制视频编辑键盘)、鼠标、触笔、或其任意组合。而且,可以将数据处理装置110本身视为用户界面设备(例如,当视频编辑120作为Web服务递送时)。
附加设备170可以包括用于视频和影片编辑的各种设备。这可以包括与录像机耦合的视频控制器(其可用于存储和导入视频胶片并用于写入最终输出)、声音系统、以及备用电池。而且,本说明书中描述的主题可以与任何数字打印引擎或打标(marking)引擎、显示监视器、或者能够在纸张、胶片、显示屏幕或者其他输出介质上产生彩色或灰度像素的其他光栅输出设备结合使用。
图2示出了改变视频回放速度比率的示例过程,如可以使用图1的系统实现。可以提供210用户界面,所述用户界面包括用于数字视频序列的回放速度比率和回放持续时间的图形表示。用户界面还包括已定义点,所述已定义点指向数字视频序列中的各个帧。每个这样的指向将已定义点链接至视频中的特定帧,使得在调节视频回放持续时间、并且由于回放速度比率的变化而使源视频中的特定帧移动到输出视频中的新时间位置时,相应的已定义点随着该特定帧来移动。已定义点可以包括视频序列的开始点、视频序列的结束点、以及它们之间的一个或多个关键帧点。
可以接收220定义一个或多个关键帧点的输入,继而将每个这样的新关键帧点包括在已定义点中。例如,用户可以使用由鼠标控制的光标来指向图形表示中的位置,并在该位置创建关键帧点(例如,通过鼠标点击、键盘输入、或其组合)。可以在创建关键帧点之前向用户显示对应于该位置的数字视频帧,并且可以随同关键点本身一起而创建将新关键帧点链接至源数字视频(例如,源视频文件)的特定帧的指向。
新关键帧点指向源数字视频的特定帧,并且在进行速度调节时保持锁定至该帧。然而,关键帧点无需永久锁定至该帧,并且用户界面可以提供这样的功能:用户通过该功能可以指定已有的关键帧点将要指向的新帧。例如,在某些实现中,可以使用鼠标来抓取和移动关键帧点的图形表示,从而指定源视频中的新帧以便锁定。还可以提供各种键盘快捷方式来方便关键帧点的操作,例如下文进一步描述的那样。
可以针对数字视频序列接收230指定回放速度比率改变的输入。该输入可以包括对已定义点之一的用户操作。例如,可以在用户界面的图形表示中拖动用户指定的关键帧点,以便指定静态帧回放的持续时间或反向回放的持续时间,如下文将结合图9A-图9D进一步描述。输入还可以包括对落入已定义点之间的(水平的、对角线的、或其他)分段的操作。例如,可以在用户界面的图形表示中拖动两个用户定义的关键帧点之间的图段,以指定该段的新回放速度比率,如下文结合图3B-图3G进一步描述。
可以显示240数字视频序列的回放速度比率的改变以及相应的回放持续时间的改变。该显示包括根据由一个或多个已定义点所指向的相应帧的新时间位置,来更新图形表示以及移动一个或多个已定义点。因此,例如,如果已经在视频序列中定义了一个关键帧点,由此创建了两个分段,并且将第一分段减慢至一半的速度,则视频序列的总持续时间变长,并且视频序列的新回放持续时间在用户界面的图形标示中显示。因为已定义点指向视频序列中的特定帧,并且减慢视频序列的第一分段导致视频序列的所述一个关键帧点和结束点显示在回放期间的较晚位置,通过移动关键帧点和结束点以显示其对应的帧在视频序列的回放持续时间中的新时间位置,而将这种情况直接反映在图形表示中。因此,第二分段被推向右侧,这是因为现在所述第二分段开始于视频序列中的较晚的时间。
现在结合图3A-图3G来示出并描述该过程的详细示例。图3A示出了示例用户界面,其例如可以与图1的系统结合使用,并且例如可以与图2、图4、图6和图8的过程结合使用。应用窗口300包括多个面板302、304、306和308。用户可以根据希望在窗口300中添加、删除和组织面板,并且每个面板可以包括不同类型的界面(或者给定界面的其他实例)。可以包括在视频编辑应用中的各种类型的界面是公知的。示例面板可以包括:项目面板(项目中所使用的所有片段的容器)、源监视器(用于预览源片段以及标记待编辑到序列中的分段)、时间线面板(用于通过将视频片段安排在节目中来组装序列)、节目监视器(用于回放在时间线中组装的活动序列)、以及包含用于编辑、添加效果和监控输出质量的工具的其他面板。
面板308包括在编辑时间线序列中使用的时间线界面。图3A中所示的示例时间线序列包括三个视频轨道(track)、三个音频轨道以及主轨道310。其他轨道设置也是可能的。时间线312示出了轨道在时间线序列中的持续时间信息。计时器314可以用来显示一个或多个时间相关的特征,例如序列中的回放标记316的当前时间位置、源序列或轨道的时间持续、时刻、或者已经编辑的源序列的时间量。此外,面板308中的时间线界面可以包括:允许放大或缩小时间线序列中的时间持续的特征、以及一个或多个标记,例如回放标记316,以便方便编辑和同步。这样的标记可以与面板302和306中所显示的视频相链接,使得面板302和306中所示的当前帧(可以来自不同的视频序列或来自同一视频序列的不同部分)对应于标记所指示的时间线界面中的位置。
时间线界面中所示的视频轨道可以包括视频本身。例如,当把视频片段放置到时间线界面中的轨道中时,该轨道可以在时间线界面中竖直地扩展,以便提供附加的用户界面元素并显示来自该视频片段的图像。图3B示出了示例时间线界面面板330,其具有三个视频轨道,包括一个轨道334,其具有包括在轨道项336中的名称为“海豚.avi”的视频片段。海豚视频片段的帧在轨道项336中示出,以辅助用户识别正在编辑的视频片段,并且已经在时间线界面中打开了时间重映射功能。在此示例中,回放速度比率和回放持续时间的图形表示重叠在时间线界面的轨道334中的轨道项336上。
该图形表示在这样的图中包括回放速度比率的线图338,该图具有代表回放持续时间的横轴和代表回放速度比率的纵轴以及水平线,其中可以使用不同颜色或阴影来显示以清晰地显示线图338何时高于或低于100%速度。在此示例中,在时间线中的轨道334之上的时间标尺栏332中示出水平轴的单位,但是没有示出纵轴的单位。在其他实现中,可以显示纵轴的单位,例如每秒的帧数或源媒体回放速度的百分比。可以使用鼠标输入设备抓取线图338并向上或向下拖拽,以分别提高或降低回放速度比率。一旦选中线图338,则弹出窗口可以显示回放速度比率的当前值(例如,在第一次抓取线图338时是100%,其中正的百分比表示向前回放,而负的百分比表示反向回放)。
图3C示出了用户已经创建了两个关键帧点340和342之后的同一面板330。因此,线图338已被隐含地划分为三个分段,包括中间分段344,这些分段中的每一个具有视频片段“海豚.avi”中的相应帧子集。当用户在中间分段344上执行拖拽操作时,用户界面可以反映如图3D所示的变化。在拖拽操作期间,临时分段348可以伸展或压缩,以便显示分段344的新的、经过调节的回放速度比率和回放持续时间,并且弹出显示350将分段344的当前回放速度比率显示为视频片段的原始回放速度比率的百分比。此外,临时标记346显示关键帧点342的新当前位置。因此,随着拖动操作将分段344向下推,临时分段348向下移动并且向右扩展,并且临时标记346向右移动。在这种情况下,由于为了以慢动作来回放源视频而创建的额外帧,轨道项的持续时间变长。
一旦拖拽操作完成,则分段344、关键帧点342以及轨道项的结束点都被更新,如图3E所示。使用临时分段348和临时标记346可以辅助使拖拽操作的结果容易理解。这还允许用户可视地将偏移关键帧与序列中的特定事件对准(通过观看时间标尺栏332、或者不同轨道中的其他轨道项)。这可以方便编辑过程,例如在将可变回放分段定时为与序列中的特定点(例如,效果或音乐提示)一致时。在其他实现中,可以在进行拖拽操作时实时地更新分段344和关键帧点342(以及轨道项的结束)。
这里,作为工作流的具体实例,考虑视频片段“海豚.avi”可以包括海豚跳出水面的部分。用户可以将第一关键帧点340设置为海豚刚开始出水的帧,并且将第二关键帧点342设置为海豚刚开始再入水的帧。现在,用户可以自由地调节视频中该分段的速度,同时保持慢动作分段的开始和结束固定为视频片段中的特定帧。
此外,注意,可以单独地拖拽由两个关键帧点和视频片段的开始点以及结束点所描绘的三个分段中的每一个,以便加快或减慢该分段的回放速度比率。因此,如图3F所示,可以将分段352向上拖拽至150%。在该拖拽操作之后,更新轨道项336以反映新的片段持续时间,如图3G所示。在这种情况下,由于快动作效果而播放较少的帧,因此轨道项缩短。
此外,在更新轨道项的结束以显示轨道项的新持续时间时,当结束点移动超过了该轨道中右侧的相邻轨道项的开始点时,可以在时间线界面中自动裁剪轨道项。例如,如图3A所示,在向下拖拽轨道项320的分段322以降低分段322的回放速度比率时,轨道项320的结束324与时间线界面中的下一个轨道项326的开始328相接触(并超过了它),但是可以自动裁剪轨道项320的重叠部分(因此使轨道项320的结束324移动,因此其保持在轨道项326的开始328处)。换言之,在轨道项320中调节速度无需导致对下一个轨道项326的覆盖(over-writing)。
在这种情况下,可以在时间线界面中下一个轨道项326的开始328处截断轨道项320。然而,轨道项320的被截断部分没有丢失,而是仍然可以在时间线界面中使用,例如在轨道项320中进行进一步的速度调节、在时间线界面中移动轨道项326并裁剪轨道项320使其填充因此留出的间隙、或是通过在轨道项320和326之间创建过渡效果。此外,当鼠标指针悬停在轨道项的结束之上时,用户界面中可以出现裁剪光标,该裁剪光标可以用来裁剪轨道项,以展示来自源视频的其他可用帧。该裁剪操作可以用来恢复超过轨道项的边缘并且进入在经过裁剪的轨道项中不可见的媒体部分的速度关键帧。如所指出的,当右侧的相邻轨道项防止轨道项扩展到其中并将其覆盖时,可以出现此情况。无论如何,如果时间线界面中不存在下一个轨道项,则轨道项320在时间线界面中可以自由延展或缩短持续时间。
如果轨道项320的一个或多个分段被加速,使得轨道项320的总持续时间不再达到下一个轨道项326,则可以在时间线界面中显示轨道项320的新的、较短的持续时间,即使这在轨道项320和326之间留下了空白间隔。时间线界面中先前彼此邻接的轨道项无需继续邻接。这允许用户更为精确地控制整个轨道项的回放速度比率的改变,并且,与不得不在轨道项的视频中从头到尾进行剔除(scrub)以找到媒体在何处结束的情况不同,用户可以清晰地识别源媒体在何处结束。
除了如上所述的能够通过受控方式容易地定义视频的部分的回放速度比率之外,能够容易地在两个具有不同回放速度比率的视频部分之间定义可变回放速度比率过渡也是有益的。图4示出了产生用于重映射视频回放时间的过渡的示例过程,如可以使用图1的系统实现。可以提供410用于数字视频编辑系统的用户界面,包括可变比率速度控制,其配置以定义相关联的关键帧元素,所述关键帧元素包括开始元素、结束元素和中间时间元素。
开始元素和结束元素可以指向数字视频序列中的帧,如上文关于关键帧点所描述。相关联的开始元素和结束元素可以是时间线界面中分离的关键帧控制,或者它们可以是可分割的关键帧控制的两半,如下文进一步描述。中间时间元素管理开始元素和结束元素之间的时间过渡。时间元素可以是指定的类型(例如,线性过渡、二次过渡、平滑可变曲线)、用于控制过渡的一个或多个值(例如,用以确定幂曲线的指数权重、过渡内的多个控制点)、或者这些的组合。在某些实现中,也可以在由开始元素和结束元素限定的过渡区域内使用非对称曲线和用户定义的贝塞尔曲线,并且可以偏移过渡区域以保持开始元素和结束元素链接至其各自的源媒体帧,或者只需要维持开始元素和结束元素之一与其源帧的链接,而另一个在源媒体时间中自由偏移。
通过可变比率速度控制来接收420输入,该输入定义与数字视频序列相关的至少一个关键帧元素。可以接收单独的输入,以定义开始元素、结束元素和时间元素。例如,用户可以分别定义视频序列中开始元素的位置、视频序列中结束元素的位置以及它们之间时间过渡的特性。可选地,可以使用单个输入同时定义两个元素或者全部三个元素。
根据所述输入产生430时间过渡函数以用于重映射数字视频序列的回放时间。时间过渡函数维持进入开始元素的视频帧的预定速度,维持离开结束元素的视频帧的预定速度,并根据与中间时间元素相关联的一个或多个值将视频速度从开始速度值改变为结束速度值,所述开始速度值与开始元素相关联,而所述结束速度值与结束元素相关联。由此,通过开始元素和结束元素可限定可变回放速度比率过渡,并且该过渡在用户已经指定的媒体帧之上出现。通过使用时间过渡函数,可以重映射数字视频序列的回放时间,并且可以将结果视频存储在计算机可读介质上。
图4的过程不必与上文描述的用于改变数字视频的回放速度比率的系统和技术结合使用,但是结合使用可以提供更为通用的用户界面。图5A-图5B示出了与上文结合图3B-图3G描述的用户界面的示例交互。这些示例交互示出了用于重映射视频回放时间的、不同回放速度比率之间的线性过渡的产生。
关键帧点340具有开始元素和结束元素,分别由关键帧开始控制400和关键帧结束控制405表示。在某些实现中,用户可以保持按下键盘键、并一起拖拽控制400和405,以便将关键帧点340分配给视频中新的帧,或者用户可以分别拖拽控制400和405,以便将开始元素和结束元素分配给视频中新的帧。可选地,在用户界面中关键帧点340可以具有三个图形控制,一个用于整体移动该点(从而一起移动开始元素和结束元素),以及两个所示的用于分别移动开始元素和结束元素的图形控制。注意,一旦将开始元素和结束元素分开,也即将关键帧控制一分为二,则关键帧点340就变成了两个关键帧点。
在各种实现中,使用鼠标输入设备和键盘修改器可以支持与控制柄400和405的多个用户交互。一旦将两半拖开,则可将一个在媒体时间中滑动,而将另一个保持锁定在其源媒体帧。可以一起拖拽它们并在媒体时间中滑动(重定位到源媒体文件的不同帧)。可以一起拖拽它们,但是拉伸(减慢)或压缩(加快)这些控制点左边的分段,从而使控制点保持锁定在媒体帧。一旦将两半拖开,则可以一起拖拽它们并使其在媒体时间中滑动(重定位到源媒体文件中新的帧集合)。
如此示例中所示,用户选择开始元素控制400并将其向左拖拽。在拖拽操作期间,弹出显示410显示时间线中的时间位置(00;00;03;25),并且移动开始元素的回放速度比率(100%)。如图5B所示,在关键帧控制已经被分开之后,可以使用阴影415突出显示过渡区域,或者使用图案或其他提示来区别过渡区域。在此示例中,已经将时间元素预定义为线性过渡。这里,用户界面可以包括用于改变过渡类型的各种选项,例如通过使用下拉菜单来选择时间过渡类型。
此外,注意,开始元素的重定位已经导致以较低的(变化的)速度比率来回放视频的一部分。由此,分段344和352向右移动,并且视频回放的总持续时间增加。使用上面描述的技术,可以在过渡区域的创建期间向用户动态地显示持续时间的这些改变。用户可以自由地改变该过渡的开始元素、结束元素或时间元素,而不会在视频中的其他地方导致不希望的改变。因此,用户界面可以确保过渡事件发生在用户期望的媒体帧上,并且是发生在序列回放时间中的期望点处。而且,用户界面可以允许渐变出和渐变入过渡(渐入和渐出),而不会干扰锁定的媒体帧和序列时间范围。
图6示出了产生在重映射数字视频序列的回放时间中使用的时间过渡函数的示例过程,如可以使用图1的系统实现。产生时间过渡函数可以包括将开始速度值和结束速度值设置为610与进入开始元素的视频帧和离开结束元素的视频帧相关联的常量。例如,如果回放速度在开始元素之前是常量、并且在结束元素之后是不同的常量,则可以在产生时间过渡函数中使用这些常量。通过指定两个控制点并且在过渡区域的每侧保持不同的速率常量,问题空间受到约束,并且视频编辑器可以快速生成一致可预测的、高质量的结果。而且,可变速度回放区域可以保持平滑(平滑变化的速度),并且由于不会跳过帧,因此可以防止序列丢失或乱序帧序列(向前或向后的时间跳跃)。
此外,如果回放速度在变化,则在开始元素之前或结束元素之后仍然可以使用常量值,或者当设置开始速度值和结束速度值时可以将这种变化考虑在内。产生时间过渡函数可以包括在较大计时函数中计算620时间过渡函数,所述较大计时函数包括进入开始元素的视频帧的预定义速度(既可以是恒定速度,也可以是变化速度)、离开结束元素的视频帧的预定义速度(同样既可以是恒定速度,也可以是变化速度)、以及时间过渡函数,使得该较大计时函数的一阶导数对应于连续函数。可以产生时间过渡函数,使其通过连续的一阶导数来连接过渡的每一侧的回放速度比率。因此,在进入过渡区域、通过过渡区域、以及离开过渡区域时,回放速度比率的改变可以保持平滑。
此外,产生时间过渡函数可以包括防止630时间过渡函数超过进入开始元素的视频帧的预定义速度或离开结束元素的视频帧的预定义速度。当在过渡区域两侧的回放速度是常量时,防止超过可以通过防止不希望的回放速度比率的加速度或减速度来改进过渡。例如,如果过渡是从原始速度100%的恒定回放速度比率到原始速度的50%,则使得回放速度比率最初在过渡开始处快于100%、以及在过渡结束处慢于50%都将显得奇怪,而这种情况在视频序列的不同回放速度比率之间的传统过渡中可能发生。可以使用各种方法来防止超过,包括使用如下文进一步描述的幂曲线。
图7示出了用以定义过渡区域的示例用户界面控制。示出了轨道项的部分700,其上重叠有回放速度比率的线图。向用户显示了单个控制柄730以用于过渡区域760,该控制柄730可适用于定义过渡区域760的中间时间元素的一个或多个值。如图所示,一个或多个值定义了过渡之前的回放速度比率710和过渡之后的回放速度比率720之间的非线性过渡。在此示例中,根据两个幂曲线740和750构造了非线性过渡,但是一般地,可以提供一个或多个控制柄,以允许用户指定开始元素和结束元素之间的非线性渐入/渐出曲线。
例如,可以给出一组代表贝塞尔曲线的控制点,允许用户在定义过渡区域760的开始元素和结束元素之间平滑地渐变过渡。不论用来定义过渡区域760的中间时间元素的曲线类型,优选的是,曲线的净积分匹配于线性过渡的净积分。通过保持曲线下的面积等于线性过渡下的面积,可以在过渡区域760中用非线性曲线容易地替换线性曲线,并且可以容易地实现可变回放过渡的平滑渐入和渐出。而且,可以将控制柄730设计为控制曲线的各个方面,并且潜在地控制过渡区域760的开始元素和结束元素。例如,旋转控制柄730可以调节环绕过渡区域760的中心点的对称曲线的斜度,并且在保持按下键盘键时,移动控制柄730可以调节开始元素和结束元素相对于源媒体的时间位置(例如,作为同时控制开始元素和结束元素两者的向上和向下的滑块,或是使控制柄730的上半部分控制开始元素、并且使控制柄730的下半部分控制结束元素),由此改变过渡区域760的长度。
通过移动控制柄730,用户可以指定由系统用来确定两个幂曲线740和750的结合的值,这两个幂曲线环绕过渡的中心点而旋转对称。例如,系统可以通过控制柄730接收输入,所述输入指定用以确定两个幂曲线740和750的指数权重。因此,用户可以精细地控制在用户指定用于过渡区域的开始点和结束点之间多快地进行过渡,而同时由于所选的过渡类型,过渡保持平滑。
给定过渡区域,其中将以可变帧率播放两个或多个帧,以支持从过渡开始之前的帧率过渡到过渡结束之后的帧率,则可以根据用户定义的过渡曲线的图形函数来限定将要在该过渡区域中播放的每个帧的长度以及帧融合。可以将该过渡曲线限制为连续的速率改变,使得开始和结束过渡点没有改变,并且绘制效果没有显示出帧率改变的跳跃(或者跳过帧,或者乱序播放帧)。然后,可以使用开始元素的值、结束元素的值以及时间过渡元素的值来将输入帧映射为输出帧。
用户界面中的关键帧元素的位置可以指示在输出视频序列中的何处显示输出帧,并且可以基于关键帧元素的值对关键帧元素之间的速度进行内插。开始元素和结束元素指定了过渡的跨度,在该跨度上计算加速度(例如,作为线性函数或者非线性函数,例如两个旋转对称幂曲线),并且可以使用中间时间元素的一个或多个值(例如,一个或多个指数权重)来计算过渡区域中的帧率。
除了如上所述的定义数字视频的回放速度比率和可变回放速度比率过渡之外,能够在用户界面中容易地向用户显示不同回放速度比率的特性也是有益的。图8示出了指示不同视频回放速度比率的示例过程,包括指示不同的回放方向和变化的回放速度比率,如可以使用图1的系统实现。提供810用于数字视频编辑系统的用户界面,其中该用户界面包括数字视频序列的回放时间的图形表示。该图形表示可以包括如上所述的回放速度比率的线图,或者该图形表示可以包括传统的速度图,其中通过45度角的任何线来代表100%速度,较陡的角度代表较快的回放,较低的角度代表较慢的回放,平线代表静态图像,并且从左到右斜向下的线代表反向运动。
可以接收820指明数字视频序列的回放速度比率改变的输入。这可以包括如上所述的技术,或者用于改变视频回放速度比率的传统技术。可以通过提供沿着数字视频序列回放时间的图形表示的标记来显示830回放速度比率的改变,其中所述标记包括代表至少两个不同回放速度比率的不同形状。例如,标记可以包括代表向前回放、反向回放和静态帧回放的不同形状,并且标记还可代表回放速度比率的加速度和减速度,如下文进一步描述。因此,这里使用的“不同回放速度比率”包括不同的恒定回放速度比率、变化回放速度比率以及不同的回放方向或者静态帧回放。
图8的过程不必与上文描述的用于改变数字视频的回放速度比率和定义回放速度比率过渡的系统和技术结合使用,但是结合使用将提供更好的用户界面。图9A-图9D示出了与上文结合图3B-图3G以及图5A-图5B描述的用户界面的交互。这些示例交互示出了用于指示静态帧回放和反向回放部分的特定标记的使用。
在此示例中,用户创建关键帧点900。用户继而保持按下键盘键以指示静态帧回放,并且向右拖拽关键帧点900以指示静态帧回放的持续时间。如此示例中所示,临时标记905在时间线中显示静态帧分段的结束的时间位置,并且光标变为静态帧图标910(双竖直条线),其显示所创建的分段是静态帧回放分段。在拖拽操作期间,弹出显示在临时标记905向右移动时显示其在时间线中的时间位置(00;00;02;08),并显示该静态帧分段的回放速度比率(0%)。如图9B所示,在拖拽操作之后,关键帧点915显示静态帧分段的开始,关键帧点925显示静态帧分段的结束,一系列标记920(竖直线形状)清晰地指明静态帧回放的周期,并且线图的分段930显示处于零水平的回放速度比率。
注意,关键帧点915和920的图形控制还可以突出显示这些点标记了静态帧分段的边界这一事实,这是通过使用竖直的内部条线实现的,而不是如同对于常规关键帧点那样使用倾斜内部条线,也不是如同对于在过渡区域周围的关键帧点那样不使用内部条线。可以使用可选的设计来区分不同的关键帧是在向前回放、反向回放、静态帧分段或是在过渡区域中。此外,注意,静态帧分段930的创建使得先前创建的过渡区域344和分段352更加向右。并且视频回放的总持续时间再次增加。可以使用上面描述的技术在静态帧分段的创建期间向用户动态地显示持续时间的这些改变。
如图9C所示,用户在静态帧分段和过渡区域的开始之间创建关键帧点940。用户继而保持按下键盘键以指示反向回放,并向右拖拽关键帧点940以指示反向回放的持续时间。如此示例中所示,临时标记945在反向分段被创建时显示该反向分段的结束在时间线中的时间位置,并且光标变为反向回放图标950(指向左边的箭头),其显示所创建的分段是反向回放分段。在拖拽操作期间,弹出显示在临时标记945向右移动时显示其在时间线中的时间位置(00;00;05;17)(在图9C中,标记945刚好与过渡区域的开始的原始时间位置相交),并显示该反向分段的回放速度比率(负100%)。
如图9D所示,在拖拽操作之后,关键帧点955显示反向分段的开始,关键帧点965显示反向分段的结束,一系列标记960(小于号形状)清晰地指明反向回放的时间段,并且线图的分段970显示负的回放速度比率(在为零的静态帧回放速度比率之下)。而且,关键帧点975显示了向前分段980的结束,该分段980与刚刚创建的反向分段相对应。因此,向用户清晰地显示了由反向分段的创建所得到的两个半个视频回文。在反向分段970的结束处自动创建向前分段980,以便倒退到原始反向回放在源媒体中的开始处。
注意,反向分段的创建也使得先前创建的过渡区域344和分段352更加向右移动。轨道项的总持续时间增长(它变得更长),并且帧的有序序列得以保留(没有时间的跳跃)。可以使用上面描述的技术在反向分段的创建期间向用户动态地显示这些持续时间的改变。而且,如上所述,可以向上或向下调节新的反向分段970,以加快或减慢反向回放速度比率。
图9D中仅示出了两个形状,但是可以使用其他形状,以及可选的阴影和标记方案。例如,V形标记(chevron)可以用来标识帧率下降的过渡区域,反向V形标记可以用来标识帧率增加的过渡区域,并且大于号可以用来指示恒速向前回放。可选地,大于号可以用来表示向前回放(不论回放是恒速的还是具有正的或负的加速度),小于号可以用来表示反向回放(不论回放是恒定的还是具有正的或负的加速度),以及竖直线可以用来表示静态帧回放。此外,可以将所使用的不同形状索引到回放时间的图形表示中的位置,以代表回放速度比率的变化程度。
图10A-图10C示出了在轨道项的部分1000中使用标记来指示不同视频回放速度比率的各种示例,其中在部分1000中给出了回放速度比率的线图。在图10A中,向前分段1010具有索引到它的相应的大于号集合1015,静态帧分段1020具有索引到它的相应的竖直线集合1025,向前分段1030具有索引到它的相应的大于号集合1035,向前分段1040具有索引到它的相应的大于号集合1045,反向分段1050具有索引到它的相应的小于号集合1055,并且向前分段1060具有索引到它的相应的大于号集合1065。
而且,在图10A的示例中,通过根据索引位置处的回放速度比率来调节代表向前回放和反向回放的标记的密度,而使用了不同的形状。因此,对于与具有一半向前速度的分段1030相对应的大于号1035,标记密度降低。在图10B的示例中,通过根据索引位置处的回放速度比率而修改小于号和大于号的角度,来使用不同的形状。因此,对于与具有一半向前速度的分段1030相对应的大于号1070,符号的角度增大。
上面的很多变形也是可能的。例如,如图10C所示,可以将水平线1075用于静态帧分段1020。也可以使用特殊标记或大于号和小于号来表示过渡区域。例如,可以使用标记1085来标识提高回放速度比率的分段1080,其中标记1085使用密度和角度两者来显示回放速度比率的改变。
图10D示出了另一示例,其中使用大于号和小于号显示过渡区域,使用时间线界面中的轨道项1004所包括的速度控制轨道1002的密度来显示回放速度比率的改变。分段1090示出了开始于100%向前速度并继而非线性地减速到50%向前速度的视频。分段1092示出了从50%向前速度线性加速到150%向前速度的视频。分段1094示出了非线性进入和离开分段1094时的50%反向速度。
通常,用户界面显示可以指示对其应用了可变速度效果的视频的回放方向和速率。用户可以一看便知哪些分段在向前播放、反向运动播放、或作为静态帧播放,并且还伴有回放速率的一般指示。用户界面在将可变速度回放效果应用于视频的过程期间可以提供清晰、直接的反馈。速度控制轨道(例如,时间线界面中的轨道项的单独部分)中的动态指示符可以表示视频在时间线序列中随时间如何回放,其中回放方向和速率的指示符与序列直接对应。用户可以一看便知视频是向前运动播放、反向运动播放、静态帧(冻结帧)图像、回放速度的加速度、回放速度的减速度、或者改变回放方向,而无需实际播放视频。此外,通过在时间线界面中给出速度控制轨道,指示回放速度比率(方向和速率)的标记可以与序列中实际回放的分段(并由此与它们的帧)具有一一对应的关系。
本说明书中描述的主题和功能性操作的实施方式可以以数字电子电路实现,或者以计算机软件、固件或硬件实现,该计算机软件、固件或硬件包括本说明书中公开的结构及其等价结构、或是它们的一个或多个的组合。本说明书中描述的主题的实施方式可以实现为一个或多个计算机程序产品,也即,在计算机可读介质上编码的、以便由数据处理装置执行或控制数据处理装置操作的一个或多个计算机程序指令模块。计算机可读介质可以是机器可读的存储设备、机器可读的存储衬底、存储设备、实现计算机可读的传播信号的组合、或者它们中的一个或多个的结合。术语“数据处理装置”包括用于处理数据的所有装置、设备和机器,例如包括可编程处理器、计算机、或者多个处理器或计算机。除了硬件之外,该装置可以还包括为考虑中的计算机程序创建执行环境的代码,例如,构成处理器固件、协议栈、数据库管理系统、操作系统、或者它们中一个或多个的结合的代码。传播信号是人工产生的信号,例如,机器产生的电信号、光信号或者电磁信号,产生该信号以对信息进行编码,以便传输到适当的接收器装置。
计算机程序(也公知为程序、软件、软件应用、脚本或代码)可以由任意形式的编程语言编写,包括编译语言或解释语言,并且该计算机程序可以任意形式部署,包括部署为单独的程序或模块、组件、子例程、或者适于在计算环境中使用的其他单元。计算机程序无需对应于文件系统中的文件。程序可以存储在保存其他程序或数据(例如,存储在标记语言文档中的一个或多个脚本)的文件的一部分中、可以存储在专门用于考虑中的程序的单个文件中、或者存储在多个协同文件中(例如,存储一个或多个模块、子程序、或代码部分的文件)。可以将计算机程序部署为在一个计算机上执行,或者将其部署为在位于一个地点的多个计算机上执行或分布在多个地点上且通过通信网络互连的多个计算机上执行。
本说明书中描述的处理和逻辑流程可以由执行一个或多个计算机程序的一个或多个可编程处理器执行,用于通过对输入数据进行操作以及产生输出来执行功能。该处理和逻辑流程还可以由例如FPGA(现场可编程门阵列)或ASIC(特定用途集成电路)的专用逻辑电路执行,并且也可以将装置实现为所述专用逻辑电路。
适于计算机程序执行的处理器例如包括通用和专用处理器两者、以及任意类型的数字计算机的任意一个或多个处理器。通常,处理器将从只读存储器或随机访问存储器或两者处接收指令和数据。计算机的基本元件是用于执行指令的处理器以及用于存储指令和数据的一个或多个存储设备。通常,计算机还将包括用于存储数据的一个或多个海量存储设备,或被操作性地耦合为从所述用于存储数据的一个或多个海量存储设备接收数据、向其传送数据、或者进行两者,该海量存储设备例如磁盘、磁光盘、或光盘。然而,计算机不一定具有这样的设备。而且,计算机可以嵌在其他设备中,例如移动电话、个人数字助理(PDA)、移动音频播放器、全球定位系统(GPS)接收器,这仅是几例。适于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储设备,例如包括:半导体存储设备,如EPROM、EEPROM和闪存设备;磁盘,如内部硬盘或可移动硬盘;磁光盘;以及CD-ROM和DVD-ROM盘。处理器和存储器可以由专用逻辑电路补充或是包括在专用逻辑电路中。
为了提供与用户的交互,本说明书中描述的主题的实施方式可以在具有用于向用户显示信息的显示设备以及用户可以通过其向计算机提供输入的键盘和指点设备的计算机上实现,其中显示设备例如CRT(阴极射线管)或者LCD(液晶显示器)监视器,指点设备例如鼠标或者轨迹球。也可以使用其他类型的设备来提供与用户的交互;例如,提供给用户的反馈可以是任何形式的感观反馈,例如视觉反馈、声觉反馈、或者触觉反馈;并且可以接收来自用户的任意形式的输入,包括声音、语音或触觉输入。
本说明书中描述的主题的实施方式可以实现在包括后端组件的计算系统中,例如数据服务器;或实现在包括中间件组件的计算系统中,例如应用服务器;或实现在包括前端组件的计算系统中,例如具有图形用户界面或者Web浏览器的客户端计算机,用户通过该图形用户界面或Web浏览器可以与本说明书中描述的主题的实现进行交互;或实现在一个或多个这样的后端、中间件、或前端组件的任意结合中。系统组件可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”)以及例如互联网的广域网(“WAN”)。
计算系统可以包括客户端和服务器。客户端和服务器一般相互远离,并且通常通过通信网络进行交互。客户端和服务器的关系是借助于在各自计算机上运行的、彼此具有客户端-服务器关系的计算机程序得到的。
尽管本说明书包含多种特定细节,但是不应将其理解为是对本发明的范围或者所要求保护内容的限制,而应当理解为是本发明具体实施方式的特定特征的描述。本说明书中描述的在各个实施方式的上下文中的某些特征也可以在单个实施方式中结合实现。相反,在单个实施方式上下文中描述的各种特征也可以分别实现在多个实施方式中或者任意适当的子组合中。而且,尽管上文可能将特征描述为在特定的组合中操作,甚至初始也是这样要求保护的,但是来自所要求保护的组合的一个或多个特征在一些情况下可以从该组合中去除,并且所要求保护的组合可以针对子组合或组合的变形。
类似地,尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。而且,在上述实施方式中多个系统组件的分离不应被理解为在所有实施方式中需要这样的分离,应当理解所描述的程序组件和系统通常可以在单个软件产品中集成在一起,或是被打包到多个软件产品中。
因此,已经描述了本发明的具体实施方式。其他实施方式在所附权利要求书的范围之内。例如,可以按照不同的顺序执行权利要求书中所述的动作,并且仍然得到期望的结果。另外,在可变回放速度比率调节期间,可一起处理视频通道和音频通道,或者可以将音频通道从视频通道解耦合。此外,所描述的技术可以应用于各种不同的轨道类型,例如字幕轨道。
Claims (36)
1.一种计算机实现的方法,包括:
提供用于数字视频编辑系统的用户界面,所述用户界面包括数字视频序列的回放速度比率和回放持续时间的图形表示,并且所述用户界面包括指向所述数字视频序列中各自帧的已定义点;
接收指明所述数字视频序列的回放速度比率的改变的输入;以及
显示所述数字视频序列的所述回放速度比率的改变以及对应的回放持续时间的改变,所述显示包括根据所述已定义点中的一个点所指向的对应帧的新时间位置,来移动所述已定义点中的所述一个点。
2.根据权利要求1所述的方法,其中:提供所述用户界面包括提供时间线界面,所述时间线界面包括重叠在所述时间线界面的轨道中的轨道项之上的图形表示,所述轨道项对应于所述数字视频序列,所述图形表示在这样的图中包括回放速度比率的线图,该图具有代表回放持续时间的横轴和代表回放速度比率的纵轴;以及接收指明所述回放速度比率改变的输入包括,接收由对所述线图的分段执行的拖拽操作所定义的输入。
3.根据权利要求2所述的方法,其中移动所述已定义点中的所述一个点包括,移动所述时间线界面中的所述轨道项的结束点,并且在所述结束点移动超过所述轨道中的下一个轨道项的开始点时,裁剪所述时间线界面中的所述轨道项。
4.根据权利要求1所述的方法,包括接收定义第一关键帧点的输入,所述第一关键帧点指向所述数字视频序列中的特定帧,所述已定义点包括所述第一关键帧点,并且其中所述移动包括移动所述第一关键帧点以及所述已定义点中的所述一个点。
5.根据权利要求4所述的方法,包括:
接收定义第二关键帧点的输入,所述第二关键帧点指向所述数字视频序列中的其他帧,所述已定义点包括所述第二关键帧点并且描述所述数字视频序列的至少三个不同分段,所述至少三个不同分段中的每一个具有来自所述数字视频序列的对应的帧子集;
接收指定所述回放速度比率的改变的输入包括,接收对所述至少三个不同分段中的一个分段的回放速度比率的调节;
对于所述至少三个不同分段中的所有分段,维护分段与帧的对应关系,同时对所述至少三个不同分段中的所述一个分段进行所述回放速度比率的调节;以及
显示所述回放速度比率的改变以及所述对应的回放持续时间的改变包括,根据所述回放速度比率的调节来更新所述数字视频序列的总持续时间。
6.根据权利要求4所述的方法,其中接收指定所述回放速度比率改变的输入包括,接收关于所述第一关键帧点而指定静态帧回放的持续时间的输入。
7.根据权利要求4所述的方法,其中接收指定所述回放速度比率改变的输入包括,接收关于所述第一关键帧点而指定反向回放的持续时间的输入。
8.根据权利要求4所述的方法,其中所述第一关键帧点包括可分割的关键帧点,所述用户界面包括可变比率速度控制,配置以针对所述可分割关键帧点定义相关联的关键帧元素,所述关键帧元素包括开始元素、结束元素以及中间时间元素,并且所述方法包括:
通过所述可变比率速度控制来接收输入,所述输入定义与数字视频序列相关的至少一个所述关键帧元素;以及
基于所述输入来产生时间过渡函数,以用于重映射所述数字视频序列的回放时间,其中所述时间过渡函数维持进入所述开始元素的视频帧的预定义速度、维持离开所述结束元素的视频帧的预定义速度、并且根据与所述中间时间元素相关联的一个或多个值来将视频速度从开始速度值改变为结束速度值,其中所述开始速度值与所述开始元素相关联,所述结束速度值与所述结束元素相关联。
9.根据权利要求8所述的方法,其中产生所述时间过渡函数包括确定所述开始元素的第一位置和所述结束元素的第二位置之间的两个曲线的结合,所述两个曲线环绕所述第一位置和第二位置之间的中心点旋转对称。
10.根据权利要求1所述的方法,其中所述显示包括提供沿着所述数字视频序列的所述图形显示的标记,所述标记包括代表至少两个不同回放速度比率的不同形状。
11.根据权利要求10所述的方法,其中所述显示包括使用索引到所述图形表示中的位置的不同形状来表示回放速度比率的变化程度,并且所述不同形状包括小于号和大于号。
12.一种数字视频编辑设备,包括:
提供装置,用于提供用于数字视频编辑系统的用户界面,所述用户界面包括数字视频序列的回放速度比率和回放持续时间的图形表示,并且所述用户界面包括指向所述数字视频序列中各自帧的已定义点;
第一接收装置,用于接收指明所述数字视频序列的回放速度比率的改变的输入;以及
显示装置,用于显示所述数字视频序列的所述回放速度比率的改变以及对应的回放持续时间的改变,所述显示装置包括移动模块,用于根据所述已定义点中的一个点所指向的对应帧的新时间位置,来移动所述已定义点中的所述一个点。
13.根据权利要求12所述的数字视频编辑设备,其中:提供所述用户界面的所述提供装置包括提供模块,用于提供时间线界面,所述时间线界面包括覆盖重叠在所述时间线界面的轨道中的轨道项之上的图形表示,所述轨道项对应于所述数字视频序列,所述图形表示在这样的图中包括回放速度比率的线图,该图具有代表回放持续时间的横轴和代表回放速度比率的纵轴;以及接收指明所述回放速度比率的改变的输入的所述第一接收装置包括第一接收模块,用于接收由对所述线图的分段执行的拖拽操作所定义的输入。
14.根据权利要求13所述的数字视频编辑设备,其中用于移动所述已定义点中的所述一个点的所述移动模块包括第一移动单元,用于移动所述时间线界面中的所述轨道项的结束点,并且在所述结束点移动超过所述轨道中的下一个轨道项的开始点时,裁剪所述时间线界面中的所述轨道项。
15.根据权利要求12所述的数字视频编辑设备,所述数字视频编辑设备包括第二接收装置,用于接收定义第一关键帧点的输入,所述第一关键帧点指向所述数字视频序列中的特定帧,所述已定义点包括所述第一关键帧点,并且其中所述移动模块包括第二移动单元,用于移动所述第一关键帧点以及所述已定义点中的所述一个点。
16.根据权利要求15所述的数字视频编辑设备,包括:
第三接收装置,用于接收定义第二关键帧点的输入,所述第二关键帧点指向所述数字视频序列中的其他帧,所述已定义点包括所述第二关键帧点并且描述所述数字视频序列的至少三个不同的分段,所述至少三个不同分段中的每一个具有来自所述数字视频序列的对应的帧子集;
接收指定所述回放速度比率的改变的输入的第一接收装置包括第二接收模块,用于接收对所述至少三个不同分段中的一个分段的回放速度比率的调节;
维护装置,用于对于所述至少三个不同分段中的所有分段,维护分段与帧的对应关系,同时对所述至少三个不同分段中的所述一个分段进行所述回放速度比率的调节;以及
显示所述回放速度比率的改变以及所述对应的回放持续时间的改变的所述显示装置包括更新模块,用于根据所述回放速度比率的调节来更新所述数字视频序列的总持续时间。
17.根据权利要求15所述的数字视频编辑设备,其中接收指定所述回放速度比率的改变的输入的第一接收装置包括第三接收模块,用于接收关于所述第一关键帧点而指定静态帧回放的持续时间的输入。
18.根据权利要求15所述的数字视频编辑设备,其中接收指定所述回放速度比率的改变的输入的第一接收装置包括第四接收模块,用于接收关于所述第一关键帧点而指定反向回放的持续时间的输入。
19.根据权利要求15所述的数字视频编辑设备,其中所述第一关键帧点包括可分割的关键帧点,所述用户界面包括可变比率速度控制,配置以针对所述可分割关键帧点定义相关联的关键帧元素,所述关键帧元素包括开始元素、结束元素以及中间时间元素,并且所述数字视频编辑设备还包括:
第四接收装置,用于通过所述可变比率速度控制来接收输入,所述输入定义与数字视频序列相关的至少一个所述关键帧元素;以及
产生装置,用于基于所述输入来产生时间过渡函数,以用于重映射所述数字视频序列的回放时间,其中所述时间过渡函数维持进入所述开始元素的视频帧的预定义速度、维持离开所述结束元素的视频帧的预定义速度、并且根据与所述中间时间元素相关联的一个或多个值来将视频速度从开始速度值改变为结束速度值,其中所述开始速度值与所述开始元素相关联,所述结束速度值与所述结束元素相关联。
20.根据权利要求19所述的数字视频编辑设备,其中产生所述时间过渡函数的所述产生装置包括确定模块,用于确定所述开始元素的第一位置和所述结束元素的第二位置之间的两个曲线的结合,所述两个曲线环绕所述第一位置和第二位置之间的中心点旋转对称。
21.根据权利要求12所述的数字视频编辑设备,其中所述显示装置包括提供模块,用于提供沿着所述数字视频序列的所述图形显示的标记,所述标记包括代表至少两个不同回放速度比率的不同形状。
22.根据权利要求21所述的数字视频编辑设备,其中所述显示装置包括表示模块,用于使用索引到所述图形表示中的位置的不同形状来表示回放速度比率的变化程度,并且所述不同形状包括小于号和大于号。
23.一种系统,包括:
用户界面设备;以及
一个或多个数字视频编辑设备,可操作以与所述用户界面设备交互,并且包括:
提供装置,用于提供用于数字视频编辑系统的用户界面,所述用户界面包括数字视频序列的回放速度比率和回放持续时间的图形表示,并且所述用户界面包括指向所述数字视频序列中各自帧的已定义点;
第一接收装置,用于接收指明所述数字视频序列的回放速度比率的改变的输入;以及
显示装置,用于显示所述数字视频序列的所述回放速度比率的改变以及对应的回放持续时间的改变,所述显示装置包括移动模块,用于根据所述已定义点中的一个点所指向的对应帧的新时间位置来移动所述已定义点中的所述一个点。
24.根据权利要求23所述的系统,其中:提供所述用户界面的所述提供装置包括提供模块,用于提供时间线界面,所述时间线界面包括覆盖重叠在所述时间线界面的轨道中的轨道项之上的图形表示,所述轨道项对应于所述数字视频序列,所述图形表示在这样的图中包括回放速度比率的线图,其所述图具有代表回放持续时间的横轴和代表回放速度比率的纵轴;以及接收指明所述回放速度比率的改变的所述输入的所述第一接收装置包括第一接收模块,用于接收由对所述线图的分段所执行的拖拽操作所定义的输入。
25.根据权利要求24所述的系统,其中用于移动所述已定义点中的所述一个点的所述移动模块包括第一移动单元,用于移动所述时间线界面中的所述轨道项的结束点,并且在所述结束点移动超过所述轨道中的下一个轨道项的开始点时,裁剪所述时间线界面中的所述轨道项。
26.根据权利要求23所述的系统,所述数字视频编辑设备包括第二接收装置,用于接收定义第一关键帧点的输入,所述第一关键帧点指向所述数字视频序列中的特定帧,所述已定义点包括所述第一关键帧点,并且其中所述移动模块包括第二移动单元,用于移动所述第一关键帧点以及所述已定义点中的所述一个点。
27.根据权利要求26所述的系统,所述数字视频编辑设备包括:
第三接收装置,用于接收定义第二关键帧点的输入,所述第二关键帧点指向所述数字视频序列中的其他帧,所述已定义点包括所述第二关键帧点并且描述所述数字视频序列的至少三个不同的分段,所述至少三个不同分段中的每一个具有来自所述数字视频序列的对应的帧子集;
接收指定所述回放速度比率的改变的输入的第一接收装置包括第二接收模块,用于接收对所述至少三个不同分段中的一个分段的回放速度比率的调节;
维护装置,用于对于所述至少三个不同分段中的所有分段,维护分段与帧的对应关系,同时对所述至少三个不同分段中的所述一个分段进行所述回放速度比率的调节;以及
显示所述回放速度比率的改变以及所述对应的回放持续时间的改变的所述显示装置包括更新模块,用于根据所述回放速度比率的调节来更新所述数字视频序列的总持续时间。
28.根据权利要求26所述的系统,其中接收指定所述回放速度比率的改变的输入的第一接收装置包括第三接收模块,用于接收关于所述第一关键帧点而指定静态帧回放的持续时间的输入。
29.根据权利要求26所述的系统,其中接收指定所述回放速度比率的改变的输入的第一接收装置包括第四接收模块,用于接收关于所述第一关键帧点而指定反向回放的持续时间的输入。
30.根据权利要求26所述的系统,其中所述第一关键帧点包括可分割的关键帧点,所述用户界面包括可变比率速度控制,配置以针对所述可分割关键帧点定义相关联的关键帧元素,所述关键帧元素包括开始元素、结束元素以及中间时间元素,并且所述数字视频编辑设备还包括:
第四接收装置,用于通过所述可变比率速度控制来接收输入,所述输入定义与数字视频序列相关的至少一个所述关键帧元素;以及
产生装置,用于基于所述输入来产生时间过渡函数,以用于重映射所述数字视频序列的回放时间,其中所述时间过渡函数维持进入所述开始元素的视频帧的预定义速度、维持离开所述结束元素的视频帧的预定义速度、并且根据与所述中间时间元素相关联的一个或多个值将视频速度从开始速度值改变为结束速度值,其中所述开始速度值与所述开始元素相关联,所述结束速度值与所述结束元素相关联。
31.根据权利要求30所述的系统,其中产生所述时间过渡函数的所述产生装置包括确定模块,用于确定所述开始元素的第一位置和所述结束元素的第二位置之间的两个曲线的结合,所述两个曲线环绕所述第一位置和第二位置之间的中心点旋转对称。
32.根据权利要求23所述的系统,其中所述显示装置包括提供模块,用于提供沿着所述数字视频序列的所述图形显示的标记,所述标记包括代表至少两个不同回放速度比率的不同形状。
33.根据权利要求32所述的系统,其中所述显示装置包括表示模块,用于使用索引到所述图形表示中的位置的不同形状来表示回放速度比率的变化程度,并且所述不同形状包括小于号和大于号。
34.根据权利要求23所述的系统,其中所述一个或多个数字视频编辑设备包括服务器,所述服务器可操作以通过数据通信网络与所述用户界面设备交互,并且所述用户界面设备可操作以作为客户端与所述服务器交互。
35.根据权利要求34所述的系统,其中所述用户界面设备包括运行Web浏览器的个人计算机。
36.根据权利要求23所述的系统,其中所述一个或多个数字视频编辑设备包括一个个人计算机,并且所述个人计算机包括所述用户界面设备。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/735,951 | 2007-04-16 | ||
US11/735,951 US8170396B2 (en) | 2007-04-16 | 2007-04-16 | Changing video playback rate |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101290787A true CN101290787A (zh) | 2008-10-22 |
Family
ID=39853801
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2008100910745A Pending CN101290787A (zh) | 2007-04-16 | 2008-04-16 | 改变视频回放速度比率 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8170396B2 (zh) |
CN (1) | CN101290787A (zh) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102576561A (zh) * | 2009-03-19 | 2012-07-11 | Gvbb控股股份有限公司 | 用于编辑的装置和方法 |
CN102610254A (zh) * | 2011-01-19 | 2012-07-25 | 新奥特(北京)视频技术有限公司 | 一种读取任意多时间点数据实现变速与倒放的方法和系统 |
CN102867529A (zh) * | 2012-09-05 | 2013-01-09 | 安科智慧城市技术(中国)有限公司 | 多媒体视频时间轴的展现方法、装置、播放方法及播放器 |
CN103093780A (zh) * | 2011-11-04 | 2013-05-08 | 三星电子株式会社 | 控制移动终端中动画消息的回放速度的方法和装置 |
CN103150746A (zh) * | 2011-08-12 | 2013-06-12 | 索尼公司 | 时间线操作控制装置和方法、程序和图像处理器 |
CN104380380A (zh) * | 2012-06-08 | 2015-02-25 | Lg电子株式会社 | 视频编辑方法及其数字装置 |
CN104636138A (zh) * | 2011-12-29 | 2015-05-20 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
CN110692251A (zh) * | 2017-12-08 | 2020-01-14 | 谷歌有限责任公司 | 修改数字视频内容 |
CN110719440A (zh) * | 2019-09-26 | 2020-01-21 | 恒大智慧科技有限公司 | 一种视频回放方法、装置及存储介质 |
CN111083932A (zh) * | 2018-08-21 | 2020-04-28 | 谷歌有限责任公司 | 动态生成的界面过渡 |
CN111556351A (zh) * | 2020-05-15 | 2020-08-18 | 宁波菊风系统软件有限公司 | 一种rtp文件播放系统 |
CN111567030A (zh) * | 2018-04-23 | 2020-08-21 | Oppo广东移动通信有限公司 | 用于自动切换视频捕获及回放帧率的方法 |
WO2021249067A1 (en) * | 2020-06-12 | 2021-12-16 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for capturing a real-time video in a plurality of video modes |
CN113811948A (zh) * | 2019-04-01 | 2021-12-17 | 黑魔法设计私人有限公司 | 用于视频编辑系统的用户界面 |
CN115567655A (zh) * | 2022-09-16 | 2023-01-03 | 广西电网有限责任公司南宁供电局 | 一种断路器机构图像采集系统 |
Families Citing this family (201)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8749426B1 (en) | 2006-03-08 | 2014-06-10 | Netflix, Inc. | User interface and pointing device for a consumer electronics device |
US8233772B1 (en) * | 2007-04-16 | 2012-07-31 | Adobe Systems Incorporated | Generating transitions for remapping video playback time |
US8650489B1 (en) * | 2007-04-20 | 2014-02-11 | Adobe Systems Incorporated | Event processing in a content editor |
US9773525B2 (en) * | 2007-08-16 | 2017-09-26 | Adobe Systems Incorporated | Timeline management |
US9159325B2 (en) * | 2007-12-31 | 2015-10-13 | Adobe Systems Incorporated | Pitch shifting frequencies |
US8639086B2 (en) | 2009-01-06 | 2014-01-28 | Adobe Systems Incorporated | Rendering of video based on overlaying of bitmapped images |
US9025927B2 (en) * | 2009-03-25 | 2015-05-05 | Cyberlink Corp. | Systems and methods of variable frame rate playback |
US9564173B2 (en) | 2009-04-30 | 2017-02-07 | Apple Inc. | Media editing application for auditioning different types of media clips |
US8566721B2 (en) * | 2009-04-30 | 2013-10-22 | Apple Inc. | Editing key-indexed graphs in media editing applications |
US8549404B2 (en) | 2009-04-30 | 2013-10-01 | Apple Inc. | Auditioning tools for a media editing application |
US8701007B2 (en) * | 2009-04-30 | 2014-04-15 | Apple Inc. | Edit visualizer for modifying and evaluating uncommitted media content |
US8555169B2 (en) * | 2009-04-30 | 2013-10-08 | Apple Inc. | Media clip auditioning used to evaluate uncommitted media content |
US8881013B2 (en) * | 2009-04-30 | 2014-11-04 | Apple Inc. | Tool for tracking versions of media sections in a composite presentation |
US8522144B2 (en) * | 2009-04-30 | 2013-08-27 | Apple Inc. | Media editing application with candidate clip management |
US20110060993A1 (en) * | 2009-09-08 | 2011-03-10 | Classified Ventures, Llc | Interactive Detailed Video Navigation System |
CN102082774B (zh) * | 2009-12-01 | 2015-02-18 | 新奥特(北京)视频技术有限公司 | 一种流媒体数据播放方法及播放系统 |
US9191639B2 (en) | 2010-04-12 | 2015-11-17 | Adobe Systems Incorporated | Method and apparatus for generating video descriptions |
US8875025B2 (en) | 2010-07-15 | 2014-10-28 | Apple Inc. | Media-editing application with media clips grouping capabilities |
US8910046B2 (en) | 2010-07-15 | 2014-12-09 | Apple Inc. | Media-editing application with anchored timeline |
US8963847B2 (en) * | 2010-12-06 | 2015-02-24 | Netflix, Inc. | User interface for a remote control device |
US9099161B2 (en) | 2011-01-28 | 2015-08-04 | Apple Inc. | Media-editing application with multiple resolution modes |
US20120197841A1 (en) * | 2011-02-02 | 2012-08-02 | Laufer Yotam | Synchronizing data to media |
US11747972B2 (en) | 2011-02-16 | 2023-09-05 | Apple Inc. | Media-editing application with novel editing tools |
US8966367B2 (en) | 2011-02-16 | 2015-02-24 | Apple Inc. | Anchor override for a media-editing application with an anchored timeline |
US9997196B2 (en) * | 2011-02-16 | 2018-06-12 | Apple Inc. | Retiming media presentations |
US9557885B2 (en) | 2011-08-09 | 2017-01-31 | Gopro, Inc. | Digital media editing |
WO2013113985A1 (en) * | 2012-01-31 | 2013-08-08 | Nokia Corporation | Method, apparatus and computer program product for generation of motion images |
JP2013235513A (ja) * | 2012-05-10 | 2013-11-21 | Sony Computer Entertainment Inc | 画像生成装置、画像生成方法、プログラム及び情報記憶媒体 |
US11871901B2 (en) | 2012-05-20 | 2024-01-16 | Cilag Gmbh International | Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage |
US9014544B2 (en) | 2012-12-19 | 2015-04-21 | Apple Inc. | User interface for retiming in a media authoring tool |
JP5786892B2 (ja) * | 2013-05-16 | 2015-09-30 | カシオ計算機株式会社 | 動画再生装置、動画再生方法及びプログラム |
US9423932B2 (en) * | 2013-06-21 | 2016-08-23 | Nook Digital, Llc | Zoom view mode for digital content including multiple regions of interest |
CN104639862B (zh) * | 2013-11-11 | 2019-04-12 | 杭州海康威视数字技术股份有限公司 | 录像文件的回放方法及装置 |
US9754159B2 (en) | 2014-03-04 | 2017-09-05 | Gopro, Inc. | Automatic generation of video from spherical content using location-based metadata |
USD772888S1 (en) * | 2014-06-01 | 2016-11-29 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
US9685194B2 (en) | 2014-07-23 | 2017-06-20 | Gopro, Inc. | Voice-based video tagging |
US9984293B2 (en) | 2014-07-23 | 2018-05-29 | Gopro, Inc. | Video scene classification by activity |
US11504192B2 (en) | 2014-10-30 | 2022-11-22 | Cilag Gmbh International | Method of hub communication with surgical instrument systems |
US9734870B2 (en) | 2015-01-05 | 2017-08-15 | Gopro, Inc. | Media identifier generation for camera-captured media |
US9679605B2 (en) * | 2015-01-29 | 2017-06-13 | Gopro, Inc. | Variable playback speed template for video editing application |
WO2016187235A1 (en) | 2015-05-20 | 2016-11-24 | Gopro, Inc. | Virtual lens simulation for video and photo cropping |
US9894393B2 (en) | 2015-08-31 | 2018-02-13 | Gopro, Inc. | Video encoding for reduced streaming latency |
US10204273B2 (en) | 2015-10-20 | 2019-02-12 | Gopro, Inc. | System and method of providing recommendations of moments of interest within video clips post capture |
US9721611B2 (en) | 2015-10-20 | 2017-08-01 | Gopro, Inc. | System and method of generating video from video clips based on moments of interest within the video clips |
US10095696B1 (en) | 2016-01-04 | 2018-10-09 | Gopro, Inc. | Systems and methods for generating recommendations of post-capture users to edit digital media content field |
US10109319B2 (en) | 2016-01-08 | 2018-10-23 | Gopro, Inc. | Digital media editing |
US10083537B1 (en) | 2016-02-04 | 2018-09-25 | Gopro, Inc. | Systems and methods for adding a moving visual element to a video |
US9972066B1 (en) | 2016-03-16 | 2018-05-15 | Gopro, Inc. | Systems and methods for providing variable image projection for spherical visual content |
US10402938B1 (en) | 2016-03-31 | 2019-09-03 | Gopro, Inc. | Systems and methods for modifying image distortion (curvature) for viewing distance in post capture |
US9838731B1 (en) | 2016-04-07 | 2017-12-05 | Gopro, Inc. | Systems and methods for audio track selection in video editing with audio mixing option |
US9838730B1 (en) | 2016-04-07 | 2017-12-05 | Gopro, Inc. | Systems and methods for audio track selection in video editing |
US9794632B1 (en) | 2016-04-07 | 2017-10-17 | Gopro, Inc. | Systems and methods for synchronization based on audio track changes in video editing |
US9922682B1 (en) | 2016-06-15 | 2018-03-20 | Gopro, Inc. | Systems and methods for organizing video files |
US9998769B1 (en) | 2016-06-15 | 2018-06-12 | Gopro, Inc. | Systems and methods for transcoding media files |
US10250894B1 (en) | 2016-06-15 | 2019-04-02 | Gopro, Inc. | Systems and methods for providing transcoded portions of a video |
US10045120B2 (en) | 2016-06-20 | 2018-08-07 | Gopro, Inc. | Associating audio with three-dimensional objects in videos |
US10185891B1 (en) | 2016-07-08 | 2019-01-22 | Gopro, Inc. | Systems and methods for compact convolutional neural networks |
US10469909B1 (en) | 2016-07-14 | 2019-11-05 | Gopro, Inc. | Systems and methods for providing access to still images derived from a video |
US10395119B1 (en) | 2016-08-10 | 2019-08-27 | Gopro, Inc. | Systems and methods for determining activities performed during video capture |
US9836853B1 (en) | 2016-09-06 | 2017-12-05 | Gopro, Inc. | Three-dimensional convolutional neural networks for video highlight detection |
US10282632B1 (en) | 2016-09-21 | 2019-05-07 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video |
US10268898B1 (en) | 2016-09-21 | 2019-04-23 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video via segments |
US10002641B1 (en) | 2016-10-17 | 2018-06-19 | Gopro, Inc. | Systems and methods for determining highlight segment sets |
US10284809B1 (en) | 2016-11-07 | 2019-05-07 | Gopro, Inc. | Systems and methods for intelligently synchronizing events in visual content with musical features in audio content |
US10262639B1 (en) | 2016-11-08 | 2019-04-16 | Gopro, Inc. | Systems and methods for detecting musical features in audio content |
US10534966B1 (en) | 2017-02-02 | 2020-01-14 | Gopro, Inc. | Systems and methods for identifying activities and/or events represented in a video |
US10339443B1 (en) | 2017-02-24 | 2019-07-02 | Gopro, Inc. | Systems and methods for processing convolutional neural network operations using textures |
US10127943B1 (en) | 2017-03-02 | 2018-11-13 | Gopro, Inc. | Systems and methods for modifying videos based on music |
US10185895B1 (en) | 2017-03-23 | 2019-01-22 | Gopro, Inc. | Systems and methods for classifying activities captured within images |
US10083718B1 (en) | 2017-03-24 | 2018-09-25 | Gopro, Inc. | Systems and methods for editing videos based on motion |
US10187690B1 (en) | 2017-04-24 | 2019-01-22 | Gopro, Inc. | Systems and methods to detect and correlate user responses to media content |
US10395122B1 (en) | 2017-05-12 | 2019-08-27 | Gopro, Inc. | Systems and methods for identifying moments in videos |
US10402698B1 (en) | 2017-07-10 | 2019-09-03 | Gopro, Inc. | Systems and methods for identifying interesting moments within videos |
US10614114B1 (en) | 2017-07-10 | 2020-04-07 | Gopro, Inc. | Systems and methods for creating compilations based on hierarchical clustering |
US10402656B1 (en) | 2017-07-13 | 2019-09-03 | Gopro, Inc. | Systems and methods for accelerating video analysis |
US11793537B2 (en) | 2017-10-30 | 2023-10-24 | Cilag Gmbh International | Surgical instrument comprising an adaptive electrical system |
US11229436B2 (en) | 2017-10-30 | 2022-01-25 | Cilag Gmbh International | Surgical system comprising a surgical tool and a surgical hub |
US11510741B2 (en) | 2017-10-30 | 2022-11-29 | Cilag Gmbh International | Method for producing a surgical instrument comprising a smart electrical system |
US11311342B2 (en) | 2017-10-30 | 2022-04-26 | Cilag Gmbh International | Method for communicating with surgical instrument systems |
US11564756B2 (en) | 2017-10-30 | 2023-01-31 | Cilag Gmbh International | Method of hub communication with surgical instrument systems |
US11801098B2 (en) | 2017-10-30 | 2023-10-31 | Cilag Gmbh International | Method of hub communication with surgical instrument systems |
US11406390B2 (en) | 2017-10-30 | 2022-08-09 | Cilag Gmbh International | Clip applier comprising interchangeable clip reloads |
US11911045B2 (en) | 2017-10-30 | 2024-02-27 | Cllag GmbH International | Method for operating a powered articulating multi-clip applier |
US11317919B2 (en) | 2017-10-30 | 2022-05-03 | Cilag Gmbh International | Clip applier comprising a clip crimping system |
US11291510B2 (en) | 2017-10-30 | 2022-04-05 | Cilag Gmbh International | Method of hub communication with surgical instrument systems |
US20190206569A1 (en) | 2017-12-28 | 2019-07-04 | Ethicon Llc | Method of cloud based data analytics for use with the hub |
US11633237B2 (en) | 2017-12-28 | 2023-04-25 | Cilag Gmbh International | Usage and technique analysis of surgeon / staff performance against a baseline to optimize device utilization and performance for both current and future procedures |
US11100631B2 (en) | 2017-12-28 | 2021-08-24 | Cilag Gmbh International | Use of laser light and red-green-blue coloration to determine properties of back scattered light |
US10758310B2 (en) | 2017-12-28 | 2020-09-01 | Ethicon Llc | Wireless pairing of a surgical device with another device within a sterile surgical field based on the usage and situational awareness of devices |
US11013563B2 (en) | 2017-12-28 | 2021-05-25 | Ethicon Llc | Drive arrangements for robot-assisted surgical platforms |
US11540855B2 (en) | 2017-12-28 | 2023-01-03 | Cilag Gmbh International | Controlling activation of an ultrasonic surgical instrument according to the presence of tissue |
US11069012B2 (en) | 2017-12-28 | 2021-07-20 | Cilag Gmbh International | Interactive surgical systems with condition handling of devices and data capabilities |
US11612444B2 (en) | 2017-12-28 | 2023-03-28 | Cilag Gmbh International | Adjustment of a surgical device function based on situational awareness |
US11166772B2 (en) | 2017-12-28 | 2021-11-09 | Cilag Gmbh International | Surgical hub coordination of control and communication of operating room devices |
US11109866B2 (en) | 2017-12-28 | 2021-09-07 | Cilag Gmbh International | Method for circular stapler control algorithm adjustment based on situational awareness |
US11464535B2 (en) | 2017-12-28 | 2022-10-11 | Cilag Gmbh International | Detection of end effector emersion in liquid |
US11937769B2 (en) | 2017-12-28 | 2024-03-26 | Cilag Gmbh International | Method of hub communication, processing, storage and display |
US11056244B2 (en) * | 2017-12-28 | 2021-07-06 | Cilag Gmbh International | Automated data scaling, alignment, and organizing based on predefined parameters within surgical networks |
US11602393B2 (en) | 2017-12-28 | 2023-03-14 | Cilag Gmbh International | Surgical evacuation sensing and generator control |
US11266468B2 (en) | 2017-12-28 | 2022-03-08 | Cilag Gmbh International | Cooperative utilization of data derived from secondary sources by intelligent surgical hubs |
US11529187B2 (en) | 2017-12-28 | 2022-12-20 | Cilag Gmbh International | Surgical evacuation sensor arrangements |
US11896443B2 (en) | 2017-12-28 | 2024-02-13 | Cilag Gmbh International | Control of a surgical system through a surgical barrier |
US11364075B2 (en) | 2017-12-28 | 2022-06-21 | Cilag Gmbh International | Radio frequency energy device for delivering combined electrical signals |
US11273001B2 (en) | 2017-12-28 | 2022-03-15 | Cilag Gmbh International | Surgical hub and modular device response adjustment based on situational awareness |
US11969216B2 (en) | 2017-12-28 | 2024-04-30 | Cilag Gmbh International | Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution |
US12062442B2 (en) | 2017-12-28 | 2024-08-13 | Cilag Gmbh International | Method for operating surgical instrument systems |
US10987178B2 (en) | 2017-12-28 | 2021-04-27 | Ethicon Llc | Surgical hub control arrangements |
US11903601B2 (en) | 2017-12-28 | 2024-02-20 | Cilag Gmbh International | Surgical instrument comprising a plurality of drive systems |
US11324557B2 (en) | 2017-12-28 | 2022-05-10 | Cilag Gmbh International | Surgical instrument with a sensing array |
US11678881B2 (en) | 2017-12-28 | 2023-06-20 | Cilag Gmbh International | Spatial awareness of surgical hubs in operating rooms |
US11424027B2 (en) | 2017-12-28 | 2022-08-23 | Cilag Gmbh International | Method for operating surgical instrument systems |
US10943454B2 (en) | 2017-12-28 | 2021-03-09 | Ethicon Llc | Detection and escalation of security responses of surgical instruments to increasing severity threats |
US11832840B2 (en) | 2017-12-28 | 2023-12-05 | Cilag Gmbh International | Surgical instrument having a flexible circuit |
US11786245B2 (en) | 2017-12-28 | 2023-10-17 | Cilag Gmbh International | Surgical systems with prioritized data transmission capabilities |
US11376002B2 (en) | 2017-12-28 | 2022-07-05 | Cilag Gmbh International | Surgical instrument cartridge sensor assemblies |
US11179175B2 (en) | 2017-12-28 | 2021-11-23 | Cilag Gmbh International | Controlling an ultrasonic surgical instrument according to tissue location |
US11666331B2 (en) | 2017-12-28 | 2023-06-06 | Cilag Gmbh International | Systems for detecting proximity of surgical end effector to cancerous tissue |
US11771487B2 (en) | 2017-12-28 | 2023-10-03 | Cilag Gmbh International | Mechanisms for controlling different electromechanical systems of an electrosurgical instrument |
US11026751B2 (en) | 2017-12-28 | 2021-06-08 | Cilag Gmbh International | Display of alignment of staple cartridge to prior linear staple line |
US11423007B2 (en) | 2017-12-28 | 2022-08-23 | Cilag Gmbh International | Adjustment of device control programs based on stratified contextual data in addition to the data |
US11832899B2 (en) | 2017-12-28 | 2023-12-05 | Cilag Gmbh International | Surgical systems with autonomously adjustable control programs |
US11576677B2 (en) | 2017-12-28 | 2023-02-14 | Cilag Gmbh International | Method of hub communication, processing, display, and cloud analytics |
US11419667B2 (en) | 2017-12-28 | 2022-08-23 | Cilag Gmbh International | Ultrasonic energy device which varies pressure applied by clamp arm to provide threshold control pressure at a cut progression location |
US11410259B2 (en) | 2017-12-28 | 2022-08-09 | Cilag Gmbh International | Adaptive control program updates for surgical devices |
US11304699B2 (en) | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Method for adaptive control schemes for surgical network control and interaction |
US11179208B2 (en) | 2017-12-28 | 2021-11-23 | Cilag Gmbh International | Cloud-based medical analytics for security and authentication trends and reactive measures |
US11308075B2 (en) | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Surgical network, instrument, and cloud responses based on validation of received dataset and authentication of its source and integrity |
US11896322B2 (en) | 2017-12-28 | 2024-02-13 | Cilag Gmbh International | Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub |
US11864728B2 (en) | 2017-12-28 | 2024-01-09 | Cilag Gmbh International | Characterization of tissue irregularities through the use of mono-chromatic light refractivity |
US11132462B2 (en) | 2017-12-28 | 2021-09-28 | Cilag Gmbh International | Data stripping method to interrogate patient records and create anonymized record |
US11234756B2 (en) | 2017-12-28 | 2022-02-01 | Cilag Gmbh International | Powered surgical tool with predefined adjustable control algorithm for controlling end effector parameter |
US11744604B2 (en) | 2017-12-28 | 2023-09-05 | Cilag Gmbh International | Surgical instrument with a hardware-only control circuit |
US11446052B2 (en) | 2017-12-28 | 2022-09-20 | Cilag Gmbh International | Variation of radio frequency and ultrasonic power level in cooperation with varying clamp arm pressure to achieve predefined heat flux or power applied to tissue |
US11304763B2 (en) | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Image capturing of the areas outside the abdomen to improve placement and control of a surgical device in use |
US11311306B2 (en) | 2017-12-28 | 2022-04-26 | Cilag Gmbh International | Surgical systems for detecting end effector tissue distribution irregularities |
US11464559B2 (en) | 2017-12-28 | 2022-10-11 | Cilag Gmbh International | Estimating state of ultrasonic end effector and control system therefor |
US11257589B2 (en) | 2017-12-28 | 2022-02-22 | Cilag Gmbh International | Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes |
US11304720B2 (en) | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Activation of energy devices |
US11096693B2 (en) | 2017-12-28 | 2021-08-24 | Cilag Gmbh International | Adjustment of staple height of at least one row of staples based on the sensed tissue thickness or force in closing |
US11045591B2 (en) | 2017-12-28 | 2021-06-29 | Cilag Gmbh International | Dual in-series large and small droplet filters |
US11969142B2 (en) | 2017-12-28 | 2024-04-30 | Cilag Gmbh International | Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws |
US11147607B2 (en) | 2017-12-28 | 2021-10-19 | Cilag Gmbh International | Bipolar combination device that automatically adjusts pressure based on energy modality |
US10892995B2 (en) | 2017-12-28 | 2021-01-12 | Ethicon Llc | Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs |
US11818052B2 (en) | 2017-12-28 | 2023-11-14 | Cilag Gmbh International | Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs |
US11304745B2 (en) | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Surgical evacuation sensing and display |
US11278281B2 (en) | 2017-12-28 | 2022-03-22 | Cilag Gmbh International | Interactive surgical system |
US12096916B2 (en) | 2017-12-28 | 2024-09-24 | Cilag Gmbh International | Method of sensing particulate from smoke evacuated from a patient, adjusting the pump speed based on the sensed information, and communicating the functional parameters of the system to the hub |
US11559308B2 (en) | 2017-12-28 | 2023-01-24 | Cilag Gmbh International | Method for smart energy device infrastructure |
US11253315B2 (en) | 2017-12-28 | 2022-02-22 | Cilag Gmbh International | Increasing radio frequency to create pad-less monopolar loop |
US11786251B2 (en) | 2017-12-28 | 2023-10-17 | Cilag Gmbh International | Method for adaptive control schemes for surgical network control and interaction |
US11589888B2 (en) | 2017-12-28 | 2023-02-28 | Cilag Gmbh International | Method for controlling smart energy devices |
US11389164B2 (en) | 2017-12-28 | 2022-07-19 | Cilag Gmbh International | Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices |
US11317937B2 (en) | 2018-03-08 | 2022-05-03 | Cilag Gmbh International | Determining the state of an ultrasonic end effector |
US11571234B2 (en) | 2017-12-28 | 2023-02-07 | Cilag Gmbh International | Temperature control of ultrasonic end effector and control system therefor |
US11213359B2 (en) | 2017-12-28 | 2022-01-04 | Cilag Gmbh International | Controllers for robot-assisted surgical platforms |
US10966791B2 (en) | 2017-12-28 | 2021-04-06 | Ethicon Llc | Cloud-based medical analytics for medical facility segmented individualization of instrument function |
US11419630B2 (en) | 2017-12-28 | 2022-08-23 | Cilag Gmbh International | Surgical system distributed processing |
US11659023B2 (en) | 2017-12-28 | 2023-05-23 | Cilag Gmbh International | Method of hub communication |
US11051876B2 (en) | 2017-12-28 | 2021-07-06 | Cilag Gmbh International | Surgical evacuation flow paths |
US11559307B2 (en) | 2017-12-28 | 2023-01-24 | Cilag Gmbh International | Method of robotic hub communication, detection, and control |
US11998193B2 (en) | 2017-12-28 | 2024-06-04 | Cilag Gmbh International | Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation |
US11432885B2 (en) | 2017-12-28 | 2022-09-06 | Cilag Gmbh International | Sensing arrangements for robot-assisted surgical platforms |
US11076921B2 (en) | 2017-12-28 | 2021-08-03 | Cilag Gmbh International | Adaptive control program updates for surgical hubs |
US11202570B2 (en) | 2017-12-28 | 2021-12-21 | Cilag Gmbh International | Communication hub and storage device for storing parameters and status of a surgical device to be shared with cloud based analytics systems |
US11857152B2 (en) | 2017-12-28 | 2024-01-02 | Cilag Gmbh International | Surgical hub spatial awareness to determine devices in operating theater |
US11160605B2 (en) | 2017-12-28 | 2021-11-02 | Cilag Gmbh International | Surgical evacuation sensing and motor control |
US11284936B2 (en) | 2017-12-28 | 2022-03-29 | Cilag Gmbh International | Surgical instrument having a flexible electrode |
US11291495B2 (en) | 2017-12-28 | 2022-04-05 | Cilag Gmbh International | Interruption of energy due to inadvertent capacitive coupling |
US20190201146A1 (en) | 2017-12-28 | 2019-07-04 | Ethicon Llc | Safety systems for smart powered surgical stapling |
US11399858B2 (en) | 2018-03-08 | 2022-08-02 | Cilag Gmbh International | Application of smart blade technology |
US11678927B2 (en) | 2018-03-08 | 2023-06-20 | Cilag Gmbh International | Detection of large vessels during parenchymal dissection using a smart blade |
US11259830B2 (en) | 2018-03-08 | 2022-03-01 | Cilag Gmbh International | Methods for controlling temperature in ultrasonic device |
US11259806B2 (en) | 2018-03-28 | 2022-03-01 | Cilag Gmbh International | Surgical stapling devices with features for blocking advancement of a camming assembly of an incompatible cartridge installed therein |
US11090047B2 (en) | 2018-03-28 | 2021-08-17 | Cilag Gmbh International | Surgical instrument comprising an adaptive control system |
US11278280B2 (en) | 2018-03-28 | 2022-03-22 | Cilag Gmbh International | Surgical instrument comprising a jaw closure lockout |
US11213294B2 (en) | 2018-03-28 | 2022-01-04 | Cilag Gmbh International | Surgical instrument comprising co-operating lockout features |
US11219453B2 (en) | 2018-03-28 | 2022-01-11 | Cilag Gmbh International | Surgical stapling devices with cartridge compatible closure and firing lockout arrangements |
US11207067B2 (en) | 2018-03-28 | 2021-12-28 | Cilag Gmbh International | Surgical stapling device with separate rotary driven closure and firing systems and firing member that engages both jaws while firing |
US10973520B2 (en) | 2018-03-28 | 2021-04-13 | Ethicon Llc | Surgical staple cartridge with firing member driven camming assembly that has an onboard tissue cutting feature |
US11471156B2 (en) | 2018-03-28 | 2022-10-18 | Cilag Gmbh International | Surgical stapling devices with improved rotary driven closure systems |
US11096688B2 (en) | 2018-03-28 | 2021-08-24 | Cilag Gmbh International | Rotary driven firing members with different anvil and channel engagement features |
US11317915B2 (en) | 2019-02-19 | 2022-05-03 | Cilag Gmbh International | Universal cartridge based key feature that unlocks multiple lockout arrangements in different surgical staplers |
US11369377B2 (en) | 2019-02-19 | 2022-06-28 | Cilag Gmbh International | Surgical stapling assembly with cartridge based retainer configured to unlock a firing lockout |
US11331100B2 (en) | 2019-02-19 | 2022-05-17 | Cilag Gmbh International | Staple cartridge retainer system with authentication keys |
US11751872B2 (en) | 2019-02-19 | 2023-09-12 | Cilag Gmbh International | Insertable deactivator element for surgical stapler lockouts |
US11357503B2 (en) | 2019-02-19 | 2022-06-14 | Cilag Gmbh International | Staple cartridge retainers with frangible retention features and methods of using same |
EP3948502A4 (en) * | 2019-04-01 | 2022-12-28 | Blackmagic Design Pty Ltd | MULTIMEDIA MANAGEMENT SYSTEM |
US10863242B1 (en) * | 2019-05-28 | 2020-12-08 | Rovi Guides, Inc. | Systems and methods for generating a playback timeline |
US11153642B2 (en) | 2019-05-28 | 2021-10-19 | Rovi Guides, Inc. | Systems and methods for generating a playback timeline |
USD964564S1 (en) | 2019-06-25 | 2022-09-20 | Cilag Gmbh International | Surgical staple cartridge retainer with a closure system authentication key |
USD952144S1 (en) | 2019-06-25 | 2022-05-17 | Cilag Gmbh International | Surgical staple cartridge retainer with firing system authentication key |
USD950728S1 (en) | 2019-06-25 | 2022-05-03 | Cilag Gmbh International | Surgical staple cartridge |
US12057141B2 (en) | 2019-08-02 | 2024-08-06 | Blackmagic Design Pty Ltd | Video editing system, method and user interface |
WO2021026785A1 (zh) * | 2019-08-13 | 2021-02-18 | 深圳市大疆创新科技有限公司 | 视频的处理方法、装置和存储介质 |
US10885941B1 (en) * | 2019-08-28 | 2021-01-05 | Rovi Guides, Inc. | Adapting runtime and providing content during an activity |
US11442609B1 (en) * | 2020-04-08 | 2022-09-13 | Gopro, Inc. | Interface for setting speed and direction of video playback |
CN111669623B (zh) * | 2020-06-28 | 2023-10-13 | 腾讯科技(深圳)有限公司 | 视频特效的处理方法、装置以及电子设备 |
US11721365B2 (en) | 2020-11-09 | 2023-08-08 | Blackmagic Design Pty Ltd | Video editing or media management system |
US20220358314A1 (en) * | 2021-05-07 | 2022-11-10 | Waymo Llc | Time-line based object tracking annotation |
WO2023281107A1 (en) * | 2021-07-09 | 2023-01-12 | Soclip! | Automatic modulation of display timing based on beat |
CN115914747B (zh) * | 2022-09-30 | 2024-06-14 | 广州维梦科技有限公司 | 一种多媒体片段播放速率的调整方法及调整系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6115037A (en) * | 1996-11-15 | 2000-09-05 | Hitachi Denshi Kabushiki Kaisha | Motion image control method and apparatus |
JP4207099B2 (ja) * | 1998-09-29 | 2009-01-14 | ソニー株式会社 | 画像編集装置及びその方法 |
US7000184B2 (en) * | 2003-01-24 | 2006-02-14 | The Cobalt Group, Inc. | Remote web site editing in a standard web browser without external software |
US7725828B1 (en) * | 2003-10-15 | 2010-05-25 | Apple Inc. | Application of speed effects to a video presentation |
JP4297010B2 (ja) * | 2004-08-13 | 2009-07-15 | ソニー株式会社 | 情報処理装置および情報処理方法、並びに、プログラム |
US7716572B2 (en) * | 2006-07-14 | 2010-05-11 | Muvee Technologies Pte Ltd. | Creating a new music video by intercutting user-supplied visual data with a pre-existing music video |
-
2007
- 2007-04-16 US US11/735,951 patent/US8170396B2/en active Active
-
2008
- 2008-04-16 CN CNA2008100910745A patent/CN101290787A/zh active Pending
Cited By (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9042707B2 (en) | 2009-03-19 | 2015-05-26 | Gvbb Holdings S.A.R.L. | Apparatus and method for editing |
CN105023595A (zh) * | 2009-03-19 | 2015-11-04 | Gvbb控股股份有限公司 | 用于编辑的装置 |
US9984725B2 (en) | 2009-03-19 | 2018-05-29 | Gvbb Holdings S.A.R.L. | Apparatus and method for editing |
CN102576561B (zh) * | 2009-03-19 | 2015-08-05 | Gvbb控股股份有限公司(卢森堡) | 用于编辑的装置和方法 |
CN102576561A (zh) * | 2009-03-19 | 2012-07-11 | Gvbb控股股份有限公司 | 用于编辑的装置和方法 |
CN102610254A (zh) * | 2011-01-19 | 2012-07-25 | 新奥特(北京)视频技术有限公司 | 一种读取任意多时间点数据实现变速与倒放的方法和系统 |
CN102610254B (zh) * | 2011-01-19 | 2016-01-20 | 新奥特(北京)视频技术有限公司 | 一种读取任意多时间点数据实现变速与倒放的方法和系统 |
CN103150746A (zh) * | 2011-08-12 | 2013-06-12 | 索尼公司 | 时间线操作控制装置和方法、程序和图像处理器 |
CN103093780A (zh) * | 2011-11-04 | 2013-05-08 | 三星电子株式会社 | 控制移动终端中动画消息的回放速度的方法和装置 |
US10140747B2 (en) | 2011-11-04 | 2018-11-27 | Samsung Electronics Co., Ltd | Method and apparatus for controlling playback speed of animation message in mobile terminal |
US9485346B2 (en) | 2011-11-04 | 2016-11-01 | Samsung Electronics Co., Ltd | Method and apparatus for controlling playback speed of animation message in mobile terminal |
CN103093780B (zh) * | 2011-11-04 | 2018-04-13 | 三星电子株式会社 | 控制移动终端中动画消息的回放速度的方法和装置 |
CN104636138A (zh) * | 2011-12-29 | 2015-05-20 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
CN104636138B (zh) * | 2011-12-29 | 2018-05-04 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
CN104380380A (zh) * | 2012-06-08 | 2015-02-25 | Lg电子株式会社 | 视频编辑方法及其数字装置 |
US9401177B2 (en) | 2012-06-08 | 2016-07-26 | Lg Electronics Inc. | Video editing method and digital device therefor |
CN104380380B (zh) * | 2012-06-08 | 2017-02-22 | Lg电子株式会社 | 视频编辑方法及其数字装置 |
CN102867529B (zh) * | 2012-09-05 | 2015-07-15 | 杭州天视智能系统有限公司 | 多媒体视频时间轴的展现方法、装置、播放方法及播放器 |
CN102867529A (zh) * | 2012-09-05 | 2013-01-09 | 安科智慧城市技术(中国)有限公司 | 多媒体视频时间轴的展现方法、装置、播放方法及播放器 |
CN110692251B (zh) * | 2017-12-08 | 2021-10-12 | 谷歌有限责任公司 | 组合数字视频内容的方法及系统 |
CN110692251A (zh) * | 2017-12-08 | 2020-01-14 | 谷歌有限责任公司 | 修改数字视频内容 |
CN111567030B (zh) * | 2018-04-23 | 2022-01-28 | Oppo广东移动通信有限公司 | 用于自动切换视频捕获及回放帧率的方法 |
CN111567030A (zh) * | 2018-04-23 | 2020-08-21 | Oppo广东移动通信有限公司 | 用于自动切换视频捕获及回放帧率的方法 |
US12020005B2 (en) | 2018-08-21 | 2024-06-25 | Google Llc | Dynamically generated interface transitions |
CN111083932A (zh) * | 2018-08-21 | 2020-04-28 | 谷歌有限责任公司 | 动态生成的界面过渡 |
CN113811948A (zh) * | 2019-04-01 | 2021-12-17 | 黑魔法设计私人有限公司 | 用于视频编辑系统的用户界面 |
CN113811948B (zh) * | 2019-04-01 | 2023-12-15 | 黑魔法设计私人有限公司 | 用于视频编辑系统的用户界面 |
CN110719440B (zh) * | 2019-09-26 | 2021-08-06 | 恒大智慧科技有限公司 | 一种视频回放方法、装置及存储介质 |
CN110719440A (zh) * | 2019-09-26 | 2020-01-21 | 恒大智慧科技有限公司 | 一种视频回放方法、装置及存储介质 |
CN111556351A (zh) * | 2020-05-15 | 2020-08-18 | 宁波菊风系统软件有限公司 | 一种rtp文件播放系统 |
CN111556351B (zh) * | 2020-05-15 | 2022-04-15 | 宁波菊风系统软件有限公司 | 一种rtp文件播放系统 |
WO2021249067A1 (en) * | 2020-06-12 | 2021-12-16 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for capturing a real-time video in a plurality of video modes |
CN115567655A (zh) * | 2022-09-16 | 2023-01-03 | 广西电网有限责任公司南宁供电局 | 一种断路器机构图像采集系统 |
Also Published As
Publication number | Publication date |
---|---|
US20080253735A1 (en) | 2008-10-16 |
US8170396B2 (en) | 2012-05-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101290787A (zh) | 改变视频回放速度比率 | |
US8837911B2 (en) | Generating transitions for remapping video playback time | |
US9997196B2 (en) | Retiming media presentations | |
US8555169B2 (en) | Media clip auditioning used to evaluate uncommitted media content | |
US8910032B2 (en) | Media-editing application with automatic background rendering capabilities | |
US10846336B2 (en) | Authoring tools for synthesizing hybrid slide-canvas presentations | |
US9014544B2 (en) | User interface for retiming in a media authoring tool | |
US8006185B2 (en) | Three dimensional viewer for video | |
US20100110082A1 (en) | Web-Based Real-Time Animation Visualization, Creation, And Distribution | |
US8332757B1 (en) | Visualizing and adjusting parameters of clips in a timeline | |
US20080256466A1 (en) | Authoring interface which distributes composited elements about the display | |
US20150052438A1 (en) | Method for automating digital signage applications using intelligent self-configuring objects and smart templates | |
US7957547B2 (en) | Sound panner superimposed on a timeline | |
US20070162857A1 (en) | Automated multimedia authoring | |
US8295687B1 (en) | Indicating different video playback rates | |
CN101840722A (zh) | 线上影音编辑处理方法、装置及系统 | |
Carra et al. | Grammar-based procedural animations for motion graphics | |
EP3246921B1 (en) | Integrated media processing pipeline | |
US20080115062A1 (en) | Video user interface | |
JP2010191634A (ja) | 動画作成プログラム、動画作成サービス提供システム、及び動画再生プログラム | |
KR20200022995A (ko) | 콘텐츠 제작 시스템 | |
Uhlin | David Fincher’s righteous workflow: Design and the transmedial director | |
Li et al. | A Taste of Multimedia | |
AU765544B2 (en) | Object based animations with timelines | |
Hernandez Jr | The Storyteller's Dilemma: Overcoming the Challenges in the Digital Media Age |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1123884 Country of ref document: HK |
|
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20081022 |
|
C20 | Patent right or utility model deemed to be abandoned or is abandoned | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: WD Ref document number: 1123884 Country of ref document: HK |