CN106233707A - 交互地使相机运动风格化 - Google Patents

Abstract

本公开内容涉及将来自现有视频的表观相机路径修改成经修改的风格化的视频。诸如水平平移和垂直平移、旋转和变焦之类的相机运动参数可以被单独地修改，包括通过均衡器状的交互式控件的集合。相机运动参数还可以通过加载诸如从另一视频剪辑获取的运动数据之类的预设数据来设置。

Description

交互地使相机运动风格化

背景技术

视频稳定是用于使视频看起来更稳定的公知技术。一般地，视频稳定操纵视频中的移动的剪辑窗口以移除大多数相机运动。

相反，电影导演和电影摄影师有时特意地想要使用相机移动作为视频的一部分。例如，在拍摄期间的相机移动可以用于建立节奏、视角、场景中的韵律等。

这样的相机运动连同通常通过数年的经验学习的诸如取景、颜色、照明等的其他视频技术一起将一风格赋予到视频上。然而，在没有这样的经验、预先计划和昂贵的装备的情况下，很难控制视频的风格方面。

发明内容

提供本发明内容从而以简化的形式介绍下面在具体实施方式中进一步描述的代表性概念的选择。本发明内容不旨在标识要求保护的主题的关键特征或必要特征，其也不旨在以将限制要求保护的主题的范围的任何方式来使用。

简要地，本文描述的主题的各个方面涉及将现有视频中的相机运动参数修改成经修改的视频中的经修改的运动参数，由此便于风格化的视频的产生。一个或多个方面涉及相机风格化控制器，其耦合到交互式用户接口组件或包含交互式用户接口组件。交互式用户接口组件被配置为允许与现有视频相对应的一个或多个运动参数值的功率水平的调节，包括被配置为增加功率水平以将现有视频修改成具有与现有视频的原始相机运动不同的表观相机运动的经修改的视频。

一个或多个方面涉及将来自现有视频的运动参数值调节成经编辑的视频的经调节的运动参数值。这可以包括基于针对每个运动参数的可调节的运动设置来独立地控制针对多个运动参数的可控制的运动参数值。

一个或多个方面涉及获得来自原始视频信号的与现有视频剪辑的原始相机运动路径相对应的原始相机运动参数值，以及计算原始相机运动参数值的域(例如，频率)表示，其中域表示包括针对原始相机运动参数中的每个的多个域段。提供接口以用于将每个域段中的个体功率水平设置调节成经调节的功率水平，并且计算与经调节的功率水平的逆域表示相对应的修改数据。基于修改数据来修改原始相机运动参数值，以提供具有与原始相机运动路径不同的表观相机运动路径的经修改的视频。

其他优点可以当结合附图考虑时从下面的详细描述中变得显而易见。

附图说明

本发明通过示例并且不限于附图中的方式来说明，在附图中相同的附图标记指示类似的元件，并且在附图中：

图1是表示根据一个或多个示例实施方式的被布置为基于用户交互来生成风格化的视频的示例组件的配置的框图。

图2是表示根据一个或多个示例实施方式的被布置为基于用户交互来生成风格化的视频的示例组件的备选配置的框图。

图3是根据一个或多个示例实施方式的便于用于调节运动参数值以生成经修改的视频的用户交互的被例示为滑动条的交互式控件的集合的表示。

图4A、4B、5A和5B是根据一个或多个示例实施方式的示例的针对水平运动参数(图4A)、垂直运动参数(图4B)、旋转运动参数(图5A)和变焦/缩放运动参数(图5B)的原始和风格化的运动绘图和功率谱绘图的表示。

图6是示出根据一个或多个示例实施方式的可以在将原始视频修改成风格化的视频中使用的示例组件的框图。

图7是示出根据一个或多个示例实施方式的可以在将原始视频修改成风格化的视频中采取的示例步骤的流程图。

图8是根据一个或多个示例实施方式的便于用于调节运动参数值以生成经修改的视频的用户交互的交互式用户接口组件的表示。

图9是根据一个或多个示例实施方式的滑动条可以如何被映射到频段以单独地控制每个段中的运动参数功率水平以生成经修改的视频的表示。

图10是表示本文描述的各个实施例的一个或多个方面可以被实现在其中的示例非限制性计算系统和/或操作环境的框图。

具体实施方式

本文描述的技术的各个方面大体涉及选择性地控制已经存在的视频的表观相机运动(以及可能地控制其他风格方面)。在一个或多个实施方式中，这可以经由可以用于操纵视频的表观相机运动路径的功率谱的交互式均衡器状的控件集合来实现。

备选地，或者除了对交互式控件的使用之外，用户可以从预保存的数据(诸如保存的和/或从其他视频剪辑传送的运动风格)选择风格设置。通过示例的方式，用户可以在散步时捕获视频。用户可以稍后选择“划船”运动风格，当被赋予到所捕获的“散步”视频中时，“划船”运动风格使视频看起来像是在用户在船上随着遇到波浪而上下移动时记录的。如果期望的话，用户可以调节设置以使表观波浪与期望的一样大并且以所期望的速率被遇到。

应当理解，本文中的示例中的任何示例是非限制性的。例如，在主要例示用于调节相机运动的某些二维运动变换(例如平移、旋转和缩放)时，还可以基于本文描述的技术来控制诸如其他维度、相位、表观速度等的其他方面。另外，诸如当深度数据也可从深度相机中获得时，本文描述的技术应用于在高达六个维度(平移的三个维度和旋转的三个维度)中的相机运动路径。因此，本发明不限于本文描述的任何特定实施例、方面、概念、结构、功能或示例。相反，本文描述的任何实施例、方面、概念、结构、功能或示例是非限制性的，并且本发明可以以总体上提供在使视频风格化中的益处和优点的各种方式来使用。

图1示出了包括其中包括多个帧的某一视频剪辑(或完整视频)的现有的已记录的视频102被处理成经编辑的视频104的帧的组件的一般化框图示例，其中编辑通常涉及提供表观相机运动。注意，现有的已记录的视频不需要为初始记录的视频，因为视频可以包括通过本文描述的技术和/或其他编辑工具被编辑一次或多次，并且之后被重新编辑，或者在稍后重新开始进一步编辑的情况下部分地被编辑。因此，如本文中所使用的术语“现有的”或“原始的”不必指代视频为初始记录的，而是指代在开始(或重新开始)如本文中描述的风格编辑之前视频处于无论什么状态中。

包括或耦合到(例如，基于软件的)视频播放器108的相机运动风格化控制器(或风格化引擎)106允许用户看到当被查看时经编辑的视频如何显现。这可以是当被播放时或者如果期望的话在逐帧的基础上。因此，编辑可以在立即看到效果的情况下实时地发生(尽管用户必须等待看到被选择为随时间缓慢发生的变化的效果)。该编辑一般以可以被组合的两种方式中的一种来执行。

用于执行编辑的第一种方式是通过交互式控件，图1中示出为虚拟控件110的集合，例如可以通过与触摸屏显示器、鼠标、键盘、语音、可穿戴输入设备和/或例如由其他输入114表示的任何其他适当的交互式模态的交互来调节的用户接口(UI 112)显示的控件(其他输入可以来自除了如所描绘的外部组件之外的设备内部的组件)。这样的虚拟控件110的典型的集合包括滑动条，但是可以使用诸如旋钮等之类的其他类型的控件，或者甚至可通过手势等访问的未显示的控件。

用于执行编辑的第二种方式是通过选择预设数据116，对应于自动地全局地设置控件作为针对已经存在的期望的运动风格的组。预设数据116可以被保存、被调用和/或从其他视频剪辑被传送。预设数据的默认集合可以被提供，例如对应于散步、跑步、划船、蹒跚、自旋、跳跃、过量吸食咖啡因和其他活动，但是还可以为在(高达)可用的六个自由度中的运动的任何一个或多个集合的预设组合。可以从诸如云之类的外部源加载预设数据。

注意，预设数据可以包括随时间变化的数据的子集，或者通过基于时间的计算或其他因素而随时间变化的数据的集合(例如，风格运动可以匹配剪辑中的内容、特定行动者等)。以这种方式，例如，可以使利用完全稳定的相机取得的视频显现为由在时间上上下弹跳的相机取得；y平移设置可以在时间上增大和减小以提供期望的弹跳风格。注意，为了现实性，x平移、旋转和/或变焦设置也可以在某种程度上可能在不同的相位中随时间变化(例如振荡)以便避免显现为完美地直上直下的弹跳。

另一类型的风格化编辑是基于“元控件”的概念的，其可以包括控制多个基于频率的设置的单个滑动器或旋钮(用户可以看见或可以看不见其)。通过示例的方式，诸如以滑动器的形式的“在船上”元控件可以被提供，使得上下滑动“在船上”滑动器一次性(例如，利用一个用户交互)调节多个设置(例如，个体滑动器)，其中多个滑动器对应于不同的运动参数和/或针对每个运动参数的不同的(例如，频率、幅度或其他适当的值设置)调节。可以针对不同风格的主题(即代替或除了划船的相机路径经历)，例如散步、跑步、跳跃、摇摆、摇晃(例如，如同滑雪、被风猛击或蹒跚)、下落、滚动、漂浮、弹跳(例如，在蹦床上、在颠簸的滑道上或在颠簸的路面上驾驶时)、转动、抖动等(其中的至少一些可以被组合)，提供任何数量的元控件(但是可以使用少至简单地将用户可选择的风格主题改变以用作不同的元控件的单个用户接口组件)。注意，元控件可以至少部分地诸如从如下面描述的示例视频中学习。

这样的运动改变的速率和/或相位或诸如幅度等的任何其他参数值可以是用户可配置的。实际上，用户可以选择或创建用于例如在时间上改变每个运动参数的波形，并且可以调节波形的相位和/或幅度。技术可以与诸如标识转变开始和结束帧的关键帧的现有的编辑概念进行组合。

如可以容易地认识到的，经由交互式控件和预设数据加载的编辑可以被组合。例如，预设数据112的集合可以被加载，其将虚拟控件110自动调节到起始位置。从那里，用户可以根据期望调节那些起始位置，例如以精细调谐用户的个人风格偏好。

图1示出了在包含显示器120的单个计算设备118(诸如笔记本电脑、平板电脑、移动设备、手持设备、可穿戴设备、智能电话或专用设备)上的各个编辑组件。图2示出了一个适当的备选方案，诸如可以被实施在耦合到远程显示器220的个人计算设备218上的备选方案。注意，图1中的标记为1xx的相同组件在图2中被标记为2xx，并且为了简洁的目的不再进行描述。

图1和图2还图示了分别经由物理控件122和222例示的可选备选方案。如可以容易地认识到的，诸如特别热衷于编辑视频的用户之类的用户可能对比虚拟控件偏好使用物理控件(例如，可机械地移动的滑动器、电容式触摸滑动器、滚动轮等)。所加载的预设数据可以在机械滑动器的情况下经由电机、在电容式滑动器的情况下通过电荷等自动地移动这样的滑动器，或者靠近每个滑动器的LED等可以指示预设设置以用于根据期望将滑动器的手动移动或触摸引导到每个预设设置。

可以使用其他备选方案。例如，可以提供专用设备，包括含有物理控件和/或相机运动风格化控制器两者的专用设备。实际上，图1和2仅仅是示例，并且被示出为被包含到计算设备118或218中的任何组件可以代替地为与其耦合的外部组件，或者反之亦然，或者被分成子组件，其中的一个或多个可以被包含到计算设备中，并且其中的一个或多个可以是耦合到计算设备的外部子组件。

图3更详细地示出了(无论是虚拟的还是物理的)滑动条330的一个集合的示例。在该示例中，每个运动控制参数存在十个滑动条的集合，诸如提供总共四十个滑动条：针对x平移的一个集合，针对y平移的一个集合，针对平面内旋转的一个集合，以及针对缩放的一个集合。如下面所例示的，这提供针对每个运动控制参数的十个段均衡器。注意，每个控制参数具有比十个更大数量的或更少数量的滑动条是可行的，并且滑动条的数量不需要针对不同的控制参数是相同的。还如图3中所表示的是风格化的和原始的运动绘图332和允许用户在滑动条设置被调节时图形地对滑动条设置的效果进行可视化的功率谱绘图334。

图4A和4B示出了分别针对水平平移和垂直平移的示例运动绘图442、446和功率谱444、448。在一个或多个实施方式中，风格化的运动绘图在单个图形表示中叠加在原始运动绘图上以便同时地查看两者。这些绘图将在经由用户接口改变设置时变化。图5A和5B示出了示例运动绘图542、546和分别针对旋转和变焦(缩放)的功率谱544、548。

转到控制器操作，在如大体表示在图6中的一个或多个实施方式中，对来自视频输入662的运动的风格化可以通过经由针对每个参数或参数汇集的用户接口元件(诸如滑动器或任何其他适当的UI)的集合独立地操纵针对每个运动参数的多段均衡器668来实现。总体上，控制器被配置为输出期望的相机运动路径S’[t,0]，其可以被分解成运动参数(例如x平移、y平移、旋转和缩放/变焦)，其可以被表示为[x’_t,y’_t,θ’_t,s’_t]或任何其他适当的参数的集合。给定S[t,0]作为在现有视频662中的在任何帧(t)与基本(第一或其他)帧(0)之间的变换,其由[x_t,y_t,θt,s_t]表示，并且给定来自风格化的运动路径[x’_t,y’_t,θ’_t,s’_t]的经修改的变换S’[t,0]，风格化的序列中的帧可以通过基于在S[t,0]与S’[t,0]之间的差来对帧进行变形(框672)来计算。这等价于将图像变形到基本(第一)帧的坐标系并且之后应用逆变换670以映射到风格化的序列。

如图6所示，输入视频662中的相机运动参数可以被跟踪并被分解(框664)以提供针对相机运动参数的不变的原始运动数据。如下面参考图7所描述的，该数据可以经由FT(傅里叶变换)666被转换到频域，其中交互式均衡器668可以修改与输入控件或预设参数值相对应的个体频段中的功率水平。一旦被修改，逆FT 670提供用于将视频输入662中的原始运动数据变形成风格化的视频输出674的运动数据。

注意，代替频域变化，其他滤波器可以用于相同的目的，包括可以被逆转的其他类型。尽管这样的滤波器将有效地修改频率，但是不需要在频域中发生变化。

如可以容易地认识到的，除了恒等变换之外的变换可以产生在视频边界周围的未知的区域。最终结果因此可以被剪裁以消除未知的区域。剪裁可以是固定的，(例如固定为现有视频大小的百分之八十)，或者可以是用户可配置的或者代替固定的是可变的。剪裁可以针对风格化的运动可以从现有运动变化多少而设置界限。固然，代替或除了剪裁，可以使用其他已知的技术来处理未知的区域，例如从其他帧或相同帧的其他区填充未知的区域。

图7是描述用户或参数值的其他(例如，预设或定时)操纵(或运动控制器)可以如何实现变化的示例流程图，示例流程图在其中加载视频的步骤702处开始。当加载的步骤704将参数值设置为它们的不变的设置时，其在该示例中将它们设置为一(1)。作为在控制器内设置参数值的该动作的一部分，控制器还可以通过用户接口(诸如均衡器或其他适当的值指示)将那些设置值反映给用户。因此当视频被首次播放时，视频运动显现为不变的。

步骤706表示播放视频。注意，在一个或多个实施方式中，可以在播放时或者在一帧上暂停、快进(FF)或快退时执行经由调节的编辑。在一些实例中，用户还可以创建用于在用户指示的时间或里程碑处调节参数值的预定时‘程序’。当播放时，显示器示出被分别对齐到图1和图2中的全局画布(例如，未剪裁的“帧空间”)130和230的视频，以示出当前帧如何与空间中的其他帧相关。可以实时地，例如在以每秒三十帧播放时应用任何效果。

在图8中大体表示用于示出视频的示例位置，其中例示了示例完整用户接口控制面板，其包括显示帧870、872、滑动条的集合873–876(在该示例中用于控制水平参数、垂直参数、旋转参数和变焦参数)、时间线877、以及保存和加载机构(例如，交互式按钮)878、879。因此，描绘了针对分别表示水平参数、垂直参数、旋转参数和变焦参数的每个可调节的运动参数(x,y,θ,s)的四个子面板。在该示例中，每个面板具有原始的和风格化的运动的绘图、原始的和风格化的功率谱的绘图、以及十段均衡器。如图3中更详细地示出的，在一个或多个实施方式中，每个均衡器参数控制接口具有快捷按钮336；如果“1”按钮被致动用于它的相应的接口，则控制器将对应的滑动器设置为“1”，这产生原始的未修改的运动，而如果“0”按钮被致动，则滑动器被设置为“0”，以针对该运动参数完全没有运动。要认识到，水平参数、垂直参数、旋转参数和变焦参数的参数值仅仅是示例，并且可以使用其他参数值来控制视频的运动，并且类似地，“1”和“0”的缩放或赋值仅仅是示例并且其他参数赋值可以是合适的。

返回到图7，如本文所描述的一个或多个实施方式使用基于频率的均衡方法来编辑相机运动风格。相机运动均衡器(EQ)是一种用于放大、抑制或转移相机运动的频率分量以产生期望的外观和感觉的交互式方法。在该示例中，运动信号被分离成对应于二维中的相机的四个自由度的x(水平)平移、y(垂直)平移、平面内旋转θ和缩放(例如，变焦或z方向)s的四个通道。

无论何时均衡器调节由用户或由定时调节做出或者由于加载新的预设数据而需要时，步骤708分支到步骤710以修改视频的针对每个经修改的运动参数通道的运动。针对每个经修改的通道，控制器在步骤710处使用FT来计算域转换或变换(例如频率空间表示)，并且之后在步骤712处调节参数值或诸如功率的其他值以匹配参数设置。注意，调节可以通过根据对应于诸如频段的域的每个输入参数设置来将功率相乘或加(或减)至频率范围仓(bin)来做出(如下面参考图9所描述的)。在步骤712处，诸如逆FT的逆域转换之后被用于生成输出运动路径，如同相机采取该路径。注意，步骤710、712和714是按照经调节的运动参数；因此，例如如果预设被加载，则x平移、y平移、旋转和缩放(或任何其他运动参数或运动参数的组合)每个可以需要经由对应的步骤的调节，这可以至少在某种程度上被并行地执行。

图9示出了频率仓990可以如何被布置用于受控的参数的值(例如，诸如在显示的示例均衡器滑动器992中输入的那些值)的集合的一个示例集合的示例。在该示例中，频率仓在一个或多个实施方式中被非线性地(诸如对数地或否则指数地)在频率中被分隔开，其中仓大小随着频率增大而增大。注意，用户输入参数值或缩放，诸如通过示例用户接口均衡器或其他合适的用户接口，不修改信号的DC分量，但是提供这么做的接口机构在备选实施方式中是可行的，诸如以便从单个接口完全地重新定位相机。注意，本文描述的所显示的均衡器状控制器技术和相关联的所描述的运动参数补充用于改变基本相机运动路径的其他已知工具，诸如经由DC分量和关键帧化的运动变换。

在一个或多个实施方式中，用于针对每个仓调节在零(0)与二(2)之间的运动参数值(诸如通过滑动器值并且其可以直接地输入针对参数的改变的值和/或提供缩放值)范围的用户接口，其中一(1)的值提供原始运动(即，从现有视频的运动不变)。从零到一，该值可以被当作频域(或在适当的情况下其他域)中的抑制乘法器，例如，将频段中的原始功率水平线性地乘以设置的分数(或零)值以降低该频段中的功率水平。因此，这样的缩放值抑制原始信号中的频率；实际上，将针对所有运动参数的所有设置调节为零可以产生实质上稳定化的视频。

在一个或多个实施方式中，大于一的运动参数缩放值可以在一些实例中导致加法运算而非乘法运算。一般地，系统从乘法切换到加法，因为乘法在运动路径中的频率的原始幅度在零处或零附近时几乎没有效果。通过(将零相位功率)加到现有功率幅度，原先不存在的频率含量变得存在。这允许使静止视频(诸如在三脚架上拍摄的视频)风格化，以及将运动进一步与具有现有运动的视频(诸如利用手持相机拍摄的视频)加或减。单个运动参数输入用户接口(例如滑动器)可以用于在一个或多个实施例中在乘法变化与加法变化之间平滑地转变。

固然，上述方案的许多变型是可能的。例如，频段不需要被对数地分隔开，并且可以例如被线性地分隔开。代替具有乘法和加法区分，公式或预编译的常数的集合可以被用于提供针对运动参数的期望的功率水平或其他域参数调节。作为又一示例，两个输入用户接口设备(例如滑动器)，一个针对加法，一个针对乘法，可以被用于每个频段或范围。作为再一示例，代替线性乘法或加法变化，可以使用可以执行非线性(例如指数)变化的计算。

尽管在现实中，捕获现有视频的相机可能已经在六个维度中被移动和旋转，但是在一个或多个实施方式中二维变换(平移、旋转和缩放)可以被用于对相机运动进行建模和调节。该简化假设相机运动对场景的效果能够被建模为刚性图像变换的时间变化的集合。因此，为了使运动模型的参数简洁并且对用户而言可理解，相似度运动模型可以在一个或多个实施例中被使用，其将相机运动建模为变换的时间变化的集合，S_t，其被分解成示例的四个值：[x_t,y_t,θ_t,s_t]，表示水平平移、垂直平移、平面内旋转、以及全局图像缩放，但是备选的或额外的参数值的任何组合可以是合适的。在电影摄影术语中，这些映射到左/右摇摄、上/下摇摄、滚动和变焦(或使摄影推车向前/向后)。固然，其他实施方式还可以对深度或透视变化进行建模，并且例如，可以提供用于改变深度运动参数值的滑动器等。

尽管本技术主要涉及与视频稳定化技术对比地使视频“不稳定”，但是该技术可以用于稳定化目的。例如，稳定化的视频常常看起来不自然，因为它可能太稳定。本文描述的技术能够向稳定化的视频添加某一运动以使其看起来更自然。

转到另一方面，即例如使相机运动风格化，用户可以具有用户想要匹配其风格的另一视频剪辑(示例)。在这种情形下，自动化方法被执行以通过获取来自示例视频剪辑的运动数据来设置运动参数值。在一个示例情境中，用户可以将示例加载到获取组件中，并且该组件分析视频以计算运动参数值，该运动参数值将缩放和/或加/减(在适当的情况下)到每个域(例如，频率)段中的相关联的域参数(诸如功率)，使得输入视频具有如存在于该示例中的每个段中的相同的平均域参数值(诸如功率)。这大体经由处理一个或多个其他视频剪辑126(图1)和226(图2)的运动获取组件124(图1)和224(图2)被表示在图1和图2中。

恢复/获取来自视频的表观相机运动相当于推断针对每个帧的将该帧最好地映射到基本帧(或任何其他适当的帧)的变换的序列。对齐可以通过确定可以为序列中的第一帧的基本帧、所确定的代表性帧或视频序列中的任何其他合适的帧来计算。对齐可以之后包括提取针对每个帧的图像特征并且执行在帧之间的搜索(如与基本帧或先前或后续帧相比)以找到匹配的特征。在一些实例中，在最好匹配的描述符距离与次好匹配的描述符距离充分不同时(这通过查看第一匹配与第二匹配的比率来计算，这还被称为比率测试)，特征可以被确定为匹配。为了避免锁定到场景运动上，轨迹可以被分析以将前景运动与背景静止特征区分开，诸如通过使用RANSAC(随机采样一致性)方法或任何其他合适的方式来找到内轨迹的最大集合，使得相似度变换的单个时间序列可以将背景特征映射到它们在基本帧中的位置。变换之后被分解成形成基本帧(其可以为静止帧或可以定期地或偶尔地随时间变化)的适当的运动参数值。如以上所指出的，示例运动参数可以包括x平移和y平移、旋转和缩放分量。

如可以看到的，一个或多个方面涉及相机风格化控制器，其耦合到交互式用户接口组件或包含交互式用户接口组件。交互式用户接口组件被配置为允许与现有视频相对应的一个或多个运动参数值的功率水平的调节，包括被配置为增加功率水平以将现有视频修改成具有与现有视频的原始相机运动不同的表观相机运动的经修改的视频。

在一个或多个实施方式中，用户接口组件包括用户接口元件(例如滑动条)的多个集合，其中一个或多个运动参数值可通过与用户接口元件的集合中的一个集合的交互来控制。用户接口元件中的每个可以与域(例如频率)段中的功率水平设置相对应。用户接口元件中的每个可以具有低于不变的功率水平设置的乘法组件和高于不变的功率水平设置的加法组件。

用户接口组件可以包括被配置为加载与运动参数值相对应的预设数据的加载机构。用户接口组件可以包括虚拟控件和/或物理控件。用户接口组件可以包括被配置为显示原始运动绘图、风格化的运动绘图、和/或针对运动参数的功率谱绘图的显示组件，和/或可以显示经修改的视频的表示。

用户接口组件可以包括元控件，其被配置为基于与元控件的用户交互来一次性调节针对不同运动参数的设置和/或一次性调节针对至少一个运动参数的不同设置。元控件可以对应于一个或多个主题(经历)，例如划船、散步、跑步、跳跃、摇摆、摇晃、下落、滚动、漂浮、弹跳、转动或抖动。

在一个或多个方面中，相机风格化控制器可以被配置为允许功率水平的频域调节。运动获取组件可以被提供为从另一视频剪辑获取运动数据。

一个或多个方面涉及将来自现有视频的运动参数值调节成经编辑的视频的经调节的运动参数值。这可以包括基于针对每个运动参数的可调节的运动设置来独立地控制针对多个运动参数的可控制的运动参数值。

调节运动参数值可以通过以下方式来实现：(针对至少一个运动参数)将原始运动信号变换成与功率数据相对应的域(例如频率)表示，改变域表示中的一个或多个域范围中的至少一个域范围内的功率数据的功率水平，以及将域表示逆变换成将原始运动信号调节成经修改的运动信号的数据。

可调节的运动设置可以经由交互式用户接口获得，包括经由包括具有针对每个运动参数的可调节设置的用户接口元件的集合的交互式用户接口获得。例如，针对每个运动参数的用户接口元件的集合可以包括多个滑动条，其中每个滑动条对应于不同的频率范围。可调节的运动设置可以从预设数据获得。

一个或多个方面涉及获得来自原始视频信号的与现有视频剪辑的原始相机运动路径相对应的原始相机运动参数值，以及计算原始相机运动参数值的域(例如，频率)表示，其中域表示包括针对原始相机运动参数中的每个原始相机运动参数的多个域段。提供接口以用于将每个域段中的个体功率水平设置调节成经调节的功率水平，并且计算与经调节的功率水平的逆域表示相对应的修改数据。基于修改数据来修改原始相机运动参数值，以提供具有与原始相机运动路径不同的表观相机运动路径的经修改的视频。用于每个域段中的个体功率水平设置的调节的接口可以包括虚拟控件、物理控件、和/或用于加载与功率水平设置相对应的预设数据的加载机构。

示例操作环境

图10图示了本文描述的主题的方面可以被实施在其上的适当的移动设备1000的示例。移动设备1000仅仅是设备的一个示例并且不旨在暗示对本文描述的主题的方面的使用或功能的范围的任何限制。移动设备1000也不应当被理解为具有与在示例移动设备1000中图示的任何一个组件或组件的组合相关的任何依赖性或要求。移动设备可以包括手持设备，诸如智能电话、平板电脑、笔记本电脑等。例如，可以备选地使用个人电脑。

示例移动设备1000的至少一部分可以被佩戴在眼镜、护目镜或帽子上，或者包括外部计算机的诸如腕表类型的设备之类的其他可穿戴设备全部都是适当的环境。注意，尽管眼镜和帽子被佩戴在头部上，但是它们可以被佩戴在相对于头部的不同位置中，并且因此头部位置偏置校正可以是合适的。

参考图10，用于实施本文描述的主题的方面的示例设备包括移动设备1000。在一些实施例中，移动设备1000包括蜂窝电话、允许与其他人的语音通信的手持设备、某种其他语音通信设备等。在这些实施例中，移动设备1000可以被装备有用于拍照片的相机，但是这在其他实施例中可以是不需要的。在其他实施例中，移动设备1000可以包括个人数字助理(PDA)、手持游戏设备、平板/石板计算设备、笔记本电脑、打印机、包括机顶盒的器具、媒体中心、或其他器具、其他移动设备等。在另外的其他实施例中，移动设备1000可以包括一般被认为是非移动的设备，诸如个人电脑、服务器等。

移动设备1000的组件可以包括但不限于处理单元1005、系统存储器1010、以及将包括系统存储器1010的各个系统组件耦合到处理单元1005的总线1015。总线1015可以包括若干类型的总线结构中的任何类型的总线结构，包括存储器总线、存储器控制器、外围总线、和使用各种总线架构中的任何总线架构的本地总线等。总线1015允许数据在移动设备1000的各个组件之间被传送。

移动设备1000可以包括各种计算机可读介质/机器可读介质。这样的介质可以为可以由移动设备1000访问的并且包括易失性介质和非易失性介质以及可移除介质和不可移除介质两者的任何可用介质。通过示例而非限制性的方式，计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以任何方法或技术实现的用于存储诸如计算机可读指令、数据结构、程序模块或其他数据之类的信息的易失性介质和非易失性介质、可移除介质和不可移除介质。计算机存储设备/介质包括但不限于RAM、ROM、EEPROM、快闪存储器或其他存储器技术、CD-ROM、数字多用盘(DVD)或其他光学盘存储装置、磁带盒、磁带、磁盘存储装置或其他磁存储设备、或者可以被用于存储期望信息并且可以由移动设备1000访问的任何其他介质。

通信介质通常体现计算机可读指令、数据结构、程序模块或诸如载波或其他传输机制之类的经调制的数据信号中的其他数据，并且包括任何信息递送介质。术语“经调制的数据信号”意指具有以使得在信号中编码信息的方式设置或改变的其特性中的一个或多个特性的信号。通过示例而非限制的方式，通信介质包括诸如有线网络或直接有线连接之类的有线介质和诸如声的、RF、无线USB、红外、Wi-Fi、WiMAX和其他无线介质之类的无线介质。

系统存储器1010包括以易失性存储器和/或非易失性存储器的形式的计算机存储介质，并且可以包括只读存储器(ROM)和随机访问存储器(RAM)。在诸如蜂窝电话的移动设备上，操作系统代码1020有时被包含在ROM中，但是在其他实施例中这是不需要的。类似地，应用程序1025常常被放置在RAM中，但是同样地在其他实施例中应用程序可以被放置在ROM中或其他计算机可读存储器中。堆1030提供针对与操作系统1020和应用程序1025相关联的状态的存储器。例如，操作系统1020和应用程序1025可以在它们的操作期间将变量和数据结构存储在堆1030中。

移动设备1000还可以包括其他可移除存储器/不可移除存储器、易失性存储器/非易失性存储器。通过示例的方式，图10图示了闪存卡1035、硬盘驱动器1036、以及记忆棒1037。例如，硬盘驱动器1036可以被微型化以适合放入存储器槽中。移动设备1000可以经由可移除存储器接口1031与这些类型的非易失性可移除存储器进行接口连接，或者可以经由通用串行总线(USB)、IEEE 10394、有线端口1040中的一个或多个、或天线1065进行连接。在这些实施例中，可移除存储器设备1035-1037可以经由通信模块1032与移动设备接口连接。在一些实施例中，不是所有这些类型的存储器都可以被包含在单个移动设备上。在其他实施例中，这些类型和其他类型的可移除存储器中的一个或多个可以被包含在单个移动设备上。

在一些实施例中，硬盘驱动器1036可以以使得更永久地附接到移动设备1000的方式被连接。例如，硬盘驱动器1036可以被连接到诸如并行高级技术附接(PATA)、串行高级技术附接(SATA)或其他接口之类的接口，其可以被连接到总线1015。在这样的实施例中，移除硬盘驱动器可以包括移除移动设备1000的盖，以及移除将硬盘驱动器1036连接到移动设备1000内的支撑结构的螺钉或其他紧固件。

以上讨论的和图示在图10中的可移除存储器设备1035-1037和它们的相关联的计算机存储介质提供用于移动设备1000的计算机可读指令、程序模块、数据结构和其他数据的存储。例如，一个或多个可移除存储器设备1035-1037可以存储由移动设备1000取得的图像、语音记录、联系人信息、程序、针对程序的数据等。

用户可以通过诸如小键盘1041和麦克风1042之类的输入设备将命令和信息输入到移动设备1000中。在一些实施例中，显示器1043可以是触敏屏幕，并且可以允许用户将命令和信息输入在其上。小键盘1041和显示器1043可以通过耦合到总线1015的用户输入接口1050被连接到处理单元1005，但是还可以通过诸如通信模块1032和有线端口1040之类的其他接口和总线结构进行连接。运动检测1052可以用于确定利用设备1000做出的手势。

如本文中所描述的，输入可以被处理成期望的输出。处理可以在软件中、在硬件逻辑中、或在软件和硬件逻辑的组合中来执行。

关于手动控制，用户可以使用各种交互式模态中的任何作为输入设备，诸如鼠标、触摸屏、游戏控制器、远程控制等。语音和/或手势可以被检测以控制设置。实际上，可以由诸如鼠标、键盘、远程控制的传统接口或经由诸如自然用户接口(NUI)的另一接口来便于控制，其中NUI可以大体被定义为使得用户能够以“自然的”方式免于由诸如鼠标、键盘、远程控制等的输入设备施加的人工约束地与设备交互的任何接口技术。NUI方法的示例包括依赖于语音识别、触摸和触笔识别、在屏幕上的和邻近屏幕两者的手势识别、空中手势、头部和眼睛跟踪、声音和语音、视觉、触摸、手势和机器智能的那些示例。其他类别的NUI技术包括触敏显示器、声音和语音识别、意图和目标理解、使用深度相机(诸如立体相机系统、红外相机系统、RGB相机系统和这些的组合)的运动手势检测、使用加速度计/陀螺仪的运动手势检测、面部识别、3D显示器、头部、眼睛和凝视跟踪、身临其境的增强现实和虚拟现实系统、以及用于使用电场感测电极来感测大脑活动的技术。

例如，用户可以经由对麦克风1042讲话和经由在小键盘1041或触敏显示器1043上输入的文本消息来与其他用户进行通信。音频单元1055可以提供电信号以驱动扬声器1044，以及接收和数字化从麦克风1042接收的音频信号。

移动设备1000可以包括提供信号以驱动相机1061的视频单元1060。视频单元1060还可以接收由相机1061获得的图像，并将这些图像提供给处理单元1005和/或包含于移动设备1000上的存储器。由相机1061获得的图像可以包括视频、不形成视频的一幅或多幅图像、或其某一组合。

通信模块1032可以向一个或多个天线1065提供信号，并且接收来自一个或多个天线1065的信号。天线1065中的一个可以发送和接收针对蜂窝电话网络的消息。另一天线可以发送和接收消息。又一天线(或共享天线)可以经由无线以太网网络标准发送和接收网络消息。

更进一步地，天线将基于位置的信息(例如GPS信号)提供给GPS接口和机构1072。转而，GPS机构1072使对应的GPS数据(例如，时间和坐标)可用于处理。

在一些实施例中，单个天线可以被用于发送和/或接收针对多于一种类型的网络的消息。例如，单个天线可以发送和接收语音和数据包消息。

当在联网环境中操作时，移动设备1000可以连接到一个或多个远程设备。远程设备可以包括个人电脑、服务器、路由器、网络PC、蜂窝电话、媒体回放设备、对等设备、或其他常见的网络节点，并且通常包括以上关于移动设备1000描述的元件中的许多或全部。

本文描述的主题的方面可利用许多其他通用或专用计算系统环境或配置来操作。其可以适合于与本文描述的主题的方面一起使用的公知的计算系统、环境和/或配置的示例包括但不限于包括以上系统或设备中的任何的个人电脑、服务器电脑、手持或膝上型设备、多处理器系统、基于微控制器的系统、机顶盒、可编程消费电子设备、网络PC、微型电脑、大型电脑、分布式计算环境等。

可以在由移动设备执行的诸如程序模块之类的计算机可执行指令的一般上下文中描述本文中描述的主题的方面。通常，程序模块包括例程、程序、对象、组件、数据结构等，其执行特定任务或实现特定抽象数据类型。本文中描述的主题的方面还可以被实践在分布式计算环境中，其中任务由通过通信网络链接的远程处理设备来执行。在分布式计算环境中，程序模块可以被定位在包括存储器存储设备的本地计算机存储介质和远程计算机存储介质两者中。

另外，尽管术语服务器可以在本文中被使用，但是将意识到该术语还可以包含客户机、分布在一个或多个计算机上的一个或多个处理的集合、一个或多个独立存储设备、一个或多个其他设备的集合、以上中的一个或多个的组合等。

结论

尽管本发明易于进行各种修改和备选的构造，但是其某些图示的实施例被示出在附图中并且已经在上文详细地进行描述。然而，应当理解，不旨在将本发明限于公开的具体形式，而是相反，旨在覆盖落在本发明的精神和范围内的所有修改、备选构造和等价要件。

除了本文描述的各个实施例之外，要理解，其他类似的实施例可以被使用，或者可以对所描述的实施例进行修改和添加，以执行对应的实施例的相同的或等价的功能而不与其偏离。再进一步地，多个处理芯片或多个设备可以共享本文描述的一个或多个功能的性能，并且类似地，存储可以跨多个设备实现。因此，本发明不限于任何单个实施例，而是要在根据随附权利要求的宽度、精神和范围内来理解。

Claims (10)

1.一种用于对视频进行风格化的系统，包括：

交互式用户接口组件；以及

相机风格化控制器，其耦合到所述交互式用户接口组件或包含所述交互式用户接口组件，所述交互式用户接口组件被配置为获得现有视频并允许与所述现有视频相对应的一个或多个运动参数值的功率水平的调节，包括被配置为增加所述功率水平以将所述现有视频修改成具有与所述现有视频的原始相机运动不同的表观相机运动的经修改的视频。

2.根据权利要求1所述的系统，其中所述用户接口组件包括被配置为加载与所述一个或多个运动参数值相对应的预设数据的加载机构。

3.根据权利要求1所述的系统，其中所述用户接口组件包括虚拟控件或物理控件、或虚拟控件和物理控件两者。

4.根据权利要求1所述的系统，其中所述相机风格化控制器被配置为允许功率水平的频域调节。

5.根据权利要求1所述的系统，还包括：

运动获取组件，其被配置为从另一视频剪辑获取运动数据。

6.一种用于选择性地控制已经存在的视频的表观相机运动的方法，所述方法包括：

由计算设备将来自现有视频的运动参数值调节成经编辑的视频的经调节的运动参数值，包括基于针对每个运动参数的可调节的运动设置来独立地控制针对多个运动参数的可控制的运动参数值，其中控制所述运动参数值包括针对至少一个运动参数，将原始运动信号变换成与功率数据相对应的域表示，改变所述域表示中的一个或多个域范围中的至少一个域范围内的所述功率数据的功率水平，以及将所述域表示逆变换成将所述原始运动信号调节成经修改的运动信号的数据。

7.根据权利要求6所述的方法，还包括：

经由交互式用户接口获得可调节的运动参数值。

8.根据权利要求6所述的方法，还包括：

从预设数据获得可调节的运动参数值。

9.根据权利要求8所述的方法，还包括：

从另一视频剪辑获取所述预设数据中的至少一些预设数据。

10.具有用于便于产生风格化的视频的可执行指令的一个或多个机器可读存储设备或机器逻辑，所述可执行指令当被执行时执行包括以下的步骤：

由计算设备获得来自原始视频信号的与现有视频剪辑的原始相机运动路径相对应的原始相机运动参数值；

计算所述原始相机运动参数值的域表示，其中所述域表示包括针对原始相机运动参数中的每个原始相机运动参数的多个域段；

提供用于将每个域段中的个体功率水平设置调节成经调节的功率水平的接口；

计算与所述经调节的功率水平的逆域表示相对应的修改数据；以及

基于所述修改数据来修改所述原始相机运动参数值，以提供具有与所述原始相机运动路径不同的表观相机运动路径的经修改的视频。