CN105184839B - 视频与几何图形的无缝表示 - Google Patents

视频与几何图形的无缝表示 Download PDF

Info

Publication number
CN105184839B
CN105184839B CN201510324413.XA CN201510324413A CN105184839B CN 105184839 B CN105184839 B CN 105184839B CN 201510324413 A CN201510324413 A CN 201510324413A CN 105184839 B CN105184839 B CN 105184839B
Authority
CN
China
Prior art keywords
geometric
selected segment
representation
segment
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510324413.XA
Other languages
English (en)
Other versions
CN105184839A (zh
Inventor
F·尼尔森
L·哈利韦尔
J·拉尔森
M·C·龚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DreamWorks Animation LLC
Original Assignee
DreamWorks Animation LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DreamWorks Animation LLC filed Critical DreamWorks Animation LLC
Publication of CN105184839A publication Critical patent/CN105184839A/zh
Application granted granted Critical
Publication of CN105184839B publication Critical patent/CN105184839B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

用于查看和编辑计算机生成动画的过程被提供。在一个示例过程中,表示计算机生成动画的片段的多个图像可以显示。响应于一个或多个图像的选择,与计算机生成动画的相应的片段相关的几何数据可以被访问。根据访问几何数据,计算机生成动画的选中片段(多个)的可编辑的几何表示可以显示。在一些实例中,计算机生成动画的相同或其他片段的先前渲染表示和/或几何表示可以邻近地、叠加地或者以任何其他期望的方式与计算机生成动画的选中片段(多个),显示的几何表示同时显示。

Description

视频与几何图形的无缝表示
技术领域
本申请通常地涉及到计算机生成动画并且,更具体地,涉及用于查看和编辑计算机生成动画的过程和工具。
背景技术
计算机生成动画通常使用表示虚拟环境中的对象(例如,树木、岩石、云等)和角色(例如,动物、人物等)的几何模型来创建。动画师可以操纵这些模型以期望的方式在动画中的一些帧或所有帧中定位物体和角色。被定位的几何模型然后在渲染过程中可以与其它动画数据,如纹理、颜色、灯光和其他组合以产生可以用作动画帧的图像。当已渲染帧被快速连续观看时,它们给观众动画的感知。
为了编辑计算机生成动画的一部分,动画师可能查看先前渲染的动画并且可以修改用于创建渲染版本的几何模型。重新定位的几何模型然后可以在另一个渲染过程中与其他动画数据组合以产生可以用作动画的帧的已更新图像。这个过程可以重复任意次数,直到产生所期望的输出。
各种软件工具已被开发以辅助上述动画处理的性能。但是,现有的工具可能在计算上昂贵且难于使用。
发明内容
用于查看和编辑的计算机生成动画的过程被描述。一个示例过程可以包括由一个或多个处理器,引起包括多个表示计算机生成动画的多个片段的多个分区的界面的显示;接收多个分区的第一分区的用户选择;对应于选中的第一个分区,访问与计算机生成动画的第一选中的片段相关联的几何数据;和引起第一选中片段的几何表示的显示。
在一些实例中,多个片段可以包括计算机生成动画的多个连续镜头。在一些实例中,每个多个片段可以包括动画的多个先前渲染的帧。
在一些实例中,几何数据可以包括一个或多个动画图形、角色装配、动画曲线,以及用于渲染第一选中片段的动画的帧,场景的几何表示。
在一些实例中,访问与第一选中的片段相关联的几何数据可以包括加载一个或多个处理器可访问的几何数据到内存。
在一些实例中,过程可以还包括:接收对第一选中的片段的几何表示的用户修改;并且根据接收的用户修改,引起第一选中的片段的已修改几何表示的显示。在其它实例中,过程可以还包括接收用于存储第一选中片段的几何表示的用户修改的请求;和存储第一选中片段的几何表示的用户修改。
在一些实例中,第一选中片段的几何表示的显示可以与多个分区同时显示。
在一些实例中,过程可以还包括:接收多个分区的第二分区的用户选择;以及对应于选中的第二分区,引起第二选中片段的先前渲染表示的显示。在一些实例中,第二选中片段的先前渲染表示的显示可以与第一选中片段的几何表示邻近地显示。在其它实例中,第一选中片段的几何表示可以叠加在第二选中片段的先前渲染表示上显示。在其它实例中,第二选中片段的先前渲染表示的显示可以在时间上与第一选中片段的几何表示顺序地显示。
用于查看和编辑的计算机生成动画的系统和计算机可读存储介质也有所描述。
附图说明
通过结合附图,参照下面的描述,本申请可以被很好地理解,其中相同部件可以通过相同标号来引用。
图1示出了根据各种实例,可以使用视频和几何图形编辑工具来生成的示例性的渲染图像。
图2示出了根据各种实例,用于查看并且编辑计算机生成动画的示范性的视频和几何图形编辑工具。
图3示出了根据各种实例,用于视频和几何图形编辑工具的示例性界面。
图4示出了根据各种实例,用于视频和几何图形编辑工具的另一个示例性界面。
图5示出了根据各种实例,使用视频和几何图形编辑工具,用于查看和编辑计算机生成动画的示例性过程。
图6示出了根据各种实例,使用图5的过程,用于生成的视频和几何图形编辑工具的示例性界面。
图7示出了根据各种实例,使用图5的过程,用于生成的视频和几何图形编辑工具的示例性界面。
图8示出了根据各种实例,使用图5的过程,用于生成的视频和几何图形编辑工具的另一个示例性界面。
图9示出了根据各种实例,使用图5的过程,用于生成的视频和几何图形编辑工具的另一个示例性界面。
图10示出了根据各种实例,使用图5的过程,用于生成的视频和几何图形编辑工具的另一个示例性界面。
图11示出了示例性计算系统。
具体实施方式
下面的描述被呈现使得本领域内的普通技术人员能够制造和使用的各种实施例。特定装置、技术和应用的描述仅作为实例。对本文所描述的实例的各种修改对于本领域内的普通技术人员是显而易见的,并且本文定义的一般原理可以应用于其他示例和应用而不脱离本技术的精神和范围。因此,所公开的技术不旨在限定于本文中所描述和示出的实例,而是要符合与权利要求一致的范围。
下面描述了与用于查看和编辑的计算机生成动画的过程相关的各种实例。在一个示例过程中,表示计算机生成动画的片段的多个图像被显示。响应于一个或多个的图像的选择,与计算机生成动画的相应片段(多个)相关的几何数据可以被访问。根据所访问的几何数据,计算机生成动画的片段(多个)的可编辑的表示可以被显示。在一些实例中,计算机生成动画的相同或其他片段的先前渲染表示和/或几何表示可以与计算机生成动画的选中片段(多个)已显示的几何表示相邻地,叠加地或以任何其他所期望的方式同时显示。
图1描绘了根据各种实例,示例性计算机生成图像100,它可以使用视频和几何图像编辑工具来渲染。值得注意的是,图1描绘了在动画过程中,使用由艺术家定位的几何模型生成的两个角色的图像。如先前所讨论的,用于执行动画对象和角色的过程的现有工具可能在计算上昂贵且难于使用。
图2示出了示范性视频和几何图像编辑工具214,它可以用于查看和编辑类似于图1的计算机生成动画的图像。视频和几何图形编辑工具214可以使用具有一个或多个用于执行存储在计算系统202的非暂态性计算机可读取存储介质上的视频和几何图形编辑工具指令集208的处理器204的计算系统202来实现。计算系统202还包括内存206,它用于存储来自视频数据存储210的视频数据和来自几何数据存储212的几何数据。视频数据可以包括可以被组织成视频的任何期望片段(例如,表示跨越时间上不间断周期的一系列帧的镜头)的先前渲染的动画视频。几何数据可以包括对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他,可以被用于生成视频数据的渲染的动画的几何模型。如下面更详细讨论的,视频和几何图形编辑工具214可以用于查看动画视频的片段的先前渲染的表示和几何表示。动画师、灯光师或其他,可能使用视频和几何图形编辑工具214编辑视频的片段的几何表示,同时有能力在视频周围片段和/或视频同一片段的先前渲染版本的上下文中查看他们的编辑。
虽然视频数据存储210和几何数据存储器212被示为是与计算系统202分离的单独的数据库,但是应该理解的是,视频数据存储210和几何数据存储212可以替代地使用本地或计算系统202远程的单个存储设备来实现。
图3示出了根据各种实例,视频和几何图形编辑工具214的示例界面300。如图所示,界面300一般可以包括片段浏览部302和活动段部324。
片段浏览部302可以包括任何数量的分区304、306、308、310和312,并且每一个都可以使用由分区表示的视频片段的缩略图填充。在一些实例中,由分区304、306、308、310和312表示的视频片段可以包括在视频数据存储210中存储为视频数据,计算机生成动画的先前渲染镜头。在这些实例中,计算系统202可以加载对应于由分区304、306、308、310、和312表示的镜头的视频数据到内存206并且可以使用这些视频数据填充分区304、306、308、310和312。在一些实例中,分区304、306、308、310和312可以包括用于唯一地识别所显示的镜头的标识符314、316、318、320和322。
在一些实例中,由分区304、306、308,310和312所表示的视频片段可以由一个动画工作室中的不同部门生成,例如编辑、观众、动画、灯光、故事等。因为这些部门中的任何一个可以通过生成新的渲染器更新视频的片段,视频和几何图形编辑工具214可以连续地、周期性地、或者以任何其他所期望的时间间隔确定视频的更新片段是否可用。在这些实例中,可视化指示器,例如星形、旗子或任何其他期望的指示器可以连同分区304、306、308、310或312相应的图像显示以通知用户视频片段的已更新版本可用。可以提供选项允许用户请求视频片段的已更新版本从视频数据存储210加载到内存206。
在一些实例中,界面300还可以包括滚动浏览在界面300中未示出的,表示视频的附加片段的附加分区的控制。例如,导航按钮、滚动条或类似的,可以提供以允许用户左右水平滚动片段浏览部302的分区。
在一些实例中,响应于分区304、306、308、310和312之一的选择的第一类型,由选中分区表示的视频片段可以在所选中的分区内通过快速连续显示视频片段的帧来播放。例如,响应于分区304的选择的第一类型,可以包括通过将光标悬停在分区304上面,加亮并且在分区304上单击,在对应于分区304上的触摸敏感设备上轻敲,或者以任何其他期望的方式选择分区304,对应于分区304的视频先前渲染片段可以通过在分区304通过快速连续显示视频片段的一些或者所有帧被播放。
在一些实例中,响应于分区304、306、308、310和312中的一个或多个的选择的第二类型,由选中分区(多个)表示的视频片段(多个)可以显示(例如,第一选中片段的第一帧可以显示)和/或通过在活动段部304中快速连续显示视频片段(多个)帧播放。例如,响应于分区304的选择的第二类型,它可以包括加亮并且在分区304上单击,加亮并且在分区304上双击,选择与分区304相关的选项以在活动段部324中显示相关片段,或者以区别于选择的第一类型的其他任何所期望的方式选择分区304,对应于分区304,视频片段的先前渲染第一帧的放大图可以显示和/或对应于分区304,视频的先前渲染片段可以在活动段部324内被播放。在一些实例中,片段标识符(例如,标识符314、316、318、320或322)和用于在活动段部324内显示每帧的帧标识符(例如,段内帧数值)连同对应帧可以在活动段部324内显示。
在一些实例中,可以在界面300中提供控制以调节在活动段部324内播放的视频片段的回放速度。例如,“播放”按钮可以被提供以使在活动段部324内显示的视频片段以正常速度播放。其它控制可以被提供以使在活动段部324内显示的视频片段以更快或更慢的速度,正向或反向播放。此外,视频和几何图形编辑工具214可以允许用户在一个方向上缓慢擦洗视频片段的帧,例如,在活动段部324内的特定方向上单击和拖动已显示的视频并且在活动段部324内的相反方向上单击和拖动已显示的视频片段,在相反方向上缓慢擦洗视频片段的帧。应当理解的是,其他控制同样地可以用来提供这些播放功能。如果从片段浏览部302中选择多个分区,由多个分区表示的视频片段可以在活动段部324内连续地播放(如根据它们在片段浏览部302的顺序或者它们的相关片段标识符)。
在一些实例中,响应于分区304、306、308、310和312的一个或多个选择的第三类型,由选择分区(多个)表示的视频片段(多个)的几何表示可以显示(例如,第一选中片段的几何表示的第一帧可以显示)和/或通过在活动段部324内快速连续显示视频片段(多个)的几何表示的帧予以播放。几何表示可以包括对应于选择视频片段(多个)的帧,每帧含有几何数据的可视化表示(例如,对象、角色的几何模型,或者其他场景元素,角色装配、动画曲线、动画图形或其他),配置在视频片段内生成动画的相应帧。例如,视频片段的几何表示的第一帧可以包括场景中,定位以创建视频片段的渲染帧的对象和角色的几何模型。使用第三选择类型响应分区(多个)选择,计算系统202可以加载对应于由选中分区(多个)表示的视频片段(多个)的几何数据(例如,对象、角色、其他场景元素或者其他的几何模型,它们被用以生成视频片段)到内存206并且可以使用这些几何数据填充活动段部324。例如,响应于分区304的第三选择类型可以包括在分区304上加亮并且单击,在分区304上加亮并且双击,在对应于分区304的触摸敏感设备的一部分上轻敲,选择与分区304相关的选项以显示活动段部324内相关的片段的几何表示,或者以其他任何区别于第一和第二选择类型、所期望的方式选择分区304,与对应于分区304的视频片段相关的几何数据可以从几何数据存储212中加载到内存206并且对应于分区304的视频片段的第一帧可以显示和/或对应于分区304的视频片段的帧在可以在活动段部324内快速连续被播放。在一些实例中,片段标识符(例如,标识符314、316、318、320或者322)和已显示几何表示的每帧的帧标识符(例如,段内帧数值)可以连同相应的几何表示的帧在活动段部324内显示。
在一些实例中,可以在界面300内提供控制以调节视频片段的几何表示的帧在活动段部324内的回放速度。例如,“播放”按钮可以被提供以使在活动段部324内显示的视频片段的几何表示以正常速度播放。其他控制可以被提供以使在活动段部324内已显示的视频片段的几何表示正向或反向,以更快或更慢的速度播放。此外,视频和几何图像编辑工具214可以允许用户在一个方向上缓慢擦洗视频片段的几何表示的帧,例如,在活动段部324的特定方向上,在视频片段已显示的几何表示上单击和拖动,并且通过在活动段部324内的相反方向上,通过单击和拖动视频片段的已显示的几何表示,缓慢擦洗视频片段的几何表示的帧。应当理解的是,其他控制同样可以用来提供这些播放功能。如果多个分区被选择,由多个分区表示的视频片段的几何表示可以显示和/或在活动段部324(例如,根据它们在片段浏览部302的顺序或者它们相关的段标识符)内被连续播放。
在一些实例中,在活动段部324内显示的视频片段的几何表示可以使用任何不同的输入机制编辑。例如,在几何表示的帧中显示的对象、角色、或者其他场景元素、角色装配、动画曲线、动画图形或其他的几何模型可以被移动或者响应于单击和拖动操作被修改。作为响应,已显示帧的几何数据的下面的数值可以被修改以反映对已显示几何表示所做修改。这使得视频和几何图形编辑工具214的用户容易地、直观地在帧内通过手动移动角色或者对象到所期望位置重新定位它们。在其他实例中,其他输入机制,例如文本输入域,可以在界面300中被提供使得视频和几何图形编辑工具214的用户输入或者改变用于已显示帧的几何数据的参数的值。例如,文本输入域可以被提供使得用户改变角色装配的参数以定义角色的位置。
在一些实例中,分区304、306、308、310和312的一个或多个可以使用选择的第二类型选择被选择并且其他分区304、306、308、310和312可以使用选择的第三类型被选择。在这些实例中,由使用选择的第二类型选中的一个或多个分区表示的视频的先前渲染的片段连同使用选择的第三类型选中的其他分区304、306、308、310和312的几何表示一起在活动段部324内被连续显示。例如,如果分区304和308使用选择的第二类型选择,并且如果分区306被使用选择的第三类型选择,则由分区304表示的先前渲染的视频片段可以在活动段部324内被播放,随后是由分区306表示的视频片段的几何表示的播放,并且随后是由分区308表示的视频先前渲染的片段的播放。这有利于动画师或视频和几何图形编辑工具214的其他用户在先前渲染视频的先前和/或后续片段的上下文中,查看视频片段当前已修改几何视图以查看视频已修改片段如何适合视频周围的片段。
在一些实例中,视频的选中片段的几何表示可以叠加在视频选中片段的先前渲染的表示上。在这些实例中,几何表示和先前渲染的视频表示可以被显示使得每个相应帧可以在同一时间显示。这有利于动画师或视频和几何图形编辑工具214的其他用户看到与先前渲染视频表示相比,对几何表示所做的修改。
在一些实例中,先前渲染的视频表示或视频片段的几何表示可以使用绘图工具来手动修改以添加线条、颜色、或其他到已显示的表示。在这些实例中,所绘制修改可以在先前渲染视频表示、几何表示或先前渲染视频表示与几何表示两者上有选择地显示(例如,可以被打开或关闭)。
在一些实例中,如图4所示,活动段部324可以被分成两个或两个以上的分区。在这些实例中,任何视频片段、视频片段的帧、视频片段的几何表示,或视频片段的几何表示的帧响应于使用如上所述的第二或第三选择类型,在片段浏览部302中每个相应分区内显示。例如,视频先前渲染片段可以在活动段部324的一个分区内被播放,同时视频先前渲染片段的几何表示可以同时在活动段部324的第二分区内被播放使得视频的先前渲染片段和视频的几何表示在同一时间显示。在一些实例中,在活动段部324内所示的两个表示的相机设置可以被匹配因此图像直接比较。这有利于动画师或视频和几何图形编辑工具214其他用户同时查看视频片段的先前渲染版本和视频片段的当前修改几何视图以便看到与视频先前渲染片段相比所做的修改
在其它实例中,两个视频片段的两个几何表示可以在活动段部324的分区内显示。在这些实例中,第一几何表示的组件,例如对象、角色或者其他场景元素,角色装配的一些或全部,动画曲线的一些或全部、动画图形或者其他的几何模型的一些或全部,在活动段部324的第一分区内显示的第一几何表示的帧内可以被复制到在活动段部324的第二分区中显示的第二几何表示的帧。这可以使用复制/粘贴操作完成,单击并且拖动第一几何表示的组件到第二几何表示,或者其他方式。作为响应,第二几何表示可以被修改并且显示以包含第一几何表示已复制的组件。另外,所显示帧的第二几何表示的几何数据的下面的数值可以被修改以反映对第二几何表示所做的修改(例如,修改以具有与第一几何表示的几何组件相同的值)。在其他实例中,第一几何表示的组件可以使用具有单一分区的活动段部324复制到第二几何表示的帧,这如图3所示。在这些实例中,第一几何表示可以被选择用于在活动段部324内显示并且第一几何表示的所需要的组件可以被选择和复制。第二几何表示然后可以被选择用于在活动段部324内显示并且所复制的组件可以被粘贴到第二几何表示。作为响应,第二几何表示可以被修改和显示以包含第一几何表示已复制的组件。另外,用于已显示帧的第二几何表示的几何数据的下面的数值可以被修改以反映对第二几何表示所做的修改(例如,修改以便具有与第一几何表示的几何组件相同的值)。
尽管上面提供的实例描述表示计算机生成动画的镜头的分区的显示和响应于分区的选择,显示先前渲染的视频镜头或镜头的几何表示,但是应该理解的是,分区可以表示任何类型的视频或不可编辑数据的片段和响应于分区的选择,任何其他类型的视频或不可编辑数据的片段的表示(例如,可编辑表示)可以被显示。例如,分区可以表示运动捕获会话的实况记录片段,同时响应于分区的选择,从运动捕捉过程中创建的计算机生成动画的可编辑的形式可以显示。
图5示出了根据各种实例,使用视频和几何图形编辑工具214,用于查看和编辑计算机生成动画的示例性过程500。在框502中,视频和几何图形编辑工具214的界面可以被显示。这个界面与图3和4中所示的相似或相同,并且使用与图2中所示相似或相同的计算系统予以生成。在一些实例中,片段浏览部(例如,片段浏览部302)的分区和活动段部的分区(例如,活动段部324)在过程500的开始处,可以是空的,如图6的界面600所示。
响应于多个视频片段(例如,计算机生成动画的镜头)的用户选择,视频片段可以从本地或远程数据库加载到计算系统(例如,计算系统202)的内存(例如,内存206),以允许计算系统更快地访问和处理数据的片段。此外,表示多个视频片段的多个图像可以在片段浏览部的分区内生成和显示。例如,图7示出了具有分区304、306、308、310和312的界面700,使用表示具有标识符s158、s159、s160、s160。5和s161的五种不同视频片段的缩略图填充。
在框504,引起选中片段的几何表示被显示的一个或多个片段的用户选择可以被接收。如上所讨论的,多个片段的一个或多个的用户选择可以以任何期望的方式获得,例如,在与一个或多个片段相关的多个图像上加亮并单击,在与一个或多个片段相关的多个图像上加亮并且双击,在对应于与一个或多个片段相关的多个图像的一个或多个的触摸敏感设备的一部分上轻敲,或者选择与一个或多个片段相关的多个图像的一个或多个相关的选项,或者以其他任何所期望的方式选择与一个或多个片段相关的多个图像的一个或多个。框504还可以包括接收引起选中片段(多个)的以前渲染的视频表示将显示的多个片段的一个或多个其他段的用户选择可以被接收。例如,在界面700中,引起片段s159和s160。5的以前渲染视频表示的片段s159和s160。5用户选择和引起片段s160的几何表示将显示的选项的用户选择可以被接收。
在框506中,与在框504中使用几何表示选中以显示的一个或多个视频片段相关的几何数据可以被访问。几何数据可以包括对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型,它们可以用以生成在框504中选中的视频片段。例如,几何数据可以包括选中视频片段的每一帧的对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型的配置。在一些实例中,几何数据可以被存储在本地或者远程数据库,例如几何数据存储212。在这些实例中,计算系统(例如,计算系统202)可以从本地或者远程数据库(例如,几何数据存储212)加载与框503中选中的视频片段相关的几何数据到计算系统的内存(例如,内存206)以使得计算系统更快地访问和处理几何数据。在一些实例中,在框506中,仅与选中片段相关的几何数据可以被加载到内存(并且没有与数据的其他片段相关的几何数据)。通过限定几何数据的数量,这有利地减少了计算系统操作视频和图形编辑工具214所需的内存的大小,处理起来可能是计算昂贵,被加载到计算系统。
为了举例说明,继续使用上面提供的实例,与片段s160相关的几何数据可以被从本地或者远程数据库(例如,几何数据存储器212)访问并且加载到计算系统的内存(例如,内存206),响应于在界面700中的用户选中片段以使用几何表示予以显示。与片段s160相关的几何数据可以包括用于片段s160的每一帧的对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型的配置和参数值。
在框508中,在框504中使用几何表示选择以显示的一个或多个视频片段的几何表示可以被显示。在一些实例中,几何表示可以包括对应于选中视频片段的帧的帧,每一帧含有几何数据的可视化表示(例如,对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型)配置以生成视频片段中动画的对应帧。因此,相对于显示一个或多个视频片段的先前渲染表示,显示一个或多个视频片段的几何表示可以包括评估对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型以生成几何表示的每一帧。一个或多个视频片段的几何表示可以在视频和几何图形编辑工具214的界面的活动段部(例如,活动段部324)内显示。在一些实例中,框508可能还包括在框504中被选择以使用先前渲染视频片段显示的视频片段的先前渲染视频表示的显示。如果框504中多个视频片段被选中(使用先前渲染视频表示或者几何表示以显示),先前渲染视频表示(多个)和/或几何表示(多个)可以在界面的活动段部相继显示。
为了举例说明,继续使用上面提供的实例,图8示出了响应于用户使用先前渲染视频表示选择将显示段s159和s160。5和使用几何表示选择将显示的段s160,段s159的先前渲染视频表示将在界面800的活动段部324正显示。在一些实例中,段s159的帧的先前渲染视频表示可以以预定的或用户选中的速度连续地按顺序播放。如图8的右下角所示,界面800可以包括段和帧标识符802(例如,段标识符s159和帧标识符110)。帧标识符可以改变以反映段的当前显示的帧。
图9示出了在图8中段s159的先前渲染视频表示显示之后,在活动段部324中显示的段s160的几何表示。如上面所提到的,几何表示可以包括几何数据的可视化表示(例如,对象、角色或其他场景元素,角色装配s、动画曲线、动画图形或其他的几何模型)被配置以生成段s160。因此,与在图8中所示的段159的视频表示相比,段s160的几何表示可以通过评估对象、角色或其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型以生成几何表示的每一帧而显示。在一些实例中,段s160的几何表示的帧可以以预定或用户选中的速度按顺序被播放。如图9的右下角所示,界面900可以包括段和帧标识符802(例如,段标识符s160和帧标识符184)。帧标识符可以改变以反映段当前显示的帧。
图10示出了在图9中段s160的几何表示显示后,在活动段部324内可以显示的段s160。5的先前渲染视频表示。在一些实例中,段s160。5的先前渲染视频表示的帧可以以预定的或用户选中的速度连续地按顺序播放。如图10右下角所示,界面1000可以包括段和帧标识符802(例如,段标识符s160。5和帧标识符117)。帧标识符可以改变以反映段的当前显示帧。
连同视频的其他段的先前渲染视频表示(多个)一起显示视频的段的几何视图有利于动画师或者视频和几何图形编辑工具214的其他用户得以在先前渲染视频的先前的和/或随后的段的上下文内,查看当前视频片段的已修改几何视图以看到视频的已修改段如何适合视频周围的段。
在一些实例中,可以在视频和几何图形编辑工具214的界面内提供控制以调节在活动段部播放的视频片段的几何表示和/或先前渲染视频的回访速度。例如,可以提供“播放”按钮以引起在活动段内显示的视频片段的几何表示和/或先前渲染视频表示以正常速度被播放。可以提供其他控制以引起在活动段部显示的视频片段的几何表示和/或先前渲染视频表示段以正向或反向以更快或更慢的速度播放。另外,视频和几何图形编辑工具214可以允许用户在一个方向上缓慢擦洗视频片段的几何表示和/或先前渲染视频表示,例如,通过在活动段部内的特定方向上,在视频已显示段上单击并且拖动,和通过在活动段部内的相反方向上,在视频已显示段上单击并且拖动来缓慢擦洗视频片段的几何表示和/或先前渲染视频表示的帧。应当理解的是,其他相似的控制可以用于提供这些回放功能。
返回参照图5,在一些实例中,框508可以包括叠加在所选视频片段的先前渲染表示上所选视频片段的几何表示。在这些实例中,几何表示和先前渲染视频表示可以显示使得对应的每一帧可以在同一时间显示。这有利于动画师或者视频和几何图形编辑工具214的其他用户看到相对于先前渲染视频表示对几何表示所做的修改。在其他实例中,一个以上的几何表示和/或先前渲染视频表示可以在活动段部324的多个分区内显示。
如以上所讨论的,使用各种输入机制的任何一种,视频片段的几何表示可以是可编辑的。因此,在框510中,对在框508中显示的几何表示的用户修改可以被接收。例如,在几何表示的帧内显示的,对象、角色或者其他场景元素,角色装配、动画曲线、动画图形或其他的几何模型可以被移动或者修改,响应于单击和拖动操作。作为响应,已显示帧的几何数据的下面的数值可以被修改以反映对已显示几何表示所做的修改。这有利于视频和几何图形编辑工具214的用户更容易、更直观的在帧内通过手动移动角色或对象到所期望的位置,重定位角色或对象。在其他实例中,其他输入机制,例如文本输入域,可以在视频和几何图形编辑工具214内被提供使得视频和几何图形编辑工具214的用户能够输入或者改变已显示帧的几何数据的参数。例如,用户单击并且拖动图9所示的界面中角色的嘴的边缘以使嘴响应于单击和拖动操作来移动。当单击和拖动操作释放时,嘴可以被重新定位并且与段s160的帧184相关的下面的几何数据的参数的值可以被修改以反映用户修改。因此,当段s160的帧184再次显示时,几何表示可以反映对角色的嘴所做的修改。用户可以导航到视频的其他段和/或其他帧类似地编辑这些帧的几何表示。
在其它实例中,如以上所讨论的,对几何表示的用户修改可以使用复制/粘贴操作予以接收。例如,用户可以选择已显示几何表示的一个组件,例如图9所示的段s160的帧184的右边的角色的嘴。相同或不同段的不同帧可以在活动段部324内被选择以显示(例如,从片段浏览部302中选择不同段或者在当前已显示段s160内导航到所期望的帧)。粘贴操作可以然后被执行以使在新近选择帧内相应组件的下面的参数值,例如在新近选择帧内相同角色的嘴,被使用来自段s160的帧184已复制的参数值予以替换。其结果是,新近选择帧内的角色的嘴的形状与段s160中帧184的角色的嘴的形状相匹配。这有利于视频和几何图形编辑工具214的用户更容易、更直观地复制从一个帧的所有或者一些对象或角色到另一个帧的相同对象或者角色。
在其它实例中,可以使用绘图工具,给已显示表示手动地添加线条、颜色或者其他来修改先前渲染视频表示或者几何表示。在这些实例中,所绘制的修改可以被选择性的显示在先前渲染视频表示、几何表示或者先前渲染视频表示和几何表示两者上。
在框512中,在框512中接收到的用户的修改可以被存储(例如,在几何数据存储212),响应于存储改变的用户请求。其结果是,数据段的后续渲染可以生成反映这些已存储变化的动画。
尽管以特定的顺序示出,但应当理解,过程500的框可以以任何期望的顺序进行,也可以不全部执行。例如,在以显示视频片段的几何表示的执行框502、504、506和508之后,框504、506和508可以再次被执行以显示其他视频片段的几何表示。另外,附加步骤可以在过程500的框之前或者之间被执行。例如,视频片段的先前渲染表示可以显示,并且编辑选项可以被选择以使框504、506、508被执行以使用视频片段的可编辑几何表示替换先前渲染表示。另外,用户可以在视频片段的几何表示的视图与视频片段的先前渲染表示之间切换,通过重复执行框504、506和508以使用两种不同表示来选择视频片段。
使用视频和几何图形编辑工具214和过程500,动画师、灯光师或者工具的其他用户可以查看视频片段的可编辑版本(例如,视频片段的几何表示)连同视频片段的先前生成版本(例如,先前渲染计算机生成动画)和/或其他视频片段先前生成的版本。这有利于用户在其他视频片段和/或先前生成的版本的上下文中查看对可编辑版本所做的修改以作为整体查看修改如何在视频中适应和它们与视频先前版本的对比。另外,视频和几何图形编辑工具214和过程500可以有助于减少计算系统查看和编辑计算机生成动画所需的存储器,通过限定几何数据的数量,它可能是在计算上昂贵以处理,被加载到计算系统。
尽管上面提供的实例涉及到计算机生成动画的先前渲染和几何表示的显示,但是应当理解,视频和几何图形编辑工具214和过程500可以类似地用于显示和编辑可以以可编辑和不可编辑形式呈现的任何类型的数据。例如,视频和几何图形编辑工具214和过程500可以被用来显示来自运动捕获会话不可编辑连续镜头也可以显示来自运动捕捉过程创建的可编辑计算机生成动画。
现在转向图11,配置以执行任何上述描述的过程和/或操作的,示例性计算系统1100的组件被描绘。例如,计算系统1100可以用于实现计算系统202和执行过程500。计算系统1100可以包括,例如,处理器、内存、存储器和输入/输出设备(例如,显示器、键盘、手写笔、绘图装置、磁盘驱动器、网络连接等)。然而,计算系统1100可以包括电路或其它用于执行的处理的某些或全部方面的专门硬件。在一些操作设置中,计算系统1100可以被配置为系统,其包括一个或多个单元,其中的每一个被配置以在软件、硬件或者它们的某种组合中执行该过程的一些方面。
在计算系统1100中,主系统1102可以包括具有连接输入/输出(I/O)部分1106,一个或多个中央处理单元(CPU)1108和具有与其相关的闪存卡1112的内存部分1110的总线的主板。内存部分1110可以含有计算机可执行指令和/或数据用于执行过程500。I/O部分1106可以连接到显示1124、键盘1114、磁盘存储单元1116和介质驱动单元1118。介质驱动单元1118可以读取/写入非暂时性计算机可读存储介质1120,它含有程序1122和/或数据。
此外,非暂时性计算机可读存储介质可以被用于存储(例如,有形地体现)一个或多个用于由计算机来执行上述处理中的任何一个的计算机程序。计算机程序可以编写,例如,使用通用编程语言(例如,Pascal、C、C++、Java或者其他)或者某些专门应用特定语言。
各种典型实施例在本文中描述。参考这些实施例以非限制性的意义。它们被提供以更广泛地说明所公开的技术的应用方面。各种改变可以被作出和等价物可以被取代,在不脱离各种实施例的真实精神。另外,许多修改可以作出以适应特定的情况、材料、物质、过程、处理工艺(多个)或者步骤(多个),目标、理念或者各种实施例的范围。此外,如将被本领域的技术人员可以理解的,本文所描述和示出的每个个体差异具有分离元件和可以被很容易分离或者与其他多个实施例的特征组合的特征,而没有脱离各种实施例的范围或精神。

Claims (24)

1.一种用于查看和编辑计算机生成动画的计算机实现的方法,所述方法包括:
通过一个或多个处理器,引起包括表示所述计算机生成动画的多个片段的多个分区的界面的显示;
接收所述多个分区的第一分区的用户选择;
对应于选中的第一分区,访问与所述计算机生成动画的第一选中片段相关的几何数据,其中所述几何数据包括一个或多个动画图形、角色装配、动画曲线和用于渲染所述第一选中片段的动画帧的场景的几何表示;和
引起所述第一选中片段的几何表示的显示;
接收所述多个分区的第二分区的用户选择;和
对应于选中的第二分区,引起第二选中片段的先前渲染表示的显示;
其中所述第二选中片段的所述先前渲染表示的所述显示与所述第一选中片段的所述几何表示邻近地显示。
2.如权利要求1所述的计算机实现的方法,其中所述多个片段包括所述计算机生成动画的多个连续镜头。
3.如权利要求1所述的方法,其中每个所述多个片段包括动画的多个先前渲染帧。
4.如权利要求1所述的方法,其中访问与所述第一选中片段相关的几何数据包括加载所述一个或多个处理器可访问的所述几何数据到内存。
5.如权利要求1所述的方法,其中所述方法还包括:
接收对所述第一选中片段的所述几何表示的用户修改;和
根据所述接收的用户修改,引起所述第一选中片段的已修改的几何表示的显示。
6.如权利要求5所述的方法,其中所述方法还包括:
接收用于存储所述第一选中片段的所述几何表示的所述用户修改的请求;和
存储所述第一选中片段的所述几何表示的所述用户修改。
7.如权利要求1所述方法,其中所述第一选中片段的所述几何表示的所述显示与所述多个分区同时显示。
8.如权利要求1所述方法,其中所述第二选中片段的所述先前渲染表示的所述显示在时间上与所述第一选中片段的所述几何表示顺序地显示。
9.一种用于查看和编辑计算机生成动画的非暂态性计算机可读存储介质,所述非暂态性计算机可读存储介质包括计算机可执行指令集用于:
通过一个或多个处理器,引起包括表示所述计算机生成动画的多个片段的多个分区的界面的显示;
接收所述多个分区的第一分区的用户选择;
对应于选中的第一分区,访问与所述计算机生成动画的第一选中片段相关的几何数据,其中所述几何数据包括一个或多个动画图形、角色装配、动画曲线和用于渲染所述第一选中片段的动画的帧的场景的几何表示;和
引起所述第一选中片段的几何表示的显示;
接收所述多个分区的第二分区的用户选择;和
对应于所述选中第二分区,引起第二选中片段的先前渲染表示的显示;
其中所述第二选中片段的所述先前渲染表示的所述显示与所述第一选中片段的所述几何表示邻近地显示。
10.如权利要求9所述的非暂态性计算机可读存储介质,其中所述多个片段包括所述计算机生成动画的多个连续镜头。
11.如权利要求9所述的非暂态性计算机可读存储介质,其中每个所述多个片段包括动画的多个先前渲染帧。
12.如权利要求9所述的非暂态性计算机可读存储介质,其中访问与所述第一选中片段相关的几何数据包括加载所述一个或多个处理器可访问的所述几何数据到内存。
13.如权利要求9所述的非暂态性计算机可读存储介质,还包括指令集用于:
接收对所述第一选中片段的所述几何表示的用户选择;和
根据接收的用户选择,引起所述第一选中片段的已修改几何表示的显示。
14.如权利要求13所述的非暂态性计算机可读存储介质,还包括指令集用于:
接收存储所述第一选中片段的所述几何表示的所述用户修改的请求;和
存储所述第一选中片段的所述几何表示的所述用户修改。
15.如权利要求9所述的非暂态性计算机可读存储介质,其中所述第一选中片段的所述几何表示的所述显示与所述多个分区同时显示。
16.如权利要求9所述的非暂态性计算机可读存储介质,其中所述第二选中片段的所述先前渲染表示的所述显示在时间上与所述第一选中片段的所述几何表示顺序地显示。
17.一种用于查看和编辑计算机生成动画的系统,所述系统包括:
显示器;和
一个或多个耦合到所述显示器的处理器并且配置以:
在所述显示器上,引起包括表示所述计算机生成动画的多个片段的多个分区的界面的显示;
接收所述多个分区的第一分区的用户选择;
对应于选中的第一分区,访问与所述计算机生成动画的第一选中片段相关的几何数据,其中所述几何数据包括一个或多个动画图形、角色装配、动画曲线和用于渲染所述第一选中片段的动画的帧的场景的几何表示;和
在所述显示器上,引起所述第一选中片段的几何表示的显示;
接收所述多个分区的第二分区的用户选择;和
对应于所述选中第二分区,引起第二选中片段的先前渲染表示的显示;
其中所述第二选中片段的所述先前渲染表示的所述显示与所述第一选中片段的所述几何表示邻近地显示。
18.如权利要求17所述的系统,其中所述多个片段包括所述计算机生成动画的多个连续镜头。
19.如权利要求17所述的系统,其中每个所述多个片段包括动画的多个先前渲染的帧。
20.如权利要求17所述的系统,其中访问与所述第一选中片段相关的几何数据包括加载所述一个或多个处理器可访问的所述几何数据到内存。
21.如权利要求17所述的系统,其中所述一个或多个处理器还配置以:
接收对所述第一选中的所述几何表示的用户修改;和
在所述显示器上,根据接收的用户修改,引起所述第一选中片段的已修改几何表示的显示。
22.如权利要求17所述的系统,其中所述的一个或多个处理器还配置以:
接收用于存储所述第一选中片段的所述几何表示的所述用户修改的请求;和
存储所述第一选中片段的所述几何表示的所述用户修改。
23.如权利要求17所述的系统,其中所述第一选中片段的所述几何表示的所述显示与所述多个分区同时显示。
24.如权利要求17所述的系统,其中所述第二选中片段的所述先前渲染表示的所述显示在时间上与所述第一选中片段的所述几何表示顺序地显示。
CN201510324413.XA 2014-06-12 2015-06-12 视频与几何图形的无缝表示 Active CN105184839B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462011543P 2014-06-12 2014-06-12
US62/011,543 2014-06-12

Publications (2)

Publication Number Publication Date
CN105184839A CN105184839A (zh) 2015-12-23
CN105184839B true CN105184839B (zh) 2021-07-13

Family

ID=53396355

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510324413.XA Active CN105184839B (zh) 2014-06-12 2015-06-12 视频与几何图形的无缝表示

Country Status (3)

Country Link
US (2) US11069109B2 (zh)
EP (1) EP2955696B1 (zh)
CN (1) CN105184839B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11069109B2 (en) 2014-06-12 2021-07-20 Dreamworks Animation L.L.C. Seamless representation of video and geometry
US10855765B2 (en) * 2016-05-20 2020-12-01 Sinclair Broadcast Group, Inc. Content atomization
CN106373169A (zh) * 2016-08-30 2017-02-01 广东成德电子科技股份有限公司 一种基于参数驱动的印制电路板位图复制方法及其系统
CN107438839A (zh) * 2016-10-25 2017-12-05 深圳市大疆创新科技有限公司 一种多媒体编辑方法、装置及智能终端
USD828387S1 (en) * 2017-06-01 2018-09-11 Microsoft Corporation Display screen with animated graphical user interface
USD828385S1 (en) * 2017-06-01 2018-09-11 Microsoft Corporation Display screen with animated graphical user interface
USD828386S1 (en) * 2017-06-01 2018-09-11 Microsoft Corporation Display screen with animated graphical user interface
USD828384S1 (en) * 2017-06-01 2018-09-11 Microsoft Corporation Display screen with animated graphical user interface
CN110494833B (zh) * 2018-05-28 2023-04-14 深圳市大疆创新科技有限公司 一种多媒体编辑方法及智能终端
JP1662143S (zh) * 2018-10-13 2020-06-22
US10957117B2 (en) * 2018-10-15 2021-03-23 Adobe Inc. Intuitive editing of three-dimensional models
USD945470S1 (en) * 2018-12-27 2022-03-08 Sony Corporation Display panel or screen with animated graphical user interface
USD970516S1 (en) * 2019-06-20 2022-11-22 Yandex Europe Ag Display screen or portion thereof with graphical user interface
CN110442385B (zh) * 2019-06-24 2023-03-07 华域视觉科技(上海)有限公司 灯光编辑、驱动和控制方法、系统、设备及存储介质
CN112738423B (zh) * 2021-01-19 2022-02-25 深圳市前海手绘科技文化有限公司 一种导出动画视频的方法与装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5731821A (en) * 1994-08-25 1998-03-24 Girard; Michael Computer user interface for step-driven character animation
US5936639A (en) * 1997-02-27 1999-08-10 Mitsubishi Electric Information Technology Center America, Inc. System for determining motion control of particles
CN1863295A (zh) * 2004-05-13 2006-11-15 索尼公司 图像数据处理装置、图像数据处理方法、程序、和记录介质
US20080152297A1 (en) * 2006-12-22 2008-06-26 Apple Inc. Select Drag and Drop Operations on Video Thumbnails Across Clip Boundaries
CN101681665A (zh) * 2006-12-22 2010-03-24 苹果公司 视频段的快速创建

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6031529A (en) 1997-04-11 2000-02-29 Avid Technology Inc. Graphics design software user interface
JP3583970B2 (ja) 2000-02-23 2004-11-04 株式会社リコー 映像構造編集装置、構造要素再構成装置およびその装置の各手段としてコンピュータを実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
US7533371B1 (en) * 2003-09-22 2009-05-12 Microsoft Corporation User interface for facilitating performance analysis for processing
US9773525B2 (en) * 2007-08-16 2017-09-26 Adobe Systems Incorporated Timeline management
US8214766B1 (en) * 2008-07-09 2012-07-03 Adobe Systems Incorporated Method and system for preview control for image adjustment
US9838744B2 (en) * 2009-12-03 2017-12-05 Armin Moehrle Automated process for segmenting and classifying video objects and auctioning rights to interactive sharable video objects
MX342956B (es) * 2011-08-30 2016-10-19 Allure Energy Inc Administrador de recursos, sistema y método para comunicar información de administración de recursos para recursos inteligentes de energía y medios.
US9747495B2 (en) * 2012-03-06 2017-08-29 Adobe Systems Incorporated Systems and methods for creating and distributing modifiable animated video messages
US20130262564A1 (en) * 2012-03-31 2013-10-03 Immediate, LLC Interactive media distribution systems and methods
US11069109B2 (en) 2014-06-12 2021-07-20 Dreamworks Animation L.L.C. Seamless representation of video and geometry

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5731821A (en) * 1994-08-25 1998-03-24 Girard; Michael Computer user interface for step-driven character animation
US5936639A (en) * 1997-02-27 1999-08-10 Mitsubishi Electric Information Technology Center America, Inc. System for determining motion control of particles
CN1863295A (zh) * 2004-05-13 2006-11-15 索尼公司 图像数据处理装置、图像数据处理方法、程序、和记录介质
US20080152297A1 (en) * 2006-12-22 2008-06-26 Apple Inc. Select Drag and Drop Operations on Video Thumbnails Across Clip Boundaries
CN101681665A (zh) * 2006-12-22 2010-03-24 苹果公司 视频段的快速创建

Also Published As

Publication number Publication date
EP2955696A1 (en) 2015-12-16
CN105184839A (zh) 2015-12-23
US11069109B2 (en) 2021-07-20
US20210350599A1 (en) 2021-11-11
US11610353B2 (en) 2023-03-21
EP2955696B1 (en) 2024-02-28
US20150363959A1 (en) 2015-12-17

Similar Documents

Publication Publication Date Title
CN105184839B (zh) 视频与几何图形的无缝表示
US8533595B2 (en) Hierarchical display and navigation of document revision histories
US8533593B2 (en) Hierarchical display and navigation of document revision histories
US8874525B2 (en) Hierarchical display and navigation of document revision histories
US8701002B2 (en) Hierarchical display and navigation of document revision histories
US8533594B2 (en) Hierarchical display and navigation of document revision histories
US9305403B2 (en) Creation of a playable scene with an authoring system
US8839142B2 (en) Desktop system object removal
US7565608B2 (en) Animation on object user interface
US11500529B2 (en) Media presentation effects
US20070256054A1 (en) Using 3-dimensional rendering effects to facilitate visualization of complex source code structures
US20130097552A1 (en) Constructing an animation timeline via direct manipulation
US8674998B1 (en) Snapshot keyframing
US9159168B2 (en) Methods and systems for generating a dynamic multimodal and multidimensional presentation
US9396575B2 (en) Animation via pin that defines multiple key frames
CN114581565A (zh) 动画路径可视化编辑方法、装置、计算机设备、存储介质
US11625900B2 (en) Broker for instancing
US8640055B1 (en) Condensing hierarchies in user interfaces
US11610349B2 (en) Filling empty pixels
KR102648288B1 (ko) 편집 환경에서 다수의 미디어 요소들을 갖는 미디어 콘텐츠를 제시하기 위한 방법들 및 시스템들
US20230008224A1 (en) Visualization of complex data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant