CN105282474A - 用于时移视频获取和压缩的系统和方法 - Google Patents

用于时移视频获取和压缩的系统和方法 Download PDF

Info

Publication number
CN105282474A
CN105282474A CN201510279685.2A CN201510279685A CN105282474A CN 105282474 A CN105282474 A CN 105282474A CN 201510279685 A CN201510279685 A CN 201510279685A CN 105282474 A CN105282474 A CN 105282474A
Authority
CN
China
Prior art keywords
image
frame per
video
predefined
playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510279685.2A
Other languages
English (en)
Other versions
CN105282474B (zh
Inventor
J·S·蒂蒂
J·A·布拉斯克特
E·B·哈里斯
J·曼扎利
G·克拉克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN105282474A publication Critical patent/CN105282474A/zh
Application granted granted Critical
Publication of CN105282474B publication Critical patent/CN105282474B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • H04N5/783Adaptations for reproducing at a rate different from the recording rate
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/7605Television signal recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/915Television signal processing therefor for field- or frame-skip recording or reproducing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

本公开涉及用于时移视频获取和压缩的系统和方法。描述了用于获取并压缩时移视频的技术和设备。所述技术是自适应的,在拍摄期间修改获取帧率并且周期性地删除所捕获的图像。为了实现方法,用户不需要提前知道将获取多久的源视频。不管获取时间,自动地编辑作为结果的视频以提供预先定义的长度的时移片段或预先定义的范围内的长度的时移片段。

Description

用于时移视频获取和压缩的系统和方法
相关申请的交叉引用
本公开内容与在2014年5月30日提交的、发明名称为“用于时移视频的曝光测定”的共同受让的美国专利申请第14/292,547号(“‘547申请”)的主题有关。
技术领域
本公开内容总体上涉及视频捕获领域,尤其涉及获取时移(timelapse)视频。
背景技术
便携式集成计算设备的出现引起了照相机和视频设备的广泛激增。这些集成计算设备共同采用智能电话或平板计算机的形式,并且通常包括通用计算机、照相机、包括触摸敏感屏幕的复杂用户接口,以及通过WiFi、LTE、HSDPA和其它基于小区的技术或无线技术的无线通信能力。这些集成设备的广泛激增提供了使用这些设备的能力来执行本需要专用硬件和软件的任务的机会。例如,如上面所看到的,诸如智能电话和平板计算机的集成设备通常具有一个或两个嵌入式照相机。这些照相机通常等同于:可以通过使用固件和/或软件(例如“应用程序”)的通用计算机控制的镜头/照相机硬件模块,以及包括触摸屏固定按钮和诸如语音控制的无触摸控制的用户接口。
把照相机集成到诸如智能电话和平板计算机的通信设备中使得人们能够以从前不可能的方式共享图像和视频。当前,非常流行的是,获取照片并且通过经由文本消息、SMS或电子邮件发送照片、或者通过将照片上传到基于因特网的网站(诸如社交网络站点或者照片共享站点)来立即与其他人共享照片。
如上面对照片共享的描述一样,同样可以立即共享视频。然而,带宽限制和上传时间显著限制了可以容易地共享的视频的长度。在很多情况下,可能期望捕获所记录的整个动作的本质的短视频片段。视频片段的持续时间可以取决于视频片段的主题。例如,若干小时的车辆驾驶或者聚会的夜晚可能被缩短到仅持续一两分钟的时移视频片段。诸如日落或者云的移动的其它动作可以以20到40秒的片段来更好地表现。虽然可能期望缩短的持续时间的时移视频,但是用户经常可能希望获取历经更大时间长度(例如,历经数分钟、数小时甚至数天)的视频(这里被称为“源视频”)。用户可能期望缩短源视频的长度以提供缩短的时移视频片段。用户可能希望如上所述地共享视频,或者可能简单地期望缩短的时移回放。
发明内容
这里公开的是一种自适应方法,通过该方法自动地处理在任何给定时间长度上获取的源视频,以提供短的时移视频片段。为了实现该方法,用户不需要提前知道将要获取该源视频的持续时间。不管获取时间,作为结果的视频被自动地编辑以提供具有预先定义的长度的时移片段或具有预先定义的范围内的长度的时移片段。该方法涉及:保存在记录期间的图像,但随着拍摄继续而周期性地删除图像中的一些。此外,该方法涉及随着拍摄时间增加而减小捕获图像的速率。该方法是自适应的,在该方法中,随着拍摄继续而修改有效获取帧率。一旦获取停止,所保存的图像被编码为时移视频片段。其他实施例是被配置为实现这里描述的自适应方法的装置。
附图说明
图1是图示这里描述的自适应方法的实施例的流程图。
图2图示根据一个实施例的可编程设备。
图3是图示分析图像参数并且基于参数将标记与图像关联的方法的流程图。
具体实施方式
公开了提供指令以使得一个或更多个处理单元记录时移视频的系统、方法和程序存储设备。这里公开的技术可应用于任何数量的具有显示器的电子设备,诸如数码照相机、数码摄像机、移动电话、个人数据助理(PDA)、便携式音乐播放器、监视器,以及当然,台式、膝上型和平板式计算机显示器。
在以下描述中,为了说明的目的,阐述了许多具体细节以提供对发明构思的彻底理解。作为本描述的一部分,本公开附图中的一些附图以框图的形式表示结构和设备,从而避免模糊了本发明。为了清楚,未在本说明书中描述实际实现方式的全部特征。此外,在本公开内容中使用的语言原则上是出于可读性和指导性的目的而选择的,而不是被选择来描绘或限制发明主题,确定这样的发明主题需要诉诸于权利要求书。在本公开内容中对“一个实施例”或“实施例”的引用表示连同该实施例描述的特定特征、结构或特性被包括在发明的至少一个实现方式中,而对“一个实施例”或“实施例”的多个引用不应该被理解为必须都引用相同的实施例。
将会理解:在任何实际实现方式的开发中(如在任何开发项目中),必须做出很多决定来实现开发者的具体目标(例如,遵从与系统和业务有关的限制),并且这些目标可以从一个实现方式到另一个实现方式而变化。还将会理解:这种开发努力可能是复杂且花费时间的,但是尽管如此,对于设计受益于本公开内容的图像处理系统的实现方式的本领域技术人员来说仅是常规工作。
与获取视频所花费的时间长度相比,时移减少了视频的回放时间。这里讨论的示例集中于提供20到40的时移片段。但是将会理解:可以选择任意持续时间。将源视频的40秒片段减少到时移视频的20秒的方法为:(1)以30fps的帧率获取40秒的源视频,总共生成1200个图像;(2)丢弃一半图像(例如每隔一个图像丢弃一个图像),总共生成600个图像;以及(3)以30fps播放剩余的600个图像,生成20秒的时移视频。因为丢弃了一半的图像,所以即使实际上以30fps获取视频,获取帧率也“有效地”为15fps。因此,这里使用的术语“有效获取帧率”指的是剩余的图像数目除以真实的获取时间。当以30fps回放时,视频中的动作将呈现为以“逼真的(true-to-life)”动作的两倍的速度移动。为了从更长分段的源视频创建20秒的时移视频,将需要丢弃更多图像。例如,以30fps记录的80秒的源视频将产生2400个图像。丢弃这些图像中的1800个图像(即,每4个图像留下一个图像)将剩下600个图像,再次提供以30fps回放的20秒的时移视频。
随着获取源视频的时间长度增加,被丢弃以生成时移视频的图像数目也增加,并且快速地远超过实际使用的图像数目。那些未使用图像的获取和存储消耗了本可以用于其它操作的处理和存储资源。
替代获取然后丢弃所使用的图像,可以最初不获取它们。例如,如果用户以15fps(与上面示例中的“有效帧率”相同)而不是30fps的获取帧率获取了40秒的源视频,则他们将收集到总共600个图像。以30fps回放这600个图像将生成20秒的时移视频。同样地,用户可以以7.5fps的速率收集80秒的源视频以生成能够以30fps回放的600个图像,从而提供20秒的时移视频。
替代方法的问题在于:用户必须在他们开始记录之前知道他们将获取多久的源视频,以便知道要使用什么帧率进行记录。例如,如果用户以7.5fps的帧率获取源视频(例如,他们期望获取80秒),但是他们仅获取源视频20秒,则他们最终将仅得到300个视频图像,从而仅提供10秒的时移视频。
在很多情况下,当用户开始获取视频时,他们可能不知道他们将拍摄多久。例如,如果他们拍摄日落,用户可能不知道他们将希望拍摄15分钟还是30分钟。因此,用户提前不知道减小获取帧率的因素。
这里描述一种用于获取和处理时移视频的自适应算法。如图1中的流程图图示了自适应算法的实施例。参考图1,用户已选择使用时移模式记录视频。操作100开始于照相机以第一帧率(R)101记录视频图像,第一帧率(R)101具有关联图像捕获时间间隔(图像捕获之间的时间)ΔT=1/R。第一帧率(R)101一般可以是任何帧率,但是通常是快速帧率,该快速帧率与照相机在正常操作期间记录视频的同一帧率相同或相近。为了本讨论的目的,将第一帧率假设为30fps。
记录以第一帧率进行,直到获取了临界数目的视频图像为止。通过期望的回放时间和回放速率来确定临界图像数目。根据所图示的实施例,回放时间实际上是t1到t2的时间范围。指定范围而不是具体时间的原因将根据下面的说明而变得清楚。为了本讨论的目的,将回放速率假设为30fps,并且回放时间将从t1=20秒到t2=40秒。换言之,不管记录源视频的时间长度,将以30fps从20秒到40秒进行回放。根据操作100,用户不选择回放时间和帧率。代替地,用户简单地选择以时移模式记录视频,并且回放时间和帧率被预编程到设备中。根据其它实施例,用户可能能够选择回放时间和帧率。在任何一种情况下,回放时间和帧率如下地确定临界图像数目:临界图像数目是将提供在回放帧率下的最长期望回放时间的图像数目。例如,如果最长期望回放时间(如预编程到记录设备中的,或如由用户选择的)是40秒并且回放帧率是30fps,则临界图像数目将是1200个图像。
一旦达到了临界图像数目,则丢弃一半的存储图像103,并且帧率R被减小到R/2。例如,如果初始获取帧率是30fps并且临界图像数目是1200个图像,则丢弃一半的图像留下600个图像。
一般地,通过每隔一个图像丢弃一个图像来完成丢弃一半的图像。将理解:每隔一个图像丢弃一个图像使得每个图像之间的捕获时间间隔ΔT翻倍,从而提供有效地对应于15fps(R/2)的图像捕获速率的一系列图像。因此,剩余的600个图像具有15fps的有效获取帧率。
此外,继续以R/2(即,本示例中的15fps)进行记录。如果在该点停止处理,则剩余的600个图像将提供以30fps回放的20秒的时移视频。在本示例中,不管用于记录源视频的帧率R,将总是以30fps进行回忆回放。已经发现,30fps的回放帧率提供令人愉悦的回放体验。然而,将会理解:可以选择其他帧率。
如果记录继续并且再次达到临界图像数目(即,1200),则将再次丢弃一半图像103,并且将再次减小一半记录帧率104。只要用户期望,就可以执行该操作100。用户可以在任何时间停止记录,这使得操作100结束。在用户退出记录的任何时间,将存在600和1200个之间的存储图像,从而提供20和40秒之间的30fps的时移回放。获取帧率随着记录时间增加而自适应地减小。此外,剩余图像的有效获取帧率随着记录时间增加而减小。
一旦操作100已经停止,根据诸如MPEG的视频编码协议将所存储的图像编码到电影片段中。将理解:可以使用如本领域中已知的其它编码协议。以预定帧率(即,例示中的30fps)对视频进行编码。通过记录停止时存储的图像的数目来确定总回放时间。在示例中,在任何给定时间存在600和1200个之间的存储图像,从而提供20和40秒之间的时移回放。根据替选实施例,可以预先确定总回放时间,并且可以基于存储器中的图像数目来调整回放速度。
将清楚的是,操作100的很多变形是可以的。例如,可能期望以例如2fps的较低帧率开始。如果使用2fps而不是30fps的初始帧率,并且如果临界图像数目是1200,则在记录10分钟之后将达到临界数目。
图2是示意性图示用于执行这里描述的方法的装置的实施例的框图。电子设备200可以包括:处理器205、显示器210、用户接口215、图形硬件220、设备传感器225(例如,接近传感器/环境光传感器、加速度计和/或陀螺仪)、麦克风230、音频编解码器235、扬声器240、通信电路245、数字图像捕获单元250、视频编解码器255、存储器260、贮存器265和通信总线270。电子设备200可以例如是个人数字助理(PDA)、个人音乐播放器、移动电话,或者笔记本、膝上型或平板型计算机系统。
处理器205可以执行由实行或控制由设备200执行的很多功能的操作(例如,诸如根据操作100的时移视频的生成和/或处理)所需要的指令。处理器205例如可以驱动显示器210并且从用户接口215接收用户输入。用户接口215可以采用各种形式,诸如按钮、小键盘、拨号盘、点击式转盘(clickwheel)、键盘、显示屏和/或触摸屏。处理器205可以是片上系统(诸如在移动设备中发现的那些片上系统),并且可以包括专用图形处理单元(GPU)。处理器205可以是基于精简指令集计算机(RISC)或复杂指令集计算机(CISC)体系结构、或任何其它合适的体系结构,并且可以包括一个或更多个处理核。图形硬件220可以是用于处理图形和/或辅助处理器205处理图形信息的专用计算硬件。在一个实施例中,图形硬件220可以包括可编程图形处理单元(GPU)。
传感器和照相机电路250可以捕获静止图像和视频图像,可根据本公开内容对所述静止图像和视频图像进行处理以生成图像。可以至少部分地通过视频编解码器255和/或处理器205和/或图形硬件220,和/或合并在照相机电路250内的专用图像处理单元来处理来自照相机电路250的输出。可以将如此捕获的图像存储在存储器260和/或存储265中。存储器260可以包括由处理器205、图形硬件220和图像捕获电路250为执行设备功能而使用的一个或更多个不同类型的媒体。例如,存储器260可以包括存储器缓存、只读存储器(ROM)、和/或随机存取存储器(RAM)。贮存器265可以存储媒体(例如,音频、图像和视频文件)、计算机程序指令或软件、偏好信息、设备描述信息以及任何其它合适的数据。贮存器265可以包括一个或更多个非暂态存储介质,例如包括磁盘(固定的、软盘或可移除的)和磁带、诸如CD-ROM和数字视频盘(DVD)的光学介质,和诸如电可编程只读存储器(EPROM)和电可擦除可编程只读存储器(EEPROM)的半导体存储器器件。存储器260和贮存器265可以用于保持被组织在一个或更多个模块中并且以任何期望的计算机编程语言编写的计算机程序指令或代码。当由例如处理器205执行时,这样的计算机程序代码可以实现这里描述的方法中的一个或更多个。
再次参考图1和图2,随着图像被获取(即,步骤101、106),通常根据诸如JPEG压缩的图像压缩方法来保存图像。因为在操作100期间的各个时间处,不预先确定哪些图像将是操作结束时的最终图像集合,所以一般难以开始编码视频,直到操作100被完成并且最终图像集合被确定为止。这样,图像一般随着被采集而被写入贮存器265。在对操作100的上面的描述中,在任何给定时间存在600和1200个之间的保存图像。在1080分辨率,被压缩为JPEG的那些图像中的每个图像的大小稍稍小于1MB。给定存储的图像数据量,每个图像一般被写入贮存器265,而不是保持在存储器260中。
一般地,基于图像的相邻图像迭代地压缩图像不是最佳的,这是因为如上面指出的,最终的图像集合不被确定,直到操作完成为止。因此,难以实现更加积极的压缩技术。然而,如果预先预测出要删除的特定图像,则可以实现更加积极的压缩技术以减小图像数据的大小。例如,如果实现操作100,使得一般地删除所有奇数编号的图像,则可以更加积极地压缩奇数编号的图像中的全部或一部分。同样,如果基于图像参数而计划删除特定图像,如下面更详细地描述的,则可以积极地压缩这些图像。
一旦操作100已经停止,根据诸如MPEG格式之一的视频编码格式将所存储的图像编码到电影片段中。将理解:可以使用如本领域中已知的其它编码格式,诸如HEVC、Dirac、RealVideo等。
图3图示操作300,在操作300中,随着图像被获取,分析一个或更多个图像参数。可以被分析的参数的示例是:曝光值(EV)、运动参数、锐度、模糊、面部识别识别参数等。随着图像被获取301,一个或更多个参数被分析302。可以将与所分析的参数有关的标记与图像关联303。当图像被存储时,标记和关联也被存储304。继续获取,直到预先定义的临界数目的图像被存储为止305。一旦预先定义的临界数目的帧被存储305,就基于所分析的参数删除帧306。
操作300允许以智能方式丢弃图像。例如,如果在图像中检测到异常,则该图像可以被标记为删除。有可能在图像获取期间照相机被干扰或被遮蔽。如果该事件引起测量参数中的异常,则对应的帧可以被计划删除。本能领域技术人员将会了解实现标记操作300的很多技术。例如,默认操作可以要求删除所有奇数编号的图像。但是操作可以对一个或两个相邻图像内的任何异常图像进行检查,并且优选地删除异常图像。一般地,不会期望删除若干连续的图像。根据替选实施例,可以不删除被标记的图像。而是,标记被与图像一起保持,并被嵌入到作为结果的输出电影文件中,使得标记可以被用来通知进一步的视频编辑。
请理解:上面的描述旨在是例示性的,而不是限制性的。材料已经被呈现,使得本领域的任何技术人员能够做出并使用请求保护的本发明,并且在特定实施例的上下文中提供了所述材料,实施例的各种变化对本领域技术人员来说将是容易了解的(例如,所公开实施例中的一些可以以彼此结合的方式使用)。另外,将理解:可以以不同的顺序执行这里标识的各操作中的一些操作。因此,应该参考所附权利要求书,连同这样的权利要求书享有的等同物的全部范围,确定本发明的范围。在所附权利要求书中,术语“包括(including)”和“其中(inwhich)”作为普通英语使用,各自等同于“包括(comprising)”和“其中(wherein)”。

Claims (20)

1.一种计算机系统,包括:
照相机;
存储器,操作地耦合到所述照相机;以及
至少一个处理器,操作地耦合到所述存储器和所述照相机,其中,所述至少一个处理器被配置为:
执行操作的一个或更多个迭代,每个迭代包括:
利用所述照相机以第一捕获帧率获得第一多个图像;
存储所述第一多个图像;
当存储了预先定义的临界数目的图像时,丢弃所存储的所述第一多个图像中的一部分;
利用照相机以第二捕获帧率获得第二多个图像,所述第二捕获帧率低于所述第一捕获帧率;以及
将所述第二多个图像与未被丢弃的所述第一多个图像一起存储;
停止所述操作的执行;以及
编码所存储的所述第一多个图像和所述第二多个图像以产生视频,所述视频具有回放帧率和回放持续时间,其中,所述回放帧率或所述回放持续时间是预先定义的。
2.根据权利要求1所述的计算机系统,其中,丢弃所存储的所述第一多个图像中的一部分包括删除一半所存储的图像。
3.根据权利要求1所述的计算机系统,还包括分析所述第一多个图像的属性,其中,基于所述分析来丢弃所存储的所述第一多个图像中的一部分。
4.根据权利要求1所述的计算机系统,其中,所述图像的预先定义的临界数目是基于在预先定义的回放帧率下的回放持续时间的范围。
5.根据权利要求1所述的计算机系统,其中,所述图像的预先定义的临界数目是基于所定义的回放持续时间。
6.根据权利要求1所述的计算机系统,其中,所述回放持续时间是预先定义的,并且通过预先定义的回放持续时间来确定所述回放帧率。
7.根据权利要求1所述的计算机系统,其中,根据视频压缩格式完成所述编码。
8.一种计算机实现的方法,包括:
执行操作的一个或更多个迭代,每个迭代包括:
以第一捕获帧率获得第一多个图像;
存储所述第一多个图像;
当存储了预先定义的临界数目的图像时,丢弃所存储的所述第一多个图像中的一部分;
以第二捕获帧率获得第二多个图像,所述第二捕获帧率低于所述第一捕获帧率;以及
将所述第二多个图像与未被丢弃的所述第一多个图像一起存储;
停止所述操作的执行;以及
编码所存储的所述第一多个图像和所述第二多个图像以产生视频,所述视频具有回放帧率和回放持续时间,其中,所述回放帧率或所述回放持续时间是预先定义的。
9.根据权利要求8所述的方法,其中,丢弃所存储的图像中的一部分包括删除一半所存储的图像。
10.根据权利要求8所述的方法,还包括分析所述第一多个图像的属性,并且其中,基于所述分析来丢弃所存储的图像中的一部分。
11.根据权利要求8所述的方法,其中,所述图像的预先定义的临界数目是基于在预先定义的回放帧率下的回放持续时间的范围。
12.根据权利要求8所述的方法,其中,所述图像的预先定义的临界数目是基于所定义的回放持续时间。
13.根据权利要求8所述的方法,其中,所述回放持续时间是预先定义的,并且其中,通过预先定义的回放持续时间来确定所述回放帧率。
14.根据权利要求8所述的方法,其中,所述编码是根据视频压缩格式。
15.根据权利要求14所述的方法,其中,所述视频压缩格式是MPEG格式。
16.一种电子设备,所述电子设备包括:
照相机;
存储器,操作地耦合到所述照相机;以及
至少一个处理器,操作地耦合到所述存储器和所述照相机,其中,所述至少一个处理器被配置为:
使得所述照相机获取以第一图像捕获时间间隔分隔的第一多个图像;
使得所述存储器存储所述第一多个图像;
当存储了预先定义的临界数目的图像时,丢弃所存储的所述第一多个图像中的一部分;
使得所述照相机获得以第二图像捕获时间间隔分隔的第二多个图像,所述第二图像捕获时间间隔低于所述第一图像捕获时间间隔;以及
使得所述存储器将所述第二多个图像与未被丢弃的所述第一多个图像一起存储。
17.根据权利要求16所述的电子设备,其中,所述处理器被配置为分析所述第一多个图像中的每个图像的属性。
18.根据权利要求17所述的电子设备,其中,所述属性是从包括曝光值、运动参数、锐度、模糊和面部识别的组中选择的。
19.根据权利要求17所述的电子设备,其中,所述处理器被配置为基于对所述第一多个图像中的每个图像的属性的分析来丢弃所存储的所述第一多个图像中的一部分。
20.根据权利要求16所述的电子设备,还包括视频编解码器,其中,所述处理器被配置为使得所述视频编解码器编码所存储的所述第一多个图像和所述第二多个图像以产生视频。
CN201510279685.2A 2014-05-30 2015-05-28 用于时移视频获取和压缩的系统和方法 Active CN105282474B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/292,316 US9992443B2 (en) 2014-05-30 2014-05-30 System and methods for time lapse video acquisition and compression
US14/292,316 2014-05-30

Publications (2)

Publication Number Publication Date
CN105282474A true CN105282474A (zh) 2016-01-27
CN105282474B CN105282474B (zh) 2018-09-28

Family

ID=53267615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510279685.2A Active CN105282474B (zh) 2014-05-30 2015-05-28 用于时移视频获取和压缩的系统和方法

Country Status (5)

Country Link
US (1) US9992443B2 (zh)
CN (1) CN105282474B (zh)
AU (2) AU2015202571B2 (zh)
DE (1) DE102015209221A1 (zh)
WO (1) WO2015183509A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105959539A (zh) * 2016-05-09 2016-09-21 南京云恩通讯科技有限公司 一种自动确定延时速度的延时摄影方法
CN105979138A (zh) * 2016-05-30 2016-09-28 努比亚技术有限公司 一种视频拍摄装置、方法和移动终端

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657246A (zh) * 2015-11-15 2016-06-08 乐视移动智能信息技术(北京)有限公司 延时摄影方法和装置
CN105681669B (zh) * 2016-02-29 2019-02-05 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
JP6718831B2 (ja) * 2017-02-27 2020-07-08 アルパイン株式会社 表示制御装置、表示システム及び表示制御方法
KR20210101790A (ko) 2020-02-11 2021-08-19 삼성전자주식회사 전자 장치 및 전자 장치의 타임 랩스 영상 생성 방법
CN114079820B (zh) * 2020-08-19 2024-11-01 安霸国际有限合伙企业 在摄像机设备上借助于神经网络输入的以感兴趣的事件/对象为中心的间隔拍摄视频生成
CN113810596B (zh) * 2021-07-27 2023-01-31 荣耀终端有限公司 延时摄影方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030146981A1 (en) * 2002-02-04 2003-08-07 Bean Heather N. Video camera selector device
US20120257071A1 (en) * 2011-04-06 2012-10-11 Prentice Wayne E Digital camera having variable duration burst mode
CN103685933A (zh) * 2012-09-20 2014-03-26 宏达国际电子股份有限公司 视频及多张静态影像平行产生方法以及使用此方法的装置

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5867214A (en) 1996-04-11 1999-02-02 Apple Computer, Inc. Apparatus and method for increasing a digital camera image capture rate by delaying image processing
US7110025B1 (en) * 1997-05-28 2006-09-19 Eastman Kodak Company Digital camera for capturing a sequence of full and reduced resolution digital images and storing motion and still digital image data
US7075683B1 (en) 1999-02-15 2006-07-11 Canon Kabushiki Kaisha Dynamic image digest automatic editing system and dynamic image digest automatic editing method
US6665342B1 (en) 1999-07-02 2003-12-16 International Business Machines Corporation System and method for producing a still image representation of a motion video
US6636220B1 (en) 2000-01-05 2003-10-21 Microsoft Corporation Video-based rendering
GB0004065D0 (en) 2000-02-21 2000-04-12 Hewlett Packard Co Portable information capture devices
JP3819669B2 (ja) 2000-04-13 2006-09-13 三洋電機株式会社 ディジタルカメラ
JP3952684B2 (ja) 2000-10-23 2007-08-01 カシオ計算機株式会社 撮像方法及び撮像装置
JP4174234B2 (ja) 2002-04-26 2008-10-29 キヤノン株式会社 画像処理装置及び画像処理方法
JP2004038515A (ja) 2002-07-03 2004-02-05 Sanyo Electric Co Ltd データ記録装置
JP4380252B2 (ja) 2003-07-22 2009-12-09 ソニー株式会社 撮像装置および撮像方法
EP1557837A1 (en) 2004-01-26 2005-07-27 Sony International (Europe) GmbH Redundancy elimination in a content-adaptive video preview system
US7499588B2 (en) 2004-05-20 2009-03-03 Microsoft Corporation Low resolution OCR for camera acquired documents
US7360686B2 (en) 2005-05-11 2008-04-22 Jp Morgan Chase Bank Method and system for discovering significant subsets in collection of documents
JP2006352529A (ja) * 2005-06-16 2006-12-28 Olympus Corp 撮像装置
US8243804B2 (en) 2005-12-01 2012-08-14 Lsi Corporation Hierarchical motion estimation for images with varying horizontal and/or vertical dimensions
US20070150138A1 (en) 2005-12-08 2007-06-28 James Plante Memory management in event recording systems
KR101198157B1 (ko) 2005-12-22 2012-11-12 엘지전자 주식회사 디지털 비디오 레코더에서의 녹화 프레임 레이트 변경방법및 재생방법
JPWO2007132870A1 (ja) 2006-05-15 2009-09-24 株式会社ニコン タイムラプス撮影装置
JP2008011349A (ja) 2006-06-30 2008-01-17 Nikon Corp 動画撮影が可能なカメラ
JP4893275B2 (ja) 2006-11-30 2012-03-07 株式会社ニコン 顕微鏡装置
US7548689B2 (en) 2007-04-13 2009-06-16 Hewlett-Packard Development Company, L.P. Image processing method
US8681237B2 (en) 2008-01-23 2014-03-25 Hewlett-Packard Development Company, L.P. Image-capture parameter variation
US8194993B1 (en) 2008-08-29 2012-06-05 Adobe Systems Incorporated Method and apparatus for matching image metadata to a profile database to determine image processing parameters
US8368773B1 (en) 2008-08-29 2013-02-05 Adobe Systems Incorporated Metadata-driven method and apparatus for automatically aligning distorted images
US8340453B1 (en) 2008-08-29 2012-12-25 Adobe Systems Incorporated Metadata-driven method and apparatus for constraining solution space in image processing techniques
KR101467875B1 (ko) 2008-09-04 2014-12-02 삼성전자주식회사 프레임 레이트의 가변화 설정이 가능한 디지털 카메라 및 그 제어방법
JP5294922B2 (ja) 2009-02-26 2013-09-18 キヤノン株式会社 再生装置および再生方法
JP2011015079A (ja) * 2009-06-30 2011-01-20 Sanyo Electric Co Ltd 送信装置
JP2011097572A (ja) 2009-09-29 2011-05-12 Canon Inc 動画像符号化装置
CN102115071B (zh) 2009-12-31 2013-01-09 清华大学 铺膜系统及使用该铺膜系统的铺膜方法
JP2011170690A (ja) 2010-02-19 2011-09-01 Sony Corp 情報処理装置、情報処理方法、およびプログラム。
JP5701017B2 (ja) * 2010-11-09 2015-04-15 キヤノン株式会社 動画再生装置、動画再生方法、コンピュータプログラム、記憶媒体
US9077910B2 (en) 2011-04-06 2015-07-07 Dolby Laboratories Licensing Corporation Multi-field CCD capture for HDR imaging
WO2012137493A1 (ja) 2011-04-07 2012-10-11 パナソニック株式会社 画像処理装置、画像処理方法、画像処理プログラム及び集積回路
JP5744614B2 (ja) 2011-04-28 2015-07-08 オリンパス株式会社 画像処理装置、画像処理方法、および、画像処理プログラム
JP5814709B2 (ja) 2011-09-12 2015-11-17 オリンパス株式会社 タイムラプス観察方法、及び、それに用いられるタイムラプス観察装置
US8913150B2 (en) 2011-10-20 2014-12-16 Broadcom Corporation Dynamic image capture utilizing prior capture settings and user behaviors
US9025881B2 (en) 2012-02-06 2015-05-05 Nanyang Technological University Methods and apparatus for recovering phase and amplitude from intensity images
US9405984B2 (en) 2012-02-08 2016-08-02 Scientific Games International, Inc. Logistics methods for portable, mobile processing of lottery and contest tickets
US9288377B2 (en) 2012-05-02 2016-03-15 Semiconductor Components Industries, Llc System and method for combining focus bracket images
ITVI20120104A1 (it) 2012-05-03 2013-11-04 St Microelectronics Srl Metodo e apparato per generare in tempo reale uno storyboard visuale
US8515270B1 (en) 2012-08-03 2013-08-20 Granite Bay Software System and method for improved time-lapse photography
EP2885751A4 (en) 2012-08-15 2016-03-30 Jumio Inc IMAGE PROCESSING FOR CREDIT VALIDATION
US9148567B2 (en) 2012-09-21 2015-09-29 Blackberry Limited Methods and devices for controlling camera image capture
US8711495B2 (en) 2012-10-01 2014-04-29 Apple Inc. MEMS autofocus actuator
US9414038B2 (en) 2012-10-16 2016-08-09 Amanjyot Singh JOHAR Creating time lapse video in real-time
WO2014099320A1 (en) 2012-12-17 2014-06-26 The Trustees Of Columbia University In The City Of New York Methods, systems, and media for high dynamic range imaging
US8866928B2 (en) 2012-12-18 2014-10-21 Google Inc. Determining exposure times using split paxels
JP5754458B2 (ja) 2013-03-22 2015-07-29 カシオ計算機株式会社 動画像抽出装置、動画像抽出方法及びプログラム
US9247098B2 (en) 2013-04-09 2016-01-26 Here Global B.V. Automatic time lapse capture
JP5859061B2 (ja) 2013-06-11 2016-02-10 キヤノン株式会社 撮像装置、画像処理装置、および、これらの制御方法
US9489979B2 (en) 2013-08-06 2016-11-08 Casio Computer Co., Ltd. Image processing apparatus for time-lapse moving image, image processing method, and storage medium
JP5892134B2 (ja) 2013-09-20 2016-03-23 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
JP5817858B2 (ja) 2014-01-30 2015-11-18 カシオ計算機株式会社 画像処理装置、画像処理方法、及びプログラム
US20150294686A1 (en) 2014-04-11 2015-10-15 Youlapse Oy Technique for gathering and combining digital images from multiple sources as video

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030146981A1 (en) * 2002-02-04 2003-08-07 Bean Heather N. Video camera selector device
US20120257071A1 (en) * 2011-04-06 2012-10-11 Prentice Wayne E Digital camera having variable duration burst mode
CN103685933A (zh) * 2012-09-20 2014-03-26 宏达国际电子股份有限公司 视频及多张静态影像平行产生方法以及使用此方法的装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105959539A (zh) * 2016-05-09 2016-09-21 南京云恩通讯科技有限公司 一种自动确定延时速度的延时摄影方法
CN105979138A (zh) * 2016-05-30 2016-09-28 努比亚技术有限公司 一种视频拍摄装置、方法和移动终端

Also Published As

Publication number Publication date
AU2015100630B4 (en) 2015-12-24
WO2015183509A1 (en) 2015-12-03
AU2015100630A4 (en) 2015-06-11
US9992443B2 (en) 2018-06-05
DE102015209221A1 (de) 2015-12-03
US20150350591A1 (en) 2015-12-03
AU2015202571A1 (en) 2015-12-17
CN105282474B (zh) 2018-09-28
AU2015202571B2 (en) 2016-10-27

Similar Documents

Publication Publication Date Title
CN105282474A (zh) 用于时移视频获取和压缩的系统和方法
CN104519294B (zh) 基于移动信息的视频录像智能回放方法及其装置
US20110129120A1 (en) Processing captured images having geolocations
WO2018086527A1 (zh) 一种视频处理方法及装置
CN103856833A (zh) 视频处理设备和方法
US20120082431A1 (en) Method, apparatus and computer program product for summarizing multimedia content
US9449646B2 (en) Methods and systems for media file management
CN105323527A (zh) 用于时移视频的曝光计量的系统和方法
US9053526B2 (en) Method and apparatus for encoding cloud display screen by using application programming interface information
US20140333818A1 (en) Apparatus and method for composing moving object in one image
US11120537B2 (en) Cognitive object emotional analysis based on image quality determination
JP2008131617A (ja) 映像処理装置
US10832369B2 (en) Method and apparatus for determining the capture mode following capture of the content
JP6210634B2 (ja) 画像検索システム
US11545186B2 (en) Systems and methods for efficient media editing
JP2008193715A (ja) データ記録装置
KR102066857B1 (ko) 객체 영상 트랙킹 스트리밍 시스템 및 이를 이용한 스트리밍 방법
JP2006115412A (ja) データ記録装置
US11778168B2 (en) Reference frame detection using sensor metadata
CN112905821B (zh) 图像显示方法、装置、设备及存储介质
CN106101814A (zh) 图片展示方法及装置
JP2021103855A (ja) 画像処理装置およびその制御方法、プログラム、並びに記憶媒体
US20130265447A1 (en) Computing device and method for processing pictures
KR101673880B1 (ko) 영상 관제 장치와 이를 이용한 이벤트 녹화 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant