CN103428460B - 针对影像撷取模组记录输出视讯序列的录影方法以及录影装置 - Google Patents

针对影像撷取模组记录输出视讯序列的录影方法以及录影装置 Download PDF

Info

Publication number
CN103428460B
CN103428460B CN201310196545.XA CN201310196545A CN103428460B CN 103428460 B CN103428460 B CN 103428460B CN 201310196545 A CN201310196545 A CN 201310196545A CN 103428460 B CN103428460 B CN 103428460B
Authority
CN
China
Prior art keywords
signal sequence
video signal
video
frame
video frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310196545.XA
Other languages
English (en)
Other versions
CN103428460A (zh
Inventor
朱启诚
陈鼎匀
何镇在
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xueshan Technology Co.,Ltd.
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN103428460A publication Critical patent/CN103428460A/zh
Application granted granted Critical
Publication of CN103428460B publication Critical patent/CN103428460B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4007Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4023Scaling of whole images or parts thereof, e.g. expanding or contracting based on decimating pixels or lines of pixels; based on inserting pixels or lines of pixels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • User Interface Of Digital Computer (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明提供一种录影方法以及录影装置。一种针对一影像撷取模组记录一输出视讯序列的示范性录影方法至少包含有以下步骤:由该影像撷取模组产生一输入视讯序列;检查是否应对输入视讯序列采用视讯帧内插;依据输入视讯序列来得到一第一视讯序列,其中该第一视讯序列由多个视讯帧所组成;计算该第一视讯序列中的每一视讯帧的一影像品质指数;参考该影像品质指数来选取或是舍弃该第一视讯序列中的每一视讯帧,并且据此得到由多个被选取视讯帧所组成的一第二视讯序列;检查是否应对第二视讯序列执行视讯帧内插;以及依据该第二视讯序列来产生所记录的该输出视讯序列。本发明提供的录影方法以及录影装置可以实现所需帧率及较好的视讯质量。

Description

针对影像撷取模组记录输出视讯序列的录影方法以及录影 装置
技术领域
本发明所揭露的实施例是关于录影,尤指一种针对一影像撷取模组记录一输出视讯序列的录影方法以及录影装置。
背景技术
相机模组已经广泛地被使用在许多的应用中,例如智能手机通常都会搭载相机模组好让使用者能够简便地拍照,然而智能手机本身的限制容易造成影像的模糊,例如智能手机的相机光圈及/或感测器通常较小,导致进入相机感测器里每一像素的光线较少,因此较小的相机光圈及/或感测器会影响影像品质。
此外,智能手机轻薄的特性容易造成手震,具体来说,当使用者的手指触碰智能手机上的一实体快门/撷取按钮或是一虚拟快门/撷取按钮时,智能手机的震动会持续一段时间,因此任何在这段时间里面拍摄的影像都会被手震影响,所造成的模糊影像可以使用去模糊演算法(deblurring algorithm)来改善,不过去模糊演算法的运算复杂度过高,造成过高的耗电。此外若所使用的去模糊演算法不够完美,则可能造成伪影(artifact)。
除此之外,附有光学影像稳定器(optical image stabilizer,OIS)的相机模组的造价昂贵,因此,传统的智能手机一般配备数位影像稳定器(digital image stabilizer),即电子影像稳定器(electronic image stabilizer,EIS)。数位影像稳定器可以抵消影像的运动,但无法防止影像模糊。
除了相机震动以外,在欲拍摄画面中,目标物体的移动可能会造成撷取影像的内容中带有模糊影像。举例来说,使用者欲使用智能手机来帮一儿童拍摄照片,若该儿童在该使用者将要触碰快门/撷取按钮时保持静止,但在该使用者实际触碰快门/撷取按钮时,该儿童却突然移动,这种情况会让撷取影像中具有模糊的儿童影像内容。
因此,当该相机模组受到手震及/或欲拍摄场景中有物体移动时,该录影结果中就会含有品质不佳的视讯帧。
此外,输出视讯序列的目标帧率(frame rate)有可能会不同于输入视讯序列的帧率。举例来说,可以利用舍弃品质不佳的视讯帧来调整输入视讯序列,而此举将导致输出视讯序列具有较低帧率。再举一例,相机模组的影像撷取能力可能会高于或是低于用以产生具有所需帧率之所需输出视讯序列的影像撷取能力。另外再举一例,由于智能手机的相机光圈及/或感测器尺寸一般来说都不大,因此为了增强亮度,可能会使用一延长的曝光时间,因此相对应地会产生低帧率的输入视讯序列。
因此,需要一种创新的录影设计,其能够产生具有所需帧率且由良好品质的视讯帧所组成的输出视讯序列。
发明内容
依据本发明的示范性实施例,提出一种针对一影像撷取模组记录一输出视讯序列的录影方法以及相关录影装置,来解决上述问题。
依据本发明的一第一实施例,提出一种针对一影像撷取模组记录一输出视讯序列的示范性录影方法。该示范性录影方法至少包含下列步骤:由该影像撷取模组产生一输入视讯序列;检查是否应对该输入视讯序列采用视讯帧内插;依据该输入视讯序列来得到一第一视讯序列,其中该第一视讯序列由多个视讯帧所组成;计算该第一视讯序列中的每一视讯帧的一影像品质指数;参考该影像品质指数来选取或是舍弃该第一视讯序列中的每一视讯帧,并且据此得到由多个被选取视讯帧所组成的一第二视讯序列;检查是否应对该第二视讯序列执行视讯帧内插;以及依据该第二视讯序列来产生所记录的该输出视讯序列。
依据本发明的一第三实施例,提出一针对一影像撷取模组记录一输出视讯序列的示范性录影装置。该示范性录影装置包含有一输入电路、一影像品质估计电路、一选择电路以及一输出电路。该输入电路用来由该影像撷取模组产生输入视讯序列,检查是否应对该输入视讯序列采用视讯帧内插,依据该输入视讯序列来得到一第一视讯序列,其中该第一视讯序列由多个视讯帧所组成。该影像品质估计电路用来计算该第一视讯序列中的每一视讯帧的一影像品质指数。该选择电路用来参考该影像品质指数来选取或是舍弃该第一视讯序列中的每一视讯帧,并且据此得到由多个被选取视讯帧所组成的一第二视讯序列。该输出电路用来检查是否应对该第二视讯序列执行视讯帧内插,并依据该第二视讯序列来产生所记录的该输出视讯序列。
本发明使用视讯帧内插来建立较佳品质的新视讯帧,及/或建立新视讯帧来使得所记录的输出视讯序列具有一目标帧率。举例来说,首先处理一输入视讯序列,来选取品质较佳的视讯帧以及舍弃/不选取品质较差的视讯帧,接下来至少依据具有较佳品质之被选取视讯帧来执行视讯帧内插以产生具有一目标帧率的一输出视讯序列。另外,由于延长曝光时间会导致一输入视讯序列的低帧率,因此可对该输入视讯序列使用视讯帧内插来产生具有一目标帧率的一输出视讯序列。
附图说明
图1为依据本发明第一示范性实施例的录影装置的方块图。
图2为基于图1所示的录影装置的第一录影范例的示意图。
图3为基于图1所示的录影装置的第二录影范例的示意图。
图4为基于图1所示的录影装置的第三录影范例的示意图。
图5为基于图1所示的录影装置的第四录影范例的示意图。
图6为依据本发明一实施例之针对影像撷取模组来记录输出视讯序列的录影方法的流程图。
图7为依据本发明第二示范性实施例的录影装置的方块图。
图8为基于图7所示的录影装置的第一录影范例的示意图。
图9为基于图7所示的录影装置的第二录影范例的示意图。
图10为基于图7所示的录影装置的第三录影范例的示意图。
图11为依据本发明一实施例之针对影像撷取模组来记录输出视讯序列的录影方法的流程图。
具体实施方式
在说明书及后续的权利要求当中使用了某些词汇来指称特定的元件。本领域一般技术人员应可理解,制造商可能会用不同的名词来称呼同样的元件。本说明书及后续的权利要求并不以名称的差异来作为区别元件的方式,而是以元件在功能上的差异来作为区别的基准。在通篇说明书及后续的请求项当中所提及的「包含」是为一开放式的用语,故应解释成「包含但不限定于」。此外,「耦接」一词在此是包含任何直接及间接的电气连接手段。因此,若文中描述一第一装置电性连接于一第二装置,则代表该第一装置可直接连接于该第二装置,或透过其他装置或连接手段间接地连接至该第二装置。
本发明的主要精神在于使用视讯帧内插(video frame interpolation)来建立较佳品质的新视讯帧,及/或建立新视讯帧来使得所记录的输出视讯序列具有一目标帧率。举例来说,首先处理一输入视讯序列,来选取品质较佳的视讯帧以及舍弃/不选取品质较差的视讯帧,接下来至少依据具有较佳品质之该被选取视讯帧来执行视讯帧内插来产生具有一目标帧率的一输出视讯序列(video sequence)。再举一例,由于延长曝光时间会导致一输入视讯序列的低帧率,因此可对该输入视讯序列使用视讯帧内插来产生具有一目标帧率的一输出视讯序列。细节将描述于后续说明书中。
图1为依据本发明第一示范性实施例的录影装置的方块图。录影装置100用来针对一影像撷取模组101(例如一相机模组)记录一输出视讯序列V_OUT。录影装置100以及影像撷取模组101可以是一电子装置的至少一部分(即一部分或是全部),例如录影装置100和影像撷取模组101设计于同一可携式装置上,例如智能手机或是数位相机。影像撷取模组101具有影像撷取的能力,且能够操作在一录影模式来产生一输入视讯序列V_IN至录影装置100,其中输入视讯序列V_IN由多个连续的视讯帧(即影像撷取模组101依序地产生的多个撷取影像)所组成。
在此实施例中,录影装置100包含(但本发明并不以此为限)一输入电路102、一影像品质估计电路104、一选取电路106、一输出电路108以及一控制器110。输入电路102耦接至影像撷取模组101,且用来由影像撷取模组101所产生的输入视讯序列V_IN来得到一第一视讯序列V_1,其中第一视讯序列V_1是由多个视讯帧F1~视讯帧FN所组成。在一示范性设计中,可以直接将输入视讯序列V_IN当作第一视讯序列V_1,具体地说,当输入视讯序列V_IN的一帧率(例如输入视讯序列V_IN的每秒帧数(frames per second,FPS))高于将要记录的输出视讯序列V_OUT的一目标帧率时,输入电路102会直接将输入视讯序列V_IN输出为第一视讯序列V_1。举例来说,输入视讯序列V_IN的帧率为60赫兹(Hz)或是120赫兹,而输出视讯序列V_OUT之该目标帧率为30赫兹。在其他的示范性设计中,输入电路102会针对输入视讯序列V_IN执行视讯帧内插来产生第一视讯序列V_1,使得第一视讯序列V_1的帧率高于输入视讯序列V_IN的帧率,具体地说,当输入视讯序列V_IN的该帧率低于或是等于将要记录的输出视讯序列V_OUT的该目标帧率时,输入电路102会在输入视讯序列V_IN中增加新的视讯帧,并输出为第一视讯序列V_1。举例来说,输入视讯序列V_IN的该帧率为30赫兹或是15赫兹,而输出视讯序列V_OUT之该目标帧率为30赫兹。假设影像撷取模组101在一正常录影模式下所采用的一影像撷取率为30赫兹,控制器110会降低影像撷取模组101的影像撷取率,并依据降低后的影像撷取率来产生输入视讯序列V_IN。
影像品质估计电路104耦接至输入电路102,且用来计算每一个视讯帧F1~视讯帧FN的影像品质指数M1~影像品质指数MN。举例来说,针对每一个视讯帧F1~视讯帧FN,影像品质估计电路104会透过评估视讯帧的锐利度、模糊度或是杂讯大小来决定相对应的影像品质指数M1~影像品质指数MN,其中所计算出的锐利度、模糊度以及杂讯大小中的每一个都可以用来当作影像品质的指标。较高的锐利度代表了较佳的影像品质,反之较低的锐利度则代表较差的影像品质。较低的模糊度代表了较佳的影像品质,反之较高的模糊度则代表较差的影像品质。较低的杂讯大小代表了较佳的影像品质,反之较高的杂讯大小则代表较差的影像品质。
在一示范性设计中,影像品质估计电路104会估计整体的视讯帧的锐利度/模糊度来当作代表视讯帧的影像品质好坏的影像品质指数。在另一示范性设计中,影像品质估计电路104仅针对一视讯帧中的一被选取区域(例如该视讯帧中被侦测出包含一个或是多个脸部影像的一脸部区域,或是该视讯帧中的一固定特定区域)来估计锐利度/模糊度来当作代表视讯帧的影像品质好坏的影像品质指数。
在另一示范性设计中,影像品质估计电路104会参考一感测器112所产生的一感测器输入SENSOR_IN来计算视讯帧F1~视讯帧FN的影像品质指数M1~影像品质指数MN。举例来说,感测器112可以是内建于一智能手机的一重力感测器(G-sensor)或是一陀螺仪(Gyrosensor)。因此,感测器输入SENSOR_IN代表有关于该智能手机的运动状态,特别是影像撷取模组101的运动状态。换句话说,感测器输入SENSOR_IN所包含的每一个视讯帧F1~视讯帧FN的一感测值可以直接被影像品质估计电路104用来当作该视讯帧的一影像品质指数。
选取电路106耦接至影像品质估计电路104以及输入电路102,且选取电路106用来参考每一个影像品质指数M1~MN来分别选取或是舍弃第一视讯序列V_1中的每一个视讯帧F1~视讯帧FN,并且据此得到由被选取的视讯帧所组成的一第二视讯序列V_2。在一第一示范性实施例中,选取电路106会依据对应于一视讯帧(例如F1)的一影像品质指数(例如M1)来决定是否选取或是舍弃该视讯帧(例如F1),举例来说,选取电路106会比较每一个影像品质指数M1~MN与一预定临界值,以判断每一个视讯帧F1~视讯帧FN之影像品质。假若计算的结果得到一较高锐利度、一较低模糊度或是一较低杂讯大小时,则一影像品质指数会被设定为一较高值,在这种情况下,若是相对应的影像品质指数超过该预定临界值,则该视讯帧会被视为具有较佳品质;反之若是相对应的影像品质指数并未超过该预定临藉值,则该视讯帧会被视为具有较差品质。因此,选取电路106会选取具有较佳品质的视讯帧以及舍弃较差品质的视讯帧来产生第二视讯序列V_2,这样一来,选取电路106便可参考视讯帧的品质来将具有一第一帧率(例如120赫兹或是60赫兹)的一视讯序列转换为具有一第二帧率(例如30赫兹)的另一个视讯序列,其中该第二帧率会低于该第一帧率。
在一第二示范性实施例中,选取电路106会依据对应于一目前的视讯帧(例如FK)的一影像品质指数(例如MK)以及至少一相邻视讯帧(例如FK-1及/或FK+1)的影像品质指数(例如MK-1及/或MK+1),来决定是否选取或是舍弃该目前的视讯帧(例如FK)。举例来说,选取电路106会比较MK-1、MK、MK+1与一预定临界值,以判断目前的视讯帧FK以及相邻的视讯帧FK-1、FK+1之影像品质。当比较结果指出目前的视讯帧FK具有较佳品质,且相邻的视讯帧FK-1、FK+1具有较佳或是较差的品质时,选取电路106会选取目前的视讯帧FK。当比较结果指出目前的视讯帧FK以及相邻的视讯帧FK-1、FK+1具有较差的品质,但是目前的视讯帧FK的品质仍高于相邻的视讯帧FK-1、FK+1的品质时,选取电路106会选取目前的视讯帧FK。当比较结果指出目前的视讯帧FK以及相邻的视讯帧FK-1、FK+1具有较差的品质,且目前的视讯帧FK的品质并未高于相邻的视讯帧FK-1、FK+1的品质时,选取电路106则会舍弃/不选取目前的视讯帧FK。同样的选取规则可以被应用在第一视讯序列V_1的每一个视讯帧F1~FN上。这样一来,选取电路106便可参考视讯帧的品质来将具有一第一帧率(例如120赫兹或是60赫兹)的一视讯序列转换为具有一第二帧率(例如30赫兹)的另一个视讯序列,其中该第二帧率会低于该第一帧率。
输出电路108耦接于选取电路106以及一储存装置111(例如一非挥发性记忆体(non-volatile memory))之间,且输出电路108是用来依据第二视讯序列V_2来产生输出视讯序列V_OUT至储存装置111,其中输出视讯序列V_OUT会被记录于储存装置111之中以供进一步的处理。在一示范性设计中,第二视讯序列V_2会直接被用来当作输出视讯序列V_OUT,举例来说,当第二视讯序列V_2的帧率相等于所要记录的输出视讯序列V_OUT的目标帧率时,输出电路108会直接将第二视讯序列V_2输出为输出视讯序列V_OUT。在另一示范性设计中,输出电路108会针对第二视讯序列V_2来执行视讯帧内插来产生输出视讯序列V_OUT,其中输出视讯序列V_OUT的帧率会高于第二视讯序列V_2的帧率,举例来说,当第二视讯序列V_2的帧率低于所要记录的输出视讯序列V_OUT的目标帧率时,输出电路108会针对由被选取视讯帧所组成的第二视讯序列V_2来执行视讯帧内插,进而产生由内插的新视讯帧以及所有的被选取视讯帧所组成的输出视讯序列V_OUT。在又另一示范性设计中,输出电路108会针对第二视讯序列V_2来执行视讯帧内插并舍弃第二视讯序列V_2中至少一视讯帧,以产生由内插的新视讯帧以及一部分的被选取视讯帧所组成的输出视讯序列V_OUT,其中输出视讯序列V_OUT的帧率可能等于、高于或是低于第二视讯序列V_2的帧率,举例来说,当第二视讯序列V_2的帧率相等于所要记录的输出视讯序列V_OUT的目标帧率,但第二视讯序列V_2中任两个连续视讯帧之间的间隔不等于所预期的连续视讯帧的影像显示时间间隔时,输出电路108会针对第二视讯序列V_2执行视讯内插来产生输出视讯序列V_OUT。在另一示范性设计中,输出电路108会直接舍弃第二视讯序列V_2中至少一视讯帧来产生输出视讯序列V_OUT,其中输出视讯序列V_OUT的帧率会低于第二视讯序列V_2的帧率,举例来说,当输入电路102执行视讯内插以使得第一视讯序列V_1的帧率远高于输出视讯序列V_OUT的帧率时,第二视讯序列V_2的帧率有可能依然会高于输出视讯序列V_OUT的帧率,因此,输出电路108亦可以仅舍弃第二视讯序列V_2的视讯帧而不针对第二视讯序列V_2来执行额外的视讯内插,这样亦可达到产生具有所需要的帧率的一输出视讯序列的目的。
为了让使用者能够更加地了解本发明的技术特征,以下将基于本发明的录影装置100来提出若干录影范例。
图2为基于图1所示的录影装置100的第一录影范例的示意图。在此范例中,输入电路102会直接将输入视讯序列V_IN输出为由视讯帧F1~视讯帧F6所组成的第一视讯序列V_1。由于视讯帧F2以及视讯帧F3含有模糊影像内容,因此影像品质估计电路104所计算出的相对应影像品质指数会指示出视讯帧F2以及视讯帧F3的品质不佳,因此,选取电路106会选取视讯帧F1、视讯帧F4~视讯帧F6,并且舍弃视讯帧F2以及视讯帧F3来产生第二视讯序列V_2。在此范例中,输出视讯序列V_OUT的目标帧率需要等于输入视讯序列V_IN的帧率,因此,输出电路108会执行视讯帧内插,也就是将新的视讯帧F2’以及新的视讯帧F3’插入至视讯帧F1以及视讯帧F4之间。在一示范性设计中,会依据第二视讯序列V_2中相邻的被选取视讯帧F1以及视讯帧F4中至少其一来进行视讯帧F2’/F3’的内插。在另一示范性设计中,会依据第一视讯序列V_1中至少一视讯帧(例如F2/F3)以及第二视讯序列V_2中至少一视讯帧(例如F1及/或F4)来进行视讯帧F2’/F3’的内插,由于需要参考第一视讯序列V_1中的视讯帧F2/F3(即视讯帧F2’/F3’对应的影像撷取时间点上所撷取的原始影像内容),所以视讯帧F2’/F3’会具有较佳的品质。简而言之,输出电路108会针对第二视讯序列V_2执行视讯帧内插来得到一第三视讯序列V_3,并且将第三视讯序列V_3记录为输出视讯序列V_OUT,其中输出视讯序列V_OUT的目标帧率会高于第二视讯序列V_2的帧率。由于视讯帧的选取是基于影像品质,因此可以产生具有较佳品质的输出视讯序列V_OUT并将其记录下来。
图3为基于图1所示的录影装置100的第二录影范例的示意图。在此范例中,输入电路102会直接将输入视讯序列V_IN输出为由视讯帧F1~F10所组成的第一视讯序列V_1,其中输入视讯序列V_IN的帧率为120赫兹。由于视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9含有模糊影像内容,因此影像品质估计电路104所计算出的相对应影像品质指数会指示出视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9的品质不佳,因此,选取电路106会选取视讯帧F1、视讯帧F5、视讯帧F10,并且舍弃视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9来产生第二视讯序列V_2。在此范例中,输出视讯序列V_OUT的目标帧率为30赫兹,且低于输入视讯序列V_IN的帧率。依据所提出之基于影像品质的帧选取机制,第二视讯序列V_2的帧率和输出视讯序列V_OUT的目标帧率相等,所以输出电路108会直接将第二视讯序列V_2输出为输出视讯序列V_OUT,而不执行上述的视讯帧内插。由于视讯帧的选取基于影像品质,因此可以产生具有较佳品质的输出视讯序列V_OUT并将其记录下来。
图4为基于图1所示的录影装置100的第三录影范例的示意图。在此范例中,输入电路102会直接将输入视讯序列V_IN输出为由视讯帧F1~视讯帧F10所组成的第一视讯序列V_1,其中输入视讯序列V_IN的帧率为120赫兹。由于视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9含有模糊影像内容,因此影像品质估计电路104所计算出的相对应影像品质指数会指示出视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9的品质不佳,因此,选取电路106会选取视讯帧F1、视讯帧F5、视讯帧F10,并且舍弃视讯帧F2~视讯帧F4以及视讯帧F6~视讯帧F9来产生第二视讯序列V_2。在此范例中,输出视讯序列V_OUT的目标帧率为30赫兹,且低于输入视讯序列V_IN的帧率。尽管依据所提出之基于影像品质的帧选取机制而使第二视讯序列V_2的帧率和输出视讯序列V_OUT的目标帧率相等,视讯帧F5和视讯帧F10之间的间隔并不会和连续视讯帧(例如1/30秒)的影像显示时间点之间的一预期间隔相等,所以输出电路108会针对第二视讯序列V_2执行视讯帧内插,并且舍弃第二视讯序列V_2中至少一视讯帧来得到第三视讯序列V_3,其中第二视讯序列V_2的帧率和第三视讯序列V_3的帧率相等。如图4所示,第三视讯序列V_3通过从第二视讯序列V_2移除视讯帧F10以及增加一新视讯帧F9’至第二视讯序列V_2而产生,其中视讯帧F5和视讯帧F9’的影像撷取时间点之间的间隔会相等于连续视讯帧(例如1/30秒)的影像显示时间点之间的一预期间隔。在一示范性设计中,会依据第二视讯序列V_2中相邻的被选取视讯帧F5以及视讯帧F10中至少其一来进行内插运算以得到视讯帧F9,而视讯帧内插会调整所参考的视讯帧的权重因子(weightingfactors)来得到具有良好品质的一内插视讯帧。于一设计变化中,会参考第二视讯序列V_2中一个可得的视讯帧来产生视讯帧F9’,举例来说,可以采用一外插(extrapolation)演算法来从被选取视讯帧F1/F5(当采用一即时或是非即时处理方式时)或是被选取视讯帧F10(当采用一非即时处理方式时)来得到视讯帧F9’。在另一示范性设计中,会依据第一视讯序列V_1中至少一视讯帧(例如F9)以及第二视讯序列V_2中至少一视讯帧(例如F5及/或F10)来进行内插运算以得到视讯帧F9’,由于第一视讯序列V_1中的视讯帧F9(即视讯帧F9’对应的影像撷取时间点上所撷取的原始影像内容)被参考,故视讯帧F9’会具有较佳的品质。输出电路108在得到第三视讯序列V_3之后,会将第三视讯序列V_3记录为输出视讯序列V_OUT。由于视讯帧的选取是基于影像品质,因此可以产生具有较佳品质的输出视讯序列V_OUT并将其记录下来。除此之外,由于所执行的视讯帧内插程序会建立对应于正确显示时间点的视讯帧,因此可以改善视讯播放时的流畅度。
在图4的范例中,视讯帧F9’系包含在输出视讯序列V_OUT之中,且用来当作视讯帧F9的一替代帧,以在正确的显示时间提供所需的影像内容。在一设计变化中,输出电路108另会比较视讯帧F9’的品质与视讯帧F9的品质来决定视讯帧F9和视讯帧F9’当中的哪一个应该被包含在输出视讯序列V_OUT里面。在视讯帧F9’的品质优于视讯帧F9的品质的情况下,视讯帧F9’会被选择来当作视讯帧F5的一下一视讯帧,并且在正确显示时间提供所需的影像内容。在视讯帧F9的品质优于视讯帧F9’的品质的情况下,视讯帧F9会被选择来当作视讯帧F5的一下一视讯帧,并且在正确显示时间提供所需的影像内容。
图5为基于图1所示的录影装置100的第四录影范例的示意图。在此范例中,输入电路102会针对由视讯帧F1、F3、F5、F7、F9所组成的输入视讯序列V_IN执行视讯内插,并且据此产生由视讯帧F1、F2’、F3、F4’、F5、F6’、F7、F8’、F9、F10’所组成的第一视讯序列V_1,其中输入视讯序列V_IN的帧率为60赫兹,而第一视讯序列V_1的帧率为120赫兹。由于视讯帧F2~视讯帧F4’以及视讯帧F6~视讯帧F9含有模糊影像内容,因此影像品质估计电路104所计算出的相对应影像品质指数会指示出视讯帧F2~视讯帧F4’以及视讯帧F6~视讯帧F9的品质不佳,故选取电路106会选取视讯帧F1、视讯帧F5、视讯帧F10’来产生第二视讯序列V_2。在一范例中,当输出视讯序列V_OUT的目标帧率为30赫兹时(即输出视讯序列V_OUT的目标帧率等于第二视讯序列V_2的帧率),可以直接将第二视讯序列V_2当作输出视讯序列V_OUT。在另一范例中,输出视讯序列V_OUT的目标帧率为15赫兹,低于第二视讯序列V_2的帧率,因此,输出电路108便不会执行视讯内插,而输出电路108会舍弃第二视讯序列V_2中的视讯帧F5,如图5所示,进而产生由视讯帧F1以及帧F10’所组成的输出视讯序列V_OUT。由于视讯帧的选取基于影像品质,因此可以产生具有较佳品质的输出视讯序列V_OUT并将其记录下来。
上述录影范例会基于影像品质指数来选取视讯帧,然而若是因为品质不佳而导致过多且连续的视讯帧被舍弃时,将会严重地降低被选取视讯帧的时域流畅度(temporalsmoothness),即使对该被选取视讯帧来进行视讯帧内插,在过多且连续的视讯帧被舍弃的情况之下亦无法有效地改善时域流畅度。为了保持时域流畅度,选取电路106会在第一视讯序列V_1中,每隔N个连续帧便会依据该N个连续帧的影像品质指数选取出至少一视讯帧,其中N为一正整数且系依据实际设计需求/考量而决定。更具体地说,就算所选取视讯帧的影像品质指数没有达到预定的临界值,也一定要从该N个连续视讯帧中选出具有最佳品质的一视讯帧。实作上,可依据输入视讯序列V_IN的帧率以及输出视讯序列V_OUT的帧率来设定N的值,然而此并非本发明的限制。
图6为依据本发明一实施例之针对影像撷取模组来记录输出视讯序列的录影方法的流程图。倘若大体上可达到相同的结果,并不一定需要一定遵照图6所示之流程中的步骤顺序来进行,且图6所示之步骤不一定要连续进行,亦即其他步骤亦可插入其中,此外,图6中的某些步骤亦可根据不同实施例或设计需求省略之。该录影方法可简单归纳如下:
步骤500:开始。
步骤502:接收由影像撷取模组101所产生的输入视讯序列V_IN。
步骤504:检查是否应对输入视讯序列V_IN采用视讯帧内插。若是,则执行步骤506;否则执行步骤508。
步骤506:针对输入视讯序列V_IN执行视讯帧内插来得到第一视讯序列V_1,其中第一视讯序列V_1的帧率高于输入视讯序列V_IN的帧率。执行步骤510。
步骤508:直接将输入视讯序列V_IN输出为第一视讯序列V_1。
步骤510:计算第一视讯序列V_1中所包含的每一个视讯帧的一影像品质指数。例如针对从该视讯帧的至少一部分(即一部分或是全部)所得到的一锐利度或是一模糊度进行评估以得到该影像品质指数。
步骤512:针对第一视讯序列V_1中所包含的每一个视讯帧,参考相对应的影像品质指数来决定是否选取或是舍弃/不选取。
步骤514:产生由被选取视讯帧所组成的第二视讯序列V_2。
步骤516:检查是否应针对第二视讯序列V_2执行视讯帧内插。若是,执行步骤518;否则执行步骤522。
步骤518:针对第二视讯序列V_2执行视讯帧内插来得到第三视讯序列V_3,其中第三视讯序列V_3的帧率和第二视讯序列V_2的帧率相等。
步骤520:将第三视讯序列V_3记录为输出视讯序列V_OUT。执行步骤524。
步骤522:将第二视讯序列V_2中的至少一部分(即一部分或是全部)记录为输出视讯序列V_OUT。当第二视讯序列V_2的帧率相等于输出视讯序列V_OUT的目标帧率时,直接把第二视讯序列V_2当作输出视讯序列V_OUT。当第二视讯序列V_2的帧率相高于输出视讯序列V_OUT的目标帧率时,舍弃第二视讯序列V_2中的至少一视讯帧以建立输出视讯序列V_OUT。
步骤524:结束。
由于本领域一般技术人员在通篇阅读本说明书关于影像记录装置100的说明后应能轻易地了解图6中每一步骤的细节,故在此为求简洁,将省略更进一步的说明。
应注意的是,图6中所示的录影方法仅供说明用途,本发明不以此为限,也就是说,图6中的一个或是一个以上的步骤可以被省略。例如在一第一设计变化中,可以将步骤504以及步骤506省略,使得步骤508会紧接在步骤502之后被执行;在一第二设计变化中,可以将步骤504以及步骤505省略,使得步骤506会紧接在步骤502之后被执行;在一第三设计变化中,可以将步骤516、步骤518以及步骤520省略,使得步骤522会紧接在步骤514之后被执行;在一第四设计变化中,可以将步骤516以及步骤522省略,使得步骤518会紧接在步骤514之后被执行;在一第五设计变化中,可以将步骤504、步骤506、步骤516以及步骤522省略,使得步骤508会紧接在步骤502之后被执行,而步骤518会紧接在步骤514之后被执行;以及在一第六设计变化中,可以将步骤504、步骤508、步骤516,步骤518以及步骤520省略,使得步骤506会紧接在步骤502之后被执行,而步骤522会紧接在步骤514之后被执行。
图6中的录影方法可以即时地或是非即时地被执行。在图6中的录影方法系即时地被执行的情况下,影像撷取模组101所产生的每一视讯帧(即每一被撷取影像)会立即被馈入录影装置100的输入电路102。录影装置100经由适当地设计可以操作在一高处理速度,因此,在下一视讯帧(即下一被撷取影像)被馈入录影装置100的输入电路102之前,影像品质估计电路104就会计算出目前的视讯帧的一影像品质指数,选取电路106便可以参考该影像品质指数来决定是否要选取或是舍弃目前的视讯帧,而输出电路108即可选择性地输出一目前所接收的视讯帧或是执行视讯内插来建立一新的视讯帧,若是目前的时间点并非正确的输出时间点,该新的视讯帧会被缓冲在输出电路108中,直到目前的时间点到达正确的输出时间点,无任何缓冲/缓冲过的新的视讯帧才会从输出电路108被输出。
在图6中的录影方法在非即时地被执行的情况下,影像撷取模组101所产生视讯帧(即被撷取影像)会被暂存在一相机缓冲器中。接下来,缓冲过的视讯帧(即缓冲过的被撷取影像)会被馈入录影装置100的输入电路102中。由于使用该相机缓冲器进行缓冲,因此录影装置100被允许操作在一较低的处理速度之下,除此之外,录影装置100可以对该相机缓冲器中的连续缓冲视讯帧进行批次处理,如此一来,影像品质估计电路104便可针对该些视讯帧来计算多个影像品质指数。当该影像品质指数计算好之后,选取电路106即可决定选取或是舍弃该些视讯帧。
图7为依据本发明第二示范性实施例的录影装置的方块图。录影装置600用来针对影像撷取模组101(例如一相机模组)记录一输出视讯序列V_OUT。录影装置600以及影像撷取模组101可以是一电子装置的至少一部分(即一部分或是全部)。例如录影装置600和影像撷取模组101设计于同一可携式装置上,例如智能手机或是数位相机。影像撷取模组101具有影像撷取的能力,且能够操作在一录影模式来产生一输入视讯序列V_IN至录影装置600。
在此实施例中,录影装置600包含(但不以此为限)一输入电路602、一内插电路604、一输出电路606以及一控制器608。输入电路602耦接至影像撷取模组101,且用来由影像撷取模组101所产生的输入视讯序列V_IN来得到一第一视讯序列V_1。在一示范性设计中,可以直接将输入视讯序列V_IN当作第一视讯序列V_1。具体地说,当输入视讯序列V_IN的一帧率(例如输入视讯序列V_IN的每秒帧数(frames per second,FPS))低于将要记录的输出视讯序列V_OUT的一目标帧率时,输入电路602会直接将输入视讯序列V_IN输出为第一视讯序列V_1。举例来说,输入视讯序列V_IN的帧率为15赫兹。假设影像撷取模组101在一正常录影模式下采用速度为30赫兹的一影像撷取率,为了达到具有较低帧率(例如15赫兹)的输入视讯序列V_IN,控制器608可以控制影像撷取模组101使其低于该影像撷取率,并且依据调降后的影像撷取率来产生输入视讯序列V_IN。
在一第二示范性设计中,输入电路602会周期性地从输入视讯序列V_IN中选出一视讯帧来得到第一视讯序列V_1,其中输入视讯序列V_IN的帧率高于第一视讯序列V_1的帧率。在一示范性设计中,当输入视讯序列V_IN的帧率为K,且输入视讯序列V_IN中每L个连续视讯帧就会选取一视讯帧来当作第一视讯序列V_1的一视讯帧,则第一视讯序列V_1的帧率会是K/L。
在一第三示范性设计中,输入电路602会依据一感测器601所产生的感测输入SENSOR_IN来从输入视讯序列V_IN中选取视讯帧,以得到第一视讯序列V_1,其中输入视讯序列V_IN的帧率高于第一视讯序列V_1的帧率。举例来说,感测器112可以是内建于一智能手机的一重力感测器(G-sensor)或是一陀螺仪(Gyro sensor),因此,感测器输入SENSOR_IN代表有关于智能手机的运动状态,特别是影像撷取模组101的运动状态。换句话说,感测器输入SENSOR_IN可以直接用来当作输入视讯序列V_IN中所包含的每一视讯帧的影像品质的一指标,因此,便无需针对输入视讯序列V_IN中的每一个视讯帧来计算任何影像品质指数。当感测器输入SENSOR_IN指示该视讯帧在一稳定状况下所产生时,输入电路602便会选取该视讯帧;反之,当感测器输入SENSOR_IN指示该视讯帧在一手震状况下所产生时,输入电路602便会舍弃该视讯帧。如此一来,输入电路602便能够参考感测器输入SENSOR_IN来将具有一第一帧率(例如120赫兹或是60赫兹)的一视讯序列转换为具有一第二帧率(例如30赫兹)的另一个视讯序列,其中该第二帧率会低于该第一帧率。
内插电路604耦接至输入电路602,且用来针对第一视讯序列V_1执行视讯帧内插,以得到一第二视讯序列V_2,其中第二视讯序列V_2的帧率高于第一视讯序列V_1的帧率。使用内插电路604的其中一个目的在于使第二视讯序列V_2的帧率能够相等于所要记录的输出视讯序列V_OUT的目标帧率。使用内插电路604的另外一个目的在于通过增加品质较佳的新的视讯帧至第一视讯序列V_1,进而产生相较于输入视讯序列V_IN,品质较佳的第二视讯序列V_2。
输出电路606耦接于内插电路604以及储存装置111(例如一非挥发性记忆体)之间,且输出电路606是用来将第二视讯序列V_2当作输出视讯序列V_OUT记录下来。例如输出视讯序列V_OUT被记录在储存装置111中以供进一步处理。
为了让使用者能够更加地了解本发明的技术特征,以下将基于本发明的录影装置100来提出若干录影范例。
图8为基于图7所示的录影装置600的第一录影范例的示意图。在此范例中,控制器608会控制影像撷取模组101以减少影像撷取率,使得输入视讯序列V_IN的帧率为15赫兹(低于目标帧率,如30赫兹)。此外,输入电路602会直接将输入视讯序列V_IN输出为第一视讯序列V_1,换句话说,输入视讯序列V_IN中包含的所有视讯帧F1、视讯帧F2、视讯帧F3都会被输入电路602选取来作为第一视讯序列V_1。由于影像撷取率被刻意地降低,所以较长时间的曝光便能使得较大量的光线进入相机感测器,因此输入视讯序列V_IN中的每一视讯帧的影像品质会被增强。内插电路604会执行视讯帧内插来建立一新的视讯帧F12,并将新的视讯帧F12插入至视讯帧F2和视讯帧F3之间,并且据此产生具有目标帧率的第二视讯序列V_2,如此便可以得到具有目标帧率(例如30赫兹)的一视讯序列。应注意的是,视讯帧内插会调整所参考的视讯帧的权重因子(weighting factors)来得到具有良好品质的一内插视讯帧。于一设计变化中,内插电路604可采用一外插演算法来基于第一视讯序列V_1中的一个可得视讯帧来各自建立视讯帧F12以及视讯帧F23。举例来说,内插电路604可以从视讯帧F1(当采用一即时或是非即时处理方式时)或是视讯帧F2/F3(当采用一非即时处理方式时)来得到视讯帧F12。接下来,输出电路606会记录第二视讯序列V_2为输出视讯序列V_OUT。由于影像撷取率被刻意地降低以改善输入视讯序列V_IN的品质,因此录影装置600可产生并纪录品质较佳的输出视讯序列V_OUT。
图9为基于图7所示的录影装置600的第二录影范例的示意图。在此范例中,输入电路602会周期性地从输入视讯序列V_IN中选择一视讯帧来产生第一视讯序列V_1,其中输入视讯序列V_IN是由连续的视讯帧F1~视讯帧F10所组成,而第一视讯序列V_1由视讯帧F1、视讯帧F5、视讯帧F9所组成。更具体地说,输入视讯序列V_IN中,每四个连续视讯帧中会选取出第一个视讯帧,而其余的视讯帧都会被舍弃/不选取。由于周期性地选取视讯帧,因此若输入视讯序列V_IN的帧率为60赫兹,第一视讯序列V_1的帧率就会是15赫兹。应注意的是,第一视讯序列V_1的帧率会低于输出视讯序列V_OUT的目标帧率,因此,内插电路604会针对第一视讯序列V_1执行视讯帧内插来产生具有相等于目标帧率(例如30赫兹)的帧率的第二视讯序列V_2。在一示范性设计中,会依据第一视讯序列V_1中相邻的被选取视讯帧F1以及视讯帧F5的至少其一来进行视讯帧F3’的内插,以及依据第一视讯序列V_1中相邻的被选取视讯帧F5以及视讯帧F9的至少其一来进行视讯帧F7’的内插。应注意的是,视讯帧内插会调整所参考的视讯帧的权重因子来得到具有良好品质的一内插视讯帧。在另一示范性设计中,会依据输入视讯序列V_IN中至少一视讯帧(例如F3)以及第一视讯序列V_1中至少一视讯帧(例如F1及/或F5)来进行内插运算以得到视讯帧F3’,以及依据输入视讯序列V_IN中至少一视讯帧(例如F7)以及第一视讯序列V_1中至少一视讯帧(例如F5及/或F9)来进行内插运算以得到视讯帧F7’,由于第一视讯序列V_1中的视讯帧F3/F7(即视讯帧F3/F7对应的影像撷取时间点上所撷取的原始影像内容)会被参考,所以视讯帧F3/F7会具有较佳的品质。在又另一示范性设计中,内插电路604会采用一外插演算法来基于第一视讯序列V_1中的一个可得视讯帧来建立视讯帧F3’以及视讯帧F7’。举例来说,内插电路604可以从视讯帧F1(当采用一即时或是非即时处理方式时)或是视讯帧F5/F9(当采用一非即时处理方式时)来得到视讯帧F3’。同样地,内插电路604可以从视讯帧F1/F5(当采用一即时或是非即时处理方式时)或是视讯帧F9(当采用一非即时处理方式时)来得到视讯帧F7’。接下来,输出电路608会记录第二视讯序列V_2为输出视讯序列V_OUT。这样一来,由于使用视讯帧内插,因此可产生品质较佳的输出视讯序列V_OUT。
控制器608会控制影像撷取模组101来使用相同的影像撷取设定,以产生输入视讯序列V_IN中的每一视讯帧。然而此仅供说明用途,本发明不以此为限。于一设计变化中,控制器608会控制影像撷取模组101使用不同的影像撷取设定,以分别产生输入视讯序列V_IN中的视讯帧,也就是说,输入视讯序列V_IN中所包含的一视讯帧(即一被选取视讯帧)通过影像撷取模组101使用一第一影像撷取设定来产生(例如一较长的曝光时间),而输入视讯序列V_IN中所包含的另一视讯帧(例如一被舍弃/不选取的视讯帧)通过影像撷取模组101使用不同于该第一影像撷取设定的一第二影像撷取设定来产生(例如一较短的曝光时间)。举例来说,但本发明不以此为限,控制器608控制影像撷取模组101以通过使用该第一影像撷取设定来周期性地产生一视讯帧,且又通过使用该第二影像撷取设定来周期性地产生一视讯帧。图10为基于图7所示的录影装置600的第三录影范例的示意图。输入视讯序列V_IN的帧率相等于输出视讯序列V_OUT的目标帧率。在此范例中,控制器608会控制影像撷取模组101使用一较长的曝光时间TEXP_L来产生每一个视讯帧F1、视讯帧F3、视讯帧F5,且另外又控制影像撷取模组101使用一较短的曝光时间TEXP_S来产生每一个视讯帧F2、视讯帧F4、视讯帧F6。因此,影像撷取模组101会产生帧率为30赫兹的输入视讯序列V_IN。在接收到由视讯帧F1~视讯帧F6所组成的输入视讯序列V_IN之后,输入电路602会通过周期性地从输入视讯序列V_IN中选取一视讯帧来产生第一视讯序列V_1。在此范例中,由于该周期性选取系选取奇数的视讯帧并且舍弃偶数的视讯帧,所以第一视讯序列V_1的帧率为15赫兹。由于本领域一般技术人员在通篇阅读本说明书关于图9所示的范例的说明后应能轻易地了解接下来的操作的细节,故在此为求简洁,将省略更进一步的说明。
图11为依据本发明一实施例之针对影像撷取模组来记录输出视讯序列的录影方法的流程图。倘若大体上可达到相同的结果,并不一定需要一定遵照图11所示之流程中的步骤顺序来进行,且图11所示之步骤不一定要连续进行,亦即其他步骤亦可插入其中,此外,图11中的某些步骤亦可根据不同实施例或设计需求省略之。该录影方法可简单归纳如下:
步骤1000:开始。
步骤1002:接收由影像撷取模组101所产生的输入视讯序列V_IN。
步骤1010:检查是否选取输入视讯序列V_IN中的所有视讯帧。若是,则执行步骤1012;否则执行步骤1014。
步骤1012:直接将输入视讯序列V_IN输出为第一视讯序列V_1。执行步骤1016。
步骤1014:依据一固定时间间隔(即一周期性视讯帧选取)来从输入视讯序列V_IN中选取视讯帧,以得到第一视讯序列V_1。
步骤1016:针对第一视讯序列V_1来执行视讯帧内插以得到第二视讯序列V_2,其中第二视讯序列V_2的帧率高于第一视讯序列V_1的帧率。
步骤1018:将第二视讯序列V_2记录为输出视讯序列V_OUT。
步骤1020:结束。
由于本领域一般技术人员在通篇阅读本说明书关于影像记录装置600的说明后应能轻易地了解图11中每一步骤的细节,故在此为求简洁,将省略更进一步的说明。
应注意的是,图11中所示的录影方法仅供说明用途,本发明不以此为限。也就是说,图11中的一个或是一个以上的步骤可以被省略。例如在一第一设计变化中,可以将步骤1004、步骤1010、步骤1012以及步骤1014省略,使得步骤1006会紧接在步骤1002之后被执行;在一第二设计变化中,可以将步骤1004、步骤1006、步骤1008、步骤1010以及步骤1014省略,使得步骤1012会紧接在步骤1002之后被执行;以及在一第三设计变化中,可以将步骤1004、步骤1006、步骤1008、步骤1010以及步骤1012省略,使得步骤1014会紧接在步骤1002之后被执行。
图11中的录影方法可以即时地或是非即时地被执行。在11图中的录影方法系即时地被执行的情况下,影像撷取模组101所产生的每一视讯帧(即每一被撷取影像)会立即被馈入录影装置100的输入电路102。录影装置600经由适当地设计可以操作在一高处理速度,因此,在下一视讯帧(即下一被撷取影像)被馈入录影装置600的输入电路602之前,输入电路602会决定是否要选取或是舍弃目前的视讯帧,而内插电路604会决定是否要产生一内插视讯帧。
在图11中的录影方法在非即时地被执行的情况下,影像撷取模组101所产生视讯帧(即被撷取影像)会被暂存在一相机缓冲器中。接下来,缓冲过的视讯帧(即缓冲过的被撷取影像)会被馈入录影装置600的输入电路602中。由于使用该相机缓冲器进行缓冲,因此录影装置600被允许操作在一较低的处理速度之下,除此之外,录影装置600可以对该相机缓冲器中的连续缓冲视讯帧进行批次处理,如此一来,输入电路602便可依据从该相机缓冲器所读取出来的该些视讯帧来输出被选取的视讯帧,而当这些被选取视讯帧准备好的时候,内插电路604便可开始产生内插视讯帧。
以上所述仅为本发明之较佳实施例,凡依本发明申请专利范围所做之均等变化与修饰,皆应属本发明之涵盖范围。

Claims (14)

1.一种针对一影像撷取模组记录一输出视讯序列的录影方法,包含有:
由该影像撷取模组产生一输入视讯序列;
检查是否应对该输入视讯序列采用视讯帧内插;
依据该输入视讯序列来得到一第一视讯序列,其中该第一视讯序列由多个视讯帧所组成;
计算该第一视讯序列中的每一视讯帧的一影像品质指数;
参考该影像品质指数来选取或是舍弃该第一视讯序列中的每一视讯帧,并且据此得到由多个被选取视讯帧所组成的一第二视讯序列;
检查是否应对该第二视讯序列执行视讯帧内插;以及
依据该第二视讯序列来产生所记录的该输出视讯序列。
2.如权利要求1所述的录影方法,其特征在于,得到该第一视讯序列的步骤包含有:
通过针对该输入视讯序列执行视讯帧内插来得到该第一视讯序列,其中该第一视讯序列的一帧率高于该输入视讯序列的一帧率。
3.如权利要求1所述的录影方法,其特征在于,计算该影像品质指数的步骤包含有:
通过评估每一视讯帧的一锐利度或是一模糊度来决定该影像品质指数。
4.如权利要求1所述的录影方法,其特征在于,计算该影像品质指数的步骤包含有:
依据一感测器输入来决定该影像品质指数。
5.如权利要求1所述的录影方法,其特征在于,产生所记录的该输出视讯序列的步骤包含有:
记录该第二视讯序列的至少一部分来当作该输出视讯序列。
6.如权利要求1所述的录影方法,其特征在于,产生所记录的该输出视讯序列的步骤包含有:
通过针对该第二视讯序列执行视讯帧内插来得到一第三视讯序列;以及
记录该第三视讯序列的至少一部分来当作该输出视讯序列。
7.如权利要求6所述的录影方法,其特征在于,针对该第二视讯序列所执行之该视讯序列内插会通过参考该第一视讯序列的至少一视讯帧以及该第二视讯序列的至少一视讯帧来产生该第三视讯序列的一视讯帧。
8.一种针对一影像撷取模组记录一输出视讯序列的录影装置,包含有:
一输入电路,用来由该影像撷取模组产生一输入视讯序列,检查是否应对该输入视讯序列采用视讯帧内插,依据该输入视讯序列来得到一第一视讯序列,其中该第一视讯序列由多个视讯帧所组成;
一影像品质估计电路,用来计算该第一视讯序列中的每一视讯帧的一影像品质指数;
一选择电路,用来参考该影像品质指数来选取或是舍弃该第一视讯序列中的每一视讯帧,并且据此得到由多个被选取视讯帧所组成的一第二视讯序列;以及
一输出电路,用来检查是否应对该第二视讯序列执行视讯帧内插,并依据该第二视讯序列来产生所记录的该输出视讯序列。
9.如权利要求8所述的录影装置,其特征在于,该输入电路通过针对该输入视讯序列执行视讯帧内插来得到该第一视讯序列,其中该第一视讯序列的一帧率高于该输入视讯序列的一帧率。
10.如权利要求8所述的录影装置,其特征在于,该影像品质估计电路通过评估每一视讯帧的一锐利度或是一模糊度来决定该影像品质指数。
11.如权利要求8所述的录影装置,其特征在于,该影像品质估计电路依据一感测器输入来决定该影像品质指数。
12.如权利要求8所述的录影装置,其特征在于,该输出电路记录该第二视讯序列的至少一部分来当作该输出视讯序列。
13.如权利要求8所述的录影装置,其特征在于,该输出电路通过针对该第二视讯序列执行视讯帧内插来得到一第三视讯序列;以及记录该第三视讯序列的至少一部分来当作该输出视讯序列。
14.如权利要求13所述的录影装置,其特征在于,针对该第二视讯序列所执行之该视讯序列内插会通过参考该第一视讯序列的至少一视讯帧以及该第二视讯序列的至少一视讯帧来产生该第三视讯序列的一视讯帧。
CN201310196545.XA 2012-05-24 2013-05-24 针对影像撷取模组记录输出视讯序列的录影方法以及录影装置 Active CN103428460B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261651499P 2012-05-24 2012-05-24
US61/651,499 2012-05-24
US13/891,196 2013-05-10
US13/891,196 US9560276B2 (en) 2012-05-24 2013-05-10 Video recording method of recording output video sequence for image capture module and related video recording apparatus thereof

Publications (2)

Publication Number Publication Date
CN103428460A CN103428460A (zh) 2013-12-04
CN103428460B true CN103428460B (zh) 2018-03-13

Family

ID=49621289

Family Applications (5)

Application Number Title Priority Date Filing Date
CN2013101845833A Pending CN103428423A (zh) 2012-05-24 2013-05-17 预览系统以及预览方法
CN2013101858481A Pending CN103428425A (zh) 2012-05-24 2013-05-20 影像撷取装置以及影像撷取方法
CN201310196539.4A Expired - Fee Related CN103428428B (zh) 2012-05-24 2013-05-24 影像捕获设备以及影像捕获方法
CN201310196195.7A Active CN103428427B (zh) 2012-05-24 2013-05-24 影像尺寸重新调整方法以及影像尺寸重新调整装置
CN201310196545.XA Active CN103428460B (zh) 2012-05-24 2013-05-24 针对影像撷取模组记录输出视讯序列的录影方法以及录影装置

Family Applications Before (4)

Application Number Title Priority Date Filing Date
CN2013101845833A Pending CN103428423A (zh) 2012-05-24 2013-05-17 预览系统以及预览方法
CN2013101858481A Pending CN103428425A (zh) 2012-05-24 2013-05-20 影像撷取装置以及影像撷取方法
CN201310196539.4A Expired - Fee Related CN103428428B (zh) 2012-05-24 2013-05-24 影像捕获设备以及影像捕获方法
CN201310196195.7A Active CN103428427B (zh) 2012-05-24 2013-05-24 影像尺寸重新调整方法以及影像尺寸重新调整装置

Country Status (2)

Country Link
US (6) US9503645B2 (zh)
CN (5) CN103428423A (zh)

Families Citing this family (95)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9936143B2 (en) 2007-10-31 2018-04-03 Google Technology Holdings LLC Imager module with electronic shutter
KR101720774B1 (ko) * 2010-11-24 2017-03-28 삼성전자주식회사 디지털 촬영 장치 및 그의 사진 제공 방법
WO2013145531A1 (ja) * 2012-03-29 2013-10-03 日本電気株式会社 解析システム
JP5880263B2 (ja) * 2012-05-02 2016-03-08 ソニー株式会社 表示制御装置、表示制御方法、プログラムおよび記録媒体
US9392322B2 (en) 2012-05-10 2016-07-12 Google Technology Holdings LLC Method of visually synchronizing differing camera feeds with common subject
US9503645B2 (en) * 2012-05-24 2016-11-22 Mediatek Inc. Preview system for concurrently displaying multiple preview images generated based on input image generated by image capture apparatus and related preview method thereof
KR101880636B1 (ko) * 2012-07-25 2018-07-20 삼성전자주식회사 디지털 촬영 장치 및 그의 제어 방법
US20140099994A1 (en) * 2012-10-04 2014-04-10 Nvidia Corporation Electronic camera embodying a proximity sensor
WO2014064690A1 (en) 2012-10-23 2014-05-01 Sivan Ishay Real time assessment of picture quality
KR102104497B1 (ko) * 2012-11-12 2020-04-24 삼성전자주식회사 영상을 표시하는 방법 및 이를 위한 장치
US9282244B2 (en) 2013-03-14 2016-03-08 Microsoft Technology Licensing, Llc Camera non-touch switch
WO2014153396A1 (en) * 2013-03-20 2014-09-25 Covidien Lp System and method for enhancing picture-in-picture display for imaging devices used for surgical procedures
WO2014196389A1 (ja) * 2013-06-06 2014-12-11 富士フイルム株式会社 オート・フォーカス装置およびその動作制御方法
KR102082661B1 (ko) * 2013-07-12 2020-02-28 삼성전자주식회사 전자 장치의 촬영 이미지 생성 방법 및 장치
US9430045B2 (en) * 2013-07-17 2016-08-30 Lenovo (Singapore) Pte. Ltd. Special gestures for camera control and image processing operations
US9582716B2 (en) * 2013-09-09 2017-02-28 Delta ID Inc. Apparatuses and methods for iris based biometric recognition
KR20150051085A (ko) * 2013-11-01 2015-05-11 삼성전자주식회사 하이 다이나믹 레인지 영상을 표시하는 방법 및 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치.
US9210327B2 (en) * 2013-12-02 2015-12-08 Yahoo! Inc. Blur aware photo feedback
CN104333689A (zh) * 2014-03-05 2015-02-04 广州三星通信技术研究有限公司 在拍摄时对预览图像进行显示的方法和装置
US9357127B2 (en) 2014-03-18 2016-05-31 Google Technology Holdings LLC System for auto-HDR capture decision making
CN103916602B (zh) * 2014-04-17 2019-01-15 努比亚技术有限公司 远程拍摄控制的方法、第一移动终端及系统
KR102105961B1 (ko) 2014-05-13 2020-05-28 엘지전자 주식회사 이동단말기 및 그 제어방법
US9628702B2 (en) 2014-05-21 2017-04-18 Google Technology Holdings LLC Enhanced image capture
US9813611B2 (en) * 2014-05-21 2017-11-07 Google Technology Holdings LLC Enhanced image capture
US9729784B2 (en) * 2014-05-21 2017-08-08 Google Technology Holdings LLC Enhanced image capture
US9774779B2 (en) 2014-05-21 2017-09-26 Google Technology Holdings LLC Enhanced image capture
US9503644B2 (en) 2014-05-22 2016-11-22 Microsoft Technology Licensing, Llc Using image properties for processing and editing of multiple resolution images
US11184580B2 (en) 2014-05-22 2021-11-23 Microsoft Technology Licensing, Llc Automatically curating video to fit display time
US9451178B2 (en) 2014-05-22 2016-09-20 Microsoft Technology Licensing, Llc Automatic insertion of video into a photo story
GB201412818D0 (en) * 2014-07-18 2014-09-03 Omg Plc Minimisation of blur in still image capture
US9413947B2 (en) 2014-07-31 2016-08-09 Google Technology Holdings LLC Capturing images of active subjects according to activity profiles
CN104200189B (zh) * 2014-08-27 2017-05-03 苏州佳世达电通有限公司 条码扫描装置及条码扫描装置的处理方法
KR102189647B1 (ko) * 2014-09-02 2020-12-11 삼성전자주식회사 디스플레이 장치, 시스템 및 그 제어 방법
KR20160029536A (ko) * 2014-09-05 2016-03-15 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR102252448B1 (ko) 2014-09-12 2021-05-14 삼성전자주식회사 제어 방법 및 그 방법을 처리하는 전자장치
US9654700B2 (en) 2014-09-16 2017-05-16 Google Technology Holdings LLC Computational camera using fusion of image sensors
CN105516579B (zh) * 2014-09-25 2019-02-05 联想(北京)有限公司 一种图像处理方法、装置和电子设备
EP3010225B1 (en) * 2014-10-14 2019-07-24 Nokia Technologies OY A method, apparatus and computer program for automatically capturing an image
KR102290287B1 (ko) * 2014-10-24 2021-08-17 삼성전자주식회사 이미지 신호와 근접 신호를 동시에 생성하는 이미지 센서
CN104581379A (zh) * 2014-12-31 2015-04-29 乐视网信息技术(北京)股份有限公司 视频预览图的选取方法及选取装置
TWI565317B (zh) * 2015-01-06 2017-01-01 緯創資通股份有限公司 影像處理方法以及行動電子裝置
US10277888B2 (en) * 2015-01-16 2019-04-30 Qualcomm Incorporated Depth triggered event feature
FR3043233B1 (fr) * 2015-10-30 2018-04-06 Merry Pixel Procede de selection automatique d'images depuis un dispositif mobile
CN105872352A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术(北京)有限公司 一种拍摄照片的方法及装置
US9881191B2 (en) * 2015-12-14 2018-01-30 Leadot Innovation, Inc. Method of controlling operation of cataloged smart devices
US10015400B2 (en) * 2015-12-17 2018-07-03 Lg Electronics Inc. Mobile terminal for capturing an image and associated image capturing method
US9743077B2 (en) * 2016-01-12 2017-08-22 Sling Media LLC Detection and marking of low quality video content
KR20180023197A (ko) * 2016-08-25 2018-03-07 엘지전자 주식회사 단말기 및 그 제어 방법
CN107800950B (zh) * 2016-09-06 2020-07-31 东友科技股份有限公司 影像撷取方法
WO2018069154A1 (en) * 2016-10-11 2018-04-19 Philips Lighting Holding B.V. Control system for a surveillance system, surveillance system and method of controlling a surveillance system
WO2018076370A1 (zh) * 2016-10-31 2018-05-03 华为技术有限公司 一种视频帧的处理方法及设备
CN106453962B (zh) * 2016-11-30 2020-01-21 珠海市魅族科技有限公司 双屏智能终端的摄像控制方法
CN108174185B (zh) * 2016-12-07 2021-03-30 中兴通讯股份有限公司 一种拍照方法、装置及终端
US20180227502A1 (en) * 2017-02-06 2018-08-09 Qualcomm Incorporated Systems and methods for reduced power consumption in imaging pipelines
CN106937045B (zh) 2017-02-23 2020-08-14 华为机器有限公司 一种预览图像的显示方法、终端设备及计算机存储介质
CN108781254A (zh) * 2017-03-14 2018-11-09 华为技术有限公司 拍照预览方法、图形用户界面及终端
WO2019031086A1 (ja) * 2017-08-09 2019-02-14 富士フイルム株式会社 画像処理システム、サーバ装置、画像処理方法、及び画像処理プログラム
JP7023663B2 (ja) * 2017-10-12 2022-02-22 キヤノン株式会社 撮像装置およびその制御方法
CN107731020B (zh) * 2017-11-07 2020-05-12 Oppo广东移动通信有限公司 多媒体播放方法、装置、存储介质及电子设备
CN107809590B (zh) * 2017-11-08 2020-04-28 青岛海信移动通信技术股份有限公司 一种拍照方法和装置
CN110086905B (zh) * 2018-03-26 2020-08-21 华为技术有限公司 一种录像方法及电子设备
JP7139440B2 (ja) * 2018-03-26 2022-09-20 華為技術有限公司 ビデオ記録方法および電子デバイス
US10861148B2 (en) * 2018-04-30 2020-12-08 General Electric Company Systems and methods for improved component inspection
CN109005337B (zh) * 2018-07-05 2021-08-24 维沃移动通信有限公司 一种拍照方法及终端
CN108600647A (zh) * 2018-07-24 2018-09-28 努比亚技术有限公司 拍摄预览方法、移动终端及存储介质
CN109257538A (zh) * 2018-09-10 2019-01-22 Oppo(重庆)智能科技有限公司 拍照控制方法及相关装置
KR102637732B1 (ko) * 2018-09-21 2024-02-19 삼성전자주식회사 이미지 신호 프로세서, 상기 이미지 신호 프로세서의 동작 방법 및 상기 이미지 신호 프로세서를 포함하는 애플리케이션 프로세서
US10872240B2 (en) * 2018-09-28 2020-12-22 Opentv, Inc. Systems and methods for generating media content
DE112019004977T5 (de) 2018-10-05 2021-08-12 Google Llc Herunterskalierte Aufnahmevorschau für eine Panoramaaufnahmen-Benutzeroberfläche
CN109194839B (zh) * 2018-10-30 2020-10-23 维沃移动通信(杭州)有限公司 一种显示控制方法、终端和计算机可读存储介质
CN109830077A (zh) * 2019-01-15 2019-05-31 苏州佳世达光电有限公司 监控装置及监控方法
CN109922271A (zh) * 2019-04-18 2019-06-21 珠海格力电器股份有限公司 一种基于折叠屏的移动终端及其拍照方法
US10812771B1 (en) * 2019-06-12 2020-10-20 At&T Intellectual Property I, L.P. Methods, systems, and devices for adjusting image content for streaming panoramic video content
JP7210388B2 (ja) * 2019-06-25 2023-01-23 キヤノン株式会社 画像処理装置、撮像装置、画像処理装置の制御方法およびプログラム
KR102665968B1 (ko) * 2019-06-27 2024-05-16 삼성전자주식회사 블러 추정 방법 및 장치
US10984513B1 (en) 2019-09-30 2021-04-20 Google Llc Automatic generation of all-in-focus images with a mobile camera
CN113544692B (zh) 2019-10-10 2024-09-06 谷歌有限责任公司 用于面部认证的摄像头同步和图像标记
US11032486B2 (en) 2019-10-11 2021-06-08 Google Llc Reducing a flicker effect of multiple light sources in an image
CN110896451B (zh) * 2019-11-20 2022-01-28 维沃移动通信有限公司 预览画面显示方法、电子设备及计算机可读存储介质
CN114157804B (zh) 2020-01-23 2022-09-09 华为技术有限公司 一种长焦拍摄的方法及电子设备
US10835106B1 (en) 2020-02-21 2020-11-17 Ambu A/S Portable monitor
US11109741B1 (en) 2020-02-21 2021-09-07 Ambu A/S Video processing apparatus
US10980397B1 (en) * 2020-02-21 2021-04-20 Ambu A/S Video processing device
US11166622B2 (en) 2020-02-21 2021-11-09 Ambu A/S Video processing apparatus
US11190689B1 (en) 2020-07-29 2021-11-30 Google Llc Multi-camera video stabilization
CN114125344B (zh) * 2020-08-31 2023-06-23 京东方科技集团股份有限公司 视频处理装置及方法、监视器设备、计算机设备、介质
CN114205515B (zh) * 2020-09-18 2023-04-07 荣耀终端有限公司 一种视频的防抖处理方法及电子设备
FR3118380B1 (fr) * 2020-12-22 2024-08-30 Fond B Com Procédé de codage d’images d’une séquence vidéo à coder, procédé de décodage, dispositifs et système correspondants.
CN112954193B (zh) * 2021-01-27 2023-02-10 维沃移动通信有限公司 拍摄方法、装置、电子设备及介质
US11716531B2 (en) 2021-03-22 2023-08-01 International Business Machines Corporation Quality of multimedia
US11483472B2 (en) * 2021-03-22 2022-10-25 International Business Machines Corporation Enhancing quality of multimedia
US11533427B2 (en) 2021-03-22 2022-12-20 International Business Machines Corporation Multimedia quality evaluation
EP4086845A1 (en) * 2021-05-07 2022-11-09 Nokia Technologies Oy Image processing
EP4115789B1 (en) 2021-07-08 2023-12-20 Ambu A/S Endoscope image processing device
CN114422713B (zh) * 2022-03-29 2022-06-24 湖南航天捷诚电子装备有限责任公司 一种图像采集及智能判读处理装置及方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101325654A (zh) * 2007-06-11 2008-12-17 奇景光电股份有限公司 具运动补偿的提高帧率的方法

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0754966B2 (ja) 1985-12-09 1995-06-07 株式会社日立製作所 輪郭補正回路
US6075926A (en) 1997-04-21 2000-06-13 Hewlett-Packard Company Computerized method for improving data resolution
JP3564031B2 (ja) 1999-03-16 2004-09-08 オリンパス株式会社 電子スチルカメラ
JP2000278710A (ja) * 1999-03-26 2000-10-06 Ricoh Co Ltd 両眼立体視画像評価装置
JP2001211351A (ja) * 2000-01-27 2001-08-03 Fuji Photo Film Co Ltd 画像撮像装置およびその動作制御方法
US20020056083A1 (en) * 2000-03-29 2002-05-09 Istvan Anthony F. System and method for picture-in-browser scaling
GB0125774D0 (en) * 2001-10-26 2001-12-19 Cableform Ltd Method and apparatus for image matching
JP4198449B2 (ja) * 2002-02-22 2008-12-17 富士フイルム株式会社 デジタルカメラ
JP2004080252A (ja) 2002-08-14 2004-03-11 Toshiba Corp 映像表示装置及びその方法
US7269300B2 (en) 2003-10-24 2007-09-11 Eastman Kodak Company Sharpening a digital image in accordance with magnification values
WO2005112436A1 (ja) * 2004-05-13 2005-11-24 Sony Corporation 撮像装置、画面表示方法およびユーザインターフェース
US7545391B2 (en) 2004-07-30 2009-06-09 Algolith Inc. Content adaptive resizer
US7711211B2 (en) 2005-06-08 2010-05-04 Xerox Corporation Method for assembling a collection of digital images
US8045047B2 (en) * 2005-06-23 2011-10-25 Nokia Corporation Method and apparatus for digital image processing of an image having different scaling rates
US7448753B1 (en) 2005-07-19 2008-11-11 Chinnock Randal B Portable Digital Medical Camera for Capturing Images of the Retina or the External Auditory Canal, and Methods of Use
EP2448247A1 (en) * 2005-11-02 2012-05-02 Olympus Corporation An image processor for electronic camera
JP4956988B2 (ja) * 2005-12-19 2012-06-20 カシオ計算機株式会社 撮像装置
US20070283269A1 (en) * 2006-05-31 2007-12-06 Pere Obrador Method and system for onboard camera video editing
JP4904108B2 (ja) 2006-07-25 2012-03-28 富士フイルム株式会社 撮影装置及び画像表示制御方法
JP4218720B2 (ja) 2006-09-22 2009-02-04 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP2008096868A (ja) * 2006-10-16 2008-04-24 Sony Corp 撮像表示装置、撮像表示方法
US7948526B2 (en) 2006-11-14 2011-05-24 Casio Computer Co., Ltd. Imaging apparatus, imaging method and program thereof
US8615112B2 (en) * 2007-03-30 2013-12-24 Casio Computer Co., Ltd. Image pickup apparatus equipped with face-recognition function
JP4139430B1 (ja) 2007-04-27 2008-08-27 シャープ株式会社 画像処理装置及び方法、画像表示装置及び方法
JP2008306236A (ja) 2007-06-05 2008-12-18 Sony Corp 画像表示装置、画像表示方法、画像表示方法のプログラム及び画像表示方法のプログラムを記録した記録媒体
JP5053731B2 (ja) * 2007-07-03 2012-10-17 キヤノン株式会社 画像表示制御装置及び画像表示制御方法及びプログラム及び記録媒体
JP4999649B2 (ja) * 2007-11-09 2012-08-15 キヤノン株式会社 表示装置
JP5003529B2 (ja) 2008-02-25 2012-08-15 株式会社ニコン 撮像装置および対象物の検出方法
CN101266650A (zh) 2008-03-31 2008-09-17 北京中星微电子有限公司 一种基于人脸检测的图像保存方法
TW200947355A (en) 2008-05-15 2009-11-16 Ind Tech Res Inst Intelligent multi-direction display system and method
JP4543105B2 (ja) 2008-08-08 2010-09-15 株式会社東芝 情報再生装置及び再生制御方法
EP2207342B1 (en) * 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
WO2010093745A1 (en) 2009-02-12 2010-08-19 Dolby Laboratories Licensing Corporation Quality evaluation of sequences of images
JP5294922B2 (ja) 2009-02-26 2013-09-18 キヤノン株式会社 再生装置および再生方法
JP2011045039A (ja) * 2009-07-21 2011-03-03 Fujifilm Corp 複眼撮像装置
US8373802B1 (en) 2009-09-01 2013-02-12 Disney Enterprises, Inc. Art-directable retargeting for streaming video
US20110084962A1 (en) 2009-10-12 2011-04-14 Jong Hwan Kim Mobile terminal and image processing method therein
JP5116754B2 (ja) 2009-12-10 2013-01-09 シャープ株式会社 光学式検出装置および電子機器
US8294748B2 (en) 2009-12-11 2012-10-23 DigitalOptics Corporation Europe Limited Panorama imaging using a blending map
US20110149029A1 (en) 2009-12-17 2011-06-23 Marcus Kellerman Method and system for pulldown processing for 3d video
JP5218388B2 (ja) * 2009-12-25 2013-06-26 カシオ計算機株式会社 撮像装置、撮像装置の制御方法、およびプログラム
CN102118560A (zh) * 2009-12-30 2011-07-06 深圳富泰宏精密工业有限公司 拍照系统及方法
US20110301980A1 (en) 2010-06-03 2011-12-08 Siemens Medical Solutions Usa, Inc. Automated Medical Image Storage System
JP5569206B2 (ja) 2010-07-15 2014-08-13 ソニー株式会社 画像処理装置および方法
US20120019677A1 (en) 2010-07-26 2012-01-26 Nethra Imaging Inc. Image stabilization in a digital camera
CN102457673A (zh) * 2010-10-26 2012-05-16 宏达国际电子股份有限公司 影像撷取方法及系统
JP5779959B2 (ja) * 2011-04-21 2015-09-16 株式会社リコー 撮像装置
WO2013001165A1 (en) 2011-06-28 2013-01-03 Nokia Corporation A method, a system, a viewing device and a computer program for picture rendering
US9530192B2 (en) 2011-06-30 2016-12-27 Kodak Alaris Inc. Method for determining stereo quality score and automatically improving the quality of stereo images
FR2978894A1 (fr) * 2011-08-02 2013-02-08 St Microelectronics Grenoble 2 Procede de previsualisation d'image dans un appareil de prise de vue numerique
JP5607260B2 (ja) * 2011-09-30 2014-10-15 富士フイルム株式会社 撮影装置、撮影方法及びプログラム
US9001255B2 (en) * 2011-09-30 2015-04-07 Olympus Imaging Corp. Imaging apparatus, imaging method, and computer-readable storage medium for trimming and enlarging a portion of a subject image based on touch panel inputs
US9269323B2 (en) 2011-10-28 2016-02-23 Microsoft Technology Licensing, Llc Image layout for a display
US8848068B2 (en) 2012-05-08 2014-09-30 Oulun Yliopisto Automated recognition algorithm for detecting facial expressions
US9503645B2 (en) * 2012-05-24 2016-11-22 Mediatek Inc. Preview system for concurrently displaying multiple preview images generated based on input image generated by image capture apparatus and related preview method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101325654A (zh) * 2007-06-11 2008-12-17 奇景光电股份有限公司 具运动补偿的提高帧率的方法

Also Published As

Publication number Publication date
CN103428423A (zh) 2013-12-04
US9503645B2 (en) 2016-11-22
US9560276B2 (en) 2017-01-31
CN103428428B (zh) 2017-06-16
CN103428427B (zh) 2016-06-08
US20170034448A1 (en) 2017-02-02
US9681055B2 (en) 2017-06-13
CN103428428A (zh) 2013-12-04
CN103428425A (zh) 2013-12-04
US20130315556A1 (en) 2013-11-28
US20130314558A1 (en) 2013-11-28
CN103428460A (zh) 2013-12-04
US9066013B2 (en) 2015-06-23
US20130315499A1 (en) 2013-11-28
CN103428427A (zh) 2013-12-04
US20130314511A1 (en) 2013-11-28
US20130314580A1 (en) 2013-11-28

Similar Documents

Publication Publication Date Title
CN103428460B (zh) 针对影像撷取模组记录输出视讯序列的录影方法以及录影装置
JP5246363B2 (ja) 画像処理装置、および画像評価プログラム
EP2525321B1 (en) Display image generating method
US8792774B2 (en) Image processing device, development apparatus, image processing method, development method, image processing program, development program and raw moving image format
CN104349061B (zh) 图像稳定设备及控制方法和配备图像稳定设备的摄像设备
JP5516662B2 (ja) 撮像装置
CN103856833A (zh) 视频处理设备和方法
CN103634513B (zh) 图像处理设备及其控制方法
US8767096B2 (en) Image processing method and apparatus
US20060285831A1 (en) Imaging apparatus for controlling imaging timing based on frame rate stored in advance
CN104811592B (zh) 摄像装置和摄像控制方法
CN101783885A (zh) 摄像装置及摄像方法
CN113038010B (zh) 视频处理方法、视频处理装置、存储介质与电子设备
JP5044922B2 (ja) 撮像装置及びプログラム
US11159725B2 (en) Image processing apparatus, image processing method, and recording medium
CN101753816A (zh) 拍摄装置及拍摄方法
JP2009141538A (ja) 撮像装置、画像再生装置及びそのプログラム
US8588458B2 (en) Image processing apparatus, image processing method, and program
US20140112634A1 (en) Photographing apparatus and method, image reproduction apparatus and method, program, and recording medium
US20100053326A1 (en) Image sensor, the operating method and usage thereof
JP5012985B2 (ja) 撮像装置及びそのプログラム
JP2015119403A (ja) 画像記録装置、画像記録方法およびプログラム並びに撮像装置
KR101945243B1 (ko) 영상을 배속 재생하는 방법 및 장치
CN104349089A (zh) 图像处理设备和存储介质
CN104735342B (zh) 动态图像处理装置、动态图像处理方法及记录介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220222

Address after: ottawa

Patentee after: Xueshan Technology Co.,Ltd.

Address before: China Taiwan Hsinchu Science Park Hsinchu city Dusing a road No.

Patentee before: MEDIATEK Inc.