CN111670573A - 用于通过根据电子装置的移动调整与对象在关注区域中的移动相关联的阈值来拍摄移动画面的电子装置及其操作方法 - Google Patents

用于通过根据电子装置的移动调整与对象在关注区域中的移动相关联的阈值来拍摄移动画面的电子装置及其操作方法 Download PDF

Info

Publication number
CN111670573A
CN111670573A CN201980010576.7A CN201980010576A CN111670573A CN 111670573 A CN111670573 A CN 111670573A CN 201980010576 A CN201980010576 A CN 201980010576A CN 111670573 A CN111670573 A CN 111670573A
Authority
CN
China
Prior art keywords
electronic device
movement
threshold
roi
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980010576.7A
Other languages
English (en)
Other versions
CN111670573B (zh
Inventor
金东秀
下川修一
姜和映
金东勋
尹汝倬
尹泳权
赵显哲
元钟勋
李基赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN111670573A publication Critical patent/CN111670573A/zh
Application granted granted Critical
Publication of CN111670573B publication Critical patent/CN111670573B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B39/00High-speed photography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

一种电子装置可以包括相机、传感器电路、存储器和处理器,所述处理器被配置为:利用相机基于第一帧速率获得包括关注区域(ROI)的多个第一图像;利用传感器电路检测电子装置的移动;基于电子装置的移动来确定与ROI的移动相关的阈值,其中,与ROI的移动相关的阈值被确定为第一阈值,并且与ROI的移动相关的阈值被确定为大于第一阈值的第二阈值;响应于对象在ROI中以第一阈值或第二阈值移动,基于大于第一帧速率的第二帧速率获得多个第二图像;以及提供与对象相关的视频。

Description

用于通过根据电子装置的移动调整与对象在关注区域中的移 动相关联的阈值来拍摄移动画面的电子装置及其操作方法
技术领域
各种实施例涉及用于以超慢动作录制视频的电子装置及其操作方法。
背景技术
近来,电子装置已经提供了更多样化的服务和附加功能。正在开发可在电子装置上执行的各种应用,以满足用户的不同需求并提高电子装置的实用性。
相机应用是这些不同应用中的一种,用户可以使用他们的电子装置的相机拍摄自拍或背景。电子装置可以包括用于拍摄图像的相机模块。相机模块通常可以包括用于收集光的透镜、用于将收集的光转换成电信号的光电二极管、以及用于将电信号(模拟信号)转换成数字电信号的模数转换器(ADC)。相机模块将来自多个光电二极管的电信号转换成数字电信号并输出该数字电信号的过程可以称为“读出”。
以上信息被呈现为背景信息,仅仅是为了帮助理解本公开。对于以上任何一种是否可适用作为关于本公开的现有技术,还没有做出确定,也没有做出断言。
发明内容
技术问题
超慢动作视频录制使用具有卓越处理能力和大存储量的专用装置。由于存储器和处理器的限制,便携式电子装置在超慢动作视频录制中受到很大的限制。在相同条件下以超慢动作录制视频而不考虑电子装置的状态时,电子装置将不能产生用户期望质量的超慢动作视频。当电子装置被设置为基于对象在关注区域(ROI)中的移动开始录制超慢动作视频时,电子装置可能将其自身的移动确定为对象在ROI中的移动,从而错误地启动超慢动作录制。
解决问题的方案
根据实施例,电子装置可以包括相机、传感器电路、存储器和处理器,所述处理器被配置为:利用所述相机基于第一帧速率获得包括关注区域(ROI)的多个第一图像;利用所述传感器电路检测所述电子装置的移动;基于所述电子装置的移动来确定与所述ROI的移动相关的阈值,其中基于所述电子装置满足第一预定范围的移动,与所述ROI的移动相关的阈值内容确定为第一阈值,并且基于所述电子装置满足大于所述第一预定范围的第二预定范围的移动,与所述ROI的移动相关的阈值被确定为大于所述第一阈值的第二阈值;响应于对象在所述ROI中以所述第一阈值或所述第二阈值移动,基于大于所述第一帧速率的第二帧速率获得多个第二图像;以及利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频。
根据实施例,电子装置可以包括相机、存储器和处理器,所述处理器被配置为:利用相机基于第一帧速率获得包括ROI的多个第一图像;获得每个第一图像中ROI的第一像素变化;获得每个第一图像中至少一个ROI的第二像素变化;响应于确定出所述第一像素变化超过第一阈值并且所述第二像素变化小于第二阈值,基于大于所述第一帧速率的第二帧速率获得多个第二图像;以及使用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与对象相关的视频。
根据实施例,一种用于操作被配置为录制视频的电子装置的方法可以包括:利用相机基于第一帧速率获得包括ROI的多个第一图像;利用传感器电路检测所述电子装置的移动;基于所述电子装置的移动来确定与所述ROI的移动相关的阈值,其中基于所述电子装置满足第一预定范围的移动,与所述ROI的移动相关的阈值被确定为第一阈值,并且基于所述电子装置满足大于所述第一预定范围的第二预定范围的移动,与所述ROI的移动相关的阈值被确定为大于所述第一阈值的第二阈值;响应于对象在所述ROI中以所述第一阈值或所述第二阈值移动,基于大于所述第一帧速率的第二帧速率获得多个第二图像;以及通过利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频。
根据实施例,一种用于操作被配置为录制视频的电子装置的方法可以包括:利用相机基于第一帧速率获得包括ROI的多个第一图像;获得每个第一图像中ROI的第一像素变化;获得每个第一图像中至少一个背景区域的第二像素变化;响应于确定出所述第一像素变化超过第一阈值并且所述第二像素变化小于第二阈值,基于大于第一帧速率的第二帧速率获得多个第二图像;以及通过利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与对象相关的视频。
本公开的其他方面、优点和显著特征对于本领域技术人员来说将从以下结合附图公开本公开的各种实施例的详细描述中变得显而易见。
在进行下面的详细描述之前,阐述贯穿本专利文件使用的某些词语和短语的定义可能是有利的:术语“包括”和“包含”以及其派生词,意味着包括但不限于;术语“或”是包含性的,意思是和/或;短语“与……相关联”和“与之相关联”及其派生词可以意味着包括、包含在……内、与……互连、包含在……内、与……连接或结合、与……耦合或结合、与……通信、与……合作、交错、并置、靠近、与……结合或结合、具有……的特性等;以及术语“控制器”表示控制至少一个操作的任何装置、系统或其部分,这样的装置可以用硬件、固件或软件或者它们中的至少两个的某种组合来实现。应当注意的是,与任何特定控制器相关联的功能可以是集中式的或分布式的,无论是本地的还是远程的。
此外,下面描述的各种功能可以由一个或更多个计算机程序来实现或支持,每个计算机程序由计算机可读程序代码形成并包含在计算机可读介质中。术语“应用”和“程序”是指一个或更多个计算机程序、软件组件、指令集、过程、功能、对象、类、实例、相关数据或其适于在合适的计算机可读程序代码中实现的部分。短语“计算机可读程序代码”包括任何类型的计算机代码,包括源代码、目标代码和可执行代码。短语“计算机可读介质”包括能够被计算机访问的任何类型的介质,例如只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动器、光盘(CD)、数字视频光盘(DVD)或任何其他类型的存储器。“非暂时性”计算机可读介质不包括传输暂时性电信号或其他信号的有线、无线、光学或其他通信链路。非暂时性计算机可读介质包括其中数据可被永久存储的介质和其中数据可被存储并随后被重写的介质,例如可重写光盘或可擦除存储装置。
本专利文件通篇提供了某些词语和短语的定义。本领域普通技术人员应该理解,在许多(如果不是大多数)情况下,这样的定义适用于这样定义的词语和短语的先前以及将来的使用。
本发明的有益效果
根据实施例,电子装置可以基于关于电子装置周围环境的照度信息和移动信息来设置超慢动作视频录制的条件,并且在该条件下执行超慢动作视频录制。根据实施例,电子装置可以确定图像帧中的ROI中的对象或ROI之外的背景区域中的对象的移动,并执行超慢动作视频录制。
附图说明
当结合附图考虑时,通过参考以下详细描述,将容易获得对本公开及其许多伴随方面的更完整的理解,其中:
图1是示出根据实施例的网络环境中的电子装置的视图;
图2是示出根据实施例的相机模块的框图;
图3是示出根据实施例的图像传感器的结构的框图;
图4是示出根据实施例的用于通过图像传感器获得图像帧的过程的框图;
图5是示出根据实施例的电子装置的组件的框图;
图6是示出根据实施例的利用电子装置以慢动作录制视频的示例的视图;
图7A是示出根据实施例的利用电子装置以慢动作录制视频的方法的流程图;
图7B是示出根据实施例的电子装置响应于对象在ROI中的移动以慢动作录制视频的示例的视图;
图8是示出根据实施例的利用图像中的至少一个背景区域或ROI来检测电子装置的移动的示例的视图;
图9是示出根据实施例的与电子装置的移动相对应的ROI中的像素值随时间的变化的曲线图;
图10是表示根据实施例的用于至少基于电子装置的移动或照度或ROI的大小来确定与对象在ROI中移动相关的阈值的权重的表格;
图11是示出根据实施例的利用电子装置的ROI和背景区域以慢动作录制视频的方法的流程图;
图12是示出根据实施例的利用图像中的ROI和至少一个背景区域以慢动作录制视频的示例的视图;以及
图13是示出根据实施例的利用图像中的ROI和电子装置的传感器电路录制慢动作视频的方法的流程图。
在所有附图中,相似的附图标记将被理解为指代相似的部件、组件和结构。
具体实施方式
下面讨论的图1至图13以及在本专利文件中用于描述本发明原理的各种实施例仅是示例性的,不应以任何方式解释为限制本发明的范围。本领域技术人员将理解,本公开的原理可以在任何适当布置的系统或装置中实现。
图1是示出根据各种实施例的网络环境100中的电子装置101的框图。参照图1,网络环境100中的电子装置101可经由第一网络198(例如,短距离无线通信网络)与电子装置102进行通信,或者经由第二网络199(例如,长距离无线通信网络)与电子装置104或服务器108进行通信。根据实施例,电子装置101可经由服务器108与电子装置104进行通信。根据实施例,电子装置101可包括处理器120、存储器130、输入装置150、声音输出装置155、显示装置160、音频模块170、传感器模块176、接口177、触觉模块179、相机模块280、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些实施例中,可从电子装置101中省略所述部件中的至少一个(例如,显示装置160或相机模块280),或者可将一个或更多个其它部件添加到电子装置101中。在一些实施例中,可将所述部件中的一些部件实现为单个集成电路。例如,可将传感器模块176(例如,指纹传感器、虹膜传感器、或照度传感器)实现为嵌入在显示装置160(例如,显示器)中。
处理器120可运行例如软件(例如,程序140)来控制电子装置101的与处理器120连接的至少一个其它部件(例如,硬件部件或软件部件),并可执行各种数据处理或计算。根据一个实施例,作为所述数据处理或计算的至少部分,处理器120可将从另一部件(例如,传感器模块176或通信模块190)接收到的命令或数据加载到易失性存储器132中,对存储在易失性存储器132中的命令或数据进行处理,并将结果数据存储在非易失性存储器134中。根据实施例,处理器120可包括主处理器121(例如,中央处理器(CPU)或应用处理器(AP))以及与主处理器121在操作上独立的或者相结合的辅助处理器123(例如,图形处理单元(GPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。另外地或者可选择地,辅助处理器123可被适配为比主处理器121耗电更少,或者被适配为具体用于指定的功能。可将辅助处理器123实现为与主处理器121分离,或者实现为主处理器121的部分。
在主处理器121处于未激活(例如,睡眠)状态时,辅助处理器123可控制与电子装置101(而非主处理器121)的部件之中的至少一个部件(例如,显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些,或者在主处理器121处于激活状态(例如,运行应用)时,辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如,显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据实施例,可将辅助处理器123(例如,图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如,相机模块280或通信模块190)的部分。
存储器130可存储由电子装置101的至少一个部件(例如,处理器120或传感器模块176)使用的各种数据。所述各种数据可包括例如软件(例如,程序140)以及针对与其相关的命令的输入数据或输出数据。存储器130可包括易失性存储器132或非易失性存储器134。
可将程序140作为软件存储在存储器130中,并且程序140可包括例如操作系统(OS)142、中间件144或应用146。
输入装置150可从电子装置101的外部(例如,用户)接收将由电子装置101的其它部件(例如,处理器120)使用的命令或数据。输入装置150可包括例如麦克风、鼠标、键盘或数字笔(例如,手写笔)。
声音输出装置155可将声音信号输出到电子装置101的外部。声音输出装置155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的,接收器可用于呼入呼叫。根据实施例,可将接收器实现为与扬声器分离,或实现为扬声器的部分。
显示装置160可向电子装置101的外部(例如,用户)视觉地提供信息。显示装置160可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据实施例,显示装置160可包括被适配为检测触摸的触摸电路或被适配为测量由触摸引起的力的强度的传感器电路(例如,压力传感器)。
音频模块170可将声音转换为电信号,反之亦可。根据实施例,音频模块170可经由输入装置150获得声音,或者经由声音输出装置155或与电子装置101直接(例如,有线地)连接或无线连接的外部电子装置(例如,电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如,功率或温度)或电子装置101外部的环境状态(例如,用户的状态),然后产生与检测到的状态相应的电信号或数据值。根据实施例,传感器模块176可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如,电子装置102)直接(例如,有线地)或无线连接的一个或更多个特定协议。根据实施例,接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器,其中,电子装置101可经由所述连接器与外部电子装置(例如,电子装置102)物理连接。根据实施例,连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如,耳机连接器)。
触觉模块179可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如,振动或运动)或电刺激。根据实施例,触觉模块179可包括例如电机、压电元件或电刺激器。
相机模块280可捕获静止图像或运动图像。根据实施例,相机模块280可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据实施例,可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据实施例,电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如,电子装置102、电子装置104或服务器108)之间建立直接(例如,有线)通信信道或无线通信信道,并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如,应用处理器(AP))独立操作的一个或更多个通信处理器,并支持直接(例如,有线)通信或无线通信。根据实施例,通信模块190可包括无线通信模块192(例如,蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如,局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如,短距离通信网络,诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如,长距离通信网络,诸如蜂窝网络、互联网、或计算机网络(例如,LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如,单个芯片),或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如,多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如,国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
天线模块197可将信号或电力发送到电子装置101的外部(例如,外部电子装置)或者从电子装置101的外部(例如,外部电子装置)接收信号或电力。根据实施例,天线模块197可包括天线,所述天线包括辐射元件,所述辐射元件由形成在基底(例如,PCB)中或形成在基底上的导电材料或导电图案构成。根据实施例,天线模块197可包括多个天线。在这种情况下,可由例如通信模块190(例如,无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据实施例,除了辐射元件之外的另外的组件(例如,射频集成电路(RFIC))可附加地形成为天线模块197的一部分。
上述部件中的至少一些可经由外设间通信方案(例如,总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如,命令或数据)。
根据实施例,可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102和电子装置104中的每一个可以是与电子装置101相同类型的装置,或者是与电子装置101不同类型的装置。根据实施例,将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如,如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务,则电子装置101可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分,而不是运行所述功能或服务,或者电子装置101除了运行所述功能或服务以外,还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分,或者执行与所述请求相关的另外功能或另外服务,并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此,可使用例如云计算技术、分布式计算技术或客户机-服务器计算技术。
图2是示出根据各种实施例的相机模块280的框图200(例如,图1的相机模块180)。参照图2,相机模块280可包括镜头组件210、闪光灯220、图像传感器230、图像稳定器240、存储器250(例如,缓冲存储器)或图像信号处理器260。镜头组件210可采集从将被拍摄图像的物体发出或反射的光。镜头组件210可包括一个或更多个透镜。根据实施例,相机模块280可包括多个镜头组件210。在这种情况下,相机模块280可形成例如双相机、360度相机或球形相机。多个镜头组件210中的一些镜头组件210可具有相同的镜头属性(例如,视角、焦距、自动对焦、f数或光学变焦),或者至少一个镜头组件可具有与另外的镜头组件的镜头属性不同的一个或更多个镜头属性。镜头组件210可包括例如广角镜头或长焦镜头。
闪光灯220可发光,其中,发出的光用于增强从物体反射的光。根据实施例,闪光灯220可包括一个或更多个发光二极管(LED)(例如,红绿蓝色(RGB)LED、白色LED、红外(IR)LED或紫外(UV)LED)或氙灯。图像传感器230可通过将从物体发出或反射并经由镜头组件210透射的光转换为电信号来获取与物体相应的图像。根据实施例,图像传感器230可包括从具有不同属性的多个图像传感器中选择的一个图像传感器(例如,RGB传感器、黑白(BW)传感器、IR传感器或UV传感器)、具有相同属性的多个图像传感器或具有不同属性的多个图像传感器。可使用例如电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器来实现包括在图像传感器230中的每个图像传感器。
图像稳定器240可沿特定方向移动图像传感器230或包括在镜头组件210中的至少一个透镜,或者响应于相机模块280或包括相机模块180的电子装置101的移动来控制图像传感器230的可操作属性(例如,调整读出时序)。这样,允许补偿由于正被捕捉的图像的移动而产生的负面效果(例如,图像模糊)的至少一部分。根据实施例,图像稳定器240可使用布置在相机模块280之内或之外的陀螺仪传感器(未示出)或加速度传感器(未示出)来感测相机模块280或电子装置101的这样的移动。根据实施例,可将图像稳定器240实现为例如光学图像稳定器。存储器250可至少暂时地存储经由图像传感器230获取的图像的至少一部分以用于后续的图像处理任务。例如,如果快速捕捉了多个图像或者由于快门时滞而导致图像捕捉延迟,则可将获取的原始图像(例如,拜耳图案图像、高分辨率图像)存储在存储器250中,并且可经由显示装置160来预览其相应的副本图像(例如,低分辨率图像)。然后,如果满足了指定的条件(例如,通过用户的输入或系统命令),则可由例如图像信号处理器260来获取和处理存储在存储器250中的原始图像的至少一部分。根据实施例,可将存储器250配置为存储器130的至少一部分,或者可将存储器250配置为独立于存储器130进行操作的分离的存储器。
图像信号处理器260可对经由图像传感器230获取的图像或存储在存储器250中的图像执行一个或更多个图像处理。所述一个或更多个图像处理可包括例如深度图生成、三维(3D)建模、全景图生成、特征点提取、图像合成或图像补偿(例如,降噪、分辨率调整、亮度调整、模糊、锐化或柔化)。另外或可选地,图像信号处理器260可对包括在相机模块280中的部件中的至少一个部件(例如,图像传感器230)执行控制(例如,曝光时间控制或读出时序控制)。可将由图像信号处理器260处理的图像存储回存储器250以用于进一步处理,或者可将该图像提供给在相机模块280之外的外部部件(例如,存储器130、显示装置160、电子装置102、电子装置104或服务器108)。根据实施例,可将图像信号处理器260配置为处理器120的至少一部分,或者可将图像信号处理器260配置为独立于处理器120进行操作的分离的处理器。如果将图像信号处理器260配置为与处理器120分离的处理器,则可由处理器120经由显示装置160将由图像信号处理器260处理的至少一个图像按照其原样显示,或者可将所述至少一个图像在被进一步处理后进行显示。
根据实施例,电子装置101可包括具有不同属性或功能的多个相机模块280。在这种情况下,所述多个相机模块280中的至少一个相机模块280可形成例如广角相机,并且所述多个相机模块180中的至少另一个相机模块280可形成长焦相机。类似地,所述多个相机模块280中的至少一个相机模块可形成例如前置相机,并且所述多个相机模块180中的至少另一个相机模块可形成后置相机。
图3是示出根据本公开实施例的图像传感器的结构的框图。
根据本公开的实施例,图像传感器300可以是电子装置(例如,101)中的相机模块(例如,180或280)的组件。
参考图3,根据实施例,图像传感器300(例如,图像传感器230)可以包括像素阵列310、行驱动器320、列读出电路330、控制器340、存储器350或接口360中的至少一个。
像素阵列310可以包括多个像素311至319。例如,像素阵列310可以包括其中多个像素311至319以MxN矩阵模式排列的结构(其中M和N是正整数)。其中多个像素311至319以二维(2D)MxN模式排列的像素阵列310可以包括M行和N列。像素阵列310可以包括多个光敏元件,例如光电二极管或钉扎光电二极管。像素阵列310可以通过使用多个光敏元件来检测光,并将光转换成模拟电信号以提供图像信号。
行驱动器320可以驱动每行的像素阵列310。例如,行驱动器320可以向像素阵列310中的多个像素311至319的传输晶体管输出传输控制信号,向像素阵列310输出控制复位晶体管的复位控制信号,或者向像素阵列310输出控制选择晶体管的选择控制信号。行驱动器320可以确定要读出的行。
列读出电路330可以获得由像素阵列310提供的模拟电信号。例如,列读出电路330可以从构成像素阵列310的多个列中选择的列线获得模拟电信号。列读出电路330可以包括模数转换器(ADC)331,ADC 331可以将从所选列线获得的模拟电信号转换成像素数据(或数字信号)并输出像素数据。同时,列读出电路330从像素阵列310获得模拟电信号、通过使用ADC 331将获得的模拟电信号转换成像素数据并输出像素数据可以被称为读出。列读出电路330和ADC 331可以确定要读出的列。
根据本公开的实施例,支持慢动作录制的图像传感器300的列读出电路330可以包括多个ADC 331。多个ADC 331中的每一个可以与像素阵列310中的多个光电二极管中的相应一个并联连接,并且从多个光电二极管同时获得的模拟电信号可以基于并联结构快速转换成像素数据。支持慢动作录制的图像传感器300的列读出电路330可以以高帧速率(例如,每秒960帧(fps))执行读出。例如,以960fps读出意味着从像素阵列310每1/960秒执行一次获得模拟电信号、通过使用ADC 331将获得的模拟电信号转换成像素数据并且像素数据的输出。换句话说,以960fps读取可能意味着每秒输出960个图像帧。
控制器340可以基于从列读出电路330获得的像素数据获得图像帧。控制器340可以通过接口360将图像帧输出到外部电路370(例如,图像信号处理器(ISP)、处理器、通信电路或外部服务器)。根据本公开的实施例,控制器340可以提供传输控制信号来控制多个像素311至319的传输晶体管,提供复位控制信号来控制复位晶体管,或者提供选择控制信号来控制选择晶体管并将信号提供给行驱动器320。控制器340可以提供选择控制信号,以从构成像素阵列310的多条列线中选择至少一条列线,并将该信号提供给列读出电路330。例如,列读出电路330可以基于从控制器340提供的选择控制信号来启用多个列线中的一些,并且禁用其他列线。控制器340可以在处理器(例如,120)中实现,该处理器包括中央处理单元(CPU)或应用处理器(AP)、一种块或模块。当控制器340被实现为块时,控制器340可以包括用于检测例如图像之间的差异的减法器,或者用于比较图像的比较器。根据本公开的实施例,控制器340可以缩小读出的图像,并且比较多个缩小的图像以检测图像之间的差异。
存储器350可以包括易失性和/或非易失性存储器。存储器350是图像传感器300内部的存储装置。存储器350可以包括缓冲存储器。根据本公开的实施例,存储器350可以临时存储从列读出电路330或控制器340输出的数字信号。例如,存储器350可以包括基于由像素阵列310获得的光获得的至少一个图像帧。存储器350可以存储通过接口360从外部电路370获得的至少一个数字信号。
根据本公开的实施例,存储器350可以存储从列读出电路330以第N帧速率(例如,960fps)或第Mth帧速率(例如,120fps)读出的至少一个图像帧,并且将通过接口360存储的至少一个图像帧传送到外部电路370(例如,IPS、处理器、通信电路或外部服务器)。换句话说,存储器350可以存储每1/960秒或每1/120秒一次从列读出电路330读出至少一个图像帧,并且存储器350可以将通过接口360存储的至少一个图像帧传送到外部电路370。图像帧传送到外部电路370的速度不限于此。根据实施例,电子装置101可以通过接口360将读出的图像帧立即传送到外部电路370,而不进行存储。
同时,控制器340可以仅将通过列读出电路330以第N帧速率(例如,960fps)读出的N个图像帧中的一些存储在存储器350中,使得与如何获得以第M帧速率(例如,120fps)读出的M个图像帧基本上相同的效果。例如,控制器340可以在存储器350中仅存储以960fps读取8/960秒的八个图像帧中的一个。当以960fps读出多个图像帧时,只有以1:8的比率选择的图像帧被存储在存储器350中,存储在存储器350中的图像帧可以与通过列读出电路330以120fps读出的图像帧基本相同。例如,当仅由以1/120秒的周期获得的图像帧构成的视频被定义为“120fps视频”时,仅由以1:8的比率从以960fps读出的多个图像帧中选择的图像帧构成的视频可以被定义为120fps视频。仅由通过列读出电路330以120fps读出的图像帧构成的视频也可以被定义为120fps视频。
接口360可以包括例如接口177或通信模块190。接口360可以以无线或有线方案将图像传感器300的组件(例如,控制器340或存储器350)与外部电路370连接。例如,接口360可以将存储在图像传感器300的存储器350中的至少一个图像帧传送到外部电路370,例如电子装置(例如101)的存储器(例如130)。接口360还可以将控制信号从电子装置(例如,101)的处理器(例如,120)传送到图像传感器300的控制器340。
根据本公开的实施例,图像传感器300可以通过接口360与外部电路370通信(例如,以串行通信方案)。例如,图像传感器300的存储器350可以以内部集成电路(I2C)方案与电子装置(例如,101)的处理器(例如,120)通信。
根据本公开的实施例,图像传感器300可以通过接口360(例如基于移动产业处理器接口(MIPI)协议定义的接口)与外部电路370连接。例如,图像传感器300的存储器350可以基于MIPI协议中定义的接口与电子装置(例如,101)的处理器(例如,120)通信。接口360(例如基于MIPI协议定义的接口)可以以1/120秒的周期将对应于存储在存储器350中的图像帧的像素数据传送到外部电路370。
同时,虽然存储在存储器350中的图像帧通过具有240fps输出速度的接口360以每1/120秒一次传送到外部电路370,但是通过列读出电路330实时读出的至少一些图像帧可以作为预览图像以每1/120秒一次传送到外部电路370。外部电路370中的处理器120可以通过显示器显示作为预览图像从图像传感器300以30fps或60fps输出的所有或一些图像帧。
所有或一些上述组件310至360可以包括在图像传感器300中,并且每个组件可以被配置在单个单元或多个单元中。可以根据电子装置的设置或接口的性能而改变在上述实施例中使用的帧速率120fps、240fps和960fps。
图4是示出根据实施例的用于通过图像传感器获得图像帧的过程的框图。图像传感器400可以是电子装置(例如101)中的相机模块(例如180或280)的组件。
参考图4,图像传感器400可以包括像素阵列410、存储器450和接口460中的至少一个。图像传感器400可以包括图3的图像传感器300的全部或部分。
图像传感器400的像素阵列410可以输出与从外部获得的光相对应的电信号。例如,像素阵列410可以包括由光电二极管构成的多个像素。光电二极管可以获得光并提供对应于获得的光的模拟电信号。由构成多个像素的多个光电二极管提供的模拟电信号可以通过列读出电路(例如,330)转换成多条像素数据。在此情况下,每条像素数据可以意味着对应于其相应像素的像素值。在特定时间获得的一组多条像素数据可以构成至少一个图像帧。
根据本公开的实施例,图像传感器400的像素阵列410可以以预设的读出速度输出多个图像帧421至424。例如,当读出速度设置为960fps时,图像传感器400可以基于由像素阵列410获得的光每秒读出960个图像帧。根据实施例,电子装置101可以在以正常模式录制的同时检测慢动作录制的事件,在此情况下,电子装置101可以将读出速率从120fps转到950fps。
读出的多个图像帧421至424可以存储在图像传感器400内部的存储器450中。根据本公开的实施例,图像传感器400的存储器450可以包括缓冲存储器451。例如,以960fps读出的多个图像帧421至424中的一些可以存储在缓冲存储器451中。在连续读出的多个图像帧中,预定数量的图像帧可以存储在缓冲存储器451中。处理器(例如,120或控制器340)可以重复从存储在缓冲存储器451中的图像帧中删除最早存储的图像帧以及从图像帧中存储最晚的图像帧的操作。
图像传感器400的存储器450中存储的至少一个图像帧可以通过接口460(例如360)被传送到外部电路470。例如,处理器(例如,120或控制器340)可以控制接口460将存储在存储器450中的至少一个图像帧传送到外部电路470。
根据实施例,图像传感器400可以排除缓冲器451。来自像素阵列410的图像帧421、422、423和424可以通过接口460直接传送到外部电路470。
图5是示出根据本公开实施例的电子装置101的框图。电子装置101可以包括处理器510、显示器520、传感器电路530、相机模块540和存储器550。
根据实施例,处理器510(例如,图1的处理器120)可以控制与处理器510连接的显示器520(例如,显示装置160)、传感器电路530(例如,传感器模块176)、相机模块540(例如,相机模块180或280)和存储器550(例如,存储器130),并执行各种类型的数据处理或计算。例如,处理器510可以从传感器电路530获得传感器数据,并使用传感器数据确定慢动作录制的参考阈值。处理器510可以通过使用相机模块540来响应于以阈值移动的对象(例如,图像中的一个)获得慢动作视频。处理器510可以在显示器520上显示构成慢动作视频的多个图像帧,或者将其存储在存储器550中。
根据实施例,显示器520(例如,图1的显示装置160)可以显示通过图像传感器541(例如,图2的图像传感器230)获得的至少一个图像帧。例如,显示器520可以显示通过图像处理器542提供的预览图像或者存储在存储器550中的至少一个视频。
根据实施例,传感器电路530(例如,图1的传感器模块176)可以通过使用至少一个传感器(例如,陀螺仪传感器或加速度传感器)来检测电子装置101的移动。传感器电路530可以将关于电子装置101的移动的数据传送到处理器510或相机模块540。
根据实施例,相机模块540(例如,图1的相机模块180或图2的相机模块280)可以包括图像传感器541(例如,图像传感器230)、图像处理器542(例如,图像信号处理器260)和编码器543。同时,相机模块540中的组件541、542和543中的至少任何一个可以以硬件、软件、固件或其他各种形式设计,并且每个组件可以用不同的名称来命名。
根据实施例,图像处理器542可以获得从图像传感器541输出的至少一条像素数据,并且处理或编辑获得的像素数据,以传送到电子装置的至少一个组件。图像处理器542可以调整与从图像传感器541获得的像素数据的图像帧相对应的大小,以通过显示器520显示。“预览图像”是指当用户使用电子装置101的相机模块540拍摄至少一个对象的图像时显示在显示器520上的图像。通过图像传感器541获得的至少一个图像帧可以作为预览图像实时显示在显示器520上,并且电子装置的用户可以容易地通过预览图像拍摄外部对象的图像。
根据实施例,编码器543可以基于由图像处理器542处理的像素数据来提供至少一个视频。例如,编码器543可以压缩与从图像传感器541获得的像素数据相对应的图像帧,以存储在存储器550中。此外,编码器543可以对与从图像传感器541获得的多条像素数据相对应的图像帧进行编码。编码器543可以基于从图像传感器541获得的多条像素数据,以通过图像传感器541获得的顺序排列多个图像帧。处理器510可以将编码器543编码的视频存储在存储器550中。
根据实施例,图像处理器542或编码器543中的至少一个可以不包括在相机模块540中,而是包括在处理器510中。
根据实施例,存储器550(例如,存储器130)可以存储通过图像传感器541获得的至少一个图像帧或者通过编码器543编码的至少一个视频。同时,图像传感器541可以包括至少一个存储器(例如,350),在此情况下,存储器550可以意味着位于与存储器350分离的位置的不同存储空间。
图6是示出根据本公开实施例的使用电子装置101执行慢动作录制的方法的视图。根据实施例,电子装置101可以包括图像传感器300、处理器(例如120)和显示器(例如160)。这里,图像传感器可以包括像素阵列310、行驱动器320、列读出电路330、控制器340、存储器350和接口360中的至少一个。
参考图6,处理器可以通过图像传感器300获得外部对象601的多个图像帧,通过利用获得的多个图像帧610中的至少一些来提供视频,并且响应于接收到播放视频的请求,显示视频屏幕600。根据获得构成视频的每个图像帧的时间和图像传感器的读出速度,视频可以被配置为120fps视频或960fps视频。这里,120fps视频意味着以1/120秒的周期获得构成视频的图像帧,而960fps视频意味着以1/960秒的周期获得构成视频的图像帧。视频屏幕600可以包括指示回放的当前位置的内容611。
根据本公开的实施例,对应于与慢动作录制模式的执行相关的请求,图像传感器中包括的控制器340可以将读出速度(列读出电路330的输出速度)设置为120fps或960fps。当读出速度被设置为120fps或960fps时,列读出电路330可以基于由像素阵列310获得的光每秒读出120或960个图像帧。
控制器340可以通过使用读出的多个图像帧中的至少两个来确定图像帧中的像素变化。例如,控制器340可以基于在第一时间620之前通过列读出电路330读出的多个图像帧中的至少两个来检测特定区域(例如,ROI或背景区域中的至少一个)中的像素值变化。例如,通过控制器340可感知的像素值变化可以包括基于电子装置101在两个图像帧之间的移动、电子装置101的外部的照度或ROI的大小中的至少一个的变化。控制器340可以基于检测到的像素值变化来确定用于启动慢动作录制的阈值。具体地,如下所述,可以基于电子装置101的移动、电子装置101的外部的照度或ROI的大小中的至少一个来确定阈值。控制器340可以在第一时间620之前从通过列读出电路330获得的多个图像帧中选择第一图像帧和第二图像帧。基于所选第一图像帧中的关注区域的像素值与所选第二图像帧中的关注区域的像素值之间的差值超过预设阈值,处理器120可以确定关注区域中的对象在获得第一图像帧的时间与获得第二图像帧的时间之间已经移动。在此情况下,控制器340可以将获得第二图像帧的时间设置为第一时间620,并且从第一时间620自动开始自动慢动作录制。
同时,控制器340可以通过接口360向外部电路370传送在第一时间620之前以120fps从列读出电路330读出的多个第一图像帧。例如,当接口360的输出速度是240fps时,控制器340可以将以120fps读出的多个第一图像帧实时传送到外部电路370,而不需要将图像帧存储在存储器350中。由于输出速度为240fps的接口可以每1/240秒传送一个图像帧,控制器340可以每1/120秒传送一次用于提供120fps视频的图像帧(例如,0秒、2/240秒、4/240秒......),同时每1/120秒传送一次预览图像(例如,1/240秒,3/240秒,5/240秒......)。外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个第一图像帧来提供120fps的视频。外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个图像帧来提供预览。
根据实施例,控制器340可以将列读出电路330的读出速度提高到例如960fps,以在ROI中的对象移动时从第一时间620开始执行自动慢动作录制。当读出速度从120帧/秒上升到960帧/秒时,获得的图像帧数从每秒120帧/秒增加到每秒960帧/秒,因此,可以精确地观察目标在关注区域中的移动。控制器340可以通过接口360向外部电路370传送在第一时间620之后以960fps从列读出电路330读出的多个第二图像帧。例如,当接口360的输出速度为960fps时,控制器340可以将以960fps读出的多个第二图像帧实时传送到外部电路370,而不需要将图像帧存储在存储器350中。
同时,当接口360的输出速度低于960fps时,控制器340可以将以960fps读出的多个第二图像帧存储在存储器350中,然后可以根据接口360的输出速度将存储在存储器中的多个第二图像帧传送到外部电路370。例如,控制器340可以将以960fps读出的所有多个第二图像帧存储在存储器350中。控制器340可以将通过接口360存储的多个第二图像帧传送到外部电路370。例如,当接口360的输出速度是240fps时,控制器340可以以120fps输出预览图像,同时以120fps输出存储在存储器350中的多个第二图像帧。外部电路370中的处理器可以通过使用通过图像传感器300的接口输出的多个第二图像帧来提供960fps的视频。控制器340可以将以960fps读出的多个第二图像帧存储在存储器350中,同时通过接口360以120fps输出存储在存储器350中的多个第二图像帧。可选地,从存储器350的存储器充满以960fps读出的多个第二图像帧的时刻起,控制器340可以以120fps通过接口360输出存储器350中存储的多个第二图像帧。
根据本公开的实施例,根据基于第二时间621存储器350的存储被填满,控制器340可以暂停自动慢动作录制。控制器340可以降低对应于暂停自动慢动作录制的列读出电路330的读出速度。例如,控制器340可以将读出速度从960fps降低到120fps,以将读出的图像帧实时传送到外部电路370,而不需要将图像帧存储在存储器350中。列读出电路330可以从第二时间621以120fps读出多个第三图像帧。
同时,控制器340可以存储从第一时间620以960fps读出的多个第二图像帧,直到存储器350的存储空间满为止,并且当存储器350的存储空间满时,控制器340可以从第二时间621输出存储在存储器350中的多个第二图像帧。例如,当接口360的输出速度是240fps时,控制器340可以以120fps输出存储在存储器350中的多个第二图像帧,同时以120fps输出实时读出的多个第三图像帧。外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个第二图像帧来提供960fps的视频。此外,外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个第三图像帧来提供120fps的视频。
根据本公开的实施例,控制器340可以在第三时间622从用户获得与开始手动慢动作录制相关的信号。控制器340可以将列读出电路330的读出速度提高到与所获得的与开始手动慢动作录制相关的信号相对应的960fps。列读出电路330可以从第三时间622以960fps读出多个第四图像帧。外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个第四图像帧来提供960fps的视频。
根据实施例,基于存储器350的存储在第四时间623被填满,控制器340可以暂停手动慢动作录制。控制器340可以降低与暂停手动慢动作录制相对应的列读出电路330的读出速度。例如,控制器340可以将读出速度从960fps降低到120fps,以将读出的图像帧实时传送到外部电路370,而不需要将图像帧存储在存储器350中。列读出电路330可以从第四时间623以120fps读出多个第五图像帧。外部电路370中的处理器可以通过使用通过图像传感器的接口输出的多个第五图像帧来提供120fps的视频。
根据本公开的实施例,在图像传感器中包括的控制器340可以将作为列读出电路330的输出速度的读出速度设置为对应于与慢动作录制模式的执行相关的请求的960fps。当读出速度设置为960fps时,列读出电路330可以基于由像素阵列310获得的光每秒读出960个图像帧。
同时,控制器340可以选择以1:8的比率以960fps读出的多个图像帧中的一些。换句话说,控制器340可以将每八个读出图像帧中的一个存储在存储器350中。控制器340可以将存储在存储器350中的图像帧传送到外部电路370,并且外部电路370中的处理器可以通过使用传送的图像帧来提供120fps的视频。
或者,控制器340可以将以960fps读出的所有多个图像帧存储在存储器350中。控制器340可以将存储在存储器350中的图像帧传送到外部电路370,并且外部电路370中的处理器120可以通过使用传送的图像帧来提供960fps的视频。
在上述实施例中,在第一时间620与第二时间621之间获得的960fps视频被描述为自动慢动作录制的结果,而在第三时间622与第四时间623之间获得的960fps被描述为手动慢动作录制的结果。然而,这并不打算限制自动慢动作录制和手动慢动作录制的顺序。可以选择性地执行自动慢动作录制和手动慢动作录制,并且它们可以被执行三次或更多次。
在上述实施例中,图像传感器300中的控制器340已经被描述为所有操作的实体。然而,这仅仅是电子装置中的一个或更多个处理器的示例,并且基于实施例的操作也可以由电子装置101中的其他各种处理器以及控制器340来执行。例如,在本文阐述的各种实施例中,控制器340可以被称为第一处理器,外部电路370中的处理器120或处理器510可以被称为第二处理器。在上述实施例中使用的帧速率,例如120fps或960fps,可以根据电子装置的设置或接口的性能而变化。
图7A是示出根据实施例的使用电子装置101以慢动作录制视频的方法的流程图。参照图7B、图8和图9详细地描述图7A的实施例。图7B是示出根据实施例的电子装置响应于对象在ROI 810中的移动以慢动作录制视频的示例的视图。图8是示出根据实施例的通过使用图像中的至少一个背景区域831、832、833和834或ROI 820来检测电子装置的移动的示例的视图。图9是示出根据实施例的与电子装置101的移动相对应的ROI中的像素值随时间的变化的曲线图。
根据实施例,在操作701,电子装置101(例如,处理器120)可以通过使用相机模块180基于第一帧速率获得包括ROI的多个第一图像。例如,响应于从用户接收到关于视频录制的输入,电子装置101可以基于第一帧速率(例如,30fps或60fps)获得多个第一图像。多个第一图像中的每一个都可以包括ROI。电子装置101可以设置要确定的对象或对象的ROI,以启动通过ROI的慢动作录制。
根据实施例,电子装置101可以通过使用传感器模块176来确定电子装置101在预定时间期间的移动。根据实施例,电子装置101可以在预定时间期间通过传感器模块176确定传感器数据,并且电子装置101可以基于传感器数据小于阈值,确定电子装置101没有移动。根据实施例,基于在预定时间内没有电子装置101的移动,电子装置101可以在慢动作录制待机模式下操作。根据实施例,慢动作录制待机模式可以意味着启动慢动作录制的状态,作为确定对象在ROI 810中的移动的状态。
根据实施例,电子装置101可以确定与慢动作录制待机模式相关的用户输入的接收。例如,如图7B的<710>和<720>所示,电子装置101可以响应于通过慢动作录制相关的用户界面722接收到用户输入而在慢动作录制待机模式下操作。
根据实施例,电子装置101可以放弃显示或停用ROI 810,直到在慢动作录制待机模式下操作之前。例如,如图7B的<710>所示,电子装置101可以放弃显示或可以停用ROI810,直到在慢动作录制待机模式下操作之前。根据实施例,响应于在慢动作录制待机模式下操作,电子装置101可以显示或启用ROI 810。例如,如图7B的<720>所示,响应于以慢动作录制待机模式操作,电子装置101可以显示或启用ROI 810。
在操作703,根据实施例,电子装置101可以通过在慢动作录制待机模式下使用传感器模块176来检测电子装置101的移动。根据实施例,电子装置101可以基于陀螺仪传感器或加速度传感器中的至少一个来检测电子装置101的移动。作为检测电子装置101的移动的传感器,陀螺仪传感器或加速度传感器仅仅是示例,但不限于此。
根据实施例,电子装置101可以基于对象在第一图像的背景区域831、832、833和834中的移动或者对象在ROI 820中的移动中的至少一个来检测电子装置101的移动。例如,如图8所示,多个第一图像可以包括至少一个背景区域831、832、833和834或ROI 820。电子装置101可以基于背景区域中的像素变化来确定对象在背景区域831中的移动,并且可以基于ROI 820中的像素变化来确定对象在ROI 820中的移动。
根据实施例,电子装置101可以基于显示在显示装置160上的至少一些图像区域来设置至少一个背景区域831、832、833和834,或者在除了未显示在显示装置160上的图像区域之外的外部区域(例如,图像传感器230的边缘区域)中设置背景区域。根据实施例,背景区域831、832、833和834可以被设置为与用户设置的ROI 820相距预设距离的区域,或者被设置为包括与图像传感器230的焦距相对应的对象的区域。根据实施例,背景区域831、832、833和834可以被设置为包括位于与电子装置101和ROI 820中的对象之间的距离相同的距离或者位于预定距离范围内的对象。根据实施例,电子装置101可以从背景区域831、832、833和834中确定对比度值超过预设值的背景区域中的像素变化,同时从背景区域831、832、833和834中排除对比度值不超过预设值的背景区域。
根据实施例,在操作705,基于电子装置101的移动满足第一预定范围,电子装置101可以将与ROI的移动相关的阈值确定为第一阈值。
根据实施例,电子装置101可以确定电子装置101的移动是否满足第一预定范围。例如,电子装置101可以确定通过传感器模块176获得的传感器数据值是否满足第一预定值。作为另一示例,电子装置101可以确定与对象在多个第一图像中的背景区域中的移动相对应的像素变化或者与对象在关注区域中的移动相对应的像素变化,并且确定像素变化是否满足第二预定范围。
根据实施例,基于满足第一预定范围的电子装置101的移动,电子装置101可以基于在电子装置101移动时确定的像素变化来确定第一阈值。例如,参考图9,电子装置101可以从时间t0或从t0之前在显示装置160上显示正被拍摄的对象的预览图像901。在此情况下,电子装置101可以获得通过图像传感器230以60fps读出的多个第一图像(902),并且通过使用多个第一图像中的至少一些来提供60fps视频903。在视频录制期间,电子装置101可以将多个读出的第一图像存储在存储器130中,并且在从t1到t2的时间段期间,电子装置101可以基于电子装置101的移动状态或者通过经由用户界面从用户接收用于慢动作视频录制的触摸输入来进入用于慢动作视频录制的模式。在t2之后,电子装置101可以将图像传感器230的读出速度从第一速度(60fps)改变到第二速度(960fps),并且获得多个图像。从t2到t3的时间段涉及电子装置101以慢动作录制视频的待机模式。电子装置101可以获得以960fps读出的多个图像(902),并且通过使用多个图像中的至少一些来提供60fps视频903。电子装置101可以确定由于电子装置101的移动导致的ROI 820中的像素变化,并确定像素变化的最大值910、平均值911或第二最大值。电子装置101可以确定阈值,该阈值是小于预设值的像素值,以排除由于传感器故障导致的像素值。电子装置101可以将权重920应用于像素变化的一个对应值(例如,平均值911或最大值910),并且确定第一阈值930。根据实施例,电子装置101可以确定每个ROI 820中的像素变化或者确定ROI 820的所有像素的平均值的变化,但是本公开的实施例不限于此。根据实施例,电子装置101可以通过使用处理器120、相机模块280中的图像信号处理器260或图像传感器300中的控制器340中的至少一个来确定第一阈值930。
根据实施例,基于在获得多个第一图像时作为通过用户界面接收到的用户输入的与视频录制相关的信号的接收,电子装置101可以基于自获得信号以来的预设时间段之后测量的电子装置101的移动,将与关注区域的移动相关的阈值确定为第一阈值。例如,如图9所示,电子装置101可以在t1接收来自用户的用于慢动作视频录制的触摸输入,并且为了在触摸输入发生时忽略电子装置101的移动,电子装置101可以基于从t2测量的电子装置101的移动来将与ROI的移动相关的阈值确定为第一阈值,其中t2是从触摸输入发生的t1开始的预设时间段之后的时间。与视频录制相关的信号可以包括但不限于例如用于基于电子装置101的移动进入超慢动作视频录制待机模式的信号或者用于发起视频录制或超慢动作视频录制的用户输入。
根据实施例,电子装置101可以将与ROI的移动相关的阈值确定为所确定的第一阈值。例如,电子装置101可以将与对象在ROI 820中移动相关的阈值确定为所确定的第一阈值。根据实施例,基于由于对象在ROI 820中的移动不小于阈值而导致的像素变化,与ROI820的移动相关的阈值可以意味着慢动作视频录制的参考值。例如,如图9所示,电子装置101可以将与在t3处的ROI 820的移动相关的阈值确定为所确定的第一阈值,并且确定由于对象在ROI 820中的移动导致的像素变化是否超过第一阈值930。
根据实施例,在操作707,基于电子装置101的移动满足大于第一预定范围的第二预定范围,电子装置101可以将与ROI的移动相关的阈值确定为大于第一阈值930的第二阈值940。
根据实施例,电子装置101可以确定电子装置101的移动是否满足第二预定范围。例如,电子装置101可以确定通过传感器模块176获得的传感器数据值是否满足大于第一预定值的第二预定范围。作为另一示例,电子装置101可以确定与对象在多个第一图像中的背景区域中的移动相对应的像素变化或者与对象在ROI中的移动相对应的像素变化,并且确定像素变化是否满足大于第一预定范围的第二预定范围。
根据实施例,基于满足大于第一预定范围的第二预定范围的电子装置101的移动,电子装置101可以基于在电子装置101移动时确定的像素变化来确定第二阈值940。确定第二阈值940的方法可以采用上面结合操作705描述的确定第一阈值930的方法。根据实施例,电子装置101可以通过使用处理器120、相机模块280中的图像信号处理器260或图像传感器300中的控制器340中的至少一个来确定第二阈值940。根据实施例,在从获得多个第一图像时的视频录制相关信号开始的预设时间段之后,电子装置101可以基于所测量的电子装置的移动,将与ROI的移动相关的阈值确定为第二阈值940。例如,参考图9,电子装置101可以基于从t2测量的电子装置101的移动来确定第二阈值940,并且可以将与ROI的移动相关的阈值确定为所确定的第二阈值940,其中t2是从发生触摸输入的t1开始的预设时间段之后的时间。
根据实施例,电子装置101可以通过使用传感器模块176(例如,照度传感器)来确定电子装置101的外部的照度。根据实施例,电子装置101可以通过使用通过图像传感器230确定的曝光信息或增益信息来确定关于电子装置101的外部的照度信息。根据实施例,电子装置101可以基于电子装置的移动和通过使用传感器模块176获得的关于电子装置外部的照度信息来确定与ROI的移动相关的阈值。例如,电子装置101可以基于电子装置101的移动和在预设时间段(例如,如图9所示的从t2到t3的时间段)期间电子装置101的外部周围的环境照度来确定ROI 820中的像素变化,并且确定像素变化的最大值或平均值。电子装置101可以将权重应用于对应于像素变化的一个值,确定阈值。基于照度信息满足第三预定范围,电子装置101可以将与ROI 820的移动相关的阈值确定为第三阈值。基于照度信息满足小于第三预定范围的第四预定范围,电子装置101可以将与ROI 820的移动相关的阈值确定为大于或不同于第三阈值的第四阈值。根据实施例,电子装置101可以通过使用处理器120、相机模块280中的图像信号处理器260或图像传感器300中的控制器340中的至少一个来确定第三阈值或第四阈值。
根据实施例,电子装置101可以通过用户界面从用户接收关于ROI 820的设置的输入。例如,电子装置101可以从用户接收关于ROI 820的位置设置的输入或者关于ROI 820的大小设置的输入。根据实施例,电子装置101可以基于ROI 820的设置,将与ROI的移动相关的阈值确定为第五阈值。例如,基于第一ROI的大小为320*320像素,电子装置101可以将与第一ROI到第一ROI的移动相关的阈值确定为A值。作为另一示例,基于第二ROI的大小比第一ROI小80*80像素,电子装置101可以将与第二ROI到第二ROI的移动相关的阈值确定为大于A值的B值。
根据实施例,在操作709,电子装置101可以响应于对象在由电子装置101设置的ROI中以第一阈值930和第二阈值940中的相应一个移动,而基于大于第一帧速率的第二帧速率来获得多个第二图像。例如,如图7B的<730>所示,电子装置101可以响应于对象721以第一阈值930和第二阈值940中的相应一个移动,而基于第二帧速率启动慢动作录制以获得多个第二图像。根据实施例,基于ROI 820中的像素变化大于第一阈值930和第二阈值940中的相应一个,电子装置101可以基于第二帧率获得多个第二图像。例如,如图9所示,在t4,基于与ROI 820的移动相关的阈值被确定为第一阈值930或第二阈值940,或者基于由于对象在ROI 820中的移动大于与ROI 820的移动相关的阈值而导致的像素变化,电子装置101可以基于第二帧速率(例如,960帧/秒)获得多个第二图像(例如,视频903)。根据实施例,电子装置101可以基于电子装置的移动和获得的关于电子装置外部的照度信息来确定与ROI820的移动相关的阈值,并且可以响应于在ROI 820中基于电子装置的移动和关于电子装置外部的照度信息确定的对象以阈值移动,基于大于第一帧率的第二帧率来获得多个第二图像。根据实施例,电子装置101可以基于所确定的关于电子装置101的外部的照度信息,将与ROI 820的移动相关的阈值确定为第三阈值或大于第三阈值的第四阈值,并且可以响应于对象在ROI 820中以第三阈值或第四阈值移动,而基于大于第一帧速率的第二帧速率来获得多个第二图像。例如,基于ROI 820中的像素变化大于第三阈值和第四阈值中的相应一个,电子装置101可以基于第二帧速率获得多个第二图像。
根据实施例,电子装置101可以基于ROI 820的大小设置将与ROI 820的移动相关的阈值确定为第五阈值,并且响应于对象在ROI 820中以基于ROI 820的设置确定的第五阈值移动,而基于第二帧速率获得第二图像。例如,基于ROI 820中的像素变化大于第五阈值,电子装置101可以基于第二帧速率获得多个第二图像。
根据实施例,基于电子装置101基于第二帧速率获得多个第二图像,电子装置101可以改变与ROI 810相关的界面或者与慢动作录制相关的用户界面722。例如,如图7B的<730>所示,电子装置101可以逐渐放大或缩小显示关注区域810的用户界面,同时基于第二帧速率获得多个第二图像。作为另一示例,如图7B的<730>所示,电子装置101可以指示慢动作录制相关用户界面722正在被启用,同时基于第二帧速率获得多个第二图像。
根据实施例,当从开始获取多个第二图像的时间起经过预定时间时,电子装置101可以暂停获取多个第二图像,并以第一帧速率获取多个第一图像。例如,如图7B的<740>所示,当从慢动作录制开始经过预定时间时,电子装置101可以通过暂停多个第二图像的获取来终止慢动作录制。根据实施例,当电子装置101存储与预定数量的图像帧或预定容量一样多的第二图像时,电子装置101可以暂停多个第二图像的获取,并以第一帧速率获得多个第一图像。根据实施例,响应于确定通过与慢动作录制的终止相关的用户界面(未示出)的用户输入的接收,电子装置101可以暂停多个第二图像的获取,并以第一帧速率获取多个第一图像。
根据实施例,响应于暂停多个第二图像的获取,电子装置101可以改变慢动作录制相关用户界面722。例如,基于如在图7B的<740>中所示暂停的多个第二图像的获取,电子装置101可以指示慢动作录制相关用户界面722正被停用。根据实施例,在操作711,电子装置101可以通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与移动对象相关的视频。例如,如图9所示,电子装置101可以在从t0到t4的时间段期间提供60fps视频903,并且在t4之后提供960fps视频。根据实施例,电子装置101可以通过使用处理器120、相机模块280中的图像信号处理器260或图像传感器300中的控制器340中的至少一个来执行操作701至711。根据实施例,电子装置101可以使用响应于对象以基于电子装置的移动和关于电子装置外部的照度信息确定的阈值移动而获得的多个第一图像中的至少一些和多个第二图像中的至少一些来提供与移动对象相关的视频。
图10是表示根据实施例的用于至少基于电子装置101的移动或照度或ROI 820的大小来确定与对象在ROI 820中移动相关的阈值的权重的表格。
根据实施例,假设电子装置101关于电子装置101的外部照度和ROI 820的大小保持相同的条件,但是在移动方面存在差异。根据实施例,基于电子装置101的外部是高照度,ROI 820的大小是320*320像素,并且电子装置101被握在用户手中,使得可以检测到由于用户的握手而导致的电子装置101的移动,电子装置101可以将预设的第一权重1011和预设的第二权重1012应用到ROI 820中的像素值中的一个对应的值(例如,最大值),ROI 820中的像素值由电子装置101的移动、环境照度或ROI 820的大小中的至少一个来改变,从而确定阈值。例如,电子装置101可以将ROI 820中的像素值中的一个对应值(例如最大值)乘以预设的第二权重1012(系数),例如1.8,然后加上预设的第一权重1011(偏移),例如0。根据实施例,基于包括高照度的电子装置101的外部,ROI 820的大小为320×320像素,并且电子装置101安装在三脚架上,电子装置101可以将预设的第三权重1031和预设的第四权重1032应用于ROI 820中的像素值中的一个对应值(例如,最大值),ROI 820中的像素值由电子装置101的移动、环境照度或大小中的至少一个来改变,从而确定阈值。例如,电子装置101可以将ROI 820中的像素值中的一个对应值(例如最大值)乘以预设的第四权重1032(系数),例如1.1,然后加上预设的第三权重1031(偏移),例如1。
根据实施例,假设电子装置101关于电子装置101的外部照度和电子装置101的移动保持相同的条件,但是受到ROI 820的大小的差异的影响。根据实施例,基于电子装置101的外部是相对高的照度,电子装置101安装在三脚架上,并且ROI 820的大小是320*320像素,电子装置101可以将预设的第三权重1031和预设的第四权重1032应用于ROI 820中的像素值中的一个对应值(例如,最大值),ROI 820中的像素值由电子装置101的移动、环境照度或ROI的大小中的至少一个来改变,从而确定阈值。例如,电子装置101可以将ROI 820中的像素值中的一个对应值(例如最大值)乘以预设的第四权重1032(系数),例如1.1,然后加上预设的第三权重1031(偏移),例如1。根据实施例,基于电子装置101的外部是高照度,电子装置101安装在三脚架上,并且ROI 820的大小是80×80像素,电子装置101可以将预设的第五权重1021和预设的第六权重1022应用于ROI 820中的像素值中的一个对应值(例如,最大值),ROI 820中的像素值由电子装置101的移动、环境照度或ROI 820的大小中的至少一个来改变,从而确定阈值。例如,电子装置101可以将ROI 820中的像素值中的一个对应值(例如最大值)乘以预设的第六权重1022(系数),例如1.3,然后加上预设的第五权重1021(偏移),例如4。
尽管通过将权重乘以预定系数,然后将上述偏移相加来确定阈值,但是本领域技术人员应当理解,这仅仅是一个示例,并且确定阈值不限于此。
图11是示出根据实施例的使用电子装置101的ROI 820和背景区域831、832、833和834以慢动作录制视频的方法的流程图。参考图12更详细地描述与图11相关的实施例。图12是示出根据实施例的使用图像中的ROI 820和至少一个背景区域831、832、833和834以慢动作录制视频的示例的视图。
根据实施例,在操作1101,电子装置101(例如,处理器120)可以通过使用相机180以第一帧速率获得包括ROI 820和至少一个背景区域831、832、833和834的多个第一图像。例如,电子装置101可以获得响应于视频录制开始信号以60fps读出的图像,并将图像作为视频存储在存储器130中。
根据实施例,在操作1103,电子装置101可以在多个第一图像的每一个中获得ROI820中的第一像素变化。根据实施例,电子装置101可以获得第N个图像帧中的ROI 820和第N+1个图像帧中的ROI 820的像素变化。
根据实施例,在操作1105,电子装置101可以在多个第一图像的每一个中的至少一个背景区域831、832、833和834中获得第二像素变化。根据实施例,电子装置101可以获得第N个图像帧中的至少一个背景区域831、832、833和834以及第N+1个图像帧中的至少一个背景区域831、832、833和834中的像素变化。
根据实施例,电子装置101可以通过用户界面从用户接收关于ROI 820的设置的输入,并且基于ROI 820的至少一部分与至少一个背景区域的至少一部分重叠,通过使用除重叠部分之外的背景区域的其余部分来确定第二像素变化。例如,电子装置101可以通过用户界面从用户接收关于ROI 820的位置或大小的设置的输入。基于与背景区域831、832、833和834的至少一部分重叠的ROI 820的至少一部分,电子装置101可以通过使用除重叠部分之外的背景区域的其余部分来确定第二像素变化,以防止由于对象在重叠部分中的移动而导致的失误。
根据实施例,电子装置101可以基于显示在显示装置160上的至少一些图像区域来设置至少一个背景区域831、832、833和834,或者在除了未显示在显示装置160上的图像区域之外的外部区域(例如,图像传感器230的边缘区域)中设置背景区域。根据实施例,背景区域831、832、833和834可以被设置为与用户设置的ROI 820相距预设距离的区域,或者被设置为包括与图像传感器230的焦距相对应的对象的区域。根据实施例,背景区域831、832、833和834可以被设置为包括位于与电子装置101和ROI 820中的对象之间的距离相同的距离或者位于预定距离范围内的对象。根据实施例,电子装置101可以从背景区域831、832、833和834中确定对比度值超过预设值的背景区域中的像素变化,同时从背景区域831、832、833和834中排除对比度值不超过预设值的背景区域。
根据实施例,在操作1107,电子装置101可以确定第一像素变化是否超过第一阈值。例如,如图12所示,电子装置101可以确定由于对象在ROI 820中的移动导致的第一像素变化是否超过第一阈值,该第一阈值是与对象在ROI 820中的移动相关的阈值。
根据实施例,在操作1109,电子装置101可以确定第二像素变化是否小于第二阈值。为了防止确定出当电子装置101抖动时,ROI 820中的对象被移动,电子装置101可以通过使用背景区域831、832、833和834来确定ROI 820中的像素变化是来自电子装置101抖动还是对象的移动。例如,如图12所示,电子装置101可以确定由于对应于电子装置101的移动的背景区域831、832、833和834中的对象的移动而导致的第二像素变化是否小于第二阈值,该第二阈值是与在背景区域831、832、833和834中移动的对象相关的阈值。根据实施例,第二阈值可以与第一阈值相同或不同。
根据实施例,在操作1111,响应于确定出第一像素变化超过第一阈值并且第二像素变化小于第二阈值,电子装置101可以基于大于第一帧速率的第二帧速率获得多个第二图像。例如,如图12所示,基于对象在ROI 820中以预设速度或更快速度移动,以及对象在背景区域831、832、833和834中以低于预设速度的速度移动,电子装置101可以基于大于第一帧速率(例如,60帧/秒)的第二帧速率(例如,960帧/秒)来获得多个第二图像。根据实施例,基于ROI 820中的第一像素变化与背景区域831、832、833和834中的第二像素变化之间的差不小于第一预定值,电子装置101可以基于大于第一帧速率的第二帧速率来确定多个第二图像。
根据实施例,在操作1113,电子装置101可以通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与移动对象相关的视频。提供视频的方法可以采用图6的操作和图7A的操作711。
图13是示出根据实施例的使用图像中的ROI 820和电子装置101的传感器模块176录制慢动作视频的方法的流程图。
根据实施例,在操作1301,电子装置101(例如,处理器120)可以基于第一帧速率获得包括ROI 820的多个第一图像。例如,电子装置101可以获得响应于视频录制开始信号以60fps读出的图像,并将图像作为视频存储在存储器130中。
根据实施例,在操作1303,电子装置101可以确定与对象在ROI 820中的移动相关的第一移动信息是否满足第一预定条件。根据实施例,电子装置101可以确定由于对象在ROI 820中的移动导致的像素变化是否超过与ROI 820中的对象移动相关的阈值。基于由于对象在ROI 820中的移动超过ROI 820中移动的阈值而导致的像素变化,电子装置101可以确定与对象的移动相关的第一移动信息满足第一预定条件。
根据实施例,在操作1305,电子装置101可以确定通过传感器模块176获得的与电子装置101的移动相关的第二移动信息是否满足第二预定条件。根据实施例,电子装置101可以确定从传感器模块176(例如,加速度传感器或陀螺仪传感器)获得的传感器数据的变化是否小于预设范围。基于从传感器模块176获得的传感器数据的变化小于预设范围,电子装置101可以确定与电子装置的移动相关的第二移动信息满足第二预定条件。
根据实施例,在操作1307,基于满足第一预定条件的第一移动信息,并且第二移动信息满足第二预定条件,电子装置101可以基于大于第一帧速率的第二帧速率来获得多个第二图像。根据实施例,基于对象在ROI 820中以预设速度或更快速度移动,以及移动速度低于预设速度的电子装置101,电子装置101可以基于大于第一帧速率(例如,60fps)的第二帧速率(例如,960fps)来获得多个第二图像。
根据实施例,在操作1309,电子装置101可以通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与移动对象相关的视频。提供视频的方法可以采用图6的操作和图7A的操作711。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如,智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例,电子装置不限于以上所述的那些电子装置。
应该理解的是,本公开的各种实施例以及其中使用的术语并不意图将在此阐述的技术特征限制于具体实施例,而是包括针对相应实施例的各种改变、等同形式或替换形式。对于附图的描述,相似的参考标号可用来指代相似或相关的元件。将理解的是,与术语相应的单数形式的名词可包括一个或更多个事物,除非相关上下文另有明确指示。如这里所使用的,诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”的短语中的每一个短语可包括在与所述多个短语中的相应一个短语中一起列举出的项的任意一项或所有可能组合。如这里所使用的,诸如“第1”和“第2”或者“第一”和“第二”的术语可用于将相应部件与另一部件进行简单区分,并且不在其它方面(例如,重要性或顺序)限制所述部件。将理解的是,在使用了术语“可操作地”或“通信地”的情况下或者在不使用术语“可操作地”或“通信地”的情况下,如果一元件(例如,第一元件)被称为“与另一元件(例如,第二元件)结合”、“结合到另一元件(例如,第二元件)”、“与另一元件(例如,第二元件)连接”或“连接到另一元件(例如,第二元件)”,则意味着所述一元件可与所述另一元件直接(例如,有线地)连接、与所述另一元件无线连接、或经由第三元件与所述另一元件连接。
如这里所使用的,术语“模块”可包括以硬件、软件或固件实现的单元,并可与其他术语(例如,“逻辑”、“逻辑块”、“部分”或“电路”)可互换地使用。模块可以是被适配为执行一个或更多个功能的单个集成部件或者是该单个集成部件的最小单元或部分。例如,根据实施例,可以以专用集成电路(ASIC)的形式来实现模块。
可将在此阐述的各种实施例实现为包括存储在存储介质(例如,内部存储器136或外部存储器138)中的可由机器(例如,电子装置101)读取的一个或更多个指令的软件(例如,程序140)。例如,在处理器的控制下,所述机器(例如,电子装置101)的处理器(例如,处理器120)可在使用或无需使用一个或更多个其它部件的情况下调用存储在存储介质中的所述一个或更多个指令中的至少一个指令并运行所述至少一个指令。这使得所述机器能够操作用于根据所调用的至少一个指令执行至少一个功能。所述一个或更多个指令可包括由编译器产生的代码或能够由解释器运行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中,术语“非暂时性”仅意味着所述存储介质是有形装置,并且不包括信号(例如,电磁波),但是该术语并不在数据被半永久性地存储在存储介质中与数据被临时存储在存储介质中之间进行区分。
根据实施例,可在计算机程序产品中包括和提供根据本公开的各种实施例的方法。计算机程序产品可作为产品在销售者和购买者之间进行交易。可以以机器可读存储介质(例如,紧凑盘只读存储器(CD-ROM))的形式来发布计算机程序产品,或者可经由应用商店(例如,Play StoreTM)在线发布(例如,下载或上传)计算机程序产品,或者可直接在两个用户装置(例如,智能电话)之间分发(例如,下载或上传)计算机程序产品。如果是在线发布的,则计算机程序产品中的至少部分可以是临时产生的,或者可将计算机程序产品中的至少部分至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或转发服务器的存储器)中。
根据各种实施例,上述部件中的每个部件(例如,模块或程序)可包括单个实体或多个实体。根据各种实施例,可省略上述部件中的一个或更多个部件,或者可添加一个或更多个其它部件。可选择地或者另外地,可将多个部件(例如,模块或程序)集成为单个部件。在这种情况下,根据各种实施例,该集成部件可仍旧按照与所述多个部件中的相应一个部件在集成之前执行一个或更多个功能相同或相似的方式,执行所述多个部件中的每一个部件的所述一个或更多个功能。根据各种实施例,由模块、程序或另一部件所执行的操作可顺序地、并行地、重复地或以启发式方式来执行,或者所述操作中的一个或更多个操作可按照不同的顺序来运行或被省略,或者可添加一个或更多个其它操作。
根据实施例,电子装置101可以包括相机180、传感器模块176、存储器130和处理器120,处理器120被配置为:通过使用相机180基于第一帧速率获得包括关注区域(ROI)的多个第一图像;使用传感器模块176检测电子装置的移动;基于电子装置的移动来确定与ROI的移动相关的阈值,其中基于电子装置满足第一预定范围的移动,将与ROI的移动相关的阈值确定为第一阈值,并且基于电子装置满足大于第一预定范围的第二预定范围的移动,将与ROI的移动相关的阈值确定为大于第一阈值的第二阈值;响应于对象在ROI中以第一阈值或第二阈值移动,基于大于第一帧速率的第二帧速率获得多个第二图像;以及通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与对象相关的视频。
根据实施例,处理器120可以被配置为基于传感器模块176中包括的陀螺仪传感器或加速度传感器中的至少一个来检测电子装置的移动。
根据实施例,处理器120可以被配置为基于对象在多个第一图像的背景区域中的移动或对象在ROI中的移动中的至少一个来检测电子装置的移动。
根据实施例,处理器120可以被配置为基于在电子装置移动时确定的像素变化,将与ROI的移动相关的阈值确定为第一阈值或第二阈值。
根据实施例,处理器120可以被配置为,根据在获得多个第一图像时作为通过用户界面接收的用户输入的与视频录制相关的信号,基于自获得信号以来的预设时间段之后测量的电子装置的移动,将与ROI的移动相关的阈值确定为第一阈值或第二阈值。
根据实施例,处理器120可以被配置为:基于电子装置的移动和通过使用传感器电路获得的关于电子装置的外部的照度信息,确定与ROI的移动相关的阈值;响应于对象在ROI中以基于电子装置的移动和关于电子装置的外部的照度信息确定的阈值移动,基于大于第一帧速率的第二帧速率来获得多个第二图像;以及使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与对象相关的视频,多个第二图像是响应于对象以基于电子装置的移动和关于电子装置的外部的照度信息而确定的阈值移动而获得的。
根据实施例,处理器120可以被配置为:通过用户界面从用户接收与所述ROI的设置相关的输入;根据ROI的设置,确定与ROI的移动相关的阈值;以及响应于对象在ROI中以基于ROI的设置而确定的阈值移动,基于第二帧速率获得多个第二图像。
根据实施例,处理器120可以被配置为基于ROI中的像素变化大于第一阈值或第二阈值,以第二帧速率获得多个第二图像。
根据实施例,电子装置101可以包括相机180、存储器130和处理器120,处理器120被配置为:通过使用相机180基于第一帧速率获得包括的ROI的多个第一图像;获得每个第一图像中ROI的第一像素变化;获得每个第一图像中的至少一个背景区域中的第二像素变化;响应于确定出第一像素变化超过第一阈值并且第二像素变化小于第二阈值,基于大于第一帧速率的第二帧速率获得多个第二图像;以及通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与移动物体相关的视频。
根据实施例,处理器120可以被配置为通过用户界面从用户接收与ROI的设置相关的输入,并且基于ROI的至少一部分与至少一个背景区域的至少一部分重叠,通过使用除重叠部分之外的背景区域来确定第二像素变化。
根据实施例,一种用于操作被配置为录制视频的电子装置的方法可以包括:使用相机基于第一帧速率获得包括ROI的多个第一图像;使用传感器电路检测所述电子装置的移动;基于电子装置的移动来确定与ROI的移动相关的阈值,其中基于电子装置满足第一预定范围的移动,将与ROI的移动相关的阈值确定为第一阈值,并且基于电子装置满足大于第一预定范围的第二预定范围的移动,将与ROI的移动相关的阈值确定为大于第一阈值的第二阈值;响应于对象在ROI中以第一阈值或第二阈值移动,基于大于第一帧速率的第二帧速率获得多个第二图像;以及通过使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与对象相关的视频。
根据实施例,检测电子装置的移动可以包括基于包括在所述传感器电路中的陀螺仪传感器或加速度传感器中的至少一个来检测所述电子装置的移动。
根据实施例,检测电子装置的移动可以包括基于对象在多个第一图像的背景区域中的移动或对象在ROI中的移动中的至少一个来检测电子装置的移动。
根据实施例,将与ROI的移动相关的阈值确定为第一阈值或第二阈值可以包括基于在电子装置移动时确定的像素变化将与ROI的移动相关的阈值确定为第一阈值或第二阈值。
根据实施例,将与关注区域的移动相关的阈值确定为第一阈值或第二阈值可以包括:根据在获得多个第一图像时作为通过用户界面接收的用户输入的与视频录制相关的信号,基于自获得信号以来的预设时间段之后测量的电子装置的移动,将与ROI的移动相关的阈值确定为第一阈值或第二阈值。
根据实施例,该方法可以进一步包括:基于电子装置的移动和通过使用传感器电路获得的关于电子装置的外部的照度信息,确定与ROI的移动相关的阈值;响应于对象在ROI中以基于电子装置的移动和关于电子装置的外部的照度信息确定的阈值移动,基于大于第一帧速率的第二帧速率来获得多个第二图像;以及使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与对象相关的视频,多个第二图像是响应于对象以基于电子装置的移动和关于电子装置的外部的照度信息而确定的阈值移动而获得的。
根据实施例,该方法还可以包括:通过用户界面从用户接收与所述ROI的设置相关的输入;根据ROI的设置,确定与ROI的移动相关的阈值;以及响应于对象在ROI中以基于ROI的设置而确定的阈值移动基于第二帧速率获得多个第二图像。
根据实施例,获得多个第二图像可以包括基于ROI中的像素变大于第一阈值或第二阈值,以第二帧速率获得多个第二图像。
根据实施例,一种用于操作被配置为录制视频的电子装置的方法可以包括:通过使用相机基于第一帧速率获得包括ROI的多个第一图像;获得每个第一图像中ROI的第一像素变化;获得每个第一图像中至少一个背景区域的第二像素变化;响应于确定出第一像素变化超过第一阈值并且第二像素变化小于第二阈值,基于大于第一帧速率的第二帧速率获得多个第二图像;以及使用多个第一图像中的至少一些和多个第二图像中的至少一些来提供与对象相关的视频。
根据实施例,获得第二像素变化可以包括通过用户界面从用户接收与ROI的设置相关的输入,并且基于ROI的至少一部分与至少一个背景区域的至少一部分重叠,通过使用除重叠部分之外的背景区域来确定第二像素变化。
从前面的描述显而易见,根据各种实施例,电子装置可以在给定关于电子装置的移动或环境照度信息的视频录制时在适合于电子装置的状态的条件下执行超慢动作视频录制,并且可以获得用户期望质量的超慢动作视频。根据各种实施例,可以提供一种方法,用于允许电子装置在考虑图像帧中的对象在ROI中的移动或者对象在ROI之外移动的情况下,在用户期望的时间开始超慢动作视频录制。
虽然已经参照其某些实施例示出和描述了本公开,但是本领域技术人员将理解,在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以在形式和细节上进行各种改变。
尽管已经用各种实施例描述了本公开,但是可以向本领域技术人员建议各种变化和修改。本公开旨在包括落入所附权利要求范围内的这些变化和修改。

Claims (15)

1.一种电子装置,所述电子装置包括:
相机;
传感器电路;
存储器;以及
处理器,所述处理器被配置为:
利用所述相机基于第一帧速率获得包括关注区域(ROI)的多个第一图像,
利用所述传感器电路检测所述电子装置的移动,
基于所述电子装置的移动来确定与所述ROI的移动相关的阈值,其中:基于所述电子装置满足第一预定范围的移动,与所述ROI的移动相关的阈值被确定为第一阈值,并且基于所述电子装置满足大于所述第一预定范围的第二预定范围的移动,与所述ROI的移动相关的阈值被确定为大于所述第一阈值的第二阈值,
响应于对象在所述ROI中以所述第一阈值或所述第二阈值移动,基于大于所述第一帧速率的第二帧速率获得多个第二图像,以及
利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频。
2.根据权利要求1所述的电子装置,其中,所述处理器被配置为基于所述传感器电路中包括的陀螺仪传感器或加速度传感器中的至少一者来检测所述电子装置的移动。
3.根据权利要求1所述的电子装置,其中,所述处理器被配置为基于对象在所述多个第一图像的背景区域中的移动或所述对象在所述ROI中的移动中的至少一者来检测所述电子装置的移动。
4.根据权利要求1所述的电子装置,其中,所述处理器被配置为基于在所述电子装置移动时确定的像素变化,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值。
5.根据权利要求1所述的电子装置,其中,所述处理器被配置为根据与视频录制相关的信号基于自获得所述信号以来的预设时间段之后测量的所述电子装置的移动,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值,所述信号是在获得所述多个第一图像时通过用户界面接收的用户输入。
6.根据权利要求1所述的电子装置,其中,所述处理器被配置为:
基于所述电子装置的移动和利用所述传感器电路获得的关于所述电子装置的外部的照度信息,确定与所述ROI的移动相关的阈值,
响应于对象在ROI中以基于所述电子装置的移动和关于所述电子装置的外部的照度信息所确定的阈值移动,基于大于所述第一帧速率的所述第二帧速率来获得所述多个第二图像,以及
利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频,所述多个第二图像是响应于所述对象以基于所述电子装置的移动和关于所述电子装置的外部的照度信息所确定的阈值移动而获得的。
7.根据权利要求1所述的电子装置,其中,所述处理器被配置为:
通过用户界面从用户接收与所述ROI的设置相关的输入,
基于所述ROI的设置,确定与所述ROI的移动相关的阈值,以及
响应于所述对象在所述ROI中以基于所述ROI的设置而确定的阈值移动,基于所述第二帧速率获得所述多个第二图像。
8.根据权利要求1所述的电子装置,其中,所述处理器被配置为基于所述ROI的像素变化大于所述第一阈值或所述第二阈值,以所述第二帧速率获得所述多个第二图像。
9.一种用于操作被配置为录制视频的电子装置的方法,所述方法包括:
利用相机基于第一帧速率获得包括ROI的多个第一图像;
利用传感器电路检测所述电子装置的移动;
基于所述电子装置的移动来确定与所述ROI的移动相关的阈值,其中:基于所述电子装置满足第一预定范围的移动,与所述ROI的移动相关的阈值被确定为第一阈值,并且基于所述电子装置满足大于所述第一预定范围的第二预定范围的移动,与所述ROI的移动相关的阈值被确定为大于所述第一阈值的第二阈值;
响应于对象在所述ROI中以所述第一阈值或所述第二阈值移动,基于大于所述第一帧速率的第二帧速率获得多个第二图像;以及
利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频。
10.根据权利要求9所述的方法,其中,检测所述电子装置的移动包括:基于所述传感器电路中包括的陀螺仪传感器或加速度传感器中的至少一者来检测所述电子装置的移动。
11.根据权利要求9所述的方法,其中,检测所述电子装置的移动包括:基于对象在所述多个第一图像的背景区域中的移动或所述对象在所述ROI中的移动中的至少一者来检测所述电子装置的移动。
12.根据权利要求9所述的方法,其中,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值包括:基于在所述电子装置移动时确定的像素变化,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值。
13.根据权利要求9所述的方法,其中,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值包括:根据与视频录制相关的信号基于自获得所述信号以来的预设时间段之后测量的所述电子装置的移动,将与所述ROI的移动相关的阈值确定为所述第一阈值或所述第二阈值,所述信号是在获得所述多个第一图像时通过用户界面接收的作为用户输入。
14.根据权利要求9所述的方法,所述方法进一步包括:
基于所述电子装置的移动和通过利用所述传感器电路获得的关于所述电子装置的外部的照度信息,确定与所述ROI的移动相关的阈值;
响应于所述对象在所述ROI中以基于所述电子装置的移动和关于所述电子装置的外部的照度信息确定的阈值移动,基于大于所述第一帧速率的所述第二帧速率来获得所述多个第二图像;以及
利用所述多个第一图像中的至少一些和所述多个第二图像中的至少一些来提供与所述对象相关的视频,所述多个第二图像是响应于所述对象以基于所述电子装置的移动和关于所述电子装置的外部的照度信息而确定的阈值移动而获得的。
15.根据权利要求9所述的方法,所述方法进一步包括:
通过用户界面从用户接收与所述ROI的设置相关的输入;
基于所述ROI的设置,确定与所述ROI的移动相关的阈值;以及
响应于所述对象在所述ROI中以基于所述ROI的设置而确定的阈值移动,基于所述第二帧速率获得所述多个第二图像。
CN201980010576.7A 2018-02-22 2019-02-19 一种电子装置及用于操作被配置为录制视频的电子装置的方法 Active CN111670573B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2018-0021068 2018-02-22
KR1020180021068A KR102622123B1 (ko) 2018-02-22 2018-02-22 전자 장치의 움직임에 따라 관심 영역에 움직이는 피사체에 대한 움직임과 관련된 임계값을 조정하여 동영상을 촬영하는 전자 장치 및 그 작동 방법
PCT/KR2019/001952 WO2019164207A1 (en) 2018-02-22 2019-02-19 Electronic device for taking moving picture by adjusting threshold associated with movement of object in region of interest according to movement of electronic device and method for operating same

Publications (2)

Publication Number Publication Date
CN111670573A true CN111670573A (zh) 2020-09-15
CN111670573B CN111670573B (zh) 2021-12-07

Family

ID=67618326

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980010576.7A Active CN111670573B (zh) 2018-02-22 2019-02-19 一种电子装置及用于操作被配置为录制视频的电子装置的方法

Country Status (5)

Country Link
US (1) US10785387B2 (zh)
EP (1) EP3741103A4 (zh)
KR (1) KR102622123B1 (zh)
CN (1) CN111670573B (zh)
WO (1) WO2019164207A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112885102B (zh) * 2019-11-29 2022-10-14 浙江宇视科技有限公司 图像拍摄方法、装置、设备及存储介质
US11533428B2 (en) 2020-01-23 2022-12-20 Samsung Electronics Co., Ltd. Electronic device and method for controlling electronic device
KR20210115185A (ko) * 2020-03-12 2021-09-27 삼성전자주식회사 이미지 처리 방법 및 장치
CN112333382B (zh) * 2020-10-14 2022-06-10 维沃移动通信(杭州)有限公司 拍摄方法、装置及电子设备
KR20220153305A (ko) * 2021-05-11 2022-11-18 삼성전자주식회사 이미지 데이터와 모션 데이터를 포함하는 파일을 생성하는 방법 및 그 전자 장치
KR20230106385A (ko) * 2022-01-06 2023-07-13 삼성전자주식회사 카메라를 포함하는 전자 장치 및 움직이는 물체를 촬영하는 동영상 생성 방법

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030107648A1 (en) * 2001-12-12 2003-06-12 Richard Stewart Surveillance system and method with adaptive frame rate
US20080292207A1 (en) * 2007-05-25 2008-11-27 Core Logic, Inc. Image processing apparatus and image processing method
US20100283857A1 (en) * 2009-05-05 2010-11-11 Honeywell International Inc. Event based dynamic change in video quality parameters of network cameras
CN104574440A (zh) * 2014-12-30 2015-04-29 安科智慧城市技术(中国)有限公司 一种视频运动目标跟踪方法及装置
US20170085796A1 (en) * 2015-05-01 2017-03-23 Gopro, Inc. Motion-based camera mode control to reduce rolling shutter artifacts
US20170200472A1 (en) * 2016-01-07 2017-07-13 Samsung Electronics Co., Ltd. Electronic device and method of managing a playback rate of a plurality of images
CN107040714A (zh) * 2015-12-18 2017-08-11 三星电子株式会社 拍摄设备及其控制方法
CN107396019A (zh) * 2017-08-11 2017-11-24 维沃移动通信有限公司 一种慢动作视频录制方法及移动终端
CN107666581A (zh) * 2016-07-29 2018-02-06 三星电子株式会社 提供视频内容的方法和支持该方法的电子装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8588474B2 (en) 2010-07-12 2013-11-19 Texas Instruments Incorporated Motion detection in video with large areas of detail
KR20120081514A (ko) * 2011-01-11 2012-07-19 삼성전자주식회사 동영상 촬영 방법 및 장치
KR101299237B1 (ko) * 2011-11-23 2013-08-22 서울대학교산학협력단 팬틸트줌 카메라를 이용한 물체 탐지 장치 및 방법
JP2013146017A (ja) 2012-01-16 2013-07-25 Nikon Corp 撮像装置およびプログラム
US9454827B2 (en) 2013-08-27 2016-09-27 Qualcomm Incorporated Systems, devices and methods for tracking objects on a display
IL236114A (en) * 2014-12-07 2016-04-21 Yoav Grauer Improved object recognition in the reimbursement-based imaging unit

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030107648A1 (en) * 2001-12-12 2003-06-12 Richard Stewart Surveillance system and method with adaptive frame rate
US20080292207A1 (en) * 2007-05-25 2008-11-27 Core Logic, Inc. Image processing apparatus and image processing method
US20100283857A1 (en) * 2009-05-05 2010-11-11 Honeywell International Inc. Event based dynamic change in video quality parameters of network cameras
CN104574440A (zh) * 2014-12-30 2015-04-29 安科智慧城市技术(中国)有限公司 一种视频运动目标跟踪方法及装置
US20170085796A1 (en) * 2015-05-01 2017-03-23 Gopro, Inc. Motion-based camera mode control to reduce rolling shutter artifacts
CN107040714A (zh) * 2015-12-18 2017-08-11 三星电子株式会社 拍摄设备及其控制方法
US20170200472A1 (en) * 2016-01-07 2017-07-13 Samsung Electronics Co., Ltd. Electronic device and method of managing a playback rate of a plurality of images
CN107666581A (zh) * 2016-07-29 2018-02-06 三星电子株式会社 提供视频内容的方法和支持该方法的电子装置
CN107396019A (zh) * 2017-08-11 2017-11-24 维沃移动通信有限公司 一种慢动作视频录制方法及移动终端

Also Published As

Publication number Publication date
US20190260914A1 (en) 2019-08-22
US10785387B2 (en) 2020-09-22
KR20190101115A (ko) 2019-08-30
CN111670573B (zh) 2021-12-07
EP3741103A4 (en) 2021-01-20
EP3741103A1 (en) 2020-11-25
KR102622123B1 (ko) 2024-01-09
WO2019164207A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
KR102531128B1 (ko) 카메라를 이용하여 복수의 프레임 레이트에 따라 영상을 촬영하는 전자 장치 및 그 작동 방법
CN111670573B (zh) 一种电子装置及用于操作被配置为录制视频的电子装置的方法
CN109756671B (zh) 使用多个相机记录图像的电子装置及其操作方法
CN109309796B (zh) 使用多个相机获取图像的电子装置和用其处理图像的方法
CN113454982A (zh) 用于使图像稳定化的电子装置及其操作方法
US11258962B2 (en) Electronic device, method, and computer-readable medium for providing bokeh effect in video
CN109672827B (zh) 用于组合多个图像的电子装置及其方法
CN112840634B (zh) 用于获得图像的电子装置及方法
CN113228616B (zh) 具有多单元结构的相机模块和包括其的便携式通信装置
CN110830730B (zh) 电子装置中用于生成移动图像数据的设备和方法
CN112840644A (zh) 利用相机或深度传感器中的至少一个获取深度信息的电子装置和方法
CN114846608A (zh) 包括图像传感器的电子设备及其操作方法
EP3621292B1 (en) Electronic device for obtaining images by controlling frame rate for external moving object through point of interest, and operating method thereof
US20200336653A1 (en) Electronic device and image acquisition method thereof
US11115605B2 (en) Electronic device for selectively compressing image data according to read out speed of image sensor, and method for operating same
US11240457B2 (en) Method for transmitting image data and data associated with control of image capture, on basis of size of image data and size of data associated with control of image capture, and electronic device supporting same
KR102385333B1 (ko) 복수의 이미지 센서들을 제어하기 위한 전자 장치 및 방법
CN117136554A (zh) 包括相机的电子设备及其控制方法
US20230085017A1 (en) Electronic device and method for improving quality of image by using multiple cameras
CN116848851A (zh) 包括图像传感器的电子设备及其操作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant