CN116076083A - 成像装置,信息处理装置,信息处理方法和程序 - Google Patents
成像装置,信息处理装置,信息处理方法和程序 Download PDFInfo
- Publication number
- CN116076083A CN116076083A CN202180058337.6A CN202180058337A CN116076083A CN 116076083 A CN116076083 A CN 116076083A CN 202180058337 A CN202180058337 A CN 202180058337A CN 116076083 A CN116076083 A CN 116076083A
- Authority
- CN
- China
- Prior art keywords
- frame rate
- image
- region
- rate region
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 69
- 230000010365 information processing Effects 0.000 title claims abstract description 38
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 238000005516 engineering process Methods 0.000 abstract description 28
- 238000012545 processing Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 27
- 238000000034 method Methods 0.000 description 24
- 238000004891 communication Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 8
- 238000013459 approach Methods 0.000 description 7
- 238000013528 artificial neural network Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- 238000012937 correction Methods 0.000 description 5
- 238000013135 deep learning Methods 0.000 description 5
- 238000000605 extraction Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000005484 gravity Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 238000001454 recorded image Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/87—Regeneration of colour television signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Abstract
[目的]提供一种能够更容易地控制图像的帧率的成像装置、信息处理装置、信息处理方法和程序。[解决方案]为了实现上述目的,按照本技术的实施例的成像装置包括识别单元和判定单元。所述识别单元识别图像中的特定被摄体。所述判定单元判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。因而,与现有技术相比,能够以更直观的输入容易地控制在图像的拍摄、再现和编辑中的图像的帧率。
Description
技术领域
本技术涉及能够应用于运动图像编辑等的成像装置、信息处理装置、信息处理方法和程序。
背景技术
在专利文献1中所记载的图像再现装置中,按照运动图像中的多个特定物体之间的距离或者固定位置与感兴趣的物体之间的距离来控制运动图像的再现速度。因而,实现这一点以有助于优化重要场景的再现速度(专利文献1的段落[0039]和[0051]、图3等)。
引文列表
专利文献
专利文献1:日本专利申请公开No.2011―10276
发明内容
技术问题
如专利文献1所示,为了使运动图像的特定场景令人印象深刻,有时使用改变运动图像的帧率的方法。这样,可取的是提供一种使得能够容易地控制图像的帧率的技术。
鉴于上述情况,本技术的目的在于提供一种能够更容易地控制图像的帧率的成像装置、信息处理装置、信息处理方法和程序。
问题的解决方案
为了实现上述目的,按照本技术的实施例的成像装置包括识别单元和判定单元。
所述识别单元识别图像中的特定被摄体。
所述判定单元判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
在该成像装置中,识别图像中的特定被摄体。判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。因而,能够容易地控制图像的帧率。
所述成像装置还可以包括设定所述帧率区域的帧率区域设定单元。
所述成像装置还可以包括设定所述图像的帧率的帧率设定单元。
所述成像装置还可以包括在所述判定单元判定所述特定被摄体与所述设定的帧率区域之间的距离等于或小于阈值的情况下,控制以设定的帧率拍摄图像的拍摄控制单元。
所述成像装置还可以包括在所述判定单元判定所述特定被摄体与所述设定的帧率区域之间的距离等于或小于阈值的情况下,控制以设定的帧率再现图像的再现控制单元。
所述帧率区域设定单元可以将所述帧率区域设定为点。
所述帧率区域设定单元可以将所述帧率区域设定为线。
所述帧率区域设定单元可以将所述帧率区域设定为具有预定范围的区域。
所述帧率区域设定单元可以设定多个帧率区域,其中的每一个都是所述帧率区域。在这种情况下,当所述判定单元判定所述特定被摄体与所述多个设定的帧率区域中的每一个之间的距离等于或小于阈值时,所述拍摄控制单元可以控制以设定的帧率拍摄图像。
所述帧率区域设定单元可以设定多个帧率区域。在这种情况下,当所述判定单元判定所述特定被摄体与所述多个设定的帧率区域中的每一个之间的距离等于或小于阈值时,所述再现控制单元可以控制以设定的帧率再现图像。
所述帧率区域设定单元可以将所述帧率区域设定为具有预定范围的区域。在这种情况下,所述拍摄控制单元可以在所述判定单元判定所述特定被摄体位于所述设定的帧率区域的范围内的情况下,控制以设定的帧率拍摄图像。
所述帧率区域设定单元可以将所述帧率区域设定为具有预定范围的区域。在这种情况下,所述再现控制单元可以在所述判定单元判定所述特定被摄体位于所述设定的帧率区域的范围内的情况下,控制以设定的帧率再现图像。
所述成像装置还可以包括接收用户的操作的操作单元。在这种情况下,所述帧率区域设定单元可以按照用户对所述操作单元的操作,设定所述帧率区域。
所述成像装置还可以包括接收用户的操作的操作单元。在这种情况下,所述帧率设定单元按照用户对所述操作单元的操作,设定所述图像的帧率。
所述帧率设定单元可以按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率阶梯式地变化。
所述帧率设定单元可以按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率连续地变化。
按照本技术的实施例的信息处理装置包括识别单元和判定单元。
所述识别单元识别图像中的特定被摄体。
所述判定单元判定识别的所述特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
按照本技术的实施例的信息处理方法是由计算机系统执行的信息处理方法,并且包括识别图像中的特定被摄体。
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
按照本技术的实施例的程序使计算机系统执行以下步骤。
识别图像中的特定被摄体的步骤。
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值的步骤。
附图说明
图1是描述成像装置的概要的示意图。
图2是表示成像装置的功能构成例子的框图。
图3是表示帧率的控制的例子的流程图。
图4是表示使得能够选择特定被摄体的GUI的例子的示意图。
图5是表示帧率区域和图像的帧率的设定的例子的示意图。
图6是表示在已获取预演图像情况下的帧率区域和图像的帧率的设定的例子的示意图。
图7是表示用于控制帧率的控制GUI 50的例子的示意图。
图8是表示帧率区域的形状的例子的示意图。
图9是表示帧率区域的形状的另一个例子的示意图。
图10是表示帧率区域中的帧率的控制GUI的例子的示意图。
图11是表示帧率的控制的例子的示意图。
图12是表示帧率的控制的例子的示意图。
图13是表示帧率的控制的例子的示意图。
图14是表示帧率的控制的例子的示意图。
图15是表示信息处理装置的功能构成例子的框图。
图16是表示信息处理装置的硬件构成例子的框图。
具体实施方式
以下,将参考附图说明按照本技术的实施例。
[成像装置]
图1是用于说明按照本技术的成像装置的概要的示意图。
成像装置10包括成像元件13(图像传感器)、光学系统11、光圈等(未图示),能够拍摄视角。在本实施例中,成像装置10拍摄将篮球1投向篮筐2的人3的图像。
应注意的是,成像装置的构成不受限制。例如,作为成像元件13,可以使用诸如互补金属氧化物半导体(CMOS)传感器和电荷耦合器件(CCD)之类的图像传感器。
此外,成像装置10识别图像中的特定被摄体,并判定该特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
例如,在作为特定被摄体的篮球1与包括篮筐2的帧率区域之间的距离等于或小于阈值的情况下,控制图像的帧率。即,按照特定被摄体与帧率区域之间的距离,控制图像的帧率。
帧率区域是包括点、线以及具有预定范围的区域,并且是预先设定在图像中的特定位置的区域。
特定被摄体是图像中包括的被摄体当中由后面说明的识别单元17识别的被摄体。
应注意的是,图像包括拍摄图像和再现图像。
此外,成像装置10设定图像区域的帧率区域。例如,按照用户的输入,可以将具有一定范围的区域指定为帧率区域,或者可以将帧率区域指定为线或点。以图1为例,可以将篮球1进入篮筐2的路径(轨迹)设定为帧率区域。此外,例如,可以将以篮筐2为中心的矩形区域设定为帧率区域。应注意的是,帧率区域的形状和面积不受限定。
此外,成像装置10控制图像的帧率。在本实施例中,成像装置10控制拍摄时和再现时的图像的帧率。
例如,在判定特定被摄体与设定的帧率区域之间的距离等于或小于阈值的情况下,成像装置10控制以设定的帧率拍摄或再现图像。
图2是表示成像装置10的功能构成例子的框图。
如图2中所示,成像装置10具有光学系统11、驱动单元12、成像元件13、信号处理单元14、控制单元15、记录单元16、识别单元17、显示单元18、输出单元19和操作单元20。
光学系统11包括透镜、光圈机构、快门等。例如,诸如入射端透镜、变焦透镜、聚焦透镜和聚光透镜之类的各种透镜可以用于光学系统11。例如,还可以使用快门单元,比如通过利用透镜或虹膜(光圈)调整孔径等来控制曝光,以便在动态范围内进行感测,从而使信号电荷不饱和的光圈机构和焦平面快门。
驱动单元12驱动包括在光学系统11中的透镜等。
成像元件13控制经由光学系统11来自被摄体的入射光的曝光。此外,成像元件13包括例如对逐个像素地进行光电转换得到的电信号进行CDS处理、AGS处理和A/D转换处理的处理器。
在本实施例中,作为数字数据的拍摄图像信号被输出到信号处理单元14和控制单元15。
信号处理单元14例如包括诸如数字信号处理器(DSP)之类的专门用于数字信号处理的微处理器、微计算机等。信号处理单元14对从成像元件13发送的数字信号(捕获图像信号)进行各种信号处理。具体地,信号处理单元14进行诸如R、G、B颜色通道之间的校正处理、白平衡校正、像差校正和阴影校正之类的处理。此外,信号处理单元14进行诸如从R、G和B图像数据生成(分离)亮度(Y)信号和色度(C)信号的YC生成处理、调整亮度和颜色的处理、拐点校正和伽马校正之类的各种处理。信号处理单元14将经过各种信号处理的图像信号输出到识别单元和控制单元。另外,信号处理单元14进行分辨率转换处理、用于记录和通信的编码的编解码器处理等,从而转换为最终输出格式。转换为最终输出格式的图像信号被记录在记录单元17中。此外,图像信号作为图像显示在显示单元18上。另外,图像信号从外部输出端子输出,以致它们被显示在诸如设置在成像装置1外部的监视器之类的装置上。本例中的拍摄图像信号指的是从信号处理单元14输出的图像信号。将拍摄图像信号作为拍摄图像显示在显示单元18上使用户能够实时地检查拍摄中的图像。此外,本例中的再现图像信号指的是从记录单元16输出的图像信号。将再现图像信号作为再现图像显示在显示单元18上使用户能够检查记录的图像。
控制单元15包括具有中央处理单元(CPU)的微计算机(算术处理装置),全面地控制成像装置10。例如,控制单元15进行关于与用户的操作相应的信号处理单元14中的各种信号处理的指示、成像操作、记录操作、以及记录的图像文件的再现操作。控制单元15进行各种拍摄模式的切换等。各种拍摄模式例如是静止图像拍摄模式、电影拍摄模式、用于连续获取静止图像的连拍模式等。控制单元15包括用于使用户能够对这些功能进行操作的用户界面控制单元21(UI控制单元21)。
UI控制单元21进行检测对设置在成像装置10中的每个操作元件的操作的处理、在显示单元18上的显示处理、操作检测处理等。此外,控制单元15控制光学系统11所具有的各个透镜。例如,UI控制单元21进行指定F值的处理以确保为AF控制所需的光量,进行与F值相应的光圈机构的操作指示。
ROM、闪存等存储控制单元15使用的程序等。ROM、闪存等存储用于各种操作的应用程序、固件等,以及用于CPU控制各个单元的操作系统(OS)和诸如图像文件之类的内容文件。控制单元15执行所述程序,从而控制整个成像装置10。RAM临时存储在控制单元15的CPU所执行的各种数据处理中使用的数据、程序等,以使得它用作用于控制单元15的工作区。
此外,控制单元15具有UI控制单元21、帧率区域设定单元22、帧率设定单元23、判定单元24、拍摄控制单元25和再现控制单元26。
帧率区域设定单元22设定帧率区域。例如,帧率区域设定单元22按照用户的操作在图像中设定帧率区域。
帧率设定单元23设定图像的帧率。例如,用户设定当特定被摄体与所设定的帧率区域彼此接近时的图像的帧率。
判定单元24判定特定被摄体与帧率区域之间的距离是否等于或小于阈值。应注意的是,由判定单元24判定的阈值可以是预先设定的,或者可以由用户设定。
在判定单元24判定特定被摄体与由帧率区域设定单元22设定的帧率区域之间的距离等于或小于阈值的情况下,拍摄控制单元25控制以帧率设定单元23设定的帧率拍摄图像。例如,在特定被摄体与帧率区域之间的距离等于或小于阈值的情况下,控制成像元件13以设定的帧率拍摄图像。
在判定单元24判定特定被摄体与由帧率区域设定单元22设定的帧率区域之间的距离等于或小于阈值的情况下,再现控制单元26控制以帧率设定单元23设定的帧率再现图像。
例如,当在图像的再现期间控制帧率的情况下,来自记录单元16的图像信号被提供给再现控制单元26,控制单元15对图像信号进行帧率的抽取(decimation)或相加处理,并且再现控制单元26控制显示单元18以设定的该图像的帧率在显示单元18上显示图像信号,或者以设定的该图像的帧率再现图像信号。
另外,为了控制再现期间的帧率,和拍摄期间一样,可以对预先以高每秒帧数或低每秒帧数拍摄的图像进行抽取或相加处理。
此外,拍摄控制单元25和再现控制单元26能够进行与图像的帧率相关的处理。例如,拍摄控制单元25和再现控制单元26进行帧率的抽取或相加处理。例如,在拍摄控制单元25在图像的拍摄期间控制帧率的情况下,来自信号处理单元14的图像信号被提供给拍摄控制单元25,拍摄控制单元25控制图像的帧率。
帧率的控制方法不受限制,例如,拍摄控制单元25可以控制成像元件13以设定的每秒帧数进行拍摄。此外,例如,成像元件13可以以高每秒帧数或低每秒帧数拍摄所有图像,并且可以对拍摄的图像进行抽取或相加处理。与帧率相关的处理将在后面说明。
此外,拍摄控制单元25和再现控制单元26按照特定被摄体和帧率区域之间的距离,设定帧率以便帧率阶梯式地或连续地变化。
例如,拍摄控制单元25和再现控制单元26可以基于存储与特定被摄体和帧率区域之间的距离相应的每秒帧数的表格来设定帧率。当然,本技术不限于此,可以通过各种方法来设定帧率。
记录单元16例如包括非易失性存储器,存储诸如静止图像数据或运动图像数据之类的图像文件(内容文件)、图像文件的属性信息、缩略图图像等。图像文件例如以诸如联合图像专家组(JPEG)、标记图像文件格式(TIFF)和图形交换格式(GIF)之类的格式存储。对于记录单元16,各种各样的实际形态都是可能的。例如,记录单元16可以被配置为内置于成像装置中的闪存,或者可以包括可移除地安装在成像装置上的存储卡(例如,便携式闪存)以及进行存取以在存储卡中进行存储或从存储卡进行读取的存取单元。此外,记录单元16可以实现为内置于成像装置中的硬盘驱动器(HDD)等。
识别单元17从拍摄图像信号或再现图像信号识别图像中的特定被摄体。识别单元17可以将通过用户的操作等指定的被摄体识别为特定被摄体,或者可以不仅通过用户的操作而且通过机器学习来自动识别诸如球之类的特定被摄体。例如,识别单元17识别图像内的人物、人物的诸如手臂、躯干和腿之类的人体部位、球等。
应注意的是,识别方法不受限制。通过图像识别、阈值处理、分割、图像信号分析等进行分析。分析方法不受限制,可以使用任何方法。例如,可以通过机器学习来进行图像分析。
例如,可以使用利用深度神经网络(DNN)等的任意机器学习算法。例如,可以使用进行深度学习的人工智能(AI)等。
例如,为了进行图像识别,构建学习单元和识别单元。学习单元基于输入信息(学习数据)进行机器学习,并输出学习结果。此外,识别单元基于输入信息和学习结果,进行输入信息的识别(例如,判断、预测)。
例如,对于学习单元中的学习技术,使用神经网络和深度学习。神经网络是模仿人类大脑的神经网络的模型。神经网络由输入层、中间层(隐藏层)和输出层这三种类型的层组成。
深度学习是使用具有多层结构的神经网络的模型。深度学习可以在各层中重复特征学习,并学习隐藏在大量数据中的复杂模式。
例如,深度学习用于识别运动图像中的物体。例如,使用用于图像或运动图像的识别的卷积神经网络(CNN)等。
此外,可以使用其中已纳入神经网络的概念的神经芯片/神经形态芯片作为实现这种机器学习的硬件结构。
此外,识别单元17检测图像中的物体的位置和帧率。例如,识别单元17可以检测由球的绝对坐标系(世界坐标系)定义的坐标值(例如,XYZ坐标值)、或由使用预定点作为基准(原点)的相对坐标系定义的坐标值(例如,xyz坐标值或uvd坐标值)。应注意的是,在使用相对坐标系的情况下,可以任意地设定作为基准的原点。
显示单元18进行用于向用户进行各种显示的处理。在本实施例中,以设定的帧率再现的图像被显示在显示单元18上。
此外,显示单元18进行显示从信号处理单元14输入的转换成适当分辨率的图像数据的处理。因而,显示实时取景图像(也称为直通图像),实时取景图像是在被释放之前处于等待中的捕获图像。另外,基于来自控制单元15的指令,显示单元18在屏幕上显示图形用户界面(GUI),比如各种操作菜单、图标和消息。此外,显示单元18能够显示在记录单元16中从记录介质读取的再现图像。
此外,在本实施例中,在显示单元18上显示能够设定帧率区域的GUI。
输出单元19有线或无线地进行与外部信息处理的数据通信和网络通信。例如,捕获的图像数据(静止图像文件或运动图像文件)被发送到外部显示装置、记录装置、再现装置、编辑装置等。此外,输出单元19可以起网络通信单元的作用。例如,可以进行使用诸如因特网、家庭网络和局域网(LAN)之类的各种网络的通信,并且可以往来于网络中的服务器、终端等发送和接收各种数据。
操作单元20用于进行各种操作和设定。例如,操作单元20包括再现菜单开始按钮、确定按钮、方向键、取消按钮、变焦键、滑动键、快门按钮等,并且还包括使用触摸面板系统的监视器等。操作单元20向控制单元15输出与诸如摄影师的轻敲操作和滑动操作之类的各种操作相应的操作信息。
在本实施例中,识别单元17所识别的特定被摄体可以通过用户经由操作单元20的操作来选择。
此外,在本实施例中,用户可以经由操作单元20对显示在显示单元18上的GUI进行操作,并且设定帧率区域。例如,设定帧率区域的位置和大小以及点、线、区域等的种类。
此外,在本实施例中,用户可以经由操作单元20设定图像的帧率。例如,可以输入帧率的数值,或者例如通过以期望的速度划过特定被摄体预期经过的预期路径来输入该预期路径。
应注意的是,在本实施例中,识别单元17对应于识别图像中的特定被摄体的识别单元。
应注意的是,在本实施例中,判定单元24对应于判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值的判定单元。
应注意的是,在本实施例中,帧率区域设定单元22对应于设定帧率区域的帧率区域设定单元。
应注意的是,在本实施例中,帧率设定单元23对应于设定图像的帧率的帧率设定单元。
应注意的是,在本实施例中,在判定单元判定特定被摄体与设定的帧率区域之间的距离等于或小于阈值的情况下,拍摄控制单元25对应于控制以设定的帧率拍摄图像的拍摄控制单元。
应注意的是,在本实施例中,在判定单元判定特定被摄体与设定的帧率区域之间的距离等于或小于阈值的情况下,再现控制单元26起控制以设定的帧率再现图像的再现控制单元的作用。
应注意的是,在本实施例中,操作单元20对应于接收用户的操作的操作单元。
图3是表示帧率的控制的例子的流程图。
识别单元17识别图像中的特定被摄体(步骤101)。
图4是表示使得能够选择特定被摄体的GUI的例子的示意图。
用户可以通过操作单元20选择在GUI中显示的图像中的任意物体作为特定被摄体。在本实施例中,用户通过触摸在图4中所示的GUI 30中显示的任意物体来选择特定被摄体。另外,可以显示用于呈现可被选为特定被摄体的物体,比如包括手、脸和腿的人体部位、球和篮筐的菜单。
在本实施例中,在图4的A中,用户可以通过GUI 30选择诸如手31、手臂32、头33、躯干34和腿35之类的人体部位、球36或篮筐37作为特定被摄体。例如,识别单元17可以通过语义分割等来识别诸如手31、手臂32、头33、躯干34和腿35之类的人体部位。此外,此时可以显示各个部位的区域的边界。
此外,在物体识别期间,在存在被识别为同一种类的物体的多个物体的情况下,例如,一个物体通过识别特定被摄体拿着该物体,该物体更大或该物体聚焦更好的特征来被识别。
此外,例如,在已经获取预演图像的情况下,可以在预演图像的某一帧选择希望聚焦于其上的物体,并将选择的物体设定为特定被摄体。
预演图像是在设定帧率区域等时在显示单元18上显示的图像。例如,与用户想要控制帧率的图像相似的图像是预演图像。具体地,在图4中,其中篮球被投向篮筐的场景是预演图像。
应注意的是,获取预演图像的方法不受限制,例如,在控制再现期间的帧率的情况下,可以获取记录在记录单元16中的图像作为预演图像。此外,例如在拍摄期间,用户可以选择运动等的场景,并且可以显示适合该场景的预演图像(包括不是实际拍摄的视频的图像,例如,进球场景的样本图像)。在这种情况下,用户可以在观看样本图像的同时进行操作,或者可以将作为当前实际正在拍摄的图像的拍摄图像显示为预演图像。
此外,如图4的B中所示,在特定被摄体做出大动作,例如,人物38在板39上进行360°翻转的情况下,可以通过不选择人物38的重心位置而是选择板39作为特定被摄体来追踪特定被摄体。
当然,识别单元17可以自动识别特定被摄体。在这种情况下,GUI60可以显示所识别的特定被摄体,以便用户能够识别它。
返回到图3,帧率区域设定单元22设定帧率区域(步骤102)。
帧率设定单元23设定图像的帧率(步骤103)。
图5是表示帧率区域和图像的帧率的设定的例子的示意图。在图5中,在显示单元18上显示能够控制帧率的控制GUI 40。
在本实施例中,用户通过触摸上面显示有控制GUI 40的显示单元18,能够设定帧率区域和图像的帧率。
如图5中所示,通过成像装置10进行篮球比赛的拍摄,并且显示篮筐41。此外,图5示出了篮球穿过篮筐的瞬间。
用户用手指42触摸显示单元18,并设定帧率区域。在本实施例中,用户可以通过用手指42划过预期篮球将经过的预期路径43(从起点44到终点45的线)来设定帧率区域。
此外,用户可以通过控制划过预期路径43时的手指42的速度来设定再现期间的图像的帧率。即,基于输入手指42的速度来控制图像的帧率。
例如,基于用户的手指42的划过速度(用户输入的速度)和实际拍摄期间或再现期间的特定被摄体的速度,计算拍摄期间或再现期间设定的帧率。下面说明具体的计算方法。
这里,将说明基于通过用户的手指输入的特定被摄体的速度来计算所控制的图像的帧率的方法。
为了确定图像的所控制的帧率F,使用以下参数。
特定被摄体的实际速度用Vnow表示。
用户输入的特定被摄体的速度用Vexpected表示。
用户设定的图像的帧率用Fplay表示。
应注意的是,Vnow由识别单元17获取。Vexpected由帧率设定单元23设定。此外,Fplay表示由用户的输入预先设定的帧率。
此外,Vexpected表示在预期路径43的各个位置处的特定被摄体的速度。即,也可以说预期路径43是指示特定被摄体的各个位置的点的集合。例如,用户在起点44输入的特定被摄体的速度可以用Vexpected(1)表示。此外,例如,用户在终点45输入的特定被摄体的速度可以用Vexpected(n)表示。
此外,与Vexpected(1)对应的特定被摄体的实际速度可以用Vnow(1)表示。类似地,与Vexpected(n)对应的特定被摄体的实际速度可以用Vnow(n)表示。
这里,将用于确定由控制单元15控制的图像的帧率F的表达式表述为下面的表达式1。
[表达式1]
F=Fplay×(Vnow/Vexpected)
关于针对预期路径的各个位置设定的帧率,对于每一帧进行(表达式1)的处理,从而控制帧率。例如,为了将帧率区域中的预定位置的图像的速度降低到1/5,假设再现期间的每秒帧数为24,则将该预定位置的图像的每秒帧数控制为120。
此外,在拍摄期间,每一帧地进行这样的处理,从而控制帧率。
图6是表示在已获取预演图像情况下的帧率区域和图像的帧率的设定的例子的示意图。
图6中,作为例子示出了在已获取预演图像的情况下的控制GUI 40。
在已获取预演图像的情况下,基于用户输入的预期路径和帧率,以鬼影方式显示篮球47。
鬼影显示指的是按照作为帧区域的预期路径和设定的帧率,虚拟地显示特定被摄体在多个帧上如何移动。例如,当鬼影相互重叠地显示时,这指示运动缓慢,而当鬼影相互分开地显示时,这指示运动快速。
例如,在图5中,由于篮筐48附近的篮球47的鬼影是相互重叠地显示的,因此当篮球47位于篮筐48附近时,图像的帧率被控制得较低。
对于在图6中已获取预演图像的情况下的图像的帧率的控制方法,也进行与上面的(表达式1)相似的处理。
图7是表示用于控制帧率的控制GUI 50的例子的示意图。
如图7中所示,在控制GUI 50中显示将帧率指示为纵轴,并将距起点的长度指示为横轴的图形。在本实施例中,用户可以经由控制GUI 50调整帧率区域中的帧率。
从起点51连接到终点52的实线53指示经由图5中所示的控制GUI40输入的从起点44到终点45的预期路径43的帧率。
从起点51连接到终点52的虚线54指示图像中的可以变更帧率的范围。即,用户可以调整帧率,以便不超过控制GUI 50中显示的虚线。
虚线54所示的帧率是基于由识别单元17识别的特定被摄体的实际速度计算的。例如,帧率可以基于拍摄期间的特定被摄体的实际速度来计算。此外,例如,帧率可以基于预演图像中的特定被摄体的速度来计算。
虚线54所示的帧率可以通过上面的(表达式1)来确定。在这种情况下,预演图像中的由识别单元17预先检测的特定被摄体的速度用作Vnow的预测值,Vnow是特定被摄体的实际速度。因而,在控制GUI 50中显示与确定的帧率对应的虚线54。
此外,在存在预演图像并且实线53超过虚线54的情况下,控制GUI50向用户呈现该情况。例如,可以向用户呈现文本,或者可以以声音的形式呈现。
此外,在控制GUI 50中显示指示预期路径上的特定被摄体的位置的标记55。即,用户可以调整在标记55的当前位置的特定被摄体的帧率。
如图7中所示,控制GUI 50具有显示帧率区域和特定被摄体的图像显示单元56。
图像显示单元56显示由控制GUI 40设定的预期路径43以及特定被摄体沿着该预期路径经过的位置(标记55)。因而,用户可以在同时观看预期路径上的标记55和图形的时候,控制在预期路径的各个位置处的特定被摄体的帧率。此外,图像显示单元56可以显示预演图像。
返回到图3,判定单元24判定特定被摄体与帧率区域之间的距离是否等于或小于阈值(步骤104)。
在特定被摄体与帧率区域之间的距离不等于或小于阈值的情况下(步骤104中“否”),不控制图像的帧率,直到特定被摄体与帧率区域之间的距离变得等于或小于阈值为止。
在特定被摄体与帧率区域之间的距离变得等于或小于阈值的情况下(步骤104中为“是”),进行控制从而以拍摄控制单元25和再现控制单元26设定的帧率拍摄或再现图像(步骤105)。在本实施例中,识别单元17识别特定被摄体的位置和在该位置的帧率。
例如,控制单元15控制成像元件13,使得以高每秒帧数拍摄所有图像。此时,以拍摄控制单元25或再现控制单元26通过转换处理等进行抽取帧的处理的方式来控制图像的帧率。或者,当以低每秒帧数拍摄所有图像时,可以以拍摄控制单元25或再现控制单元26通过相加处理等增加帧的方式来控制图像的帧率。或者,可以通过进行合成图像的处理等来控制图像的帧率。
具体地,在拍摄期间实时地控制图像的帧率的情况下,拍摄控制单元25相继改变拍摄每一帧的图像的时间间隔。即,以不同时间间隔拍摄的图像在再现期间以相等的时间间隔被再现,于是用户可以看到图像以再现速度在变化。
此外,例如,控制单元15能够控制以对于成像元件13设定的帧率进行拍摄。
此外,在再现期间,再现控制单元26也通过进行抽取或相加处理,以由帧率设定单元23设定的再现期间的帧率再现图像。
[帧率区域的形状]
图8是表示帧率区域的形状的例子的示意图。
如图8中所示,用户通过控制GUI 70设定圆形帧率区域。在本实施例中,用户可以通过触摸任意点并滑动手指71(在触摸状态下移动手指的操作)来设定帧率区域。例如,通过触摸篮筐72并沿预定方向滑动手指,设定以用户移动手指的距离作为半径的圆形帧率区域73。
图9是表示帧率区域的形状的另一个例子的示意图。图9中,成像装置10正在以广角拍摄整个体育场的图像。
如图9中所示,用户通过控制GUI 70设定矩形帧率区域。在本实施例中,用户可以通过触摸预定位置并滑动手指74来设定帧率区域。例如,在图9中,通过用户触摸预定点并沿预定方向滑动手指,设定其对角线对应于用户移动手指的距离的矩形帧率区域75。
此外,用户可以设定所设定的帧率区域75的中心坐标。在用户没有设定它们的情况下,帧率区域75的中心坐标被设定在帧率区域的重心。此外,对于圆形帧率区域73,中心坐标(被触摸的任意点)被设定为中心。
应注意的是,设定帧率区域的方法不受限制。例如,对于圆形帧率区域,可以作为数值输入坐标和半径。此外,例如,可以通过用户用手指划过帧率区域的形状(边界)来设定帧率区域。
[帧率的控制例子]
图10是表示帧率区域中的帧率的控制GUI的例子的示意图。在图10中,在控制GUI80中显示指示帧率区域中的帧率的控制的图形和对应于该图形的预期路径81。
在本实施例中,控制单元15基于判定单元24确定的特定被摄体的位置和在帧率区域82内设定的中心坐标83的位置来控制图像的帧率。此外,用户可以通过控制GUI 80控制与从帧率区域82的边界到帧率区域的中心坐标83的路径对应的帧率。
如图10中所示,在控制GUI 80中显示将帧率指示为纵轴,并且将距起点的距离指示为横轴的图形。此外,在本实施例中,控制图像的帧率,使帧率随着特定被摄体从帧率区域的边界接近中心坐标而增大。
这里,通常时的帧率是当再现图像时的通常帧率。例如,在以等于60的每秒帧数再现图像的情况下,为60的每秒帧数是通常时的帧率。
例如,用户通过控制GUI 80设定在帧率区域82的边界附近的帧率的值,边界与中心坐标83之间的距离和帧率的增加(减小)的比率,以及在中心坐标83的帧率的值。
此外,在本实施例中,由于在中心坐标83与帧率区域82的距离比相同的位置84(85)处的帧率被设定为相同,因此对于帧率区域82显示一个图形。因此,在从帧率区域82的边界到中心坐标83的路径81和从中心坐标83到帧率区域82的边界的路径87之间,帧率被设定为不同的情况下,显示两个图形。
应注意的是,控制帧率的方法不受限制。例如,可以采用如后面说明的图11、12、13和14中所示的方法。
图11~图14是表示帧率的控制的例子的示意图。
图11~图14中所示的图形是将帧率指示为纵轴,并将距起点的距离指示为横轴的图形。
在图11中所示的控制例子中,在特定被摄体超越帧率区域的边界的情况下,图像的帧率被控制为帧率区域内的设定的帧率。
在本实施例中,判定单元24判定特定被摄体是否超越帧率区域的边界。例如,判定单元24判定特定被摄体的重心是否超越帧率区域。在特定被摄体的重心已超越帧率区域的情况下,控制单元15将图像的帧率变更为图11中所示的帧率。
在图12中所示的控制例子中,在特定被摄体超越帧率区域的边界的情况下,图像的帧率被设定为随着特定被摄体接近帧率区域的中心坐标而阶梯式地变化。例如,帧率被设定为随着特定被摄体接近中心坐标而逐步增大。此外,例如,图像的帧率可以被设定为随着特定被摄体进一步离开中心坐标而逐步降低。
例如,用户可能能够通过控制GUI来控制帧率应通过多少步接近设定的值,或者控制单元15可以视情况计算帧率。此外,例如,如图12中所示的距离与帧率之间的关系作为表格预先记录在记录单元16中,并且控制单元15可以基于该表格控制图像的帧率。
在图13和图14中所示的控制例子中,在特定被摄体已超越帧率区域的边界的情况下,图像的帧率被设定为随着特定被摄体接近帧率区域的中心坐标而连续地变化。例如,帧率被设定为使得直线的倾斜度随着特定被摄体接近中心坐标而变陡。此外,例如,帧率被设定为使得直线的倾斜度随着特定被摄体进一步离开中心坐标而变缓。此外,例如,用户可以通过控制GUI进行控制,使得接近帧率的设定值时的直线和曲线的倾斜度变高或变低。即,直线或曲线的系数被改变。
此外,如图13中所示的距离与帧率之间的关系可以作为表格预先记录在记录单元16中,并且控制单元15可以基于该表格控制图像的帧率。
上面,在按照本实施例的成像装置10中,识别图像中的特定被摄体。判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。因而,可以容易地控制图像的帧率。
一般来说,对于希望作为视频表达令人印象深刻的场景,有时使用诸如逐渐改变运动图像的帧率的RAMP效果之类的方法。为了获得平滑的呈现效果,需要通过动态地改变成像时的帧率来进行拍摄。对于这样的拍摄,事先决定要拍摄的场景,进行预演等,并设定目标帧率和达到该帧率的时间。在这种情况下,对于物体的运动必须正确地调整定时,从而难以拍摄到预期的运动图像。
鉴于此,在本技术中,用户可以通过划过预期路径来输入特定被摄体的帧率。因而,与现有技术相比,可以通过更直观的输入,更容易地拍摄、再现和编辑图像。
<其他实施例>
本技术不限于上述实施例,可以实现各种其他实施例。
在上述实施例中,成像装置10控制拍摄期间和再现期间的图像的帧率。本技术不限于此。可以将拍摄的图像发送到外部信息处理装置,并由该信息处理装置控制图像的帧率。
图15是表示信息处理装置的功能构成例子的框图。
如图15中所示,信息处理装置100具有控制单元15、记录单元16、识别单元17、显示单元18、输出单元19和操作单元20。
信息处理装置100包括诸如PC和智能电话机之类的编辑装置以及诸如监视器之类的再现装置。例如,在编辑装置或再现装置的情况下,成像装置10可以提供图像信号,并且可以相对于图像信号控制帧率。此外,例如,可以向再现装置提供指示进行控制以具有由编辑装置设定的帧率的信号,并且再现装置可以按照该信号控制帧率。
应注意的是,由于各个块进行与安装在成像装置10上的块相似的处理,因此将省略说明。
例如,信息处理装置100被连接成能够经由输出单元19有线或无线地与拍摄图像的成像装置10通信。各个设备之间的连接形式不受限制,例如可以使用诸如Wi-Fi之类的无线LAN通信或者诸如蓝牙(注册商标)之类的近场通信。
例如,可以从成像装置10接收拍摄图像信号或再现图像信号,并且可以控制由信息处理装置100接收的图像信号的帧率。此外,例如,可以读取记录在诸如安全数字(SD)卡之类的记录设备中的再现图像信号。
此外,例如,可以控制拍摄图像信号或再现图像信号的帧率。在这种情况下,通过控制单元15对记录的图像进行帧率的抽取或相加处理,再现以设定的帧率的图像。
此外,例如,其帧率已由成像装置10或信息处理装置100控制的拍摄图像或再现图像可以显示在外部装置的显示单元上。
在上述实施例中,按照特定被摄体与帧率区域之间的距离来控制帧率。本技术不限于此。在拍摄期间的特定被摄体的实际位置偏离帧率区域的位置的情况下可以进行插值处理。换句话说,在拍摄期间的特定被摄体的实际运动(路径)偏离帧率区域的设定的路径(预期路径)的情况下可以进行插值处理。
例如,在当以设定的帧率进行拍摄或再现时,特定被摄体偏离帧率区域的情况下,控制单元15可以通过最近邻插值、二次插值等来控制图像的帧率。
在上述实施例中,基于通过用户的手指输入的特定被摄体的速度来控制图像的帧率。本技术不限于此,用户可以输入图像的帧率的数值。
上面,图像是按照图像的设定的帧率来拍摄和再现的。本技术不限于此。在用户不能以设定的帧率实际拍摄和再现图像的情况下,可以如下进行计算。
在上述实施例中,对应于移动用户的手指的速度来输入帧率。本技术不限于此,可以在控制GUI中显示能够任意地变更数值的按钮等。
在上述实施例中,只设定一个帧率区域。本技术不限于此,可以设定多个帧率区域。例如,可以设定包括篮筐的两个帧率区域。在这种情况下,当作为特定被摄体的篮球接近每个帧率区域时,可以以设定的帧率拍摄和再现图像。此外,在这种情况下,可以对包括篮筐的帧率区域设定不同的帧率。
此外,例如,在多个帧率区域相互重叠的情况下,控制单元15可以基于其中特定被摄体更靠近帧率区域中心坐标的帧率区域的帧率来控制图像的帧率。此外,例如,控制单元15可以基于多个帧率区域的中心坐标与特定被摄体之间的距离来取帧率的加权算术平均值。
在上述实施例中,对于诸如篮球之类的运动控制了帧率。本技术不限于此,可以用于任意领域。例如,帧率区域可以包括婚礼蛋糕,并且在人们靠近切蛋糕时,帧率可以被控制为设定的帧率。
图16是表示信息处理装置100的硬件构成例子的框图。
信息处理装置100包括CPU 101、ROM 102、RAM 103、输入/输出接口105以及互连它们的总线104。显示单元106、输入单元107、存储单元108、通信单元109、驱动单元110等连接到输入/输出接口105。
显示单元106例如是使用液晶、EL等的显示设备。输入单元107例如包括键盘、指示设备、触摸面板和其他操作设备。在输入单元107包括触摸面板的情况下,触摸面板可以与显示单元106是一体的。
存储单元108是非易失性存储设备,例如包括HDD、闪存和其他固体存储器。驱动单元110例如是能够驱动诸如光记录介质和磁记录带之类的可移动记录介质111的设备。
通信单元109包括用于与可连接到LAN、WAN等的其他设备通信的调制解调器、路由器和其他通信设备。通信单元109可以进行有线通信或者可以进行无线通信。通信单元109通常与信息处理装置100分开使用。
存储在存储单元108、ROM 102等中的软件与信息处理装置100的硬件资源协作,从而实现具有上述硬件构成的信息处理装置100的信息处理。具体地,通过将存储在ROM 102等中的构成软件的程序加载到RAM 103中并执行所述程序,实现按照本技术的信息处理方法。
程序例如经由记录介质111安装在信息处理装置100中。或者,程序可以经由全球网络等安装在信息处理装置100中。此外,可以使用任意计算机可读的非临时性存储介质。
通过搭载在通信终端上的计算机与能够经由网络等与之通信的其他计算机的协作,进行按照本技术的成像装置、信息处理装置、信息处理方法和程序,并且可以构建按照本技术的信息处理。
即,按照本技术的成像装置、信息处理装置、信息处理方法和程序不仅可以在由单个计算机构成的计算机系统中进行,而且可以在其中多个计算机协同操作的计算机系统中进行。应注意的是在本公开中,系统意味着一组多个组件(装置、模块(部件)等),并且所有组件是否容纳同一壳体中并不重要。于是,容纳在单独的壳体中并经由网络相互连接的多个装置,以及具有容纳在一个壳体中的多个模块的单一装置都是系统。
通过计算机系统进行按照本技术的成像装置、信息处理装置、信息处理方法和程序例如包括单一计算机进行特定被摄体的识别、帧率的设定、帧率的控制等的情况和不同的计算机进行各个处理的情况两者。此外,由预定的计算机进行各个处理包括使其他计算机进行一些或全部这些处理并获取结果。
即,按照本技术的成像装置、信息处理装置、信息处理方法和程序也可以应用于其中多个装置经由网络分担并协同处理一个功能的云计算构成。
参考各个附图说明的诸如帧率区域设定单元22、判定单元24和帧率设定单元23之类的各个构成、通信系统的控制流程等仅仅是实施例,可以任意修改而不脱离本技术的要旨。即,可以采用用于实现本技术的任何其他构成、算法等。
应注意的是,记载在本公开中的效果仅仅是示例性的而不是限制性的,可以提供其他的效果。上面对多种效果的说明并不一定意味着同时提供这些效果。这意味着取决于条件等,至少获得上述效果中的任何一种效果,并且当然可以提供未记载在本公开中的效果。
可以组合上述实施例的特征中的至少两个特征。即,可以跨各个实施例地任意组合在各个实施例中说明的各种特征。
应注意的是,本技术也可以采用以下构成。
(1)一种成像装置,包括:
识别单元,所述识别单元识别图像中的特定被摄体;以及
判定单元,所述判定单元判定识别的所述特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
(2)按照(1)所述的成像装置,还包括
设定所述帧率区域的帧率区域设定单元。
(3)按照(1)或(2)所述的成像装置,还包括
设定所述图像的帧率的帧率设定单元。
(4)按照(2)所述的成像装置,还包括
拍摄控制单元,该拍摄控制单元在所述判定单元判定所述特定被摄体与设定的所述帧率区域之间的距离等于或小于阈值的情况下,进行控制以便以设定的帧率拍摄图像。
(5)按照(2)所述的成像装置,还包括
再现控制单元,该再现控制单元在所述判定单元判定所述特定被摄体与设定的所述帧率区域之间的距离等于或小于阈值的情况下,进行控制以便以设定的帧率再现图像。
(6)按照(2)所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为点。
(7)按照(2)所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为线。
(8)按照(2)所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域。
(9)按照(4)所述的成像装置,其中
所述帧率区域设定单元设定各自为所述帧率区域的多个帧率区域,并且
在所述判定单元判定所述特定被摄体与设定的所述多个帧率区域中的每一个之间的距离等于或小于阈值的情况下,所述拍摄控制单元进行控制以便以设定的帧率拍摄图像。
(10)按照(5)所述的成像装置,其中
所述帧率区域设定单元设定多个所述帧率区域,并且
在所述判定单元判定所述特定被摄体与设定的所述多个帧率区域中的每一个之间的距离等于或小于阈值的情况下,所述再现控制单元进行控制以便以设定的帧率再现图像。
(11)按照在(4)所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域,并且
在所述判定单元判定所述特定被摄体位于设定的所述帧率区域的范围内的情况下,所述拍摄控制单元进行控制以便以设定的帧率拍摄图像。
(12)按照(5)所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域,并且
在所述判定单元判定所述特定被摄体位于设定的所述帧率区域的范围内的情况下,所述再现控制单元进行控制以便以设定的帧率再现图像。
(13)按照(2)所述的成像装置,还包括:
接收用户的操作的操作单元,其中
所述帧率区域设定单元按照用户对所述操作单元的操作,设定所述帧率区域。
(14)按照(3)所述的成像装置,还包括
接收用户的操作的操作单元,其中
所述帧率设定单元按照用户对所述操作单元的操作,设定所述图像的帧率。
(15)按照(3)所述的成像装置,其中
所述帧率设定单元按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率阶梯式地变化。
(16)按照(3)所述的成像装置,其中
所述帧率设定单元按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率连续地变化。
(17)一种信息处理装置,包括:
识别单元,所述识别单元识别图像中的特定被摄体;以及
判定单元,所述判定单元判定识别的所述特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
(18)一种信息处理方法,包括:
通过计算机系统
识别图像中的特定被摄体;以及
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
(19)一种程序,所述程序使计算机系统执行:
识别图像中的特定被摄体的步骤;以及
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值的步骤。
附图标记列表
10 成像装置
20 操作单元
22 帧率区域设定单元
23 帧率设定单元
24 判定单元
25 拍摄控制单元
26 再现控制单元
40 控制GUI
100 信息处理处理
Claims (19)
1.一种成像装置,包括:
识别单元,所述识别单元识别图像中的特定被摄体;以及
判定单元,所述判定单元判定识别的所述特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
2.按照权利要求1所述的成像装置,还包括
设定所述帧率区域的帧率区域设定单元。
3.按照权利要求1所述的成像装置,还包括
设定所述图像的帧率的帧率设定单元。
4.按照权利要求2所述的成像装置,还包括
拍摄控制单元,所述拍摄控制单元在所述判定单元判定所述特定被摄体与设定的所述帧率区域之间的距离等于或小于阈值的情况下,进行控制以便以设定的帧率拍摄图像。
5.按照权利要求2所述的成像装置,还包括
再现控制单元,所述再现控制单元在所述判定单元判定所述特定被摄体与设定的所述帧率区域之间的距离等于或小于阈值的情况下,进行控制以便以设定的帧率再现图像。
6.按照权利要求2所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为点。
7.按照权利要求2所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为线。
8.按照权利要求2所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域。
9.按照权利要求4所述的成像装置,其中
所述帧率区域设定单元设定各自为所述帧率区域的多个帧率区域,并且
在所述判定单元判定所述特定被摄体与设定的所述多个帧率区域中的每一个之间的距离等于或小于阈值的情况下,所述拍摄控制单元进行控制以便以设定的帧率拍摄图像。
10.按照权利要求5所述的成像装置,其中
所述帧率区域设定单元设定多个所述帧率区域,并且
在所述判定单元判定所述特定被摄体与设定的所述多个帧率区域中的每一个之间的距离等于或小于阈值的情况下,所述再现控制单元进行控制以便以设定的帧率再现图像。
11.按照权利要求4所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域,并且
在所述判定单元判定所述特定被摄体位于设定的所述帧率区域的范围内的情况下,所述拍摄控制单元进行控制以便以设定的帧率拍摄图像。
12.按照权利要求5所述的成像装置,其中
所述帧率区域设定单元将所述帧率区域设定为具有预定范围的区域,并且
在所述判定单元判定所述特定被摄体位于设定所述的帧率区域的范围内的情况下,所述再现控制单元进行控制以便以设定的帧率再现图像。
13.按照权利要求2所述的成像装置,还包括
接收用户的操作的操作单元,其中
所述帧率区域设定单元按照用户对所述操作单元的操作,设定所述帧率区域。
14.按照权利要求3所述的成像装置,还包括
接收用户的操作的操作单元,其中
所述帧率设定单元按照用户对所述操作单元的操作,设定所述图像的帧率。
15.按照权利要求3所述的成像装置,其中
所述帧率设定单元按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率阶梯式地变化。
16.按照权利要求3所述的成像装置,其中
所述帧率设定单元按照所述特定被摄体与所述帧率区域之间的距离来设定所述帧率,以使得所述帧率连续地变化。
17.一种信息处理装置,包括:
识别单元,所述识别单元识别图像中的特定被摄体;以及
判定单元,所述判定单元判定识别的所述特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
18.一种信息处理方法,包括:
通过计算机系统
识别图像中的特定被摄体;以及
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值。
19.一种程序,所述程序使计算机系统执行:
识别图像中的特定被摄体的步骤;以及
判定识别的特定被摄体与用于设定图像的帧率的帧率区域之间的距离是否等于或小于阈值的步骤。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-134830 | 2020-08-07 | ||
JP2020134830 | 2020-08-07 | ||
PCT/JP2021/027475 WO2022030275A1 (ja) | 2020-08-07 | 2021-07-26 | 撮像装置、情報処理装置、情報処理方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116076083A true CN116076083A (zh) | 2023-05-05 |
Family
ID=80117335
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180058337.6A Pending CN116076083A (zh) | 2020-08-07 | 2021-07-26 | 成像装置,信息处理装置,信息处理方法和程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230345107A1 (zh) |
JP (1) | JPWO2022030275A1 (zh) |
CN (1) | CN116076083A (zh) |
WO (1) | WO2022030275A1 (zh) |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011010276A (ja) * | 2009-05-22 | 2011-01-13 | Sanyo Electric Co Ltd | 画像再生装置及び撮像装置 |
-
2021
- 2021-07-26 JP JP2022541438A patent/JPWO2022030275A1/ja active Pending
- 2021-07-26 CN CN202180058337.6A patent/CN116076083A/zh active Pending
- 2021-07-26 WO PCT/JP2021/027475 patent/WO2022030275A1/ja active Application Filing
- 2021-07-26 US US18/018,990 patent/US20230345107A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2022030275A1 (ja) | 2022-02-10 |
JPWO2022030275A1 (zh) | 2022-02-10 |
US20230345107A1 (en) | 2023-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11012614B2 (en) | Image processing device, image processing method, and program | |
US8831282B2 (en) | Imaging device including a face detector | |
US9747492B2 (en) | Image processing apparatus, method of processing image, and computer-readable storage medium | |
KR101679290B1 (ko) | 영상 처리 방법 및 장치 | |
US8514285B2 (en) | Image processing apparatus, image processing method and program | |
US9596415B2 (en) | Control apparatus, imaging system, control method, and program for changing a composition of an image | |
KR20100055946A (ko) | 동영상 썸네일 생성 방법 및 장치 | |
US9591210B2 (en) | Image processing face detection apparatus, method for controlling the same, and program | |
US8648960B2 (en) | Digital photographing apparatus and control method thereof | |
US11496670B2 (en) | Electronic device with display screen capable of reliable detection of a user selected displayed eye region in a scene to be captured, and region selection method | |
JP2007251429A (ja) | 動画撮影装置及びズーム調整方法 | |
JP2014228629A (ja) | 撮像装置、その制御方法、およびプログラム、並びに記憶媒体 | |
RU2599260C2 (ru) | Устройство обработки цифровых изображений и способ управления им | |
JP6270578B2 (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
JP2014017665A (ja) | 表示制御装置、表示制御装置の制御方法、プログラムおよび記録媒体 | |
US9232133B2 (en) | Image capturing apparatus for prioritizing shooting parameter settings and control method thereof | |
JP2011193066A (ja) | 撮像装置 | |
CN116076083A (zh) | 成像装置,信息处理装置,信息处理方法和程序 | |
JP2021105850A (ja) | 画像処理装置及び方法、及び撮像装置 | |
WO2022158201A1 (ja) | 画像処理装置、画像処理方法、プログラム | |
JP2009130840A (ja) | 撮像装置及びその制御方法及びプログラム | |
JP2016048863A (ja) | 被写体検出装置、その制御方法、撮像装置、表示装置及びプログラム | |
JP2024033747A (ja) | 撮像装置、撮像装置の制御方法、プログラム | |
JP2018142944A (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP2016012845A (ja) | 撮像装置、その制御方法、および制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |