CN104427260B - 运动图像生成系统、运动图像生成方法以及记录介质 - Google Patents
运动图像生成系统、运动图像生成方法以及记录介质 Download PDFInfo
- Publication number
- CN104427260B CN104427260B CN201410443249.XA CN201410443249A CN104427260B CN 104427260 B CN104427260 B CN 104427260B CN 201410443249 A CN201410443249 A CN 201410443249A CN 104427260 B CN104427260 B CN 104427260B
- Authority
- CN
- China
- Prior art keywords
- image
- subject
- moving image
- shooting
- photographic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000001514 detection method Methods 0.000 claims abstract description 18
- 230000008859 change Effects 0.000 claims abstract description 16
- 238000012545 processing Methods 0.000 claims description 152
- 230000033001 locomotion Effects 0.000 claims description 151
- 238000012360 testing method Methods 0.000 claims description 22
- 238000010586 diagram Methods 0.000 claims description 13
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 230000003068 static effect Effects 0.000 claims description 2
- 238000003786 synthesis reaction Methods 0.000 claims description 2
- 230000009897 systematic effect Effects 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 claims 1
- 238000004891 communication Methods 0.000 description 35
- 230000006870 function Effects 0.000 description 23
- 230000000007 visual effect Effects 0.000 description 17
- 238000003384 imaging method Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 12
- 239000000203 mixture Substances 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000003595 spectral effect Effects 0.000 description 4
- 241001269238 Data Species 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 241000406668 Loxodonta cyclotis Species 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 210000000746 body region Anatomy 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000005622 photoelectricity Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000032258 transport Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明提供一种运动图像生成系统及运动图像生成方法。在运动图像生成系统中,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像,通过图像识别,在所取得的各运动图像内检测任意指定的被摄体,对应于连续拍摄中的各时刻,选择包括所述检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的被摄体包含区域的运动图像,并且切出该被摄体包含区域内的图像,按拍摄时间的顺序,连接所切出的多个所述图像,由此生成1个运动图像,将所切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
Description
技术领域
本发明涉及连接多个运动图像来生成1个运动图像的运动图像生成系统、运动图像生成方法以及记录介质。
背景技术
现有技术中,存在通过多个摄像装置追踪被摄体的移动并切换摄像装置来自动拍摄运动图像的摄影技术。
在这种摄影技术中,例如,专利文献1记载了如下技术:利用被配置成拍摄范围不同的多个摄像装置连续拍摄移动的物体而得到的多个运动图像数据。专利文献1记载的技术中,记载了如下技术:针对被摄体的移动中的各时刻,选择包含被摄体的运动图像数据,并且进行基于选择出的运动图像数据来生成图像的处理,按拍摄时间的顺序连接对应于各时刻而生成的多个图像,从而生成连续拍摄被摄体的移动的1个运动图像数据。
专利文献1:JP特开2005-109758号公报
但是,在上述的专利文献1记载的技术中,在各个运动图像数据中被摄体的拍摄尺寸不同是不可避免的。此外,在运动图像数据与运动图像数据之间插入通过插值处理生成的虚拟运动图像,以使在运动图像数据的连接部分移动的被摄体的大小圆滑地变化。因此,无法生成使移动的被摄体的状态(运动图像内的位置或尺寸等)一致的容易观看的运动图像数据。
发明内容
本发明鉴于这种状况而完成,目的在于提供一种能够生成使移动的被摄体的状态(运动图像内的位置或尺寸等)一致的容易观察的运动图像数据的运动图像生成系统及运动图像生成方法。
本发明的1个方式是运动图像生成系统,具备:
图像取得部,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
被摄体检测部,通过图像识别,在由所述图像取得部获取的各运动图像内检测被任意指定的被摄体;
切出控制部,对应于连续拍摄中的各时刻,选择由所述图像取得部获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是由所述被摄体检测部检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成部,按拍摄时间的顺序,连接通过所述切出控制部的控制与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制部将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
此外,本发明的其他方式是运动图像生成方法,其特征在于,包括:
取得处理,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
检测处理,通过图像识别,在通过所述取得处理获取的各运动图像内检测被任意指定的被摄体;
切出控制处理,对应于连续拍摄中的各时刻,选择通过所述取得处理获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是通过所述检测处理检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成处理,按拍摄时间的顺序,连接通过所述切出控制处理的控制而与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制处理将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
此外,本发明的又一方式是一种非易失性的记录介质,记录有使对运动图像生成系统进行控制的计算机实现如下功能的程序:
取得功能,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
检测功能,通过图像识别,在通过所述取得功能获取的各运动图像内检测被任意指定的被摄体;
切出控制功能,对应于连续拍摄中的各时刻,选择通过所述取得功能获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是通过所述检测功能检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成功能,按拍摄时间的顺序,连接通过所述切出控制功能的控制而与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制功能将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
附图说明
图1是表示本发明的一实施方式的被摄体追踪运动图像生成系统的系统结构的系统结构图。
图2是表示构成图1的被摄体追踪运动图像生成系统的摄像控制装置及摄像装置的硬件结构的框图。
图3是表示图2的摄像控制装置及摄像装置的功能结构中用于执行被摄体追踪运动图像生成处理的功能结构的功能框图。
图4是表示切出加工的具体例的示意图。
图5是说明具有图3的功能结构的图2的摄像控制装置所执行的被摄体追踪运动图像生成处理的流程的流程图。
图6是说明具有图3的功能结构的图2的摄像装置所执行的被摄体追踪运动图像生成处理的流程的流程图。
图7是表示图2的摄像控制装置及摄像装置的功能结构中用于执行第2实施方式中的被摄体追踪运动图像生成处理的功能结构的功能框图。
图8是说明具有图7的功能结构的图2的摄像控制装置所执行的第2实施方式中的被摄体追踪运动图像生成处理的流程的流程图。
图9是说明具有图7的功能结构的图2的摄像装置所执行的第2实施方式中的被摄体追踪运动图像生成处理的流程的流程图。
图10是表示第3实施方式中的被摄体追踪运动图像生成系统的系统结构的系统结构图。
图11是表示图2的摄像装置的功能结构中用于执行第3实施方式的被摄体追踪运动图像生成处理的功能结构的功能框图。
图12是说明具有图11的功能结构的图2的摄像装置所执行的第3实施方式中的被摄体追踪运动图像生成处理的流程的流程图。
图13是表示拍摄时刻的其他例的图。
具体实施方式
以下,参照附图来说明本发明的实施方式。
本发明的一实施方式的被摄体追踪运动图像生成系统是被设定在规定位置的多个摄像装置,利用拍摄了在各摄像装置的视角内移动的被摄体(以下称为“特定被摄体”)的运动图像(以下称为“摄影运动图像”),生成特定被摄体始终在规定位置(在本实施方式中是运动图像的中心位置)以规定尺寸(例如,包括特定被摄体的全部且在特定被摄体的周围设置了规定的空白的尺寸)存在的运动图像(以下称为“被摄体追踪运动图像”)数据。被摄体追踪运动图像反映出特定被摄体始终在运动图像的中心,成为看上去像是背景等特定被摄体以外的被摄体移动的运动图像、即与特定被摄体一起移动的运动图像。
<第1实施方式>
图1是表示本发明的一实施方式的被摄体追踪运动图像生成系统的系统结构的系统结构图。另外,在本例中,拍摄将在规定的区间内跑动的跑步者ph作为拍摄对象(特定被摄体)的运动图像,说明生成跑步者ph位于运动图像的中心且背景移动的同时发生变化的好像与跑步者ph并走的运动图像的例。
如图1所示,被摄体追踪运动图像生成系统S由摄像控制装置1和多个摄像装置2A至2N构成。
摄像控制装置1构成为可与各摄像装置2A至2N互相进行通信。
在摄像控制装置1中,使用构成从各摄像装置2A至2N发送的摄影运动图像中提取出的被摄体追踪运动图像的帧图像(以下称为“构成帧图像”),生成被摄体追踪运动图像的数据。
此外,摄像装置2A至2N与跑步者ph的移动路径MD并行,成为互不相同的拍摄范围,被配置成视角的一部分重叠。详细而言,摄像装置2A被配置在例如在跑步者ph未跑步的开始位置处跑步者ph来到视角的中心的位置上。其他摄像装置2B至摄像装置2N在移动路径MD中被配置在能够覆盖跑步者ph偏离了各摄像装置2B至2N的视角的中心位置时相邻的摄像装置2彼此将跑步者ph作为中心位置的视角的位置上。在不特别进行说明时,将摄像装置2A至2N仅称为摄像装置2。
在摄像装置2A至2N中,通过跑步者ph的移动或用户的拍摄开始的指示操作开始拍摄,从各摄像装置2A至2N拍摄到的摄影运动图像中获取构成帧图像。
在被摄体追踪运动图像生成系统S中,按拍摄时间顺序以时间序列连接构成帧图像,生成被摄体追踪运动图像的数据。
由此,在被摄体追踪运动图像生成系统S中,具有能够始终获取在运动图像的中央作为特定被摄体的移动的物体以规定的尺寸存在的被摄体追踪运动图像的功能。由此,用户能够以与作为拍摄对象的跑步者ph并走的感觉来欣赏运动图像。
图2是表示构成这种被摄体追踪运动图像生成系统S的摄像控制装置1及摄像装置2的硬件结构的框图。
摄像控制装置1及摄像装置2例如由数码相机构成。
在本实施方式中,摄像控制装置1作为摄像装置2的主设备定位,摄像装置2作为摄像控制装置1的附属设备定位。此外,摄像控制装置1为了进行说明而设置成了具备拍摄功能的构成,但是也可以是不具备拍摄功能的构成,只要至少具有与摄像装置2的通信功能及对从摄像装置2获取到的图像进行处理的功能即可。
摄像控制装置1及摄像装置2具备CPU(Central Processing Unit)11、ROM(ReadOnly Memory)12、RAM(Random Access Memory)13、总线14、输入输出接口15、摄像部16、位置传感器17、输入部18、输出部19、存储部20、通信部21和驱动器22。
CPU11根据记录在ROM12中的程序或从存储部20下载到RAM13中的程序执行各种处理。
在RAM13中还可适当存储使CPU11执行各种的处理时所需的数据等。
CPU11、ROM12及RAM13经由总线14而彼此被连接。该总线14还与输入输出接口15连接。输入输出接口15与摄像部16、位置传感器17、输入部18、输出部19、存储部20、通信部21及驱动器22连接。
虽然未图示,但是摄像部16具备光学透镜部和图像传感器。
光学透镜部为了拍摄被摄体而由聚光的透镜、例如聚焦透镜和变焦透镜等构成。
聚焦透镜是在图像传感器的受光面使被摄体像成像的透镜。变焦透镜是在一定范围内自由地改变焦点距离的透镜。
在光学透镜部中还根据需要而设置调整焦点、曝光、白平衡等设定参数的外围电路。
图像传感器由光电变换元件、AFE(Analog Front End)等构成。
光电变换元件例如由CMOS(Complementary Metal Oxide Semiconductor)型光电变换元件等构成。从光学透镜部向光电变换元件入射被摄体像。因此,光电变换元件对被摄体像进行光电变换(拍摄)而在一定时间内蓄积图像信号,并将所蓄积的图像信号作为模拟信号而依次提供给AFE。
AFE对该模拟图像信号执行A/D(Analog/Digital)变换处理等各种信号处理。通过各种信号处理,生成数字信号,作为摄像部16的输出信号来输出。
以下,将这种摄像部16的输出信号称为“摄像图像的数据”。摄像图像的数据适当地被提供给CPU11或未图示的图像处理部等。
此外,摄像部16将摄像图像作为构成运动图像的帧图像来输出。结果,在摄像控制装置1及摄像装置2中,按拍摄时间顺序以时间序列连接帧图像,获取运动图像。
位置传感器17利用GPS(Global Positioning System)等,为了获取要拍摄的位置、方向、视角等拍摄范围的信息而检测装置的位置。从位置传感器17获取了位置的信息的装置根据与装置相关的数据确定视角的范围。
输入部18由各种按键等构成,根据用户的指示操作而输入各种信息。
输出部19由显示器和扬声器等构成,输出图像和声音。
存储部20由硬盘或者DRAM(Dynamic Random Access Memory)等构成,存储各种图像的数据。
通信部21控制经由包括因特网在内的网络而在与其他装置(未图示)之间进行的通信。
驱动器22中适当地安装有由磁盘、光盘、光磁盘或者半导体存储器等形成的可移动介质31。通过驱动器22从可移动介质31读出的程序根据需要被安装到存储部20。此外,可移动介质31还能够与存储部20同样地存储在存储部20中存储着的图像的数据等各种数据。
接着,说明这种摄像控制装置1的功能结构中用于执行被摄体追踪运动图像生成处理的功能结构。
“被摄体追踪运动图像生成处理”是如下的处理,即:在多个摄像装置2中,拍摄包括作为移动的拍摄对象的特定被摄体在内的摄影运动图像,基于构成该摄影运动图像的帧图像,获取构成帧图像,按拍摄时间顺序以时间序列连接该获取到的构成帧图像,从而生成被摄体追踪运动图像。
在本例中,摄像装置2构成为,在拍摄到了成为拍摄对象的特定被摄体位于视角的中央的状态时,从正在进行该特定被摄体的拍摄的1台摄像装置2发送相应的帧图像。此外,构成为,在拍摄到了成为拍摄对象的特定被摄体并不在视角的中央的状态(面向中央的状态或远离了中央的状态)时,从正在进行该特定被摄体的拍摄的相邻的2台摄像装置2发送帧图像。即,摄像装置2被配置成,在任一个摄像装置2中特定被摄体都位于视角的中央的情况下,只有1台摄像装置2反映特定被摄体。此外,摄像装置2被配置成,在特定被摄体位于任一个摄像装置2中偏离了视角的中央的位置的情况下,在中央附近捕捉特定被摄体的摄像装置2和位于偏离的方向上的摄像装置2这2台反映特定被摄体。
图3是表示这种摄像控制装置1及摄像装置2的功能结构中用于执行被摄体追踪运动图像生成处理的功能结构的功能框图。另外,以下,在硬件上区分摄像控制装置1和摄像装置2时,在表示摄像控制装置1的硬件时在其符号上附加“-1”,在表示摄像装置2的硬件时在其符号上附加“-2”。
在执行被摄体追踪运动图像生成处理的情况下,在摄像控制装置1的CPU11-1中,摄影状况取得部51、图像取得部52、图像加工部53和运动图像生成部54工作。
此外,在摄像控制装置1的存储部20-1的一个区域中设置图像存储部71。
在图像存储部71中存储摄像图像等各种图像数据、摄影运动图像或被摄体追踪运动图像等各种运动图像数据。
摄影状况取得部51从各摄像装置2经由通信部21-1获取当前的特定被摄体的摄影状况。即,摄影状况取得部51获取特定被摄体存在的旨意的通知,作为与在各摄像装置2中成为拍摄对象的特定被摄体当前是否存在于视角内的摄影状况相关的信息。
此外,摄影状况取得部51从获取到的表示特定被摄体存在的旨意的通知中对正在拍摄特定被摄体的摄像装置2的数量进行计数。
图像取得部52经由通信部21-1而获取由各摄像装置2拍摄到的摄影运动图像的相应的帧图像作为摄影图像。图像取得部52在图像存储部71中存储获取到的摄影图像。
图像加工部53进行如下加工,即:从图像取得部52获取到的摄影图像中切出规定尺寸的部分图像区域即被摄体包含区域(以下简单称为“图像区域”),以使特定被摄体位于中央。其结果,图像加工部53生成构成被摄体追踪运动图像的构成帧图像。
在此,详细说明基于图像加工部53中的切出加工的构成帧图像的生成的详细情况。
在帧图像中特定被摄体以规定尺寸位于中央的情况下,直接通过切出规定尺寸的图像区域的切出加工来生成构成帧图像。
相对于此,在特定被摄体不位于帧图像的中央、或无法获得特定被摄体以规定尺寸位于中央的图像时,为了从其他摄像装置2拍摄到的多个帧图像互相补充不足部分,从各帧图像中切出对应的图像区域,之后拼接所切出的图像(以下称为“切出图像”),从而生成1张构成帧图像。此外,对从其他摄像装置2拍摄到的多个帧图像中互相补充不足部分的帧图像进行合成,从以特定被摄体在规定尺寸内位于中央的方式进行了合成的图像(以下称为“合成图像”)中切出相应的图像区域,从而生成1张构成帧图像。
即,构成帧图像是进行从图像中切出规定的图像区域后合成各图像、或者合成各图像后切出相应的图像区域的切出加工来生成的。
图4是表示基于切出加工的构成帧图像的生成例的示意图。
具体而言,在图4的例中,说明在第1帧图像中直接以规定尺寸切出时无法生成构成帧图像的情况。
如图4(a)的第1例所示,在第1帧图像p1中,作为特定被摄体的跑步者ph位于右端,无法切出作为特定被摄体的跑步者ph位于中央的规定尺寸的图像区域。因此,使用由远离了中央的一侧的摄像装置2获取的第2帧图像p2。在第2帧图像p2中,作为特定被摄体的跑步者ph位于图像的左端,包括作为特定被摄体的跑步者ph的附近区域与第1帧图像p1重复。
在第1例中,生成将第1帧图像p1和第2帧图像p2重复的区域(图中是用阴影表示的区域)相重叠而合成的图像p3。然后,在第1例中,以规定尺寸切出作为特定被摄体的跑步者ph位于图像中央的图像区域,生成构成帧图像p4。
相对于此,在图4(b)的第2例中,不同于第1例,首先,从第1帧图像p1切出包括作为特定被摄体的跑步者ph的图像区域、且包括了以作为特定被摄体的跑步者ph为中心成为规定尺寸的一般宽度的区域与第2帧图像p2重复的区域(图中用阴影表示的区域)的图像区域,由此生成第1切出图像p5-1。在第2帧图像p2中,也与第1帧图像p1同样地,切出包括作为特定被摄体的跑步者ph的图像区域、且包括以作为特定被摄体的跑步者ph为中心变成规定尺寸的一般宽度的图像区域与第1帧图像p1重复的区域(图中用阴影表示的区域)的图像区域,由此生成第2切出图像p5-2。然后,在重复第1切出图像p5-1和第2切出图像p5-2的区域中进行合成,生成构成帧图像p4。
另外,在本实施方式中,通过第1例的方法来生成构成帧图像p4。
返回图3,运动图像生成部54连接由图像加工部53生成的构成帧图像来生成被摄体追踪运动图像。即,运动图像生成部54按时间序列连接依次获取且进行切出加工而生成的构成帧图像,从而生成被摄体追踪运动图像。
运动图像生成部54在图像存储部71中存储所生成的被摄体追踪运动图像。
此外,在执行被摄体追踪运动图像生成处理的情况下,在摄像装置2的CPU11-2中,摄像控制部91、被摄体检测部92和通信控制部93工作。
摄像控制部91控制摄像部16-2,以进行摄影运动图像的拍摄。
被摄体检测部92从由摄像部16-2拍摄到的摄影运动图像中检测被摄体,判定成为拍摄对象的特定被摄体的有无(及位置、尺寸)。被摄体检测部92向通信控制部93输出检测结果。被摄体检测部92中的被摄体检测使用采用了图像识别的已知的被摄体检测技术。此外,对于特定被摄体而言,通过用户任意指定的特定被摄体的图像(特征信息)与检测出的被摄体的图像部分(特征信息)的图像匹配(图像的近似度判定)等来判定特定被摄体的有无(及位置、尺寸)。
通信控制部93基于从被摄体检测部92输出的检测结果,在特定被摄体存在于视角内的情况下,经由通信部21-2向摄像控制装置1发送特定被摄体存在的旨意的通知。
此外,通信控制部93将判定为特定被摄体存在于视角内时的摄影运动图像的帧图像作为摄影图像,经由通信部21-2而发送给摄像控制装置1。
图5是说明具有图3的功能结构的图2的摄像控制装置1所执行的被摄体追踪运动图像生成处理的流程的流程图。
被摄体追踪运动图像生成处理通过用户对输入部18-1进行的被摄体追踪运动图像生成处理开始的操作而开始。
在步骤S11中,摄影状况取得部51从各摄像装置2获取当前的特定被摄体的摄影状况。即,摄影状况取得部51从各摄像装置2获取特定被摄体存在于摄影帧内的旨意的通知。
在步骤S12中,摄影状况取得部51对正在拍摄特定被摄体(特定被摄体存在于摄影帧内)的摄像装置2的数量进行计数。
在正在拍摄特定被摄体的摄像装置2为1台的情况下,在步骤S12中判定为“1台”,处理进入步骤S13。
在正在拍摄特定被摄体的摄像装置2为2台的情况下,在步骤S12中判定为“2台”,处理进入步骤S15。步骤S15以后的处理将后述。
在不存在正在拍摄特定被摄体的摄像装置2的情况下,在步骤S12中判定为“0台”,处理进入步骤S20。
在步骤S13中,图像取得部52从正在拍摄特定被摄体的该1台摄像装置2中获取当前的摄影图像。
在步骤S14中,图像加工部53从获取到的摄影图像中切出以特定被摄体为中心的规定尺寸的图像区域,生成构成帧图像。然后,处理进入步骤S18。步骤S18以后的处理将后述。
在步骤S15中,图像取得部52从正在拍摄特定被摄体的该2台摄像装置2中获取当前的摄影图像。
在步骤S16中,图像加工部53对2个摄影图像的位置进行对位来进行合成,生成合成图像。
在步骤S17中,图像加工部53从所生成的合成图像中切出以特定被摄体为中心的规定尺寸的图像区域,生成构成帧图像。
在步骤S18中,运动图像生成部54在制作中的运动图像的末尾连接新切出的构成帧图像,生成被摄体追踪运动图像。即,运动图像生成部54依次连接构成帧,生成被摄体追踪运动图像。在存在新切出的构成帧图像时,通过将其连接在运动图像的末尾,从而生成被摄体追踪运动图像。在图像存储部71中存储所生成的被摄体追踪运动图像的数据。
在步骤S19中,运动图像生成部54根据被摄体追踪运动图像的数据的帧频而待机至应生成下一个帧的时间。然后,处理返回到步骤S11。
在步骤S20中,CPU11-1判定是否已结束。
在还未结束的情况下,在步骤S20中判定为“否”,处理返回步骤S11。
在已结束的情况下,在步骤S20中判定为“是”,结束摄像控制装置1中的被摄体追踪运动图像生成处理。
图6是说明具有图3的功能结构的图2的摄像装置2所执行的被摄体追踪运动图像生成处理的流程的流程图。
被摄体追踪运动图像生成处理通过用户对输入部18-2进行的被摄体追踪运动图像生成处理开始的操作而开始。
通过开始被摄体追踪运动图像生成处理,从而摄像控制部91控制摄像部16-2,以使开始进行拍摄。
在步骤S41中,被摄体检测部92检测摄影帧内的被摄体。
在步骤S42中,被摄体检测部92判定是否存在成为拍摄对象的特定被摄体。
在不存在特定被摄体的情况下,在步骤S42中判定为“否”,处理进入步骤S45。步骤S45的处理将后述。
在存在特定被摄体的情况下,在步骤S42中判定为“是”,处理进入步骤S43。
步骤S43中,通信控制部93经由通信部21-2向摄像控制装置1通知存在成为拍摄对象的特定被摄体的旨意。
在步骤S44中,通信控制部93将与判定为存在成为拍摄对象的特定被摄体的时期相对应的摄影运动图像的帧图像作为摄影图像而经由通信部21-2发送给摄像控制装置1。
在步骤S45中,CPU11-2判定是否结束。
在还未结束的情况下,在步骤S45中判定为“否”,处理返回步骤S41。
在已结束的情况下,在步骤S45中判定为“是”,结束摄像装置2中的被摄体追踪运动图像生成处理。
<第2实施方式>
在第1实施方式中,构成为,摄像装置2A至2N始终进行拍摄,专用摄像控制装置1依次获取从摄像装置2A至2N发送的摄像图像并进行切换,对获取到的摄影图像进行切出加工后进行连接,由此生成了被摄体追踪运动图像。
相对于此,在本实施方式中,摄像装置2A至2N仅在所需(指示的)时刻进行拍摄,专用的摄像控制装置1依次对摄像装置2A至2N的拍摄进行切换的同时进行指示,获取由摄像装置2生成的切出图像后进行连接,由此生成被摄体追踪运动图像。此外,在本实施方式中构成为,进行摄像装置2中的拍摄时,摄像控制装置1弄清楚不需要进行拍摄的时期,依次切换仅对被摄体追踪运动图像的生成有帮助的摄像装置2来进行拍摄。
在第2实施方式的说明中,由于被摄体追踪运动图像生成系统S的系统结构、以及摄像控制装置1及摄像装置2的硬件结构与第1实施方式相同,因此省略说明。此外,对其他与第1实施方式相同的构成也省略说明。
图7是表示图2的摄像控制装置1及摄像装置2的功能结构中用于执行第2实施方式的被摄体追踪运动图像生成处理的功能结构的功能框图。
在执行第2实施方式的被摄体追踪运动图像生成处理的情况下,在摄像控制装置1的CPU11-1中,拍摄指示部55、摄影状况取得部51、图像取得部52、图像判定部56、图像加工部53和运动图像生成部54工作。
此外,在存储部20-1的一个区域中设置图像存储部71。
拍摄指示部55经由通信部21-1对各摄像装置2进行拍摄的开始或结束的指示。拍摄指示部55在进行拍摄的开始或结束的指示时,还包括拍摄条件。
图像判定部56判定由图像取得部52获取到的切出图像是否包括以特定被摄体为中心的规定尺寸的所有区域。
图像加工部53对从各摄像装置2获取到的切出图像进行对位来进行合成,由此生成构成帧图像。在本例中,图像的切出由各摄像装置2进行,因此图像加工部53仅进行合成,即仅进行合成图像的生成。另外,图像加工部53将包括以特定被摄体为中心的规定尺寸的全部图像区域那样的不需要进行合成的切出图像直接作为构成帧图像来进行处理。
此外,在执行第2实施方式中的被摄体追踪运动图像生成处理的情况下,在摄像装置2的CPU11-2中,摄像控制部91、被摄体检测部92、图像加工部94和通信控制部93工作。
摄像控制部91基于来自摄像控制装置1的拍摄开始/结束的指示,控制摄像部16-2,以使开始/结束拍摄。
图像加工部94将由摄像部16-2拍摄到的构成摄影运动图像的帧图像作为摄影图像来获取,针对该摄影图像,切出以成为拍摄对象的特定被摄体为中心的规定尺寸的图像区域,从而生成切出图像。
通信控制部93经由通信部21-2获取来自摄像控制装置1的拍摄开始/结束的指示,并将其输出给摄像控制部91。
此外,通信控制部93经由通信部21-2,向摄像控制装置1发送由图像加工部94生成的切出图像。
图8是说明具有图7的功能结构的图2的摄像控制装置1所执行的第2实施方式的被摄体追踪运动图像生成处理的流程的流程图。
被摄体追踪运动图像生成处理通过用户对输入部18-1进行的被摄体追踪运动图像生成处理开始的操作而开始。
在步骤S61中,拍摄指示部55首先确定拍摄特定被摄体的当前摄像装置2,并指示拍摄开始。
在步骤S62中,摄影状况取得部51从当前摄像装置2获取当前的特定被摄体的摄影状况。
在步骤S63中,摄影状况取得部51判定是否正在拍摄特定被摄体。
在并未正在拍摄特定被摄体的情况下,在步骤S63中判定为“否”,处于待机状态。
在正在拍摄特定被摄体的情况下,在步骤S63中判定为“是”,处理进入步骤S64。
在步骤S64中,图像取得部52从当前摄像装置2获取切出图像。
在步骤S65中,图像判定部56判定所获取的切出图像是否包括以特定被摄体为中心的规定尺寸的全部区域。
在所获取的切出图像包括以特定被摄体为中心的规定尺寸的全部图像区域时,在步骤S65中判定为“是”,处理进入步骤S71。步骤S71以后的处理将后述。
在所获取的切出图像不包括以特定被摄体为中心的规定尺寸的全部图像区域时,在步骤S65中判定为“否”,处理进入步骤S66。
在步骤S66中,拍摄指示部55确定当前摄像装置2周边的摄像装置2(以下称为“后续摄像装置2”),指示拍摄开始。此时,拍摄指示部55还包括当前摄像装置2的拍摄条件。
在步骤S67中,图像取得部52从后续摄像装置2获取切出图像。
在步骤S68中,图像判定部56判定所获取的切出图像是否包括以特定被摄体为中心的规定尺寸的全部图像区域。
在所获取的切出图像包括以特定被摄体为中心的规定尺寸的全部图像区域时,在步骤S68中判定为“是”,处理进入步骤S69。
在步骤S69中,拍摄指示部55向当前摄像装置2指示拍摄结束。然后,处理进入步骤S71。
相对于此,在所获取的切出图像不包括以特定被摄体为中心的规定尺寸的全部图像区域时,在步骤S68中判定为“否”,处理进入步骤S70。
在步骤S70中,图像加工部53对当前摄像装置2和后续摄像装置2的切出图像的位置进行对位来进行合成,生成构成帧图像。然后,处理进入步骤S71。
在步骤S71中,运动图像生成部54在制作中的运动图像数据的末尾连接新获取的切出图像,生成被摄体追踪运动图像。在图像存储部71中存储所生成的被摄体追踪运动图像。
在步骤S72中,运动图像生成部54根据被摄体追踪运动图像的数据的帧频而待机至应生成下一个帧的时间。
图9是说明具有图7的功能结构的图2的摄像装置2所执行的第2实施方式中的被摄体追踪运动图像生成处理的流程的流程图。
在步骤S91中,通信控制部93判断是否指示了拍摄开始。
在未指示拍摄开始的情况下,在步骤S91中判定为“否”,成为待机状态。
在指示了拍摄开始的情况下,在步骤S91中判定为“是”,处理进入步骤S92。
在步骤S92中,摄像控制部91控制摄像部16,以开始拍摄。
在步骤S93中,被摄体检测部92检测摄影帧内的被摄体。
在步骤S94中,被摄体检测部92判定是否存在特定被摄体。
在不存在特定被摄体的情况下,在步骤S94中判定为“否”,成为待机状态。
在存在特定被摄体的情况下,在步骤S94中判定为“是”,处理进入步骤S95。
在步骤S95中,通信控制部93通知存在特定被摄体的旨意。
在步骤S96中,图像加工部94从当前的摄影图像切出以特定被摄体为中心的规定尺寸的图像区域,生成切出图像。
在步骤S97中,通信控制部93发送所生成的切出图像。
在步骤S98中,通信控制部93判定是否指示了拍摄结束。
在未指示拍摄结束的情况下,在步骤S98中判定为“否”,处理返回步骤S93。
在指示了拍摄结束的情况下,在步骤S98中判定为“是”,处理进入步骤S99。
在步骤S99中,摄像控制部91控制摄像部16,以结束拍摄。然后,结束摄像装置2中的被摄体追踪运动图像生成处理。
如以上那样构成的被摄体追踪运动图像生成系统S具备摄像部16、图像加工部53和运动图像生成部54。
图像取得部52获取通过被配置成拍摄范围不同的多个摄像部16连续进行拍摄而得到的多个运动图像。
被摄体检测部92在由图像取得部52获取的各运动图像内,通过图像识别来检测任意指定的被摄体。
切出控制部(摄影状况取得部51和图像加工部53)对应于连续拍摄的各时刻,在由图像取得部52获取的多个运动图像之中,选择由被摄体检测部92检测到的所述被摄体以规定位置或规定尺寸被包含的包括作为部分图像区域的被摄体包含区域的运动图像,控制从该选择出的运动图像中切出所述被摄体包含区域内的图像的选择性切出处理的执行。
运动图像生成部54按拍摄时间的顺序连接通过切出控制部的控制与连续拍摄中的各时刻对应地选择性切出的多个所述图像,由此生成1个运动图像。
由此,在被摄体追踪运动图像生成系统S中,从由多个摄像部16拍摄到的图像中,利用被摄体包含区域内的图像,生成将运动图像作为要构成的帧图像的运动图像。
因此,在被摄体追踪运动图像生成系统S中,与特定被摄体之间的距离在规定位置处恒定或是规定尺寸,即使实际不使追踪了看上去好像其他被摄体移动的特定的被摄体这样的被摄体追踪运动图像追踪特定的被摄体来进行拍摄,也能够生成运动图像。因此,在被摄体追踪运动图像生成系统S中,能够生成使移动的被摄体的状态(运动图像内的位置和尺寸等)一致的容易观察的运动图像数据。
此外,被摄体检测部92实际上在成为被摄体包含区域的切出对象的运动图像内通过图像识别来判定用户任意指定的特定被摄体的有无(及位置、尺寸),因此即使在预先并没有决定移动的特定被摄体的种类、大小、移动路径等的情况下,也能够针对各种被摄体、各种移动(例如在上下有运动的移动等)灵活应对,能够生成连续拍摄了移动的被摄体的运动图像。
图像加工部53从选择出的运动图像中选择被摄体位于规定位置且以规定尺寸被包含的包括被摄体包含区域的运动图像,控制从该选择出的运动图像中切出该被摄体包含区域内的图像的选择性切出处理的执行。
由此,在被摄体追踪运动图像生成系统S中,能够生成以规定位置且规定尺寸被包含的被摄体追踪运动图像。
此外,图像加工部53控制选择性切出处理的执行,从选择出的运动图像中以被摄体位于中央的成为规定尺寸的方式切出被摄体包含区域内的图像。
由此,在被摄体追踪运动图像生成系统S中,能够生成被摄体始终位于中央的被摄体追踪运动图像。
此外,在被摄体追踪运动图像生成系统S中,多个摄像部16被配置成特定被摄体的移动路径上的拍摄范围的至少一部分互相重叠。
图像加工部53进行如下控制:在被摄体包含区域被包含在1个运动图像内的情况下,从该1个运动图像切出被摄体包含区域,在被摄体包含区域被连续地(またがつて)包含在多个运动图像中的情况下,从多个运动图像的每一个图像中切出被摄体包含区域的一部分来进行合成。
由此,在被摄体追踪运动图像生成系统S中,即使在无法通过由1个摄像部16拍摄到的摄影运动图像生成构成帧图像的情况下,也能够将多个由其他摄像部16拍摄到的摄影运动图像进行合成来生成构成帧图像。
因此,在被摄体追踪运动图像生成系统S中,能够可靠地生成被摄体追踪运动图像。
此外,图像加工部53进行如下控制:在正在由多个摄像部16连续拍摄移动的被摄体时执行选择性切出处理,在正在拍摄移动的被摄体的各时刻,逐次选择包括被摄体包含区域的运动图像数据,并且从该逐次选择的运动图像中切出被摄体包含区域内的图像。
由此,在被摄体追踪运动图像生成系统S中,由于从逐次选择的运动图像中逐次切出被摄体包含区域内的图像,因此能够实时地生成被摄体追踪运动图像。
此外,被摄体追踪运动图像生成系统S包括具备摄像部16的多个摄像装置2、和具备了图像取得部52、图像加工部53及运动图像生成部54的摄像控制装置1。
由此,在被摄体追踪运动图像生成系统S中,只要摄像装置2具备拍摄功能,则即使不具备特定的被摄体追踪运动图像生成的功能,也能够生成被摄体追踪运动图像。
<第3实施方式>
在第2实施方式中,专用的摄像控制装置依次切换摄像装置的拍摄,切出从摄像装置获取到的摄像图像后进行连接,从而生成了运动图像。
相对于此,在本实施方式中构成为,不使用专用的摄像控制装置,而使各摄像装置相互进行通信来决定进行拍摄的摄像装置,依次切换仅对运动图像的生成有帮助的摄像装置来进行拍摄。
此外,在本实施方式中,由进行了拍摄的摄像装置进行切出处理,并将其传输给进行运动图像的显示的设备(显示装置),通过显示装置依次显示所获取的切出的摄像图像,从而再生运动图像。
在第3实施方式的说明中,由于摄像控制装置及摄影装置的硬件结构与第1实施方式相同,因此省略说明。此外,对其他与第1实施方式相同的构成也省略说明。
图10是表示第3实施方式中的被摄体追踪运动图像生成系统S的系统结构的系统结构图。
在第3实施方式中的被摄体追踪运动图像生成系统S中,如图10所示,具备可经由网络n互相进行通信的多个摄像装置2A至2N、和可经由网络n与摄像装置2进行通信的显示装置3。
在摄像装置2中,根据拍摄到的摄影运动图像对帧图像进行切出加工,生成特定被摄体位于中心的构成帧图像。在摄像装置2中,向显示装置3发送所生成的帧图像。
在显示装置3中,基于从摄像装置2发送的构成帧图像,进行被摄体追踪运动图像的再生显示。
图11是表示图2的摄像装置2的功能结构中用于执行第3实施方式的被摄体追踪运动图像生成处理的功能结构的功能框图。
在执行第3实施方式中被摄体追踪运动图像生成处理时,在摄像装置2的CPU11中,拍摄范围信息取得部100、摄像装置确定部101、通信控制部102、摄像控制部103、被摄体检测部104、图像加工部105、移动速度判定部106、拍摄待机时间预测部107、延迟时间确定部108和拍摄指示部109工作。
在存储部20的一个区域内设置图像存储部120。
在图像存储部120中存储构成帧图像等各种图像的数据。
拍摄范围信息取得部100从位置传感器17获取自己拍摄的位置、方向、视角等信息(以下称为“拍摄范围信息”),经由通信部21获取由其他摄像装置2的位置传感器17获取到的其他摄像装置2的拍摄范围信息。
摄像装置确定部101基于由拍摄范围信息取得部100获取到的拍摄范围信息,确定后续摄像装置2。
通信控制部102判定经由通信部21从其他摄像装置2是否有拍摄开始的指示。
此外,通信控制部102向显示装置3发送由图像加工部105生成的构成帧图像。
摄像控制部103基于用户对输入部18进行的拍摄开始/结束操作或来自其他摄像装置2的拍摄开始/结束的指示,控制摄像部16,以开始/结束拍摄。
被摄体检测部104检测拍摄到的摄影运动图像所包含的被摄体。此外,被摄体检测部104判定检测到的特定被摄体中是否包含有拍摄对象。
图像加工部105从存在特定被摄体的当前的摄影图像中切出以特定被摄体为中心的规定尺寸的图像区域,生成构成帧图像。
移动速度判定部106判定特定被摄体的移动速度。具体而言,移动速度判定部106例如分析拍摄到的运动图像,根据各帧图像的差分来判定特定被摄体的移动速度。
拍摄待机时间预测部107计算出在后续摄像装置2中切出对被摄体追踪运动图像有帮助的图像区域为止的待机时间,即计算出直到后续摄像装置2的拍摄开始为止的待机时间(以下称为“拍摄开始待机时间”)。
此外,拍摄待机时间预测部107计算出当前摄像装置2无法切出对被摄体追踪运动图像有帮助的图像区域为止的待机时间,即计算出直到当前摄像装置2的拍摄结束为止的待机时间(以下称为“拍摄结束待机时间”)。
后续摄像装置2的拍摄开始待机时间例如根据从利用移动速度预测的特定被摄体的原位置到后续摄影装置2的拍摄范围中开始拍摄的开始端为止的到达时间来进行计算。
即,拍摄开始待机时间可计算为“后续摄像装置2的拍摄开始待机时间=从特定被摄体的原位置到后续摄像装置2的拍摄范围的开始端为止的距离/特定被摄体的移动速度”。
在此,例如,根据在摄像装置2中由位置传感器17获取到的位置信息与特定被摄体之间的距离,作为绝对位置而推测特定被摄体的原位置。此外,对于拍摄范围而言,例如,可根据在摄像装置2中从位置传感器17获取到的位置信息与根据特定被摄体的移动预定路线而确定的特定被摄体之间的距离算出开始端至结束端的范围的绝对位置。
另外,对于拍摄开始待机时间而言,可从当前摄像装置2的拍摄范围的结束端减去与后续摄像装置2之间的重叠部分来计算出。
当前摄像装置2的拍摄结束待机时间可根据从利用移动速度预测的特定被摄体的原位置到当前摄影装置的拍摄范围中开始拍摄的结束端为止的到达时间来计算。
即,拍摄结束待机时间可计算为“当前摄像装置2的拍摄结束待机时间=从特定被摄体的原位置到当前摄像装置2的拍摄范围的结束端为止的距离/特定被摄体的移动速度”。
延迟时间确定部108考虑与后续摄像装置2的通信、根据后续摄像装置2的性能等的拍摄指示到拍摄为止的动作时间,确定将拍摄切换到后续摄像装置2时所需的时间(以下称为“延迟时间”)。
通过在开始拍摄的时间上相加延迟时间并进行拍摄的指示,从而在接受了指示的摄像装置2中,设有用于进行拍摄的准备期间,因此能够进行设备的调整等且能够在稳定的状态下进行拍摄。
拍摄指示部109基于拍摄待机时间(拍摄结束待机时间及拍摄开始待机时间)和延迟时间,对后续摄像装置2进行拍摄开始的指示。此外,拍摄指示部109基于待机时间,对后续摄像装置2进行拍摄结束的指示。此外,拍摄指示部55在指示拍摄的开始或结束时,还包括拍摄条件。
另外,在本实施方式中,摄像装置2中,生成构成帧图像,发送给显示装置3,在显示装置3中,以时间序列表示构成帧图像来显示并输出被摄体追踪运动图像,但是并不限于此。在摄像装置2中,也可以生成被摄体追踪运动图像并发送给显示装置3,也可以以摄像图像、切出图像、合成图像等的状态发送给显示装置3并在显示装置3中进行切出加工来生成构成帧图像。
图12是说明具有图11的功能结构的图2的摄像装置2所执行的第3实施方式中的被摄体追踪运动图像生成处理的流程的流程图。
在步骤S111中,拍摄范围信息取得部100获取自身及其他摄像装置2拍摄的位置、方向、视角等拍摄范围信息。
在步骤S112中,摄像装置确定部101基于所获取的拍摄范围信息来确定后续摄像装置2。
在步骤S113中,通信控制部102判定从用户或其他摄像装置2是否指示了拍摄开始。
在从用户或其他摄像装置2未指示拍摄开始的情况下,在步骤S113中判定为“否”,处于待机状态。
在从用户或其他摄像装置2指示了拍摄开始的情况下,在步骤S113中判定为“是”,处理进入步骤S114。
在步骤S114中,摄像控制部103控制摄像部16,以开始拍摄。
在步骤S115中,被摄体检测部104检测摄影帧内的被摄体。
在步骤S116中,被摄体检测部104判定是否存在特定被摄体。
在不存在特定被摄体的情况下,在步骤S116中判定为“否”,处于待机状态。
在存在特定被摄体的情况下,在步骤S116中判定为“是”,处理进入步骤S117。
在步骤S117中,图像加工部105从当前的摄影图像中切出以特定被摄体为中心的规定尺寸的图像区域,生成构成帧图像。
在步骤S118中,通信控制部102向显示装置3传输构成帧图像。
在步骤S119中,移动速度判定部106判定被摄体的移动速度。
在步骤S120中,拍摄待机时间预测部107计算出后续摄像装置2的拍摄开始待机时间及当前摄像装置2的拍摄结束待机时间。
在步骤S121中,延迟时间确定部108确定将拍摄切换到后续摄像装置2时所需的延迟时间。
在步骤S122中,拍摄指示部109判定后续摄像装置2的拍摄开始待机时间与延迟时间是否相同(拍摄开始待机时间=延迟时间)。
在延迟时间短于后续摄像装置2的拍摄开始待机时间的情况下,在步骤S122中判定为“否”,处于待机状态。
在后续摄像装置2的拍摄开始待机时间与延迟时间相同的情况下,在步骤S122中判定为“是”,处理进入步骤S123。
在步骤S123中,拍摄指示部109向后续摄像装置2指示拍摄开始。拍摄指示部109与该拍摄开始的指示一起还指示拍摄条件等信息。
在步骤S124中,拍摄指示部109判定当前摄像装置2的拍摄结束待机时间是否为0(后续摄像装置2的拍摄结束待机时间=0)。
在后续摄像装置2的拍摄结束待机时间不为0的情况下,在步骤S124中判定为“否”,处理返回步骤S115。
在后续摄像装置2的拍摄结束待机时间为0的情况下,在步骤S124中判定为“是”,处理进入步骤S125。
在步骤S125中,拍摄指示部109对当前摄像装置2进行结束拍摄的指示。然后,结束被摄体追踪运动图像生成处理。
如以上那样构成的被摄体追踪运动图像生成系统S具备拍摄指示部55。
拍摄指示部55在被摄体移动中的各时刻,逐次选择对包括被摄体包含区域的运动图像进行拍摄的摄像部16。
图像加工部53从通过拍摄指示部55逐次选择的该摄像部16中逐次获取运动图像,从而执行选择性切出处理。
由此,在被摄体追踪运动图像生成系统S中,能够获取由合适的摄像部16拍摄到的运动图像。
具备:摄像控制部91,进行如下控制,即,在被摄体移动中的各时刻,逐次选择使包括被摄体包含区域的运动图像的拍摄开始或结束的摄影单元,通过该逐次选择出的摄影单元开始或结束运动图像的拍摄。
由此,在被摄体追踪运动图像生成系统S中,能够构成为不用进行不必要的拍摄。
另外,本发明并不限于上述的实施方式,能够达成本发明的目的的范围内的变形、改良等包含在本发明中。
此外,在上述的实施方式中,在所生成的被摄体追踪运动图像中,生成了特定被摄体始终在规定位置以规定尺寸被包含的运动图像,但是并不限于此。也可以是只有特定被摄体在运动图像内的位置始终处于规定位置,或者只有特定被摄体在运动图像内的尺寸始终为规定尺寸。
此外,在上述的实施方式中,在所生成的被摄体追踪运动图像中,生成了特定被摄体始终位于中央的视角的运动图像,但是并不限于此。也可以是如下的运动图像:通过被摄体追踪运动图像,位于恒定位置,例如根据靠近或远离特定被摄体等期望的效果来变更运动图像中的特定被摄体的位置。
此外,在上述的实施方式中,存在由不进行拍摄的摄像控制装置1和各摄像装置2构成的情况,但是并不限于此。
例如,也可以构成为,基于进行拍摄的摄像装置2的控制,使其他摄像装置2进行拍摄。即,被摄体追踪运动图像生成系统S也可以由主要的摄像装置2(主设备)和辅助的摄像装置2(附属设备)构成。
具体而言,在被摄体追踪运动图像生成系统S中,可具备拍摄指示单元,多个摄像装置2中的1个装置起到摄像控制装置的作用,该拍摄指示单元进行其他摄像装置2的选择和对其他摄像装置2的指示。即,可以构成为具备摄像部16的摄像装置2兼备摄像控制装置的功能。
由此,被摄体追踪运动图像生成系统S无需使用如摄像控制装置1这样控制拍摄的专用设备,仅通过摄像装置2就能够生成被摄体追踪运动图像。
此外,在上述的实施方式中,也可以构成为在摄像装置2侧进行切出加工的处理,也可以构成为在摄像控制装置1侧进行切出加工的处理。
此外,在上述的实施方式中,切出有助于运动图像的部分后进行加工来加以利用,但是并不限于此。例如,获取未反映成为拍摄对象的被摄体等的背景图像,并对成为拍摄对象的被摄体进行合成。通过使用这样加工的图像,例如能够生成未反映成为拍摄对象的被摄体以外的被摄体的运动图像。
具体而言,在被摄体追踪运动图像生成系统S中,例如,运动图像生成部54等运动图像生成单元通过选择性切出处理,将对应于各时刻而选择性切出的多个图像粘贴并合成到规定的静止图像的同时,按拍摄顺序连接而生成1个运动图像。
此外,在上述的实施方式中,进行了检测或预测成为拍摄对象的被摄体映入的情况来执行拍摄的控制,但是并不限于此。
例如,也可以不进行被摄体的检测等,而是通过拍摄被摄体的摄像装置的前和后的摄像装置进行拍摄。通过这样构成,无论是被摄体位于中央的状态下拍摄到的图像,还是在被摄体朝向中央的状态和被摄体远离了中央的状态下拍摄到的图像,都能进行切出加工。
图13是表示拍摄时刻的其他例的图。
拍摄时刻如图13的例所示,在拍摄开始时刻,被摄体要么在中央要么面向远离中央的方向,因此能够通过由摄像装置2A和摄像装置2B拍摄到的图像生成切出图像。
此外,在通过摄像装置2A的后续摄像装置2B拍摄了被摄体的情况下,通过摄像装置2A、摄像装置2B、摄像装置2C这3台摄像装置进行拍摄。在通过摄像装置2B进行拍摄的情况下,被摄体有朝向中央的状态、位于中央的状态、和远离中央的状态,因此能够通过由摄像装置2A、摄像装置2B和摄像装置2C拍摄到的图像生成切出图像。即使在通过摄像装置2C拍摄了被摄体的情况下也能与摄像装置2B同样地,通过由摄像装置2C前后的摄像装置2B和摄像装置2D拍摄到的图像生成切出图像。
此外,在上述的实施方式中,对包括特定被摄体的规定区域设置成了进行切出的图像区域,但是并不限于此。例如,也可以将与特定被摄体的形状对应的区域、即特定被摄体的区域设为进行切出的图像区域。
具体而言,图像加工部53等切出单元也可以构成为,仅切出使与被摄体的形状一致的形状的图像区域与被摄体的形状一致的区域。
此外,在上述的实施方式中,根据摄影运动图像生成了构成帧图像,但是并不限于此,例如也可以使用在规定时刻拍摄到的摄像图像来生成构成帧图像。
此外,在上述的实施方式中,从各摄像装置2向进行运动图像的生成的装置发送了摄影图像或构成帧图像,但是并不限于此,也可以发送摄影运动图像后根据接收到的摄影图像生成构成帧图像。
此外,在上述的实施方式中,通过多个摄像装置2拍摄了摄影运动图像,但是并不限于此,也可以在1个装置中具备多个拍摄单元,还可以基于从拍摄单元获取到的图像来生成被摄体追踪运动图像。
此外,在上述的实施方式中,以数码相机为例说明了应用本发明的摄像装置2,但是并不特别限于此。
例如,本发明可普遍适用于具有被摄体追踪运动图像生成处理功能的电子设备。具体而言,例如,本发明可应用于笔记本型个人计算机、打印机、电视接收机、摄影机、便携式导航装置、移动电话、智能手机、便携式游戏机等。
上述的一系列处理可通过硬件来执行,也可以通过软件来执行。
换言之,图3、7、11的功能结构只是例示,并不特别限于此。即,只要摄像装置2具备可将上述的一系列处理作为整体而执行的功能即可,用于实现该功能而使用了什么样的功能模块并不特别限于图3、7、11的例。
此外,1个功能模块可只由硬件单体构成,也可以只由软件单体构成,还可以由硬件和软件的组合来构成。
在通过软件执行一系列处理的情况下,构成该软件的程序从网络或记录介质被下载至计算机等。
计算机只要是组装了专用硬件的计算机即可。此外,计算机也可以是通过安装各种程序来执行各种功能的计算机,例如通用的个人计算机。
包括这种程序的记录介质不仅由为了向用户提供程序而与装置主体分开配置的图2的可移动介质31构成,还由在预先组装到装置主体的状态下提供给用户的记录介质等构成。可移动介质31例如由磁盘(包括软盘)、光盘或光磁盘等构成。光盘例如由CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital Versatile Disk)、Blu-ray Disc(蓝光光盘)(注册商标)等构成。光磁盘由MD(Mini-Disk)等构成。此外,在预先组装到装置主体的状态下提供给用户的记录介质例如由记录了程序的图2的ROM12、图2的存储部20所包含的硬盘等构成。
另外,在本说明书中,记述向记录介质记录的程序的步骤中,沿着其顺序按时间序列进行的处理当然还包括不按时间序列处理而是并列或者单独执行的处理。
此外,在本说明书中,系统的用语意味着由多个装置或多个单元等构成的整体装置。
Claims (20)
1.一种运动图像生成系统,具备:
图像取得部,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
被摄体检测部,通过图像识别,在由所述图像取得部获取的各运动图像内检测被任意指定的被摄体;
切出控制部,对应于连续拍摄中的各时刻,选择由所述图像取得部获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是由所述被摄体检测部检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成部,按拍摄时间的顺序,连接通过所述切出控制部的控制与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制部将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
2.根据权利要求1所述的运动图像生成系统,其中,
所述被摄体包含区域是由所述被摄体检测部检测的所述被摄体在中央以所述规定尺寸被包含的所述部分图像区域。
3.根据权利要求1所述的运动图像生成系统,其中,
所述多个摄像部被配置成所述被摄体的移动路径上的拍摄范围的至少一部分互相重叠,
所述切出控制部进行如下控制:在所述被摄体包含区域被包含在1个运动图像内的情况下,从1个运动图像切出所述被摄体包含区域,在所述被摄体包含区域被连续地包含在多个运动图像内的情况下,从多个运动图像的每一个运动图像中切出所述被摄体包含区域的一部分来进行合成。
4.根据权利要求1所述的运动图像生成系统,其中,
所述切出控制部进行控制以使在所述多个摄像部对移动的所述被摄体进行连续拍摄中执行所述切出处理,并进行控制以使在正在拍摄移动的所述被摄体的各时刻,逐次选择包括所述被摄体包含区域的运动图像,并且从逐次选择的运动图像中逐次切出所述被摄体包含区域内的图像。
5.根据权利要求4所述的运动图像生成系统,其中,
所述运动图像生成系统还具备选择部,该选择部在所述被摄体正在移动的各时刻,逐次选择对包括所述被摄体包含区域的运动图像进行拍摄的所述摄像部,
所述切出控制部进行控制以使从由所述选择部逐次选择的所述摄像部逐次获取运动图像并执行所述切出处理。
6.根据权利要求5所述的运动图像生成系统,其中,
所述运动图像生成系统还具备摄影控制部,该摄影控制部进行控制,以使在所述被摄体正在移动的各时刻,逐次选择使包括所述被摄体包含区域的运动图像的拍摄开始或结束的所述摄像部,并使逐次选择出的所述摄像部进行的运动图像的拍摄开始或结束。
7.根据权利要求1所述的运动图像生成系统,其中,
所述运动图像生成系统包括:具备所述摄像部的多个摄像装置;和具备所述图像取得部、所述被摄体检测部、所述切出控制部及所述运动图像生成部的摄像控制装置。
8.根据权利要求7所述的运动图像生成系统,其中,
所述摄像控制装置还具备:
决定部,基于正在拍摄所述被摄体的当前摄像装置的拍摄范围内的所述被摄体的移动状态、和从所述当前摄像装置交接了拍摄的后续摄像装置的拍摄范围,决定由所述后续摄像装置开始拍摄的开始时刻;和
拍摄指示部,对所述后续摄像装置进行指示,以使在由所述决定部决定的所述开始时刻开始拍摄。
9.根据权利要求8所述的运动图像生成系统,其中,
所述决定部基于正在拍摄所述被摄体的所述当前摄像装置的拍摄范围内的所述被摄体的移动状态、所述当前摄像装置的拍摄范围、和从所述当前摄像装置交接了拍摄的所述后续摄像装置的拍摄范围,决定结束所述当前摄像装置的拍摄的结束时刻、和由所述后续摄像装置开始拍摄的所述开始时刻,
所述拍摄指示部进行指示以使在由所述决定部决定的所述结束时刻结束所述当前摄像装置的拍摄,在由所述决定部决定的所述开始时刻开始所述后续摄像装置的拍摄。
10.根据权利要求9所述的运动图像生成系统,其中,
所述决定部以从所述开始时刻开始经过规定时间之后到来所述结束时刻的方式决定所述开始时刻和所述结束时刻。
11.根据权利要求8所述的运动图像生成系统,其中,
所述决定部基于所述被摄体的移动速度和从原位置到进入所述后续摄像装置的拍摄范围的到达位置为止的时间,决定所述开始时刻。
12.根据权利要求8所述的运动图像生成系统,其中,
所述运动图像生成系统还具备确定部,该确定部确定从所述当前摄像装置向所述后续摄像装置发送所述开始时刻的信息开始直到所述后续摄像装置能够开始拍摄的延迟时间,
所述拍摄指示部在相对于所述开始时刻早于所述延迟时间的时刻,发送所述开始时刻的信息来进行拍摄的指示。
13.根据权利要求12所述的运动图像生成系统,其中,
所述拍摄指示部向所述后续摄像装置发送使拍摄开始的指示信号,从而进行所述开始时刻的信息的发送,在相对于使所述后续摄像装置开始拍摄的时刻早于延迟时间的时刻发送所述指示信号。
14.根据权利要求8所述的运动图像生成系统,其中,
所述拍摄指示部在交接拍摄时,还发送所述当前摄像装置的拍摄条件也要交接的指示。
15.根据权利要求8所述的运动图像生成系统,其中,
在各所述摄像装置中每次拍摄所述被摄体时决定所述开始时刻。
16.根据权利要求7所述的运动图像生成系统,其中,
具备所述摄像部的所述多个摄像装置中的1个摄像装置成为所述摄像控制装置,且所述运动图像生成系统还具备进行其他摄像装置的选择和对所述其他摄像装置的指示的拍摄指示部。
17.根据权利要求1所述的运动图像生成系统,其中,
所述运动图像生成部对通过所述切出处理与各时刻对应地选择性切出的多个图像进行与规定的静止图像粘贴的合成,同时按拍摄顺序进行连接,从而生成1个运动图像。
18.根据权利要求1所述的运动图像生成系统,其中,
所述切出处理仅将与所述被摄体的形状一致的图像区域作为所述被摄体包含区域来切出。
19.一种运动图像生成方法,是运动图像生成系统中的运动图像生成方法,该运动图像生成方法的特征在于,包括:
取得处理,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
检测处理,通过图像识别,在通过所述取得处理获取的各运动图像内检测被任意指定的被摄体;
切出控制处理,对应于连续拍摄中的各时刻,选择通过所述取得处理获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是通过所述检测处理检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成处理,按拍摄时间的顺序,连接通过所述切出控制处理的控制而与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制处理将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
20.一种非易失性的记录介质,记录有使对运动图像生成系统进行控制的计算机实现如下功能的程序:
取得功能,获取通过被配置成拍摄范围不同的多个摄像部进行连续拍摄而得到的多个运动图像;
检测功能,通过图像识别,在通过所述取得功能获取的各运动图像内检测被任意指定的被摄体;
切出控制功能,对应于连续拍摄中的各时刻,选择通过所述取得功能获取的多个运动图像之中的、包括被摄体包含区域的运动图像,控制从选择出的运动图像切出所述被摄体包含区域内的图像的选择性切出处理的执行,所述被摄体包含区域是通过所述检测功能检测的所述被摄体在规定位置并且以包括所述被摄体的全部且在所述被摄体的周围设置规定的空白的规定尺寸被包含的部分图像区域;和
运动图像生成功能,按拍摄时间的顺序,连接通过所述切出控制功能的控制而与连续拍摄中的各时刻对应地选择性切出的多个图像,由此生成1个运动图像,
所述切出控制功能将与拍摄中的各时刻对应地切出的各图像设为所述被摄体的位置不发生变化的图像,使切出区域变化以使所述被摄体在图像内的位置不发生变化。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810016957.3A CN108055473A (zh) | 2013-09-03 | 2014-09-02 | 拍摄系统、拍摄方法以及记录介质 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013182303A JP5804007B2 (ja) | 2013-09-03 | 2013-09-03 | 動画生成システム、動画生成方法及びプログラム |
JP2013-182303 | 2013-09-03 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810016957.3A Division CN108055473A (zh) | 2013-09-03 | 2014-09-02 | 拍摄系统、拍摄方法以及记录介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104427260A CN104427260A (zh) | 2015-03-18 |
CN104427260B true CN104427260B (zh) | 2018-12-11 |
Family
ID=52583403
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410443249.XA Expired - Fee Related CN104427260B (zh) | 2013-09-03 | 2014-09-02 | 运动图像生成系统、运动图像生成方法以及记录介质 |
CN201810016957.3A Pending CN108055473A (zh) | 2013-09-03 | 2014-09-02 | 拍摄系统、拍摄方法以及记录介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810016957.3A Pending CN108055473A (zh) | 2013-09-03 | 2014-09-02 | 拍摄系统、拍摄方法以及记录介质 |
Country Status (3)
Country | Link |
---|---|
US (2) | US9876963B2 (zh) |
JP (1) | JP5804007B2 (zh) |
CN (2) | CN104427260B (zh) |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6500535B2 (ja) * | 2015-03-23 | 2019-04-17 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2016197795A (ja) * | 2015-04-03 | 2016-11-24 | 日立オートモティブシステムズ株式会社 | 撮像装置 |
DE102015107730B4 (de) * | 2015-05-18 | 2020-07-23 | Hmgeb Holding B.V. | Blisterband-Inspektionsvorrichtung |
JP6668002B2 (ja) * | 2015-05-29 | 2020-03-18 | 国立大学法人東京工業大学 | 動画生成装置、動画生成システム、および動画生成プログラム |
JP6454238B2 (ja) * | 2015-07-07 | 2019-01-16 | 日本電信電話株式会社 | 映像編集装置、映像編集方法及び映像編集プログラム |
JP2017062598A (ja) * | 2015-09-24 | 2017-03-30 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
KR101772957B1 (ko) * | 2016-02-24 | 2017-08-30 | 주식회사 날비컴퍼니 | 파노라마 촬영장치, 파노라마 영상 생성방법, 컴퓨터 판독가능 기록매체 및 컴퓨터 판독가능 기록매체에 저장된 컴퓨터 프로그램 |
EP3573339A4 (en) * | 2017-01-19 | 2020-08-05 | Sony Interactive Entertainment Inc. | IMAGE PROVIDING DEVICE |
CN109474787B (zh) * | 2018-12-28 | 2021-05-14 | 维沃移动通信有限公司 | 一种拍照方法、终端设备及存储介质 |
EP3920531A4 (en) * | 2019-01-30 | 2022-03-23 | Panasonic Intellectual Property Management Co., Ltd. | METHOD AND SYSTEM FOR MONITORING A HOUSING FOR FARM ANIMALS |
US10963841B2 (en) | 2019-03-27 | 2021-03-30 | On Time Staffing Inc. | Employment candidate empathy scoring system |
US10728443B1 (en) | 2019-03-27 | 2020-07-28 | On Time Staffing Inc. | Automatic camera angle switching to create combined audiovisual file |
TWI712519B (zh) * | 2019-08-26 | 2020-12-11 | 神達數位股份有限公司 | 協同的行車影像收集方法及系統 |
US11127232B2 (en) | 2019-11-26 | 2021-09-21 | On Time Staffing Inc. | Multi-camera, multi-sensor panel data extraction system and method |
US20230035765A1 (en) * | 2020-01-30 | 2023-02-02 | Sony Group Corporation | Control device, imaging system, and 3d model data generation method |
EP4109993A4 (en) * | 2020-03-31 | 2023-08-16 | Sony Group Corporation | INFORMATION PROCESSING DEVICE AND INFORMATION PROCESSING METHOD |
US11023735B1 (en) | 2020-04-02 | 2021-06-01 | On Time Staffing, Inc. | Automatic versioning of video presentations |
EP4030751A4 (en) * | 2020-07-27 | 2022-11-23 | Huawei Technologies Co., Ltd. | METHOD, DEVICE AND SYSTEM FOR VIDEO ASSEMBLY |
US11144882B1 (en) | 2020-09-18 | 2021-10-12 | On Time Staffing Inc. | Systems and methods for evaluating actions over a computer network and establishing live network connections |
CN113076881A (zh) * | 2021-04-07 | 2021-07-06 | 兴体(广州)智能科技有限公司 | 运动人体跟踪摄像方法及摄像系统 |
US11727040B2 (en) | 2021-08-06 | 2023-08-15 | On Time Staffing, Inc. | Monitoring third-party forum contributions to improve searching through time-to-live data assignments |
US11423071B1 (en) | 2021-08-31 | 2022-08-23 | On Time Staffing, Inc. | Candidate data ranking method using previously selected candidate data |
CN113938632B (zh) * | 2021-12-08 | 2023-09-22 | 深圳小湃科技有限公司 | 网络视频录像机级联方法、录像机及存储介质 |
CN114501115B (zh) * | 2022-02-12 | 2023-07-28 | 北京蜂巢世纪科技有限公司 | 针对球场录像的裁剪再加工方法、装置、设备及介质 |
WO2023171120A1 (ja) * | 2022-03-11 | 2023-09-14 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、およびプログラム |
US11907652B2 (en) | 2022-06-02 | 2024-02-20 | On Time Staffing, Inc. | User interface and systems for document creation |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101860674A (zh) * | 2009-02-13 | 2010-10-13 | 卡西欧计算机株式会社 | 拍摄装置、连拍速度的设定方法以及记录介质 |
CN102282857A (zh) * | 2010-03-19 | 2011-12-14 | 富士胶片株式会社 | 拍摄装置、方法以及程序及其使用的记录介质 |
CN102469259A (zh) * | 2010-11-01 | 2012-05-23 | 奥林巴斯映像株式会社 | 全景图像生成装置及全景图像生成方法 |
CN102685365A (zh) * | 2011-03-11 | 2012-09-19 | 索尼公司 | 图像合成装置、图像合成方法和图像合成程序 |
CN102972035A (zh) * | 2010-06-30 | 2013-03-13 | 富士胶片株式会社 | 立体全景图像合成装置、多眼成像装置和立体全景图像合成方法 |
CN103002216A (zh) * | 2011-09-13 | 2013-03-27 | 卡西欧计算机株式会社 | 合成图像的图像处理装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06325180A (ja) * | 1993-05-14 | 1994-11-25 | Matsushita Electric Ind Co Ltd | 移動体自動追跡装置 |
JP3365182B2 (ja) * | 1995-12-27 | 2003-01-08 | 三菱電機株式会社 | 映像監視装置 |
JP4536299B2 (ja) * | 2001-08-29 | 2010-09-01 | パナソニック株式会社 | イベント映像記録・再生システム、イベント管理装置、およびローカル記録装置 |
JP2004112153A (ja) * | 2002-09-17 | 2004-04-08 | Fujitsu Ltd | 映像処理システム |
JP4307050B2 (ja) | 2002-11-07 | 2009-08-05 | 富士通株式会社 | ハイライトシーンの抽出装置 |
JP4421863B2 (ja) | 2003-09-29 | 2010-02-24 | 富士フイルム株式会社 | 動画切替システム、動画切替方法、及びプログラム |
JP2005252803A (ja) | 2004-03-05 | 2005-09-15 | Seiko Epson Corp | 画像処理装置、画像処理方法、画像処理プログラムおよびそのプログラムを記録した記録媒体 |
JP4464360B2 (ja) * | 2006-03-27 | 2010-05-19 | 富士フイルム株式会社 | 監視装置、監視方法、及びプログラム |
EP2479991A3 (en) * | 2006-12-04 | 2014-01-08 | Lynx System Developers, Inc. | Autonomous systems and methods for still and moving picture production |
US8103134B2 (en) * | 2008-02-20 | 2012-01-24 | Samsung Electronics Co., Ltd. | Method and a handheld device for capturing motion |
US8531523B2 (en) * | 2009-12-08 | 2013-09-10 | Trueposition, Inc. | Multi-sensor location and identification |
GB201001421D0 (en) * | 2010-01-29 | 2010-03-17 | Hewlett Packard Development Co | Quantum key distribution method and apparatus |
JP2012004754A (ja) * | 2010-06-15 | 2012-01-05 | Panasonic Corp | カメラ切換装置、カメラ切換システム及びカメラ切換方法 |
JP2012099876A (ja) * | 2010-10-29 | 2012-05-24 | Sanyo Electric Co Ltd | 画像処理装置、撮像装置、画像処理方法、プログラム |
JP5930276B2 (ja) * | 2011-12-12 | 2016-06-08 | カシオ計算機株式会社 | 画像処理装置、画像処理方法、画像処理システム及びプログラム |
JP6267961B2 (ja) * | 2012-08-10 | 2018-01-24 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 映像提供方法および送信装置 |
CN103079061B (zh) * | 2013-01-30 | 2016-07-13 | 浙江宇视科技有限公司 | 一种视频跟踪处理装置以及视频链处理装置 |
US20150085111A1 (en) * | 2013-09-25 | 2015-03-26 | Symbol Technologies, Inc. | Identification using video analytics together with inertial sensor data |
-
2013
- 2013-09-03 JP JP2013182303A patent/JP5804007B2/ja not_active Expired - Fee Related
-
2014
- 2014-08-25 US US14/467,245 patent/US9876963B2/en not_active Expired - Fee Related
- 2014-09-02 CN CN201410443249.XA patent/CN104427260B/zh not_active Expired - Fee Related
- 2014-09-02 CN CN201810016957.3A patent/CN108055473A/zh active Pending
-
2017
- 2017-12-15 US US15/843,051 patent/US10536648B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101860674A (zh) * | 2009-02-13 | 2010-10-13 | 卡西欧计算机株式会社 | 拍摄装置、连拍速度的设定方法以及记录介质 |
CN102282857A (zh) * | 2010-03-19 | 2011-12-14 | 富士胶片株式会社 | 拍摄装置、方法以及程序及其使用的记录介质 |
CN102972035A (zh) * | 2010-06-30 | 2013-03-13 | 富士胶片株式会社 | 立体全景图像合成装置、多眼成像装置和立体全景图像合成方法 |
CN102469259A (zh) * | 2010-11-01 | 2012-05-23 | 奥林巴斯映像株式会社 | 全景图像生成装置及全景图像生成方法 |
CN102685365A (zh) * | 2011-03-11 | 2012-09-19 | 索尼公司 | 图像合成装置、图像合成方法和图像合成程序 |
CN103002216A (zh) * | 2011-09-13 | 2013-03-27 | 卡西欧计算机株式会社 | 合成图像的图像处理装置 |
Also Published As
Publication number | Publication date |
---|---|
US20180109737A1 (en) | 2018-04-19 |
US20150063775A1 (en) | 2015-03-05 |
JP5804007B2 (ja) | 2015-11-04 |
JP2015050695A (ja) | 2015-03-16 |
CN108055473A (zh) | 2018-05-18 |
CN104427260A (zh) | 2015-03-18 |
US10536648B2 (en) | 2020-01-14 |
US9876963B2 (en) | 2018-01-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104427260B (zh) | 运动图像生成系统、运动图像生成方法以及记录介质 | |
CN107087107B (zh) | 基于双摄像头的图像处理装置及方法 | |
US8890996B2 (en) | Imaging device, semiconductor integrated circuit and imaging method | |
CN100495190C (zh) | 自动聚焦装置以及自动聚焦控制方法 | |
EP1377042B1 (en) | Auto focusing apparatus and image inputting apparatus | |
CN103002211B (zh) | 摄影设备 | |
CN104205828A (zh) | 用于自动3d图像创建的方法和系统 | |
JP6824664B2 (ja) | 撮像装置及びその制御方法、プログラム | |
CN101621625A (zh) | 摄像设备及其控制方法 | |
CN110035203A (zh) | 图像处理设备及其控制方法 | |
CN103685925A (zh) | 摄像装置以及摄像处理方法 | |
CN106464853A (zh) | 图像处理设备和方法 | |
JP5843486B2 (ja) | 撮像装置およびその制御方法 | |
CN102196171A (zh) | 摄像控制装置、对象检测方法和程序 | |
JP5377768B2 (ja) | 画像処理方法及び装置 | |
CN103207441A (zh) | 自动聚焦装置及其控制方法 | |
CN102801910A (zh) | 摄像装置 | |
US20140307054A1 (en) | Auto focus method and auto focus apparatus | |
CN104205812B (zh) | 图像处理装置、图像处理方法 | |
CN107517345B (zh) | 拍摄预览方法及拍摄设备 | |
JP6624939B2 (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
CN105472237B (zh) | 摄像设备和摄像方法 | |
JP2014157425A (ja) | 撮像装置及びその制御方法 | |
US9247124B2 (en) | Imaging apparatus, semiconductor integrated circuit, and imaging method | |
CN110476413A (zh) | 摄像装置、摄像控制方法及程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181211 Termination date: 20210902 |