CN105359504A - 利用摄像机位置顺位的图像信息处理方法,设备和程序 - Google Patents
利用摄像机位置顺位的图像信息处理方法,设备和程序 Download PDFInfo
- Publication number
- CN105359504A CN105359504A CN201480037279.9A CN201480037279A CN105359504A CN 105359504 A CN105359504 A CN 105359504A CN 201480037279 A CN201480037279 A CN 201480037279A CN 105359504 A CN105359504 A CN 105359504A
- Authority
- CN
- China
- Prior art keywords
- photographic images
- cis
- image
- video camera
- diagram
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title description 5
- 230000010365 information processing Effects 0.000 title description 2
- 238000000034 method Methods 0.000 claims abstract description 152
- 230000008569 process Effects 0.000 claims description 108
- 230000015654 memory Effects 0.000 claims description 51
- 238000011282 treatment Methods 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 15
- 230000011218 segmentation Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 abstract description 54
- 230000037361 pathway Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 158
- 230000008707 rearrangement Effects 0.000 description 88
- 230000001360 synchronised effect Effects 0.000 description 30
- 238000005516 engineering process Methods 0.000 description 16
- 230000008901 benefit Effects 0.000 description 10
- 238000004321 preservation Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000010008 shearing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
- H04N5/2627—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect for providing spin image effect, 3D stop motion effect or temporal freeze effect
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/87—Regeneration of colour television signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/13—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
处理图像信息的方法包括访问与图像相关的位置信息,识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位,和按位置顺位的顺序,显示图像。根据被摄对象的移动,调整位置顺位。
Description
技术领域
本技术涉及图像处理设备,图像处理方法和程序,更具体地,涉及能够以用户可容易地处理的形式,提供由多个摄像机拍摄的多个图像的图像处理设备,图像处理方法和程序。
相关申请的引用
本申请要求2013年9月9日提交的日本专利申请JP2013-186305的优先权,该申请的整个内容通过引用包含于此。
背景技术
例如,提出了通过利用由多个摄像机拍摄的多个运动图像作为素材,编辑运动图像的技术(例如,参见PTL1)。
[引文列表]
[专利文献]
[PTL1]JP2012-004739A
发明内容
在编辑或观看利用多台摄像机拍摄的作为编辑用素材的多个运动图像时,在简单排列成行地显示多个运动图像(其再现画面,或者运动图像的最初图像的符号)的情况下,例如,在彼此靠近的位置拍摄的运动图像可能被排列成彼此远离,或者在彼此远离的位置拍摄的运动图像可能被排列成彼此靠近,这使得用户难以处理运动图像。
考虑到这样的情况,发明了本技术,本发明将以用户可容易地处理的形式,提供由多台摄像机拍摄的多个图像。
处理图像信息的方法包括访问与图像相关的位置信息,其中所述位置信息识别分别对应于各个图像的透视位置的位置,并包含所述位置之间的关系。所述方法还包括识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位(positionsequence),并按照位置顺位,处理图像,所述位置顺位可根据被摄对象的移动而被调整。具体地,所述路径包含围绕被摄对象的矩形或曲线形周界的至少一部分。另外,相对于被摄对象,确定各个图像的透视位置,各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
所述方法还包括按照位置顺位,利用时间分片合成图像,并按照位置顺位的顺序,逐行地显示各个图像。在显示图像之时,选择顶部图像,以变更图像的顺序,或者颠倒待显示的图像的顺序。
所述方法还包括按照位置顺位的顺序,在再现屏幕上依次再现各个图像。
为实现处理图像信息的方法而设计的设备包括处理器和存储器,所述存储器保存可由处理器执行,以进行所述方法的程序。
按照本技术的实施例,以用户可容易地处理的形式,提供由多台摄像机拍摄的多个图像。
另外,优点不一定局限于这里说明的优点,可以是未在本公开中说明的优点。
附图说明
图1是图解说明由多台摄像机拍摄的图像的观看的例子的示图。
图2是图解说明本技术适用于的按照实施例的图像处理设备的结构例子的方框图。
图3是图解说明图像处理设备进行的图像处理的例子的概况的示图。
图4是图解说明由摄像机位置关系获取单元31和位置顺位附加单元32进行的位置顺位附加处理的例子的流程图。
图5是图解说明在利用两台摄像机c#1和c#2拍摄两个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图6是图解说明在利用三台摄像机c#1、c#2和c#3拍摄三个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图7是图解说明在利用四台摄像机c#1、c#2、c#3和c#4拍摄四个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图8是图解说明位置顺位附加处理的其它例子的示图。
图9是图解说明由重排单元33进行的重排处理的第一例子的示图。
图10是图解说明由重排单元33进行的重排处理的第二例子的示图。
图11是图解说明由重排单元33进行的重排处理的第三例子的示图。
图12是图解说明由重排单元33进行的重排处理的第四例子的示图。
图13是图解说明由重排单元33进行的重排处理的第五例子的示图。
图14是图解说明由重排单元33进行的重排处理的例子的流程图。
图15是图解说明由逆重排单元34进行的逆重排处理的例子的示图。
图16是图解说明由逆重排单元34进行的逆重排处理的例子的流程图。
图17是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第一显示例子的示图。
图18是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第二显示例子的示图。
图19是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第三显示例子的示图。
图20是图解说明由摄像机位置关系获取单元31和拍摄状态图像生成单元35进行的拍摄状态图像生成处理的例子的流程图。
图21是图解说明由显示控制单元14和图像间除单元36进行的图像间除处理的例子的示图。
图22是图解说明由显示控制单元14和图像间除单元36进行的图像间除处理的例子的流程图。
图23是图解说明由再现对象设定单元37进行的再现对象设定处理的例子的示图。
图24是图解说明由再现对象设定单元37进行的再现对象设定处理的另一个例子的示图。
图25是图解说明由再现对象设定单元37进行的再现对象设定处理的例子的流程图。
图26是图解说明在环状连接群组的多个拍摄图像的情况下,无任何优势的情况的例子的示图。
图27是图解说明由位置顺位附加单元32进行环形连接判定处理的例子的流程图。
图28是图解说明环形连接判定处理的示图。
图29是图解说明环形连接判定处理的示图。
图30是图解说明本技术适用于的按照实施例的计算机的结构的例子的方框图。
具体实施方式
<利用多台摄像机拍摄的图像的观看>
图1是图解说明由多台摄像机拍摄的图像的观看的例子的示图。
如图1中图解所示,在足球场中,利用多台摄像机从各个拍摄位置,拍摄足球比赛。
这里,作为利用多台摄像机拍摄足球比赛的情况,例如,存在其中广播台为节目广播拍摄足球比赛的情况,可以考虑其中作为团体的多个观众通过利用手持的摄像机,或者穿戴可穿戴摄像机,拍摄足球比赛的情况等。
现在,假定通过使用任意方法,获得利用摄像机拍摄的图像(下面也称为拍摄图像),然后编辑和观看利用多台摄像机拍摄的多个拍摄图像。
在这种情况下,如图1中图解所示,通过简单排列成行地显示多个拍摄图像(其再现画面,或者运动图像的初始画面等的符号),尤其是在拍摄图像的数目较大的情况下,当用户注视特定的拍摄图像,并且希望观看在与所述特定拍摄图像的拍摄位置相近的拍摄位置拍摄的拍摄图像时,难以立即获得该拍摄图像被显示在的位置,从而用户难以处理图像。
从而,按照本技术的实施例,以用户可容易地处理的形式,提供由多台摄像机拍摄的多个拍摄图像。
<本技术适用于的按照实施例的图像处理设备>
图2是图解说明本技术适用于的按照实施例的图像处理设备的结构例子的方框图。
如图2中图解所示,图像处理设备包括:图像获取单元11;存储器12;时间同步单元13;显示控制单元14;显示单元15,图像排列控制单元16;再现单元17;操作单元18;和控制单元19。
图像获取单元11获得通过利用多台摄像机,拍摄预定的拍摄对象,例如足球比赛、特定人物等而得到的多个拍摄图像。
例如,利用多台摄像机拍摄的多个拍摄图像以预定格式的运动图像文件的形式,保存在预定服务器(包括云上的服务器)中,图像获取单元11通过从所述服务器下载拍摄图像,可获得所述多个拍摄图像(的文件)。
另外,例如,通过图像获取单元11与多台摄像机通信,可从多台摄像机获得利用多台摄像机拍摄的多个拍摄图像。
图像获取单元11把从服务器等获得的多个拍摄图像(的文件)提供给存储器12。
例如,存储器12由硬盘、半导体存储器等构成,保存从图像获取单元11供给的多个拍摄图像(的文件)。
时间同步单元13生成表示多个拍摄图像的拍摄开始时间的差异的同步信息,用于使保存在存储器12中的多个拍摄图像的时间同步,并把生成的同步信息提供给显示控制单元14。另外,伴随再现单元17再现的拍摄图像的声音可被提供给时间同步单元13,时间同步单元13利用所述声音,生成同步信息。
显示控制单元14通过在必要时利用从时间同步单元13供给的同步信息,或者从图像排列控制单元16供给的信息,进行在显示单元15上,显示保存在存储器12中的拍摄图像(的符号),或者从再现单元17供给的拍摄图像(的再现画面)的显示控制。
例如,显示单元15由LCD(液晶显示器)、有机EL(电致发光)显示器等构成,按照显示控制单元14的控制显示图像。
图像排列控制单元16生成用于控制显示在显示单元15上的拍摄图像的排列(对齐)的信息等,并把生成的信息等提供给显示控制单元14,从而控制显示在显示单元15上的拍摄图像(的符号或再现画面)的排列等。
换句话说,图像排列控制单元16包括:摄像机位置关系获取单元31;位置顺位附加单元32;重排单元33;逆重排单元34;拍摄状态图像生成单元35;图像间除单元36;和再现对象设定单元37。
摄像机位置关系获取单元31获得拍摄保存在存储器12中的多个拍摄图像的多台摄像机的位置关系(下面也称为摄像机位置关系)。
这里,在摄像机位置关系中,至少包括摄像机的拍摄位置(拍摄时的位置)。
另外,在摄像机位置关系中,可包括摄像机的拍摄方向(拍摄时的摄像机的方向)。
例如,作为摄像机位置关系的拍摄位置和拍摄方向可以是利用多台摄像机中的任意摄像机等作为基准获得的相对值,或者是绝对值。
例如,在各个摄像机中,可以内置GPS(全球定位系统)或方向传感器,从GPS或方向传感器,可以获得摄像机位置关系。
另外,例如,可根据利用多台摄像机拍摄的多个拍摄图像,通过计算估计摄像机位置关系。换句话说,摄像机位置关系获取单元31可通过利用时间同步单元13生成的同步信息,使再现单元17再现的多个拍摄图像的时间同步,并根据此时其时间被同步的多个拍摄图像,通过计算估计摄像机位置关系。
位置顺位附加单元32根据由摄像机位置关系获取单元31获得的摄像机位置关系等,进行位置顺位附加处理,在所述位置顺位附加处理中,向保存在存储器12中的由多台摄像机拍摄的多个拍摄图像中的每个拍摄图像附加位置顺位,以便把多个拍摄图像连接成环形。
这里,位置顺位附加处理将在后面详细说明。
重排单元33进行重排处理,在所述重排处理中,多个拍摄图像被重排,以致多个拍摄图像中的特定图像位于预定位置,同时与保存在存储器12中的多个拍摄图像的位置顺位相应的对齐顺序被维持。
逆重排单元34进行逆重排处理,在所述逆重排处理中,按照相反的顺序重排与拍摄图像的位置顺位相应的多个拍摄图像的排列。
拍摄状态图像生成单元35根据由摄像机位置关系获取单元31获得的摄像机位置关系,进行拍摄状态图像生成处理,在所述拍摄状态图像生成处理中,生成表示与拍摄保存在存储器12中的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像。
图像间除单元36进行其中间除待显示在显示单元14上的拍摄图像的图像间除处理。
再现对象设定单元37进行再现对象设定处理,在所述再现对象设定处理中,设定保存在存储器12中的多个拍摄图像之中的作为再现对象的拍摄图像。
再现单元17再现保存在存储器12中的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
操作单元18由用户操作,把与操作对应的操作信号提供给控制单元19。
控制单元19控制整个图像处理设备(构成图像处理设备的各个部件)。
另外,例如,控制单元19按照操作单元18的操作,进行对于保存在存储器12中的拍摄图像的编辑处理,比如入点和出点的设定,或者效果的增加。
图3是图解说明由图2中例示的图像处理设备进行的图像处理的例子的概况的示图。
在图像处理设备中,例如,时间同步单元13生成表示多个拍摄图像的拍摄开始时间的差异的同步信息,用于使保存在存储器12中的多个拍摄图像的时间同步,并把生成的同步信息提供给显示控制单元14。
显示控制单元14根据从时间同步单元13供给的同步信息,可显示保存在存储器12中的多个拍摄图像的符号。这种情况下,例如,如图3中图解所示,在水平轴被设定为时间的情况下,多个拍摄图像的符号被排列成沿垂直方向对齐,以致使它们的时间同步。
这里,在图3中,作为拍摄图像的符号,使用类似长度与拍摄图像的拍摄时间成比例的胶片卷的图像。
在图像处理设备中,代替如上所述,使时间同步地对齐排列多个拍摄图像(的符号等),可按照位置顺位,对齐地排列多个拍摄图像。
换句话说,在图像处理设备的图像排列控制单元16中,照相机位置关系获取单元31获得保存在存储器12中的多个拍摄图像的摄像机位置关系,位置顺位附加单元32根据摄像机位置关系,向保存在存储器12中的多个拍摄图像附加位置顺位,并把作为结果的拍摄图像提供给显示控制单元14。
按照位置顺位附加单元32附加的位置顺位,例如如图3中图解所示,在垂直轴被设定为位置顺位的情况下,显示控制单元14把多个拍摄图像的符号排列成按位置顺位的顺序,在垂直方向被对齐。
如上,按照图像处理设备,多个拍摄图像的符号具有在水平轴和垂直轴被设定为时间和位置顺位的情况下,将被彼此同步的时间,并被排列成按位置顺位的顺序被对齐。
之后,当用户操纵操作单元18,以便进行剪切、合并、添加音乐等时,控制单元19按照所述操作,进行编辑操作,从而生成作为完整一套节目的所谓的运动图像。
作为控制单元19进行的编辑操作的模式,例如,存在手动模式和自动模式。
在手动模式下,控制单元19按照用户对于操作单元18的操作,进行编辑操作。
在自动模式下,例如,控制单元19进行从多个拍摄图像中,检测诸如精彩场景之类的预定场景,并接合各个场景的编辑操作。
作为精彩场景,可在其时间被同步的多个拍摄图像之中,检测在各个时间,表示兴奋度的精彩度为预定阈值或更大的拍摄图像中的精彩度最高的一个拍摄图像。
例如,作为精彩度,可以使用与声音的大小,或者显现在拍摄图像中的被摄对象的移动、大小等成比例的值。
另外,在自动模式下,代替只检测其精彩度等于或大于阈值,并且最高的一个拍摄图像,其精彩度等于或大于阈值的所有拍摄图像都可被检测为精彩场景。
在其精彩度等于或大于阈值的所有拍摄图像都被检测为精彩场景的情况下,存在两个或更多的拍摄图像被检测为精彩场景的情况。当两个或更多的拍摄图像被检测为精彩场景时,作为精彩场景的所述两个或更多的拍摄图像被排列成分割显示单元15的屏幕。
在这种情况下,在完整一套节目中,存在其中只显示一个拍摄图像的情况,和其中分割屏幕地显示两个或更多的拍摄图像的情况。例如,在保存在存储器12中的所有多个拍摄图像的精彩度都等于或大于阈值的情况下,分割屏幕地显示所有多个拍摄图像。
在自动模式下,可以按照用户对操作单元18的操作,设定是只检测其精彩度等于或大于阈值,并且最高的一个拍摄图像,作为精彩场景,还是检测其精彩度都等于或大于阈值的所有拍摄图像,作为精彩场景。
另外,除此之外,例如,图像处理设备可被配置成以致再现单元17同时再现其时间被同步的多个拍摄图像,显示控制单元14从再现单元17再现的多个拍摄图像之中,选择按照用户对操作单元18的操作选择的一个拍摄图像,并把选择的拍摄图像显示在显示单元15上。
此外,当再现单元17再现的多个拍摄图像的精彩度都小于阈值时,显示控制单元14可显示用户选择的一个拍摄图像,当一个或多个拍摄图像的精彩度变成阈值或更大时,显示控制单元可显示其精彩度变成阈值或更大的一个或多个拍摄图像之中的其精彩度最高的一个拍摄图像,或者对应于用户指定的数目或更少的拍摄图像,以在必要时分割显示单元15的屏幕。
在这种情况下,用户能够容易地获得精彩场景。
<位置顺位附加处理>
图4是图解说明由图2中例示的摄像机位置关系获取单元31和位置顺位附加单元32进行的位置顺位附加处理的例子的流程图。
在步骤S11,摄像机位置关系获取单元31获得拍摄了保存在存储器12中的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S12。
在步骤S12,位置顺位附加单元32根据摄像机位置关系获取单元31获得的摄像机位置关系,向保存在存储器12中的多个拍摄图像附加位置顺位,以便把多个拍摄图像连接成环形,然后终止位置顺位附加处理。
这里,在位置顺位附加处理中,作为附加一系列位置顺位的对象的多个拍摄图像是通过在(几乎)相同的时隙,拍摄相同的对象(被摄对象、比赛等)而获得的多个图像,下面,这样的多个拍摄图像的单元(集合)也将被称为群组。
图5是图解说明在利用两台摄像机c#1和c#2拍摄两个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图5A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置及(朝向被摄对象的)右侧位置被设定为拍摄位置的情况下,利用两台摄像机c#1和c#2拍摄被摄对象的拍摄状态。
在这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,显现在摄像机c#1拍摄的拍摄图像中的面向正面的被摄对象,和显现在摄像机c#2拍摄的拍摄图像中的右侧面的被摄对象,认识到摄像机c#1和c#2的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向(轨迹)。
这里,在多台摄像机位于以被摄对象作为其中心的圆的圆周上的情况下,作为沿着所述圆周的方向,存在两个方向,即圆周的顺时针方向和逆时针方向,这两个方向中的任意方向可被设定为顺位附加方向。在图5A中,逆时针方向被设定为顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1和c#2拍摄的拍摄图像附加位置顺位。
这里,作为位置顺位,例如,可以使用把“第一”作为其初始值的整数。
在顺位的方向是当沿着顺位的方向,比如顺着圆周的方向前进时,最终回到初始位置的方向(轨迹)的情况下,可向由多台摄像机之中的任意摄像机拍摄的拍摄图像,附加“第一”的位置顺位。
因而,在图5A中图解所示的情况下,例如,可向由摄像机c#1和c#2之中的摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位。在这种情况下,向由从摄像机c#1(的拍摄位置)起,沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
另外,在图5A中图解所示的情况下,例如,可向由摄像机c#2拍摄的拍摄图像附加“第一”的位置顺位。在这种情况下,向由从摄像机c#2(的拍摄位置)起,沿着顺位附加方向到达的摄像机c#1拍摄的拍摄图像,附加“第二”的位置顺位。
图5B图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置及后方位置被设定为拍摄位置的情况下,利用两台摄像机c#1和c#2拍摄被摄对象的拍摄状态。
在这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,即,摄像机c#1和c#2的拍摄位置在直线上,并且摄像机c#1和c#2的拍摄方向彼此相差180°,认识到摄像机c#1和c#2的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
这里,在图5B中图解所示的情况下,类似于图5A中图解所示的情况,圆周的逆时针方向被设定为顺位附加方向。
如参考图5A所述,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1和c#2拍摄的拍摄图像附加位置顺位。
因而,在5B中图解所示的情况下,例如,向由摄像机c#1和c#2之中的摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向由从摄像机c#1起,沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
另一方面,在图5B中图解所示的情况下,例如,向由摄像机c#2拍摄的拍摄图像附加“第一”的位置顺位,向由从摄像机c#2起,沿着顺位附加方向到达的摄像机c#1拍摄的拍摄图像,附加“第二”的位置顺位。
图5C图解说明其中在人物被设定为被摄对象,和被摄对象的左前方位置及右前方位置被设定为拍摄位置的情况下,利用两台摄像机c#1和c#2拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,显现在摄像机c#1拍摄的拍摄图像中的从左前方看的被摄对象,和显现在摄像机c#2拍摄的拍摄图像中的从右前方看的被摄对象,认识到摄像机c#1和c#2的拍摄位置位于在被摄对象的前方侧,垂直于被摄对象的正面方向的直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
这里,在多台摄像机位于诸如直线、折线或曲线之类的不回到初始位置的直线上的情况下,当作为沿着所述线的方向,存在两个方向的时候,这两个方向中的任意方向可被设定为顺位附加方向。
换句话说,如图5C中图解所示,在两台摄像机c#1和c#2位于直线上的情况下,当存在包括向右方向(从左侧起)和向左方向(从右侧起)的两个方向时,这两个方向中的任意方向可被设定为顺位附加方向。在图5C中图解所示的情况下,向右方向被设定为顺位附加方向。
如参考图5A所述,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1和c#2拍摄的拍摄图像附加位置顺位。
因而,在图5C中图解所示的情况下,向由沿着顺位附加方向,位于最前侧的摄像机c#1拍摄的拍摄图像,附加“第一”的位置顺位,向由从摄像机c#沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
图6是图解说明在利用三台摄像机c#1、c#2和c#3拍摄三个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图6A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左前方位置及右前方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
图6B图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左后方位置及右后方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
在图6A和6B中图解所示的情况下,位置顺位附加单元32根据摄像机c#1~c#3的摄像机位置关系,认识到摄像机c#1~c#3的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#3拍摄的拍摄图像附加位置顺位。
在图6A和6B中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图6A和6B中图解所示的情况下,例如,当在摄像机c#1~c#3中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,按照摄像机c#2和c#3的顺序,设置摄像机c#2和c#3的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,沿着顺位附加方向,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位。
图6C图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左前方位置及右前方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1~c#3的摄像机位置关系,认识到摄像机c#1~c#3的拍摄位置位于直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#3拍摄的拍摄图像附加位置顺位。
在图6C中图解所示的情况下,直线的向右方向被设定为顺位附加方向。
在图6C中图解所示的情况下,沿着顺位附加方向,顺序地设置摄像机c#1~c#3的拍摄位置。
因而,沿着顺位附加方向,向利用摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位。
图7是图解说明在利用四台摄像机c#1、c#2、c#3和c#4拍摄四个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图7A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置、左侧位置、右侧位置及后方位置被设定为拍摄位置的情况下,利用四台摄像机c#1~c#4拍摄被摄对象的拍摄状态。
在图7A中图解所示的情况下,位置顺位附加单元32根据摄像机c#1~c#4的摄像机位置关系,认识到摄像机c#1~c#4的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#4拍摄的拍摄图像附加位置顺位。
在图7A中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图7A中图解所示的情况下,例如,当在摄像机c#1~c#4中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,顺序地设置摄像机c#2~c#4的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,沿着顺位附加方向,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位,并向利用摄像机c#4拍摄的拍摄图像附加“第四”的位置顺位。
图7B图解说明其中在人物被设定为被摄对象,并且在被摄对象的前方侧的直线上的4个点被设定为拍摄位置的情况下,利用四台摄像机c#1~c#4拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1~c#4的摄像机位置关系,认识到摄像机c#1~c#4的拍摄位置位于直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#4拍摄的拍摄图像附加位置顺位。
在图7B中图解所示的情况下,直线的向右方向被设定为顺位附加方向。
在图7B中图解所示的情况下,沿着顺位附加方向,顺序地设置摄像机c#1~c#4的拍摄位置。
因而,沿着顺位附加方向,向利用摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位,并向利用摄像机c#4拍摄的拍摄图像附加“第四”的位置顺位。
图8是图解说明位置顺位附加处理的其它例子的示图。
图8A图解说明在8台摄像机c#1,c#2,c#3,c#4,c#5,c#6,c#7和c#8面向足球场,位于环绕足球场的周围的椭圆的圆周上的8个点被设定为拍摄位置的情况下,拍摄足球比赛的拍摄状态。
图8B图解说明在8台摄像机c#1~c#8面向跑道,位于环绕田径赛的跑道周围的椭圆的圆周上的8个点被设定为拍摄位置的情况下,拍摄田径赛的拍摄状态。
在图8A和8B中图解所示的情况下,位置顺位附加单元32根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机c#1~c#8的拍摄位置位于椭圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8拍摄的拍摄图像附加位置顺位。
在图8A和8B中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图8A中图解所示的情况下,例如,当在摄像机c#1~c#8中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,顺序地设置摄像机c#2~c#8的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,之后,沿着顺位附加方向,向利用摄像机c#i拍摄的拍摄图像,附加“第i”的位置顺位。
图8C图解说明其中在沿着赛跑的赛道的线路(下面也称为赛道线)上的6个点被设定为拍摄位置的情况下,利用6台摄像机c#1~c#6拍摄赛跑的拍摄状态。
在图8C中图解所示的情况下,例如,从置于网络上的服务器,提供表示赛道的赛道模型,根据所述赛道模型,位置顺位附加单元32认识其中设置摄像机c#1~c#6的拍摄位置的赛道的线路,并把沿着赛道的线路的方向设定为附加位置顺位的顺位附加方向。
另外,位置顺位附加单元32根据摄像机c#1~c#6的摄像机位置关系,认识布置在赛道的线路上的摄像机c#1~c#6的位置(拍摄位置),并沿着顺位附加方向,向利用摄像机c#1~c#6拍摄的拍摄图像附加位置顺位。
在图8C中图解所示的情况下,从赛道的线路的起点朝着终点的方向被设定为顺位附加方向。
在图8C中图解所示的情况下,沿着从所述起点到所述终点的方向,顺序设置摄像机c#1~c#6的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,之后,沿着顺位附加方向,向利用摄像机c#i拍摄的拍摄图像,附加“第i”的位置顺位。
在图8C中图解所示的情况下,当赛跑的领先被摄对象是已知被摄对象(例如,引导赛跑的车辆等)时,可以配置成以致从利用摄像机c#1~c#6拍摄的拍摄图像中,检测所述已知被摄对象,按照所述已知被摄对象出现在各个拍摄图像中的顺序,连接摄像机c#1~c#6的拍摄位置的方向(轨迹)可被设定为顺位附加方向。
在这种情况下,可在无赛道模型的情况下,设定顺位附加方向。
除此之外,例如,通过利用显示单元15,在地图上显示摄像机c#1~c#6的拍摄位置,并且用户按照从起点到终点的顺序,指定拍摄位置,按照用户指定的顺序,连接各个拍摄位置的方向(轨迹)可被设定为顺位附加方向。
这里,在位置顺位被附加到保存在存储器12中的拍摄图像之后,位置顺位附加单元32可按照位置顺位,变更保存在存储器12中的拍摄图像的文件名。
换句话说,作为群组的被附加位置顺位的多个拍摄图像的文件名,例如,可以使用通过向相同的前缀“VVV”附加与位置顺位相应的序号“XX”而获得的各个文件名,保存在存储器12中的被附加位置顺位的拍摄图像的文件名(例如,在具有扩展名“mpg”的mpg文件的情况下,VVV_XX.mpg等)可被变更成附加位置顺位的文件名。
<重排处理>
图9是图解说明由图2中例示的重排单元33进行的重排处理的第一例子的示图。
现在,假定通过从前方、右侧、后方和左侧拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像v#1~v#4,以致拍摄图像v#1~v#4被提供给显示控制单元14。
显示控制单元14根据拍摄图像v#1~v#4的文件名等,认识拍摄图像v#1~v#4的位置顺位,并根据位置顺位,按照位置顺位的顺序对齐地从左侧起排列从再现单元17供给的拍摄图像v#1~v#4的再现画面,从而把再现画面显示在显示单元15上。
这里,如上所述,由于位置顺位“第i”被附加到拍摄图像v#i,因此首先显示被附加位置顺位“第一”的拍摄图像v#1的再现画面,之后,从左侧开始顺序对齐地显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的再现画面。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的再现画面的情况下,例如,当操纵操作单元18的用户把其再现画面从左侧起第四个(从右侧起第一个)被显示的拍摄图像v#4指定为第一个(这里,最左侧的位置)时,重排单元33重排拍摄图像v#1~v#4(的再现画面),以致用户指定的拍摄图像(的再现画面)位于作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的再现画面)。
这里,位置顺位是用于把群组的多个拍摄图像连接成环形的顺位,其中位置顺位“第i”被附加到拍摄图像v#i的拍摄图像v#1~v#4按照位置顺位被连接成环形。
重排单元33重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置,同时与位置顺位相应的对齐顺序,换句话说,环形的连接被维持。
因而,如上所述,在用户指定的拍摄图像是拍摄图像v#4的情况下,如图9中图解所示,拍摄图像v#4被显示在第一位置,之后,按照拍摄图像v#1,v#2和v#3的顺序,重排拍摄图像,以致按照位置顺位,环形地形成的连接(v#1→v#2→v#3→v#4→v#1)被维持。
另外,在重排单元33重排拍摄图像之后,位置顺位附加单元32可按照重排之后的拍摄图像的对齐,变更拍摄图像的位置顺位。
例如,如图9中图解所示,在按照拍摄图像v#4,v#1,v#2和v#3的顺序,重排拍摄图像v#1~v#4的对齐的情况下,第一个拍摄图像v#4的位置顺位可被变更成“第一”,之后,拍摄图像v#1~v#3的位置顺位可被变更成“第二”~“第四”。
如上,通过变更位置顺位,并按照位置顺位的变更,变更拍摄图像的文件名,在之后请求由4个拍摄图像v#1~v#4构成的群组的再现的情况下,在显示单元15中,显示按照变更后的位置顺位,按拍摄图像v#4,v#1,v#2和v#3的顺序,从左侧开始把拍摄图像排列成行的再现画面。
图10是图解说明由图2中例示的重排单元33进行的重排处理的第二例子的示图。
现在,假定通过从右侧、前方、左侧和后方拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求使用由4个拍摄图像v#1~v#4构成的群组作为素材的编辑时,时间同步单元13生成用于在由保存在存储器12中的4个拍摄图像v#1~v#4构成的群组中,使时间同步的同步信息,并把生成的同步信息提供给显示控制单元14。
显示控制单元14生成都类似于长度与拍摄图像#i的拍摄时间成比例的胶片卷的图像(下面也称为胶片卷图像),作为保存在存储器12中的拍摄图像v#1~v#4的符号。
另外,显示控制单元14根据拍摄图像v#1~v#4的文件名等,认识拍摄图像v#1~v#4的位置顺位。
随后,显示控制单元14通过利用从时间同步单元13供给的同步信息,和拍摄图像v#1~v#4的位置顺位,排列作为拍摄图像v#1~v#4的符号的胶片卷图像,以致在水平轴和垂直轴被设定为时间和位置顺位的情况下,使时间同步,并按照位置顺位的顺序对齐胶片卷图像,然后把胶片卷图像显示在显示单元15上。
这里,在图10中图解所示的情况下,例如,拍摄图像v#1~v#4是从相同的开始时间起,持续相同的拍摄时间拍摄的图像,因而,作为拍摄图像v#1~v#4的符号的胶片卷图像被排列成垂直对齐,以致水平轴方向的位置彼此一致。
另外,在图10中图解所示的情况下,如上所述,由于位置顺位“第i”被附加到拍摄图像v#i,因此被附加位置顺位“第一”的拍摄图像v#1的胶片卷图像被显示在第一个位置,之后,从上方顺序地排列被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的胶片卷图像。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的胶片卷图像的情况下,例如,当用户通过操纵操作单元18,把其胶片卷图像从上方起第二个显示的拍摄图像v#4指定为是第一个(这里,最上面的位置)时,重排单元33重排拍摄图像v#1~v#4(的胶片卷图像),以致用户指定的拍摄图像(的胶片卷图像)位于作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4的控制信息提供给显示控制单元14,以致用户指定的拍摄图像位于第一位置,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的胶片卷图像)。
这里,位置顺位是用于把群组的多个拍摄图像连接成环形的顺位,其中位置顺位“第i”被附加到拍摄图像v#i的拍摄图像v#1~v#4按照位置顺位被连接成环形。
重排单元33重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置,同时与位置顺位相应的对齐顺序,换句话说,环形的连接被维持。
因而,如上所述,在用户指定的拍摄图像是拍摄图像v#2的情况下,如图10中图解所示,拍摄图像v#2被显示在第一位置,之后,按照拍摄图像v#3,v#4和v#1的顺序,重排拍摄图像,以致按照位置顺位,环形地形成的连接(v#1→v#2→v#3→v#4→v#1)被维持。
图11是图解说明由图2中例示的重排单元33进行的重排处理的第三例子的示图。
在图11中图解所示的情况下,类似于图9中所示的情况,通过从前方、右侧、后方和左侧拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4构成的群组的再现时,类似于图9中图解所示的情况,显示控制单元14把被附加位置顺位“第一”的拍摄图像v#1的再现画面显示在第一位置,之后,从左侧开始顺序对齐地显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的再现画面。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的再现画面的情况下,例如,当用户通过操纵操作单元18等,请求正面面部(面向前方的面部)的检测时,重排单元33从作为对象的拍摄图像v#1~v#4中,检测正面面部,并重排拍摄图像v#1~v#4(的再现画面),以致从中检测到正面面部的拍摄图像(的再现画面)被排列在作为预定位置的中央位置(或中央位置附近),同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致从中检测到正面面部的拍摄图像被排列在中央位置附近的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的再现画面)。
这里,在图11中图解所示的情况下,在拍摄图像v#1中,显现正面面部,从而,从拍摄图像v#1中检测到正面面部。
另外,拍摄图像v#1~v#4的再现画面是从左侧顺序排列成行的,从而作为中央位置(中央位置附近),例如使用从左侧起的第二个位置。
这种情况下,如图11中图解所示,从左侧按照拍摄图像v#4,v#1,v#2,和v#3的顺序,重排拍摄图像v#1~v#4(的再现画面),以致从中检测到正面面部的拍摄图像v#1被排列在作为中央位置的从左侧起的第二个位置,并且与位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
图12是图解说明由图2中例示的重排单元33进行的重排处理的第四例子的示图。
在图12中图解所示的情况下,类似于图10中图解所示的情况,通过从右侧、前方、左侧和后方拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求使用由4个拍摄图像v#1~v#4构成的群组作为素材的编辑时,类似于图10中图解所示的情况,显示控制单元14排列作为拍摄图像v#1~v#4的符号的胶片卷图像,以致在水平轴和垂直轴被设定为时间和位置顺位的情况下,使时间同步,并按照位置顺位的顺序对齐胶片卷图像,然后把胶片卷图像显示在显示单元15上。
换句话说,在图12中图解所示的情况下,类似于图10中图解所示的情况,作为拍摄图像v#1~v#4的符号的胶片卷图像被排列成垂直对齐,以致水平轴方向的位置彼此一致。另外,被附加位置顺位“第一”的拍摄图像v#1的胶片卷图像被显示在第一位置,之后,从上方顺序对齐地排列并显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的胶片卷图像。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的胶片卷图像的情况下,例如,当用户通过操纵操作单元18等,请求正面面部(面向前方的面部)的检测时,重排单元33从作为对象的拍摄图像v#1~v#4中,检测正面面部,并重排拍摄图像v#1~v#4(的胶片卷图像),以致从中检测到正面面部的拍摄图像(的胶片卷图像)被排列在作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致从中检测到正面面部的拍摄图像被排列在第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的胶片卷图像)。
这里,在图12中图解所示的情况下,在拍摄图像v#2中,显现正面面部,从而,从拍摄图像v#2中检测到正面面部。
这种情况下,如图12中图解所示,从上方按照拍摄图像v#2,v#3,v#4,和v#1的顺序,重排拍摄图像v#1~v#4(的胶片卷图像),以致从中检测到正面面部的拍摄图像v#2被排列在从上方起的第一个位置(领先位置),并且与位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
图13是图解说明由图2中例示的重排单元33进行的重排处理的第五例子的示图。
图13A是图解说明构成群组的拍摄图像的拍摄状态的例子的示图。
在图13A中图解所示的情况下,8台摄像机c#1~c#8被排列在体育场的跑道的周围,拍摄在跑道中进行的体育运动。
这种情况下,类似于图8B中图解所示的情况,位置顺位附加单元32(图2)根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机c#1~c#8的拍摄位置位于椭圆的圆周上,并把沿着圆周的方向,例如逆时针方向设定为用于附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8拍摄的拍摄图像v#1~v#8附加位置顺位。
换句话说,在摄像机c#1~c#8之中的任意一台摄像机c#i的拍摄位置被设定为起点的情况下,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1~c#8附加位置顺位。
现在,在摄像机c#1~c#8之中,例如,在摄像机c#7的拍摄位置被设定为起点的情况下,位置顺位“第一”被附加到摄像机c#7的拍摄图像v#7。另外,沿着顺位附加方向,位置顺位“第二”被附加到摄像机c#8拍摄的拍摄图像v#8,位置顺位“第三”被附加到摄像机c#1拍摄的拍摄图像v#1。类似地,位置顺位“第四”被附加到摄像机c#2拍摄的拍摄图像v#2,位置顺位“第五”被附加到摄像机c#3拍摄的拍摄图像v#3,位置顺位“第六”被附加到摄像机c#4拍摄的拍摄图像v#4,位置顺位“第七”被附加到摄像机c#5拍摄的拍摄图像v#5,而位置顺位“第八”被附加到摄像机c#6拍摄的拍摄图像v#6。
在如上所述的拍摄图像v#1~v#8作为群组被保存在存储器12中的情况下,例如,当用户通过操纵操作单元18,请求由拍摄图像v#1~v#8构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像v#1~v#8,以致拍摄图像v#1~v#8被提供给显示控制单元14。
图13B是图解说明拍摄图像v#1~v#8的再现画面的显示例子的示图。
显示控制单元14根据拍摄图像v#1~v#8的文件名等,认识到拍摄图像v#1~v#8的位置顺位,按照位置顺位的顺序对齐地排列从再现单元17供给的拍摄图像v#1~v#8的再现画面,并把排列的再现画面显示在显示单元15上。
这里,在图13B中图解所示的情况下,作为8个拍摄图像v#1~v#8(的再现画面)的排列方式,使用水平×垂直:4×2的排列方式。
在水平×垂直:H×V的排列方式下,例如按照从左侧到右侧的顺序,进行拍摄图像(的再现画面)的排列,当到达右端时,使排列位置下降一行,再次按从左侧到右侧的顺序,进行排列。
在4×2的排列方式下,按照位置顺位,以v#7,v#8,v#1,v#2,v#3,v#4,v#5和v#6的顺序排列并显示8个拍摄图像v#1~v#8的再现画面。
如上,在按照位置顺位的顺序,排列显示拍摄图像v#1~v#8的再现画面的情况下,例如,当用户通过操纵操作单元18等,把拍摄图像v#1指定为领先者时,重排单元33重排拍摄图像v#1~v#8(的再现画面),以致用户指定的拍摄图像(的再现画面)位于4×2排列方式的作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#8,以致用户指定的拍摄图像位于第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#8(的再现画面)。
如上所述,在用户指定拍摄图像v#1的情况下,如图13B中图解所示,按照v#1,v#2,v#3,v#4,v#5,v#6,v#7和v#8的顺序,重排拍摄图像v#1~v#8,以致用户指定的拍摄图像v#1被排列在第一位置,从而之后,按照位置顺位环形地形成的连接(v#1→v#2→v#3→···→v#7→v#8→v#1)被维持。
另外,在图9-13中,尽管说明了进行群组的多个拍摄图像的重排,以致用户指定的拍摄图像,或者从中检测到(显现)正面面部的拍摄图像被排列在诸如第一位置之类的预定位置,不过,在拍摄图像的重排中,被设置于所述预定位置的拍摄图像不限于用户指定的拍摄图像,或者其中显现正面面部的拍摄图像。
换句话说,在拍摄图像的重排中,当将被排列在预定位置的拍摄图像被称为特定图像时,例如,重排单元33对于作为对象的群组的多个拍摄图像,进行面部的检测或人物的检测,能够把其中显现面部的面积或时间较大的拍摄图像,其中显现特定人物的拍摄图像,其中显现的人物的数目较大的拍摄图像等设定为所述特定图像地进行拍摄图像的重排。
另外,如图13A中图解所示,在从置于网络上的服务器,提供表示其中进行体育运动的跑道,或者其中进行体育运动的球场、场地等的模型的情况下,根据所述模型,在群组的多个拍摄图像之中,能够设定所述特定图像。
换句话说,例如,根据跑道的模型,能够识别在跑道中进行的体育运动的起点或终点,重排单元33可把利用在靠近所述起点或终点的拍摄位置处的摄像机拍摄的拍摄图像设定为所述特定图像。
另外,可在任意时刻进行群组的多个拍摄图像的重排,而不等待用户对操作单元18的操作。
此外,可按照用户对于操作单元18的操作,设定特定图像被排列在的位置。
如上,在图2中图解所示的图像处理设备中,获得多个摄像机的摄像机位置关系,并根据摄像机位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于把多个拍摄图像连接成环形的位置顺位。随后,按照位置顺位对齐地排列并显示所述多个拍摄图像。
另外,必要时,可维持与位置顺位相应的对齐顺序地重排所述多个拍摄图像。
因而,例如,防止在彼此邻近的位置拍摄的拍摄图像被排列在相互分离的位置,并防止在相互远离的位置拍摄的拍摄图像被排列在彼此邻近的位置,从而能够以用户可容易地处理的形式,提供多个拍摄图像。
图14是图解说明由图2中例示的重排单元33进行的重排处理的例子的流程图。
在步骤S21,重排单元33根据用户对操作单元18的操作等,把保存在存储器12中的群组的多个拍摄图像之中的,将被排列在预定位置的拍摄图像设定为特定图像,然后处理进入步骤S22。
在步骤S22,重排单元33生成用于重排群组的多个拍摄图像,以致所述特定图像位于预定位置,同时群组的多个拍摄图像的位置顺位的对齐顺序被维持的控制信息,并把生成的控制信息提供给显示控制单元14,然后重排处理结束。
这里,其中按照位置顺位的顺序,对齐多个拍摄图像的图像,换句话说,如图9、11和13中图解所示,其中按照位置顺位的顺序,对齐群组的多个拍摄图像(的再现画面)的图像,及如图10和12中图解所示,其中排列群组的多个拍摄图像(的胶片卷图像的符号),以致水平轴和垂直轴被设定为时间和位置顺位,使时间同步,并按照位置顺位的顺序排列拍摄图像的图像也可被称为位置顺位图像。
<逆重排处理>
图15是图解说明由图2中例示的逆重排单元34进行的逆重排处理的例子的示图。
图15A是图解说明构成群组的拍摄图像的拍摄状态的例子的示图。
在图15A中图解所示的情况下,类似于图13A中图解所示的情况,8台摄像机c#1~c#8被排列在体育场的跑道的周围,拍摄在跑道中进行的体育运动。
这种情况下,类似于图8B或15A中图解所示的情况,位置顺位附加单元32(图2)根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机c#1~c#8的拍摄位置位于椭圆的圆周上,并把沿着所述圆周的方向,例如逆时针方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8拍摄的拍摄图像v#1~v#8附加位置顺位。
换句话说,在摄像机c#1~c#8之中的任意一台摄像机c#i的拍摄位置被设定为起点的情况下,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1~c#8附加位置顺位。
现在,在摄像机c#1~c#8之中,例如,在摄像机c#1的拍摄位置被设定为起点的情况下,位置顺位“第一”被附加到摄像机c#1的拍摄图像v#1。另外,位置顺位“第二”被附加到摄像机c#2拍摄的拍摄图像v#2,位置顺位“第三”被附加到摄像机c#3拍摄的拍摄图像v#3。之后,类似地,位置顺位“第四”~“第八”被附加到摄像机c#4~c#8的拍摄图像v#4~v#8。
在如上所述的拍摄图像v#1~v#8作为群组被保存在存储器12中的情况下,例如,当用户通过操纵操作单元18,请求由拍摄图像v#1~v#8构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像v#1~v#8,以致拍摄图像v#1~v#8被提供给显示控制单元14。
图15B是图解说明拍摄图像v#1~v#8的再现画面的显示例子的示图。
显示控制单元14根据拍摄图像v#1~v#8的文件名等,认识拍摄图像v#1~v#8的位置顺位,按照位置顺位的顺序,例如以4×2的排列方式,对齐地排列从再现单元17供给的拍摄图像v#1~v#8的再现画面,并把排列的再现画面显示在显示单元15上。
在图15B中,按照位置顺位,按拍摄图像v#1,v#2,v#3,v#4,v#5,v#6,v#7和v#8的顺序,以4×2的排列方式,排列并显示8个拍摄图像v#1~v#8的再现画面。
如上,在按照位置顺位的顺序,排列并显示拍摄图像v#1~v#8的再现画面的情况下,例如,当用户通过操纵操作单元18等,指定拍摄图像的对齐顺序的颠倒时,逆重排单元34按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8(的再现画面)的对齐。
换句话说,逆重排单元34把用于按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8的控制信息提供给显示控制单元14。显示控制单元14根据从逆重排单元34供给的控制信息,按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8(的再现画面)。
这种情况下,由于与位置顺位相应的拍摄图像v#1~v#8的对应顺序是拍摄图像v#1,v#2,v#3,v#4,v#5,v#6,v#7和v#8的顺序,因此逆重排单元34按照作为倒序的拍摄图像v#8,v#7,v#6,v#5,v#4,v#3,v#2和v#1的顺序,重排拍摄图像v#1~v#8,如图15B中图解所示。
另外,在利用逆重排单元34重排拍摄图像的情况下,类似于其中利用重排单元33重排拍摄图像的情况,位置顺位附加单元32可按照重排之后的拍摄图像的对齐,变更拍摄图像的位置顺位。
通过变更位置顺位,并按照位置顺位的变更,变更拍摄图像的文件名,在之后请求由图15中图解所示的拍摄图像v#1~v#8构成的群组的再现的情况下,按照与变更之后的位置顺位一致的拍摄图像v#8~v#1的顺序对齐的再现画面被显示在显示单元15上。
这里,在图15中图解所示的情况下,尽管说明了在按照用户对于操作单元18的操作等,指定颠倒拍摄图像的对齐顺序的情况下,进行颠倒地重排群组的多个拍摄图像的对齐的逆重排,不过,可不等待用户对于操作单元18的操作,在任意时刻进行拍摄图像的逆重排。
换句话说,例如,逆重排单元34可在群组的多个拍摄图像中,检测显现在拍摄图像中的被摄对象的运动(光流),并根据被摄对象的运动,判定与位置顺位相应的多个拍摄图像的对齐是否是从终点到起点的对齐。
随后,在与位置顺位相应的多个拍摄图像的对齐是朝着从终点到起点方向的对齐的情况下,可以进行拍摄图像的逆重排。
另外,例如,如图15A中图解所示,在从置于网络上的服务器,提供表示其中进行体育运动的跑道,或者其中进行体育运动的球场、场地等的模型的情况下,根据所述模型,逆重排单元34可认识体育运动的进行方向,比如从起点朝向终点的方向等,并在与位置顺位相应的多个拍摄图像的对齐不是与体育运动的进行方向相应的对齐的情况下,进行拍摄图像的逆重排。
按照逆重排处理,例如,可沿着体育运动的进行方向,对齐地排列群组的多个拍摄图像,因而,能够以用户可容易地处理的形式,提供多个拍摄图像。
图16是图解说明由图2中例示的逆重排单元34进行的逆重排处理的例子的流程图。
在步骤S31,逆重排单元34判定是否进行其中把按照保存在存储器12中的群组的多个拍摄图像的位置顺位的顺序的对齐(排列)变更成按照倒序的对齐(排列)的逆重排处理。
这里,在步骤S31,可根据用户对于操作单元18的操作是否指定拍摄图像的对齐顺序的颠倒,与位置顺位相应的多个拍摄图像的对齐是否与诸如沿着从起点向着终点方向的对齐之类的体育运动的进行方向一致,等等,判定是否进行逆重排处理。
在步骤S31,在判定不进行逆重排处理的情况下,逆重排处理结束。
另一方面,在步骤S31,在判定要进行逆重排处理的情况下,换句话说,在用户对于操作单元18的操作指定拍摄图像的对齐顺序要被颠倒的情况下,或者在与位置顺位相应的多个拍摄图像的对齐不是与体育运动的进行方向相应的对齐的情况下,处理进入步骤S32,逆重排处理单元34生成用于按照与位置顺位相应的对齐顺序的倒序,重排保存在存储器12中的群组的多个拍摄图像的对齐的控制信息,并把生成的控制信息提供给显示控制单元14,然后逆重排处理结束。
<拍摄状态图像生成处理>
图17是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第一显示例子的示图。
在图17中,位置顺位图像和拍摄状态图像被显示在显示单元15上。
在图17中图解所示的位置顺位图像中,类似于图10和12中图解所示的情况,水平轴和垂直轴被设定为时间和位置顺位,群组的4个拍摄图像v#1~v#4(作为其符号的胶片卷图像)被排列成以致使时间同步,并且按照位置顺位的顺序,对齐拍摄图像。
拍摄状态图像是表示与拍摄群组的多个拍摄图像的多台摄像机相应的拍摄状态的图像,图17中图解所示的拍摄状态图像是图解说明与拍摄构成位置顺位图像的群组的4个拍摄图像v#1~v#4的4台摄像机c#1~c#4相应的拍摄状态的图像。
换句话说,图17中图解所示的拍摄状态图像包括被摄对象(类似被摄对象的图像),和拍摄被摄对象的4台摄像机c#1~c#4(类似摄像机的图像),在拍摄状态图像中,摄像机c#i沿作为当拍摄被摄对象时的拍摄方向的方向,被排列在利用摄像机c#i,拍摄被摄对象时的拍摄位置。
另外,在拍摄状态图像中,如图中用虚线箭头所示,可以包括表示顺位附加方向的箭头(箭头的图像)等。
例如,在用户通过操纵操作单元18,请求编辑的情况下,拍摄状态图像生成单元35根据关于请求要编辑的群组的多个拍摄图像的摄像机位置关系,生成表示与拍摄所述群组的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,如图17中图解所示,显示控制单元14可把拍摄状态图像连同位置顺位图像一起显示在显示单元15上。
图18是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第二显示例子的示图。
在图18中,位置顺位图像和拍摄状态图像被显示在显示单元15上。
在图18中图解所示的位置顺位图像中,类似于图9和11中图解所示的情况,按照位置顺位的顺序,水平成一行地,换句话说,按4×1的排列方式,排列4个拍摄图像v#1~v#4(的再现画面)。
另外,图18中图解所示的拍摄状态图像被配置成与图17中图解所示的拍摄状态图像相同。
例如,在用户通过操纵操作单元18,请求再现的情况下,拍摄状态图像生成单元35根据关于请求要再现的群组的多个拍摄图像的摄像机位置关系,生成表示与拍摄所述群组的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,如图18中图解所示,显示控制单元14可把拍摄状态图像连同位置顺位图像一起显示在显示单元15上。
图19是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第三显示例子的示图。
在图18中图解所示的第二显示例子中,在位置顺位图像中,按照位置顺位的顺序,以4×1的排列方式,排列4个拍摄图像v#1~v#4,而在图19中图解所示的第三显示例子中,在位置顺位图像中,按照位置顺位的顺序,以2×2的排列方式,排列4个拍摄图像v#1~v#4(的再现画面)。
至于其它各个点,在图19中图解所示的第三显示例子和在图18中图解所示的第二显示例子相同。
如上,在显示拍摄状态图像的情况下,用户能够容易地获得拍摄所述群组的各个拍摄图像的各个拍摄位置。
图20是图解说明由图2中例示的摄像机位置关系获取单元31和拍摄状态图像生成单元35进行的拍摄状态图像生成处理的例子的流程图。
在步骤S41,摄像机位置关系获取单元31获得拍摄保存在存储器12中的群组的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S42。
在步骤S42,拍摄状态图像生成单元35根据利用摄像机位置关系获得单元31获得的摄像机位置关系等,生成表示与拍摄保存在存储器2中的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,并把生成的拍摄状态图像提供给显示控制单元14,然后拍摄状态图像生成处理结束。
在图17-19中,尽管被摄对象(类似被摄对象的图像)被包含在拍摄状态图像中,不过,所述被摄对象可不被包含在拍摄状态图像中。
<图像间除处理>
图21是图解说明由图2中例示的显示控制单元14和图像间除单元36进行的图像间除处理的例子的示图。
图21A是图解说明利用多台摄像机,拍摄被摄对象的例证样子的示图。
在图21A中,环绕被摄对象等间距地排列16台摄像机,并拍摄被摄对象。
如图21A中图解所示,图21B是图解说明其中作为群组,显示在利用16台摄像机拍摄被摄对象的情况下获得的16个拍摄图像的位置顺位图像的显示例子的示图。
换句话说,图21B图解说明当用户通过操纵操作单元18,请求拍摄图像的再现时显示的位置顺位图像的显示例子。
作为显示位置顺位图像的显示模式,例如,存在间除模式和非间除模式。例如,依据用户对于操作单元18的操作等,可以进行间除模式和非间除模式的切换。
在间除模式下,图像间除单元36进行图像间除处理,因而,在必要时,显示在位置顺位图像中的拍摄图像(的再现画面或符号)被间除。
在非间除模式下,在位置顺位图像中显示所述群组的所有拍摄图像(的再现画面或符号)。
例如,如在图21A中图解所示,在利用16台摄像机拍摄被摄对象,并且作为其结果获得的16个拍摄图像被视为群组的情况下,在非间除模式下,在显示控制单元14中,16个拍摄图像(的再现画面或符号)按照位置顺位的顺序,以4×4的排列方式被排列,并被显示在显示单元15上。
另一方面,在间除模式下,图像间除单元36请求显示控制单元14显示由用户操作,用于决定待显示在位置顺位图像中的拍摄图像(的再现画面)的数目的粒度图标,按照所述请求,在显示单元15上显示粒度图标,然后进行图像间除处理。
图21B图解说明间除模式下的显示单元15的显示例子。
如图21B中图解所示,在间除模式下,连同位置顺位图像一起显示粒度图标。
粒度图标包括滑块,通过移动(滑动)滑块,能够调整作为位置顺位图像,待显示的拍摄图像的粒度(下面也称为显示粒度)。
换句话说,图像间除单元36按照粒度图标的滑块的位置,设定作为待显示在显示单元15上的拍摄图像(的再现画面或符号)的数目的显示对象图像数。
另外,图像间除单元36根据摄像机位置关系获取单元31获得的摄像机位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
随后,通过把由与显示对象图像数对应的选定摄像机拍摄的拍摄图像设定为待显示在显示单元15上的显示对象(的再现画面或符号),图像间除单元36间除待显示在显示单元15上的拍摄图像。
换句话说,图像间除单元36把表示所述群组的16个拍摄图像之中的设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,识别群组的16个拍摄图像之中的被设定为显示对象的拍摄图像,生成其中按照位置顺位的顺序,只排列被设定为显示对象的拍摄图像(的再现画面或符号)的位置顺位图像,随后如图21B中图解所示,把位置顺位图像显示在显示单元15上。
例如,当粒度图标的滑块被移动到显示粒度处于低水平的位置时,图像间除单元36把显示对象图像数设定为与群组的拍摄图像的数目相同的16,从而选择与显示对象图像数对应的16台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为16的情况下,拍摄群组的16个拍摄图像的所有16台摄像机都被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的16台摄像机拍摄的16个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以4×4的排列方式,排列作为显示对象的16个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
另一方面,例如,当粒度图标的滑块被移动到显示粒度处于中等水平的位置时,图像间除单元36把显示对象图像数设定为8(群组的拍摄图像的数目的一半),从而选择与显示对象图像数对应的8台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为8的情况下,如图21A中图解所示,当利用环绕被摄对象等间距地排列的16台摄像机拍摄被摄对象时,作为拍摄所述群组的16个拍摄图像的16台摄像机之中的每隔一个的摄像机的8台摄像机被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的8台摄像机拍摄的8个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像之中的由所述8台选定摄像机拍摄的8个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以3×3的排列方式,排列作为显示对象的8个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
然而在以3×3的排列方式,排列8个拍摄图像的情况下,该排列方式中的一个地方是不排列拍摄图像的地方(下面称为未使用地方),在图21中图解所示的情况下,3×3排列方式的中央(从左侧起第2个,从上方起第2个)被设定为所述未使用地方。
另外,例如,当粒度图标的滑块被移动到显示粒度处于高水平的位置时,图像间除单元36把显示对象图像数设定为4(群组的拍摄图像的数目的1/4),从而选择与显示对象图像数对应的4台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为4的情况下,如图21A中图解所示,当利用环绕被摄对象等间距地排列的16台摄像机拍摄被摄对象时,作为拍摄所述群组的16个拍摄图像的16台摄像机之中的每隔三个的摄像机的4台摄像机被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的4台摄像机拍摄的4个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像之中的由所述4台选定摄像机拍摄的4个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以2×2的排列方式,排列作为显示对象的4个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
在间除模式下,由于图像间除单元36进行如上所述的图像间除处理,因此在群组的拍摄图像的数目较大的情况下,用户可通过操作粒度图标的滑块,把待显示成位置顺位图像的拍摄图像(的再现画面或符号)的数目减少到用户期望的数目。
另外,在图像间除处理中,拍摄群组的多个拍摄图像的多台摄像机之中的,尽可能等间距地布置的对应于显示对象图像数的摄像机被选为选定摄像机。因而,例如,能够避免不均匀地分布并显示仅仅沿特定方向拍摄被摄对象而获得的拍摄图像,作为位置顺位图像。
另外,在显示对象图像数目小于群组的拍摄图像(拍摄所述拍摄图像的摄像机)的数目的情况下,例如,可按照用户对于操作单元18的操作,改变被选为选定摄像机的摄像机。这种情况下,待显示成位置顺位图像的拍摄图像可被变更成通过沿彼此不同的方向拍摄被摄对象而获得的拍摄图像等。
图22是图解说明由图2中例示的显示控制单元14和图像间除单元36进行的图像间除处理的例子的流程图。
例如,当用户通过操纵操作单元18,请求保存在存储器12中的群组(的拍摄图像)的再现时,在步骤S51,图像间除单元36把被请求再现的群组的所有多个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14,然后处理进入步骤S52。
在步骤S52,图像间除单元36请求显示控制单元14显示粒度图标,显示控制单元14按照所述请求,在显示单元15上显示粒度图标,然后处理进入步骤S53。
在步骤S53,显示控制单元14根据从图像间除单元36供给的控制信息,识别设定为显示对象的拍摄图像,生成只包括设定为显示对象的拍摄图像(的再现画面)的位置顺位图像,并把生成的位置顺位图像显示在显示单元15上,然后处理进入步骤S54。
这种情况下,显示包括被请求再现的群组的所有拍摄图像的位置顺位图像。
在步骤S54,处理等待用户操作粒度图标的滑块,图像间除单元36按照粒度图标的滑块的位置,设定显示对象图像数,然后处理进入步骤S55。
在步骤S55,图像间除单元36根据利用摄像机位置关系获取单元31获得的摄像机位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致尽可能地使选定摄像机的位置等间距,然后处理进入步骤S56。
在步骤S56,图像间除单元36把由与显示对象图像数对应的选定摄像机拍摄的拍摄图像设定为显示对象,然后把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
之后,处理从步骤S56返回步骤S53,如上所述,显示控制单元14根据从图像间除单元36供给的控制信息,识别设定为显示对象的拍摄图像,生成只包括被设定为显示对象的拍摄图像的位置顺位图像,并把生成的位置顺位图像显示在显示单元15上,之后,重复相同的处理。
按照上述图像间除处理,按照粒度图标的滑块的操作,间除拍摄图像,从而显示其显示粒度被调整的位置顺位图像。
<再现对象设定处理>
图23是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的例子的示图。
当用户通过操纵操作单元18,请求其拍摄图像被保存在存储器12中的群组的再现时,再现单元17从存储器12再现被请求再现的群组的多个拍摄图像,以致所述多个拍摄图像被提供给显示控制单元14。
显示控制单元14按照位置顺位的顺序,排列从再现单元17供给的多个拍摄图像的再现画面,并把排列的再现画面显示在显示单元15上。
因而,这种情况下,尽管显示与被请求再现的群组的拍摄图像的数目对应的再现画面,再现对象设定单元37例如按照用户的操作,进行再现对象设定处理,在所述再现对象设定处理中,从群组的拍摄图像中,设定一个拍摄图像作为再现对象,并且只显示被设定为再现对象的拍摄图像的再现画面。
换句话说,例如,在用户通过操纵操作单元18,请求设定一个再现画面的情况下,再现对象设定单元37通过进行再现对象设定处理,设定再现对象,并且只显示被设定为再现对象的拍摄图像的再现画面。
图23A是图解说明拍摄构成群组的拍摄图像的例证样子的示图。
在图23A中图解所示的情况下,类似于图7A中图解所示的情况,在人物被设定为被摄对象,被摄对象的前方位置、左侧位置、右侧位置和后方位置被设定为拍摄位置的情况下,利用4台摄像机c#1~c#4拍摄被摄对象。
图23B是图解说明把如图23A中图解所示,通过利用4台摄像机c#1~c#4拍摄被摄对象而获得的一组4个拍摄图像v#1~v#4设定为对象的再现对象设定处理的例子的示图。
这里,作为再现对象设定单元37把一个拍摄图像设定为再现对象的设定模式,例如,存在逐次模式、实时模式和手动模式。
在手动模式下,按照用户对操作单元18的操作,把一个拍摄图像设定为再现对象。
图23B图解说明逐次模式的再现对象设定处理的例子。
在逐次模式下,再现对象设定单元37按照预定顺序,比如位置顺位的顺序等,逐次把群组的4个拍摄图像v#1~v#4设定为再现对象,并把表示再现对象的控制信息提供给再现单元17。
再现单元17把设定为由从再现对象设定单元37供给的控制信息表示的再现对象的拍摄图像的整个区间设定为再现区间,并再现设定为再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
因而,例如,在群组的4个拍摄图像v#1~v#4的位置顺位为“第一”~“第四”,并且再现对象设定单元37按照位置顺位的顺序,逐次把4个拍摄图像v#1~v#4之一设定为再现对象的情况下,在再现单元17中,拍摄图像v#1的整个区间被再现,之后,逐次再现拍摄图像v#2~v#4每一个的整个区间。
这种情况下,显示控制单元14在显示单元15上,显示一个再现画面,在所述一个再现画面上,逐次再现具有相互不同的拍摄位置的4个拍摄图像v#1~v#4每一个的整个区间。
图24是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的另一个例子的示图。
图24A是图解说明拍摄构成群组的拍摄图像的例证样子的示图。
在图24A中图解所示的情况下,在4台摄像机c#1~c#4面向跑道,位于环绕田径赛的跑道周围的椭圆的圆周上的4个点被设定为拍摄位置的情况下,拍摄田径赛。
图24B是图解说明把如图24A中图解所示,通过利用4台摄像机c#1~c#4的拍摄处理获得的一组4个拍摄图像v#1~v#4设定为对象的再现对象设定处理的例子的示图。
换句话说,图24B图解说明实时模式的再现对象设定处理的例子。
在实时模式下,再现对象设定单元37使群组的4个拍摄图像v#1~v#4的时间同步,在实时(正常速度)再现处于时间被同步的状态下的4个拍摄图像v#1~v#4的情况下,从4个拍摄图像v#1~v#4中选择在再现时间(下面也称为实时再现时间)之一被再现的一个拍摄图像,并把选择的拍摄图像设定为拍摄对象。
换句话说,例如,再现对象设定单元37进行把实时再现时间等分成与群组的拍摄图像v#1~v#4的数目对应的4个区间等的分割,对于所述4个区间中的第i区间,把4个拍摄图像v#1~v#4之中的一个拍摄图像(例如,拍摄图像v#i,其位置顺位为“第i”的拍摄图像等)设定为再现对象。
现在,当通过分割实时再现时间而获得的区间被称为分割区间时,对于通过分割实时再现时间而获得的每个分割区间,再现单元17把设定为该分割区间的再现对象的拍摄图像的,对应于该分割区间的区间设定为再现区间,并再现设定为再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
因而,例如,在4个拍摄图像v#1~v#4是从相同的开始时间起,持续相同拍摄时间拍摄的图像,并且对于通过等分实时再现时间而获得的4个分割区间中的第i个分割区间,再现对象设定单元37把4个拍摄图像v#1~v#4之中的拍摄图像v#i设定为再现对象的情况下,在再现单元17中,如图24B中图解所示,在实时再现时间的第一个(最初的)分割区间中,再现拍摄图像v#1的最前的1/4区间,在实时再现时间的第二个分割区间中,再现拍摄图像v#2的1/4~2/4的区间。随后,在实时再现时间的第三个分割区间中,再现拍摄图像v#3的2/4~3/4的区间,在实时再现时间的第四个(最后的)分割区间中,再现拍摄图像v#4的3/4~结尾的区间。
这种情况下,显示控制单元14在显示单元15上显示通过在使其时间彼此同步的情况下,再现拍摄位置彼此不同的拍摄图像v#1~v#4而获得的4个再现画面之中的一个再现画面。
另外,在实时模式下,例如,再现对象设定单元37可把其时间被同步的4个拍摄图像v#1~v#4之中的具有满足预定条件的区间(下面称为条件满足区间)的一个拍摄图像,设定为对应于所述条件满足区间的实时再现时间的区间的再现对象。
这里,条件满足区间可以是在整个条件满足区间中,满足预定条件的区间,或者条件满足区间的仅仅一部分可以是满足预定条件的区间。
另外,在一个拍摄图像中,可能不存在条件满足区间,或者可能存在多个条件满足区间。
不过,条件满足区间不需要与另一个条件满足区间重叠,实时再现时间的每个时间需要被包含在条件满足区间之一中。
在对应于各个条件满足区间的实时再现时间的各个区间中,再现单元17通过利用条件满足区间作为再现区间,再现被设定为该区间的再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
另外在这种情况下,类似于实时再现时间被分成分割区间的情况,显示控制单元14在显示单元15上,显示在拍摄位置彼此不同的4个拍摄图像v#1~v#4的时间被同步的情况下再现的4个再现画面之中的一个再现画面。
这里,作为在条件满足区间中被满足的预定条件,例如,可以使用在拍摄图像中显现特定被摄对象。例如,可通过对于作为对象的拍摄图像进行被摄对象识别,判定在拍摄图像中,是否显现特定被摄对象。
另外,作为在条件满足区间中被满足的预定条件,例如,可以使用拍摄所述拍摄图像的摄像机是靠近特定被摄对象的摄像机。例如,通过允许特定被摄对象携带GPS,并检测所述特定被摄对象的位置,可以判定拍摄所述拍摄图像的摄像机是否是靠近特定被摄对象的摄像机。
在例如使用在拍摄图像中显现特定被摄对象,或者拍摄所述拍摄图像的摄像机靠近特定被摄对象,作为在条件满足区间中被满足的预定条件的情况下,作为再现画面,用户可只观看其中显现特定被摄对象的图像,或者其中邻近存在特定被摄对象的图像。
图25是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的例子的流程图。
当请求其拍摄图像被保存在存储器12中的群组的再现时,在步骤S61,再现对象设定单元37获得用户通过操纵操作单元18设定的设定模式(逐次模式,实时模式或手动模式),处理进入步骤S62。
在步骤S62,再现对象设定单元37按照设定模式,从被请求再现的群组的拍摄图像中,设定再现对象,并把表示所述再现对象的控制信息提供给再现单元17,然后再现对象设定处理结束。
<环形连接判定处理>
下面参考图26-29,说明环形连接判定处理。
在上述情况下,尽管位置顺位被设定成环形连接群组的多个拍摄图像的顺位,并在图4中图解所示的位置顺位附加处理中,这样的位置顺位(下面也称为环形位置顺位)被附加到群组的多个拍摄图像中的每个拍摄图像,不过,位置顺位可被设定成不是环形,而是串联连接群组的多个拍摄图像的顺位,位置顺位附加单元32(图2)可进行其中把这样的位置顺位(下面也称为串联位置顺位)附加到群组的多个拍摄图像中的每个拍摄图像的位置顺位附加处理。
可按照用户的操作,设定向拍摄图像附加环形位置顺位还是串联位置顺位。
另外,位置顺位附加单元32可进行其中进行判定是否环形连接群组的多个拍摄图像的环形连接判定的环形连接判定处理,并按照环形连接判定的结果,向群组的多个拍摄图像附加环形位置顺位或串联位置顺位。
这里,在环形连接判定中,例如,当在环形连接群组的多个拍摄图像的情况下有优势时,可判定环形连接群组的多个拍摄图像,而当在在环形连接群组的多个拍摄图像的情况下无优势时,可判定不环形连接群组的多个拍摄图像。
图26是图解说明在环形连接群组的多个拍摄图像的情况下,无任何优势的情况的例子的示图。
类似于图7B,图26A图解说明在人物被设定为被摄对象,在被摄对象前方的直线上的4个点被设定为拍摄位置的情况下,利用4台摄像机c#1~c#4拍摄被摄对象的拍摄状态。
这种情况下,关于由其拍摄位置位于直线上的摄像机c#1~c#4拍摄的拍摄图像v#1~v#4,例如,如图7B中图解所示,位置顺位附加单元32向由摄像机c#1拍摄的拍摄图像v#1,附加位置顺位“第一”,向由摄像机c#2拍摄的拍摄图像v#2,附加位置顺位“第二”,向由摄像机c#3拍摄的拍摄图像v#3,附加位置顺位“第三”,并向由摄像机c#4拍摄的拍摄图像v#4,附加位置顺位“第四”。
如图26A中所述,图26B图解说明被附加位置顺位的拍摄图像v#1~v#4(的再现画面)的显示例子。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4构成的群组的再现时,例如,如参考图9所述,显示控制单元14按照位置顺位的顺序,从左侧开始对齐地排列拍摄图像v#1~v#4的再现画面,并把排列的再现画面显示在显示单元15上。
在附加到拍摄图像v#1~v#4的位置顺位是环形位置顺位的情况下,当用户把拍摄图像v#1~v#4之一,例如拍摄图像v#3指定为第一个时,在重排单元33进行的重排处理中,例如和参考图9说明的情况中一样,拍摄图像v#1~v#4被重排,以致用户指定的拍摄图像v#3位于第一,同时与环形位置顺位相应的环形连接被维持。
换句话说,如图26B中图解所示,按照拍摄图像v#4,v#1和v#2的顺序,重排拍摄图像,以致拍摄图像v#3位于第一,之后,与环形位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
如上,在向拍摄图像v#1~v#4附加环形位置顺位的情况下,当用户指定拍摄图像时,拍摄图像v#1~v#4被重排,以致用户指定的拍摄图像位于第一,与环形位置顺位相应的环形连接被维持。
不过,如图26A中图解所示,在拍摄图像v#1~v#4是利用其拍摄位置位于直线上的摄像机c#1~c#4拍摄的图像的情况下,例如,如图26B中图解所示,当按照拍摄图像v#4,v#1和v#2的顺序,重排拍摄图像,以致用户指定的拍摄图像v#3位于第一,并且与环形位置顺位相应的环形连接被维持时,存在取决于用户,用户感到难以观看拍摄图像v#1~v#4的情况。因而,难说附加环形位置顺位,并把群组的多个拍摄图像v#1~v#4连接成环形有优势。
因而,位置顺位附加单元32进行其中根据把群组的多个拍摄图像连接成环形是否有优势,进行判定是否环形连接群组的多个拍摄图像的环形连接判定的环形连接判定处理,并按照环形连接判定的结果,或者环形位置顺位,或者串联位置顺位可被附加到群组的多个拍摄图像。
另外,在拍摄图像的文件名中,除了位置顺位之外,还可包括表示附加到拍摄图像的位置顺位是环形位置顺位还是串联位置顺位的信息。
另外,作为存在环形连接群组的多个拍摄图像的优势的情况,例如,可以使用满足如下所述的所有3个条件(1)-(3)的情况等。
条件(1):群组的多个拍摄图像是由3台或更多台摄像机拍摄的图像。
条件(2):连接多台摄像机的拍摄位置的连接线(下面也称为摄像机连接线)是近似具有简单形状,比如圆、椭圆或矩形的图形(原始图形)的轮廓的轨迹。
条件(3):由连接利用摄像机连接线近似的图形的中心,和摄像机连接线的两端的线条在摄像机连接线侧(排列多个摄像机的一侧)形成的角度超过180°。
例如,在图5-8中图解所示的拍摄状态之中,在图6B、7A、8A和8B中图解所示的拍摄状态下拍摄的多个拍摄图像满足所有3个条件(1)-(3),因而,在环形连接判定处理中,获得指示按环形进行连接的判定结果。
另一方面,在图5A-5C、6A、6C、7B和8C中图解所示的拍摄状态下拍摄的多个拍摄图像不满足3个条件(1)-(3)中的至少一个条件,因此,在环形连接判定处理中,获得指示不按环形进行连接的判定结果。
图27是图解说明由位置顺位附加单元32进行环形连接判定处理的例子的流程图。
在步骤S71,位置顺位附加单元32从摄像机位置关系获取单元31,获得拍摄作为附加位置顺位的对象(下面也称为顺位附加对象)的群组的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S72。
在步骤S72,位置顺位附加单元32通过根据拍摄作为顺位附加对象的多个拍摄图像的多台摄像机的摄像机位置关系,使摄像机连接线最短,并且不分枝地(一笔地描画)连接多台摄像机的拍摄位置,获得(描画)作为顺位附加对象的多个拍摄图像的摄像机连接线,然后处理进入步骤S73。
在步骤S73,位置顺位附加单元32评价连接作为摄像机连接线的两端的起点和终点是否可取(摄像机连接线的起点和终点是沿着顺位附加方向确定的),换句话说,通过判定上述3个条件(1)-(3)是否被满足,判定是否沿着摄像机连接线,环形连接作为顺位附加对象的多个拍摄图像。
在作为顺位附加对象的多个拍摄图像满足下述所有条件(1)-(3)的情况下,换句话说,在作为顺位附加对象的多个拍摄图像是由3台或更多台摄像机拍摄的图像(条件(1)),作为顺位附加对象的多个拍摄图像的摄像机连接线是近似原始图形的轮廓的轨迹(条件(2)),并且由连接利用作为顺位附加对象的多个拍摄图像的摄像机连接线近似的图形的中心,和摄像机连接线的两端的线条在摄像机连接线侧形成的角度超过180°(条件(3))的情况下,位置顺位附加单元32判定把作为顺位附加对象的多个拍摄图像连接成环形,然后环形连接判定处理结束。
这种情况下,在位置顺位附加处理中,如参考图4所述,位置顺位附加单元32向作为顺位附加对象的多个拍摄图像附加环形位置顺位。
另一方面,在作为顺位附加对象的多个拍摄图像不满足条件(1)-(3)任意之一的情况下,位置顺位附加单元32判定不把作为顺位附加对象的多个拍摄图像连接成环形,然后环形连接判定处理结束。
这种情况下,在位置顺位附加处理中,位置顺位附加单元32向作为顺位附加对象的多个拍摄图像附加串联位置顺位。
图28是图解说明当在人物被设定为被摄对象,并且被摄对象的前方位置、左侧位置、右侧位置和后方位置被设定为拍摄位置的情况下,通过利用4台摄像机c#1~c#4拍摄被摄对象而获得的4个拍摄图像是顺位附加对象时的环形连接判定处理的示图。
在图28中,摄像机c#2和c#3的拍摄位置被相互连接,摄像机c#3和c#4的拍摄位置被相互连接,摄像机c#1和c#2的拍摄位置被相互连接,由此作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像的摄像机连接线最短,作为可一笔地描画的摄像机连接线,描画近似圆的轮廓的摄像机连接线。
在图28中图解所示的情况下,由于作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像满足所有条件(1)-(3),因此判定沿着摄像机连接线,环形地连接作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像(存在可适当地连接作为摄像机连接线的两端的起点和终点的评价)。
图29是图解说明当在人物被设定为被摄对象,并且在被摄对象的前方侧的直线上的4个点被设定为拍摄位置的情况下,通过利用4台摄像机c#1~c#4拍摄被摄对象而获得的4个拍摄图像是顺位附加对象时的环形连接判定处理的示图。
在图29中,摄像机c#1和c#2的拍摄位置被相互连接,摄像机c#2和c#3的拍摄位置被相互连接,摄像机c#3和c#4的拍摄位置被相互连接,由此作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像的摄像机连接线最短,作为可一笔地描画的摄像机连接线,描画近似直线的摄像机连接线。
在图29中图解所示的情况下,由于作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像不满足条件(1)-(3)之中的条件(2)和(3),因此判定不沿着摄像机连接线,环形地连接作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像(存在作为摄像机连接线的两端的起点和终点将不被连接的评价)。
另外,在环形连接判定处理中,在判定不环形连接作为顺位附加对象的多个拍摄图像,并在位置顺位附加处理中,向作为顺位附加对象的多个拍摄图像附加串联位置顺位的情况下,在重排单元33进行的重排处理中,例如,在群组的多个拍摄图像之中,只有被用户指定为第一的拍摄图像,和串联顺位比所述指定的拍摄图像低的拍摄图像可按照串联顺位的顺序被对齐地排列。另一方面,可配置成不进行重排处理。
<本技术适用于的计算机的说明>
上述一系列处理可以利用硬件执行,或者利用软件执行。在利用软件执行所述一系列处理的情况下,构成所述软件的程序被安装到通用计算机等中。
图30图解说明执行上述一系列处理的程序被安装到的按照实施例的计算机的结构的例子。
程序可被预先记录在作为内置于计算机中的记录介质的硬盘105或ROM103中。
另一方面或者另外地,程序可被保存(记录)在可拆卸记录介质111中。可以所谓的套装软件的形式,提供这种可拆卸记录介质111。这里,作为可拆卸记录介质111的例子,存在软盘、CD-ROM(光盘只读存储器)、MO(磁光)盘、DVD(数字通用光盘)、磁盘、半导体存储器等。
代替把程序从如上所述的可拆卸记录介质111安装到计算机中,可通过经通信网络或广播网络,把程序下载到计算机,把程序安装到内置硬盘105中。换句话说,程序可通过数字卫星广播卫星,从下载站点被无线地传送到计算机,或者可通过诸如LAN(局域网)或因特网之类的网络,被有线地传送到计算机。
计算机具有内置CPU(中央处理器)102,输入/输出接口110通过总线101,连接到CPU102。
当依据输入单元107的用户操作,通过输入/输出接口110输入指令时,CPU102按照所述指令,执行保存在ROM(只读存储器)中的程序。或者,CPU102把保存在硬盘105中的程序载入RAM(随机存取存储器)中,并执行载入的程序。
因而,CPU102进行与上述流程图相应的处理,或者利用上述方框图的结构进行的处理。随后,例如,在必要时,CPU102通过输入/输出接口110,从输出单元106输出处理结果,从通信单元108传送处理结果,或者把处理结果记录在硬盘105中。
输入单元107由键盘、鼠标、麦克风等构成。另外,输出单元106由LCD(液晶显示器)、扬声器等构成。
在本说明书中,计算机按照程序进行的处理不一定需要按照流程图中说明的顺序,时序地进行。换句话说,计算机按照程序进行的处理包括并行或者单独地进行的处理(例如,并行处理或者与对象相应的处理)。
另外,程序可由一个计算机(处理器)处理,或者可由多个计算机分布地处理。此外,程序可被传送给远程计算机,并在所述远程计算机中被执行。
另外,在本说明书中,系统表示一组多个构成元件(设备、模块(组件)等),而不管所有构成元件是否被包含在相同机壳中。因而,设置在独立的机壳中,并通过网络连接的多个设备,或者具有设置在一个机壳中的多个模块的一个设备都是系统。
本技术的实施例不限于上述实施例,在不脱离本技术的原理的范围中,可以作出各种改变。
换句话说,例如,本技术可适用于运动图像或静止图像。
另外,本技术可具有云计算的结构,其中一种功能通过网络分布在多个设备中,并被协同地实现。
此外,在上述流程图中说明的各个步骤可由一个设备进行,或者由多个设备分布地进行。
另外,在一个步骤中包含多个处理的情况下,包含在所述一个步骤中的多个处理可由一个设备执行,或者可由多个设备分布地执行。
此外,在本说明书中说明的优点仅仅是例子,优点并不局限于此,相反可存在其它优点。
另外,本技术可包括以下结构。
<1>一种处理图像信息的方法,所述方法包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;和
按照位置顺位,处理图像。
<2>按照<1>所述的方法,其中相对于被摄对象,确定各个图像的透视位置。
<3>按照<1>或<2>所述的方法,其中所述位置信息包含位置之间的关系。
<4>按照<1>-<3>所述的方法,其中各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
<5>按照<1>-<4>所述的方法,其中根据被摄对象的移动,调整位置顺位。
<6>按照<1>-<5>所述的方法,还包括按照位置顺位合成图像。
<7>按照<6>-<6>所述的方法,其中利用时间分片进行合成。
<8>按照<1>-<7>所述的方法,其中所述路径包含围绕被摄对象的周界的至少一部分。
<9>按照<8>所述的方法,其中所述周界是矩形。
<10>按照<8>或<9>所述的方法,其中所述周界是曲线形。
<11>按照<1>-<10>所述的方法,其中所述路径包含分别对应于多个被摄对象位置的多个分段。
<12>按照<8>-<11>所述的方法,还包括:
按照位置顺位的顺序,显示各个图像。
<13>按照<12>所述的方法,其中所述显示包含逐行对齐各个图像。
<14>按照<12>或<13>所述的方法,还包括变更图像中的最前图像,从而变更图像的顺序。
<15>按照<14>所述的方法,所述变更还包括颠倒待显示的各个图像的顺序。
<16>按照<14>或<15>所述的方法,所述显示包括显示选定数目的图像,按照位置顺位的顺序,所述选定数目的图像之中的相邻两个图像被隔开相同数目的未选定图像。
<17>按照<15>所述的方法,所述显示还包括按照位置顺位的顺序,在再现屏幕上依次再现各个图像。
<18>一种处理图像信息的设备,所述设备包括:
配置成访问与图像相关的位置信息,
配置成识别分别对应于各个图像的透视位置的位置,和
配置成按照位置顺位,处理图像的电路。
<19>一种处理图像信息的设备,所述设备包括:
处理器;和
存储器,所述存储器保存可由处理器执行,以进行各个操作的程序代码,所述各个操作包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;和
按照位置顺位,处理图像。
<1>一种图像处理设备,包括:
摄像机位置关系获取单元,所述摄像机位置关系获取单元获得多台摄像机的位置关系;和
位置顺位附加单元,所述位置顺位附加单元根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
<2>按照<1>所述的图像处理设备,其中位置顺位附加单元向多个拍摄图像附加用于把多个拍摄图像连接成环形的位置顺位。
<3>按照<1>所述的图像处理设备,还包括显示控制单元,所述显示控制单元按照拍摄图像的位置顺位,对齐多个拍摄图像,并把对齐的拍摄图像显示在显示单元上。
<4>按照<3>所述的图像处理设备,还包括重排单元,所述重排单元重排多个拍摄图像,以致多个拍摄图像之中的特定图像被排列在预定位置,同时与位置顺位相应的对齐顺序被维持。
<5>按照<3>或<4>所述的图像处理设备,还包括逆重排单元,所述逆重排单元按照拍摄图像的位置顺位,倒序地重排多个拍摄图像。
<6>按照<3>-<5>任意之一所述的图像处理设备,还包括拍摄状态图像生成单元,所述拍摄状态图像生成单元根据多台摄像机的位置关系,生成表示与多台摄像机相应的拍摄状态的拍摄状态图像,
其中显示控制单元还显示拍摄状态图像。
<7>按照<3>-<6>任意之一所述的图像处理设备,还包括图像间除单元,所述图像间除单元间除待显示在显示单元上的拍摄图像。
<8>按照<7>所述的图像处理设备,
其中图像间除单元通过
设定显示对象图像数,所述显示对象图像数是待显示在显示单元上的拍摄图像的数目,
根据多台摄像机的位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致使选定摄像机的位置等间距,和
把由对应于显示对象图像数的选定摄像机拍摄的拍摄图像设定为待显示在显示单元上的显示对象,
间除待显示在显示单元上的拍摄图像。
<9>按照<3>-<8>任意之一所述的图像处理设备,还包括:
再现对象设定单元,所述再现对象设定单元从多个拍摄图像之中,设定作为再现对象的拍摄图像;和
再现单元,所述再现单元再现作为再现对象的拍摄图像。
<10>按照<9>所述的图像处理设备,
其中再现对象设定单元逐次把多个拍摄图像设定为再现对象,和
其中在作为再现对象的拍摄图像的整个区间被设定为再现区间的情况下,再现单元再现作为再现对象的拍摄图像。
<11>按照<9>所述的图像处理设备,
其中再现对象设定单元把其时间被同步的多个拍摄图像之中的,具有满足预定条件的区间的拍摄图像设定为再现对象,和
其中在作为再现对象的拍摄图像的满足预定条件的区间被设定为再现区间的情况下,再现单元再现作为再现对象的拍摄图像。
<12>按照<1>-<11>任意之一所述的图像处理设备,其中位置顺位附加单元此外按照位置顺位,变更多个拍摄图像的文件名。
<13>一种图像处理方法,包括:获得多台摄像机的位置关系;和根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
<14>一种使计算机起以下作用的程序:摄像机位置关系获取单元,所述摄像机位置关系获取单元获得多台摄像机的位置关系;和位置顺位附加单元,所述位置顺位附加单元根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
本领域的技术人员应明白,根据设计要求和其它因素,可以产生各种修改、组合、子组合和变更,只要它们在所附的权利要求或其等同物的范围之内。
[附图标记列表]
11图像获取单元
12存储器
13时间同步单元
14显示控制单元
15显示单元
16图像排列控制单元
17再现单元
18操作单元
19控制单元
31摄像机位置关系获取单元
32位置顺位附加单元
33重排单元
34逆重排单元
35拍摄状态图像生成单元
36图像间除单元
37再现对象设定单元
101总线
102CPU
103ROM
104RAM
105硬盘
106输出单元
107输入单元
108通信单元
109驱动器
110输入/输出接口
111可拆卸记录介质
Claims (19)
1.一种用于处理图像信息的方法,所述方法包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;和
按照位置顺位处理图像。
2.按照权利要求1所述的方法,其中相对于被摄对象,确定各个图像的透视位置。
3.按照权利要求1所述的方法,其中所述位置信息包含位置之间的关系。
4.按照权利要求1所述的方法,其中各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
5.按照权利要求1所述的方法,其中根据被摄对象的移动,调整位置顺位。
6.按照权利要求1所述的方法,还包括按照位置顺位合成图像。
7.按照权利要求6所述的方法,其中利用时间分片进行合成。
8.按照权利要求1所述的方法,其中所述路径包含围绕被摄对象的周界的至少一部分。
9.按照权利要求8所述的方法,其中所述周界是矩形。
10.按照权利要求8所述的方法,其中所述周界是曲线形。
11.按照权利要求1所述的方法,其中所述路径包含分别对应于多个被摄对象位置的多个分段。
12.按照权利要求8所述的方法,还包括:
按照位置顺位的顺序显示所述图像。
13.按照权利要求12所述的方法,其中所述显示包括逐行对齐图像。
14.按照权利要求12所述的方法,还包括变更图像中的最前图像,从而变更图像的顺序。
15.按照权利要求14所述的方法,所述变更还包括颠倒待显示的图像的顺序。
16.按照权利要求14所述的方法,所述显示包括显示选定数目的图像,并且按照位置顺位的顺序,所述选定数目的图像之中的相邻两个图像被隔开相同数目的未选定图像。
17.按照权利要求15所述的方法,所述显示还包括按照位置顺位的顺序在再现屏幕上依次再现图像。
18.一种用于处理图像信息的设备,所述设备包括:
电路,该电路被配置成访问与图像相关的位置信息,被配置成识别分别对应于各个图像的透视位置的位置,并且被配置成按照位置顺位处理图像。
19.一种用于处理图像信息的设备,所述设备包括:
处理器;和
存储器,所述存储器保存能够由处理器执行以进行操作的程序代码,所述操作包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;以及
按照位置顺位处理图像。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-186305 | 2013-09-09 | ||
JP2013186305A JP6187811B2 (ja) | 2013-09-09 | 2013-09-09 | 画像処理装置、画像処理方法、及び、プログラム |
PCT/JP2014/004472 WO2015033546A1 (en) | 2013-09-09 | 2014-09-01 | Image information processing method, apparatus and program utilizing a camera position sequence |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105359504A true CN105359504A (zh) | 2016-02-24 |
CN105359504B CN105359504B (zh) | 2020-03-24 |
Family
ID=51570814
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480037279.9A Expired - Fee Related CN105359504B (zh) | 2013-09-09 | 2014-09-01 | 利用摄像机位置顺位的图像信息处理方法和设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11265525B2 (zh) |
EP (1) | EP3000111A1 (zh) |
JP (1) | JP6187811B2 (zh) |
CN (1) | CN105359504B (zh) |
WO (1) | WO2015033546A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10360445B2 (en) * | 2016-03-23 | 2019-07-23 | Akcelita, LLC | System and method for tracking persons using a volumetric representation |
US10049462B2 (en) * | 2016-03-23 | 2018-08-14 | Akcelita, LLC | System and method for tracking and annotating multiple objects in a 3D model |
US10614578B2 (en) * | 2016-03-23 | 2020-04-07 | Akcelita, LLC | System and method for tracking people, animals and objects using a volumetric representation and artificial intelligence |
CN107333031B (zh) * | 2017-07-27 | 2020-09-01 | 李静雯 | 一种适用于校园足球比赛的多路视频自动编辑方法 |
JP6841977B2 (ja) * | 2018-06-11 | 2021-03-10 | 富士フイルム株式会社 | 撮影支援装置、撮影支援方法、及び撮影支援プログラム |
JP7193938B2 (ja) * | 2018-07-04 | 2022-12-21 | キヤノン株式会社 | 情報処理装置及びその制御方法、プログラム |
JP7246146B2 (ja) * | 2018-08-28 | 2023-03-27 | 株式会社Nttドコモ | 情報処理装置及び映像投影システム |
US11763467B2 (en) | 2018-09-28 | 2023-09-19 | Intel Corporation | Multi-cam ball location method and apparatus |
US12028507B2 (en) * | 2021-03-11 | 2024-07-02 | Quintar, Inc. | Augmented reality system with remote presentation including 3D graphics extending beyond frame |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020049979A1 (en) * | 2000-05-18 | 2002-04-25 | Patrick White | Multiple camera video system which displays selected images |
FR2834416A1 (fr) * | 2001-12-28 | 2003-07-04 | Thomson Licensing Sa | Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes |
EP1489847A2 (en) * | 2003-06-18 | 2004-12-22 | Matsushita Electric Industrial Co., Ltd. | Video surveillance system, surveillance video composition apparatus, and video surveillance server |
CN1885953A (zh) * | 2005-06-21 | 2006-12-27 | 三星电子株式会社 | 中间矢量内插方法和执行该方法的三维显示装置 |
US20070070210A1 (en) * | 2003-04-11 | 2007-03-29 | Piccionelli Gregory A | Video production with selectable camera angles |
WO2008151416A1 (en) * | 2007-06-12 | 2008-12-18 | In Extenso Holdings Inc. | Distributed synchronized video viewing and editing |
CN102469303A (zh) * | 2010-11-12 | 2012-05-23 | 索尼公司 | 视频监视 |
Family Cites Families (79)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4089597A (en) * | 1976-03-11 | 1978-05-16 | Robert Bruce Collender | Stereoscopic motion picture scanning reproduction method and apparatus |
US4321625A (en) * | 1977-11-16 | 1982-03-23 | Lectrolarm Custom Systems, Inc. | Control system for plurality of video cameras |
US4158487A (en) * | 1978-02-17 | 1979-06-19 | Collender Robert B | Stereoscopic real image scanning reproduction method and apparatus |
US4589140A (en) * | 1983-03-21 | 1986-05-13 | Beltronics, Inc. | Method of and apparatus for real-time high-speed inspection of objects for identifying or recognizing known and unknown portions thereof, including defects and the like |
US5184732A (en) * | 1985-12-20 | 1993-02-09 | Gersan Establishment | Shape sorting |
US4698682A (en) * | 1986-03-05 | 1987-10-06 | Rca Corporation | Video apparatus and method for producing the illusion of motion from a sequence of still images |
FR2661061B1 (fr) * | 1990-04-11 | 1992-08-07 | Multi Media Tech | Procede et dispositif de modification de zone d'images. |
US5258837A (en) * | 1991-01-07 | 1993-11-02 | Zandar Research Limited | Multiple security video display |
US5448291A (en) * | 1993-06-30 | 1995-09-05 | Wickline; Dennis E. | Live video theater and method of presenting the same utilizing multiple cameras and monitors |
US5613048A (en) * | 1993-08-03 | 1997-03-18 | Apple Computer, Inc. | Three-dimensional image synthesis using view interpolation |
US7843497B2 (en) * | 1994-05-31 | 2010-11-30 | Conley Gregory J | Array-camera motion picture device, and methods to produce new visual and aural effects |
US5729471A (en) * | 1995-03-31 | 1998-03-17 | The Regents Of The University Of California | Machine dynamic selection of one video camera/image of a scene from multiple video cameras/images of the scene in accordance with a particular perspective on the scene, an object in the scene, or an event in the scene |
US6522325B1 (en) * | 1998-04-02 | 2003-02-18 | Kewazinga Corp. | Navigable telepresence method and system utilizing an array of cameras |
US6538698B1 (en) * | 1998-08-28 | 2003-03-25 | Flashpoint Technology, Inc. | Method and system for sorting images in an image capture unit to ease browsing access |
US6707487B1 (en) * | 1998-11-20 | 2004-03-16 | In The Play, Inc. | Method for representing real-time motion |
JP4167777B2 (ja) * | 1999-07-19 | 2008-10-22 | 三菱電機株式会社 | 映像表示装置、映像表示方法および映像を表示するためのプログラムを記録した記録媒体 |
US7015954B1 (en) * | 1999-08-09 | 2006-03-21 | Fuji Xerox Co., Ltd. | Automatic video system using multiple cameras |
AU2001264723A1 (en) * | 2000-05-18 | 2001-11-26 | Imove Inc. | Multiple camera video system which displays selected images |
JP2002252830A (ja) * | 2001-02-22 | 2002-09-06 | Hitachi Kokusai Electric Inc | 画像記録装置 |
US7540011B2 (en) * | 2001-06-11 | 2009-05-26 | Arrowsight, Inc. | Caching graphical interface for displaying video and ancillary data from a saved video |
US7046292B2 (en) * | 2002-01-16 | 2006-05-16 | Hewlett-Packard Development Company, L.P. | System for near-simultaneous capture of multiple camera images |
US6710713B1 (en) * | 2002-05-17 | 2004-03-23 | Tom Russo | Method and apparatus for evaluating athletes in competition |
JP2004186824A (ja) * | 2002-11-29 | 2004-07-02 | Jikei Univ School Of Medicine | 時空間多重画像装置および方法 |
EP2408193A3 (en) * | 2004-04-16 | 2014-01-15 | James A. Aman | Visible and non-visible light sensing camera for videoing and object tracking |
US7292257B2 (en) * | 2004-06-28 | 2007-11-06 | Microsoft Corporation | Interactive viewpoint video system and process |
FR2872943B1 (fr) * | 2004-07-07 | 2006-10-27 | Leo Vision Soc Par Actions Sim | Procede d'obtention d'une succession d'images sous la forme d'un effet tournant |
US8723956B2 (en) * | 2004-08-30 | 2014-05-13 | Trace Optic Technologies Pty Ltd | Method and apparatus of camera control |
JP2006086671A (ja) * | 2004-09-15 | 2006-03-30 | Hitachi Ltd | 自動追尾機能を有する撮像装置 |
WO2007026744A1 (ja) * | 2005-08-30 | 2007-03-08 | National University Corporation NARA Institute of Science and Technology | 広域分散カメラ間の連結関係推定法および連結関係推定プログラム |
JP4525618B2 (ja) * | 2006-03-06 | 2010-08-18 | ソニー株式会社 | 映像監視システムおよび映像監視プログラム |
JP4561657B2 (ja) * | 2006-03-06 | 2010-10-13 | ソニー株式会社 | 映像監視システムおよび映像監視プログラム |
JP4725452B2 (ja) * | 2006-08-04 | 2011-07-13 | 株式会社ニコン | デジタルカメラ及び画像処理プログラム |
WO2008035745A1 (en) * | 2006-09-20 | 2008-03-27 | Panasonic Corporation | Monitor system, camera and video image coding method |
US8274564B2 (en) * | 2006-10-13 | 2012-09-25 | Fuji Xerox Co., Ltd. | Interface for browsing and viewing video from multiple cameras simultaneously that conveys spatial and temporal proximity |
US8094182B2 (en) * | 2006-11-16 | 2012-01-10 | Imove, Inc. | Distributed video sensor panoramic imaging system |
JP2008147838A (ja) * | 2006-12-07 | 2008-06-26 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
AU2006252090A1 (en) * | 2006-12-18 | 2008-07-03 | Canon Kabushiki Kaisha | Dynamic Layouts |
US7992097B2 (en) * | 2006-12-22 | 2011-08-02 | Apple Inc. | Select drag and drop operations on video thumbnails across clip boundaries |
US7898576B2 (en) * | 2007-02-28 | 2011-03-01 | Honeywell International Inc. | Method and system for indexing and searching objects of interest across a plurality of video streams |
JP4730341B2 (ja) * | 2007-06-06 | 2011-07-20 | 株式会社日立製作所 | 撮像装置 |
JP4416017B2 (ja) * | 2007-07-18 | 2010-02-17 | ソニー株式会社 | 撮像システム |
US20090113505A1 (en) * | 2007-10-26 | 2009-04-30 | At&T Bls Intellectual Property, Inc. | Systems, methods and computer products for multi-user access for integrated video |
JP2009109880A (ja) * | 2007-10-31 | 2009-05-21 | Sony Corp | 表示制御装置、表示制御方法、およびプログラム |
US9690442B2 (en) * | 2008-10-17 | 2017-06-27 | Adobe Systems Incorporated | Generating customized effects for image presentation |
JP2010113655A (ja) * | 2008-11-10 | 2010-05-20 | Canon Inc | 画像処理装置、画像処理装置の制御方法、及び制御プログラム |
JP5537040B2 (ja) * | 2009-01-28 | 2014-07-02 | キヤノン株式会社 | 表示制御装置および表示制御方法 |
US8180107B2 (en) * | 2009-02-13 | 2012-05-15 | Sri International | Active coordinated tracking for multi-camera systems |
US20120020518A1 (en) * | 2009-02-24 | 2012-01-26 | Shinya Taguchi | Person tracking device and person tracking program |
US9479768B2 (en) * | 2009-06-09 | 2016-10-25 | Bartholomew Garibaldi Yukich | Systems and methods for creating three-dimensional image media |
JP2011033870A (ja) * | 2009-08-03 | 2011-02-17 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
US8564623B2 (en) * | 2009-12-11 | 2013-10-22 | Molecular Devices, Llc | Integrated data visualization for multi-dimensional microscopy |
US8274592B2 (en) * | 2009-12-22 | 2012-09-25 | Eastman Kodak Company | Variable rate browsing of an image collection |
JP2011135246A (ja) * | 2009-12-24 | 2011-07-07 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP2011166264A (ja) * | 2010-02-05 | 2011-08-25 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
US8787618B2 (en) * | 2010-04-13 | 2014-07-22 | Sony Corporation | Content information processing device, content information processing method, content information processing program, and personal digital assistant |
JP2012004739A (ja) | 2010-06-15 | 2012-01-05 | Sony Corp | 情報処理装置、情報処理方法、及びプログラム |
JP5724230B2 (ja) * | 2010-07-07 | 2015-05-27 | ソニー株式会社 | 表示制御装置、表示制御方法、プログラム |
US8555170B2 (en) * | 2010-08-10 | 2013-10-08 | Apple Inc. | Tool for presenting and editing a storyboard representation of a composite presentation |
JP5678576B2 (ja) * | 2010-10-27 | 2015-03-04 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、および監視システム |
US8861890B2 (en) * | 2010-11-24 | 2014-10-14 | Douglas Alan Lefler | System and method for assembling and displaying individual images as a continuous image |
US9007432B2 (en) * | 2010-12-16 | 2015-04-14 | The Massachusetts Institute Of Technology | Imaging systems and methods for immersive surveillance |
US9182229B2 (en) * | 2010-12-23 | 2015-11-10 | Trimble Navigation Limited | Enhanced position measurement systems and methods |
JP5977922B2 (ja) * | 2011-02-24 | 2016-08-24 | セイコーエプソン株式会社 | 情報処理装置および情報処理装置の制御方法、透過型頭部装着型表示装置 |
CN104765801A (zh) * | 2011-03-07 | 2015-07-08 | 科宝2股份有限公司 | 用于从事件或地理位置处的图像提供者进行分析数据采集的系统及方法 |
JP2012242918A (ja) * | 2011-05-17 | 2012-12-10 | Sony Corp | 情報処理装置、情報処理方法及びプログラム |
JP5316588B2 (ja) * | 2011-05-30 | 2013-10-16 | 沖電気工業株式会社 | 映像配信システム及び方法 |
JP5967473B2 (ja) * | 2011-06-03 | 2016-08-10 | パナソニックIpマネジメント株式会社 | 撮像装置及び撮像システム |
US8405740B2 (en) * | 2011-06-24 | 2013-03-26 | Eastman Kodak Company | Guidance for image capture at different locations |
US9437247B2 (en) * | 2011-11-14 | 2016-09-06 | Apple Inc. | Preview display for multi-camera media clips |
US9449583B2 (en) * | 2011-12-15 | 2016-09-20 | Lenovo (Beijing) Co., Ltd. | Control method and electronic apparatus |
JP5548671B2 (ja) * | 2011-12-27 | 2014-07-16 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理システム、画像提供サーバ、情報処理装置、および画像処理方法 |
US20130215239A1 (en) * | 2012-02-21 | 2013-08-22 | Sen Wang | 3d scene model from video |
GB2502065A (en) * | 2012-05-14 | 2013-11-20 | Sony Corp | Video comparison apparatus for sports coverage |
US9257090B2 (en) * | 2012-10-04 | 2016-02-09 | Spirority, Inc. | Graphical display of content on a display device in a spiral pattern |
US9311310B2 (en) * | 2012-10-26 | 2016-04-12 | Google Inc. | System and method for grouping related photographs |
US9087386B2 (en) * | 2012-11-30 | 2015-07-21 | Vidsys, Inc. | Tracking people and objects using multiple live and recorded surveillance camera video feeds |
US9292936B2 (en) * | 2013-01-09 | 2016-03-22 | Omiimii Ltd. | Method and apparatus for determining location |
US9118843B2 (en) * | 2013-01-17 | 2015-08-25 | Google Inc. | Methods and systems for creating swivel views from a handheld device |
US9462301B2 (en) * | 2013-03-15 | 2016-10-04 | Google Inc. | Generating videos with multiple viewpoints |
-
2013
- 2013-09-09 JP JP2013186305A patent/JP6187811B2/ja active Active
-
2014
- 2014-09-01 EP EP14767156.4A patent/EP3000111A1/en not_active Ceased
- 2014-09-01 US US14/901,770 patent/US11265525B2/en active Active
- 2014-09-01 WO PCT/JP2014/004472 patent/WO2015033546A1/en active Application Filing
- 2014-09-01 CN CN201480037279.9A patent/CN105359504B/zh not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020049979A1 (en) * | 2000-05-18 | 2002-04-25 | Patrick White | Multiple camera video system which displays selected images |
FR2834416A1 (fr) * | 2001-12-28 | 2003-07-04 | Thomson Licensing Sa | Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes |
FR2834416B1 (fr) * | 2001-12-28 | 2004-05-21 | Thomson Licensing Sa | Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes |
US20070070210A1 (en) * | 2003-04-11 | 2007-03-29 | Piccionelli Gregory A | Video production with selectable camera angles |
EP1489847A2 (en) * | 2003-06-18 | 2004-12-22 | Matsushita Electric Industrial Co., Ltd. | Video surveillance system, surveillance video composition apparatus, and video surveillance server |
CN1885953A (zh) * | 2005-06-21 | 2006-12-27 | 三星电子株式会社 | 中间矢量内插方法和执行该方法的三维显示装置 |
WO2008151416A1 (en) * | 2007-06-12 | 2008-12-18 | In Extenso Holdings Inc. | Distributed synchronized video viewing and editing |
CN102469303A (zh) * | 2010-11-12 | 2012-05-23 | 索尼公司 | 视频监视 |
Also Published As
Publication number | Publication date |
---|---|
EP3000111A1 (en) | 2016-03-30 |
US11265525B2 (en) | 2022-03-01 |
WO2015033546A1 (en) | 2015-03-12 |
JP2015053636A (ja) | 2015-03-19 |
CN105359504B (zh) | 2020-03-24 |
JP6187811B2 (ja) | 2017-08-30 |
US20160381339A1 (en) | 2016-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105359504A (zh) | 利用摄像机位置顺位的图像信息处理方法,设备和程序 | |
US11854149B2 (en) | Techniques for capturing and displaying partial motion in virtual or augmented reality scenes | |
US10304238B2 (en) | Geo-located activity visualisation, editing and sharing | |
US9723223B1 (en) | Apparatus and method for panoramic video hosting with directional audio | |
US10686985B2 (en) | Moving picture reproducing device, moving picture reproducing method, moving picture reproducing program, moving picture reproducing system, and moving picture transmission device | |
US8907941B2 (en) | System and method for integrating multiple virtual rendering systems to provide an augmented reality | |
US20180367777A1 (en) | Tracking a point of interest in a panoramic video | |
JP6580045B2 (ja) | 映像制作物を作るための方法及びシステム | |
US20120092348A1 (en) | Semi-automatic navigation with an immersive image | |
AU2015360252A1 (en) | Systems and methods for displaying thermographic characteristics within a broadcast | |
CN105210379A (zh) | 显示控制装置、显示控制方法和程序 | |
JP2021029044A (ja) | 情報処理装置、情報処理方法、プログラム | |
US20180268565A1 (en) | Methods and systems for film previsualization | |
US20160379682A1 (en) | Apparatus, method and computer program | |
WO2016079462A1 (en) | Light control | |
US20160381290A1 (en) | Apparatus, method and computer program | |
Langlotz et al. | AR record&replay: situated compositing of video content in mobile augmented reality | |
Wu et al. | Enhancing fan engagement in a 5G stadium with AI-based technologies and live streaming | |
AU2019271924A1 (en) | System and method for adjusting an image for a vehicle mounted camera | |
CN110324641A (zh) | 全景视频中保持兴趣目标时刻显示的方法及装置 | |
KR101703321B1 (ko) | 복합 컨텐츠의 제공 방법 및 장치 | |
Löwe et al. | Gaze visualization for immersive video | |
US11276242B2 (en) | Method and system for practicing group formations using augmented reality | |
Zollmann et al. | Augmented reality for sports spectating and coaching | |
WO2015169165A1 (en) | Method and system for creating replate videos |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200324 |