CN105359504B - 利用摄像机位置顺位的图像信息处理方法和设备 - Google Patents

利用摄像机位置顺位的图像信息处理方法和设备 Download PDF

Info

Publication number
CN105359504B
CN105359504B CN201480037279.9A CN201480037279A CN105359504B CN 105359504 B CN105359504 B CN 105359504B CN 201480037279 A CN201480037279 A CN 201480037279A CN 105359504 B CN105359504 B CN 105359504B
Authority
CN
China
Prior art keywords
images
order
image
captured
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480037279.9A
Other languages
English (en)
Other versions
CN105359504A (zh
Inventor
稻叶靖二郎
小坂井良太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105359504A publication Critical patent/CN105359504A/zh
Application granted granted Critical
Publication of CN105359504B publication Critical patent/CN105359504B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H04N5/2627Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect for providing spin image effect, 3D stop motion effect or temporal freeze effect
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30244Camera pose
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Abstract

处理图像信息的方法包括访问与图像相关的位置信息,识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位,和按位置顺位的顺序,显示图像。根据被摄对象的移动,调整位置顺位。

Description

利用摄像机位置顺位的图像信息处理方法和设备
技术领域
本技术涉及图像处理设备,图像处理方法和程序,更具体地,涉及能够以用户可容易地处理的形式,提供由多个摄像机拍摄的多个图像的图像处理设备,图像处理方法和程序。
相关申请的引用
本申请要求2013年9月9日提交的日本专利申请JP 2013-186305的优先权,该申请的整个内容通过引用包含于此。
背景技术
例如,提出了通过利用由多个摄像机拍摄的多个运动图像作为素材,编辑运动图像的技术(例如,参见PTL 1)。
[引文列表]
[专利文献]
[PTL 1]JP 2012-004739 A
发明内容
在编辑或观看利用多台摄像机拍摄的作为编辑用素材的多个运动图像时,在简单排列成行地显示多个运动图像(其再现画面,或者运动图像的最初图像的符号)的情况下,例如,在彼此靠近的位置拍摄的运动图像可能被排列成彼此远离,或者在彼此远离的位置拍摄的运动图像可能被排列成彼此靠近,这使得用户难以处理运动图像。
考虑到这样的情况,发明了本技术,本发明将以用户可容易地处理的形式,提供由多台摄像机拍摄的多个图像。
处理图像信息的方法包括访问与图像相关的位置信息,其中所述位置信息识别分别对应于各个图像的透视位置的位置,并包含所述位置之间的关系。所述方法还包括识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位(position sequence),并按照位置顺位,处理图像,所述位置顺位可根据被摄对象的移动而被调整。具体地,所述路径包含围绕被摄对象的矩形或曲线形周界的至少一部分。另外,相对于被摄对象,确定各个图像的透视位置,各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
所述方法还包括按照位置顺位,利用时间分片合成图像,并按照位置顺位的顺序,逐行地显示各个图像。在显示图像之时,选择顶部图像,以变更图像的顺序,或者颠倒待显示的图像的顺序。
所述方法还包括按照位置顺位的顺序,在再现屏幕上依次再现各个图像。
为实现处理图像信息的方法而设计的设备包括处理器和存储器,所述存储器保存可由处理器执行,以进行所述方法的程序。
按照本技术的实施例,以用户可容易地处理的形式,提供由多台摄像机拍摄的多个图像。
另外,优点不一定局限于这里说明的优点,可以是未在本公开中说明的优点。
附图说明
图1是图解说明由多台摄像机拍摄的图像的观看的例子的示图。
图2是图解说明本技术适用于的按照实施例的图像处理设备的结构例子的方框图。
图3是图解说明图像处理设备进行的图像处理的例子的概况的示图。
图4是图解说明由摄像机位置关系获取单元31和位置顺位附加单元 32进行的位置顺位附加处理的例子的流程图。
图5是图解说明在利用两台摄像机c#1和c#2拍摄两个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图6是图解说明在利用三台摄像机c#1、c#2和c#3拍摄三个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图7是图解说明在利用四台摄像机c#1、c#2、c#3和c#4拍摄四个拍摄图像的情况下的位置顺位附加处理的例子的示图。
图8是图解说明位置顺位附加处理的其它例子的示图。
图9是图解说明由重排单元33进行的重排处理的第一例子的示图。
图10是图解说明由重排单元33进行的重排处理的第二例子的示图。
图11是图解说明由重排单元33进行的重排处理的第三例子的示图。
图12是图解说明由重排单元33进行的重排处理的第四例子的示图。
图13是图解说明由重排单元33进行的重排处理的第五例子的示图。
图14是图解说明由重排单元33进行的重排处理的例子的流程图。
图15是图解说明由逆重排单元34进行的逆重排处理的例子的示图。
图16是图解说明由逆重排单元34进行的逆重排处理的例子的流程图。
图17是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第一显示例子的示图。
图18是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第二显示例子的示图。
图19是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第三显示例子的示图。
图20是图解说明由摄像机位置关系获取单元31和拍摄状态图像生成单元35进行的拍摄状态图像生成处理的例子的流程图。
图21是图解说明由显示控制单元14和图像间除单元36进行的图像间除处理的例子的示图。
图22是图解说明由显示控制单元14和图像间除单元36进行的图像间除处理的例子的流程图。
图23是图解说明由再现对象设定单元37进行的再现对象设定处理的例子的示图。
图24是图解说明由再现对象设定单元37进行的再现对象设定处理的另一个例子的示图。
图25是图解说明由再现对象设定单元37进行的再现对象设定处理的例子的流程图。
图26是图解说明在环状连接群组的多个拍摄图像的情况下,无任何优势的情况的例子的示图。
图27是图解说明由位置顺位附加单元32进行环形连接判定处理的例子的流程图。
图28是图解说明环形连接判定处理的示图。
图29是图解说明环形连接判定处理的示图。
图30是图解说明本技术适用于的按照实施例的计算机的结构的例子的方框图。
具体实施方式
<利用多台摄像机拍摄的图像的观看>
图1是图解说明由多台摄像机拍摄的图像的观看的例子的示图。
如图1中图解所示,在足球场中,利用多台摄像机从各个拍摄位置,拍摄足球比赛。
这里,作为利用多台摄像机拍摄足球比赛的情况,例如,存在其中广播台为节目广播拍摄足球比赛的情况,可以考虑其中作为团体的多个观众通过利用手持的摄像机,或者穿戴可穿戴摄像机,拍摄足球比赛的情况等。
现在,假定通过使用任意方法,获得利用摄像机拍摄的图像(下面也称为拍摄图像),然后编辑和观看利用多台摄像机拍摄的多个拍摄图像。
在这种情况下,如图1中图解所示,通过简单排列成行地显示多个拍摄图像(其再现画面,或者运动图像的初始画面等的符号),尤其是在拍摄图像的数目较大的情况下,当用户注视特定的拍摄图像,并且希望观看在与所述特定拍摄图像的拍摄位置相近的拍摄位置拍摄的拍摄图像时,难以立即获得该拍摄图像被显示在的位置,从而用户难以处理图像。
从而,按照本技术的实施例,以用户可容易地处理的形式,提供由多台摄像机拍摄的多个拍摄图像。
<本技术适用于的按照实施例的图像处理设备>
图2是图解说明本技术适用于的按照实施例的图像处理设备的结构例子的方框图。
如图2中图解所示,图像处理设备包括:图像获取单元11;存储器 12;时间同步单元13;显示控制单元14;显示单元15,图像排列控制单元16;再现单元17;操作单元18;和控制单元19。
图像获取单元11获得通过利用多台摄像机,拍摄预定的拍摄对象,例如足球比赛、特定人物等而得到的多个拍摄图像。
例如,利用多台摄像机拍摄的多个拍摄图像以预定格式的运动图像文件的形式,保存在预定服务器(包括云上的服务器)中,图像获取单元 11通过从所述服务器下载拍摄图像,可获得所述多个拍摄图像(的文件)。
另外,例如,通过图像获取单元11与多台摄像机通信,可从多台摄像机获得利用多台摄像机拍摄的多个拍摄图像。
图像获取单元11把从服务器等获得的多个拍摄图像(的文件)提供给存储器12。
例如,存储器12由硬盘、半导体存储器等构成,保存从图像获取单元11供给的多个拍摄图像(的文件)。
时间同步单元13生成表示多个拍摄图像的拍摄开始时间的差异的同步信息,用于使保存在存储器12中的多个拍摄图像的时间同步,并把生成的同步信息提供给显示控制单元14。另外,伴随再现单元17再现的拍摄图像的声音可被提供给时间同步单元13,时间同步单元13利用所述声音,生成同步信息。
显示控制单元14通过在必要时利用从时间同步单元13供给的同步信息,或者从图像排列控制单元16供给的信息,进行在显示单元15上,显示保存在存储器12中的拍摄图像(的符号),或者从再现单元17供给的拍摄图像(的再现画面)的显示控制。
例如,显示单元15由LCD(液晶显示器)、有机EL(电致发光)显示器等构成,按照显示控制单元14的控制显示图像。
图像排列控制单元16生成用于控制显示在显示单元15上的拍摄图像的排列(对齐)的信息等,并把生成的信息等提供给显示控制单元14,从而控制显示在显示单元15上的拍摄图像(的符号或再现画面)的排列等。
换句话说,图像排列控制单元16包括:摄像机位置关系获取单元31;位置顺位附加单元32;重排单元33;逆重排单元34;拍摄状态图像生成单元35;图像间除单元36;和再现对象设定单元37。
摄像机位置关系获取单元31获得拍摄保存在存储器12中的多个拍摄图像的多台摄像机的位置关系(下面也称为摄像机位置关系)。
这里,在摄像机位置关系中,至少包括摄像机的拍摄位置(拍摄时的位置)。
另外,在摄像机位置关系中,可包括摄像机的拍摄方向(拍摄时的摄像机的方向)。
例如,作为摄像机位置关系的拍摄位置和拍摄方向可以是利用多台摄像机中的任意摄像机等作为基准获得的相对值,或者是绝对值。
例如,在各个摄像机中,可以内置GPS(全球定位系统)或方向传感器,从GPS或方向传感器,可以获得摄像机位置关系。
另外,例如,可根据利用多台摄像机拍摄的多个拍摄图像,通过计算估计摄像机位置关系。换句话说,摄像机位置关系获取单元31可通过利用时间同步单元13生成的同步信息,使再现单元17再现的多个拍摄图像的时间同步,并根据此时其时间被同步的多个拍摄图像,通过计算估计摄像机位置关系。
位置顺位附加单元32根据由摄像机位置关系获取单元31获得的摄像机位置关系等,进行位置顺位附加处理,在所述位置顺位附加处理中,向保存在存储器12中的由多台摄像机拍摄的多个拍摄图像中的每个拍摄图像附加位置顺位,以便把多个拍摄图像连接成环形。
这里,位置顺位附加处理将在后面详细说明。
重排单元33进行重排处理,在所述重排处理中,多个拍摄图像被重排,以致多个拍摄图像中的特定图像位于预定位置,同时与保存在存储器12中的多个拍摄图像的位置顺位相应的对齐顺序被维持。
逆重排单元34进行逆重排处理,在所述逆重排处理中,按照相反的顺序重排与拍摄图像的位置顺位相应的多个拍摄图像的排列。
拍摄状态图像生成单元35根据由摄像机位置关系获取单元31获得的摄像机位置关系,进行拍摄状态图像生成处理,在所述拍摄状态图像生成处理中,生成表示与拍摄保存在存储器12中的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像。
图像间除单元36进行其中间除待显示在显示单元14上的拍摄图像的图像间除处理。
再现对象设定单元37进行再现对象设定处理,在所述再现对象设定处理中,设定保存在存储器12中的多个拍摄图像之中的作为再现对象的拍摄图像。
再现单元17再现保存在存储器12中的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
操作单元18由用户操作,把与操作对应的操作信号提供给控制单元 19。
控制单元19控制整个图像处理设备(构成图像处理设备的各个部件)。
另外,例如,控制单元19按照操作单元18的操作,进行对于保存在存储器12中的拍摄图像的编辑处理,比如入点和出点的设定,或者效果的增加。
图3是图解说明由图2中例示的图像处理设备进行的图像处理的例子的概况的示图。
在图像处理设备中,例如,时间同步单元13生成表示多个拍摄图像的拍摄开始时间的差异的同步信息,用于使保存在存储器12中的多个拍摄图像的时间同步,并把生成的同步信息提供给显示控制单元14。
显示控制单元14根据从时间同步单元13供给的同步信息,可显示保存在存储器12中的多个拍摄图像的符号。这种情况下,例如,如图3 中图解所示,在水平轴被设定为时间的情况下,多个拍摄图像的符号被排列成沿垂直方向对齐,以致使它们的时间同步。
这里,在图3中,作为拍摄图像的符号,使用类似长度与拍摄图像的拍摄时间成比例的胶片卷的图像。
在图像处理设备中,代替如上所述,使时间同步地对齐排列多个拍摄图像(的符号等),可按照位置顺位,对齐地排列多个拍摄图像。
换句话说,在图像处理设备的图像排列控制单元16中,照相机位置关系获取单元31获得保存在存储器12中的多个拍摄图像的摄像机位置关系,位置顺位附加单元32根据摄像机位置关系,向保存在存储器12 中的多个拍摄图像附加位置顺位,并把作为结果的拍摄图像提供给显示控制单元14。
按照位置顺位附加单元32附加的位置顺位,例如如图3中图解所示,在垂直轴被设定为位置顺位的情况下,显示控制单元14把多个拍摄图像的符号排列成按位置顺位的顺序,在垂直方向被对齐。
如上,按照图像处理设备,多个拍摄图像的符号具有在水平轴和垂直轴被设定为时间和位置顺位的情况下,将被彼此同步的时间,并被排列成按位置顺位的顺序被对齐。
之后,当用户操纵操作单元18,以便进行剪切、合并、添加音乐等时,控制单元19按照所述操作,进行编辑操作,从而生成作为完整一套节目的所谓的运动图像。
作为控制单元19进行的编辑操作的模式,例如,存在手动模式和自动模式。
在手动模式下,控制单元19按照用户对于操作单元18的操作,进行编辑操作。
在自动模式下,例如,控制单元19进行从多个拍摄图像中,检测诸如精彩场景之类的预定场景,并接合各个场景的编辑操作。
作为精彩场景,可在其时间被同步的多个拍摄图像之中,检测在各个时间,表示兴奋度的精彩度为预定阈值或更大的拍摄图像中的精彩度最高的一个拍摄图像。
例如,作为精彩度,可以使用与声音的大小,或者显现在拍摄图像中的被摄对象的移动、大小等成比例的值。
另外,在自动模式下,代替只检测其精彩度等于或大于阈值,并且最高的一个拍摄图像,其精彩度等于或大于阈值的所有拍摄图像都可被检测为精彩场景。
在其精彩度等于或大于阈值的所有拍摄图像都被检测为精彩场景的情况下,存在两个或更多的拍摄图像被检测为精彩场景的情况。当两个或更多的拍摄图像被检测为精彩场景时,作为精彩场景的所述两个或更多的拍摄图像被排列成分割显示单元15的屏幕。
在这种情况下,在完整一套节目中,存在其中只显示一个拍摄图像的情况,和其中分割屏幕地显示两个或更多的拍摄图像的情况。例如,在保存在存储器12中的所有多个拍摄图像的精彩度都等于或大于阈值的情况下,分割屏幕地显示所有多个拍摄图像。
在自动模式下,可以按照用户对操作单元18的操作,设定是只检测其精彩度等于或大于阈值,并且最高的一个拍摄图像,作为精彩场景,还是检测其精彩度都等于或大于阈值的所有拍摄图像,作为精彩场景。
另外,除此之外,例如,图像处理设备可被配置成以致再现单元17 同时再现其时间被同步的多个拍摄图像,显示控制单元14从再现单元17 再现的多个拍摄图像之中,选择按照用户对操作单元18的操作选择的一个拍摄图像,并把选择的拍摄图像显示在显示单元15上。
此外,当再现单元17再现的多个拍摄图像的精彩度都小于阈值时,显示控制单元14可显示用户选择的一个拍摄图像,当一个或多个拍摄图像的精彩度变成阈值或更大时,显示控制单元可显示其精彩度变成阈值或更大的一个或多个拍摄图像之中的其精彩度最高的一个拍摄图像,或者对应于用户指定的数目或更少的拍摄图像,以在必要时分割显示单元 15的屏幕。
在这种情况下,用户能够容易地获得精彩场景。
<位置顺位附加处理>
图4是图解说明由图2中例示的摄像机位置关系获取单元31和位置顺位附加单元32进行的位置顺位附加处理的例子的流程图。
在步骤S11,摄像机位置关系获取单元31获得拍摄了保存在存储器 12中的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S12。
在步骤S12,位置顺位附加单元32根据摄像机位置关系获取单元31 获得的摄像机位置关系,向保存在存储器12中的多个拍摄图像附加位置顺位,以便把多个拍摄图像连接成环形,然后终止位置顺位附加处理。
这里,在位置顺位附加处理中,作为附加一系列位置顺位的对象的多个拍摄图像是通过在(几乎)相同的时隙,拍摄相同的对象(被摄对象、比赛等)而获得的多个图像,下面,这样的多个拍摄图像的单元(集合)也将被称为群组。
图5是图解说明在利用两台摄像机c#1和c#2拍摄两个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图5A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置及(朝向被摄对象的)右侧位置被设定为拍摄位置的情况下,利用两台摄像机c#1和c#2拍摄被摄对象的拍摄状态。
在这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,显现在摄像机c#1拍摄的拍摄图像中的面向正面的被摄对象,和显现在摄像机c#2拍摄的拍摄图像中的右侧面的被摄对象,认识到摄像机c#1和c#2的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向(轨迹)。
这里,在多台摄像机位于以被摄对象作为其中心的圆的圆周上的情况下,作为沿着所述圆周的方向,存在两个方向,即圆周的顺时针方向和逆时针方向,这两个方向中的任意方向可被设定为顺位附加方向。在图5A中,逆时针方向被设定为顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1和c#2 拍摄的拍摄图像附加位置顺位。
这里,作为位置顺位,例如,可以使用把“第一”作为其初始值的整数。
在顺位的方向是当沿着顺位的方向,比如顺着圆周的方向前进时,最终回到初始位置的方向(轨迹)的情况下,可向由多台摄像机之中的任意摄像机拍摄的拍摄图像,附加“第一”的位置顺位。
因而,在图5A中图解所示的情况下,例如,可向由摄像机c#1和 c#2之中的摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位。在这种情况下,向由从摄像机c#1(的拍摄位置)起,沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
另外,在图5A中图解所示的情况下,例如,可向由摄像机c#2拍摄的拍摄图像附加“第一”的位置顺位。在这种情况下,向由从摄像机c#2(的拍摄位置)起,沿着顺位附加方向到达的摄像机c#1拍摄的拍摄图像,附加“第二”的位置顺位。
图5B图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置及后方位置被设定为拍摄位置的情况下,利用两台摄像机c#1和c#2 拍摄被摄对象的拍摄状态。
在这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,即,摄像机c#1和c#2的拍摄位置在直线上,并且摄像机 c#1和c#2的拍摄方向彼此相差180°,认识到摄像机c#1和c#2的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
这里,在图5B中图解所示的情况下,类似于图5A中图解所示的情况,圆周的逆时针方向被设定为顺位附加方向。
如参考图5A所述,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1和c#2拍摄的拍摄图像附加位置顺位。
因而,在5B中图解所示的情况下,例如,向由摄像机c#1和c#2之中的摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向由从摄像机 c#1起,沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
另一方面,在图5B中图解所示的情况下,例如,向由摄像机c#2拍摄的拍摄图像附加“第一”的位置顺位,向由从摄像机c#2起,沿着顺位附加方向到达的摄像机c#1拍摄的拍摄图像,附加“第二”的位置顺位。
图5C图解说明其中在人物被设定为被摄对象,和被摄对象的左前方位置及右前方位置被设定为拍摄位置的情况下,利用两台摄像机c#1和 c#2拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1和c#2的摄像机位置关系,显现在摄像机c#1拍摄的拍摄图像中的从左前方看的被摄对象,和显现在摄像机c#2拍摄的拍摄图像中的从右前方看的被摄对象,认识到摄像机c#1和c#2的拍摄位置位于在被摄对象的前方侧,垂直于被摄对象的正面方向的直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
这里,在多台摄像机位于诸如直线、折线或曲线之类的不回到初始位置的直线上的情况下,当作为沿着所述线的方向,存在两个方向的时候,这两个方向中的任意方向可被设定为顺位附加方向。
换句话说,如图5C中图解所示,在两台摄像机c#1和c#2位于直线上的情况下,当存在包括向右方向(从左侧起)和向左方向(从右侧起)的两个方向时,这两个方向中的任意方向可被设定为顺位附加方向。在图5C 中图解所示的情况下,向右方向被设定为顺位附加方向。
如参考图5A所述,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1和c#2拍摄的拍摄图像附加位置顺位。
因而,在图5C中图解所示的情况下,向由沿着顺位附加方向,位于最前侧的摄像机c#1拍摄的拍摄图像,附加“第一”的位置顺位,向由从摄像机c#沿着顺位附加方向到达的摄像机c#2拍摄的拍摄图像,附加“第二”的位置顺位。
图6是图解说明在利用三台摄像机c#1、c#2和c#3拍摄三个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图6A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左前方位置及右前方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
图6B图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左后方位置及右后方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
在图6A和6B中图解所示的情况下,位置顺位附加单元32根据摄像机c#1~c#3的摄像机位置关系,认识到摄像机c#1~c#3的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#3 拍摄的拍摄图像附加位置顺位。
在图6A和6B中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图6A和6B中图解所示的情况下,例如,当在摄像机c#1~ c#3中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,按照摄像机c#2和c#3的顺序,设置摄像机c#2和c#3的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,沿着顺位附加方向,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位。
图6C图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置,左前方位置及右前方位置被设定为拍摄位置的情况下,利用三台摄像机c#1~c#3拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1~c#3的摄像机位置关系,认识到摄像机c#1~c#3的拍摄位置位于直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#3 拍摄的拍摄图像附加位置顺位。
在图6C中图解所示的情况下,直线的向右方向被设定为顺位附加方向。
在图6C中图解所示的情况下,沿着顺位附加方向,顺序地设置摄像机c#1~c#3的拍摄位置。
因而,沿着顺位附加方向,向利用摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位。
图7是图解说明在利用四台摄像机c#1、c#2、c#3和c#4拍摄四个拍摄图像的情况下的位置顺位附加处理的例子的平面图。
图7A图解说明其中在人物被设定为被摄对象,和被摄对象的前方位置、左侧位置、右侧位置及后方位置被设定为拍摄位置的情况下,利用四台摄像机c#1~c#4拍摄被摄对象的拍摄状态。
在图7A中图解所示的情况下,位置顺位附加单元32根据摄像机 c#1~c#4的摄像机位置关系,认识到摄像机c#1~c#4的拍摄位置位于以被摄对象作为其中心的圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#4 拍摄的拍摄图像附加位置顺位。
在图7A中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图7A中图解所示的情况下,例如,当在摄像机c#1~c#4 中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,顺序地设置摄像机c#2~c#4的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,沿着顺位附加方向,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位,并向利用摄像机c#4拍摄的拍摄图像附加“第四”的位置顺位。
图7B图解说明其中在人物被设定为被摄对象,并且在被摄对象的前方侧的直线上的4个点被设定为拍摄位置的情况下,利用四台摄像机 c#1~c#4拍摄被摄对象的拍摄状态。
这种情况下,位置顺位附加单元32根据摄像机c#1~c#4的摄像机位置关系,认识到摄像机c#1~c#4的拍摄位置位于直线上,并把沿着所述直线的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#4 拍摄的拍摄图像附加位置顺位。
在图7B中图解所示的情况下,直线的向右方向被设定为顺位附加方向。
在图7B中图解所示的情况下,沿着顺位附加方向,顺序地设置摄像机c#1~c#4的拍摄位置。
因而,沿着顺位附加方向,向利用摄像机c#1拍摄的拍摄图像附加“第一”的位置顺位,向利用摄像机c#2拍摄的拍摄图像附加“第二”的位置顺位,向利用摄像机c#3拍摄的拍摄图像附加“第三”的位置顺位,并向利用摄像机c#4拍摄的拍摄图像附加“第四”的位置顺位。
图8是图解说明位置顺位附加处理的其它例子的示图。
图8A图解说明在8台摄像机c#1,c#2,c#3,c#4,c#5,c#6,c#7和c#8 面向足球场,位于环绕足球场的周围的椭圆的圆周上的8个点被设定为拍摄位置的情况下,拍摄足球比赛的拍摄状态。
图8B图解说明在8台摄像机c#1~c#8面向跑道,位于环绕田径赛的跑道周围的椭圆的圆周上的8个点被设定为拍摄位置的情况下,拍摄田径赛的拍摄状态。
在图8A和8B中图解所示的情况下,位置顺位附加单元32根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机c#1~c#8的拍摄位置位于椭圆的圆周上,并把沿着所述圆周的方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8 拍摄的拍摄图像附加位置顺位。
在图8A和8B中图解所示的情况下,圆周的逆时针方向被设定为顺位附加方向。
另外,在图8A中图解所示的情况下,例如,当在摄像机c#1~c#8 中,摄像机c#1的拍摄位置被设定为起点时,沿着顺位附加方向,顺序地设置摄像机c#2~c#8的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,之后,沿着顺位附加方向,向利用摄像机c#i拍摄的拍摄图像,附加“第i”的位置顺位。
图8C图解说明其中在沿着赛跑的赛道的线路(下面也称为赛道线)上的6个点被设定为拍摄位置的情况下,利用6台摄像机c#1~c#6拍摄赛跑的拍摄状态。
在图8C中图解所示的情况下,例如,从置于网络上的服务器,提供表示赛道的赛道模型,根据所述赛道模型,位置顺位附加单元32认识其中设置摄像机c#1~c#6的拍摄位置的赛道的线路,并把沿着赛道的线路的方向设定为附加位置顺位的顺位附加方向。
另外,位置顺位附加单元32根据摄像机c#1~c#6的摄像机位置关系,认识布置在赛道的线路上的摄像机c#1~c#6的位置(拍摄位置),并沿着顺位附加方向,向利用摄像机c#1~c#6拍摄的拍摄图像附加位置顺位。
在图8C中图解所示的情况下,从赛道的线路的起点朝着终点的方向被设定为顺位附加方向。
在图8C中图解所示的情况下,沿着从所述起点到所述终点的方向,顺序设置摄像机c#1~c#6的拍摄位置。
因而,例如,利用摄像机c#1拍摄的拍摄图像的位置顺位被设定为“第一”,之后,沿着顺位附加方向,向利用摄像机c#i拍摄的拍摄图像,附加“第i”的位置顺位。
在图8C中图解所示的情况下,当赛跑的领先被摄对象是已知被摄对象(例如,引导赛跑的车辆等)时,可以配置成以致从利用摄像机c#1~c#6 拍摄的拍摄图像中,检测所述已知被摄对象,按照所述已知被摄对象出现在各个拍摄图像中的顺序,连接摄像机c#1~c#6的拍摄位置的方向(轨迹)可被设定为顺位附加方向。
在这种情况下,可在无赛道模型的情况下,设定顺位附加方向。
除此之外,例如,通过利用显示单元15,在地图上显示摄像机c#1~ c#6的拍摄位置,并且用户按照从起点到终点的顺序,指定拍摄位置,按照用户指定的顺序,连接各个拍摄位置的方向(轨迹)可被设定为顺位附加方向。
这里,在位置顺位被附加到保存在存储器12中的拍摄图像之后,位置顺位附加单元32可按照位置顺位,变更保存在存储器12中的拍摄图像的文件名。
换句话说,作为群组的被附加位置顺位的多个拍摄图像的文件名,例如,可以使用通过向相同的前缀“VVV”附加与位置顺位相应的序号“XX”而获得的各个文件名,保存在存储器12中的被附加位置顺位的拍摄图像的文件名(例如,在具有扩展名“mpg”的mpg文件的情况下, VVV_XX.mpg等)可被变更成附加位置顺位的文件名。
<重排处理>
图9是图解说明由图2中例示的重排单元33进行的重排处理的第一例子的示图。
现在,假定通过从前方、右侧、后方和左侧拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器 12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4 构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像 v#1~v#4,以致拍摄图像v#1~v#4被提供给显示控制单元14。
显示控制单元14根据拍摄图像v#1~v#4的文件名等,认识拍摄图像v#1~v#4的位置顺位,并根据位置顺位,按照位置顺位的顺序对齐地从左侧起排列从再现单元17供给的拍摄图像v#1~v#4的再现画面,从而把再现画面显示在显示单元15上。
这里,如上所述,由于位置顺位“第i”被附加到拍摄图像v#i,因此首先显示被附加位置顺位“第一”的拍摄图像v#1的再现画面,之后,从左侧开始顺序对齐地显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的再现画面。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的再现画面的情况下,例如,当操纵操作单元18的用户把其再现画面从左侧起第四个(从右侧起第一个)被显示的拍摄图像v#4指定为第一个(这里,最左侧的位置)时,重排单元33重排拍摄图像v#1~v#4(的再现画面),以致用户指定的拍摄图像(的再现画面)位于作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~ v#4(的再现画面)。
这里,位置顺位是用于把群组的多个拍摄图像连接成环形的顺位,其中位置顺位“第i”被附加到拍摄图像v#i的拍摄图像v#1~v#4按照位置顺位被连接成环形。
重排单元33重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置,同时与位置顺位相应的对齐顺序,换句话说,环形的连接被维持。
因而,如上所述,在用户指定的拍摄图像是拍摄图像v#4的情况下,如图9中图解所示,拍摄图像v#4被显示在第一位置,之后,按照拍摄图像v#1,v#2和v#3的顺序,重排拍摄图像,以致按照位置顺位,环形地形成的连接(v#1→v#2→v#3→v#4→v#1)被维持。
另外,在重排单元33重排拍摄图像之后,位置顺位附加单元32可按照重排之后的拍摄图像的对齐,变更拍摄图像的位置顺位。
例如,如图9中图解所示,在按照拍摄图像v#4,v#1,v#2和v#3的顺序,重排拍摄图像v#1~v#4的对齐的情况下,第一个拍摄图像v#4的位置顺位可被变更成“第一”,之后,拍摄图像v#1~v#3的位置顺位可被变更成“第二”~“第四”。
如上,通过变更位置顺位,并按照位置顺位的变更,变更拍摄图像的文件名,在之后请求由4个拍摄图像v#1~v#4构成的群组的再现的情况下,在显示单元15中,显示按照变更后的位置顺位,按拍摄图像v#4, v#1,v#2和v#3的顺序,从左侧开始把拍摄图像排列成行的再现画面。
图10是图解说明由图2中例示的重排单元33进行的重排处理的第二例子的示图。
现在,假定通过从右侧、前方、左侧和后方拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器 12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求使用由4个拍摄图像v#1~ v#4构成的群组作为素材的编辑时,时间同步单元13生成用于在由保存在存储器12中的4个拍摄图像v#1~v#4构成的群组中,使时间同步的同步信息,并把生成的同步信息提供给显示控制单元14。
显示控制单元14生成都类似于长度与拍摄图像#i的拍摄时间成比例的胶片卷的图像(下面也称为胶片卷图像),作为保存在存储器12中的拍摄图像v#1~v#4的符号。
另外,显示控制单元14根据拍摄图像v#1~v#4的文件名等,认识拍摄图像v#1~v#4的位置顺位。
随后,显示控制单元14通过利用从时间同步单元13供给的同步信息,和拍摄图像v#1~v#4的位置顺位,排列作为拍摄图像v#1~v#4的符号的胶片卷图像,以致在水平轴和垂直轴被设定为时间和位置顺位的情况下,使时间同步,并按照位置顺位的顺序对齐胶片卷图像,然后把胶片卷图像显示在显示单元15上。
这里,在图10中图解所示的情况下,例如,拍摄图像v#1~v#4是从相同的开始时间起,持续相同的拍摄时间拍摄的图像,因而,作为拍摄图像v#1~v#4的符号的胶片卷图像被排列成垂直对齐,以致水平轴方向的位置彼此一致。
另外,在图10中图解所示的情况下,如上所述,由于位置顺位“第i”被附加到拍摄图像v#i,因此被附加位置顺位“第一”的拍摄图像v#1的胶片卷图像被显示在第一个位置,之后,从上方顺序地排列被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的胶片卷图像。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的胶片卷图像的情况下,例如,当用户通过操纵操作单元18,把其胶片卷图像从上方起第二个显示的拍摄图像v#4指定为是第一个(这里,最上面的位置)时,重排单元33重排拍摄图像v#1~v#4(的胶片卷图像),以致用户指定的拍摄图像(的胶片卷图像)位于作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4的控制信息提供给显示控制单元14,以致用户指定的拍摄图像位于第一位置,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~ v#4(的胶片卷图像)。
这里,位置顺位是用于把群组的多个拍摄图像连接成环形的顺位,其中位置顺位“第i”被附加到拍摄图像v#i的拍摄图像v#1~v#4按照位置顺位被连接成环形。
重排单元33重排拍摄图像v#1~v#4,以致用户指定的拍摄图像位于第一位置,同时与位置顺位相应的对齐顺序,换句话说,环形的连接被维持。
因而,如上所述,在用户指定的拍摄图像是拍摄图像v#2的情况下,如图10中图解所示,拍摄图像v#2被显示在第一位置,之后,按照拍摄图像v#3,v#4和v#1的顺序,重排拍摄图像,以致按照位置顺位,环形地形成的连接(v#1→v#2→v#3→v#4→v#1)被维持。
图11是图解说明由图2中例示的重排单元33进行的重排处理的第三例子的示图。
在图11中图解所示的情况下,类似于图9中所示的情况,通过从前方、右侧、后方和左侧拍摄作为被摄对象的人物而获得的4个拍摄图像 v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i 附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4 构成的群组的再现时,类似于图9中图解所示的情况,显示控制单元14 把被附加位置顺位“第一”的拍摄图像v#1的再现画面显示在第一位置,之后,从左侧开始顺序对齐地显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的再现画面。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的再现画面的情况下,例如,当用户通过操纵操作单元18等,请求正面面部 (面向前方的面部)的检测时,重排单元33从作为对象的拍摄图像v#1~ v#4中,检测正面面部,并重排拍摄图像v#1~v#4(的再现画面),以致从中检测到正面面部的拍摄图像(的再现画面)被排列在作为预定位置的中央位置(或中央位置附近),同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致从中检测到正面面部的拍摄图像被排列在中央位置附近的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的再现画面)。
这里,在图11中图解所示的情况下,在拍摄图像v#1中,显现正面面部,从而,从拍摄图像v#1中检测到正面面部。
另外,拍摄图像v#1~v#4的再现画面是从左侧顺序排列成行的,从而作为中央位置(中央位置附近),例如使用从左侧起的第二个位置。
这种情况下,如图11中图解所示,从左侧按照拍摄图像v#4,v#1,v#2, 和v#3的顺序,重排拍摄图像v#1~v#4(的再现画面),以致从中检测到正面面部的拍摄图像v#1被排列在作为中央位置的从左侧起的第二个位置,并且与位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
图12是图解说明由图2中例示的重排单元33进行的重排处理的第四例子的示图。
在图12中图解所示的情况下,类似于图10中图解所示的情况,通过从右侧、前方、左侧和后方拍摄作为被摄对象的人物而获得的4个拍摄图像v#1,v#2,v#3和v#4作为群组被保存在存储器12中,并向拍摄图像v#i附加位置顺位“第i”。
例如,当用户通过操纵操作单元18,请求使用由4个拍摄图像v#1~ v#4构成的群组作为素材的编辑时,类似于图10中图解所示的情况,显示控制单元14排列作为拍摄图像v#1~v#4的符号的胶片卷图像,以致在水平轴和垂直轴被设定为时间和位置顺位的情况下,使时间同步,并按照位置顺位的顺序对齐胶片卷图像,然后把胶片卷图像显示在显示单元15上。
换句话说,在图12中图解所示的情况下,类似于图10中图解所示的情况,作为拍摄图像v#1~v#4的符号的胶片卷图像被排列成垂直对齐,以致水平轴方向的位置彼此一致。另外,被附加位置顺位“第一”的拍摄图像v#1的胶片卷图像被显示在第一位置,之后,从上方顺序对齐地排列并显示被附加位置顺位“第二”及后续位置顺位的拍摄图像v#2~v#4的胶片卷图像。
如上,在按照位置顺位的顺序,对齐地显示拍摄图像v#1~v#4的胶片卷图像的情况下,例如,当用户通过操纵操作单元18等,请求正面面部(面向前方的面部)的检测时,重排单元33从作为对象的拍摄图像v#1~ v#4中,检测正面面部,并重排拍摄图像v#1~v#4(的胶片卷图像),以致从中检测到正面面部的拍摄图像(的胶片卷图像)被排列在作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#4,以致从中检测到正面面部的拍摄图像被排列在第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#4(的胶片卷图像)。
这里,在图12中图解所示的情况下,在拍摄图像v#2中,显现正面面部,从而,从拍摄图像v#2中检测到正面面部。
这种情况下,如图12中图解所示,从上方按照拍摄图像v#2,v#3,v#4, 和v#1的顺序,重排拍摄图像v#1~v#4(的胶片卷图像),以致从中检测到正面面部的拍摄图像v#2被排列在从上方起的第一个位置(领先位置),并且与位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
图13是图解说明由图2中例示的重排单元33进行的重排处理的第五例子的示图。
图13A是图解说明构成群组的拍摄图像的拍摄状态的例子的示图。
在图13A中图解所示的情况下,8台摄像机c#1~c#8被排列在体育场的跑道的周围,拍摄在跑道中进行的体育运动。
这种情况下,类似于图8B中图解所示的情况,位置顺位附加单元 32(图2)根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机c#1~c#8 的拍摄位置位于椭圆的圆周上,并把沿着圆周的方向,例如逆时针方向设定为用于附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8 拍摄的拍摄图像v#1~v#8附加位置顺位。
换句话说,在摄像机c#1~c#8之中的任意一台摄像机c#i的拍摄位置被设定为起点的情况下,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1~c#8附加位置顺位。
现在,在摄像机c#1~c#8之中,例如,在摄像机c#7的拍摄位置被设定为起点的情况下,位置顺位“第一”被附加到摄像机c#7的拍摄图像 v#7。另外,沿着顺位附加方向,位置顺位“第二”被附加到摄像机c#8拍摄的拍摄图像v#8,位置顺位“第三”被附加到摄像机c#1拍摄的拍摄图像 v#1。类似地,位置顺位“第四”被附加到摄像机c#2拍摄的拍摄图像v#2,位置顺位“第五”被附加到摄像机c#3拍摄的拍摄图像v#3,位置顺位“第六”被附加到摄像机c#4拍摄的拍摄图像v#4,位置顺位“第七”被附加到摄像机c#5拍摄的拍摄图像v#5,而位置顺位“第八”被附加到摄像机c#6 拍摄的拍摄图像v#6。
在如上所述的拍摄图像v#1~v#8作为群组被保存在存储器12中的情况下,例如,当用户通过操纵操作单元18,请求由拍摄图像v#1~v#8 构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像 v#1~v#8,以致拍摄图像v#1~v#8被提供给显示控制单元14。
图13B是图解说明拍摄图像v#1~v#8的再现画面的显示例子的示图。
显示控制单元14根据拍摄图像v#1~v#8的文件名等,认识到拍摄图像v#1~v#8的位置顺位,按照位置顺位的顺序对齐地排列从再现单元 17供给的拍摄图像v#1~v#8的再现画面,并把排列的再现画面显示在显示单元15上。
这里,在图13B中图解所示的情况下,作为8个拍摄图像v#1~v#8(的再现画面)的排列方式,使用水平×垂直:4×2的排列方式。
在水平×垂直:H×V的排列方式下,例如按照从左侧到右侧的顺序,进行拍摄图像(的再现画面)的排列,当到达右端时,使排列位置下降一行,再次按从左侧到右侧的顺序,进行排列。
在4×2的排列方式下,按照位置顺位,以v#7,v#8,v#1,v#2,v#3,v#4, v#5和v#6的顺序排列并显示8个拍摄图像v#1~v#8的再现画面。
如上,在按照位置顺位的顺序,排列显示拍摄图像v#1~v#8的再现画面的情况下,例如,当用户通过操纵操作单元18等,把拍摄图像v#1 指定为领先者时,重排单元33重排拍摄图像v#1~v#8(的再现画面),以致用户指定的拍摄图像(的再现画面)位于4×2排列方式的作为预定位置的第一位置,同时与位置顺位相应的对齐顺序被维持。
换句话说,重排单元33把用于重排拍摄图像v#1~v#8,以致用户指定的拍摄图像位于第一位置的控制信息提供给显示控制单元14,显示控制单元14根据从重排单元33供给的控制信息,重排拍摄图像v#1~v#8 (的再现画面)。
如上所述,在用户指定拍摄图像v#1的情况下,如图13B中图解所示,按照v#1,v#2,v#3,v#4,v#5,v#6,v#7和v#8的顺序,重排拍摄图像 v#1~v#8,以致用户指定的拍摄图像v#1被排列在第一位置,从而之后,按照位置顺位环形地形成的连接(v#1→v#2→v#3→···→v#7→v#8 →v#1)被维持。
另外,在图9-13中,尽管说明了进行群组的多个拍摄图像的重排,以致用户指定的拍摄图像,或者从中检测到(显现)正面面部的拍摄图像被排列在诸如第一位置之类的预定位置,不过,在拍摄图像的重排中,被设置于所述预定位置的拍摄图像不限于用户指定的拍摄图像,或者其中显现正面面部的拍摄图像。
换句话说,在拍摄图像的重排中,当将被排列在预定位置的拍摄图像被称为特定图像时,例如,重排单元33对于作为对象的群组的多个拍摄图像,进行面部的检测或人物的检测,能够把其中显现面部的面积或时间较大的拍摄图像,其中显现特定人物的拍摄图像,其中显现的人物的数目较大的拍摄图像等设定为所述特定图像地进行拍摄图像的重排。
另外,如图13A中图解所示,在从置于网络上的服务器,提供表示其中进行体育运动的跑道,或者其中进行体育运动的球场、场地等的模型的情况下,根据所述模型,在群组的多个拍摄图像之中,能够设定所述特定图像。
换句话说,例如,根据跑道的模型,能够识别在跑道中进行的体育运动的起点或终点,重排单元33可把利用在靠近所述起点或终点的拍摄位置处的摄像机拍摄的拍摄图像设定为所述特定图像。
另外,可在任意时刻进行群组的多个拍摄图像的重排,而不等待用户对操作单元18的操作。
此外,可按照用户对于操作单元18的操作,设定特定图像被排列在的位置。
如上,在图2中图解所示的图像处理设备中,获得多个摄像机的摄像机位置关系,并根据摄像机位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于把多个拍摄图像连接成环形的位置顺位。随后,按照位置顺位对齐地排列并显示所述多个拍摄图像。
另外,必要时,可维持与位置顺位相应的对齐顺序地重排所述多个拍摄图像。
因而,例如,防止在彼此邻近的位置拍摄的拍摄图像被排列在相互分离的位置,并防止在相互远离的位置拍摄的拍摄图像被排列在彼此邻近的位置,从而能够以用户可容易地处理的形式,提供多个拍摄图像。
图14是图解说明由图2中例示的重排单元33进行的重排处理的例子的流程图。
在步骤S21,重排单元33根据用户对操作单元18的操作等,把保存在存储器12中的群组的多个拍摄图像之中的,将被排列在预定位置的拍摄图像设定为特定图像,然后处理进入步骤S22。
在步骤S22,重排单元33生成用于重排群组的多个拍摄图像,以致所述特定图像位于预定位置,同时群组的多个拍摄图像的位置顺位的对齐顺序被维持的控制信息,并把生成的控制信息提供给显示控制单元14,然后重排处理结束。
这里,其中按照位置顺位的顺序,对齐多个拍摄图像的图像,换句话说,如图9、11和13中图解所示,其中按照位置顺位的顺序,对齐群组的多个拍摄图像(的再现画面)的图像,及如图10和12中图解所示,其中排列群组的多个拍摄图像(的胶片卷图像的符号),以致水平轴和垂直轴被设定为时间和位置顺位,使时间同步,并按照位置顺位的顺序排列拍摄图像的图像也可被称为位置顺位图像。
<逆重排处理>
图15是图解说明由图2中例示的逆重排单元34进行的逆重排处理的例子的示图。
图15A是图解说明构成群组的拍摄图像的拍摄状态的例子的示图。
在图15A中图解所示的情况下,类似于图13A中图解所示的情况, 8台摄像机c#1~c#8被排列在体育场的跑道的周围,拍摄在跑道中进行的体育运动。
这种情况下,类似于图8B或15A中图解所示的情况,位置顺位附加单元32(图2)根据摄像机c#1~c#8的摄像机位置关系,认识到摄像机 c#1~c#8的拍摄位置位于椭圆的圆周上,并把沿着所述圆周的方向,例如逆时针方向设定为附加位置顺位的顺位附加方向。
位置顺位附加单元32沿着顺位附加方向,向利用摄像机c#1~c#8 拍摄的拍摄图像v#1~v#8附加位置顺位。
换句话说,在摄像机c#1~c#8之中的任意一台摄像机c#i的拍摄位置被设定为起点的情况下,位置顺位附加单元32沿着顺位附加方向,向摄像机c#1~c#8附加位置顺位。
现在,在摄像机c#1~c#8之中,例如,在摄像机c#1的拍摄位置被设定为起点的情况下,位置顺位“第一”被附加到摄像机c#1的拍摄图像 v#1。另外,位置顺位“第二”被附加到摄像机c#2拍摄的拍摄图像v#2,位置顺位“第三”被附加到摄像机c#3拍摄的拍摄图像v#3。之后,类似地,位置顺位“第四”~“第八”被附加到摄像机c#4~c#8的拍摄图像 v#4~v#8。
在如上所述的拍摄图像v#1~v#8作为群组被保存在存储器12中的情况下,例如,当用户通过操纵操作单元18,请求由拍摄图像v#1~v#8 构成的群组的再现时,再现单元17再现保存在存储器12中的拍摄图像 v#1~v#8,以致拍摄图像v#1~v#8被提供给显示控制单元14。
图15B是图解说明拍摄图像v#1~v#8的再现画面的显示例子的示图。
显示控制单元14根据拍摄图像v#1~v#8的文件名等,认识拍摄图像v#1~v#8的位置顺位,按照位置顺位的顺序,例如以4×2的排列方式,对齐地排列从再现单元17供给的拍摄图像v#1~v#8的再现画面,并把排列的再现画面显示在显示单元15上。
在图15B中,按照位置顺位,按拍摄图像v#1,v#2,v#3,v#4,v#5,v#6, v#7和v#8的顺序,以4×2的排列方式,排列并显示8个拍摄图像v#1~ v#8的再现画面。
如上,在按照位置顺位的顺序,排列并显示拍摄图像v#1~v#8的再现画面的情况下,例如,当用户通过操纵操作单元18等,指定拍摄图像的对齐顺序的颠倒时,逆重排单元34按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8(的再现画面)的对齐。
换句话说,逆重排单元34把用于按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8的控制信息提供给显示控制单元14。显示控制单元14根据从逆重排单元34供给的控制信息,按照与位置顺位相应的对齐顺序的倒序,重排拍摄图像v#1~v#8(的再现画面)。
这种情况下,由于与位置顺位相应的拍摄图像v#1~v#8的对应顺序是拍摄图像v#1,v#2,v#3,v#4,v#5,v#6,v#7和v#8的顺序,因此逆重排单元34按照作为倒序的拍摄图像v#8,v#7,v#6,v#5,v#4,v#3,v#2和v#1 的顺序,重排拍摄图像v#1~v#8,如图15B中图解所示。
另外,在利用逆重排单元34重排拍摄图像的情况下,类似于其中利用重排单元33重排拍摄图像的情况,位置顺位附加单元32可按照重排之后的拍摄图像的对齐,变更拍摄图像的位置顺位。
通过变更位置顺位,并按照位置顺位的变更,变更拍摄图像的文件名,在之后请求由图15中图解所示的拍摄图像v#1~v#8构成的群组的再现的情况下,按照与变更之后的位置顺位一致的拍摄图像v#8~v#1的顺序对齐的再现画面被显示在显示单元15上。
这里,在图15中图解所示的情况下,尽管说明了在按照用户对于操作单元18的操作等,指定颠倒拍摄图像的对齐顺序的情况下,进行颠倒地重排群组的多个拍摄图像的对齐的逆重排,不过,可不等待用户对于操作单元18的操作,在任意时刻进行拍摄图像的逆重排。
换句话说,例如,逆重排单元34可在群组的多个拍摄图像中,检测显现在拍摄图像中的被摄对象的运动(光流),并根据被摄对象的运动,判定与位置顺位相应的多个拍摄图像的对齐是否是从终点到起点的对齐。
随后,在与位置顺位相应的多个拍摄图像的对齐是朝着从终点到起点方向的对齐的情况下,可以进行拍摄图像的逆重排。
另外,例如,如图15A中图解所示,在从置于网络上的服务器,提供表示其中进行体育运动的跑道,或者其中进行体育运动的球场、场地等的模型的情况下,根据所述模型,逆重排单元34可认识体育运动的进行方向,比如从起点朝向终点的方向等,并在与位置顺位相应的多个拍摄图像的对齐不是与体育运动的进行方向相应的对齐的情况下,进行拍摄图像的逆重排。
按照逆重排处理,例如,可沿着体育运动的进行方向,对齐地排列群组的多个拍摄图像,因而,能够以用户可容易地处理的形式,提供多个拍摄图像。
图16是图解说明由图2中例示的逆重排单元34进行的逆重排处理的例子的流程图。
在步骤S31,逆重排单元34判定是否进行其中把按照保存在存储器 12中的群组的多个拍摄图像的位置顺位的顺序的对齐(排列)变更成按照倒序的对齐(排列)的逆重排处理。
这里,在步骤S31,可根据用户对于操作单元18的操作是否指定拍摄图像的对齐顺序的颠倒,与位置顺位相应的多个拍摄图像的对齐是否与诸如沿着从起点向着终点方向的对齐之类的体育运动的进行方向一致,等等,判定是否进行逆重排处理。
在步骤S31,在判定不进行逆重排处理的情况下,逆重排处理结束。
另一方面,在步骤S31,在判定要进行逆重排处理的情况下,换句话说,在用户对于操作单元18的操作指定拍摄图像的对齐顺序要被颠倒的情况下,或者在与位置顺位相应的多个拍摄图像的对齐不是与体育运动的进行方向相应的对齐的情况下,处理进入步骤S32,逆重排处理单元 34生成用于按照与位置顺位相应的对齐顺序的倒序,重排保存在存储器12中的群组的多个拍摄图像的对齐的控制信息,并把生成的控制信息提供给显示控制单元14,然后逆重排处理结束。
<拍摄状态图像生成处理>
图17是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第一显示例子的示图。
在图17中,位置顺位图像和拍摄状态图像被显示在显示单元15上。
在图17中图解所示的位置顺位图像中,类似于图10和12中图解所示的情况,水平轴和垂直轴被设定为时间和位置顺位,群组的4个拍摄图像v#1~v#4(作为其符号的胶片卷图像)被排列成以致使时间同步,并且按照位置顺位的顺序,对齐拍摄图像。
拍摄状态图像是表示与拍摄群组的多个拍摄图像的多台摄像机相应的拍摄状态的图像,图17中图解所示的拍摄状态图像是图解说明与拍摄构成位置顺位图像的群组的4个拍摄图像v#1~v#4的4台摄像机c#1~ c#4相应的拍摄状态的图像。
换句话说,图17中图解所示的拍摄状态图像包括被摄对象(类似被摄对象的图像),和拍摄被摄对象的4台摄像机c#1~c#4(类似摄像机的图像),在拍摄状态图像中,摄像机c#i沿作为当拍摄被摄对象时的拍摄方向的方向,被排列在利用摄像机c#i,拍摄被摄对象时的拍摄位置。
另外,在拍摄状态图像中,如图中用虚线箭头所示,可以包括表示顺位附加方向的箭头(箭头的图像)等。
例如,在用户通过操纵操作单元18,请求编辑的情况下,拍摄状态图像生成单元35根据关于请求要编辑的群组的多个拍摄图像的摄像机位置关系,生成表示与拍摄所述群组的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,如图17中图解所示,显示控制单元14可把拍摄状态图像连同位置顺位图像一起显示在显示单元15上。
图18是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第二显示例子的示图。
在图18中,位置顺位图像和拍摄状态图像被显示在显示单元15上。
在图18中图解所示的位置顺位图像中,类似于图9和11中图解所示的情况,按照位置顺位的顺序,水平成一行地,换句话说,按4×1的排列方式,排列4个拍摄图像v#1~v#4(的再现画面)。
另外,图18中图解所示的拍摄状态图像被配置成与图17中图解所示的拍摄状态图像相同。
例如,在用户通过操纵操作单元18,请求再现的情况下,拍摄状态图像生成单元35根据关于请求要再现的群组的多个拍摄图像的摄像机位置关系,生成表示与拍摄所述群组的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,如图18中图解所示,显示控制单元14可把拍摄状态图像连同位置顺位图像一起显示在显示单元15上。
图19是图解说明由拍摄状态图像生成单元35生成的拍摄状态图像的第三显示例子的示图。
在图18中图解所示的第二显示例子中,在位置顺位图像中,按照位置顺位的顺序,以4×1的排列方式,排列4个拍摄图像v#1~v#4,而在图19中图解所示的第三显示例子中,在位置顺位图像中,按照位置顺位的顺序,以2×2的排列方式,排列4个拍摄图像v#1~v#4(的再现画面)。
至于其它各个点,在图19中图解所示的第三显示例子和在图18中图解所示的第二显示例子相同。
如上,在显示拍摄状态图像的情况下,用户能够容易地获得拍摄所述群组的各个拍摄图像的各个拍摄位置。
图20是图解说明由图2中例示的摄像机位置关系获取单元31和拍摄状态图像生成单元35进行的拍摄状态图像生成处理的例子的流程图。
在步骤S41,摄像机位置关系获取单元31获得拍摄保存在存储器12 中的群组的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S42。
在步骤S42,拍摄状态图像生成单元35根据利用摄像机位置关系获得单元31获得的摄像机位置关系等,生成表示与拍摄保存在存储器2中的多个拍摄图像的多台摄像机相应的拍摄状态的拍摄状态图像,并把生成的拍摄状态图像提供给显示控制单元14,然后拍摄状态图像生成处理结束。
在图17-19中,尽管被摄对象(类似被摄对象的图像)被包含在拍摄状态图像中,不过,所述被摄对象可不被包含在拍摄状态图像中。
<图像间除处理>
图21是图解说明由图2中例示的显示控制单元14和图像间除单元 36进行的图像间除处理的例子的示图。
图21A是图解说明利用多台摄像机,拍摄被摄对象的例证样子的示图。
在图21A中,环绕被摄对象等间距地排列16台摄像机,并拍摄被摄对象。
如图21A中图解所示,图21B是图解说明其中作为群组,显示在利用16台摄像机拍摄被摄对象的情况下获得的16个拍摄图像的位置顺位图像的显示例子的示图。
换句话说,图21B图解说明当用户通过操纵操作单元18,请求拍摄图像的再现时显示的位置顺位图像的显示例子。
作为显示位置顺位图像的显示模式,例如,存在间除模式和非间除模式。例如,依据用户对于操作单元18的操作等,可以进行间除模式和非间除模式的切换。
在间除模式下,图像间除单元36进行图像间除处理,因而,在必要时,显示在位置顺位图像中的拍摄图像(的再现画面或符号)被间除。
在非间除模式下,在位置顺位图像中显示所述群组的所有拍摄图像 (的再现画面或符号)。
例如,如在图21A中图解所示,在利用16台摄像机拍摄被摄对象,并且作为其结果获得的16个拍摄图像被视为群组的情况下,在非间除模式下,在显示控制单元14中,16个拍摄图像(的再现画面或符号)按照位置顺位的顺序,以4×4的排列方式被排列,并被显示在显示单元15上。
另一方面,在间除模式下,图像间除单元36请求显示控制单元14 显示由用户操作,用于决定待显示在位置顺位图像中的拍摄图像(的再现画面)的数目的粒度图标,按照所述请求,在显示单元15上显示粒度图标,然后进行图像间除处理。
图21B图解说明间除模式下的显示单元15的显示例子。
如图21B中图解所示,在间除模式下,连同位置顺位图像一起显示粒度图标。
粒度图标包括滑块,通过移动(滑动)滑块,能够调整作为位置顺位图像,待显示的拍摄图像的粒度(下面也称为显示粒度)。
换句话说,图像间除单元36按照粒度图标的滑块的位置,设定作为待显示在显示单元15上的拍摄图像(的再现画面或符号)的数目的显示对象图像数。
另外,图像间除单元36根据摄像机位置关系获取单元31获得的摄像机位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
随后,通过把由与显示对象图像数对应的选定摄像机拍摄的拍摄图像设定为待显示在显示单元15上的显示对象(的再现画面或符号),图像间除单元36间除待显示在显示单元15上的拍摄图像。
换句话说,图像间除单元36把表示所述群组的16个拍摄图像之中的设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,识别群组的16个拍摄图像之中的被设定为显示对象的拍摄图像,生成其中按照位置顺位的顺序,只排列被设定为显示对象的拍摄图像(的再现画面或符号)的位置顺位图像,随后如图21B中图解所示,把位置顺位图像显示在显示单元15上。
例如,当粒度图标的滑块被移动到显示粒度处于低水平的位置时,图像间除单元36把显示对象图像数设定为与群组的拍摄图像的数目相同的16,从而选择与显示对象图像数对应的16台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为16的情况下,拍摄群组的16个拍摄图像的所有16台摄像机都被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的16台摄像机拍摄的 16个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以4×4的排列方式,排列作为显示对象的16个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
另一方面,例如,当粒度图标的滑块被移动到显示粒度处于中等水平的位置时,图像间除单元36把显示对象图像数设定为8(群组的拍摄图像的数目的一半),从而选择与显示对象图像数对应的8台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为8的情况下,如图21A中图解所示,当利用环绕被摄对象等间距地排列的16台摄像机拍摄被摄对象时,作为拍摄所述群组的16个拍摄图像的16台摄像机之中的每隔一个的摄像机的8台摄像机被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的8台摄像机拍摄的8 个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像之中的由所述8台选定摄像机拍摄的8个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以3×3的排列方式,排列作为显示对象的8个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
然而在以3×3的排列方式,排列8个拍摄图像的情况下,该排列方式中的一个地方是不排列拍摄图像的地方(下面称为未使用地方),在图 21中图解所示的情况下,3×3排列方式的中央(从左侧起第2个,从上方起第2个)被设定为所述未使用地方。
另外,例如,当粒度图标的滑块被移动到显示粒度处于高水平的位置时,图像间除单元36把显示对象图像数设定为4(群组的拍摄图像的数目的1/4),从而选择与显示对象图像数对应的4台摄像机作为选定摄像机,以致尽可能地使选定摄像机的位置等间距。
换句话说,在显示对象图像数为4的情况下,如图21A中图解所示,当利用环绕被摄对象等间距地排列的16台摄像机拍摄被摄对象时,作为拍摄所述群组的16个拍摄图像的16台摄像机之中的每隔三个的摄像机的4台摄像机被选为选定摄像机。
随后,图像间除单元36把由作为选定摄像机的4台摄像机拍摄的4 个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
显示控制单元14根据从图像间除单元36供给的控制信息,把所述群组的16个拍摄图像之中的由所述4台选定摄像机拍摄的4个拍摄图像识别为显示对象,生成其中按照位置顺位的顺序,以2×2的排列方式,排列作为显示对象的4个拍摄图像(在图21中图解所示的情况下,拍摄图像的再现画面)的位置顺位图像,然后如图21B中图解所示,把生成的位置顺位图像显示在显示单元15上。
在间除模式下,由于图像间除单元36进行如上所述的图像间除处理,因此在群组的拍摄图像的数目较大的情况下,用户可通过操作粒度图标的滑块,把待显示成位置顺位图像的拍摄图像(的再现画面或符号)的数目减少到用户期望的数目。
另外,在图像间除处理中,拍摄群组的多个拍摄图像的多台摄像机之中的,尽可能等间距地布置的对应于显示对象图像数的摄像机被选为选定摄像机。因而,例如,能够避免不均匀地分布并显示仅仅沿特定方向拍摄被摄对象而获得的拍摄图像,作为位置顺位图像。
另外,在显示对象图像数目小于群组的拍摄图像(拍摄所述拍摄图像的摄像机)的数目的情况下,例如,可按照用户对于操作单元18的操作,改变被选为选定摄像机的摄像机。这种情况下,待显示成位置顺位图像的拍摄图像可被变更成通过沿彼此不同的方向拍摄被摄对象而获得的拍摄图像等。
图22是图解说明由图2中例示的显示控制单元14和图像间除单元 36进行的图像间除处理的例子的流程图。
例如,当用户通过操纵操作单元18,请求保存在存储器12中的群组 (的拍摄图像)的再现时,在步骤S51,图像间除单元36把被请求再现的群组的所有多个拍摄图像设定为显示对象,并把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14,然后处理进入步骤S52。
在步骤S52,图像间除单元36请求显示控制单元14显示粒度图标,显示控制单元14按照所述请求,在显示单元15上显示粒度图标,然后处理进入步骤S53。
在步骤S53,显示控制单元14根据从图像间除单元36供给的控制信息,识别设定为显示对象的拍摄图像,生成只包括设定为显示对象的拍摄图像(的再现画面)的位置顺位图像,并把生成的位置顺位图像显示在显示单元15上,然后处理进入步骤S54。
这种情况下,显示包括被请求再现的群组的所有拍摄图像的位置顺位图像。
在步骤S54,处理等待用户操作粒度图标的滑块,图像间除单元36 按照粒度图标的滑块的位置,设定显示对象图像数,然后处理进入步骤S55。
在步骤S55,图像间除单元36根据利用摄像机位置关系获取单元31 获得的摄像机位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致尽可能地使选定摄像机的位置等间距,然后处理进入步骤S56。
在步骤S56,图像间除单元36把由与显示对象图像数对应的选定摄像机拍摄的拍摄图像设定为显示对象,然后把表示设定为显示对象的拍摄图像的控制信息提供给显示控制单元14。
之后,处理从步骤S56返回步骤S53,如上所述,显示控制单元14 根据从图像间除单元36供给的控制信息,识别设定为显示对象的拍摄图像,生成只包括被设定为显示对象的拍摄图像的位置顺位图像,并把生成的位置顺位图像显示在显示单元15上,之后,重复相同的处理。
按照上述图像间除处理,按照粒度图标的滑块的操作,间除拍摄图像,从而显示其显示粒度被调整的位置顺位图像。
<再现对象设定处理>
图23是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的例子的示图。
当用户通过操纵操作单元18,请求其拍摄图像被保存在存储器12 中的群组的再现时,再现单元17从存储器12再现被请求再现的群组的多个拍摄图像,以致所述多个拍摄图像被提供给显示控制单元14。
显示控制单元14按照位置顺位的顺序,排列从再现单元17供给的多个拍摄图像的再现画面,并把排列的再现画面显示在显示单元15上。
因而,这种情况下,尽管显示与被请求再现的群组的拍摄图像的数目对应的再现画面,再现对象设定单元37例如按照用户的操作,进行再现对象设定处理,在所述再现对象设定处理中,从群组的拍摄图像中,设定一个拍摄图像作为再现对象,并且只显示被设定为再现对象的拍摄图像的再现画面。
换句话说,例如,在用户通过操纵操作单元18,请求设定一个再现画面的情况下,再现对象设定单元37通过进行再现对象设定处理,设定再现对象,并且只显示被设定为再现对象的拍摄图像的再现画面。
图23A是图解说明拍摄构成群组的拍摄图像的例证样子的示图。
在图23A中图解所示的情况下,类似于图7A中图解所示的情况,在人物被设定为被摄对象,被摄对象的前方位置、左侧位置、右侧位置和后方位置被设定为拍摄位置的情况下,利用4台摄像机c#1~c#4拍摄被摄对象。
图23B是图解说明把如图23A中图解所示,通过利用4台摄像机 c#1~c#4拍摄被摄对象而获得的一组4个拍摄图像v#1~v#4设定为对象的再现对象设定处理的例子的示图。
这里,作为再现对象设定单元37把一个拍摄图像设定为再现对象的设定模式,例如,存在逐次模式、实时模式和手动模式。
在手动模式下,按照用户对操作单元18的操作,把一个拍摄图像设定为再现对象。
图23B图解说明逐次模式的再现对象设定处理的例子。
在逐次模式下,再现对象设定单元37按照预定顺序,比如位置顺位的顺序等,逐次把群组的4个拍摄图像v#1~v#4设定为再现对象,并把表示再现对象的控制信息提供给再现单元17。
再现单元17把设定为由从再现对象设定单元37供给的控制信息表示的再现对象的拍摄图像的整个区间设定为再现区间,并再现设定为再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
因而,例如,在群组的4个拍摄图像v#1~v#4的位置顺位为“第一”~“第四”,并且再现对象设定单元37按照位置顺位的顺序,逐次把4 个拍摄图像v#1~v#4之一设定为再现对象的情况下,在再现单元17中,拍摄图像v#1的整个区间被再现,之后,逐次再现拍摄图像v#2~v#4每一个的整个区间。
这种情况下,显示控制单元14在显示单元15上,显示一个再现画面,在所述一个再现画面上,逐次再现具有相互不同的拍摄位置的4个拍摄图像v#1~v#4每一个的整个区间。
图24是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的另一个例子的示图。
图24A是图解说明拍摄构成群组的拍摄图像的例证样子的示图。
在图24A中图解所示的情况下,在4台摄像机c#1~c#4面向跑道,位于环绕田径赛的跑道周围的椭圆的圆周上的4个点被设定为拍摄位置的情况下,拍摄田径赛。
图24B是图解说明把如图24A中图解所示,通过利用4台摄像机 c#1~c#4的拍摄处理获得的一组4个拍摄图像v#1~v#4设定为对象的再现对象设定处理的例子的示图。
换句话说,图24B图解说明实时模式的再现对象设定处理的例子。
在实时模式下,再现对象设定单元37使群组的4个拍摄图像v#1~ v#4的时间同步,在实时(正常速度)再现处于时间被同步的状态下的4个拍摄图像v#1~v#4的情况下,从4个拍摄图像v#1~v#4中选择在再现时间(下面也称为实时再现时间)之一被再现的一个拍摄图像,并把选择的拍摄图像设定为拍摄对象。
换句话说,例如,再现对象设定单元37进行把实时再现时间等分成与群组的拍摄图像v#1~v#4的数目对应的4个区间等的分割,对于所述4个区间中的第i区间,把4个拍摄图像v#1~v#4之中的一个拍摄图像(例如,拍摄图像v#i,其位置顺位为“第i”的拍摄图像等)设定为再现对象。
现在,当通过分割实时再现时间而获得的区间被称为分割区间时,对于通过分割实时再现时间而获得的每个分割区间,再现单元17把设定为该分割区间的再现对象的拍摄图像的,对应于该分割区间的区间设定为再现区间,并再现设定为再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
因而,例如,在4个拍摄图像v#1~v#4是从相同的开始时间起,持续相同拍摄时间拍摄的图像,并且对于通过等分实时再现时间而获得的4 个分割区间中的第i个分割区间,再现对象设定单元37把4个拍摄图像 v#1~v#4之中的拍摄图像v#i设定为再现对象的情况下,在再现单元17 中,如图24B中图解所示,在实时再现时间的第一个(最初的)分割区间中,再现拍摄图像v#1的最前的1/4区间,在实时再现时间的第二个分割区间中,再现拍摄图像v#2的1/4~2/4的区间。随后,在实时再现时间的第三个分割区间中,再现拍摄图像v#3的2/4~3/4的区间,在实时再现时间的第四个(最后的)分割区间中,再现拍摄图像v#4的3/4~结尾的区间。
这种情况下,显示控制单元14在显示单元15上显示通过在使其时间彼此同步的情况下,再现拍摄位置彼此不同的拍摄图像v#1~v#4而获得的4个再现画面之中的一个再现画面。
另外,在实时模式下,例如,再现对象设定单元37可把其时间被同步的4个拍摄图像v#1~v#4之中的具有满足预定条件的区间(下面称为条件满足区间)的一个拍摄图像,设定为对应于所述条件满足区间的实时再现时间的区间的再现对象。
这里,条件满足区间可以是在整个条件满足区间中,满足预定条件的区间,或者条件满足区间的仅仅一部分可以是满足预定条件的区间。
另外,在一个拍摄图像中,可能不存在条件满足区间,或者可能存在多个条件满足区间。
不过,条件满足区间不需要与另一个条件满足区间重叠,实时再现时间的每个时间需要被包含在条件满足区间之一中。
在对应于各个条件满足区间的实时再现时间的各个区间中,再现单元17通过利用条件满足区间作为再现区间,再现被设定为该区间的再现对象的拍摄图像,以致该拍摄图像被提供给显示控制单元14。
另外在这种情况下,类似于实时再现时间被分成分割区间的情况,显示控制单元14在显示单元15上,显示在拍摄位置彼此不同的4个拍摄图像v#1~v#4的时间被同步的情况下再现的4个再现画面之中的一个再现画面。
这里,作为在条件满足区间中被满足的预定条件,例如,可以使用在拍摄图像中显现特定被摄对象。例如,可通过对于作为对象的拍摄图像进行被摄对象识别,判定在拍摄图像中,是否显现特定被摄对象。
另外,作为在条件满足区间中被满足的预定条件,例如,可以使用拍摄所述拍摄图像的摄像机是靠近特定被摄对象的摄像机。例如,通过允许特定被摄对象携带GPS,并检测所述特定被摄对象的位置,可以判定拍摄所述拍摄图像的摄像机是否是靠近特定被摄对象的摄像机。
在例如使用在拍摄图像中显现特定被摄对象,或者拍摄所述拍摄图像的摄像机靠近特定被摄对象,作为在条件满足区间中被满足的预定条件的情况下,作为再现画面,用户可只观看其中显现特定被摄对象的图像,或者其中邻近存在特定被摄对象的图像。
图25是图解说明由图2中例示的再现对象设定单元37进行的再现对象设定处理的例子的流程图。
当请求其拍摄图像被保存在存储器12中的群组的再现时,在步骤 S61,再现对象设定单元37获得用户通过操纵操作单元18设定的设定模式(逐次模式,实时模式或手动模式),处理进入步骤S62。
在步骤S62,再现对象设定单元37按照设定模式,从被请求再现的群组的拍摄图像中,设定再现对象,并把表示所述再现对象的控制信息提供给再现单元17,然后再现对象设定处理结束。
<环形连接判定处理>
下面参考图26-29,说明环形连接判定处理。
在上述情况下,尽管位置顺位被设定成环形连接群组的多个拍摄图像的顺位,并在图4中图解所示的位置顺位附加处理中,这样的位置顺位(下面也称为环形位置顺位)被附加到群组的多个拍摄图像中的每个拍摄图像,不过,位置顺位可被设定成不是环形,而是串联连接群组的多个拍摄图像的顺位,位置顺位附加单元32(图2)可进行其中把这样的位置顺位(下面也称为串联位置顺位)附加到群组的多个拍摄图像中的每个拍摄图像的位置顺位附加处理。
可按照用户的操作,设定向拍摄图像附加环形位置顺位还是串联位置顺位。
另外,位置顺位附加单元32可进行其中进行判定是否环形连接群组的多个拍摄图像的环形连接判定的环形连接判定处理,并按照环形连接判定的结果,向群组的多个拍摄图像附加环形位置顺位或串联位置顺位。
这里,在环形连接判定中,例如,当在环形连接群组的多个拍摄图像的情况下有优势时,可判定环形连接群组的多个拍摄图像,而当在在环形连接群组的多个拍摄图像的情况下无优势时,可判定不环形连接群组的多个拍摄图像。
图26是图解说明在环形连接群组的多个拍摄图像的情况下,无任何优势的情况的例子的示图。
类似于图7B,图26A图解说明在人物被设定为被摄对象,在被摄对象前方的直线上的4个点被设定为拍摄位置的情况下,利用4台摄像机 c#1~c#4拍摄被摄对象的拍摄状态。
这种情况下,关于由其拍摄位置位于直线上的摄像机c#1~c#4拍摄的拍摄图像v#1~v#4,例如,如图7B中图解所示,位置顺位附加单元 32向由摄像机c#1拍摄的拍摄图像v#1,附加位置顺位“第一”,向由摄像机c#2拍摄的拍摄图像v#2,附加位置顺位“第二”,向由摄像机c#3拍摄的拍摄图像v#3,附加位置顺位“第三”,并向由摄像机c#4拍摄的拍摄图像v#4,附加位置顺位“第四”。
如图26A中所述,图26B图解说明被附加位置顺位的拍摄图像v#1~ v#4(的再现画面)的显示例子。
例如,当用户通过操纵操作单元18,请求由4个拍摄图像v#1~v#4 构成的群组的再现时,例如,如参考图9所述,显示控制单元14按照位置顺位的顺序,从左侧开始对齐地排列拍摄图像v#1~v#4的再现画面,并把排列的再现画面显示在显示单元15上。
在附加到拍摄图像v#1~v#4的位置顺位是环形位置顺位的情况下,当用户把拍摄图像v#1~v#4之一,例如拍摄图像v#3指定为第一个时,在重排单元33进行的重排处理中,例如和参考图9说明的情况中一样,拍摄图像v#1~v#4被重排,以致用户指定的拍摄图像v#3位于第一,同时与环形位置顺位相应的环形连接被维持。
换句话说,如图26B中图解所示,按照拍摄图像v#4,v#1和v#2的顺序,重排拍摄图像,以致拍摄图像v#3位于第一,之后,与环形位置顺位相应的环形连接(v#1→v#2→v#3→v#4→v#1)被维持。
如上,在向拍摄图像v#1~v#4附加环形位置顺位的情况下,当用户指定拍摄图像时,拍摄图像v#1~v#4被重排,以致用户指定的拍摄图像位于第一,与环形位置顺位相应的环形连接被维持。
不过,如图26A中图解所示,在拍摄图像v#1~v#4是利用其拍摄位置位于直线上的摄像机c#1~c#4拍摄的图像的情况下,例如,如图26B 中图解所示,当按照拍摄图像v#4,v#1和v#2的顺序,重排拍摄图像,以致用户指定的拍摄图像v#3位于第一,并且与环形位置顺位相应的环形连接被维持时,存在取决于用户,用户感到难以观看拍摄图像v#1~v#4 的情况。因而,难说附加环形位置顺位,并把群组的多个拍摄图像v#1~ v#4连接成环形有优势。
因而,位置顺位附加单元32进行其中根据把群组的多个拍摄图像连接成环形是否有优势,进行判定是否环形连接群组的多个拍摄图像的环形连接判定的环形连接判定处理,并按照环形连接判定的结果,或者环形位置顺位,或者串联位置顺位可被附加到群组的多个拍摄图像。
另外,在拍摄图像的文件名中,除了位置顺位之外,还可包括表示附加到拍摄图像的位置顺位是环形位置顺位还是串联位置顺位的信息。
另外,作为存在环形连接群组的多个拍摄图像的优势的情况,例如,可以使用满足如下所述的所有3个条件(1)-(3)的情况等。
条件(1):群组的多个拍摄图像是由3台或更多台摄像机拍摄的图像。
条件(2):连接多台摄像机的拍摄位置的连接线(下面也称为摄像机连接线)是近似具有简单形状,比如圆、椭圆或矩形的图形(原始图形)的轮廓的轨迹。
条件(3):由连接利用摄像机连接线近似的图形的中心,和摄像机连接线的两端的线条在摄像机连接线侧(排列多个摄像机的一侧)形成的角度超过180°。
例如,在图5-8中图解所示的拍摄状态之中,在图6B、7A、8A和 8B中图解所示的拍摄状态下拍摄的多个拍摄图像满足所有3个条件 (1)-(3),因而,在环形连接判定处理中,获得指示按环形进行连接的判定结果。
另一方面,在图5A-5C、6A、6C、7B和8C中图解所示的拍摄状态下拍摄的多个拍摄图像不满足3个条件(1)-(3)中的至少一个条件,因此,在环形连接判定处理中,获得指示不按环形进行连接的判定结果。
图27是图解说明由位置顺位附加单元32进行环形连接判定处理的例子的流程图。
在步骤S71,位置顺位附加单元32从摄像机位置关系获取单元31,获得拍摄作为附加位置顺位的对象(下面也称为顺位附加对象)的群组的多个拍摄图像的多台摄像机的摄像机位置关系,然后处理进入步骤S72。
在步骤S72,位置顺位附加单元32通过根据拍摄作为顺位附加对象的多个拍摄图像的多台摄像机的摄像机位置关系,使摄像机连接线最短,并且不分枝地(一笔地描画)连接多台摄像机的拍摄位置,获得(描画)作为顺位附加对象的多个拍摄图像的摄像机连接线,然后处理进入步骤S73。
在步骤S73,位置顺位附加单元32评价连接作为摄像机连接线的两端的起点和终点是否可取(摄像机连接线的起点和终点是沿着顺位附加方向确定的),换句话说,通过判定上述3个条件(1)-(3)是否被满足,判定是否沿着摄像机连接线,环形连接作为顺位附加对象的多个拍摄图像。
在作为顺位附加对象的多个拍摄图像满足下述所有条件(1)-(3)的情况下,换句话说,在作为顺位附加对象的多个拍摄图像是由3台或更多台摄像机拍摄的图像(条件(1)),作为顺位附加对象的多个拍摄图像的摄像机连接线是近似原始图形的轮廓的轨迹(条件(2)),并且由连接利用作为顺位附加对象的多个拍摄图像的摄像机连接线近似的图形的中心,和摄像机连接线的两端的线条在摄像机连接线侧形成的角度超过180°(条件(3)) 的情况下,位置顺位附加单元32判定把作为顺位附加对象的多个拍摄图像连接成环形,然后环形连接判定处理结束。
这种情况下,在位置顺位附加处理中,如参考图4所述,位置顺位附加单元32向作为顺位附加对象的多个拍摄图像附加环形位置顺位。
另一方面,在作为顺位附加对象的多个拍摄图像不满足条件(1)-(3) 任意之一的情况下,位置顺位附加单元32判定不把作为顺位附加对象的多个拍摄图像连接成环形,然后环形连接判定处理结束。
这种情况下,在位置顺位附加处理中,位置顺位附加单元32向作为顺位附加对象的多个拍摄图像附加串联位置顺位。
图28是图解说明当在人物被设定为被摄对象,并且被摄对象的前方位置、左侧位置、右侧位置和后方位置被设定为拍摄位置的情况下,通过利用4台摄像机c#1~c#4拍摄被摄对象而获得的4个拍摄图像是顺位附加对象时的环形连接判定处理的示图。
在图28中,摄像机c#2和c#3的拍摄位置被相互连接,摄像机c#3 和c#4的拍摄位置被相互连接,摄像机c#1和c#2的拍摄位置被相互连接,由此作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像的摄像机连接线最短,作为可一笔地描画的摄像机连接线,描画近似圆的轮廓的摄像机连接线。
在图28中图解所示的情况下,由于作为顺位附加对象的由摄像机 c#1~c#4拍摄的拍摄图像满足所有条件(1)-(3),因此判定沿着摄像机连接线,环形地连接作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像 (存在可适当地连接作为摄像机连接线的两端的起点和终点的评价)。
图29是图解说明当在人物被设定为被摄对象,并且在被摄对象的前方侧的直线上的4个点被设定为拍摄位置的情况下,通过利用4台摄像机c#1~c#4拍摄被摄对象而获得的4个拍摄图像是顺位附加对象时的环形连接判定处理的示图。
在图29中,摄像机c#1和c#2的拍摄位置被相互连接,摄像机c#2 和c#3的拍摄位置被相互连接,摄像机c#3和c#4的拍摄位置被相互连接,由此作为顺位附加对象的由摄像机c#1~c#4拍摄的拍摄图像的摄像机连接线最短,作为可一笔地描画的摄像机连接线,描画近似直线的摄像机连接线。
在图29中图解所示的情况下,由于作为顺位附加对象的由摄像机 c#1~c#4拍摄的拍摄图像不满足条件(1)-(3)之中的条件(2)和(3),因此判定不沿着摄像机连接线,环形地连接作为顺位附加对象的由摄像机c#1~ c#4拍摄的拍摄图像(存在作为摄像机连接线的两端的起点和终点将不被连接的评价)。
另外,在环形连接判定处理中,在判定不环形连接作为顺位附加对象的多个拍摄图像,并在位置顺位附加处理中,向作为顺位附加对象的多个拍摄图像附加串联位置顺位的情况下,在重排单元33进行的重排处理中,例如,在群组的多个拍摄图像之中,只有被用户指定为第一的拍摄图像,和串联顺位比所述指定的拍摄图像低的拍摄图像可按照串联顺位的顺序被对齐地排列。另一方面,可配置成不进行重排处理。
<本技术适用于的计算机的说明>
上述一系列处理可以利用硬件执行,或者利用软件执行。在利用软件执行所述一系列处理的情况下,构成所述软件的程序被安装到通用计算机等中。
图30图解说明执行上述一系列处理的程序被安装到的按照实施例的计算机的结构的例子。
程序可被预先记录在作为内置于计算机中的记录介质的硬盘105或 ROM 103中。
另一方面或者另外地,程序可被保存(记录)在可拆卸记录介质111 中。可以所谓的套装软件的形式,提供这种可拆卸记录介质111。这里,作为可拆卸记录介质111的例子,存在软盘、CD-ROM(光盘只读存储器)、 MO(磁光)盘、DVD(数字通用光盘)、磁盘、半导体存储器等。
代替把程序从如上所述的可拆卸记录介质111安装到计算机中,可通过经通信网络或广播网络,把程序下载到计算机,把程序安装到内置硬盘105中。换句话说,程序可通过数字卫星广播卫星,从下载站点被无线地传送到计算机,或者可通过诸如LAN(局域网)或因特网之类的网络,被有线地传送到计算机。
计算机具有内置CPU(中央处理器)102,输入/输出接口110通过总线 101,连接到CPU 102。
当依据输入单元107的用户操作,通过输入/输出接口110输入指令时,CPU 102按照所述指令,执行保存在ROM(只读存储器)中的程序。或者,CPU 102把保存在硬盘105中的程序载入RAM(随机存取存储器) 中,并执行载入的程序。
因而,CPU 102进行与上述流程图相应的处理,或者利用上述方框图的结构进行的处理。随后,例如,在必要时,CPU 102通过输入/输出接口110,从输出单元106输出处理结果,从通信单元108传送处理结果,或者把处理结果记录在硬盘105中。
输入单元107由键盘、鼠标、麦克风等构成。另外,输出单元106 由LCD(液晶显示器)、扬声器等构成。
在本说明书中,计算机按照程序进行的处理不一定需要按照流程图中说明的顺序,时序地进行。换句话说,计算机按照程序进行的处理包括并行或者单独地进行的处理(例如,并行处理或者与对象相应的处理)。
另外,程序可由一个计算机(处理器)处理,或者可由多个计算机分布地处理。此外,程序可被传送给远程计算机,并在所述远程计算机中被执行。
另外,在本说明书中,系统表示一组多个构成元件(设备、模块(组件) 等),而不管所有构成元件是否被包含在相同机壳中。因而,设置在独立的机壳中,并通过网络连接的多个设备,或者具有设置在一个机壳中的多个模块的一个设备都是系统。
本技术的实施例不限于上述实施例,在不脱离本技术的原理的范围中,可以作出各种改变。
换句话说,例如,本技术可适用于运动图像或静止图像。
另外,本技术可具有云计算的结构,其中一种功能通过网络分布在多个设备中,并被协同地实现。
此外,在上述流程图中说明的各个步骤可由一个设备进行,或者由多个设备分布地进行。
另外,在一个步骤中包含多个处理的情况下,包含在所述一个步骤中的多个处理可由一个设备执行,或者可由多个设备分布地执行。
此外,在本说明书中说明的优点仅仅是例子,优点并不局限于此,相反可存在其它优点。
另外,本技术可包括以下结构。
<1>一种处理图像信息的方法,所述方法包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;和
按照位置顺位,处理图像。
<2>按照<1>所述的方法,其中相对于被摄对象,确定各个图像的透视位置。
<3>按照<1>或<2>所述的方法,其中所述位置信息包含位置之间的关系。
<4>按照<1>-<3>所述的方法,其中各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
<5>按照<1>-<4>所述的方法,其中根据被摄对象的移动,调整位置顺位。
<6>按照<1>-<5>所述的方法,还包括按照位置顺位合成图像。
<7>按照<6>-<6>所述的方法,其中利用时间分片进行合成。
<8>按照<1>-<7>所述的方法,其中所述路径包含围绕被摄对象的周界的至少一部分。
<9>按照<8>所述的方法,其中所述周界是矩形。
<10>按照<8>或<9>所述的方法,其中所述周界是曲线形。
<11>按照<1>-<10>所述的方法,其中所述路径包含分别对应于多个被摄对象位置的多个分段。
<12>按照<8>-<11>所述的方法,还包括:
按照位置顺位的顺序,显示各个图像。
<13>按照<12>所述的方法,其中所述显示包含逐行对齐各个图像。
<14>按照<12>或<13>所述的方法,还包括变更图像中的最前图像,从而变更图像的顺序。
<15>按照<14>所述的方法,所述变更还包括颠倒待显示的各个图像的顺序。
<16>按照<14>或<15>所述的方法,所述显示包括显示选定数目的图像,按照位置顺位的顺序,所述选定数目的图像之中的相邻两个图像被隔开相同数目的未选定图像。
<17>按照<15>所述的方法,所述显示还包括按照位置顺位的顺序,在再现屏幕上依次再现各个图像。
<18>一种处理图像信息的设备,所述设备包括:
配置成访问与图像相关的位置信息,
配置成识别分别对应于各个图像的透视位置的位置,和
配置成按照位置顺位,处理图像的电路。
<19>一种处理图像信息的设备,所述设备包括:
处理器;和
存储器,所述存储器保存可由处理器执行,以进行各个操作的程序代码,所述各个操作包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于各个图像的透视位置的位置;
识别提供沿着对应于被摄对象的路径的一系列位置的位置顺位;和
按照位置顺位,处理图像。
<1>一种图像处理设备,包括:
摄像机位置关系获取单元,所述摄像机位置关系获取单元获得多台摄像机的位置关系;和
位置顺位附加单元,所述位置顺位附加单元根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
<2>按照<1>所述的图像处理设备,其中位置顺位附加单元向多个拍摄图像附加用于把多个拍摄图像连接成环形的位置顺位。
<3>按照<1>所述的图像处理设备,还包括显示控制单元,所述显示控制单元按照拍摄图像的位置顺位,对齐多个拍摄图像,并把对齐的拍摄图像显示在显示单元上。
<4>按照<3>所述的图像处理设备,还包括重排单元,所述重排单元重排多个拍摄图像,以致多个拍摄图像之中的特定图像被排列在预定位置,同时与位置顺位相应的对齐顺序被维持。
<5>按照<3>或<4>所述的图像处理设备,还包括逆重排单元,所述逆重排单元按照拍摄图像的位置顺位,倒序地重排多个拍摄图像。
<6>按照<3>-<5>任意之一所述的图像处理设备,还包括拍摄状态图像生成单元,所述拍摄状态图像生成单元根据多台摄像机的位置关系,生成表示与多台摄像机相应的拍摄状态的拍摄状态图像,
其中显示控制单元还显示拍摄状态图像。
<7>按照<3>-<6>任意之一所述的图像处理设备,还包括图像间除单元,所述图像间除单元间除待显示在显示单元上的拍摄图像。
<8>按照<7>所述的图像处理设备,
其中图像间除单元通过
设定显示对象图像数,所述显示对象图像数是待显示在显示单元上的拍摄图像的数目,
根据多台摄像机的位置关系,选择与显示对象图像数对应的摄像机,作为选定摄像机,以致使选定摄像机的位置等间距,和
把由对应于显示对象图像数的选定摄像机拍摄的拍摄图像设定为待显示在显示单元上的显示对象,
间除待显示在显示单元上的拍摄图像。
<9>按照<3>-<8>任意之一所述的图像处理设备,还包括:
再现对象设定单元,所述再现对象设定单元从多个拍摄图像之中,设定作为再现对象的拍摄图像;和
再现单元,所述再现单元再现作为再现对象的拍摄图像。
<10>按照<9>所述的图像处理设备,
其中再现对象设定单元逐次把多个拍摄图像设定为再现对象,和
其中在作为再现对象的拍摄图像的整个区间被设定为再现区间的情况下,再现单元再现作为再现对象的拍摄图像。
<11>按照<9>所述的图像处理设备,
其中再现对象设定单元把其时间被同步的多个拍摄图像之中的,具有满足预定条件的区间的拍摄图像设定为再现对象,和
其中在作为再现对象的拍摄图像的满足预定条件的区间被设定为再现区间的情况下,再现单元再现作为再现对象的拍摄图像。
<12>按照<1>-<11>任意之一所述的图像处理设备,其中位置顺位附加单元此外按照位置顺位,变更多个拍摄图像的文件名。
<13>一种图像处理方法,包括:获得多台摄像机的位置关系;和根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
<14>一种使计算机起以下作用的程序:摄像机位置关系获取单元,所述摄像机位置关系获取单元获得多台摄像机的位置关系;和位置顺位附加单元,所述位置顺位附加单元根据多台摄像机的位置关系,向利用多台摄像机拍摄的多个拍摄图像附加用于连接多个拍摄图像的位置顺位。
本领域的技术人员应明白,根据设计要求和其它因素,可以产生各种修改、组合、子组合和变更,只要它们在所附的权利要求或其等同物的范围之内。
[附图标记列表]
11 图像获取单元
12 存储器
13 时间同步单元
14 显示控制单元
15 显示单元
16 图像排列控制单元
17 再现单元
18 操作单元
19 控制单元
31 摄像机位置关系获取单元
32 位置顺位附加单元
33 重排单元
34 逆重排单元
35 拍摄状态图像生成单元
36 图像间除单元
37 再现对象设定单元
101 总线
102 CPU
103 ROM
104 RAM
105 硬盘
106 输出单元
107 输入单元
108 通信单元
109 驱动器
110 输入/输出接口
111 可拆卸记录介质

Claims (16)

1.一种用于处理图像信息的方法,所述方法包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于相对于被摄对象的位置的位置;
识别提供沿着对应于被摄对象的路径的一系列至少三个位置的位置顺位并且不分枝地连接所述位置并使连线最短,其中,所述路径包含围绕被摄对象的周界的至少一部分,或者包含分别对应于被摄对象实际经过的多个被摄对象位置的多个分段;
生成表示各个图像的拍摄开始时间的差异的同步信息;以及
根据所述位置顺位和所述同步信息,在水平轴和垂直轴分别被设定为时间和位置顺位的情况下,将分别表示所述各个图像的多个符号二维地排列成在垂直方向上和水平方向上分别被对齐,
其中,在满足下述条件的情况下,保持所述位置顺位并对所述位置顺位执行环形连接,以及在不满足下述条件的情况下,对所述位置顺位执行串联连接:
所述连线具有简单形状并且由连接由所述连线近似的图形的中心和所述连线的两端的线条在所述连线的一侧形成的角度超过180°。
2.按照权利要求1所述的方法,其中所述位置信息包含位置之间的关系。
3.按照权利要求1所述的方法,其中各个透视位置分别对应于拍摄被摄对象的图像的摄像机。
4.按照权利要求1所述的方法,其中根据被摄对象的移动,调整位置顺位。
5.按照权利要求1所述的方法,还包括按照位置顺位合成图像。
6.按照权利要求5所述的方法,其中利用时间分片进行合成。
7.按照权利要求1所述的方法,其中所述周界是矩形。
8.按照权利要求1所述的方法,其中所述周界是曲线形。
9.按照权利要求1所述的方法,还包括:
按照位置顺位的顺序显示所述图像。
10.按照权利要求9所述的方法,其中所述显示包括逐行对齐图像。
11.按照权利要求9所述的方法,还包括变更图像中的最前图像,从而变更图像的顺序。
12.按照权利要求11所述的方法,所述变更还包括颠倒待显示的图像的顺序。
13.按照权利要求11所述的方法,所述显示包括显示选定数目的图像,并且按照位置顺位的顺序,所述选定数目的图像之中的相邻两个图像被隔开相同数目的未选定图像。
14.按照权利要求12所述的方法,所述显示还包括按照位置顺位的顺序在再现屏幕上依次再现图像。
15.一种用于处理图像信息的设备,所述设备包括:
电路,该电路被配置成访问与图像相关的位置信息,被配置成识别分别对应于相对于被摄对象的位置的位置,被配置成识别提供沿着对应于被摄对象的路径的一系列至少三个位置的位置顺位并且不分枝地连接所述位置并使连线最短,被配置成生成表示各个图像的拍摄开始时间的差异的同步信息,以及被配置成根据所述位置顺位和所述同步信息,在水平轴和垂直轴分别被设定为时间和位置顺位的情况下,将分别表示所述各个图像的多个符号二维地排列成在垂直方向上和水平方向上分别被对齐,其中,所述路径包含围绕被摄对象的周界的至少一部分,或者包含分别对应于被摄对象实际经过的多个被摄对象位置的多个分段,其中,在满足下述条件的情况下,保持所述位置顺位并对所述位置顺位执行环形连接,以及在不满足下述条件的情况下,对所述位置顺位执行串联连接:所述连线具有简单形状并且由连接由所述连线近似的图形的中心和所述连线的两端的线条在所述连线的一侧形成的角度超过180°。
16.一种用于处理图像信息的设备,所述设备包括:
处理器;和
存储器,所述存储器保存能够由处理器执行以进行操作的程序代码,所述操作包括:
访问与图像相关的位置信息,所述位置信息识别分别对应于相对于被摄对象的位置的位置;
识别提供沿着对应于被摄对象的路径的一系列至少三个位置的位置顺位并且不分枝地连接所述位置并使连线最短,其中,所述路径包含围绕被摄对象的周界的至少一部分,或者包含分别对应于被摄对象实际经过的多个被摄对象位置的多个分段;
生成表示各个图像的拍摄开始时间的差异的同步信息;以及
根据所述位置顺位和所述同步信息,在水平轴和垂直轴分别被设定为时间和位置顺位的情况下,将分别表示所述各个图像的多个符号二维地排列成在垂直方向上和水平方向上分别被对齐,
在满足下述条件的情况下,保持所述位置顺位并对所述位置顺位执行环形连接,以及在不满足下述条件的情况下,对所述位置顺位执行串联连接:
所述连线具有简单形状并且由连接由所述连线近似的图形的中心和所述连线的两端的线条在所述连线的一侧形成的角度超过180°。
CN201480037279.9A 2013-09-09 2014-09-01 利用摄像机位置顺位的图像信息处理方法和设备 Active CN105359504B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013186305A JP6187811B2 (ja) 2013-09-09 2013-09-09 画像処理装置、画像処理方法、及び、プログラム
JP2013-186305 2013-09-09
PCT/JP2014/004472 WO2015033546A1 (en) 2013-09-09 2014-09-01 Image information processing method, apparatus and program utilizing a camera position sequence

Publications (2)

Publication Number Publication Date
CN105359504A CN105359504A (zh) 2016-02-24
CN105359504B true CN105359504B (zh) 2020-03-24

Family

ID=51570814

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480037279.9A Active CN105359504B (zh) 2013-09-09 2014-09-01 利用摄像机位置顺位的图像信息处理方法和设备

Country Status (5)

Country Link
US (1) US11265525B2 (zh)
EP (1) EP3000111A1 (zh)
JP (1) JP6187811B2 (zh)
CN (1) CN105359504B (zh)
WO (1) WO2015033546A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10049462B2 (en) * 2016-03-23 2018-08-14 Akcelita, LLC System and method for tracking and annotating multiple objects in a 3D model
US10360445B2 (en) * 2016-03-23 2019-07-23 Akcelita, LLC System and method for tracking persons using a volumetric representation
US10614578B2 (en) * 2016-03-23 2020-04-07 Akcelita, LLC System and method for tracking people, animals and objects using a volumetric representation and artificial intelligence
CN107333031B (zh) * 2017-07-27 2020-09-01 李静雯 一种适用于校园足球比赛的多路视频自动编辑方法
JP6841977B2 (ja) * 2018-06-11 2021-03-10 富士フイルム株式会社 撮影支援装置、撮影支援方法、及び撮影支援プログラム
JP7193938B2 (ja) * 2018-07-04 2022-12-21 キヤノン株式会社 情報処理装置及びその制御方法、プログラム
JP7246146B2 (ja) * 2018-08-28 2023-03-27 株式会社Nttドコモ 情報処理装置及び映像投影システム
US11763467B2 (en) 2018-09-28 2023-09-19 Intel Corporation Multi-cam ball location method and apparatus
US20220295040A1 (en) * 2021-03-11 2022-09-15 Quintar, Inc. Augmented reality system with remote presentation including 3d graphics extending beyond frame

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2834416A1 (fr) * 2001-12-28 2003-07-04 Thomson Licensing Sa Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes
EP1489847A2 (en) * 2003-06-18 2004-12-22 Matsushita Electric Industrial Co., Ltd. Video surveillance system, surveillance video composition apparatus, and video surveillance server
WO2008151416A1 (en) * 2007-06-12 2008-12-18 In Extenso Holdings Inc. Distributed synchronized video viewing and editing

Family Cites Families (83)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4089597A (en) * 1976-03-11 1978-05-16 Robert Bruce Collender Stereoscopic motion picture scanning reproduction method and apparatus
US4321625A (en) * 1977-11-16 1982-03-23 Lectrolarm Custom Systems, Inc. Control system for plurality of video cameras
US4158487A (en) * 1978-02-17 1979-06-19 Collender Robert B Stereoscopic real image scanning reproduction method and apparatus
US4589140A (en) * 1983-03-21 1986-05-13 Beltronics, Inc. Method of and apparatus for real-time high-speed inspection of objects for identifying or recognizing known and unknown portions thereof, including defects and the like
US5184732A (en) * 1985-12-20 1993-02-09 Gersan Establishment Shape sorting
US4698682A (en) * 1986-03-05 1987-10-06 Rca Corporation Video apparatus and method for producing the illusion of motion from a sequence of still images
FR2661061B1 (fr) * 1990-04-11 1992-08-07 Multi Media Tech Procede et dispositif de modification de zone d'images.
US5258837A (en) * 1991-01-07 1993-11-02 Zandar Research Limited Multiple security video display
US5448291A (en) * 1993-06-30 1995-09-05 Wickline; Dennis E. Live video theater and method of presenting the same utilizing multiple cameras and monitors
US5613048A (en) * 1993-08-03 1997-03-18 Apple Computer, Inc. Three-dimensional image synthesis using view interpolation
US7843497B2 (en) * 1994-05-31 2010-11-30 Conley Gregory J Array-camera motion picture device, and methods to produce new visual and aural effects
US5729471A (en) * 1995-03-31 1998-03-17 The Regents Of The University Of California Machine dynamic selection of one video camera/image of a scene from multiple video cameras/images of the scene in accordance with a particular perspective on the scene, an object in the scene, or an event in the scene
US6522325B1 (en) * 1998-04-02 2003-02-18 Kewazinga Corp. Navigable telepresence method and system utilizing an array of cameras
US6538698B1 (en) * 1998-08-28 2003-03-25 Flashpoint Technology, Inc. Method and system for sorting images in an image capture unit to ease browsing access
US6707487B1 (en) * 1998-11-20 2004-03-16 In The Play, Inc. Method for representing real-time motion
JP4167777B2 (ja) * 1999-07-19 2008-10-22 三菱電機株式会社 映像表示装置、映像表示方法および映像を表示するためのプログラムを記録した記録媒体
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US20020049979A1 (en) 2000-05-18 2002-04-25 Patrick White Multiple camera video system which displays selected images
AU2001264723A1 (en) * 2000-05-18 2001-11-26 Imove Inc. Multiple camera video system which displays selected images
JP2002252830A (ja) * 2001-02-22 2002-09-06 Hitachi Kokusai Electric Inc 画像記録装置
US7540011B2 (en) * 2001-06-11 2009-05-26 Arrowsight, Inc. Caching graphical interface for displaying video and ancillary data from a saved video
US7046292B2 (en) * 2002-01-16 2006-05-16 Hewlett-Packard Development Company, L.P. System for near-simultaneous capture of multiple camera images
US6710713B1 (en) * 2002-05-17 2004-03-23 Tom Russo Method and apparatus for evaluating athletes in competition
JP2004186824A (ja) * 2002-11-29 2004-07-02 Jikei Univ School Of Medicine 時空間多重画像装置および方法
US20070070210A1 (en) * 2003-04-11 2007-03-29 Piccionelli Gregory A Video production with selectable camera angles
EP2408192A3 (en) * 2004-04-16 2014-01-01 James A. Aman Multiple view compositing and object tracking system
US7292257B2 (en) * 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
FR2872943B1 (fr) * 2004-07-07 2006-10-27 Leo Vision Soc Par Actions Sim Procede d'obtention d'une succession d'images sous la forme d'un effet tournant
AU2005279687B2 (en) * 2004-08-30 2010-02-18 Trace Optic Technologies Pty Ltd A method and apparatus of camera control
JP2006086671A (ja) * 2004-09-15 2006-03-30 Hitachi Ltd 自動追尾機能を有する撮像装置
KR100720722B1 (ko) * 2005-06-21 2007-05-22 삼성전자주식회사 중간영상 생성방법 및 이 방법이 적용되는 입체영상디스플레이장치
JP4852765B2 (ja) * 2005-08-30 2012-01-11 国立大学法人 奈良先端科学技術大学院大学 広域分散カメラ間の連結関係推定法および連結関係推定プログラム
JP4525618B2 (ja) * 2006-03-06 2010-08-18 ソニー株式会社 映像監視システムおよび映像監視プログラム
JP4561657B2 (ja) * 2006-03-06 2010-10-13 ソニー株式会社 映像監視システムおよび映像監視プログラム
JP4725452B2 (ja) * 2006-08-04 2011-07-13 株式会社ニコン デジタルカメラ及び画像処理プログラム
WO2008035745A1 (en) * 2006-09-20 2008-03-27 Panasonic Corporation Monitor system, camera and video image coding method
US8274564B2 (en) * 2006-10-13 2012-09-25 Fuji Xerox Co., Ltd. Interface for browsing and viewing video from multiple cameras simultaneously that conveys spatial and temporal proximity
US8094182B2 (en) * 2006-11-16 2012-01-10 Imove, Inc. Distributed video sensor panoramic imaging system
JP2008147838A (ja) * 2006-12-07 2008-06-26 Sony Corp 画像処理装置、画像処理方法、およびプログラム
AU2006252090A1 (en) * 2006-12-18 2008-07-03 Canon Kabushiki Kaisha Dynamic Layouts
US7992097B2 (en) * 2006-12-22 2011-08-02 Apple Inc. Select drag and drop operations on video thumbnails across clip boundaries
US7898576B2 (en) * 2007-02-28 2011-03-01 Honeywell International Inc. Method and system for indexing and searching objects of interest across a plurality of video streams
JP4730341B2 (ja) * 2007-06-06 2011-07-20 株式会社日立製作所 撮像装置
JP4416017B2 (ja) * 2007-07-18 2010-02-17 ソニー株式会社 撮像システム
US20090113505A1 (en) * 2007-10-26 2009-04-30 At&T Bls Intellectual Property, Inc. Systems, methods and computer products for multi-user access for integrated video
JP2009109880A (ja) * 2007-10-31 2009-05-21 Sony Corp 表示制御装置、表示制御方法、およびプログラム
US9690442B2 (en) * 2008-10-17 2017-06-27 Adobe Systems Incorporated Generating customized effects for image presentation
JP2010113655A (ja) * 2008-11-10 2010-05-20 Canon Inc 画像処理装置、画像処理装置の制御方法、及び制御プログラム
JP5537040B2 (ja) * 2009-01-28 2014-07-02 キヤノン株式会社 表示制御装置および表示制御方法
US8180107B2 (en) * 2009-02-13 2012-05-15 Sri International Active coordinated tracking for multi-camera systems
US20120020518A1 (en) * 2009-02-24 2012-01-26 Shinya Taguchi Person tracking device and person tracking program
US9479768B2 (en) * 2009-06-09 2016-10-25 Bartholomew Garibaldi Yukich Systems and methods for creating three-dimensional image media
JP2011033870A (ja) * 2009-08-03 2011-02-17 Sony Corp 画像処理装置、画像処理方法およびプログラム
US8564623B2 (en) * 2009-12-11 2013-10-22 Molecular Devices, Llc Integrated data visualization for multi-dimensional microscopy
US8274592B2 (en) * 2009-12-22 2012-09-25 Eastman Kodak Company Variable rate browsing of an image collection
JP2011135246A (ja) * 2009-12-24 2011-07-07 Sony Corp 画像処理装置、撮像装置、および画像処理方法、並びにプログラム
JP2011166264A (ja) * 2010-02-05 2011-08-25 Sony Corp 画像処理装置、撮像装置、および画像処理方法、並びにプログラム
US8787618B2 (en) * 2010-04-13 2014-07-22 Sony Corporation Content information processing device, content information processing method, content information processing program, and personal digital assistant
JP2012004739A (ja) 2010-06-15 2012-01-05 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP5724230B2 (ja) * 2010-07-07 2015-05-27 ソニー株式会社 表示制御装置、表示制御方法、プログラム
US8555170B2 (en) * 2010-08-10 2013-10-08 Apple Inc. Tool for presenting and editing a storyboard representation of a composite presentation
JP5678576B2 (ja) * 2010-10-27 2015-03-04 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および監視システム
GB2485969A (en) * 2010-11-12 2012-06-06 Sony Corp Video surveillance with anticipated arrival time of object in another camera view
US8861890B2 (en) * 2010-11-24 2014-10-14 Douglas Alan Lefler System and method for assembling and displaying individual images as a continuous image
US9007432B2 (en) * 2010-12-16 2015-04-14 The Massachusetts Institute Of Technology Imaging systems and methods for immersive surveillance
US9182229B2 (en) * 2010-12-23 2015-11-10 Trimble Navigation Limited Enhanced position measurement systems and methods
JP5977922B2 (ja) * 2011-02-24 2016-08-24 セイコーエプソン株式会社 情報処理装置および情報処理装置の制御方法、透過型頭部装着型表示装置
CN103502986B (zh) * 2011-03-07 2015-04-29 科宝2股份有限公司 用于从事件或地理位置处的图像提供者进行分析数据采集的系统及方法
JP2012242918A (ja) * 2011-05-17 2012-12-10 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP5316588B2 (ja) * 2011-05-30 2013-10-16 沖電気工業株式会社 映像配信システム及び方法
JP5967473B2 (ja) * 2011-06-03 2016-08-10 パナソニックIpマネジメント株式会社 撮像装置及び撮像システム
US8405740B2 (en) * 2011-06-24 2013-03-26 Eastman Kodak Company Guidance for image capture at different locations
US20130124999A1 (en) * 2011-11-14 2013-05-16 Giovanni Agnoli Reference clips in a media-editing application
US9449583B2 (en) * 2011-12-15 2016-09-20 Lenovo (Beijing) Co., Ltd. Control method and electronic apparatus
JP5548671B2 (ja) * 2011-12-27 2014-07-16 株式会社ソニー・コンピュータエンタテインメント 画像処理システム、画像提供サーバ、情報処理装置、および画像処理方法
US20130215239A1 (en) * 2012-02-21 2013-08-22 Sen Wang 3d scene model from video
GB2502065A (en) * 2012-05-14 2013-11-20 Sony Corp Video comparison apparatus for sports coverage
US9257090B2 (en) * 2012-10-04 2016-02-09 Spirority, Inc. Graphical display of content on a display device in a spiral pattern
US9311310B2 (en) * 2012-10-26 2016-04-12 Google Inc. System and method for grouping related photographs
US9087386B2 (en) * 2012-11-30 2015-07-21 Vidsys, Inc. Tracking people and objects using multiple live and recorded surveillance camera video feeds
US9292936B2 (en) * 2013-01-09 2016-03-22 Omiimii Ltd. Method and apparatus for determining location
US9118843B2 (en) * 2013-01-17 2015-08-25 Google Inc. Methods and systems for creating swivel views from a handheld device
US9462301B2 (en) * 2013-03-15 2016-10-04 Google Inc. Generating videos with multiple viewpoints

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2834416A1 (fr) * 2001-12-28 2003-07-04 Thomson Licensing Sa Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes
EP1489847A2 (en) * 2003-06-18 2004-12-22 Matsushita Electric Industrial Co., Ltd. Video surveillance system, surveillance video composition apparatus, and video surveillance server
WO2008151416A1 (en) * 2007-06-12 2008-12-18 In Extenso Holdings Inc. Distributed synchronized video viewing and editing

Also Published As

Publication number Publication date
JP6187811B2 (ja) 2017-08-30
CN105359504A (zh) 2016-02-24
EP3000111A1 (en) 2016-03-30
WO2015033546A1 (en) 2015-03-12
JP2015053636A (ja) 2015-03-19
US11265525B2 (en) 2022-03-01
US20160381339A1 (en) 2016-12-29

Similar Documents

Publication Publication Date Title
CN105359504B (zh) 利用摄像机位置顺位的图像信息处理方法和设备
US20220132036A1 (en) Display Control Apparatus, Display Control Method, And Program
JP5347890B2 (ja) 画像処理装置および方法、並びにプログラム
US10686985B2 (en) Moving picture reproducing device, moving picture reproducing method, moving picture reproducing program, moving picture reproducing system, and moving picture transmission device
JP7017175B2 (ja) 情報処理装置、情報処理方法、プログラム
US8421871B2 (en) Method and apparatus for image pickup and image processing
US9621768B1 (en) Multi-view media display
JP5495855B2 (ja) 映像処理装置及び映像処理方法
US20200388068A1 (en) System and apparatus for user controlled virtual camera for volumetric video
JP2016213808A (ja) カメラ選択方法及び映像配信システム
TW201118792A (en) Capture and display of digital images based on related metadata
US10115431B2 (en) Image processing device and image processing method
JP2020086983A (ja) 画像処理装置、画像処理方法、及びプログラム
JP6238134B2 (ja) 画像処理装置、画像処理方法及びプログラム
KR20150131668A (ko) 영상 매트릭스 인터페이스를 이용한 다시점 영상 생성 방법 및 다시점 영상 생성 시스템
JP2008187678A (ja) 映像生成装置及び映像生成プログラム
GB2530984A (en) Apparatus, method and computer program product for scene synthesis
JP2011071813A (ja) 3次元に表示された動画コンテンツ編集プログラム、装置及び方法
EP4007261A1 (en) Image processing device, image processing method, and program
JP6402816B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2004349832A (ja) 撮影装置
KR101511868B1 (ko) 다중 카메라 디바이스를 활용한 멀티미디어 촬영 방법 및 그 시스템
JP5089648B2 (ja) 映像比較装置,映像比較方法,映像比較プログラムおよび映像比較プログラムの記録媒体
JP2016136787A (ja) 画像生成装置、画像生成方法、画像生成プログラム及び画像生成システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant