CN101147391A - 成像设备、信息处理设备、信息处理方法、程序和程序记录介质 - Google Patents

成像设备、信息处理设备、信息处理方法、程序和程序记录介质 Download PDF

Info

Publication number
CN101147391A
CN101147391A CNA2006800090425A CN200680009042A CN101147391A CN 101147391 A CN101147391 A CN 101147391A CN A2006800090425 A CNA2006800090425 A CN A2006800090425A CN 200680009042 A CN200680009042 A CN 200680009042A CN 101147391 A CN101147391 A CN 101147391A
Authority
CN
China
Prior art keywords
image
playback parameter
caught
playback
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800090425A
Other languages
English (en)
Other versions
CN101147391B (zh
Inventor
近藤哲二郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101147391A publication Critical patent/CN101147391A/zh
Application granted granted Critical
Publication of CN101147391B publication Critical patent/CN101147391B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

提供一种能够向用户提供最佳图像的成像设备、信息处理设备、信息处理方法、程序和程序记录介质。记录介质(4)包括:比由用户识别而记录的普通图像的视角更宽且分辨率更高的大容量图像,该大容量图像具有该普通图像的全部范围;和再现参数,其包括指示在该普通图像中所捕获的范围的信息。根据该再现参数,图像提取单元(22)从该大容量图像中提取图像或部分区域,且使得显示设备(3)显示它作为所提取的图像。另一方面,再现参数处理单元(24)根据操作单元(26)的操作生成新的再现参数。在这种情况下,图像提取单元(22)根据该新的再现参数来提取提取图像。本发明可以被应用于例如图像记录/再现设备。

Description

成像设备、信息处理设备、信息处理方法、程序和程序记录介质
技术领域
本发明涉及图像拾取设备、用于处理信息的设备和方法、程序和程序记录介质,且具体地涉及能够向用户提供最佳图像的图像拾取设备、用于处理信息的设备和方法、程序和程序记录介质。
背景技术
例如,在视频摄像机中,使用DV(数字视频)格式或MPEG(运动图像专家组)格式对通过捕获图像所获得的图像(图像数据)进行编码,并将其记录在诸如带或盘的记录介质上。
通常,视频摄像机具有缩放功能。使用该缩放功能,视频摄像机能够改变所捕获的图像的视角(在图像中所捕获的场景的范围的视角)(放大率)。即,例如,当用户实行放大操作并捕获图像时,能够获得具有窄视角的图像即,物体的近景(close-up)(放大的)图像。相反,当用户实行缩小操作并捕获图像时,能够获得在其中捕获了场景的更宽范围的广角图像。
现有的视频摄像机能够通过实行上述缩放操作(放大或缩小操作)来改变视角,但不能同时捕获具有不同视角的图像,因为现有的视频摄像机仅有一个图像捕获装置,用于捕获图像并输出所捕获的图像。
因此,已经提出了包括两个图像捕获装置以便同时捕获具有窄视角的图像和具有宽视角的图像的视频摄像机(参考,例如,专利文献1)。
[专利文献1]日本未审查专利申请公开No.2004-282296
发明内容
本发明要解决的问题
用户在观看被显示在例如视频摄像机的取景器(finder)上的图像的同时捕获物体的期望图像。因此,用户失去了捕获在被显示在取景器上的图像中所捕获的场景范围外部的所有场景范围(例如,偶然发生在正被捕获的场景范围外部的事件场景)的机会。
另外,即使当用户回放由视频摄像机所捕获的图像时,用户仍然不能观看在该图像中所捕获的场景外部的场景。
如上所述,当用户使用视频摄像机来捕获图像时,用户不能观看出现在由该视频摄像机所捕获的图像中的场景范围外部的场景范围。因此,所捕获的图像对于用户来说并不总是最佳的。
因此,本发明向用户提供一种对于用户来说最佳的图像。
解决问题的手段
根据本发明,图像拾取设备包括:第一图像拾取装置,用于输出第一图像;第二图像拾取装置,用于输出第二图像,其中所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围;显示装置,用于显示所述第一图像;生成装置,用于检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并用于生成包括至少指示所述区域的信息的回放参数;以及输出控制装置,用于输出所述第二图像和所述回放参数。
根据本发明,一种用于处理信息的第一方法包括步骤:检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数,其中,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,以及输出所述第二图像和回放参数。
根据本发明,一种第一程序,包括步骤:检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数,其中,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,以及输出所述第二图像和回放参数。
根据本发明,一种第一程序记录介质存储程序。该程序包括步骤:检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数,其中,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,以及输出所述第二图像和回放参数。
根据本发明,一种信息处理设备,包括:回放控制装置,用于从记录第二图像和回放参数的数据记录介质生成第二图像和回放参数,其中所述第二图像具有比第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;提取装置,用于提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;回放参数生成装置,用于根据用户操作生成新的回放参数;以及记录控制装置,用于记录所述新的回放参数。当生成了新的回放参数时,所述提取装置基于所述新的回放参数来提取所述提取图像。
根据本发明,一种用于处理信息的第二方法,包括步骤:从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;根据用户操作生成新的回放参数;以及记录所述新的回放参数。当生成了新的回放参数时,在提取所述第二图像的至少部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
根据本发明,一种第二程序,包括步骤:从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;至少提取所述第二图像的部分图像,并输出所述图像作为提取图像;根据用户操作生成新的回放参数;以及记录所述新的回放参数。当生成了新的回放参数时,在至少提取所述第二图像的部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
根据本发明,一种第二程序记录介质存储程序。该程序包括步骤:从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,其中所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;至少提取所述第二图像的部分图像,并输出所述图像作为提取图像;根据用户操作生成新的回放参数;以及记录所述新的回放参数。当生成了新的回放参数时,在至少提取所述第二图像的部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
根据本发明,所述图像拾取设备、用于处理信息的第一方法、第一程序和被记录在第一程序记录介质上的程序检测在其中捕获了在第一图像中所捕获的场景的第二图像的区域,并生成包括至少指示所述区域的信息的回放参数,以及输出所述第二图像和所述回放参数,其中,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围。
根据本发明,所述信息处理设备、用于处理信息的第二方法、第二程序和被记录在第二程序记录介质上的程序从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,其中,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,以及所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息,至少提取所述第二图像的部分图像,并输出所述图像作为提取图像。另外,所述信息处理设备、用于处理信息的第二方法、第二程序和被记录在第二程序记录介质上的程序根据用户操作生成新的回放参数,并记录所述新的回放参数。当生成了新的回放参数时,基于所述新的回放参数来提取所述提取图像。
优势
根据本发明,可以向用户提供对于用户来说最佳的图像。
附图说明
图1是图示根据本发明的实施例的图像处理系统的示例配置的方框图;
图2是图示图像拾取设备1的示例配置的方框图;
图3是图示该图像拾取设备1的操作的流程图;
图4是图示回放设备2的示例配置的方框图;
图5是图示由图像提取单元22进行的处理的图;
图6是图示该回放设备2的操作的流程图;
图7是图示编辑操作的图;以及
图8是图示根据本发明的实施例的计算机的示例配置的方框图。
附图标记
1图像拾取设备
2回放设备
3显示单元
4记录介质
11普通摄像机单元
12普通信号处理单元
13显示单元
14广角摄像机单元
15操作单元
16传感器
17控制器
17A CPU
17B RAM
17C EEPROM
18记录单元
21记录和回放单元
22图像提取单元
23信号处理单元
24回放参数处理单元
25回放参数存储单元
26操作单元
101总线
102 CPU
103 ROM
104 RAM
105硬盘
106输出单元
107输入单元
108通信单元
109驱动
110输入/输出接口
111可移动记录介质
具体实施方式
下面参考附图来描述本发明的实施例。
图1图示了根据本发明的实施例的图像处理系统的示例配置。如在此所使用的,术语“系统”是指多个设备的逻辑组合;该多个设备不一定被包括在一个壳体中。
图像拾取设备1是例如所谓的视频摄像机。图像拾取设备1响应于用户操作来捕获图像。随后,图像拾取设备1在记录介质4上记录所捕获的图像(图像数据)和被用于回放图像的回放参数。
回放设备2回放被记录在记录介质4上的图像和回放参数。随后,回放设备2基于回放参数,从来自记录介质4的所回放的图像中提取图像的预定范围。然后,回放设备2向显示单元3供应该图像的预定范围。
显示单元3由例如阴极射线管(CRT)或液晶显示器(LCD)组成。显示单元3显示从回放设备2供应的图像。
记录介质4的示例包括磁带、磁盘、光盘、磁光盘和半导体存储器。记录介质4是可移动地安装在图像拾取设备1或回放设备2中的。可替换地,记录介质4可以被并入图像拾取设备1中。在这种情况下,图像拾取设备1可以重构被记录在记录介质4上的图像,并向回放设备2传送该图像。可替换地,记录介质4可以被并入回放设备2中。在这种情况下,从图像拾取设备1向回放设备2传送由图像拾取设备1所获得的图像。然后,回放设备2可以在记录介质4上记录该图像。
图2图示了图1所示的图像拾取设备1的示例配置。
通常,普通摄像机单元11包括广泛用于现有的视频摄像机中的光学系统和光电变换器(photoelectric transducer),诸如电荷耦合器件(CCD)成像器或互补金属氧化物半导体(CMOS)成像器。普通摄像机单元11在控制器17的控制下光电地转换在其上入射的光,并输出图像(数据)。
另外,普通摄像机单元11包括例如光学缩放(zoom)机构。当使用操作单元15进行放大操作或缩小操作时,控制器17根据放大操作或缩小操作来控制普通摄像机单元11的缩放机构。普通摄像机单元11在控制器17的控制下驱动被装于其中的光学系统。以此方式,普通摄像机单元11捕获窄或广的视角的图像,并输出该视角的图像。
如在此所使用的,由普通摄像机单元11所捕获并输出的图像是在需要时称作“普通图像”。
通常,从普通摄像机单元11输出的普通图像被供应到普通信号处理单元12和控制器17。普通信号处理单元12根据控制器17的控制,在从普通摄像机单元11供应的普通图像上进行信号处理。然后,普通信号处理单元12向显示单元13供应该普通图像。
由普通信号处理单元12进行的信号处理的示例包括降噪和图像稳定。可以通过例如操作该操作单元15来设置由普通信号处理单元12进行的信号处理。控制器17根据该设置来控制普通信号处理单元12。
显示单元13是由用户使用以便监视由普通摄像机单元11所捕获的图像(普通图像)的监视器(或取景器)。显示单元13显示从普通信号处理单元12供应的普通图像(经过了由普通信号处理单元12进行的信号处理的普通图像)。
广角摄像机单元14在控制器17的控制下,光电转换在其上入射的光束。然后,广角摄像机单元14向控制器17和记录单元18输出图像(数据)。
广角摄像机单元14输出具有比由普通摄像机单元11捕获的普通图像的视角更宽的视角且具有比普通图像的分辨率更高的分辨率的图像。另外,从广角摄像机单元14输出的图像(下文中也被称为“大尺寸图像”)至少包括在普通图像中被捕获的场景范围的全部。广角摄相机单元14包括可以捕获这样的大尺寸图像的光学系统和光电转换器
为了获得具有比普通图像的视角更宽的视角的图像,可以使用如下方法,其中,例如,诸如鱼眼镜头的广角镜头被用于广角摄像机单元14的光学系统,或者全方位摄像机被用于广角摄像机单元14。可替换地,通过排列多个摄像机单元,以便其捕获图像方向互相略有不同,且通过将从摄像机单元输出的图像连接到一起,能够获得具有比普通图像的视角更宽的视角的图像。
为了获得具有比普通图像的分辨率更高的图像,可以使用如下方法,其中,例如,具有比普通摄像机单元11的像素更小的像素的、且具有比普通摄像机单元11的像素更多数量的像素的光电变换器被采用用于广角摄像机单元14的光电变换器。
另外,为了允许大尺寸图像至少包括在普通图像中所捕获的场景范围的全部,可以如此安置普通摄像机单元11和广角摄像机单元14,以便当普通摄像机单元11捕获具有最广视角的图像时,广角摄像机单元14能够至少捕获在该图像中所捕获的全部场景。
另外,例如,当全方位摄像机被使用用于广角摄像机单元14、且由该全方位摄像机捕获广角的大尺寸图像时,该广角的大尺寸图像具有环状外形(圆形图像)。因此,广角摄像机单元14转换该圆形图像为中心投影图像(全景图像),并输出经转换的图像。当广角摄像机单元14使用鱼眼镜头来获得广角的大尺寸图像时,进行类似的处理。
期望与普通图像相比,大尺寸图像具有足够宽的视角和足够高的分辨率。
当用户指令例如普通摄像机单元11的开始在记录介质4上记录图像、停止记录操作、或者放大或缩小操作时,由用户操作操作单元15。这时,操作单元15向控制器17供应对应于用户操作的操作信号。如在此所使用的,指令普通摄像机单元11放大和缩小的操作单元15的操作被分别称为“放大操作”和“缩小操作”。在下文中,如需要,放大操作和缩小操作被统称为“缩放操作”。
传感器16是例如加速度传感器。传感器16感测关于图像拾取设备1的运动的信息,并向控制器17供应所感测的信息。
控制器17包括中央处理单元(CPU)17A、随机存取单元(RAM)17B和电可擦除可编程只读存储器(EEPROM)17C。CPU17A执行被存储在EEPROM17C中的程序,以便控制图像拾取设备1的组件。
即,CPU17A将被存储在EEPROM17C中的程序载入RAM17B中,并执行该程序。因此,进行各种处理。RAM17B暂时存储由CPU17A所执行的程序和CPU17A的操作所需的数据。EEPROM17C存储由CPU17A所执行的程序和将被存储的数据,即使在图像拾取设备1断电后。
由CPU17A所执行的程序被预安装在EEPROM17C中。另外,程序可以被暂时或永久地存储(记录)在下述的可移动记录介质111上。之后,程序可以从可移动记录介质111安装在EEPROM17C中。另外,程序可以被无线地从下载站点经由用于数字卫星广播的人造卫星被传送到图像拾取设备1,或者能够通过有线从下载站点经由诸如局域网(LAN)或因特网的网络来传送。图像拾取设备1能够使用通信接口(I/F)(未示出)来接收以此方式所传送的程序,并能够在EEPROM17C中安装该程序。
如上所述,CPU17A执行程序以便控制器17控制普通摄像机单元11、广角摄像机单元14和记录单元18。
另外,控制器17检测从广角摄像机单元14供应的大尺寸图像的区域,在该区域中捕获了在从普通摄像机单元11供应的普通图像中所捕获的场景。在下文中,该区域也被称为“对应于普通图像的区域”。在下文中,控制器17生成至少包括了指示该区域的信息的回放参数。然后,控制器17向记录单元81供应该回放参数。
即,控制器17当改变普通图像的尺寸和从其匹配普通图像的大尺寸图像中的位置时,进行普通图像和大尺寸图像之间的匹配。因此,控制器17确定普通图像的尺寸和在该处普通图像最佳地匹配大尺寸图像的位置,更具体地,例如,在该处普通图像的像素的像素值与位于与普通图像的像素相同位置的大尺寸图像的像素的像素值之间的绝对差的总和最小的普通图像的尺寸和在大尺寸图像中的位置。以此方式,控制器17检测由所确定的尺寸和位置所标识的大尺寸图像的区域作为对应于普通图像的区域。
注意,控制器17使用普通摄像机单元11和广角摄像机单元14之间的位置关系来粗略地确定对应于普通图像的大尺寸图像的区域的位置。另外,控制器17使用普通摄像机单元11的缩放机构的状态来粗略确定对应于普通图像的大尺寸图像的区域的尺寸。随后,控制器17基于粗略的位置和尺寸在改变普通图像的位置和尺寸时,进行普通图像和大尺寸图像之间的匹配。
另外,控制器17确定是否进行图像拾取设备1的摇摄(pan)操作或倾斜(tilt)操作。因此,由控制器17所生成的回放参数包括关于对应于普通图像的大尺寸图像的区域的信息、关于图像拾取设备1的摇摄或倾斜操作的信息和关于普通摄像机单元11的缩放机构的状态的信息(例如,放大率)。
在控制器17的控制下,记录单元18向记录介质4输出从广角摄像机单元14供应的大尺寸图像和从控制器17供应的回放参数,以便大尺寸图像和回放参数被记录在记录介质4上。
接下来参考图3所示的流程图来描述图2所示的图像拾取设备1的操作。
当用户操作图像拾取设备1的操作单元15以便通电图像拾取设备1时,普通摄像机单元11和广角摄像机单元14开始捕获图像。因此,图像摄像机单元11开始输出所捕获的普通图像,而广角摄像机单元14开始输出所捕获的大尺寸图像。
从普通摄像机单元11输出的普通图像被供应到普通信息处理单元12和控制器17。而从广角摄像机单元14输出的大尺寸图像被供应到控制器17和记录单元18。普通信号处理单元12在从普通摄像机单元11输出的普通图像上进行信号处理,并向显示单元13供应该普通图像。因此,显示单元13以所谓贯穿图像(through image)的形式来显示该普通图像。例如,用户观看被显示在显示单元13上的普通图像以便标识将捕获其图像的物体。
然后,在步骤S1,控制器17控制记录单元18来开始在记录介质4上记录(输出)从广角摄像机单元14输出的大尺寸图像。随后,处理进行到步骤S2。
在步骤S2,控制器17确定是否由用户操作了操作单元15以开始记录图像(即,是否由用户进行了记录操作)。如果在步骤S2,确定还没有进行记录操作,则处理进行到步骤S3。在步骤S3,控制器17确定是否由用户操作了操作单元15以断开电源(即,是否由用户进行了断电操作)。
如果,在步骤S3,确定还没有进行断电操作,则处理返回到步骤S2。随后,重复类似处理。
然而,如果在步骤S2,确定已经进行了记录操作,即用户观看被显示在显示单元13上的普通图像,并实行记录操作以开始记录在普通图像中的场景,则处理进行到步骤S4。在步骤S4,控制器17开始使用从普通摄像机单元11输出的普通图像和从广角摄像机单元14输出的大尺寸图像来生成回放参数。
即,控制器17从广角摄像机单元14输出的大尺寸图像中检测对应于从普通摄像机单元11输出的普通图像的区域。然后,控制器17生成包括指示该区域的信息和指示在普通图像上进行的信号处理的细节的信息的回放参数。
随后,处理进行到步骤S5。在步骤S5,控制器17开始在记录介质4上记录在步骤S4开始生成的回放参数。即,控制器17控制记录单元18以开始在记录介质4上记录(输出)由控制器17生成的回放参数。
在此,为简化,从普通摄像机单元11输出的普通图像的帧速率与从广角摄像机单元14输出的大尺寸图像的帧速率相同。另外,以相同的定时(相位)输出普通图像的帧(帧的图像数据)和大尺寸图像的帧(帧的图像数据)。基于逐帧来生成回放参数。基于帧的回放参数被记录在记录介质4上。
在步骤S5开始回放参数的记录操作后,处理进行到步骤S6。在步骤S6,控制器17确定用户是否已经停止了图像记录操作(用户已经进行停止操作)。如果在步骤S6,确定还没有进行停止操作,则操作进行到步骤S7。在步骤S7,控制器17确定是否由用户操作了操作单元15以进行断电操作。
如果在步骤S7,确定还没有进行断电操作,则处理返回到步骤S6。随后,重复类似处理。
然而,如果在步骤S6,确定已经进行了停止操作,则处理进行到步骤S8。在步骤S8,控制器17停止在步骤S4开始的生成回放数据。另外,控制器17停止在步骤S5开始的记录回放数据。然后,处理从步骤S8返回到步骤S2。随后,重复类似处理。
相反,如果在步骤S3或S7,确定已经进行了断电操作,则处理进行到步骤S9。在步骤S9,控制器17控制记录单元18以停止在步骤S1开始的记录大尺寸图像。另外,控制器17指令普通摄像机单元11和广角摄像机单元14来停止捕获图像。然后,控制器17停止其处理。
如上所述,在图像拾取设备1中,当图像拾取设备1通电时,在记录介质4上持续记录大尺寸图像。另外,一旦进行记录操作,持续记录回放参数直到进行停止操作。
如先前所述,由于大尺寸图像是至少包含在普通图像中所捕获的场景范围的全部的广角图像,因此大尺寸图像还包含在普通图像中所捕获的场景外部的场景。另外,即使在进行记录操作之前和进行了停止操作之后,仍然记录了大尺寸图像。
因此,在图像拾取设备1中,不仅包含用户想要捕获(记录)的场景还包含多个其他场景的大尺寸图像与回放参数一起被记录在记录介质4上。
另外,在图像拾取设备1中,虽然在普通图像上进行诸如图像稳定和降噪的信号处理,但是没有在大尺寸图像上进行这种信号处理。因此,在记录介质4上记录没有经过这种信号处理的大尺寸图像。
另外,在图像拾取设备1中,从进行图像记录操作时到进行停止操作时,大尺寸图像和回放参数被记录在记录介质4上。这时,例如,大尺寸图像和回放参数可以被复用到一起成为一个文件,或者可以被记录为分开的文件。
此外,在图3中,从图像拾取设备1通电时到图像拾取设备1断电时,大尺寸图像被记录。因此,可能引发关于记录介质4的容量的问题。然而,在不久的将来,记录介质4的容量可能显著地增加,因此,记录介质4的容量问题可能不那么严重。然而,由于记录介质4的容量仍然有限,因此可以在从图像拾取设备1通电时到图像拾取设备1断电时的期间,从进行图像记录操作之前预定时段时起到进行停止操作之后预定时段时止,记录大尺寸图像。可以通过删除从当图像拾取设备1通电时到进行图像记录操作之前预定时期时所记录的大尺寸图像的部分,和从进行停止操作之后的预定时期所记录的大尺寸图像的部分(即,从进行下一个图像记录操作之前的预定时期时起所记录的大尺寸图像的部分)来实现。
图4图示了图1所示的回放设备2的示例配置。
记录和回放单元21响应于例如通过操作单元26的用户操作来回放在记录介质4上的大尺寸图像和回放参数。然后,记录和回放单元21向图像提取单元22供应该大尺寸图像,并向回放参数处理单元24供应该回放参数。另外,记录和回放单元21在记录介质4上记录从回放参数处理单元24供应的回放参数。
图像提取单元22基于从回放参数处理单元24供应的回放参数,至少提取从记录和回放单元21供应的大尺寸图像的部分。然后,图像提取单元22向信号处理单元23输出所提取的图像(在下文中也被称为“提取图像”)。
即,回放参数包含指示在大尺寸图像中的矩形区域的信息。例如,该信息包括矩形区域的水平长度和垂直长度,和矩形区域的左上角的坐标。图像提取单元22标识由被包含在回放参数中的信息所指示的矩形区域(在下文中也被称为“提取窗口”)。随后,图像提取单元22从大尺寸图像提取在提取窗口中的图像作为提取图像。然后,图像提取单元22向信号处理单元23供应该提取图像。
在图2所示的图像拾取设备1中,由控制器17所生成且被记录在记录介质4上的回放参数包含指示对应于普通图像的大尺寸图像中的区域的信息。使用该回放参数,由该信息所指示的区域,即对应于普通图像的大尺寸图像中的区域被标识作为提取窗口。
信号处理单元23使用从回放参数处理单元24供应的回放参数,在从图像提取单元22供应的提取图像上进行信号处理。然后,信号处理单元23向显示单元3供应提取图像。因此,经过在信号处理单元23中的图像处理的提取图像被显示在显示单元3上。
回放参数处理单元24接收来自记录和回放单元21的回放参数,并向图像提取单元22和信号处理单元23供应该回放参数。另外,回放参数处理单元24响应于通过操作单元26的用户操作来生成回放参数,并向图像提取单元22和信号处理单元23供应所生成的回放参数。此外,回放参数处理单元24向回放参数存储单元25供应从记录和回放单元21供应的回放参数或响应于通过操作单元26的用户操作所生成的回放参数。因此,回放参数被存储在回放参数存储单元25中。此外,回放参数处理单元24读出被存储在回放参数存储单元25中的回放参数,并向记录和回放单元21供应所读出的回放参数。因此,回放参数被记录在记录介质4上。
回放参数存储单元25暂时存储从回放参数处理单元24供应的回放参数。当用户指令回放或编辑被记录在记录介质4上的图像(大尺寸图像)时,由用户操作该操作单元26。操作单元26向记录和回放单元21或回放参数处理单元24供应与用户操作相对应的操作信号。
接下来参考图5描述由图4所示的图像提取单元22进行的处理。
如先前提到的,在图像拾取设备1中,不仅包含用户识别以捕获的场景(在普通图像中所捕获的场景)还包含其他场景的大尺寸图像与回放参数一起被记录在记录介质4上。
对于图像拾取设备1,当被记录在记录介质4上的回放参数被定义为在图像捕获期间的回放参数时,在图像捕获期间的回放参数包含指示在大尺寸图像中对应于普通图像的区域的信息。因此,由该信息所指示的区域用作提取窗口。因此,如图5所示,通过从大尺寸图像提取在提取窗口中的图像作为提取图像并显示该提取图像,能够显示包含与普通图像的场景相同的场景的图像。
当用户在图像拾取设备1上进行缩小操作并捕获图像时,通过该图像捕获所获得的普通图像的视角是宽的。因此,如图5中的R1所指示的,在大尺寸图像中对应于普通图像的区具有大尺寸,且因此,该提取窗口具有大尺寸。
相反,当用户在图像拾取设备1上进行放大操作并捕获图像时,通过该图像捕获所获得的普通图像的视角是小的。因此,如图5中的R2所指示的,在大尺寸图像中对应于普通图像的区具有小尺寸,且因此,该提取窗口具有小尺寸。
如上所述,提取窗口的尺寸并不总是恒定的。因此,使用这种提取窗口从大尺寸图像提取的提取图像的像素数并不总是恒定的。
另一方面,由于显示单元3显示具有预定的像素数的图像,因此图像提取单元22需要将从大尺寸图像提取的提取图像转换为具有显示单元3能够显示的预定的像素数的图像。
为了将具有某种像素数的提取图像转换为具有不同像素数的提取图像,像素可以仅仅被稀疏(thin out)或可以被内插。可替换地,可以应用先前由本发明人提出的适应性分类技术。
在该适应性分类技术中,通过图像转换处理将第一图像转换为第二图像。第二图像的每个像素被视为感兴趣的像素。随后,使用适合于每类感兴趣的像素的抽头系数(tap coefficient)和第一图像来得到每个感兴趣的像素(即每个感兴趣的像素的像素值)。
即,在该适应性分类技术中,在空间上或时间上位于感兴趣的像素附近的第一图像的像素的像素值被定义为用于估算感兴趣的像素的像素值的预测抽头。另外,通过学习获得对于每个预定的类的抽头系数。通过使用该预测抽头和抽头系数来进行预定的估算计算,能够得到感兴趣的像素的像素值(所估算的像素值)。
在该例中,线性一阶估算计算被使用用于预定的估算计算。然后,能够使用以下一阶线性公式来得到第二图像的像素值y:
y = Σ n - 1 N W n X n . . . . . . ( 1 )
在公式(1)中,Xn表示构成第二图像的像素(像素的像素值)y的预测抽头的第一图像的第n个像素的像素值,而Wn表示与预测抽头的第n个像素的像素值相乘的第n个抽头系数。注意,在公式(1)中,预测抽头包括第一图像的N个像素(像素的像素值)x1、x2、……、xN
可替换地,能够使用二阶或更高公式来替换一阶线性公式(1)来得到第二图像的像素(像素的像素值)y。
设yk表示第二图像的第k个像素的像素值的真值,而yk’表示使用公式(1)所得到的真值yk的估算值。然后,估算值yk’的估算误差ek能够被表述如下:
Ek=yk-yk’……(2)
由于能够通过使用公式(1)来得到公式(2)中的估算值yk’,因此通过将公式(1)替换到公式(2)的yk’中来得到下列公式:
e k = y k - ( Σ n = 1 N W n X n , k ) . . . . . . ( 3 )
在公式(3)中,xn,k表示构成第二图像的第k个像素的预测抽头的第n个像素(第n个像素的像素值)。
使得在公式(3)(或(2))中的估算误差ek为O的抽头系数wn对于估算第二图像的像素值来说是最佳的。然而,通常,难以得到这种抽头系数wn
因此,作为用于确定该抽头系数wn是否最佳的规则,例如使用最小平方的方法。以此方式,能够通过使在下列公式中呈现的平方误差的总和E最小来确定最佳抽头系数wn
E = Σ k = 1 K e k 2 . . . . . . ( 4 )
在公式(4)中,K表示由第二图像的像素yk和构成像素yk的预测抽头的像素集x1,k、x2,k、……xN,k组成的对的样本数,即,K表示用于学习以便得到抽头系数wn的样本数。
如从公式(5)可以看到的,在公式(4)的平方误差的总和E的最小值被表述作为使关于抽头系数wn的总和E的偏微分的结果为0的值wn
∂ E ∂ w n = e 1 ∂ e 1 ∂ w n + e 2 ∂ e 2 ∂ w n + . . . + e k ∂ e k ∂ w n = 0   (n=1、2、……、N)
                                             ……(5)
因此,作为公式(3)关于抽头系数wn的偏微分的结果,能够得到下列公式:
∂ e k ∂ w 1 = - x 1 , k , ∂ e k ∂ w 2 = - x 2 , k , · · · , ∂ e k ∂ w N = - x N , k , ( k = 1,2 · · · , k )
……
(6)
从公式(5)和(6),能够得到下列公式:
Σ k = 1 k e k x 1 , k = 0 , Σ k = 1 k e k x 2 , k = 0 , · · · Σ k = 1 k e k x N , k = 0 . . . . . . ( 7 )
通过将公式(3)替换到公式(7)中的ek,能够表述公式(7)为下列正规方程:
Figure A20068000904200203
通过例如扫除(sweep-out)方法(高斯-乔丹消去方法(Gauss-Jordanelimination method))对于抽头系数Wn求解正规方程(8)。
在适应性分类处理中,从第一和第二图像,由第二图像的像素yk和构成该像素yk的预测抽头的像素集x1,k、x2,k、……xN,k组成的多对被准备作为学习样本。通过使用这些学习样本来对于每个类生成由公式(8)所给出的正规(normal)公式并求解该正规方程,预先进行学习处理以便得到最佳抽头系数wn(使得该例中的平方误差的总和E最小的抽头系数)。然后,通过使用公式(1)和所得到的抽头系数wn进行估算计算,第一图像能够被转换为第二图像。
即,在学习处理中,第二图像的每个像素yk被定义作为感兴趣的像素。像素yk被分类为多类中的一个。基于例如在空间或时间上位于像素yk附近的第一图像的多个像素的像素值的分布来进行该分类。
随后,在学习处理中,使用属于该类的感兴趣的像素(感兴趣的像素的像素值)yk和构成像素yk的预测抽头的第一图像的像素x1,k、x2,k、……xN,k,
对每类生成由公式(8)所给出的正规方程。在使用所有学习样本对每类生成由公式(8)所给出的正规方程之后,求解对于每类的正规方程。因此,能够得到对于每类的抽头系数wn
然后,在适应性分类技术中,为了计算第二图像的所给像素(所给像素的像素值),该像素被定义作为感兴趣的像素。与在学习处理中的一样,对感兴趣的像素进行分类以便能够得到该感兴趣的像素所属的类。另外,使用感兴趣的像素所属的类的抽头系数wn和构成感兴趣的像素的预测抽头的第一图像的像素x1,k、x2,k、……xN,k进行由公式(1)所给出的估算计算。以此方式,能够得到感兴趣的像素(感兴趣的像素的估算像素值)。
通过在学习处理中使用通过稀疏第二图像的像素所获得的第一图像,能够得到用于将图像转换为具有比原始图像的像素数更大的像素数的图像的抽头系数wn。另外,通过在学习处理中使用通过稀疏第一图像的像素所获得的第二图像,能够得到用于在适应性分类处理中将图像转换为具有比原始图像的像素数更小的像素数的图像的抽头系数wn
另外,通过在学习处理中使用通过添加噪声到第二图像所获得的第一图像,能够得到用于在适应性分类处理中将图像转换为无噪声的图像的抽头系数wn
因此,根据适应性分类技术,除了转换图像的像素数以外,能够通过改变由不同的学习处理所得到的抽头系数wn来进行用于去除噪声(用于进行降噪)的信号处理。
另外,适应性分类技术可以被用于将具有环状外形的上述图像转换为中心投影图像。
图像提取单元22进行图像转换处理,用于使用例如上述适应性分类技术,将从大尺寸图像提取的提取图像转换为具有显示单元3能够显示的像素数的提取图像。随后,图像提取单元22向信号处理单元23供应结果得到的提取图像。
接下来参考图6所示的流程图描述图4所示的回放设备2的操作。
当用户操作操作单元26以便通电回放设备2时,在步骤S21,回放参数处理单元24确定回放设备2的操作模式是否是回放模式。
回放设备2的操作模式的示例包括在其中回放被记录在记录介质4上的图像的回放模式,和在其中编辑图像的编辑模式。用户可以通过例如操作该操作单元26来选择(设置)回放设备2的操作模式。
如果在步骤S21,确定回放设备2的操作模式是回放模式,则处理进行到步骤S22。在步骤S22和步骤S22后面的步骤,进行以回放模式的处理。
即,在以回放模式的处理中,在步骤S22,回放参数处理单元24选择用于回放被记录在记录介质4上的图像的参数集。
在此,参数集包括一系列回放参数。当由图像拾取设备1所捕获的大尺寸图像被记录在记录介质4上时,至少包括当捕获大尺寸图像时由图像拾取设备1(图像拾取设备1的控制器17(见图2))所生成的一系列回放参数(在图像捕获期间的回放参数)的参数集被记录在记录介质4上。
一个或多个参数集可以被记录在记录介质4上。在步骤S22,从该一个或多个参数集之间选择用于回放该图像的参数集。
即,例如,当参数集以文件形式被记录在记录介质4上时,回放参数处理单元24通过控制记录和回放单元21来识别被记录在记录介质4上的参数集的文件名。另外,回放参数处理单元24控制信号处理单元23,以在显示单元3上显示被记录在记录介质4上的参数集的文件列表以及询问选择该文件之一的提示消息。
当用户观看被显示在显示单元3上的文件列表,并通过操作操作单元26从该文件列表中选择一个文件时,在步骤S22,回放参数处理单元24选择由该文件名所标识的参数集作为用于回放该图像的参数集(在下文中也被称为“回放集(playback set)”)。
随后,处理从步骤S22进行到步骤S23。在步骤S23,回放参数处理单元24控制记录和回放单元21,以开始重构被记录在记录介质4上的大尺寸图像和回放集。以此方式,回放(读出)该大尺寸图像和该回放集。所回放的大尺寸图像被供应到图像提取单元22,且在回放集中的回放参数被供应到回放参数处理单元24。
如在图像捕获期间的回放参数中所描述的,回放参数可以针对每帧而存在。除非特别声明,否则从具有其回放参数的时间上最早的帧开始大尺寸图像的回放。
当在步骤S23开始被包括在回放集中的回放参数的回放且记录和回放单元21开始递送回放参数时,回放参数处理单元24开始向图像提取单元22和信号处理单元23递送回放参数。随后,处理进行到步骤S24。
在步骤S24,图像提取单元22使用从回放参数处理单元24供应的回放参数,开始从来自记录和回放单元21所供应的大尺寸图像中提取该提取图像。
即,例如,基于逐帧,从记录和回放单元21供应大尺寸图像到图像提取单元22。图像提取单元22把从记录和回放单元21顺序供应的大尺寸图像视为感兴趣的帧。因此,图像提取单元22从该感兴趣的帧中提取提取图像,并向信号处理单元23供应该提取图像。
更具体地,当从回放参数处理单元24供应的回放参数包含对应于感兴趣的帧的回放参数(在下文中也被称为“对应参数”)时,图像提取单元22从感兴趣的帧中提取由被包含在对应参数中的信息所标识的提取窗口中的图像。另外,图像提取单元22进行上述图像转换处理,以视需要改变像素数。然后,图像提取单元22向信号处理单元23供应该提取图像。
相反,当从回放参数处理单元24供应的回放参数不包含感兴趣的帧的对应参数时,图像提取单元22使用在包含其对应参数的帧中与感兴趣的帧最接近的帧的对应参数,从感兴趣的帧中提取提取图像。
在完成步骤S24的处理之后,处理进行到步骤S25。在步骤S25,信号处理单元2使用从回放参数处理单元24供应的回放参数(对应参数),开始在从图像提取单元22供应的提取图像(提取图像的帧)上进行图像处理。
即,信号处理单元23在从图像提取单元22供应的提取图像上进行由被包含在从回放参数处理单元24供应的回放参数中的信息所指示的图像处理。然后,信号处理单元23向显示单元3供应该提取图像。
以此方式,在回放模式下,使用被包含在回放集中的回放参数,从大尺寸图像中提取该提取图像。另外,使用被包含在回放集中的回放参数,在该提取图像上进行图像处理。因此,对应于被包含在回放集中的回放参数的图像的内容(图像流)被显示在显示单元3上。
因此,例如,当在步骤S22选择在图像捕获期间的回放参数的参数集作为回放集时,类似于该普通图像的图像,即包含用户想要捕获(或记录)的场景并具有与该普通图像的分辨率类似的分辨率的图像(与在图像捕获期间被显示在图像拾取设备1的显示单元13上的图像类似的图像)被显示在显示单元3上。
在完成步骤S25的处理之后,处理进行到步骤S26。在步骤S26,回放参数处理单元24确定是否已经由用户操作了操作单元26以停止回放(以进行停止操作)。如果在步骤S26,确定还没有进行停止操作,则处理返回到步骤S26。在步骤S26和随后的步骤,重复类似处理。
然而,如果在步骤S25,确定已经进行了停止操作,处理进行到步骤S27。在步骤S27,回放参数处理单元24控制该记录和回放单元21、图像提取单元22和信号处理单元23,以便在步骤S23开始的大尺寸图像和回放参数的回放、在步骤S24开始的提取图像的提取和在步骤S25开始的在提取图像上的信号处理全部停止。然后,处理返回到步骤S21。在步骤S2 1和随后的步骤,重复类似处理。
相反,如果在步骤S21,确定回放设备2的操作模式不是回放模式,则处理进行到步骤S28。在步骤S28,回放参数处理单元24确定回放设备2的操作模式是否是编辑模式。
如果在步骤S28,确定回放设备2的操作模式不是编辑模式,则处理返回到步骤S21。在步骤S21和随后的步骤,重复类似处理。
然而,如果在步骤S28,确定回放设备2的操作模式是编辑模式,则处理进行到步骤S29。在步骤S29和随后的步骤,进行以编辑模式的处理。
即,在以编辑模式的处理中,在步骤S29,回放参数处理单元24以类似于例如步骤S22的处理的方式选择用于回放参考图像内容的参数集(回放集)。然后,处理进行到步骤S30。
在步骤S30,与在步骤S23的处理中的一样,回放参数处理单元24控制记录和回放单元21以开始重构被记录在记录介质4上的大尺寸图像和回放集。因此,从记录介质4回放(读出)该大尺寸图像和该回放集。该大尺寸图像被供应到图像提取单元22,且被包含在回放集中的回放参数被供应到回放参数处理单元24。
当在步骤S30开始回放被包含在回放集中的回放参数、且因此开始从记录和回放单元21递送该回放参数时,回放参数处理单元24开始向图像提取单元22、信号处理单元23和回放参数存储单元25递送回放参数。然后,处理进行到步骤S31。
在步骤S31,回放参数存储单元25开始存储从回放参数处理单元24供应的回放参数。然后,处理进行到步骤S32。
在步骤S32,与步骤S24的处理中的一样,图像提取单元22使用从回放参数处理单元24供应的回放参数,开始从来自记录和回放单元21供应的大尺寸图像提取提取图像。然后,处理进行到步骤S33。
即,图像提取单元22从来自记录和回放单元21供应的大尺寸图像的帧中提取由被包含在从回放参数处理单元24供应的回放参数中的信息所标识的提取窗口中的图像。另外,图像提取单元22进行上述图像转换处理以视需要改变像素数。然后,图像提取单元22向信号处理单元23供应该提取图像。
在步骤S33,与在步骤S25的处理中的一样,信号处理单元23使用从回放参数处理单元24供应的回放参数,开始在从图像提取单元22供应的提取图像上进行图像处理。
即,信号处理单元23在从图像提取单元22供应的提取图像上进行由被包含在从回放参数处理单元24供应的回放参数中的信息所指示的信号处理。然后,信号处理单元23向显示单元3供应该提取图像。
以此方式,在编辑模式下,进行除了在回放参数存储单元25中存储回放参数的处理(步骤S31的处理)以外与在回放模式下类似的处理。因此,对应于回放集的图像的内容被显示在显示单元3上。
随后,以编辑模式,处理从步骤S33进行到步骤S34。在步骤S34,回放参数处理单元24确定用户是否已经操作了操作单元26以指令编辑。
如果在步骤S34,确定还没有进行编辑操作,即用户还没有操作操作单元26以指令编辑,则跳过在步骤S35的处理,处理进行到步骤S36。
然而,如果在步骤S34,确定已经进行了编辑操作,即用户已经操作了操作单元26以指令编辑,则处理进行到步骤S35。在步骤S35,回放参数处理单元24根据编辑操作生成回放参数(新的回放参数)(在下文中被称为“编辑参数)。该回放参数用作当进行编辑操作时大尺寸图像的感兴趣的帧的对应参数。然后,回放参数处理单元24向图像提取单元22、信号处理单元23和回放参数存储单元25供应所生成的回放参数,以替代从记录和回放单元21供应的回放参数。
因此,在这种情况下,图像提取单元22从大尺寸图像中提取由被包含在从回放参数处理单元24供应的编辑参数中的信息所标识的提取窗口中的图像作为提取图像。信号处理单元23在从图像提取单元22供应的提取图像上进行由被包含在从回放参数处理单元24供应的编辑参数中的信息所指示的图像处理。然后,信号处理单元23向显示单元3供应该提取图像。因此,响应于编辑操作而被编辑的图像被显示在显示单元3上。
另外,回放参数存储单元25存储从回放参数处理单元24供应的编辑参数。
现在在此参考图7描述该编辑操作。
在图6所示的步骤S29,例如,当选择在图像捕获期间的回放参数的参数集作为回放集时,使用在图像捕获期间的回放参数从大尺寸图像中提取提取图像。另外,使用在图像捕获期间的回放参数在该提取图像上进行图像处理。因此,如上所述,普通图像(类似于普通图像的图像)被显示在显示单元3上。
如先前所提到的,由于大尺寸图像是具有比普通图像更宽的视角且包含在普通图像中所捕获的场景的图像,因此大尺寸图像包含除了在普通图像中所捕获的场景以外的场景。
即,如果在普通图像中捕获了风景,大尺寸图像包含在普通图像中所捕获的风景和在实际场所可见的但在该普通图像中未捕获的另一风景。
因此,当图像拾取设备1捕获普通图像时,通过摇摄或倾斜该图像拾取设备1而将被捕获的风景被捕在获大尺寸图像中。在编辑操作中,可以模拟图像拾取设备1的这种摇摄或倾斜操作。
如在此所使用的,图像拾取设备1的模拟的摇摄操作和倾斜操作被分别称为伪摇摄操作和伪倾斜操作。例如,进行伪摇摄操作作为编辑操作时,回放参数处理单元24生成用作回放参数的编辑参数,其中该回放参数包括指示由对应参数所标识的且响应于伪摇摄操作在水平方位上移动的提取窗口的信息,如图7顶部的第一部分所示的。相反,当进行伪倾斜操作作为编辑操作时,回放参数处理单元24生成用作回放参数的编辑参数,其中该回放参数包括指示由对应参数所标识的且响应于伪倾斜操作在垂直方位上移动的提取窗口的信息,如图7顶部的第一部分所示的。
由于图像提取单元22根据这种编辑参数,从大尺寸图像中提取在提取窗口中的图像作为提取图像,因此该提取图像包含如果当捕获普通图像时摇摄或倾斜图像拾取设备1而可以被捕获的风景。
另外,该编辑操作进一步包括图像拾取设备1的模拟的缩小或放大操作。
如在此所使用的,图像拾取设备1的模拟的缩小操作和放大操作被分别称为伪缩小操作和伪放大操作。例如,当进行伪缩小操作作为编辑操作时,回放参数处理单元24生成用作回放参数的编辑参数,其中该回放参数包括指示由对应参数所标识且响应于伪缩小操作而扩张的提取窗口的信息,如图7顶部第二部分所示的。相反,当进行伪放大操作作为编辑操作时,回放参数处理单元24生成用作回放参数的编辑参数,其中该回放参数包括指示由对应参数所标识且响应于伪放大操作而收缩的提取窗口的信息,如图7顶部第二部分所示的。
由于图像提取单元22根据这种编辑参数,从大尺寸图像中提取在提取窗口中的图像作为提取图像,因此该提取图像包含如果当捕获普通图像时缩小或放大图像拾取设备1而可以被捕获的风景。
即,当进行伪缩小操作时,提取窗口被扩张。因此,图像提取单元22从大尺寸图像中提取广角图像作为提取图像。因此,具有广视角的图像(提取图像)——仿佛该图像是在图像拾取设备1被缩小之后捕获的——被显示在显示单元3上。相反,当进行伪放大操作时,提取窗口被收缩。因此,图像提取单元22从大尺寸图像中提取窄角图像作为提取图像。因此,具有窄视角的图像(提取图像)——仿佛该图像是在图像拾取设备1被放大之后捕获的——被显示在显示单元3上。即,近景物体的图像被显示在显示单元3上。
根据该提取窗口的大小,该提取图像的像素数改变。随着提取窗口的尺寸减小,像素数降低。因此,当由伪放大操作收缩了提取窗口时,被显示在显示单元3上的提取图像的分辨率恶化。然而,如先前所提到的,大尺寸图像具有高于普通图像的分辨率的分辨率。因此,即使当提取窗口被收缩到某种程度时,通过该提取窗口从大尺寸图像中所提取的提取图像的分辨率可以被维持在高于特定水平的水平(例如,在本质上与普通图像相同的水平)。
当进行伪摇摄操作、伪倾斜操作或伪缩小操作时,包含了在普通图像中未捕获的场景的图像被显示在显示单元3上。因此,即使当曾经使用图像拾取设备1来捕获图像的用户在图像捕获期间错过了某场景,如果在大尺寸图像中捕获了该场景,则该用户仍然可以观看该场景。
除了上述用于改变提取窗口的操作以外,编辑操作可以进一步包括用于选择通过普通信号处理单元12在普通图像上进行的信号处理的操作。
即,在图像拾取设备1(见图2)中,大尺寸图像没有经过由普通信号处理单元12在普通图像上进行的图像处理,就被记录在记录介质4上。
在回放设备2中,当选择在图像捕获期间的回放参数的参数集作为回放集时,基于在图像捕获期间的回放参数,从大尺寸图像中提取提取图像。另外,基于在图像捕获期间的回放参数,在提取图像上进行图像处理。因此,在提取图像上进行类似于由普通信号处理单元12在普通图像上进行的信号处理。因此,类似于普通图像的图像被显示在显示单元3上。
相反,当用户选择编辑操作以在提取图像上进行信号处理时,回放参数处理单元24生成用作回放参数的编辑参数,其中,该回放参数包含关于与该编辑操作相对应的信号处理的细节的信息。然后,回放参数处理单元24向信号处理单元23供应该编辑参数。当接收到来自回放参数处理单元24的编辑参数时,信号处理单元23进行由被包含在编辑参数中的信息所指示的信号处理。
由普通信号处理单元12进行的信号处理的示例包括各种信号处理,诸如降噪和图像稳定。还包括编码处理(例如,MPEG编码处理)。另外,例如,降噪信号处理包括各种方法(算法)。因此,由普通信号处理单元12进行的信号处理的类型不总是适合于(最佳于)用户的。另外,即使当由普通信号处理单元12进行的信号处理的类型适合于用户,但方法的类型可能不适合于用户。
例如,当进行降噪信号处理时,去除被包含在图像中的噪声分量。然而,同时,可能丢失少量信号分量。因此,在图像拾取设备1中,在对由广角摄像机单元14捕获的大尺寸图像上进行信号处理且在记录介质4上记录该大尺寸图像之后,回放设备2可以仅在被记录在记录介质4上的大尺寸图像上进行信号处理。随后,回放设备2在由于图像拾取设备1进行的信号处理而多少(somewhat)丢失了其信号分量的大尺寸图像上进行信号处理。
然而,当在多少丢失了其信号分量的大尺寸图像上进行信号处理时,该信号处理的结果受所丢失的信号分量影响。
因此,为了防止对由回放设备2进行的信号处理的负面影响,图像拾取设备1在记录介质4上记录大尺寸图像,而不进行与由普通信号处理单元12在普通图像上进行的信号处理类似的信号处理。
因此,回放设备2能够使用由图像拾取设备1的的广角摄像机单元1捕获的大尺寸图像的所有信号分量来有效地进行信号处理。
返回参考图6,在步骤S35,在向图像提取单元22、信号处理单元23和回放参数存储单元25供应编辑参数之后,处理进行到步骤S36。在步骤S36,回放参数处理单元24确定是否已经由用户操作了操作单元26以停止回放(即,是否已经由用户进行了停止操作)。如果,在步骤S26,确定还没有进行停止操作,则处理返回到步骤S34。随后,重复类似处理。
然而,如果在步骤S36,确定已经进行了停止操作,则处理进行到步骤S37。在步骤S37,回放参数处理单元24控制记录和回放单元21、图像提取单元22和信号处理单元23以停止在步骤S30开始的大尺寸图像和回放参数的回放、在步骤S32开始的提取图像的提取、和在步骤S33开始的在提取图像上的信号处理。另外,回放参数处理单元24停止在步骤S31开始的在回放参数存储单元25中存储回放参数。
随后,处理从步骤S37进行到步骤S38。在步骤S38,回放参数处理单元24确定是否在记录介质4上新记录(存储)了参数集,即被存储在回放参数存储单元25中的回放参数集。
即,回放参数处理单元24控制信号处理单元23以在显示单元3上显示提示消息,询问是否存储新的参数集。当用户操作操作单元26以回复该提示消息时,回放参数处理单元24确定被存储在回放参数存储单元25中的新的参数集是否被记录在记录介质4上。
如果在步骤S38,确定被存储在回放参数存储单元25中的新的参数集被记录在记录介质4上,即,如果用户操作了操作单元26以回复该提示消息,以便记录新的参数集,则处理进行到步骤S39。在步骤S39,回放参数处理单元24读出被存储在回放参数存储单元25中的新的参数集,并控制记录和回放单元21以在记录介质4上记录该新的参数集。然后,处理进行到步骤S40。
然而,如果在步骤S38,确定被存储在回放参数存储单元25中的新的参数集不被记录在记录介质4上,即如果用户操作了操作单元26以回复该提示消息,以便不记录该新的参数集,则跳过步骤S39的处理,处理进行到步骤S40。在步骤S40,回放参数处理单元24删除(擦除)被存储在回放参数存储单元25中的新的参数集。然后,处理返回到步骤S21。随后,重复类似处理。
可以选择在编辑模式处理中被记录在记录介质4上的新的参数集作为回放集。因此,可以在显示单元3上显示对应于在新的参数集中的回放参数的图像内容。
当用户操作该操作单元26以断电时,结束根据图6所示的流程图所进行的处理。
如上所述,当用户进行编辑操作时,根据该编辑操作生成编辑参数(新的回放参数)。然后,基于该编辑参数来提取图像或进行信号处理。因此,可以提供对于用户来说最佳的图像。
另外,对于被记录在记录介质4上的大尺寸图像,可以存在多个参数集。因此,通过进行各种编辑操作并生成各种参数集,用户能够创建各种图像内容。
另外,与普通图像不同,没有经过信号处理的大尺寸图像被记录在记录介质4上。因此,用户能够使用回放设备2通过试错(trial and error)处理来进行编辑操作,以便获得对用户来说最佳的图像内容。
不仅可以由专用硬件还可以由软件来实现上述回放设备2进行的一系列处理。当由软件执行上述一系列处理时,该软件的程序被安装在例如通用计算机中。
图8图示根据本发明的实施例的在其中安装了执行上述一系列处理的程序的计算机的示例配置。
该程序能够被预记录在用作被并入计算机的记录介质的硬盘105或ROM103中。
可替换地,可以暂时地或永久地在可移动记录介质111中存储(记录)该程序,其中可移动记录介质111诸如软盘、紧密盘只读存储器(CD-ROM)、磁光(MO)盘、数字通用盘(DVD)、磁盘或半导体存储器。这种可移动记录介质111可以被分发作为软件包(package software)。
除了从上述可移动记录介质111将程序安装在计算机中以外,可以从下载站点经由用于数字卫星广播的人造卫星向计算机无线传送该程序,或者可以从下载站点通过有线经由诸如局域网(LAN)或互联网的网络来被传送。计算机能够使用通信单元108接收以此方式所传送的程序,且能够将该程序安装在被并入计算机中的硬盘105中。
计算机包括中央处理单元(CPU)102。输入/输出接口110经由总线101被连接到CPU102。当经由输入/输出接口110接收到由用户操作包括键盘、鼠标和麦克风的输入单元107的指令时,CPU102响应于该用户指令,执行被存储在ROM(只读存储器)103中的程序。可替换地或另外,CPU102向随机存取存储器(RAM)104装载被存储在硬盘105中的程序、经由人造卫星或网络所传送、由图像单元108所接收并被安装在硬盘105中的程序、或从可移动记录介质111读出并被安装在硬盘105中的程序。随后,CPU102执行该程序。以此方式,CPU102进行由图6所示的流程图所定义的处理,或在由图4所示的方框图所指示的配置中进行的处理。然后,如需要,CPU102经由输入/输出接口110从包括液晶显示器(LCD)和扬声器的输出单元106或从通信单元108输出处理结果。另外,如需要,CPU102在硬盘105中存储该处理结果。
在本说明书中,描述用于使得计算机进行各种处理的程序的步骤不仅包括在由流程图所指示的上述序列中所执行的处理,还包括可以并行或独立地执行的处理(例如,并行处理或面向对象处理)。
另外,可以由一个计算机执行该程序,或可以由多个计算机分布地执行该程序。此外,可以向远程计算机传送该程序,且可以由该远程计算机执行该程序。
尽管已经参考图像拾取设备1的广角摄像机单元14而描述了本实施例,其中由广角摄像机单元14捕获的广角图像被转换为中心投影图像,但可以由回放设备2而不是图像拾取设备1来进行该转换。
另外,图像拾取设备1和回放设备2可以被集成到一起。
另外,根据本实施例,在进行记录操作之前、进行对应于该记录操作的停止操作之后,进行在记录介质4上的大尺寸图像的记录。即,大尺寸图像包含时间上在用户想要捕获的场景的先前和后续的场景。在其中能够重获(retrieve)这种场景的编辑操作是可用的。
尽管已经参考普通图像和具有相同帧速率的大尺寸图像而描述了本发明的示例实施例,但大尺寸图像的帧速率可以高于普通图像的帧速率。
另外,尽管已经参考包括捕获普通图像和大尺寸图像两者的普通摄像机单元11和广角摄像机单元14的图像拾取设备1而描述了本发明的示例实施例,但图像拾取设备1可以不包括普通摄像机单元11,以便仅由广角摄像机单元14捕获大尺寸图像。在这种情况下,图像拾取设备1(图像拾取设备1的控制器17)能够根据由用户进行的图像拾取设备1的摇摄操作、倾斜操作和缩放操作来设置提取窗口。通过使用该提取窗口从大尺寸图像中提取提取图像、使用普通信号处理单元12在该提取图像上进行信号处理、并向显示单元13供应该提取图像,能够在显示单元13上显示类似于普通图像的图像(提取图像)。
此外,尽管已经参考图像拾取设备1而描述了本发明的示例实施例,其中,在记录介质4上记录大尺寸图像和回放参数,但该应用并不局限于此。例如,大尺寸图像和回放参数可以被包括在电视节目中,且可以从广播站被广播。回放设备2可以接收该电视节目,并可以在记录介质4上记录该大尺寸图像和回放参数。

Claims (10)

1.一种图像拾取设备,包括:
第一图像拾取装置,用于输出第一图像;
第二图像拾取装置,用于输出第二图像,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围;
显示装置,用于显示所述第一图像;
生成装置,用于检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数;以及
输出控制装置,用于输出所述第二图像和所述回放参数。
2.根据权利要求1所述的图像拾取设备,进一步包括:
信号处理装置,用于对所述第一图像进行信号处理;
其中,所述显示装置显示经过由所述信号处理装置进行的信号处理的所述第一图像,且其中,所述生成装置生成进一步包括指示由所述信号处理装置在所述第一图像上进行的图像处理的细节的信息的回放参数。
3.一种在图像拾取设备中使用的处理信息的方法,所述图像拾取设备包括用于输出第一图像的第一图像拾取装置、用于输出第二图像的第二图像拾取装置、和用于显示所述第一图像的显示装置,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述方法包括步骤:
检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数;以及
输出所述第二图像和所述回放参数。
4.一种用于使得计算机控制图像拾取设备的程序,所述图像拾取设备包括用于输出第一图像的第一图像拾取装置、用于输出第二图像的第二图像拾取装置、和用于显示所述第一图像的显示装置,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述程序包括步骤:
检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数;以及
输出所述第二图像和所述回放参数。
5.一种存储了使得计算机控制图像拾取设备的程序的程序记录介质,所述图像拾取设备包括用于输出第一图像的第一图像拾取装置、用于输出第二图像的第二图像拾取装置、和用于显示所述第一图像的显示装置,所述第二图像具有比所述第一图像的视角更宽的视角且具有比所述第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述程序包括步骤:
检测在其中捕获了在所述第一图像中所捕获的场景的所述第二图像的区域,并生成包括至少指示所述区域的信息的回放参数;以及
输出所述第二图像和所述回放参数。
6.一种信息处理设备,包括:
回放控制装置,用于从记录第二图像和回放参数的数据记录介质生成第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;
提取装置,用于提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;
回放参数生成装置,用于根据用户操作生成新的回放参数;以及
记录控制装置,用于记录所述新的回放参数;
其中,当生成了所述新的回放参数时,所述提取装置基于所述新的回放参数来提取所述提取图像。
7.根据权利要求6所述的信息处理设备,其中所述回放参数进一步包括指示将在所述提取图像上进行的信号处理的细节的信息,且其中,所述信息处理设备进一步包括信号处理装置,用于基于所述回放参数在所述提取图像上进行信号处理,且其中,当生成了所述新的回放参数时,所述信号处理装置基于所述新的回放参数来在所述提取图像上进行信号处理。
8.一种用于处理信息的方法,包括步骤:
从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;
提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;
根据用户操作生成新的回放参数;以及
记录所述新的回放参数;
其中,当生成了所述新的回放参数时,在提取所述第二图像的至少部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
9.一种程序,包括用于使得计算机进行如下步骤的程序代码:
从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;
提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;
根据用户操作生成新的回放参数;以及
记录所述新的回放参数;
其中,当生成了所述新的回放参数时,在提取所述第二图像的至少部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
10.一种存储了用于使得计算机进行如下步骤的程序的程序记录介质:
从记录了第二图像和回放参数的数据记录介质重构第二图像和回放参数,所述第二图像具有比第一图像的视角更宽的视角且具有比第一图像的分辨率更高的分辨率,在所述第二图像中至少捕获了在所述第一图像中所捕获的全部场景范围,所述回放参数包括至少指示在其中捕获了在所述第一图像中所捕获的场景范围的所述第二图像的区域的信息;
提取所述第二图像的至少部分图像,并输出所述图像作为提取图像;
根据用户操作生成新的回放参数;以及
记录所述新的回放参数;
其中,当生成了所述新的回放参数时,在提取所述第二图像的至少部分图像的步骤中,基于所述新的回放参数来提取所述提取图像。
CN2006800090425A 2005-03-22 2006-03-22 成像设备、信息处理设备、信息处理方法 Expired - Fee Related CN101147391B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP081648/2005 2005-03-22
JP2005081648A JP3968665B2 (ja) 2005-03-22 2005-03-22 撮影装置、情報処理装置、情報処理方法、プログラム、およびプログラム記録媒体
PCT/JP2006/305675 WO2006101112A1 (ja) 2005-03-22 2006-03-22 撮影装置、情報処理装置、情報処理方法、プログラム、およびプログラム記録媒体

Publications (2)

Publication Number Publication Date
CN101147391A true CN101147391A (zh) 2008-03-19
CN101147391B CN101147391B (zh) 2011-06-01

Family

ID=37023772

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800090425A Expired - Fee Related CN101147391B (zh) 2005-03-22 2006-03-22 成像设备、信息处理设备、信息处理方法

Country Status (6)

Country Link
US (1) US8159572B2 (zh)
EP (1) EP1865712A4 (zh)
JP (1) JP3968665B2 (zh)
KR (1) KR101249322B1 (zh)
CN (1) CN101147391B (zh)
WO (1) WO2006101112A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107851425A (zh) * 2015-08-05 2018-03-27 索尼公司 信息处理设备、信息处理方法和程序
WO2023005427A1 (en) * 2021-07-29 2023-02-02 International Business Machines Corporation Context based adaptive resolution modulation countering network latency fluctuation

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7593017B2 (en) * 2006-08-15 2009-09-22 3M Innovative Properties Company Display simulator
CN100440930C (zh) * 2006-12-30 2008-12-03 北京中星微电子有限公司 一种摄像头系统和在摄像头视频流中获取静态图像的方法
JP4957960B2 (ja) 2007-01-29 2012-06-20 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
JP5217250B2 (ja) 2007-05-28 2013-06-19 ソニー株式会社 学習装置および学習方法、情報加工装置および情報加工方法、並びにプログラム
JP4973935B2 (ja) 2007-06-13 2012-07-11 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および記録媒体
JP4930297B2 (ja) * 2007-09-10 2012-05-16 株式会社ニコン 撮像装置
JPWO2011039947A1 (ja) * 2009-10-01 2013-02-21 日本電気株式会社 撮像装置、その制御方法、撮像システム、及びプログラム
JP2014007653A (ja) * 2012-06-26 2014-01-16 Jvc Kenwood Corp 撮像装置、撮像方法、撮像システム及びプログラム
US10194078B2 (en) * 2017-06-09 2019-01-29 Immersion Corporation Haptic enabled device with multi-image capturing abilities

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH066669A (ja) 1992-06-22 1994-01-14 Hitachi Ltd カメラ一体型記録再生装置
JPH06189176A (ja) 1992-12-22 1994-07-08 Fuji Photo Film Co Ltd 手ぶれ補正システムおよび方式
JP3054002B2 (ja) * 1993-09-01 2000-06-19 キヤノン株式会社 複眼撮像装置
US6639626B1 (en) * 1998-06-18 2003-10-28 Minolta Co., Ltd. Photographing apparatus with two image sensors of different size
JP2000270297A (ja) 1999-03-12 2000-09-29 Toshiba Video Products Japan Kk デジタル映像記録再生機能を有する監視カメラシステム
ES2286875T3 (es) * 1999-04-22 2007-12-01 Leo Vision Procedimiento y dispositivo de tratamiento y de restitucion de imagenes, con nuevo muestreo.
JP3698397B2 (ja) 1999-06-07 2005-09-21 株式会社日立国際電気 テレビジョンカメラ
JP4501239B2 (ja) * 2000-07-13 2010-07-14 ソニー株式会社 カメラ・キャリブレーション装置及び方法、並びに、記憶媒体
JP2002094862A (ja) 2000-09-12 2002-03-29 Chinon Ind Inc 撮像装置
JP2002369066A (ja) * 2001-06-11 2002-12-20 Ricoh Co Ltd 映像記録表示装置及び映像記録表示方法
US7940299B2 (en) * 2001-08-09 2011-05-10 Technest Holdings, Inc. Method and apparatus for an omni-directional video surveillance system
JP2003179785A (ja) 2001-12-11 2003-06-27 Pentax Corp 画像撮影装置
JP4068869B2 (ja) * 2002-03-29 2008-03-26 富士フイルム株式会社 デジタルカメラ
JP3954439B2 (ja) * 2002-05-31 2007-08-08 株式会社リコー 映像記録システム、プログラム及び記録媒体
JP3870124B2 (ja) * 2002-06-14 2007-01-17 キヤノン株式会社 画像処理装置及びその方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
JP2004282296A (ja) 2003-03-14 2004-10-07 Sony Corp 撮像装置
JP3950085B2 (ja) 2003-06-10 2007-07-25 株式会社つくばマルチメディア 地図誘導全方位映像システム
JP2005012423A (ja) * 2003-06-18 2005-01-13 Fuji Photo Film Co Ltd 撮像装置及び信号処理装置
JP2005039777A (ja) 2003-06-30 2005-02-10 Casio Comput Co Ltd 画像撮影装置及び画像撮影システム
US20060187322A1 (en) * 2005-02-18 2006-08-24 Janson Wilbert F Jr Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range
JP2007180730A (ja) * 2005-12-27 2007-07-12 Eastman Kodak Co デジタルカメラおよびデータ管理方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107851425A (zh) * 2015-08-05 2018-03-27 索尼公司 信息处理设备、信息处理方法和程序
WO2023005427A1 (en) * 2021-07-29 2023-02-02 International Business Machines Corporation Context based adaptive resolution modulation countering network latency fluctuation
US11653047B2 (en) 2021-07-29 2023-05-16 International Business Machines Corporation Context based adaptive resolution modulation countering network latency fluctuation

Also Published As

Publication number Publication date
EP1865712A1 (en) 2007-12-12
JP2006270187A (ja) 2006-10-05
KR101249322B1 (ko) 2013-04-01
US20090201378A1 (en) 2009-08-13
CN101147391B (zh) 2011-06-01
KR20070120951A (ko) 2007-12-26
EP1865712A4 (en) 2009-12-23
WO2006101112A1 (ja) 2006-09-28
US8159572B2 (en) 2012-04-17
JP3968665B2 (ja) 2007-08-29

Similar Documents

Publication Publication Date Title
CN101147391B (zh) 成像设备、信息处理设备、信息处理方法
JP4831017B2 (ja) 画像処理装置、現像装置、画像処理方法、現像方法、画像処理プログラム、および現像プログラム
CN101682691B (zh) 图像处理装置及图像处理方法
CN101263706B (zh) 摄像装置、记录方法
CN100481915C (zh) 视频信号记录装置及其处理方法、视频信号再现装置及其处理方法
US20100265353A1 (en) Image Processing Device, Image Sensing Device And Image Reproduction Device
CN101785294B (zh) 成像设备和成像方法
EP2352285A1 (en) Recording apparatus, reproducing apparatus, recording/reproducing apparatus, image pickup apparatus, recording method, and program
CN101365063B (zh) 电子照相机以及视场图像再现装置
KR20120085474A (ko) 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
CN105144700A (zh) 图像处理设备和图像处理方法
CN105052126A (zh) 摄像设备和摄像设备的控制方法
JP6351212B2 (ja) 撮像装置、撮像装置の制御方法及びシステム
JP4140518B2 (ja) 情報処理装置および方法、並びにプログラム
CN102209199B (zh) 图像拍摄装置
CN101631221A (zh) 视频记录设备、视频记录方法、以及记录介质
JP2009290318A (ja) 撮像装置およびズーム調整方法
CN101523913A (zh) 具有dvr系统的数字显示设备及其方法
US20090190801A1 (en) Image processing apparatus, image processing method, and program
JPH11168685A (ja) 画像処理方法
JP6602425B2 (ja) 撮像装置、撮像装置の制御方法及びシステム
JP6594485B2 (ja) 撮像装置、撮像装置の制御方法及びシステム
JP6351213B2 (ja) 撮像装置、撮像装置の制御方法及びシステム
CN101527807B (zh) 数据处理设备、数据处理方法和程序
JP4547877B2 (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110601

Termination date: 20200322

CF01 Termination of patent right due to non-payment of annual fee