CN101208947A - 数码相机设备和在数码相机设备中实现数字变焦的方法以及相应的程序产品 - Google Patents
数码相机设备和在数码相机设备中实现数字变焦的方法以及相应的程序产品 Download PDFInfo
- Publication number
- CN101208947A CN101208947A CNA2006800234046A CN200680023404A CN101208947A CN 101208947 A CN101208947 A CN 101208947A CN A2006800234046 A CNA2006800234046 A CN A2006800234046A CN 200680023404 A CN200680023404 A CN 200680023404A CN 101208947 A CN101208947 A CN 101208947A
- Authority
- CN
- China
- Prior art keywords
- size
- pim
- image
- original image
- output image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 104
- 230000006870 function Effects 0.000 claims description 76
- 230000008569 process Effects 0.000 claims description 48
- 238000003384 imaging method Methods 0.000 claims description 26
- 238000012545 processing Methods 0.000 claims description 15
- 238000011002 quantification Methods 0.000 claims description 7
- 230000003287 optical effect Effects 0.000 description 14
- 239000011159 matrix material Substances 0.000 description 10
- 230000008901 benefit Effects 0.000 description 8
- 238000007639 printing Methods 0.000 description 8
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 238000013139 quantization Methods 0.000 description 5
- 238000012958 reprocessing Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 239000000047 product Substances 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000003467 diminishing effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
公开一种数码相机设备(10.1-10.3),其具有用于形成输出图像(OIM1-OIM3)的数字变焦功能(35)。在所述设备的用户界面(UI)中,用于所述输出图像的一个或多个尺寸限制被配置为将被设定为关于数字变焦功能(35)的设置,并基于所述一个或多个尺寸限制以及由成像装置(13,14)产生并在显示装置(11)上被裁切的已裁切原始图像(PIM)的尺寸,图像处理器(12)被用来至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对于已裁切的原始图像执行按比例缩放操作。另外本发明还涉及相应的方法和程序产品。
Description
技术领域
本发明涉及具有数字变焦功能以便形成输出图像的数码相机设备,所述设备包括
-产生原始图像的传感器和光学器件,
-显示装置,在其中所述原始图像被配置为将结合数字变焦功能而被裁切以便形成所述输出图像,
-用户界面装置,其用于设定关于所述数字变焦功能的一个或多个设置,以及
-图像处理器,其被配置为,基于至少在数字变焦范围的一部分内的所述原始图像的裁切而提出用于所述输出图像的尺寸。
另外,本发明还涉及到方法和相应的程序产品。
背景技术
变焦被用在数码相机中以裁切掉视图中不感兴趣的部分并放大所述视图中感兴趣的部分。光学变焦真正地放大所述图像并向所述图像加入新的细节和信息。
数字变焦也被普遍地包括在数码相机中,或者作为补充光学变焦的方法或者作为低端数码相机中唯一的变焦方法。数字变焦利用由相机光学器件和成像传感器产生的原始图像作为输入,并因而数字变焦不向所述图像加入真正的新细节。数字变焦要么裁切所述输入图像并因而降低了图像分辨率,要么裁切所述输入图像然后再进行插值,或更一般地,将所述图像提升到比已裁切的分辨率更高一些的分辨率,例如回到初始的输入分辨率。
在裁切中没有信息从ROI(兴趣区域)中丢失,而仅丢失了ROI之外的信息。相似地,在插值中,没有加入真正的新信息;新的值是根据在输入图像中与位置(x,y)对应的特定邻居像素,而向所述输出图像的每一个位置(x,y)中估计的。例如,典型地结合该特征使用双线性或双三次插值。
典型地,数码相机中的数字变焦在相当程度上像下面一样工作。根据数字变焦系数对由传感器和光学器件产生的输入原始图像进行裁切,然后对已裁切的图像进行插值,使其回到所述初始分辨率,以便产生最终的输出图像。在UI(用户界面)中数字变焦的激活不尽相同。
一些制造商拥有更复杂一点的数字变焦方法。例如,Sony拥有“智能变焦(SmartZoom)”概念,其在一些设备中被引入[1]。它大致这样工作:1)用户选择输出分辨率output_resolution。这必须低于初始传感器分辨率original_sensor_resolution。2)用户激活智能变焦。3)用户利用变焦环来变焦(即光学变焦)。4)系统从原始图像裁切出输出分辨率尺寸output_resolution_sized的子图像。所述子图像的分辨率为初始传感器分辨率original_sensor_resolution。
因此,当使用智能变焦时,最小变焦系数,即光学的+数字的不是x1,而是(初始传感器分辨率original_sensor_resolution/输出分辨率output_resolution)。这大于x1。最大变焦系数被增大到{光学变焦系数optical_zoom_factor*(初始传感器分辨率original_sensor_resolution/输出分辨率output_resolution)}。
智能变焦不会使图像质量恶化得像常规的数字变焦方法那样大,这是由于使用简单的裁切来替代插值+按比例缩小组合。然而,在选择低于初始传感器分辨率original_sensor_resolution的分辨率作为输出分辨率output_resolution之前,用户不能激活智能变焦。
同样,HP PhotoSmart 935数码相机[2]至少具有如下的数字变焦特征:1)不使用插值,仅使用裁切;并且2)由数字变焦(裁切)产生的实际像素尺寸被显示在取景器上。根据快速检测,在执行数字变焦时JPEG压缩系数似乎从固定的设置A变化为固定的设置B。
以上现有技术的解决方案不考虑不同类型的进一步的应用。其中之一是产生硬拷贝。由于双向执行的连续的按比例缩放变换措施(即按比例放大和按比例缩小)而出现图像质量问题。还由于按比例缩放措施作为后处理被执行的事实而引起问题。例如,这导致图像的伪像。
发明内容
本发明的目的是提出利用数码相机设备执行数字变焦过程的方法。本发明是一种用于包含数码相机传感器的设备的数字变焦系统(UI以及系统级发明)。根据本发明的数码相机设备的特征被呈现在权利要求1、8、10和11中并且所述方法的特征被呈现在权利要求13、20、22和23中。另外,本发明还涉及到程序产品,其特征被呈现在所附权利要求25、32、34和35中。
在本发明中,当终端用户进行数字成像时,本发明指示所述设备的处理器如何执行智能数字变焦功能,将所述功能与对产生的数字图像的进一步利用或处理相结合总能带来好处。现在已经以动态的方式执行数字变焦。用户可以为输出图像设定一个或多个尺寸限制或尺寸设置,于是基于所述尺寸限制或尺寸设置执行合适的按比例缩放措施。
根据本发明的第一数码相机设备具有数字变焦功能以形成输出图像。所述设备包括:传感器和光学器件,其用于产生原始图像;显示装置,在其中所述原始图像被配置为结合所述数字变焦功能而被裁切以便形成所述输出图像;用户界面装置,其用于设定关于所述数字变焦功能的一个或多个设置;以及图像处理器,其被配置为基于至少在数字变焦范围的一部分内的所述原始图像的裁切来提出所述输出图像的尺寸。在所述设备的所述用户界面中,用于所述输出图像的一个或多个尺寸限制被配置为将被设定为所述设置,并基于所述一个或多个尺寸限制以及所述已裁切的原始图像的尺寸,所述图像处理器被配置为至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像执行按比例缩放操作。
根据本发明的第二数码相机设备也包括:传感器和光学器件,其用于产生原始图像;显示装置,在其中所述原始图像被配置为结合所述数字变焦功能而被裁切以形成所述输出图像;以及图像处理器,其被配置为利用为输出图像设定的质量因子来存储所述输出图像。所述质量因子与所述已裁切的原始图像的尺寸相关联。
根据本发明的第三数码相机设备也包括数字变焦功能以形成输出图像。所述设备包括:传感器和光学器件,其用于产生原始图像;显示装置,在其中所述原始图像被配置为结合所述数字变焦功能而被裁切以形成所述输出图像;用户界面装置,其用于设定关于所述数字变焦功能的一个或多个设置;以及图像处理器,其被配置为基于所述原始图像的裁切提出用于所述输出图像的尺寸并利用为所述输出图像设定的质量因子来存储所述输出图像。在所述设备的用户界面中,用于所述输出图像的一个或多个尺寸限制被配置为将被设定为所述设置,并基于所述一个或多个尺寸限制以及已裁切的原始图像的尺寸,所述图像处理器被配置为,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分中到所述已裁切的原始图像执行按比例缩放操作,并且所述质量因子与所述已裁切的原始图像的尺寸相关联。
根据本发明的第四数码相机设备包括数字变焦功能以形成输出图像。另外所述设备包括:传感器和光学器件,其用于产生原始图像;显示装置,在其中所述原始图像被配置为结合数字成像而被观察;用户界面装置,其用于设定关于所述数字变焦功能的一个或多个设置;以及图像处理器,其被配置为处理所述原始图像以形成所述输出图像。在所述用户界面中,用于所述输出图像的至少一个尺寸设置被配置为将被设定为所述设置,并且所述图像处理器被配置为,作为所述处理执行对所述原始图像的按比例缩放操作以产生具有所述设定的尺寸设置的尺寸的输出图像。
此外,本发明还涉及到结合数字变焦功能而执行的用于形成输出图像的第一方法。在所述方法中,设定关于所述数字变焦过程的一个或多个设置,产生原始图像,结合所述数字变焦过程来裁切所述原始图像以形成输出图像,基于至少在数字变焦范围的一部分内的所述原始图像的裁切来提出用于所述输出图像的尺寸。为所述输出图像设定一个或多个尺寸限制以作为所述设置,并且基于所述一个或多个尺寸限制以及已裁切的原始图像的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像执行按比例缩放操作。
本发明还涉及到结合数字变焦功能而执行的用于形成输出图像的第二方法。在所述方法中,产生原始图像,结合所述数字变焦过程来裁切所述原始图像以形成所述输出图像,并利用为所述输出图像设定的质量因子存储所述输出图像。所述质量因子是基于所述已裁切的原始图像的尺寸而计算的。
本发明还涉及到结合数字变焦功能而执行的用于形成输出图像的第三方法,在所述方法中,设定关于所述数字变焦功能的一个或多个设置,产生原始图像,结合所述数字变焦过程来裁切所述原始图像以形成所述输出图像,基于至少在数字变焦范围的一部分内的所述原始图像的裁切来提出用于所述输出图像的尺寸,并利用为所述输出图像设定的质量因子来存储所述输出图像。为所述输出图像设定一个或多个尺寸限制以作为所述设置,并且基于所述一个或多个尺寸限制以及已裁切的原始图像的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像执行按比例缩放操作,并所述质量因子是基于所述已裁切的原始图像的尺寸而计算的。
本发明还涉及到结合数字变焦功能而执行的用于形成输出图像的第四方法,在所述方法中,设定关于所述数字变焦过程的一个或多个设置,产生原始图像并且处理所述原始图像以形成所述输出图像。为所述输出图像设定至少一个尺寸设置以作为所述设置,并且作为所述处理对所述原始图像执行按比例缩放操作,以产生具有所述设定的尺寸设置的尺寸的输出图像。
此外,在数码相机设备中用于执行数字变焦功能以形成输出图像的第一程序产品包括存储装置以及可由处理器执行并被写入所述存储装置的程序代码。所述程序代码包括:第一代码单元,其被配置为经由用户界面设定关于数字变焦功能的一个或多个设置;第二代码单元,其被配置为结合所述数字变焦功能在用户界面中对由成像装置产生的原始图像进行裁切以形成所述输出图像;以及第三代码单元,其被配置为,基于至少在数字变焦范围的一部分内的所述原始图像的裁切来提出用于所述输出图像的尺寸。另外,所述程序代码还包括:第四代码单元,其被配置为在所述用户界面中设定用于所述输出图像的一个或多个尺寸限制作为所述设置;以及第五代码单元,其被配置为,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对于已裁切的原始图像执行按比例缩放操作,其中所述按比例缩放操作被配置为基于所述一个或多个尺寸限制以及所述已裁切的原始图像的尺寸。
在数码相机设备中用于执行数字变焦功能以形成输出图像的第二程序产品包括存储装置以及可由处理器执行并被写入所述存储装置的程序代码,以及所述程序代码包括:第一代码单元,其被配置为,结合数字变焦功能在用户界面中对由成像装置产生的原始图像进行裁切以形成所述输出图像;以及第二代码单元,其被配置为利用为所述输出图像设定的质量因子来存储所述输出图像。另外,所述程序代码还包括第三代码单元,其被配置为基于已裁切的原始图像的尺寸来确定将被使用的质量因子。
在数码相机设备中用于执行数字变焦功能以形成输出图像的第三程序产品,所述程序产品包括存储装置以及可由处理器执行并被写入所述存储装置的程序代码,其中所述程序代码包括:第一代码单元,其被配置为经由用户界面设定关于所述数字变焦功能的一个或多个设置;第二代码单元,其被配置为,结合所述数字变焦功能在用户界面中对由成像装置产生的原始图像进行裁切以形成所述输出图像;第三代码单元,其被配置基于至少在数字变焦范围的一部分内的所述原始图像的裁切来提出所述输出图像的尺寸;以及被配置为利用为输出图像设定的质量因子来存储所述输出图像的代码单元。所述程序代码还包括:第四代码单元,其被配置为在所述用户界面中设定用于所述输出图像的一个或多个尺寸限制以作为所述设置;第五代码单元,其被配置为,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对已裁切的原始图像执行按比例缩放操作,其中所述按比例缩放操作被配置为基于所述一个或多个尺寸限制以及所述已裁切的原始图像的尺寸;以及被配置为基于所述已裁切的原始图像的尺寸来确定将被使用的质量因子代码单元。
在数码相机设备中用于执行数字变焦功能以形成输出图像的第四程序产品,所述程序产品包括存储装置以及可由处理器执行并被写入所述存储装置的程序代码,其中所述程序代码包括:第一代码单元,其被配置为经由用户界面设定关于数字变焦功能的一个或多个设置;第二代码单元,其被配置为,结合所述数字变焦功能在用户界面中观察由成像装置产生的原始图像以形成所述输出图像;以及第三代码单元,其被配置为处理所述原始图像以形成所述输出图像。所述程序代码还包括:第四代码单元,其被配置为,在所述用户界面中设定用于所述输出图像的至少一个尺寸限制以作为所述设置;以及第五代码单元,其被配置为,作为所述处理对所述已裁切的原始图像执行按比例缩放操作以产生具有所述设定的尺寸设置的尺寸的输出图像。
根据本发明的所述尺寸限制或尺寸可以是,例如,用于所述输出图像的最小尺寸、用于所述输出图像的最大尺寸或用于输出图像的至少一个输出尺寸。其他限制也是可行的。以上列出的限制的不同种的组合也是可行的。所述按比例缩放操作可以是按比例放大和/或按比例缩小。所述尺寸限制定义哪种按比例缩放操作已经被执行,如果有的话。因而结合所述设备实现的数字变焦可以被理解为某种动态的实现方式。所述原始图像的裁切区域的尺寸,即兴趣区域的尺寸和/或所述传感器的标称分辨率将因而有助于所述数字变焦过程的功能。
由于本发明,获得结合数字成像设备对图像执行数字变焦过程的许多优势。在所述相机设备的可用性方面获得第一个优势。用户不再需要对于与所述数字变焦功能相关的很深的知识。用户只需要在所述设备的用户界面中为输出图像设定一些尺寸限制,然后所述设备本身确定所需的合适的措施(如果有的话)以得到期望的输出结果图像以供将来使用。
利用本发明获得的第二个改进是合理的文件尺寸。通常,当打算从输出图像产生照片拷贝时,不需要高分辨率。如果想要的照片拷贝尺寸为例如明信片尺寸,则产生具有合理质量的照片拷贝所需的分辨率仅为例如在1-2Mpix之间的分辨率。
第三,与数码相机中常规的数字变焦系统相比本发明还提高了图像质量。尤其在具有较小存储空间和较低处理能力以及具有额外限制(例如,MMS文件尺寸限制)的移动成像设备中引入了改善。
第四,本发明还特别在这种情况下提高了图像质量,即意图从通过标称分辨率低于预期照片拷贝尺寸的传感器产生的图像来产生照片拷贝。如果根据本发明执行到所要照片拷贝尺寸的按比例缩放措施,那么通过减少伪像的数量将获得所述优势,否则的话,如果在成像处理(包括例如应当只进行一次并只在按比例缩放之后进行的锐化的成像处理)和(有损)图像压缩之后将所述按比例缩放处理作为后处理执行,将出现伪像。
本发明尤其适合于打算产生期望打印为照片拷贝的图像的数字成像。由于本发明,能够避免对输出图像执行多个连续的按比例放大和按比例缩小操作,这区别于当前的技术。
本发明其他的特征将从所附权利要求中呈现,并且在说明书中列出可获得的更多优势。
附图说明
本发明不受限于以下提出的实施例,将参照附图被更详细地描述,其中:
图1是根据本发明的第一数码相机设备以及用于结合第一数码相机设备的第一程序产品的基本应用例子的概略原示意图;
图2示出了与本发明相关的原始图像的裁切的例子;
图3示出了在执行数字变焦过程时的第一方法的第一应用例子的流程图;
图4示出了在执行数字变焦过程时的第一方法的第二应用例子的流程图;
图5示出了在执行数字变焦过程时的第一方法的第三应用例子的流程图;
图6示出了在执行数字变焦过程时的第一方法的第四应用例子的流程图;
图7示出了在执行数字变焦过程时的第一方法的第五应用例子的流程图;
图8是根据本发明的第二数码相机设备以及用于结合第二数码相机配置的第二程序产品的基本应用例子的概略示意图;
图9示出了在执行数字变焦过程时的第二方法的第一应用例子的流程图;
图10是根据本发明的第三数码相机设备以及用于结合第三数码相机设备配置的第三程序产品的基本应用例子的概略示意图,其为图1到图8的设备的结合;
图11示出了在执行数字变焦过程时的第三方法的应用例子的流程图;以及
图12示出了在执行数字变焦过程时的第四方法的应用例子的流程图。
具体实施方式
图1,8和10示出了根据本发明的便携式数码相机设备的一些例子10.1-10.3。一般而言,根据本发明的设备10.1-10.3可以是,例如,移动设备(例如移动电话)、PDA设备(个人数字助理)或一些等同的智能通信设备(“智能设备”)。当然,设备10.1-10.3还可以是不具备任何通信特征的数码相机。
一般形式的设备10.1-10.3可以包括显示装置11和图像处理装置12。所述显示装置可以包括已知的彩色显示元件11(例如,LCD或EFT)或相应的元件,借助其能够显示或观察图像OIM1-OIM3并可以通过其使用设备10.1-10.3的用户界面UI。显示装置11还可以作为取景器工作,设备10.1-10.3甚至能够有几个(光学的或数字的)取景器。在所述取景器功能中,当利用设备10.1-10.3对准图像目标时,显示装置11可以被用于观察与数字成像有关的成像视图。
图像处理装置可以包括一个或几个处理单元12或相应的单元,借助其能够执行设备10.1-10.3的许多相关功能。结合本发明,这些特征集中在数字成像,更具体地说集中在数字变焦过程。设备10.1-10.3还可以具有一个或多个存储器MEN,MEN′,在其中可以存储不同类型的数据。所述数据的一些例子是由设备10.1-10.3产生的输出图像OIM1-OIM3以及还有程序产品30.1-30.3。程序产品30.1-30.3被配置为与设备10.1-10.3结合以便执行根据本发明的措施和操作。
根据本发明的数码相机设备10.1-10.3还具有数字变焦功能35。数字变焦功能35被用以形成输出图像OIM1-OIM3。数字变焦35可以被这样认为,但还包括在下面更具体地描述的根据本发明的操作。
另外,设备10.1-10.3还包括成像装置。这些装置可以包括传感器13和光学器件14。传感器13和光学器件14一样都可以是已知的。光学器件14可以具有调节焦距(光学变焦)的装置,但这不是必须的。通过利用传感器13和光学器件14可以产生原始图像PIM。同样,这些装置13,14被用于产生取景器图像,以在执行数字变焦时指明对取景器图像的裁切措施。
接下来将以更关注本发明的方式来描述设备10.1-10.3。对于本领域技术人员,众所周知的是,设备10.1-10.3还可以包括在本文应用背景中不需要以更详细的方式描述的其他功能。另外,当然,以下所描述的设备10.1-10.3的功能实体能够支持许多其他的事物与功能,描述其被认为与本发明有关的方面以阐明本发明的基本思想。
对于技术人员显而易见的是,本发明的功能、操作以及措施的至少一部分可以由处理器12在程序级上执行。当然,也可能是这样的实现方式,即所述操作的至少一部分在程序级上执行而一部分操作在硬件级上执行。接下来,在相关的点上引用这些程序代码单元,借助其可以根据本发明执行所述设备操作。
首先,参照在图1中提出的设备10.1和在图2中提出的数字变焦功能。形成程序代码31的程序代码单元31.1-31.10也在图1中被提出。
如以上已被告知的,根据本发明的设备10.1还包括显示装置11。通过使用显示装置,利用成像装置13,14所产生的原始图像PIM被配置为将被裁切。当选择了在显示装置11上示出的原始图像PIM中的ROI1-ROI3时,结合所述数字变焦过程执行裁切操作,以便产生输出图像OIM1-OIM3。程序代码31的程序代码单元31.2可以支持这个措施。
另外,在设备10.1的用户界面UI中,还将使设定一个或多个设置。所述表达“用户界面”不意在以任何方式限制本发明。用户界面可以有不同类型的形式,例如,由已知类型的用户界面的控制装置或以其他任何合适的方式控制的按钮和/或(转动)开关和/或仅呈现在显示装置12上的单元的集合。所述设置尤其涉及打算执行的数字变焦过程。程序代码单元31.1能够以明确定义的方式支持这个措施。
本发明的基本思想是,例如,经由设备10.1的用户界面UI,将一个或多个尺寸限制设定为所述设置,所述尺寸限制用于打算作为数字成像的结果而产生的输出图像OIM1-OIM3。程序代码单元31.4能够支持这些措施。
在本发明中,图像处理器12被配置为提出用于输出图像OIM1-OIM3的尺寸。这个过程是基于所执行的原始图像PIM的裁切来执行的。由所述尺寸限制定义的尺寸调整至少被执行在数字变焦范围的一部分内。程序代码单元31.4能够支持这些措施。
更具体地,本发明的一般思想是,以智能的方式提出输出图像OIM1-OIM3的尺寸。在设备10.1中,算法代码31被用于检查在原始图像PIM中被裁切的区域ROI1-ROI3如何与在界面UI中提出的一个或多个尺寸限制相关。于是,基于所述一个或多个尺寸限制设定以及已裁切的原始图像区域ROI1-ROI3的尺寸,设定输出图像OIM1-OIM3的尺寸。当图像处理器12观察到尺寸和为尺寸设定的限制以某种方式彼此相关时,图像处理器12判定需要按比例缩放操作。这些按比例缩放操作可以是按比例放大(即不同类型的插值方法)和按比例缩小。按比例缩放操作至少被执行在数字变焦范围的一部分内。执行按比例缩放操作所处的数字变焦范围由已经经由用户界面UI设定的一个或多个尺寸限制而定义了。程序代码单元31.5能够支持这些措施。由于本发明,用户不再需要选择比初始传感器分辨率original_sensor_resolution更低的分辨率作为输出分辨率out_put_resolution。因此,能够以智能的方式决定所述输出分辨率out_put_resolution。
接下来,在JPEG图像的情况下描述本发明。然而,本发明不排除应用其他的图像格式,且本领域的技术人员也可以使本发明适合于其他的图像格式。可以参照图2。图2描述了对原始图像PIM指示的不同类型的裁切ROI1-ROI3,并且通过该裁切产生输出图像OIM1-OIM3。当在下面描述不同的方法选择时可以参照图2。
接下来,结合不同类型的实施例描述在数字变焦过程35中用于形成输出图像OIM1-OIM3的方法。在第一和第二实施例中,在两种情况下都仅应用一个尺寸限制。在第一实施例的情况下,参照图1,2并参照图3的流程图。图3被详细描述。其他的流程图被描述的只是不同于图3实施例的部分。
在图3中,作为第一步骤300,设备10.1的用户启动根据本发明的成像过程。在阶段301中,所述用户具有用于设定一个或多个有关数字变焦功能35的设置的选项,其对于成像可能是必需的。这些设置可以经由设备10.1的用户界面UI来被设定。在这个阶段301中,甚至存在多个可以设定的设置,而不仅仅是根据本发明的设置。如果所述数字变焦功能甚至未被激活并且仅可用的光学变焦34就足够执行成像操作的,那么在这种情况下也可以设定所述设置。
就此而论,可以设定的设置是对于输出图像OIM1-OIM3的一个或多个尺寸限制。在这个实施例中,根据本发明的尺寸限制为对于打算用所述方法产生的输出图像OIM1-OIM3的最小尺寸min_image_size。所述尺寸限制min_image_size可以被表示为,例如,兆像素值。现在,这个示例性的值可以为,例如1.5Mpix。在所述实施例中,传感器13可以具有例如5Mpix的总分辨率。我们应当理解的是,下面的这些值仅为用作例子,所以它们无意限制本发明或作为其出于某个特定目的的修改。
处理器12记录这个设置min_image_size并将其存储到设备10.1的存储器MEM′中。之后,总可以结合所述数码成像来使用由所述用户在阶段301中设定的这个设置min_image_size,即使在成像步骤之间设备10.1会被关闭。所以说,该设置min_image_size可以是在相机设备中广泛使用的当前设置之一。设置值min_image_size可以被存储为所述设置的默认值,直到由所述用户下次作出改变为止。这些方面还涉及下面描述的本发明的其他设置。
有关min_image_size的设置以及根据本发明的尺寸限制一般可以通过利用在UI中列出的预定义列表来设定。还可以有关于不同值的帮助信息,其有助于用户进行选择。在这种列表中,可以列出输出图像OIM1-OIM3的一些最小尺寸以便由用户设定一个。当然,用户还可以设定由其自身决定的尺寸值。于是min_image_size可以被设定为任何尺寸。例如,尺寸值还能够为除整数的Mpix尺寸值之外的其他值。所述尺寸值的尺度可以平滑地变化。
在阶段302中,设备10.1的用户利用相机设备10.1观测图像目标。在阶段302中,执行连续的取景器成像,并且这导致还生成原始图像PIM。因此,由传感器13和光学器件14拍摄的原始图像PIM被显示在显示装置11上。
如果环境(例如,在用户和瞄准的图像对象之间的距离)使得用户想裁切原始图像PIM的图像区域,则他可以执行变焦过程。如果相机设备10.1具有光学变焦功能34,则在阶段303中用户能够以期望的方式利用光学变焦功能34。光学变焦功能34可以被调整到它的远摄位置或其他合适的位置,以便以期望的方式裁切图像对象。如果利用远摄位置,则光学变焦34处于其最大水平。然后,通过利用这个光学变焦功能34来产生对于取景器12目标的原始图像PIM。
如果用户仍然想更多地裁切所述视图,即兴趣的区域ROI1-ROI3在原始图像PIM中的“深处”,则他可以利用设备10.1的数字变焦功能。这也在阶段303中被执行。用户界面UI可以被设计为使得当用户试图进行比光学变焦34所允许的更远的变焦时激活数字变焦35。用户可以从这个最大光学变焦调节更进一步。同样,在某些实施例中,尽管光学变焦34不在其最远的远摄位置,数字变焦35也可以被激活。可以通过利用例如图2中呈现的矩形或其他边界,在取景器屏幕11中包围被裁切的可视区域ROI1-ROI3。这可以被用于向用户指示现在数字变焦35被激活。用户继续所述裁切,即数字变焦过程,直到在取景器显示装置11中达到期望的区域。
应当理解,在取景器11中一次仅呈现一个裁切ROI1,ROI2或ROI3。在有界区域ROI1-ROI3中的图像对象形成将达到输出图像OIM1-OIM3的图像目标。在边界ROI1-ROI3之外的周围区域将被放弃。这是数字变焦实现中的熟知过程。
当边界框以期望的方式在主体周围时,即当兴趣区域ROI1-ROI3只有期望的图像对象时,用户按下快门按钮以拍摄最终的原始图像,由此设备10.1中产生输出图像OIM。处理器12确认原始图像PIM的裁切区域ROI1-ROI3,并仅将这些数据输入给进一步的处理和存储。这在阶段304中执行。
在阶段305和306中执行可能的按比例缩放操作,其现在基于一个尺寸限制min_image_size并且还基于原始图像PIM的裁切区域ROI1-ROI3的尺寸。
在阶段305中,已裁切的子图像ROI1-ROI3被带入以根据本发明的方式执行的处理中。此时,基于原始图像PIM的裁切区域ROI1-ROI3,提出对于打算被存储或发送给(例如在别处的)进一步处理的输出图像OIM1-OIM3的尺寸。至少可以在数字变焦范围的一部分内执行这个尺寸调整。在这个实施例中,此时,执行所述调整所处的范围是由阶段301中定义的尺寸限制值min_image_size来定义的。所以,在这个实施例中,所述数字变焦范围被分成两个子范围,其中在一个范围内已经执行按比例缩放措施,而在另一个范围内还没有执行任何按比例缩放措施。
如果处理器12确定阶段305的条件为真,即,图像区域ROI的尺寸(=1.3Mpix)现在低于设定的尺寸限制min_image_size(=1.5Mpix),那么执行到阶段306的步骤。因此,在阶段301中计划的数字变焦系数太高。在阶段306中,图像处理器12将原始图像PIM的裁切图像区域ROI1按比例放大到为其设定的最小尺寸min_image_size(=1.5Mpix),以便产生最终的输出图像OIM1。程序代码单元31.6能够支持在所裁切的原始图像的尺寸低于最小尺寸min_image_size时的分析以及插值(阶段305和306)。
然而,如果裁切图像区域ROI2,ROI3的尺寸(即数字变焦系数)使得阶段305中的条件不为真,这也通过处理器12来识别,于是执行到阶段307的步骤。在此,被拍摄并被裁切的图像ROI2(=2Mpix)和ROI3(=3MPix)于是没有经过任何按比例缩放措施就被存储或被进一步处理。程序代码单元31.3执行这个过程。可以这么说,没有经过任何有关按比例缩放的措施的裁切区域ROI2,ROI3于是形成期望的输出图像OIM2,OIM3。因此,在这种情况下,它们的尺寸将大于为产生的输出图像设定的最小图像尺寸限制min_image_size。所述成像过程结束于阶段308。
这个实施例中的阶段307以及其他实施例中的相应阶段都可以包括JPEG编码过程。在本发明中,这个JPEG编码过程是在可能的按比例缩放措施之后被执行的。由于这个原因,实现了执行按比例缩放和编码措施的适当顺序。
以上的实施例能够被用于例如这种情况,即如果用户知道其将要以某个分辨率打印图像,并且他希望相机10.1完成所需的插值。如果用户希望,用户还能利用尺寸限制min_image_size,以通过设定min_image_size=max_image_size来使数字变焦35以常规方式工作。接下来描述最大图像尺寸max_image_size的应用例子。
在图4中描述另一个实施例,其中描述除最小图像尺寸min_image_size之外的另一个设置的使用。在这个实施例中,阶段400-404等同于图3中对应的阶段300-304。同样,其他阶段并没有相当不同于图3中执行的措施,在下面没有被很详细地描述。在考虑这些阶段400-404时唯一的例外是,现在,在阶段401中,替代最小图像尺寸min_image_size或在本发明一般意义上的图像尺寸,将输出图像OIM1-OIM3的最大图像尺寸max_image_size设定为根据本发明的一个或多个图像尺寸限制。这个最大图像尺寸值max_image_size现在可以为,例如2.5Mpix。也可以在设备10.1的用户界面UI中设定该最大图像尺寸值。
上述情况意味着,如果在变焦系数[no_digital_zoom_used,max_image_size]之间的话,由数字变焦过程35产生的输出图像将具有尺寸max_image_size。如果使用数字变焦的总量使得裁切区域的尺寸小于为其设定的最大图像尺寸max_image_size,则输出图像的最终尺寸将小于为其设定的max_image_size。
在阶段405中,处理器12被再次用于确定裁切图像区域ROI1-ROI3的尺寸是否超过在阶段401中为其设定的或从数字变焦功能35的存储器MEM′中获取的最大尺寸max_image_size(=2.5Mpix)。如果阶段405的条件为真,即在ROI3的情况下,则执行到阶段406的步骤。
在阶段406中,图像处理器12将原始图像PIM的裁切区域ROI3按比例缩小到这个为其设定的最大尺寸max_image_size。程序代码单元31.7可以支持这个措施。同样,以此方式应用的按比例缩小方法对于本领域技术人员是显而易见的,并因此没有详细描述的必要。
如果在阶段405中评估的条件不为真,其现在为ROI1和ROI2的情况,则执行到阶段407的步骤。它们的尺寸将保留为与有效裁切区域对应的尺寸,并且输出图像OIM1,OIM3具有尺寸1.3Mpix和2Mpix。其他步骤407-408可以对应于结合图3的实施例描述的步骤307-308。
在这个实施例中,裁切阶段403还可以是可选的。如果在阶段403中未执行裁切,则所拍摄的图像PIM也可以被按比例缩小到max_image_size。这个不裁切的特征还可以被应用在其他的实施例中。如果用户想要具有传感器13的标称分辨率(例如,5Mpix)的输出图像,他可以在UI中设定max_image_size=sensor_size。
在图5中描述了大致对应于图4中描述的实施例的实施例。然而,这个实施例说明了由传感器13和光学器件14产生的原始图像PIM的数据可以被用于确定一些成像设置。程序代码单元31.10可以支持该措施。
在此,在阶段502.1中,收集由传感器13产生的原始图像PIM数据的全部,以便调节例如最终输出图像OIM1-OIM3的白平衡。可以结合取景器阶段502来执行AWB统计数据的这个收集,在取景器阶段502中通过利用传感器13来执行成像。尽管,在所得到的输出图像OIM1-OIM3中将只有由于所述裁切过程才获得的数据,即兴趣区域ROI1-ROI3的数据,但通过传感器13观察并拍摄的原始图像PIM(=5Mpix)的整个区域都被用于确定所述AWB校正。在所述AWB中还可以使用任何类型的方法。在执行任何可行的按比例缩放操作之前,即在本实施例中在阶段506之前,将执行AWB的设定。当然,上面和下面提出的其他实施例也可以利用在这个实施例中执行的AWB统计数据的收集。
图6呈现了图3和4中所描述的实施例被组合成一个统一过程的实施例。以上这些实施例的描述在其各自适当的部分是有效的。在此,除了最小图像尺寸min_image_size之外还有最大图像尺寸min_image_size被应用为在本发明意义下的对于输出图像OIM1-OIM3的尺寸限制。
在阶段601和602中再次设定这些值,并且在这个应用例子中它们可以是与用于上述实施例(1.5Mpix,2.5Mpix)的相同。可以在设备10.1的用户界面UI中执行这个设置。在这个实施例中,根据本发明的方法被应用的数字变焦系数范围,低于最小图像尺寸的图像尺寸(阶段606的“是”路径)并高于最大图像尺寸的图像尺寸(阶段608的“是”路径)。如果在阶段606中确定用户想要用于输出图像OIM1的裁切图像尺寸(ROI1,1.3Mpix)小于为其设定的尺寸限制min_image_size(=1.5Mpix),则在阶段607中执行按比例放大,即执行插值措施。如果在阶段608中确定用户想要用于输出图像OIM3的裁切图像尺寸(ROI3,3Mpix)大于为其设定的尺寸限制max_image_size(=2.5Mpix),则在阶段609中执行按比例缩小措施。程序代码单元31.8可以支持这个措施和分析。
如果想要作为输出图像OIM2的裁切区域ROI2的尺寸处于在最大图像尺寸max_image_size和最小图像尺寸min_image_size之间的数字变焦系数范围内(即阶段608的为“否”的路径),则对裁切区域ROI2不执行任何涉及按比例放大或按比例缩小的措施。在存储阶段610之后,对于所讨论图像的成像和变焦措施结束(阶段611)。
图7中的实施例在其他方面对应于图6中呈现的实施例,但在此尺寸限制还额外包括打算产生的输出图像的至少一个输出图像尺寸output_image_size。用作最大图像尺寸max_image_size的尺寸限制现在可以为,例如4Mpix,并且用作最小图像尺寸min_image_size的尺寸限制现在可以为,例如0.3Mpix(=VGA分辨率)。在这种示例性情况下,用作输出尺寸限制output_image_size的尺寸限制现在可以为,例如3.2Mpix。或者,这个输出尺寸限制还可以是一些通常使用的分辨率的集合(例如,4Mpix,3.2Mpix,2Mpix,1Mpix)。在这个实施例中,传感器13的标称分辨率可以为例如5Mpix。由于这个实施例,用户将只获得正好期望的尺寸的输出图像。程序代码单元31.9可以支持涉及这个输出图像尺寸度量集的操作。
根据这个实施例的第一方面,如果对于尺寸限制执行设置从而使得最小图像尺寸min_image_size被设定为非常小——例如0.3Mpix,并且最大图像尺寸max_image_size被设定为非常大——例如5Mpix,则所有图像都被生成为设定的输出图像尺寸output_image_size3.2Mpix。
现在可以在阶段702′中设定用于输出图像尺寸output_image_size的尺寸限制设置。如果应用了输出图像尺寸限制的预定集合(例如,4Mpix,3Mpix,2Mpix,1Mpix),则在这个阶段702′中能够选择有关数字变焦功能35的具体成像模式,其现在被表示为“量化的输出尺寸模式”。一般而言,这个在设定的最小尺寸限制min_image_size和设定的最大尺寸限制max_image_size之间模式数字变焦范围,是通过设定的输出图像尺寸限制被量化的,在该量化的基础上以既定的方式设定所述裁切原始图像的尺寸。根据这个模式,用户不需要设定他或她想要的在尺寸限制min_image_size和max_image_size之间的每一个图像尺寸,而所述图像基于既定的标准被按比例缩放到预定图像尺寸中的一个。这个选择减少了需要在用户界面UI中执行的选择的数量。
如果在阶段708中通过处理器12确定,裁切的尺寸,即产生的原始图像PIM的兴趣区域ROI2的尺寸在尺寸限制min_image_size和max_image_size之间,则执行到阶段709.2的步骤。在那里,图像处理器12将原始图像PIM的裁切区域ROI2(=2Mpix)的按比例缩放到设定的输出图像尺寸output_image_size。该按比例缩放措施是以既定的方式被执行的。
可以以这样的方式实现按比例缩放措施从而使得,例如,在尺寸范围(3.2-4]Mpix之间的话输出图像的尺寸将为4Mpix,以及在尺寸范围(2-3.2]Mpix之间的话输出图像的尺寸将为3.2Mpix,以及在尺寸范围(1-2]Mpix之间的话,即在ROI2中的情况,输出图像的尺寸将为2Mpix,等等。于是,在这些情况下,对已裁切的原始图像进行插值。当然,以上提出的实现方式还可以被替代,即替代所述插值,将十中抽一采样作为按比例缩放措施来执行。在该实施例中,例如,在尺寸范围(3.2-4]Mpix之间的已裁切的原始图像将被十中抽一采样到3.2Mpix,等等。该量化实施例允许产生这样的输出图像,即该输出图像没有随意的尺寸而其尺寸是最接近该已裁切的图像区域的公共尺寸。
所以,在阶段709.2中,按比例缩小和按比例放大措施都能够被执行,其取决于ROI的尺寸和output_image_size的关系以及该量化实施例的实现方式。在其他方面所述过程可以大致像在上述实施例中一样被执行。针对图7的这个实施例还应当注意的是,如果裁切图像区域的尺寸精确地等于为尺寸限制设定的尺寸,即,max_image_size或min_image_size,则在阶段707和708中无需执行任何插值或十中抽一采样措施。
当然,这样的实施例也是可行的,即其中没有应用有关最大和最小尺寸的尺寸限制,而只有为打算产生的所有输出图像设定的尺寸。在这种情况下执行的措施可以取决于兴趣区域ROI1-ROI3的尺寸。如果裁切区域的尺寸——即在ROI1和ROI2的情况下——小于为输出图像设定的尺寸,则执行插值措施,即以众所周知的方式创建新的像素。如果裁切区域的尺寸——即在ROI3的情况下——超过为输出图像设置的尺寸,则执行按比例缩小措施。当然,如果裁切图像区域的尺寸正好精确地等于所设输出尺寸的尺寸,则不需要任何措施。这对于其他实施例也是显而易见的。
在图8中描述根据本发明的设备10.2的另一个实施例。设备10.2的主要功能实体已经结合图1的描述在适当的水平上被定义了。设备10.2被配备有能够支持所需操作的程序代码32。
同样,在这个实施例中,数码相机设备10.2具有用以执行数字变焦功能的功能单元。这是打算形成输出图像。设备10.2除了包括结合图1描述的功能单元和实体之外,还包括用户界面实体UI和处理器实体12。在用户界面UI中,由传感器13产生的原始图像结合数字变焦过程而被裁切,以便形成输出图像。这可以由程序代码单元32.1支持。图像处理器12通过利用为输出图像设定的质量因子qf来存储所述输出图像。这可以由程序代码装单元32.2支持。
在根据本发明的设备10.2中,质量因子qf被出乎意料地与已裁切的原始图像的尺寸相关联,即与意图产生最终输出图像的兴趣区域的尺寸相关联。与其相关的措施可以由程序代码单元32.3支持。
在图9中描述了在数字变焦过程中为了形成输出图像的方法的一个例子。可以通过利用在图8中描述的设备10.2来实现该方法。在此,阶段900-902可以对应于已经在这个实施例之前提出的实施例中描述的措施。这些阶段可以包括取景器成像(阶段901),取景器图像的裁切(阶段902)以及拍摄所裁切图像以便产生输出图像(阶段903)。
在阶段903之后执行阶段904,其中对于所拍摄和裁切的图像确定质量因子qf。现在出乎意料地基于所述裁切图像区域的尺寸来确定所述质量因子qf。所述尺寸可以为,例如兆像素值,如在以上实施例中提出的那样。因此,所述尺寸可以被理解为图像的分辨率。例如以这样的方式执行这个过程,从而使得首先通过处理器来确定裁切图像区域的尺寸。
例如通过利用下面的等式,可以计算质量因子:
qf_new=qf_old+({1.0-scale}*{max[96,qf_old]-qf_old}),
其中
scale=(crop_xsize/original_xsize)*(crop_ysize/original_ysize),
其中qf_new=新的质量因子,qf_old=旧的质量因子,crop_xsize=水平方向的ROI尺寸,crop_ysize=垂直方向的ROI尺寸,并且original_xsize,original_ysize=由传感器产生的原始图像在水平方向和垂直方向的尺寸。设备10.2可以被配备有支持这些计算的程序代码单元32.4。即使对于裁切图像JPEG质量因子qf被增大相当多,所述裁切图像的文件尺寸也小于被裁切和插值的图像的文件尺寸。
在阶段905中,利用为所拍摄和裁切的输出图像设定的质量因子来存储所拍摄和裁切的输出图像(程序代码单元32.2)。
结合JPEG编码的质量因子qf的应用对于本领域技术人员是明显的。正如为人们所知的,JPEG编码基于8×8离散余弦变换(DCT)。质量因子qf被用于调整DCT变换之后的量化矩阵的值(=64个值)。可以在利用质量因子qf的值进行编码之前计算所述量化矩阵。
当被存储在所述矩阵中的除数的值增长时,其使得DCT的值的绝大部分量化为零。这导致将被存储的输出图像的尺寸减小并且同时质量变差。在以上描述的应用实施例中,质量因子qf的值越大(接近100)意味着所述矩阵中除数的值越小。当所述质量因子的值接近零时,所述除数的值变得非常大。对输出图像的质量的影响是相反的。
在一些图像处理软件中,利用名词“压缩系数”来定义质量因子。在这些情况下,函数是正好相反的。应当理解的是被存储到与图像数据相关的JPEG文件中的是所使用的量化矩阵,而根本不是实际的量化因子qf。然后,通过利用所述量化矩阵,于是可以估计所使用的质量因子qf。JPEG标准提出表示质量因子值qf=50的特定基本矩阵。然而,当然,如果用户想基于其他方式选择他的矩阵也是可行的。
质量因子qf=100意味着所述矩阵的所有除数值为1,并且因而DCT变换后的值被截取到整数精度(在那种情况下图像被稍微地压缩)。
如果逐块描述整个处理:从所述图像得到8×8图像块→对所述图像分块指示DCT变换→利用量化矩阵对变换后的值进行量化→利用zigzag扫描和可变长度编码对被量化的值进行编码。然而,JPEG处理的基本理论对于本领域技术人员是显而易见的,并且以上出现的这些背景信息不意在以任何方式限制根据本发明的方法。一般而言,所述JPEG处理步骤被包括到阶段307中(以及在其他实施例中其他相应的存储阶段)。
当打算存储的输出图像被压缩为JPEG格式时,质量因子qf是对JPEG编码器的输入参数。如果对于裁切图像不增大所述JPEG压缩质量因子qf,则如果以后将所述图像插值为相当大的分辨率那么压缩伪像可能变得很令人烦扰。
在图10中已经描述了根据本发明的设备10.3的第三例子并且在图11中描述了涉及该设备10.3的流程。现在方法和设备10.1,10.2被组合成一个统一的设备10.3。如果使以上所结合实施例以及图11的思想明确化,那么将所述JPEG质量因子qf与ROI1-ROI3的裁切尺寸相联系。较小的ROI裁切尺寸允许设定较高的质量因子qf(较少的压缩)并依然具有较小的文件尺寸。当利用裁切时,与裁切、插值和较低的质量因子相比较,没有插值和较高的质量因子能更好地保留实际的图像细节。
如果以后将图像插值到更大的分辨率,那么JPEG压缩伪像将不会像在JPEG质量因子为固定的情况中那样变得可见,这是因为由于增大的质量因子将导致更小的JPEG压缩伪像。本领域技术人员还可以组合图7和11的实施例,然而不排除其他的实施例组合。
仍然根据一个实施例,根据本发明的以及以上提出的尺寸限制无需必然等于或小于协同光学器件14而产生原始图像PIM的传感器13的标称分辨率。对于根据本发明的最小和最大尺寸限制的仅有的条件是:1)min_image_size<max_image_size,2)min_image_size>0。
这种实施例的一个例子可以是这样的情形,其中用户想要利用他或她的照相机设备执行数码成像,以便通过利用图像打印设备从产生的数码图像准备硬拷贝。这个实施例被呈现为图12中的流程图。如果所述照相机设备的传感器13的标称分辨率为例如0.3Mpix(VGA分辨率),并且图像打印设备的缺省打印尺寸为例如1375664像素,则根据第一实施例,可以将整个图像区域从0.3Mpix插值到1375664pix,1375664pix现在被设定为max_image_size以及min_image_size(阶段2100)。由于该实施例,由VGA传感器13产生的图像能够被精确地匹配到所述图像打印设备。因此,在这个实施例中,根本不必要执行裁切过程,而是在阶段2400中将在阶段2200中拍摄的全部传感器数据从标称传感器分辨率精确地插值到作为所述图像打印设备的特性的图像尺寸。如果在阶段2300的尺寸条件被满足,即意味着传感器13的标称分辨率小于在此将被使用的min_image_size设置,则执行所述插值。
其他的通用阶段2000,2500,2600已经在以上的实施例中被描述了。当然,根据第二实施例,本领域的技术人员可以将这种实施例应用于以上已经在图3-7,9和11中呈现的其中执行裁切过程的实施例。
在其中尺寸限制等于或大于标称的传感器分辨率并且根本没有执行裁切的以上实施例中,可以参照在图10中呈现的设备10.3。还存在程序产品33,其具有根据本实施例执行按比例缩放措施的代码单元。该代码单元可以大致地对应于与图1相关但被适应于现在所涉及的实施例的代码单元31.1-31.10。如果未执行裁切,显示装置11不仅用作取景器而且可能用作用户界面UI的界面。在此,图像处理器12对原始图像执行按比例缩放操作以便产生具有所设定的尺寸设置的输出图像。因此,本领域的技术人员承认在结合本应用所提出的不同实施例之间的所有组合都是可能的。
以上实施例的动机来自于这样的原因,例如,用户可以想要准备具有尺寸例如4″×6″以及分辨率254dpi的硬拷贝,并且用户还想要数码相机设备10.3执行插值处理。通过这样做获得的优势尤其是,现在在锐化和JPEG编码之前执行插值。这避免了对锐化和JPEG伪像的放大,并产生更好的锐化效果。因此,这些实施例消除了对打算打印的图像的后处理的需要,否则所述后处理将由数码打印服务来执行,其中裁切或未裁切的VGA图像将例如在打印处理之前被插值到尺寸1.38Mpix。在JPEG编码之后对所述图像插值将因而放大伪像效应。
在图1,8和10中呈现了根据本发明的程序产品31.1、31.2的应用例子的概略示意图。程序产品31.1、31.2意图在根据本发明的数码相机设备10.1、10.3中结合数字变焦功能35而执行,以便形成输出图像。程序产品31.1、31.2可以包括诸如存储介质MEM的存储装置,并且还包括程序代码31、32、33,程序代码31、32、33可由设备10.1-10.3的处理器单元12执行并被写入所述存储介质MEN,以用于至少部分在软件级上依照本发明的方法来处理数字变焦过程。用于程序代码31、32的存储介质MEM可以为,例如设备10.1-10.3的静态的或动态的应用程序存储器,其中,它可以直接结合成像应用程序或更具体地说结合数字变焦功能34而被集成。
程序代码31、32、33可以包括以上描述的几个代码单元31.1-31.10,32.1-32.4,其可以由处理器12执行并且其运行可以适合于以上刚刚提出的方法描述。代码单元31.1-31.10,32.1-32.4能够形成可以一个接一个地执行的一系列处理器命令,其被用于在根据本发明的设备10.1-10.3中获得本发明中所要的功能性。本发明对数字变焦功能35的实现细节没有大的影响。实现细节取决于产品。
当在激活数字变焦功能35之后考虑本发明的基本思想时,根据数字变焦系数对由传感器和光学器件13,14产生的初始图像PIM进行裁切。由于裁切而导致输出图像OIM1-OIM3的分辨率变得更小是无关紧要的,这是因为无论如何通过插值或按比例放大措施不会引入额外的真实信息。特别是在移动通信设备中(比照MMS(多媒体信息服务)的100kB文件尺寸限制),由裁切图像插值成更大的图像(=更大的文件尺寸)是毫无意义的。利用裁切的图像,发送图像、图像的打开/处理等等会更快。为了发送和接收图像,设备10.1-10.3可以包括通信模块以在网络系统(未示出)中通信。如果因为某原因(例如涉及质量因子的实施例)而需要,则以后可以将图像插值到更大的分辨率。
在以上描述中已经说明了一些优势。在此,介绍一些真实的情形以及获得的优势,其可以出现在数码成像产品10.1-10.3的使用中。
例1:照片打印服务公司x利用254dpi打印分辨率(在编档时典型的)。用户想要利用他的4Mpix数码相机设备照相,并从这个照片服务x获得该照片的明信片尺寸(10×15(=4″×6″))的打印输出。现在,用户实际上需要~1Mpix的图像而不是4Mpix的图像,因为无论如何在打印之前在所述照片服务中所述图像尺寸将被按比例缩小到~1Mpix。具有明信片尺寸(10×15)的图像的准确尺寸为4×254×6×254=1548384pix,以及对于具有明信片尺寸(10×13)的图像的准确尺寸为4×254×4×254×4/3=996×1354=1375664pix。这些精确的尺寸被引证为在~1Mpix之上。例如,用户可以设定max_image_size为4Mpix并设定min_image_size为1548384pix或1375664pix,并能够正常地使用数码相机10.1。利用所述常规的方案将不会是明智的,其中裁切图像被插值回初始分辨率,然后在打印之前再次按比例缩小所述图像。来回的插值/按比例缩小使图像质量恶化。
从UI方便性的角度来说,还能够在用户界面UI中设定DPI值以及准备打印的照片拷贝的尺寸来替代以上计算的尺寸。在这种UI实现中,用户不需要确定以上所描述的准确的像素值。一般而言,所述设备还可以自己执行图像尺寸的设置而无需人为干预,这不依赖于以上或以下描述的实施例。为了这个目的,所述设备可以应用为其构建的知识。同样,如果用户在数码成像时知道他或她将要仅利用照片服务X来产生硬拷贝,则设定max_image_size=min_image_size是有用的。
例2:高级用户能够具有对数字变焦操作的更好的控制(插值的使用),并且同时,用户不需要知道比任何其他方案更多的关于数字变焦的任何信息。
例3:当用户想利用更加智能的数字变焦时(例如,像在现有技术解决方案中一样),他不需要降低目标分辨率,输出分辨率会在数字变焦系数大于×1时自动降低。
例4:非常大的数字变焦不会像一些现有技术解决方案中的情形一样,导致图像被裁切成非常小的图像,而用户可以例如根据所要的打印分辨率来设定分辨率的下限。
例5:JPEG质量因子与所述数字变焦系数(=裁切系数)相关联的事实提高了图像质量。
例6:裁切图像比插值图像更快地被处理/发送,特别是在移动通信设备中。随后用户能够在一些合适的工具(“媒体图库”)中通过利用例如双三次插值来按比例放大到裁切图像,其不受本发明的限制。
应当理解的是,以上说明和与其有关的附图仅意在说明本发明。因此,本发明并不仅受限于以上提出的实施例或在权利要求中所定义的那些,而是在所附权利要求定义的所述发明思想内的本发明的许多不同变型和修改,对于本领域专业人员将是显而易见的。
参考文献:
[1]:http://www.docs.sony.com/release/DSCF828revision.pdf,至少在2005年5月18日之前可以通过WEB下载;
[2]http://h10032.www.hp.com/ctg/Manual/bpy60657.pdf,至少在2005年5月18日之前可以通过WEB下载;
Claims (36)
1.一种具有数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的数码相机设备(10.1),所述设备(10.1)包括
-产生原始图像(PIM)的传感器(13)和光学器件(14),
-显示装置(11),在其中所述原始图像(PIM)被配置为将结合所述数字变焦功能(35)而被裁切,以便形成所述输出图像(OIM1-OIM3),
-用户界面装置(UI),其用于设定关于所述数字变焦功能(35)的一个或多个设置,以及
-图像处理器(12),其被配置为,基于至少在数字变焦范围的一部分内的所述原始图像(PIM)的裁切,提出用于所述输出图像(OIM1-OIM3)的尺寸,
其特征在于,在所述用户界面(UI)中,用于所述输出图像(OIM1-OIM3)的一个或多个尺寸限制被配置为将被设定为所述设置,并且所述图像处理器(12)被配置为,基于所述一个或多个尺寸限制以及已裁切的原始图像(PIM)的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像(PIM)执行按比例缩放操作。
2.根据权利要求1的数码相机设备(10.1),其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最小尺寸,所述图像处理器(12)被配置为如果所述已裁切的原始图像(PIM)的尺寸低于所述最小尺寸,则将所述已裁切的原始图像(PIM)按比例放大到所述最小尺寸。
3.根据权利要求1的数码相机设备(10.1),其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最大尺寸,所述图像处理器(12)被配置为如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸,则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
4.根据权利要求2的数码相机设备(10.1),其特征在于,所述尺寸限制进一步包括用于所述输出图像(OIM1-OIM3)的最大尺寸,所述图像处理器(12)被配置为如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸,则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
5.根据权利要求4的数码相机设备(10.1),其特征在于,所述尺寸限制进一步包括用于所述输出图像(OIM1-OIM3)的至少一个输出图像尺寸,所述图像处理器(12)被配置为如果所述已裁切的原始图像(PIM)的尺寸在所述最小尺寸和所述最大尺寸之间,则以既定的方式将所述已裁切的原始图像(PIM)按比例缩放到所述输出图像尺寸。
6.根据权利要求5的数码相机设备(10.1),其特征在于,在所设定的最小尺寸限制和所设定的最大尺寸限制之间的数字变焦范围被配置为将由所设定的输出图像尺寸限制进行量化,用于所述已裁切的原始图像(PIM)的尺寸被配置为基于所述量化以既定方式被设定。
7.根据权利要求1的数码相机设备(10.1),其特征在于,所述原始图像(PIM)的数据被配置将被用于确定成像设置。
8.一种具有数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的数码相机设备(10.2),所述设备(10.2)包括
-用于产生原始图像(PIM)的传感器(13)和光学器件(14),
-显示装置(11),在其中所述原始图像(PIM)被配置为将结合所述数字变焦功能(35)而被裁切,以便形成所述输出图像(OIM1-OIM3),以及
-图像处理器(12),其被配置为利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像,
其特征在于,所述质量因子与已裁切的原始图像(PIM)的尺寸相关联。
9.根据权利要求8的数码相机设备(10.2),其特征在于,通过利用如下的等式来计算所述质量因子:
qf_new=qf_old+({1.0-scale}*{max[96,qf_old]-qf_old}),
其中
scale=(crop_xsize/original_xsize)*(crop_ysize/original_ysize),
以及其中
qf_new=新的质量因子,
qf_old=旧的质量因子,
crop_xsize=水平方向的ROI尺寸,
crop_ysize=垂直方向的ROI尺寸,以及
original_xsize,original_ysize=由传感器(13)产生的原始图像(PIM)的尺寸。
10.一种具有数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的数码相机设备(10.3),所述设备(10.3)包括
-产生原始图像(PIM)的传感器(13)和光学器件(14),
-显示装置(11),在其中所述原始图像(PIM)被配置为将结合所述数字变焦功能(35)而被裁切,以便形成所述输出图像(OIM1-OIM3),
-用户界面装置(UI),其用于设定关于所述数字变焦功能(35)的一个或多个设置,以及
-图像处理器(12),其被配置为,基于所述原始图像(PIM)的裁切提出所述输出图像(OIM1-OIM3)的尺寸,并利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像,
其特征在于,在所述用户界面(UI)中,用于所述输出图像(OIM1-OIM3)的一个或多个尺寸限制被配置为将被设定为所述设置,并且所述图像处理器(12)被配置为,基于所述一个或多个尺寸限制以及已裁切的原始图像(PIM)的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分中对所述已裁切的原始图像(PIM)执行按比例缩放操作,并且所述质量因子与所述已裁切的原始图像(PIM)的尺寸相关联。
11.一种具有数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的数码相机设备(10.3),所述设备(10.3)包括
-产生原始图像(PIM)的传感器(13)和光学器件(14),
-显示装置(11),在其中所述原始图像(PIM)被配置为结合数码成像而被观察,
-用户界面装置(UI),其用于设定关于所述数字变焦功能(35)的一个或多个设置,以及
-图像处理器(12),其被配置为处理所述原始图像(PIM)以便形成所述输出图像(OIM1-OIM3),
其特征在于,在所述用户界面(UI)中,用于所述输出图像(OIM1-OIM3)的至少一个尺寸设置被配置为将被设定为所述设置,并且所述图像处理器(12)被配置为,作为所述处理执行对所述原始图像(PIM)的按比例缩放操作,以便产生具有所设定的尺寸设置的尺寸的输出图像(OIM1-OIM3)。
12.根据权利要求11的数码相机设备(10.3),其特征在于,所述尺寸设置为用于所述输出图像(OIM1-OIM3)的最小尺寸,所述图像处理器(12)被配置为如果所述原始图像(PIM)的尺寸低于所述最小尺寸,将所述原始图像(PIM)按比例放大到所述最小尺寸。
13.一种在数字变焦过程中用于形成输出图像(OIM1-OIM3)的方法,在所述方法中
-设定关于所述数字变焦过程的一个或多个设置,
-产生原始图像(PIM),
-结合所述数字变焦过程裁切所述原始图像(PIM),以便形成所述输出图像(OIM1-OIM3),
-基于至少在数字变焦范围的一部分内的所述原始图像(PIM)的裁切,提出用于所述输出图像(OIM1-OIM3)的尺寸,
其特征在于,为所述输出图像(OIM1-OIM3)设定一个或多个尺寸限制以作为所述设置,并且基于所述一个或多个尺寸限制以及已裁切的原始图像(PIM)的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像(PIM)执行按比例缩放操作。
14.根据权利要求13的方法,其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最小尺寸,如果所述已裁切的原始图像(PIM)的尺寸低于所述最小尺寸,则将所述已裁切的原始图像(PIM)按比例放大到所述最小尺寸。
15.根据权利要求13的方法,其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最大尺寸,如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸,则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
16.根据权利要求14的方法,其特征在于,所述尺寸限制进一步包括用于所述输出图像(OIM1-OIM3)的最大尺寸,如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸,则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
17.根据权利要求16的方法,其特征在于,所述尺寸限制进一步包括用于所述输出图像(OIM1-OIM3)的至少一个输出图像尺寸,如果所述已裁切的原始图像(PIM)的尺寸在所述最小尺寸和所述最大尺寸之间,则以既定的方式将所述已裁切的原始图像(PIM)按比例缩放到所述输出图像尺寸。
18.根据权利要求17的方法,其特征在于,在所设定的最小尺寸限制和所设定的最大尺寸限制之间的数字变焦范围被配置为由所设定的输出图像尺寸限制进行量化,用于所述原始图像(PIM)的尺寸是基于所述量化以既定方式被设定的。
19.根据权利要求13的方法,其特征在于,所述原始图像(PIM)的数据被用于确定成像设置。
20.一种在数字变焦过程中用于形成输出图像(OIM1-OIM3)的方法,在所述方法中
-产生原始图像(PIM),
-结合所述数字变焦过程来裁切所述原始图像(PIM),以便形成所述输出图像(OIM1-OIM3),
-利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像,
其特征在于,所述质量因子是基于已裁切的原始图像(PIM)的尺寸而计算的。
21.根据权利要求20的方法,其特征在于,通过利用如下的等式来计算所述质量因子:
qf_new=qf_old+({1.0-scale}*{max[96,qf_old]-qf_old}),
其中
scale=(crop_xsize/original_xsize)*(crop_ysize/original_ysize),
以及其中
qf_new=新的质量因子,
qf_old=旧的质量因子,
crop_xsize=水平方向的ROI尺寸,
crop_ysize=垂直方向的ROI尺寸,以及
original_xsize,original_ysize=由传感器(13)产生的原始图像(PIM)的尺寸。
22.一种在数字变焦过程中用于形成输出图像(OIM1-OIM3)的方法,在所述方法中,
-设定关于所述数字变焦过程的一个或多个设置,
-产生原始图像(PIM),
-结合所述数字变焦过程来裁切所述原始图像(PIM),以便形成所述输出图像(OIM1-OIM3),
-基于所述原始图像(PIM)的裁切来提出用于所述输出图像(OIM1-OIM3)的尺寸,以及
-利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像,
其特征在于,为所述输出图像(OIM1-OIM3)设定一个或多个尺寸限制以作为所述设置,并且基于所述一个或多个尺寸限制以及已裁切的原始图像(PIM)的尺寸,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对所述已裁切的原始图像(PIM)执行按比例缩放,并且所述质量因子是基于所述已裁切的原始图像(PIM)的尺寸而计算的。
23.一种在数字变焦过程中用于形成输出图像(OIM1-OIM3)的方法,在所述方法中
-设定关于所述数字变焦过程的一个或多个设置,
-产生原始图像(PIM),以及
-处理所述原始图像(PIM)以形成所述输出图像(OIM1-OIM3),
其特征在于,为所述输出图像(OIM1-OIM3)设定至少一个尺寸设置以作为所述设置,并且作为所述处理对所述原始图像(PIM)执行按比例缩放操作,以便产生具有所设定的尺寸设置的尺寸的输出图像(OIM1-OIM3)。
24.根据权利要求23的方法,其特征在于,所述尺寸设置为用于所述输出图像(OIM1-OIM3)的最小尺寸,如果所述原始图像(PIM)的尺寸低于所述最小尺寸,则将所述原始图像(PIM)按比例放大到所述最小尺寸。
25.一种用于在数码相机设备(10.1)中执行数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的程序产品(30.1),所述程序产品(30.1)包括存储装置(MEM)以及可由处理器(12)执行并被写入所述存储装置(MEM)的程序代码(31),所述程序代码(31)包括
-第一代码单元(31.1),其被配置为经由用户界面(UI)设定关于所述数字变焦功能(35)的一个或多个设置,
-第二代码单元(31.2),其被配置为结合所述数字变焦功能(35)在所述用户界面(UI)中对由成像装置(13,14)产生的原始图像(PIM)进行裁切,以便形成所述输出图像(OIM1-OIM3),以及
-第三代码单元(31.3),其被配置为,基于至少在数字变焦范围的一部分内的所述原始图像(PIM)的裁切,提出用于所述输出图像(OIM1-OIM3)的尺寸,
其特征在于所述程序代码(31)包括
-第四代码单元(31.4),其被配置为,在所述用户界面(UI)中为所述输出图像(OIM1-OIM3)设定一个或多个尺寸限制以作为所述设置,以及
-第五代码单元(31.5),其被配置为,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对已裁切的原始图像(PIM)执行按比例缩放操作,其中所述按比例缩放操作被配置为将以所述一个或多个尺寸限制以及所述已裁切的原始图像的尺寸(PIM)为基础。
26.根据权利要求25的程序产品(30.1),其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最小尺寸,并且所述程序代码(31)包括第六代码单元(31.6),其被配置为如果所述已裁切的原始图像(PIM)的尺寸低于所述最小尺寸则将所述已裁切的原始图像(PIM)按比例放大到所述最小尺寸。
27.根据权利要求25的程序产品(30.1),其特征在于,所述尺寸限制为用于所述输出图像(OIM1-OIM3)的最大尺寸,并且所述程序代码(31)包括第七代码单元(31.7),其被配置为如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
28.根据权利要求26的程序产品,其特征在于,所述尺寸限制进一步包括用于所述输出图像(OIM1-OIM3)的最大尺寸,并且所述所述程序代码(31.8)包括第八代码单元(31.8),其被配置为如果所述已裁切的原始图像(PIM)的尺寸超过所述最大尺寸则将所述已裁切的原始图像(PIM)按比例缩小到所述最大尺寸。
29.根据权利要求28的程序产品(30.1),其特征在于,所述尺寸限制进一步包括所述输出图像(OIM1-OIM3)的至少一个输出图像尺寸,并且所述程序代码(31.9)包括第九代码单元(31.9),其被配置为如果所述已裁切的原始图像(PIM)的尺寸在所述最小尺寸和所述最大尺寸之间则以既定的方式将所述已裁切的原始图像(PIM)按比例缩放到所述输出图像尺寸。
30.根据权利要求29的程序产品(30.1),其特征在于,所述程序代码(31)包括第九代码单元(31.9),其被配置为,由所设定的输出图像尺寸限制对在所设定的最小尺寸限制和所设定的最大尺寸限制之间的数字变焦范围进行量化,并且基于所述量化以既定的方式设定用于所述已裁切的原始图像(PIM)的尺寸。
31.根据权利要求25的程序产品(30.1),其特征在于,所述程序代码(31)包括第十代码单元(31.10),其被配置为利用所述原始图像(PIM)的数据来确定成像设置。
32.一种用于在数码相机设备中执行数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的程序产品(30.2),所述程序产品(30.2)包括存储装置(MEM)以及可由处理器(12)执行并被写入所述存储装置(MEM)的程序代码(32),所述程序代码(32)包括
-第一代码单元(32.1),其被配置为,结合所述数字变焦功能(35)在用户界面(UI)中对由成像装置(13,14)产生的原始图像(PIM)进行裁切,以便形成所述输出图像(OIM1-OIM3),以及
-第二代码单元(32.1),其被配置为利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像。
其特征在于,所述程序代码(32)包括
-第三代码单元(32.3),其被配置为基于已裁切的原始图像(PIM)的尺寸来确定将被使用的质量因子。
33.根据权利要求32的程序产品(30.2),其特征在于,所述程序代码(32)包括第四代码单元(32.4),其被配置为通过利用如下的等式来计算所述质量因子:
qf_new=qf_old+({1.0-scale}*{max[96,qf_old]-qf_old}),
其中
scale=(crop_xsize/original_xsize)*(crop_ysize/original_ysize),
以及其中
qf_neW=新的质量因子,
qf_old=旧的质量因子,
crop_xsize=水平方向的ROI尺寸,
crop_ysize=垂直方向的ROI尺寸,以及
original_xsize,original_ysize=由传感器(13)产生的原始图像(PIM)的尺寸。
34.一种用于在数码相机设备中执行数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的程序产品(30.1,30.2),所述程序产品(30.1,30.2)包括存储装置(MEM)以及可由处理器(12)执行并被写入所述存储装置(MEM)的程序代码(31-33),所述程序代码(31-33)包括
-第一代码单元(31.1),其被配置为经由用户界面(UI)设定关于所述数字变焦功能(35)的一个或多个设置,
-第二代码单元(31.2,32.1),其被配置为结合所述数字变焦功能(35)在所述用户界面(UI)中对由成像装置(13,14)产生的原始图像(PIM)进行裁切,以便形成所述输出图像(OIM1-OIM3),
第三代码单元(31.3),其被配置为,基于至少在数字变焦范围的一部分内的所述原始图像(PIM)的裁切,来提出用于所述输出图像(OIM1-OIM3)的尺寸,以及
-被配置为利用为所述输出图像(OIM1-OIM3)设定的质量因子来存储所述输出图像的代码单元(32.2),
其特征在于,所述程序代码(31-33)包括
-第四代码单元(31.4),其被配置为在所述用户界面(UI)中为所述输出图像(OIM1-OIM3)设定一个或多个尺寸限制以作为所述设置,
-第五代码单元(31.5),其被配置为,至少在由所述一个或多个尺寸限制定义的数字变焦范围的一部分内对已裁切的原始图像(PIM)执行按比例缩放操作,其中所述按比例缩放操作被配置为将以所述一个或多个尺寸限制以及所述已裁切的原始图像的尺寸(PIM)为基础,以及
-被配置为基于所述已裁切的原始图像(PIM)的尺寸来确定将被使用的质量因子的代码单元(32.3)。
35.一种用于在数码相机设备中执行数字变焦功能(35)以便形成输出图像(OIM1-OIM3)的程序产品(30.1,30.2),所述程序产品(30.1,30.2)包括存储装置(MEM)以及可由处理器(12)执行并被写入所述存储装置(MEM)的程序代码(31-33),所述程序代码(31-33)包括
-第一代码单元(31.1),其被配置为经由用户界面(UI)设定关于所述数字变焦功能(35)的一个或多个设置,
-第二代码单元,其被配置为,结合所述数字变焦功能(35)以在所述用户界面(UI)中观察由成像装置(13,14)产生的原始图像(PIM),以便形成所述输出图像(OIM1-OIM3),以及
-第三代码单元,其被配置为处理所述原始图像(PIM)以形成所述输出图像(OIM1-OIM3),
其特征在于,所述程序代码(33)包括
-第四代码单元(31.4),其被配置为在所述用户界面(UI)中为所述输出图像(OIM1-OIM3)设定至少一个尺寸限制以作为所述设置,以及
-第五代码单元(31.3),其被配置为,作为所述处理对所述已裁切的原始图像(PIM)执行按比例缩放操作,以便产生具有所设定的尺寸设置的尺寸的输出图像(OIM1-OIM3)。
36.根据权利要求35的程序产品(30.1,30.2),其特征在于,述尺寸限制为所述输出图像(OIM1-OIM3)的最小尺寸,并且所述程序代码(33)包括第六代码单元(31.6),其被配置为如果所述原始图像(PIM)的尺寸低于所述最小尺寸则将所述原始图像按比例放大到所述最小尺寸。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/169,220 US8106956B2 (en) | 2005-06-27 | 2005-06-27 | Digital camera devices and methods for implementing digital zoom in digital camera devices and corresponding program products |
US11/169,220 | 2005-06-27 | ||
PCT/FI2006/050249 WO2007000486A2 (en) | 2005-06-27 | 2006-06-12 | Digital camera devices and methods for implementing digital zoom in digital camera devices and corresponding program products |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110364852.5A Division CN102647563B (zh) | 2005-06-27 | 2006-06-12 | 数码相机设备和在数码相机设备中实现数字变焦的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101208947A true CN101208947A (zh) | 2008-06-25 |
CN101208947B CN101208947B (zh) | 2012-01-11 |
Family
ID=37566829
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2006800234046A Active CN101208947B (zh) | 2005-06-27 | 2006-06-12 | 数码相机设备和在数码相机设备中实现数字变焦的方法 |
CN201110364852.5A Active CN102647563B (zh) | 2005-06-27 | 2006-06-12 | 数码相机设备和在数码相机设备中实现数字变焦的方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110364852.5A Active CN102647563B (zh) | 2005-06-27 | 2006-06-12 | 数码相机设备和在数码相机设备中实现数字变焦的方法 |
Country Status (5)
Country | Link |
---|---|
US (2) | US8106956B2 (zh) |
EP (2) | EP2618559B1 (zh) |
JP (1) | JP4516149B2 (zh) |
CN (2) | CN101208947B (zh) |
WO (1) | WO2007000486A2 (zh) |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5055686B2 (ja) | 2004-05-13 | 2012-10-24 | ソニー株式会社 | 撮像システム、撮像装置、撮像方法 |
JP4624947B2 (ja) * | 2006-03-22 | 2011-02-02 | 富士フイルム株式会社 | 画像のトリミング方法および装置並びにプログラム |
WO2007126033A1 (en) * | 2006-04-25 | 2007-11-08 | Canon Kabushiki Kaisha | Image sensing apparatus and method for controlling the same |
US20080036864A1 (en) * | 2006-08-09 | 2008-02-14 | Mccubbrey David | System and method for capturing and transmitting image data streams |
US8708227B1 (en) * | 2006-10-31 | 2014-04-29 | United Services Automobile Association (Usaa) | Systems and methods for remote deposit of checks |
US9344548B2 (en) * | 2006-12-28 | 2016-05-17 | Blackberry Limited | Method for saving an image from a camera application of a portable electronic device |
US20090115872A1 (en) * | 2007-11-02 | 2009-05-07 | Research In Motion Limited | System and method for processing images captured using camera-equipped mobile devices |
US8498451B1 (en) | 2007-11-12 | 2013-07-30 | Google Inc. | Contact cropping from images |
US8477217B2 (en) * | 2008-06-30 | 2013-07-02 | Sony Corporation | Super-resolution digital zoom |
US9042678B2 (en) | 2009-01-19 | 2015-05-26 | Nokia Corporation | Method and apparatus for reducing size of image data |
JP2010279022A (ja) * | 2009-04-30 | 2010-12-09 | Sanyo Electric Co Ltd | 撮像装置 |
EP2529333A4 (en) | 2010-01-28 | 2013-10-23 | Pathway Innovations And Technologies Inc | DOCUMENT IMAGING SYSTEM WITH A CAMERA SCANNER DEVICE AND A PC-BASED PROCESSING SOFTWARE |
US8446484B2 (en) | 2010-04-21 | 2013-05-21 | Nokia Corporation | Image processing architecture with pre-scaler |
US20120002084A1 (en) * | 2010-06-30 | 2012-01-05 | True Vision Systems, Inc. | Systems, apparatus, and methods for digital image capture with variable density display and high resolution electronic zoom |
US20120236181A1 (en) | 2011-03-16 | 2012-09-20 | Qualcomm Incorporated | Generating a zoomed image |
KR101797040B1 (ko) * | 2011-11-28 | 2017-11-13 | 삼성전자주식회사 | 디지털 촬영 장치 및 이의 제어 방법 |
CN103780828A (zh) * | 2012-10-22 | 2014-05-07 | 联想(北京)有限公司 | 一种图像采集方法及电子设备 |
CN103281510A (zh) * | 2012-11-06 | 2013-09-04 | 王彤 | 将数码成像装置的数码图像传输至主机的方法 |
CN103200388A (zh) * | 2013-02-20 | 2013-07-10 | 北京佳讯飞鸿电气股份有限公司 | 一种实现快速多分屏视频轮巡的方法 |
US9646362B2 (en) * | 2013-09-18 | 2017-05-09 | Oracle International Corporation | Algorithm for improved zooming in data visualization components |
US9215377B2 (en) | 2013-12-04 | 2015-12-15 | Nokia Technologies Oy | Digital zoom with sensor mode change |
US9717417B2 (en) | 2014-10-29 | 2017-08-01 | Spectral Md, Inc. | Reflective mode multi-spectral time-resolved optical imaging methods and apparatuses for tissue classification |
EP3212057B1 (en) | 2014-10-29 | 2021-12-01 | Spectral MD, Inc. | Reflective mode multi-spectral time-resolved optical imaging methods and apparatuses for tissue classification |
US9445007B1 (en) | 2015-02-25 | 2016-09-13 | Qualcomm Incorporated | Digital zoom methods and systems |
KR20180018213A (ko) | 2016-08-12 | 2018-02-21 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
WO2018160963A1 (en) | 2017-03-02 | 2018-09-07 | Spectral Md, Inc. | Machine learning systems and techniques for multispectral amputation site analysis |
WO2018176000A1 (en) | 2017-03-23 | 2018-09-27 | DeepScale, Inc. | Data synthesis for autonomous control systems |
US11409692B2 (en) | 2017-07-24 | 2022-08-09 | Tesla, Inc. | Vector computational unit |
US10671349B2 (en) | 2017-07-24 | 2020-06-02 | Tesla, Inc. | Accelerated mathematical engine |
US11157441B2 (en) | 2017-07-24 | 2021-10-26 | Tesla, Inc. | Computational array microprocessor system using non-consecutive data formatting |
US11893393B2 (en) | 2017-07-24 | 2024-02-06 | Tesla, Inc. | Computational array microprocessor system with hardware arbiter managing memory requests |
CN108174160A (zh) * | 2018-01-04 | 2018-06-15 | 上海电气集团股份有限公司 | 一种监控视频的多分屏轮巡方法 |
US11561791B2 (en) | 2018-02-01 | 2023-01-24 | Tesla, Inc. | Vector computational unit receiving data elements in parallel from a last row of a computational array |
CN108322672B (zh) * | 2018-02-02 | 2020-12-22 | 海信视像科技股份有限公司 | 图像处理方法及装置 |
US11030752B1 (en) | 2018-04-27 | 2021-06-08 | United Services Automobile Association (Usaa) | System, computing device, and method for document detection |
CN108921784B (zh) * | 2018-06-13 | 2023-08-29 | 杭州吉吉知识产权运营有限公司 | 一种基于移动终端的图片压缩方法及系统 |
US11215999B2 (en) | 2018-06-20 | 2022-01-04 | Tesla, Inc. | Data pipeline and deep learning system for autonomous driving |
US11636333B2 (en) | 2018-07-26 | 2023-04-25 | Tesla, Inc. | Optimizing neural network structures for embedded systems |
US11562231B2 (en) | 2018-09-03 | 2023-01-24 | Tesla, Inc. | Neural networks for embedded devices |
SG11202103493QA (en) | 2018-10-11 | 2021-05-28 | Tesla Inc | Systems and methods for training machine models with augmented data |
US11196678B2 (en) | 2018-10-25 | 2021-12-07 | Tesla, Inc. | QOS manager for system on a chip communications |
US11816585B2 (en) | 2018-12-03 | 2023-11-14 | Tesla, Inc. | Machine learning models operating at different frequencies for autonomous vehicles |
US11537811B2 (en) | 2018-12-04 | 2022-12-27 | Tesla, Inc. | Enhanced object detection for autonomous vehicles based on field view |
JP7261883B2 (ja) | 2018-12-14 | 2023-04-20 | スペクトラル エムディー,インコーポレイテッド | 創傷の評価、治癒予測および治療のための機械学習システム |
US10783632B2 (en) | 2018-12-14 | 2020-09-22 | Spectral Md, Inc. | Machine learning systems and method for assessment, healing prediction, and treatment of wounds |
KR20210099126A (ko) | 2018-12-14 | 2021-08-11 | 스펙트랄 엠디, 인크. | 고정밀도 다중-애퍼쳐 스펙트럼 이미징을 위한 시스템 및 방법 |
US10740884B2 (en) | 2018-12-14 | 2020-08-11 | Spectral Md, Inc. | System and method for high precision multi-aperture spectral imaging |
US11610117B2 (en) | 2018-12-27 | 2023-03-21 | Tesla, Inc. | System and method for adapting a neural network model on a hardware platform |
US10997461B2 (en) | 2019-02-01 | 2021-05-04 | Tesla, Inc. | Generating ground truth for machine learning from time series elements |
US11150664B2 (en) | 2019-02-01 | 2021-10-19 | Tesla, Inc. | Predicting three-dimensional features for autonomous driving |
US11567514B2 (en) | 2019-02-11 | 2023-01-31 | Tesla, Inc. | Autonomous and user controlled vehicle summon to a target |
US10956755B2 (en) | 2019-02-19 | 2021-03-23 | Tesla, Inc. | Estimating object properties using visual image data |
CN111050066A (zh) * | 2019-11-01 | 2020-04-21 | 深圳市道通智能航空技术有限公司 | 变焦方法、装置、飞行器、飞行系统及存储介质 |
US11900755B1 (en) | 2020-11-30 | 2024-02-13 | United Services Automobile Association (Usaa) | System, computing device, and method for document detection and deposit processing |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5172234A (en) * | 1987-08-04 | 1992-12-15 | Canon Kabushiki Kaisha | Camera having an electronic zooming display feature |
US5249053A (en) | 1991-02-05 | 1993-09-28 | Dycam Inc. | Filmless digital camera with selective image compression |
US5402171A (en) * | 1992-09-11 | 1995-03-28 | Kabushiki Kaisha Toshiba | Electronic still camera with improved picture resolution by image shifting in a parallelogram arrangement |
US5477264A (en) * | 1994-03-29 | 1995-12-19 | Eastman Kodak Company | Electronic imaging system using a removable software-enhanced storage device |
US6650366B2 (en) * | 1998-03-26 | 2003-11-18 | Eastman Kodak Company | Digital photography system using direct input to output pixel mapping and resizing |
JP2000115605A (ja) | 1998-10-07 | 2000-04-21 | Olympus Optical Co Ltd | ディジタルカメラ |
US6920250B1 (en) * | 1999-03-04 | 2005-07-19 | Xerox Corporation | Additive model for efficient representation of digital documents |
US7019778B1 (en) * | 1999-06-02 | 2006-03-28 | Eastman Kodak Company | Customizing a digital camera |
JP4515559B2 (ja) * | 1999-08-24 | 2010-08-04 | 富士フイルム株式会社 | 画像データ記録装置および方法ならびにズーム画像再生装置および方法 |
US6650368B1 (en) | 1999-10-26 | 2003-11-18 | Hewlett-Packard Development Company, Lp. | Digital camera and method of enhancing zoom effects |
JP2001167265A (ja) * | 1999-12-07 | 2001-06-22 | Seiko Epson Corp | 画像処理プログラムを記録した媒体、画像処理装置および画像処理方法 |
GB2365515A (en) * | 2000-08-08 | 2002-02-20 | Andrew Mcfadzean Hershaw | An auxiliary lighting system for vehicles |
US6507704B2 (en) * | 2000-10-06 | 2003-01-14 | Fuji Photo Film Co., Ltd. | Pseudo-zoom camera and image processing system using the pseudo-zoom camera |
JP3913491B2 (ja) * | 2001-04-20 | 2007-05-09 | 三洋電機株式会社 | ディジタルズーム装置 |
JP4046957B2 (ja) * | 2001-07-05 | 2008-02-13 | キヤノン株式会社 | 撮像装置及びその制御方法、情報処理装置及び方法、並びに記憶媒体 |
US7345774B2 (en) * | 2001-10-26 | 2008-03-18 | Hewlett-Packard Development Company, L.P. | Apparatus and method for adapting image sensor aspect ratio to print aspect ratio in a digital image capture appliance |
US7098949B2 (en) | 2002-07-29 | 2006-08-29 | Hewlett-Packard Development Company, L.P. | Apparatus and method for improved-resolution digital zoom in a portable electronic imaging device |
JP4008778B2 (ja) * | 2002-07-31 | 2007-11-14 | 株式会社リコー | 撮像装置 |
US7116364B2 (en) | 2002-10-29 | 2006-10-03 | Hewlett-Packard Development Company, L.P. | Method and apparatus for maintaining a consistent effective focal length in a digital camera |
KR100503037B1 (ko) * | 2002-11-01 | 2005-07-21 | 삼성테크윈 주식회사 | 디지털 카메라와 그의 영상정보 저장방법 |
CN100431341C (zh) * | 2003-01-29 | 2008-11-05 | 奥林巴斯株式会社 | 图像感测装置 |
US7308158B2 (en) | 2003-06-20 | 2007-12-11 | Eastman Kodak Company | Imaging method and system |
US7920180B2 (en) * | 2004-04-06 | 2011-04-05 | Hewlett-Packard Development Company, L.P. | Imaging device with burst zoom mode |
US7787026B1 (en) * | 2004-04-28 | 2010-08-31 | Media Tek Singapore Pte Ltd. | Continuous burst mode digital camera |
US7688364B2 (en) * | 2004-12-10 | 2010-03-30 | Ambarella, Inc. | Decimating and cropping based zoom factor for a digital camera |
US20060221198A1 (en) * | 2005-03-31 | 2006-10-05 | Jared Fry | User established variable image sizes for a digital image capture device |
-
2005
- 2005-06-27 US US11/169,220 patent/US8106956B2/en active Active
-
2006
- 2006-06-12 CN CN2006800234046A patent/CN101208947B/zh active Active
- 2006-06-12 JP JP2008518879A patent/JP4516149B2/ja active Active
- 2006-06-12 CN CN201110364852.5A patent/CN102647563B/zh active Active
- 2006-06-12 WO PCT/FI2006/050249 patent/WO2007000486A2/en not_active Application Discontinuation
- 2006-06-12 EP EP13163885.0A patent/EP2618559B1/en not_active Not-in-force
- 2006-06-12 EP EP06755411.3A patent/EP1897363B1/en active Active
-
2012
- 2012-01-30 US US13/361,058 patent/US8605172B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
WO2007000486A2 (en) | 2007-01-04 |
US20060290792A1 (en) | 2006-12-28 |
WO2007000486A3 (en) | 2007-02-15 |
CN102647563A (zh) | 2012-08-22 |
JP4516149B2 (ja) | 2010-08-04 |
EP2618559A2 (en) | 2013-07-24 |
US20120194708A1 (en) | 2012-08-02 |
US8106956B2 (en) | 2012-01-31 |
EP2618559B1 (en) | 2017-08-23 |
EP1897363A4 (en) | 2011-03-09 |
CN101208947B (zh) | 2012-01-11 |
US8605172B2 (en) | 2013-12-10 |
EP1897363B1 (en) | 2015-06-10 |
CN102647563B (zh) | 2015-05-27 |
EP1897363A2 (en) | 2008-03-12 |
EP2618559A3 (en) | 2014-01-22 |
JP2008547341A (ja) | 2008-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101208947B (zh) | 数码相机设备和在数码相机设备中实现数字变焦的方法 | |
JP5395678B2 (ja) | 距離マップ生成型マルチレンズカメラ | |
TWI268096B (en) | Image processing apparatus for correcting distortion of image, image shooting apparatus for correcting distortion of shot image and recordable medium | |
JP4546565B2 (ja) | デジタル画像処理 | |
US20090017795A1 (en) | Method for enhancing services concerning multimedia data in mobile telephony | |
EP2030433B1 (de) | Verfahren und anordnung zur behandlung von datensätzen bildgebender sensoren sowie ein entsprechendes computerprogramm und ein entsprechendes computerlesbares speichermedium | |
US7583308B2 (en) | Image capturing apparatus | |
US20060066913A1 (en) | Printing method and printing system | |
EP2230833A1 (en) | Camera having image correction function, apparatus and image correction method | |
JP2004208317A (ja) | 画像メタデータの処理システム及び方法、並びにコンピュータプログラム製品 | |
CN101160958A (zh) | 用户为数字图像捕获设备建立的可变图像尺寸 | |
WO2008041522A1 (fr) | Dispositif de traitement d'image, programme de traitement d'image, procédé de production d'image et support d'enregistrement | |
US20050012829A1 (en) | Resolution selector for image capturing system | |
EP1107610A1 (en) | Compression encoding method, recorded medium on which compression encoding program is recorded, and imaging device | |
WO2014184427A1 (en) | Method and apparatus for digital image capture | |
JP2003060980A (ja) | 画像処理システム | |
CA2631234C (en) | System and method for resizing images prior to upload | |
US20040042681A1 (en) | Image processing method, image processing apparatus, image recording apparatus, program, and recording medium | |
CN111083359A (zh) | 图像处理方法及其装置、电子设备和计算机可读存储介质 | |
JP4709071B2 (ja) | 撮像システム及び装置、撮像装置の制御方法 | |
JP2001292449A (ja) | 画像処理装置、画像処理方法、及び記録媒体 | |
US20030011791A1 (en) | Method for image data print control, electronic camera and camera system | |
JP6976734B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2004228991A (ja) | デジタルカメラ | |
CN115472140A (zh) | 显示方法、显示装置、电子设备和可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20160127 Address after: Espoo, Finland Patentee after: Technology Co., Ltd. of Nokia Address before: Espoo, Finland Patentee before: Nokia Oyj |