CN103858421B - 影像处理装置以及影像处理方法 - Google Patents

影像处理装置以及影像处理方法 Download PDF

Info

Publication number
CN103858421B
CN103858421B CN201280050426.7A CN201280050426A CN103858421B CN 103858421 B CN103858421 B CN 103858421B CN 201280050426 A CN201280050426 A CN 201280050426A CN 103858421 B CN103858421 B CN 103858421B
Authority
CN
China
Prior art keywords
condition
image
aforementioned
field
contained
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280050426.7A
Other languages
English (en)
Other versions
CN103858421A (zh
Inventor
近藤哲二郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
I<sup>3</sup>
Original Assignee
I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd filed Critical I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
Publication of CN103858421A publication Critical patent/CN103858421A/zh
Application granted granted Critical
Publication of CN103858421B publication Critical patent/CN103858421B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/10Selection of transformation methods according to the characteristics of the input images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20012Locally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20228Disparity calculation for image-based rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Picture Signal Circuits (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明解决现有技术会有输出已失去整体平衡的影像的问题,其解决手段为藉由一种影像处理装置,使保持有整体平衡的影像可以输出。该影像处理装置具备:拘束条件储存部,其可储存一个以上拘束条件,该拘束条件适用于要输出的影像的条件,且为要从被拍摄体取得的条件;受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;影像变更部,对于受理部受理的影像所具有的一个以上图场,应用前述一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;及影像输出部,输出影像变更部所取得的一个以上图场。

Description

影像处理装置以及影像处理方法
技术领域
本发明关于一种处理影像的影像处理装置等。
背景技术
现有技术中,已有一种数字影像讯号的内插装置,其用于藉由实存输入影像数据来内插产生与实存输入影像数据相对应的像素间的预定像素影像数据,以由下列要素构成为特征:接受实存的输入影像数据,而将存在于预定像素的周边位置的预定数个实存像素数据予以抽出的装置;使用用以求取系数的像素数据,以内插值和真值的误差的平方和达到最小的方式利用最小平方法所预先决定的预定数个系数;以及藉由与所抽出的上述预定数个实存像素数据进行线形一次结合,来内插产生预定像素的像素数据的装置(参照专利文献1)。
此外,也有从第一个数字视频讯号产生像素数多于上述第一个数字视频讯号的第二数字视频讯号的数字视频讯号变换装置(参照专利文献2)
另一方面,近年来,电视接收机等方面也正在进行大画面化。而且,近年来,画面的多任务化(存在有框的多个画面合而为一个画面的技术)、高亮度化也正在进行。
先前技术文献
专利文献
专利文献1:日本特许第2825482号公报(第1页、第1图等)
专利文献2:日本特许第3072306号公报(第1页、第1图等)
发明内容
发明所欲解决的技术问题
然而,现有技术的影像处理装置中,会有已失去整体平衡的影像被输出的情形。
而且,大画面中,视听者必须用眼睛跟追画面内的对象,例如,在真正存在于后面的对象却亮度较大,真正存在于前面的对象却亮度较小而失去整体平衡的影像被输出的情形中,视听者会感觉不到远近感或纵深感。此外,在大画面中,例如,对象的亮度分布不自然而失去整体平衡的情形中,对视听者而言,会变得难以辨认对象的厚度。并且,在大画面中,例如,非刚体性对象一边从相对于视听者的前面变形到后面而一边移动的情形中,画面中后面的亮度比前面的亮度大而失去平衡时,视听者会有难以辨认非刚体性变形的问题。还有,例如映照呈现有数朵向日葵的大画面中,前面的向日葵分辨率感较低、后面的向日葵分辨率感较高时,对视听者而言,有无法掌握远近感的问题。
这些具体例是在利用大画面输出和自然法则不一致的影像,亦即失去平衡的影像时所发生的问题。
解决技术问题所用的手段
本申请案第一发明的影像处理装置具备:拘束条件储存部,可储存一个以上拘束条件,而该拘束条件为要应用在要输出的影像的条件,且为要从被拍摄体取得的条件;受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;影像变更部,对受理部受理的影像所具有的一个以上图场,应用一个以上拘束条件,使其变更为与一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出影像变更部所取得的一个以上图场。
依此种构成,即可输出保持有整体平衡的影像。
再者,本申请案第二发明的影像处理装置中,相对于第一发明,还具备从受理部受理的影像所具有的一个以上图场取得一个以上拘束条件的拘束条件取得部,而拘束条件储存部的一个以上拘束条件为拘束条件取得部所取得的一个以上拘束条件。
依此种构成,可以动态地取得适于要输出的影像的拘束条件,应用该取得的拘束条件,而可输出保持有整体平衡的影像。
此外,本申请案第三发明的影像处理装置中,相对于第一或第二发明,拘束条件储存部储存有2组以上由拘束条件、与为有关图场内对象的特征量的条件特征量条件所组成的配组;而影像变更部则具备:特征量取得装置,从受理部受理的影像所具有的一个以上图场取得预先决定的一个以上特征量;拘束条件取得装置,决定与一个以上特征量一致的一个以上特征量条件,而从前述拘束条件储存部取得与一个以上各特征量条件形成配组的一个以上拘束条件;以及影像取得装置,对受理部受理的影像所具有的一个以上图场,应用拘束条件取得装置所取得的一个以上拘束条件,使其变更为和一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。
依此种构成,可以动态地选择适于要输出的影像的拘束条件,将该选择的拘束条件应用于影像,即可输出保持有整体平衡的影像。
发明的效果
若依本发明的影像处理装置,可输出保持有整体平衡的影像。
附图说明
图1为实施形态1的影像处理装置的方块图;
图2为说明有关影像处理装置的动作的流程图;
图3为实施形态2的影像处理装置的方块图;
图4为显示拘束条件的影像的图;
图5为显示图场的具体例图;
图6为显示图场的具体例图;
图7为说明有关影像处理装置的动作的流程图;
图8为说明有关拘束条件取得处理的流程图;
图9为实施形态3的影像处理装置的方块图;
图10为说明有关影像处理装置的动作的流程图;
图11为说明有关拘束条件选择处理的流程图;
图12为实施形态4的影像处理装置4的方块图;
图13为说明有关影像处理装置4的动作的流程图;
图14为实施形态5的影像处理装置5的方块图;
图15为说明有关影像处理装置5的动作的流程图;
图16为说明有关拘束条件选择处理的流程图;
图17为实施形态的计算机系统的概观图;以及
图18为计算机系统的方块图。
具体实施方式
以下参照附图说明有关本发明影像处理装置等的实施形态。此外,实施形态中,由于标注相同符号的构成要素执行同样的动作,故有省略再次重复说明的情形。
(实施形态1)
本实施形态中,说明影像处理装置1,其对拍摄被拍摄体所得的一个以上各影像(输入影像),应用要从被拍摄体取得的一个以上拘束条件,以符合拘束条件的方式处理所输入的输入影像,而取得输出影像。
图1为本实施形态的影像处理装置1的方块图。影像处理装置1为例如电视接收机、DVD播放机等。
影像处理装置1具备:拘束条件储存部11、受理部12、影像变更部13、及影像输出部14。
拘束条件储存部11可储存一个以上拘束条件。所谓拘束条件,是指要应用于要输出的影像的条件,且为要从被拍摄体取得的条件。拘束条件为使影像和自然法则一致的条件。具体而言,拘束条件为例如保证从视听者观看,前面画面区域的亮度较大,后面画面区域的亮度较小的条件。再者,拘束条件为例如保证从视听者观看,前面对象的分辨率感较高、后面对象的分辨率感较低的条件。而且,所谓分辨率感,为极细致的影像感、或美丽的影像感、或高质量的影像感、或噪声少的影像感、或接近自然的影像感等。
分辨率感可以藉由例如进行频率分析来判定。具体而言,例如,对影像或影像的一部分(后述的时空区块等)进行频率分析,且可以判定为高频成分多分辨率感就高、低频成分的比例多分辨率感就低。更具体而言,可以按照第一阈值以上的高频成分比例,将分辨率感做定量性(例如,1到5的5个阶段)决定。亦即,阈值以上的高频成分比例越大的,就设为越高分辨率感。并且,也可进行频率分析,取得频率分布,而按照频率分布,将分辨率感作定量性决定。此外,在此种情况下,通常判定为高频成分越多,分辨率感越高,低频成分的比例越多,分辨率感越低。
还有,分辨率感可用例如空间的像素值的活性值(称为空间性活性值)来判定。具体而言,例如,可以判定为空间性活性值在第一阈值以上的像素比例越多,分辨率感就越高。而且,空间活性值可以按照第一阈值以上的像素比例,将分辨率感作定量性(例如,1到5的5个阶段)决定。
其它方面,如分辨率感的判定或分辨率感的取得方法则非所问。
此外,拘束条件为例如以图场所具有的像素的像素值作为参数的条件。再者,拘束条件为例如以像素值的时间性活性值作为参数的条件,而该像素值的时间性活性值指时间上连续的两个以上图场所具有的像素的像素值变化量。并且,拘束条件为例如以像素值空间性活性值作为参数的条件,而该像素值空间性活性值指一个图场所具有的两个以上像素的像素值差异。更具体而言,拘束条件为例如保证像素值的时间性活性值在一定的预先决定范围(亦得为可根据时间t的函数来界定的范围)的条件。此外,具体而言,拘束条件为例如保证像素值的空间性活性值在一定的预定范围(亦得为可根据从基准点起算的距离x的函数来界定的范围)的条件。
还有,拘束条件为例如以图场内对象的分辨率感作为参数的条件。此外,拘束条件为例如以分辨率感的时间性活性值作为参数的条件,而该分辨率感的时间性活性值指时间上相连续的两个以上图场内对象的分辨率变化量。再者,拘束条件为例如以分辨率感的空间性活性值作为参数的条件,而该分辨率感的空间性活性值是指一个图场所具有的两个以上对象的分辨率感差异。更具体而言,拘束条件为例如保证分辨率感的时间性活性值在一定的预定范围(亦得为可根据时间t的函数来界定的范围)的条件。而且,具体而言,拘束条件为例如保证分辨率感的空间性活性值在一定的预定范围(亦得为可根据从基准点起算的距离x的函数来界定的范围)的条件。
此外,影像可为动画,亦可为静态画。影像为动画时,影像具有两个以上图场。其中,一个图场是指一个画面,也可称为一个图框。
拘束条件储存部11虽以非挥发性记录媒体较合适,但亦可用挥发性记录媒体来实现。拘束条件储存在拘束条件储存部11的过程则非所问(不拘)。例如,拘束条件亦可通过记录媒体储存在拘束条件储存部11,也可形成使通过通讯线路等发送的拘束条件储存在拘束条件储存部11的形态,亦可形成使通过输入装置输入的拘束条件储存在拘束条件储存部11的形态。
受理部12受理具有对被拍摄体进行拍摄所得的一个以上图场的影像。所谓受理,通常指从播送装置发送的影像的接收。但,所谓受理,包含从鼠标、触控板等输入装置输入的信息的受理、通过有线或者无线通讯线路发送的信息的接收、从光盘或磁盘、半导体内存等记录媒体所读取的信息的受理等概念。受理部12可由例如播送接收装置、或有线或无线通讯装置来实现。
影像变更部13对受理部12受理的影像所具有的一个以上图场,应用一个以上拘束条件,使其变更为和一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。在此处,所谓应用拘束条件,可为对一个图场整体的应用,也可为对两个以上图场整体的应用。
再者,拘束条件的应用可为将一个或多个图场依空间性、或时间性、或空间性及时间性分割为两个以上,再应用于该分割所得的影像(亦称为时空区块)的方式。在这种情形中,影像变更部13将受理部12所受理的影像分割为两个以上时空区块。接着,影像变更部13会对所取得的多个时空区块,应用一个以上拘束条件,使其变更为与一个以上拘束条件一致的时空区块,而取得新的多个时空区块。然后,影像变更部13会将新的多个时空区块结合,而取得要输出的影像。此外,时空区块不限为矩形的连续区域。时空区块亦可为非矩形且不连续的影像的区域。而且,时空区块亦可为例如将一个画面(一个图场或一个图框)分割为四个的数据,也可为将n个画面(n为2以上的整数)分割为8个的数据。其中,分割的数目并非所问。并且,时空区块也可为一个像素。
此外,例如,拘束条件为具有亮度阈值的条件时,在存在有亮度超过前述阈值的像素之际,影像变更部13会进行将该像素的亮度值调低的处理。同时,在存在有亮度低于前述阈值的像素之际,影像变更部13会进行将该像素的亮度值调高的处理。
再者,例如,拘束条件为具有分辨率阈值的条件时,影像变更部13会以分辨率符合拘束条件的方式对该像素及其周边施行过滤处理。
影像变更部13通常可由MPU或内存等来实现。影像变更部13的处理程序通常以软件来实现,该软件则储存于ROM等记录媒体。但,也可用硬件(专用电路)来实现。
影像输出部14将影像变更部13所取得的一个以上图场输出。在此处,所谓输出,通常指显示到显示器或使用投影机进行投影。但,所谓输出,包含使用打印机打印、向外部装置(通常为显示器装置)传送、储存到记录媒体、将处理结果传递到其它处理装置或其它程序等概念。
影像输出部14可看成包含显示器等输出装置,也可看成不包含。影像输出部14可由输出装置驱动器软件、或输出装置的驱动器软件与输出装置等来实现。
接着,使用图2的流程图来说明有关影像处理装置1的动作。
(步骤S201)受理部12判断是否受理影像。若受理影像,则进到步骤S202;若不受理影像,则返回到步骤S201。此处的影像具有一个或两个以上图场。
(步骤S202)影像变更部13将储存于拘束条件储存部11的一个以上拘束条件读取。
(步骤S203)影像变更部13从步骤S201受理的影像取得一个以上处理对象。所谓处理对象,为影像处理的对象。其中,在此处,通常影像变更部13将步骤S201所受理的影像依空间性、或时间性、或空间性及时间性进行分割,而取得两个以上处理对象(即上述的时空区块)。但,影像变更部13亦可不将步骤S201所受理的影像分割,而直接将该影像作为处理对象。在此处,将具有一个以上图场的影像进行分割的技术为公知技术,其详细说明容予省略。而且,分割所得的两个以上处理对象亦可重叠。
(步骤S204)影像变更部13将1代入计数器i。
(步骤S205)影像变更部13判断第i个处理对象是否存在。若第i个处理对象存在,则进到步骤S206;若不存在,则到步骤S212。
(步骤S206)影像变更部13将1代入计数器j。
(步骤S207)影像变更部13判断第j个拘束条件是否存在。若第j个拘束条件存在,则进到步骤S208;若不存在,则到步骤S211。
(步骤S208)影像变更部13判断第i个处理对象是否与第j个拘束条件一致。若和第j个拘束条件不一致,则进到步骤S209;若一致,则到步骤S210。此外,经判断为和拘束条件一致的处理对象直接补注于缓冲器。
(步骤S209)影像变更部13将第i个处理对象修正成与第j个拘束条件一致。然后,影像变更部13将修正后的影像补注到缓冲器。
(步骤S210)影像变更部13将计数器j递增1。返回到步骤S207。
(步骤S211)影像变更部13将计数器i递增1。回到步骤205。
(步骤S212)影像变更部13从缓冲器中的处理对象来构成影像。
(步骤S213)影像输出部14将以步骤S212构成所得的新影像输出。回到步骤S201。
此外,图2的流程图中,藉由电源断开或处理结束的插入,处理即告结束。
如以上所述,若依本实施形态,可以输出保持有画面整体或影像整体平衡的影像。更具体而言,若依本实施形态,可以输出符合于使影像和自然法则一致的拘束条件的影像,视听者可以感觉到影像本来应具有的远近感、纵深感等。
再者,本实施形态的处理,亦可用软件来实现。而且,也可利用软件下载等来分布配置该软件。此外,也可将该软件储存在CD-ROM等记录媒体来分布配置。这种作法亦适用于本说明书中其它实施形态。同时,实现本实施形态的影像处理装置的软件为如下的程序。亦即,该程序为在记录媒体储存有为应用在输出的影像的条件,且为从被拍摄体取得的条件的一个以上拘束条件,藉以使计算机作为下列各部单元以发挥功能的程序:受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;影像变更部,对前述受理部受理的影像所具有的一个以上图场,应用前述一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出前述影像变更部所取得的一个以上图场。
(实施形态2)
本实施形态中,就从所输入的影像动态地取得适于要输出的影像的拘束条件,将该取得的拘束条件应用于所输入的影像,而获得保持有整体平衡的输出影像的影像处理装置2加以说明。亦即,本实施形态中,相较于实施形态1,在从输入影像动态地取得适于所受理的输入影像的拘束条件方面有所不同。
图3为本实施形态的影像处理装置2的方块图。
影像处理装置2具备:拘束条件储存部11、受理部12、拘束条件取得部21、影像变更部13、以及影像输出部14。
拘束条件取得部21从受理部12受理的影像所具有的一个以上图场取得一个以上拘束条件。换言之,拘束条件取得部21从受理部12所受理的影像取得要应用于该影像的一个以上拘束条件。
具体而言,例如,拘束条件取得部21会从受理部12受理的影像所具有的一个以上图场取得为预定的一种以上特征量,且为依每个种类取得一个以上特征量。再者,拘束条件取得部21按每个种类,使用对应该种类的一个以上特征量,来取得拘束条件。
更具体而言,例如,拘束条件取得部21会取得受理部12受理的影像所具有的一个图场的全部像素的像素值。然后,拘束条件取得部21会对图场的各像素的像素值空间分布,使用最小平方法等进行回归分析,而获得回归曲面。接着,拘束条件取得部21会以各像素的像素值落到由回归曲面所预定的阈值以内范围的方式,将像素值变更为阈值而取得拘束条件,该像素值为超过由回归曲面所预定的阈值的程度而与回归曲面的像素值有差异。藉由这种拘束条件,可界定各像素的像素值的存在区域。
再者,例如,拘束条件取得部21会对图场的各像素,制作以显示从作为基准的像素(例如为坐标值(0,0)的像素,最左上部的像素)起算的相对位置的信息(距离或顺序等)与像素值(L)为轴的二维以上曲线,而使用最小平方法等将该曲线进行回归分析,而取得回归曲线或回归曲面。此外,拘束条件取得部21亦可制作例如位置(x,y)和像素值(L)的3维曲线、时空位置(x,y,t)和像素值(L)的4维曲线,使用最小平方法等将该曲线进行回归分析,而取得回归曲面。
接着,拘束条件取得部21会以各像素的像素值落到由回归曲线或回归曲面所预定的阈值以内范围的方式,将像素值变更为阈值而取得拘束条件,该像素值为超过由回归曲线或回归曲面所预定的阈值,这种拘束条件的影像图显示于图4。图4中,41为拘束条件取得部21所取得的2维曲线。42为对41的曲线进行回归分析所得的回归曲线。431和432显示拘束条件。亦即,431为从回归曲线上的各点朝预定阈值大小的正方向具有距离的曲线,为像素值的最大值曲线。432为从回归曲线上的各点朝预定阈值大小的负方向具有距离的曲线,为像素值的最小值曲线。
还有,在此处,图场的具体例显示于图5。影像所具有的一个图场如图5所示拍摄雪景的影像。拘束条件取得部21取得例如图5影像的各像素亮度。接着,拘束条件取得部21对以各像素的坐标值和像素的亮度为轴的空间分布,使用最小平方法等进行回归分析,而获得回归曲面。然后,拘束条件取得部21会以各像素的亮度落到由回归曲面所预定的阈值以内范围的方式,将亮度变更为阈值而取得拘束条件,该亮度为超过预定阈值。这种拘束条件,即成为对于视听者而言具有越前面的像素的亮度越大,而越后面亮度越小的倾向的拘束条件。应用这种拘束条件的输出影像,可以使视听者感觉到雪景的开阔感或冬天的凝重空气感,对视听者而言为容易观看的影像。亦即,这种输出影像为可看成前面区域的明亮区域和可看成后面区域的阴暗区域已取得平衡的影像。
而且,具体而言,例如,拘束条件取得部21取得受理部12受理的影像所具有的一个图场中的两个以上各对象(对象亦可为时空区块)的分辨率感。亦即,拘束条件取得部21会辨识一个图场的两个以上对象,而取得各对象的重心的坐标值和分辨率感。其次,拘束条件取得部21会对以各对象重心的坐标值和分辨率感为轴的空间分布,使用最小平方法等,进行回归分析,而获得回归曲面。接着,拘束条件取得部21以各对象的分辨率感落到由回归曲面所预定的阈值以内的范围的方式,将分辨率感变更为阈值而取得拘束条件,该分辨率感为超过所预定的阈值。藉由这种拘束条件,可以界定各对象的分辨率感的存在区域。而在此处,图场的具体例显示于图6。影像所具有的一个图场为拍摄如图6所示的存在有多个向日葵的向日葵农田的影像。拘束条件取得部21会通过抽出图6的影像轮廓,而抽出向日葵花的部分(对象的一例)。接着,拘束条件取得部21取得各向日葵花部分的重心的坐标值和分辨率感。然后,拘束条件取得部21对以各向日葵花的重心的坐标值和分辨率感为轴的空间分布,使用最小平方法等进行回归分析,而获得回归曲面。其次,拘束条件取得部21以各向日葵花的分辨率感落到由回归曲面所预定阈值以内的范围的方式,将分辨率感变更为阈值而取得拘束条件,该分辨率感为超过预定阈值。这种拘束条件即成为对视听者而言具有前面的向日葵花的分辨率感较高,越到后面向日葵花的分辨率感越低的倾向的拘束条件。应用这种拘束条件的输出影像可以让人感觉到远近感或纵深感,对视听者而言为容易观看的影像。
而且,拘束条件取得部21以例如以下方式取得分辨率感。拘束条件取得部21会将一个图场分割为两个以上时空区块。接着,拘束条件取得部21对各时空区块进行频率分析。然后,拘束条件取得部21计算第一阈值以上的高频成分的比例。接着,拘束条件取得部21按照高频成分的比例来决定分辨率感。并且,设拘束条件取得部21保持有例如高频成分的比例的宽度和分辨率感的对应表。此外,拘束条件取得部21亦可保持有频率分布和分辨率感的对应表。这种情况下,拘束条件取得部21也可对各时空区块进行频率分析而取得频率分布,以取得与最近似该取得的频率分布的频率分析成对的分辨率感。
再者,拘束条件取得部21亦可以例如以下方式取得分辨率感。亦即,拘束条件取得部21会取得构成影像或部分影像(时空区块)的各像素的空间性活性值。然后,拘束条件取得部21取得空间性活性值在阈值以上的像素的比例。接着,拘束条件取得部21按照该比例来决定分辨率感。而且,使拘束条件取得部21保持有例如空间性活性值在阈值以上的像素的比例宽度和分辨率感的对应表。此外,拘束条件取得部21亦可保持有空间性活性值的分布和分辨率感的对应表。这种情况中,拘束条件取得部21亦可取得构成影像或部分影像的各像素的空间性活性值,以取得与最近似该取得的空间性活性值的分布的空间性活性值分布成对的分辨率感。
拘束条件取得部21通常得由MPU或内存等来实现。拘束条件取得部21的处理程序通常以软件来实现,该软件储存于ROM等记录媒体。但也可用硬件(专用电路)来实现。
其次,使用图7的流程图来说明有关影像处理装置2的动作。图7的流程图中,有关与图2的流程图相同的步骤,其说明容予省略。
(步骤S701)拘束条件取得部21对第i个处理对象取得一个以上拘束条件。这种处理称为拘束条件取得处理。有关拘束条件取得处理,使用图8的流程图来说明。
此外,图8的流程图中,拘束条件按每个处理对象来取得。但,拘束条件也可按例如每个受理部12所受理的影像来取得。亦即,处理对象和拘束条件也可不必以1对1的方式对应。
再者,图8的流程图中,藉由电源断开或处理结束的插入,处理即告结束。
接着,使用图8的流程图来说明有关步骤S701的拘束条件取得处理。
(步骤S801)拘束条件取得部21将1代入计数器i。
(步骤S802)拘束条件取得部21判断第i种应取得的特征量是否存在。若第i种应取得的特征量存在,则进到步骤S803;若不存在,返回到上位处理。此外,应取得的特征量的种类通常预先决定。应取得的特征量的种类为例如像素值与分辨率感。
(步骤S803)拘束条件取得部21针对处理对象取得第i种一个以上特征量。
(步骤S804)拘束条件取得部21对步骤S803所取得的一个以上特征量进行分析处理。而所谓分析处理,指例如上述的回归分析。
(步骤S805)拘束条件取得部21对第i种应取得的特征量,将预定的条件应用到步骤S804中的分析结果,而取得拘束条件。
(步骤S806)拘束条件取得部21将计数器i递增1。
而且,图8的流程图中,会有不需要步骤S804的分析处理的情形。在这种情形下,步骤S805中,拘束条件取得部21会对第i种应取得的特征量,将预定的条件应用到步骤S803所取得的一个以上特征量,以取得拘束条件。
如以上所述,若依本实施形态,可以输出保持有整体平衡的影像。而且,若依本实施形态,从输入影像动态地取得适于要输出的影像的拘束条件,将该取得的拘束条件应用到输入影像,即可输出保持有整体平衡的影像。
再者,实现本实施形态的影像处理装置的软件为如以下所述的程序。亦即,该程序为记录媒体中储存有使计算机作为下列各部单元以发挥功能的程序:受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;拘束条件取得部,从前述受理部受理的影像所具有的一个以上图场取得一个以上拘束条件;影像变更部,对前述受理部受理的影像所具有的一个以上图场,应用前述的一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出前述影像变更部所取得的一个以上图场。
(实施形态3)
本实施形态中,说明有关动态地选择适于要输出的影像的拘束条件,将该选择的拘束条件应用于影像,而输出保持有整体平衡的影像的影像处理装置3。亦即,本实施形态中,和实施形态1相比较,在动态地选择适于所受理的输入影像的拘束条件方面有所不同。
图9为本实施形态的影像处理装置3的方块图。
影像处理装置3具备:拘束条件储存部31、受理部12、影像变更部33、及影像输出部14。
影像变更部33具备:特征量取得装置331、拘束条件取得装置332、及影像取得装置333。
拘束条件储存部31可储存两组以上由一个以上拘束条件和特征量条件所组成的配组。所谓特征量条件指有关于图场内对象的特征量的条件。
在此处,图场内对象的特征量亦可称为图场特征量。图场内对象可为有实体的对象(例如,影像中的向日葵花),也可为分割影像所得的时空区块等。此外,特征量具有例如为一个以上图场的一部分的特征量的近傍特征量、及为一个以上图场整体的特征量的整体特征量。近傍特征量有例如像素值、活性值、时空相关性、移动向量、频率分布等。再者,所谓活性值指例如多个像素的最大值及最小值、动态范围(DR)、多个像素间的差分值等。多个像素间的差分值可为空间内的多个像素间的差分值,也可为时间方向的多个像素间的差分值,亦可为空间内及时间方向的多个像素间的差分值。还有,整体特征量有例如影像整体的像素值分布、影像整体的移动向量分布、一个或两个以上影像整体的时空相关性、影像整体的噪声量、影像格式、图场内对象的数目(单数个或复数个等)、和为一个以上影像的内容有关的内容信息、图案検测结果(脸部等)等。在此处,所谓内容信息,指例如电子节目表(EPG)具有的节目类型、标题、演出者姓名等。此外,一个以上特征量亦宜称为特征量向量。
特征量条件指例如对象数目(单数个或复数个等)、图场内多个像素的动态范围、时空区块内多个像素的动态范围等。再者,特征量条件也可为例如时空区块内的分辨率感的宽度、或分辨率感的分布、或将分辨率感的分布施以回归分析所得的回归曲面等。此外,特征量条件亦可为例如时空区块内的像素值宽度、或像素值分布、或将像素值分布施以回归分析所得的回归曲面等。
拘束条件储存部31虽以非挥发性记录媒体较合适,但亦可用挥发性记录媒体来实现。信息(拘束条件和特征量条件的配组)储存在拘束条件储存部31的过程则非所问。例如,信息藉由记录媒体储存在拘束条件储存部31亦可,使通过通讯线路等传送的信息储存在拘束条件储存部31亦可,或者使藉由输入装置输入的信息储存在拘束条件储存部31亦可。
影像变更部33对受理部12受理的影像所具有的一个以上图场,应用一个以上拘束条件,使其变更为与一个以上拘束条件一致的一个以上图场,并取得新的一个以上图场。
影像变更部33通常得由MPU或内存等来实现。影像变更部33的处理程序通常以软件来实现,该软件则储存于ROM等记录媒体。但,也可用硬件(专用电路)来实现。
构成影像变更部33的特征量取得装置331从受理部12受理的影像所具有的一个以上图场取得预定的一个以上特征量。特征量取得装置331也可将一个以上图场分割为一个以上时空区块(亦为处理对象),再从该各处理对象取得预定的一个以上特征量。即使在从时空区块取得特征量的情形中,也是从一个以上图场取得一个以上特征量。还有,特征量取得装置331取得的特征量为例如对象数量、分辨率感、分辨率感的分布、将分辨率感的分布施以回归分析所得的回归曲面、像素值、像素值分布、或将像素值分布施以回归分析所得的回归曲面等。
特征量取得装置331通常得由MPU或内存等来实现。特征量取得装置331的处理程序通常用软件来实现,该软件则储存于ROM等记录媒体。但,也可用硬件(专用电路)来实现。
拘束条件取得装置332决定与一个以上特征量一致的一个以上特征量条件,而从拘束条件储存部31取得与一个以上各特征量条件形成配组的一个以上拘束条件。例如,特征量为将分辨率感的分布施以回归分析所得的回归曲面时,拘束条件取得装置332会决定和该回归曲面最近似的回归曲面(特征量条件),而从拘束条件储存部31取得与该最近似的回归曲面成对的一个以上拘束条件。再者,特征量为分辨率感时,拘束条件取得装置332会决定和该分辨率感对应的特征量条件,而从拘束条件储存部31取得与该特征量条件成对的一个以上拘束条件。还有,特征量为将像素值的分布施以回归分析所得的回归曲面时,拘束条件取得装置332会决定和该回归曲面最近似的回归曲面(特征量条件),而从拘束条件储存部31取得与该最近似的回归曲面成对的一个以上拘束条件。
拘束条件取得装置332通常得由MPU或内存等来实现。拘束条件取得装置332的处理程序通常以软件来实现,而该软件则储存于ROM等记录媒体。但,亦可用硬件(专用电路)来实现。
影像取得装置333对受理部12受理的影像所具有的一个以上图场,应用拘束条件取得装置332所取得的一个以上拘束条件,使其变更为与一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。影像取得装置333的处理和影像变更部13的处理相同。
影像取得装置333通常得由MPU或内存等来实现。影像取得装置333的处理程序通常以软件来实现,而该软件则储存于ROM等记录媒体。但,亦可用硬件(专用电路)来实现。
接着,使用图10的流程图来说明有关影像处理装置3的动作。关于图10的流程图,有关与图2的流程图相同的步骤,其说明容予省略。
(步骤S1001)影像变更部33对第i个处理对象,选择一个以上拘束条件。这种处理称为拘束条件选择处理。有关拘束条件选择处理,兹使用图11的流程图来说明。
此外,图10的流程图中,拘束条件按每个处理对象来选择。但,拘束条件亦可按例如每个受理部12所受理的影像来取得。亦即,处理对象和拘束条件也可不必一定以1对1的方式对应。
而且,图10的流程图中,藉由电源断开或处理结束的插入,处理即告结束。
接着,使用图11的流程图来说明有关步骤S1001的拘束条件选择处理。图11的流程图中,有关与图8的流程图相同的步骤,其说明容予省略。
(步骤S1101)拘束条件取得装置332将1代入计数器j。
(步骤S1102)拘束条件取得装置332判断第j个特征量条件是否存在于拘束条件储存部31。若存在,则进至步骤S1103;若不存在,则到步骤S806。
(步骤S1103)拘束条件取得装置332将特征量取得装置331在步骤S803取得的一个以上特征量和存在于拘束条件储存部31的第j个特征量条件进行对比。
(步骤S1104)拘束条件取得装置332根据在步骤S1103对比的结果,判断一个以上特征量是否符合第j个特征量条件。一个以上特征量符合第j个特征量条件时,进到步骤S1105;若不符合时,进到步骤S1106。
(步骤S1105)拘束条件取得装置332从拘束条件储存部31取得与第j个特征量条件成对的一个以上拘束条件。
(步骤S1106)拘束条件取得装置332将计数器j递增1。返回到步骤S1102。
如以上所述,若依本实施形态,可以输出保持有整体平衡的影像。而且,若依本实施形态,可以动态地选择适于要输出的影像的拘束条件,将该选择的拘束条件应用到影像,而输出保持有整体平衡的影像。
再者,实现本实施形态的影像处理装置的软件为如下的程序。亦即,该程序为在记录媒体中储存有两组以上由拘束条件、与为有关图场内对象的特征量的条件的特征量条件所组成的配组,使计算机作为下列各单元以发挥功能的程序:受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;影像变更部,对前述受理部受理的影像所具有的一个以上图场,应用前述一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出前述影像变更部所取得的一个以上图场。前述影像变更部为具备下列各装置以使计算机发挥功能的程序:特征量取得装置,而前述受理部受理的影像所具有的一个以上图场,取得预定的一个以上特征量;拘束条件取得装置,决定与前述一个以上特征量一致的一个以上特征量条件,并从前述记录媒体取得与该一个以上各特征量条件形成配组的一个以上拘束条件;影像取得装置,对前述受理部所受理的影像所具有的一个以上图场,应用前述拘束条件取得装置所取得的一个以上拘束条件,使其变更为与该一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。
(实施形态4)
本实施形态中,说明有关对拍摄该被拍摄体所得的一个以上各影像,应用从被拍摄体取得的一个以上拘束条件,以符合拘束条件的方式将所输入的输入影像施行处理,以取得输出影像的影像处理装置4。本实施形态和实施形态1相比较,不同点在:对所受理的输入影像,施以预定的影像处理,而以符合拘束条件的方式对该施以影像处理的影像(亦称为处理影像)进行变更,而取得输出影像。
图12为本实施形态的影像处理装置4的方块图。影像处理装置4为例如电视接收机、DVD播放机等。
影像处理装置4具备:拘束条件储存部11、受理部12、影像处理部41、影像变更部43、以及影像输出部14。
影像处理部41将受理部12所受理的影像施以处理,而获得处理影像。在此处,影像处理部41施行的影像处理为例如像素数变换的处理或噪声除去处理等。但,影像处理亦可为其它处理。此外,由于像素数变换的处理或噪声除去处理为公知技术,故其说明从略。
影像变更部43对处理影像所具有的一个以上图场,应用一个以上拘束条件,使其变更为与一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。影像变更部43的处理和影像变更部13相比较,不同点在于:影像变更部43通常以影像处理部41所取得的处理影像作为处理对象。
再者,例如拘束条件为具有亮度的阈值的条件时,在亮度不符合前述阈值的像素存在之际,影像变更部43会将影像处理部41的处理变更为该像素的亮度值符合拘束条件的处理。所谓影像处理部41的处理的变更,为例如影像处理部41要利用的处理参数的变更。
此外,例如拘束条件为具有分辨率的阈值的条件时,影像变更部43会将影像处理部41的处理变更为使分辨率符合拘束条件的处理。所谓影像处理部41的处理的变更,为例如影像处理部41要利用的处理参数的变更。
影像处理部41及影像变更部43通常得由MPU或内存等来实现。影像处理部41等的处理程序通常以软件来实现,该软件则储存于ROM等记录媒体。但,亦可用硬件(专用电路)来实现。
接着,使用图13的流程图来说明有关影像处理装置4的动作。图13的流程图中,仅就与图2的流程图不同的步骤加以说明。
(步骤S1301)影像处理部41对受理部12所受理的影像施以处理,而获得处理影像。
而且,图13的流程图的步骤S203中,影像变更部43从处理影像取得一个以上处理对象。
再者,图13的流程图中,藉由电源断开或处理结束的插入,处理即告结束,
如以上所述,若依本实施形态,藉由像素数变换的处理或噪声除去处理等影像处理(亦可称为前处理),则纵使在失去全画面的平衡的情况下,亦可输出保持有画面整体或影像整体的平衡的影像。更具体而言,若依本实施形态,藉由像素数变换的处理或噪声除去处理等影像处理,即使在失去全画面的平衡的情况下,也可以输出适合于使影像和自然法则一致的拘束条件的影像,视听者可以感觉到影像本来应具有的远近感、纵深感等。
此外,在本实施形态中,在影像变更部的处理之前,由影像处理部41进行处理的做法,亦可应用在实施形态2的影像处理装置2、或实施形态3的影像处理装置3等其它影像处理装置,应无庸赘言。影像处理装置2具备影像处理部41时,拘束条件取得部21通常会从受理部12受理的影像所具有的一个以上图场取得一个以上拘束条件。但,这种情况下,拘束条件取得部21也可从为影像处理部41的结果的处理影像所具有的一个以上图场取得一个以上拘束条件。再者,影像处理装置3具备影像处理部41时,特征量取得装置331通常从受理部12受理的影像所具有的一个以上图场取得预定的一个以上特征量。但,这种情况下,特征量取得装置331也可从为影像处理部41的结果的处理影像所具有的一个以上图场取得预定的一个以上特征量。
还有,实现本实施形态的影像处理装置的软件为如下的程序。亦即,该程序为在记录媒体中储存有一个以上拘束条件,而该拘束条件为应用在要输出的影像的条件,且为要从被拍摄体取得的条件,藉以使计算机作为下列各部单元而发挥功能的程序:受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;影像处理部,将前述受理部所受理的影像施以处理而获得处理影像;影像变更部,对前述处理影像所具有的一个以上图场,应用前述一个以上拘束条件,使其变更为与前述一个以上的拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出前述影像变更部所取得的一个以上图场。
(实施形态5)
本实施形态中,说明有关从所输入的影像动态地取得适于要输出的影像的拘束条件,而将该取得的拘束条件应用于所输入的影像,而获得保持有整体平衡的输出影像的影像处理装置5。本实施形态中,和实施形态2或实施形态3不同点在于:使用输入影像以外的信息取得拘束条件。
图14为本实施形态的影像处理装置5的方块图。影像处理装置5为例如电视接收机、DVD播放机等。
影像处理装置5具备:拘束条件储存部31(或拘束条件储存部11)、受理部12、影像处理部41、被拍摄体信息取得部51、拘束条件取得部52、影像变更部43、及影像输出部14。
被拍摄体信息取得部51取得一个以上被拍摄体的信息(称为被拍摄体信息)。所谓被拍摄体,指影现于受理部12所受理的影像的对象。所谓被拍摄体信息,通常为被拍摄体的属性。被拍摄体信息为例如被拍摄体和摄影机的距离。所谓被拍摄体信息,亦可为例如被拍摄体的实际大小、被拍摄体的照度等。被拍摄体信息取得部51使用例如测距传感器来取得从摄影机到被拍摄体为止的距离。被拍摄体信息取得部51使用例如照度传感器来取得被拍摄体的照度。而且,被拍摄体信息取得部51也可例如从使用者受理被拍摄体的信息,该被拍摄体的信息为从摄影机到被拍摄体为止的距离、或被拍摄体的实际大小等被拍摄体的信息。
被拍摄体信息取得部51得藉由例如测距传感器、或照度传感器、或从输入装置受理输入的受理装置来实现。
拘束条件取得部52使用被拍摄体信息取得部51所取得的一个以上被拍摄体信息来取得一个以上拘束条件。再者,拘束条件取得部52亦可使用被拍摄体信息取得部51所取得的一个以上被拍摄体信息与影像来取得一个以上拘束条件。而且,拘束条件取得部52亦可取得被拍摄体信息取得部51所取得的一个以上被拍摄体信息直接作为拘束条件。此外,此处的影像虽为影像处理部41所取得的处理影像,亦可为受理部12所受理的影像。又,所谓影像,是指影像整体或影像的一部分。
具体而言,例如拘束条件储存部31保持有两组以上由从摄影机起算的距离幅度、及以亮度或分辨率感等特征量作为参数的一个以上拘束条件所成的配组。然后,拘束条件取得部52会取得和被拍摄体信息取得部51所取得的从摄影机起算的距离对应的拘束条件。
再者,具体而言,例如,拘束条件取得部52会取得与从影像取得的一个以上特征量及被拍摄体信息取得部51所取得的一个以上被拍摄体信息相对应的一个以上拘束条件。亦即,拘束条件取得部52会决定与从影像取得的一个以上特征量及被拍摄体信息取得部51所取得的一个以上被拍摄体信息一致的一个以上特征量条件。然后,拘束条件取得部52会取得与所决定的一个以上各特征量条件成对的一个以上拘束条件。
并且,具体而言,例如,拘束条件取得部52取得被拍摄体信息取得部51所取得的被拍摄体的照度作为拘束条件。
拘束条件取得部52通常得由MPU或内存等来实现。拘束条件取得部52的处理程序通常以软件来实现,而该软件则储存于ROM等记录媒体。但,也可用硬件(专用电路)来实现。
其次,使用图15的流程图来说明有关影像处理装置5的动作。图15的流程图中,仅就与图13的流程图不同的步骤加以说明。
(步骤S1501)拘束条件取得部52对第i个处理对象取得一个以上拘束条件。这种处理称为拘束条件选择处理。兹使用图16的流程图来说明有关拘束条件选择处理。
此外,图15的流程图中,拘束条件按每个处理对象来取得。然而,拘束条件亦可例如按每个影像处理部41所取得的处理影像来取得。亦即,处理的对象和拘束条件也可不必以1对1的方式对应。
并且,图15的流程图中,藉由电源断开或处理结束的插入,处理即告结束。
接着,使用图16的流程图来说明有关步骤S1501的拘束条件选择处理。
(步骤S1601)被拍摄体信息取得部51取得一个以上被拍摄体信息。
(步骤S1602)拘束条件取得部52将1代入计数器i。
(步骤S1603)拘束条件取得部52判断第i个特征量条件是否存在于拘束条件储存部31。若第i个特征量条件存在,则进到步骤S1604;若不存在,则返回到上位处理。
(步骤S1604)拘束条件取得部52将第i个特征量条件、与步骤S1601取得的一个以上被拍摄体信息进行对比。
(步骤S1605)拘束条件取得部52根据步骤S1604的对比的结果,判断一个以上被拍摄体信息是否与第i个特征量条件一致。如与第i个特征量条件一致,则进到步骤S1606;若不一致,则到步骤S1607。
(步骤S1606)拘束条件取得部52从拘束条件储存部31取得与第i个特征量条件成对的一个以上拘束条件。
(步骤S1607)拘束条件取得部52将计数器i递增1。返回到步骤S1603。
如以上所述,若依本实施形态,可以输出保持有画面整体或影像整体的平衡的影像。更具体而言,可以输出符合适于取得的被拍摄体信息的拘束条件的影像,视听者可感觉影像本来应具有的远近感、纵深感等。
此外,本实施形态中,影像处理装置5亦可为不具备影像处理部41的构成。
再者,实现本实施形态的影像处理装置的软件为如下的程序。亦即,该程序为使计算机作为下列各部单元以发挥功能的程序:受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;被拍摄体信息取得部,取得一个以上被拍摄体的信息;拘束条件取得部,使用前述被拍摄体信息取得部所取得的一个以上被拍摄体的信息,以取得一个以上拘束条件;影像变更部,对前述受理部受理的影像所具有的一个以上图场,应用前述拘束条件取得部所取得的一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及影像输出部,输出前述影像变更部所取得的一个以上图场。
此外,图17显示执行本说明书所述的程序以实现上述各种实施形态的影像处理装置的计算机的外观。上述实施形态可由计算机硬件及在其上执行的计算机程序来实现。图17为计算机系统300的概观图,图18为计算机系统300的方块图。
图17中,计算机系统300包括:含FD驱动器、CD-ROM驱动器的计算机301、键盘302、鼠标303、监视器304、FD驱动器3011、CD-ROM驱动器3012。
图18中,除了图17的构成要素之外,计算机301再包含:MPU 3013;连接于CD-ROM驱动器3012以及FD驱动器3011的总线3014;用以储存启动程序等程序的ROM 3015;连接于MPU3013,用以暂时储存应用程序的命令,同时提供暂时储存空间的RAM 3016;及用以储存应用程序、系统程序、及数据的硬盘3017。此处虽未图标,但计算机301也可包含提供和LAN连接的网络卡。
使计算机系统300执行上述实施形态的影像处理装置功能的程序可储存在CD-ROM 3101或FD 3102,装入CD-ROM驱动器3012或FD驱动器3011,再传送到硬盘3017。也可采用取代方案,将程序经由未图标的网络传到计算机301,再储存在硬盘3017。程序在执行之际加载RAM 3016。程序也可从CD-ROM 3101、FD 3102加载或直接由网络加载。
程序亦可不必包含使计算机301执行上述实施形态的影像处理装置功能的操作系统(OS)、或第三方程序等。程序可只包含以控制方式叫出适当功能(模块)以获得所期望结果的命令部分。至于计算机系统300如何运作则为公知技术,其详细说明容予省略。
此外,上述程序中,在接收影像的步骤等方面,并不包含利用硬件执行的处理,例如,在接收步骤中使用调谐器或界面卡等执行的处理(只用硬件执行的处理)。
而且,执行上述程序的计算机可为单数,亦可为复数。亦即,可以施行集中处理,或者,也可施行分散处理。
此外,上述各实施形态中,各处理(各功能)可藉由利用单一的装置(系统)施行集中处理来实现,或者,也可藉由利用多个装置施行分散处理来实现。
本发明并非限定以上所述的实施形态,而是可作各种变更,而这些变更亦包含在本发明的范围内,应无庸赘言。
产业上的可利用性
如以上所述,本发明的影像处理装置具有可输出保持有整体平衡的影像的功效,对做为电视接收机等极为有用。
符号说明
1、2、3、4、5 影像处理装置
11、31 拘束条件储存部
12 受理部
13、33、43 影像变更部
14 影像输出部
21 拘束条件取得部
41 影像处理部
51 被拍摄体信息取得部
52 拘束条件取得部
331 特征量取得装置
332 拘束条件取得装置
333 影像取得装置

Claims (11)

1.一种影像处理装置,具备:
拘束条件储存部,可储存一个以上拘束条件,该拘束条件为要应用在要输出的影像的条件,且为要从被拍摄体取得的条件;
受理部,受理具有拍摄被拍摄体所得的一个以上图场的影像;
影像变更部,对前述受理部受理的影像所具有的一个以上图场,应用前述的一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及
影像输出部,输出前述影像变更部所取得的一个以上图场,
其中,前述影像处理装置还具备:
拘束条件取得部,从前述受理部受理的影像所具有的一个以上图场取得所预定的一种以上特征量,按每个种类,对于对应该种类的一个以上特征量进行回归分析,取得回归曲线或回归曲面后,以落到由该回归曲线或该回归曲面所预定的阈值以内范围的方式,取得将超过由回归曲线或回归曲面所预定的阈值的特征量变更为阈值的一个以上拘束条件;
前述拘束条件储存部的一个以上拘束条件为前述拘束条件取得部所取得的一个以上拘束条件。
2.如权利要求1所述的影像处理装置,其中,还具备处理前述受理部所受理的影像,以获得处理影像的影像处理部,
其中前述影像变更部对前述处理影像所具有的一个以上图场,应用前述的一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场。
3.如权利要求1或2所述的影像处理装置,其中,前述拘束条件取得部取得前述受理部受理的影像所具有的一个图场的全部像素的像素值后,对前述图场的各像素的像素值空间分布使用最小平方法进行回归分析,而获得回归曲面,前述拘束条件取得部以各像素的像素值落到由回归曲面所预定的阈值以内范围的方式,将像素值变更为阈值而取得拘束条件,该像素值为超过由回归曲面所预定的阈值的程度而与回归曲面的像素值有差异;或者,
前述拘束条件取得部辨识前述受理部受理的影像所具有的一个图场中的两个以上各对象,取得各对象的重心的坐标值和分辨率感后,对以各对象重心的坐标值和分辨率感为轴的空间分布使用最小平方法进行回归分析,而获得回归曲面,前述拘束条件取得部以各对象的分辨率感落到由回归曲面所预定的阈值以内的范围的方式,将分辨率感变更为阈值而取得拘束条件,该分辨率感为超过所预定的阈值。
4.如权利要求1所述的影像处理装置,其中,前述拘束条件储存部储存有两组以上由拘束条件、与为有关图场内对象特征量的条件的特征量条件所组成的配组,而前述影像变更部具备:
特征量取得装置,从前述受理部受理的影像所具有的一个以上图场取得预定的一个以上特征量;
拘束条件取得装置,决定与前述一个以上特征量一致的一个以上特征量条件,而取得与该一个以上各特征量条件形成配组的一个以上拘束条件;以及
影像取得装置,对前述受理部受理的影像所具有的一个以上图场,应用前述拘束条件取得装置所取得的一个以上拘束条件,使其变更为与该一个以上拘束条件一致的一个以上图场,而从前述拘束条件储存部取得新的一个以上图场。
5.如权利要求1所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以图场所具有的像素的像素值作为参数的条件。
6.如权利要求5所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以像素值的时间性活性值作为参数的条件,而该像素值的时间性活性值为时间上连续的两个以上图场所具有的像素的像素值变化量。
7.如权利要求5所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以像素值的空间性活性值作为参数的条件,而该像素值的空间性活性值为一个图场所具有的两个以上像素的像素值差异。
8.如权利要求1所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以图场内的对象的分辨率感作为参数的条件。
9.如权利要求8所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以分辨率感的时间性活性值作为参数的条件,而该分辨率感的时间性活性值为时间上连续的两个以上图场内的对象的分辨率感变化量。
10.如权利要求8所述的影像处理装置,其中,储存于前述拘束条件储存部的一个以上拘束条件至少包含以分辨率感的空间性活性值作为参数的条件,而该分辨率感的空间性活性值为一个图场所具有的两个以上对象的分辨率感差异。
11.一种影像处理方法,为在记录媒体中储存有一个以上拘束条件,而该拘束条件为应用在输出的影像的条件,且为从被拍摄体取得的条件,并藉由受理部、拘束条件取得部、影像变更部、以及影像输出部来实现的影像处理方法,其特征在于,该影像处理方法具备:
受理步骤,由前述受理部受理具有拍摄被拍摄体所得的一个以上图场的影像;
影像变更步骤,由前述影像变更部对前述受理步骤受理的影像所具有的一个以上图场,应用前述一个以上拘束条件,使其变更为与前述一个以上拘束条件一致的一个以上图场,而取得新的一个以上图场;以及
影像输出步骤,由前述影像输出部输出前述影像变更步骤所取得的一个以上图场,
其中,该影像处理方法还具备:
拘束条件取得步骤,从前述受理部受理的影像所具有的一个以上图场取得所预定的一种以上特征量,按每个种类,对于对应该种类的一个以上特征量进行回归分析,取得回归曲线或回归曲面后,以落到由该回归曲线或该回归曲面所预定的阈值以内范围的方式,取得将超过由回归曲线或回归曲面所预定的阈值的特征量变更为阈值的一个以上拘束条件;
前述记录媒体的一个以上拘束条件为在前述拘束条件取得步骤中所取得的一个以上拘束条件。
CN201280050426.7A 2011-10-26 2012-10-15 影像处理装置以及影像处理方法 Active CN103858421B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-235157 2011-10-26
JP2011235157 2011-10-26
PCT/JP2012/076585 WO2013061810A1 (ja) 2011-10-26 2012-10-15 画像処理装置、画像処理方法、および記録媒体

Publications (2)

Publication Number Publication Date
CN103858421A CN103858421A (zh) 2014-06-11
CN103858421B true CN103858421B (zh) 2018-07-20

Family

ID=48167643

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280050426.7A Active CN103858421B (zh) 2011-10-26 2012-10-15 影像处理装置以及影像处理方法

Country Status (9)

Country Link
US (1) US9836812B2 (zh)
EP (1) EP2747415A4 (zh)
JP (1) JP6134267B2 (zh)
KR (1) KR101838342B1 (zh)
CN (1) CN103858421B (zh)
BR (1) BR112014009109A2 (zh)
IN (1) IN2014CN03705A (zh)
TW (1) TWI559762B (zh)
WO (1) WO2013061810A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9244159B1 (en) * 2013-01-31 2016-01-26 The Boeing Company Distinguishing between maritime targets and clutter in range-doppler maps
JPWO2018003937A1 (ja) 2016-06-30 2019-05-23 アイキューブド研究所株式会社 映像信号処理装置、映像信号処理方法、およびプログラム
CN109417587A (zh) 2016-06-30 2019-03-01 I<sup>3</sup>研究所股份有限公司 图像输出装置、图像输出方法以及程序
TWI681342B (zh) * 2018-12-11 2020-01-01 瑞昱半導體股份有限公司 物件位置判斷電路

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101527773A (zh) * 2008-03-05 2009-09-09 株式会社半导体能源研究所 图像处理方法、图像处理系统、以及计算机程序
JP2010226694A (ja) * 2009-02-24 2010-10-07 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2011066827A (ja) * 2009-09-18 2011-03-31 Casio Computer Co Ltd 画像処理装置、画像処理方法及びプログラム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2825482B2 (ja) 1986-08-02 1998-11-18 ソニー株式会社 ディジタル画像信号の補間装置
JP3072306B2 (ja) 1996-01-29 2000-07-31 ソニー株式会社 ディジタルビデオ信号変換装置及び変換方法
US6975329B2 (en) * 2002-12-09 2005-12-13 Nvidia Corporation Depth-of-field effects using texture lookup
JP4143916B2 (ja) * 2003-02-25 2008-09-03 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US7403568B2 (en) * 2003-08-13 2008-07-22 Apple Inc. Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using temporal filtering
US7436405B2 (en) * 2004-05-14 2008-10-14 Microsoft Corporation Terrain rendering using nested regular grids
JP4736516B2 (ja) * 2005-04-22 2011-07-27 ソニー株式会社 生体情報処理装置および方法、プログラム並びに記録媒体
US8098256B2 (en) 2005-09-29 2012-01-17 Apple Inc. Video acquisition with integrated GPU processing
WO2008042029A2 (en) 2006-09-29 2008-04-10 Thomson Licensing Automatic parameter estimation for adaptive pixel-based filtering
WO2008085874A2 (en) 2007-01-05 2008-07-17 Marvell World Trade Ltd. Methods and systems for improving low-resolution video
EP2015252B1 (en) * 2007-07-08 2010-02-17 Université de Liège Visual background extractor
JP5460173B2 (ja) 2009-08-13 2014-04-02 富士フイルム株式会社 画像処理方法、画像処理装置、画像処理プログラム、撮像装置
JP4599457B1 (ja) * 2009-09-18 2010-12-15 株式会社東芝 画像処理装置、表示装置及び画像処理方法
KR101183781B1 (ko) * 2009-12-22 2012-09-17 삼성전자주식회사 실시간 카메라 모션 추정을 이용한 물체 검출/추적 방법 및 단말

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101527773A (zh) * 2008-03-05 2009-09-09 株式会社半导体能源研究所 图像处理方法、图像处理系统、以及计算机程序
JP2010226694A (ja) * 2009-02-24 2010-10-07 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2011066827A (ja) * 2009-09-18 2011-03-31 Casio Computer Co Ltd 画像処理装置、画像処理方法及びプログラム

Also Published As

Publication number Publication date
EP2747415A4 (en) 2015-04-15
TWI559762B (zh) 2016-11-21
KR101838342B1 (ko) 2018-03-13
KR20140084044A (ko) 2014-07-04
JP6134267B2 (ja) 2017-05-24
US9836812B2 (en) 2017-12-05
US20140292762A1 (en) 2014-10-02
IN2014CN03705A (zh) 2015-10-09
TW201320727A (zh) 2013-05-16
CN103858421A (zh) 2014-06-11
JPWO2013061810A1 (ja) 2015-04-02
WO2013061810A1 (ja) 2013-05-02
EP2747415A1 (en) 2014-06-25
BR112014009109A2 (pt) 2017-04-18

Similar Documents

Publication Publication Date Title
CN104937927B (zh) 2维图像或视频到3维立体图像或视频的实时自动转换
CN102741879B (zh) 由单眼图像产生深度图的方法及其系统
KR101168384B1 (ko) 깊이 맵을 생성하는 방법, 깊이 맵 생성 유닛, 이미지 처리 장치, 및 컴퓨터 프로그램 제품
US7511730B2 (en) Image processing apparatus and method and image pickup apparatus
CN101516001B (zh) 数字拍摄设备及其控制方法和记录介质
Narwaria et al. Tone mapping based HDR compression: Does it affect visual experience?
CN105850114A (zh) 用于图像的逆色调映射的方法
US20120068996A1 (en) Safe mode transition in 3d content rendering
JP2015156607A (ja) 画像処理装置、画像処理装置、及び電子機器
JP2009531927A5 (zh)
CN108833877B (zh) 图像处理方法及装置、计算机装置及可读存储介质
CN114025219B (zh) 增强现实特效的渲染方法、装置、介质及设备
CN111932463B (zh) 图像处理方法、装置、设备及存储介质
CN103858421B (zh) 影像处理装置以及影像处理方法
KR20100109069A (ko) 시각적 관심맵 생성 장치 및 방법
CN109982036A (zh) 一种全景视频数据处理的方法、终端以及存储介质
WO2022068326A1 (zh) 一种图像帧预测的方法及电子设备
CN108447059A (zh) 一种全参考光场图像质量评价方法
CN101924847A (zh) 多媒体播放装置及其播放方法
US20100079448A1 (en) 3D Depth Generation by Block-based Texel Density Analysis
EP4156694A1 (en) A method to insert ad content into a video scene
CN112700456A (zh) 图像区域对比度优化方法、装置、设备及存储介质
US9460544B2 (en) Device, method and computer program for generating a synthesized image from input images representing differing views
CN116091292B (zh) 数据处理方法和相关装置
JP4214528B2 (ja) 擬似立体画像生成装置及び擬似立体画像生成プログラム並びに擬似立体画像表示システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant