CN1822661A - 图像处理系统、投影机及图像处理方法 - Google Patents

Abstract

本发明的目的是提供可以更适当地执行在进行投影图像的畸变校正处理的场合的环境影响减轻处理的图像处理系统。本发明的投影机的构成包含生成图像畸变感测信息的图像畸变感测部(180)、生成环境影响感测信息的环境影响感测部(182)、生成投影区域信息的投影对象区域信息生成部(101)、在对投影图像的畸变进行校正的同时生成表示该校正的程度的校正信息的图像畸变校正部(103)、根据投影区域信息和校正信息生成表示投影图像的畸变校正后的显示区域的显示区域信息的显示区域信息生成部(104)、执行减轻环境影响的处理的环境影响减轻部(105)、将投影图像进行投影的投影部(190)以及生成差分图像的差分图像生成部(106)。

Description

图像处理系统、投影机及图像处理方法

技术领域

本发明涉及执行投影图像的畸变校正处理和减轻环境影响的处理的图像处理系统、投影机及图像处理方法。

背景技术

近年，提出通过利用具有传感器的投影机将图像投影到屏幕，借助传感器对投影的投影图像进行感测而执行图像处理来进行投影图像的畸变校正及减轻环境影响(外光影响、屏幕的颜色的影响等等)的投影机。

现有的投影机，分开执行投影图像的畸变校正用的处理和减轻环境影响用的处理。因此，现有的投影机，需要时间来进行投影图像的畸变校正处理及环境影响减轻处理。

为了缩短这种校准处理所需时间，比如，在专利文献1中记述的是，投影机，通过生成观看环境下推定数据，减少必需的校准图像的投影次数，缩短环境影响减轻处理所需时间。

然而，在进行投影图像的畸变校正的场合，有时原来显示投影图像的部分由于畸变校正而变得不能显示。在这种场合，可以认为，即使是利用该部分的感测信息执行环境影响减轻处理，畸变校正后的投影图像也有成为不能适当减轻环境影响的图像的场合。

比如，在专利文献2中记述的是，为了投影到不存在障碍物的区域，投影机，根据与选择的投影区域相应的部分的感测信息，掌握该投影区域的观看环境而进行图像校正。

专利文献1：日本特开2003-339056号公报

专利文献2：日本特开2004-48694号公报

然而，可以认为，专利文献2的投影机，在进行投影图像的畸变校正的场合，由于不考虑畸变校正后的投影图像的位置及形状，也有不能适当减轻环境影响的场合。

另外，也考虑到利用变焦功能改变投影图像的位置及形状的场合，即使是在这种场合，投影机，也必须更适当地执行环境影响减轻处理。

发明内容

本发明系有鉴于上述问题而完成的发明，其目的在于提供可以更适当地执行在进行投影图像的畸变校正处理的场合的环境影响减轻处理的图像处理系统、投影机及图像处理方法。

为解决上述问题，本发明的图像处理系统的特征在于包含：

通过对包含投影到投影对象区域的投影图像中的至少一部分的区域进行感测而生成图像畸变感测信息的图像畸变感测部，

通过对上述投影图像进行感测，生成表示规定区域中的亮度指标值的环境影响感测信息的环境影响感测部，

对上述投影图像的畸变进行校正的图像畸变校正部，

根据上述投影区域信息和上述校正信息，生成表示上述感测图像中的上述投影图像的畸变校正后的显示区域的显示区域信息的显示区域信息生成部，

执行减轻由于理想环境与实际的使用环境的差别而产生的环境影响的处理的环境影响减轻部，以及

在不同的时刻将红色的单色图像、绿色的单色图像、蓝色的单色图像、黑色的单色图像作为上述投影图像进行投影的投影部，

上述环境影响感测部，作为上述规定区域，通过不断地对包含于图像畸变校正后的图像内的上述投影图像的区域进行感测而生成上述红色的单色图像、上述绿色的单色图像、上述蓝色的单色图像及上述黑色的单色图像的各自的上述环境影响感测信息，而

上述环境影响减轻部，根据各环境影响感测信息，执行减轻上述环境影响的处理。

另外，本发明的投影机的特征在于具有上述图像处理系统。

根据本发明，图像处理系统等，可以更适当地执行在环境影响感测部不断对图像畸变校正后的图像内包含的投影图像的规定区域进行感测而进行投影图像的畸变校正处理的场合的环境影响减轻处理。

另外，本发明的图像处理系统的特征在于包含：

通过对包含投影到投影对象区域的投影图像中的至少一部分的区域进行感测而生成图像畸变感测信息的图像畸变感测部，

通过对上述投影图像的中央附近的规定区域进行感测，生成表示上述规定区域中的亮度指标值的环境影响感测信息的环境影响感测部，

根据上述图像畸变感测信息，生成表示有关上述图像畸变信息感测部的感测图像中的上述投影图像的位置的信息的投影区域信息的投影区域信息生成部，

在校正上述投影图像的畸变的同时，生成表示该校正的程度的校正信息的图像畸变校正部，

根据上述投影区域信息和上述校正信息，生成表示上述感测图像中的上述投影图像的畸变校正后的显示区域的显示区域信息的显示区域信息生成部，

执行减轻由于理想环境与实际的使用环境的差别而产生的环境影响的处理的环境影响减轻部，

在不同的时刻将红色的单色图像，绿色的单色图像，蓝色的单色图像，黑色的单色图像和包含红色、绿色、蓝色中的任何一种单色和黑色的多色图像作为上述投影图像进行投影的投影部，

生成规定的差分图像的差分图像生成部，

上述多色图像，由位于该多色图像的中央附近的中央图像、位于该中央图像周围的周围图像和上述中央图像及上述周围图像以外的背景图像构成，

上述中央图像及上述周围图像是黑色，上述背景图像是黑色以外的单色，或者上述中央图像及上述周围图像是黑色以外的单色，上述背景图像是黑色，

上述图像畸变感测部，通过对包含上述多色图像及红色、绿色、蓝色、黑色中的任何一种的单色图像中的至少一部分区域进行感测而生成各自的上述图像畸变感测信息，

上述环境影响感测部，通过对上述红色的单色图像、上述绿色的单色图像、上述蓝色的单色图像及上述黑色的单色图像的上述规定区域进行感测而生成各自的上述环境影响感测信息，

上述差分图像生成部，生成基于上述多色图像的图像畸变感测信息和上述任何一个单色图像的图像畸变感测信息的图形差分图像，

上述投影区域信息生成部，在根据上述图形差分图像生成有关上述感测图像中的上述中央图像的位置的中央区域信息和有关上述感测图像中的上述周围图像的位置的周围区域信息的同时，根据上述中央区域信息及上述周围区域信息生成上述投影区域信息，并且

上述环境影响减轻部，根据各环境影响感测信息和上述显示区域信息，执行减轻上述环境影响的处理。

另外，本发明的投影机的特征在于具有上述图像处理系统。

另外，本发明的图像处理方法是具有图像畸变感测部、环境影响感测部、处理部、投影部的利用计算机的图像处理方法，其特征在于：

上述投影部，在不同的时刻将由作为红色的单色图像，绿色的单色图像，蓝色的单色图像，黑色的单色图像和包含红色、绿色、蓝色中的任何一种单色和黑色的图像以及作为位于该图像的中央附近的中央图像、位于该中央图像周围的周围图像和上述中央图像及上述周围图像以外的背景图像而构成的图像的多色图像进行投影，

上述图像畸变感测部，通过对投影到投影对象区域的包含红色、绿色、蓝色、黑色中的任何一种单色图像的区域进行感测而生成第1图像畸变感测信息，

通过对投影到上述投影对象区域的包含上述多色图像中的至少一部分的区域进行感测而生成第2图像畸变感测信息，

上述环境影响感测部，

通过对上述投影到投影对象区域的绿色的单色图像的上述中央附近的规定区域进行感测而生成第1环境影响感测信息，

通过对投影到上述投影对象区域的红色的单色图像的上述规定区域进行感测而生成第2环境影响感测信息，

通过对投影到上述投影对象区域的蓝色的单色图像的上述规定区域进行感测而生成第3环境影响感测信息，并且

通过对上述投影到投影对象区域的黑色的单色图像的上述规定区域进行感测而生成第4环境影响感测信息，

上述处理部，

根据上述第1及第2图像畸变感测信息生成图形差分图像，

根据上述图形差分图像，生成有关上述图像畸变感测部的感测图像中的上述中央图像的位置的中央区域信息和有关上述感测图像中的上述周围图像的位置的周围区域信息，

根据上述中央区域信息及上述周围区域信息，生成表示上述感测图像中的上述投影图像的位置的信息的投影区域信息，

根据上述投影区域信息，生成表示校正上述投影图像的畸变的程度的校正信息，

根据上述投影区域信息和上述校正信息，生成表示上述感测图像中的上述投影图像的畸变校正后的显示区域的显示区域信息，

根据上述校正信息，对图像信息进行校正以便对图像的畸变进行校正，以及

根据上述第1～第4环境影响感测信息和上述显示区域信息，对上述图像信息进行修正以便减轻由于理想环境和实际的使用环境的差异而产生的环境影响。

根据本发明，图像处理系统等，可以通过利用畸变校正后的显示区域内的感测信息执行环境影响减轻处理，更适当地执行在进行投影图像的畸变校正处理的场合的环境影响减轻处理。

另外，根据本发明，图像处理系统等，通过进行5种的图像的投影和感测而执行投影图像的畸变校正处理和环境影响减轻处理，可以更有效地执行图像处理。

另外，上述图像处理系统、上述投影机及上述图像处理方法，包含为了根据上述显示区域信息，以对于与上述投影对象区域内的上述显示区域相当的区域的最佳大小将上述投影图像进行投影，在对调整上述投影图像的大小的变焦部进行控制的同时，生成表示该调整的程度的调整信息的控制部，

上述环境影响减轻部，

也可以包含：

通过根据上述调整信息，判别由于上述调整引起的上述投影图像的亮度的变化，并相应于该亮度的变化对包含于各环境影响感测信息中的上述显示区域内的信息进行修正而生成各个校正感测信息的感测信息校正部，以及

根据各校正感测信息对图像信息进行校正以便使上述投影图像的颜色及亮度变成理想状态的图像信息校正部。

据此，图像处理系统等，通过利用大小调整后的显示区域内的感测信息执行环境影响减轻处理，可以更适当地执行在调整投影图像的大小的场合的环境影响减轻处理。

另外，在上述图像处理系统、上述投影机及上述图像处理方法中，上述图像信息校正部，

也可以包含：

根据表示理想的颜色的理想颜色信息和上述校正感测信息，为了以上述理想的颜色对上述投影图像进行投影而对图像信息进行校正的颜色校正部，以及

根据表示理想的亮度的理想的亮度信息和上述校正感测信息，为了以上述理想的亮度对上述投影图像进行投影而利用上述颜色校正部对校正过的图像信息进行校正的亮度校正部。

另外，在上述图像处理系统及上述投影机中，上述环境影响校正部，包含图像信息校正部，

上述图像信息校正部，

也可以包含：

根据表示理想的颜色的理想颜色信息和各环境影响感测信息，为了以上述理想的颜色对上述投影图像进行投影而对图像信息进行校正的颜色校正部，以及

根据表示理想的亮度的理想的亮度信息和各环境影响感测信息，为了以上述理想的亮度对上述投影图像进行投影而利用上述颜色校正部对校正过的图像信息进行校正的亮度校正部。

据此，图像处理系统等，可以生成对颜色和亮度进行调整的适当的图像。

另外，在上述图像处理系统、上述投影机及上述图像处理方法中，上述亮度校正部，也可以在根据红色、绿色、蓝色及黑色的各单色图像的校正感测信息生成白色的单色图像的校正感测信息的同时，利用该白色的单色图像的校正感测信息，对由上述颜色校正部校正过的图像信息进行校正。

另外，在上述图像处理系统及上述投影机中，

上述亮度校正部，也可以在根据红色、绿色、蓝色及黑色的各单色图像的环境影响感测信息生成白色的单色图像的环境影响感测信息的同时，利用该白色的单色图像的环境影响感测信息，对由上述颜色校正部校正过的图像信息进行校正。

据此，由于图像处理系统等，通过根据红色、绿色、蓝色及黑色的各单色图像的校正感测信息生成白色的单色图像的校正感测信息，可以通过进行5种类的图像的投影和感测而执行投影图像的畸变校正处理和环境影响减轻处理，可以更有效地执行图像处理。

另外，上述图像处理系统、上述投影机及上述图像处理方法，包含生成有关上述感测图像中的上述投影对象区域的位置的投影对象区域信息的投影对象区域信息生成部，

上述图像畸变感测部，通过感测包含上述黑色的单色图像的至少一部分区域而生成黑色的单色图像的图像畸变感测信息，

上述差分图像生成部，根据上述黑色的单色图像的图像畸变感测信息和上述任何一种单色的单色图像的图像畸变感测信息，生成亮度差分图像，

上述投影对象区域信息生成部，根据上述亮度差分图像和上述投影区域信息生成上述投影对象区域信息，

上述图像畸变校正部，也可以根据上述投影对象区域信息和上述投影区域信息对上述投影图像的畸变进行校正。

据此，图像处理系统等，比如，通过根据投影对象区域和投影区域的形状的差别，判别投影图像的畸变，可以校正投影图像的畸变。

另外，在上述图像处理系统、上述投影机及上述图像处理方法中，上述投影部，也可以在上述投影图像的投影前对用来使使用者确认与上述规定区域相当的区域是否投影到上述投影对象区域的位置确认图像进行投影。

据此，图像处理系统等，通过由使用者利用位置确认图像对于与中央区域相当的区域是否进入投影对象区域予以确认，可以在中央区域确实包含于感测信息中的状态中进行感测。结果，图像处理系统等，可以利用适当的感测信息执行图像处理。

另外，在上述图像处理系统、上述投影机及上述图像处理方法中，上述图像畸变校正部，也可以根据上述图像畸变感测信息，检测出亮度指标值(比如，辉度值、照度值等)的峰值位置，并根据该峰值位置对投影图像的畸变进行校正。

附图说明

图1为示出实施例1中的图像投影情况的概略图。

图2为实施例1中的投影机的功能框图。

图3为实施例1中的投影机的硬件框图。

图4为示出从实施例1中的前处理到投影对象区域信息生成为止的图像处理的流程的流程图。

图5为示出实施例1中的方格图形图像的示图。

图6为示出从实施例1中的校正信息生成到图像投影为止的图像处理的流程的流程图。

图7为示出从实施例2中的校正信息生成到图像投影为止的图像处理的流程的流程图。

具体实施方式

以下参照附图对于将本发明应用于具有图像处理系统的投影机的场合予以说明。另外，以下所示的实施例，对于在专利申请的范围中记载的发明的内容并无任何限制。另外，在以下的实施例中示出的结构的全部，作为在专利申请的范围中记载的发明的解决手段并不一定都是必需的。

(实施例1)

图1为示出实施例1中的图像投影情况的概略图。

投影机20，将图像投影到具有投影对象区域的屏幕10。结果，在屏幕10上显示投影图像12。

另外，在本实施例中，如图1所示，屏幕10的一部分，处于受到外光80产生的影响(环境影响)的状态。另外，投影机20，由于是从斜向位置对屏幕10进行投影，投影图像12成为畸变状态，发生所谓的梯形畸变。此外，如图1所示，投影图像12的一部分，处于从屏幕10超出的状态。

在本实施例中，在投影机20中设置有用来校正投影图像12的畸变的图像畸变传感器60和用来减轻环境影响的环境影响传感器62。图像畸变传感器60，对包含投影到屏幕10上的投影图像12(也可以是投影图像12的一部分)的图像畸变感测区域14进行感测而生成图像畸变感测信息。另外，环境影响传感器62，对投影图像12的中央附近的环境影响感测区域15(规定区域)进行感测而生成环境影响感测信息。

投影机20，通过执行基于图像畸变感测信息及环境影响感测信息的图像处理，几乎同时执行投影图像12的畸变校正和环境影响减轻处理。

下面对用来装设这种功能的投影机20的功能框图进行说明。

图2为实施例1中的投影机20的功能框图。

投影机20，包含在投影图像12投影到屏幕10上的状态下通过对图像畸变感测区域14进行感测而生成图像畸变感测信息的图像畸变感测部180、在投影图像12投影到屏幕10上的状态下通过对环境影响感测区域15进行感测生成环境影响感测信息的环境影响感测部182、存储各感测信息的存储部160、根据各感测信息执行图像处理的处理部100以及根据来自处理部100的图像信息将图像进行投影的投影部190。另外，图像畸变感测部180，包含图像畸变传感器60，而环境影响感测部182，包含环境影响传感器62。

另外，处理部100，其构成包含生成表示关于图像畸变感测部180的感测图像中的屏幕10的位置的信息的投影对象区域信息的投影对象区域信息生成部101、生成表示关于感测图像中的投影图像12的位置的信息的投影区域信息的投影区域信息生成部102、在校正投影图像12的畸变的同时生成表示该校正的程度的校正信息的图像畸变校正部103、生成表示感测图像中的投影图像12的畸变校正后的显示区域的显示区域信息的显示区域信息生成部104以及执行减轻由于理想环境和实际的使用环境的差别而产生的环境影响的处理的环境影响减轻部105。

另外，处理部100，其构成包含在输入来自PC等的图像信息(数字RGB信号等)而输出到环境影响减轻部105的同时具有图像畸变校正部103的图像信息输入部110、输入来自环境影响减轻部105的图像信息而输出到投影部190的图像信息输出部140、生成用来投影校准用的投影图像12的校准信息的校准信息生成部150以及根据存储在存储部160中的各感测信息生成差分图像的差分图像生成部106。

另外，投影机20，具有用来调整投影图像12的大小的变焦功能。因此，投影部190，除了空间光调制器192、透镜196之外，还具有用来调整投影图像12的大小的变焦部194。另外，处理部100，具有在控制变焦部194的同时生成表示该调整的程度的调整信息的控制部107。

另外，环境影响减轻部105，其构成包含通过根据来自控制部107的调整信息，判别由于调整产生的投影图像12的亮度的变化并相应于该亮度的变化对包含于各环境影响感测信息中的显示区域内的信息进行校正而生成校正感测信息的感测信息校正部130以及根据校正感测信息对图像信息进行校正以便使投影图像12的颜色及亮度变成理想状态的图像信息校正部120。

另外，图像信息校正部120，其构成包含根据表示理想颜色的理想颜色信息及校正感测信息对图像信息进行校正以便以理想颜色对投影图像12进行投影的颜色校正部122以及通过根据表示理想亮度的理想亮度信息及校正感测信息对利用颜色校正部122校正过的图像信息进行校正以便以理想亮度对投影图像12进行投影的亮度校正部124。另外，在亮度校正部124的亮度校正中包含在受到环境影响的状态中对图像信息进行校正以便对投影图像12进行投影的灰阶(灰度等级)校正。

另外，作为用来装设上述投影机20的各部功能的硬件，比如，可以利用以下的部件。

图3为实施例1中的投影机20的硬件框图。

比如，作为图像信息输入部110，比如，可以利用装设A/D变换器930、图像处理电路970等，作为存储部160，比如，可以利用装设RAM950等，作为投影对象区域信息生成部101、投影区域信息生成部102及差分图像生成部106，比如，可以利用装设图像处理电路970等，作为图像畸变校正部103、显示区域信息生成部104、控制部107及感测信息校正部130，比如，可以利用装设CPU910等，作为校准信息生成部150，比如，可以利用装设图像处理电路970、RAM950等，作为图像信息输出部140，比如，可以利用装设D/A变换器940等，作为空间光调制器192，比如，可以利用装设液晶屏920等，作为颜色校正部122，比如，可以利用装设存储理想颜色信息的ROM960、颜色校正用的三维查看表(3D-LUT)的RAM950、校正3D-LUT的图像处理电路970等，作为亮度校正部124，比如，可以利用装设存储理想亮度信息的ROM960、存储亮度校正用的一维查看表(1D-LUT)的RAM950、校正1D-LUT的图像处理电路970等。

另外，作为图像畸变感测部180，比如，可以利用装设CCD相机、CMOS相机等的面积传感器、线传感器及相位差传感器等。图像畸变感测部180，作为图像畸变感测信息，比如，输出感测图像中的每个像素的图像信号值(比如，RGB值、XYZ值、辉度值、照度值等)。

另外，作为环境影响感测部182，比如，可以利用装设具有滤色器的硅光电二极管、RGB传感器等、将感测范围收入到环境影响感测区域15的范围内的遮光筒光学系统等。环境影响感测部182，比如，经R、G、B各自的滤色器输出R、G、B各自的亮度指标值(比如，电压值、辉度值、照度值等)作为环境影响感测信息。

另外，这些各个部分，可以经系统总线980互相交换信息。

另外，这些各个部分，既可以如电路那样以硬件方式装设，也可以如驱动器那样以软件方式装设。

此外，也可以从存储用来使计算机工作的程序的信息存储媒体900中读出程序并将图像畸变校正部103等的功能装设到计算机中作为图像畸变校正部103等。

作为这种信息存储媒体900，比如，可以应用CD-ROM、DVD-ROM、ROM、RAM、HDD等，其程序的读出方式，既可以是接触方式，也可以是非接触方式。

另外，代替信息存储媒体900，也可以经传送通路从主机装置等下载用来装设上述各功能的程序等装设上述各功能。

以下对利用这些各个部分的图像处理予以说明。

图4为示出从实施例1中的前处理到投影对象区域信息生成为止的图像处理的流程的流程图。

首先，投影机20，执行前处理(步骤S1)。具体言之，比如，在使用者启动投影机20的场合，控制部107，控制变焦部194变成变焦初始状态。于是，校准信息生成部150，生成位置确认图像用的校准信息，投影部190，根据经环境影响减轻部105、图像信息输出部140输入的该校准信息，将位置确认图像予以投影。另外，作为位置确认图像，比如，具有将整个图像进行9等分的场合的中央区域的图像、后述的方格图形图像是符合的。投影机20，使使用者确认位置确认图像的中央的区域是否投影到屏幕10，并且在未投影的场合，通过使使用者对投影机20的位置等进行调整，可以使中央区域变成可靠地投影到屏幕10的状态。

前处理结束后，在使用者按下投影机20的校正按钮时，投影机20执行投影图像12的畸变校正处理和环境影响减轻处理。

首先，校准信息生成部150，生成整个图像投影绿色单色图像(G图像)用的校准信息。投影部190，根据该校准信息生成G图像。

图像畸变感测部180，以自动曝光方式对G图像投影到屏幕10上的状态的图像畸变感测区域14进行感测，生成第1图像畸变感测信息(步骤S2)。存储部160，存储第1图像畸变感测信息。

另外，环境影响感测部182，对G图像投影到屏幕10上的状态的环境影响感测区域15进行感测，生成第1环境影响感测信息(步骤S3)。存储部160，存储第1环境影响感测信息。

其次，校准信息生成部150，生成将整个图像由绿色和黑色的方格图形构成的多色图像(方格图形图像)进行投影用的校准信息。

图5为示出实施例1中的方格图形图像16的示图。

方格图形图像16，是在将整个图像进行9等分的9个区域之中，中央图像和四角的4个周围图像为黑色，其以外的4个的背景图像为绿色。

投影部190，根据方格图形图像16用的校准信息，生成方格图形图像16。

图像畸变感测部180，对将方格图形图像16投影到其上的屏幕10上的图像畸变感测区域14，以G图像感测时的曝光进行感测，生成第2图像畸变感测信息(步骤S4)。存储部160，存储第2图像畸变感测信息。

之后，校准信息生成部150，生成整个图像投影红色的单色图像(R图像)用的校准信息。投影部190，根据该校准信息生成R图像。

环境影响感测部182，对R图像投影到屏幕10上的状态的环境影响感测区域15进行感测，生成第2环境影响感测信息(步骤S5)。存储部160，存储第2环境影响感测信息。

之后，校准信息生成部150，生成将整个图像投影蓝色的单色图像(B图像)用的校准信息。投影部190，根据该校准信息，投影B图像。

环境影响感测部182，对B图像投影到屏幕10上的状态的环境影响感测区域15进行感测，生成第3环境影响感测信息(步骤S6)。存储部160，存储第3环境影响感测信息。

之后，校准信息生成部150，生成整个图像投影黑色的单色图像(K图像)用的校准信息。投影部190，根据该校准信息生成K图像。

图像畸变感测部180，对K图像投影到屏幕10上的状态的图像畸变感测区域14进行感测，以G图像感测时的曝光感测生成第3图像畸变感测信息(步骤S7)。存储部160，存储第3图像畸变感测信息。

另外，环境影响感测部182，对K图像投影到屏幕10上的状态的环境影响感测区域15进行感测，生成第4环境影响感测信息(步骤S8)。存储部160，存储第4环境影响感测信息。

差分图像生成部106，生成以第1图像畸变感测信息表示的G图像的感测图像和以第3图像畸变感测信息表示的K图像的感测图像的差分图像(GK差分图像)(步骤S9)。存储部160，存储GK差分图像的信息。

差分图像生成部106，生成以第1图像畸变感测信息表示的G图像的感测图像和以第2图像畸变感测信息表示的方格图形图像16的感测图像的差分图像(方格差分图像)(步骤S10)。存储部160，存储方格差分图像的信息。

投影区域信息生成部102，在根据方格差分图像的信息，生成关于图像畸变感测部180的感测图像中的中央图像的区域(中央区域)的位置的中央区域信息和感测图像中的周围图像的区域(周围区域)的位置的周围区域信息的同时，根据中央区域信息及周围区域信息，生成关于感测图像中的投影图像12(投影区域)的位置的投影区域信息(步骤S11)。

具体言之，比如，投影区域信息生成部102，通过判别方格差分图像的各像素的值(差分值)变化的点，检测中央区域的多个中央基准位置和包含在方格差分图像中的周围区域的周围基准位置。于是，投影区域信息生成部102，根据这些基准位置，确定中央区域的四角的位置，根据该位置确定投影区域的四角的位置。另外，作为投影区域信息，比如，可以是表示感测图像中的投影区域的四角的位置的信息等。

另外，投影对象区域信息生成部101，根据GK差分图像的信息和投影区域信息，生成关于感测图像中的屏幕10的位置的投影对象区域信息(步骤S12)。

具体言之，比如，投影对象区域信息生成部101通过从基于投影区域信息的中央区域的四角的位置向着外侧进行GK差分图像内的边缘检测来确定边界线而生成投影对象区域信息。另外，作为投影对象区域信息，比如，可以是表示感测图像中的屏幕10的四角的位置的信息等。

图6为示出从实施例1中的校正信息生成到图像投影为止的图像处理的流程的流程图。

图像畸变校正部103，根据投影区域信息和投影对象区域信息，生成表示校正投影图像12的畸变的程度的校正信息(步骤S13)。

更具体言之，图像畸变校正部103，根据投影区域信息和投影对象区域信息，判别各区域的形状的差别，相应于该差别对投影图像12的畸变进行校正，生成校正信息以便使投影图像12成为所要求的宽高比(纵横比)。

另外，由于投影对象区域信息生成部101、投影区域信息生成部102、图像畸变校正部103的更具体的处理步骤，比如，可以采用在日本特开2005-341139号中记载的方法，所以在本实施例中将说明省略。

另外，显示区域信息生成部104，根据校正信息和投影区域信息，生成表示感测图像中的畸变经过校正的校正投影图像12的显示区域的显示区域信息(步骤S14)。

控制部107，根据显示区域信息，判别畸变校正后的最佳变焦状态，对变焦部194进行控制以便变成最佳变焦状态(步骤S15)。

感测信息校正部130，根据来自控制部107的表示初始变焦状态的信息及表示最佳变焦状态的信息、第1～第4环境影响感测信息，生成表示最佳变焦状态中的显示区域中的RGB值的每一类别的平均值的校正感测信息(步骤S16)。

另外，颜色校正部122，根据表示理想的颜色的理想颜色信息和校正感测信息，生成3D-LUT以便以理想的颜色对投影图像12进行投影(步骤S17)。

另外，亮度校正部124，通过R图像的校正感测信息、G图像的校正感测信息及B图像的校正感测信息之和的运算，生成白色图像(W图像)的校正感测信息(步骤S18)。更具体言之，比如，亮度校正部124，将从R图像的校正感测信息、G图像的校正感测信息及B图像的校正感测信息之和中两次减去K图像的校正感测信息所得到的值作为W图像的校正感测信息生成。另外，之所以两次减去K图像的校正感测信息，是为了通过3个值相加从成为3重的外光成分中除去2个量的外光成分。

于是，亮度校正部124，根据来自感测信息校正部130的校正感测信息、W图像的校正感测信息和表示理想的亮度的理想亮度信息，生成1D-LUT以便以理想的亮度对投影图像12进行投影(步骤S19)。

投影机20，通过以上的步骤变成图像信息的校正准备完成的状态。

于是，在从PC输入图像信息的场合，图像畸变校正部103，为了对投影图像12的畸变进行校正，根据校正信息对图像信息进行校正(步骤S20)。

另外，颜色校正部122，为了对投影图像12颜色进行校正，对经过图像畸变校正部103校正的图像信息利用3D-LUT进行校正(步骤S21)。

另外，亮度校正部124，为了对投影图像12的亮度进行校正，对经过颜色校正部122校正的图像信息利用1D-LUT进行校正(步骤S22)。

另外，图像信息输出部140，将进行了图像畸变校正处理和环境影响减轻处理的图像信息输出到190。投影部190，根据该图像信息对图像进行投影(步骤S23)。

如上所述，根据本实施例，投影机20，通过利用畸变校正后的显示区域内的感测信息执行环境影响减轻处理，可以更适当地执行在进行投影图像12的畸变校正处理场合的环境影响减轻处理。

另外，投影机20，通过对利用变焦部194进行大小调整后的显示区域内的感测信息执行环境影响减轻处理，可以更适当地执行在进行投影图像12的大小调整场合的环境影响减轻处理。

另外，根据本实施例，投影机20，通过使图像畸变校正用的校准图像和颜色亮度校正用的校准图像共用化而对5种校准图像进行投影和感测，就可以高效地执行图像处理。就是说，根据本实施例，投影机20，可以大致同时进行图像畸变校正和考虑外光80及屏幕10的颜色的影响的颜色及亮度的校正。结果，投影机20，可以减少校准处理所需要的时间而给予使用者高度的满足感。

另外，根据本实施例，投影机20，通过由使用者利用位置确认图像对于与中央区域相当的区域是否进入屏幕10予以确认，可以在方格图形图像16的中央图像确实包含于环境影响感测信息中的状态中进行感测。结果，投影机20，可以利用适当的感测信息执行图像处理。

另外，根据本实施例，投影机20，通过以一度自动曝光设定来感测辉度值最高的G图像，可以以适适当用环境的曝光生成第1图像畸变感测信息。另外，投影机20，通过以G图像的感测时的曝光生成第2及第3图像畸变感测信息，可以以适合差分图像生成的曝光来生成第2及第3图像畸变感测信息。

另外，根据本实施例，通过设置图像畸变感测部180和环境影响感测部182，可以利用具有与目的相应的必需的最低限度的功能的传感器。

另外，根据本实施例，投影机20，由于可以通过利用将环境影响感测部182的感测范围收入到环境影响感测区域15的光学系统，不断地利用图像畸变校正处理后的显示区域内的环境影响感测信息，所以即使是在执行图像畸变校正处理的场合，也可以适当地执行环境影响减轻处理。

(实施例2)

另外，作为图像畸变感测部180，比如，在利用线传感器及相位差传感器等的场合，或者，比如，采用在图像畸变校正部103，比如，检测到包含在图像畸变感测信息之中的亮度指标值(比如，辉度值、照度值等)的峰值位置，根据该峰值位置校正投影图像12的畸变的方法的场合，投影机20，也可以不需要投影对象区域信息及投影区域信息。此外，在不利用控制部107控制变焦部194的场合，投影机20，也可以不需要显示区域信息。

其次，对投影机20不利用投影对象区域信息、投影区域信息及显示区域信息执行环境影响减轻处理和图像畸变校正处理的第2实施例予以说明。

图7为示出从实施例2中的校正信息生成到图像投影为止的图像处理的流程的流程图。

实施例2的投影机20，不具有图2所示的投影对象区域信息生成部101、投影区域信息生成部102、显示区域信息生成部104、差分图像生成部106、控制部107、感测信息校正部130及变焦部194。

另外，在实施例2中，环境影响感测部182的构成包括具有滤色器的硅光电二极管、用来不断对作为环境影响感测区域15的包含在图像畸变校正后的图像内的投影图像12的规定区域进行感测的遮光筒光学系统。另外，在实施例2中，作为图像畸变感测部180，比如，使用线传感器等。

图像畸变校正部103，根据图像畸变感测信息，生成表示校正投影图像12的畸变的程度的校正信息(步骤S31)。

更具体言之，图像畸变校正部103，根据上述的峰值位置，判别投影图像12的畸变，相应于该判别结果对投影图像12的畸变进行校正，生成校正信息以便使投影图像12成为所要求的宽高比(纵横比)。

另外，颜色校正部122，根据表示理想的颜色的理想颜色信息和第1～第4环境影响感测信息，生成3D-LUT以便以理想的颜色对投影图像12进行投影(步骤S32)。

另外，亮度校正部124，根据第1～第3环境影响感测信息，生成白色图像(W图像)的环境影响感测信息(步骤S33)。另外，具体的方法与步骤S18的方法一样。

于是，亮度校正部124，根据第1～第4及W图像的环境影响感测信息和表示理想的亮度的理想亮度信息，生成1D-LUT以便以理想的亮度对投影图像12进行投影(步骤S34)。

由于步骤20以下的处理与实施例1一样，其说明予以省略。

如上所述，投影机20，也可以不利用投影对象区域信息、投影区域信息及显示区域信息执行环境影响减轻处理和图像畸变校正处理。

另外，根据实施例2，投影机20，由于不需要投影对象区域信息，即使是在不能检测到屏幕10等的四角的场合，也可以对图像的畸变进行校正。

当然，在实施例2中，投影机20，也可以进行变焦控制。

在此场合，由于环境影响感测部182，与变焦的控制状态无关，可以不断地对包含于图像畸变校正处理后图像内的投影图像12的规定区域进行感测，所以投影机20可以可靠地把握该规定区域中的环境影响，可以更适当地执行在执行投影图像12的畸变校正处理的场合的环境影响减轻处理。

(变形例)

以上说明的是应用本发明的优选实施例，但本发明的应用并不限定于上述实施例。

比如，在上述实施例中，投影机20，利用的是绿色和黑色的方格图形图像16，但是，比如，也可以利用绿色以外的单色(红色或蓝色)和黑色的方格图形图像。另外，构成方格图形图像16的颜色的图形也可以相反。

另外，在上述实施例中，投影机20，未利用白色的单色图像，但是，也可以在上述的单色图像之外利用白色的单色图像，也可以利用白色和黑色的方格图形图像代替方格图形图像16。

据此，投影机20，需要对新的白色的单色图像进行投影并进行感测处理，但可以不需要生成白色的校正感测信息的处理。

另外，比如，有时在处理部100中设置外光影响去除部，外光影响去除部，在K图像的图像畸变感测信息中具有大于等于规定值的辉度值的像素区域时，将GK差分图像中的该像素区域的辉度值变换为GK差分图像中的该显示区域附近的辉度值，并将变换后的信息作为K图像的图像畸变感测信息存储于存储部160也是可以的。

据此，投影机20，可以去除部分的外光80的影响，执行适当的图像处理。

另外，也不一定需要图4所示的前处理(步骤S1)，投影机20也可以在启动之后立即执行步骤S2以下的处理。

另外，在投影部190不具有变焦功能的场合，图像信息校正部120，也可以利用显示区域内的环境影响感测信息来代替利用校正感测信息而生成3D-LUT及1D-LUT。

另外，在上述实施例中，投影机20，是将K图像进行投影与感测，但作为变形例，也可以对非投影时的屏幕10进行感测生成各感测信息。

另外，投影图像12与屏幕10的位置关系并不限定于图1所示的示例。比如，投影图像12的整个外框既可以在屏幕10的外侧，也可以在屏幕10的内侧。

另外，方格图形图像16，并不限定于上述实施例。比如，中央区域及周围区域的形状并不限定于矩形，也可以是圆形、三角形等等。

另外，在将图像投影到屏幕10以外的黑板、白板等之中的投影对象区域的场合本发明也有效。

另外，比如，在上述实施例中，说明的是将图像处理系统装设于投影机20中的示例，但也可以装设于投影机20以外的CRT(阴极射线管)等投影机20以外的图像处理系统中。另外，作为投影机20，在液晶投影机以外，比如，也可以利用采用DMD(数字微镜器件)的投影机等。另外，DMD是美国Texas Instruments公司的商标。

另外，上述投影机20的功能，比如，既可以在投影机单体中装设，也可以在多个处理装置中分散(比如，在投影机和PC中分散处理)装设。

此外，在上述实施例中，是将图像畸变传感器60及环境影响传感器62内置于投影机20中的结构，但也可以是制作成为将图像畸变传感器60及环境影响传感器62与投影机20分开的独立的装置。

Claims (11)

1.一种图像处理系统，其特征在于包括：

通过对包含投影于投影对象区域的投影图像的至少一部分的区域进行感测而生成图像畸变感测信息的图像畸变感测部，

通过对上述投影图像的规定区域进行感测，生成表示上述规定区域中的亮度指标值的环境影响感测信息的环境影响感测部，

对上述投影图像的畸变进行校正的图像畸变校正部，

执行减轻由于理想环境与实际的使用环境的差别而产生的环境影响的处理的环境影响减轻部，以及

在不同的时刻分别将红色的单色图像、绿色的单色图像、蓝色的单色图像、黑色的单色图像作为上述投影图像进行投影的投影部，

上述环境影响感测部，作为上述规定区域，通过不断地对包含于图像畸变校正后的图像内的上述投影图像的区域进行感测而生成上述红色的单色图像、上述绿色的单色图像、上述蓝色的单色图像及上述黑色的单色图像的各自的上述环境影响感测信息，

上述环境影响减轻部，根据各环境影响感测信息，执行减轻上述环境影响的处理。

2.一种图像处理系统，其特征在于包括：

通过对包含投影于投影对象区域的投影图像的至少一部分的区域进行感测而生成图像畸变感测信息的图像畸变感测部，

通过对上述投影图像的中央附近的规定区域进行感测，生成表示上述规定区域中的亮度指标值的环境影响感测信息的环境影响感测部，

根据上述图像畸变感测信息，生成表示有关上述图像畸变感测部的感测图像中的上述投影图像的位置的信息的投影区域信息的投影区域信息生成部，

校正上述投影图像的畸变，并生成表示该校正的程度的校正信息的图像畸变校正部，

根据上述投影区域信息和上述校正信息，生成表示上述感测图像中的上述投影图像的畸变校正后的显示区域的显示区域信息的显示区域信息生成部，

执行减轻由于理想环境与实际的使用环境的差别而产生的环境影响的处理的环境影响减轻部，

在不同的时刻分别将红色的单色图像、绿色的单色图像、蓝色的单色图像、黑色的单色图像和包含红色、绿色、蓝色中的任何一种单色及黑色的多色图像作为上述投影图像进行投影的投影部，以及

生成规定的差分图像的差分图像生成部，

上述多色图像，由位于该多色图像的中央附近的中央图像、位于该中央图像周围的周围图像和上述中央图像及上述周围图像以外的背景图像构成，

上述中央图像及上述周围图像是黑色，上述背景图像是黑色以外的单色，或者上述中央图像及上述周围图像是黑色以外的单色，上述背景图像是黑色，

上述图像畸变感测部，通过对包含上述多色图像及红色、绿色、蓝色、黑色中的任何一种的单色图像的至少一部分的区域进行感测而生成各自的上述图像畸变感测信息，

上述环境影响感测部，通过对上述红色的单色图像、上述绿色的单色图像、上述蓝色的单色图像及上述黑色的单色图像的上述规定区域进行感测而生成各自的上述环境影响感测信息，

上述差分图像生成部，生成基于上述多色图像的图像畸变感测信息和上述任何一个单色图像的图像畸变感测信息的图形差分图像，

上述投影区域信息生成部，根据上述图形差分图像生成有关上述感测图像中的上述中央图像的位置的中央区域信息和有关上述感测图像中的上述周围图像的位置的周围区域信息，并根据上述中央区域信息及上述周围区域信息生成上述投影区域信息，

上述环境影响减轻部，根据各环境影响感测信息和上述显示区域信息，执行减轻上述环境影响的处理。

3.如权利要求2所述的图像处理系统，其特征在于包括：

对调整上述投影图像的大小的变焦部进行控制，并生成表示该调整的程度的调整信息的控制部，使得根据上述显示区域信息，以对于与上述投影对象区域内的上述显示区域相当的区域的最佳大小将上述投影图像进行投影，

上述环境影响减轻部包括：

根据上述调整信息，判别由于上述调整引起的上述投影图像的亮度的变化，并相应于该亮度的变化对包含于各环境影响感测信息中的上述显示区域内的信息进行校正，由此生成各个校正感测信息的感测信息校正部，以及

根据各校正感测信息对图像信息进行校正以便使上述投影图像的颜色及亮度变成理想状态的图像信息校正部。

4.如权利要求3所述的图像处理系统，其特征在于：

上述图像信息校正部包括：

根据表示理想的颜色的理想颜色信息和上述校正感测信息对图像信息进行校正，使得以上述理想的颜色对上述投影图像进行投影的颜色校正部，以及

根据表示理想的亮度的理想亮度信息和上述校正感测信息对利用上述颜色校正部校正了的图像信息进行校正，使得以上述理想的亮度对上述投影图像进行投影的亮度校正部。

5.如权利要求4所述的图像处理系统，其特征在于：

上述亮度校正部，根据红色、绿色、蓝色及黑色的各单色图像的校正感测信息生成白色的单色图像的校正感测信息，并利用该白色的单色图像的校正感测信息，对由上述颜色校正部校正了的图像信息进行校正。

6.如权利要求1所述的图像处理系统，其特征在于：

上述环境影响校正部，包括图像信息校正部，

上述图像信息校正部包括：

根据表示理想的颜色的理想颜色信息和各环境影响感测信息对图像信息进行校正，使得以上述理想的颜色对上述投影图像进行投影的颜色校正部，以及

根据表示理想的亮度的理想的亮度信息和各环境影响感测信息对利用上述颜色校正部校正了的图像信息进行校正，使得以上述理想的亮度对上述投影图像进行投影的亮度校正部。

7.如权利要求6所述的图像处理系统，其特征在于：

上述亮度校正部，根据红色、绿色、蓝色及黑色的各单色图像的环境影响感测信息生成白色的单色图像的环境影响感测信息，并利用该白色的单色图像的环境影响感测信息，对由上述颜色校正部校正了的图像信息进行校正。

8.如权利要求2所述的图像处理系统，其特征在于：

包括生成有关上述感测图像中的上述投影对象区域的位置的投影对象区域信息的投影对象区域信息生成部，

上述图像畸变感测部，通过感测包含上述黑色的单色图像的至少一部分的区域而生成黑色的单色图像的图像畸变感测信息，

上述差分图像生成部，根据上述黑色的单色图像的图像畸变感测信息和上述任何一种单色的单色图像的图像畸变感测信息，生成亮度差分图像，

上述投影对象区域信息生成部，根据上述亮度差分图像和上述投影区域信息生成上述投影对象区域信息，

上述图像畸变校正部，根据上述投影对象区域信息和上述投影区域信息对上述投影图像的畸变进行校正。

9.如权利要求1所述的图像处理系统，其特征在于：

上述投影部，在上述投影图像的投影前对位置确认图像进行投影，用来使使用者确认与上述规定区域相当的区域是否投影到上述投影对象区域。

10.一种投影机，其特征在于具有如权利要求1～9中的任何一项所述的图像处理系统。

11.一种图像处理方法，是一种利用具有图像畸变感测部、环境影响感测部、处理部、投影部的计算机的图像处理方法，其特征在于：

上述投影部，在不同的时刻将多色图像进行投影，该多色图像是红色的单色图像、绿色的单色图像、蓝色的单色图像、黑色的单色图像和包含红色、绿色、蓝色中的任何一种单色及黑色的图像，并且是由位于该图像的中央附近的中央图像、位于该中央图像周围的周围图像和上述中央图像及上述周围图像以外的背景图像构成的图像，

上述图像畸变感测部，

通过对投影于投影对象区域的包含红色、绿色、蓝色、黑色的任何一种单色图像的至少一部分的区域进行感测而生成第1图像畸变感测信息，

通过对投影于上述投影对象区域的包含上述多色图像的至少一部分的区域进行感测而生成第2图像畸变感测信息，

上述环境影响感测部，

通过对投影于上述投影对象区域的绿色的单色图像的上述中央附近的规定区域进行感测而生成第1环境影响感测信息，

通过对投影于上述投影对象区域的红色的单色图像的上述规定区域进行感测而生成第2环境影响感测信息，

通过对投影于上述投影对象区域的蓝色的单色图像的上述规定区域进行感测而生成第3环境影响感测信息，并且

通过对投影于上述投影对象区域的黑色的单色图像的上述规定区域进行感测而生成第4环境影响感测信息，

上述处理部，

根据上述第1及第2图像畸变感测信息生成图形差分图像，

根据上述图形差分图像，生成有关上述图像畸变感测部的感测图像中的上述中央图像的位置的中央区域信息和有关上述感测图像中的上述周围图像的位置的周围区域信息，

根据上述中央区域信息及上述周围区域信息，生成表示有关上述感测图像中的上述投影图像的位置的信息的投影区域信息，

根据上述投影区域信息，生成表示校正上述投影图像的畸变的程度的校正信息，

根据上述投影区域信息和上述校正信息，生成表示上述感测图像中的上述投影图像的畸变校正后的显示区域的显示区域信息，

根据上述校正信息，对图像信息进行校正以便对图像的畸变进行校正，并且

根据上述第1～第4环境影响感测信息和上述显示区域信息，对上述图像信息进行修正以便减轻由于理想环境和实际的使用环境的差异而产生的环境影响。

Images