CN102025868B - 图像投影系统和图像投影方法 - Google Patents

Abstract

为了以可容易识别绘制图像或投影图像的方式来投影图像，提供了一种图像投影系统和图像投影方法。所述图像投影系统包括：投影仪，用于将投影图像投影到白色书写板的投影表面上；绘制图像检测部分，用于在所述投影仪正在投影所述投影图像时检测绘制在所述白色书写板的投影表面上的绘制图像；以及修改部分，用于在检测到所述绘制图像的情况下，从投影在所述投影表面上的所述投影图像中指定至少包括与所检测到的绘制图像重叠的绘制图像部分的部分，并且基于所检测到的绘制图像来修改所述投影图像的所指定的部分，以便强调或取消所述绘制图像。

Description

图像投影系统和图像投影方法

技术领域

本发明涉及一种图像投影系统和一种图像投影方法。更具体地，本发明涉及一种将图像投影到投影表面的图像投影系统，以及一种由该图像投影系统执行的图像投影方法。

背景技术

在会议等中，当进行解释时，可以将解释材料的图像投影到投影表面上。近来，通常的情况是将解释材料的数据预先存储在计算机中，并且例如用作显示设备的投影仪被连接到计算机，以便使得投影仪显示从计算机输出的材料的图像。

日本专利特开No.2006-235158公开了一种投影系统，其中拾取已经从第一投影仪向其上投影了图像的投影表面的图像，生成用于取消投影表面上的彩色图案(pattern)的补偿参数，并且从第二投影仪将基于补偿参数生成的补偿图像投影到投影表面上。即使投影表面具有色彩图案时，该投影系统也能够将图像投影为在色彩上尽可能接近投影到白色屏幕上的图像。

另一方面，当在其上能够绘制字符或图形的白色书写板(whiteboard)被用作投影仪的投影表面时，可以在已投影的屏幕上叠加地绘制图像。然而，在该情况下，如果投影到白色书写板上的图像的背景在亮度上类似于绘制在白色书写板上的图像，则观看者可能难以识别绘制的图像。此外，在其中绘制的图像中的字符或图形叠加在包括在投影图像中的字符上时，可能难以区分投影图像中的字符。而且，在正在投影两个或更多个页面的图像的情况下，当在已在第一页面上绘制图像之后将投影图像从第一页面切换到第二页面时，对于第二页面的新投影图像将被叠加在为第一页面绘制且留在白色书写板上的图像上，导致难以识别新页面的投影图像。上述的常规投影系统还未考虑这样的问题。

发明内容

考虑到上述问题而已完成本发明，并且本发明的目的是提供一种能够以可容易识别绘制图像或投影图像的方式来投影图像的图像投影系统。

本发明的另一目的是提供一种使得能够以可容易识别绘制图像或投影图像的方式来投影图像的图像投影方法。

为了获得上述目的，根据本发明的一个方面，一种图像投影系统包括：投影部分，用于将投影图像投影到投影表面上；绘制图像检测部分，用于在通过投影部分投影投影图像时检测绘制在投影表面上的绘制图像；以及修改部分，用于在检测到绘制图像的情况下，从投影在投影表面上的投影图像中指定至少包括与所检测到的绘制图像重叠的绘制图像部分的部分，并且基于所检测到的绘制图像修改所指定的投影图像的部分，以便强调或取消绘制图像。

根据本发明的另一个方面，一种图像投影方法包括步骤：将投影图像投影到投影表面上；在投影步骤中投影投影图像时检测绘制到投影表面上的绘制图像；以及在检测到绘制图像的情况下，从投影在投影表面上的投影图像中指定至少包括与所检测到的绘制图像重叠的绘制图像部分的部分，并且基于所检测到的绘制图像修改所指定的投影图像的部分，以便强调或取消绘制图像。

通过下面结合附图对本发明的详细描述，本发明的上述和其它目的、特征、方面和优点将变得更加明显。

附图说明

图1示出根据本发明的实施例的图像投影系统的示例。

图2是示出MFP的硬件配置的示例的框图。

图3是示意性地示出包括在MFP中的CPU的功能的功能框图。

图4是示出投影图像的示例的第一图。

图5是示出拾取图像的示例的第一图。

图6A是示出绘制图像的示例的第一图。

图6B是部分示出绘制图像的亮度中的改变的第一图。

图7A是示出第一强调补偿图像的示例的图。

图7B是部分示出第一强调补偿图像的亮度中的改变的图。

图8A是示出修改后的投影图像的示例的第一图。

图8B是部分示出修改之前和之后的投影图像之间的亮度中的改变的第一图。

图9A是示出在正在投影修改后的投影图像的状态下获得的拾取图像的示例的图。

图9B是部分示出在正在投影修改后的投影图像的状态下获得的拾取图像的亮度中的改变的第一图。

图10是示出投影图像的示例的第二图。

图11是示出拾取图像的示例的第二图。

图12A是示出绘制图像的示例的第二图。

图12B是部分示出绘制图像的亮度中的改变的第二图。

图13A是示出第一取消补偿图像的示例的图。

图13B是部分示出第一取消补偿图像的亮度中的改变的图。

图14A是示出修改前的投影图像的示例的图。

图14B是示出修改后的投影图像的示例的第二图。

图14C是部分示出修改之前和之后的投影图像之间的亮度中的改变的第一图。

图15是部分示出在正在投影修改后的投影图像的状态下获得的拾取图像的亮度中的改变的第二图。

图16是示出投影图像的示例的第三图。

图17是示出拾取图像的示例的第三图。

图18是示出绘制图像的示例的第三图。

图19是示出在正在投影修改后的投影图像的状态下获得的拾取图像的部分的图。

图20是示出投影过程的流程的示例的流程图。

具体实施方式

现在将参照附图描述本发明的实施例。在附图中，相似的参考数字表示类似的部分，其具有类似的名称和功能，因此将不再重复其详细描述。

图1示出根据本发明的实施例的图像投影系统的示例。参考图1，图像投影系统1包括充当图像处理装置的多功能外围设备(MFP)100、投影仪200、照相机300以及白色书写板400。

在根据本实施例的图像投影系统1中，会议的展示者将作为用于展示的文件的电子数据的图像数据存储在MFP 100中。这里，假定图像数据包括关于多个页面的页面数据。从包括在图像数据中的关于多个页面的页面数据中，MFP 100向投影仪200发送关于要显示的页面的页面数据，以便使得投影仪200显示与页面数据相对应的图像。从MFP 100发送到投影仪200的页面数据可以是任何格式，只要其可以被投影仪200读取即可。MFP 100向投影仪200顺序地发送包括在图像数据中的各页面的页面数据片段，投影仪200进而显示与从MFP 100发送的页面数据的各片段相对应的图像。

注意，存储在MFP 100中的图像数据可以是由个人计算机生成的数据或MFP 100通过读取原稿而获得的数据。

投影仪200包括液晶显示器、透镜和光源，并且将从MFP 100接收的关于页面数据的图像投影到白色书写板400上。液晶显示器显示图像。从光源发出的光通过液晶显示器，以经由透镜被投影在白色书写板400上。当从投影仪200发出的光到达白色书写板400的绘制表面401时，作为正在液晶显示器上显示的图像的放大版本的图像403被投影在绘制表面401上。在根据本实施例的图像投影系统中，白色书写板400的绘制表面401还充当投影仪200的投影表面。

照相机300被放置为使得其视角与白色书写板400的绘制表面401相匹配。照相机300被MFP 100控制，以拾取白色书写板400的绘制表面401的图像，并且向MFP 100发送拾取图像。在投影仪200正在投影页面数据的图像的状态下，照相机300通过拾取绘制表面401的图像而输出的拾取图像包括与投影到绘制表面401上的页面数据相对应的图像403，而在投影仪200未投影任何页面数据的图像的状态下，从照相机300输出的拾取图像包括绘制表面401的拾取图像。此外，在字符和图形被绘制在绘制表面401上的状态下，照相机300通过拾取绘制表面401的图像而输出的拾取图像包括绘制在绘制表面401上的绘制图像，而在没有字符或图形被绘制在绘制表面401上的状态下，从照相机300输出的拾取图像不包括绘制在绘制表面401的图像。而且，在投影仪200正在投影页面数据的图像并且字符或图像绘制在绘制表面401的状态下，照相机300通过拾取绘制表面401的图像而输出的拾取图像包括与投影到绘制表面401上的页面数据相对应的图像403和绘制在绘制表面401上的绘制图像二者。

图2是示出MFP的硬件配置的示例的框图。参考图2，MFP 100包括：主电路110；原稿读取部分130，其读取原稿；自动文件馈送器120，其将原稿传递到原稿读取部分130；图像形成部分140，其在纸张等上形成从读取原稿的原稿读取部分130输出的静止图像；纸张馈送部分150，其将纸张提供给图像形成部分140；以及操作面板160，充当用户接口。主电路110包括中央处理单元(CPU)111、通信接口(I/F)部分112、只读存储器(ROM)113、随机存取存储器(RAM)114、电可擦除可编程ROM(EEPROM)115、作为大容量存储器的硬盘驱动(HDD)116、传真部分117、网络I/F 118和可以安装有闪存119A的卡接口(I/F)119。CPU 111与自动文件馈送器120、原稿读取部分130、图像形成部分140、纸张馈送部分150和操作面板160连接，并且负责MFP 100的整体控制。

ROM 113存储要由CPU 111执行的程序以及执行程序所必需的数据。RAM 114用作当CPU 111执行程序时的工作区域。此外，RAM 114临时存储从原稿读取部分130连续发送的静止图像。

操作面板160被提供在MFP 100的上表面上，并且包括显示部分160A和操作部分160B。显示部分160A是诸如液晶显示器(LCD)或有机电致发光显示器(ELD)的显示器，并且显示用于用户的指令菜单、关于所获取的图像数据的信息等。操作部分160B被提供有多个键，并且根据用户的键操作而接受诸如指令、字符和数字字符的数据输入。操作部分160B进一步包括提供在显示部分160A上的触摸面板。

通信I/F部分112是用于将MFP 100连接到照相机300和投影仪200的接口。这里，假定通信I/F部分112与照相机300和投影仪200执行串行通信。CPU 111经由通信I/F部分112与投影仪200和照相机300通信，以发送/接收数据。

传真部分117连接到公共交换电话网络(PSTN)并且向PSTN发送传真数据或从PSTN接收传真数据。传真部分117将所接收的传真数据存储在HDD116中，或将其输出到图像形成部分140。图像形成部分140将从传真部分117接收的传真数据打印在纸张上。此外，传真部分117将存储在HDD 116中的数据转换成传真数据，并且将其发送到连接到PSTN的传真机。

网络I/F 118是用于将MFP 100连接到局域网(LAN)的接口。CPU 111能够经由网络I/F 118与连接到LAN或经由LAN连接到因特网的计算机通信。连接到因特网的计算机包括发送和接收电子邮件的电子邮件服务器。LAN可以以有线或无线方式连接。此外，网络I/F 118连接到的网络不必是LAN；其可以是因特网、广域网(WAN)、公共交换电话网络(PSTN)等。

卡I/F 119安装有闪存119A。CPU 111能够经由卡I/F 119访问闪存119A。CPU 111将记录在安装到卡I/F 119的闪存119A上的程序加载到RAM114以执行。注意，由CPU 111执行的程序不限于记录在闪存119A上的程序。CPU111可以将存储在HDD 116中的程序加载到RAM 114以执行。在这种情况下，连接到LAN等的另一计算机可以重写存储在MFP 100的HDD 116中的程序，或可以额外地写入新程序，所述另一计算机能够经由网络I/F 118与MFP 100进行通信。此外，MFP 100可以从连接到网络的另一计算机下载程序，并且将程序存储在HDD 116中。

用于存储程序的记录介质不限于闪存119A。其可以是光盘(压缩盘-只读存储器(CD-ROM)、磁光盘(MO)、迷你盘(MD)、数字多功能盘(DVD))、IC卡、光卡或诸如掩膜ROM、EPROM、EEPROM等的半导体存储器。

如在此使用的，“程序”不仅仅包括可由CPU 111直接执行的程序，而且还包括源程序、压缩程序、加密程序等。

在根据本实施例的图像投影系统1中，MFP 100经由通信I/F部分112连接到投影仪200和照相机300以进行串行通信。可替代地，MFP 100可以经由网络I/F 118连接，或其可以执行并行通信。

图3是示意地示出在MFP中包括的CPU的功能的功能框图。图3中所示的功能被实现为包括在MFP 100中的CPU 111执行存储在ROM 113或闪存119A中的图像投影程序。参考图3，由CPU 111实现的功能包括：操作接受部分51，用于接受用户的操作；投影控制部分53，用于控制投影仪200；图像拾取控制部分59，用于控制照相机300；绘制图像检测部分61，用于从照相机300拾取的图像内检测绘制图像；修改部分57，用于修改投影仪200投影的投影图像；以及字符区域提取部分55，用于从投影仪200投影的投影图像中提取字符。

操作接受部分51接受用户输入到操作部分160B中的操作，并且向投影控制部分53和修改部分57输出所接受的操作。在远程操作MFP 100的情况下，操作接受部分51接受用户输入到连接到通信I/F部分112或网络I/F 118的远程操作终端中的操作。例如，可以将投影仪200配置为起远程操作终端的作用。具体地，可以经由通信I/F部分112将用于远程操作的操作屏幕发送到投影仪200，使得投影仪200在诸如LCD的显示器上显示操作屏幕。在这种情况下，当用户依据操作屏幕将操作输入到投影仪200中时，投影仪200向MFP 100发送输入操作。此外，在投影仪200经由LAN连接到MFP 100的情况下，MFP 100可以被配置为充当Web服务器。在这种情况下，当浏览程序被安装在投影仪200中时，可以将用于远程操作的操作屏幕作为网页从MFP 100发送到投影仪200。这允许投影仪200充当远程操作终端，而不需要在其中安装用于远程操作MFP 100的专用程序。

投影控制部分53控制经由通信I/F部分112连接的投影仪200。投影控制部分53将图像发送到投影仪200，以使得其投影图像。投影控制部分53依据从操作接受部分51接收的操作读取出预先存储在HDD 116中的图像数据。然后，投影控制部分53依据从操作接受部分51接收的操作选择关于包括在图像数据中的多个页面的页面数据的多个片段中的一个片段，并且经由通信I/F部分112将与所选择的页面数据的片段相对应的图像发送到投影仪200。这里，投影控制部分53发送到投影仪200以便被投影的图像因而称作“投影图像”。从操作接受部分51输入到投影控制部分53的操作在这里包括：用于指定图像数据91的操作、用于指示选择关于下一个页面的页面数据的页面向下(down)操作和用于指示选择关于先前页面的页面数据的页面向上(up)操作。投影控制部分53首先在图像数据中选择关于第一页面的页面数据，并且使得投影仪200投影与第一页面的页面数据相对应的投影图像。此后，投影控制部分53依据从操作接受部分51接收的操作使得投影仪200投影与所选择的页面的页面数据相对应的投影图像。

投影控制部分53使得投影仪200投影的投影图像不仅包括与页面数据相对应的图像，而且还包括从修改部分57接收的图像。随后将描述从修改部分57接收的图像。

图像拾取控制部分59控制经由通信I/F部分112连接的照相机300。图像拾取控制部分59使得照相机300拾取投影仪200的投影表面(即白色书写板400的绘制表面401)的图像，并且接收从照相机300输出的拾取图像。图像拾取控制部分59将拾取图像输出到字符区域提取部分55和绘制图像检测部分61。

绘制图像检测部分61从自图像拾取控制部分59接收的拾取图像中提取绘制图像。具体地，拾取图像和与作为投影控制部分53使得投影仪200投影的投影图像的基础的页面数据相对应的图像之间的差被提取为绘制图像。此外，当在投影控制部分53使得投影仪200不投影投影图像时从图像拾取控制部分59接收的拾取图像可以被认为是绘制图像。绘制图像检测部分61将所提取的绘制图像输出到修改部分57。

字符区域提取部分55从与作为投影控制部分53正使得投影仪200投影的投影图像的基础的页面数据相对应的图像中提取包括字符的字符区域。字符区域提取部分55将所提取的字符区域输出到修改部分57。字符区域提取部分55将字符本身提取为字符区域。为了从图像中提取字符区域，可以使用本领域已知的任何技术。例如，可以将图像划分为多个块，并且可以提取包含其中与相邻像素的亮度差大于或等于预定值的至少预定数目的像素的任何块。然后，在所提取的块中，可以将其像素值等于或大于预定值的像素的集合提取为字符。

在从绘制图像检测部分61接收到绘制图像后，修改部分57修改由投影仪200投影的投影图像，并且将修改后的投影图像输出到投影控制部分53。修改部分57包括取消补偿部分71和强调补偿部分73。当在正在投影投影图像时绘制图像检测部分61检测到绘制图像时，修改部分57激活强调补偿部分73。在投影控制部分53投影第一投影图像并且然后投影与第一投影图像不同的第二投影图像的情况下，当在投影第二投影图像之前绘制图像检测部分61检测到绘制图像时，修改部分57激活取消补偿部分71。

强调补偿部分73指定其中从绘制图像检测部分61接收的绘制图像与投影图像重叠的绘制图像部分，并且以强调绘制图像的方式修改投影图像中的目标部分，该目标部分由绘制图像部分以及其外围组成。具体地，强调补偿部分73将投影图像中的目标部分的亮度改变为比围绕投影图像中的目标部分的部分的亮度更高的亮度。更具体地，强调补偿部分73生成其中目标部分的亮度被设置为预定值并且除目标部分以外的部分的亮度被设置为零的第一强调补偿图像，并且将第一强调补偿图像与投影图像进行组合，由此修改投影图像。

现在将描述强调补偿。图4是示出投影图像的示例的第一图。在图4中，阴影区域示出例如蓝色的同一色彩的区域。图5是示出拾取图像的示例的第一图。图5中所示的拾取图像是在已经用黑色将字符“てがき”和包括箭头的图形绘制在绘制表面401上之后(例如在将图4中所示的投影图像正在投影在其上的状态下)由照相机300拾取白色书写板400的绘制表面401的图像时获得的。当以黑色在投影图像中的蓝色区域上绘制图像时，可能难以识别包括在绘制图像中的手写字符。

图6A是示出绘制图像的示例的第一图。根据在图4中所示的投影图像和图5中所示的拾取图像之间的差提取该绘制图像。图6B是部分示出绘制图像的亮度中的改变的第一图。参考图6B，绘制图像部分在亮度上低于除了绘制图像部分之外的部分。

图7A是示出第一强调补偿图像的示例的图。图7B是部分示出第一强调补偿图像的亮度中的改变的图。参考图7A和图7B，在第一强调补偿图像中，由绘制图像部分及其外围组成的目标部分的亮度被设置为预定值，并且除了目标部分之外的部分的亮度被设置为零。

图8A是示出修改后的投影图像的示例的第一图。图8B是部分示出在修改之前和之后的投影图像之间的亮度中的改变的第一图。在图8B中，虚线示出在修改之前的目标部分的亮度，并且实线示出在修改之后的目标部分的亮度。除了目标部分之外的部分的亮度在修改之前和之后保持相同。参考图8A和图8B，目标部分的亮度在修改之后的投影图像中比在修改之前的投影图像中更高。

图9A示出在其中正在投影修改后的投影图像的状态下获得的拾取图像的示例。图9B是部分示出在其中正在投影修改后的投影图像的状态下获得的拾取图像的亮度中的改变的第一图。参考图9A和图9B，当将图8A中所示的修改后的投影图像投影到白色书写板400的绘制表面401上时，已绘制在绘制表面401上的绘制图像落入投影图像的目标部分之内。这增加了在绘制图像周围的区域的亮度，允许观看者容易地识别绘制图像。

返回到图3，当操作接受部分51接受页面向下操作或页面向上操作时，取消补偿部分71将与作为投影的目标的页面数据相对应的图像设置为投影图像，指定其中投影图像和从绘制图像检测部分61接收的绘制图像彼此重叠的绘制图像部分，并且以取消绘制图像的方式修改投影图像中的绘制图像部分。具体地，取消补偿部分71将投影图像中的绘制图像部分的亮度改变为比围绕绘制图像部分的区域的亮度更高的亮度。更具体地，取消补偿部分71生成其中反转绘制图像的亮度的第一取消补偿图像，并且将第一取消补偿图像与投影图像进行组合。假设图像的亮度的范围从0到255，在第一取消补偿图像中，除了绘制图像部分之外的部分的亮度被设置为零，并且绘制图像部分的亮度被设置为通过从255中减去绘制图像中的绘制图像部分的亮度而获得的值。

以此方式，当将与关于新页面的页面数据相对应的图像投影为来自投影仪200的投影图像时，投影修改后的投影图像，其中落入在绘制在白色书写板400的绘制表面401上的绘制图像上的部分亮度较高。这能够使得绘制在白色书写板400上的图像不明显。

现在将描述取消补偿。图10是示出投影图像的示例的第二图。图11是示出拾取图像的示例的第二图。图11中所示的拾取图像是在已经用黑色将字符“てがき”和包括箭头的图形绘制在绘制表面401上之后(例如在将图10中所示的投影图像正在投影在其上的状态下)由照相机300拾取白色书写板400的绘制表面401的图像时获得的。

图12A是示出绘制图像的示例的第二图。根据在图10中所示的投影图像和图11中所示的拾取图像之间的差来提取该绘制图像。图12B是部分示出绘制图像的亮度中的改变的第二图。参考图12B，绘制图像部分的亮度低于除了绘制图像部分之外的部分的亮度。

图13A是示出第一取消补偿图像的示例的图。图13B是部分示出第一取消补偿图像的亮度中的改变的图。参考图13A和图13B，在第一取消补偿图像中，除了绘制图像部分之外的部分的亮度被设置为零，并且绘制图像部分的亮度被设置通过从255中减去绘制图像中的绘制图像部分的亮度而获得的值。

图14A是示出修改之前的投影图像的示例的图。图14B是示出修改后的投影图像的示例的第二图。图14C是部分示出在修改之前和之后的投影图像之间的亮度中的改变的第二图。参考图14C，虚线示出在修改之前的绘制图像部分的亮度，并且实线示出在修改之后的绘制图像部分的亮度。除了绘制图像部分之外的部分的亮度在修改之前和之后保持相同。参考图14A至图14C，绘制图像部分的亮度在修改之后的投影图像中比在修改之前的投影图像中更高。

图15是部分示出在其中正在投影修改后的投影图像的状态下获得的拾取图像的亮度中改变的第二图。参考图15，当将修改后的投影图像投影到白色书写板400的绘制表面401上时，照射在绘制表面401上绘制的绘制图像上的光量增加，使得绘制图像不明显。结果得到的图像变得类似于当将修改之前的投影图像投影到没有绘制图像的白色书写板400的绘制表面401上时将获得的图像。

返回到图3，在正在投影投影图像时由绘制图像检测部分61检测到绘制图像并且还从字符区域提取部分55接收到字符区域的情况下，则修改部分57同时激活取消补偿部分71和强调补偿部分73。具体地，当从字符区域提取部分55接收到字符区域时，取消补偿部分71指定其中绘制图像部分和字符区域彼此重叠的重叠部分，并且以取消绘制图像的方式修改重叠部分。具体地，取消补偿部分71将投影图像中的重叠部分的亮度改变为比围绕投影图像中的重叠部分的区域的亮度更高的亮度。更具体地，取消补偿部分71生成第二取消补偿图像，其中重叠部分的亮度被设置为通过从255中减去绘制图像中的重叠部分的亮度而获取的值并且除了重叠部分之外的部分的亮度被设置为零，并且将第二取消补偿图像与投影图像进行组合。

当从字符区域提取部分55接收到字符区域时，强调补偿部分73从目标部分内指定与字符区域不重叠的非重叠部分。所述目标部分由其中投影图像和绘制图像彼此重叠的绘制图像部分及其外围组成，并且以强调绘制图像的方式修改投影图像中的非重叠部分。具体地，强调补偿部分73将投影图像中的非重叠部分的亮度改变为比围绕投影图像中的非重叠部分的部分的亮度更高的亮度。更具体地，强调补偿部分73生成第二强调补偿图像，其中非重叠部分的亮度被设置为预定值并且除了非重叠部分之外的部分的亮度被设置为零，并且将第二强调补偿图像与投影图像进行组合，所述投影图像已通过取消补偿部分71与第二取消补偿图像进行组合，由此修改投影图像。

现在将具体描述取消和强调补偿过程。图16是示出投影图像的示例的第三图。在图16中，阴影区域示出例如蓝色的同一色彩的区域。图17示出拾取图像的示例。图17中所示的拾取图像是在已经用黑色将字符“てがき”和圆形绘制在绘制表面401上之后(例如在将图16中所示的投影图像正在投影在其上的状态下)由照相机300拾取白色书写板400的绘制表面401的图像时获得的。

图18是示出绘制图像的示例的第三图。根据在图16中所示的投影图像和图17中所示的拾取图像之间的差来提取该绘制图像。图19是示出在正在投影修改后的投影图像的状态下获得的拾取图像的一部分的图。在图19中，其中通过细阴影示出其中绘制图像部分和字符区域彼此重叠的重叠部分，并且通过粗阴影示出作为由绘制图像部分及其外围部分组成的目标部分的一部分并且与字符区域不重叠的非重叠部分。通过细阴影示出的重叠部分的亮度高于其周围区域的亮度。这使得绘制图像被取消，从而能够容易地识别字符。此外，通过粗阴影所示的非重叠部分的亮度高于除了目标部分中的非重叠部分之外的部分的亮度，因而可容易地识别绘制图像。

图20是图示投影过程的流程的示例的流程图。当包括在MFP 100中的CPU 111执行存储在ROM 113或闪存119A中的图像投影程序时，CPU 111执行投影过程。参考图20，CPU 111读取存储在HDD 116中的图像数据91(步骤S01)。依据用户输入到操作部分160B中的操作或在从远程操作终端来远程操作MFP 100的情况下依据由用户输入到远程操作终端中的输入，CPU 111指定和读取存储在HDD 116中的图像数据91。

然后，CPU 111将包括在图像数据中的与关于第一页面的页面数据相对应的图像设置为投影图像(步骤S02)。然后，CPU 111使得投影仪200投影投影图像(步骤S03)。这时，将与关于第一页面的页面数据相对应的图像投影到白色书写板400的绘制表面401上。

在下面的步骤S04中，CPU 111控制照相机300拾取投影表面(即白色书写板400的绘制表面401)的图像。然后，其获取从照相机300输出的拾取图像(步骤S05)。CPU 111然后确定是否已检测到绘制图像(步骤S06)。将在步骤S03中投影的投影图像与在步骤S05中获取的拾取图像之间的差认为是绘制图像。如果已检测到绘制图像，则过程进行到步骤S07；否则，过程进行到步骤S18。

在步骤S07中，CPU 111从在步骤S03中投影的投影图像中提取字符。然后，CPU 111确定在步骤S06中提取的绘制图像和在步骤S07中提取的字符是否彼此重叠(S08)。具体地，确定包括绘制图像的绘制图像部分和包括字符的字符区域是否彼此重叠。如果绘制图像部分和字符区域彼此重叠，则过程进行到步骤S09，以便执行取消和强调补偿过程。如果绘制图像部分和字符区域彼此不重叠，则过程进行到步骤S14，以便执行强调补偿过程。当没有从投影图像中提取到字符时，确定绘制图像和字符彼此不重叠，并且过程进行到步骤S14。

在步骤S09中，指定重叠部分。重叠部分是其中绘制图像部分和字符区域彼此重叠的部分。然后，指定非重叠部分(步骤S10)。非重叠部分是由绘制图像部分及其外围组成的目标部分中与字符区域不重叠的一部分。在下面的步骤S11中，生成用于取消绘制图像的第二取消补偿图像。第二取消补偿图像是其中重叠部分的亮度被设置为通过从255中减去绘制图像中的重叠部分的亮度而获得的值、而除了重叠部分之外的部分的亮度被设置为零的图像。

然后，在步骤S12中，生成用于强调绘制图像的第二强调补偿图像。第二强调补偿图像是其中非重叠部分的亮度被设置为预定值、而除了非重叠部分之外的部分的亮度被设置为零的图像。在下面的步骤S13中，将在步骤S11中生成的第二取消补偿图像和在步骤S12中生成的第二强调补偿图像与在步骤S04中投影的投影图像进行组合，以由此生成组合图像。然后，CPU 111使得投影仪200投影组合图像(步骤S17)。这时，当绘制图像被绘制在白色书写板400的绘制表面401上时，投影修改后的投影图像，其中绘制图像部分和字符区域彼此重叠的重叠部分在亮度上高于其周围的区域，并且在由绘制图像部分及其外围组成的目标部分中，与字符区域不重叠的非重叠部分在亮度上高于其周围区域。结果，在其中绘制图像和字符彼此重叠的情况下，能够将投影图像投影为使得可区分绘制图像和字符二者。

另一方面，在步骤S 14中，指定目标部分。目标部分是由绘制图像部分及其外围组成的部分。在下面的步骤S15中，生成用于强调绘制图像的第一强调补偿图像。第一强调补偿图像是其中目标部分的亮度被设置为预定值并且除了目标部分之外的部分的亮度被设置为零的图像。在下面的步骤S16中，将在步骤S15中生成的第一强调补偿图像与在步骤S04中生成的投影图像进行组合，以生成组合图像，并且过程进行到步骤S17。在步骤S17中，CPU 111使得投影仪200投影在步骤S16中生成的组合图像。这时，当绘制图像被绘制在白色书写板400的绘制表面401上时，投影修改后的投影图像，其中由绘制图像部分及其外围组成的目标部分在亮度上高于其周围区域。结果，能够将投影图像投影为使得可容易地区分绘制图像。

在步骤S18中，确定是否已接受页面向下操作。如果已接受，则过程进行到步骤S19；否则，过程返回到步骤S04。尽管在这里描述页面向下操作，但是接受的操作不限于此；其可以是页面向上操作或用于切换投影图像的任何其它操作。

在步骤S19中，CPU 111使得投影仪200停止图像的投影。然后，CPU 111控制照相机300拾取投影表面(即白色书写板400的绘制表面401)的图像(步骤S20)，并且获取从照相机300输出的拾取图像(步骤S21)。然后，在于步骤S01中读取的图像数据中所包括的页面数据的多个片段中，与关于在恰好那时以前已处理的页面之后的页面的页面数据相对应的图像被设置为投影图像(步骤S22)。

在步骤S23中，确定是否已检测到绘制图像。具体地，确定在步骤S21中获取的拾取图像是否包括绘制图像。如果已检测到绘制图像，则过程进行到步骤S24；否则，过程返回到步骤S03。

在步骤S24中，生成用于取消绘制图像的第一取消补偿图像。第一取消补偿图像是其中包括绘制图像的绘制图像部分的亮度被设置为通过从255中减去拾取图像中的绘制图像部分的亮度而获得的值、而除了绘制图像部分之外的部分的亮度被设置为零的图像。

然后，在步骤S25中，将在步骤S24中生成的第一取消补偿图像与在步骤S22中设置的投影图像进行组合，以生成组合图像。组合图像被设置为新投影图像(步骤S26)，并且过程返回到步骤S03。在步骤S03中，CPU 111使得投影仪200投影新投影图像，或换句话说，投影通过将第一取消补偿图像与和新页面数据相对应的图像进行组合而获得的组合图像。这时，当绘制图像被绘制在白色书写板400的绘制表面401上时，投影修改后的投影图像，其中绘制图像部分在亮度上高于其周围区域。这使得取消绘制图像，由此关于新页面的投影图像变得可容易识别。

如上所述，根据本实施例的图像投影系统1，当投影图像被投影在白色书写板400的绘制表面401上的同时检测到绘制在其上的图像时，基于绘制图像修改投影到投影表面上的投影图像。因此，能够投影其中进行修改以强调或取消绘制在白色书写板400的绘制表面401上的绘制图像的投影图像。

具体地，修改目标部分以强调绘制图像，所述目标部分由其中投影在白色书写板400的绘制表面401上的投影图像和绘制图像彼此重叠的绘制图像部分以及绘制图像部分的外围组成。这允许可容易地识别绘制在白色书写板400的绘制表面401上的绘制图像。

更具体地，将投影图像中的目标部分修改为具有比围绕目标部分的区域的亮度更高的亮度。这增加了绘制图像周围的区域的亮度，允许绘制图像与投影图像分离或区分，由此绘制图像变得可容易识别。

在投影图像包括其中包含字符的字符区域的情况下，修改其中投影图像和绘制图像彼此重叠的、字符区域与绘制图像部分相重叠的重叠部分，以便取消绘制图像。此外，修改非重叠部分以强调绘制图像，所述非重叠部分包括在由绘制图像部分及其外围组成的并且与字符区域不重叠的目标部分中。结果，可以以可容易地识别包括在投影图像中的字符和绘制图像两者的方式修改投影图象。

具体地，将重叠部分修改为具有比围绕重叠部分的区域的亮度更高的亮度。结果，增加了重叠部分的亮度，使得增加了照射在绘制图像上的光量。这使得绘制图像不明显，因此可容易识别字符。

此外，将非重叠部分修改为具有比围绕非重叠部分的区域的亮度更高的亮度。结果，增加了绘制图像周围的区域的亮度，使得能够容易识别绘制图像。

当将投影图像切换到另一图像时，在该其他图像中，修改将与绘制图像重叠的绘制图像部分以取消绘制图像。这使得取消绘制图像，使可容易地识别其他图像。

具体地，将绘制图像部分的亮度改变为比围绕绘制图像部分的区域的亮度更高的级别，以便取消绘制图像。这增加了照射在绘制图像上的光量，由此使得绘制图像不明显。

尽管上面描述的实施例中的图像投影系统1由MFP 100、投影仪200和照相机300组成，但是可以利用个人计算机替换MFP 100，只要其能够控制投影仪200和照相机300即可。此外，可以将投影仪配置为其中构建有照相机300并且具有图3中所示的功能，在该情况下可以仅通过投影仪200来实现图像投影系统1。

此外，当然可以将本发明理解为一种用于执行图20中所示的过程的图像投影方法或一种用于使得计算机执行该图像投影方法的图像投影程序。

虽然已经详细描述和图示了本发明，但是应清楚地理解其仅通过图示的方式并且仅是示例而不是用于限制，本发明的精神和范围仅由所附权利要求来限定。

Claims (14)

1.一种图像投影系统，包括：

投影部分，用于将投影图像投影到投影表面上；

绘制图像检测部分，用于在通过所述投影部分正在投影所述投影图像时检测绘制在所述投影表面上的绘制图像；

修改部分，用于在检测到所述绘制图像的情况下，从投影在所述投影表面上的所述投影图像中指定至少包括与所述所检测到的绘制图像重叠的绘制图像部分的部分，并且基于所检测到的绘制图像来修改所述投影图像的所指定的部分，以便强调所述绘制图像；以及

字符区域提取部分，用于从投影的所述投影图像中提取包括字符的字符区域，

其中，所述修改部分包括：

取消补偿部分，用于在提取了所述字符区域的情况下，指定其中所述所提取的字符区域与所述绘制图像部分重叠的重叠部分并且修改所述重叠部分以便取消所述绘制图像，在所述绘制图像部分中，正在投影在所述投影表面上的所述投影图像和所述所检测到的绘制图像彼此重叠；以及

强调补偿部分，用于指定目标部分并且修改所述目标部分以强调所述绘制图像，所述目标部分包括其中正在投影在所述投影表面的所述投影图像与所述所检测到的绘制图像彼此重叠的绘制图像部分以及所述绘制图像部分的外围，并且在提取了所述字符区域的情况下，从该目标部分中指定与所述所提取的字符区域不重叠的非重叠部分并且修改所述非重叠部分以便强调所述绘制图像。

2.根据权利要求1所述的图像投影系统，其中，所述强调补偿部分修改所述目标部分，以便具有比围绕所述目标部分的区域的亮度更高的亮度。

3.根据权利要求1所述的图像投影系统，其中，所述取消补偿部分修改所述重叠部分，以便具有比围绕所述重叠部分的区域的亮度更高的亮度。

4.根据权利要求1或3所述的图像投影系统，其中，所述强调补偿部分修改所述非重叠部分，以便具有比围绕所述非重叠部分的区域的亮度更高的亮度。

5.根据权利要求1-2中任一项所述的图像投影系统，其中，所述修改部分包括取消补偿部分，所述取消补偿部分指定绘制图像部分并且修改所述绘制图像部分以便取消所述绘制图像，在所述绘制图像部分中，所述投影图像与所述所检测到的绘制图像彼此重叠。

6.根据权利要求5所述的图像投影系统，其中，在所述投影部分以第一投影图像和第二投影图像的次序连续地投影第一投影图像和第二投影图像的状态中，在投影所述第二投影图像之前所述绘制图像检测部分检测到绘制图像的情况下，所述取消补偿部分修改所述第二投影图像。

7.根据权利要求5所述的图像投影系统，其中，所述取消补偿部分修改所述绘制图像部分，以便具有比围绕所述绘制图像部分的区域的亮度更高的亮度。

8.一种图像投影方法，包括步骤：

将投影图像投影到投影表面上；

在所述投影步骤中正在投影所述投影图像时检测绘制到所述投影表面上的绘制图像；

在检测到所述绘制图像的情况下，从投影在所述投影表面上的所述投影图像中指定至少包括与所述所检测到的绘制图像重叠的绘制图像部分的部分，并且基于所检测到的绘制图像修改所述投影图像的所指定的部分，以便强调所述绘制图像；以及

从所投影的所述投影图像中提取包括字符的字符区域，

其中，所述修改步骤包括：

取消补偿步骤，在提取了所述字符区域的情况下，指定其中所述所提取的字符区域与所述绘制图像部分重叠的重叠部分并且修改所述重叠部分以便取消所述绘制图像，在所述绘制图像部分中，正在投影在所述投影表面上的所述投影图像和所述所检测到的绘制图像彼此重叠；以及

强调补偿步骤，指定目标部分并且修改所述目标部分以强调所述绘制图像，所述目标部分包括其中正在投影在所述投影表面上的所述投影图像与所述所检测到的绘制图像彼此重叠的绘制图像部分以及所述绘制图像部分的外围，并且在提取了所述字符区域的情况下，从该目标部分中指定与所述所提取的字符区域不重叠的非重叠部分并且修改所述非重叠部分以便强调所述绘制图像。

9.根据权利要求8所述的图像投影方法，其中，所述强调补偿步骤包括步骤：修改所述目标部分，以便具有比围绕所述目标部分的区域的亮度更高的亮度。

10.根据权利要求8所述的图像投影方法，其中，所述取消补偿步骤包括步骤：修改所述重叠部分，以便具有比围绕所述重叠部分的区域的亮度更高的亮度。

11.根据权利要求8所述的图像投影方法，其中，所述强调补偿步骤包括步骤：修改所述非重叠部分，以便具有比围绕所述非重叠部分的区域的亮度更高的亮度。

12.根据权利要求8所述的图像投影方法，其中，所述修改步骤包括取消补偿步骤：指定绘制图像部分并且修改所述绘制图像部分以便取消所述绘制图像，在所述绘制图像部分中，所述投影图像与所述所检测的绘制图像彼此重叠。

13.根据权利要求12所述的图像投影方法，其中，所述投影步骤包括步骤：在所述投影步骤中以第一投影图像和第二投影图像的次序连续地投影第一投影图像和第二投影图像的状态中，在投影所述第二投影图像之前在所述检测步骤中检测到绘制图像的情况下，修改所述第二投影图像。

14.根据权利要求12所述的图像投影方法，其中，所述取消补偿步骤包括步骤：修改所述绘制图像部分，以便具有比围绕所述绘制图像部分的区域的亮度更高的亮度。

Images