CN104023159B - 图像处理装置、图像处理系统和图像处理方法 - Google Patents

Abstract

提供了图像处理装置、图像处理系统和图像处理方法。该图像处理装置包括：第一显示单元，在操作和显示单元上显示视频输入，第二显示单元，显示输入图像，所述输入图像叠加在操作和显示单元上显示的视频输入上，以及捕获图像记录单元，其记录在操作和显示单元上显示的视频输入和输入图像的捕获图像。当捕获图像记录单元记录输入图像的捕获图像时，第二显示单元擦除所记录的输入图像。

Description

图像处理装置、图像处理系统和图像处理方法

技术领域

本发明涉及图像处理装置、图像处理系统和图像处理方法。

背景技术

所谓的“电子信息板”可在市场上获得，在所谓的“电子信息板”中，在显示器上安装触摸屏面板。该显示器可以是使用平板的显示器，例如，液晶面板或等离子面板或投影仪。电子信息板可以包括多个功能。

所谓的“白板”功能(其使得用户能够使用触摸笔或用户的手指在触摸屏面板上书写)是电子信息板的多个功能之一。白板功能可以在屏幕上显示对应于在触摸屏面板上做出的笔划的笔划图像。

电子信息板的另一功能使得笔划图像能够叠加到从视频输出装置输入并显示在屏幕上的视频上。所述视频输出装置可以是连接到所述电子信息板的个人计算机、电视摄像机等。

电子信息板的再一功能使得能够通过网络在该电子信息板和另一电子信息板之间共享图像。

现有技术的示例例如在日本特开专利公开No.2005-92538，No.2012-84122，No.2004-102455和No.2003-229987中提出。

然而，根据传统的电子信息板，当一起存储从视频输出装置输入并显示的视频以及对应于由用户做出的笔划的笔划图像时，视频必须一次性存储为捕获图像，而笔划图像必须被叠加在捕获图像上并存储。

此外，当用户在显示的捕获图像做出笔划且来自视频输出装置的视频在其后显示时，显示器必须切换到来自视频输出装置的视频。例如，在其中视频在个人计算机的屏幕上由滚动操作滚动以及要连续在每个滚动视频上做出笔划并存储的情况下，从一个视频到另一视频的显示的切换对于用户变成麻烦的操作。

发明内容

因此，本发明的一个实施例中的一般目的在于提供可以抑制上述问题的新颖的和有用的图像处理装置、图像处理系统和图像处理方法。

本发明一个实施例中的另一个和更具体的目的在于提供可以以改进的可操作性存储视频输入和由用户做出的输入的图像处理装置、图像处理系统和图像处理方法。

根据本发明的一个方面，图像处理装置可以包括：第一显示单元，配置为在操作和显示单元上显示视频输入；第二显示单元，配置为显示输入图像，该输入图像叠加在操作和显示单元上显示的视频输入上；以及捕获图像记录单元，配置为记录显示在操作和显示单元上的视频输入和输入图像的捕获图像，其中当捕获图像记录单元记录输入图像的捕获图像时，第二显示单元擦除记录的输入图像。

根据本发明的另一方面，一种图像处理装置可包括：视频输入单元，配置为接收视频输入；操作和显示单元，配置为显示来自所述视频输入单元的视频输入；检测单元，配置为检测来自视频输入单元的视频输入的存在的变化；以及显示切换单元，配置为在屏幕页面和捕获页面之间切换所述操作和显示单元上的显示，在所述屏幕页面中，输入图像叠加在显示的视频输入上，在所述捕获页面中捕获屏幕页面，其中当检测单元检测到变化时，显示切换单元在所述屏幕页面和所述捕获页面之间切换。

在结合附图阅读时，从以下详细描述中，本发明的其他目的和另外的特征将是显而易见的。

附图说明

图1是示出在一个实施例中的图像处理装置的配置的示例的框图；

图2是用于说明页面捕获处理的示例的流程图；

图3是示出写在屏幕页面上的笔划的示例的示意图；

图4是示出捕获的屏幕页面的示例的示意图；

图5是示出显示的捕获图像的示例的示意图；

图6是示出笔按钮的详细设置的示例的示意图；以及

图7是用于说明处于视频输入状态的显示切换处理的示例的流程图。

具体实施方式

参照附图给出图像处理装置、图像处理系统和图像处理方法的实施例的描述。

图1是示出在一个实施例中的图像处理装置的配置的示例的框图。图1中示出的图像处理装置1例如可以形成电子信息板、便携式终端、PC(个人计算机)等。

图1所示的图像处理装置1包括控制单元10、操作和显示单元21、外围设备接口(I/F)22、网络接口(I/F)23以及存储单元24。

操作和显示单元21包括在操作和显示屏幕上显示信息的显示功能，以及从操作和显示屏输入信息的输入功能。例如，液晶显示器、等离子体显示器等可提供显示功能。

在这个示例中，操作和显示单元21可以由触摸屏面板形成。在触摸屏面板中感测触摸或输入的方法可以包括电容或静电电容方法，电阻或电阻膜技术，SAW(表面声波)或超声波方法，红外线方法等。用户可使用触摸笔或用户手指在触摸屏面板上书写，而对应于输入的输入图像(例如由用户使用触摸笔或用户手指做出的笔划)由触摸屏面板感测。由用户做出的笔划对应于用户可自由书写的字符、线段、图表等，而笔划图像是由用户输入的字符、图形等。可以提供触摸笔以专门用于使得输入适合由触摸屏面板使用的感测方法。

由用户做出的输入的输入图像可以包括预定图像，例如由用户选择的标记，该标记粘贴到触摸屏面板上由用户指定的位置上。由用户做出的输入的输入图像也可以包括从键盘等输入的字符等，并且输入到触摸屏面板上的预定位置。为方便起见，假定在下面的描述中，该“笔划”可包括使用合适方法关于触摸屏面板做出的任何形式的输入，并且“笔划图像”可以包括由“笔划”输入的任何图像或手迹(writing)。

在操作和显示单元21上进行的显示的示例示于图3中，其将在后面更详细描述。在图3中，操作和显示单元21包括主显示区域210、按钮区域31和页表区域32。主显示区域210、按钮区域31和页表区域32中的每一个形成分层结构的一层。换句话说，多个层的图像叠加(或重叠)，并且在操作和显示单元21上显示。按钮区域31和页表区域32分别布置在操作和显示单元21的右端和下端。按钮区域31和页表区域32可以始终显示在主显示区域210的层上面的层中。按钮区域31和页表区域32的布局不限于图3所示的布局。例如，布局位置、显示和非显示设置以及按钮区域31和页表区域32的分层结构中层的关系可以修改。

按钮区域31包括共享按钮211、放大按钮212、笔按钮213、选择或删除按钮214、捕获按钮215、邮件保存按钮216、新页面按钮217、保存按钮218和结束按钮219。

页表区域32包括视频开关按钮321，以及具有多个显示区域的缩略图显示区域322。

放大按钮212指示在主显示区域210中显示的图像的放大或缩小。选择或删除按钮214指示由用户输入的笔划的选择，或指示由用户输入的笔划的删除。邮件保存按钮216指示通过邮件发送所捕获的图像。新页面按钮217指示创建空白的新捕获页面。保存按钮218指示待保存的所有创建的捕获页面。与显示区域相关联的其他按钮和操作的功能将在后面给出。

现在返回到图1的描述，外围设备接口22是视频输入单元的示例，该视频输入单元包括从视频输出设备500(例如PC500-1、摄像机500-2、DVD(数字多功能盘)播放器(或磁带驱动器)500-3等)接收视频输入的视频输入功能。当然，PC500-1、摄像机500-2以及DVD播放器500-3中只有一个需要提供为连接到所述图像处理装置1的视频输出设备500。外围设备接口22可以是标准化的视频接口，例如VGA(视频图形阵列)、DVI(数字视频接口)、HDMI(高清晰度多媒体接口，注册商标)等。外围设备接口22还可以是标准化的串行总线。

在外围设备接口22包括多个端口(未示出)的情况下，多个视频输出设备500可以同时通过多个端口连接到外围设备接口22。此外，来自多个视频输出设备500中每一个的视频输入可与外围设备接口22的端口区分开，并且例如通过切换活动的外围设备接口22的端口，可将视频输入从一个视频输出设备500切换到另一个视频输出设备500。例如，视频输入的切换可以由图像处理装置1的用户做出。

网络接口23包括使用预定的网络通信协议、使得由图像处理装置1经由网络51执行有线或无线网络通信的功能。网络51可以是用于在有限范围内通信的LAN(局域网)，用于在宽范围内通信的WAN(广域网)，例如因特网等。例如，网络接口23也可以由使能经由网络51的有线或无线通信的网络适配器形成。

例如，网络接口23使得图像处理装置1能够经由网络51连接到另一个图像处理装置(未示出)。例如，通过连接到另一个图像处理装置，图像处理装置1可以共享在操作和显示单元21上显示的视频、笔划图像等。相互通信的图像处理装置1和另一个图像处理装置例如可以是相同类型的装置的组合，例如一对电子信息板。此外，该相互通信的图像处理装置1和另一个图像处理装置例如可以是多种类型的装置的组合，例如电子信息板和便携式终端。

存储单元24存储捕获图像、笔划图像、图像处理装置1通信的登记的目的地、各种设置信息等。存储单元24可以由使用硬盘、硅磁盘、非易失性存储设备(例如闪速存储器)等的HDD(硬盘驱动器)形成。可替换地，该存储单元24可以由CPU(中央处理单元，未示出)的主存储器(未示出)的区域来形成。例如，CPU可形成控制单元10。

控制单元10包括UI(用户接口)控制模块101、视频控制模块102、页面控制模块103、远程共享控制模块104、外围设备接口模块105和网络接口模块106。

UI控制模块101控制要在操作和显示单元21上显示的图像的显示。此外，UI控制模块101控制在操作和显示单元21上显示的按钮的控制操作。UI控制模块101检测按下(也就是通过触摸笔等的按钮选择)，并且执行对应于与所按下的按钮相关联的功能的控制。当通过按下选择按钮时，表示该选择的信号产生并且被提供给UI控制模块101，使得UI控制模块101可以从这个信号识别哪个按钮已经由用户选择。

此外，UI控制模块101可形成笔划显示单元的示例，笔划显示单元包括笔划显示功能来控制由笔按钮213设定的触摸笔输入的笔划的输入。UI控制模块101检测由触摸笔等对操作和显示单元21的触摸(或接触)，并记录该触摸的轨迹作为笔划，直到触摸笔等触摸状态分离操作和显示单元21为止。UI控制模块101通过在由视频控制模块210(稍后描述)在主显示区域210上显示的视频上叠加笔划图像，来显示所记录笔划的笔划图像。

将给出笔按钮213的更详细的描述。图6是示出笔按钮213的详细设置的示例的示意图。在图6中，当笔按钮213被按下时，UI控制模块101在笔按钮213的左侧上显示详细的设置屏幕2130。详细的设置屏幕2130显示颜色设置2131、透明度设置2132、线(或笔划)宽度设置2133、线型设置2134、标记设置2135和操作设置2136。

颜色设置2131设置触摸笔的颜色。透明度设置2132设置由触摸笔输入的笔划的透明度。例如，对应半透明，透明度可以是50％或20％，以便笔划图像叠加在其上的视频(例如[MSOffice2]，[MSOffice3]或[MSOffice4](注册商标)通过笔划图像可见。线宽设置2133设置触摸笔的线宽。线型设置2134设定触摸笔的线类型，例如实线、虚线、点划线、装饰线等。标记设置2135设置标记，例如绝密标记、保密标记、仅内部使用标记等。操作设置2136设置将在后面描述的操作。

UI控制模块101可在存储单元24中保存在详细设置屏幕2130上选择的设置，并在操作和显示单元21上显示所保存的设置。

UI控制模块101可以形成显示切换单元的示例，该显示切换单元包括显示切换功能以在捕获页面和屏幕页面之间切换。更具体地，当如上结合图3所述的视频开关按钮321被按下时，UI控制模块101可以在捕获页面和屏幕页面之间切换主显示区域210中的显示。在本实施例中，“屏幕页面”指的是其中来自视频输出设备500的视频输入经由所述外围设备接口22输入到图像处理装置1的页面。另外，在本实施例中的“捕获页面”指的是当在正在显示屏幕页面的同时按下捕获按钮215时捕获和记录的页面。缩略图显示区域322布置在图3所示的主显示区域210的下端，捕获页面的缩略图显示在所述缩略图显示区域322中。当用户按下(或触摸)缩略图显示区域322中显示的缩略图之一时，在主显示区域210中显示对应于被压下的缩略图的所记录的捕获页面。当在正在显示捕获页面的同时按下视频切换按钮321时，主显示区域210中的显示切换到屏幕页面。

另外，在其中由后述的视频控制模块102检测的视频输入的存在发生变化的情况下，UI控制模块101可以取决于变化而在捕获页面和屏幕页面之间切换显示。切换显示的详细情况将结合图7稍后描述。

视频控制模块102可以形成视频显示单元的示例，该视频显示单元包括视频显示功能以控制从视频输出装置500经由外围设备接口22到图像处理装置1的视频输入的显示。例如，视频控制模块102可以调整来自视频输出装置500的视频输入的分辨率、画面长宽比等，并在主显示区域210中显示调整后的视频。此外，该视频控制模块102可按照DVI、HDMI等控制数字视频的显示。视频控制模块102可以控制存储在存储单元24中的视频或经由网络接口23接收的视频的显示。例如，视频控制模块102可以控制从视频分发服务器(未示出)分发并高速缓存在存储单元24中的流视频的显示。

视频控制模块102可以形成检测单元的示例，该检测单元包括检测功能以检测从视频输出装置500经由外围设备接口22到图像处理装置1的视频输入的存在的变化。由视频控制模块102检测到的视频输入的存在的变化可以是从无视频输入状态(其中没有视频输入到图像处理装置1)到视频输入状态(其中视频输入到图像处理装置1)的变化，以及从视频输入状态到无视频输入状态的变化。当检测到视频输入的存在的变化时，视频控制模块102发送指示变化的状态变化到UI控制模块101。

视频控制模块102可以检测来自经由后面将要描述的网络接口模块106连接到图像处理装置1的另一个图像处理装置的视频输入的存在的变化，并通过与其它图像处理装置的网络接口模块通信而与图像处理装置1共享显示图像。例如，视频输入的存在的变化可添加到用于发送和接收视频的预定命令。

视频控制模块102可以形成包括捕获功能以捕获视频输入的捕获单元的示例。更具体地，当按下捕获按钮215时，视频控制模块102可以捕获正在主显示区域210中显示的视频，并生成捕获图像(或快照)以及它们的缩略图图像。视频控制模块102将所生成的捕获图像和缩略图图像发送到页面控制模块103。

页面控制模块103控制屏幕页面和捕获页面。更具体地，页面控制模块103可形成捕获图像记录单元的示例，捕获图像记录单元包括捕获图像记录功能以在按下捕获按钮215或每次切换显示的页面时，响应于来自UI控制模块101的指令，在存储单元24的存储区域中将由视频控制模块102生成的捕获图像和写在主显示区域210上的笔划的笔划图像记录为对应于该层的捕获页面。当在存储单元24中存储捕获图像和笔划图像时，通过将标识该层的标识符添加到捕获图像和笔划图像中的每一个上，可以对应于相应的层而存储捕获图像和笔划图像。标识符可以被添加到一层的捕获图像，而相同标识符可被添加到多层的笔划图像并被存储，使得可使用标识符作为密钥来读取这些层中的每一层。

捕获页面将屏幕页面的捕获图像认为是“视频显示层”，以及将笔划图像认为是“笔划显示层”，并在不同的层中记录捕获图像和笔划图像。因此，可以独立于(或不依赖于)屏幕页面上显示的视频的捕获图像修改或删除记录在捕获页面中的笔划图像。

捕获按钮215被按下时，或每次切换显示的页面时，页面控制模块103在存储单元24中一起记录笔划图像与捕获图像。此外，页面控制模块103删除屏幕页面的笔划图像的一部分或全部，以便更新屏幕页面。

接下来，将给出图6所示的笔按钮213的操作设置2136的功能描述。在这个示例中，操作设置2136可以包括两种笔设置，即捕获清除和永久。

当选择捕获清除时，在按下捕获按钮215时，擦除由触摸笔做出的笔划的笔划图像。在屏幕页面上，例如视频剪辑、可滚动网页、包括多个表单的电子表格软件页等，通过连接到图像处理装置1的视频输出设备500的操作输入的视频可连续改变。出于这个原因，将写入并要叠加在屏幕页面的视频上的笔划图像也需要根据屏幕页面的视频中的变化而变化，当选择要叠加在屏幕页面的视频上的笔划图像时，将需要麻烦的操作以删除要删除的笔划图像。另一方面，根据本实施例，通过将操作设置2136设置为捕获清除，每次按下捕获按钮215时，从主显示区域210擦除写入的笔划的笔划图像，且每次在屏幕页面上写入下一个笔划时，不需要擦除写入笔划的笔划图像。

另一方面，当操作设置2136设置为永久时，在按下捕获按钮215时，由触摸笔做出的笔划的笔划图像不会被擦除且仍保持存储在主显示区域210中。在永久设置中做出的笔划图像和在捕获清除设置中做出的笔划图像可在到同一个屏幕页面的写入中共存。例如，议程和会议参加者的笔划图像、用作模板的表格的规则线等可通过选择永久设置而被写入，而根据屏幕页面的评论的笔划图像可通过选择捕获清除设置而被写入。在这种情况下，通过按下捕获按钮215，用户可以设置要从屏幕页面的笔划图像中擦除的擦除对象。

对应捕获清除设置和永久设置，记录在捕获页面中的笔划图像可被记录在不同的层或者同一层中。另外，每层中的笔划图像的记录也可以独立于操作和显示单元21而执行。

在本实施例中，可以选择两种笔设置，即捕获清除和永久，以便做出关于是否从主显示区域210擦除被记录为捕获图像的笔划图像的设置。

此外，响应于来自UI控制模块101的指令，页面控制模块103连续地读取存储在存储单元24中的多个捕获图像，并经由UI控制模块101显示在主显示区域210中读取的捕获图像。

另外，当按下操作和显示单元21的下部的缩略图显示区域322中显示的滚动按钮(或箭头按钮)时，页面控制模块103读取存储在存储单元24中的下一页面的缩略图，并经由UI控制模块101显示下一页面的缩略图。

页面控制模块103还可以复制(或拷贝)并删除捕获页面。

远程共享控制模块104可以形成网络控制单元的示例，网络控制单元包括网络控制功能以控制在图像处理装置1和经由网络接口23连接到图像处理装置1的另一个图像处理装置之间的显示图像的共享。通过按下共享按钮211设置显示图像的共享。可以通过按下共享按钮211而将图像处理装置1设置为共享主机。共享主机可以经由网络51接受来自其他图像处理装置的访问。远程共享控制模块104保存预先登记的其它图像处理装置的验证信息，并经由外围设备接口模块105验证从其他图像处理装置的登录。一旦从其他图像处理装置做出登录，显示图像可以在图像处理装置1和其他图像处理装置之间共享，而在一个图像处理装置处做出的笔划图像可在包括图像处理装置1的这些图像处理装置之中共享。此外，当共享按钮211被按下而且图像处理装置1不是共享主机时，图像处理装置1可访问设定为共享主机的另一个图像处理装置。可以使用网络地址(例如IP(互联网协议)地址)和密码做出登录或访问的验证。当然，设备信息(例如MAC(媒体访问控制)地址)可用作认证信息，用于做出登录或访问验证。

当结束按钮219被按下时，远程共享控制模块104结束与其他图像处理装置的通信。当图像处理装置1是共享主机时，当结束按钮219被按下时，该图像处理装置1结束与经由网络51连接的所有其他图像处理装置的通信。此外，当其他图像处理装置之一是共享主机时，当结束按钮219被按下时，该图像处理装置1仅结束其中的通信。

外围设备接口模块105控制外围设备接口22。根据连接到外围设备接口22的视频输出设备500的接口规范，外围设备接口模块105执行关于从视频输出设备500输出的视频信号的格式转换处理、压缩或展开处理、传输转换处理等。

网络接口模块106控制网络接口23。网络接口模块106提供关于远程共享控制模块104的网络服务。例如，网络接口模块106提供关于由远程共享控制模块104预先登记的其它图像处理装置的小服务程序(servlet)功能。其他的图像处理装置可以指定设置为共享主机的图像处理装置1的网络地址，并且使用预定密码以登录到图像处理装置1。网络接口模块106基于远程共享控制模块104的验证信息建立与其它图像处理装置的会话，并假定登录状态。可以从多个其它图像处理装置做出到共享主机的登录。会话可由来自其他图像处理装置的结束操作结束，或当从会话开始经过预定时间后会话超时发生时结束。外围设备接口模块105和网络接口模块106的功能可以由图像处理装置1的OS(操作系统)提供。

接着，将通过参考图2给出图像处理装置1的页面捕获处理的描述。图2是用于说明页面捕获处理的示例的流程图。

当在主显示区域210中显示屏幕页面的状态下按下捕获按钮215时，图2所示的页面捕获处理开始。

在步骤S11中，UI控制模块101锁定所有按钮操作。通过锁定所有按钮操作，可避免在存储单元24中的存储区域之间的争用。

接着，在步骤S12中，页面控制模块103在存储单元24中创建新页面。当创建新页面时，在存储单元24中提供预定存储区域。

接着，在步骤S13中，视频控制模块102生成要在视频显示层中登记的快照(或捕获图像)。视频控制模块102生成当捕获按钮215按下时在主显示区域210中显示的视频的捕获图像。可以经由UI控制模块101设置生成的捕获图像的分辨率、所用颜色的数量等。

接下来，在步骤S14中，页面控制模块103获得由视频控制模块102生成的快照，并在创建的新页面的视频显示层中登记获得的快照。

接着，在步骤S15中，页面控制模块103获得显示的页面的笔划图像。笔划图像是由用户在主显示区域210上写入的字符、图形等。每个笔划图像被视为对象，而可以以对象为单位选择或擦除笔划图像。例如，在触摸笔等的单个笔划中写入的字符串等被视为一个对象。此外，一个标记也被视为一个对象。

接着，在步骤S16中，页面控制模块103在新页面中登记复制的笔划图像。页面控制模块103以对象为单位记录书写笔划的笔划图像。当笔划编辑按钮(未示出)按下时，以对象为单位记录的笔划图像可以由分组处理分组。

接着，在步骤S17中，页面控制模块103在页面列表中登记新页面。页面列表是记录的捕获页面的列表。页面的顺序、捕获图像的保存信息、缩略图的保存信息等登记在页面列表中。基于包含在页面列表中的信息确定在缩略图显示区域322中的显示顺序、要显示的缩略图等。

接下来，在步骤S18中，页面控制模块103删除显示的页面的所有笔划图像。在这个示例中，假设为方便起见，在图6所示的操作设置2136中设置捕获清除。对于在操作设置2136中设置永久的情况，笔划图像不会在步骤S18中被删除，并通过按下选择或删除按钮214而删除。

接下来，在步骤S19中，UI控制模块101更新主显示区域210中屏幕页面的显示和缩略图显示区域322中页面列表的显示。可以基于由页面控制模块103登记的页面列表而做出页面列表的显示。

接下来，在步骤S20中，UI控制模块101释放(或解锁)所有按钮操作的锁定。在步骤S20之后，可以做出所有的按钮操作，以及由触摸笔做出笔划成为可能。

接下来，通过参照图3到图5，将给出页面捕获处理期间显示屏幕的转变的描述。

图3是示出写在屏幕页面上的笔划的示例的示意图。在图3中，从PC500-1经由外围设备接口22输入到图像处理装置1的复印装置的全视图的视频例如显示为主显示区域210中的屏幕页面。与复印装置相关联的数值表示以任意单位的复印装置的各个部分的尺寸。图3示出一种状态，在该状态中，用户通过在屏幕页面上做出笔划而由触摸笔等手写写入字符串“COPY”。在这个示例中，三(3)个捕获页面已在此状态下显示在缩略图显示区域322中。书写笔划例如可以通过按下选择或删除按钮214而编辑。

图4是示出捕获屏幕页面的示例的示意图。当用户按下处于一状态(在该状态中，已由图6所示的详细设置在操作设置2136中设置捕获清除)的图3中的捕获按钮215时，获得图4所示的状态。

在图4中，主显示区域210保持屏幕页面的显示。换言之，图4示出可在屏幕页面上写入笔划的状态。写在主显示区域210中的所有笔划图像已经被删除。因此，用户可以继续在屏幕页面上写入笔划，而不必执行笔划擦除操作。先前写入的字符串“COPY”被从屏幕页面自动擦除。由于这个原因，(i)在屏幕页面上写入笔划的操作及(ii)记录屏幕页面和写在屏幕页面上的笔划的捕获图像的操作可响应于用户按下捕获按钮215的单个动作而在一个操作中连续执行。

此外，捕获图像的缩略图“4/4”被另外显示在缩略图显示区域322中。另外显示的缩略图指示字符串“COPY”。

图5是示出显示的捕获图像的示例的示意图。当用户按下处于一状态(在该状态中，屏幕页面被显示在图4所示的主显示区域210中)的缩略图显示区域322中显示的缩略图“4/4”时，获得图5所示的状态。

在图5中，捕获页面显示在主显示区域210中。当按下捕获按钮215时，捕获页面以重叠方式显示屏幕页面以及写在屏幕页面上的笔划的笔划图像。换言之，在显示的捕获页面中，笔划图像叠加在屏幕页面上。因此，上文结合图3所述的由用户写入的手写字符串“COPY”显示在捕获页面中。此外，在图5中，目前正显示的捕获页面的缩略图显示在缩略图显示区域322中。捕获页面中的笔划图像例如可以由触摸笔添加或编辑。当做出到另一页面的转变时，添加或编辑的笔划图像写在存储单元24中记录的捕获页面之上或通过重命名存储单元24中的文件而被保存。通过在图5所示的状态下按下视频开关按钮321，显示可以切换回屏幕页面的显示。

根据本实施例，操作和显示单元21的显示可与经由网络接口23连接到图像处理装置1的其他图像处理装置共享。通过在其他剩余图像处理装置上反映在多个图像处理装置之一上对其他剩余图像处理装置做出操作的显示(该显示相对之前做出其他操作的其他显示具有优先级，可以在包括图像处理装置1的多个图像处理装置间共享该显示。在这种情况下，只有修改的显示和之前显示之间的差别可以经由网络51而在多个图像处理装置之间传输，以便减少网络51上的负荷。

当在图像处理装置1上按下捕获按钮215时，上文结合图2描述的页面捕获处理可在经由网络51连接到图像处理装置1的另一个图像处理装置上执行。当在其他图像处理装置中执行页面捕获处理时，可以以与具有按下的捕获按钮215的图像处理装置1相同的方式在其中本地记录捕获图像，从而有利于其他图像处理装置中的捕获页面的编辑。

接下来，通过参照图7，将给出捕获页面和屏幕页面之间切换的描述，当视频控制模块102检测到视频输入的存在的变化时，该切换由UI控制模块101执行。图7是用于说明视频输入状态下的显示切换处理的示例的流程图。结合视频控制模块102和页面控制模块103，UI控制模块101可以形成执行显示切换处理的显示切换单元的示例。

从无视频输入状态到视频输入状态发生变化的情况例如对应于来自连接到外围设备接口22的视频输出设备500的视频输入开始的情况。此外，从视频输入状态到无视频输入状态发生变化的情况例如对应于来自连接到外围设备接口22的视频输出设备500的视频输入结束的情况。

当视频输入状态变化时，图7所示的显示切换处理开始。

首先，在步骤S30中，UI控制模块101锁定所有的按钮操作。通过锁定所有按钮操作，可避免操作之间的争用。锁定的按钮的显示例如可淡出，为了便于用户识别锁定的按钮。

接着，在步骤S31中，视频控制模块102决定是否检测到无视频输入状态。例如，可以从外围设备接口22接收的输入信号检测视频输入的存在。另外，可以通过从经由网络接口23连接到图像处理装置1并与图像处理装置1共享显示图像的其他图像处理装置接收的输入命令检测而检测视频输入的存在。

当检测到无视频输入状态并且步骤S31中的判定结果为YES时，该处理前进到步骤S32。在步骤S32中，UI控制模块101锁定视频切换按钮321，以便禁止屏幕页面的显示的切换。在无视频输入状态中，锁定视频切换按钮321的显示例如可以淡出，以便于用户识别视频开关按钮321的禁止状态。

在步骤S33中，页面控制模块103决定显示的页面是否是屏幕页面。当显示的页面不是屏幕页面并且步骤S33中的判定结果为NO时，该处理前进到步骤S41。在步骤S41中，UI控制模块101释放所有按钮操作的锁定，并且该处理结束。

另一方面，当显示的页面是屏幕页面并且步骤S33中的判定结果为YES时，该处理进行到步骤S34。在步骤S34中，页面控制模块103在存储单元24中记录显示的屏幕页面的内容，也就是说，对应于标识符的视频显示层和笔划显示层。通过存储屏幕页面的内容，例如即使当显示的切换发生时，可防止正创建的笔划图像丢失。步骤S34中显示的屏幕页面的内容的记录以及由按下捕获按钮215激活的屏幕页面的记录例如可通过改变其文件名而执行，使得这两个屏幕页面可以互相区分。此外，可以使得在缩略图显示区域322中显示的两个捕获页面的缩略图的显示颜色或显示位置不同，以使得这两个屏幕页面可以彼此区分。

接下来，在步骤S35中，页面控制模块103将显示的页面切换到最后显示并记录在存储单元24中的捕获页面，并且该处理前进到步骤S40。存储在存储单元24中的每个捕获页面添加有标识符，而具有相同标识符的捕获图像和笔划图像彼此对应地显示为捕获页面。此外，通过设置不显示用于显示视频的视频显示层而做出显示的切换。

为了显示最后显示的捕获页面，例如连续记录所显示的捕获页面的标识符。页面控制模块103可以通过从连接记录的标识符中选择最后记录的标识符而选择最后显示的捕获图像。

在步骤S40中，UI控制模块101更新显示的页面。在步骤S41中，UI控制模块101释放所有的按钮操作的锁定，并且该处理结束。

另一方面，当检测到视频输入状态并且步骤S31中的判定结果为NO时，该处理进行到步骤S36。在步骤S36中，UI控制模块101释放视频开关按钮321，以便使得切换屏幕页面的显示。

接下来，在步骤S37中，页面控制模块103判定正在显示的页面是否是屏幕页面。当正在显示的页面是屏幕页面并且步骤S37中的判定结果为YES时，该处理前进到步骤S38。在步骤S38中，视频控制模块102判定正在显示的视频输入是否被取消。例如，当多个视频输出设备500连接到图像处理装置1的外围设备接口22的多个端口时，视频控制模块102可判定正在显示的视频输入被取消，以及视频输入从来自一个视频输出设备500的视频输入切换到来自另一个视频输出设备500的视频输入。从一个视频输出设备500到另一个视频输出设备500的视频输入的切换例如可以由用户在图像处理装置1处确定。此外，例如可根据图像处理装置1的默认优先级设置确定顺序，在视频输出设备500之间以该顺序切换视频输入。因此，视频控制模块102可以区别无视频输入状态和视频输入从一个视频输入切换到另一个的状态，使得页面控制模块103不记录当取消正在显示的视频输入时的屏幕页面的内容。

当正在显示的视频输入被取消并且步骤S38中的判定结果为YES时，该处理前进到步骤S39。在步骤S39中，视频控制模块102切换视频显示层的视频输入到来自另一个视频输出设备500的视频输入。在步骤S40中，UI控制模块101更新显示的页面的显示。在步骤S41中，UI控制模块101释放所有按钮操作的锁定，并且该处理结束。

另一方面，当在步骤S37或步骤S38中的判定结果为NO时，该处理前进到步骤S41。在这种情况下，UI控制模块101还在步骤S41中释放所有按钮操作的锁定，并且该处理结束。

根据上文结合图7描述的显示切换处理，可根据视频输入的变化自动切换屏幕页面和捕获页面。另外，即使在显示自动切换到屏幕页面的情况下，可以自动记录捕获页面以提供捕获页面的备份。另外，在无视频输入状态发生的情况下，最后显示的捕获页面自动显示，以便消除必须选择要显示的捕获页面的麻烦操作。

上述图像处理装置1的功能例如可由使用一个或多个计算机经由一个或多个网络配置的图像处理系统提供。

上述实施例可以以改进的可操作性存储来自视频输出设备的视频输入，以及由用户做出的输入的输入图像，例如由用户做出的笔划的笔划图像。

本发明可以任何方便的形式实现，例如使用专用硬件，或专用硬件和软件的混合。本发明可以被实现为由一个或多个联网处理装置实施的计算机软件。该网络可包括任何传统的地面或无线通信网络，例如因特网。处理装置可包括任何合适的编程装置，例如通用计算机、个人数字助理、移动电话(例如，WAP(无线应用协议)或者3G兼容电话)等。由于本发明可以被实现为软件，本发明的每一方面因此包括在可编程设备上实施的计算机软件。

因此，在所描述的实施例中，图1所示的控制单元10的模块101-106中每一个的功能可以使用专用硬件、或专用硬件和软件的混合来实施。在后一情况下，专用硬件可以是执行计算机程序(或计算机软件)以执行模块101-106中每一个的功能的计算机或处理器，例如CPU。例如，模块101-106中每一个的功能可以由在OS(操作系统)上运行的应用程序来提供。存储该应用程序的介质可以分发，并且应用程序本身可以通过网络来分发。应用程序可以被安装在任何合适的计算机中。

可以使用用于存储处理器可读代码的任何非临时性计算机可读存储介质(例如软盘、硬盘、CD-ROM(致密盘只读存储器)、磁带设备或固态存储设备)而将计算机程序提供给可编程设备。

计算机软件也可以被提供给使用任何常规载体介质的可编程设备。该载体介质可以包括临时载体介质，例如承载计算机代码的电、光、微波、声或射频信号。这样的临时介质的示例是通过IP网络(例如因特网)承载计算机代码的TCP/IP信号。载体介质还可以包括用于存储处理器可读代码的存储介质，例如软盘、硬盘、CD ROM、磁带设备或固态存储设备。

所公开的图像处理装置的硬件平台包括任何期望的硬件资源，例如包括CPU、RAM(随机存取存储器)和HDD(硬盘驱动器)。该CPU可以包括任何期望的类型和数量的处理器。RAM可以包括任何期望的易失性或非易失性存储器。HDD可以包括能记录大量数据的任何期望的非易失性存储器。根据装置的类型，硬件资源可进一步包括输入设备、输出设备以及网络设备。只要可从该装置访问HDD，HDD可以在装置的外部提供。在这种情况下，CPU(例如CPU的高速缓存存储器)和RAM可以作为装置的物理存储器或主存储器工作，而HDD可以作为该装置的辅助存储器工作。

另外，本发明并不限于这些实施例，可以做出各种变化和修改而不脱离本发明的范围。

Claims (3)

1.一种图像处理装置，包括：视频输入单元，配置为接收视频输入；以及操作和显示单元，配置为显示来自所述视频输入单元的视频输入，

其特征在于提供有：

检测单元，配置为检测来自所述视频输入单元的视频输入的存在的变化；以及

显示切换单元，配置为在屏幕页面和捕获页面之间切换所述操作和显示单元上的显示，在所述屏幕页面中输入图像叠加在显示的视频输入上，通过捕获正被显示的屏幕页面来生成所述捕获页面，

其中，当所述检测单元检测变化时，通过当所述检测单元检测到视频输入到无视频输入状态的变化时将显示切换到在所述操作和显示单元上最后显示的捕获页面，且当所述检测单元检测到向视频输入状态的变化时记录正在所述操作和显示单元上显示的捕获页面，并将显示切换到所述屏幕页面，在所述视频输入状态中，从所述视频输入单元接收到视频输入，在所述无视频输入状态中，没有视频输入从所述视频输入单元接收到。

2.如权利要求1所述的图像处理装置，特征在于进一步提供有：

网络控制单元，可经由网络与另一图像处理装置通信，

其中，所述检测单元经由网络检测从所述另一图像处理装置接收的视频输入的变化。

3.一种图像处理方法，包括：在操作和显示单元上显示视频输入，其特征在于提供有：

检测所述视频输入的存在的变化的检测步骤；以及

在屏幕页面和捕获页面之间切换所述操作和显示单元上的显示，在所述屏幕页面中，输入图像叠加在显示的视频输入上，通过捕获正被显示的屏幕页面来生成所述捕获页面，

其中，当所述检测步骤检测到变化时，通过当所述检测步骤检测到视频输入到无视频输入状态的变化时将显示切换到在所述操作和显示单元上最后显示的捕获页面，且当所述检测步骤检测到向视频输入状态的变化时记录正在所述操作和显示单元上显示的捕获页面，并将显示切换到所述屏幕页面，在所述视频输入状态中，接收到视频输入，在所述无视频输入状态中，没有视频输入被接收到。