CN110007832B - 信息终端装置、信息处理系统以及存储有显示控制程序的计算机可读非暂时性的存储介质 - Google Patents

Abstract

信息终端装置，包括，显示部、操作部、剩余区域指定部、分布区域确定部、缩小设置部和显示控制部。操作部，用于接收将显示在显示部的显示界面的多个划分区域中的一个划分区域进行放大的放大操作。剩余区域指定部，用于指定在显示界面上除去通过放大操作放大的一个划分区域后的剩余区域。分布区域确定部，用于确定在剩余区域指定部指定的剩余区域中，用于分布放大的一个划分区域以外的所有其他的划分区域的分布区域。缩小设置部，用于在分布区域中将其他的划分区域分别缩小设置。显示控制部，在将放大的一个划分区域的图像放大显示的同时，在缩小设置部缩小后设置的其他划分区域中，在该其他的划分区域内将该其他的划分区域的指定部分的图像进行放大显示。通过该信息终端装置，能够抑制其他的缩小的划分区域中的图像显示难以看清的技术问题。

Description

信息终端装置、信息处理系统以及存储有显示控制程序的计 算机可读非暂时性的存储介质

技术领域

本发明涉及一种信息终端装置、信息处理系统以及存储有显示控制程序的计算机可读非暂时性的存储介质，特别地，涉及一种用于在显示界面上切换多个划分显示的技术。

背景技术

近年来，存在一种信息处理系统，其能够利用个人计算机的Web浏览器查看由多个监控摄像机拍摄的各个监控图像。Web浏览器是用于查看Web页面的应用程序软件。作为示例，是用于接收应用服务器的监控图像的浏览服务的应用软件。

通用的信息处理系统包括多个(例如，四个)监控摄像机、提供监控图像浏览服务的应用服务器、以及安装有由上述的应用服务器提供的web浏览器的移动终端，当从移动终端向应用服务器发出浏览请求时，向移动终端提供由四台监控摄像机拍摄的监控图像且可在web浏览器上显示的图像信息，使得四台监控摄像机的监控图像可以显示在上述的移动终端的显示界面上。该移动终端可以显示四个界面，包括一个具有大显示区域的主界面和垂直布置在该主界面右侧的三个小显示区域的子界面。然后，当检测到用户的手指通过设置在显示界面上的触摸面板来触摸主界面的状态下，向子界面滑动的操作(即，主界面的放大操作)时，主界面就会在整个显示界面上放大显示。

发明内容(Summary)

然而，在上述的信息处理系统中，当用户对由主界面和三个子界面组成的四个界面显示的移动终端进行主界面的放大操作时，由于主界面在整个显示界面上放大显示，虽然主界面上的监控图像变得易于查看，但三个子界面被删除了。因此，就存在着用户无法看到子界面的监控图像的问题。即使在主界面放大上设置上限并留下三个子界面，由于当主界面放大时，三个子界面仍然会缩小，因此，不可否定的是子界面的监控图像由于缩小而变得难以看清。

本发明是鉴于上述的技术问题而做出的，其目的是即使在伴随着显示界面的多个划分区域中的其中一个划分区域放大，其他的划分区域缩小的情况下，抑制其他的缩小的划分区域中的图像显示难以看清的技术问题。

本发明的一方面涉及的信息终端装置，包括，显示部，用于显示通过将显示界面划分为多个区域而获得的多个划分区域中的每一个的图像；操作部，用于接收用户的将所述的显示界面的所述的多个划分区域中的一个划分区域放大的放大操作；剩余区域指定部，用于指定在所述的显示界面上除去用户通过所述的操作部的放大操作放大的所述的一个划分区域后的剩余区域；分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；显示控制部，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示。

此外，本发明的另一方面涉及的信息处理系统，是能够与可显示经由网络分发的多个图像的信息终端装置和应用服务器进行通信的信息处理系统，所述的信息终端装置包括，请求部，用于向所述的多个图像的分发源请求该多个图像；显示部，用于将所述的请求部请求的所述的多个图像显示在将显示界面划分为多个的多个划分区域的每一个中；操作部，用于接收用户的将所述的显示界面的所述的多个划分区域中的一个划分区域放大的放大操作；剩余区域指定部，用于指定在所述的显示界面上除去用户通过所述的操作部的放大操作放大的所述的一个划分区域后的剩余区域；分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；通知部，用于将与用户通过所述的操作部的放大操作放大的所述的一个划分区域和所述的缩小设置部在所述的分布区域中缩小后设置的所述的其他划分区域相关的通知输出到所述的应用服务器；获取部，用于获取所述的应用服务器的发送部发送的界面信息；显示控制部，使用所述的获取部获取的所述的界面信息，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示；所述的应用服务器包括所述的发送部，用于根据所述的通知部发送来的通知，发送所述的信息终端装置的所述的显示界面中的所述的放大的一个划分区域和所述的缩小的其他划分区域的界面信息。

另外，在本发明的另一方面涉及的存储有显示控制程序的计算机可读非暂时性的存储介质中，该显示控制程序通过处理器对含有该处理器的计算机执行该显示控制程序，发挥着如下的作用：剩余区域指定部，用于指定在所述的显示界面中，除去用户通过操作部的放大操作放大显示界面的多个划分区域中的一个划分区域后得到的一个划分区域之后的剩余区域；分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；显示控制部，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示。

通过本发明，即使在伴随着显示界面的多个划分区域中的其中一个划分区域放大，其他的划分区域缩小的情况下，也能够抑制其他的缩小的划分区域中的图像显示难以看清的技术问题。

附图说明

图1所示的是，本发明的一个实施方式所涉及的信息终端装置以及信息处理系统的结构示意框图。

图2所示的是，信息处理系统中的图像显示处理的流程示意图。

图3所示的是，用于将信息终端装置的显示界面中的多个划分区域中的一个划分区域进行放大显示的处理流程示意图。

图4所示的是，在信息终端装置的显示界面的四个划分区域中分别显示四台监控摄像机的图像的一个例子示意图。

图5所示的是，在如图4所示的显示界面的左上角的划分区域中执行放大操作的示意图。

图6所示的是，伴随着如图5所示的左上角的划分区域的放大操作，其他划分区域在右侧重新分布为垂直排列的示意图。

图7所示的是，在将如图6所示的右侧垂直排列的划分区域的图像进行放大显示的同时，在空白区域显示种类显示图像和事件发生表图像的示意图。

图8所示的是，在如图6所示的空白区域小的情况下，仅仅在该空白区域中显示事件发生表图像的示意图。

图9所示的是，变形例的应用服务器中的事件检测处理的流程示意图。

具体实施方式

接下来，将参照附图对本发明的实施方式所涉及的信息终端装置以及信息处理系统进行详细地说明。

图1所示的是，本发明的信息终端装置以及信息处理系统的结构示意框图。本实施方式的信息处理系统100指的是可以通过平板计算机等的信息终端装置10的Web浏览器查看分发装置30的多个监控摄像机31至34拍摄的各个监控图像的信息处理系统。

所述信息处理系统100包括信息终端装置10、分发装置30、应用服务器40和网络50。信息终端装置10、分发装置30以及应用服务器40经由网络50可通信地连接。

所述分发装置30包括多个(在本实施方式中为四台)监控摄像机31至监控摄像机34以及能够与信息终端装置10和应用服务器40进行通信的路由器35。所述路由器35与监控摄像机31至监控摄像机34连接。此外，所述监控摄像机31至监控摄像机34是用于拍摄静止图像或者运动图像(这些被统称为图像)的装置，运动图像也被称为影像。此外，可以由一个监控摄像机提供多个图像。

所述应用服务器40管理连接到路由器35的四台监控摄像机31到监控摄像机34的IP地址，在所述信息终端装置10对这些监控摄像机31到监控摄像机34拍摄的各个图像进行浏览请求的情况下，提供可以将图像显示在浏览器上的界面信息的WEB应用服务器。

所述信息终端装置10是诸如平板型计算机之类的便携式终端装置，包括显示部12、触摸面板13、通信部14、存储部15和控制单元20。这些组成元件能够通过总线相互发送和接收数据或者信号。在所述信息终端装置10中，安装浏览器以便接收应用服务器40的服务。值得指出的是，信息终端装置10还可以是诸如智能电话之类的便携式终端装置、台式个人计算机等。

所述显示部12由液晶显示器(LCD：液晶显示器)、有机EL(OLED：有机发光二极管)等组成。

所述触摸面板13指的是诸如所谓电阻膜方式或者电容方式之类的触摸面板。所述触摸面板13设置在所述显示部12的界面上，并且检测手指等对于所述显示部12的界面的接触以及其接触位置。在检测到手指等的接触时，所述触摸面板13将表示上述的接触位置的坐标的检测信号输出到所述控制单元20的控制部21等中。因此，所述触摸面板13起到用于输入用户在所述显示部12的界面上操作的操作部的作用。

另外，作为输入用户操作的操作部，除了所述触摸面板13之外，所述信息终端装置10还可以包括硬键。

所述通信部14是包括诸如无线LAN芯片(图中未示出)之类的通信模块的通信接口。所述通信部14具有使所述分发装置30与应用服务器40进行通信的功能。

所述存储部15由大容量的SSD(固态驱动器)、HDD(硬盘驱动器)等组成，并用于存储各种数据和程序。

所述控制单元20由处理器、RAM(随机存取存储器)、ROM(只读存储器)等组成。处理器是CPU(中央处理单元)、MPU(微处理单元)、或者ASIC(专用集成电路)等。通过在上述的处理器中执行存储在上述的ROM或者所述存储部15中的控制程序，上述的控制单元20发挥着控制部21、通信控制部22、剩余区域指定部23、分布区域确定部24、缩小设置部25、显示控制部26、图像判定部27以及判定部28的作用。值得指出的是，所述控制单元20的每个上述的组成元件可以分别由基于与上述的控制程序的操作无关的硬件电路构成。

所述控制部21执行信息终端装置10的整体操作控制。此外，所述控制部21连接到诸如显示部12、触摸面板13、通信部14、以及存储部15等，并执行上述的每个组成元件的操作控制以及每个组成元件之间的信号或者数据的发送和接收操作。特别地，所述控制部21控制显示部12的显示操作。所述通信控制部22具有控制通信部14的通信操作的功能。

如后述的图4所示，所述显示控制部26控制所述显示部12的显示界面例如以四个界面的形式进行显示。具体而言，所述显示控制部26将所述显示部12的显示界面等量划分为左上、右上、左下以及右下四个部分而获得四个划分区域D1至划分区域D4，并将四台监控摄像机31至监控摄像机34拍摄的各个监控图像在上述的四个划分区域中进行分别显示。此外，如图4所示，所述显示控制部26在各个划分区域D1至划分区域D4的左上角显示“C1”至“C4”，表示图像是分别由监控摄像机31至监控摄像机34拍摄的图像。在图4中，监控摄像机31至监控摄像机34的各个监控图像由圆形、三角形、五边形或者星形表示。在本实施方式中，如后述的图5所示，将包含在经过放大操作的划分区域D1的图像中的目标人员(例如，图示中的圆形)指定为要监控的目标人员，其他划分区域D2至划分区域D4中显示的三角形、五边形和星形被排除在监测目标人员之外。

此外，基于从所述触摸面板13输出的检测信号，所述控制部21识别用户输入的用户操作。然后，控制部21根据识别的用户操作执行控制操作。

上述的用户操作包括例如触摸操作、拖动操作、轻扫操作等。例如，当用户用手指接触所述触摸面板13并立即离开后，所述触摸面板13就向所述控制部21输出代表检测接触位置的检测信号。当所述控制部21输入该检测信号后，基于上述的检测信号，检测出用户操作为触摸操作。例如，在所述显示部12的界面上的软键上执行上述的触摸操作。

另外，如果用户持续保持手指与所述触摸面板13接触的状态(即长按)，然后缓慢地移动手指，所述触摸面板13向控制部21输出代表检测到的从在最初接触的初期位置保持预定时间(例如0.5秒)后从该初期位置开始，到检测到的最后接触的最终位置之间的各个移动位置的检测信号。当所述控制部21输入该检测信号后，基于上述的检测信号，检测出用户操作为拖动操作，并检测出拖动操作的操作方向以及最终位置。在本实施方式中，例如，拖动操作包括在所述显示部12的界面上的一个划分区域被放大时，对该一个划分区域的角部执行的放大操作。具体而言，如图5所示，在所述显示部12的显示界面中，例如，用户手指接触放大操作前的一个划分区域D1的右下角部分的位置(即:初期位置P1)并保持该状态在上述的预定时间以上，之后，慢慢移动手指至最终位置P2后，所述触摸面板13向所述控制部21输出代表在初期位置P1保持上述的预定时间后从该初期位置P1开始，移动至最终位置P2之间的各个移动位置的检测信号。当所述控制部21输入该检测信号，基于上述的检测信号，检测出用户操作为拖动操作(放大操作)，以及拖动操作的操作方向以及最终位置P2。值得指出的是，在本实施方式中，虽然拖动操作(放大操作)为保持划分区域D1的宽高比的放大操作(对于放大划分区域D2至划分区域D4中的任何一个的情况同样适用)，不保持宽高比的放大操作也可以。

此外，当在手指接触所述触摸面板13的状态下直接移动手指时，所述触摸面板13向控制部21输出代表从最初接触检测到的初期位置开始到最后接触检测到的最终位置之间的各个移动位置的检测信号。所述控制部21输入该检测信号后，基于上述的检测信号，检测出用户操作为轻扫操作，并检测出轻扫操作的操作方向。上述的轻扫操作指的是，例如，显示部12的界面上的图标被移动时，对该图标执行的操作。

如图5所示，剩余区域指定部23指定在显示部12的显示界面中，除去通过用户对触摸面板13的放大操作(拖动操作)所放大的一个划分区域D1后的剩余区域A1。通过上述的拖动操作(放大操作)，所述控制部21检测出划分区域D1的右下角部分移动至最终位置P2，剩余区域指定部23指定在显示部12的显示界面中，除去右下角部分的移动至最终位置P2的放大的划分区域D1后的剩余区域A1。

如图6所示，在剩余区域指定部23所指定的剩余区域A1中，所述分布区域确定部24确定用于分布除去放大的一个划分区域D1以外的所有其他划分区域D2至D4的分布区域A3。例如，所述分布区域确定部24在显示界面中，将右下角部分移动至最终位置P2后放大的划分区域D1的右侧区域部分确定为分布区域A3。

如图6所示，所述缩小设置部25在分布区域确定部24所确定的分布区域A3中，将其他的划分区域D2至划分区域D4分别进行缩小后设置。值得指出的是，在本实施方式中，虽然所述缩小设置部25在保持宽高比的情况下缩小划分区域D2至D4(对于包含划分区域D1进行缩小的情况同样适用)，但是也可以不保持宽高比进行缩小。

所述图像判定部27通过对其他的划分区域(图6的划分区域D2至划分区域D4)中显示的图像执行图像识别处理操作(例如，已知的面部识别处理、人物识别处理等)，来判断该图像中是否包含目标人员或者目标物品。在本实施方式中，所述图像判定部27对图5所示的放大操作后的划分区域D1中显示的图像执行图像识别处理操作，将该划分区域D1的图像中所包含的目标人员(例如图示中的圆形)指定为需要监控的目标人员。具体而言，所述图像判定部27通过执行已知的面部认证处理操作，基于放大的划分区域D1中显示的图像信息，提取出该目标人员的面部认证信息(例如，根据目标人物的图像确定面部区域，并且在该面部区域中指示诸如眼睛、鼻子、嘴巴等的面部特征点的信息等)。然后，图像判定部27将上述的提取出的该目标人员的面部认证信息作为验证源注册数据存储在存储部15中。接下来，所述图像判定部27在其他的划分区域(图6的划分区域D2至划分区域D4)显示的图像中，逐个判断划分区域D2至划分区域D4中是否包含需要监控的目标人员(例如图示中的圆形)。具体而言，所述图像判定部27通过执行已知的面部认证处理操作，判断基于每个划分区域D2至划分区域D4的图像信息提取出的目标人员的面部认证信息是否与存储部15的验证源注册数据一致，在一致的情况下，判断为划分区域D2至划分区域D4的图像中包含需要监控的目标人员。值得指出的是，在图6所示的划分区域D2至划分区域D4的图像中，图示的是含有需要监控的目标人员(例如图示中的圆形)。

此外，如图7所示，所述显示控制部26在放大的一个划分区域D1中放大显示该一个划分区域D1的图像的同时，在所述缩小设置部25缩小后设置的其他的划分区域D2至划分区域D4中显示需要监控的目标人员(例如图示中的圆形)的情况下(也就是，在图像判定部27判断为在其他的划分区域D2至划分区域D4的图像中包含目标人员的情况下)，将含有需要监控的目标人员(例如图示中的圆形)的指定部分SE的图像在该其他的划分区域D2至划分区域D4中放大显示。

更具体而言，在所述图像判定部27判断在缩小设置部25缩小后设置的其他的划分区域D2的图像中包含目标人员的情况下，如图6所示，所述显示控制部26将其他的划分区域D2的图像的一部分的指定部分SE的图像(即目标人员的图像)在如图7所示的该划分区域D2内部放大显示。此外，在分别判断其他的划分区域D3和划分区域D4的图像中包含目标人员的情况下，将其他的划分区域D3和划分区域D4的指定部分SE(即目标人员)分别放大并进行显示。通过上述的方式，即使划分区域D2至划分区域D4被缩小，由于划分区域D2至划分区域D4的指定部分SE(即目标人员)被放大显示，因此划分区域D2至划分区域D4的指定部分SE能够以易于观察的方式进行显示。

另外，在所述图像判定部27判断其他的划分区域D2至划分区域D4的图像中包含目标人员的情况下，所述显示控制部26还可以将包含图像判定部27进行面部识别处理的目标人员面部的部分(例如，包括目标人员的面部的矩形区域部分)作为指定部分SE，并在其他的划分区域D2至划分区域D4内部进行放大显示。在这种情况下，即使划分区域D2至划分区域D4被缩小，由于划分区域D2至划分区域D4的指定部分SE(即作为目标人员的特征部分的面部)被放大显示，因此划分区域D2至划分区域D4的指定部分SE仍然能够以易于观察的方式进行显示。

在本实施方式中，虽然监控对象为如图5所示的需要监控的目标人员(例如图示中的圆形)，但是还可以将例如预先设定的目标物品(例如灭火器)作为监控对象。在这种情况下，所述图像判定部27可以通过执行已知的图案匹配图像处理操作来判断该目标物品(例如灭火器)是否包括在划分区域D1至划分区域D4的图像中。当所述图像判定部27确定其他的划分区域D2至划分区域D4的图像包括该目标物品(例如灭火器)时，所述显示控制部26将包含图像判定部27识别的目标物品(例如灭火器)的部分(例如，包括整个灭火器或者其中一部分的矩形区域部分)作为指定部分SE，并在其他的划分区域D2至划分区域D4内部进行放大显示。通过上述的方式，即使划分区域D2至划分区域D4被缩小，由于划分区域D2至划分区域D4的指定部分SE(即目标物品)被放大显示，因此划分区域D2至划分区域D4的指定部分SE(即目标物品)能够以易于观察的方式进行显示。

所述判定部28判断从剩余区域指定部23指定的剩余区域A1(参照图5)中除去分布区域确定部24确定的分布区域A3后的空白区域A2(参照图6)相对于显示界面的比例是否在预先设定的特定比例(例如10％)以上。在所述判定部28判断为在特定比例(例如10％)以上的情况下，如图7所示，所述显示控制部26在空白区域A2上显示代表多个划分区域的图像的类别(例如，拍摄场所的信息)的类型显示图像MI和代表相对于在横向上延伸的拍摄时间轴的事件EV的发生时间的事件发生表图像ETI。

如图7所示，类型显示图像MI指的是，代表划分区域D1至划分区域D4的图像分别是在一楼主门前的监控摄像机31(摄像机C1)、二楼东走廊下的监控摄像机32(摄像机C2)、二楼西走廊下的监控摄像机33(摄像机C3)、二楼北走廊下的监控摄像机34(摄像机C4)拍摄的拍摄场所的图像。

事件发生表图像ETI指的是，代表例如需要监控的目标人员(例如图示中的圆形)的出现等的事件EV在拍摄时间的什么时刻发生的图像。本实施方式的事件发生表图像ETI具有拍摄时间轴，分别表示的是该拍摄时间轴的左端为当日的午夜，拍摄时间轴的右端为同日的现在。具体而言，在所述图像判定部27判断划分区域D1至划分区域D4的图像中包含需要监控的目标人员的情况下，所述显示控制部26在事件发生表图像ETI中与该判断的时间点相对应的地方显示事件EV。如图7所示，用户可以通过查看显示部12的空白区域A2中显示的事件发生表图像ETI的各个事件EV，来掌握发生的事件EV。

此外，在进行了一个划分区域被放大的放大操作的情况下，在事件发生表图像ETI中，将代表该一个划分区域放大的放大操作标记EX显示在与其放大操作的时刻相对应的地方。如图7所示，用户可以通过查看显示在显示部12的空白区域A2中的事件发生表图像ETI的放大操作标记EX，来掌握放大操作。

另一方面，在所述判定部28判断为小于特定比例(例如10％)的情况下，如图8所示，所述显示控制部26在空白区域A2中不显示类型显示图像MI，显示事件发生表图像ETI。通过上述的方式，可以根据由于划分区域的放大操作，显示部12的显示界面中的空白区域A2的大小，来执行适当的显示操作。

所述显示控制部26显示代表事件发生表图像ETI中示出的事件EV，以及与该事件EV相关联的划分区域的对应关系的对应显示图像。如图7所示，上述的对应显示图像指的是显示在事件发生表图像ETI的事件EV的上部位置的“C1”至“C4”。例如，显示在图7所示的事件发生表图像ETI的左端的事件EV的上部位置的对应显示图像“C1”，代表的是与监控摄像机31(摄像机C1)拍摄的图像相关的事件，即划分区域D1的事件。在所述显示控制部26基于用户对触摸面板13的放大操作显示一个划分区域D1的放大图像的情况下，将代表上述的划分区域D1进行放大的放大操作标记EX显示在事件发生表图像ETI中的与放大操作时刻相对应的地方。

在本实施方式中，由于在过去的时刻(在图7中为在当前时间的三段时间之前)在划分区域D1中显示有需要监控的目标人员(例如图示中的圆形)，用户在上述的时刻执行了放大操作，因此在事件发生表图像ETI中与该过去的时刻相对应的地方显示有放大操作标记EX。此外，由于随着时间推移，需要监控的目标人员依次出现在监控摄像机32(摄像机C2)、监控摄像机33(摄像机C3)、监控摄像机34(摄像机C4)中，在事件发生表图像ETI中分别显示代表需要监控的目标人员(例如图示中的圆形)的出现的事件EV。值得指出的是，在图7中，由于在与事件发生表图像ETI的左端起算第二个事件(例如，放大操作)的时刻相对应的地方，显示有放大操作标记EX。因此，用户知晓在上述的时刻进行了放大操作。

接下来，将参考图2所示的流程图等，来说明本实施方式的信息处理系统100中的图像显示处理操作，即，在所述信息终端装置10中通过Web浏览器查看各个监控图像的处理操作。

首先，所述信息终端装置10的控制部21基于用户的开始操作来开启浏览器(步骤S101)，在浏览器中指定应用服务器40的URL(统一资源定位符)，执行上述的指定的URL的访问请求(步骤S102)。所述应用服务器40接收访问请求(步骤S103)，并发送用于显示登录界面的界面信息(步骤S104)。

所述信息终端装置10的通信部14接收用于显示登录界面的界面信息(步骤S105)。所述信息终端装置10的控制部21发送包括ID信息和密码的认证信息(步骤S106)。所述应用服务器40接收认证信息(步骤S107)，使用上述的接收到的认证信息执行认证处理操作(步骤S108)，并发送用于显示菜单界面(操作菜单)的界面信息(步骤S109)。

所述信息终端装置10的通信部14接收用于显示菜单界面的界面信息(步骤S110)。然后，信息终端装置10的显示控制部26在显示部12上显示菜单界面。在上述的菜单界面上，显示有用于选择显示来自分发装置30监控图像的操作项等。

当在所述显示部12的菜单界面上选择用于选择显示来自分发装置30监控图像的操作项时，所述信息终端装置10的控制部21向应用服务器40发送用于将四台监控摄像机31至监控摄像机34拍摄的各个监控图像显示的显示请求(步骤S111)。

所述应用服务器40接收显示请求(步骤S112)，并指定帧(步骤S113)。由于在初始设置(默认)中，设置为显示多个界面显示，因此指定了多个界面显示的帧。更具体地，指定界面信息，该界面信息用于显示将用于显示多个图像的多个帧信息与各个帧区域内显示的监控摄像机的IP地址相关联的划分界面(划分区域)。值得指出的是，在本实施方式中的帧具有将所述显示部12的显示界面等量划分为左上、右上、左下以及右下的四个划分区域(简称为四界面帧)。其以HTML格式之类的结构化语言表示。

所述应用服务器40发送用于显示四界面帧的界面信息(步骤S114)。所述信息终端装置10的通信部14接收用于显示四界面帧的界面信息(步骤S115)。

所述信息终端装置10的控制部21向四台监控摄像机31至监控摄像机34请求图像(步骤S116)。更具体地，通过使用包括在用于显示四界面帧的界面信息中的对应于各个帧的四台监控摄像机31至监控摄像机34的IP地址，分别向四台监控摄像机31至监控摄像机34请求分发图像。

所述分发装置30接收四台监控摄像机31至监控摄像机34拍摄的监控图像的分发请求(步骤S117)。所述分发装置30将四台监控摄像机31至监控摄像机34的各个监控图像分发到信息终端装置10(步骤S118)。所述信息终端装置10的通信部14从四台监控摄像机31至监控摄像机34的各个监控图像(步骤S119)。

所述信息终端装置10的显示控制部26在显示界面上显示浏览器上的图像，该浏览器的图像是从四台监控摄像机31至监控摄像机34接收的监控图像分别嵌入于相对应的帧的图像(步骤S120)。也就是说，如图4所示，将显示有从四台监控摄像机31至监控摄像机34接收的各个监控图像的四划分界面显示在所述显示部12上。

所述信息终端装置10的控制部21判断是否已经执行了用于放大一个划分区域的放大操作(即拖动操作)(步骤S121)。当执行放大操作(即拖动操作)时(步骤S121为“是”)，所述控制部21执行伴随放大操作的显示变更处理操作(步骤S122)。

接下来，将参照图3所示的流程图等，对在本实施方式的信息处理系统100中的显示变更处理，即，伴随着放大四个划分区域中的一个划分区域，缩小其他的划分区域后的各个监控图像在信息终端装置10的Web浏览器中浏览的处理操作进行说明。

如图3所示，所述信息终端装置10的控制部21向应用服务器40发送放大操作(即拖动操作)的通知(步骤S201)。

具体而言，所述剩余区域指定部23指定显示部12的显示界面中的除去通过用户对触摸面板13的放大操作(即拖动操作)所放大的一个划分区域(即图5的划分区域D1)后的剩余区域A1。然后，在所述剩余区域指定部23所指定的上述的剩余区域A1中，分布区域确定部24确定用于分布除去放大的一个划分区域(图6的划分区域D1)以外的所有其他划分区域(图6的划分区域D2至D4)的分布区域A3。接下来，所述缩小设置部25在分布区域确定部24所确定的分布区域A3中，将其他的划分区域(图6的划分区域D2至D4)分别进行缩小后设置。将代表通过上述的方式确定的变更后的布局的放大操作通知输出至应用服务器40中。

所述应用服务器40接收放大操作(即拖动操作)通知(步骤S202)，在事件发生表图像ETI的拍摄时间轴上，执行事件发生表图像ETI的更新处理操作，即追加与该放大操作的接收时间相对应的地方的放大操作标记EX(步骤S202A)，发送用于显示放大操作后的变更后界面帧的界面信息(步骤S203)。所述信息终端装置10的通信部14接收用于显示放大操作后的变更后界面帧的界面信息(即步骤S204)。

所述信息终端装置10的控制部21向分发装置30请求图像。具体而言，通过使用包括在用于显示变更后的一个界面帧的界面信息中的对应于各个帧的四台监控摄像机31至监控摄像机34的IP地址，分别向四台监控摄像机31至监控摄像机34请求分发图像(步骤S205)。

四台监控摄像机31至监控摄像机34接收图像的分发请求(步骤S206)，并分发图像(步骤S207)。所述信息终端装置10的通信部14从四台监控摄像机31至监控摄像机34接收图像(步骤S208)。

将从四台监控摄像机31至监控摄像机34接收的图像嵌入进行放大操作后的变更后界面帧，在放大的一个划分区域(图7的划分区域D1)中将该一个划分区域的图像(即需要监控的目标人员(例如图示中的圆形)的图像)放大显示的同时，在所述图像判定部27判断在缩小设置部25缩小后设置的其他的划分区域(图7的划分区域D2至划分区域D4)的图像中包含需要监控的目标人员(例如图示中的圆形)的情况下，信息终端装置10的显示控制部26在显示界面上显示将含有需要监控的目标人员(例如图示中的圆形)的指定部分SE的图像进行放大显示后的浏览器上的变更后图像(步骤S209)。

如图7所示，在所述显示部12的显示界面中放大的一个划分区域D1中，所述监控摄像机31的监控图像(即，含有需要监控的目标人员(例如图示中的圆形)的图像)进行放大显示，在所述显示部12的显示界面中缩小的其他的划分区域D2至D4中，在每次所述图像判定部27判断其他的划分区域D2至划分区域D4的图像中包含有目标人员时，将所述监控摄像机32至监控摄像机34的各个监控图像的指定部分SE的图像(即，需要监控的目标人员(例如图示中的圆形)的图像)进行放大显示。

所述信息终端装置10的判定部28判断从剩余区域指定部23指定的剩余区域A1中除去分布区域确定部24确定的分布区域A3后的空白区域A2，相对于显示界面的比例是否在特定比例(例如10％)以上(步骤S210)。在所述判定部28判断为在特定比例(例如10％)以上的情况下(步骤S210为“是”)，信息终端装置10的控制部21对应用服务器40执行类型显示图像MI和事件发生表图像ETI的显示请求(步骤S211)。所述应用服务器40接收类型显示图像MI和事件发生表图像ETI的显示请求(步骤S212)，向所述信息终端装置10发送与类型显示图像MI和事件发生表图像ETI相对应的显示图像(步骤S213)。所述信息终端装置10的通信部14接收与类型显示图像MI和事件发生表图像ETI相对应的显示图像(步骤S214)。如图7所示，所述信息终端装置10的显示控制部26在显示部12的显示界面的空白区域A2中，显示与四个划分区域的图像相关联的类型显示图像MI和代表事件EV的发生时间的事件发生表图像ETI相对应的显示图像(步骤S215)，然后，结束本次处理操作。

也就是说，如图7所示，在所述判定部28判断在特定比例(例如10％)以上的情况下(步骤S210为“是”)，所述显示控制部26在空白区域A2中显示与多个划分区域的图像相关联的类型显示图像MI和代表事件EV的发生时间的事件发生表图像ETI。

在所述判定部28判断空白区域A2相对于显示界面的占比小于特定比例(例如10％)的情况下(步骤S210为“否”)，所述信息终端装置10的控制部21对应用服务器40仅仅执行事件发生表图像ETI的显示请求(步骤S217)。所述应用服务器40接收事件发生表图像ETI的显示请求(步骤S218)，向所述信息终端装置10发送与事件发生表图像ETI相对应的显示图像(步骤S219)。所述信息终端装置10的通信部14接收与事件发生表图像ETI相对应的显示图像(步骤S220)。如图8所示，信息终端装置10的显示控制部26在显示部12的显示界面的空白区域A2中，显示与代表事件EV的发生时间的事件发生表图像ETI相对应的显示图像(步骤S221)，然后，结束本次处理操作。

也就是说，如图8所示，在所述判定部28判断小于特定比例(例如10％)的情况下(步骤S210为“否”)，所述显示控制部26在空白区域A2中不显示类型显示图像MI，显示事件发生表图像ETI。

返回到图2，在执行伴随着放大操作的显示变更处理操作(步骤S122)之后，所述信息终端装置10的控制部21判断是否接收浏览监控摄像机的结束显示的指示(步骤S123)。在所述控制部21确定为没有结束显示的情况下(步骤S123为“否”)，返回步骤S121，在确定为结束显示的情况下(步骤S123为“是”)，则结束本次处理操作。

通过上述的方式，在本实施方式中，在四台监控摄像机31至监控摄像机34的各个监控图像分别显示在将所述显示部12的显示界面划分为四个后的划分区域D1至划分区域D4中的情况下，当对触摸面板13执行显示界面的划分区域D1的放大操作时，如图7所示，所述显示控制部26在放大的一个划分区域D1中放大显示该一个划分区域D1的图像(监控摄像机31中的监控图像)的同时，在所述缩小设置部25缩小后设置的其他的划分区域D2至划分区域D4中放大显示该其他的划分区域中的指定部分SE的图像(监控摄像机32至监控摄像机34中的指定部分SE的图像)。因此，即使在放大显示界面的多个(四个)划分区域D1至划分区域D4中的一个划分区域D1的同时，缩小其他的划分区域D2至划分区域D4的情况下，也可以抑制缩小的其他的划分区域D2至划分区域D4的图像显示难以看清的技术问题。

虽然从所述应用服务器40接收到用于显示四界面帧或者变更后的界面帧的界面信息、类型显示图像MI、事件发生表图像ETI及其对应显示图像，所述信息终端装置10还可以在确定上述的界面信息的同时，通过拥有或者从分发装置30获取类型显示图像MI、事件发生表图像ETI及其对应显示图像，仅对所述应用服务器40执行登录和认证操作。在这种情况下，可以仅由信息终端装置10执行图4至图8中所示的一系列界面显示操作。

<变形例>

在上述的实施方式中，在所述信息终端装置10的一端执行事件EV的检测操作。也就是说，所述图像判定部27判断划分区域D2至划分区域D4的图像中包含需要监控的目标人员，所述显示控制部26在事件发生表图像ETI中的与该判断的时刻相对应的位置显示事件EV。与此不同的是，如图9所示的变形例中，还可以在应用服务器40的一端执行事件EV的检测操作。

在变形例中，所述应用服务器40执行图9中所示的事件检测处理操作。其前提是，假设所述应用服务器40已经接收到如图3中的步骤S202所示的放大操作通知(假设为与上述的实施方式相同的划分区域D1的放大操作通知)。

所述应用服务器40向四台监控摄像机31至监控摄像机34发出图像请求(步骤S301)。所述分发装置30接收来自应用服务器40的图像请求(步骤S302)。分发装置30将四台监控摄像机31至监控摄像机34的各个监控图像分发到应用服务器40(步骤S303)。

所述应用服务器40从四台监控摄像机31至监控摄像机34接收各个监控图像(步骤S304)。应用服务器40对从四台监控摄像机31至监控摄像机34接收的各个监控图像执行图像识别处理操作(步骤S305)。具体而言，包含在应用服务器40中的图像判定部对监控摄像机31的放大的监控图像执行图像识别处理操作，将包含在该放大的监控图像的图像中的目标人员指定为需要监控的目标人员。然后，包含在应用服务器40中的图像判定部对监控摄像机32至监控摄像机34逐一判断其他的监控摄像机32至监控摄像机34的各个监控图像中是否包含需要监控的目标人员。也就是说，应用服务器40执行对来自其他监控摄像机32至监控摄像机34的各个监控图像中包含需要监控的目标人员的事件EV的事件检测操作(步骤S306)。

在所述应用服务器40判断检测到事件检测的情况下(步骤S306为“是”)，创建追加了事件检测到的事件EV的事件发生表图像ETI(步骤S307)。将此时创建的事件发生表图像ETI发送到如前述的图3所示的步骤S213以及步骤S219中的信息终端装置10中。如图7或者图8所示，用户通过查看显示在显示部12的显示界面的空白区域A2中的事件发生表图像ETI的各个事件EV，就可以掌握发生的事件EV。在上述的步骤S307之后或者确定为没有检测到事件的情况下(步骤S306为“否”)，应用服务器40判断图像分发是否结束(步骤S308)，在图像分发没有结束的情况下(步骤S308为“否”)，返回至步骤S305。另一方面，在图像分发结束的情况下(步骤S308为“是”)，则结束本次处理操作。

值得指出的是，作为上述的事件EV，除了上述的需要监控的目标人员(图示中的圆形)的出现以外，还可以包括物体或者物品之类的目标物的出现、消失、带走、留下等。例如，目标物的带走的检测可以通过图像识别检测到目标物的图像从监控图像中消失。目标物的留下的检测可以通过图像识别检测到目标物的图像出现在监控图像中。更进一步地，作为上述的事件EV，还可以包括检测目标人的入室和出室等、对目标人的运动的检测状态变化(例如，通过对由监控摄像机拍摄的监控图像执行面部识别处理等，自动跟踪目标人物检测行为可疑的举动等)、信息处理系统100的开始/停止、录像的开始/停止、外部传感器的检测变化(例如，当多功能复合机是目标物时，检测到在没有发生错误的状态下调色剂盖的打开状态)等。

对于上述的事件EV，还可以不是由信息终端装置10或者应用服务器40对监控图像执行图像识别处理操作，而通过由分发装置30对监控图像执行的图像识别处理操作，来检测该事件，将图像分发和事件信息相关联后的信息从分发装置30分发至应用服务器40中，应用服务器40基于接收的事件信息来掌握图像分发过程中发生的事件。

在上述的实施方式和变形例中，虽然是以监控摄像机31至监控摄像机34拍摄的监控图像为例，但不限于上述的监控图像，还可以是监控目的以外的图像，例如体育、纪录片之类的电视图像等。

此外，在上述的实施方式中描述的信息终端装置10的显示方法可以作为程序来进行使用。该程序记录在计算机可读的非暂时性记录介质中，例如，硬盘、CD-ROM、DVD-ROM、半导体存储器等。在这种情况下，记录该程序的计算机可读的非暂时性记录介质是本发明的一个实施方式。

Claims (7)

1.一种信息终端装置，其特征在于，包括，

显示部，用于显示通过将显示界面划分为多个区域而获得的多个划分区域中的每一个的图像；

操作部，用于接收用户的将所述的显示界面的所述的多个划分区域中的一个划分区域放大的放大操作；

剩余区域指定部，用于指定在所述的显示界面上除去用户通过所述的操作部的放大操作放大的所述的一个划分区域后的剩余区域；

分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；

缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；

显示控制部，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示；

判定部，用于判断从所述的剩余区域指定部指定的所述的剩余区域中除去所述的分布区域确定部确定的所述的分布区域后的空白区域相对于所述的显示界面的比例是否在预先设定的特定比例以上，

在所述的判定部判断为在所述的特定比例以上的情况下，所述的显示控制部在所述的空白区域上显示代表所述的多个划分区域的图像的类别的类型显示图像和代表相对于表示预先设定时间的时间轴的事件的发生时间的事件发生表图像；在所述的判定部判断为小于所述的特定比例的情况下，在所述的空白区域中不显示所述的类型显示图像，显示所述的事件发生表图像。

2.一种根据权利要求1所述的信息终端装置，其特征在于，

还包括图像判定部，通过对所述的其他的划分区域中显示的图像执行图像识别处理操作，来判断该图像中是否包含目标人员或者目标物品，

在所述的图像判定部判断在该图像中包含目标人员的情况下，所述的显示控制部将包含所述的图像判定部进行面部识别的所述目标人员面部的部分作为所述的指定部分，在所述的其他的划分区域内放大并显示；在所述的图像判定部判断该图像中包含预先设定的目标物品的情况下，将含有所述的图像判定部识别的所述的目标物品的部分作为所述的指定部分，在所述的其他的划分区域内放大并显示。

3.一种根据权利要求2所述的信息终端装置，其特征在于，

包括存储部，用于存储验证源注册数据，

所述的图像判定部基于显示在放大的划分区域中的图像信息来提取出目标人员的面部认证信息，将所述的提取出的目标人员的面部认证信息作为验证源注册数据存储在所述的存储部中，在该其他的划分区域中逐个判断基于每个所述的其他的划分区域的图像信息所提取出的目标人员的面部识别信息，是否与所述的存储部的验证源注册数据相一致，在一致的情况下，判断为该图像中包含所述的目标人员。

4.一种根据权利要求1所述的信息终端装置，其特征在于，

所述的显示控制部显示代表所述的事件发生表图像中示出的事件以及与该事件相关联的划分区域的对应关系的对应显示图像。

5.一种根据权利要求1所述的信息终端装置，其特征在于，

在所述的显示控制部基于用户对所述的操作部的放大操作，显示所述的一个划分区域的放大图像的情况下，将代表所述的一个划分区域进行放大的放大操作标记显示在所述的事件发生表图像中的与所述的放大操作时刻相对应的地方。

6.一种信息处理系统，其特征在于，是能够与可显示经由网络分发的多个图像的信息终端装置和应用服务器进行通信的信息处理系统，

所述的信息终端装置包括，请求部，用于向所述的多个图像的分发源请求该多个图像；

显示部，用于将所述的请求部请求的所述的多个图像显示在将显示界面划分为多个的多个划分区域的每一个中；

操作部，用于接收用户的将所述的显示界面的所述的多个划分区域中的一个划分区域放大的放大操作；

剩余区域指定部，用于指定在所述的显示界面上除去用户通过所述的操作部的放大操作放大的所述的一个划分区域后的剩余区域；

分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；

缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；

通知部，用于将与用户通过所述的操作部的放大操作放大的所述的一个划分区域和所述的缩小设置部在所述的分布区域中缩小后设置的所述的其他划分区域相关的通知输出到所述的应用服务器；

获取部，用于获取所述的应用服务器的发送部发送的界面信息；

显示控制部，使用所述的获取部获取的所述的界面信息，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示；

所述的应用服务器包括所述的发送部，用于根据所述的通知部发送来的通知，发送所述的信息终端装置的所述的显示界面中的所述的放大的一个划分区域和所述的缩小的其他划分区域的界面信息，

所述的信息终端装置

还包括判定部，用于判断从所述的剩余区域指定部指定的所述的剩余区域中除去所述的分布区域确定部确定的所述的分布区域后的空白区域相对于所述的显示界面的比例是否在预先设定的特定比例以上，

在所述的判定部判断为在所述的特定比例以上的情况下，所述的显示控制部在所述的空白区域上显示代表所述的多个划分区域的图像的类别的类型显示图像和代表相对于表示预先设定时间的时间轴的事件的发生时间的事件发生表图像；在所述的判定部判断为小于所述的特定比例的情况下，在所述的空白区域中不显示所述的类型显示图像，显示所述的事件发生表图像。

7.一种存储有显示控制程序的计算机可读非暂时性的存储介质，其特征在于，存储有显示控制程序的计算机可读非暂时性的存储介质中，该显示控制程序通过处理器对含有该处理器的计算机执行该显示控制程序，发挥着如下的作用：

剩余区域指定部，用于指定在所述的显示界面中，除去用户通过操作部的放大操作放大显示界面的多个划分区域中的一个划分区域后得到的一个划分区域之后的剩余区域；

分布区域确定部，用于确定在所述的剩余区域指定部指定的所述的剩余区域中，用于分布所述的放大的一个划分区域以外的所有其他的划分区域的分布区域；

缩小设置部，用于在所述的分布区域确定部确定的分布区域中，将所述的其他划分区域分别缩小后设置；

显示控制部，在所述的放大的一个划分区域中将该一个划分区域的图像放大显示的同时，在所述的缩小设置部缩小后设置的所述的其他划分区域中，在该其他划分区域内将该其他划分区域的指定部分的图像进行放大显示；

判定部，用于判断从所述的剩余区域指定部指定的所述的剩余区域中除去所述的分布区域确定部确定的所述的分布区域后的空白区域相对于所述的显示界面的比例是否在预先设定的特定比例以上，

在所述的判定部判断为在所述的特定比例以上的情况下，所述的显示控制部在所述的空白区域上显示代表所述的多个划分区域的图像的类别的类型显示图像和代表相对于表示预先设定时间的时间轴的事件的发生时间的事件发生表图像；在所述的判定部判断为小于所述的特定比例的情况下，在所述的空白区域中不显示所述的类型显示图像，显示所述的事件发生表图像。

Images