CN110032291B - 信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质 - Google Patents

信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质 Download PDF

Info

Publication number
CN110032291B
CN110032291B CN201811634881.7A CN201811634881A CN110032291B CN 110032291 B CN110032291 B CN 110032291B CN 201811634881 A CN201811634881 A CN 201811634881A CN 110032291 B CN110032291 B CN 110032291B
Authority
CN
China
Prior art keywords
display
unit
divided
divided regions
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811634881.7A
Other languages
English (en)
Other versions
CN110032291A (zh
Inventor
坂下文弥
平沼洋一
坂口翔一
藤原尚平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Publication of CN110032291A publication Critical patent/CN110032291A/zh
Application granted granted Critical
Publication of CN110032291B publication Critical patent/CN110032291B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

信息终端装置具备显示部、显示控制部、触摸面板、操作检测部以及区域设定部。在显示控制部使显示部进行将显示画面分割为三个以上的显示时，操作检测部检测张开操作，所述张开操作是在分别利用一根手指来接触相邻的两个分割区域的每个的状态下以扩张该两个手指的方式移动的张开操作。当检测到张开操作时，区域设定部在显示画面中，通过张开操作使两个分割区域沿两个手指移动的方向并列，并进行将显示画面一分为二且仅配置两个分割区域的设定。显示控制部使被进行了张开操作的各分割区域的图像作为通过区域设定部设定的两个分割区域而扩大并显示，并使两个分割区域以外的其他分割区域的图像不显示。根据该信息终端装置，能够利用一次操作将显示画面中的三个以上的分割区域中的仅相邻的分割区域的图像扩大并显示。

Description

信息终端装置、信息处理系统以及存储了显示控制程序的计 算机可读取的非瞬时性记录介质
技术领域
本发明涉及信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质，特别涉及用于利用一次的操作使显示画面中的三个以上的分割区域中的仅相邻的分割区域的图像扩大并显示的技术。
背景技术
智能手机等便携式终端装置(显示装置的一个例子)具备在显示部的显示画面上设置的触摸面板，通过触摸面板来接受对显示部的显示画面的用户操作(触摸操作等)，并对该用户操作进行应答动作。
一般的显示装置在显示画面上显示将四个图像利用两行两列的配置而汇集的4in1图像，当用户在利用两根手指分别接触4in1图像的行方向的相邻的两个图像的显示区域的状态下进行以扩张该两指的方式移动的张开操作时，关于被进行了该张开操作的两个图像，解除汇集并作为单个图像在行方向上排列并显示，关于剩余的两个图像，作为保持汇集的2in1图像同样在行方向上排列并显示。
发明内容(Summary)
然而，在上述一般显示装置中，例如当对4in1图像进行一次张开操作时，关于该张开操作所涉及的两个图像，解除其汇集并显示，关于其他图像，保持2in1图像并显示。因此，在上述一般显示装置中，例如即使对4in1图像进行一次张开操作，无法仅使该张开操作所涉及的两个图像在显示画面上显示并且使该两个图像扩大并显示。另外，上述一般显示装置是通过张开操作来解除在显示画面上显示的汇集图像的汇集的显示装置，无法利用张开操作来变更显示画面的分割数。
本发明是鉴于上述情况所作出的发明，其目的在于，能够利用一次操作将显示画面中的三个以上的分割区域中的仅相邻的分割区域的图像扩大并显示。
本发明的一个方面所涉及的信息终端装置具备：显示部；显示控制部，其使图像按分割区域在所述显示部上显示，所述分割区域将显示画面分割为多个；触摸面板，其设置在所述显示部的显示画面上；操作检测部，其在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自所述触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张该两指的方式移动的张开操作；区域设定部，其在利用所述操作部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；所述显示控制部使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示。
另外，本发明的另一个方面所涉及的信息处理系统是信息终端装置和应用服务器能够通信的信息处理系统，所述信息终端装置能够显示经由网络发送的多个图像；其中，所述信息终端装置具备：请求部，其向所述多个图像的传送源请求该多个图像；显示部；显示控制部，其使图像按分割区域在所述显示部上显示，所述分割区域将显示画面分割为多个；触摸面板，其设置在所述显示部的显示画面上；操作检测部，其在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自所述触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张该两指的方式移动的张开操作；区域设定部，其在利用所述操作部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；通知部，其将通知输出到所述应用服务器，所述通知是通过所述区域设定部仅设定将所述显示画面一分为二的两个分割区域的通知；获取部，其获取画面信息，所述画面信息通过所述应用服务器的发送部被发送；所述应用服务器具备所述发送部，所述发送部按照来自所述通知部的通知，发送所述信息终端装置中的所述显示画面中的被进行了该张开操作的各分割区域的画面信息；所述显示控制部使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示。
另外，在本发明的另一个方面所涉及的存储了显示控制程序的计算机可读取的非瞬时性记录介质中，该显示控制程序通过使处理器执行该显示控制程序，从而使包括所述处理器的计算机作为以下而起作用：显示控制部，其使图像按分割区域在所述显示部上显示，所述分割区域将显示画面分割为多个；操作检测部，其在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自所述触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张该两指的方式移动的张开操作；区域设定部，其在利用所述操作部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；进一步地，使所述显示控制部以如下方式起作用：使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示。
根据本发明，能够利用一次操作将显示画面中的三个以上的分割区域中的仅相邻的分割区域的图像扩大并显示。
附图说明
图1是示出本发明的一个实施方式所涉及的信息终端装置以及信息处理系统的构成的框图。
图2是示出信息处理系统中的图像显示处理的流程图。
图3是示出信息终端装置的显示变更处理的流程图。
图4是示出信息终端装置中的用于变更分割显示的处理的流程图。
图5是示出在信息终端装置的显示画面的四个分割区域中分别显示四台监控摄像机的图像的一个例子的图。
图6A是示出对于显示画面的四个分割区域中的相邻的分割区域的张开操作的图。
图6B是示出图6A中所示的进行了张开操作的两个分割区域进行的二分割显示的图。
图7A是示出对图6B中所示的两个分割区域的捏合操作的图。
图7B是示出通过图7A中所示的捏合操作而回到原本的四分割显示的图。
图8A是示出在张开操作中一个手指的移动距离比另一个手指大的图。
图8B是示出移动距离较长的分割区域显示为较大的图。
图9A是示出对图8B中所示的一个分割区域的扫动操作的图。
图9B是示出通过图9A中所示的扫动操作使两个分割区域交换的图。
图10A是示出对图8B中所示的相邻的分割区域的恢复操作的图。
图10B是示出通过图10A中所示的恢复操作而回到原本的四分割显示的图。
具体实施方式
以下，参照附图对本发明的实施方式所涉及的信息终端装置以及信息处理系统进行详细的说明。
图1是示出本发明的信息终端装置以及信息处理系统的构成的框图。本实施方式的信息处理系统100是能够利用平板型计算机等的信息终端装置10的网页浏览器来查看由发送装置30的多个监控摄像机31～监控摄像机34拍摄的各监控图像的信息处理系统。
所述信息处理系统100具备信息终端装置10、发送装置30、应用服务器40和网络50。信息终端装置10、发送装置30以及应用服务器40经由网络50各自可通信地连接。
所述发送装置30具备多个(本实施方式中为四台)监控摄像机31～监控摄像机34、与信息终端装置10以及应用服务器40可通信的路由器35。所述路由器35与监控摄像机31～监控摄像机34连接。此外，监控摄像机31～监控摄像机34是拍摄静止图像和运动图像(这些统称为图像)的装置，运动图像也称为影像。另外，也可以利用一个监控摄像机来提供多个图像。
所述应用服务器40管理与路由器35连接的四台监控摄像机31～监控摄像机34的IP地址，是在从信息终端装置10对这些监控摄像机31～监控摄像机34所拍摄的各图像作出查看请求的情况下，提供能够在浏览器上显示图像的图像信息的WEB应用服务器。
所述信息终端装置10例如是作为平板型计算机的便携式终端装置,且具备显示部12、触摸面板13、通信部14、存储部15和控制单元20。这些构成要素能够相互通过总线来进行数据或信号的发送和接收。信息终端装置10安装有浏览器，该浏览器用于接收应用服务器40的服务的提供。此外，信息终端装置10也可以是智能手机等便携式终端装置、台式个人电脑等。
所述显示部12由液晶显示器(LCD：Liquid Crystal Display)、有机EL(OLED：有机发光二极管(Organic Light-Emitting Diode))等构成。
所述触摸面板13是所谓的电阻膜方式、静电电容方式的触摸面板。触摸面板13配置在显示部12的显示画面上，检测手指等对显示部12的显示画面的接触和其接触位置。所述触摸面板13若检测到手指等的接触，则将表示该接触位置的坐标的检测信号输出到控制单元20的操作检测部23等。因而，所述触摸面板13实现作为供对显示部12的显示画面进行的用户操作输入的操作部的作用。
另外，所述信息终端装置10作为供用户操作输入的操作部，除了具备上述触摸面板13，还可以具备键盘。
所述通信部14是具备未图示的无线LAN(局域网)芯片等通信模块的通信接口。所述通信部14具有与发送装置30和应用服务器40的通信功能。
所述存储部15由大容量的SSD((固态硬盘)Solid State Drive)、HDD((硬盘驱动器)Hard Disk Drive)等构成，并存储各种数据和程序。
所述控制单元20由处理器、RAM(随机存取存储器(Random Access Memory))、以及ROM(只读存储器(Read Only Memory))等构成。处理器为CPU(中央处理单元(CentralProcessing Unit))、MPU、或是ASIC等。该控制单元20通过利用上述处理器来执行存储在上述ROM或存储部15中的控制程序，来作为控制部21、通信控制部22、操作检测部23、区域设定部24、分割比计算部25、显示控制部26以及事件判定部27起作用。此外，控制单元20的上述各构成要素还可以不依赖基于前述控制程序的动作，而是分别由硬件电路构成。
所述控制部21对信息终端装置10的整体的动作控制进行管理。另外，所述控制部21与显示部12、触摸面板13、通信部14、以及存储部15等连接，以进行上述各构成要素的动作控制、以及与各构成要素之间的信号或数据的接收和发送。控制部21例如为了控制显示部12的显示动作而控制显示控制部26。通信控制部22具有对通信部14的通信动作进行控制的功能。
如后述的图5所示，所述显示控制部26以将显示部12的显示画面设为例如四画面显示的方式来控制。具体地，显示控制部26以在四个分割区域D1～分割区域D4上分别显示利用四台监控摄像头31～34拍摄的各监控图像的方式来进行控制，该四个分割区域D1～分割区域D4将显示部12的显示画面等分割为左上、右上、左下以及右下这四个。另外，显示控制部26如图5所示在各分割区域D1～分割区域D4的左上角部显示“C1”～“C4”，分别表示监控摄像机31～监控摄像机34所拍摄的图像。在图5中，利用圆形、三角形、五角形、星形表示监控摄像机31～监控摄像机34的各监控图像。在本实施方式中，将在分割区域D1的图像中包含的对象者(图5中所示的圆形)作为要监控的对象者，将其他分割区域D2～分割区域D4中分别表示的三角形、五角形、星形作为非要监控的对象者。
所述操作检测部23基于从触摸面板13输出的检测信号，确定由用户输入的用户操作。然后，控制部21进行与确定的用户操作对应的控制。在该用户操作中，例如有触摸操作、张开操作、捏合操作、扫动操作、恢复操作等。
<触摸操作>
当用户使手指与触摸面板13接触并迅速分离时，触摸面板13将表示检测到接触的位置的检测信号输出到操作检测部23。当输入该检测信号时，操作检测部23基于该检测信号，检测到用户操作为触摸操作。该触摸操作例如对显示部12的显示画面上的软按键而进行。
<张开操作>
当用户在使两根手指与触摸面板13接触的状态下以扩张该两指的方式移动时，触摸面板13分别检测最初检测到接触的两个初始位置，并将表示从该各初始位置到最后检测到接触的各最终位置的各移动位置的两个检测信号输出到操作检测部23。操作检测部23基于输入的该两个检测信号，检测到用户操作为张开操作，以及张开操作的操作方向以及最终位置。在本实施方式中，张开操作例如是用于以下的操作：使显示部12的显示画面上的四个分割区域D1～分割区域D4中的、仅被进行了该张开操作的相邻的两个分割区域D1、分割区域D2在显示画面上显示，并且使该两个分割区域D1、分割区域D2的图像扩大并显示。具体地，如图6所示，通过在使用户的大拇指和食指与显示部12的显示画面中的分割区域D1内的位置(例如初始位置P11)和分割区域D2内的位置(例如初始位置P21)分别接触的状态下以扩张该两指的方式移动到各最终位置P12、P22，触摸面板13分别检测各初始位置P11、P21，并将表示从该各初始位置P11、P21到各最终位置P12、P22的各移动位置的两个检测信号输出到操作检测部23。操作检测部23基于输入的该两个检测信号，检测到用户操作为张开操作，以及张开操作的操作方向以及最终位置P12、P22。此外，在本实施方式中，将张开操作设为图5中所示的不保持分割区域D1、分割区域D2的纵横比的扩大操作(在使分割区域D3、分割区域D4扩大的情况下也相同)，但也可以设为保持纵横比的扩大操作。
<捏合操作>
当用户在使两根手指与触摸面板13接触的状态下以缩小该两指的方式移动时，触摸面板13分别检测最初检测到接触的两个初始位置，并将表示从该各初始位置到最后检测到接触的各最终位置的各移动位置的两个检测信号输出到操作检测部23。操作检测部23基于输入的该两个检测信号，检测到用户操作为捏合操作，以及捏合操作的操作方向以及最终位置。在本实施方式中，捏合操作例如是用于以下的操作：在通过进行前述的张开操作，仅使相邻的两个分割区域D1、分割区域D2在显示部12的显示画面上显示的情况下，返回到原本的四个分割区域D1～分割区域D4的图像。具体地，如图7所示，通过在使用户的大拇指和食指与显示部12的显示画面中的分割区域D1内的位置(例如初始位置P31)和分割区域D2内的位置(例如初始位置P41)分别接触的状态下以缩小该两指的方式移动到各最终位置P32、P42，触摸面板13分别检测各初始位置P31、P41，并将表示从该各初始位置P31、P41到各最终位置P32、P42的各移动位置的两个检测信号输出到操作检测部23。操作检测部23基于输入的该两个检测信号，检测到用户操作为捏合操作，以及捏合操作的操作方向以及最终位置P32、P42。此外，在本实施方式中，将捏合操作设为图7中所示不保持分割区域D1、分割区域D2的纵横比地返回到图5中所示的原本的四个分割区域D1～分割区域D4的操作，但也可以设为保持纵横比并返回到原本的四个分割区域D1～分割区域D4的操作。
<扫动操作>
当用户在使手指与触摸面板13接触的状态下迅速使手指移动时，触摸面板13将表示从最初检测到接触的初始位置到最后检测到接触的最终位置的各移动位置的检测信号输出到操作检测部23。当输入该检测信号时，操作检测部23基于该检测信号，检测到用户操作为扫动操作以及扫动操作的操作方向。在本实施方式中，如后述的图9所示，该扫动操作例如在交换显示部12的显示画面的两个分割区域D1、分割区域D2时对一个分割区域D2(也可以是分割区域D1)进行。具体地，如图9A所示，通过使用户的食指在与显示部12的显示画面中的例如分割区域D2内的位置(例如初始位置P91)接触的状态下迅速朝向分割区域D1移动，触摸面板13检测初始位置P91，并将表示从该初始位置P91到最终位置P92的各移动位置的检测信号输出到操作检测部23。操作检测部23基于输入的该检测信号，检测到用户操作为扫动操作，以及扫动操作的操作方向以及最终位置P92。
<恢复操作>
当用户在使两根手指与触摸面板13接触的状态下进行使该各手指沿与所述张开操作进行的手指的移动方向正交的方向平行移动的恢复操作时，触摸面板13分别检测最初检测到接触的两个初始位置，并将表示从该各初始位置到最后检测到接触的各最终位置的各移动位置的两个检测信号输出到操作检测部23。操作检测部23基于输入的该两个检测信号，检测到用户操作为恢复操作，以及恢复操作的操作方向以及最终位置。在本实施方式中，恢复操作例如是用于以下的操作：在如图8B中所示仅使相邻的两个分割区域D1、分割区域D2以与各手指的移动量的比例对应的显示画面的分割比在显示部12的显示画面上显示的情况下，利用图10A所示的一次操作(恢复操作)，返回到原本的四个分割区域D1～分割区域D4的图像。
当所述操作检测部23检测到如图6A所示的在使用户的大拇指和食指与分割区域D1内的位置(例如初始位置P11)和分割区域D2内的位置(例如初始位置P21)分别接触的状态下以扩张该两指的方式移动的张开操作时，区域设定部24如图6B所示，以使两个分割区域D1、分割区域D2沿该张开操作的方向并列设置的方式仅设定将显示部12的显示画面一分为二的两个分割区域D1、分割区域D2。
所述显示控制部26使图像在通过区域设定部24设定的图6B中所示的两个分割区域D1、分割区域D2上扩大并显示，并使两个分割区域D1、分割区域D2以外的其他分割区域D3、分割区域D4(参照图6A)的图像不显示。通过进行上述张开操作，能够利用一次操作来使四个分割区域D1～分割区域D4中的仅被进行了张开操作的相邻的两个分割区域的图像扩大并显示。
在本实施方式中，如图6B所示，显示控制部26使显示部12的显示画面中的相邻的两个分割区域D1、分割区域D2以与图6A所示的扩大前的两个分割区域D1、分割区域D2的纵横比不同的纵横比(也就是说，不保持纵横比)扩大并显示，但也可以以保持纵横比的方式扩大并显示。
而且，当所述操作检测部23检测到如图7A所示的在使用户的大拇指和食指与分割区域D1内的位置(例如初始位置P31)和分割区域D2内的位置(例如初始位置P41)分别接触的状态下以缩小该两指的方式移动的捏合操作时，区域设定部24如图7B所示，设定所述张开操作前的四个分割区域D1～分割区域D4。显示控制部26使该分割区域D1～分割区域D4在通过区域设定部24设定的图7B所示的原本的四个分割区域D1～分割区域D4上分别显示。通过进行上述的捏合操作，能够返回到张开操作前的四个分割区域D1～分割区域D4进行的显示、即原本的分割显示。
当利用所述操作检测部23检测到所述张开操作时，分割比计算部25从该张开操作时的各手指的移动量的比例求出显示部12的显示画面的分割比。例如，在存储部15中，事先存储有表示各手指的移动量的比例和显示画面的分割比的关系的计算表，分割比计算部25通过利用操作检测部23检测到的各手指的移动量的比例和所述计算表，求出显示画面的分割比。具体地，在图8A中，通过操作检测部23检测从大拇指的初始位置P51到最终位置P52的第一移动量(例如，15mm)和从食指的初始位置P61到最终位置P62的第二移动量(例如，5mm)。分割比计算部25计算出通过操作检测部23检测到的第一移动量(例如，15mm)和第二移动量(例如，5mm)的比例为3：1，确定该计算出的移动量的比例所属的计算表的输入值，求出与计算表中的确定的输入值对应的显示画面的分割比(此处为3：1)。如图8B所示，区域设定部24将两个分割区域D1、D2设定为与分割比计算部25求出的分割比对应的大小。如图8B所示，显示控制部26使图像在与所述分割比对应的大小的两个分割区域D1、D2上扩大并显示。由此，如图8B所示，能够以反映了用户的张开操作时的各手指的移动量的比例的大小来设定两个分割区域D1、分割区域D2，能够利用一次张开操作来指定两个分割区域D1、D2的大小。
如图9A所示，在使图像在与所述分割比对应的大小的两个分割区域D1、分割区域D2上扩大并显示的情况下，当利用操作检测部23检测到在利用一根手指与该两个分割区域D1、分割区域D2中的一个分割区域(在图9A中为分割区域D2)接触的状态下将该手指朝向另一个分割区域(在图9A中为分割区域D1)移动的扫动操作时，显示控制部26如图9B所示，使该两个分割区域D1、分割区域D2的图像交换并显示。通过该扫动操作，能够简单地交换并显示两个分割区域D1、D2的图像。
另外，当检测到所述张开操作时，在该张开操作时各手指的移动量的比例超过预定的上限比例(例如4：1)时，分割比计算部25将所述显示画面的分割比设为上限分割比(例如4：1)。即，分割比计算部25设为作为与上限比例(例如4：1)相同的比例的上限分割比(例如4：1)。此外，上限比例也可以是4：1以外的值。区域设定部24将两个分割区域D1、分割区域D2设定为与分割比计算部25求出的上限分割比(例如4：1)对应的大小。显示控制部26使图像在与上限分割比对应的大小的两个分割区域D1、分割区域D2上扩大并显示。由此，在图8A中所示的张开操作时的各手指的移动量的比例(例如，10：1等)超过上限比例(例如4：1)这样的情况下，将两个分割区域D1、分割区域D2设定为与上限分割比(例如4：1)对应的大小，因此能够防止一个分割区域的图像极端小地显示。
如图8B所示，在使图像在与所述分割比对应的大小的两个分割区域D1、分割区域D2上扩大并显示的情况下，当利用操作检测部23检测到捏合操作时，区域设定部24如图6B所示，将构成两个分割区域D1、分割区域D2的各自的区域彼此设定为成为1：1的分割比的大小。如图6B所示，显示控制部26使图像在所述1：1的分割比的大小的两个分割区域D1、分割区域D2上扩大并显示。由此，在如图8B所示使图像在与分割比对应的大小的两个分割区域D1、分割区域D2上显示的情况下，通过进行捏合操作，能够返回到1：1的分割比的大小的两个分割区域D1、D2。
如图10A所示，在使图像在与所述分割比对应的大小的两个分割区域D1、分割区域D2上扩大并显示的情况下，当利用操作检测部23检测到恢复操作时，区域设定部24如图10B所示，返回到该两个分割区域D1、分割区域D2显示之前的四个分割区域D1～分割区域D4(也就是说，原本的四分割画面)的设定，所述恢复操作是在利用两根手指与该两个分割区域D1、分割区域D2分别接触的状态下使该两个手指沿与扩张方向正交的方向平行移动的恢复操作。如图10B所示，显示控制部26在通过区域设定部24设定的四个分割区域D1～分割区域D4的每一个上，使对应的图像显示。由此，如图8B所示，在仅使相邻的两个分割区域D1、分割区域D2以与各手指的移动量的比例对应的显示画面的分割比在显示部12的显示画面上显示的情况下，能够利用图10A所示的一次操作(恢复操作)，一下返回到原本的四个分割区域D1～分割区域D4的图像。
所述事件判定部27对于图6B中所示的显示画面中的相邻的两个分割区域D1、分割区域D2的图像，判定是否发生了预定的特定事件。该特定事件例如为要监控的对象者(图6B中所示的圆形)的出现。具体地，在本实施方式中，事件判定部27对于在通过图6A中所示的张开操作而显示的图6B中所示的显示画面中的相邻的两个分割区域D1、分割区域D2上显示的图像，通过执行图像识别处理(例如，已知的面部识别处理、人物识别处理等)，判定在该图像中是否包括对象者或对象物。
在本实施方式中，用户通过对显示画面中的四个分割区域D1～分割区域D4中的、例如分割区域D1内的任意位置进行长按操作，从而将在分割区域D1的图像中包括的对象者(例如利用圆形图示的)作为要监控的对象者而事先确定。具体地，当利用操作检测部23检测到上述长按操作时，事件判定部27对利用操作检测部23检测到所述长按操作的分割区域D1的图像进行图像识别，将在该分割区域D1的图像中包括的对象者(例如利用圆形图示的)作为要监控的对象者而确定。例如，事件判定部27通过执行已知的面部认证处理，基于在分割区域D1上显示的图像信息，提取该对象者的面部认证信息(例如，从对象者的图像中决定面部区域，表示该面部区域中的眼·鼻·嘴等面部的特征点的信息等)。然后，事件判定部27使所述提取的该对象者的面部认证信息作为比较源注册数据而存储在存储部15中。此外，当利用操作检测部23再次检测到长按操作时，事件判定部27删除作为存储在存储部15中的比较源登记数据的对象者的面部认证信息，并解除要监视的对象者的确定。
接下来，所述事件判定部27对分割区域D1、分割区域D2的每一个，判定在图6B中所示的显示画面中的相邻的两个分割区域D1、分割区域D2中显示的图像中，是否包括要监控的对象者(例如利用圆形图示的)。具体地，事件判定部27通过执行已知的面部认证处理，判定基于分割区域D1、分割区域D2的每一个的图像信息而提取的对象者的面部认证信息是否与存储部15的比较源注册数据一致，在一致的情况下，判定为在分割区域(此处为分割区域D1)的图像中包括要监控的对象者(例如利用圆形图示的)。
在所述事件判定部27判定为发生了特定事件的情况下，即使利用操作检测部23检测到捏合操作，区域设定部24也不使在显示画面上显示的分割区域的显示数量变化。例如，在判定为图7中所示的分割区域D1的图像中发生了特定事件的情况下，即使有了图7A中所示的捏合操作，捏合操作也会被设为无效，不返回到图7B中所示的四分割显示，而是如图7A中所示保持显示画面，分割区域的显示数量不变化。通过设为这样，能够抑制包括特定事件的图像因捏合操作而较小地显示。也就是说，能够防止包括要监控的对象者的图像错误地难以看到。
在本实施方式中，监控对象如图5所示设为要监控的对象者(例如利用圆形图示的)，但也可以将例如预定的对象物(例如灭火器)作为监控对象。在该情况下，事件判定部27例如能够通过执行已知的模式匹配图像处理，来判定在分割区域D1～分割区域D4的图像中是否包括该对象物(例如灭火器)。即使事件判定部27判定为例如在图7A中所示的分割区域D1的图像中包括该对象物(例如灭火器)，且有了图7A中所示的捏合操作，捏合操作也会被设为无效，不返回到图7B中所示的四分割显示，而是如图7A中所示保持显示画面，分割区域的显示数量不变化。通过这样，能够防止包括要监控的该对象物的图像错误地难以看到。
接下来，参照图2中所示的流程图等，对本实施方式的信息处理系统100中的图像显示处理、即用于在信息终端装置10中利用Web浏览器查看各监控图像的处理进行说明。
首先，所述信息终端装置10的控制部21基于用户进行的启动操作，启动浏览器(步骤S101)，在浏览器中指定应用服务器40的URL(统一资源定位符(Uniform ResourceLocator))，并对该指定的URL进行访问请求(步骤S102)应用服务器40接受访问请求(步骤S103)，并发送用于显示登录画面的画面信息(步骤S104)。
所述信息终端装置10的通信部14接收用于显示登录画面的画面信息(步骤S105)。信息终端装置10的控制部21接收由ID信息以及密码构成的认证信息(步骤S106)。应用服务器40接收认证信息(步骤S107)，使用该接收的认证信息进行认证处理(步骤S108)，并发送用于显示菜单画面(操作菜单)的画面信息(步骤S109)。
所述信息终端装置10的通信部14接收用于显示菜单画面的画面信息(步骤S110)。并且，信息终端装置10的显示控制部26使显示部12上显示菜单画面。在该菜单画面中，显示有选择来自发送装置30的监控图像的显示的操作项目等。
当在所述显示部12的菜单画面中，选择来自发送装置30的监控图像的显示的操作项目被选择时，信息终端装置10的控制部21对应用服务器40进行用于显示利用四台监控摄像机31～监控摄像机34拍摄的各监控图像的显示请求(S111)。
所述应用服务器40接受显示请求(步骤S112)，并确定帧(步骤S113)。在初始设定(默认)中，是显示为多个画面显示的设定，因此确定多个画面显示的帧。更具体地，确定画面信息，该画面信息显示供用于显示多个图像的多个帧信息和在各个帧区域内显示的监控摄像机的IP地址建立对应关系的分割画面(分割区域)。此外，本实施方式中的帧是将显示部12的显示画面等分割为左上、右上、左下以及右下这四个的带有四个分割区域的帧(将其称为四个画面帧)。这些通过HTML格式等结构化语言表现。
所述应用服务器40发送用于显示四个画面帧的画面信息(步骤S114)。信息终端装置10的通信部14接收用于显示四个画面帧的画面信息(步骤S115)。
所述信息终端装置10的控制部21对四台监控摄像机31～监控摄像机34请求图像(步骤S116)。具体地，使用与在用于显示四个画面帧的画面信息中包含的各帧对应的四台监控摄像机31～监控摄像机34的IP地址，对四台监控摄像机31～监控摄像机34分别请求图像的发送。
所述发送装置30接受四台监控摄像头31～监控摄像机监控摄像机34拍摄的监控图像的发送请求(步骤S117)。发送装置30将四台监控摄像机31～监控摄像机34产生的各监控图像发送到信息终端装置10(步骤S118)。信息终端装置10的通信部14接收来自四台监控摄像机31～监控摄像机34的各监控图像(步骤S119)。
所述信息终端装置10的显示控制部26在显示画面上显示浏览器上的图像，该图像将从四台监控摄像机31～监控摄像机34接收的监控图像各自应用于对应的帧(步骤S120)。即，如图5所示，在显示部12上，显示有四个分割画面，该四个分割画面显示从四台监控摄像头31～监控摄像机34接收的各监控图像。
所述信息终端装置10的操作检测部23判定是否进行了显示画面的变更操作(张开操作、捏合操作、扫动操作、恢复操作等)(步骤S121)。在进行了变更操作的情况下(在步骤S121中为“是”)，控制部21进行伴随变更操作的显示变更处理(步骤S122)。
接下来，参照图3、图4中所示的流程图等，对本实施方式的信息处理系统100中的显示变更处理、即用于在信息终端装置10中利用Web浏览器查看与显示画面的变更操作对应的显示画面中的各监控图像的处理进行说明。
如图3所示，所述信息终端装置10的操作检测部23判定用户操作是否为张开操作(步骤S151)。在操作检测部23检测到张开操作的情况下(在步骤S151中为“是”)，分割比计算部25通过利用操作检测部23检测到的各手指的移动量的比例和所述计算表，求出显示画面的分割比(步骤S152)。区域设定部24将两个分割区域D1、D2设定为与分割比计算部25求出的分割比对应的大小(步骤S153)。
在步骤S151中，在所述操作检测部23没有检测到张开操作的情况下(在步骤S151中为“否”)，判定用户操作是否为捏合操作(步骤S161)。在操作检测部23检测到捏合操作的情况下(在步骤S161中为“是”)，事件判定部27对于图6B中所示的显示画面中的相邻的两个分割区域D1、分割区域D2的图像，判定是否发生了预定的特定事件(步骤S162)。在判定为发生了特定事件的情况下(在步骤S162中为“是”)，显示控制部26使通知存在特定事件的通知显示(例如，例如在分割区域D1中显示“事件发生中”)在图7A中所示的显示画面上显示(步骤S163)，并结束本处理。另外，在判定为没有发生特定事件的情况下(在步骤S162中为“否”)，如图7B所示，区域设定部24设定张开操作前的四个分割区域D1～分割区域D4(步骤S164)。
在步骤S161中，在所述操作检测部23没有检测到捏合操作的情况下(在步骤S161中为“否”)，判定用户操作是否为恢复操作(步骤S171)。在操作检测部23检测到恢复操作的情况下(在步骤S171中为“是”)，如图10B所示，区域设定部24返回到显示该两个分割区域D1、D2之前的四个分割区域D1～分割区域D4(也就是说，原本的四个分割画面)的设定(步骤S172)。
在步骤S171中，在所述操作检测部23没有检测到恢复操作的情况下(在步骤S171中为“否”)，判定用户操作是否为扫动操作(步骤S181)。在操作检测部23检测到扫动操作的情况下(在步骤S181中为“是”)，如图9B所示，显示控制部26使该两个分割区域D1、分割区域D2的图像交换并显示(步骤S182)，并结束本处理。另一方面，在操作检测部23没有检测到扫动操作的情况下(在步骤S181中为“否”)，区域设定部24进行与其他操作对应的区域设定(步骤S183)。
如图4所示，所述信息终端装置10的控制部21在图3所示的步骤S153、步骤S164、步骤S172、步骤S183之后，向所述应用服务器40进行显示画面的变更操作通知(张开操作通知、捏合操作通知、恢复操作通知、其他操作通知)(步骤S201)。
具体地，所述信息终端装置10的控制部21将与用户进行的触摸面板13的张开操作、捏合操作、恢复操作对应的表示变更后的布局的张开操作通知、捏合操作通知、恢复操作通知输出到应用服务器40。此外，在扫动操作的情况下，不进行布局变更，因此控制部21不将扫动操作通知输出到应用服务器40。
所述应用服务器40接收变更操作通知(步骤S202)，并发送用于显示与张开操作、捏合操作、恢复操作对应的变更后画面帧的画面信息(步骤S203)。信息终端装置10的通信部14接收用于显示进行了变更操作的变更后画面帧的画面信息(步骤S204)。
所述信息终端装置10的控制部21对发送装置30请求图像。具体地，使用与在用于显示变更后的一个画面帧的画面信息中包含的各帧对应的四台监控摄像机31～监控摄像机34的IP地址，对四台监控摄像机31～监控摄像机34请求图像的发送(步骤S205)。
所述四台监控摄像机31～监控摄像机34接受图像的发送请求(步骤S206)，并发送图像(步骤S207)。所述信息终端装置10的通信部14接收来自四台监控摄像机31～监控摄像机34中的所需的监控摄像头的图像(步骤S208)。例如，在通过张开操作进行图6B中所示的二分割显示的情况下，接收来自两台监控摄像机31、监控摄像机32的各图像。另外，在通过捏合操作进行图7B中所示的四分割显示的情况下，接收来自四台监控摄像机31～监控摄像机34的各图像。另外，在通过恢复操作一下返回到图10B中所示的四分割显示的情况下，接收来自四台监控摄像机31～监控摄像机34的各图像。另外，在通过扫动操作使图9A中所示的两个分割区域D1、D2的图像交换并显示的情况下，所述显示控制部26不接收来自两台监控摄像机31、监控摄像机32的各图像地、如图9B所示、两个分割区域D1、D2的图像交换并显示。此外，所述信息终端装置10也可以接收来自两台监控摄像机31、监控摄像机32的各图像。
所述信息终端装置10的显示控制部26使接收的图像应用于变更后的画面帧并显示(步骤S209)。
返回到图2，在显示变更处理(步骤S122)之后，所述信息终端装置10的控制部21判定是否接受了监控摄像机的查看的显示结束(步骤S123)。在控制部21判定为不是显示结束的情况下(在步骤S123中为“否”)，返回到步骤S121，在判定为显示结束的情况下(在步骤S123中为“是”)，结束本处理。
像这样在本实施方式中，当所述操作检测部23检测到图6A所示的张开操作时，如图6B所示，所述区域设定部24以使两个分割区域D1、分割区域D2沿该张开操作的方向并列设置的方式仅设定将显示部12的显示画面一分为二的两个分割区域D1、分割区域D2。所述显示控制部26使图像在通过区域设定部24设定的图6B中所示的两个分割区域D1、分割区域D2上扩大并显示，并使两个分割区域D1、分割区域D2以外的其他分割区域D3、分割区域D4(参照图6A)的图像不显示。由此，通过进行上述张开操作，能够利用一次操作来使四个分割区域D1～分割区域D4中的仅被进行了张开操作的相邻的两个分割区域的图像扩大并显示。
此外，作为上述特定事件，除了上述要监控的对象者(例如利用圆形图示的)的出现以外，也可以包含物体或物品等对象物的出场·退场、带走、离开等。例如，对象物的带走检测能够利用图像识别来检测对象物的图像从监控图像中消失。对象物的离开检测能够利用图像识别来检测对象物的图像在监控图像中出现。进一步地，作为上述特定事件，也可以包含对象者的进入房间·离开房间等的检测、对象者的移动检测状态的变化(例如，通过进行对利用监控摄像机拍摄的监控图像的面部识别处理等，自动跟踪对象者并检测可疑举动的移动等)、信息处理系统100的启动·停止、录制的开始·停止、外部传感器的检测变化(例如，在复合机为对象物的情况下，在没有发生错误的状态下检测到色粉罩的打开状态等)等。
关于上述特定事件，也可以不是通过信息终端装置10执行对于监控图像的图像识别处理，而是通过应用服务器40或发送装置30执行对于监控图像的图像识别处理来检测该特定事件，从发送装置30或应用服务器40将使图像发送和事件信息相关联的信息发送到信息终端装置10，从而能够在信息终端装置10侧把握上述特定事件的发生。
在上述实施方式以及变形例中，举出了监控摄像机31～监控摄像机34拍摄的监控图像的例子并进行了说明，但不限于这样的监控图像，也可以是监控目的以外的图像，例如体育或纪录片等电视图像等。
此外，利用上述实施方式说明的信息终端装置10进行的显示方法能够作为程序而提供。该程序记录在计算机可读取的非瞬时性的记录介质，例如，硬盘、CD-ROM、DVD-ROM、半导体存储器等中。在该情况下，记录了该程序的计算机可读取的非瞬时性的记录介质成为本发明的一种实施方式。

Claims (4)

1.一种信息终端装置，其特征在于，具备：
显示部；
显示控制部，所述显示控制部用于使图像按分割区域在所述显示部上显示，所述分割区域将显示画面分割为多个；
触摸面板，所述触摸面板设置在所述显示部的显示画面上；
操作检测部，所述操作检测部用于在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自所述触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张两指的方式移动的张开操作；
区域设定部，所述区域设定部用于在利用所述操作检测部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；
所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示，
还具备分割比计算部，在利用所述操作检测部检测到所述张开操作时，所述分割比计算部用于从该张开操作时的各手指的移动量的比例求出所述显示画面的分割比，
所述区域设定部还用于将所述两个分割区域分别设定为与所述分割比计算部求出的所述分割比对应的大小，
所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为与所述分割比对应的大小的所述两个分割区域而扩大并显示，
所述操作检测部还用于基于来自所述触摸面板的检测信号检测捏合操作，所述捏合操作是在所述显示画面中在分别利用一根手指来接触所述相邻的两个分割区域的每个的状态下以缩小该两指的方式移动的操作，
在使被进行了该张开操作的各分割区域的图像在与所述分割比对应的大小的所述两个分割区域上扩大并显示的情况下，当利用所述操作检测部检测到所述捏合操作时，所述区域设定部将构成所述两个分割区域的各自的区域彼此设定为成为1：1的分割比的大小，
所述显示控制部还用于使所述显示部上显示设为所述1：1的分割比的大小的所述两个分割区域，
还具备事件判定部，所述事件判定部用于对于所述显示画面中的所述相邻的两个分割区域的图像，判定是否发生了预定的特定事件，
在所述事件判定部判定为发生了所述特定事件的情况下，即使利用所述操作检测部检测到所述捏合操作，所述区域设定部也不使所述显示画面中的所述分割区域的显示数量变化。
2.根据权利要求1所述的信息终端装置，其特征在于，
具备存储部，用于存储比较源注册数据，
所述事件判定部还用于对利用所述操作检测部检测到长按操作的分割区域的图像进行图像识别，提取在该分割区域的图像中包括的对象者的面部认证信息，使该提取的对象者的面部认证信息作为比较源注册信息而存储在所述存储部中，对该相邻的两个分割区域的每一个，判断基于所述相邻的两个分割区域的每一个的图像信息而提取的对象者的面部认证信息是否与所述存储部的比较源注册数据一致，在一致的情况下，判定为在分割区域的图像中包括所述对象者，并判定发生了作为所述特定事件的所述对象者的出现。
3.一种信息终端装置，其特征在于，具备：
显示部；
显示控制部，所述显示控制部用于使图像按分割区域在所述显示部上显示，所述分割区域将显示画面分割为多个；
触摸面板，所述触摸面板设置在所述显示部的显示画面上；
操作检测部，所述操作检测部用于在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自所述触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张两指的方式移动的张开操作；
区域设定部，所述区域设定部用于在利用所述操作检测部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；
所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示，
还具备分割比计算部，在利用所述操作检测部检测到所述张开操作时，所述分割比计算部用于从该张开操作时的各手指的移动量的比例求出所述显示画面的分割比，
所述区域设定部还用于将所述两个分割区域分别设定为与所述分割比计算部求出的所述分割比对应的大小，
所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为与所述分割比对应的大小的所述两个分割区域而扩大并显示，
当检测到所述张开操作时，在该张开操作时的各手指的移动量的比例超过预定的上限比例时，所述分割比计算部还用于将所述显示画面的分割比设为作为与该上限比例相同的比例的上限分割比，
所述区域设定部还用于将所述两个分割区域设定为与所述分割比计算部求出的所述上限分割比对应的大小，
所述显示控制部还用于使设为与所述上限分割比对应的大小的所述两个分割区域在所述显示部上显示。
4.一种存储了显示控制程序的计算机可读取的非瞬时性记录介质，其特征在于，
该显示控制程序通过使处理器执行该显示控制程序，从而使包括该处理器的计算机作为以下而起作用：
显示控制部，用于使图像按分割区域在显示部上显示，所述分割区域将显示画面分割为多个；
操作检测部，用于在所述显示控制部使所述显示部进行将所述显示画面分割为三个以上的显示时，基于来自设置在所述显示部的显示画面上的触摸面板的检测信号检测张开操作，所述张开操作是在分别利用一根手指来接触三个以上的分割区域中的相邻的两个分割区域的每个的状态下以扩张两指的方式移动的张开操作；
区域设定部，用于在利用所述操作检测部检测到所述张开操作时，在所述显示画面中，通过该张开操作使所述两个分割区域沿两个手指移动的方向并列，并进行将所述显示画面一分为二且仅配置该两个分割区域的设定；
进一步地，所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为通过所述区域设定部设定的所述两个分割区域而扩大并显示，并使所述两个分割区域以外的其他分割区域的图像不显示，
还使所述计算机作为分割比计算部起作用，在利用所述操作检测部检测到所述张开操作时，所述分割比计算部用于从该张开操作时的各手指的移动量的比例求出所述显示画面的分割比，
所述区域设定部还用于将所述两个分割区域分别设定为与所述分割比计算部求出的所述分割比对应的大小，
所述显示控制部还用于使被进行了该张开操作的所述各分割区域的图像作为与所述分割比对应的大小的所述两个分割区域而扩大并显示，
所述操作检测部还用于基于来自所述触摸面板的检测信号检测捏合操作，所述捏合操作是在所述显示画面中在分别利用一根手指来接触所述相邻的两个分割区域的每个的状态下以缩小该两指的方式移动的操作，
在使被进行了该张开操作的各分割区域的图像在与所述分割比对应的大小的所述两个分割区域上扩大并显示的情况下，当利用所述操作检测部检测到所述捏合操作时，所述区域设定部将构成所述两个分割区域的各自的区域彼此设定为成为1：1的分割比的大小，
所述显示控制部还用于使所述显示部上显示设为所述1：1的分割比的大小的所述两个分割区域，
还使所述计算机作为事件判定部起作用，所述事件判定部用于对于所述显示画面中的所述相邻的两个分割区域的图像，判定是否发生了预定的特定事件，
在所述事件判定部判定为发生了所述特定事件的情况下，即使利用所述操作检测部检测到所述捏合操作，所述区域设定部也不使所述显示画面中的所述分割区域的显示数量变化。
CN201811634881.7A 2018-01-12 2018-12-29 信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质 Active CN110032291B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-003802 2018-01-12
JP2018003802A JP6977573B2 (ja) 2018-01-12 2018-01-12 情報端末装置、情報処理システムおよび表示制御プログラム

Publications (2)

Publication Number Publication Date
CN110032291A CN110032291A (zh) 2019-07-19
CN110032291B true CN110032291B (zh) 2022-08-16

Family

ID=67212886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811634881.7A Active CN110032291B (zh) 2018-01-12 2018-12-29 信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质

Country Status (3)

Country Link
US (1) US10877650B2 (zh)
JP (1) JP6977573B2 (zh)
CN (1) CN110032291B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019045144A1 (ko) * 2017-08-31 2019-03-07 (주)레벨소프트 의료용 항법 장치를 위한 의료 영상 처리 장치 및 의료 영상 처리 방법
CN117194753A (zh) * 2017-09-13 2023-12-08 谷歌有限责任公司 有效地增强具有相关内容的图像
TWI786409B (zh) * 2020-06-01 2022-12-11 聚晶半導體股份有限公司 影像偵測裝置以及影像偵測方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101212752A (zh) * 2006-12-29 2008-07-02 Lg电子株式会社 移动终端的显示装置和显示方法
CN104375744A (zh) * 2013-08-12 2015-02-25 精工爱普生株式会社 信息处理装置、信息处理方法
CN105573639A (zh) * 2014-10-17 2016-05-11 国际商业机器公司 用于触发应用的显示的方法和系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677284B2 (en) * 2009-11-04 2014-03-18 Alpine Electronics, Inc. Method and apparatus for controlling and displaying contents in a user interface
DE102009058145A1 (de) * 2009-12-12 2011-06-16 Volkswagen Ag Bedienverfahren für eine Anzeigevorrichtung eines Fahrzeugs
CN103455243B (zh) * 2012-06-04 2016-09-28 宏达国际电子股份有限公司 调整屏幕对象尺寸的方法及装置
US20150121315A1 (en) * 2013-10-27 2015-04-30 David Michael Glenn Gesture based method for entering multi-variable data on a graphical user interface.
US20150253937A1 (en) * 2014-03-05 2015-09-10 Samsung Electronics Co., Ltd. Display apparatus and method of performing a multi view display thereof
JP6332228B2 (ja) 2015-10-23 2018-05-30 京セラドキュメントソリューションズ株式会社 表示装置
US10318130B2 (en) * 2016-12-12 2019-06-11 Google Llc Controlling window using touch-sensitive edge

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101212752A (zh) * 2006-12-29 2008-07-02 Lg电子株式会社 移动终端的显示装置和显示方法
CN104375744A (zh) * 2013-08-12 2015-02-25 精工爱普生株式会社 信息处理装置、信息处理方法
CN105573639A (zh) * 2014-10-17 2016-05-11 国际商业机器公司 用于触发应用的显示的方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
多点触控手势在复杂系统数字界面中的交互研究;朱玉婷;《科技展望》;20150731;第152、154页 *

Also Published As

Publication number Publication date
US10877650B2 (en) 2020-12-29
US20190220172A1 (en) 2019-07-18
JP2019125054A (ja) 2019-07-25
CN110032291A (zh) 2019-07-19
JP6977573B2 (ja) 2021-12-08

Similar Documents

Publication Publication Date Title
US11650659B2 (en) User input processing with eye tracking
CN110032291B (zh) 信息终端装置、信息处理系统以及存储了显示控制程序的计算机可读取的非瞬时性记录介质
US20200097091A1 (en) Method and Apparatus of Interactive Display Based on Gesture Recognition
CN105190644B (zh) 用于使用触摸控制的基于图像的搜索的技术
RU2720356C1 (ru) Устройство управления, способ управления и носитель хранения
US20130169530A1 (en) Human eye controlled computer mouse interface
CN110007832B (zh) 信息终端装置、信息处理系统以及存储有显示控制程序的计算机可读非暂时性的存储介质
JP2015153195A (ja) ジェスチャ認識装置およびジェスチャ認識装置の制御方法
JP6253127B2 (ja) 情報提供装置
KR101745651B1 (ko) 손 제스처 인식 시스템 및 방법
JP6389581B1 (ja) プログラム、電子装置、及び方法
US9880721B2 (en) Information processing device, non-transitory computer-readable recording medium storing an information processing program, and information processing method
US20160048214A1 (en) Using distance between objects in touchless gestural interfaces
US20140104161A1 (en) Gesture control device and method for setting and cancelling gesture operating region in gesture control device
WO2017032020A1 (zh) 一种图片处理方法及电子终端
US20230267729A1 (en) Image recognition
US20170315964A1 (en) Web page reformatting method and apparatus, computing device and non-transitory machine readable storage medium
JP2018531564A6 (ja) ビデオデータを取得するための方法、装置、及びシステム並びにコンピュータ可読記憶媒体
CN109389082B (zh) 视线采集方法、装置、系统、计算机可读存储介质
US10318131B2 (en) Method for scaling down effective display area of screen, and mobile terminal
JP2020098409A (ja) 画像処理装置、画像処理方法および画像処理プログラム
WO2015127731A1 (zh) 软键盘布局调整方法及装置
JP5884294B2 (ja) コンテンツ表示装置、コンテンツ表示システム、サーバ、端末、コンテンツ表示方法、および、コンピュータ・プログラム
JP2015032261A (ja) 表示装置および制御方法
WO2016011803A1 (zh) 基于触摸屏的应用布局设置方法及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant