CN109951611A - 显示装置、图像处理装置以及计算机可读取的记录介质 - Google Patents

显示装置、图像处理装置以及计算机可读取的记录介质 Download PDF

Info

Publication number
CN109951611A
CN109951611A CN201811538605.0A CN201811538605A CN109951611A CN 109951611 A CN109951611 A CN 109951611A CN 201811538605 A CN201811538605 A CN 201811538605A CN 109951611 A CN109951611 A CN 109951611A
Authority
CN
China
Prior art keywords
display area
case
display
successional
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811538605.0A
Other languages
English (en)
Inventor
山口智广
松本卓人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Konica Minolta Opto Inc
Original Assignee
Konica Minolta Opto Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Opto Inc filed Critical Konica Minolta Opto Inc
Publication of CN109951611A publication Critical patent/CN109951611A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00411Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00482Output means outputting a plurality of job set-up options, e.g. number of copies, paper size or resolution
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)
  • Digital Computer Display Output (AREA)
  • Facsimiles In General (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开涉及显示装置、图像处理装置以及计算机可读取的记录介质。能够适合地检测在显示多个操作画面的状态下针对同一操作画面连续地进行的操作,更新用户意图的操作画面。显示装置具备:显示部,夹着边界线(BL)显示第1显示区域和第2显示区域;操作检测部,检测用户的操作;连续性判定部,在第1显示区域中检测到第1操作之后在第2显示区域中检测到第2操作的情况下,判定第2操作是否为相对第1操作具有连续性的操作;以及显示控制部,在第2操作是相对第1操作具有连续性的操作的情况下,根据第2操作更新第1显示区域的操作画面,在判定为第2操作是相对第1操作不具有连续性的操作的情况下,根据第2操作更新第2显示区域的操作画面。

Description

显示装置、图像处理装置以及计算机可读取的记录介质
技术领域
本发明涉及显示装置、图像处理装置以及计算机可读取的记录介质,特别涉及在将显示装置的显示区域夹着边界线分割为第1显示区域和第2显示区域的状态下检测用户的操作来进行画面更新的技术。
背景技术
能够检测由用户实施的多触摸操作的显示装置得到显著普及。该种显示装置能够将1个显示区域夹着边界线分割为多个显示区域,使不同的操作画面显示于多个显示区域的每一个。
以往,在如上述的显示装置中,已知在多个显示区域中的第1显示区域中检测到用户的2个手指之后,即使在一方的手指移动到第2显示区域的情况下,仍判定为是针对显示于第1显示区域的操作画面的撑开/捏合操作,使显示于第1显示区域的操作画面扩大或者缩小的技术(例如专利文献1)。在该以往技术中,当在第1显示区域和第2显示区域的每个中检测到触摸操作的情况下,判断为是针对第1显示区域和第2显示区域的每个的独立的操作。
然而,如上述以往技术,当在第1显示区域和第2显示区域的每一个中检测到触摸操作的情况下将每个触摸操作判断为是独立的操作时,存在对于用户未意图的操作画面被更新的可能性。例如,在用户为了使显示于第1显示区域的操作画面横向滚动,而使触摸操作的操作位置横向移动时,该操作位置有时超越边界线进入至第2显示区域。然后,用户为了在使指尖从画面上临时离开之后立刻再次开始触摸操作,使相同的操作画面逆向滚动,有时使触摸操作的操作位置向与先前的移动方向相逆的方向移动。此时,在第2显示区域中进行由用户实施的触摸操作。因此,在以往技术中,显示于第2显示区域的操作画面被滚动显示,对于用户未意图的操作画面被更新。另外,除此以外,在上述以往技术中,存在无法适合地检测用户针对同一操作画面进行的连续的操作的情况。
现有技术文献
专利文献1:日本特开2017-27422号公报
发明内容
本发明是为了解决上述课题而完成的,其目的在于提供一种能够适合地检测针对同一操作画面连续地进行的操作来更新操作画面的显示装置、图像处理装置以及计算机可读取的记录介质。
为了达成上述目的,技术方案1所涉及的发明提供一种显示装置,其特征在于,具备:显示单元,夹着边界线显示第1显示区域和第2显示区域,能够在所述第1及第2显示区域的每个中显示不同的操作画面;操作检测单元,检测用户针对所述显示单元的显示画面的操作;连续性判定单元,当在由所述操作检测单元在所述第1显示区域中检测到第1操作之后,在所述第2显示区域中检测到第2操作的情况下,判定所述第2操作是否为相对所述第1操作具有连续性的操作;以及显示控制单元,在由所述连续性判定单元判定为所述第2操作是相对所述第1操作具有连续性的操作的情况下,根据所述第2操作更新所述第1显示区域的操作画面,在由所述连续性判定单元判定为所述第2操作是相对所述第1操作不具有连续性的操作的情况下,根据所述第2操作更新所述第2显示区域的操作画面。
技术方案2所涉及的发明在技术方案1的显示装置中,所述连续性判定单元在所述第1操作的操作位置超越所述边界线而移动到所述第2显示区域的情况下,将所述第2显示区域中的所述第1操作判定为是针对所述第1显示区域的操作。
技术方案3所涉及的发明在技术方案1或者2的显示装置中,所述连续性判定单元伴随在所述第2显示区域中检测到所述第1操作的操作结束之后,在所述第2显示区域中检测到所述第2操作,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
技术方案4所涉及的发明在技术方案1至3中的任意一个显示装置中,所述连续性判定单元当在从检测到所述第1操作的操作结束起预定时间以内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案5所涉及的发明在技术方案4的显示装置中,所述连续性判定单元当在检测到所述第1操作的操作结束之后,由所述显示控制单元继续进行基于所述第1操作的所述第1显示区域的操作画面的更新处理的情况下,使所述预定时间延长。
技术方案6所涉及的发明在技术方案1至5中的任意一个显示装置中,所述连续性判定单元当在检测到所述第1操作的操作结束之后,在从所述第1操作的操作结束位置起预定距离的范围内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案7所涉及的发明在技术方案1至6中的任意一个显示装置中,所述连续性判定单元伴随在检测到所述第1操作的操作结束之后,检测到所述第2操作,检测连接所述第1操作的操作开始位置和操作结束位置的第1直线、与连接所述第2操作的操作开始位置和当前位置的第2直线所成的角度,在该角度是预定角度以内的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案8所涉及的发明在技术方案1至7中的任意一个显示装置中,所述连续性判定单元在判定为所述第2操作是相对所述第1操作具有连续性的操作之后,所述第2操作的操作位置超越所述边界线而移动到所述第1显示区域的情况下,将所述第1显示区域中的所述第2操作判定为是针对所述第1显示区域的操作。
技术方案9所涉及的发明在技术方案1至8中的任意一个显示装置中,所述连续性判定单元在所述第2操作的操作开始位置显示用户可操作的内容、并且所述第2操作是长敲操作的情况下,判定为所述第2操作是相对所述第1操作不具有连续性的操作。
技术方案10所涉及的发明在技术方案1至9中的任意一个显示装置中,所述连续性判定单元在所述第1操作的操作开始位置至操作结束位置的移动轨迹未处于从连接所述第1操作的操作开始位置和操作结束位置的直线起预定距离的范围内的情况下,即使当在所述第1操作之后在所述第2显示区域中检测到第2操作的情况下,也不进行连续性的判定。
技术方案11所涉及的发明在技术方案1至10中的任意一个显示装置中,所述连续性判定单元在判定为是相对所述第1操作具有连续性的操作的所述第2操作继续时,由所述操作检测单元检测到第3操作的情况下,还判定所述第3操作是否为相对所述第1操作具有连续性的操作。
技术方案12所涉及的发明在技术方案1至11中的任意一个显示装置中,所述连续性判定单元当在检测到所述第1操作的操作结束之前在所述第2显示区域中检测到所述第2操作的情况下,根据所述第1操作的操作位置的移动方向以及所述第2操作的操作位置的移动方向,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
技术方案13所涉及的发明提供一种图像处理装置,其特征在于,具备:技术方案1至12中的任意一项所述的显示装置;操作画面输出单元,将用于进行任务的设定操作的任务设定画面输出到所述显示装置,显示于所述第1显示区域及所述第2显示区域的至少一方;任务设定单元,从所述显示装置取得针对所述任务设定画面的操作信息,进行任务的设定;以及任务控制单元,根据由所述任务设定单元实施的任务设定,控制任务的执行。
技术方案14所涉及的发明提供一种计算机可读取的记录介质,记录有在显示装置中执行的程序,该显示装置具备:显示单元,夹着边界线显示第1显示区域和第2显示区域,能够在所述第1及第2显示区域的每个中显示不同的操作画面;以及操作检测单元,检测用户针对所述显示单元的显示画面的操作,其特征在于,所述程序使所述显示装置执行:连续性判定步骤,在由所述操作检测单元当在所述第1显示区域中检测到第1操作之后,在所述第2显示区域中检测到第2操作的情况下,判定所述第2操作是否为相对所述第1操作具有连续性的操作;以及画面更新步骤,在通过所述连续性判定步骤判定为所述第2操作是相对所述第1操作具有连续性的操作的情况下,根据所述第2操作更新所述第1显示区域的操作画面,在通过所述连续性判定步骤判定为所述第2操作是相对所述第1操作不具有连续性的操作的情况下,根据所述第2操作更新所述第2显示区域的操作画面。
技术方案15所涉及的发明在技术方案14的计算机可读取的记录介质中,在所述连续性判定步骤中,在所述第1操作的操作位置超越所述边界线而移动到所述第2显示区域的情况下,将所述第2显示区域中的所述第1操作判定为是针对所述第1显示区域的操作。
技术方案16所涉及的发明在技术方案14或者15的计算机可读取的记录介质中,在所述连续性判定步骤中,伴随在所述第2显示区域中检测到所述第1操作的操作结束之后,在所述第2显示区域中检测到所述第2操作,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
技术方案17所涉及的发明在技术方案14至16中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,在从检测到所述第1操作的操作结束起预定时间以内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案18所涉及的发明在技术方案17的计算机可读取的记录介质中,在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之后,通过所述画面更新步骤继续进行基于所述第1操作的所述第1显示区域的操作画面的更新处理的情况下,使所述预定时间延长。
技术方案19所涉及的发明在技术方案14至18中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之后,在从所述第1操作的操作结束位置起预定距离的范围内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案20所涉及的发明在技术方案14至19中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,伴随在检测到所述第1操作的操作结束之后,检测到所述第2操作,检测连接所述第1操作的操作开始位置和操作结束位置的第1直线、与连接所述第2操作的操作开始位置和当前位置的第2直线所成的角度,在该角度是预定角度以内的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
技术方案21所涉及的发明在技术方案14至20中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,当在判定为所述第2操作是相对所述第1操作具有连续性的操作之后,所述第2操作的操作位置超越所述边界线而移动到所述第1显示区域的情况下,将所述第1显示区域中的所述第2操作判定为是针对所述第1显示区域的操作。
技术方案22所涉及的发明在技术方案14至21中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,在所述第2操作的操作开始位置显示用户可操作的内容并且所述第2操作是长敲操作的情况下,判定为所述第2操作是相对所述第1操作不具有连续性的操作。
技术方案23所涉及的发明在技术方案14至22中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,当在所述第1操作的操作开始位置至操作结束位置的移动轨迹未处于从连接所述第1操作的操作开始位置和操作结束位置的直线起预定距离的范围内的情况下,即使当在所述第1操作之后在所述第2显示区域中检测到第2操作的情况下,也不进行连续性的判定。
技术方案24所涉及的发明在技术方案14至23中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,当在判定为是相对所述第1操作具有连续性的操作的所述第2操作继续时由所述操作检测单元检测到第3操作的情况下,还判定所述第3操作是否为相对所述第1操作具有连续性的操作。
技术方案25所涉及的发明在技术方案14至24中的任意一个计算机可读取的记录介质中,在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之前在所述第2显示区域中检测到所述第2操作的情况下,根据所述第1操作的操作位置的移动方向以及所述第2操作的操作位置的移动方向,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
根据本发明,能够适合地检测在显示多个显示画面的状态下针对同一操作画面连续地进行的用户的操作,能够根据用户的连续的操作适合地更新用户意图的操作画面。
附图说明
图1是示出应用显示装置的图像处理装置的外观结构的一个例子的图。
图2是示出图像处理装置的硬件结构以及功能结构的一个例子的框图。
图3是示出显示部的显示区域的分割例的图。
图4是示出第1操作的一个例子的图。
图5是示出第2操作的一个例子的图。
图6是示出第2操作不具有连续性的情况的画面更新例的图。
图7是说明第2条件的图。
图8是说明第3条件的图。
图9是例示第2操作的操作开始位置处于预定区域的外侧的情况的图。
图10是说明第4条件的图。
图11是示出根据第4条件判定为第2操作是相对第1操作不具有连续性的操作的情况的画面更新例的图。
图12是示出第2操作超越边界线的情况的画面更新例的图。
图13是示出在第2操作结束之后检测第3操作的例子的图。
图14是示出在第2操作结束之后检测第3操作的其他例子的图。
图15是例示第2操作成为不具有连续性的操作的情况的图。
图16是示出连续性判定部所实施的第1操作的解析例的图。
图17是示出第1操作的移动轨迹收敛于预定范围内的状态的图。
图18是说明在第2操作的继续中检测第3操作的情况的连续性判定的图。
图19是示出撑开/捏合操作的判定例的图。
图20是示出旋回操作的判定例的图。
图21是示出在显示装置中进行的主要的处理步骤的一个例子的流程图。
图22是示出操作开始检测处理的详细的处理步骤的一个例子的流程图。
图23是示出连续性判定处理的详细的处理步骤的一个例子的流程图。
图24是示出继续操作检测处理的详细的处理步骤的一个例子的流程图。
图25是示出操作结束检测处理的详细的处理步骤的一个例子的流程图。
图26是示出标志处理的详细的处理步骤的一个例子的流程图。
(符号说明)
1:图像处理装置;3:显示装置;10:显示部(显示单元);16:程序;21:显示控制部(显示控制单元);22:操作检测部(操作检测单元);24:连续性判定部(连续性判定单元);31:图像处理部;32:服务器功能部;41、51:操作画面输出部(操作画面输出单元);42:任务设定部(任务设定单元);43:任务控制部(任务控制单元);BL:边界线;R1:第1显示区域;R2:第2显示区域。
具体实施方式
以下,参照附图,详细说明本发明的优选的实施方式。此外,对在以下说明的实施方式中相互共同的部件,附加同一符号,关于他们的重复的说明省略。
图1是示出应用本发明的显示装置3的图像处理装置1的外观结构的一个例子的图。图像处理装置1由例如具备多个功能的MFP(Multifunction Peripherals,多功能外围设备)等构成。该图像处理装置1除了例如拷贝功能、扫描功能、打印功能、FAX功能等图像处理功能以外,还具备服务器功能。例如,在由用户选择了拷贝功能的情况下,图像处理装置1通过使图像处理功能动作而执行任务(拷贝任务)。另外,在由用户选择了服务器功能的情况下,图像处理装置1使服务器功能动作,针对用户提供基于服务器功能的服务。
图像处理装置1具备:装置本体2,搭载有图像处理功能、服务器功能;以及显示装置3,成为用户使用图像处理装置1时的用户接口。在装置本体2的下部,设置有打印机部5。打印机部5在图像处理装置1中执行打印任务、拷贝任务以及FAX接收任务时动作,在片材状的印刷用纸上打印输出图像。装置本体2在打印机部5的上部具备扫描仪部4。扫描仪部4在图像处理装置1中执行扫描任务、拷贝任务以及FAX发送任务时动作,读取由用户设置的原稿并输出图像数据。
显示装置3是触摸面板式的显示装置,设置于扫描仪部4的更上部。显示装置3具备能够显示各种图像的大画面尺寸的显示部10。显示装置3以使显示部10的显示面成为大致平板的状态的方式安装于装置本体2的上端。该显示装置3能够将用于用户操作图像处理装置1的图像处理功能的操作画面显示于显示部10、并且还能够将用于用户操作图像处理装置1的服务器功能的操作画面显示于显示部10。进而,显示装置3还能够将显示部10的显示区域夹着边界线分割为2个显示区域,在各显示区域中,同时显示用于用户操作图像处理功能的操作画面、和用于用户操作服务器功能的操作画面。这样的显示装置3也可以是针对装置本体2可装卸的结构。
图2是示出图像处理装置1的硬件结构以及功能结构的一个例子的框图。图像处理装置1是将装置本体2和显示装置3可相互通信地连接的结构。
在显示装置3中,作为其硬件结构,具备显示部10、操作部11、CPU12、RAM13、ROM14、以及通信接口15。
显示部10是例如由彩色液晶显示器等构成的平板显示器,能够显示各种图像。操作部11由在显示部10的显示画面上配置的触摸面板键等构成,受理由用户实施的操作。例如,在针对显示部10的显示画面进行由用户实施的触摸操作时,操作部11检测进行该触摸操作的位置,将该坐标信息实时地输出到CPU12。因此,在用户使针对显示画面的操作位置(触摸位置)移动时,操作部11伴随该操作位置的移动,逐次变更针对CPU12实时地输出的坐标信息。另外,操作部11还能够受理针对显示部10的显示画面进行的多触摸操作。
CPU12是控制显示装置3中的各部的动作的硬件处理器。特别是CPU12根据由操作部11受理的用户的操作,控制显示于显示部10的操作画面。具体而言,CPU12通过读出并执行预先存储于ROM14的程序16,与装置本体2进行通信,取得用于用户操作图像处理功能的操作画面、以及用于用户操作服务器功能的操作画面。CPU12将这些2个操作画面中的至少一方显示于显示部10,根据由操作部11受理的用户的操作,更新显示于显示部10的操作画面。这样的CPU12还能够将显示部10的显示区域分割为边界线,针对夹着该边界线配置的第1显示区域和第2显示区域的每一个,使用于用户操作图像处理功能的操作画面、以及用于用户操作服务器功能的操作画面同时显示。另外,CPU12根据需要针对装置本体2输出基于用户的操作的操作信息。此外,CPU12的详细的功能后述。
RAM13是用于存储伴随CPU12执行程序16而发生的临时的数据等的存储器。另外,ROM14是非易失性的存储器,存储由CPU12执行的程序16。通信接口15用于与装置本体2以有线或者无线方式进行通信。通信接口15也可以与装置本体2进行一对一的通信。
装置本体2具备通信接口30、图像处理部31、服务器功能部32、扫描仪部4、打印机部5、FAX部6、以及网络接口7。扫描仪部4以及打印机部5如上所述。FAX部6用于经由省略图示的公共电话网进行FAX数据的发送接收。网络接口7将图像处理装置1与LAN(Local AreaNetwork,局域网)等网络连接,与个人计算机(PC)等其他设备进行通信。
通信接口30用于与显示装置3以有线或者无线方式进行通信。通信接口30也可以与显示装置3进行一对一的通信。
图像处理部31进行与图像处理装置1的图像处理功能对应的处理。即,图像处理部31控制与拷贝功能、扫描功能、打印功能、FAX功能等各功能有关的任务的执行。图像处理部31具备操作画面输出部41、任务设定部42、以及任务控制部43。操作画面输出部41经由通信接口30,将用于用户操作图像处理功能的操作画面输出到显示装置3。例如操作画面输出部41将用于进行任务的设定操作的操作画面(任务设定画面)输出到显示装置3。任务设定部42在从显示装置3取得针对任务设定画面的操作信息的情况下,根据该操作信息进行任务的设定。任务控制部43在从显示装置3取得任务的执行指示的情况下发挥功能,根据由任务设定部42实施的任务设定,驱动扫描仪部4、打印机部5等,控制任务的执行。
服务器功能部32进行与图像处理装置1的服务器功能对应的处理。服务器功能部32具备操作画面输出部51、和服务提供部52。操作画面输出部51经由通信接口30,将用于用户操作服务器功能的操作画面输出到显示装置3。例如操作画面输出部51将用于进行用户利用服务器功能时的设定操作等的操作画面(服务提供画面)输出到显示装置3。服务提供部52是提供基于服务器功能的服务的处理部。在服务器功能提供的服务中,有各种服务,例如有作为文档服务器的服务、作为邮件服务器的服务、作为应用服务器的服务、作为存储设备服务器的服务等服务。服务提供部52是提供这些服务中的至少1个服务的部件即可。然后,服务提供部52在从显示装置3取得针对服务提供画面的操作信息的情况下,根据该操作信息提供服务。
这样的服务器功能部32还能够与图像处理部31协作动作。例如,服务器功能部32取得通过图像处理部31执行扫描任务而从原稿读取出的图像数据。服务器功能部32将该图像数据经由网络接口7发送到外部的设备。通过这样服务器功能部32与图像处理部31协作动作,能够在图像处理装置1中设定各种任务,图像处理装置1的便利性提高。
接下来,说明显示装置3的CPU12所执行的功能。CPU12通过执行程序,作为画面取得部20、显示控制部21、操作检测部22、操作信息输出部23以及连续性判定部24发挥功能。
画面取得部20取得从装置本体2输出的操作画面,将该操作画面储存到RAM13。在从装置本体2输出的操作画面中,有用于操作图像处理功能的操作画面、和用于在第2显示区域R2中操作服务器功能的操作画面这2个操作画面。画面取得部20在取得这些2个操作画面后,以储存于RAM13的状态管理各操作画面。另外,当在2个操作画面中的至少一方的画面在装置本体2中被更新的情况下,画面取得部20取得从装置本体2输出的更新后的新的操作画面,更新储存于RAM13的操作画面。
显示控制部21控制显示于显示部10的操作画面。在通过画面取得部20将操作画面储存到RAM13后,显示控制部21从RAM13读出操作画面,将该操作画面输出到显示部10而显示。另外,在由用户指示了画面分割的情况下,显示控制部21能够将显示部10的显示区域分割为2个区域,使用于用户操作图像处理功能的操作画面和用于用户操作服务器功能的操作画面这双方同时显示。
图3是示出显示部10的显示区域的分割例的图。在图3所示的例子中,示出将显示部10的显示区域夹着在大致中央设定的边界线BL分割为左右2个区域的情况。在该情况下,例如左侧的区域成为第1显示区域R1,右侧的区域成为第2显示区域R2。然后,显示控制部21通过例如在第1显示区域R1中显示用于操作图像处理功能的操作画面,在第2显示区域R2中显示用于操作服务器功能的操作画面,将用于利用图像处理功能和服务器功能的每个的2个操作画面同时显示于显示部10。此外,也可以在第1显示区域R1中显示用于操作服务器功能的操作画面,在第2显示区域R2中显示用于操作图像处理功能的操作画面。
操作检测部22根据从操作部11输出的坐标信息,检测由用户实施的操作。在例如用户针对显示部10的显示画面进行触摸操作后,操作检测部22检测操作开始。之后,在操作检测部22中,如果用户的触摸操作继续,则检测是操作继续中,如果用户的触摸操作结束,则检测操作结束。操作检测部22在从检测到操作开始至检测到操作结束的期间,将从操作部11逐次取得的坐标信息输出到显示控制部21以及操作信息输出部23。由此,显示控制部21能够根据用户的操作使显示于显示部10的操作画面滚动等,适合地更新。
另外,操作检测部22在由显示控制部21将显示部10的显示区域分割为第1显示区域R1和第2显示区域R2的情况下,在从检测到操作开始至检测到操作结束的期间,将从操作部11取得的坐标信息输出到连续性判定部24。
操作检测部22还能够检测由用户实施的多触摸操作。即,在操作部11检测到针对显示画面上的多个部位的触摸操作后,针对操作检测部22输出多个坐标信息。因此,操作检测部22伴随从操作部11接收到多个坐标信息,对于用户检测进行多触摸操作。在该情况下,操作检测部22将从操作部11取得的多个坐标信息的每个,输出到显示控制部21、操作信息输出部23或者连续性判定部24。
操作信息输出部23根据从操作检测部22输出的坐标信息,确定由用户实施的操作,判断是否为应通知给装置本体2的操作。其结果,在是应通知给装置本体2的操作的情况下,操作信息输出部23生成与用户的操作对应的操作信息,输出到装置本体2。例如,在用户的操作是各种设定值的变更操作、任务的执行指示、服务的提供开始指示等的情况下,操作信息输出部23判断为是应通知给装置本体2的操作,将与用户的操作对应的操作信息发送到装置本体2。此外,在用户的操作是如使操作画面滚动的操作等仅用于使操作画面的显示状态简单地变化的操作的情况下,操作信息输出部23无需将操作信息输出到装置本体2。
连续性判定部24在由显示控制部21将显示部10的显示区域分割为第1显示区域R1和第2显示区域R2的情况下发挥功能。连续性判定部24根据从操作检测部22输出的坐标信息,确定用户的操作,判定该确定的操作是否为相对先前检测的操作具有连续性的操作。例如,在由操作检测部22在第1显示区域R1及第2显示区域R2中的某一方的区域中检测到第1操作之后,在另一方的区域中检测到第2操作的情况下,连续性判定部24判定第2操作是否为相对第1操作具有连续性的操作。在此,第2操作是指:在检测到第1操作之后检测的操作,既可以是在第1操作结束之后检测的操作,也可以是在第1操作未结束的状态下检测的操作。
连续性判定部24伴随由操作检测部22检测到第1操作,存储第1操作的操作开始位置。另外,连续性判定部24伴随由操作检测部22检测到第1操作,判断第1操作的操作开始位置包含于第1显示区域R1和第2显示区域R2中的哪一个区域,将在包括第1操作的操作开始位置的显示区域中显示的操作画面,确定为更新对象画面。然后,连续性判定部24针对显示控制部21通知更新对象画面。由此,显示控制部21能够根据第1操作,掌握应更新的操作画面是显示于第1显示区域R1和第2显示区域R2中的哪一个区域的操作画面。
图4是示出第1操作101的一个例子的图。设想例如如图4所示用户在第1显示区域R1中开始了第1操作101的情况。在该情况下,第1操作101的操作开始位置PA1包含于第1显示区域R1。因此,连续性判定部24将显示于第1显示区域R1的操作画面,确定为更新对象画面。之后,用户在原样地维持针对画面的触摸状态的状态而作为第1操作101使该操作位置向箭头F1方向移动时,通过显示控制部21使显示于第1显示区域R1的操作画面向箭头FA方向滚动而更新操作画面的显示样式。
如图4所示,在第1操作101的操作位置从第1显示区域R1超越边界线BL而移动到第2显示区域R2的情况下,连续性判定部24将第2显示区域R2中的第1操作101判定为是针对第1显示区域R1的操作,将操作对象画面通知给显示控制部21。即,连续性判定部24当在根据第1操作101的操作开始位置确定更新对象画面之后,第1操作101的操作位置向其他显示区域移动的情况下,仍不变更在操作开始时确定的更新对象画面。因此,用户无需理会边界线BL,而能够进行用于使第1显示区域R1的操作画面滚动的操作(例如轻拂操作)。另外,在用户进行第1操作101时即使操作位置超越边界线BL,由于第1显示区域R1的操作画面的滚动显示继续,所以能够防止对于用户未意图的第2显示区域R2的操作画面被第1操作101更新。
连续性判定部24在由操作检测部22检测到第1操作101的结束时,存储第1操作101的操作结束位置。然后,在由操作检测部22检测到第2操作102时,连续性判定部24判定第2操作102是否相对第1操作101具有连续性。
图5是示出第2操作102的一个例子的图。在图5的例子中,示出第1操作101的操作结束位置PA2包含于第2显示区域R2的情况。在如图5所示用户进行第1操作101之后,在第2显示区域R2中开始第2操作102时,连续性判定部24存储第2操作102的操作开始位置PB1。然后,连续性判定部24判定第2操作102是否为相对第1操作101具有连续性的操作。
连续性判定部24在判定为第2操作102是相对第1操作101具有连续性的操作的情况下,将与第1操作101的操作对象画面相同的操作画面,确定为第2操作102的操作对象画面,通知给显示控制部21。由此,显示控制部21能够根据第2操作102,与第1操作101同样地,更新第1显示区域R1的操作画面。在例如如图5所示第2操作102是向箭头F2方向移动的操作的情况下,显示控制部21能够使第1显示区域R1的操作画面向箭头FB方向滚动显示。
相对于此,连续性判定部24在判定为第2操作102是相对第1操作101不具有连续性的操作的情况下,将包括第2操作102的操作开始位置的显示区域的操作画面,确定为操作对象画面,通知给显示控制部21。图6是示出第2操作102不具有连续性的情况的画面更新例的图。当在例如如图6所示在第2显示区域R2中检测到第2操作102,判定为该第2操作102是与第1操作101不具有连续性的操作的情况下,连续性判定部24将显示于第2显示区域R2的操作画面,确定为基于第2操作102的操作对象画面。其结果,显示控制部21根据第2操作102,更新显示于第2显示区域R2的操作画面。例如如图6所示,在第2操作102是向箭头F2方向移动的操作的情况下,显示控制部21使第2显示区域R2的操作画面向箭头FB方向滚动显示。
在连续性判定部24将在第1操作101之后进行的第2操作102判定为是相对第1操作101具有连续性的操作的条件中,有多个条件。然后,连续性判定部24当在这些多个条件中的至少1个条件成立的情况下,判定为第2操作102是相对第1操作101具有连续性的操作。此外,连续性判定部24也可以当在多个条件中的2个以上的条件成立的情况下,判定为第2操作102是相对第1操作101具有连续性的操作。以下,详细说明由连续性判定部2判定的条件。
首先,说明当在检测到第1操作101的操作结束之后检测到第2操作102的情况下的连续性判定的条件。在该情况的连续性判定的条件中,有例如如下所示的第1至第4条件。
第1条件是指:当在第1操作101结束之后检测到第2操作102的情况下,第2操作101的操作开始位置PB1包含于与第1操作101的操作开始位置PA1不同的显示区域。在图5的例子中,第1操作101的操作开始位置PA1包含于第1显示区域R1,第2操作102的操作开始位置PB1包含于第2显示区域R2。因此,在图5的情况下,第1条件成立,所以连续性判定部24判断为第2操作102是相对第1操作101具有连续性的操作。此外,连续性判定部24也可以即使在第1条件成立的情况下,通过进一步判定其他条件是否成立,判定第2操作102是否相对第1操作101具有连续性。
第2条件是指:在从第1操作101的操作结束定时起预定时间以内检测到第2操作102的操作。图7是说明第2条件的图。首先如图7(a)所示,连续性判定部24预先保持用于判定为第2操作102相对第1操作101具有连续性的预定时间TD。能够由显示装置3(图像处理装置1)的用户,将该预定时间TD预先设定为任意的时间。在如图7(a)所示,在时间T1检测到第1操作101的操作开始,在时间T2检测到第1操作101的操作结束时,连续性判定部24开始预定时间TD的计数动作。然后,在经过预定时间TD之前的时间T3检测到第2操作102时,连续性判定部24将第2操作102判定为是相对第1操作101具有连续性的操作。相对于此,在检测到第2操作102的定时是经过预定时间TD之后的情况下,连续性判定部24判定为第2操作102是相对第1操作101不具有连续性的操作。
另外,在第1操作101是如图4所示使显示于第1显示区域R1的操作画面滚动的操作的情况下,为了如图7(b)所示在第1操作101结束之后也使操作画面惯性滚动,有显示控制部21所实施的操作画面的显示更新处理继续的可能性。在这样的情况下,用户还有时想要在惯性滚动的操作画面停止之后进行接下来的操作。因此,连续性判定部24也可以在显示控制部21所实施的显示更新处理继续的情况下,延长预定时间TD。图7(b)示出延长预定时间TD的情况。连续性判定部24当在第1操作101在时间T2结束之后仍继续进行显示控制部21所实施的显示更新处理的情况下,延长预定时间TD。例如,连续性判定部24也可以通过在显示控制部21所实施的显示更新处理结束以前不开始预定时间TD的计数动作,延长预定时间TD。在该情况下,从第1操作101结束的时间T2至显示更新处理结束的时间Te的期间延长。通过延长预定时间TD,当在用户确认惯性滚动的操作画面停止之后进行第2操作102的情况下,也能够适合地判定该第2操作102是否相对第1操作101具有连续性。此外,连续性判定部24也可以即使在第2条件成立的情况下,通过进一步判定其他条件是否成立,判定第2操作102是否相对第1操作101具有连续性。
第3条件是指:第2操作102的操作开始位置在从第1操作101的操作结束位置起预定距离的范围内被检测到。图8是说明第3条件的图。如图8所示,连续性判定部24当在检测到第1操作101的操作结束之后,在从第1操作101的操作结束位置PA2起预定距离的范围内即区域R3中检测到第2操作102的情况下,将第2操作102判定为是相对第1操作101具有连续性的操作。因此,如果如图8所示第2操作102的操作开始位置PB1包含于区域R3,则第2操作102的操作对象画面与第1操作101同样地成为第1显示区域R1的操作画面。然后,在第2操作102向箭头F2方向移动时,第1显示区域R1的操作画面向箭头FB方向滚动显示。
图9是例示第2操作102的操作开始位置PB1处于区域R3的外侧的情况的图。在如图9所示第2操作102的操作开始位置PB1处于区域R3的外侧的情况下,连续性判定部24否定第2操作102的连续性。其结果,第2操作102的操作对象画面成为第2显示区域R2的操作画面,在第2操作102向箭头F2方向移动时,第2显示区域R2的操作画面向箭头FB方向滚动显示。
此外,连续性判定部24也可以即使在第3条件成立的情况下,通过进一步判定其他条件是否成立,判定第2操作102是否相对第1操作101具有连续性。另外,连续性判定部24也可以即使在第3条件未成立的情况下,如果其他条件成立,则判定为第2操作102是相对第1操作101具有连续性的操作。
第4条件是指:基于第1操作101的移动方向和基于第2操作102的移动方向相互具有关联性。在例如第1操作101是使操作画面滚动的操作的情况下,可以说与第1操作101具有连续性的第2操作102是使操作画面向与第1操作101相同的方向或者相逆的方向滚动的操作。因此,连续性判定部24伴随在检测到第1操作101的操作结束之后,检测到第2操作102,对比第1操作101的直线性和第2操作102的直线性来进行连续性判定。
图10是说明第4条件的图。连续性判定部24在第1操作101结束之后检测第2操作102,在检测到第2操作102的初始移动方向时判定第4条件。此时,连续性判定部24首先如图10(a)所示,求出连接第1操作101的操作开始位置PA1和操作结束位置PB2的第1直线L1以及连接第2操作102的操作开始位置PB1和当前位置PB2的第2直线L2。接下来,连续性判定部24如图10(b)所示,计算第1直线L1和第2直线L2相交时的角度α。此外,角度α是第1直线L1和第2直线L2所成的大的角度和小的角度中的小的一方的角度。接下来,连续性判定部24在第1直线L1和第2直线L2所成的角度α是预定角度θ(例如θ≦30度)以内的情况下,将第2操作102判定为是相对第1操作101具有连续性的操作。相对于此,在角度α超过预定角度θ的情况下,连续性判定部24将第2操作102判定为是相对第1操作101不具有连续性的操作。
在根据第4条件判定为第2操作102是相对第1操作101具有连续性的操作时,显示控制部21如图5所示将第2操作102的操作对象画面设定为与第1操作101相同的操作画面,根据第2操作102使第1显示区域R1的操作画面滚动显示。
图11是示出根据第4条件判定为第2操作102是相对第1操作101不具有连续性的操作的情况的画面更新例的图。在例如如图11所示第2操作102向箭头F2方向初始移动的情况下,由于角度α超过预定角度θ,所以连续性判定部24否定第2操作102的连续性。其结果,显示控制部21如图11所示使包括第2操作102的操作开始位置PB1的第2显示区域R2的操作画面,根据第2操作102向箭头FC方向滚动显示。
连续性判定部24即使在肯定第2操作102的连续性之后,该第2操作102的操作位置超越边界线BL而向其他显示区域移动的情况下,也不变更基于第2操作102的操作对象画面。图12是示出第2操作102超越边界线BL的情况的画面更新例的图。如图12所示,在肯定第2操作102的连续性之后,第2操作102的当前位置超越边界线BL从第2显示区域R2向第1显示区域R1移动的情况下,基于第2操作102的操作对象画面与此以前没有变化,而被确定为第1显示区域R1的操作画面。因此,显示控制部21根据超越边界线BL而继续的第2操作102,使第1显示区域R1的操作画面向箭头FB方向滚动显示。此外,这样的显示控制不限于第2操作102的连续性被肯定的情况,在第2操作102的连续性被否定的情况下也能够应用。
另外,连续性判定部24当在检测到第2操作的操作结束之后检测到第3操作的情况下,判定该第3操作是否为相对第2操作具有连续性的操作。图13是示出在第2操作102结束之后检测第3操作103的例子的图。设想例如如图13所示,在第1显示区域R1中开始的第1操作101在第2显示区域R2中结束之后,在第2显示区域R2中开始的第2操作102在第1显示区域R1中结束的情况。在第2操作102结束之后由操作检测部22检测到第3操作103时,连续性判定部24判定第3操作103是否为相对第2操作102具有连续性的操作。此时,连续性判定部24通过判定例如上述第1至第4条件中的至少1个条件,进行连续性判定。其结果,在判定为第3操作103是相对第2操作102具有连续性的操作时,连续性判定部24将与第2操作102的操作对象画面相同的操作画面,确定为第3操作103的操作对象画面,通知给显示控制部21。由此,根据第2操作102更新后的操作画面接着根据第3操作103被更新。在例如第2操作102是使第1显示区域R1的操作画面滚动的操作的情况下,显示控制部21根据在操作开始位置PC1开始的第3操作103的移动,如图13所示使第1显示区域R1的操作画面向箭头FA方向滚动显示。
图14是示出在第2操作102结束之后检测第3操作103的其他例子的图。在图14的例子中,示出相对第1操作101具有连续性的第2操作102是单次敲击操作的情况。在第2操作102是单次敲击操作的情况下,在相同的位置,检测到第2操作102的操作开始位置PB1和操作结束位置PB2。例如,在第1显示区域R1的操作画面通过第1操作101惯性滚动的状态下第2操作102被检测为单次敲击操作时,操作画面的滚动停止。在检测到第2操作102的操作结束之后检测到第3操作103时,连续性判定部24判定第3操作103是否为相对第2操作102具有连续性的操作。此时,连续性判定部24通过判定例如上述第1至第4条件中的至少1个条件,进行连续性判定。其结果,在判定为第3操作103是相对第2操作102具有连续性的操作时,连续性判定部24将与第2操作102的操作对象画面相同的操作画面,确定为第3操作103的操作对象画面,通知给显示控制部21。由此,在如图14所示第3操作103向箭头F3方向移动的情况下,能够使第1显示区域R1的操作画面向箭头FB方向滚动。
如上所述,当在检测到第2操作102的操作结束之后检测到第3操作103的情况下,连续性判定部24通过与上述第1操作101同样地处置第2操作102,与上述第2操作102同样地处置第3操作103,进行第3操作103的连续性判定。换言之,连续性判定部24每当由操作检测部22依次检测到针对显示部10的操作时,判定后面的操作是否相对先前的操作具有连续性。
另外,连续性判定部24当即使在检测到第1操作101的操作结束之后检测第2操作102,上述第1至第4条件成立的情况下,也有时判定为第2操作102是相对第1操作101不具有连续性的独立的操作。图15是例示第2操作102成为不具有连续性的操作的情况的图。例如如图15所示,当在第2显示区域R2中显示中的操作画面中,在第1操作101的操作结束位置PA2的附近显示用户可操作的内容(例如操作按钮)B1的情况下,第2操作102的操作开始位置PB1有时与内容B1的显示位置重叠。在这样的情况下,连续性判定部24判断由用户实施的第2操作102是否为长敲操作。一般,长敲操作是用户选择操作按钮等的内容B1的操作之一。连续性判定部24在判断为在内容B1的显示位置检测的第2操作102是长敲操作的情况下,将第2操作102判定为是相对第1操作101不具有连续性的操作、且选择内容B1的操作。即,连续性判定部24即使在第2操作102满足上述第1至第4条件的情况下,仍否定第2操作的连续性。由此,能够适合地反映用户的操作。
另外,连续性判定部24也可以通过在由操作检测部22检测到第1操作101的操作结束的定时解析第1操作101,判断有无进行接着第1操作101有连续性的操作的可能性。在该情况下,如果判断为无进行接着第1操作101有连续性的操作的可能性,则连续性判定部24在接着第1操作101检测到第2操作102时不进行第2操作102的连续性判定,将第2操作102确定为与第1操作101不关联的独立的操作。
图16是示出连续性判定部24所执行的第1操作101的解析例的图。如图16所示,在检测到第1操作101在操作结束位置PA2结束时,连续性判定部24计算第1操作101的操作开始位置PA1至操作结束位置PA2的移动轨迹101a。该移动轨迹101a表示在第1操作101中用户的操作位置实际上移动的路径。接下来,连续性判定部24计算连接第1操作101的操作开始位置PA1和操作结束位置PA2的直线L1。然后,连续性判定部24判断第1操作101的移动轨迹101a是否收敛于从直线L1起预定距离D1的范围内。
如图16所示,在第1操作101的移动轨迹101a未收敛于从直线L1起预定距离D1的范围内的情况下,连续性判定部24判断为无进行接着第1操作101有连续性的操作的可能性。在该情况下,连续性判定部24在之后检测到第2操作102时,不进行第2操作102的连续性判定,将第2操作102确定为是相对第1操作101不具有连续性的操作。因此,在该情况下,检测到第2操作102的操作开始位置PB1的显示区域的操作画面被确定为第2操作102的操作对象画面。
图17是示出第1操作101的移动轨迹101a收敛于从直线L1起预定距离D1的范围内的状态的图。如图17所示,在第1操作101的移动轨迹101a收敛于从直线L1起预定距离D1的范围内的情况下,连续性判定部24判断为有进行接着第1操作101有连续性的操作的可能性。在该情况下,连续性判定部24在之后检测到第2操作102时,进行上述第2操作102的连续性判定,根据其判定结果,确定第2操作102的操作对象画面。
另外,操作检测部22还有时在由连续性判定部24判定为相对第1操作101具有连续性的第2操作102的继续中检测到第3操作103。在该情况下,连续性判定部24由于第2操作102未结束,所以无法应用上述第1至第4条件,判定第3操作103是否相对第2操作102具有连续性。因此,连续性判定部24在第2操作102的继续中检测到第3操作103时,进行第3操作103是否相对第1操作101具有连续性的连续性判定。
图18是说明在第2操作102的继续中检测到第3操作103的情况的连续性判定的图。设想例如如图18所示,在第1操作101结束之后检测第2操作102,判定为第2操作102是相对第1操作101具有连续性的操作的情况。在该情况下,在第2操作102继续进行时由操作检测部22检测到第3操作103时,连续性判定部24存储第3操作103的操作开始位置PC1。然后,第2操作102继续进行,所以连续性判定部24判定第3操作103是否相对第1操作101具有连续性。此时,连续性判定部24判定第3操作103相对第1操作101,上述第1至第4条件中的至少1个条件是否成立。其结果,在判定为第3操作103是相对第1操作101具有连续性的操作的情况下,连续性判定部24将与第1操作101的操作对象画面相同的操作画面,确定为基于第3操作103的操作对象画面。另外,在判定为第3操作103是相对第1操作101不具有连续性的操作的情况下,连续性判定部24将包括第3操作103的操作开始位置PC1的第2显示区域R2的操作画面,确定为基于第3操作103的操作对象画面。在图18的例子中,示出判定为第3操作103是相对第1操作101不具有连续性的操作的情况。因此,在第3操作103的操作位置向图18所示的方向移动后,第2显示区域R2的操作画面根据第3操作103向箭头FB方向滚动。此时,第1显示区域R1的操作画面根据第2操作102向箭头FB方向滚动。因此,第1显示区域R1的操作画面和第2显示区域R2的操作画面被同时更新。
接下来,说明在检测第1操作101的操作结束之前检测第2操作102的情况。当在检测第1操作101的操作结束之前检测到第2操作102的情况下,在第2操作102相对第1操作101具有连续性的操作中,包括用2个指尖进行的撑开/捏合操作、旋回操作。即,在撑开/捏合操作、旋回操作的情况下,即使当在分别不同的显示区域中检测出2个指尖的情况下,仍成为针对显示于1个显示区域的操作画面的操作。因此,连续性判定部24检测第1操作101,当在检测第1操作101的操作结束之前,在与第1操作101不同的显示区域中检测到第2操作102的情况下,判定基于第1操作101及第2操作102的操作是否为撑开/捏合操作或者旋回操作,如果能够确定是撑开/捏合操作或者旋回操作,则判定为第2操作102是相对第1操作101具有连续性的操作。
图19是示出撑开/捏合操作的判定例的图。设想例如如图19(a)所示,在第1显示区域R1中检测到第1操作101之后,在第2显示区域R2中检测到第2操作102的情况。连续性判定部24检测第1操作101的初始移动和第2操作102的初始移动。在第1操作101的初始移动是向直线方向的移动、并且第2操作102的初始移动也是向直线方向的移动的情况下,连续性判定部24判断为有第1操作101及第2操作102是相互关联的撑开/捏合操作的可能性。在有撑开/捏合操作的可能性的情况下,连续性判定部24计算第1操作101的初始移动方向和第2操作102的初始移动方向所成的角度β。然后,连续性判定部24判断角度β是否为预定角度θ(例如θ≦30度)以内,如果角度β是预定角度θ(例如θ≦30度)以内,则判定为第2操作102是相对第1操作101具有连续性的操作,第1操作101及第2操作102是用于使显示于第1显示区域R1的操作画面捏合或者撑开的撑开/捏合操作。其结果,例如如图19(a)所示,在以使第1操作101的操作位置及第2操作102的操作位置相互接近的方式移动时,以使第1显示区域R1的操作画面捏合的方式,更新画面。
相对于此,在如图19(b)所示角度β超过预定角度θ的情况下,连续性判定部24将第2操作102判定为是与第1操作101不具有连续性的操作。由此,在与第1操作101不同的显示区域中检测出的第2操作102的操作对象画面成为在第2显示区域R2中显示的操作画面。其结果,如图19(b)所示,第1显示区域R1的操作画面根据第1操作101向箭头FA方向滚动显示,第2显示区域R2的操作画面根据第2操作102向箭头FC方向滚动显示。
图20是示出旋回操作的判定例的图。设想例如如图20(a)所示,在第1显示区域R1中检测到第1操作101之后,在第2显示区域R2中检测到第2操作102的情况。连续性判定部24检测第1操作101的初始移动和第2操作102的初始移动。在第1操作101的初始移动是向旋转方向的移动、并且第2操作102的初始移动也是向旋转方向的移动的情况下,连续性判定部24判断为有第1操作101及第2操作102是相互关联的旋回操作的可能性。在有旋回操作的可能性的情况下,连续性判定部24计算第1操作101的旋转方向的中心位置C1、和第2操作102的旋转方向的中心位置C2。另外,连续性判定部24计算连接第1操作101的操作开始位置PA1和第2操作102的操作开始位置PB1的直线L3。然后,连续性判定部24在2个中心位置C1、C2存在于直线L3的附近的情况下,判定为第2操作102是相对第1操作101具有连续性的操作,第1操作101及第2操作102是用于使显示于第1显示区域R1的操作画面旋回的旋回操作。其结果,例如如图20(a)所示,伴随第1操作101的操作位置及第2操作102的操作位置以中心位置C1、C2为中心旋转,以使第1显示区域R1的操作画面旋回的方式,更新画面。
相对于此,在如图20(b)所示2个中心位置C1、C2不存在于连接2个操作开始位置PA1、PB1的直线L3的附近的情况下,连续性判定部24将第2操作102判定为是与第1操作101不具有连续性的操作。由此,在与第1操作101不同的显示区域中检测出的第2操作102的操作对象画面成为在第2显示区域R2中显示的操作画面。其结果,根据第1操作101更新第1显示区域R1的操作画面,根据第2操作102更新第2显示区域R2的操作画面。
这样连续性判定部24当在第1操作101之后在与第1操作101不同的显示区域中检测出第2操作102的情况下,判定第2操作102的连续性,在肯定第2操作102的连续性时,将第2操作102的操作对象画面设定为与第1操作101的操作对象画面相同的画面。因此,能够适合地检测由用户针对同一操作画面连续地进行的操作,能够更新用户意图的操作画面。
接下来,说明在如上所述构成的显示装置3中进行的处理步骤。图21至图26是示出在显示装置3中进行的处理步骤的一个例子的流程图。该处理是通过显示装置3的CPU12执行程序16而进行的处理。在以下的说明中,主要说明将显示部10的显示区域分割为第1显示区域R1和第2显示区域R2的状态下的处理。
显示装置3在开始该处理后,使显示控制部21发挥功能,根据由用户实施的指示操作,进行画面分割处理(步骤S10)。由此,将显示部10的显示区域夹着边界线BL分割为第1显示区域R1和第2显示区域R2。此外,用户能够自由地变更边界线BL的位置。然后,显示控制部21针对2个显示区域R1、R2,显示用于操作图像处理功能的操作画面、和用于操作服务器功能的操作画面。
在进行显示部10的画面分割处理时,显示装置3成为由操作检测部22实施的操作检测状态。显示装置3判断是否由操作检测部22检测到用户的操作开始(步骤S11)。在检测到用户的操作开始的情况下(在步骤S11中“是”),显示装置3使连续性判定部24发挥功能。然后,连续性判定部24执行操作开始检测处理(步骤S12)。
图22是示出操作开始检测处理(步骤S12)的详细的处理步骤的一个例子的流程图。连续性判定部24在开始该处理后,存储用户的操作开始位置(步骤S20)。接下来,连续性判定部24判断是否为已经检测到第1操作101的状态(步骤S21)。在步骤S21中,检测到第1操作101的操作开始之后,尚未检测到操作结束的情况下,成为“是”,在其以外的情况下,成为“否”。在未检测到第1操作101的情况下(在步骤S21中“否”),连续性判定部24判断操作结束标志是否为OFF(步骤S22)。操作结束标志是在检测到由用户实施的操作结束的定时成为ON,在从由用户实施的操作结束起经过预定时间的定时成为OFF的标志。在操作结束标志是OFF的情况下(在步骤S22中“是”),连续性判定部24将由操作检测部22新检测出的操作确定为第1操作101(步骤S23)。然后,连续性判定部24将包括第1操作101的操作开始位置PA1的操作画面,决定为基于第1操作101的操作对象画面(步骤S28)。
在已经检测到第1操作101的情况(在步骤S21中“是”)、或者、操作结束标志是ON的情况(在步骤S22中“否”)下,连续性判定部24将由操作检测部22新检测出的操作,确定为第1操作101(步骤S24)。接下来,连续性判定部24执行用于判定第2操作102是否相对第1操作101具有连续性的连续性判定处理(步骤S25)。
图23是示出连续性判定处理(步骤S25)的详细的处理步骤的一个例子的流程图。连续性判定部24在开始该处理后,判定第2操作102的操作开始位置PB1(步骤S40)。根据其判定结果,连续性判定部24判断第2操作102的操作开始位置PB1是否包含于与第1操作101的操作开始位置PA1不同的显示区域(步骤S41)。当在与第1操作101不同的显示区域中检测出第2操作102的情况下(在步骤S41中“是”),连续性判定部24判断是否为检测到第1操作101的状态(步骤S42)。在是检测到第1操作101的状态的情况下(在步骤S42中“是”),连续性判定部24判定第1操作101及第2操作102的移动方向(步骤S43),判断是否为撑开/捏合操作(步骤S44)。在并非撑开/捏合操作的情况下(在步骤S44中“否”),连续性判定部24进而判断是否为旋回操作(步骤S45)。其结果,在用户的操作是撑开/捏合操作或者旋回操作的情况下(在步骤S44或者S45中“是”),连续性判定部24判定为第2操作102是相对第1操作101具有连续性的操作(步骤S46)。
另一方面,在第1操作101已经结束的情况下(在步骤S42中“否”),连续性判定部24判断第2操作102的操作开始位置PB1是否包含于相对第1操作101的操作结束位置PA2预定距离的范围内的区域R3(步骤S47)。在第2操作102的操作开始位置PB1包含于相对第1操作101的操作结束位置PA2预定距离的范围内的区域R3的情况下(在步骤S47中“是”),连续性判定部24判断是否检测到第2操作102的初始移动(步骤S48)。在检测到第2操作102的初始移动的情况下(在步骤S48中“是”),连续性判定部24判定第2操作102的移动方向(步骤S49),求出连接第1操作101的操作开始位置PA1和操作结束位置PB2的第1直线L1以及连接第2操作102的操作开始位置PB1和当前位置PB2的第2直线L2。然后,连续性判定部24判断第1直线L1和第2直线L2交叉的角度α是否为预定角度θ以内(步骤S50)。其结果,在角度α是预定角度θ以内的情况下(在步骤S50中“是”),连续性判定部24判定为第2操作102是相对第1操作101具有连续性的操作(步骤S46)。
另外,在步骤S48中未检测到第2操作102的初始移动的情况下(在步骤S48中“否”),连续性判定部24判断由用户实施的第2操作102是否为长敲操作(步骤S51)。其结果,在并非长敲操作的情况下(在步骤S51中“否”),连续性判定部24判定为第2操作102相对第1操作101具有连续性(步骤S46)。相对于此,在是长敲操作的情况下(在步骤S51中“是”),连续性判定部24判断为是通过第2操作102选择了用户可操作的内容B1的状态,判定为第2操作102是相对第1操作101不具有连续性的操作(步骤S52)。
另外,在步骤S50中角度α超过预定角度θ的情况下(在步骤S50中“否”),连续性判定部24判定为第2操作102是相对第1操作101不具有连续性的操作(步骤S52)。
进而,连续性判定部24在步骤S41中判断为在与第1操作101相同的显示区域中检测到第2操作102的情况(在步骤S41中“否”)、在步骤S45中判断为并非旋回操作的情况(在步骤S45中“否”)、或者、在步骤S47中判断为第2操作102的操作开始位置PB1未包含于相对第1操作101的操作结束位置PA2预定距离的范围内的区域R3的情况(在步骤S47中“是”)下,仍判定为第2操作102是相对第1操作101不具有连续性的操作(步骤S52)。以上,连续性判定处理(步骤S25)结束。
返回到图22,连续性判定部24通过参照连续性判定处理(步骤S25)的结果,判断第2操作102是否为相对第1操作101具有连续性的操作(步骤S26),在是具有连续性的操作的情况下(在步骤S26中“是”),将第2操作102确定为第1操作101的连续操作(步骤S27)。然后,连续性判定部24将包括第1操作101的操作开始位置PA1的操作画面,决定为基于第2操作102的操作对象画面(步骤S28)。
另外,在第2操作102是不具有连续性的操作的情况下(在步骤S26中“否”),连续性判定部24将第2操作102确定为与第1操作101无关的个别的操作(步骤S29)。然后,连续性判定部24将包括第2操作102的操作开始位置PB1的操作画面,决定为基于第2操作102的操作对象画面(步骤S30)。以上,操作开始检测处理(步骤S12)结束。
返回到图21,显示装置3在由操作检测部22未检测到用户的新的操作开始的情况下(在步骤S11中“否”),判断是否由操作检测部22检测到用户的继续操作(步骤S13)。在检测到用户的继续操作的情况下(在步骤S13中“是”),显示装置3使显示控制部21发挥功能。然后,显示控制部21执行继续操作检测处理(步骤S14)。
图24是示出继续操作检测处理(步骤S14)的详细的处理步骤的一个例子的流程图。显示控制部21判断是否检测到由用户继续地进行的操作(包括第1操作101及第2操作102)的移动方向(步骤S60)。在检测到移动方向的情况下(在步骤S60中“是”),显示控制部21确定移动后的操作是第1操作101及第2操作102中的哪一个,确定由连续性判定部24决定的操作对象画面(步骤S61)。然后,显示控制部21根据操作位置的移动方向以及移动速度,更新操作画面(步骤S62)。
另外,在未检测到操作位置的移动的情况下(在步骤S60中“否”),连续性判定部24判断用户的操作是否为长敲操作(步骤S63)。在是长敲操作的情况下(在步骤S63中“是”),显示控制部21将与操作位置对应的内容B1更新为选择状态(步骤S64)。另外,在并非长敲操作的情况下(在步骤S63中“否”),显示控制部21进行与用户的操作对应的画面更新(步骤S65)。以上,继续操作检测处理(步骤S14)结束。
再次返回到图21,显示装置3在由操作检测部22未检测到用户的继续操作的情况下(在步骤S13中“否”),判断是否由操作检测部22检测到用户的操作结束操作(步骤S15)。在检测到用户的操作结束的情况下(在步骤S15中“是”),显示装置3执行操作结束检测处理(步骤S16)。
图25是示出操作结束检测处理(步骤S16)的详细的处理步骤的一个例子的流程图。显示装置3在开始该处理后,首先使连续性判定部24发挥功能。连续性判定部24存储由用户实施的操作结束位置(步骤S70)。然后,连续性判定部24计算结束的操作中的操作开始位置至操作结束位置的移动轨迹,并且计算连接操作开始位置和操作结束位置的直线,判定移动轨迹是否收敛于相对直线预定距离D1的范围内(步骤S71)。连续性判定部24根据其判定结果,判断在进行了之后的操作时是否进行连续性判定(步骤S72)。在进行连续性判定的情况下(在步骤S72中“是”),连续性判定部24判断操作结束标志是否为OFF(步骤S73),在操作结束标志是OFF的情况下(在步骤S73中“是”),将操作结束标志设定为ON(步骤S74)。接下来,连续性判定部24读出预定时间TD(步骤S75)。然后,连续性判定部24判断是否为由显示控制部21实施的操作画面的更新中(步骤S76)。即,判断是否为基于结束的操作的操作画面的更新处理仍继续的状态。在是操作画面的更新中的情况下(在步骤S76中“是”),延长预定时间TD(步骤S77)。在并非操作画面的更新中的情况下(在步骤S76中“否”),预定时间TD不延长。然后,连续性判定部24开始预定时间TD的计数动作(步骤S78)。相对于此,在判断为不进行连续性判定的情况(在步骤S72中“否”)、或者操作结束标志已经是ON的情况(在步骤S73中“否”)下,跳过上述步骤S74~S78的处理。
接下来,显示装置3使操作信息输出部23发挥功能。操作信息输出部23伴随由用户实施的操作结束,判断是否需要将操作信息输出到装置本体2(步骤S79)。在需要输出操作信息的情况下(在步骤S79中“是”),操作信息输出部23生成基于用户的操作的操作信息,将该操作信息输出到装置本体2(步骤S80)。相对于此,在无需输出操作信息的情况下(在步骤S79中“否”),跳过步骤S80的处理。以上,操作结束检测处理(步骤S16)结束。
再次返回到图21。显示装置3在未由操作检测部22检测到用户的操作结束的情况下(在步骤S15中“否”),不进行步骤S16,使处理进入到接下来的步骤。然后,显示装置3执行标志处理(步骤S17)。
图26是示出标志处理(步骤S17)的详细的处理步骤的一个例子的流程图。显示装置3在开始该处理后,使连续性判定部24发挥功能。连续性判定部24首先判断操作结束标志是否为ON(步骤S90)。在操作结束标志是OFF的情况下(在步骤S90中“否”),连续性判定部24使标志处理结束。另外,在操作结束标志是ON的情况下(在步骤S90中“是”),连续性判定部24判断预定时间TD的计数动作是否结束(步骤S91)。在预定时间TD的计数动作未结束的情况下(在步骤S91中“否”),连续性判定部24使标志处理结束。另外,在预定时间TD的计数动作结束的情况下(在步骤S91中“是”),连续性判定部24判断是否为由显示控制部21实施的操作画面的更新中(步骤S92)。在是操作画面的更新中的情况下(在步骤S92中“是”),连续性判定部24使标志处理结束。另外,在并非操作画面的更新中的情况下(在步骤S92中“否”),连续性判定部24将操作结束标志设定为OFF(步骤S93)。以上,标志处理(步骤S17)结束。
再次返回到图21,显示装置3接着判断是否使画面分割结束(步骤S18)。例如,判断是否由用户指示了画面分割的结束。其结果,在未使画面分割结束的情况下(在步骤S18中“否”),显示装置3返回到步骤S11而反复上述处理。因此,每当用户进行针对显示部10的显示画面的触摸操作时,判断该触摸操作是否为相对其以前的触摸操作具有连续性的操作,在是具有连续性的操作的情况下,与在其以前的触摸操作中更新后的操作画面相同的操作画面被更新。另外,显示装置3在判断为使画面分割结束时(在步骤S18中“是”),所有处理结束。
如以上所述,本实施方式的图像处理装置1能够在显示装置3中,同时显示用于用户操作图像处理功能的操作画面、和用于用户操作服务器功能的操作画面。此时,显示装置3夹着边界线BL使第1显示区域R1和第2显示区域R2显示于显示部10。然后,显示装置3当在由操作检测部22在第1显示区域R1中检测到第1操作101之后,在第2显示区域R2中检测到第2操作102的情况下,判定第2操作102是否为相对第1操作101具有连续性的操作。另外,显示装置3在判定为第2操作102是相对第1操作101具有连续性的操作时,根据第2操作102更新第1显示区域R1的操作画面,在判定为第2操作102是相对第1操作101不具有连续性的操作时,根据第2操作102更新第2显示区域R2的操作画面。
如上述的显示装置3能够降低对于用户未意图的操作画面被更新的现象,提高操作性。例如,在用户为了使显示于第1显示区域R1的操作画面横向滚动,使触摸操作的操作位置横向移动时,即使该操作位置超越边界线而进入至第2显示区域R2的情况下,也能够使第1显示区域R1的操作画面的滚动显示继续。然后,即使在用户想要在第2显示区域R2中使指尖从画面上临时离开之后立刻再次在第2显示区域R2中开始触摸操作,而进行针对相同的操作画面的操作的情况下,显示装置3也能够根据用户的操作,更新第1显示区域R1的操作画面。即,上述显示装置3能够适合地检测用户针对同一操作画面进行的连续的操作,根据该连续的操作适合地更新用户意图的操作画面。
以上,说明了本发明的一个实施方式,但本发明不限于在上述实施方式中说明的内容的例子,而能够应用各种变形例。
例如在上述实施方式中,例示了在将显示部10左右画面分割的状态下,将左侧的区域设为第1显示区域R1,将右侧的区域设为第2显示区域R2的情况。但是,不限于此,也可以将右侧的区域设为第1显示区域R1,将左侧的区域设为第2显示区域R2。另外,画面的分割方向不限于左右方向的分割,也可以是上下方向的分割。
另外,在上述实施方式中,例示了显示装置3是作为图像处理装置1的用户接口设置的例子的情况。但是,显示装置3不一定限定于作为图像处理装置1的用户接口设置的例子。例如显示装置3也可以是作为个人计算机(PC)等的显示装置设置的例子。另外,显示装置3也可以是智能手机、平板终端等便携终端装置。
另外,例示了上述程序16预先安装于显示装置3的情况。但是,程序16不限于预先安装于显示装置3的例子,但也可以是成为其单独处置的对象的例子。在该情况下,程序26也可以是以用户自身经由因特网等下载的方式提供给显示装置3的例子,还可以是以记录到CD-ROM等计算机可读取的记录介质的状态提供给显示装置3的例子。

Claims (25)

1.一种显示装置,其特征在于具备:
显示单元,夹着边界线显示第1显示区域和第2显示区域,能够在所述第1及第2显示区域的每个中显示不同的操作画面;
操作检测单元,检测用户针对所述显示单元的显示画面的操作;
连续性判定单元,当在由所述操作检测单元在所述第1显示区域中检测到第1操作之后在所述第2显示区域中检测到第2操作的情况下,判定所述第2操作是否为相对所述第1操作具有连续性的操作;以及
显示控制单元,在由所述连续性判定单元判定为所述第2操作是相对所述第1操作具有连续性的操作的情况下,根据所述第2操作更新所述第1显示区域的操作画面,在由所述连续性判定单元判定为所述第2操作是相对所述第1操作不具有连续性的操作的情况下,根据所述第2操作更新所述第2显示区域的操作画面。
2.根据权利要求1所述的显示装置,其特征在于:所述连续性判定单元在所述第1操作的操作位置超越所述边界线而移动到所述第2显示区域的情况下,将所述第2显示区域中的所述第1操作判定为是针对所述第1显示区域的操作。
3.根据权利要求1或者2所述的显示装置,其特征在于:所述连续性判定单元伴随在所述第2显示区域中检测到所述第1操作的操作结束之后在所述第2显示区域中检测到所述第2操作,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
4.根据权利要求1至3中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在从检测到所述第1操作的操作结束起预定时间以内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
5.根据权利要求4所述的显示装置,其特征在于:所述连续性判定单元当在检测到所述第1操作的操作结束之后由所述显示控制单元继续进行基于所述第1操作的所述第1显示区域的操作画面的更新处理的情况下,使所述预定时间延长。
6.根据权利要求1至5中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在检测到所述第1操作的操作结束之后在从所述第1操作的操作结束位置起预定距离的范围内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
7.根据权利要求1至6中的任意一项所述的显示装置,其特征在于:所述连续性判定单元伴随在检测到所述第1操作的操作结束之后检测到所述第2操作,检测连接所述第1操作的操作开始位置和操作结束位置的第1直线与连接所述第2操作的操作开始位置和当前位置的第2直线所成的角度,在该角度是预定角度以内的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
8.根据权利要求1至7中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在判定为所述第2操作是相对所述第1操作具有连续性的操作之后所述第2操作的操作位置超越所述边界线而移动到所述第1显示区域的情况下,将所述第1显示区域中的所述第2操作判定为是针对所述第1显示区域的操作。
9.根据权利要求1至8中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在所述第2操作的操作开始位置显示用户可操作的内容并且所述第2操作是长敲操作的情况下,判定为所述第2操作是相对所述第1操作不具有连续性的操作。
10.根据权利要求1至9中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在所述第1操作的操作开始位置至操作结束位置的移动轨迹未处于从连接所述第1操作的操作开始位置和操作结束位置的直线起预定距离的范围内的情况下,即使当在所述第1操作之后在所述第2显示区域中检测到第2操作的情况下,也不进行连续性的判定。
11.根据权利要求1至10中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在判定为是相对所述第1操作具有连续性的操作的所述第2操作继续时由所述操作检测单元检测到第3操作的情况下,还判定所述第3操作是否为相对所述第1操作具有连续性的操作。
12.根据权利要求1至11中的任意一项所述的显示装置,其特征在于:所述连续性判定单元当在检测到所述第1操作的操作结束之前在所述第2显示区域中检测到所述第2操作的情况下,根据所述第1操作的操作位置的移动方向以及所述第2操作的操作位置的移动方向,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
13.一种图像处理装置,其特征在于具备:
权利要求1至12中的任意一项所述的显示装置;
操作画面输出单元,将用于进行任务的设定操作的任务设定画面输出到所述显示装置,显示于所述第1显示区域及所述第2显示区域的至少一方;
任务设定单元,从所述显示装置取得针对所述任务设定画面的操作信息,进行任务的设定;以及
任务控制单元,根据由所述任务设定单元实施的任务设定,控制任务的执行。
14.一种计算机可读取的记录介质,记录有在显示装置中执行的程序,该显示装置具备:
显示单元,夹着边界线显示第1显示区域和第2显示区域,能够在所述第1及第2显示区域的每个中显示不同的操作画面;以及
操作检测单元,检测用户针对所述显示单元的显示画面的操作,
所述记录介质的特征在于:
所述程序使所述显示装置执行:
连续性判定步骤,当在由所述操作检测单元在所述第1显示区域中检测到第1操作之后在所述第2显示区域中检测到第2操作的情况下,判定所述第2操作是否为相对所述第1操作具有连续性的操作;以及
画面更新步骤,在通过所述连续性判定步骤判定为所述第2操作是相对所述第1操作具有连续性的操作的情况下,根据所述第2操作更新所述第1显示区域的操作画面,在通过所述连续性判定步骤判定为所述第2操作是相对所述第1操作不具有连续性的操作的情况下,根据所述第2操作更新所述第2显示区域的操作画面。
15.根据权利要求14所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,在所述第1操作的操作位置超越所述边界线而移动到所述第2显示区域的情况下,将所述第2显示区域中的所述第1操作判定为是针对所述第1显示区域的操作。
16.根据权利要求14或者15所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,伴随在所述第2显示区域中检测到所述第1操作的操作结束之后,在所述第2显示区域中检测到所述第2操作,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
17.根据权利要求14至16中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,在从检测到所述第1操作的操作结束起预定时间以内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
18.根据权利要求17所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之后通过所述画面更新步骤继续进行基于所述第1操作的所述第1显示区域的操作画面的更新处理的情况下,使所述预定时间延长。
19.根据权利要求14至18中的任意一项所述的计算机可读取的记录介质,其特征在于:
在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之后在从所述第1操作的操作结束位置起预定距离的范围内检测到所述第2操作的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
20.根据权利要求14至19中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,伴随在检测到所述第1操作的操作结束之后检测到所述第2操作,检测连接所述第1操作的操作开始位置和操作结束位置的第1直线与连接所述第2操作的操作开始位置和当前位置的第2直线所成的角度,在该角度是预定角度以内的情况下,将所述第2操作判定为是相对所述第1操作具有连续性的操作。
21.根据权利要求14至20中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在判定为所述第2操作是相对所述第1操作具有连续性的操作之后所述第2操作的操作位置超越所述边界线而移动到所述第1显示区域的情况下,将所述第1显示区域中的所述第2操作判定为是针对所述第1显示区域的操作。
22.根据权利要求14至21中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在所述第2操作的操作开始位置显示用户可操作的内容并且所述第2操作是长敲操作的情况下,判定为所述第2操作是相对所述第1操作不具有连续性的操作。
23.根据权利要求14至22中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在所述第1操作的操作开始位置至操作结束位置的移动轨迹未处于从连接所述第1操作的操作开始位置和操作结束位置的直线起预定距离的范围内的情况下,即使在所述第1操作之后在所述第2显示区域中检测到第2操作的情况下,也不进行连续性的判定。
24.根据权利要求14至23中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在判定为是相对所述第1操作具有连续性的操作的所述第2操作继续时由所述操作检测单元检测到第3操作的情况下,还判定所述第3操作是否为相对所述第1操作具有连续性的操作。
25.根据权利要求14至24中的任意一项所述的计算机可读取的记录介质,其特征在于:在所述连续性判定步骤中,当在检测到所述第1操作的操作结束之前在所述第2显示区域中检测到所述第2操作的情况下,根据所述第1操作的操作位置的移动方向以及所述第2操作的操作位置的移动方向,判定所述第2操作是否为相对所述第1操作具有连续性的操作。
CN201811538605.0A 2017-12-20 2018-12-17 显示装置、图像处理装置以及计算机可读取的记录介质 Pending CN109951611A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017243456A JP6973025B2 (ja) 2017-12-20 2017-12-20 表示装置、画像処理装置及びプログラム
JP2017-243456 2017-12-20

Publications (1)

Publication Number Publication Date
CN109951611A true CN109951611A (zh) 2019-06-28

Family

ID=66816589

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811538605.0A Pending CN109951611A (zh) 2017-12-20 2018-12-17 显示装置、图像处理装置以及计算机可读取的记录介质

Country Status (3)

Country Link
US (1) US10735606B2 (zh)
JP (1) JP6973025B2 (zh)
CN (1) CN109951611A (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3671412A4 (en) 2017-09-11 2020-08-05 Guangdong Oppo Mobile Telecommunications Corp., Ltd. TOUCH OPERATION RESPONSE PROCESS AND DEVICE
WO2019047231A1 (zh) * 2017-09-11 2019-03-14 广东欧珀移动通信有限公司 触摸操作响应方法及装置
WO2019047234A1 (zh) 2017-09-11 2019-03-14 广东欧珀移动通信有限公司 触摸操作响应方法及装置
US10698533B2 (en) 2017-09-11 2020-06-30 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for responding to touch operation and electronic device
CN108388393B (zh) * 2018-01-02 2020-08-28 阿里巴巴集团控股有限公司 移动终端点击事件的识别方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101866263A (zh) * 2009-04-14 2010-10-20 索尼公司 信息处理设备、信息处理方法和程序
US20130222276A1 (en) * 2012-02-29 2013-08-29 Lg Electronics Inc. Electronic device and method for controlling electronic device
CN103384862A (zh) * 2011-02-16 2013-11-06 Nec卡西欧移动通信株式会社 信息处理终端及其控制方法
JP2017027422A (ja) * 2015-07-24 2017-02-02 アルパイン株式会社 表示装置及び表示処理方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090322689A1 (en) * 2008-06-30 2009-12-31 Wah Yiu Kwong Touch input across touch-sensitive display devices
JP5158023B2 (ja) * 2009-06-09 2013-03-06 富士通株式会社 入力装置、入力方法及びコンピュータプログラム
US20110154267A1 (en) * 2009-12-23 2011-06-23 Nokia Corporation Method and Apparatus for Determining an Operation Associsated with a Continuous Stroke Input
CN102468871B (zh) * 2010-10-29 2014-12-10 国际商业机器公司 建立无线连接的装置和无线设备
JP2013125373A (ja) * 2011-12-14 2013-06-24 Sony Corp 情報処理装置および方法、並びにプログラム
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
JP6171643B2 (ja) 2013-07-11 2017-08-02 株式会社デンソー ジェスチャ入力装置
JP6433347B2 (ja) * 2015-03-16 2018-12-05 三菱電機株式会社 地図表示制御装置および地図の自動スクロール方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101866263A (zh) * 2009-04-14 2010-10-20 索尼公司 信息处理设备、信息处理方法和程序
CN103384862A (zh) * 2011-02-16 2013-11-06 Nec卡西欧移动通信株式会社 信息处理终端及其控制方法
US20130222276A1 (en) * 2012-02-29 2013-08-29 Lg Electronics Inc. Electronic device and method for controlling electronic device
JP2017027422A (ja) * 2015-07-24 2017-02-02 アルパイン株式会社 表示装置及び表示処理方法

Also Published As

Publication number Publication date
JP6973025B2 (ja) 2021-11-24
US10735606B2 (en) 2020-08-04
US20190191042A1 (en) 2019-06-20
JP2019109802A (ja) 2019-07-04

Similar Documents

Publication Publication Date Title
CN109951611A (zh) 显示装置、图像处理装置以及计算机可读取的记录介质
JP7397881B2 (ja) 複数のアプリケーションウィンドウと対話するためのシステム、方法、及びユーザインタフェース
KR102543095B1 (ko) 증강 현실을 사용하여 측정하기 위한 디바이스들 및 방법들
US10761712B2 (en) Anchoring viewport
US20200218376A1 (en) Devices and Methods for Processing Touch Inputs
JP6705842B2 (ja) ナビゲーション及び検索機能を提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
JP5001182B2 (ja) 表示制御装置、電子機器、表示制御方法、およびプログラム
JP4361080B2 (ja) 画像データを生成するための方法、プログラム、および装置
CN115543144A (zh) 增强现实环境中显示和操纵虚拟对象的系统、方法和界面
CN110678834A (zh) 用于访问通知的设备、方法和图形用户界面
US6329991B1 (en) Data processing method and apparatus
US20090091547A1 (en) Information display device
KR20170139141A (ko) 스타일러스로 사용자 인터페이스를 조작하기 위한 디바이스 및 방법
JP2009271735A (ja) 文書閲覧システム及び文書に関連付けられた付加情報の表示方法
JP2012178175A (ja) 表示制御装置、電子機器、表示制御方法、およびプログラム
JP4046187B2 (ja) 文字のスクロール表示装置、文字のスクロール表示方法、表示制御プログラムおよび記録媒体
JPH0475093A (ja) 画像データ処理装置
CN103853327B (zh) 数据处理装置以及操作受理方法
JP5414920B2 (ja) 表示制御装置、表示制御方法、およびプログラム
CN112219182B (zh) 用于移动绘图对象的设备、方法和图形用户界面
AU2017100482B4 (en) Devices, methods, and graphical user interfaces for providing haptic feedback
JP4281973B2 (ja) 文字のスクロール表示装置、文字のスクロール表示方法、表示制御プログラムおよび記録媒体
KR100716940B1 (ko) 전자기기의 디스플레이 화면 제어 장치 및 방법
JP4278428B2 (ja) 表示装置
KR20060119116A (ko) 벡터 기반의 사용자 인터페이스 구조를 갖는 단말 장치 및 사용자 인터페이스 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190628