CN107545534B - 图像处理装置及其控制方法以及存储介质 - Google Patents

图像处理装置及其控制方法以及存储介质 Download PDF

Info

Publication number
CN107545534B
CN107545534B CN201710456679.9A CN201710456679A CN107545534B CN 107545534 B CN107545534 B CN 107545534B CN 201710456679 A CN201710456679 A CN 201710456679A CN 107545534 B CN107545534 B CN 107545534B
Authority
CN
China
Prior art keywords
processing apparatus
information processing
image processing
screen
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710456679.9A
Other languages
English (en)
Other versions
CN107545534A (zh
Inventor
佐藤智也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN107545534A publication Critical patent/CN107545534A/zh
Application granted granted Critical
Publication of CN107545534B publication Critical patent/CN107545534B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1285—Remote printer device, e.g. being remote from client or server
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1211—Improving printing performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1229—Printer resources management or printer maintenance, e.g. device status, power levels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00384—Key input means, e.g. buttons or keypads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00411—Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen

Abstract

本发明提供一种图像处理装置及其控制方法以及存储介质。本说明书中描述的图像处理装置包括：显示单元，其被构造为显示软件键盘；接收单元，其被构造为接收基于按下键盘而从信息处理装置发送的信号；存储单元，其被构造为将由所述接收单元接收到的信号与关于在所述图像处理装置上配设的硬件键的信息相关联地存储；以及控制单元，其被构造为在所述显示单元正在显示软件键盘的情况下，在所述显示单元上显示基于由所述接收单元接收到的信号的字符，而在所述显示单元未正在显示软件键盘的情况下，进行与按下硬件键相对应的处理，关于所述硬件键的信息被与由所述接收单元接收到的信号相关联地存储在所述存储单元中。

Description

图像处理装置及其控制方法以及存储介质
技术领域
本发明涉及图像处理装置、图像处理装置的控制方法以及存储介质。
背景技术
提出了如下方法：通过虚拟网络计算(Virtual Network Computing，VNC)，从在物理上位于远离图像处理装置的位置的诸如个人计算机(PC)等的信息处理装置，操作具有显示器的图像处理装置。在该方法中，在图像处理装置的显示器上显示的画面，显示在信息处理装置的显示器上。日本特开2005-284375号公报讨论了如下技术：该技术使得能够通过用户对信息处理装置的显示器进行操作，来操作位于远处的图像处理装置。
在上述图像处理装置中，用户能够在VNC连接期间从信息处理装置的硬件键盘，远程地操作在图像处理装置上配设的、诸如开始键和清除键等的硬件键。图像处理装置将图像处理装置的硬件键的键代码与信息处理装置的硬件键盘的键的字符代码相关联地存储。在用户希望在VNC连接期间操作图像处理装置的硬件键的情况下，用户按下与目标硬件键相对应的键盘上的键。图像处理装置从信息处理装置接收与由用户按下的键盘上的键相对应的字符代码，并且根据与接收到的字符代码相对应的硬件键的键代码进行与按下硬件键相对应的处理。
例如，在图像处理装置的复位键对应于信息处理装置的键盘上的“r”键的情况下，响应于用户按下“r”键，图像处理装置进行如下处理：执行在(对应于)按下图像处理装置的复位键的情况下要进行的操作。
通常，上述图像处理装置进行与按下对应于从外部信息处理装置接收到的字符代码的硬件键相对应的处理，并且无法通过接收到的字符代码输入字符。
为此，假设使得能够通过使用由图像处理装置接收到的字符代码输入字符，来从外部信息处理装置的硬件键盘输入字符。
在图像处理装置接收到与硬件键相对应的字符代码的情况下，图像处理装置需要在用于输入接收到的字符代码的字符的处理、和与按下对应于接收到的字符代码的硬件键相对应的处理之间切换。
例如，在用户按下键盘上的“r”键的情况下，图像处理装置接收到字符代码“r”。已经接收到字符代码“r”的图像处理装置需要依据情况在用于输入字符“r”的处理和与按下复位键相对应的处理之间切换。
发明内容
根据本示例性实施例的一方面，一种图像处理装置，其能够经由网络与信息处理装置连接，所述图像处理装置包括：显示单元，其被构造为显示软件键盘；存储单元，其用于存储在图像处理装置上提供的硬件键与当按下连接到所述信息处理装置的硬件键时要从所述信息处理装置发送的信号之间的关联；提供单元，其用于经由网络向信息处理装置的客户端功能提供用于操作图像处理装置的显示数据；接收单元，其被构造为接收在按下连接到信息处理装置的硬件键而从信息处理装置发送的所述信号；以及控制单元，其被构造为在基于存储在图像处理装置中的信息确定经由软件键盘输入的文本是可执行的情况下，在所述显示单元上显示与接收到的信号相对应的字符，而在基于所述信息确定经由软件键盘输入的文本是不可执行的情况下，进行在所述存储单元中与接收到的信号相关联的、在图像处理装置上提供的硬件键相对应的处理。
通过以下参照附图对示例性实施例的描述，本发明的其他特征将变得清楚。
附图说明
图1例示了根据本发明一个或多个方面的硬件构造。
图2例示了根据示例性实施例的软件构造。
图3例示了根据本发明一个或多个方面的图像处理装置的显示器上显示的操作画面的示例。
图4例示了根据本发明一个或多个方面的图像处理装置的显示器上显示的软件键盘画面。
图5A至图5D例示了根据本发明一个或多个方面的图像处理装置的显示器上显示的画面的示例。
图6是例示根据本发明一个或多个方面的信息处理装置的详细处理的流程图。
图7是例示根据本发明一个或多个方面的图像处理装置的详细处理的流程图。
图8示意性例示了根据本发明一个或多个方面的字符代码转换表。
图9是例示根据本发明一个或多个方面的信息处理装置的详细处理的流程图。
图10是例示根据本发明一个或多个方面的图像处理装置的处理的流程图。
具体实施方式
下面将参照附图描述本说明书中描述的示例性实施例。下面将描述本发明的第一示例性实施例。
在下文中，图像处理装置被称为服务器，并且通过虚拟网络计算(VNC)连接到服务器的诸如外部PC等的信息处理装置被称为客户端。
图1例示了根据本说明书中描述的示例性实施例的整个信息处理系统。
信息处理系统包括用作用于发送显示画面的服务器的图像处理装置101和用作用于接收图像处理装置101的显示画面的客户端的信息处理装置103。图像处理装置101和信息处理装置103经由诸如局域网(LAN)等的网络102彼此连接。
下面将描述图像处理装置(服务器)101的硬件构造。参照图1，中央处理单元(CPU)111、随机存取存储器(RAM)112、只读存储器(ROM)113、输入单元114、显示控制单元115、外部存储器接口(I/F)116、通信I/F控制器117、打印机I/F 118和扫描器I/F 119连接到系统总线110。触摸面板120和硬件键121连接到输入单元114。显示器122连接到显示控制单元115。外部存储器123连接到外部存储器I/F 116。打印机124连接到打印机I/F 118。打印机(打印单元)在片材上打印图像数据。扫描器125连接到扫描器I/F 119。扫描器(扫描单元)读取原稿以生成图像数据。连接到系统总线110的单元被构造为经由系统总线110彼此交换数据。
ROM 113是存储图像数据、非图像数据以及供CPU 111进行操作的各种程序的非易失性存储器。
RAM 112是用作CPU 111的主存储器和诸如工作区域等的暂时存储区域的易失性存储器。
CPU 111将存储在ROM 113中的程序加载到RAM 112中，并且执行该程序以控制图像处理装置101的各个单元。供CPU 111进行操作的程序不限于存储在ROM 113中的程序，并且可以被预先存储在外部存储器123(诸如硬盘)中。
输入单元114接收用户操作，生成与用户操作相对应的控制信号，并且将生成的控制信号供给到CPU 111。输入单元114与触摸面板120和硬件键121连接，作为用于接收用户操作的输入设备。触摸面板120是输出与对平面构造的输入部分的触摸位置相对应的坐标信息的输入设备。触摸面板120可以是包括电阻膜型、电容型、表面弹性波型、红外型、电磁感应型、图像识别型和光学传感器型的各种类型中的任何一种类型的触摸面板。
包括数字键、开始键和停止键的硬件键121是能够被物理上按下的输入设备。输入单元114响应于对各个输入设备进行的用户操作来生成控制信号。CPU 111根据生成的控制信号和从ROM 113读取的程序来控制图像处理装置101的各个单元。
显示控制单元115输出用于在显示器122上显示图像的显示信号。例如，将由CPU111根据程序生成的显示控制信号供给到显示控制单元115。显示控制单元115基于显示控制信号生成显示信号，并且将显示信号输出到显示器122。显示控制单元115基于由CPU 111生成的显示控制信号来构造图形用户界面(GUI)，并且在显示器122上显示所构造的GUI画面。
显示器122与触摸面板120一体地形成。例如，显示器122和触摸面板120被以这样的方式构造：触摸面板120具有显示器122的显示不被中断的透光率。触摸面板120附接到显示器122的上层。表示用户在触摸面板120上的触摸位置的输入坐标与显示器122上的显示坐标相关联。该构造使得用户能够进行操作，仿佛用户直接触摸显示器122上显示的画面。
诸如硬盘(HD)、软盘(FD)、压缩盘(CD)、数字通用盘(DVD)和存储器卡等的外部存储器123能够附接到外部存储器I/F 116。CPU 111从/向经由外部存储器I/F 116附接的外部存储器123读取/写入数据。
CPU 111经由通信I/F控制器117与诸如LAN和互联网等的各种有线和/或无线网络102进行通信。扫描器I/F 119控制从扫描器125的图像输入。打印机I/F 118控制到打印机124的图像输出。扫描器125读取放置在原稿定位板上的原稿以生成图像数据。打印机124将经由打印机I/F118接收到的图像数据打印在片材上。
下面将参照图1描述信息处理装置(客户端)103的硬件构造。
参照图1，CPU 151、RAM 152、ROM 153、输入单元154、显示控制单元155、外部存储器I/F 156和通信I/F控制器157连接到系统总线150。键盘158和鼠标161连接到输入单元154。显示器159连接到显示控制单元155。外部存储器160连接到外部存储器I/F 156。键盘158是在下文中被称为键盘的硬件键盘。
连接到系统总线150的上述单元被构造为经由系统总线150彼此交换数据。
ROM 153是在预定区域中存储图像数据、非图像数据以及供CPU151进行操作的各种程序的非易失性存储器。
RAM 152是用作CPU 151的主存储器和诸如工作区域等的暂时存储区域的易失性存储器。例如，CPU 151将存储在ROM 153中的程序加载到RAM 152中，并且执行该程序以控制信息处理装置103的各个单元。供CPU 151进行操作的程序不限于存储在ROM 153中的程序，并且可以被预先存储在外部存储器160(例如，硬盘)中。
输入单元154接收用户操作，生成与操作相对应的控制信号，并且将生成的控制信号供给到CPU 151。输入单元154从诸如键盘158和鼠标161等的输入设备接收与用户操作相对应的信号。CPU 151基于由输入单元154根据对输入设备进行的用户操作而生成的控制信号，来控制信息处理装置103的各个单元。以这种方式，信息处理装置103中的CPU151进行用于进行与用户操作相对应的操作的处理。
显示控制单元155将用于显示图像的显示信号输出到显示器159。CPU 151生成显示控制信号，并且将生成的显示控制信号供给到显示控制单元155。显示控制单元155基于显示控制信号生成显示信号，并且将生成的显示信号输出到显示器159。例如，基于由CPU151生成的显示控制信号，显示控制单元155生成GUI画面并且在显示器159上显示该画面。
诸如硬盘、软盘、CD、DVD和存储器卡等的外部存储器160能够附接到外部存储器I/F 156。在CPU 151的控制下，外部存储器I/F 156从/向所附接的外部存储器160读取/写入数据。在CPU 151的控制下，通信I/F控制器157与诸如LAN和互联网等的各种有线和/或无线网络102进行通信。
图2例示了图像处理装置101和信息处理装置103的软件构造。通过CPU 111读取存储在ROM 113或外部存储器123中的控制程序并且执行控制程序来实现图像处理装置101中的各个软件模块。通过CPU 151读取存储在ROM 153或外部存储器160中的控制程序并且执行控制程序来实现信息处理装置103中的各个软件模块。
图像处理装置101包括操作输入分析单元201、事件分析单元202、事件处理单元203、画面生成单元204、显示单元205、VNC服务器206和作业控制处理单元207。图像处理装置101还包括如扫描处理单元208、打印处理单元209和软件键盘控制单元250这样的软件模块。VNC服务器206包括如连接处理单元220、操作信息接收单元221和画面发送单元222这样的模块。
作业控制处理单元207控制软件模块(未例示的一些模块)以控制要由图像处理装置101执行的复印作业、打印作业和扫描作业。
扫描处理单元208基于作业控制处理单元207的命令经由扫描器I/F119控制扫描器125，以进行用于读取放置在扫描器125的原稿定位板上的原稿的处理。
打印处理单元209基于作业控制处理单元207的命令经由打印机I/F118控制打印机124，以进行用于打印指定图像的处理。
操作输入分析单元201分析从输入单元114供给的控制信号，并且将与用户操作相对应的事件发送到事件处理单元203。要由操作输入分析单元201分析的事件包括：用户触摸触摸面板120的事件以及用户按下图像处理装置101的硬件键121的事件。
除了用户操作以外，事件分析单元202还从作业控制处理单元207接收在图像处理装置101中发生的各种现象，分析现象，并且将与现象相对应的事件发送到事件处理单元203。要由事件分析单元202分析的事件是除通过用户操作而发生的事件以外的事件，诸如作业结束的事件以及打印片材用尽的事件。
事件处理单元203从例如操作输入分析单元201、事件分析单元202和操作信息接收单元221接收事件。响应于接收到的事件，事件处理单元203向作业控制处理单元207和软件键盘控制单元250通知事件以控制图像处理装置101的各个单元。
画面生成单元204进行用于在RAM 112上生成要在显示器122上显示的画面数据的处理。
显示单元205控制显示控制单元115在显示器122上显示由画面生成单元204生成的画面数据。
软件键盘控制单元250接收来自事件处理单元203的通知，并且进行显示软件键盘画面的控制。下面将详细描述软件键盘控制单元250的处理。软件键盘控制单元250存储表示在显示器122上是否当前显示软件键盘的信息。
VNC服务器206是用于经由网络102与在信息处理装置103上操作的VNC客户端210进行通信的软件模块。连接处理单元220接收来自VNC客户端210的连接处理单元211的连接请求并且进行连接处理。
操作信息接收单元221从VNC客户端210的操作信息发送单元213接收操作信息，并且向事件处理单元203通知与用户操作相对应的事件。由操作信息接收单元221发送的事件等同于由操作输入分析单元201发送的事件，即，响应于操作图像处理装置101的用户操作而发生的事件。
画面发送单元222进行用于从RAM 112读取由画面生成单元204生成的画面数据并将画面数据发送到VNC客户端210的画面接收单元214的处理。
VNC客户端210在信息处理装置103上操作。VNC客户端210包括连接处理单元211、操作输入分析单元212、操作信息发送单元213、画面接收单元214和画面显示单元215。连接处理单元211接收来自用户的请求，并且向VNC服务器206的连接处理单元220发送连接请求以进行连接处理。
操作输入分析单元212经由输入单元154接收由用户通过使用键盘158和鼠标161而进行的操作，分析操作，并且将关于所分析的操作的信息发送到操作信息发送单元213。
操作信息发送单元213将接收到的操作信息发送到VNC服务器206的操作信息接收单元221。
画面接收单元214从VNC服务器206的画面发送单元222接收画面数据，并且将画面数据记录在RAM 152中。
画面显示单元215从RAM 152读取由画面接收单元214接收到的数据。然后，画面显示单元215控制显示控制单元155以在显示器159上显示所读取的图像数据。
通过CPU 111和CPU 151分别控制通信I/F控制器117和通信I/F控制器157，来实现VNC服务器206与VNC客户端210之间的通信。根据远程帧缓冲器(Remote Frame Buffer，RFB)协议来进行VNC服务器206与VNC客户机210之间的通信。
通过上述软件模块中的各个的处理，将与显示器122上显示的画面相同的画面也显示在信息处理装置103的显示器159上。用户能够通过使用信息处理装置103的键盘158和鼠标161输入操作，来从远程位置对图像处理装置101进行各种操作。
图3例示了根据本说明书中描述的示例性实施例的图像处理装置101的显示器122上显示的画面的示例。
图3例示了用于显示在通过电子邮件发送由图像处理装置101的扫描器125扫描的数据时的主题和正文的画面的示例。参照图3，用户设置电子邮件的主题和正文。响应于用户触摸“主题”键301，CPU 111将显示器122上显示的画面改变为用于输入主题的画面。响应于用户触摸“正文”键302，CPU 111在显示器122上显示用于输入正文的画面。输入的主题被显示在主题显示栏303上。图3例示了已经输入主题“Thanks”的状态。输入的正文被显示在正文显示栏304中。参照图3，在正文显示栏304中尚未输入文本。
响应于用户按下“主题”键301、“正文”键302、主题显示栏303和正文显示栏304中的任何一个，CPU 111在显示器122上显示图4中所示的软件键盘画面。
图4例示了根据本说明书中描述的示例性实施例的图像处理装置101的显示器122上显示的软件键盘画面。根据本示例性实施例的图像处理装置101不具有硬件键盘。用户通过触摸显示器122上显示的软件键盘来输入字符。
在软件键盘控制单元250的控制下，在显示器122上显示软件键盘画面。
软件键盘画面的标题区域401显示用于向用户表示输入项目的信息。参照图4，标题区域401显示文本“主题”。当用户在软件键盘画面上输入字符时，输入的字符被反映在“主题”上。
软件键盘画面包括显示由用户输入的字符的输入字符显示区域(在下文中被称为输入区域)402。在图3中所示的主题显示栏303中已经输入了文本“Thanks”，并且在图4中所示的输入区域402中也显示了文本“Thanks”。
软件键盘画面包括键区域403。通过用户通过触摸操作选择键区域403中显示的键，将与所选择的键相对应的字符输入到输入区域402。参照图4，字母字符和符号被显示为键。
软件键盘画面显示取消按钮404。响应于用户按下取消按钮404，CPU111取消在软件键盘画面上输入的字符，并且在显示器122上显示在软件键盘画面之前先前显示的画面。
软件键盘画面还显示“确定(OK)”键405。在用户触摸“确定”键405的情况下，CPU111将当前显示在输入区域402中的文本存储在硬盘驱动器(HDD)104中。CPU 111还在显示器122上显示在软件键盘画面之前先前显示的画面。在这种情况下，在显示栏中输入在与标题区域401相对应的输入区域402中输入的文本的状态下，CPU 111在显示器122上显示先前画面。
软件键盘画面还显示输入模式选择按钮406。响应于用户触摸输入模式选择按钮406，在下拉菜单中显示用于选择诸如“字母数字”(alphanum，代表alphanumeric)、“符号”和“罗马字符”等的输入方法的输入模式。用户能够通过从下拉菜单中指定输入模式来改变输入方法和键区域403中显示的内容。例如，图4中所示的“字母数字”输入模式是用于输入一般字母数字字符和符号的输入模式。响应于用户将输入模式选择按钮406改变为“符号”输入模式，在键区域403中显示用于输入符号的键(未例示)。
如上所述，与图4中所示的相同的软件键盘画面也显示在通过VNC连接的信息处理装置103的显示器159上。通过利用鼠标161在显示器159上显示的软件键盘画面上搜索并点击键，用户能够向图像处理装置101输入字符。此外，用户能够通过使用连接到信息处理装置103的键盘158来输入字符。下面将详细描述利用鼠标161的操作来输入字符的处理以及从键盘158输入字符的处理。
作为用于显示软件键盘的画面的示例，图4例示了用于在用扫描器125读取原稿以生成图像数据并且通过电子邮件发送生成的图像数据的情况下输入主题的画面。除了上述软件键盘画面以外，CPU 111还显示用于在将通过用扫描器125读取原稿而生成的图像数据存储在诸如HDD和服务器等的存储设备中的情况下输入图像数据的标题的画面。用于显示软件键盘画面的画面可以是用于输入要登记到用于管理传真和电子邮件的发送目的地的地址簿的名称和邮件地址的画面。
下面将参照图5A至图5D来描述根据本示例性实施例的图像处理装置101的显示器122上显示的画面。下面将参照图7描述用于从根据本示例性实施例的信息处理装置103的键盘158输入字符的处理的流程。根据本示例性实施例，当在图像处理装置101的显示器122上显示软件键盘画面时，CPU 111接受从键盘158输入的字符。
图5A至图5D例示了在图像处理装置101的显示器122上显示的画面的示例。当图像处理装置101和信息处理装置103通过VNC彼此连接时，与在图像处理装置101的显示器122上显示的画面相同的画面也显示在信息处理装置103的显示器159上。
图8示意性例示了硬件键转换表。存储在ROM 113或外部存储器123中的硬件键转换表被用来将由CPU 111从信息处理装置103接收到的字符代码与图像处理装置101的硬件键121的键代码相关联。参照图8，列801表示作为由图像处理装置101从信息处理装置103接收的字符代码的转换源字符代码。为了方便起见，列801表示键盘158上的各个键而不是字符代码。列802表示与键盘158上的各个键相对应的图像处理装置101的各个硬件键121的键代码。为了方便起见，列802表示各个硬件键121的名称而不是各个硬件键121的键代码。图像处理装置101的硬件键121的键代码是用于识别图像处理装置101的各个硬件键121的代码。键代码包括字母数字字符串。信息处理装置103的用户通过例如操作手册被预先告知键盘158上的键与图像处理装置101的硬件键121之间的关联。
首先，图像处理装置101和信息处理装置103开始VNC连接，以使得用户能够从信息处理装置103远程操作图像处理装置101。此时，与图像处理装置101的显示器122上显示的画面相同的画面也显示在信息处理装置103的显示器159上。例如，当在图像处理装置101的显示器122上显示图5A中所示的画面时，图5A中所示的画面也显示在信息处理装置103的显示器159上。
用户移动信息处理装置103的鼠标161以将指针移动到“主题”键301并点击“主题”键301。然后，图像处理装置101的CPU 111确定“主题”键301被触摸，并且在显示器122上显示用于输入图5B中所示的主题的画面。
信息处理装置103的画面接收单元214接收由图像处理装置101的画面发送单元222发送的画面的数据，并且在信息处理装置103的显示器159上显示图5B中所示的画面。
在信息处理装置103的显示器159上显示图5B中所示的软件键盘画面的状态下，用户按下信息处理装置103的键盘158上的键。例如，当用户按下键盘158上的“a”键时，信息处理装置103的操作信息发送单元213发送与“a”键相对应的字符代码。图像处理装置101的CPU 111根据接收到的字符代码在输入区域402中输入“a”。然后，显示图5C中所示的画面。CPU 111将反映了输入字符的画面从画面发送单元222发送到画面接收单元214。然后，图5C中所示的画面也显示在信息处理装置103的显示器159上。这样，当在图像处理装置101的显示器122上显示用于输入字符的软件键盘时，用户能够从经由网络102连接的信息处理装置103的键盘158输入字符。
在一些情况下，可以在图像处理装置101的显示器122上显示除接受文本输入的画面以外的画面。例如，用户不能在图5D中所示的复印画面上输入字符。在显示这样的画面时，用户利用硬件键121对图像处理装置101进行操作，例如，用户按下“开始”按钮以进行用于开始复印作业的处理。假设如下的情况：在图像处理装置101的显示器122上正在显示这样的画面的同时，用户按下信息处理装置103的键盘158上的键。在这种情况下，基于图8中所示的硬件键转换表，CPU 111进行在按下与由用户按下的键盘158上的键相对应的、图像处理装置101的硬件键121的情况下要进行的处理。
图像处理装置101的操作信息接收单元221从信息处理装置103的操作信息发送单元213接收由用户按下的键的字符代码，并且确定与接收到的字符代码相对应的图像处理装置101的硬件键121是否被登记在硬件键转换表中。在对应的硬件键121被登记的情况下，图像处理装置101进行在(对应于)按下对应的硬件键121的情况下要进行的处理。
例如，假设在图像处理装置101的显示器122上显示图5D中所示的复印画面的状态下，用户按下信息处理装置103的键盘158上的“s”键。根据图8中所示的硬件键转换表，信息处理装置103的键盘158上的“s”键对应于图像处理装置101的硬件键121的开始键。然后，图像处理装置101的CPU 111进行用于开始复印作业的处理。
图6是例示信息处理装置103中的VNC客户端210的输入事件处理的流程图。通过CPU 151将存储在ROM 153或外部存储器160中的程序加载到RAM 152中并执行该程序来实现下面描述的处理。
在步骤S501中，CPU 151接收来自鼠标161或键盘158的事件。更具体地，输入单元154接收来自键盘158或鼠标161的输入信号，并且将输入信号发送到操作输入分析单元212。
在步骤S502中，CPU 151确定接收到的事件是否是鼠标事件。鼠标事件是指用户点击信息处理装置103的鼠标161的事件和用户通过使用鼠标161来移动指针的事件。如果CPU151接收到鼠标事件(在步骤S502中为“是”)，则处理进行到步骤S503。在步骤S503中，CPU151从接收到的鼠标事件中提取鼠标事件发生的坐标信息。鼠标事件发生的坐标信息是表示在显示器122上显示的画面上发生了鼠标事件的位置的信息。例如，在发生用户点击鼠标161的事件的情况下，假设显示器159上显示的图像处理装置101的画面的四个角中的任何一个为原点，CPU 151提取点击的位置作为x坐标和y坐标。操作输入分析单元212向操作信息发送单元213通知鼠标事件和计算出的坐标。
在步骤S504中，操作信息发送单元213将鼠标事件转换成指针事件，并且将指针事件发送到图像处理装置101。指针事件能够以综合的方式处理通过鼠标、笔和触摸操作的输入。下面将以信息处理装置103的CPU151将鼠标事件转换成指针事件并且将指针事件发送到图像处理装置101的情况为中心来描述本示例性实施例。然而，信息处理装置103可以将鼠标事件发送到图像处理装置101而不转换鼠标事件。
当CPU 151结束事件发送时，处理返回到步骤S501。在步骤S501中，CPU 151等待下一个事件的接收。
在由CPU 151接收到的事件不是鼠标事件的情况下，即，在接收到的事件是键事件的情况下(在步骤S502中为“否”)，处理进行到步骤S505。在步骤S505中，CPU 151将从键盘158接收到的键事件发送到图像处理装置101。更具体地，操作输入分析单元212从由CPU151接收到的键事件信息中提取所按下的键的字符代码，并且向操作信息发送单元213通知字符代码。字符代码是指与基于字符代码系统(例如ASCII(American Standard Code forInformation Interchange，美国信息交换标准代码)代码)的字符相对应的代码。然后，操作信息发送单元213将键事件发送到作为连接目的地的图像处理装置101中的VNC服务器206。键事件是指关于对键盘158上的键的按下和从键事件信息中提取的字符代码的信息。在键事件发送完成时，处理返回到步骤S501。在步骤S501中，CPU 151再次等待接收来自鼠标161和键盘158的事件。
图7是例示当VNC服务器206从VNC客户端210接收到操作信息时由图像处理装置101进行的处理的流程图。通过CPU 111将存储在ROM 113或外部存储器123中的程序加载到RAM 112中并执行该程序来实现下面描述的处理。
在步骤S601中，CPU 111从信息处理装置103接收事件。更具体地，操作信息接收单元221从VNC客户端210接收关于鼠标或键盘操作的操作信息。
在步骤S602中，CPU 111确定从VNC客户端210接收到的事件是否是指针事件。更具体地，操作信息接收单元221确定从VNC客户端210接收到的事件是否是指针事件。
如果CPU 111确定接收到的事件是指针事件(在步骤S602中为“是”)，则处理进行到步骤S603。在步骤S603中，CPU 111确定接收到的指针事件是否是鼠标点击。如果接收到的事件不是鼠标点击的事件(在步骤S603中为“否”)，则处理返回到步骤S601。在步骤S601中，CPU111等待接收下一个事件。将在如下的前提下描述本示例性实施例：在接收到的事件不是指针事件的情况下，CPU 111不进行处理。然而，在接收到的事件是除指针事件以外的预定事件的情况下，CPU 111可以进行预定的处理。例如，假设如下的情况：当在显示器122上显示打印物的列表时，用户在列表上进行鼠标161的拖动操作。图像处理装置101可以从信息处理装置103接收拖动事件，并且进行用于滚动列表的处理。
如果由CPU 111接收到的事件是鼠标点击的事件(在步骤S603中为“是”)，则处理进行到步骤S604。在步骤S604中，CPU 111确定点击的位置是否是在特定按钮上的位置。更具体地，操作信息接收单元221基于从接收到的指针事件通知的坐标信息和显示器122上当前显示的画面，确定点击的位置是否是在特定按钮上的位置。
如果CPU 111确定点击的位置是画面上未显示按钮的位置(在步骤S604中为“否”)，则处理返回到步骤S601。在步骤S601中，CPU 111等待下一个事件。
如果CPU 111确定点击的位置是在特定按钮上的位置(在步骤S604中为“是”)，则处理进行到步骤S605。在步骤S605中，CPU 111识别用户用鼠标161点击了画面上的哪个按钮。更具体地，基于显示器122上当前显示的画面和所通知的指针事件的坐标，操作信息接收单元221识别用户用鼠标161点击了画面上的哪个按钮。如果点击的位置是未显示按钮的位置(在步骤S604中为“否”)，则处理返回到步骤S601。在步骤S601中，CPU111等待下一个事件。
在步骤S606中，CPU 111进行与由用户用信息处理装置103的鼠标161点击的按钮相对应的处理。例如，假设在正在显示图4中所示的软件键盘画面的同时，用户用信息处理装置103的鼠标161点击了键区域403中的“a”键。操作信息接收单元221从操作信息发送单元213接收包括关于由鼠标161点击的位置的坐标的信息的指针事件。基于从信息处理装置103接收到的关于指针事件的信息，图像处理装置101识别出在具有“a”键的坐标的位置处进行了点击操作，并且在输入区域402中显示“a”。
在这种情况下，CPU 111可以进行以下处理，以使得用户能够可视地识别与所点击的键相对应的按钮的按下。例如，CPU 111可以进行用于一度改变键区域403中的对应按钮的颜色并将颜色返回到原始颜色的处理或用于显示表达按钮正被按下的动画的处理。
已经以在显示器122上显示软件键盘画面的示例情况为中心描述了上述示例性实施例。然而，例如，即使在如图5D中所示在显示器122上显示除软件键盘画面以外的画面的情况下，CPU 111仍基于所通知的坐标识别所操作的按钮，并且进行与点击的位置相对应的处理。
在步骤S606中的处理完成时，处理返回到步骤S601。在步骤S601中，CPU 111等待下一个事件。
在步骤S602中，如果CPU 111确定由图像处理装置101接收到的事件信息不是指针事件，即，如果CPU 111确定接收到的事件信息是键事件(在步骤S602中为“否”)，则处理进行到步骤S607。然后，CPU 111进行以下处理。
在步骤S607中，CPU 111基于接收到的键事件信息来识别按下的键。更具体地，操作信息接收单元221获取作为键事件通知的字符代码。
在步骤S608中，CPU 111确定是否进入文本输入状态。根据本示例性实施例，文本输入状态是指在图像处理装置101的显示器122上显示如图4中所示的软件键盘画面的状态。软件键盘控制单元250存储关于在显示器122上是否当前显示软件键盘画面的信息。CPU111参照该信息以确定在显示器122上是否当前显示软件键盘画面。RAM 112存储用于表示显示器122上当前显示的画面是否是软件键盘画面的标志。CPU 111参照RAM 112中的该标志。在该标志为开(ON)的情况下，CPU 111确定在显示器122上当前显示软件键盘画面。在该标志为关(OFF)的情况下，CPU 111确定在显示器122上当前显示除软件键盘画面以外的画面。
如果图像处理装置101处于文本输入状态(在步骤S608中为“是”)，则处理进行到步骤S609。在步骤S609中，CPU 111在输入区域402中显示与接收到的字符代码相对应的字符。例如，在显示器122上正在显示图4中所示的软件键盘画面的同时CPU 111接收到字符代码“a”的情况下，CPU 111在输入区域402中附加地显示与接收到的字符代码相对应的字符“a”。另外，例如在CPU 111接收到用于将光标向右移动的右箭头键的字符代码的情况下，CPU 111将输入区域402中的光标向右移动。
在这种情况下，为了使得用户能够识别与接收到的字符代码相对应的按钮(例如，“a”)的按下，CPU 111可以以这样的方式进行动画显示：瞬时改变键区域403中的对应按钮的图像，并且将图像返回到原始图像。与字符代码相对应的按钮的位置被存储在ROM 113和外部存储器123中。当CPU 111改变与接收到的字符代码相对应的按钮的颜色时，能够改变与接收到的字符代码相对应的按钮的颜色。
在步骤S608和步骤S609中，CPU 111确定图像处理装置101是否处于接收文本输入的状态，并且在图像处理装置101正在接受文本输入的同时，输入与接收到的字符代码相对应的字符。以这种方式，当图像处理装置101正在接受文本输入时，用户能够从经由网络102连接的信息处理装置103的键盘158向图像处理装置101输入字符。
在步骤S608中，如果图像处理装置101不处于文本输入状态(在步骤S608中为“否”)，则处理进行到步骤S610。在步骤S610中，CPU 111确定接收到的字符代码是否被登记在硬件键转换表中。CPU 111基于图8中所示的硬件键转换表中的信息，来确定与接收到的字符代码相对应的硬件键121是否被登记在硬件键转换表中。
图8中例示了硬件键转换表的示例。
在步骤S610中，如果由CPU 111接收到的字符代码未被登记在硬件键转换表中(在步骤S610为“否”)，则处理返回到步骤S601。在步骤S601中，CPU 111等待直到图像处理装置101从信息处理装置103接收到事件为止。
在步骤S610中，如果接收到的字符代码被登记在硬件键转换表中(在步骤S610中为“是”)，则处理进行到步骤S611。在步骤S611中，CPU 111将与接收到的字符代码相对应的硬件键121的键代码存储在RAM 112中。例如，如果用户按下信息处理装置103的键盘158上的“s”键，则CPU111基于硬件键转换表来识别与接收到的字符代码“s”相对应的硬件键121。图8中所示的硬件键转换表表示键盘158上的“s”键对应于图像处理装置101的开始键。然后，CPU 111将“开始”键的键代码存储在RAM 112中。
在步骤S612中，CPU 111根据存储在RAM 112中的键代码来操作图像处理装置101。在CPU 111根据存储在RAM 112中的键代码操作图像处理装置101之后，处理返回到步骤S601。在步骤S601中，CPU 111等待从信息处理装置103接收下一个事件。上面已经以如下的情况为中心描述了第一示例性实施例：在将与接收到的字符代码相对应的键代码存储在RAM 112中之后，CPU 111进行与存储的键代码相对应的处理。然而，在步骤S612中，CPU 111不一定需要进行与硬件键121的键代码相对应的处理。例如，如果未设置发送目的地，则用于发送附加到电子邮件的扫描图像数据的发送(SEND)功能可能无法开始作业。在这种情况下，如果图像处理装置101接收到字符代码“s”，则当用户按下与字符代码“s”相对应的硬件键121时，CPU 111不进行用于开始作业的操作。
根据第一示例性实施例，能够在图像处理装置101的显示器122上显示多种类型的画面。
根据第一示例性实施例，图像处理装置101的显示器122显示从信息处理装置103接收到的字符代码，并且显示不进行在(对应于)按下与字符代码相对应的硬件键121的情况下要进行的处理的画面。利用该构造，用户能够在正在显示用于文本输入的画面的同时，通过使用信息处理装置103的硬件键盘158来输入字符。以这种方式，熟悉键盘的用户能够在输入文本时比用鼠标161点击画面上的软件键盘的情况更快地输入字符。
根据第一示例性实施例，CPU 111显示使得能够执行在按下与字符代码相对应的硬件键121的情况下要进行的处理的画面，而不在图像处理装置101上显示字符代码的字符。因此，通过使用信息处理装置103的硬件键盘158，用户能够进行与在按下图像处理装置101的硬件键121的情况下要进行的操作相当的操作。
上面已经以在显示器122上显示具有“字母数字”输入模式的软件键盘的示例情况为中心描述了本示例性实施例。然而，用户能够通过使用软件键盘画面上的输入模式选择按钮406，来选择任何输入模式。
例如，在“符号”输入模式下在显示器122上显示用于输入符号的软件键盘的情况下，CPU 111确定图像处理装置101处于文本输入状态。在用户在这种情况下按下信息处理装置103的键盘158的情况下，由图像处理装置101接收到的字符代码的字符被显示在输入区域402中。因此，在用户在“符号”输入模式下按下键盘158上的“a”键的情况下，CPU 111在输入区域402中显示“a”。以这种方式，用户能够输入字符和符号二者，而不改变显示器159上显示的软件键盘的输入模式。
根据第一示例性实施例，当显示器122上显示的画面是不允许文本输入的画面时，CPU 111将与接收到的字符代码相对应的硬件键121的键代码存储在RAM 112中。然而，CPU111不一定需要将与字符代码相对应的硬件键121的键代码存储在RAM 112中。在进行步骤S610中的处理之后，CPU 111确定是否能够进行在按下与接收到的字符代码相对应的硬件键121的情况下要进行的处理。仅在能够执行在按下硬件键121的情况下要进行的处理的情况下，CPU 111才将与字符代码相对应的硬件键121的键代码存储在RAM 112中。例如，在未设置发送目的地的情况下，用于通过电子邮件发送扫描图像数据的发送功能可能无法开始作业。因此，在图像处理装置101无法开始作业的状态下接收到字符代码“s”的情况下，CPU111不将与在进行S610中的处理之后接收到的字符代码相对应的键代码存储在RAM 112中。
根据第一示例性实施例，图像处理装置101的CPU 111进行图7中所示的处理。然而，示例性实施例不限于用于进行处理的CPU 111包括在图像处理装置101中的情况。例如，能够应用如下的情况：连接到图像处理装置101的计算机控制图像处理装置101，并且该计算机中的CPU进行根据第一示例性实施例的处理。
下面将描述本发明的第二示例性实施例。根据第一示例性实施例，在接收到字符代码之后，图像处理装置101确定当前显示在显示器122上的画面是否是允许文本输入的画面。作为选择，信息处理装置103可以在用户按下键盘158上的键时，确定图像处理装置101是否处于文本输入状态。信息处理装置103存储字符代码与图像处理装置101的硬件键121的键代码之间的关联。在图像处理装置101的显示器122上显示的画面是不允许文本输入的画面的情况下，信息处理装置103将与字符代码相对应的硬件键121的键代码发送到图像处理装置101。以这种方式，信息处理装置103能够在不识别与在图像处理装置101中接收到的字符代码相对应的硬件键121的键代码的情况下进行处理。
图像处理装置101的CPU 111向信息处理装置103通知表示显示器122上显示的画面是否是允许文本输入的画面的显示信息。关于在显示器122上是否当前显示允许文本输入的画面的信息被存储在软件键盘控制单元250中。CPU 111向信息处理装置103通知存储在软件键盘控制单元250中的信息。可以每当显示器122上显示的画面改变时或以预定的时间间隔，进行该信息通知。
图9是例示由信息处理装置103中的CPU 151进行的处理的流程图。用于实现图9中所示的处理的程序被存储在信息处理装置103的ROM153或外部存储器160中。通过CPU 151读取并执行该程序来实现该处理。步骤S501至步骤S504中的处理类似于根据第一示例性实施例的相同步骤编号的处理，并且将省略其重复描述。
在步骤S502中，如果由CPU 151接收到的事件是键事件(在步骤S502中为“否”)，则处理进行到步骤S701。在步骤S701中，CPU 151在接收到的键事件中提取所按下的键的字符代码。
在提取字符代码之后，在步骤S702中，CPU 151确定当前显示在图像处理装置101的显示器122上的画面是否是允许文本输入的画面。CPU 151基于从图像处理装置101通知的上述显示信息，来确定当前显示在图像处理装置101的显示器122上的画面是否处于文本输入状态。
如果当前显示在显示器122上的画面是允许文本输入的画面(在步骤S702中为“是”)，则处理进行到步骤S703。在步骤S703中，CPU 151将所提取的字符代码发送到图像处理装置101。在CPU 151将所提取的字符代码发送到图像处理装置101之后，处理返回到步骤S501。在步骤S501中，CPU 151等待下一个事件的接收。
如果当前显示在显示器122上的画面是不允许文本输入的画面(在步骤S702中为“否”)，则处理进行到步骤S704。在步骤S704中，CPU 151确定在硬件键转换表中是否存在与所提取的字符代码相对应的硬件键121。CPU 151通过使用所提取的字符代码和图8中所示的硬件键转换表来搜索与所提取的字符代码相对应的硬件键121。
如果在硬件键转换表中不存在对应的硬件键121(在步骤S704中为“否”)，则处理返回到步骤S501。在步骤S501中，CPU 151接收下一个事件。
如果在硬件键转换表中存在对应的硬件键121(在步骤S704中为“是”)，则处理进行到步骤S705。在步骤S705中，CPU 151将与所提取的字符代码相对应的硬件键121存储在RAM 152中。在步骤S706中，CPU 151将存储在RAM 152中的键代码发送到图像处理装置101。在CPU151发送键代码之后，处理返回到步骤S501。
接收到字符代码或键代码的图像处理装置101进行图10中所示的处理。通过CPU111将存储在ROM 113或外部存储器123中的程序加载到图像处理装置101的RAM 112中并执行该程序，来实现图10中所示的处理。
在步骤S1001中，CPU 111确定由操作信息接收单元221接收到的代码是否是字符代码。如果CPU 111接收到的代码是字符代码(在步骤S1001中为“是”)，则处理进行到步骤S1002。在步骤S1002中，CPU 111在显示器122上显示接收到的字符代码的字符。然后，处理退出图10中所示的流程图。如果由CPU 111接收到的代码不是字符代码，即，如果由CPU 111接收到的代码是硬件键121的键代码(在步骤S1001中为“否”)，则处理进行到步骤S1003。在步骤S1003中，CPU 111进行与接收到的键代码相对应的处理。然后，处理退出图10中所示的流程图。
根据第二示例性实施例，在图像处理装置101的显示器122上显示除文本输入画面以外的画面的情况下，信息处理装置103将从键盘158接收到的字符代码转换成图像处理装置101的硬件键121的键代码，并且发送该键代码。以这种方式，图像处理装置101能够进行与接收到的字符代码或键代码相对应的处理，而不进行用于将由图像处理装置101接收到的字符代码转换成硬件键121的处理。
其他实施例
上面已经在显示器122上当前显示用于输入字符的软件键盘的状态是文本输入状态的前提下描述了第一示例性实施例和第二示例性实施例。然而，文本输入状态不限于上述状态。
例如，假设用户在图3中所示的显示主题显示栏303和正文显示栏304的画面中触摸输入目标项目的按钮或显示栏。在这种情况下，CPU 111可以显示与当前显示的画面部分交叠的软件键盘。对于通过使用例如图像处理装置101的数字小键盘输入的项目，文本输入状态可以是响应于用户触摸显示栏而在显示栏中显示光标的状态。
虽然上面已经以未配设硬件键盘的图像处理装置101的示例为中心描述了第一示例性实施例和第二示例性实施例，但是本说明书中描述的示例性实施例也能够应用到配设有硬件键盘的图像处理装置。在这种情况下，在如图3中所示的显示主题显示栏303和正文显示栏304的画面中，文本输入状态可以是响应于用户触摸显示栏而在显示栏中显示光标的状态。
上面已经以开始键、复位键、停止键、设置/登记键以及ID键为配设在图像处理装置101上的硬件键的情况为中心描述了第一示例性实施例和第二示例性实施例。上面描述的键可以不是硬件键。例如，可以在显示器122上显示不包括在软件键盘中的上述键。在本说明书中描述的图像处理装置101当前显示软件键盘的情况下，CPU 111显示与接收到的字符代码相对应的字符。本说明书中描述的图像处理装置101当前未显示软件键盘，图像处理装置101进行在选择用于进行不同于与接收到的字符代码相对应的文本输入处理的处理的键的情况下要进行的处理。
根据第一示例性实施例和第二示例性实施例，图像处理装置101和信息处理装置103之间的通信不一定限于RFB协议，可以使用远程桌面协议(Remote Desktop Protocol，RDP)和其他原始协议。
根据第一示例性实施例和第二示例性实施例，信息处理装置103将与所按下的键相对应的字符代码发送到图像处理装置101。然而，信息处理装置103可以将与所按下的键相对应的键代码发送到图像处理装置101。在图像处理装置101的显示器122上显示软件键盘的情况下，图像处理装置101将接收到的键代码转换成字符代码并且显示字符代码。
根据本说明书中描述的示例性实施例，图像处理装置101的显示器122上的文本输入画面使得能够从信息处理装置103的键盘158输入文本，并且除了上述画面以外的预定画面使得能够指示执行在从信息处理装置103的键盘158按下硬件键121的情况下要进行的处理。
还可以通过读出并执行记录在存储介质(也可更完整地称为“非暂时性计算机可读存储介质”)上的计算机可执行指令(例如，一个或更多个程序)以执行上述实施例中的一个或更多个的功能、并且/或者包括用于执行上述实施例中的一个或更多个的功能的一个或更多个电路(例如，专用集成电路(ASIC))的系统或装置的计算机，来实现本发明的实施例，并且，可以利用通过由系统或装置的计算机例如读出并执行来自存储介质的计算机可执行指令以执行上述实施例中的一个或更多个的功能、并且/或者控制一个或更多个电路以执行上述实施例中的一个或更多个的功能的方法，来实现本发明的实施例。计算机可以包括一个或更多个处理器(例如，中央处理单元(CPU)、微处理单元(MPU))，并且可以包括分开的计算机或分开的处理器的网络，以读出并执行计算机可执行指令。计算机可执行指令可以例如从网络或存储介质被提供给计算机。存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)TM)、闪存装置以及存储卡等中的一个或更多个。
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行该程序的方法。
虽然参照示例性实施例对本发明进行了描述。应当对所附权利要求的范围给予最宽的解释，以使其涵盖所有这些变型例以及等同的结构和功能。

Claims (10)

1.一种图像处理装置，其能够经由网络与信息处理装置连接，所述图像处理装置包括：
第一显示单元，其用于显示用于操作图像处理装置的第一画面；
存储单元，其用于存储在图像处理装置上提供的第一硬件键与要从所述信息处理装置发送的信号之间的关联；
提供单元，其用于经由网络向信息处理装置提供显示数据，其中，提供的显示数据是这样的数据：其使得与正在图像处理装置的第一显示单元上显示的第一画面相同的第二画面被显示在信息处理装置的第二显示单元上；
接收单元，其用于接收来自所述信息处理装置的所述信号，其中，在所述信息处理装置的用户按下显示所述第二画面的信息处理装置的硬件键盘上的第二硬件键的情况下，所述信息处理装置发送所述信号；以及
控制单元，其用于在所述图像处理装置的第一显示单元显示用于接受文本输入的软件键盘时所述接收单元接收到来自所述信息处理装置的信号的情况下，在图像处理装置的所述第一显示单元上显示与从信息处理装置接收到的信号相对应的字符，
其中，所述控制单元在所述图像处理装置的第一显示单元没有显示所述软件键盘时所述接收单元接收到来自所述信息处理装置的信号的情况下，控制在所述存储单元中与从信息处理装置接收到的信号相关联的、在图像处理装置上提供的第一硬件键相对应的处理。
2.根据权利要求1所述的图像处理装置，其中，所述存储单元将所述图像处理装置上提供的第一硬件键的键代码与要从信息处理装置发送的信号相关联地存储。
3.根据权利要求1所述的图像处理装置，
其中，所述接收单元还接收在信息处理装置的用户按下连接到所述信息处理装置的鼠标的按钮的情况下而从所述信息处理装置发送的、表示指针位置的坐标信息，并且
其中，所述控制单元进行在选择由接收到的坐标信息所表示的指针位置处的对象的情况下要进行的处理。
4.根据权利要求1所述的图像处理装置，其中，接收到的信号是字符代码和键代码中的至少任一者。
5.根据权利要求1所述的图像处理装置，所述图像处理装置还包括读取单元，所述读取单元用于读取原稿以生成图像数据。
6.根据权利要求1所述的图像处理装置，所述图像处理装置还包括打印单元，所述打印单元用于在片材上打印图像。
7.根据权利要求1所述的图像处理装置，其中，所述图像处理装置上配设的第一硬件键包括开始键、复位键、停止键和清除键中的至少一者。
8.根据权利要求1所述的图像处理装置，其中，所述提供单元通过虚拟网络计算提供显示数据。
9.一种图像处理装置的控制方法，所述图像处理装置能够经由网络与信息处理装置连接，所述控制方法包括：
显示步骤，显示用于操作图像处理装置的第一画面；
存储步骤，存储在图像处理装置上提供的第一硬件键与要从所述信息处理装置发送的信号之间的关联；
提供步骤，经由网络向信息处理装置提供显示数据，其中，提供的显示数据是这样的数据：其使得与正在图像处理装置上显示的第一画面相同的第二画面被显示在信息处理装置上；
接收步骤，接收来自所述信息处理装置的所述信号，其中，在所述信息处理装置的用户按下显示所述第二画面的信息处理装置的硬件键盘上的第二硬件键的情况下，所述信息处理装置发送所述信号；以及
控制步骤，当在所述第一画面上显示用于接受文本输入的软件键盘时接收到来自所述信息处理装置的信号的情况下，显示与从信息处理装置接收到的信号相对应的字符，
其中，当没有显示所述软件键盘时接收到来自所述信息处理装置的信号的情况下，控制与从信息处理装置接收到的信号相关联的、在图像处理装置上提供的第一硬件键相对应的处理。
10.一种非暂时性存储介质，其存储用于执行图像处理装置的控制方法的程序，所述图像处理装置能够经由网络与信息处理装置连接，所述控制方法包括：
显示步骤，显示用于操作图像处理装置的第一画面；
存储步骤，存储在图像处理装置上提供的第一硬件键与要从所述信息处理装置发送的信号之间的关联；
提供步骤，经由网络向信息处理装置提供显示数据，其中，提供的显示数据是这样的数据：其使得与正在图像处理装置上显示的第一画面相同的第二画面被显示在信息处理装置上；
接收步骤，接收来自所述信息处理装置的所述信号，其中，在所述信息处理装置的用户按下显示所述第二画面的信息处理装置的硬件键盘上的第二硬件键的情况下，所述信息处理装置发送所述信号；以及
控制步骤，当在所述第一画面上显示用于接受文本输入的软件键盘时接收到来自所述信息处理装置的信号的情况下，显示与从信息处理装置接收到的信号相对应的字符，
其中，当没有显示所述软件键盘时接收到来自所述信息处理装置的信号的情况下，控制与从信息处理装置接收到的信号相关联的、在图像处理装置上提供的第一硬件键相对应的处理。
CN201710456679.9A 2016-06-24 2017-06-16 图像处理装置及其控制方法以及存储介质 Active CN107545534B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016125589A JP6786272B2 (ja) 2016-06-24 2016-06-24 画像処理装置、及びその制御方法ならびにコンピュータプログラム
JP2016-125589 2016-06-24

Publications (2)

Publication Number Publication Date
CN107545534A CN107545534A (zh) 2018-01-05
CN107545534B true CN107545534B (zh) 2022-04-05

Family

ID=60675508

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710456679.9A Active CN107545534B (zh) 2016-06-24 2017-06-16 图像处理装置及其控制方法以及存储介质

Country Status (3)

Country Link
US (1) US11194469B2 (zh)
JP (1) JP6786272B2 (zh)
CN (1) CN107545534B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110427597A (zh) * 2019-06-28 2019-11-08 苏州浪潮智能科技有限公司 一种实现远程文本粘贴的方法、设备以及存储介质
US10979582B2 (en) * 2019-07-12 2021-04-13 Kyocera Document Solutions, Inc. Extension of remote frame buffer (RFB) protocol
JP2022138660A (ja) 2021-03-10 2022-09-26 キヤノン株式会社 情報処理装置、情報処理の制御方法、並びにコンピュータプログラム
JP2023025428A (ja) * 2021-08-10 2023-02-22 京セラドキュメントソリューションズ株式会社 電子機器及び画像形成装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105659194A (zh) * 2013-09-24 2016-06-08 微软技术许可有限责任公司 用于屏幕上键盘的快速任务

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
JP2004070888A (ja) * 2002-08-09 2004-03-04 Internatl Business Mach Corp <Ibm> 情報処理装置、制御方法、プログラム、及び記録媒体
JP4475634B2 (ja) * 2004-03-26 2010-06-09 キヤノン株式会社 情報処理装置および方法
JP2006053629A (ja) * 2004-08-10 2006-02-23 Toshiba Corp 電子機器、制御方法及び制御プログラム
JP2006146330A (ja) * 2004-11-16 2006-06-08 Sharp Corp 電子機器の表示装置及び画像形成装置の表示装置
JP2007058538A (ja) * 2005-08-24 2007-03-08 Konica Minolta Business Technologies Inc 画像形成装置、画像形成方法及び制御プログラム
JP4835118B2 (ja) * 2005-11-16 2011-12-14 コニカミノルタビジネステクノロジーズ株式会社 画像形成装置の操作情報記録方法及び画像形成装置
US8299943B2 (en) * 2007-05-22 2012-10-30 Tegic Communications, Inc. Multiple predictions in a reduced keyboard disambiguating system
JP2009259153A (ja) * 2008-04-21 2009-11-05 Canon Inc 情報処理装置及びその制御方法、並びに制御プログラム
US8161378B2 (en) * 2009-08-13 2012-04-17 Lesly Verdier Word processing style selector system using 2D matrix
WO2012125988A2 (en) * 2011-03-17 2012-09-20 Laubach Kevin Input device enhanced interface
JP5858641B2 (ja) * 2011-05-10 2016-02-10 キヤノン株式会社 情報処理装置、情報処理装置と外部装置とを含むシステム、システムの制御方法、及びプログラム
US9652448B2 (en) * 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US9223497B2 (en) * 2012-03-16 2015-12-29 Blackberry Limited In-context word prediction and word correction
US10515363B2 (en) * 2012-06-12 2019-12-24 Square, Inc. Software PIN entry
US8762876B2 (en) * 2012-06-21 2014-06-24 Google Inc. Secure data entry via a virtual keyboard
GB201212878D0 (en) * 2012-07-20 2012-09-05 Pike Justin Authentication method and system
JP5522755B2 (ja) * 2012-09-14 2014-06-18 Ｎｅｃシステムテクノロジー株式会社 入力表示制御装置、シンクライアントシステム、入力表示制御方法およびプログラム
JP6094763B2 (ja) * 2014-09-05 2017-03-15 コニカミノルタ株式会社 画像形成装置遠隔操作システム、画像形成装置および遠隔操作方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105659194A (zh) * 2013-09-24 2016-06-08 微软技术许可有限责任公司 用于屏幕上键盘的快速任务

Also Published As

Publication number Publication date
JP6786272B2 (ja) 2020-11-18
US20170371537A1 (en) 2017-12-28
US11194469B2 (en) 2021-12-07
JP2017228214A (ja) 2017-12-28
CN107545534A (zh) 2018-01-05

Similar Documents

Publication Publication Date Title
US7899246B2 (en) Image display device, image display method, and computer product
CN107545534B (zh) 图像处理装置及其控制方法以及存储介质
US10705728B2 (en) Information processing apparatus, method and program for controlling the same, and storage medium
US10250774B2 (en) Content transmitting method and apparatus therefor
JP2010055207A (ja) 文字入力装置、文字入力方法、プログラム、記憶媒体
JP7434001B2 (ja) 情報処理装置、プログラム、情報処理方法
US10656831B2 (en) Display input device and method for controlling display input device
JP6477585B2 (ja) 画像処理装置及び画像処理システム
JP6053291B2 (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP2014071514A (ja) 画像処理装置、画像処理方法及びプログラム
JP6366262B2 (ja) 情報処理装置、及び情報処理装置の制御方法、並びにプログラム
US8982397B2 (en) Image processing device, non-transitory computer readable recording medium and operational event determining method
JP2017200119A5 (zh)
JP5768841B2 (ja) 画像形成システム、画像形成装置、遠隔操作装置およびプログラム
JP2019120997A (ja) 情報処理装置、画像形成装置およびプログラム
US20090002735A1 (en) Printing control apparatus and printing system
JP2023115017A (ja) 情報通信機器及び情報通信機器の制御プログラム
JP2017151563A (ja) 情報処理装置およびその制御方法、並びにプログラム
JP2014108533A (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP7483384B2 (ja) 文書を電子化する画像処理システム、その制御方法及びプログラム
JP2013077231A (ja) 文書データの表示方法、携帯端末の表示装置
JP7175630B2 (ja) 画像形成装置、制御方法及びプログラム
JP2010217402A (ja) 画像形成装置、操作画面表示方法及びプログラム
JP6784953B2 (ja) 情報処理装置およびプログラム
JP2021114237A (ja) 文書を電子化する画像処理システム、その制御方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant