CN106550166B - 远程控制系统、图像处理装置、远程控制方法 - Google Patents

Abstract

本发明公开一种远程控制系统、图像处理装置、远程控制方法。为了使利用远程操作装置的针对图像处理装置的远程操作的响应和针对图像处理装置的操作的响应相同，远程操作装置具备操作通知部，该操作通知部响应于受理到由用户实施的操作，使用第1媒介对用户通知，图像处理装置具备装置侧通知部(63)，该装置侧通知部(63)在不是与远程操作装置确立了通信路径的协作模式的情况下，响应于受理到由用户实施的操作，使用第2媒介对用户通知，装置侧通知部(63)在协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户通知的情况下，响应于受理到由用户实施的操作，使用第1媒介对用户通知。

Description

远程控制系统、图像处理装置、远程控制方法

技术领域

本发明涉及远程控制系统、图像处理装置、远程控制方法以及远程控制程序，特别涉及能够对图像处理装置进行远程操作的远程控制系统、该图像处理装置、由该图像处理装置执行的远程控制方法以及远程操作程序。

背景技术

近年来，已知利用智能手机、平板终端等便携信息装置对复合机(以下称为“MFP”)进行远程操作的技术。能够从便携信息装置连接到MFP，利用便携信息装置对MFP进行远程操作。作为实现该远程操作的技术，已知如下技术：通过在便携信息装置中显示在MFP中显示的操作画面本身，在便携信息装置中将表示在操作画面中由用户指示的位置的位置信息回送给MFP，从而从便携信息装置对MFP进行远程控制。

例如，在日本特开平05-122424号公报中，记载了一种办公设备的远程控制装置，具备：办公设备，具有显示部和输入部；远程控制部件，具有显示部和输入部；以及信息传送路，将至少1台所述办公设备和所述远程控制部件进行连接，其特征在于，所述办公设备具备：第1影像存储单元，将表示该办公设备的状态以及输入单元的位置的显示信息保持为二维图像信息；第1位图显示单元，显示该第1影像存储单元存储的二维图像信息；以及第1控制单元，响应于指示该位图显示单元的显示上的预定位置的输入以及从所述信息传送路输入的远程控制命令，变更办公设备的工作模式，并且，响应于预定的指示，将保持在所述第1影像存储单元中的二维图像信息输出到所述信息传送路，所述远程控制部件具备：第2影像存储单元，输入并存储在所述信息传送路中出现的二维图像信息；第2位图显示单元，显示该第2影像存储单元存储的二维图像信息；以及第2控制单元，响应于指示该第2位图显示单元的显示上的位置的输入，将预定的远程控制命令输出到所述信息传送路。

在使用日本特开平05-122424号公报记载的从与便携信息装置相当的远程控制部件对与MFP相当的办公设备进行远程控制的技术的情况下，针对便携信息装置的操作与针对MFP的操作相同，所以能够通过与对MFP进行直接操作的情况相同的操作，使用便携信息装置对办公设备进行远程操作。但是，在便携信息装置具有的用户界面和MFP具有的用户界面中有差异的情况下，存在发生虽然在便携信息装置和MFP中的某一方中能够实现但在另一方中无法实现的功能的情况。例如，便携信息装置具有产生振动的振动装置，具有响应于受理操作而驱动振动装置并通过振动对用户通知受理了操作的用户界面，但MFP不具有振动装置的情况下，MFP无法通过振动对用户通知受理了操作。另外，存在如下情况：虽然便携信息装置具有的用户界面和MFP具有的用户界面相同，但实现功能的程度在便携信息装置和MFP中不同。例如，在便携信息装置和MFP具有产生声音的扬声器，具有通过响应于受理操作而从扬声器产生的声音对用户通知受理了操作的用户界面的情况下，有时在便携信息装置和MFP各自中发生的声音的大小不同。因此，在使用便携信息装置对MFP进行远程操作的情况和操作MFP的情况中，针对操作的响应不同，所以存在针对同一操作的响应的差异对用户造成不舒服感这样的问题。

发明内容

根据本发明的某一方面，远程控制系统包括图像处理装置和能够对图像处理装置进行远程操作的远程操作装置，其中，远程操作装置具备：远程侧操作受理单元，受理由用户实施的操作；以及远程操作单元，响应于由操作受理单元受理操作，向图像处理装置发送远程操作指令，图像处理装置具备：装置侧操作受理单元，受理由用户实施的操作；处理执行单元，执行与由装置侧操作受理单元受理的操作对应的处理；以及远程控制单元，在与远程操作装置确立了通信路径的协作模式下，依照从远程操作装置接收的远程操作指令，使处理执行单元执行处理，远程操作装置以及图像处理装置中的某一方的第1装置还具备第1通知单元，该第1通知单元响应于受理到由用户实施的操作，使用第1媒介对用户进行通知，远程操作装置以及图像处理装置中的与第1装置不同的第2装置还具备第2通知单元，该第2通知单元在不是与第1装置确立了通信路径的协作模式的情况下，响应于受理到由用户实施的操作，使用第2媒介对用户进行通知，第2通知单元在协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户进行通知的情况下，响应于受理到由用户实施的操作，使用第1媒介对用户进行通知。

根据本发明的另一方面，图像处理装置是能够通过远程操作装置被远程操作的图像处理装置，该图像处理装置具备：装置侧操作受理单元，受理由用户实施的操作；处理执行单元，执行与由装置侧操作受理单元受理的操作对应的处理；协作模式设定单元，设定为与远程操作装置确立了通信路径的协作模式；远程控制单元，在协作模式下，依照从远程操作装置接收的远程操作指令，使处理执行单元执行处理；通知种类取得单元，取得响应于远程操作装置受理操作而对用户通知的第1媒介的种类；以及装置侧通知单元，在未设定为协作模式的情况下，响应于由装置侧操作受理单元受理操作，使用第2媒介对用户进行通知，装置侧通知单元在设定为协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户进行通知的情况下，响应于由装置侧操作受理单元受理到操作，使用第1媒介对用户进行通知。

根据本发明的又一方面，远程控制方法是由能够通过远程操作装置被远程操作的图像处理装置执行的远程控制方法，该远程控制方法包括：装置侧操作受理步骤，受理由用户实施的操作；处理执行单元，执行与在装置侧操作受理步骤中受理的操作对应的处理；协作模式设定步骤，设定为与远程操作装置确立了通信路径的协作模式；远程控制步骤，在协作模式下，依照从远程操作装置接收的远程操作指令，执行处理；通知种类取得步骤，取得响应于远程操作装置受理操作而对用户通知的第1媒介的种类；以及装置侧通知步骤，在未设定为协作模式的情况下，响应于在装置侧操作受理步骤中受理到操作，使用第2媒介对用户进行通知，装置侧通知步骤包括如下步骤：在设定为协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户进行通知的情况下，响应于在装置侧操作受理步骤中受理操作，使用第1媒介对用户进行通知。

附图说明

图1是示出本发明的第1实施方式的1个中的远程控制系统的整体概要的图。

图2是示出MFP的基本结构的概要的框图。

图3是示出便携信息装置的结构的概要的框图。

图4是示出第1实施方式中的便携信息装置具备的CPU的功能的概要的一个例子的框图。

图5是示出第1本实施方式中的MFP具备的CPU的功能的一个例子的框图。

图6是示出通过第2通知方法通知的情况的操作画面的一个例子的第1图。

图7是示出通过第2通知方法通知的情况的操作画面的一个例子的第2图。

图8是示出第1实施方式中的远程操作处理的流程的一个例子的流程图。

图9是示出第1实施方式中的远程控制处理的流程的一个例子的第1流程图。

图10是示出第1实施方式中的远程控制处理的流程的一个例子的第2流程图。

图11是示出第2本实施方式中的MFP具备的CPU的功能的一个例子的框图。

图12是示出第2实施方式中的便携信息装置具备的CPU的功能的概要的一个例子的框图。

图13是示出第2实施方式中的远程操作处理的流程的一个例子的流程图。

图14是示出第2实施方式中的远程控制处理的流程的一个例子的第1流程图。

图15是示出第2实施方式中的远程控制处理的流程的一个例子的第2流程图。

具体实施方式

以下，参照附图，说明本发明的实施方式。在以下的说明中，对同一构件附加了同一符号。它们的名称以及功能也相同。因此，不重复进行关于它们的详细的说明。

<第1实施方式>

图1是示出本发明的第1实施方式的1个中的远程控制系统的整体概要的图。参照图1，远程控制系统1包括作为图像处理装置发挥功能的MFP100、100A、100B、无线站5以及作为能够对MFP100、100A、100B中的任一个进行远程操作的远程操作装置发挥功能的便携信息装置200、200A、200B。MFP(Multi Function Peripheral，多功能外围设备)100、100A、100B以及无线站5与网络3连接。便携信息装置200、200A、200B经由无线站5连接于网络3。

网络3是局域网(LAN)，连接方式可以是有线方式或者是无线方式。另外，网络3不限于LAN，也可以是广域网(WAN)、公共交换电话网(PSTN)、因特网等。

便携信息装置200、200A、200B是智能手机、PDA(Personal Digital Assistants，个人数字助理)等用户便携而使用的计算机。便携信息装置200、200A、200B的硬件结构以及功能相同，所以此处只要不特别提及，就以便携信息装置200为例子进行说明。此处，将便携信息装置200设为智能手机，具备无线LAN功能和通话功能。因此，便携信息装置200能够通过以无线方式与便携电话用基站进行通信来连接到便携电话网，进行通话。

在本实施方式中的远程控制系统1中，便携信息装置200、200A、200B分别对MFP100、100A、100B进行远程操作。在该情况下，便携信息装置200、200A、200B分别作为对MFP100、100A、100B进行远程操作的远程操作装置发挥功能，MFP100、100A、100B分别作为通过便携信息装置200、200A、200B中的某一个被远程操作的远程控制装置发挥功能。在便携信息装置200、200A、200B中，安装有用于对MFP100、100A、100B进行远程操作的远程操作程序。远程操作程序是在MFP100、100A、100B中通用并能够应对于MFP100、100A、100B中的任意一个的应用程序。另一方面，在MFP100中，安装了被便携信息装置200远程操作而执行处理的远程控制程序。此处，以便携信息装置200对MFP100进行远程操作的情况为例子进行说明。

在本实施方式中的远程控制系统1中，有MFP100、100A、100B的结构以及可执行的功能分别不同的情况，但基本结构相同。此处，以MFP100为例子，说明MFP100的基本结构。

图2是示出MFP的基本结构的概要的框图。参照图2，MFP100包括：主电路110；原稿读取部130，用于读取原稿；自动原稿搬送装置120，用于将原稿搬送到原稿读取部130；图像形成部140，用于根据原稿读取部130读取原稿而输出的图像数据，在纸张等上形成图像；供纸部150，用于对图像形成部140供给纸张；后处理部155，对形成了图像的纸张进行处理；以及作为用户界面的操作面板160。

后处理部155执行将通过图像形成部140形成了图像的1个以上的纸张重排而排纸的分类处理、进行打孔加工的打孔处理、打入订书钉的装订处理。

主电路110包括CPU111、通信接口(I/F)部112、ROM113、RAM114、作为大容量存储装置的硬盘驱动器(HDD)115、传真部116、安装CD-ROM(Compact Disk ROM，压缩盘只读存储器)118的外部存储装置117以及扬声器119。CPU111与自动原稿搬送装置120、原稿读取部130、图像形成部140、供纸部150、后处理部155以及操作面板160连接，控制MFP100的整体。

ROM113存储CPU111执行的程序、或者为了执行该程序而所需的数据。RAM114被用作CPU111执行程序时的作业区域。进而，RAM114包括设定值存储区域。设定值存储区域是存储用于执行功能的设定值的区域。另外，RAM114临时地存储从原稿读取部130连续地送来的读取数据(图像数据)。

通信I/F部112是用于将MFP100连接到网络3的接口。CPU111经由通信I/F部112，在与其它MFP100A、100B或者便携信息装置200、200A、200B之间进行通信，发送接收数据。另外，通信I/F部112能够经由网络3与连接到因特网的计算机进行通信。

传真部116与公共交换电话网(PSTN)连接，向PSTN发送传真数据、或者从PSTN接收传真数据。传真部116将接收到的传真数据存储到HDD115、或者输出到图像形成部140。图像形成部140在纸张上打印通过传真部116接收到的传真数据。另外，传真部116将存储在HDD115中的数据变换为传真数据，发送到与PSTN连接的传真装置。

外部存储装置117安装CD-ROM118。CPU111能够经由外部存储装置117访问CD-ROM118。CPU111将记录于安装在外部存储装置117的CD-ROM118中的程序载入到RAM114而执行。此外，作为存储CPU111执行的程序的介质，不限于CD-ROM118，也可以是光盘(MO(Magnetic Optical disc，磁光盘)/MD(Mini Disc，迷你盘)/DVD(Digital VersatileDisc，数字多用途盘))、IC卡、光卡、掩模ROM、EPROM(Erasable Programmable ROM，可擦除可编程只读存储器)、EEPROM(Electrically EPROM，电可擦除可编程只读存储器)等半导体存储器。

另外，CPU111执行的程序不限于在CD-ROM118中记录的程序，也可以将在HDD115中存储的程序载入到RAM114而执行。在该情况下，也可以与网络3连接的其它计算机改写存储在MFP100的HDD115中的程序、或者、追加写入新的程序。进而，也可以由MFP100从与网络3连接的其它计算机下载程序，将该程序存储到HDD115。此处所称的程序不仅包括CPU111可直接执行的程序，而且还包括源程序、被压缩处理的程序、被加密的程序等。

操作面板160设置于MFP100的上表面。操作面板160包括显示部161和操作部163。显示部161是例如液晶显示装置(LCD)，显示针对用户的指示菜单、与取得的图像数据有关的信息等。

操作部163包括触摸面板165和硬键部167。触摸面板165是静电电容方式。此外，触摸面板165不限于静电电容方式，能够使用例如电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式等其它方式。

触摸面板165在检测面中检测由用户指示的位置。在显示部161的上表面或者下表面，与显示部161重叠地设置了触摸面板165的检测面。此处，将触摸面板165的检测面的尺寸和显示部161的显示面的尺寸设为相同。因此，显示面的坐标系和检测面的坐标系是相同的。在触摸面板165中，在检测面中检测用户指示显示部161的显示面的位置，将检测出的位置的坐标输出到CPU111。显示面的坐标系和检测面的坐标系相同，所以能够将触摸面板165输出的坐标置换为显示面的坐标。以下，将由于用户指示显示部161的显示面而触摸面板165在检测面中检测并输出的坐标还称为显示部161的显示面的坐标。

触摸面板165是应对多触摸的触摸面板。因此，在用户针对显示部161的显示面用多个手指一次指示多个部位的情况下，触摸面板165在检测面中检测在显示部161的显示面中由用户指示的多个位置，将分别表示检测出的多个位置的多个坐标输出到CPU111。

硬键部167包括多个硬键。硬键是例如触点开关。触摸面板165检测在显示部161的显示面中由用户指示的位置。在用户操作MFP100的情况下，处于直立的姿势的情况较多，所以显示部161的显示面、触摸面板165的操作面以及硬键部167是朝向上方而配置的。这是为了使得用户能够容易地视觉辨认显示部161的显示面，用户能够容易地用手指指示操作部163。

图3是示出便携信息装置的结构的概要的框图。参照图3，本实施方式中的便携信息装置200包括：CPU201，用于控制便携信息装置200的整体；照相机202；闪存存储器203，非易失性地存储数据；无线通信部204，与通话部205连接；显示部206，显示信息；操作部207，受理用户的操作；无线LANI/F208；振动器209；加速度传感器210；以及外部存储装置211。

显示部206是液晶显示装置(LCD)、有机ELD等显示装置，显示图像。操作部207具备主键207A和触摸面板207B。触摸面板207B是静电电容方式。此外，触摸面板207B不限于静电电容方式，能够使用例如电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式等其它方式。

触摸面板207B在检测面中检测由用户指示的位置。在显示部206的上表面或者下表面上，与显示部206重叠地设置触摸面板207B的检测面。此处，将触摸面板207B的检测面的尺寸和显示部206的显示面的尺寸设为相同。因此，显示面的坐标系和检测面的坐标系是相同的。触摸面板207B在检测面中检测用户指示显示部206的显示面的位置，将检测出的位置的坐标输出到CPU201。显示面的坐标系和检测面的坐标系相同，所以能够将触摸面板207B输出的坐标置换为显示面的坐标。以下，将由于用户指示显示部206的显示面而触摸面板207B在检测面中检测并输出的坐标还称为显示部206的显示面的坐标。

触摸面板207B是应对多触摸的触摸面板。因此，在用户针对显示部206的显示面用多个手指一次指示多个部位的情况下，触摸面板207B在检测面中检测在显示部206的显示面中由用户指示的多个位置，将分别表示检测出的多个位置的多个坐标输出到CPU201。

照相机202具备透镜以及光电变换元件，使由透镜聚光的光在光电变换元件中成像，光电变换元件对接收到的光进行光电变换并将图像数据输出到CPU201。光电变换元件是CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)传感器、CCD(Charge Coupled Device，电荷耦合元件)传感器等。

无线通信部204与连接于电话通信网的便携电话用基站进行无线通信。无线通信部204能够将便携信息装置200连接到电话通信网，进行使用了通话部205的通话。无线通信部204针对对从便携电话用基站接收到的无线信号进行解调而得到的声音信号进行解码并输出到通话部205。另外，无线通信部204对从通话部205输入的声音进行编码，发送到便携电话用基站。通话部205具备麦克风以及扬声器，从扬声器输出从无线通信部204输入的声音，将从麦克风输入的声音输出到无线通信部204。进而，无线通信部204被CPU201控制，将便携信息装置200连接到电子邮件服务器，发送接收电子邮件。

无线LANI/F208是用于与无线站5进行通信并将便携信息装置200连接到网络3的接口。通过在便携信息装置200中预先登记MFP100、100A、100B各自的IP(InternetProtocol，网际协议)地址，从而便携信息装置200能够与MFP100、100A、100B进行通信，能够进行数据的发送接收。此外，在本实施方式中，以便携信息装置200使用无线LANI/F208来与MFP100、100A、100B进行通信的情况为例子进行说明，但也可以使用其它通信方法进行通信。具体而言，在便携信息装置200、MFP100、100A、100B搭载例如Bluetooth(注册商标)等近距离无线装置的情况下，便携信息装置200也可以一对一地与MFP100、100A、100B中的任一个进行通信。

闪存存储器203存储CPU201执行的程序或者为了执行该程序而所需的数据。CPU201将在闪存存储器203中记录的程序载入到CPU201具备的RAM而执行。

振动器209被CPU201控制，产生振动。振动器209安装于便携信息装置200的框体，具备马达和在与其重心不同的位置处安装于马达的轴的重锤。振动器209通过马达旋转而重锤旋转并振动。振动器209的振动传递到便携信息装置200的框体，使便携信息装置200的整体振动。振动器209通过马达的转速来决定振动的频率。

加速度传感器210是测定X轴、Y轴以及Z轴这3个方向的加速度的3轴加速度传感器。加速度传感器210将检测到的加速度输出到CPU201。

外部存储装置211装卸自如于便携信息装置200，能够安装存储了远程操作程序的CD-ROM211A。CPU201能够经由外部存储装置211访问CD-ROM211A。CPU201能够将安装在外部存储装置211中的CD-ROM211A中所记录的远程操作程序载入到CPU201具备的RAM而执行。

此外，作为CPU201执行的程序，说明了在闪存存储器203或者CD-ROM211A中记录的程序，但也可以是与网络3连接的其它计算机改写存储在闪存存储器203中的程序而得到的程序、或者、追加写入的新的程序。进而，也可以是便携信息装置200从与网络3连接的其它计算机下载的程序。此处所称的程序不仅包括CPU201可直接执行的程序，而且还包括源程序、被压缩处理的程序、被加密的程序等。

此外，作为存储CPU201执行的程序的介质，不限于CD-ROM211A，也可以是光盘(MO/MD/DVD)、IC卡、光卡、掩模ROM、EPROM、EEPROM等半导体存储器。

图4是示出第1实施方式中的便携信息装置具备的CPU的功能的概要的一个例子的框图。图4所示的功能是由便携信息装置200具备的CPU201执行在闪存存储器203或者CD-ROM211A中存储的远程操作程序而在CPU201中形成的功能。参照图4，CPU201包括远程操作部251、远程侧显示控制部253、远程侧操作受理部255以及操作通知部257。

远程操作部251在与成为远程操作的对象的远程控制装置之间确立通信路径。具体而言，如果用户操作操作部207而将MFP100、100A、100B中的任一个指示为成为远程操作的对象的远程控制装置，则远程操作部251控制无线LANI/F208，向远程控制装置发送连接请求，确立与远程控制装置之间的通信路径。此处，以用户对远程控制装置指示了MFP100的情况为例子进行说明。在该情况下，远程操作部251在与MFP100之间确立通信路径。

远程操作部251控制无线LANI/F208，接收MFP100发送的图像，将从MFP100接收到的图像输出到远程侧显示控制部253。远程侧显示控制部253控制显示部206，使从远程操作部251输入的图像显示于显示部206，并且将该图像输出到远程侧操作受理部255。MFP100发送的图像是操作画面的图像。

远程侧操作受理部255从远程侧显示控制部253被输入图像，从触摸面板207B被输入坐标。远程侧操作受理部255响应于从触摸面板207B被输入坐标，确定与该坐标对应的从远程侧显示控制部253输入的图像中的位置，将表示图像中的位置的坐标输出到远程操作部251，并且向操作通知部257输出通知指示。

远程操作部251响应于从远程侧操作受理部255被输入坐标，控制无线LANI/F208，向MFP100发送从远程侧操作受理部255输入的坐标。

操作通知部257响应于从远程侧操作受理部255被输入通知指示，对用户通知受理到了操作。操作通知部257能够通过多个通知方法对用户通知受理到了操作。多个通知方法通过媒介被区分。此处，操作通知部257能够通过以振动为媒介的通知方法、以声音为媒介的通知方法以及以图像为媒介的通知方法中的任意一个方法，对用户通知受理到了操作。另外，操作通知部257能够使通知的程度不同。从预先决定的程度的范围中，预先决定了用于通知的程度。操作通知部257在能够通知的程度的范围内按照预先决定的程度进行通知。

操作通知部257默认地决定以振动为媒介的通知方法、以声音为媒介的通知方法、以图像为媒介的通知方法中的任意通知方法。操作通知部257在默认地决定了以振动为媒介的通知方法的情况下，控制振动器209，将振动器209以能够使振动器209振动的频率的范围内的预先决定的频率进行驱动。由此，振动器209以预先决定的频率振动，从而对用户通知受理到了操作。

操作通知部257在默认地决定了以声音为媒介的通知方法的情况下，控制通话部205具备的扬声器，使其以扬声器能够输出的声音的大小的范围内的预先决定的大小产生声音。由此，从扬声器产生预先决定的大小的声音，从而对用户通知受理到了操作。

操作通知部257在默认地决定了以图像为媒介的通知方法的情况下，在显示部206的显示面中，在用从触摸面板207B输入的坐标确定的位置，将预先决定的图像以大小的范围内的预先决定的大小重叠显示于在显示部206中显示的图像。由此，在显示部206的由用户指示的位置以预先决定的大小显示预先决定的图像，从而对用户通知受理到了操作。

远程操作部251包括通知信息发送部261。当在与作为远程控制装置的MFP100之间确立通信路径时，通知信息发送部261向MFP100发送通知信息。通知信息包括操作通知部257在通知中使用的媒介的种类和程度的范围以及程度。操作通知部257在默认地决定了以振动为媒介的通知方法的情况下，发送如下通知信息，在该通知信息中，将媒介的种类设为“振动”，将程度的范围设为操作通知部257能够使振动器209振动的频率的范围，将程度设为为了使振动器209振动而预先决定的频率。操作通知部257在默认地决定了以声音为媒介的通知方法的情况下，发送如下通知信息，在该通知信息中，将媒介的种类设为“声音”，将程度的范围设为通话部205具备的扬声器能够输出的声音的大小的范围，将程度设为为了从扬声器输出声音而预先决定的大小。操作通知部257在默认地决定了以图像为媒介的通知方法的情况下，发送如下通知信息，在该通知信息中，将媒介的种类设为“图像”，将程度的范围设为为了显示图像而预先决定的尺寸的范围，将程度设为为了显示图像而预先决定的大小。

图5是示出第1本实施方式中的MFP具备的CPU的功能的一个例子的框图。图5所示的功能是由MFP100具备的CPU111执行在ROM113、HDD115、CD-ROM118中存储的控制程序而在CPU111中形成的功能。

参照图5，CPU111包括协作模式设定部51、操作权限切换部53、远程控制部55、装置侧显示控制部57、装置侧操作受理部59、处理执行部61、装置侧通知部63以及通知信息取得部65。

协作模式设定部51将MFP100设定为协作模式。协作模式设定部51控制通信I/F部112，响应于来自远程操作装置的请求，在与远程操作装置之间确立通信路径。在与远程操作装置之间确立通信路径时，协作模式设定部51设定为协作模式。协作模式设定部51在与远程操作装置之间的通信路径被确立的期间，维持协作模式，响应于与远程操作装置之间的通信路径被切断，解除协作模式。在设定为协作模式时，协作模式设定部51将用于识别在与远程操作装置之间确立的通信路径的路径识别信息输出到远程控制部55以及通知信息取得部65。另外，协作模式设定部51在设定为协作模式的期间，向操作权限切换部53输出表示是协作模式的协作信号。

此处，将便携信息装置200设为MFP100的远程操作装置，所以当通信I/F部112从便携信息装置200接收到连接请求时，协作模式设定部51确立与便携信息装置200之间的通信路径，并设定为协作模式。

操作权限切换部53根据从协作模式设定部51输入的协作信号，检测出被设定为协作模式。操作权限切换部53在设定为协作模式的期间，将具有操作权限的装置切换到触摸面板165和作为远程操作装置的便携信息装置200中的某一个。操作权限切换部53在开始了协作模式的阶段、换言之从协作模式设定部51最初输入了协作信号的阶段中，将操作权限切换到便携信息装置200。操作权限切换部53在将操作权限切换到远程操作装置的状态下，响应于由用户指示操作面板160的硬键部167具有的多个硬键中的预先决定的切换键，将操作权限切换到触摸面板165。另外，操作权限切换部53在将操作权限切换到触摸面板165的状态下，响应于由用户指示操作面板160的硬键部167具有的切换键，将操作权限切换到远程操作装置。操作权限切换部53将表示将操作权限切换到远程操作装置以及触摸面板165中的哪一个的切换信号输出到装置侧操作受理部59、装置侧显示控制部57以及装置侧通知部63。在将操作权限切换到远程操作装置的情况下，切换信号表示远程操作装置有操作权限，在将操作权限切换到触摸面板165的情况下，切换信号表示触摸面板165有操作权限。此外，在此设为通过由用户指示切换键而切换操作权限，但也可以使用其它方法来切换操作权限。例如，也可以由作为远程操作装置的便携信息装置200决定切换操作权限的定时。另外，操作权限切换部53在便携信息装置200执行预定的应用程序的情况下，也可以对触摸面板165以及便携信息装置200这双方分配操作权限。

装置侧操作受理部59对装置侧显示控制部57指示用于受理用户的操作的操作画面的显示，受理用户依照操作画面对操作部163输入的操作。装置侧操作受理部59响应于受理由用户实施的操作，向装置侧通知部63输出通知指示。具体而言，装置侧操作受理部59将用于识别操作画面的操作画面识别信息输出到装置侧显示控制部57。装置侧操作受理部59在初始阶段中，向装置侧显示控制部57输出预先决定的操作画面的画面识别信息。初始阶段例如是对MFP100接通了电源时或者从电力消耗少的睡眠状态恢复了时等。

存在装置侧显示控制部57从操作权限切换部53被输入切换信号的情况。装置侧显示控制部57在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入画面识别信息，从HDD115读出用画面识别信息确定的操作画面的图像，将读出的操作画面的图像显示于显示部161。

装置侧显示控制部57在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入画面识别信息，从HDD115读出用画面识别信息确定的操作画面的图像，将从HDD115读出的操作画面的图像输出到远程控制部55。另外，装置侧显示控制部57在被输入表示远程操作装置有操作权限的切换信号的情况下，在显示部161中显示表示是远程操作中的图像。由此，在操作权限被切换到触摸面板165的情况下，在显示部161中显示操作画面的图像，在操作权限被切换到远程操作装置的情况下，在显示部161中显示表示是远程操作中的图像，所以用户通过观察在显示部161中显示的图像，能够获知能够操作触摸面板165和远程操作装置中的哪一个。

装置侧操作受理部59在未从操作权限切换部53输入切换信号的情况或者从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，控制触摸面板165。装置侧操作受理部59在向装置侧显示控制部57输出了画面识别信息之后，响应于从触摸面板165被输入坐标，根据从触摸面板165输入的坐标，决定由用户实施的操作。装置侧操作受理部59在决定由用户实施的操作的情况下，向装置侧通知部63输出通知指示。

装置侧操作受理部59根据从触摸面板165输入的坐标，确定在操作画面中由用户指示的位置。具体而言，将在显示部161中显示的操作画面的图像中通过从触摸面板165输入的坐标确定的位置，确定为由用户指示的操作画面中的位置。装置侧操作受理部59决定与在操作画面中确定的位置对应的操作。例如，在操作画面包括被分配了设定设定值的操作的设定按钮的情况下，如果在操作画面中由用户指示的位置是该设定按钮的范围内，则确定设定设定值的操作，将设定设定值的指令输出到处理执行部61。在操作画面包括被分配了指示处理的执行的操作的执行指示按钮的情况下，如果在操作画面中由用户指示的位置是该执行指示按钮的范围内，则确定执行指示操作，将执行通过按钮确定的种类的处理的指令输出到处理执行部61。另外，装置侧操作受理部59在操作画面包括被分配了向其它操作画面切换显示的操作的转变按钮的情况下，如果在操作画面中由用户指示的位置是该转变按钮的范围内，则确定转变画面的操作，将与转变按钮关联起来的画面识别信息输出到装置侧显示控制部57。

另外，在便携信息装置200执行预定的应用程序的情况下，存在便携信息装置200回送文字的数据的情况。远程控制部55响应于通信I/F部112从便携信息装置200接收文字的数据，将接收到的文字的数据输出到装置侧操作受理部59。装置侧操作受理部59在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从远程控制部55被输入文字的数据，向处理执行部61输出在与在操作画面中用在该时间点通过触摸面板165指示的位置决定的区域对应的设定项目中将文字的数据设定为设定值的指令。

处理执行部61控制通信I/F部112、传真部116、HDD115、外部存储装置117、自动原稿搬送装置120、原稿读取部130、图像形成部140、供纸部150以及后处理部155，执行处理。处理执行部61响应于从装置侧操作受理部59被输入设定设定值的指令，执行设定设定值的处理。另外，处理执行部61响应于装置侧操作受理部59被输入执行处理的指令，执行用该指令确定的种类的处理。处理执行部61执行的处理的一个例子是扫描处理、复印处理、打印处理以及传真发送接收处理等。扫描处理是将由原稿读取部130读取出的原稿的图像输出到HDD115、外部存储装置117以及通信I/F部112的至少一个的处理。复印处理是使图像形成部140将由原稿读取部130读取出的原稿的图像形成在从供纸部150供给的纸张上的处理。打印处理是使图像形成部140将经由通信I/F部112从与网络连接的计算机接收的打印数据的图像、在HDD115或者外部存储装置117中存储的数据的图像形成在从供纸部150供给的纸张上的处理。传真发送处理是使传真部116发送传真数据的图像的处理。传真接收处理是将从外部接收的传真数据的图像输出到图像形成部140、HDD115、外部存储装置117以及通信I/F部112的至少一个的处理。

远程控制部55从装置侧显示控制部57被输入操作画面的图像。远程控制部55在从协作模式设定部51被输入路径识别信息的情况下，控制通信I/F部112，将从装置侧显示控制部57输入的操作画面的图像，通过用路径识别信息确定的通信路径，发送到便携信息装置200。另外，远程控制部55在用从协作模式设定部51输入的路径识别信息确定的通信路径被确立的期间，每当从装置侧显示控制部57被输入操作画面的图像时，将操作画面的图像发送到便携信息装置200。

存在作为接收操作画面的图像的远程操作装置的便携信息装置200如上所述回送表示所发送的操作画面的图像中的位置的坐标的情况。远程控制部55响应于通信I/F部112从便携信息装置200接收坐标，将接收到的坐标输出到装置侧操作受理部59。

装置侧操作受理部59在从操作权限切换部53被输入表示远程操作装置有操作权限的切换信号的情况下，不控制触摸面板165，响应于从远程控制部55被输入坐标，与从触摸面板165被输入坐标的情况同样地，根据从远程控制部55输入的坐标，决定由用户实施的操作。装置侧操作受理部59根据从远程控制部55输入的坐标，确定在操作画面中由用户指示的位置。具体而言，将在操作画面的图像中通过从远程控制部55输入的坐标确定的位置确定为由用户指示的操作画面中的位置，决定与在操作画面中确定的位置对应的操作。装置侧操作受理部59在从操作权限切换部53被输入表示远程操作装置有操作权限的切换信号的情况下，即使在决定由用户实施的操作的情况下，也不将通知指示输出到装置侧通知部63。

通知信息取得部65在从协作模式设定部51被输入路径识别信息的情况下，控制通信I/F部112，经由用路径识别信息确定的通信路径，与作为远程操作装置的便携信息装置200进行通信，从便携信息装置200取得通知信息。通知信息取得部65将取得的通知信息输出到装置侧通知部63。

装置侧通知部63能够通过多个通知方法，对用户通知受理到了操作。此处，装置侧通知部63能够通过第1通知方法以及第2通知方法这2个通知方法，对用户通知受理到了操作。通知方法是通过在通知中使用的媒介决定的。在第1通知方法中，以声音为媒介，在第2通知方法中，以图像为媒介。另外，装置侧通知部63能够使通知的程度不同。从预先决定的程度的范围中，预先决定了用于通知的程度。装置侧通知部63在能够通知的程度的范围内按照预先决定的程度进行通知。

存在装置侧通知部63从操作权限切换部53被输入切换信号的情况。装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，按照默认地决定的通知方法以及程度，对用户通知受理到了操作。

另外，装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，根据从通知信息取得部65输入的通知信息，决定通知方法以及程度。通知信息包括媒介的种类和程度的范围以及程度。

装置侧通知部63比较通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类，如果两者相同，则决定默认地决定的通知方法。装置侧通知部63在决定默认地决定的通知方法的情况下，比较通知信息中包含的程度和默认地决定的程度，如果两者相同，则决定默认地决定的程度，但如果两者不同，则根据通知信息中包含的范围以及程度，决定用于通过默认地决定的通知方法通知的程度。

装置侧通知部63在通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类不同的情况下，如果能够通过通知信息中包含的媒介的种类的通知方法进行通知，则决定为通知信息中包含的媒介的种类的通知方法。装置侧通知部63在决定为通知信息中包含的媒介的种类的通知方法的情况下，根据通知信息中包含的范围以及程度，决定用于通过通知信息中包含的媒介的种类的通知方法通知的程度。

装置侧通知部63在通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类不同的情况下，如果不能通过通知信息中包含的媒介的种类的通知方法进行通知，则决定为能够通知的通知方法中的任一个。另外，装置侧通知部63根据通知信息中包含的程度的范围和程度，决定通过所决定的通知方法进行通知的程度。计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值，针对通过所决定的通知方法进行通知的程度的范围，决定成为与所计算出的比值相同的比值的程度。

装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，使用通过所决定的通知方法决定的媒介，按照所决定的程度进行通知。装置侧通知部63在从操作权限切换部53被输入表示远程操作装置有操作权限的切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不通知。

以下，关于装置侧通知部63的动作，分情况说明从作为远程操作装置的便携信息装置200取得的通信信息。

<在便携信息装置中以振动为媒介的通知方法是默认的情况>

在该情况下，便携信息装置200响应于触摸面板207B检测到由用户指示的位置，使振动器209以预先决定的频率振动。因此，通知信息取得部65从便携信息装置200取得的通知信息是，媒介的种类是“振动”、程度的范围是频率的范围、程度是频率。

(1)在装置侧通知部63中未默认地决定通知方法的情况。

装置侧通知部63未决定通知方法，所以在未从操作权限切换部53输入切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不对用户通知受理到了操作。

通知信息取得部65从便携信息装置200取得的通知信息是，媒介的种类是“振动”、程度的范围是频率的范围、程度是频率。装置侧通知部63无法通过利用作为通知信息中包含的媒介的种类的“振动”的通知方法进行通知。因此，装置侧通知部63决定第1通知方法和第2通知方法中的某一个。关于决定第1通知方法和第2通知方法中的哪一个，既可以任意地选择，也可以预先决定。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的频率相对通知信息中包含的频率的范围的比值设为60％。

(1-1)决定第1通知方法的情况

在第1通知方法中，将声音设为媒介，将程度设为声音的大小。装置侧通知部63设定为以能够在扬声器119中产生的声音的大小的范围的60％的大小产生声音。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以所决定的程度的大小输出声音。因此，如果在便携信息装置200中用户指示触摸面板207B，则通过便携信息装置200，振动器209振动，通过振动，对用户通知受理到了操作，相对于此，如果将操作权限切换到MFP100，指示触摸面板165，则通过声音，以听觉方式对用户通知受理到了操作。另外，对用户通知的声音的大小是相对MFP100能够输出的声音的大小的范围的比值与便携信息装置200中的振动的频率相对能够在便携信息装置200中振动的频率的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度成比例的程度的大小的声音进行通知。

装置侧通知部63在从操作权限切换部53被输入表示便携信息装置200有操作权限的切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不控制扬声器119。

(1-2)决定第2通知方法的情况

在第2通知方法中，将图像设为媒介，将程度设为图像的大小。装置侧通知部63设定为以在显示部161中显示的图像的大小的范围的60％的大小显示图像。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将预先决定的图像以设定的大小重叠显示于在显示部161中显示的图像。因此，如果在便携信息装置200中用户指示触摸面板207B，则通过便携信息装置200，振动器209振动，利用振动，对用户通知受理到了操作，相对于此，如果将操作权限切换到MFP100，指示触摸面板165，则通过显示图像，以视觉方式对用户通知受理到了操作。此处的图像优选为是联想到振动的图像。例如，优选作成音符的图像、或者、波纹扩大的动画。另外，对用户通知的图像的大小是相对MFP100能够输出的图像的大小的范围的比值与便携信息装置200中的振动的频率相对能够在便携信息装置200中振动的频率的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度成比例的程度的大小的图像进行通知。

装置侧通知部63在从操作权限切换部53被输入表示便携信息装置200有操作权限的切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不通知。

(2)在装置侧通知部63中默认地决定了第1通知方法的情况

装置侧通知部63由于决定了第1通知方法，所以在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其输出默认地决定的大小的声音。

通知信息中包含的媒介的种类和默认地决定的第1通知方法的媒介的种类不同。另外，装置侧通知部63无法通过利用作为通知信息中包含的媒介的种类的“振动”的通知方法进行通知。因此，装置侧通知部63决定第1通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的频率相对通知信息中包含的频率的范围的比值设为60％。装置侧通知部63设定为以能够在扬声器119中产生的声音的大小的范围的60％的大小产生声音。

装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以所决定的程度的大小输出声音。因此，如果在便携信息装置200中用户指示触摸面板207B，则通过便携信息装置200，振动器209振动，利用振动，对用户通知受理到了操作，相对于此，如果将操作权限切换到MFP100，指示触摸面板165，则通过声音，以听觉方式对用户通知受理到了操作。此处的声音优选为是联想到振动的声音。例如，优选设为对在振动器209振动时产生的声音进行模拟的声音。另外，对用户通知的声音的大小是相对MFP100能够输出的声音的大小的范围的比值与便携信息装置200中的振动的频率相对能够在便携信息装置200中振动的频率的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度成比例的程度的大小的声音进行通知。

装置侧通知部63在从操作权限切换部53被输入表示便携信息装置200有操作权限的切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不控制扬声器119。

(3)在装置侧通知部63中默认地决定了第2通知方法的情况

装置侧通知部63由于决定了第2通知方法，所以在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将默认地决定的图像以默认地决定的大小重叠显示于在显示部161中显示的图像。

通知信息中包含的媒介的种类和默认地决定的第2通知方法的媒介的种类不同。另外，装置侧通知部63无法通过利用作为通知信息中包含的媒介的种类的“振动”的通知方法进行通知。因此，装置侧通知部63决定第2通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的频率相对通知信息中包含的频率的范围的比值设为60％。装置侧通知部63设定为以在显示部161中显示的图像的大小的范围的60％的大小显示图像。

装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将默认地决定的图像以默认地决定的大小重叠显示于在显示部161中显示的图像。此处的图像优选为是联想到振动的图像。例如，优选作成音符的图像、或者、波纹扩大的动画。另外，对用户通知的图像的大小是相对MFP100能够输出的图像的大小的范围的比值与便携信息装置200中的振动的频率相对能够在便携信息装置200中振动的频率的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度成比例的程度的大小的图像进行通知。

装置侧通知部63在从操作权限切换部53被输入表示便携信息装置200有操作权限的切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不通知。

<在便携信息装置中以声音为媒介的通知方法是默认的情况>

在该情况下，便携信息装置200响应于触摸面板207B检测到由用户指示的位置，产生预定的大小的声音。因此，通知信息取得部65从便携信息装置200取得的通知信息是，媒介的种类是“声音”、程度的范围是声音的大小的范围、程度是声音的大小。

(1)在装置侧通知部63中未默认地决定通知方法的情况。

装置侧通知部63能够通过利用作为通知信息中包含的媒介的种类的“声音”的第1通知方法进行通知。因此，装置侧通知部63决定第1通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的频率相对通知信息中包含的频率的范围的比值设为60％。装置侧通知部63设定为以能够在扬声器119中产生的声音的大小的范围的60％的大小产生声音。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不对用户通知受理到了操作。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以决定的程度的大小输出声音。

(2)在装置侧通知部63中默认地决定了第1通知方法的情况

通知信息中包含的媒介的种类和默认地决定的第1通知方法的媒介的种类相同。因此，装置侧通知部63决定第1通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的频率相对通知信息中包含的频率的范围的比值设为60％。装置侧通知部63设定为以能够在扬声器119中产生的声音的大小的范围的60％的大小产生声音。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以默认地决定的大小产生默认地决定的声音。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以决定的程度的大小输出声音。

(3)在装置侧通知部63中默认地决定了第2通知方法的情况

通知信息中包含的媒介的种类和默认地决定的第2通知方法的媒介的种类不同。另外，装置侧通知部63能够通过利用作为通知信息中包含的媒介的种类的“声音”的第1通知方法进行通知。因此，装置侧通知部63决定第1通知方法。装置侧通知部63在决定第1通知方法的情况下，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的声音的大小相对通知信息中包含的声音的大小的范围的比值设为60％。装置侧通知部63设定为以能够在扬声器119中产生的声音的大小的范围的60％的大小产生声音。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将默认地决定的图像以默认地决定的大小重叠显示于在显示部161中显示出的图像。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以所决定的程度的大小输出声音。因此，如果在便携信息装置200中用户指示触摸面板207B，则通过利用便携信息装置200产生预定的大小的声音，对用户通知受理到了操作，相对于此，如果将操作权限切换到MFP100，指示触摸面板165，则通过声音，以听觉方式对用户通知受理到了操作。另外，对用户通知的声音的大小是相对MFP100能够输出的声音的大小的范围的比值与便携信息装置200中的声音的大小相对能够在便携信息装置200中产生的声音的大小的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度相同的程度的大小的声音进行通知。因此，不论在操作便携信息装置200和MFP100中的哪一个的情况下，都能够使响应于受理到操作而发出的声音的大小的程度相同。

<在便携信息装置中以图像为媒介的通知方法是默认的情况>

在该情况下，便携信息装置200响应于触摸面板207B检测到由用户指示的位置，显示预定的图像。因此，通知信息取得部65从便携信息装置200取得的通知信息是，媒介的种类是“图像”、程度的范围是图像的大小的范围、程度是图像的大小。

(1)在装置侧通知部63中未默认地决定通知方法的情况。

装置侧通知部63能够通过利用作为通知信息中包含的媒介的种类的“图像”的第2通知方法进行通知。因此，装置侧通知部63决定第2通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的程度的图像的大小相对通知信息中包含的图像的大小的范围的比值设为60％。装置侧通知部63设定为以在显示部161中显示的图像的大小的范围的60％的大小显示图像。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，即使从装置侧操作受理部59被输入通知指示，也不对用户通知受理到了操作。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，根据从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将预先决定的图像以设定的大小重叠显示于在显示部161中显示的图像。

(2)在装置侧通知部63中默认地决定了第1通知方法的情况

通知信息中包含的媒介的种类和默认地决定的第1通知方法的媒介的种类不同。另外，装置侧通知部63能够通过利用作为通知信息中包含的媒介的种类的“图像”的第2通知方法进行通知。因此，装置侧通知部63决定第2通知方法。装置侧通知部63计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的程度的图像的大小相对通知信息中包含的图像的大小的范围的比值设为60％。装置侧通知部63设定为以在显示部161中显示的图像的大小的范围的60％的大小显示图像。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，控制扬声器119，使其以默认地决定的大小产生默认地决定的声音。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将预先决定的图像以设定的大小重叠显示于在显示部161中显示的图像。

(3)在装置侧通知部63中默认地决定了第2通知方法的情况

通知信息中包含的媒介的种类和默认地决定的第2通知方法的媒介的种类相同。因此，装置侧通知部63决定第2通知方法。

装置侧通知部63在决定第2通知方法的情况下，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的图像的大小相对通知信息中包含的图像的大小的范围的比值设为60％。装置侧通知部63设定为以在显示部161中显示的图像的大小的范围的60％的大小显示图像。

装置侧通知部63在未从操作权限切换部53输入切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将默认地决定的图像以默认地决定的大小重叠显示于在显示部161中显示的图像。装置侧通知部63在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，在显示部161的显示面中，在用从触摸面板165输入的坐标确定的位置，将预先决定的图像以设定的大小重叠显示于在显示部161中显示的图像。

因此，如果在便携信息装置200中用户指示触摸面板207B，则通过利用便携信息装置200将预定的大小的图像重叠显示于操作画面的图像，对用户通知受理到了操作，相对于此，如果将操作权限切换到MFP100，指示触摸面板165，则通过显示图像，以视觉方式对用户通知受理到了操作。另外，对用户通知的图像的大小是相对MFP100能够输出的图像的大小的范围的比值与在便携信息装置200中显示的图像的大小相对能够在便携信息装置200中显示的图像的大小的范围的比值相同的大小，所以能够通过与便携信息装置200中的通知的程度成比例的程度的大小的图像进行通知。

图6是示出通过第2通知方法通知的情况的操作画面的一个例子的第1图。参照图6，在操作画面500上，重叠地显示图像501。图像501是以用户指示的位置为中心包括的圆形的图像。图像501的直径可变。

图7是示出通过第2通知方法通知的情况的操作画面的一个例子的第2图。参照图7，在操作画面500上，重叠地显示图像503A、503B、503C。图像503A、503B、503C是表示波纹的动画。当从显示图像503A起经过预定的时间时，除了图像503A以外还显示图像503B，当进一步经过预定时间时，除了图像503A、503B以外还显示图像503C，当进一步经过预定时间时，图像503A、503B、503C的显示结束。图像503A、503B、503C是同心圆，其中心是由用户指示的位置。通过图像503A、503B、503C中的最大的图像503C的尺寸，决定图像的尺寸。

图8是示出第1实施方式中的远程操作处理的流程的一个例子的流程图。远程操作处理是通过由便携信息装置200、200A、200B分别具备的CPU201执行在闪存存储器203或者CD-ROM211A中存储的远程操作程序而由CPU201执行的处理。此处，以便携信息装置200执行远程操作处理的情况为例子进行说明。

参照图8，CPU201判断是否受理了远程操作指示(步骤S51)。如果操作部207受理了由用户输入的远程操作指示，则受理远程操作指示。直至受理远程操作指示为止为待机状态(在步骤S51中“否”)，如果受理了远程操作指示(在步骤S51中“是”)，则使处理进入到步骤S52。远程操作指示包括确定成为远程操作的对象的远程控制装置的指示。此处，以MFP100被确定为成为远程操作的对象的远程控制装置的情况为例子进行说明。

在步骤S52中，向作为远程操作的对象的MFP100发送连接请求。控制无线LANI/F208，为了确立与MFP100之间的通信路径，发送连接请求。然后，判断通信路径是否确立(步骤S53)。通过与MFP100协商，确立通信路径。直至通信路径确立为止反复执行步骤S52(在步骤S53中“否”)，如果通信路径确立了(在步骤S53中“是”)，则使处理进入到步骤S54。

在步骤S54中，向在步骤S53中确立了通信路径的MFP100发送通知信息。在通知信息中，为了对用户通知受理到了操作，包括默认地决定的媒介的种类、程度的范围以及默认地决定的程度。

在步骤S55中，判断是否接收到图像。判断无线LANI/F208是否经由在步骤S53中确立的通信路径从MFP100接收到图像。如果接收到图像，则使处理进入到步骤S56，否则使处理进入到步骤S57。

在步骤S56中，将接收到的图像显示于显示部206，使处理进入到步骤S57。在步骤S57中，判断是否检测到在图像中由用户指示的位置。如果触摸面板207B输出了坐标，则检测在图像中由用户指示的位置。如果检测到在图像中由用户指示的位置，则使处理进入到步骤S58，否则使处理进入到步骤S60。

在步骤S58中，将触摸面板207B输出的坐标发送到作为远程控制装置的MFP100，使处理进入到步骤S59。具体而言，控制无线LANI/F208，将触摸面板207B输出的坐标经由在步骤S53中确立的通信路径发送到MFP100。在步骤S59中，按照默认地决定的通知方法以及程度，对用户通知受理到了操作，使处理返回到步骤S55。在设定了以振动为媒介的通知方法的情况下，CPU201使振动器209以默认地决定的频率振动，在设定了以声音为媒介的通知方法的情况下，CPU201使得从通话部205具备的扬声器输出默认地决定的大小的声音，在设定了以图像为媒介的通知方法的情况下，CPU201将默认地决定的图像以默认地决定的大小重叠显示于在显示部206中显示的图像。

另一方面，在步骤S60中，判断在步骤S53中确立的通信路径是否被切断。如果通信路径被切断，则结束处理，否则使处理返回到步骤S55。

图9以及图10是示出第1实施方式中的远程控制处理的流程的一个例子的流程图。远程控制处理是通过由MFP100具备的CPU111执行在ROM113、HDD115、CD-ROM118中存储的远程控制程序而由CPU111执行的处理。参照图9以及图10，CPU111判断是否接收到连接请求(步骤S01)。判断通信I/F部112是否从便携信息装置200、200A、200B中的任一个接收到连接请求。直至接收到连接请求为止为待机状态(在步骤S01中“否”)，如果接收到连接请求(在步骤S01中“是”)，则使处理进入到步骤S02。此处，以从便携信息装置200接收连接请求的情况为例子进行说明。

在步骤S02中，在与发送来连接请求的装置、此处为便携信息装置200之间，确立通信路径。在接下来的步骤S03中，设定为协作模式，使处理进入到步骤S04。在步骤S04中，从在步骤S02中确立了通信路径的便携信息装置200取得通知信息。通知信息包括用于通知便携信息装置200受理了操作的媒介的种类、程度的范围以及程度。然后，根据取得的通知信息，决定通知方法和程度(步骤S05)。如果通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类相同，则决定默认地设定的通知方法。在通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类不同的情况下，如果能够通过与通知信息中包含的媒介的种类相同的种类的媒介进行通知，则决定与通知信息中包含的媒介的种类相同的种类的媒介的通知方法。在通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类不同的情况下，如果无法通过与通知信息中包含的媒介的种类相同的种类的媒介进行通知，则决定默认地设定的通知方法。进而，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。然后，决定相对能够通过决定的通知方法的媒介进行通知的范围计算的比值的程度。

在接下来的步骤S06中，对远程操作装置设定操作权限，使处理进入到步骤S07。在步骤S07中，决定默认的操作画面，使处理进入到步骤S08。默认的操作画面是预先决定的操作画面。

在步骤S08中，在显示部161中显示远程操作通知画面的图像，使处理进入到步骤S09。由此，用户通过观察在显示部161中显示的远程操作通知画面的图像，能够获知便携信息装置200有操作权限。能够获知能够操作便携信息装置200来对MFP100进行远程操作，能够获知在期望MFP100的操作的情况下，需要将后述权限切换指示输入到MFP100。

在接下来的步骤S09中，经由在步骤S02中确立的通信路径，向便携信息装置200发送操作画面的图像，使处理进入到步骤S10。在步骤S10中，判断是否受理了切换指示。如果指示了操作部163具备的硬键部167具有的多个硬键中的预先决定的硬键，则受理切换指示。如果受理了切换指示，则使处理进入到步骤S11，否则使处理进入到步骤S16。

在步骤S11中，判断是否对远程操作装置设定了操作权限。如果对远程操作装置设定了操作权限，则使处理进入到步骤S12，否则使处理进入到步骤S14。在步骤S12中，将在该时间点当前设定的操作画面的图像显示于显示部161，使处理进入到步骤S13。在步骤S13中，对触摸面板165设定操作权限，使处理进入到步骤S16。由此，用户通过观察在显示部161中显示的操作画面的图像，能够获知MFP100有操作权限。换言之，能够获知能够操作MFP100，能够获知在期望便携信息装置200的操作的情况下，需要将权限切换指示输入到MFP100。

另一方面，在步骤S14中，对远程操作装置设定操作权限，使处理进入到步骤S15。在步骤S15中，与步骤S08同样地，将远程操作通知画面显示于显示部161，使处理进入到步骤S16。

在步骤S16中，判断是否检测到由用户实施的指示触摸面板165的操作。在触摸面板165输出由用户指示的位置的坐标的情况下，检测到用户的操作。如果检测到用户的操作，则使处理进入到步骤S17，否则使处理进入到步骤S19。在步骤S17中，判断是否对触摸面板165设定了操作权限。如果对触摸面板165设定了操作权限，则使处理进入到步骤S18，否则使处理返回到步骤S10。

在步骤S18中，通过在步骤S05中决定的通知方法，按照在步骤S05中决定的程度进行通知，使处理进入到步骤S22。

另一方面，在步骤S19中，通信I/F部112判断是否经由在步骤S02中确立的通信路径从便携信息装置200接收到坐标。如果从便携信息装置200接收到坐标，则使处理进入到步骤S20，否则使处理返回到步骤S10。在步骤S20中，判断是否对远程操作装置设定了操作权限。如果对远程操作装置设定了操作权限，则使处理进入到步骤S22，否则使处理进入到步骤S21。在步骤S21中，经由在步骤S02中确立的通信路径，向便携信息装置200返回错误，使处理返回到步骤S10。

在步骤S22中，决定由用户实施的操作。在处理从步骤S18进入的情况下，根据触摸面板165输出的坐标，决定操作，在处理从步骤S20进入的情况下，根据从便携信息装置200接收的坐标，决定操作。

在接下来的步骤S23中，判断所决定的操作是否为转变到其它画面的操作。如果所决定的操作是转变到其它操作画面的操作，则使处理进入到步骤S24，否则使处理进入到步骤S25。在步骤S24中，决定其它操作画面，使处理返回到步骤S09。

在步骤S25中，判断所决定的操作是否为指示处理的结束的操作。如果是指示处理的结束的操作，则使处理进入到步骤S26，否则使处理进入到步骤S27。在步骤S26中，切断在步骤S02中在与便携信息装置200之间确立的通信路径，结束处理。

在步骤S27中，判断所决定的操作是否为指示处理的执行的执行指示操作。如果是执行指示操作，则使处理进入到步骤S28，否则使处理返回到步骤S10。在步骤S28中，执行通过执行指示操作确定的种类的处理，使处理返回到步骤S10。

如以上说明，在第1实施方式中的远程控制系统中，MFP100作为通过作为远程操作装置发挥功能的便携信息装置200被远程控制的图像处理装置发挥功能，在与便携信息装置200确立了通信路径的协作模式中，依照从便携信息装置接收的远程操作指令，执行处理，在便携信息装置200响应于受理到由用户实施的操作，使用第1媒介对用户通知的情况下，在不是协作模式的情况下，响应于受理到由用户实施的操作，使用第2媒介对用户通知，在协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户通知的情况下，响应于受理到由用户实施的操作，使用第1媒介对用户通知。因此，在便携信息装置200中对MFP100进行远程操作的情况和操作MFP100的情况下，使用相同的第1媒介来通知针对操作的响应。因此，能够使利用便携信息装置200的针对MFP100的远程操作的响应和针对MFP100的操作的响应相同。

另外，在便携信息装置200使用第1媒介按照默认地决定的程度进行通知的情况下，MFP100在协作模式的情况下，将使用了第1媒介的通知的程度分割为与便携信息装置200能够使用第1媒介来通知的多个等级相同的数量的等级，决定所分割出的多个等级中的与便携信息装置200为了使用第1媒介进行通知而默认地决定的等级对应的等级，响应于受理到了由用户实施的操作，按照所决定的等级，使用第1媒介对用户进行通知。因此，在便携信息装置中对MFP100进行远程操作的情况和操作MFP100的情况下，能够使使用第1媒介来通知的程度相同。

另外，MFP100在协作模式的情况下，在第2媒介与第1媒介不同且无法使用第1媒介对用户通知的情况下，将使用了第2媒介的通知的程度分割为与便携信息装置200能够使用第1媒介来通知的多个等级相同的数量的等级，决定分割的多个等级中的与便携信息装置200为了使用第1媒介进行通知而默认地决定的等级对应的等级，响应于受理到了由用户实施的操作，按照所决定的等级，使用第2媒介对用户进行通知。因此，在便携信息装置200中对MFP100进行远程操作的情况和操作MFP100的情况下，虽然通知的媒介不同，但能够按照相同的程度进行通知。

第1媒介以及第2媒介是声音、图像以及振动中的任一个。因此，便携信息装置200以及MFP100分别能够通过声音、图像以及振动中的某一个，对用户通知受理到了操作。

<第2实施方式>

第2实施方式中的远程控制系统1的整体概要与图1所示的整体概要相同。在第2实施方式中的远程控制系统1中，MFP100以及便携信息装置200的硬件结构与在图2以及图3中分别示出的硬件结构相同。

图11是示出第2本实施方式中的MFP具备的CPU的功能的一个例子的框图。图11所示的功能与图5所示的功能的不同点是装置侧通知部63以及通知信息取得部65被分别变更为装置侧通知部63A以及通知信息发送部65A。其它功能与图5所示的功能相同，所以此处不重复说明。

参照图10，装置侧通知部63A能够通过多个通知方法，对用户通知受理到了操作。具体而言，装置侧通知部63A能够通过第1通知方法以及第2通知方法这2个通知方法，对用户通知受理到了操作。在第1通知方法中，以声音为媒介，在第2通知方法中，以图像为媒介。另外，装置侧通知部63A能够使通知的程度不同，在能够通知的程度的范围内，按照预先决定的程度进行通知。

装置侧通知部63A在未从操作权限切换部53输入切换信号的情况、或者在从操作权限切换部53被输入表示触摸面板165有操作权限的切换信号的情况下，响应于从装置侧操作受理部59被输入通知指示，按照默认地决定的通知方法以及程度，对用户通知受理到了操作。装置侧通知部63A在默认地决定了第1通知方法的情况下，从扬声器119输出默认地决定的大小的声音。装置侧通知部63A在默认地决定了第2通知方法的情况下，将默认地决定的图像以默认地决定的尺寸重叠在显示部161中显示的操作画面的图像而进行显示。

通知信息发送部65A在从协作模式设定部51被输入路径识别信息的情况下，控制通信I/F部112，经由用路径识别信息确定的通信路径，与作为远程操作装置的便携信息装置200进行通信，向便携信息装置200发送通知信息。通知信息包括装置侧通知部63A为了在通知中使用而默认地决定的媒介的种类和程度的范围以及默认地决定的程度。在默认地决定了第1通知方法的情况下，通知信息发送部65A发送如下通知信息，在该通知信息中，将媒介的种类设为“声音”，将程度的范围设为扬声器119能够输出的声音的大小的范围，将程度设为为了从扬声器119输出声音而默认地决定的大小。在默认地决定了第2通知方法的情况下，通知信息发送部65A发送如下通知信息，在该通知信息中，将媒介的种类设为“图像”，将程度的范围设为为了显示默认地决定的图像而决定的尺寸的范围，将程度设为为了显示图像而默认地决定的大小。

图12是示出第2实施方式中的便携信息装置具备的CPU的功能的概要的一个例子的框图。参照图12，与图4所示的功能不同点是远程操作部251不包括通知信息发送部261而包括通知信息取得部261A、操作通知部257被变更为操作通知部257A。其它功能与图4所示的功能相同，所以此处不重复说明。

如果确立了与作为远程控制装置的MFP100之间的通信路径，则通知信息取得部261A控制无线LANI/F208来与MAP100进行通信，从MFP100取得通知信息。通知信息取得部261A将取得的通知信息输出到操作通知部257A。

操作通知部257A响应于从远程侧操作受理部255被输入通知指示，对用户通知受理到了操作。操作通知部257A能够通过多个通知方法，对用户通知受理到了操作。操作通知部257A能够通过以振动为媒介的通知方法、以声音为媒介的通知方法以及以图像为媒介的通知方法中的任一个通知方法，对用户通知受理到了操作。另外，操作通知部257A能够使通知的程度不同。操作通知部257A默认地决定以振动为媒介的通知方法、以声音为媒介的通知方法、以图像为媒介的通知方法中的任一个通知方法。另外，操作通知部257A从针对媒介预先决定的程度的范围中，默认地决定用于通知的程度。

操作通知部257A根据从通知信息取得部261A输入的通知信息，决定通知方法以及程度。通知信息包括媒介的种类和程度的范围以及程度。操作通知部257A比较通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类，如果两者相同，则决定默认地决定的通知方法。操作通知部257A在决定默认地决定的通知方法的情况下，根据通知信息中包含的程度的范围和程度，决定通过所决定的通知方法进行通知的程度。计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值，决定相对通过所决定的通知方法进行通知的程度的范围的比值与所计算出的比值相同的程度。

操作通知部257A在通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类不同的情况下，如果能够通过通知信息中包含的媒介的种类的通知方法进行通知，则决定为通知信息中包含的媒介的种类的通知方法。操作通知部257A在决定为通知信息中包含的媒介的种类的通知方法的情况下，根据通知信息中包含的程度的范围和程度，决定通过所决定的通知方法进行通知的程度。

操作通知部257A在通知信息中包含的媒介的种类和默认地决定的通知方法的媒介的种类不同的情况下，如果不能通过通知信息中包含的媒介的种类的通知方法进行通知，则决定为能够通知的通知方法中的任一个。另外，操作通知部257A根据通知信息中包含的程度的范围和程度，决定通过所决定的通知方法进行通知的程度。计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值，决定相对通过所决定的通知方法进行通知的程度的范围的比值与所计算出的比值相同的程度。操作通知部257A响应于从远程侧操作受理部255被输入通知指示，使用通过所决定的通知方法决定的媒介，按照所决定的程度进行通知。

以下，关于操作通知部257A的动作，分情况说明从作为远程控制装置的MFP100取得的通信信息。

<在MFP中第1通知方法是默认的情况>

在该情况下，MFP100响应于触摸面板165检测到由用户指示的位置，使扬声器119输出预先决定的大小的声音。因此，通知信息取得部261A从MFP100取得的通知信息是，媒介的种类是“声音”、程度的范围是声音的大小范围、程度是声音的大小。

(1)在操作通知部257A中未默认地决定通知方法的情况。

操作通知部257A能够通过将作为通知信息中包含的媒介的种类的“声音”作为媒介的通知方法进行通知。因此，操作通知部257A决定以声音为媒介的通知方法。

(2)在操作通知部257A中默认地决定了以声音为媒介的通知方法的情况

在通知信息中包含的媒介的种类和以默认地决定的声音为媒介的通知方法的媒介的种类相同。因此，装置侧通知部63决定以声音为媒介的通知方法。

(3)在操作通知部257A中默认地决定了以振动或者图像为媒介的通知方法的情况

在通知信息中包含的媒介的种类和默认地决定的振动的通知方法的媒介的种类不同。另外，操作通知部257A能够通过将作为通知信息中包含的媒介的种类的“声音”作为媒介的通知方法进行通知。因此，装置侧通知部63决定以声音为媒介的通知方法。

操作通知部257A在决定以声音为媒介的通知方法的情况下，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的声音的大小相对通知信息中包含的声音的大小的范围的比值设为60％。操作通知部257A设定为以能够在通话部205具备的扬声器中产生的声音的大小的范围的60％的大小产生声音。

操作通知部257A响应于从远程侧操作受理部255被输入通知指示，控制通话部205具备的扬声器，输出所决定的程度的声音。因此，如果将操作权限切换到MFP100，指示触摸面板165，则通过预定的大小的声音，以听觉方式对用户通知受理到了操作，相对于此，如果在便携信息装置200中用户指示触摸面板207B，则通过利用便携信息装置200产生预定的大小的声音而对用户通知受理到了操作。另外，对用户通知的声音的大小是相对便携信息装置200能够输出的声音的大小的范围的比值与MFP100中的声音的大小相对能够在MFP100中产生的声音的大小的范围的比值相同的大小，所以能够通过与MFP100中的通知的程度相同的程度的大小的声音进行通知。因此，不论在操作便携信息装置200和MFP100中的哪一个的情况下，都能够使响应于受理到操作而发出的声音的大小的程度相同。

<在MFP中第2通知方法是默认的情况>

在该情况下，MFP100响应于触摸面板165检测到由用户指示的位置，将默认地决定的图像以默认地决定的尺寸重叠地显示于在显示部161中显示出的操作画面的图像。因此，通知信息取得部261A从MFP100取得的通知信息是，媒介的种类是“图像”、程度的范围是图像的大小范围、程度是图像的大小。

(1)在操作通知部257A中未默认地决定通知方法的情况。

操作通知部257A能够通过将作为通知信息中包含的媒介的种类的“图像”作为媒介的通知方法进行通知。因此，操作通知部257A决定以图像为媒介的通知方法。

(2)在操作通知部257A中默认地决定了以图像为媒介的通知方法的情况

通知信息中包含的媒介的种类和以默认地决定的图像为媒介的通知方法的媒介的种类相同。因此，装置侧通知部63决定以图像为媒介的通知方法。

(3)在操作通知部257A中默认地决定了以声音或者振动为媒介的通知方法的情况

通知信息中包含的媒介的种类和默认地决定的振动的通知方法的媒介的种类不同。另外，操作通知部257A能够通过将作为通知信息中包含的媒介的种类的“图像”作为媒介的通知方法进行通知。因此，装置侧通知部63决定以图像为媒介的通知方法。

操作通知部257A在决定以图像为媒介的通知方法的情况下，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。例如，将通知信息中包含的图像的大小相对通知信息中包含的图像的大小的范围的比值设为60％。操作通知部257A将预先决定的图像的大小设定为相对在显示部206中显示的图像决定的大小的范围的60％的大小。

操作通知部257A响应于从远程侧操作受理部255被输入通知指示，响应于触摸面板207B检测到由用户指示的位置，将默认地决定的图像以设定的大小重叠地显示于在显示部206中显示的操作画面的图像。

因此，如果将操作权限切换到MFP100，指示触摸面板165，则以预定的大小显示预先决定的图像，从而以视觉方式通知受理到了由用户实施的操作，相对于此，如果在便携信息装置200中用户指示触摸面板207B，则通过便携信息装置200将预先决定的图像以设定的大小显示于显示部206，从而对用户通知受理到了操作。另外，在显示部206中显示的预先决定的图像的大小是相对便携信息装置200能够输出的预先决定的图像的大小的范围的比值与MFP100中的预先决定的图像的大小相对能够在MFP100中显示的图像的大小的范围的比值相同的大小，所以能够以与MFP100中的通知的程度相同的程度的大小，显示预先决定的图像。因此，不论在操作便携信息装置200和MFP100中的哪一个的情况下，都能够使响应于受理到操作而显示的图像的大小的程度相同。

图13是示出第2实施方式中的远程操作处理的流程的一个例子的流程图。参照图13，与图8所示的远程操作处理不同点是代替步骤S54而追加了步骤S61以及步骤S62、步骤S59被变更为步骤S59A。其它处理与图8所示的处理相同，所以此处不重复说明。

在步骤S61中，从在步骤S53中确立了通信路径的MFP100取得通知信息。通知信息包括MFP100为了通知受理到操作而默认地决定的媒介的种类、程度的范围以及默认地决定的程度。然后，根据所取得的通知信息，决定通知方法和程度(步骤S62)，使处理进入到步骤S55。如果通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类相同，则决定默认地设定的通知方法。在通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类不同的情况下，如果能够通过与通知信息中包含的媒介的种类相同的种类的媒介进行通知，则决定与通知信息中包含的媒介的种类相同的种类的媒介的通知方法。在通知信息中包含的媒介的种类和默认地设定的通知方法的媒介的种类不同的情况下，如果无法通过与通知信息中包含的媒介的种类相同的种类的媒介进行通知，则决定默认地设定的通知方法。进而，计算通知信息中包含的程度相对通知信息中包含的程度的范围的比值。然后，决定针对能够通过决定的通知方法的媒介进行通知的范围计算出的比值的程度。

在步骤S59A中，通过在步骤S62中决定的通知方法，按照在步骤S62中决定的程度进行通知，使处理返回到步骤S55。

图14以及图15是示出第2实施方式中的远程控制处理的流程的一个例的流程图。参照图14以及图15，与图9以及图10所示的远程控制处理不同点是步骤S05被删除、步骤S04以及步骤S18分别被变更为步骤S04A以及步骤S18A。其它处理与图9所示的处理相同，所以此处不重复说明。

在步骤S04A中，向在步骤S02中确立了通信路径的便携信息装置200发送通知信息，使处理进入到步骤S06。

在步骤S18A中，按照默认地决定的通信方法以及程度，对用户通知受理到了操作，使处理进入到步骤S22。在默认地设定了第1通知方法的情况下，CPU111从扬声器119输出预定的大小的声音，在默认地设定了第2通知方法的情况下，CPU111将预先决定的图像以预定的大小重叠显示于在显示部161中显示的操作画面的图像。

如以上说明，在第2实施方式中的远程控制系统中，MFP100作为通过作为远程操作装置发挥功能的便携信息装置200被远程控制的图像处理装置发挥功能，在与便携信息装置200确立了通信路径的协作模式中，依照从便携信息装置接收的远程操作指令，执行处理，在MFP100响应于受理由用户实施的操作，使用第1媒介对用户进行通知的情况下，在不是协作模式的情况下，响应于受理由用户实施的操作，使用第2媒介对用户进行通知，在协作模式的情况下，在第2媒介与第1媒介不同且能够使用第1媒介对用户进行通知的情况下，响应于受理由用户实施的操作，使用第1媒介对用户进行通知。因此，在便携信息装置200中对MFP100进行远程操作的情况和操作MFP100的情况下，使用相同的第1媒介来通知针对操作的响应。因此，能够使利用便携信息装置200的针对FP100的远程操作的响应和针对MFP100的操作的响应相同。

另外，在MFP100使用第1媒介按照默认地决定的程度进行通知的情况下，便携信息装置200在协作模式的情况下，将使用了第1媒介的通知的程度分割为与MFP100能够使用第1媒介进行通知的多个等级相同的数量的等级，决定所分割出的多个等级中的与MFP100为了使用第1媒介进行通知而默认地决定的等级对应的等级，按照响应于受理了由用户实施的操作而决定的等级，使用第1媒介对用户进行通知。因此，在便携信息装置中对MFP100进行远程操作的情况和操作MFP100的情况下，能够使使用第1媒介进行通知的程度相同。

另外，便携信息装置200在协作模式的情况下，在第2媒介与第1媒介不同且无法使用第1媒介对用户进行通知的情况下，将使用了第2媒介的通知的程度分割为与MFP100能够使用第1媒介进行通知的多个等级相同的数量的等级，决定所分割出的多个等级中的与MFP100为了使用第1媒介进行通知而默认地决定的等级对应的等级，按照响应于受理了由用户实施的操作而决定的等级，使用第2媒介对用户进行通知。因此，在便携信息装置200中对MFP100进行远程操作的情况和操作MFP100的情况下，虽然通知的媒介不同，但能够按照相同的程度进行通知。

第1媒介以及第2媒介是声音、图像以及振动中的任意媒介。因此，便携信息装置200以及MFP100分别能够通过声音、图像以及振动中的任意媒介，对用户通知受理到了操作。

此外，在上述实施方式中，说明了远程控制系统1，但当然能够将发明掌握为使MFP100执行图10以及图11、或者图14以及图15所示的远程控制处理的远程控制方法、使控制MFP100的CPU111执行该远程控制方法的远程控制程序。

本次公开的实施方式在所有方面上仅为例示，应当认为不是限制性的。本发明的范围并非基于上述说明示出而是基于权利要求书示出，企图包括与权利要求书均等的意义以及范围内的所有变更。

Claims (13)

1.一种远程控制系统，包括图像处理装置和能够对所述图像处理装置进行远程操作的远程操作装置，其特征在于，

所述远程操作装置具备：

远程侧操作受理单元，受理由用户实施的操作；以及

远程操作单元，响应于由所述远程侧操作受理单元受理操作，向所述图像处理装置发送远程操作指令，

所述图像处理装置具备：

装置侧操作受理单元，受理由用户实施的操作；

处理执行单元，执行与由所述装置侧操作受理单元受理的操作对应的处理；以及

远程控制单元，在与所述远程操作装置确立了通信路径的协作模式下，依照从所述远程操作装置接收的所述远程操作指令，使所述处理执行单元执行处理，

作为所述远程操作装置以及所述图像处理装置中的某一方的第1装置还具备第1通知单元，该第1通知单元响应于受理到由用户实施的操作，使用第1媒介对用户进行通知，

作为所述远程操作装置以及所述图像处理装置中的另一方的、与所述第1装置不同的第2装置还具备第2通知单元，在不是与所述第1装置确立了通信路径的协作模式的情况下，该第2通知单元响应于受理到由用户实施的操作，使用第2媒介对用户进行通知，

所述第2通知单元在所述协作模式的情况下，在所述第2媒介与所述第1媒介不同且能够使用所述第1媒介对用户进行通知的情况下，响应于受理到由用户实施的操作，不使用所述第2媒介而使用所述第1媒介对用户进行通知。

2.根据权利要求1所述的远程控制系统，其特征在于，

所述第1通知单元按照从通知的程度不同的多个等级中选择的等级进行通知，

所述第2通知单元在所述协作模式的情况下，将使用所述第1媒介的通知的程度分割为与所述第1通知单元能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述第1通知单元通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第1媒介对用户进行通知。

3.根据权利要求2所述的远程控制系统，其特征在于，

所述第2通知单元在所述协作模式的情况下，在所述第2媒介与所述第1媒介不同且无法使用所述第1媒介对用户进行通知的情况下，将使用所述第2媒介的通知的程度分割为与所述第1通知单元能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述第1通知单元通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第2媒介对用户进行通知。

4.根据权利要求1～3中的任意一项所述的远程控制系统，其特征在于，

所述第1媒介以及所述第2媒介是声音、图像以及振动中的任意媒介。

5.根据权利要求1～3中的任意一项所述的远程控制系统，其特征在于，

所述远程操作装置还具备如下单元中的至少一个单元：

声音产生单元，输出声音；

重叠控制单元，将预定的图像重叠显示于在显示单元中显示的图像；以及

振动单元，产生振动，

所述图像处理装置还具备如下单元中的至少一个单元：

装置侧声音产生单元，输出声音；

装置侧重叠控制单元，将预定的图像重叠显示于在装置侧显示单元中显示的图像；以及

装置侧振动单元，产生振动。

6.根据权利要求1～3中的任意一项所述的远程控制系统，其特征在于，

所述远程操作装置还具备：

显示单元，显示图像；以及

位置检测单元，检测在所述显示单元的显示面中由用户指示的位置，

所述远程侧操作受理单元响应于由所述位置检测单元检测到位置，检测指示所述图像中的位置的操作，

所述远程操作单元将从所述图像处理装置接收的图像显示于所述显示单元，将包括位置信息的远程操作指令发送到所述图像处理装置，所述位置信息表示用由所述远程侧操作受理单元检测出的操作确定的所述图像中的位置，

所述图像处理装置还具备：

装置侧显示单元，显示图像；以及

装置侧位置检测单元，检测在所述装置侧显示单元的显示面中由用户指示的位置，

所述装置侧操作受理单元响应于在所述装置侧显示单元中显示了操作画面的图像的状态下由所述装置侧位置检测单元检测到位置，决定和与所检测出的所述位置对应的所述操作画面中的位置关联的操作，

所述远程控制单元使所述处理执行单元执行如下处理，该处理对应于和与用在将操作画面的图像发送到所述远程操作装置之后从所述远程操作装置接收的所述远程操作指令中所包含的位置信息确定的位置对应的所发送的所述操作画面的图像中的位置关联的操作。

7.根据权利要求1～3中的任意一项所述的远程控制系统，其特征在于，

所述图像处理装置还具备操作权限切换单元，在协作模式下，该操作权限切换单元将操作权限切换到所述远程操作装置以及本装置中的某一个，

所述装置侧操作受理单元在所述协作模式下，在操作权限被切换到本装置的情况下，受理操作。

8.一种图像处理装置，能够通过远程操作装置被远程操作，其特征在于，所述图像处理装置具备：

装置侧操作受理单元，受理由用户实施的操作；

处理执行单元，执行与由所述装置侧操作受理单元受理的操作对应的处理；

协作模式设定单元，设定为与所述远程操作装置确立了通信路径的协作模式；

远程控制单元，在所述协作模式下，依照从所述远程操作装置接收的远程操作指令，使所述处理执行单元执行处理；

通知种类取得单元，取得响应于所述远程操作装置受理到操作而对用户进行通知的第1媒介的种类；以及

装置侧通知单元，在未设定为所述协作模式的情况下，响应于由所述装置侧操作受理单元受理到操作，使用第2媒介对用户进行通知，

在设定为所述协作模式的情况下，所述装置侧通知单元在所述第2媒介与所述第1媒介不同且能够使用所述第1媒介对用户进行通知的情况下，响应于由所述装置侧操作受理单元受理到操作，不使用所述第2媒介而使用所述第1媒介对用户进行通知。

9.根据权利要求8所述的图像处理装置，其特征在于，

还具备等级取得单元，该等级取得单元取得所述远程操作装置能够使用所述第1媒介进行通知的程度的范围和所述远程操作装置为了使用所述第1媒介进行通知而设定的所述程度的范围中的等级，

在所述协作模式的情况下，所述装置侧通知单元将使用所述第1媒介的通知的程度分割为与所述远程操作装置能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述远程操作装置通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第1媒介对用户进行通知。

10.根据权利要求9所述的图像处理装置，其特征在于，

在所述协作模式的情况下，所述装置侧通知单元在所述第2媒介与所述第1媒介不同且无法使用所述第1媒介对用户进行通知的情况下，将使用所述第2媒介的通知的程度分割为与所述远程操作装置能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述远程操作装置通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第2媒介对用户进行通知。

11.一种远程控制方法，是由能够通过远程操作装置被远程操作的图像处理装置执行的远程控制方法，其特征在于，所述远程控制方法包括：

装置侧操作受理步骤，受理由用户实施的操作；

处理执行步骤，执行与在所述装置侧操作受理步骤中受理的操作对应的处理；

协作模式设定步骤，设定为与所述远程操作装置确立了通信路径的协作模式；

远程控制步骤，在所述协作模式下，依照从所述远程操作装置接收的远程操作指令，执行处理；

通知种类取得步骤，取得响应于所述远程操作装置受理到操作而对用户进行通知的第1媒介的种类；以及

装置侧通知步骤，在未设定为所述协作模式的情况下，响应于在所述装置侧操作受理步骤中受理操作，使用第2媒介对用户进行通知，

所述装置侧通知步骤包括如下步骤：在设定为所述协作模式的情况下，在所述第2媒介与所述第1媒介不同且能够使用所述第1媒介对用户进行通知的情况下，响应于在所述装置侧操作受理步骤中受理到操作，不使用所述第2媒介而使用所述第1媒介对用户进行通知。

12.根据权利要求11所述的远程控制方法，其特征在于，

还包括等级取得步骤，在该等级取得步骤中，取得所述远程操作装置能够使用所述第1媒介进行通知的程度的范围和所述远程操作装置为了使用所述第1媒介进行通知而设定的所述程度的范围中的等级，

所述装置侧通知步骤包括如下步骤：在所述协作模式的情况下，将使用所述第1媒介的通知的程度分割为与所述远程操作装置能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述远程操作装置通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第1媒介对用户进行通知。

13.根据权利要求12所述的远程控制方法，其特征在于，

所述装置侧通知步骤包括如下步骤：在所述协作模式的情况下，在所述第2媒介与所述第1媒介不同且无法使用所述第1媒介对用户进行通知的情况下，将使用所述第2媒介的通知的程度分割为与所述远程操作装置能够选择的多个等级相同的数量的等级，决定所分割出的所述多个等级中的与所述远程操作装置通知的等级对应的等级，响应于受理到由用户实施的操作，按照所决定的所述等级，使用所述第2媒介对用户进行通知。

Images