CN103473170B - 测试系统及测试方法 - Google Patents

Abstract

提供一种能够在身边（指令地）准确地进行位于远程位置的环境中设备的动作测试的技术。从本地侧管理装置（5b）向位于远程位置的远程侧测试对象装置（7a）发送操作指令使其动作，并将该远程侧测试对象装置（7a）检测到的检测信息发送到本地侧输入到本地侧测试对象装置（7b）。即，利用在远程位置获得的检测信息，使本地侧测试对象装置（7b）动作。如果这样，能够在身边（指令地）准确地进行在与远程位置的环境中进行的对本地侧测试对象装置（7b）的测试相同的测试。

Description

测试系统及测试方法

技术领域

本发明涉及在身边（指令地）进行与在远程位置进行的动作测试相同的动作测试的技术。

背景技术

以往，作为在身边操作存在于远程位置的控制设备的技术，提出了各种技术。例如，在下述专利文献1中记载的技术，利用摄像机拍影位于远程位置的控制设备的状态，并将该影像显示在身边的显示器上，而且在身边进行对该影像中的操作按钮的按下操作（对触摸面板进行操作）时，则对应于该操作的指令被发送到位于远程位置的控制设备，从而能够得到实际在现场操作控制设备时的情况相同的结果。

专利文献：

专利文献1：日本特开2011-134357号公报

发明内容

但是，将如上所述的技术应用在远程测试、即设备放置在远程位置而在身边操作该设备以确认各种动作的测试时，可能发生如下问题。

例如，若远程位置和身边（指令地）之间的通信线路的带宽不足时，可能发生摄像机的影像中断、或迟延、或分辨率下降的情况，而且，可能会发生难以发出操作指示、或者操作结果的确认精度下降的问题。并且，也有可能导致不能有效地进行不良状况（所谓调试操作）纠正的结果。

另一方面，若在身边设置设备而进行测试，则能够有效地进行不良状况的纠正等，然而，该测试属于在身边环境下进行的测试，无法输入能够在期望的地方（远程位置）获得的实际信息、例如位置信息、温度信息、移动信息、照度信息、遮光信息、语音信息、来自静电容式等触摸传感器的信息、来自外部设备的信息等实时信息并进行测试。还有，虽然也可以通过模拟生成这些信息（检测信息）并输入，但通过模拟生成的信息与实际获得的信息不同，所以很难说是真实的测试。

本发明鉴于这些问题而提出，其目的在于提供一种能够在身边（指令地）准确地进行位于远程位置环境中的设备的动作测试的技术。

（1）第一发明

第一发明的测试系统具备：第一管理装置，存在于远程位置，并且与存在于远程位置的第一测试对象装置连接；第二管理装置，存在于指令地，并且与存在于指令地的第二测试对象装置连接，该第二测试对象装置是与第一测试对象装置相同种类的装置。第一管理装置具备：检测信息发送单元，从第一测试对象装置输入由第一测试对象装置检测的检测信息，并且向第二管理装置发送该输入的检测信息；以及操作信息输出单元，向第一测试对象装置输出从第二管理装置接收的操作信息。另一方面，第二管理装置具备：操作信息发送单元，向第一管理装置发送由测试员输入的操作信息；操作信息输出单元，向第二管理装置输出操作信息；检测信息接收单元，从第一测试对象装置接收检测信息；以及检测信息输出单元，向第二管理装置输出由检测信息接收单元接收的检测信息。

根据这样的测试系统，能够从指令地向远程位置的第一测试对象装置发送操作信息并使其动作，将该第一测试对象装置检测到的检测信息发送到指令地并输入到第二测试对象装置。即，能够利用在远程位置得到的检测信息，使指令地的第二测试对象装置动作。因此，能够在身边准确地进行位于远程位置的环境中设备的动作测试。

（2）第二发明

第二发明的测试系统是，在第一发明的测试系统中，在第一管理装置上连接有第一摄像机，该第一摄像机用于至少拍摄第一测试对象装置的显示部；第一管理装置还具备影像发送单元，该影像发送单元输入从第一摄像机输出的影像并发送给第二管理装置。而且，第二管理装置还具备远程位置影像显示单元，该远程位置影像显示单元用于显示从第一管理装置接收的影像。

根据这样的测试系统，能够在指令地的第二管理装置中了解远程位置的第一测试对象装置的显示部的样子，能够更顺利地进行测试。

（3）第三发明

第三发明的测试系统是，在第一发明或第二发明的测试系统中，在第二管理装置上连接有第二摄像机，该第二摄像机用于至少拍摄第二测试对象装置的显示部，第二管理装置还具备指令地影像显示单元，该指令地影像显示单元用于输入并显示从第二摄像机输出的影像。

根据这样的测试系统，能够在指令地的第二管理装置中了解指令地的第二测试对象装置的显示部的样子，能够更顺利地进行测试。特别是，在指令地的第二管理装置中也能够了解远程位置的第一测试对象装置的显示部的样子的情况下，能够通过对比两个影像进行测试，因此能够更顺利地进行测试。

（4）第四发明

第四发明的测试系统是，在第一发明的测试系统中，第一管理装置还具备：第一画面取得单元，取得在第一测试对象装置的显示部显示的画面；第一画面状态ID确定单元，基于由第一画面取得单元取得的画面，确定可确定画面状态的画面状态ID；以及画面状态ID发送单元，向第二管理装置发送被第一画面状态ID确定单元确定的画面状态ID。另一方面，第二管理装置还具备：画面状态ID接收单元，从第一管理装置接收画面状态ID；第二画面取得单元，取得在第二测试对象装置的显示部显示的画面；第二画面状态ID确定单元，基于由第二画面取得单元取得的画面，确定可确定画面状态的画面状态ID；以及比较单元，比较由画面状态ID接收单元接收的画面状态ID和由第二画面状态ID确定单元确定的画面状态ID，并输出比较结果。

而且，作为确定画面状态ID的方法的一例，可以想到如下方法：预先将画面状态和与其对应的画面状态ID对应起来形成数据库，并参照该数据库，确定与显示在各测试对象装置的显示部上的画面对应的画面状态ID。此外，作为其它方法，想到如下方法：在各测试对象装置的显示部显示的画面中，预先以数字水印的形式嵌入画面状态ID，并且，从由各画面取得单元所取得的画面本身抽取出画面状态ID进行确定。

根据这样的测试系统，关于在第一测试对象装置的显示部显示的画面和在第二测试对象装置的显示部显示的画面的同一性（换言之，执行结果的同一性），即使测试者不进行目视判断，也能够根据由比较单元输出的比较结果做出判断。而且，对各自ID进行比较，所以比较结果错误的可能性也低。

（5）第五发明

第五发明的测试系统是，在第四发明的测试系统中，在第一管理装置上连接有第一摄像机，该第一摄像机用于至少拍摄第一测试对象装置的显示部，第一管理装置的第一画面取得单元利用从第一摄像机输出的影像取得所述画面。另一方面，在第二管理装置上连接有第二摄像机，该第二摄像机用于至少拍摄第二测试对象装置的显示部，述第二管理装置的第二画面取得单元利用从所述第二摄像机输出的影像取得所述画面。

根据这样的测试系统，不必在各测试对象装置中组装用于从各测试对象装置取得图像的构成，也能够取得与第四发明相同的效果。

（6）第六发明

第六发明的测试系统是，在第一至第五中的任一个发明的测试系统中，第一管理装置还具备动作记录发送单元，该动作记录发送单元从第一测试对象装置输入第一测试对象装置的动作记录，并且向第二管理装置发送所输入的动作记录。第二管理装置还具备：动作记录接收单元，从第一测试对象装置接收动作记录；动作记录存储控制单元，从第二测试对象装置输入第二测试对象装置的动作记录，并存储所输入的动作记录和由动作记录接收单元接收的动作记录。

根据这样的测试系统，能够在指令地的第二管理装置中确认远程位置的第一测试对象装置的动作记录，所以，在指令地可以更详细地了解第一测试对象装置的动作状况。此外，也可以通过比较远程位置的第一测试对象装置的动作记录和指令地的第二测试对象装置的动作记录来了解状况。

（7）第七发明

第七发明的测试系统是，在第一至第六中的任一个发明的测试系统中，还具备第三管理装置，第三管理装置具备：程序开发单元，可修改程序的源代码，并且可生成执行代码；程序发送单元，经由第二管理装置和第一管理装置向第一测试对象装置发送由程序开发单元生成的执行代码；以及程序输出单元，向第二测试对象装置输出由程序开发单元生成的执行代码。

根据这样的测试系统，能够在第一测试对象装置和第二测试对象装置中迅速地适用更新后的程序，能够迅速地进行再测试。

（8）第八发明

第八发明是一种测试方法，在具备第一管理装置和第二管理装置的测试系统中进行测试，其中，所述第一管理装置存在于远程位置，并且与存在于远程位置的第一测试对象装置连接；所述第二管理装置存在于指令地，并且与存在于指令地的第二测试对象装置连接，该第二测试对象装置是与所述第一测试对象装置相同种类的装置；所述第一管理装置执行以下步骤：从所述第一测试对象装置输入由所述第一测试对象装置检测的检测信息，并且向所述第二管理装置发送该输入的检测信息；以及向所述第一测试对象装置输出从所述第二管理装置接收的操作信息。

根据这样的测试方法，能够从指令地向远程位置的第一测试对象装置发送操作信息并使其动作，将该第一测试对象装置检测到的检测信息发送到指令地并输入到第二测试对象装置。即，能够利用在远程位置得到的检测信息，使指令地的第二测试对象装置动作。因此，能够在身边准确地进行位于远程位置的环境中设备的动作测试。

（9）第九发明

第九发明的测试方法是，在第八发明的测试方法中，所述第二管理装置执行以下步骤：

向所述第一管理装置发送由测试员输入的操作信息；

向所述第二管理装置输出所述操作信息；

从所述第一测试对象装置接收所述检测信息；以及

向所述第二管理装置输出所接收到的所述检测信息。

根据这样的测试方法，能够在指令地的第二管理装置中了解远程位置的第一测试对象装置的显示部的样子，能够更顺利地进行测试。

（10）第十发明

第十发明的测试方法是，在第八发明的测试方法中，所述第一管理装置还执行以下步骤：取得在所述第一测试对象装置的显示部显示的画面；基于所取得的画面，确定可确定画面状态的画面状态ID；以及向第二管理装置发送所述被确定的画面状态ID；所述第二管理装置还执行以下步骤：从所述第一管理装置接收所述画面状态ID；取得在所述第二测试对象装置的显示部显示的画面；基于所取得的画面，确定可确定画面状态的画面状态ID；以及比较所述接收到的画面状态ID和所述被确定的画面状态ID，并输出比较结果。

根据这样的测试方法，关于在第一测试对象装置的显示部显示的画面和在第二测试对象装置的显示部显示的画面的同一性（换言之，执行结果的同一性），即使测试者不进行目视判断，也能够根据由比较单元输出的比较结果做出判断。而且，对各自ID进行比较，所以比较结果错误的可能性也低。

附图说明

图1是表示作为基本实施方式的测试系统的构成的框图。

图2（A）是表示远程侧测试对象装置的一例的远程侧智能手机的硬件结构的框图，图2（B）是表示远程侧管理装置的硬件结构的框图。

图3（A）是表示作为远程侧测试对象装置的一例的智能手机的软件结构的框图，图3（B）是表示远程侧管理装置的软件结构的框图。

图4（A）是表示作为本地侧测试对象装置的一例的远程侧智能手机的硬件结构的框图图4（B）是表示本地侧管理装置的硬件结构的框图。

图5（A）是表示作为本地侧测试对象装置的一例的智能手机的软件结构的框图，图5（B）是表示本地侧管理装置的软件结构的框图。

图6是用于说明测试过程的梯形图。

图7是用于说明测试过程的梯形图。

图8是在本地侧管理装置的显示部显示的画面的一例。

图9是通用命令列表的一例。

图10（A）、10（B）是用于说明画面状态ID的说明图。

图11是表示其它实施方式的测试系统的构成的框图。

图12是表示其它实施方式的测试系统的构成的框图。

附图标记说明

3：测试系统4a：远程侧测试系统

4b：本地侧测试系统5a：远程侧管理装置

5b：本地侧管理装置6a：远程侧摄像机

6b：本地侧摄像机7a：远程侧测试对象装置

7b：本地侧测试对象装置8：程序开发终端

8a：微型计算机9：广域网

11a：远程侧智能手机11b：本地侧智能手机

12a、12b：微型计算机13a、13b：存储部

14a、14b：无线通信部15a、15b：有线通信部

16a、62b：触摸面板17a、17b：功能硬键

18a、18b：麦克风19a、19b：扬声器

20a、20b：GPS接收部21a、21b：应用程序组

22a、22b：测试引擎23a、23b：操作系统

32a、32b：微型计算机33a、33b：存储部

34a、34b：有线通信部35a、35b：键盘

36a、36b：鼠标37a、37b：显示部

41a、41b：数据文件组42a、42b：测试管理器

43a、43b：操作系统71、72：测试系统

具体实施方式

下面，参照附图说明本发明所适用的实施方式。还有，本发明并不被下述的实施方式做出任何限定性解释。此外，在能够解决问题的情况下，省略下述实施方式的一部分构成的方式也属于本发明的实施方式。而且，适当组合下述多个实施方式而构成的方式也属于本发明的实施方式。而且，在不脱离仅以权利要求书中记载的内容所确定的发明本质的情况下，所能想到的所有方式也属于本发明的实施方式。

图1是表示作为本发明的基本实施方式的测试系统3的构成的框图。测试系统3具备远程侧测试系统4a、远程侧测试对象装置7a、本地侧测试系统4b、本地侧测试对象装置7b、广域网9。

远程侧测试系统4a具备远程侧管理装置5a和远程侧摄像机6a。其中，远程侧摄像机6a是具有CCD等摄像元件的摄像装置，可以向远程侧管理装置5a输出拍摄了可了解远程侧测试对象装置7a的动作状态的显示画面等的影像。并且，优选影像为HD程度的分辨率且60帧/秒左右的帧速率。

远程侧管理装置5a通过有线或无线与远程侧测试对象装置7a连接，并且，可以对远程侧测试对象装置7a输出各种指令等，还可以从远程侧测试对象装置7a取得各种信息。而且，远程侧管理装置5a可以如上所述地从远程侧摄像机6a取得拍摄了远程侧测试对象装置7a的影像。此外，远程侧管理装置5a连接在因特网等广域网9上，可以通过广域网9同后述的本地侧管理装置5b进行通信。具体地说，从本地侧管理装置5b接收指令，或者向本地侧管理装置5b发送影像。

远程侧测试对象装置7a为智能手机、智能平板电脑、个人计算机（台式电脑、笔记本电脑）、导航装置、打印机、传真机、各种家电等，构成为可以按照来自远程侧管理装置5a的指令进行动作。

本地侧测试系统4b具备本地侧管理装置5b和本地侧摄像机6b。其中，本地侧摄像机6b是具有CCD等摄像元件的摄像装置，可以向本地侧管理装置5b输出拍摄了可了解本地侧测试对象装置7b的动作状态的显示画面等的影像。并且，优选影像为60帧/秒左右的帧速率。

本地侧管理装置5b通过有线或无线同本地侧测试对象装置7b连接，可以对本地侧测试对象装置7b输出各种指令等，并且，可以从本地侧测试对象装置7b取得各种信息。而且，本地侧管理装置5b如上所述地可以从本地侧摄像机6b取得拍摄了本地侧测试对象装置7b的影像。此外，本地侧管理装置5b连接在广域网9上，可以通过广域网9与远程侧管理装置5a进行通信。具体地说，对远程侧管理装置5a发送指令，或者从远程侧管理装置5a接收影像。

本地侧测试对象装置7b为智能手机、智能平板电脑、个人计算机（台式电脑、笔记本电脑）、导航装置、打印机、传真机、各种家电等，构成为可以按照来自本地侧管理装置5b的指令进行动作。并且，除了用于实现后述测试的软件之外，本地侧测试对象装置7b和远程侧测试对象装置7a，具有相同的硬件结构和相同的软件结构。

在这种测试系统3中，若测试员对本地侧管理装置5b进行操作，则向本地侧测试对象装置7b输出该操作指令的同时，操作指令被转换成通用命令发送到远程侧管理装置5a。在远程侧管理装置5a中，从通用命令恢复成操作指令，该操作指令被输出到远程侧测试对象装置7a。从远程侧测试对象装置7a向远程侧管理装置5a输出检测信息（例如GPS信号、陀螺仪输出信号等），远程侧管理装置5a向本地侧管理装置5b发送由远程侧摄像机6a拍摄的远程侧测试对象装置7a的显示画面等影像和检测信息。在本地侧管理装置5b中，将从远程侧测试对象装置7a接收的检测信息向本地侧测试对象装置7b输出并使其利用，同时将本地侧摄像机6b拍摄的本地侧测试对象装置7b的显示画面等影像和从远程侧测试对象装置7a接收的远程侧测试对象装置7a的显示画面等影像，并列显示在未图示的显示器上。测试员通过一边比较显示在显示器上的这些影像，一边实施本地侧测试对象装置7b的动作测试。

（具体结构的说明）

下面，说明远程侧测试对象装置7a、本地侧测试对象装置7b、远程侧管理装置5a和本地侧管理装置5b的具体结构。并且，在下面，以智能手机作为远程侧测试对象装置7a和本地侧测试对象装置7b的具体装置的情况为例进行说明。

（1）远程侧智能手机11a的硬件结构。

首先，利用图2（A）说明作为远程侧测试对象装置7a的具体例的远程侧智能手机11a的硬件结构。并且，远程侧智能手机11a和后述的本地侧智能手机11b具有相同的硬件结构。

远程侧智能手机11a作为硬件具备微型计算机12a、存储部13a、无线通信部14a、有线通信部15a、触摸面板16a、功能硬键17a、麦克风18a、扬声器19a和GPS接收部20a。

微型计算机12a具备处理器（通用处理器、图形处理器、实现W-CDMA等某种通信的处理器等）、DRAM等存储器、通信接口等，通过读取存储在存储部13a的程序（操作系统、应用程序等）执行各种处理。

存储部13a由SSD等非易失性存储器构成，能够存储各种程序或数据。

无线通信部14a是实现IEEE802.11a/b/g/n等无线局域网、Bluetooth（注册商标）等无线通信功能的部分。

有线通信部15a是实现USB2.0、HDMI等有线通信功能的部分。

触摸面板16a包括液晶显示器、有机EL显示器等显示部和利用静电电容式等方式的操作识别部。因此，触摸面板16a能够显示文本或图像等，并且能够检测手指对该显示面的操作。并且，能够检测滑动操作或多个手指的操作等手指操作。

功能硬键17a是机械式按键开关，被按下时，能够输出可确定该硬键的情报。

麦克风18a能够将声音转换成电信号而输出给微型计算机12a。

扬声器19a能够将电信号转换成声音而输出到周围。

GPS接收部20a是接收来自GPS（GlobalPositioningSystem，全球定位系统）的卫星的信号的部分，能够输出当前位置的信息。

（2）远程侧管理装置5a的硬件结构

下面，利用图2（B）说明远程侧管理装置5a的硬件结构。

远程侧管理装置5a作为硬件具备微型计算机32a、存储部33a、有线通信部34a、键盘35a、鼠标36a和显示部37a。

微型计算机32a具备处理器（通用处理器、图形处理器等）、DRAM等存储器、通信接口等，通过读取存储在存储部33a的程序（操作系统、应用程序等）执行各种处理。

存储部33a由硬盘、SSD等非易失性存储器构成，能够存储各种程序或数据。

有线通信部34a是实现USB2.0、以太网（登录商标）等有线通信功能的部分。

键盘35a是通过用手指按下键而将与该键对应的键控代码输出到微型计算机32a的装置。

鼠标36a是通过手握水平移动，将被传感器检测到的移动量输出到微型计算机32a的装置。

显示部37a由液晶显示器、有机EL显示器等构成，是能够显示字符、图像的装置。

（3）远程侧智能手机11a的软件结构

下面，利用图3（A）说明远程侧智能手机11a的软件结构。

远程侧智能手机11a作为软件具备应用程序组21a、测试引擎22a、操作系统23a。

应用程序组21a是WWW浏览器、电子邮件管理应用程序、地图应用程序、各种设定应用程序等软件。

测试引擎22a是用于实现后述测试的软件。

操作系统23a是向应用软件提供将硬件进行了抽象化的界面的软件，具备各种驱动器、各种处理模块等。

（4）远程侧管理装置5a的软件结构

下面，利用图3（B）说明远程侧管理装置5a的软件结构。

远程侧管理装置5a作为软件具备数据文件组41a、测试管理器42a和操作系统43a。

数据文件组41a是存储有后述的通用命令列表等的文件组。

测试管理器42a是用于实现后述测试的软件。

操作系统43a是向应用软件提供将硬件进行了抽象化的界面的软件。

（5）本地侧智能手机11b的硬件结构

下面，利用图4（A）说明作为本地侧测试对象装置7b的具体例的本地侧智能手机11b的硬件结构。

本地侧智能手机11b作为硬件具备微型计算机12b、存储部13b、无线通信部14b、有线通信部15b、触摸面板16b、功能硬键17b、麦克风18b、扬声器19b和GPS接收部20b。各部分与远程侧智能手机11a的对应部分相同，故省略说明。

（6）本地侧管理装置5b的硬件结构

下面，利用图4（B）说明本地侧管理装置5b的硬件结构。

本地侧管理装置5b作为硬件具备微型计算机32b、存储部33b、有线通信部34b、键盘35b、鼠标36b和显示部37b。各部分与远程侧管理装置5a的对应部分相同，故省略说明。并且，在本实施方式中，远程侧管理装置5a和本地侧管理装置5b具有相同的硬件结构，但是，不一定必须具有相同的硬件结构。

（7）本地侧智能手机11b的软件结构

下面，利用图5（A）说明本地侧智能手机11b的软件结构。

本地侧智能手机11b作为软件具备应用程序组21b、测试引擎22b和操作系统23b。各软件基本上与远程侧智能手机11a的对应软件相同，故省略说明，但是，测试引擎22b的功能与远程侧智能手机11a的测试引擎不同。详细内容后述。

（8）本地侧管理装置5b的软件结构

下面，利用图5（B）说明本地侧管理装置5b的软件结构。

本地侧管理装置5b作为软件具备数据文件组41b、测试管理器42b和操作系统43b。各软件基本上与远程侧管理装置5a的对应软件相同，故省略说明，但是，测试管理器42b的功能与远程侧管理装置5a的测试管理器不同。详细内容后述。

（具体动作的说明）

下面，参照图6和图7的梯形图说明测试过程。并且，下面的测试通过执行如下过程来实现：远程侧管理装置5a的微型计算机32a运行测试管理器42a；本地侧管理装置5b的微型计算机32b运行测试管理器42b；远程侧智能手机11a的微型计算机32a运行测试引擎22a；以及本地侧智能手机11b的微型计算机32b运行测试引擎22b。而且，测试基本上通过测试员操作本地侧管理装置5b来进行。

若测试员操作本地侧管理装置5b的键盘35b或鼠标36b向本地侧管理装置5b输入表示测试开始的指令，则本地侧管理装置5b的微型计算机32b通过有线通信部34b向远程侧管理装置5a发送表示测试开始的指令（S101）。

接收了该指令的远程侧管理装置5a的微型计算机32a，通过有线通信部34a开始从远程侧摄像机6a取得影像，并将该取得的影像通过有线通信部34a开始向本地侧管理装置5b发送（S103）。

向远程侧管理装置5a发送了测试开始指令的本地侧管理装置5b的微型计算机32b，通过有线通信部34b开始从本地侧摄像机6b取得影像（S106）。然后，本地侧管理装置5b的微型计算机32b开始将从远程侧管理装置5a接收的远程侧摄像机6a的影像和从本地侧摄像机6b取得的影像并列显示在显示部37b（S107）。

在此，利用图8说明在本地侧管理装置5b的显示部37b显示的画面的例子。

画面51具有远程侧摄像机影像区域52、本地侧摄像机影像区域53、返回键按钮57、主页键（homekey）按钮58、菜单键按钮59、测试开始按钮61、测试结束按钮62和画面比较结果显示栏63。

远程侧摄像机影像区域52是用于显示由远程侧摄像机6a拍摄的影像的区域。从图8也能够确认，在该区域显示有以远程侧智能手机11a为中心的影像。

本地侧摄像机图像区域53是用于显示由本地侧摄像机6b拍摄的影像的区域。从图8也能够确认，在该区域显示有以本地侧智能手机11b为中心的影像。还有，在本地侧智能手机11b的触摸面板16b的下方设有三个功能硬键17b，具体地说，从面对触摸面板16b时的左侧起，设有返回键54、主页键55和菜单键56。

返回键按钮57是与本地侧智能手机11b的功能硬键17b之一的返回键54对应的图标按钮，当通过鼠标36b进行按下画面51上的该图标按钮的操作时，则与对本地侧智能手机11b按下功能硬键17b之一的返回键54时相同的指令，传递到在本地侧智能手机11b中运行中的应用程序。

同样地，主页键按钮58是与本地侧智能手机11b的功能硬键17b之一的主页键55对应的图标按钮，当通过鼠标36b进行按下画面51上的该图标按钮的操作时，则与对本地侧智能手机11b按下功能硬键17b之一的主页键55时相同的指令，传递到在本地侧智能手机11b中运行中的应用程序。

同样地，菜单键按钮59是与本地侧智能手机11b的硬键17b之一的菜单键56对应的图标按钮，当通过鼠标36b进行按下画面51上的该图标按钮的操作时，则与对本地侧智能手机11b按下功能硬键17b之一的菜单键56时相同的指令，传递到在本地侧智能手机11b中运行中的应用程序。

测试开始按钮61是开始测试时按下的图标按钮，当通过鼠标36b进行按下画面51上的该图标按钮的操作时，则在上述S101中说明的指令从本地侧管理装置5b发送到远程侧管理装置5a，从而开始测试。

测试结束按钮62是结束测试时按下的图标按钮，当通过鼠标36b进行按下画面51上的该图标按钮的操作时，则在后述的S135中说明的指令从本地侧管理装置5b发送到远程侧管理装置5a，从而结束测试。

画面比较结果显示栏63是显示比较结果是否一致的显示栏，该比较结果是将被显示在远程侧摄像机影像区域52的远程侧智能手机11a的触摸面板16a上所显示的画面状态与被显示在本地侧摄像机影像区域53的本地侧智能手机11b的触摸面板16b上所显示的画面状态进行比较的结果。该显示栏中的内容，在后述的S135的处理中被更新。

返回图6进行说明，接着，本地侧管理装置5b的微型计算机32b，判断测试员是否操作键盘35b或鼠标36b进行了对本地侧智能手机11b的输入（S109）。该判断如此进行，例如，根据对显示在显示部37b的本地侧摄像机6b的影像中的本地侧智能手机11b的触摸面板16b是否进行了利用鼠标36b的点击操作，或者，根据对显示在显示部37b的本地侧智能手机11b的功能硬键17b所对应的图标按钮是否进行了利用鼠标36b的点击操作等（当发生了点击操作时，判断为进行了输入）。此外，代替该判断，也可以判断测试员是否操作鼠标36b对拍摄远程侧智能手机而显示的影像中的远程侧智能手机11a进行了输入。即，也可以根据对显示在显示部37b的远程侧摄像机6a的影像中的远程侧智能手机11a的触摸面板16a是否进行了利用鼠标36b的点击操作等进行判断。

本地侧管理装置5b的微型计算机32b，当在S109判断为进行了对本地侧智能手机11b的输入时，转到S111的处理，若判断为未进行对本地侧智能手机11b的输入时，停留在该步骤（S109）而反复进行判断。

在判断为进行了对本地侧智能手机11b的输入时进入的S111中，本地侧管理装置5b的微型计算机32b通过有线通信部34a向本地侧智能手机11b输出与该输入相对应的操作指令。即，与由测试员操作的内容相对应的操作指令，输入到本地侧智能手机11b，从而实际上在本地侧智能手机11b中实现由测试员操作的内容。这是在本地侧智能手机11b中，测试引擎22b将与实际操作触摸面板16b时从操作系统23b输入到应用程序的指令相同的指令，输入到应用程序而实现。

接着，本地侧管理装置5b的微型计算机32b根据作为一个数据文件组41b而存储在存储部33b中的通用命令列表，将在S111输出的操作指令转换成通用命令（S113）。在此，利用图9说明通用命令列表。

通用命令列表由以通用命令编号、通用命令参数信息和操作指令为一组的多个列表要素构成。

通用命令编号是可以确定操作指令的种类（例如功能硬键A被按下等）的编号，分配有唯一的编号。该编号从本地侧管理装置5b发送到远程侧管理装置5a，从而能够在远程侧管理装置5a中确定操作指令的种类。

通用命令参数信息是被包含在操作指令中的参数信息（例如，被手指触摸的坐标信息等）。该信息从本地侧管理装置5b发送到远程侧管理装置5a，从而在远程侧管理装置5a中将参数信息设置在操作指令中而完成操作指令。例如，根据通用命令编号确定对触摸面板的点击操作，根据通用命令参数信息确定点击位置坐标和被点击的时间，从而确定完整的操作指令。

此外，关于该列表，相同的列表也存储在远程侧管理装置5a的存储部33a。

返回图6进行说明，本地侧管理装置5b的微型计算机32b通过有线通信部34b向远程侧管理装置5a发送在S113被转换的通用命令（通用命令编号和通用命令参数信息）（S115）。

接收到通用命令的远程侧管理装置5a的微型计算机32a，将通用命令转换成操作指令（S117）。该转换是参照使用图8说明的列表进行的。

接着，远程侧管理装置5a的微型计算机32a向远程侧智能手机11a输出在S117被转换的操作指令（S119）。

接着，远程侧管理装置5a的微型计算机32a从远程侧智能手机11a取得检测信息（S121）。检测信息是指，例如基于来自GPS卫星的信号的位置信息、来自便携式电话网的基站的通信信息、来自远程侧智能手机11a中内置的陀螺仪的旋转信息等，远程侧智能手机11a检测来自外部的影响而获得的信息。由远程侧智能手机11a的微型计算机12a运行的测试引擎22a收集检测信息，并通过有线通信部15a向远程侧管理装置5a发送，从而远程侧管理装置5a的微型计算机32a能够取得检测信息。

接着，远程侧管理装置5a的微型计算机32a，通过有线通信部34a向本地侧管理装置5b发送在S121取得的检测信息（S123）。

接收到检测信息的本地侧管理装置5b的微型计算机32b，通过有线通信部34b向本地侧智能手机11b发送接收到的检测信息（S125）。由此，获得了检测信息的本地侧智能手机11b的微型计算机12b，通过测试引擎22b的功能向当前在前台运行中的应用程序传递检测信息，使得该应用程序好像从操作系统23b获得了检测信息。其结果，本地侧智能手机11b的该应用程序利用与远程侧智能手机11a的同一应用程序相同的检测信息进行动作。

接着，转到图7进行说明，远程侧管理装置5a的微型计算机32a取得远程侧智能手机11a的画面（S127）。作为取得方法，可以是通过有线通信34a从远程侧智能手机11a取得截图画面的方法，也可以是通过有线通信部34a取得远程侧摄像机6a拍摄的影像并从该影像中剪切而取得。

接着，远程侧管理装置5a的微型计算机32a根据在S127取得的画面确定画面状态ID，将该确定的画面状态ID通过有线通信部34a向本地侧管理装置5b发送（S129）。画面状态ID是指，能够确定被显示的画面类型和该画面内的显示状态的ID，对应于当前在远程侧智能手机11a的触摸面板16a显示的画面。例如，可以想到将画面类型ID和画面内的对象（复选框等）的状态ID结合起来，但并不限定于此。

在此，说明画面状态ID的确定方法。画面状态ID的确定方法有两种方法。一种方法是，抽取在显示于远程侧智能手机11a的触摸面板16a上的画面内以数字水印方式嵌入的画面状态ID。另一种方法是，通过参照将部件图像的组合和画面状态ID对应起来登记的数据库，确定画面状态ID。下面，分成两个部分说明。

首先是从画面内的数字水印中抽取画面状态ID的方法，但在该方法中，画面状态ID以数字水印方式被嵌入在画面内。所以，只要从画面内抽取出画面状态ID，就能够确定画面状态ID。该方法的前提是，被嵌入的画面状态ID随着画面种类和画面内的显示状态（画面内的对象是否被选择等）而变化。

其次是通过参照数据库来确定画面状态ID的方法，但该方法的情况下，数据库存储在远程侧管理装置5a的存储部33a。具体地说，是图10（A）中例示的部件数据库和图10（B）中例示的画面状态数据库。

在部件数据库中部件ID和部件图像数据相对应，且复数存在。还有，部件图像数据是对于部件（对象）的每个状态而存在，例如，如果是操作按钮，分别存储有按下状态的图像和未按下状态的图像，并且每个图像对应着不同的部件ID。

在画面状态数据库中，将画面状态ID和部件ID的组合对应，并且复数存在。画面由多个部件构成，所以，在画面状态数据库中存储有该部件的组合和画面状态ID。

使用这些数据库，远程侧管理装置5a的微型计算机32a首先参照部件数据库，对构成在S127取得的画面的每个部件确定部件ID。接着，参照画面状态数据库，确定与部件ID的组合相对应的画面状态ID。

还有，也可以同时采用使用数字水印的方法和参照数据库的方法。例如，可以想到如下方法：从画面内所含的多个数字水印中抽取各部件的部件ID，并且基于抽取出的部件ID且参照画面状态数据库来确定画面状态ID的方法等。

返回图7进行说明，一方面，本地侧管理装置5b的微型计算机32b取得本地侧智能手机11b的画面（S131）。作为取得方法，可以是通过有线通信部34b从本地侧智能手机11b取得捕捉画面的方法，也可以是通过有线通信部34b取得本地侧摄像机6b所拍摄的影像并从该影像中剪切而取得。

接着，本地侧管理装置5b的微型计算机32b根据在S131取得的画面确定画面状态ID（S133）。画面状态ID是指，能够确定被显示的画面种类和该画面内的显示状态的ID，对应于当前在本地侧智能手机11b的触摸面板16b上显示的画面。还有，确定画面状态ID的方法与在远程侧管理装置5a进行的方法相同，若远程侧管理装置5a为了确定画面状态ID而保有数据库，则本地侧管理装置5b也保有相同的数据库。

接着，本地侧管理装置5b的微型计算机32b比较从远程侧管理装置5a发送来且表示远程侧智能手机11a的触摸面板16a的画面状态的画面状态ID和在S133取得的表示本地侧智能手机11b的触摸面板16b的画面状态的画面状态ID。然后，将是否一致的结果显示在本地侧管理装置5b的显示部37b（S135）。具体地说，若两个画面状态ID一致，例如可以在显示部37b显示“两个测试对象装置的画面状态一致”的信息，若两个画面状态ID不一致，例如在显示部37b显示“两个测试对象装置的画面状态不一致”的信息（参照图8）。

接着，远程侧管理装置5a的微型计算机32a从远程侧智能手机11a取得动作记录（S147）。动作记录是指应用程序的动作记录，是能够把握应用程序如何动作的信息。由远程侧智能手机11a的微型计算机12a运行的测试引擎22a收集动作记录，并通过有线通信部15a向远程侧管理装置5a发送，由此，远程侧管理装置5a的微型计算机32a能够取得动作记录。

接着，远程侧管理装置5a的微型计算机32a通过有线通信部34a向本地侧管理装置5b发送在S147取得的动作记录（S149）。

接收到动作记录的本地侧管理装置5b的微型计算机32b，将接收的动作记录存储在存储部33b（S151）。由此，能够在本地侧管理装置5b的显示部37b显示动作记录，能够在本地侧了解远程侧智能手机11a的应用程序的动作状况。此时，也可以从本地侧智能手机11b取得同样的动作记录，与远程侧智能手机11a的动作记录同时或交替地显示在本地侧管理装置5b的显示部37b。

接着，本地侧管理装置5b的微型计算机32b判断由测试员操作键盘35b或鼠标36b是否向本地侧管理装置5b输入了表示测试结束的指令（S153）。若判断为输入了表示测试结束的指令，处理转到S155，若判断为未输入表示测试结束的指令，则使处理返回上述S109。

在判断为输入了表示测试结束的指令时进入的S155中，本地侧管理装置5b的微型计算机32b通过有线通信部34b向远程侧管理装置5a发送表示测试结束的指令。

接收到该指令的远程侧管理装置5a的微型计算机32a，结束从远程侧摄像机6a取得影像，也结束向本地侧管理装置5b发送（S157）。

（实施方式的效果）

根据所述实施方式的测试系统3，能够从本地侧管理装置5b向位于远程位置的远程侧智能手机11a发送操作指令而使之动作，并将该远程侧智能手机11a检测到的检测信息发送到本地侧并输入到本地侧测试对象装置7b。即，可以利用在远程位置获得的检测信息，使本地侧智能手机11b动作。因此，能够在身边（指令地）准确地进行处在远程位置环境中的智能手机的动作测试。

而且，在本地侧管理装置5b的显示部37b，能够并列显示拍摄了远程侧智能手机11a的触摸面板16a的显示状态的影像和拍摄了本地侧智能手机11b的触摸面板16b的显示状态的影像。因此，能够一边通过影像了解远程侧智能手机11a和本地侧智能手机11b的动作状态，一边比较两个影像进行测试。所以，可以比以往更加顺利地进行测试。

而且，向远程侧智能手机11a的应用程序组21a输入的操作指令，在从本地侧管理装置5b向远程侧管理装置5a发送的情况下，将通用命令编号转换成基本的编号进行发送。即，远程侧管理装置5a和本地侧管理装置5b保持有将通用命令编号和操作指令对应起来的列表，本地侧管理装置5b参照列表将操作指令转换成通用命令编号之后向远程侧管理装置5a发送通用命令编号，而远程侧管理装置5a参照列表将通用命令编号还原成操作指令。

因此，在远程侧管理装置5a与本地侧管理装置5b之间的通信中，能够将关于操作指令的命令进行通用化。即，即使测试对象装置（远程侧智能手机11a和本地侧智能手机11b）变更，通过变更上述列表（不必变更与对于测试对象装置的操作指令有关的远程侧管理装置5a和本地侧管理装置5b之间的通信程序）也可以进行测试。

此外，本地侧管理装置5b比较表示远程侧智能手机11a的触摸面板16a的画面状态的画面状态ID和表示本地侧智能手机11b的触摸面板16b的画面状态的画面状态ID，并将是否一致的结果显示在本地侧管理装置5b的显示部37b。

因此，对于在远程侧智能手机11a上显示的画面和在本地侧智能手机11b上显示的画面的同一性（换言之，执行结果的同一性），即使测试者不进行目视判断，也能够知道。而且，对各自的ID进行比较，所以比较结果错误的可能性也低。

此外，远程侧管理装置5a从远程侧智能手机11a取得动作记录并向本地侧管理装置5b发送，本地侧管理装置5b记录接收到的动作记录。因此，能够在本地侧管理装置5b中确认远程侧智能手机11a的动作记录，能够在指令地更加详细地了解远程侧智能手机11a的动作状况。

（其它实施方式）

（1）在上述实施方式的测试系统3中，说明了本地侧测试系统4b具备本地侧管理装置5b和本地侧摄像机6b的情况，但如图11所示的测试系统71那样，本地侧测试系统4b也可以包括程序开发终端8，该程序开发终端8可以开发本地侧测试对象装置7b所具备的应用程序软件。该程序开发终端8内置有微型计算机8a。而且，该微型计算机8a构成为能够实现修改程序源代码的功能、生成执行代码的功能、将生成的执行代码通过本地侧管理装置5b和远程侧管理装置5a向远程侧测试对象装置7a发送的功能、以及将执行代码向本地侧测试对象装置7b输出的功能。如果这样，能够向远程侧测试对象装置7a和本地侧测试对象装置7b迅速地反映更新后的程序（执行代码），从而能够迅速进行再测试。此时，本地侧测试对象装置7b和程序开发终端8可为一体的构造。

此外，也可以如图12所示的测试系统72那样构成，即在设置有远程侧测试系统4a的场所和设置有本地侧测试系统4b的场所以外的场所设置程序开发终端8，并使其与广域网9连接。该程序开发终端8内置有微型计算机8a。而且，微型计算机8a构成为能够实现修改程序源代码的功能、生成执行代码的功能、将生成的执行代码通过远程侧管理装置5a向远程侧测试对象装置7a发送的功能、以及将执行代码向本地侧测试对象装置7b输出的功能。进一步，微型计算机8a构成为还可以实现以下功能：将与显示在本地侧管理装置5b的显示部37b上的画面相同的画面显示在程序开发终端8的未图示的显示部的功能，以及在程序开发终端8进行与在上述测试过程中测试员对本地侧管理装置5b进行的操作相同的操作的功能。如果这样，可以在与放置有测试对象装置的场所不同的场所，进行使用了实际检测信息的测试指示，还可以进行程序的修改。

（2）在上述实施方式中，说明了以远程侧测试对象装置7a和本地侧测试对象装置7b具有相同硬件结构为前提的情况，但也可以不完全相同。例如，其中某一个是另一个的以前型号、或者高级型号等，只要在测试中至少能够得到必要的检测信息，也可以有一些不同。

（3）在上述实施方式中，说明了测试员通过操作本地侧管理装置5b的鼠标36b向远程侧测试对象装置7a和本地侧测试对象装置7b输入用于进行测试的操作指令的例子，但是，也可以直接操作本地侧测试对象装置7b向本地侧测试对象装置7b输入用于进行测试的操作指令，并且，由本地侧管理装置5b取得该操作指令，通过广域网9和远程侧管理装置5a输入到远程侧测试对象装置7a。这样，也可以获得与上述实施方式相同的效果，测试员能够更直观地进行测试的操作。

（与权利要求书的对应关系）

示出在上述实施方式的描述中使用的术语和权利要求书中记载的术语之间的对应关系。

远程侧测试对象装置7a是第一测试对象装置的一例，本地侧测试对象装置7b是第二测试对象装置的一例。

远程侧管理装置5a是第一管理装置的一例。而且，远程侧管理装置5a所具有的微型计算机32a是实现第一管理装置所具备的检测信息发送单元、操作信息输出单元、影像发送单元、操作信息确定单元、第一画面取得单元、第一画面状态ID确定单元、画面状态ID发送单元和动作记录发送单元的功能的硬件的一例。而且，远程侧管理装置5a所具有的存储部33a是第一管理装置的命令列表存储单元的一例。

本地侧管理装置5b是第二管理装置的一例。而且，本地侧管理装置5b所具有的微型计算机32b是实现第二管理装置所具备的操作信息发送单元、检测信息接收单元、操作信息输出单元、检测信息输出单元、命令确定单元、画面状态ID接收单元、第二画面取得单元、第二画面状态ID确定单元、比较单元、动作记录接收单元和动作记录存储控制单元的功能的硬件的一例。而且，本地侧管理装置5b所具有的显示部37b是远程位置影像显示单元及指令地影像显示单元的一例。而且，本地侧管理装置5b所具有的存储部33b是第二管理装置的命令列表存储单元的一例。

程序开发终端8是第三管理装置的一例。而且，程序开发终端8所具有的微型计算机8a是实现作为程序开发单元、程序发送单元及程序输出单元的功能的硬件的一例。

Claims (9)

1.一种测试系统，其特征在于，具备：第一管理装置，存在于远程位置，并且与存在于远程位置的第一测试对象装置连接；第二管理装置，存在于指令地，并且与存在于指令地的第二测试对象装置连接，该第二测试对象装置是与所述第一测试对象装置相同种类的装置，

所述第一管理装置具备：

检测信息发送单元，从所述第一测试对象装置输入由所述第一测试对象装置检测的检测信息，并且向所述第二管理装置发送该输入的检测信息；

操作信息输出单元，向所述第一测试对象装置输出从所述第二管理装置接收的操作信息；

第一画面取得单元，取得在所述第一测试对象装置的显示部显示的画面；

第一画面状态ID确定单元，基于由所述第一画面取得单元取得的画面，确定可确定画面状态的画面状态ID；以及

画面状态ID发送单元，向第二管理装置发送由所述第一画面状态ID确定单元确定的画面状态ID；

所述第二管理装置具备：

操作信息发送单元，向所述第一管理装置发送由测试员输入的操作信息；

操作信息输出单元，向所述第二测试对象装置输出所述操作信息；

检测信息接收单元，从所述第一测试对象装置接收所述检测信息；

检测信息输出单元，向所述第二测试对象装置输出由所述检测信息接收单元接收的所述检测信息；

画面状态ID接收单元，从所述第一管理装置接收所述画面状态ID；

第二画面取得单元，取得在所述第二测试对象装置的显示部显示的画面；

第二画面状态ID确定单元，基于由所述第二画面取得单元取得的画面，确定可确定画面状态的画面状态ID；以及

比较单元，比较由所述画面状态ID接收单元接收的所述画面状态ID和由所述第二画面状态ID确定单元确定的所述画面状态ID，并输出比较结果。

2.根据权利要求1所述的测试系统，其特征在于，

在所述第一管理装置上连接有第一摄像机，该第一摄像机用于至少拍摄所述第一测试对象装置的显示部；

所述第一管理装置还具备影像发送单元，该影像发送单元输入从所述第一摄像机输出的影像并发送给所述第二管理装置；

所述第二管理装置还具备远程位置影像显示单元，该远程位置影像显示单元用于显示从所述第一管理装置接收的影像。

3.根据权利要求1所述的测试系统，其特征在于，

在所述第二管理装置上连接有第二摄像机，该第二摄像机用于至少拍摄所述第二测试对象装置的显示部，

所述第二管理装置还具备指令地影像显示单元，该指令地影像显示单元用于输入并显示从所述第二摄像机输出的影像。

4.根据权利要求2所述的测试系统，其特征在于，

在所述第二管理装置上连接有第二摄像机，该第二摄像机用于至少拍摄所述第二测试对象装置的显示部，

所述第二管理装置还具备指令地影像显示单元，该指令地影像显示单元用于输入并显示从所述第二摄像机输出的影像。

5.根据权利要求1所述的测试系统，其特征在于，

在所述第一管理装置上连接有第一摄像机，该第一摄像机用于至少拍摄所述第一测试对象装置的显示部，

所述第一管理装置的所述第一画面取得单元，利用从所述第一摄像机输出的影像取得所述画面；

在所述第二管理装置上连接有第二摄像机，该第二摄像机用于至少拍摄所述第二测试对象装置的显示部，

所述第二管理装置的所述第二画面取得单元，利用从所述第二摄像机输出的影像取得所述画面。

6.根据权利要求1至5中任一项所述的测试系统，其特征在于，

所述第一管理装置还具备动作记录发送单元，该动作记录发送单元从所述第一测试对象装置输入所述第一测试对象装置的动作记录，并且向所述第二管理装置发送所输入的动作记录；

所述第二管理装置还具备：

动作记录接收单元，从所述第一测试对象装置接收所述动作记录；

动作记录存储控制单元，从所述第二测试对象装置输入所述第二测试对象装置的动作记录，并存储所输入的所述第二测试对象装置的动作记录和由所述动作记录接收单元接收的动作记录。

7.根据权利要求1至5中任一项所述的测试系统，其特征在于，还具备第三管理装置，第三管理装置具备：

程序开发单元，可修改程序的源代码，并且可生成执行代码；

程序发送单元，经由所述第二管理装置和第一管理装置向所述第一测试对象装置发送由所述程序开发单元生成的执行代码；以及

程序输出单元，向所述第二测试对象装置输出由所述程序开发单元生成的所述执行代码。

8.根据权利要求6所述的测试系统，其特征在于，还具备第三管理装置，第三管理装置具备：

程序开发单元，可修改程序的源代码，并且可生成执行代码；

程序发送单元，经由所述第二管理装置和第一管理装置向所述第一测试对象装置发送由所述程序开发单元生成的执行代码；以及

程序输出单元，向所述第二测试对象装置输出由所述程序开发单元生成的所述执行代码。

9.一种测试方法，在具备第一管理装置和第二管理装置的测试系统中进行测试，其中，

所述第一管理装置存在于远程位置，并且与存在于远程位置的第一测试对象装置连接；所述第二管理装置存在于指令地，并且与存在于指令地的第二测试对象装置连接，该第二测试对象装置是与所述第一测试对象装置相同种类的装置；

所述第一管理装置执行以下步骤：

检测信息发送步骤，从所述第一测试对象装置输入由所述第一测试对象装置检测的检测信息，并且向所述第二管理装置发送该输入的检测信息；

操作信息输出步骤，向所述第一测试对象装置输出从所述第二管理装置接收的操作信息；

第一画面取得步骤，取得在所述第一测试对象装置的显示部显示的画面；

第一画面状态ID确定步骤，基于在所述第一画面取得步骤中取得的画面，确定可确定画面状态的画面状态ID；以及

画面状态ID发送步骤，向第二管理装置发送在所述第一画面状态ID确定步骤中确定的画面状态ID；

所述第二管理装置执行以下步骤：

操作信息发送步骤，向所述第一管理装置发送由测试员输入的操作信息；

操作信息输出步骤，向所述第二测试对象装置输出所述操作信息；

检测信息接收步骤，从所述第一测试对象装置接收所述检测信息；以及

检测信息输出步骤，向所述第二测试对象装置输出在所述检测信息接收步骤中接收的所述检测信息；

画面状态ID接收步骤，从所述第一管理装置接收所述画面状态ID；

第二画面取得步骤，取得在所述第二测试对象装置的显示部显示的画面；

第二画面状态ID确定步骤，基于在所述第二画面取得步骤中取得的画面，确定可确定画面状态的画面状态ID；以及

比较步骤，比较在所述画面状态ID接收步骤中接收的画面状态ID和在所述第二画面状态ID确定步骤中确定的画面状态ID，并输出比较结果。