CN101014114A - 远程指示系统、远程指示方法和用于远程指示的程序产品 - Google Patents

Abstract

本发明提供远程指示系统、远程指示方法和用于远程指示的程序产品。远程指示系统包括控制部。控制部将第一图像发送到远程终端，并根据从远程终端基于第一图像而发布的指示来控制投影部以将第一注释图像投影到对象上，并且，控制部将第二图像发送到远程终端，并根据从远程终端基于第二图像而发布的指示来控制投影部以将第二注释图像投影到对象上，通过为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，当从远程终端选择了第一图像中的给定区域时通过为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。

Description

远程指示系统、远程指示方法和用于远程指示的程序产品

技术领域

本发明总体上涉及远程指示系统和远程指示方法。

背景技术

在远程会议系统中，必须从远程侧向实物侧给出各种指示。作为其中可以从远程侧向实物侧给出指示的远程指示系统的示例，已经知道如下的技术：在通过摄像机捕获现实世界侧存在的目标对象并且将这样捕获的图像传送到远程终端的同时，从实物侧的投影仪将在远程终端上基于所捕获图像而确定的注释图像(annotation image)投影到目标对象上(参见美国专利公报第2004/0070674号)。

在远程终端上，必须将远程站中的摄像机捕获的图像显示在显示画面上，并且必须将注释图像绘制在捕获的图像上，同时观察所显示的捕获图像。然而，存在如下问题：当投影注释图像时，无法在显示装置上适当地指定注释图像，尤其是相对于对象的细节部分无法适当地指定注释图像。

发明内容

鉴于上述情况提出了本发明，并且本发明提供了一种远程指示系统和远程指示方法，其中即使当将注释图像投影到对象的细节部分上时，也可以容易地给出对绘制的指示。

本发明的一个方面提供了一种包括控制部的远程指示系统。所述控制部向远程终端发送第一图像，并且根据从远程终端基于第一图像而发布的指示来控制投影部以将第一注释图像投影到对象上。所述控制部向远程终端发送第二图像，并且根据从远程终端基于第二图像而发布的指示来控制投影部以将第二注释图像投影到对象上，由为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，当从远程终端选择了第一图像中的给定区域时由为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。根据本发明的一个方面，可以在第二图像捕获部捕获的图像上指示注释图像，由此即使当将注释图像投影到对象的细节部分上时，也可以容易地给出绘制指示。

在上述远程指示系统中，控制部可以将选择的给定区域的坐标变换为使用第二图像捕获部进行放大时使用的值，以控制对第二图像捕获部捕获的第二图像的放大。控制部可以将如下的第二注释图像变换为具有第一图像捕获部的坐标系，并且随后控制投影部以将经变换的注释图像投影到对象上，所述第二注释图像依照的是基于第二图像捕获部捕获的第二图像的指示。所述远程指示系统可以进一步包括相对位置改变部，所述相对位置改变部改变对象相对于投影部、第一图像捕获部、以及第二图像捕获部的相对位置关系。控制部可以根据由相对位置改变部进行了移动的对象，改变如下的第二注释图像的投影位置，所述第二注释图像依照的是基于第二图像捕获部捕获的第二图像的指示。所述相对位置改变部可以包括可以使对象旋转的旋转台。

本发明的另一方面提供了一种远程指示方法，所述远程指示方法包括以下步骤：向远程终端发送第一图像；根据从远程终端基于第一图像而发布的指示进行控制以将第一注释图像投影到对象上；向远程终端发送第二图像；以及根据从远程终端基于第二图像而发布的指示进行控制以将第二注释图像投影到对象上，由为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，在从远程终端选择了第一图像中的给定区域时由为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。根据本发明的一个方面，可以在第二图像捕获部捕获的图像上指示注释图像，由此即使当将注释图像投影到对象的细节部分上时，也可以容易地给出绘制指示。

上述方法可以进一步包括以下步骤：依照基于第二图像捕获部捕获的第二图像的指示将第二注释图像变换为具有第一图像捕获部的坐标系。

本发明的另一方面提供了一种计算机可读介质，所述计算机可读介质存储有使得计算机执行远程指示处理的程序，所述处理包括以下步骤：向远程终端发送第一图像；根据从远程终端基于第一图像而发布的指示进行控制以将第一注释图像投影到对象上；向远程终端发送第二图像；以及根据从远程终端基于第二图像而发布的指示进行控制以将第二注释图像投影到对象上，由为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，在从远程终端选择了第一图像中的给定区域时由为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。

附图说明

根据下列附图来详细描述本发明的实施例，在附图中：

图1是例示出远程指示系统的示例性实施例的配置图；

图2是示出使用对象侧装置的摄像机的服务器上的示例处理的流程图；

图3是示出在远程终端的计算机上形成图像的示例处理的流程图；

图4是例示出远程终端侧的示例操作的图；

图5是远程指示系统的操作流程图；

图6A是例示出在摄像机的捕获图像中指定的缩放指定区域的图；

图6B是例示出PTZ摄像机的捕获图像的图；

图6C是例示出在PTZ摄像机的捕获图像中绘制的注释图像的图；

图6D是例示出其上投影了注释图像的对象的图；

图6E是示出摄像机捕获的其上投影了注释图像的对象的捕获图像的图；

图7A和图7B是例示出缩放指定区域的坐标与PTZ摄像机的摇摄俯仰变焦(pan tilt zoom)值的变换的图；

图8示出远程终端上的用户接口的示例；

图9示出远程终端上的用户接口的变型例；

图10示出远程终端上的用户接口的另一变型例；以及

图11示出关于在PTZ摄像机的捕获图像上绘制注释图像的变型例。

具体实施方式

现在参照附图给出对本发明实施例的说明。图1是例示出远程指示系统1的示例性实施例的配置图。远程指示系统1包括对象侧装置10和远程终端100。对象侧装置10和远程终端100通过网络300彼此连接以能够相互通信。在图1中，仅示出了一个远程终端100，然而，可以有多个远程终端100通过网络300连接到对象侧装置10的服务器50(如稍后所述)。

对象侧装置10包括：用作第一图像捕获部的摄像机20、用作第二图像捕获部的PTZ摄像机30、用作投影部的投影器40、用作控制部的服务器50、半反射镜(halfmirror)60、以及用作相对位置改变部的旋转台70。摄像机20例如包括CCD摄像器以捕获设置在旋转台70上的对象(目标对象)200，同时将这种捕获图像的信息取入服务器50中。PTZ摄像机30是能够对对象200进行摇摄、俯仰以及变焦的摄像器，并且在远程终端100选择了捕获图像中的给定区域时放大对象200中的选择的给定区域以捕获其图像。摄像机20与PTZ摄像机30之间的位置关系是预先校准的。摄像机20捕获透过半反射镜60的图像。

投影器40包括液晶投影器等，并且根据从远程终端100基于所捕获的图像而给出的指示将注释图像201投影到对象200上。此外，投影器40排列为如下方式：其光学系统通过半反射镜60而与摄像机20的光学主点基本对准。投影器40通过其光学系统和半反射镜60将从服务器50发送的注释图像投影到对象200上。从投影器40投影的注释图像被半反射镜60反射并且投影到对象200上。注释图像包括任何类型的图像，例如线条、字符、图画等等。

旋转台70受服务器50控制，使得放置在旋转台70上表面的对象200旋转，从而改变对象200相对于摄像机20、PTZ摄像机30以及投影器40的位置。服务器50控制摄像机20、PTZ摄像机30、投影器40以及旋转台70的操作，同时通过网络300向远程终端100发送并且从其接收各种信息。此外，服务器50将摄像机20捕获的图像发送给远程终端100，并且根据远程终端100基于此捕获图像而发布的指示将注释图像投影到对象200上。此外，服务器50向远程终端100发送PTZ摄像机30捕获的图像，并且根据远程终端100基于PTZ摄像机30捕获的图像而发布的指示来通过PTZ摄像机30将注释图像投影到对象200上。

服务器50根据放置在旋转台70上的对象200的旋转(移动)进行控制，以改变投影器40投影的注释图像的投影位置。

远程终端100包括显示装置110、计算机120和定点装置(鼠标)130等。显示装置110包括液晶显示器或CRT等。计算机120连接到网络300。定点装置130连接到计算机120。显示装置110在其显示画面上显示从对象侧装置10发送的、由摄像机20和PTZ摄像机30捕获的图像。定点装置130用于通过正显示有所捕获图像的显示画面上的指示器来操作各种按钮，从而创建关于要投影到对象200上的注释图像的指示。定点装置130也用于给出指示以利用旋转台70的旋转来使得对象200旋转。

接下来，参照图2到图4描述具有上述配置的远程指示系统的操作。图2是示出使用对象侧装置10的摄像机20的服务器50上的示例处理的流程图。图3是示出在远程终端100的计算机120上形成图像的示例处理的流程图。图4是例示出远程终端100侧上的示例操作的图。

现在参照图2，对象侧装置10的服务器50通过摄像机20开始捕获图像(步骤S11)，并且确定是否存在来自远程终端100的计算机120的连接请求(步骤S12)。如果存在来自计算机120的连接请求，则服务器50通过网络300将摄像机20捕获的图像发送到远程终端100的计算机120(步骤S13)。

随后，服务器50确定是否从计算机120发送了控制信号(步骤S14)。控制信号包括绘制信号和位置控制信号，绘制信号是关于绘制注释图像的信息，位置控制信号是为了使旋转台70旋转而提供的。如果服务器50接收到前述控制信号，则服务器50根据该控制信号的内容来执行控制信号处理(步骤S15)。

同时，如果服务器50没有接收到前述控制信号，则服务器50确定是否存在断开请求(步骤S16)。如果不存在断开请求，则服务器50返回步骤S13，并且通过网络300向远程终端100的计算机120发送新捕获的图像。如果存在断开请求，则服务器50停止发送摄像机20捕获的图像(步骤S17)。接下来，服务器50确定是否存在处理结束请求(步骤S18)。如果不存在结束请求，则处理返回步骤S12以重复上述处理。如果存在处理结束请求，则处理结束。

接下来，对远程终端100的操作给出描述。首先，如图3所示，远程终端100的计算机120向服务器50发布连接请求(步骤S21)。接着，在建立连接之后，例如，如图4所示，计算机120在显示装置110的显示画面111上显示从对象侧装置10的服务器50发送的捕获图像(步骤S22)。

随后，计算机120确定操作员是否给出了关于在所捕获图像中的关注区域的指示(步骤S23)。如果存在关于关注区域的指示，则执行根据该指示的处理(步骤S26)。具体地，如图4所示，如果在显示的图像中存在操作员希望将注释图像201a投影于其上的区域，则远程终端100的操作员在观看显示装置110的显示画面111上的图像的同时，对定点装置130进行操作以在显示画面111上移动指示器Pt并且发布关于关注区域DR的指示。关注区域是对要将注释图像201a投影于其上的投影位置进行限定的区域。此时，操作员同时发布关于要投影到关注区域上的注释图像201a的信息的指示。

例如，可以通过使用定点装置130来操作形成在显示画面111上的各种按钮BT等，从而指示图形信息(例如绘制矩形还是圆形)、预先准备的位图图像、从键盘输入的文本信息。计算机120将在步骤S26指定的各种类型的信息发送给服务器50作为绘制信息(步骤S27)。

接下来，计算机120确定是否已经完成了操作员从远程终端100基于摄像机20捕获的图像而发布的指示(步骤S28)。如果完成了指示，则向服务器50发布断开请求(步骤S29)，并且结束处理。如果远程终端100的操作员发布的指示尚未完成，则处理返回到步骤S22以重复上述处理。

在此，如果远程终端100的操作员希望使得对象200旋转，则操作员在观看如图4所示的显示在显示画面111上的图像的同时操作旋转按钮R1和R2以指示旋转台70的旋转方向和旋转量，以使得可以显示捕获图像中的对象200中的操作员希望将注释图像投影于其上的区域，或者使得对象200的观察位置最适当。旋转按钮R1和R2设置在显示画面111上，用于使得旋转台70旋转。在步骤S23，如果不存在关于关注区域的指示(不存在关于注释图像的指示)，则计算机120确定应给出关于对象200的旋转的指示，并且执行与对象200的旋转相关的处理(步骤S24)。

随后，计算机120向对象侧装置10的服务器50发送关于旋转量的信息(移动量信息)(步骤S25)，该信息是通过与对象200的旋转相关的处理而获得的。这使得旋转台70旋转，改变了对象侧装置10上的对象200的旋转位置。在远程终端100的显示装置110上显示新捕获的图像(步骤S22)。

接下来，对远程指示系统1使用摄像机20和PTZ摄像机30执行的处理给出描述。图5是远程指示系统1的操作流程图。图6A是例示出在摄像机20的捕获图像21中指定的缩放指定区域400的图。图6B是例示出PTZ摄像机30的捕获图像31的图。图6C是例示出绘制在PTZ摄像机30的捕获图像31中的注释图像202a的图。图6D是例示出注释图像201和202投影于其上的对象200的图。图6E是示出摄像机20捕获的对象200(注释图像201和202投影于其上)的捕获图像21的图。图7A和图7B是例示出缩放指定区域400的坐标与PTZ摄像机30的摇摄俯仰变焦值之间的变换的图。

图8是示出远程终端的画面(用户接口)的图。远程终端100的画面500同时显示摄像机20捕获的图像21和PTZ摄像机30捕获的捕获图像31。用户使用定点装置130等来操作绘制选择按钮422，并且选择绘制方法，以将注释图像201a绘制在摄像机20捕获的图像21上或者PTZ摄像机30捕获的图像31上。在绘制选择按钮422中设置有放大指定按钮423。通过选择放大指定按钮423，可以在摄像机20捕获的图像21上绘制矩形(缩放指定区域400)。

参照图5来对操作进行描述。摄像机20捕获对象200。服务器50始终通过网络300连续向远程终端100发送通过摄像机20捕获的图像。现在，假设用户在远程终端100上用颜色A在通过摄像机20捕获的图像21上绘制注释图像201a。当服务器50检测到在通过摄像机20捕获的图像21上已绘制了注释图像201a时(步骤S31)，将从远程终端100接收的注释图像从摄像机20的坐标系变换为具有投影器40的坐标系。从投影器40将此经变换的注释图像投影到对象200上(步骤S32)。因此将注释图像201实际投影到对象200上。

当用户使用定点装置130在远程终端100上指定了缩放指定区域400时，远程终端100向服务器50发送缩放指定区域的坐标(x₀，y₀，x₁，y₁)。在此，如图7A和7B所示，(x₀，y₀)表示缩放指定区域400的左上坐标，(x₁，y₁)表示缩放指定区域400的右下坐标。

当在摄像机20捕获的图像上选择了缩放指定区域400时(步骤S33)，服务器50将从远程终端100接收的缩放指定区域(选择的给定区域)400的坐标值变换成PTZ摄像机30的摇摄俯仰变焦值(放大所必需的值)，以控制PTZ摄像机30(步骤S34)。具体地，服务器50基于缩放指定区域400的坐标(x₀，y₀，x₁，y₁)来计算PTZ摄像机30的对应摇摄俯仰变焦值(p，t，z)，以将缩放指定区域400修改为PTZ摄像机30捕获的图像31的纵横比。在此，式(1)是将缩放指定区域400的坐标(x₀，y₀，x₁，y₁)变换成PTZ摄像机30的摇摄俯仰变焦值(p，t，z)的变换公式。

(式(1))

(p，t，z)＝f(x₀，y₀，x₁，y₁)    …  (1)

函数“f”是对于摄像机20和PTZ摄像机30的固有函数，是预先测量的。使用函数“f”的变换可以在服务器50上执行或者可以在远程终端100上执行，并且将PTZ摄像机30的摇摄俯仰变焦值(p，t，z)发送到服务器50以控制PTZ摄像机30。

随后，服务器50将PTZ摄像机30的摇摄俯仰变焦值(p，t，z)发送到PTZ摄像机30以控制PTZ摄像机30。事实上，PTZ摄像机30可以控制的摇摄俯仰变焦值(p，t，z)存在局限性。因此，通过最接近摇摄俯仰变焦值(p，t，z)的摇摄俯仰变焦值(p’，t’，z’)来控制PTZ摄像机30。接下来，服务器50取入PTZ摄像机30捕获的图像31，并且通过网络300连续发送到远程终端100。在从服务器50接收到PTZ摄像机30捕获的图像时，远程终端100在显示装置110上显示所捕获的图像。用户在摄像机30捕获的图像31上绘制注释图像202a，并且随后远程终端100将这样绘制的注释图像202a的绘制信息发送到服务器50。根据摇摄俯仰变焦控制值(p’，t’，z’)，实际缩放区域对应于坐标(x’₀，y’₀，x’₁，y’₁)。这是通过式(2)计算的。

(式(2))

(x′₀，y′_o，x′₁，y′₁)＝f^-1(p′，t′，z′)    …(2)

当检测到在PTZ摄像机30捕获的图像31上绘制了注释图像时(步骤S35)，服务器50将根据基于PTZ摄像机30捕获的图像的指示而绘制的注释图像202a变换为具有摄像机20基于缩放指定区域400而捕获的图像21的坐标系(步骤S36)。具体地，服务器50将PTZ摄像机30捕获的图像的坐标系(x_b，y_b)变换为摄像机20的捕获图像的坐标系(x_a，y_a)。式(3)是此时的变换公式。

(式(3))

(x_a，y_a)＝g(x_b，y_b)  …(3)

在此，函数“g”是使用实际缩放区域的坐标(x₀’，y₀’，x₁’，y₁’)以及PTZ摄像机30捕获的图像的图像大小(w，h)、通过式(4)和(5)中所示的仿射变换而获得的。

(式(4))

$x_a=\frac{({x^{\′}}_1-{x^{\′}}_0)}{w}{x}_b+{x^{\′}}_0...\left(4\right)$

(式(5))

$y_a=\frac{({y^{\′}}_1-{y^{\′}}_0)}{h}{y}_b+{y^{\′}}_0...\left(5\right)$

通过上述处理，将PTZ摄像机30捕获的图像31上的注释图像变换为具有摄像机20捕获的图像的坐标系的注释图像。随后，服务器50将基于PTZ摄像机30捕获的图像31的注释图像202a变换为投影器40的坐标系，并且将此经变换的注释图像投影到对象200上(步骤S37)。由此，将基于PTZ摄像机30捕获的图像31的注释图像202a投影到对象200上。在此，服务器50可以将(x_b，y_b)变换为(x_a，y_a)，或者可以在远程终端100上进行变换并通过网络发送到服务器50。以此方式，对应于摄像机20捕获的图像中的矩形的位置，测量PTZ摄像机30的摇摄俯仰变焦值。因此，通过针对由摄像机20捕获的图像中的矩形的位置来测量PTZ摄像机30的摇摄俯仰变焦值，可以基于该摇摄俯仰变焦值来控制PTZ摄像机30，并且可以从投影器40将在PTZ摄像机30捕获的图像31上指定的注释图像投影到对象200上。

图9示出远程终端100上的用户接口的变型例。远程终端100在其画面600上仅显示捕获图像21。用户使用定点装置130等对绘制选择按钮422进行操作以选择绘制方法，并且将注释图像绘制在捕获图像21上。在绘制选择按钮422中设置有放大指定按钮423。通过选择放大指定按钮423，可以在捕获图像21上绘制缩放指定区域400。随后，当在捕获图像21中绘制了缩放指定区域400时，自动打开弹出窗口601。在弹出窗口601上显示PTZ摄像机30捕获的图像31，由此通过使用绘制选择按钮422来选择绘制方法以基于PTZ摄像机30绘制注释图像202a。弹出窗口601设置有关闭按钮602。用户能够通过操作关闭按钮602来关闭弹出窗口601，由此节约画面上的区域。

图10示出远程终端100上的用户接口的另一变型例。用户接口700也包括设置在弹出窗口701上的绘制选择按钮702。使用绘制选择按钮702，可以设置或者选择与绘制选择按钮422不同的按钮。弹出窗口701也设置有PTZ摄像机控制按钮703。用户对PTZ摄像机控制按钮703进行操作，以使得用户能够在弹出窗口701上将安装在远程站上的PTZ摄像机30上下和左右移动。当弹出窗口701打开时，远程终端100开始发送和接收PTZ摄像机30捕获的图像31。当弹出窗口701关闭时，远程终端100停止发送和接收捕获图像31。这使得在不显示通过PTZ摄像机30捕获的捕获图像31时可以防止通信频带被浪费。

图11示出关于在PTZ摄像机30的捕获图像上绘制注释图像的变型例。当在PTZ摄像机30捕获的图像上绘制注释图像时，在远程终端上放大所捕获的图像，随着PTZ摄像机30的放大因子增大，精度下降并且投影器40可以显示的分辨率受到限制。因此，根据PTZ摄像机30捕获的图像的放大因子，确定在PTZ摄像机30的捕获图像上可以绘制注释图像的最小单位。在此，将最小单位设置为半径“r”。可以将最小单位设置为r×r(像素)。半径“r”根据放大因子而变化。半径“r”随着放大因子的增大而增大。

如图11所示，如果用户指定放大因子较小的缩放指定区域401，则在PTZ摄像机30捕获的图像32中可以绘制注释图像的最小单位是半径r1。如果用户指定放大因子较大的缩放指定区域402，则在PTZ摄像机30捕获的图像33中可以绘制注释图像的最小单位是大于半径r1的半径r2。可以使用PTZ摄像机30的缩放参数“z”来计算半径“r”。可以在远程终端100上或者在服务器50上计算半径“r”。根据本发明的示例性实施例，从摄像机20捕获的广角图像中选择区域，以控制PTZ摄像机30并且放大图像。然而，在不使用PTZ摄像机30的情况下，通过对摄像机20捕获的图像进行数字缩放来放大摄像机20的指定区域。

根据本发明的上述示例性实施例，描述了与在远程终端上的图像中绘制注释图像并将注释图像投影到对象上的技术(iLight)一起使用的通过从摄像机20捕获的广角图像中选择区域来控制PTZ摄像机30的技术(FlySPEC)，从而使用关于缩放指定区域的信息而知道PTZ摄像机30在摄像机20上显示哪个区域。因此，可以通过投影器40将在PTZ摄像机30捕获的图像上绘制的注释图像投影到对象200上。此外，不必对摇摄俯仰变焦、或者PTZ摄像机30的图像坐标与投影器40的图像坐标的对应进行测量，这需要的计算量较小。

根据本发明的上述示例性实施例，描述了用作投影部的投影器。然而，投影部不限于投影器。例如，可以通过向对象例如辐射激光束等来形成图像。

根据本发明的上述示例性实施例，描述了用作相对位置改变部的旋转台。然而，相对位置改变部不限于旋转台。例如，可以采用机械手等作为相对位置改变部。

根据本发明的上述示例性实施例，描述了使对象发生移动的情况。然而，可以构成为使得用作图像捕获部的摄像机和用作投影部的投影器发生移动。

根据本发明的上述示例性实施例，描述了在显示画面111上形成旋转按钮R1和R2以指示旋转台70的旋转。然而，本发明不限于此，可以采用键盘或者其他各种方法。

根据本发明的上述示例性实施例，描述了远程终端100通过网络300连接到服务器50的情况。然而，本发明不限于此。远程终端100可以通过其他方法连接到服务器，并且远程终端100可以设置在对象200侧。

根据本发明的上述示例性实施例，可以通过网络300将摄像机20捕获的图像和PTZ摄像机30捕获的图像从另一种硬件而不是服务器50发送到远程站。

根据本发明的示例性实施例的远程指示方法是通过对象侧装置10实现的。服务器50是通过中央处理单元(CPU)、只读存储器(ROM)和随机存取存储器(RAM)等实现的。

对本发明示例性实施例的前述描述是为了例示和描述的目的而提供的。其并非旨在穷举或者将本发明限于所公开的确切形式。显然，许多修改和变型对于本领域技术人员是显而易见的。选择并描述示例性实施例是为了最好地说明本发明的原理及其实际应用，从而使得本领域其他技术人员能够理解本发明的适用于所构想特定用途的各种实施例和各种变型例。旨在由所附权利要求及其等同物来限定本发明的范围。

Claims (8)

1、一种包括控制部的远程指示系统，

控制部将第一图像发送到远程终端，并且根据从远程终端基于第一图像而发布的指示来控制投影部以将第一注释图像投影到对象上，

控制部将第二图像发送到远程终端，并且根据从远程终端基于第二图像而发布的指示来控制投影部以将第二注释图像投影到对象上，

通过为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，

当从远程终端选择了第一图像中的给定区域时，通过为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。

2、根据权利要求1所述的远程指示系统，其中，控制部将选择的所述给定区域的坐标变换为使用第二图像捕获部进行放大时使用的值，从而控制对第二图像捕获部捕获的第二图像的放大。

3、根据权利要求1所述的远程指示系统，其中，控制部将如下的第二注释图像变换为具有第一图像捕获部的坐标系，并且随后控制投影部以将经变换的注释图像投影到对象上，所述第二注释图像依照的是基于第二图像捕获部捕获的第二图像的指示。

4、根据权利要求1所述的远程指示系统，该远程指示系统进一步包括相对位置改变部，所述相对位置改变部改变对象相对于投影部、第一图像捕获部、以及第二图像捕获部的相对位置关系，

其中，控制部根据由相对位置改变部进行了移动的对象，改变如下的第二注释图像的投影位置，所述第二注释图像依照的是基于第二图像捕获部捕获的第二图像的指示。

5、根据权利要求4所述的远程指示系统，其中，相对位置改变部包括能够使对象旋转的旋转台。

6、一种远程指示方法，该远程指示方法包括以下步骤：

向远程终端发送第一图像；

根据从远程终端基于第一图像而发布的指示进行控制以将第一注释图像投影到对象上；

向远程终端发送第二图像；以及

根据从远程终端基于第二图像而发布的指示进行控制以将第二注释图像投影到对象上，

通过为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，

在从远程终端选择了第一图像中的给定区域时，通过为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。

7、根据权利要求6所述的远程指示方法，该远程指示方法进一步包括以下步骤：依照基于第二图像捕获部捕获的第二图像的指示将第二注释图像变换为具有第一图像捕获部的坐标系。

8、一种计算机可读介质，该计算机可读介质存储有使得计算机执行远程指示处理的程序，所述远程指示处理包括以下步骤：

向远程终端发送第一图像；

根据从远程终端基于第一图像而发布的指示进行控制以将第一注释图像投影到对象上；

向远程终端发送第二图像；以及

根据从远程终端基于第二图像而发布的指示进行控制以将第二注释图像投影到对象上，

通过为捕获对象的第一图像而设置的第一图像捕获部来捕获第一图像，

在从远程终端选择了第一图像中的给定区域时，通过为放大对象的所述给定区域以捕获第二图像而设置的第二图像捕获部来捕获第二图像。

Images