CN101110942B - 远程指示系统和方法 - Google Patents

远程指示系统和方法 Download PDF

Info

Publication number
CN101110942B
CN101110942B CN2007101361045A CN200710136104A CN101110942B CN 101110942 B CN101110942 B CN 101110942B CN 2007101361045 A CN2007101361045 A CN 2007101361045A CN 200710136104 A CN200710136104 A CN 200710136104A CN 101110942 B CN101110942 B CN 101110942B
Authority
CN
China
Prior art keywords
image
mark
indication system
regulon
character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2007101361045A
Other languages
English (en)
Other versions
CN101110942A (zh
Inventor
伊与田哲男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN101110942A publication Critical patent/CN101110942A/zh
Application granted granted Critical
Publication of CN101110942B publication Critical patent/CN101110942B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/067Combinations of audio and projected visual presentation, e.g. film, slides
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Projection Apparatus (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了远程指示系统和方法。该远程指示系统包括:成像单元,其拍摄对象的图像;投影单元,其将标注图像投影在所述成像单元的成像区域中,所述标注图像是根据基于所拍摄的图像发出的指示而形成的;和标注调节单元,其根据所述成像单元的所述成像区域中的情况,对投影所述标注图像的条件进行调节。

Description

远程指示系统和方法
技术领域
本发明涉及远程指示系统和方法。
背景技术
在远程修理系统、远程维护系统、远程医疗系统、远程会议系统等中,必须从远程位置向对象侧发出各种指示,例如操作过程指示。作为这种能够从远程位置向对象侧发出指示的远程指示系统的例子,有一种已知的技术,通过该技术,存在于对象侧的对象的图像被摄像机拍摄并被发送给远程终端,在该远程终端中基于所拍摄的图像形成标注图像,并且,并且位于对象侧的投影仪将该标注图像投影到所述对象上(例如,参见美国申请公报第2004/0070674号)。
标注图像包括要显示的字符、符号等。然而,在显示具有指定尺寸的字符的标注图像的情况下,或者在调节投影位置以使标注图像显示在容易观看到的位置的情况下,必须在远程指示系统中预先设定字符尺寸等。因此,如果用户希望在操作期间调节字符尺寸等,用户需要中断操作,并且设定期望的字符尺寸。这不仅在用户侧是麻烦的,而且对于由远程指示系统顺利执行远程指示操作而言也是不希望的。
发明内容
鉴于上述情况提出了本发明,并且本发明提供了一种远程指示系统和方法,通过该远程指示系统和方法可以减少用于调节标注图像的工作负荷,并且可以顺利地执行远程指示操作。
根据本发明的第一方面,提供一种远程指示系统,该远程指示系统包括:成像单元,其拍摄对象的图像;投影单元,其将标注图像投影在所述成像单元的成像区域中,所述标注图像是根据基于所拍摄的图像发出的指示而形成的;和标注调节单元,其根据所述成像单元的所述成像区域中的情况,对投影所述标注图像的条件进行调节。
根据本发明的第二方面,可将该远程指示系统配置为使所述标注调节单元基于所拍摄的图像来调节所述投影条件。
根据本发明的第三方面,可将该远程指示系统配置为使所述标注调节单元根据所述标注图像和所述对象之间的关系来调节所述投影条件。
根据本发明的第四方面,可将该远程指示系统配置为使所述标注图像和所述对象之间的所述关系包括位置、尺寸、颜色和亮度之中的至少一个。
根据本发明的第五方面,可将该远程指示系统配置为使所述标注调节单元基于在所拍摄的图像中所述标注图像相对于所述对象的显示位置,来调节所述投影条件。
根据本发明的第六方面,在该远程指示系统中,所述标注调节单元可以调节所述投影条件,从而使所述标注图像与显示在所拍摄的图像中的所述对象重叠。
根据本发明的第七方面,在该远程指示系统中,当在所拍摄的图像中所述标注图像与所述对象不重叠时,所述标注调节单元可以调节所述投影条件,从而将所述标注图像放大至不与所述对象重叠的尺寸。
根据本发明的第八方面,在该远程指示系统中,当在所拍摄的图像中所述标注图像包含在所述对象中时,所述标注调节单元可以调节所述投影条件,从而将所述标注图像放大至可被包含在所述对象中的尺寸。
根据本发明的第九方面,在该远程指示系统中,所述标注调节单元可以调节所述投影条件,以根据显示在所拍摄的图像中的所述标注图像相对于所述对象的角度来旋转所述标注图像。
根据本发明的第十方面,可将该远程指示系统配置为使所述标注调节单元根据所拍摄的图像中的与所述标注图像重叠的所述对象的颜色来调节针对所述标注图像的颜色的投影条件。
根据本发明的第十一方面,该远程指示系统还可包括:服务器,其管理所述成像单元和所述投影单元;以及远程终端,其从所述服务器接收所拍摄的图像,包括所述标注调节单元,并且将经调节的标注图像发送到所述服务器。
根据本发明的第十二方面,可将该远程指示系统配置为使所述标注调节单元被设计成通过操作来激活和停止。
根据本发明的第十三方面,可将该远程指示系统配置为使所述标注调节单元包括推荐单元,当为所述标注图像指定了写入位置时,该推荐单元根据与所述对象的形状和位置有关的信息以及与背景有关的信息,为所述标注图像设定推荐的尺寸或推荐的写入方向。
根据本发明的第十四方面,可将该远程指示系统配置为,当指定了作为所述标注图像的字符标注的写入位置时,所述推荐单元根据与所述对象的形状和位置有关的信息以及与所述背景有关的信息,为所述字符标注设定推荐的字符尺寸或推荐的写入方向。
根据本发明的第十五方面,可将该远程指示系统配置为使所述标注调节单元包括表信息,该表信息用于限定所述字符标注的写入位置、所述字符标注的绘图范围的尺寸和位置、以及所述字符标注的字符尺寸或写入方向之间的关系。
根据本发明的第十六方面,提供了一种方法,该方法包括:利用成像单元拍摄对象的图像;将标注图像投影在所述成像单元的成像区域中;以及根据所述成像单元的所述成像区域的情况,对投影所述标注图像的条件进行调节。
根据本发明的第一方面,可以对投影所述标注图像的条件进行自动调节。因此可以减少用户在远程指示系统中的操作负担,并且实现了顺利的远程指示操作。
根据本发明的第二方面,可以减少用户在远程指示系统中的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第三方面,可以减少用户的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第四方面,可以进行精细的调节。
根据本发明的第五方面,可以减少用户的设定用于调节标注图像的投影条件的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第六方面,可以减少用户的调节标注图像的显示位置的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第七方面,可以减少用户的调节标注图像的尺寸的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第八方面,可以减少用户的调节标注图像的尺寸的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第九方面,可以减少用户的调节标注图像的旋转角度的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第十方面,可以减少用户的调节标注图像的颜色的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第十一方面,可以通过远程终端来调节标注图像的显示格式,并且可以将标注图像投影到服务器所控制的投影单元上。
根据本发明的第十二方面,如果标注调节单元的功能不适合用户,那么可以相应地停止该功能。
根据本发明的第十三方面,可以减少用户的调节标注图像的尺寸或者写入方向的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第十四方面,可以减少用户的调节字符标注的字符尺寸或者写入方向的操作负担,并且可以顺利地执行远程指示操作。
根据本发明的第十五方面,因为根据对象和背景的情况的字符尺寸或者写入方向是基于表信息进行推荐的,所以字符标注变得更清楚可见。
根据本发明的第十六方面,可以对投影标注图像的条件进行自动调节。因此可以减少用户在远程指示系统中的操作负担,并且实现了顺利的远程指示操作。
附图说明
将基于附图详细地描述本发明的示例性实施方式,在附图中:
图1示出了根据本发明的远程指示系统的结构;
图2示出了显示在屏幕上的对象之间的位置关系;
图3是远程终端的功能框图;
图4是示出了由远程终端的计算机执行的示例操作的流程图;
图5A和图5B示出了显示装置中的显示示例和对象的轮廓图像;
图6A和图6B是示出了由远程终端的计算机执行的操作的实施例的流程图;
图7A和图7B示出了未经调节的标注图像的实施例;
图8A和图8B示出了经调节的标注图像的实施例;
图9A和图9B示出了经调节的标注图像的另一实施例;
图10A和图10B示出经调节的标注图像的又一实施例;
图11示出了存储在存储器中的表信息的实施例;以及
图12A和图12B示出了基于图11所示的表信息在显示装置上显示的绘图区域的实施例。
具体实施方式
下面参照附图来描述本发明的示例性实施方式。
图1示出了根据本发明的示例性实施方式的远程指示系统的结构。图2示出了白板和对象之间的位置关系。
如图1所示,该远程指示系统包括对象侧装置100、远程终端300等。对象侧装置100和远程终端300通过网络200相连接。虽然图1中仅示出一个远程终端300,但是两个或更多个远程终端300可以通过网络200而连接到对象侧装置100的服务器25(稍后描述)。
对象侧装置100包括作为成像单元的摄像机10、作为投影单元的投影仪20以及作为控制器的服务器25。
摄像机10例如由CCD(电荷耦合器件)摄相机形成。将摄像机10定位在用以拍摄放置在白板33前方的对象31和32的图像的位置处。所拍摄的图像被读入服务器25中。所述对象包括位于摄像机10的成像区域内的所有事物。
投影仪20与摄像机10相邻,并且被定位成使投影仪20的视角(视野)与摄像机10的视角(视野)基本上相同。投影仪20由液晶投影仪等形成。将液晶投影仪等用作投影仪20。投影仪20可以将标注图像投影到存在于摄像机10的视野(视角)内的任何对象上,而不是仅可投影到对象31或者32上。如图2所示,对象31和32位于白板33前方的成像区域AR内。然而,摄像机10还拍摄作为另一对象的白板33的图像,并且标注图像AN可以投影到白板33上。
服务器25控制摄像机10和投影仪20的操作,并且还通过网络200与远程终端300交换各种信息。服务器25还将由摄像机10拍摄的图像发送到远程终端300,并且根据基于所拍摄的图像而从远程终端300发出的指示使投影仪20将标注图像投影到对象31或对象32或者白板33上。每个标注图像可以包含任何种类的图像,例如线、字符、符号、图形、颜色、字体类型(字体)。
远程终端300包括:显示装置330,即液晶显示器、CRT显示器等;连接到网络200的计算机310;以及连接到计算机310的指针装置(鼠标)320。
显示装置330在其显示屏幕331上显示从对象侧装置100发送的图像等。
图3是示出了远程终端300的计算机310的组件的功能框图。图3所示的各个功能框利用诸如CPU的处理器、诸如SRAM或者DRAM的半导体存储装置、硬件以及合适的软件来实现。
计算机310包括图像接收单元311、存储器312、标注发送单元313、轮廓图(contour map)产生单元314、控制器315以及标注调节单元316。
图像接收单元311接收在成像区域中拍摄的图像,例如从服务器25发送的对象31和32的图像以及标注图像AN。图像接收单元311将这些图像存储在存储器312中。
存储器312不仅存储所拍摄的图像,而且还存储这样的数据,诸如从轮廓图产生单元314产生的轮廓图像、从标注调节单元316产生的经调节的标注图像、以及用于显示标注图像的绘图命令。在下文中,所述数据将被称为标注数据。
标注发送单元313将标注数据发送到服务器25。
轮廓图产生单元314根据存储在存储器312中的拍摄图像,产生轮廓图像。更具体地说,对从存储器312提取出的拍摄图像执行轮廓提取操作(边缘提取操作),从而形成轮廓图像。每次更新图像数据时执行该过程,并且将所产生的轮廓图像存回存储器312中。轮廓图产生单元314还将与所产生的轮廓图像的四个角有关的坐标信息存储在存储器312中,并且将与轮廓图像中被对象遮挡的部分有关的坐标信息存储在存储器312中。
标注调节单元316基于存储在存储器312中的轮廓图像以及输入到计算机310中的标注图像,产生用于调节显示标注图像的条件的标注数据。将用于调节显示条件的标注数据存储在存储器312中。
控制器315对存储器312、轮廓图产生单元314和标注调节单元316进行共同控制。
现在参照图4、图5A和图5B来描述具有上述结构的远程指示系统的一系列操作。
图4是示出了由远程终端的计算机执行的轮廓图像产生操作的实施例的流程图。图5A和图5B示出了在显示装置上显示对象的实施例以及该实施例中的轮廓图像。
首先,如图4所示,计算机310从服务器25逐个地接收对象31和32的拍摄图像、标注图像AN等(步骤S1)。然后,计算机310确定所接收的拍摄图像是否已被更新(步骤S2)。更具体地说,对所接收的拍摄图像与在一定量的时间之前接收并已经存储在存储器312中的拍摄图像进行比较。如果所接收的拍摄图像与所存储的拍摄图像不匹配,则确定了所接收的拍摄图像是经更新的图像。
如果所述拍摄图像是经更新的图像,则对所接收的拍摄图像执行轮廓提取操作,以产生轮廓图像(步骤S3)。例如,显示装置330从计算机310接收拍摄图像,并且将对象31和对象32以及标注图像AN显示在显示屏幕331上,如图5A所示。然后,计算机310基于在显示屏幕331上显示的对象31等,产生轮廓图像IM,在该轮廓图像IM中,如图5B所示,对象31和对象32以及标注图像AN为阴影部分BL,并且背景部分为空白部分WH。将与轮廓图像IM的四个角有关的坐标信息、与阴影部分BL有关的坐标信息、以及轮廓图像IM存储在存储器312中。显示屏幕331具有与轮廓图像IM相同的尺寸。使用与显示屏幕331和轮廓图像IM有关的共通坐标信息,计算机310的标注调节单元316确定阴影部分BL、空白部分WH、指定点(稍后描述)和绘图区域(稍后描述)的位置和尺寸。在适当的时候将与阴影部分BL、空白部分WH、指定点和绘图区域有关的坐标信息存储在存储器312中。
在确认了轮廓图像IM被存储在存储器312中之后,计算机310继续接收拍摄图像(步骤S1)。
如果在步骤S2中确定了所述拍摄图像不是经更新的图像,则计算机310确定是否存在标注图像的输入(步骤S4)。如果没有标注图像的输入,则计算机310继续接收拍摄图像(步骤S1)。如果存在标注图像的输入,则计算机310将该标注图像存储为数据(步骤S5)。
现在参照图6A至图10B来描述对显示标注图像的条件进行调节的操作。
图6A和图6B是示出了由远程终端的计算机(或者确切地为标注调节单元316)执行的操作的实施例的流程图。图7A和图7B示出了未经调节的标注图像的实施例。图8A至图10B示出了经调节的标注图像的实施例。
首先,描述显示标注图像的条件。
当计算机310获得标注数据(步骤S11)时,计算机310确定轮廓图像IM的阴影部分是否与通过标注数据确定的绘图区域的指定位置(在下文中称为指定点)重叠(步骤S12)。
标注数据包括用于限定显示的字符等的绘图区域的数据(在下文中称为绘图区域数据)以及用于限定绘图区域的显示位置的数据(在下文中称为指定点数据)。更具体地说,绘图区域数据是用于限定要显示的字符等的绘图区域的坐标信息,而指定点数据是用于限定绘图区域的显示位置的坐标信息。因此,当计算机310在显示屏幕331上显示字符形式的标注图像(在下文中称为字符标注图像ANL)时,计算机310将绘图区域设定在由指定点数据指定的位置处,并且在显示屏幕331上显示在该绘图区域中显示的字符。
例如,在图7A中,轮廓图像IM中的字符标注图像ANL的指定点50与标注图像AN的阴影部分发生重叠。在这种情况下,计算机310检测与指定点50有关的位置信息以及与标注图像AN的阴影部分有关的位置信息,并且在步骤S12中基于所述位置信息确定出指定点50与轮廓图像IM的阴影部分发生重叠。
然后,计算机310确定字符标注图像ANL是否被包含在阴影部分中(步骤S13)。例如,在图7A中,指定点50与标注图像AN的阴影部分发生重叠。然而,显示在绘图区域ARD中的字符仅有一部分与标注图像AN的阴影部分发生重叠,并且所述字符的其余部分显示在空白区域中。在这种情况下,计算机310确定出字符标注图像ANL未被包含在阴影部分中。
同时,在图8A中,指定点50与对象31的阴影部分发生重叠,并且显示在绘图区域ARD中的所有字符也与对象31的阴影部分发生重叠。在这种情况下,计算机310确定出字符标注图像ANL被包括在阴影部分中。
如果字符标注图像ANL包括在阴影部分中,则计算机310将字符标注图像ANL的尺寸增大到可被包括在阴影部分中的最大尺寸(步骤S15)。例如,在图8A中,显示在绘图区域ARD中的字符部分的尺寸没有对象31的阴影部分的最大尺寸那么大。但是,通过步骤15的过程,可将字符部分的尺寸增大到对象31的阴影部分的最大尺寸,如图8B所示。
同时,在指定点50与轮廓图像IM中的阴影部分不重叠的情况下,计算机310确定显示在绘图区域ARD中的字符是否与轮廓图像IM中的阴影部分发生重叠(步骤S14)。例如,在图9A中,指定点50与轮廓图像IM中的任何阴影部分都不重叠,并且,显示在绘图区域ARD中的字符与轮廓图像IM中的任何阴影部分也不重叠。在这种情况下,基于与空白部分或阴影部分有关的坐标信息以及与绘图区域有关的坐标信息,将字符部分的尺寸增大至使字符与轮廓图像IM中的任何阴影部分都不重叠的尺寸(步骤S16),如图9B所示。
同时,在图10A中,指定点50与轮廓图像IM中的任何阴影部分都不重叠,但是显示在绘图区域ARD中的字符部分中的一部分与对象32的阴影部分发生重叠。在这种情况下,计算机310根据默认字符尺寸(在远程指示系统中预先设定的初始值)计算绘图尺寸(步骤S17)。基于与阴影部分和绘图区域有关的坐标信息,计算机310计算绘图区域ARD的旋转角度,并将绘图区域ARD及其中显示的字符部分关于指定点50旋转所述旋转角度,从而使绘图区域ARD平行于对象32的阴影部分的距指定点50最近的纵向倾斜,如图10B所示。
接下来,描述对标注图像执行的颜色调节。
计算机310确定,相对于绘图区域周围的图像的平均亮度,字符的指定颜色的亮度是否在动态范围的1/4内(步骤S19)。例如,如图8A所示,周围图像的平均亮度可由对象31的颜色来表示。如果在对显示在绘图区域ARD中的字符的颜色与对象31的颜色进行比较时,对象31的颜色的亮度等于或者小于动态范围(图像的浓度值的范围)的1/4,则计算机310确定所述字符的颜色与对象31的颜色相似,并且反转字符的亮度,如图8B所示(步骤S20)。
同时,如果相对于绘图区域周围的图像的平均亮度,所述字符的指定颜色的亮度不在动态范围的1/4内,则计算机310确定整个拍摄图像的平均亮度是否在1/2内(步骤S21)。如果整个拍摄图像较暗,则暗颜色(例如黑色)的字符在显示屏幕331上是不可见的,因此,将这些字符设置为白色(步骤S22)。如果整个拍摄图像的平均亮度不在1/2内,则计算机310将这些字符设置成默认颜色(步骤S23)。
如上所述,计算机310基于指示字符标注图像ANL的显示条件和显示颜色的标注数据来产生字符绘图命令,并将该字符绘图命令发送到服务器25(步骤S24)。当接收到显示条件等已被调整的字符绘图命令时,服务器25使投影仪20投影标注图像。
在由远程终端的计算机执行的图6A和图6B的操作中,当得到标注数据(绘图区域数据和指定点数据)时,根据绘图区域的指定位置(指定点)和轮廓图像IM的阴影部分之间的位置关系,自动确定字符尺寸和字符位置(步骤S12至S18)。另选的是,当得到指定点数据(或者与指定点50有关的坐标信息)时,计算机310可以在显示装置330上在具有文本框等的绘图区域中以推荐字符尺寸(例如,8号、10号、12号)或者沿推荐写入方向(例如,垂直方向、水平方向或者与对象的外形平行的方向)显示字符。标注调节单元316基于存储在存储器312中的表信息,来调节绘图区域的显示位置和尺寸、字符尺寸和写入方向。
图11示出了存储在存储器312中的表信息的实施例。在图11中,可以根据要绘制的字符的数目和尺寸来改变绘图区域的尺寸和位置。此外,该表信息可以仅包括推荐字符尺寸或者推荐写入方向。
图12A和图12B示出了基于图11所示的表信息而在显示装置330上显示的绘图区域的实施例。
在图12A中,指定点50与任何对象和标注图像AN都不重叠,并且在指定点50的周围(向右5至100个像素的距离)存在宽的背景(空白部分)。因此,显示了在水平方向上有80个像素并且在垂直方向上有14个像素的绘图区域。在该绘图区域中,可以在水平方向上写入12号尺寸的字符。
在图12B中,指定点50与对象和标注图像AN不重叠,但是对象32位于指定点50附近(向右5至50个像素的距离)。因此,显示了在纵向上有12个像素并且在横向上有40个像素的绘图区域。该绘图区域呈矩形,该矩形与对象32的外形平行地延伸。在该绘图区域中,可以在与对象32的外形平行的方向上写入10号尺寸的字符。
如上所述,当指定了字符标注图像的写入位置时,标注调节单元316可以具有如下功能:根据与对象的形状和布置有关的信息以及与背景有关的信息,为字符标注推荐字符尺寸或者写入方向。因此,可以减少用于调节要绘制为字符标注图像的字符标注的尺寸或写入方向的操作负担,并且可以顺利地执行远程指示操作。此外,因为根据对象和背景的条件的字符尺寸或写入方向是基于表信息进行推荐的,所以字符标注变得更加清楚可见。
此外,当指定了标注图像的写入位置时,标注调节单元316可以具有如下功能:根据与对象的尺寸和布置有关的信息以及与背景有关的信息,来推荐标注图像的尺寸或者写入方向。因此,可以减少用于调节标注图像的尺寸或者写入方向的操作负担,并且可以顺利地执行远程指示操作。
应该注意,本发明不限于上述示例性实施方式,但是在不脱离本发明的范围的情况下,可以对本发明进行各种修改。例如,根据本发明的程序可以通过通信装置提供,或者可以存储在记录介质(例如CD-ROM)中。
虽然在上述示例性实施方式中,一个服务器控制摄像机和投影仪,但是例如两个或更多个服务器可以控制摄像机和投影仪。
此外,在对在远程指示系统中预先设定的标注图像中的字符等的指定颜色进行调节的情况下,可以使该标注图像中的字符明暗不同以提高可见度。
在由于用于放大字符标注图像的调节操作而使投影在对象上的标注图像中的字符部分变形的情况下,可以通过仿射变换等来校正该变形。此外,可以使用传感器等来代替成像单元,并且可以根据在传感器的检测范围内的状态来调节投影条件。
如果标注调节单元316的某功能不适于用户,则可将用于激活或者停止该功能的开关添加到标注调节单元316,从而可以与需要该功能的其他用户共享标注调节单元316。
如目前为止所描述的,根据本发明,可以自动调节标注图像,并且在本发明的远程指示系统中无需预先设定用于调节显示标注图像的条件。因此,可以实现更高的工业适用性。
出于例示和说明的目的,提供了对本发明的示例性实施方式的前述描述。这不是想要穷举或者将本发明限制于所公开的确切形式。显然,对于本领域的技术人员来说,很多修改和变型是显而易见的。选择并描述这些示例性实施方式是为了最好地解释本发明的原理及其实际应用,从而使本领域的技术人员能够针对适于所构想的具体用途的各种示例性实施方式和各种变型来理解本发明。本发明的范围旨在由所附权利要求及其等同物限定。

Claims (16)

1.一种远程指示系统,该远程指示系统包括:
成像单元,其拍摄对象的图像;
投影单元,其将标注图像投影在所述成像单元的成像区域中,所述标注图像是根据基于所拍摄的图像发出的指示而形成的;和
标注调节单元,其根据所述成像单元的所述成像区域中的情况,对投影所述标注图像的条件进行自动调节。
2.根据权利要求1所述的远程指示系统,其中,所述标注调节单元基于所拍摄的图像来调节所述投影条件。
3.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元根据所述标注图像和所述对象之间的关系来调节所述投影条件。
4.根据权利要求3所述的远程指示系统,其中,所述标注图像和所述对象之间的所述关系包括位置、尺寸、颜色和亮度之中的至少一个。
5.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元基于在所拍摄的图像中所述标注图像相对于所述对象的显示位置,来调节所述投影条件。
6.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元调节所述投影条件,从而使所述标注图像与显示在所拍摄的图像中的所述对象重叠。
7.根据权利要求1或2所述的远程指示系统,其中,当在所拍摄的图像中所述标注图像与所述对象不重叠时,所述标注调节单元调节所述投影条件,从而将所述标注图像放大至不与所述对象重叠的尺寸。
8.根据权利要求1或2所述的远程指示系统,其中,当在所拍摄的图像中所述标注图像包含在所述对象中时,所述标注调节单元调节所述投影条件,从而将所述标注图像放大至可被包含在所述对象中的尺寸。
9.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元调节所述投影条件,以根据显示在所拍摄的图像中的所述标注图像相对于所述对象的角度来旋转所述标注图像。
10.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元根据所拍摄的图像中的与所述标注图像重叠的所述对象的颜色来调节针对所述标注图像的颜色的投影条件。
11.根据权利要求1或2所述的远程指示系统,该远程指示系统还包括:
服务器,其管理所述成像单元和所述投影单元;以及
远程终端,其从所述服务器接收所拍摄的图像,包括所述标注调节单元,并且将经调节的标注图像发送到所述服务器。
12.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元被设计成通过操作来激活和停止。
13.根据权利要求1或2所述的远程指示系统,其中,所述标注调节单元包括推荐单元,当为所述标注图像指定了写入位置时,该推荐单元根据与所述对象的形状和位置有关的信息以及与背景有关的信息,为所述标注图像设定推荐的尺寸或推荐的写入方向。
14.根据权利要求13所述的远程指示系统,其中,当指定了作为所述标注图像的字符标注的写入位置时,所述推荐单元根据与所述对象的形状和位置有关的信息以及与所述背景有关的信息,为所述字符标注设定推荐的字符尺寸或推荐的写入方向。
15.根据权利要求14所述的远程指示系统,其中,所述标注调节单元基于表信息来调节绘图区域的显示位置和尺寸、字符尺寸和写入方向,该表信息用于限定所述字符标注的写入位置、所述字符标注的绘图范围的尺寸和位置、以及所述字符标注的字符尺寸或写入方向之间的关系。
16.一种远程指示方法,该方法包括:
利用成像单元拍摄对象的图像;
将标注图像投影在所述成像单元的成像区域中;以及
根据所述成像单元的所述成像区域的情况,对投影所述标注图像的条件进行自动调节。
CN2007101361045A 2006-07-18 2007-07-17 远程指示系统和方法 Active CN101110942B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2006196232 2006-07-18
JP2006196232 2006-07-18
JP2006-196232 2006-07-18
JP2007-059277 2007-03-08
JP2007059277A JP5092459B2 (ja) 2006-07-18 2007-03-08 遠隔指示システム及び遠隔指示システム用のプログラム
JP2007059277 2007-03-08

Publications (2)

Publication Number Publication Date
CN101110942A CN101110942A (zh) 2008-01-23
CN101110942B true CN101110942B (zh) 2011-12-14

Family

ID=38971053

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101361045A Active CN101110942B (zh) 2006-07-18 2007-07-17 远程指示系统和方法

Country Status (3)

Country Link
US (1) US7764307B2 (zh)
JP (1) JP5092459B2 (zh)
CN (1) CN101110942B (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5088018B2 (ja) * 2007-06-28 2012-12-05 富士ゼロックス株式会社 画像処理装置及び制御プログラム
JP5298728B2 (ja) * 2008-09-24 2013-09-25 富士ゼロックス株式会社 画像送信装置、画像送信プログラム、及び画像通信システム
JP2010224015A (ja) * 2009-03-19 2010-10-07 Sanyo Electric Co Ltd 投写型映像表示装置及び記載ボード及び投写映像システム
KR20110069958A (ko) * 2009-12-18 2011-06-24 삼성전자주식회사 프로젝터 기능의 휴대 단말기의 데이터 생성 방법 및 장치
JP5517705B2 (ja) * 2010-04-01 2014-06-11 キヤノン株式会社 投影装置
US8902260B2 (en) * 2010-09-01 2014-12-02 Google Inc. Simplified creation of customized maps
JP5216834B2 (ja) * 2010-11-08 2013-06-19 株式会社エヌ・ティ・ティ・ドコモ オブジェクト表示装置及びオブジェクト表示方法
JP6102079B2 (ja) * 2012-04-05 2017-03-29 カシオ計算機株式会社 投影装置、投影方法及びプログラム
JP6066706B2 (ja) * 2012-12-11 2017-01-25 キヤノン株式会社 情報処理システム、情報処理方法及びプログラム
JP6287161B2 (ja) * 2013-12-18 2018-03-07 セイコーエプソン株式会社 投写装置および投写方法
CN104104929A (zh) * 2014-02-11 2014-10-15 中兴通讯股份有限公司 一种远程投影方法、装置及系统
WO2015121530A1 (en) * 2014-02-17 2015-08-20 Delta Cygni Labs Oy Method and apparatus for visual communication
CN105426900A (zh) * 2014-09-18 2016-03-23 董醒华 钥匙照片的阴影分析法
CN106528937B (zh) * 2016-10-10 2020-04-28 中广核工程有限公司 一种基于pdms出图避免标注信息重叠的系统和方法
CN106775525A (zh) * 2016-12-02 2017-05-31 北京小米移动软件有限公司 控制投影仪的方法及装置
CN111052218B (zh) 2017-08-31 2022-04-19 三菱电机株式会社 光学设备控制装置、光学设备控制方法和存储介质
JP2019161397A (ja) * 2018-03-12 2019-09-19 キヤノン株式会社 制御装置、プログラム、及び制御方法
JP2020114778A (ja) * 2020-02-25 2020-07-30 パナソニックIpマネジメント株式会社 投影指示装置、荷物仕分けシステムおよび投影指示方法
US11269478B2 (en) * 2020-07-06 2022-03-08 Ansys, Inc. Adapted overlay help system
WO2022067608A1 (zh) * 2020-09-30 2022-04-07 中国科学技术大学 一种远程手术指导和教学装置及其方法与医疗设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1277410A (zh) * 1999-06-09 2000-12-20 施乐公司 检测文件安全标记的数字成像方法和装置
CN1313571A (zh) * 2000-03-13 2001-09-19 鸿友科技股份有限公司 图像扫描装置及快速定位方法
CN1361633A (zh) * 1998-01-23 2002-07-31 松下电器产业株式会社 图像传送方法、图象处理方法和图象处理装置
US6597410B1 (en) * 1999-11-10 2003-07-22 International Business Machines Corporation System for the automatic adaptation of projector images and a method for the implementation thereof

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07112224B2 (ja) * 1986-07-04 1995-11-29 株式会社東芝 電子会議システム用図形表示装置
US6654060B1 (en) * 1997-01-07 2003-11-25 Canon Kabushiki Kaisha Video-image control apparatus and method and storage medium
JP2002288102A (ja) * 2001-03-26 2002-10-04 Sharp Corp 通信端末装置、チャットサーバ装置、発言順序の明示方法、発言順序の明示方法を実現させるためのプログラム、およびチャットシステム
JP2004128614A (ja) * 2002-09-30 2004-04-22 Toshiba Corp 画像表示制御装置及び画像表示制御プログラム
US7333135B2 (en) * 2002-10-15 2008-02-19 Fuji Xerox Co., Ltd. Method, apparatus, and system for remotely annotating a target
US7224847B2 (en) * 2003-02-24 2007-05-29 Microsoft Corp. System and method for real-time whiteboard streaming

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1361633A (zh) * 1998-01-23 2002-07-31 松下电器产业株式会社 图像传送方法、图象处理方法和图象处理装置
CN1277410A (zh) * 1999-06-09 2000-12-20 施乐公司 检测文件安全标记的数字成像方法和装置
US6597410B1 (en) * 1999-11-10 2003-07-22 International Business Machines Corporation System for the automatic adaptation of projector images and a method for the implementation thereof
CN1313571A (zh) * 2000-03-13 2001-09-19 鸿友科技股份有限公司 图像扫描装置及快速定位方法

Also Published As

Publication number Publication date
CN101110942A (zh) 2008-01-23
US7764307B2 (en) 2010-07-27
JP5092459B2 (ja) 2012-12-05
JP2008048377A (ja) 2008-02-28
US20080018745A1 (en) 2008-01-24

Similar Documents

Publication Publication Date Title
CN101110942B (zh) 远程指示系统和方法
US7679643B2 (en) Remote instruction system, remote instruction method, and program product for remote instruction
US7643066B2 (en) Method and apparatus for producing frame accurate position data in a PTZ dome camera with open loop control
US10855916B2 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
CN117378196A (zh) 图像校正方法及拍摄设备
US20190289206A1 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
US11073917B1 (en) Reading support system and method by relating book object to interactive content
EP4287610A1 (en) Focusing method and apparatus, electronic device, and medium
CN111045577A (zh) 一种横竖屏切换方法、可穿戴设备和具有存储功能的装置
JP2020178248A (ja) 投影制御装置、投影制御方法、投影システム、プログラム、記憶媒体
CN114222188A (zh) 基于旋转屏的全屏显示方法、装置、设备及存储介质
CN112130736A (zh) 一种控制方法、电子设备及计算机可读存储介质
US11218662B2 (en) Image processing device, image processing method, and projection system
CN114007053B (zh) 图像生成方法、图像生成系统和记录介质
CN112533049B (zh) 图片跟随屏幕旋转处理方法、装置、智能终端及介质
CN107527369B (zh) 图像校正方法、装置、设备和计算机可读存储介质
JP4661499B2 (ja) プレゼンテーション制御装置およびプレゼンテーションシステム
CN114979599B (zh) 激光投影设备及投影图像的校正方法
CN115174878B (zh) 投影画面校正方法、装置和存储介质
CN114339179B (zh) 投影校正方法、装置、存储介质以及投影设备
CN112672057B (zh) 拍摄方法及装置
WO2012111121A1 (ja) プロジェクタおよび議事録情報生成方法
JP2013145949A (ja) 投影システム、および重畳画像の画合わせの調整方法
CN112394894A (zh) 显示数据处理、显示方法、装置、终端及可读存储介质
CN111240541A (zh) 界面切换方法、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Tokyo

Patentee after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo

Patentee before: Fuji Xerox Co.,Ltd.

CP01 Change in the name or title of a patent holder