CN101415111A - 信息处理装置和指示系统 - Google Patents

信息处理装置和指示系统 Download PDF

Info

Publication number
CN101415111A
CN101415111A CNA2008102104334A CN200810210433A CN101415111A CN 101415111 A CN101415111 A CN 101415111A CN A2008102104334 A CNA2008102104334 A CN A2008102104334A CN 200810210433 A CN200810210433 A CN 200810210433A CN 101415111 A CN101415111 A CN 101415111A
Authority
CN
China
Prior art keywords
image
profile
outside
inboard
flow rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008102104334A
Other languages
English (en)
Other versions
CN101415111B (zh
Inventor
三宅弘之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN101415111A publication Critical patent/CN101415111A/zh
Application granted granted Critical
Publication of CN101415111B publication Critical patent/CN101415111B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)
  • Projection Apparatus (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及信息处理装置和指示系统。该信息处理装置根据由图像捕获装置捕获的多个图像识别对象物,确定所识别的对象物的轮廓,并且计算所确定的轮廓的内侧和外侧的平均亮度。此外,信息处理装置确定轮廓的内侧和外侧的平均亮度之差不小于预定值,在所述差不小于预定值时产生调节图像,所述调节图像使灰度增加,以使得轮廓的内侧和外侧中的任一侧的亮度增加,轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度。调节图像由投影装置投影在对象物上,然后由图像捕获装置捕获。

Description

信息处理装置和指示系统
技术领域
本发明涉及信息处理装置和指示系统。
背景技术
传统上已知这样的指示系统,其包括与摄像机和投影仪相连接的服务器(例如,计算机)和经由网络与该服务器相连接的客户端(例如,计算机)(例如,参看美国专利申请公开No.2004/0070674与日本专利申请公开No.2005-33756)。
在此指示系统中,与服务器相连接的摄像机捕获对象物,并经由网络将所捕获的图像传送到客户端。客户端在显示装置的显示屏上显示所捕获的图像。当注释图像(annotation image)被写入到显示屏中时,客户端将注释图像经由网络传送到服务器。服务器将从客户端接收到的注释图像传送到投影仪。投影仪将所接收到的注释图像投影在包括对象物的投影区域的合适位置上(具体来说,此位置对应于客户端在所捕获的图像的范围中写入注释图像的位置)。
发明内容
提出本发明以提供一种信息处理装置和指示系统,它们能够在从投影装置将图像投影在包括对象物的区域上并且由图像捕获装置捕获该区域时,改进由对象物和其它区域的亮度差引起的可见度的下降。
根据本发明的第一方面,提供了一种信息处理装置,其连接到将从外部终端输入的注释图像投影在投影区域上的投影装置,和捕获该投影区域的图像捕获装置,该信息处理装置包括:识别部,其根据由所述图像捕获装置捕获的多个图像识别对象物;轮廓确定部,其确定所述识别部识别的所述对象物的轮廓;计算部,其计算由所述轮廓确定部确定的所述对象物的所述轮廓的内侧和外侧的平均亮度;确定部,其确定由所述计算部计算的所述轮廓的内侧的平均亮度和由所述计算部计算的所述轮廓的外侧的平均亮度之差不小于预定值;投影图像调节部,其在所述确定部确定所述差不小于所述预定值时产生调节图像,所述调节图像使灰度增加,以使得所述对象物的所述轮廓的内侧和外侧中的任一侧的亮度增加,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度;投影图像输入部,其将经所述投影图像调节部调节的调节图像输入到所述投影装置,并使所述投影装置将所述调节图像投影在所述对象物上;以及捕获控制部,其在所述投影装置将所述调节图像投影在所述对象物上的状态下,使所述图像捕获装置捕获所述对象物。
根据该结构,当所述差不小于预定值时,产生使所述对象物的所述轮廓的内侧和外侧中具有较低平均亮度的任一侧变亮的调节图像,从所述投影装置将该调节图像投影在包括所述对象物的区域上,并且由所述图像捕获装置捕获该区域。因此,能够获得对象物和其它区域的亮度差减小而可见度提高的捕获图像。
优选的是,所述计算部计算关于所述对象物的所述轮廓的内侧和外侧在单个方向上的亮度分布,并基于该亮度分布计算所述对象物的所述轮廓的内侧和外侧的平均亮度,并且所述投影图像调节部根据所述亮度分布的计算结果,在所述投影装置投影的图像中增加所述对象物的所述轮廓的内侧和外侧中的任一侧的灰度,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度。
根据该结构,根据关于所述对象物的所述轮廓的内侧和外侧在单个方向上的亮度分布而使所述对象物的所述轮廓的内侧和外侧中具有较低平均亮度的任一侧变亮。因此与不使用本发明的情况相比,能够获得通过少量操作提高了可见度的捕获图像。
优选的是,所述计算部确定穿过所述对象物的所述轮廓的内侧和外侧的单线,并且计算在该单线上与所述轮廓的内侧和外侧相对应的部分的平均亮度。
根据该结构,与不使用本发明的情况相比,用于计算所述对象物的所述轮廓的内侧和外侧的平均亮度的计算量减少了,因此处理速度变快了。
根据本发明的第二方面,提供了一种指示系统,其包括连接到投影装置和图像捕获装置的信息处理装置,所述投影装置将从外部终端输入的注释图像投影在投影区域上,所述图像捕获装置捕获所述投影区域,该信息处理装置包括:识别部,其根据由所述图像捕获装置捕获的多个图像识别对象物;轮廓确定部,其确定所述识别部识别的所述对象物的轮廓;计算部,其计算由所述轮廓确定部确定的所述对象物的所述轮廓的内侧和外侧的平均亮度;确定部,其确定由所述计算部计算的所述轮廓的内侧的平均亮度和由所述计算部计算的所述轮廓的外侧的平均亮度之差不小于预定值;投影图像调节部,其在所述确定部确定所述差不小于所述预定值时产生调节图像,所述调节图像使灰度增加,以使得所述对象物的所述轮廓的内侧和外侧中的任一侧的亮度增加,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度;投影图像输入部,其将经所述投影图像调节部调节的调节图像输入到所述投影装置,并使所述投影装置将所述调节图像投影在所述对象物上;捕获控制部,其在所述投影装置将所述调节图像投影在所述对象物上的状态下,使所述图像捕获装置捕获所述对象物;以及发送部,其向所述外部终端发送所述图像捕获装置捕获的至少一个图像,所述外部终端包括:接收部,其从所述信息处理装置接收所述图像捕获装置捕获的图像;和显示部,其显示所接收的图像。
根据该结构,当所述差不小于所述预定值时,使所述对象物的所述轮廓的内侧和外侧中具有较低平均亮度的任一侧变亮。因此,在从所述投影装置将所述调节图像投影在包括所述对象物的区域上,并且由所述图像捕获装置捕获该区域的状态下,能够获得所述对象物和其它区域之间的亮度关系落入预设范围内的捕获图像。此外,该捕获图像可以由所述外部终端显示。
附图说明
基于下面的附图详细描述本发明的示例实施方式,其中:
图1是示出根据本发明第一示例实施方式的指示系统的结构的框图;
图2是示出PC 1和PC 2的功能结构的框图;
图3A是示出PC 1的硬件结构的框图;
图3B是示出PC 2的硬件结构的框图;
图4A到4D是示出摄像机5所捕获的图像的示例的图,其中,图4A表示在没有对象物的状态下所捕获的图像,图4B表示在放置了对象物之后立即捕获的图像,图4C表示在照明过程之后所捕获的图像,图4D表示在添加了注释图像之后所捕获的图像;
图4E到4G是示出投影仪4的投影图像的示例的图,其中,图4E表示在初始状态下的投影图像,图4F表示在改变对象物轮廓内侧的亮度后的投影图像,图4G表示在添加了注释图像后的投影图像;
图5是示出由PC 1和PC 2执行的过程的流程图;
图6是示出在图5的步骤S3中执行的照明过程的流程图;
图7A是示出关于对象物轮廓的内侧和外侧在水平(横向)方向上的亮度分布的计算结果的示例的图;
图7B是示出在所捕获的图像中与轮廓的内侧相对应的部分的色调调节的示例的图;
图8A到8D是示出根据本发明第二示例实施方式的摄像机5所捕获的图像的示例的图,其中,图8A表示在没有对象物的状态下所捕获的图像,图8B表示在放置了对象物之后立即捕获的图像(与对象物对应的部分的捕获图像为白衰退图像),图8C表示在照明过程之后所捕获的图像(对象物轮廓的外侧变亮,由此对象物接近真实亮度),图8D表示在添加了注释图像之后所捕获的图像;
图8E到8G是示出投影仪4的投影图像的示例的图,其中,图8E表示在初始状态下的投影图像,图8F表示在改变对象物轮廓外侧的亮度后的投影图像,图8G表示在添加了注释图像后的投影图像;以及
图9是示出在图5的步骤S3中执行的照明过程的流程图。
具体实施方式
现在参考附图对本发明的示例实施方式进行描述。
(第一示例实施方式)
图1是示出根据本发明第一示例实施方式的指示系统的结构的框图。
该指示系统设有用作为服务器的个人计算机(PC)1和用作为客户端的个人计算机(PC)2。这些单元经由网络3彼此连接。PC 1连接有投影仪4(投影装置)、摄像机5(图像捕获装置)、扬声器7、以及麦克风。基于来自PC 1的控制命令,投影仪4经由半反镜(half mirror)发射全尺寸的黑色图像或者经由半反镜将注释图像等投影在对象物9和具有高亮度的颜色(这里为白色类型颜色)的屏幕11上。应当注意,注释图像包括任何类型的图像,如线、字符、符号、图形、颜色和字体。
摄像机5经由半反镜6捕获屏幕11包括对象物9所反射的图像,并且将所捕获的图像输出到PC 1。即,摄像机5捕获对象物9的整个图像。摄像机5被设置为使得摄像机5的视角和光轴与投影仪4的视角和光轴相同。
扬声器7输出诸如PC 2的用户从连接到PC 2的麦克风16输入的指示的声音。麦克风8输入诸如PC 1的用户的指示的声音,并将该声音输出到连接到PC 2的扬声器15。
PC 1经由网络3将由摄像机5捕获的图像输出到PC 2。PC 2连接到显示单元205(显示部)、扬声器15和麦克风16。显示单元205显示所捕获的图像的显示区域12和用户界面(UI)14。应当注意,PC 2可由包括显示单元205的一体化个人计算机组成。扬声器15输出诸如PC 1的用户从连接到PC 1的麦克风8输入的指示的声音。麦克风16输入诸如PC 2的用户的指示的声音,并将该声音输出到连接到PC 1的扬声器7。PC 1侧和PC 2侧的用户分别使用扬声器7和麦克风8以及扬声器15和麦克风16,来通过声音彼此通信。
UI 14包括一组按钮如笔按钮、文本按钮和擦除按钮以及由线和颜色限定的图标。在显示区域12中显示由摄像机5捕获的图像。在图1中,由摄像机5捕获的屏幕11包括对象物9的图像被显示在显示区域12中。例如,当通过稍后描述的操作单元204按下UI 16的笔按钮以在显示区域12中的特定位置(例如,在对象物9上)绘制图形等时,将关于该图形的信息从PC 2经由PC 1输出到投影仪4。基于关于该图形的信息,投影仪4将该图形绘制在与显示区域12的绘制了该图形的位置相对应的位置上(这里是对象物9上)。
PC 2将控制命令输出到PC 1以便控制投影仪4和摄像机5的操作(如摄像机5所捕获的图像的捕获角度和亮度,以及投影仪4所投影的图像的亮度)。
在图1中,客户端的数目仅仅是一个(PC 2),但是指示系统可以包括两个或更多个客户端(PC)。一部分或所有客户端可以位于远程地点。
图2是示出PC 1和PC 2的功能结构的框图。
PC 1包括:控制器101(识别部、轮廓确定部、计算部、确定部、投影图像调节部、投影图像输入部以及捕获控制部),其控制投影仪4、摄像机5、扬声器7和麦克风8以及整个设备的操作;发送和接收单元102(发送部),其经由网络3向/从PC2发送和接收信息和数据;存储器103,其存储控制程序、数据、信息等;以及接口(IF)单元104,其连接到投影仪4、摄像机5、扬声器7和麦克风8。此外,PC 1可以包括用于显示由摄像机5捕获的图像的显示单元105。控制器101连接到发送和接收单元102、存储器103、IF单元104和显示单元105。控制器101进一步经由IF单元104而连接到投影仪4、摄像机5、扬声器7和麦克风8。
PC 2包括:控制器201,其控制整个设备;发送和接收单元202(接收部),其经由网络3向/从PC 1发送和接收信息和数据;存储器203,其存储控制程序、数据、信息等;操作单元204,其由鼠标、键盘等形成;显示单元205(显示部),其显示所捕获的图像和输入的注释图像;接口(IF)单元206,其连接到扬声器15和麦克风16。控制器201连接到发送和接收单元202、存储器203、操作单元204、显示单元205、以及IF单元206。
图3A是示出PC 1的硬件结构的框图,而图3B是示出PC 2的硬件结构的框图。
PC 1包括:CPU 21,其控制整个设备;ROM 22,其存储控制程序;RAM 23,其用作为工作区域;硬盘驱动器(HDD)24,其存储各种信息和程序;网络接口26,其连接到另一计算机;以及USB(通用串行总线)接口28,其连接到USB设备(未示出)。CPU 21经由系统总线29连接到ROM 22、RAM 23、硬盘驱动器(HDD)24、网络接口26、以及USB接口28。PC 1经由USB接口28连接到投影仪4、摄像机5、扬声器7和麦克风8。应当注意,PC 1可以包括鼠标和键盘25以及显示器27。
控制器101等同于根据控制程序执行各种操作的CPU 21。发送和接收单元102等同于网络接口26,而存储器103等同于硬盘驱动器(HDD)24。显示单元105等同于显示器27。
PC 2包括:CPU 31,其控制整个设备;ROM 32,其存储控制程序;RAM 33,其用作为工作区域;硬盘驱动器(HDD)34,其存储各种信息和程序;鼠标和键盘35;网络接口36,其连接到另一计算机;显示器37,其由液晶监视器或CRT形成;以及USB(通用串行总线)接口38,其连接到USB设备(未示出)。CPU 31经由系统总线39连接到ROM 32、RAM33、硬盘驱动器(HDD)34、鼠标和键盘35、网络接口36、显示器37、以及USB接口38。PC2经由USB接口38连接到扬声器15和麦克风16。
控制器201等同于根据控制程序执行各种操作的CPU 31。发送和接收单元202等同于网络接口36,而存储器203等同于硬盘驱动器(HDD)34。操作单元204等同于鼠标和键盘35,而显示单元205等同于显示器37。
图4A到4D示出了摄像机5所捕获的图像的示例,并且图4E到4G示出了投影仪4的投影图像的示例。
摄像机5捕获没有对象物9的状态下的屏幕11,如图4A所示。当把对象物9置于摄像机5的捕获范围中时,摄像机5捕获对象物9和屏幕11,如图4B所示。当由PC 1执行稍后描述的照明过程时,对象物9上被照明,从而捕获明亮的对象物9,如图4C所示。图4C中的对象物9比图4B中的对象物9亮。在执行了照明过程并投影注释图像之后,由摄像机5捕获的图像在图4D中示出。图4D中的标号50指注释图像。
另一方面,例如,投影仪4投影初始状态下的全黑图像,如图4E所示。当由PC 1执行稍后描述的照明过程时,投影仪4投影图像,在该图像中,对象物9的轮廓60的外侧是黑色的,而对象物9的轮廓60的内侧是灰色的,如图4F所示。这样,当执行照明过程时,投影仪4投影对象物9的轮廓内侧的亮度增加的图像。因此,由摄像机5捕获的对象物9变得明亮,如图4C所示。在执行了照明过程之后,在图4G中示出了添加有注释图像的投影图像。图4G中的标号50指注释图像。
图5是示出由PC 1和PC 2执行的过程的流程图。
首先,现在描述由PC 1执行的过程。PC 1的控制器101经由投影仪4输出初始投影图像(步骤S1)。该初始投影图像是全黑图像。
其次,控制器101经由发送和接收单元102和网络3将由摄像机5捕获的图像输出到PC 2(步骤S2),并执行照明过程(步骤S3)。稍后描述照明过程的细节。
然后,控制器101等待直到控制器101接收到来自PC 2的命令为止(步骤S4)。具体来说,来自PC 2的命令包括表示注释图像的数据和该数据的绘图指示。表示注释图像的数据包括绘制该注释图像必需的向量信息、坐标信息等。例如,当注释图像是圆时,表示注释图像的数据是通过文本数据表示圆的中心和半径的信息。
其次,当发送和接收单元102接收到来自PC 2的命令时(步骤S5),控制器101根据该命令执行图像的投影过程(步骤S6)。具体来说,当从PC 2接收到表示注释图像的数据时,控制器101将该表示注释图像的数据输出到投影仪4。投影仪4基于该数据投影注释图像。
控制器101确定当前时间是否到达捕获的图像的预设存储定时(步骤S7)。例如,当设置了每隔0.2秒存储所捕获的图像时,所捕获的图像的预设存储定时为经过每个0.2秒的定时。当步骤S7的确定的答案为“是”时,控制器101将所捕获的图像存储在存储器103中。当步骤S7的确定的答案为“否”时,过程返回到步骤S4。
接着,控制器101确定是否已经完成所有要根据来自PC 2的命令执行的过程(步骤S9)。当步骤S9的确定的答案为“否”时,过程返回到步骤S4。另一方面,当步骤S9的确定的答案为“是”时,终止PC 1执行的过程。
接着,对由PC 2执行的过程进行描述。
当控制器201接收到来自操作单元204的命令的输入时(步骤S11),控制器201确定该命令是否为用于绘制注释图像的屏幕处理命令(步骤S12)。
当步骤S12的确定的答案为“否”时,过程继续进行到步骤S15(稍后描述)。当步骤S12的确定的答案为“是”时,控制器201根据屏幕处理命令在显示区域12中绘制注释图像(步骤S13)。
接着,控制器201经由发送和接收单元202将表示注释图像的数据作为命令发送到PC 1(步骤S14)。在步骤S5的过程中由发送和接收单元102接收被发送到PC 1的命令。
最后,控制器201确定所有应当由PC 2执行的过程是否都已经完成(步骤S15)。当步骤S15的确定的答案为“否”时,过程返回到步骤S11。另一方面,当步骤S15的确定的答案为“是”时,终止由PC 2执行的过程。
图6是示出在图5的步骤S3中执行的照明过程的流程图。
首先,控制器101根据由摄像机5捕获的图像的变化自动识别对象物9(步骤S21)。即,当由摄像机5捕获的多个顺序帧图像出现变化时,控制器101将变化完成后的帧图像与变化发生前的帧图像相比较,由此识别对象物9。更具体的是,控制器101将如图4B所示的摄像机5的捕获范围中设有对象物9的捕获图像与如图4A所示的摄像机5的捕获范围中未设置对象物9的捕获图像相比较,由此识别对象物9。
接下来,控制器101提取对象物9的轮廓(步骤S22)。在此过程中,使用公知的轮廓提取处理,如模板匹配方法和亮度逼近平面法。应当注意,在第一示例实施方式中,摄像机5被设置为使得摄像机5的视角和光轴与投影仪4经由半反镜6的视角和光轴相同。利用该设置,控制器101可以准确地捕获对象物9的轮廓。投影仪4的视角不必总是与摄像机5的视角相同。当投影仪4的视角与摄像机5的视角不同时,需要对固体物即对象物9进行形状测量等,以准确地将来自投影仪4的光投影到对象物9上,因此,优选的是投影仪4的视角与摄像机5的视角相同。
接着,控制器101计算包括在所捕获的图像中的对象物9的轮廓的内侧和外侧的平均亮度(步骤S23)。这里,平均亮度包括简单平均值、均方根、加权平均值等。此外,控制器101可以不仅计算平均亮度,而且计算可被视为与平均亮度等同的值(例如,未标准化的值等)。对于平均亮度的计算方法,完全可使用传统上已知的方法。例如,如在日本专利申请公开No.2003-264849的0017段之后所描述的,可以通过将RGB(红、绿、蓝)信息转变为HSI(色调、饱和度、强度)空间的图像信息来计算平均亮度。
这里,控制器101可以计算对象物9的轮廓的整个内侧和整个外侧的平均亮度。此外,控制器101可以确定穿过对象物9的轮廓的内侧和外侧的单线,并且计算在该单线上与轮廓的内侧和外侧相对应的部分的平均亮度。在这种情况下,平均亮度的后一计算方法的计算量相比于前一计算方法的计算量减少了,因此后一计算方法的处理速度变快。
控制器101确定所计算的对象物9的轮廓内侧的平均亮度与所计算的对象物9的轮廓外侧的平均亮度之差是否不小于预设阈值(步骤S24)。
在步骤S24中,当差不小于所述预设阈值(是)时,控制器101将轮廓内侧的平均亮度与轮廓外侧的平均亮度相互比较,选择具有低平均亮度(在第一示例实施方式的情况下,即轮廓内侧的平均亮度)的一个,并且将在所捕获的图像中与对象物9的轮廓内侧相对应的部分的颜色改变为灰色,即,将在所捕获的图像中与对象物9的轮廓内侧相对应的部分的灰度(即,指示灰阶的值)增加一个常量(步骤S25)。接着,过程返回到步骤S23。这里,使该灰度不为灰色而为白色,从而当注释图像被投影在对象物9上时很难看到注释图像,是不合适的。应当注意,可改变的灰度级可以具有一个阶段或多个阶段。当可改变的灰度级具有多个阶段时,在步骤S23到S25的循环过程中,控制器101重复增加在所捕获的图像中与对象物9的轮廓内侧相对应的部分的灰度级,直到对象物9的轮廓内侧的平均亮度与对象物9的轮廓外侧的平均亮度之差小于预设阈值为止。
在步骤S24中,当该差小于预设阈值时(否),控制器101完成照明过程,并且过程转到上面描述的步骤S4。
根据该照明过程,调节了在所捕获的图像中与对象物9的轮廓内侧对应的部分和在所捕获的图像中与对象物9的轮廓外侧对应的部分之间的对比度,在所捕获的图像中与对象物9的轮廓内侧对应的部分变亮了。当在对象物由深色组成而背景为白色类型颜色的状态下图像捕获装置捕获对象物时,所捕获的图像中的背景引起所谓的白衰退(white-fading),并且出现对象物太暗的情况。但是,如果对象物和其余部分之间的亮度差落入如上所述的预设范围内,则该亮度差会减小,因此提高了所捕获的图像的可见度。在第一示例实施方式的情况下,其它区域未和对象物9一样被照明。结果,即使把注释图像投影在屏幕11上的对象物9的周围部分上,也保证了对象物9及其周围部分之间的对比度。
作为上面提到的照明过程的变型例,控制器101可以计算关于对象物的轮廓内侧和外侧在单个方向(例如,水平(或横向)方向,或者垂直(或纵向)方向)上的亮度分布,并且根据计算结果增加在所捕获的图像中与对象物9的轮廓内侧相对应的部分的灰度。
例如,图7A示出了关于对象物9的轮廓内侧和外侧在水平(或横向)方向上的亮度分布的计算结果的示例。在这种情况下,对象物9的轮廓内侧的亮度从其左侧到其右侧递减。因此,控制器101将与对象物9的轮廓内侧相对应的部分的灰度从该部分的左侧到该部分的右侧逐步增大(参见图7B)。
(第二示例实施方式)
在第一示例实施方式中,描述了对象物9由深色组成并且使用白色类型屏幕11作为对象物9的背景的情况。在第二示例实施方式中,描述背景是黑板而对象物9由白色类型亮色形成的情况。
根据第二示例实施方式的指示系统、PC 1和PC 2的结构与上面描述的第一示例实施方式中的对应的指示系统、PC 1和PC 2相同,因此省略其描述。
图8A到8D示出了摄像机5所捕获的图像的示例,并且图8E到8G示出了投影仪4的投影图像的示例。
摄像机5在没有对象物9的状态下捕获黑板17,如图8A所示。因此,所捕获的图像是暗的。当把对象物9置于摄像机5的捕获范围中时,摄像机5捕获对象物9和黑板17,如图8B所示。在这种情况下,与对象物9相对应的部分的捕获图像变成所谓的白衰退图像,其中丢失了明亮部分的灰度。当由PC 1执行稍后描述的照明过程时,对象物9的轮廓外侧被照明,并且对象物9的轮廓外侧变亮。因此,对象物9接近真实亮度(即,用户直接看到对象物9时的亮度)。针对白衰退修正图8C中的对象物9,并且使图8C中的对象物9比图8B中的对象物9稍微变暗。在执行了照明过程并投影注释图像之后,在图8D中示出由摄像机5捕获的图像。图8D中的标号50指注释图像。
另一方面,例如,投影仪4投影初始状态下的全黑图像,如图8E所示。当由PC 1执行稍后描述的照明过程时,投影仪4投影图像,在该图像中对象物9的轮廓60外侧是灰色的而对象物9的轮廓60内侧是黑色的,如图8F所示。这样,当执行照明过程时,投影仪4投影对象物9的轮廓外侧的亮度增加的图像。因此,由摄像机5捕获的对象物9接近真实亮度(即,用户直接看到对象物9时的亮度),如图8C所示。在执行了照明过程之后,在图8G中示出了添加有注释图像的投影图像。图8G中的标号50指注释图像。
图9是示出在图5的步骤S3中执行的照明过程的流程图。应当注意,在第二示例实施方式中,PC 1和PC 2也执行与图5相同的过程。
图9中的步骤S21到S24的过程与图6中的步骤S21到S24的过程相同。
在步骤S24中,当差不小于预设阈值时(是),控制器101将轮廓内侧的平均亮度与轮廓外侧的平均亮度相互比较,选择具有低平均亮度(在第二示例实施方式的情况下,即轮廓外侧的平均亮度)的一个,并且将在所捕获的图像中与对象物9的轮廓外侧相对应的部分的颜色改变为灰色,即,将在所捕获的图像中与对象物9的轮廓外侧相对应的部分的灰度增加一个常量(步骤S35)。接着,过程返回到步骤S23。应当注意,可改变的灰度级可以具有一个阶段或多个阶段。当可改变的灰度级具有多个阶段时,在步骤S23到S35的循环过程中,控制器101重复增加在所捕获的图像中与对象物9的轮廓外侧相对应的部分的灰度级,直到对象物9的轮廓内侧的平均亮度与对象物9的轮廓外侧的平均亮度之差小于预设阈值为止。
在步骤S24中,当该差小于预设阈值时(否),控制器101完成照明过程,并且过程转到上面描述的步骤S4。
根据该照明过程,调节了在所捕获的图像中与对象物9的轮廓内侧对应的部分和在所捕获的图像中与对象物9的轮廓外侧对应的部分之间的对比度,在所捕获的图像中与对象物9的轮廓外侧对应的部分变亮了。在第二示例实施方式中,对象物9的轮廓外侧未和对象物9一样被照明。结果,即使把注释图像投影到对象物9上,也保证了对象物9及其周围部分之间的对比度。
作为上面提到的照明过程的变型例,控制器101可以计算关于对象物的轮廓内侧和外侧在单个方向(例如,水平(或横向)方向,或者垂直(或纵向)方向)上的亮度分布,并且根据计算结果增加在所捕获的图像中与对象物9的轮廓外侧相对应的部分的灰度。
可以向各PC提供记录有用于实现PC 1和PC 2的功能的软件程序的记录介质,并且各PC的CPU可以读取并执行记录在该记录介质上的程序。以这种方式,可以实现与上面描述的第一到第三示例实施方式相同的效果。例如,用于提供程序的记录介质可以是CD-ROM、DVD或SD卡。
可替换的是,各PC的CPU可以执行用于实现各PC的功能的软件程序,以便实现与上面描述的第一到第三示例实施方式相同的效果。
应当注意,本发明不限于这些示例实施方式,而可以在不偏离本发明的范围的情况下对它们做出各种修改。

Claims (4)

1、一种信息处理装置,其连接到将从外部终端输入的注释图像投影在投影区域上的投影装置,和捕获该投影区域的图像捕获装置,该信息处理装置包括:
识别部,其根据由所述图像捕获装置捕获的多个图像识别对象物;
轮廓确定部,其确定所述识别部识别的所述对象物的轮廓;
计算部,其计算由所述轮廓确定部确定的所述对象物的所述轮廓的内侧和外侧的平均亮度;
确定部,其确定由所述计算部计算的所述轮廓的内侧的平均亮度和由所述计算部计算的所述轮廓的外侧的平均亮度之差不小于预定值;
投影图像调节部,其在所述确定部确定所述差不小于所述预定值时产生调节图像,所述调节图像使灰度增加,以使得所述对象物的所述轮廓的内侧和外侧中的任一侧的亮度增加,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度;
投影图像输入部,其将经所述投影图像调节部调节的所述调节图像输入到所述投影装置,并使所述投影装置将所述调节图像投影在所述对象物上;以及
捕获控制部,其在所述投影装置将所述调节图像投影在所述对象物上的状态下,使所述图像捕获装置捕获所述对象物。
2、根据权利要求要求1所述的信息处理装置,其中,所述计算部计算关于所述对象物的所述轮廓的内侧和外侧在单个方向上的亮度分布,并基于该亮度分布计算所述对象物的所述轮廓的内侧和外侧的平均亮度,并且
所述投影图像调节部根据所述亮度分布的计算结果,在所述投影装置投影的图像中增加所述对象物的所述轮廓的内侧和外侧中的任一侧的灰度,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度。
3、根据权利要求1和2中的任一项所述的信息处理装置,其中,所述计算部确定穿过所述对象物的所述轮廓的内侧和外侧的单线,并且计算在该单线上与所述轮廓的内侧和外侧相对应的部分的平均亮度。
4、一种指示系统,其包括:
连接到投影装置和图像捕获装置的信息处理装置,所述投影装置将从外部终端输入的注释图像投影在投影区域上,所述图像捕获装置捕获所述投影区域,该信息处理装置包括:
识别部,其根据由所述图像捕获装置捕获的多个图像识别对象物;
轮廓确定部,其确定所述识别部识别的所述对象物的轮廓;
计算部,其计算由所述轮廓确定部确定的所述对象物的所述轮廓的内侧和外侧的平均亮度;
确定部,其确定由所述计算部计算的所述轮廓的内侧的平均亮度和由所述计算部计算的所述轮廓的外侧的平均亮度之差不小于预定值;
投影图像调节部,其在所述确定部确定所述差不小于所述预定值时产生调节图像,所述调节图像使灰度增加,以使得所述对象物的所述轮廓的内侧和外侧中的任一侧的亮度增加,所述对象物的所述轮廓的内侧和外侧中的所述任一侧相比于另一侧具有较低的平均亮度;
投影图像输入部,其将经所述投影图像调节部调节的所述调节图像输入到所述投影装置,并使所述投影装置将所述调节图像投影在所述对象物上;
捕获控制部,其在所述投影装置将所述调节图像投影在所述对象物上的状态下,使所述图像捕获装置捕获所述对象物;以及
发送部,其向所述外部终端发送所述图像捕获装置捕获的至少一个图像,
所述外部终端包括:
接收部,其从所述信息处理装置接收所述图像捕获装置捕获的图像;和
显示部,其显示所接收的图像。
CN2008102104334A 2007-10-15 2008-08-15 信息处理装置和指示系统 Active CN101415111B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007267724A JP4910975B2 (ja) 2007-10-15 2007-10-15 情報処理装置、指示システム及び制御プログラム
JP2007267724 2007-10-15
JP2007-267724 2007-10-15

Publications (2)

Publication Number Publication Date
CN101415111A true CN101415111A (zh) 2009-04-22
CN101415111B CN101415111B (zh) 2013-02-06

Family

ID=40534232

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008102104334A Active CN101415111B (zh) 2007-10-15 2008-08-15 信息处理装置和指示系统

Country Status (3)

Country Link
US (1) US8306353B2 (zh)
JP (1) JP4910975B2 (zh)
CN (1) CN101415111B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110149550A (zh) * 2018-06-19 2019-08-20 腾讯科技(深圳)有限公司 一种图像数据处理方法和装置
WO2022067608A1 (zh) * 2020-09-30 2022-04-07 中国科学技术大学 一种远程手术指导和教学装置及其方法与医疗设备

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100110264A1 (en) * 2008-10-31 2010-05-06 Lucent Technologies, Inc. Image projection system
CN102831381B (zh) * 2011-06-15 2016-05-04 罗普特(厦门)科技集团有限公司 影像差异比较系统及方法
US9268520B1 (en) * 2011-06-21 2016-02-23 Amazon Technologies, Inc. Altering content projection
US9473708B1 (en) 2013-08-07 2016-10-18 Google Inc. Devices and methods for an imaging system with a dual camera architecture
TWI554910B (zh) * 2014-11-28 2016-10-21 Medical image imaging interactive control method and system
CN106339298A (zh) * 2015-07-10 2017-01-18 富泰华工业(深圳)有限公司 系统信息的显示方法、系统与电子装置
JP2018124441A (ja) * 2017-02-01 2018-08-09 キヤノン株式会社 システム、情報処理装置、情報処理方法及びプログラム
US10715746B2 (en) * 2017-09-06 2020-07-14 Realwear, Inc. Enhanced telestrator for wearable devices
CN107835551B (zh) * 2017-11-01 2019-07-23 中国科学院长春光学精密机械与物理研究所 三维扫描系统中照明光源功率的控制方法及装置
US11122237B2 (en) 2018-06-05 2021-09-14 Axon Enterprise, Inc. Systems and methods for redaction of screens

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003131319A (ja) * 2001-10-25 2003-05-09 Seiko Epson Corp 光送受装置
JP3731741B2 (ja) 2002-03-07 2006-01-05 学校法人慶應義塾 カラー動画像処理方法および処理装置
US7333135B2 (en) 2002-10-15 2008-02-19 Fuji Xerox Co., Ltd. Method, apparatus, and system for remotely annotating a target
US7218792B2 (en) * 2003-03-19 2007-05-15 Mitsubishi Electric Research Laboratories, Inc. Stylized imaging using variable controlled illumination
JP3871061B2 (ja) * 2003-03-25 2007-01-24 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP2005122323A (ja) * 2003-10-14 2005-05-12 Casio Comput Co Ltd 撮影装置、画像処理装置、撮影装置の画像処理方法及びプログラム
JP4033198B2 (ja) * 2004-02-27 2008-01-16 カシオ計算機株式会社 画像処理装置、画像投影装置、画像処理方法及びプログラム
WO2006103862A1 (ja) * 2005-03-29 2006-10-05 Matsushita Electric Industrial Co., Ltd. 画像表示装置及び画像表示方法
JP2006352496A (ja) * 2005-06-16 2006-12-28 Fuji Xerox Co Ltd 遠隔指示システム及びその方法
JP2007049226A (ja) * 2005-08-05 2007-02-22 Ricoh Co Ltd 画像入力装置、画像入力方法、プログラム、記録媒体

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110149550A (zh) * 2018-06-19 2019-08-20 腾讯科技(深圳)有限公司 一种图像数据处理方法和装置
WO2022067608A1 (zh) * 2020-09-30 2022-04-07 中国科学技术大学 一种远程手术指导和教学装置及其方法与医疗设备

Also Published As

Publication number Publication date
US8306353B2 (en) 2012-11-06
CN101415111B (zh) 2013-02-06
JP4910975B2 (ja) 2012-04-04
JP2009100084A (ja) 2009-05-07
US20090097697A1 (en) 2009-04-16

Similar Documents

Publication Publication Date Title
CN101415111B (zh) 信息处理装置和指示系统
CN109783178B (zh) 一种界面组件的颜色调整方法、装置、设备和介质
US9118876B2 (en) Automatic skin tone calibration for camera images
US8022997B2 (en) Information processing device and computer readable recording medium
US7079128B2 (en) Method of and system for automatically setting display mode of monitor, and recording medium performing the same
CN112767392B (zh) 图像清晰度确定方法、装置、设备及存储介质
JP5753393B2 (ja) 画像処理装置及び方法
US9093007B2 (en) Method and device for generating a presentation
JP3998323B2 (ja) 画面生成装置
US20090322889A1 (en) Method and apparatus for illuminating users of video communication devices
JP5106355B2 (ja) 表情判定装置、その制御方法、撮像装置及びプログラム
JP2005500590A (ja) カメラビュー内の制御可能なディスプレイの可視点のロバスト決定方法
CN101860661B (zh) 图像处理设备和图像处理方法
TWI567707B (zh) 影像調整方法及其顯示器
JPH10302061A (ja) デジタルカラー画像のカラーキャスト除去及びコントラスト強調を組み合わせたデジタル処理方法
CN109147708A (zh) 显示面板的伽马值调节方法、装置及显示设备
CN114140358A (zh) 图像显示方法、装置、终端及存储介质
CN104954627A (zh) 一种信息处理方法及电子设备
CN111784604B (zh) 图像处理方法、装置、设备及计算机可读存储介质
CN114138215B (zh) 一种显示方法及相关设备
JP7337557B2 (ja) 情報処理装置、システム、情報処理方法及びプログラム
CN116524877A (zh) 车载屏幕亮度调节方法、装置、电子设备和存储介质
JP2005346474A (ja) 画像処理方法及び装置及びプログラム及び記憶媒体
CN114038370A (zh) 显示参数调整方法、装置、存储介质及显示设备
JP2021197599A (ja) 画像処理装置、画像処理方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Tokyo

Patentee after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo

Patentee before: Fuji Xerox Co.,Ltd.