CN116896613A - 投射图像的校正方法和投射系统 - Google Patents

投射图像的校正方法和投射系统 Download PDF

Info

Publication number
CN116896613A
CN116896613A CN202310309684.2A CN202310309684A CN116896613A CN 116896613 A CN116896613 A CN 116896613A CN 202310309684 A CN202310309684 A CN 202310309684A CN 116896613 A CN116896613 A CN 116896613A
Authority
CN
China
Prior art keywords
light
control point
condition
detected
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310309684.2A
Other languages
English (en)
Inventor
远藤雅明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN116896613A publication Critical patent/CN116896613A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G03B21/147—Optical correction of image distortions, e.g. keystone
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/48—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G03B21/20—Lamp housings
    • G03B21/2006—Lamp housings characterised by the light source
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G03B21/20—Lamp housings
    • G03B21/2046—Positional adjustment of light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3197—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] using light modulating optical valves

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Position Input By Displaying (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

提供投射图像的校正方法和投射系统，减少误操作，提高用户的便利性。照相机(200)在拍摄投射面(10)而得到的多个拍摄图像组中检测到由指示装置(300)照射到投射面(10)的满足第1条件的光的情况下，基于拍摄图像组中的满足第1条件的光的位置，将多个控制点(S)中包含的至少1个控制点(S)选择为选择状态的控制点(S)，在拍摄图像组中检测到由指示装置(300)照射到投射面(10)的满足与第1条件不同的第2条件的光的情况下，基于拍摄图像组中的检测到的满足第2条件的光的位置的变化，向投影仪(100)发送变更选择状态的控制点(S)的位置的指示。

Description

投射图像的校正方法和投射系统
技术领域
本发明涉及投射图像的校正方法和投射系统。
背景技术
以往，已知有使用指示装置对投射图像的形状进行校正的方法。
例如，专利文献1公开了使用激光指示器来校正投射图像的4个角的位置的投影仪。
专利文献1：日本特开2012-129594号公报
然而，当由于用户的手抖动等的影响而将错误的位置选择为校正位置时，有时无法进行用户所意图的校正。
发明内容
本公开是一种投射图像的校正方法，其包含：对投射有包含多个控制点的图案图像的投射面进行拍摄；在包含拍摄所述投射面而得到的多个拍摄图像的拍摄图像组中检测到由指示体照射到所述投射面的满足第1条件的光的情况下，基于所述拍摄图像组中的满足所述第1条件的光的位置，将所述多个控制点中包含的至少1个控制点选择为第1控制点；在所述拍摄图像组中检测到由所述指示体照射到所述投射面的满足与所述第1条件不同的第2条件的光的情况下，基于所述拍摄图像组中的满足所述第2条件的光的位置的变化，变更所述第1控制点的位置；以及将变更了所述第1控制点的位置后的所述图案图像显示于所述投射面。
本公开是一种投射系统，其具备：投影仪，其将包含多个控制点的图案图像显示于投射面；拍摄装置，其对所述投射面进行拍摄；指示体，其向所述投射面照射与用户的操作对应的条件的光；以及1个以上的处理器，所述1个以上的处理器执行以下处理：在拍摄图像组中检测到由指示体照射到所述投射面的满足第1条件的光的情况下，基于所述拍摄图像组中的满足所述第1条件的光的位置，将所述多个控制点中包含的至少1个控制点选择为第1控制点，所述拍摄图像组包含所述拍摄装置拍摄到的所述投射面的多个拍摄图像；在所述拍摄图像组中检测到由所述指示体照射到所述投射面的满足与所述第1条件不同的第2条件的光的情况下，基于所述拍摄图像组中的满足所述第2条件的光的位置的变化，变更所述第1控制点的位置；以及将变更了所述第1控制点的位置后的所述图案图像显示于所述投射面。
附图说明
图1是表示投射系统的系统结构的图。
图2是表示投影仪的结构的框图。
图3是表示照相机的结构的框图。
图4是表示指示装置的结构的框图。
图5是表示在投射面上显示的第2图案图像的一例的图。
图6是表示在投射面上显示的第2图案图像的一例的图。
图7是表示在投射面上显示的第2图案图像的一例的图。
图8是表示照相机的动作的流程图。
图9是表示照相机的动作的流程图。
图10是表示投影仪的动作的流程图。
图11是表示投影仪的动作的流程图。
标号说明
1：投射系统；5：遥控器；10：投射面；30：第2图案图像；100：投影仪；110：第1无线I/F；120：遥控器受光部；130：图像处理部；135：帧存储器；140：图像投射部；141：光源；143：光调制装置；143A：液晶面板；145：光学单元；150：第1控制部；160：第1存储部；161：控制程序；163：校准数据；170：第1处理器；200：照相机；210：拍摄部；211：透镜组；212：驱动电路；213：拍摄元件；214：信号处理电路；220：第2无线I/F；230：触摸面板；250：第2控制部；260：第2存储部；265：控制程序；270：第2处理器；300：指示装置；301：第1开关；303：第2开关；310：输入I/F电路；330：频率调制部；350：半导体激光器；370：第3控制部。
具体实施方式
1.投射系统1的结构
图1是表示投射系统1的系统结构的图。
投射系统1包含投影仪100、照相机200和指示(pointing)装置300。照相机200相当于拍摄装置，指示装置300相当于指示体。
投影仪100根据从个人计算机等图像提供装置提供的图像数据生成图像光。投影仪100将生成的图像光放大投射到投射面10。由此，在投射面10上显示基于图像数据的图像即投射图像。
照相机200对包含投射面10的范围进行拍摄而生成拍摄图像。照相机200对所生成的拍摄图像进行图像分析，检测投射面10上的激光的照射位置即指示位置(pointposition)P、投影仪100显示的第2图案图像30所包含的控制点S。稍后将描述第2图案图像30、控制点S。
指示装置300是输出激光的装置。用户手持指示装置300，向显示于投射面10的投射图像上照射激光，由此指示投射图像上的指示位置P。
2.投影仪100的结构
图2是表示投影仪100的结构的框图。
参照图2对投影仪100的结构进行说明。
投影仪100具有第1无线接口110、遥控器受光部120、图像处理部130、帧存储器135、图像投射部140以及第1控制部150。以下，将接口简记为I/F。
第1无线I/F 110例如是具备与Bluetooth、Wi-Fi等标准对应的接口电路的无线通信设备。Bluetooth以及Wi-Fi是注册商标。第1无线I/F 110与照相机200无线连接，在与照相机200之间相互进行数据通信。另外，也可以是，代替第1无线I/F 110，投影仪100例如具备有线I/F，该有线I/F具备与USB(Universal Serial Bus)等标准对应的接口电路。
遥控器受光部120接收从遥控器5发送的红外线信号，将与接收到的红外线信号所示的操作内容对应的操作信号输出到第1控制部150。
遥控器5具备用于对用户界面进行操作的操作件。遥控器5在由用户操作了操作件的情况下，发送与被操作的操作件对应的红外线信号。
图像处理部130与帧存储器135连接。图像处理部130将从第1控制部150、第1无线I/F 110输入的图像数据在帧存储器135中展开。帧存储器135例如由SDRAM(SynchronousDynamic Random Access Memory)构成。
图像处理部130对在帧存储器135中展开的图像数据进行例如分辨率转换处理或尺寸调整处理、畸变像差的校正、形状校正处理、数字变焦处理、图像的色调/亮度的调整等图像处理。图像处理部130执行由第1控制部150指定的图像处理，根据需要，使用从第1控制部150输入的参数进行处理。另外，图像处理部130当然也可以组合执行上述中的多个图像处理。图像处理部130从帧存储器135读出处理结束后的图像数据，将读出的图像数据输出到图像投射部140。
图像处理部130以及帧存储器135例如由集成电路构成。集成电路包含LSI(LargeScale Integrated Circuit)、ASIC(Application Specific Integrated Circuit)、PLD(Programmable Logic Device)、FPGA(Field-Programmable Gate Array)、SoC(System-on-a-chip)。此外，集成电路的结构的一部分可以包含模拟电路，也可以是组合了第1控制部150和集成电路的结构。
图像投射部140具有光源141、光调制装置143和光学单元145。
光源141具备超高压水银灯、金属卤化物灯等放电型的光源灯、或者发光二极管、半导体激光器等固体光源。从光源141射出的光入射到光调制装置143。
光调制装置143作为对从光源141射出的光进行调制的光调制元件，具备在一对透明基板间封入有液晶的透射型的液晶面板143A。液晶面板143A具备由排列成矩阵状的多个像素构成的面板区域。光调制装置143对面板区域的各像素施加与所输入的图像数据对应的驱动电压，将各像素的透光率变更为与图像数据对应的透光率。从光源141射出的光透过液晶面板143A，从而光被调制，生成与图像数据对应的图像光。
光调制装置143所具备的光调制元件并不限定于透射型的液晶面板，例如既可以是反射型的液晶面板，也可以是DMD(Digital Micromirror Device：数字微镜器件)。
光学单元145具有未图示的投射透镜等，将由光调制装置143调制后的图像光放大投射到投射面10。由此，在投射面10显示与图像光对应的图像即投射图像。
第1控制部150是具备第1存储部160和第1处理器170的计算机装置。
第1存储部160具备ROM(Read Only Memory)等非易失性存储器和RAM(RandomAccess Memory)等易失性存储器。ROM存储在投影仪100的动作的控制中使用的控制程序161、校准数据163、各种设定信息。RAM用于临时存储各种数据等。
校准数据163是将在液晶面板143A中设定的坐标与在照相机200生成的拍摄图像中设定的坐标建立对应的数据。即，能够使用校准数据163将在拍摄图像中设定的坐标转换为在液晶面板143A中设定的坐标。以下，将在液晶面板143A中设定的坐标系称为面板坐标系，将在拍摄图像中设定的坐标系称为照相机坐标系。
第1处理器170是包含1个以上的CPU(Central Processing Unit)、MPU(Micro-Processing Unit)等的运算处理装置。第1处理器170执行控制程序161来控制投影仪100的各部分的动作。
3.照相机的结构
图3是表示照相机200的结构的框图。
照相机200具备拍摄部210、第2无线I/F 220、触摸面板230以及第2控制部250。
拍摄部210具有透镜组211、驱动电路212、拍摄元件213和信号处理电路214。
透镜组211包含拍摄透镜、调焦透镜等的各种透镜以及光圈。
驱动电路212按照第2控制部250的指示，控制透镜组211。具体而言，驱动电路212控制拍摄镜头、调焦镜头以及光圈的位置，或者控制光圈的开度。
拍摄元件213包含CMOS(Complementary Metal Oxide Semiconductor)传感器、CCD(Charge Coupled Device)传感器等图像传感器。拍摄元件213具有二维配置多个像素而成的结构。入射到拍摄元件213的被摄体光按照每个像素进行光电转换，转换为红、绿以及蓝的3原色的图像信号。转换后的图像信号被输出到信号处理电路214。
信号处理电路214对所输入的图像信号进行增益调整、A/D转换、降噪、颜色校正、伽马校正等信号处理。信号处理电路214将对图像信号进行信号处理而生成的拍摄图像输出到第2控制部250和触摸面板230。
第2无线I/F 220例如是具备与Bluetooth、Wi-Fi等标准对应的接口电路的无线通信设备。第2无线I/F 220与投影仪100无线连接，在与照相机200之间相互进行数据通信。此外，也可以是，代替第2无线I/F 220，照相机200例如具有有线I/F，该有线I/F具有与USB等标准对应的接口电路。
触摸面板230包含液晶面板、有机EL(Electro Luminescence)等显示面板和触摸传感器。触摸传感器检测触摸操作，将包含检测到的触摸操作的操作位置的操作信号输出到第2控制部250。触摸传感器作为受理用户的操作的操作部发挥功能。
第2控制部250是具备第2存储部260和第2处理器270的计算机装置。
第2存储部260具备ROM等非易失性存储器和RAM等易失性存储器。ROM存储用于控制照相机200的动作的控制程序265、各种设定信息。RAM用于临时存储各种数据等。
第2处理器270是包含1个以上的CPU、MPU等的运算处理装置。第2处理器270执行控制程序265来控制照相机200的各部分的动作。第2处理器270相当于1个以上的处理器。
4.指示装置的结构
图4是表示指示装置300的结构的框图。
指示装置300包含第1开关301、第2开关303、输入I/F电路310、半导体激光器350、频率调制部330和第3控制部370。
第1开关301以及第2开关303是受理用户的操作的硬件开关的操作部。第1开关301是指示装置300的电源开关。第2开关303是用于在第2开关303被按下的期间将从指示装置300输出的激光变更为以恒定频率重复开和关的调制光的开关。当第2开关303未被按下时，指示装置300输出连续光的激光，当第2开关303被按下时，输出恒定频率的调制光。
当第1开关301或第2开关303被按下时，输入I/F电路310将与被按下的第1开关301或第2开关303对应的操作信号输出到第3控制部370。
半导体激光器350是光源，通过将从未图示的电池提供的电流提供到半导体激光器350而产生激光振荡，输出激光。
频率调制部330是通过控制半导体激光器350，将从半导体激光器350射出的激光调制为恒定频率的调制光的控制电路。更详细而言，频率调制部330通过控制施加于半导体激光器350的电流值来控制半导体激光器350的输出。施加的电流值的控制例如在通过PWM(Pulse Width Modulation)控制来控制半导体激光器350的情况下，只要切换PWM控制的占空比即可。由频率调制部330控制的半导体激光器350输出的激光被输出到指示装置300的外部。
第3控制部370是具备存储器、处理器的计算机。
当第1开关301被按下而输入与第1开关301的操作对应的操作信号时，第3控制部370向半导体激光器350供给电力而使激光的输出开始。指示装置300输出作为连续光的激光。
另外，在第2开关303被按下而输入与第2开关303的操作对应的操作信号的期间，第3控制部370控制频率调制部330，将从半导体激光器350射出的激光调制为恒定频率的调制光。在第2开关303接通的期间，指示装置300输出被调制为恒定频率的调制光。
5.投影仪和照相机的动作说明
当从遥控器受光部120输入了指示点校正(point correction)进行的操作信号时，投影仪100的第1控制部150开始校准数据163的生成。第1控制部150控制图像处理部130、图像投射部140，使投射面10显示未图示的第1图案图像。点校正是指对显示于投射面10的图像的局部畸变进行校正的方法。第1图案图像是矩形的图像，包含多个标记。多个标记分别配置于第1图案图像的预先设定的多个位置。第1图案图像例如能够使用包含多个格子点的棋盘图案图像。另外，作为第1图案图像，也可以使用格雷码图案图像、相移图案图像等结构化光图案图像。
当投射面10显示第1图案图像时，第1控制部150指示照相机200进行拍摄。照相机200对显示有第1图案图像的投射面10进行拍摄而生成拍摄图像，将所生成的拍摄图像发送到投影仪100。
第1控制部150当从照相机200接收到拍摄图像时，分别检测接收到的拍摄图像中包含的多个标记。
第1控制部150通过将为了显示于投射面10而描绘于液晶面板143A的第1图案图像中的各标记的位置与拍摄图像中的标记的位置建立对应来生成校准数据163。第1控制部150使第1存储部160存储所生成的校准数据163。
接着，第1控制部150控制图像处理部130、图像投射部140，使投射面10显示第2图案图像30。
图5是表示投射面10显示的第2图案图像30的一例的图。
第2图案图像30是矩形的图像，是将多个控制点S配置成矩阵状的图像。在第2图案图像30中，在附图中，分别以等间隔显示与第2图案图像30的纵边平行的多个线段和与第2图案图像30的横边平行的多个线段。在此，附图中的纵边是指与图示的Y轴平行的边，横轴是指与图示的X轴平行的边。另外，附图中的右方向是从原点O向X轴方向延伸的方向。在附图中，原点O在左上表示。在与第2图案图像30的纵边平行的线段和与第2图案图像30的横边平行的线段的交点设定控制点S。控制点S是通过点校正来调整投射图像的显示位置的调整点。图5所示的第2图案图像30表示在控制点S的位置显示了第1标记M1的例子。第1标记M1为表示是控制点S的小黑圆的图形。
能够通过指示装置300的选择操作将控制点S设定为初始状态、准备状态和选择状态这3种状态。准备状态的控制点S相当于第2控制点。选择状态的控制点S相当于第1控制点。
初始状态的控制点S是未被指示装置300选择的未选择状态的控制点S。
准备状态的控制点S是由指示装置300选择了1次的状态的控制点，也可以说是选择状态的前状态。通过指示装置300再次选择准备状态的控制点S，即选择2次，由此成为选择状态的控制点S。通过在选择状态之前设置准备状态，与控制点S的状态是初始状态和选择状态这2个状态的情况相比，能够减少使用指示装置300的操作的误操作。
选择状态的控制点S是能够通过指示装置300的操作来变更第2图案图像30中的显示位置的控制点。关于初始状态和准备状态的控制点S，即使操作指示装置300也无法变更第2图案图像30中的显示位置。
此外，通过指示装置300的解除操作，控制点S的状态可以返回到准备状态、初始状态。
通过利用指示装置300的解除操作来选择处于选择状态的控制点S，该控制点S的状态变更为准备状态。此外，通过利用指示装置300的解除操作来选择准备状态的控制点S，该控制点S的状态变更为初始状态。
第1控制部150当使投射面10显示了第2图案图像30时，指示照相机200开始处理。
照相机200的第2控制部250在从投影仪100接收到处理的开始指示时，使拍摄部210开始拍摄。拍摄部210以预先设定的间隔进行拍摄，生成拍摄图像。第2控制部250使第2存储部260暂时存储拍摄部210生成的拍摄图像。
第2控制部250从第2存储部260取出拍摄图像，对取出的拍摄图像进行图像分析，检测用户使用指示装置300进行的操作。指示装置300的操作包含第1选择操作、第2选择操作、解除操作、第1移动操作和第2移动操作。
在此，第2控制部250依次取出拍摄图像，检测多张拍摄图像所包含的指示位置P。基于检测到的各拍摄图像中的指示位置P的位移量，检测进行了第1选择操作、第2选择操作、解除操作、第1移动操作、第2移动操作中的哪个操作。多张拍摄图像相当于拍摄图像组。
第1选择操作以及第2选择操作是选择控制点S的操作。第1选择操作是将初始状态的控制点S变更为准备状态的操作，第2选择操作是将准备状态的控制点S变更为选择状态的操作。
图6是表示显示于投射面10的第2图案图像30的图。
在准备状态的控制点S显示第2标记M2，在选择状态的控制点S显示第3标记M3。即，准备状态的控制点S和选择状态的控制点S以不同的显示方式显示。在本实施方式中，表示了作为第2标记M2显示三角形的图形，作为第3标记M3显示矩形的图形的例子，但第2标记M2以及第3标记M3的形状是任意的。第1标记M1、第2标记M2以及第3标记M3的形状只要能够分别区分初始状态、准备状态以及选择状态的控制点S即可。
第1选择操作是向以初始状态的控制点S的位置为中心、从该控制点S的位置起预先设定的第1设定范围内照射指示位置P，使照射的指示位置P在预先设定的设定时间T1内不从第1设定范围向外移动的操作。第1设定范围被设定为不与相邻的其他控制点S的第1设定范围重叠。第1设定范围例如能够设定为以控制点S为中心的圆形的范围。另外，第1设定范围也可以根据第2图案图像30的分辨率来变更。第1设定范围是第3范围的一例。
第2控制部250当检测到指示位置P在设定时间T1内未从控制点S的第1设定范围移动，判定为第1设定范围内的控制点S为初始状态时，判定为检测到第1选择操作。设定时间T1例如能够设定为0.2秒，但也能够变更设定时间T1。设定时间T1相当于第2期间。被检测到在设定时间T1内未从控制点S的第1设定范围内移动的指示位置P相当于满足第3条件的光。
另外，第2控制部250参照第2存储部260，判定第1设定范围内的控制点S是否为初始状态。第2控制部250在未存储准备状态或者选择状态作为与第1设定范围内的控制点S对应的坐标的信息的情况下，判定为第1设定范围内的控制点S是初始状态。
第2控制部250当检测到第1选择操作时，将包含控制点S的坐标和将该控制点S从初始状态变更为准备状态的请求的第1变更请求发送到投影仪100。控制点S的坐标是照相机坐标系的坐标。另外，第2控制部250使作为表示状态的信息的准备状态与根据第1变更请求变更了状态的控制点S的坐标建立对应地存储于第2存储部260。
第2选择操作是向以准备状态的控制点S的位置为中心、从该控制点S的位置起预先设定的第2设定范围内照射指示位置P，使照射的指示位置P在预先设定的设定时间T2内不从第2设定范围向外移动的操作。该第2设定范围也被设定为不与相邻的其他控制点S的第2设定范围重叠。第2设定范围例如能够设定为以控制点S为中心的圆形的范围。第2设定范围可以是与第1设定范围相同的范围，也可以是各不相同的范围。第2设定范围是第1范围的一例。
第2控制部250当检测到指示位置P在设定时间T2内未从控制点S的第2设定范围内移动，判定为处于第2设定范围内的控制点S为准备状态时，判定为检测到第2选择操作。设定时间T2被设定为比设定时间T1长的时间。设定时间T2例如能够设定为0.5秒，但也能够变更设定时间T2。设定时间T2相当于第1期间。被检测到在设定时间T2内未从控制点S的第2设定范围内移动的指示位置P相当于满足第1条件的光。
另外，第2控制部250参照第2存储部260，判定第2设定范围内的控制点S是否为准备状态。第2控制部250在作为表示与相应的坐标建立了对应的控制点S的状态的信息而存储有准备状态的情况下，判定为第2设定范围内的控制点S是准备状态。
第2控制部250将包含检测到第2选择操作的控制点S的坐标和将该控制点S从准备状态变更为选择状态的请求的第2变更请求发送到投影仪100。控制点S的坐标是照相机坐标系的坐标。另外，第2控制部250使作为表示状态的信息的选择状态与根据第2变更请求变更了状态的控制点S的坐标建立对应地存储于第2存储部260。
解除操作是向以准备状态或选择状态的控制点S的位置为中心、从该控制点S的位置起预先设定的第3设定范围内照射指示位置P，使照射的指示位置P在预先设定的设定时间T1以上且小于设定时间T2的时间内不从第3设定范围向外移动的操作。该第3设定范围也被设定为不与相邻的其他控制点S的第3设定范围重叠。第3设定范围例如能够设定为以控制点S为中心的圆形的范围。第3设定范围可以是与第1设定范围和第2设定范围中的任意方相同的范围，也可以是各不相同的范围。
在此，解除操作包含第1解除操作以及第2解除操作。
第2控制部250当检测到指示位置在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，判定为处于第3设定范围内的控制点S为准备状态时，判定为检测到第1解除操作。
第2控制部250在控制点S的状态为准备状态的情况下，将包含检测到第1解除操作的控制点S的坐标和将该控制点S从准备状态变更为初始状态的请求的第3变更请求发送到投影仪100。控制点S的坐标是照相机坐标系的坐标。
另外，第2控制部250从第2存储部260删除根据第3变更请求变更了状态的控制点S的坐标和与该坐标建立对应地存储的表示状态的信息。
另外，第2控制部250当检测到指示位置在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，判定为处于第3设定范围内的控制点S为选择状态时，判定为检测到第2解除操作。
第2控制部250在控制点S的状态为选择状态的情况下，将包含检测到第2解除操作的控制点S的坐标和将该控制点S从选择状态变更为准备状态的请求的第4变更请求发送到投影仪100。控制点S的坐标是照相机坐标系的坐标。另外，第2控制部250将与根据第4变更请求变更了状态的控制点S的坐标建立对应地存储于第2存储部260的表示状态的信息从选择状态变更为准备状态。
第1移动操作以及第2移动操作是使控制点S的位置移动的操作。
第1移动操作是通过指示装置300的操作来移动被设定为选择状态的所有控制点S的显示位置的操作。第2移动操作是通过指示装置300的操作来移动包含在第2图案图像30中的初始状态、准备状态和选择状态的所有控制点S的操作。
图7是表示显示于投射面10的第2图案图像30的图。
第1移动操作是向以任意的选择状态的控制点S的位置为中心、从该控制点S的位置起预先设定的第4设定范围内照射指示位置P，使照射的指示位置P在预先设定的设定时间T2内不从第4设定范围向外移动，之后，使指示位置P移动到想要使控制点S移动的位置的操作。第4设定范围可以是与第1设定范围、第2设定范围和第3设定范围中的任意方相同的范围，也可以是各不相同的范围。第4设定范围是第2范围的一例。
第2控制部250在检测到指示位置P在设定时间T2内未从控制点S的第4设定范围内移动，判定为处于第4设定范围内的控制点S为选择状态，之后检测到指示位置P的移动的情况下，判定为检测到第1移动操作。
检测到在设定时间T2内未从控制点S的第4设定范围内移动，之后检测到移动的指示位置P相当于满足第2条件的光。
第2控制部250参照第2存储部260，判定第4设定范围内的控制点S的状态是否为选择状态。第2控制部250在作为与第4设定范围内的控制点S的坐标建立了对应的表示状态的信息存储有选择状态的情况下，判定为第4设定范围内的控制点S为选择状态。
另外，第2控制部250当检测到第1移动操作时，通过拍摄图像的图像分析来计算指示位置P的移动前的坐标和移动后的坐标。第2控制部250基于指示位置P的移动前的坐标和移动后的坐标，计算指示位置P的移动方向和移动量。
接着，第2控制部250参照第2存储部260，取得被设定为选择状态的所有控制点S的坐标。第2控制部250将包含被设定为选择状态的所有控制点S的坐标以及移动方向和移动量的第1移动请求发送到投影仪100。控制点S的坐标是照相机坐标系的坐标。
假设图7所示的显示有第3标记M3a的控制点S和显示有第3标记M3b的控制点S被设定为选择状态的控制点S。另外，假设在第3标记M3a的第4设定范围内检测到指示位置P，检测到的指示位置P在附图中向右方向移动了t。
第2控制部250向投影仪100发送不仅使在第4设定范围内包含指示位置P的第3标记M3a的控制点S向右方向移动t还使被设定为选择状态的第3标记M3b的控制点S也向右方向移动t的第1移动请求。
接着，第2控制部250基于计算出的移动方向和移动量，计算选择状态的所有控制点S的移动后的坐标。第2控制部250使控制点S的移动后的坐标与表示该坐标的控制点S的状态的选择状态建立对应地存储于第2存储部260。控制点S的坐标是照相机坐标系的坐标。
第2移动操作是通过将从指示装置300射出的激光变更为具有恒定频率的调制光来进行的操作。通过第2开关303被按下，指示装置300将输出的激光从连续光变更为具有恒定频率的调制光。
第2控制部250当基于拍摄图像检测到恒定频率的调制光时，开始第2移动操作的检测。在开始了第2移动操作的检测之后，第2控制部250追踪检测到的指示位置P，检测指示位置P的移动后的坐标。第2控制部250基于指示位置P的移动前的坐标和移动后的坐标，计算指示位置P的移动方向和移动量。
此外，指示装置300也可以设定为在第2图案图像30的控制点S中不存在被设定为选择状态的控制点S的状态下进行第2移动操作。
在这种情况下，第2控制部250在检测到指示装置300所照射的指示位置P在设定时间T2内未移动，判定为不存在被设定为选择状态的控制点S的情况下，开始第2移动操作的检测。在开始第2移动操作的检测后，追踪检测到的指示位置P，检测指示位置P的移动后的坐标。第2控制部250基于指示位置P的移动前的坐标和移动后的坐标，计算指示位置P的移动方向和移动量。
第2控制部250生成包含计算出的移动方向和移动量、以及第2图案图像30中包含的初始状态、准备状态和选择状态的所有控制点S的移动请求的第2移动请求，将生成的第2移动请求发送到投影仪100。
另外，第2控制部250基于计算出的移动方向和移动量，计算初始状态、准备状态和选择状态的所有控制点S的移动后的坐标。第2控制部250使控制点S的移动后的坐标与表示该坐标的控制点S的状态的初始状态、准备状态或者选择状态建立对应地存储于第2存储部260。控制点S的坐标是照相机坐标系的坐标。
图8和图9是表示照相机200的动作的流程图。参照图8和图9所示的流程图说明照相机200的动作。
首先，第2控制部250判定是否从投影仪100接收到第1图案图像的显示通知(步骤S1)。第2控制部250在未接收到第1图案图像的显示通知的情况下(步骤S1/否)，待机至接收到显示通知为止。
第2控制部250在接收到第1图案图像的显示通知时(步骤S1/是)，对投射面10进行拍摄而生成拍摄图像(步骤S2)，将所生成的拍摄图像发送到投影仪100(步骤S3)。
接着，第2控制部250判定是否从投影仪100接收到第2图案图像30的显示通知(步骤S4)。第2控制部250在未接收到第2图案图像30的显示通知的情况下(步骤S4/否)，待机至接收到显示通知为止。
第2控制部250在接收到第2图案图像30的显示通知的情况下(步骤S4/是)，开始拍摄(步骤S5)。第2控制部250以预先设定的设定间隔使拍摄部210执行拍摄，生成拍摄投射面10而得到的拍摄图像。第2控制部250将所生成的拍摄图像存储于第2存储部260。预先设定的设定间隔例如为16.7毫秒。
接着，第2控制部250按照拍摄图像的拍摄顺序，从第2存储部260取出拍摄图像，对取出的拍摄图像进行图像分析来检测指示位置P(步骤S6)。第2控制部250在无法从拍摄图像检测到指示位置P的情况下(步骤S6/否)，从第2存储部260取出拍摄顺序为下一个的拍摄图像，对取出的拍摄图像进行图像分析。
第2控制部250在从拍摄图像检测到指示位置P(步骤S6/是)时，对检测到指示位置P的拍摄图像的后续的拍摄图像进行图像分析，判定是否检测到操作。第2控制部250检测的操作包含第1选择操作、第2选择操作、第1解除操作、第2解除操作、第1移动操作以及第2移动操作。
第2控制部250在检测到第1选择操作的情况下(步骤S7/是)，生成第1变更请求(步骤S8)。
第2控制部250在检测到所检测到的指示位置P在设定时间T1内未从控制点S的第1设定范围内移动，位于该第1设定范围内的控制点S的状态为初始状态的情况下，判定为检测到第1选择操作。第2控制部250生成包含控制点S的坐标和将该控制点S变更为准备状态的请求的第1变更请求(步骤S8)。
第2控制部250将所生成的第1变更请求发送到投影仪100(步骤S9)。另外，第2控制部250使作为表示状态的信息的准备状态与根据第1变更请求变更了状态的控制点S的坐标建立对应地存储于第2存储部260(步骤S10)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
第2控制部250在未检测到第1选择操作(步骤S7/否)而检测到第2选择操作的情况下(步骤S11/是)，生成第2变更请求(步骤S12)。
第2控制部250在检测到所检测到的指示位置P在设定时间T2内未从控制点S的第2设定范围内移动，位于该第2设定范围内的控制点S的状态为准备状态的情况下，判定为检测到第2选择操作。第2控制部250生成包含控制点S的坐标和将该控制点S变更为选择状态的请求的第2变更请求(步骤S12)。
第2控制部250将所生成的第2变更请求发送到投影仪100(步骤S13)。另外，第2控制部250使作为表示状态的信息的选择状态与根据第2变更请求变更了状态的控制点S的坐标建立对应地存储于第2存储部260(步骤S14)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
第2控制部250在未检测到第2选择操作(步骤S11/否)而检测到第1解除操作的情况下(步骤S15/是)，生成第3变更请求(步骤S16)。
第2控制部250在检测到所检测到的指示位置P在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，该第3设定范围内的控制点S为准备状态的情况下，判定为检测到第1解除操作。第2控制部250生成包含控制点S的坐标和将该控制点S变更为初始状态的请求的第3变更请求(步骤S16)。
第2控制部250将所生成的第3变更请求发送到投影仪100(步骤S17)。另外，第2控制部250从第2存储部260删除根据第3变更请求变更了状态的控制点S的坐标和与该坐标对应地存储的表示状态的信息(步骤S18)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
第2控制部250在未检测到第1解除操作(步骤S15/否)而检测到第2解除操作的情况下(步骤S19/是)，生成第4变更请求(步骤ST20)。
第2控制部250在检测到所检测到的指示位置P在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，该第3设定范围内的控制点S为选择状态的情况下，判定为检测到第2解除操作。第2控制部250生成包含控制点S的坐标和将该控制点S从选择状态变更为准备状态的请求的第4变更请求(步骤S20)。
第2控制部250将所生成的第4变更请求发送到投影仪100(步骤S21)。另外，第2控制部250将表示通过第4变更请求变更了状态的控制点S的坐标的状态的信息从选择状态变更为准备状态(步骤S22)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
第2控制部250在未检测到第2解除操作(步骤S19/否)而检测到第1移动操作的情况下(步骤S23/是)，检测指示位置P的移动方向和移动量(步骤S24)。
第2控制部250在检测到指示位置P在设定时间T2内未从控制点S的第4设定范围内移动，判定为处于第4设定范围内的控制点S为选择状态，之后检测到指示位置P的移动的情况下，判定为检测到第1移动操作。第2控制部250对指示位置P的移动前的坐标和移动后的坐标进行检测，对指示位置P的移动方向和移动量进行检测(步骤S24)。
接着，第2控制部250生成第1移动请求(步骤S25)。第2控制部250生成包含所有的选择状态的控制点S的坐标和表示在步骤S24中计算出的移动方向和移动量的信息的第1移动请求(步骤S25)。第2控制部250将所生成的第1移动请求发送到投影仪100(步骤S26)。之后，第2控制部250基于计算出的移动方向和移动量对被设定为选择状态的所有控制点S的坐标进行更新。第2控制部250使更新后的控制点S的坐标与表示该坐标的控制点S的状态的选择状态建立对应地存储于第2存储部260(步骤S27)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
第2控制部250在未检测到第1移动操作(步骤S23/否)而检测到第2移动操作的情况下(步骤S28/是)，检测指示位置P的移动方向和移动量(步骤S29)。
第2控制部250对拍摄图像进行图像分析，在检测到从指示装置300输出的激光从连续光变更为具有恒定频率的调制光的情况下，开始第2移动操作的检测。第2控制部250检测基于第2移动操作的指示位置的移动前的坐标和移动后的坐标，检测指示位置P的移动方向和移动量(步骤S29)。
接着，第2控制部250生成第2移动请求(步骤S30)。第2控制部250生成包含在步骤S29中计算出的移动方向和移动量的第2移动请求(步骤S30)。第2控制部250将所生成的第2移动请求发送到投影仪100(步骤S31)。之后，第2控制部250基于计算出的移动方向和移动量，计算初始状态、准备状态以及选择状态的控制点S的移动后的坐标。第2控制部250使控制点S的移动后的坐标与表示该坐标的控制点S的状态的初始状态、准备状态或者选择状态建立对应地存储于第2存储部260(步骤S32)。之后，第2控制部250返回步骤S6的判定，从拍摄图像中检测指示位置P。
接着，第2控制部250判定是否从投影仪100接收到结束通知(步骤S33)。第2控制部250在未接收到结束通知的情况下(步骤S33/否)，返回步骤S6的判定，从拍摄图像中检测指示位置P。
图10和图11是表示投影仪100的动作的流程图。
参照图10和图11所示的流程图对投影仪100的动作进行说明。
首先，第1控制部150判定是否受理了点校正的开始指示(步骤ST1)。用户通过遥控器5输入开始点校正的指示。第1控制部150在未受理点校正的开始指示的情况下(步骤ST1/否)，在受理开始指示之前等待点校正的处理的开始。
第1控制部150在受理了点校正的开始指示时(步骤ST1/是)，生成与第1图案图像对应的图像光，将生成的图像光投射到投射面10。由此，在投射面10上显示第1图案图像(步骤ST2)。
接着，第1控制部150将第1图案图像的显示通知发送到照相机200(步骤ST3)，判定是否从照相机200接收到拍摄图像(步骤ST4)。第1控制部150在未接收到拍摄图像的情况下(步骤ST4/否)，不执行接下来的处理。
第1控制部150在接收到拍摄图像时(步骤ST4/是)，检测接收到的拍摄图像中包含的第1图案图像的图案，生成校准数据163(步骤ST5)。第1控制部150使第1存储部160存储所生成的校准数据163。
接着，第1控制部150生成与第2图案图像30对应的图像光，将生成的图像光投射到投射面10。由此，在投射面10上显示第2图案图像30(步骤ST6)。
接着，第1控制部150将第2图案图像的显示通知发送到照相机200(步骤ST7)，待机直到接收到来自照相机200的请求为止。
第1控制部150在从照相机200接收到第1变更请求的情况下(步骤ST8/是)，使用校准数据163将接收到的第1变更请求中包含的坐标信息所示的控制点S的坐标转换为面板坐标系的坐标。第1控制部150在转换后的液晶面板143A的坐标处显示第2标记M2(步骤ST9)。由此，通过第1变更要求而被选择的控制点S的显示从第1标记M1被变更为第2标记M2。
另外，第1控制部150在接收到的请求不是第1变更请求(步骤ST8/否)而是第2变更请求的情况下(步骤ST10/是)，将控制点S的坐标转换为面板坐标系的坐标。第1控制部150使用校准数据163将接收到的第2变更请求所包含的坐标信息所示的控制点S的坐标转换为面板坐标系的坐标。第1控制部150在转换后的液晶面板143A的坐标处显示第3标记M3(步骤ST11)。由此，通过第2变更要求而被选择的控制点S的显示从第2标记M2被变更为第3标记M3。
另外，第1控制部150在接收到的请求不是第2变更请求(步骤ST10/否)而是第3变更请求的情况下(步骤ST12/是)，将控制点S的坐标转换为面板坐标系的坐标。第1控制部150使用校准数据163将接收到的第3变更请求所包含的坐标信息所示的控制点S的坐标转换为面板坐标系的坐标。第1控制部150在转换后的液晶面板143A的坐标处显示第1标记M1(步骤ST13)。由此，通过第3变更要求而被选择的控制点S的显示从第2标记M2被变更为第1标记M1。
另外，第1控制部150在接收到的请求不是第3变更请求(步骤ST12/否)而是第4变更请求的情况下(步骤ST14/是)，将控制点S的坐标转换为面板坐标系的坐标。第1控制部150使用校准数据163将接收到的第4变更请求所包含的坐标信息所示的控制点S的坐标转换为面板坐标系的坐标。第1控制部150在转换后的液晶面板143A的坐标处显示第2标记M2(步骤ST15)。由此，通过第4变更要求而被选择的控制点S的显示从第3标记M3被变更为第2标记M2。
另外，第1控制部150在接收到的请求不是第4变更请求(步骤ST14/否)而是接收到第1移动请求的情况下(步骤ST16)，按照接收到的第1移动请求进行处理。第1控制部150通过校准数据163将第1移动请求所包含的选择状态的控制点S的坐标转换为面板坐标系的坐标(步骤ST17)。另外，第1控制部150也将第1移动请求所包含的移动方向和移动量通过校准数据163转换为面板坐标系中的移动方向和移动量(步骤ST17)。
接着，第1控制部150基于转换后的移动方向和移动量，计算所有的选择状态的控制点S的移动后的面板坐标(步骤ST18)。第1控制部150使选择状态的控制点S的移动后的坐标与表示该坐标的控制点S的状态的选择状态建立对应地存储于第1存储部160(步骤ST19)。接着，第1控制部150将显示于选择状态的控制点S的第3标记M3的显示位置从移动前的面板坐标变更为移动后的面板坐标(步骤ST20)。
第1控制部150在接收到的请求不是第1移动请求(步骤ST16/否)而是接收到第2移动请求的情况下(步骤ST21/是)，按照接收到的第2移动请求进行处理。首先，第1控制部150通过校准数据163将第2移动请求中包含的移动方向和移动量转换为面板坐标系中的移动方向和移动量。
接着，第1控制部150基于转换后的移动方向和移动量，计算第2图案图像30的各控制点S的移动后的坐标(步骤ST22)。第1控制部150使第2图案图像30的各控制点S的坐标移动到计算出的移动后的坐标(步骤ST23)，在移动后的坐标处显示对应的第1标记M1、第2标记M2以及第3标记M3中的任意方。接着，第1控制部150使第1存储部160存储第2图案图像30的各控制点S的坐标(步骤ST24)。
另外，第1控制部150在未接收到第2移动请求的情况下(步骤ST21/否)，判定是否通过遥控器5受理了结束操作(步骤ST25)。
第1控制部150在受理了结束操作的情况下(步骤ST25/是)，向照相机200发送点校正的结束通知(步骤ST26)，使第2图案图像向投射面10的显示结束(步骤ST27)。
接下来，第1控制部150生成点校正的校正参数(步骤ST28)。第1控制部150基于第2图案图像30的各控制点S的移动前的坐标和第2图案图像30的各控制点S的移动后的坐标来生成校正参数。第1控制部150在未受理第2移动请求的情况下，取得存储于第1存储部160的选择状态的控制点S的坐标，作为通过用户的操作而移动后的控制点S的坐标。
另外，第1控制部150在受理了第2移动请求的情况下，从第1存储部160取得所有控制点S的坐标。第1控制部150取得存储于第1存储部160的所有控制点S的坐标，作为通过用户的操作而移动后的控制点S的坐标。
第1控制部150在未受理结束操作的情况下(步骤ST25/否)，如果受理了结束操作以外的指示操作，则执行与指示对应的处理(步骤ST29)，返回到步骤ST2的处理。
6.投射图像的校正方法的效果
如以上说明的那样，本实施方式的投射图像的校正方法是照相机200的第2控制部250执行的校正方法。
第2控制部250使拍摄部210拍摄投射有包含多个控制点S的第2图案图像30的投射面10。
在通过拍摄投射面10而得到的多个拍摄图像组中检测到由指示装置300照射到投射面10的满足第1条件的光的情况下，第2控制部250执行以下动作。即，第2控制部250基于拍摄图像组中的满足第1条件的光的位置，将多个控制点S所包含的至少1个控制点S选择为选择状态的控制点S。
此外，在通过拍摄投射面10而得到的拍摄图像组中检测到由指示装置300照射到投射面10的满足与第1条件不同的第2条件的光的情况下，第2控制部250执行以下动作。即，第2控制部250基于拍摄图像组中的检测到的满足第2条件的光的位置的变化，将变更选择状态的控制点S的位置的指示发送到投影仪100。
投影仪100使变更了选择状态的控制点S的位置后的第2图案图像30显示于投射面10。
根据该结构，通过使用指示装置300照射满足第1条件的光，能够将控制点S设定为选择状态，通过使用指示装置300照射满足第2条件的光，能够移动被设定为选择状态的控制点S的位置。另外，也能够将多个控制点S设定为选择状态，能够通过照射满足第2条件的光来使设定为选择状态的控制点S的位置移动。因此，与在检测到满足第1条件的光的情况下执行选择控制点的操作和移动控制点的操作这两者的结构相比，能够抑制由于用户的手抖动等的影响而选择错误的位置作为校正位置，能够进行用户所意图的校正，因此能够提高使用指示装置300的操作的便利性。
照相机200在拍摄投射面10而得到的拍摄图像组中检测到满足第3条件的光的情况下，将多个控制点S所包含的至少1个控制点S选择为准备状态的控制点S。
另外，照相机200在拍摄投射面10而得到的拍摄图像组中检测到满足第1条件的光的情况下，将拍摄图像组中的准备状态的控制点S变更为选择状态的控制点S。
并且，准备状态的控制点S是不基于满足第2条件的光的位置的变化而变更位置的控制点。
根据该结构，通过在选择状态之前设置准备状态，与控制点S的状态为初始状态和选择状态这2个状态的情况相比，能够减少使用了指示装置300的操作的误操作。
选择状态的控制点S和准备状态的控制点S以不同的显示方式显示。
根据该结构，选择状态的控制点S和准备状态的控制点S以不同的显示方式显示，因此容易识别选择状态的控制点S和准备状态的控制点S，能够减少误操作。
照相机200在未从多个控制点S选择出选择状态的控制点S且检测到满足第2条件的光的情况下，基于在拍摄图像组中检测到的满足第2条件的光的位置的变化，变更多个控制点S的位置。
根据该结构，能够基于在拍摄图像中检测到的满足第2条件的光的位置的变化来变更多个控制点S的位置，因此能够通过1个指示装置300的操作来移动多个控制点S的位置。
满足第1条件的光是向从多个控制点S所包含的任意的控制点起的第1范围内照射的第1颜色的光。
满足第2条件的光是向从选择状态的控制点S起的第2范围内照射且与第1颜色不同的第2颜色的光。
根据该结构，通过变更指示装置300射出的光的颜色，能够将多个控制点S中的至少1个设定为选择状态的控制点S，或者变更选择状态的控制点S的位置。
满足第1条件的光是向从多个控制点S中包含的任意控制点起的第1范围内照射并且指示装置300以第1发光强度照射的光。
满足第2条件的光是在向从处于选择状态的控制点S起的第2范围内照射的光，是指示装置300以与第1发光强度不同的第2发光强度照射的光。
根据该结构，通过变更指示装置300照射的光的发光强度，能够进行将多个控制点S中的至少1个设定为选择状态的控制点S、或者变更选择状态的控制点S的位置的操作。
满足第1条件的光是向从多个控制点S所包含的任意的控制点起的第1范围内照射且在第1期间以内检测到的位置的变化量比阈值小的光。
满足第2条件的光是向从选择状态的控制点S起的第2范围内照射，在第1期间以内被检测到的位置的变化量比所述阈值小且在经过第1期间后被检测到位置的移动的光。
根据该结构，通过调整指示装置300射出的光所照射的投射面10上的位置，能够将多个控制点S中的至少1个设定为选择状态的控制点S，或者变更选择状态的控制点S的位置。
满足第3条件的光是向从多个控制点S所包含的任意的控制点起的第3范围内照射且在第2期间内检测到的光的位置的变化量比阈值小的光。
根据该结构，通过调整指示装置300射出的光所照射的投射面10上的位置，能够将多个控制点S中的至少1个设定为准备状态的控制点S。
7.投射系统的效果
投射系统1包含投影仪100、照相机200、指示装置300和第2处理器270。
投影仪100将包含多个控制点S的图案图像显示于投射面10。照相机200对投射面10进行拍摄。指示装置300向投射面10照射与用户的操作对应的条件的光。
第2处理器270在包含照相机200拍摄投射面10而得到的多个拍摄图像的拍摄图像组中检测到由指示装置300照射到投射面10的满足第1条件的光的情况下，基于拍摄图像组中的满足第1条件的光的位置，以下执行动作。即，第2处理器270将多个控制点S所包含的至少1个控制点S选择为选择状态的控制点S。
此外，第2处理器270在拍摄图像组中检测到由指示装置300照射到投射面10的满足第2条件的光的情况下，执行以下的动作。
即，第2处理器270基于拍摄图像组中的满足第2条件的光的位置的变化，变更选择状态的控制点S的位置。
投影仪100使变更了选择状态的控制点S的位置后的图案图像显示于投射面10。
根据该结构，通过使用指示装置300照射满足第1条件的光，能够将控制点S设定为选择状态，通过使用指示装置300照射满足第2条件的光，能够移动被设定为选择状态的控制点S的位置。由此，也能够将多个控制点S设定为选择状态，能够通过照射满足第2条件的光来使设定为选择状态的控制点S的位置移动。由此，能够提高使用指示装置300的操作的便利性。
指示装置300具备半导体激光器350作为光源。
半导体激光器350以恒定的发光频率发光。
根据该结构，容易从照相机200的拍摄图像中检测指示装置300照射的光。
指示装置300具备第2开关303和输入I/F电路310作为受理变更规定的频率的操作的操作部。
根据该结构，能够通过操作第2开关303来变更规定的频率，能够增加能够由指示装置300检测的操作的种类。
指示装置300具备作为光源的半导体激光器350以及作为操作部的第2开关303和输入I/F电路310。
在第2开关303受理操作的期间，半导体激光器350以恒定的频率反复进行发光和熄灭。
根据该结构，能够通过操作第2开关303来变更规定的频率，能够增加能够由指示装置300检测的操作的种类。
上述的实施方式是本发明的优选的实施方式。但是，并不限定于该实施方式，在不脱离本发明的主旨的范围内能够实施各种变形。
例如，在上述实施方式中，指示装置300通过操作第2开关303来变更激光的发光频率，但也可以通过操作第2开关303来变更发光颜色、发光强度。例如，也可以构成为，上述的第1选择操作、第2选择操作、解除操作通过第1颜色的光进行操作，第1移动操作通过与第1颜色不同的第2颜色的光进行操作，第2移动操作通过与第1颜色、第2颜色不同的第3颜色的光进行操作。第1颜色的光是满足第1条件的光的一例，第2颜色的光是满足第2条件的光的一例。
更具体而言，在从拍摄图像检测到第1颜色的光，检测到的第1颜色的光的位置位于控制点S的第1设定范围内，位于第1设定范围内的控制点S的状态为初始状态的情况下，判定为检测到第1选择操作。在从拍摄图像检测到第1颜色的光，检测到的第1颜色的光的位置位于控制点S的第2设定范围内，位于第2设定范围内的控制点S的状态为准备状态的情况下，判定为检测到第2选择操作。在从拍摄图像检测到第1颜色的光，检测到所检测到的第1颜色的光的位置在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，判定为处于第3设定范围内的控制点S为准备状态或选择状态时，判定为检测到解除操作。
另外，在从拍摄图像检测到第2颜色的光，检测到的第2颜色的光的位置位于控制点S的第4设定范围内，判定为位于第4设定范围内的控制点S为选择状态，之后检测到第2颜色的光的位置的移动的情况下，判定为检测到第1移动操作。在从拍摄图像检测到第3颜色的光，之后检测到第3颜色的光的位置的移动的情况下，判定为检测到第2移动操作。
在采用能够从指示装置300切换照射多种颜色的激光的结构的情况下，可以搭载多个与各种颜色对应的光源，也可以搭载能够在从半导体激光器350射出激光的光路上移动的滤色器。可移动的滤色器例如由致动器支承，只要是能够根据第2开关303的操作驱动致动器使得滤色器从存在于激光的光路上的位置移动到不存在于光路上的位置的结构即可。
此外，指示装置300也可以构成为通过操作第2开关303来变更发光强度。例如，也可以构成为，第1选择操作、第2选择操作、解除操作通过第1发光强度的光进行操作，第1移动操作通过与第1发光强度不同的第2发光强度的光进行操作。另外，也可以是第2移动操作通过与第1发光强度、第2发光强度不同的第3发光强度的光进行操作的结构。
第1发光强度的光是满足第1条件的光的一例，第2发光强度的光是满足第2条件的光的一例。
更具体而言，在从拍摄图像检测到第1发光强度的光，检测到的第1发光强度的光的位置位于控制点S的第1设定范围内，位于第1设定范围内的控制点S的状态为初始状态的情况下，判定为检测到第1选择操作。在从拍摄图像检测到第1发光强度的光，检测到的第1发光强度的光的位置位于控制点S的第2设定范围内，位于第2设定范围内的控制点S的状态为准备状态的情况下，判定为检测到第2选择操作。在从拍摄图像中检测到第1发光强度的光，检测到所检测到的第1发光强度的光的位置在设定时间T1以上且小于设定时间T2的时间内未从控制点S的第3设定范围内移动，判定为处于第3设定范围内的控制点S为准备状态或选择状态时，判定为检测到解除操作。
另外，在从拍摄图像检测到第2发光强度的光，检测到的第2发光强度的光的位置位于控制点S的第4设定范围内，判定为位于第4设定范围内的控制点S为选择状态，之后检测到第2颜色的光的位置的移动的情况下，判定为检测到第1移动操作。在从拍摄图像检测到第3发光强度的光，之后检测到第3发光强度的光的位置的移动的情况下，判定为检测到第2移动操作。
此外，指示装置300也可以构成为根据第2开关303被按下的次数来变更发光频率。例如，当第2开关303被按下1次时，指示装置300输出发光频率为30Hz的激光，当第2开关303被按下2次时，指示装置300输出发光频率为20Hz的激光。此外，在第2开关303被按下3次时，指示装置300输出发光频率为15Hz的激光，在第2开关303被按下4次时，返回到发光频率为30Hz的激光。
用户在进行第1选择操作、第2选择操作、解除操作的情况下，按下1次第2开关303，利用发光频率为30Hz的激光进行操作。
另外，用户在进行第1移动操作的情况下，按下2次第2开关303，利用发光频率为20Hz的激光进行操作。另外，用户在进行第2移动操作的情况下，按下3次第2开关303，利用发光频率为15Hz的激光进行操作。
照相机200的第2控制部250基于拍摄图像检测指示装置300照射的激光的频率，判定进行了哪个操作。
另外，在上述的实施方式中，照相机200所具备的第2处理器270对拍摄图像进行图像分析，检测第1选择操作、第2选择操作、解除操作、第1移动操作、第2移动操作。也可以通过投影仪100的第1处理器170、外部的控制装置来执行检测这些第1选择操作、第2选择操作、解除操作、第1移动操作、第2移动操作的处理。
此外，图2所示的投影仪100、图3所示的照相机200、图4所示的指示装置300的各功能部表示通过硬件与软件的协作而实现的功能性结构，具体的安装方式没有特别限制。因此，不一定需要安装与各功能部分别对应的硬件，当然也可以构成为通过一个处理器执行程序来实现多个功能部的功能。另外，在上述实施方式中，可以通过硬件来实现由软件实现的功能的一部分，另外，也可以通过软件来实现由硬件实现的功能的一部分。
另外，在使用搭载于照相机200或投影仪100的计算机来实现上述的投射图像的校正方法的情况下，也能够以记录介质的方式构成使该计算机执行的程序。另外，使计算机执行的程序也能够以传送程序的传送介质的方式构成。记录介质可以使用磁性、光学性记录介质或半导体存储器件。具体而言，可举出软盘、HDD、CD-ROM(compact disc read-onlymemory)、DVD(Digital Vversatile Disc)、Blu-ray Disc、光磁盘、闪存、卡型记录介质等可移动型或固定式的记录介质。另外，上述记录介质也可以是作为服务器装置所具备的内部存储装置的RAM、ROM、HDD等非易失性存储装置。Blu-ray是注册商标。
另外，图8以及图9所示的流程图的处理单位是为了容易理解第2控制部250的处理而根据主要的处理内容进行分割的单位，本发明不受图8以及图9的流程图所示的处理单位的分割的方法、名称限制。另外，第2控制部250的处理可以根据处理内容分割为更多的处理单位，也可以分割为1个处理单位包含更多的处理。另外，上述的流程图的处理顺序也不限于图示的例子。
另外，图10以及图11所示的流程图的处理单位是为了容易理解第1控制部150的处理而根据主要的处理内容进行分割的单位。本发明不受图10和图11的流程图所示的处理单位的分割方法、名称限制。另外，第1控制部150的处理可以根据处理内容分割为更多的处理单位，也可以分割为1个处理单位包含更多的处理。另外，上述的流程图的处理顺序也不限于图示的例子。

Claims (12)

1.一种投射图像的校正方法，其包含：
对投射有包含多个控制点的图案图像的投射面进行拍摄；
在包含拍摄所述投射面而得到的多个拍摄图像的拍摄图像组中检测到由指示体照射到所述投射面的满足第1条件的光的情况下，基于所述拍摄图像组中的满足所述第1条件的光的位置，将所述多个控制点中包含的至少1个控制点选择为第1控制点；
在所述拍摄图像组中检测到由所述指示体照射到所述投射面的满足与所述第1条件不同的第2条件的光的情况下，基于所述拍摄图像组中的满足所述第2条件的光的位置的变化，变更所述第1控制点的位置；以及
将变更了所述第1控制点的位置后的所述图案图像显示于所述投射面。
2.根据权利要求1所述的投射图像的校正方法，其中，
所述投射图像的校正方法包含：在所述拍摄图像组中检测到满足第3条件的光的情况下，将所述多个控制点中包含的至少1个控制点选择为第2控制点，
在所述拍摄图像组中检测到满足所述第1条件的光的情况下，基于所述拍摄图像组中的满足所述第1条件的光的位置，将所述第2控制点变更为所述第1控制点，
所述第2控制点是不基于满足所述第2条件的光的位置的变化进行位置的变更的控制点。
3.根据权利要求2所述的投射图像的校正方法，其中，
所述第1控制点和所述第2控制点以不同的显示方式显示。
4.根据权利要求1至3中的任一项所述的投射图像的校正方法，其中，
在未从所述多个控制点中选择出所述第1控制点并且检测到满足所述第2条件的光的情况下，基于在所述拍摄图像组中检测到的满足所述第2条件的光的位置的变化，变更所述多个控制点的位置。
5.根据权利要求1至3中的任一项所述的投射图像的校正方法，其中，
满足所述第1条件的光是向从所述多个控制点中包含的任意控制点起的第1范围内照射的第1颜色的光，
满足所述第2条件的光是向从所述第1控制点起的第2范围内照射且与所述第1颜色不同的第2颜色的光。
6.根据权利要求1至3中的任一项所述的投射图像的校正方法，其中，
满足所述第1条件的光是向从所述多个控制点中包含的任意控制点起的第1范围内照射并且所述指示体以第1发光强度照射的光，
满足所述第2条件的光是向从所述第1控制点起的第2范围内照射并且所述指示体以与所述第1发光强度不同的第2发光强度照射的光。
7.根据权利要求2所述的投射图像的校正方法，其中，
满足所述第1条件的光是向从所述多个控制点中包含的任意控制点起的第1范围内照射、在第1期间以内检测到的位置的变化量小于阈值的光，
满足所述第2条件的光是向从所述第1控制点起的第2范围内照射、在所述第1期间以内被检测到的位置的变化量小于所述阈值、且在经过所述第1期间后被检测到位置的移动的光。
8.根据权利要求2所述的投射图像的校正方法，其中，
满足所述第3条件的光是向从所述多个控制点中包含的任意控制点起的第3范围内照射、且在第2期间以内被检测到的光的位置的变化量小于阈值的光。
9.一种投射系统，其具备：
投影仪，其将包含多个控制点的图案图像显示于投射面；
拍摄装置，其对所述投射面进行拍摄；
指示体，其向所述投射面照射与用户的操作对应的条件的光；以及
1个以上的处理器，
所述1个以上的处理器执行以下处理：
在拍摄图像组中检测到由指示体照射到所述投射面的满足第1条件的光的情况下，基于所述拍摄图像组中的满足所述第1条件的光的位置，将所述多个控制点中包含的至少1个控制点选择为第1控制点，其中，所述拍摄图像组包含所述拍摄装置拍摄到的所述投射面的多个拍摄图像；
在所述拍摄图像组中检测到由所述指示体照射到所述投射面的满足与所述第1条件不同的第2条件的光的情况下，基于所述拍摄图像组中的满足所述第2条件的光的位置的变化，变更所述第1控制点的位置；以及
将变更了所述第1控制点的位置后的所述图案图像显示于所述投射面。
10.根据权利要求9所述的投射系统，其中，
所述指示体具备光源，
所述光源以恒定的发光频率发光。
11.根据权利要求10所述的投射系统，其中，
所述指示体具备操作部，所述操作部受理变更所述发光频率的操作。
12.根据权利要求10所述的投射系统，其中，
所述指示体具备光源和操作部，
在所述操作部受理操作的期间，所述光源以恒定的发光频率发光。
CN202310309684.2A 2022-03-29 2023-03-27 投射图像的校正方法和投射系统 Pending CN116896613A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-053880 2022-03-29
JP2022053880A JP7533515B2 (ja) 2022-03-29 2022-03-29 投写画像の補正方法及び投写システム

Publications (1)

Publication Number Publication Date
CN116896613A true CN116896613A (zh) 2023-10-17

Family

ID=88194126

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310309684.2A Pending CN116896613A (zh) 2022-03-29 2023-03-27 投射图像的校正方法和投射系统

Country Status (3)

Country Link
US (1) US20230314918A1 (zh)
JP (1) JP7533515B2 (zh)
CN (1) CN116896613A (zh)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110121125A (ko) 2010-04-30 2011-11-07 삼성전자주식회사 인터랙티브 디스플레이 장치 및 이의 동작 방법
JP2014229224A (ja) 2013-05-27 2014-12-08 船井電機株式会社 オブジェクト選択装置

Also Published As

Publication number Publication date
JP7533515B2 (ja) 2024-08-14
US20230314918A1 (en) 2023-10-05
JP2023146614A (ja) 2023-10-12

Similar Documents

Publication Publication Date Title
KR101631568B1 (ko) 프로젝터 및 프로젝터의 제어 방법
KR101631571B1 (ko) 프로젝터 및 프로젝터의 제어 방법
US9215431B2 (en) Image processing apparatus, projector and control method of projector
US8102465B2 (en) Photographing apparatus and photographing method for photographing an image by controlling light irradiation on a subject
CN100470359C (zh) 图像投影装置
KR101725512B1 (ko) 프로젝터 및 프로젝터의 제어 방법
US20100165168A1 (en) Projector
US20110019166A1 (en) Image projection apparatus
JP2015166893A (ja) 位置検出装置、及び、位置検出装置の制御方法
JP2015037250A (ja) 画像投影装置及びプレゼンテーションシステム
JP4211694B2 (ja) 光源駆動方法およびプロジェクタ
JP5206081B2 (ja) プロジェクタ、プログラム及び記憶媒体
JP2015053675A (ja) 画像投影装置
JP2008292570A (ja) 投射型映像表示装置
US20230022214A1 (en) Method of controlling display device and display device
JP2006222637A (ja) 撮像装置
CN116896613A (zh) 投射图像的校正方法和投射系统
JP4983752B2 (ja) 光源駆動方法およびプロジェクタ
JP2018124366A (ja) プロジェクターおよびプロジェクターの制御方法
JP6347126B2 (ja) プロジェクター、及び、プロジェクターの制御方法
JP5304843B2 (ja) 光源駆動方法およびプロジェクタ
JP6119902B2 (ja) プロジェクター、及び、プロジェクターの制御方法
JP2017092969A (ja) プロジェクター、及び、プロジェクターの制御方法
JP2020098225A (ja) 画像抽出方法、及びプロジェクター
JP2012151584A (ja) 画像表示装置、および画像調整方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination