CN114173105B - 信息生成方法、信息生成系统以及记录介质 - Google Patents
信息生成方法、信息生成系统以及记录介质 Download PDFInfo
- Publication number
- CN114173105B CN114173105B CN202111050818.0A CN202111050818A CN114173105B CN 114173105 B CN114173105 B CN 114173105B CN 202111050818 A CN202111050818 A CN 202111050818A CN 114173105 B CN114173105 B CN 114173105B
- Authority
- CN
- China
- Prior art keywords
- image
- coordinate system
- projected
- display area
- captured
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000003384 imaging method Methods 0.000 claims abstract description 69
- 238000006243 chemical reaction Methods 0.000 claims abstract description 15
- 238000012545 processing Methods 0.000 claims description 98
- 230000009466 transformation Effects 0.000 claims description 30
- 230000001131 transforming effect Effects 0.000 claims description 8
- 238000005259 measurement Methods 0.000 description 53
- 238000004891 communication Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 16
- 239000011159 matrix material Substances 0.000 description 15
- 238000012790 confirmation Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000013507 mapping Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 230000002441 reversible effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000010363 phase shift Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/08—Projecting images onto non-planar surfaces, e.g. geodetic screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3173—Constructional details thereof wherein the projection device is specially adapted for enhanced portability
- H04N9/3176—Constructional details thereof wherein the projection device is specially adapted for enhanced portability wherein the projection device is incorporated in a camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3191—Testing thereof
- H04N9/3194—Testing thereof including sensor feedback
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Projection Apparatus (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
提供信息生成方法、信息生成系统以及记录介质，能够不依赖于被投射物的形状地设定作为投射对象的配置目的地的显示区域。在信息生成装置中设置有取得部、第一确定部、第二确定部、设定辅助部以及生成部。取得部取得投影仪向被投射物投射的第一图像、从第一拍摄位置拍摄到的第二图像、以及从第二拍摄位置拍摄到的第三图像。第一确定部基于第一以及第二图像，确定第一坐标系与第二坐标系的第一对应关系。第二确定部基于第一以及第三图像，确定第一坐标系与第三坐标系的第二对应关系。设定辅助部使用户在第二坐标系中指定显示区域。生成部基于第一对应关系以及第二对应关系，生成将所指定的显示区域变换为第三坐标系的显示区域的变换信息。
Description
技术领域
本公开涉及信息生成方法、信息生成系统以及记录介质。
背景技术
在投射映射中，通常从投影仪对非平面的屏幕投射投射图像。投射到非平面的屏幕的投射图像从观看者看起来变形。因此，在投射映射中，需要考虑与屏幕的形状对应的变形来预先校正投射图像。在专利文献1中公开了如下技术：利用照相机对投射到非平面的屏幕而看起来变形的图像进行拍摄，根据照相机的拍摄图像对投射图像进行校正。作为投射映射中的非平面的屏幕的一例，可举出具有三维形状的被投射物。在投射到具有三维形状的被投射物的投射图像中包含投射到被投射物的投射对象，还考虑在投射图像中作为投射对象的配置目的地的显示区域的设定中利用被投射物的拍摄图像。
专利文献1：日本特开2010-283674号公报
根据被投射物的形状，有时在利用了拍摄图像的显示区域的设定中产生障碍。例如，在如被投射物过大而无法完全收敛于照相机的拍摄范围的情况、或者被投射物的形状复杂而存在成为与照相机的死角的部分的情况那样，在拍摄图像中未拍摄到被投射物的一部分的情况下，无法针对未拍摄到的部分正确地设定显示区域。
发明内容
为了解决以上的课题，本公开的信息生成方法取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，受理指定第一显示区域的操作，所述第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，根据所述第一对应关系和所述第二对应关系，生成变换信息，该变换信息将通过进行指定的所述操作指定的所述第一显示区域变换为所述第三坐标系中的作为所述投射对象的配置目的地的第二显示区域。
另外，为了解决上述课题，本公开的信息生成系统具备：显示装置；输入装置；以及处理装置，所述处理装置执行取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，受理指定第一显示区域的操作，该第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，以及根据所述第一对应关系和所述第二对应关系，生成变换信息，该变换信息将通过进行指定的所述操作指定的所述第一显示区域变换为所述第三坐标系中的作为所述投射对象的配置目的地的第二显示区域。
另外，为了解决上述课题，本公开的程序使计算机执行取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，受理指定第一显示区域的操作，该第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，以及根据所述第一对应关系和所述第二对应关系，生成变换信息，该变换信息将通过进行指定的所述操作指定的所述第一显示区域变换为所述第三坐标系中的作为所述投射对象的配置目的地的第二显示区域。
附图说明
图1是表示包括执行根据本公开的实施方式的信息生成方法的信息生成装置1A的图像显示系统5A的结构例的框图。
图2是表示本实施方式中的第一拍摄位置P1、第二拍摄位置P2以及被投射物SC的位置关系的一例的图。
图3是表示本实施方式中的计测图案的一例的图。
图4是表示信息生成装置1A的处理装置40为了催促第一显示区域A1的设定而使显示装置显示的图像的一例以及第一显示区域A1的设定例的图。
图5是表示通过变换第一显示区域A1而得到的第一区域R1的一例的图。
图6是表示处理装置40为了使用户确认第二显示区域A2而使显示装置显示的图像的一例的图。
图7是表示处理装置40按照程序PA执行的信息生成方法的流程的流程图。
图8是表示第一拍摄位置、第二拍摄位置以及被投射物的位置关系的另一例的图。
图9是表示变形例(4)的图像显示系统5B的一例的图。
标号说明
1A、1B：信息生成装置；2：投影仪；10：触摸面板；20：通信装置；30：存储装置；40：处理装置；410：取得部；420：第一确定部；430：第二确定部；440：设定辅助部；450：生成部；460：确认辅助部；50、50A、50B：拍摄装置；PA：程序；SC：被投射物；5A、5B：图像显示系统。
具体实施方式
以下，参照附图对本公开的实施方式进行说明。对以下所述的实施方式附加了技术上优选的各种限定。但是，本公开的实施方式不限于以下所述的方式。
1.实施方式
图1是示出包括执行根据本公开的实施方式的信息生成方法的信息生成装置1A的图像显示系统5A的结构例的框图。在图像显示系统5A中，除了信息生成装置1A之外，还包括与信息生成装置1A进行通信的投影仪2。投影仪2将与从信息生成装置1A提供的图像数据对应的投射图像G1投射到被投射物SC的表面。在图1中，虽然省略了详细的图示，但投影仪2具有光源、作为光调制装置的3个显示面板、投射镜头和显示面板驱动部。3个显示面板分别与红、绿以及蓝的各色对应。在本实施方式中，显示面板是液晶光阀。显示面板驱动部根据从信息生成装置1A提供的图像数据来控制上述3个显示面板各自的光的透射率。投影仪2利用3个显示面板分别对从光源射出的光进行调制而形成图像光，从投射镜头对该图像光进行投射而在被投射物SC的表面显示投射图像。如图1所示，本实施方式中的被投射物SC是长方体，但也可以是三棱锥或四棱锥等通过多边形的连结而构成的三维形状、或者具有曲面的三维形状。
信息生成装置1A例如是智能手机。信息生成装置1A具有拍摄功能和与投影仪2进行通信的通信功能。信息生成装置1A不限于智能手机，例如也可以是具有通信功能和拍摄功能的平板终端。当信息生成装置1A与投影仪2进行网络连接时，信息生成装置1A与投影仪2进行通信，从投影仪2取得投影仪信息。投影仪信息中包含分辨率信息、以及表示在投影仪2中能够解码的压缩方式的压缩方式信息。分辨率信息是表示投影仪2中的显示面板的分辨率的信息。分辨率信息在生成用于计测由投影仪2投射到被投射物SC上的投射图像的位置的计测图案时被信息生成装置1A利用。详细内容后述，在本实施方式中，使用二进制编码图案作为计测图案。压缩方式信息用于决定对表示计测图案的计测图案数据进行压缩并从信息生成装置1A向投影仪2发送的情况下的计测图案数据的压缩方式。从信息生成装置1A向投影仪2压缩并发送计测图案数据的情况下的压缩方式优选为行程编码、LZH、PNG以及GIF等可逆压缩方式。
信息生成装置1A使用从投影仪2取得的分辨率信息来生成分别表示多个计测图案中的各个的计测图案数据，并将生成的计测图案数据提供给投影仪2。投影仪2将从信息生成装置1A提供的计测图案数据所示的多个计测图案各自的图像投射到被投射物SC。另外，也可以从信息生成装置1A向投影仪2发送命令，投影仪2根据该命令生成计测图案数据，在该情况下，无需在投影仪信息中包含压缩方式信息。如果是在投影仪2中生成计测图案数据的方式，则能够缩短用于从信息生成装置1A向投影仪2传递计测图案的通信时间。信息生成装置1A催促用户按照每个计测图案从第一拍摄位置和与第一拍摄位置不同的第二拍摄位置对投射有计测图案的图像的状态的被投射物SC进行拍摄。首先，用户针对每个计测图案，使用信息生成装置1A的拍摄功能从第一拍摄位置对投射有计测图案的图像的状态的被投射物SC进行拍摄。之后，用户保持着信息生成装置1A从第一拍摄位置向第二拍摄位置移动，针对每个计测图案，使用信息生成装置1A的拍摄功能从第二拍摄位置对投射有计测图案的图像的状态的被投射物SC进行拍摄。
图2是示出本实施方式中的第一拍摄位置P1与第二拍摄位置P2、以及被投射物SC的位置关系的一例的图。图2是从铅垂上方俯视设置被投射物SC的空间的俯视图。如图2所示，在本实施方式中，第二拍摄位置P2是与通过第一拍摄位置P1和被投射物SC的重心CP的直线L1上的位置不同的位置。图2中的虚线表示从第一拍摄位置P1拍摄被投射物SC时的信息生成装置1A的拍摄范围。另外，图2中的单点划线表示从第二拍摄位置P2拍摄被投射物SC时的信息生成装置1A的拍摄范围。参照图2可知，在源自第一拍摄位置P1的拍摄图像中拍到被投射物SC的面S1及面S2。与此相对，在源自第二拍摄位置P2的拍摄图像中仅拍到被投射物SC的面S2。
信息生成装置1A根据被投射有计测图案的图像的状态下的被投射物SC的拍摄图像和计测图案的图像，确定投影仪坐标系与照相机坐标系的对应关系。投影仪坐标系是表示基于投影仪2的投射图像上的位置的坐标系。作为投影仪坐标系的一例，可举出以投射图像的左上角为原点的二维坐标系。照相机坐标系是表示拍摄图像上的位置的坐标系。作为照相机坐标系的具体例，可举出以拍摄图像的左上角为原点的二维坐标系。在本实施方式的照相机坐标系中，存在源自第一拍摄位置的被投射物SC的拍摄图像中的坐标系即第一照相机坐标系、和源自第二拍摄位置的被投射物SC的拍摄图像中的坐标系即第二照相机坐标系这2种。信息生成装置1A确定作为投影仪坐标系与第一照相机坐标系的对应关系的第一对应关系和作为投影仪坐标系与第二照相机坐标系的对应关系的第二对应关系。
确定投影仪坐标系与照相机坐标系的对应关系是指生成用于从一方的坐标系向另一方的坐标系的映射变换的变换矩阵。在本实施方式中，信息生成装置1A生成表示第一对应关系的第一变换矩阵和表示第二对应关系的第二变换矩阵。在本实施方式中，通过利用第一对应关系和第二对应关系，能够将在第一照相机坐标系中指定的投射对象的显示区域变换为第二照相机坐标系中的显示区域。
如图1所示，信息生成装置1A包括触摸面板10、通信装置20、存储装置30、处理装置40和拍摄装置50。通信装置20是无线通信模块或有线通信模块。在通信装置20是有线通信模块的情况下，通信装置20经由通信线与投影仪2连接。信息生成装置1A与投影仪2的连接可以是不经由无线接入点装置或路由器等中继装置的直接连接，也可以是经由中继装置的间接连接。在通信装置20是无线通信模块的情况下，作为直接连接的具体例，可举出点对点(ad hoc)连接，作为间接连接的具体例，可举出经由无线接入点装置的接入点连接。另外，在通信装置20是有线通信模块的情况下，作为直接连接的具体例，可举出对等(peer-to-peer)连接，作为间接连接的具体例，可举出经由有线路由器或有线集线器的连接。通信装置20在处理装置40的控制下与投影仪2进行通信。拍摄装置50是照相机。拍摄装置50在处理装置40的控制下进行拍摄，将表示拍摄图像的图像数据提供给处理装置40。
触摸面板10是将显示图像的显示装置和由用户输入信息的输入装置一体化而成的装置。输入装置例如是透明的片状的接触传感器。输入装置以覆盖显示装置的显示面的方式设置。输入装置使用由与该输入装置接触的物体和该输入装置确定的静电电容来检测触摸位置，并将表示检测出的触摸位置的数据向处理装置40输出。由此，用户对触摸面板10的操作内容被传递到处理装置40。
存储装置30是处理装置40能够读取的记录介质。存储装置30例如包括非易失性存储器和易失性存储器。非易失性存储器例如是ROM(Read Only Memory)、EPROM(ErasableProgrammable Read Only Memory)或EEPROM(Electrically Erasable ProgrammableRead Only Memory)。易失性存储器例如是RAM(Radom Access Memory)。
在存储装置30的非易失性存储器中存储有由处理装置40执行的程序PA。存储装置30的易失性存储器作为执行程序PA时的工作区域被处理装置40利用。程序PA也可以被称为“应用程序”、“应用软件”或“应用”。程序PA例如经由通信装置20从未图示的服务器等取得，之后存储于存储装置30。程序PA也可以预先存储于存储装置30。
处理装置40例如构成为包括CPU(Central Processing Unit)等处理器。处理装置40可以由单一的处理器构成，也可以由多个处理器构成。处理装置40以对触摸面板10进行了指示程序PA的执行开始的操作为契机，将程序PA从非易失性存储器读出到易失性存储器，开始程序PA的执行。根据程序PA而工作中的处理装置40作为图1所示的取得部410、第一确定部420、第二确定部430、设定辅助部440、生成部450以及确认辅助部460而发挥功能。图1所示的取得部410、第一确定部420、第二确定部430、设定辅助部440、生成部450以及确认辅助部460是通过使处理装置40按照程序PA进行动作而实现的软件模块。
取得部410取得以下的第一图像、第二图像以及第三图像。第一图像是从投影仪2投射的计测图案的图像。第二图像是指利用拍摄装置50从第一拍摄位置P1对投射有计测图案的图像的状态下的被投射物SC进行拍摄而得到的图像。第三图像是指利用拍摄装置50从第二拍摄位置P2对投射有计测图案的图像的状态下的被投射物SC进行拍摄而得到的图像。
更详细地进行说明，取得部410首先以在信息生成装置1A与投影仪2进行了网络连接的状况下通过对触摸面板10的操作指示了确定开始为契机，取得投影仪信息。接着，取得部410根据投影仪信息所包含的分辨率信息生成计测图案数据。如上所述，在本实施方式中，使用二进制编码图案作为计测图案。二进制编码图案是指用于使用二进制编码来表现显示装置的坐标的图像。所谓二进制编码是指通过开关的接通/断开来表现以2进制数表现任意数值时的各位的值的技法。在使用二进制编码图案作为计测图案的情况下，由投影仪2投射的图像相当于上述的开关，需要表示坐标值的2进制数的位数的量的图像。另外，在X坐标和Y坐标中分别需要不同的图像。例如，在投影仪2的显示面板的分辨率为120×90的情况下，120和90分别由7位的2进制数表现，因此为了表现X坐标而需要7张图像，为了表现Y坐标而需要7张图像。
另外，在将二进制编码图案用作计测图案的情况下，一般已知由于照明等干扰光的影响而计测的鲁棒性降低。因此，在将二进制编码图案用作计测图案的情况下，为了抑制干扰光的影响，提高计测的鲁棒性，一般并用互补图案。互补图案是指将黑白反转后的图像。以下，将用白色表示1、用黑色表示0的二进制编码图案称为“正向图案”，将使其反转后的互补图案称为“反向图案”。在分辨率信息所表示的分辨率为120×90的情况下，如图3所示，由取得部410生成表示正向图案14张、反向图案14张的合计28张的计测图案的计测图案数据。在本实施方式中，作为计测图案使用二进制编码图案，但也可以使用点图案、矩形图案、多边形图案、格子图案、格雷码图案、相移图案或随机点图案等其他结构化光。
取得部410控制投影仪2依次投射计测图案数据所表示的多个计测图案中的各个计测图案。另外，取得部410催促用户从第一拍摄位置P1和第二拍摄位置P2以相同的放大率对依次投射到被投射物SC上的多个计测图案各自进行拍摄，根据用户的操作使拍摄装置50进行拍摄。本实施方式中的第二图像和第三图像是利用相同的照相机以相同的放大率拍摄被投射物SC而得到的图像。
第一确定部420基于第一图像和第二图像，确定投影仪坐标系与第一照相机坐标系的对应关系、即第一对应关系。投影仪坐标系是本公开中的第一坐标系的一例。第一照相机坐标系是本公开中的第二坐标系的一例。更详细地进行说明，第一确定部420根据多个第一图像和多个第二图像生成用于将第二图像中的计测图案的坐标映射变换为投影仪2的显示面板中的计测图案的坐标的第一变换矩阵。
第二确定部430基于第一图像和第三图像，确定投影仪坐标系与第二照相机坐标系的对应关系、即第二对应关系。第二照相机坐标系是本公开中的第三坐标系的一例。更详细地进行说明，第二确定部430根据多个第一图像和多个第三图像生成用于将第三图像中的计测图案的坐标映射变换为投影仪2的显示面板中的计测图案的坐标的第二变换矩阵。
设定辅助部440使触摸面板10的显示装置显示源自第一拍摄位置P1的被投射物SC的拍摄图像。这是为了促使用户指定作为从投影仪2向被投射物SC投射的投射对象在第一照相机坐标系中的配置目的地的第一显示区域。关于该拍摄图像，也可以沿用在第一对应关系的确定时拍摄到的多个第二图像中的任意图像。作为指定第一显示区域的操作的具体例，可举出通过对触摸面板10的点击等，以描绘第一显示区域的轮廓线的方式依次指定第一显示区域的顶点的操作。例如，在指定矩形的第一显示区域的情况下，按照左上角的顶点、右上角、右下角、左下角的顺序点击矩形的顶点即可。作为指定第一显示区域的操作的其他具体例，可列举以描绘第一显示区域的轮廓线的方式进行滑动的操作。
图4是表示为了促使用户指定第一显示区域而由设定辅助部440使显示装置显示的图像G2的一例的图。在图4中标注了斜线的阴影线的区域是通过用户的操作而设定的第一显示区域A1的一例。在图4所示的例子中，设定了跨越被投射物SC的面S1和面S2的第一显示区域A1。设定辅助部440根据指定第一显示区域的操作，生成表示第一显示区域A1的各顶点的位置以及连结各顶点的顺序的第一顶点信息。作为第一顶点信息的具体例，可列举将表示第一照相机坐标系、即第二坐标系中的各顶点的坐标的信息与表示连结顶点的顺序的信息建立对应而排列的信息。作为表示连结顶点的顺序的信息的具体例，可举出值按照顶点的触摸顺序变大的ID。
生成部450根据第一对应关系和第二对应关系，生成将由用户指定的第一显示区域变换为在第三坐标系中作为投射对象的配置目的地的第二显示区域的变换信息。该变换信息包括基于第一对应关系将第一显示区域变换为第一坐标系中的第一区域的第一变换信息和基于第二对应关系将第一区域变换为第二显示区域的第二变换信息。作为第一变换信息的具体例，可举出表示第一对应关系的第一变换矩阵。作为第二变换信息的具体例，可举出表示第二对应关系的第二变换矩阵。作为上述变换信息的具体例，可举出第一变换矩阵和第二变换矩阵的积。
图5是示出从投影仪2向被投射物SC投射的投射图像G3、以及通过根据第一对应关系对第一显示区域A1进行变换而得到的第一区域R1的一例的图。由于本实施方式中的被投射物SC具有三维形状，所以有时在源自第一拍摄位置P1的第一拍摄图像中拍到的被投射物SC的部分中的一部分未在源自第二拍摄位置P2的第二拍摄图像中被拍到。具体而言，被投射物SC的面S1未拍摄到第二拍摄图像中。在这样的状况下，设如图4所示那样设定了跨越面S1和面S2的第一显示区域A1。在该情况下，如图4所示，第一显示区域A1被划分为与在第一拍摄图像和第二拍摄图像双方中被拍到的部分对应的第二区域R2、和与在第一拍摄图像中被拍到而在所述第二拍摄图像中未被拍到的部分对应的第三区域R3。关于第一区域R1中的基于第一对应关系而与第二区域建立对应的部分，能够基于第二对应关系而变换为第二照相机坐标系中的第四区域。另一方面，关于第一区域中的基于第一对应关系而与第三区域建立对应的部分，由于不存在第二对应关系，所以无法使用第二对应关系变换为第二照相机坐标系的区域。生成部450针对与第三区域建立对应的部分，基于第四区域将其变换为第二照相机坐标系的第五区域。即，在本实施方式中，生成部450生成将第二显示区域分为第四区域和第五区域进行变换的第二变换信息。
例如，在图5所示的投射图像G3中，具有顶点A、B、C以及D的四边形的区域与被投射物SC的面S2对应，针对该区域已确定了第二对应关系。在图5中，具有顶点a、b、c以及d的四边形是第一区域R1。具有顶点a、b、c、f及e的五边形的区域是基于第一对应关系而与第二区域R2建立对应的区域。具有顶点d、e及f的三角形的区域是基于第一对应关系而与第三区域R3建立对应的区域。另外，顶点e是线段DA与线段da的交点，顶点f是线段DA与线段cd的交点。
生成部450使用第二变换矩阵来计算第一区域的4个顶点中的顶点a、b以及c在第二照相机坐标中的坐标。接着，生成部450求出投影仪坐标系中的线段DA、da、cd，计算顶点e和顶点f在投影仪坐标系中的坐标。接着，生成部450使用第二变换矩阵求出顶点e以及顶点f在第二照相机坐标系中的坐标，求出在第二照相机坐标系中通过点a和点e的第一直线以及通过点c和点f的第二直线。然后，生成部450求出第二照相机坐标系中的第一直线与第二直线的交点，将该交点的坐标作为第二照相机坐标系中的顶点d的坐标。生成部450生成将顶点d的投影仪坐标系中的坐标与第二照相机坐标系中的坐标建立对应的表与第二变换矩阵的组，作为上述第二变换信息。
如图6所示，确认辅助部460使第二显示区域A2的图像与图像G7重叠地显示于显示装置，该图像G7是由与顶点d的坐标对应的空白的图像G5和从源自第二拍摄位置P2的被投射物SC的拍摄图像G4缩窄该空白的量而切出的图像G6构成的。此时，确认辅助部460用第一颜色涂满第二显示区域的轮廓线的内侧，并且使显示装置用第二颜色显示第二显示区域的轮廓线。作为第一颜色的具体例，可举出红色，作为第二颜色的具体例，可举出蓝色。另外，在本实施方式中，用第二颜色描绘第二显示区域的轮廓线，但也可以用第一颜色描绘。另外，在本实施方式中，用第一颜色涂满第二显示区域的轮廓线的内侧，但也可以省略第一颜色的涂满。另外，也可以省略第二显示区域的轮廓线的描绘，仅通过第二顶点信息所示的顶点的描绘来表现第二显示区域。
另外，按照程序PA工作的处理装置40执行本公开的信息生成方法。图7是表示处理装置40按照程序PA执行的信息生成方法的流程的图。如图7所示，本公开的信息生成方法包括取得处理SA110、第一确定处理SA120、第二确定处理SA130、设定辅助处理SA140、第一判定处理SA150、生成处理SA160以及确认辅助处理SA170。
在取得处理SA110中，处理装置40作为取得部410发挥功能。在取得处理SA110中，处理装置40以通过对触摸面板10的操作由用户指示了确定开始为契机，对投影仪2请求投影仪信息的发送，取得从投影仪2回复的投影仪信息。接着，处理装置40根据从投影仪2取得的投影仪信息所包含的分辨率信息生成多个计测图案。处理装置40控制投影仪2依次投射计测图案数据所表示的多个计测图案中的各个计测图案。另外，处理装置40催促用户从第一拍摄位置P1和第二拍摄位置P2拍摄依次投射到被投射物SC上的多个计测图案中的每一个，根据用户的操作使拍摄装置50进行拍摄，取得第二图像和第三图像。
在取得处理SA110之后的第一确定处理SA120中，处理装置40作为第一确定部420发挥功能。在第一确定处理SA120中，处理装置40确定第一对应关系。即，在第一确定处理SA120中，处理装置40生成第一变换矩阵。在第一确定处理SA120之后的第二确定处理SA130中，处理装置40作为第二确定部430发挥功能。在第二确定处理SA130中，处理装置40确定第二对应关系。即，在第二确定处理SA130中，处理装置40生成第二变换矩阵。
在第二确定处理SA130之后的设定辅助处理SA140中，处理装置40作为设定辅助部440发挥功能。在设定辅助处理SA140中，处理装置40通过使触摸面板10的显示装置显示源自第一拍摄位置P1的被投射物SC的拍摄图像，促使用户指定作为从投影仪2向被投射物SC投射的投射对象在第一照相机坐标系中的配置目的地的第一显示区域。另外，在投射图像中配置多个投射对象的情况下，按照在投射图像中配置的投射对象的数量反复进行设定辅助处理SA140以后的处理即可。在对触摸面板10进行了指定第一显示区域的操作后，处理装置40生成上述的第一顶点信息。当完成第一显示区域的设定时，用户通过对触摸面板10的操作对信息生成装置1A指示第一显示区域的设定完成。
在第一判定处理SA150中，处理装置40判定是否通过对触摸面板10的操作而指示了第一显示区域的设定完成。在第一判定处理SA150的判定结果为“否”的情况下，处理装置40再次执行设定辅助处理SA140。在第一判定处理SA150的判定结果为“是”的情况下，处理装置40执行生成处理SA160。在生成处理SA160中，处理装置40作为生成部450发挥功能。在生成处理SA160中，处理装置40生成用于将在设定辅助处理SA140中生成的第一顶点信息变换为第二顶点信息的变换信息。
在确认辅助处理SA170中，处理装置40作为确认辅助部460发挥功能。在确认辅助处理SA170中，处理装置40在源自第二拍摄位置的拍摄图像上重叠用第一颜色涂满轮廓线的内侧且用第二颜色描绘了轮廓线的第二显示区域的图像，并显示于触摸面板10的显示装置。
根据本实施方式的信息生成装置1A，能够将在源自第一拍摄位置P1的被投射物SC的拍摄图像上指定的显示区域变换为源自第二拍摄位置P2的被投射物的拍摄图像上的显示区域。在源自第一拍摄位置P1的拍摄图像中，虽然拍摄到作为显示区域的配置目的地的面S1和面S2，但该拍摄图像中的面S1及面S2的形状的变形较大。另一方面，在源自第二拍摄位置P2的拍摄图像中仅拍摄到面S2，但该拍摄图像中的面S2的形状的变形较小。根据本实施方式，能够将以伴随大的变形的拍摄图像为参考而设定的显示区域变换为变形小的拍摄图像上的显示区域而使用户确认。此外，根据本实施方式，能够将在源自第二拍摄位置P2的拍摄图像中未拍摄到的范围包含在内地对源自第一拍摄位置的拍摄图像设定显示区域。这样，根据本实施方式的信息生成装置1A，能够不依赖于被投射物SC的形状地设定作为投射对象的配置目的地的显示区域。进而，根据本实施方式，能够使用户通过色彩掌握第二照相机坐标系中的显示区域。
2.变形例
上述各实施方式也可以如以下那样变更。
(1)在上述实施方式中，通过以描绘第一显示区域的轮廓线的方式通过点击等依次指定第一显示区域的顶点的操作来设定第一显示区域。但是，也可以使用户使用各种多边形或椭圆等预先确定的图形来指定第一显示区域。例如，在显示用于选择预先确定的多种图形中的任一种的下拉菜单的情况下，通过选择在该下拉菜单中显示的图形的操作和变更所选择的图形的位置和形状中的至少一方的操作来设定第一显示区域即可。另外，也可以利用边缘检测等确定被投射物SC的整体形状或被投射物SC的各面的形状，将与该确定出的形状对应的图形包含在上述下拉菜单中。
(2)在上述实施方式中，在源自第二拍摄位置P2的拍摄图像中未拍摄到被投射物SC的一部分，第一显示区域被划分为第二区域和第三区域的情况下，针对第一区域中的与第二区域对应的部分，使用第二变换矩阵将其变换为第四区域，针对与第三区域对应的部分，基于第四区域将其变换为第五区域。但是，也可以省略与第三区域对应的部分向第五区域的变换，仅由第四区域构成第二显示区域。
(3)在上述实施方式中，第一拍摄位置P1和第二拍摄位置P2中的一方是与连结另一方和被投射物SC的直线上的位置不同的位置，第二图像和第三图像是以相同的放大率拍摄被投射物SC而得到的图像。但是，如图8所示，第二拍摄位置P2也可以是连结第一拍摄位置P1和被投射物SC的直线L1上的位置。在该情况下，第三图像中的被投射物SC的放大率与第二图像中的被投射物SC的放大率也可以不同。例如，在图8所示的例子中，第三图像中的被投射物SC的放大率也可以大于第二图像中的被投射物SC的放大率。根据本方式，用户能够参考源自放大率更大的第二拍摄位置P2的拍摄图像来确认参考源自第一拍摄位置P1的拍摄图像而设定了显示区域的面S1以及面S2的细节部分，并且设定与面S1以及面S2的详细形状对应的显示区域。
(4)上述实施方式中的信息生成装置1A是具有拍摄装置50的智能手机，但也可以是具备拍摄装置的平板终端或者具备拍摄装置的笔记本型或者固定型的个人计算机。在将笔记本型或者固定型的个人计算机用作本公开的信息生成装置的情况下，也可以将鼠标或者键盘作为输入装置来受理第一显示区域的指定。另外，在信息生成装置能够通过LAN等经由网络的数据通信取得拍摄图像的情况下，信息生成装置不需要具备拍摄装置。在该情况下，例如，如图9所示，也可以将设置于第一拍摄位置P1的拍摄装置50A和设置于第二拍摄位置P2的拍摄装置50B与具有触摸面板10、通信装置20和处理装置40的信息生成装置1B连接而构成图像显示系统5B。在图9所示的图像显示系统5B中，能够同时并行地拍摄第二图像和第三图像。因此，在图9所示的图像显示系统5B中，用户不需要拿着信息生成装置1B从第一拍摄位置P1向第二拍摄位置P2移动。另外，在具有智能手机或者平板终端等便携终端和经由LAN或者因特网与便携终端进行通信的服务器装置的计算机系统中，也可以使服务器装置的处理装置作为取得部410、第一确定部420、第二确定部430、设定辅助部440以及生成部450发挥功能，使该便携终端承担显示装置以及输入装置的作用。该计算机系统是本公开的信息生成系统的一例。
(5)上述第一实施方式中的取得部410、第一确定部420、第二确定部430、设定辅助部440、生成部450以及确认辅助部460是软件模块。但是，取得部410、第一确定部420、第二确定部430、设定辅助部440、生成部450以及确认辅助部460的一部分或者全部也可以是硬件。作为该硬件的一例，可举出DSP(Digital Signal Processor)、ASIC(ApplicationSpecific Integrated Circuit)、PLD(Programmable Logic Device)以及FPGA(FieldProgrammable Gate Array)。即使取得部410、第一确定部420、第二确定部430、设定辅助部440、生成部450以及确认辅助部460的一部分或者全部是硬件，也起到与上述实施方式相同的效果。
(6)在上述实施方式中，程序PA已存储于存储装置30。但是，也可以单独制造或发布程序PA。作为程序PA的具体的发布方法，可以考虑在闪存ROM(Read Only Memory)等计算机可读取的记录介质中写入上述程序PA来进行发布的方式、或者通过经由因特网等电气通信线路的下载来进行发布的方式。通过将该程序PA安装于个人计算机等一般的信息处理装置，并使该信息处理装置的CPU等计算机按照该程序进行工作，能够使该信息处理装置作为本公开的信息生成装置发挥功能。
3.根据实施方式以及各变形例中的至少1个而掌握的方式
本公开不限于上述的实施方式以及变形例，在不脱离其主旨的范围内能够以各种方式实现。例如，本公开也能够通过以下的方式来实现。与以下记载的各方式中的技术特征对应的上述实施方式中的技术特征为了解决本公开的课题的一部分或全部，或者为了实现本公开的效果的一部分或全部，能够适当地进行替换、组合。另外，该技术特征在本说明书中只要未作为必须的特征进行说明，就能够适当删除。
为了解决以上说明的课题，本公开的信息生成方法的一个方式包括取得处理SA110、第一确定处理SA120、第二确定处理SA130、设定辅助处理SA140以及生成处理SA160。
在取得处理SA110中，取得从投影仪2向被投射物SC投射的计测图案的图像、从第一拍摄位置P1对投射有计测图案的图像的状态的被投射物SC进行拍摄而得到的拍摄图像、以及从第二拍摄位置P2对投射有计测图案的图像的状态的被投射物SC进行拍摄而得到的拍摄图像。计测图案的图像是本公开中的第一图像的一例。从第一拍摄位置P1对投射有计测图案的图像的状态的被投射物SC进行拍摄而得到的拍摄图像是本公开中的第二图像的一例。从第二拍摄位置P2对投射有计测图案的图像的状态的被投射物SC进行拍摄而得到的拍摄图像是本公开中的第三图像的一例。
在第一确定处理SA120中，基于第一图像和第二图像，确定表示投影仪2投射的投射图像上的位置的第一坐标系与表示从第一拍摄位置P1拍摄的拍摄图像上的位置的第二坐标系的第一对应关系。在第二确定处理SA130中，基于第一图像和第三图像，确定第一坐标系与表示从第二拍摄位置P2拍摄的拍摄图像上的位置的第三坐标系的第二对应关系。
在设定辅助处理SA140中，通过使触摸面板10的显示装置显示源自第一拍摄位置P1的被投射物SC的拍摄图像，促使用户指定作为从投影仪2向被投射物SC投射的投射对象在第二坐标系中的配置目的地的第一显示区域A1。并且，在生成处理SA160中，根据第一对应关系和第二对应关系生成将第一显示区域A1变换为在第三坐标系中作为投射对象的配置目的地的第二显示区域A2的变换信息。
根据本方式的信息生成方法，能够将在源自第一拍摄位置P1的被投射物SC的拍摄图像上指定的第一显示区域变换为源自第二拍摄位置P2的被投射物SC的拍摄图像上的第二显示区域。例如，第一拍摄位置P1和第二拍摄位置P2中的一方是连结另一方和被投射物SC的直线上的位置，在第二图像和第三图像中被投射物SC的放大率不同。在该情况下，用户能够改变放大率来确认作为投射对象的配置目的地的显示区域。
另外，在第一拍摄位置P1和第二拍摄位置P2中的一方是与连结另一方和被投射物SC的直线上的位置不同的位置，第二图像和第三图像是以相同的放大率对被投射物进行拍摄而得到的图像的情况下，生成用于改变观察被投射物的方向来确认显示区域的变换信息。因此，即使在一方的拍摄图像中存在未拍摄到的部分，也能够包含该未拍摄到的部分来设定显示区域。这样，根据本方式的信息生成方法，能够不依赖于被投射物的形状地设定作为投射对象的配置目的地的显示区域。
在更优选的方式的信息生成方法中，变换信息也可以包括基于第一对应关系将第一显示区域A1变换为第一坐标系中的第一区域R1的第一变换信息以及基于第二对应关系将第一区域R1变换为第二显示区域A2的第二变换信息。
在另一优选方式的信息生成方法中，在从第一拍摄位置P1拍摄被投射物SC而得到的第一拍摄图像中拍摄到的被投射物SC的部分中的一部分未在从第二拍摄位置P2拍摄被投射物SC而得到的第二拍摄图像中被拍到，而第一显示区域A1被划分为第二区域R2和第三区域R3的情况下，在生成处理SA160中生成以下的第二变换信息。第二区域R2与第一显示区域A1中的被第一拍摄图像和第二拍摄图像双方拍摄到的部分对应。第三区域R3与第一显示区域A1中的在第一拍摄图像中被拍到而在第二拍摄图像中未被拍到的部分对应。在该情况下，生成分成以下的第四区域和第五区域而变换为第二显示区域A2的第二变换信息。第四区域是通过基于第二对应关系对第一区域R1中的基于第一对应关系而与第二区域R2建立对应的部分进行变换而得到的区域。第五区域是通过基于第四区域对第一区域中的基于第一对应关系而与第三区域R3对应的部分进行变换而得到的区域。根据本方式，能够将在第二拍摄图像中未拍摄到的范围包含在内地设定第一显示区域A1。
在更优选的方式的信息生成方法中，也可以是，第二图像由设置于第一拍摄位置P1的拍摄装置50拍摄，第三图像由设置于第二拍摄位置P2的拍摄装置50拍摄。根据本方式，能够利用1个拍摄装置拍摄第二图像和第三图像。
在更优选的方式的信息生成方法中，也可以是，第二图像由设置于第一拍摄位置P1的拍摄装置50A拍摄，第三图像由设置于第二拍摄位置P2的拍摄装置50B拍摄。拍摄装置50A是本公开中的第一照相机的一例，拍摄装置50B是本公开中的第二照相机的一例。根据本方式，能够同时拍摄第二图像和第三图像。
另外，为了解决上述课题，本公开的信息生成系统的一个方式具备显示装置、输入装置以及以下的处理装置40。而且，处理装置40执行上述的取得处理SA110、第一确定处理SA120、第二确定处理SA130、设定辅助处理SA140以及生成处理SA160。根据本方式的信息生成系统，也能够不依赖于被投射物的形状地设定作为投射对象的配置目的地的显示区域。
在更优选的方式的信息生成系统中，处理装置40还执行确认辅助处理SA170。在确认辅助处理SA170中，处理装置40使源自第二拍摄位置P2的拍摄图像以将第二显示区域A2涂满第一颜色的状态显示于显示装置。根据本方式，用户能够通过色彩一目了然地掌握第二显示区域。
在更优选的方式的信息生成系统中，在确认辅助处理SA170中，处理装置40使显示装置以第二颜色显示第二显示区域A2的轮廓线。根据本方式，用户能够通过色彩一目了然地掌握第二显示区域的轮廓。
另外，为了解决上述课题，本公开的程序的一个方式使计算机执行上述的取得处理SA110、第一确定处理SA120、第二确定处理SA130、设定辅助处理SA140以及生成处理SA160。根据本方式的程序，也能够不依赖于被投射物的形状地设定作为投射对象的配置目的地的显示区域。
Claims (11)
1.一种信息生成方法，其中，
取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，
根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，
根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，
将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，受理指定第一显示区域的操作，所述第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，
根据所述第一对应关系和所述第二对应关系，生成变换信息，所述变换信息将通过进行指定的所述操作而指定的所述第一显示区域变换为所述第三坐标系中作为所述投射对象的配置目的地的第二显示区域。
2.根据权利要求1所述的信息生成方法，其中，
所述变换信息包括：
第一变换信息，其基于所述第一对应关系将所述第一显示区域变换为所述第一坐标系中的第一区域；以及
第二变换信息，其基于所述第二对应关系将所述第一区域变换为所述第二显示区域。
3.根据权利要求2所述的信息生成方法，其中，
在从所述第一拍摄位置拍摄所述被投射物而得到的第一拍摄图像中拍摄到的所述被投射物的部分中的一部分未在从所述第二拍摄位置拍摄所述被投射物而得到的第二拍摄图像中被拍摄到，所述第一显示区域被划分为与在所述第一拍摄图像和所述第二拍摄图像双方中被拍摄到的部分对应的第二区域、以及与在所述第一拍摄图像中被拍摄到而在所述第二拍摄图像中未被拍摄到的部分对应的第三区域的情况下，
生成将所述第二显示区域分开变换为第四区域和第五区域的所述第二变换信息，所述第四区域是通过基于所述第二对应关系对所述第一区域中的基于所述第一对应关系与所述第二区域建立对应的部分进行变换而得到的区域，所述第五区域是通过基于所述第四区域对所述第一区域中的基于所述第一对应关系与所述第三区域建立对应的部分进行变换而得到的区域。
4.根据权利要求1至3中的任意一项所述的信息生成方法，其中，
所述第一拍摄位置和所述第二拍摄位置中的一方是连结另一方和所述被投射物的直线上的位置，在所述第二图像和所述第三图像中，所述被投射物的放大率不同。
5.根据权利要求1至3中的任意一项所述的信息生成方法，其中，
所述第一拍摄位置和所述第二拍摄位置中的一方是与连结另一方和所述被投射物的直线上的位置不同的位置，所述第二图像和所述第三图像是以相同的放大率拍摄所述被投射物得到的图像。
6.根据权利要求1至3中的任意一项所述的信息生成方法，其中，
所述第二图像是由设置于所述第一拍摄位置的照相机拍摄的，所述第三图像是由设置于所述第二拍摄位置的所述照相机拍摄的。
7.根据权利要求1至3中的任意一项所述的信息生成方法，其中，
所述第二图像是由设置于所述第一拍摄位置的第一照相机拍摄的，所述第三图像是由设置于所述第二拍摄位置的第二照相机拍摄的。
8.一种信息生成系统，其具备：
显示装置；
输入装置；以及
处理装置，
所述处理装置执行如下处理：
取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，
根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，
根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，
将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，
受理指定第一显示区域的操作，所述第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，以及
根据所述第一对应关系和所述第二对应关系，生成变换信息，所述变换信息将通过进行指定的所述操作而指定的所述第一显示区域变换为所述第三坐标系中作为所述投射对象的配置目的地的第二显示区域。
9.根据权利要求8所述的信息生成系统，其中，
所述处理装置还执行如下处理：将源自所述第二拍摄位置的拍摄图像以用第一颜色涂满了所述第二显示区域的状态显示于所述显示装置。
10.根据权利要求8或9所述的信息生成系统，其中，
所述处理装置将所述第二显示区域的轮廓线以第二颜色显示于所述显示装置。
11.一种记录介质，其记录有程序，该程序使计算机执行如下处理：
取得从投影仪投射的第一图像、从第一拍摄位置对投射有所述第一图像的状态的被投射物进行拍摄而得到的第二图像、以及从与所述第一拍摄位置不同的第二拍摄位置对所述被投射物进行拍摄而得到的第三图像，
根据所述第一图像和所述第二图像，确定表示所述投影仪投射的投射图像上的位置的第一坐标系与表示从所述第一拍摄位置拍摄的拍摄图像上的位置的第二坐标系的第一对应关系，
根据所述第一图像和所述第三图像，确定所述第一坐标系与表示从所述第二拍摄位置拍摄的拍摄图像上的位置的第三坐标系的第二对应关系，
将源自所述第一拍摄位置的所述被投射物的拍摄图像显示于显示装置，
受理指定第一显示区域的操作，所述第一显示区域是从所述投影仪向所述被投射物投射的投射对象在所述第二坐标系中的配置目的地，以及
根据所述第一对应关系和所述第二对应关系，生成变换信息，所述变换信息将通过进行指定的所述操作而指定的所述第一显示区域变换为所述第三坐标系中作为所述投射对象的配置目的地的第二显示区域。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020-151909 | 2020-09-10 | ||
| JP2020151909A JP7163943B2 (ja) | 2020-09-10 | 2020-09-10 | 情報生成方法、情報生成システム、及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114173105A CN114173105A (zh) | 2022-03-11 |
| CN114173105B true CN114173105B (zh) | 2023-06-16 |
Family
ID=80470910
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111050818.0A Active CN114173105B (zh) | 2020-09-10 | 2021-09-08 | 信息生成方法、信息生成系统以及记录介质 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US11538134B2 (zh) |
| JP (1) | JP7163943B2 (zh) |
| CN (1) | CN114173105B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7272336B2 (ja) * | 2020-09-09 | 2023-05-12 | セイコーエプソン株式会社 | 情報生成方法、情報生成システム、及びプログラム |
| JP7163947B2 (ja) * | 2020-10-22 | 2022-11-01 | セイコーエプソン株式会社 | 投写領域の設定支援方法、設定支援システム、及びプログラム |
| CN115314689A (zh) * | 2022-08-05 | 2022-11-08 | 深圳海翼智新科技有限公司 | 投影校正方法、装置、投影仪和计算机程序产品 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101021678A (zh) * | 2007-04-04 | 2007-08-22 | 乔楠 | 一种环幕摄像系统 |
| JP2011050013A (ja) * | 2009-08-28 | 2011-03-10 | Panasonic Corp | 映像投影装置及び映像投影方法 |
| CN102449680A (zh) * | 2009-05-26 | 2012-05-09 | 松下电器产业株式会社 | 信息呈现装置 |
| CN104052952A (zh) * | 2013-03-14 | 2014-09-17 | 精工爱普生株式会社 | 图像处理装置、投影仪以及图像处理方法 |
| CN106254843A (zh) * | 2016-08-24 | 2016-12-21 | 成都市极米科技有限公司 | 一种投影仪和投影画面几何校正方法、装置及系统 |
| JP2019120885A (ja) * | 2018-01-10 | 2019-07-22 | パナソニックＩｐマネジメント株式会社 | 投影制御システム及び投影制御方法 |
| CN111435985A (zh) * | 2019-01-15 | 2020-07-21 | 精工爱普生株式会社 | 投影仪的控制方法、投影仪和投射系统 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4377247B2 (ja) | 2004-01-08 | 2009-12-02 | 日本電信電話株式会社 | プロジェクタ投影制御システムおよびプロジェクタ投影制御方法 |
| CN100527805C (zh) | 2004-09-15 | 2009-08-12 | 三菱电机株式会社 | 图像投影系统和图像几何校正装置 |
| US20070285554A1 (en) * | 2005-10-31 | 2007-12-13 | Dor Givon | Apparatus method and system for imaging |
| US9137504B2 (en) * | 2006-06-16 | 2015-09-15 | Hewlett-Packard Development Company, L.P. | System and method for projecting multiple image streams |
| JP5236219B2 (ja) | 2007-06-21 | 2013-07-17 | 三菱プレシジョン株式会社 | 分割撮像による歪み補正と統合方法及びそのためのマッピング関数生成方法並びに分割撮像による歪み補正と統合装置及びそのためのマッピング関数生成装置 |
| US20090195758A1 (en) | 2008-01-31 | 2009-08-06 | Hewlett-Packard Development Company, L.P. | Meshes for separately mapping color bands |
| JP4341723B2 (ja) | 2008-02-22 | 2009-10-07 | パナソニック電工株式会社 | 光投影装置、照明装置 |
| JP2010283674A (ja) | 2009-06-05 | 2010-12-16 | Panasonic Electric Works Co Ltd | 投影システム及び投影方法 |
| JP6618249B2 (ja) | 2014-02-18 | 2019-12-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 投影システムおよび半導体集積回路 |
| JP6069241B2 (ja) | 2014-03-12 | 2017-02-01 | 日本電信電話株式会社 | 空間投影装置及び空間投影プログラム |
| JP6344050B2 (ja) | 2014-05-16 | 2018-06-20 | 株式会社リコー | 画像処理システム、画像処理装置、プログラム |
| JP6846661B2 (ja) | 2016-04-13 | 2021-03-24 | パナソニックＩｐマネジメント株式会社 | ３次元的な投影対象のための投影方法及び装置 |
| WO2018168405A1 (ja) * | 2017-03-16 | 2018-09-20 | 富士フイルム株式会社 | 画像合成装置、画像合成方法及びプログラム |
| US11120294B1 (en) * | 2019-08-07 | 2021-09-14 | Matrox Electronic Systems Ltd. | Method and system for three-dimensional profiling of an object |
-
2020
- 2020-09-10 JP JP2020151909A patent/JP7163943B2/ja active Active
-
2021
- 2021-09-08 CN CN202111050818.0A patent/CN114173105B/zh active Active
- 2021-09-10 US US17/471,918 patent/US11538134B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101021678A (zh) * | 2007-04-04 | 2007-08-22 | 乔楠 | 一种环幕摄像系统 |
| CN102449680A (zh) * | 2009-05-26 | 2012-05-09 | 松下电器产业株式会社 | 信息呈现装置 |
| JP2011050013A (ja) * | 2009-08-28 | 2011-03-10 | Panasonic Corp | 映像投影装置及び映像投影方法 |
| CN104052952A (zh) * | 2013-03-14 | 2014-09-17 | 精工爱普生株式会社 | 图像处理装置、投影仪以及图像处理方法 |
| CN106254843A (zh) * | 2016-08-24 | 2016-12-21 | 成都市极米科技有限公司 | 一种投影仪和投影画面几何校正方法、装置及系统 |
| JP2019120885A (ja) * | 2018-01-10 | 2019-07-22 | パナソニックＩｐマネジメント株式会社 | 投影制御システム及び投影制御方法 |
| CN111435985A (zh) * | 2019-01-15 | 2020-07-21 | 精工爱普生株式会社 | 投影仪的控制方法、投影仪和投射系统 |
Non-Patent Citations (1)
| Title |
|---|
| 陶奇.基于投影结构光技术的三维重构研究.《中国优秀硕士学位论 文全文数据库 信息科技辑》.2010,全文. * |
Also Published As
| Publication number | Publication date |
|---|---|
| US20220076372A1 (en) | 2022-03-10 |
| US11538134B2 (en) | 2022-12-27 |
| CN114173105A (zh) | 2022-03-11 |
| JP2022046060A (ja) | 2022-03-23 |
| JP7163943B2 (ja) | 2022-11-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114173105B (zh) | 信息生成方法、信息生成系统以及记录介质 | |
| JP2022046059A (ja) | 情報生成方法、情報生成システム、及びプログラム | |
| JP4042695B2 (ja) | プロジェクタおよびズーム調整方法 | |
| CN113473094B (zh) | 设定辅助方法和设定辅助装置 | |
| JPH11161415A (ja) | 入力方法および入力装置 | |
| CN114245094B (zh) | 信息生成方法、信息生成系统以及记录介质 | |
| JP2020178221A (ja) | 投影制御装置、投影制御方法およびプログラム | |
| CN114500963B (zh) | 确定方法、确定系统和记录介质 | |
| JP7347205B2 (ja) | 投写システムの制御方法、投写システム及び制御プログラム | |
| CN114390265B (zh) | 投射区域的设定辅助方法、设定辅助系统以及记录介质 | |
| US20230314914A1 (en) | Image display method, information processing apparatus, and recording medium having program recorded thereon | |
| CN113286132B (zh) | 图像投射系统的控制方法和图像投射系统 | |
| US20230276036A1 (en) | Method of adjusting projection image, projection system, and control apparatus | |
| US12022241B2 (en) | Image projection method and projector | |
| US20230316609A1 (en) | Image editing method, information processing apparatus, and recording medium having program recorded thereon | |
| JP4984791B2 (ja) | ポインティング装置、ポインティング方法及びプログラム | |
| JP2020122696A (ja) | 位置検出装置、位置検出ユニット、画像表示システムおよび位置検出方法 | |
| JP2021190945A (ja) | 補正データ生成方法、プロジェクターの制御方法、補正データ生成装置およびプロジェクター | |
| JP2021135159A (ja) | 計測方法、及び計測装置 | |
| JP2021193500A (ja) | 位置検出方法、位置検出装置及びプロジェクター | |
| JP2022073496A (ja) | 射影変換行列の決定方法、プロジェクターおよび決定システム | |
| JPS6385888A (ja) | 画像入力装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |