CN116805986A - 图像生成装置、图像生成方法及非暂时性的存储介质 - Google Patents

图像生成装置、图像生成方法及非暂时性的存储介质 Download PDF

Info

Publication number
CN116805986A
CN116805986A CN202310289170.5A CN202310289170A CN116805986A CN 116805986 A CN116805986 A CN 116805986A CN 202310289170 A CN202310289170 A CN 202310289170A CN 116805986 A CN116805986 A CN 116805986A
Authority
CN
China
Prior art keywords
image
light
exposure
camera
captured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310289170.5A
Other languages
English (en)
Inventor
田中尉氏
水上裕之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN116805986A publication Critical patent/CN116805986A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明提供一种能够得到甚至背景区域也高画质的描绘图像的图像生成装置、图像生成方法及非暂时性的存储介质。一种图像生成装置，其具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器，所述处理器进行如下处理：使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；从变更了曝光的状态下拍摄到的所述摄像图像中检测所述光；以及针对根据所述光的检测状况生成的所述描绘图像，校正成为所述光的背景的背景区域的亮度并进行记录。

Description

图像生成装置、图像生成方法及非暂时性的存储介质
技术领域
本发明涉及一种图像生成装置、图像生成方法及非暂时性的存储介质。
背景技术
以往，已知一种拍摄光笔等的，光并从所得到的图像中检测光的技术。例如，专利文献1中记载了一种指针光跟踪方法，其由相机拍摄指针光，根据所得到的图像，由计算机跟踪显示器上的指针光。
在专利文献1中记载的技术中，调整相机的快门速度等而获取强烈地映出指针光的图像，由此使容易检测指针光。
专利文献1：WO2006/085580号
在专利文献1中记载的技术中，在强烈地映出指针光的图像中，虽然容易检测指针光，但有时背景区域的画质降低。
发明内容
本发明是鉴于以上情况而完成的，其目的在于提供一种能够得到甚至背景区域也高画质的描绘图像的图像生成装置、图像生成方法及非暂时性的存储介质。
为了实现上述目的，本发明的第1方式的图像生成装置具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器，处理器进行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；从在变更了曝光的状态下拍摄到的摄像图像中检测光；以及针对根据光的检测状况生成的描绘图像，校正成为光的背景的背景区域的亮度并进行记录。
本发明的第2方式的图像生成装置在第1方式的图像生成装置中，处理器根据摄像面整体的曝光变更量来调整灵敏度。
本发明的第3方式的图像生成装置在第1方式或第2方式的图像生成装置中，背景区域的亮度是与即将变更摄像面整体的曝光之前的摄像图像的亮度相等的亮度。
并且，为了实现上述目的，本发明的第4方式的图像生成装置具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器，处理器进行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；使相机调整曝光并拍摄在摄像图像中成为光的背景的背景图像；以及使根据检测出光的检测状况描绘的描绘图像与背景图像合成而生成合成图像。
本发明的第5方式的图像生成装置在第4方式的图像生成装置中，处理器进行如下处理：使相机将曝光恢复至变更摄像面整体的曝光之前的状态，并拍摄背景图像。
本发明的第6方式的图像生成装置在第4方式或第5方式的图像生成装置中，处理器进行如下处理：接受转移到生成描绘图像的描绘模式的指示；以及在根据指示转移到描绘模式的情况下，从根据摄影环境确定的标准曝光变更摄像面整体的曝光。
本发明的第7方式的图像生成装置在第6方式的图像生成装置中，处理器进行如下处理：在接受到指示的情况下，向指示装置发送发出光的发光指示信号。
本发明的第8方式的图像生成装置在第1方式至第7方式中任一项所述的图像生成装置中，处理器进行如下处理：在无法从摄像图像中检测光的情况下，变更摄像面整体的曝光。
本发明的第9方式的图像生成装置在第8方式的图像生成装置中，变更摄像面整体的曝光是向降低曝光的方向的变更。
本发明的第10方式的图像生成装置在第1方式至第9方式中任一项所述的图像生成装置中，处理器通过调整相机的快门速度及光圈中的至少一方来变更摄像面整体的曝光。
本发明的第11方式的图像生成装置在第1方式至第10方式中任一项所述的图像生成装置中，光是预先确定的波长的光，处理器根据光的亮度和与预先确定的波长对应的颜色，从摄像图像中检测光。
本发明的第12方式的图像生成装置在第1方式至第11方式中任一项所述的图像生成装置中，指示装置是空间描绘用描绘设备。
本发明的第13方式的图像生成装置在第1方式至第12方式中任一项所述的图像生成装置中，指示装置具备印刷由图像生成装置生成的描绘图像的打印功能。
为了实现上述目的，本发明的第14方式的图像生成方法为如下方法：具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器的图像生成装置的处理器进行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；从在变更了曝光的状态下拍摄到的摄像图像中检测光；以及针对根据光的检测状况生成的描绘图像，校正成为光的背景的背景区域的亮度并进行记录。
为了实现上述目的，本发明的第15方式的图像生成方法为如下方法：具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器的图像生成装置的处理器进行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；使相机调整曝光并拍摄在摄像图像中成为光的背景的背景图像；以及使根据检测出光的检测状况描绘的描绘图像与背景图像合成而生成合成图像。
为了实现上述目的，本发明的第16方式的非暂时性的存储介质存储有图像生成程序，该图像生成程序用于使具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器的图像生成装置的处理器执行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；从在变更了曝光的状态下拍摄到的摄像图像中检测光；以及针对根据光的检测状况生成的描绘图像，校正成为光的背景的背景区域的亮度并进行记录。
为了实现上述目的，本发明的第17方式的非暂时性的存储介质存储有图像生成程序，该图像生成程序用于使具备拍摄指示装置发出的光的相机、以及根据从由相机拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器的图像生成装置的处理器执行如下处理：使相机变更摄像面整体的曝光并拍摄摄像图像；使相机调整曝光并拍摄在摄像图像中成为光的背景的背景图像；以及使根据检测出光的检测状况描绘的描绘图像与背景图像合成而生成合成图像。
发明效果
根据本发明，能够得到甚至背景区域也高画质的描绘图像。
附图说明
图1是表示实施方式的空间描绘系统的结构的一例的结构图。
图2是表示实施方式的描绘用设备的硬件结构的一例的框图。
图3是表示实施方式的描绘用设备的结构的一例的功能框图。
图4是表示实施方式的智能手机的硬件结构的一例的框图。
图5是表示第1实施方式的智能手机的结构的一例的功能框图。
图6是用于说明第1实施方式的作用的图。
图7是表示由第1实施方式的智能手机执行的图像生成处理及由描绘用设备执行的描绘控制处理的一例的流程图。
图8是表示第2实施方式的智能手机的结构的一例的功能框图。
图9是用于说明第2实施方式的作用的图。
图10是表示由第2实施方式的智能手机执行的图像生成处理及由描绘用设备执行的描绘控制处理的一例的流程图。
图11是用于说明第3实施方式的作用的图。
图12是表示由第3实施方式的智能手机执行的图像生成处理及由描绘用设备执行的描绘控制处理的一例的流程图。
图13是表示描绘设备的其他例的图。
具体实施方式
以下，参考附图对用于实施本发明的技术的方式例进行详细说明。
[第1实施方式]
参考图1对本实施方式的空间描绘系统1的结构进行说明。如图1所示，本实施方式的空间描绘系统1具备描绘用设备10及智能手机12。描绘用设备10及智能手机12经由网络19通过有线通信或无线通信来连接。
参考图2对本实施方式的描绘用设备10的结构进行说明。本实施方式的描绘用设备10是如下设备：由进行描绘的用户把持，通过移动从光源26发出光的描绘用设备10，由从光源26发出的光(参考图1，光2)在空间中用于进行描绘。作为一例，在本实施方式中，对光笔型描绘用设备10进行说明。本实施方式的描绘用设备10是本发明的指示装置的一例。
另一方面，智能手机12具备拍摄从描绘用设备10的光源26发出的光的相机47。智能手机12具有从由相机47拍摄的摄像图像中检测描绘用设备10的光源26的光，并根据检测状况生成描绘图像的功能。本实施方式的智能手机12是本发明的图像生成装置的一例。
另外，作为一例，在本实施方式中，使用描绘用设备10进行描绘的用户与由智能手机12拍摄描绘用设备10发出的光而生成描绘图像的用户是不同的用户。在本实施方式中，为了区分两个用户，将由描绘用设备10进行描绘的用户称为“描绘用户”，将由智能手机12拍摄并生成描绘图像的用户称为“摄像用户”。
首先，对描绘用设备10的详细情况进行说明。图2中示出表示描绘用设备10中的与空间描绘所涉及的功能有关的结构的一例的框图。如图2所示，描绘用设备10具备处理器20、存储器22、I/F(InterFace：接口)部23、存储部24、光源26及输入装置28。处理器20、存储器22、I/F部23、存储部24、光源26及输入装置28经由系统总线、控制总线等总线29连接成彼此可以收发各种信息。
处理器20将包括存储在存储部24中的描绘控制程序25的各种程序读取到存储器22中，并执行按照所读取的程序的处理。存储器22是用于处理器20执行处理的工作存储器。在存储部24中存储有描绘控制程序25、其他各种信息等。并且，作为存储部24的具体例，可以举出HDD(hard disk drive：硬盘驱动器)、SSD(solid state drive：固态驱动器)等。
I/F部23通过无线通信或有线通信，与智能手机12之间进行各种信息的通信。包括描绘开关28A的输入装置28作为用户界面发挥作用。描绘开关28A是为了在描绘用户进行描绘时输入各种指示而操作的开关，设置在描绘用设备10的主体表面上。
光源26发出用于描绘的光，例如，可以举出LED(Light Emitting Diode：发光二极管)。作为一例，在本实施方式中，使用高亮度类型的LED。并且，为了提高智能手机12中的光源26的光检测率，采用具有纯绿色发光色的LED，而不是如黄绿色等混合色。并且，由于优选漏光少，因此采用指向性高的光源。
图3中示出表示本实施方式的描绘用设备10的功能所涉及结构的一例的功能框图。如图3所示，描绘用设备10具备点亮控制部30、开关状态接受部32及描绘指示输出部34。作为一例，在本实施方式的描绘用设备10中，处理器20执行存储在存储部24中的描绘控制程序25，由此处理器20作为点亮控制部30、开关状态接受部32及描绘指示输出部34发挥作用。
点亮控制部30具有对光源26的点亮及熄灭进行控制的功能。作为一例，本实施方式的点亮控制部30在被输入了从智能手机12输出的点亮指示的情况下，进行使光源26点亮的控制。本实施方式的点亮指示是本发明的发光指示信号的一例。并且，点亮控制部30在被输入了从智能手机12输出的熄灭指示的情况下，进行使光源26熄灭的控制。
开关状态接受部32具有接受由描绘用户操作的描绘开关28A的操作状态的功能。作为一例，在本实施方式中，在描绘用户由描绘用设备10开始描绘的情况下，在光源26点亮之后，操作描绘开关28A而指示描绘开始。另外，以下，将操作描绘开关28A而指示描绘开始的情况称为“使描绘开关28A接通”等。并且，在本实施方式中，在描绘用户结束基于描绘用设备10的描绘的情况下，操作描绘开关28A而指示描绘结束。另外，以下，将操作描绘开关28A而指示描绘结束的情况称为“使描绘开关28A断开”等。
描绘指示输出部34具有将与开关状态接受部32接受到的描绘开关28A的状态对应的描绘开始指示及描绘结束指示输出到智能手机12的功能。具体而言，开关状态接受部32接受到接通描绘开关28A作为描绘开关28A的操作状态的情况下，描绘指示输出部34将描绘开始指示输出到智能手机12。并且，在开关状态接受部32接受到断开描绘开关28A作为描绘开关28A的操作状态的情况下，描绘指示输出部34将描绘结束指示输出到智能手机12。另外，在本实施方式中，将描绘开始指示及描绘结束指示统称为“描绘指示”。
接着，对智能手机12的详细情况进行说明。图4中示出表示智能手机12中的与描绘图像的生成所涉及功能有关的结构的一例的框图。如图4所示，智能手机12具备处理器40、存储器42、I/F部43、存储部44、显示器46、相机47及输入装置48。处理器40、存储器42、I/F部43、存储部44、显示器46、相机47及输入装置48经由系统总线、控制总线等总线49连接成彼此可以收发各种信息。
处理器40将包括存储在存储部44中的图像生成程序45的各种程序读取到存储器42中，并执行按照所读取的程序的处理。存储器42是用于处理器40执行处理的工作存储器。在存储部44中存储有图像生成程序45、其他各种信息等。作为存储部44的具体例，可以举出HDD、SSD等。
I/F部43通过无线通信或有线通信，与描绘用设备10之间进行各种信息的通信。显示器46及输入装置48作为用户界面发挥作用。显示器46即时预览显示相机47拍摄到的摄像图像，或者提供与描绘有关的各种信息。显示器46不受特别的限定，可以举出液晶监视器及LED监视器等。并且，输入装置48由摄像用户操作，以输入与描绘有关的各种指示。输入装置48不受特别的限定，例如，可以举出键盘、触控笔及鼠标等。本实施方式的输入装置48包括相机47的快门按钮。另外，在智能手机12中采用将显示器46与输入装置48一体化的触摸屏显示器。
图5中示出表示本实施方式的智能手机12的功能所涉及结构的一例的功能框图。如图5所示，智能手机12具备描绘模式管理部50、描绘设备控制部52、摄影控制部54、光检测部58、描绘指示获取部60、描绘图像生成部62、显示控制部64及描绘图像记录部66。作为一例，在本实施方式的智能手机12中，处理器40执行存储在存储部44中的图像生成程序45，由此处理器40作为描绘模式管理部50、描绘设备控制部52、摄影控制部54、光检测部58、描绘指示获取部60、描绘图像生成部62、显示控制部64及描绘图像记录部66发挥作用。
描绘模式管理部50具有对转移到描绘模式及结束描绘模式进行管理的功能。作为一例，本实施方式的描绘模式管理部50在接受到摄像用户由输入装置48进行的向描绘模式的转移指示的情况下，转移到后面详述的描绘模式。并且，描绘模式管理部50在接受到摄像用户由输入装置48进行的描绘模式的结束指示的情况下，结束后面详述的描绘模式。
描绘设备控制部52具有控制描绘用设备10的功能。作为一例，本实施方式的描绘设备控制部52在转移到描绘模式的情况下，输出用于使描绘用设备10的光源26点亮的点亮指示。并且，描绘设备控制部52在结束描绘模式的情况下，输出用于使描绘用设备10的光源26熄灭的熄灭指示。
摄影控制部54具备曝光控制部56，具有对由相机47拍摄摄像图像进行控制的功能。作为一例，本实施方式的相机47具备CMOS(Complementary Metal OxideSemiconductor：互补型金属氧化物半导体)等成像元件(省略图示)，可以拍摄RGB彩色图像。另外，在本实施方式中，将由相机47的成像元件拍摄到的图像称为“摄像图像”。摄影控制部54在描绘模式中拍摄多帧的摄像图像作为动态图像。
曝光控制部56具有控制相机47对摄像图像的拍摄中的曝光的功能。作为一例，本实施方式的曝光控制部56具有通过调整相机47的快门速度及光圈中的至少一方来调整曝光的功能。
光检测部58具有从相机47拍摄到的摄像图像中检测描绘用设备10的光源26的光的功能。严格而言，光检测部58具有检测映现在摄像图像中的、表示光源26的光的图像的功能。例如，描绘用户通过移动光源26点亮状态的描绘用设备10而在空间中进行描绘，因此光检测部58从一系列摄像图像中检测光源26的轨迹。另外，在本实施方式中，关于描绘用设备10的光源26，如上所述，预先确定有光的颜色及亮度。因此，光检测部58根据预先确定的光的颜色及亮度，从摄像图像中检测光源26的光。光检测部58检测出的光的检测状况输出到光检测部58及描绘图像生成部62。
描绘指示获取部60具有获取从描绘用设备10输出的描绘指示的功能。具体而言，描绘指示获取部60获取从描绘用设备10输出并输入到智能手机12的描绘开始指示及描绘结束指示。描绘指示获取部60获取的描绘开始指示及描绘结束指示输出到描绘图像生成部62。
描绘图像生成部62具有根据光检测部58的检测状况生成描绘图像的功能。作为一例，本实施方式的描绘图像生成部62根据光检测部58检测出的描绘用设备10的光源26的光的轨迹，描绘与摄像用户由输入装置48指示的描绘条件对应的图像，由此生成描绘图像。作为摄像用户由输入装置48指示的描绘条件，可以举出所描绘的线的颜色、明度、粗细及虚线或实线等线的种类中的至少一种，但不受特别的限定。例如，在摄像用户指示了“粉红色”、“粗线”、“高明度”及“实线”作为描绘条件的情况下，描绘图像生成部62根据光检测部58检测出的光轨迹，以高明度的粉红色来描绘粗线且实线。另外，以下，为了便于说明，如此对描绘图像生成部62根据光轨迹描绘了线条的情况进行说明。
显示控制部64具有使描绘图像生成部62生成的描绘图像显示于显示器46上的功能。另外，本实施方式的显示控制部64在描绘模式中，使描绘图像生成部62生成的描绘图像作为相机47的即时预览图像显示于显示器46上。
描绘图像记录部66具有如下功能：针对描绘图像生成部62生成的描绘图像，校正成为光检测部58检测出的光的背景的背景区域的亮度，并将校正了亮度的描绘图像记录在存储部44中。作为一例，若描绘模式结束，则本实施方式的描绘图像记录部66通过提高描绘图像的灵敏度而校正通过由曝光控制部56降低曝光而变暗的背景区域的亮度。作为描绘图像生成部62提高灵敏度的方法，可以举出将描绘图像的增益提高规定量。换言之，作为描绘图像生成部62提高灵敏度的方法，可以举出将描绘图像的各像素的信号值增大规定量。另外，描绘图像记录部66可以仅校正描绘图像中的背景区域的亮度，也可以校正描绘图像整体。
接着，对本实施方式的空间描绘系统1的作用进行说明。
如图6所示，在描绘用户由光源26点亮状态的描绘用设备10进行描绘的情况下，在智能手机12的相机47拍摄的摄像图像80上映现光源26A的光。图6中示出的摄像图像80包括表示描绘用户的图像的描绘用户U1、表示光源26的图像的光源26A、表示该光轨迹的图像的光轨迹90、背景区域92。在成为背景的周围环境较亮，并且周围的亮度与光源26的亮度之差较小的情况下，有时光检测部58无法从摄像图像80中检测光轨迹90。
因此，若由曝光控制部56进行降低摄像面整体的曝光的调整，则如图6所示，摄像图像82整体变暗。由于光源26比周围环境亮且亮度高，因此在摄像图像82中，光轨迹90的亮度比背景区域92相对变高。由此，光检测部58能够从摄像图像82中检测光轨迹90。
然而，在摄像图像82中，导致背景区域92变得比原始亮度暗。例如，在图6所示例中，摄像图像82中的背景区域92比摄像图像80中的背景区域92暗。因此，在描绘图像生成部62从摄像图像82中检测光轨迹90而生成的描绘图像86中，线条94根据光轨迹90高精度地被描绘，但导致背景区域92变暗。因此，如上所述，描绘图像记录部66校正描绘图像86中的背景区域92的亮度，以使其变亮。例如，描绘图像记录部66将描绘图像86中的背景区域92的亮度校正为与降低曝光之前的摄像图像80中的背景区域92的亮度相等的亮度，生成校正了背景区域92的亮度的描绘图像88。另外，在此“相等”是指容许误差等，并不限定于完全一致。如图6所示，在描绘图像88中，线条94根据光轨迹90高精度地被描绘，并且背景区域92变亮。描绘图像记录部66使校正背景区域92的亮度之后的描绘图像88记录在存储部44中。
此外，对智能手机12及描绘用设备10的各动作进行说明。图7中示出表示由智能手机12执行的图像生成处理、以及由描绘用设备10执行的描绘控制处理的一例的流程图。智能手机12通过执行存储在存储部44中的图像生成程序45而执行图7所示的图像生成处理。并且，描绘用设备10通过执行存储在存储部24中的描绘控制程序25而执行图7所示的描绘控制处理。
在由空间描绘系统1进行描绘的情况下，首先，摄像用户由智能手机12的输入装置48指示转移到描绘模式。
因此，在智能手机12中，在步骤S100中判定描绘模式管理部50是否转移到描绘模式。直至指示转移到描绘模式为止，步骤S100的判定成为否定判定。另一方面，若指示转移到描绘模式，则转移到描绘模式，步骤S100的判定成为肯定判定，转移到步骤S102。从下一步骤S102到输入描绘开始指示(参考步骤S112)的期间是描绘待机期间。
在步骤S102中，描绘设备控制部52向描绘用设备10输出点亮指示。若从智能手机12输出点亮指示，则在描绘用设备10中，在步骤S200中输入点亮指示，在下一步骤S202中，点亮控制部30使光源26点亮。
在智能手机12中，在下一步骤S104中，如上所述，曝光控制部56使相机47的曝光降低。作为一例，在本实施方式中，通常，由相机47根据摄影环境使曝光从为了拍摄而确定的标准的曝光(标准曝光)降低预先确定的量。另外，具体而言，关于使曝光降低什么程度，只要根据相机47的成像元件等，在设计上或实验上，基于可以检测光源26的光的亮度来确定摄像面整体的亮度即可。
在下一步骤S106中，摄影控制部54由相机47开始摄像图像的拍摄。相机47根据摄影控制部54的控制，以规定的帧速率拍摄多个摄像图像。并且，摄影控制部54在显示器46上开始显示摄像图像作为即时预览图像。
在下一步骤S108中，光检测部58开始从摄像图像中检测光源26的光。在下一步骤S110中，在光检测部58无法从摄像图像中检测出光源26的光的情况下，曝光控制部56进一步进行降低相机47的曝光的控制。例如，在摄影环境因设想的环境而过亮的情况下，有时无法从在上述步骤S104中降低曝光而拍摄到的摄像图像中检测光源26的光。因此，在本实施方式中，在步骤S110中，曝光控制部56进行进一步降低相机47的曝光的控制。另外，关于将相机47的曝光降低到什么程度，不受特别的限定，例如，可以将曝光降低至能够从摄像图像中检测光源26的光。并且，例如，也可以设为如下方式：预先确定下限值，在即使达到曝光的下限值仍无法从摄像图像中检测光源26的光的情况下，通知警告等。
如此，在智能手机12中，在描绘待机期间控制相机47的曝光，可以从摄像图像中检测光源26的光。
另一方面，在描绘用设备10中，在光源26点亮之后，若描绘准备完成，则操作描绘开关28A而设为接通状态。在步骤S204中，若开关状态接受部32接受描绘开关28A设为接通状态的情况，则在下一步骤S206中，描绘指示输出部34将描绘开始指示输出到智能手机12。
若从描绘用设备10输出描绘开始指示，则在智能手机12中，在步骤S112中，描绘指示获取部60获取输入到智能手机12中的描绘开始指示。若描绘指示获取部60获取描绘开始指示，则描绘待机期间结束，转移到描绘期间，成为描绘中。
在下一步骤S114中，如上所述，描绘图像生成部62根据光检测部58的检测状况开始生成描绘图像。在下一步骤S116中，显示控制部64在显示器46上开始显示描绘图像生成部62生成的描绘图像作为即时预览图像。在步骤S114中生成的描绘图像是通过在上述步骤S108等中降低了相机47的曝光，如所述描绘图像86(参考图6)那样，背景区域92处于暗状态的图像。因此，在显示器46上作为即时预览图像而显示的描绘图像的背景区域处于暗状态。
如此，在智能手机12中，在描绘期间，描绘图像生成部62根据光检测部58从由相机47拍摄到的摄像图像中检测出的光的检测状况生成描绘图像，并使其作为即时预览图像显示在显示器46上。
另一方面，由描绘用设备10进行描绘的描绘用户在描绘结束的情况下，或者在暂时中止描绘的情况下，操作描绘开关28A而设为断开状态。在步骤S208中，开关状态接受部32若接受描绘开关28A处于断开状态的情况，则在下一步骤S210中，描绘指示输出部34将描绘结束指示输出到智能手机12。
若从描绘用设备10输出描绘结束指示，则在智能手机12中，在步骤S118中，描绘指示获取部60获取输入到智能手机12的描绘结束指示。若描绘指示获取部60获取描绘结束指示，则在下一步骤S120中描绘图像生成部62结束生成描绘图像。若描绘图像生成部62结束生成描绘图像，则描绘期间结束。
另外，由描绘用设备10进行描绘的描绘用户希望在摄影空间的另一区域进行描绘时等，暂时将描绘开关28A设为断开状态之后，使描绘用设备10移动到想要进行描绘的另一个区域，将描绘开关28A再次设为接通状态而开始描绘。因此，描绘用设备10的开关状态接受部32判定是否接受到描绘开关28A设为接通状态的情况。在未接受描绘开关28A设为接通状态的情况时，步骤S212的判定成为否定判定，并转移到步骤S214。另一方面，在接受到描绘开关28A设为接通状态的情况下，步骤S212的判定成为肯定判定，返回到步骤S206，并重复上述步骤S206～S210的处理。
因此，在智能手机12中，在上述步骤S120中结束生成描绘图像之后，在步骤S122中判定是否输入了描绘开始指示。如上所述，在描绘用户将描绘开关28A再次设为接通状态的情况下，从描绘用设备10向智能手机12再次输出描绘开始指示。在描绘指示获取部60再次获取描绘开始指示的情况下，步骤S122的判定成为肯定判定，返回到步骤S114，再次转移到描绘期间，并重复步骤S114～S120的处理。另一方面，在描绘指示获取部60未获取描绘开始指示的情况下，步骤S122的判定成为否定判定，转移到步骤S124。
在步骤S124中判定描绘模式管理部50是否结束描绘模式。作为一例，在本实施方式中，若摄像用户按下包括在输入装置48中的快门按钮，则描绘模式结束。因此，在快门按钮未被按下的情况下，步骤S124的判定成为否定判定，返回到步骤S122。另一方面，在快门按钮被按下的情况下，步骤S124的判定成为肯定判定，转移到步骤S126。
在步骤S126中，摄影控制部54使相机47结束摄像图像的拍摄，光检测部58结束光检测。并且，显示控制部64结束显示在显示器46上的即时预览图像的显示。
在下一步骤S128中，描绘设备控制部52将熄灭指示输出到描绘用设备10。若从智能手机12输出熄灭指示，则在描绘用设备10中，在步骤S214中输入熄灭指示，在下一步骤S216中，点亮控制部30使光源26熄灭。若步骤S216的处理结束，则在描绘用设备10中，图7所示的描绘控制处理结束。
另一方面，在智能手机12中，在下一步骤S130中描绘图像记录部66校正描绘图像的背景区域的亮度，并将校正了亮度的描绘图像记录在存储部44中。如上述描绘图像88(参考图6)那样，本实施方式的描绘图像记录部66通过提高描绘图像的灵敏度，将通过降低曝光而变暗的背景区域的亮度校正为与通过标准曝光而拍摄的摄像图像的亮度相等。若步骤S130的处理结束，则在智能手机12中结束图7所示的图像生成处理。另外，在结束图像生成处理之前，可以使校正了亮度的描绘图像显示于显示器46。
如以上说明，本实施方式的智能手机12具备拍摄描绘用设备10发出的光的相机47、以及根据从由相机47拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器40。处理器40使相机47变更摄像面整体的曝光并拍摄摄像图像，从在变更了曝光的状态下拍摄到的摄像图像中检测光，针对根据光的检测状况生成的描绘图像，校正成为光的背景的背景区域的亮度并进行记录。
如此，在本实施方式的智能手机12中，由于校正通过降低曝光而变暗的描绘图像的背景图像的亮度，因此能够得到甚至背景区域也高画质的描绘图像。
[第2实施方式]
在第1实施方式中校正了描绘图像的背景区域的亮度，相对于此，在本实施方式中，对不降低曝光而拍摄背景区域的图像，由此得到甚至背景区域也高画质的描绘图像的方式进行说明。
另外，由于本实施方式的描绘用设备10的结构与第1实施方式(参考图2、图3)相同，因此省略说明。
另一方面，智能手机12的硬件结构与第1实施方式(参考图4)相同，但功能结构的一部分不同。图8中示出表示本实施方式的智能手机12的功能所涉及结构的一例的功能框图。如图8所示，智能手机12具备描绘图像生成部63来代替描绘图像生成部62，并具备合成图像生成部68来代替描绘图像记录部66，这一点与第1实施方式的智能手机12(参考图5)不同。
本实施方式的描绘图像生成部63具有根据光检测部58的检测状况生成描绘图像的功能，这一点上与第1实施方式的描绘图像生成部62相同。然而，本实施方式的描绘图像生成部63具有仅将与光的检测状况对应的描绘保存为描绘图像的功能。作为一例，本实施方式的显示控制部64在描绘期间中，使仅进行了与光的检测状况对应的描绘的描绘图像重叠于摄像图像上，并作为即时预览图像显示在显示器46上。
并且，合成图像生成部68具有生成使描绘图像生成部63生成的仅包括与光的检测状况对应的描绘的描绘图像、和以适当的曝光由相机47拍摄到的摄像图像合成的合成图像作为包括背景的描绘图像的功能。
参考图9对本实施方式的空间描绘系统1的作用进行说明。
与第1实施方式中参考图6已说明的同样地，在无法从摄像图像80检测光轨迹90的情况下，降低摄像面整体的曝光而得到摄像图像82，由此能够检测光轨迹90。
本实施方式的描绘图像生成部62仅将与光轨迹90的检测状况对应的描绘作为描绘图像89保存为一个层。该描绘图像89中不包括背景图像。
另一方面，在结束描绘模式的情况下，在由曝光控制部56使曝光恢复到原始状态之后，摄影控制部54使相机47拍摄摄像图像。因此，在摄像图像81中难以看到光轨迹90，但背景区域92具有与降低摄像面整体的曝光之前相等的亮度。因此，合成图像生成部68将描绘图像89与摄像图像81进行合成，从而生成合成图像99。在合成图像99中，线条94根据光轨迹90高精度地被描绘，并且背景区域92成为原始亮度。
此外，对本实施方式的智能手机12及描绘用设备10的各动作进行说明。图10中示出表示由智能手机12执行的图像生成处理、以及由描绘用设备10执行的描绘控制处理的一例的流程图。另外，由描绘用设备10执行的描绘控制处理与由第1实施方式的描绘用设备10执行的描绘控制处理(参考图7)相同，因此省略说明。另一方面，如图10所示，由智能手机12执行的图像生成处理具备步骤S115来代替步骤S114，在步骤S124与S126之间具备步骤S125的处理，并具备步骤S131的处理来代替步骤S130，这一点上与第1实施方式的智能手机12执行的图像生成处理(参考图7)不同。
在本实施方式的智能手机12中，在步骤S115中，若描绘图像生成部63开始生成描绘图像，则如上所述，仅将与光的检测状况对应的描绘作为描绘图像保存在与背景图像不同的层中。
并且，若描绘模式结束，则在步骤S125中摄影控制部54由曝光控制部56恢复相机47的曝光而拍摄背景图像作为摄像图像。作为一例，曝光控制部56将相机47的曝光恢复至在步骤S104中降低曝光之前的标准曝光。
并且，如上所述，在步骤S131中，合成图像生成部68将由描绘图像生成部63生成并保存为另一层的、只有与光的检测状况对应的描绘的描绘图像、和在步骤S125中拍摄到的背景图像即摄像图像进行合成而生成合成图像。另外，所生成的合成图像存储在存储部44中。若步骤S131的处理结束，则在智能手机12中，图10所示的图像生成处理结束。
如以上说明，本实施方式的智能手机12具备拍摄描绘用设备10发出的光的相机47、以及根据从由相机47拍摄到的摄像图像中检测出光的检测状况生成描绘图像的处理器40。处理器40使相机47降低摄像面整体的曝光并拍摄所述摄像图像，使相机提高曝光并拍摄在摄像图像中成为光的背景的背景图像，并使根据检测出光的检测状况描绘的描绘图像与背景图像重叠而生成合成图像。
如此，在本实施方式的智能手机12中，由于将只有与光的检测状况对应的描绘的描绘图像和提高曝光而拍摄的背景图像进行合成，因此能够得到甚至背景区域也高画质的描绘图像。
[第3实施方式]
在第1实施方式及第2实施方式中，对通过降低相机47的摄像面整体的曝光而容易检测描绘用设备10发出的光的方式进行说明。相对于此，在本实施方式中，还对通过提高摄像面整体的曝光而容易检测描绘用设备10发出的光的情况进行说明。
另外，由于本实施方式的描绘用设备10的结构与第1实施方式(参考图2、图3)相同，因此省略说明。
另一方面，智能手机12的硬件结构与第1实施方式(参考图4)相同，但曝光控制部56及描绘图像记录部66的功能的一部分不同。
如上所述，曝光控制部56在因周围环境亮而从摄像图像中无法检测或难以检测光源26的光的情况下，进行降低摄像面整体的曝光的调整。本实施方式的曝光控制部56在因描绘用设备10的光源26的状况而从摄像图像无法检测或难以检测光源26的光的情况下，进一步进行提高摄像面整体的曝光的调整。
并且，如上所述，在曝光控制部56进行了降低摄像面整体的曝光的调整的情况下，若描绘模式结束，则描绘图像记录部66通过提高描绘图像的灵敏度而校正通过由曝光控制部56降低曝光而变暗的背景区域的亮度。在曝光控制部56进行了提高摄像面整体的曝光的调整的情况下，若描绘模式结束，则本实施方式的描绘图像记录部66通过降低描绘图像的灵敏度而进一步校正通过由曝光控制部56提高曝光而变亮的背景区域的亮度。作为描绘图像生成部62降低灵敏度的方法，可以举出将描绘图像的增益降低规定量。换言之，作为描绘图像生成部62降低灵敏度的方法，可以举出将描绘图像的各像素的信号值减小规定量。
接着，对本实施方式的空间描绘系统1的作用进行说明。
如图11所示，在描绘用户由光源26点亮状态的描绘用设备10进行描绘的情况下，在智能手机12的相机47拍摄的摄像图像83上映现光源26A的光。图11中示出的摄像图像83包括表示描绘用户的图像的描绘用户U1、表示光源26的图像的光源26A、表示该光轨迹的图像的光轨迹91、背景区域93。有时从光源26照射到相机47的光的光量比原来的光量少。例如，在光源26因经年劣化或故障等而发出的光量比原来的光量少的情况下，从光源26照射到相机47的光的光量变得比原来的光量少。并且，在发出的光量是原来的光量但光源26的表面污染等情况下，从光源26照射到相机47的光的光量也变得比原来的光量少。在这种情况下，有时光检测部58无法从摄像图像83检测光轨迹91。
因此，若由曝光控制部56进行提高摄像面整体的曝光的调整，则如图11所示，摄像图像84的整体变亮。由于光源26比周围环境亮且亮度高，因此在背景区域93中，光轨迹91的亮度比背景区域93的亮度相对变高。由此，光检测部58能够从摄像图像84检测光轨迹91。
然而，在摄像图像84中，导致背景区域93比原来的亮度亮。例如，在图11所示例中，摄像图像83中的背景区域93比摄像图像84中的背景区域93亮。因此，在描绘图像生成部62从摄像图像84中检测光轨迹91而生成的描绘图像85中，线条95根据光轨迹91高精度地被描绘，但导致背景区域93变暗。因此，如上所述，描绘图像记录部66校正描绘图像85中的背景区域93的亮度，以使其变暗。例如，描绘图像记录部66将描绘图像85中的背景区域93的亮度校正为与提高曝光之前的摄像图像83中的背景区域93的亮度相等的亮度，生成校正了背景区域93的亮度的描绘图像87。另外，在此“相等”是指容许误差等，并不限定于完全一致。如图11所示，在描绘图像87中，线条95根据光轨迹91高精度地被描绘，并且背景区域93变暗。描绘图像记录部66使校正背景区域93的亮度之后的描绘图像87记录在存储部44中。
此外，对本实施方式的智能手机12及描绘用设备10的各动作进行说明。图12中示出表示由智能手机12执行的图像生成处理、以及由描绘用设备10执行的描绘控制处理的一例的流程图。另外，由描绘用设备10执行的描绘控制处理与由第1实施方式的描绘用设备10执行的描绘控制处理(参考图7)相同，因此省略说明。另一方面，如图12所示，由智能手机12执行的图像生成处理具备步骤S109及S111来代替步骤S110，这一点上，与第1实施方式的智能手机12执行的图像生成处理(参考图7)不同。
另外，在步骤S104中，如上所述，在曝光控制部56使相机47的曝光降低的情况下，本实施方式的智能手机12使曝光降低至设想的下限值。
然后，如图12所示，在步骤S109中，光检测部58判定是否能够从摄像图像中检测光源26的光。在能够从摄像图像中检测光源26的光的情况下，步骤S109的判定成为肯定判定，转移到步骤S112。另一方面，在无法从摄像图像中检测出光源26的光的情况下，步骤S109的判定成为否定判定，转移到步骤S111。
如上所述，在因从光源26照射到相机47的光的光量比原来的光量少而无法从摄像图像中检测光源26的光的情况下，即使如此使曝光降低，也无法从摄像图像中检测光源26的光。
因此，在步骤S111中，如上所述，曝光控制部56使相机47的曝光上升。作为一例，在本实施方式中，通常，由相机47根据摄影环境使曝光从为了拍摄而确定的标准的曝光(标准曝光)上升至设想的上限值。另外，使曝光上升的方法并不限定于该方式。例如，也可以是使曝光上升预先确定的量的方式，具体而言，关于使曝光上升什么程度，只要根据相机47的成像元件等，在设计上或实验上，基于可以检测光源26的光的亮度来确定即可。并且，可以设为如下方式：使曝光逐渐上升，并每次判定是否能够从摄像图像中检测光源26的光。
如此，在本实施方式的智能手机12中，在描绘待机期间，进行降低相机47的曝光的控制(步骤S104)或使曝光上升的控制(步骤S111)，可以从摄像图像中检测光源26的光。
因此，在本实施方式中，在步骤S130中，描绘图像记录部66在通过步骤S104的处理而降低了摄像面整体的曝光的情况下，通过提高描绘图像的灵敏度，将通过降低曝光而变暗的背景区域的亮度校正为与通过标准曝光而拍摄到的摄像图像的亮度相等。并且，在通过步骤S111的处理而提高了摄像面整体的曝光的情况下，描绘图像记录部66通过降低描绘图像的灵敏度，将通过提高曝光而变亮的背景区域的亮度校正为与通过标准曝光而拍摄到的摄像图像的亮度相等。如此，描绘图像记录部66将校正了亮度的描绘图像记录在存储部44中。
如以上说明，本实施方式的智能手机12的处理器40通过进行降低相机47的摄像面整体的曝光的控制，能够从摄像图像中检测光源26的光。并且，在即使进行降低相机47的摄像面整体的曝光的控制也无法从摄像图像中检测光源26的光的情况下，处理器40通过进行提高相机47的摄像面整体的曝光的控制，能够从摄像图像中检测光源26的光。并且，处理器40使相机47变更摄像面整体的曝光并拍摄摄像图像，从在变更了曝光的状态下拍摄到的摄像图像中检测光，针对根据光的检测状况生成的描绘图像，校正成为光的背景的背景区域的亮度并进行记录。
如此，在本实施方式的智能手机12中，校正通过降低曝光而变得更暗的描绘图像的背景图像的亮度，或者校正通过提高曝光而变得更亮的描绘图像的背景图像的亮度，因此能够得到甚至背景区域也高画质的描绘图像。
另外，在上述各方式中，对描绘用设备10为光笔方式的情况进行了说明，但描绘用设备的方式不受特别的限定，只要是可以由光进行描绘指示的指示装置即可。例如，如图13所示，可以是具有打印功能的描绘用设备11。图13所示的描绘用设备11具有接收由智能手机12生成的描绘图像，并将所接收到的描绘图像印刷在即显胶片上的功能。
并且，降低摄像面整体的曝光的时刻并不限定于上述时刻。例如，可以设为上述图像生成处理(参考图7、图10)的步骤S108及步骤S110中的任一种。并且，例如，可以设为如下方式：在开始光检测之后，仅在无法检测出光的情况下降低曝光。并且，例如，可以设为如下方式：在描绘中，也仅在无法检测出光的情况下适当地降低曝光。并且，例如，可以设为如下方式：在转移到描绘模式之前，进行降低曝光的控制，直至能够校准地检测光的状态为止。并且，同样地，提高摄像面整体的曝光的时刻并不限定于上述时刻。在上述第3实施方式中，在即使降低曝光也无法检测出光的情况下进行了提高曝光的控制，但可以设为仅进行提高曝光的控制的方式。例如，在摄影环境暗的情况下，可以设为仅进行提高曝光的控制的方式。并且，例如，可以设为如下方式：在开始光检测之后，仅在无法检测出光的情况下提高曝光。并且，例如，可以设为如下方式：在描绘中，也仅在无法检测出光的情况下适当地提高曝光。并且，例如，可以设为如下方式：在转移到描绘模式之前，进行提高曝光的控制，直至能够校准地检测光的状态为止。
并且，在上述各方式中，对智能手机12控制描绘用设备10的光源26的点亮及熄灭的方式进行了说明，但并不限定于该方式，也可以是描绘用设备10本身控制光源26的点亮及熄灭中的至少一种的方式。
并且，在上述方式中，例如，作为描绘用设备10的点亮控制部30、开关状态接受部32及描绘指示输出部34，智能手机12的描绘模式管理部50、描绘设备控制部52、摄影控制部54、曝光控制部56、光检测部58、描绘指示获取部60、描绘图像生成部62、描绘图像生成部63、显示控制部64、描绘图像记录部66及合成图像生成部68等执行各种处理的处理部(processing unit：处理单元)的硬件结构，能够使用以下所示的各种处理器(processor)。在上述各种处理器中，如上所述，除了执行软件(程序)而作为各种处理部发挥作用的通用的处理器即CPU以外，还包括FPGA(Field Programmable Gate Array：现场可编程门阵列)等在制造后可以变更电路结构的处理器即可编程逻辑器件(Programmable Logic Device：PLD)、ASIC(Application Specific Integrated Circuit：专用集成电路)等具有为了执行特定处理而专门设计的电路结构的处理器即专用电路等。
一个处理部可以由这些各种处理器中的一个构成，也可以由相同类型或不同种类的两个以上处理器的组合(例如，多个FPGA的组合、或CPU和FPGA的组合)来构成。并且，可以以一个处理器构成多个处理部。
作为由一个处理器构成多个处理部的例子，第一，有如下方式：以客户端、服务器等的计算机为代表，由一个以上CPU和软件的组合来构成一个处理器，该处理器作为多个处理部发挥作用。第二，有如下方式：以片上系统(System on Chip：SoC)等为代表，使用由一个IC(Integrated Circuit：集成电路)芯片实现包括多个处理部的整体系统的功能的处理器。如此，作为硬件结构，各种处理部使用一个以上的上述各种处理器构成。
此外，作为这些各种处理器的硬件结构，更具体而言，能够使用将半导体元件等电路元件组合而成的电路(circuitry)。
并且，在上述各方式中，对描绘控制程序25预先存储(安装)在存储部24中，并且图像生成程序45预先存储(安装)在存储部44中的方式进行了说明，但并不限定于此。描绘控制程序25及图像生成程序45可以以记录在CD-ROM(Compact Disc Read Only Memory：光盘只读存储器)、DVD-ROM(Digital Versatile Disc Read Only Memory：数字多功能光盘只读存储器)及USB(Universal Serial Bus：通用串行总线)存储器等记录介质中的方式被提供。并且，描绘控制程序25及图像生成程序45可以设为经由网络从外部装置下载的方式。
符号说明
1-空间描绘系统，10-描绘用设备，12-智能手机，19-网络，20、40-处理器，22、42-存储器，23、43-I/F部，24、44-存储部，25-描绘控制程序，26、26A-光源，28、48-输入装置，28A-描绘开关，29、49-总线，30-点亮控制部，32-开关状态接受部，34-描绘指示输出部，45-图像生成程序，46-显示器，47-相机，50-描绘模式管理部，52-描绘设备控制部，54-摄像控制部，56-曝光控制部，58-光检测部，60-描绘指示获取部，62、63-描绘图像生成部，64-显示控制部，66-描绘图像记录部，68-合成图像生成部，80、81、82、83、84-摄像图像，85、86、87、88、89-描绘图像，90、91-光轨迹，92、93-背景区域，94、95-线条，99-合成图像，U1-描绘用户。

Claims (17)

1.一种图像生成装置，其具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器，所述图像生成装置中，
所述处理器进行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
从在变更了曝光的状态下拍摄到的所述摄像图像中检测所述光；以及
针对根据所述光的检测状况生成的所述描绘图像，校正成为所述光的背景的背景区域的亮度并进行记录。
2.根据权利要求1所述的图像生成装置，其中，
所述处理器根据所述摄像面整体的曝光变更量来调整灵敏度。
3.根据权利要求1或2所述的图像生成装置，其中，
所述背景区域的亮度是与即将变更所述摄像面整体的曝光之前的所述摄像图像的亮度相等的亮度。
4.一种图像生成装置，其具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器，
所述处理器进行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
使所述相机调整曝光并拍摄在所述摄像图像中成为所述光的背景的背景图像；以及
使根据检测出所述光的检测状况描绘的描绘图像与所述背景图像合成而生成合成图像。
5.根据权利要求4所述的图像生成装置，其中，
所述处理器进行如下处理：
使所述相机将所述曝光恢复至变更所述摄像面整体的曝光之前的状态而拍摄所述背景图像。
6.根据权利要求1或4所述的图像生成装置，其中，
所述处理器进行如下处理：
接受转移到生成所述描绘图像的描绘模式的指示；以及
在根据所述指示转移到所述描绘模式的情况下，从根据摄影环境确定的标准曝光变更所述摄像面整体的曝光。
7.根据权利要求6所述的图像生成装置，其中，
所述处理器进行如下处理：
在接受到所述指示的情况下，向所述指示装置发送发出所述光的发光指示信号。
8.根据权利要求1或4所述的图像生成装置，其中，
所述处理器进行如下处理：
在无法从所述摄像图像中检测所述光的情况下，变更所述摄像面整体的曝光。
9.根据权利要求8所述的图像生成装置，其中，
变更所述摄像面整体的曝光是向降低所述曝光的方向的变更。
10.根据权利要求1或4所述的图像生成装置，其中，
所述处理器通过调整所述相机的快门速度及光圈中的至少一方来变更所述摄像面整体的曝光。
11.根据权利要求1或4所述的图像生成装置，其中，
所述光是预先确定的波长的光，
所述处理器根据所述光的亮度和与所述预先确定的波长对应的颜色，从所述摄像图像中检测所述光。
12.根据权利要求1或4所述的图像生成装置，其中，
所述指示装置是空间描绘用描绘设备。
13.根据权利要求1或4所述的图像生成装置，其中，
所述指示装置具备印刷由所述图像生成装置生成的所述描绘图像的打印功能。
14.一种图像生成方法，其中，
具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器的图像生成装置的所述处理器进行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
从在变更了曝光的状态下拍摄到的所述摄像图像中检测所述光；以及
针对根据所述光的检测状况生成的所述描绘图像，校正成为所述光的背景的背景区域的亮度并进行记录。
15.一种图像生成方法，其中，
具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器的图像生成装置的所述处理器进行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
使所述相机调整曝光并拍摄在所述摄像图像中成为所述光的背景的背景图像；以及
使根据检测出所述光的检测状况描绘的描绘图像与所述背景图像合成而生成合成图像。
16.一种非暂时性的存储介质，其存储有图像生成程序，该图像生成程序用于使具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器的图像生成装置的所述处理器执行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
从在变更了曝光的状态下拍摄到的所述摄像图像中检测所述光；以及
针对根据所述光的检测状况生成的所述描绘图像，校正成为所述光的背景的背景区域的亮度并进行记录。
17.一种非暂时性的存储介质，其存储有图像生成程序，该图像生成程序用于使具备拍摄指示装置发出的光的相机、以及根据从由所述相机拍摄到的摄像图像中检测出所述光的检测状况生成描绘图像的处理器的图像生成装置的所述处理器执行如下处理：
使所述相机变更摄像面整体的曝光并拍摄所述摄像图像；
使所述相机调整曝光并拍摄在所述摄像图像中成为所述光的背景的背景图像；以及
使根据检测出所述光的检测状况描绘的描绘图像与所述背景图像合成而生成合成图像。
CN202310289170.5A 2022-03-24 2023-03-22 图像生成装置、图像生成方法及非暂时性的存储介质 Pending CN116805986A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-049072 2022-03-24
JP2022049072A JP2023142262A (ja) 2022-03-24 2022-03-24 画像生成装置、画像生成方法、及び画像生成プログラム

Publications (1)

Publication Number Publication Date
CN116805986A true CN116805986A (zh) 2023-09-26

Family

ID=85724823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310289170.5A Pending CN116805986A (zh) 2022-03-24 2023-03-22 图像生成装置、图像生成方法及非暂时性的存储介质

Country Status (4)

Country Link
US (1) US20230308766A1 (zh)
EP (1) EP4250756A1 (zh)
JP (1) JP2023142262A (zh)
CN (1) CN116805986A (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101116049A (zh) 2005-02-10 2008-01-30 有限会社策划设计工程 指示器光跟踪方法、程序及其记录媒体
CN110035141B (zh) * 2019-02-22 2021-07-09 华为技术有限公司 一种拍摄方法及设备
JP7447648B2 (ja) * 2020-04-06 2024-03-12 大日本印刷株式会社 撮影システム
JP7476644B2 (ja) * 2020-04-23 2024-05-01 大日本印刷株式会社 撮影システム

Also Published As

Publication number Publication date
US20230308766A1 (en) 2023-09-28
EP4250756A1 (en) 2023-09-27
JP2023142262A (ja) 2023-10-05

Similar Documents

Publication Publication Date Title
JP3640156B2 (ja) 指示位置検出システムおよび方法、プレゼンテーションシステム並びに情報記憶媒体
CN106416225B (zh) 远程视觉检查图像捕获系统和方法
CN108307125B (zh) 一种图像采集方法、装置和存储介质
US10321106B2 (en) Position detection apparatus and contrast adjustment method used with the same
KR102424984B1 (ko) 복수 개의 카메라를 포함하는 전자 장치 및 그 동작 방법
CN112672069B (zh) 曝光方法和装置
US8090253B2 (en) Photographing control method and apparatus using strobe
US9699385B2 (en) Imaging apparatus and storage medium, and exposure amount control method
JP2019197083A (ja) 電子機器、制御装置、制御方法及び制御プログラム
US11947214B2 (en) Liquid crystal display device, electronic apparatus, display control method, display control program, and non-transitory recording medium
US7397968B2 (en) System and method for tone composition
CN116805986A (zh) 图像生成装置、图像生成方法及非暂时性的存储介质
US11689687B2 (en) Video creation method
JP2020160808A (ja) 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
US20220279106A1 (en) Video creation method
JP6631281B2 (ja) インタラクティブプロジェクター、及び、そのオートキャリブレーション実行方法
US10560635B2 (en) Control device, control method, and program
US11336802B2 (en) Imaging apparatus
US11272117B2 (en) Information processing apparatus, information processing method, program, and lighting system
JP2020160807A (ja) 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
US11950012B2 (en) Apparatus, method of controlling the same, and storage medium
US11165968B2 (en) Information processing apparatus, information processing method, program, and lighting system
JP5769518B2 (ja) 撮像装置
CN116804898A (zh) 指示装置、图像生成装置、描绘系统、通信方法及非暂时性的记录介质
JP2010258673A (ja) 撮影装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication