WO2020195642A1 - 撮像装置、制御方法、プログラム、及び非一時的記録媒体 - Google Patents

撮像装置、制御方法、プログラム、及び非一時的記録媒体 Download PDF

Info

Publication number
WO2020195642A1
WO2020195642A1 PCT/JP2020/009142 JP2020009142W WO2020195642A1 WO 2020195642 A1 WO2020195642 A1 WO 2020195642A1 JP 2020009142 W JP2020009142 W JP 2020009142W WO 2020195642 A1 WO2020195642 A1 WO 2020195642A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
evaluation
emotion
imaging device
image
Prior art date
Application number
PCT/JP2020/009142
Other languages
English (en)
French (fr)
Inventor
俊朗 長井
リナ 藤野
佐藤　恒夫
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2021508913A priority Critical patent/JP7090802B2/ja
Publication of WO2020195642A1 publication Critical patent/WO2020195642A1/ja
Priority to JP2022095965A priority patent/JP7344348B2/ja

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/02—Bodies
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/48—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/50—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with both developing and finishing apparatus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment

Definitions

  • the present invention relates to an image pickup device, a control method of the image pickup device, a program for causing the image pickup device to execute the control method, and a non-temporary recording medium in which the program is recorded.
  • Patent Document 1 describes a video camera that learns determination parameters and stores learning results.
  • Patent Document 1 The video camera described in Patent Document 1 described above is complicated to operate because the user needs to input an answer to the judgment result of the shooting environment and the shooting subject each time, and there is a special emotional reaction to the input. Because there is no such thing, it was not an object that was easy to have attachments and feelings.
  • the present invention has been made in view of such circumstances, and it is possible to easily take an image according to the user's preference, and the image pickup device, the control method of the image pickup device, and the image pickup device that the user can easily attach to are controlled. It is an object of the present invention to provide a program for executing the method and a non-temporary recording medium on which such a program is recorded.
  • the imaging device includes a photographing control unit that causes a photographing unit to capture an image, and a sensor unit that detects an operation related to user evaluation of the captured image.
  • An evaluation determination unit that analyzes the operation on the sensor unit and determines the user's evaluation of the captured image, and an emotion determination unit that determines the emotion of the anthropomorphic imaging device for the evaluation. It is provided with an emotion expression unit that pseudo-expresses the determined emotion using one or more outputs, and a learning unit that learns the evaluation and reflects it in the imaging conditions used by the imaging control unit.
  • the imaging device learns the user's evaluation of the captured image and reflects it in the imaging conditions used by the imaging control unit, the user can easily capture an image according to his / her taste. it can.
  • the emotion of the anthropomorphic photographing device with respect to the user's evaluation is expressed, the user tends to have an attachment to the imaging device.
  • the sensor unit detects at least one of contact with the imaging device, acceleration and / or angular velocity of the imaging device, and sound with respect to the imaging device.
  • the second aspect defines a specific aspect of the item detected by the sensor unit.
  • the emotion expression unit expresses emotions by outputting at least one of display, light emission, voice, sound effect, and vibration.
  • the third aspect defines a specific aspect of the output used for emotional expression. The user can perceive these outputs.
  • the imaging device expresses emotions by changing and displaying the facial expression or a part of the face in any one of the first to third aspects.
  • the image pickup device is familiar and emotional transfer is easy.
  • the emotion determination unit determines joy and / or enjoyment as emotions when the evaluation is positive, and the evaluation is performed. If negative, sadness and / or anger is determined as an emotion.
  • the fifth aspect defines a specific aspect of the relationship between evaluation and emotion.
  • the learning unit raises the priority of the imaging conditions for the image for which the evaluation was positive, and the evaluation is negative.
  • the priority of the shooting conditions for the existing image is lowered, and the shooting control unit shoots under the shooting conditions with high priority.
  • the shooting conditions for the image with a positive evaluation are preferentially used, and the image with a negative evaluation is used. It is possible to perform the process of "do not actively use the shooting conditions of.”
  • the learning unit changes the imaging conditions according to the evaluation.
  • the user can easily take an image according to his / her taste.
  • the imaging device includes at least one of shutter speed, aperture value, and white balance in any one of the first to seventh aspects.
  • the eighth aspect defines a specific aspect of the photographing condition in which the user's evaluation is reflected.
  • the imaging control unit brackets a plurality of images under different imaging conditions for the imaging unit
  • the evaluation determination unit has a plurality of evaluation determination units. Determine the user's rating for the image selected from the images in. According to the ninth aspect, since a plurality of images having different shooting conditions can be obtained by a series of shooting by bracket shooting, the user's evaluation of the images can be easily determined.
  • the sensor unit detects the print instruction of the image, and the learning unit gives priority to the photographing conditions for the image for which the print instruction is given. Increase the degree.
  • the learning unit raises the priority of the shooting conditions for the image for which the print instruction is given based on the idea that "the image printed by the user's intention is of high importance".
  • the imaging control unit has a plurality of imaging modes, and the learning unit reflects the imaging conditions for each imaging mode. According to the eleventh aspect, since the learning unit reflects the shooting conditions for each shooting mode, detailed reflection is possible, and the user can easily shoot a favorite image.
  • the evaluation determination unit analyzes the operation on the sensor unit to determine the user's evaluation of the expression of the imaging device, and the emotion expression unit. Updates the number, combination, and degree of output that expresses emotions based on the evaluation of the expression, and expresses emotions based on the result of the update.
  • the way of expressing emotions of the camera changes depending on the evaluation of the user, so that the user can easily have attachment.
  • the imaging device further includes a state detecting unit for detecting the state of the imaging device in any one of the first to twelfth aspects, and the emotion determining unit determines emotions according to the detected state. To do. According to the thirteenth aspect, emotions are determined by the state of the imaging device in addition to the user's evaluation.
  • the state detection unit detects at least one of the battery remaining capacity, the memory remaining capacity, the image processing load, and the internal temperature of the image pickup apparatus.
  • the fourteenth aspect specifically defines the state of the imaging device, and the emotion determination unit determines emotions according to the states of these parameters.
  • the imaging device includes a printer that prints the captured image in any one of the first to the fourteenth aspects. According to the fifteenth aspect, the user can print the captured image.
  • the control method includes a photographing control unit that captures an image on the photographing unit, a sensor unit that detects an operation related to user evaluation of the captured image, and the like. It is a control method of an image pickup apparatus including, and is an evaluation determination step of analyzing an operation on a sensor unit to determine a user's evaluation of a captured image, and an emotion for determining an anthropomorphic image pickup apparatus's emotions with respect to the evaluation. It has a determination step, an emotion expression step of pseudo-expressing the determined emotion using one or more outputs, and a learning step of learning the evaluation and reflecting it in the imaging conditions used by the imaging control unit.
  • the user can easily take an image according to his / her taste.
  • the user tends to have an attachment to the image pickup device.
  • the control method according to the sixteenth aspect may include the same configuration as the second to fifteenth aspects.
  • the program according to the seventeenth aspect of the present invention includes a photographing control unit that causes a photographing unit to capture an image, and a sensor unit that detects an operation related to user evaluation of the captured image.
  • the image pickup apparatus provided is made to execute the control method according to the sixteenth aspect.
  • the 17th aspect as in the 1st and 16th aspects, the user can easily take an image according to his / her taste. In addition, the user tends to have an attachment to the image pickup device.
  • the seventeenth aspect may include the same configuration as the second to fifteenth aspects.
  • the non-temporary recording medium according to the eighteenth aspect of the present invention is a non-temporary recording medium on which a computer-readable code of the program according to the seventeenth aspect is recorded.
  • the non-temporary recording medium according to the eighteenth aspect may be a recording medium such as a memory card, or various optical magnetic recording media or semiconductor recording media used in a computer such as a server.
  • a non-temporary recording medium on which a computer-readable code of the program including the same configuration as that of the second to fifteenth aspects is recorded for the program according to the seventeenth aspect can also be mentioned as an aspect of the present invention. it can.
  • the user can easily take an image according to his / her taste and is easily attached to the image pickup apparatus. ..
  • FIG. 1 is a front perspective view showing a digital camera with a printer according to the first embodiment.
  • FIG. 2 is a rear perspective view showing a digital camera with a printer according to the first embodiment.
  • FIG. 3 is a front view of the instant film.
  • FIG. 4 is a rear view of the instant film.
  • FIG. 5 is a diagram showing an electrical configuration of a digital camera with a printer.
  • FIG. 6 is a functional block diagram of the camera control unit.
  • FIG. 7 is a flowchart showing a procedure of processing related to learning and emotional expression.
  • FIG. 8 is a diagram showing how an image is evaluated via a display.
  • FIG. 9 is a diagram showing how an image is evaluated via a touch sensor.
  • FIG. 10 is a diagram showing an example of emotional expression by eye marks.
  • FIG. 1 is a front perspective view showing a digital camera with a printer according to the first embodiment.
  • FIG. 2 is a rear perspective view showing a digital camera with a printer according to the first
  • FIG. 11 is a diagram showing an example of emotional expression by a face mark.
  • FIG. 12 is a diagram showing a state in which a sub-display area for expressing emotions is provided on the display.
  • FIG. 13 is a flowchart showing a process of updating the mode of emotional expression.
  • FIG. 14 is a flowchart showing the processing of emotional expression according to the state of the camera.
  • FIG. 15 is a diagram showing a smartphone according to the second embodiment.
  • FIG. 16 is a diagram showing a configuration of a smartphone according to the second embodiment.
  • the digital camera 10 (imaging device) with a printer according to the first embodiment is a digital camera having a built-in printer, and has a function of printing an captured image on the spot.
  • the digital camera 10 with a printer of the present embodiment prints on instant film using an instant film pack. Further, the digital camera 10 with a printer of the present embodiment has a recording function and can record sound in association with a captured image.
  • FIG. 1 is a front perspective view showing an example of a digital camera with a printer.
  • FIG. 2 is a rear perspective view of the digital camera with a printer shown in FIG.
  • the digital camera 10 with a printer has a portable camera body 12.
  • the camera body 12 has a vertically long rectangular parallelepiped shape in which the thickness in the front-rear direction is thin and the dimension in the vertical direction is longer than the dimension in the horizontal direction.
  • the front side of the camera body 12 is provided with a photographing lens 14, a release button 16, a recording button 18, a strobe light emitting window 20, and the like.
  • a power button 22a, a menu button 22b, an OK button 22c, a mode switching button 22d, a microphone hole 24, a speaker hole 26, and the like are provided on one side surface of the camera body 12.
  • the release button 16 is a button for instructing recording of an image.
  • the power button 22a is a button for turning on and off the power of the digital camera 10 with a printer.
  • the menu button 22b is a button for calling the menu screen.
  • the OK button is a button instructing OK.
  • the mode switching button 22d is a button for switching between the auto print mode and the manual print mode in the shooting mode.
  • the back side of the camera body 12 is provided with a touch panel type display 28, a sub-display 29 (emotion expression unit), a film lid cover 30, and various operation buttons.
  • the sub-display 29 is a display for pseudo-expressing the emotions of the anthropomorphic digital camera 10 with a printer, as will be described in detail later.
  • the film lid cover 30 is a cover that opens and closes the film loading chamber.
  • the operation buttons include a joystick 32a, a print button 32b, a play button 32c, a cancel button 32d, and the like.
  • the print button 32b is a button for instructing printing.
  • the play button 32c is a button for instructing switching to the play mode.
  • the cancel button 32d is a button for instructing the cancellation of the operation.
  • a film discharge port 34 is provided on the upper surface of the camera body 12.
  • the printed instant film is discharged from the film outlet 34.
  • a touch sensor 45 (sensor unit) is provided on the upper surface of the camera body 12.
  • the touch sensor 45 detects contact, slide operation, etc. by a human body such as a user's finger or an operation device such as a pen type. As will be described in detail later, the user can operate the touch sensor 45 to input an evaluation for the captured image and emotional expression.
  • the side where the power button 22a and the like are provided is in the + X direction
  • the side where the film ejection port 34 is provided is in the + Y direction
  • the side opposite to the above is the + Z direction.
  • the digital camera 10 with a printer includes a film loading chamber (not shown), a film feeding mechanism 52, a film conveying mechanism 54, a print head 56, and the like as components of the printer portion that is a printing unit (see FIG. 5).
  • the film loading chamber is loaded with an instant film pack having a structure in which a plurality of instant films are housed in a case.
  • FIG. 3 is a front view of the instant film 42
  • FIG. 4 is a rear view of the instant film 42.
  • the direction indicated by the arrow F is the direction in which the instant film 42 is used, and the instant film 42 is conveyed in the direction indicated by the arrow F. Therefore, when the digital camera 10 with a printer is loaded, the direction indicated by the arrow F is the ejection direction of the instant film 42.
  • the instant film 42 is a self-developing instant film having a rectangular card shape.
  • the instant film 42 is configured with an exposed surface 42a on the back surface side and an observation surface 42b on the front surface side.
  • the exposed surface 42a is a surface for recording an image by exposure
  • the observation surface 42b is a surface for observing the recorded image.
  • the observation surface 42b of the instant film 42 is provided with an observation region 42h.
  • the exposed surface 42a of the instant film 42 is provided with an exposed region 42c, a pod portion 42d, and a trap portion 42f.
  • the instant film 42 is developed by developing the developing solution of the pod portion 42d in the exposure region 42c.
  • the development processing liquid pod 42e containing the development processing liquid is built in the pod portion 42d.
  • the developing solution of the pod portion 42d is squeezed out from the pod portion 42d by passing the instant film 42 between the roller pairs and developed in the exposure region 42c.
  • the developing liquid left over during the developing process is captured by the trap unit 42f.
  • An absorbent material 42 g is built in the trap portion 42f.
  • the instant print pack is loaded into a film loading chamber (not shown) provided inside the camera body 12.
  • the films are fed one by one by a claw (claw-shaped member) (not shown) of the film feeding mechanism 52, and are conveyed by a roller (not shown) of the film conveying mechanism 54.
  • a pair of unfolding rollers (not shown) crushes the pod portion 42d of the instant film 42 to develop the developing liquid.
  • the print head 56 is composed of a line-type exposure head, irradiates the exposed surface 42a of the instant film 42 conveyed by the film conveying mechanism 54 with print light line by line, and records an image on the instant film 42 in a single pass. ..
  • a frame 42i is provided around the observation area 42h, and the image is displayed inside the frame 42i.
  • FIG. 5 is a block diagram showing a main part of the electrical configuration of the digital camera 10 with a printer.
  • the digital camera 10 with a printer includes a photographing lens 14, a touch sensor 45 (see FIGS. 1 and 2; sensor unit), an acceleration sensor 46 (sensor unit), an angular speed sensor 47 (sensor unit), and a vibrator. It includes 48 (emotion expression unit), LED49 (LED: Light-Emitting Diode, emotion expression unit), and temperature detection unit 58 (sensor unit).
  • the digital camera 10 with a printer includes a lens drive unit 62, an image sensor 64, an image sensor drive unit 66, an analog signal processing unit 68, a digital signal processing unit 70, a memory 72, a memory controller 74 (state detection unit), and a display 28. , Display controller 76, communication unit 78, and antenna 80.
  • the digital camera 10 with a printer further includes a film transmission drive unit 82, a film transfer drive unit 84, a head drive unit 86, a strobe 88, a strobe light emission control unit 90, a microphone 92, a speaker 94, an audio signal processing unit 96, and a clock unit 97. , Operation unit 98, battery 99, camera control unit 100 (evaluation determination unit, emotion determination unit, emotion expression unit, learning unit, state detection unit).
  • the photographing lens 14 forms an optical image of the subject on the light receiving surface of the image sensor 64.
  • the photographing lens 14 has a focus adjustment function and includes an aperture and a shutter (not shown).
  • the lens drive unit 62 includes a motor and its drive circuit that drive the focus adjustment function of the photographing lens 14, a motor that drives the aperture and its drive circuit, and a motor that drives the shutter and its drive circuit, and includes a camera control unit 100.
  • the focus adjustment mechanism, aperture and shutter are operated in response to a command from.
  • the image sensor 64 is composed of a two-dimensional solid-state image sensor such as a CCD image sensor (CCD: Charge Coupled Device) and a CMOS image sensor (CMOS: Complementary Metal Oxide Semiconductor).
  • CCD Charge Coupled Device
  • CMOS Complementary Metal Oxide Semiconductor
  • the image sensor 64 has an imaging region having an aspect ratio corresponding to the printable region of the instant film to be used.
  • the image sensor drive unit 66 includes a drive circuit for the image sensor 64, and operates the image sensor 64 in response to a command from the camera control unit 100.
  • the photographing lens 14 and the image sensor 64 form a photographing unit.
  • the analog signal processing unit 68 takes in the analog image signal for each pixel output from the image sensor 64, performs signal processing (for example, correlation double sampling processing, amplification processing, etc.), digitizes and outputs the signal.
  • signal processing for example, correlation double sampling processing, amplification processing, etc.
  • the digital signal processing unit 70 takes in the digital image signal output from the analog signal processing unit 68, and performs signal processing (for example, gradation conversion processing, white balance correction processing, gamma correction processing, simultaneous processing, YC conversion processing, etc.). ) Is applied to generate image data.
  • the digital signal processing unit 70 may perform image processing on the captured image according to the photographing mode or the user's instruction.
  • the memory 72 is a non-temporary recording medium that stores image data and audio data obtained by shooting, and for example, a memory card or the like is used.
  • the memory 72 is an example of a storage unit.
  • the memory controller 74 reads and writes data to and from the memory 72 under the control of the camera control unit 100.
  • the display 28 (emotion expression unit) is composed of, for example, a liquid crystal display (LCD), an organic electro-Luminescence display (OELD), or the like.
  • the display 28 may be composed of a plasma display, a field emission display (FED), electronic paper, or the like.
  • the display controller 76 causes the display 28 to display an image under the control of the camera control unit 100.
  • the communication unit 78 wirelessly communicates with another digital camera 10 with a printer (another device) via the antenna 80 under the control of the camera control unit 100.
  • the communication unit 78 can directly communicate with another device at a short distance by short-range wireless communication such as NFC standard (NFC: Near Field Communication), Bluetooth (registered trademark), and the like. Further, the communication unit 78 connects to an information communication network such as the Internet via a Wi-Fi spot (Wi-Fi: registered trademark) or the like, and is connected to another digital camera 10 with a printer (another device) regardless of the distance. Can communicate with.
  • the film delivery drive unit 82 includes a motor for driving a claw (claw-shaped member) (not shown) of the film delivery mechanism 52 and a drive circuit thereof, and drives the motor under the control of the camera control unit 100 to drive the claw. Make it work.
  • the film transport drive unit 84 includes a motor for driving a transport roller pair (not shown) and a drive circuit thereof of the film transport mechanism 54, and a motor for driving a deployment roller pair (not shown) and a drive circuit thereof, and includes a camera control unit 100.
  • the transport roller pair motor and the deployment roller pair motor are driven to operate the transport roller pair and the deployment roller pair.
  • the head drive unit 86 includes a drive circuit for the print head 56, and drives the print head 56 under the control of the camera control unit 100.
  • the strobe 88 includes, for example, a xenon tube, an LED (Light Emitting Diode), or the like as a light source, emits light from the light source, and irradiates the subject with strobe light.
  • the strobe light is emitted from the strobe light emitting window 20 (see FIG. 1) provided in front of the camera body 12.
  • the strobe light emission control unit 90 includes a drive circuit for the strobe 88, and causes the strobe 88 to emit light in response to a command from the camera control unit 100.
  • the microphone 92 collects external sound through the microphone hole 24 (see FIG. 2) provided in the camera body 12.
  • the microphone 92 is an example of a sound collecting unit.
  • the speaker 94 outputs sound to the outside through the speaker hole 26 provided in the camera body 12.
  • the audio signal processing unit 96 performs signal processing on the audio signal input from the microphone 92, digitizes it, and outputs it. Further, the audio signal processing unit 96 performs signal processing on the audio data given from the camera control unit 100 and outputs the audio data from the speaker 94.
  • the clock unit 97 holds the date and time information, and the camera control unit 100 sets the shooting time (date and time) with reference to this information.
  • the operation unit 98 includes various operation members such as a release button 16, a record button 18, a power button 22a, a menu button 22b, an OK button 22c, a joystick 32a, a print button 32b, a play button 32c, and a cancel button 32d, and signal processing thereof.
  • a circuit is included, and a signal based on the operation of each operating member is output to the camera control unit 100.
  • the battery 99 is a rechargeable and dischargeable secondary battery, and power is supplied to each part of the digital camera 10 with a printer under the control of the camera control unit 100.
  • the camera control unit 100 is a control unit that comprehensively controls the overall operation of the digital camera 10 with a printer.
  • the camera control unit 100 includes a CPU (CPU: Central Processing Unit), a ROM (ROM: Read Only Memory), a RAM (RAM: Random Access Memory), an EEPROM (Electronically Erasable and Programmable Read Only Memory), and the like.
  • the camera control unit 100 is a computer composed of these CPUs and the like, and realizes various functions described below by executing a control program.
  • FIG. 6 is a diagram showing a functional configuration of the camera control unit 100.
  • the camera control unit 100 includes a shooting control unit 100A (shooting control unit), a communication control unit 100B (communication unit), and a display control unit 100C (display control unit). Further, the camera control unit 100 includes an evaluation determination unit 100D (evaluation determination unit), an emotion determination unit 100E (emotion determination unit), an emotion expression unit 100F (emotion expression unit), and a learning unit 100G (learning unit).
  • a state detection unit 100H state detection unit
  • the camera control unit 100 further includes a print control unit 100I (print control unit) and a memory control unit 100J (memory control unit).
  • the functions of each part of the camera control unit 100 described above can be realized by using various processors and recording media.
  • the various processors include, for example, a CPU, which is a general-purpose processor that executes software (program) to realize various functions.
  • the various processors described above include programmable logic devices (Programmable Logic Device: PLD) such as GPU (Graphics Processing Unit) and FPGA (Field Programmable Gate Array), which are processors specialized in image processing.
  • PLD programmable logic devices
  • GPU Graphics Processing Unit
  • FPGA Field Programmable Gate Array
  • a programmable logic device is a processor whose circuit configuration can be changed after manufacturing. When learning or recognizing an image, a configuration using a GPU is effective.
  • the above-mentioned various processors include a dedicated electric circuit, which is a processor having a circuit configuration specially designed for executing a specific process such as an ASIC (Application Specific Integrated Circuit).
  • each part may be realized by one processor, or may be realized by a plurality of processors of the same type or different types (for example, a plurality of FPGAs, or a combination of a CPU and an FPGA, or a combination of a CPU and a GPU). Further, one processor may have a plurality of functions. As an example of configuring a plurality of functions with one processor, first, as represented by a computer, one processor is configured by a combination of one or more CPUs and software, and this processor is used as a plurality of functions. There is a form to be realized.
  • SoC System On Chip
  • a processor that realizes the functions of the entire system with one IC (Integrated Circuit) chip
  • various functions are configured by using one or more of the above-mentioned various processors as a hardware structure.
  • the hardware structure of these various processors is, more specifically, an electric circuit (circuitry) in which circuit elements such as semiconductor elements are combined.
  • These electric circuits may be electric circuits that realize the above-mentioned functions by using logical sum, logical product, logical denial, exclusive logical sum, and logical operations combining these.
  • a code readable by a computer (various processors or electric circuits constituting the camera control unit 100, and / or a combination thereof) of the software to be executed is executed. It is stored in a non-temporary recording medium such as a ROM, and the computer refers to the software.
  • the software stored in the non-temporary recording medium includes a program for taking and printing an image, executing an emotional expression, and the like, and data used for the execution.
  • the non-temporary recording medium for recording the code may be various optical magnetic recording devices, semiconductor memories, or the like instead of the ROM.
  • RAM is used as a temporary storage area during processing using software.
  • FIG. 7 is a flowchart showing processes related to learning and emotional expression by the printer-equipped digital camera 10 having the above-described configuration, and these processes are executed when the power of the printer-equipped digital camera 10 is turned on.
  • the user can turn on the power by operating the power button 22a or by operating the touch sensor 45 (sensor unit).
  • the shooting control unit 100A determines that "there was a shooting instruction" (YES in step S100), and sets at least one of the shutter speed, aperture value, and white balance.
  • the including shooting conditions are determined (step S110).
  • the shooting control unit 100A (shooting control unit) has a plurality of shooting modes (for example, auto mode, shutter speed priority mode, aperture priority mode, portrait mode, landscape mode, etc.) and determines shooting conditions according to the shooting mode. To do.
  • the shooting control unit 100A determines shooting conditions that reflect the user's evaluation of the shot image.
  • the photographing control unit 100A controls the photographing unit (photographing lens 14, image sensor 64, etc.) according to the determined photographing conditions to acquire an image (step S120).
  • the imaging control unit 100A can perform imaging under high-priority imaging conditions (described later).
  • the imaging control unit 100A may cause the imaging unit to perform bracket imaging of a plurality of images under different imaging conditions.
  • the digital signal processing unit 70 may perform image processing on the captured image based on a shooting mode or a user instruction.
  • the storage control unit 100J and the memory controller 74 store the captured image in the memory 72 according to the instruction of the user.
  • the display control unit 100C displays the captured image on the display 28 (step S130).
  • the user can evaluate the captured image by operating the digital camera 10 with a printer.
  • FIG. 8 is a diagram showing an example of operation on the display 28 (sensor unit).
  • the user can draw a circle M1 on the display 28 with a finger or a pen-type device, as shown in part (a) of FIG.
  • the user can draw a cross mark M2 on the display 28 as shown in the part (b) of the figure.
  • the user may draw a triangular mark on the display 28 when performing an intermediate evaluation.
  • FIG. 9 is a diagram showing an example of operation on the touch sensor 45 (sensor unit).
  • the touch sensor 45 can be tapped (or tapped) in the direction of the arrow F3 with a finger or another device.
  • the user can swing (translate and / or rotate) the digital camera 10 with a printer.
  • the acceleration sensor 46 sensor unit
  • / or the angular velocity sensor 47 sensor unit
  • the user may perform a voice operation via the microphone 92 (sensor unit) instead of or in addition to the above operation.
  • you can perform operations with sensory voice messages such as "Like”, “Good job”, “Do your best", and "You're no good”.
  • the user may perform an operation with a specific voice message such as "I want a brighter image" or "I want the background to be blurred”.
  • the speech (voice input) via the microphone 92 is a voice operation.
  • the evaluation determination unit 100D (evaluation determination unit) analyzes the operation on the sensor unit such as the display 28 (step S140: evaluation determination step) and determines the user's evaluation of the captured image (step S150: evaluation determination step). ).
  • the evaluation determination unit 100D has analysis results such as "the user has drawn a circle on the display 28", “the user has stroked the touch sensor 45", “the user has tapped the touch sensor 45", and "the user has a printer”.
  • “swinging the digital camera 10” “praise”, “attention or scolding”, and “scolding or angry” can be determined as the user's evaluation, respectively.
  • “Praise” is an example of a positive evaluation
  • "attention, scolding, anger” is an example of a negative evaluation.
  • the evaluation determination unit 100D "praises” and “praises”, respectively. "Be careful or scold” can be determined as a user's evaluation.
  • the evaluation determination unit 100D may determine the evaluation in place of or in addition to such sensory information based on specific information.
  • the evaluation decision unit 100D decides to "caution” the evaluation based on the statements such as "Please make my skin look more beautiful” and "Because it is a portrait, I want the background to be blurred a little more”. Can be done.
  • the evaluation determination unit 100D (evaluation determination unit) associates the content and / or degree of the operation with the evaluation in advance, and when analyzing the operation, the association (what kind of operation). What kind of evaluation corresponds to) can be referred to.
  • the evaluation determination unit 100D can store such association information in, for example, an EEPROM (non-temporary recording medium) of the camera control unit 100.
  • the evaluation determination unit 100D (evaluation determination unit) may accept editing of the relationship between the operation and the evaluation by the user.
  • the evaluation determination unit 100D may change the degree of evaluation depending on the number of operations and the intensity. For example, the more times the user strokes the touch sensor 45, or the more strongly the digital camera 10 with a printer is swung (the larger the acceleration and / or angular velocity), the more the evaluation (“praise”, “caution, or scolding”, etc.) The degree of can be increased.
  • the display control unit 100C causes the display 28 to display the plurality of images when determining the user's evaluation of the captured images.
  • the evaluation determination unit 100D accepts the user's selection for the displayed plurality of images, and determines the user's evaluation for the selected image in the same manner as in the above-mentioned example.
  • the emotion determination unit 100E determines the emotion of the anthropomorphic digital camera 10 with a printer (imaging device) with respect to the user's evaluation (step S160: emotion determination step).
  • the emotion determination unit 100E can determine joy and / or enjoyment as emotions when the evaluation is positive, and can determine sadness and / or anger as emotions when the evaluation is negative.
  • the emotion determination unit 100E can determine a stronger emotion as the degree of evaluation described above is higher.
  • the emotion determination unit 100E may determine "rebellious” as an emotional expression when the user subsequently denies the shooting condition evaluated as "like” in the past.
  • the emotion expression unit 100F (emotion expression unit) pseudo-expresses the determined emotion using one or more outputs (step S170: emotion expression step).
  • the emotion expression unit 100F can express emotions by outputting at least one of display, light emission, voice, sound effect, and vibration.
  • the emotion expression unit 100F can express emotions by displaying characters, figures, symbols, and the like on the display 28, the sub-display area 28a, and the sub-display 29.
  • the emotion expression unit 100F can express emotions by emitting light from the LED 49. When the emotion expression unit 100F uses the LED 49, the number and color of the LEDs 49 to emit light may be changed according to the content and the degree of the emotion.
  • the emotion expression unit 100F can express various colors by emitting a combination of red, green, and blue LEDs.
  • the state detection unit 100H may use the LED 49 to express the remaining battery level, the number of printable sheets, and the like. Further, the emotion expression unit 100F can express emotions by outputting voice and / or sound effects from the speaker 94 or by vibrating the vibrator 48.
  • FIG. 10 is a diagram showing an example of emotional expression by changing the display of the eyes (part of the face).
  • the emotional expression unit 100F can display these examples on the sub-display 29.
  • the part (a) in FIG. 10 shows the state (sleeping or resting state) when the power is off (or sleeping), and the emotion expression unit 100F is operated to stroke the touch sensor 45, for example, in this state. In that case, the display is changed to the state (raised state) shown in the part (b) of the figure.
  • the emotional expression unit 100F may fix the display shown in the portion (b) of the figure, or may intermittently display a blink-like display.
  • the emotion expression unit 100F may switch between the state shown in the portion (b) and the state displayed in the portion (c) of FIG. 10 to express the state in which the eyes are moving.
  • Part (d) in the figure is an example showing a state when shooting is performed by a user's operation.
  • the parts (e) to (g) in FIG. 10 are examples of displays expressing a "happy” or “happy” state, a “sad” state, and an "angry” state, respectively.
  • the parts (a) to (g) of FIG. 10 are examples in which one eye display is used, but the emotion expression unit 100F displays the eyes as in the example of the part (h) in the figure. A plurality of displays can be used. In this case, the emotional expression unit 100F can display the parts (a) to (g) of FIG. 10 for each eye.
  • FIG. 11 is a diagram showing an example of emotional expression by changing the facial expression.
  • the parts (a) and (b) in the figure are examples of displays expressing "happy”, “happy”, and “sad” states, respectively.
  • the emotional expression unit 100F may use the face of an animal or a virtual character instead of the human face for emotional expression.
  • the emotional expression unit 100F may express emotions on a part of the display 28 instead of the display device (sub-display 29) for expressing emotions.
  • a sub display area 28a is provided in a part of the display 28, and the emotion expression unit 100F displays emotions by displaying in the sub display area 28a (for example, according to the example shown in FIGS. 10 and 11). )It can be performed.
  • the emotional expression unit 100F may always continue the display in the sub display area 28a, or display the emotional change for a certain period of time. After that, the display in the sub display area 28a may be stopped.
  • the sub display area 28a is provided in the upper right portion of the display 28, but the position where the sub display area 28a is provided is not limited to the mode shown in this modified example.
  • the digital camera 10 with a printer can update the mode of emotional expression (what kind of output is used, how much expression is performed, etc.) according to the evaluation of the user. For example, as shown in the flowchart of FIG. 13, when there is a user operation for the emotion expressed (output) in step S170 (YES in step S172), the evaluation determination unit 100D (evaluation determination unit) changes to the sensor unit (display 28). , Touch sensor 45, microphone 92, etc.) to determine the user's evaluation of emotional expression (step S174). Then, the emotion expression unit 100F updates the number, combinations, and degrees of outputs expressing emotions based on the user's evaluation (step S176). When expressing the emotion next time, the emotion expression unit 100F expresses the emotion based on the result of the update.
  • the evaluation determination unit 100D evaluation determination unit changes to the sensor unit (display 28). , Touch sensor 45, microphone 92, etc.) to determine the user's evaluation of emotional expression (step S174).
  • the emotion expression unit 100F
  • the emotional expression when the user compliments the digital camera 10 with a printer is "change in eye display" (for example, from the state shown in the part (b) of FIG. 10 to the part (e) of the same figure. It is assumed that the mode changes to the state), the output of the sound from the speaker 94, and the vibration by the vibrator 48 are performed at the same time. In this case, some users may find such expressions "excessive.” In that case, the user can talk to the digital camera 10 with a printer "a little noisy", whereas the evaluation determination unit 100D analyzes the voice operation via the microphone 92 (sensor unit) and the user Determine the rating.
  • the emotional expression unit 100F for example, "does not vibrate by the vibrator 48" (updates the number of outputs and combinations), “reduces the volume of the audio output” (updates the degree of output), etc. You can make various changes. By updating the mode of emotional expression in this way, not only the shooting conditions but also the emotional expression can be adjusted to the user's preference, so that the user has an attachment to the digital camera 10 (imaging device) with a printer. Cheap.
  • step S180 When the user instructs to print the image, the image can be considered to be highly evaluated or important to the user. Therefore, when the image is printed (YES in step S180), the print button 32b and the like (sensor unit) and the print control unit 100I detect the print instruction of the image, and the learning unit 100G (learning unit) gives the print instruction. Raise the priority of the shooting conditions for the printed image (step S190: learning step). For example, when printing is instructed for an image that has been processed to lighten the skin color of a person or an image that has been processed to blur the background of a person, the learning unit 100G performs the same shooting conditions (shutter) in the next and subsequent shootings. The degree of use of speed, aperture value, white balance, etc.) can be increased compared to other shooting conditions.
  • the digital camera 10 with a printer may express emotions based on an operation related to the user's evaluation of the printed image, as in the case of expressing emotions based on the user's evaluation of the captured image. Further, the image processing conditions for the captured image may be changed.
  • the learning unit 100G learns the user's evaluation and reflects it in the shooting conditions used by the shooting control unit 100A (step S200: learning step). For example, the learning unit 100G sets values for all or part of the shooting conditions (including at least one of shutter speed, aperture value, and white balance, but not limited to these conditions) according to the evaluation. Can be changed. For example, the aperture value can be changed to the release side for an evaluation based on the statement "Because it is a portrait, I want the background to be blurred a little more.”
  • the evaluation result can be treated as a "signal that encourages learning", and the learning unit 100G learns each parameter of the shooting condition according to the evaluation, and new contents (parameter values, etc.) of the shooting condition are obtained.
  • the learning unit 100G can reflect on the shooting conditions in consideration of "which shooting conditions were positively (or negatively) evaluated and how much were evaluated", and the shooting conditions were also taken. Weighting may be performed between the items of the condition (for example, the evaluation of white balance is more important than other items).
  • the learning unit 100G may use a neural network that operates by a machine learning algorithm (deep learning or the like) for learning.
  • the shooting control unit 100A has a plurality of shooting modes, it is preferable that the learning unit 100G reflects the shooting conditions for each shooting mode.
  • the imaging control unit 100A can perform imaging under new imaging conditions by referring to the EEPROM in which the above evaluation is reflected at the time of imaging.
  • the learning unit 100G may learn not only the shooting conditions but also the image processing based on the user's evaluation and reflect them in the image processing conditions. For example, in response to an evaluation based on the statement "Please make my skin look more beautiful", for an image in which a person is the subject, the image processing conditions are changed to make the skin color look vivid. Can be processed.
  • FIG. 14 is a flowchart showing an example of processing of emotional expression according to the state of the digital camera 10 with a printer.
  • the state detection unit 100H detects at least one of the remaining battery capacity, the remaining memory capacity, the image processing load, and the internal temperature (step S200: state detection step). ..
  • the state detection unit 100H includes the remaining capacity of the battery 99, the remaining capacity of the memory 72, the load of image processing in the analog signal processing unit 68, the digital signal processing unit 70, the camera control unit 100, etc., and the internal temperature of the digital camera 10 with a printer. Can be detected.
  • the state detection unit 100H can detect these states based on the outputs of the memory controller 74, the temperature detection unit 58, and the like. Then, the emotion determination unit 100E (emotion determination unit) determines whether or not the detected state satisfies the criteria for expressing emotions (step S210), and if the detected state satisfies the criteria (YES in step S210), it depends on the detected state. Then, the emotion of the anthropomorphic digital camera 10 with a printer (imaging device) is determined (step S220: emotion determination step). The emotion determination unit 100E can determine that, for example, when the remaining capacity of the battery 99 or the remaining capacity of the memory 72 is 20% or less of the total capacity, it "satisfies the criteria for expressing emotions". Similarly, the emotion determination unit 100E can determine that “the criteria for expressing emotions are satisfied” when the load of image processing or the internal temperature exceeds the threshold value.
  • the emotion expression unit 100F expresses the emotion determined in step S220 (step S230: emotion expression process). This emotional expression is performed with at least one of display, light emission, sound, sound effect, and vibration as an output, as in the case based on the evaluation of captured images (see FIGS. 10 and 11 and the explanations relating to these figures). be able to.
  • the emotion expression unit 100F outputs a voice message from the speaker 94, for example, when the remaining capacity of the battery 99 is low, "The power is running out! If you do not charge it quickly, you will sleep! In addition, vibration by the vibrator 48 (which can correspond to emotional expressions such as "rambling” or "kneading”) can be performed.
  • the emotional expression unit 100F may express emotions by emitting light or displaying.
  • the mode of emotional expression can be updated based on the user's evaluation, as in the case of the photographed image (see FIG. 13 and its explanation).
  • the evaluation determination unit 100D evaluation determination unit
  • the emotion expression unit 100F updates the number, combinations, and degrees of outputs expressing emotions based on the user's evaluation (step S260).
  • the emotion expression unit 100F expresses the emotion based on the result of the update.
  • the emotional expression based on the internal state is also adjusted to the user's preference, so that the user can easily attach to the digital camera 10 (imaging device) with a printer. .. It should be noted that such processing of emotional expression according to the state of the digital camera 10 with a printer can be performed at any time during activation.
  • the user of the digital camera 10 with a printer according to the first embodiment can easily take an image according to his / her taste, and the digital camera 10 with a printer (imaging device) has a printer. Easy to have attachments.
  • the configuration of the image pickup apparatus according to the present invention is not limited to this.
  • the other imaging device of the present invention may be, for example, a built-in or external PC camera (PC: Personal Computer), or a mobile terminal device having a shooting function as described below. ..
  • Examples of the mobile terminal device according to the embodiment of the imaging device of the present invention include mobile phones, smartphones, PDAs (Personal Digital Assistants), and portable game machines.
  • the following explanation is based on a smartphone as an example.
  • FIG. 15 is a view showing the appearance of a smartphone 500 (imaging device) according to an embodiment of the imaging device of the present invention, in which the part (a) is a front view and the part (b) is a rear view.
  • the smartphone 500 shown in FIG. 15 has a flat-plate housing 502, and has a display panel 521 (display device) as a display unit and an operation panel 522 (operation unit) as an input unit on one surface of the housing 502. Is provided with a display input unit 520 integrated with the above.
  • the housing 502 includes a speaker 531, a microphone 532, an operation unit 540 (operation unit), a camera unit 541, 542 (imaging device, an imaging unit), and a strobe 543.
  • the configuration of the housing 502 is not limited to this, and for example, a configuration in which the display unit and the input unit are independent may be adopted, or a configuration having a folding structure or a slide mechanism may be adopted.
  • FIG. 16 is a block diagram showing the configuration of the smartphone 500 shown in FIG.
  • the smartphone 500 includes a wireless communication unit 511, a display input unit 520, a call unit 530, an operation unit 540, a camera unit 541, 542, a strobe 543, a storage unit 550, and an external device. It includes an input / output unit 560, a GPS receiving unit 570 (GPS: Global Positioning System), a motion sensor unit 580, and a power supply unit 590.
  • the smartphone 500 includes a main control unit 601 (camera control unit, shooting control unit, communication control unit, display control unit, evaluation determination unit, emotion determination unit, emotion expression unit, learning unit, state detection unit, print control unit, A memory control unit) is provided.
  • the smartphone 500 has a wireless communication function as a main function of performing mobile wireless communication via the base station device and the mobile communication network.
  • the wireless communication unit 511 performs wireless communication with the base station device housed in the mobile communication network according to the instruction of the main control unit 601 and uses such wireless communication to perform various files such as voice data and image data. Sends and receives data, e-mail data, etc., and receives Web data, streaming data, etc.
  • the smartphone 500 can transmit image data to an external printer via the main control unit 601 and the wireless communication unit 511 to print the image data. Further, the smartphone 500 may use the digital camera 10 with a printer according to the first embodiment as a printer.
  • the display input unit 520 displays images (still images and / or moving images), character information, and the like under the control of the main control unit 601 to visually convey the information to the user, and also performs user operations on the displayed information. It is a so-called touch panel for detecting, and includes a display panel 521 and an operation panel 522.
  • an LCD Liquid Crystal Display
  • OLED Organic Electro-Luminence Display Display
  • the operation panel 522 is a device on which an image displayed on the display surface of the display panel 521 is visibly placed and detects one or a plurality of coordinates operated by a conductor such as a user's finger or a pen.
  • a conductor such as a user's finger or a pen
  • the operation panel 522 outputs a detection signal generated due to the operation to the main control unit 601.
  • the main control unit 601 detects the operation position (coordinates) on the display panel 521 based on the received detection signal.
  • the display panel 521 corresponds to the display 28, the sub-display 29, and the sub-display area 28a in the digital camera 10 with a printer according to the first embodiment, and is a facial expression or an emotion due to a part of the face (eye portion, etc.). Expressions (see FIGS. 10-12) can be made.
  • the operation panel 522 corresponds to the display 28, the touch sensor 45, and the operation unit 98, and the user can input an evaluation for a captured image or an emotional expression via the operation panel 522 (see FIGS. 8 and 9). it can.
  • the display panel 521 and the operation panel 522 of the smartphone 500 illustrated as one embodiment of the image pickup apparatus of the present invention integrally constitute the display input unit 520, but the operation panel The 522 completely covers the display panel 521.
  • the operation panel 522 may have a function of detecting a user operation even in an area outside the display panel 521.
  • the operation panel 522 has a detection area (hereinafter, referred to as a display area) for the overlapping portion overlapping the display panel 521 and a detection area (hereinafter, non-display area) for the outer edge portion not overlapping the other display panel 521. ) And may be provided.
  • the call unit 530 includes a speaker 531 and a microphone 532, converts the user's voice input through the microphone 532 (sensor unit) into voice data that can be processed by the main control unit 601 and outputs the voice data to the main control unit 601. ,
  • the voice data received by the wireless communication unit 511 or the external input / output unit 560 can be decoded and output from the speaker 531.
  • the speaker 531 can be mounted on the same surface as the surface on which the display input unit 520 is provided, and the microphone 532 can be mounted on the side surface of the housing 502.
  • the smartphone 500 can pseudo-express (output) the emotions of the anthropomorphic smartphone 500 by voice and / or sound effects by using the speaker 531 (emotion expression unit) under the control of the main control unit 601.
  • the smartphone 500 can detect the user's evaluation of the captured image by voice using the microphone 532 (sensor unit).
  • the operation unit 540 is a hardware key using a key switch or the like, and is a device that receives instructions from the user.
  • the operation unit 540 is mounted on the side surface of the housing 502 of the smartphone 500, and is turned on when pressed with a finger or the like, and turned off by a restoring force such as a spring when the finger is released. It is a button type switch.
  • the storage unit 550 (recording device) was downloaded by the control program and control data of the main control unit 601, application software, address data associated with the name and telephone number of the communication partner, e-mail data sent and received, and Web browsing. Web data and downloaded content data are stored, and streaming data and the like are temporarily stored. Further, the storage unit 550 is composed of an internal storage unit 551 built in the smartphone and an external storage unit 552 having a detachable external memory slot. The storage unit 550 (state detection unit) detects the remaining capacity (memory remaining capacity) of the internal storage unit 551 and the external storage unit 552. Each of the internal storage unit 551 and the external storage unit 552 constituting the storage unit 550 is realized by using a known recording medium.
  • the external input / output unit 560 serves as an interface with all external devices connected to the smartphone 500.
  • the smartphone 500 is directly or indirectly connected to another external device via an external input / output unit 560 by communication or the like.
  • means for communication and the like include a universal serial bus (USB: Universal Serial Bus), IEEE1394, and a network (for example, the Internet and wireless LAN).
  • USB Universal Serial Bus
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wide Band
  • ZigBee registered trademark
  • the like can also be mentioned as means for communication and the like.
  • Examples of the external device connected to the smartphone 500 include a wired / wireless headset, a wired / wireless external charger, and a wired / wireless data port.
  • a memory card Memory card
  • SIM Subscriber Identity Module
  • UIM User Identity Module
  • external audio and video equipment connected via audio and video I / O (Input / Output) terminals, external audio and video equipment wirelessly connected, smartphones wired / wirelessly connected, and wired / wireless connection
  • External devices such as PDAs, wired / wirelessly connected personal computers, and earphones can also be connected.
  • the external input / output unit 560 can transmit the data transmitted from such an external device to each component inside the smartphone 500, and can transmit the data inside the smartphone 500 to the external device.
  • the motion sensor unit 580 includes, for example, a three-axis acceleration sensor, an angular velocity sensor, an inclination sensor, or the like, and detects the physical movement of the smartphone 500 according to the instruction of the main control unit 601. By detecting the physical movement of the smartphone 500, the moving direction, acceleration, and posture of the smartphone 500 are detected. Such a detection result is output to the main control unit 601.
  • the motion sensor unit 580 can detect an operation (such as swinging the smartphone 500) related to the user's evaluation of the captured image and / or the mode of emotional expression.
  • the power supply unit 590 supplies electric power stored in a battery (not shown) to each unit of the smartphone 500 according to the instruction of the main control unit 601. Further, the power supply unit 590 (state detection unit) detects the remaining capacity of the battery.
  • the main control unit 601 is provided with a microprocessor, operates according to the control program and control data stored in the storage unit 550, and controls each unit of the smartphone 500 including the camera unit 541 in an integrated manner.
  • the main control unit 601 includes a mobile communication control function that controls each unit of the communication system and an application processing function in order to perform voice communication and data communication through the wireless communication unit 511.
  • the main control unit 601 is provided with an image processing function such as displaying an image on the display input unit 520 based on image data (still image or moving image data) such as received data or downloaded streaming data.
  • the image processing function refers to a function in which the main control unit 601 decodes image data, performs image processing on the decoding result, and displays the image on the display input unit 520.
  • the main control unit 601 (state detection unit) detects the load of image processing. Further, the main control unit 601 may detect the internal temperature of the smartphone 500 by a temperature detection unit (not shown).
  • the camera units 541 and 542 are digital cameras (imaging devices) that perform electronic imaging using an image sensor such as CMOS or CCD. Further, the camera units 541 and 542 convert the image data (moving image, still image) obtained by imaging into compressed image data such as MPEG or JPEG under the control of the main control unit 601 and record it in the storage unit 550. In addition, it can be output through the external input / output unit 560 and the wireless communication unit 511. In the smartphone 500 shown in FIGS. 15 and 16, one of the camera units 541 and 542 can be used for shooting, and the camera units 541 and 542 can be used at the same time for shooting. When the camera unit 542 is used, the strobe 543 can be used.
  • the camera units 541 and 542 can be used for various functions of the smartphone 500.
  • the smartphone 500 can display the image acquired by the camera units 541 and 542 on the display panel 521. Further, the smartphone 500 can use the image of the camera units 541 and 542 as one of the operation inputs of the operation panel 522. Further, when the GPS receiving unit 570 detects the position based on the positioning information from the GPS satellites ST1, ST2, ..., STn, the smartphone 500 detects the position by referring to the images from the camera units 541 and 542. You can also do it.
  • the smartphone 500 refers to the images from the camera units 541 and 542, and the light of the camera unit 541 of the smartphone 500 is used without using the 3-axis acceleration sensor or in combination with the 3-axis acceleration sensor. It is also possible to judge the axial direction and the current usage environment. Of course, the smartphone 500 can also use the images from the camera units 541 and 542 in the application software. In addition, the smartphone 500 uses the image data of a still image or a moving image as text information by performing voice text conversion by the position information acquired by the GPS receiving unit 570 and the voice information acquired by the microphone 532 (the main control unit or the like). It is also possible to add posture information or the like acquired by the motion sensor unit 580 and record it in the storage unit 550. In addition, the smartphone 500 can also output the image data of these still images or moving images through the external input / output unit 560 and the wireless communication unit 511.
  • the processing of the control method according to the present invention is the same as in the digital camera 10 with a printer according to the first embodiment. It is possible to determine emotions, pseudo-express emotions, learn evaluations and reflect them in shooting conditions, detect states, etc.).
  • the camera units 541 and 542 perform the processing (including the processing of the flowchart shown in FIGS. 7, 13 and 14) executed by the camera control unit 100 (each unit shown in FIG. 6) in the first embodiment.
  • the main control unit 601 can execute.
  • the functions of the operation unit 98, the memory 72 and the memory controller 74, the display 28, the sub-display 29, and the display controller 76 in the digital camera 10 with a printer are the operation unit 540, the storage unit 550, the operation panel 522, and the display in the smartphone 500. This can be achieved by the panel 521 and the main controller 601.
  • the smartphone 500 according to the second embodiment has the same effect as the digital camera 10 with a printer according to the first embodiment (the user can easily take an image according to his / her taste). In addition, it is possible to obtain an attachment to the image pickup device, etc.).
  • a device such as a smartphone 500 according to its configuration (imaging unit, sensor unit, etc.).
  • An application software program for performing the control method
  • a non-temporary recording medium on which a computer-readable code of such application software is recorded can also be mentioned as an aspect of the present invention.
  • This "computer” can be realized, for example, by using a processor such as the CPU described above and / or a combination thereof.
  • non-temporary recording media include recording media such as memory cards, optical magnetic recording devices (hard disks, Blu-ray Discs (registered trademarks)) used in computers such as servers on networks, and semiconductors. Memory etc.) is included.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Cameras Adapted For Combination With Other Photographic Or Optical Apparatuses (AREA)
  • Exposure Control For Cameras (AREA)
  • User Interface Of Digital Computer (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)

Abstract

本発明は、ユーザの好みに合わせた画像を容易に撮影することができ、ユーザが愛着を持ちやすい撮像装置、撮像装置の制御方法、撮像装置に制御方法を実行させるプログラム、及び斯かるプログラムのコンピュータ読み取り可能なコードが記録された非一時的記録媒体を提供することを目的とする。本発明の第１の態様に係る撮像装置は、撮影部に画像を撮影させる撮影制御部と、撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を有する撮像装置であって、センサ部に対する操作を解析して、撮影された画像に対するユーザの評価を決定する評価決定部と、評価に対する、擬人化した撮像装置の感情を決定する感情決定部と、決定した感情を１つ以上の出力を用いて疑似的に表現する感情表現部と、評価を学習して撮影制御部が用いる撮影条件に反映する学習部と、を備える。

Description

撮像装置、制御方法、プログラム、及び非一時的記録媒体
　本発明は、撮像装置、撮像装置の制御方法、撮像装置に制御方法を実行させるプログラム、及びプログラムが記録された非一時的記録媒体に関する。
　近年、デジタルカメラ（撮像装置）は高性能化や高機能化が進んでおり、ユーザが機能を使いこなして好みの画像を撮影するのは難しくなりつつある。このため、撮影条件等の学習機能を備えるカメラが提案されている。例えば、特許文献１には、判断パラメータを学習して学習結果を記憶するビデオカメラが記載されている。
特開平５－１３７０５７号公報
　上述した特許文献１に記載のビデオカメラは、撮影環境や撮影被写体の判断結果に対する答えをユーザがその都度入力する必要があるため操作が煩雑であり、また入力に対して特段の感情的反応がないため、愛着や思い入れを持ちやすい対象ではなかった。
　本発明はこのような事情に鑑みてなされたもので、ユーザの好みに合わせた画像を容易に撮影することができ、ユーザが愛着を持ちやすい撮像装置、撮像装置の制御方法、撮像装置に制御方法を実行させるプログラム、及び斯かるプログラムが記録された非一時的記録媒体を提供することを目的とする。
　上述した目的を達成するため、本発明の第１の態様に係る撮像装置は、撮影部に画像を撮影させる撮影制御部と、撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を有する撮像装置であって、センサ部に対する操作を解析して、撮影された画像に対するユーザの評価を決定する評価決定部と、評価に対する、擬人化した撮像装置の感情を決定する感情決定部と、決定した感情を１つ以上の出力を用いて疑似的に表現する感情表現部と、評価を学習して撮影制御部が用いる撮影条件に反映する学習部と、を備える。
　第１の態様に係る撮像装置は、撮影された画像に対するユーザの評価を学習して撮影制御部が用いる撮影条件に反映するので、ユーザは自分の好みに合わせた画像を容易に撮影することができる。また、ユーザの評価に対する擬人化した撮影装置の感情が表現されるので、ユーザは撮像装置に愛着を持ちやすい。
　第２の態様に係る撮像装置は第１の態様において、センサ部は、撮像装置に対する接触、撮像装置の加速度及び／または角速度、及び撮像装置に対する音声のうち少なくとも一つを検知する。第２の態様は、センサ部が検知する項目の具体的態様を規定するものである。
　第３の態様に係る撮像装置は第１または第２の態様において、感情表現部は表示、発光、音声、効果音、及び振動のうち少なくとも一つを出力として感情を表現する。第３の態様は、感情表現に用いる出力の具体的態様を規定するものである。ユーザは、これらの出力を知覚により認識することができる。
　第４の態様に係る撮像装置は第１から第３の態様のいずれか１つにおいて、感情表現部は顔の表情または顔の一部を変化させて表示することにより感情を表現する。第４の態様によれば、撮像装置に親しみがわき、感情移入が容易である。
　第５の態様に係る撮像装置は第１から第４の態様のいずれか１つにおいて、感情決定部は、評価が肯定的である場合は喜び及び／または楽しさを感情として決定し、評価が否定的である場合は悲しみ及び／または怒りを感情として決定する。第５の態様は、評価と感情の関係の具体的態様を規定するものである。
　第６の態様に係る撮像装置は第１から第５の態様のいずれか１つにおいて、学習部は、評価が肯定的であった画像についての撮影条件の優先度を上げ、評価が否定的であった画像についての撮影条件の優先度を下げ、撮影制御部は優先度の高い撮影条件により撮影させる。第６の態様によれば、例えば「過去の撮影と同様のシーンで撮影する場合、評価が肯定的であった画像についての撮影条件を優先的に使用し、評価が否定的であった画像についての撮影条件については積極的な使用をしない」という処理を行うことができる。
　第７の態様に係る撮像装置は第１から第６の態様のいずれか１つにおいて、学習部は評価に応じて撮影条件を変更する。第７の態様によれば、ユーザは自分の好みに合わせた画像を容易に撮影することができる。
　第８の態様に係る撮像装置は第１から第７の態様のいずれか１つにおいて、撮影条件はシャッタースピード、絞り値、ホワイトバランスのうち少なくとも一つを含む。第８の態様は、ユーザの評価が反映される撮影条件の具体的態様を規定するものである。
　第９の態様に係る撮像装置は第１から第８の態様のいずれか１つにおいて、撮影制御部は、撮影部に対しそれぞれ異なる撮影条件で複数の画像をブラケット撮影し、評価決定部は複数の画像から選択された画像についてユーザの評価を決定する。第９の態様によれば、ブラケット撮影により撮影条件が異なる複数の画像を一連の撮影で得ることができるので、画像についてのユーザの評価を容易に決定することができる。
　第１０の態様に係る撮像装置は第１から第９の態様のいずれか１つにおいて、センサ部は画像のプリント指示を検知し、学習部は、プリント指示がされた画像についての撮影条件の優先度を上げる。第１０の態様では、学習部は、「ユーザの意思でプリントされた画像は重要度が高い」との考えによりプリント指示がされた画像についての撮影条件の優先度を上げている。
　第１１の態様に係る撮像装置は第１から第１０の態様のいずれか１つにおいて、撮影制御部は複数の撮影モードを有し、学習部は撮影条件に対する反映を撮影モードごとに行う。第１１の態様によれば、学習部は撮影条件に対する反映を撮影モードごとに行うので、詳細な反映が可能であり、ユーザは好みの画像を容易に撮影することができる。
　第１２の態様に係る撮像装置は第１から第１１の態様のいずれか１つにおいて、評価決定部はセンサ部に対する操作を解析して撮像装置の表現に対するユーザの評価を決定し、感情表現部は感情を表現する出力の数、組み合わせ、及び程度を表現に対する評価に基づいて更新し、更新の結果に基づいて感情を表現する。第１２の態様によれば、カメラの感情表現の仕方がユーザの評価で変わってゆくので、ユーザが愛着を持ちやすい。
　第１３の態様に係る撮像装置は第１から第１２の態様のいずれか１つにおいて、撮像装置の状態を検知する状態検知部をさらに備え、感情決定部は検知した状態に応じて感情を決定する。第１３の態様によれば、ユーザの評価に加えて撮像装置の状態によって感情が決定される。
　第１４の態様に係る撮像装置は第１３の態様において、状態検知部は撮像装置のバッテリ残容量、メモリ残容量、画像処理の負荷、及び内部温度のうち少なくとも１つを検知する。第１４の態様は撮像装置の状態を具体的に規定するもので、感情決定部はこれらパラメータの状態に応じて感情を決定する。
　第１５の態様に係る撮像装置は第１から第１４の態様のいずれか１つにおいて、撮影された画像をプリントするプリンタを備える。第１５の態様によれば、ユーザは撮影された画像をプリントすることができる。
　上述した目的を達成するため、本発明の第１６の態様に係る制御方法は撮影部に画像を撮影する撮影制御部と、撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を備える撮像装置の制御方法であって、センサ部に対する操作を解析して、撮影された画像に対するユーザの評価を決定する評価決定工程と、評価に対する、擬人化した撮像装置の感情を決定する感情決定工程と、決定した感情を１つ以上の出力を用いて疑似的に表現する感情表現工程と、評価を学習して撮影制御部が用いる撮影条件に反映する学習工程と、を有する。第１６の態様によれば、第１の態様と同様にユーザは自分の好みに合わせた画像を容易に撮影することができる。また、ユーザは撮像装置に愛着を持ちやすい。なお、第１６の態様に係る制御方法は、第２から第１５の態様と同様の構成を含んでいてもよい。
　上述した目的を達成するため、本発明の第１７の態様に係るプログラムは撮影部に画像を撮影させる撮影制御部と、撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を備える撮像装置に第１６の態様に係る制御方法を実行させる。第１７の態様によれば、第１，第１６の態様と同様にユーザは自分の好みに合わせた画像を容易に撮影することができる。また、ユーザは撮像装置に愛着を持ちやすい。第１７の態様は、第２から第１５の態様と同様の構成を含んでいてもよい。
　上述した目的を達成するため、本発明の第１８の態様に係る非一時的記録媒体は、第１７の態様に係るプログラムのコンピュータ読み取り可能なコードが記録された非一時的記録媒体である。第１８の態様に係る非一時的記録媒体は、メモリカードのような記録媒体でもよいし、サーバ等のコンピュータで用いられる各種の光磁気記録媒体や半導体記録媒体でもよい。なお、第１７の態様に係るプログラムに対し第２から第１５の態様と同様の構成をさらに含むプログラムのコンピュータ読み取り可能なコードを記録した非一時的記録媒体も、本発明の態様として挙げることができる。
　以上説明したように、本発明の撮像装置、制御方法、プログラム、及び記録媒体によれば、ユーザは自分の好みに合わせた画像を容易に撮影することができ、また撮像装置に愛着を持ちやすい。
図１は、第１の実施形態に係るプリンタ付きデジタルカメラを示す正面斜視図である。 図２は、第１の実施形態に係るプリンタ付きデジタルカメラを示す背面斜視図である。 図３は、インスタントフィルムの正面図である。 図４は、インスタントフィルムの背面図である。 図５は、プリンタ付きデジタルカメラの電気的構成を示す図である。 図６は、カメラ制御部の機能ブロック図である。 図７は、学習及び感情表現に係る処理の手順を示すフローチャートである。 図８は、ディスプレイを介して画像を評価する様子を示す図である。 図９は、タッチセンサを介して画像を評価する様子を示す図である。 図１０は、目のマークによる感情表現の例を示す図である。 図１１は、顔のマークによる感情表現の例を示す図である。 図１２は、ディスプレイに感情表現用のサブ表示領域を設けた様子を示す図である。 図１３は、感情表現の態様を更新する処理を示すフローチャートである。 図１４は、カメラの状態に応じた感情表現の処理を示すフローチャートである。 図１５は、第２の実施形態に係るスマートフォンを示す図である。 図１６は、第２の実施形態に係るスマートフォンの構成を示す図である。
　本発明に係る撮像装置、撮像装置の制御方法、及びプログラムの実施形態についての詳細な説明は以下の通りである。説明においては、添付図面が参照される。
　＜第１の実施形態＞
　＜プリンタ付きデジタルカメラ＞
　第１の実施形態に係るプリンタ付きデジタルカメラ１０（撮像装置）は、プリンタを内蔵したデジタルカメラであり、撮影した画像をその場でプリントする機能を有する。本実施形態のプリンタ付きデジタルカメラ１０は、インスタントフィルムパックを使用して、インスタントフィルムにプリントする。また、本実施形態のプリンタ付きデジタルカメラ１０は、録音機能を有し、撮影した画像に関連付けて音声を記録することができる。
　＜外観構成＞
　図１は、プリンタ付きデジタルカメラの一例を示す正面斜視図である。図２は、図１に示すプリンタ付きデジタルカメラの背面斜視図である。
　図１及び図２に示すように、プリンタ付きデジタルカメラ１０は、携帯可能なカメラボディ１２を有する。カメラボディ１２は、前後方向の厚みが薄く、横方向の寸法に比して縦方向の寸法が長い、縦長の直方体形状である。
　カメラボディ１２の正面側には、図１に示すように、撮影レンズ１４、レリーズボタン１６、録音ボタン１８、ストロボ発光窓２０等が備えられる。また、カメラボディ１２の一方側の側面には、電源ボタン２２ａ、メニューボタン２２ｂ、ＯＫボタン２２ｃ、モード切替えボタン２２ｄ、マイク穴２４、スピーカ穴２６等が備えられる。レリーズボタン１６は、画像の記録を指示するボタンである。電源ボタン２２ａは、プリンタ付きデジタルカメラ１０の電源をオン及びオフするボタンである。メニューボタン２２ｂは、メニュー画面を呼び出すボタンである。ＯＫボタンは、ＯＫを指示するボタンである。モード切替えボタン２２ｄは、撮影モードにおいて、オートプリントモードとマニュアルプリントモードとを切り替えるボタンである。
　カメラボディ１２の背面側には、図２に示すように、タッチパネル型のディスプレイ２８、サブディスプレイ２９（感情表現部）、フィルム蓋カバー３０、各種操作ボタン類が備えられる。サブディスプレイ２９は、詳細を後述するように、擬人化したプリンタ付きデジタルカメラ１０の感情を疑似的に表現するためのディスプレイである。フィルム蓋カバー３０は、フィルム装填室を開閉するカバーである。操作ボタン類には、ジョイスティック３２ａ、プリントボタン３２ｂ、再生ボタン３２ｃ、キャンセルボタン３２ｄ等が含まれる。プリントボタン３２ｂは、プリントを指示するボタンである。再生ボタン３２ｃは、再生モードへの切り替えを指示するボタンである。キャンセルボタン３２ｄは、操作のキャンセルを指示するボタンである。
　カメラボディ１２の上面には、図１及び図２に示すように、フィルム排出口３４が備えられる。プリントされたインスタントフィルムは、このフィルム排出口３４から排出される。また、カメラボディ１２の上面には、タッチセンサ４５（センサ部）が設けられる。タッチセンサ４５はユーザの指等の人体やペン型等の操作デバイスによる接触、スライド操作等を検知する。詳細を後述するように、ユーザはタッチセンサ４５を操作して撮影画像や感情表現に対する評価を入力することができる。
　なお、プリンタ付きデジタルカメラ１０に関し、電源ボタン２２ａ等が設けられている側を＋Ｘ方向とし、フィルム排出口３４が設けられている側を＋Ｙ方向とし、撮影レンズ１４から被写体へ向かう側（ディスプレイ２８等と反対側）を＋Ｚ方向とする。
　＜プリンタ付きデジタルカメラのプリンタ部分の構成＞
　プリンタ付きデジタルカメラ１０は、プリント部であるプリンタ部分の構成要素として、フィルム装填室（不図示）、フィルム送出機構５２、フィルム搬送機構５４、プリントヘッド５６等を備える（図５を参照）。フィルム装填室には、複数枚のインスタントフィルムがケースに収容された構造のインスタントフィルムパックが装填される。図３はインスタントフィルム４２の正面図であり、図４はインスタントフィルム４２の背面図である。図３及び図４において、矢印Ｆで示す方向がインスタントフィルム４２の使用方向であり、インスタントフィルム４２は矢印Ｆで示す方向に搬送される。したがって、プリンタ付きデジタルカメラ１０に装填した場合は、矢印Ｆで示す方向がインスタントフィルム４２の排出方向となる。
　インスタントフィルム４２は、矩形のカード形状を有する自己現像型インスタントフィルムである。インスタントフィルム４２は、裏面側が露光面４２ａ、正面側が観察面４２ｂとして構成される。露光面４２ａは露光により像を記録する面であり、観察面４２ｂは記録された像を観察する面である。
　図３に示すように、インスタントフィルム４２の観察面４２ｂには観察領域４２ｈが備えられる。また、図４に示すように、インスタントフィルム４２の露光面４２ａには露光領域４２ｃ、ポッド部４２ｄ、及び、トラップ部４２ｆが備えられる。インスタントフィルム４２は、露光後、ポッド部４２ｄの現像処理液を露光領域４２ｃに展開させることにより現像処理される。ポッド部４２ｄには、現像処理液を内包した現像処理液ポッド４２ｅが内蔵される。ポッド部４２ｄの現像処理液は、インスタントフィルム４２をローラ対の間に通すことでポッド部４２ｄから絞り出され、露光領域４２ｃに展開される。展開処理時に余った現像処理液が、トラップ部４２ｆで捕捉される。トラップ部４２ｆには、吸収材４２ｇが内蔵される。
　インスタントプリントパックはカメラボディ１２の内部に設けられた図示せぬフィルム装填室に装填される。プリントの際はフィルム送出機構５２の図示せぬクロー（爪状部材）によりフィルムが１枚ずつ送出され、フィルム搬送機構５４の図示せぬローラにより搬送される。また、搬送過程では図示せぬ展開ローラ対がインスタントフィルム４２のポッド部４２ｄを押しつぶして、現像処理液を展開処理する。プリントヘッド５６はライン型の露光ヘッドで構成され、フィルム搬送機構５４によって搬送されるインスタントフィルム４２の露光面４２ａに１ラインずつプリント光を照射して、シングルパスでインスタントフィルム４２に画像を記録する。観察領域４２ｈの周囲には枠４２ｉが備えられ、画像は枠４２ｉの内側に表示される。
　＜プリンタ付きデジタルカメラの電気的構成＞
　図５は、プリンタ付きデジタルカメラ１０の電気的構成の主要部を示すブロック図である。
　同図に示すように、プリンタ付きデジタルカメラ１０は、撮影レンズ１４、タッチセンサ４５（図１，２を参照；センサ部）、加速度センサ４６（センサ部）、角速度センサ４７（センサ部）、バイブレータ４８（感情表現部）、ＬＥＤ４９（ＬＥＤ：Light-Emitting Diode、感情表現部）、温度検出部５８（センサ部）を備える。また、プリンタ付きデジタルカメラ１０は、レンズ駆動部６２、イメージセンサ６４、イメージセンサ駆動部６６、アナログ信号処理部６８、デジタル信号処理部７０、メモリ７２、メモリコントローラ７４（状態検知部）、ディスプレイ２８、表示コントローラ７６、通信部７８、アンテナ８０を備える。プリンタ付きデジタルカメラ１０は、さらに、フィルム送出駆動部８２、フィルム搬送駆動部８４、ヘッド駆動部８６、ストロボ８８、ストロボ発光制御部９０、マイクロフォン９２、スピーカ９４、音声信号処理部９６、時計部９７、操作部９８、バッテリ９９、カメラ制御部１００（評価決定部、感情決定部、感情表現部、学習部、状態検知部）を備える。
　撮影レンズ１４は、被写体の光学像をイメージセンサ６４の受光面上に結像させる。撮影レンズ１４は、焦点調節機能を有し、図示しない絞り及びシャッタを備える。レンズ駆動部６２は、撮影レンズ１４の焦点調節機能を駆動するモータ及びその駆動回路、絞りを駆動するモータ及びその駆動回路、並びに、シャッタを駆動するモータ及びその駆動回路を含み、カメラ制御部１００からの指令に応じて、焦点調節機構、絞り及びシャッタを動作させる。
　イメージセンサ６４は、例えばＣＣＤイメージセンサ（CCD：Charge Coupled Device）、ＣＭＯＳイメージセンサ（CMOS：Complementary Metal Oxide Semiconductor）等の二次元の固体撮像素子で構成される。イメージセンサ６４は、使用するインスタントフィルムのプリント可能領域に対応したアスペクト比の撮像領域を有する。イメージセンサ駆動部６６は、イメージセンサ６４の駆動回路を含み、カメラ制御部１００からの指令に応じて、イメージセンサ６４を動作させる。
　本実施形態のプリンタ付きデジタルカメラ１０では、撮影レンズ１４及びイメージセンサ６４が撮影部を構成する。
　アナログ信号処理部６８は、イメージセンサ６４から出力される画素ごとのアナログの画像信号を取り込み、信号処理（例えば、相関二重サンプリング処理、増幅処理等）を施し、デジタル化して出力する。
　デジタル信号処理部７０は、アナログ信号処理部６８から出力されるデジタルの画像信号を取り込み、信号処理（例えば、階調変換処理、ホワイトバランス補正処理、ガンマ補正処理、同時化処理、ＹＣ変換処理等）を施して、画像データを生成する。デジタル信号処理部７０は、撮影された画像に対し撮影モードやユーザの指示に応じて画像処理を施してもよい。
　メモリ７２は、撮影により得られた画像データ及び音声データを記憶する非一時的記録媒体であり、例えばメモリカード等が用いられる。メモリ７２は、記憶部の一例である。メモリコントローラ７４は、カメラ制御部１００による制御の下、メモリ７２にデータを読み書きする。
　ディスプレイ２８（感情表現部）は、例えば、液晶ディスプレイ（Liquid Crystal Display；ＬＣＤ）、有機エレクトロルミネッセンスディスプレイ（Organic Electro-Luminescence Display；ＯＥＬＤ）等で構成される。この他、ディスプレイ２８はプラズマディスプレイ、電界放出ディスプレイ（Field Emission Display；ＦＥＤ）、電子ペーパ等で構成されていてもよい。表示コントローラ７６は、カメラ制御部１００による制御の下、ディスプレイ２８に映像を表示させる。
　通信部７８は、カメラ制御部１００による制御の下、アンテナ８０を介して他のプリンタ付きデジタルカメラ１０（他機）と無線で通信する。通信部７８は、例えば、ＮＦＣ規格（ＮＦＣ：Ｎｅａｒ Field Communication）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、等の近距離無線通信により近距離で他機と直接通信することができる。また、通信部７８は、Ｗｉ-Ｆｉスポット（Ｗｉ-Ｆｉ：登録商標）等を介してインターネット等の情報通信ネットワークに接続し、他のプリンタ付きデジタルカメラ１０（他機）と、距離を問わずに通信することができる。
　フィルム送出駆動部８２は、フィルム送出機構５２の図示せぬクロー（爪状部材）を駆動するモータ、及び、その駆動回路を含み、カメラ制御部１００による制御の下、モータを駆動してクローを動作させる。
　フィルム搬送駆動部８４は、フィルム搬送機構５４の図示せぬ搬送ローラ対を駆動するモータ及びその駆動回路、並びに、図示せぬ展開ローラ対を駆動するモータ及びその駆動回路を含み、カメラ制御部１００による制御の下、搬送ローラ対のモータ及び展開ローラ対のモータを駆動して、搬送ローラ対及び展開ローラ対を動作させる。
　ヘッド駆動部８６は、プリントヘッド５６の駆動回路を含み、カメラ制御部１００の制御の下、プリントヘッド５６を駆動する。
　ストロボ８８は、光源として、例えばキセノン管、ＬＥＤ（Light Emitting Diode）等を備え、その光源を発光させて、被写体にストロボ光を照射する。ストロボ光は、カメラボディ１２の正面に備えられたストロボ発光窓２０（図１参照）から照射される。ストロボ発光制御部９０は、ストロボ８８の駆動回路を含み、カメラ制御部１００からの指令に応じて、ストロボ８８を発光させる。
　マイクロフォン９２は、カメラボディ１２に備えられたマイク穴２４（図２参照）を介して外部の音声を集音する。マイクロフォン９２は、集音部の一例である。スピーカ９４は、カメラボディ１２に備えられたスピーカ穴２６から外部に音声を出力する。音声信号処理部９６は、マイクロフォン９２から入力される音声信号に信号処理を施し、デジタル化して出力する。また、音声信号処理部９６は、カメラ制御部１００から与えられる音声データに信号処理を施して、スピーカ９４から出力させる。時計部９７は日時の情報を保持し、カメラ制御部１００はこの情報を参照して撮影時刻（日時）を設定する。
　操作部９８は、レリーズボタン１６、録音ボタン１８、電源ボタン２２ａ、メニューボタン２２ｂ、ＯＫボタン２２ｃ、ジョイスティック３２ａ、プリントボタン３２ｂ、再生ボタン３２ｃ、キャンセルボタン３２ｄ等の各種操作部材、及び、その信号処理回路を含み、各操作部材の操作に基づく信号をカメラ制御部１００に出力する。
　バッテリ９９は充放電可能な二次電池であり、カメラ制御部１００の制御により、プリンタ付きデジタルカメラ１０の各部に電力を供給する。
　カメラ制御部１００は、プリンタ付きデジタルカメラ１０の全体の動作を統括制御する制御部である。カメラ制御部１００は、ＣＰＵ（CPU：Central Processing Unit）、ＲＯＭ（ROM：Read Only Memory）、ＲＡＭ（RAM：Random Access Memory）、及びＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）等を備える。カメラ制御部１００はこれらＣＰＵ等により構成されるコンピュータであり、制御プログラムを実行することにより以下に説明する各種機能を実現する。
　＜カメラ制御部の機能構成＞
　図６は、カメラ制御部１００の機能構成を示す図である。カメラ制御部１００は、撮影制御部１００Ａ（撮影制御部）と、通信制御部１００Ｂ（通信部）と、表示制御部１００Ｃ（表示制御部）と、を備える。また、カメラ制御部１００は、評価決定部１００Ｄ（評価決定部）と、感情決定部１００Ｅ（感情決定部）と、感情表現部１００Ｆ（感情表現部）と、学習部１００Ｇ（学習部）と、状態検知部１００Ｈ（状態検知部）と、を備える。
カメラ制御部１００は、さらにプリント制御部１００Ｉ（プリント制御部）と、記憶制御部１００Ｊ（記憶制御部）と、を備える。
　上述したカメラ制御部１００の各部の機能は、各種のプロセッサ（processor）及び記録媒体を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵが含まれる。また、上述した各種のプロセッサには、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等のプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。プログラマブルロジックデバイスは、製造後に回路構成を変更可能なプロセッサである。なお、画像の学習や認識を行う場合はＧＰＵを用いた構成が効果的である。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
　各部の機能は１つのプロセッサにより実現されてもよいし、同種または異種の複数のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ、またはＣＰＵとＧＰＵの組み合わせ）で実現されてもよい。また、１つのプロセッサが複数の機能を備えていてもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、コンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。これらの電気回路は、論理和、論理積、論理否定、排他的論理和、及びこれらを組み合わせた論理演算を用いて上述した機能を実現する電気回路であってもよい。
　上述したプロセッサあるいは電気回路がソフトウェア（プログラム）を実行する際は、実行するソフトウェアのコンピュータ（カメラ制御部１００を構成する各種のプロセッサや電気回路、及び／またはそれらの組み合わせ）で読み取り可能なコードをＲＯＭ等の非一時的記録媒体に記憶しておき、コンピュータがそのソフトウェアを参照する。非一時的記録媒体に記憶しておくソフトウェアは、画像の撮影や印刷、感情表現等を実行するためのプログラム、及び実行に際して用いられるデータを含む。コードを記録する非一時的記録媒体は、ＲＯＭではなく各種の光磁気記録装置、半導体メモリ等でもよい。ソフトウェアを用いた処理の際には例えばＲＡＭが一時的記憶領域として用いられる。
　＜学習及び感情表現に係る処理＞
　図７は上述した構成のプリンタ付きデジタルカメラ１０による学習及び感情表現に係る処理を示すフローチャートであり、プリンタ付きデジタルカメラ１０の電源がＯＮされるとこれらの処理が実行される。ユーザは、電源ボタン２２ａを操作することにより、あるいはタッチセンサ４５（センサ部）を操作することにより電源をＯＮにすることができる。
　撮影制御部１００Ａ（撮影制御部）は、ユーザがレリーズボタン１６を操作すると「撮影指示があった」と判断し（ステップＳ１００でＹＥＳ）、シャッタースピード、絞り値、ホワイトバランスのうち少なくとも一つを含む撮影条件を決定する（ステップＳ１１０）。撮影制御部１００Ａ（撮影制御部）は複数の撮影モード（例えば、オートモード、シャッタースピード優先モード、絞り優先モード、ポートレートモード、風景モード等）を有し、撮影モードに応じた撮影条件を決定する。また、撮影制御部１００Ａは、過去の撮影に基づいて学習がなされている場合は、撮影された画像に対するユーザの評価が反映された撮影条件を決定する。そして、撮影制御部１００Ａは、決定した撮影条件により撮影部（撮影レンズ１４、イメージセンサ６４等）を制御して画像を撮影させる（ステップＳ１２０）。撮影制御部１００Ａは、優先度の高い撮影条件（後述）により撮影させることができる。撮影制御部１００Ａは、撮影部に対し、それぞれ異なる撮影条件で複数の画像をブラケット撮影させてもよい。なお、デジタル信号処理部７０は、撮影した画像に対し撮影モードやユーザ指示に基づく画像処理を施してもよい。記憶制御部１００Ｊ及びメモリコントローラ７４は、ユーザの指示に応じて、撮影された画像をメモリ７２に記憶させる。
　＜画像の評価に関わる操作＞
　表示制御部１００Ｃは、撮影された画像をディスプレイ２８に表示する（ステップＳ１３０）。ユーザは、プリンタ付きデジタルカメラ１０を操作することにより、撮影された画像を評価することができる。図８はディスプレイ２８（センサ部）に対する操作の例を示す図である。肯定的な評価をする場合、図８の（ａ）部分に示すように、ユーザは指やペン型デバイスでディスプレイ２８に丸印Ｍ１を描くことができる。一方、否定的な評価をする場合は、同図の（ｂ）部分に示すように、ユーザはディスプレイ２８にバツ印Ｍ２を描くことができる。ユーザは、中間的な評価を行う場合、ディスプレイ２８に三角印を描いてもよい。
　図９はタッチセンサ４５（センサ部）に対する操作の例を示す図である。肯定的な評価をする場合、図９の（ａ）部分に示すように、ユーザは指やペン型デバイス等でタッチセンサ４５を矢印Ｆ２の方向に撫でることができる。一方、否定的な評価をする場合、同図の（ｂ）部分に示すように、指あるいは他のデバイスでタッチセンサ４５を矢印Ｆ３の方向にタップする（あるいは叩く）ことができる。
　ディスプレイ２８やタッチセンサ４５に対する操作に代えて、またはこれら操作に加えて、ユーザはプリンタ付きデジタルカメラ１０を振る（並進及び／または回転させる）ことができる。この場合、加速度センサ４６（センサ部）及び／または角速度センサ４７（センサ部）が操作（加速度及び／または角速度）を検知する。また、ユーザは上述の操作に代えて、または上述の操作に加えて、マイクロフォン９２（センサ部）を介して音声での操作を行ってもよい。例えば、「いいね」、「グッジョブ（ｇｏｏｄ ｊｏｂ）」、「もっと頑張れ」、「ダメじゃないかお前」等の感覚的な音声メッセージで操作を行うことができる。また、ユーザは「もっと明るい画像がいい」、「背景をぼかして欲しい」等の具体的な音声メッセージで操作を行ってもよい。なお、マイクロフォン９２を介した発言（音声入力）は音声による操作である。
　＜評価の決定＞
　評価決定部１００Ｄ（評価決定部）は、ディスプレイ２８等のセンサ部に対する操作を解析して（ステップＳ１４０：評価決定工程）、撮影された画像に対するユーザの評価を決定する（ステップＳ１５０：評価決定工程）。評価決定部１００Ｄは、解析結果が例えば「ユーザがディスプレイ２８に丸印を描いた」、「ユーザがタッチセンサ４５を撫でた」、「ユーザがタッチセンサ４５をタップした」、「ユーザがプリンタ付きデジタルカメラ１０を振り回した」であった場合、それぞれ「ほめる」、「注意する、あるいは叱る」、「叱る、あるいは怒る」をユーザの評価として決定することができる。「ほめる」は肯定的な評価の一例であり、「注意する、叱る、怒る」は否定的な評価の一例である。
　また、評価決定部１００Ｄは、解析結果が例えば「ユーザが『いいね』と発言した」、「ユーザが『ダメじゃないか、お前』と発言した」であった場合、それぞれ「ほめる」、「注意する、あるいは叱る」をユーザの評価として決定することができる。評価決定部１００Ｄは、このような感覚的な情報に代えて、またはこれに加えて具体的な情報に基づいて評価を決定してもよい。評価決定部１００Ｄは、例えば「私のお肌がもっとキレイに見えるようにしてちょうだい」、「ポートレイトだから、背景はもう少しぼかしてほしいな」の発言に基づく評価を「注意する」と決定することができる。
　ユーザの評価を決定するに際して、評価決定部１００Ｄ（評価決定部）は、操作の内容及び／または程度と評価とをあらかじめ関係付けておき、操作を解析する際にその関係付け（どのような操作がどのような評価に対応しているか）を参照することができる。評価決定部１００Ｄは、そのような関係付けの情報を、例えばカメラ制御部１００のＥＥＰＲＯＭ（非一時的記録媒体）に記憶することができる。評価決定部１００Ｄ（評価決定部）は、ユーザによる操作と評価の関係付けの編集を受け付けてもよい。
　以上で例示した操作に関し、評価決定部１００Ｄは、操作の回数や強度により評価の度合いを変化させてもよい。例えば、ユーザがタッチセンサ４５を撫でた回数が多いほど、あるいはプリンタ付きデジタルカメラ１０を強く振り回すほど（加速度及び／または角速度が大きいほど）評価（「ほめる」、「注意する、あるいは叱る」等）の度合いを高くすることができる。
　＜ブラケット撮影時の評価＞
　ブラケット撮影により複数の画像が撮影されている場合、表示制御部１００Ｃは、撮影された画像に対するユーザの評価を決定する際にそれら複数の画像をディスプレイ２８に表示させる。そして、評価決定部１００Ｄは表示された複数の画像に対するユーザの選択を受け付け、選択された画像について、上述した例と同様にユーザの評価を決定する。
　＜感情の決定＞
　感情決定部１００Ｅ（感情決定部）は、ユーザの評価に対する、擬人化したプリンタ付きデジタルカメラ１０（撮像装置）の感情を決定する（ステップＳ１６０：感情決定工程）。感情決定部１００Ｅは、評価が肯定的である場合は喜び及び／または楽しさを感情として決定し、評価が否定的である場合は悲しみ及び／または怒りを感情として決定することができる。感情決定部１００Ｅは、上述した評価の度合いが高いほど、強い感情を決定することができる。
　感情決定部１００Ｅは、ユーザが過去に「いいね」と評価した撮影条件をその後に否定した場合などに、「反抗する」を感情表現として決定してもよい。
　＜感情の表現＞
　感情表現部１００Ｆ（感情表現部）は、決定した感情を、１つ以上の出力を用いて疑似的に表現する（ステップＳ１７０：感情表現工程）。感情表現部１００Ｆは、表示、発光、音声、効果音、及び振動のうち少なくとも一つを出力として感情を表現することができる。感情表現部１００Ｆは、ディスプレイ２８、サブ表示領域２８ａ、サブディスプレイ２９に文字、図形、記号等を表示することにより感情を表現することができる。また、感情表現部１００Ｆは、ＬＥＤ４９の発光により感情を表現することができる。感情表現部１００Ｆは、ＬＥＤ４９を用いる場合に、発光させるＬＥＤ４９の個数や色を感情の内容及びその程度に応じて変化させてもよい。感情表現部１００Ｆは、赤色、緑色、及び青色のＬＥＤを組み合わせて発光させることにより、様々な色を表現することができる。ＬＥＤ４９を備える態様の場合、状態検知部１００ＨはＬＥＤ４９を用いてバッテリ残量やプリント可能枚数等を表現してもよい。また、感情表現部１００Ｆは、音声及び／または効果音をスピーカ９４から出力することにより、あるいはバイブレータ４８を振動させることにより感情を表現することができる。
　＜感情表現の例＞
　図１０は目（顔の一部）の表示を変化させることによる感情表現の例を示す図である。感情表現部１００Ｆは、これらの例をサブディスプレイ２９に表示することができる。図１０の（ａ）部分は電源オフ時（またはスリープ時）の状態（寝ている、あるいは休んでいる状態）を示し、感情表現部１００Ｆは、この状態で例えばタッチセンサ４５を撫でる操作がされた場合に、表示を同図の（ｂ）部分に示す状態（起きた状態）に変化させる。感情表現部１００Ｆは、同図の（ｂ）部分に示す表示を固定しておいてもよいし、間欠的にまばたきのような表示を行ってもよい。また、感情表現部１００Ｆは、図１０の（ｂ）部分に示す状態と（ｃ）部分に表示する状態とを切り換え、目が動いている状態を表現してもよい。同図の（ｄ）部分はユーザの操作により撮影が行われる場合の状態を示す例である。図１０の（ｅ）部分～（ｇ）部分は、それぞれ「嬉しい」あるいは「喜んでいる」状態、「悲しい」状態、「怒っている」状態を表現する表示の例である。
　図１０の（ａ）部分～（ｇ）部分は、目の表示を１つ用いる場合の例であるが、感情表現部１００Ｆは、同図の（ｈ）部分の例のように目の表示を複数用いた表示を行うことができる。この場合、感情表現部１００Ｆは、それぞれの目について図１０の（ａ）部分～（ｇ）部分のような表示を行うことができる。
　図１１は顔の表情を変化させることによる感情表現の例を示す図である。同図の（ａ）部分、（ｂ）部分はそれぞれ「嬉しい」あるいは「喜んでいる」状態、「悲しい」状態を表現する表示の例である。なお、感情表現部１００Ｆは、人間の顔ではなく動物や仮想的なキャラクタの顔を感情表現に用いてもよい。
　感情表現部１００Ｆは、感情表現用の表示装置（サブディスプレイ２９）ではなく、ディスプレイ２８の一部で感情表現を行ってもよい。例えば、図１２の変形例に示すようにディスプレイ２８の一部にサブ表示領域２８ａを設け、感情表現部１００Ｆがこのサブ表示領域２８ａで表示による感情表現（例えば、図１０，１１に示す例による）を行うことができる。表示による感情表現をディスプレイ２８の一部で行う場合、感情表現部１００Ｆは、サブ表示領域２８ａでの表示を常時継続してもよいし、感情の変化があった場合に一定時間表示を行い、その後、サブ表示領域２８ａでの表示を停止してもよい。なお、図１２の変形例ではサブ表示領域２８ａをディスプレイ２８の右上部分に設けているが、サブ表示領域２８ａを設ける位置はこの変形例に示す態様に限定されない。
　＜感情表現の態様の更新＞
　プリンタ付きデジタルカメラ１０は、ユーザの評価に応じて感情表現の態様（どのような出力を用いるか、どの程度の表現を行うか、等）を更新することができる。例えば、図１３のフローチャートに示すように、ステップＳ１７０で表現（出力）した感情に対するユーザ操作があった場合（ステップＳ１７２でＹＥＳ）に、評価決定部１００Ｄ（評価決定部）がセンサ部（ディスプレイ２８、タッチセンサ４５、マイクロフォン９２等）に対する操作を解析して感情表現に対するユーザの評価を決定する（ステップＳ１７４）。そして、感情表現部１００Ｆは、感情を表現する出力の数、組み合わせ、及び程度をユーザの評価に基づいて更新する（ステップＳ１７６）。感情表現部１００Ｆは、次に感情を表現する際は、更新の結果に基づいて感情を表現する。
　例えば、ユーザがプリンタ付きデジタルカメラ１０を褒める操作をした場合の感情表現が、「目の表示の変化」（例えば、図１０の（ｂ）部分に示す状態から同図の（ｅ）部分に示す状態に変化）と、スピーカ９４からの音声の出力と、バイブレータ４８による振動と、の３つを同時に行う態様であったと仮定する。この場合、ユーザによってはそのような表現を「過剰」と感じる可能性がある。その場合、ユーザはプリンタ付きデジタルカメラ１０に対し「ちょっと、うるさいよ」と話しかけることができ、これに対し評価決定部１００Ｄは、マイクロフォン９２（センサ部）を介した音声操作を解析してユーザの評価を決定する。感情表現部１００Ｆは、この決定に基づいて、例えば「バイブレータ４８による振動を行わない」（出力の数、組み合わせの更新）、「音声出力の音量を小さくする」（出力の程度の更新）のような変更を行うことができる。このような感情表現の態様の更新により、撮影条件だけでなく感情表現についてもユーザの好みに合わせた状態になっていくので、ユーザは自分のプリンタ付きデジタルカメラ１０（撮像装置）に愛着を持ちやすい。
　＜プリント指示に基づく撮影条件の学習＞
　図７のフローチャートに対するさらなる説明は以下の通りである。ユーザが画像のプリントを指示した場合、その画像はユーザにとって評価が高い、あるいは重要度が高いと考えることができる。そこで、画像がプリントされた場合（ステップＳ１８０でＹＥＳ）、プリントボタン３２ｂ等（センサ部）及びプリント制御部１００Ｉは画像のプリント指示を検知し、学習部１００Ｇ（学習部）は、プリント指示がされた画像についての撮影条件の優先度を上げる（ステップＳ１９０：学習工程）。例えば、人物の肌色を明るくする処理がなされた画像や人物の背景をぼかす処理がされた画像に対しプリントが指示された場合に、学習部１００Ｇは、次回以降の撮影において同様の撮影条件（シャッタースピード、絞り値、ホワイトバランス等）を用いる度合いを他の撮影条件よりも高めることができる。
　なお、プリンタ付きデジタルカメラ１０は、撮影画像に対するユーザの評価に基づいて感情表現を行う場合と同様に、プリントされた画像に対するユーザの評価に関わる操作に基づいて感情表現を行ってもよいし、また撮影画像に対する画像処理の条件を変更してもよい。
　＜ユーザの評価の反映＞
　学習部１００Ｇ（学習部）は、ユーザの評価を学習して、撮影制御部１００Ａが用いる撮影条件に反映する（ステップＳ２００：学習工程）。例えば、学習部１００Ｇは、評価に応じて撮影条件（シャッタースピード、絞り値、ホワイトバランスのうち少なくとも一つを含むものとするが、これらの条件には限定されない）の全部または一部の項目について値を変更することができる。例えば、「ポートレイトだから、背景はもう少しぼかしてほしいな」との発言に基づく評価に対しては、絞り値を解放側に変更することができる。
　学習においては、評価結果を「学習を促す信号」として扱うことができ、学習部１００Ｇは評価に応じて撮影条件の各パラメータを学習して、撮影条件の新たな内容（パラメータの値等）をカメラ制御部１００のＥＥＰＲＯＭに書き込む。学習部１００Ｇは、「いずれの撮影条件について肯定的な（あるいは否定的な）評価がなされたか、どの程度の評価がなされたか」を考慮して撮影条件への反映を行うことができ、また撮影条件の項目間で重みづけをしてもよい（例えば、ホワイトバランスについての評価を他の項目より重視する）。学習部１００Ｇは、機械学習のアルゴリズム（深層学習等）により動作するニューラルネットワークを学習に用いてもよい。撮影制御部１００Ａが複数の撮影モードを有する場合、学習部１００Ｇは、撮影条件に対する反映を撮影モードごとに行うことが好ましい。
　撮影制御部１００Ａは、上述した評価が反映されたＥＥＰＲＯＭを撮影の際に参照することにより、新たな撮影条件の下で撮影を行うことができる。なお、学習部１００Ｇは、撮影条件だけでなく画像処理についてもユーザの評価に基づく学習を行って画像処理条件に反映してもよい。例えば、「私のお肌がもっとキレイに見えるようにしてちょうだい」との発言に基づく評価に対して、人物が被写体である画像に対して、画像処理条件を変更して肌色を鮮やかに見せる画像処理を施すことができる。
　＜プリンタ付きデジタルカメラの状態に応じた感情表現＞
　図１４は、プリンタ付きデジタルカメラ１０の状態に応じた感情表現の処理の例を示すフローチャートである。図１４に示す例では、状態検知部１００Ｈ（状態検知部）は、バッテリ残容量、メモリ残容量、画像処理の負荷、及び内部温度のうち少なくとも１つを検知する（ステップＳ２００：状態検知工程）。状態検知部１００Ｈは、バッテリ９９の残容量、メモリ７２の残容量、アナログ信号処理部６８、デジタル信号処理部７０、カメラ制御部１００等における画像処理の負荷、及びプリンタ付きデジタルカメラ１０の内部温度を検知することができる。
　状態検知部１００Ｈは、メモリコントローラ７４、温度検出部５８等の出力に基づいてこれらの状態を検知することができる。そして、感情決定部１００Ｅ（感情決定部）は、検知した状態が感情表現を行う基準を満たすか否か判断し（ステップＳ２１０）、基準を満たす場合（ステップＳ２１０でＹＥＳ）は検知した状態に応じて、擬人化したプリンタ付きデジタルカメラ１０（撮像装置）の感情を決定する（ステップＳ２２０：感情決定工程）。感情決定部１００Ｅは、例えばバッテリ９９の残容量やメモリ７２の残容量が全容量の２０％以下になった場合に「感情表現を行う基準を満たす」と判断することができる。同様に、感情決定部１００Ｅは、画像処理の負荷や内部温度がしきい値を超えた場合に「感情表現を行う基準を満たす」と判断することができる。
　感情表現部１００Ｆ（感情表現部）は、ステップＳ２２０で決定された感情を表現する（ステップＳ２３０：感情表現工程）。この感情表現は、撮影画像の評価に基づく場合（図１０，１１及びこれらの図に関する説明を参照）と同様に、表示、発光、音声、効果音、及び振動のうち少なくとも一つを出力として行うことができる。感情表現部１００Ｆは、例えばバッテリ９９の残容量が少なくなった場合に、「パワーがなくなってきたよ！早く充電してくれないと、スリープしちゃうぞ！」との音声メッセージをスピーカ９４から出力し、合わせてバイブレータ４８による振動（「暴れる」あるいは「駄々をこねる」といった感情表現に対応させることができる）を行うことができる。感情表現部１００Ｆは、発光や表示による感情表現を行ってもよい。
　このような内部状態に基づく感情表現の場合も、撮影画像の場合（図１３及びその説明を参照）と同様に、ユーザの評価に基づいて感情表現の態様を更新することができる。具体的には、図１４のフローチャートに示すように、ステップＳ２３０で表現（出力）した感情に対するユーザ操作があった場合（ステップＳ２４０でＹＥＳ）に、評価決定部１００Ｄ（評価決定部）がセンサ部（ディスプレイ２８、タッチセンサ４５、マイクロフォン９２等）に対する操作を解析して感情表現に対するユーザの評価を決定する（ステップＳ２５０）。そして、感情表現部１００Ｆは、感情を表現する出力の数、組み合わせ、及び程度をユーザの評価に基づいて更新する（ステップＳ２６０）。感情表現部１００Ｆは、次に感情を表現する際は、更新の結果に基づいて感情を表現する。
　このような感情表現の態様の更新により、内部状態に基づく感情表現についてもユーザの好みに合わせた態様になっていくので、ユーザは自分のプリンタ付きデジタルカメラ１０（撮像装置）に愛着を持ちやすい。なお、このようなプリンタ付きデジタルカメラ１０の状態に応じた感情表現の処理は、起動中に随時行うことができる。
　上述した処理により、第１の実施形態に係るプリンタ付きデジタルカメラ１０のユーザは、自分の好みに合わせた画像を容易に撮影することができ、また自分のプリンタ付きデジタルカメラ１０（撮像装置）に愛着を持ちやすい。
　＜第２の実施形態＞
　第１の実施形態では、プリンタ付きデジタルカメラ１０について説明したが、本発明に係る撮像装置の構成はこれに限定されない。本発明のその他の撮像装置としては、例えば、内蔵型または外付け型のＰＣ用カメラ（ＰＣ：Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、あるいは、以下に説明するような、撮影機能を有する携帯端末装置とすることができる。
　本発明の撮像装置の一実施形態である携帯端末装置としては、例えば、携帯電話機やスマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、携帯型ゲーム機が挙げられる。以下の説明は、スマートフォンを例に挙げたものである。
　図１５は本発明の撮像装置の一実施形態であるスマートフォン５００（撮像装置）の外観を示す図であり、同図の（ａ）部分は正面図、（ｂ）部分は背面図である。図１５に示すスマートフォン５００は平板状の筐体５０２を有し、筐体５０２の一方の面に表示部としての表示パネル５２１（表示装置）と、入力部としての操作パネル５２２（操作部）とが一体となった表示入力部５２０を備えている。また、筐体５０２は、スピーカ５３１と、マイクロフォン５３２、操作部５４０（操作部）と、カメラ部５４１，５４２（撮像装置、撮影部）、ストロボ５４３とを備えている。なお、筐体５０２の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用してもよいし、折り畳み構造やスライド機構を有する構成を採用してもよい。
　図１６は、図１５に示すスマートフォン５００の構成を示すブロック図である。図１６に示すように、スマートフォン５００は、無線通信部５１１と、表示入力部５２０と、通話部５３０と、操作部５４０と、カメラ部５４１，５４２と、ストロボ５４３と、記憶部５５０と、外部入出力部５６０と、ＧＰＳ受信部５７０（ＧＰＳ：Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）と、モーションセンサ部５８０と、電源部５９０と、を備える。また、スマートフォン５００は、主制御部６０１（カメラ制御部、撮影制御部、通信制御部、表示制御部、評価決定部、感情決定部、感情表現部、学習部、状態検知部、プリント制御部、記憶制御部）を備える。また、スマートフォン５００は、主たる機能として、基地局装置と移動通信網とを介した移動無線通信を行う無線通信機能を備える。
　無線通信部５１１は、主制御部６０１の指示にしたがって、移動通信網に収容された基地局装置に対し無線通信を行い、斯かる無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Ｗｅｂデータやストリーミングデータなどの受信を行う。スマートフォン５００は、主制御部６０１及び無線通信部５１１を介して外部のプリンタに画像データを送信し、プリントさせることができる。また、スマートフォン５００は、第１の実施形態に係るプリンタ付きデジタルカメラ１０をプリンタとして使用してもよい。
　表示入力部５２０は、主制御部６０１の制御により、画像（静止画像及び／または動画像）や文字情報などを表示して視覚的にユーザに情報を伝達すると共に、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル５２１と、操作パネル５２２とを備える。
　表示パネル５２１においては、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）などが表示デバイスとして用いられる。操作パネル５２２は、表示パネル５２１の表示面上に表示される画像を視認可能に載置され、ユーザの指やペン等の導体によって操作される１または複数の座標を検出するデバイスである。斯かるデバイスをユーザの指やペン等の導体によって操作すると、操作パネル５２２は、操作に起因して発生する検出信号を主制御部６０１に出力する。次いで、主制御部６０１は、受信した検出信号に基づいて、表示パネル５２１上の操作位置（座標）を検出する。表示パネル５２１は、第１の実施形態に係るプリンタ付きデジタルカメラ１０におけるディスプレイ２８、サブディスプレイ２９、及びサブ表示領域２８ａに対応し、顔の表情または顔の一部（目の部分等）による感情表現（図１０～１２を参照）を行うことができる。同様に、操作パネル５２２はディスプレイ２８、タッチセンサ４５、及び操作部９８に対応し、ユーザは操作パネル５２２を介して撮影画像や感情表現に対する評価を入力する（図８、９を参照）ことができる。
　図１５に示すように、本発明の撮像装置の一実施形態として例示しているスマートフォン５００の表示パネル５２１と操作パネル５２２とは一体となって表示入力部５２０を構成しているが、操作パネル５２２が表示パネル５２１を完全に覆う配置となっている。斯かる配置を採用した場合、操作パネル５２２は、表示パネル５２１外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル５２２は、表示パネル５２１に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル５２１に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
　通話部５３０は、スピーカ５３１及びマイクロフォン５３２を備え、マイクロフォン５３２（センサ部）を通じて入力されたユーザの音声を主制御部６０１にて処理可能な音声データに変換して主制御部６０１に出力すること、無線通信部５１１あるいは外部入出力部５６０により受信された音声データを復号してスピーカ５３１から出力することができる。また、図１５に示すように、例えばスピーカ５３１を表示入力部５２０が設けられた面と同じ面に搭載し、マイクロフォン５３２を筐体５０２の側面に搭載することができる。スマートフォン５００は、主制御部６０１の制御により、スピーカ５３１（感情表現部）を用いて、擬人化したスマートフォン５００の感情を音声及び／または効果音により疑似的に表現（出力）することができる。また、スマートフォン５００は、マイクロフォン５３２（センサ部）を用いて、撮影された画像に対するユーザの評価を音声により検知することができる。
　操作部５４０は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるデバイスである。例えば図１５に示すように、操作部５４０は、スマートフォン５００の筐体５０２の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。
　記憶部５５０（記録装置）は、主制御部６０１の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶する。また、記憶部５５０は、スマートフォン内蔵の内部記憶部５５１と着脱自在な外部メモリスロットを有する外部記憶部５５２により構成される。記憶部５５０（状態検知部）は、内部記憶部５５１及び外部記憶部５５２の残容量（メモリ残容量）を検知する。なお、記憶部５５０を構成するそれぞれの内部記憶部５５１と外部記憶部５５２は、公知の記録媒体を用いて実現される。
　外部入出力部５６０は、スマートフォン５００に連結される全ての外部機器とのインターフェースの役割を果たす。スマートフォン５００は、外部入出力部５６０を介して他の外部機器に通信等により直接的または間接的に接続される。通信等の手段としては、例えば、ユニバーサルシリアルバス（ＵＳＢ：Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＩＥＥＥ１３９４、ネットワーク（例えば、インターネット、無線ＬＡＮ）を挙げることができる。この他、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）などを通信等の手段として挙げることができる。さらに、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅ Ｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）なども通信等の手段として挙げることができる。
　スマートフォン５００に連結される外部機器としては、例えば、有線／無線ヘッドセット、有線／無線外部充電器、有線／無線データポートを挙げることができる。また、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ ｃａｒｄ）やＳＩＭ(Ｓｕｂｓｃｒｉｂｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ)／ＵＩＭ(Ｕｓｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ)カードも外部機器として挙げることができる。また、オーディオ及びビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ及びビデオ機器、無線接続される外部オーディオ及びビデオ機器、有線／無線接続されるスマートフォン、有線／無線接続されるＰＤＡ、有線／無線接続されるパーソナルコンピュータ、イヤホンなどの外部機器も連結することができる。外部入出力部５６０は、このような外部機器から伝送を受けたデータをスマートフォン５００の内部の各構成要素に伝達することや、スマートフォン５００の内部のデータを外部機器に伝送することができる。
　モーションセンサ部５８０（センサ部）は、例えば、３軸の加速度センサや角速度センサ、あるいは傾斜センサなどを備え、主制御部６０１の指示にしたがって、スマートフォン５００の物理的な動きを検出する。スマートフォン５００の物理的な動きを検出することにより、スマートフォン５００の動く方向や加速度、姿勢が検出される。斯かる検出結果は、主制御部６０１に出力されるものである。モーションセンサ部５８０は、撮影された画像、及び／または感情表現の態様に対するユーザの評価に関わる操作（スマートフォン５００を振り回す等）を検知することができる。電源部５９０は、主制御部６０１の指示にしたがって、スマートフォン５００の各部に、バッテリ（不図示）に蓄えられる電力を供給する。また、電源部５９０（状態検知部）は、バッテリの残容量を検知する。
　主制御部６０１は、マイクロプロセッサを備え、記憶部５５０が記憶する制御プログラムや制御データにしたがって動作し、カメラ部５４１を含むスマートフォン５００の各部を統括して制御する。また、主制御部６０１は、無線通信部５１１を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
　また、主制御部６０１は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部５２０に表示する等の画像処理機能を備える。画像処理機能とは、主制御部６０１が、画像データを復号し、斯かる復号結果に画像処理を施して、画像を表示入力部５２０に表示する機能のことをいう。主制御部６０１（状態検知部）は、画像処理の負荷を検知する。また、主制御部６０１は、温度検出部（不図示）によりスマートフォン５００の内部温度を検知してもよい。
　カメラ部５４１，５４２（撮影部）は、ＣＭＯＳやＣＣＤなどの撮像素子を用いて電子撮影するデジタルカメラ（撮像装置）である。また、カメラ部５４１，５４２は、主制御部６０１の制御により、撮像によって得た画像データ（動画、静止画）を例えばＭＰＥＧやＪＰＥＧなどの圧縮した画像データに変換し、記憶部５５０に記録することや、外部入出力部５６０や無線通信部５１１を通じて出力することができる。図１５，１６に示すスマートフォン５００において、カメラ部５４１，５４２の一方を用いて撮影することもできるし、カメラ部５４１，５４２を同時に使用して撮影することもできる。カメラ部５４２を用いる場合はストロボ５４３を使用することができる。
　また、カメラ部５４１，５４２はスマートフォン５００の各種機能に利用することができる。例えば、スマートフォン５００は、カメラ部５４１，５４２で取得した画像を表示パネル５２１に表示することができる。また、スマートフォン５００は、操作パネル５２２の操作入力のひとつとして、カメラ部５４１，５４２の画像を利用することができる。また、スマートフォン５００は、ＧＰＳ受信部５７０がＧＰＳ衛星ＳＴ１，ＳＴ２，…，ＳＴｎからの測位情報に基づいて位置を検出する際に、カメラ部５４１，５４２からの画像を参照して位置を検出することもできる。さらには、スマートフォン５００は、カメラ部５４１，５４２からの画像を参照して、３軸の加速度センサを用いずに、あるいは、３軸の加速度センサと併用して、スマートフォン５００のカメラ部５４１の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、スマートフォン５００は、カメラ部５４１，５４２からの画像をアプリケーションソフトウェア内で利用することもできる。その他、スマートフォン５００は、静止画または動画の画像データにＧＰＳ受信部５７０により取得した位置情報、マイクロフォン５３２により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部５８０により取得した姿勢情報等を付加して記憶部５５０に記録することもできる。また、スマートフォン５００は、これらの静止画または動画の画像データを外部入出力部５６０や無線通信部５１１を通じて出力することもできる。
　上述した構成のスマートフォン５００においても、第１の実施形態に係るプリンタ付きデジタルカメラ１０と同様に本発明に係る制御方法の処理（撮影された画像に対するユーザの評価を決定、擬人化したスマートフォン５００の感情の決定、感情の疑似的な表現、評価の学習と撮影条件への反映、状態の検知等）を実行することができる。具体的には、第１の実施形態においてカメラ制御部１００（図６に示す各部）が実行する処理（図７，１３，１４に示すフローチャートの処理を含む）をスマートフォン５００ではカメラ部５４１，５４２及び主制御部６０１が実行できる。その他、プリンタ付きデジタルカメラ１０における操作部９８、メモリ７２及びメモリコントローラ７４、ディスプレイ２８、サブディスプレイ２９、及び表示コントローラ７６の機能は、スマートフォン５００において操作部５４０、記憶部５５０、操作パネル５２２、表示パネル５２１、及び主制御部６０１により実現することができる。
　これにより、第２の実施形態に係るスマートフォン５００においても、第１の実施形態に係るプリンタ付きデジタルカメラ１０と同様の効果（ユーザは自分の好みに合わせた画像を容易に撮影することができ、また撮像装置に愛着を持ちやすい等）を得ることができる。
　なお、スマートフォン５００等のデバイス（スマートフォン、タブレット端末等）に対し、その構成（撮像部、センサ部等）に応じて第１の実施形態に係るプリンタ付きデジタルカメラ１０と同様の処理（本発明に係る制御方法）を行わせるアプリケーションソフトウェア（プログラム）も、本発明の態様として挙げることができる。また、そのようなアプリケーションソフトウェアのコンピュータ読み取り可能なコードを記録した非一時的記録媒体も、本発明の態様として挙げることができる。この「コンピュータ」は、例えば、上述したＣＰＵ等のプロセッサ及び／またはその組み合わせを用いて実現することができる。また、斯かる非一時的記録媒体には、メモリカード等の記録媒体や、ネットワーク上のサーバ等のコンピュータで用いられる光磁気記録装置（ハードディスク、ブルーレイディスク（Ｂｌｕ－ｒａｙ　Ｄｉｓｋ：登録商標）、半導体メモリ等）が含まれる。
　以上で本発明の実施形態に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。
１０　　　　プリンタ付きデジタルカメラ
１２　　　　カメラボディ
１４　　　　撮影レンズ
１６　　　　レリーズボタン
１８　　　　録音ボタン
２０　　　　ストロボ発光窓
２２ａ　　　電源ボタン
２２ｂ　　　メニューボタン
２２ｃ　　　ＯＫボタン
２２ｄ　　　モード切替えボタン
２４　　　　マイク穴
２６　　　　スピーカ穴
２８　　　　ディスプレイ
２８ａ　　　サブ表示領域
２９　　　　サブディスプレイ
３０　　　　フィルム蓋カバー
３２ａ　　　ジョイスティック
３２ｂ　　　プリントボタン
３２ｃ　　　再生ボタン
３２ｄ　　　キャンセルボタン
３４　　　　フィルム排出口
４２　　　　インスタントフィルム
４２ａ　　　露光面
４２ｂ　　　観察面
４２ｃ　　　露光領域
４２ｄ　　　ポッド部
４２ｅ　　　現像処理液ポッド
４２ｆ　　　トラップ部
４２ｇ　　　吸収材
４２ｈ　　　観察領域
４２ｉ　　　枠
４５　　　　タッチセンサ
４６　　　　加速度センサ
４７　　　　角速度センサ
４８　　　　バイブレータ
４９　　　　ＬＥＤ
５２　　　　フィルム送出機構
５４　　　　フィルム搬送機構
５６　　　　プリントヘッド
５８　　　　温度検出部
６２　　　　レンズ駆動部
６４　　　　イメージセンサ
６６　　　　イメージセンサ駆動部
６８　　　　アナログ信号処理部
７０　　　　デジタル信号処理部
７２　　　　メモリ
７４　　　　メモリコントローラ
７６　　　　表示コントローラ
７８　　　　通信部
８０　　　　アンテナ
８２　　　　フィルム送出駆動部
８４　　　　フィルム搬送駆動部
８６　　　　ヘッド駆動部
８８　　　　ストロボ
９０　　　　ストロボ発光制御部
９２　　　　マイクロフォン
９４　　　　スピーカ
９６　　　　音声信号処理部
９７　　　　時計部
９８　　　　操作部
９９　　　　バッテリ
１００　　　カメラ制御部
１００Ａ　　撮影制御部
１００Ｂ　　通信制御部
１００Ｃ　　表示制御部
１００Ｄ　　評価決定部
１００Ｅ　　感情決定部
１００Ｆ　　感情表現部
１００Ｇ　　学習部
１００Ｈ　　状態検知部
１００Ｉ　　プリント制御部
１００Ｊ　　記憶制御部
５００　　　スマートフォン
５０２　　　筐体
５１１　　　無線通信部
５２０　　　表示入力部
５２１　　　表示パネル
５２２　　　操作パネル
５３０　　　通話部
５３１　　　スピーカ
５３２　　　マイクロフォン
５４０　　　操作部
５４１　　　カメラ部
５４２　　　カメラ部
５４３　　　ストロボ
５５０　　　記憶部
５５１　　　内部記憶部
５５２　　　外部記憶部
５６０　　　外部入出力部
５７０　　　ＧＰＳ受信部
５８０　　　モーションセンサ部
５９０　　　電源部
６０１　　　主制御部
Ｆ　　　　　矢印
Ｆ２　　　　矢印
Ｆ３　　　　矢印
Ｍ１　　　　丸印
Ｍ２　　　　バツ印
Ｓ１００～Ｓ２６０　プリンタ付きデジタルカメラにおける処理の各ステップ

Claims (18)

  1. 　撮影部に画像を撮影させる撮影制御部と、前記撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を有する撮像装置であって、
    　前記センサ部に対する操作を解析して、前記撮影された画像に対するユーザの評価を決定する評価決定部と、
    　前記評価に対する、擬人化した前記撮像装置の感情を決定する感情決定部と、
    　前記決定した感情を１つ以上の出力を用いて疑似的に表現する感情表現部と、
    　前記評価を学習して前記撮影制御部が用いる撮影条件に反映する学習部と、
    　を備える撮像装置。
  2. 　前記センサ部は、前記撮像装置に対する接触、前記撮像装置の加速度及び／または角速度、及び前記撮像装置に対する音声のうち少なくとも一つを検知する請求項１に記載の撮像装置。
  3. 　前記感情表現部は表示、発光、音声、効果音、及び振動のうち少なくとも一つを前記出力として前記感情を表現する請求項１または２に記載の撮像装置。
  4. 　前記感情表現部は顔の表情または顔の一部を変化させて表示することにより前記感情を表現する請求項１から３のいずれか１項に記載の撮像装置。
  5. 　前記感情決定部は、前記評価が肯定的である場合は喜び及び／または楽しさを前記感情として決定し、前記評価が否定的である場合は悲しみ及び／または怒りを前記感情として決定する請求項１から４のいずれか１項に記載の撮像装置。
  6. 　前記学習部は、前記評価が肯定的であった画像についての前記撮影条件の優先度を上げ、前記評価が否定的であった画像についての前記撮影条件の優先度を下げ、
    　前記撮影制御部は優先度の高い撮影条件により撮影させる請求項１から５のいずれか１項に記載の撮像装置。
  7. 　前記学習部は、前記評価に応じて前記撮影条件を変更する請求項１から６のいずれか１項に記載の撮像装置。
  8. 　前記撮影条件はシャッタースピード、絞り値、ホワイトバランスのうち少なくとも一つを含む請求項１から７のいずれか１項に記載の撮像装置。
  9. 　前記撮影制御部は、前記撮影部に対しそれぞれ異なる撮影条件で複数の画像をブラケット撮影させ、
    　前記評価決定部は前記複数の画像から選択された画像について前記ユーザの前記評価を決定する請求項１から８のいずれか１項に記載の撮像装置。
  10. 　前記センサ部は前記画像のプリント指示を検知し、
    　前記学習部は、前記プリント指示がされた画像についての前記撮影条件の優先度を上げる請求項１から９のいずれか１項に記載の撮像装置。
  11. 　前記撮影制御部は複数の撮影モードを有し、前記学習部は前記撮影条件に対する反映を撮影モードごとに行う請求項１から１０のいずれか１項に記載の撮像装置。
  12. 　前記評価決定部は前記センサ部に対する操作を解析して前記撮像装置の前記表現に対する前記ユーザの評価を決定し、
    　前記感情表現部は前記感情を表現する前記出力の数、組み合わせ、及び程度を前記表現に対する前記評価に基づいて更新し、前記更新の結果に基づいて前記感情を表現する請求項１から１１のいずれか１項に記載の撮像装置。
  13. 　前記撮像装置の状態を検知する状態検知部をさらに備え、
    　前記感情決定部は前記検知した状態に応じて前記感情を決定する請求項１から１２のいずれか１項に記載の撮像装置。
  14. 　前記状態検知部は前記撮像装置のバッテリ残容量、メモリ残容量、画像処理の負荷、及び内部温度のうち少なくとも１つを検知する請求項１３に記載の撮像装置。
  15. 　前記撮影された画像をプリントするプリンタを備える請求項１から１４のいずれか１項に記載の撮像装置。
  16. 　撮影部に画像を撮影させる撮影制御部と、前記撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を備える撮像装置の制御方法であって、
    　前記センサ部に対する操作を解析して、前記撮影された画像に対するユーザの評価を決定する評価決定工程と、
    　前記評価に対する、擬人化した前記撮像装置の感情を決定する感情決定工程と、
    　前記決定した感情を１つ以上の出力を用いて疑似的に表現する感情表現工程と、
    　前記評価を学習して前記撮影制御部が用いる撮影条件に反映する学習工程と、
    　を有する制御方法。
  17. 　撮影部に画像を撮影させる撮影制御部と、前記撮影された画像に対するユーザの評価に関わる操作を検知するセンサ部と、を有する撮像装置に請求項１６に記載の制御方法を実行させるプログラム。
  18. 　請求項１７に記載のプログラムのコンピュータ読み取り可能なコードが記録された非一時的記録媒体。
PCT/JP2020/009142 2019-03-28 2020-03-04 撮像装置、制御方法、プログラム、及び非一時的記録媒体 WO2020195642A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021508913A JP7090802B2 (ja) 2019-03-28 2020-03-04 撮像装置、制御方法、プログラム、及び非一時的記録媒体
JP2022095965A JP7344348B2 (ja) 2019-03-28 2022-06-14 撮像装置、制御方法、プログラム、及び非一時的記録媒体

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019063244 2019-03-28
JP2019-063244 2019-03-28

Publications (1)

Publication Number Publication Date
WO2020195642A1 true WO2020195642A1 (ja) 2020-10-01

Family

ID=72611326

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/009142 WO2020195642A1 (ja) 2019-03-28 2020-03-04 撮像装置、制御方法、プログラム、及び非一時的記録媒体

Country Status (2)

Country Link
JP (2) JP7090802B2 (ja)
WO (1) WO2020195642A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10254592A (ja) * 1997-03-13 1998-09-25 Nec Corp 感情生成装置およびその方法
CN105915801A (zh) * 2016-06-12 2016-08-31 北京光年无限科技有限公司 改善抓拍效果的自学习方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11254592A (ja) * 1998-03-11 1999-09-21 Risho Kogyo Co Ltd フェノール樹脂コンポジット積層板
JP5532718B2 (ja) 2009-07-21 2014-06-25 株式会社ニコン 撮像装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10254592A (ja) * 1997-03-13 1998-09-25 Nec Corp 感情生成装置およびその方法
CN105915801A (zh) * 2016-06-12 2016-08-31 北京光年无限科技有限公司 改善抓拍效果的自学习方法及装置

Also Published As

Publication number Publication date
JP2022128465A (ja) 2022-09-01
JP7344348B2 (ja) 2023-09-13
JP7090802B2 (ja) 2022-06-24
JPWO2020195642A1 (ja) 2021-12-23

Similar Documents

Publication Publication Date Title
CN105245640B (zh) 移动终端及其控制方法
US11941323B2 (en) Meme creation method and apparatus
US20220020165A1 (en) Method for Obtaining Depth Information and Electronic Device
CN110141857A (zh) 虚拟角色的面部显示方法、装置、设备及存储介质
CN107820011A (zh) 拍照方法和拍照装置
CN107592451A (zh) 一种多模式辅助拍照方法、装置及计算机可读存储介质
WO2020199984A1 (zh) 摄像头模组、移动终端及控制方法
WO2018098638A1 (zh) 一种电子设备拍摄方法和装置
JP7282871B2 (ja) プリンタ付きデジタルカメラ用システム
CN107133939A (zh) 一种照片合成方法、设备及计算机可读存储介质
CN110213480A (zh) 一种对焦方法及电子设备
CN107333056A (zh) 运动物体的图像处理方法、装置及计算机可读存储介质
KR20200077840A (ko) 사용자의 감정 상태에 기반하여 아바타를 제공하기 위한 전자 장치 및 그에 관한 방법
CN108063859A (zh) 一种自动拍照控制方法、终端及计算机存储介质
CN109151428A (zh) 自动白平衡处理方法、装置以及计算机存储介质
CN107465873A (zh) 一种图像信息的处理方法、设备及存储介质
WO2020195642A1 (ja) 撮像装置、制御方法、プログラム、及び非一時的記録媒体
JP6205927B2 (ja) 情報処理装置、および記憶媒体
CN110419210A (zh) 摄像装置、摄像方法及摄像程序
EP4250238A1 (en) Three-dimensional model reconstruction method, device, and storage medium
CN109361872A (zh) 双面屏辅助拍摄方法、终端和存储介质
US20240111470A1 (en) System, terminal, server, image display method, and program
US11842461B2 (en) Image processing device, image processing method, imaging device, and program
CN113749614B (zh) 皮肤检测方法和设备
KR102135377B1 (ko) 이동 단말기 및 그 제어방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20776738

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021508913

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20776738

Country of ref document: EP

Kind code of ref document: A1