WO2012108405A1 - 立体画像印画装置及び立体画像印画方法 - Google Patents

立体画像印画装置及び立体画像印画方法 Download PDF

Info

Publication number
WO2012108405A1
WO2012108405A1 PCT/JP2012/052676 JP2012052676W WO2012108405A1 WO 2012108405 A1 WO2012108405 A1 WO 2012108405A1 JP 2012052676 W JP2012052676 W JP 2012052676W WO 2012108405 A1 WO2012108405 A1 WO 2012108405A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
viewpoint
sheet
lenticular lens
information
Prior art date
Application number
PCT/JP2012/052676
Other languages
English (en)
French (fr)
Inventor
渡辺 幹夫
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Publication of WO2012108405A1 publication Critical patent/WO2012108405A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • G03B35/24Stereoscopic photography by simultaneous viewing using apertured or refractive resolving means on screens or between screen and eye
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B25/00Viewers, other than projection viewers, giving motion-picture effects by persistence of vision, e.g. zoetrope
    • G03B25/02Viewers, other than projection viewers, giving motion-picture effects by persistence of vision, e.g. zoetrope with interposed lenticular or line screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking

Definitions

  • the present invention relates to a stereoscopic image printing apparatus and a stereoscopic image printing method capable of forming a stereoscopic image suitable for the shooting distance of an input image on a lenticular lens sheet.
  • Patent Document 1 discloses that the user selects the type of the lenticular sheet or selects it according to the lens resolution.
  • Patent Document 2 discloses a technique for converting a stereo image into multiple viewpoints based on a parallax map.
  • Patent Document 1 only selects data suitable for the type of medium (lenticular lens sheet). For this reason, it is impossible to select a medium suitable for the shooting distance of the input stereoscopic image. In addition, it is impossible to confirm in advance what the image will look like after printing.
  • Patent Document 2 discloses a technique for automatically performing multi-viewpointing. However, there is no disclosure about forming a stereoscopic image suitable for the shooting distance of the input image on the lenticular lens sheet.
  • the present invention has been made in view of such circumstances, and an object thereof is to provide a stereoscopic image printing apparatus and a stereoscopic image printing method capable of forming a stereoscopic image suitable for the shooting distance of an input image on a lenticular lens sheet.
  • one aspect of the present invention provides an image input unit that inputs a multi-viewpoint image of two or more viewpoints, an information acquisition unit that acquires information on the shooting distance of the input multi-viewpoint image, Based on information on the shooting distance acquired by the information acquisition unit, a viewpoint number determination unit that determines the number of viewpoints of a stereoscopic image to be printed on the lenticular lens sheet, and a multi-viewpoint image input via the image input unit
  • a comparison unit that compares the number of viewpoints with the number of viewpoints determined by the viewpoint number determination unit, and the number of viewpoints of the multi-viewpoint image input via the image input unit is the number of viewpoints of the stereoscopic image to be printed If there are fewer, the viewpoint image generation means for generating a shortage of viewpoint images from the input multi-viewpoint image, and the input multi-viewpoint image and the viewpoint image generation means
  • the viewpoint image generation means for generating a shortage of viewpoint images from the input multi-viewpoint image
  • the number of viewpoints of the stereoscopic image to be printed is determined according to the shooting distance. If the number of viewpoints of the input multi-viewpoint image is smaller than the number of viewpoints of the stereoscopic image to be printed, a shortage of viewpoint images is generated, and the stereoscopic view including the input multi-viewpoint image and the generated viewpoint image is generated. An image is printed on the lenticular lens sheet. Therefore, the observer can observe a stereoscopic image printed with an appropriate number of viewpoints according to the shooting distance.
  • viewpoint images are generated so as to be interpolated between the viewpoint images constituting the input multi-viewpoint image, and extrapolated between the viewpoint images constituting the input multi-viewpoint image. And so on.
  • the information acquisition unit acquires shooting mode information indicating short-distance shooting, or when the information acquisition unit acquires shooting distance information corresponding to short-distance shooting,
  • the number of viewpoints of the stereoscopic image to be printed may be increased as compared to the case where information on the shooting distance other than the mode or the close-up shooting is acquired.
  • the above aspect is sheet selection means for selecting one lenticular lens sheet from a plurality of sheet type lenticular lens sheets having different lens intervals, and one lenticular lens based on the number of viewpoints determined by the viewpoint number determination means.
  • a sheet selection unit that selects a lens sheet may be provided. That is, the observer can observe a stereoscopic image printed with an appropriate lens interval and the number of viewpoints according to the shooting distance.
  • an image input unit that inputs a multi-viewpoint image of two or more viewpoints, an information acquisition unit that acquires information related to a shooting distance of the input multi-viewpoint image, and a plurality of lenses having different lens intervals.
  • Sheet selecting means for selecting one lenticular lens sheet from the lenticular lens sheets of the sheet type, and a sheet selecting means for selecting one lenticular lens sheet based on information on the photographing distance acquired by the information acquiring means;
  • a stereoscopic image printing apparatus comprising printing means for printing a stereoscopic image including the input multi-viewpoint image on a lenticular lens sheet selected by the sheet selection means.
  • a lenticular lens sheet corresponding to the shooting distance is selected from a plurality of sheet type lenticular lens sheets having different lens intervals, a lenticular lens sheet suitable for the input multi-viewpoint image is selected.
  • the information acquisition unit acquires the shooting mode information indicating the short-distance shooting, or when the information acquisition unit acquires the information of the shooting distance corresponding to the short-distance shooting, Alternatively, a sheet-type lenticular lens sheet having a larger lens interval than that obtained when information on the shooting distance other than the short-distance shooting may be selected.
  • viewpoint image generation means for generating insufficient viewpoint images from the multi-viewpoint images.
  • viewpoint images are generated so as to be interpolated in the range between the viewpoint images constituting the input stereoscopic image, and outside the range between the viewpoint images constituting the input stereoscopic image. In some cases, it is generated to be inserted.
  • the sheet selection unit when the information acquisition unit acquires information about a high magnification that is equal to or higher than a predetermined magnification, the sheet selection unit has a lens interval that is different from that obtained when information about other shooting magnifications is acquired.
  • a large sheet type lenticular lens sheet may be selected.
  • the image input unit acquires an image file in which auxiliary information is recorded together with the multi-viewpoint image
  • the information acquisition unit acquires information on the shooting distance from the auxiliary information of the image file. It may be.
  • the information regarding the shooting distance acquired by the information acquisition unit from the attached information of the image file may be information on the shooting mode or information on the actually measured shooting distance.
  • the printing means prints a stereoscopic image on the lenticular lens sheet at the highest resolution of the printing means, and prints a stereoscopic image having the number of viewpoints proportional to the lens interval of the lenticular lens sheet. You may do it.
  • the display means for displaying a planar image and the resolution of each viewpoint image of the stereoscopic image printed on the lenticular lens sheet according to the lens interval of the lenticular lens sheet are converted, or each viewpoint image is distorted.
  • the viewpoint image of the virtual viewpoint from the adjacent two viewpoint images among the three-dimensional images of the number n of viewpoints (n is an integer of 3 or more) displayed on the display unit and the lenticular lens sheet.
  • Image processing means for converting the resolution of each viewpoint image in a stereoscopic image for display composed of the two viewpoint images and the viewpoint image of the generated virtual viewpoint, or for performing distortion processing on each viewpoint image; You may provide the display control means to display a moving image by displaying each viewpoint image processed by the said image processing means on the said display means in order and repeatedly.
  • the image processing unit is configured to display each viewpoint image so that a peak portion of the lenticular lens of each viewpoint image is bright and a valley portion is dark according to the lens interval and the lens shape of the lenticular lens sheet. Image processing may be performed.
  • the image processing means may decrease the resolution of each viewpoint image as the lens interval of the lenticular lens sheet increases.
  • the display control unit can set the display size of each viewpoint image displayed on the display unit to the same size as the print size of the stereoscopic image printed on the lenticular lens sheet.
  • the above aspect further includes type changing means for manually changing the sheet type of the lenticular lens sheet, and the printing means changes the lenticular lens after the change when the sheet type of the lenticular lens sheet is changed by the type changing means.
  • the stereoscopic image may be printed on a lens sheet.
  • a stereoscopic image suitable for the shooting distance of the input image can be formed on the lenticular lens sheet.
  • Explanatory drawing used for explanation of lens sheet selection according to shooting distance A flowchart showing an exemplary flow of a stereoscopic image printing process Explanatory drawing which shows an example of the information regarding shooting distance Explanatory drawing used for explanation of lens interval and multi-viewpoint Explanatory drawing used for explanation of lens interval and multi-viewpoint
  • FIG. 1 is a block diagram illustrating an overall configuration of an example of a stereoscopic image printing apparatus according to the first embodiment.
  • a unit 26 includes an image reading unit 12, an attached information acquisition unit 14, an image analysis unit 16, an angle of view correction unit 18, a multi-viewpoint conversion unit 20, a sheet selection unit 22, a print image conversion unit 24, and a display.
  • a unit 26 includes an image reading unit 12, an attached information acquisition unit 14, an image analysis unit 16, an angle of view correction unit 18, a multi-viewpoint conversion unit 20, a sheet selection unit 22, a print image conversion unit 24, and a display.
  • the image reading unit 12 inputs a stereoscopic image consisting of multi-viewpoint images.
  • a multi-view image is an image (a plurality of viewpoint images) viewed from a plurality of viewpoints of two or more viewpoints, and may be a plurality of captured images captured from a plurality of real viewpoints, or a plurality of images viewed from a plurality of virtual viewpoints. Or a combination of a captured image and a virtual image.
  • the image reading unit 12 of this example acquires an image file in which attached information is recorded together with a stereoscopic image by reading it from a recording medium such as a memory card.
  • the acquisition mode of the image file is not limited, and may be acquired by communication, for example.
  • the attached information acquisition unit 14 acquires information regarding the shooting distance of the stereoscopic image input via the image reading unit 12.
  • the information regarding the shooting distance includes, for example, information on shooting modes, information on actually measured shooting distances, and the like.
  • the image analysis unit 16 analyzes the stereoscopic image input via the image reading unit 12.
  • the image analysis unit 16 in this example corresponds to the feature in which the left end viewpoint image (left eye image) and the right end viewpoint image (right eye image) of the stereoscopic image input via the image reading unit 12 match. A point is detected, and the amount of parallax between the left end viewpoint image and the right end viewpoint image is calculated from the detected corresponding point.
  • the angle-of-view correcting unit 18 corrects the angle of view of the stereoscopic image input via the image reading unit 12.
  • the angle-of-view correction unit 18 determines the number of viewpoints of the three-dimensional image for printing to be printed on the lenticular lens sheet (hereinafter also simply referred to as “lens sheet”).
  • the number of viewpoints of the angle of view correction unit 18 is determined based on the information regarding the shooting distance acquired by the attached information acquisition unit 14. Secondly, when the sheet type of the lens sheet is selected based on the information regarding the shooting distance by the sheet selection unit 22 described later, the lens sheet is changed according to the lens interval of the sheet type selected by the sheet selection unit 22. The number of viewpoints of the three-dimensional image for printing to be printed is determined. That is, the number of viewpoints of the viewpoint image for printing is indirectly determined based on the information regarding the shooting distance.
  • the multi-viewpoint conversion unit 20 compares the number of viewpoints of the stereoscopic image (multi-viewpoint image) input via the image reading unit 12 with the number of viewpoints of the print viewpoint image determined by the angle-of-view correction unit 18. When the number of viewpoints of the input stereoscopic image is smaller, insufficient viewpoint images (printing supplementary viewpoint images) are generated from the input stereoscopic image. Note that the shortage of viewpoint images is generated so as to be interpolated in the range between the viewpoint images constituting the input stereoscopic image, and outside the range between the viewpoint images constituting the input stereoscopic image. In some cases, it is generated to be inserted.
  • the sheet selection unit 22 selects one lens sheet from a plurality of lens types having different lens intervals based on the information regarding the shooting distance acquired by the attached information acquisition unit 14.
  • the view angle correction unit 18 determines the number of viewpoints of the print viewpoint image based on the information about the shooting distance. One lens sheet is selected based on this.
  • the sheet selection unit 22 selects a lens sheet having a lens interval proportional to the number of viewpoints.
  • a lens sheet having a lens interval corresponding to the number of viewpoints and the print resolution is selected.
  • the lens sheet of the sheet type A shown in FIG. 2A is selected in the case of a stereoscopic image for short-distance shooting, and the lens sheet of the sheet type B shown in FIG. Select.
  • the lens interval (pitch) is 50 LPI (Line Per Inch) and 8 viewpoints.
  • the lens interval (pitch) is 100 LPI and 4 viewpoints.
  • the sheet selection unit 22 displays information on other shooting magnifications. A sheet type lens sheet having a larger lens interval than that obtained is selected.
  • the display unit 26 displays a planar image.
  • the display conversion unit 28 (image processing means) converts the resolution of each print viewpoint image of the three-dimensional image to be printed on the lens sheet according to the lens interval of the lens sheet selected by the sheet selection unit 22, A stereoscopic image for display is generated.
  • the display conversion unit 28 decreases the resolution of each print viewpoint image as the lens interval of the lens sheet selected by the sheet selection unit 22 increases.
  • the display conversion unit 28 (image processing means) performs distortion processing on each viewpoint image (display viewpoint image) of the stereoscopic image for display according to the lens interval of the lens sheet selected by the sheet selection unit 22. Do.
  • the display conversion unit 28 (image processing means), for example, has a portion printed on the lenticular lens crest of each display viewpoint image according to the lens interval and lens shape of the lens sheet selected by the sheet selection unit 22. Image processing is performed on the display viewpoint image so that the bright portion and the portion printed in the valley become darker.
  • the display control unit 30 causes the display unit 26 to repeatedly and sequentially display the display viewpoint images (confirmation images) generated from the respective printing viewpoint images by the image processing of the display conversion unit 28 (image processing means).
  • the moving image is displayed on the display unit 26.
  • the display control unit 30 sets the display size of each display viewpoint image to the same size as the print size of the three-dimensional image for printing printed on the lens sheet.
  • the printing unit 32 prints a stereoscopic image for printing including the multi-viewpoint image input by the image reading unit 12 on the lens sheet selected by the sheet selection unit 22.
  • the print unit 32 of the present embodiment and the multi-viewpoint image input by the image reading unit 12 are converted.
  • the three-dimensional image for printing composed of the supplementary viewpoint image for printing generated by the unit 20 is printed on the lens sheet.
  • the printing unit 32 of this example prints a three-dimensional image for printing on the selected lens sheet at the highest resolution of the printing unit 32, and the number of viewpoints for printing is proportional to the lens interval of the selected lens sheet. Print an image.
  • the print type setting unit 36 (type changing unit) manually changes the sheet type of the lens sheet selected by the sheet selecting unit 22.
  • the printing unit 32 prints a three-dimensional image for printing on the changed lens sheet.
  • FIG. 3 is a flowchart showing a flow of an example of the stereoscopic image printing process in the first embodiment.
  • the image reading unit 12 acquires an image file in which attached information is recorded together with a stereoscopic image composed of multi-viewpoint images by reading it from a recording medium or the like (step S2). That is, a stereoscopic image composed of multi-viewpoint images is input.
  • the accessory information acquisition unit 14 acquires the accessory information (header part) from the image file (step S4). That is, information about the shooting distance of the stereoscopic image is acquired from the attached information of the image file.
  • the information regarding the shooting distance includes at least one of shooting mode information (shooting mode information) and measured shooting distance information (shooting distance information).
  • shooting mode information is acquired from the image file 50 as information regarding the shooting distance of the header 1 and the header 2.
  • shooting mode information is “0”, short-distance shooting, “1” is portrait shooting, and “2” is long-distance shooting.
  • FIG. 4 shows the case where only the shooting mode information is described in the header part (attached information) as the information regarding the shooting distance, but the measured shooting distance information (subject distance information) is described in the header part. In this case, information on the actually measured shooting distance is acquired from the header portion.
  • one lens sheet is selected from a plurality of lens sheets having different lens intervals based on the information regarding the photographing distance acquired in step S4 (steps S6 to S14).
  • step S6 it is determined whether or not shooting mode information indicating short-distance (macro) shooting has been acquired.
  • step S8 it is determined whether the shooting distance information is smaller (closer) than the threshold value L1.
  • step S6 When shooting mode information indicating short-distance (macro) shooting is acquired in step S6, or when shooting distance information is smaller than L1 in step S8 (that is, shooting distance information corresponding to short-distance shooting is acquired).
  • a sheet type A lens sheet having a larger lens interval (pitch) than in other shooting modes (or when information on shooting distances other than shooting distances corresponding to short-distance shooting is acquired).
  • Select step S12
  • the close-up shooting mode is acquired.
  • a lens sheet of the sheet type B having a smaller lens interval (pitch) than that in the case where the shooting distance information corresponding to the short-distance shooting is acquired is selected (step S14).
  • the number of viewpoints of the stereoscopic image for printing is set to “8” (step S16), and when a lens sheet of sheet type B is selected, printing is performed.
  • the number of viewpoints of the stereoscopic image for use is set to “4” (step S18). That is, the number of viewpoints of the stereoscopic image for printing is set to a value proportional to the lens interval of the lens sheet.
  • the number of viewpoints of the stereoscopic image for printing is determined based on the lens interval of the selected lens sheet.
  • the reverse is also possible. That is, first, the number of viewpoints of the stereoscopic image for printing may be determined based on the information regarding the shooting distance, and then the sheet may be selected based on the determined number of viewpoints.
  • the multi-viewpoint conversion unit 20 multi-views the stereoscopic image input in step S2.
  • an insufficient viewpoint image (for printing) from the input stereoscopic image. (Supplementary viewpoint image) is generated (step S20).
  • a supplementary viewpoint image for printing of two viewpoints is generated by interpolating (interpolating or extrapolating) the two insufficient viewpoints, and a total of four A stereoscopic image for viewpoint printing is obtained.
  • a 6-view supplementary viewpoint image for printing is generated by interpolating the deficient 6 viewpoints to obtain a total of 8-viewpoint image stereoscopic images.
  • a display viewpoint image (confirmation image) is generated by the display control unit 30 and displayed on the display unit 26 (step S22). It is determined whether or not the operator's confirmation input has been received by the operation unit 34 (step S24). When the sheet type of the selected lens sheet is manually changed, the lens unit sheet type is received by the operation unit 34. The sheet type is changed (step S26), and the process proceeds to step S22.
  • step S24 If an operator's confirmation input is received in step S24, a three-dimensional image for printing composed of multi-viewpoint images is printed on the lens sheet selected in steps S6 to S14 (step S28). That is, if the sheet type has not been changed in step S26, a three-dimensional image for printing is printed on the lens sheet selected by the sheet selection unit 22 in steps S6 to S14, and the sheet type is manually changed in step S26. Then, the three-dimensional image for printing is printed on the lens sheet after the change.
  • FIG. 6 is a flowchart illustrating an example of a confirmation image generation / display process (step S22 in FIG. 3) according to the first embodiment.
  • the confirmation image is an image displayed on the display unit 26 in order to confirm the appearance of the stereoscopic image on the lens sheet in a simulated manner.
  • the confirmation image is generated by converting the stereoscopic image for printing into a moving image composed of a planar image by image processing in the display conversion unit 28.
  • This conversion process includes a moving-image process for confirming a multi-viewpoint image constituting a three-dimensional image for printing by planar display and a simulated conversion process for simulating a difference in appearance due to different sheet types.
  • the display conversion unit 28 acquires the number of viewpoints of the three-dimensional image for printing set in steps S16 to S18 based on the sheet type (step S30).
  • the number of viewpoints is “4” for sheet type B, and the number of viewpoints is “8” for sheet type A.
  • the display control unit 30 sets the display time t of each display viewpoint image (step S32). If the display repetition period during animation is 240 msec, the display time t is set to 60 msec for 4 viewpoints, and the display time t is set to 30 msec for 8 viewpoints. As a result, in the sheet type A with a large lens interval, the display time of each display viewpoint image is made shorter than in the sheet type B with a small lens interval, and the display time required for displaying the display viewpoint images for all viewpoints is the same. To do.
  • the display conversion unit 28 performs predetermined image processing on the print viewpoint image to generate a display viewpoint image.
  • distortion processing is performed on each print viewpoint image (step S34).
  • P (x, y) is a pixel at coordinates (x, y) of the display image and M (n, x, y) is a transmittance mask for each sheet type n
  • P (x, y) P ( x, y) ⁇ M (n, x, y) is calculated. For example, as shown in FIG.
  • the portion of the lenticular lens peak of each viewpoint image Image processing is performed so that the brighter the valley, the darker the area.
  • Image processing transparency conversion
  • image processing is performed to display a stereoscopic image on the display unit 26 in a simulated manner through the lenticular lens.
  • the display control unit 30 displays each of the viewpoint images (viewpoints 1 to n) subjected to the distortion processing on the display unit 26 in order and repeatedly to display a moving image (step S36).
  • the display control unit 30 displays each of the viewpoint images (viewpoints 1 to n) subjected to the distortion processing on the display unit 26 in order and repeatedly to display a moving image (step S36).
  • the display control unit 30 displays each of the viewpoint images (viewpoints 1 to n) subjected to the distortion processing on the display unit 26 in order and repeatedly to display a moving image (step S36).
  • the display control unit 30 displays each of the viewpoint images (viewpoints 1 to n) subjected to the distortion processing on the display unit 26 in order and repeatedly to display a moving image (step S36).
  • the display control unit 30 displays each of the viewpoint images (viewpoints 1 to n) subjected to the distortion processing on the display unit 26 in order and repeatedly to display a moving image (step S36).
  • FIG. 8 is a flowchart showing another example of confirmation image generation / display processing (step S22 in FIG. 3) in the first embodiment.
  • Steps S40 to S42 are the same as steps S30 to S32 in FIG.
  • the display conversion unit 28 performs predetermined image processing on the print viewpoint image to generate a display viewpoint image.
  • the resolution of the multi-viewpoint image to be printed on the lens sheet is converted according to the lens interval of the lens sheet selected in steps S6 to S14 (step S44). For example, the number of horizontal pixels is set to 1280 for four viewpoints and 640 for the eight viewpoints. Thereby, when the sheet type A with a large lens interval is selected, the resolution of each viewpoint image is reduced as compared with the case where the sheet type B with a small lens interval is selected.
  • the display conversion unit 28 enlarges each viewpoint image according to the display size of the display unit 26 (step S46). That is, each viewpoint image is resized so that the display size on the display unit 26 is the same.
  • the display conversion unit 28 resizes the display size of each viewpoint image displayed on the display unit 26 to the same size as the print size (print output size) of the stereoscopic image printed on the lens sheet. It is displayed (step S48). That is, the multi-viewpoint image is resized so that the display size of the stereoscopic image displayed on the display unit 26 is the same as the size of the stereoscopic image printed on the lens sheet. As a result, a display viewpoint image is generated. Then, the display control unit 30 causes each display viewpoint image to be displayed on the display unit 26 in order and repeatedly to display a moving image.
  • the present invention is not limited to such a case.
  • the overall configuration of the stereoscopic image printing apparatus according to the present embodiment includes the same components as those of the stereoscopic image printing apparatus according to the first embodiment described with reference to FIG.
  • the display conversion unit 28 according to the present embodiment includes two adjacent two-dimensional images for printing of a plurality of viewpoints n (n is an integer of 3 or more) printed on the lens sheet selected by the sheet selection unit 22.
  • a means for generating a viewpoint image of a virtual viewpoint from two viewpoint images for viewpoint printing (two viewpoint images of one viewpoint difference) is provided.
  • the display conversion unit 28 of the present embodiment performs image processing for converting or distorting the resolution of a multi-viewpoint image including the two-viewpoint viewpoint image for printing and the generated viewpoint image for the virtual viewpoint.
  • a stereoscopic image for display is generated.
  • the display control unit 30 displays a moving image by causing the display unit 26 to sequentially and repeatedly display each display viewpoint image that has been subjected to image processing and generation by the display conversion unit 28. As described above, by inserting the viewpoint image of the virtual viewpoint, the motion of the moving image observed by the user becomes smooth.
  • FIG. 9 is a flowchart showing an example of a display stereoscopic image (confirmation image) generation / display process (step S22 in FIG. 3) in the second embodiment.
  • Step S50 is the same as step S30 in FIG.
  • the display conversion unit 28 generates a virtual viewpoint image from two adjacent viewpoint images for printing among the three-dimensional images for printing printed on the lens sheet selected in steps S6 to S14 in FIG. (Step S52).
  • an additional 56 viewpoint virtual viewpoint images are generated from the 8 viewpoint viewpoint images for printing on the lens sheet.
  • 8 viewpoint virtual viewpoint images for printing, for example, the first viewpoint and the second viewpoint, the second viewpoint and the third viewpoint,..., The seventh viewpoint and the eighth viewpoint. From each set of images (a total of 7 sets), 8 viewpoints are generated for each viewpoint. As a result, a total of 64 viewpoint images for display can be generated.
  • an additional 28 viewpoint virtual viewpoint images are generated from the 4 viewpoint printing stereoscopic images printed on the lens sheet.
  • viewpoint images of the first viewpoint and the second viewpoint, the second viewpoint and the third viewpoint, and the third viewpoint and the fourth viewpoint are displayed. From each set (total 3 sets), virtual viewpoint images are generated for each of the eight viewpoints, and two viewpoints are extrapolated from the viewpoint images of the first viewpoint and the fourth viewpoint. Thereby, a total of 32 viewpoint images for display can be generated.
  • the method of inserting viewpoint images is not limited to the above.
  • Step S56 is the same as step S34 in FIG.
  • a display stereoscopic image including a viewpoint image for printing and a viewpoint image of a virtual viewpoint generated from the viewpoint image for printing according to the lens interval (for example, 50 LPI). Apply. Thereby, a stereoscopic image for display is generated.
  • each viewpoint image (viewpoints 1 to n) subjected to the image processing in step S56 is displayed on the display unit 26 in order and repeatedly to display a moving image (step S58).
  • the first viewpoint (eight virtual viewpoint images generated from the first viewpoint and the second viewpoint), the second viewpoint, and (the second viewpoint) And 8 virtual viewpoint images generated from the third viewpoint), 3rd viewpoint, (8 virtual viewpoint images generated from the 3rd viewpoint and 4th viewpoint), 4th viewpoint, (generated from 4th viewpoint and 5th viewpoint) 8 virtual viewpoint images), 5th viewpoint, (8 virtual viewpoint images generated from 5th viewpoint and 6th viewpoint), 6th viewpoint, 8 virtual viewpoint images generated from 6th viewpoint and 7th viewpoint ), 7th viewpoint, (8 virtual viewpoint images generated from the 7th viewpoint and 8th viewpoint), displayed in the order of the 8th viewpoint, and then displayed so as to be folded back in the reverse order to the above.
  • FIG. 9 illustrates an example in which distortion processing is performed according to the lens interval
  • the present invention is not limited to such a case.
  • the resolution of the multi-viewpoint image may be converted according to the lens interval.
  • a mode for selecting a lens sheet there are various modes for selecting a lens sheet.
  • a mode in which the lens sheet of the selected sheet type is directly selected for example, a mode in which a container such as a cassette that stores a lens sheet of the selected sheet type is selected, a printer that prints a lens sheet of the selected sheet type (for example, the printing means may be selected.
  • the number of viewpoints of the input stereoscopic image is not limited to two viewpoints.
  • the viewpoint images for printing are generated by interpolation
  • the number of viewpoint images closest to the number of viewpoints of the printing viewpoint image is generated.
  • select the adjacent viewpoint images corresponding to the number of viewpoints from the viewpoint images obtained by interpolation are to do. Thereby, it is possible to obtain printing viewpoint images for the number of viewpoints.
  • the following method invention is provided in addition to the device invention described in the column of means for solving the problems.
  • an information acquisition step of acquiring information on shooting distances of the input multi-viewpoint images, and information on shooting distances acquired in the information acquisition step The number of viewpoints for determining the number of viewpoints of the stereoscopic image to be printed on the lenticular lens sheet, the number of viewpoints of the multi-viewpoint image input in the image input step, and the view determined in the viewpoint number determination step.
  • a stereoscopic image consisting of the input multi-viewpoint image and the viewpoint image generated in the viewpoint image generation step is marked on the lenticular lens sheet.
  • the first method invention when shooting mode information indicating short-distance shooting is acquired in the information acquisition step, or when shooting distance information corresponding to short-distance shooting is acquired, another shooting is performed.
  • the number of viewpoints of the stereoscopic image to be printed is increased as compared with the case where information on the shooting distance other than the mode or the close-up shooting is acquired.
  • One aspect of the first method invention is a sheet selection step of selecting one lenticular lens sheet from a plurality of sheet type lenticular lens sheets having different lens intervals, and the number of viewpoints determined by the viewpoint number determination step.
  • an image input step for inputting multi-viewpoint images of two or more viewpoints an information acquisition step for acquiring information on the shooting distance of the input multi-viewpoint images, and a plurality of sheet type lenticular lens sheets having different lens intervals
  • the sheet selecting step acquires shooting distance information corresponding to short-distance shooting when acquiring shooting mode information indicating short-distance shooting in the information acquiring step.
  • a sheet type lenticular lens sheet having a larger lens interval than that in the case of acquiring information on other shooting modes or shooting distances other than short-distance shooting is selected.
  • One aspect of the second method invention is that when the number of viewpoints of the multi-viewpoint image input in the image input step is smaller than the number of viewpoints of the stereoscopic image to be printed on the selected lenticular lens sheet.
  • the sheet selection step information on other shooting magnifications is obtained when information on a shooting magnification of a high magnification equal to or higher than a predetermined magnification is acquired in the information acquisition step.
  • a sheet type lenticular lens sheet having a larger lens interval than that obtained when the lens is acquired is selected.
  • the image input step acquires an image file in which auxiliary information is recorded together with the multi-viewpoint image
  • the information acquisition step is based on the auxiliary information of the image file. Information on the shooting distance is acquired.
  • the information regarding the shooting distance acquired from the information attached to the image file in the information acquiring step is information on shooting mode or information on actually measured shooting distance. .
  • the printing step prints a stereoscopic image on the selected lenticular lens sheet at the highest resolution of the printing means, and the selected lenticular lens sheet.
  • a stereoscopic image having the number of viewpoints proportional to the lens interval is printed.
  • the resolution of each viewpoint image of a stereoscopic image printed on the lenticular lens sheet is converted according to the lens interval of the lenticular lens sheet, or each viewpoint image is subjected to distortion processing.
  • One aspect of the first and second method inventions is that a viewpoint image of a virtual viewpoint from two adjacent viewpoint images among stereoscopic images of the number of viewpoints n (n is an integer of 3 or more) printed on the lenticular lens sheet.
  • a peak portion of a lenticular lens of each viewpoint image is bright and a valley portion according to a lens interval and a lens shape of the lenticular lens sheet.
  • Each viewpoint image is processed so as to be dark.
  • the image processing step decreases the resolution of each viewpoint image as the lens interval of the lenticular lens sheet increases.
  • the display size of each viewpoint image displayed on the display means is the same size as the print size of a stereoscopic image printed on the lenticular lens sheet.
  • the method further includes a type changing step of manually changing a sheet type of the lenticular lens sheet
  • the printing step includes a step of changing the sheet type of the lenticular lens sheet by the type changing step.
  • SYMBOLS 12 ... Image reading part, 14 ... Attached information reading acquisition part, 16 ... Image analysis part, 18 ... Angle of view correction part, 20 ... Multi viewpoint conversion part, 22 ... Sheet selection part, 24 ... Print image conversion part, 26 ... Display , 28 ... display conversion unit, 30 ... display control unit, 32 ... printing unit, 34 ... operation unit, 36 ... printing type setting unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

 本発明の一態様に係る立体画像印画方法は、入力された2視点以上の多視点画像の撮影距離に関する情報を取得し、前記撮影距離に関する情報に基づいて、印画すべき立体画像の視点数を決定し、前記決定された視点数より前記多視点画像の視点数の方が少ない場合には、前記多視点画像から不足分の視点画像を生成し、前記多視点画像と前記生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する。

Description

立体画像印画装置及び立体画像印画方法
 本発明は、入力画像の撮影距離に適した立体画像をレンチキュラーレンズシートに形成することができる立体画像印画装置及び立体画像印画方法に関する。
 複数視点から撮影した画像を、レンズ状のシートを介して立体表示する技術が知られている。
 特許文献1には、レンチキュラーシートのタイプをユーザが選択し、又はレンズ解像度により選択することが開示されている。
 特許文献2には、ステレオ画像を視差マップに基づいて多視点化する技術が開示されている。
特開2007-98830号公報 特開2001-346226号公報
 複数視点から撮影した画像を、レンズ状のシート(レンチキュラーレンズシート)を介して立体表示する場合、画像の立体視の上での条件が被写体ごとに異なる(特に、撮影距離)にも関わらず、これらが同一形状のシートで表示される。このため、立体感が不足したり、逆に視差量が表示の許容範囲を越えて、映像がボケたり多重に見えるなどの問題があった。
 特許文献1に記載の技術は、媒体(レンチキュラーレンズシート)の種別に合ったデータを選択するのみである。このため、入力された立体画像の撮影距離に適した媒体を選択することができない。また、印刷後にどのような見え方になるのかを事前に確認することができない。
 特許文献2には、多視点化を自動的に行う技術が開示されている。しかしながら、入力画像の撮影距離に適した立体画像をレンチキュラーレンズシートに形成することについて開示がない。
 本発明はこのような事情に鑑みてなされたもので、入力画像の撮影距離に適した立体画像をレンチキュラーレンズシートに形成することができる立体画像印画装置及び立体画像印画方法を提供することを目的とする。
 前記目的を達成するために、本発明の一態様は、2視点以上の多視点画像を入力する画像入力手段と、前記入力された多視点画像の撮影距離に関する情報を取得する情報取得手段と、前記情報取得手段により取得された撮影距離に関する情報に基づいて、レンチキュラーレンズシートに印画すべき立体画像の視点数を決定する視点数決定手段と、前記画像入力手段を介して入力された多視点画像の視点数と前記視点数決定手段により決定された視点数とを比較する比較手段と、前記画像入力手段を介して入力された多視点画像の視点数が、前記印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段と、前記入力された多視点画像と前記視点画像生成手段により生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画手段とを備える立体画像印画装置を提供する。
 即ち、上記の態様では、印画すべき立体画像の視点数が撮影距離に応じて決定される。そして、入力された多視点画像の視点数が印画すべき立体画像の視点数よりも少ない場合には不足分の視点画像が生成され、入力された多視点画像と生成された視点画像からなる立体画像がレンチキュラーレンズシートに印画される。したがって、観察者は、撮影距離に応じた適切な視点数で印画された立体画像を観察できることになる。
 なお、不足分の視点画像は、入力された多視点画像を構成する視点画像間に内挿するように生成する場合と、入力された多視点画像を構成する視点画像間の外側に外挿するように生成する場合とがある。
 上記の態様では、前記視点数決定手段は、前記情報取得手段が近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べて、前記印画すべき立体画像の視点数を多くするようにしてもよい。
 上記の態様は、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択手段であって、前記視点数決定手段により決定された視点数に基づいて1つのレンチキュラーレンズシートを選択するシート選択手段を備えていてもよい。即ち、観察者は、撮影距離に応じた適切なレンズ間隔且つ視点数で印画された立体画像を観察できることになる。
 また、本発明の別の態様は、2視点以上の多視点画像を入力する画像入力手段と、前記入力された多視点画像の撮影距離に関する情報を取得する情報取得手段と、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択手段であって、前記情報取得手段により取得した撮影距離に関する情報に基づいて1つのレンチキュラーレンズシートを選択するシート選択手段と、前記シート選択手段により選択されたレンチキュラーレンズシートに、前記入力された多視点画像を含む立体画像を印画する印画手段とを備える立体画像印画装置を提供する。
 即ち、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから撮影距離に応じたレンチキュラーレンズシートが選択されるので、入力された多視点画像に適したレンチキュラーレンズシートが選択される。
 上記の態様では、前記シート選択手段は、前記情報取得手段が近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択するようにしてもよい。
 上記の態様は、前記画像入力手段を介して入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段を備えていてもよい。
 なお、不足分の視点画像は、入力された立体画像を構成する視点画像間の範囲に内挿するように生成する場合と、入力された立体画像を構成する視点画像間の外側の範囲に外挿するように生成する場合とがある。
 上記の態様では、前記シート選択手段は、前記情報取得手段が所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択するようにしてもよい。
 上記の態様では、前記画像入力手段は、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、前記情報取得手段は、前記画像ファイルの付属情報から前記撮影距離に関する情報を取得するようにしてもよい。
 上記の態様では、前記情報取得手段が前記画像ファイルの付属情報から取得する前記撮影距離に関する情報は、撮影モードの情報又は実測された撮影距離の情報とすることができる。
 上記の態様では、前記印画手段は、前記レンチキュラーレンズシートに該印画手段の最高解像度で立体画像を印画するものであって、前記レンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画するようにしてもよい。
 上記の態様は、平面画像を表示する表示手段と、前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段とを備えていてもよい。
 上記の態様は、平面画像を表示する表示手段と、前記レンチキュラーレンズシートに印画される視点数n(nは3以上の整数)の立体画像のうちの隣接する2視点画像から仮想視点の視点画像を生成する手段と、前記2視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段とを備えていてもよい。
 上記の態様では、前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理するようにしてもよい。
 上記の態様では、前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させるようにしてもよい。
 上記の態様では、前記表示制御手段は、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにすることが可能である。
 上記の態様は、前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更手段を更に備え、前記印画手段は、前記タイプ変更手段によりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画するようにしてもよい。
 本発明によれば、入力画像の撮影距離に適した立体画像をレンチキュラーレンズシートに形成することができる。
立体画像印画装置の一例の全体構成を示すブロック図 撮影距離に応じたレンズシート選択の説明に用いる説明図 撮影距離に応じたレンズシート選択の説明に用いる説明図 立体画像印画処理の一例の流れを示すフローチャート 撮影距離に関する情報の一例を示す説明図 レンズ間隔及び多視点化の説明に用いる説明図 レンズ間隔及び多視点化の説明に用いる説明図 第1実施形態における確認画像の生成・表示処理の一例を示すフローチャート レンズを介した立体画像の見え方を模擬表示するための画像処理例の説明に用いる説明図 第1実施形態における確認画像の生成・表示処理の他の例を示すフローチャート 第2実施形態における確認画像の生成・表示処理の一例を示すフローチャート 第2実施形態における確認画像の生成処理の説明に用いる説明図 第2実施形態における確認画像の生成処理の説明に用いる説明図
 以下、添付図面に従って、本発明の実施形態について、詳細に説明する。
 <第1実施形態>
 図1は、第1実施形態における立体画像印画装置の一例の全体構成を示すブロック図である。
 図1の立体画像印画装置10は、画像読取り部12、付属情報取得部14、画像解析部16、画角補正部18、多視点変換部20、シート選択部22、印画イメージ変換部24、表示部26、表示変換部28、表示制御部30、印画部32、操作部34、印画種別設定部36を含んでいる。
 画像読取り部12(画像入力手段)は、多視点画像からなる立体画像を入力する。多視点画像は、2視点以上の複数の視点から見た画像(複数の視点画像)であり、複数の実視点から撮像した複数の撮像画像でもよいし、複数の仮想視点から見た場合の複数の仮想画像でもよいし、撮像画像と仮想画像との組み合わせでもよい。本例の画像読取り部12は、立体画像とともに付属情報が記録された画像ファイルを、メモリカードなどの記録媒体から読み取ることで取得する。もっとも画像ファイルの取得態様は限定されず、例えば、通信により取得してもよい。
 付属情報取得部14(情報取得手段)は、画像読取り部12を介して入力された立体画像の撮影距離に関する情報を取得する。撮影距離に関する情報は、例えば、撮影モードの情報、実測された撮影距離の情報などである。
 画像解析部16は、画像読取り部12を介して入力された立体画像を解析する。本例の画像解析部16は、画像読取り部12を介して入力された立体画像のうちの左端の視点画像(左眼画像)と右端の視点画像(右眼画像)との特徴が一致する対応点を検出し、検出された対応点から左端の視点画像と右端の視点画像との視差量を算出する。
 画角補正部18は、画像読取り部12を介して入力された立体画像の画角を補正する。この画角補正部18は、レンチキュラーレンズシート(以下単に「レンズシート」ともいう)に印画すべき印画用立体画像の視点数を決定する。
 画角補正部18の視点数決定の態様には各種ある。第1に、付属情報取得部14により取得された撮影距離に関する情報に基づいて、レンズシートに印画すべき印画用立体画像の視点数を決定する。第2に、後述のシート選択部22により撮影距離に関する情報に基づいてレンズシートのシートタイプが選択される場合に、シート選択部22により選択されたシートタイプのレンズ間隔に応じて、レンズシートに印画すべき印画用立体画像の視点数を決定する。即ち、撮影距離に関する情報に基づいて間接的に印画用視点画像の視点数を決定する。
 多視点変換部20は、画像読取り部12を介して入力された立体画像(多視点画像)の視点数と、画角補正部18により決定された印画用視点画像の視点数とを比較して、入力された立体画像の視点数の方が少ない場合には、入力された立体画像から不足分の視点画像(印画用補充視点画像)を生成する。なお、不足分の視点画像は、入力された立体画像を構成する視点画像間の範囲に内挿するように生成する場合と、入力された立体画像を構成する視点画像間の外側の範囲に外挿するように生成する場合とがある。
 シート選択部22は、付属情報取得部14により取得した撮影距離に関する情報に基づいて、レンズ間隔が異なる複数のシートタイプのレンズシートから1つのレンズシートを選択する。
 シート選択部22のシート選択態様には各種ある。
 第1に、画角補正部18にて撮影距離に関する情報に基づいて印画用視点画像の視点数が決定される場合に、その画角補正部18により決定された印画用視点画像の視点数に基づいて1つのレンズシートを選択する。シート選択部22は、印画部32の解像度が一定(印画部32の最高解像度)である場合、視点数に比例したレンズ間隔のレンズシートを選択する。印画用視点画像の視点数に応じて印画の解像度を変更する場合には、該視点数と印画の解像度とに応じたレンズ間隔のレンズシートを選択する。
 第2に、撮影モードの情報に基づいてシート選択を行う態様がある。シート選択部22は、例えば、付属情報取得部14が画像ファイルの付属情報から近距離撮影を示す撮影モードの情報(近距離撮影モード情報)を取得した場合に、他の撮影モードの情報を取得した場合に比べて、レンズ間隔が大きいシートタイプのレンズシートを選択する。第3に、実測された撮影距離の情報に基づいてシート選択を行う態様がある。シート選択部22は、例えば、近距離撮影に相当する撮影距離の情報を取得した場合に、近距離撮影以外の撮影距離の情報を取得した場合に比べて、レンズ間隔が大きいシートタイプのレンズシートを選択する。
 本例では、近距離撮影の立体画像の場合には図2Aに示すシートタイプAのレンズシートを選択し、中~遠距離撮影の立体画像の場合には図2Bに示すシートタイプBのレンズシートを選択する。シートタイプAでは、レンズ間隔(ピッチ)が50LPI(Line Per Inch)、8視点である。シートタイプBでは、レンズ間隔(ピッチ)が100LPI、4視点である。
 また、シート選択部22は、付属情報取得部14(情報取得手段)が画像ファイルの付属情報から所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンズシートを選択する。
 表示部26は、平面画像を表示する。
 表示変換部28(画像処理手段)は、シート選択部22により選択されたレンズシートのレンズ間隔に応じて、そのレンズシートに印画する印画用立体画像の各印画用視点画像の解像度を変換し、表示用の立体画像を生成する。表示変換部28は、シート選択部22により選択されたレンズシートのレンズ間隔が大きいほど各印画用視点画像の解像度を低下させる。
 また、表示変換部28(画像処理手段)は、シート選択部22により選択されたレンズシートのレンズ間隔に応じて表示用の立体画像の各視点画像(表示用視点画像)に対して歪み処理を行う。
 表示変換部28(画像処理手段)は、例えば、シート選択部22により選択されたレンズシートのレンズ間隔及びレンズ形状に応じて、各表示用視点画像のレンチキュラーレンズの山に印画される部分はより明るく、谷に印画される部分はより暗くなるように、表示用視点画像に対して画像処理を行う。
 表示制御部30は、表示変換部28(画像処理手段)の画像処理により各印画用視点画像から生成された表示用視点画像(確認画像)を、表示部26に順番にかつ繰り返し表示させることにより、表示部26に動画表示させる。
 また、表示制御部30は、表示部26により表示を行う際に、各表示用視点画像の表示サイズを、レンズシートに印画される印画用立体画像の印画サイズと同じサイズにする。
 印画部32は、シート選択部22により選択されたレンズシートに、画像読取り部12により入力された多視点画像を含む印画用立体画像を印画する。
 本実施形態の印画部32は、多視点変換部20により不足分の視点画像(印画用補充視点画像)が生成された場合には、画像読取り部12により入力された多視点画像と多視点変換部20により生成された印画用補充視点画像とからなる印画用立体画像をレンズシートに印画する。本例の印画部32は、選択されたレンズシートに印画部32の最高解像度で印画用立体画像を印画するものであって、選択されたレンズシートのレンズ間隔に比例した視点数の印画用視点画像を印画する。
 印画種別設定部36(タイプ変更手段)は、シート選択部22により選択されたレンズシートのシートタイプを手動により変更する。印画種別設定部36によりレンズシートのシートタイプが変更されると、印画部32は、変更後のレンズシートに印画用立体画像を印画する。
 図3は、第1実施形態における立体画像印画処理の一例の流れを示すフローチャートである。
 まず、画像読取り部12により、多視点画像からなる立体画像とともに付属情報が記録された画像ファイルを、記録媒体などから読み取ることで取得する(ステップS2)。即ち、多視点画像からなる立体画像を入力する。
 次に、付属情報取得部14により、画像ファイルから付属情報(ヘッダ部)を取得する(ステップS4)。即ち、画像ファイルの付属情報から立体画像の撮影距離に関する情報を取得する。撮影距離に関する情報は、撮影モードの情報(撮影モード情報)、及び実測された撮影距離の情報(撮影距離情報)のうち少なくとも一方を含む。
 例えば、図4に示す画像ファイル50が取得されると、ヘッダ1、ヘッダ2のうち撮影距離に関する情報として撮影モード情報が画像ファイル50から取得される。本例では、撮影モード情報が「0」であれば近距離撮影、「1」であれば人物撮影、「2」であれば遠景撮影である。なお、図4では、撮影距離に関する情報として撮影モード情報のみがヘッダ部(付属情報)に記述されている場合を示したが、実測された撮影距離の情報(被写体距離情報)がヘッダ部に記述されていてもよく、その場合には実測された撮影距離の情報をヘッダ部から取得する。
 次に、ステップS4にて取得した撮影距離に関する情報に基づいて、レンズ間隔が異なる複数のシートタイプのレンズシートから1つのレンズシートを選択する(ステップS6~S14)。
 ステップS6では、近距離(マクロ)撮影を示す撮影モード情報を取得したか否かを判定する。また、ステップS8では、撮影距離情報が閾値L1よりも小さい(近い)か否かを判定する。
 ステップS6にて近距離(マクロ)撮影を示す撮影モード情報を取得した場合、又はステップS8にて撮影距離情報がL1よりも小さい場合(即ち、近距離撮影に相当する撮影距離の情報を取得した場合)には、他の撮影モードである場合(又は近距離撮影に相当する撮影距離以外の撮影距離の情報を取得した場合)に比べてレンズ間隔(ピッチ)が大きいシートタイプAのレンズシートを選択する(ステップS12)。その一方で、近距離撮影を示す撮影モード情報及び近距離撮影に相当する撮影距離情報のいずれも取得しなかった場合(中~遠距離撮影の場合)には、近距離撮影モードを取得した場合(又は近距離撮影に相当する撮影距離の情報を取得した場合)に比べてレンズ間隔(ピッチ)が小さいシートタイプBのレンズシートを選択する(ステップS14)。
 本例では、シートタイプAのレンズシートを選択した場合には、印画用立体画像の視点数を「8」に設定し(ステップS16)、シートタイプBのレンズシートを選択した場合には、印画用立体画像の視点数を「4」に設定する(ステップS18)。即ち、印画用立体画像の視点数は、レンズシートのレンズ間隔に比例した値に設定される。
 ここでは、まず、撮影距離に関する情報に基づいてシート選択を行い、次に、選択されたレンズシートのレンズ間隔に基づいて印画用立体画像の視点数を決定する例について説明したが、この順序は逆でもよい。即ち、まず、撮影距離に関する情報に基づいて印画用立体画像の視点数を決定し、次に、決定された視点数に基づいてシート選択を行ってもよい。
 次に、多視点変換部20により、ステップS2で入力された立体画像の多視点化を行う。即ち、立体画像の視点数が、ステップS6~S14で選択されたレンズシートに印画すべき印画用立体画像の視点数よりも少ない場合には、入力した立体画像から不足分の視点画像(印画用補充視点画像)を生成する(ステップS20)。例えば、2視点画像が入力されて、4視点画像を印画する場合には不足分の2視点を補間(内挿または外挿)して2視点の印画用補充視点画像を生成することで合計4視点の印画用立体画像を得る。8視点画像を印画する場合には不足分の6視点を補間して6視点の印画用補充視点画像を生成することで合計8視点画像の印画用立体画像を得る。
 以上のように、近距離撮影の場合には、視差量が過大となる可能性があるため、通常よりもレンズ間隔の大きなレンズシート(本例ではシートタイプA)が選択されて、より多くの視点数(本例では8視点)の印画用立体画像が生成される。一方、中~遠距離の場合には、視差量が過大となる可能性が低いため、通常のレンズシート(本例ではシートタイプB)が選択されて、より少ない視点数(本例では4視点)の印画用立体画像が生成される。
 次に、表示制御部30により、表示用視点画像(確認画像)を生成して表示部26に表示させる(ステップS22)。操作部34により操作者の確認入力を受け付けたか否かを判定し(ステップS24)、選択されたレンズシートのシートタイプを手動により変更する場合には、レンズシートのシートタイプを操作部34で受け付けたシートタイプに変更し(ステップS26)、ステップS22に進む。
 ステップS24で操作者の確認入力を受け付けた場合には、ステップS6~S14で選択されたレンズシートに多視点画像からなる印画用立体画像を印画する(ステップS28)。即ち、ステップS26でシートタイプが変更されなかった場合には、ステップS6~S14でシート選択部22により選択されたレンズシートに、印画用立体画像を印画し、ステップS26でシートタイプが手動で変更されると、変更後のレンズシートに、印画用立体画像を印画する。
 図6は、第1実施形態における確認画像の生成・表示処理(図3のステップS22)の一例を示すフローチャートである。確認画像は、レンズシートでの立体画像の見え方を模擬的に確認するために表示部26に表示される画像である。確認画像は、表示変換部28における画像処理により、印画用立体画像を平面画像からなる動画像に変換処理して生成される。この変換処理は、印画用立体画像を構成する多視点画像を平面表示で確認するための動画化処理と、シートタイプが異なることによる見え方の違いを模擬するための模擬変換処理を含む。
 まず、表示変換部28(画像処理手段)により、シートタイプに基づいて、ステップS16~S18で設定した印画用立体画像の視点数を取得する(ステップS30)。本例では、シートタイプBであれば上記視点数を「4」とし、シートタイプAであれば上記視点数を「8」とする。
 次に、表示制御部30により、各表示用視点画像の表示時間tを設定する(ステップS32)。動画化時の表示繰り返し周期を240msecとした場合、4視点であれば表示時間tを60msecとし、8視点であれば表示時間tを30msecに設定する。これにより、レンズ間隔が大きいシートタイプAでは、レンズ間隔が小さいシートタイプBよりも各表示用視点画像の表示時間を短くして、全視点の表示用視点画像の表示に要する表示時間を同じにする。
 次に、表示変換部28により、印画用視点画像に対して所定の画像処理を施して、表示用視点画像を生成する。ステップS6~S14にて選択されたレンズシートのレンズ間隔に応じて、各印画用視点画像に対して歪み処理を施す(ステップS34)。P(x,y)を表示用画像の座標(x,y)の画素、M(n,x,y)をシートタイプnごとの透過率マスクとした場合、P(x,y)=P(x,y)×M(n,x,y)を演算する。例えば、図7に示すように、選択されたレンズシートのレンズ間隔及びレンズ形状に応じて、透過率マスクを用いて、各表示用視点画像に対し、各視点画像のレンチキュラーレンズの山の部分ほど明るく、谷の部分ほど暗くなるように画像処理(透過率変換)を行う。これにより、レンチキュラーレンズの谷の部分を視覚的に確認できるようにする。即ち、レンチキュラーレンズを介した立体画像の見え方を表示部26で模擬表示するための画像処理(歪処理)を施している。
 次に、表示制御部30により、歪み処理された各視点画像(視点1~n)を、表示部26に順番にかつ繰り返し表示させることにより、動画表示させる(ステップS36)。例えば、図5Aに示したシートタイプAのレンズシートの場合、第1視点~第8視点の順番に、一視点画像ずつ30msecで切り替えながら表示した後、第7視点~第1視点の順番に、一視点画像ずつ30msecで切り替えながら表示し、その後、同様に繰り返して表示する。図5Bに示したシートタイプBのレンズシートの場合、第1視点~第4視点の順番に、一視点画像ずつ60msecで切り替えながら表示した後、第3視点~第1視点の順番に、一視点画像ずつ60msecで切り替えながら表示し、その後、同様に繰り返して表示する。
 図8は、第1実施形態における確認画像の生成・表示処理(図3のステップS22)のほかの例を示すフローチャートである。
 ステップS40~42は、図6のステップS30~32と同様である。
 次に、表示変換部28により、印画用視点画像に対して所定の画像処理を施して、表示用視点画像を生成する。まず、ステップS6~S14にて選択されたレンズシートのレンズ間隔に応じて、そのレンズシートに印画する多視点画像の解像度を変換する(ステップS44)。例えば、4視点であれば水平画素数を1280、8視点であれば水平画素数を640に設定する。これにより、レンズ間隔の大きいシートタイプAが選択された場合、レンズ間隔の小さいシートタイプBが選択された場合に比べて、各視点画像の解像度を低下させる。
 次に、表示変換部28により、最大視点(本例では8視点)の場合には、表示部26の表示サイズに合わせて各視点画像を拡大する(ステップS46)。即ち、表示部26における表示サイズが同一となるように、各視点画像がリサイズされる。
 次に、表示変換部28により、表示部26に表示させる各視点画像の表示サイズを、レンズシートに印画される立体画像の印画サイズ(プリント出力サイズ)と同じサイズにリサイズし、表示部26に表示する(ステップS48)。即ち、表示部26に表示される立体画像の表示サイズがレンズシートに印画される立体画像のサイズと同じサイズとなるように多視点画像をリサイズする。これにより、表示用視点画像が生成される。そして、表示制御部30により、各表示用視点画像を表示部26に順番にかつ繰り返し表示させることにより、動画表示させる。
 なお、レンズシートを撮影距離のみに応じて選択した場合を例に説明したが、本発明はこのような場合に限定されない。画像ファイルの付属情報から所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンズシートを選択するようにしてもよい。
 <第2実施形態>
 次に、第2実施形態における立体画像印画装置について説明する。以下では、第1実施形態と異なる点のみ説明する。
 本実施形態の立体画像印画装置の全体構成は、図1を用いて説明した第1実施形態の立体画像印画装置と同様の構成要素を備えている。ただし、本実施形態における表示変換部28は、シート選択部22により選択されたレンズシートに印画される複数の視点数n(nは3以上の整数)の印画用立体画像のうちの隣接する2視点の印画用視点画像から(一視点差分の2つの視点画像)仮想視点の視点画像を生成する手段を有する。また、本実施形態の表示変換部28は、前記2視点の印画用視点画像及び前記生成された仮想視点の視点画像からなる多視点画像の解像度を変換し又は歪み処理する画像処理を行うことにより、表示用立体画像を生成する。表示制御部30は、表示変換部28で画像処理・生成された各表示用視点画像を表示部26に順番にかつ繰り返し表示させることにより動画表示させる。上記のように、仮想視点の視点画像を挿入することにより、ユーザが観察する動画の動きが滑らかになる。
 図9は、第2実施形態における表示用立体画像(確認画像)の生成・表示処理(図3のステップS22)の一例を示すフローチャートである。
 ステップS50は、図6のステップS30と同様である。
 次に、表示変換部28により、図3のステップS6~S14にて選択されたレンズシートに印画される印画用立体画像のうちの隣接する2視点の印画用視点画像から仮想視点の画像を生成する(ステップS52)。
 例えば、図10Aに示すシートタイプAの場合には、レンズシートに印画される8視点の印画用視点画像から、追加の56視点の仮想視点画像を生成する。8視点の印画用視点画像から56視点の仮想視点画像を生成する際には、例えば、第1視点と第2視点、第2視点と第3視点、…、第7視点と第8視点の視点画像の各組(合計7組)から、それぞれ8視点ずつ仮想視点画像を生成する。これにより、合計64視点の表示用視点画像を生成することができる。例えば、図10Bに示すシートタイプBの場合には、レンズシートに印画される4視点の印画用立体画像から、追加の28視点の仮想視点画像を生成する。4視点の印画用視点画像から28視点の仮想視点画像を生成する際には、例えば、第1視点と第2視点、第2視点と第3視点、第3視点と第4視点の視点画像の各組(合計3組)から、それぞれ8視点ずつ仮想視点画像を生成し、第1視点および第4視点の視点画像に対してそれぞれ2視点ずつ外挿する。これにより、合計32視点の表示用視点画像を生成することができる。なお、視点画像の挿入の仕方(内挿および外挿、挿入視点数)は上記に限定されるものではない。
 次に、表示制御部30により、各表示用視点画像の表示時間tを設定する(ステップS54)。例えば、2視点分の動画化時の表示繰り返し周期を240msecとした場合、表示用立体画像が64視点の場合(印画用立体画像が8視点の場合)、視点画像1枚当たりの表示時間は、t=3.75msecに設定される。一方、表示用立体画像が32視点の場合(印画用立体画像が4視点の場合)、視点画像1枚当たりの表示時間は、t=7.5msecに設定される。
 ステップS56は、図6のステップS34と同様である。例えば、シートタイプの場合、そのレンズ間隔(例えば、50LPI)に応じて、印画用視点画像と、該印画用視点画像から生成された仮想視点の視点画像からなる表示用立体画像に対して歪み処理を施す。これにより、表示用立体画像が生成される。
 次に、ステップS56により画像処理された各視点画像(視点1~n)を、表示部26に順番にかつ繰り返し表示させることにより動画表示させる(ステップS58)。
 例えば、図10Aに示すようにシートタイプAに対応する確認画像表示の場合、第1視点、(第1視点と第2視点から生成した仮想視点画像8枚)、第2視点、(第2視点と第3視点から生成した仮想視点画像8枚)、第3視点、(第3視点と第4視点から生成した仮想視点画像8枚)、第4視点、(第4視点と第5視点から生成した仮想視点画像8枚)、第5視点、(第5視点と第6視点から生成した仮想視点画像8枚)、第6視点、(第6視点と第7視点から生成した仮想視点画像8枚)、第7視点、(第7視点と第8視点から生成した仮想視点画像8枚)、第8視点の順番に表示した後、上記と逆の順番で折り返すように表示し、以後、同様な表示を繰り返す。例えば、図10Bに示すようにシートタイプBに対応する確認画像表示の場合、(第1視点から外挿した仮想視点画像2枚)、第1視点、(第1視点と第2視点から生成した仮想視点画像8枚)、第2視点、(第2視点と第3視点から生成した仮想視点画像8枚)、第3視点、(第3視点と第4視点から生成した仮想視点画像8枚)、第4視点、(第4視点から外挿した仮想視点画像2枚)の順番に表示した後、上記と逆の順番で折り返すように表示し、以後、同様な表示を繰り返す。
 なお、図9では、レンズ間隔に応じて歪処理を行う場合を例に説明したが、本発明はこのような場合に限定されない。第1実施形態にて説明したように、レンズ間隔に応じて多視点画像の解像度を変換するようにしてもよい。
 なお、上述の第1及び第2実施形態にて、レンズシートの選択の態様は各種ある。選択したシートタイプのレンズシート自体を直接選択する態様のほか、例えば、選択したシートタイプのレンズシートを収納したカセット等の収容体を選択する態様、選択したシートタイプのレンズシートをプリントするプリンタ(印画手段)を選択する態様などとしてもよい。
 なお、本発明において、入力される立体画像(多視点画像)の視点数は2視点に限定されるものでない。例えば、3視点の入力多視点画像(視点番号=1,2,3)から8視点の印画用視点画像を生成する場合には、まず、入力視点画像(視点番号=1)と入力視点画像(視点番号=2)の間に3視点分の仮想視点画像を挿入し、入力視点画像(視点番号=2)と入力視点画像(視点番号=3)の間に3視点分の仮想視点画像を挿入する。これにより、合計9視点分の視点画像(視点番号=1,A1,A2,A3,2,B1,B2,B3,3)を得ることができる。次に、上記9視点分の視点画像のうち、片側8視点分(例えば、視点番号=1,A1,A2,A3,2,B1,B2,B3の8視点、視点番号=A1,A2,A3,2,B1,B2,B3,3の8視点)を選択することにより、8視点の印画用視点画像を得ることができる。
 上記のように、印画用視点画像を内挿により生成する場合には、まず、入力される視点画像の間にそれぞれ略同数の仮想視点画像を挿入することにより、印画用視点画像の視点数以上で、印画用視点画像の視点数に最も近い数の視点画像を生成する。次に、内挿により得られた視点画像の視点数が、印画用視点画像の視点数より大きい場合には、内挿により得られた視点画像から、上記視点数分の隣り合う視点画像を選択する。これにより、上記視点数分の印画用視点画像を得ることができる。 前述の第1及び第2実施形態に記載したように、課題を解決するための手段の欄に記載の装置発明のほか、以下の方法発明が提供される。
 2視点以上の多視点画像を入力する画像入力ステップと、前記入力された多視点画像の撮影距離に関する情報を取得する情報取得ステップと、前記情報取得ステップにて取得された撮影距離に関する情報に基づいて、レンチキュラーレンズシートに印画すべき立体画像の視点数を決定する視点数決定ステップと、前記画像入力ステップにて入力された多視点画像の視点数と前記視点数決定ステップにて決定された視点数とを比較して、前記画像入力ステップにて入力された多視点画像の視点数の方が少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップと、前記入力された多視点画像と前記視点画像生成ステップにて生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画ステップとを備える第1の方法発明が提供される。
 前記第1の方法発明の一態様では、前記情報取得ステップにて近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べて、前記印画すべき立体画像の視点数を多くする。
 前記第1の方法発明の一態様は、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記視点数決定ステップにより決定された視点数に基づいて1つのレンチキュラーレンズシートを選択するシート選択ステップを含む。
 また、2視点以上の多視点画像を入力する画像入力ステップと、前記入力された多視点画像の撮影距離に関する情報を取得する情報取得ステップと、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記情報取得ステップにて取得した撮影距離に関する情報に基づいて1つのレンチキュラーレンズシートを選択するシート選択ステップと、前記シート選択ステップで選択されたレンチキュラーレンズシートに、前記入力された多視点画像を含む立体画像を印画する印画ステップとを備える第2の方法発明が提供される。
 前記第2の方法発明の一態様では、前記シート選択ステップは、前記情報取得ステップにて近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する。
 前記第2の方法発明の一態様は、前記画像入力ステップにて入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップを備える。
 前記第1及び第2の方法発明の一態様では、前記シート選択ステップは、前記情報取得ステップにて所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する。
 前記第1及び第2の方法発明の一態様では、前記画像入力ステップは、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、前記情報取得ステップは、前記画像ファイルの付属情報から前記撮影距離に関する情報を取得する。
 前記第1及び第2の方法発明の一態様では、前記情報取得ステップにて前記画像ファイルの付属情報から取得する前記撮影距離に関する情報は、撮影モードの情報又は実測された撮影距離の情報である。
 前記第1及び第2の方法発明の一態様では、前記印画ステップは、前記選択されたレンチキュラーレンズシートに印画手段の最高解像度で立体画像を印画するものであって、前記選択されたレンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する。
 前記第1及び第2の方法発明の一態様は、前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、前記画像処理手段により処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップとを備える。
 前記第1及び第2の方法発明の一態様は、前記レンチキュラーレンズシートに印画される視点数n(nは3以上の整数)の立体画像のうちの隣接する2視点画像から仮想視点の視点画像を生成するステップと、前記2視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、前記画像処理手段により処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップとを備える。
 前記第1及び第2の方法発明の一態様では、前記画像処理ステップは、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する。
 前記第1及び第2の方法発明の一態様では、前記画像処理ステップは、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させる。
 前記第1及び第2の方法発明の一態様では、前記画像処理ステップは、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする。
 前記第1及び第2の方法発明の一態様では、前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更ステップを更に備え、前記印画ステップは、前記タイプ変更ステップによりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画する。
 本発明は、本明細書において説明した例や図面に図示された例には限定されず、本発明の要旨を逸脱しない範囲において、各種の設計変更や改良を行ってよいのはもちろんである。
 12…画像読取り部、14…付属情報読取得部、16…画像解析部、18…画角補正部、20…多視点変換部、22…シート選択部、24…印画イメージ変換部、26…表示部、28…表示変換部、30…表示制御部、32…印画部、34…操作部、36…印画種別設定部

Claims (32)

  1.  2視点以上の多視点画像を入力する画像入力手段と、
     前記入力された多視点画像の撮影距離に関する情報を取得する情報取得手段と、
     前記情報取得手段により取得された撮影距離に関する情報に基づいて、レンチキュラーレンズシートに印画すべき立体画像の視点数を決定する視点数決定手段と、
     前記画像入力手段を介して入力された多視点画像の視点数と前記視点数決定手段により決定された視点数とを比較する比較手段と、
     前記画像入力手段を介して入力された多視点画像の視点数が、前記印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段と、
     前記入力された多視点画像と前記視点画像生成手段により生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画手段と、
     を備える立体画像印画装置。
  2.  前記視点数決定手段は、前記情報取得手段が近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べて、前記印画すべき立体画像の視点数を多くする、請求項1に記載の立体画像印画装置。
  3.  レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択手段であって、前記視点数決定手段により決定された視点数に基づいて1つのレンチキュラーレンズシートを選択するシート選択手段を更に備える請求項1又は2に記載の立体画像印画装置。
  4.  2視点以上の多視点画像を入力する画像入力手段と、
     前記入力された多視点画像の撮影距離に関する情報を取得する情報取得手段と、
     レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択手段であって、前記情報取得手段により取得した撮影距離に関する情報に基づいて1つのレンチキュラーレンズシートを選択するシート選択手段と、
     前記シート選択手段により選択されたレンチキュラーレンズシートに、前記入力された多視点画像を含む立体画像を印画する印画手段と、
     を備える立体画像印画装置。
  5.  前記シート選択手段は、前記情報取得手段が近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項4に記載の立体画像印画装置。
  6.  前記画像入力手段を介して入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段を更に備える請求項4又は5に記載の立体画像印画装置。
  7.  前記シート選択手段は、前記情報取得手段が所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項3から6のいずれか1項に記載の立体画像印画装置。
  8.  前記画像入力手段は、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、
     前記情報取得手段は、前記画像ファイルの付属情報から前記撮影距離に関する情報を取得する、請求項1から7のいずれか1項に記載の立体画像印画装置。
  9.  前記情報取得手段が前記画像ファイルの付属情報から取得する前記撮影距離に関する情報は、撮影モードの情報及び実測された撮影距離の情報のうちの少なくとも1つである、請求項8に記載の立体画像印画装置。
  10.  前記印画手段は、前記レンチキュラーレンズシートに該印画手段の最高解像度で立体画像を印画するものであって、前記レンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する、請求項1から9のいずれか1項に記載の立体画像印画装置。
  11.  平面画像を表示する表示手段と、
     前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、
     前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段と、
     を更に備える請求項1から10のいずれか1項に記載の立体画像印画装置。
  12.  平面画像を表示する表示手段と、
     前記レンチキュラーレンズシートに印画される視点数n(nは3以上の整数)の立体画像のうちの隣接する2視点画像から仮想視点の視点画像を生成する仮想視点画像生成手段と、
     前記2視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、
     前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段と、
     を更に備える請求項1から10のいずれか1項に記載の立体画像印画装置。
  13.  前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する、請求項11又は12に記載の立体画像印画装置。
  14.  前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させる、請求項11又は12に記載の立体画像印画装置。
  15.  前記表示制御手段は、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする、請求項11から14のいずれか1項に記載の立体画像印画装置。
  16.  前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更手段を更に備え、
     前記印画手段は、前記タイプ変更手段によりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画する、請求項1から15のいずれか1項に記載の立体画像印画装置。
  17.  2視点以上の多視点画像を入力する画像入力ステップと、
     前記入力された多視点画像の撮影距離に関する情報を取得する情報取得ステップと、
     前記情報取得ステップにて取得された撮影距離に関する情報に基づいて、レンチキュラーレンズシートに印画すべき立体画像の視点数を決定する視点数決定ステップと、
     前記画像入力ステップにて入力された多視点画像の視点数と前記視点数決定ステップにて決定された視点数とを比較して、前記画像入力ステップにて入力された多視点画像の視点数の方が少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップと、
     前記入力された多視点画像と前記視点画像生成ステップにて生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画ステップと、
     を備える立体画像印画方法。
  18.  前記情報取得ステップにて近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べて、前記印画すべき立体画像の視点数を多くする、請求項17に記載の立体画像印画方法。
  19.  レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記視点数決定ステップにより決定された視点数に基づいて1つのレンチキュラーレンズシートを選択するシート選択ステップを更に備える請求項17又は18に記載の立体画像印画方法。
  20.  2視点以上の多視点画像を入力する画像入力ステップと、
     前記入力された多視点画像の撮影距離に関する情報を取得する情報取得ステップと、
     レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから1つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記情報取得ステップにて取得した撮影距離に関する情報に基づいて1つのレンチキュラーレンズシートを選択するシート選択ステップと、
     前記シート選択ステップにて選択されたレンチキュラーレンズシートに、前記入力された多視点画像を含む立体画像を印画する印画ステップと、
     を備える立体画像印画方法。
  21.  前記シート選択ステップは、前記情報取得ステップにて近距離撮影を示す撮影モード情報を取得した場合、又は近距離撮影に相当する撮影距離の情報を取得した場合に、他の撮影モード又は近距離撮影以外の撮影距離の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項20に記載の立体画像印画方法。
  22.  前記画像入力ステップにて入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画すべき立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップを更に備える請求項20又は21に記載の立体画像印画方法。
  23.  前記シート選択ステップは、前記情報取得ステップにて所定の倍率以上の高倍率の撮影倍率の情報を取得した場合に、他の撮影倍率の情報を取得した場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項19から22のいずれか1項に記載の立体画像印画方法。
  24.  前記画像入力ステップは、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、
     前記情報取得ステップは、前記画像ファイルの付属情報から前記撮影距離に関する情報を取得する、請求項17から23のいずれか1項に記載の立体画像印画方法。
  25.  前記情報取得ステップにて前記画像ファイルの付属情報から取得する前記撮影距離に関する情報は、撮影モードの情報及び実測された撮影距離の情報のうちの少なくとも1つである、請求項24に記載の立体画像印画方法。
  26.  前記印画ステップは、前記レンチキュラーレンズシートに印画手段の最高解像度で立体画像を印画するものであって、前記レンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する、請求項17から25のいずれか1項に記載の立体画像印画方法。
  27.  前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、
     前記画像処理手段により処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップと、
     を更に備える請求項17から26のいずれか1項に記載の立体画像印画方法。
  28.  前記レンチキュラーレンズシートに印画される視点数n(nは3以上の整数)の立体画像のうちの隣接する2視点画像から仮想視点の視点画像を生成する仮想視点画像生成ステップと、
     前記2視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、
     前記画像処理手段により処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップと、
     を更に備える請求項17から26のいずれか1項に記載の立体画像印画方法。
  29.  前記画像処理ステップは、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する、請求項27又は28に記載の立体画像印画方法。
  30.  前記画像処理ステップは、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させる、請求項27又は28に記載の立体画像印画方法。
  31.  前記画像処理ステップは、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする、請求項27から30のいずれか1項に記載の立体画像印画方法。
  32.  前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更ステップを更に備え、
     前記印画ステップは、前記タイプ変更ステップによりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画する、請求項17から31のいずれか1項に記載の立体画像印画方法。
PCT/JP2012/052676 2011-02-08 2012-02-07 立体画像印画装置及び立体画像印画方法 WO2012108405A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011025196 2011-02-08
JP2011-025196 2011-02-08

Publications (1)

Publication Number Publication Date
WO2012108405A1 true WO2012108405A1 (ja) 2012-08-16

Family

ID=46638619

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/052676 WO2012108405A1 (ja) 2011-02-08 2012-02-07 立体画像印画装置及び立体画像印画方法

Country Status (1)

Country Link
WO (1) WO2012108405A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002372904A (ja) * 2001-06-14 2002-12-26 Sony Corp 印刷物製造装置及び印刷物製造方法
JP2011081272A (ja) * 2009-10-08 2011-04-21 Nikon Corp 画像表示装置および画像表示方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002372904A (ja) * 2001-06-14 2002-12-26 Sony Corp 印刷物製造装置及び印刷物製造方法
JP2011081272A (ja) * 2009-10-08 2011-04-21 Nikon Corp 画像表示装置および画像表示方法

Similar Documents

Publication Publication Date Title
JP5202546B2 (ja) マルチ画像表示を較正および/または視覚化しかつゴーストアーチファクトを低減するためのするための方法およびシステム
JP6021541B2 (ja) 画像処理装置及び方法
JP5426785B2 (ja) 画像処理装置および画像処理方法
JP4328311B2 (ja) 三次元画像表示用多視点画像の作成方法およびプログラム
US9544576B2 (en) 3D photo creation system and method
TWI683281B (zh) 用於產生三維影像之方法及裝置
CN102124749B (zh) 立体图像显示装置
JP5879713B2 (ja) 画像処理装置、および画像処理方法、並びにプログラム
WO2011052389A1 (ja) 画像処理装置及び画像処理方法
KR20110049039A (ko) 능동 부화소 렌더링 방식 고밀도 다시점 영상 표시 시스템 및 방법
JP2011523306A (ja) 立体視画像のブラー強化
KR20120053536A (ko) 화상 표시 장치 및 화상 표시 방법
JP5267708B2 (ja) 画像処理装置、撮像装置、画像生成方法、及びプログラム
EP2498501A2 (en) 3D image display method and apparatus thereof
US9369699B2 (en) Stereoscopic image display device, stereoscopic imaging device, and methods
JP5931062B2 (ja) 立体画像処理装置、立体画像処理方法、及びプログラム
JP2011211551A (ja) 画像処理装置および画像処理方法
JP2013078101A (ja) 画像処理装置、画像撮像装置および画像表示装置
JP2008090750A (ja) 三次元画像の作成方法および装置
JP2013003396A (ja) 3次元画像の提示方法
JP5492311B2 (ja) 視点画像生成装置、視点画像生成方法及び立体画像印画装置
WO2012108405A1 (ja) 立体画像印画装置及び立体画像印画方法
JPH09200803A (ja) 画像処理装置及び画像処理方法
WO2012096065A1 (ja) 視差画像表示装置及び視差画像表示方法
JP6439285B2 (ja) 画像処理装置、撮像装置および画像処理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12745328

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12745328

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP