WO2012070206A1 - 画像撮影装置 - Google Patents

画像撮影装置 Download PDF

Info

Publication number
WO2012070206A1
WO2012070206A1 PCT/JP2011/006414 JP2011006414W WO2012070206A1 WO 2012070206 A1 WO2012070206 A1 WO 2012070206A1 JP 2011006414 W JP2011006414 W JP 2011006414W WO 2012070206 A1 WO2012070206 A1 WO 2012070206A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
unit
captured image
camera
dimensional
Prior art date
Application number
PCT/JP2011/006414
Other languages
English (en)
French (fr)
Inventor
井村　康治
中村　剛
郁雄 渕上
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Publication of WO2012070206A1 publication Critical patent/WO2012070206A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/08—Stereoscopic photography by simultaneous recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
    • H04N13/289—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0046—Movement of one or more optical elements for zooming

Definitions

  • the present invention relates to an image photographing device capable of photographing both a three-dimensional image (stereoscopic image) and a two-dimensional image (planar image), and particularly to a portable image photographing device.
  • Recent digital cameras have become highly functional, enabling high-pixel shooting with an optical zoom function.
  • Some devices have a three-dimensional image photographing function.
  • Patent Document 1 describes a zoom lens driving device used in a digital camera capable of taking a three-dimensional image.
  • the zoom lens driving device detects a position corresponding to the zoom magnification of one of the pair of left and right cameras with zoom, and the zoom magnification of the other camera is determined based on the zoom position data obtained thereby.
  • the other camera is zoom-driven so as to be the same as the zoom magnification of one camera.
  • the present invention has been made in view of such circumstances, and it is desirable to provide an image capturing apparatus capable of obtaining a high-resolution image both when capturing a three-dimensional image and when capturing a two-dimensional image. Objective.
  • An image capturing apparatus has an optical zoom function, a first camera unit that captures a first captured image at a first resolution, and a second camera that captures a second captured image at a second resolution lower than the first resolution.
  • An image photographing apparatus comprising: a two-camera unit; and a zoom magnification calculating unit that calculates a zoom magnification of the optical zoom function in which an angle of view of the first camera unit and an angle of view of the second camera unit match. At least when the state of obtaining a two-dimensional image based on the first captured image is switched to a state of obtaining a three-dimensional image based on the first captured image and the second captured image, the optical zoom function is Set to the zoom magnification.
  • the optical zoom magnification of the high-resolution first camera unit is calculated and set so as to be in the same range as the image captured by the low-resolution second camera unit.
  • the optical zoom magnification setting is canceled and shooting is performed. Therefore, 3D image shooting with high resolution is possible and 3D image shooting is possible with optical zoom magnification. Therefore, the shooting range is not narrowed, and high resolution is maintained as in the case of shooting a three-dimensional image. In this way, both high-resolution images can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
  • a user's operation is an opportunity to switch from a state in which a two-dimensional image is obtained based on the first captured image to a state in which a three-dimensional image is obtained based on the first captured image and the second captured image.
  • the user can arbitrarily switch from the state of obtaining a two-dimensional image based on the first captured image to the state of obtaining a three-dimensional image based on the first captured image and the second captured image.
  • At least one display unit is provided, and the display unit displays the two-dimensional image and / or the three-dimensional image.
  • a two-dimensional image and a three-dimensional image can be displayed by providing the display unit.
  • an image resizing unit that enlarges the size of the second captured image in accordance with the size of the first captured image
  • a first encoding unit that encodes the first captured image
  • the image resizing unit A second encoding unit that encodes the second captured image
  • an image combining unit that combines the output image from the first encoding unit and the output image from the second encoding unit
  • the image combining unit And an image storage unit that stores the output image as a three-dimensional image or an output image from the first encoding unit as a two-dimensional image.
  • a position correction unit that corrects a positional shift between the first captured image and the second captured image
  • a color correction unit that corrects a color shift between the first captured image and the second captured image
  • An image capturing apparatus has an optical zoom function, a first camera unit that captures a first captured image at a first resolution, and a second camera that captures a second captured image at a second resolution lower than the first resolution.
  • An image photographing apparatus comprising: a two-camera unit; and a zoom magnification calculating unit that calculates a zoom magnification of the optical zoom function in which an angle of view of the first camera unit and an angle of view of the second camera unit match.
  • the optical zoom function is set to the zoom magnification.
  • the optical zoom magnification of the high-resolution first camera unit is calculated and set so as to be in the same range as the image captured by the low-resolution second camera unit. An image can be obtained.
  • a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
  • FIG. 1 is a block diagram showing a schematic configuration of an image photographing apparatus according to an embodiment of the present invention.
  • A (b) The figure for demonstrating the function of the image signal analysis part of the imaging device of FIG. The flowchart for demonstrating operation
  • FIG. 1 is a block diagram showing a schematic configuration of an image photographing apparatus according to an embodiment of the present invention.
  • the image capturing apparatus 1 includes a first camera unit 10-1, a second camera unit 10-2, a zoom control unit 11, a first camera signal processing unit 12-1, Second camera signal processing unit 12-2, image signal analysis unit 13, position correction unit 14, color correction unit 15, image resizing unit 16, first encoding unit 17-1, and second encoding unit 17 -2, 2D / 3D shooting switching unit 18, image composition unit 19, image storage unit 20, display control unit 21, and display unit 22.
  • the first camera unit 10-1 includes an imaging element such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor) and has an optical zoom function, and captures a first captured image at a first resolution.
  • the second camera unit 10-2 includes an image sensor such as a CCD or a CMOS, and the second captured image has a second resolution lower than the first resolution of the first camera unit 10-1.
  • Image The zoom control unit 11 performs zoom control of the first camera unit 10-1, and sets the zoom amount of the first camera unit 10-1 to the zoom magnification calculated by the image signal analysis unit 13.
  • the first camera signal processing unit 12-1 performs general signal processing such as exposure and white balance on the first camera unit 10-1.
  • the second camera signal processing unit 12-2 performs general signal processing such as exposure and white balance on the second camera unit 10-2.
  • the image signal analysis unit 13 has a cut-out position detection function, an image magnification detection function, a zoom magnification determination function, and the like, and the angle of view of the high-resolution first camera unit 10-1 is set to a low-resolution first when shooting a three-dimensional image.
  • the magnification of the optical zoom for adjusting to the angle of view of the camera unit 10-2 is calculated. That is, the zoom magnification of the optical zoom function (function of the first camera unit 10-1) in which the angle of view of the first camera unit 10-1 and the angle of view of the second camera unit 10-2 match is calculated.
  • the image signal analysis unit 13 does not calculate the zoom magnification when capturing a two-dimensional image. Whether a 2D image is captured or a 3D image is captured is determined based on a signal output from the 2D / 3D imaging switching unit 18.
  • FIG. 2 is a diagram illustrating an example of a captured image, where (a) is a first captured image of the first camera unit 10-1, and (b) is a second captured image of the second camera unit 10-2.
  • the image signal analyzing unit 13 is the same region 31 as the region reflected in the second captured image of the second camera unit 10-2 at the angle of view 32.
  • the cutout coordinates and cutout size of the detected area 31 are calculated, and the optical zoom magnification is calculated from the cutout size and the first captured image. Then, the calculated zoom magnification is output to the zoom control unit 11.
  • the position correction unit 14 corrects the positional deviation between the first captured image of the first camera unit 10-1 and the second captured image of the second camera unit 10-2.
  • the color correction unit 15 corrects a color shift between the first captured image of the first camera unit 10-1 and the second captured image of the second camera unit 10-2.
  • the image resizing unit 16 enlarges the size of the second captured image of the second camera unit 10-2 in accordance with the size of the first captured image of the first camera unit 10-1.
  • the first encoding unit 17-1 encodes (compresses) the first captured image of the first camera unit 10-1. For example, compression is performed in JPEG (Joint Photographic Experts Group) format.
  • the second encoding unit 17-2 encodes the second captured image of the second camera unit 10-2 enlarged by the image resizing unit 16. For example, compression is performed in the JPEG format.
  • the two-dimensional / three-dimensional photographing switching unit 18 switches between two-dimensional photographing and three-dimensional photographing by a user operation.
  • the first camera unit 10-1 and the second camera unit 10 are switched.
  • a signal for invalidating the setting of the optical zoom magnification (hereinafter referred to as initial zoom magnification) for adjusting the angle of view of -2 is output to the zoom control unit 11 and the image signal analysis unit 13 and the mode is switched to three-dimensional imaging.
  • a signal that validates the setting of the initial zoom magnification is output to the zoom control unit 11 and the image signal analysis unit 13.
  • the zoom control unit 11 When the zoom control unit 11 receives a signal for invalidating the setting of the initial zoom magnification from the 2D / 3D imaging switching unit 18, the zoom control unit 11 does not perform the optical zoom control on the first camera unit 10-1, and the initial zoom magnification is set. When a signal for enabling the setting is input, optical zoom control is performed on the first camera unit 10-1. When performing the optical zoom control, the zoom control unit 11 sets the initial zoom magnification calculated by the image signal analysis unit 13 in the first camera unit 10-1.
  • the image synthesizing unit 19 synthesizes the two-dimensional image output from the first encoding unit 17-1 and the two-dimensional image output from the second encoding unit 17-2, converts it into a stereo image format, and converts the three-dimensional image Is generated. At this time, for example, JPEG format is converted to MPO (Multi-Picture Format) format.
  • the image storage unit 20 includes a non-volatile memory such as a flash memory (such as an SD memory), stores the three-dimensional image obtained by the image synthesis unit 19, and outputs the two-dimensional output from the first encoding unit 17-1. Save the image.
  • the display control unit 21 performs control to display a two-dimensional image and a three-dimensional image on the display unit 22 based on the first captured image and the second captured image output from the color correction unit 15 and corrected for color misregistration. .
  • the display control unit 21 switches between the two-dimensional image and the three-dimensional image and displays one of the images on the display unit 22.
  • the display unit 22 is, for example, a parallax barrier liquid crystal display capable of displaying a two-dimensional image and a three-dimensional image.
  • the parallax barrier type liquid crystal display has a liquid crystal that displays images for the right eye and left eye every other line, and the right eye can see only the image for the right eye, and the left eye can see the left eye
  • the display control unit 21 When displaying a three-dimensional image, the display control unit 21 alternately arranges the images for the right eye and the left eye every other line as described above, and drives the barrier liquid crystal. On the other hand, when displaying a two-dimensional image, the display control unit 21 does not drive the barrier liquid crystal and displays the data on the liquid crystal as it is without rearranging the data. Switching between the display of the 2D image and the display of the 3D image is performed based on a signal from the 2D / 3D imaging switching unit 18.
  • FIG. 3 is a flowchart for explaining the operations of the image signal analysis unit 13 and the zoom control unit 11 of the image capturing apparatus 1 of the present embodiment.
  • the image signal analyzing unit 13 determines whether or not the three-dimensional imaging is performed based on the optical zoom valid / invalid signal output from the two-dimensional / three-dimensional imaging switching unit 18 (step S1). In this determination, when it is determined that it is not three-dimensional imaging (that is, when “NO” is determined in the determination of step S1), two-dimensional imaging is performed (step S2). In the two-dimensional imaging, the first captured image from the first camera unit 10-1 subjected to signal processing by the first camera signal processing unit 12-1 is input.
  • the image signal analysis unit 13 does not perform the process and the first captured image
  • the data is output to the 1 encoding unit 17-1.
  • the first encoding unit 17-1 encodes the first captured image from the first camera unit 10-1. Then, the encoded first captured image is output to the image composition unit 19 and the image storage unit 20.
  • the image signal analysis unit 13 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
  • the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
  • the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
  • the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
  • the image signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
  • a zoom magnification (initial zoom magnification) is calculated from the cut-out size and the size of the first captured image (step S6). Then, the calculated initial zoom magnification is output to the zoom control unit 11.
  • the zoom control unit 11 drives the lens of the first camera unit 10-1 according to the calculated initial zoom magnification (step S7). Then, three-dimensional imaging is performed (step S8).
  • the image signal analysis unit 13 outputs the first captured image output from the first camera unit 10-1 during shooting of the three-dimensional image and subjected to signal processing by the first camera signal processing unit 12-1 to the first encoding unit 17-1.
  • the second captured image output from the second camera unit 10-2 and subjected to signal processing by the second camera signal processing unit 12-2 is output to the second encoding unit 17-2.
  • the high-resolution first image is captured so that the same range as that of the image captured by the low-resolution second camera unit 10-2 can be obtained during the three-dimensional image capture.
  • the optical zoom magnification of one camera unit 10-1 is calculated and set, and when taking a two-dimensional image, the optical zoom magnification setting is canceled and shooting is performed.
  • Three-dimensional imaging is possible, and in the case of two-dimensional imaging, since the initial optical zoom magnification is not set, the imaging range is not narrowed, and high resolution is maintained as in the case of three-dimensional imaging. Therefore, a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
  • the present invention has an effect that a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image, and for shooting a three-dimensional image.
  • the present invention can be applied to an image photographing apparatus such as a compound eye camera.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

　本発明の課題は、３次元画像の撮影のときも、２次元画像の撮影のときも、どうちらも高解像度の画像が得られる画像撮影装置を提供することである。　高解像度の第１カメラ部（１０－１）と、第１カメラ部（１０－１）よりも低解像度の第２カメラ部（１０－２）とを有し、３次元画像撮影時は、第２カメラ部（１０－２）で撮影された画像と同じ範囲となるように、第１カメラ部（１０－１）の光学ズーム倍率を算出して設定し、２次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行う。これにより、３次元画像撮影のときは高解像度のまま３次元撮影が可能であり、２次元撮影のときは、光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、３次元画像撮影時と同様に高解像度が保たれる。したがって、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。

Description

画像撮影装置
　本発明は、３次元画像（立体画像）と２次元画像（平面画像）の双方の画像の撮影が可能な画像撮影装置、特に携帯型の画像撮影装置に関する。
　近年のデジタルカメラは高機能化しており、光学ズーム機能を搭載した高画素撮影が可能となっている。また、３次元画像撮影機能を搭載するものも出てきている。
　特許文献１には、３次元画像の撮影が可能なデジタルカメラに用いられるズームレンズの駆動装置が記載されている。このズームレンズの駆動装置は、左右一対のズーム付きカメラのうち、一方のカメラのズーム倍率に応じた位置を検出し、これにより得られたズーム位置データに基づいて、他方のカメラのズーム倍率が一方のカメラのズーム倍率と同じになるように他方のカメラをズーム駆動する。
日本国特開平９－１８７０４０号公報
　ところで、３次元画像撮影機能と光学ズームによる高画素撮影機能を両立させるためには、２つの高画素・光学ズーム搭載のカメラが必要となり、非常にコストがかかる。これを解決するために、１つは２次元画像撮影用の高画素・光学ズームのカメラを搭載し、もう１つは３次元画像撮影に必要な低解像度のカメラを搭載することが考えられる。
　３次元画像の場合、異なる解像度・センサ・レンズを使用するため、撮影できる範囲が異なってくる。このため、２つの画像の共通する部分を切り出す必要があり、この切り出しにより、高画素で撮影したにもかかわらず、小さい画素数で記録することになる。前述した特許文献１に記載されたズームレンズの駆動装置では、左右の光学ズーム倍率に対応した位置から、他方の光学ズームで倍率を揃えるという解決策が提示されているが、このようなズームを２次元画像でも行うと、撮影できる範囲が狭くなるという課題がある。つまり、一方しか使わない状態で、且つズームアップしてしまうから、撮影できる範囲が狭くなってしまう。
　本発明は、係る事情に鑑みてなされたものであり、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像が得られる画像撮影装置を提供することを目的とする。
　本発明の画像撮影装置は、光学ズーム機能を有し、第１解像度で第１撮像画像を撮像する第１カメラ部と、前記第１解像度より低い第２解像度で第２撮像画像を撮像する第２カメラ部と、前記第１カメラ部の画角と、前記第２カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、少なくとも、前記第１撮像画像を基に２次元画像を得る状態から、前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る状態へ切り替わった場合は、前記光学ズーム機能を前記ズーム倍率に設定する。
　上記構成によれば、３次元画像撮影時は、低解像度の第２カメラ部で撮影された画像と同じ範囲となるように、高解像度の第１カメラ部の光学ズーム倍率を算出して設定し、２次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行うので、３次元画像撮影のときは高解像度のまま３次元撮影が可能であり、２次元撮影のときは光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、３次元画像撮影時と同様に高解像度が保たれる。このように、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。
　上記構成において、前記第１撮像画像を基に２次元画像を得る状態から、前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る状態へ切り替わる契機が、ユーザによる操作である。
　上記構成によれば、ユーザが任意に、第１撮像画像を基に２次元画像を得る状態から、第１撮像画像及び第２撮像画像を基に３次元画像を得る状態へ切り替えることができる。
　上記構成において、少なくとも１つの表示部を備え、前記表示部は、前記２次元画像及び／又は前記３次元画像を表示する。
　上記構成によれば、表示部を備えることで、２次元画像と３次元画像を表示することができる。
　上記構成において、前記第１撮像画像のサイズに合わせて、前記第２撮像画像のサイズを拡大する画像リサイズ部と、前記第１撮像画像をエンコードする第１エンコード部と、前記画像リサイズ部で拡大された前記第２撮像画像をエンコードする第２エンコード部と、前記第１エンコード部からの出力画像と前記第２エンコード部からの出力画像とを合成する画像合成部と、前記画像合成部で合成された画像を３次元画像として、又は前記第１のエンコード部からの出力画像を２次元画像として保存する画像保存部と、を備える。
　上記構成によれば、高解像度の３次元画像と高解像度の２次元画像を得ることができる。
　上記構成において、前記第１撮像画像と前記第２撮影画像の位置ずれを補正する位置補正部と、前記第１撮像画像と前記第２撮像画像の色ずれを補正する色補正部と、を備える。
　上記構成によれば、位置補正部と色補正部を備えることで、第１撮像画像と第２撮影画像の位置ずれを補正することができるとともに、色ずれを補正することができる。
　本発明の画像撮影装置は、光学ズーム機能を有し、第１解像度で第１撮像画像を撮像する第１カメラ部と、前記第１解像度より低い第２解像度で第２撮像画像を撮像する第２カメラ部と、前記第１カメラ部の画角と、前記第２カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る場合は、前記光学ズーム機能を前記ズーム倍率に設定する。
　上記構成によれば、低解像度の第２カメラ部で撮影された画像と同じ範囲となるように、高解像度の第１カメラ部の光学ズーム倍率を算出して設定するので、高解像度の３次元画像を得ることができる。
　本発明によれば、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像が得られる。
本発明の一実施の形態に係る画像撮影装置の概略構成を示すブロック図 （ａ），（ｂ）図１の画像撮影装置の画像信号解析部の機能を説明するための図 図１の画像撮影装置の画像信号解析部とズーム制御部の動作を説明するためのフローチャート
　以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
　図１は、本発明の一実施の形態に係る画像撮影装置の概略構成を示すブロック図である。図１において、本実施の形態の画像撮影装置１は、第１カメラ部１０－１と、第２カメラ部１０－２と、ズーム制御部１１と、第１カメラ信号処理部１２－１と、第２カメラ信号処理部１２－２と、画像信号解析部１３と、位置補正部１４と、色補正部１５と、画像リサイズ部１６と、第１エンコード部１７－１と、第２エンコード部１７－２と、２次元／３次元撮影切替部１８と、画像合成部１９と、画像保存部２０と、表示制御部２１と、表示部２２とを備える。
　第１カメラ部１０－１は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を備えるとともに光学ズーム機能を有し、第１解像度で第１撮像画像を撮像する。第２カメラ部１０－２は、第１カメラ部１０－１と同様にＣＣＤやＣＭＯＳ等の撮像素子を備え、第１カメラ部１０－１の第１解像度より低い第２解像度で第２撮像画像を撮像する。ズーム制御部１１は、第１カメラ部１０－１のズーム制御を行うものであり、画像信号解析部１３で算出されたズーム倍率に第１カメラ部１０－１のズーム量を設定する。第１カメラ信号処理部１２－１は、第１カメラ部１０－１に対し、露出、ホワイトバランスなど一般的な信号処理を行う。第２カメラ信号処理部１２－２は、第２カメラ部１０－２に対し、露出、ホワイトバランスなど一般的な信号処理を行う。
　画像信号解析部１３は、切り出し位置検出機能、像倍率検出機能及びズーム倍率決定機能等を有し、３次元画像撮影時に、高解像度の第１カメラ部１０－１の画角を低解像度の第２カメラ部１０－２の画角に合わせるための光学ズームの倍率を算出する。即ち、第１カメラ部１０－１の画角と第２カメラ部１０－２の画角が一致する光学ズーム機能（第１カメラ部１０－１の機能）のズーム倍率を算出する。画像信号解析部１３は、２次元画像撮影時にはズーム倍率の算出は行わない。また、２次元画像撮影時か３次元画像撮影時かは２次元／３次元撮影切替部１８から出力される信号に基づいて判定する。
　図２は、撮像画像の一例を示す図であり、（ａ）は第１カメラ部１０－１の第１撮像画像、（ｂ）は第２カメラ部１０－２の第２撮像画像である。画像信号解析部１３は、画角３０の第１カメラ部１０－１の第１撮像画像において、画角３２の第２カメラ部１０－２の第２撮像画像に映っている領域と同じ領域３１を検出し、検出した領域３１の切り出し座標と切り出しサイズを算出し、切り出しサイズと第１撮像画像から光学ズームの倍率を算出する。そして、算出したズーム倍率をズーム制御部１１へ出力する。
　図１に戻り、位置補正部１４は、第１カメラ部１０－１の第１撮像画像と第２カメラ部１０－２の第２撮像画像の位置ずれを補正する。色補正部１５は、第１カメラ部１０－１の第１撮像画像と第２カメラ部１０－２の第２撮像画像の色ずれを補正する。画像リサイズ部１６は、第１カメラ部１０－１の第１撮像画像のサイズに合わせて、第２カメラ部１０－２の第２撮像画像のサイズを拡大する。第１エンコード部１７－１は、第１カメラ部１０－１の第１撮像画像をエンコード（圧縮）する。例えばＪＰＥＧ（Joint Photographic Experts Group）形式で圧縮する。第２エンコード部１７－２は、画像リサイズ部１６で拡大された第２カメラ部１０－２の第２撮像画像をエンコードする。例えばＪＰＥＧ形式で圧縮する。
　２次元／３次元撮影切替部１８は、ユーザ操作によって２次元撮影と３次元撮影を切替えるものであり、２次元撮影に切替えられたときは、第１カメラ部１０－１と第２カメラ部１０－２の画角を合わせるための光学ズーム倍率（以下、初期ズーム倍率）の設定を無効とする信号をズーム制御部１１及び画像信号解析部１３へ出力し、３次元撮影に切替えられたときは、初期ズーム倍率の設定を有効とする信号をズーム制御部１１及び画像信号解析部１３へ出力する。ズーム制御部１１は、２次元／３次元撮影切替部１８からの初期ズーム倍率の設定を無効とする信号を入力すると、第１カメラ部１０－１に対する光学ズーム制御を行わず、初期ズーム倍率の設定を有効とする信号を入力すると、第１カメラ部１０－１に対する光学ズーム制御を行う。ズーム制御部１１は、光学ズーム制御を行うときは、第１カメラ部１０－１に、画像信号解析部１３で計算された初期ズーム倍率を設定する。
　画像合成部１９は、第１エンコード部１７－１から出力される２次元画像と第２エンコード部１７－２から出力される２次元画像とを合成し、ステレオ画像フォーマットに変換して３次元画像を生成する。この際、例えばＪＰＥＧ形式からＭＰＯ（Multi-Picture Format）形式に変換する。画像保存部２０は、フラッシュメモリ（ＳＤメモリなど）の不揮発性メモリを有し、画像合成部１９で得られた３次元画像を保存するとともに、第１エンコード部１７－１から出力される２次元画像を保存する。
　表示制御部２１は、色補正部１５から出力される、色ずれが補正された第１撮像画像と第２撮像画像に基づいて２次元画像及び３次元画像を表示部２２に表示する制御を行う。この場合、表示制御部２１は、２次元画像及び３次元画像を切替えていずれか一方の画像を表示部２２に表示する。表示部２２は、例えば２次元画像と３次元画像の表示が可能な視差バリア式の液晶表示器である。視差バリア式の液晶表示器は、右目用の画像と左目用の画像を１ラインおきに配置して表示する液晶と、右目には右目用の画像だけが見えるように、また、左目には左目用の画像だけが見えるように視線を遮るバリア液晶の２つの液晶を有する表示器である。
　３次元画像を表示する場合は、表示制御部２１は、上記のように１ラインおきに右目用と左目用の画像を交互に配置し、バリア液晶を駆動する。一方、２次元画像を表示する場合は、表示制御部２１は、バリア液晶を駆動せず、また、データの並べ替えを行わずにそのまま液晶に表示を行う。２次元画像の表示と３次元画像の表示の切替は、２次元／３次元撮影切替部１８からの信号に基づいて行われる。
　次に、本実施の形態の画像撮影装置１の動作を説明する。
　図３は、本実施の形態の画像撮影装置１の画像信号解析部１３とズーム制御部１１の動作を説明するためのフローチャートである。同図において、画像信号解析部１３は、２次元／３次元撮影切替部１８から出力される光学ズームの有効／無効信号に基づき、３次元撮影かどうか判定する（ステップＳ１）。この判定において、３次元撮影でないと判断した場合（即ち、ステップＳ１の判定で「ＮＯ」と判断した場合）、２次元撮影を行う（ステップＳ２）。２次元撮影では、第１カメラ信号処理部１２－１で信号処理された第１カメラ部１０－１からの第１撮像画像を入力する。２次元撮影では第１カメラ部１０－１の画角と第２カメラ部１０－２の画角を合わせる必要がないので、画像信号解析部１３はその処理を行うことなく第１撮像画像を第１エンコード部１７－１側へ出力する。第１エンコード部１７－１は、第１カメラ部１０－１からの第１撮像画像をエンコードする。そして、エンコードした第１撮像画像を画像合成部１９及び画像保存部２０へ出力する。
　また、画像信号解析部１３は、ステップＳ１の判定において、３次元撮影であると判断した場合（即ち、ステップＳ１の判定で「ＹＥＳ」と判断した場合）、第１カメラ信号処理部１２－１及び第２カメラ信号処理部１２－２を介して第２カメラ部１０－２からの第２撮像画像と第１カメラ部１０－１からの第１撮像画像を入力する（ステップＳ３）。画像信号解析部１３は、第１撮像画像及び第２撮像画像を入力すると、これらの画像を比較し、第２撮像画像に映っている領域と同じ領域を第１撮像画像上で検出する（ステップＳ４）。次いで、画像信号解析部１３は、第１撮像画像上で検出した領域の切り出し座標と切り出しサイズを算出する（ステップＳ５）。次いで、切り出しサイズと第１撮像画像のサイズからズーム倍率（初期ズーム倍率）を算出する（ステップＳ６）。そして、算出した初期ズーム倍率をズーム制御部１１へ出力する。ズーム制御部１１は、画像信号解析部１３からの初期ズーム倍率を入力すると、算出された初期ズーム倍率に応じて第１カメラ部１０－１のレンズを駆動する（ステップＳ７）。そして、３次元撮影を行う（ステップＳ８）。画像信号解析部１３は、３次元画像の撮影中第１カメラ部１０－１から出力され、第１カメラ信号処理部１２－１で信号処理された第１撮像画像を第１エンコード部１７－１へ向けて出力するとともに、第２カメラ部１０－２から出力され、第２カメラ信号処理部１２－２で信号処理された第２撮像画像を第２エンコード部１７－２へ出力する。
　このように本実施の形態の画像撮影装置１によれば、３次元画像撮影時は、低解像度の第２カメラ部１０－２で撮影された画像と同じ範囲となるように、高解像度の第１カメラ部１０－１の光学ズーム倍率を算出して設定し、２次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行うので、３次元画像撮影のときは高解像度のまま３次元撮影が可能であり、２次元撮影のときは、初期光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、３次元画像撮影時と同様に高解像度が保たれる。したがって、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。
　本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
　本出願は、２０１０年１１月２５日出願の日本特許出願（特願２０１０－２６２２１０）に基づくものであり、その内容はここに参照として取り込まれる。
　本発明は、３次元画像の撮影のときも、２次元画像の撮影のときも、どちらも高解像度の画像を得ることができるといった効果を有し、３次元画像を撮影する３次元画像撮影用の複眼カメラ等の画像撮影装置への適用が可能である。
　１　画像撮影装置
　１０－１　第１カメラ部
　１０－２　第２カメラ部
　１１　ズーム制御部
　１２－１　第１カメラ信号処理部
　１２－２　第２カメラ信号処理部
　１３　画像信号解析部
　１４　位置補正部
　１５　色補正部
　１６　画像リサイズ部
　１７－１　第１エンコード部
　１７－２　第２エンコード部
　１８　２次元／３次元撮影切替部
　１９　画像合成部
　２０　画像保存部
　２１　表示制御部
　２２　表示部

Claims (6)

  1. 　光学ズーム機能を有し、第１解像度で第１撮像画像を撮像する第１カメラ部と、
    　前記第１解像度より低い第２解像度で第２撮像画像を撮像する第２カメラ部と、
    　前記第１カメラ部の画角と、前記第２カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、
    　少なくとも、前記第１撮像画像を基に２次元画像を得る状態から、前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る状態へ切り替わった場合は、前記光学ズーム機能を前記ズーム倍率に設定する画像撮影装置。
  2. 　請求項１に記載の画像撮影装置であって、
    　前記第１撮像画像を基に２次元画像を得る状態から、前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る状態へ切り替わる契機が、ユーザによる操作である画像撮影装置。
  3. 　請求項１又は請求項２に記載の画像撮影装置であって、
    　少なくとも１つの表示部を備え、
    　前記表示部は、前記２次元画像及び／又は前記３次元画像を表示する画像撮影装置。
  4. 　請求項１から請求項３のいずれか１項に記載の画像撮影装置であって、
    　前記第１撮像画像のサイズに合わせて、前記第２撮像画像のサイズを拡大する画像リサイズ部と、
    　前記第１撮像画像をエンコードする第１エンコード部と、
    　前記画像リサイズ部で拡大された前記第２撮像画像をエンコードする第２エンコード部と、
    　前記第１エンコード部からの出力画像と前記第２エンコード部からの出力画像とを合成する画像合成部と、
    　前記画像合成部で合成された画像を３次元画像として、又は前記第１のエンコード部からの出力画像を２次元画像として保存する画像保存部と、を備える画像撮影装置。
  5. 　請求項４に記載の画像撮影装置であって、
    　前記第１撮像画像と前記第２撮像画像の位置ずれを補正する位置補正部と、
    　前記第１撮像画像と前記第２撮像画像の色ずれを補正する色補正部と、を備える画像撮影装置。
  6. 　光学ズーム機能を有し、第１解像度で第１撮像画像を撮像する第１カメラ部と、
    　前記第１解像度より低い第２解像度で第２撮像画像を撮像する第２カメラ部と、
    　前記第１カメラ部の画角と、前記第２カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、
    　前記第１撮像画像及び前記第２撮像画像を基に３次元画像を得る場合は、前記光学ズーム機能を前記ズーム倍率に設定する画像撮影装置。
PCT/JP2011/006414 2010-11-25 2011-11-17 画像撮影装置 WO2012070206A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010262210 2010-11-25
JP2010-262210 2010-11-25

Publications (1)

Publication Number Publication Date
WO2012070206A1 true WO2012070206A1 (ja) 2012-05-31

Family

ID=46145577

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/006414 WO2012070206A1 (ja) 2010-11-25 2011-11-17 画像撮影装置

Country Status (1)

Country Link
WO (1) WO2012070206A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0937302A (ja) * 1995-07-18 1997-02-07 Olympus Optical Co Ltd 立体撮像装置
JP2010252186A (ja) * 2009-04-17 2010-11-04 Nec Casio Mobile Communications Ltd 端末装置及びプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0937302A (ja) * 1995-07-18 1997-02-07 Olympus Optical Co Ltd 立体撮像装置
JP2010252186A (ja) * 2009-04-17 2010-11-04 Nec Casio Mobile Communications Ltd 端末装置及びプログラム

Similar Documents

Publication Publication Date Title
JP5679978B2 (ja) 立体視用画像位置合わせ装置、立体視用画像位置合わせ方法、及びそのプログラム
JP5468482B2 (ja) 画像撮像装置
JP5640143B2 (ja) 撮像装置及び撮像方法
US20140340543A1 (en) Image-processing apparatus and image-processing method
JP5469258B2 (ja) 撮像装置および撮像方法
US8593531B2 (en) Imaging device, image processing method, and computer program
JP6478511B2 (ja) 画像処理方法、画像処理装置、複眼撮像装置、画像処理プログラム、および、記憶媒体
JP2010230879A (ja) 複眼カメラ装置
JP2012199621A (ja) 複眼撮像装置
JP5214547B2 (ja) 画像表示装置および方法並びにプログラム
JP6786311B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体
JP6155471B2 (ja) 画像生成装置、撮像装置および画像生成方法
JP2009258005A (ja) 三次元測定装置及び三次元測定方法
JP2013247543A (ja) 撮像装置、表示装置、および画像処理方法、並びにプログラム
JP6732440B2 (ja) 画像処理装置、画像処理方法、及びそのプログラム
US20130343635A1 (en) Image processing apparatus, image processing method, and program
JP2012235198A (ja) 撮像装置
WO2012070206A1 (ja) 画像撮影装置
JP2008177972A (ja) 撮像装置
JP2015080169A (ja) 撮像装置及びその制御方法
JP2012124650A (ja) 撮像装置および撮像方法
JP2005229280A (ja) 画像処理装置および方法並びにプログラム
JP2013062557A (ja) デジタル撮影装置及び、３ｄ撮影方法
JP2016134886A (ja) 撮像装置およびその制御方法
JP2011135374A (ja) ３次元デジタルカメラ

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11843270

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11843270

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP