WO2012070206A1 - 画像撮影装置 - Google Patents
画像撮影装置 Download PDFInfo
- Publication number
- WO2012070206A1 WO2012070206A1 PCT/JP2011/006414 JP2011006414W WO2012070206A1 WO 2012070206 A1 WO2012070206 A1 WO 2012070206A1 JP 2011006414 W JP2011006414 W JP 2011006414W WO 2012070206 A1 WO2012070206 A1 WO 2012070206A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image
- unit
- captured image
- camera
- dimensional
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/08—Stereoscopic photography by simultaneous recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
- H04N13/289—Switching between monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
- G03B2205/0046—Movement of one or more optical elements for zooming
Definitions
- the present invention relates to an image photographing device capable of photographing both a three-dimensional image (stereoscopic image) and a two-dimensional image (planar image), and particularly to a portable image photographing device.
- Recent digital cameras have become highly functional, enabling high-pixel shooting with an optical zoom function.
- Some devices have a three-dimensional image photographing function.
- Patent Document 1 describes a zoom lens driving device used in a digital camera capable of taking a three-dimensional image.
- the zoom lens driving device detects a position corresponding to the zoom magnification of one of the pair of left and right cameras with zoom, and the zoom magnification of the other camera is determined based on the zoom position data obtained thereby.
- the other camera is zoom-driven so as to be the same as the zoom magnification of one camera.
- the present invention has been made in view of such circumstances, and it is desirable to provide an image capturing apparatus capable of obtaining a high-resolution image both when capturing a three-dimensional image and when capturing a two-dimensional image. Objective.
- An image capturing apparatus has an optical zoom function, a first camera unit that captures a first captured image at a first resolution, and a second camera that captures a second captured image at a second resolution lower than the first resolution.
- An image photographing apparatus comprising: a two-camera unit; and a zoom magnification calculating unit that calculates a zoom magnification of the optical zoom function in which an angle of view of the first camera unit and an angle of view of the second camera unit match. At least when the state of obtaining a two-dimensional image based on the first captured image is switched to a state of obtaining a three-dimensional image based on the first captured image and the second captured image, the optical zoom function is Set to the zoom magnification.
- the optical zoom magnification of the high-resolution first camera unit is calculated and set so as to be in the same range as the image captured by the low-resolution second camera unit.
- the optical zoom magnification setting is canceled and shooting is performed. Therefore, 3D image shooting with high resolution is possible and 3D image shooting is possible with optical zoom magnification. Therefore, the shooting range is not narrowed, and high resolution is maintained as in the case of shooting a three-dimensional image. In this way, both high-resolution images can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
- a user's operation is an opportunity to switch from a state in which a two-dimensional image is obtained based on the first captured image to a state in which a three-dimensional image is obtained based on the first captured image and the second captured image.
- the user can arbitrarily switch from the state of obtaining a two-dimensional image based on the first captured image to the state of obtaining a three-dimensional image based on the first captured image and the second captured image.
- At least one display unit is provided, and the display unit displays the two-dimensional image and / or the three-dimensional image.
- a two-dimensional image and a three-dimensional image can be displayed by providing the display unit.
- an image resizing unit that enlarges the size of the second captured image in accordance with the size of the first captured image
- a first encoding unit that encodes the first captured image
- the image resizing unit A second encoding unit that encodes the second captured image
- an image combining unit that combines the output image from the first encoding unit and the output image from the second encoding unit
- the image combining unit And an image storage unit that stores the output image as a three-dimensional image or an output image from the first encoding unit as a two-dimensional image.
- a position correction unit that corrects a positional shift between the first captured image and the second captured image
- a color correction unit that corrects a color shift between the first captured image and the second captured image
- An image capturing apparatus has an optical zoom function, a first camera unit that captures a first captured image at a first resolution, and a second camera that captures a second captured image at a second resolution lower than the first resolution.
- An image photographing apparatus comprising: a two-camera unit; and a zoom magnification calculating unit that calculates a zoom magnification of the optical zoom function in which an angle of view of the first camera unit and an angle of view of the second camera unit match.
- the optical zoom function is set to the zoom magnification.
- the optical zoom magnification of the high-resolution first camera unit is calculated and set so as to be in the same range as the image captured by the low-resolution second camera unit. An image can be obtained.
- a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
- FIG. 1 is a block diagram showing a schematic configuration of an image photographing apparatus according to an embodiment of the present invention.
- A (b) The figure for demonstrating the function of the image signal analysis part of the imaging device of FIG. The flowchart for demonstrating operation
- FIG. 1 is a block diagram showing a schematic configuration of an image photographing apparatus according to an embodiment of the present invention.
- the image capturing apparatus 1 includes a first camera unit 10-1, a second camera unit 10-2, a zoom control unit 11, a first camera signal processing unit 12-1, Second camera signal processing unit 12-2, image signal analysis unit 13, position correction unit 14, color correction unit 15, image resizing unit 16, first encoding unit 17-1, and second encoding unit 17 -2, 2D / 3D shooting switching unit 18, image composition unit 19, image storage unit 20, display control unit 21, and display unit 22.
- the first camera unit 10-1 includes an imaging element such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor) and has an optical zoom function, and captures a first captured image at a first resolution.
- the second camera unit 10-2 includes an image sensor such as a CCD or a CMOS, and the second captured image has a second resolution lower than the first resolution of the first camera unit 10-1.
- Image The zoom control unit 11 performs zoom control of the first camera unit 10-1, and sets the zoom amount of the first camera unit 10-1 to the zoom magnification calculated by the image signal analysis unit 13.
- the first camera signal processing unit 12-1 performs general signal processing such as exposure and white balance on the first camera unit 10-1.
- the second camera signal processing unit 12-2 performs general signal processing such as exposure and white balance on the second camera unit 10-2.
- the image signal analysis unit 13 has a cut-out position detection function, an image magnification detection function, a zoom magnification determination function, and the like, and the angle of view of the high-resolution first camera unit 10-1 is set to a low-resolution first when shooting a three-dimensional image.
- the magnification of the optical zoom for adjusting to the angle of view of the camera unit 10-2 is calculated. That is, the zoom magnification of the optical zoom function (function of the first camera unit 10-1) in which the angle of view of the first camera unit 10-1 and the angle of view of the second camera unit 10-2 match is calculated.
- the image signal analysis unit 13 does not calculate the zoom magnification when capturing a two-dimensional image. Whether a 2D image is captured or a 3D image is captured is determined based on a signal output from the 2D / 3D imaging switching unit 18.
- FIG. 2 is a diagram illustrating an example of a captured image, where (a) is a first captured image of the first camera unit 10-1, and (b) is a second captured image of the second camera unit 10-2.
- the image signal analyzing unit 13 is the same region 31 as the region reflected in the second captured image of the second camera unit 10-2 at the angle of view 32.
- the cutout coordinates and cutout size of the detected area 31 are calculated, and the optical zoom magnification is calculated from the cutout size and the first captured image. Then, the calculated zoom magnification is output to the zoom control unit 11.
- the position correction unit 14 corrects the positional deviation between the first captured image of the first camera unit 10-1 and the second captured image of the second camera unit 10-2.
- the color correction unit 15 corrects a color shift between the first captured image of the first camera unit 10-1 and the second captured image of the second camera unit 10-2.
- the image resizing unit 16 enlarges the size of the second captured image of the second camera unit 10-2 in accordance with the size of the first captured image of the first camera unit 10-1.
- the first encoding unit 17-1 encodes (compresses) the first captured image of the first camera unit 10-1. For example, compression is performed in JPEG (Joint Photographic Experts Group) format.
- the second encoding unit 17-2 encodes the second captured image of the second camera unit 10-2 enlarged by the image resizing unit 16. For example, compression is performed in the JPEG format.
- the two-dimensional / three-dimensional photographing switching unit 18 switches between two-dimensional photographing and three-dimensional photographing by a user operation.
- the first camera unit 10-1 and the second camera unit 10 are switched.
- a signal for invalidating the setting of the optical zoom magnification (hereinafter referred to as initial zoom magnification) for adjusting the angle of view of -2 is output to the zoom control unit 11 and the image signal analysis unit 13 and the mode is switched to three-dimensional imaging.
- a signal that validates the setting of the initial zoom magnification is output to the zoom control unit 11 and the image signal analysis unit 13.
- the zoom control unit 11 When the zoom control unit 11 receives a signal for invalidating the setting of the initial zoom magnification from the 2D / 3D imaging switching unit 18, the zoom control unit 11 does not perform the optical zoom control on the first camera unit 10-1, and the initial zoom magnification is set. When a signal for enabling the setting is input, optical zoom control is performed on the first camera unit 10-1. When performing the optical zoom control, the zoom control unit 11 sets the initial zoom magnification calculated by the image signal analysis unit 13 in the first camera unit 10-1.
- the image synthesizing unit 19 synthesizes the two-dimensional image output from the first encoding unit 17-1 and the two-dimensional image output from the second encoding unit 17-2, converts it into a stereo image format, and converts the three-dimensional image Is generated. At this time, for example, JPEG format is converted to MPO (Multi-Picture Format) format.
- the image storage unit 20 includes a non-volatile memory such as a flash memory (such as an SD memory), stores the three-dimensional image obtained by the image synthesis unit 19, and outputs the two-dimensional output from the first encoding unit 17-1. Save the image.
- the display control unit 21 performs control to display a two-dimensional image and a three-dimensional image on the display unit 22 based on the first captured image and the second captured image output from the color correction unit 15 and corrected for color misregistration. .
- the display control unit 21 switches between the two-dimensional image and the three-dimensional image and displays one of the images on the display unit 22.
- the display unit 22 is, for example, a parallax barrier liquid crystal display capable of displaying a two-dimensional image and a three-dimensional image.
- the parallax barrier type liquid crystal display has a liquid crystal that displays images for the right eye and left eye every other line, and the right eye can see only the image for the right eye, and the left eye can see the left eye
- the display control unit 21 When displaying a three-dimensional image, the display control unit 21 alternately arranges the images for the right eye and the left eye every other line as described above, and drives the barrier liquid crystal. On the other hand, when displaying a two-dimensional image, the display control unit 21 does not drive the barrier liquid crystal and displays the data on the liquid crystal as it is without rearranging the data. Switching between the display of the 2D image and the display of the 3D image is performed based on a signal from the 2D / 3D imaging switching unit 18.
- FIG. 3 is a flowchart for explaining the operations of the image signal analysis unit 13 and the zoom control unit 11 of the image capturing apparatus 1 of the present embodiment.
- the image signal analyzing unit 13 determines whether or not the three-dimensional imaging is performed based on the optical zoom valid / invalid signal output from the two-dimensional / three-dimensional imaging switching unit 18 (step S1). In this determination, when it is determined that it is not three-dimensional imaging (that is, when “NO” is determined in the determination of step S1), two-dimensional imaging is performed (step S2). In the two-dimensional imaging, the first captured image from the first camera unit 10-1 subjected to signal processing by the first camera signal processing unit 12-1 is input.
- the image signal analysis unit 13 does not perform the process and the first captured image
- the data is output to the 1 encoding unit 17-1.
- the first encoding unit 17-1 encodes the first captured image from the first camera unit 10-1. Then, the encoded first captured image is output to the image composition unit 19 and the image storage unit 20.
- the image signal analysis unit 13 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
- the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
- the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
- the first camera signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
- the image signal processing unit 12-1 determines that the three-dimensional imaging is performed in the determination of step S1 (that is, when “YES” is determined in the determination of step S1)
- a zoom magnification (initial zoom magnification) is calculated from the cut-out size and the size of the first captured image (step S6). Then, the calculated initial zoom magnification is output to the zoom control unit 11.
- the zoom control unit 11 drives the lens of the first camera unit 10-1 according to the calculated initial zoom magnification (step S7). Then, three-dimensional imaging is performed (step S8).
- the image signal analysis unit 13 outputs the first captured image output from the first camera unit 10-1 during shooting of the three-dimensional image and subjected to signal processing by the first camera signal processing unit 12-1 to the first encoding unit 17-1.
- the second captured image output from the second camera unit 10-2 and subjected to signal processing by the second camera signal processing unit 12-2 is output to the second encoding unit 17-2.
- the high-resolution first image is captured so that the same range as that of the image captured by the low-resolution second camera unit 10-2 can be obtained during the three-dimensional image capture.
- the optical zoom magnification of one camera unit 10-1 is calculated and set, and when taking a two-dimensional image, the optical zoom magnification setting is canceled and shooting is performed.
- Three-dimensional imaging is possible, and in the case of two-dimensional imaging, since the initial optical zoom magnification is not set, the imaging range is not narrowed, and high resolution is maintained as in the case of three-dimensional imaging. Therefore, a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image.
- the present invention has an effect that a high-resolution image can be obtained both when shooting a three-dimensional image and when shooting a two-dimensional image, and for shooting a three-dimensional image.
- the present invention can be applied to an image photographing apparatus such as a compound eye camera.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本発明の課題は、3次元画像の撮影のときも、2次元画像の撮影のときも、どうちらも高解像度の画像が得られる画像撮影装置を提供することである。 高解像度の第1カメラ部(10-1)と、第1カメラ部(10-1)よりも低解像度の第2カメラ部(10-2)とを有し、3次元画像撮影時は、第2カメラ部(10-2)で撮影された画像と同じ範囲となるように、第1カメラ部(10-1)の光学ズーム倍率を算出して設定し、2次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行う。これにより、3次元画像撮影のときは高解像度のまま3次元撮影が可能であり、2次元撮影のときは、光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、3次元画像撮影時と同様に高解像度が保たれる。したがって、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。
Description
本発明は、3次元画像(立体画像)と2次元画像(平面画像)の双方の画像の撮影が可能な画像撮影装置、特に携帯型の画像撮影装置に関する。
近年のデジタルカメラは高機能化しており、光学ズーム機能を搭載した高画素撮影が可能となっている。また、3次元画像撮影機能を搭載するものも出てきている。
特許文献1には、3次元画像の撮影が可能なデジタルカメラに用いられるズームレンズの駆動装置が記載されている。このズームレンズの駆動装置は、左右一対のズーム付きカメラのうち、一方のカメラのズーム倍率に応じた位置を検出し、これにより得られたズーム位置データに基づいて、他方のカメラのズーム倍率が一方のカメラのズーム倍率と同じになるように他方のカメラをズーム駆動する。
ところで、3次元画像撮影機能と光学ズームによる高画素撮影機能を両立させるためには、2つの高画素・光学ズーム搭載のカメラが必要となり、非常にコストがかかる。これを解決するために、1つは2次元画像撮影用の高画素・光学ズームのカメラを搭載し、もう1つは3次元画像撮影に必要な低解像度のカメラを搭載することが考えられる。
3次元画像の場合、異なる解像度・センサ・レンズを使用するため、撮影できる範囲が異なってくる。このため、2つの画像の共通する部分を切り出す必要があり、この切り出しにより、高画素で撮影したにもかかわらず、小さい画素数で記録することになる。前述した特許文献1に記載されたズームレンズの駆動装置では、左右の光学ズーム倍率に対応した位置から、他方の光学ズームで倍率を揃えるという解決策が提示されているが、このようなズームを2次元画像でも行うと、撮影できる範囲が狭くなるという課題がある。つまり、一方しか使わない状態で、且つズームアップしてしまうから、撮影できる範囲が狭くなってしまう。
本発明は、係る事情に鑑みてなされたものであり、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像が得られる画像撮影装置を提供することを目的とする。
本発明の画像撮影装置は、光学ズーム機能を有し、第1解像度で第1撮像画像を撮像する第1カメラ部と、前記第1解像度より低い第2解像度で第2撮像画像を撮像する第2カメラ部と、前記第1カメラ部の画角と、前記第2カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、少なくとも、前記第1撮像画像を基に2次元画像を得る状態から、前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る状態へ切り替わった場合は、前記光学ズーム機能を前記ズーム倍率に設定する。
上記構成によれば、3次元画像撮影時は、低解像度の第2カメラ部で撮影された画像と同じ範囲となるように、高解像度の第1カメラ部の光学ズーム倍率を算出して設定し、2次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行うので、3次元画像撮影のときは高解像度のまま3次元撮影が可能であり、2次元撮影のときは光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、3次元画像撮影時と同様に高解像度が保たれる。このように、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。
上記構成において、前記第1撮像画像を基に2次元画像を得る状態から、前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る状態へ切り替わる契機が、ユーザによる操作である。
上記構成によれば、ユーザが任意に、第1撮像画像を基に2次元画像を得る状態から、第1撮像画像及び第2撮像画像を基に3次元画像を得る状態へ切り替えることができる。
上記構成において、少なくとも1つの表示部を備え、前記表示部は、前記2次元画像及び/又は前記3次元画像を表示する。
上記構成によれば、表示部を備えることで、2次元画像と3次元画像を表示することができる。
上記構成において、前記第1撮像画像のサイズに合わせて、前記第2撮像画像のサイズを拡大する画像リサイズ部と、前記第1撮像画像をエンコードする第1エンコード部と、前記画像リサイズ部で拡大された前記第2撮像画像をエンコードする第2エンコード部と、前記第1エンコード部からの出力画像と前記第2エンコード部からの出力画像とを合成する画像合成部と、前記画像合成部で合成された画像を3次元画像として、又は前記第1のエンコード部からの出力画像を2次元画像として保存する画像保存部と、を備える。
上記構成によれば、高解像度の3次元画像と高解像度の2次元画像を得ることができる。
上記構成において、前記第1撮像画像と前記第2撮影画像の位置ずれを補正する位置補正部と、前記第1撮像画像と前記第2撮像画像の色ずれを補正する色補正部と、を備える。
上記構成によれば、位置補正部と色補正部を備えることで、第1撮像画像と第2撮影画像の位置ずれを補正することができるとともに、色ずれを補正することができる。
本発明の画像撮影装置は、光学ズーム機能を有し、第1解像度で第1撮像画像を撮像する第1カメラ部と、前記第1解像度より低い第2解像度で第2撮像画像を撮像する第2カメラ部と、前記第1カメラ部の画角と、前記第2カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る場合は、前記光学ズーム機能を前記ズーム倍率に設定する。
上記構成によれば、低解像度の第2カメラ部で撮影された画像と同じ範囲となるように、高解像度の第1カメラ部の光学ズーム倍率を算出して設定するので、高解像度の3次元画像を得ることができる。
本発明によれば、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像が得られる。
以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
図1は、本発明の一実施の形態に係る画像撮影装置の概略構成を示すブロック図である。図1において、本実施の形態の画像撮影装置1は、第1カメラ部10-1と、第2カメラ部10-2と、ズーム制御部11と、第1カメラ信号処理部12-1と、第2カメラ信号処理部12-2と、画像信号解析部13と、位置補正部14と、色補正部15と、画像リサイズ部16と、第1エンコード部17-1と、第2エンコード部17-2と、2次元/3次元撮影切替部18と、画像合成部19と、画像保存部20と、表示制御部21と、表示部22とを備える。
第1カメラ部10-1は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子を備えるとともに光学ズーム機能を有し、第1解像度で第1撮像画像を撮像する。第2カメラ部10-2は、第1カメラ部10-1と同様にCCDやCMOS等の撮像素子を備え、第1カメラ部10-1の第1解像度より低い第2解像度で第2撮像画像を撮像する。ズーム制御部11は、第1カメラ部10-1のズーム制御を行うものであり、画像信号解析部13で算出されたズーム倍率に第1カメラ部10-1のズーム量を設定する。第1カメラ信号処理部12-1は、第1カメラ部10-1に対し、露出、ホワイトバランスなど一般的な信号処理を行う。第2カメラ信号処理部12-2は、第2カメラ部10-2に対し、露出、ホワイトバランスなど一般的な信号処理を行う。
画像信号解析部13は、切り出し位置検出機能、像倍率検出機能及びズーム倍率決定機能等を有し、3次元画像撮影時に、高解像度の第1カメラ部10-1の画角を低解像度の第2カメラ部10-2の画角に合わせるための光学ズームの倍率を算出する。即ち、第1カメラ部10-1の画角と第2カメラ部10-2の画角が一致する光学ズーム機能(第1カメラ部10-1の機能)のズーム倍率を算出する。画像信号解析部13は、2次元画像撮影時にはズーム倍率の算出は行わない。また、2次元画像撮影時か3次元画像撮影時かは2次元/3次元撮影切替部18から出力される信号に基づいて判定する。
図2は、撮像画像の一例を示す図であり、(a)は第1カメラ部10-1の第1撮像画像、(b)は第2カメラ部10-2の第2撮像画像である。画像信号解析部13は、画角30の第1カメラ部10-1の第1撮像画像において、画角32の第2カメラ部10-2の第2撮像画像に映っている領域と同じ領域31を検出し、検出した領域31の切り出し座標と切り出しサイズを算出し、切り出しサイズと第1撮像画像から光学ズームの倍率を算出する。そして、算出したズーム倍率をズーム制御部11へ出力する。
図1に戻り、位置補正部14は、第1カメラ部10-1の第1撮像画像と第2カメラ部10-2の第2撮像画像の位置ずれを補正する。色補正部15は、第1カメラ部10-1の第1撮像画像と第2カメラ部10-2の第2撮像画像の色ずれを補正する。画像リサイズ部16は、第1カメラ部10-1の第1撮像画像のサイズに合わせて、第2カメラ部10-2の第2撮像画像のサイズを拡大する。第1エンコード部17-1は、第1カメラ部10-1の第1撮像画像をエンコード(圧縮)する。例えばJPEG(Joint Photographic Experts Group)形式で圧縮する。第2エンコード部17-2は、画像リサイズ部16で拡大された第2カメラ部10-2の第2撮像画像をエンコードする。例えばJPEG形式で圧縮する。
2次元/3次元撮影切替部18は、ユーザ操作によって2次元撮影と3次元撮影を切替えるものであり、2次元撮影に切替えられたときは、第1カメラ部10-1と第2カメラ部10-2の画角を合わせるための光学ズーム倍率(以下、初期ズーム倍率)の設定を無効とする信号をズーム制御部11及び画像信号解析部13へ出力し、3次元撮影に切替えられたときは、初期ズーム倍率の設定を有効とする信号をズーム制御部11及び画像信号解析部13へ出力する。ズーム制御部11は、2次元/3次元撮影切替部18からの初期ズーム倍率の設定を無効とする信号を入力すると、第1カメラ部10-1に対する光学ズーム制御を行わず、初期ズーム倍率の設定を有効とする信号を入力すると、第1カメラ部10-1に対する光学ズーム制御を行う。ズーム制御部11は、光学ズーム制御を行うときは、第1カメラ部10-1に、画像信号解析部13で計算された初期ズーム倍率を設定する。
画像合成部19は、第1エンコード部17-1から出力される2次元画像と第2エンコード部17-2から出力される2次元画像とを合成し、ステレオ画像フォーマットに変換して3次元画像を生成する。この際、例えばJPEG形式からMPO(Multi-Picture Format)形式に変換する。画像保存部20は、フラッシュメモリ(SDメモリなど)の不揮発性メモリを有し、画像合成部19で得られた3次元画像を保存するとともに、第1エンコード部17-1から出力される2次元画像を保存する。
表示制御部21は、色補正部15から出力される、色ずれが補正された第1撮像画像と第2撮像画像に基づいて2次元画像及び3次元画像を表示部22に表示する制御を行う。この場合、表示制御部21は、2次元画像及び3次元画像を切替えていずれか一方の画像を表示部22に表示する。表示部22は、例えば2次元画像と3次元画像の表示が可能な視差バリア式の液晶表示器である。視差バリア式の液晶表示器は、右目用の画像と左目用の画像を1ラインおきに配置して表示する液晶と、右目には右目用の画像だけが見えるように、また、左目には左目用の画像だけが見えるように視線を遮るバリア液晶の2つの液晶を有する表示器である。
3次元画像を表示する場合は、表示制御部21は、上記のように1ラインおきに右目用と左目用の画像を交互に配置し、バリア液晶を駆動する。一方、2次元画像を表示する場合は、表示制御部21は、バリア液晶を駆動せず、また、データの並べ替えを行わずにそのまま液晶に表示を行う。2次元画像の表示と3次元画像の表示の切替は、2次元/3次元撮影切替部18からの信号に基づいて行われる。
次に、本実施の形態の画像撮影装置1の動作を説明する。
図3は、本実施の形態の画像撮影装置1の画像信号解析部13とズーム制御部11の動作を説明するためのフローチャートである。同図において、画像信号解析部13は、2次元/3次元撮影切替部18から出力される光学ズームの有効/無効信号に基づき、3次元撮影かどうか判定する(ステップS1)。この判定において、3次元撮影でないと判断した場合(即ち、ステップS1の判定で「NO」と判断した場合)、2次元撮影を行う(ステップS2)。2次元撮影では、第1カメラ信号処理部12-1で信号処理された第1カメラ部10-1からの第1撮像画像を入力する。2次元撮影では第1カメラ部10-1の画角と第2カメラ部10-2の画角を合わせる必要がないので、画像信号解析部13はその処理を行うことなく第1撮像画像を第1エンコード部17-1側へ出力する。第1エンコード部17-1は、第1カメラ部10-1からの第1撮像画像をエンコードする。そして、エンコードした第1撮像画像を画像合成部19及び画像保存部20へ出力する。
図3は、本実施の形態の画像撮影装置1の画像信号解析部13とズーム制御部11の動作を説明するためのフローチャートである。同図において、画像信号解析部13は、2次元/3次元撮影切替部18から出力される光学ズームの有効/無効信号に基づき、3次元撮影かどうか判定する(ステップS1)。この判定において、3次元撮影でないと判断した場合(即ち、ステップS1の判定で「NO」と判断した場合)、2次元撮影を行う(ステップS2)。2次元撮影では、第1カメラ信号処理部12-1で信号処理された第1カメラ部10-1からの第1撮像画像を入力する。2次元撮影では第1カメラ部10-1の画角と第2カメラ部10-2の画角を合わせる必要がないので、画像信号解析部13はその処理を行うことなく第1撮像画像を第1エンコード部17-1側へ出力する。第1エンコード部17-1は、第1カメラ部10-1からの第1撮像画像をエンコードする。そして、エンコードした第1撮像画像を画像合成部19及び画像保存部20へ出力する。
また、画像信号解析部13は、ステップS1の判定において、3次元撮影であると判断した場合(即ち、ステップS1の判定で「YES」と判断した場合)、第1カメラ信号処理部12-1及び第2カメラ信号処理部12-2を介して第2カメラ部10-2からの第2撮像画像と第1カメラ部10-1からの第1撮像画像を入力する(ステップS3)。画像信号解析部13は、第1撮像画像及び第2撮像画像を入力すると、これらの画像を比較し、第2撮像画像に映っている領域と同じ領域を第1撮像画像上で検出する(ステップS4)。次いで、画像信号解析部13は、第1撮像画像上で検出した領域の切り出し座標と切り出しサイズを算出する(ステップS5)。次いで、切り出しサイズと第1撮像画像のサイズからズーム倍率(初期ズーム倍率)を算出する(ステップS6)。そして、算出した初期ズーム倍率をズーム制御部11へ出力する。ズーム制御部11は、画像信号解析部13からの初期ズーム倍率を入力すると、算出された初期ズーム倍率に応じて第1カメラ部10-1のレンズを駆動する(ステップS7)。そして、3次元撮影を行う(ステップS8)。画像信号解析部13は、3次元画像の撮影中第1カメラ部10-1から出力され、第1カメラ信号処理部12-1で信号処理された第1撮像画像を第1エンコード部17-1へ向けて出力するとともに、第2カメラ部10-2から出力され、第2カメラ信号処理部12-2で信号処理された第2撮像画像を第2エンコード部17-2へ出力する。
このように本実施の形態の画像撮影装置1によれば、3次元画像撮影時は、低解像度の第2カメラ部10-2で撮影された画像と同じ範囲となるように、高解像度の第1カメラ部10-1の光学ズーム倍率を算出して設定し、2次元画像撮影時は、光学ズーム倍率の設定を解除して撮影を行うので、3次元画像撮影のときは高解像度のまま3次元撮影が可能であり、2次元撮影のときは、初期光学ズーム倍率の設定を行わないことから、撮影範囲が狭くならず、3次元画像撮影時と同様に高解像度が保たれる。したがって、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像を得ることができる。
本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
本出願は、2010年11月25日出願の日本特許出願(特願2010-262210)に基づくものであり、その内容はここに参照として取り込まれる。
本発明は、3次元画像の撮影のときも、2次元画像の撮影のときも、どちらも高解像度の画像を得ることができるといった効果を有し、3次元画像を撮影する3次元画像撮影用の複眼カメラ等の画像撮影装置への適用が可能である。
1 画像撮影装置
10-1 第1カメラ部
10-2 第2カメラ部
11 ズーム制御部
12-1 第1カメラ信号処理部
12-2 第2カメラ信号処理部
13 画像信号解析部
14 位置補正部
15 色補正部
16 画像リサイズ部
17-1 第1エンコード部
17-2 第2エンコード部
18 2次元/3次元撮影切替部
19 画像合成部
20 画像保存部
21 表示制御部
22 表示部
10-1 第1カメラ部
10-2 第2カメラ部
11 ズーム制御部
12-1 第1カメラ信号処理部
12-2 第2カメラ信号処理部
13 画像信号解析部
14 位置補正部
15 色補正部
16 画像リサイズ部
17-1 第1エンコード部
17-2 第2エンコード部
18 2次元/3次元撮影切替部
19 画像合成部
20 画像保存部
21 表示制御部
22 表示部
Claims (6)
- 光学ズーム機能を有し、第1解像度で第1撮像画像を撮像する第1カメラ部と、
前記第1解像度より低い第2解像度で第2撮像画像を撮像する第2カメラ部と、
前記第1カメラ部の画角と、前記第2カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、
少なくとも、前記第1撮像画像を基に2次元画像を得る状態から、前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る状態へ切り替わった場合は、前記光学ズーム機能を前記ズーム倍率に設定する画像撮影装置。 - 請求項1に記載の画像撮影装置であって、
前記第1撮像画像を基に2次元画像を得る状態から、前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る状態へ切り替わる契機が、ユーザによる操作である画像撮影装置。 - 請求項1又は請求項2に記載の画像撮影装置であって、
少なくとも1つの表示部を備え、
前記表示部は、前記2次元画像及び/又は前記3次元画像を表示する画像撮影装置。 - 請求項1から請求項3のいずれか1項に記載の画像撮影装置であって、
前記第1撮像画像のサイズに合わせて、前記第2撮像画像のサイズを拡大する画像リサイズ部と、
前記第1撮像画像をエンコードする第1エンコード部と、
前記画像リサイズ部で拡大された前記第2撮像画像をエンコードする第2エンコード部と、
前記第1エンコード部からの出力画像と前記第2エンコード部からの出力画像とを合成する画像合成部と、
前記画像合成部で合成された画像を3次元画像として、又は前記第1のエンコード部からの出力画像を2次元画像として保存する画像保存部と、を備える画像撮影装置。 - 請求項4に記載の画像撮影装置であって、
前記第1撮像画像と前記第2撮像画像の位置ずれを補正する位置補正部と、
前記第1撮像画像と前記第2撮像画像の色ずれを補正する色補正部と、を備える画像撮影装置。 - 光学ズーム機能を有し、第1解像度で第1撮像画像を撮像する第1カメラ部と、
前記第1解像度より低い第2解像度で第2撮像画像を撮像する第2カメラ部と、
前記第1カメラ部の画角と、前記第2カメラ部の画角が一致する前記光学ズーム機能のズーム倍率を算出するズーム倍率算出部と、を備える画像撮影装置であって、
前記第1撮像画像及び前記第2撮像画像を基に3次元画像を得る場合は、前記光学ズーム機能を前記ズーム倍率に設定する画像撮影装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010262210 | 2010-11-25 | ||
JP2010-262210 | 2010-11-25 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2012070206A1 true WO2012070206A1 (ja) | 2012-05-31 |
Family
ID=46145577
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2011/006414 WO2012070206A1 (ja) | 2010-11-25 | 2011-11-17 | 画像撮影装置 |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2012070206A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0937302A (ja) * | 1995-07-18 | 1997-02-07 | Olympus Optical Co Ltd | 立体撮像装置 |
JP2010252186A (ja) * | 2009-04-17 | 2010-11-04 | Nec Casio Mobile Communications Ltd | 端末装置及びプログラム |
-
2011
- 2011-11-17 WO PCT/JP2011/006414 patent/WO2012070206A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0937302A (ja) * | 1995-07-18 | 1997-02-07 | Olympus Optical Co Ltd | 立体撮像装置 |
JP2010252186A (ja) * | 2009-04-17 | 2010-11-04 | Nec Casio Mobile Communications Ltd | 端末装置及びプログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5679978B2 (ja) | 立体視用画像位置合わせ装置、立体視用画像位置合わせ方法、及びそのプログラム | |
JP5468482B2 (ja) | 画像撮像装置 | |
JP5640143B2 (ja) | 撮像装置及び撮像方法 | |
US20140340543A1 (en) | Image-processing apparatus and image-processing method | |
JP5469258B2 (ja) | 撮像装置および撮像方法 | |
US8593531B2 (en) | Imaging device, image processing method, and computer program | |
JP6478511B2 (ja) | 画像処理方法、画像処理装置、複眼撮像装置、画像処理プログラム、および、記憶媒体 | |
JP2010230879A (ja) | 複眼カメラ装置 | |
JP2012199621A (ja) | 複眼撮像装置 | |
JP5214547B2 (ja) | 画像表示装置および方法並びにプログラム | |
JP6786311B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体 | |
JP6155471B2 (ja) | 画像生成装置、撮像装置および画像生成方法 | |
JP2009258005A (ja) | 三次元測定装置及び三次元測定方法 | |
JP2013247543A (ja) | 撮像装置、表示装置、および画像処理方法、並びにプログラム | |
JP6732440B2 (ja) | 画像処理装置、画像処理方法、及びそのプログラム | |
US20130343635A1 (en) | Image processing apparatus, image processing method, and program | |
JP2012235198A (ja) | 撮像装置 | |
WO2012070206A1 (ja) | 画像撮影装置 | |
JP2008177972A (ja) | 撮像装置 | |
JP2015080169A (ja) | 撮像装置及びその制御方法 | |
JP2012124650A (ja) | 撮像装置および撮像方法 | |
JP2005229280A (ja) | 画像処理装置および方法並びにプログラム | |
JP2013062557A (ja) | デジタル撮影装置及び、3d撮影方法 | |
JP2016134886A (ja) | 撮像装置およびその制御方法 | |
JP2011135374A (ja) | 3次元デジタルカメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 11843270 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 11843270 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: JP |