WO2014119965A1 - Method for photographing side-by-side stereoscopic images and monocular camera therefor - Google Patents

Method for photographing side-by-side stereoscopic images and monocular camera therefor Download PDF

Info

Publication number
WO2014119965A1
WO2014119965A1 PCT/KR2014/000913 KR2014000913W WO2014119965A1 WO 2014119965 A1 WO2014119965 A1 WO 2014119965A1 KR 2014000913 W KR2014000913 W KR 2014000913W WO 2014119965 A1 WO2014119965 A1 WO 2014119965A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
camera
lens
reflector
image sensor
Prior art date
Application number
PCT/KR2014/000913
Other languages
French (fr)
Korean (ko)
Inventor
최재혁
Original Assignee
주식회사 고글텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 고글텍 filed Critical 주식회사 고글텍
Publication of WO2014119965A1 publication Critical patent/WO2014119965A1/en

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00Optical objectives specially designed for the purposes specified below
    • G02B13/001Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
    • G02B13/0055Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/286Image signal generators having separate monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/001Constructional or mechanical details

Definitions

  • the present invention relates to a three-dimensional stereoscopic imaging technique, and more particularly, to a method for capturing side by side stereo images with a camera employing a monocular lens and a monocular camera device for the same. will be.
  • 3D stereoscopic images It takes a lot of money and time to produce 3D stereoscopic images.
  • a 3D camera and a program having a different configuration from a general 2D camera are required.
  • 3D cameras are not only expensive because of the complicated structure of equipment such as mounting two lenses, but also more complicated than general cameras. Therefore, it was not easy for general users to make stereoscopic images.
  • Most of these digital cameras and smartphones are single lens cameras employing only one lens, and the images taken are two-dimensional images.
  • what is required in the design is to reduce the size and number of components employed therein as much as possible.
  • the design of employing two lenses to construct a 3-Dimensional (3D) camera in a smartphone is against this purpose.
  • the adoption of two lenses is a factor in the rise in smartphone prices.
  • a monocular camera capable of capturing two-dimensional images without expensive photographing equipment or photographing technology can easily produce three-dimensional stereoscopic images, the production of three-dimensional stereoscopic images may increase rapidly.
  • An object of the present invention is to provide a method for easily photographing a side by side stereo image by attaching a reflector to a monocular camera having only one lens and a camera therefor.
  • one lens an actuator for driving the lens, an image sensor for converting light of the image passing through the lens into an electrical signal, the image signal from the image sensor
  • a monocular camera comprising a camera module having a signal processor which reads a signal and performs a predetermined process, and a driver for driving the actuator, and a camera body provided with the camera module.
  • the first image of the image sensor reflected by the reflector is incident on the lens and is incident on the first half of the image sensor, and directly enters the lens without passing through the reflector.
  • a second image formed in two and a half wherein the signal processor executes a predetermined application program to perform a signal conversion process of inverting the left and right of the first image formed in the first half of the image sensor and converting the signal.
  • a monocular camera is provided for capturing a side by side stereo image, characterized in that a process of storing the stereo image as a stereo image is performed.
  • the reflector holder is coupled to the camera body in the form of a back support for holding and holding the back of the reflector, and the other side to hold and tighten one side of the camera body while one side is coupled to the back support. It includes a holding part.
  • the camera provides a menu for the user to select one of the 2D shooting mode and the 3D shooting mode, and the application program is configured to be automatically executed only when the 3D shooting mode is selected.
  • the application program converts a signal that the signal processor reverses left and right of the first image at a speed at which the signal processing unit can store side by side stereo video of at least 30 frames per second in the storage means. It is preferably configured to perform the process in real time.
  • the values of V (n / 2) are V (n / 2), V ((n / 2) -1),... And a signal conversion process of inverting the left and right sides of the first image by performing a process of changing the values of the V (2) and V (1) pixels to the columns of H (1) to H (m), respectively. do.
  • the reflector is preferably mounted within an angular deviation range of ⁇ 5 ° from the axial direction of the lens.
  • the reflecting mirror has a straight upper and lower edges.
  • the camera to which the present invention can be applied may be any electronic camera capable of executing an application program.
  • the camera may be a smartphone camera, wherein the camera body is a smartphone body and the camera module is a camera module mounted on the smartphone body.
  • the signal processor may be configured to display a virtual dividing line for dividing the display screen of the camera from side to side on the display screen of the camera in order to execute the application program so that the reflector is installed at the correct position. Do.
  • one lens an actuator for driving the lens, an image sensor for converting the light of the image passing through the lens into an electrical signal, the image sensor Taking a side-by-side stereo image using a monocular camera including a camera module having a signal processor which reads an image signal from an image signal and performs a predetermined process, and a driver for driving the actuator, and a camera body in which the camera module is installed.
  • the reflecting mirror is installed in the form of standing up side by side in the axial direction and the predetermined angle deviation range of the lens toward the front of the lens next to the camera module, the image formed on the image sensor, Reflected and incident on the lens, the first half of the image sensor A first image and a second image that is incident directly to the lens without passing through the reflector and is formed on the remaining second half of the image sensor;
  • the signal processing unit executes a predetermined application program to perform a signal conversion process of inverting the left and right sides of the first image formed in the first half of the image sensor, and the image signal of the first image subjected to the signal conversion processing.
  • Is m (j 1, 2, 3, ..., m)
  • the values of V (n / 2) are V (n / 2), V ((n / 2) -1),... , V (2), V (1) may be performed by a method of changing the values of the pixels, respectively, from H (1) to H (m) for each column.
  • the side-by-side stereo image capturing method may further include automatically executing the application program only when the 3D capturing mode is selected by providing a user menu for selecting any one of a 2D capturing mode and a 3D capturing mode. It is preferable to provide.
  • the application program converts a signal that the signal processor reverses left and right of the first image at a speed at which the signal processing unit can store side by side stereo video of at least 30 frames per second in the storage means. It is desirable to be configured to perform the process in real time.
  • the camera module may further include a step of displaying a virtual dividing line dividing the display screen of the camera from side to side on the display screen.
  • the present invention by attaching a simple reflector to a smart phone or a small camera lens made of a conventional one, it is possible to enjoy the 3D stereoscopic image by restoring the left and right flipped images taken by reflecting through the reflector to their original state. Side by side stereo image can be taken.
  • a monocular camera having only one lens can be used to capture 3D stereoscopic images, thereby significantly reducing the cost of capturing 3D images.
  • the user may select whether to photograph in a 3D image or a 2-Dimensional (2D) image.
  • the reflector is removable, it is also possible to select whether or not to run the program for restoring left and right flips. Since the installation of the reflector and the execution of the program for restoring the left and right flips are a matter of choice, the users should take their monocular camera and shoot 3D stereoscopic images only when necessary and 2D images when they are not necessary. There is also a convenience to choose from. That is, the monocular camera can capture 2D images or 3D images as needed.
  • FIG. 1 and 2 show a state before assembling the reflector and a state after assembling the reflector of the camera for monocular stereoscopic imaging according to the present invention, respectively.
  • FIG. 3 is a block diagram showing the configuration of a conventional camera module.
  • FIG. 4 is a cross-sectional view for explaining a photographing principle of a monocular stereoscopic image capturing camera according to the present invention.
  • FIG. 5 is a flowchart illustrating an execution procedure of an application program for restoring an image of an image in which left and right are reversed by a reflector.
  • (a) is a reflection image and a normal anti-reflection image inverted left and right by a reflector
  • (b) is an image and an anti-reflection image in which the reflection image of (a) is inverted and restored to its original state
  • (c) is (b) This is a conceptual illustration of the combined image of the two images.
  • FIG. 7 is an image actually taken by attaching a reflector to a smartphone camera.
  • A shows a reflection image in which the reflector is flipped left and right by a reflector and a normal anti-reflection image in a side by side form
  • (b) (a) The reflected image of the image is reversed to the left and right, and the original image and the anti-reflective image are displayed side by side.
  • 8 (a) and 8 (b) show examples of shooting in the 2D shooting mode and the 3D shooting mode, respectively.
  • the camera 10 is largely equipped with a camera module 40, a camera main body 45 on which the camera module 40 is installed, and a reflecting mirror mounted in a standing position near the lens 42 of the camera module 40 ( 20, and a cradle 30 for mounting the reflector 20 to the camera body 30.
  • the camera module 40 includes a lens module.
  • the lens module includes a lens 42 for collecting light of an image, an image sensor 46 to be described later, and a holder 43 for aligning an optical axis of the lens 42.
  • the camera module 40 also uses an actuator 44 for driving the lens module in a desired direction by using a driving force obtained by converting electric energy to control the focus of the camera, a driver 45 for providing a driving control signal thereto, and a lens.
  • An image sensor (consisting mainly of a CCD or CMOS array) 46 for converting an image (light) input through the electronic signal, a signal processor 48 for processing an image signal generated by the image sensor 46, And these components 42, 43, 45, 46, 48, etc. are mounted and the passage that can input and output signals of these elements, such that the electrical signal of the image sensor 46 is transmitted to the signal processor 48 It further includes a printed circuit board (PCB) 49 that serves.
  • PCB printed circuit board
  • the signal processor 48 processes an image signal obtained through the image sensor 46.
  • a feature of the present invention is that the signal processor 48 executes a predetermined application program 50 to perform signal processing.
  • the application program 50 inverts the image signal (refer to the left image 65 in FIG. 6 (a)) which is reflected through the reflector 20 and flipped left and right and formed on the left half surface of the image sensor 46. It has a left and right flipping function that converts the original normal image (see the left image 65 'in FIG. 6A) to be the same as the actual image.
  • the left and right flipped image 65 'and the normal image formed on the right half surface of the image sensor 46 are in a side-by-side image.
  • It consists of a (still image) or a frame (movie) to be stored in the memory.
  • the left image 65 'and the right image 65 are displayed in side-by-side form with a slight angle difference from each other, the two images are synthesized in the brains of the viewer who sees them with left and right eyes, respectively, and a three-dimensional image. Is recognized.
  • the camera body 45 may be anything as long as the camera module 40 is installed.
  • the main body of the digital camera or the main body of the smartphone or mobile phone equipped with the camera may be an example.
  • a smartphone equipped with a camera will be described by taking a smartphone equipped with a camera as an example.
  • the reflecting mirror 20 is provided to stand immediately next to the lens 42 (in the following description, to the left side of the lens 42) to stand in parallel with the axial direction of the lens 42.
  • the reflector 20 reflects the scene in front of the right side of the camera 10 toward the lens 42 so as to be incident (see FIG. 4).
  • An image that is reflected from the reflector 20 and enters the lens 42, that is, a “reflection image” (a portion indicated by a dashed-dotted line in FIG. 4) is an image in which left and right are reversed.
  • the shape and size of the reflector 20 is that the reflected image is equivalent to half of the display 55 of the camera 10 (half of the image sensor 46.
  • the normal number of pixels of the display of the camera is that of the image sensor 46). Since the size of the display is the same as the number of pixels, the size of the display needs to be determined to occupy the image sensor 46). Therefore, the shape of the reflector 20 is preferably rectangular. But it's not limited to rectangles.
  • any half of the screen of the display 55 may be any shape that can generate a reflection image that occupies half of the rectangular image sensor 46. For example, trapezoids, polygons with pentagons or more, or upper and lower edges may be straight, and left and right edges may be non-linear.
  • the rectangular reflector 20 may be sized to occupy half of the display 55. That is, the size of the horizontal (x) of the rectangular reflector 20 is about the same as the size of the horizontal (a) of the display 55 of the camera 10, the vertical (y) size of the reflector 20 is the display 55 It can be set to about half of the size of (b) of. However, since the size of the reflector 20 is also affected by the refractive index of the lens 42, this criterion may not be strictly applied.
  • the reflecting mirror 20 is preferably installed so as to stand (ie, upright) substantially perpendicular to the lens 42, that is, parallel to the axial direction of the lens 42. However, it is not necessary to stand at right angles and may have a deviation of about ⁇ 5 °. When the standing direction of the reflector 20 is outside the angular deviation range, the image quality of the 3D stereoscopic image is deteriorated because the reflected image and the non-reflective image show an excessively large viewpoint angle.
  • the reflector 20 should also be installed in close proximity to the lens 42. In the case of a smartphone camera, the reflector 20 may be installed at a position approximately 4 to 7 mm away from the center of the lens 42.
  • the reflection mirror 20 may be installed by looking at the display 55 of the camera 10. That is, the user may adjust the installation position of the reflector 20 such that the reflected image by the reflector 20 occupies one half of the display 55.
  • the application program 50 divides the display 55 from side to side. It is desirable to operate the function to display the line 57 to help the user to install the reflector 20. When the installation of the reflector 20 is completed, the dividing line 57 may disappear.
  • the cradle 30 holds the reflector 20 so as to stand and stand by the camera module 40.
  • the holder 30 is a support plate 32 bonded to the rear surface of the reflector 20, one side is coupled to the support plate 32 and the other side is coupled to hold the edge portion of the camera body 45 It includes a holder 34.
  • the edge portion of the camera body 45 is caught between the bottom face of the support plate 32 and the holder portion 34 by the elastic force of the holder portion 34, so that the holder 30 is attached to the camera body 45. It is fixed.
  • the cradle can be made of a plastic injection molding that satisfies both strength and elasticity.
  • the holder portion 34 makes the gripping force good to serve as a forceps or a clip together with the bottom surface of the support plate 32 (for example, to form a protrusion at the end of the holder portion 34 or to pad a rubber or urethane pad having good gripping force). ). Since the holder portion 34 is elastic, it is possible to flexibly correspond to various thickness sizes of the camera body 45. Although only one holder part 34 is shown in the drawing, it may be desirable to provide a plurality of holder parts 34 to obtain stable gripping force.
  • holder 30 may include a base portion attached to the camera body 45 and an upright portion upright in the axial direction of the lens 42 at the base portion.
  • the reflector 20 is attached to its upright surface and stands up in parallel with the axial direction of the lens 42.
  • FIG. 4 shows a principle that an object in front of the camera module 40 is photographed when the image is captured by the camera 10 equipped with the reflector 20.
  • the front scene entering the lens 42 falls within a predetermined angle range from side to side with respect to the axial direction of the front of the lens 42.
  • the reflector 20 is installed next to the lens 42 as shown in FIG. 4, the scene in front of the left side is hidden by the reflector 20 and cannot enter the lens 42, and only the scene in front of the right side directly into the lens 42. At the same time as it enters, it is reflected by the reflector 20.
  • the scene coming into the lens 42 is a scene of the right front of the camera 10, two images, one of which is a 'reflected image' reflected from the reflector 20, and the other is not passed through the reflector 20. It is a 'anti-reflective video' that comes in directly without.
  • the coverages R 1 -R 2 of the reflected image and the coverages D 1 -D 2 of the non-reflective image are not exactly the same and have a slight deviation in the viewpoint. Therefore, in the image formed on the image sensor 46 through the lens 42, two images captured at different angles exist in the side by side form on the left and right sides of the image sensor 46.
  • the reflection image formed on the left side of the image sensor 46 is an image that has been inverted left and right by the reflector (the same sense as the left and right are reversed when viewing an object through a mirror), and the antireflection formed on the right side
  • the image is what appears as it actually is.
  • the reflection image is converted in real time by flipping left and right using the application program 50 as if the reflection mirror 20 did not pass through. Such conversion results in the same result as the two images having a slight angle difference from each other simultaneously on the left half and the right half of the image sensor 46 side by side (i.e., in a side-by-side form).
  • the two images are paired and stored in the image memory. In the state in which the two images are displayed on the left and right halves of the display 55, the person sees the image using a separate stereoscopic image viewing means that allows the left eye to see the left image and the right eye to see the right image. Will appear.
  • FIG. 5 is a schematic diagram illustrating a signal processing process of an application program 50 which restores the image flipped left and right by the reflector 20 to the normal image again.
  • the camera 10 of the present invention executes a photo shooting application
  • the user can select one of the 2D (mono) shooting mode 82 or the 3D (stereo) shooting mode 80 on the display screen 55.
  • 8A illustrates an image photographed by selecting the 2D photographing mode 82
  • FIG. 8B illustrates an image photographed by selecting the 3D photographing mode 83.
  • This application program 50 is not executed when the user selects the 2D shooting mode 82, but is executed only in the 3D shooting mode 80 (steps S10 and S12).
  • the reflector 20 should be installed before the 3D stereoscopic image is taken.
  • the camera body 45 is sandwiched between the holder 34 and the bottom of the support plate 32 so that the reflected image by the reflector 20 occupies half of the screen of the display 55. Adjust the installation position of).
  • the reflector 20 may be provided such that the right boundary of the reflected image coincides with the virtual dividing line 57.
  • the user selects one of the still cut shooting mode 84 and the moving picture shooting mode 86. When the 3D shooting preparation is completed, the user presses the shooting button 88 to start shooting (step S14).
  • the left half of the image sensor 46 bears a reflection image inverted left and right by the reflector 20, and the other right half bears a normal antireflection image without passing through the reflector 20.
  • the reflection image and the anti-reflection image are displayed on the left and right sides of the screen of the display 55 with slightly different viewpoints.
  • the right image 70 is an antireflection image
  • the left image 75 is a reflection image, and the left and right sides are reversed.
  • the signal processing unit 48 executes the application program 50 to invert the left and right sides of the reflected image to form a normal image.
  • the signal processor 48 reads the signal of the reflected image formed in the left half region of the image sensor 46, performs left and right flipping of the reflected image in the internal memory, and stores the signal in a separate image memory (step S16). .
  • the signal of the non-reflective image formed on the right half of the image sensor 46 is copied to the image memory as it is without any processing (step S18).
  • V (n / 2) data stored in the internal memory
  • V (n / 2) data stored in the internal memory
  • V (n / 2) -1) pixels are converted into values and stored in the image memory.
  • V (2) and V (1) pixels are converted into values and stored in the image memory.
  • the left and right flipping process was performed by this.
  • V (n) values (data stored in the internal memory) are pixels constituting the non-reflective image, and thus stored in the image memory as they are.
  • Such processing is performed for each column from H (1) to H (m) to perform left and right flipping for all the pixels of the image sensor 46.
  • the signal processor 48 performs left and right flipping of 640 pixels of the left half of 1280 in the internal memory, and then converts the image data into the image memory. Save it.
  • the data of 640 pixels on the right side is copied to the image memory as it is.
  • the data of the left half pixels of the image sensor 46 are the data of right and left inversion.
  • the reflection image and the non-reflection image are displayed on the screen of the display 55 of the camera 10 (step S20).
  • 7 (b) shows that the non-reflective image 70 and the reflection image 75 'after the left and right flip processing are formed in side by side on the right and left halves of the screen of the display 55 of the camera 10. The example shown is shown. These two images have slightly different viewpoint angles. When these two images are stacked up and down, they appear slightly blurred due to the difference in their viewpoint angles.
  • the left and right flip processing of the reflected image is performed every frame and then stored in the image memory to be arranged in the form of an antireflection image and a side by side.
  • the RGB data of the image memory is stored in a separate storage space (for example, an SD card) in the JPG file format, and in the case of a video, 30 frames per second in the MP4 file format
  • a separate storage space for example, SD card
  • the left and right flipped reflection images and the non-reflected image occupy the left half and the right half of one frame, and are recorded in the image memory in units of side by side stereo image frames.
  • the video obtained in this way is displayed with side by side stereo images on the screen every frame during playback (even in the case of still cut images), and the left and right eyes of the viewer are the left half and right half of the screen. If you look at the image using a means to see each of the divided areas, it is recognized as a stereoscopic image that is made into a stereoscopic image in the human brain to feel the depth of space with certainty.
  • the reflector is applied to the smartphone camera has been described as an example, but the present invention can be applied to other types of cameras having a function of executing an application program.
  • the present invention can be widely applied to take a 3D stereoscopic image by applying to a smartphone camera or a digital camera.

Abstract

Provided are a method for photographing side-by-side stereoscopic images and a monocular camera therefor. A reflecting mirror is provided to be erectly aligned with the axial direction of a lens within a predetermined angular deviation from a lateral side of a camera module to a front side of the lens using a reflecting mirror holder. An image formed on an image sensor is composed of: a first image formed on a first half of the image sensor through the reflection from the reflecting mirror and the incidence onto the lens; and a second image formed on a remaining second half of the image sensor through direct incidence onto the lens without the reflecting mirror. An image signal processing unit executes a predetermined application program, processes a signal conversion for reversing left and right sides of the first image formed on the first half of the image sensor, and stores a processed image signal of the first image that has been signal converted and an original image signal of the second image, as side-by-side stereo images in a storage means.

Description

사이드 바이 사이드 스테레오 영상 촬영 방법 및 이를 위한 단안식 카메라Side by side stereo image capturing method and monocular camera for same
본 발명은 3차원 입체영상 촬영기술 기술에 관한 것으로, 보다 상세하게는 단안식 렌즈를 채용한 카메라로 사이드 바이 사이드(side by side) 스테레오 영상을 촬영할 수 있는 방법과 이를 위한 단안식 카메라 장치에 관한 것이다.The present invention relates to a three-dimensional stereoscopic imaging technique, and more particularly, to a method for capturing side by side stereo images with a camera employing a monocular lens and a monocular camera device for the same. will be.
3차원 입체영상을 만들기 위해서는 많은 비용과 시간이 필요하다. 3차원 입체영상을 제작하기 위해서는 일반적인 2차원 카메라와는 다른 구성의 3차원 카메라와 프로그램이 필요하다. 3차원 카메라는 일반적으로 렌즈를 두 개 장착하는 등 장비의 구성이 복잡하여 고가 일뿐만 아니라 촬영기술도 일반 카메라보다는 더 복잡하다. 그렇기 때문에 일반 사용자들이 입체영상을 만드는 것은 쉽지 않았다.It takes a lot of money and time to produce 3D stereoscopic images. In order to produce 3D stereoscopic images, a 3D camera and a program having a different configuration from a general 2D camera are required. 3D cameras are not only expensive because of the complicated structure of equipment such as mounting two lenses, but also more complicated than general cameras. Therefore, it was not easy for general users to make stereoscopic images.
일반인들은 주로 디지털 카메라나 스마트폰에 장착된 카메라를 보유하고 있다. 이런 디지털 카메라나 스마트폰은 거의 대부분이 하나의 렌즈만을 채용한 단안식 카메라(single lens camera)이고, 촬영되는 영상은 2차원 영상이다. 특히, 스마트폰 같은 소형기기의 경우, 디자인에서 요구되는 것은 거기에 채용되는 부품의 크기와 개수를 가능한 한 줄이는 것이다. 스마트폰에 입체(3-Dimensional: 3D) 카메라를 구성하기 위해 렌즈 2개를 채용하는 디자인은 이런 취지에 반한다. 또한, 2개의 렌즈를 채용하는 것은 스마트폰 가격 상승의 요인이 된다. 그런데 고가의 촬영장비나 촬영기술 없이 2차원 영상을 촬영할 수 있는 단안식 카메라로도 3차원 입체영상을 손쉽게 제작할 수 있다면, 3차원 입체영상의 생산이 급격히 늘어날 수 있을 것이다. The public usually has a camera mounted on a digital camera or smartphone. Most of these digital cameras and smartphones are single lens cameras employing only one lens, and the images taken are two-dimensional images. In particular, for small devices such as smartphones, what is required in the design is to reduce the size and number of components employed therein as much as possible. The design of employing two lenses to construct a 3-Dimensional (3D) camera in a smartphone is against this purpose. In addition, the adoption of two lenses is a factor in the rise in smartphone prices. However, if a monocular camera capable of capturing two-dimensional images without expensive photographing equipment or photographing technology can easily produce three-dimensional stereoscopic images, the production of three-dimensional stereoscopic images may increase rapidly.
하나의 카메라로 3차원 입체영상을 촬영하는 기술이 소개된 예가 있다. 한 가지 방법(이동우, 이관욱, 김만배 저, '단안 카메라를 이용한 입체영상 생성', 방송공학회논문지 제17권 제1호 pp17-25, 2012년)은, 먼저 순차식 촬영 방식과 유사하게 수평으로 카메라를 이동하면서 수동 또는 자동으로 다수의 영상을 촬영한 다음, 얻어진 영상 중에서 입체영상으로 제작하기에 적합한 두 장의 영상을 선택하고, 최종적으로 양안시차를 고려한 입체영상을 제작하는 방법이다. 이 방법은 카메라를 손으로 들고 촬영하게 되면 손떨림 현상이 발생하여 안정된 촬영이 어려워지므로, 보정작업을 거쳐 최종적인 입체영상을 제작한다. 그런데 이 방법으로는 정지영상을 입체영상으로 촬영하는 것은 가능하다고 하더라도, 손떨림 보정을 거의 필수적으로 거쳐야 하는바, 동영상까지 실시간으로 입체영상으로 촬영할 수 있을지는 의문이다.There is an example where a technology of photographing a 3D stereoscopic image with a single camera is introduced. One method (Dong-Woo Lee, Kwan-Wook Lee, Man-Bae Kim, 'Creating 3D Image using Monocular Camera', Journal of Broadcast Engineering, Vol. 17, No. 1 pp17-25, 2012), is similar to a sequential shooting method. After taking a plurality of images manually or automatically while moving, select two images suitable for producing a stereoscopic image from the obtained image, and finally produce a stereoscopic image considering binocular disparity. In this method, when shooting with the camera in hand, camera shake occurs and stable shooting becomes difficult. Thus, a final stereoscopic image is produced through correction. However, even if it is possible to shoot a still image as a three-dimensional image by this method, it is almost necessary to go through image stabilization, it is questionable whether even a moving image can be recorded in real-time.
본 발명은 하나의 렌즈만을 가지고 있는 단안식 카메라에 반사경을 부착하여 사이드 바이 사이드(side by side) 스테레오 영상을 간편하게 촬영할 수 있는 방법과 이를 위한 카메라를 제공하는 것을 목적으로 한다.An object of the present invention is to provide a method for easily photographing a side by side stereo image by attaching a reflector to a monocular camera having only one lens and a camera therefor.
위와 같은 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 하나의 렌즈와, 상기 렌즈를 구동하는 액추에이터, 상기 렌즈를 통과한 영상의 빛을 전기신호로 변환하는 이미지센서, 상기 이미지센서로부터 영상신호를 읽어 와서 소정의 처리를 하는 신호처리부, 그리고 상기 액추에이터를 구동하는 드라이버를 갖는 카메라 모듈과, 상기 카메라 모듈이 설치된 카메라 본체를 포함하는 단안식 카메라로서, 상기 렌즈의 전방의 장면을 반사시켜 상기 렌즈로 입사되게 하는 반사경; 및 일측이 상기 카메라 본체와 결합된 채, 상기 반사경을 상기 카메라 모듈 옆에서 상기 렌즈의 전방을 향하여 상기 렌즈의 축방향과 소정의 각도편차범위 내에서 나란하게 기립하도록 잡아주는 반사경 거치대를 더 구비하며, 상기 이미지센서에 맺히는 영상은, 상기 반사경에서 반사되어 상기 렌즈로 입사하여 상기 이미지센서의 제1 절반에 맺히는 제1 영상과, 상기 반사경을 통하지 않고 상기 렌즈에 직접 입사하여 상기 이미지센서의 나머지 제2절반에 맺히는 제2영상으로 구성되며, 상기 신호처리부는, 소정의 애플리케이션 프로그램을 실행하여, 상기 이미지센서의 제1절반에 맺히는 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 하여, 그 신호변환처리된 상기 제1 영상의 영상신호와 상기 제2 영상의 원래의 영상신호를 사이드 바이 사이드(side by side) 스테레오 영상으로 저장수단에 저장하는 처리를 수행하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라가 제공된다.According to an aspect of the present invention for achieving the above object, one lens, an actuator for driving the lens, an image sensor for converting light of the image passing through the lens into an electrical signal, the image signal from the image sensor A monocular camera comprising a camera module having a signal processor which reads a signal and performs a predetermined process, and a driver for driving the actuator, and a camera body provided with the camera module. A reflector to be incident to the light source; And a reflector holder for holding the reflector to stand side by side in the axial direction of the lens and in a predetermined angular deviation range toward the front of the lens next to the camera module, with one side coupled to the camera body. The first image of the image sensor reflected by the reflector is incident on the lens and is incident on the first half of the image sensor, and directly enters the lens without passing through the reflector. And a second image formed in two and a half, wherein the signal processor executes a predetermined application program to perform a signal conversion process of inverting the left and right of the first image formed in the first half of the image sensor and converting the signal. Side by side the processed video signal of the first video and the original video signal of the second video ide) A monocular camera is provided for capturing a side by side stereo image, characterized in that a process of storing the stereo image as a stereo image is performed.
상기 단안식 카메라에 있어서, 상기 반사경 거치대는, 상기 반사경의 배면을 붙잡아 지지해주는 배면지지부와, 일측이 상기 배면지지부와 결합된 채 타측이 상기 카메라 본체의 일측을 붙잡아 조이는 형태로 상기 카메라 본체와 결합하는 파지부를 포함한다.In the monocular camera, the reflector holder is coupled to the camera body in the form of a back support for holding and holding the back of the reflector, and the other side to hold and tighten one side of the camera body while one side is coupled to the back support. It includes a holding part.
상기 카메라는 사용자가 2D 촬영모드와 3D 촬영모드 중 어느 한 가지를 선택할 수 있는 메뉴를 제공하며, 상기 3D 촬영모드가 선택된 경우에만 상기 애플리케이션 프로그램이 자동으로 실행되도록 구성된 것이 바람직하다. The camera provides a menu for the user to select one of the 2D shooting mode and the 3D shooting mode, and the application program is configured to be automatically executed only when the 3D shooting mode is selected.
상기 애플리케이션 프로그램은, 동영상 촬영 시에, 상기 신호처리부가 초당 적어도 30 프레임의 사이드 바이 사이드(Side by side) 스테레오 동영상이 상기 저장수단에 저장될 수 있는 속도로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 실시간으로 수행하도록 구성되는 것이 바람직하다. The application program converts a signal that the signal processor reverses left and right of the first image at a speed at which the signal processing unit can store side by side stereo video of at least 30 frames per second in the storage means. It is preferably configured to perform the process in real time.
또한, 상기 애플리케이션 프로그램은, 상기 이미지 센서의 세로 화소 V(i)가 n개(i=1, 2, 3, …, n)이고 가로 화소 H(j)가 m개(j=1, 2, 3, …, m)인 경우, 상기 이미지 센서의 상기 제1 절반에 위치한 화소들 V(1), V(2), V(3), …, V(n/2)의 값을 V(n/2), V((n/2)-1), …, V(2), V(1) 화소의 값으로 각각 변경시키는 처리를 H(1)부터 H(m)까지 각각의 열에 대하여 수행하는 방법으로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 수행한다. The application program may include n vertical pixels V (i) of the image sensor (i = 1, 2, 3, ..., n) and m horizontal pixels H (j) (j = 1, 2, 3,..., M), pixels V (1), V (2), V (3),... Positioned in the first half of the image sensor. , The values of V (n / 2) are V (n / 2), V ((n / 2) -1),... And a signal conversion process of inverting the left and right sides of the first image by performing a process of changing the values of the V (2) and V (1) pixels to the columns of H (1) to H (m), respectively. do.
상기 반사경은 상기 렌즈의 축방향과 ±5°의 각도편차범위 내로 거치되는 것이 바람직하다. The reflector is preferably mounted within an angular deviation range of ± 5 ° from the axial direction of the lens.
반사영상이 직사각형 모양의 이미지센서의 절반을 채우도록 하기 위해, 상기 반사경은 상부 모서리와 하부 모서리가 직선형인 것이 바람직하다. In order for the reflected image to fill half of the rectangular image sensor, it is preferable that the reflecting mirror has a straight upper and lower edges.
본 발명이 적용될 수 있는 카메라는 애플리케이션 프로그램을 실행할 수 있는 전자식 카메라라면 어떤 것이든 가능하다. 일 예로, 상기 카메라는, 상기 카메라 본체가 스마트폰 본체이고 상기 카메라 모듈이 상기 스마트폰 본체에 장착된 카메라 모듈인 스마트폰 카메라일 수 있다. The camera to which the present invention can be applied may be any electronic camera capable of executing an application program. For example, the camera may be a smartphone camera, wherein the camera body is a smartphone body and the camera module is a camera module mounted on the smartphone body.
상기 신호처리부는, 상기 애플리케이션 프로그램을 실행하여, 상기 반사경이 정확한 위치에 설치되는 것을 돕기 위해, 상기 카메라의 디스플레이 화면을 좌우로 양분하는 가상의 분할선을 상기 카메라의 디스플레이 화면에 표시되도록 하는 것이 바람직하다.The signal processor may be configured to display a virtual dividing line for dividing the display screen of the camera from side to side on the display screen of the camera in order to execute the application program so that the reflector is installed at the correct position. Do.
한편, 상기와 같은 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 하나의 렌즈와, 상기 렌즈를 구동하는 액추에이터, 상기 렌즈를 통과한 영상의 빛을 전기신호로 변환하는 이미지센서, 상기 이미지센서로부터 영상신호를 읽어 와서 소정의 처리를 하는 신호처리부, 그리고 상기 액추에이터를 구동하는 드라이버를 갖는 카메라 모듈과, 상기 카메라 모듈이 설치된 카메라 본체를 포함하는 단안식 카메라를 사용하여 사이드 바이 사이드 스테레오 영상을 촬영하는 방법으로서, 반사경을 상기 카메라 모듈 옆에서 상기 렌즈의 전방을 향하여 상기 렌즈의 축방향과 소정의 각도편차범위 내에서 나란하게 기립하는 형태로 설치하여, 상기 이미지센서에 맺히는 영상이, 상기 반사경에서 반사되어 상기 렌즈로 입사하여 상기 이미지센서의 제1 절반에 맺히는 제1 영상과, 상기 반사경을 통하지 않고 상기 렌즈에 직접 입사하여 상기 이미지센서의 나머지 제2절반에 맺히는 제2영상으로 구성되도록 하는 단계; 및 상기 신호처리부가, 소정의 애플리케이션 프로그램을 실행하여, 상기 이미지센서의 제1절반에 맺히는 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 하여, 그 신호변환처리된 상기 제1 영상의 영상신호와 상기 제2 영상의 원래의 영상신호를 사이드 바이 사이드(side by side) 스테레오 영상으로 저장수단에 저장하는 처리를 수행하는 단계를 구비하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법이 제공된다.On the other hand, according to another aspect of the present invention for achieving the above object, one lens, an actuator for driving the lens, an image sensor for converting the light of the image passing through the lens into an electrical signal, the image sensor Taking a side-by-side stereo image using a monocular camera including a camera module having a signal processor which reads an image signal from an image signal and performs a predetermined process, and a driver for driving the actuator, and a camera body in which the camera module is installed. In this case, the reflecting mirror is installed in the form of standing up side by side in the axial direction and the predetermined angle deviation range of the lens toward the front of the lens next to the camera module, the image formed on the image sensor, Reflected and incident on the lens, the first half of the image sensor A first image and a second image that is incident directly to the lens without passing through the reflector and is formed on the remaining second half of the image sensor; And the signal processing unit executes a predetermined application program to perform a signal conversion process of inverting the left and right sides of the first image formed in the first half of the image sensor, and the image signal of the first image subjected to the signal conversion processing. And a step of storing the original video signal of the second video as a side by side stereo video in a storage means.
상기 애플리케이션 프로그램에 의한 상기 제1 영상의 좌우를 뒤집는 신호변환처리는, 상기 이미지 센서의 세로 화소 V(i)가 n개(i=1, 2, 3, …, n)이고 가로 화소 H(j)가 m개(j=1, 2, 3, …, m)인 경우, 상기 이미지 센서의 상기 제1 절반에 위치한 화소들 V(1), V(2), V(3), …, V(n/2)의 값을 V(n/2), V((n/2)-1), …, V(2), V(1) 화소의 값으로 각각 변경시키는 처리를 H(1)부터 H(m)까지 각각의 열에 대하여 수행하는 방법으로 이루어질 수 있다. In the signal conversion process of inverting the left and right sides of the first image by the application program, the number of vertical pixels V (i) of the image sensor is n (i = 1, 2, 3, ..., n) and the horizontal pixels H (j). Is m (j = 1, 2, 3, ..., m), the pixels V (1), V (2), V (3),..., Located in the first half of the image sensor. , The values of V (n / 2) are V (n / 2), V ((n / 2) -1),... , V (2), V (1) may be performed by a method of changing the values of the pixels, respectively, from H (1) to H (m) for each column.
상기 사이드 바이 사이드 스테레오 영상 촬영 방법은, 2D 촬영모드와 3D 촬영모드 중 어느 한 가지를 선택할 수 있는 사용자 메뉴를 제공하여, 상기 3D 촬영모드가 선택된 경우에만 상기 애플리케이션 프로그램을 자동으로 실행하는 단계를 더 구비하는 것이 바람직하다. The side-by-side stereo image capturing method may further include automatically executing the application program only when the 3D capturing mode is selected by providing a user menu for selecting any one of a 2D capturing mode and a 3D capturing mode. It is preferable to provide.
상기 애플리케이션 프로그램은, 동영상 촬영 시에, 상기 신호처리부가 초당 적어도 30 프레임의 사이드 바이 사이드(Side by side) 스테레오 동영상이 상기 저장수단에 저장될 수 있는 속도로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 실시간으로 수행하도록 구성된 것이 바람직하다. The application program converts a signal that the signal processor reverses left and right of the first image at a speed at which the signal processing unit can store side by side stereo video of at least 30 frames per second in the storage means. It is desirable to be configured to perform the process in real time.
상기 반사경이 정확한 위치에 설치되는 것을 돕기 위해, 상기 카메라 모듈은 상기 카메라의 디스플레이 화면을 좌우로 양분하는 가상의 분할선을 상기 디스플레이 화면에 표시되도록 하는 단계를 더 구비하는 것이 바람직하다. In order to help the reflector be installed at the correct position, the camera module may further include a step of displaying a virtual dividing line dividing the display screen of the camera from side to side on the display screen.
본 발명에 의하면, 기존의 하나로 이루어져 있는 스마트폰 또는 소형 카메라 렌즈에 간단한 반사경을 부착하고, 그 반사경을 통해 반사되어 촬영된 좌우 뒤집힌 영상을 소프트웨어를 사용하여 원래대로 복구함으로써 3D 입체영상으로 감상할 수 있는 사이드 바이 사이드 형태의 스테레오 영상을 촬영할 수 있다.According to the present invention, by attaching a simple reflector to a smart phone or a small camera lens made of a conventional one, it is possible to enjoy the 3D stereoscopic image by restoring the left and right flipped images taken by reflecting through the reflector to their original state. Side by side stereo image can be taken.
두 개의 렌즈를 갖는 스테레오 카메라를 사용하지 않고, 하나의 렌즈만 있는 단안 카메라를 이용하여 3D 입체영상을 촬영할 수 있으므로, 3D 영상을 촬영하는 데 드는 비용을 현저히 낮출 수 있다. Instead of using a stereo camera having two lenses, a monocular camera having only one lens can be used to capture 3D stereoscopic images, thereby significantly reducing the cost of capturing 3D images.
특히, 사람들이 대부분 보유하고 있는 스마트폰 카메라에 간편하게 적용될 수 있으므로, 스테레오 영상 콘텐츠의 생성이 매우 활발하게 이루어질 것으로 기대된다. In particular, since it can be easily applied to a smartphone camera that most people have, it is expected that the generation of stereo image contents will be very active.
또한, 3D 영상으로 촬영할지 아니면 2차원(2-Dimensional: 2D) 영상으로 촬영할지 여부는 사용자가 선택할 수 있다. 반사경이 착탈식인데다가, 좌우 뒤집힘 복원용 프로그램의 실행 여부도 선택할 수 있다. 반사경의 설치 여부와 좌우 뒤집힘 복원용 프로그램의 실행은 사용자가 선택할 수 있는 사항이므로, 사용자들은 자신의 단안식 카메라를 가지고 필요한 경우에만 3D 입체영상을 촬영하고 필요 없는 경우에는 그냥 2D 영상을 촬영하는 것을 선택할 수 있는 편리함도 있다. 즉, 단안식 카메라로 필요에 따라 2D 영상을 촬영할 수도 있고 3D 영상을 촬영할 수도 있다.In addition, the user may select whether to photograph in a 3D image or a 2-Dimensional (2D) image. While the reflector is removable, it is also possible to select whether or not to run the program for restoring left and right flips. Since the installation of the reflector and the execution of the program for restoring the left and right flips are a matter of choice, the users should take their monocular camera and shoot 3D stereoscopic images only when necessary and 2D images when they are not necessary. There is also a convenience to choose from. That is, the monocular camera can capture 2D images or 3D images as needed.
도 1과 도 2는 본 발명에 따른 단안식 입체영상 촬영용 카메라의 반사경 조립 전의 상태와 반사경 조립 후의 상태를 각각 나타낸다. 1 and 2 show a state before assembling the reflector and a state after assembling the reflector of the camera for monocular stereoscopic imaging according to the present invention, respectively.
도 3은 통상적인 카메라 모듈의 구성을 도시한 블록도이다.3 is a block diagram showing the configuration of a conventional camera module.
도 4는 본 발명에 따른 단안식 입체영상 촬영용 카메라의 촬영 원리를 설명하기 위한 단면도이다.4 is a cross-sectional view for explaining a photographing principle of a monocular stereoscopic image capturing camera according to the present invention.
도 5는 반사경에 의해 좌우가 뒤집힌 영상의 원상복구용 애플리케이션 프로그램의 실행 순서를 나타낸 흐름도이다.5 is a flowchart illustrating an execution procedure of an application program for restoring an image of an image in which left and right are reversed by a reflector.
도 6의 (a)는 반사경에 의해 좌우가 뒤집힌 반사영상과 정상적인 무반사 영상, (b)는 (a)의 반사영상을 좌우를 뒤집어 원래대로 복구한 영상과 무반사 영상, (c)는 (b)의 두 영상을 합친 영상을 각각 개념적으로 도시한 것이다.6 (a) is a reflection image and a normal anti-reflection image inverted left and right by a reflector, (b) is an image and an anti-reflection image in which the reflection image of (a) is inverted and restored to its original state, and (c) is (b) This is a conceptual illustration of the combined image of the two images.
도 7은 반사경을 스마트폰 카메라에 장착하여 실제로 촬영한 영상으로서, (a)는 반사경에 의해 좌우가 뒤집힌 반사영상과 정상적인 무반사 영상이 사이드 바이 사이드 형태로 디스플레이된 것이고, (b)는 (a)의 반사영상을 좌우를 뒤집어 원래대로 복구한 영상과 무반사 영상이 사이드 바이 사이드 형태로 디스플레이된 것이다.FIG. 7 is an image actually taken by attaching a reflector to a smartphone camera. (A) shows a reflection image in which the reflector is flipped left and right by a reflector and a normal anti-reflection image in a side by side form, and (b) (a) The reflected image of the image is reversed to the left and right, and the original image and the anti-reflective image are displayed side by side.
도 8의 (a)와 (b)는 2D 촬영모드와 3D 촬영모드로 각각 촬영한 예를 나타낸다. 8 (a) and 8 (b) show examples of shooting in the 2D shooting mode and the 3D shooting mode, respectively.
이하에서는 첨부한 도면을 참조하여 본 발명의 바람직한 실시예에 관해 설명하기로 한다.Hereinafter, with reference to the accompanying drawings will be described a preferred embodiment of the present invention.
1. 본 발명에 따른 장치(10)의 구성1. Configuration of the device 10 according to the invention
도 1과 도 2는 본 발명에 따른 단안식 입체영상 촬영용 카메라(10)의 반사경 조립 전의 상태와 반사경 조립 후의 상태를 각각 나타낸다. 이 카메라(10)는 크게 카메라 모듈(40)과, 그 카메라 모듈(40)이 설치되는 카메라 본체(45)와, 카메라 모듈(40)의 렌즈(42) 근처에 기립된 형태로 거치되는 반사경(20), 그리고 그 반사경(20)을 카메라 본체(30)에 거치시켜주는 거치대(30)를 포함한다.1 and 2 show a state before assembling the reflector and a state after assembling the reflector of the camera 10 for monocular stereoscopic imaging according to the present invention, respectively. The camera 10 is largely equipped with a camera module 40, a camera main body 45 on which the camera module 40 is installed, and a reflecting mirror mounted in a standing position near the lens 42 of the camera module 40 ( 20, and a cradle 30 for mounting the reflector 20 to the camera body 30.
카메라 모듈(40)은 그 구성 예가 도 3에 도시되어 있는데, 한 개의 렌즈를 채용한 통상적인 것을 사용하면 된다. 카메라 모듈(40)은 렌즈 모듈을 포함한다. 이 렌즈 모듈은 영상의 빛을 모아주는 렌즈(42)와 후술하는 이미지 센서(46)와 렌즈(42)의 광축을 정렬해주는 홀더(43)로 구성된다. 카메라 모듈(40)은 또한 전기에너지를 변환하여 얻은 구동력을 이용하여 렌즈모듈을 원하는 방향으로 구동시켜 카메라의 초점을 제어하는 액추에이터(44)와 이에 구동제어신호를 제공하는 드라이버(45), 렌즈를 통해 들어온 영상(빛)을 전기적 신호로 변환해주는 이미지 센서(주로 CCD 또는 CMOS 어레이로 구성할 수 있음)(46), 그 이미지 센서(46)가 생성하는 이미지 신호를 처리하는 신호처리부(48), 그리고 이들 부품들(42, 43, 45, 46, 48) 등이 장착되고 그 이미지 센서(46)의 전기적 신호가 신호처리부(48)로 전달되게 하는 등, 이들 소자들의 신호를 입출력할 수 있는 통로 역할을 해주는 인쇄회로기판(PCB)(49)을 더 포함한다. An example of the configuration of the camera module 40 is shown in FIG. 3, and a conventional one employing one lens may be used. The camera module 40 includes a lens module. The lens module includes a lens 42 for collecting light of an image, an image sensor 46 to be described later, and a holder 43 for aligning an optical axis of the lens 42. The camera module 40 also uses an actuator 44 for driving the lens module in a desired direction by using a driving force obtained by converting electric energy to control the focus of the camera, a driver 45 for providing a driving control signal thereto, and a lens. An image sensor (consisting mainly of a CCD or CMOS array) 46 for converting an image (light) input through the electronic signal, a signal processor 48 for processing an image signal generated by the image sensor 46, And these components 42, 43, 45, 46, 48, etc. are mounted and the passage that can input and output signals of these elements, such that the electrical signal of the image sensor 46 is transmitted to the signal processor 48 It further includes a printed circuit board (PCB) 49 that serves.
신호처리부(48)는 이미지 센서(46)를 통해 얻는 영상신호의 처리를 수행한다. 본 발명과 관련하여 특징적인 점은 신호처리부(48)가 소정의 애플리케이션 프로그램(50)을 실행하여 신호처리를 하는 점이다. 그 애플리케이션 프로그램(50)은 반사경(20)을 통해 반사되어 좌우가 뒤집혀 이미지 센서(46)의 좌반면에 맺히는 영상신호(도 6의 (a)의 좌측 영상(65) 참조)를 다시 좌우를 뒤집어 원래의 정상적인 영상(도 6의 (a)의 좌측 영상(65') 참조)으로 변환하여 실상과 같아지도록 하는 좌우 뒤집음 처리 기능을 갖는다. 그 좌우 뒤집음 처리된 영상(65')과 이미지 센서(46)의 우반면에 맺힌 정상적인 영상(도 6의 (a)와 (b)의 우측 영상(60) 참조)을 사이드 바이 사이드 형태의 이미지(정지 화상)나 프레임(동화상)으로 구성하여 메모리에 저장되게 한다. 이 좌측 영상(65')과 우측 영상(65)이 서로 간에 약간의 각도 차이를 가지면서 사이드 바이 사이드 형태로 디스플레이 되면, 그것을 좌우의 눈으로 각각 보는 사람의 뇌에는 그 두 영상이 합성되어 입체적인 영상으로 인식된다. The signal processor 48 processes an image signal obtained through the image sensor 46. A feature of the present invention is that the signal processor 48 executes a predetermined application program 50 to perform signal processing. The application program 50 inverts the image signal (refer to the left image 65 in FIG. 6 (a)) which is reflected through the reflector 20 and flipped left and right and formed on the left half surface of the image sensor 46. It has a left and right flipping function that converts the original normal image (see the left image 65 'in FIG. 6A) to be the same as the actual image. The left and right flipped image 65 'and the normal image formed on the right half surface of the image sensor 46 (see the right image 60 of FIGS. 6A and 6B) are in a side-by-side image. It consists of a (still image) or a frame (movie) to be stored in the memory. When the left image 65 'and the right image 65 are displayed in side-by-side form with a slight angle difference from each other, the two images are synthesized in the brains of the viewer who sees them with left and right eyes, respectively, and a three-dimensional image. Is recognized.
카메라 본체(45)는 카메라 모듈(40)이 설치되는 것이면 어떤 것이든 무방하다. 예컨대 디지털 카메라의 본체 또는 카메라가 장착된 스마트폰 또는 휴대폰 본체가 이의 예가 될 수 있다. 이하에서는 카메라 장착된 스마트폰을 예로 하여 설명하기로 한다.The camera body 45 may be anything as long as the camera module 40 is installed. For example, the main body of the digital camera or the main body of the smartphone or mobile phone equipped with the camera may be an example. Hereinafter will be described by taking a smartphone equipped with a camera as an example.
반사경(20)은 렌즈(42) 바로 옆에(이하의 설명에서는 렌즈(42)의 좌측 옆에) 렌즈(42)의 축방향에 평행하게 기립되게 설치된다. 반사경(20)은 카메라(10)의 우측 전방의 장면을 렌즈(42) 쪽으로 반사하여 입사되도록 해준다(도 4 참조). 반사경(20)에서 반사되어 렌즈(42)로 들어가는 영상 즉, '반사영상'(도 4에서 2점 쇄선으로 표시된 부분)은 좌우가 뒤집힌 영상이다. The reflecting mirror 20 is provided to stand immediately next to the lens 42 (in the following description, to the left side of the lens 42) to stand in parallel with the axial direction of the lens 42. The reflector 20 reflects the scene in front of the right side of the camera 10 toward the lens 42 so as to be incident (see FIG. 4). An image that is reflected from the reflector 20 and enters the lens 42, that is, a “reflection image” (a portion indicated by a dashed-dotted line in FIG. 4) is an image in which left and right are reversed.
반사경(20)의 모양과 크기는 반사영상이 카메라(10)의 디스플레이(55)의 절반(이미지센서(46)의 절반에 상당함. 왜냐하면 보통 카메라의 디스플레이의 화소수는 이미지센서(46)의 화소수와 동일하므로, 디스플레이의 크기는 이미지센서(46)의 크기와 개념적으로는 동일하다고 볼 수 있기 때문)을 차지하도록 정할 필요가 있다. 그러므로 반사경(20)의 모양은 사각형이 바람직하다. 하지만 사각형으로만 국한되는 것은 아니다. 디스플레이(55) 화면의 절반 달리 말하면, 직사각형 모양의 이미지센서(46)의 절반을 차지하는 반사영상을 생성할 수 있는 모양이라면 어떤 것이라도 무방하다. 예컨대 사다리꼴, 오각형 이상의 다각형, 또는 상부 및 하부 모서리는 직선형이고 좌우측 모서리는 비직선형인 모양 등 다양한 모양이 가능하다. 예컨대 사각형 반사경(20)의 경우, 디스플레이(55)의 절반을 차지하는 정도의 크기로 만들면 된다. 즉, 사각형 반사경(20)의 가로(x)의 크기는 카메라(10) 디스플레이(55)의 가로(a)의 크기와 대략 같게 하되, 반사경(20)의 세로(y) 크기는 디스플레이(55)의 세로(b)의 크기의 대략 절반 정도로 정하면 될 것이다. 다만 반사경(20)의 사이즈는 렌즈(42)의 굴절률에도 영향을 받기 때문에 이 기준이 엄격하게 적용되지는 않을 수도 있다.The shape and size of the reflector 20 is that the reflected image is equivalent to half of the display 55 of the camera 10 (half of the image sensor 46. The normal number of pixels of the display of the camera is that of the image sensor 46). Since the size of the display is the same as the number of pixels, the size of the display needs to be determined to occupy the image sensor 46). Therefore, the shape of the reflector 20 is preferably rectangular. But it's not limited to rectangles. In other words, any half of the screen of the display 55 may be any shape that can generate a reflection image that occupies half of the rectangular image sensor 46. For example, trapezoids, polygons with pentagons or more, or upper and lower edges may be straight, and left and right edges may be non-linear. For example, the rectangular reflector 20 may be sized to occupy half of the display 55. That is, the size of the horizontal (x) of the rectangular reflector 20 is about the same as the size of the horizontal (a) of the display 55 of the camera 10, the vertical (y) size of the reflector 20 is the display 55 It can be set to about half of the size of (b) of. However, since the size of the reflector 20 is also affected by the refractive index of the lens 42, this criterion may not be strictly applied.
반사경(20)은 렌즈(42)와 대략 수직되게 즉, 렌즈(42)의 축방향과 평행하게 기립(즉, 직립)하도록 설치되는 것이 바람직하다. 다만, 반드시 직각으로 기립될 필요는 없고 대략 ±5°정도의 편차는 가질 수 있다. 반사경(20)의 기립방향이 각도편차범위를 벗어나면, 반사영상과 비반사영상이 지나치게 큰 뷰포인트각의 차이를 보여 3차원 입체영상의 화질이 나빠지게 된다. 반사경(20)은 또한 렌즈(42)와 근접하게 설치되어야 한다. 스마트폰 카메라의 경우 대략 렌즈(42)의 중심에서 4~7mm 정도 떨어진 위치에 반사경(20)이 설치되면 된다.The reflecting mirror 20 is preferably installed so as to stand (ie, upright) substantially perpendicular to the lens 42, that is, parallel to the axial direction of the lens 42. However, it is not necessary to stand at right angles and may have a deviation of about ± 5 °. When the standing direction of the reflector 20 is outside the angular deviation range, the image quality of the 3D stereoscopic image is deteriorated because the reflected image and the non-reflective image show an excessively large viewpoint angle. The reflector 20 should also be installed in close proximity to the lens 42. In the case of a smartphone camera, the reflector 20 may be installed at a position approximately 4 to 7 mm away from the center of the lens 42.
반사경(20)의 설치는 카메라(10)의 디스플레이(55)를 보면서 하면 된다. 즉, 사용자는 반사경(20)에 의한 반사영상이 디스플레이(55)의 한쪽 절반을 차지하도록 반사경(20)의 설치 위치를 조정하면 된다. 반사경(20)의 설치 위치 조정이 편리하도록 하기 위해, 사용자가 3D모드 촬영을 선택하여 애플리케이션 프로그램(50)이 구동되면, 그 애플리케이션 프로그램(50)은 디스플레이(55)를 좌우로 양분하는 가상의 분할선(57)이 표시되도록 하는 기능을 작동시켜 사용자의 반사경(20) 설치를 돕도록 하는 것이 바람직하다. 반사경(20) 설치가 완료되면 그 분할선(57)은 사라지도록 하면 될 것이다.The reflection mirror 20 may be installed by looking at the display 55 of the camera 10. That is, the user may adjust the installation position of the reflector 20 such that the reflected image by the reflector 20 occupies one half of the display 55. In order to facilitate the adjustment of the installation position of the reflector 20, when the user selects 3D mode shooting and the application program 50 is driven, the application program 50 divides the display 55 from side to side. It is desirable to operate the function to display the line 57 to help the user to install the reflector 20. When the installation of the reflector 20 is completed, the dividing line 57 may disappear.
거치대(30)는 반사경(20)을 카메라 모듈(40) 옆에 기립하여 거치되도록 잡아준다. 일 구성예에 따르면, 거치대(30)는 반사경(20)의 배면에 접합된 지지판(32)과, 일측이 그 지지판(32)과 결합되고 타측은 카메라 본체(45)의 가장자리 부분을 붙잡아 결합되는 홀더부(34)를 포함한다. 지지판(32)의 저면과 홀더부(34) 사이에 카메라 본체(45)의 가장자리 부분이 끼인 채 홀더부(34)가 갖는 탄성력에 의해 붙잡히게 되어, 거치대(30)가 카메라 본체(45)에 고정된다. 거치대는 강도와 탄성을 동시에 만족하는 플라스틱 사출물로 만들 수 있다. 홀더부(34)는 지지판(32)의 저면과 함께 집게 내지 클립 역할을 하도록 파지력이 좋게 만든다(예컨대 홀더부(34) 단부에 돌출부를 형성하거나 파지력이 좋은 고무 또는 우레탄 패드를 덧대는 형태로 만듦). 홀더부(34)가 탄성이 가지므로 카메라 본체(45)의 다양한 두께 사이즈에 탄력적으로 대응하는 것이 가능하다. 도면에서는 홀더부(34)를 하나만 도시하였지만 안정된 파지력을 얻기 위해 복수 개의 홀더부(34)를 마련하는 것도 바람직할 것이다.The cradle 30 holds the reflector 20 so as to stand and stand by the camera module 40. According to one configuration, the holder 30 is a support plate 32 bonded to the rear surface of the reflector 20, one side is coupled to the support plate 32 and the other side is coupled to hold the edge portion of the camera body 45 It includes a holder 34. The edge portion of the camera body 45 is caught between the bottom face of the support plate 32 and the holder portion 34 by the elastic force of the holder portion 34, so that the holder 30 is attached to the camera body 45. It is fixed. The cradle can be made of a plastic injection molding that satisfies both strength and elasticity. The holder portion 34 makes the gripping force good to serve as a forceps or a clip together with the bottom surface of the support plate 32 (for example, to form a protrusion at the end of the holder portion 34 or to pad a rubber or urethane pad having good gripping force). ). Since the holder portion 34 is elastic, it is possible to flexibly correspond to various thickness sizes of the camera body 45. Although only one holder part 34 is shown in the drawing, it may be desirable to provide a plurality of holder parts 34 to obtain stable gripping force.
거치대(30)의 다른 구성 예로는, 카메라 본체(45)에 부착된 베이스부와, 그 베이스부에서 렌즈(42)의 축방향으로 직립한 직립부를 포함할 수 있다. 반사경(20)은 그 직립부 표면에 부착되어 렌즈(42)의 축방향과 평행하게 기립된다. Another configuration example of the holder 30 may include a base portion attached to the camera body 45 and an upright portion upright in the axial direction of the lens 42 at the base portion. The reflector 20 is attached to its upright surface and stands up in parallel with the axial direction of the lens 42.
2. 스테레오 영상을 얻기 위한 영상신호 처리2. Image signal processing to obtain stereo image
본 발명을 실시하기 위해서는 이미지 센서에 맺히는 영상 신호를 처리하는 애플리케이션이 필요하다. 도 4는 반사경(20)이 장착된 카메라(10)로 영상을 촬영할 때, 카메라 모듈(40)의 전방에 있는 물체가 촬영되는 원리를 보여준다. 반사경(20)이 장착되지 않은 경우, 렌즈(42)로 들어오는 전방의 장면은 렌즈(42)의 전방의 축 방향을 기준으로 좌우로 소정 각도범위 안에 드는 장면이다. 하지만 도 4처럼 렌즈(42) 옆에 반사경(20)이 설치된 경우, 좌측 전방의 장면은 반사경(20)에 가려져 렌즈(42)로 들어올 수 없고, 우측 전방의 장면만이 렌즈(42)로 직접 들어옴과 동시에 반사경(20)에 의해 반사되어 들어온다. 즉, 렌즈(42)로 들어오는 장면은 카메라(10)의 우측 전방의 장면으로서 두 가지 영상으로서, 한 가지는 반사경(20)에서 반사되어 들어오는 '반사 영상'이고, 나머지 한 가지는 반사경(20)을 거치지 않고 직접 들어오는 '무반사 영상'이다. 반사 영상의 커버리지(R1-R2)와 무반사 영상의 커버리지(D1-D2)는 완전히 동일하지 않고 뷰포인트에 있어서 약간의 편차를 가진다. 따라서 렌즈(42)를 통해 이미지 센서(46)에 맺히는 영상은 서로 다른 각도에서 잡은 두개의 영상이 이미지 센서(46)의 좌우에 사이드 바이 사이드 형태로 존재하게 된다. In order to implement the present invention, an application for processing an image signal formed on an image sensor is required. 4 shows a principle that an object in front of the camera module 40 is photographed when the image is captured by the camera 10 equipped with the reflector 20. When the reflector 20 is not mounted, the front scene entering the lens 42 falls within a predetermined angle range from side to side with respect to the axial direction of the front of the lens 42. However, when the reflector 20 is installed next to the lens 42 as shown in FIG. 4, the scene in front of the left side is hidden by the reflector 20 and cannot enter the lens 42, and only the scene in front of the right side directly into the lens 42. At the same time as it enters, it is reflected by the reflector 20. In other words, the scene coming into the lens 42 is a scene of the right front of the camera 10, two images, one of which is a 'reflected image' reflected from the reflector 20, and the other is not passed through the reflector 20. It is a 'anti-reflective video' that comes in directly without. The coverages R 1 -R 2 of the reflected image and the coverages D 1 -D 2 of the non-reflective image are not exactly the same and have a slight deviation in the viewpoint. Therefore, in the image formed on the image sensor 46 through the lens 42, two images captured at different angles exist in the side by side form on the left and right sides of the image sensor 46.
이미지 센서(46)의 좌측 부분에 맺히는 반사 영상은 반사경에 의하여 좌우가 뒤집혀진 상태로 들어온 영상이며(거울을 통해 어떤 물체를 볼 때 좌우가 뒤바뀌어 보이는 것과 같은 이치임), 우측 부분에 맺히는 무반사 영상은 실제로 보이는 대로 나타나는 영상이다. 그 반사 영상은 애플리케이션 프로그램(50)을 이용하여 좌우 뒤집기를 실시간으로 수행하여 반사경(20)을 거치지 않은 영상처럼 변환한다. 그런 변환처리를 하게 되면 이미지 센서(46)의 좌측 절반과 우측 절반에 동시에 서로 약간의 각도 차이를 갖는 두 영상이 나란히(즉, 사이드 바이 사이드 형태로) 맺힌 것과 같은 결과가 된다(도 7의 (b) 참조). 이 두 영상은 쌍을 이루어 영상메모리에 저장된다. 그리고 이 두 영상을 디스플레이(55)의 좌우 절반에 각각 디스플레이 시킨 상태에서, 사람이 좌측 눈은 좌측 영상을 보고 우측 눈은 우측 영상을 보게 해주는 별도의 입체영상 관람수단을 이용하여 그 영상을 보면 입체적으로 보이게 된다. The reflection image formed on the left side of the image sensor 46 is an image that has been inverted left and right by the reflector (the same sense as the left and right are reversed when viewing an object through a mirror), and the antireflection formed on the right side The image is what appears as it actually is. The reflection image is converted in real time by flipping left and right using the application program 50 as if the reflection mirror 20 did not pass through. Such conversion results in the same result as the two images having a slight angle difference from each other simultaneously on the left half and the right half of the image sensor 46 side by side (i.e., in a side-by-side form). b)). The two images are paired and stored in the image memory. In the state in which the two images are displayed on the left and right halves of the display 55, the person sees the image using a separate stereoscopic image viewing means that allows the left eye to see the left image and the right eye to see the right image. Will appear.
도 5의 흐름도를 참조하여 이를 좀 더 자세하게 설명하기로 한다. 도 5의 흐름도는 반사경(20)에 의해 좌우가 뒤집혀진 영상을 좌우 뒤집음 처리를 하여 다시 정상적인 영상으로 원상 복구하는 애플리케이션 프로그램(50)의 신호처리 과정을 개략적으로 보여준다. 본 발명의 카메라(10)는 사진 촬영 애플리케이션을 실행하면 디스플레이 화면(55)에 사용자가 2D(모노) 촬영모드(82) 또는 3D(스테레오) 촬영모드(80) 중 어느 한 가지를 선택할 수 있는 선택권을 제공한다. 도 8의 (a)는 2D 촬영모드(82)를 선택하여 촬영한 영상이고, (b)는 3D 촬영모드(83)를 선택하여 촬영한 영상이다. 이 애플리케이션 프로그램(50)은 사용자가 2D 촬영모드(82)를 선택한 때에는 실행되지 않고 3D 촬영모드(80)인 경우에만 실행된다(S10, S12 단계). This will be described in more detail with reference to the flowchart of FIG. 5. 5 is a schematic diagram illustrating a signal processing process of an application program 50 which restores the image flipped left and right by the reflector 20 to the normal image again. When the camera 10 of the present invention executes a photo shooting application, the user can select one of the 2D (mono) shooting mode 82 or the 3D (stereo) shooting mode 80 on the display screen 55. To provide. 8A illustrates an image photographed by selecting the 2D photographing mode 82, and FIG. 8B illustrates an image photographed by selecting the 3D photographing mode 83. This application program 50 is not executed when the user selects the 2D shooting mode 82, but is executed only in the 3D shooting mode 80 (steps S10 and S12).
3D 입체영상의 촬영 전 준비로는 3D 촬영모드(80)의 선택 외에, 반사경(20)도 설치해야 한다. 반사경(20) 설치는, 홀더부(34)와 지지판(32) 저면 사이에 카메라 본체(45)를 끼워넣어 반사경(20)에 의한 반사영상이 디스플레이(55) 화면의 절반을 차지하도록 반사경(20)의 설치 위치를 조절한다. 이 때 반사영상의 우측 경계가 가상의 분할선(57)과 일치하도록 반사경(20)을 설치하면 될 것이다. 또 다른 촬영준비로서, 사용자는 스틸컷 촬영모드(84)와 동영상 촬영모드(86) 중 한 가지를 선택한다. 3D 촬영 준비가 완료되면 사용자는 촬영버튼(88)을 눌러 촬영을 시작한다(S14 단계). In addition to the selection of the 3D shooting mode 80, the reflector 20 should be installed before the 3D stereoscopic image is taken. In the installation of the reflector 20, the camera body 45 is sandwiched between the holder 34 and the bottom of the support plate 32 so that the reflected image by the reflector 20 occupies half of the screen of the display 55. Adjust the installation position of). In this case, the reflector 20 may be provided such that the right boundary of the reflected image coincides with the virtual dividing line 57. As another shooting preparation, the user selects one of the still cut shooting mode 84 and the moving picture shooting mode 86. When the 3D shooting preparation is completed, the user presses the shooting button 88 to start shooting (step S14).
예컨대 스틸컷 촬영의 경우, 이미지 센서(46)의 좌측 절반에는 반사경(20)에 의해 좌우가 반전된 반사 영상이 맺히고 나머지 우측 절반에는 반사경(20)을 거치지 않은 정상적인 무반사 영상이 맺힌다. 이 반사 영상과 무반사 영상은 서로 약간의 뷰포인트를 달리 하면서 디스플레이(55) 화면의 좌우에 각각 디스플레이 된다. 도 7의 (a)가 그 예를 보여주는 바, 우측 영상(70)은 무반사 영상이고, 좌측 영상(75)은 반사 영상으로서 좌우가 뒤집혀져 있음을 확인할 수 있다. For example, in the case of still cut photography, the left half of the image sensor 46 bears a reflection image inverted left and right by the reflector 20, and the other right half bears a normal antireflection image without passing through the reflector 20. The reflection image and the anti-reflection image are displayed on the left and right sides of the screen of the display 55 with slightly different viewpoints. As shown in FIG. 7A, the right image 70 is an antireflection image, and the left image 75 is a reflection image, and the left and right sides are reversed.
반사 영상의 좌우를 뒤집어서 정상적인 영상으로 만드는 신호처리는 신호처리부(48)가 애플리케이션 프로그램(50)을 실행하여 수행한다. 신호처리부(48)는 이미지 센서(46)의 좌측 절반 영역에 맺힌 반사영상의 신호를 읽어와 내장 메모리에서 그 반사영상의 좌우 뒤집음 처리를 한 후, 별도의 영상 메모리에 저장한다(S16 단계). 이미지 센서(46)의 우측 절반에 맺힌 비반사영상의 신호는 아무런 처리를 하지 않고 그대로 영상 메모리에 복사한다(S18 단계).The signal processing unit 48 executes the application program 50 to invert the left and right sides of the reflected image to form a normal image. The signal processor 48 reads the signal of the reflected image formed in the left half region of the image sensor 46, performs left and right flipping of the reflected image in the internal memory, and stores the signal in a separate image memory (step S16). . The signal of the non-reflective image formed on the right half of the image sensor 46 is copied to the image memory as it is without any processing (step S18).
반사영상의 좌우 뒤집음 처리는 다음과 같이 이루어진다. 신호처리부(48)는 먼저 이미지 센서(46)의 화소 수를 계산하여 내장 메모리에 기록된 영상 데이터 중에서 좌측 반에 해당하는 영상 즉, 반사영상을 잘라낸다. 그런 다음, 내장 메모리에서 그 좌측 반의 영상을 다음과 같은 방법으로 뒤집는다. 즉, 이미지 센서(46)의 세로 화소 V(i)가 n개(i=1, 2, 3, …, n) 가로 화소 H(j)가 m개(j=1, 2, 3, …, m) 있다면, 이미지 센서(46)의 좌측 절반에 위치한 화소들 V(1), V(2), V(3), …, V(n/2)은 반사영상을 구성하는 화소들이므로, 이들 화소들 V(1), V(2), V(3), …, V(n/2)의 값(내장 메모리에 저장된 데이터임)을 V(n/2), V((n/2)-1), …, V(2), V(1) 화소의 값으로 변경시켜 영상 메모리에 저장한다. 이에 의해 좌우 뒤집음 처리가 이루어졌다. 또한, 이미지 센서(46)의 나머지 우측 절반에 위치하는 화소들 V((n/2)+1), …, V(n)의 값(내장 메모리에 저장된 데이터임)은 비반사영상을 구성하는 화소들이므로 원래 값 그대로 영상 메모리에 저장한다. 이와 같은 처리를 H(1) 부터 H(m)까지 각각의 열에 대하여 수행하여 이미지센서(46)의 전체 화소에 대해 좌우 뒤집음 처리를 행한다. 예컨대, 신호처리부(48)는 이미지 센서(46)로부터 내장 메모리로 전달된 픽셀 데이터가 1280x720개 이었다면 1280개의 반인 좌측의 640개 픽셀의 데이터를 그 내장 메모리에서 좌우 뒤집음 처리를 한 후 영상 메모리에 저장한다. 우측의 640개 픽셀의 데이터는 그대로 영상 메모리에 복사한다. 이와 같은 처리가 모두 끝나면, 이미지 센서(46)의 좌측 절반 화소들의 데이터는 모두 좌우의 자리바꿈을 한 데이터로 된다. Right and left flipping of the reflected image is performed as follows. The signal processor 48 first calculates the number of pixels of the image sensor 46 and cuts an image corresponding to the left half of the image data recorded in the internal memory, that is, the reflected image. Then, flip the left half of the image in the internal memory as follows. That is, n vertical pixels V (i) of the image sensor 46 (i = 1, 2, 3, ..., n) m horizontal pixels H (j) (j = 1, 2, 3, ..., n m) if present, pixels V (1), V (2), V (3),... located on the left half of image sensor 46. , V (n / 2) are pixels constituting the reflected image, and thus these pixels V (1), V (2), V (3),... , The value of V (n / 2) (data stored in the internal memory) is set to V (n / 2), V ((n / 2) -1),... , V (2) and V (1) pixels are converted into values and stored in the image memory. The left and right flipping process was performed by this. Further, pixels V ((n / 2) +1),... Positioned in the remaining right half of the image sensor 46. , V (n) values (data stored in the internal memory) are pixels constituting the non-reflective image, and thus stored in the image memory as they are. Such processing is performed for each column from H (1) to H (m) to perform left and right flipping for all the pixels of the image sensor 46. For example, if the pixel data transferred from the image sensor 46 to the internal memory is 1280x720, the signal processor 48 performs left and right flipping of 640 pixels of the left half of 1280 in the internal memory, and then converts the image data into the image memory. Save it. The data of 640 pixels on the right side is copied to the image memory as it is. When all of these processes are completed, the data of the left half pixels of the image sensor 46 are the data of right and left inversion.
이렇게 반사영상에 대해 좌우 뒤집음 처리를 하고 난 후, 그 반사영상과 비반사영상을 카메라(10)의 디스플레이(55) 화면에 표시한다(S20 단계). 도 7의 (b)는 이러한 좌우 뒤집음 처리를 한 후의 비반사영상(70)과 반사영상(75')이 카메라(10)의 디스플레이(55) 화면의 우측 및 좌측 절반에 사이드 바이 사이드 형태로 표시된 예를 보여준다. 이 두 영상은 서로 뷰포인트각이 약간 차이가 있다. 이 두 영상을 아래위로 포개보면 그 뷰포인트각의 차이로 인해 약간 흐리게 보인다.After the left and right flip processing on the reflection image, the reflection image and the non-reflection image are displayed on the screen of the display 55 of the camera 10 (step S20). 7 (b) shows that the non-reflective image 70 and the reflection image 75 'after the left and right flip processing are formed in side by side on the right and left halves of the screen of the display 55 of the camera 10. The example shown is shown. These two images have slightly different viewpoint angles. When these two images are stacked up and down, they appear slightly blurred due to the difference in their viewpoint angles.
동영상 촬영의 경우, 매 프레임마다 반사영상의 좌우 뒤집기 처리를 한 다음 무반사영상과 사이드 바이 사이드 형태로 배치되게 영상 메모리에 저장하면 된다.In the case of video recording, the left and right flip processing of the reflected image is performed every frame and then stored in the image memory to be arranged in the form of an antireflection image and a side by side.
촬영이 종료되면(S22 단계), 스틸 사진인 경우 영상 메모리의 RGB 데이터를 JPG 파일 형식으로 별도의 저장공간(예: SD 카드)에 저장하고, 동영상의 경우는 MP4 파일 형식으로 초당 30 프레임을 영상 메모리에 저장하였다가 레코딩이 끝났다는 신호가 들어오면 파일 형식으로 별도의 저장 공간(예: SD 카드)에 저장한다(S24 단계). 동영상의 경우는 좌우 뒤집기 처리된 반사영상과 무반사영상이 한 프레임의 좌측 절반과 우측 절반을 차지하도록 조합하여 사이드 바이 사이드 스테레오 영상 프레임 단위로 영상 메모리에 기록한다. 사람이 화면을 보았을 때 좌우가 스테레오 영상으로 보이도록 하기 위해서는, 이와 같은 좌측 영상의 좌우 반전 처리는 사람의 눈이 인지할 수 없는 시간(대략 1/30초) 안에 수행할 필요가 있다. 동영상을 촬영하는 때에는 초당 30 프레임의 사이드 바이 사이드 스테레오 동영상이 저장되도록 내장 메모리에서 연산을 수행한다. 그러기 위해 최소 1/40초 안에 저장되어야 하며 저장된 영상은 MP4 형태로 저장한다. When shooting is finished (step S22), in case of a still picture, the RGB data of the image memory is stored in a separate storage space (for example, an SD card) in the JPG file format, and in the case of a video, 30 frames per second in the MP4 file format When it is stored in memory and a signal is received that the recording is finished, it is stored in a separate storage space (for example, SD card) in the file format (step S24). In the case of a moving picture, the left and right flipped reflection images and the non-reflected image occupy the left half and the right half of one frame, and are recorded in the image memory in units of side by side stereo image frames. In order for the left and right to be seen as a stereo image when a person looks at the screen, such left and right inversion processing of the left image needs to be performed within a time (about 1/30 second) that the human eye cannot recognize. When shooting video, operations are performed in internal memory to store side-by-side stereo video at 30 frames per second. To do this, it must be saved in at least 1/40 seconds and the stored video is saved in MP4 format.
이렇게 하여 얻어진 동영상은 재생 시 매 프레임마다 사이드 바이 사이드 스테레오 영상이 화면에 디스플레이 되고(스틸컷 영상의 경우도 마찬가지임), 그 영상을 보는 사람의 좌측 눈과 우측 눈은 화면의 좌반분 영역과 우반분 영역을 각각 보도록 해주는 수단을 이용하여 그 영상을 보면, 그 사람의 뇌에서 입체영상으로 만들어져 공간의 깊이를 확실하게 느낄 수 있는 입체영상으로 인식되게 된다.The video obtained in this way is displayed with side by side stereo images on the screen every frame during playback (even in the case of still cut images), and the left and right eyes of the viewer are the left half and right half of the screen. If you look at the image using a means to see each of the divided areas, it is recognized as a stereoscopic image that is made into a stereoscopic image in the human brain to feel the depth of space with certainty.
이상에서는 스마트 폰 카메라에 반사경을 적용한 경우를 예로 하여 설명하였지만, 애플리케이션 프로그램을 실행할 수 있는 기능을 가진 다른 종류의 카메라에도 본 발명이 적용될 수 있음은 물론이다.In the above, the case where the reflector is applied to the smartphone camera has been described as an example, but the present invention can be applied to other types of cameras having a function of executing an application program.
이상에서는 설명한 본 발명의 내용은 본 발명의 바람직한 실시예에 불과하다. 해당 기술분야의 숙련된 당업자는 하기의 특허청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있다. 따라서 특허청구범위의 등가적인 의미나 범위에 속하는 모든 변화들은 전부 본 발명의 권리범위 안에 속함을 밝혀둔다. The contents of the present invention described above are merely preferred embodiments of the present invention. Those skilled in the art can variously modify and modify the present invention without departing from the spirit and scope of the invention as set forth in the claims below. Accordingly, all changes that come within the meaning or range of equivalency of the claims are to be embraced within their scope.
본 발명은 스마트폰 카메라 또는 디지털 카메라 등에 적용하여 3D 입체영상을 촬영하는 데 널리 이용될 수 있다.The present invention can be widely applied to take a 3D stereoscopic image by applying to a smartphone camera or a digital camera.

Claims (14)

  1. 하나의 렌즈와, 상기 렌즈를 구동하는 액추에이터, 상기 렌즈를 통과한 영상의 빛을 전기신호로 변환하는 이미지센서, 상기 이미지센서로부터 영상신호를 읽어 와서 소정의 처리를 하는 신호처리부, 그리고 상기 액추에이터를 구동하는 드라이버를 갖는 카메라 모듈과, 상기 카메라 모듈이 설치된 카메라 본체를 포함하는 단안식 카메라로서,A lens, an actuator for driving the lens, an image sensor for converting light of the image passing through the lens into an electrical signal, a signal processor for reading a video signal from the image sensor and performing predetermined processing, and the actuator A monocular camera comprising a camera module having a driver to drive and a camera body in which the camera module is installed,
    상기 렌즈의 전방의 장면을 반사시켜 상기 렌즈로 입사되게 하는 반사경; 및A reflector reflecting the front scene of the lens to be incident on the lens; And
    일측이 상기 카메라 본체와 결합된 채, 상기 반사경을 상기 카메라 모듈 옆에서 상기 렌즈의 전방을 향하여 상기 렌즈의 축방향과 소정의 각도편차범위 내에서 나란하게 기립하도록 잡아주는 반사경 거치대를 더 구비하며,It is further provided with a reflector holder for holding the reflector to stand side-by-side in the axial direction and the predetermined angle deviation range of the lens toward the front of the lens next to the camera module, coupled to the camera body,
    상기 이미지센서에 맺히는 영상은, 상기 반사경에서 반사되어 상기 렌즈로 입사하여 상기 이미지센서의 제1 절반에 맺히는 제1 영상과, 상기 반사경을 통하지 않고 상기 렌즈에 직접 입사하여 상기 이미지센서의 나머지 제2절반에 맺히는 제2영상으로 구성되며, The image formed on the image sensor includes a first image reflected by the reflector and incident on the lens and formed on the first half of the image sensor, and directly incident on the lens without passing through the reflector and remaining on the second sensor of the image sensor. Consists of a second video in half
    상기 신호처리부는, 소정의 애플리케이션 프로그램을 실행하여, 상기 이미지센서의 제1절반에 맺히는 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 하여, 그 신호변환처리된 상기 제1 영상의 영상신호와 상기 제2 영상의 원래의 영상신호를 사이드 바이 사이드(side by side) 스테레오 영상으로 저장수단에 저장하는 처리를 수행하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The signal processing unit executes a predetermined application program to perform a signal conversion process of inverting the left and right sides of the first image formed in the first half of the image sensor, and the video signal of the first image subjected to the signal conversion processing and the And a process of storing the original video signal of the second video as a side by side stereo video in a storage means.
  2. 제1항에 있어서, 상기 반사경 거치대는, 상기 반사경의 배면을 붙잡아 지지해주는 배면지지부와, 일측이 상기 배면지지부와 결합된 채 타측이 상기 카메라 본체의 일측을 붙잡아 조이는 형태로 상기 카메라 본체와 결합하는 파지부를 포함하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The method of claim 1, wherein the reflector holder is coupled to the camera body in the form of a back support for holding and holding the back of the reflector, and the other side to hold and tighten one side of the camera body while one side is combined with the back support Monocular camera for shooting a side-by-side stereo image, characterized in that it comprises a grip.
  3. 제1항에 있어서, 상기 카메라는 사용자가 2D 촬영모드와 3D 촬영모드 중 어느 한 가지를 선택할 수 있는 메뉴를 제공하며, 상기 3D 촬영모드가 선택된 경우에만 상기 애플리케이션 프로그램이 자동으로 실행되도록 구성된 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The method of claim 1, wherein the camera provides a menu for a user to select one of a 2D shooting mode and a 3D shooting mode, and the application program is configured to automatically execute only when the 3D shooting mode is selected. Monocular camera for shooting side by side stereo images.
  4. 제1항에 있어서, 상기 애플리케이션 프로그램은, 동영상 촬영 시에, 상기 신호처리부가 초당 적어도 30 프레임의 사이드 바이 사이드(Side by side) 스테레오 동영상이 상기 저장수단에 저장될 수 있는 속도로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 실시간으로 수행하도록 구성된 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The method of claim 1, wherein the application program, when the moving picture, the signal processing unit at least 30 frames per second Side by side (Side by side) stereo video at a rate that can be stored in the storage means the first image Monocular camera for shooting a side-by-side stereo image, characterized in that configured to perform the signal conversion processing to reverse the left and right of the real time.
  5. 제1항에 있어서, 상기 애플리케이션 프로그램은, 상기 이미지 센서의 세로 화소 V(i)가 n개(i=1, 2, 3, …, n)이고 가로 화소 H(j)가 m개(j=1, 2, 3, …, m)인 경우, 상기 이미지 센서의 상기 제1 절반에 위치한 화소들 V(1), V(2), V(3), …, V(n/2)의 값을 V(n/2), V((n/2)-1), …, V(2), V(1) 화소의 값으로 각각 변경시키는 처리를 H(1)부터 H(m)까지 각각의 열에 대하여 수행하는 방법으로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 수행하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The method of claim 1, wherein the application program comprises n vertical pixels V (i) of the image sensor (i = 1, 2, 3, ..., n) and m horizontal pixels H (j) (j = 1, 2, 3,..., M), pixels V (1), V (2), V (3),... Positioned in the first half of the image sensor. , The values of V (n / 2) are V (n / 2), V ((n / 2) -1),... And a signal conversion process of inverting the left and right sides of the first image by performing a process of changing the values of the V (2) and V (1) pixels to the columns of H (1) to H (m), respectively. Monocular camera for shooting a side-by-side stereo image, characterized in that.
  6. 제1항에 있어서, 상기 소정의 각도편차범위는 ±5°의 범위인 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The monocular camera of claim 1, wherein the predetermined angular deviation range is ± 5 °.
  7. 제1항에 있어서, 상기 반사경은 상부 모서리와 하부 모서리가 직선형인 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The monocular camera of claim 1, wherein the reflector has a straight upper edge and a lower edge.
  8. 제1항에 있어서, 상기 카메라는, 상기 카메라 본체가 스마트폰 본체이고 상기 카메라 모듈이 상기 스마트폰 본체에 장착된 카메라 모듈인 스마트폰 카메라인 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The method of claim 1, wherein the camera is a smartphone camera, wherein the camera body is a smartphone body and the camera module is a camera module mounted on the smartphone body. Rest camera.
  9. 제1항에 있어서, 상기 신호처리부는, 상기 애플리케이션 프로그램을 실행하여, 상기 반사경이 정확한 위치에 설치되는 것을 돕기 위해, 상기 카메라의 디스플레이 화면을 좌우로 양분하는 가상의 분할선을 상기 카메라의 디스플레이 화면에 표시되도록 하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상을 촬영하기 위한 단안식 카메라.The display screen of the camera of claim 1, wherein the signal processor is further configured to execute a virtual division line dividing the display screen of the camera from side to side in order to help the application program to be installed at an accurate position. Monocular camera for shooting side-by-side stereo image, characterized in that the display.
  10. 하나의 렌즈와, 상기 렌즈를 구동하는 액추에이터, 상기 렌즈를 통과한 영상의 빛을 전기신호로 변환하는 이미지센서, 상기 이미지센서로부터 영상신호를 읽어 와서 소정의 처리를 하는 신호처리부, 그리고 상기 액추에이터를 구동하는 드라이버를 갖는 카메라 모듈과, 상기 카메라 모듈이 설치된 카메라 본체를 포함하는 단안식 카메라를 사용하여 사이드 바이 사이드 스테레오 영상을 촬영하는 방법으로서,A lens, an actuator for driving the lens, an image sensor for converting light of the image passing through the lens into an electrical signal, a signal processor for reading a video signal from the image sensor and performing predetermined processing, and the actuator A method of photographing a side-by-side stereo image using a monocular camera including a camera module having a driver to drive and a camera body having the camera module installed thereon,
    반사경을 상기 카메라 모듈 옆에서 상기 렌즈의 전방을 향하여 상기 렌즈의 축방향과 소정의 각도편차범위 내에서 나란하게 기립하는 형태로 설치하여, 상기 이미지센서에 맺히는 영상이, 상기 반사경에서 반사되어 상기 렌즈로 입사하여 상기 이미지센서의 제1절반에 맺히는 제1 영상과, 상기 반사경을 통하지 않고 상기 렌즈에 직접 입사하여 상기 이미지센서의 나머지 제2절반에 맺히는 제2영상으로 구성되도록 하는 단계; 및The reflector is installed in the form of standing up side by side in the axial direction of the lens and a predetermined angular deviation range from the camera module to the front of the lens, so that the image formed on the image sensor is reflected by the reflector and the lens A first image incident on the first half of the image sensor and a second image incident directly on the lens without passing through the reflector and formed on the remaining second half of the image sensor; And
    상기 신호처리부가, 소정의 애플리케이션 프로그램을 실행하여, 상기 이미지센서의 제1절반에 맺히는 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 하여, 그 신호변환처리된 상기 제1 영상의 영상신호와 상기 제2 영상의 원래의 영상신호를 사이드 바이 사이드(side by side) 스테레오 영상으로 저장수단에 저장하는 처리를 수행하는 단계를 구비하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법.The signal processing unit executes a predetermined application program to perform a signal conversion process of inverting the left and right sides of the first image formed in the first half of the image sensor, and the video signal of the first image subjected to the signal conversion processing and the And storing the original video signal of the second video as a side by side stereo video in the storage means.
  11. 제10항에 있어서, 상기 애플리케이션 프로그램에 의한 상기 제1 영상의 좌우를 뒤집는 신호변환처리는, 상기 이미지 센서의 세로 화소 V(i)가 n개(i=1, 2, 3, …, n)이고 가로 화소 H(j)가 m개(j=1, 2, 3, …, m)인 경우, 상기 이미지 센서의 상기 제1 절반에 위치한 화소들 V(1), V(2), V(3), …, V(n/2)의 값을 V(n/2), V((n/2)-1), …, V(2), V(1) 화소의 값으로 각각 변경시키는 처리를 H(1)부터 H(m)까지 각각의 열에 대하여 수행하는 방법으로 이루어지는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법.The signal conversion processing for inverting the left and right of the first image by the application program includes n vertical pixels V (i) of the image sensor (i = 1, 2, 3, ..., n). And the horizontal pixels H (j) are m (j = 1, 2, 3, ..., m), the pixels V (1), V (2), V (located in the first half of the image sensor. 3),… , The values of V (n / 2) are V (n / 2), V ((n / 2) -1),... And performing a process of changing the values of the V (2) and V (1) pixels to the columns of H (1) to H (m), respectively.
  12. 제10항에 있어서, 2D 촬영모드와 3D 촬영모드 중 어느 한 가지를 선택할 수 있는 사용자 메뉴를 제공하여, 상기 3D 촬영모드가 선택된 경우에만 상기 애플리케이션 프로그램을 자동으로 실행하는 단계를 더 구비하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법.The method of claim 10, further comprising providing a user menu for selecting one of the 2D shooting mode and the 3D shooting mode, and automatically executing the application program only when the 3D shooting mode is selected. Side-by-side stereo video recording method.
  13. 제10항에 있어서, 상기 애플리케이션 프로그램은, 동영상 촬영 시에, 상기 신호처리부가 초당 적어도 30 프레임의 사이드 바이 사이드(Side by side) 스테레오 동영상이 상기 저장수단에 저장될 수 있는 속도로 상기 제1 영상의 좌우를 뒤집는 신호변환처리를 실시간으로 수행하도록 구성된 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법.12. The method of claim 10, wherein the application program, the first image at the speed that the signal processing unit can store side by side stereo video of at least 30 frames per second in the storage means at the time of video recording; A side by side stereo image photographing method, characterized in that configured to perform a signal conversion process to reverse the left and right of the in real time.
  14. 제10항에 있어서, 상기 반사경이 정확한 위치에 설치되는 것을 돕기 위해, 상기 카메라 모듈은 상기 카메라의 디스플레이 화면을 좌우로 양분하는 가상의 분할선을 상기 디스플레이 화면에 표시되도록 하는 단계를 더 구비하는 것을 특징으로 하는 사이드 바이 사이드 스테레오 영상 촬영 방법.The method of claim 10, wherein the camera module further includes a virtual dividing line dividing the display screen of the camera from side to side to help the reflector be installed at the correct position. A side by side stereo image photographing method.
PCT/KR2014/000913 2013-02-04 2014-02-03 Method for photographing side-by-side stereoscopic images and monocular camera therefor WO2014119965A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2013-0012578 2013-02-04
KR1020130012578A KR101391951B1 (en) 2013-02-04 2013-02-04 Single lens camera and method for taking side by side stereo pictures

Publications (1)

Publication Number Publication Date
WO2014119965A1 true WO2014119965A1 (en) 2014-08-07

Family

ID=50893204

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/000913 WO2014119965A1 (en) 2013-02-04 2014-02-03 Method for photographing side-by-side stereoscopic images and monocular camera therefor

Country Status (2)

Country Link
KR (1) KR101391951B1 (en)
WO (1) WO2014119965A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106954060A (en) * 2017-05-12 2017-07-14 中国人民解放军国防科学技术大学 A kind of three-dimensional video-frequency generation method and auxiliary filming apparatus towards smart mobile phone
CN112584637A (en) * 2020-12-07 2021-03-30 Oppo广东移动通信有限公司 Electronic device
WO2024017284A1 (en) * 2022-07-22 2024-01-25 北京思维魔法教育科技有限公司 Device support applied to intellectual board, and intellectual board kit

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN206039035U (en) * 2016-05-26 2017-03-22 尹毅 Magamp
KR102589623B1 (en) * 2022-01-27 2023-10-16 계명대학교 산학협력단 Stereo image generating device and method using 360 cam

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100006867A (en) * 2008-07-10 2010-01-22 삼성전자주식회사 Flexible image photographing apparatus with a plurality of image forming units and method for manufacturing the same
KR20110111469A (en) * 2009-01-07 2011-10-11 인라이프-핸드넷 컴퍼니 리미티드 Stereo photographic apparatus and method
KR20120036594A (en) * 2010-10-08 2012-04-18 주식회사 레드로버 Stereo camera rig

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027498A (en) 2000-07-03 2002-01-25 Canon Inc Apparatus for imaging three-dimensional video
JP2006078639A (en) 2004-09-08 2006-03-23 Nikon Corp Attachment for stereo photography and stereo photographic device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100006867A (en) * 2008-07-10 2010-01-22 삼성전자주식회사 Flexible image photographing apparatus with a plurality of image forming units and method for manufacturing the same
KR20110111469A (en) * 2009-01-07 2011-10-11 인라이프-핸드넷 컴퍼니 리미티드 Stereo photographic apparatus and method
KR20120036594A (en) * 2010-10-08 2012-04-18 주식회사 레드로버 Stereo camera rig

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106954060A (en) * 2017-05-12 2017-07-14 中国人民解放军国防科学技术大学 A kind of three-dimensional video-frequency generation method and auxiliary filming apparatus towards smart mobile phone
CN112584637A (en) * 2020-12-07 2021-03-30 Oppo广东移动通信有限公司 Electronic device
WO2024017284A1 (en) * 2022-07-22 2024-01-25 北京思维魔法教育科技有限公司 Device support applied to intellectual board, and intellectual board kit

Also Published As

Publication number Publication date
KR101391951B1 (en) 2014-05-07

Similar Documents

Publication Publication Date Title
US8077964B2 (en) Two dimensional/three dimensional digital information acquisition and display device
KR20150068299A (en) Method and system of generating images for multi-surface display
KR20110114620A (en) Stereoscopic imaging apparatus and method
CN102342116A (en) Three-dimensional image capture device
WO2014119965A1 (en) Method for photographing side-by-side stereoscopic images and monocular camera therefor
TW201351959A (en) Method of stereo 3D image synthesis and related camera
WO2011134215A1 (en) Stereoscopic camera device
JP2013201466A (en) Stereoscopic image pickup device
CN101588511A (en) Device and method of stereo camera
CN109660786A (en) A kind of naked eye 3D three-dimensional imaging and observation method
JP2012222471A (en) Multi-eye imaging apparatus and multi-eye imaging method, and mobile information terminal device
JP3676916B2 (en) Stereoscopic imaging device and stereoscopic display device
US5874987A (en) Method for recording stereoscopic images and device for the same
JP2011112808A (en) Image pickup apparatus
JP3689976B2 (en) Optical adapter device for video shooting of 3D stereoscopic video signal converter
CN104041026B (en) Image take-off equipment, method and program and recording medium thereof
CN108696698B (en) Image pickup device, electronic equipment and image acquisition method
JP4360180B2 (en) 3D image shooting device
JP3543455B2 (en) Video camera equipment
JP5551517B2 (en) Imaging device
CN107678243A (en) Smart mobile phone digital stereo(3D)Photography and vedio recording and its viewing system
CN211406154U (en) 3D shooting device for shooting human face
CN220554028U (en) Mobile phone capable of shooting stereoscopic image
JP2014057219A (en) Display control apparatus, image capture apparatus, control method, program, and recording medium
JP2014103427A (en) Stereoscopic image pickup device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14745692

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14745692

Country of ref document: EP

Kind code of ref document: A1