JP4668602B2 - Stereoscopic image generation apparatus and method, and program - Google Patents
Stereoscopic image generation apparatus and method, and program Download PDFInfo
- Publication number
- JP4668602B2 JP4668602B2 JP2004373505A JP2004373505A JP4668602B2 JP 4668602 B2 JP4668602 B2 JP 4668602B2 JP 2004373505 A JP2004373505 A JP 2004373505A JP 2004373505 A JP2004373505 A JP 2004373505A JP 4668602 B2 JP4668602 B2 JP 4668602B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- stereoscopic image
- stereoscopic
- images
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
本発明は、複数の画像を組み合わせ、視差を利用して立体視を行うことが可能な立体視画像を生成する立体視画像生成装置および方法並びに立体視画像生成方法をコンピュータに実行させるためのプログラムに関するものである。 The present invention relates to a stereoscopic image generation apparatus and method for generating a stereoscopic image capable of combining a plurality of images and performing stereoscopic viewing using parallax, and a program for causing a computer to execute the stereoscopic image generation method It is about.
平面的な画像を立体的な映像として表現するための立体視画像を生成する方法は種々知られている。この立体視画像は、右目と左目との間隔によって生じる両目の視差を意図的に生成することにより実現される。すなわち、画像を見る人の左右の目に異なる画像を与えることにより映像が浮き出て見えるような立体感を表現している。具体的には、例えば、裸眼平行法による立体視においては、左右それぞれの目に対応する2つの画像を用意し、2つの画像中における同一物体の位置を左右にずらして配置することにより立体視を実現している。これは、看者の遠くの物体は、左右どちらの目で見た場合にも略同一位置にあるが、近くの物体は左右にずれること、すなわち両目が視差を有することに起因するものである。 Various methods for generating a stereoscopic image for expressing a planar image as a stereoscopic image are known. This stereoscopic image is realized by intentionally generating the parallax of both eyes generated by the interval between the right eye and the left eye. That is, a three-dimensional feeling that expresses a video by giving different images to the left and right eyes of the person viewing the image is expressed. Specifically, for example, in stereoscopic viewing by the naked-eye parallel method, two images corresponding to the left and right eyes are prepared, and the same object in the two images is shifted to the left and right for stereoscopic viewing. Is realized. This is due to the fact that the object far away from the viewer is almost in the same position when viewed with either left or right eye, but the near object is shifted to the left or right, that is, both eyes have parallax. .
また、立体視を行うための3D液晶が搭載された、携帯電話、ノートパソコン、テレビ等の各種装置が知られている。これらの装置においては、右目用の画像および左目用の画像を生成し、これら2つの画像を合成して得た立体視画像を3D液晶に表示することにより、立体的な画像を表現するものである。 Various devices such as a mobile phone, a notebook computer, and a television equipped with a 3D liquid crystal for stereoscopic viewing are also known. In these apparatuses, a right-eye image and a left-eye image are generated, and a stereoscopic image obtained by synthesizing these two images is displayed on a 3D liquid crystal to express a stereoscopic image. is there.
一方、立体視画像を生成するためには、同一被写体を複数の異なる視点から撮影する必要がある。このため、立体視画像を生成することを目的として撮影を行うための各種手法が提案されている。例えば、光学系を2種類用いたカメラを使用したり、カメラに立体視画像撮影用のアダプタを装着して、同一被写体を異なる2つの視点から撮影することにより立体視画像を生成するための2つの画像を取得する方法(特許文献1,2参照)が提案されている。 On the other hand, in order to generate a stereoscopic image, it is necessary to photograph the same subject from a plurality of different viewpoints. For this reason, various methods have been proposed for shooting for the purpose of generating a stereoscopic image. For example, 2 for generating a stereoscopic image by using a camera using two types of optical systems or attaching a stereoscopic image capturing adapter to the camera and capturing the same subject from two different viewpoints. A method of acquiring two images (see Patent Documents 1 and 2) has been proposed.
また、複数の撮像装置により取得した複数の画像から立体視画像を生成するか、立体視画像ではない画像(2次元画像)を生成するかを選択するようにして、1つの撮像装置により立体視画像の生成および2次元画像の生成の双方を行うようにした装置が提案されている(特許文献3参照)。この装置によれば、1つの撮影装置により立体視画像および2次元画像を選択的に得ることができる。 In addition, it is possible to select whether to generate a stereoscopic image from a plurality of images acquired by a plurality of imaging devices or to generate an image (two-dimensional image) that is not a stereoscopic image, so that the stereoscopic imaging is performed by one imaging device. An apparatus has been proposed that performs both image generation and two-dimensional image generation (see Patent Document 3). According to this apparatus, a stereoscopic image and a two-dimensional image can be selectively obtained by a single photographing apparatus.
さらに、動画像ではあるが、従来システムとの互換性を保ちながら立体視画像を記録するために、複数の撮像装置により取得した複数の画像間の差分情報を求め、複数の画像のうちの少なくとも1つの画像と差分情報とを記録するようにした装置が提案されている(特許文献3参照)。ここで、複数の撮像装置により取得された画像間は相関が大きいため、差分情報も情報量は小さくなる。したがって、立体視画像のファイル容量を低減することができる。
しかしながら、上記特許文献4に記載された手法においては、複数の画像のうち、いずれの画像を基準として差分情報を生成するかについてはユーザは選択することができない。また、特許文献4に記載された手法は、立体視画像を生成することができるのみであり、特許文献3に記載された手法のように、立体視画像および2次元画像を選択的に生成することができない。 However, in the method described in Patent Document 4, the user cannot select which of the plurality of images is used to generate the difference information. Further, the method described in Patent Document 4 can only generate a stereoscopic image, and selectively generates a stereoscopic image and a two-dimensional image like the method described in Patent Document 3. I can't.
本発明は、上記事情に鑑みなされたものであり、ユーザが所望する画像を基準として立体視画像または2次元画像を取得することができるようにすることを目的とする。 SUMMARY An advantage of some aspects of the invention is that a stereoscopic image or a two-dimensional image can be acquired based on an image desired by a user.
本発明による立体視画像生成装置は、立体視画像を生成するための立体視画像生成装置において、
同一被写体を複数の視点から撮影する複数の撮影手段と、
前記複数の撮影手段が取得した複数の画像のうちのいずれの画像を基準として立体視画像を生成するか、または前記複数の画像のうちのいずれの画像を基準として2次元画像を生成するかの選択を受け付ける選択受け付け手段と、
前記立体視画像を生成すると選択された場合に、前記複数の画像間の差分情報を生成する差分情報生成手段と、
前記立体視画像を生成すると選択された場合に、前記基準として選択された画像および前記差分情報から前記立体視画像を生成し、前記2次元画像を生成すると選択された場合に、前記基準として選択された画像から前記2次元画像を生成する画像生成手段とを備えたことを特徴とするものである。
A stereoscopic image generation apparatus according to the present invention is a stereoscopic image generation apparatus for generating a stereoscopic image.
A plurality of photographing means for photographing the same subject from a plurality of viewpoints;
Which of the plurality of images acquired by the plurality of photographing means is used as a reference to generate a stereoscopic image, or which of the plurality of images is used as a reference to generate a two-dimensional image Selection accepting means for accepting selection;
Difference information generating means for generating difference information between the plurality of images when it is selected to generate the stereoscopic image;
When it is selected to generate the stereoscopic image, the stereoscopic image is generated from the image selected as the reference and the difference information, and when it is selected to generate the two-dimensional image, it is selected as the reference. And an image generation means for generating the two-dimensional image from the obtained image.
ここで、「立体視画像」とは、基準となる画像および差分情報からなり、立体視画像の画像ファイルを開いたときに、基準となる画像および差分情報から複数の画像を再現し、これら複数の画像を左右に並べて配置して立体視ができる画像を再生できるようにしたものである。なお、基準となる画像および差分情報から複数の画像を再現し、3D液晶に表示した際に立体視可能となるように、これら複数の画像を1つの画像に合成できるようにしたものであってもよい。 Here, the “stereoscopic image” includes a reference image and difference information. When an image file of a stereoscopic image is opened, a plurality of images are reproduced from the reference image and difference information. These images are arranged side by side so that an image that can be viewed stereoscopically can be reproduced. A plurality of images are reproduced from the reference image and difference information, and these images can be combined into a single image so that they can be viewed stereoscopically when displayed on a 3D liquid crystal. Also good.
なお、本発明による立体視画像生成装置においては、前記立体視画像および前記2次元画像を記録する画像記録手段をさらに備えるものとしてもよい。 The stereoscopic image generating apparatus according to the present invention may further include image recording means for recording the stereoscopic image and the two-dimensional image.
また、本発明による立体視画像生成装置においては、前記画像生成手段を、前記基準として選択された画像および前記差分情報が1つのファイルからなる立体視画像を生成する手段としてもよい。 In the stereoscopic image generating apparatus according to the present invention, the image generating means may be a means for generating a stereoscopic image including the image selected as the reference and the difference information as one file.
また、本発明による立体視画像生成装置においては、前記画像記録手段を、前記基準として選択された画像および前記差分情報が互いに関連づけられた別ファイルからなる立体視画像を生成する手段としてもよい。 In the stereoscopic image generating apparatus according to the present invention, the image recording unit may be a unit that generates a stereoscopic image including another image in which the image selected as the reference and the difference information are associated with each other.
本発明による立体視画像生成方法は、立体視画像を生成するための立体視画像生成方法において、
同一被写体を複数の視点から撮影し、
前記複数の撮影手段が取得した複数の画像のうちのいずれの画像を基準として立体視画像を生成するか、または前記複数の画像のうちのいずれの画像を基準として2次元画像を生成するかの選択を受け付け、
前記立体視画像を生成すると選択された場合に、前記複数の撮影手段により得られる複数の画像間の差分情報を生成し、
前記立体視画像を生成すると選択された場合に、前記基準として選択された画像および前記差分情報から前記立体視画像を生成し、
前記2次元画像を生成すると選択された場合に、前記基準として選択された画像から前記2次元画像を生成することを特徴とするものである。
A stereoscopic image generation method according to the present invention is a stereoscopic image generation method for generating a stereoscopic image.
Shoot the same subject from multiple viewpoints,
Which of the plurality of images acquired by the plurality of photographing means is used as a reference to generate a stereoscopic image, or which of the plurality of images is used as a reference to generate a two-dimensional image Accept the choice,
When it is selected that the stereoscopic image is generated, difference information between the plurality of images obtained by the plurality of photographing units is generated,
When it is selected to generate the stereoscopic image, the stereoscopic image is generated from the image selected as the reference and the difference information,
When it is selected to generate the two-dimensional image, the two-dimensional image is generated from the image selected as the reference.
なお、本発明による立体視画像生成方法をコンピュータに実行させるためのプログラムとして提供してもよい。 The stereoscopic image generation method according to the present invention may be provided as a program for causing a computer to execute the method.
本発明によれば、複数の撮影手段が取得した複数の画像のうちのいずれの画像を基準として立体視画像を生成するか、または複数の画像のうちのいずれの画像を基準として2次元画像を生成するかの選択が受け付けられる。そして、立体視画像を生成すると選択された場合に、複数の画像間の差分情報が取得される。そして、立体視画像を生成すると選択された場合には、基準として選択された画像および差分情報から立体視画像が生成され、2次元画像を生成すると選択された場合には、基準として選択された画像から2次元画像が生成される。このため、ユーザは所望する画像を基準として立体視画像または2次元画像を生成して取得することができる。また、取得された立体視画像は基準となる画像および基準となる画像よりも容量が小さい差分情報からなるため、複数の画像をそのまま立体視画像として取得する場合と比較して、立体視画像のファイル容量を低減することができる。 According to the present invention, a stereoscopic image is generated based on any of a plurality of images acquired by a plurality of photographing means, or a two-dimensional image is generated based on any of the plurality of images. Selection of whether to generate is accepted. And when it selects that a stereoscopic vision image is produced | generated, the difference information between several images is acquired. Then, when it is selected to generate a stereoscopic image, a stereoscopic image is generated from the image selected as a reference and difference information, and when it is selected to generate a two-dimensional image, it is selected as a reference. A two-dimensional image is generated from the image. For this reason, the user can generate and acquire a stereoscopic image or a two-dimensional image based on a desired image. In addition, since the acquired stereoscopic image includes a reference image and difference information having a smaller capacity than the reference image, the stereoscopic image is compared with a case where a plurality of images are acquired as they are as a stereoscopic image. File capacity can be reduced.
以下、図面を参照して本発明の実施形態について説明する。図1は本発明の実施形態による立体視画像生成装置を適用したデジタルカメラの構成を示す概略ブロック図である。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a schematic block diagram showing the configuration of a digital camera to which a stereoscopic image generating apparatus according to an embodiment of the present invention is applied.
図1に示すように、デジタルカメラ1には、同一の被写体を撮影することにより、被写体像を受光面に結像させて光電変換し、2つの画像S1′,S2′を表す画像データ(画像データについても画像と同一の符号を用いるものとする)として出力する、撮影レンズ、CCDおよびシャッタ等をそれぞれ備えたカメラ部6A,6Bと、デジタルカメラ1全体の制御を行うとともに画像データのサンプリングタイミング制御、画像データの記録制御および表示制御等の各種制御を行うCPU22と、画像サイズを変更する処理、並びにシャープネス補正、ガンマ補正、コントラスト補正およびホワイトバランス補正等の画像データにより表される画像の画質を向上させるセットアップ処理を行う信号処理部24A,24Bと、アナログ情報の画像データをデジタルの画像データS1,S2に変換するA/D変換器26A,26Bと、ストロボ28と、ストロボ28の操作を制御するストロボ制御部30と、種々の指示をデジタルカメラ1に対して行うための入力部32と、入力部32の設定情報を入力するインターフェースであるI/O34とが設けられている。
As shown in FIG. 1, the digital camera 1 captures the same subject, forms a subject image on the light receiving surface, performs photoelectric conversion, and displays image data (images representing two images S1 ′ and S2 ′). The
なお、カメラ部6A、信号処理得24AおよびA/D変換部26Aを撮像部20Aと称し、カメラ部6B、信号処理得24BおよびA/D変換部26Bを撮像部20Bと称するものとする。ここで、被写体にデジタルカメラ1を向けた際に、被写体を左側から撮影する撮像部を20A、右側から撮影する撮像部を20Bとする。
The
なお、入力部32には、画像データのメモリカード10への記録画素数および記録フォーマットを設定したり、撮影モードおよび再生モード等のデジタルカメラ1の動作モードを設定したり、再生モード時にサムネイル画像の一覧および画像の拡大表示を切り替えたりするためのモード切り替えダイヤル、十字キー、設定スイッチおよびレリーズボタン等の各種スイッチが設けられている。
The
また、デジタルカメラ1には、画像データをJPEGやモーションJPEGに代表される手法で圧縮したり、圧縮した画像データを解凍する圧縮解凍部36と、メモリカードスロット38に着脱可能に装着されたメモリカード10に画像データを記録したり読み出したりするために画像データを変換するカードインターフェース(I/F)42とが設けられている。
The digital camera 1 also includes a compression /
また、デジタルカメラ1には、後述する画像生成プログラム等のCPU22を動作させるプログラムや各種定数が記録されているROMおよびCPU22が処理を実行する際の作業領域となるRAMにより構成されるシステムメモリ44と、デジタルカメラ1の各種設定定数を電源遮断後も記録し続けることが可能な書き替え可能な不揮発性メモリ46と、タイマ撮影時に駆動されるタイマ48と、現在の時刻を刻むカレンダ時計50と、画像データを液晶モニタ(LCD)16に表示するためのD/A変換等を行うLCD制御部54と、CPU22から指令される表示用の画像データを一時的に記録しておくVRAM等で構成されているフレームメモリ56と、CPU22から指令されるコード情報を表示する文字やメッセージデータに変換して画像とともにオンスクリーンディスプレイするOSD58とが設けられている。なお、電力を各部へ供給するバッテリ60も設けられている。
The digital camera 1 includes a
また、デジタルカメラ1には、後述するように画像S1,S2の差分を表す差分情報Ssubを算出する差分演算部62が設けられている。また、画像S1,S2から立体視画像SRまたは2次元画像SHを生成するための画像生成部64が設けられている。
In addition, the digital camera 1 is provided with a
カメラ部6A,6Bにより取得された画像S1′,S2′は、信号処理部24A,24Bにより画像処理が施された後、A/D変換部26A,26Bによりデジタルの画像S1,S2に変換される。そして、後述するフォーマットからなる立体視画像SRまたは2次元画像SHが画像S1,S2から生成され、さらに圧縮解凍部36において圧縮されてメモリカード10に記録される。
The images S1 ′ and S2 ′ acquired by the
画像生成部64は、後述するように撮像部20A,20Bにおいて取得された画像S1,S2のうち、いずれか一方を基準として立体視画像SRを生成する。また、画像S1,S2のうち、いずれか一方を基準として2次元画像SHを生成する。この処理については後述する。
As will be described later, the
ここで、本実施形態においては、撮影時に2つの画像S1,S2のいずれの画像を基準として立体視画像SRを生成するか、2つの画像S1,S2のいずれの画像を基準として2次元画像SHを生成するかをユーザに選択させる。図2はユーザがレリーズボタンを押下して撮影を行った直後にLCD16に表示される選択画面を示す図である。
Here, in the present embodiment, the stereoscopic image SR is generated based on which of the two images S1 and S2 at the time of shooting, or the two-dimensional image SH is based on which of the two images S1 and S2. Let the user choose whether to generate FIG. 2 is a diagram showing a selection screen displayed on the
図2に示すように選択画面70には、撮像部20Aにより取得された画像S1を基準として2次元画像SHを生成する際に選択する「2D(左カメラ)」のコマンド70a、撮像部20Bにより取得された画像S2を基準として2次元画像SHを生成する際に選択する「2D(右カメラ)」のコマンド70b、撮像部20A,20Bのうち撮像部20Aにより取得された画像S1を基準として立体視画像SRを生成する際に選択する「3D(ベース:左)」コマンド70c、および撮像部20A,20Bのうち撮像部20Bにより取得された画像S2を基準として立体視画像SRを生成する際に選択する「3D(ベース:右)」コマンド70dが表示される。なお、各コマンドは入力部32を用いてカーソルを移動して反転表示させることにより選択することができる。
As shown in FIG. 2, the
次いで、立体視画像SRの生成の処理について説明する。上述した選択画面70において、ユーザがコマンド70cまたはコマンド70dを選択した場合、画像S1,S2は差分演算部62に入力される。
Next, processing for generating the stereoscopic image SR will be described. When the user selects the
差分演算部62は、ユーザがコマンド70c,70dのいずれを選択したかに応じて、基準となる画像を決定し、基準となる画像と他方の画像との差分情報Ssubを算出する。すなわち、ユーザがコマンド70cを選択した場合には画像S1を基準とし、ユーザがコマンド70dを選択した場合には画像S2を基準として差分情報Ssubを算出する。以下、画像S1を基準とした場合の差分情報Ssubの算出について説明する。
The
まず、差分演算部62は、画像S1と画像S2の相対応する画素間の差分値を算出する。具体的には画像S2の画素から画像S1の画素を減算することにより差分値を算出する。そして、算出した差分値をSsubとして出力する。ここで、画像S1,S2は同一の被写体を撮影しているため、画像間の相関は非常に高く、差分値の情報量は元の画像よりも大幅に小さくなっている。
First, the
また、動画像の圧縮に用いられる手法を用いて差分情報Ssubを算出してもよい。この手法は、画像S1,S2をブロック(例えば16画素×16画素)に分割し、ブロック単位で画像S1に含まれる被写体が画像S2においてはどの位置に移動しているかを表す情報(動きベクトル)を取得し、この動きベクトルを差分情報Ssubとする手法である。この手法においても、差分情報Ssubは元の画像よりも大幅に小さくなっている。 Further, the difference information Ssub may be calculated using a technique used for moving image compression. In this method, the images S1 and S2 are divided into blocks (for example, 16 pixels × 16 pixels), and information (motion vector) indicating to which position the subject included in the image S1 has moved in the image S2 in units of blocks. This motion vector is used as difference information Ssub. Also in this method, the difference information Ssub is significantly smaller than the original image.
画像生成部64は、基準となる画像(ここではS1とする)および差分情報Ssubから立体視画像SRを生成する。また、2次元画像の生成が選択された場合には、基準となる画像S1またはS2から2次元画像SHを生成する。
The
図3は画像生成部64が生成する立体視画像SRのフォーマットを示す図である。図3に示すように、立体視画像SRの画像ファイル100には、ヘッダ情報101と、追加情報ポインタ102と、基準となる画像S1を表すベース画像データ103と、差分情報Ssubを表す差分情報データ104とが含まれる。
FIG. 3 is a diagram illustrating a format of the stereoscopic image SR generated by the
ヘッダ情報101は、撮影年月日および画素数等のExif情報を含む。
The
画像ファイル100が立体視画像SRの画像を表す場合、画像ファイル100にはベース画像データ103のアドレスの先のアドレスに差分情報データ104が必ず含まれる。したがって、追加情報ポインタ102は、差分情報データ104の先頭アドレスを示すものとなる。
When the
なお、図4は2次元画像SHのフォーマットを示す図である。図4に示すように、2次元画像SHの画像ファイル110には、ヘッダ情報111と、追加情報ポインタ112と、基準となる画像S1を表すベース画像データ113とが含まれる。
FIG. 4 is a diagram showing the format of the two-dimensional image SH. As shown in FIG. 4, the
ヘッダ情報111は、撮影年月日および画素数等のExif情報を含む。 The header information 111 includes Exif information such as the shooting date and the number of pixels.
画像ファイル110が2次元画像SHの画像を表す場合、ベース画像データ113のアドレスの先のアドレスには、立体視画像SRのように差分情報データ104は含まれない。したがって、追加情報ポインタ112は、「NULL」と情報が書き込まれる。
When the
したがって、画像ファイルの追加情報ポインタに記述されている情報に応じて、画像ファイルが立体視画像SRであるか2次元画像SHであるかを識別できる。 Therefore, it is possible to identify whether the image file is the stereoscopic image SR or the two-dimensional image SH according to the information described in the additional information pointer of the image file.
ここで、本実施形態において得られる2次元画像SHおよび立体視画像SRについて説明する。図5は本実施形態によるデジタルカメラ1を用いた撮影を説明するための図である。図5に示すようにここでは、被写体Hを撮影したものとする。 Here, the two-dimensional image SH and the stereoscopic image SR obtained in the present embodiment will be described. FIG. 5 is a view for explaining photographing using the digital camera 1 according to the present embodiment. As shown in FIG. 5, it is assumed here that the subject H has been photographed.
図6は撮像部20A,20Bにより取得される画像を示す図であり、図6(a)が撮像部20Aにより取得される画像S1を、図6(b)が撮像部20Bにより取得される画像S2をそれぞれ示す。ユーザが選択画面70においてコマンド70cを選択すると、画像生成部64が、画像S1を基準として画像S1,S2から差分情報Ssubを生成し、画像S1および差分情報Ssubから図3に示すフォーマットの立体視画像SRを生成する。なお、2次元画像SHを生成する場合において、コマンド70aが選択された場合には、画像S1を基準として図4に示すフォーマットの2次元画像SHを生成する(図6(c)参照)。この場合、2次元画像SHは画像S1そのものとなる。
FIG. 6 is a diagram illustrating images acquired by the
なお、生成された立体視画像SRおよび2次元画像SHはメモリカード10に記録される。
Note that the generated stereoscopic image SR and two-dimensional image SH are recorded in the
次いで、本発明において行われる処理について説明する。図7は本実施形態において行われる処理を示すフローチャートである。ユーザがレリーズボタンを押下して被写体の撮影を行うことによりCPU22が処理を開始し、まず、撮像部20A,20Bが画像S1,S2を取得する(ステップST1)。次いで、選択画面70をLCD16に表示し(ステップST2)、ユーザによるコマンドの選択を受け付ける(ステップST3)。
Next, processing performed in the present invention will be described. FIG. 7 is a flowchart showing processing performed in the present embodiment. When the user presses the release button to shoot the subject, the
ユーザがコマンド70a,70b(すなわち2次元画像の生成)を選択した場合には、画像生成部64がユーザが選択したコマンドに応じて画像S1またはS2を基準として、図4に示すフォーマットの2次元画像SHを生成し(ステップST4)。2次元画像SHをメモリカード10に記録し(ステップST5)、処理を終了する。
When the user selects the
一方、ユーザがコマンド70c,70d(すなわち立体視画像の生成)を選択した場合には、ユーザが選択したコマンドに応じて画像S1またはS2を基準として差分演算部62が差分情報Ssubを生成し(ステップST6)、画像生成部64がユーザが選択したコマンドに応じて画像S1またはS2を基準として図3に示すフォーマットの立体視画像SRを生成し(ステップST7)。立体視画像SRをメモリカード10に記録し(ステップST5)、処理を終了する。
On the other hand, when the user selects
なお、立体視画像SRの再生指示がなされた場合、画像ファイル100に含まれるベース画像データ103から画像S1を再現し(画像S1を基準とした場合)、ベース画像データ103および差分情報データ104から画像S2を再現する。そして、再現した画像S1および画像S2を並べて配置することにより、立体視が可能が画像を再生する。なお、3D液晶に表示した際に立体視可能となるように、再現した画像S1,S2を1つの画像に合成して再生してもよい。
When an instruction to reproduce the stereoscopic image SR is given, the image S1 is reproduced from the
このように、本実施形態においては、撮像部20A,20Bが取得した画像S1,S2のうち、選択画面70において、コマンド70c,70dによりいずれの画像を基準として立体視画像SRを生成するか、またはコマンド70a,70bにより画像S1,S2のうちのいずれの画像を基準として2次元画像SHを生成するかの選択を受け付け、立体視画像SRを生成すると選択された場合に、画像S1,S2間の差分情報Ssubを生成し、これと基準となる画像S1,S2から立体視画像SRを生成するようにしたものである。また、2次元画像SHを生成すると選択された場合には、基準となる画像S1,S2から2次元画像SHを生成するようにしたもである。このため、ユーザは所望する画像を基準として立体視画像SRまたは2次元画像SHを生成することができる。また、生成された立体視画像SRは画像S1,S2のいずれかおよび差分情報Ssubからなるため、複数の画像をそのまま立体視画像として生成する場合と比較して、立体視画像のファイル容量を低減することができる。
As described above, in the present embodiment, of the images S1 and S2 acquired by the
また、立体視画像を、画像S1,S2のいずれかおよび差分情報Ssubからなる画像ファイル100として記録することにより、メモリカード10の容量を節約することができる。
Moreover, the capacity of the
なお、上記実施形態においては、基準となる画像および差分情報Ssubを1つの画像ファイルからなるフォーマットにて立体視画像を生成しているが、図8に示すように、互いに関連づけられた2つの画像ファイル120,130のそれぞれに、ベース画像データおよび差分情報データを含めるようにしてもよい。ここで、画像ファイル120は、ヘッダ情報121と、ベース画像データ122とを含む。また、画像ファイル130はヘッダ情報131と、差分情報データ132とを含む。なお、画像ファイル120,130を関連づけるために、ヘッダ情報121には画像ファイル130のファイル名が、ヘッダ情報131には画像ファイル120のファイル名がそれぞれ関連するファイルのファイル名として記述される。
In the above-described embodiment, a stereoscopic image is generated in a format including a reference image and difference information Ssub as a single image file. However, as shown in FIG. 8, two images associated with each other are generated. Each of the
また、上記実施形態においては、デジタルカメラ1が2つの撮像部20A,20Bを備えているが、一方の撮像部を取り外し可能に設けてもよい。図9は一方の撮像部を取り外し可能に設けたデジタルカメラ2の構成を示す正面図である。図9に示すようにデジタルカメラ2は、本体2Aと、サブ撮影部2Bとを備える。そして本体2Aに一方の撮像部が、サブ撮影部2Bに他方の撮像部がそれぞれ設けられている。
Moreover, in the said embodiment, although the digital camera 1 is provided with the two
このようなデジタルカメラ2Aは、サブ撮影部2Bを使用しないで通常のデジタルカメラとして使用することが可能である。
Such a
また、図10に示すように、サブ撮影部2Bをデジタルカメラ2Aの右側に取付けることにより、上記実施形態と同様に、立体視画像を生成可能なデジタルカメラとして機能する。また、図11に示すように、サブ撮影部2Bをデジタルカメラ2Aの左側に取付けることも可能である。
Also, as shown in FIG. 10, by attaching the
なお、本体2Aの左右両方にサブ撮影部2Bを取付けることができる場合には、本体2Aに設けられた撮像部の方が、サブ撮影部2Bよりも機能的に優れている場合が多いため、2次元画像の生成時には常に本体2Aの撮像部により取得された画像を基準とすることとし、立体視画像の生成時には、常に本体2Aの撮像部により取得された画像を基準とすることが好ましい。この場合、ユーザは、サブ撮影部2Bを本体2Aの左右いずれの位置に取付けるかにより、基準となる画像を選択することができる。
When the
1,2 デジタルカメラ
2A 本体
2B サブ撮影部
16 LCD
20A,20B 撮像部
22 CPU
32 入力部
44 システムメモリ
54 LCD制御部
60 バッテリ
62 差分演算部
64 画像生成部
70 選択画面
100,110,120,130 画像ファイル
1, 2
20A,
32
Claims (5)
同一被写体を異なる視点から撮影する、本体撮影手段および該本体撮影手段の左右のいずれか一方に対して取り外し自在に取り付けられるサブ撮影手段と、
前記本体撮影手段および前記サブ撮影手段が取得した2つの画像のうちの前記本体撮影手段が取得した画像を基準として立体視画像を生成するか、または前記本体撮影手段が取得した画像を基準として2次元画像を生成するかの選択を受け付ける選択受け付け手段と、
前記立体視画像を生成すると選択された場合に、前記2つの画像間の差分情報を生成する差分情報生成手段と、
前記立体視画像を生成すると選択された場合に、前記本体撮影手段が取得した画像および前記差分情報から前記立体視画像を生成し、前記2次元画像を生成すると選択された場合に、前記本体撮影手段が取得した画像から前記2次元画像を生成する画像生成手段とを備えたことを特徴とする立体視画像生成装置。 In a stereoscopic image generation device for generating a stereoscopic image,
A main photographing unit for photographing the same subject from different viewpoints, and a sub photographing unit that is detachably attached to either the left or right of the main photographing unit;
A stereoscopic image is generated on the basis of the image acquired by the main body photographing means out of the two images acquired by the main body photographing means and the sub photographing means, or 2 based on the image obtained by the main body photographing means. Selection accepting means for accepting selection of whether to generate a dimensional image;
A difference information generating means for generating difference information between the two images when the stereoscopic image is selected to be generated;
When it is selected to generate the stereoscopic image, the main body shooting is performed when the stereoscopic image is generated from the image acquired by the main body photographing means and the difference information, and the two-dimensional image is selected to be generated. A stereoscopic image generation apparatus comprising: an image generation unit configured to generate the two-dimensional image from an image acquired by the unit.
前記本体撮影手段および前記サブ撮影手段により前記同一被写体を異なる視点から撮影して2つの画像を取得し、
前記2つの画像のうちの前記本体撮影手段が取得した画像を基準として立体視画像を生成するか、または前記本体撮影手段が取得した画像を基準として2次元画像を生成するかの選択を受け付け、
前記立体視画像を生成すると選択された場合に、前記2つの画像間の差分情報を生成し、
前記立体視画像を生成すると選択された場合に、前記本体撮影手段が取得した画像および前記差分情報から前記立体視画像を生成し、
前記2次元画像を生成すると選択された場合に、前記本体撮影手段が取得した画像から前記2次元画像を生成することを特徴とする立体視画像生成方法。 Stereoscopic image generation for generating a stereoscopic image, comprising a main body photographing means for photographing the same subject from different viewpoints and a sub photographing means detachably attached to either the left or right of the main body photographing means A stereoscopic image generation method in an apparatus, comprising:
Two images are obtained by photographing the same subject from different viewpoints by the main body photographing means and the sub photographing means,
Accepting a selection of whether to generate a stereoscopic image based on the image acquired by the main body photographing means of the two images or to generate a two-dimensional image based on the image acquired by the main body photographing means,
If it is selected to generate the stereoscopic image, the difference information between the two images is generated,
When it is selected to generate the stereoscopic image, the stereoscopic image is generated from the image acquired by the main body photographing unit and the difference information,
A stereoscopic image generation method, wherein, when it is selected to generate the two-dimensional image, the two-dimensional image is generated from an image acquired by the main body photographing means.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004373505A JP4668602B2 (en) | 2004-12-24 | 2004-12-24 | Stereoscopic image generation apparatus and method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004373505A JP4668602B2 (en) | 2004-12-24 | 2004-12-24 | Stereoscopic image generation apparatus and method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006180366A JP2006180366A (en) | 2006-07-06 |
JP4668602B2 true JP4668602B2 (en) | 2011-04-13 |
Family
ID=36734021
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004373505A Expired - Fee Related JP4668602B2 (en) | 2004-12-24 | 2004-12-24 | Stereoscopic image generation apparatus and method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4668602B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5135342B2 (en) * | 2006-07-20 | 2013-02-06 | トムソン ライセンシング | Method and apparatus for signaling view scalability in multi-view video coding |
JP4833947B2 (en) * | 2007-09-25 | 2011-12-07 | 富士フイルム株式会社 | Image recording apparatus, image editing apparatus, and image recording method |
CN101291441B (en) * | 2008-05-21 | 2010-04-21 | 深圳华为通信技术有限公司 | Mobile phone and image information processing method |
JP5265417B2 (en) * | 2009-03-09 | 2013-08-14 | オリンパスイメージング株式会社 | Imaging apparatus and imaging control method |
JP2012073996A (en) * | 2010-08-30 | 2012-04-12 | Fujifilm Corp | Image distribution device and method |
WO2015037473A1 (en) * | 2013-09-11 | 2015-03-19 | ソニー株式会社 | Image processing device and method |
-
2004
- 2004-12-24 JP JP2004373505A patent/JP4668602B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2006180366A (en) | 2006-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3841630B2 (en) | Image handling device | |
JP4993578B2 (en) | Image file playback device, image file processing and editing device | |
CN101841651B (en) | Image processing apparatus, imaging apparatus and image processing method | |
KR100947394B1 (en) | 3d image file, imaging device, image reproducing device, image processing device | |
JP5096048B2 (en) | Imaging apparatus, stereoscopic image reproduction apparatus, and stereoscopic image reproduction program | |
CN101573971B (en) | Image recording device and image recording method | |
US8150217B2 (en) | Image processing apparatus, method and program | |
US20110007187A1 (en) | Imaging Device And Image Playback Device | |
JP2001326947A (en) | Stereoscopic image display device | |
JP4661824B2 (en) | Image processing apparatus, method, and program | |
JP4764854B2 (en) | Imaging apparatus, image reproducing apparatus, imaging method, system, and program | |
JPWO2012086326A1 (en) | Stereoscopic panorama image creation device, stereo panorama image creation method, stereo panorama image creation program, stereo panorama image playback device, stereo panorama image playback method, stereo panorama image playback program, and recording medium | |
JP4260094B2 (en) | Stereo camera | |
JP4590686B2 (en) | Stereoscopic image display device | |
JP4748398B2 (en) | Imaging apparatus, imaging method, and program | |
JP2005027284A (en) | Image pickup apparatus, image pickup method and image pickup program | |
JP4668602B2 (en) | Stereoscopic image generation apparatus and method, and program | |
JP4255753B2 (en) | Stereoscopic image management apparatus and method, and program | |
JP2011239021A (en) | Moving image creation device, imaging device and moving image creation program | |
JP4536231B2 (en) | Imaging device | |
JPH1188912A (en) | Compound eye camera and display control method for the compound eye camera | |
JP2005229280A (en) | Image processing apparatus and method, and program | |
JP2004104331A (en) | Image processor, image processing method, recording medium, and program | |
JP2013175805A (en) | Display device and image pickup device | |
JP5195317B2 (en) | Camera device, photographing method, and photographing control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061208 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070410 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080826 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081023 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20081125 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090105 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20090204 |
|
A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20090306 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140121 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |