JP4819196B2 - Compound eye photographing apparatus and method, and program - Google Patents
Compound eye photographing apparatus and method, and program Download PDFInfo
- Publication number
- JP4819196B2 JP4819196B2 JP2011117771A JP2011117771A JP4819196B2 JP 4819196 B2 JP4819196 B2 JP 4819196B2 JP 2011117771 A JP2011117771 A JP 2011117771A JP 2011117771 A JP2011117771 A JP 2011117771A JP 4819196 B2 JP4819196 B2 JP 4819196B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- parallax
- amount
- stereoscopic
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
本発明は、立体視表示を行うための複数の画像を取得する複眼撮影装置および方法並びに複眼撮影方法をコンピュータに実行させるためのプログラムに関するものである。 The present invention relates to a compound eye photographing apparatus and method for acquiring a plurality of images for performing stereoscopic display, and a program for causing a computer to execute the compound eye photographing method.
同一の被写体を異なる位置から撮影することにより取得した複数の画像を組み合わせて立体視用画像を生成し、生成した立体視用画像を立体視表示することにより、視差を利用して立体視できることが知られている。立体視表示の具体的な手法として、複数の画像を並べて配置して立体視表示を行う裸眼平衡法が知られている。また、複数の画像の色を例えば赤と青のように異ならせて重ね合わせたり、複数の画像の偏光方向を異ならせて重ね合わせることにより、複数の画像を合成して立体視用画像を生成することによっても立体視表示を行うことができる。この場合赤青メガネや偏光メガネ等の画像分離メガネを用いて、立体視表示された立体視用画像を目の自動焦点機能により融合視することにより、立体視を行うことができる(アナグリフ方式、偏光フィルタ方式)。 A stereoscopic image can be generated by combining a plurality of images acquired by photographing the same subject from different positions, and the generated stereoscopic image can be stereoscopically displayed using parallax. Are known. As a specific method of stereoscopic display, there is known an autostereoscopic method that performs stereoscopic display by arranging a plurality of images side by side. In addition, multiple images can be combined with different colors such as red and blue, or multiple images can be superimposed with different polarization directions to generate a stereoscopic image. By doing so, stereoscopic display can be performed. In this case, stereoscopic vision can be performed by using the image separation glasses such as red-blue glasses and polarized glasses to fuse the stereoscopically displayed images for stereoscopic viewing with the automatic focusing function of the eyes (an anaglyph method, Polarization filter method).
また、偏光メガネ等を使用しなくても、パララックスバリア方式およびレンチキュラー方式のように、複数の画像を立体視可能な立体視表示モニタに表示して立体視することも可能である。この場合、複数の画像を垂直方向に短冊状に切り取って交互に並べ、開口部のある遮光バリアを配置することにより立体視用画像を生成して、立体視表示が行われる。また、画像分離メガネを使用したり、光学素子を液晶に貼ることで左右の画像の光線方向を変えながら、左右の画像を交互に高速で切り替えて表示することにより、残像効果によって立体視表示を行う方式も提案されている(バックライトコントロール方式)。 Further, a plurality of images can be displayed on a stereoscopic display monitor capable of stereoscopic viewing and stereoscopically viewed without using polarized glasses or the like, like the parallax barrier method and the lenticular method. In this case, a plurality of images are cut into strips in the vertical direction and arranged alternately, and a light blocking barrier with an opening is arranged to generate a stereoscopic image and perform stereoscopic display. In addition, by using image separation glasses or by attaching optical elements to the liquid crystal and changing the light beam direction of the left and right images, the left and right images are alternately switched at a high speed to display a stereoscopic display due to the afterimage effect. A method to do this has also been proposed (backlight control method).
このように立体視を行う場合、立体視用画像を観察するユーザに応じて好ましい立体感が異なる。立体感は複数の立体視用画像のずれ量(視差量)で変わるため、立体視表示された立体視用画像の視差量の調整の指示を受け付け、指示された視差量に応じて立体視用画像を生成する手法が提案されている(特許文献1参照)。また、表示された立体視用画像を立体視しながら立体感を調整して立体視用画像を生成する手法も提案されている(特許文献2参照)。また、ゲームにおいて立体感を調整する手法も提案されている(特許文献3参照)。 When stereoscopic viewing is performed in this manner, the preferable stereoscopic effect varies depending on the user observing the stereoscopic image. Since the stereoscopic effect varies depending on the shift amount (parallax amount) of a plurality of stereoscopic images, an instruction to adjust the parallax amount of the stereoscopically displayed image is received, and stereoscopic viewing is performed according to the instructed parallax amount. A method for generating an image has been proposed (see Patent Document 1). In addition, there has been proposed a method of generating a stereoscopic image by adjusting the stereoscopic effect while stereoscopically viewing the displayed stereoscopic image (see Patent Document 2). In addition, a technique for adjusting a stereoscopic effect in a game has been proposed (see Patent Document 3).
しかしながら、特許文献1〜3に記載された手法においては、視差量を調整して立体感を変更できるものの、立体視表示された画像見ながら立体感を調整するものであるため、視差量がどの程度変更されているのかが分かりにくい。 However, in the methods described in Patent Documents 1 to 3, although the stereoscopic effect can be changed by adjusting the parallax amount, the stereoscopic effect is adjusted while viewing the stereoscopically displayed image. It is difficult to see if it has been changed to some extent.
本発明は上記事情に鑑みなされたものであり、立体視用画像の立体感を調整する際に、容易に視差量を確認できるようにすることを目的とする。 The present invention has been made in view of the above circumstances, and an object thereof is to make it possible to easily confirm the amount of parallax when adjusting the stereoscopic effect of a stereoscopic image.
本発明による複眼撮影装置は、互いに異なる位置において撮影を行うことにより2つの画像を取得する2つの撮影手段と、
前記2つの画像から立体視用画像を生成する3次元処理手段と、
2次元表示および立体視表示のいずれも可能な表示手段と、
前記視差量の変更指示を受け付ける入力手段と、
前記立体視用画像のスルー画像としての立体視表示中において、少なくとも前記視差量の変更指示が行われている間は、前記立体視用画像の立体視表示を前記2つの画像を重ねての2次元表示に変更し、前記視差量の変更指示に応じて、該2つの画像の視差量を変更して2次元表示し、前記視差量の変更指示の停止後、所定時間経過後に該2次元表示を前記立体視表示に変更する表示制御手段とを備えたことを特徴とするものである。
The compound eye photographing apparatus according to the present invention includes two photographing means for obtaining two images by photographing at different positions,
Three-dimensional processing means for generating a stereoscopic image from the two images;
Display means capable of both two-dimensional display and stereoscopic display;
Input means for receiving an instruction to change the amount of parallax;
During stereoscopic display as a through image of the stereoscopic image, at least while the instruction to change the amount of parallax is performed, the stereoscopic display of the stereoscopic image is performed by superimposing the two images. In accordance with the instruction to change the amount of parallax, the two-dimensional display is performed by changing the amount of parallax between the two images, and after the instruction to change the amount of parallax has stopped, the two-dimensional display And a display control means for changing the display to the stereoscopic display.
なお、本発明による複眼撮影装置においては、前記視差量が調整限界値まで変更されたか否かを判定する第1の判定手段と、
前記視差量の変更指示が停止されたか否かを判定する第2の判定手段とをさらに備えるものとし、
前記表示制御手段を、前記第1および前記第2の判定手段のいずれかによる判定が肯定されるまで、前記視差量の変更を継続する手段としてもよい。
In the compound eye photographing device according to the present invention, first determination means for determining whether or not the parallax amount has been changed to the adjustment limit value;
A second determination unit that determines whether or not the instruction to change the amount of parallax has been stopped;
The display control means may be means for continuing the change in the parallax amount until the determination by either the first or second determination means is affirmed.
また、本発明による複眼撮影装置においては、前記表示制御手段を、前記2次元表示に変更した場合、前記視差量を表す数値を前記表示手段に表示する手段としてもよい。 In the compound eye photographing apparatus according to the present invention, when the display control means is changed to the two-dimensional display, a numerical value indicating the parallax amount may be displayed on the display means.
また、本発明による複眼撮影装置においては、前記立体視表示の方式がバックライトコントロール方式であり、前記表示手段が液晶表示手段である場合、前記表示制御手段を、前記立体視表示時においては、前記表示手段のバックライトを3次元モードで駆動し、前記2次元表示時においては、前記バックライトを2次元モードで起動する手段としてもよい。 Further, in the compound eye photographing apparatus according to the present invention, when the stereoscopic display method is a backlight control method and the display means is a liquid crystal display means, the display control means is configured to perform the stereoscopic display. The backlight of the display means may be driven in a three-dimensional mode, and the backlight may be activated in the two-dimensional mode during the two-dimensional display.
また、本発明による複眼撮影装置においては、前記表示制御手段を、前記視差量の変更指示があった場合、前記視差量の変更量に応じて、前記2つの画像における前記立体視表示時の表示範囲を視認可能に前記表示手段に表示する手段としてもよい。 Further, in the compound eye photographing apparatus according to the present invention, when the display control unit is instructed to change the parallax amount, the display at the time of the stereoscopic display in the two images is performed according to the change amount of the parallax amount. It is good also as a means to display the range on the said display means so that visual recognition is possible.
また、本発明による複眼撮影装置においては、前記2つの画像における視差量が略0となる部分が存在する場合、該部分が存在することを通知する通知手段をさらに備えるものとしてもよい。 In addition, the compound eye photographing apparatus according to the present invention may further include notification means for notifying the presence of a portion where the amount of parallax in the two images is substantially zero.
また、本発明による複眼撮影装置においては、前記指示された視差量の変更量を、前記2つの画像と関連づけて記録媒体に記録する記録制御手段をさらに備えるものとしてもよい。 The compound eye photographing apparatus according to the present invention may further include a recording control unit that records the instructed change amount of the parallax amount on a recording medium in association with the two images.
本発明による複眼撮影方法は、互いに異なる位置において撮影を行うことにより2つの画像を取得し、
前記2つの画像から立体視用画像を生成し、
前記立体視用画像のスルー画像を、2次元表示および立体視表示のいずれも可能な表示手段に立体視表示し、
前記立体視用画像のスルー画像としての立体視表示中において、少なくとも前記視差量の変更指示が行われている間は、前記立体視用画像の立体視表示を前記2つの画像を重ねての2次元表示に変更し、
前記視差量の変更指示を受け付け、
前記視差量の変更指示に応じて、該2つの画像の視差量を変更して2次元表示し、
前記視差量の変更指示の停止後、所定時間経過後に前記2次元表示を前記立体視表示に変更することを特徴とするものである。
The compound eye photographing method according to the present invention acquires two images by photographing at different positions,
Generating a stereoscopic image from the two images;
Stereoscopic display of the through image of the stereoscopic image on a display means capable of both two-dimensional display and stereoscopic display;
During stereoscopic display as a through image of the stereoscopic image, at least while the instruction to change the amount of parallax is performed, the stereoscopic display of the stereoscopic image is performed by superimposing the two images. Change to dimension view,
Receiving an instruction to change the amount of parallax;
In response to the instruction to change the amount of parallax, the amount of parallax between the two images is changed and two-dimensionally displayed.
After the parallax amount change instruction is stopped, the two-dimensional display is changed to the stereoscopic display after a predetermined time has elapsed.
本発明による画像表示装置は、互いに異なる位置において撮影を行うことにより取得された複数の画像から生成された立体視用画像を立体視表示可能な表示手段と、
前記複数の画像に対して立体視表示のための3次元処理を行って前記立体視用画像を生成する3次元処理手段と、
前記立体視用画像の視差量の変更開始指示および該視差量の変更指示を受け付ける入力手段と、
前記視差量の変更開始指示に応じて、前記立体視用画像の立体視表示を前記複数の画像を重ねての2次元表示に切り替え、前記視差量の変更指示に応じて、該複数の画像の視差量を変更して2次元表示する表示制御手段とを備えたことを特徴とするものである。
An image display device according to the present invention includes a display unit capable of stereoscopically displaying a stereoscopic image generated from a plurality of images acquired by photographing at different positions.
3D processing means for performing 3D processing for stereoscopic display on the plurality of images to generate the stereoscopic image;
An input means for receiving an instruction to start changing the amount of parallax of the stereoscopic image and an instruction to change the amount of parallax;
In response to the instruction to start changing the amount of parallax, the stereoscopic display of the stereoscopic image is switched to two-dimensional display in which the plurality of images are overlaid, and in response to the instruction to change the amount of parallax, It is characterized by comprising display control means for changing the amount of parallax and performing two-dimensional display.
なお、本発明による画像表示装置においては、前記立体視表示の方式がバックライトコントロール方式であり、前記表示手段が液晶表示手段である場合、前記表示制御手段を、前記立体視表示時においては、前記表示手段のバックライトを3次元モードで駆動し、前記2次元表示時においては、前記バックライトを2次元モードで起動する手段としてもよい。 In the image display device according to the present invention, when the stereoscopic display method is a backlight control method and the display unit is a liquid crystal display unit, the display control unit is configured to display the stereoscopic display. The backlight of the display means may be driven in a three-dimensional mode, and the backlight may be activated in the two-dimensional mode during the two-dimensional display.
また、本発明による画像表示装置においては、前記表示制御手段を、前記視差量の変更指示があった場合、前記視差量の変更量に応じて、前記複数の画像における前記立体視表示時の表示範囲を視認可能に前記表示手段に表示する手段としてもよい。 Further, in the image display device according to the present invention, when the parallax amount change instruction is given, the display control unit displays the stereoscopic image in the plurality of images according to the parallax amount change amount. It is good also as a means to display the range on the said display means so that visual recognition is possible.
「複数の画像における立体視表示時の表示範囲を視認可能」にするとは、複数の画像の表示時のサイズを変更することなく、表示される画像の周囲に枠を付与し、枠のサイズを変更する等して、複数の画像のサイズを変更することなく、視差量の変更に伴う立体視表示時に表示される領域のサイズを、ユーザが見て認識できるようにすることを意味する。 To make it possible to visually recognize the display range during stereoscopic display of multiple images, without changing the display size of multiple images, a frame is added around the displayed image, and the size of the frame is reduced. This means that the user can see and recognize the size of the area displayed at the time of stereoscopic display accompanying the change in the amount of parallax without changing the size of the plurality of images.
また、本発明による画像表示装置においては、前記複数の画像における視差量が略0となる部分が存在する場合、該部分が存在することを通知する通知手段をさらに備えるものとしてもよい。 The image display device according to the present invention may further include notification means for notifying the presence of a portion where the amount of parallax in the plurality of images is substantially zero.
「通知」は、2次元表示されている視差量が0となる部分の色を変更したり、視差量が0となる部分が存在することを表す音声を出力する等により行うことができる。 The “notification” can be performed by changing the color of the part in which the parallax amount is two-dimensionally displayed or by outputting a sound indicating that there is a part in which the parallax amount is zero.
また、本発明による画像表示装置においては、前記指示された視差量の変更量を、前記複数の画像と関連づけて記録媒体に記録する記録制御手段をさらに備えるものとしてもよい。 The image display apparatus according to the present invention may further include a recording control unit that records the instructed change amount of the parallax amount on a recording medium in association with the plurality of images.
また、本発明による画像表示装置においては、前記表示制御手段を、前記2次元表示への切り替え後、所定の操作を受け付けることにより該2次元表示を前記立体視表示に切り替える手段としてもよい。 In the image display device according to the present invention, the display control unit may be a unit that switches the two-dimensional display to the stereoscopic display by receiving a predetermined operation after switching to the two-dimensional display.
また、本発明による画像表示装置においては、前記表示制御手段を、前記2次元表示への切り替え後、所定時間経過後に該2次元表示を前記立体視表示に切り替える手段としてもよい。 In the image display device according to the present invention, the display control means may be means for switching the two-dimensional display to the stereoscopic display after a predetermined time has elapsed after switching to the two-dimensional display.
また、本発明による画像表示装置においては、前記表示制御手段を、前記2次元表示時に、前記視差量を表示する手段としてもよい。 In the image display device according to the present invention, the display control means may be means for displaying the parallax amount during the two-dimensional display.
本発明による撮影装置は、互いに異なる位置において撮影を行うことにより、立体視表示を行うための複数の画像を取得する複数の撮影手段と、
本発明による画像表示装置を備えたことを特徴とするものである。
A photographing apparatus according to the present invention includes a plurality of photographing means for obtaining a plurality of images for performing stereoscopic display by photographing at different positions.
The image display apparatus according to the present invention is provided.
本発明による画像表示方法は、互いに異なる位置において撮影を行うことにより取得された複数の画像に3次元処理を行って立体視用画像を生成し、
前記立体視用画像を立体視表示し、
前記立体視用画像の視差量の変更開始指示を受け付け、
前記視差量の変更開始指示に応じて、前記立体視用画像の立体視表示を前記複数の画像を重ねての2次元表示に切り替え、
前記視差量の変更指示を受け付け、
前記視差量の変更指示に応じて、該複数の画像の視差量を変更して2次元表示することを特徴とするものである。
The image display method according to the present invention generates a stereoscopic image by performing a three-dimensional process on a plurality of images obtained by shooting at different positions.
Stereoscopically displaying the stereoscopic image,
Receiving an instruction to start changing the amount of parallax of the stereoscopic image;
In response to an instruction to start changing the amount of parallax, the stereoscopic display of the stereoscopic image is switched to a two-dimensional display in which the plurality of images are superimposed,
Receiving an instruction to change the amount of parallax;
In accordance with the instruction to change the amount of parallax, the parallax amount of the plurality of images is changed to perform two-dimensional display.
なお、本発明による画像表示方法をコンピュータに実行させるためのプログラムとして提供してもよい。 The image display method according to the present invention may be provided as a program for causing a computer to execute the image display method.
本発明によれば、ユーザが視差量の変更開始の指示を行うと、複数の画像の立体視表示が、複数の画像を重ねての2次元表示に切り替えられる。このため、視差量を変更して立体感を調整する際に、複数の画像の視差量がどの程度あるかを確認することが容易となる。 According to the present invention, when the user gives an instruction to start changing the amount of parallax, the stereoscopic display of a plurality of images is switched to a two-dimensional display in which a plurality of images are superimposed. For this reason, when the stereoscopic effect is adjusted by changing the parallax amount, it is easy to confirm how much the parallax amount of the plurality of images is.
ところで、立体視表示は複数の画像の互いに重なる範囲を用いて行うものである。このため、視差量が大きくなるほど立体視表示の際に複数の画像からトリミングされる領域が小さくなり、その結果、立体視表示される立体視用画像は元の画像と比較して拡大されることとなる。しかしながら、このように表示される画像のサイズが変更されると、ユーザはそれに目を奪われ、適切な視差量を決定できないおそれがある。 By the way, the stereoscopic display is performed using a range where a plurality of images overlap each other. For this reason, as the amount of parallax increases, the region that is trimmed from a plurality of images during stereoscopic display becomes smaller, and as a result, the stereoscopic image that is stereoscopically displayed is enlarged compared to the original image. It becomes. However, if the size of the image displayed in this way is changed, the user may be distracted and may not be able to determine an appropriate amount of parallax.
このため、視差量の変更量に応じて、複数の画像における表示範囲を視認可能に表示することにより、表示される画像が拡大されることがなくなるため、ユーザは視差量の調整に集中することができ、その結果、視差量の変更を効率よく行うことができる。 For this reason, the display range in a plurality of images is displayed in a visually recognizable manner according to the amount of change in the amount of parallax, so that the displayed image is not enlarged, and the user concentrates on adjusting the amount of parallax. As a result, the amount of parallax can be changed efficiently.
また、複数の画像における視差量が0となる部分が存在する場合に、その旨を通知することにより、画像中の所望とする部分の視差量を0としたい場合に、効率よくその作業を行うことができる。 Also, when there is a part where the parallax amount is 0 in a plurality of images, by notifying that effect, the work is efficiently performed when it is desired to set the parallax amount of a desired part in the image to 0. be able to.
また、指示された視差量の変更量を、3次元処理がなされる前の元の画像と関連づけて保存することにより、後で立体感を変更したい場合には、改めて元の画像に対して3次元処理を行うことにより、立体感を変更することができることとなる。 In addition, when it is desired to change the stereoscopic effect later by storing the instructed change amount of the parallax in association with the original image before the three-dimensional processing is performed, the change to the original image is changed to 3 again. By performing the dimension processing, the stereoscopic effect can be changed.
以下、図面を参照して本発明の実施形態について説明する。図1は本発明の実施形態による画像表示装置の外観構成を示す斜視図である。図1に示すように本実施形態による画像表示装置1は、正面に液晶ディスプレイ(LCD)2および操作ボタン3を備える。また、側面にはメモリカード等の記録メディア4を挿入するスロット5を備える。そして、本実施形態による画像表示装置1は、記録メディア4に記録された、互いに異なる位置において撮影を行うことにより取得した複数の画像から生成された立体視用画像を、LCD2に立体視表示するものである。なお、本実施形態においては、2つの画像GL,GRを用いて立体視表示を行うものとして説明する。また、画像GLは立体視表示する際の左目用の画像、画像GRは右目用の画像とする。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a perspective view showing an external configuration of an image display apparatus according to an embodiment of the present invention. As shown in FIG. 1, the image display device 1 according to the present embodiment includes a liquid crystal display (LCD) 2 and operation buttons 3 on the front. Further, the side surface is provided with a slot 5 into which a recording medium 4 such as a memory card is inserted. Then, the image display apparatus 1 according to the present embodiment stereoscopically displays on the LCD 2 a stereoscopic image generated from a plurality of images recorded by shooting at different positions recorded on the recording medium 4. Is. In the present embodiment, description will be made assuming that stereoscopic display is performed using two images GL and GR. The image GL is a left-eye image for stereoscopic display, and the image GR is a right-eye image.
操作ボタン3は、上ボタン3U、下ボタン3D、左ボタン3L、右ボタン3Rおよび中央ボタン3Cを備える。 The operation button 3 includes an upper button 3U, a lower button 3D, a left button 3L, a right button 3R, and a center button 3C.
図2は本実施形態による画像表示装置の内部構成を示す概略ブロック図である。図2に示すように、画像表示装置1は、記録制御部21、圧縮/伸長処理部22、フレームメモリ23、内部メモリ24、3次元処理部25、表示制御部26およびCPU27を備える。 FIG. 2 is a schematic block diagram showing the internal configuration of the image display apparatus according to the present embodiment. As shown in FIG. 2, the image display device 1 includes a recording control unit 21, a compression / decompression processing unit 22, a frame memory 23, an internal memory 24, a three-dimensional processing unit 25, a display control unit 26, and a CPU 27.
記録制御部21は、スロット5に挿入された記録メディア4に対する情報の記録および読み出しの制御を行う。また、後述するようにユーザが変更した視差量に基づく立体感調整値を、画像GL,GRの画像ファイルのタグに記述する。 The recording control unit 21 controls the recording and reading of information with respect to the recording medium 4 inserted into the slot 5. Further, as will be described later, the stereoscopic effect adjustment value based on the parallax amount changed by the user is described in the tags of the image files of the images GL and GR.
圧縮/伸長処理部22は、記録メディア4から読み出した立体視表示を行うための2つの画像GL,GRの圧縮および解凍の処理を行う。画像GL,GRの画像ファイルには、Exifフォーマット等に基づいて、後述する立体感調整値および撮影日時等の付帯情報が格納されたタグが付与される。 The compression / decompression processing unit 22 performs compression and decompression processing of the two images GL and GR for performing stereoscopic display read from the recording medium 4. Based on the Exif format and the like, tags storing additional information such as a stereoscopic adjustment value and a shooting date and time are added to the image files of the images GL and GR.
フレームメモリ23は、画像GL,GRを表す画像データに対して、後述する3次元処理を含む各種処理を行う際に使用する作業用メモリであり、通常はコスト面から揮発性メモリであるダイナミックRAMが使用される。 The frame memory 23 is a working memory used when various kinds of processing including three-dimensional processing, which will be described later, is performed on image data representing the images GL and GR, and is usually a dynamic RAM that is a volatile memory from the viewpoint of cost. Is used.
内部メモリ24は、画像表示装置1において設定される各種定数、およびCPU27が実行するプログラム等を記憶する。内部メモリ23はカメラ本体の電源を切っても記憶内容が消去されないように不揮発性メモリを使用するため、このメモリ内に撮影画像を記録することも可能である。 The internal memory 24 stores various constants set in the image display device 1, a program executed by the CPU 27, and the like. Since the internal memory 23 uses a non-volatile memory so that the stored contents are not erased even when the power of the camera body is turned off, it is possible to record a photographed image in this memory.
3次元処理部25は、画像GL,GRをLCD2に立体視表示させるために、画像GL,GRに3次元処理を行って立体視用画像を生成する。ここで、本実施形態における立体視表示の方式としては、公知の任意の方式を用いることができる。例えば、画像GL,GRを並べて表示して裸眼平衡法により立体視を行う方式、またはLCD2にレンチキュラーレンズを貼り付け、LCD2の表示面の所定位置に画像GL,GRを表示することにより、左右の目に画像GL,GRをそれぞれ入射させて立体視表示を実現するレンチキュラー方式を用いることができる。また、LCD2に左右の目への光路を変更するバリアを貼り付け、LCD2の表示面の所定位置に画像GL,GRを表示することにより、左右の目に画像GL,GRをそれぞれ入射させて立体視表示を実現するパララックスバリア方式を用いることができる。 The three-dimensional processing unit 25 generates a stereoscopic image by performing a three-dimensional process on the images GL and GR so that the images GL and GR are stereoscopically displayed on the LCD 2. Here, any known method can be used as the method of stereoscopic display in the present embodiment. For example, a method of displaying the images GL and GR side by side and performing stereoscopic viewing by the naked eye balance method, or attaching a lenticular lens to the LCD 2 and displaying the images GL and GR at predetermined positions on the display surface of the LCD 2 It is possible to use a lenticular method in which images GL and GR are respectively incident on the eyes to realize stereoscopic display. Further, a barrier that changes the optical path to the left and right eyes is attached to the LCD 2 and the images GL and GR are displayed at predetermined positions on the display surface of the LCD 2 so that the images GL and GR are incident on the left and right eyes, respectively. A parallax barrier method for realizing visual display can be used.
また、画像GL,GRの色を例えば赤と青のように異ならせて重ね合わせたり、画像GL,GRの偏光方向を異ならせて重ね合わせることにより、画像GL,GRを合成して立体視表示を実現する方式(アナグリフ方式、偏光フィルタ方式)を用いることができる。さらに、LCD2のバックライトの光路を光学的に左右の目に対応するように交互に分離し、LCD2の表示面に画像GL,GRをバックライトの左右への分離にあわせて交互に表示することにより、立体視表示を実現するバックライトコントロール方式を用いることができる。 In addition, the images GL and GR are superimposed with different colors such as red and blue, for example, or the images GL and GR are superimposed with different polarization directions, so that the images GL and GR are combined and displayed stereoscopically. (Anaglyph method, polarization filter method) can be used. Further, the optical path of the backlight of the LCD 2 is optically separated so as to correspond to the left and right eyes, and the images GL and GR are alternately displayed on the display surface of the LCD 2 in accordance with the separation of the backlight left and right. Thus, a backlight control method that realizes stereoscopic display can be used.
なお、LCD2は3次元処理部25が行う3次元処理の方式に応じた加工がなされている。例えば、立体視表示の方式がレンチキュラー方式の場合には、LCD2の表示面にレンチキュラーレンズが取り付けられており、パララックスバリア方式の場合には、LCD2の表面にバリアが取り付けられている。また、バックライトコントロール方式の場合には、左右の画像の光線方向を変えるための光学素子がLCD2の表示面に取り付けられている。ここで、本実施形態においては、バックライトコントロール方式の立体視表示を行うものとする。このため、LCD2は、図3に示すように左目用のバックライト2Lおよび右目用のバックライト2Rを備えている。なお、以降の説明において、左目用のバックライト2Lの光路を実線、右目用のバックライト2Rの光路を破線で示す。 The LCD 2 is processed in accordance with the three-dimensional processing method performed by the three-dimensional processing unit 25. For example, when the stereoscopic display method is a lenticular method, a lenticular lens is attached to the display surface of the LCD 2, and when the parallax barrier method is used, a barrier is attached to the surface of the LCD 2. In the case of the backlight control system, an optical element for changing the light beam direction of the left and right images is attached to the display surface of the LCD 2. Here, in the present embodiment, it is assumed that the backlight control type stereoscopic display is performed. For this reason, the LCD 2 includes a left-eye backlight 2L and a right-eye backlight 2R as shown in FIG. In the following description, the optical path of the backlight 2L for the left eye is indicated by a solid line, and the optical path of the backlight 2R for the right eye is indicated by a broken line.
また、3次元処理部25は、画像GL,GRに対して、ホワイトバランスを調整する処理、階調補正、シャープネス補正、および色補正等の画像処理を施す。なお、3次元処理部25とは別に、画像処理を行う画像処理部を設けるようにしてもよい。 The three-dimensional processing unit 25 performs image processing such as processing for adjusting white balance, gradation correction, sharpness correction, and color correction on the images GL and GR. In addition to the three-dimensional processing unit 25, an image processing unit that performs image processing may be provided.
なお、3次元処理部25は、後述するようにユーザが操作ボタン3を用いて調整した立体感に応じて、画像GL,GRの視差量を変更し、立体視用画像G3を生成し直して、立体視表示を行う。 Note that the three-dimensional processing unit 25 changes the parallax amount of the images GL and GR according to the stereoscopic effect adjusted by the user using the operation buttons 3 as described later, and regenerates the stereoscopic image G3. Stereoscopic display is performed.
表示制御部26は、ユーザによる操作ボタン3の指示に応じて、3次元処理により取得される立体視用画像G3を立体視表示したり、画像GL,GRを重ねて2次元表示したりする。 The display control unit 26 stereoscopically displays the stereoscopic image G3 acquired by the three-dimensional processing or displays the images GL and GR in a two-dimensional manner in accordance with an instruction of the operation button 3 by the user.
すなわち、立体視表示を行う場合は、図4に示すように左目用のバックライト2Lの点灯および左目用の画像GLの表示と、右目用のバックライト2Rの点灯および右目用の画像GRの表示とを、高速(例えば60Hz)で切り替えることにより、残像効果により立体感を表す(3次元モード)。なお、図4においては消灯しているバックライトを斜線を付与して示している。また、画像GL,GRの表示はそれぞれ「L」、「R」のみを示している。 That is, in the case of performing stereoscopic display, as shown in FIG. 4, the lighting of the left-eye backlight 2L and the display of the left-eye image GL, the lighting of the right-eye backlight 2R and the display of the right-eye image GR are performed. Are switched at a high speed (for example, 60 Hz) to express a stereoscopic effect by the afterimage effect (three-dimensional mode). In FIG. 4, the backlight that is turned off is indicated by hatching. Further, the images GL and GR display only “L” and “R”, respectively.
一方、2次元表示を行う場合は、図5に示すように左目用および右目用のバックライト2L,2Rを同時に点灯し、左目用の画像GLの表示と右目用の画像GRの表示とを高速で切り替える(2次元モード)ことにより、図6に示すように2つの画像GL,GRが重なって見えるようになる。 On the other hand, when two-dimensional display is performed, as shown in FIG. 5, the left-eye and right-eye backlights 2L and 2R are turned on simultaneously, and the left-eye image GL and the right-eye image GR are displayed at high speed. By switching with (two-dimensional mode), the two images GL and GR appear to overlap each other as shown in FIG.
CPU27は、操作ボタン3からの指示に応じて画像表示装置1の各部を制御する。 The CPU 27 controls each part of the image display device 1 according to an instruction from the operation button 3.
データバス28は、画像表示装置1を構成する各部およびCPU27に接続されており、画像表示装置1における各種データおよび各種情報のやり取りを行う。 The data bus 28 is connected to each unit constituting the image display device 1 and the CPU 27, and exchanges various data and various information in the image display device 1.
次いで、本実施形態において行われる処理について説明する。図7は本実施形態において立体感の調整時、すなわち視差量の変更時に行われる処理を示すフローチャートである。なお、ここでは、記録メディア4から読み出された画像GL,GRに視差量を変更することなく3次元処理が行われ、これにより生成された立体視用画像G3がLCD2に立体視表示されているものとする。立体視用画像G3が立体視表示されることによりCPU27が処理を開始し、ユーザによる操作ボタン3を用いての視差量の変更開始の指示を受け付ける(ステップST1)。ここで、視差量の変更開始の指示は例えば操作ボタン3の中央ボタン3Cを用いて行うものとする。これにより、表示制御部26は、現在表示されている画像の表示次元を2次元表示に変更する(ステップST2)。LCD2には、図6に示すように2つの画像GL,GRが重なって見えるように2次元表示がなされる。なお、2次元表示時には、2つの画像GL,GRの視差量を表示するようにしてもよい。図6においては「視差量:10」と表示されている。さらにCPU27は、ユーザによる操作ボタン3を用いての視差量の変更指示を受け付ける(ステップST3)。 Next, processing performed in the present embodiment will be described. FIG. 7 is a flowchart illustrating processing performed when adjusting the stereoscopic effect, that is, when changing the amount of parallax in the present embodiment. Here, three-dimensional processing is performed on the images GL and GR read from the recording medium 4 without changing the amount of parallax, and the stereoscopic image G3 generated thereby is stereoscopically displayed on the LCD 2. It shall be. When the stereoscopic image G3 is stereoscopically displayed, the CPU 27 starts processing, and accepts an instruction to start changing the amount of parallax using the operation button 3 by the user (step ST1). Here, it is assumed that the instruction to start changing the parallax amount is performed using, for example, the center button 3 </ b> C of the operation button 3. Thereby, the display control unit 26 changes the display dimension of the currently displayed image to two-dimensional display (step ST2). A two-dimensional display is performed on the LCD 2 so that the two images GL and GR appear to overlap each other as shown in FIG. Note that the parallax amount between the two images GL and GR may be displayed during two-dimensional display. In FIG. 6, “parallax amount: 10” is displayed. Furthermore, the CPU 27 receives an instruction to change the amount of parallax using the operation button 3 by the user (step ST3).
図8は視差量の変更を説明するための図である。なお、図8において実線はLCD2の表示範囲、破線は画像GL、一点鎖線は画像GRをそれぞれ示し、あらかじめ定められた視差の基準から、画像GLが−XL0、画像GRがXR0、それぞれずれていることを示している。また、画像GL,GRおよびLCD2の縦方向のサイズは同一であるが、ここでは説明を分かりやすくするために、縦方向のサイズを異なるものとして示している。画像GL,GRは、同一の被写体を異なる位置において撮影することにより取得されたものであるため、画像GL,GRを重ねた場合、画像GL,GRに含まれる被写体はあらかじめ定められた視差量(図8においてはXR0+XL0)を持っている。このため、画像GL,GRに対して3次元処理を行って立体視用画像を生成し、これを立体視表示することにより立体視を行うことができる。 FIG. 8 is a diagram for explaining the change in the amount of parallax. In FIG. 8, the solid line indicates the display range of the LCD 2, the broken line indicates the image GL, and the alternate long and short dash line indicates the image GR. The image GL is shifted by -XL0 and the image GR is shifted by XR0 from the predetermined parallax reference. It is shown that. Further, although the images GL, GR and the LCD 2 have the same size in the vertical direction, the sizes in the vertical direction are shown as being different for easy understanding. Since the images GL and GR are obtained by photographing the same subject at different positions, when the images GL and GR are overlapped, the subjects included in the images GL and GR have a predetermined amount of parallax ( In FIG. 8, it has XR0 + XL0). For this reason, it is possible to perform stereoscopic viewing by generating a stereoscopic image by performing three-dimensional processing on the images GL and GR, and displaying this stereoscopically.
しかしながら、ユーザにより好ましい立体感が異なるため、本実施形態においては、操作ボタン3を用いてのユーザによる視差量の変更の指示を受け付けることにより、画像GL,GRの視差量を変更するようにしたものである。例えば、本実施形態においては、操作ボタン3の左ボタン3Lを押すことにより視差量が小さくなり、右ボタン3Rを押すことにより視差量が大きくなるように視差量を変更する。なお、視差量を表示した場合には、右ボタン3Rおよび左ボタン3Lの操作により、表示される視差量が変更される。 However, since the preferable stereoscopic effect differs depending on the user, in this embodiment, the parallax amount of the images GL and GR is changed by receiving an instruction to change the parallax amount by the user using the operation button 3. Is. For example, in the present embodiment, the amount of parallax is changed by pressing the left button 3L of the operation button 3 and the amount of parallax is increased by pressing the right button 3R. When the parallax amount is displayed, the displayed parallax amount is changed by operating the right button 3R and the left button 3L.
次いでCPU27は、視差量が調整限界値まで変更されたか否かを判定する(ステップST4)。視差量の調整限界値とは、例えば画像GL,GRが互いの画像の反対側の端部まで移動してしまうような調整値とする。ステップST4が否定されると、ユーザが操作ボタン3から手を離すことにより調整指示が停止されたか否かを判定し(ステップST5)、ステップST5が否定されるとステップST4に戻る。なお、ステップST4が肯定されると、視差量の変更を停止し(ステップST6)、これ以上立体感を変更できないことを示す警告表示をLCD2に行い(ステップST7)、ステップST5に進む。これにより、視差量が調整限界値となるまで、あるいはユーザが操作ボタン3から手を離すまで、指示された視差量となるように視差量の変更が続けられる。 Next, the CPU 27 determines whether or not the parallax amount has been changed to the adjustment limit value (step ST4). The parallax amount adjustment limit value is, for example, an adjustment value that causes the images GL and GR to move to the opposite ends of the images. If step ST4 is negative, it is determined whether or not the adjustment instruction is stopped by releasing the hand from the operation button 3 (step ST5). If step ST5 is negative, the process returns to step ST4. If step ST4 is affirmed, the change of the amount of parallax is stopped (step ST6), a warning display indicating that the stereoscopic effect cannot be changed any longer is displayed on the LCD 2 (step ST7), and the process proceeds to step ST5. Thus, the parallax amount is continuously changed so as to become the instructed parallax amount until the parallax amount reaches the adjustment limit value or until the user releases the operation button 3.
ステップST5が肯定されると、CPU27は操作ボタン3を用いての表示次元の切り替え指示があったか否かを判定する(ステップST8)。ここで、表示次元の切り替えの指示は例えば操作ボタン3の中央ボタン3Cを用いて行うものとする。ステップST8が肯定されると、表示制御部26は画像の表示次元を立体視表示に変更し(ステップST9)、ステップST8に戻る。 If step ST5 is affirmed, the CPU 27 determines whether or not there has been an instruction to switch the display dimension using the operation button 3 (step ST8). Here, the display dimension switching instruction is performed using, for example, the center button 3 </ b> C of the operation button 3. If step ST8 is positive, the display control unit 26 changes the display dimension of the image to stereoscopic display (step ST9), and the process returns to step ST8.
所定時間内に表示次元の切替指示がない場合はステップST8が否定され、CPU27は、図9に示すように現在の視差量を保存するか否かの問い合わせ画面の表示をLCD2に行う(ステップST10)。なお、表示次元の切り替え指示があった場合において、中央ボタン3Cの操作により画像の表示次元を立体視表示に変更した後、直ちにステップST10の処理を行うようにしてもよい。ユーザは操作ボタン3を用いてYESまたはNOを選択することができる。NOが選択されると、ステップST1に戻る。YESが選択されると、記録制御部21が現在の視差量を立体感調整値として画像GL,GRのヘッダに記述し(ステップST11)、画像GL,GRを記録メディア4に記録し(ステップST12)、処理を終了する。なお、記録メディア4に記録されている画像GL,GRは、ヘッダに立体感調整値が記述された画像GL,GRにより上書きされることとなる。 If there is no display dimension switching instruction within the predetermined time, step ST8 is denied, and the CPU 27 displays on the LCD 2 an inquiry screen as to whether or not to save the current amount of parallax as shown in FIG. 9 (step ST10). ). When there is an instruction to switch the display dimension, the process of step ST10 may be performed immediately after changing the display dimension of the image to stereoscopic display by operating the center button 3C. The user can select YES or NO using the operation button 3. If NO is selected, the process returns to step ST1. When YES is selected, the recording control unit 21 describes the current amount of parallax as a stereoscopic effect adjustment value in the headers of the images GL and GR (step ST11), and records the images GL and GR on the recording medium 4 (step ST12). ), The process is terminated. The images GL and GR recorded on the recording medium 4 are overwritten by the images GL and GR in which the stereoscopic effect adjustment value is described in the header.
図10はヘッダに立体感調整値が記述された画像GL,GRの画像ファイルのファイル構造を示す図である。図10に示すように画像GL,GRの画像ファイルFL,FRは、ヘッダHL,HRおよび画像GL,GRの実体である主画像(画像と同一の参照符号GL,GRを用いる)をそれぞれ含む。ヘッダHL,HRには立体感調整値が記述されている。例えば、画像GLのヘッダHLには、立体感調整値としてXL1が、画像GRのヘッダHRには、立体感調整値としてXR1が記述されている。 FIG. 10 is a diagram showing the file structure of image files GL and GR in which the stereoscopic effect adjustment value is described in the header. As shown in FIG. 10, the image files FL and FR of the images GL and GR include headers HL and HR and main images which are entities of the images GL and GR (using the same reference numerals GL and GR as the images), respectively. Three-dimensional effect adjustment values are described in the headers HL and HR. For example, XL1 is described as the stereoscopic effect adjustment value in the header HL of the image GL, and XR1 is described as the stereoscopic effect adjustment value in the header HR of the image GR.
立体感調整値XL1、XR1は視差量から算出する。例えば、視差量が6の場合、視差の基準を画像GLと画像GRとの中間におくとXL1=3、XR1=3となる。また、視差の基準を画像GLにすることも可能であり、その場合、XL1=0、XR1=6となる。なお、立体感調整値の算出方法は上記の例に限るものではなく、そのシステムで一番使いやすい方法で行えばよい。 The stereoscopic effect adjustment values XL1 and XR1 are calculated from the amount of parallax. For example, when the parallax amount is 6, when the parallax reference is set between the image GL and the image GR, XL1 = 3 and XR1 = 3. It is also possible to set the parallax reference to the image GL, in which case XL1 = 0 and XR1 = 6. Note that the method for calculating the stereoscopic effect adjustment value is not limited to the above example, and may be performed by a method that is most easy to use in the system.
なお、上記の処理では、ステップST8において表示次元の切り替え指示があったか否かを判定し、切り替え指示があった場合に画像の表示次元を立体視表示に変更しているが、調整指示の停止後所定時間が経過した後に、画像の表示次元を立体視表示に変更するようにしてもよい。 In the above process, it is determined whether or not a display dimension switching instruction is given in step ST8, and when the switching instruction is given, the display dimension of the image is changed to stereoscopic display. After a predetermined time has elapsed, the display dimension of the image may be changed to stereoscopic display.
次いで、本実施形態において記録メディア4に記録された画像GL,GRの立体視表示時に行われる処理について説明する。図11は立体視表示時に行われる処理を示すフローチャートである。画像の立体視表示の指示が操作ボタン3を用いて行われることによりCPU27が処理を開始し、記録制御部21が記録メディア4から表示対象の画像GL,GRを読み出し、フレームメモリ23に一時的に記憶する(ステップST21)。そして、3次元処理部25が、画像GL,GRのヘッダに立体感調整値が記述されているか否かを判定する(ステップST22)。ステップST22が肯定されると、画像GL,GRのヘッダに記述された立体感調整値を読み出し(ステップST23)、読み出した立体感調整値に基づく視差量となるように画像GL,GRに対して視差量を変更した3次元処理を行って立体視用画像G3を生成する(ステップST24)。そして表示制御部26が、LCD2に立体視用画像G3を立体視表示し(ステップST25)、処理を終了する。 Next, a process performed when stereoscopically displaying the images GL and GR recorded on the recording medium 4 in the present embodiment will be described. FIG. 11 is a flowchart showing processing performed during stereoscopic display. When an instruction for stereoscopic display of an image is given using the operation button 3, the CPU 27 starts processing, and the recording control unit 21 reads the images GL and GR to be displayed from the recording medium 4 and temporarily stores them in the frame memory 23. (Step ST21). Then, the three-dimensional processing unit 25 determines whether or not the stereoscopic effect adjustment value is described in the headers of the images GL and GR (step ST22). When step ST22 is affirmed, the stereoscopic effect adjustment values described in the headers of the images GL and GR are read (step ST23), and the images GL and GR are set to have a parallax amount based on the read stereoscopic effect adjustment values. A stereoscopic image G3 is generated by performing a three-dimensional process with the parallax amount changed (step ST24). Then, the display control unit 26 stereoscopically displays the stereoscopic image G3 on the LCD 2 (step ST25), and the process ends.
一方、ステップST22が否定されると、視差量を変更することなく画像GL,GRに対して3元処理を行って立体視用画像G3を生成し(ステップST26)、ステップST25の処理に進んで立体視用画像G3を立体視表示し、処理を終了する。 On the other hand, if step ST22 is negative, a three-dimensional process is performed on the images GL and GR without changing the amount of parallax to generate a stereoscopic image G3 (step ST26), and the process proceeds to step ST25. The stereoscopic image G3 is stereoscopically displayed, and the process ends.
このように、本実施形態においては、視差量の変更時に画像GL,GRの立体視表示を2次元表示に切り替えるようにしたため、画像GL,GRの視差量がどの程度あるかを確認することが容易となる。 As described above, in the present embodiment, since the stereoscopic display of the images GL and GR is switched to the two-dimensional display when the parallax amount is changed, it is possible to check how much the parallax amount of the images GL and GR is. It becomes easy.
また、3次元処理がなされる前の元の画像GL,GRのヘッダに立体感調整値を記述して記録メディア4に記録するようにしたため、後で立体感を変更したい場合には、改めて元の画像GL,GRに対して3次元処理を行うことにより、立体感を変更することができる。 Further, since the stereoscopic effect adjustment value is described in the header of the original images GL and GR before the three-dimensional processing is performed and is recorded on the recording medium 4, when the stereoscopic effect is to be changed later, the original image is changed again. The three-dimensional effect can be changed by performing three-dimensional processing on the images GL and GR.
また、立体感調整値を画像GL,GRの画像ファイルFL,FRのヘッダHL,HRに記述するようにしたため、画像GL,GRを立体視表示する際に、ヘッダHL,HRに記述された立体感調整値に基づく視差量となるように3次元処理を行えば、視差量の変更を行ったユーザの好みの立体感となるように画像GL,GRを立体視表示することができる。このため、ユーザは立体視表示を行う毎に視差量を変更する作業を行う必要がなくなり、その結果、ユーザの負担を軽減することができる。 In addition, since the stereoscopic effect adjustment value is described in the headers HL and HR of the image files FL and FR of the images GL and GR, the stereoscopic image described in the headers HL and HR is displayed when the images GL and GR are stereoscopically displayed. If three-dimensional processing is performed so that the parallax amount based on the feeling adjustment value is obtained, the images GL and GR can be stereoscopically displayed so as to have a stereoscopic effect that is preferred by the user who has changed the parallax amount. For this reason, it is not necessary for the user to change the amount of parallax each time stereoscopic display is performed, and as a result, the burden on the user can be reduced.
なお、上記実施形態においては、立体視表示の方式をバックライトコントロール方式として説明しているが、バックライトコントロール方式以外の立体視表示の方式、例えば、レンチキュラー方式およびパララックスバリア方式等のバックライトコントロール方式以外の方式を用いて立体視表示を行う場合において、2次元表示を行う場合は、3次元処理を行わず、画像GL,GRを半透明にして重ね合わせるのみで、図6に示すように2つの画像GL,GRが重なって見えるようにすることができる。 In the above embodiment, the stereoscopic display method is described as the backlight control method, but a stereoscopic display method other than the backlight control method, for example, a backlight such as a lenticular method and a parallax barrier method. When performing stereoscopic display using a method other than the control method, when performing two-dimensional display, the three-dimensional processing is not performed, and the images GL and GR are only made semi-transparent and superimposed, as shown in FIG. It is possible to make two images GL and GR appear to overlap each other.
ここで、立体視表示を行う場合、画像GL,GRの視差量が大きくなるほど、画像GL,GRの互いに重なる範囲が狭くなるため、立体視表示を行う際の表示範囲が狭くなる。すなわち、図12に示すように画像GL,GRの視差量が小さい場合には、画像GL,GRの互いに重なる表示範囲は図12における領域A1となるが、視差量が大きくなると視差量が小さい場合と比較して、画像GL,GRの互いに重なる表示範囲は領域A2に示すように小さくなる。なお、画像GL,GRおよび領域A1,A2のアスペクト比は同一である。 Here, when performing the stereoscopic display, the larger the amount of parallax between the images GL and GR, the narrower the range in which the images GL and GR overlap each other, and thus the display range when performing the stereoscopic display is narrowed. That is, as shown in FIG. 12, when the amount of parallax between the images GL and GR is small, the display range where the images GL and GR overlap each other is the area A1 in FIG. 12, but when the amount of parallax increases, the amount of parallax is small As compared with the image A, the display range where the images GL and GR overlap each other becomes smaller as shown in the area A2. The aspect ratios of the images GL and GR and the areas A1 and A2 are the same.
立体視表示は画像GL,GRの互いに重なる範囲を用いて行うものである。このため、視差量が大きくなるほど立体視表示の際に画像GL,GRからトリミングされる領域が小さくなり、その結果、LCD2に立体視表示される立体視用画像G3は拡大されることとなる。本実施形態においては、視差量を変更する際に視差量に応じて立体視表示される立体視用画像G3を拡大縮小することによりサイズを変更して表示してもよいが、表示される画像のサイズが変更されると、ユーザはそれに目を奪われ、適切な視差量を決定できなくなるおそれがある。 The stereoscopic display is performed using a range where the images GL and GR overlap each other. For this reason, as the amount of parallax increases, the area trimmed from the images GL and GR in the stereoscopic display becomes smaller, and as a result, the stereoscopic image G3 displayed stereoscopically on the LCD 2 is enlarged. In this embodiment, when changing the amount of parallax, the stereoscopic image G3 displayed stereoscopically according to the amount of parallax may be displayed by changing the size by enlarging or reducing the displayed image. If the size is changed, the user may be distracted by it and may not be able to determine an appropriate amount of parallax.
このため、視差量の変更量に応じて、立体視表示時に実際にLCD2に表示される範囲、すなわち画像GL,GRにおけるトリミングされる範囲が分かるように、図13に示すように立体視表示される立体視用画像の周囲に、例えば黒色の枠を付与するようにしてもよい。これにより、ユーザは視差量の調整に集中することができるため、視差量の調整を効率よく行うことができる。 For this reason, according to the amount of change in the parallax amount, the stereoscopic display is performed as shown in FIG. 13 so that the range actually displayed on the LCD 2 during the stereoscopic display, that is, the trimmed range in the images GL and GR can be seen. For example, a black frame may be provided around the stereoscopic image. Thereby, since the user can concentrate on the adjustment of the parallax amount, the parallax amount can be adjusted efficiently.
なお、枠の付与は立体視表示時においても2次元表示時においても同様に行うことができる。 Note that the addition of the frame can be performed in the same way during stereoscopic display and during two-dimensional display.
一方、視差量はあまり大きくなりすぎると立体視を適切に行うことができなくなる。このため、立体視ができないほど視差量が大きくなった場合には、枠の色を変更してユーザにその旨を通知するようにしてもよい。この場合、視差量の大きさに応じて、例えば視差量が大きくなるにつれて、青、黄色、赤のように、段階的に枠の色を変更するようにしてもよい。 On the other hand, if the amount of parallax becomes too large, stereoscopic viewing cannot be performed appropriately. For this reason, when the amount of parallax becomes so large that stereoscopic viewing is impossible, the color of the frame may be changed to notify the user to that effect. In this case, according to the amount of parallax, for example, as the amount of parallax increases, the color of the frame may be changed step by step, such as blue, yellow, and red.
また、上記実施形態においては、視差量を変更する際に、画像GL,GR上において視差量が0となる部分が現れる。この場合、視差量が0となる部分が分かるように、立体視用画像G3における視差量が0となる部分の色を変更してもよい。例えば、図14に示す2次元表示された画像GL,GRにおいて、人物の顔の視差量が0となっている場合には、人物の顔の色を所定の色(例えば赤)に変更するようにしてもよい。なお、図14においては、色が変更されていることを斜線にて示している。これにより、ユーザは視差量が0となる部分を容易に認識することができる。なお、立体視表示時においても同様に立体視用画像G3における視差量が0となる部分の色を変更できることはもちろんである。 Moreover, in the said embodiment, when changing the amount of parallax, the part from which the amount of parallax becomes 0 appears on the images GL and GR. In this case, the color of the portion where the amount of parallax in the stereoscopic image G3 is 0 may be changed so that the portion where the amount of parallax is 0 is known. For example, in the two-dimensionally displayed images GL and GR shown in FIG. 14, when the parallax amount of the person's face is 0, the person's face color is changed to a predetermined color (for example, red). It may be. In FIG. 14, the color is changed by hatching. Thereby, the user can easily recognize a portion where the parallax amount is zero. It should be noted that the color of the portion where the parallax amount in the stereoscopic image G3 can be similarly changed during the stereoscopic display.
また、視差量が0となる部分が存在する場合、その旨を音声により通知するようにしてもよい。 In addition, when there is a portion where the parallax amount is 0, that fact may be notified by voice.
また、上記実施形態においては、立体感調整値を画像GL,GRの画像ファイルFL,FRのヘッダHL,HRに記述しているが、図15に示すように、画像GL,GRがつながった1つの画像ファイルF1として構成されている場合がある。このような場合、画像ファイルF1のヘッダH1に、画像GL,GRの双方の立体感調整値を記述すればよい。 In the above embodiment, the stereoscopic effect adjustment value is described in the headers HL and HR of the image files FL and FR of the images GL and GR. However, as shown in FIG. There are cases where it is configured as one image file F1. In such a case, the stereoscopic effect adjustment values of both the images GL and GR may be described in the header H1 of the image file F1.
また、画像GL,GRと立体感調整値とをそれぞれ別個のファイルとして保存するようにしてもよい。例えば、図16に示すように画像GL,GRの画像ファイルFL,FRと、立体感調整値を記述したテキストファイルT1とを同一のフォルダD1に保存するようにしてもよい。この場合、元の画像GL,GRの画像ファイルFL,FRのコピーをテキストファイルT1とともに同一のフォルダD1に保存してもよく、元の画像GL,GRを保存先のフォルダから移動して、テキストファイルT1とともに同一のフォルダD1に保存してもよい。 The images GL and GR and the stereoscopic effect adjustment value may be stored as separate files. For example, as shown in FIG. 16, the image files FL and FR of the images GL and GR and the text file T1 describing the stereoscopic effect adjustment value may be stored in the same folder D1. In this case, a copy of the image files FL and FR of the original images GL and GR may be stored in the same folder D1 together with the text file T1, and the original images GL and GR are moved from the storage destination folder and the text The file T1 may be saved in the same folder D1.
また、とくに画像GL,GRが同一の画像ファイルF1として保存されている場合、図17に示すように、複数の画像ファイルF1,F1′と、立体感調整値を記述したテキストファイルT1とを同一のフォルダD1に保存するようにしてもよい。この場合、テキストファイルT1には、フォルダD1内に保存されているすべての画像の立体感調整値が画像ファイルF1,F1′と対応づけられて記述されることとなる。 In particular, when the images GL and GR are stored as the same image file F1, as shown in FIG. 17, the plurality of image files F1 and F1 ′ and the text file T1 describing the stereoscopic effect adjustment value are the same. You may make it preserve | save in the folder D1. In this case, in the text file T1, the stereoscopic effect adjustment values of all the images stored in the folder D1 are described in association with the image files F1 and F1 ′.
また、図18に示すように、複数の画像ファイルF1,F1′のみを保存するフォルダD1と、立体感調整値を記述したテキストファイルT0を保存するフォルダD2とを分けるようにしてもよい。この場合、テキストファイルT0には、フォルダD1に保存されているすべての画像の立体感調整値が画像ファイルF1,F1′と対応づけられて記述されることとなる。 In addition, as shown in FIG. 18, a folder D1 that stores only a plurality of image files F1 and F1 ′ and a folder D2 that stores a text file T0 describing a stereoscopic effect adjustment value may be separated. In this case, in the text file T0, the stereoscopic effect adjustment values of all the images stored in the folder D1 are described in association with the image files F1 and F1 ′.
また、上記実施形態においては、画像表示装置1への画像の入力は、記録メディア4から画像を読み取るものとしているが、これに限定されるものではなく、ネットワークにより接続された画像サーバから画像を入力するようにしてもよく、非接触通信等により画像を入力するようにしてもよい。 In the above embodiment, the input of the image to the image display device 1 is to read the image from the recording medium 4, but the present invention is not limited to this, and the image is input from the image server connected by the network. You may make it input, and you may make it input an image by non-contact communication etc.
また、上記実施形態による画像表示装置1を、複数の撮影部を備えた複眼撮影装置に適用してもよい。この場合、撮影により取得した複数の画像を直ちに表示して、視差量の変更を行って記録メディア4に記録することが可能となる。この場合、撮影前のスルー画像を表示している状態で視差量の変更を行うことも可能であり、その場合には、画像の表示次元を2次元表示に変更して視差量を変更した後、レリーズボタンを半押しすることにより、画像の表示次元を立体視表示に変更してもよい。また、視差量の変更後所定時間を経過した後に、画像の表示次元を立体視表示に変更してもよい。 Further, the image display device 1 according to the above-described embodiment may be applied to a compound eye photographing device including a plurality of photographing units. In this case, it is possible to immediately display a plurality of images acquired by photographing, change the amount of parallax, and record it on the recording medium 4. In this case, it is also possible to change the amount of parallax while displaying a through image before shooting. In that case, after changing the display dimension of the image to two-dimensional display and changing the amount of parallax The display dimension of the image may be changed to stereoscopic display by pressing the release button halfway. Further, the display dimension of the image may be changed to stereoscopic display after a predetermined time has elapsed after the change in the amount of parallax.
以上、本発明の実施形態に係る装置10について説明したが、コンピュータを、3次元処理部25、記録制御部21および表示制御部26に対応する手段として機能させ、図7および図11に示すような処理を行わせるプログラムも、本発明の実施形態の1つである。また、そのようなプログラムを記録したコンピュータ読取り可能な記録媒体も、本発明の実施形態の1つである。 Although the apparatus 10 according to the embodiment of the present invention has been described above, the computer is caused to function as a unit corresponding to the three-dimensional processing unit 25, the recording control unit 21, and the display control unit 26, as illustrated in FIGS. A program for performing a simple process is also one embodiment of the present invention. A computer-readable recording medium in which such a program is recorded is also one embodiment of the present invention.
1 画像表示装置
2 LCD
3 操作ボタン
4 記録メディア
5 スロット
21 記録制御部
25 3次元処理部
26 表示制御部
1 Image display device 2 LCD
3 Operation Button 4 Recording Media 5 Slot 21 Recording Control Unit 25 3D Processing Unit 26 Display Control Unit
Claims (9)
前記2つの画像から立体視用画像を生成する3次元処理手段と、
2次元表示および立体視表示のいずれも可能な表示手段と、
前記視差量の変更指示を受け付ける入力手段と、
前記立体視用画像のスルー画像としての立体視表示中において、少なくとも前記視差量の変更指示が行われている間は、前記立体視用画像の立体視表示を前記2つの画像を重ねての2次元表示に変更し、前記視差量の変更指示に応じて、該2つの画像の視差量を変更して2次元表示し、前記視差量の変更指示の停止後、所定時間経過後に該2次元表示を前記立体視表示に変更する表示制御手段とを備えたことを特徴とする複眼撮影装置。 Two photographing means for obtaining two images by photographing at different positions;
Three-dimensional processing means for generating a stereoscopic image from the two images;
Display means capable of both two-dimensional display and stereoscopic display;
Input means for receiving an instruction to change the amount of parallax;
During stereoscopic display as a through image of the stereoscopic image, at least while the instruction to change the amount of parallax is performed, the stereoscopic display of the stereoscopic image is performed by superimposing the two images. In accordance with the instruction to change the amount of parallax, the two-dimensional display is performed by changing the amount of parallax between the two images, and after the instruction to change the amount of parallax has stopped, the two-dimensional display And a display control means for changing the display to the stereoscopic display.
前記視差量の変更指示が停止されたか否かを判定する第2の判定手段とをさらに備え、
前記表示制御手段は、前記第1および前記第2の判定手段のいずれかによる判定が肯定されるまで、前記視差量の変更を継続する手段であることを特徴とする請求項1記載の複眼撮影装置。 First determination means for determining whether or not the parallax amount has been changed to an adjustment limit value;
A second determination unit that determines whether or not the parallax amount change instruction is stopped;
2. The compound eye photography according to claim 1, wherein the display control unit is a unit that continues the change of the parallax amount until a determination by any one of the first and second determination units is affirmed. apparatus.
前記2つの画像から立体視用画像を生成し、
前記立体視用画像のスルー画像を、2次元表示および立体視表示のいずれも可能な表示手段に立体視表示し、
前記立体視用画像のスルー画像としての立体視表示中において、少なくとも前記視差量の変更指示が行われている間は、前記立体視用画像の立体視表示を前記2つの画像を重ねての2次元表示に変更し、
前記視差量の変更指示を受け付け、
前記視差量の変更指示に応じて、該2つの画像の視差量を変更して2次元表示し、
前記視差量の変更指示の停止後、所定時間経過後に前記2次元表示を前記立体視表示に変更することを特徴とする複眼撮影方法。 Two images are acquired by shooting at different positions,
Generating a stereoscopic image from the two images;
Stereoscopic display of the through image of the stereoscopic image on a display means capable of both two-dimensional display and stereoscopic display;
During stereoscopic display as a through image of the stereoscopic image, at least while the instruction to change the amount of parallax is performed, the stereoscopic display of the stereoscopic image is performed by superimposing the two images. Change to dimension view,
Receiving an instruction to change the amount of parallax;
In response to the instruction to change the amount of parallax, the amount of parallax between the two images is changed and two-dimensionally displayed.
A compound eye photographing method, wherein the two-dimensional display is changed to the stereoscopic display after a predetermined time elapses after the instruction to change the parallax amount is stopped.
前記2つの画像から立体視用画像を生成する手順と、
前記立体視用画像のスルー画像を、2次元表示および立体視表示のいずれも可能な表示手段に立体視表示する手順と、
前記立体視用画像のスルー画像としての立体視表示中において、少なくとも前記視差量の変更指示が行われている間は、前記立体視用画像の立体視表示を前記2つの画像を重ねての2次元表示に変更する手順と、
前記視差量の変更指示を受け付ける手順と、
前記視差量の変更指示に応じて、該2つの画像の視差量を変更して2次元表示する手順と、
前記視差量の変更指示の停止後、所定時間経過後に前記2次元表示を前記立体視表示に変更する手順とを有する複眼撮影方法をコンピュータに実行させるためのプログラム。 A procedure for acquiring two images by shooting at different positions;
Generating a stereoscopic image from the two images;
A procedure for stereoscopically displaying the through image of the stereoscopic image on display means capable of both two-dimensional display and stereoscopic display;
During stereoscopic display as a through image of the stereoscopic image, at least while the instruction to change the amount of parallax is performed, the stereoscopic display of the stereoscopic image is performed by superimposing the two images. To change to dimension view,
A procedure for receiving an instruction to change the amount of parallax;
In accordance with the instruction to change the amount of parallax, a procedure for changing the amount of parallax between the two images and performing two-dimensional display;
A program for causing a computer to execute a compound eye photographing method including a procedure for changing the two-dimensional display to the stereoscopic display after a predetermined time has elapsed after stopping the parallax amount change instruction.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011117771A JP4819196B2 (en) | 2011-05-26 | 2011-05-26 | Compound eye photographing apparatus and method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011117771A JP4819196B2 (en) | 2011-05-26 | 2011-05-26 | Compound eye photographing apparatus and method, and program |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009169664A Division JP5430266B2 (en) | 2009-07-21 | 2009-07-21 | Image display apparatus and method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011217388A JP2011217388A (en) | 2011-10-27 |
JP4819196B2 true JP4819196B2 (en) | 2011-11-24 |
Family
ID=44946590
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011117771A Expired - Fee Related JP4819196B2 (en) | 2011-05-26 | 2011-05-26 | Compound eye photographing apparatus and method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4819196B2 (en) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3054002B2 (en) * | 1993-09-01 | 2000-06-19 | キヤノン株式会社 | Compound eye imaging device |
JP3525970B2 (en) * | 1996-01-19 | 2004-05-10 | 株式会社タイトー | A parallax adjustment device for a game machine that can experience stereoscopic viewing |
JP3595634B2 (en) * | 1996-09-11 | 2004-12-02 | キヤノン株式会社 | Compound eye camera and image processing method |
JPH11355624A (en) * | 1998-06-05 | 1999-12-24 | Fuji Photo Film Co Ltd | Photographing device |
JP4225768B2 (en) * | 2002-07-31 | 2009-02-18 | シャープ株式会社 | Stereoscopic image data processing apparatus and stereoscopic image data processing program |
JP4181446B2 (en) * | 2003-05-14 | 2008-11-12 | シャープ株式会社 | Stereoscopic image display device |
JP2005026800A (en) * | 2003-06-30 | 2005-01-27 | Konica Minolta Photo Imaging Inc | Image processing method, imaging apparatus, image processing apparatus, and image recording apparatus |
-
2011
- 2011-05-26 JP JP2011117771A patent/JP4819196B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2011217388A (en) | 2011-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5430266B2 (en) | Image display apparatus and method, and program | |
JP5266126B2 (en) | Image display apparatus and method, and program | |
JP4625515B2 (en) | Three-dimensional imaging apparatus, method, and program | |
JP4895312B2 (en) | Three-dimensional display device, method and program | |
WO2012001970A1 (en) | Image processing device, method, and program | |
JP2010068182A (en) | Three-dimensional imaging device, method, and program | |
US8849012B2 (en) | Image processing apparatus and method and computer readable medium having a program for processing stereoscopic image | |
JP5894249B2 (en) | Display control apparatus and method, and program | |
JP4819196B2 (en) | Compound eye photographing apparatus and method, and program | |
JP5659285B2 (en) | Display control apparatus and method, and program | |
JP4819194B2 (en) | Compound eye photographing apparatus and method, and program | |
JP4819195B2 (en) | Image display apparatus and method, and program | |
JP4847500B2 (en) | Three-dimensional display device, method and program | |
WO2012001958A1 (en) | Image processing device, method and program | |
JP5165742B2 (en) | Three-dimensional imaging apparatus, method, and program | |
JP2012065330A (en) | Three-dimensional display device and method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110809 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110831 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140909 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4819196 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |