JP5700998B2 - 3D image display apparatus and control method thereof - Google Patents

3D image display apparatus and control method thereof Download PDF

Info

Publication number
JP5700998B2
JP5700998B2 JP2010226059A JP2010226059A JP5700998B2 JP 5700998 B2 JP5700998 B2 JP 5700998B2 JP 2010226059 A JP2010226059 A JP 2010226059A JP 2010226059 A JP2010226059 A JP 2010226059A JP 5700998 B2 JP5700998 B2 JP 5700998B2
Authority
JP
Japan
Prior art keywords
eye image
eye
video
image
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010226059A
Other languages
Japanese (ja)
Other versions
JP2012080469A5 (en
JP2012080469A (en
Inventor
花光 悟
悟 花光
悟史 卯川
悟史 卯川
荒谷 俊太郎
俊太郎 荒谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2010226059A priority Critical patent/JP5700998B2/en
Publication of JP2012080469A publication Critical patent/JP2012080469A/en
Publication of JP2012080469A5 publication Critical patent/JP2012080469A5/ja
Application granted granted Critical
Publication of JP5700998B2 publication Critical patent/JP5700998B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は立体映像コンテンツを表示する立体映像表示装置及びその制御方法に関する。   The present invention relates to a stereoscopic video display device that displays stereoscopic video content and a control method thereof.

両眼視差を利用した立体映像の表示方式には、時分割して2つの映像を交互に見せる時分割方式と、偏光等が異なる2つの映像を同時に見せる偏波分割方式がある。また、立体視可能な映像コンテンツの撮影、制作方式には2つの方式がある。第1の方式は、左右両眼用の映像を、同じタイミングで撮影、制作する方式(偏波分割に対応した生成方式)である。第2の方式は、時分割式で見ることを想定して交互のタイミングで撮影、制作する方式(時分割方式に対応した撮影、制作方式)である。   There are two types of stereoscopic video display methods using binocular parallax: a time division method in which two images are alternately viewed by time division and a polarization division method in which two images having different polarizations are simultaneously viewed. There are two methods for photographing and producing stereoscopically viewable video content. The first method is a method (a generation method corresponding to polarization splitting) in which images for left and right eyes are photographed and produced at the same timing. The second method is a method of shooting and producing at alternate timings (shooting and production methods corresponding to the time division method) assuming that the time-division method is used.

立体映像コンテンツの撮影、制作方式と、その立体映像コンテンツを表示するときの表示方式とが対応していない場合、立体映像、特に動きのある映像が、滑らかに動いているように見えず、品位が低く感じる場合がある。   If the shooting and production method of stereoscopic video content does not correspond to the display method when displaying the stereoscopic video content, stereoscopic video, especially video with motion, does not appear to move smoothly, and the quality May feel low.

図9は左眼用映像、右眼用映像を撮影時には同時に撮影し、表示時には交互に表示する場合の立体映像コンテンツの表示と時間の関係を表す図である。2台のカメラを同期させて記録する場合など右眼用映像、左眼用映像を同時に撮影する場合、時間軸に対して撮影時の左眼用映像は111、112、113、右眼用映像は121、122、123のようになる。一方、立体映像を左右交互に表示する方式の立体映像表示装置で表示する場合、時間軸に対して表示時の左眼用映像は131、132、133、右眼用映像は141、142、143のようになる。   FIG. 9 is a diagram illustrating the relationship between the display of stereoscopic video content and time when a left-eye video and a right-eye video are simultaneously captured during shooting and are alternately displayed during display. When shooting right-eye video and left-eye video simultaneously, such as when recording two cameras in synchronization, the left-eye video at the time of shooting on the time axis is 111, 112, 113, and right-eye video. Becomes 121, 122, 123. On the other hand, in the case of displaying on a stereoscopic video display apparatus that displays a stereoscopic video alternately left and right, 131, 132, and 133 for the left eye and 141, 142, and 143 for the right eye when displayed on the time axis. become that way.

撮影時の左眼用映像111と同時に撮影した右眼用映像121を、表示時に141のタイミングでそのまま表示すると撮影時と表示時でタイミングが異なることになり、滑らかに動いているように見えず、品位が低く感じる場合がある。   If the right-eye image 121 captured at the same time as the left-eye image 111 at the time of shooting is displayed as it is at the timing of 141 at the time of display, the timing differs at the time of shooting and at the time of display, and it does not appear to move smoothly. , May feel low grade.

従来、映像コンテンツに付与された撮影、制作時の方式を示す情報に基づいて映像を補間、調整し表示するものがあった(例えば、特許文献1参照)。図10は左眼用映像、右眼用映像を撮影時には同時に撮影し、表示時には交互に表示する場合の従来技術における立体映像コンテンツの調整、表示と時間の関係を表す図である。図9と同様に、右眼用映像、左眼用映像を同時に撮影する場合、時間軸に対して撮影時の左眼用映像は211、212、213、右眼用映像は221、222、223のようになる。また、表示時の左眼用映像は231、232、233、右眼用映像は241、242、243のようになる。241のタイミングで表示する映像を221と222のタイミングで撮影した映像から補間、合成して生成する等の調整を行ってから表示することにより、撮影と表示のタイミングのずれが少なくなり、より高品位な表示を行うことができる。   2. Description of the Related Art Conventionally, there is a video that is interpolated, adjusted, and displayed based on information indicating a shooting and production method assigned to video content (see, for example, Patent Document 1). FIG. 10 is a diagram illustrating the relationship between the adjustment and display of stereoscopic video content and the time in the prior art in the case where the left-eye video and the right-eye video are simultaneously shot when shooting and are alternately displayed during display. Similarly to FIG. 9, when right-eye video and left-eye video are simultaneously captured, the left-eye video 211, 212, and 213 and the right-eye video 221, 222, and 223 at the time of shooting with respect to the time axis. become that way. Further, the left-eye video at the time of display is 231, 232, 233, and the right-eye video is 241, 242, 243. By displaying the video displayed at the timing 241 after adjusting the interpolation, synthesis, etc. from the video captured at the timing 221 and 222, the difference between the timing of the imaging and the display is reduced. High-quality display can be performed.

図11は左眼用映像、右眼用映像を撮影時には交互に切り換えて撮影し、表示時には同時に表示する場合の従来技術における立体映像コンテンツの調整、表示と時間の関係を表す図である。図10に示した場合と同様に、交互に撮影した映像を、同時に表示すると品位が低く感じる場合があるため、従来、前後の映像フレームから映像を補間、合成等の調整を行って表示していた。   FIG. 11 is a diagram showing the relationship between the adjustment and display of stereoscopic video content and the time in the prior art when the left-eye video and the right-eye video are alternately switched during shooting and are displayed simultaneously during display. Similar to the case shown in FIG. 10, since images taken alternately may be displayed at the same time when the images are displayed simultaneously, the images are conventionally displayed by adjusting interpolation, synthesis, etc. from the previous and next video frames. It was.

特開2008−252731号公報JP 2008-252731 A

しかしながら、使用する機器や映像フォーマットによっては、左眼用映像及び右眼用映像の撮影、制作時の方式を示す情報が映像コンテンツに付与されていない場合がある。また、左眼用映像及び右眼用映像の撮影、制作時の方式を示す情報は、立体映像コンテンツの編集やネットワーク配信等の過程で不明になったり、異なった情報が付与される場合もある。左眼用映像及び右眼用映像の撮影、制作時の方式を示す情報が映像コンテンツに付与されていないと、立体映像コンテンツの適切な調整、表示ができない場合があった。   However, depending on the device used and the video format, there is a case where information indicating a method for shooting and producing the left-eye video and the right-eye video is not added to the video content. In addition, information indicating the method for shooting and production of the left-eye video and the right-eye video may become unknown during the process of editing the stereoscopic video content or network distribution, or may be provided with different information. . If information indicating a method for shooting and producing a left-eye video and a right-eye video is not given to the video content, the stereoscopic video content may not be appropriately adjusted and displayed.

そこで本発明は、立体映像コンテンツの映像から撮影、制作時の方式を判別し、これによって適切に立体映像コンテンツの調整、表示を行い高品位な立体映像を表示することができる立体映像表示装置及びその制御方法を提供することを目的とする。   Accordingly, the present invention provides a stereoscopic video display apparatus capable of discriminating a method of shooting and production from a video of stereoscopic video content, thereby appropriately adjusting and displaying the stereoscopic video content and displaying a high-quality stereoscopic video. An object is to provide a control method thereof.

本発明の一側面によれば、両眼視差を有する左眼用画像と右眼用画像とを時分割で交互に表示することで立体映像を表示する立体映像表示装置であって、入力された複数フレームの左眼用画像及び右眼用画像に基づいて、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定する判定手段と、前記判定手段により各対の左眼用画像及び右眼用画像が同時に撮影されたものであると判定された場合、左眼用画像又は右眼用画像のいずれか一方について複数のフレームから合成した画像を順次生成するとともに、他方の画像と交互に表示する表示制御手段とを有し、前記判定手段は、前記複数フレームに亘る左眼用画像及び右眼用画像それぞれの輝度変化を比較することにより、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定することを特徴とする立体映像表示装置が提供される。 According to one aspect of the present invention, there is provided a stereoscopic video display device that displays a stereoscopic video by alternately displaying a left-eye image and a right-eye image having binocular parallax in a time-sharing manner, Based on a plurality of left-eye images and right-eye images, each pair of left-eye images and right-eye images is taken at the same time, or alternately taken at a predetermined time difference. If the determination means determines that the pair of left-eye images and right-eye images are taken at the same time, either the left-eye image or the right-eye image with sequentially generating image composed of a plurality of frames for one, the other image and have a display control means for displaying alternately, said determining means, the left and right eye images over the plurality of frames By comparing each brightness change Or left and right eye images of each pair is one that was captured at the same time, the stereoscopic image display apparatus characterized by determining whether it was taken alternately at predetermined time difference is provided The

本発明によれば、立体映像コンテンツの映像から撮影、制作時の方式を判別し、これによって適切に立体映像コンテンツの調整、表示を行い高品位な立体映像を表示することができる。   According to the present invention, it is possible to discriminate a method at the time of shooting and production from a video of stereoscopic video content, thereby appropriately adjusting and displaying the stereoscopic video content and displaying a high-quality stereoscopic video.

実施形態における立体映像表示装置の構成を表すブロック図。The block diagram showing the structure of the three-dimensional-video display apparatus in embodiment. 実施形態における撮影方式判定部による処理を示すフローチャート。6 is a flowchart illustrating processing performed by an imaging method determination unit according to the embodiment. 実施形態における判定用輝度の例を示す図。The figure which shows the example of the brightness | luminance for determination in embodiment. 実施形態における判定用映像の例を示す図。The figure which shows the example of the image | video for determination in embodiment. 実施形態における映像処理部による処理を示すフローチャート。The flowchart which shows the process by the video processing part in embodiment. 実施形態における映像処理部による表示する映像フレーム数を切り換える処理を示すフローチャート。6 is a flowchart illustrating processing for switching the number of video frames to be displayed by the video processing unit according to the embodiment. 実施形態における映像処理部の表示映像フレーム数切り換えと時間の関係を表す図。The figure showing the relationship between the switching of the number of display video frames of the video processing unit and time in the embodiment. 実施形態における撮影方式判定部による処理を示すフローチャート。6 is a flowchart illustrating processing performed by an imaging method determination unit according to the embodiment. 立体映像コンテンツの撮影タイミングと表示タイミングの関係を表す図。The figure showing the relationship between the imaging | photography timing of 3D video content, and a display timing. 従来技術における左右同時撮影した立体映像コンテンツの調整、表示と時間の関係を表す図。The figure showing the relationship between the adjustment and display, and time of the three-dimensional video content image | photographed simultaneously right and left in a prior art. 従来技術における左右交互撮影した立体映像コンテンツの調整、表示と時間の関係を表す図。The figure showing the relationship between the adjustment and display, and time of the stereoscopic video content which carried out the left-right alternating photography in a prior art.

以下、図面を参照して本発明の好適な実施形態について詳細に説明する。なお、本発明は以下の実施形態に限定されるものではなく、本発明の実施に有利な具体例を示すにすぎない。また、以下の実施形態の中で説明されている特徴の組み合わせの全てが本発明の課題解決のために必須のものであるとは限らない。   DESCRIPTION OF EMBODIMENTS Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. In addition, this invention is not limited to the following embodiment, It shows only the specific example advantageous for implementation of this invention. Moreover, not all combinations of features described in the following embodiments are indispensable for solving the problems of the present invention.

[実施形態1]
本発明の第1の実施形態では上下方向に移動する物体の位置を比較して撮影、制作時の方式を判別する立体映像表示装置について説明する。
[Embodiment 1]
In the first embodiment of the present invention, a description will be given of a stereoscopic video display device that compares the positions of objects that move in the vertical direction to determine the method of shooting and production.

図1は本実施形態における立体映像表示装置の構成を表すブロック図である。立体映像表示装置1は映像データ2を再生、表示する。立体映像表示装置1は立体映像を視聴するために両眼視差を有する右眼用、左眼用の映像を時分割で交互に表示する。映像データ2は一対の左眼用映像及び右眼用映像を有する映像データである。映像データ2は例えば圧縮符号化されており、光ディスク装置やネットワークから所定のフレームレートを持つデータとして入力される。   FIG. 1 is a block diagram illustrating a configuration of a stereoscopic video display device according to the present embodiment. The stereoscopic video display device 1 reproduces and displays the video data 2. The stereoscopic image display device 1 alternately displays right-eye and left-eye images having binocular parallax in a time-division manner in order to view stereoscopic images. Video data 2 is video data having a pair of left-eye video and right-eye video. The video data 2 is compressed and encoded, for example, and is input as data having a predetermined frame rate from an optical disk device or a network.

メガネ3は立体映像を視聴するためのものであり、映像切換指示部50からの信号を受信して、右眼及び左眼に届く映像を遮断する液晶シャッターを備える。映像データ入力部10は映像データ2に含まれる立体映像データを読み取り、右眼用、左眼用の映像データに分離し、それぞれ右眼用映像データデコード部20、左眼用映像データデコード部30に出力する。   The glasses 3 are for viewing a stereoscopic image, and include a liquid crystal shutter that receives a signal from the image switching instruction unit 50 and blocks an image reaching the right eye and the left eye. The video data input unit 10 reads stereoscopic video data included in the video data 2 and separates it into right-eye and left-eye video data. The right-eye video data decoding unit 20 and the left-eye video data decoding unit 30 respectively. Output to.

右眼用映像データデコード部20、左眼用映像データデコード部30は、処理する映像データが右眼用か左眼用かの違いだけで同じ機能を有し、映像データ入力部10から入力された映像データを復号し、右眼用映像及び左眼用映像を生成する。また映像データ復号時に使用する特定領域の映像の動きを表すデータである動きベクトル、及び特定領域の映像、輝度変化等を撮影方式判定部70に渡す。映像の動きを表す動きベクトルは映像データに含まれるものを使用するだけでなく、生成した映像の前後の映像フレームを画像比較して動きベクトルに相当する動きを表すデータを生成しても良い。   The right-eye video data decoding unit 20 and the left-eye video data decoding unit 30 have the same function only depending on whether the video data to be processed is for the right eye or the left eye, and are input from the video data input unit 10. The video data is decoded to generate a right-eye video and a left-eye video. In addition, the motion vector, which is data representing the motion of the video in the specific area used at the time of decoding the video data, the video in the specific area, the luminance change, and the like are passed to the imaging method determination unit 70. As the motion vector representing the motion of the video, not only the motion vector included in the video data but also the data representing the motion corresponding to the motion vector may be generated by comparing the image frames before and after the generated video.

表示制御手段としての映像処理部40は、特定の周期に従って右眼用映像、左眼用映像のどちらを表示するかを表す表示種別情報を決定し、表示する映像を映像表示部60に出力する。右眼用映像、左眼用映像の2つの映像を交互に表示するために、通常は右眼用映像、左眼用映像の2つの映像を撮影時の2倍の速度で表示する。   The video processing unit 40 as display control means determines display type information indicating whether to display a right-eye video or a left-eye video according to a specific cycle, and outputs the video to be displayed to the video display unit 60. . In order to alternately display the two images of the right-eye image and the left-eye image, the two images of the right-eye image and the left-eye image are usually displayed at twice the speed at the time of shooting.

映像処理部40はまた、撮影方式判定部70からの情報を基に右眼用映像又は左眼用映像のどちらかをそのまま表示する代わりに、右眼用映像もしくは左眼用映像について複数の映像フレームから合成した映像を生成して表示する。複数の映像フレームからの映像の合成には、例えば映像中の物体の動きの大きさ、方向を基に、その動きの途中の位置に物体がある映像を合成するといった処理を行う。   The video processing unit 40 also displays a plurality of videos for the right-eye video or the left-eye video instead of directly displaying either the right-eye video or the left-eye video based on the information from the imaging method determination unit 70. Generate and display the synthesized video from the frame. For synthesizing video from a plurality of video frames, for example, based on the magnitude and direction of the motion of an object in the video, processing is performed such as synthesizing a video with the object at a position in the middle of the motion.

映像処理部40はまた、撮影方式判定部70からの情報を基に右眼用映像及び左眼用映像を表示する周期を短くして表示速度を速めることにより、表示する映像フレーム数を増やして映像を表示する。   The video processing unit 40 also increases the number of video frames to be displayed by shortening the cycle for displaying the right-eye video and the left-eye video based on the information from the imaging method determination unit 70 and increasing the display speed. Display video.

映像切換指示部50は、映像処理部40で決定した表示種別情報を基に右眼用映像及び左眼用映像それぞれをメガネ3で遮断して見えなくするかどうかを表す信号を送信する。映像表示部60は映像処理部40から渡された映像を表示するものであり、液晶パネル等によって構成されている。   The video switching instruction unit 50 transmits a signal indicating whether the right-eye video and the left-eye video are blocked by the glasses 3 based on the display type information determined by the video processing unit 40 to be invisible. The video display unit 60 displays the video delivered from the video processing unit 40, and is configured by a liquid crystal panel or the like.

撮影方式判定部70は、右眼用映像データデコード部20及び左眼用映像データデコード部30から複数フレームの左眼用映像及び右眼用映像を受け取る。撮影方式判定部70は、受け取った複数フレームの左眼用映像及び右眼用映像に基づいて、各対の左眼用映像及び右眼用映像がそれぞれ同時に撮影されたものであるか所定の時間差で交互に撮影されたものであるかを判定する。なお、以下では、各対の左眼用映像及び右眼用映像がそれぞれ同時に撮影されたもののことを、「左右同時」と略称する場合がある。また、各対の左眼用映像及び右眼用映像が所定の時間差で交互に撮影されたもののことを、「左右交互」と略称する場合がある。   The imaging method determination unit 70 receives a plurality of frames of left-eye video and right-eye video from the right-eye video data decoding unit 20 and the left-eye video data decoding unit 30. The imaging method determination unit 70 determines whether each pair of left-eye video and right-eye video is simultaneously shot based on the received multiple-frame left-eye video and right-eye video. It is determined whether or not the images were taken alternately. In the following description, a pair of left-eye video and right-eye video that are simultaneously captured may be abbreviated as “simultaneous left and right”. In addition, a pair of left-eye video and right-eye video captured alternately with a predetermined time difference may be abbreviated as “left-right alternating”.

図2は本実施形態における撮影方式判定部70による処理を示すフローチャートである。撮影方式判定部70は、左眼用映像データデコード部30から、動きベクトルが上又は下方向の領域に関し、動きベクトルの値、領域の位置、及び当該領域を含む領域の左眼用映像を含む情報である左眼用判定映像情報を取得する(S210)。次に、撮影方式判定部70は、右眼用映像データデコード部20から、左眼用判定映像情報に対応する領域の情報として右眼用判定映像情報を取得する(S220)。   FIG. 2 is a flowchart showing processing by the photographing method determination unit 70 in the present embodiment. The imaging method determination unit 70 includes, from the left-eye video data decoding unit 30, the motion vector value, the position of the region, and the left-eye video of the region including the region with respect to the region where the motion vector is upward or downward. The left-eye determination video information, which is information, is acquired (S210). Next, the imaging method determination unit 70 acquires right-eye determination video information as information on a region corresponding to the left-eye determination video information from the right-eye video data decoding unit 20 (S220).

本実施形態では、左眼用判定映像情報に対応する領域として、例えば以下の(1)〜(3)の条件を満たす領域を検出する。
(1)左眼用判定映像情報が表す領域の位置を基準として、右方向に表示画面上のサイズで65mm(一般的な人の両眼の間隔)までの範囲。
(2)左眼用判定映像情報が表す領域の位置を基準として、上下方向の範囲が動きベクトルの値以上の特定の範囲。
(3)左眼用判定映像情報に含まれる動きベクトルとほぼ同じ動きベクトルを持つ領域。
In the present embodiment, for example, a region that satisfies the following conditions (1) to (3) is detected as a region corresponding to the left-eye determination video information.
(1) The range on the display screen in the right direction up to 65 mm (a general interval between both eyes of a person) on the basis of the position of the region represented by the left-eye determination video information.
(2) A specific range in which the range in the vertical direction is equal to or greater than the value of the motion vector with reference to the position of the region represented by the left-eye determination video information.
(3) A region having substantially the same motion vector as the motion vector included in the left-eye determination video information.

S220では、上記(1)〜(3)の全ての条件を満たす領域を検出して、その領域に関する右眼用判定映像情報を取得する。なお、上記(2)では、人が無限遠にある物体として立体的に認識可能な視差の値である、一般的な人の両眼の間隔(65mm)を検出範囲の条件に含めているが、表示する映像の視差の最大値があらかじめ分かっている場合は、その値を使用しても良い。   In S220, a region satisfying all the above conditions (1) to (3) is detected, and right-eye determination video information relating to the region is acquired. In the above (2), the detection range condition includes a general human eye distance (65 mm), which is a parallax value that can be three-dimensionally recognized as an object at infinity. If the maximum parallax value of the video to be displayed is known in advance, that value may be used.

次に、撮影方式判定部70は、左眼用判定映像情報と右眼用判定映像情報の映像を比較する(S230)。この比較の結果、各々の映像中で同一の物体を指す領域の上下方向の位置がほぼ同じ場合には、処理はS250に進み、それ以外の場合はS260に進む。   Next, the imaging method determination unit 70 compares the left-eye determination video information and the right-eye determination video information (S230). As a result of the comparison, if the vertical positions of the regions pointing to the same object in each video are substantially the same, the process proceeds to S250, and otherwise the process proceeds to S260.

S250においては、撮影方式判定部70は、撮影時のタイミングが左右同時である撮影方式(偏波分割方式に対応した撮影方式)と判定し、その判定結果を映像処理部40に対して通知する。映像処理部40は撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)の場合、右眼用映像もしくは左眼用映像のどちらかについて複数の映像フレームから合成した映像を生成して表示する。   In S250, the shooting method determination unit 70 determines that the shooting method is a shooting method in which left and right timing is the same (shooting method corresponding to the polarization division method), and notifies the video processing unit 40 of the determination result. . The video processing unit 40 generates a video synthesized from a plurality of video frames for either the right-eye video or the left-eye video when the timing at the time of shooting is the left and right simultaneously (shooting method corresponding to the polarization splitting method). To display.

S260においては、撮影方式判定部70は、撮影時のタイミングが左右交互である撮影方式(時分割方式に対応した撮影方式)と判定し、その判定結果を映像処理部40に対して通知する。映像処理部40は撮影時のタイミングが左右交互(時分割方式に対応した撮影方式)の場合、映像の生成を行わず、右眼用映像及び左眼用映像をそのまま表示する。   In S <b> 260, the shooting method determination unit 70 determines that the shooting method is a shooting method whose shooting timing is alternated between right and left (shooting method corresponding to the time division method), and notifies the video processing unit 40 of the determination result. The video processing unit 40 displays the right-eye video and the left-eye video as they are without generating a video when the timing at the time of shooting is alternate between left and right (shooting method corresponding to the time division method).

図4に判定用映像の例を示す。左眼用映像Lは時間的にL1,L2,L3の順に推移する映像である。左眼用映像Lに含まれる円形オブジェクト410は下方向に2単位ずつ移動しているものとする。範囲411は左眼用映像L内で円形オブジェクト410を基準として上記(1)〜(3)の条件を満たす領域の範囲である。範囲411は円形オブジェクト410を基準として右方向に画面上のサイズで65mmまで、左方向に画面上のサイズで120mmまで、上下方向に円形オブジェクト410の動きを表す動きベクトルの値である2単位までの範囲である。   FIG. 4 shows an example of the determination video. The left-eye video L is a video that changes temporally in the order of L1, L2, and L3. It is assumed that the circular object 410 included in the left-eye video L has moved downward by 2 units. A range 411 is a range of a region that satisfies the above conditions (1) to (3) with the circular object 410 as a reference in the video L for the left eye. The range 411 is based on the circular object 410, up to 65 mm in the size on the screen in the right direction, up to 120 mm in the size on the screen in the left direction, and up to 2 units that are motion vector values representing the movement of the circular object 410 in the vertical direction. Range.

右眼用映像RPは左眼用映像Lと同期して同時に撮影した映像であり、時間的にRP1,RP2,RP3の順に推移する映像である。撮影方式判定部70は左眼用映像Lの円形オブジェクト410に対応する領域として、範囲411に対応する右眼用映像RP内の範囲421から動きベクトルが円形オブジェクト410と同じである円形オブジェクト420を含む領域を取得する。撮影方式判定部70は円形オブジェクト410と円形オブジェクト420を含む領域の画像からオブジェクトの上下方向の位置を比較する。このとき、下方向に移動する物体の上下方向の位置がほぼ同じため、左眼用映像Lと右眼用映像RPは左右同時に撮影したものと判定される。
なお、上記した例においては左眼用映像と右眼用映像との関係を逆にしても良い。
The right-eye video RP is a video that is simultaneously captured in synchronization with the left-eye video L, and is a video that changes temporally in the order of RP1, RP2, and RP3. The shooting method determination unit 70 sets a circular object 420 having the same motion vector as that of the circular object 410 from the range 421 in the right-eye video RP corresponding to the range 411 as an area corresponding to the circular object 410 of the left-eye video L. Get the containing area. The shooting method determination unit 70 compares the position of the object in the vertical direction from the image of the area including the circular object 410 and the circular object 420. At this time, since the vertically moving positions of the objects moving downward are substantially the same, it is determined that the left-eye video L and the right-eye video RP are taken at the same time on the left and right.
In the example described above, the relationship between the left-eye video and the right-eye video may be reversed.

右眼用映像RSは左眼用映像Lと交互に撮影した映像であり、時間的にRS1,RS2,RS3の順に推移する映像である。撮影方式判定部70は左眼用映像Lの円形オブジェクト410に対応する領域として、範囲411に対応する右眼用映像RS内の範囲431から動きベクトルが円形オブジェクト410と同じである円形オブジェクト430を含む領域を取得する。撮影方式判定部70は円形オブジェクト410と円形オブジェクト430を含む領域の画像からオブジェクトの上下方向の位置を比較する。このとき、上下方向の位置が異なるため、左眼用映像Lと右眼用映像RSは左右交互に撮影したものと判定される。   The right-eye video RS is a video that is alternately captured with the left-eye video L, and is a video that changes in the order of RS1, RS2, and RS3 in time. The imaging method determination unit 70 selects a circular object 430 having the same motion vector as that of the circular object 410 from the range 431 in the right-eye video RS corresponding to the range 411 as an area corresponding to the circular object 410 of the left-eye video L. Get the containing area. The shooting method determination unit 70 compares the vertical position of the object from the image of the area including the circular object 410 and the circular object 430. At this time, since the positions in the vertical direction are different, it is determined that the left-eye video L and the right-eye video RS are captured alternately on the left and right.

図5は本実施形態における映像処理部40の処理を示すフローチャートである。映像処理部40はまず、撮影方式判定部70が通知する撮影方式を示す情報を取得する(S510)。次に、映像処理部40は撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)か否かを判定する(S540)。ここで、左右同時の場合はS550に進み、それ以外の場合はS560に進む。   FIG. 5 is a flowchart showing the processing of the video processing unit 40 in the present embodiment. First, the video processing unit 40 acquires information indicating the shooting method notified by the shooting method determination unit 70 (S510). Next, the video processing unit 40 determines whether or not the timing at the time of shooting is the same at the left and right (shooting method corresponding to the polarization splitting method) (S540). Here, in the case of simultaneous left and right, the process proceeds to S550, and in other cases, the process proceeds to S560.

S550において、映像処理部40は右眼用映像もしくは左眼用映像のいずれか一方について複数の映像フレームから合成した映像を順次生成するとともに、他方の映像と交互に表示する。S560においては、映像処理部40は映像の生成を行わず、右眼用映像、及び左眼用映像をそのまま表示する。   In S550, the video processing unit 40 sequentially generates a video synthesized from a plurality of video frames for either the right-eye video or the left-eye video, and alternately displays the video with the other video. In S560, the video processing unit 40 does not generate a video and displays the right-eye video and the left-eye video as they are.

以上説明したように、本実施形態によれば、立体映像の撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)か左右交互(時分割方式に対応した撮影方式)かを判定することができる。そしてその判定結果に応じた、立体映像の右眼用映像及び左眼用映像の表示を行うことができる。   As described above, according to the present embodiment, it is determined whether the timing at the time of shooting a stereoscopic image is the left and right at the same time (shooting method corresponding to the polarization division method) or the left and right alternate (shooting method corresponding to the time division method). can do. Then, it is possible to display the right-eye video and the left-eye video of the stereoscopic video according to the determination result.

なお、立体映像表示装置が左右眼用の映像を同時に表示する装置の場合は、撮影方式判定部70の判定結果に基づいて行う動作が逆となる。即ち左右同時と判定した場合は、右眼用映像及び左眼用映像をそのまま表示し、左右交互と判定した場合は、右眼用映像もしくは左眼用映像のどちらかについて複数の映像フレームから合成した映像を生成して表示する。   Note that, when the stereoscopic video display device is a device that displays images for the left and right eyes simultaneously, the operation performed based on the determination result of the imaging method determination unit 70 is reversed. That is, when it is determined that the left and right images are the same, the right-eye video and the left-eye video are displayed as they are. When it is determined that the left and right are alternate, either the right-eye video or the left-eye video is synthesized from a plurality of video frames. Generate and display the video.

また、S550及びS560において、映像処理部40は撮影方式を示す情報に基づいて映像の生成を行うか否かの処理を行っているが、表示する映像フレーム数の切り換えを行っても良い。即ち、立体映像を時分割で左右交互に表示する立体映像表示装置において、撮影時のタイミングが左右交互(時分割方式に対応した撮影方式)の場合は、映像コンテンツの映像フレーム数を増やさず、左右で2つの映像フレームを撮影時の2倍の速度で表示する。   In S550 and S560, the video processing unit 40 performs processing to determine whether or not to generate a video based on information indicating the shooting method. However, the number of video frames to be displayed may be switched. That is, in a stereoscopic video display device that displays stereoscopic video alternately in left and right in a time-sharing manner, if the timing at the time of shooting is alternating left and right (shooting method corresponding to the time-division method), the number of video frames of the video content is not increased, Two video frames are displayed on the left and right at twice the speed of shooting.

撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)と判定された場合、表示する映像フレーム数を増やして、左右映像で2つの映像フレームを4、6、・・・、2n倍の速度で表示する。   If it is determined that the timing at the time of shooting is simultaneous left and right (shooting method corresponding to the polarization splitting method), the number of video frames to be displayed is increased, and two video frames are displayed on the left and right images as 4, 6,. Display at double speed.

図6は本実施形態における映像処理部40によって実行される表示する映像フレーム数を切り換える処理を示すフローチャートである。S610、S640、及びS660はそれぞれ、図5のS510、S540、及びステップS560と同じ処理を表す。S650において、映像処理部40は表示映像フレーム数を増やして表示を行う。即ち、映像処理部40は、各対の左眼用映像及び右眼用映像が同時に撮影されたものであると判定された場合、通常のフレームレートのN倍(Nは2以上の自然数)のフレームレートで、入力した各フレームの左眼用映像と右眼用映像とを交互に表示する。   FIG. 6 is a flowchart showing processing for switching the number of video frames to be displayed, which is executed by the video processing unit 40 in the present embodiment. S610, S640, and S660 represent the same processes as S510, S540, and step S560 of FIG. 5, respectively. In S650, the video processing unit 40 performs display by increasing the number of display video frames. That is, when it is determined that the video for the left eye and the video for the right eye are captured at the same time, the video processing unit 40 is N times the normal frame rate (N is a natural number of 2 or more). The left-eye video and the right-eye video of each input frame are alternately displayed at the frame rate.

図7は立体映像を時分割で左右交互に表示する立体映像表示装置において、撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)であると判定した場合の処理を示す図である。具体的には同図は、表示する映像フレーム数を3倍に増やして6倍速で表示する場合の映像と時間の関係を表している。右眼用映像、左眼用映像を同時に撮影する場合、時間軸に対して撮影時の左眼用映像は711、712、713、右眼用映像は721、722、723のようになる。   FIG. 7 is a diagram illustrating processing when it is determined that the timing at the time of shooting is the left and right at the same time (shooting method corresponding to the polarization division method) in a stereoscopic image display device that alternately displays left and right stereoscopic images in a time division manner. is there. Specifically, the figure shows the relationship between video and time when the number of video frames to be displayed is tripled and displayed at 6x speed. When the right-eye video and the left-eye video are simultaneously shot, the left-eye video at the time of shooting with respect to the time axis is 711, 712, 713, and the right-eye video is 721, 722, 723.

撮影方式判定部70により左右同時に撮影したものと判定すると映像処理部40は表示する映像フレーム数を3倍にする。即ち撮影時の左眼用映像711を、表示用の左眼用映像として731,732,733のタイミングで表示する。また撮影時の右眼用映像721を、表示用の右眼用映像として741,742,743のタイミングで表示する。このように、左右交互に表示する立体映像表示装置において、表示する映像のフレームレートを増加させることにより、左右同時に近いタイミングで映像を表示することができる。   If it is determined by the shooting method determination unit 70 that the left and right images have been shot simultaneously, the video processing unit 40 triples the number of video frames to be displayed. That is, the left-eye image 711 at the time of shooting is displayed as the left-eye image for display at the timings 731, 732, and 733. The right-eye video 721 at the time of shooting is displayed as the right-eye video for display at timings 741, 742, and 743. In this way, in a stereoscopic video display device that alternately displays left and right, by increasing the frame rate of the video to be displayed, the video can be displayed at a timing close to the left and right simultaneously.

[実施形態2]
本発明の第2の実施形態では、フェードイン等で輝度が変化する映像を使って撮影、制作時の方式を判別する立体映像表示装置について説明する。本実施形態における立体映像表示装置の構成は実施形態1(図1)と同じである。
[Embodiment 2]
In the second embodiment of the present invention, a stereoscopic video display device that uses a video whose brightness changes due to fade-in or the like to determine a method for shooting and production will be described. The configuration of the stereoscopic video display device in the present embodiment is the same as that in the first embodiment (FIG. 1).

図8は本実施形態における撮影方式判定部70による処理を示すフローチャートである。まず、撮影方式判定部70は、左眼用映像データデコード部30から、輝度が変化している領域の位置、輝度変化量、及び輝度が変化している領域の平均輝度を含む情報である左眼用輝度変化情報を取得する(S810)。輝度変化の有無、及び輝度変化量には映像符号化技術H.264/AVC(Advanced Video Coding)における重み付き予測の重み係数を使用しても良い。また全画面に亘って輝度が変化している場合には左眼用輝度変化情報を単に全画面の平均輝度としてもよい。   FIG. 8 is a flowchart showing processing by the photographing method determination unit 70 in the present embodiment. First, the imaging method determination unit 70 receives information from the left-eye video data decoding unit 30 that includes the position of the area where the luminance changes, the amount of luminance change, and the average luminance of the area where the luminance changes. Eye luminance change information is acquired (S810). The presence or absence of luminance change and the amount of luminance change are described in video encoding technology H.264. A weighting factor for weighted prediction in H.264 / AVC (Advanced Video Coding) may be used. If the luminance changes over the entire screen, the luminance change information for the left eye may be simply used as the average luminance of the entire screen.

次に、撮影方式判定部70は右眼用映像データデコード部20から左眼用輝度変化情報に対応する領域の情報として右眼用輝度変化情報を取得する(S820)。左眼用輝度変化情報に対応する領域の条件は、例えば以下の通りである。
(1)左眼用輝度変化情報が表す領域の位置を基準として、右方向の表示画面上のサイズで65mm(一般的な人の両眼の間隔)までの範囲。
(2)左眼用輝度変化情報に含まれる輝度変化量とほぼ同じ輝度変化量を持つ領域。
Next, the imaging method determination unit 70 acquires right-eye luminance change information as information on a region corresponding to the left-eye luminance change information from the right-eye video data decoding unit 20 (S820). The conditions of the area corresponding to the left eye luminance change information are, for example, as follows.
(1) A range up to 65 mm (a general interval between both eyes of a person) in the size on the display screen in the right direction on the basis of the position of the region represented by the left eye luminance change information.
(2) An area having a luminance change amount substantially the same as the luminance change amount included in the left eye luminance change information.

なお、左眼用輝度変化情報を全画面の平均輝度とした場合は、上記条件によらず右眼用輝度変化情報を右眼用映像の全画面の平均輝度としてもよい。   Note that when the luminance change information for the left eye is the average luminance of the entire screen, the luminance change information for the right eye may be the average luminance of the entire screen of the right eye image regardless of the above conditions.

次に、撮影方式判定部70は、左眼用輝度変化情報と右眼用輝度変化情報の平均輝度を比較する(S830)。S840において、左眼用輝度変化情報と右眼用輝度変化情報の平均輝度がほぼ同じ場合、処理はS850に進み、それ以外の場合はS860に進む。S850及びS860はそれぞれ、図2のS250及びS260と同じ処理を表す。   Next, the imaging method determination unit 70 compares the average luminance of the left-eye luminance change information and the right-eye luminance change information (S830). In S840, when the average luminance of the left-eye luminance change information and the right-eye luminance change information is substantially the same, the process proceeds to S850, and otherwise, the process proceeds to S860. S850 and S860 represent the same processes as S250 and S260 of FIG. 2, respectively.

図3に本実施形態における判定用輝度の例を示す。左眼用輝度BLは左眼用映像における全画面の平均輝度を表し、時間的にBL1,BL2,BL3の順に推移する。BL1,BL2,BL3での平均輝度の値は2,4,6であり、2単位ずつ明るくなっていく映像になっている。右眼用輝度BRPは左眼用映像と同期して撮影した映像の全画面の平均輝度を表し、時間的にBRP1,BRP2,BRP3の順に推移し、それぞれBL1,BL2,BL3に対応する。BRP1,BRP2,BRP3での平均輝度の値は2,4,6となり、左眼用輝度BLと同様に2単位ずつ明るくなっていく映像になっている。BL1とBRP1のように対応する2つの映像の平均輝度を比較し、両方の平均輝度が2でほぼ同じであるため左右同時に撮影した映像と判定する。   FIG. 3 shows an example of the determination brightness in this embodiment. The left-eye luminance BL represents the average luminance of the entire screen in the left-eye video, and temporally changes in the order of BL1, BL2, and BL3. The average brightness values of BL1, BL2, and BL3 are 2, 4, and 6, respectively, and the image is brightened by 2 units. The right-eye luminance BRP represents the average luminance of the entire screen of the video captured in synchronization with the left-eye video, and temporally changes in the order of BRP1, BRP2, and BRP3, and corresponds to BL1, BL2, and BL3, respectively. The average luminance values at BRP1, BRP2, and BRP3 are 2, 4, and 6, respectively, and the image becomes brighter by two units as with the left-eye luminance BL. The average luminances of two corresponding images such as BL1 and BRP1 are compared, and since both average luminances are approximately the same at 2, it is determined that the images are taken simultaneously at the left and right.

右眼用輝度BRSは左眼用映像と交互に撮影した映像の全画面の平均輝度を表し、時間的にBRS1,BRS2,BRS3の順に推移し、それぞれBL1,BL2,BL3に対応する。BRS1,BRS2,BRS3での平均輝度の値は3,5,7となり、左眼用輝度BLと同様に2単位ずつ明るくなっていく映像になっている。BL1とBRS1のように対応する2つの映像の平均輝度を比較し、それぞれの平均輝度が2と3で異なっているため左右交互に撮影した映像と判定する。   The right-eye luminance BRS represents the average luminance of the entire screen of the video alternately captured with the left-eye video, and temporally changes in the order of BRS1, BRS2, and BRS3, and corresponds to BL1, BL2, and BL3, respectively. The average luminance values at BRS1, BRS2, and BRS3 are 3, 5, and 7, respectively, and the image becomes brighter by two units as with the left-eye luminance BL. The average luminances of two corresponding videos such as BL1 and BRS1 are compared, and since the average luminances are different between 2 and 3, it is determined that the video has been taken alternately left and right.

以上説明したように、本実施形態によれば、フェードイン等を行う立体映像の平均輝度が同じかどうかにより、撮影時のタイミングが左右同時(偏波分割方式に対応した撮影方式)か左右交互(時分割方式に対応した撮影方式)かを判定することができる。そして、この判定結果に基づいて立体映像の右眼用映像及び左眼用映像を表示することができる。   As described above, according to the present embodiment, depending on whether or not the average luminance of the stereoscopic video to be faded in is the same, the timing at the time of shooting is the left and right simultaneously (shooting method corresponding to the polarization division method) or left and right alternately It is possible to determine whether it is a photographing method corresponding to the time division method. Based on the determination result, the right-eye video and the left-eye video of the stereoscopic video can be displayed.

(他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
(Other embodiments)
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed. In this case, the program and the storage medium storing the program constitute the present invention.

Claims (7)

両眼視差を有する左眼用画像と右眼用画像とを時分割で交互に表示することで立体映像を表示する立体映像表示装置であって、
入力された複数フレームの左眼用画像及び右眼用画像に基づいて、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定する判定手段と、
前記判定手段により各対の左眼用画像及び右眼用画像が同時に撮影されたものであると判定された場合、左眼用画像又は右眼用画像のいずれか一方について複数のフレームから合成した画像を順次生成するとともに、他方の画像と交互に表示する表示制御手段と、
を有し、
前記判定手段は、前記複数フレームに亘る左眼用画像及び右眼用画像それぞれの輝度変化を比較することにより、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定することを特徴とする立体映像表示装置。
A stereoscopic video display device that displays a stereoscopic video by alternately displaying a left-eye image and a right-eye image having binocular parallax in a time-sharing manner,
Based on the input left-eye image and right-eye image of a plurality of frames, each pair of left-eye image and right-eye image was taken at the same time, or alternately taken at a predetermined time difference. A determination means for determining whether or not
When it is determined by the determination means that each pair of left-eye images and right-eye images is taken at the same time, either the left-eye image or the right-eye image is synthesized from a plurality of frames. Display control means for sequentially generating images and alternately displaying the other images;
Have
Whether the determination means has taken the left eye image and the right eye image at the same time by comparing the luminance changes of the left eye image and the right eye image over the plurality of frames. A stereoscopic image display device for determining whether or not images are alternately photographed at a predetermined time difference.
前記表示制御手段は、前記判定手段により各対の左眼用画像及び右眼用画像が所定の時間差で交互に撮影されたものであると判定された場合、前記合成を行わずに、入力された左眼用画像と右眼用画像とを交互に表示することを特徴とする請求項1に記載の立体映像表示装置。   The display control means is inputted without performing the synthesis when it is determined by the determination means that each pair of left-eye images and right-eye images are alternately photographed at a predetermined time difference. The stereoscopic image display apparatus according to claim 1, wherein the left-eye image and the right-eye image are alternately displayed. 両眼視差を有する左眼用画像と右眼用画像とを同じフレームで表示することで立体映像を表示する立体映像表示装置であって、
入力された複数フレームの左眼用画像及び右眼用画像に基づいて、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定する判定手段と、
前記判定手段により各対の左眼用画像及び右眼用画像が交互に撮影されたものであると判定された場合、左眼用画像又は右眼用画像のいずれか一方について複数のフレームから合成した画像を順次生成するとともに、他方の画像と同じフレームで表示する表示制御手段と、
を有し、
前記判定手段は、前記複数フレームに亘る左眼用画像及び右眼用画像それぞれの輝度変化を比較することにより、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定することを特徴とする立体映像表示装置。
A stereoscopic video display device that displays a stereoscopic video by displaying a left-eye image and a right-eye image having binocular parallax in the same frame,
Based on the input left-eye image and right-eye image of a plurality of frames, each pair of left-eye image and right-eye image was taken at the same time, or alternately taken at a predetermined time difference. A determination means for determining whether or not
When it is determined by the determination means that each pair of left-eye images and right-eye images is alternately captured, either the left-eye image or the right-eye image is synthesized from a plurality of frames. Display control means for sequentially generating the displayed images and displaying them in the same frame as the other image;
Have
Whether the determination means has taken the left eye image and the right eye image at the same time by comparing the luminance changes of the left eye image and the right eye image over the plurality of frames. A stereoscopic image display device for determining whether or not images are alternately photographed at a predetermined time difference.
前記表示制御手段は、前記判定手段により各対の左眼用画像及び右眼用画像が同時に撮影されたものであると判定された場合、前記合成を行わずに、入力された左眼用画像と右眼用画像とを同じフレームで表示することを特徴とする請求項3に記載の立体映像表示装置。 The display control means, when it is determined by the determination means that each pair of left-eye images and right-eye images is taken at the same time, the input left-eye image without performing the synthesis The stereoscopic image display apparatus according to claim 3, wherein the right-eye image and the right-eye image are displayed in the same frame . 両眼視差を有する左眼用画像と右眼用画像とを時分割で交互に表示することで立体映像を表示する立体映像表示装置の制御方法であって、
判定手段が、入力された複数フレームの左眼用画像及び右眼用画像に基づいて、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定する判定ステップと、
表示制御手段が、前記判定ステップで各対の左眼用画像及び右眼用画像が同時に撮影されたものであると判定された場合、左眼用画像又は右眼用画像のいずれか一方について複数のフレームから合成した画像を順次生成するとともに、他方の画像と交互に表示する表示制御ステップと、
を有し、
前記判定ステップにおいて、前記判定手段が、前記複数フレームに亘る左眼用画像及び右眼用画像それぞれの輝度変化を比較することにより、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定することを特徴とする立体映像表示装置の制御方法。
A control method for a stereoscopic video display device that displays a stereoscopic video by alternately displaying a left-eye image and a right-eye image having binocular parallax in a time-sharing manner,
Based on the input left-eye image and right-eye image of the plurality of frames, the determination means is that each pair of left-eye image and right-eye image is taken simultaneously or alternately with a predetermined time difference. A determination step for determining whether the image was taken
If the display control means determines that each pair of left-eye image and right-eye image is taken at the same time in the determination step, a plurality of either the left-eye image or the right-eye image A display control step for sequentially generating images synthesized from the frames and displaying the images alternately with the other image;
Have
In the determination step, the determination unit compares the luminance changes of the left-eye image and the right-eye image over the plurality of frames, so that the left-eye image and the right-eye image are simultaneously captured. A control method for a stereoscopic image display apparatus, wherein it is determined whether the image is captured or alternately photographed at a predetermined time difference.
両眼視差を有する左眼用画像と右眼用画像とを同じフレームで表示することで立体映像を表示する立体映像表示装置の制御方法であって、
判定手段が、入力された複数フレームの左眼用画像及び右眼用画像に基づいて、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定する判定ステップと、
表示制御手段が、前記判定ステップで各対の左眼用画像及び右眼用画像が交互に撮影されたものであると判定された場合、左眼用画像又は右眼用画像のいずれか一方について複数のフレームから合成した画像を順次生成するとともに、他方の画像と同じフレームで表示する表示制御ステップと、
を有し、
前記判定ステップにおいて、前記判定手段が、前記複数フレームに亘る左眼用画像及び右眼用画像それぞれの輝度変化を比較することにより、各対の左眼用画像及び右眼用画像が同時に撮影されたものであるか、所定の時間差で交互に撮影されたものであるかを判定することを特徴とする立体映像表示装置の制御方法。
A control method of a stereoscopic video display device that displays a stereoscopic video by displaying a left-eye image and a right-eye image having binocular parallax in the same frame,
Based on the input left-eye image and right-eye image of the plurality of frames, the determination means is that each pair of left-eye image and right-eye image is taken simultaneously or alternately with a predetermined time difference. A determination step for determining whether the image was taken
When the display control unit determines in the determination step that each pair of left-eye images and right-eye images is alternately captured, either the left-eye image or the right-eye image is displayed. A display control step of sequentially generating an image synthesized from a plurality of frames and displaying the same frame as the other image;
Have
In the determination step, the determination unit compares the luminance changes of the left-eye image and the right-eye image over the plurality of frames, so that the left-eye image and the right-eye image are simultaneously captured. A control method for a stereoscopic image display apparatus, wherein it is determined whether the image is captured or alternately photographed at a predetermined time difference.
コンピュータを、請求項1乃至4のいずれか1項に記載の立体映像表示装置が有する各手段として機能させるためのプログラム。   The program for functioning a computer as each means which the three-dimensional video display apparatus of any one of Claims 1 thru | or 4 has.
JP2010226059A 2010-10-05 2010-10-05 3D image display apparatus and control method thereof Expired - Fee Related JP5700998B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010226059A JP5700998B2 (en) 2010-10-05 2010-10-05 3D image display apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010226059A JP5700998B2 (en) 2010-10-05 2010-10-05 3D image display apparatus and control method thereof

Publications (3)

Publication Number Publication Date
JP2012080469A JP2012080469A (en) 2012-04-19
JP2012080469A5 JP2012080469A5 (en) 2013-11-14
JP5700998B2 true JP5700998B2 (en) 2015-04-15

Family

ID=46240160

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010226059A Expired - Fee Related JP5700998B2 (en) 2010-10-05 2010-10-05 3D image display apparatus and control method thereof

Country Status (1)

Country Link
JP (1) JP5700998B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019195123A (en) * 2018-05-01 2019-11-07 オリンパス株式会社 Endoscope apparatus, control method of the same, control program, and recording medium
WO2020100215A1 (en) * 2018-11-13 2020-05-22 オリンパス株式会社 Image capturing device, image correction method, and image correction program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4827783B2 (en) * 2007-03-30 2011-11-30 三洋電機株式会社 Image display device
JP2010062695A (en) * 2008-09-02 2010-03-18 Sony Corp Image processing apparatus, image processing method, and program

Also Published As

Publication number Publication date
JP2012080469A (en) 2012-04-19

Similar Documents

Publication Publication Date Title
JP5127633B2 (en) Content playback apparatus and method
US8384766B2 (en) Apparatus for processing a stereoscopic image stream
JP5933931B2 (en) Method for displaying setting menu and corresponding device
JP4827783B2 (en) Image display device
JP2010062695A (en) Image processing apparatus, image processing method, and program
WO2015161541A1 (en) Parallel synchronous scaling engine and method for multi-view point naked eye 3d display
JP4748251B2 (en) Video conversion method and video conversion apparatus
JP5396877B2 (en) Image processing apparatus, program, image processing method, and recording method
JP5325341B2 (en) 3D image processing apparatus and method, and 3D image display apparatus
JP5700998B2 (en) 3D image display apparatus and control method thereof
US9113140B2 (en) Stereoscopic image processing device and method for generating interpolated frame with parallax and motion vector
JP4815004B2 (en) Multi-view image encoding device
JP2014207492A (en) Stereoscopic image display device
JP5478728B2 (en) 3D image processing apparatus and method, and 3D image display apparatus
KR100322727B1 (en) Method and system for converting two-dimensional/stereo images
WO2011114745A1 (en) Video playback device
WO2012117464A1 (en) Three-dimensional video processing device and method, and three-dimensional video display device
WO2012117462A1 (en) Three-dimensional video processing device and method, and three-dimensional video display device
JP2011146869A (en) Video viewing device, and method of controlling the same
US7126990B2 (en) Method and apparatus for controlling a stereo video display with non-stereo video source
US8902286B2 (en) Method and apparatus for detecting motion vector, and method and apparatus for processing image signal
JP2011103504A (en) Stereoscopic display device, stereoscopic display method and stereoscopic display system
TWI502959B (en) Method and apparatus for compensating dynamic 3d images
JP5759728B2 (en) Information processing apparatus, information processing apparatus control method, and program
CN113747139A (en) High-definition 3D implementation method, device, equipment and storage medium based on mobile platform

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131002

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131002

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140502

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141212

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150119

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150217

R151 Written notification of patent or utility model registration

Ref document number: 5700998

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees