JP2013165306A - Stereoscopic video display device - Google Patents

Stereoscopic video display device Download PDF

Info

Publication number
JP2013165306A
JP2013165306A JP2010125585A JP2010125585A JP2013165306A JP 2013165306 A JP2013165306 A JP 2013165306A JP 2010125585 A JP2010125585 A JP 2010125585A JP 2010125585 A JP2010125585 A JP 2010125585A JP 2013165306 A JP2013165306 A JP 2013165306A
Authority
JP
Japan
Prior art keywords
eye
motion vector
vector
scroll
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010125585A
Other languages
Japanese (ja)
Inventor
Tomoko Morita
友子 森田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2010125585A priority Critical patent/JP2013165306A/en
Priority to PCT/JP2011/003050 priority patent/WO2011152039A1/en
Publication of JP2013165306A publication Critical patent/JP2013165306A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/10—Special adaptations of display systems for operation with variable images
    • G09G2320/106—Determination of movement vectors or equivalent parameters within the image
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream

Abstract

PROBLEM TO BE SOLVED: To provide a stereoscopic video display device which can correct a motion vector at a screen end, and a motion vector when a scroll video and a scene change are caused on the basis of a result of detection of a left eye motion vector and detection of a right eye motion vector.SOLUTION: A stereoscopic video display device for allowing an image observed by right and left eyes to be stereoscopically viewed by using parallax of the image includes: a motion vector detection section for inputting left eye and right eye videos and detecting a motion vector; a parallax detection section for detecting a parallax between right and left images; a vector comparison section for comparing a right eye motion vector and a left eye motion vector in response to the parallax between the right and left image, which is detected in the parallax detection section; a left eye vector correction section for correcting the left eye motion vector in response to a vector comparison result calculated in the vector comparison section; and a right eye vector correction section for correcting the right eye motion vector in response to the vector comparison result calculated in the vector comparison section.

Description

本発明は、立体映像表示装置に関し、左右画像のベクトルの検出性能を改善する装置に関するものである。   The present invention relates to a stereoscopic image display apparatus, and more particularly to an apparatus for improving the detection performance of a vector of left and right images.

動きベクトルを求める方法として、画面全体を複数のブロック（ブロックは例えば１６×１６画素で構成される）に分割して現フレームの注目ブロックと複数の候補ベクトルが指し示す過去フレームのブロックの映像信号レベルの差分絶対値のブロック合計値を求め、差分絶対値のブロック合計値が最小となる過去フレームのブロックに対応する候補ベクトルを動きベクトルとするブロックマッチング法が一般的に知られている。   As a method for obtaining a motion vector, the entire screen is divided into a plurality of blocks (the block is composed of, for example, 16 × 16 pixels), and the video signal level of the block of the past frame indicated by the target block of the current frame and the plurality of candidate vectors A block matching method is generally known in which a block total value of the difference absolute value is obtained, and a candidate vector corresponding to a block of a past frame that minimizes the block total value of the difference absolute value is used as a motion vector.

また、両眼視差を左右画像上での画素位置の変位として求める際に、左右の画像を２次元フーリエ変換し、その位相項のシフトマッチングによりいくつかの視差変位量の候補を算出した後に、左右画像のそれぞれについて被写体の輪郭抽出および領域決定を行い、これらの境界点の内側の点と外側の数点において２次元フーリエ変換を利用して求めた変位量候補との対応をとり、被写体および背景あるいはカメラからの距離の異なる複数の被写体に対応する両眼視差変位量を求めることを特徴とする両眼視差検出方法が示されている（例えば、特許文献１等）。   Also, when obtaining binocular parallax as the displacement of the pixel position on the left and right images, two-dimensional Fourier transform is performed on the left and right images, and after calculating several parallax displacement amount candidates by shift matching of the phase terms, For each of the left and right images, subject contour extraction and region determination are performed, and correspondence between displacement point candidates obtained using two-dimensional Fourier transform at the points inside and outside these boundary points is determined. A binocular parallax detection method characterized by obtaining binocular parallax displacement amounts corresponding to a plurality of subjects having different backgrounds or distances from the camera is disclosed (for example, Patent Document 1).

特開平１０−１９１３９４号公報Japanese Patent Laid-Open No. 10-191394

従来、現フレーム画像と過去フレーム画像を用いて動きベクトルを検出する際、現フレームの画面端に表示されている絵柄が過去フレームには存在しない、あるいは周辺領域のベクトル検出結果を注目領域のベクトル検出演算に用いるなどの要因で、画面端は正確な動きベクトルを求めることが困難であった。   Conventionally, when a motion vector is detected using the current frame image and the past frame image, the pattern displayed on the screen edge of the current frame does not exist in the past frame, or the vector detection result of the surrounding area is used as the vector of the attention area. Due to factors such as use in detection calculation, it is difficult for the screen edge to obtain an accurate motion vector.

また、立体映像入力の場合、左眼用動きベクトルは、左眼用映像の現フレーム画像と過去フレーム画像から求め、右眼用動きベクトルは、右眼用映像の現フレーム画像と過去フレーム画像から求めるため、それぞれ独立に動きベクトルが検出され、全画面のスクロールやシーンチェンジ等の検出は左右で検出タイミングが異なる場合があり、動きベクトルを用いた信号処理による左眼用映像出力と右眼用映像出力の画質が異質なものになるという課題があった。   In the case of stereoscopic video input, the left eye motion vector is obtained from the current frame image and the past frame image of the left eye video, and the right eye motion vector is obtained from the current frame image and the past frame image of the right eye video. Therefore, the motion vector is detected independently, and the detection timing of full screen scrolling, scene change, etc. may be different on the left and right. Video output for left eye and signal for right eye by signal processing using motion vector There was a problem that the image quality of the video output would be different.

本発明の第一の実施形態の立体映像表示装置は、左眼用映像を入力し左眼用動きベクトルを検出する左眼用動きベクトル検出部１と、右眼用映像を入力し右眼用動きベクトルを検出する右眼用動きベクトル検出部２と、左眼用映像と右眼用映像を入力し、左右画像間の視差を検出する視差検出部３と、視差検出部３で検出された左右画像間視差に基づいて左眼用動きベクトル検出部１で検出された左眼用動きベクトルと右眼用動きベクトル検出部２で検出された右眼用動きベクトルとを比較するベクトル比較部４と、ベクトル比較部４で算出されたベクトル比較結果に基づいて左眼用動きベクトルを補正する左眼用ベクトル補正部５と、ベクトル比較部４で算出されたベクトル比較結果に基づいて右眼用動きベクトルを補正する右眼用ベクトル補正部６を備える。   The stereoscopic video display apparatus according to the first embodiment of the present invention includes a left-eye motion vector detection unit 1 that inputs a left-eye video and detects a left-eye motion vector, and a right-eye video that receives a right-eye video. Detected by the right-eye motion vector detection unit 2 that detects a motion vector, the parallax detection unit 3 that receives the left-eye video and the right-eye video, and detects the parallax between the left and right images, and the parallax detection unit 3 A vector comparison unit 4 that compares the left-eye motion vector detected by the left-eye motion vector detection unit 1 with the right-eye motion vector detection unit 2 based on the parallax between the left and right images. And a left-eye vector correction unit 5 that corrects the left-eye motion vector based on the vector comparison result calculated by the vector comparison unit 4, and a right-eye use based on the vector comparison result calculated by the vector comparison unit 4. Right-eye vector for correcting motion vectors It includes a correction unit 6.

次に、本発明の第二の実施形態の立体映像表示装置は、左眼用映像を入力し左眼用動きベクトルを検出する左眼用動きベクトル検出部１と、左眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を左眼スクロールベクトルとして出力する左眼用ヒストグラム判定部１１と、左眼用ヒストグラム判定部１１がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する左眼用カウンタ１２と、左眼用カウンタ１２の値が閾値以上のとき、左眼用映像が全画面スクロールであると判定する左眼用スクロール判定部１３と、右眼用映像を入力し右眼用動きベクトルを検出する右眼用動きベクトル検出部２と、右眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を右眼スクロールベクトルとして出力する右眼用ヒストグラム判定部１４と、右眼用ヒストグラム判定部１４がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する右眼用カウンタ１５と、右眼用カウンタ１５の値が閾値以上のとき、右眼用映像が全画面スクロールであると判定する右眼用スクロール判定部１６と、左眼用スクロール判定部１３から出力される左眼スクロール判定と、右眼用スクロール判定部１６から出力される右眼スクロール判定と、左眼用ヒストグラム判定部１１が出力する左眼スクロールベクトルと、右眼用ヒストグラム判定部１４が出力する右眼スクロールベクトルを入力し、左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロールベクトルと右眼スクロールベクトルの値に基づいて補正スクロールベクトルを出力し、左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロール判定と右眼スクロール判定の少なくとも一方がスクロール状態のときに補正許可信号を出力する左右眼スクロール比較部１７と、左右眼スクロール比較部１７から出力される補正許可信号が許可状態のとき、左眼用動きベクトルを補正スクロールベクトルで補正する左眼用ベクトル補正部１８と、左右眼スクロール比較部１７から出力される補正許可信号が許可状態のとき、右眼用動きベクトルを補正スクロールベクトルで補正する右眼用ベクトル補正部１９を備える。   Next, the stereoscopic video display apparatus according to the second embodiment of the present invention includes a left-eye motion vector detection unit 1 that inputs a left-eye video and detects a left-eye motion vector, and a left-eye motion vector screen. A left-eye histogram determination unit 11 that calculates an entire histogram, determines whether the histogram concentration level is high, and outputs a vector value on which the histogram is concentrated as a left-eye scroll vector, and a left-eye histogram determination unit 11 The counter value increases when it is determined that the histogram concentration is high, and the counter value for the left eye 12 decreases when it is determined that the histogram concentration is not high. When the threshold is equal to or greater than the threshold, the left-eye scroll determination unit 13 determines that the left-eye video is full-screen scroll, and the right-eye video is input to detect the right-eye motion vector. The right-eye motion vector detection unit 2 calculates the histogram of the entire right-eye motion vector screen, determines whether the histogram is highly concentrated, and outputs the vector value where the histogram is concentrated as the right-eye scroll vector. When the right-eye histogram determination unit 14 and the right-eye histogram determination unit 14 determine that the histogram concentration level is high, the counter value increases, and the counter value is determined when the histogram concentration level is not high. The right-eye counter 15 that decreases in value, the right-eye scroll determination unit 16 that determines that the right-eye video is full-screen scroll when the value of the right-eye counter 15 is equal to or greater than the threshold, and the left-eye scroll Left-eye scroll determination output from the determination unit 13, right-eye scroll determination output from the right-eye scroll determination unit 16, and left-eye hiss When the left-eye scroll vector output from the gram determination unit 11 and the right-eye scroll vector output from the right-eye histogram determination unit 14 are input, and the left-eye scroll vector and the right-eye scroll vector are approximately equal, the left-eye scroll A corrected scroll vector is output based on the vector and right eye scroll vector values, and when the left eye scroll vector and the right eye scroll vector are substantially equal, at least one of the left eye scroll determination and the right eye scroll determination is in the scroll state. When the left-eye scroll comparison unit 17 that outputs a correction permission signal and the correction permission signal output from the left-eye scroll comparison unit 17 are in a permission state, the left-eye motion vector is corrected with the correction scroll vector. Output from the vector correction unit 18 and the left / right eye scroll comparison unit 17. A right eye vector correction unit 19 that corrects the right eye motion vector with the correction scroll vector when the correction permission signal is in the permitted state.

次に、本発明の第三の実施形態の立体映像表示装置は、左眼用映像を入力し、左眼用動きベクトルを検出し、同時に左眼用動きベクトルの正しさの指標である左眼動きベクトル確度を出力する左眼用動きベクトル検出部１と、左眼動きベクトル確度を入力し、画面全体の左眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する左眼用シーンチェンジ判定部２１と、右眼用映像を入力し右眼用動きベクトルを検出し、同時に右眼用動きベクトルの正しさの指標である右眼動きベクトル確度を出力する右眼用動きベクトル検出部２と、右眼動きベクトル確度を入力し、画面全体の右眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する右眼用シーンチェンジ判定部２２と、左眼シーンチェンジ判定部２１と右眼シーンチェンジ判定部２２の結果に基づいて、補正許可信号を出力する左右眼シーンチェンジ比較部２３と、左右眼シーンチェンジ比較部２３が出力する補正許可信号に基づいて、左眼用動きベクトルを補正する左眼用ベクトル補正部２４と、左右眼シーンチェンジ比較部２３が出力する補正許可信号に基づいて、右眼用動きベクトルを補正する右眼用ベクトル補正部２５を備える。   Next, the stereoscopic image display apparatus according to the third embodiment of the present invention inputs a left-eye image, detects a left-eye motion vector, and simultaneously detects the left-eye motion vector as an index of the correctness of the left-eye motion vector. Left-eye motion vector detection unit 1 that outputs motion vector accuracy, and left-eye motion vector accuracy are input, and a left-eye scene that is determined to be a scene change when the left-eye motion vector accuracy of the entire screen is equal to or less than a threshold value A change determination unit 21 and a right-eye motion vector detection unit that inputs a right-eye video, detects a right-eye motion vector, and outputs a right-eye motion vector accuracy that is an index of the correctness of the right-eye motion vector. 2 and the right-eye motion vector accuracy is input, and when the right-eye motion vector accuracy of the entire screen is equal to or less than the threshold value, a right-eye scene change determination unit 22 that determines a scene change, and a left-eye scene change determination unit 21 When Based on the result of the eye scene change determination unit 22, the left and right eye scene change comparison unit 23 that outputs a correction permission signal and the left eye motion vector based on the correction permission signal that the left and right eye scene change comparison unit 23 outputs. A left-eye vector correction unit 24 that corrects and a right-eye vector correction unit 25 that corrects a right-eye motion vector based on a correction permission signal output from the left-right eye scene change comparison unit 23 are provided.

本発明の立体映像表示装置によれば、画面端における動きベクトル検出性能が改善される。また、左眼用動きベクトル検出、右眼用動きベクトル検出の結果から、左右眼それぞれのスクロールやシーンチェンジ検出し、左右眼の検出結果に基づいて、左右眼用動きベクトルの双方を同様に補正することが可能である。 According to the stereoscopic video display apparatus of the present invention, the motion vector detection performance at the screen edge is improved. In addition, left and right eye scrolls and scene changes are detected from the left eye motion vector detection and right eye motion vector detection, and both left and right eye motion vectors are similarly corrected based on the left and right eye detection results. Is possible.

本発明の第一の実施の形態における立体映像表示装置のブロック図The block diagram of the three-dimensional-video display apparatus in 1st embodiment of this invention 本発明の第二の実施の形態における立体映像表示装置のブロック図The block diagram of the three-dimensional video display apparatus in 2nd embodiment of this invention 本発明の第三の実施の形態における立体映像表示装置のブロック図The block diagram of the three-dimensional video display apparatus in 3rd embodiment of this invention 本発明の立体映像表示装置における映像の表示の一例を示す図The figure which shows an example of the display of the image | video in the three-dimensional video display apparatus of this invention

（実施の形態１）
本発明の第一の実施形態の立体映像表示装置について説明する。図１に示すように、本発明の第一の実施形態の立体映像表示装置は、左眼用映像を入力して左眼用動きベクトルを出力する左眼用動きベクトル検出部１と、同様に、右眼用映像を入力して右眼用動きベクトルを出力する右眼用動きベクトル検出部２と、左眼用映像及び右眼用映像を入力して左右画像間の視差量を検出する視差検出部３と、上述した左眼用動きベクトルと右眼用動きベクトルと左右画像間の視差量とを入力して、ベクトルの比較を行うベクトル比較部４と、ベクトル比較部４からの出力と左眼用動きベクトルと右眼用動きベクトルを入力として、補正後左眼用動きベクトルを出力する左眼用ベクトル補正部５と、ベクトル比較部４からの出力と左眼用動きベクトルと右眼用動きベクトルを入力として、補正後右眼用動きベクトルを出力する右眼用ベクトル補正部５とにより構成されている。以下、各構成について詳細に説明する。 (Embodiment 1)
A stereoscopic video display device according to a first embodiment of the present invention will be described. As shown in FIG. 1, the stereoscopic video display apparatus according to the first embodiment of the present invention is similar to the left-eye motion vector detection unit 1 that inputs a left-eye video and outputs a left-eye motion vector. A right-eye motion vector detection unit 2 that inputs a right-eye video and outputs a right-eye motion vector; and a parallax that detects a parallax amount between left and right images by inputting a left-eye video and a right-eye video A detection unit 3; a vector comparison unit 4 that inputs the above-described left-eye motion vector, right-eye motion vector, and parallax amount between the left and right images and compares the vectors; and an output from the vector comparison unit 4; Left eye vector correction unit 5 that outputs the left eye motion vector and the right eye motion vector as inputs and outputs the corrected left eye motion vector; the output from the vector comparison unit 4; the left eye motion vector and the right eye Motion vector for the right eye after correction It is constituted by a right eye vector correcting unit 5 for outputting. Hereinafter, each configuration will be described in detail.

図１において、左眼用映像を左眼用動きベクトル検出部１に入力し、現フレーム左眼用映像とフレームメモリ等で遅延させた過去フレーム左眼用映像の間の左眼用動きベクトルを検出する。一方、右眼用映像を右眼用動きベクトル検出部２に入力し、現フレーム右眼用映像とフレームメモリ等で遅延させた過去フレーム右眼用映像の間の右眼用動きベクトルを検出する。   In FIG. 1, the left-eye video is input to the left-eye motion vector detection unit 1, and the left-eye motion vector between the current frame left-eye video and the past frame left-eye video delayed by a frame memory or the like is obtained. To detect. On the other hand, the right-eye video is input to the right-eye motion vector detection unit 2 to detect the right-eye motion vector between the current frame right-eye video and the past frame right-eye video delayed by a frame memory or the like. .

左眼用映像と右眼用映像を視差検出部３に入力し、ブロックマッチング法と同様の手法または、特開平２−１００５８９記載の方法等で左右画像間の視差を検出する。ベクトル比較部４において、視差検出部３で検出された左右画像間視差に基づいて左眼用動きベクトル検出部１で検出された左眼用動きベクトルと右眼用動きベクトル検出部２で検出された右眼用動きベクトルとを比較する。   The left-eye video and the right-eye video are input to the parallax detection unit 3, and parallax between the left and right images is detected by a method similar to the block matching method or the method described in Japanese Patent Laid-Open No. 2-120509. In the vector comparison unit 4, the left-eye motion vector detected by the left-eye motion vector detection unit 1 and the right-eye motion vector detection unit 2 are detected based on the parallax between the left and right images detected by the parallax detection unit 3. The right eye motion vector is compared.

ベクトル比較部４で算出されたベクトル比較結果に基づいて左眼用ベクトル補正部５で左眼用動きベクトルを補正する。一方、ベクトル比較部４で算出されたベクトル比較結果に基づいて右眼用ベクトル補正部６で右眼用動きベクトルを補正する。   Based on the vector comparison result calculated by the vector comparison unit 4, the left eye vector correction unit 5 corrects the left eye motion vector. On the other hand, the right eye motion correction unit 6 corrects the right eye motion vector based on the vector comparison result calculated by the vector comparison unit 4.

左右画像間視差に基づいて左眼用動きベクトルと右眼用動きベクトルを比較した結果に基づいて左眼用動きベクトルと右眼用動きベクトルを互いに補正することを特徴とする。   The left-eye motion vector and the right-eye motion vector are mutually corrected based on the result of comparing the left-eye motion vector and the right-eye motion vector based on the parallax between the left and right images.

具体的な一例としては、この立体映像表示装置において、左眼用ベクトル補正部５は、左眼用映像の画面端の映像に左右画像間の視差が対応する右眼用映像が画面端ではない場合に、画面端の左眼用動きベクトルを左眼用映像の画面端に左右画像間の視差が対応する右眼用映像の右眼用動きベクトルで左眼用動きベクトルを補正する。一方、右眼用ベクトル補正部６は、右眼用映像の画面端の映像に左右画像間の視差が対応する左眼用映像が画面端でない場合に、画面端の右眼用動きベクトルを右眼用映像の画面端に左右画像間の視差が対応する左眼用映像の左眼用動きベクトルで右眼用動きベクトルを補正する。つまり、右眼又は左眼一方の映像について、他方の左眼又は右眼の動きベクトルに基づいて、それぞれの映像に対応する動きベクトルの補正を行う。この補正により、画面端の動きベクトルの検出性能を改善することを特長とする。図４を参照しながら、より具体的に説明する。   As a specific example, in this stereoscopic image display device, the left-eye vector correction unit 5 does not display the right-eye image corresponding to the parallax between the left and right images at the screen end image of the left-eye image. In this case, the left-eye motion vector is corrected with the left-eye motion vector at the screen end, and the right-eye motion vector of the right-eye video corresponding to the parallax between the left and right images at the screen end of the left-eye video. On the other hand, the right-eye vector correction unit 6 converts the right-eye motion vector at the screen edge to the right when the left-eye video corresponding to the parallax between the left and right images is not the screen edge. The right eye motion vector is corrected with the left eye motion vector of the left eye video corresponding to the parallax between the left and right images at the screen edge of the eye video. That is, for the right eye or left eye video, the motion vector corresponding to each video is corrected based on the other left eye or right eye motion vector. This correction is characterized by improving the motion vector detection performance at the screen edge. More specific description will be given with reference to FIG.

図４は、立体映像装置において、スポーツの映像を表示した場合の例を示している。左上図が、Ｎフレームの表示時における左眼用映像を示しており、左下図が、Ｎフレームよりも１フレーム前に表示したＮ−１フレームにおける左眼用映像を示している。さらに、右上図が、Ｎフレームの表示時における右眼用映像を示しており、右下図が、Ｎフレームよりも１フレーム前に表示したＮ−１フレームにおける右眼用映像を示している。また、太枠の実線がテレビ画面の枠を示しており、その実線の枠内に記載された破線が画面端領域を示している。   FIG. 4 shows an example in which a sports video is displayed on the stereoscopic video device. The upper left diagram shows the left-eye video when N frames are displayed, and the lower left diagram shows the left-eye video in the N-1 frame displayed one frame before the N frames. Further, the upper right diagram shows the right-eye video when N frames are displayed, and the lower right diagram shows the right-eye video in the N-1 frame displayed one frame before the N frames. Further, a thick solid line indicates a frame of the television screen, and a broken line described in the solid line frame indicates a screen end region.

この映像においては、人物が２名とボールが映っており、人物は視差量が少ないため、左眼用映像及び右眼用映像のいずれにおいてもほぼ同位置に表示されているが、ボールは、より臨場感を出すために、左眼用映像と右眼用映像とでは、視差量が大きく、眼用映像及び右眼用映像においては、異なる位置に表示がなされている。   In this video, two people and a ball are shown, and since the person has a small amount of parallax, both the left-eye video and the right-eye video are displayed at substantially the same position. In order to provide a more realistic sensation, the left-eye video and the right-eye video have a large amount of parallax, and the ophthalmic video and the right-eye video are displayed at different positions.

ここで、このボールは、Ｎ−１フレームからＮフレームかけて画面右側から画面左側に移動しているものとする。その結果として、左上図におけるＮフレームの表示時における左眼用映像は、画面端領域にボールが存在している。一方、右上図におけるＮフレームの表示時における右眼用映像は、画面端領域外（画面内領域）にボールが存在している。   Here, it is assumed that the ball has moved from the right side of the screen to the left side of the screen from N-1 frame to N frame. As a result, the left-eye image at the time of displaying the N frame in the upper left diagram has a ball in the screen edge region. On the other hand, in the right-eye image at the time of displaying the N frame in the upper right diagram, a ball is present outside the screen end area (in-screen area).

ここで、左眼用映像に基づいて、Ｎ−１フレームからＮフレームへのボールの動きベクトルを検出した場合と比較すると、右眼用映像に基づいて、Ｎ−１フレームからＮフレームへのボールの動きベクトルを検出した場合の確度がより高くなる。従って、本願発明においては、図４における左眼用映像においてボールの動きベクトルを生成する際に、右眼用映像のボールの動きベクトルを活用して、左眼用映像におけるボールの動きベクトルを補正することにより、より適切な動きベクトルの検出及び生成を行うことが可能になり、画面端における動きベクトル検出性能が改善されるものである。   Here, compared with the case where the motion vector of the ball from the N-1 frame to the N frame is detected based on the left eye image, the ball from the N-1 frame to the N frame is based on the right eye image. The accuracy when the motion vector is detected becomes higher. Therefore, in the present invention, when generating the ball motion vector in the left eye image in FIG. 4, the ball motion vector in the left eye image is corrected by utilizing the ball motion vector in the right eye image. By doing so, it becomes possible to detect and generate a more appropriate motion vector, and the motion vector detection performance at the screen end is improved.

ベクトルの補正条件に、左右眼どちらかの画面端のベクトルより、他方の眼の左右画像間の視差が対応するベクトルの確度が高い（たとえば、ブロックマッチングの際のフレーム間差分絶対値のブロック合計値が小さい）ことを追加してもよい。   The accuracy of the vector corresponding to the parallax between the left and right images of the other eye is higher than the vector at the screen edge of either the left or right eye as the vector correction condition (for example, the block total of the absolute value of the interframe difference at the time of block matching) (Small value) may be added.

（実施の形態２）
次に、本発明の第二の実施形態の立体映像表示装置について説明する。図２に示すように、本発明の第二の実施形態の立体映像表示装置は、左眼用映像を入力して左眼用動きベクトルを出力する左眼用動きベクトル検出部１と、同様に、右眼用映像を入力して右眼用動きベクトルを出力する右眼用動きベクトル検出部２と、左眼用動きベクトル検出部１からの出力に基づいて、左眼スクロール判定を行う左眼用ヒストグラム判定部１１、左眼用カウンタ１２、左眼用スクロール判定部１３と、同様に、右眼用動きベクトル検出部２からの出力に基づいて、右眼スクロール判定を行う右眼用ヒストグラム判定部１４、右眼用カウンタ１５、右眼用スクロール判定部１６と、左眼スクロール判定結果と右眼スクロール判定結果及び左眼用ヒストグラム判定部１１から出力した左眼スクロールベクトルと右眼用ヒストグラム判定部１４から出力した右眼 スクロールベクトルを入力として補正スクロールベクトルと補正許可信号を出力する左右眼スクロール比較部１７と、補正スクロールベクトルと補正許可信号及び左眼用動きベクトルに基づいて補正後左眼用動きベクトルを出力する左眼用ベクトル補正部１８と、補正スクロールベクトルと補正許可信号及び右眼用動きベクトルに基づいて補正後右眼用動きベクトルを出力する右眼用ベクトル補正部１９とにより構成されている。以下、各構成について詳細に説明する。 (Embodiment 2)
Next, a stereoscopic video display device according to a second embodiment of the present invention will be described. As shown in FIG. 2, the stereoscopic image display apparatus according to the second embodiment of the present invention is similar to the left-eye motion vector detection unit 1 that inputs a left-eye video and outputs a left-eye motion vector. The right eye motion vector detection unit 2 that inputs the right eye video and outputs the right eye motion vector, and the left eye that performs left eye scroll determination based on the output from the left eye motion vector detection unit 1 Histogram determination unit 11 for left eye, and right-eye histogram determination that performs right-eye scroll determination based on the output from the motion vector detection unit 2 for right eye, similarly to the left-eye counter 12 and left-eye scroll determination unit 13 Unit 14, right eye counter 15, right eye scroll determination unit 16, left eye scroll determination result, right eye scroll determination result, and left eye scroll vector output from left eye histogram determination unit 11 and right eye histogram The left-eye scroll comparison unit 17 that outputs the corrected scroll vector and the correction permission signal with the right-eye scroll vector output from the image determination unit 14 as an input, and after correction based on the corrected scroll vector, the correction permission signal, and the left-eye motion vector A left-eye vector correction unit 18 that outputs a left-eye motion vector, and a right-eye vector correction unit 19 that outputs a corrected right-eye motion vector based on the correction scroll vector, the correction permission signal, and the right-eye motion vector. It is comprised by. Hereinafter, each configuration will be described in detail.

図２において、左眼用映像を左眼用動きベクトル検出部１に入力し、左眼用動きベクトルを検出する。左眼用動きベクトルを左眼用ヒストグラム判定部１１に入力し、左眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を左眼スクロールベクトルとして出力する。   In FIG. 2, the left-eye video is input to the left-eye motion vector detection unit 1 to detect the left-eye motion vector. The left eye motion vector is input to the left eye histogram determination unit 11, the histogram of the entire left eye motion vector is calculated, it is determined whether the histogram is highly concentrated, and the vector value at which the histogram is concentrated is determined. Output as left-eye scroll vector.

左眼用カウンタ１２は、左眼用ヒストグラム判定部１１がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する。さらに、左眼用スクロール判定部１３は、左眼用カウンタ１２の値が閾値以上のとき、左眼用映像が全画面スクロールであると判定する。   The counter 12 for the left eye increases when the histogram determination unit 11 for the left eye determines that the histogram concentration is high, and decreases when it determines that the histogram concentration is not high. To do. Further, the left-eye scroll determination unit 13 determines that the left-eye video is full-screen scroll when the value of the left-eye counter 12 is equal to or greater than a threshold value.

一方、右眼用映像を右眼用動きベクトル検出部２に入力し、右眼用動きベクトルを検出する。右眼用動きベクトルを右眼用ヒストグラム判定部１４に入力し、右眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を右眼スクロールベクトルとして出力する。   On the other hand, the right-eye video is input to the right-eye motion vector detection unit 2 to detect the right-eye motion vector. The right-eye motion vector is input to the right-eye histogram determination unit 14, the histogram of the entire right-eye motion vector is calculated, it is determined whether the histogram is highly concentrated, and the vector value at which the histogram is concentrated is determined. Output as right-eye scroll vector.

右眼用カウンタ１５は、右眼用ヒストグラム判定部１４がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する。右眼用スクロール判定部１６は、右眼用カウンタ１５の値が閾値以上のとき、右眼用映像が全画面スクロールであると判定する。   The right-eye counter 15 increases when the right-eye histogram determination unit 14 determines that the histogram concentration is high, and decreases when the histogram determination unit 14 determines that the histogram concentration is not high. To do. The right-eye scroll determination unit 16 determines that the right-eye video is full-screen scroll when the value of the right-eye counter 15 is equal to or greater than a threshold value.

次に、左眼用スクロール判定部１３から出力される左眼スクロール判定と、右眼用スクロール判定部１６から出力される右眼スクロール判定と、左眼用ヒストグラム判定部１１が出力する左眼スクロールベクトルと、右眼用ヒストグラム判定部１４が出力する右眼スクロールベクトルを左右眼スクロール比較部１７に入力し、左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロールベクトルと右眼スクロールベクトルの値に基づいて補正スクロールベクトルを出力し、左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロール判定と右眼スクロール判定の少なくとも一方がスクロール状態のときに補正許可信号を出力する。   Next, the left-eye scroll determination output from the left-eye scroll determination unit 13, the right-eye scroll determination output from the right-eye scroll determination unit 16, and the left-eye scroll output from the left-eye histogram determination unit 11 When the vector and the right-eye scroll vector output by the right-eye histogram determination unit 14 are input to the left-and-right scroll comparison unit 17 and the left-eye scroll vector and the right-eye scroll vector are approximately equal, the left-eye scroll vector and the right-eye scroll vector A corrected scroll vector is output based on the value of the eye scroll vector, and corrected when at least one of the left eye scroll determination and the right eye scroll determination is in the scroll state when the values of the left eye scroll vector and the right eye scroll vector are substantially equal. Output permission signal.

次に、左眼用ベクトル補正部１８は、左右眼スクロール比較部１７から出力される補正許可信号が許可状態のとき、左眼用動きベクトルを補正スクロールベクトルで補正する。たとえば、全画面の左眼用動きベクトルを補正スクロールベクトルで置換する、または、左眼用動きベクトルと補正スクロールベクトルを左眼用カウンタ１２と右眼用カウンタ１５の平均値に基づいてブレンドなどしてもよい。   Next, the left-eye vector correction unit 18 corrects the left-eye motion vector with the correction scroll vector when the correction permission signal output from the left-eye scroll comparison unit 17 is in the permitted state. For example, the left-eye motion vector of the entire screen is replaced with the correction scroll vector, or the left-eye motion vector and the correction scroll vector are blended based on the average value of the left-eye counter 12 and the right-eye counter 15. May be.

次に、右眼用ベクトル補正部１９は、左右眼スクロール比較部１７から出力される補正許可信号が許可状態のとき、右眼用動きベクトルを補正スクロールベクトルで補正する。たとえば、全画面の右眼用動きベクトルを補正スクロールベクトルで置換する、または、右眼用動きベクトルと補正スクロールベクトルを左眼用カウンタ１２と右眼用カウンタ１５の平均値に基づいてブレンドなどしてもよい。   Next, the right eye vector correction unit 19 corrects the right eye motion vector with the correction scroll vector when the correction permission signal output from the left and right eye scroll comparison unit 17 is in the permitted state. For example, the right-eye motion vector of the entire screen is replaced with the correction scroll vector, or the right-eye motion vector and the correction scroll vector are blended based on the average value of the left-eye counter 12 and the right-eye counter 15. May be.

以上のような構成により、本発明の第二の実施形態の立体映像表示装置は、左眼スクロール判定と右眼スクロール判定の各結果と左眼スクロールベクトルと右眼スクロールベクトルの値に基づいて左眼用ベクトル、右眼用ベクトルを同様に補正するため、動きベクトルを用いた信号処理による左眼用映像出力と右眼用映像出力の間に視覚的違和感が発生するのを改善することを特長とする。   With the configuration as described above, the stereoscopic video display device according to the second embodiment of the present invention is based on the left eye scroll determination and right eye scroll determination results, and the left eye scroll vector and right eye scroll vector values. In order to correct the eye vector and the right eye vector in the same way, it is possible to improve the appearance of visual discomfort between the left eye video output and the right eye video output by signal processing using motion vectors. And

（実施の形態３）
次に、本発明の第三の実施形態の立体映像表示装置について説明する。図３に示すように、本発明の第三の実施形態の立体映像表示装置は、左眼用映像を入力して左眼用動きベクトル確度を出力する左眼用動きベクトル検出部１と、同様に、右眼用映像を入力して右眼用動きベクトル確度を出力する右眼用動きベクトル検出部２と、左眼用動きベクトル確度を入力として左眼シーンチェンジ判定を出力する左眼用シーンチェンジ判定部２１と、右眼用動きベクトル確度を入力として右眼シーンチェンジ判定を出力する右眼用シーンチェンジ判定部２２と、左眼シーンチェンジ判定と右眼シーンチェンジ判定とを入力して、補正許可信号を出力する左右眼シーンチェンジ比較部２３と、左眼用動きベクトルと補正許可信号とを入力として、補正後左眼用動きベクトルを出力する左眼用ベクトル補正部２４と、右眼用動きベクトルと補正許可信号とを入力として、補正後右眼用動きベクトルを出力する右眼用ベクトル補正部２５とにより構成されている。以下詳細に各構成について説明する。 (Embodiment 3)
Next, a stereoscopic video display apparatus according to a third embodiment of the present invention will be described. As shown in FIG. 3, the stereoscopic image display apparatus according to the third embodiment of the present invention is similar to the left-eye motion vector detection unit 1 that inputs a left-eye image and outputs a left-eye motion vector accuracy. In addition, a right-eye motion vector detection unit 2 that inputs right-eye video and outputs right-eye motion vector accuracy, and a left-eye scene that outputs left-eye motion vector accuracy and outputs left-eye scene change determination A change determination unit 21; a right-eye scene change determination unit 22 that outputs a right-eye scene change determination using the right-eye motion vector accuracy as input; a left-eye scene change determination and a right-eye scene change determination; Left and right eye scene change comparison unit 23 that outputs a correction permission signal, left eye vector correction unit 24 that receives a left eye motion vector and a correction permission signal, and outputs a corrected left eye motion vector; and right eye for As input and can vector the correction permission signal, and a right-eye vector correction unit 25 which outputs the corrected right-eye motion vector. Each configuration will be described in detail below.

図３において、左眼用映像を左眼用動きベクトル検出部１に入力し、左眼用動きベクトルを検出し、同時に左眼用動きベクトルの正しさの指標である左眼動きベクトル確度を出力する（ベクトル確度が高い定義として、たとえば、ブロックマッチング差分合計値が小さいことなどを用いる。）。次に、左眼動きベクトル確度を左眼用シーンチェンジ判定部２１に入力し、画面全体の左眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する。   In FIG. 3, the left-eye video is input to the left-eye motion vector detection unit 1 to detect the left-eye motion vector, and at the same time, the left-eye motion vector accuracy that is an index of the correctness of the left-eye motion vector is output. (For example, the definition of high vector accuracy is that the block matching difference total value is small.) Next, the left-eye motion vector accuracy is input to the left-eye scene change determination unit 21. If the left-eye motion vector accuracy of the entire screen is equal to or less than a threshold value, it is determined that the scene change has occurred.

右眼用映像を右眼用動きベクトル検出部２に入力し、右眼用動きベクトルを検出し、同時に右眼用動きベクトルの正しさの指標である右眼動きベクトル確度を出力する。次に、右眼動きベクトル確度を右眼用シーンチェンジ判定部２２に入力し、画面全体の右眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する。   The right-eye video is input to the right-eye motion vector detection unit 2 to detect the right-eye motion vector, and at the same time, the right-eye motion vector accuracy that is an index of the correctness of the right-eye motion vector is output. Next, the right-eye motion vector accuracy is input to the right-eye scene change determination unit 22, and when the right-eye motion vector accuracy of the entire screen is equal to or less than a threshold value, it is determined that the scene change has occurred.

左右眼シーンチェンジ比較部２３は、左眼シーンチェンジ判定２１と右眼シーンチェンジ判定２２の結果に基づいて、補正許可信号を出力する（少なくとも片眼がシーンチェンジ判定した場合に補正許可状態にする、もしくは、両眼ともシーンチェンジ判定した場合に補正許可状態にする等）。   The left and right eye scene change comparison unit 23 outputs a correction permission signal based on the result of the left eye scene change determination 21 and the right eye scene change determination 22 (at least when one eye makes a scene change determination, the correction permission state is set). Or, if the scene change is determined for both eyes, the correction is permitted).

左眼用ベクトル補正部２４は、左右眼シーンチェンジ比較部２３が出力する補正許可信号に基づいて、左眼用動きベクトルを補正する。補正許可信号が補正許可状態のとき、左眼用動きベクトルを０クリアする、または左眼用動きベクトルを小さくする等の補正を行う。   The left eye vector correction unit 24 corrects the left eye motion vector based on the correction permission signal output by the left and right eye scene change comparison unit 23. When the correction permission signal is in the correction permission state, correction such as clearing the left eye motion vector to 0 or reducing the left eye motion vector is performed.

右眼用ベクトル補正部２５は、左右眼シーンチェンジ比較部２３が出力する補正許可信号に基づいて、右眼用動きベクトルを補正する。補正許可信号が補正許可状態のとき、右眼用動きベクトルを０クリアする、または右眼用動きベクトルを小さくする等の補正を行う。   The right eye vector correction unit 25 corrects the right eye motion vector based on the correction permission signal output from the left and right eye scene change comparison unit 23. When the correction permission signal is in the correction permission state, the right eye motion vector is cleared to 0, or the right eye motion vector is decreased.

以上のような構成により、左眼シーンチェンジ判定部２１と右眼シーンチェンジ判定部２２の結果に基づいて左眼用ベクトル、右眼用ベクトルを同様に補正するため、動きベクトルを用いた信号処理による左眼用映像出力と右眼用映像出力の間に視覚的違和感が発生するのを改善することを特長とする。   With the above configuration, signal processing using a motion vector is performed in order to similarly correct the left-eye vector and the right-eye vector based on the results of the left-eye scene change determination unit 21 and the right-eye scene change determination unit 22. It is characterized by improving the occurrence of visual discomfort between the left-eye video output and the right-eye video output.

本発明は、左右両眼で観測する画像の視差を利用して立体視させる立体映像表示装置に関して、動きベクトルの検出性能を改善し、さらには動きベクトルを用いた信号処理による左眼用映像出力と右眼用映像出力の間に視覚的違和感が発生するのを改善することが可能な立体映像表示装置を提供する。   The present invention relates to a stereoscopic video display apparatus that performs stereoscopic viewing using parallax of images observed with both left and right eyes, and improves motion vector detection performance, and further outputs video for the left eye by signal processing using motion vectors Provided is a stereoscopic image display device capable of improving the occurrence of a visual discomfort between the right eye image output and the right eye image output.

１ 左眼用動きベクトル検出部
２ 右眼用動きベクトル検出部
３ 視差検出部
４ ベクトル比較
５ 左眼用ベクトル補正部
６ 右眼用ベクトル補正部
１１ 左眼用ヒストグラム判定部
１２ 左眼用カウンタ
１３ 左眼用スクロール判定部
１４ 右眼用ヒストグラム判定部
１５ 右眼用カウンタ
１６ 右眼用スクロール判定部
１７ 左右眼スクロール比較部
１８ 左眼用ベクトル補正部
１９ 右眼用ベクトル補正部
２１ 左眼用シーンチェンジ判定部
２２ 右眼用シーンチェンジ判定部
２３ 左右眼シーンチェンジ比較部
２４ 左眼用ベクトル補正部
２５ 右眼用ベクトル補正部 DESCRIPTION OF SYMBOLS 1 Left eye motion vector detection part 2 Right eye motion vector detection part 3 Parallax detection part 4 Vector comparison 5 Left eye vector correction part 6 Right eye vector correction part 11 Left eye histogram determination part 12 Left eye counter 13 Left-eye scroll determination unit 14 Right-eye histogram determination unit 15 Right-eye counter 16 Right-eye scroll determination unit 17 Left-eye scroll comparison unit 18 Left-eye vector correction unit 19 Right-eye vector correction unit 21 Left-eye scene Change determination unit 22 Right eye scene change determination unit 23 Left and right eye scene change comparison unit 24 Left eye vector correction unit 25 Right eye vector correction unit

Claims (4)

左右両眼で観測する画像の視差を利用して立体視させる立体映像表示装置において、
左眼用映像を入力し左眼用動きベクトルを検出する左眼用動きベクトル検出部と、
右眼用映像を入力し右眼用動きベクトルを検出する右眼用動きベクトル検出部と、
左眼用映像と右眼用映像を入力し左右画像間の視差を検出する視差検出部と、
前記視差検出部で検出された前記左右画像間視差に基づいて前記左眼用動きベクトル検出部で検出された前記左眼用動きベクトルと前記右眼用動きベクトル検出部で検出された前記右眼用動きベクトルとを比較するベクトル比較部と、
前記ベクトル比較部で算出されたベクトル比較結果に基づいて左眼用動きベクトルを補正する左眼用ベクトル補正部と、
前記ベクトル比較部で算出されたベクトル比較結果に基づいて右眼用動きベクトルを補正する右眼用ベクトル補正部備えることを特徴とする立体映像表示装置。 In a stereoscopic video display device for stereoscopic viewing using parallax of an image observed with both left and right eyes,
A left-eye motion vector detection unit that inputs a left-eye image and detects a left-eye motion vector;
A right-eye motion vector detection unit that inputs a right-eye image and detects a right-eye motion vector;
A parallax detection unit that inputs video for the left eye and video for the right eye and detects parallax between the left and right images;
Based on the parallax between the left and right images detected by the parallax detector, the left eye motion vector detected by the left eye motion vector detector and the right eye detected by the right eye motion vector detector A vector comparison unit for comparing the motion vector for use,
A left-eye vector correction unit that corrects a left-eye motion vector based on the vector comparison result calculated by the vector comparison unit;
A stereoscopic image display apparatus comprising a right eye vector correction unit that corrects a right eye motion vector based on a vector comparison result calculated by the vector comparison unit. 前記左眼用ベクトル補正部は、左眼用映像の画面端の映像に前記左右画像間視差が対応する右眼用映像が画面端でない場合に、画面端の左眼用動きベクトルを左眼用映像の画面端に前記左右画像間視差が対応する右眼用映像の右眼用動きベクトルで左眼用動きベクトルを補正し、
前記右眼用ベクトル補正部は、右眼用映像の画面端の映像に前記左右画像間視差が対応する左眼用映像が画面端でない場合に、画面端の右眼用動きベクトルを右眼用映像の画面端に前記左右画像間視差が対応する左眼用映像の左眼用動きベクトルで右眼用動きベクトルを補正する請求項１に記載の立体映像表示装置。 The left-eye vector correction unit uses the left-eye motion vector at the screen edge for the left-eye when the right-eye image corresponding to the left-right image parallax does not correspond to the video at the screen edge of the left-eye image. Correct the left-eye motion vector with the right-eye motion vector of the right-eye video corresponding to the parallax between the left and right images at the screen edge of the video,
The right eye vector correction unit uses the right eye motion vector at the screen edge for the right eye when the left eye video corresponding to the parallax between the left and right images corresponds to the video at the screen edge of the right eye video. The stereoscopic video display apparatus according to claim 1, wherein the right-eye motion vector is corrected by a left-eye motion vector of a left-eye video corresponding to the left-right image parallax at a screen end of the video. 左右両眼で観測する画像の視差を利用して立体視させる立体映像表示装置において、
左眼用映像を入力し左眼用動きベクトルを検出する左眼用動きベクトル検出部と、
前記左眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を左眼スクロールベクトルとして出力する左眼用ヒストグラム判定部と、
前記左眼用ヒストグラム判定部がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する左眼用カウンタと、
前記左眼用カウンタの値が閾値以上のとき、左眼用映像が全画面スクロールであると判定する左眼用スクロール判定部と、
右眼用映像を入力し右眼用動きベクトルを検出する右眼用動きベクトル検出部と、
前記右眼用動きベクトルの画面全体のヒストグラムを演算し、ヒストグラムの集中度が高いかどうかを判定し、ヒストグラムが集中するベクトル値を右眼スクロールベクトルとして出力する右眼用ヒストグラム判定部と、
前記右眼用ヒストグラム判定部がヒストグラムの集中度が高いことを判定したときに、カウンタ値が増加し、ヒストグラムの集中度が高くないと判定したときにカウンタ値が減少する右眼用カウンタと、
前記右眼用カウンタの値が閾値以上のとき、右眼用映像が全画面スクロールであると判定する右眼用スクロール判定部と、
前記左眼用スクロール判定部から出力される左眼スクロール判定と、前記右眼用スクロール判定部から出力される右眼スクロール判定と、前記左眼用ヒストグラム判定部が出力する左眼スクロールベクトルと、前記右眼用ヒストグラム判定部が出力する右眼スクロールベクトルを入力し、
左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロールベクトルと右眼スクロールベクトルの値に基づいて補正スクロールベクトルを出力し、左眼スクロールベクトルと右眼スクロールベクトルの値が概ね等しいとき、左眼スクロール判定と右眼スクロール判定の少なくとも一方がスクロール状態のときに補正許可信号を出力する左右眼スクロール比較部と、
前記左右眼スクロール比較部から出力される補正許可信号が許可状態のとき、左眼用動きベクトルを補正スクロールベクトルで補正する左眼用ベクトル補正部と、
前記左右眼スクロール比較部から出力される補正許可信号が許可状態のとき、右眼用動きベクトルを補正スクロールベクトルで補正する右眼用ベクトル補正部を備えることを特徴とする立体映像表示装置。 In a stereoscopic video display device for stereoscopic viewing using parallax of an image observed with both left and right eyes,
A left-eye motion vector detection unit that inputs a left-eye image and detects a left-eye motion vector;
A left-eye histogram determination unit that calculates a histogram of the entire screen of the left-eye motion vector, determines whether or not the histogram is highly concentrated, and outputs a vector value on which the histogram is concentrated as a left-eye scroll vector;
When the left eye histogram determination unit determines that the histogram concentration level is high, the counter value increases, and when it determines that the histogram concentration level is not high, the left eye counter decreases,
A left-eye scroll determination unit that determines that the left-eye video is full-screen scroll when the value of the left-eye counter is equal to or greater than a threshold;
A right-eye motion vector detection unit that inputs a right-eye image and detects a right-eye motion vector;
A right-eye histogram determination unit that calculates a histogram of the entire screen of the right-eye motion vector, determines whether the histogram concentration is high, and outputs a vector value on which the histogram is concentrated as a right-eye scroll vector;
When the right eye histogram determination unit determines that the histogram concentration is high, the counter value increases, and when it determines that the histogram concentration is not high, the right eye counter decreases.
When the value of the right-eye counter is equal to or greater than a threshold value, a right-eye scroll determination unit that determines that the right-eye video is full-screen scroll;
A left-eye scroll determination output from the left-eye scroll determination unit; a right-eye scroll determination output from the right-eye scroll determination unit; a left-eye scroll vector output from the left-eye histogram determination unit; Input a right eye scroll vector output by the right eye histogram determination unit,
When the values of the left-eye scroll vector and the right-eye scroll vector are approximately equal, a corrected scroll vector is output based on the values of the left-eye scroll vector and the right-eye scroll vector, and the values of the left-eye scroll vector and the right-eye scroll vector are approximately A left-right scroll comparison unit that outputs a correction permission signal when at least one of the left-eye scroll determination and the right-eye scroll determination is in a scroll state when equal,
A left eye vector correction unit that corrects a left eye motion vector with a correction scroll vector when the correction permission signal output from the left and right eye scroll comparison unit is in a permitted state;
A stereoscopic video display apparatus comprising: a right eye vector correction unit that corrects a right eye motion vector with a correction scroll vector when a correction permission signal output from the left and right eye scroll comparison unit is in a permitted state. 左右両眼で観測する画像の視差を利用して立体視させる立体映像表示装置において、
左眼用映像を入力し左眼用動きベクトルを検出し、左眼用動きベクトルの正しさの指標である左眼動きベクトル確度を出力する左眼用動きベクトル検出部と、
前記左眼動きベクトル確度を入力し、画面全体の左眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する左眼用シーンチェンジ判定部と、
右眼用映像を入力し右眼用動きベクトルを検出し、右眼用動きベクトルの正しさの指標である右眼動きベクトル確度を出力する右眼用動きベクトル検出部と、
前記右眼動きベクトル確度を入力し、画面全体の右眼動きベクトル確度が閾値以下の場合、シーンチェンジであると判定する右眼用シーンチェンジ判定部と、
前記左眼シーンチェンジ判定と前記右眼シーンチェンジ判定の結果に基づいて、補正許可信号を出力する左右眼シーンチェンジ比較部と、
前記補正許可信号に基づいて、左眼用動きベクトルを補正する左眼用ベクトル補正部と、
前記補正許可信号に基づいて、右眼用動きベクトルを補正する右眼用ベクトル補正部を備える立体映像表示装置。 In a stereoscopic video display device for stereoscopic viewing using parallax of an image observed with both left and right eyes,
A left-eye motion vector detection unit that inputs a left-eye video, detects a left-eye motion vector, and outputs a left-eye motion vector accuracy that is an index of the correctness of the left-eye motion vector;
When the left-eye motion vector accuracy is input and the left-eye motion vector accuracy of the entire screen is equal to or less than a threshold value, a left-eye scene change determination unit that determines a scene change;
A right-eye motion vector detection unit that inputs a right-eye video, detects a right-eye motion vector, and outputs a right-eye motion vector accuracy that is an index of the correctness of the right-eye motion vector;
When the right eye motion vector accuracy is input, and the right eye motion vector accuracy of the entire screen is equal to or less than a threshold, a right eye scene change determination unit that determines a scene change;
Based on the left eye scene change determination and the right eye scene change determination results, a left and right eye scene change comparison unit that outputs a correction permission signal;
A left-eye vector correction unit that corrects a left-eye motion vector based on the correction permission signal;
A stereoscopic video display apparatus comprising a right eye vector correction unit that corrects a right eye motion vector based on the correction permission signal.
JP2010125585A 2010-06-01 2010-06-01 Stereoscopic video display device Pending JP2013165306A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010125585A JP2013165306A (en) 2010-06-01 2010-06-01 Stereoscopic video display device
PCT/JP2011/003050 WO2011152039A1 (en) 2010-06-01 2011-05-31 Stereoscopic video processing device and stereoscopic video processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010125585A JP2013165306A (en) 2010-06-01 2010-06-01 Stereoscopic video display device

Publications (1)

Publication Number Publication Date
JP2013165306A true JP2013165306A (en) 2013-08-22

Family

ID=45066430

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010125585A Pending JP2013165306A (en) 2010-06-01 2010-06-01 Stereoscopic video display device

Country Status (2)

Country Link
JP (1) JP2013165306A (en)
WO (1) WO2011152039A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101966920B1 (en) 2012-07-10 2019-04-08 삼성전자주식회사 Method and apparatus for estimating motion of image using disparity information of multi view image
CN109840894B (en) * 2019-01-30 2021-02-09 湖北亿咖通科技有限公司 Disparity map refining method and device and storage medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01316092A (en) * 1988-06-16 1989-12-20 Matsushita Electric Ind Co Ltd Three-dimemsional display device
JPH02130094A (en) * 1988-11-10 1990-05-18 Nippon Telegr & Teleph Corp <Ntt> Moving vector information encoding system for stereo moving picture
JP3103478B2 (en) * 1994-06-02 2000-10-30 キヤノン株式会社 Compound eye imaging device
JP5114274B2 (en) * 2008-04-04 2013-01-09 株式会社日立製作所 Television receiver and frame rate conversion method thereof

Also Published As

Publication number Publication date
WO2011152039A1 (en) 2011-12-08

Similar Documents

Publication Publication Date Title
EP2549762B1 (en) Stereovision-image position matching apparatus, stereovision-image position matching method, and program therefor
KR100720722B1 (en) Intermediate vector interpolation method and 3D display apparatus
US20140240471A1 (en) Method, device and apparatus for generating stereoscopic images using a non-stereoscopic camera
KR101975247B1 (en) Image processing apparatus and image processing method thereof
JP2013098934A (en) Image processing apparatus and image processing method
WO2012029371A1 (en) Three-dimensional image generating method, three-dimensional image generating apparatus, and display apparatus provided with same
US20130088574A1 (en) Detective Adjusting Apparatus for Stereoscopic Image and Related Method
US20110293172A1 (en) Image processing apparatus, image processing method, and image display apparatus
US20120087571A1 (en) Method and apparatus for synchronizing 3-dimensional image
JP5257248B2 (en) Image processing apparatus and method, and image display apparatus
US8718331B2 (en) Image detecting apparatus and method thereof
TWI491244B (en) Method and apparatus for adjusting 3d depth of an object, and method and apparatus for detecting 3d depth of an object
WO2014136144A1 (en) Image display device and image display method
WO2013031807A1 (en) Three-dimensional image generation method, three-dimensional image generation device, and display device comprising same
JP2013165306A (en) Stereoscopic video display device
US20130100260A1 (en) Video display apparatus, video processing device and video processing method
US20120098942A1 (en) Frame Rate Conversion For Stereoscopic Video
US9113140B2 (en) Stereoscopic image processing device and method for generating interpolated frame with parallax and motion vector
KR20110025020A (en) Apparatus and method for displaying 3d image in 3d image system
CN102487447B (en) The method and apparatus of adjustment object three dimensional depth and the method and apparatus of detection object three dimensional depth
JP4892105B1 (en) Video processing device, video processing method, and video display device
US9215442B2 (en) Devices and methods for 3-D image processing
JP5490252B2 (en) Stereoscopic image processing apparatus, stereoscopic image display apparatus, and stereoscopic image processing method
WO2012018001A1 (en) Video image processing device, display device and video image processing method
JP6131256B6 (en) Video processing apparatus and video processing method thereof