JPH1051811A - Method and device for adjusting stereoscopic effect - Google Patents

Method and device for adjusting stereoscopic effect

Info

Publication number
JPH1051811A
JPH1051811A JP8208172A JP20817296A JPH1051811A JP H1051811 A JPH1051811 A JP H1051811A JP 8208172 A JP8208172 A JP 8208172A JP 20817296 A JP20817296 A JP 20817296A JP H1051811 A JPH1051811 A JP H1051811A
Authority
JP
Japan
Prior art keywords
image
signal
video
saturation
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8208172A
Other languages
Japanese (ja)
Other versions
JP3235776B2 (en
Inventor
Yukio Mori
幸夫 森
Akihiro Maenaka
章弘 前中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP20817296A priority Critical patent/JP3235776B2/en
Priority to EP97930812A priority patent/EP0918439B1/en
Priority to DE69739179T priority patent/DE69739179D1/en
Priority to PCT/JP1997/002471 priority patent/WO1998004087A1/en
Priority to KR10-1999-7000337A priority patent/KR100445619B1/en
Priority to US09/147,518 priority patent/US6445833B1/en
Publication of JPH1051811A publication Critical patent/JPH1051811A/en
Application granted granted Critical
Publication of JP3235776B2 publication Critical patent/JP3235776B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

PROBLEM TO BE SOLVED: To adjust the stereoscopic effect of three-dimensional video by controlling the sharpness of the video by specific unit areas in one field image plane of the three-dimensional video according to information regarding distances of the video by the specific unit areas. SOLUTION: A stereoscopic effect adjusting circuit is equipped with a coefficient generating circuit 601 and a stereoscopic effect adjusting circuit 602 (603) for left (right) video. According to parallax information PR by pixels, the circuit 601 generates a 1st coefficient KL, a 2nd coefficient KH, and a 3rd coefficient KC. The coefficient KL is a coefficient for adjusting the rate of low-frequency components of video, i.e., a coefficient for blurring the outline of the video. The coefficient KH is a coefficient for adjusting the rate of high-frequency components of the video, i.e., a coefficient for increasing the sharpness of the outline. The coefficient KC is a coefficient for adjusting the chroma of the video. The coefficients KL and KH are supplied to a circuit 610 which adjusts the sharpness of the outline and processed as specified with a luminance signal YL, and an output YL-OUT is sent out. The coefficient KC, on the other hand, is supplied to a circuit 620 which adjusts the chroma and processed as specified with color difference signals (R-Y)L and (B-Y)L, and an output is generated.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、3次元映像の立
体感を調整する立体感調整方法および立体感調整装置に
関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a three-dimensional effect adjusting method and a three-dimensional effect adjusting device for adjusting the three-dimensional effect of a three-dimensional image.

【0002】[0002]

【従来の技術】互いに視差を有する左映像と右映像とか
らなる3次元映像信号を立体表示装置に表示することに
り、立体感のある映像を提供する装置が既に開発されて
いる。また、2次元映像信号から3次元映像信号を生成
する装置も既に開発されている。
2. Description of the Related Art Devices that provide a three-dimensional image by displaying a three-dimensional image signal comprising a left image and a right image having parallax on each other have been already developed. Further, an apparatus for generating a three-dimensional video signal from a two-dimensional video signal has already been developed.

【0003】しかしながら、3次元映像信号をリアルタ
イムに処理することにより、3次元映像信号によって得
られる立体映像の立体感を調整できる装置はまだ開発さ
れていない。
[0003] However, a device capable of adjusting the stereoscopic effect of a stereoscopic image obtained by a three-dimensional video signal by processing the three-dimensional video signal in real time has not yet been developed.

【0004】[0004]

【発明が解決しようとする課題】この発明は、3次元映
像信号をリアルタイムに処理することにより、3次元映
像信号によって得られる立体映像の立体感を調整するこ
とができる立体感調整方法および立体感調整装置を提供
することを目的とする。
SUMMARY OF THE INVENTION The present invention provides a three-dimensional effect adjusting method and a three-dimensional effect capable of adjusting the three-dimensional effect of a three-dimensional image obtained by the three-dimensional image signal by processing the three-dimensional image signal in real time. It is an object to provide an adjusting device.

【0005】[0005]

【課題を解決するための手段】この発明による第1の立
体感調整方法は、3次元映像の1フィールド画面内の所
定単位領域ごとの映像の遠近に関する情報に基づいて、
3次元映像の各所定単位領域ごとに映像の輪郭の鮮明度
を制御することにより、3次元映像の立体感を調整する
ことを特徴とする。所定単位領域は、たとえば、1画素
単位の領域である。
According to a first stereoscopic effect adjusting method according to the present invention, a three-dimensional image is adjusted on the basis of information on the perspective of an image for each predetermined unit area in one field screen of a three-dimensional image.
The stereoscopic effect of the three-dimensional image is adjusted by controlling the sharpness of the outline of the image for each predetermined unit area of the three-dimensional image. The predetermined unit area is, for example, an area of one pixel unit.

【0006】具体的には、近い映像が映っている領域に
対しては、映像の輪郭の鮮明度が高くなるように、遠い
映像が映っている領域に関しては映像の輪郭の鮮明度が
低くなるように、映像の輪郭の鮮明度が制御される。人
間の眼には、近いものほど輪郭がくっきりと見え、遠い
ものほど輪郭がぼやけて見えるので、映像の立体感が強
調される。
More specifically, the sharpness of the outline of the image is increased in a region where a near image is projected, and the sharpness of the outline of the image is reduced in a region where a distant image is projected. Thus, the sharpness of the outline of the video is controlled. To the human eye, the closer the object is, the sharper the outline is, and the farther the object is, the more the outline is blurred, so that the stereoscopic effect of the image is emphasized.

【0007】この発明による第2の立体感調整方法は、
3次元映像の1フィールド画面内の所定単位領域ごとの
映像の遠近に関する情報に基づいて、3次元映像の各所
定単位領域ごとに映像の彩度を制御することにより、3
次元映像の立体感を調整することを特徴とする。所定単
位領域は、たとえば、1画素単位の領域である。
A second method for adjusting a three-dimensional effect according to the present invention is as follows.
By controlling the saturation of the image for each predetermined unit area of the three-dimensional image based on information about the perspective of the image for each predetermined unit area in one field screen of the three-dimensional image, 3
It is characterized in that the stereoscopic effect of the two-dimensional image is adjusted. The predetermined unit area is, for example, an area of one pixel unit.

【0008】具体的には、近い映像が映っている領域に
対しては、映像の彩度が高くなるように、遠い映像が映
っている領域に関しては映像の彩度が低くなるように、
映像の彩度が制御される。人間の眼には、近いものほど
色があざやかに見え、遠いものほど色が薄く見えるの
で、映像の立体感が強調される。
[0008] More specifically, the saturation of the image is increased in a region where a near image is reflected, and the saturation of the image is lowered in a region where a distant image is reflected.
The saturation of the video is controlled. To the human eye, the closer the object, the more vivid the color, and the farther the object, the lighter the color. This enhances the stereoscopic effect of the image.

【0009】この発明による第3の立体感調整方法は、
3次元映像の1フィールド画面内の所定単位領域ごとの
映像の遠近に関する情報に基づいて、3次元映像の各所
定単位領域ごとに映像の輪郭の鮮明度を制御するととも
に映像の彩度を制御することにより、3次元映像の立体
感を調整することを特徴とする。所定単位領域は、たと
えば、1画素単位の領域である。
A third stereoscopic effect adjusting method according to the present invention is as follows.
Controlling the sharpness of the outline of the image and controlling the saturation of the image for each predetermined unit area of the three-dimensional image based on information on the perspective of the image for each predetermined unit area within the one-field screen of the three-dimensional image. Thus, the stereoscopic effect of the three-dimensional image is adjusted. The predetermined unit area is, for example, an area of one pixel unit.

【0010】具体的には、近い映像が映っている領域に
対しては、映像の輪郭の鮮明度が高くなるように、遠い
映像が映っている領域に関しては映像の輪郭の鮮明度が
低くなるように、映像の輪郭の鮮明度が制御され、近い
映像が映っている領域に対しては映像の彩度が高くなる
ように、遠い映像が映っている領域に関しては映像の彩
度が低くなるように、映像の彩度が制御される。人間の
眼には、近いものほど輪郭がくっきりと見えるとともに
色があざやかに見え、遠いものほど輪郭がぼやけて見え
るとともに色が薄く見えるので、映像の立体感が強調さ
れる。
[0010] More specifically, the sharpness of the outline of the image is increased in a region where a near image is projected, and the sharpness of the outline of the image is reduced in a region where a distant image is projected. As described above, the sharpness of the outline of the image is controlled, and the saturation of the image is reduced in the region where a distant image is reflected, as the saturation of the image is increased in the region where a close image is reflected. Thus, the saturation of the video is controlled. The closer to the human eye, the sharper the outline and the more vivid the color, and the farther the object is, the more the outline appears blurred and the color looks paler, so that the stereoscopic effect of the image is emphasized.

【0011】この発明による第1の立体感調整装置は、
3次元映像の1フィールド画面内の所定単位領域ごとの
映像の遠近に関する情報に基づいて、3次元映像の各所
定単位領域ごとに映像の輪郭の鮮明度を制御する輪郭制
御手段を備えていることを特徴とする。所定単位領域
は、たとえば、1画素単位の領域である。
A first three-dimensional effect adjusting device according to the present invention is:
Contour control means for controlling the sharpness of the contour of the video for each predetermined unit area of the three-dimensional video based on information about the perspective of the video for each predetermined unit area in one field screen of the three-dimensional video It is characterized by. The predetermined unit area is, for example, an area of one pixel unit.

【0012】輪郭制御手段としては、たとえば、近い映
像が映っている領域に対しては、映像の輪郭の鮮明度が
高くなるように、遠い映像が映っている領域に関しては
映像の輪郭の鮮明度が低くなるように、映像の輪郭の鮮
明度を制御するものが用いられる。人間の眼には、近い
ものほど色があざやかに見え、遠いものほど色が薄く見
えるので、映像の立体感が強調される。
[0012] The contour control means may include, for example, a sharpness of the outline of the image in a region where a distant image is projected so that the sharpness of the outline of the image is high in a region where a near image is projected. Is used to control the sharpness of the outline of the video so that the image quality is reduced. To the human eye, the closer the object, the more vivid the color, and the farther the object, the lighter the color. This enhances the stereoscopic effect of the image.

【0013】このような輪郭制御手段の具体例として
は、近い映像が映っている領域に対しては、映像の低周
波成分の割合を減少させるとともに映像の高周波成分の
割合を増加させ、遠い映像が映っている領域に関しては
映像の低周波成分の割合を増加させるとともに映像の高
周波成分の割合を減少させるものが挙げられる。
As a specific example of such a contour control means, for a region where a near image is reflected, the ratio of the low frequency component of the image is reduced and the ratio of the high frequency component of the image is increased. As for the area where is displayed, there is one that increases the ratio of the low frequency component of the video and decreases the ratio of the high frequency component of the video.

【0014】この発明による第2の立体感調整装置は、
3次元映像の1フィールド画面内の所定単位領域ごとの
映像の遠近に関する情報に基づいて、3次元映像の各所
定単位領域ごとに映像の彩度を制御する彩度制御手段を
備えていることを特徴とする。所定単位領域は、たとえ
ば、1画素単位の領域である。
A second three-dimensional effect adjusting device according to the present invention is:
The image processing apparatus further includes a saturation control unit configured to control the saturation of the image for each of the predetermined unit regions of the three-dimensional image based on information about the perspective of the image for each of the predetermined unit regions in the one-field screen of the three-dimensional image. Features. The predetermined unit area is, for example, an area of one pixel unit.

【0015】彩度制御手段としては、たとえば、近い映
像が映っている領域に対しては、映像の彩度が高くなる
ように、遠い映像が映っている領域に関しては映像の彩
度が低くなるように、映像の彩度を制御するものが用い
られる。人間の眼には、近いものほど色があざやかに見
え、遠いものほど色が薄く見えるので、映像の立体感が
強調される。
As the saturation control means, for example, the saturation of a video is increased in a region where a distant video is displayed, while the saturation of the video is lowered in a region where a near video is displayed. As described above, one that controls the saturation of an image is used. To the human eye, the closer the object, the more vivid the color, and the farther the object, the lighter the color. This enhances the stereoscopic effect of the image.

【0016】この発明による第3の立体感調整装置は、
3次元映像の1フィールド画面内の所定単位領域ごとの
映像の遠近に関する情報に基づいて、3次元映像の各所
定単位領域ごとに映像の輪郭の鮮明度を制御する輪郭制
御手段、および3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の彩度を制御する
彩度制御手段を備えていることを特徴とする。所定単位
領域は、たとえば、1画素単位の領域である。
A third three-dimensional effect adjusting device according to the present invention is:
Contour control means for controlling the sharpness of the contour of the image for each predetermined unit area of the three-dimensional image based on information about the perspective of the image for each predetermined unit area within one field screen of the three-dimensional image; 3 based on the information about the perspective of the video for each predetermined unit area in the one-field screen
The image processing apparatus further includes a saturation control unit that controls the saturation of the image for each predetermined unit area of the two-dimensional image. The predetermined unit area is, for example, an area of one pixel unit.

【0017】輪郭制御手段としては、たとえば、近い映
像が映っている領域に対しては、映像の輪郭の鮮明度が
高くなるように、遠い映像が映っている領域に関しては
映像の輪郭の鮮明度が低くなるように、映像の輪郭の鮮
明度を制御するものが用いられ、彩度制御手段として
は、たとえば、近い映像が映っている領域に対しては、
映像の彩度が高くなるように、遠い映像が映っている領
域に関しては映像の彩度が低くなるように、映像の彩度
を制御するものが用いられる。
The contour control means may include, for example, the definition of the contour of the image is increased so that the definition of the contour of the video is high in the region where the near image is reflected. Is controlled so as to reduce the sharpness of the outline of the image. As the saturation control means, for example, for a region where a close image is shown,
A device that controls the saturation of an image is used such that the saturation of the image is high and the saturation of the image is low in a region where a distant image is reflected.

【0018】人間の眼には、近いものほど輪郭がくっき
りと見えるとともに色があざやかに見え、遠いものほど
輪郭がぼやけて見えるとともに色が薄く見えるので、映
像の立体感が強調される。
The closer to the human eye, the sharper the outline and the more vivid the color, and the farther the object, the more the outline appears blurred and the color appears lighter, so that the stereoscopic effect of the image is emphasized.

【0019】このような輪郭制御手段の具体例として
は、近い映像が映っている領域に対しては、映像の低周
波成分の割合を減少させるとともに映像の高周波成分の
割合を増加させ、遠い映像が映っている領域に関しては
映像の低周波成分の割合を増加させるとともに映像の高
周波成分の割合を減少させるものが挙げられる。
As a specific example of such a contour control means, for a region where a near image is reflected, the ratio of the low-frequency component of the image is reduced and the ratio of the high-frequency component of the image is increased, so that the distant image is reduced. As for the area where is displayed, there is one that increases the ratio of the low frequency component of the video and decreases the ratio of the high frequency component of the video.

【0020】[0020]

【発明の実施の形態】以下、図面を参照して、この発明
の実施の形態について説明する。
Embodiments of the present invention will be described below with reference to the drawings.

【0021】〔1〕この発明の第1の実施の形態につい
ての説明
[1] Description of First Embodiment of the Invention

【0022】まず、この発明を2D/3D映像変換シス
テムに適用した場合の実施の形態について説明する。
First, an embodiment in which the present invention is applied to a 2D / 3D video conversion system will be described.

【0023】〔1−1〕2D/3D映像変換システムの
全体的な構成の説明。
[1-1] Description of overall configuration of 2D / 3D video conversion system.

【0024】図1は、2D/3D映像変換システムの構
成を示している。
FIG. 1 shows the configuration of a 2D / 3D video conversion system.

【0025】この2D/3D映像変換システムは、2次
元映像を3次元映像に変換するための2D/3D映像変
換装置501および2D/3D映像変換装置501によ
って得られた3次元映像信号に対して立体感を調整する
立体感調整回路502とを備えている。
The 2D / 3D video conversion system converts a 2D / 3D video signal obtained by the 2D / 3D video conversion device 501 and a 2D / 3D video conversion device 501 for converting a 2D video into a 3D video. A three-dimensional effect adjusting circuit 502 for adjusting the three-dimensional effect is provided.

【0026】2D/3D映像変換装置501には、2次
元映像信号を構成する輝度信号Y−IN、色差信号(R
−Y)−INおよび色差信号(B−Y)−INが入力さ
れる。2D/3D映像変換装置501からは、左映像信
号を構成する輝度信号YL、色差信号(R−Y)Lおよ
び色差信号(B−Y)Lと、右映像信号を構成する輝度
信号YR、色差信号(R−Y)Rおよび色差信号(B−
Y)Rと、各画素ごとの視差情報PRとを出力する。
The 2D / 3D video converter 501 has a luminance signal Y-IN and a color difference signal (R
-Y) -IN and a color difference signal (BY) -IN. The 2D / 3D video converter 501 outputs a luminance signal YL, a chrominance signal (RY) L and a chrominance signal (BY) L constituting a left video signal, a luminance signal YR constituting a right video signal, and a chrominance signal. Signal (RY) R and the color difference signal (B-
Y) Output R and parallax information PR for each pixel.

【0027】2D/3D映像変換装置501の各出力信
号は立体感調整回路502に送られる。立体感調整回路
502からは、立体感調整後の左映像信号を構成する輝
度信号YL−OUT、色差信号(R−Y)L−OUTお
よび色差信号(B−Y)L−OUTと、立体感調整後の
右映像信号を構成する輝度信号YR−OUT、色差信号
(R−Y)R−OUTおよび色差信号(B−Y)R−O
UTとが出力される。
Each output signal of the 2D / 3D video converter 501 is sent to a stereoscopic effect adjusting circuit 502. From the three-dimensional effect adjustment circuit 502, a luminance signal YL-OUT, a color difference signal (RY) L-OUT and a color difference signal (BY) L-OUT, which constitute the left video signal after the three-dimensional effect adjustment, and a three-dimensional effect. The luminance signal YR-OUT, the color difference signal (RY) R-OUT, and the color difference signal (BY) RO constituting the adjusted right video signal
UT and are output.

【0028】〔1−2〕2D/3D映像変換装置501
の説明
[1-2] 2D / 3D Video Converter 501
Description

【0029】2D/3D映像変換装置501としては、
たとえば、以下に説明する第1の2D/3D映像変換装
置、第2の2D/3D映像変換装置等が用いられる。
As the 2D / 3D video converter 501,
For example, a first 2D / 3D video converter, a second 2D / 3D video converter, and the like described below are used.

【0030】〔1−2−1〕第1の2D/3D映像変換
装置の説明
[1-2-1] Description of First 2D / 3D Video Converter

【0031】図2は、第1の2D/3D映像変換装置の
全体的な構成を示している。
FIG. 2 shows the overall configuration of the first 2D / 3D video converter.

【0032】2次元映像信号を構成する輝度信号Y、色
差信号R−Yおよび色差信号B−Yは、AD変換回路1
(ADC)によってそれぞれディジタルのY信号、R−
Y信号およびB−Y信号に変換される。
The luminance signal Y, the color difference signal RY, and the color difference signal BY constituting the two-dimensional video signal are converted by the AD conversion circuit 1
(ADC), the digital Y signal, R-
It is converted into a Y signal and a BY signal.

【0033】Y信号は、輝度積算回路7、高周波成分積
算回路8および輝度コントラスト算出回路9に送られる
とともに、第1の左映像用任意画素遅延FIFO11お
よび第1の右映像用任意画素遅延FIFO21に送られ
る。R−Y信号は、彩度積算回路10に送られるととも
に、第2の左映像用任意画素遅延FIFO12および第
2の右映像用任意画素遅延FIFO22に送られる。B
−Y信号は、彩度積算回路10に送られるとともに、第
3の左映像用任意画素遅延FIFO13および第3の右
映像用任意画素遅延FIFO23に送られる。
The Y signal is sent to a luminance integrating circuit 7, a high-frequency component integrating circuit 8, and a luminance contrast calculating circuit 9, and is sent to a first left image arbitrary pixel delay FIFO 11 and a first right image arbitrary pixel delay FIFO 21. Sent. The RY signal is sent to the saturation integration circuit 10 and also sent to a second left image arbitrary pixel delay FIFO 12 and a second right image arbitrary pixel delay FIFO 22. B
The −Y signal is sent to the saturation integration circuit 10 and sent to the third left image arbitrary pixel delay FIFO 13 and the third right image arbitrary pixel delay FIFO 23.

【0034】輝度積算回路7は、1フィールド毎に、図
3に示すように、1フィールド画面内に予め設定された
複数個の視差算出領域E1〜E12それぞれに対する輝
度積算値を算出する。高周波成分積算回路8は、1フィ
ールド毎に、各視差算出領域E1〜E12それぞれに対
する高周波成分の積算値を算出する。輝度コントラスト
算出回路9は、1フィールド毎に、各視差算出領域E1
〜E12それぞれに対する輝度コントラストを算出す
る。彩度積算回路10は、1フィールド毎に、各視差算
出領域E1〜E12それぞれに対する彩度の積算値を算
出する。
The luminance integrating circuit 7 calculates, for each field, a luminance integrated value for each of a plurality of parallax calculation areas E1 to E12 set in advance in one field screen as shown in FIG. The high-frequency component integrating circuit 8 calculates an integrated value of a high-frequency component for each of the parallax calculation areas E1 to E12 for each field. The brightness contrast calculation circuit 9 calculates each parallax calculation area E1 for each field.
The brightness contrast for each of E12 to E12 is calculated. The saturation integration circuit 10 calculates an integrated value of saturation for each of the parallax calculation areas E1 to E12 for each field.

【0035】視差算出領域E1〜E12それぞれに対す
る輝度積算値、各視差算出領域E1〜E12それぞれに
対する高周波成分の積算値、各視差算出領域E1〜E1
2それぞれに対する輝度コントラストおよび各視差算出
領域E1〜E12それぞれに対する彩度の積算値が、視
差算出領域E1〜E12ごとの映像の遠近に関する画像
特徴量である。
The luminance integrated value for each of the parallax calculation areas E1 to E12, the integrated value of the high frequency component for each of the parallax calculation areas E1 to E12, and the respective parallax calculation areas E1 to E1
The integrated values of the luminance contrast for each of the two and the saturation for each of the parallax calculation regions E1 to E12 are image feature amounts relating to the perspective of the video for each of the parallax calculation regions E1 to E12.

【0036】なお、1フィールド画面内には、実際に
は、図16に示すように6行10列の計60個の視差算
出領域が設定されているが、説明の便宜上、図3に示す
ように、1フィールド画面内に、3行4列の計12個の
視差算出領域E1〜E12が設定されているものとす
る。
Note that a total of 60 parallax calculation areas of 6 rows and 10 columns are actually set in the one-field screen as shown in FIG. 16, but for convenience of explanation, as shown in FIG. It is assumed that a total of 12 parallax calculation areas E1 to E12 of 3 rows and 4 columns are set in one field screen.

【0037】CPU3は、輝度積算回路7、高周波成分
積算回路8、輝度コントラスト算出回路9および彩度積
算回路10から送られてきた情報に基づいて、各視差算
出領域E1〜E12に対する視差情報を生成する。この
例では、被写体のように前側にある物体ほど視差量が少
なく、背景のように後ろ側にある物体ほど視差量が大き
くなるように視差情報が生成される。この視差情報の生
成方法の詳細については、後述する。
The CPU 3 generates parallax information for each of the parallax calculation areas E1 to E12 based on the information transmitted from the luminance integration circuit 7, the high-frequency component integration circuit 8, the luminance contrast calculation circuit 9 and the saturation integration circuit 10. I do. In this example, the parallax information is generated such that the front-side object such as the subject has a smaller parallax amount, and the back-side object such as the background has a larger parallax amount. The details of the method of generating the parallax information will be described later.

【0038】CPU3によって算出された各視差算出領
域E1〜E12に対する視差情報は、視差制御回路4に
送られる。視差制御回路4は、各視差算出領域E1〜E
12に対する視差情報に基づいて、各フィールドの各画
素位置ごとの視差情報(所定単位領域ごとの映像の遠近
に関する情報)を生成する。そして、得られた各画素位
置ごとの視差情報に基づいて、各FIFO11〜13、
21〜23から映像信号(Y信号、R−Y信号、B−Y
信号)を読み出す際の読み出しアドレスが左映像用任意
画素遅延FIFO11〜13と右映像用任意画素遅延F
IFO21〜23との間でずれるように、各FIFO1
1〜13、21〜23の読み出しアドレスを制御する。
したがって、左映像用任意画素遅延FIFO11〜13
から読み出された左映像信号の水平位相と、右映像用任
意画素遅延FIFO21〜23から読み出された右映像
信号の水平位相が異なるようになる。
The parallax information for each of the parallax calculation areas E1 to E12 calculated by the CPU 3 is sent to the parallax control circuit 4. The parallax control circuit 4 controls the parallax calculation areas E1 to E
On the basis of the disparity information for No. 12, disparity information for each pixel position in each field (information regarding the perspective of an image for each predetermined unit area) is generated. Then, based on the obtained parallax information for each pixel position, each of the FIFOs 11 to 13,
Video signals (Y signal, RY signal, BY
Signal), the read addresses are arbitrary pixel delay FIFOs 11 to 13 for the left image and arbitrary pixel delay F for the right image.
Each of the FIFOs 1 to 23 is shifted from the FIFOs 21 to 23.
Read addresses 1 to 13 and 21 to 23 are controlled.
Therefore, the left image arbitrary pixel delay FIFOs 11 to 13
, And the horizontal phase of the right video signal read from the right video arbitrary pixel delay FIFOs 21 to 23 becomes different.

【0039】左映像用任意画素遅延FIFO11〜13
から読み出された左映像信号(YL信号、(R−Y)L
信号、(B−Y)L信号)は、DA変換回路(DAC)
5によってアナログ信号に変換された後、立体感調整回
路502を介して図示しない立体表示装置に送られる。
右映像用任意画素遅延FIFO21〜23から読み出さ
れた右映像信号(YR信号、(R−Y)R信号、(B−
Y)R信号)は、DA変換回路(DAC)6によってア
ナログ信号に変換された後、立体感調整回路502を介
して図示しない立体表示装置に送られる。
Left image arbitrary pixel delay FIFOs 11 to 13
From the left video signal (YL signal, (RY) L
Signal, (BY) L signal) is a DA conversion circuit (DAC)
After being converted into an analog signal by 5, the signal is sent to a three-dimensional display device (not shown) via a three-dimensional effect adjustment circuit 502.
The right video signal (YR signal, (RY) R signal, (B-
Y) R signal) is converted into an analog signal by a DA conversion circuit (DAC) 6, and then sent to a stereoscopic display device (not shown) via a stereoscopic effect adjustment circuit 502.

【0040】左映像信号の水平位相と、右映像信号の水
平位相は異なっているので、左映像と右映像との間に視
差が発生する。この結果、左映像を左目のみで観察し、
右映像を右目のみで観察すると、被写体が背景に対して
前方位置にあるような立体映像が得られる。
Since the horizontal phase of the left video signal is different from the horizontal phase of the right video signal, a parallax occurs between the left video and the right video. As a result, the left image is observed only with the left eye,
When the right image is observed only with the right eye, a three-dimensional image in which the subject is located in front of the background is obtained.

【0041】図4は、輝度積算回路7の構成を示してい
る。
FIG. 4 shows the configuration of the luminance integrating circuit 7.

【0042】図3においては、各視差算出領域E1〜E
12の水平方向の画素数をm、各視差算出領域E1〜E
12の垂直方向の画素数をn、第1の視差算出領域E1
の左上の座標を(a,b)として、水平位置(HAD)
および垂直位置(VAD)が表されている。
In FIG. 3, each of the parallax calculation areas E1 to E
12, the number of pixels in the horizontal direction is m, and each of the parallax calculation areas E1 to E
12, the number of pixels in the vertical direction is n, and the first parallax calculation area E1
The horizontal position (HAD), where the coordinates of the upper left of
And the vertical position (VAD).

【0043】輝度積算回路7は、タイミング信号発生回
路201、加算回路202および輝度積算レジスタ群2
03および選択回路(SEL)204を備えている。輝
度積算レジスタ群203は、各視差算出領域E1〜E1
2にそれぞれ対応した第1〜第12の輝度積算レジスタ
211〜222を備えている。
The luminance integrating circuit 7 includes a timing signal generating circuit 201, an adding circuit 202, and a luminance integrating register group 2.
03 and a selection circuit (SEL) 204. The luminance integration register group 203 stores the parallax calculation areas E1 to E1.
2 are provided with first to twelfth luminance integrating registers 211 to 222 respectively corresponding to the two.

【0044】タイミング信号発生回路201には、入力
映像信号の水平同期信号Hsyncおよび垂直同期信号
Vsyncならびに各水平期間の水平アドレスを検出す
るためのクロック信号CLKが入力している。
The timing signal generating circuit 201 receives a horizontal synchronizing signal Hsync and a vertical synchronizing signal Vsync of the input video signal and a clock signal CLK for detecting a horizontal address in each horizontal period.

【0045】タイミング信号発生回路201は、水平同
期信号Hsync、垂直同期信号Vsyncおよびクロ
ック信号CLKに基づいて、第1〜第12のイネーブル
信号EN1〜EN12、リセット信号RSTおよび出力
タイミング信号DOUTを出力する。
The timing signal generation circuit 201 outputs first to twelfth enable signals EN1 to EN12, a reset signal RST and an output timing signal DOUT based on the horizontal synchronization signal Hsync, the vertical synchronization signal Vsync, and the clock signal CLK. .

【0046】各イネーブル信号EN1〜EN12は、そ
れぞれ各視差算出領域E1〜E12に対応しており、常
時はLレベルであり、入力映像信号の水平垂直位置が対
応する領域内にあるときに、Hレベルとなる。第1〜第
12のイネーブル信号EN1〜EN12は、それぞれ第
1〜第12の輝度積算レジスタ211〜222に、書き
込み信号として入力している。また、第1〜第12のイ
ネーブル信号EN1〜EN12は、選択回路204にも
送られる。選択回路204は、Hレベルのイネーブル信
号に対応する入力データを選択して出力する。
Each of the enable signals EN1 to EN12 corresponds to each of the parallax calculation regions E1 to E12, and is always at the L level. Level. The first to twelfth enable signals EN1 to EN12 are input as write signals to the first to twelfth luminance integration registers 211 to 222, respectively. Further, the first to twelfth enable signals EN1 to EN12 are also sent to the selection circuit 204. The selection circuit 204 selects and outputs input data corresponding to the H-level enable signal.

【0047】リセット信号RSTは、入力映像信号にお
ける各フィールドの有効映像開始タイミングで出力さ
れ、各輝度積算レジスタ211〜222に送られる。各
輝度積算レジスタ211〜222にリセット信号RST
が入力されると、その内容が0にされる。
The reset signal RST is output at the effective video start timing of each field in the input video signal, and is sent to each of the luminance integration registers 211 to 222. A reset signal RST is sent to each of the brightness integration registers 211 to 222.
Is input, the content is set to 0.

【0048】出力タイミング信号DOUTは、図3に示
すように、入力映像信号の垂直位置が、最下段の視差算
出領域E12の下端の垂直位置を越えた時点から一定期
間だけ、Hレベルとなる。出力タイミング信号DOUT
は、CPU3に送られる。
As shown in FIG. 3, the output timing signal DOUT is at the H level for a certain period from the time when the vertical position of the input video signal exceeds the vertical position at the lower end of the lowermost parallax calculation area E12. Output timing signal DOUT
Is sent to the CPU 3.

【0049】入力映像信号における有効映像開始タイミ
ングにリセット信号が出力され、各輝度積算レジスタ2
11〜222の内容が0にされる。入力映像信号の水平
垂直位置が第1の視差算出領域E1内である場合には、
第1のイネーブル信号EN1がHレベルとなるので、第
1の輝度積算レジスタ211に保持されている輝度値が
選択回路204を介して加算回路202に送られるとと
もに、入力映像信号におけるY信号が加算回路202に
入力する。
A reset signal is output at the effective video start timing of the input video signal,
The contents of 11 to 222 are set to 0. When the horizontal / vertical position of the input video signal is within the first parallax calculation area E1,
Since the first enable signal EN1 is at the H level, the luminance value held in the first luminance integration register 211 is sent to the addition circuit 202 via the selection circuit 204, and the Y signal in the input video signal is added. Input to the circuit 202.

【0050】したがって、第1の輝度積算レジスタ21
1に保持されていた輝度値と、入力映像信号におけるY
信号とが加算回路202によって加算され、その加算結
果が第1の輝度積算レジスタ211に格納される。つま
り、入力映像信号の水平垂直位置が第1の視差算出領域
E1内である場合においては、第1の視差算出領域E1
内の画素の輝度値が積算されていき、その積算結果が第
1の輝度積算レジスタ211に蓄積される。
Therefore, the first luminance integrating register 21
1 and the Y value in the input video signal.
The signal and the signal are added by the adding circuit 202, and the result of the addition is stored in the first luminance integration register 211. That is, when the horizontal and vertical positions of the input video signal are within the first parallax calculation area E1, the first parallax calculation area E1
The luminance values of the pixels within are accumulated, and the accumulation result is accumulated in the first luminance accumulation register 211.

【0051】このようにして、各視差算出領域E1〜E
12ごとの輝度積算値が、対応する輝度積算レジスタ2
11〜222に蓄積される。そして、出力タイミング信
号DOUTがHレベルとなると、各輝度積算レジスタ2
11〜222に蓄積されている各視差算出領域E1〜E
12ごとの輝度積算値が、CPU3にデータバス(DA
TA−BUS)を介して送られる。
In this manner, each of the parallax calculation areas E1 to E
The brightness integration value for each of the 12 is stored in the corresponding brightness integration register 2
11 to 222. When the output timing signal DOUT becomes H level, each of the brightness integration registers 2
Each of the parallax calculation areas E1 to E stored in 11 to 222
The integrated luminance value for each of the CPUs 12 is sent to the data bus (DA
TA-BUS).

【0052】図5は、高周波成分積算回路8の構成を示
している。
FIG. 5 shows the configuration of the high frequency component integrating circuit 8.

【0053】高周波成分積算回路8は、タイミング信号
発生回路231、ハイパスフィルタ(HPF)232、
絶対値化回路233、スライス処理回路234、加算回
路235および高周波成分積算レジスタ群236および
選択回路237を備えている。高周波成分積算レジスタ
群236は、各視差算出領域E1〜E12にそれぞれ対
応した第1〜第12の高周波成分積算レジスタ241〜
252を備えている。
The high-frequency component integrating circuit 8 includes a timing signal generating circuit 231, a high-pass filter (HPF) 232,
An absolute value conversion circuit 233, a slice processing circuit 234, an addition circuit 235, a high frequency component integration register group 236, and a selection circuit 237 are provided. The high-frequency component accumulation register group 236 includes first to twelfth high-frequency component accumulation registers 241 to 241 corresponding to the parallax calculation areas E1 to E12, respectively.
252.

【0054】タイミング信号発生回路231の入力信号
および出力信号は、図4のタイミング信号発生回路20
1の入力信号および出力信号と同じである。
The input signal and the output signal of the timing signal generation circuit 231 correspond to the timing signal generation circuit 20 shown in FIG.
1 is the same as the input signal and the output signal.

【0055】ハイパスフィルタ232としては、たとえ
ば、図6に示すように、5つのDフリップフロップ26
1〜265、入力値の2倍の出力を得るためのビットシ
フト回路266、加算器267および減算器268から
なる、−1、0、2、0および−1のタップ係数を持つ
ハイパスフィルタが用いられる。
As the high-pass filter 232, for example, as shown in FIG.
A high-pass filter having tap coefficients of −1, 0, 2, 0 and −1 including a bit shift circuit 266 for obtaining an output twice as large as the input value, an adder 267 and a subtractor 268 is used. Can be

【0056】また、スライス処理回路234としては、
図7に示すような入出力特性を有する回路が用いられ
る。0〜Iaまでの入力に対しては、出力を0としてい
るのは、ノイズが高周波成分として抽出されないように
するためである。
Further, as the slice processing circuit 234,
A circuit having input / output characteristics as shown in FIG. 7 is used. The output is set to 0 for inputs from 0 to Ia in order to prevent noise from being extracted as a high-frequency component.

【0057】したがって、入力映像信号におけるY信号
の高周波成分がハイパスフィルタ232によって抽出さ
れ、その絶対値が絶対値化回路233により得られ、ス
ライス処理回路234によって高周波成分の絶対値から
ノイズが除去される。
Therefore, the high-frequency component of the Y signal in the input video signal is extracted by the high-pass filter 232, the absolute value is obtained by the absolute value circuit 233, and the slice processing circuit 234 removes noise from the absolute value of the high-frequency component. You.

【0058】入力映像信号における有効映像開始タイミ
ングにリセット信号が出力され、各高周波成分積算レジ
スタ241〜252の内容が0にされる。入力映像信号
の水平垂直位置が第1の視差算出領域E1内である場合
には、第1のイネーブル信号EN1がHレベルとなるの
で、第1の高周波成分積算レジスタ241に保持されて
いる高周波成分が選択回路237を介して加算回路23
5に送られるとともに、入力映像信号におけるY信号の
高周波成分(スライス処理回路234の出力)が加算回
路235に入力する。
A reset signal is output at the effective video start timing of the input video signal, and the contents of each of the high frequency component integration registers 241 to 252 are set to 0. When the horizontal / vertical position of the input video signal is within the first parallax calculation area E1, the first enable signal EN1 is at the H level, so that the high-frequency component held in the first high-frequency component integration register 241 is stored. Is added through the selection circuit 237 to the addition circuit 23.
5 and the high frequency component of the Y signal in the input video signal (the output of the slice processing circuit 234) is input to the addition circuit 235.

【0059】したがって、第1の高周波成分積算レジス
タ241に保持されていた高周波成分と、入力映像信号
におけるY信号の高周波成分とが加算回路235によっ
て加算され、その加算結果が第1の高周波成分積算レジ
スタ241に格納される。つまり、入力映像信号の水平
垂直位置が第1の視差算出領域E1内である場合におい
ては、第1の視差算出領域E1内の画素の高周波成分が
積算されていき、その積算結果が第1の高周波成分積算
レジスタ241に蓄積される。
Therefore, the high-frequency component held in the first high-frequency component integration register 241 and the high-frequency component of the Y signal in the input video signal are added by the addition circuit 235, and the addition result is added to the first high-frequency component integration. It is stored in the register 241. That is, when the horizontal and vertical positions of the input video signal are within the first parallax calculation area E1, the high-frequency components of the pixels in the first parallax calculation area E1 are integrated, and the integration result is the first. It is stored in the high frequency component integration register 241.

【0060】このようにして、各視差算出領域E1〜E
12ごとの高周波成分の積算値が、対応する高周波成分
積算レジスタ241に蓄積される。そして、出力タイミ
ング信号DOUTがHレベルとなると、各高周波成分積
算レジスタ241〜252に蓄積されている各視差算出
領域E1〜E12ごとの高周波成分の積算値が、CPU
3にデータバスを介して送られる。
In this manner, the parallax calculation areas E1 to E
The integrated value of the high frequency component for each 12 is stored in the corresponding high frequency component integration register 241. When the output timing signal DOUT becomes H level, the integrated value of the high frequency component for each of the parallax calculation areas E1 to E12 stored in each of the high frequency component integration registers 241 to 252 is determined by the CPU.
3 via the data bus.

【0061】図8は、高周波成分積算回路8の他の例を
示している。
FIG. 8 shows another example of the high frequency component integrating circuit 8.

【0062】この高周波成分積算回路8は、タイミング
信号発生回路238、ハイパスフィルタ232、ピーク
検出回路239、加算回路235、高周波成分積算レジ
スタ群236および選択回路237を備えている。
The high-frequency component integrating circuit 8 includes a timing signal generating circuit 238, a high-pass filter 232, a peak detecting circuit 239, an adding circuit 235, a high-frequency component integrating register group 236, and a selecting circuit 237.

【0063】タイミング信号発生回路238は、図4の
タイミング信号発生回路201とほぼ同じであるが、図
3に示すように、入力映像信号の水平位置が、視差算出
領域E1、E5、E9の直前の水平位置および各視差算
出領域E1〜E12の最後尾の水平位置に達したとき
に、トリガパルス(領域境界信号RST1) が出力され
る点が、図4のタイミング信号発生回路201と異なっ
ている。領域境界信号RST1は、ピーク検出回路23
9に送られる。
The timing signal generation circuit 238 is almost the same as the timing signal generation circuit 201 of FIG. 4, but as shown in FIG. 3, the horizontal position of the input video signal is set immediately before the parallax calculation areas E1, E5, E9. 4 is different from the timing signal generating circuit 201 in FIG. 4 in that a trigger pulse (region boundary signal RST1) is output when the horizontal position of the image and the horizontal position at the end of each of the parallax calculation regions E1 to E12 are reached. . The region boundary signal RST1 is supplied to the peak detection circuit 23
9

【0064】ハイパスフィルタ232によって抽出され
たY信号の高周波成分は、ピーク検出回路239に送ら
れる。ピーク検出回路239は、各視差算出領域E1〜
E12内の各水平ラインごとに、高周波成分の最大値を
検出する。ピーク検出回路239としては、図9に示す
ように、比較回路271、最大値レジスタ272および
ゲート273を備えたものが用いられる。図10は、入
力映像信号の水平同期信号Hsync、領域境界信号R
ST1、ゲート273等の出力を示している。
The high frequency component of the Y signal extracted by the high pass filter 232 is sent to a peak detection circuit 239. The peak detection circuit 239 controls each of the parallax calculation areas E1 to E1.
The maximum value of the high frequency component is detected for each horizontal line in E12. As shown in FIG. 9, the peak detection circuit 239 includes a comparison circuit 271, a maximum value register 272, and a gate 273. FIG. 10 shows a horizontal synchronizing signal Hsync of an input video signal and a region boundary signal R.
The output of ST1, the gate 273, etc. is shown.

【0065】最大値レジスタ272には、ハイパスフィ
ルタ232によって抽出されたY信号の高周波成分、領
域境界信号RST1、比較回路271の判定結果信号L
aおよびクロック信号CLKが入力される。比較回路2
71は、最大値レジスタ272の出力と入力映像信号に
おけるY信号の高周波成分とを比較し、Y信号の高周波
成分が最大値レジスタ272の出力より大きいときに、
判定結果信号LaをHレベルにする。
The maximum value register 272 includes a high-frequency component of the Y signal extracted by the high-pass filter 232, an area boundary signal RST 1, and a determination result signal L of the comparison circuit 271.
a and the clock signal CLK are input. Comparison circuit 2
71 compares the output of the maximum value register 272 with the high frequency component of the Y signal in the input video signal, and when the high frequency component of the Y signal is larger than the output of the maximum value register 272,
The determination result signal La is set to the H level.

【0066】領域境界信号RST1がHレベルになる
と、最大値レジスタ272の内容は0にされる。領域境
界信号RST1がLレベルである状態において、比較回
路271からの判定結果信号L1がHレベルであれば、
Y信号の高周波成分が最大値レジスタ272に格納され
る。つまり、最大値レジスタ272の内容が更新され
る。したがって、最大値レジスタ272には、領域境界
信号RST1がLレベルである期間ごとに、入力映像信
号の水平垂直位置に対応する視差算出領域E1〜E12
内の1水平ラインの各画素に対するY信号の高周波成分
のうちの最大値が蓄積される。
When the region boundary signal RST1 goes high, the contents of the maximum value register 272 are set to zero. If the determination result signal L1 from the comparison circuit 271 is at the H level while the region boundary signal RST1 is at the L level,
The high frequency component of the Y signal is stored in the maximum value register 272. That is, the contents of the maximum value register 272 are updated. Therefore, the maximum value register 272 stores the parallax calculation areas E1 to E12 corresponding to the horizontal and vertical positions of the input video signal every time the area boundary signal RST1 is at the L level.
The maximum value of the high frequency components of the Y signal for each pixel of one horizontal line is stored.

【0067】ゲート273は、領域境界信号RST1が
Hレベルになると、最大値レジスタ272の出力値を出
力し、領域境界信号RST1がLレベルのときには0を
出力する。つまり、ゲート回路273からは、領域境界
信号RST1がHレベルになるごとに、最大値レジスタ
272に蓄積されていた所定の視差算出領域E1〜E1
2内の1水平ラインに対するY信号の高周波成分の最大
値が出力される。したがって、各高周波成分積算レジス
タ241〜252(図8参照)には、対応する視差算出
領域内の各水平ラインに対するY信号の高周波成分の最
大値の積算値が蓄積されることになる。
Gate 273 outputs the output value of maximum value register 272 when region boundary signal RST1 attains H level, and outputs 0 when region boundary signal RST1 is at L level. That is, every time the region boundary signal RST1 becomes H level, the gate circuit 273 outputs the predetermined parallax calculation regions E1 to E1 stored in the maximum value register 272.
The maximum value of the high frequency component of the Y signal for one horizontal line in 2 is output. Therefore, the integrated value of the maximum value of the high frequency component of the Y signal for each horizontal line in the corresponding parallax calculation area is accumulated in each of the high frequency component integration registers 241 to 252 (see FIG. 8).

【0068】図11は、輝度コントラスト算出回路9の
構成を示している。
FIG. 11 shows the configuration of the luminance contrast calculation circuit 9.

【0069】輝度コントラスト算出回路9は、タイミン
グ信号発生回路301および輝度コントラスト検出回路
群302を備えている。輝度コントラスト検出回路群3
02は、各視差算出領域E1〜E12にそれぞれ対応し
た第1〜第12の輝度コントラスト検出回路311〜3
22を備えている。
The luminance contrast calculation circuit 9 includes a timing signal generation circuit 301 and a luminance contrast detection circuit group 302. Brightness / contrast detection circuit group 3
02 denotes first to twelfth luminance contrast detection circuits 311 to 311 corresponding to the parallax calculation areas E1 to E12, respectively.
22.

【0070】タイミング信号発生回路301の入力信号
および出力信号は、図4のタイミング信号発生回路20
1の入力信号および出力信号と同じである。
The input signal and the output signal of the timing signal generation circuit 301 correspond to the timing signal generation circuit 20 shown in FIG.
1 is the same as the input signal and the output signal.

【0071】各輝度コントラスト検出回路311〜32
2は、図12に示すように、第1の比較回路331、最
大値レジスタ332、第2の比較回路333、最小値レ
ジスタ334および減算器335を備えている。
Each of the luminance contrast detection circuits 311 to 32
2, includes a first comparison circuit 331, a maximum value register 332, a second comparison circuit 333, a minimum value register 334, and a subtractor 335, as shown in FIG.

【0072】最大値レジスタ332には、入力映像信号
におけるY信号、当該輝度コントラスト検出回路に対応
する領域E1〜E12のイネーブル信号EN(N=1、
2…12)、リセット信号RST、第1の比較回路33
1から出力される判定信号Lbおよびクロック信号CL
Kが入力している。第1の比較回路331は、最大値レ
ジスタ332の出力値と入力映像信号におけるY信号と
を比較し、入力映像信号におけるY信号が最大値レジス
タ332の出力値より大きいときに判定信号LbをHレ
ベルにする。
The maximum value register 332 stores the Y signal in the input video signal and the enable signal EN (N = 1, N = 1, E2) in the areas E1 to E12 corresponding to the luminance contrast detection circuit.
2... 12), reset signal RST, first comparison circuit 33
1 and the clock signal CL
K is input. The first comparison circuit 331 compares the output value of the maximum value register 332 with the Y signal of the input video signal, and when the Y signal of the input video signal is larger than the output value of the maximum value register 332, sets the determination signal Lb to H. To level.

【0073】リセット信号RSTがHレベルになると、
最大値レジスタ332の内容は0にされる。当該輝度コ
ントラスト検出回路に対応する領域E1〜E12のイネ
ーブル信号ENがHレベルでありかつ判定信号LbがH
レベルのときに、Y信号が最大値レジスタ332に格納
される。つまり、最大値レジスタ332の内容が更新さ
れる。したがって、出力タイミング信号DOUTが出力
される直前においては、最大値レジスタ332には、当
該輝度コントラスト検出回路に対応する視差算出領域E
1〜E12内の各画素の輝度値のうちの最大値が蓄積さ
れる。
When the reset signal RST goes high,
The contents of the maximum value register 332 are set to 0. The enable signals EN of the areas E1 to E12 corresponding to the luminance contrast detection circuit are at the H level and the determination signal Lb is at the H level.
When the signal is at the level, the Y signal is stored in the maximum value register 332. That is, the contents of the maximum value register 332 are updated. Therefore, immediately before the output timing signal DOUT is output, the maximum value register 332 stores the parallax calculation area E corresponding to the luminance contrast detection circuit.
The maximum value of the luminance values of the pixels in 1 to E12 is accumulated.

【0074】最小値レジスタ334には、入力映像信号
におけるY信号、当該輝度コントラスト検出回路に対応
する領域E1〜E12のイネーブル信号EN(N=1、
2…12)、リセット信号RST、第2の比較回路33
3から出力される判定信号Lcおよびクロック信号CL
Kが入力している。第2の比較回路334は、最小値レ
ジスタ334の出力値と入力映像信号におけるY信号と
を比較し、入力映像信号におけるY信号が最小値レジス
タ334の出力値より小さいときに判定信号LcをHレ
ベルにする。
The minimum value register 334 stores the Y signal of the input video signal and the enable signal EN (N = 1, N = 1, E2) in the areas E1 to E12 corresponding to the luminance contrast detection circuit.
2... 12), reset signal RST, second comparison circuit 33
3 and the clock signal CL output from
K is input. The second comparison circuit 334 compares the output value of the minimum value register 334 with the Y signal of the input video signal, and when the Y signal of the input video signal is smaller than the output value of the minimum value register 334, sets the determination signal Lc to H. To level.

【0075】リセット信号RSTがHレベルになると、
最小値レジスタ334に、予め定められた最大値が設定
される。当該輝度コントラスト検出回路に対応する領域
E1〜E12のイネーブル信号ENがHレベルでありか
つ判定信号LcがHレベルのときに、Y信号が最小値レ
ジスタ334に格納される。つまり、最小値レジスタ3
34の内容が更新される。したがって、出力タイミング
信号DOUTが出力される直前においては、最小値レジ
スタ334には、当該輝度コントラスト検出回路に対応
する視差算出領域E1〜E12内の各画素の輝度値のう
ちの最小値が蓄積される。
When the reset signal RST goes high,
A predetermined maximum value is set in the minimum value register 334. When the enable signals EN of the areas E1 to E12 corresponding to the luminance contrast detection circuit are at the H level and the determination signal Lc is at the H level, the Y signal is stored in the minimum value register 334. That is, the minimum value register 3
34 is updated. Therefore, immediately before the output timing signal DOUT is output, the minimum value of the luminance values of the pixels in the parallax calculation areas E1 to E12 corresponding to the luminance contrast detection circuit is accumulated in the minimum value register 334. You.

【0076】この結果、出力タイミング信号DOUTが
出力される時点においては、減算器335の出力は、対
応する視差算出領域E1〜E12内の各画素の輝度値の
うちの最大値と最小値との差(輝度コントラスト)に対
応した値となる。そして、出力タイミング信号DOUT
が出力されると、減算器335の出力(輝度コントラス
ト)がCPU3に送られる。
As a result, at the point in time when the output timing signal DOUT is output, the output of the subtracter 335 is the difference between the maximum value and the minimum value of the luminance values of the pixels in the corresponding parallax calculation areas E1 to E12. The value corresponds to the difference (luminance contrast). Then, the output timing signal DOUT
Is output, the output (luminance contrast) of the subtractor 335 is sent to the CPU 3.

【0077】図13は、彩度積算回路10の構成を示し
ている。
FIG. 13 shows the structure of the saturation accumulating circuit 10.

【0078】彩度積算回路10は、タイミング信号発生
回路341、彩度算出回路342、加算回路343、彩
度積算レジスタ群344および選択回路345を備えて
いる。彩度積算レジスタ群344は、各視差算出領域E
1〜E12にそれぞれ対応した第1〜第12の彩度積算
レジスタ351〜362を備えている。
The saturation integration circuit 10 includes a timing signal generation circuit 341, a saturation calculation circuit 342, an addition circuit 343, a saturation integration register group 344, and a selection circuit 345. The saturation integration register group 344 stores the parallax calculation areas E
There are first to twelfth saturation integration registers 351 to 362 corresponding to 1 to E12, respectively.

【0079】タイミング信号発生回路341の入力信号
および出力信号は、図4のタイミング信号発生回路20
1の入力信号および出力信号と同じである。
The input signal and the output signal of the timing signal generation circuit 341 are the same as those of the timing signal generation circuit 20 shown in FIG.
1 is the same as the input signal and the output signal.

【0080】彩度算出回路342は、入力映像信号にお
けるR−Y信号の値を(R−Y)とし、入力映像信号に
おけるB−Y信号の値を(B−Y)として、次の数式1
の演算を行なって、彩度に対応する値SAIを求める。
The saturation calculation circuit 342 sets the value of the RY signal in the input video signal to (RY) and the value of the BY signal in the input video signal to (BY), and calculates the following equation (1).
To obtain the value SAI corresponding to the saturation.

【0081】[0081]

【数1】 (Equation 1)

【0082】入力映像信号における有効映像開始タイミ
ングにリセット信号RSTが出力され、各彩度積算レジ
スタ351〜362の内容が0にされる。入力映像信号
の水平垂直位置が第1の視差算出領域E1内である場合
には、第1のイネーブル信号EN1がHレベルとなるの
で、第1の彩度積算レジスタ351に保持されている彩
度が選択回路345を介して加算回路343に送られる
とともに、彩度算出回路342によって演算された彩度
が加算回路343に入力する。
A reset signal RST is output at the effective video start timing of the input video signal, and the contents of the saturation integration registers 351 to 362 are set to 0. When the horizontal / vertical position of the input video signal is within the first parallax calculation area E1, the first enable signal EN1 is at the H level, and thus the saturation held in the first saturation integration register 351 is stored. Is sent to the addition circuit 343 via the selection circuit 345, and the saturation calculated by the saturation calculation circuit 342 is input to the addition circuit 343.

【0083】したがって、第1の彩度積算レジスタ35
1に保持されている彩度と、彩度算出回路342によっ
て演算された彩度とが加算回路343によって加算さ
れ、その加算結果が第1の彩度積算レジスタ351に格
納される。つまり、入力映像信号の水平垂直位置が第1
の視差算出領域E1内である場合においては、第1の視
差算出領域E1内の画素の彩度が積算されていき、その
積算結果が第1の彩度積算レジスタ351に蓄積され
る。
Therefore, the first saturation integration register 35
The saturation held at 1 and the saturation calculated by the saturation calculation circuit 342 are added by the addition circuit 343, and the addition result is stored in the first saturation integration register 351. That is, the horizontal and vertical positions of the input video signal
Is within the parallax calculation area E1, the saturation of the pixels in the first parallax calculation area E1 is accumulated, and the accumulation result is accumulated in the first saturation accumulation register 351.

【0084】このようにして、各視差算出領域E1〜E
12ごとの彩度の積算値が、対応する彩度積算レジスタ
351〜362に蓄積される。そして、出力タイミング
信号DOUTがHレベルとなると、各彩度積算レジスタ
351〜362に蓄積されている各視差算出領域E1〜
E12ごとの彩度の積算値が、CPU3にデータバスを
介して送られる。
Thus, the parallax calculation areas E1 to E
The integrated value of the saturation for each 12 is stored in the corresponding saturation integration registers 351 to 362. When the output timing signal DOUT becomes H level, the parallax calculation areas E1 to E1 stored in the saturation integration registers 351 to 362 are stored.
The integrated value of the saturation for each E12 is sent to the CPU 3 via the data bus.

【0085】図14は、CPU3によって行なわれる視
差量の算出方法を示している。
FIG. 14 shows a method of calculating the amount of parallax performed by the CPU 3.

【0086】第1の正規化手段401は、各視差算出領
域E1〜E12ごとの高周波成分の積算値を0〜10の
範囲の値に正規化する。第2の正規化手段402は、各
視差算出領域E1〜E12ごとの輝度コントラストを0
〜10の範囲の値に正規化する。第3の正規化手段40
3は、各視差算出領域E1〜E12ごとの輝度積算値を
0〜10の範囲の値に正規化する。第4の正規化手段4
04は、各視差算出領域E1〜E12ごとの彩度積算値
を0〜10の範囲の値に正規化する。
The first normalizing means 401 normalizes the integrated value of the high frequency component for each of the parallax calculation areas E1 to E12 to a value in the range of 0 to 10. The second normalization unit 402 sets the luminance contrast of each of the parallax calculation areas E1 to E12 to 0.
Normalize to a value in the range of -10. Third normalizing means 40
3 normalizes the integrated luminance value for each of the parallax calculation areas E1 to E12 to a value in the range of 0 to 10. Fourth normalizing means 4
A step 04 normalizes the saturation integration value for each of the parallax calculation areas E1 to E12 to a value in a range of 0 to 10.

【0087】正規化された各視差算出領域E1〜E12
ごとの高周波成分の積算値には、乗算手段405によっ
て係数K1が積算された後、加算手段409に送られ
る。正規化された各視差算出領域E1〜E12ごとの輝
度コントラストには、乗算手段406によって係数K2
が積算された後、加算手段409に送られる。正規化さ
れた各視差算出領域E1〜E12ごとの輝度積算値に
は、乗算手段407によって係数K3が積算された後、
加算手段409に送られる。正規化された各視差算出領
域E1〜E12ごとの彩度積算値には、乗算手段408
によって係数K4が積算された後、加算手段409に送
られる。
Each normalized parallax calculation area E1 to E12
The integrated value of the high-frequency component for each is multiplied by the coefficient K1 by the multiplying unit 405 and then sent to the adding unit 409. The normalized luminance contrast for each of the parallax calculation areas E1 to E12 is added to the coefficient K2 by the multiplication unit 406.
Are accumulated and sent to the adding means 409. After the coefficient K3 is multiplied by the multiplication means 407 to the normalized luminance integrated value for each of the parallax calculation areas E1 to E12,
It is sent to the adding means 409. The normalized saturation integrated value for each of the parallax calculation areas E1 to E12 is multiplied by a multiplication unit 408.
After the coefficient K4 is integrated by the above, it is sent to the adding means 409.

【0088】係数K1、K2、K3、K4の具体例とし
ては、K1=0.6、K2=0.2、K3=0.1、K
4=0.1が挙げられる。また、K1=0.75、K2
=0.25、K3=0.0、K4=0.0が挙げられ
る。
As specific examples of the coefficients K1, K2, K3, K4, K1 = 0.6, K2 = 0.2, K3 = 0.1, K3
4 = 0.1. Also, K1 = 0.75, K2
= 0.25, K3 = 0.0, K4 = 0.0.

【0089】これらの係数K1〜K4の設定値を制御す
ることにより、高周波成分の積算値、輝度コントラス
ト、輝度積算値および彩度積算値のうちから選択された
任意の1つまたは任意の組み合わせを、映像の遠近に関
する画像特徴量として用いることができる。
By controlling the set values of these coefficients K1 to K4, any one or any combination selected from the integrated value of the high-frequency component, the luminance contrast, the integrated value of the luminance and the integrated value of the saturation can be obtained. , Can be used as an image feature amount related to the perspective of a video.

【0090】したがって、映像の遠近に関する画像特徴
量として、高周波成分の積算値のみを用いることもでき
る。映像の遠近に関する画像特徴量として、輝度コント
ラストのみを用いることもできる。映像の遠近に関する
画像特徴量として、高周波成分の積算値および輝度コン
トラストを用いることもできる。映像の遠近に関する画
像特徴量として、高周波成分の積算値、輝度コントラス
トおよび輝度積算値を用いることもできる。映像の遠近
に関する画像特徴量として、高周波成分の積算値、輝度
コントラストおよび彩度積算値を用いることもできる。
映像の遠近に関する画像特徴量として、高周波成分の積
算値、輝度コントラスト、輝度積算値および彩度積算値
を用いることもできる。
Therefore, only the integrated value of the high-frequency component can be used as the image feature amount relating to the perspective of the video. It is also possible to use only the luminance contrast as the image feature amount relating to the perspective of the video. The integrated value of the high-frequency component and the luminance contrast may be used as the image feature amount relating to the perspective of the video. An integrated value of a high-frequency component, a luminance contrast, and a luminance integrated value can also be used as the image feature amount relating to the perspective of a video. The integrated value of the high-frequency component, the luminance contrast, and the integrated value of the saturation can also be used as the image feature amount related to the perspective of the video.
The integrated value of the high-frequency component, the luminance contrast, the integrated luminance value, and the integrated chroma value can also be used as the image feature amount relating to the perspective of the video.

【0091】加算手段409では、各乗算手段405〜
408によって得られた各視差算出領域E1〜E12ご
との値が加算される。加算手段409によって得られた
各視差算出領域E1〜E12ごとの値は、第5の正規化
手段410によって、0〜10の範囲の値(以下、奥行
き情報という)に正規化される。図15は、加算手段4
09の出力値と第5の正規化手段410によって得られ
る奥行き情報との関係を示している。各視差算出領域E
1〜E12ごとの奥行き情報が、視差算出領域E1〜E
12ごとの映像の遠近に関する情報である。第5の正規
化手段410によって、得られた各視差算出領域E1〜
E12ごとの奥行き情報は、奥行き補正手段411に送
られる。
In the adding means 409, each of the multiplying means 405
The values for each of the parallax calculation areas E1 to E12 obtained by 408 are added. The value for each of the parallax calculation areas E1 to E12 obtained by the adding unit 409 is normalized by the fifth normalizing unit 410 to a value in the range of 0 to 10 (hereinafter, referred to as depth information). FIG.
9 shows the relationship between the output value of the value 09 and the depth information obtained by the fifth normalization means 410. Each parallax calculation area E
Depth information for each of E1 to E12 is used as a parallax calculation area E1 to E12.
This is information on the distance of the video for each of the twelve. Each of the parallax calculation areas E1 to E5 obtained by the fifth normalization unit 410
The depth information for each E12 is sent to the depth correction unit 411.

【0092】一般的な画像では、被写体が前方に存在
し、背景が後方に存在している。また、被写体に対して
ピントが合っている映像が多いため、近くにある物ほ
ど、高周波成分、コントラスト、輝度および彩度が高い
と考えられる。そこで、この実施の形態では、高周波成
分の積算値、輝度コントラスト、輝度積算値および彩度
積算値が大きい領域ほど、前方に存在する物体が写って
いると仮定している。
In a general image, a subject exists in the front and a background exists in the rear. Also, since there are many images that are in focus with respect to the subject, it is considered that the closer the object is, the higher the high-frequency component, contrast, brightness, and saturation are. Therefore, in the present embodiment, it is assumed that an object in front of an area where the integrated value of the high-frequency component, the luminance contrast, the integrated value of the luminance, and the integrated value of the saturation are larger is captured.

【0093】したがって、加算手段409によって得ら
れた奥行き情報が大きい領域ほど、前方に存在する物体
が写っている領域であると判断することができる。最も
前方に存在する物体が写っている領域の立体視位置を立
体表示装置の管面位置に設定すると、加算手段409に
よって得られた奥行き情報と、管面位置からの奥行き量
とは反比例する。
Therefore, it can be determined that the region where the depth information obtained by the adding means 409 is larger is the region where the object existing ahead is captured. When the stereoscopic position of the region in which the object present in the forefront is captured is set as the tube position of the stereoscopic display device, the depth information obtained by the adding unit 409 is inversely proportional to the depth from the tube position.

【0094】以下、奥行き補正手段411による奥行き
補正処理について説明する。
Hereinafter, the depth correction processing by the depth correction means 411 will be described.

【0095】奥行き補正処理については、実際に設定さ
れている視差算出領域を例にとって説明したほうが理解
しやいすいので、1フィールドに対して実際に設定され
ている60個の視差算出領域を例にとって、奥行き補正
手段411による奥行き補正処理を説明する。図16
は、1フィールドに対して実際に設定されている60個
の視差算出領域F1〜F60を示している。
It is easier to understand the depth correction processing by taking the actually set parallax calculation area as an example. Therefore, the 60 parallax calculation areas actually set for one field will be explained. The depth correction processing by the depth correction unit 411 will be described. FIG.
Indicates 60 parallax calculation areas F1 to F60 actually set for one field.

【0096】まず、視差算出領域F1〜F60の各行ご
とに、奥行き情報の平均値が算出される。各視差算出領
域F1〜F60ごとの奥行き情報が図17に示すような
値であった場合には、第1〜第6行目ごとの奥行き情報
の平均値は、1.2、3.6、6.0、7.2、4.
0、1.2となる。
First, an average value of depth information is calculated for each row of the parallax calculation areas F1 to F60. When the depth information for each of the parallax calculation areas F1 to F60 has a value as shown in FIG. 17, the average value of the depth information for each of the first to sixth rows is 1.2, 3.6, 6.0, 7.2, 4.
0 and 1.2.

【0097】次に、視差算出領域の各行のうち、手前位
置の物体が多く映っている領域が抽出される。つまり、
奥行き情報の平均値が最も大きい行が抽出される。図1
7の例では、第4行目の領域が抽出される。
Next, from each row of the parallax calculation area, an area where many objects at the near position are reflected is extracted. That is,
The row having the largest average value of the depth information is extracted. FIG.
In the example of 7, the area of the fourth row is extracted.

【0098】次に、抽出された行より下段にある行の各
領域については、直上の領域に対して、急激に奥行き情
報が小さくならないように、抽出された行より下段にあ
る行の各領域の奥行き情報が調整される。具体的には、
抽出された行より下段にある行の各領域の奥行き情報が
直上の領域に対して3以上小さい領域に対しては、直上
の領域の奥行き情報より2だけ小さい値に、その領域の
奥行き情報が変更せしめられる。
Next, with respect to each area of the row below the extracted row, each area of the row below the extracted row is compared with the area immediately above so that the depth information does not suddenly decrease. Is adjusted. In particular,
For an area in which the depth information of each area in the row below the extracted row is smaller than the area immediately above by 3 or more, the depth information of the area is set to a value smaller by 2 than the depth information of the area immediately above. Can be changed.

【0099】図17の例では、図18に示すように、ま
ず、第5行の各領域F41〜F50のうち、その奥行き
情報が直上の領域の奥行き情報に対して3以上小さい領
域F42〜F49に対して、奥行き情報が補正される。
この後、第6行の各領域F51〜F60のうち、その奥
行き情報が直上の領域の奥行き情報(補正後の奥行き情
報)に対して3以上小さい領域F53〜F58に対し
て、奥行き情報が補正される。
In the example of FIG. 17, as shown in FIG. 18, first, among the regions F41 to F50 in the fifth row, regions F42 to F49 whose depth information is smaller than the depth information of the region immediately above by three or more. , The depth information is corrected.
Thereafter, the depth information is corrected for the regions F53 to F58 of the regions F51 to F60 in the sixth row whose depth information is smaller than the depth information (corrected depth information) of the region immediately above by three or more. Is done.

【0100】つまり、任意の水平位置における画面の高
さに対する奥行き情報の関係が、図19に曲線U1で示
すような関係である場合には、奥行き補正によって、画
面の高さに対する奥行き情報の関係が、図19に曲線U
2に示すような関係となるように補正される。
That is, when the relationship of the depth information with respect to the screen height at an arbitrary horizontal position is a relationship as shown by the curve U1 in FIG. 19, the relationship between the depth information and the screen height is corrected by the depth correction. However, FIG.
The correction is made so as to have the relationship shown in FIG.

【0101】このように、視差算出領域の各行のうち、
手前位置の物体が多く映っている領域より下段の領域の
奥行き情報が補正されているのは次の理由による。
As described above, among the rows in the parallax calculation area,
The reason that the depth information of the area below the area where many objects at the near position are reflected is corrected for the following reason.

【0102】一般的には、画面の下側には前方に存在す
る物体が映っていることが多い。また、画面の下側に映
っている物体は、地面等のように変化の少ない画像であ
ることが多い。地面等のように変化の少ない画像は、高
周波成分が低いため、前方にあるにも係わらず、奥行き
情報の値は小さくなる。そこで、奥行き補正により、前
方にある物体であって高周波成分が低い映像に対する奥
行き情報を、その直上の領域の奥行き情報の値より大き
くならない程度に大きくしているのである。
In general, an object existing in front is often displayed on the lower side of the screen. Further, the object reflected on the lower side of the screen is often an image with little change such as the ground. An image with little change, such as the ground, has a low high-frequency component, so that the value of the depth information is small even though it is ahead. Therefore, depth information is increased by depth correction so that the depth information of an image located in front of the object and having a low high-frequency component is not larger than the value of the depth information of the area immediately above the image.

【0103】奥行き補正手段411によって奥行き情報
が補正された各領域(実際はF1〜F60であるが、説
明の便宜上E1〜E12とする)ごとの奥行き情報は、
再正規化手段412によって、0〜10の範囲内で正規
化される。再正規化手段412によって得られた各領域
E1〜E12ごとの奥行き情報は、視差情報決定手段4
13によって、各領域E1〜E12ごとの視差情報に変
換される。
Depth information for each area (actually F1 to F60, but E1 to E12 for convenience of explanation) whose depth information has been corrected by the depth correction means 411 is as follows.
The renormalization means 412 normalizes the data within the range of 0 to 10. The depth information for each of the areas E1 to E12 obtained by the re-normalization means 412 is
13 is converted into parallax information for each of the regions E1 to E12.

【0104】視差情報決定手段413は、予め設定され
た奥行き情報に対する視差情報との関係に基づいて、各
領域E1〜E12ごとに、奥行き情報を視差情報に変換
する。奥行き情報に対する視差情報との関係は、図20
に直線S1またはS2で示されるように、反比例の関係
である。
The parallax information determining means 413 converts the depth information into parallax information for each of the regions E1 to E12 based on the relationship between the predetermined depth information and the parallax information. The relationship between depth information and disparity information is shown in FIG.
Are inversely proportional as shown by the straight line S1 or S2.

【0105】図20において、直線S1で示される奥行
き情報に対する視差情報との関係は、立体感が比較的強
い立体映像を得たい場合に用いられる。直線S2で示さ
れる奥行き情報に対する視差情報との関係は、立体感が
比較的弱い立体映像を得たい場合に用いられる。奥行き
情報に対する視差情報との関係を、直線S1と直線S2
との間で調整することにより、立体感を調整することが
可能である。
In FIG. 20, the relationship between the depth information indicated by the straight line S1 and the parallax information is used when a stereoscopic image having a relatively strong stereoscopic effect is desired to be obtained. The relationship between the depth information indicated by the straight line S2 and the parallax information is used when it is desired to obtain a stereoscopic image having a relatively weak stereoscopic effect. The relationship between the depth information and the parallax information is represented by a straight line S1 and a straight line S2.
It is possible to adjust the three-dimensional effect by adjusting between.

【0106】このようにして得られた各領域E1〜E1
2ごとの視差情報は、視差制御回路4(図2参照)に送
られる。なお、奥行き補正手段411による奥行き補正
を省略してもよい。
Each of the regions E1 to E1 thus obtained
The disparity information for each 2 is sent to the disparity control circuit 4 (see FIG. 2). Note that the depth correction by the depth correction unit 411 may be omitted.

【0107】図21は、主として、図2の視差制御回路
および任意画素遅延FIFOの構成を示している。
FIG. 21 mainly shows the configuration of the parallax control circuit and the arbitrary pixel delay FIFO shown in FIG.

【0108】図21には、任意画素遅延FIFO11〜
13、21〜23のうち、Y信号に対する左映像用任意
画素遅延FIFO11および右映像用任意画素遅延FI
FO21しか示されていないが、他の任意画素遅延FI
FO12、13、22、23も同様な構成でありかつ同
様な制御が行なわれるので、他の任意画素遅延FIFO
12、13、22、23の構成および制御方法について
は、その説明を省略する。
FIG. 21 shows an arbitrary pixel delay FIFO 11 to 11.
13, 21 to 23, left image arbitrary pixel delay FIFO 11 and right image arbitrary pixel delay FI for Y signal
Although only FO21 is shown, other arbitrary pixel delays FI
FO12, 13, 22, and 23 have the same configuration and perform the same control, so that other arbitrary pixel delay FIFOs
Descriptions of the configurations and control methods of 12, 13, 22, and 23 are omitted.

【0109】ところで、CPU3によって算出された視
差情報は、各視差算出領域E1〜E12の中心位置に対
する視差情報である。視差制御回路4では、各視差算出
領域E1〜E12の中心位置に対する視差情報に基づい
て、1フィールド画面の各画素位置に対する視差情報が
求められる。そして、各画素位置に対する2次元映像信
号から、その画素位置に対する視差情報に応じた視差を
有する左映像と右映像とを生成するために、各画素位置
に対する視差情報に基づいて、左映像用任意画素遅延F
IFO11〜13および右映像用任意画素遅延FIFO
21〜23の読み出しアドレスが制御される。
The disparity information calculated by the CPU 3 is disparity information for the center position of each of the disparity calculation areas E1 to E12. The parallax control circuit 4 obtains parallax information for each pixel position on a one-field screen based on the parallax information for the center position of each of the parallax calculation areas E1 to E12. Then, in order to generate a left image and a right image having parallax corresponding to the parallax information for the pixel position from the two-dimensional video signal for each pixel position, an arbitrary left video image is generated based on the parallax information for each pixel position. Pixel delay F
IFO 11-13 and right pixel arbitrary pixel delay FIFO
The read addresses 21 to 23 are controlled.

【0110】1フィールド画面の各画素位置に対する視
差情報は、タイミング信号発生回路51、視差補間係数
発生回路52、視差情報記憶手段60、視差選択回路8
0、第1〜第4乗算器81〜84および加算回路85に
よって、生成される。
The parallax information for each pixel position in one field screen is obtained by a timing signal generation circuit 51, a parallax interpolation coefficient generation circuit 52, a parallax information storage means 60, and a parallax selection circuit 8.
0, and is generated by the first to fourth multipliers 81 to 84 and the addition circuit 85.

【0111】入力映像信号の水平同期信号Hsyncお
よび垂直同期信号Vsyncは、タイミング信号発生回
路51に入力している。また、各水平期間の水平アドレ
スを検出するためのクロック信号CLKもタイミング信
号発生回路51に入力している。
The horizontal synchronizing signal Hsync and the vertical synchronizing signal Vsync of the input video signal are input to the timing signal generating circuit 51. Further, a clock signal CLK for detecting a horizontal address in each horizontal period is also input to the timing signal generation circuit 51.

【0112】タイミング信号発生回路51は、水平同期
信号Hsync、垂直同期信号Vsyncおよびクロッ
ク信号CLKに基づいて、入力映像信号の絶対的水平位
置を表す水平アドレス信号HAD、入力映像信号の絶対
的垂直位置を表す垂直アドレス信号VAD、入力映像信
号の相対的水平位置を表す相対的水平位置信号HPOS
および入力映像信号の相対的垂直位置を表す相対的垂直
位置信号VPOSを生成して出力する。
The timing signal generating circuit 51 generates a horizontal address signal HAD representing an absolute horizontal position of an input video signal and an absolute vertical position of the input video signal based on the horizontal synchronizing signal Hsync, the vertical synchronizing signal Vsync and the clock signal CLK. And a relative horizontal position signal HPOS representing the relative horizontal position of the input video signal.
And a relative vertical position signal VPOS indicating the relative vertical position of the input video signal is generated and output.

【0113】入力映像信号の相対的水平位置および相対
的垂直位置について説明する。
The relative horizontal position and the relative vertical position of the input video signal will be described.

【0114】図22に示すように、図3の視差算出領域
E1〜E12は、次のように設定されている。画面全体
が図22に点線で示すように、4行5列の20個の領域
(以下、第1分割領域という)に分割されている。そし
て、左上端の第1分割領域の中心、右上端の第1分割領
域の中心、左下端の第1分割領域の中心および右下端の
第1分割領域の中心を4頂点とする四角形領域が3行4
列の12個の領域(以下、第2分割領域という)に分割
され、各第2分割領域が視差算出領域E1〜E12とし
て設定されている。
As shown in FIG. 22, the parallax calculation areas E1 to E12 in FIG. 3 are set as follows. The entire screen is divided into 20 regions of 4 rows and 5 columns (hereinafter, referred to as a first divided region) as shown by a dotted line in FIG. Then, a quadrangular area having four vertices at the center of the first divided area at the upper left, the center of the first divided area at the upper right, the center of the first divided area at the lower left, and the center of the first divided area at the lower right is 3 Row 4
The column is divided into 12 regions (hereinafter, referred to as second divided regions), and each of the second divided regions is set as parallax calculation regions E1 to E12.

【0115】第1分割領域および第2分割領域の水平方
向の画素数がmで表され、第1分割領域および第2分割
領域の垂直方向の画素数がnとして表されている。入力
映像信号の相対的水平位置は、各第1分割領域の左端を
0とし、右端をmとして、0〜(m−1)で表される。
入力映像信号の相対的垂直位置は、各第1分割領域の上
端を0とし、下端をnとして、0〜(n−1)で表され
る。
The number of pixels in the horizontal direction of the first divided region and the second divided region is represented by m, and the number of pixels of the first divided region and the second divided region in the vertical direction is represented by n. The relative horizontal position of the input video signal is represented by 0 to (m-1), with the left end of each first divided area being 0 and the right end being m.
The relative vertical position of the input video signal is represented by 0 to (n-1), with the upper end of each first divided area being 0 and the lower end being n.

【0116】入力映像信号の相対的水平位置信号HPO
Sおよび相対的垂直位置VPOSは、視差補間係数発生
回路52に送られる。視差補間係数発生回路52は、相
対的水平位置信号HPOS、相対的垂直位置VPOSお
よび次の数式2に基づいて、第1視差補間係数KUL、
第2視差補間係数KUR、第3視差補間係数KDLおよ
び第4視差補間係数KDRを生成して出力する。
Relative horizontal position signal HPO of input video signal
S and the relative vertical position VPOS are sent to the parallax interpolation coefficient generation circuit 52. The parallax interpolation coefficient generation circuit 52 generates a first parallax interpolation coefficient KUL based on the relative horizontal position signal HPOS, the relative vertical position VPOS, and the following equation (2).
A second parallax interpolation coefficient KUR, a third parallax interpolation coefficient KDL, and a fourth parallax interpolation coefficient KDR are generated and output.

【0117】[0117]

【数2】 (Equation 2)

【0118】1フィールド画面の各画素位置に対する視
差情報を生成する方法の基本的な考え方について、図2
3を用いて説明する。水平アドレス信号HADおよび垂
直アドレス信号VADによって表されている水平垂直位
置(以下、注目位置という)が図23のPxyであると
する。注目位置Pxyに対する視差情報を求める場合に
ついて説明する。
FIG. 2 shows the basic concept of a method of generating disparity information for each pixel position on a one-field screen.
3 will be described. It is assumed that the horizontal / vertical position (hereinafter, referred to as a target position) represented by the horizontal address signal HAD and the vertical address signal VAD is Pxy in FIG. A case where parallax information for the target position Pxy is obtained will be described.

【0119】(1)まず、CPU3によって算出された
各視差算出領域E1〜E12に対する視差情報のうちか
ら、注目位置Pxyが含まれる第1分割領域の4頂点、
この例ではPE1、PE2、PE5、PE6を中心とす
る視差算出領域E1、E2、E5、E6に対する視差情
報が、それぞれUL、UR、DL、DRとして抽出され
る。つまり、注目位置Pxyが含まれる第1分割領域の
4頂点のうち、左上の頂点を中心とする領域E1の視差
情報が第1視差情報ULとして、右上の頂点を中心とす
る領域E2の視差情報が第2視差情報URとして、左下
の頂点を中心とする領域E5の視差情報が第3視差情報
DLとして、右下の頂点を中心とする領域E6の視差情
報が第4視差情報DRとして抽出される。
(1) First, from the parallax information for each of the parallax calculation areas E1 to E12 calculated by the CPU 3, four vertices of the first divided area including the target position Pxy,
In this example, disparity information for the disparity calculation areas E1, E2, E5, and E6 centered on PE1, PE2, PE5, and PE6 is extracted as UL, UR, DL, and DR, respectively. That is, of the four vertices of the first divided region including the target position Pxy, the disparity information of the region E1 centered on the upper left vertex is the first disparity information UL, and the disparity information of the region E2 centered on the upper right vertex is UL. Is extracted as the second disparity information UR, the disparity information of the region E5 centered on the lower left vertex is extracted as the third disparity information DL, and the disparity information of the region E6 centered on the lower right vertex is extracted as the fourth disparity information DR. You.

【0120】ただし、注目位置が含まれる第1分割領域
が、左上端の第1分割領域である場合のように、注目位
置が含まれる第1分割領域の4頂点のうち1つの頂点の
みが視差検出領域の中心に該当するような場合には、そ
の視差算出領域の視差情報が、第1〜第4の視差情報U
L、UR、DL、DRとして抽出される。
However, as in the case where the first divided area including the target position is the first divided area at the upper left corner, only one vertex of the four vertices of the first divided area including the target position is disparity. If the parallax information corresponds to the center of the detection area, the parallax information of the parallax calculation area is the first to fourth parallax information U
Extracted as L, UR, DL, DR.

【0121】また、注目位置が含まれる第1分割領域
が、左上端の第1分割領域の右隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち下側の2つの頂点のみが視差算出領域の中心に
該当するような場合には、注目位置が含まれる第1分割
領域の4頂点のうち上側の2つの頂点に対応する視差情
報UL、URとしては、その下側の頂点を中心とする視
差算出領域の視差情報が抽出される。
Further, as in the case where the first divided area including the target position is the first divided area to the right of the first divided area at the upper left corner, the four vertices of the first divided area including the target position are used. If only the lower two vertices of the first divided area correspond to the center of the parallax calculation area, the parallax information UL corresponding to the upper two vertices of the four vertices of the first divided area including the target position, As the UR, parallax information of a parallax calculation area centered on the lower vertex is extracted.

【0122】また、注目位置が含まれる第1分割領域
が、左上端の第1分割領域の下隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち右側の2つの頂点のみが視差算出領域の中心に
該当するような場合には、注目位置が含まれる第1分割
領域の4頂点のうち左側の2つの頂点に対応する視差情
報UL、DLとしては、その右側の頂点を中心とする視
差算出領域の視差情報が抽出される。
Also, as in the case where the first divided region including the target position is the first divided region below the first divided region at the upper left end, the four vertices of the first divided region including the target position are used. Among the four vertices of the first divided area including the position of interest, only the two vertices on the right correspond to the center of the parallax calculation area. , The parallax information of the parallax calculation area centered on the right vertex is extracted.

【0123】また、注目位置が含まれる第1分割領域
が、右下端の第1分割領域の左隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち上側の2つの頂点のみが視差算出領域の中心に
該当するような場合には、注目位置が含まれる第1分割
領域の4頂点のうち下側の2つの頂点に対応する視差情
報DL、DRとしては、その上側の頂点を中心とする視
差算出領域の視差情報が抽出される。
Also, as in the case where the first divided area including the target position is the first divided area on the left side of the first lower right divided area, the four vertices of the first divided area including the target position are used. If only the upper two vertices of the first divisional area correspond to the center of the parallax calculation area, the parallax information DL corresponding to the lower two vertices of the four vertices of the first divided area including the target position, As DR, parallax information of a parallax calculation area centered on the upper vertex is extracted.

【0124】また、注目位置が含まれる第1分割領域
が、右下端の第1分割領域の上隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち左側の2つの頂点のみが視差算出領域の中心に
該当するような場合には、注目位置が含まれる第1分割
領域の4頂点のうち右側の2つの頂点に対応する視差情
報UR、DRとしては、その左側の頂点を中心とする視
差算出領域の視差情報が抽出される。
Further, as in the case where the first divided region including the target position is the first divided region above and above the first divided region at the lower right, four vertices of the first divided region including the target position are used. Among the four vertices of the first divided area including the target position, only the two vertexes on the left side of the parallax calculation area correspond to the center of the parallax calculation area. , The parallax information of the parallax calculation area centered on the left vertex is extracted.

【0125】(2)次に、第1〜第4の視差補間係数K
UL、KUR、KDLおよびKDRが求められる。
(2) Next, the first to fourth parallax interpolation coefficients K
UL, KUR, KDL and KDR are required.

【0126】第1の視差補間係数KULは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの右辺までの距離ΔX
Rとの比{(m−HPOS)/m}と、第1分割領域e
の垂直方向幅nに対する、注目位置Pxyから第1分割
領域eの下辺までの距離ΔYDとの比{(n−VPO
S)/n}との積によって求められる。すなわち、第1
の視差補間係数KULは、注目位置Pxyを含む第1分
割領域eの左上頂点PE1と注目位置Pxyとの距離が
小さいほど大きくなる。
The first parallax interpolation coefficient KUL is determined by the target position P
xy, the distance ΔX from the target position Pxy to the right side of the first divided area e with respect to the horizontal width m of the first divided area e including xy
R and the ratio {(m-HPOS) / m} to the first divided region e
の (n−VPO) of the vertical width n to the distance ΔYD from the target position Pxy to the lower side of the first divided region e.
S) / n}. That is, the first
Is larger as the distance between the upper left vertex PE1 of the first divided area e including the target position Pxy and the target position Pxy is smaller.

【0127】第2の視差補間係数KURは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの左辺までの距離ΔX
Lとの比(HPOS/m}と、第1分割領域eの垂直方
向幅nに対する、注目位置Pxyから第1分割領域eの
下辺までの距離ΔYDとの比{(n−VPOS)/n}
との積によって求められる。すなわち、第2の視差補間
係数KURは、注目位置Pxyを含む第1分割領域eの
右上頂点PE2と注目位置Pxyとの距離が小さいほど
大きくなる。
The second parallax interpolation coefficient KUR is determined by the target position P
xy, the distance ΔX from the target position Pxy to the left side of the first divided region e with respect to the horizontal width m of the first divided region e
L (HPOS / m) and the ratio {(n-VPOS) / n} of the distance ΔYD from the target position Pxy to the lower side of the first divided region e with respect to the vertical width n of the first divided region e.
And the product of That is, the second parallax interpolation coefficient KUR increases as the distance between the upper right vertex PE2 of the first divided region e including the target position Pxy and the target position Pxy decreases.

【0128】第3の視差補間係数KDLは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの右辺までの距離ΔX
Rとの比{(m−HPOS)/m}と、第1分割領域e
の垂直方向幅nに対する、注目位置Pxyから第1分割
領域eの上辺までの距離ΔYUとの比(VPOS/n)
との積によって求められる。すなわち、第3の視差補間
係数KDLは、注目位置Pxyを含む第1分割領域eの
左下頂点PE5と注目位置Pxyとの距離が小さいほど
大きくなる。
The third parallax interpolation coefficient KDL is calculated based on the target position P
xy, the distance ΔX from the target position Pxy to the right side of the first divided area e with respect to the horizontal width m of the first divided area e including xy
R and the ratio {(m-HPOS) / m} to the first divided region e
(VPOS / n) of the distance ΔYU from the target position Pxy to the upper side of the first divided area e with respect to the vertical width n of
And the product of That is, the third parallax interpolation coefficient KDL increases as the distance between the lower left vertex PE5 of the first divided region e including the target position Pxy and the target position Pxy decreases.

【0129】第4の視差補間係数KDRは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの左辺までの距離ΔX
Lとの比(HPOS/m)と、第1分割領域eの垂直方
向幅nに対する、注目位置Pxyから第1分割領域eの
上辺までの距離ΔYUとの比(VPOS/n)との積に
よって求められる。すなわち、第4の視差補間係数KD
Rは、注目位置Pxyを含む第1分割領域eの右下頂点
PE6と注目位置Pxyとの距離が小さいほど大きくな
る。
The fourth parallax interpolation coefficient KDR is calculated based on the target position P
xy, the distance ΔX from the target position Pxy to the left side of the first divided region e with respect to the horizontal width m of the first divided region e
L and the ratio (VPOS / n) of the vertical width n of the first divided area e to the distance ΔYU from the target position Pxy to the upper side of the first divided area e. Desired. That is, the fourth parallax interpolation coefficient KD
R increases as the distance between the lower right vertex PE6 of the first divided area e including the target position Pxy and the target position Pxy decreases.

【0130】(3)上記(1)で抽出された第1〜第4
の視差情報UL、UR、DL、DRに、それぞれ上記
(2)で算出された第1〜第4の視差補間係数KUL、
KUR、KDL、KDRがそれぞれ乗算される。そし
て、得られた4つの乗算値が加算されることにより、注
目位置Pxyに対する視差情報が生成される。
(3) The first to fourth extracted in the above (1)
To the parallax information UL, UR, DL, DR of the first to fourth parallax interpolation coefficients KUL, calculated in (2) above, respectively.
KUR, KDL, and KDR are each multiplied. Then, the obtained four multiplication values are added to generate disparity information for the target position Pxy.

【0131】視差情報記憶手段60は、領域E1〜E1
2にそれぞれ対応して設けられた第1〜第12の視差レ
ジスタ61〜72を備えている。第1〜第12の視差レ
ジスタ61〜72には、CPU3によって生成された各
領域E1〜E12に対する視差情報が格納される。
The parallax information storage means 60 stores the areas E1 to E1.
2 are provided with first to twelfth parallax registers 61 to 72 provided correspondingly to the two. The first to twelfth disparity registers 61 to 72 store disparity information for each of the regions E1 to E12 generated by the CPU 3.

【0132】視差情報記憶手段60の後段には、視差選
択回路80が設けられている。視差選択回路80には、
各視差レジスタ61〜72から視差情報がそれぞれ送ら
れる。さらに、視差選択回路80には、タイミング信号
発生回路51から水平アドレス信号HADおよび垂直ア
ドレス信号VADが送られている。
At the subsequent stage of the parallax information storage means 60, a parallax selection circuit 80 is provided. In the parallax selection circuit 80,
Parallax information is sent from each of the parallax registers 61 to 72. Further, the horizontal address signal HAD and the vertical address signal VAD are sent from the timing signal generation circuit 51 to the parallax selection circuit 80.

【0133】視差選択回路80は、図24(a)に示さ
れている規則にしたがって、水平アドレス信号HADお
よび垂直アドレス信号VADに対応する領域(図23の
例では、注目位置を含む第1領域の左上頂点を中心とす
る視差算出領域)に対する視差情報を、第1視差情報U
Lとして選択して出力する。さらに、視差選択回路80
は、図24(b)に示されている規則にしたがって、水
平アドレス信号HADおよび垂直アドレス信号VADに
対応する領域(図23の例では、注目位置を含む第1領
域の右上頂点を中心とする視差算出領域)に対する視差
情報を、第2視差情報URとして選択して出力する。
According to the rule shown in FIG. 24 (a), the parallax selecting circuit 80 sets the area corresponding to the horizontal address signal HAD and the vertical address signal VAD (in the example of FIG. 23, the first area including the target position). Of the parallax calculation area centered on the upper left vertex of the
Select and output as L. Further, the parallax selection circuit 80
Is a region corresponding to the horizontal address signal HAD and the vertical address signal VAD according to the rule shown in FIG. 24B (in the example of FIG. 23, the center is set at the upper right vertex of the first region including the target position). The disparity information for the disparity calculation area) is selected and output as the second disparity information UR.

【0134】さらに、視差選択回路80は、図24
(c)に示されている規則にしたがって、水平アドレス
信号HADおよび垂直アドレス信号VADに対応する領
域(図23の例では、注目位置を含む第1領域の左下頂
点を中心とする視差算出領域)に対する視差情報を、第
3視差情報DLとして選択して出力する。さらに、視差
選択回路80は、図24(d)に示されている規則にし
たがって、水平アドレス信号HADおよび垂直アドレス
信号VADに対応する領域(図23の例では、注目位置
を含む第1領域の右下頂点を中心とする視差算出領域)
に対する視差情報を、第4視差情報DRとして選択して
出力する。図24において、たとえば、0〜mのよう
に、a〜bで表現されている記号”〜”は、a以上b未
満を意味する記号として用いられている。
Further, the parallax selecting circuit 80 is provided in
According to the rule shown in (c), an area corresponding to the horizontal address signal HAD and the vertical address signal VAD (in the example of FIG. 23, a parallax calculation area centered on the lower left vertex of the first area including the target position). Is selected and output as third parallax information DL. Further, the parallax selection circuit 80 determines the area corresponding to the horizontal address signal HAD and the vertical address signal VAD (in the example of FIG. 23, the first area including the target position in accordance with the rule shown in FIG. 24D). Parallax calculation area centered on the lower right vertex)
Is selected and output as fourth parallax information DR. In FIG. 24, for example, symbols “” ”represented by a and b, such as 0 to m, are used as symbols meaning a or more and less than b.

【0135】視差選択回路80によって選択された第1
視差情報UL、第2視差情報UR、第3視差情報DLお
よび第4視差情報DRは、それぞれ第1、第2、第3お
よび第4の乗算器81、82、83、84に入力する。
The first selected by the parallax selection circuit 80
The disparity information UL, the second disparity information UR, the third disparity information DL, and the fourth disparity information DR are input to first, second, third, and fourth multipliers 81, 82, 83, 84, respectively.

【0136】第1、第2、第3および第4の乗算器8
1、82、83、84には、それぞれ視差補間係数発生
回路52からの第1視差補間係数KUL、第2視差補間
係数KUR、第3視差補間係数KDLおよび第4視差補
間係数KDRも入力している。
First, second, third and fourth multipliers 8
1, 82, 83, and 84 also receive the first parallax interpolation coefficient KUL, the second parallax interpolation coefficient KUR, the third parallax interpolation coefficient KDL, and the fourth parallax interpolation coefficient KDR from the parallax interpolation coefficient generation circuit 52, respectively. I have.

【0137】第1乗算器81は、第1視差情報ULに第
1視差補間係数KULを乗算する。第2乗算器82は、
第2視差情報URに第2視差補間係数KURを乗算す
る。第3乗算器83は、第3視差情報DLに第3視差補
間係数KDLを乗算する。第4乗算器84は、第4視差
情報DRに第4視差補間係数KDRを乗算する。
The first multiplier 81 multiplies the first disparity information UL by a first disparity interpolation coefficient KUL. The second multiplier 82
The second parallax information UR is multiplied by a second parallax interpolation coefficient KUR. The third multiplier 83 multiplies the third disparity information DL by a third disparity interpolation coefficient KDL. The fourth multiplier 84 multiplies the fourth disparity information DR by a fourth disparity interpolation coefficient KDR.

【0138】各乗算器81、82、83、84の出力
は、加算回路85によって加算される。これにより、注
目位置に対する視差情報PRが得られる。
The outputs of the multipliers 81, 82, 83 and 84 are added by an adder 85. Thereby, the disparity information PR for the target position is obtained.

【0139】各任意画素遅延FIFO11、21は、1
画素より小さい単位での水平位相制御を行なうために、
ぞれぞれ2つのラインメモリ11a、11b、21a、
21bを備えている。各任意画素遅延FIFO11、2
1内の2つのラインメモリ11a、11b、21a、2
1bには、それぞれY信号が入力されているとともにク
ロック信号CLKが入力している。
Each of the arbitrary pixel delay FIFOs 11 and 21 is 1
To perform horizontal phase control in units smaller than pixels,
Each of the two line memories 11a, 11b, 21a,
21b. Each arbitrary pixel delay FIFO11, 2
1, two line memories 11a, 11b, 21a, 2
1b, a Y signal is input and a clock signal CLK is input.

【0140】タイミング信号発生回路51から出力され
ている水平アドレス信号HADは、標準アドレス発生回
路90にも入力している。標準アドレス発生回路90
は、各任意画素遅延FIFO11、21内の2つのライ
ンメモリ11a、11b、21a、21bに対する標準
書き込みアドレスWADおよび標準読み出しアドレスR
ADを生成して出力する。また、標準アドレス発生回路
90は、2D/3D変換装置によって得られる左映像信
号および右映像信号に付加される同期信号Csyncを
も出力する。この同期信号Csyncによって表される
水平同期信号は、入力映像信号の水平同期信号Hsyn
cより、所定クロック数分遅れた信号となる。
The horizontal address signal HAD output from the timing signal generation circuit 51 is also input to the standard address generation circuit 90. Standard address generation circuit 90
Is a standard write address WAD and a standard read address R for the two line memories 11a, 11b, 21a, 21b in each of the arbitrary pixel delay FIFOs 11, 21.
Generate and output AD. Further, the standard address generation circuit 90 also outputs a synchronization signal Csync added to the left video signal and the right video signal obtained by the 2D / 3D converter. The horizontal synchronization signal represented by the synchronization signal Csync is a horizontal synchronization signal Hsync of the input video signal.
The signal is delayed by a predetermined number of clocks from c.

【0141】標準読み出しアドレスRADは、標準読み
出しアドレスによって規定される基準水平位相に対し
て、各任意画素遅延FIFO11、21に入力される映
像信号の水平位相を進めたり遅らしたりできるようにす
るために、標準書き込みアドレスWADに対して、所定
クロック数分遅れている。標準アドレス発生回路90か
ら出力される標準書き込みアドレスWADは、各任意画
素遅延FIFO11、21内の2つのラインメモリ11
a、11b、21a、21bに、書き込みアドレスを示
す書き込み制御信号として入力する。
The standard read address RAD is used to advance or delay the horizontal phase of the video signal input to each of the arbitrary pixel delay FIFOs 11 and 21 with respect to the reference horizontal phase defined by the standard read address. In addition, it is delayed by a predetermined number of clocks from the standard write address WAD. The standard write address WAD output from the standard address generation circuit 90 is stored in the two line memories 11 in each of the arbitrary pixel delay FIFOs 11 and 21.
a, 11b, 21a, and 21b are input as write control signals indicating write addresses.

【0142】標準アドレス発生回路90から出力される
標準読み出しアドレスRADは、加算器91および減算
器92にそれぞれ入力する。加算器91および減算器9
2には、加算回路85から出力される注目位置の視差情
報PRも入力している。
The standard read address RAD output from the standard address generation circuit 90 is input to an adder 91 and a subtractor 92, respectively. Adder 91 and subtractor 9
2, the parallax information PR of the target position output from the adding circuit 85 is also input.

【0143】加算器91では、標準読み出しアドレスR
ADに視差情報PRが加算される。これにより、左映像
用読み出しアドレスPRLが得られる。
At the adder 91, the standard read address R
The disparity information PR is added to AD. As a result, the left video read address PRL is obtained.

【0144】左映像用読み出しアドレスPRLの整数部
PRL1は、左映像用任意画素遅延FIFO11内の第
1のラインメモリ11aに読み出しアドレスRADL1
として入力する。したがって、第1のラインメモリ11
aのアドレスRADL1に対応するアドレスからY信号
が読み出される。読み出されたY信号は、第1の左映像
用乗算器101に入力する。
The integer part PRL1 of the left video read address PRL is stored in the first line memory 11a in the left video arbitrary pixel delay FIFO 11 in the read address RADL1.
Enter as Therefore, the first line memory 11
The Y signal is read from the address corresponding to the address RADL1 of a. The read Y signal is input to the first left video multiplier 101.

【0145】左映像用読み出しアドレスPRLの整数部
PRL1に1が加算されたアドレス値は、左映像用任意
画素遅延FIFO11内の第2のラインメモリ11bに
読み出しアドレスRADL2として入力する。したがっ
て、第2のラインメモリ11bのアドレスRADL2に
対応するアドレスからY信号が読み出される。読み出さ
れたY信号は、第2の左映像用乗算器102に入力す
る。
The address value obtained by adding 1 to the integer part PRL1 of the read address PRL for the left image is input to the second line memory 11b in the arbitrary pixel delay FIFO 11 for the left image as the read address RADL2. Therefore, the Y signal is read from the address corresponding to the address RADL2 of the second line memory 11b. The read Y signal is input to the second left video multiplier 102.

【0146】第1のラインメモリ11aに対する読み出
しアドレスRADL1と、第2のラインメモリ11bに
対する読み出しアドレスRADL2とは、1だけ異なっ
ているので、第1のラインメモリ11aから読み出され
たY信号と、第2のラインメモリ11bから読み出され
たY信号とは、水平位置が1だけずれた信号となる。
The read address RADL1 for the first line memory 11a is different from the read address RADL2 for the second line memory 11b by one, so that the Y signal read from the first line memory 11a The Y signal read from the second line memory 11b is a signal whose horizontal position is shifted by one.

【0147】左映像用読み出しアドレスPRLの小数部
PRL2は、第2の左映像補間係数として第2の左映像
用乗算器102に入力する。左映像用読み出しアドレス
PRLの小数部PRL2を1から減算した値(1−PR
L2)は、第1の左映像補間係数として第1の左映像用
乗算器101に入力する。
The decimal part PRL2 of the left video read address PRL is input to the second left video multiplier 102 as a second left video interpolation coefficient. A value obtained by subtracting the decimal part PRL2 of the read address PRL for the left image from 1 (1-PR
L2) is input to the first left video multiplier 101 as a first left video interpolation coefficient.

【0148】したがって、第1の左映像用乗算器101
では、第1のラインメモリ11aから読み出されたY信
号に第1の左映像補間係数(1−PRL2)が乗算され
る。第2の左映像用乗算器102では、第2のラインメ
モリ11bから読み出されたY信号に第2の左映像補間
係数PRL2が乗算される。そして、各乗算器101、
102によって得られたY信号は加算器103で加算さ
れた後、左映像用Y信号YL−OUTとして、出力され
る。
Therefore, the first left video multiplier 101
Then, the Y signal read from the first line memory 11a is multiplied by a first left video interpolation coefficient (1-PRL2). In the second left video multiplier 102, the Y signal read from the second line memory 11b is multiplied by a second left video interpolation coefficient PRL2. Then, each multiplier 101,
The Y signal obtained by 102 is added by the adder 103, and then output as a left video Y signal YL-OUT.

【0149】これにより、標準読み出しアドレスRAD
によって規定される基準水平位相に対して、水平位相量
が注目位置に対する視差情報に応じた量だけ遅れた左映
像用Y信号が得られる。
Thus, the standard read address RAD
With respect to the reference horizontal phase defined by the above, a left image Y signal whose horizontal phase amount is delayed by an amount corresponding to the parallax information for the target position is obtained.

【0150】減算器92では、標準読み出しアドレスR
ADから視差情報PRが減算される。これにより、右映
像用読み出しアドレスPRRが得られる。
In the subtractor 92, the standard read address R
The disparity information PR is subtracted from AD. As a result, the right video read address PRR is obtained.

【0151】右映像用読み出しアドレスPRRの整数部
PRR1は、右映像用任意画素遅延FIFO21内の第
1のラインメモリ21aに読み出しアドレスRADR1
として入力する。したがって、第1のラインメモリ21
aのアドレスRADR1に対応するアドレスからY信号
が読み出される。読み出されたY信号は、第1の右映像
用乗算器111に入力する。
The integer part PRR1 of the right video read address PRR is stored in the first line memory 21a in the right video arbitrary pixel delay FIFO 21 in the read address RADR1.
Enter as Therefore, the first line memory 21
The Y signal is read from the address corresponding to the address RADR1 of a. The read Y signal is input to the first right video multiplier 111.

【0152】右映像用読み出しアドレスPRRの整数部
PRR1に1が加算されたアドレス値は、右映像用任意
画素遅延FIFO21内の第2のラインメモリ21bに
読み出しアドレスRADR2として入力する。したがっ
て、第2のラインメモリ21bのアドレスRADR2に
対応するアドレスからY信号が読み出される。読み出さ
れたY信号は、第2の右映像用乗算器112に入力す
る。
The address value obtained by adding 1 to the integer part PRR1 of the right video read address PRR is input to the second line memory 21b in the right video arbitrary pixel delay FIFO 21 as the read address RADR2. Therefore, the Y signal is read from the address corresponding to the address RADR2 of the second line memory 21b. The read Y signal is input to the second right video multiplier 112.

【0153】第1のラインメモリ21aに対する読み出
しアドレスRADR1と、第2のラインメモリ21bに
対する読み出しアドレスRADR2とは、1だけ異なっ
ているので、第1のラインメモリ21aから読み出され
たY信号と、第2のラインメモリ21bから読み出され
たY信号とは、水平位置が1だけずれた信号となる。
Since the read address RADR1 for the first line memory 21a and the read address RADR2 for the second line memory 21b are different by one, the Y signal read from the first line memory 21a and The Y signal read from the second line memory 21b is a signal whose horizontal position is shifted by one.

【0154】右映像用読み出しアドレスPRRの小数部
PRR2は、第2の右映像補間係数として第2の右映像
用乗算器112に入力する。右映像用読み出しアドレス
PRRの小数部PRR2を1から減算した値(1−PR
R2)は、第1の右映像補間係数として第1の右映像用
乗算器111に入力する。
The decimal part PRR2 of the read address PRR for the right image is input to the second multiplier 112 for the right image as a second right image interpolation coefficient. A value obtained by subtracting the decimal part PRR2 of the read address PRR for the right image from 1 (1-PR
R2) is input to the first right image multiplier 111 as a first right image interpolation coefficient.

【0155】したがって、第1の右映像用乗算器111
では、第1のラインメモリ21aから読み出されたY信
号に第1の右映像補間係数(1−PRR2)が乗算され
る。第2の右映像用乗算器112では、第2のラインメ
モリ21bから読み出されたY信号に第2の右映像補間
係数PRR2が乗算される。そして、各乗算器111、
112によって得られたY信号は加算器113で加算さ
れた後、右映像用Y信号YR−OUTとして、出力され
る。
Therefore, the first right video multiplier 111
Then, the Y signal read from the first line memory 21a is multiplied by a first right video interpolation coefficient (1-PRR2). In the second right image multiplier 112, the Y signal read from the second line memory 21b is multiplied by a second right image interpolation coefficient PRR2. Then, each multiplier 111,
The Y signal obtained by 112 is added by the adder 113 and then output as a right video Y signal YR-OUT.

【0156】これにより、標準読み出しアドレスRAD
によって規定される基準水平位相に対して、水平位相量
が注目位置に対する視差情報に応じた量だけ進んだ右映
像用Y信号が得られる。
Thus, the standard read address RAD
With respect to the reference horizontal phase defined by the above, a Y signal for right video is obtained in which the horizontal phase amount is advanced by an amount corresponding to the parallax information for the target position.

【0157】図25は、注目位置に対する視差情報が0
の場合の、各部の信号を示している。
FIG. 25 shows that the parallax information for the target position is 0.
3 shows the signals of the respective units.

【0158】視差情報が0の場合には、加算器91から
出力される左映像用読み出しアドレスPRLと、減算器
92から出力される右映像用読み出しアドレスPRR
は、ともに標準読み出しアドレスRADと等しい小数部
のない整数部のみからなるアドレスとなる。
When the parallax information is 0, the read address PRL for the left image output from the adder 91 and the read address PRR for the right image output from the subtractor 92.
Is an address consisting of only an integer part without a decimal part equal to the standard read address RAD.

【0159】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aに対する読み出し
アドレスRADL1と、右映像用任意画素遅延FIFO
21内の第1のラインメモリ21aに対する読み出しア
ドレスRADR1は、標準読み出しアドレスRADと等
しいアドレスとなる。
Therefore, an arbitrary pixel delay FIF for left video
Read address RADL1 for the first line memory 11a in O11 and right image arbitrary pixel delay FIFO
The read address RADR1 for the first line memory 21a in the memory 21 is equal to the standard read address RAD.

【0160】また、左映像用任意画素遅延FIFO11
内の第2のラインメモリ11bに対する読み出しアドレ
スRADL2と、右映像用任意画素遅延FIFO21内
の第2のラインメモリ21bに対する読み出しアドレス
RADR2は、標準読み出しアドレスRADより1だけ
大きい値となる。
A left image arbitrary pixel delay FIFO 11
The read address RADL2 for the second line memory 11b in the first and the read address RADR2 for the second line memory 21b in the right image arbitrary pixel delay FIFO 21 have a value that is one greater than the standard read address RAD.

【0161】また、第1の左映像補間係数(1−PRL
2)および第1の右映像補間係数(1−PRR2)は1
となり、第2の左映像補間係数PRL2および第2の右
映像補間係数PRR2は0となる。
The first left image interpolation coefficient (1-PRL)
2) and the first right video interpolation coefficient (1-PRR2) are 1
And the second left video interpolation coefficient PRL2 and the second right video interpolation coefficient PRR2 become zero.

【0162】この結果、左映像用任意画素遅延FIFO
11内の第1のラインメモリ11aの標準アドレスRA
Dに対応するアドレスから読み出されたY信号が加算器
103から左映像用Y信号YL−OUTとして出力さ
れ、右映像用任意画素遅延FIFO21内の第1のライ
ンメモリ21aの標準アドレスRADに対応するアドレ
スから読み出されたY信号が加算器113から右映像用
Y信号YR−OUTとして出力される。つまり、水平方
向の位相ずれ量が同じ2つのY信号、すなわち視差のな
い2つのY信号が左映像用Y信号および右映像用Y信号
として出力される。
As a result, the left image arbitrary pixel delay FIFO
11, the standard address RA of the first line memory 11a
The Y signal read from the address corresponding to D is output from the adder 103 as the left video Y signal YL-OUT, and corresponds to the standard address RAD of the first line memory 21a in the right video arbitrary pixel delay FIFO 21. The Y signal read from the address to be output is output from the adder 113 as a right video Y signal YR-OUT. That is, two Y signals having the same amount of phase shift in the horizontal direction, that is, two Y signals having no parallax are output as a left video Y signal and a right video Y signal.

【0163】図26は、ある注目位置に対する標準書き
込みアドレスWADが20であり、上記注目位置に対す
る標準読み出しアドレスRADが10であり、上記注目
位置に対する視差情報が1.2の場合の、各アドレス値
の具体例を示している。図27は、その際の各部の信号
を示している。
FIG. 26 shows a case where the standard write address WAD for a certain target position is 20, the standard read address RAD for the above target position is 10, and the disparity information for the above target position is 1.2. Is shown. FIG. 27 shows signals of the respective units at that time.

【0164】この場合には、加算器91から出力される
左映像用読み出しアドレスPRLは、11.2となり、
その整数部PRL1は11となり、その小数部PRL2
は0.2となる。
In this case, the left video read address PRL output from the adder 91 is 11.2,
Its integer part PRL1 becomes 11, and its decimal part PRL2
Is 0.2.

【0165】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aに対する読み出し
アドレスRADL1は11となり、第2のラインメモリ
11bに対する読み出しアドレスRADL2は12とな
る。また、第1の左映像補間係数KL1{=(1−PR
L2)}は0.8となり、第2の左映像補間係数KL2
(=PRL2)は0.2となる。
Therefore, the arbitrary pixel delay FIF for the left image
The read address RADL1 for the first line memory 11a in O11 is 11, and the read address RADL2 for the second line memory 11b is 12. Further, the first left video interpolation coefficient KL1 {= (1-PR
L2)} is 0.8, and the second left image interpolation coefficient KL2
(= PRL2) is 0.2.

【0166】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aのアドレス11か
らY信号(Y11)が読み出され、第1乗算器101から
は読み出されたY信号(Y11)の0.8倍の信号(0.
8*Y11)が出力される。
Therefore, an arbitrary pixel delay FIF for left video
The Y signal (Y 11 ) is read from the address 11 of the first line memory 11 a in O 11, and a signal (0) that is 0.8 times the read Y signal (Y 11 ) is read from the first multiplier 101. .
8 * Y 11 ) is output.

【0167】一方、左映像用任意画素遅延FIFO11
内の第2のラインメモリ11bのアドレス12からY信
号(Y12)が読み出され、第2乗算器102からは読み
出されたY信号(Y12)の0.2倍の信号(0.2*Y
12)が出力される。そして、加算器103からは、0.
8*Y11+0.2*Y12に相当する左映像用Y信号YL
−OUTが出力される。つまり、読み出しアドレス1
1.2に相当するY信号が、左映像用Y信号YL−OU
Tとして出力される。
On the other hand, a left image arbitrary pixel delay FIFO 11
, The Y signal (Y 12 ) is read from the address 12 of the second line memory 11 b, and the signal (0...) Which is 0.2 times the Y signal (Y 12 ) read from the second multiplier 102. 2 * Y
12 ) is output. Then, from the adder 103, 0.
Y signal YL for left image corresponding to 8 * Y 11 + 0.2 * Y 12
−OUT is output. That is, read address 1
The Y signal corresponding to 1.2 is a left video Y signal YL-OU.
Output as T.

【0168】減算器92から出力される右映像用読み出
しアドレスPRRは、8.8となり、その整数部PRR
1は8となり、その小数部PRR2は0.8となる。
The read address PRR for the right image output from the subtractor 92 is 8.8, and its integer part PRR
1 becomes 8, and the decimal part PRR2 becomes 0.8.

【0169】したがって、右映像用任意画素遅延FIF
O21内の第1のラインメモリ21aに対する読み出し
アドレスRADR1は8となり、第2のラインメモリ2
1bに対する読み出しアドレスRADR2は9となる。
また、第1の右映像補間係数KR1{=(1−PRR
2)}は0.2となり、第2の右映像補間係数KR2
(=PRR2)は0.8となる。
Therefore, the arbitrary pixel delay FIF for the right image
The read address RADR1 for the first line memory 21a in O21 becomes 8, and the second line memory 2a
The read address RADR2 for 1b is 9.
Also, the first right video interpolation coefficient KR1 {= (1-PRR
2) と な り is 0.2, and the second right video interpolation coefficient KR2
(= PRR2) is 0.8.

【0170】したがって、右映像用任意画素遅延FIF
O21内の第1のラインメモリ21aのアドレス8から
Y信号(Y8 )が読み出され、第1乗算器111からは
読み出されたY信号(Y8 )の0.2倍の信号(0.2
*Y8 )が出力される。
Therefore, the arbitrary pixel delay FIF for the right image
Y signal (Y 8) is read from the first line memory 21a of the address 8 in O21, 0.2 times the signal of the Y signal read out from the first multiplier 111 (Y 8) (0 .2
* Y 8 ) is output.

【0171】一方、右映像用任意画素遅延FIFO21
内の第2のラインメモリ21bのアドレス9からY信号
(Y9 )が読み出され、第2乗算器112からは読み出
されたY信号(Y9 )の0.8倍の信号(0.8*
9 )が出力される。そして、加算器113からは、
0.2*Y8 +0.8*Y9 に相当する右映像用Y信号
YR−OUTが出力される。つまり、読み出しアドレス
8.8に相当するY信号が、右映像用Y信号YR−OU
Tとして出力される。
On the other hand, a right image arbitrary pixel delay FIFO 21
, The Y signal (Y 9 ) is read from the address 9 of the second line memory 21 b, and the signal (0...) 0.8 times the read Y signal (Y 9 ) from the second multiplier 112. 8 *
Y 9 ) is output. Then, from the adder 113,
A right video Y signal YR-OUT corresponding to 0.2 * Y 8 + 0.8 * Y 9 is output. In other words, the Y signal corresponding to the read address 8.8 is the right video Y signal YR-OU.
Output as T.

【0172】この結果、11.2−8.8=2.4の視
差、つまり、視差情報1.2の2倍の視差を互いに有す
る左映像および右映像が得られる。
As a result, a left image and a right image having a disparity of 11.2−8.8 = 2.4, that is, a disparity twice as large as the disparity information 1.2 are obtained.

【0173】上記2D/3D映像変換装置では、元の2
次元映像信号に対して時間的に遅延された映像信号を生
成するためのフィールドメモリが不要であるため、コス
トの低廉化が図れる。また、上記2D/3D映像変換装
置では、元の2次元映像信号によって表される映像が静
止映像であっても立体映像を得ることができる。
In the 2D / 3D video converter, the original 2D / 3D video
Since a field memory for generating a video signal delayed in time with respect to the two-dimensional video signal is not required, the cost can be reduced. Further, the 2D / 3D video converter can obtain a stereoscopic video even if the video represented by the original two-dimensional video signal is a still video.

【0174】〔1−2−2〕第2の2D/3D映像変換
装置の説明
[1-2-2] Description of Second 2D / 3D Video Converter

【0175】図28は、第2の2D/3D映像変換装置
の全体的な構成を示している。2次元映像信号を構成す
る輝度信号Y、色差信号R−Yおよび色差信号B−Y
は、AD変換回路1(ADC)によってそれぞれディジ
タルのY信号、R−Y信号およびB−Y信号に変換され
る。
FIG. 28 shows the overall configuration of the second 2D / 3D video converter. A luminance signal Y, a color difference signal RY, and a color difference signal BY constituting a two-dimensional video signal
Are converted into digital Y signals, RY signals, and BY signals by an AD conversion circuit 1 (ADC).

【0176】Y信号は、動きベクトル検出回路2に送ら
れるとともに、第1の左映像用任意画素遅延FIFO1
1および第1の右映像用任意画素遅延FIFO21に送
られる。R−Y信号は、第2の左映像用任意画素遅延F
IFO12および第2の右映像用任意画素遅延FIFO
22に送られる。B−Y信号は、第3の左映像用任意画
素遅延FIFO13および第3の右映像用任意画素遅延
FIFO23に送られる。
The Y signal is sent to the motion vector detection circuit 2 and the first left video arbitrary pixel delay FIFO 1
1 and the first right video arbitrary pixel delay FIFO 21. The RY signal has a second left image arbitrary pixel delay F
FIFO12 and second right image arbitrary pixel delay FIFO
22. The BY signal is sent to a third left image arbitrary pixel delay FIFO 13 and a third right image arbitrary pixel delay FIFO 23.

【0177】動きベクトル検出回路2は、1フィールド
毎に、図22に示すように1フィールド画面内に設定さ
れた12個の動きベクトル検出領域(以下、視差算出領
域という)E1〜E12それぞれに対する動きベクトル
を算出する。そして、動きベクトル検出回路2は、算出
された動きベクトルの信頼性が低い領域(以下、NG領
域という)を示すデータ、NG領域以外の各領域E1〜
E12ごとのX方向の動きベクトル、NG領域以外の各
領域E1〜E12のX方向の動きベクトルのうちの最大
値(X方向の動きベクトルが最大値である領域のデータ
を含む)、NG領域以外の各領域E1〜E12のX方向
の動きベクトルのうちの最小値(X方向の動きベクトル
が最小値である領域のデータを含む)ならびにNG領域
以外の各領域E1〜E12のX方向の動きベクトルの絶
対値の積算値を、各フィールドごとにCPU3に送る。
The motion vector detection circuit 2 performs, for each field, the motions for each of the 12 motion vector detection areas (hereinafter referred to as parallax calculation areas) E1 to E12 set in one field screen as shown in FIG. Calculate the vector. Then, the motion vector detection circuit 2 outputs data indicating an area where the calculated motion vector has low reliability (hereinafter referred to as an NG area), and each of the areas E <b> 1 to E <b> 1 other than the NG area.
The motion vector in the X direction for each E12, the maximum value of the motion vectors in the X direction of each of the areas E1 to E12 other than the NG area (including the data of the area where the motion vector in the X direction is the maximum value), and the area other than the NG area Of the motion vectors in the X direction of the respective regions E1 to E12 (including the data of the region where the motion vector in the X direction is the minimum value) and the motion vectors in the X direction of the respective regions E1 to E12 other than the NG region Is transmitted to the CPU 3 for each field.

【0178】CPU3は、動きベクトル検出回路2から
送られてきた情報に基づいて、各視差算出領域E1〜E
12に対する奥行き量または飛び出し量を算出し、算出
された奥行き量または飛び出し量に基づいて各視差算出
領域E1〜E12ごとに視差情報を生成する。この例で
は、背景が存在する領域については奥行き量が大きくな
り、被写体が存在する領域では奥行き量が小さくなるよ
うに、各視差算出領域E1〜E12に対する奥行き量が
算出される。この奥行き量の算出方法の詳細について
は、後述する。
The CPU 3 determines each of the parallax calculation areas E1 to E based on the information sent from the motion vector detection circuit 2.
The amount of depth or the amount of protrusion for 12 is calculated, and parallax information is generated for each of the parallax calculation areas E1 to E12 based on the calculated amount of depth or the amount of protrusion. In this example, the depth amount is calculated for each of the parallax calculation regions E1 to E12 such that the depth amount increases in the region where the background exists and decreases in the region where the subject exists. Details of the method of calculating the depth amount will be described later.

【0179】CPU3によって算出された各視差算出領
域E1〜E12ごとの視差情報は、視差制御回路4に送
られる。視差制御回路4は、各視差算出領域E1〜E1
2ごとの視差情報に基づいて、各フィールドの各画素位
置ごとの視差情報を生成する。そして、得られた各画素
位置ごとの視差情報に基づいて、各FIFO11〜1
3、21〜23から映像信号(Y信号、R−Y信号、B
−Y信号)を読み出す際の読み出しアドレスが左映像用
任意画素遅延FIFO11〜13と右映像用任意画素遅
延FIFO21〜23との間でずれるように、各FIF
O11〜13、21〜23の読み出しアドレスを制御す
る。したがって、左映像用任意画素遅延FIFO11〜
13から読み出された左映像信号の水平位相と、右映像
用任意画素遅延FIFO21〜23から読み出された右
映像信号の水平位相が異なるようになる。
The disparity information for each of the disparity calculation areas E1 to E12 calculated by the CPU 3 is sent to the disparity control circuit 4. The parallax control circuit 4 controls the parallax calculation areas E1 to E1.
Based on the two pieces of disparity information, disparity information for each pixel position in each field is generated. Then, based on the obtained parallax information for each pixel position, each of the FIFOs 11 to 1
3, video signals (Y signal, RY signal, B
−Y signal) so that the read address is shifted between the left image arbitrary pixel delay FIFOs 11 to 13 and the right image arbitrary pixel delay FIFOs 21 to 23.
The read addresses of O11 to 13 and 21 to 23 are controlled. Therefore, the left image arbitrary pixel delay FIFO 11-
13 is different from the horizontal phase of the right video signal read from the right video arbitrary pixel delay FIFOs 21 to 23.

【0180】左映像用任意画素遅延FIFO11〜13
から読み出された左映像信号(YL信号、(R−Y)L
信号、(B−Y)L信号)は、DA変換回路(DAC)
5によってアナログ信号に変換された後、立体感調整装
置502を介して図示しない立体表示装置に送られる。
右映像用任意画素遅延FIFO21〜23から読み出さ
れた右映像信号(YR信号、(R−Y)R信号、(B−
Y)R信号)は、DA変換回路(DAC)6によってア
ナログ信号に変換された後、立体感調整装置502を介
して図示しない立体表示装置に送られる。
Left image arbitrary pixel delay FIFOs 11 to 13
From the left video signal (YL signal, (RY) L
Signal, (BY) L signal) is a DA conversion circuit (DAC)
After being converted into an analog signal by 5, it is sent to a stereoscopic display device (not shown) via the stereoscopic effect adjusting device 502.
The right video signal (YR signal, (RY) R signal, (B-
Y) R signal) is converted into an analog signal by a DA conversion circuit (DAC) 6, and then sent to a stereoscopic display device (not shown) via a stereoscopic effect adjusting device 502.

【0181】左映像信号の水平位相と、右映像信号の水
平位相は異なっているので、左映像と右映像との間に視
差が発生する。この結果、左映像を左目のみで観察し、
右映像を右目のみで観察すると、被写体が背景に対して
前方位置にあるような立体映像が得られる。
Since the horizontal phase of the left video signal is different from the horizontal phase of the right video signal, a parallax occurs between the left video and the right video. As a result, the left image is observed only with the left eye,
When the right image is observed only with the right eye, a three-dimensional image in which the subject is located in front of the background is obtained.

【0182】図29は、CPU3によって行なわれる視
差情報の生成方法を示している。
FIG. 29 shows a method of generating parallax information performed by the CPU 3.

【0183】被写体/背景判別手段31は、NG領域以
外の各視差算出領域E1〜E12のX方向の動きベクト
ルに基づいて、NG領域以外の各視差算出領域ごとにそ
の領域の映像が被写体であるか背景であるかを判別す
る。この判別方法としては、たとえば、特開平8−14
9517号公報に示されている方法が用いられる。
The subject / background discriminating means 31 is based on the motion vector in the X direction of each of the parallax calculation areas E1 to E12 other than the NG area, and the image of each parallax calculation area other than the NG area is the subject. Or background. For example, Japanese Patent Application Laid-Open No.
The method disclosed in Japanese Patent No. 9517 is used.

【0184】奥行き情報生成手段32は、NG領域以外
の各視差算出領域E1〜E12ごとのX方向の動きベク
トル、NG領域以外の各視差算出領域E1〜E12のX
方向の動きベクトルのうちの最大値(X方向の動きベク
トルが最大値である領域のデータを含む)、NG領域以
外の各視差算出領域E1〜E12のX方向の動きベクト
ルのうちの最小値(X方向の動きベクトルが最小値であ
る領域のデータを含む)およびNG領域を示すデータに
基づいて、各視差算出領域E1〜E12ごとに奥行き量
(奥行き情報)を決定する。
The depth information generating means 32 calculates the motion vector in the X direction for each of the disparity calculation areas E1 to E12 other than the NG area, and the X of the disparity calculation areas E1 to E12 other than the NG area.
The maximum value of the motion vectors in the direction (including the data of the area where the motion vector in the X direction is the maximum value) and the minimum value of the motion vectors in the X direction of each of the disparity calculation areas E1 to E12 other than the NG area ( The depth amount (depth information) is determined for each of the parallax calculation regions E1 to E12 based on the data indicating the region where the motion vector in the X direction has the minimum value and the data indicating the NG region.

【0185】つまり、被写体/背景判別手段31による
NG領域以外の各視差算出領域E1〜E12ごとの判別
結果と、NG領域以外の各視差算出領域E1〜E12の
X方向の動きベクトルのうちの最大値(X方向の動きベ
クトルが最大値である領域のデータを含む)と、NG領
域以外の各視差算出領域E1〜E12のX方向の動きベ
クトルのうちの最小値(X方向の動きベクトルが最小値
である領域のデータを含む)とに基づいて、X方向の動
きベクトルが最大値である視差算出領域およびX方向の
動きベクトルが最小値である視差算出領域のうちの一方
の立体視位置を管面位置PPFに決定し、他方の視差算
出領域の立体視位置を最も奥の位置PPRに決定する。
That is, the discrimination result of each of the parallax calculation areas E1 to E12 other than the NG area by the subject / background discrimination means 31 and the maximum of the X-direction motion vectors of the parallax calculation areas E1 to E12 other than the NG area. Value (including the data of the area where the motion vector in the X direction is the maximum value) and the minimum value of the motion vectors in the X direction of each of the parallax calculation areas E1 to E12 other than the NG area (the motion vector in the X direction is the minimum). And the parallax calculation area where the motion vector in the X direction is the maximum value and the parallax calculation area where the motion vector in the X direction is the minimum value. The screen position PPF is determined, and the stereoscopic position of the other parallax calculation area is determined as the innermost position PPR.

【0186】たとえば、X方向の動きベクトルが最大値
である視差算出領域の映像が被写体であり、X方向の動
きベクトルが最小値である視差算出領域の映像が背景で
ある場合には、図30に示すように、X方向の動きベク
トルが最大値である視差算出領域の立体視位置が管面位
置PPFに決定され、X方向の動きベクトルが最小値で
ある視差算出領域の立体視位置が最も奥の位置PPRに
決定される。
For example, when the image in the parallax calculation area where the X-direction motion vector has the maximum value is the subject and the image in the parallax calculation area where the X-direction motion vector has the minimum value is the background, FIG. As shown in (3), the stereoscopic view position of the parallax calculation area where the motion vector in the X direction is the maximum value is determined as the tube surface position PPF, and the stereoscopic view position of the parallax calculation area where the motion vector in the X direction is the minimum value is the most. The depth position PPR is determined.

【0187】X方向の動きベクトルが最大値である視差
算出領域の映像が背景であり、X方向の動きベクトルが
最小値である視差算出領域の映像が被写体である場合に
は、X方向の動きベクトルが最大値である視差算出領域
の立体視位置が最も奥の位置PPRに決定され、X方向
の動きベクトルが最小値である視差算出領域の立体視位
置が管面位置PPFに決定される。
When the image in the parallax calculation area where the motion vector in the X direction has the maximum value is the background and the image in the parallax calculation area where the motion vector in the X direction is the minimum value is the subject, the motion in the X direction is The stereoscopic vision position of the parallax calculation area where the vector is the maximum value is determined as the innermost position PPR, and the stereoscopic vision position of the parallax calculation area where the motion vector in the X direction is the minimum value is determined as the tube surface position PPF.

【0188】ここでは、X方向の動きベクトルが最大値
である視差算出領域の映像が被写体であり、X方向の動
きベクトルが最小値である視差算出領域の映像が背景で
あり、図30に示すように、X方向の動きベクトルが最
大値である視差算出領域の立体視位置が管面位置PPF
に決定され、X方向の動きベクトルが最小値である視差
算出領域の立体視位置が最も奥の位置PPRに決定され
たとして、各視差算出領域E1〜E12の奥行き量の決
定方法について説明する。
Here, the image in the parallax calculation area where the X-direction motion vector has the maximum value is the subject, and the image in the parallax calculation area where the X-direction motion vector has the minimum value is the background, as shown in FIG. As described above, the stereoscopic position of the parallax calculation area where the motion vector in the X direction is the maximum value is the screen position PPF.
Assuming that the stereoscopic viewing position of the parallax calculation area where the motion vector in the X direction is the minimum value is determined to be the deepest position PPR, a method of determining the depth amounts of the parallax calculation areas E1 to E12 will be described.

【0189】X方向の動きベクトルが最大値の視差算出
領域および最小値の視差算出領域以外の視差算出領域の
うち、NG領域以外の各視差算出領域の立体視位置は、
管面位置PPFと最も奥の位置PPRの間において、そ
の視差算出領域のX方向の動きベクトルに応じた位置に
決定される。この例では、X方向の動きベクトルが大き
い領域ほど、その立体視位置が管面位置PPFに近い位
置に決定され、X方向の動きベクトルが小さい領域ほ
ど、その立体視位置が最も奥の位置PPRに近い位置に
決定される。
Among the parallax calculation areas other than the parallax calculation area having the maximum value of the motion vector in the X direction and the parallax calculation area having the minimum value, the stereoscopic viewing position of each parallax calculation area other than the NG area is as follows.
A position corresponding to the motion vector in the X direction of the parallax calculation area is determined between the tube surface position PPF and the innermost position PPR. In this example, the stereoscopic position is determined to be closer to the screen position PPF in the region where the motion vector in the X direction is larger, and the stereoscopic position is set to the innermost position PPR in the region where the motion vector in the X direction is smaller. Is determined at a position close to.

【0190】各NG領域の立体視位置は、そのNG領域
が画面の上段(領域E1〜E4)にあるか、中段(領域
E5〜E8)にあるか、画面の下段(領域E9〜E1
2)にあるかに応じて決定される。
The stereoscopic position of each NG area is determined by whether the NG area is in the upper part of the screen (areas E1 to E4), in the middle part (areas E5 to E8), or in the lower part of the screen (areas E9 to E1).
It is determined according to whether it is in 2).

【0191】画面の下段にあるNG領域の立体視位置
は、管面位置PPFと最も奥の位置PPRとの間の中央
位置Paに決定される。画面の上段にあるNG領域の立
体視位置は、最も奥の位置PPRと同じ位置Pcに決定
される。画面の中段にあるNG領域の立体視位置は、画
面の下段にあるNG領域の立体視位置Paと、画面の上
段にあるNG領域の立体視位置Pcとの間の中央位置P
bに決定される。
The stereoscopic position of the NG area at the bottom of the screen is determined at the center position Pa between the tube surface position PPF and the innermost position PPR. The stereoscopic position of the NG area at the top of the screen is determined to be the same position Pc as the innermost position PPR. The stereoscopic position of the NG area at the middle of the screen is the center position P between the stereoscopic position Pa of the NG area at the lower part of the screen and the stereoscopic position Pc of the NG area at the upper part of the screen.
b.

【0192】NG領域の立体視位置を上記のようにして
決定している理由について説明する。NG領域は、その
映像が背景であると推定される。そして、通常、背景は
画面下側にあるものほど近い背景であり、画面上側にあ
るものほど遠い背景である。したがって、画面の上側の
NG領域ほどその立体視位置が管面位置PPFからより
奥の位置となるように、各NG位置の立体視位置が決定
されているのである。また、NG領域の映像が背景であ
ると推定しているため、画面の下側のNG領域の立体視
位置が、被写体が存在する領域の立体視位置より奥の位
置に決定されているのである。
The reason why the stereoscopic position of the NG area is determined as described above will be described. In the NG area, the image is presumed to be the background. Normally, the background is closer to the lower side of the screen, and is farther to the upper side of the screen. Therefore, the stereoscopic viewing position of each NG position is determined such that the NG area on the upper side of the screen is located at a deeper position from the tube surface position PPF. In addition, since the image in the NG area is assumed to be the background, the stereoscopic position of the NG area on the lower side of the screen is determined to be a position deeper than the stereoscopic position of the area where the subject exists. .

【0193】このようにして、各視差算出領域E1〜E
12の立体視位置が決定されることにより、各視差算出
領域E1〜E12の管面位置PPFからの奥行き量(奥
行き情報)が決定される。
As described above, each of the parallax calculation areas E1 to E
By determining the twelve stereoscopic viewing positions, the depth amount (depth information) of each of the parallax calculation areas E1 to E12 from the tube surface position PPF is determined.

【0194】奥行き情報選択手段33には、奥行き情報
生成手段32によって生成された現フィールドの各視差
算出領域E1〜E12に対する奥行き情報と、前回にお
いて奥行き情報選択手段33によって選択された前フィ
ールドの各視差算出領域E1〜E12に対する奥行き情
報とが入力している。また、奥行き情報選択手段33に
は、NG領域以外の各視差算出領域E1〜E12のX方
向の動きベクトルの絶対値の積算値を示すデータが送ら
れている。
The depth information selection means 33 includes depth information for each of the parallax calculation areas E1 to E12 of the current field generated by the depth information generation means 32 and each of the previous fields previously selected by the depth information selection means 33. Depth information for the parallax calculation areas E1 to E12 is input. Further, data indicating the integrated value of the absolute value of the motion vector in the X direction of each of the parallax calculation areas E1 to E12 other than the NG area is sent to the depth information selection means 33.

【0195】奥行き情報選択手段33は、NG領域以外
の各視差算出領域E1〜E12のX方向の動きベクトル
の絶対値の積算値が所定値以上である場合、つまり、前
フィールドに対する現フィールドの映像の動きが大きい
場合には、現フィールドの奥行き情報を選択して出力す
る。NG領域以外の各視差算出領域E1〜E12のX方
向の動きベクトルの絶対値の積算値が所定値より小さい
場合、つまり、前フィールドに対する現フィールドの映
像の動きが小さい場合には、奥行き情報選択手段33
は、前フィールドの奥行き情報を選択して出力する。
The depth information selecting means 33 determines whether the integrated value of the absolute value of the motion vector in the X direction of each of the parallax calculation areas E1 to E12 other than the NG area is equal to or larger than a predetermined value, that is, the video of the current field with respect to the previous field. Is large, the depth information of the current field is selected and output. When the integrated value of the absolute value of the motion vector in the X direction of each of the parallax calculation areas E1 to E12 other than the NG area is smaller than a predetermined value, that is, when the motion of the video of the current field with respect to the previous field is small, the depth information selection is performed. Means 33
Selects and outputs the depth information of the previous field.

【0196】奥行き情報選択手段33から出力された各
視差算出領域E1〜E12ごとの奥行き情報(以下、各
領域E1〜E12ごとの第1奥行き情報という)は、奥
行き情報が隣接するフィールド間において急激に変化す
るのを防止するための平滑化処理手段40に送られ、平
滑化される。平滑化処理手段40は、第1乗算手段3
4、加算手段35および第2乗算手段36から構成され
ている。
The depth information for each of the parallax calculation areas E1 to E12 (hereinafter, referred to as first depth information for each of the areas E1 to E12) output from the depth information selection means 33 is abrupt between fields where the depth information is adjacent. Is sent to the smoothing processing means 40 for preventing the change to The smoothing processing means 40 includes a first multiplication means 3
4. It comprises an adding means 35 and a second multiplying means 36.

【0197】各視差算出領域E1〜E12ごとの第1奥
行き情報は、第1乗算手段34によって係数αが乗算さ
れる。係数αは、通常はたとえば1/8に設定されてい
る。ただし、現フィールドのシーンが、前フィールドの
シーンから変化(シーンチェンジ)したときには、係数
αは1に設定される。このようなシーンチェンジの検出
方法としては、たとえば、特開平8−149514号公
報に開示されている方法が用いられる。
The first depth information for each of the parallax calculation areas E1 to E12 is multiplied by a coefficient α by the first multiplying means. Is normally set to, for example, 1/8. However, when the scene of the current field changes (scene changes) from the scene of the previous field, the coefficient α is set to 1. As a method of detecting such a scene change, for example, a method disclosed in Japanese Patent Application Laid-Open No. 8-149514 is used.

【0198】第1乗算手段34の出力(以下、各領域E
1〜E12ごとの第2奥行き情報という)は、加算手段
35に送られる。加算手段35には、第2乗算手段36
の出力(以下、各領域E1〜E12ごとの第4奥行き情
報という)も送られており、各視差算出領域E1〜E1
2ごとの第1奥行き情報と、対応する視差算出領域の第
4奥行き情報との和が算出される。
The output of the first multiplying means 34 (hereinafter, each area E
The second depth information for each of 1 to E12) is sent to the adding means 35. The adding means 35 includes a second multiplying means 36
(Hereinafter, referred to as fourth depth information for each of the regions E1 to E12), and the parallax calculation regions E1 to E1
The sum of the first depth information for each of the two and the fourth depth information of the corresponding parallax calculation area is calculated.

【0199】第2乗算手段36では、前回の加算手段3
5の出力(以下、各領域E1〜E12ごとの第3奥行き
情報という)に係数βが乗算される。係数βは、通常は
たとえば7/8に設定されている。ただし、現フィール
ドのシーンが、前フィールドのシーンから変化(シーン
チェンジ)したときには、係数βは0に設定される。
In the second multiplying means 36, the previous adding means 3
5 (hereinafter referred to as third depth information for each of the regions E1 to E12) is multiplied by a coefficient β. Is usually set to, for example, 7/8. However, when the scene of the current field changes (scene changes) from the scene of the previous field, the coefficient β is set to 0.

【0200】したがって、現フィールドのシーンが、前
フィールドのシーンから変化していない場合には、第1
乗算手段34によって、奥行き情報選択手段33から出
力された各視差算出領域E1〜E12ごとの第1奥行き
情報に1/8がそれぞれ乗算される。これにより、各視
差算出領域E1〜E12ごとの第2奥行き情報が得られ
る。
Therefore, if the scene of the current field has not changed from the scene of the previous field,
The multiplying unit 34 multiplies the first depth information for each of the parallax calculation areas E1 to E12 output from the depth information selecting unit 33 by 8. Thereby, the second depth information for each of the parallax calculation areas E1 to E12 is obtained.

【0201】各視差算出領域E1〜E12ごとの第2奥
行き情報は、加算手段35に送られる。加算手段35に
は、さらに、加算手段35から前回出力された各視差算
出領域E1〜E12ごとの第3奥行き情報に第2乗算手
段36によって7/8が乗算されることによって得られ
た各視差算出領域E1〜E12ごとの第4奥行き情報も
入力している。
The second depth information for each of the parallax calculation areas E1 to E12 is sent to the adding means 35. The adding means 35 further calculates each parallax obtained by multiplying the third depth information for each of the parallax calculation areas E1 to E12 previously output from the adding means 35 by 7/8 by the second multiplying means 36. Fourth depth information for each of the calculation areas E1 to E12 is also input.

【0202】加算手段35では、各視差算出領域E1〜
E12の第2奥行き情報と、対応する視差算出領域の第
4奥行き情報との和がそれぞれ算出される。これによ
り、各視差算出領域E1〜E12ごとの第3奥行き情報
が得られる。この各視差算出領域E1〜E12ごとの第
3奥行き情報が、視差情報として、視差制御回路4(図
28参照)に送られる。
In the adding means 35, each parallax calculation area E1
The sum of the second depth information of E12 and the fourth depth information of the corresponding parallax calculation area is calculated. Thereby, the third depth information for each of the parallax calculation areas E1 to E12 is obtained. The third depth information for each of the parallax calculation areas E1 to E12 is sent to the parallax control circuit 4 (see FIG. 28) as parallax information.

【0203】現フィールドのシーンが、前フィールドの
シーンから変化している場合には、第1乗算手段34に
よって、奥行き情報選択手段33から出力された各視差
算出領域E1〜E12ごとの奥行き情報に1がそれぞれ
乗算される。したがって、第1乗算手段34からは、奥
行き情報選択手段33から出力された各視差算出領域E
1〜E12ごとの奥行き情報がそのまま出力される。
When the scene of the current field has changed from the scene of the previous field, the first multiplying means 34 adds the depth information for each of the parallax calculation areas E1 to E12 output from the depth information selecting means 33. Each is multiplied by one. Therefore, the parallax calculation areas E output from the depth information selecting unit 33 are output from the first multiplying unit 34.
Depth information for each of 1 to E12 is output as it is.

【0204】第2乗算手段36の係数は0であるので、
第2乗算手段36の出力は0である。したがって、加算
手段35からは、奥行き情報選択手段33から出力され
た各視差算出領域E1〜E12ごとの奥行き情報がその
まま出力される。つまり、現フィールドのシーンが、前
フィールドのシーンから変化している場合には、奥行き
情報選択手段33から出力された各視差算出領域E1〜
E12ごとの奥行き情報が、視差情報として、視差制御
回路4(図28参照)に送られる。
Since the coefficient of the second multiplying means 36 is 0,
The output of the second multiplying means 36 is 0. Therefore, the depth information for each of the parallax calculation areas E1 to E12 output from the depth information selection means 33 is output from the addition means 35 as it is. In other words, when the scene of the current field has changed from the scene of the previous field, the parallax calculation areas E1 to E1 output from the depth information selection unit 33 are different.
Depth information for each E12 is sent to the parallax control circuit 4 (see FIG. 28) as parallax information.

【0205】第2の2D/3D映像変換装置における視
差制御回路4の構成および動作は、図2に示す第1の2
D/3D映像変換装置における視差制御回路と同じであ
るので、その構成および動作の説明を省略する。
The configuration and operation of the parallax control circuit 4 in the second 2D / 3D video converter are the same as those of the first 2D / 3D video converter shown in FIG.
Since the configuration is the same as that of the parallax control circuit in the D / 3D video converter, the description of the configuration and operation will be omitted.

【0206】上記2D/3D映像変換装置では、元の2
次元映像信号に対して時間的に遅延された映像信号を生
成するためのフィールドメモリが不要であるため、コス
トの低廉化が図れる。
In the 2D / 3D video converter, the original 2D / 3D video
Since a field memory for generating a video signal delayed in time with respect to the two-dimensional video signal is not required, the cost can be reduced.

【0207】〔1−3〕立体感調整回路の説明[1-3] Description of three-dimensional effect adjustment circuit

【0208】図31は、立体感調整回路502の構成を
示している。
FIG. 31 shows the configuration of the stereoscopic effect adjustment circuit 502.

【0209】立体感調整回路502は、係数生成回路6
01、左映像信号に対して立体感調整処理を行なう左映
像用立体感調整回路602および右映像信号に対して立
体感調整処理を行なう右映像用立体感調整回路603を
備えている。
[0209] The stereoscopic effect adjusting circuit 502 includes a coefficient generating circuit 6
01, a left image three-dimensional effect adjustment circuit 602 for performing a three-dimensional effect adjustment process on the left image signal, and a right image three-dimensional effect adjustment circuit 603 for performing the three-dimensional effect adjustment process on the right image signal.

【0210】左映像用立体感調整回路602の構成と、
右映像用立体感調整回路603の構成とは同じであるの
で、左映像用立体感調整回路602についてのみ説明す
る。
The configuration of the left image stereoscopic effect adjustment circuit 602,
Since the configuration of the three-dimensional effect adjustment circuit 603 for the right image is the same, only the three-dimensional effect adjustment circuit 602 for the left image will be described.

【0211】係数生成回路601は、2D/3D映像変
換装置501から送られてくる画素ごとの視差情報PR
(映像の遠近に関する情報)に基づいて、第1係数K
L、第2係数KHおよび第3係数KCを生成する。第1
係数KLは、0以上1以下の範囲内(0≦KL≦1)で
生成され、映像の低周波成分の割合を調整するための係
数である。つまり、第1係数KLは、映像の輪郭をぼや
かすための係数、すなわち映像の輪郭の鮮明度を低下さ
せるための係数であり、第1係数KLの値が大きくなる
ほど、輪郭がぼやけた映像が得られるようになる。
[0211] The coefficient generation circuit 601 outputs the parallax information PR for each pixel sent from the 2D / 3D video converter 501.
(Information on the perspective of the image) based on the first coefficient K
L, a second coefficient KH, and a third coefficient KC are generated. First
The coefficient KL is generated within a range of 0 or more and 1 or less (0 ≦ KL ≦ 1), and is a coefficient for adjusting a ratio of a low frequency component of an image. That is, the first coefficient KL is a coefficient for blurring the outline of the image, that is, a coefficient for reducing the sharpness of the outline of the image. The larger the value of the first coefficient KL, the more the image whose outline is blurred. Will be obtained.

【0212】係数生成回路601は、前方にある映像が
映っている画素に対しては、第1係数KLを小さくし、
後方にある映像が映っている画素に対しては、第1係数
KLを大きくする。上述したように、この実施の形態で
は、前方にある映像が映っている画素に対する視差情報
PRは小さく、後方にある映像が映っている画素に対す
る視差情報PRは大きい。このため、図32に示すよう
に、係数生成回路601は、視差情報PRが所定値以下
の範囲では、第1係数KLの値を0にさせ、視差情報P
Rが所定値より大きい範囲では、視差情報PRが大きく
なるほど、第1係数KLの値を大きくさせる。
The coefficient generation circuit 601 reduces the first coefficient KL for the pixel in which the image in front is shown,
The first coefficient KL is increased for a pixel on which an image behind is displayed. As described above, in this embodiment, the disparity information PR for a pixel in which an image in front is shown is small, and the disparity information PR for a pixel in which an image in back is shown is large. For this reason, as shown in FIG. 32, the coefficient generation circuit 601 sets the value of the first coefficient KL to 0 when the disparity information PR is equal to or less than a predetermined value, and sets the disparity information P
In a range where R is larger than a predetermined value, the value of the first coefficient KL is increased as the disparity information PR increases.

【0213】第2係数KHは、0以上1以下の範囲内
(0≦KH≦1)で生成され、映像の高周波成分の割合
を調整するための係数である。つまり、第2係数KH
は、映像の輪郭をくっきりさせるための係数、すなわち
映像の輪郭の鮮明度を高めるための係数であり、第2係
数KHの値が大きくなるほど輪郭がくっくりした映像が
得られるようになる。
The second coefficient KH is generated within a range of 0 or more and 1 or less (0 ≦ KH ≦ 1), and is a coefficient for adjusting a ratio of a high frequency component of an image. That is, the second coefficient KH
Is a coefficient for sharpening the outline of the image, that is, a coefficient for increasing the sharpness of the outline of the image. As the value of the second coefficient KH increases, an image with a sharper outline can be obtained.

【0214】係数生成回路601は、前方にある映像が
映っている画素に対しては、第2係数KHを大きくし、
後方にある映像が映っている画素に対しては、第2係数
KHを小さくする。上述したように、この実施の形態で
は、前方にある映像が映っている画素に対する視差情報
PRは小さく、後方にある映像が映っている画素に対す
る視差情報PRは大きい。このため、図33に示すよう
に、係数生成回路601は、視差情報PRが所定値以下
の範囲では、視差情報PRが大きくなるほど第2係数K
Hの値を小さくさせ、視差情報PRが所定値より大きい
範囲では、第2係数KHの値を0にさせる。
The coefficient generation circuit 601 increases the second coefficient KH for the pixel in which the image in front is shown,
The second coefficient KH is reduced for a pixel on which an image behind is displayed. As described above, in this embodiment, the disparity information PR for a pixel in which an image in front is shown is small, and the disparity information PR for a pixel in which an image in back is shown is large. For this reason, as shown in FIG. 33, in a range where the disparity information PR is equal to or less than a predetermined value, the coefficient generation circuit 601 determines that the second coefficient K
The value of H is reduced, and the value of the second coefficient KH is set to 0 in a range where the parallax information PR is larger than a predetermined value.

【0215】第3係数KCは、映像の彩度を調整するた
めの係数であり、第3係数KCが大きくなるほど映像の
彩度が強調される。係数生成回路601は、前方にある
映像が映っている画素に対しては、第3係数KCを大き
くし、後方にある映像が映っている画素に対しては、第
3係数KCを小さくする。上述したように、この実施の
形態では、前方にある映像が映っている画素に対する視
差情報PRは小さく、後方にある映像が映っている画素
に対する視差情報PRは大きい。このため、図34に示
すように、係数生成回路601は、視差情報PRが大き
くなるほど第3係数KCの値を小さくさせる。
The third coefficient KC is a coefficient for adjusting the saturation of an image, and the saturation of the image is enhanced as the third coefficient KC increases. The coefficient generation circuit 601 increases the third coefficient KC for a pixel in which an image in front is shown, and decreases the third coefficient KC in a pixel in which an image behind is shown. As described above, in this embodiment, the disparity information PR for a pixel in which an image in front is shown is small, and the disparity information PR for a pixel in which an image in back is shown is large. Therefore, as illustrated in FIG. 34, the coefficient generation circuit 601 decreases the value of the third coefficient KC as the disparity information PR increases.

【0216】左映像用立体感調整回路602には、2D
/3D映像変換装置501から送られてくる左映像を構
成する輝度信号YL、色差信号(R−Y)Lおよび色差
信号(B−Y)Lが入力される。
The stereoscopic effect adjustment circuit 602 for the left image has 2D
A luminance signal YL, a chrominance signal (RY) L, and a chrominance signal (BY) L, which form the left image and are transmitted from the / 3D image converter 501, are input.

【0217】左映像用立体感調整回路602は、映像の
輪郭の鮮明度を調整する回路610および映像の彩度を
調整する回路620とが設けられている。
The left image stereoscopic effect adjusting circuit 602 includes a circuit 610 for adjusting the sharpness of the outline of the image and a circuit 620 for adjusting the saturation of the image.

【0218】映像の輪郭の鮮明度を調整する回路610
について説明する。映像の輪郭の鮮明度を調整する回路
610は、映像の低周波成分の割合を調整する回路61
1、映像の高周波成分の割合を調整する回路612およ
びそれらの出力を加算する加算回路613とからなる。
Circuit 610 for Adjusting Sharpness of Image Outline
Will be described. The circuit 610 for adjusting the sharpness of the outline of the image is a circuit 61 for adjusting the ratio of the low frequency component of the image.
1. It comprises a circuit 612 for adjusting the ratio of the high frequency component of the video and an addition circuit 613 for adding their outputs.

【0219】映像の低周波成分の割合を調整する回路6
11は、輝度信号YLの低周波成分を抽出するローパス
フィルタ(LPF)701、ローパスフィルタ701に
よって抽出された輝度信号YLの低周波成分に第1係数
KLを乗算する第1乗算器702、1−KLの演算を行
なう演算器703、輝度信号YLに演算器703の出力
である(1−KL)を乗算する第2乗算器704ならび
に第1乗算器702の出力と第2乗算器704の出力を
加算する第1加算器705を備えている。
Circuit 6 for adjusting the ratio of the low frequency component of the video
Reference numeral 11 denotes a low-pass filter (LPF) 701 for extracting a low-frequency component of the luminance signal YL, and first multipliers 702 and 1- 1 for multiplying the low-frequency component of the luminance signal YL extracted by the low-pass filter 701 by a first coefficient KL. An arithmetic unit 703 that performs an operation of KL, a second multiplier 704 that multiplies the luminance signal YL by (1-KL) that is an output of the arithmetic unit 703, and an output of the first multiplier 702 and an output of the second multiplier 704. A first adder 705 for adding is provided.

【0220】映像の高周波成分の割合を調整する回路6
12は、輝度信号YLの高周波成分を抽出するハイパス
フィルタ(HPF)711およびハイパスフィルタ71
1によって抽出された輝度信号YLの高周波成分に第2
係数KHを乗算する第3乗算器712を備えている。
Circuit 6 for adjusting the ratio of high frequency components of video
A high-pass filter (HPF) 711 and a high-pass filter 71 for extracting a high-frequency component of the luminance signal YL
1 to the high frequency component of the luminance signal YL extracted by
A third multiplier 712 for multiplying the coefficient KH is provided.

【0221】映像の低周波成分の割合を調整する回路6
11の出力(第1加算器705の出力)と、映像の高周
波成分の割合を調整する回路612の出力(第3乗算器
712の出力)とは、加算回路613によって加算され
る。この加算回路613の出力YL−OUTが、図示し
ない立体表示装置に送られる。
Circuit 6 for adjusting the ratio of low frequency components of video
The output of the eleventh (the output of the first adder 705) and the output of the circuit 612 for adjusting the ratio of the high frequency component of the video (the output of the third multiplier 712) are added by the addition circuit 613. The output YL-OUT of the addition circuit 613 is sent to a three-dimensional display device (not shown).

【0222】上述したように、前方にある映像が映って
いる画素に対しては、第1係数KLは小さくなり、第2
係数KHは大きくなる。したがって、前方にある映像が
映っている画素に対しては、輝度信号YLの低周波成分
の割合は低く、輝度信号YLの高周波成分の割合が高く
なる。このため、前方にある映像が映っている画素に対
する映像は、輪郭がくっきりした映像となる。
As described above, the first coefficient KL becomes smaller for the pixel in which the image in front is reflected, and the second coefficient KL becomes smaller.
The coefficient KH increases. Therefore, the ratio of the low-frequency component of the luminance signal YL is low, and the ratio of the high-frequency component of the luminance signal YL is high, for a pixel on which an image in front is shown. For this reason, the image for the pixel in which the image in front is shown is an image with a sharp outline.

【0223】一方、後方にある映像が映っている画素に
対しては、第1係数KLは大きくなり、第2係数KHは
小さくなる。したがって、後方にある映像が映っている
画素に対しては、輝度信号YLの低周波成分の割合は高
く、輝度信号YLの高周波成分の割合が低くなる。この
ため、後方にある映像が映っている画素に対する映像
は、輪郭がぼやけた映像となる。このように、前方にあ
る映像が映っている画素に対する映像は輪郭がくっきり
した映像となり、後方にある映像が映っている画素に対
する映像は輪郭がぼやけた映像となるため、立体感が強
調される。
On the other hand, the first coefficient KL becomes larger and the second coefficient KH becomes smaller for a pixel on which a video image located behind is displayed. Therefore, the ratio of the low-frequency component of the luminance signal YL is high, and the ratio of the high-frequency component of the luminance signal YL is low, for a pixel on which an image behind is displayed. For this reason, the image for the pixel in which the image on the rear is reflected is an image with a blurred outline. In this way, the image for the pixel where the image in front is shown is a sharp image, and the image for the pixel where the image in the back is image is a blurred image, so that the stereoscopic effect is emphasized. .

【0224】映像の彩度を調整する回路620について
説明する。映像の彩度を調整する回路620は、色差信
号(R−Y)Lに第3係数KCを乗算する第5乗算器7
21および色差信号(B−Y)Lに第3係数KCを乗算
する第6乗算器722を備えている。第5乗算器721
の出力(R−Y)L−OUTおよび第6乗算器722の
出力(B−Y)L−OUTが、図示しない立体表示装置
に送られる。
The circuit 620 for adjusting the saturation of an image will be described. The circuit 620 for adjusting the saturation of the image includes a fifth multiplier 7 for multiplying the color difference signal (RY) L by a third coefficient KC.
21 and a sixth multiplier 722 for multiplying the color difference signal (BY) L by a third coefficient KC. Fifth multiplier 721
(RY) L-OUT of the sixth multiplier 722 and the output (BY) L-OUT of the sixth multiplier 722 are sent to a three-dimensional display device (not shown).

【0225】上述したように、前方にある映像が映って
いる画素に対しては、第3係数KCは大きくなる。した
がって、前方にある映像が映っている画素に対しては、
色差信号(R−Y)Lおよび(B−Y)Lの値が大きく
なり、彩度が高くなる。一方、後方にある映像が映って
いる画素に対しては、第3係数KCは小さくなる。した
がって、後方にある映像が映っている画素に対しては、
色差信号(R−Y)Lおよび(B−Y)Lの値が小さく
なり、彩度が低下する。このように、前方にある映像が
映っている画素に対する映像の彩度が高くなり、後方に
ある映像が映っている画素に対する映像の彩度が低くな
るので、立体感が強調される。
As described above, the third coefficient KC becomes larger for a pixel in which an image located ahead is reflected. Therefore, for the pixel where the image in front is reflected,
The values of the color difference signals (RY) L and (BY) L increase, and the saturation increases. On the other hand, the third coefficient KC is smaller for a pixel in which a video image located behind is displayed. Therefore, for the pixel where the image behind is reflected,
The values of the color difference signals (RY) L and (BY) L decrease, and the saturation decreases. As described above, the saturation of the image with respect to the pixel where the image in front is reflected increases, and the saturation of the image with respect to the pixel in which the image behind is reflected lowers, so that the stereoscopic effect is emphasized.

【0226】〔2〕この発明の第2の実施の形態につい
ての説明
[2] Description of Second Embodiment of the Invention

【0227】以下、この発明を、2台のカメラを用いて
撮像した左映像信号と右映像信号からなる3次元映像信
号の立体感を調整するシステムに対して適用した場合の
実施の形態について説明する。
The following describes an embodiment in which the present invention is applied to a system for adjusting the three-dimensional effect of a three-dimensional video signal composed of a left video signal and a right video signal captured using two cameras. I do.

【0228】〔2−1〕立体感調整システムの全体的な
構成の説明。
[2-1] Description of overall configuration of stereoscopic effect adjustment system.

【0229】図35は、立体感調整システムの構成を示
している。
FIG. 35 shows the configuration of the three-dimensional effect adjustment system.

【0230】この立体感調整システムは、3次元映像信
号から、1フィールド毎に、画素ごとの視差情報PRを
検出するための視差検出回路801および視差検出回路
801によって得られた画素ごとの視差情報PRに基づ
いて、3次元映像信号に対して立体感を調整する立体感
調整回路802とを備えている。
This stereoscopic effect adjusting system detects a parallax information PR for each pixel from a three-dimensional video signal for each field, and a parallax information for each pixel obtained by the parallax detection circuit 801. A stereoscopic effect adjusting circuit 802 for adjusting the stereoscopic effect on the three-dimensional video signal based on the PR.

【0231】視差検出回路801は、選択回路901、
動きベクトル検出回路902、ベクトル補正回路903
および視差情報生成回路904を備えている。
The parallax detection circuit 801 includes a selection circuit 901,
Motion vector detection circuit 902, vector correction circuit 903
And a parallax information generation circuit 904.

【0232】選択回路901には、3次元映像を構成す
る左映像の輝度信号YL−INと、3次元映像を構成す
る右映像の輝度信号YR−INとが入力している。ま
た、選択回路には、フィールド識別信号FLDが制御信
号として入力している。
The selection circuit 901 receives the luminance signal YL-IN of the left video constituting the three-dimensional video and the luminance signal YR-IN of the right video constituting the three-dimensional video. The selection circuit receives the field identification signal FLD as a control signal.

【0233】選択回路901は、フィールド識別信号F
LDに基づいて、左映像における輝度信号YL−INと
右映像における輝度信号YR−INとを1フィールド単
位で切り替えて出力する。この例では、フィールド識別
信号FLDは、入力映像信号のフィールドが奇数フィー
ルドである場合にはHレベルとなり、入力映像信号のフ
ィールドが偶数フィールドである場合にはLレベルとな
る。そして、選択回路901は、フィールド識別信号F
LDがHレベル(奇数フィールド)である場合には、左
映像における輝度信号YL−INを選択して出力し、フ
ィールド識別信号FLDがLレベル(偶数フィールド)
である場合には、右映像における輝度信号YR−INを
選択して出力する。
The selection circuit 901 outputs the field identification signal F
Based on the LD, the luminance signal YL-IN for the left image and the luminance signal YR-IN for the right image are switched and output in units of one field. In this example, the field identification signal FLD goes high when the field of the input video signal is an odd field, and goes low when the field of the input video signal is an even field. Then, the selection circuit 901 outputs the field identification signal F
When LD is at H level (odd field), the luminance signal YL-IN in the left image is selected and output, and the field identification signal FLD is at L level (even field).
, The luminance signal YR-IN in the right image is selected and output.

【0234】動きベクトル検出回路902は、選択回路
901から出力される映像信号から、1フィールド毎
に、図22に示すように1フィールド画面内に設定され
た12個の動きベクトル検出領域(以下、視差算出領域
という)E1〜E12それぞれに対するX方向動きベク
トルを算出する。
[0234] The motion vector detection circuit 902 converts the video signal output from the selection circuit 901 into twelve motion vector detection areas (hereinafter, referred to as "fields") set in one field screen as shown in FIG. An X-direction motion vector is calculated for each of the parallax calculation areas E1 to E12.

【0235】動きベクトル検出回路902によって得ら
れた各視差算出領域E1〜E12それぞれに対するX方
向動きベクトルは、ベクトル補正回路903に送られ
る。動きベクトル検出回路902によって得られた各視
差算出領域E1〜E12ごとの左映像と右映像との間の
映像の水平方向の動きを表している。左映像と右映像と
は視差を有しているので、同じ物体であっても、カメラ
からの距離に応じて両映像間で水平位置が異なってい
る。したがって、各視差算出領域E1〜E12ごとのX
方向動きベクトルは、各視差算出領域E1〜E12毎の
両映像間の視差に相当する。
The X-direction motion vectors for each of the parallax calculation areas E1 to E12 obtained by the motion vector detection circuit 902 are sent to the vector correction circuit 903. The horizontal motion of the video between the left video and the right video for each of the parallax calculation areas E1 to E12 obtained by the motion vector detection circuit 902 is shown. Since the left image and the right image have parallax, even for the same object, the horizontal position differs between the two images according to the distance from the camera. Therefore, X for each parallax calculation area E1 to E12
The directional motion vector corresponds to a parallax between both images in each of the parallax calculation areas E1 to E12.

【0236】しかしながら、同じ方向に物体が移動して
いる場合でも、左の映像から右映像に変化した場合に得
られるX方向ベクトルと、右映像から左映像に変化した
場合に得られるX方向ベクトルとでは、X方向の動きベ
クトルの符号が反対方向になる。そこで、同じ方向に物
体が移動している場合に、得られるX方向ベクトルの符
号を一致させるために、ベクトル補正回路903が設け
られている。
However, even when the object is moving in the same direction, the X direction vector obtained when the left image changes to the right image and the X direction vector obtained when the right image changes to the left image In, the sign of the motion vector in the X direction is in the opposite direction. Therefore, a vector correction circuit 903 is provided to match the signs of the obtained X-direction vectors when the objects are moving in the same direction.

【0237】ベクトル補正回路903は、フィールド識
別信号FLDがHレベル(奇数フィールド)である場合
には、動きベクトル検出回路902から送られてきた視
差算出領域E1〜E12それぞれに対するX方向動きベ
クトルを視差情報生成回路904にそのまま送る。
When the field identification signal FLD is at the H level (odd field), the vector correction circuit 903 converts the X-direction motion vector for each of the parallax calculation areas E1 to E12 sent from the motion vector detection circuit 902 into a parallax. It is sent to the information generation circuit 904 as it is.

【0238】フィールド識別信号FLDがLレベル(偶
数フィールド)である場合には、ベクトル補正回路90
3は、動きベクトル検出回路902から送られてきた視
差算出領域E1〜E12それぞれに対するX方向動きベ
クトルの符号を反転させて、視差情報生成回路904に
送る。
If the field identification signal FLD is at L level (even field), the vector correction circuit 90
3 inverts the sign of the X-direction motion vector for each of the disparity calculation areas E1 to E12 sent from the motion vector detection circuit 902, and sends it to the disparity information generation circuit 904.

【0239】視差情報生成回路904では、ベクトル補
正回路903から送られてきた各視差算出領域E1〜E
12ごとのX方向動きベクトルに基づいて、各画素ごと
の視差情報PRを生成する。
In the parallax information generation circuit 904, each of the parallax calculation areas E1 to E transmitted from the vector correction circuit 903.
The disparity information PR for each pixel is generated based on the X-direction motion vectors for each pixel.

【0240】つまり、ベクトル補正回路903から送ら
れてきた各視差算出領域E1〜E12ごとのX方向動き
ベクトルを、各視差算出領域E1〜E12に対する視差
情報とし、図21を用いて説明したと同様にして、各視
差算出領域E1〜E12に対する視差情報から各画素ご
との視差情報PRを生成する。
That is, the X-direction motion vector for each of the parallax calculation areas E1 to E12 sent from the vector correction circuit 903 is used as the parallax information for each of the parallax calculation areas E1 to E12, and is the same as that described with reference to FIG. Then, the disparity information PR for each pixel is generated from the disparity information for each of the disparity calculation areas E1 to E12.

【0241】立体感調整回路802は、視差情報検出回
路801によって得られた画素ごとの視差情報PRに基
づいて、3次元映像信号に対して立体感を補正するため
の処理を行なう。この立体感補正回路802は、。図1
の立体感調整回路502と同じであるので、その構成お
よび動作の説明を省略する。
The stereoscopic effect adjusting circuit 802 performs a process for correcting the stereoscopic effect on the three-dimensional video signal based on the parallax information PR for each pixel obtained by the parallax information detecting circuit 801. This three-dimensional effect correction circuit 802 includes: FIG.
Since it is the same as the three-dimensional effect adjustment circuit 502, the description of its configuration and operation is omitted.

【0242】[0242]

【発明の効果】この発明によれば、3次元映像信号によ
って得られる立体映像の立体感を調整することができる
ようになる。
According to the present invention, it is possible to adjust the stereoscopic effect of a stereoscopic video obtained by a three-dimensional video signal.

【図面の簡単な説明】[Brief description of the drawings]

【図1】2D/3D映像変換システムの構成を示すブロ
ック図である。
FIG. 1 is a block diagram illustrating a configuration of a 2D / 3D video conversion system.

【図2】2D/3D映像変換装置の構成を示すブロック
図である。
FIG. 2 is a block diagram illustrating a configuration of a 2D / 3D video conversion device.

【図3】視差算出領域を示す模式図である。FIG. 3 is a schematic diagram illustrating a parallax calculation area.

【図4】輝度積算回路の構成を示すブロック図である。FIG. 4 is a block diagram illustrating a configuration of a luminance integration circuit.

【図5】高周波成分積算回路の構成を示すブロック図で
ある。
FIG. 5 is a block diagram illustrating a configuration of a high-frequency component integration circuit.

【図6】図5のハイパスフィルタ232の具体例を示す
回路図である。
FIG. 6 is a circuit diagram showing a specific example of a high-pass filter 232 of FIG.

【図7】図5のスライス処理回路234の入出力特性を
示すグラフである。
FIG. 7 is a graph showing input / output characteristics of the slice processing circuit 234 of FIG.

【図8】高周波成分積算回路の他の例を示すブロック図
である。
FIG. 8 is a block diagram showing another example of the high frequency component integrating circuit.

【図9】図8のピーク検出回路239の具体例を示す回
路図である。
9 is a circuit diagram showing a specific example of the peak detection circuit 239 in FIG.

【図10】ピーク検出回路239の各部の信号を示すタ
イムチャートである。
FIG. 10 is a time chart showing signals of various parts of a peak detection circuit 239.

【図11】輝度コントラスト算出回路の構成を示すブロ
ック図である。
FIG. 11 is a block diagram illustrating a configuration of a luminance contrast calculation circuit.

【図12】図11の輝度コントラスト検出回路の構成を
示す回路図である。
FIG. 12 is a circuit diagram illustrating a configuration of a luminance contrast detection circuit in FIG. 11;

【図13】彩度積算回路の構成を示す回路図である。FIG. 13 is a circuit diagram illustrating a configuration of a saturation integration circuit.

【図14】CPUによる視差情報の生成方法を説明する
ための説明図である。
FIG. 14 is an explanatory diagram for describing a method of generating disparity information by a CPU.

【図15】図14の正規化手段410の入出力関係を示
すグラフである。
FIG. 15 is a graph showing an input / output relationship of the normalizing means 410 of FIG.

【図16】実際に設定される視差算出領域を示す模式図
である。
FIG. 16 is a schematic diagram illustrating a parallax calculation area actually set.

【図17】奥行き補正前における各視差算出領域の奥行
き情報の一例を示す模式図である。
FIG. 17 is a schematic diagram illustrating an example of depth information of each parallax calculation area before depth correction.

【図18】奥行き補正後における各視差算出領域の奥行
き情報を示す模式図である。
FIG. 18 is a schematic diagram illustrating depth information of each parallax calculation area after depth correction.

【図19】奥行き補正前における画面の高さ位置に対す
る奥行き情報との関係および奥行き補正後における画面
の高さ位置に対する奥行き情報との関係を示すグラフで
ある。
FIG. 19 is a graph showing the relationship between the height position of the screen before depth correction and depth information and the relationship between the height position of the screen after depth correction and depth information.

【図20】奥行き情報と視差情報との関係を示すグラフ
である。
FIG. 20 is a graph showing a relationship between depth information and disparity information.

【図21】主として、視差制御回路および任意画素遅延
FIFOの構成を示すブロック図である。
FIG. 21 is a block diagram mainly showing a configuration of a parallax control circuit and an arbitrary pixel delay FIFO.

【図22】相対的水平位置および相対的垂直位置等を示
す模式図である。
FIG. 22 is a schematic diagram showing a relative horizontal position, a relative vertical position, and the like.

【図23】注目画素に対する視差情報を生成する方法を
説明するための説明図である。
FIG. 23 is an explanatory diagram for describing a method of generating disparity information for a target pixel.

【図24】視差選択回路による選択規則を示す図であ
る。
FIG. 24 is a diagram illustrating a selection rule by a parallax selection circuit.

【図25】視差情報が0の場合の各部の信号を示すタイ
ムチャートである。
FIG. 25 is a time chart showing signals of respective units when disparity information is 0.

【図26】視差情報が1.2の場合の各アドレス値を視
差制御回路に付記したブロック図である。
FIG. 26 is a block diagram in which each address value when the disparity information is 1.2 is added to the disparity control circuit.

【図27】視差情報が1.2の場合の各部の信号を示す
タイムチャートである。
FIG. 27 is a time chart illustrating signals of respective units when the disparity information is 1.2.

【図28】他の2D/3D映像変換装置の構成を示すブ
ロック図である。
FIG. 28 is a block diagram illustrating a configuration of another 2D / 3D video conversion device.

【図29】CPUによる奥行き情報の生成処理手順を示
す機能ブロック図である。
FIG. 29 is a functional block diagram illustrating a depth information generation process performed by a CPU;

【図30】CPUによる奥行き情報の生成方法を説明す
るための説明図である。
FIG. 30 is an explanatory diagram for describing a method of generating depth information by a CPU.

【図31】立体感調整回路の構成を示すブロック図であ
る。
FIG. 31 is a block diagram illustrating a configuration of a three-dimensional effect adjustment circuit.

【図32】画素ごとの視差情報PRと第1係数KLとの
関係を示すグラフである。
FIG. 32 is a graph illustrating a relationship between disparity information PR for each pixel and a first coefficient KL.

【図33】画素ごとの視差情報PRと第2係数KHとの
関係を示すグラフである。
FIG. 33 is a graph illustrating a relationship between disparity information PR for each pixel and a second coefficient KH.

【図34】画素ごとの視差情報PRと第3係数KCとの
関係を示すグラフである。
FIG. 34 is a graph illustrating a relationship between disparity information PR for each pixel and a third coefficient KC.

【図35】立体感調整システムの構成を示すブロック図
である。
FIG. 35 is a block diagram illustrating a configuration of a three-dimensional effect adjustment system.

【符号の説明】[Explanation of symbols]

501 2D/3D映像変換回路 502 立体感調整回路 601 係数生成回路 602 左映像用立体感調整回路 603 右映像用立体感調整回路 801 視差検出回路 802 立体感調整回路 Reference numeral 501 2D / 3D video conversion circuit 502 Stereoscopic effect adjustment circuit 601 Coefficient generation circuit 602 Left image stereoscopic effect adjustment circuit 603 Right image stereoscopic effect adjustment circuit 801 Parallax detection circuit 802 Stereoscopic effect adjustment circuit

Claims (13)

【特許請求の範囲】[Claims] 【請求項1】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の輪郭の鮮明度を
制御することにより、3次元映像の立体感を調整する立
体感調整方法。
1. A 3D image based on information on the perspective of an image for each predetermined unit area within one field screen of a 3D image.
A stereoscopic effect adjusting method for adjusting the stereoscopic effect of a three-dimensional image by controlling the sharpness of the outline of the image for each predetermined unit area of the three-dimensional image.
【請求項2】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の彩度を制御する
ことにより、3次元映像の立体感を調整する立体感調整
方法。
2. A three-dimensional image based on information on the perspective of an image for each predetermined unit area within a one-field screen of a three-dimensional image.
A stereoscopic effect adjusting method for adjusting the stereoscopic effect of a three-dimensional image by controlling the saturation of the image for each predetermined unit area of the three-dimensional image.
【請求項3】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の輪郭の鮮明度を
制御するとともに映像の彩度を制御することにより、3
次元映像の立体感を調整する立体感調整方法。
3. A three-dimensional image based on information on the perspective of an image for each predetermined unit area within a one-field screen of a three-dimensional image.
By controlling the sharpness of the outline of the image and the saturation of the image for each predetermined unit area of the three-dimensional image, 3
A stereoscopic effect adjustment method that adjusts the stereoscopic effect of 3D images.
【請求項4】 近い映像が映っている領域に対しては、
映像の輪郭の鮮明度が高くなるように、遠い映像が映っ
ている領域に関しては映像の輪郭の鮮明度が低くなるよ
うに、映像の輪郭の鮮明度が制御される請求項1に記載
の3次元映像の立体感を調整する立体感調整方法。
4. For an area where a close image is shown,
2. The method according to claim 1, wherein the sharpness of the outline of the image is controlled so that the sharpness of the outline of the image is high and the sharpness of the outline of the image is low in a region where a distant image is reflected. A stereoscopic effect adjustment method that adjusts the stereoscopic effect of 3D images.
【請求項5】 近い映像が映っている領域に対しては、
映像の彩度が高くなるように、遠い映像が映っている領
域に関しては映像の彩度が低くなるように、映像の彩度
が制御される請求項2に記載の3次元映像の立体感を調
整する立体感調整方法。
5. For an area where a close image is shown,
3. The stereoscopic effect of a three-dimensional image according to claim 2, wherein the saturation of the image is controlled so that the saturation of the image is high and the saturation of the image is low in an area where a distant image is reflected. Adjusting stereoscopic effect.
【請求項6】 近い映像が映っている領域に対しては、
映像の輪郭の鮮明度が高くなるように、遠い映像が映っ
ている領域に関しては映像の輪郭の鮮明度が低くなるよ
うに、映像の輪郭の鮮明度が制御され、近い映像が映っ
ている領域に対しては映像の彩度が高くなるように、遠
い映像が映っている領域に関しては映像の彩度が低くな
るように、映像の彩度が制御される請求項3に記載の3
次元映像の立体感を調整する立体感調整方法。
6. For an area where a close image is shown,
For areas where a distant image is projected so that the sharpness of the outline of the image is high, the sharpness of the outline of the image is controlled so that the sharpness of the outline of the image is low and an area where a close image is shown 4. The method according to claim 3, wherein the saturation of the image is controlled so that the saturation of the image is increased with respect to the image, and the saturation of the image is decreased with respect to a region where a distant image is reflected.
A stereoscopic effect adjustment method that adjusts the stereoscopic effect of 3D images.
【請求項7】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の輪郭の鮮明度を
制御する輪郭制御手段を備えている立体感調整装置。
7. A three-dimensional image based on information on the perspective of an image for each predetermined unit area within a one-field screen of a three-dimensional image.
A three-dimensional effect adjusting device comprising an outline control means for controlling the sharpness of an outline of an image for each predetermined unit area of a two-dimensional image.
【請求項8】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の彩度を制御する
彩度制御手段を備えている立体感調整装置。
8. A three-dimensional image based on information on the perspective of the image for each predetermined unit area within a one-field screen of a three-dimensional image.
A three-dimensional effect adjusting device comprising a saturation control unit for controlling the saturation of an image for each predetermined unit area of a two-dimensional image.
【請求項9】 3次元映像の1フィールド画面内の所定
単位領域ごとの映像の遠近に関する情報に基づいて、3
次元映像の各所定単位領域ごとに映像の輪郭の鮮明度を
制御する輪郭制御手段、および3次元映像の1フィール
ド画面内の所定単位領域ごとの映像の遠近に関する情報
に基づいて、3次元映像の各所定単位領域ごとに映像の
彩度を制御する彩度制御手段、 を備えている立体感調整装置。
9. A three-dimensional image based on information on the perspective of an image for each predetermined unit area within a one-field screen of a three-dimensional image.
Contour control means for controlling the sharpness of the outline of the image for each predetermined unit area of the three-dimensional image; A three-dimensional effect adjustment device comprising: a saturation control unit configured to control a saturation of an image for each predetermined unit area.
【請求項10】 輪郭制御手段は、近い映像が映ってい
る領域に対しては、映像の輪郭の鮮明度が高くなるよう
に、遠い映像が映っている領域に関しては映像の輪郭の
鮮明度が低くなるように、映像の輪郭の鮮明度を制御す
るものである請求項7に記載の立体感調整装置。
10. The contour control means increases the sharpness of the contour of the image in a region where a near image is projected, and increases the sharpness of the contour of the image in a region where a far image is projected. 8. The three-dimensional effect adjusting device according to claim 7, wherein the sharpness of the outline of the image is controlled so as to be lower.
【請求項11】 彩度制御手段は、近い映像が映ってい
る領域に対しては、映像の彩度が高くなるように、遠い
映像が映っている領域に関しては映像の彩度が低くなる
ように、映像の彩度を制御するものである請求項8に記
載の立体感調整装置。
11. The saturation control means increases the saturation of the image in an area where a near image is displayed, and lowers the saturation of the image in an area where a distant image is reflected. 9. The three-dimensional effect adjusting device according to claim 8, wherein the three-dimensional effect adjusting device controls the saturation of an image.
【請求項12】 輪郭制御手段は、近い映像が映ってい
る領域に対しては、映像の輪郭の鮮明度が高くなるよう
に、遠い映像が映っている領域に関しては映像の輪郭の
鮮明度が低くなるように、映像の輪郭の鮮明度を制御す
るものであり、 彩度制御手段は、近い映像が映っている領域に対して
は、映像の彩度が高くなるように、遠い映像が映ってい
る領域に関しては映像の彩度が低くなるように、映像の
彩度を制御するものである請求項9に記載の立体感調整
装置。
12. The contour control means increases the sharpness of the contour of an image in a region where a distant image is projected, so that the sharpness of the contour of the image is high in a region where a near image is projected. The saturation control means controls the sharpness of the outline of the video so that the image becomes lower, and the saturation control means displays the distant video so that the saturation of the video becomes higher in the area where the closer video is displayed. 10. The three-dimensional effect adjustment device according to claim 9, wherein the saturation of the image is controlled so that the saturation of the image is reduced in the region where the image is displayed.
【請求項13】 輪郭制御手段は、近い映像が映ってい
る領域に対しては、映像の低周波成分の割合を減少させ
るとともに映像の高周波成分の割合を増加させ、遠い映
像が映っている領域に関しては映像の低周波成分の割合
を増加させるとともに映像の高周波成分の割合を減少さ
せるものである請求項7および請求項12に記載の立体
感調整装置。
13. A contour control means for a region in which a near image is shown, reduces the ratio of a low-frequency component of the image and increases the ratio of a high-frequency component of the image, and sets a region in which a distant image is shown. 13. The three-dimensional effect adjusting device according to claim 7, wherein the ratio of the low-frequency component of the video is increased and the ratio of the high-frequency component of the video is reduced.
JP20817296A 1996-07-18 1996-08-07 Stereoscopic effect adjusting method and stereoscopic effect adjusting device Expired - Fee Related JP3235776B2 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP20817296A JP3235776B2 (en) 1996-08-07 1996-08-07 Stereoscopic effect adjusting method and stereoscopic effect adjusting device
EP97930812A EP0918439B1 (en) 1996-07-18 1997-07-16 Device for converting two-dimensional video into three-dimensional video
DE69739179T DE69739179D1 (en) 1996-07-18 1997-07-16 EIDIMENSIONAL PICTURES
PCT/JP1997/002471 WO1998004087A1 (en) 1996-07-18 1997-07-16 Device and method for converting two-dimensional video into three-dimensional video
KR10-1999-7000337A KR100445619B1 (en) 1996-07-18 1997-07-16 Device and method for converting two-dimensional video into three-dimensional video
US09/147,518 US6445833B1 (en) 1996-07-18 1997-07-16 Device and method for converting two-dimensional video into three-dimensional video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP20817296A JP3235776B2 (en) 1996-08-07 1996-08-07 Stereoscopic effect adjusting method and stereoscopic effect adjusting device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP32955698A Division JP3276931B2 (en) 1996-08-07 1998-11-19 3D image adjustment method and 3D image adjustment apparatus

Publications (2)

Publication Number Publication Date
JPH1051811A true JPH1051811A (en) 1998-02-20
JP3235776B2 JP3235776B2 (en) 2001-12-04

Family

ID=16551859

Family Applications (1)

Application Number Title Priority Date Filing Date
JP20817296A Expired - Fee Related JP3235776B2 (en) 1996-07-18 1996-08-07 Stereoscopic effect adjusting method and stereoscopic effect adjusting device

Country Status (1)

Country Link
JP (1) JP3235776B2 (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002123842A (en) * 2000-10-13 2002-04-26 Takumi:Kk Device for generating stereoscopic image, and medium for recording information
JP2006325173A (en) * 2005-04-18 2006-11-30 Nippon Telegr & Teleph Corp <Ntt> Binocular type stereoscopic display device and program
JP2007329902A (en) * 2006-05-08 2007-12-20 Matsushita Electric Ind Co Ltd Image processing method, image processing device, program, storage medium and integrated circuit
JP2008527561A (en) * 2005-01-12 2008-07-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Depth perception
JP2010122345A (en) * 2008-11-18 2010-06-03 Sony Corp Image displaying device, image displaying method, and image displaying system
JP2011120210A (en) * 2009-10-28 2011-06-16 Sony Corp Image processing apparatus, image processing method, and program
JP2012105202A (en) * 2010-11-12 2012-05-31 Canon Inc Image processing device and control method of the same
WO2012095914A1 (en) * 2011-01-13 2012-07-19 パナソニック株式会社 Stereoscopic image processing device, stereoscopic image processing method, and program
JP2012256039A (en) * 2011-05-16 2012-12-27 Fujifilm Corp Parallax image display device, parallax image display method, and parallax image print
WO2013054454A1 (en) * 2011-10-14 2013-04-18 パナソニック株式会社 Video signal processing device
JP5374641B2 (en) * 2010-04-20 2013-12-25 パナソニック株式会社 3D video recording apparatus and 3D video signal processing apparatus
JP2014179995A (en) * 2009-10-28 2014-09-25 Sony Corp Image processing apparatus, image processing method, and program
JP2015173457A (en) * 2015-04-16 2015-10-01 株式会社ニコン Image processing device, image processing method, and program
US10171799B2 (en) 2011-05-16 2019-01-01 Fujifilm Corporation Parallax image display device, parallax image generation method, parallax image print

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002123842A (en) * 2000-10-13 2002-04-26 Takumi:Kk Device for generating stereoscopic image, and medium for recording information
JP2008527561A (en) * 2005-01-12 2008-07-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Depth perception
JP2006325173A (en) * 2005-04-18 2006-11-30 Nippon Telegr & Teleph Corp <Ntt> Binocular type stereoscopic display device and program
JP4535954B2 (en) * 2005-04-18 2010-09-01 日本電信電話株式会社 Binocular stereoscopic display device and program
JP2007329902A (en) * 2006-05-08 2007-12-20 Matsushita Electric Ind Co Ltd Image processing method, image processing device, program, storage medium and integrated circuit
JP2010122345A (en) * 2008-11-18 2010-06-03 Sony Corp Image displaying device, image displaying method, and image displaying system
JP2014179995A (en) * 2009-10-28 2014-09-25 Sony Corp Image processing apparatus, image processing method, and program
JP2011120210A (en) * 2009-10-28 2011-06-16 Sony Corp Image processing apparatus, image processing method, and program
US10313660B2 (en) 2009-10-28 2019-06-04 Sony Corporation Image processing apparatus, image processing method, and program
JP5374641B2 (en) * 2010-04-20 2013-12-25 パナソニック株式会社 3D video recording apparatus and 3D video signal processing apparatus
JP2012105202A (en) * 2010-11-12 2012-05-31 Canon Inc Image processing device and control method of the same
WO2012095914A1 (en) * 2011-01-13 2012-07-19 パナソニック株式会社 Stereoscopic image processing device, stereoscopic image processing method, and program
US9064331B2 (en) 2011-01-13 2015-06-23 Panasonic Intellectual Property Management Co., Ltd. Three-dimensional image processing apparatus, three-dimensional image processing method, and program
JP5909704B2 (en) * 2011-01-13 2016-04-27 パナソニックIpマネジメント株式会社 Stereoscopic image processing apparatus, stereoscopic image processing method, and program
JP2012256039A (en) * 2011-05-16 2012-12-27 Fujifilm Corp Parallax image display device, parallax image display method, and parallax image print
US10171799B2 (en) 2011-05-16 2019-01-01 Fujifilm Corporation Parallax image display device, parallax image generation method, parallax image print
WO2013054454A1 (en) * 2011-10-14 2013-04-18 パナソニック株式会社 Video signal processing device
US9386291B2 (en) 2011-10-14 2016-07-05 Panasonic Intellectual Property Management Co., Ltd. Video signal processing device
JP2015173457A (en) * 2015-04-16 2015-10-01 株式会社ニコン Image processing device, image processing method, and program

Also Published As

Publication number Publication date
JP3235776B2 (en) 2001-12-04

Similar Documents

Publication Publication Date Title
KR100445619B1 (en) Device and method for converting two-dimensional video into three-dimensional video
JP3005474B2 (en) Apparatus and method for converting 2D image to 3D image
JP3276931B2 (en) 3D image adjustment method and 3D image adjustment apparatus
US6466255B1 (en) Stereoscopic video display method and apparatus, stereoscopic video system, and stereoscopic video forming method
JP5587894B2 (en) Method and apparatus for generating a depth map
JP3235776B2 (en) Stereoscopic effect adjusting method and stereoscopic effect adjusting device
US9036007B2 (en) System and method for converting two dimensional to three dimensional video
KR101856805B1 (en) Image processing device, image processing method, and program
US20040090523A1 (en) Image processing apparatus and method and image pickup apparatus
US8630480B2 (en) Image processing apparatus, display apparatus, image processing method and image processing program
JP2001320731A (en) Device for converting two-dimensional image into there dimensional image and its method
TW201203171A (en) Image processing apparatus and storage medium having stored therein an image processing program
US20120133747A1 (en) Image processing apparatus, display apparatus, image processing method and image processing program
JP2951291B2 (en) Apparatus and method for converting 2D image to 3D image
JP3500056B2 (en) Apparatus and method for converting 2D image to 3D image
TWI559762B (en) An image processing apparatus, an image processing method, and a recording medium
JP3540626B2 (en) Apparatus and method for converting 2D image to 3D image
JP2005031800A (en) Thermal image display device
JP3485764B2 (en) Apparatus and method for converting 2D image to 3D image
JP3957343B2 (en) Apparatus and method for converting 2D video to 3D video
JP3454684B2 (en) Apparatus for converting 2D video to 3D video
JP2004310777A (en) Combination camera and method of compositing virtual image from two or more inputted images
US5488428A (en) Video special effect generating apparatus
JP5545059B2 (en) Moving image processing method, moving image processing apparatus, and moving image processing program
JP2012060246A (en) Image processor and integrated circuit device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070928

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080928

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090928

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees