JP2009303205A - Video combination apparatus - Google Patents

Video combination apparatus Download PDF

Info

Publication number
JP2009303205A
JP2009303205A JP2009116133A JP2009116133A JP2009303205A JP 2009303205 A JP2009303205 A JP 2009303205A JP 2009116133 A JP2009116133 A JP 2009116133A JP 2009116133 A JP2009116133 A JP 2009116133A JP 2009303205 A JP2009303205 A JP 2009303205A
Authority
JP
Japan
Prior art keywords
video
video signal
interlaced
pull
progressive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009116133A
Other languages
Japanese (ja)
Inventor
Akira Matsubara
彰 松原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2009116133A priority Critical patent/JP2009303205A/en
Publication of JP2009303205A publication Critical patent/JP2009303205A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To solve the problem wherein a resolution of a video image created is coarse and image quality is deteriorated since the video image created when enlarging or reducing an interlaced transmission video signal, is created from a line on which interlaced scanning has been performed. <P>SOLUTION: When combining an interlaced transmission video signal on which interlaced scanning has been performed, a progressive video signal interpolated vertically is created. The created progressive video signal is enlarged to create the interlaced transmission video signal for combination. By combining the interlaced transmission video signal, a line becomes precise in enlargement, thereby obtaining a sharp combination video image. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、BD−ROMなどの蓄積メディアからの映像データを、テレビジョンに映像を出力する、映像合成装置に関するものであり、2種類の映像データを合成する映像合成装置に関するものである。   The present invention relates to a video synthesizer that outputs video data from a storage medium such as a BD-ROM to a television, and relates to a video synthesizer that synthesizes two types of video data.

映像データを合成する映像信号処理に関する手法については従来から提案がなされている(例えば特許文献1参照)。同公報によれば、PinPプロセッサを用いて、2つの映像の合成を行っている。   A method related to video signal processing for synthesizing video data has been proposed (see, for example, Patent Document 1). According to the publication, two videos are synthesized using a PinP processor.

図8を参照して従来例における映像合成装置を説明する。図8は、従来例における映像合成装置の合成動作を説明する為の概念図である。   With reference to FIG. 8, a conventional video composition apparatus will be described. FIG. 8 is a conceptual diagram for explaining the composition operation of the video composition apparatus in the conventional example.

図8において、映像Aを拡大して、映像Bを作成する。そして、映像Bと映像Cと合成して、映像Dを作成して出力する。   In FIG. 8, video A is enlarged to create video B. Then, the video B and the video C are combined to create and output the video D.

図9は、従来例における垂直方向の映像ラインの合成動作を説明する為の概念図である。   FIG. 9 is a conceptual diagram for explaining the operation of combining vertical video lines in the conventional example.

図9において、インタレース映像である映像Aを映像Cに合成する場合、
映像AのフィールドをA−1、A−2に分離して、それぞれ補間ラインであるB−1、B−2を作成して、それぞれ、Cと同じフィールドに合成している。
In FIG. 9, when synthesizing video A, which is an interlaced video, with video C,
The field of video A is separated into A-1 and A-2, interpolation lines B-1 and B-2 are created, respectively, and are combined into the same fields as C respectively.

特開平6−292148号公報JP-A-6-292148

しかしながら、従来の映像装置における映像信号の変換では、映像の一方を拡大して合成する時に、インタレース映像を拡大することとなり、作成されるBの映像の解像度が粗くなり、表示される映像の画質が粗くなるという課題を有していた。   However, in the conversion of the video signal in the conventional video apparatus, when one of the videos is enlarged and synthesized, the interlaced video is enlarged, and the resolution of the created B video becomes coarse, and the displayed video is displayed. There was a problem that the image quality becomes coarse.

本発明では、インタレース映像を拡大して合成する場合にも、画質が粗くなることを映像を防止することできる、映像合成装置および、その方法を提供することを目的とする。   An object of the present invention is to provide a video synthesizing apparatus and method that can prevent a video from being deteriorated in image quality even when an interlaced video is enlarged and synthesized.

本発明における第1の映像合成装置では、第1の映像信号が入力され、第1の映像信号が毎秒24フレームのプログレッシブ映像信号である場合には、3−2プルダウンをして毎秒60フィールドのインタレース映像信号として出力する一方、第1の映像信号が毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで出力する第1の3−2プルダウン手段と、第2の映像信号が入力され、第2の映像信号が毎秒24フレームのプログレッシブ映像信号である場合には、3−2プルダウンをして毎秒60フィールドのインタレース映像信号として出力する一方、第2の映像信号が毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで出力する第2の3−2プルダウン手段と、第2の3−2プルダウン手段から出力された映像信号を、第1の映像信号と同じ映像画素の伝送速度に変換して出力する画素レート変換手段と、第1の3−2プルダウン手段から出力された映像信号と、画素レート変換手段から出力された映像信号とを合成して出力する合成手段と、を備える。   In the first video composition apparatus according to the present invention, when the first video signal is input and the first video signal is a progressive video signal of 24 frames per second, 3-2 pull-down is performed and 60 fields per second are obtained. A first 3-2 pull-down means for outputting an interlaced video signal at 60 fields per second as it is when the first video signal is an interlaced video signal at 60 fields per second while outputting as an interlaced video signal; When the second video signal is input and the second video signal is a progressive video signal of 24 frames per second, the second video signal is output as an interlaced video signal of 60 fields per second by performing 3-2 pulldown. If the video signal of 2 is an interlaced video signal of 60 fields per second, the interlaced video signal of 60 fields per second The second 3-2 pull-down means for outputting up to 2 and the pixel rate conversion for converting the video signal output from the second 3-2 pull-down means to the same video pixel transmission rate as that of the first video signal and outputting it And a synthesizing unit that synthesizes and outputs the video signal output from the first 3-2 pull-down unit and the video signal output from the pixel rate conversion unit.

これにより、
飛び越し走査したインタレース映像を合成する場合に、垂直方向に補間された映像をもとに拡大して合成することにより、きれいな合成映像を得る事ができる。
This
When synthesizing interlaced images that are interlaced and scanned, it is possible to obtain a beautiful synthesized image by enlarging and synthesizing the interpolated image in the vertical direction.

本発明によれば、インタレース出力など解像度の低い映像を出力する場合にも、合成元の映像の組み合わせに合わせて、同じフレームで補間された映像をもとに拡大または合成することにより、きれいな合成映像を得る事ができる   According to the present invention, even when a low-resolution video such as an interlaced output is output, the video is interpolated or synthesized based on the video interpolated in the same frame in accordance with the combination of the video to be synthesized. You can get composite video

本発明の実施の形態1における映像合成装置の構成を示すブロック図The block diagram which shows the structure of the video synthesizing | combining apparatus in Embodiment 1 of this invention. 本発明の第1の実施の形態における映像合成装置の動作を示す動作図Operational diagram showing the operation of the video synthesizing device in the first embodiment of the present invention 本発明の第1の実施の形態における映像合成装置の合成動作を示す説明図Explanatory drawing which shows the synthetic | combination operation | movement of the video synthesizing | combining apparatus in the 1st Embodiment of this invention. 本発明の第2の実施の形態の映像合成装置の構成図Configuration diagram of video synthesizing apparatus of second embodiment of the present invention 本発明の第2の実施の形態の映像合成装置の動作図Operation diagram of video synthesizing apparatus of second embodiment of the present invention 本発明の第2の実施の形態の映像合成装置の動作図Operation diagram of video synthesizing apparatus of second embodiment of the present invention 本発明の第2の実施の形態の映像合成方法のフローチャートFlowchart of video composition method according to second embodiment of the present invention 従来例における映像合成装置の合成動作を説明する為の概念図Conceptual diagram for explaining the composition operation of the image composition device in the conventional example 従来例における垂直方向の映像ラインの合成動作を説明する為の概念図Conceptual diagram for explaining the operation of combining vertical video lines in the conventional example

(実施の形態1)
図1は、本発明の実施の形態1における映像合成装置の構成を示すブロック図である。図1において、映像合成装置は、プログレッシブ映像Apをプログレッシブ映像Cpに合成して出力する。
(Embodiment 1)
FIG. 1 is a block diagram showing the configuration of the video composition apparatus according to Embodiment 1 of the present invention. In FIG. 1, the video composition device synthesizes a progressive video Ap with a progressive video Cp and outputs it.

合成して作成される映像は、図8に示すように、PinP(ピクチャインピクチャ)の構成となる。プログレッシブ映像Cpをプラマリビデオと呼び、プログレッシブ映像Apをセカンダリビデオと呼ぶ場合がある。また、本実施の形態のプログレッシブ映像Cpの解像度は1080pとし、プログレッシブ映像Apの解像度を480pとする。   As shown in FIG. 8, the video generated by combining has a PinP (picture-in-picture) configuration. The progressive video Cp may be called a primary video, and the progressive video Ap may be called a secondary video. Further, the resolution of the progressive video Cp of this embodiment is 1080p, and the resolution of the progressive video Ap is 480p.

図1を用いて、本発明の実施の形態1における映像合成装置の構成を説明する。3−2プルダウン手段1は、プライマリビデオのプログレッシブ映像Cpが、毎秒24フレームのプログレッシブ映像の場合に、毎秒60フィールドのインタレース映像と同じように、飛び越し走査の映像(解像度:1080i)に変換し、インタレース伝送映像Ciとして出力する。一方、入力されるプライマリビデオが毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで、インタレース伝送映像Ci(解像度:1080i)として出力する。   The configuration of the video composition apparatus according to Embodiment 1 of the present invention will be described with reference to FIG. The 3-2 pull-down means 1 converts the progressive video Cp of the primary video into an interlaced video (resolution: 1080i) in the same manner as an interlaced video of 60 fields per second when the progressive video Cp is 24 frames per second. And output as interlaced transmission video Ci. On the other hand, when the input primary video is an interlaced video signal of 60 fields per second, the interlaced video signal of 60 fields per second remains as it is and is output as an interlaced transmission video Ci (resolution: 1080i).

3−2プルダウン手段2は、入力されたセカンダリビデオのプログレッシブ映像Apが、毎秒24フレームのプログレッシブ映像の場合に、毎秒60フィールドのインタレース映像と同じように、飛び越し走査の映像であるインタレース伝送映像Ai(解像度:480i)として出力する。一方、入力されるセカンダリビデオが毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで、インタレース伝送映像Ai(解像度:1080i)として出力する。本明細書においては、インタレース映像と同じような飛び越し走査の映像に変換した映像を、インタレース伝送映像と呼ぶ。   3-2 pull-down means 2 performs interlaced transmission as interlaced video as in the case of 60 fields per second when the input secondary video progressive video Ap is 24 frames per second progressive video. Output as video Ai (resolution: 480i). On the other hand, when the input secondary video is an interlaced video signal of 60 fields per second, the interlaced video signal of 60 fields per second remains as it is and is output as an interlaced transmission video Ai (resolution: 1080i). In this specification, an image converted into an interlaced image similar to an interlaced image is referred to as an interlaced transmission image.

補間手段3には、3−2プルダウン手段2から出力されたインタレース伝送映像Aiが入力される。補間手段3は、インタレース伝送映像Aiについて前のフィールドからフレームに相当する画素(補間画素)を計算する。補間手段3は、計算した補間画素に基づき、インタレース伝送映像Aiをプログレッシブ映像(解像度:480p)に変換し、プログレッシブ映像App1として出力する。   The interlace transmission video Ai output from the 3-2 pull-down means 2 is input to the interpolation means 3. The interpolating means 3 calculates pixels (interpolated pixels) corresponding to the frame from the previous field for the interlaced transmission video Ai. The interpolation means 3 converts the interlaced transmission video Ai into a progressive video (resolution: 480p) based on the calculated interpolation pixel, and outputs the progressive video App1.

拡大縮小手段4は、入力されるプログレッシブ映像の解像度を拡大または縮小し、さらにインタレース伝送映像に変換する。拡大縮小手段4は、変換する解像度をプログレッシブ映像Cpの解像度と一致させる。そのため、拡大縮小手段4はプログレッシブ映像Cpの解像度を検知し、その解像度の映像位置に拡大縮小する。本実施の形態においては、プログレッシブ映像App1(解像度:480p)をインタレース伝送映像Aii1(解像度:1080i)に変換し、出力する。   The enlargement / reduction means 4 enlarges or reduces the resolution of the input progressive video, and further converts it into an interlaced transmission video. The enlarging / reducing means 4 matches the resolution to be converted with the resolution of the progressive video Cp. Therefore, the enlargement / reduction means 4 detects the resolution of the progressive video Cp, and scales it to the video position of that resolution. In the present embodiment, progressive video App1 (resolution: 480p) is converted to interlaced transmission video Aii1 (resolution: 1080i) and output.

合成手段5は、3−2プルダウン手段1の出力であるインタレース伝送映像Ciと拡大縮小手段4の出力であるインタレース伝送映像Aii1を合成し、インタレース伝送映像Di1(解像度:1080i)を出力する。   The synthesizing unit 5 synthesizes the interlaced transmission video Ci that is the output of the 3-2 pull-down unit 1 and the interlaced transmission video Aii1 that is the output of the enlargement / reduction unit 4 and outputs the interlaced transmission video Di1 (resolution: 1080i). To do.

逆3−2プルダウン手段6は、インタレース伝送映像Di1を逆3−2プルダウンし、合成プログレッシブ映像Dp1(解像度:1080p)を出力する。ここで、逆3−2プルダウンとは、毎秒60フィールドのインタレース伝送映像を毎秒24フレームのプログレッシブ映像に変換することである。   The inverse 3-2 pull-down means 6 performs inverse 3-2 pull-down on the interlaced transmission video Di1 and outputs a synthesized progressive video Dp1 (resolution: 1080p). Here, the inverse 3-2 pulldown refers to converting an interlace transmission video of 60 fields per second into a progressive video of 24 frames per second.

選択手段7は、合成手段5の出力であるインタレース伝送映像Di1、もしくは、逆3−2プルダウン手段6の出力であるプログレッシブ映像Dp1のいずれか選択し、出力する。   The selection unit 7 selects and outputs either the interlaced transmission video Di1 that is the output of the synthesis unit 5 or the progressive video Dp1 that is the output of the inverse 3-2 pull-down unit 6.

このように構成された映像合成装置の動作について、図2を用いて説明する。   The operation of the video composition apparatus configured as described above will be described with reference to FIG.

図2は、本発明の実施の形態1にかかる映像合成装置の動作を示す動作図である。Tは偶数フィールドを表し、Bは奇数フィールドを表す。また。時刻tは毎秒60フィールドの場合の各フィールドの時刻を簡易的に示したものである。実時間で表現すると、例えば、t=1は1/60[sec]となり、t=2は2/60[sec]となる。   FIG. 2 is an operation diagram showing an operation of the video composition device according to the first exemplary embodiment of the present invention. T represents an even field and B represents an odd field. Also. Time t simply shows the time of each field in the case of 60 fields per second. When expressed in real time, for example, t = 1 is 1/60 [sec], and t = 2 is 2/60 [sec].

図2に記載のように、映像合成装置はプログレッシブ映像Apとプログレッシブ映像Cpを合成して、インタレース伝送映像Di1を作り出し、出力している。   As shown in FIG. 2, the video composition device synthesizes the progressive video Ap and the progressive video Cp to create and output an interlaced transmission video Di1.

プログレッシブ映像Apは、毎秒24フレームのプログレッシブ映像である。プログレッシブ映像Apは、3−2プルダウン手段2にて毎秒60フィールドのインタレース伝送映像Aiに変換される。また、プログレッシブ映像Cpは、毎秒24フレームのプログレッシブ映像である。3−2プルダウン手段1において、毎秒60フィールドのインタレース伝送映像Ciに変換される。   The progressive video Ap is a progressive video of 24 frames per second. The progressive video Ap is converted into interlaced transmission video Ai of 60 fields per second by the 3-2 pull-down means 2. The progressive video Cp is a progressive video with 24 frames per second. In the 3-2 pull-down means 1, it is converted into an interlaced transmission video Ci of 60 fields per second.

次に、インタレース伝送映像Aiからインタレース伝送映像Aii1を作成する動作を説明する。補間手段3はインタレース伝送映像Aiの前のフィールドに基づき映像を補間計算する。図2を用いてさらに詳細に説明する。   Next, an operation for creating the interlaced transmission video Aii1 from the interlaced transmission video Ai will be described. The interpolating means 3 interpolates and calculates the video based on the previous field of the interlaced transmission video Ai. This will be described in more detail with reference to FIG.

時刻t=1におけるインタレース伝送映像Aii1(A1)を作成する場合について説明する。補間手段3は、一つ前のフィールドである時刻t=0におけるインタレース伝送映像Aiを用いて補間する。時刻t=1におけるインタレース伝送映像Aiは、偶数フィールド(T)であり、時刻t=0におけるインタレース伝送映像Aiは、奇数フィールド(B)である。補間手段3は、時刻t=1におけるインタレース伝送映像Aiを時刻t=0におけるインタレース伝送映像Aiで補間しプログレッシブ映像App1を出力する。   A case where the interlaced transmission video Aii1 (A1) at time t = 1 is created will be described. The interpolation means 3 interpolates using the interlaced transmission video Ai at time t = 0, which is the previous field. The interlace transmission video Ai at time t = 1 is an even field (T), and the interlace transmission video Ai at time t = 0 is an odd field (B). The interpolating means 3 interpolates the interlaced transmission video Ai at time t = 1 with the interlaced transmission video Ai at time t = 0 and outputs a progressive video App1.

拡大縮小手段4は、プログレッシブ映像App1をインタレース伝送映像Aii1に変換し、出力する。   The enlargement / reduction means 4 converts the progressive video App1 into an interlaced transmission video Aii1 and outputs it.

図3は、本発明の実施の形態1における映像合成装置の補間及び合成動作を示す説明図である。(a)奇数フィールドはインタレース伝送映像Aiが奇数フィールドの場合を示す。また、(b)偶数フィールドはインタレース伝送映像Aiが偶数フィールドの場合を示す。図3に記載の丸印はそれぞれ、映像の垂直ラインを示す。インタレース伝送映像Aiの破線ラインの丸印は、前フィールドの垂直ラインを示す。   FIG. 3 is an explanatory diagram showing the interpolation and composition operations of the video composition apparatus according to Embodiment 1 of the present invention. (A) The odd field indicates a case where the interlaced transmission video Ai is an odd field. (B) The even field indicates the case where the interlaced transmission video Ai is an even field. Each circle in FIG. 3 represents a vertical line of the video. A circle on the broken line of the interlaced transmission video Ai indicates a vertical line in the previous field.

(a)奇数フィールドの場合において、インタレース伝送映像Aiからプログレッシブ映像App1を作成する場合には、前フィールドの偶数フィールドの垂直ラインが補間される。作成されたプログレッシブ映像App1に基づき、インタレース伝送映像Aii1が作成される。(b)偶数フィールドの場合においても同様に、インタレース伝送映像Aiからプログレッシブ映像App1を作成する場合には、前フィールドの偶数フィールドの垂直ラインが補間される。作成されたプログレッシブ映像App1に基づき、インタレース伝送映像Aii1が作成される。本実施の形態においては、解像度が480pのプログレッシブ映像App1から、解像度が1080iのインタレース伝送映像Aiが作成される。   (A) In the case of the odd field, when the progressive video App1 is created from the interlace transmission video Ai, the vertical lines of the even field of the previous field are interpolated. An interlaced transmission video Aii1 is created based on the created progressive video App1. (B) Similarly, in the case of the even field, when the progressive video App1 is created from the interlace transmission video Ai, the vertical line of the even field of the previous field is interpolated. An interlaced transmission video Aii1 is created based on the created progressive video App1. In the present embodiment, an interlaced transmission video Ai having a resolution of 1080i is created from a progressive video App1 having a resolution of 480p.

このように、直前のフィールドから補間ラインを作成して、一旦、フレームに相当するプログレッシブ映像を作成する。その後、作成したプログレッシブ映像を用いて、解像度を拡大もしくは縮小する。この場合、解像度を拡大する場合には垂直ラインがより細かくなっているため、画質の良い映像を出力することができる。   In this way, an interpolation line is created from the immediately preceding field, and a progressive video corresponding to a frame is once created. Thereafter, the resolution is enlarged or reduced using the created progressive video. In this case, when the resolution is enlarged, the vertical line is finer, so that an image with good image quality can be output.

このように合成された映像は、映像合成装置からプログレッシブ出力をする場合には、選択手段7で逆3:2プルダウン手段6の出力を選択することにより、逆3:2プルダウンされたプログレッシブ映像Dp1を出力することも可能である。   When the video synthesized in this way is output progressively from the video synthesizer, by selecting the output of the inverse 3: 2 pull-down means 6 by the selection means 7, the progressive video Dp1 which is inversely pulled down 3: 2 is selected. Can also be output.

また、インタレース伝送映像Di1を出力する場合には、選択手段7で合成手段5の出力を選択することにより、インタレース伝送映像Di1を出力することも可能である。   When outputting the interlaced transmission video Di1, it is also possible to output the interlaced transmission video Di1 by selecting the output of the synthesizing unit 5 by the selection unit 7.

このように、プライマリビデオの入力映像とセカンダリビデオの入力映像を3−2プルダウンした後、合成し、合成されたインタレース伝送映像もしくはさらに逆3−2プルダウンでプログレッシブ映像化したプログレッシブ映像とを選択して出力する。選択手段7により、インタレース伝送映像を出力するか、プログレッシブ映像を出力するかを容易に選択できるので、テレビジョンとの接続をインタレースで接続する場合にも、簡単な処理で映像を伝送することができる。   In this way, after the primary video input video and the secondary video input video are pulled down 3-2, they are combined, and the synthesized interlaced transmission video or the progressive video converted to progressive video by reverse 3-2 pulldown is selected. And output. Since the selection means 7 can easily select whether to output interlaced transmission video or progressive video, the video can be transmitted with simple processing even when interlaced with the television. be able to.

上記のように、本発明の実施の形態1にかかる映像合成装置は、インタレース伝送映像の解像度を拡大もしくは縮小し、他のインタレース伝送映像信号に合成する場合に、合成する側のインタレース伝送映像を一旦補間してプログレッシブ映像に変換する。そして、プログレッシブ映像を基に解像度を拡大もしくは縮小したインタレース伝送映像を作成し合成する。解像度を拡大する時には垂直ラインがより細かくなっているため、画質の良い映像を出力することができる。   As described above, the video synthesizing apparatus according to the first embodiment of the present invention expands or reduces the resolution of an interlaced transmission video and combines it with another interlaced transmission video signal. The transmission video is temporarily interpolated and converted to progressive video. Then, based on the progressive video, an interlaced transmission video with an enlarged or reduced resolution is created and combined. When the resolution is enlarged, the vertical line becomes finer, so that an image with good image quality can be output.

また、本実施の形態の映像合成装置によれば、入力されるプライマリビデオ及びセカンダリビデオが、毎秒24フレームのプログレッシブ映像信号であっても、毎秒60フィールドのインタレース映像信号であっても、同一の回路で映像の合成をすることができる。したがって、毎秒24フレームのプログレッシブ映像信号及び毎秒60フィールドのインタレース映像信号のそれぞれに対し合成回路を備える必要が無いので、回路を小型化することができる。   Further, according to the video composition apparatus of the present embodiment, the input primary video and secondary video are the same regardless of whether they are a progressive video signal of 24 frames per second or an interlaced video signal of 60 fields per second. The video can be synthesized with this circuit. Therefore, since it is not necessary to provide a synthesis circuit for each of the progressive video signal of 24 frames per second and the interlaced video signal of 60 fields per second, the circuit can be reduced in size.

なお、本実施の形態では、プログレッシブ映像Cpの解像度は1080pとし、プログレッシブ映像Apの解像度を480pとしたが、これらはあくまで例であり、他の解像度であってもよい。   In the present embodiment, the resolution of the progressive video Cp is 1080p, and the resolution of the progressive video Ap is 480p. However, these are merely examples, and other resolutions may be used.

なお、3−2プルダウン手段1及び3−2プルダウン手段2は、入力される映像が毎秒24フレームのプログレッシブ映像でない場合は、入力された映像をそのまま出力するとしても良い。   The 3-2 pull-down unit 1 and the 3-2 pull-down unit 2 may output the input video as it is when the input video is not a progressive video of 24 frames per second.

なお、本実施の形態では補間対象フィールドの1フィールド前のフィールドを用いるとしたがこれに限るものではない。例えば、補間対象フィールドの1フィールド後のフィールドを用いても良い。   In the present embodiment, the field one field before the interpolation target field is used. However, the present invention is not limited to this. For example, a field one field after the interpolation target field may be used.

なお、本実施の形態では、拡大縮小手段4にプログレッシブ映像Cpが入力されるとしたが、別途の解像度検知手段でプログレッシブ映像Cpの解像度を検知し、解像度情報のみを拡大縮小手段4に入力しても良い。   In the present embodiment, the progressive video Cp is input to the enlargement / reduction unit 4. However, the resolution of the progressive video Cp is detected by a separate resolution detection unit, and only resolution information is input to the enlargement / reduction unit 4. May be.

なお、本実施の形態では、補間手段3はプログレッシブ映像App1を出力するとしたが、インタレース伝送映像Aiと計算した補間画素に関するデータである補間画素データとを出力してもよい。この場合、拡大縮小手段4はインタレース伝送映像Aiと補間画素データに基づき、インタレース伝送映像Aii1が作成される。また、この場合、拡大縮小手段4に入力されるインタレース伝送映像Aiは、補間手段3より入力されるのではなく、3−2プルダウン手段2から入力されるとしてもよい。この場合、補間手段3からは、インタレース伝送映像Aiを出力しなくても良い。   In the present embodiment, the interpolation unit 3 outputs the progressive video App1, but it may output interlaced transmission video Ai and interpolation pixel data that is data relating to the calculated interpolation pixel. In this case, the enlargement / reduction means 4 creates the interlaced transmission video Aii1 based on the interlaced transmission video Ai and the interpolated pixel data. In this case, the interlaced transmission video Ai input to the enlargement / reduction unit 4 may be input from the 3-2 pull-down unit 2 instead of being input from the interpolation unit 3. In this case, the interpolating means 3 does not have to output the interlaced transmission video Ai.

なお、3−2プルダウンされたインタレース伝送映像は図2に示すように、同じフレームから作成されたフィールドが3フィールド、2フィールド、3フィールド…、との繰り返しとなっている(この繰り返しをフィールド周期と称する。)。したがって、拡大縮小手段4におけるインタレース伝送映像Aii1を発生させるタイミングを制御する、もしくは、合成手段5による合成のタイミングを制御することにより、インタレース伝送映像Ciとインタレース伝送映像Aii1とのフィールドの繰り返しの周期を一致させることも可能である。この場合、さらに画質が向上する。   As shown in FIG. 2, the 3-2 pull-down interlaced transmission video repeats 3 fields, 2 fields, 3 fields,... (Created from the same frame). Called a period). Therefore, by controlling the timing of generating the interlaced transmission video Aii1 in the enlargement / reduction means 4, or by controlling the timing of the synthesis by the synthesizing means 5, the fields of the interlaced transmission video Ci and the interlaced transmission video Aii1 are controlled. It is also possible to match the repetition period. In this case, the image quality is further improved.

なお、逆3−2プルダウンは、プライマリビデオを元のフレームの組み合わせに組みなおすものである。また、本発明の逆3−2プルダウンは、セカンダリビデオ合成した後に、セカンダリビデオとは無関係に、プライマリビデオの元フレームの組み合わせに組み直すものである。
(実施の形態2)
次に第2の実施の形態における映像合成装置に関して、図4を用いて説明する。なお、実施の形態1と同様の構成については、同一の符号を付与し、説明を省略する。
Note that the inverse 3-2 pulldown reassembles the primary video into the original frame combination. In addition, the inverse 3-2 pulldown of the present invention is to recombine the original video original frame combination after the secondary video composition, regardless of the secondary video.
(Embodiment 2)
Next, a video composition apparatus according to the second embodiment will be described with reference to FIG. In addition, about the structure similar to Embodiment 1, the same code | symbol is provided and description is abbreviate | omitted.

図4において、映像合成装置は、プライマリビデオのプログレッシブ映像Cpにセカンダリビデオのプログレッシブ映像Apを合成して出力するブロック図である。   In FIG. 4, the video composition device is a block diagram for synthesizing and outputting the secondary video progressive video Ap to the primary video progressive video Cp.

図4を用いて、本発明の実施の形態2における映像合成装置の構成を説明する。   The configuration of the video composition apparatus according to Embodiment 2 of the present invention will be described with reference to FIG.

3−2プルダウン手段1及び3−2プルダウン手段2については、実施の形態1と同様であるので説明を省略する。   Since the 3-2 pull-down means 1 and the 3-2 pull-down means 2 are the same as those in the first embodiment, description thereof will be omitted.

映像同期補間手段8は、インタレース伝送映像Aiの映像同期を検出する。映像同期補間手段8は、インタレース伝送映像Aiについて、検出した映像同期に基づき、前フィールドもしくは後フィールドを選択し、フレームに相当する画素(補間画素)を計算する。映像同期補間手段8は、計算した補間画素に基づき、インタレース伝送映像Aiをプログレッシブ映像(解像度:480p)に変換し、プログレッシブ映像App2として出力する。検出した映像同期に基づき、前フィールドもしくは後フィールドを選択し、フレームに相当する画素(補間画素)を計算する動作の詳細は後述する。   The video synchronization interpolation means 8 detects video synchronization of the interlace transmission video Ai. The video synchronization interpolation means 8 selects a previous field or a subsequent field for the interlaced transmission video Ai based on the detected video synchronization, and calculates a pixel (interpolation pixel) corresponding to the frame. The video synchronous interpolation means 8 converts the interlaced transmission video Ai into a progressive video (resolution: 480p) based on the calculated interpolation pixel, and outputs it as a progressive video App2. Details of the operation of selecting the previous field or the subsequent field based on the detected video synchronization and calculating the pixel (interpolated pixel) corresponding to the frame will be described later.

拡大縮小手段4は、入力されるプログレッシブ映像の解像度を拡大または縮小し、さらにインタレース伝送映像に変換する。拡大縮小手段4は、変換する解像をプログレッシブ映像Cpの解像度と一致させる。そのため、拡大縮小手段4はプログレッシブ映像Cpの解像度を検知し、その解像度の映像位置に拡大縮小する。本実施の形態においては、プログレッシブ映像App2(解像度:480p)をインタレース伝送映像Aii2(解像度:1080i)に変換し、出力する。   The enlargement / reduction means 4 enlarges or reduces the resolution of the input progressive video, and further converts it into an interlaced transmission video. The enlargement / reduction unit 4 matches the resolution to be converted with the resolution of the progressive video Cp. Therefore, the enlargement / reduction means 4 detects the resolution of the progressive video Cp, and scales it to the video position of that resolution. In the present embodiment, progressive video App2 (resolution: 480p) is converted to interlaced transmission video Aii2 (resolution: 1080i) and output.

合成手段5は、3−2プルダウン手段1の出力であるインタレース伝送映像Ciと拡大縮小手段4の出力であるインタレース伝送映像Aii2を合成し、インタレース伝送映像Di2(解像度:1080i)を出力する。   The synthesizing unit 5 synthesizes the interlace transmission video Ci that is the output of the 3-2 pull-down unit 1 and the interlace transmission video Aii2 that is the output of the enlargement / reduction unit 4 and outputs the interlace transmission video Di2 (resolution: 1080i). To do.

逆3−2プルダウン手段6は、インタレース伝送映像Di2を逆3−2プルダウンし、合成プログレッシブ映像Dp2(解像度:1080p)を出力する。ここで、逆3−2プルダウンとは、毎秒60フィールドのインタレース伝送映像を毎秒24フレームのプログレッシブ映像に変換することである。   The inverse 3-2 pull-down means 6 performs inverse 3-2 pull-down on the interlaced transmission video Di2 and outputs a synthesized progressive video Dp2 (resolution: 1080p). Here, the inverse 3-2 pulldown refers to converting an interlace transmission video of 60 fields per second into a progressive video of 24 frames per second.

選択手段7は、合成手段5の出力であるインタレース伝送映像Di2、もしくは、逆3−2プルダウン手段6の出力であるプログレッシブ映像Dp2のいずれか選択し、出力する。   The selecting means 7 selects and outputs either the interlaced transmission video Di2 that is the output of the synthesizing means 5 or the progressive video Dp2 that is the output of the inverse 3-2 pull-down means 6.

このように構成された、映像合成装置の動作について、図5を用いて説明する。   The operation of the video composition apparatus configured as described above will be described with reference to FIG.

図5は、本発明の実施の形態2にかかる映像合成装置の動作を示す、動作図である。   FIG. 5 is an operation diagram showing the operation of the video composition device according to the second exemplary embodiment of the present invention.

図5において、Tは偶数フィールドを表し、Bは奇数フィールドを表す。また。時刻tは毎秒60フィールドの場合の各フィールドの時刻を簡易的に示したものである。実時間で表現すると、例えば、t=1は1/60[sec]となり、t=2は2/60[sec]となる。   In FIG. 5, T represents an even field and B represents an odd field. Also. Time t simply shows the time of each field in the case of 60 fields per second. When expressed in real time, for example, t = 1 is 1/60 [sec], and t = 2 is 2/60 [sec].

図5に記載のように、映像合成装置はプログレッシブ映像Apとプログレッシブ映像Cpを合成して、出力している。   As shown in FIG. 5, the video composition device synthesizes and outputs the progressive video Ap and the progressive video Cp.

プログレッシブ映像Apは、毎秒24フレームのプログレッシブ映像である。プログレッシブ映像Apは、3−2プルダウン手段2にて毎秒60フィールドのインタレース伝送映像Aiに変換される。また、プログレッシブ映像Cpは、毎秒24フレームのプログレッシブ映像である。3−2プルダウン手段1において、毎秒60フィールドのインタレース伝送映像Ciに変換される。   The progressive video Ap is a progressive video of 24 frames per second. The progressive video Ap is converted into interlaced transmission video Ai of 60 fields per second by the 3-2 pull-down means 2. The progressive video Cp is a progressive video with 24 frames per second. In the 3-2 pull-down means 1, it is converted into an interlaced transmission video Ci of 60 fields per second.

次に、インタレース伝送映像Aiからインタレース伝送映像Aii2を作成する動作を説明する。3−2プルダウンされたインタレース伝送映像は図2に示すように、同じフレームから作成されたフィールドが3フィールド、2フィールド、3フィールド…、との繰り返しとなっている。映像同期補間手段8は、上記3フィールド、2フィールド、3フィールド…の繰り返し周期を検知する。検知の具体的な手法の一例として以下のものがある。例えば、5フィールドごとに1組の同一フレームが存在することを利用し、フィールドごとの差分をとり、同一フィールドがある場合、3フィールドの組の1フィールド目と3フィールド目と特定することができる。この情報から3フィールドの組の1フィールド目、2フィールド目及び3フィールド目と2フィールドの組の1フィールド目及び2フィールド目を特定することができる。上記、映像同期補間手段8で算出する方法はあくまで一例であり、その他の方法で検出しても良い。   Next, an operation for creating the interlaced transmission video Aii2 from the interlaced transmission video Ai will be described. As shown in FIG. 2, the interlaced transmission video that has been pulled down 3-2 has three fields, two fields, three fields, etc., created from the same frame. The video synchronous interpolation means 8 detects the repetition period of the above 3 fields, 2 fields, 3 fields,. An example of a specific detection method is as follows. For example, using the fact that there is one set of the same frame for every five fields and taking the difference for each field, if there is the same field, the first field and the third field of the set of three fields can be specified. . From this information, the first field, the second field, and the third field of the group of 3 fields and the first field and the second field of the group of 2 fields can be specified. The above-described method of calculation by the video synchronization interpolation unit 8 is merely an example, and may be detected by other methods.

なお、インタレース伝送映像Aiについて、プログレッシブ映像Apと同一のフレームであったか否かの情報は、3−2プルダウン手段2から映像同期補間手段8へ入力しても良い。   Information regarding whether or not the interlaced transmission video Ai is the same frame as the progressive video Ap may be input from the 3-2 pull-down means 2 to the video synchronous interpolation means 8.

次に、映像同期補間手段8が補間画素を計算する際に、検知した繰り返し周期を基づきフィールドを選択するフィールド選択方法について、さらに図5を用いて説明する。   Next, a field selection method for selecting a field based on the detected repetition period when the video synchronous interpolation means 8 calculates an interpolation pixel will be described with reference to FIG.

時刻t=1における拡大縮小インタレース伝送映像Aii2を作成する場合の、フィールドの選択について説明する。時刻t=0におけるインタレース伝送映像Ai(A0)と時刻t=1におけるインタレース伝送映像Ai(A1)は、プログレッシブ映像Apにおけるフレームが異なる。一方、時刻t=1におけるインタレース伝送映像Ai(A1)と時刻t=2におけるインタレース伝送映像Ai(A2)は、プログレッシブ映像Apにおけるフレームが同一である。よって、時刻t=1における拡大縮小インタレース伝送映像Aii2を作成する場合には、時刻t=2におけるインタレース伝送映像Ai(A2)を選択し、補間画素を計算する。   A description will be given of selection of a field when the enlarged / reduced interlaced transmission video Aii2 at time t = 1 is created. The interlaced transmission video Ai (A1) at time t = 0 and the interlaced transmission video Ai (A1) at time t = 1 have different frames in the progressive video Ap. On the other hand, the interlaced transmission video Ai (A1) at time t = 1 and the interlaced transmission video Ai (A2) at time t = 2 have the same frame in the progressive video Ap. Therefore, when creating the enlarged / reduced interlaced transmission video Aii2 at time t = 1, the interlaced transmission video Ai (A2) at time t = 2 is selected and the interpolation pixel is calculated.

時刻t=2における拡大縮小インタレース伝送映像Aii2を作成する場合の、フィールドの選択について説明する。時刻t=1におけるインタレース伝送映像Ai(A1)と時刻t=2におけるインタレース伝送映像Ai(A2)は、プログレッシブ映像Apにおけるフレームは同一である。また、一方、時刻t=2におけるインタレース伝送映像Ai(A2)と時刻t=3におけるインタレース伝送映像Ai(A3)は、プログレッシブ映像Apにおけるフレームが同一である。よって、時刻t=2における拡大縮小インタレース伝送映像Aii2を作成する場合には、時刻t=1におけるインタレース伝送映像Ai(A1)と時刻t=3におけるインタレース伝送映像Ai(A3)のいずれを選択しても良い。時刻t=1におけるインタレース伝送映像Ai(A1)もしくは時刻t=3におけるインタレース伝送映像Ai(A3)を選択し、補間画素を計算する。   A description will be given of the selection of a field when the enlarged / reduced interlaced transmission video Aii2 at time t = 2 is created. The interlace transmission video Ai (A1) at time t = 1 and the interlace transmission video Ai (A2) at time t = 2 have the same frame in the progressive video Ap. On the other hand, the interlaced transmission video Ai (A2) at time t = 2 and the interlaced transmission video Ai (A3) at time t = 3 have the same frame in the progressive video Ap. Therefore, when creating the enlarged / reduced interlaced transmission video Aii2 at time t = 2, either the interlaced transmission video Ai (A1) at time t = 1 or the interlaced transmission video Ai (A3) at time t = 3. May be selected. The interlaced transmission video Ai (A1) at time t = 1 or the interlaced transmission video Ai (A3) at time t = 3 is selected, and interpolation pixels are calculated.

時刻t=3における拡大縮小インタレース伝送映像Aii2を作成する場合の、フィールドの選択について説明する。時刻t=2におけるインタレース伝送映像Ai(A2)と時刻t=3におけるインタレース伝送映像Ai(A3)は、プログレッシブ映像Apにおけるフレームが同一である。一方、時刻t=4におけるインタレース伝送映像Ai(A4)と時刻t=3におけるインタレース伝送映像Ai(A3)は、プログレッシブ映像Apにおけるフレームが異なる。よって、時刻t=3における拡大縮小インタレース伝送映像Aii2を作成する場合には、時刻t=2におけるインタレース伝送映像Ai(A2)を選択し、補間画素を計算する。   A description will be given of field selection when the enlarged / reduced interlaced transmission video Aii2 at time t = 3 is created. The interlaced transmission video Ai (A2) at time t = 2 and the interlaced transmission video Ai (A3) at time t = 3 have the same frame in the progressive video Ap. On the other hand, the interlaced transmission video Ai (A4) at time t = 4 and the interlaced transmission video Ai (A3) at time t = 3 have different frames in the progressive video Ap. Therefore, when creating the enlarged / reduced interlaced transmission video Aii2 at time t = 3, the interlaced transmission video Ai (A2) at time t = 2 is selected and the interpolation pixel is calculated.

時刻t=4における拡大縮小インタレース伝送映像Aii2を作成する場合の、フィールドの選択について説明する。時刻t=3におけるインタレース伝送映像Ai(A3)と時刻t=4におけるインタレース伝送映像Ai(A4)は、プログレッシブ映像Apにおけるフレームが異なる。一方、時刻t=5におけるインタレース伝送映像Ai(A5)と時刻t=4におけるインタレース伝送映像Ai(A4)は、プログレッシブ映像Apにおけるフレームが同一である。よって、時刻t=4における拡大縮小インタレース伝送映像Aii2を作成する場合には、時刻t=5におけるインタレース伝送映像Ai(A5)を選択し、補間画素を計算する。   A description will be given of selection of a field when the enlarged / reduced interlaced transmission video Aii2 at time t = 4 is created. The interlaced transmission video Ai (A3) at time t = 3 and the interlaced transmission video Ai (A4) at time t = 4 differ in the frame in the progressive video Ap. On the other hand, the interlaced transmission video Ai (A5) at time t = 5 and the interlaced transmission video Ai (A4) at time t = 4 have the same frame in the progressive video Ap. Therefore, when creating the enlarged / reduced interlaced transmission video Aii2 at time t = 4, the interlaced transmission video Ai (A5) at time t = 5 is selected and the interpolation pixel is calculated.

時刻t=5における拡大縮小インタレース伝送映像Aii2を作成する場合の、フィールドの選択について説明する。時刻t=4におけるインタレース伝送映像Ai(A4)と時刻t=5におけるインタレース伝送映像Ai(A5)は、プログレッシブ映像Apにおけるフレームが同一である。一方、時刻t=6におけるインタレース伝送映像Ai(A6)と時刻t=5におけるインタレース伝送映像Ai(A5)は、プログレッシブ映像Apにおけるフレームが異なる。よって、時刻t=5における拡大縮小インタレース伝送映像Aii2を作成する場合には、時刻t=6におけるインタレース伝送映像Ai(A6)を選択し、補間画素を計算する。   A description will be given of selection of a field when the enlarged / reduced interlaced transmission video Aii2 at time t = 5 is created. The interlaced transmission video Ai (A4) at time t = 4 and the interlaced transmission video Ai (A5) at time t = 5 have the same frame in the progressive video Ap. On the other hand, the interlaced transmission video Ai (A6) at time t = 6 and the interlaced transmission video Ai (A5) at time t = 5 have different frames in the progressive video Ap. Therefore, when creating the enlarged / reduced interlaced transmission video Aii2 at time t = 5, the interlaced transmission video Ai (A6) at time t = 6 is selected and the interpolation pixel is calculated.

拡大縮小手段4は、プログレッシブ映像App2をインタレース伝送映像Aii2に変換し、出力する。   The enlarging / reducing means 4 converts the progressive video App2 into an interlaced transmission video Aii2 and outputs it.

図6は、本発明の実施の形態1における映像合成装置の補間及び合成動作を示す説明図である。(a)奇数フィールドはインタレース伝送映像Aiが奇数フィールドの場合を示す。また、(b)偶数フィールドはインタレース伝送映像Aiが偶数フィールドの場合を示す。   FIG. 6 is an explanatory diagram showing the interpolation and composition operations of the video composition apparatus according to Embodiment 1 of the present invention. (A) The odd field indicates a case where the interlaced transmission video Ai is an odd field. (B) The even field indicates the case where the interlaced transmission video Ai is an even field.

(a)奇数フィールドの場合において、インタレース伝送映像Aiからプログレッシブ映像App2を作成する場合には、前フィールドの偶数フィールドの垂直ラインが補間される。作成されたプログレッシブ映像App2に基づき、インタレース伝送映像Aii2が作成される。(b)偶数フィールドの場合においても同様に、インタレース伝送映像Aiからプログレッシブ映像App2を作成する場合には、前フィールドの偶数フィールドの垂直ラインが補間される。作成されたプログレッシブ映像App2に基づき、インタレース伝送映像Aii1が作成される。本実施の形態においては、解像度が480pのプログレッシブ映像App1から、解像度が1080iのインタレース伝送映像Aiが作成される。   (A) In the case of the odd field, when the progressive video App2 is created from the interlace transmission video Ai, the vertical line of the even field of the previous field is interpolated. An interlaced transmission video Aii2 is created based on the created progressive video App2. (B) Similarly, in the case of the even field, when the progressive video App2 is created from the interlace transmission video Ai, the vertical lines of the even field of the previous field are interpolated. Based on the created progressive video App2, the interlaced transmission video Aii1 is created. In the present embodiment, an interlaced transmission video Ai having a resolution of 1080i is created from a progressive video App1 having a resolution of 480p.

上記の場合、インタレース伝送映像Aiからプログレッシブ映像App2を作成する際には、プログレッシブ映像Apおいて同一フレームであったフィールドを基にプログレッシブ映像App2が作成される。したがって、プログレッシブ映像Apとプログレッシブ映像App2は一致する。   In the above case, when the progressive video App2 is created from the interlaced transmission video Ai, the progressive video App2 is created based on the field that was the same frame in the progressive video App. Therefore, the progressive video App and the progressive video App2 match.

上記より、プログレッシブ映像App2を用いて、解像度を拡大もしくは縮小するので、解像度を拡大する場合には垂直ラインがより細かくなっており、画質の良い映像を出力することができる。また、プログレッシブ映像Apとプログレッシブ映像App2は一致するので、インタレース伝送映像Aii2がプログレッシブ映像Apにより近い画像となる。したがって、プログレッシブ映像Dp2及びインタレース伝送映像Di2はプログレッシブ映像Apをより忠実に再現することができる。   As described above, since the resolution is enlarged or reduced using the progressive video App2, the vertical line becomes finer when the resolution is enlarged, and a video with good image quality can be output. Since the progressive video Ap and the progressive video App2 match, the interlaced transmission video Aii2 becomes an image closer to the progressive video Ap. Accordingly, the progressive video Dp2 and the interlaced transmission video Di2 can reproduce the progressive video Ap more faithfully.

また、同一フレームのフィールドを用いて拡大縮小するために、時間的に戻ることがなく再現できるため、時間的にも、滑らかな映像とすることができることとなる。   In addition, since enlargement / reduction is performed using fields of the same frame, reproduction can be performed without returning in time, so that a smooth image can be obtained in time.

このように、同一のフレームにおけるフィールドから合成映像を生成するので、逆3−2プルダウンした後のプログレッシブ映像でも、プライマリビデオもセカンダリビデオも、同一の映像から生成しているので、時間的にも滑らかな映像とすることができ、プログレッシブ化しない映像出力時にも、補間の入らない、元映像のみで作成された映像となるので、よりきれいな合成映像を出力することができることとなる。   As described above, since the composite video is generated from the field in the same frame, the primary video and the secondary video are generated from the same video even in the progressive video after the inverse 3-2 pull-down. Even when a non-progressive video is output, it is possible to output a smooth composite video because only the original video without interpolation is generated.

また、本実施の形態における映像合成装置では、入力される映像信号を、一旦、毎秒60フィールドに変換する。したがって、もともと60Hzで撮像された素材であっても、映画のように24Hzで撮像された素材であっても同じハードウェアの構成で合成することができる。さらに、プログレッシブ出力にもインタレース出力にも簡単に対応できるために、出力を受ける側のハードウェアの構成を簡単にすることができる。このような動作について、フローチャートを用いて説明する。   Further, in the video composition device according to the present embodiment, the input video signal is once converted into 60 fields per second. Therefore, even a material originally captured at 60 Hz or a material imaged at 24 Hz like a movie can be synthesized with the same hardware configuration. Furthermore, since it can easily cope with progressive output and interlaced output, the hardware configuration on the output receiving side can be simplified. Such an operation will be described with reference to a flowchart.

図7は、映像合成の動作を示すフローチャートである。   FIG. 7 is a flowchart showing the video composition operation.

図7において、3−2プルダウン手段1は、入力される映像が毎秒24フレームのプログレッシブ映像であるか否かを判断する(S1)。毎秒24フレームのプログレッシブ映像である場合は、3−2プルダウン処理し、合成手段5へ出力する(S2)。同様に、3−2プルダウン手段2は、入力される映像が毎秒24フレームのプログレッシブ映像である場合は、3−2プルダウン処理し、映像合成補間手段8へ出力する(S3)。   In FIG. 7, the 3-2 pull-down means 1 determines whether the input video is a progressive video of 24 frames per second (S1). In the case of progressive video at 24 frames per second, 3-2 pull-down processing is performed and output to the synthesizing means 5 (S2). Similarly, if the input video is a progressive video of 24 frames per second, the 3-2 pull-down means 2 performs 3-2 pull-down processing and outputs it to the video composition interpolation means 8 (S3).

3−2プルダウン手段1は、入力される映像が毎秒60フィールドのインタレース伝送映像の場合は、入力された映像をそのまま合成手段5へ出力する。同様に3−2プルダウン手段2は、入力される映像が毎秒60フィールドのインタレース伝送映像の場合は、入力された映像をそのまま出力する。   The 3-2 pull-down means 1 outputs the inputted video as it is to the synthesizing means 5 when the inputted video is an interlaced transmission video of 60 fields per second. Similarly, when the input video is an interlaced transmission video of 60 fields per second, the 3-2 pull-down means 2 outputs the input video as it is.

映像同期補間手段8は、入力される映像が毎秒24フレームのプログレッシブ映像を3−2プルダウンした毎秒60フィールドのインタレースである場合は、元のフレームが同一であるフィールドを元に補間画素を計算する(S4)。なお、3−2プルダウン手段1および3−2プルダウン手段2に入力される映像が既に3−2プルダウンされた毎秒60フィールドの映像であったとしても、映像同期補間手段8では同様に元のフレームが同一であるフィールドを元に補間画素を計算することができる。   When the input video is an interlace of 60 fields per second obtained by 3-2 pull-down of a progressive video of 24 frames per second, the video synchronous interpolation means 8 calculates an interpolation pixel based on the same field as the original frame. (S4). Even if the video input to the 3-2 pull-down means 1 and the 3-2 pull-down means 2 is already a 3-2 pull-down video of 60 fields per second, the video synchronous interpolation means 8 similarly uses the original frame. Interpolated pixels can be calculated based on the same field.

映像同期補間手段8は、3−2プルダウン手段1および3−2プルダウン手段2に入力される映像がもともと60Hzで撮像された素材である毎秒60フィールドのインタレース伝送映像である場合には、前または後ろのフィールドを参照し、補間画素を計算する(S5)。   When the video input to the 3-2 pull-down means 1 and the 3-2 pull-down means 2 is an interlace transmission video of 60 fields per second, which is a material originally captured at 60 Hz, Alternatively, the interpolation pixel is calculated with reference to the subsequent field (S5).

その後、拡大縮小手段5は入力された映像の拡大または縮小する。また、合成手段5は、拡大縮小手段5の出力及び3−2プルダウン手段1の出力を合成する(S6)。   Thereafter, the enlargement / reduction means 5 enlarges or reduces the input video. The synthesizing unit 5 synthesizes the output of the enlarging / reducing unit 5 and the output of the 3-2 pull-down unit 1 (S6).

ユーザーは、プログレッシブ映像とインタレース伝送映像のいずれを出力するかを選択する(S7)。プログレッシブ映像を選択した場合は、逆3−2プルダウン手段6で逆3−2プルダウン処理し(S8)、プログレッシブ映像を出力する。インタレース伝送映像を選択した場合は、インタレース伝送映像をそのまま出力する(S9)。   The user selects whether to output progressive video or interlaced transmission video (S7). When progressive video is selected, reverse 3-2 pull-down means 6 performs reverse 3-2 pull-down processing (S8), and the progressive video is output. When the interlace transmission video is selected, the interlace transmission video is output as it is (S9).

このように、もともと60Hzで撮像された素材であっても、映画のように24Hzで撮像された素材であっても同じハードウェアの構成で合成することができる。   As described above, even a material originally imaged at 60 Hz or a material imaged at 24 Hz like a movie can be synthesized with the same hardware configuration.

本実施の形態によると、3−2プルダウンされた映像を補間する場合に、もともと同一フレームであったフィールドを用いて補間画素を作成し、プログレッシブ映像を作成する。映像を合成時に拡大縮小する場合、このプログレッシブ映像を用いることで画質のきれいな合成映像を出力することができる。   According to this embodiment, when interpolating a 3-2 pull-down video, an interpolation pixel is created using a field that was originally the same frame, and a progressive video is created. When the video is enlarged or reduced at the time of synthesis, this progressive video can be used to output a synthesized video with a good image quality.

なお、本実施の形態では、合成フィールド作成を行う映像ラインを同一フレームを用いて行うとしたが、その判定は、動き信号から検出してもよく、3−2プルダウンする前の情報を記録しておくのでもよい。   In the present embodiment, the video line for creating the composite field is made using the same frame. However, the determination may be detected from the motion signal, and the information before 3-2 pull-down is recorded. It may be left.

なお、本実施の形態では、拡大縮小手段4にプログレッシブ映像Cpが入力されるとしたが、別途の解像度検知手段でプログレッシブ映像Cpの解像度を検知し、解像度情報のみを拡大縮小手段4に入力しても良い。   In the present embodiment, the progressive video Cp is input to the enlargement / reduction unit 4. However, the resolution of the progressive video Cp is detected by a separate resolution detection unit, and only resolution information is input to the enlargement / reduction unit 4. May be.

なお、本実施の形態では、映像同期補間手段8へはプログレッシブ映像App2を出力するとしたが、インタレース伝送映像Aiと計算した補間画素に関するデータである補間画素データとを出力してもよい。この場合、拡大縮小手段4はインタレース伝送映像Aiと補間画素データに基づき、インタレース伝送映像Aii2が作成される。また、この場合、拡大縮小手段4に入力されるインタレース伝送映像Aiは、映像同期補間手段8より入力されるのではなく、3−2プルダウン手段2から入力されるとしてもよい。この場合、映像同期補間手段8からは、インタレース伝送映像Aiを出力しなくても良い。   In the present embodiment, the progressive video App2 is output to the video synchronous interpolation means 8, but the interlaced transmission video Ai and the interpolated pixel data that is data relating to the calculated interpolation pixel may be output. In this case, the enlargement / reduction means 4 creates the interlaced transmission video Aii2 based on the interlaced transmission video Ai and the interpolated pixel data. In this case, the interlaced transmission video Ai input to the enlargement / reduction means 4 may be input from the 3-2 pull-down means 2 instead of being input from the video synchronous interpolation means 8. In this case, it is not necessary to output the interlaced transmission video Ai from the video synchronous interpolation means 8.

なお、3−2プルダウンされたインタレース伝送映像は図2に示すように、同じフレームから作成されたフィールドが3フィールド、2フィールド、3フィールド…、との繰り返しとなっている。したがって、拡大縮小手段4におけるインタレース伝送映像Aii2を発生させるタイミングを制御する、もしくは、合成手段5による合成のタイミングを制御することにより、インタレース伝送映像Ciとインタレース伝送映像Aii2とのフィールドの繰り返しの周期を一致させることも可能である。この場合、さらに画質が向上する。   As shown in FIG. 2, the interlaced transmission video that has been pulled down 3-2 has 3 fields, 2 fields, 3 fields,... Repeated from the same frame. Therefore, by controlling the timing for generating the interlaced transmission video Aii2 in the enlargement / reduction means 4, or by controlling the synthesis timing by the synthesis means 5, the fields of the interlaced transmission video Ci and the interlaced transmission video Aii2 are controlled. It is also possible to match the repetition period. In this case, the image quality is further improved.

なお、逆3−2プルダウンは、プライマリビデオを元のフレームの組み合わせに組みなおすものである。また、本発明の逆3−2プルダウンは、セカンダリビデオ合成した後に、セカンダリビデオとは無関係に、プライマリビデオの元フレームの組み合わせに組み直すものである。   Note that the inverse 3-2 pulldown reassembles the primary video into the original frame combination. In addition, the inverse 3-2 pulldown of the present invention is to recombine the original video original frame combination after the secondary video composition, regardless of the secondary video.

以上のように、本発明にかかる映像信号処理装置は、BD−ROMのように、PinP映像を作成する時に、プライマリビデオが3−2プルダウンされたインタレース伝送でもきれいな合成映像がえられることとなるので、BD−ROMの再生プレーヤーや、映像表示装置に適用できる。   As described above, the video signal processing apparatus according to the present invention can obtain a beautiful composite video even in interlaced transmission in which the primary video is 3-2 pulled down when creating a PinP video like a BD-ROM. Therefore, the present invention can be applied to a BD-ROM playback player and a video display device.

1 3−2プルダウン手段
2 3−2プルダウン手段
3 補間手段
4 拡大縮小手段
5 合成手段
6 逆3−2プルダウン手段
7 出力選択手段
8 映像同期補間手段
1 3-2 pull-down means 2 3-2 pull-down means 3 interpolation means 4 enlargement / reduction means 5 composition means 6 inverse 3-2 pull-down means 7 output selection means 8 video synchronous interpolation means

Claims (4)

第1の映像信号が入力され、前記第1の映像信号が毎秒24フレームのプログレッシブ映像信号である場合には、3−2プルダウンをして毎秒60フィールドのインタレース映像信号として出力する一方、前記第1の映像信号が毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで出力する第1の3−2プルダウン手段と、
第2の映像信号が入力され、前記第2の映像信号が毎秒24フレームのプログレッシブ映像信号である場合には、3−2プルダウンをして毎秒60フィールドのインタレース映像信号として出力する一方、前記第2の映像信号が毎秒60フィールドのインタレース映像信号である場合には毎秒60フィールドのインタレース映像信号のままで出力する第2の3−2プルダウン手段と、
前記第2の3−2プルダウン手段から出力された映像信号を、前記第1の映像信号と同じ映像画素の伝送速度に変換して出力する画素レート変換手段と、
前記第1の3−2プルダウン手段から出力された映像信号と、前記画素レート変換手段から出力された映像信号とを合成して出力する合成手段と、を備えた映像合成装置。
When the first video signal is input and the first video signal is a progressive video signal of 24 frames per second, the 3-2 pull-down is performed and an interlaced video signal of 60 fields per second is output. When the first video signal is an interlaced video signal of 60 fields per second, a first 3-2 pull-down means for outputting the interlaced video signal of 60 fields per second as it is;
When the second video signal is input and the second video signal is a progressive video signal of 24 frames per second, the 3-2 pull-down is performed to output an interlaced video signal of 60 fields per second, A second 3-2 pull-down means for outputting the interlaced video signal at 60 fields per second as it is when the second video signal is an interlaced video signal at 60 fields per second;
Pixel rate conversion means for converting the video signal output from the second 3-2 pull-down means to the same video pixel transmission speed as the first video signal, and outputting the same.
A video synthesizing apparatus comprising: a synthesizing unit that synthesizes and outputs the video signal output from the first 3-2 pull-down unit and the video signal output from the pixel rate conversion unit.
前記画素レート変換手段は、
前記第2の3−2プルダウン手段から出力された毎秒60フィールドのインタレース映像信号を補間する場合に
現フィールドと前または後のフィールドに基づき補間をし、毎秒60フレームのプログレッシブ映像信号に変換する補間手段と、
前記補間手段から出力される映像信号を拡大または縮小し、
前記第1の映像信号と同じ毎秒60フィールドのインタレース映像信号に映像画素の伝送速度を変換して出力する拡大縮小手段と、
を備える、請求項1に記載の映像合成装置。
The pixel rate conversion means includes:
When the interlaced video signal of 60 fields per second output from the second 3-2 pull-down means is interpolated, it is interpolated based on the current field and the previous or subsequent field, and converted to a progressive video signal of 60 frames per second. Interpolation means;
Enlarge or reduce the video signal output from the interpolation means,
Enlargement / reduction means for converting and outputting the transmission speed of video pixels into an interlaced video signal of 60 fields per second, the same as the first video signal;
The video composition device according to claim 1, comprising:
前記画素レート変換手段は、
前記第2の3−2プルダウン手段から出力された毎秒60フィールドのインタレース映像信号を補間する場合に
現フィールドと現フレームと同一フレームであったフィールドに基づき補間をし、毎秒60フレームのプログレッシブ映像信号に変換する映像同期補間手段と、
前記映像同期補間手段から出力される映像信号を拡大または縮小し、前記第1の映像信号と同じ毎秒60フィールドのインタレース映像信号に映像画素の伝送速度を変換して出力する拡大縮小手段と、
を備える、請求項1に記載の映像合成装置。
The pixel rate conversion means includes:
When interlaced video signals of 60 fields per second output from the second 3-2 pull-down means are interpolated, interpolation is performed based on fields that are the same frames as the current field and the current frame, and progressive video of 60 frames per second. Video synchronous interpolation means for converting to a signal;
Enlargement / reduction means for enlarging or reducing the video signal output from the video synchronous interpolation means, converting the output speed of video pixels into an interlaced video signal of 60 fields per second, the same as the first video signal, and
The video composition device according to claim 1, comprising:
前記合成手段より出力される映像信号を逆3−2プルダウンする逆3−2プルダウン手段と、
前記合成手段より出力される映像信号と前記逆3−2プルダウン手段より出力される映像信号のいずれかを選択し出力する出力手段と、
を備えた、請求項1または2のいずれかに記載の映像合成装置。
An inverse 3-2 pull-down means for inversely pulling down the video signal output from the combining means;
Output means for selecting and outputting either the video signal output from the synthesizing means or the video signal output from the inverse 3-2 pull-down means;
The video composition device according to claim 1, comprising:
JP2009116133A 2008-05-15 2009-05-13 Video combination apparatus Pending JP2009303205A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009116133A JP2009303205A (en) 2008-05-15 2009-05-13 Video combination apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008128011 2008-05-15
JP2009116133A JP2009303205A (en) 2008-05-15 2009-05-13 Video combination apparatus

Publications (1)

Publication Number Publication Date
JP2009303205A true JP2009303205A (en) 2009-12-24

Family

ID=41549568

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009116133A Pending JP2009303205A (en) 2008-05-15 2009-05-13 Video combination apparatus

Country Status (1)

Country Link
JP (1) JP2009303205A (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05260447A (en) * 1992-03-11 1993-10-08 Hitachi Ltd Television receiver
JPH07307904A (en) * 1994-05-12 1995-11-21 Toshiba Corp Dual screen television receiver
JPH11127423A (en) * 1997-10-20 1999-05-11 Toshiba Corp Video signal processor
JPH11177935A (en) * 1997-12-15 1999-07-02 Matsushita Electric Ind Co Ltd Video signal reproducing device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05260447A (en) * 1992-03-11 1993-10-08 Hitachi Ltd Television receiver
JPH07307904A (en) * 1994-05-12 1995-11-21 Toshiba Corp Dual screen television receiver
JPH11127423A (en) * 1997-10-20 1999-05-11 Toshiba Corp Video signal processor
JPH11177935A (en) * 1997-12-15 1999-07-02 Matsushita Electric Ind Co Ltd Video signal reproducing device

Similar Documents

Publication Publication Date Title
JP4513913B2 (en) Image signal processing apparatus and method
JP2005318612A (en) Block mode adaption motion compensation
JP2008135965A (en) Detecting method of interlace video generation sequence, and interlace/progressive converting method and device
US8154654B2 (en) Frame interpolation device, frame interpolation method and image display device
JP2005167887A (en) Dynamic image format conversion apparatus and method
JP4119360B2 (en) Video format conversion apparatus and method
JP3898546B2 (en) Image scanning conversion method and apparatus
JP5112528B2 (en) Video display device and video processing method
US20110298977A1 (en) Video processing device
JP2007288483A (en) Image converting apparatus
JP2009303205A (en) Video combination apparatus
JP2005026885A (en) Television receiver and its control method
JP3500854B2 (en) Sub-screen video signal vertical compression circuit
KR100385975B1 (en) Apparatus for converting video format and method thereof
TWI245198B (en) Deinterlace method and method for generating deinterlace algorithm of display system
JP4439603B2 (en) Television receiver
WO2009098895A1 (en) Video signal processing method, integrated circuit, and video reproducer
JP2012227799A (en) Image display device
JP5207866B2 (en) Video signal processing method and video signal processing apparatus
JP2007019708A (en) Image processing apparatus
JP2005006316A (en) Scan converting apparatus and scan converting method
JP2009147767A (en) Image converting apparatus, and image display apparatus
JP2000165742A (en) Video signal processor
JPH0865639A (en) Image processor
KR100715168B1 (en) Video signal processing apparatus and video signal processing method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110524

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110624

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110830