JP2004104171A - Video system conversion method and apparatus therefor - Google Patents

Video system conversion method and apparatus therefor Download PDF

Info

Publication number
JP2004104171A
JP2004104171A JP2002259215A JP2002259215A JP2004104171A JP 2004104171 A JP2004104171 A JP 2004104171A JP 2002259215 A JP2002259215 A JP 2002259215A JP 2002259215 A JP2002259215 A JP 2002259215A JP 2004104171 A JP2004104171 A JP 2004104171A
Authority
JP
Japan
Prior art keywords
dct
pixel
field
data stream
encoded data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002259215A
Other languages
Japanese (ja)
Other versions
JP4102620B2 (en
Inventor
Masaaki Kurozumi
黒住　正顕
Atsuro Ichigaya
市ヶ谷　敦郎
Tomohiko Sugimoto
杉本　智彦
Eisuke Nakasu
中須　英輔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2002259215A priority Critical patent/JP4102620B2/en
Publication of JP2004104171A publication Critical patent/JP2004104171A/en
Application granted granted Critical
Publication of JP4102620B2 publication Critical patent/JP4102620B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a video system conversion method and an apparatus therefor which realize simplification of the processing in the video system conversion, and reduction of the apparatus cost. <P>SOLUTION: In the video system conversion method whereby a field DCT or a frame DCT is adaptively selected for blocks resulting from dividing an image into small divisions to encode a data stream and a video system of an image decoded from the encoded data stream is converted, an in-field interpolation or an inter-field interpolation is applied to the encoded data stream depending on a DCT type included in the encoded data stream to thereby omit moving detection processing for analyzing a feature of the image in the video system conversion, and the apparatus cost is reduced accordingly. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は映像方式変換方法及びその装置に関し、特に、フィールド適応ＤＣＴまたはフレーム適応ＤＣＴを用いた符号化方式の復号化画像を符号化ストリームの情報を用いて映像方式変換する映像方式変換方法及びその装置に関する。
【０００２】
【従来の技術】
従来から、１秒当たり２４コマの映画素材の画像を１秒当たり３０フレームのテレビジョン画像に変換したり、また、インターレース画像をプログレッシブ（ノンインターレース）画像に変換する映像方式変換が行われている。更に、符号化された画像を復号し、元の画像の映像方式と異なる映像方式に変換して表示することも行われている。
【０００３】
図３は、従来の映像方式変換方法の一例を説明するためのブロック図を示す。同図中、符号化データストリームはＭＰＥＧ−２等のフィールドＤＣＴとフレームＤＣＴを適応的に切り換えて符号化されたものである。この符号化データストリームは復号化部１０に供給されて復号化される。復号化部１０の出力する復号画像は映像方式変換部１２に供給される。映像方式変換部１２は、復号画像に対して動き検出などを行って画像を分析し、画素ごとにフィールド内補間とフィールド間補間を切り替えて映像方式変換を行い、得られた新たな映像方式の信号を出力する。
【０００４】
また、この他に、符号化データストリームの情報を用いて映像方式変換を行うプログレッシブ出力ＤＶＤプレーヤがある。このものは、固定的にフレームＤＣＴで符号化された映画素材等の符号化データを復号化する際に、すべての画素をフィールド間補間により映像方式変換して例えば４８０ｐ（１画面を４８０ラインのプログレッシブ表示を意味する）の画像にアップコンバートする技術が用いられている。
【０００５】
【発明が解決しようとする課題】
従来の映像方式変換方法では、復号画像信号に対して、動き検出を行って画像の特徴を分析しフィールド内補間とフィールド間補間を切り換えて映像方式変換を行っており、動き検出処理が必須であるために装置コストが高くなるという問題があった。
【０００６】
本発明は、上記の点に鑑みなされたもので、映像方式変換における処理を簡略化でき、装置コストを低減できる映像方式変換方法及びその装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
請求項１，２に記載の発明は、符号化データストリームに含まれるＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行うことにより、
映像方式変換における画像の特徴を分析するための動き検出処理を省略することができ、装置コストを低減できる。
【０００８】
請求項２に記載の発明は、符号化データストリームに含まれる各画素のＤＣＴタイプを抽出する抽出手段と、復号画像の各画素について、当該画素のＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行って変換画像信号を出力する変換手段を有し、請求項３に記載の発明では、変換手段は、当該画素のＤＣＴタイプがフィールドＤＣＴの場合はフィールド内補間を行い、フレームＤＣＴの場合はフィールド間補間を行うことにより、
映像方式変換における画像の特徴を分析するための動き検出処理を省略することができる。
【０００９】
請求項４に記載の発明は、符号化データストリームに含まれるＤＣＴタイプを抽出する抽出手段と、復号画像の各画素について、当該画素に隣接する範囲でフィールドＤＣＴで符号化されていた画素数と当該画素に隣接する範囲でフレームＤＣＴで符号化されていた画素数とに応じて加重平均の比率を決定する比率決定手段と、復号画像の各画素について、フィールド内補間値及びフィールド間補間値を前記加重平均の比率を用いて加重平均し、変換画像信号として出力する加重平均手段を有することにより、
復号画像のＤＣＴタイプが互いに異なるブロックの境界において、補間処理の違いから映像方式変換後の画像でブロック歪が生じることを防止できる。
【００１０】
【発明の実施の形態】
本発明の原理について説明する。ＭＰＥＧ−２符号化は、画面を小領域に分割したブロックに対してフィールドＤＣＴとフレームＤＣＴを適応的に切り換えて符号化するフィールド／フレーム適応ＤＣＴが行われ、符号化データストリームには各ブロックのＤＣＴタイプが情報として記されている。
【００１１】
その切り換え判定方法は、ＤＣＴ係数垂直方向高域成分と相関の高いと思われる垂直方向隣接画素間差分値のブロック内二乗和を基にして、フレーム内で垂直方向に隣接した画素間差分値の二乗和がフィールド内で垂直方向に隣接した画素間差分値の二乗和より大きくなると、フィールド毎にＤＣＴを施した方が変換効率が高くなるとしてフィールドＤＣＴを選択しており、映像方式変換における動き検出と類似している。
【００１２】
そこで、符号化データストリームに記されているＤＣＴタイプの情報をフィールド内補間またはフィールド間補間処理の判定または両方の結果の加重平均に用いることで、映像方式変換における動き検出処理を簡略化する。
【００１３】
図１は、本発明の映像方式変換方法の第１実施例を説明するブロック図を示す。同図中、端子２０に入来する符号化データストリームには画面を小領域に分割したブロックのＤＣＴタイプが情報として記されている。
【００１４】
この符号化データストリームは復号化部２２及びＤＣＴタイプ抽出部２４に供給される。復号化部２２は、符号化データを復号化して復号画像を映像方式変換部２６に供給する。ＤＣＴタイプ抽出部２４は、符号化データストリームからＤＣＴタイプを抽出して映像方式変換部２６に供給する。
【００１５】
映像方式変換部２６は、復号画像の各画素について、当該画素のＤＣＴタイプがフィールドＤＣＴであればフィールド内補間を用い、フレームＤＣＴであればフィールド間補間を用いて映像方式変換を行い、変換画像信号を出力する。
【００１６】
図２は、本発明の映像方式変換方法の第２実施例を説明するブロック図を示す。同図中、図１と同一部分には同一符号を付す。図２において、端子２０に入来する符号化データストリームには画面を小領域に分割したブロックのＤＣＴタイプが情報として記されている。
【００１７】
この符号化データストリームは復号化部２２及びＤＣＴタイプ抽出部２４に供給される。復号化部２２は、符号化データを復号化して復号画像を映像方式変換部２８に供給する。ＤＣＴタイプ抽出部２４は、符号化データストリームからＤＣＴタイプを抽出して比率決定部３０に供給する。
【００１８】
比率決定部３０は、復号画像の各画素における加重平均の比率を、当該画素に隣接する範囲の画素で用いられた各ＤＣＴタイプの比率から求める。つまり、復号画像の（ｘ，ｙ）に位置する画素ｆ（ｘ，ｙ）について、ｘ−ｋ〜ｘ＋ｋ，ｙ−ｌ〜ｙ＋ｌ（ｋ，ｌは整数）の範囲におけるフィールドＤＣＴで符号化されていた画素数をｍ（ｘ，ｙ）、フレームＤＣＴで符号化されていた画素数をｎ（ｘ，ｙ）とし、このｍ（ｘ，ｙ）：ｎ（ｘ，ｙ）からフィールド内補間およびフィールド間補間の加重平均の比率Ｍ（ｘ，ｙ），Ｎ（ｘ，ｙ）を求めて、映像方式変換部２８に供給する。
【００１９】
映像方式変換部２８は、上記加重平均の比率Ｍ（ｘ，ｙ），Ｎ（ｘ，ｙ）を用いてフィールド内補間値とフィールド間補間値の加重平均を行って、変換画像信号を出力する。これにより、復号画像のＤＣＴタイプが互いに異なるブロックの境界において、補間処理の違いから映像方式変換後の画像でブロック歪が生じることを防止できる。
【００２０】
ここで、ＩＳＯ／ＩＥＣ１３８１８−２（ＭＰＥＧ−２ビデオ）に従って符号化された１９２０画素×１０８０ライン／５９．９４ｉ（１秒に５９．９４画面のインターレース表示）の符号化データストリームを、１９２０画素×１０８０ライン／５９．９４ｐ（１秒に５９．９４画面のプログレッシブ表示）の映像方式に変換する場合について説明する。この符号化データストリームはトップフィールドファーストで符号化されているものとする。
【００２１】
１９２０画素×１０８０ライン／５９．９４ｉの１フレームについて、一番左の画素をｘ＝０、一番上のラインをｙ＝０として、画素をｆ（ｘ，ｙ）で表す。ｙが偶数のラインをファーストフィールド、ｙが奇数のラインをセカンドフィールドとする。
【００２２】
映像方式変換部２８は、比率決定部３０から加重平均の比率Ｍ０（ｘ，ｙ），Ｍ１（ｘ，ｙ），Ｎ０（ｘ，ｙ），Ｎ１（ｘ，ｙ）を供給され、（１），（２）式の演算を行って、５９．９４ｉの１フレーム（２フィールド）の各画素ｆ〈ｘ，ｙ）から、５９．９４ｐの２フレームの各画素Ｆ０（ｘ，ｙ），Ｆ１（ｘ，ｙ）を求める。なお、Ｆ０（ｘ，ｙ）とＦ１（ｘ，ｙ）は、前者が時間的に前、後者が時間的に後である。
【００２３】
Ｆ０（ｘ，ｙ）＝（Ｍ０（ｘ，ｙ）×Ｆ０＿ｆｉｅｌｄ（ｘ，ｙ）
＋Ｎ０（ｘ，ｙ）×Ｆ０＿ｆｒａｍｅ（ｘ，ｙ））／（Ｍ０（ｘ，ｙ）＋Ｎ０（ｘ，ｙ））　　　　　　…（１）
Ｆ１（ｘ，ｙ）＝（Ｍ１（ｘ，ｙ）×Ｆｌ＿ｆｉｅｌｄ（ｘ，ｙ）
＋Ｎ１（ｘ，ｙ）×Ｆ１＿ｆｒａｍｅ（ｘ，ｙ））／（Ｍ１（ｘ，ｙ）＋Ｎ１（ｘ，ｙ））　　　　　　…（２）
ただし、
Ｍ０（ｘ，ｙ）＝ｍ（ｘ，ｙ）×２　　　　　　　　　　ｙが偶数の場合
Ｍ０（ｘ，ｙ）＝ｍ（ｘ，ｙ−１）＋ｍ（ｘ，ｙ＋１）　ｙが奇数の場合
Ｍ１（ｘ，ｙ）＝ｍ（ｘ，ｙ−１）＋ｍ（ｘ，ｙ＋１）　ｙが偶数の場合
Ｍ１（ｘ，ｙ）＝ｍ（ｘ，ｙ）×２　　　　　　　　　　ｙが奇数の場合
Ｎ０（ｘ，ｙ）＝ｎ（ｘ，ｙ）×２　　　　　　　　　　ｙが偶数の場合
Ｎ０（ｘ，ｙ）＝ｎ（ｘ，ｙ−１）＋ｎ（ｘ，ｙ＋１）　ｙが奇数の場合
Ｎ１（ｘ，ｙ）＝ｎ（ｘ，ｙ−１）＋ｎ（ｘ，ｙ＋１）　ｙが偶数の場合
Ｎ１（ｘ，ｙ）＝ｎ（ｘ，ｙ）×２　　　　　　　　　　ｙが奇数の場合
フィールド内補間およびフィールド間補間処理は次のように行う。
フィールド内補間処理

Figure 2004104171
フィールド間補間処理
Ｆ０＿ｆｒａｍｅ（ｘ，ｙ）＝ｆ（ｘ，ｙ）　　　　　　ｙが偶数の場合
Ｆ０＿ｆｒａｍｅ（ｘ，ｙ）＝ｆ〈ｘ，ｙ）　　　　　　ｙが奇数の場合
Ｆ１＿ｆｒａｍｅ（ｘ，ｙ）＝ｆ（ｘ，ｙ）　　　　　　ｙが偶数の場合
Ｆ１＿Ｆｒａｍｅ（ｘ，ｙ）＝ｆ〈ｘ，ｙ）　　　　　　ｙが奇数の場合
このようにして、映像方式変換における画像の特徴を分析する処理つまり動き検出処理を省略することができ、装置コストを低減することが可能となる。
【００２４】
なお、ＤＣＴタイプ抽出部２４が請求項記載の抽出手段に対応し、映像方式変換部２６が変換手段に対応し、比率決定部３０が比率決定手段に対応し、映像方式変換部２８が加重平均手段に対応する。
【００２５】
【発明の効果】
上述の如く、請求項１，２に記載の発明は、符号化データストリームに含まれるＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行うことにより、映像方式変換における画像の特徴を分析するための動き検出処理を省略することができ、装置コストを低減できる。
【００２６】
請求項２に記載の発明は、符号化データストリームに含まれる各画素のＤＣＴタイプを抽出する抽出手段と、復号画像の各画素について、当該画素のＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行って変換画像信号を出力する変換手段を有し、請求項３に記載の発明では、変換手段は、当該画素のＤＣＴタイプがフィールドＤＣＴの場合はフィールド内補間を行い、フレームＤＣＴの場合はフィールド間補間を行うことにより、映像方式変換における画像の特徴を分析するための動き検出処理を省略することができる。
【００２７】
請求項４に記載の発明は、符号化データストリームに含まれるＤＣＴタイプを抽出する抽出手段と、復号画像の各画素について、当該画素に隣接する範囲でフィールドＤＣＴで符号化されていた画素数と当該画素に隣接する範囲でフレームＤＣＴで符号化されていた画素数とに応じて加重平均の比率を決定する比率決定手段と、復号画像の各画素について、フィールド内補間値及びフィールド間補間値を前記加重平均の比率を用いて加重平均し、変換画像信号として出力する加重平均手段を有することにより、復号画像のＤＣＴタイプが互いに異なるブロックの境界において、補間処理の違いから映像方式変換後の画像でブロック歪が生じることを防止できる。
【図面の簡単な説明】
【図１】本発明の映像方式変換方法の第１実施例を説明するブロック図である。
【図２】
本発明の映像方式変換方法の第２実施例を説明するブロック図である。
【図３】従来の映像方式変換方法の一例を説明するためのブロック図である。
【符号の説明】
２０　端子
２２　復号化部
２４　ＤＣＴタイプ抽出部
２６，２８　映像方式変換部
３０　比率決定部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a video format conversion method and apparatus, and more particularly, to a video format conversion method for converting a decoded image of a coding method using field adaptive DCT or frame adaptive DCT into video format using information of a coded stream, and a video format conversion method thereof. Equipment related.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, video format conversion for converting a movie material image of 24 frames per second into a television image of 30 frames per second or converting an interlaced image into a progressive (non-interlaced) image has been performed. . Further, decoding of an encoded image, conversion to a video system different from the video system of the original image, and display are also performed.
[0003]
FIG. 3 is a block diagram for explaining an example of a conventional video format conversion method. In the figure, an encoded data stream is encoded by adaptively switching between a field DCT such as MPEG-2 and a frame DCT. This encoded data stream is supplied to the decoding unit 10 and decoded. The decoded image output from the decoding unit 10 is supplied to the video format conversion unit 12. The video format conversion unit 12 analyzes the image by performing motion detection or the like on the decoded image, performs video format conversion by switching between intra-field interpolation and inter-field interpolation for each pixel, and obtains a new video format obtained. Output a signal.
[0004]
In addition, there is a progressive output DVD player that performs video format conversion using information of an encoded data stream. When decoding encoded data such as movie material fixedly encoded by frame DCT, all pixels are converted to a video format by inter-field interpolation, for example, 480p (one screen of 480 lines). (Meaning progressive display) is used.
[0005]
[Problems to be solved by the invention]
In the conventional video format conversion method, motion detection is performed on the decoded image signal to analyze the features of the image, and the video format conversion is performed by switching between intra-field interpolation and inter-field interpolation. For this reason, there is a problem that the cost of the apparatus increases.
[0006]
The present invention has been made in view of the above points, and has as its object to provide a video format conversion method and a video format conversion method capable of simplifying processing in video format conversion and reducing device cost.
[0007]
[Means for Solving the Problems]
The invention according to claims 1 and 2 performs intra-field interpolation or inter-field interpolation according to the DCT type included in the encoded data stream,
The motion detection processing for analyzing the characteristics of the image in the video format conversion can be omitted, and the cost of the apparatus can be reduced.
[0008]
According to a second aspect of the present invention, there is provided an extracting means for extracting a DCT type of each pixel included in an encoded data stream, and for each pixel of a decoded image, intra-field interpolation or inter-field interpolation according to the DCT type of the pixel. And a conversion means for outputting a converted image signal. In the invention according to claim 3, the conversion means performs intra-field interpolation when the DCT type of the pixel is a field DCT, and performs By performing inter-field interpolation,
It is possible to omit the motion detection processing for analyzing the characteristics of the image in the video format conversion.
[0009]
According to a fourth aspect of the present invention, there is provided an extracting means for extracting a DCT type included in an encoded data stream, and for each pixel of a decoded image, the number of pixels encoded by the field DCT in a range adjacent to the pixel. A ratio determining means for determining a weighted average ratio in accordance with the number of pixels that have been encoded by the frame DCT in a range adjacent to the pixel, and an intra-field interpolation value and an inter-field interpolation value for each pixel of the decoded image. By using a weighted average using the ratio of the weighted average, by having a weighted average means to output as a converted image signal,
It is possible to prevent the occurrence of block distortion in the image after the video format conversion due to the difference in the interpolation processing at the boundary between blocks having different DCT types of the decoded image.
[0010]
BEST MODE FOR CARRYING OUT THE INVENTION
The principle of the present invention will be described. In the MPEG-2 encoding, field / frame adaptive DCT for encoding by switching between field DCT and frame DCT adaptively is performed on a block obtained by dividing a screen into small areas, and an encoded data stream includes each block. The DCT type is described as information.
[0011]
The switching determination method is based on the sum of squares in the block of the difference value between the vertically adjacent pixels considered to be highly correlated with the DCT coefficient high frequency component in the vertical direction, and calculates the difference value between the pixels adjacent vertically in the frame. If the sum of squares is larger than the sum of squares of the difference values between vertically adjacent pixels in the field, field DCT is selected because DCT performed for each field increases conversion efficiency. Similar to detection.
[0012]
Therefore, the motion detection processing in the video format conversion is simplified by using the DCT type information described in the encoded data stream for the determination of the intra-field interpolation or the inter-field interpolation processing or the weighted average of both results.
[0013]
FIG. 1 is a block diagram illustrating a first embodiment of a video format conversion method according to the present invention. In the figure, in the coded data stream coming into the terminal 20, the DCT type of a block obtained by dividing the screen into small areas is described as information.
[0014]
This encoded data stream is supplied to the decoding unit 22 and the DCT type extraction unit 24. The decoding unit 22 decodes the encoded data and supplies the decoded image to the video format conversion unit 26. The DCT type extraction unit 24 extracts a DCT type from the encoded data stream and supplies the DCT type to the video format conversion unit 26.
[0015]
The video format conversion unit 26 performs video format conversion for each pixel of the decoded image by using intra-field interpolation when the DCT type of the pixel is the field DCT, and inter-field interpolation when the DCT type is frame DCT. Output a signal.
[0016]
FIG. 2 is a block diagram illustrating a video format conversion method according to a second embodiment of the present invention. In the figure, the same parts as those in FIG. 1 are denoted by the same reference numerals. In FIG. 2, the DCT type of a block obtained by dividing the screen into small areas is described as information in the encoded data stream coming into the terminal 20.
[0017]
This encoded data stream is supplied to the decoding unit 22 and the DCT type extraction unit 24. The decoding unit 22 decodes the encoded data and supplies the decoded image to the video format conversion unit 28. The DCT type extracting unit 24 extracts a DCT type from the encoded data stream and supplies the DCT type to the ratio determining unit 30.
[0018]
The ratio determination unit 30 obtains the ratio of the weighted average of each pixel of the decoded image from the ratio of each DCT type used for pixels in a range adjacent to the pixel. That is, the pixel f (x, y) located at (x, y) of the decoded image is encoded by the field DCT in the range of x−k to x + k, yl to y + l (k and l are integers). Let m (x, y) be the number of pixels obtained, and n (x, y) be the number of pixels coded by the frame DCT, and perform intra-field interpolation and field interpolation from this m (x, y): n (x, y). The ratios M (x, y) and N (x, y) of the weighted averages of the interpolation are obtained and supplied to the video format converter 28.
[0019]
The video format converter 28 performs a weighted average of the intra-field interpolation value and the inter-field interpolation value using the weighted average ratios M (x, y) and N (x, y), and outputs a converted image signal. . Accordingly, it is possible to prevent block distortion from occurring in an image after the video format conversion due to a difference in interpolation processing at a boundary between blocks having different DCT types of a decoded image.
[0020]
Here, an encoded data stream of 1920 pixels × 1080 lines / 59.94i (interlaced display of 59.94 screens per second) encoded according to ISO / IEC13818-2 (MPEG-2 video) is converted to 1920 pixels × A description will be given of a case of converting to a video system of 1080 lines / 59.94p (progressive display of 59.94 screens per second). It is assumed that this encoded data stream has been encoded in top field first.
[0021]
For one frame of 1920 pixels × 1080 lines / 59.94i, the leftmost pixel is represented by x = 0, the uppermost line is represented by y = 0, and the pixel is represented by f (x, y). It is assumed that an even-numbered line is a first field and y is an odd-numbered line as a second field.
[0022]
The video format conversion unit 28 is supplied with the weighted average ratios M0 (x, y), M1 (x, y), N0 (x, y), N1 (x, y) from the ratio determination unit 30, and (1) , (2) is performed to convert each pixel F0 (x, y), F1 (59.94i) from two pixels f <x, y> of one frame (two fields) of 59.94i. x, y). Note that F0 (x, y) and F1 (x, y) are temporally earlier in the former and temporally later in the latter.
[0023]
F0 (x, y) = (M0 (x, y) × F0_field (x, y)
+ N0 (x, y) × F0_frame (x, y)) / (M0 (x, y) + N0 (x, y)) (1)
F1 (x, y) = (M1 (x, y) × Fl_field (x, y)
+ N1 (x, y) × F1_frame (x, y)) / (M1 (x, y) + N1 (x, y)) (2)
However,
M0 (x, y) = m (x, y) × 2 When y is an even number M0 (x, y) = m (x, y−1) + m (x, y + 1) When y is an odd number, M1 (x, y) y) = m (x, y-1) + m (x, y + 1) M1 (x, y) = m (x, y) × 2 when y is an even number N0 (x, y) = n when y is an odd number (X, y) × 2 When y is an even number, N0 (x, y) = n (x, y−1) + n (x, y + 1) When y is an odd number, N1 (x, y) = n (x, y) -1) + n (x, y + 1) When y is an even number N1 (x, y) = n (x, y) × 2 When y is an odd number Intra-field interpolation and inter-field interpolation processing are performed as follows.
In-field interpolation
Figure 2004104171
Inter-field interpolation processing F0_frame (x, y) = f (x, y) When y is an even number F0_frame (x, y) = f <x, y) When y is an odd number, F1_frame (x, y) = f (x , Y) When y is an even number F1_Frame (x, y) = f <x, y) When y is an odd number In this way, the process of analyzing the image characteristics in the video format conversion, that is, the motion detection process is omitted. And the cost of the apparatus can be reduced.
[0024]
The DCT type extracting unit 24 corresponds to the extracting unit described in the claims, the video system converting unit 26 corresponds to the converting unit, the ratio determining unit 30 corresponds to the ratio determining unit, and the video system converting unit 28 corresponds to the weighted average. Corresponding to the means.
[0025]
【The invention's effect】
As described above, the first and second aspects of the present invention analyze an image feature in video format conversion by performing intra-field interpolation or inter-field interpolation according to a DCT type included in an encoded data stream. Can be omitted, and the apparatus cost can be reduced.
[0026]
According to a second aspect of the present invention, there is provided an extracting means for extracting a DCT type of each pixel included in an encoded data stream, and for each pixel of a decoded image, intra-field interpolation or inter-field interpolation according to the DCT type of the pixel. And a conversion means for outputting a converted image signal. In the invention according to claim 3, the conversion means performs intra-field interpolation when the DCT type of the pixel is a field DCT, and performs By performing the inter-field interpolation, it is possible to omit the motion detection processing for analyzing the characteristics of the image in the video format conversion.
[0027]
According to a fourth aspect of the present invention, there is provided an extracting means for extracting a DCT type included in an encoded data stream, and for each pixel of a decoded image, the number of pixels encoded by the field DCT in a range adjacent to the pixel. A ratio determining means for determining a weighted average ratio in accordance with the number of pixels that have been encoded by the frame DCT in a range adjacent to the pixel; By providing weighted averaging means for performing weighted averaging using the ratio of the weighted average and outputting as a converted image signal, at the boundary between blocks in which the DCT type of the decoded image is different from each other, the image after image format conversion is performed due to a difference in interpolation processing. Can prevent block distortion from occurring.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a first embodiment of a video format conversion method according to the present invention.
FIG. 2
FIG. 7 is a block diagram illustrating a second embodiment of the video format conversion method of the present invention.
FIG. 3 is a block diagram for explaining an example of a conventional video format conversion method.
[Explanation of symbols]
Reference Signs List 20 terminal 22 decoding unit 24 DCT type extraction unit 26, 28 video format conversion unit 30 ratio determination unit

Claims (4)

画面を小領域に分割したブロックに対してフィールドＤＣＴとフレームＤＣＴを適応的に切り換えて符号化された符号化データストリームから復号化された復号画像の映像方式変換を行う映像方式変換方法において、
前記符号化データストリームに含まれるＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行う
ことを特徴とする映像方式変換方法。A video system conversion method for performing a video system conversion of a decoded image decoded from an encoded data stream by adaptively switching between a field DCT and a frame DCT for a block obtained by dividing a screen into small regions,
A video system conversion method, wherein intra-field interpolation or inter-field interpolation is performed according to a DCT type included in the encoded data stream. 画面を小領域に分割したブロックに対してフィールドＤＣＴとフレームＤＣＴを適応的に切り換えて符号化された符号化データストリームから復号化された復号画像の映像方式変換を行う映像方式変換装置において、
前記符号化データストリームに含まれる各画素のＤＣＴタイプを抽出する抽出手段と、
復号画像の各画素について、当該画素のＤＣＴタイプに応じてフィールド内補間またはフィールド間補間を行って変換画像信号を出力する変換手段を
有することを特徴とする映像方式変換装置。In a video format conversion device for performing video format conversion of a decoded image decoded from an encoded data stream by adaptively switching between field DCT and frame DCT for a block obtained by dividing a screen into small regions,
Extracting means for extracting a DCT type of each pixel included in the encoded data stream;
An image format conversion device, comprising: a conversion unit that performs intra-field interpolation or inter-field interpolation for each pixel of a decoded image according to the DCT type of the pixel and outputs a converted image signal. 請求項２記載の映像方式変換装置において、
前記変換手段は、当該画素のＤＣＴタイプがフィールドＤＣＴの場合はフィールド内補間を行い、フレームＤＣＴの場合はフィールド間補間を行うことを特徴とする映像方式変換装置。The video format converter according to claim 2,
An image format conversion apparatus, wherein the conversion means performs intra-field interpolation when the DCT type of the pixel is a field DCT, and performs inter-field interpolation when the pixel is a frame DCT. 画面を小領域に分割したブロックに対してフィールドＤＣＴとフレームＤＣＴを適応的に切り換えて符号化された符号化データストリームから復号化された復号画像の映像方式変換を行う映像方式変換装置において、
前記符号化データストリームに含まれるＤＣＴタイプを抽出する抽出手段と、復号画像の各画素について、当該画素に隣接する範囲でフィールドＤＣＴで符号化されていた画素数と当該画素に隣接する範囲でフレームＤＣＴで符号化されていた画素数とに応じて加重平均の比率を決定する比率決定手段と、
復号画像の各画素について、フィールド内補間値及びフィールド間補間値を前記加重平均の比率を用いて加重平均し、変換画像信号として出力する加重平均手段を
有することを特徴とする映像方式変換装置。In a video format conversion device for performing video format conversion of a decoded image decoded from an encoded data stream by adaptively switching between field DCT and frame DCT for a block obtained by dividing a screen into small regions,
Extracting means for extracting a DCT type included in the encoded data stream; and for each pixel of the decoded image, the number of pixels encoded in the field DCT in a range adjacent to the pixel and a frame in a range adjacent to the pixel. Ratio determining means for determining a weighted average ratio according to the number of pixels that have been encoded by DCT;
A video format conversion apparatus, comprising: a weighted averaging unit that performs a weighted average of an intra-field interpolation value and an inter-field interpolation value for each pixel of a decoded image using the ratio of the weighted average, and outputs a converted image signal.
JP2002259215A 2002-09-04 2002-09-04 Video format converter Expired - Fee Related JP4102620B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002259215A JP4102620B2 (en) 2002-09-04 2002-09-04 Video format converter

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002259215A JP4102620B2 (en) 2002-09-04 2002-09-04 Video format converter

Publications (2)

Publication Number Publication Date
JP2004104171A true JP2004104171A (en) 2004-04-02
JP4102620B2 JP4102620B2 (en) 2008-06-18

Family

ID=32260314

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002259215A Expired - Fee Related JP4102620B2 (en) 2002-09-04 2002-09-04 Video format converter

Country Status (1)

Country Link
JP (1) JP4102620B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662080A (en) * 2019-09-30 2020-01-07 中国科学技术大学 Machine-oriented universal coding method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662080A (en) * 2019-09-30 2020-01-07 中国科学技术大学 Machine-oriented universal coding method
CN110662080B (en) * 2019-09-30 2021-10-01 中国科学技术大学 Machine-oriented universal coding method

Also Published As

Publication number Publication date
JP4102620B2 (en) 2008-06-18

Similar Documents

Publication Publication Date Title
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
JP4749377B2 (en) Block noise removal device
KR20090006724A (en) System and method for detecting scrolling text in mixed mode film and video
TW201127048A (en) Inverse telecine techniques
JP2008135965A (en) Detecting method of interlace video generation sequence, and interlace/progressive converting method and device
US8350963B2 (en) Video processing device and method of processing video data
JP2009010492A (en) Image decoder and image conversion circuit
US7012648B2 (en) Image conversion method and image conversion apparatus
JP2001285881A (en) Digital information converter and method, and image information converter and method
US8767831B2 (en) Method and system for motion compensated picture rate up-conversion using information extracted from a compressed video stream
EP1416723A2 (en) Method for resizing an image using the inverse discrete cosine transform
JP2007531450A (en) Digital video signal processing method and digital video signal processing system
EP1418754B1 (en) Progressive conversion of interlaced video based on coded bitstream analysis
US8872980B2 (en) System and method for accumulative stillness analysis of video signals
US8139153B2 (en) Method for generating distances representative of the edge orientations in a video picture, corresponding device and use of the method for deinterlacing or format conversion
JP4102620B2 (en) Video format converter
JP4781306B2 (en) Block noise removal device
JP2004201010A (en) Image processing apparatus and method, image processing program and recording medium
JP2002369155A (en) Method of converting image and image converter
US20070216808A1 (en) System, method, and apparatus for scaling pictures
JP3708745B2 (en) Moving picture decoding apparatus and moving picture decoding method
JP4681341B2 (en) Sequential scan converter
JP4175863B2 (en) Interlaced scanning motion detection circuit and video signal processing apparatus
JP2004032413A (en) Apparatus and method for generating corrected video signal, its program, apparatus and method for restoring corrected video signal, and its program, apparatus for encoding corrected video signal and apparatus for encoding corrected video signal
JP2009267753A (en) Image format converting device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050131

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070925

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080318

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080324

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110328

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120328

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130328

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140328

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees