JP4526314B2

JP4526314B2 - Video playback device

Info

Publication number: JP4526314B2
Application number: JP2004200547A
Authority: JP
Inventors: 真毅高橋; 智幸山本
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2004-07-07
Filing date: 2004-07-07
Publication date: 2010-08-18
Anticipated expiration: 2024-07-07
Also published as: JP2006025105A

Description

本発明は、動画像再生装置に関し、特に、符号化された動画像の高速再生機能を備えた動画像再生装置に関する。 The present invention relates to a moving image playback apparatus, and more particularly, to a moving image playback apparatus having a high-speed playback function for encoded moving images.

ＭＰＥＧ等のフレーム内及びフレーム間相関を利用する動画像符号化方式において、高速再生を実現する従来技術として、特許文献１の特公平６−２８４４６号公報「圧縮記録画像の再生方式」に示される技術がある。図８に、従来技術として該特許文献１の技術を用いた動画像再生装置のブロック構成を示す。 Japanese Patent Publication No. 6-28446, “Reproduction Method of Compressed Recorded Image” of Japanese Patent Application Laid-Open No. 6-28446 discloses a conventional technique for realizing high-speed reproduction in a moving image encoding method using intra-frame and inter-frame correlation such as MPEG. There is technology. FIG. 8 shows a block configuration of a moving picture reproducing apparatus using the technique of Patent Document 1 as a conventional technique.

図８に示す動画像再生装置３０において、２は符号化データを復号する可変長符号復号部、３は可変長符号復号部２の出力を逆量子化する逆量子化部、４は逆量子化部３の出力を差分画像へ変換する逆変換部、５は蓄積された復号済み動画像を基にフレーム間予測を行ない、予測画像を生成するフレーム間予測画像生成部、６は当該フレームにおける復号済みの画像を基にフレーム内予測を行ない、予測画像を生成するフレーム内予測画像生成部、７は差分画像と予測画像の合成画像に対し、ブロック歪等の符号化歪除去のためのフィルタ処理を行なうフィルタ処理部、９は生成された復号画像を蓄積するフレームメモリ、１０ａは入力データの出力先を切替える出力切替スイッチ、１３は外部から指定された再生速度情報Ｓに基づき、当該動画像再生装置３０の再生速度を制御する復号制御部である。 8, 2 is a variable length code decoding unit that decodes encoded data, 3 is an inverse quantization unit that dequantizes the output of the variable length code decoding unit 2, and 4 is inverse quantization. Inverse conversion unit 5 that converts the output of unit 3 into a differential image, 5 performs inter-frame prediction based on the accumulated decoded moving image, and generates a predicted image, and 6 indicates decoding in the frame. An intra-frame prediction image generation unit that performs intra-frame prediction based on a completed image and generates a prediction image; and 7, a filter process for removing coding distortion such as block distortion on a composite image of the difference image and the prediction image 9 is a frame memory for accumulating the generated decoded image, 10a is an output selector switch for switching the output destination of the input data, and 13 is based on the reproduction speed information S designated from the outside. A decoding control unit for controlling the playback speed of the image reproducing apparatus 30.

当該技術を用いた動画像再生装置３０の通常再生動作は、以下の通りである。
（ステップＳ１０）
再生対象の符号化データは、順次、可変長符号復号部２に入力され、可変長符号の復号が行なわれる。
（ステップＳ２０）
指定された再生速度情報Ｓに応じて、復号制御部１３は、可変長復号制御部２を以下の通り制御する。
・高速再生（Ｓ＞１）であり、かつ、可変長符号復号部２で復号されたフレームタイプが、Ｉフレーム以外の場合、復号制御部２は、次のフレームまで可変長符号復号部２の出力を停止するように制御する。
・上記以外の場合、即ち、高速再生（Ｓ＞１）であり、かつ、フレームタイプがＩフレームの場合、及び、高速再生ではない通常再生の場合（Ｓ≦１）、可変長符号復号部２にて復号されたデータは種類別に逆量子化部３他へ出力するように制御する。
（ステップＳ３０）
可変長符号復号部２で復号された予測モードに応じて、出力切替スイッチ１０ａの制御が行なわれる。即ち、復号中の符号化データの予測モードがフレーム間予測の場合は、フレーム間予測画像生成部５へ、予測モードがフレーム内予測の場合は、フレーム内予測画像生成部６へ、予測画像の生成に必要な画像がフレームメモリ９から供給され、予測画像が生成される。
（ステップＳ４０）
可変長符号復号部２で復号された差分画像に関するデータは、逆量子化部３における逆量子化、逆変換部４における逆変換を経て、差分画像となる。
（ステップＳ５０）
ステップＳ３０、ステップＳ４０で生成された予測画像と差分画像とは合成され、符号化歪除去のためのフィルタ処理がフィルタ処理部７で行なわれ、復号画像が生成される。
（ステップＳ６０）
生成された復号画像は、フレームメモリ９に蓄積され、所定の再生時刻に再生画像として出力される。
以上説明したように、当該技術では、高速再生を行なう場合、フレーム内相関のみを利用したＩフレームのみを選択して、間欠再生することにより高速再生を実現している。
特公平６−２８４４６号公報 The normal playback operation of the moving image playback device 30 using this technology is as follows.
(Step S10)
The encoded data to be reproduced is sequentially input to the variable length code decoding unit 2, and the variable length code is decoded.
(Step S20)
According to the designated reproduction speed information S, the decoding control unit 13 controls the variable length decoding control unit 2 as follows.
If the playback type is high-speed playback (S> 1) and the frame type decoded by the variable-length code decoding unit 2 is other than the I frame, the decoding control unit 2 Control to stop output.
In cases other than the above, that is, high-speed playback (S> 1) and the frame type is I frame, and normal playback that is not high-speed playback (S ≦ 1), the variable-length code decoding unit 2 The data decoded at is controlled so as to be output to the dequantization unit 3 and others for each type.
(Step S30)
The output changeover switch 10a is controlled according to the prediction mode decoded by the variable length code decoding unit 2. That is, when the prediction mode of the encoded data being decoded is inter-frame prediction, the prediction image is generated to the inter-frame prediction image generation unit 5, and when the prediction mode is intra-frame prediction, the prediction image is generated to the intra-frame prediction image generation unit 6. An image necessary for generation is supplied from the frame memory 9, and a predicted image is generated.
(Step S40)
Data relating to the difference image decoded by the variable length code decoding unit 2 is subjected to inverse quantization in the inverse quantization unit 3 and inverse transformation in the inverse transformation unit 4 to become a difference image.
(Step S50)
The prediction image and the difference image generated in steps S30 and S40 are combined, and the filter processing unit 7 performs filter processing for removing the coding distortion, thereby generating a decoded image.
(Step S60)
The generated decoded image is stored in the frame memory 9 and output as a reproduced image at a predetermined reproduction time.
As described above, in the technology, when performing high-speed reproduction, only high-speed reproduction is realized by selecting only I frames using only intra-frame correlation and performing intermittent reproduction.
Japanese Patent Publication No. 6-28446

しかしながら、通常、フレーム内相関のみを利用するＩフレームは、十数フレームに１フレーム程度の頻度で符号化されることが多く、例えば、高速再生として２倍速再生を前述の技術を用いて実現する場合、１秒当たりに表示されるフレームは僅か数フレーム程度に過ぎず、滑らかな動きを再現することができないという問題点がある。 However, normally, I frames that use only intra-frame correlation are often encoded with a frequency of about one frame per ten frames. For example, double-speed reproduction is realized using the above-described technique as high-speed reproduction. In this case, only a few frames are displayed per second, and there is a problem that smooth motion cannot be reproduced.

本発明は、かかる問題を解決するためになされたものであり、高速再生においても、滑らかな動きを再現することを可能とすることを目的としている。 The present invention has been made to solve such a problem, and an object of the present invention is to make it possible to reproduce smooth motion even in high-speed playback.

本発明の技術手段は、所定の動画像符号化方式を用いて符号化された動画像データの再生を行う動画像再生装置において、前記動画像データを通常再生する際の復号処理を行なう所定の動画像復号手段と、該所定の動画像復号手段より簡易化した復号処理を行なう簡易動画像復号手段と、前記動画像データを高速再生する際、前記動画像データに関する付加情報が、前記所定の動画像符号化方式におけるフレームを複数のブロックに分割した復号処理対象のブロックのフレーム内位置を示す情報であり、該情報のフレーム中央から当該ブロックまでの距離が所定の閾値未満の場合には、前記復号手段として前記所定の動画像復号手段を選択し、前記距離が所定の閾値以上の場合には、前記復号手段として前記簡易動画像復号手段を選択する再生速度制御手段と、を備えることを特徴とする。 The technical means of the present invention provides a predetermined reproduction process for performing normal reproduction of the moving image data in a moving image reproduction apparatus that reproduces moving image data encoded using a predetermined moving image encoding method. A moving image decoding unit, a simplified moving image decoding unit that performs a decoding process simplified by the predetermined moving image decoding unit, and additional information relating to the moving image data when the moving image data is played back at high speed, This is information indicating the intra-frame position of a decoding target block obtained by dividing a frame in a moving image encoding method into a plurality of blocks, and when the distance from the center of the information frame to the block is less than a predetermined threshold, When the predetermined moving image decoding unit is selected as the decoding unit, and the simple moving image decoding unit is selected as the decoding unit when the distance is equal to or greater than a predetermined threshold, Characterized in that it comprises a speed control means.

以上のごとき各技術手段から構成される本発明に係る動画像再生装置によれば、高速再生時に、フレーム間相関のみを用いたＩフレームの符号化頻度の如何に関わらず、動きの滑らかな高速再生を実現することができる。 According to the moving picture reproducing apparatus according to the present invention constituted by each technical means as described above, a high-speed smooth movement is possible regardless of the encoding frequency of the I frame using only the inter-frame correlation during the high-speed reproduction. Reproduction can be realized.

（実施形態１）
以下に、本発明に係る動画再生装置の実施の形態について、図面を参照しながら説明する。
図１は、本発明の実施形態１における動画像再生装置のブロック図である。図１に示す動画像再生装置２０において、１は外部から指定された再生速度情報Ｓに基づき本動画像再生装置２０が所定の再生速度で動作するための制御を行なう再生速度制御部、２は符号化データを復号する可変長符号復号部、３は可変長符号復号部２の出力を逆量子化する逆量子化部、４は逆量子化部３の出力を差分画像へ変換する逆変換部、５は蓄積された復号済み動画像を基にフレーム間予測を行ない、予測画像を生成するフレーム間予測画像生成部、６は当該フレームにおける復号済みの画像を基にフレーム内予測を行ない、予測画像を生成するフレーム内予測画像生成部、７は差分画像と予測画像の合成画像に対し、ブロック歪等の符号化歪除去のためのフィルタ処理を行なうフィルタ処理部、８はフィルタ処理部７とは異なる簡易な方法で符号化歪除去のためのフィルタ処理を行なう簡易フィルタ処理部、９は生成された復号画像を蓄積するフレームメモリ、１０ａ，１０ｂはいずれも入力データの出力先を切替える出力切替スイッチである。 (Embodiment 1)
Embodiments of a moving image playback apparatus according to the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram of a moving image reproducing apparatus according to Embodiment 1 of the present invention. In the moving picture reproduction apparatus 20 shown in FIG. 1, reference numeral 1 denotes a reproduction speed control unit that performs control for the main moving picture reproduction apparatus 20 to operate at a predetermined reproduction speed based on reproduction speed information S designated from the outside. A variable length code decoding unit that decodes encoded data, 3 is an inverse quantization unit that inversely quantizes the output of the variable length code decoding unit 2, and 4 is an inverse conversion unit that converts the output of the inverse quantization unit 3 into a differential image. 5 performs inter-frame prediction based on the accumulated decoded moving image and generates a predicted image, and 6 performs intra-frame prediction based on the decoded image in the frame. An intra-frame predicted image generating unit that generates an image, 7 is a filter processing unit that performs a filter process for removing coding distortion such as block distortion on a composite image of the difference image and the predicted image, and 8 is a filter processing unit 7 Is different A simple filter processing unit that performs filter processing for removing coding distortion by an easy method, 9 is a frame memory for storing the generated decoded image, and 10a and 10b are output changeover switches for switching the output destination of input data. is there.

なお、図１の動画像再生装置２０では、フィルタ処理部７、あるいは、簡易フィルタ処理部８で符号化歪を除去した画像をフレームメモリ９へ蓄積し、後のフレーム間予測に用いるような構成としたが、取り扱う動画像符号化方式により、図２の動画像再生装置２１に示すように、符号化歪除去前の画像、即ち、差分画像と予測画像との合成画像をフレームメモリ９へ蓄積し、再生出力時に、フィルタ処理部７あるいは簡易フィルタ処理部８で符号化歪を除去して再生する構成であっても構わない。ここに、図２は、本発明の実施形態１の別形態の動画像再生装置のブロック図である。
また、逆量子化部３、逆変換部４、フレーム間予測画像生成部５、フレーム内予測画像生成部６も、取り扱う動画像符号化方式に応じて、省略した構成であっても構わない。 In the moving picture reproduction apparatus 20 of FIG. 1, an image from which coding distortion has been removed by the filter processing unit 7 or the simple filter processing unit 8 is stored in the frame memory 9 and used for subsequent inter-frame prediction. However, as shown in the moving image reproducing apparatus 21 in FIG. 2, an image before encoding distortion removal, that is, a composite image of the difference image and the predicted image is stored in the frame memory 9 by the moving image encoding method to be handled. However, at the time of reproduction output, the filter processing unit 7 or the simple filter processing unit 8 may remove the encoding distortion and reproduce. FIG. 2 is a block diagram of a moving picture reproducing apparatus according to another embodiment of the first embodiment of the present invention.
Further, the inverse quantization unit 3, the inverse transform unit 4, the inter-frame prediction image generation unit 5, and the intra-frame prediction image generation unit 6 may also be omitted depending on the moving image encoding method to be handled.

次に、図１に示す本実施形態における動画像再生装置２０の動作について、図７の動作フロー図を用いて説明する。ここに、図７は、本発明の実施形態１における動画像再生装置２０の動作を説明するための動作フロー図である。なお、以下の説明では、フィルタ処理部７、簡易フィルタ処理部８で処理可能な再生速度の限界値をそれぞれＳｍａｘ，Ｓ′ｍａｘとし、Ｓｍａｘ＜Ｓ′ｍａｘであるものとする。即ち、簡易フィルタ処理部８における処理の方が、フィルタ処理部７における処理よりも高速に実行可能である。 Next, the operation of the moving image playback apparatus 20 in the present embodiment shown in FIG. 1 will be described using the operation flowchart of FIG. FIG. 7 is an operation flowchart for explaining the operation of the moving image reproduction apparatus 20 according to the first embodiment of the present invention. In the following description, it is assumed that the limit values of the reproduction speed that can be processed by the filter processing unit 7 and the simple filter processing unit 8 are Smax and S′max, respectively, and Smax <S′max. That is, the process in the simple filter processing unit 8 can be performed at a higher speed than the process in the filter processing unit 7.

以下、図７の動作フロー図を参照しながら説明する。
（ステップＳ１）
再生速度制御手段１は、入力された再生速度情報Ｓに基づき、出力切替スイッチ１０ｂを制御する。フィルタ処理部７と簡易フィルタ処理部８とを切替える出力切替スイッチ１０ｂの切替え判定は、指定された再生速度情報Ｓに応じて、所定の閾値ＴＨ（≦Ｓｍａｘ）を用いて以下の通り行なう。
・Ｓ＜ＴＨの場合、フィルタ処理部７を出力先に選択する（ステップＳ１−ａ）。
・Ｓ≧ＴＨの場合、簡易フィルタ処理部８を出力先に選択する（ステップＳ１−ｂ）。 The operation will be described below with reference to the operation flow diagram of FIG.
(Step S1)
The reproduction speed control means 1 controls the output changeover switch 10b based on the inputted reproduction speed information S. The switching determination of the output changeover switch 10b for switching between the filter processing unit 7 and the simple filter processing unit 8 is performed as follows using a predetermined threshold TH (≦ Smax) according to the designated reproduction speed information S.
When S <TH, the filter processing unit 7 is selected as the output destination (step S1-a).
When S ≧ TH, the simple filter processing unit 8 is selected as the output destination (step S1-b).

（ステップＳ２）
再生対象の符号化データは、順次、可変長符号復号部２に入力され、可変長符号の復号が行なわれる。復号されたデータは種類別に逆量子化部３他へ出力される。
（ステップＳ３）
可変長符号復号部２で復号された予測モードに応じて、出力切替スイッチ１０ａの制御が行なわれる。即ち、復号中の符号化データの予測モードがフレーム間予測の場合は、フレーム間予測画像生成部５へ、予測モードがフレーム内予測の場合は、フレーム内予測画像生成部６へ、予測画像の生成に必要な画像がフレームメモリ９から供給されて、予測画像が生成される。 (Step S2)
The encoded data to be reproduced is sequentially input to the variable length code decoding unit 2, and the variable length code is decoded. The decoded data is output to the inverse quantization unit 3 and others for each type.
(Step S3)
The output changeover switch 10a is controlled according to the prediction mode decoded by the variable length code decoding unit 2. That is, if the prediction mode of the encoded data being decoded is inter-frame prediction, the prediction image is generated to the inter-frame prediction image generation unit 5. If the prediction mode is intra-frame prediction, the prediction image generation unit 6 is An image necessary for generation is supplied from the frame memory 9, and a predicted image is generated.

（ステップＳ４）
可変長符号復号部２で復号された差分画像に関するデータは、逆量子化部３における逆量子化、逆変換部４における逆変換を経て、差分画像となる。
（ステップＳ５）
ステップＳ３、ステップＳ４でそれぞれ生成された予測画像と差分画像とは合成され、ステップＳ１で選択されたフィルタ処理部７／簡易フィルタ処理部８のいずれかで符号化歪除去のためのフィルタ処理が行なわれ、復号画像が生成される。
（ステップＳ６）
生成された復号画像はフレームメモリ９に一旦蓄積され、所定の再生時刻に再生画像として出力される。
（ステップＳ７）
最終フレームの復号・再生出力が完了するまでステップＳ１からステップＳ６の動作を繰り返す。 (Step S4)
Data relating to the difference image decoded by the variable length code decoding unit 2 is subjected to inverse quantization in the inverse quantization unit 3 and inverse transform in the inverse transform unit 4 to become a difference image.
(Step S5)
The prediction image and the difference image respectively generated in step S3 and step S4 are combined, and filter processing for removing the coding distortion is performed in either the filter processing unit 7 or the simple filter processing unit 8 selected in step S1. And a decoded image is generated.
(Step S6)
The generated decoded image is temporarily stored in the frame memory 9 and output as a reproduced image at a predetermined reproduction time.
(Step S7)
The operations from step S1 to step S6 are repeated until decoding / reproduction output of the final frame is completed.

以上のような動作により、本実施形態の動画像再生装置２０では、再生速度情報Ｓに対応可能なフィルタリング速度にてフィルタ処理を行なうので、通常再生、高速再生のいずれであっても、全てのフレームの再生を指定された再生速度に応じて実現している。従って、高速再生時においても全てのフレームが復号されるため、動きの滑らかな再生が可能である。なお、前記した所定の閾値ＴＨを超えた高速再生の場合は、フィルタ処理部７による動画像符号化方式の所定のフィルタ処理ではなく、高速処理をするために、演算量の少ない簡易なフィルタ処理を行なう簡易フィルタ処理部８に処理を切替えているため、画像の劣化が発生する。 With the operation as described above, the moving image playback apparatus 20 according to the present embodiment performs the filtering process at a filtering speed compatible with the playback speed information S. Therefore, all the normal playback and high speed playback are performed. Frame playback is realized according to the specified playback speed. Accordingly, since all frames are decoded even during high-speed playback, playback with smooth motion is possible. In the case of high-speed reproduction exceeding the predetermined threshold value TH described above, instead of the predetermined filter process of the moving image encoding method by the filter processing unit 7, a simple filter process with a small amount of calculation is performed for high-speed processing. Since the processing is switched to the simple filter processing unit 8 that performs the above, image degradation occurs.

また、本実施形態の動画像符号化装置２０は、取り扱う動画像符号化方式において、符号化歪除去のためのフィルタ処理が、他の復号処理に比べ、膨大な演算量を必要とする場合に、特に有効である。 In addition, the moving image coding apparatus 20 according to the present embodiment, when the moving image coding method handles, the filter processing for removing the coding distortion requires an enormous amount of calculation compared to other decoding processing. Is particularly effective.

なお、ステップＳ１におけるフィルタ処理部７／簡易フィルタ処理部８の切替え制御は、前述の方法に限定されるものではなく、可変長符号復号部２からの付加情報Ｎに応じて切替える構成であっても構わない。 Note that the switching control of the filter processing unit 7 / simple filter processing unit 8 in step S1 is not limited to the method described above, and is configured to switch according to the additional information N from the variable-length code decoding unit 2. It doesn't matter.

例えば、異なる画像サイズの動画像の再生を扱う場合、前記のＳｍａｘ，Ｓ′ｍａｘは画像サイズに依存する。即ち、画像サイズをＮとする時、
Ｓｍａｘ＝ｆ（Ｎ）
Ｓ′ｍａｘ＝ｆ′（Ｎ）
とＮの関数で表される。
なお、ｆ（Ｎ），ｆ′（Ｎ）は実験によって求められる関数であり、一般に、
ｆ（Ｎ）＝αＮ＋β
ｆ′（Ｎ）＝α′Ｎ＋β′
として表される。ここに、α，β，α′，β′は定数である。 For example, when handling reproduction of moving images having different image sizes, the above Smax and S′max depend on the image size. That is, when the image size is N,
Smax = f (N)
S′max = f ′ (N)
And a function of N.
Note that f (N) and f ′ (N) are functions obtained by experiments.
f (N) = αN + β
f ′ (N) = α′N + β ′
Represented as: Here, α, β, α ′ and β ′ are constants.

従って、例えば、
ＴＨ＝Ｓｍａｘ＝αＮ＋β
として、ステップＳ１の切替え制御を行なうことにすれば、簡便な処理で、取り扱う画像サイズに応じて、最適な再生速度での切替え制御が可能となる。
その結果、比較的低速の再生速度での画質劣化を避けることが可能となる。なお、前述の説明では、付加情報Ｎとして画像サイズを用いた場合について説明したが、例えば、異なるフレームレートの動画像の再生を扱う場合、フレームレートを付加情報Ｎとして同様の制御を行なうことも可能である。 So, for example,
TH = Smax = αN + β
As described above, if the switching control in step S1 is performed, the switching control can be performed at an optimum reproduction speed according to the image size to be handled by a simple process.
As a result, it is possible to avoid image quality deterioration at a relatively low playback speed. In the above description, the case where the image size is used as the additional information N has been described. However, for example, when playing back a moving image having a different frame rate, the same control may be performed with the frame rate as the additional information N. Is possible.

また、前述の画像サイズを用いる場合には、図７に示すようにステップＳ１からステップＳ６までを繰り返すのではなく、取り扱う動画像符号化方式によっては、ステップＳ２からステップＳ６までを繰り返すようにしても良いが、ステップＳ１におけるフィルタ処理部７／簡易フィルタ処理部８の切替え制御を、フレーム単位で切替える構成として、ステップＳ１からステップＳ６までを繰り返す構成であっても勿論構わない。 Further, when the above-described image size is used, steps S1 to S6 are not repeated as shown in FIG. 7, but steps S2 to S6 are repeated depending on the moving picture encoding method to be handled. However, as a configuration in which the switching control of the filter processing unit 7 / simple filter processing unit 8 in step S1 is switched on a frame-by-frame basis, of course, a configuration in which steps S1 to S6 are repeated may be used.

フィルタ処理部７／簡易フィルタ処理部８の切替え制御を、フレーム単位で切替える構成の場合の異なる適用例として、付加情報Ｎとして画像サイズではなく、可変長符号復号部２より復号中のフレーム番号を付加情報Ｎとして再生速度制御部１に入力して用いる場合について説明する。
例えば、フィルタ処理部７、簡易フィルタ処理部８でそれぞれ処理可能な再生速度の限界値として、Ｓｍａｘ＝１，Ｓ′ｍａｘ＝３の場合、
ＴＨ＝１.５＋（Ｎｍｏｄ２）
とすれば、付加情報Ｎのフレーム番号の偶数・奇数に応じて、閾値ＴＨが、１.５、２.５，１.５、２.５、…とフレーム毎に交互に変化する。９ As a different application example in the case where the switching control of the filter processing unit 7 / simple filter processing unit 8 is switched in frame units, the additional information N is not the image size but the frame number being decoded by the variable length code decoding unit 2 as the additional information N. A case where the additional information N is input to the reproduction speed control unit 1 and used will be described.
For example, when Smax = 1 and S′max = 3 as the limit values of the reproduction speed that can be processed by the filter processing unit 7 and the simple filter processing unit 8, respectively,
TH = 1.5 + (N mod2)
Then, according to the even number / odd number of the frame number of the additional information N, the threshold value TH alternately changes to 1.5, 2.5, 1.5, 2.5,. 9

従って、外部から指定される再生速度情報Ｓが通常再生（Ｓ＝１）の場合は、常にフィルタ処理部７が選択され、２倍速再生（Ｓ＝２）の場合は、１フレーム毎に、交互に、フィルタ処理部７、簡易フィルタ処理部８が選択され、また、３倍速再生（Ｓ＝３）の場合には、常に簡易フィルタ選択部８が選択される。 Therefore, when the playback speed information S designated from the outside is normal playback (S = 1), the filter processing unit 7 is always selected, and when the playback speed information S is double speed playback (S = 2), it is alternately displayed every frame. In addition, the filter processing unit 7 and the simple filter processing unit 8 are selected, and the simple filter selection unit 8 is always selected in the case of triple speed reproduction (S = 3).

このような構成とすることにより、再生速度情報Ｓに応じて段階的にフィルタ処理の切替えを行なうことが可能となる。その結果、比較的低速な再生速度での画質劣化を最小限に抑えることが可能である。 By adopting such a configuration, it becomes possible to switch the filter processing step by step according to the reproduction speed information S. As a result, it is possible to minimize image quality degradation at a relatively low playback speed.

また、フレームを水平・垂直方向にそれぞれＨ画素・Ｖ画素からなる矩形ブロック単位で復号処理が行なわれる場合、ステップＳ１における切替え制御は、このブロック単位で切替える構成としても構わない。
この場合、可変長符号復号部２から復号中のブロック位置を示す識別子を付加情報Ｎとして再生速度制御部１に入力する。例えば、動画再生中に注目の集まり易い画面中央の領域では閾値ＴＨを大きく、その他の領域では閾値ＴＨを小さく設定することにより、画面中央では常にフィルタ処理部７が選択され、その他の領域では常に簡易フィルタ処理部８が選択され、ユーザの主観的な画質劣化を抑えた高速再生が可能となる。 Further, when decoding processing is performed in units of rectangular blocks each composed of H pixels and V pixels in the horizontal and vertical directions, the switching control in step S1 may be configured to switch in units of blocks.
In this case, an identifier indicating the block position being decoded is input from the variable length code decoding unit 2 to the playback speed control unit 1 as additional information N. For example, by setting the threshold value TH to be large in an area at the center of the screen that is likely to attract attention during video playback, and setting the threshold value TH to be small in other areas, the filter processing unit 7 is always selected in the center of the screen, and always in other areas. The simple filter processing unit 8 is selected, and high-speed reproduction is possible while suppressing subjective image quality degradation of the user.

あるいは、フレーム間予測で用いられる動きベクトルの大きさを付加情報Ｎとして用いれば、動画再生中に注目の集まる動きの大きい領域では閾値ＴＨを大きく、その他の領域では閾値ＴＨを小さく設定することにより、動きの大きい領域では常にフィルタ処理部７が選択され、動きが小さい領域では常に簡易フィルタ処理部８が選択され、同様に、ユーザの主観的な画質劣化を抑えた高速再生が可能である。 Alternatively, if the magnitude of the motion vector used in inter-frame prediction is used as the additional information N, the threshold value TH is set to be large in a region with a large amount of attention gathered during video reproduction, and the threshold value TH is set to be small in other regions. The filter processing unit 7 is always selected in a region where the motion is large, and the simple filter processing unit 8 is always selected in the region where the motion is small, and similarly, high-speed reproduction is possible while suppressing the subjective image quality degradation of the user.

あるいは、予測モードを付加情報Ｎとして用いて、フレーム内予測を用いた領域では閾値ＴＨを大きく、フレーム間予測を用いた領域では閾値ＴＨを小さく設定することにより、フレーム内予測を用いた領域では常にフィルタ処理部７が選択され、フレーム間予測を用いた領域では常に簡易フィルタ処理部８が選択され、画質に対する影響が大きいフレーム内予測を行なう領域での画質劣化を抑えることが可能である。 Alternatively, the prediction mode is used as the additional information N, and the threshold TH is set large in the region using the intraframe prediction, and the threshold TH is set small in the region using the interframe prediction. The filter processing unit 7 is always selected, and the simple filter processing unit 8 is always selected in an area using inter-frame prediction, so that it is possible to suppress image quality deterioration in an area where intra-frame prediction that has a large influence on image quality is performed.

次に、簡易フィルタ処理部８について説明する。一般に、フィルタ処理部７では、座標（ｘ，ｙ）における入力画像の画素値Ｐ_fin（ｘ，ｙ）、出力画像の画素値Ｐ_fout（ｘ，ｙ）としたとき、次式の式（１）で表されるフィルタ処理が行なわれる。 Next, the simple filter processing unit 8 will be described. In general, in the filter processing unit 7, when the pixel value P _fin (x, y) of the input image and the pixel value P _fout (x, y) of the output image at coordinates (x, y) are used, the following equation (1) ) Is performed.

ここで、Ｗ_f（ｘ，ｙ，ｉ，ｊ）及びｍ，ｎは、用いる動画像符号化方式によって定められるフィルタ係数及び定数である。
同様に、簡易フィルタ処理部８では、出力画像の画素値Ｐ′_fout（ｘ，ｙ）としたとき、次式の式（２）で表される簡略化されたフィルタ処理が行なわれる。 Here, W _f (x, y, i, j) and m, n are filter coefficients and constants determined by the moving picture encoding method to be used.
Similarly, the simplified filter processing unit 8 performs simplified filter processing represented by the following equation (2) when the pixel value P ′ _fout (x, y) of the output image is used.

ここで、ｍ′，ｎ′は、ｍ′≦ｍ，ｎ′≦ｎを満たす定数である。例えば、ｍ＝ｎ＝３，ｍ′＝ｎ′＝１の場合、フィルタ処理部７では、１画素当り、４９回の乗算と４８回の加算が必要となるが、簡易フィルタ処理部８では、１画素当り、９回の乗算と８回の加算で処理が可能である。
また、フィルタ係数Ｗ′_f（ｘ，ｙ，ｉ，ｊ）は、予めシミュレーション等によってフィルタ処理部７でのフィルタ処理の特性に近い係数を定める。 Here, m ′ and n ′ are constants that satisfy m ′ ≦ m and n ′ ≦ n. For example, when m = n = 3 and m ′ = n ′ = 1, the filter processing unit 7 requires 49 multiplications and 48 additions per pixel, but the simple filter processing unit 8 Each pixel can be processed with 9 multiplications and 8 additions.
Further, the filter coefficient W ′ _f (x, y, i, j) is a coefficient close to the characteristics of the filter processing in the filter processing unit 7 in advance by simulation or the like.

なお、ｍ′＝ｎ′＝０，Ｗ′_ｆ（ｘ，ｙ，ｉ，ｊ）＝１とした場合は、
Ｐ′_fout（ｘ，ｙ）＝Ｐ_fin（ｘ，ｙ）
となる。この場合には、簡易フィルタ処理部８を省略した構成としても構わない。 When m ′ = n ′ = 0 and W ′ _f (x, y, i, j) = 1,
P ′ _fout (x, y) = P _fin (x, y)
It becomes. In this case, the simple filter processing unit 8 may be omitted.

以上説明したように、本実施形態の動画像再生装置２０では、フィルタ処理部７／簡易フィルタ処理部８の切替えにより、復号に必要な演算量を削減することになり、動きの滑らかな高速再生が可能となる。なお、図２に示す動画像再生装置２１についても、図１に示す動画像再生装置２０の場合と全く同様である。 As described above, in the moving image reproduction device 20 of the present embodiment, the amount of calculation required for decoding is reduced by switching between the filter processing unit 7 and the simple filter processing unit 8, and high-speed reproduction with smooth motion is achieved. Is possible. Note that the moving image playback device 21 shown in FIG. 2 is exactly the same as the moving image playback device 20 shown in FIG.

（実施形態２）
図３は、本発明の実施形態２における動画像再生装置のブロック図である。図３に示す動画像再生装置２２において、１１は、逆変換部４とは異なる演算量の少ない簡易な方法で差分画像を生成する簡易逆変換部、１０ｃは、入力データの出力先を切替える出力切替スイッチである。その他の要素については、図１に示す実施形態１の動画像再生装置２０と同一の要素であり、図１の場合と同一符号を付与し、その説明を省略する。なお、図３に示す動画像再生装置２２においては、図１に示す実施形態１の動画像再生装置２０の簡易フィルタ処理部８及び出力切替スイッチ１０ｂを削除し、その代わり、前述の簡易逆変換部１１及び出力切替スイッチ１０ｃを備えて構成している。 (Embodiment 2)
FIG. 3 is a block diagram of a moving image playback apparatus in Embodiment 2 of the present invention. In the moving image reproduction device 22 shown in FIG. 3, 11 is a simple inverse transform unit that generates a difference image by a simple method with a small amount of calculation different from the inverse transform unit 4, and 10c is an output for switching the output destination of input data. It is a changeover switch. The other elements are the same as those in the moving image reproduction apparatus 20 of the first embodiment shown in FIG. 1, and the same reference numerals as those in FIG. In the moving image reproduction device 22 shown in FIG. 3, the simple filter processing unit 8 and the output changeover switch 10b of the moving image reproduction device 20 of the first embodiment shown in FIG. The unit 11 and the output changeover switch 10c are provided.

次に、図３に示す本実施形態における動画像再生装置２２の動作について説明する。なお、本実施形態の動画像再生装置２２の動作は、実施形態１の動画像再生装置２０の動作説明において、（ステップＳ１）のフィルタ処理部７／簡易フィルタ処理部８の切替え制御が、逆変換部３／簡易逆変換部１１の切替え制御に置き変わる点を除いて、実施形態１の動画像再生装置２０の動作と同じであり、詳細な説明は省略する。また、逆変換部３、簡易逆変換部１１の切替え制御を、フレーム単位、あるいは、ブロック単位とした構成も可能である点も実施形態１の動画像再生装置２０と同様である。 Next, the operation of the moving image playback device 22 in this embodiment shown in FIG. 3 will be described. The operation of the moving image reproduction device 22 of the present embodiment is the reverse of the switching control of the filter processing unit 7 / simple filter processing unit 8 in (Step S1) in the description of the operation of the moving image reproduction device 20 of the first embodiment. Except for the point that it is replaced with the switching control of the conversion unit 3 / simple reverse conversion unit 11, the operation is the same as that of the moving image reproduction apparatus 20 of the first embodiment, and detailed description thereof is omitted. Further, the switching control of the inverse transform unit 3 and the simple inverse transform unit 11 can be configured in units of frames or blocks, which is the same as that of the moving image reproduction apparatus 20 of the first embodiment.

なお、本実施形態の動画像再生装置２２は、取り扱う動画像符号化方式において、逆変換による差分画像生成処理が、他の復号処理に比べ、膨大な演算量を必要とする場合に、特に有効である。 Note that the moving image reproduction device 22 of the present embodiment is particularly effective when the difference image generation processing by inverse transformation requires a huge amount of calculation compared to other decoding processing in the moving image encoding method to be handled. It is.

次に、簡易逆変換部１１について説明する。一般に、逆変換部３では、ＭＰＥＧ等の動画像符号化方式の場合、次式の式（３）で表される逆離散コサイン変換（ＩＤＣＴ）が行なわれる。 Next, the simple inverse transform unit 11 will be described. In general, the inverse transform unit 3 performs inverse discrete cosine transform (IDCT) represented by the following equation (3) in the case of a moving image coding method such as MPEG.

なお、Ｐ_diff（ｘ，ｙ）は、逆変換によって生成される差分画像の画素値、Ｆ（ｉ，ｊ）はＤＣＴ係数、Ｃ（ｉ，ｊ）は所定の定数である。
簡易逆変換部１１では、人間の視覚特性を利用し、画質劣化を認識し難い高周波成分のＤＣＴ係数を０とみなすことで簡略化を行なう。例えば、
Ｆ（ｉ，ｊ）＝０：ｉ≧４，ｊ≧４
とするとき、簡易逆変換部１１における逆変換は、次式の式（４）で表される。 P _diff (x, y) is a pixel value of a difference image generated by inverse transformation, F (i, j) is a DCT coefficient, and C (i, j) is a predetermined constant.
The simple inverse transform unit 11 performs simplification by using a human visual characteristic and considering the DCT coefficient of a high frequency component that is difficult to recognize image quality deterioration as 0. For example,
F (i, j) = 0: i ≧ 4, j ≧ 4
Then, the inverse transformation in the simple inverse transformation unit 11 is expressed by the following equation (4).

なお、Ｐ′_diff（ｘ，ｙ）は、逆変換によって生成される差分画像の画素値である。
以上のような簡略化を行なうことにより、演算量を抑えた簡易逆変換が可能である。前述の説明では、動画像符号化方式として所定の逆変換がＩＤＣＴの場合について説明したが、離散フーリエ変換、ハール変換、アダマール変換等、その他の直交変換を用いる場合にも、同様の方法が適応可能である。 Note that P ′ _diff (x, y) is a pixel value of a difference image generated by inverse transformation.
By performing the simplification as described above, it is possible to perform simple reverse conversion with a reduced amount of calculation. In the above description, the case where the predetermined inverse transform is IDCT has been described as the moving image coding method, but the same method can be applied to other orthogonal transforms such as discrete Fourier transform, Haar transform, Hadamard transform, and the like. Is possible.

以上説明したように、本実施形態の動画像再生装置２２では、逆変換部４／簡易逆変換部１１の切替えにより、復号に必要な演算量を削減することで、動きの滑らかな高速再生が可能である。 As described above, in the moving image playback device 22 of the present embodiment, high-speed playback with smooth motion is achieved by reducing the amount of computation required for decoding by switching between the inverse transform unit 4 and the simple inverse transform unit 11. Is possible.

（実施形態３）
図４は、本発明の実施形態３における動画像再生装置のブロック図である。図４に示す動画像再生装置２３において、１２は、フレーム間予測画像生成部５とは異なる演算量の少ない簡易な方法でフレーム間予測画像を生成する簡易フレーム間予測画像生成部、１０ｄは、入力データの出力先を切替える出力切替スイッチである。その他の要素については、図１に示す実施形態１の動画像再生装置２０と同一の要素であり、図１の場合と同一符号を付与し、その説明を省略する。なお、図４に示す動画像再生装置２３においては、図１に示す実施形態１の動画像再生装置２０の簡易フィルタ処理部８及び出力切替スイッチ１０ｂを削除し、その代わり、前述の簡易フレーム間予測画像生成部１２及び出力切替スイッチ１０ｄを備えて構成している。 (Embodiment 3)
FIG. 4 is a block diagram of a moving image playback apparatus in Embodiment 3 of the present invention. In the moving image reproduction device 23 shown in FIG. 4, 12 is a simple inter-frame prediction image generation unit that generates an inter-frame prediction image by a simple method with a small amount of calculation different from the inter-frame prediction image generation unit 5. This is an output changeover switch for changing the output destination of input data. The other elements are the same as those in the moving image reproduction apparatus 20 of the first embodiment shown in FIG. 1, and the same reference numerals as those in FIG. In the moving picture reproduction device 23 shown in FIG. 4, the simple filter processing unit 8 and the output changeover switch 10b of the moving picture reproduction device 20 of the first embodiment shown in FIG. The prediction image generation unit 12 and the output changeover switch 10d are provided.

次に、図４に示す本実施形態における動画像再生装置２３の動作について説明する。なお、本実施形態の動画像再生装置２３の動作は、実施形態１の動画像再生装置２０の動作説明において、（ステップＳ１）のフィルタ処理部７／簡易フィルタ処理部８の切替え制御が、フレーム間予測画像生成部５／簡易フレーム間予測画像生成部１２の切替え制御に置き変わる点を除いて、実施形態１の動画像再生装置２０の動作と同じであり、詳細な説明は省略する。また、フレーム間予測画像生成部５、簡易フレーム間予測画像生成部１２の切替え制御を、フレーム単位、あるいは、ブロック単位とした構成が可能である点も実施形態１の動画像再生装置２０と同様である。 Next, the operation of the moving image playback device 23 in the present embodiment shown in FIG. 4 will be described. Note that the operation of the moving image playback device 23 of the present embodiment is the same as the operation of the moving image playback device 20 of the first embodiment except that the switching control of the filter processing unit 7 / simple filter processing unit 8 in (Step S1) The operation is the same as that of the moving image playback apparatus 20 of the first embodiment except that it is replaced by switching control between the inter prediction image generation unit 5 and the simple inter frame prediction image generation unit 12, and detailed description thereof is omitted. In addition, the switching control of the inter-frame prediction image generation unit 5 and the simple inter-frame prediction image generation unit 12 can be configured in units of frames or blocks as in the moving image reproduction device 20 of the first embodiment. It is.

なお、本実施形態の動画像再生装置２３は、取り扱う動画像符号化方式において、フレーム間予測画像の生成処理が、他の復号処理に比べ、膨大な演算量を必要とする場合に、特に有効である。 Note that the moving image playback device 23 of the present embodiment is particularly effective when the inter-frame prediction image generation process requires a large amount of computation compared to other decoding processes in the moving image encoding method to be handled. It is.

次に、簡易フレーム間予測画像生成部１２について説明する。一般に、座標（ｘ，ｙ）における予測画像Ｐ_pred（ｘ，ｙ）と予測に用いる参照画像Ｐ_ref（ｘ′，ｙ′）との関係は次式の式（５）で表される。 Next, the simple inter-frame prediction image generation unit 12 will be described. In general, the relationship between the predicted image P _pred (x, y) at the coordinates (x, y) and the reference image P _ref (x ′, y ′) used for prediction is expressed by the following equation (5).

ここで、（ｘ′，ｙ′）は、非整数精度の座標値を示し、フレーム間予測画像生成部５において、Ｐ_ref（ｘ′，ｙ′）は、近傍画素の画素値を用いた補間によって、次式の式（６）の通り求められる。 Here, (x ′, y ′) represents a non-integer precision coordinate value, and P _ref (x ′, y ′) is an interpolation using pixel values of neighboring pixels in the inter-frame predicted image generation unit 5. Thus, the following equation (6) is obtained.

ここで、
ｘ′＝Ｘ＋ｘ₀，ｙ′＝Ｙ＋ｙ₀
とし、
Ｘ，Ｙは、それぞれ、ｘ′，ｙ′の整数パート、
ｘ₀，ｙ₀は、それぞれ、ｘ′，ｙ′の非整数パート
を表す。
また、Ｗ_I（ｘ₀，ｙ₀，ｉ，ｊ）及びｍ，ｎは、用いる動画像符号化方式によって定められる重み係数及び定数である。 here,
x ′ = X + x ₀ , y ′ = Y + y ₀
age,
X and Y are integer parts of x ′ and y ′,
x ₀ and y ₀ represent non-integer parts of x ′ and y ′, respectively.
W _I (x ₀ , y ₀ , i, j) and m, n are weighting factors and constants determined by the moving picture coding method to be used.

同様に、簡易フレーム間予測画像生成部１２では、補間画像Ｐ′_ref（ｘ′，ｙ′）が、次式の式（７）の通り求められる。 Similarly, in the simplified inter-frame prediction image generation unit 12, an interpolated image P ′ _ref (x ′, y ′) is obtained as the following equation (7).

ここで、ｍ′，ｎ′は、ｍ′≦ｍ，ｎ′≦ｎを満たす定数である。例えば、ｍ＝ｎ＝３，ｍ′＝ｎ′＝１の場合、フレーム間予測画像生成部５では、補間画像の計算に、１画素当り、３６回の乗算と３５回の加算が必要となるが、簡易フレーム間予測画像生成部１２では、１画素当り、４回の乗算と３回の加算で処理が可能である。また、重み係数Ｗ′_I（ｘ₀，ｙ₀，ｉ，ｊ）は、予めシミュレーション等によってフレーム間予測画像生成部４での補間特性に近い重み係数を定める。
例えば、ｍ′＝ｎ′＝１の場合、次の式（８）に示すように、 Here, m ′ and n ′ are constants that satisfy m ′ ≦ m and n ′ ≦ n. For example, when m = n = 3 and m ′ = n ′ = 1, the inter-frame prediction image generation unit 5 requires 36 multiplications and 35 additions per pixel for calculation of the interpolation image. However, the simplified inter-frame prediction image generation unit 12 can perform processing by four multiplications and three additions per pixel. Further, the weighting factor W ′ _I (x ₀ , y ₀ , i, j) is determined in advance by a simulation or the like that is close to the interpolation characteristic in the inter-frame predicted image generation unit 4.
For example, when m ′ = n ′ = 1, as shown in the following equation (8):

とすれば、近傍４画素の線形補間により求められた補間画像Ｐ′_ref（ｘ′，ｙ′）により、予測画像が生成される。 Then, a predicted image is generated from the interpolated image P ′ _ref (x ′, y ′) obtained by linear interpolation of four neighboring pixels.

以上説明したように、本実施形態の動画像再生装置２３では、フレーム間予測画像生成部５、簡易フレーム間予測画像生成部１２の切替えにより、復号に必要な演算量を削減することで、動きの滑らかな高速再生が可能である。 As described above, in the moving image reproduction device 23 of the present embodiment, the motion amount is reduced by reducing the amount of calculation necessary for decoding by switching between the inter-frame predicted image generation unit 5 and the simple inter-frame prediction image generation unit 12. Smooth high-speed playback is possible.

（実施形態４）
図５は、本発明の実施形態４における動画像再生装置のブロック図である。図５に示す動画像再生装置２４は、実施形態１の動画像再生装置２０及び実施形態２の動画像再生装置２２の構成要素を全て備えて構成されている。
実施形態１及び２における動画像再生装置２０及び２２では、高速再生時の画質劣化の特性がそれぞれ異なる。実施形態１の動画像再生装置２０では、フィルタ処理による符号化歪除去の効果が高い低ビットレートの動画像での画質劣化が、実施形態２の動画像再生装置２２では、高周波数成分の発生頻度が高い高ビットレートの動画像での画質劣化が、それぞれ顕著となる傾向がある。 (Embodiment 4)
FIG. 5 is a block diagram of a moving image playback apparatus in Embodiment 4 of the present invention. The moving image reproduction device 24 shown in FIG. 5 includes all the components of the moving image reproduction device 20 of the first embodiment and the moving image reproduction device 22 of the second embodiment.
In the moving image reproducing apparatuses 20 and 22 in the first and second embodiments, the characteristics of image quality deterioration during high-speed reproduction are different. In the moving image playback device 20 of the first embodiment, image quality degradation in a low bit rate moving image that is highly effective in removing the coding distortion by the filter processing occurs, and in the moving image playback device 22 of the second embodiment, high frequency components are generated. There is a tendency for image quality deterioration in high-frequency moving images with high frequency to be remarkable.

一方、本実施形態の動画像再生装置２４では、フィルタ処理部７／簡易フィルタ処理部８、逆変換部４／簡易逆変換部１１のそれぞれの切替えを、出力切替スイッチ１０ｂ、１０ｃにより入力符号化データの特性に応じて適応的に行なうことで、高速再生時の画質劣化を抑えることを特徴としている。 On the other hand, in the moving image reproduction device 24 of the present embodiment, the switching between the filter processing unit 7 / simple filter processing unit 8 and the inverse transform unit 4 / simple inverse transform unit 11 is input encoded by the output selector switches 10b and 10c. It is characterized by suppressing deterioration in image quality during high-speed playback by performing adaptively according to data characteristics.

次に、本実施形態の動画像再生装置２４の動作について説明する。なお、基本的な動作は、実施形態１、２の動画像再生装置２０、２２と同じであり、再生速度制御部１の制御動作についてのみ説明する。以下の説明では、実施形態１の場合と同様に、入力された再生速度情報Ｓに対する所定の閾値ＴＨを用いると共に、符号化データのビットレートを付加情報Ｎとし、付加情報Ｎに対する所定の閾値ＴＨｒを用いる。なお、閾値ＴＨｒは、予め最適な値をシミュレーション等により定めるものとする。 Next, the operation of the moving image playback device 24 of this embodiment will be described. The basic operation is the same as that of the moving image playback apparatuses 20 and 22 of the first and second embodiments, and only the control operation of the playback speed control unit 1 will be described. In the following description, as in the case of the first embodiment, the predetermined threshold TH for the input reproduction speed information S is used, the bit rate of the encoded data is set as additional information N, and the predetermined threshold THr for additional information N is used. Is used. Note that the threshold value THr is determined in advance as an optimal value by simulation or the like.

（１）Ｓ＜ＴＨの場合
フィルタ処理部７、逆変換部４を、それぞれ出力先に選択する。
（２）Ｓ≧ＴＨの場合
（２．１）Ｎ＜ＴＨｒの場合
フィルタ処理部７、簡易逆変換部１１を、それぞれ出力先に選択する。
（２．２）Ｎ≧ＴＨｒの場合
簡易フィルタ処理部８、逆変換部４を、それぞれ出力先に選択する。 (1) When S <TH The filter processing unit 7 and the inverse conversion unit 4 are selected as output destinations.
(2) When S ≧ TH (2.1) When N <THr The filter processing unit 7 and the simple inverse transform unit 11 are selected as output destinations, respectively.
(2.2) When N ≧ THr The simple filter processing unit 8 and the inverse conversion unit 4 are selected as output destinations.

以上のような制御を行なうことで、高速再生時の画質劣化を抑えることが可能である。
なお、前述の説明では、簡易フィルタ処理部８、簡易逆変換部１１についてはいずれか一方のみの使用としているが、前記（２．１）、（２．２）の場合では、それぞれ、少なくとも、逆変換部４ではなく簡易逆変換部１１を、フィルタ処理部７ではなく簡易フィルタ処理部８を用いることとし、いずれか一方の使用のみでは対応できないような高い再生速度での高速再生を行なう場合には、簡易フィルタ処理部８、簡易逆変換部１１の両方を同時に使用する構成としても構わない。 By performing the control as described above, it is possible to suppress deterioration in image quality during high-speed playback.
In the above description, only one of the simple filter processing unit 8 and the simple inverse transform unit 11 is used. However, in the cases (2.1) and (2.2), at least, When the simple inverse conversion unit 11 is used instead of the inverse conversion unit 4 and the simple filter processing unit 8 is used instead of the filter processing unit 7 and high-speed reproduction is performed at a high reproduction speed that cannot be handled only by using one of them. Alternatively, both the simple filter processing unit 8 and the simple inverse transform unit 11 may be used at the same time.

また、実施形態３で説明した簡易フレーム間予測画像生成部１２を加えた図６の構成としても構わない。ここに、図６は本発明の実施形態４の別形態の動画像再生装置のブロック図である。この図６に示す動画像再生装置２５の場合、例えば、ビットレートＮに応じて、低ビットレートの符号化データでは、簡易逆変換部１１を、中ビットレートの符号化データでは、簡易フレーム間予測画像生成部１２を、高ビットレートの符号化データでは、簡易フィルタ処理部８を、それぞれ用いた高速再生を行なう構成とすることができる。 6 may be added to the simplified inter-frame prediction image generation unit 12 described in the third embodiment. FIG. 6 is a block diagram of a moving image reproducing apparatus according to another embodiment of the fourth embodiment of the present invention. In the case of the moving image reproducing device 25 shown in FIG. 6, for example, according to the bit rate N, the simplified inverse transform unit 11 is used for encoded data at a low bit rate, and between simplified frames is used for encoded data at a medium bit rate. The prediction image generation unit 12 can be configured to perform high-speed reproduction using the simple filter processing unit 8 with high-bit-rate encoded data.

即ち、図５の動画像再生装置２４の場合と同様に、入力された再生速度情報Ｓに対する所定の閾値ＴＨを用いると共に、符号化データのビットレートを付加情報Ｎとし、付加情報Ｎに対する所定の閾値ＴＨｒ、ＴＨｒ′を用いる。なお、閾値ＴＨｒ、ＴＨｒ′は、予め最適な値をシミュレーション等により定めるものとする。 That is, as in the case of the moving image playback device 24 of FIG. 5, a predetermined threshold TH for the input playback speed information S is used, the bit rate of the encoded data is set as additional information N, and a predetermined threshold for the additional information N is set. Threshold values THr and THr ′ are used. The threshold values THr and THr ′ are determined in advance by simulation or the like.

（１）Ｓ＜ＴＨの場合
フィルタ処理部７、逆変換部４及びフレーム間予測画像生成部５を、それぞれ出力
先に選択する。
（２）Ｓ≧ＴＨの場合
（２．１）Ｎ＜ＴＨｒの場合
フィルタ処理部７、簡易逆変換部１１及びフレーム間予測画像生成部５を、それぞ
れ出力先に選択する。
（２．２）ＴＨｒ≦Ｎ＜ＴＨｒ′の場合
フィルタ処理部８、逆変換部４及び簡易フレーム間予測画像生成部１２を、それぞ
れ出力先に選択する。
（２．３）Ｎ≧ＴＨｒ′の場合
簡易フィルタ処理部８、逆変換部４及びフレーム間予測画像生成部５を、それぞれ
出力先に選択する。 (1) When S <TH The filter processing unit 7, the inverse transform unit 4, and the inter-frame predicted image generation unit 5 are selected as output destinations.
(2) When S ≧ TH (2.1) When N <THr The filter processing unit 7, the simple inverse transform unit 11, and the inter-frame predicted image generation unit 5 are selected as output destinations.
(2.2) When THr ≦ N <THr ′ The filter processing unit 8, the inverse transform unit 4, and the simple inter-frame prediction image generation unit 12 are selected as output destinations.
(2.3) When N ≧ THr ′ The simple filter processing unit 8, the inverse transform unit 4, and the inter-frame prediction image generation unit 5 are selected as output destinations.

なお、前述の説明では、簡易フィルタ処理部８、簡易逆変換部１１及び簡易フレーム間予測画像生成部１２についてはいずれか一つのみの使用としているが、前記（２．１）、（２．２．１）、（２．２．２）の場合では、それぞれ、少なくとも、逆変換部４ではなく簡易逆変換部１１を、フレーム間予測画像生成部５ではなく簡易フレーム間予測画像生成部１２を、フィルタ処理部７ではなく簡易フィルタ処理部８を用いることとし、いずれか一つの使用のみでは対応できないような高い再生速度での高速再生を行なう場合には、簡易フィルタ処理部８、簡易逆変換部１１及び簡易フレーム間予測画像生成部１２のうちの複数を同時に使用する構成としても構わない。 In the above description, only one of the simple filter processing unit 8, the simple inverse conversion unit 11, and the simple inter-frame prediction image generation unit 12 is used. However, the above (2.1), (2. 2.1) and (2.2.2), at least the simple inverse transform unit 11 instead of the inverse transform unit 4 and the simple inter-frame predicted image generation unit 12 instead of the inter-frame predicted image generation unit 5, respectively. If the simple filter processing unit 8 is used instead of the filter processing unit 7 and high-speed reproduction is performed at a high reproduction speed that cannot be dealt with only by using one of them, the simple filter processing unit 8 A plurality of the conversion unit 11 and the simplified inter-frame prediction image generation unit 12 may be used at the same time.

あるいは、動きの小さい領域では、簡易フレーム間予測画像生成部１２を、動きの大きい領域では、ビットレートに応じて、低ビットレートの場合は、簡易逆変換部１１を、高ビットレートの場合は、簡易フィルタ処理部８を、それぞれ用いた高速再生を行なう構成としても構わない。 Alternatively, the simplified inter-frame prediction image generation unit 12 is used in a region where the motion is small, the simple inverse transform unit 11 is used in the case of a low bit rate, and the simple inverse conversion unit 11 is used in a case of a high bit rate. The simple filter processing unit 8 may be configured to perform high-speed reproduction using each.

即ち、図５の動画像再生装置２４の場合と同様に、入力された再生速度情報Ｓに対する所定の閾値ＴＨを用いると共に、符号化データのビットレートを付加情報Ｎとし、付加情報Ｎに対する所定の閾値ＴＨｒを用い、更に、フレーム間予測で用いられる動きベクトルの大きさを付加情報Ｎ１とし、付加情報Ｎ１に対する所定の閾値ＴＨｒ１を用いる。なお、閾値ＴＨｒ，ＴＨｒ１は、予め最適な値をシミュレーション等により定めるものとする。 That is, as in the case of the moving image playback device 24 of FIG. 5, a predetermined threshold TH for the input playback speed information S is used, the bit rate of the encoded data is set as additional information N, and a predetermined threshold for the additional information N is set. The threshold THr is used, and the magnitude of a motion vector used in inter-frame prediction is set as additional information N1, and a predetermined threshold THr1 for the additional information N1 is used. Note that optimum values for the thresholds THr and THr1 are determined in advance by simulation or the like.

（１）Ｓ＜ＴＨの場合
フィルタ処理部７、逆変換部４及びフレーム間予測画像生成部５を、それぞれ出力
先に選択する。
（２）Ｓ≧ＴＨの場合
（２．１）Ｎ１＜ＴＨｒ１の場合
フィルタ処理部７、逆変換部４及び簡易フレーム間予測画像生成部１２を、それぞ
れ出力先に選択する。
（２．２）Ｎ１≧ＴＨｒ１の場合
（２．２．１）Ｎ＜ＴＨｒの場合
フィルタ処理部７、簡易逆変換部１１及びフレーム間予測画像生成部５を、それぞ
れ出力先に選択する。
（２．２．２）Ｎ≧ＴＨｒの場合
簡易フィルタ処理部８、逆変換部４及びフレーム間予測画像生成部５を、それぞれ
出力先に選択する。 (1) When S <TH The filter processing unit 7, the inverse transform unit 4, and the inter-frame predicted image generation unit 5 are selected as output destinations.
(2) When S ≧ TH (2.1) When N1 <THr1 The filter processing unit 7, the inverse transform unit 4, and the simplified inter-frame prediction image generation unit 12 are selected as output destinations.
(2.2) In the case of N1 ≧ THr1 (2.2.1) In the case of N <THr The filter processing unit 7, the simple inverse transformation unit 11, and the inter-frame prediction image generation unit 5 are selected as output destinations, respectively. .
(2.2.2) When N ≧ THr The simple filter processing unit 8, the inverse transform unit 4, and the inter-frame predicted image generation unit 5 are selected as output destinations.

なお、前述の説明では、簡易フィルタ処理部８、簡易逆変換部１１及び簡易フレーム間予測画像生成部１２についてはいずれか一つのみの使用としているが、前記（２．１）、（２．２．１）、（２．２．２）の場合では、それぞれ、少なくとも、フレーム間予測画像生成部５ではなく簡易フレーム間予測画像生成部１２を、逆変換部４ではなく簡易逆変換部１１を、フィルタ処理部７ではなく簡易フィルタ処理部８を用いることとし、いずれか一つの使用のみでは対応できないような高い再生速度での高速再生を行なう場合には、簡易フィルタ処理部８、簡易逆変換部１１及び簡易フレーム間予測画像生成部１２のうちの複数を同時に使用する構成としても構わない。 In the above description, only one of the simple filter processing unit 8, the simple inverse conversion unit 11, and the simple inter-frame prediction image generation unit 12 is used. However, the above (2.1), (2. 2.1) and (2.2.2), at least the inter-frame prediction image generation unit 12 instead of the inter-frame prediction image generation unit 5, and the simple inverse conversion unit 11 instead of the inverse conversion unit 4. If the simple filter processing unit 8 is used instead of the filter processing unit 7 and high-speed reproduction is performed at a high reproduction speed that cannot be dealt with only by using one of them, the simple filter processing unit 8 A plurality of the conversion unit 11 and the simplified inter-frame prediction image generation unit 12 may be used at the same time.

以上説明したように、本実施形態の動画像再生装置２４，２５では、入力符号化データの特性に応じた制御を行なうことで、高速再生時の画質劣化を抑えることが可能である。 As described above, in the moving image reproduction devices 24 and 25 of the present embodiment, it is possible to suppress image quality deterioration during high-speed reproduction by performing control according to the characteristics of the input encoded data.

本発明の実施形態１における動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device in Embodiment 1 of the present invention. 本発明の実施形態１の別形態の動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device of another form of Embodiment 1 of this invention. 本発明の実施形態２における動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device in Embodiment 2 of the present invention. 本発明の実施形態３における動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device in Embodiment 3 of the present invention. 本発明の実施形態４における動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device in Embodiment 4 of the present invention. 本発明の実施形態４の別形態の動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing device of another form of Embodiment 4 of this invention. 本発明の実施形態１における動画像再生装置の動作を説明するための動作フロー図である。It is an operation | movement flowchart for demonstrating operation | movement of the moving image reproducing device in Embodiment 1 of this invention. 従来技術における動画像再生装置のブロック図である。It is a block diagram of the moving image reproducing | regenerating apparatus in a prior art.

Explanation of symbols

１…再生速度制御部、２…可変長符号復号部、３…逆量子化部、４…逆変換部、５…フレーム間予測画像生成部、６…フレーム内予測画像生成部、７…フィルタ処理部、８…簡易フィルタ処理部、９…フレームメモリ、１０ａ，１０ｂ，１０ｃ，１０ｄ…出力切替スイッチ、１１…簡易逆変換部、１２…簡易フレーム間予測画像生成部、１３…復号制御部、２０，２１，２２，２３，２４，２５，３０…動画像再生装置。 DESCRIPTION OF SYMBOLS 1 ... Playback speed control part, 2 ... Variable length code decoding part, 3 ... Inverse quantization part, 4 ... Inverse transformation part, 5 ... Inter-frame prediction image generation part, 6 ... Intra-frame prediction image generation part, 7 ... Filter process 8 is a simple filter processing unit, 9 is a frame memory, 10a, 10b, 10c, and 10d are output changeover switches, 11 is a simple inverse conversion unit, 12 is a simple inter-frame prediction image generation unit, and 13 is a decoding control unit. , 21, 22, 23, 24, 25, 30...

Claims

In a moving image reproducing apparatus for reproducing moving image data encoded using a predetermined moving image encoding method,
Predetermined moving image decoding means for performing decoding processing in normal reproduction of the moving image data, simplified moving image decoding means for performing decoding processing simplified by the predetermined moving image decoding means,
When the moving image data is played back at high speed, the additional information related to the moving image data is information indicating the position in the frame of the decoding target block obtained by dividing the frame in the predetermined moving image encoding method into a plurality of blocks. When the distance from the center of the frame of the information to the block is less than a predetermined threshold, the predetermined moving image decoding unit is selected as the decoding unit,
And a playback speed control unit that selects the simplified video decoding unit as the decoding unit when the distance is equal to or greater than a predetermined threshold.