JP2003250160A - Apparatus and method for reducing the number of video frames - Google Patents

Apparatus and method for reducing the number of video frames

Info

Publication number
JP2003250160A
JP2003250160A JP2002046779A JP2002046779A JP2003250160A JP 2003250160 A JP2003250160 A JP 2003250160A JP 2002046779 A JP2002046779 A JP 2002046779A JP 2002046779 A JP2002046779 A JP 2002046779A JP 2003250160 A JP2003250160 A JP 2003250160A
Authority
JP
Japan
Prior art keywords
video
frame
frames
control signal
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002046779A
Other languages
Japanese (ja)
Inventor
Nagahito Narita
長人 成田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2002046779A priority Critical patent/JP2003250160A/en
Publication of JP2003250160A publication Critical patent/JP2003250160A/en
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a method and apparatus for reducing the number of video frames capable of reducing deterioration such as jerkiness and a double image prone to be caused in an edge part with a large motion in reducing the number of video frames. <P>SOLUTION: A deframing section 1 of the apparatus for reducing the number of video frames receiving the number of frames of an input video signal IM outputs a deframing video signal LF on the basis of information indicating the target number of frames. A motion vector calculation section 2 calculates and outputs a motion vector amount MV on the basis of the LF. A motion amount discrimination section 3 outputs a result of discriminating the magnitude of the MV as a control signal SC. A small number of frames video image generating section 4 is provided with a filter that calculates a video image feature among by each macro block from the LF, outputs the result of discrimination as a control signal, and outputs a result of applying filtering processing to the LF depending on the control signal SC, and outputs either of the LF and the filter output as a video output LM with the small number of frames according to the control signal. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】本発明は、映像コマ数削減装
置及び映像コマ数削減方法に係り、特に、一定のフレー
ム（コマ）レートで表示される入力映像信号に含まれる
映像コマの数を削減する映像コマ数削減装置および映像
コマ数削減方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a video frame number reducing device and a video frame number reducing method, and more particularly to reducing the number of video frames included in an input video signal displayed at a constant frame (frame) rate. And a method for reducing the number of video frames.

【０００２】[0002]

【従来の技術】従来、携帯端末やＰＤＡ（Ｐｅｒｓｏｎ
ａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）のような
小さな画面上での映像提供サービスが実施されている。
このような映像提供サービスでは、伝送路の帯域に制限
があるため、例えば、ＭＰＥＧ−４規格による符号化を
行う場合には映像のコマ落とし（映像コマ数の削減）手
段が導入されている。2. Description of the Related Art Conventionally, portable terminals and PDAs (Persons)
An image providing service on a small screen such as al Digital Assistant) is being implemented.
In such a video providing service, the band of the transmission path is limited, and therefore, for example, when encoding according to the MPEG-4 standard, a means for dropping a frame of video (reducing the number of video frames) is introduced.

【０００３】一定のフレームレートでの映像表示におけ
る映像コマ数削減手段として、変換先（例えば、受信側
で表示する場合）の映像コマ数に合せて変換元映像を単
純に間引く方法が実施されている。また、映像の動きベ
クトルを利用して、変換元と変換先の変換比に合せて内
挿映像を作成するテレビの方式変換装置（動きベクトル
を利用した映像内挿方式）も提案されており、このよう
な装置は、例えば、文献（「ＨＤＴＶ方式変換装置」、
テレビジョン学会誌、Ｖｏｌ．４８、Ｎｏ．１、ｐｐ．
８４−９４、１９９４，野尻裕司 他）に開示されてい
る。As a means for reducing the number of video frames in the video display at a constant frame rate, a method of simply thinning out the conversion source video according to the number of video frames of the conversion destination (for example, when it is displayed on the receiving side) is implemented. There is. In addition, a television format conversion device (video interpolation method using motion vectors) that creates an interpolated video according to the conversion ratio of the conversion source and the conversion destination by using the motion vector of the video has been proposed, Such a device is disclosed in, for example, a document (“HDTV system conversion device”,
Television Society Journal, Vol. 48, No. 1, pp.
84-94, 1994, Yuji Nojiri et al.).

【０００４】或いは、映像に含まれている被写体の動き
がギクシャクして見えるジャーキネス劣化や、一つの被
写体が微妙にずれて２重に見える２重像劣化を軽減する
方法として、「フレーム周期で時間軸フィルタをフレー
ム（コマ）繰り返し部の前に設ける方法」、即ち、文献
（「時間軸フィルタの画質改善効果に関する心理物理実
験」、テレビジョン学会技術報告、ＶＶＩ３７−１、ｐ
ｐ１９−２４、１９８０，鎧沢勇）に開示されている方
法や、連続する２コマの和を時間経過に伴って比例させ
た「重み」を、線形に変化させて加算して行く（連続す
る２コマの同一番地の画素がスクリーン上で固定され同
一点に結像するようにした）Ｌａｐ Ｄｉｓｓｏｌｖｅ
形のディスプレイが提案されており、例えば、文献
（「低コマ数ディスプレイ方式の動画像画質」、電子通
信学会論文誌、Ｖｏｌ．Ｊ６２−Ｂ、Ｎｏ．７、ｐｐ．
６４４−６５１、１９７９，宮原誠）に開示されてい
る。Alternatively, as a method of reducing jerkiness deterioration in which the motion of an object included in an image appears jerky or double image deterioration in which one object is slightly deviated and doubled, "time in a frame cycle is used. A method of providing an axial filter in front of a frame (frame) repeating section ", that is, a document (" Psychophysical Experiment on Image Quality Improvement Effect of Temporal Filter ", Technical Report of Television Society, VVI 37-1, p.
p19-24, 1980, Isamu Kazawa, and the "weight", which is proportional to the sum of two consecutive frames over time, is linearly changed and added (continuous). Pixels at the same address in two frames are fixed on the screen so that they form an image at the same point. Lap Dissolve
Shaped displays have been proposed, and are described in, for example, the literature ("Moving image quality of low frame number display system", IEICE Transactions, Vol. J62-B, No. 7, pp.
644-651, 1979, Makoto Miyahara).

【０００５】さらに、ＭＰＥＧ−４の符号化・復号化装
置で、発生ビット量がバッファの占有量の規定を超える
と、フレームをスキップする処理を行うものがあり、例
えば、文献（ＭＰＥＧ−４ ＶＭ ソフトウェア、Ｅｕ
ｒｏｐｅａｎ ＡＣＴＳ ｐｒｏｊｅｃｔ ＭｏＭｕＳ
ｙｓ）として開示されている。Further, there is an MPEG-4 encoding / decoding device that performs a process of skipping a frame when the generated bit amount exceeds the stipulation of the buffer occupancy amount. For example, a document (MPEG-4 VM) is used. Software, Eu
ropean ACTS project MoMuS
ys).

【０００６】[0006]

【発明が解決しようとする課題】しかしながら、従来の
単純間引きによる映像コマ数削減方法では、映像コマ数
を削除した後の映像コマ数削減映像を表示する場合、一
定フレームレートで当該映像コマ数削減映像を表示させ
ようとすると、同一の映像コマを繰り返す部分が生じ
る。これにより、同一の映像コマを繰り返す部分では、
各映像コマに含まれる被写体の動きの大きさに比例して
ジャーキネス劣化や２重像劣化が大きくなるため、この
動きの大きい部分を含む映像では大きな画質劣化を生じ
させるという問題がある。However, in the conventional method for reducing the number of video frames by simple thinning, when displaying the video frame number reduced video after deleting the number of video frames, the video frame number reduction is performed at a constant frame rate. When an image is displayed, a part where the same image frame is repeated occurs. As a result, in the part where the same video frame is repeated,
Since jerkiness deterioration and double image deterioration increase in proportion to the magnitude of the movement of the subject included in each image frame, there is a problem that the image including the portion with a large movement causes a large deterioration in image quality.

【０００７】また、動きベクトルを利用した映像内挿方
式も、内挿映像コマを繰り返し提示することにより、被
写体の動きの大きさに比例したジャーキネス劣化や２重
像劣化が生じるので、映像コマ数削減映像を表示させる
場合の画質の劣化は、単純間引きと同程度に生じるとい
う問題がある。In the video interpolation method using motion vectors, the repeated presentation of the interpolated video frames causes jerkiness deterioration and double image deterioration proportional to the magnitude of the motion of the subject. There is a problem that the deterioration of the image quality when displaying the reduced image occurs as much as the simple thinning.

【０００８】さらにまた、フレーム周期で時間軸フィル
タを利用する方法は、ジャーキネス劣化や２重像劣化の
改善と引き換えに被写体の動いている部分にぼけが生じ
るという問題がある。Furthermore, the method of using the time axis filter in the frame period has a problem that blurring occurs in a moving part of the object in exchange for improvement of jerkiness deterioration and double image deterioration.

【０００９】本発明は、以上のような従来の映像コマ数
削減方法における問題点に鑑みてなされたものであり、
映像コマ数削減の際に動きの大きなエッジ部分に生じ易
いジャーキネスや２重像といった劣化を低減することが
できる映像コマ数削減装置および映像コマ数削減方法を
提供することを目的とする。The present invention has been made in view of the above problems in the conventional method of reducing the number of video frames.
An object of the present invention is to provide a video frame number reducing device and a video frame number reducing method capable of reducing deterioration such as jerkiness and double images which are likely to occur in an edge portion having a large movement when reducing the number of video frames.

【００１０】[0010]

【課題を解決するための手段】本発明では前記の課題を
解決するために、請求項１記載の映像コマ数削減装置
は、一定のフレームレートで入力される複数の映像コマ
からなる映像信号の映像コマ数を削減する映像コマ数削
減装置であって、削減する映像コマ数を設定した目標コ
マ数情報に基づいて、前記映像信号の映像コマを抽出し
て、映像コマ抽出映像信号として出力する映像コマ抽出
映像信号出力手段と、この映像コマ抽出映像信号出力手
段によって出力された映像コマ抽出映像信号から、各映
像コマを所定領域に分割したマクロブロック毎の動きベ
クトル量を算出する動きベクトル量算出手段と、前記動
きベクトル量の大きさを予め設定したベクトル量閾値と
比較し、この比較結果に基づいたベクトル量制御信号を
出力するベクトル量制御信号出力手段と、前記目標コマ
数情報および前記ベクトル量制御信号に基づいて前記映
像信号の映像コマ数を削減し、低コマ数映像信号を作成
する低コマ数映像作成手段と、を備えたことを特徴とす
る。According to the present invention, in order to solve the above-mentioned problems, a device for reducing the number of video frames according to a first aspect of the present invention provides a video signal composed of a plurality of video frames input at a constant frame rate. A video frame number reducing device for reducing the number of video frames, wherein the video frame of the video signal is extracted based on target frame number information in which the number of video frames to be reduced is set, and is output as a video frame extraction video signal. A motion vector amount for calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area from the video frame extraction video signal output means and the video frame extraction video signal output by the video frame extraction video signal output means A vector amount that compares the magnitude of the motion vector amount with a preset vector amount threshold value and outputs a vector amount control signal based on the comparison result. Control signal output means, and a low frame number video creating means for creating a low frame number video signal by reducing the video frame number of the video signal based on the target frame number information and the vector amount control signal. It is characterized by

【００１１】かかる構成によれば、まず、映像コマ抽出
映像信号出力手段で、入力された映像信号から映像コマ
が抽出されて映像コマ抽出映像信号として出力され、こ
の映像コマ抽出映像信号の各映像コマを所定領域に分割
したマクロブロック毎の動きベクトル量が動きベクトル
量算出手段で算出される。次に、算出された動きベクト
ル量の大きさがベクトル量制御信号出力手段でベクトル
量閾値と比較され、ベクトル量制御信号が出力される。
そして、低コマ数映像作成手段で、目標コマ数情報およ
びベクトル量制御信号に基づいて、映像信号から映像コ
マ数が削減された低コマ数映像信号が作成される。According to this structure, first, the video frame extraction video signal output means extracts a video frame from the input video signal and outputs it as a video frame extraction video signal, and each video of this video frame extraction video signal is extracted. The motion vector amount calculation means calculates the motion vector amount for each macroblock obtained by dividing a frame into a predetermined area. Next, the magnitude of the calculated motion vector amount is compared with the vector amount threshold value by the vector amount control signal output means, and the vector amount control signal is output.
Then, the low frame number image creating means creates a low frame number image signal in which the number of image frames is reduced from the image signal based on the target frame number information and the vector amount control signal.

【００１２】なお、目標コマ数情報とは、入力される映
像信号（入力映像信号）のフレームレートを例えば、ｎ
［Ｈｚ］（ｎ［枚「コマ」／秒］）とした場合、目標コ
マ数がｋｎ（枚「コマ」／秒）（０＜ｋ＜１）と定義さ
れ、この目標コマ数に関する情報のことである。動きベ
クトル量とは、マクロブロック毎に含まれている被写体
の動きをベクトル量で表したもので、例えば、被写体が
動いていないところでは、ベクトル量は“０”に近づ
き、被写体が動いていればどの程度動いたかを“動き
量”として表して、被写体の動きが激しくなればなるほ
どこの“動き量”は大きくなるものである。The target frame number information is the frame rate of an input video signal (input video signal), for example, n.
When [Hz] (n [sheets "frames" / second]) is set, the target number of frames is defined as kn (sheets "frames" / second) (0 <k <1). Is. The motion vector amount represents the motion of the subject included in each macroblock by a vector amount. For example, when the subject is not moving, the vector amount approaches “0” and the subject is moving. The amount of movement is represented as a “movement amount”, and the greater the movement of the subject, the larger the “movement amount”.

【００１３】また、ベクトル量閾値とは、制御信号を切
り替える基準となるベクトル量の値を予め設定したもの
であり、ベクトル量制御信号とは、ベクトル量閾値と比
較した結果に基づいて、例えば、ベクトル量閾値よりも
実際のベクトル量が大きい場合には“１”を、小さい場
合には“０”となるものである。さらに、低コマ数映像
信号とは、入力された映像信号から映像コマ数を削減し
た映像信号であり、従来の単純間引きの映像信号に比
べ、ジャーキネス劣化や２重像劣化が低減された映像信
号である。The vector amount threshold is a preset value of the vector amount that serves as a reference for switching the control signal. The vector amount control signal is, for example, based on the result of comparison with the vector amount threshold. When the actual vector amount is larger than the vector amount threshold value, it is "1", and when it is smaller, it is "0". Further, the low-frame number video signal is a video signal in which the number of video frames is reduced from the input video signal, and is a video signal in which jerkiness deterioration and double image deterioration are reduced as compared with the conventional simple thinning-out video signal. Is.

【００１４】また、請求項２記載の映像コマ数削減装置
は、一定のフレームレートで入力される複数の映像コマ
からなる映像信号の映像コマ数を削減する映像コマ数削
減装置であって、削減する映像コマ数を設定した目標コ
マ数情報に基づいて、前記映像信号の映像コマを抽出し
て、映像コマ抽出映像信号として出力する映像コマ抽出
映像信号出力手段と、この映像コマ抽出映像信号出力手
段によって出力された映像コマ抽出映像信号から、各映
像コマを所定領域に分割したマクロブロック毎に含まれ
る被写体間の境界線に相当するエッジの大きさを示す映
像特徴量を算出し、出力する映像特徴量算出手段と、前
記映像特徴量を予め設定した映像特徴量閾値と比較し、
この比較結果に基づいた映像特徴量制御信号を出力する
映像特徴量制御信号出力手段と、前記目標コマ数情報お
よび前記映像特徴量制御信号に基づいて前記映像信号の
映像コマ数を削減し、低コマ数映像信号を作成する低コ
マ数映像作成手段と、を備えたことを特徴とする。A video frame number reducing device according to a second aspect is a video frame number reducing device for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate. Video frame extraction video signal output means for extracting video frames of the video signal based on the target frame number information in which the number of video frames to be set is output, and this video frame extraction video signal output means From the video frame extraction video signal output by the means, a video feature amount indicating the size of an edge corresponding to a boundary line between subjects included in each macroblock obtained by dividing each video frame into a predetermined area is calculated and output. Image feature amount calculation means, comparing the image feature amount with a preset image feature amount threshold value,
A video feature amount control signal output means for outputting a video feature amount control signal based on the comparison result, and a video frame number of the video signal reduced based on the target frame number information and the video feature amount control signal, And a low-frame-number image creating means for creating a frame-number image signal.

【００１５】かかる構成によれば、まず、映像コマ抽出
映像信号出力手段で、入力された映像信号から映像コマ
が抽出されて映像コマ抽出映像信号として出力され、映
像特徴量算出手段で、マクロブロック毎の映像特徴量が
算出される。次に、この映像特徴量と映像特徴量閾値と
が比較され、比較結果に基づいた映像特徴量制御信号が
映像特徴量制御信号出力手段で出力され、低コマ数映像
作成手段で、目標コマ数情報および映像特徴量制御信号
に基づいて低コマ数映像信号が生成される。According to this structure, first, the video frame extraction video signal output means extracts a video frame from the input video signal and outputs it as a video frame extraction video signal. The video feature amount for each is calculated. Next, the image feature amount and the image feature amount threshold value are compared, an image feature amount control signal based on the comparison result is output by the image feature amount control signal output means, and the low frame number image creating means outputs the target frame number. A low frame number video signal is generated based on the information and the video feature amount control signal.

【００１６】なお、映像特徴量とは、被写体間の境界線
に相当するエッジの大きさを示すものであって、例え
ば、映像信号の信号レベルの分散を利用して得られるも
のである。また、映像特徴量閾値とは、制御信号の基準
となるエッジの大きさを予め設定したものであり、映像
特徴量制御信号とは、映像特徴量閾値と実際の映像特徴
量とを比較した結果に基づいて、例えば、映像特徴量閾
値よりも実際の映像特徴量が大きい場合には“１”を、
小さい場合には“０”となるものである。The image feature amount indicates the size of the edge corresponding to the boundary line between the subjects, and is obtained by utilizing the dispersion of the signal level of the image signal, for example. Further, the image feature amount threshold is a preset value of the size of the edge that is the reference of the control signal, and the image feature amount control signal is the result of comparing the image feature amount threshold with the actual image feature amount. Based on the above, for example, when the actual image feature amount is larger than the image feature amount threshold value, “1” is set,
If it is small, it becomes “0”.

【００１７】また、請求項３記載の映像コマ数削減装置
は、一定のフレームレートで入力される複数の映像コマ
からなる映像信号の映像コマ数を削減する映像コマ数削
減装置であって、削減する映像コマ数を設定した目標コ
マ数情報に基づいて、前記映像信号の映像コマを抽出し
て、映像コマ抽出映像信号として出力する映像コマ抽出
映像信号出力手段と、この映像コマ抽出映像信号出力手
段によって出力された映像コマ抽出映像信号から、各映
像コマを所定領域に分割したマクロブロック毎の動きベ
クトル量を算出する動きベクトル量算出手段と、前記動
きベクトル量の大きさを予め設定したベクトル量閾値と
比較し、この比較結果に基づいたベクトル量制御信号を
出力するベクトル量制御信号出力手段と、前記映像コマ
抽出映像信号出力手段によって出力された映像コマ抽出
映像信号から、各映像コマを所定領域に分割したマクロ
ブロック毎に含まれる被写体間の境界線に相当するエッ
ジの大きさを示す映像特徴量を算出し、出力する映像特
徴量算出手段と、前記映像特徴量を予め設定した映像特
徴量閾値と比較し、この比較結果に基づいた映像特徴量
制御信号を出力する映像特徴量制御信号出力手段と、前
記ベクトル量制御信号と前記映像特徴量制御信号との少
なくとも一方と、前記目標コマ数情報とに基づいて前記
映像信号の映像コマ数を削減し、低コマ数映像信号を作
成する低コマ数映像作成手段と、を備えたことを特徴と
する。The video frame number reducing apparatus according to claim 3 is a video frame number reducing apparatus for reducing the number of video frames of a video signal composed of a plurality of video frames input at a constant frame rate. Video frame extraction video signal output means for extracting video frames of the video signal based on the target frame number information in which the number of video frames to be set is output, and this video frame extraction video signal output means A motion vector amount calculating means for calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area from the video frame extraction video signal output by the means, and a vector for presetting the magnitude of the motion vector amount. A vector quantity control signal output means for comparing with a quantity threshold value and outputting a vector quantity control signal based on the comparison result, and the video frame extraction video signal output From the video frame extraction video signal output by the stage, the video feature amount indicating the size of the edge corresponding to the boundary line between the subjects included in each macroblock obtained by dividing each video frame into a predetermined area is calculated and output. Image feature amount calculation means, image feature amount control signal output means for comparing the image feature amount with a preset image feature amount threshold value, and outputting an image feature amount control signal based on the comparison result, and the vector amount control A low-frame number video creating means for creating a low-frame number video signal by reducing the number of video frames of the video signal based on at least one of a signal and the video feature amount control signal and the target frame number information. It is characterized by having.

【００１８】かかる構成によれば、映像コマ抽出映像信
号出力手段で、入力された映像信号から目標コマ数情報
に基づいた映像コマ数が抽出された映像コマ抽出映像信
号が出力され、まず、この映像コマ抽出映像信号から動
きベクトル量算出手段でマクロブロック毎の動きベクト
ル量が算出され、ベクトル量制御信号出力手段でベクト
ル量制御信号が出力される。続いて、映像コマ抽出映像
信号から映像特徴量算出手段で映像特徴量が算出され、
映像特徴量制御信号出力手段で映像特徴量制御信号が出
力される。そして、低コマ数映像信号作成手段で、ベク
トル量制御信号と映像特徴量制御信号との少なくとも一
方と目標コマ数情報とに基づいて低コマ数映像信号が作
成される。According to this structure, the video frame extracted video signal output means outputs the video frame extracted video signal in which the number of video frames based on the target frame number information is extracted from the input video signal. The motion vector amount calculation means calculates the motion vector amount for each macroblock from the image frame extraction video signal, and the vector amount control signal output means outputs the vector amount control signal. Then, the image feature amount is calculated from the image frame extracted image signal by the image feature amount calculation means,
The image feature amount control signal output means outputs the image feature amount control signal. Then, the low frame number video signal creating means creates a low frame number video signal based on the target frame number information and at least one of the vector amount control signal and the image feature amount control signal.

【００１９】また、請求項４記載の映像コマ数削減装置
は、請求項１または請求項３に記載の映像コマ数削減装
置において、前記映像コマ抽出映像信号を前記ベクトル
量制御信号に基づいてフィルタリング処理し出力するフ
ィルタリング手段と、このフィルタリング手段または前
記低コマ数映像作成手段による出力のいずれか１つの出
力を切り替えて出力する低コマ数映像切替出力手段とを
備えたことを特徴とする。According to a fourth aspect of the present invention, in the video frame number reducing apparatus according to the first or third aspect, the video frame extracted video signal is filtered based on the vector amount control signal. It is characterized by comprising a filtering means for processing and outputting, and a low frame number video switching output means for switching and outputting any one output of the filtering means and the output by the low frame number video creating means.

【００２０】かかる構成によれば、フィルタリング手段
で映像コマ抽出映像信号がベクトル量制御信号に基づい
てフィルタリングされ、低コマ数映像切替出力手段でフ
ィルタリング手段または低コマ数映像作成手段による出
力が切り替えられて出力される。なお、フィルタリング
とは、例えば、ローパスフィルタ等によって映像コマ抽
出映像信号の高周波成分を取り除くことである。According to this structure, the video frame extracted video signal is filtered by the filtering means based on the vector amount control signal, and the output by the filtering means or the low frame number video creating means is switched by the low frame number video switching output means. Is output. Note that the filtering is, for example, removing a high frequency component of the video frame extraction video signal by a low pass filter or the like.

【００２１】また、請求項５記載の映像コマ数削減装置
は、請求項２または請求項３に記載の映像コマ数削減装
置において、前記映像特徴量算出手段が、前記マクロブ
ロックのエッジの検出に際して、前記マクロブロックの
映像レベルの分散値と予め設定した閾値とを比較するこ
とを特徴とする。Further, the image frame number reducing device according to claim 5 is the image frame number reducing device according to claim 2 or 3, wherein the image feature amount calculating means detects the edge of the macroblock. , Comparing the variance value of the video level of the macroblock with a preset threshold value.

【００２２】かかる構成によれば、映像特徴量算出手段
でマクロブッロクのエッジが検出される場合には、マク
ロブロック毎の映像信号の映像レベルの分散値と、映像
レベルの分散値閾値とが比較される。According to this structure, when the video feature amount calculating means detects the edge of the macroblock, the variance value of the video level of the video signal of each macroblock is compared with the threshold value of the variance value of the video level. To be done.

【００２３】また、請求項６記載の映像コマ数削減装置
は、請求項２または請求項３に記載の映像コマ数削減装
置において、前記映像特徴量算出手段は、前記マクロブ
ロックのエッジの検出に際して、前記マクロブロックの
映像レベルの分散値を基に隣接マクロブロック間の分散
値の差と予め設定した閾値とを比較することを特徴とす
る。The image frame number reducing device according to claim 6 is the image frame number reducing device according to claim 2 or 3, wherein the image feature amount calculating means detects the edge of the macroblock. The difference between the variance values of adjacent macroblocks is compared with a preset threshold value based on the variance value of the video level of the macroblock.

【００２４】かかる構成によれば、映像特徴量算出手段
でマクロブッロクのエッジが検出される場合には、ある
マクロブロックの映像信号の映像レベルの分散値と、隣
接するマクロブロックの映像信号の映像レベルの分散値
との差が求められ、この分散値差と分散値閾値とが比較
される。According to this structure, when the video feature amount calculating means detects the edge of the macroblock, the variance value of the video level of the video signal of a certain macroblock and the video value of the video signal of the adjacent macroblock. The difference between the level and the variance value is obtained, and this variance value difference is compared with the variance value threshold.

【００２５】また、請求項７記載の映像コマ数削減装置
は、請求項４に記載の映像コマ数削減装置において、前
記フィルタリング手段が、前記ベクトル量制御信号に基
づいて、予め具備された複数のフィルタのうちからいず
れか１つを選択することを特徴とする。かかる構成によ
れば、フィルタリング手段が複数のフィルタによってな
り、ベクトル量制御信号に基づいて選択される。According to a seventh aspect of the present invention, there is provided a video frame number reducing device according to the fourth aspect, wherein the filtering means includes a plurality of preliminarily provided units based on the vector amount control signal. It is characterized in that any one of the filters is selected. According to such a configuration, the filtering means is composed of a plurality of filters and is selected based on the vector amount control signal.

【００２６】さらに、請求項８記載の映像コマ数削減方
法は、一定のフレームレートで入力される複数の映像コ
マからなる映像信号の映像コマ数を削減する映像コマ数
削減方法であって、削減する映像コマ数を設定した目標
コマ数情報に基づいて、前記映像信号の映像コマを抽出
して、映像コマ抽出映像信号として出力する映像コマ抽
出映像信号出力ステップと、この映像コマ抽出映像信号
出力ステップによって出力された映像コマ抽出映像信号
から、各映像コマを所定領域に分割したマクロブロック
毎の動きベクトル量を算出する動きベクトル量算出ステ
ップと、前記動きベクトル量の大きさを予め設定したベ
クトル量閾値と比較し、この比較結果に基づいたベクト
ル量制御信号を出力するベクトル量制御信号出力ステッ
プと、前記目標コマ数情報および前記ベクトル量制御信
号に基づいて前記映像信号の映像コマ数を削減し、低コ
マ数映像信号を作成する低コマ数映像作成ステップと、
を備えたことを特徴とする。Further, the method of reducing the number of video frames according to claim 8 is a method of reducing the number of video frames for reducing the number of video frames of a video signal composed of a plurality of video frames input at a constant frame rate. A video frame extraction video signal output step of extracting a video frame of the video signal based on the target frame number information in which the number of video frames to be set is output, and outputting as a video frame extraction video signal, and this video frame extraction video signal output A motion vector amount calculation step of calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area from the video frame extraction video signal output in step, and a vector in which the magnitude of the motion vector amount is preset. A vector quantity control signal output step of outputting a vector quantity control signal based on the result of the comparison, Said reducing the number video frames of the video signal, the low number of frames image generating step of generating a low number of frames the video signal based on the number information and the vector quantity control signal,
It is characterized by having.

【００２７】この方法では、まず、映像コマ抽出映像信
号出力ステップにおいて、入力された映像信号から映像
コマが抽出されて映像コマ抽出映像信号として出力さ
れ、この映像コマ抽出映像信号の各映像コマを所定領域
に分割したマクロブロック毎の動きベクトル量が動きベ
クトル量算出ステップにおいて算出される。次に、算出
された動きベクトル量の大きさがベクトル量制御信号出
力ステップにおいてベクトル量閾値と比較され、ベクト
ル量制御信号が出力される。そして、低コマ数映像作成
ステップにて、目標コマ数情報およびベクトル量制御信
号に基づいて、映像信号から映像コマ数が削減された低
コマ数映像信号が作成される。In this method, first, in the video frame extraction video signal output step, a video frame is extracted from the input video signal and output as a video frame extraction video signal, and each video frame of this video frame extraction video signal is output. The motion vector amount for each macroblock divided into a predetermined area is calculated in the motion vector amount calculation step. Next, the magnitude of the calculated motion vector amount is compared with the vector amount threshold value in the vector amount control signal output step, and the vector amount control signal is output. Then, in the low frame number video creating step, a low frame number video signal in which the number of video frames is reduced is created from the video signal based on the target frame number information and the vector amount control signal.

【００２８】また、請求項９記載の映像コマ数削減方法
は、一定のフレームレートで入力される複数の映像コマ
からなる映像信号の映像コマ数を削減する映像コマ数削
減方法であって、削減する映像コマ数を設定した目標コ
マ数情報に基づいて、前記映像信号の映像コマを抽出し
て、映像コマ抽出映像信号として出力する映像コマ抽出
映像信号出力ステップと、この映像コマ抽出映像信号出
力ステップによって出力された映像コマ抽出映像信号か
ら、各映像コマを所定領域に分割したマクロブロック毎
に含まれる被写体間の境界線に相当するエッジの大きさ
を示す映像特徴量を算出し、出力する映像特徴量算出ス
テップと、前記映像特徴量を予め設定した映像特徴量閾
値と比較し、この比較結果に基づいた映像特徴量制御信
号を出力する映像特徴量制御信号出力ステップと、前記
目標コマ数情報および前記映像特徴量制御信号に基づい
て前記映像信号の映像コマ数を削減し、低コマ数映像信
号を作成する低コマ数映像作成ステップと、を備えたこ
とを特徴とする。A method of reducing the number of video frames according to claim 9 is a method of reducing the number of video frames for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate. A video frame extraction video signal output step of extracting a video frame of the video signal based on the target frame number information in which the number of video frames to be set is output, and outputting as a video frame extraction video signal, and this video frame extraction video signal output From the video frame extraction video signal output in step, the video feature amount indicating the size of the edge corresponding to the boundary line between the subjects included in each macroblock obtained by dividing each video frame into a predetermined area is calculated and output. An image which compares the image feature amount with a preset image feature amount threshold and outputs an image feature amount control signal based on the comparison result. An amount control signal output step, a low frame number video creating step of creating a low frame number video signal by reducing the video frame number of the video signal based on the target frame number information and the video feature amount control signal, It is characterized by having.

【００２９】この方法では、まず、映像コマ抽出映像信
号出力ステップにおいて、入力された映像信号から映像
コマが抽出されて映像コマ抽出映像信号として出力さ
れ、映像特徴量算出ステップにおいて、マクロブロック
毎の映像特徴量が算出される。次に、この映像特徴量と
映像特徴量閾値とが比較され、比較結果に基づいた映像
特徴量制御信号が映像特徴量制御信号出力ステップにお
いて出力され、低コマ数映像作成ステップにて、目標コ
マ数情報および映像特徴量制御信号に基づいて低コマ数
映像信号が生成される。In this method, first, in the video frame extraction video signal output step, a video frame is extracted from the input video signal and output as a video frame extraction video signal, and in the video feature amount calculation step, each macro block is extracted. The image feature amount is calculated. Next, the image feature amount and the image feature amount threshold value are compared, an image feature amount control signal based on the comparison result is output in the image feature amount control signal output step, and the target frame is generated in the low frame number image creating step. A low frame number video signal is generated based on the number information and the video feature amount control signal.

【００３０】また、請求項１０記載の映像コマ数削減方
法は、一定のフレームレートで入力される複数の映像コ
マからなる映像信号の映像コマ数を削減する映像コマ数
削減方法であって、削減する映像コマ数を設定した目標
コマ数情報に基づいて、前記映像信号の映像コマを抽出
して、映像コマ抽出映像信号として出力する映像コマ抽
出映像信号出力ステップと、この映像コマ抽出映像信号
出力ステップによって出力された映像コマ抽出映像信号
から、各映像コマを所定領域に分割したマクロブロック
毎の動きベクトル量を算出する動きベクトル量算出ステ
ップと、前記動きベクトル量の大きさを予め設定したベ
クトル量閾値と比較し、この比較結果に基づいたベクト
ル量制御信号を出力するベクトル量制御信号出力ステッ
プと、前記映像コマ抽出映像信号出力ステップによって
出力された映像コマ抽出映像信号から、各映像コマを所
定領域に分割したマクロブロック毎に含まれる被写体間
の境界線に相当するエッジの大きさを示す映像特徴量を
算出し、出力する映像特徴量算出ステップと、前記映像
特徴量を予め設定した映像特徴量閾値と比較し、この比
較結果に基づいた映像特徴量制御信号を出力する映像特
徴量制御信号出力ステップと、前記ベクトル量制御信号
と前記映像特徴量制御信号との少なくとも一方と、前記
目標コマ数情報とに基づいて前記映像信号の映像コマ数
を削減し、低コマ数映像信号を作成する低コマ数映像作
成ステップと、を備えたことを特徴とする。A method for reducing the number of video frames according to a tenth aspect is a method for reducing the number of video frames for reducing the number of video frames of a video signal composed of a plurality of video frames input at a constant frame rate. A video frame extraction video signal output step of extracting a video frame of the video signal based on the target frame number information in which the number of video frames to be set is output, and outputting as a video frame extraction video signal, and this video frame extraction video signal output A motion vector amount calculation step of calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area from the video frame extraction video signal output in step, and a vector in which the magnitude of the motion vector amount is preset. A vector amount control signal output step of outputting a vector amount control signal based on a result of the comparison. From the extracted video signal output in the extracted video signal output step, the video feature amount indicating the edge size corresponding to the boundary line between the subjects included in each macroblock obtained by dividing each video frame into a predetermined area is calculated. Then, a video feature amount calculation step of outputting, a video feature amount control signal output step of comparing the video feature amount with a preset video feature amount threshold value, and outputting a video feature amount control signal based on the comparison result, A low frame number video for reducing the number of video frames of the video signal based on at least one of the vector amount control signal and the video feature amount control signal and the target frame number information to create a low frame number video signal. And a creation step.

【００３１】この方法では、映像コマ抽出映像信号出力
ステップにおいて、入力された映像信号から目標コマ数
情報に基づいた映像コマ数が抽出された映像コマ抽出映
像信号が出力される。そしてまず、この映像コマ抽出映
像信号から動きベクトル量算出ステップにおいてマクロ
ブロック毎の動きベクトル量が算出され、ベクトル量制
御信号出力ステップにおいてベクトル量制御信号が出力
される。続いて、映像コマ抽出映像信号から映像特徴量
算出ステップにおいて映像特徴量が算出され、映像特徴
量制御信号出力ステップにおいて映像特徴量制御信号が
出力される。その後、低コマ数映像信号作成ステップに
て、ベクトル量制御信号と映像特徴量制御信号との少な
くとも一方と目標コマ数情報とに基づいて低コマ数映像
信号が作成される。In this method, in the video frame extraction video signal output step, the video frame extracted video signal in which the number of video frames based on the target frame number information is extracted from the input video signal is output. First, the motion vector amount for each macroblock is calculated in the motion vector amount calculation step from the video frame extraction video signal, and the vector amount control signal is output in the vector amount control signal output step. Subsequently, the video feature amount is calculated from the video frame extracted video signal in the video feature amount calculation step, and the video feature amount control signal is output in the video feature amount control signal output step. Then, in the low frame number video signal creating step, a low frame number video signal is created based on at least one of the vector amount control signal and the image feature amount control signal and the target frame number information.

【００３２】[0032]

【発明の実施の形態】以下、本発明の一実施の形態を図
面に基づいて説明する。本発明に係る映像コマ数削減装
置は、映像の動きベクトル量と映像特徴量を利用して、
映像コマ数削減に伴う動きの大きなエッジ部分に生じ易
いジャーキネスや２重像といった劣化を軽減し、一定の
フレームレートでの映像表示における低コマ数の映像を
表示できるようにしたものである。なお、フレームとコ
マはほぼ同義である。BEST MODE FOR CARRYING OUT THE INVENTION An embodiment of the present invention will be described below with reference to the drawings. A video frame number reduction device according to the present invention utilizes a motion vector amount and a video feature amount of a video to
This is to reduce deterioration such as jerkiness and double images that are likely to occur in an edge portion having a large movement due to the reduction of the number of image frames, and to display an image with a low frame number in image display at a constant frame rate. Note that frame and frame are almost synonymous.

【００３３】ここで、この実施の形態の説明の順序につ
いて述べておくと、まず、本発明の背景となる映像コマ
数削減の原理について説明し、次に、映像コマ数削減装
置の構成、動作を説明することにする。Here, the order of the description of this embodiment will be described. First, the principle of the reduction of the number of video frames that is the background of the present invention will be described, and then the configuration and operation of the video frame number reduction device. Will be explained.

【００３４】（映像コマ数削減の原理、それに伴う画質
劣化）図１は、映像コマ数削減の原理を説明するための
説明図である。この図１は、６０コマ／秒の映像信号の
一部を図示したものであり、この映像信号の一部である
図１（ａ）は、模式的に描かれた被写体（人物）の動き
を、図中右側から１コマ目、２コマ目・・・６コマ目ま
で図示したものである。また、図１（ｂ）は、図１
（ａ）に図示した映像信号の一部から２コマ目、４コマ
目、６コマ目を削減したものである。この映像信号の一
部に対応した映像信号が帯域に制限がある伝送路に所定
の通信手段によって送信される。送信先（受信側）は例
えば携帯端末やＰＤＡ等である。さらに、図１（ｃ）
は、映像コマ数が映像信号の一部に削減された映像コマ
の直前の映像コマが内挿されたものである。つまり、通
常、送信側で映像コマ数が削減された映像信号は、再生
に際して直前の映像コマと同じ映像コマが削減された２
コマ目、４コマ目、６コマ目の代わりとして内挿されて
表示される。(Principle of Reducing the Number of Video Frames and Image Degradation Associated Therewith) FIG. 1 is an explanatory diagram for explaining the principle of reducing the number of video frames. FIG. 1 illustrates a part of a video signal of 60 frames / second, and FIG. 1A which is a part of the video signal shows a movement of a schematically drawn subject (person). , The first frame, the second frame, ... The sixth frame from the right side in the figure. In addition, FIG.
The second frame, the fourth frame, and the sixth frame are reduced from a part of the video signal shown in (a). A video signal corresponding to a part of the video signal is transmitted by a predetermined communication means to a transmission path whose band is limited. The transmission destination (reception side) is, for example, a mobile terminal or PDA. Furthermore, FIG. 1 (c)
Is a video frame immediately before the video frame in which the number of video frames has been reduced to a part of the video signal. That is, normally, in the video signal in which the number of video frames has been reduced on the transmitting side, the same video frame as the immediately previous video frame has been reduced in reproduction.
Instead of the fourth frame, the fourth frame, and the sixth frame, they are interpolated and displayed.

【００３５】図２は、映像コマ数削減に伴う画質劣化を
説明するための説明図である。図２（ａ）は、映像信号
に含まれている被写体（矩形映像）が図２（ａ）中右側
に動いていく場合を図示したものであって、図２（ａ）
中左側は映像コマを削減する前の状態を示しており、図
２（ａ）中右側は映像コマを削減し、削減された映像コ
マに直前の映像コマを内挿した状態を示している。図２
（ｂ）は、映像信号に含まれている被写体（矩形映像）
の動きに伴う「見え方」を模式的に図示したものであっ
て、図２（ｂ）中左側は映像コマを削減する前の状態の
「見え方」を示しており、図２（ｂ）中右側は映像コマ
を削減し、削減された映像コマに直前の映像コマを内挿
した状態の「見え方」を示している。FIG. 2 is an explanatory diagram for explaining the image quality deterioration due to the reduction of the number of video frames. FIG. 2A shows a case where a subject (rectangular image) included in the video signal moves to the right side in FIG. 2A, and FIG.
The middle left side shows the state before the reduction of video frames, and the right side in FIG. 2A shows the state where the video frames are reduced and the immediately previous video frame is inserted into the reduced video frames. Figure 2
(B) is a subject (rectangular image) included in the video signal
2B schematically shows the "visual appearance" associated with the movement of the image, and the left side in FIG. 2B shows the "visual appearance" before the reduction of image frames, and FIG. The right side in the middle shows the "visual appearance" when the number of video frames is reduced and the video frame immediately before is inserted in the reduced video frame.

【００３６】つまり、図２（ａ）に示す例では、動いて
いる同一の映像（ここでは矩形の映像）を、１コマ目か
ら６コマ目内の映像の動きとして示しているが、図２
（ａ）中左側は滑らかな動きを示すコマ落とし前の元の
映像の配置例であり、図２（ａ）中右側がコマ落としに
伴って削減されたコマの代わりに内挿されたコマを含む
映像の配置例である。That is, in the example shown in FIG. 2A, the same moving image (here, a rectangular image) is shown as the movement of the image within the first to sixth frames.
The left side in (a) is an example of the layout of the original image showing smooth movement before frame dropping, and the right side in FIG. 2 (a) includes interpolated frames instead of the frames reduced due to frame dropping. It is an example of arrangement of an image.

【００３７】また、図２（ｂ）は、図２（ａ）に示す映
像の信号波形を示しており、図２（ｂ）中左側の信号波
形は滑らかに動く矩形映像を示し、図２（ｂ）右側の信
号波形はコマ落としに伴ってジャーキネス劣化が生じる
矩形映像を示している。2 (b) shows the signal waveform of the image shown in FIG. 2 (a). The signal waveform on the left side of FIG. 2 (b) shows a smoothly moving rectangular image, and FIG. b) The signal waveform on the right side shows a rectangular image in which jerkiness is deteriorated due to frame dropping.

【００３８】（映像コマ数削減装置の構成）図３は、本
発明の実施の形態に係る映像コマ数削減装置の全体構成
を示すブロック図である。以下、本実施の一実施の形態
に係る映像コマ数削減装置の構成を説明する。図３に示
す映像コマ数削減装置は、コマ落とし部１（映像コマ抽
出映像出力手段）と、動きベクトル算出部２（動きベク
トル量算出手段）と、動き量判定部３（ベクトル量制御
信号出力手段）と、低コマ数映像作成部４を備えてい
る。図３の映像コマ数削減装置に入出力される情報（信
号名）は、コマ落とし部１および動きベクトル算出部２
ならびに低コマ数映像作成部４に入力される入力映像信
号ＩＭと、コマ落とし部１低コマ数映像作成部４に入力
される目標コマ数情報ＴＦと、動きベクトル算出部２に
入力されるコマ落とし映像信号ＬＦと、動き量判定部３
に入力される動きベクトル量ＭＶと、低コマ数映像作成
部４に入力される制御信号ＳＣと、この低コマ数映像作
成部４から出力される低コマ数映像出力ＬＭとである。(Structure of Image Frame Reduction Apparatus) FIG. 3 is a block diagram showing the overall structure of the image frame reduction apparatus according to the embodiment of the present invention. The configuration of the video frame number reducing device according to the embodiment will be described below. The apparatus for reducing the number of video frames shown in FIG. 3 includes a frame dropping unit 1 (video frame extraction video output unit), a motion vector calculation unit 2 (motion vector amount calculation unit), and a motion amount determination unit 3 (vector amount control signal output). Means) and a low frame number image creation unit 4. The information (signal name) input / output to / from the video frame number reduction device of FIG.
In addition, the input video signal IM input to the low frame number image creation unit 4, the target frame number information TF input to the frame dropping unit 1 low frame number image creation unit 4, and the frame input to the motion vector calculation unit 2. Dropped video signal LF and motion amount determination unit 3
Is a motion vector amount MV input to the low frame number image generation unit 4, a control signal SC input to the low frame number image generation unit 4, and a low frame number image output LM output from the low frame number image generation unit 4.

【００３９】コマ落とし部１は、目標コマ数情報ＴＦに
基づいて、外部から入力された入力映像信号ＩＭの映像
コマの抽出を行うものである。図４は、図３に示したコ
マ落とし部１の構成例を示す。この図４に示すように、
図３に示したコマ落とし部１は、判定・処理部１１と映
像遅延部１２とを具備している。The frame dropping unit 1 extracts the image frames of the input image signal IM input from the outside based on the target frame number information TF. FIG. 4 shows a configuration example of the frame dropping unit 1 shown in FIG. As shown in this FIG.
The frame dropping unit 1 shown in FIG. 3 includes a determination / processing unit 11 and a video delay unit 12.

【００４０】判定・処理部１１は、目標コマ数情報ＴＦ
と入力映像信号ＩＭのフレームレートとに基づいて、抽
出する映像コマ数を判定し、判定した結果に基づき、入
力映像信号ＩＭから必要な映像コマのみを、図示を省略
した記憶部に記録させて、入力映像信号ＩＭを処理する
ものである。映像遅延部１２は、入力映像信号ＩＭのフ
レームレートとコマ落とし映像信号（抽出した映像コ
マ）のフレームレートとの帳尻が合うように、コマ落と
し映像信号の映像コマを必要に応じて遅延させるもので
ある。The determination / processing section 11 determines the target frame number information TF.
And the frame rate of the input video signal IM, the number of video frames to be extracted is determined, and based on the determination result, only the required video frames from the input video signal IM are recorded in a storage unit (not shown). , For processing the input video signal IM. The video delay unit 12 delays the video frames of the time-lapse video signal as necessary so that the frame rate of the input video signal IM and the frame rate of the time-lapse video signal (extracted video frame) match. Is.

【００４１】つまり、このコマ落とし部１では、入力さ
れる入力映像信号ＩＭのフレームレートがｎ［Ｈｚ］
（ｎ［枚／秒］）、目標コマ数がｋｎ［枚／秒］（目標
コマ係数ｋ、０＜ｋ＜１）である場合、判定・処理部１
１において、（１／ｋ）コマ毎に入力映像信号ＩＭを取
り出して記録する。また、映像遅延部１２では、図５に
示すように（１／ｋ）コマ映像を遅延させ、これをコマ
落とし映像信号ＬＦとして出力する。この図５は、図３
に示したコマ落とし部１に入力される目標コマ数情報Ｔ
Ｆと、コマ落とし部１から出力されるコマ落とし映像信
号ＬＦとの対応関係の１例を示したタイムチャートであ
り、この図５では、目標コマ係数ｋが、ｋ＝０．１の場
合を示している。目標コマ係数ｋが０．１の場合には、
コマ数落とし映像信号ＬＦは入力映像信号ＩＭよりも１
０コマ遅延される。なお、このコマ落とし部１が請求項
に記載した映像コマ抽出映像信号出力手段に相当するも
のである。つまり、この実施の形態の説明では、請求項
の「映像コマ抽出」という文言を図１中のコマ落とし部
１の「コマ落とし」のように置き換えて表記している。That is, in the frame dropping unit 1, the frame rate of the input video signal IM input is n [Hz].
(N [sheets / second]) and the target number of frames is kn [sheets / second] (target frame coefficient k, 0 <k <1), the determination / processing unit 1
At 1, the input video signal IM is taken out and recorded for each (1 / k) frame. Further, the video delay unit 12 delays the (1 / k) frame video as shown in FIG. 5, and outputs this as a frame-dropped video signal LF. This FIG. 5 corresponds to FIG.
Target frame number information T input to the frame dropping unit 1 shown in
6 is a time chart showing an example of the correspondence relationship between F and the frame drop video signal LF output from the frame drop unit 1. FIG. 5 shows a case where the target frame coefficient k is k = 0.1. Shows. When the target frame coefficient k is 0.1,
The number-of-frames dropped video signal LF is 1 than the input video signal IM
0 frames are delayed. The frame dropping unit 1 corresponds to the image frame extraction video signal output means described in the claims. That is, in the description of this embodiment, the wording "image frame extraction" in the claims is replaced with "frame dropping" of the frame dropping unit 1 in FIG.

【００４２】動きベクトル算出部２は、各映像コマに含
まれている被写体の動きベクトル量を算出するもので、
図３に示した動きベクトル算出部２の構成例を図６に示
す。図３に示した動きベクトル算出部２は図６における
ＭＢ毎の動きベクトル算出部２１を具備している。The motion vector calculation unit 2 calculates the motion vector amount of the subject included in each video frame.
FIG. 6 shows a configuration example of the motion vector calculation unit 2 shown in FIG. The motion vector calculation unit 2 shown in FIG. 3 includes the motion vector calculation unit 21 for each MB in FIG.

【００４３】このＭＢ毎の動きベクトル算出部２１は、
入力映像信号ＩＭおよびコマ落とし映像信号ＬＦの各映
像コマをマクロブロック（ＭＢ）と称される数画素矩形
の領域に分割し、このＭＢ毎の各映像コマ間（隣接する
フレーム間）における動きベクトル量ＭＶを算出するも
のである。The motion vector calculation unit 21 for each MB is
Each video frame of the input video signal IM and the frame-dropped video signal LF is divided into a rectangular area of several pixels called a macro block (MB), and a motion vector between each video frame (between adjacent frames) of each MB. The quantity MV is calculated.

【００４４】つまり、このＭＢ毎の動きベクトル算出部
２１では、例えば、フレーム間にブロックマッチング法
が適用されてｍｂ×ｍｂ画素のＭＢ単位の動きベクトル
量ＭＶが計算される。なお、この動きベクトル算出部２
が請求項に記載した動きベクトル量算出手段に相当する
ものである。That is, in the motion vector calculation unit 21 for each MB, for example, the block matching method is applied between frames to calculate the motion vector amount MV in MB units of mb × mb pixels. The motion vector calculation unit 2
Corresponds to the motion vector amount calculating means described in the claims.

【００４５】動き量判定部３は、図示を省略した記憶部
に記憶される動き量閾値（しきい値）と、動きベクトル
算出部２で算出された動きベクトル量ＭＶとの大小を比
較し、判定するもので、図７に図３に示した動き量判定
部３の構成例を図７に示す。図７に示すように、図３に
示した動き量判定部３はＭＶとしきい値との大小比較部
３１を具備している。なお、この動き量判定部３が請求
項に記載したベクトル量制御信号出力手段に相当するも
のである。The motion amount determination unit 3 compares the motion amount threshold value (threshold value) stored in the storage unit (not shown) with the motion vector amount MV calculated by the motion vector calculation unit 2, FIG. 7 shows a configuration example of the motion amount determination unit 3 shown in FIG. As shown in FIG. 7, the motion amount determination unit 3 shown in FIG. 3 includes a magnitude comparison unit 31 between the MV and the threshold value. The motion amount determination unit 3 corresponds to the vector amount control signal output means described in the claims.

【００４６】このＭＶとしきい値との大小比較部３１
は、動きベクトル算出部２の出力である動きベクトル量
ＭＶと、予め設定したしきい値とを比較し、制御信号Ｓ
Ｃを出力するもので、動きベクトル算出部２の出力であ
る動きベクトル量ＭＶと、予め設定したしきい値とを比
較し、例えば、ＭＶがしきい値よりも大きい場合は制御
信号“１”、しきい値よりも小さい場合は制御信号
“０”を出力する。また、複数のしきい値を設けて動き
量の大きさの程度に応じた制御信号を出力することも可
能である。The magnitude comparison unit 31 of the MV and the threshold value
Compares the motion vector amount MV output from the motion vector calculation unit 2 with a preset threshold value, and outputs the control signal S
C is output, and the motion vector amount MV output from the motion vector calculation unit 2 is compared with a preset threshold value. For example, when MV is larger than the threshold value, the control signal “1” is output. If it is smaller than the threshold value, the control signal “0” is output. It is also possible to provide a plurality of threshold values and output a control signal according to the magnitude of the amount of movement.

【００４７】なお、この複数のしきい値の設定は、例え
ば、入力映像信号のフレームレートをｎ［Ｈｚ］（ｎ
［枚／秒］）、目標コマ数をｋｎ［枚／秒］（０＜ｋ＜
１）とした時、ＭＶが３ｋ［°／秒］より小さい場合は
制御信号“０”を、ＭＶが３ｋ〜１２ｋ［°／秒］の場
合（テレビでの一般的な動き）は制御信号“１１”を、
ＭＶが１２ｋ〜２４ｋ［°／秒］の場合（速い動き）は
制御信号“１２”を、ＭＶが２４ｋ［°／秒］を超える
場合（目が追従できない速さの動き）は制御信号“１
３”が出力されるように設定することができる。これら
の制御信号の詳細については、文献：（「動画像の画質
とテレビジョン信号方式」、電子通信学会画像工学研究
会報告、ＩＥ７５−９５、Ｎｏ．１、ＰＰ．９−１６、
１９７６、宮原誠 他）に記述されている。It should be noted that the setting of the plurality of threshold values is performed, for example, by setting the frame rate of the input video signal to n [Hz] (n
[Sheets / second]), the target number of frames is kn [sheets / second] (0 <k <
In 1), when the MV is smaller than 3 k [° / sec], the control signal is “0”, and when the MV is 3 k to 12 k [° / sec] (general movement on TV), the control signal is “0”. 11 ",
When the MV is 12k to 24k [° / sec] (fast movement), the control signal is “12”, and when the MV exceeds 24k [° / sec] (the movement of which the eye cannot follow), the control signal is “1”.
3 "can be set to be output. For details of these control signals, refer to the document: (" Image quality of moving images and television signal system ", IEICE Imaging Technology Research Group Report, IE75-95. , No. 1, PP.9-16,
1976, Makoto Miyahara et al.).

【００４８】低コマ数映像作成部４は、目標コマ数情報
ＴＦと動き量判定部３から出力された制御信号ＳＣに基
づいて、入力された入力映像信号ＩＭの映像コマ数を目
標コマ数に削減し、低コマ数映像ＬＭを出力するもので
ある。図３に示した低コマ数映像作成部４の一構成例を
図８に示す。図８に示すように、低コマ数映像作成部４
は、コマ落とし部４１（映像コマ抽出映像信号出力手
段）と、ＭＢの映像特徴量算出部４２（映像特徴量算出
手段）と、特徴量判定部４３（映像特徴量制御信号出力
手段）と、ローパスフィルタとして機能するＬＰＦ部４
４（フィルタリング手段）と、スイッチＳＷ１，ＳＷ２
（低コマ数映像切替出力手段）とを具備している。な
お、この低コマ数映像作成部４では、コマ落とし部４１
を含んで構成されているが、図３に示したコマ落とし部
１からの出力が直接ＭＢの映像特徴量算出部４２に入力
されてもよい。The low frame number image creation unit 4 sets the image frame number of the input image signal IM input to the target frame number based on the target frame number information TF and the control signal SC output from the motion amount determination unit 3. The number of frames is reduced and the low frame number image LM is output. FIG. 8 shows an example of the configuration of the low frame number image creation unit 4 shown in FIG. As shown in FIG. 8, the low frame number image creation unit 4
Is a frame dropping unit 41 (video frame extraction video signal output means), an MB video feature amount calculation unit 42 (video feature amount calculation unit), a feature amount determination unit 43 (video feature amount control signal output unit), LPF unit 4 that functions as a low-pass filter
4 (filtering means) and switches SW1 and SW2
(Low frame number video switching output means). In addition, in the low frame number image creation unit 4, the frame dropping unit 41
However, the output from the frame dropping unit 1 shown in FIG. 3 may be directly input to the image feature amount calculation unit 42 of the MB.

【００４９】コマ落とし部４１では、例えば、前記のと
おり、入力映像信号のフレームレートがｎ［Ｈｚ］（ｎ
［枚／秒］）であり、目標コマ数がｋｎ［枚／秒］（０
＜ｋ＜１）である場合、まず、目標コマ数情報ＴＦに従
って（１／ｋ）コマ毎に入力映像信号ＩＭを取り出して
記録し、これをコマ落とし映像信号ＬＦとして出力する
ものである。In the frame dropping unit 41, for example, as described above, the frame rate of the input video signal is n [Hz] (n
[Sheets / second]) and the target number of frames is kn [sheets / second] (0
When <k <1), first, the input video signal IM is taken out and recorded for each (1 / k) frame in accordance with the target frame number information TF, and this is output as the frame skipped video signal LF.

【００５０】スイッチＳＷ１は、制御信号ＳＣによって
制御され、例えば、動きベクトル量ＭＶが３ｋ［°／
秒］より小さい場合は、この場合に対応した制御信号Ｓ
Ｃ（図７に示すＭＶとしきい値との大小比較部３１から
出力され、具体的には制御信号“０”）によって、前記
の（１／ｋ）コマ毎に記録されたコマ落とし映像信号Ｌ
Ｆを、そのまま低コマ数映像出力ＬＭとして出力する側
に切換えるものである。The switch SW1 is controlled by the control signal SC and, for example, the motion vector amount MV is 3 k [° / ° /
Second], the control signal S corresponding to this case
C (the MV and the threshold value shown in FIG. 7 output from the magnitude comparison unit 31 and specifically, the control signal “0”) causes the frame skipped video signal L recorded for each (1 / k) frame.
F is switched to the side that outputs the low frame number video output LM as it is.

【００５１】また、このスイッチＳＷ１は、動きベクト
ル量ＭＶが３ｋ［°／秒］より大きいか、または３ｋ
［°／秒］と等しい場合には、この場合に対応した制御
信号ＳＣの具体的な値である制御信号“１Ｘ”（Ｘ＝
１、２、３）によって、前記の（１／ｋ）映像コマ毎に
記録されたコマ落とし映像信号ＬＦをＭＢの映像特徴量
算出部４２に切換えるものである。The switch SW1 has a motion vector amount MV larger than 3 k [° / sec] or 3 k.
When it is equal to [° / sec], the control signal “1X” (X = X), which is a specific value of the control signal SC corresponding to this case.
1, 2, and 3), the frame skipped video signal LF recorded for each (1 / k) video frame is switched to the MB video feature amount calculation unit 42.

【００５２】ＭＢの映像特徴量算出部４２は、マクロブ
ロック毎の映像特徴量を算出するものであり、この算出
に際してはマクロブロックのエッジが検出されて利用さ
れる。また、このエッジ検出の手段には、マクロブロッ
クの映像レベルの分散と予め設定したしきい値とを比較
してエッジと判断する方法が利用可能である。例えば、
Ｃａｎｎｙの方法が利用できる（Ｊ．Ｃａｎｎｙ、”Ａ
Ｃｏｍｐｕｔａｔｉｏｎａｌ Ａｐｐｒｏａｃｈ ｔ
ｏ Ｅｄｇｅ Ｄｅｔｅｃｔｉｏｎ”、ＩＥＥＥ Ｔｒ
ａｎｓ．Ｐａｔ．Ａｎａｌ．Ｍａｃｈｉｎｅ Ｉｎｔｅ
ｌｌ．、ＰＡＭＩ−８、Ｎｏ．６、ｐｐ．６７９−６９
８、１９８６、）。また、例えば、コマ落とし映像信号
ＬＦの信号レベルの分散を利用し、マクロブロックの映
像レベルの分散を基に隣接マクロブロック間の分散の差
と予め設定したしきい値とを比較してエッジと判断する
方法が利用可能である。The MB image feature amount calculation unit 42 calculates the image feature amount for each macro block, and the edge of the macro block is detected and used in this calculation. As the edge detecting means, a method of comparing the variance of the video levels of the macroblocks with a preset threshold value and determining it as an edge can be used. For example,
Canny's method is available (J. Canny, “A
Computational Approach
o Edge Detection ", IEEE Tr
ans. Pat. Anal. Machine Inte
ll. , PAMI-8, No. 6, pp. 679-69
8, 1986,). Further, for example, by utilizing the signal level variance of the frame-dropped video signal LF, the difference in variance between adjacent macroblocks is compared with a preset threshold value based on the variance of the video level of the macroblock, and an edge is determined. Methods of judging are available.

【００５３】特徴量判定部４３は、ＭＢの映像特徴量算
出部４２の出力（映像特徴量ＦＭ）と、予め設定された
しきい値とを比較し、映像特徴量ＦＭが予め設定された
しきい値よりも小さい場合には、コマ落とし部４１を介
して送出されているコマ落とし映像信号ＬＦが出力され
るように、また、映像特徴量ＦＭが前記しきい値よりも
小さくない場合には前記したコマ落とし映像信号ＬＦが
ＬＰＦ部４４を介して出力されるようにスイッチＳＷ２
を切換える制御信号ＳＣ２を出力するものである。The feature amount determination unit 43 compares the output of the MB image feature amount calculation unit 42 (image feature amount FM) with a preset threshold value, and the image feature amount FM is preset. When it is smaller than the threshold value, the frame-dropped video signal LF sent through the frame-dropping unit 41 is output, and when the image feature amount FM is not smaller than the threshold value. The switch SW2 is used so that the above-described frame-dropped video signal LF is output via the LPF unit 44.
It outputs a control signal SC2 for switching between.

【００５４】ＬＰＦ部４４は、予め具備されたフィルタ
のうちから、制御信号ＳＣの具体的な信号値に対応した
フィルタを選択し、スイッチＳＷ２を介して入力された
コマ落とし映像信号ＬＦに対して、選択されたフィルタ
によるフィルタリング処理を施して出力するものであ
る。The LPF section 44 selects a filter corresponding to a specific signal value of the control signal SC from the filters provided in advance, and selects the filter corresponding to the frame-dropped video signal LF input via the switch SW2. , Is subjected to filtering processing by the selected filter and output.

【００５５】例えば、映像特徴量ＦＭを映像レベルの分
散とし、しきい値を２０レベル（／２５６）とすると、
この場合は、動き量判定部３の出力である制御信号ＳＣ
を受けたスイッチＳＷ２の動作により、コマ落とし映像
信号ＬＦには、ＬＰＦ部４４を介したフィルタリング処
理が施されるケースとなる。この時、ＬＰＦ部４４にお
いて、例えば、制御信号ＳＣの具体的な信号値が制御信
号“１１”の場合（ＭＶが３ｋ〜１２ｋ［°／秒］）は
信号帯域を１／２にするフィルタ、また、制御信号“１
２”の場合（ＭＶが１２ｋ〜２４ｋ［°／秒］）は信号
帯域を１／４にするフィルタ、さらに、制御信号“１
３”の場合（２４ｋ［°／秒］を超える）は信号帯域を
１／２にするフィルタが選択されるものとする。但し、
制御信号ＳＣが“０”でない場合に、複数のフィルタを
使用せずに同一のフィルタを用いることも可能である。For example, assuming that the image feature amount FM is the image level variance and the threshold value is 20 levels (/ 256),
In this case, the control signal SC that is the output of the motion amount determination unit 3
In response to the operation of the switch SW2, the frame drop video signal LF is subjected to the filtering process via the LPF unit 44. At this time, in the LPF unit 44, for example, when the specific signal value of the control signal SC is the control signal “11” (MV is 3k to 12k [° / sec]), a filter that halves the signal band, In addition, the control signal “1
In the case of 2 "(MV is 12k to 24k [° / sec]), the filter that makes the signal band 1/4, and the control signal" 1 "
In the case of 3 "(exceeds 24 k [° / sec]), a filter that halves the signal band is selected.
When the control signal SC is not "0", it is possible to use the same filter without using a plurality of filters.

【００５６】次に、図３に示した低コマ数映像作成部４
の他の一構成例を図９に示す。この図９に示す低コマ数
映像作成部４（図３に示す低コマ数映像作成部４の他の
構成例）は、図８に示した低コマ数映像作成部４の構成
要素と同じ構成要素を具備しているが、構成要素間の接
続が異なっている。以下に、この図９に示す低コマ数映
像作成部４（他の構成例）を説明する。Next, the low frame number image creation unit 4 shown in FIG.
Another example of the configuration is shown in FIG. The low frame number image creation unit 4 shown in FIG. 9 (another configuration example of the low frame number image creation unit 4 shown in FIG. 3) has the same configuration as that of the low frame number image creation unit 4 shown in FIG. It has elements, but the connections between the components are different. The low frame number image creation unit 4 (another configuration example) shown in FIG. 9 will be described below.

【００５７】この低コマ数映像作成部４（他の構成）に
入力される入力映像信号ＩＭのフレームレートがｎ［Ｈ
ｚ］（ｎ［枚／秒］）であり、目標コマ数がｋｎ［枚／
秒］（０＜ｋ＜１）である場合、まず、コマ落とし部４
１は、目標コマ数情報ＴＦに従って（１／ｋ）コマ毎に
入力映像信号ＩＭを取り出して記録し、これをコマ落と
し映像信号ＬＦとして出力するものである。The frame rate of the input image signal IM input to the low frame number image forming unit 4 (another structure) is n [H
z] (n [sheets / second]) and the target number of frames is kn [sheets / sheet]
Second] (0 <k <1), first, the frame dropping unit 4
1 is to extract and record the input video signal IM for each (1 / k) frame in accordance with the target frame number information TF and output it as a frame-dropped video signal LF.

【００５８】ＭＢの映像特徴量算出部４２は、ＭＢ毎の
映像特徴量を算出し、映像特徴量ＦＭとして出力するも
のである。なお、このＭＢ毎の映像特徴量の算出に際し
てはエッジを検出して利用する。このエッジ検出の手段
には、例えば、前記したＣａｎｎｙの方法や信号レベル
の分散が利用できる。The MB image feature amount calculation unit 42 calculates the image feature amount for each MB and outputs it as the image feature amount FM. When calculating the image feature amount for each MB, an edge is detected and used. For the edge detection means, for example, the above-mentioned Canny method or signal level dispersion can be used.

【００５９】特徴量判定部４３は、ＭＢの映像特徴量算
出部４２の出力である映像特徴量ＦＭを予め設定したし
きい値と比較すると共に、特徴量がしきい値よりも小さ
い場合にはコマ落とし映像信号ＬＦが、そのまま低コマ
数映像出力ＬＭとして出力されるように、また、小さく
ない場合にはコマ落とし映像信号ＬＦがＬＰＦ部１６を
介して低コマ数映像出力ＬＭとして出力されるようにス
イッチＳＷ２の切換え制御信号を出力するものである。
つまり、この図９に低コマ数映像作成部４（他の構成
例）では、図８に示す低コマ数映像作成部４と比べ、ス
イッチを少なく構成することができる。The feature amount determination unit 43 compares the image feature amount FM output from the image feature amount calculation unit 42 of the MB with a preset threshold value, and when the feature amount is smaller than the threshold value, The frame-dropped video signal LF is output as it is as the low-frame-number video output LM, and when it is not small, the frame-dropped video signal LF is output as the low-frame-number video output LM via the LPF unit 16. Thus, the switching control signal of the switch SW2 is output.
That is, in the low frame number image creating unit 4 (another configuration example) in FIG. 9, the number of switches can be reduced compared to the low frame number image creating unit 4 shown in FIG.

【００６０】（映像コマ数削減装置の動作）次に、図１
０に示すフローチャートを参照して映像コマ数削減装置
の動作を説明する（適宜、図３〜図９を参照）。まず、
予め設定された目標コマ数情報ＴＦがコマ落とし部１お
よび低コマ数映像作成部４に入力される（Ｓ１）。そし
て、入力映像信号ＩＭがコマ落とし部１および動きベク
トル算出部２ならびに低コマ数映像作成部４に入力され
る（Ｓ２）。(Operation of Image Frame Reduction Apparatus) Next, referring to FIG.
The operation of the image frame number reducing device will be described with reference to the flowchart shown in FIG. 0 (see FIGS. 3 to 9 as appropriate). First,
The preset target frame number information TF is input to the frame dropping unit 1 and the low frame number image creating unit 4 (S1). Then, the input video signal IM is input to the frame dropping unit 1, the motion vector calculation unit 2, and the low frame number video creation unit 4 (S2).

【００６１】次に、コマ落とし部１では、入力映像信号
ＩＭから映像コマが目標コマ数情報ＴＦに基づいて抽出
され、コマ落とし映像信号ＬＦとして、遅延されて動き
ベクトル算出部２に出力される（Ｓ３）。続いて、動き
ベクトル算出部２では、入力映像信号ＩＭとコマ落とし
映像信号ＬＦとについて、それぞれＭＢ毎の動きベクト
ル量ＭＶが算出され、動き量判定部３に出力される（Ｓ
４）。Next, in the frame dropping unit 1, image frames are extracted from the input image signal IM based on the target frame number information TF, and delayed and output as the frame dropping image signal LF to the motion vector calculation unit 2. (S3). Subsequently, the motion vector calculation unit 2 calculates the motion vector amount MV for each MB of the input video signal IM and the frame-dropped video signal LF, and outputs the calculated motion vector amount MV to the motion amount determination unit 3 (S).
4).

【００６２】動き量判定部３では、動きベクトル量ＭＶ
としきい値（ベクトル量閾値）とが比較判定され、制御
信号（ベクトル量制御信号）ＳＣが低コマ数映像作成部
４に出力される（Ｓ５）。そして、低コマ数映像作成部
４では、コマ落とし部４１でコマ落とし映像信号ＬＦが
抽出され、ＭＢの映像特徴量算出部４２で、抽出された
コマ落とし映像信号ＬＦからＭＢ毎の映像特徴量ＦＭが
算出される。さらに、特徴量判定部４３で、算出された
映像特徴量ＦＭとしきい値（映像特徴閾値）とが比較判
定され、制御信号（映像特徴量制御信号）ＳＣ２が出力
される（Ｓ６）。その後、この低コマ数映像作成部４で
は、最適な低コマ数映像が判定され、場合によってはＬ
ＰＦ部４４で高周波成分が除外され、低コマ数映像出力
ＬＭがなされる（Ｓ７）。In the motion amount determination unit 3, the motion vector amount MV
And the threshold value (vector amount threshold value) are compared and determined, and the control signal (vector amount control signal) SC is output to the low frame number image creation unit 4 (S5). Then, in the low frame number video creation unit 4, the frame dropping video signal LF is extracted by the frame dropping unit 41, and the video feature amount calculation unit 42 of the MB extracts the video feature amount of each MB from the extracted frame dropping video signal LF. FM is calculated. Further, the feature amount determination unit 43 compares and determines the calculated image feature amount FM and the threshold value (image feature threshold value), and outputs the control signal (image feature amount control signal) SC2 (S6). After that, the low frame number image creation unit 4 determines the optimum low frame number image, and in some cases L
The PF unit 44 excludes the high frequency component and outputs the low frame number image LM (S7).

【００６３】（補足：映像コマ数削減装置の効果につい
て）図１１は、本実施の形態に係る映像コマ数削減装置
の効果を従来の単純な間引き手段を採用した映像コマ数
削減装置と比較した比較結果である。図１１（ａ）には
本願と他の方法との効果をそれぞれ評点で示し、図１１
（ｂ）には、このとき用いた評価尺度を示す。図１１
（ａ）は、ＳＩＦサイズ（３５２×２４０画素）の６０
［Ｈｚ］の映像を１５［Ｈｚ］にコマ数削減する場合
の、本実施の形態に係る映像コマ数削減装置の出力映像
と、単純にコマ数を削減する従来の映像コマ数削減装置
の映像出力との、それぞれの劣化の程度を１５名の人が
評価した結果を示している。なお、この評価した結果
は、図１１（ｂ）に示した評価尺度に基づいた評点の平
均値である。(Supplement: Regarding Effect of Image Frame Number Reduction Device) FIG. 11 compares the effect of the image frame number reduction device according to the present embodiment with a conventional image frame number reduction device employing a simple thinning means. It is a comparison result. In FIG. 11A, the effects of the present application and other methods are shown in terms of scores.
(B) shows the evaluation scale used at this time. Figure 11
(A) is 60 of SIF size (352 × 240 pixels)
When reducing the number of frames of [Hz] to 15 [Hz], the output image of the image frame number reducing device according to the present embodiment and the image of the conventional image frame number reducing device that simply reduces the number of frames 15 shows the results of evaluation of the degree of deterioration of each of the output and 15 people. The result of this evaluation is the average value of the scores based on the evaluation scale shown in FIG.

【００６４】この場合、前記のｋの値は０．２５とし、
このｋの値に基づいて動き量判定部３と特徴量判定部４
３のしきい値を設定した。なお、モニターサイズは８．
６４インチ（アスペクト比３：２）、モニターの観視距
離は１５７ｃｍである。図１１に示す結果は、本実施の
形態に係る映像コマ数削減装置の効果を示す１例に過ぎ
ず、しきい値の最適化を実施することにより評点は更に
高まる可能性がある。In this case, the value of k is 0.25,
Based on the value of k, the motion amount determination unit 3 and the feature amount determination unit 4
A threshold of 3 was set. The monitor size is 8.
It is 64 inches (aspect ratio 3: 2), and the viewing distance of the monitor is 157 cm. The result shown in FIG. 11 is only an example showing the effect of the image frame number reducing device according to the present embodiment, and the score may be further enhanced by optimizing the threshold value.

【００６５】以上のように、この実施の形態によれば、
一定のフレーム（コマ）レートでの映像表示において、
映像コマ数削減に伴って動きの大きなエッジ部分に生じ
るジャーキネス劣化や２重像劣化を抑制し、その他の部
分の解像度を低下させることなく、画質の落ちない低コ
マ数の映像を作成することが可能となる。この効果によ
り、ＭＰＥＧ−４等の帯域圧縮に併用することも有効と
なる。As described above, according to this embodiment,
In video display at a constant frame (frame) rate,
By reducing jerkiness and double image deterioration that occur in edge parts with large movements due to the reduction of the number of video frames, it is possible to create a low frame number video that does not deteriorate the image quality without lowering the resolution of other parts. It will be possible. Due to this effect, it is also effective to use it for band compression such as MPEG-4.

【００６６】[0066]

【発明の効果】以上に説明したとおり、請求項１、８記
載の発明によれば、動きベクトル量の大きさに基づきベ
クトル量制御信号が出力され、この制御信号に基づいて
低コマ数映像信号が作成されるので、映像コマ数削減の
際に動きの大きなエッジ部分に生じ易いジャーキネスや
２重像といった劣化を低減することができる。As described above, according to the first and eighth aspects of the present invention, the vector amount control signal is output based on the magnitude of the motion vector amount, and the low frame number video signal is output based on this control signal. Is created, it is possible to reduce deterioration such as jerkiness and double images that are likely to occur in an edge portion having large movement when reducing the number of video frames.

【００６７】請求項２、９記載の発明によれば、映像特
徴量の大きさに基づき映像特徴量制御信号が出力され、
この制御信号に基づいて低コマ数映像信号が作成される
ので、映像コマ数削減の際に動きの大きなエッジ部分に
生じ易いジャーキネスや２重像といった劣化を低減する
ことができる。According to the second and ninth aspects of the invention, the video feature amount control signal is output based on the magnitude of the video feature amount,
Since the low frame number video signal is generated based on this control signal, it is possible to reduce the deterioration such as jerkiness and double image which are likely to occur in the edge portion where the motion is large when the number of video frames is reduced.

【００６８】請求項３、１０記載の発明によれば、動き
ベクトル量の大きさ或いは映像特徴量の大きさに基づ
き、各制御信号が出力され、この制御信号に基づいて低
コマ数映像信号が作成されるので、映像コマ数削減の際
に動きの大きなエッジ部分に生じ易いジャーキネスや２
重像といった劣化を低減することができる。According to the third and tenth aspects of the present invention, each control signal is output based on the magnitude of the motion vector amount or the image feature amount, and the low frame number video signal is output based on this control signal. As it is created, jerkiness and 2
It is possible to reduce deterioration such as a double image.

【００６９】請求項４記載の発明によれば、フィルタリ
ング手段で映像コマ抽出映像信号がベクトル量制御信号
に基づいてフィルタリングされ、低コマ数映像切替出力
手段でフィルタリング手段または低コマ数映像作成手段
による出力が切り替えられて出力される。このため、最
もジャーキネスや２重像等の劣化が軽減された低コマ数
映像信号を得ることができる。According to the fourth aspect of the present invention, the video frame extraction video signal is filtered by the filtering means based on the vector amount control signal, and the low frame number video switching output means uses the filtering means or the low frame number video creating means. The output is switched and output. Therefore, it is possible to obtain the low frame number video signal in which the jerkiness and the deterioration of the double image are reduced.

【００７０】請求項５記載の発明によれば、映像特徴量
算出手段でマクロブッロクのエッジが検出される場合に
は、マクロブロック毎の映像信号の映像レベルの分散値
と、映像レベルの分散値閾値とが比較され、そして、こ
の比較結果に基づいた映像特徴量制御信号が出力され
て、この映像特徴量制御信号に基づいて映像コマが削減
された低コマ数映像信号出力が得られるため、映像コマ
数削減の際に最も動きの大きなエッジ部分に生じやすい
ジャーキネスや２重像といった劣化を低減することがで
きる。According to the fifth aspect of the present invention, when the macro feature edge is detected by the video feature amount calculating means, the variance value of the video level of the video signal of each macro block and the variance value of the video level. The threshold value is compared, and a video feature amount control signal based on the comparison result is output, and a low frame number video signal output in which video frames are reduced based on the video feature amount control signal is obtained, When reducing the number of video frames, it is possible to reduce deterioration such as jerkiness and double images that are likely to occur at the edge portion having the largest movement.

【００７１】請求項６記載の発明によれば、映像特徴量
算出手段でマクロブッロクのエッジが検出される場合に
は、あるマクロブロックの映像信号の映像レベルの分散
値と、隣接するマクロブロックの映像信号の映像レベル
の分散値との差が求められ、この分散値差と分散値閾値
とが比較される。つまり、マクロブロック毎の映像レベ
ルの分散値差と分散値閾値とが比較され、各マクロブロ
ックの中の顕著なエッジが検出され、映像コマ数削減の
際に目安にすることができる。According to the sixth aspect of the present invention, when the image feature amount calculating means detects the edge of the macroblock, the variance value of the image level of the image signal of a certain macroblock and the adjacent macroblocks. The difference between the variance of the video level of the video signal is obtained, and this variance difference is compared with the variance threshold. That is, the variance value difference of the video level for each macroblock is compared with the variance value threshold value, and a noticeable edge in each macroblock is detected, which can be used as a guide when reducing the number of video frames.

【００７２】請求項７記載の発明によれば、フィルタリ
ング手段が複数のフィルタによってなり、ベクトル量制
御信号に基づいて選択されので、より最適な、つまり、
より劣化の少ない低コマ数映像信号出力を得ることがで
きる。According to the invention described in claim 7, since the filtering means is composed of a plurality of filters and is selected based on the vector amount control signal, it is more optimal, that is,
It is possible to obtain a low frame number video signal output with less deterioration.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明の背景となる映像コマ数削減を説明する
ための説明図である。FIG. 1 is an explanatory diagram for explaining reduction of the number of video frames which is the background of the present invention.

【図２】本発明の背景となる映像コマ数削減に伴う画質
の劣化を説明するための説明図である。FIG. 2 is an explanatory diagram for explaining deterioration of image quality due to reduction of the number of video frames, which is the background of the present invention.

【図３】本発明の実施の形態に係る映像コマ数削減装置
の全体構成を示すブロック図である。FIG. 3 is a block diagram showing an overall configuration of a video frame number reduction device according to an embodiment of the present invention.

【図４】図３に示すコマ落とし部の一構成例を示すブロ
ック図である。FIG. 4 is a block diagram showing a configuration example of a frame dropping unit shown in FIG.

【図５】図３に示すコマ落とし部に入力される目標コマ
数情報と、コマ落とし部から出力されるコマ落とし映像
信号との対応関係の１例を示すタイムチャートである。5 is a time chart showing an example of a correspondence relationship between target frame number information input to the frame dropping unit shown in FIG. 3 and a frame dropping video signal output from the frame dropping unit.

【図６】図３に示す動きベクトル算出部の一構成例を示
すブロック図である。6 is a block diagram showing a configuration example of a motion vector calculation unit shown in FIG.

【図７】図３に示す動き量判定部の一構成例を示すブロ
ック図である。7 is a block diagram showing a configuration example of a motion amount determination unit shown in FIG.

【図８】図３に示す低コマ数映像作成部の一構成例を示
すブロック図である。FIG. 8 is a block diagram showing a configuration example of a low frame number image creation unit shown in FIG.

【図９】図３に示す低コマ数映像作成部の他の一構成例
を示すブロック図である。9 is a block diagram showing another configuration example of the low frame number image creation unit shown in FIG.

【図１０】本実施の形態に係る映像コマ数削減装置の動
作を示すフローチャートである。FIG. 10 is a flowchart showing the operation of the video frame number reduction device according to the present embodiment.

【図１１】本実施の形態に係る映像コマ数削減装置の効
果を従来の単純な間引き手段を採用した映像コマ数削減
装置と比較した比較結果を示した図である。FIG. 11 is a diagram showing a comparison result of comparing the effect of the image frame number reducing device according to the present embodiment with a conventional image frame number reducing device employing a simple thinning means.

【符号の説明】[Explanation of symbols]

１、４１ コマ落とし部（映像コマ抽出映像信号出力手
段） ２ 動きベクトル算出部（動きベクトル量算出手段） ３ 動き量判定部（ベクトル量制御信号出力手段） ４ 低コマ数映像作成部（低コマ数映像作成手段） １１ 判定・処理部 １２ 映像遅延部 ２１ ＭＢ毎の動きベクトル算出部 ３１ ＭＶとしきい値との大小比較部 ４２ ＭＢの映像特徴量算出部（映像特徴量算出手段） ４３ 特徴量判定部（映像特徴量制御信号出力手段） ４４ ＬＰＦ部（フィルタリング手段） ＳＷ１、ＳＷ２ スイッチ（低コマ数映像切替出力手
段） ＩＭ 入力映像信号 ＬＦ コマ落とし映像信号 ＬＭ 低コマ数映像出力 ＭＶ 動きベクトル量 ＴＦ 目標コマ数情報 ＳＣ 制御信号（ベクトル量制御信号） ＳＣ２ 制御信号（映像特徴量制御信号）1, 41 Frame dropping unit (video frame extraction video signal output unit) 2 Motion vector calculation unit (motion vector amount calculation unit) 3 Motion amount determination unit (vector amount control signal output unit) 4 Low frame number video creation unit (low frame number) Numerical video creation means) 11 Judgment / processing section 12 Video delay section 21 Motion vector calculation section for each MB 31 MV and threshold magnitude comparison section 42 Video feature quantity calculation section (video feature quantity calculation section) 43 MB feature quantity Judgment part (video feature amount control signal output means) 44 LPF part (filtering means) SW1 and SW2 switches (low frame number video switching output means) IM input video signal LF frame dropped video signal LM low frame number video output MV motion vector amount TF Target frame number information SC Control signal (Vector amount control signal) SC2 Control signal (Video feature amount control signal)

フロントページの続き Ｆターム(参考） 5B057 CE06 CH09 CH18 DC16 5C053 FA14 GB05 GB19 GB37 KA24 5C059 KK01 LB07 MA00 NN01 NN28 PP04 SS10 TA07 TA69 TB07 TC12 TC43 TD04 TD08 TD12 UA17 5L096 GA19 GA51 HA04 Continued front page    F-term (reference) 5B057 CE06 CH09 CH18 DC16                 5C053 FA14 GB05 GB19 GB37 KA24                 5C059 KK01 LB07 MA00 NN01 NN28                       PP04 SS10 TA07 TA69 TB07                       TC12 TC43 TD04 TD08 TD12                       UA17                 5L096 GA19 GA51 HA04

Claims (10)

【特許請求の範囲】[Claims] 【請求項１】 一定のフレームレートで入力される複数
の映像コマからなる映像信号の映像コマ数を削減する映
像コマ数削減装置であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力手段
と、 この映像コマ抽出映像信号出力手段によって出力された
映像コマ抽出映像信号から、各映像コマを所定領域に分
割したマクロブロック毎の動きベクトル量を算出する動
きベクトル量算出手段と、 前記動きベクトル量の大きさを予め設定したベクトル量
閾値と比較し、この比較結果に基づいたベクトル量制御
信号を出力するベクトル量制御信号出力手段と、 前記目標コマ数情報および前記ベクトル量制御信号に基
づいて前記映像信号の映像コマ数を削減し、低コマ数映
像信号を作成する低コマ数映像作成手段と、を備えたこ
とを特徴とする映像コマ数削減装置。1. A video frame number reducing apparatus for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate, wherein the target frame number information is set with the number of video frames to be reduced. Based on the video frame, the video frame of the video signal is extracted and output as a video frame extracted video signal, and the video frame extracted video signal output means outputs the video frame extracted video signal. A motion vector amount calculating means for calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area, and a magnitude of the motion vector amount are compared with a preset vector amount threshold value, and based on the comparison result. Vector amount control signal output means for outputting a vector amount control signal, and the video signal based on the target frame number information and the vector amount control signal. Of reducing the number of video frames, and a low frame number image creating means for creating a low number of frames video signal, the number of video frames reduction apparatus characterized by comprising a. 【請求項２】 一定のフレームレートで入力される複数
の映像コマからなる映像信号の映像コマ数を削減する映
像コマ数削減装置であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力手段
と、 この映像コマ抽出映像信号出力手段によって出力された
映像コマ抽出映像信号から、各映像コマを所定領域に分
割したマクロブロック毎に含まれる被写体間の境界線に
相当するエッジの大きさを示す映像特徴量を算出し、出
力する映像特徴量算出手段と、 前記映像特徴量を予め設定した映像特徴量閾値と比較
し、この比較結果に基づいた映像特徴量制御信号を出力
する映像特徴量制御信号出力手段と、 前記目標コマ数情報および前記映像特徴量制御信号に基
づいて前記映像信号の映像コマ数を削減し、低コマ数映
像信号を作成する低コマ数映像作成手段と、を備えたこ
とを特徴とする映像コマ数削減装置。2. A video frame number reducing apparatus for reducing the number of video frames of a video signal composed of a plurality of video frames input at a constant frame rate, wherein the target frame number information is set with the number of video frames to be reduced. Based on the video frame, the video frame of the video signal is extracted and output as a video frame extracted video signal, and the video frame extracted video signal output means outputs the video frame extracted video signal. A video feature amount calculating unit that calculates and outputs a video feature amount indicating an edge size corresponding to a boundary line between subjects included in each macroblock obtained by dividing each video frame into a predetermined region, and the video feature amount, Image feature amount control signal output means for comparing with a preset image feature amount threshold value and outputting an image feature amount control signal based on the comparison result; Serial image based on characteristic data control signal to reduce the number of video frames of the video signal, and a low frame number image creating means for creating a low number of frames video signal, the number of video frames reduction apparatus characterized by comprising a. 【請求項３】 一定のフレームレートで入力される複数
の映像コマからなる映像信号の映像コマ数を削減する映
像コマ数削減装置であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力手段
と、 この映像コマ抽出映像信号出力手段によって出力された
映像コマ抽出映像信号から、各映像コマを所定領域に分
割したマクロブロック毎の動きベクトル量を算出する動
きベクトル量算出手段と、 前記動きベクトル量の大きさを予め設定したベクトル量
閾値と比較し、この比較結果に基づいたベクトル量制御
信号を出力するベクトル量制御信号出力手段と、 前記映像コマ抽出映像信号出力手段によって出力された
映像コマ抽出映像信号から、各映像コマを所定領域に分
割したマクロブロック毎に含まれる被写体間の境界線に
相当するエッジの大きさを示す映像特徴量を算出し、出
力する映像特徴量算出手段と、 前記映像特徴量を予め設定した映像特徴量閾値と比較
し、この比較結果に基づいた映像特徴量制御信号を出力
する映像特徴量制御信号出力手段と、 前記ベクトル量制御信号と前記映像特徴量制御信号との
少なくとも一方と、前記目標コマ数情報とに基づいて前
記映像信号の映像コマ数を削減し、低コマ数映像信号を
作成する低コマ数映像作成手段と、を備えたことを特徴
とする映像コマ数削減装置。3. A video frame number reducing apparatus for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate, wherein the target frame number information is set with the number of video frames to be reduced. Based on the video frame, the video frame of the video signal is extracted and output as a video frame extracted video signal, and the video frame extracted video signal output means outputs the video frame extracted video signal. A motion vector amount calculating means for calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area, and a magnitude of the motion vector amount are compared with a preset vector amount threshold value, and based on the comparison result. Vector amount control signal output means for outputting a vector amount control signal, and video frame extracted video output by the video frame extracted video signal output means Video feature amount calculation means for calculating and outputting a video feature amount indicating an edge size corresponding to a boundary line between subjects included in each macroblock obtained by dividing each video frame into a predetermined area, An image feature amount control signal output means for comparing the feature amount with a preset image feature amount threshold value and outputting an image feature amount control signal based on the comparison result, the vector amount control signal and the image feature amount control signal And a low frame number image creating means for creating a low frame number image signal by reducing the number of image frames of the image signal based on the target frame number information. Frame reduction device. 【請求項４】 前記映像コマ抽出映像信号を前記ベクト
ル量制御信号に基づいてフィルタリング処理し出力する
フィルタリング手段と、 このフィルタリング手段または前記低コマ数映像作成手
段による出力のいずれか１つの出力を切り替えて出力す
る低コマ数映像切替出力手段とを備えたことを特徴とす
る請求項１または請求項３に記載の映像コマ数削減装
置。4. A filtering means for filtering and outputting the video frame extracted video signal based on the vector amount control signal, and switching between any one output of the filtering means and the output by the low frame number video creating means. 4. A device for reducing the number of video frames according to claim 1, further comprising: a low-frame-number video switching output unit that outputs the video frame. 【請求項５】 前記映像特徴量算出手段は、前記マクロ
ブロックのエッジの検出に際して、前記マクロブロック
の映像レベルの分散値と予め設定した閾値とを比較する
ことを特徴とする請求項２または請求項３に記載の映像
コマ数削減装置。5. The image feature amount calculating means compares the variance value of the image level of the macroblock with a preset threshold value when detecting the edge of the macroblock. Item 3. A device for reducing the number of video frames according to Item 3. 【請求項６】 前記映像特徴量算出手段は、前記マクロ
ブロックのエッジの検出に際して、前記マクロブロック
の映像レベルの分散値を基に隣接マクロブロック間の分
散値の差と予め設定した閾値とを比較することを特徴と
する請求項２または請求項３に記載の映像コマ数削減装
置。6. The image feature amount calculating means, when detecting an edge of the macroblock, determines a difference between variance values of adjacent macroblocks and a preset threshold value based on the variance value of the video level of the macroblock. The image frame number reducing device according to claim 2 or 3, which is compared. 【請求項７】 前記フィルタリング手段は、前記ベクト
ル量制御信号に基づいて、予め具備された複数のフィル
タのうちからいずれか１つを選択することを特徴とする
請求項４に記載の映像コマ数削減装置。7. The number of video frames according to claim 4, wherein the filtering unit selects any one of a plurality of filters provided in advance based on the vector amount control signal. Reduction device. 【請求項８】 一定のフレームレートで入力される複数
の映像コマからなる映像信号の映像コマ数を削減する映
像コマ数削減方法であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力ステ
ップと、 この映像コマ抽出映像信号出力ステップによって出力さ
れた映像コマ抽出映像信号から、各映像コマを所定領域
に分割したマクロブロック毎の動きベクトル量を算出す
る動きベクトル量算出ステップと、 前記動きベクトル量の大きさを予め設定したベクトル量
閾値と比較し、この比較結果に基づいたベクトル量制御
信号を出力するベクトル量制御信号出力ステップと、 前記目標コマ数情報および前記ベクトル量制御信号に基
づいて前記映像信号の映像コマ数を削減し、低コマ数映
像信号を作成する低コマ数映像作成ステップと、を備え
たことを特徴とする映像コマ数削減方法。8. A method for reducing the number of video frames of a video signal composed of a plurality of video frames input at a constant frame rate, wherein the target frame number information sets the number of video frames to be reduced. On the basis of the video frame extraction video signal output step of extracting a video frame of the video signal and outputting as a video frame extracted video signal, from the video frame extracted video signal output by the video frame extracted video signal output step, A motion vector amount calculation step of calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area, and comparing the magnitude of the motion vector amount with a preset vector amount threshold, and based on the comparison result. A vector quantity control signal output step of outputting a vector quantity control signal; and a step based on the target frame number information and the vector quantity control signal. There reduces the number video frames of the video signal, the number of video frames reduction method of a low frame number image generating step of generating a low number of frames video signal, comprising the. 【請求項９】 一定のフレームレートで入力される複数
の映像コマからなる映像信号の映像コマ数を削減する映
像コマ数削減方法であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力ステ
ップと、 この映像コマ抽出映像信号出力ステップによって出力さ
れた映像コマ抽出映像信号から、各映像コマを所定領域
に分割したマクロブロック毎に含まれる被写体間の境界
線に相当するエッジの大きさを示す映像特徴量を算出
し、出力する映像特徴量算出ステップと、 前記映像特徴量を予め設定した映像特徴量閾値と比較
し、この比較結果に基づいた映像特徴量制御信号を出力
する映像特徴量制御信号出力ステップと、 前記目標コマ数情報および前記映像特徴量制御信号に基
づいて前記映像信号の映像コマ数を削減し、低コマ数映
像信号を作成する低コマ数映像作成ステップと、を備え
たことを特徴とする映像コマ数削減方法。9. A method for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate, wherein the target frame number information is set with the number of video frames to be reduced. On the basis of the video frame extraction video signal output step of extracting a video frame of the video signal and outputting as a video frame extracted video signal, from the video frame extracted video signal output by the video frame extracted video signal output step, A video feature amount calculating step of calculating and outputting a video feature amount indicating an edge size corresponding to a boundary line between subjects included in each macroblock obtained by dividing each video frame into a predetermined area; A video feature amount control signal output step of comparing with a preset video feature amount threshold value and outputting a video feature amount control signal based on the comparison result; A low-frame number video creating step for creating a low-frame number video signal by reducing the number of video frames of the video signal based on the frame number information and the video feature amount control signal. How to reduce the number. 【請求項１０】 一定のフレームレートで入力される複
数の映像コマからなる映像信号の映像コマ数を削減する
映像コマ数削減方法であって、 削減する映像コマ数を設定した目標コマ数情報に基づい
て、前記映像信号の映像コマを抽出して、映像コマ抽出
映像信号として出力する映像コマ抽出映像信号出力ステ
ップと、 この映像コマ抽出映像信号出力ステップによって出力さ
れた映像コマ抽出映像信号から、各映像コマを所定領域
に分割したマクロブロック毎の動きベクトル量を算出す
る動きベクトル量算出ステップと、 前記動きベクトル量の大きさを予め設定したベクトル量
閾値と比較し、この比較結果に基づいたベクトル量制御
信号を出力するベクトル量制御信号出力ステップと、 前記映像コマ抽出映像信号出力ステップによって出力さ
れた映像コマ抽出映像信号から、各映像コマを所定領域
に分割したマクロブロック毎に含まれる被写体間の境界
線に相当するエッジの大きさを示す映像特徴量を算出
し、出力する映像特徴量算出ステップと、 前記映像特徴量を予め設定した映像特徴量閾値と比較
し、この比較結果に基づいた映像特徴量制御信号を出力
する映像特徴量制御信号出力ステップと、 前記ベクトル量制御信号と前記映像特徴量制御信号との
少なくとも一方と、前記目標コマ数情報とに基づいて前
記映像信号の映像コマ数を削減し、低コマ数映像信号を
作成する低コマ数映像作成ステップと、を備えたことを
特徴とする映像コマ数削減方法。10. A method for reducing the number of video frames of a video signal consisting of a plurality of video frames input at a constant frame rate, wherein the target frame number information is set with the number of video frames to be reduced. On the basis of the video frame extraction video signal output step of extracting a video frame of the video signal and outputting as a video frame extracted video signal, from the video frame extracted video signal output by the video frame extracted video signal output step, A motion vector amount calculation step of calculating a motion vector amount for each macroblock obtained by dividing each video frame into a predetermined area, and comparing the magnitude of the motion vector amount with a preset vector amount threshold, and based on the comparison result. Output in a vector quantity control signal output step of outputting a vector quantity control signal, and in the video frame extraction video signal output step A video feature amount that indicates the size of an edge corresponding to the boundary line between the subjects included in each macroblock obtained by dividing each video frame into a predetermined area is calculated from the extracted video frame image signal and output. A calculating step; an image feature amount control signal outputting step of comparing the image feature amount with a preset image feature amount threshold value; and outputting an image feature amount control signal based on the comparison result; the vector amount control signal; A low frame number image creating step of creating a low frame number image signal by reducing the number of image frames of the image signal based on at least one of the image feature amount control signal and the target frame number information. A method for reducing the number of video frames, which is characterized in that
JP2002046779A 2002-02-22 2002-02-22 Apparatus and method for reducing the number of video frames Pending JP2003250160A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002046779A JP2003250160A (en) 2002-02-22 2002-02-22 Apparatus and method for reducing the number of video frames

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002046779A JP2003250160A (en) 2002-02-22 2002-02-22 Apparatus and method for reducing the number of video frames

Publications (1)

Publication Number Publication Date
JP2003250160A true JP2003250160A (en) 2003-09-05

Family

ID=28660065

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002046779A Pending JP2003250160A (en) 2002-02-22 2002-02-22 Apparatus and method for reducing the number of video frames

Country Status (1)

Country Link
JP (1) JP2003250160A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007336263A (en) * 2006-06-15 2007-12-27 Fujifilm Corp Image processing method, apparatus, and program
JP2009177353A (en) * 2008-01-22 2009-08-06 Canon Inc Encoder, method of controlling the same, and computer program
JP2010015483A (en) * 2008-07-07 2010-01-21 Sony Corp Image processing device, image processing method and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007336263A (en) * 2006-06-15 2007-12-27 Fujifilm Corp Image processing method, apparatus, and program
JP2009177353A (en) * 2008-01-22 2009-08-06 Canon Inc Encoder, method of controlling the same, and computer program
JP2010015483A (en) * 2008-07-07 2010-01-21 Sony Corp Image processing device, image processing method and program

Similar Documents

Publication Publication Date Title
US7952596B2 (en) Electronic devices that pan/zoom displayed sub-area within video frames in response to movement therein
US7242850B2 (en) Frame-interpolated variable-rate motion imaging system
KR101414669B1 (en) Method and device for adaptive video presentation
US20070075969A1 (en) Method for controlling display of image according to movement of mobile terminal
US20040258152A1 (en) System and method for using motion vectors for object tracking
US8467509B2 (en) Video displaying apparatus, video displaying system and video displaying method
JPH0220185A (en) Moving image transmission system
US7646929B2 (en) Signal-transmitting system, data-transmitting apparatus and data-receiving apparatus
JP2010503006A5 (en)
JP4714039B2 (en) Video playback apparatus and video playback method
US7889229B2 (en) Security surveillance system capable of outputting still images together with moving images
US7489728B2 (en) Apparatus and method for coding moving image
KR100719841B1 (en) Method for creation and indication of thumbnail view
CN111327908A (en) Video processing method and related device
JP2008299241A (en) Image processing apparatus and display
CN110740316A (en) Data coding method and device
JP4029316B2 (en) Image type identification method and apparatus and image processing program
KR101280443B1 (en) apparatus of processing regional image and method thereof
US20200106821A1 (en) Video processing apparatus, video conference system, and video processing method
JP2003250160A (en) Apparatus and method for reducing the number of video frames
JP2012034128A (en) Image processing apparatus and imaging apparatus using the same
JP2011129995A (en) Communication terminal device, image processing method and program for the same, and image communication system
TW200939785A (en) Method and system for motion compensated picture rate up-conversion using information extracted from a compressed video stream
JPH09298739A (en) Image extraction device
US11991451B2 (en) Imaging device and imaging processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040409

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060531

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070129

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071010