JPH06292203A - 動画像解析装置 - Google Patents

動画像解析装置

Info

Publication number
JPH06292203A
JPH06292203A JP5098439A JP9843993A JPH06292203A JP H06292203 A JPH06292203 A JP H06292203A JP 5098439 A JP5098439 A JP 5098439A JP 9843993 A JP9843993 A JP 9843993A JP H06292203 A JPH06292203 A JP H06292203A
Authority
JP
Japan
Prior art keywords
motion vector
coding
motion
moving image
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5098439A
Other languages
English (en)
Other versions
JP3272466B2 (ja
Inventor
Hiroyuki Kumazawa
宏之 熊沢
Minoru Ozaki
稔 尾崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP09843993A priority Critical patent/JP3272466B2/ja
Publication of JPH06292203A publication Critical patent/JPH06292203A/ja
Application granted granted Critical
Publication of JP3272466B2 publication Critical patent/JP3272466B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【目的】 高速ハードウェアを必要とせず、極めて少な
い計算負荷で動画像の動きを検出して、動画像解析を行
うことが可能な動画像解析装置を得る。 【構成】 動画像符号化装置の動き補償部より抽出した
動きベクトル、または動画像符号化データより抽出した
動きベクトルの分布を計測してそれを解析し、動画像中
に現われる動きの検出を行い、また、動きベクトルを推
定する動きベクトル推定手段、特定の領域を指定する領
域設定手段、抽出された動きベクトルを積分する積分手
段を付加し、また、動画像符号化装置より抽出した符号
化モード、または動画像符号化データより抽出した符号
化モードの空間分布を解析して、動画像中に現われる動
きを検出する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】この発明は、動画像の中に現われ
る動きを検出して解析する動画像解析装置に関するもの
である。
【0002】
【従来の技術】図15は例えば、1991年電子情報通
信学会春季全国大会にて発表された論文「ビデオ編集の
ためのシーン自動記述の一考察」(論文集第7−211
頁 D−499)に示された、従来の動画像解析装置に
おける動画像の解析のアルゴリズムを示すフローチャー
トである。図において、ST1はフレームtの画像を格
子状に分割するステップであり、ST2は特徴点を設定
するステップである。ST3はテンプレートパターンの
マッチングを行うステップであり、ST4はオプティカ
ルフローの解析を行うステップである。ST5は次のフ
レームを処理するための準備ステップであり、ST6は
終了判定のステップである。
【0003】次に動作について説明する。ここで、動画
像中の動きを前記オプティカルフローと呼んでいる。ま
ず、ステップST1において、フレームtの動画像F
(t)をm×n個の格子状に分割し、次いで、ステップ
ST2で各格子の中心位置を特徴点とするとともに、格
子内の画像を次フレームt+1における特徴点の対応点
を求める際に使用するテンプレートとする。次に、ステ
ップST3にて、そのフレームt+1の画像F(t+
1)上で前記テンプレートと最もよく一致する格子位置
を求め、フレームt上の特徴点からそのフレームt+1
上で見つかった格子の中心位置へのベクトル、すなわち
動きベクトルをオプティカルフローとする。そして、ス
テップST4においてそのオプティカルフローの解析を
行った後、ステップST5でtをインクリメントし、ス
テップST6にて終了の判定を行う。判定の結果、終了
していなければ、処理をステップST1に戻して、以上
の処理を繰り返す。
【0004】なお、動画像解析は一般に、動画像に対し
てエッジ検出などに代表されるフィルタリング処理をは
じめとして、様々な処理を施した結果の解析に基づいて
動画像中に含まれる情報の抽出、解析を行うものであ
り、上述のような動画像中に現われる動きを検出してそ
れを解析する技術は古くから開発されており、動画像の
編集や侵入者の監視などの分野で実用化されつつある。
【0005】
【発明が解決しようとする課題】従来の動画像解析装置
は以上のような解析方法を用いて動画像の解析を行って
いるので、テンプレートとフレームt+1の画像の画素
ブロックとのパターンマッチングを行い、当該フレーム
上で最もよく一致する画素ブロックを見つけることが必
要で、それには多大な計算量を要するものであり、高速
化のためには特殊な画像処理ハードウェアが必要であっ
たり、あるいはソフトウェア処理では計算時間がかかり
すぎるため、画素を間引くことにより画像サイズを小さ
くして処理を行い、処理時間の短縮を図ることになり、
その結果、前者では高速ハードウェアの使用による装置
価格の上昇はさけられず、また後者では画素の間引きに
よる動きの検出精度が低下するなどの問題点があった。
【0006】この発明は上記のような問題点を解消する
ためになされたものであり、動き補償予測を用いた動画
像符号化装置で計測される動きベクトルや、フレーム間
符号化とフレーム内符号化という符号化モードを適応的
に切り換える動画像符号化装置の符号化モードを抽出す
ることにより、極めて少ない計算負荷で動画像の動きを
検出し、動画像解析を行う動画像解析装置を得ることを
目的とする。
【0007】
【課題を解決するための手段】請求項1に記載の発明に
係る動画像解析装置は、動画像符号化で利用される動き
ベクトルを抽出する動きベクトル抽出手段と、動きベク
トルの分布を計測する計測手段と、該計測結果を解析す
る動きベクトル解析手段とを設けたものでる。
【0008】また、請求項2に記載の発明に係る動画像
解析装置は、動きベクトル抽出手段が動画像符号化デー
タから動きベクトルを抽出する機能を有するものでる。
【0009】また、請求項3に記載の発明に係る動画像
解析装置は、動きベクトルが存在しない場合に、動きベ
クトルを推定する動きベクトル推定手段を設けたもので
る。
【0010】また、請求項4に記載の発明に係る動画像
解析装置は、動画像上に特定の領域を設定する領域設定
手段を設けたものである。
【0011】また、請求項5に記載の発明に係る動画像
解析装置は、動きベクトル抽出手段により抽出された動
きベクトルを複数フレームに渡って積分する積分手段を
設けたものである。
【0012】また、請求項6に記載の発明に係る動画像
解析装置は、フレーム間符号化方式とフレーム内符号化
方式とを適応的に切り換えて動画像を符号化する動画像
符号化装置で、どちらの符号化方式が適用されて符号化
されたかを識別するための符号化モードを抽出する符号
化モード抽出手段と、その符号化モードの空間分布を解
析する符号化モード解析手段とを設けたものである。
【0013】また、請求項7に記載の発明に係る動画像
解析装置は、符号化モード抽出手段が、動画像符号化デ
ータから符号化モードを抽出する機能を有するものであ
る。
【0014】
【作用】請求項1に記載の発明におけるベクトル解析手
段は、ベクトル抽出手段が抽出した、動画像符号化装置
の動き補償部の計測した動きベクトルの分布を、計測手
段にて計測した計測結果を解析することにより、極めて
少ない計算負荷で動画像の動きを検出して、動画像解析
を行うことを可能とする。
【0015】また、請求項2に記載の発明におけるベク
トル解析手段は、ベクトル抽出手段が動画像符号化デー
タから抽出した動きベクトルの分布を、計測手段にて計
測した計測結果を解析することにより、極めて少ない計
算負荷で動画像の動きを検出して、動画像解析を行うこ
とを可能とする。
【0016】また、請求項3に記載の発明における動き
ベクトル推定手段は、フレーム内符号化が適用されたた
めに動きベクトルが存在しなくなった場合に、現フレー
ムまたは過去のフレームまたは未来のフレームの動きベ
クトルから現動きベクトルを推定する。
【0017】また、請求項4に記載の発明における領域
設定手段は、動画像上に、動きベクトル抽出手段がその
領域についてのみ動きベクトルの抽出を行う特定の領域
を設定する。
【0018】また、請求項5に記載の発明における積分
手段は、動きベクトル抽出手段が抽出した動きベクトル
を複数のフレームに渡って積分を行うことにより、動き
ベクトルを計算し、計測手段は該積分手段により算出さ
れた動きベクトルの分布を計測する。
【0019】また、請求項6に記載の発明における符号
化モード解析手段は、符号化モード抽出手段が動画像符
号化装置より抽出した、当該動画像符号化装置がフレー
ム間符号化方式とフレーム内符号化方式のいずれを適用
して符号化したかを示す符号化モードの空間分布を解析
することにより、極めて少ない計算負荷で動画像の動き
を検出して、動画像解析を行うことを可能とする。
【0020】また、請求項7に記載の発明における符号
化モード解析手段は、符号化モード抽出手段が動画像符
号化データより抽出した符号化モードの空間分布を解析
することにより、極めて少ない計算負荷で動画像の動き
を検出して、動画像解析を行うことを可能とする。
【0021】
【実施例】実施例1.以下、この発明の実施例1を図に
ついて説明する。図1は請求項1に記載した発明の一実
施例を示す構成図である。図において、1は動画像を撮
像するカメラであり、2はこのカメラ1からの映像信号
をアナログ・ディジタル変換(以下、A/D変換とい
う)するA/D変換器である。3はフレーム間予測に動
き補償予測を用いて、このA/D変換器2にてディジタ
ル化された画像データの符号化を行う動画像符号化装置
である。
【0022】この動画像符号化装置3内において、11
は直前の1フレーム分の画像データが格納されているフ
レームメモリであり、12はこのフレームメモリ11よ
り読み出された画像データの動き補償を行う動き補償部
である。13はA/D変換器2より入力された画像デー
タと動き補償部12で動き補償された直前のフレームの
画像データとの差分を算出する減算器であり、14はこ
の減算器13の出力を量子化してそれを動き補償部12
の出力と多重化し、動画像符号化データとして出力する
符号化部である。15はこの符号化部14にて量子化さ
れたデータを復号化する局所復号部であり、16はこの
局所復号部15の出力するデータと前記動き補償部12
からのデータとを加算してフレームメモリ11に格納す
る加算器である。
【0023】また、4は前記動画像符号化装置3の動き
補償部12で計測される動きベクトルの抽出を行う動き
ベクトル抽出手段であり、5はこの動きベクトル抽出手
段4によって抽出された動きベクトルの分布を計測する
計測手段、6はこの計測手段5による計測結果を解析す
る動きベクトル解析手段である。
【0024】次に動作について説明する。この実施例1
では、カメラ1によってある点が監視されている場合に
ついて示している。カメラ1で撮像されたアナログの映
像信号はA/D変換器2でディジタル化された後、動画
像符号化装置3によって符号化される。ここで、動画像
符号化装置3は前述のようにフレーム間予測として動き
補償予測を用いている。この動き補償予測はフレーム間
で同一位置にある画素どうしを減算するという単純なフ
レーム間差分ではなく、図2のように被写体の動きを検
出し、この動きに応じてフレーム間差分をとる画素を可
変にできる方式である。
【0025】図1、図2を用いて、この動き補償予測を
用いた動画像符号化装置3の動作原理を次に説明する。
まず、動き補償部12は、図2に符号21を付して示し
た現フレームにおける適当な大きさのブロック22が、
フレームメモリ11に記憶されている図2に符号23を
付して示した前フレームのどの位置のブロック24に対
応するか、すなわちパターンマッチングを行った結果、
最もよく一致するブロック24を求め、動きベクトル2
5を検出する。さらに、動き補償部12は前記動きベク
トル25を用いて予測に用いる前フレーム23の画素の
ブロック24を、フレームメモリ11から読み出して、
減算器13に与える。減算器13では、現フレーム21
のブロック22と前フレーム23のブロック24との差
分がとられる。例えば、動きの全くないフレームが連続
する場合には動きベクトルは0となり、単純なフレーム
間差分と一致する。
【0026】次に、符号化部14は減算器13の出力信
号の画像空間方向の冗長と統計的冗長とを抑圧し、圧縮
されたデータを出力する。この符号化部14では、一般
的に入力信号に対して直交変換の1つである離散コサイ
ン変換を施し、変換係数を有限な代表信号レベルに量子
化した後、エントロピ符号化を行う。そして、符号化部
14の出力は動き補償部12で算出される動きベクトル
と多重化されて動画像符号化データとして出力される。
一方、符号化部14内で量子化されたデータは局所復号
部15で復号化され、加算器16にて動き補償部12か
らの予測信号と加算される。この加算器16の出力は現
フレームの符号化ブロック22の復号結果であり、これ
はフレームメモリ11に格納され、次フレームの予測に
際して利用される。
【0027】次に、図1に基づいてこの実施例1の主要
部分の説明を行う。動きベクトル抽出手段4は動き補償
部12で計測される動きベクトルを、一般的に、2次元
のベクトル情報である水平方向の変位および垂直方向の
変位と、動きベクトルの発生位置との組として抽出す
る。計測手段5は動きベクトル抽出手段4からその動き
ベクトルを受けて、動きベクトル解析手段6の解析内容
に応じて1フレームごとの動きベクトルの分布を計測す
る。すなわち、その計測方法としては以下のような方法
がある。
【0028】2次元の動きベクトル(x,y)の生起
頻度を2次元のヒストグラムとして計測する。なお、こ
の計測では、動きベクトルの発生位置情報は欠落する。 動きベクトルの発生位置ごとに2次元の動きベクトル
を計測する。 (x,y)を次の式(1)により(r,θ)、すなわ
ちベクトルの(大きさ、方向)に座標変換して、上記
,の計測を行う。
【0029】 r=(x2 +y21/2 θ=tan-1(y/x) ・・・・・(1)
【0030】この計測結果を受けた動きベクトル解析手
段6は、動物体検出のような動き解析を行う。すなわ
ち、動物体は動きベクトルのヒストグラムから検出可能
である。動きベクトルのヒストグラムが水平方向への変
位xおよび垂直方向への変位yの発生頻度分布として計
測されている場合、xまたはyがあるしきい値よりも大
である動きベクトルが発生していれば、動物体が存在す
ると判定する。また同様に、動きベクトルが大きさrお
よび方向θの発生頻度分布として計測されている場合に
は、rがあるしきい値よりも大である動きベクトルが発
生していれば、動物体が存在すると判定する。
【0031】なお、この動きベクトル解析手段6は以下
の実施例2から実施例6で説明するような解析も可能で
ある。
【0032】実施例2.まず、動きベクトル解析手段6
は以下のようにして動物体の移動速度を計測する。すな
わち、動きベクトルから移動速度を求めるには、カメラ
1から動きベクトル発生地点までの距離、および3次元
空間内でのカメラ1の向きと動きベクトルの向きとの関
係が既知である必要がある。従って、一般の撮影条件で
は動きベクトルから移動速度を求めることは難しい。し
かしカメラ1が固定され、定点を観測するという場合、
例えば固定されたカメラ1による定点の監視(特に道路
やトンネルでの自動車の通行監視)などでは、あらかじ
め上記の条件を知ることが可能であり、動きベクトルの
大きさから移動速度を求めることができる。
【0033】また、後に実施例5で述べる動物体の形状
および大きさ計測で検出される動物体については、1つ
の動物体から計測される複数の動きベクトルを平均する
ことにより、動物体自身の移動速度が求められる。
【0034】実施例3.また、動きベクトル解析手段6
は動物体の移動方向の計測を行う。すなわち、移動方向
を動きベクトルから前記式(1)を用いて求める。従っ
て、後に実施例5で述べる動物体の形状および大きさ計
測で検出される動物体については、1つの動物体から計
測される複数の動きベクトルを平均することにより、動
物体自身の移動方向を求めることができる。
【0035】なお、移動方向計測の応用としては、正常
時にはある一定方向の移動しか発生しない事象、例えば
交通流を観測中に、全く異なる方向の移動を観測するこ
とによる異常(交通事故)の検出などがある。
【0036】実施例4.また、動きベクトル解析手段6
は動物体の個数の計測を行う。図3はある形の物体が動
いたときに発生する動きベクトルの分布を説明するため
の概念図である。図3(a)は一様な輝度または色を持
つ物体が30から31に動いたときに現われる動きベク
トル32の分布であり、動きベクトル32が物体の境界
(エッジ)部分にだけ現われている。一方、図3(b)
は一様ではない輝度または色を持つ物体が33から34
に動いたときに現われる動きベクトル35の分布であ
り、物体の境界部分および内部で動きベクトル35が現
われている。従って、両者とも同一方向の動きベクトル
によって囲まれる閉領域の数を数えることにより、画面
中の動物体の個数を計測できることは明らかである。
【0037】実施例5.また、動きベクトル解析手段6
は動物体の形状および大きさの計測を行う。図3に示し
たように、動きベクトルは動物体の境界部分に沿って分
布するため、閉領域を形成する動きベクトルの分布形が
物体の形状に、閉領域の面積が大きさになる。ただし、
正確な形状、大きさを求めるには、カメラ1と動物体の
位置関係、すなわち距離と角度が既知である必要があ
る。これは一般的な撮像では難しいが、実施例2で説明
したように、カメラ1が固定され、ある定点を監視して
いるような条件では、あらかじめ調べておくことは可能
である。
【0038】実施例6.さらに、動きベクトル解析手段
6ではカメラ1の動きやカメラ1の操作の検出も可能で
ある。すなわち、画面全体のブロックから同一方向、同
じ大きさの動きベクトルが検出される場合はカメラ1の
回転(パン)であり、全動きベクトルの方向が同じで、
大きさが異なる場合はカメラ1がある方向に並行移動し
たことがわかる。また、動きベクトルの大きさの時間変
化を検出することにより、上記並行移動や回転のスピー
ドも判明する。また、その他のカメラ1の操作、例えば
ズームは動きベクトルが放射状になること、カメラ1の
操作と動物体とが複合した場合は、カメラ1の操作に特
徴的な動きベクトル分布の中に異なった分布をする動き
ベクトルが存在することで検出可能である。
【0039】実施例7.次にこの発明の実施例7を図に
ついて説明する。図4は請求項2に記載した発明の一実
施例による動画像解析装置を示す構成図であり、図にお
いて、1はカメラ、2はA/D変換器、3は動画像符号
化装置、4は動きベクトル抽出手段、5は計測手段、6
は動きベクトル解析手段であり、図1に同一符号を付し
た部分に相当するものである。
【0040】また、40は送信側の通信インタフェー
ス、41は受信側の通信インタフェースであり、42は
それらの間を接続している通信回線である。43は通信
インタフェース41を介して受け取った動画像符号化デ
ータを復号化する動画像復号化装置であり、44は復号
化された画像データを表示する表示装置である。45は
通信インタフェース41からの動画像符号化データを処
理する中央処理装置(以下、CPUという)、46はこ
のCPU45が処理に際して使用する制御プログラムを
格納しているメモリ、47は動画像符号化データが一旦
格納される記憶装置としてのディスクであり、48はこ
れら通信インタフェース41、CPU45、メモリ4
6、ディスク47の間を接続しているCPUバスであ
る。なお、動きベクトル抽出手段4、計測手段5、およ
び動きベクトル解析手段6はCPU45にてソフトウェ
ア的に実現されるものである。
【0041】次に動作について説明する。カメラ1の出
力がA/D変換器2にてディジタル化されて動画像符号
化装置3に送られ、動画像符号化装置3で符号化されて
動画像符号化データとして通信インタフェース40より
通信回線42に送出される。受信側では、その動画像符
号化データを通信インタフェース41で受け取り、通信
インタフェース41はそれを動画像復号化装置43およ
びCPUバス48に出力する。通信インタフェース41
よりその動画像符号化データを受け取った動画像復号化
装置43は、それを復号化して表示装置44に表示す
る。
【0042】一方、CPU45はメモリ46に格納され
ている制御プログラムに従って動作し、通信インタフェ
ース41を介してCPUバス48側に取り込まれた動画
像符号化データの処理を行う。この処理に関しては、C
PU45が直接通信インタフェース41から取り込まれ
た動画像符号化データを実時間で処理する場合と、一
旦、動画像符号化データをディスク47に取り込んでか
ら処理を行う場合とが考えられる。CPU45で行われ
る処理は、動画像符号化データから動きベクトルを抽出
する動きベクトル抽出手段4、動きベクトルの分布を計
測する計測手段5、および動きベクトルの解析を行う動
きベクトル解析手段6をソフトウェア的に実現するもの
であり、その内容は実施例1から実施例6で説明したも
のと同じである。
【0043】実施例8.次にこの発明の実施例8を図に
ついて説明する。図5は請求項3に記載した発明の一実
施例による動画像解析装置を示す構成図である。この実
施例は、動きベクトル推定手段7を持つことが実施例1
と異なる点である。この動きベクトル推定手段7は、あ
るブロックで動き補償予測を用いないフレーム内符号化
が適用されたため、当該ブロックが動きベクトルを持た
ない場合に、その動きベクトルを推定するものである。
ブロックに対してフレーム内符号化が適用されるのは、
フレーム間での動きが激しいため、動き補償予測が適用
できない場合と、プロトコルの制限として、ある一定間
隔以内ごとにフレーム内符号化を挿入するよう決められ
ている場合とがある。ここで、動きベクトル推定手段7
では、動きベクトルを持たないブロックの周辺ブロック
の動きベクトルの荷重平均値を当該ブロックの動きベク
トルとする。
【0044】次にこの実施例8の動作について説明す
る。動きベクトル抽出手段4は動画像符号化装置3の動
き補償部12で計測される動きベクトルを、一般的に2
次元のベクトル情報である水平方向の変位および垂直方
向の変位と、動きベクトルの発生位置との組として抽出
する。また、動きベクトル推定手段7は、動きベクトル
が存在しない場合に、上述した方法によって動きベクト
ルを推定する。計測手段5は動きベクトル抽出手段4お
よび動きベクトル推定手段7から動きベクトルを受け
て、動きベクトル解析手段6の解析内容に応じて1フレ
ームごとの動きベクトルの分布を計測する。この部分の
計測方法は実施例1で説明したものと同様である。ま
た、動きベクトル解析手段6の解析内容も実施例1から
実施例6で説明したものと同様である。
【0045】また、動きベクトル推定手段7の他の動作
方法を以下の実施例9から実施例13によって説明す
る。
【0046】実施例9.動きベクトル推定手段7は前フ
レームの動きベクトルを記憶しておき、前フレームの同
一位置およびその周辺のブロックの動きベクトルと現フ
レームの周辺ブロックの動きベクトルとの荷重平均を当
該ブロックの動きベクトルとする。
【0047】実施例10.動きベクトル推定手段7は動
きベクトルの推定を1フレーム分遅延させ、後フレーム
の同一位置、およびその周辺のブロックの動きベクトル
と現フレームの周辺ブロックの動きベクトルとの荷重平
均を当該ブロックの動きベクトルとする。
【0048】実施例11.動きベクトル推定手段7は前
フレームと後フレームの同一位置、およびその周辺の動
きベクトルと現フレームの周辺ブロックの動きベクトル
との荷重平均を当該ブロックの動きベクトルとする。
【0049】実施例12.動きベクトル推定手段7は図
6に示すように、1フレーム前の復号画像を動画像符号
化装置3のフレームメモリ11から受けて記憶してお
き、この復号画像上のブロックと動きベクトルを持たな
い現フレームのブロックとのブロックマッチング(誤差
が最小となるブロックの探索)を行うことにより動きベ
クトルを求める。このとき、動きベクトルを持たないブ
ロックの周辺ブロックの動きベクトルを参照して、ある
程度ブロックマッチングを行う範囲を限定することによ
り、計算負荷を低減できる。
【0050】実施例13.さらに、この動きベクトル推
定手段7の動作は、実施例8から実施例12の方法をを
組み合わせることも可能である。まず、第一段階の動き
ベクトル推定として、上記実施例8ないし実施例11で
説明したいずれかの方式を用いる。このとき、動きベク
トルの推定に用いた動きベクトルの分散が大きい場合に
は、第二段階の動きベクトル推定として、実施例12の
方法を用いて動きベクトルを求める。
【0051】実施例14.次にこの発明の実施例14を
図について説明する。図7は請求項4に記載した発明の
一実施例による動画像解析装置を示す構成図である。同
図において、8は画面上に特定の領域を設定する領域設
定手段であり、この領域設定手段8以外は図1全く同一
の構成であるので、ここでは、領域設定手段8の動作を
中心に説明する。領域設定手段8は固定的あるいは半固
定的なスイッチのような入力手段や、対話的な入力手
段、すなわち人間が介在し、キーボードから画面上の座
標値を入力するか、あるいはマウスにより範囲指定をす
ることにより、画面に表示された動画像上の特定領域を
指定する。動きベクトル抽出手段4はこの領域設定手段
8で指定された特定領域内のブロックの動きベクトルだ
けを抽出し、計測手段5はその特定領域についてのみ計
測するようにしたものである。
【0052】この領域を設定するという考え方は、画面
上で注目したい領域があらかじめ決まっている場合、例
えば道路における交通流監視のように道路上の情報だけ
が必要な場合などに適用可能である。これにより画面上
の必要な部分についてだけ動画像解析が行え、不要部分
の解析による影響や不要な情報の排除を行うことができ
る。
【0053】実施例15.なお、上記実施例では領域設
定手段8は手動的に特定領域を設定するものである場合
について述べたが、自動的に特定領域を指定するように
することもできる。すなわち、初期状態では画面全面の
動きベクトルを解析するように設定しておき、図8に示
すように計測手段5の計測結果を取り込んで解析を続け
るうちにその計測結果から動きベクトルの発生分布に大
きな偏りが生じていることが判明すると、動きベクトル
が発生する領域についてだけ領域設定を行うようにする
ことも可能である。
【0054】実施例16.また、上記実施例14および
実施例15では、図1に示した実施例(実施例1から実
施例6)に領域設定手段8を付加する場合について説明
を行ったが、図4から図6に示した実施例(実施例7か
ら実施例13)にこの領域設定手段8を付加できること
は言うまでもない。
【0055】実施例17.次にこの発明の実施例17を
図について説明する。図9は請求項5に記載した発明の
一実施例による動画像解析装置を示す構成図である。同
図において、9は動きベクトル抽出手段4で抽出された
動きベクトルを複数フレームに渡って積分する積分手段
であり、この積分手段9以外は図1と全く同一の構成で
あるので、ここでは積分手段9の動作を中心に説明す
る。積分手段9は動きベクトル抽出手段4から各ブロッ
クごとの動きベクトルを受け、各ブロックごとに動きベ
クトルのベクトル値を積分して動きベクトルを算出す
る。
【0056】ここで、図10は各ブロック(ブロック
i)ごとの動きベクトルの積分処理の流れを示すフロー
チャートである。まず、ステップST10において積分
回数Ni をNi =0に、動きベクトルを累算するレジス
タVi をVi =(0,0)にそれぞれ初期設定する。そ
してステップST11で動きベクトル抽出手段4から現
フレームのブロックiの動きベクトルvi を受け取り、
ステップST12で積分回数のカウントNi =Ni +1
と積分Vi =Vi +vi を行い、さらにステップST1
3で当該ブロックの動きベクトルをVi /Nとして算出
する。次に、ステップST14において終了の判定を行
い、終了でないと判定された場合にはステップST15
で動きベクトルvi の大きさを判定し、それがしきい値
thよりも小さく、十分0に近いと判定されると、ステ
ップST10の初期化に戻り、それ以外はステップST
11へ戻る。以上の積分は各ブロックごとに独立に行わ
れる。これにより画面中にランダムに動く不必要な物体
が写っている場合に、ランダムな動きベクトルは積分作
用により相殺され、必要な情報だけが抽出可能になる。
【0057】以上のように算出された動きベクトルは、
計測手段5および動きベクトル解析手段6で図1に示し
た実施例(実施例1から実施例6)の場合と同様の処理
が施される。
【0058】なお、この実施例17では、図1に示した
実施例に積分手段9を付加する場合について説明を行っ
たが、図4から図8に示した実施例(実施例7から実施
例16)に積分手段9を付加してもよく、それぞれ同様
の効果を奏することは言うまでもない。
【0059】実施例18.以上に説明した実施例1から
実施例17では、フレーム間予測の方式として前方予
測、すなわち、時間的に過去に位置するフレームから現
フレームを予測する場合について説明したが、本発明は
後方予測、すなわち、時間的に未来に位置するフレーム
から現フレームを予測する場合にも適用可能である。こ
の後方予測では、例えば国際標準化機構(ISO)で標
準化が進められている、蓄積メディア用動画像符号化方
式であるモーション・ピクチャー・エキスパーツ・グル
ープ(Motion Picture Experts Group,以下、MPEG
という)方式で用いられている。
【0060】そこで、まず図11を用いてMPEG方式
の概念を説明する。図11において、I,P,Bと記さ
れているのは各フレームに適用される予測方式を示して
おり、Iフレームはフレーム内符号化が適用されるフレ
ーム、Pフレーム時間的に過去に位置するIまたはPフ
レームを用いてフレーム間予測されるフレーム、Bフレ
ームは時間的に過去および未来に位置するIまたはPフ
レームを用いてフレーム間予測されるフレームである。
例えば、Pフレーム53はIフレーム50を用いて予測
され、Pフレーム56はPフレーム53を用いて予測さ
れる。また、Bフレーム51,52はIフレーム50と
Pフレーム53を用いて予測され、Bフレーム54,5
5はPフレーム53とPフレーム56を用いて予測さ
れ、Bフレーム57,58はPフレームt56とIフレ
ームt59を用いて予測される。
【0061】このうち、Pフレームの解析は実施例1か
ら実施例17で説明したものと全く同様の方法が適用で
きる。一方、Bフレームは前方予測されるブロックの動
きベクトルだけを解析し、IフレームはBフレームで後
方予測が適用されるブロックの動きベクトルを解析する
ことにより、以上の実施例で説明したものと同様の解析
が可能となる。
【0062】図12はそのような後方予測を行う場合に
適用した、請求項6に記載の発明の一実施例による動画
像解析装置を示す構成図である。図において、1および
2は図1のそれらと同様のカメラおよびA/D変換器で
ある。また、60は符号化モードを決定する符号化制御
部であり、61,62はこの符号化制御部60によって
切り換えられるスイッチである。63はA/D変換器2
からの動画像データに対してフレーム内符号化を行うフ
レーム内符号化部であり、64は前記動画像データに対
してフレーム間符号化を行うフレーム間符号化部であ
る。65はこれら符号化制御部60、スイッチ61,6
2、フレーム内符号化部63およびフレーム間符号化部
64を含んで形成される動画像符号化装置である。66
はこの動画像符号化装置65の符号化制御部60より、
当該動画像符号化装置65がフレーム間符号化方式とフ
レーム内符号化方式のいずれを適用して動画像データを
符号化したかを示す符号化モードの抽出を行う符号化モ
ード抽出手段である。67はこの符号化モード抽出手段
66にて抽出された符号化モードの空間分布を解析する
符号化モード解析手段である。
【0063】次に動作について説明する。符号化制御部
60はA/D変換器2からの動画像データの符号化モー
ドを決定し、それに従ってスイッチ61および62の切
り換えを制御する。このスイッチ61および62の切り
換えによって、フレーム内符号化方式とフレーム間符号
化方式とが適応的に適用される。すなわち、符号化制御
部60はフレーム間予測が適用できないと判断すると、
スイッチ61の接点aを接点bに、スイッチ62の接点
aを接点bにそれぞれ接続し、A/D変換器2からの動
画像データに対してフレーム内符号化部43によるフレ
ーム内符号化を適用するように制御する。逆に、フレー
ム間予測が適用できると判定すると、符号化制御部60
は各スイッチ61,62の接点aを接点cに接続し、そ
の動画像データに対してフレーム間符号化部64による
フレーム間符号化を適用するように制御する。そして、
この符号化制御部60が判定した符号化モードはフレー
ム内符号化部63またはフレーム間符号化部64で符号
化された符号化データと多重化され、当該動画像符号化
装置65より出力される動画像符号化データとなる。
【0064】一方、符号化モード抽出手段66は、符号
化制御部60によってフレーム内符号化方式とフレーム
間符号化方式のいれが適用されたかを示す符号化モード
を抽出し、それを符号化モード解析手段67に送る。符
号化モード解析手段66は受け取った符号化モードの空
間的な分布を解析し、移動物体の検出などを行う。例え
ば、図13に示すように、物体70が71で示す位置に
移動する場合を考える。このとき、物体70の移動に伴
って、物体70の背景として隠れていた斜線部分72が
現われ、この部分ではフレーム間予測が行えないため、
フレーム内符号化が適用されることになる。従って、こ
の図13の72に示したようなフレーム内符号化が適用
される領域を符号化モード解析手段67で検出すること
により、移動物体の検出が可能になる。さらに、このよ
うな領域の位置を時々刻々検出することにより、物体の
移動方向やスピードを求めることもできる。
【0065】実施例19.次にこの発明の実施例19を
図について説明する。図14は請求項7に記載した発明
の一実施例による動画像解析装置を示す構成図であり、
相当部分には図4および図12と同一符号を付してその
説明を省略する。また、70は通信インタフェース41
を介して受け取った、フレーム間符号化方式とフレーム
内符号化方式とを適応的に切り換えて動画像を符号化し
た符号化データに符号化モードを多重化した動画像符号
化データの復号化を行う動画像復号化装置である。な
お、この場合も、符号化モード抽出手段66および符号
化モード解析手段67はCPU45によってソフトウェ
ア的に実現される。
【0066】次に動作について説明する。カメラ1の出
力がA/D変換器2にてディジタル化されて動画像符号
化装置65に送られ、動画像符号化装置65でフレーム
間符号化方式とフレーム内符号化方式を適応的に切り換
えて符号化される。その符号化データはいずれの符号化
方式を適用したかを示す符号化モードと多重化され、動
画像符号化データとして通信インタフェース40より通
信回線42に送出される。受信側では、その動画像符号
化データを通信インタフェース41で受け取り、通信イ
ンタフェース41はそれを動画像復号化装置70および
CPUバス48に出力する。通信インタフェース41よ
りその動画像符号化データを受け取った動画像復号化装
置70は、それを復号化して表示装置44に表示する。
【0067】一方、CPU45はメモリ46に格納され
ている制御プログラムに従って動作し、通信インタフェ
ース41を介してCPUバス48側に取り込まれた動画
像符号化データの処理を行う。この処理に関しては、実
施例7の場合と同様に、CPU45が取り込まれた動画
像符号化データを直接実時間で処理する場合と、ディス
ク47に一旦格納してから処理する場合とが考えられ
る。なお、CPU45で行われる処理は、動画像符号化
データ中に多重化されている符号化モードの抽出を行う
符号化モード抽出手段66、およびこの符号化モード抽
出手段66にて抽出された符号化モードの空間的な分布
を解析する符号化モード解析手段67をソフトウェア的
に実現するものであり、その内容は実施例18で説明し
たものと同一である。
【0068】実施例20.なお、実施例18および実施
例19におけるフレーム内符号化とフレーム間符号化の
方法としては、特にある特定の方式に限定されるという
ものではなく、例えば図11で説明したMPEG方式の
場合にも符号化モードの空間的な分布の解析を行うこと
により、移動物体の検出、移動方向や移動のスピードを
求めることができる。
【0069】実施例21.また、これまでに説明した各
実施例では、動きベクトル解析と符号化モードの解析を
同時に行う場合について説明をしなかったが、これらを
組み合わせることも可能である。例えば、MPEG方式
の後方予測が適用され、その部分の動きベクトルが0、
すなわち動き無しであれば物体の移動により背景が出現
したと考えることができる。
【0070】実施例22.さらに、以上の実施例1から
実施例21で説明した各手段はハードウェア的にもソフ
トウェア的にも実現可能であることは言うまでもない。
【0071】
【発明の効果】以上のように、請求項1に記載の発明に
よれば、動画像符号化装置の動き補償部より動きベクト
ルを抽出し、その分布を解析するように構成したので、
高速ハードウェアを必要とすることなく、極めて少ない
計算負荷にて動画像の動きを検出し、動画像解析を行う
ことができる動画像解析装置が得られる効果がある。
【0072】また、請求項2に記載の発明によれば、動
画像符号化データより動きベクトルを抽出し、その分布
を解析するように構成したので、高速ハードウェアを必
要とすることなく、極めて少ない計算負荷にて動画像の
動きを検出し、動画像解析を行うことができる動画像解
析装置が得られる効果がある。
【0073】また、請求項3に記載の発明によれば、動
きベクトル推定手段で動きベクトルの推定を行うように
構成したので、フレーム内符号化が適用されて、動きベ
クトルを持たないブロックについても動画像解析が可能
となる効果がある。
【0074】また、請求項4に記載の発明によれば、領
域設定手段で動きベクトルを抽出すべき領域を設定する
ように構成したので、設定された特定の領域内だけを解
析することができる効果がある。
【0075】また、請求項5に記載の発明によれば、抽
出された動きベクトルを積分手段で積分するように構成
したので、真に必要な動きベクトルのみを抽出できる効
果がある。
【0076】また、請求項6に記載の発明によれば、動
画像符号化装置より当該動画像符号化装置がいずれの符
号化方式を適用したかを示す符号化モードを抽出し、そ
の符号化モードの空間分布を解析するように構成したの
で、高速ハードウェアを必要とすることなく、極めて少
ない計算負荷にて動画像の動きを検出し、動画像解析を
行うことができる動画像解析装置が得られる効果があ
る。
【0077】また、請求項7に記載の発明によれば、動
画像符号化データより符号化モードを抽出してその空間
分布を解析するように構成したので、高速ハードウェア
を必要とすることなく、極めて少ない計算負荷にて動画
像の動きを検出し、動画像解析を行うことができる動画
像解析装置が得られる効果がある。
【図面の簡単な説明】
【図1】この発明の実施例1による動画像解析装置を示
す構成図である。
【図2】上記実施例における動き補償予測方式を説明す
るための概念図である。
【図3】上記実施例における移動物体に生じる動きベク
トルの分布を説明するための概念図である。
【図4】この発明の実施例7による動画像解析装置を示
す構成図である。
【図5】この発明の実施例8による動画像解析装置を示
す構成図である。
【図6】この発明の実施例12による動画像解析装置を
示す構成図である。
【図7】この発明の実施例14による動画像解析装置を
示す構成図である。
【図8】この発明の実施例15による動画像解析装置を
示す構成図である。
【図9】この発明の実施例17による動画像解析装置を
示す構成図である。
【図10】上記実施例における積分手段の処理の流れを
示すフローチャートである。
【図11】この発明の実施例18に適用されるMPEG
方式を説明するための概念図である。
【図12】上記実施例による動画像解析装置を示す構成
図である。
【図13】上記実施例における符号化モードの空間分布
を説明するための概念図である。
【図14】この発明の実施例19による動画像解析装置
を示す構成図である。
【図15】従来の動画像解析装置で用いられているアル
ゴリズムを示すフローチャートである。
【符号の説明】
3 動画像符号化装置 4 動きベクトル抽出手段 5 計測手段 6 動きベクトル解析手段 7 動きベクトル推定手段 8 領域設定手段 9 積分手段 12 動き補償部 65 動画像符号化装置 66 符号化モード抽出手段 67 符号化モード解析手段
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成5年9月14日
【手続補正1】
【補正対象書類名】明細書
【補正対象項目名】0014
【補正方法】変更
【補正内容】
【0014】
【作用】請求項1に記載の発明における動きベクトル解
析手段は、動きベクトル抽出手段が抽出した、動画像符
号化装置の動き補償部の計測した動きベクトルの分布
を、計測手段にて計測した計測結果を解析することによ
り、極めて少ない計算負荷で動画像の動きを検出して、
動画像解析を行うことを可能とする。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】0015
【補正方法】変更
【補正内容】
【0015】また、請求項2に記載の発明における動き
ベクトル解析手段は、動きベクトル抽出手段が動画像符
号化データから抽出した動きベクトルの分布を、計測手
段にて計測した計測結果を解析することにより、極めて
少ない計算負荷で動画像の動きを検出して、動画像解析
を行うことを可能とする。
【手続補正3】
【補正対象書類名】明細書
【補正対象項目名】0022
【補正方法】変更
【補正内容】
【0022】この動画像符号化装置3内において、11
は直前の1フレーム分の画像データが格納されているフ
レームメモリであり、12はこのフレームメモリ11よ
り読み出された画像データの動き補償を行う動き補償部
である。13はA/D変換器2より入力された画像デー
タと動き補償部12で動き補償された直前のフレームの
画像データとの差分を算出する減算器であり、14はこ
の減算器13の出力を符号化してそれを動き補償部12
の出力と多重化し、動画像符号化データとして出力する
符号化部である。15はこの符号化部14にて符号化
れたデータを復号化する局所復号部であり、16はこの
局所復号部15の出力するデータと前記動き補償部12
からのデータとを加算してフレームメモリ11に格納す
る加算器である。
【手続補正4】
【補正対象書類名】明細書
【補正対象項目名】0060
【補正方法】変更
【補正内容】
【0060】そこで、まず図11を用いてMPEG方式
の概念を説明する。図11において、I,P,Bと記さ
れているのは各フレームに適用される予測方式を示して
おり、Iフレームはフレーム内符号化が適用されるフレ
ーム、Pフレーム時間的に過去に位置するIまたはPフ
レームを用いてフレーム間予測されるフレーム、Bフレ
ームは時間的に過去および未来に位置するIまたはPフ
レームを用いてフレーム間予測されるフレームである。
例えば、Pフレーム53はIフレーム50を用いて予測
され、Pフレーム56はPフレーム53を用いて予測さ
れる。また、Bフレーム51,52はIフレーム50と
Pフレーム53を用いて予測され、Bフレーム54,5
5はPフレーム53とPフレーム56を用いて予測さ
れ、Bフレーム57,58はPフレーム56Iフレー
ム59を用いて予測される。
【手続補正5】
【補正対象書類名】明細書
【補正対象項目名】0061
【補正方法】変更
【補正内容】
【0061】このうち、Pフレームの解析は実施例1か
ら実施例17で説明したものと全く同様の方法が適用で
きる。一方、Bフレームは前方予測されるブロックの動
きベクトルだけを解析し、IフレームはBフレームで後
方予測が適用されるブロックの動きベクトルを解析する
ことにより、以上の実施例で説明したものと同様の解析
が可能となる。尚、動画像符号化では符号化レートの制
限により、フレーム間隔が変わる可能性がある。例え
ば、符号化レート64kbpsと386kbpsとを比
較すると、前者の方がフレーム間隔が長くなる。即ち、
1秒間に伝送されるフレーム数が減る傾向にある。ま
た、あるフレームの符号化データ量が大きくなった場
合、伝送するフレーム数を減らすことにより符号化レー
トが調整される。このようにフレーム間隔が変化する
と、同じ動きベクトルの大きさであっても、フレーム間
隔が狭い程、大きな動きに相当することになり、動きベ
クトルの解析にも影響を与えることになる。これに対し
て、実施例1から18において、例えば動きベクトル解
析手段6は動きベクトルの大きさにフレーム間隔の逆数
を掛け、動きベクトルを正規化することにより対処でき
る。
【手続補正6】
【補正対象書類名】明細書
【補正対象項目名】0062
【補正方法】変更
【補正内容】
【0062】実施例19.図12は請求項6に記載の発
明の一実施例による動画像解析装置を示す構成図であ
る。図において、1および2は図1のそれらと同様のカ
メラおよびA/D変換器である。また、60は符号化モ
ードを決定する符号化制御部であり、61,62はこの
符号化制御部60によって切り換えられるスイッチであ
る。63はA/D変換器2からの動画像データに対して
フレーム内符号化を行うフレーム内符号化部であり、6
4は前記動画像データに対してフレーム間符号化を行う
フレーム間符号化部である。65はこれら符号化制御部
60、スイッチ61,62、フレーム内符号化部63お
よびフレーム間符号化部64を含んで形成される動画像
符号化装置である。66はこの動画像符号化装置65の
符号化制御部60より、当該動画像符号化装置65がフ
レーム間符号化方式とフレーム内符号化方式のいずれを
適用して動画像データを符号化したかを示す符号化モー
ドの抽出を行う符号化モード抽出手段である。67はこ
の符号化モード抽出手段66にて抽出された符号化モー
ドの空間分布を解析する符号化モード解析手段である。
【手続補正7】
【補正対象書類名】明細書
【補正対象項目名】0065
【補正方法】変更
【補正内容】
【0065】実施例20.次にこの発明の実施例20
図について説明する。図14は請求項7に記載した発明
の一実施例による動画像解析装置を示す構成図であり、
相当部分には図4および図12と同一符号を付してその
説明を省略する。また、70は通信インタフェース41
を介して受け取った、フレーム間符号化方式とフレーム
内符号化方式とを適応的に切り換えて動画像を符号化し
た符号化データに符号化モードを多重化した動画像符号
化データの復号化を行う動画像復号化装置である。な
お、この場合も、符号化モード抽出手段66および符号
化モード解析手段67はCPU45によってソフトウェ
ア的に実現される。
【手続補正8】
【補正対象書類名】明細書
【補正対象項目名】0067
【補正方法】変更
【補正内容】
【0067】一方、CPU45はメモリ46に格納され
ている制御プログラムに従って動作し、通信インタフェ
ース41を介してCPUバス48側に取り込まれた動画
像符号化データの処理を行う。この処理に関しては、実
施例7の場合と同様に、CPU45が取り込まれた動画
像符号化データを直接実時間で処理する場合と、ディス
ク47に一旦格納してから処理する場合とが考えられ
る。なお、CPU45で行われる処理は、動画像符号化
データ中に多重化されている符号化モードの抽出を行う
符号化モード抽出手段66、およびこの符号化モード抽
出手段66にて抽出された符号化モードの空間的な分布
を解析する符号化モード解析手段67をソフトウェア的
に実現するものであり、その内容は実施例19で説明し
たものと同一である。
【手続補正9】
【補正対象書類名】明細書
【補正対象項目名】0068
【補正方法】変更
【補正内容】
【0068】実施例21.なお、実施例19および実施
20におけるフレーム内符号化とフレーム間符号化の
方法としては、特にある特定の方式に限定されるという
ものではなく、例えば図11で説明したMPEG方式の
場合にも符号化モードの空間的な分布の解析を行うこと
により、移動物体の検出、移動方向や移動のスピードを
求めることができる。
【手続補正10】
【補正対象書類名】明細書
【補正対象項目名】0069
【補正方法】変更
【補正内容】
【0069】実施例22.また、これまでに説明した各
実施例では、動きベクトル解析と符号化モードの解析を
同時に行う場合について説明をしなかったが、これらを
組み合わせることも可能である。例えば、MPEG方式
の後方予測が適用され、その部分の動きベクトルが0、
すなわち動き無しであれば物体の移動により背景が出現
したと考えることができる。
【手続補正11】
【補正対象書類名】明細書
【補正対象項目名】0070
【補正方法】変更
【補正内容】
【0070】実施例23.さらに、以上の実施例1から
実施例22で説明した各手段はハードウェア的にもソフ
トウェア的にも実現可能であることは言うまでもない。
【手続補正12】
【補正対象書類名】明細書
【補正対象項目名】図12
【補正方法】変更
【補正内容】
【図12】この発明の実施例19による動画像解析装置
を示す構成図である。
【手続補正13】
【補正対象書類名】明細書
【補正対象項目名】図14
【補正方法】変更
【補正内容】
【図14】この発明の実施例20による動画像解析装置
を示す構成図である。

Claims (7)

    【特許請求の範囲】
  1. 【請求項1】 動画像を動き補償予測を用いて符号化す
    る動画像符号化装置の動き補償部で計測される動きベク
    トルの抽出を行う動きベクトル抽出手段と、前記動きベ
    クトル抽出手段にて抽出された動きベクトルの分布を計
    測する計測手段と、前記計測手段の計測結果を解析する
    動きベクトル解析手段とを備えた動画像解析装置。
  2. 【請求項2】 動き補償予測を用いて符号化された動画
    像符号化データから動きベクトルを抽出する動きベクト
    ル抽出手段と、前記動きベクトル抽出手段にて抽出され
    た動きベクトルの分布を計測する計測手段と、前記計測
    手段の計測結果を解析する動きベクトル解析手段とを備
    えた動画像解析装置。
  3. 【請求項3】 前記動きベクトル抽出手段にて抽出する
    動きベクトルが、フレーム内符号化が適用されたために
    存在しない場合に、前記動きベクトルの推定を行う動き
    ベクトル推定手段を設けたことを特徴とする請求項1も
    しくは2に記載の動画像解析装置。
  4. 【請求項4】 前記計測手段がその領域についてのみ計
    測を行う特定の領域を、前記動画像上に設定する領域設
    定手段を設けたことを特徴とする請求項1ないし3のい
    ずれか1項に記載の動画像解析装置。
  5. 【請求項5】 前記動きベクトル抽出手段で抽出された
    動きベクトルを、複数のフレームに渡って積分する積分
    手段を設けたことを特徴とする請求項1ないし4のいず
    れか1項に記載の動画像解析装置。
  6. 【請求項6】 フレーム間符号化方式とフレーム内符号
    化方式を適応的に切り換えて動画像を符号化する動画像
    符号化装置より、当該動画像符号化装置がどちらの符号
    化方式を適用して符号化したかを示す符号化モードの抽
    出を行う符号化モード抽出手段と、前記符号化モード抽
    出手段にて抽出された符号化モードの空間分布を解析す
    る符号化モード解析手段とを備えた動画像解析装置。
  7. 【請求項7】 フレーム間符号化方式とフレーム内符号
    化方式を適応的に切り換えて動画像を符号化した動画像
    符号化データから、どちらの符号化方式が適用されたか
    を示す符号化モードを抽出する符号化モード抽出手段
    と、前記符号化モード抽出手段にて抽出された符号化モ
    ードの空間分布を解析する符号化モード解析手段とを備
    えた動画像解析装置。
JP09843993A 1993-04-02 1993-04-02 動画像解析装置 Expired - Fee Related JP3272466B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09843993A JP3272466B2 (ja) 1993-04-02 1993-04-02 動画像解析装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP09843993A JP3272466B2 (ja) 1993-04-02 1993-04-02 動画像解析装置

Publications (2)

Publication Number Publication Date
JPH06292203A true JPH06292203A (ja) 1994-10-18
JP3272466B2 JP3272466B2 (ja) 2002-04-08

Family

ID=14219814

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09843993A Expired - Fee Related JP3272466B2 (ja) 1993-04-02 1993-04-02 動画像解析装置

Country Status (1)

Country Link
JP (1) JP3272466B2 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001216519A (ja) * 2000-02-04 2001-08-10 Fujitsu Ltd 交通監視装置
JP2001243447A (ja) * 2000-02-28 2001-09-07 Kddi Corp 道路領域検出装置
JP2001520819A (ja) * 1996-10-31 2001-10-30 センサーマティック・エレクトロニクス・コーポレーション インテリジェントビデオ情報管理システム
WO2002091303A1 (fr) * 2001-05-07 2002-11-14 Systemk Corporation Systeme et procede de reconnaissance d'humain
KR100443677B1 (ko) * 2001-09-29 2004-08-09 엘지전자 주식회사 동영상의 모션벡터 양자화를 이용한 카메라 모션 검출방법
JP2005013626A (ja) * 2003-06-27 2005-01-20 Nissan Motor Co Ltd 覚醒状態検出装置
JP2005018656A (ja) * 2003-06-27 2005-01-20 Nissan Motor Co Ltd 運転者状態検出装置
JP2006074513A (ja) * 2004-09-02 2006-03-16 Oki Electric Ind Co Ltd 監視システム及び監視装置
JP2006277576A (ja) * 2005-03-30 2006-10-12 Tokyo Univ Of Science 映像評価装置、映像評価方法および映像評価プログラム
JP2008060974A (ja) * 2006-08-31 2008-03-13 Casio Comput Co Ltd 撮像装置及びプログラム
US7733379B2 (en) 2003-06-13 2010-06-08 Casio Computer Co., Ltd. Composite still-image creating device capable of creating a still image from moving images
JP2014158164A (ja) * 2013-02-15 2014-08-28 Mitsubishi Electric Corp 画像符号化装置
JP2016208087A (ja) * 2015-04-15 2016-12-08 三菱電機株式会社 移動物体検出装置、映像復号装置および移動物体検出方法
JP2017167727A (ja) * 2016-03-15 2017-09-21 Kddi株式会社 動画の処理装置、処理方法及びプログラム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4660736B2 (ja) * 2004-09-24 2011-03-30 独立行政法人産業技術総合研究所 動画像時間分割処理方法および装置

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001520819A (ja) * 1996-10-31 2001-10-30 センサーマティック・エレクトロニクス・コーポレーション インテリジェントビデオ情報管理システム
JP2001216519A (ja) * 2000-02-04 2001-08-10 Fujitsu Ltd 交通監視装置
JP2001243447A (ja) * 2000-02-28 2001-09-07 Kddi Corp 道路領域検出装置
WO2002091303A1 (fr) * 2001-05-07 2002-11-14 Systemk Corporation Systeme et procede de reconnaissance d'humain
KR100443677B1 (ko) * 2001-09-29 2004-08-09 엘지전자 주식회사 동영상의 모션벡터 양자화를 이용한 카메라 모션 검출방법
US7893968B2 (en) 2003-06-13 2011-02-22 Casio Computer Co., Ltd. Composite still-image creating device capable of creating a still image from moving images
US7733379B2 (en) 2003-06-13 2010-06-08 Casio Computer Co., Ltd. Composite still-image creating device capable of creating a still image from moving images
JP2005018656A (ja) * 2003-06-27 2005-01-20 Nissan Motor Co Ltd 運転者状態検出装置
JP2005013626A (ja) * 2003-06-27 2005-01-20 Nissan Motor Co Ltd 覚醒状態検出装置
JP2006074513A (ja) * 2004-09-02 2006-03-16 Oki Electric Ind Co Ltd 監視システム及び監視装置
JP2006277576A (ja) * 2005-03-30 2006-10-12 Tokyo Univ Of Science 映像評価装置、映像評価方法および映像評価プログラム
JP4610392B2 (ja) * 2005-03-30 2011-01-12 学校法人東京理科大学 映像評価装置、映像評価方法および映像評価プログラム
JP2008060974A (ja) * 2006-08-31 2008-03-13 Casio Comput Co Ltd 撮像装置及びプログラム
JP2014158164A (ja) * 2013-02-15 2014-08-28 Mitsubishi Electric Corp 画像符号化装置
JP2016208087A (ja) * 2015-04-15 2016-12-08 三菱電機株式会社 移動物体検出装置、映像復号装置および移動物体検出方法
JP2017167727A (ja) * 2016-03-15 2017-09-21 Kddi株式会社 動画の処理装置、処理方法及びプログラム

Also Published As

Publication number Publication date
JP3272466B2 (ja) 2002-04-08

Similar Documents

Publication Publication Date Title
KR100378902B1 (ko) 픽셀 데이터를 처리하기 위한 방법 및 장치, 및 컴퓨터 판독 가능한 매체
EP1639829B1 (en) Optical flow estimation method
EP1193977B1 (en) Image sequence coding method
US5760846A (en) Apparatus for estimating motion vectors for feature points of a video signal
US6148027A (en) Method and apparatus for performing hierarchical motion estimation using nonlinear pyramid
JPH06292203A (ja) 動画像解析装置
JPH08307874A (ja) 映像信号符号化装置
JP2004227519A (ja) 画像処理方法
JP2003284076A (ja) Mpeg映像圧縮技術を利用したデジタル映像格納装置における動き検出装置及びその方法
US6408101B1 (en) Apparatus and method for employing M-ary pyramids to enhance feature-based classification and motion estimation
JP3405788B2 (ja) 動画像符号化装置と動画像復号化装置
KR0181029B1 (ko) 에지를 이용한 특징점 선정장치
EP0731612B1 (en) Apparatus for encoding a video signal using search grids for motion estimation and compensation
KR19980036073A (ko) 움직임 벡터 검출 방법 및 장치
US6020925A (en) Method and apparatus for encoding a video signal using pixel-by-pixel motion prediction
JP7072401B2 (ja) 動画像符号化装置、動画像符号化装置の制御方法及びプログラム
JPH08294129A (ja) 動きベクトル検出装置および検出方法
JPH1023420A (ja) 動き検出方法および動き検出装置
JP2001346208A (ja) 画像信号復号化装置および方法
JPH10191347A (ja) 動き検出装置、動き検出方法、及び、記憶媒体
CN110876082B (zh) 一种视频帧的复杂度的确定方法及装置
JP3407872B2 (ja) 付加情報検出方法及び装置
JPH04336787A (ja) 動画像符号化装置
KR100207400B1 (ko) 움직임 추정장치
KR100255634B1 (ko) 움직임 검출장치

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080125

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090125

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100125

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100125

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110125

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120125

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees