JPH10322582A - 動画像符号化装置 - Google Patents
動画像符号化装置Info
- Publication number
- JPH10322582A JPH10322582A JP14313297A JP14313297A JPH10322582A JP H10322582 A JPH10322582 A JP H10322582A JP 14313297 A JP14313297 A JP 14313297A JP 14313297 A JP14313297 A JP 14313297A JP H10322582 A JPH10322582 A JP H10322582A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- area
- moving object
- moving
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
- H04N5/145—Movement estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
- H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/527—Global motion vector estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
(57)【要約】
【課題】カメラ制御が行われたときの背景の情報量を低
減し、移動物体に対しては高解像度を保ったカメラ制御
が可能となる動画像符号化装置の提供。 【解決手段】動き補償予測符号化を行う動画像符号化装
置において、動ベクトル検出回路で検出される動ベクト
ルの方向・大きさにより移動物体の認識を行い、設定さ
れた領域が有するベクトルの水平・垂直方向の移動量を
算出してカメラ制御を行う。カメラが制御されたときの
発生情報量の増大による受信画面全体の画質劣化が生じ
て移動物体の状態が不鮮明になるため、移動物体領域以
外においては、量子化を荒くして伝送情報量の増加を防
ぐことにより、移動物体の状態の鮮明さを保つためのカ
メラ制御方式を備える。
減し、移動物体に対しては高解像度を保ったカメラ制御
が可能となる動画像符号化装置の提供。 【解決手段】動き補償予測符号化を行う動画像符号化装
置において、動ベクトル検出回路で検出される動ベクト
ルの方向・大きさにより移動物体の認識を行い、設定さ
れた領域が有するベクトルの水平・垂直方向の移動量を
算出してカメラ制御を行う。カメラが制御されたときの
発生情報量の増大による受信画面全体の画質劣化が生じ
て移動物体の状態が不鮮明になるため、移動物体領域以
外においては、量子化を荒くして伝送情報量の増加を防
ぐことにより、移動物体の状態の鮮明さを保つためのカ
メラ制御方式を備える。
Description
【０００１】
【発明の属する技術分野】本発明は、動き補償フレーム
間予測符号化を行う動画像符号化装置に関し、特に、動
き検出を行って得た動ベクトルを基に、被写体を自動追
従するカメラ制御機能を有する動画像符号化装置に関す
る。
間予測符号化を行う動画像符号化装置に関し、特に、動
き検出を行って得た動ベクトルを基に、被写体を自動追
従するカメラ制御機能を有する動画像符号化装置に関す
る。
【０００２】
【従来の技術】画面内を移動物体をカメラで撮影する場
合の移動物体自動追従技術として、色情報を利用する技
術がある。例えば、指定された検出ブロック内の映像信
号の中から色情報を検出し、これを特定色として登録す
ることによって、被写体の判別に利用するものである。
しかし、移動物体を代表する色ではなく、移動物体とし
てはその微少領域の色が特定色として登録されてしまう
可能性があるため、動ベクトル検出領域内に複数の検出
ブロックを設定し、検出ブロックの色情報により動ベク
トルを検出して被写体の自動追従を行うものである（特
開平８−１２５９１０号公報参照）。
合の移動物体自動追従技術として、色情報を利用する技
術がある。例えば、指定された検出ブロック内の映像信
号の中から色情報を検出し、これを特定色として登録す
ることによって、被写体の判別に利用するものである。
しかし、移動物体を代表する色ではなく、移動物体とし
てはその微少領域の色が特定色として登録されてしまう
可能性があるため、動ベクトル検出領域内に複数の検出
ブロックを設定し、検出ブロックの色情報により動ベク
トルを検出して被写体の自動追従を行うものである（特
開平８−１２５９１０号公報参照）。
【０００３】また、移動物体の輪郭を抽出し、その閉空
間（輪郭内部）の情報（色分布情報）を基にして、周知
の手法により、動ベクトルを検出し、そのベクトル量に
応じて、上下・左右方向のカメラ制御を行うとともに、
移動物体を見失い追従不可となった時には、視野方向の
制御（ズームイン・ズームアウト）を行う、という自動
追従方式も知られている（特開平４−１２６４７３号公
報参照）。
間（輪郭内部）の情報（色分布情報）を基にして、周知
の手法により、動ベクトルを検出し、そのベクトル量に
応じて、上下・左右方向のカメラ制御を行うとともに、
移動物体を見失い追従不可となった時には、視野方向の
制御（ズームイン・ズームアウト）を行う、という自動
追従方式も知られている（特開平４−１２６４７３号公
報参照）。
【０００４】さらに、動画像符号化装置における動ベク
トル検出を用いて大局的にカメラの動きを補償して発生
情報量を削減する方法として、例えば文献（ＩＥＥＥ
Ｃｏｎｆｅｒｎｃｅ ｏｆ Ａｃｏｕｓｔｉｃｓ、Ｓｐ
ｅｅｃｈ ａｎｄ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎ
ｇ、１９９１、Ｍ９、４、ｐｐ．２７２５−２７２８）
き記載された方法が知られており、この方法において
は、小領域の動ベクトルを大局的な動ベクトルに変換す
る際の膨大な計算量を、ベクトル探索領域を拡大して大
局的な領域に設定することにより削減できるようにして
いる（特開平６−１６５１６４号公報参照）。
トル検出を用いて大局的にカメラの動きを補償して発生
情報量を削減する方法として、例えば文献（ＩＥＥＥ
Ｃｏｎｆｅｒｎｃｅ ｏｆ Ａｃｏｕｓｔｉｃｓ、Ｓｐ
ｅｅｃｈ ａｎｄ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎ
ｇ、１９９１、Ｍ９、４、ｐｐ．２７２５−２７２８）
き記載された方法が知られており、この方法において
は、小領域の動ベクトルを大局的な動ベクトルに変換す
る際の膨大な計算量を、ベクトル探索領域を拡大して大
局的な領域に設定することにより削減できるようにして
いる（特開平６−１６５１６４号公報参照）。
【０００５】
【発明が解決しようとする課題】このように、従来の技
術においては、移動物体にカメラを自動追従する場合、
（１）動ベクトル検出領域内に複数のブロックを設定
し、そのブロックの色情報により動ベクトルを検出して
カメラを制御する方法（特開平８−１２５９１０）や、
（２）移動体物体の輪郭を抽出して、その閉空間の情報
から動ベクトルを検出してカメラを制御する方法（特開
平４−１２６４７３）、（３）さらに、カメラの動きを
大局的に予測して発生情報量を削減する方法（特開平６
−１６５１６４）等があるが、これらの方法を動画像符
号化装置で使用してカメラを制御し、そのビデオ信号を
符号化すると、カメラが制御中には、発生情報量の増加
により、復号画質は移動物体を認識できないほどに劣化
し、さらには、復号された移動物体の動きが不連続にな
ることがある、という問題点を有している。特に、低ビ
ットレートの符号化において顕著である。その理由は、
以下に通りである。
術においては、移動物体にカメラを自動追従する場合、
（１）動ベクトル検出領域内に複数のブロックを設定
し、そのブロックの色情報により動ベクトルを検出して
カメラを制御する方法（特開平８−１２５９１０）や、
（２）移動体物体の輪郭を抽出して、その閉空間の情報
から動ベクトルを検出してカメラを制御する方法（特開
平４−１２６４７３）、（３）さらに、カメラの動きを
大局的に予測して発生情報量を削減する方法（特開平６
−１６５１６４）等があるが、これらの方法を動画像符
号化装置で使用してカメラを制御し、そのビデオ信号を
符号化すると、カメラが制御中には、発生情報量の増加
により、復号画質は移動物体を認識できないほどに劣化
し、さらには、復号された移動物体の動きが不連続にな
ることがある、という問題点を有している。特に、低ビ
ットレートの符号化において顕著である。その理由は、
以下に通りである。
【０００６】すなわち、カメラは移動物体を捕えて自動
追従するが、カメラのビデオ信号を符号化し伝送する場
合においては、カメラが制御されて動くことで、移動物
体以外の領域（背景）も同時に動き、発生情報量が増加
してしまう。このとき、発生情報量を圧縮し、一定の伝
送速度を保つために、符号化では量子化段階を下げた
り、符号化するビデオフレームを削減する制御が働くこ
とになる、ためである。
追従するが、カメラのビデオ信号を符号化し伝送する場
合においては、カメラが制御されて動くことで、移動物
体以外の領域（背景）も同時に動き、発生情報量が増加
してしまう。このとき、発生情報量を圧縮し、一定の伝
送速度を保つために、符号化では量子化段階を下げた
り、符号化するビデオフレームを削減する制御が働くこ
とになる、ためである。
【０００７】このように、動画像符号化装置の動ベクト
ル検出手段において検出される動ベクトルを用いて、移
動物体を自動追従するように、カメラを制御する場合、
カメラが制御された時に、背景が動くことで、発生情報
量が増大し、発生情報量を圧縮するため量子化が荒くな
り、復号画質が劣化するとともに、ビデオフレームが削
減（駒落とし）されて、動きが不連続となり、物体の状
態が不明確になることがあった。
ル検出手段において検出される動ベクトルを用いて、移
動物体を自動追従するように、カメラを制御する場合、
カメラが制御された時に、背景が動くことで、発生情報
量が増大し、発生情報量を圧縮するため量子化が荒くな
り、復号画質が劣化するとともに、ビデオフレームが削
減（駒落とし）されて、動きが不連続となり、物体の状
態が不明確になることがあった。
【０００８】したがって、本発明は、上記問題点に鑑み
てなされたものであって、その目的は、カメラ制御が行
われたときの背景の情報量を低減し、移動物体に対して
は高解像度を保ったカメラ制御が可能となる動画像符号
化装置を提供することにある。
てなされたものであって、その目的は、カメラ制御が行
われたときの背景の情報量を低減し、移動物体に対して
は高解像度を保ったカメラ制御が可能となる動画像符号
化装置を提供することにある。
【０００９】
【課題を解決するための手段】前記目的を達成するた
め、本発明の動画像符号化装置は、カメラから動画像を
入力し、動き補償フレーム間予測符号化を施す、動画像
符号化装置において、前記動画像入力と前フレームの動
画像を小ブロックに分割し、小ブロック毎に動ベクトル
を検出する動ベクトル検出手段と、前記動ベクトル検出
手段において検出された動ベクトルが同一の大きさ、方
向を持つ隣接した前記小ブロックにより移動物体の輪郭
とし、該輪郭内部を移動領域として抽出する手段と、前
記抽出された領域の動ベクトルを水平方向および垂直方
向に成分分解する手段と、前記動ベクトルの水平成分お
よび垂直成分により前記カメラの上下・左右方向の移動
量を設定して前記カメラを制御するためのカメラ制御手
段と、を備えることを特徴とする。
め、本発明の動画像符号化装置は、カメラから動画像を
入力し、動き補償フレーム間予測符号化を施す、動画像
符号化装置において、前記動画像入力と前フレームの動
画像を小ブロックに分割し、小ブロック毎に動ベクトル
を検出する動ベクトル検出手段と、前記動ベクトル検出
手段において検出された動ベクトルが同一の大きさ、方
向を持つ隣接した前記小ブロックにより移動物体の輪郭
とし、該輪郭内部を移動領域として抽出する手段と、前
記抽出された領域の動ベクトルを水平方向および垂直方
向に成分分解する手段と、前記動ベクトルの水平成分お
よび垂直成分により前記カメラの上下・左右方向の移動
量を設定して前記カメラを制御するためのカメラ制御手
段と、を備えることを特徴とする。
【００１０】さらに、本発明の動画像符号化装置は、移
動領域として抽出した領域とその周囲以外の領域の量子
化段階を下げる符号化制御を行う手段を備えることを特
徴とする。
動領域として抽出した領域とその周囲以外の領域の量子
化段階を下げる符号化制御を行う手段を備えることを特
徴とする。
【００１１】
【作用】本発明の原理・作用について以下に説明する。
本発明においては、動ベクトル検出部において、動ベク
トル検出ブロック毎に検出された動ベクトルは、領域抽
出部に入力される。
本発明においては、動ベクトル検出部において、動ベク
トル検出ブロック毎に検出された動ベクトルは、領域抽
出部に入力される。
【００１２】領域抽出部は、ほぼ同一のベクトルを持
ち、隣接した動ベクトル検出ブロックを輪郭として、そ
の内部のブロックを含めた領域を、移動物体の領域とし
て抽出する。
ち、隣接した動ベクトル検出ブロックを輪郭として、そ
の内部のブロックを含めた領域を、移動物体の領域とし
て抽出する。
【００１３】ベクトル演算部では、抽出された領域の輪
郭のブロックのベクトルから代表ベクトルを求めるとと
もに、水平方向および垂直方向に成分分解し、カメラ制
御部にそのデータを出力する。
郭のブロックのベクトルから代表ベクトルを求めるとと
もに、水平方向および垂直方向に成分分解し、カメラ制
御部にそのデータを出力する。
【００１４】カメラ制御部では、水平方向成分および垂
直方向成分に応じて上下・左右方向のカメラ制御を行う
ためにカメラに対してデータを転送する。
直方向成分に応じて上下・左右方向のカメラ制御を行う
ためにカメラに対してデータを転送する。
【００１５】さらに、領域抽出部において移動物体領域
であることの領域情報を符号化制御部に出力する。符号
化制御部ではその領域情報をもとに、フレーム間予測符
号化部で行われる量子化を動ベクトル検出ブロック単位
に制御する。
であることの領域情報を符号化制御部に出力する。符号
化制御部ではその領域情報をもとに、フレーム間予測符
号化部で行われる量子化を動ベクトル検出ブロック単位
に制御する。
【００１６】
【発明の実施の形態】本発明の好ましい実施の形態につ
いて図面を参照して以下に説明する。図１は、本発明の
実施の形態の構成を示すブロック図である。
いて図面を参照して以下に説明する。図１は、本発明の
実施の形態の構成を示すブロック図である。
【００１７】図１を参照すると、この実施の形態の動画
像符号化装置において、制御されるカメラのビデオ信号
を入力し、入力されたビデオ信号は動き補償フレーム間
予測符号化部１００に入力される。動き補償フレーム間
予測符号化部１００に入力したビデオ信号は、まず、動
ベクトル検出部１０に入力する。動ベクトル検出部１０
において、フレームは動ベクトル検出ブロックに分割さ
れ、前フレームと現フレームの差分により移動物体の動
ベクトル検出を行う。
像符号化装置において、制御されるカメラのビデオ信号
を入力し、入力されたビデオ信号は動き補償フレーム間
予測符号化部１００に入力される。動き補償フレーム間
予測符号化部１００に入力したビデオ信号は、まず、動
ベクトル検出部１０に入力する。動ベクトル検出部１０
において、フレームは動ベクトル検出ブロックに分割さ
れ、前フレームと現フレームの差分により移動物体の動
ベクトル検出を行う。
【００１８】動ベクトル検出部１０において、動ベクト
ル検出ブロック毎に検出された動ベクトルは、後段のフ
レーム間予測符号化部２０の動き補償に用いられ、前フ
レームと現フレームの差分が量子化されて、送信符号化
データとして伝送路に出力される。
ル検出ブロック毎に検出された動ベクトルは、後段のフ
レーム間予測符号化部２０の動き補償に用いられ、前フ
レームと現フレームの差分が量子化されて、送信符号化
データとして伝送路に出力される。
【００１９】また、動ベクトル検出部１０において検出
された動ベクトルは、領域抽出部３０に入力され、同一
のベクトル量を有する隣接した複数の動ベクトル検出ブ
ロックを輪郭として抽出し、その内部を移動物体の領域
とする。
された動ベクトルは、領域抽出部３０に入力され、同一
のベクトル量を有する隣接した複数の動ベクトル検出ブ
ロックを輪郭として抽出し、その内部を移動物体の領域
とする。
【００２０】抽出された領域から代表するベクトルを求
めて、ベクトル演算部４０に入力し、水平方向および垂
直方向の成分に分解する。
めて、ベクトル演算部４０に入力し、水平方向および垂
直方向の成分に分解する。
【００２１】動ベクトルの水平方向および垂直方向の成
分は、カメラ制御部５０に入力され、成分に応じて動画
像符号化装置に接続されているカメラ（不図示）を上下
・左右方向に移動させる制御を行う。
分は、カメラ制御部５０に入力され、成分に応じて動画
像符号化装置に接続されているカメラ（不図示）を上下
・左右方向に移動させる制御を行う。
【００２２】さらに、領域抽出部３０において、移動物
体領域情報を、符号化制御部６０に動ベクトル検出ブロ
ック毎に出力して、符号化制御部６０では、この情報を
もとに、フレーム間予測符号化部２０で行われる量子化
を、動ベクトル検出ブロック単位に制御を行う。
体領域情報を、符号化制御部６０に動ベクトル検出ブロ
ック毎に出力して、符号化制御部６０では、この情報を
もとに、フレーム間予測符号化部２０で行われる量子化
を、動ベクトル検出ブロック単位に制御を行う。
【００２３】
【実施例】上記した実施の形態について更に具体例をも
って説明すべく、本発明の一実施例について図１を参照
して以下に説明する。
って説明すべく、本発明の一実施例について図１を参照
して以下に説明する。
【００２４】動画像符号化装置において制御されるカメ
ラのビデオ信号を動画像符号化装置に入力する。入力さ
れたビデオ信号は動き補償フレーム間予測符号化部１０
０に入力される。動き補償フレーム間予測符号化部１０
０に入力したビデオ信号は、まず、動ベクトル検出部１
０に入力する。動ベクトル検出部１０において、３５２
画素×２８８ラインのビデオフレームは１６×１６サイ
ズの動ベクトル検出ブロックとして領域分割され、前フ
レームと現フレームの差分により移動物体の動ベクトル
検出を行う。動ベクトル検出部１０において検出された
動ベクトルは、後段のフレーム間予測符号化部２０の動
き補償に用いられ、前フレームと現フレームの差分が量
子化されて送信符号化データとして伝送路に出力され
る。
ラのビデオ信号を動画像符号化装置に入力する。入力さ
れたビデオ信号は動き補償フレーム間予測符号化部１０
０に入力される。動き補償フレーム間予測符号化部１０
０に入力したビデオ信号は、まず、動ベクトル検出部１
０に入力する。動ベクトル検出部１０において、３５２
画素×２８８ラインのビデオフレームは１６×１６サイ
ズの動ベクトル検出ブロックとして領域分割され、前フ
レームと現フレームの差分により移動物体の動ベクトル
検出を行う。動ベクトル検出部１０において検出された
動ベクトルは、後段のフレーム間予測符号化部２０の動
き補償に用いられ、前フレームと現フレームの差分が量
子化されて送信符号化データとして伝送路に出力され
る。
【００２５】また、動ベクトル検出部１０において検出
された動ベクトルは、領域検出抽出部３０に入力され、
同一のベクトル量を有する動ベクトル検出ブロックを輪
郭として抽出し、その内部を移動物体の領域とする。抽
出された領域から代表するベクトルを求めて、ベクトル
演算部４０において水平方向および垂直方向のベクトル
成分に分解される。
された動ベクトルは、領域検出抽出部３０に入力され、
同一のベクトル量を有する動ベクトル検出ブロックを輪
郭として抽出し、その内部を移動物体の領域とする。抽
出された領域から代表するベクトルを求めて、ベクトル
演算部４０において水平方向および垂直方向のベクトル
成分に分解される。
【００２６】例えば、フレームの左下を原点としたｘｙ
座標として移動ベクトルをｘ成分とｙ成分に分解する。
分解された水平方向および垂直方向のベクトル成分は、
カメラ制御部５０に入力され、例えば、ｘ成分が−（マ
イナス）Ｋ画素、ｙ成分が＋（プラス）Ｌラインである
場合に、動画像符号化装置に接続されているカメラに対
して、左にＫ´度パンさせ、上にＬ´度チルトされる制
御を行う。
座標として移動ベクトルをｘ成分とｙ成分に分解する。
分解された水平方向および垂直方向のベクトル成分は、
カメラ制御部５０に入力され、例えば、ｘ成分が−（マ
イナス）Ｋ画素、ｙ成分が＋（プラス）Ｌラインである
場合に、動画像符号化装置に接続されているカメラに対
して、左にＫ´度パンさせ、上にＬ´度チルトされる制
御を行う。
【００２７】また、ｘ成分が＋（プラス）Ｋ画素、ｙ成
分が−（マイナス）Ｌラインである場合には、逆に、右
にＫ´度パンさせ、下にＬ´度チルトさせる制御を行
う。
分が−（マイナス）Ｌラインである場合には、逆に、右
にＫ´度パンさせ、下にＬ´度チルトさせる制御を行
う。
【００２８】ここでＫ画素およびＬラインに対するカメ
ラ制御の角度は、カメラの視野に応じて可変可能であ
る。例えば、演算された動ベクトルのｘ、ｙ成分をレジ
スタに取り込んで、そのデータをＣＰＵで認識する。Ｃ
ＰＵから、その成分に応じた移動をさせるためのカメラ
制御コマンドをシリアルデータとして出力し、ＲＳ２３
２Ｃレベルに変換後、カメラのシリアルインタフェース
によりカメラ制御を行う。
ラ制御の角度は、カメラの視野に応じて可変可能であ
る。例えば、演算された動ベクトルのｘ、ｙ成分をレジ
スタに取り込んで、そのデータをＣＰＵで認識する。Ｃ
ＰＵから、その成分に応じた移動をさせるためのカメラ
制御コマンドをシリアルデータとして出力し、ＲＳ２３
２Ｃレベルに変換後、カメラのシリアルインタフェース
によりカメラ制御を行う。
【００２９】さらに、領域抽出部３０において移動物体
領域であることの情報を動ベクトル検出ブロック毎に符
号化制御部６０へ出力する。符号化制御部６０では、そ
の情報をもとに、フレーム間予測符号化部２０で行われ
る量子化を動ベクトル検出ブロック単位に制御する。
領域であることの情報を動ベクトル検出ブロック毎に符
号化制御部６０へ出力する。符号化制御部６０では、そ
の情報をもとに、フレーム間予測符号化部２０で行われ
る量子化を動ベクトル検出ブロック単位に制御する。
【００３０】
【発明の効果】以上説明したように、本発明によれば、
カメラ制御が行われたときの背景、すなわち移動物体以
外の情報量を低減し、移動物体の領域を高解像度に保つ
ことが可能となり、さらに、物体の動きについても補償
することができるという効果を奏する。
カメラ制御が行われたときの背景、すなわち移動物体以
外の情報量を低減し、移動物体の領域を高解像度に保つ
ことが可能となり、さらに、物体の動きについても補償
することができるという効果を奏する。
【００３１】その理由は、本発明においては、動ベクト
ル検出手段において検出される動ベクトルから、同一の
ベクトル量を有する隣接した複数の動ベクトル検出ブロ
ックを輪郭として抽出し、その内部を移動物体領域と
し、その領域が有するベクトル水平方向成分および垂直
方向成分により動画像符号化装置に接続されるカメラ制
御可能として、フレーム間予測符号化において移動物体
領域以外は量子化段階を下げる符号化制御を行うことが
可能となるためである。
ル検出手段において検出される動ベクトルから、同一の
ベクトル量を有する隣接した複数の動ベクトル検出ブロ
ックを輪郭として抽出し、その内部を移動物体領域と
し、その領域が有するベクトル水平方向成分および垂直
方向成分により動画像符号化装置に接続されるカメラ制
御可能として、フレーム間予測符号化において移動物体
領域以外は量子化段階を下げる符号化制御を行うことが
可能となるためである。
【００３２】例えば、移動物体領域の量子化段階を１０
とすると、その領域以外の量子化段階を５として、カメ
ラが制御されて背景が動くことによって発生する情報量
を抑圧し、かつ、移動物体領域は高解像度を保つことが
可能となる。
とすると、その領域以外の量子化段階を５として、カメ
ラが制御されて背景が動くことによって発生する情報量
を抑圧し、かつ、移動物体領域は高解像度を保つことが
可能となる。
【図１】本発明の実施例を示す図である。
１０ 動ベクトル検出部 ２０ フレーム間予測符号化部 ３０ 領域抽出部 ４０ ベクトル演算部 ５０ カメラ制御部 ６０ 符号化制御部 １００ 動き補償予測符号化部
Claims (3)
- 【請求項１】カメラから動画像を入力し、動き補償フレ
ーム間予測符号化を施す、動画像符号化装置において、 前記動画像入力と前フレームの動画像を小ブロックに分
割し、小ブロック毎に動ベクトルを検出する動ベクトル
検出手段と、 前記動ベクトル検出手段において検出された動ベクトル
が同一の大きさ、方向を持つ隣接した前記小ブロックに
より移動物体の輪郭とし、該輪郭内部を移動領域として
抽出する手段と、 前記抽出された領域の動ベクトルを水平方向および垂直
方向に成分分解する手段と、 前記動ベクトルの水平成分および垂直成分により前記カ
メラの上下・左右方向の移動量を設定して前記カメラを
制御するためのカメラ制御手段と、 を備えることを特徴とする動画像符号化装置。 - 【請求項２】前記動ベクトル検出手段が、検出された動
ベクトルにより抽出された領域の情報により、設定され
た領域以外の量子化段階を下げて符号化制御を行う手段
を備えることを特徴とする請求項１記載の動画像符号化
装置。 - 【請求項３】前記動ベクトル検出手段が、検出された動
ベクトルが同一の大きさ、方向を持つ隣接した小ブロッ
クにより移動物体の輪郭とし、その内部を移動領域とし
て抽出する手段を備えることを特徴とする請求項１記載
の動画像符号化装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP14313297A JP3052893B2 (ja) | 1997-05-16 | 1997-05-16 | 動画像符号化装置 |
| US09/079,516 US6310920B1 (en) | 1997-05-16 | 1998-05-15 | Moving picture encoding apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP14313297A JP3052893B2 (ja) | 1997-05-16 | 1997-05-16 | 動画像符号化装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10322582A true JPH10322582A (ja) | 1998-12-04 |
| JP3052893B2 JP3052893B2 (ja) | 2000-06-19 |
Family
ID=15331670
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP14313297A Expired - Fee Related JP3052893B2 (ja) | 1997-05-16 | 1997-05-16 | 動画像符号化装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6310920B1 (ja) |
| JP (1) | JP3052893B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002135760A (ja) * | 2000-10-20 | 2002-05-10 | Victor Co Of Japan Ltd | 監視用信号の通信方法、及び監視用信号通信装置 |
| JP2011512766A (ja) * | 2008-02-21 | 2011-04-21 | フランス・テレコム | ピクセルブロックに分割された画像または画像のシーケンスの符号化及び復号化 |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6876702B1 (en) * | 1998-10-13 | 2005-04-05 | Stmicroelectronics Asia Pacific (Pte) Ltd. | Motion vector detection with local motion estimator |
| JP4407985B2 (ja) * | 1999-09-02 | 2010-02-03 | キヤノン株式会社 | 画像処理方法及び装置並びに記憶媒体 |
| US20040189804A1 (en) * | 2000-02-16 | 2004-09-30 | Borden George R. | Method of selecting targets and generating feedback in object tracking systems |
| US7050500B2 (en) * | 2001-08-23 | 2006-05-23 | Sharp Laboratories Of America, Inc. | Method and apparatus for motion vector coding with global motion parameters |
| US6954501B2 (en) * | 2003-02-17 | 2005-10-11 | Xvd Corporation | Method and apparatus for object based motion compensation |
| US8705614B2 (en) * | 2005-04-04 | 2014-04-22 | Broadcom Corporation | Motion estimation using camera tracking movements |
| JP5400133B2 (ja) * | 2008-04-15 | 2014-01-29 | オランジュ | 線形形状の画素区画にスライスされた画像または画像シーケンスの符号化および復号 |
| JP4813517B2 (ja) * | 2008-05-29 | 2011-11-09 | オリンパス株式会社 | 画像処理装置、画像処理プログラム、画像処理方法、および電子機器 |
| CN101308576B (zh) * | 2008-07-11 | 2011-04-06 | 北京中星微电子有限公司 | 道路中的运动方向检测方法及装置 |
| FR2947134A1 (fr) * | 2009-06-23 | 2010-12-24 | France Telecom | Procedes de codage et de decodages d'images, dispositifs de codage et de decodage, flux de donnees et programme d'ordinateur correspondants. |
| KR101626003B1 (ko) * | 2009-08-24 | 2016-06-13 | 삼성전자주식회사 | 디지털 촬영장치 |
| KR101939628B1 (ko) * | 2012-05-30 | 2019-01-17 | 삼성전자주식회사 | 모션 검출 방법 및 모션 검출기 |
| US20220319019A1 (en) * | 2021-03-31 | 2022-10-06 | Nvidia Corporation | Techniques to determine optical flow |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0449283B1 (en) | 1990-03-30 | 1997-11-12 | Sanyo Electric Co., Ltd. | An image sensing apparatus having camera-shake detection function |
| JPH04126473A (ja) | 1990-09-18 | 1992-04-27 | Toshiba Corp | 自動追尾カメラ装置 |
| EP0476603B1 (en) | 1990-09-20 | 1997-06-18 | Nec Corporation | Method and apparatus for coding moving image signal |
| CA2054344C (en) * | 1990-10-29 | 1997-04-15 | Kazuhiro Itsumi | Video camera having focusing and image-processing function |
| JP3103897B2 (ja) | 1991-03-19 | 2000-10-30 | ソニー株式会社 | 手振れ補正装置および手振れ補正方法 |
| JPH06165164A (ja) | 1992-11-18 | 1994-06-10 | Nec Corp | 動画像処理装置 |
| JP3235261B2 (ja) | 1993-04-13 | 2001-12-04 | 松下電器産業株式会社 | 監視映像送信装置と監視映像受信装置 |
| JPH07298247A (ja) | 1994-04-22 | 1995-11-10 | Oki Electric Ind Co Ltd | Ｔｖカメラを用いた監視方法及び監視システム |
| JP3075934B2 (ja) | 1994-10-21 | 2000-08-14 | 三洋電機株式会社 | 動きベクトル検出回路およびそれを用いた被写体追尾カメラ装置 |
| JP3258840B2 (ja) * | 1994-12-27 | 2002-02-18 | シャープ株式会社 | 動画像符号化装置および領域抽出装置 |
| US5926209A (en) * | 1995-07-14 | 1999-07-20 | Sensormatic Electronics Corporation | Video camera apparatus with compression system responsive to video camera adjustment |
-
1997
- 1997-05-16 JP JP14313297A patent/JP3052893B2/ja not_active Expired - Fee Related
-
1998
- 1998-05-15 US US09/079,516 patent/US6310920B1/en not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002135760A (ja) * | 2000-10-20 | 2002-05-10 | Victor Co Of Japan Ltd | 監視用信号の通信方法、及び監視用信号通信装置 |
| JP2011512766A (ja) * | 2008-02-21 | 2011-04-21 | フランス・テレコム | ピクセルブロックに分割された画像または画像のシーケンスの符号化及び復号化 |
Also Published As
| Publication number | Publication date |
|---|---|
| US6310920B1 (en) | 2001-10-30 |
| JP3052893B2 (ja) | 2000-06-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3052893B2 (ja) | 動画像符号化装置 | |
| JP2000278688A (ja) | 動きベクトル検出装置およびその方法と画像処理装置 | |
| JPH05328333A (ja) | 動きベクトル検出装置 | |
| EP0895423B1 (en) | Image collating method and apparatus | |
| JP2009509411A (ja) | ビデオ圧縮における適応的動きベクトルサンプリングのための多段リンク方法 | |
| EP1460854A1 (en) | Moving picture compression/coding apparatus and motion vector detection method | |
| JP2912710B2 (ja) | 動画像符号化復号化装置 | |
| KR100377131B1 (ko) | 동화상부호화장치 | |
| JPH0832969A (ja) | 動きベクトル検出装置 | |
| JPH06165164A (ja) | 動画像処理装置 | |
| JPH0262178A (ja) | 画像処理装置の動き検出方式 | |
| JP2001145011A (ja) | 映像信号符号化装置 | |
| JP2000059786A (ja) | 動き検出装置及び方法 | |
| JP2000078580A (ja) | 動きベクトル検出装置および方法、並びに提供媒体 | |
| JP2006311603A (ja) | 動画像符号化方法と装置及び動画像復号化方法と装置 | |
| JPH0795590A (ja) | 映像信号処理装置、映像信号処理方法及び撮像装置 | |
| JPH0818974A (ja) | 動画像符号化装置および動画像の動き検出装置 | |
| JPH0984017A (ja) | 動画像の動き補償予測符号化方法 | |
| JP2005260929A (ja) | 画像処理装置と画像処理方法およびプログラム | |
| JPH0879764A (ja) | 動きベクトル検出装置 | |
| JPH09168153A (ja) | 動き検出方法 | |
| JP3834014B2 (ja) | 動画像符号化方法及び装置 | |
| KR100892471B1 (ko) | 움직임 검출 장치 | |
| JP2005135249A (ja) | 映像の領域分割装置 | |
| JPH06133296A (ja) | 動き検出方法および装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20000307 |
|
| LAPS | Cancellation because of no payment of annual fees |