JPH09312829A - 音声・動画像符号化データ検索方法及び検索装置 - Google Patents
音声・動画像符号化データ検索方法及び検索装置Info
- Publication number
- JPH09312829A JPH09312829A JP12974296A JP12974296A JPH09312829A JP H09312829 A JPH09312829 A JP H09312829A JP 12974296 A JP12974296 A JP 12974296A JP 12974296 A JP12974296 A JP 12974296A JP H09312829 A JPH09312829 A JP H09312829A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- data
- moving image
- encoded data
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【課題】 符号化データを復号化せずに解析することに
より、必要とするサーチポイントへの自動サーチを可能
とし、効率的で確実な検索検索方法及び検索装置を提供
する。 【解決手段】 所定の記録再生手段に記録された音声・
動画像圧縮符号化データを高速で順次読み出し、動画像
圧縮符号化データにおける各ピクチャの符号量と符号化
処理パラメータを検出して当該各ピクチャの特徴を解析
し、音声圧縮符号化データから音声符号化処理パラメー
タを検出して当該音声の特徴を解析し、該解析結果と前
記ピクチャの解析結果に基づきサーチすべきポイントで
あるか否かを判定し、サーチポイントであると判定され
た時、前記記録再生手段を制御し、対応する音声・動画
像圧縮符号化データを標準速で読み出し、復号化処理し
て所望の音声・動画像符号化データを自動サーチするよ
うにしたものである。
より、必要とするサーチポイントへの自動サーチを可能
とし、効率的で確実な検索検索方法及び検索装置を提供
する。 【解決手段】 所定の記録再生手段に記録された音声・
動画像圧縮符号化データを高速で順次読み出し、動画像
圧縮符号化データにおける各ピクチャの符号量と符号化
処理パラメータを検出して当該各ピクチャの特徴を解析
し、音声圧縮符号化データから音声符号化処理パラメー
タを検出して当該音声の特徴を解析し、該解析結果と前
記ピクチャの解析結果に基づきサーチすべきポイントで
あるか否かを判定し、サーチポイントであると判定され
た時、前記記録再生手段を制御し、対応する音声・動画
像圧縮符号化データを標準速で読み出し、復号化処理し
て所望の音声・動画像符号化データを自動サーチするよ
うにしたものである。
Description
【０００１】
【発明の属する技術分野】本発明は、音声・画像の処理
技術に係わり、特に、圧縮符号化されたデータの検索方
法及び検索装置に関する。
技術に係わり、特に、圧縮符号化されたデータの検索方
法及び検索装置に関する。
【０００２】
【従来の技術】近年、音声・動画像符号化方式（ＭＰＥ
Ｇ１：ＩＳＯ／ＩＥＣ １１１７２，ＭＰＥＧ２：ＩＳ
Ｏ／ＩＥＣ １３８１８，他）が標準化され、圧縮符号
化されたデータをハードディスク等に蓄積するアプリケ
ーションが増えている。このようなアプリケーションに
おいて重要になるのが、その符号化データの内容を検索
する技術である。例えば、監視システムのアプリケーシ
ョンなどでは、監視カメラからの音声・動画像を符号化
(圧縮)し、伝送路を通して監視者のいる場所へ伝送す
る。受信側では伝送された音声・動画像符号化データを
復号化(伸張)してスピーカやモニタに出力するととも
に、音声・動画像符号化データをハードディスクに記録
する。そして、後で監視している対象を詳細に解析する
場合などに、上記のように記録された複数の符号化デー
タから必要とされるものを検索しなければならない。こ
のような場合における従来技術では、一般に、検索シス
テムの高速再生機能を利用して、各動画像符号化データ
の内容を確認する。この高速再生は、動画像符号化デー
タが、連続したピクチャ(または、フレーム)の符号化デ
ータから構成されていることから、それらのピクチャの
複数枚を飛び越して、間引き再生することで、実現して
いる。一方、ＶＯＤ(Video On Demand）などでは、多数
の動画像符号化データが蓄積されているため、必要な動
画像符号化データを検索する場合、まずは、そのタイト
ル名やあらかじめ設定された代表画像から判断するのが
普通である。しかし、より詳細な内容については、やは
り前述の高速再生を利用して確認することになる。
Ｇ１：ＩＳＯ／ＩＥＣ １１１７２，ＭＰＥＧ２：ＩＳ
Ｏ／ＩＥＣ １３８１８，他）が標準化され、圧縮符号
化されたデータをハードディスク等に蓄積するアプリケ
ーションが増えている。このようなアプリケーションに
おいて重要になるのが、その符号化データの内容を検索
する技術である。例えば、監視システムのアプリケーシ
ョンなどでは、監視カメラからの音声・動画像を符号化
(圧縮)し、伝送路を通して監視者のいる場所へ伝送す
る。受信側では伝送された音声・動画像符号化データを
復号化(伸張)してスピーカやモニタに出力するととも
に、音声・動画像符号化データをハードディスクに記録
する。そして、後で監視している対象を詳細に解析する
場合などに、上記のように記録された複数の符号化デー
タから必要とされるものを検索しなければならない。こ
のような場合における従来技術では、一般に、検索シス
テムの高速再生機能を利用して、各動画像符号化データ
の内容を確認する。この高速再生は、動画像符号化デー
タが、連続したピクチャ(または、フレーム)の符号化デ
ータから構成されていることから、それらのピクチャの
複数枚を飛び越して、間引き再生することで、実現して
いる。一方、ＶＯＤ(Video On Demand）などでは、多数
の動画像符号化データが蓄積されているため、必要な動
画像符号化データを検索する場合、まずは、そのタイト
ル名やあらかじめ設定された代表画像から判断するのが
普通である。しかし、より詳細な内容については、やは
り前述の高速再生を利用して確認することになる。
【０００３】高速再生による検索について、より詳細な
具体例を図２により説明する。図２は、火山の噴火の様
子を監視するシステムにおける検索状況を模式的に示す
もので、(ａ)は記録された複数の動画像符号化データの
内の特定の数ピクチャの表示画像例で、(ｂ)は複数の検
索用ピクチャが並んでいる状態を模式的に示し、斜線を
付したピクチャが、再生されるピクチャを表わし、高速
再生の部分では、間引き再生となっていることを表わし
ている。一般に、このような場合の検索では、検索操作
者は、以下に示すような手順で、それぞれの噴火してい
る部分の画像を確認し、必要な動画像符号化データか、
否かの判断をする。以下、このような判断に必要な画像
部分を、判断画像またはサーチポイントと呼ぶことにす
る。 （１）高速再生により、噴火の画像が表示されるまで目
視でサーチする。 （２）噴火の画像を目視で確認した時点で標準再生と
し、必要性を判断する。 （３）高速再生により、次の噴火の画像が表示されるま
で目視でサーチする。 （４）噴火の画像を目視で確認した時点で標準再生と
し、必要性を判断する。 以上のように検索の主な内容は、動画像符号化データの
必要性を判断する判断画像(図２の場合は、噴火の画像)
のサーチと、その判断画像による必要性の判断である。
そして、一般的な従来技術では、前記判断画像へのサー
チに高速再生を利用していた。
具体例を図２により説明する。図２は、火山の噴火の様
子を監視するシステムにおける検索状況を模式的に示す
もので、(ａ)は記録された複数の動画像符号化データの
内の特定の数ピクチャの表示画像例で、(ｂ)は複数の検
索用ピクチャが並んでいる状態を模式的に示し、斜線を
付したピクチャが、再生されるピクチャを表わし、高速
再生の部分では、間引き再生となっていることを表わし
ている。一般に、このような場合の検索では、検索操作
者は、以下に示すような手順で、それぞれの噴火してい
る部分の画像を確認し、必要な動画像符号化データか、
否かの判断をする。以下、このような判断に必要な画像
部分を、判断画像またはサーチポイントと呼ぶことにす
る。 （１）高速再生により、噴火の画像が表示されるまで目
視でサーチする。 （２）噴火の画像を目視で確認した時点で標準再生と
し、必要性を判断する。 （３）高速再生により、次の噴火の画像が表示されるま
で目視でサーチする。 （４）噴火の画像を目視で確認した時点で標準再生と
し、必要性を判断する。 以上のように検索の主な内容は、動画像符号化データの
必要性を判断する判断画像(図２の場合は、噴火の画像)
のサーチと、その判断画像による必要性の判断である。
そして、一般的な従来技術では、前記判断画像へのサー
チに高速再生を利用していた。
【０００４】
【発明が解決しようとする課題】ところが、この高速再
生は、動画像符号化データの内容に関係なく、予め定め
られた、所定枚数のピクチャを飛び越す、間引き再生に
よって実現されている。ここで、一般に記録された動画
像符号化データにおいて、判断画像は全体の一部分にす
ぎない場合が多い。従って、従来の高速再生を利用した
検索では、検索に要する時間のほとんどが判断画像を目
視でサーチする時間となり、効率的な検索の実現が不可
能であった。また、操作者が判断画像か否かを目視で確
認するために、必要とする画像を見逃すという人的ミス
が発生することが考えられる。この問題を解決する従来
技術としては、判断画像への自動サーチを可能とする技
術が提案されている。 これは、非圧縮データ、つま
り、復号化(伸張)されたデータを基に、画像間の内容の
変化を演算し、その変化の大きい画像部分を判断画像と
するものである。 具体的には、対象画像と時間的に前
方の画像に対し、各画素値の差分をとり、この差分値の
大きい時に、対象画像を判断画像とする。但し、この自
動サーチは、非圧縮データを基に処理するため、復号化
(伸張)処理が必須となること、復号化(伸張)処理により
演算量が膨大となることなどの問題がある。
生は、動画像符号化データの内容に関係なく、予め定め
られた、所定枚数のピクチャを飛び越す、間引き再生に
よって実現されている。ここで、一般に記録された動画
像符号化データにおいて、判断画像は全体の一部分にす
ぎない場合が多い。従って、従来の高速再生を利用した
検索では、検索に要する時間のほとんどが判断画像を目
視でサーチする時間となり、効率的な検索の実現が不可
能であった。また、操作者が判断画像か否かを目視で確
認するために、必要とする画像を見逃すという人的ミス
が発生することが考えられる。この問題を解決する従来
技術としては、判断画像への自動サーチを可能とする技
術が提案されている。 これは、非圧縮データ、つま
り、復号化(伸張)されたデータを基に、画像間の内容の
変化を演算し、その変化の大きい画像部分を判断画像と
するものである。 具体的には、対象画像と時間的に前
方の画像に対し、各画素値の差分をとり、この差分値の
大きい時に、対象画像を判断画像とする。但し、この自
動サーチは、非圧縮データを基に処理するため、復号化
(伸張)処理が必須となること、復号化(伸張)処理により
演算量が膨大となることなどの問題がある。
【０００５】また、以上のような従来技術では、自動サ
ーチにおける対象が、画像のみであり、音声が考慮され
ていない。特に、符号化データを基にした自動サーチに
おいて、画像と音声を対象とする自動サーチ技術は存在
していなかった。一般的に、画像の変化と音声の変化に
は相関があるため、前述のような画像だけによる自動サ
ーチでは、正確さに問題があった。例えば、図２に示す
ような火山の噴火監視システムにおいては、外観の変化
は激しくなくとも、火山内部での噴火音が発生している
場合もあり、画像だけではサーチしそこなうという欠点
がある。本発明は、これらの問題点に鑑み、符号化デー
タを、復号化せずに、解析することにより、必要とする
サーチポイントへの自動サーチを可能とし、より効率的
で確実な検索ができる、符号化データ検索方法および検
索装置を提供することを目的とする。
ーチにおける対象が、画像のみであり、音声が考慮され
ていない。特に、符号化データを基にした自動サーチに
おいて、画像と音声を対象とする自動サーチ技術は存在
していなかった。一般的に、画像の変化と音声の変化に
は相関があるため、前述のような画像だけによる自動サ
ーチでは、正確さに問題があった。例えば、図２に示す
ような火山の噴火監視システムにおいては、外観の変化
は激しくなくとも、火山内部での噴火音が発生している
場合もあり、画像だけではサーチしそこなうという欠点
がある。本発明は、これらの問題点に鑑み、符号化デー
タを、復号化せずに、解析することにより、必要とする
サーチポイントへの自動サーチを可能とし、より効率的
で確実な検索ができる、符号化データ検索方法および検
索装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】本発明は上記目的を達成
するため、所定の記録再生手段に記録された音声・動画
像圧縮符号化データの検索において、前記記録再生手段
から高速で前記動画像圧縮符号化データを順次読み出
し、該動画像圧縮符号化データにおける各ピクチャの符
号量と符号化処理パラメータを検出して当該各ピクチャ
の特徴を解析し、該解析結果に基づき各ピクチャの必要
性を判定し、必要とするピクチャであると判定された
時、前記記録再生手段を制御し、対応する動画像圧縮符
号化データを標準速で読み出し、復号化処理して所望の
動画像符号化データを自動サーチするようにしたもので
ある。また、本発明は、上記に加え、前記記録再生手段
から高速で順次読み出される音声圧縮符号化データから
音声符号化処理パラメータを検出して当該音声の特徴を
解析し、該解析結果と前記ピクチャの解析結果に基づき
サーチすべきポイントであるか否かを判定し、サーチポ
イントであると判定された時、前記記録再生手段を制御
し、対応する音声・動画像圧縮符号化データを標準速で
読み出し、復号化処理して所望の音声・動画像符号化デ
ータを自動サーチするようにしたものである。
するため、所定の記録再生手段に記録された音声・動画
像圧縮符号化データの検索において、前記記録再生手段
から高速で前記動画像圧縮符号化データを順次読み出
し、該動画像圧縮符号化データにおける各ピクチャの符
号量と符号化処理パラメータを検出して当該各ピクチャ
の特徴を解析し、該解析結果に基づき各ピクチャの必要
性を判定し、必要とするピクチャであると判定された
時、前記記録再生手段を制御し、対応する動画像圧縮符
号化データを標準速で読み出し、復号化処理して所望の
動画像符号化データを自動サーチするようにしたもので
ある。また、本発明は、上記に加え、前記記録再生手段
から高速で順次読み出される音声圧縮符号化データから
音声符号化処理パラメータを検出して当該音声の特徴を
解析し、該解析結果と前記ピクチャの解析結果に基づき
サーチすべきポイントであるか否かを判定し、サーチポ
イントであると判定された時、前記記録再生手段を制御
し、対応する音声・動画像圧縮符号化データを標準速で
読み出し、復号化処理して所望の音声・動画像符号化デ
ータを自動サーチするようにしたものである。
【０００７】一般に、音声・動画像符号化データの内容
を検索する時の判断部分は、時間軸方向で、絵柄または
シーンが変化した画像部分や、音声が変化した部分であ
ることが多い。例えば、火山の噴火した部分や、噴火音
の発生している部分である。ここで、動画像符号化デー
タにおける各ピクチャの符号量と符号化処理パラメータ
(量子化ステップ値等)は、当該ピクチャの絵柄、シーン
に、直接影響するものである。また、音声符号化データ
における音声符号化処理パラメータ（ビット割り当て情
報やスケールファクタ等）も、音声の状態に直接影響す
るものである。そこで本発明では、動画像符号化データ
から順次各ピクチャの符号量と符号化処理パラメータを
検出して絵柄、シーンの変化を判定し、さらに音声符号
化データからも音声符号化処理パラメータを検出して音
声の状態、変化を判定し、これらの判定結果に基づき、
サーチポイントへ自動サーチすることを可能とする。
を検索する時の判断部分は、時間軸方向で、絵柄または
シーンが変化した画像部分や、音声が変化した部分であ
ることが多い。例えば、火山の噴火した部分や、噴火音
の発生している部分である。ここで、動画像符号化デー
タにおける各ピクチャの符号量と符号化処理パラメータ
(量子化ステップ値等)は、当該ピクチャの絵柄、シーン
に、直接影響するものである。また、音声符号化データ
における音声符号化処理パラメータ（ビット割り当て情
報やスケールファクタ等）も、音声の状態に直接影響す
るものである。そこで本発明では、動画像符号化データ
から順次各ピクチャの符号量と符号化処理パラメータを
検出して絵柄、シーンの変化を判定し、さらに音声符号
化データからも音声符号化処理パラメータを検出して音
声の状態、変化を判定し、これらの判定結果に基づき、
サーチポイントへ自動サーチすることを可能とする。
【０００８】
【発明の実施の形態】以下、本発明の一実施例を図１に
より説明する。本実施例は、ハードディスク装置１、ハ
ードディスク制御部５、動画像符号化データ再生部７、
ピクチャ符号量検出部１０、ピクチャ符号化処理パラメ
ータ検出部１１、ピクチャ特徴判定部１４、音声符号化
処理パラメータ検出部１７、音声特徴判定部１９、サー
チポイント判定部２５、音声符号化データ再生部２３か
らなる。ハードディスク装置１には、検索対象となる音
声・動画像符号化データが蓄積されている。 このハー
ドディスク装置１は、ハードディスク制御部５からの制
御データ２により制御され、適宜、蓄積された音声・動
画像符号化データ３を、ハードディスク制御部５に出力
する。ハードディスク制御部５は、操作者からの操作デ
ータ４と、サーチポイント判定部２５からの判定データ
２１に基づき、ハードディスク装置１を制御する。ま
た、ハードディスク制御部５は、ハードディスク装置１
から取出された動画像符号化データ９を、ピクチャ符号
量検出部１０とピクチャ符号化処理パラメータ検出部１
１に、音声符号化データ１６を、音声符号化処理パラメ
ータ検出部１７に出力する。
より説明する。本実施例は、ハードディスク装置１、ハ
ードディスク制御部５、動画像符号化データ再生部７、
ピクチャ符号量検出部１０、ピクチャ符号化処理パラメ
ータ検出部１１、ピクチャ特徴判定部１４、音声符号化
処理パラメータ検出部１７、音声特徴判定部１９、サー
チポイント判定部２５、音声符号化データ再生部２３か
らなる。ハードディスク装置１には、検索対象となる音
声・動画像符号化データが蓄積されている。 このハー
ドディスク装置１は、ハードディスク制御部５からの制
御データ２により制御され、適宜、蓄積された音声・動
画像符号化データ３を、ハードディスク制御部５に出力
する。ハードディスク制御部５は、操作者からの操作デ
ータ４と、サーチポイント判定部２５からの判定データ
２１に基づき、ハードディスク装置１を制御する。ま
た、ハードディスク制御部５は、ハードディスク装置１
から取出された動画像符号化データ９を、ピクチャ符号
量検出部１０とピクチャ符号化処理パラメータ検出部１
１に、音声符号化データ１６を、音声符号化処理パラメ
ータ検出部１７に出力する。
【０００９】ピクチャ符号量検出部１０と、ピクチャ符
号化処理パラメータ検出部１１は、各々動画像符号化デ
ータ９から、符号量Ｂとパラメータ値Ｐを検出し、ピク
チャ特徴判定部１４に出力する。 また、音声符号化処
理パラメータ検出部１７は、音声符号化データ１６から
パラメータ値Ｓを検出し、音声特徴判定部１９に出力す
る。 そして、ピクチャ特徴判定部１４と音声特徴判定
部１９の出力である、判定データ１５，２０は、それぞ
れサーチポイント判定部２５に入力される。サーチポイ
ント判定部２５は、判定データ１５，２０に基づき、サ
ーチポイントか否かの判定をして、対応する判定データ
２１をハードディスク制御部５へ出力する。ここで、ハ
ードディスク制御部５は、これらの制御により取出され
た動画像符号化データ６を動画像符号化データ再生部７
に、音声符号化データ２２を音声符号化データ再生部２
３に出力する。 そして、動画像符号化データ６は、動
画像符号化データ再生部７にて復号化(伸張)され、再生
データである動画像データ８となり、モニタに出力され
る。 また、音声符号化データ２２は、音声符号化デー
タ再生部２３にて復号化(伸張)され、再生データである
音声データ２４となって、スピーカに出力される。
号化処理パラメータ検出部１１は、各々動画像符号化デ
ータ９から、符号量Ｂとパラメータ値Ｐを検出し、ピク
チャ特徴判定部１４に出力する。 また、音声符号化処
理パラメータ検出部１７は、音声符号化データ１６から
パラメータ値Ｓを検出し、音声特徴判定部１９に出力す
る。 そして、ピクチャ特徴判定部１４と音声特徴判定
部１９の出力である、判定データ１５，２０は、それぞ
れサーチポイント判定部２５に入力される。サーチポイ
ント判定部２５は、判定データ１５，２０に基づき、サ
ーチポイントか否かの判定をして、対応する判定データ
２１をハードディスク制御部５へ出力する。ここで、ハ
ードディスク制御部５は、これらの制御により取出され
た動画像符号化データ６を動画像符号化データ再生部７
に、音声符号化データ２２を音声符号化データ再生部２
３に出力する。 そして、動画像符号化データ６は、動
画像符号化データ再生部７にて復号化(伸張)され、再生
データである動画像データ８となり、モニタに出力され
る。 また、音声符号化データ２２は、音声符号化デー
タ再生部２３にて復号化(伸張)され、再生データである
音声データ２４となって、スピーカに出力される。
【００１０】以下、この動作について、さらに詳細に説
明する。まず、ハードディスク制御部５は、図３のステ
ートダイアグラムに示すように、基本的に２つのステー
トにより、ハードディスク装置１を制御する。Ｓ１ステ
ートは、以下の動作をする。 Ｓ１：ハードディスク装置１から、標準速で音声・動画
像符号化データ３を順次読み出し、当該音声・動画像符
号化データ３を動画像符号化データ６と音声符号化デー
タ２２に分離し、動画像符号化データ６を動画像符号化
データ再生部７に出力し、音声符号化データ２２を音声
符号化データ再生部２３に出力する。そして、動画像符
号化データ再生部７と音声符号化データ再生部２３でそ
れぞれ復号化することにより、標準速の動画像データ８
と音声データ２４が出力され、操作者はモニタ、スピー
カで内容を確認できる。そして、このＳ１ステートで、
操作者が操作データ４によりサーチポイントへの自動サ
ーチを指示すると、ハードディスク制御部５は、図３の
Ｓ２ステートに移行する。
明する。まず、ハードディスク制御部５は、図３のステ
ートダイアグラムに示すように、基本的に２つのステー
トにより、ハードディスク装置１を制御する。Ｓ１ステ
ートは、以下の動作をする。 Ｓ１：ハードディスク装置１から、標準速で音声・動画
像符号化データ３を順次読み出し、当該音声・動画像符
号化データ３を動画像符号化データ６と音声符号化デー
タ２２に分離し、動画像符号化データ６を動画像符号化
データ再生部７に出力し、音声符号化データ２２を音声
符号化データ再生部２３に出力する。そして、動画像符
号化データ再生部７と音声符号化データ再生部２３でそ
れぞれ復号化することにより、標準速の動画像データ８
と音声データ２４が出力され、操作者はモニタ、スピー
カで内容を確認できる。そして、このＳ１ステートで、
操作者が操作データ４によりサーチポイントへの自動サ
ーチを指示すると、ハードディスク制御部５は、図３の
Ｓ２ステートに移行する。
【００１１】Ｓ２ステートは、以下の動作をする。 Ｓ２：ハードディスク装置１から、高速で、音声・動画
像符号化データ３を順次読み出し、当該音声・動画像符
号化データ３を動画像符号化データ９と音声符号化デー
タ１６に分離し、動画像符号化データ９を、ピクチャ符
号量検出部１０とピクチャ符号化処理パラメータ検出部
１１に出力し、音声符号化データ１６を、音声符号化処
理パラメータ検出部１７に出力する。これにより、ピク
チャ符号量検出部１０とピクチャ符号化処理パラメータ
検出部１１は、動画像符号化データ９から、ピクチャ単
位に符号量Ｂとパラメータ値Ｐを検出し、ピクチャ特徴
判定部１４に出力する。 ピクチャ特徴判定部１４は、
その符号量Ｂとパラメータ値Ｐから特徴解析をし、画像
としてのサーチポイントか否かの判定をする。 そし
て、その判定結果を判定データ１５として、サーチポイ
ント判定部２５に出力する。
像符号化データ３を順次読み出し、当該音声・動画像符
号化データ３を動画像符号化データ９と音声符号化デー
タ１６に分離し、動画像符号化データ９を、ピクチャ符
号量検出部１０とピクチャ符号化処理パラメータ検出部
１１に出力し、音声符号化データ１６を、音声符号化処
理パラメータ検出部１７に出力する。これにより、ピク
チャ符号量検出部１０とピクチャ符号化処理パラメータ
検出部１１は、動画像符号化データ９から、ピクチャ単
位に符号量Ｂとパラメータ値Ｐを検出し、ピクチャ特徴
判定部１４に出力する。 ピクチャ特徴判定部１４は、
その符号量Ｂとパラメータ値Ｐから特徴解析をし、画像
としてのサーチポイントか否かの判定をする。 そし
て、その判定結果を判定データ１５として、サーチポイ
ント判定部２５に出力する。
【００１２】一方、音声符号化処理パラメータ検出部１
７は、音声符号化データ１６から、音声フレーム単位に
パラメータ値Ｓを検出し、音声特徴判定部１９に出力す
る。音声特徴判定部１９は、このパラメータ値Ｓから特
徴解析をして、音声としてのサーチポイントか否かの判
定をする。 そして、その判定結果を判定データ２０と
して、サーチポイント判定部２５に出力する。サーチポ
イント判定部２５は、これら判定データ１５，２０に基
づき、サーチポイントか否かの判定をし、対応する判定
データ２１をハードディスク制御部５へ出力する。ハー
ドディスク制御部５は、この判定データ２１によって、
サーチポイントにアクセスしたことを認識するまで、Ｓ
２ステートで、ハードディスク装置１から高速でデータ
を読み出し続ける。 そして、サーチポイントにアクセ
スしたことを確認すると、前記Ｓ１ステートへ移行す
る。 Ｓ１ステートでは前述した動作により、音声・画
像が、自動的に標準再生される。操作者は、これをスピ
ーカ、モニタで確認し、必要に応じて、さらに次のサー
チポイントへ自動サーチを指示すれば良い。
７は、音声符号化データ１６から、音声フレーム単位に
パラメータ値Ｓを検出し、音声特徴判定部１９に出力す
る。音声特徴判定部１９は、このパラメータ値Ｓから特
徴解析をして、音声としてのサーチポイントか否かの判
定をする。 そして、その判定結果を判定データ２０と
して、サーチポイント判定部２５に出力する。サーチポ
イント判定部２５は、これら判定データ１５，２０に基
づき、サーチポイントか否かの判定をし、対応する判定
データ２１をハードディスク制御部５へ出力する。ハー
ドディスク制御部５は、この判定データ２１によって、
サーチポイントにアクセスしたことを認識するまで、Ｓ
２ステートで、ハードディスク装置１から高速でデータ
を読み出し続ける。 そして、サーチポイントにアクセ
スしたことを確認すると、前記Ｓ１ステートへ移行す
る。 Ｓ１ステートでは前述した動作により、音声・画
像が、自動的に標準再生される。操作者は、これをスピ
ーカ、モニタで確認し、必要に応じて、さらに次のサー
チポイントへ自動サーチを指示すれば良い。
【００１３】基本的には、以上のように操作者は目視で
判断画像のサーチをすることなく、音声を含めた自動サ
ーチが実現され、効率的かつ正確にサーチが実現でき
る。さらに、符号化データのまま処理可能なため、復号
化処理を必要とせず、演算量も大幅に減少可能である。
ここで、上記ハードディスク制御部５を、一般的なＣＰ
Ｕと、ハードディスクコントローラであるＳＣＳＩコン
トローラで構成した一実施例を図４に示す。この場合、
操作データ４、動画像符号化データ６，９、音声符号化
データ２２，１６、判定データ２１は、ＣＰＵ３０のバ
ス３１に接続されている。 同様に、データ３４も、Ｓ
ＣＳＩコントローラ３２のデータとしてバス３１に接続
されている。 また、図１の制御データ２と音声・動画
像符号化データ３は、ＳＣＳＩコントローラ３２のＳＣ
ＳＩデータ３３として表されている。この実施例では、
前述したハードディスク制御部５の動作は、ＣＰＵ３０
が実行し、ＳＣＳＩコントローラ３２は、ハードディス
ク装置１とのＩ／Ｆをとる。ここで、ＣＰＵ３０の処理
は、図３に示したものと同様の動作である。
判断画像のサーチをすることなく、音声を含めた自動サ
ーチが実現され、効率的かつ正確にサーチが実現でき
る。さらに、符号化データのまま処理可能なため、復号
化処理を必要とせず、演算量も大幅に減少可能である。
ここで、上記ハードディスク制御部５を、一般的なＣＰ
Ｕと、ハードディスクコントローラであるＳＣＳＩコン
トローラで構成した一実施例を図４に示す。この場合、
操作データ４、動画像符号化データ６，９、音声符号化
データ２２，１６、判定データ２１は、ＣＰＵ３０のバ
ス３１に接続されている。 同様に、データ３４も、Ｓ
ＣＳＩコントローラ３２のデータとしてバス３１に接続
されている。 また、図１の制御データ２と音声・動画
像符号化データ３は、ＳＣＳＩコントローラ３２のＳＣ
ＳＩデータ３３として表されている。この実施例では、
前述したハードディスク制御部５の動作は、ＣＰＵ３０
が実行し、ＳＣＳＩコントローラ３２は、ハードディス
ク装置１とのＩ／Ｆをとる。ここで、ＣＰＵ３０の処理
は、図３に示したものと同様の動作である。
【００１４】次に、ピクチャ符号量検出部１０、ピクチ
ャ符号化パラメータ検出部１１及びピクチャ特徴判定部
１４について、より具体的に説明する。ここで、以下の
説明では、動画像符号化データ６，９は、ＭＰＥＧ２の
符号化データを仮定して説明する。そのＭＰＥＧ２符号
化データのピクチャの階層構造を図５に示す。ピクチャ
は複数のスライスから構成され、各スライスは複数のマ
クロブロックから構成され、各マクロブロックは複数の
ブロックから構成される。 そして、ピクチャとスライ
スの先頭データにはピクチャ・スタート・コードとスラ
イス・スタート・コードいうユニークなコードが設定さ
れる。但し、マクロブロック，ブロックに関しては、そ
の先頭データにユニークなコードの設定はない。また、
このピクチャの連続した符号化データの最後には、動画
像符号化データの終了を示すエンド・コードというユニ
ークなコードが設定される。
ャ符号化パラメータ検出部１１及びピクチャ特徴判定部
１４について、より具体的に説明する。ここで、以下の
説明では、動画像符号化データ６，９は、ＭＰＥＧ２の
符号化データを仮定して説明する。そのＭＰＥＧ２符号
化データのピクチャの階層構造を図５に示す。ピクチャ
は複数のスライスから構成され、各スライスは複数のマ
クロブロックから構成され、各マクロブロックは複数の
ブロックから構成される。 そして、ピクチャとスライ
スの先頭データにはピクチャ・スタート・コードとスラ
イス・スタート・コードいうユニークなコードが設定さ
れる。但し、マクロブロック，ブロックに関しては、そ
の先頭データにユニークなコードの設定はない。また、
このピクチャの連続した符号化データの最後には、動画
像符号化データの終了を示すエンド・コードというユニ
ークなコードが設定される。
【００１５】以上のＭＰＥＧ２の符号化データを前提
に、ピクチャ符号量検出部１０の処理を、以下において
詳細に説明する。ピクチャ符号量検出部１０は、動画像
符号化データ９から、順次、各ピクチャの符号量Ｂを検
出する。ここで、現在、ｎ番目のピクチャについて処理
しているとし、そのピクチャをピクチャＰＩＣ(ｎ)、そ
の符号量を符号量Ｂ(ｎ)と表記することにする。この処
理内容の一例を図６に示す。 まず、ステップ８０２
で、ピクチャ符号量検出部１０の符号量Ｂ(ｎ)をゼロに
初期化する。 次に、ステップ８０３で、動画像符号化
データ９から１バイト入力する。 次に、条件分岐ステ
ップ８０４で、この入力データが、ピクチャ・スタート
・コード、またはエンド・コードであるか否かをチェッ
クする。 ＮＯであれば、ステップ８０５に移行し、符
号量Ｂ(ｎ)をインクリメントし、再度、ステップ８０
３，８０４を実行する。そして、条件分岐ステップ８０
４がＹＥＳになった時、ピクチャＰＩＣ(ｎ)が終了した
ことになるため、この時の符号量Ｂ(ｎ)が、ピクチャＰ
ＩＣ(ｎ)の符号量を示すことになる。 従って、ステッ
プ８０６でこの符号量Ｂ(ｎ)を出力し、ステップ８０７
で終了する。
に、ピクチャ符号量検出部１０の処理を、以下において
詳細に説明する。ピクチャ符号量検出部１０は、動画像
符号化データ９から、順次、各ピクチャの符号量Ｂを検
出する。ここで、現在、ｎ番目のピクチャについて処理
しているとし、そのピクチャをピクチャＰＩＣ(ｎ)、そ
の符号量を符号量Ｂ(ｎ)と表記することにする。この処
理内容の一例を図６に示す。 まず、ステップ８０２
で、ピクチャ符号量検出部１０の符号量Ｂ(ｎ)をゼロに
初期化する。 次に、ステップ８０３で、動画像符号化
データ９から１バイト入力する。 次に、条件分岐ステ
ップ８０４で、この入力データが、ピクチャ・スタート
・コード、またはエンド・コードであるか否かをチェッ
クする。 ＮＯであれば、ステップ８０５に移行し、符
号量Ｂ(ｎ)をインクリメントし、再度、ステップ８０
３，８０４を実行する。そして、条件分岐ステップ８０
４がＹＥＳになった時、ピクチャＰＩＣ(ｎ)が終了した
ことになるため、この時の符号量Ｂ(ｎ)が、ピクチャＰ
ＩＣ(ｎ)の符号量を示すことになる。 従って、ステッ
プ８０６でこの符号量Ｂ(ｎ)を出力し、ステップ８０７
で終了する。
【００１６】次に、ピクチャ符号化パラメータ検出部１
１は、動画像符号化データ９から、順次、各ピクチャの
符号化されたときのパラメータ値Ｐを検出する。ここ
で、ＭＰＥＧ２の符号化データでは、量子化ステップ
値、マクロブロックタイプ(例えば、Field DCT coding
マクロブロック 、Frame DCT coding マクロブロック
、・・・)などが、このパラメータ値Ｐに相当する。
ここでは、一例として、量子化ステップ値を検出する場
合を説明する。ＭＰＥＧ２では、符号化処理時に使用さ
れた量子化ステップ値は、各スライスと各マクロブロッ
クのヘッダにのみ記述可能とされている。 但し、量子
化ステップ値が記述されるのは、量子化ステップ値が変
化した時だけである。 すなわち、対象マクロブロック
のヘッダに量子化ステップ値が記述されていない場合
は、直前と同じ量子化ステップ値であることを示す。
従って、あるスライス内の全マクロブロックに対する量
子化ステップ値が同じときには、そのスライスのヘッダ
にのみ量子化ステップ値が記述され、内部のマクロブロ
ックのヘッダには記述されないことになる。
１は、動画像符号化データ９から、順次、各ピクチャの
符号化されたときのパラメータ値Ｐを検出する。ここ
で、ＭＰＥＧ２の符号化データでは、量子化ステップ
値、マクロブロックタイプ(例えば、Field DCT coding
マクロブロック 、Frame DCT coding マクロブロック
、・・・)などが、このパラメータ値Ｐに相当する。
ここでは、一例として、量子化ステップ値を検出する場
合を説明する。ＭＰＥＧ２では、符号化処理時に使用さ
れた量子化ステップ値は、各スライスと各マクロブロッ
クのヘッダにのみ記述可能とされている。 但し、量子
化ステップ値が記述されるのは、量子化ステップ値が変
化した時だけである。 すなわち、対象マクロブロック
のヘッダに量子化ステップ値が記述されていない場合
は、直前と同じ量子化ステップ値であることを示す。
従って、あるスライス内の全マクロブロックに対する量
子化ステップ値が同じときには、そのスライスのヘッダ
にのみ量子化ステップ値が記述され、内部のマクロブロ
ックのヘッダには記述されないことになる。
【００１７】以上の様なＭＰＥＧ２の符号化データに対
し、図７のステップ８１０〜８２１により、ピクチャの
パラメータ値(量子化ステップ値)Ｐを求めることができ
る。なお、ここでも、現在、ｎ番目のピクチャについて
処理しているとし、そのピクチャをピクチャＰＩＣ
(ｎ)、そのパラメータ値(量子化ステップ値)をパラメー
タ値(量子化ステップ値)Ｐ(ｎ)と表記することにする。
まず、ステップ８１１では、ｑ，Ｑをゼロに初期化す
る。このｑ，Ｑは以下の変数である。 ｑ：各マクロブロックに対する量子化ステップ値を設定
する変数 Ｑ：ｑの積和を示す変数 次に、ステップ８１２で最初のスライス・スタート・コ
ードを検出し、スライスの先頭にアクセスする。 そし
て、条件分岐ステップ８１３でスライス・ヘッダ内に量
子化ステップ値の記述があるか否かをチェックする。
ＹＥＳの場合は、ステップ８１４にて、記述されている
量子化ステップ値をｑに設定し、条件分岐ステップ８１
５の処理に移行する。 ＮＯの場合は、そのまま条件分
岐ステップ８１５の処理に移行する。 条件分岐ステッ
プ８１５では、スライスの下位階層であるマクロブロッ
ク・ヘッダを解析し、量子化ステップ値の記述があるか
否かをチェックする。 ＹＥＳの場合は、ステップ８１
６にて記述されている量子化ステップ値をｑに設定し、
ステップ８１７の処理に移行する。 ＮＯの場合は、そ
のままステップ８１７の処理に移行する。 ステップ８
１７では、設定されたｑをＱに積和する。 これによ
り、ひとつのマクロブロックの量子化ステップ値を検出
し、積和したことになる。
し、図７のステップ８１０〜８２１により、ピクチャの
パラメータ値(量子化ステップ値)Ｐを求めることができ
る。なお、ここでも、現在、ｎ番目のピクチャについて
処理しているとし、そのピクチャをピクチャＰＩＣ
(ｎ)、そのパラメータ値(量子化ステップ値)をパラメー
タ値(量子化ステップ値)Ｐ(ｎ)と表記することにする。
まず、ステップ８１１では、ｑ，Ｑをゼロに初期化す
る。このｑ，Ｑは以下の変数である。 ｑ：各マクロブロックに対する量子化ステップ値を設定
する変数 Ｑ：ｑの積和を示す変数 次に、ステップ８１２で最初のスライス・スタート・コ
ードを検出し、スライスの先頭にアクセスする。 そし
て、条件分岐ステップ８１３でスライス・ヘッダ内に量
子化ステップ値の記述があるか否かをチェックする。
ＹＥＳの場合は、ステップ８１４にて、記述されている
量子化ステップ値をｑに設定し、条件分岐ステップ８１
５の処理に移行する。 ＮＯの場合は、そのまま条件分
岐ステップ８１５の処理に移行する。 条件分岐ステッ
プ８１５では、スライスの下位階層であるマクロブロッ
ク・ヘッダを解析し、量子化ステップ値の記述があるか
否かをチェックする。 ＹＥＳの場合は、ステップ８１
６にて記述されている量子化ステップ値をｑに設定し、
ステップ８１７の処理に移行する。 ＮＯの場合は、そ
のままステップ８１７の処理に移行する。 ステップ８
１７では、設定されたｑをＱに積和する。 これによ
り、ひとつのマクロブロックの量子化ステップ値を検出
し、積和したことになる。
【００１８】次の条件分岐ステップ８１８では、次に続
くコードが、スライス・スタート・コードであるか否か
をチェックする。 ＹＥＳの時は、さらに、次のスライ
スが存在する場合であるため、再度、条件分岐ステップ
８１３の処理に移行する。ＮＯの時は、次の条件分岐ス
テップ８１９の処理に移行し、次に続くコードが、ピク
チャ・スタート・コードまたはエンド・コードであるか
否かチェックする。ＹＥＳの時は、ピクチャＰＩＣ(ｎ)
が終了した場合であるため、ステップ８２０の処理に移
行する。 該ステップ８２０の処理に移行した時点で、
ＱにピクチャＰＩＣ(ｎ)内の各マクロブロックに対する
量子化ステップ値の積和が設定されていることになる。
ＮＯの時は、さらにマクロブロックが続いている場合
であるため、条件分岐ステップ８１５の処理に移行す
る。 ステップ８２０では、ＱをピクチャＰＩＣ(ｎ)内
のマクロブロック数で割り、平均量子化ステップ値を求
め、これをパラメータ値(量子化ステップ値)Ｐ(ｎ)とし
て設定し、ステップ８２１で終了する。以上により、各
ピクチャの符号量Ｂと各パラメータ値(量子化ステップ
値)Ｐとを求めることができる。
くコードが、スライス・スタート・コードであるか否か
をチェックする。 ＹＥＳの時は、さらに、次のスライ
スが存在する場合であるため、再度、条件分岐ステップ
８１３の処理に移行する。ＮＯの時は、次の条件分岐ス
テップ８１９の処理に移行し、次に続くコードが、ピク
チャ・スタート・コードまたはエンド・コードであるか
否かチェックする。ＹＥＳの時は、ピクチャＰＩＣ(ｎ)
が終了した場合であるため、ステップ８２０の処理に移
行する。 該ステップ８２０の処理に移行した時点で、
ＱにピクチャＰＩＣ(ｎ)内の各マクロブロックに対する
量子化ステップ値の積和が設定されていることになる。
ＮＯの時は、さらにマクロブロックが続いている場合
であるため、条件分岐ステップ８１５の処理に移行す
る。 ステップ８２０では、ＱをピクチャＰＩＣ(ｎ)内
のマクロブロック数で割り、平均量子化ステップ値を求
め、これをパラメータ値(量子化ステップ値)Ｐ(ｎ)とし
て設定し、ステップ８２１で終了する。以上により、各
ピクチャの符号量Ｂと各パラメータ値(量子化ステップ
値)Ｐとを求めることができる。
【００１９】次に、この符号量Ｂとパラメータ値(量子
化ステップ値)Ｐを入力して処理するピクチャ特徴判定
部１４の動作について説明する。一例として、このピク
チャ特徴判定部１４が判定するピクチャの特徴は、ピク
チャの複雑さを指標とすることにする。一般に、動画像
符号化データの内容を検索する時の判断画像は、時間軸
方向で絵柄または、シーンが変化した画像部分であるこ
とが多い。例えば、従来の技術で説明した判断画像は、
火山の噴火した部分であり、明らかに絵柄が変化してい
る。また、これはピクチャの複雑さがより複雑な状態に
変化した部分でもある。つまり、判断画像を自動サーチ
する目的のためには、多くの場合ピクチャの複雑さの変
化に注目することで可能である。
化ステップ値)Ｐを入力して処理するピクチャ特徴判定
部１４の動作について説明する。一例として、このピク
チャ特徴判定部１４が判定するピクチャの特徴は、ピク
チャの複雑さを指標とすることにする。一般に、動画像
符号化データの内容を検索する時の判断画像は、時間軸
方向で絵柄または、シーンが変化した画像部分であるこ
とが多い。例えば、従来の技術で説明した判断画像は、
火山の噴火した部分であり、明らかに絵柄が変化してい
る。また、これはピクチャの複雑さがより複雑な状態に
変化した部分でもある。つまり、判断画像を自動サーチ
する目的のためには、多くの場合ピクチャの複雑さの変
化に注目することで可能である。
【００２０】図８に、複雑さの異なる２つのピクチャを
例として、符号量Ｂとパラメータ値(量子化ステップ値)
Ｐの一般的な関係をモデル化して示す。 なお、実線は
複雑なピクチャによる特性曲線で、破線は単純なピクチ
ャによる特性曲線を示している。 ところで、これらの
曲線は以下の式（１）による曲線に類似している。 Ｂ＝Ｃ／Ｐ ・・・・・・・・・（１） 但し、Ｃは定数。 ここで、図８の２つの曲線の違いは、式（１）のＣの値
の違いになる。つまり、Ｃが複雑さを示す値とみること
ができる。以上のことから、ピクチャ特徴判定部１４
は、入力される符号量Ｂとパラメータ値(量子化ステッ
プ値)Ｐから、以下の式（２）により、各ピクチャの複
雑さＣを演算し、それ以前のピクチャの複雑さＣと比較
し、その差分により、判断画像であるか否かを判定し、
その結果を判定データ１５として出力する。 Ｃ＝Ｂ×Ｐ ・・・・・・・・・（２） 以下、ピクチャ特徴判定部１４の動作を、図９の一例を
用いて説明する。まず、ステップ８３１にてピクチャＰ
ＩＣ(ｎ)の複雑さＣ(ｎ)を求め、ステップ８３２で、直
前のピクチャＰＩＣ(ｎ-1)の複雑さＣ(ｎ-1)との差分を
差分Ｄ(ｎ)として求める。 そして、条件分岐ステップ
８３３で、この差分Ｄ(ｎ)の絶対値が所定の基準値Ｒｅ
ｆより大きいか否かをチェックする。 この基準値Ｒｅ
ｆは、システムによって任意に設定できる値であり、こ
の値が大きいほど、複雑さの変化のより大きいピクチャ
だけを判断画像と判定することができる。ステップ８３
３でＹＥＳの時は、ステップ８３５の処理に移り、判断
画像であることを示す判定データ１５を出力する。 Ｎ
Ｏの時は、ステップ８３４の処理に移り、判断画像でな
いことを示す判定データ１５を出力する。 そして、ス
テップ８３４，８３５からステップ８３６に移り、処理
を終了する。以上説明した如く、本実施例によれば、動
画像符号化データを復号化(伸張)することなく、圧縮さ
れたままの符号化データから、絵柄、シーンの変化する
判断画像への自動サーチを実現することが可能となる。
例として、符号量Ｂとパラメータ値(量子化ステップ値)
Ｐの一般的な関係をモデル化して示す。 なお、実線は
複雑なピクチャによる特性曲線で、破線は単純なピクチ
ャによる特性曲線を示している。 ところで、これらの
曲線は以下の式（１）による曲線に類似している。 Ｂ＝Ｃ／Ｐ ・・・・・・・・・（１） 但し、Ｃは定数。 ここで、図８の２つの曲線の違いは、式（１）のＣの値
の違いになる。つまり、Ｃが複雑さを示す値とみること
ができる。以上のことから、ピクチャ特徴判定部１４
は、入力される符号量Ｂとパラメータ値(量子化ステッ
プ値)Ｐから、以下の式（２）により、各ピクチャの複
雑さＣを演算し、それ以前のピクチャの複雑さＣと比較
し、その差分により、判断画像であるか否かを判定し、
その結果を判定データ１５として出力する。 Ｃ＝Ｂ×Ｐ ・・・・・・・・・（２） 以下、ピクチャ特徴判定部１４の動作を、図９の一例を
用いて説明する。まず、ステップ８３１にてピクチャＰ
ＩＣ(ｎ)の複雑さＣ(ｎ)を求め、ステップ８３２で、直
前のピクチャＰＩＣ(ｎ-1)の複雑さＣ(ｎ-1)との差分を
差分Ｄ(ｎ)として求める。 そして、条件分岐ステップ
８３３で、この差分Ｄ(ｎ)の絶対値が所定の基準値Ｒｅ
ｆより大きいか否かをチェックする。 この基準値Ｒｅ
ｆは、システムによって任意に設定できる値であり、こ
の値が大きいほど、複雑さの変化のより大きいピクチャ
だけを判断画像と判定することができる。ステップ８３
３でＹＥＳの時は、ステップ８３５の処理に移り、判断
画像であることを示す判定データ１５を出力する。 Ｎ
Ｏの時は、ステップ８３４の処理に移り、判断画像でな
いことを示す判定データ１５を出力する。 そして、ス
テップ８３４，８３５からステップ８３６に移り、処理
を終了する。以上説明した如く、本実施例によれば、動
画像符号化データを復号化(伸張)することなく、圧縮さ
れたままの符号化データから、絵柄、シーンの変化する
判断画像への自動サーチを実現することが可能となる。
【００２１】次に、音声符号化データ１６，２２をＭＰ
ＥＧ１の符号化データであると仮定し、図１の音声符号
化処理パラメータ検出部１７と音声特徴判定部１９の処
理について説明する。まず、音声符号化処理パラメータ
検出部１７では、音声符号化データ１６の各オーディオ
(音声)フレームから、ビット割り当て情報とスケールフ
ァクタを検出し、これをパラメータ値Ｓとして出力す
る。音声フレームの構成は、図１０に示すように、３２
ビットのヘッダ、１６ビットのエラーチェックデータ、
ビット割り当て情報、スケールファクタ及びサンプルか
らなる。 なお、音声フレームのデータ長は、固定長で
ある。ただし、音声符号化データのデータレートと、サ
ンプリング周波数に依存する。下記の式（３）に、その
関係を示す。 音声フレーム長(ビット)＝３８４×音声符号化データのデータレート ÷サンプリング周波数 ・・・・・・・・・（３） 例えば、音声符号化データのデータレート＝３８４kbp
s、サンプリング周波数＝４８kHz の場合は、音声フレ
ーム長＝３０７２ビット(３８４バイト)となる。これを
時間で示すと、８ｍｓ(３０７２÷３８４ kbps）に相当
する。つまり、この単位で音声の特徴判定が可能にな
る。
ＥＧ１の符号化データであると仮定し、図１の音声符号
化処理パラメータ検出部１７と音声特徴判定部１９の処
理について説明する。まず、音声符号化処理パラメータ
検出部１７では、音声符号化データ１６の各オーディオ
(音声)フレームから、ビット割り当て情報とスケールフ
ァクタを検出し、これをパラメータ値Ｓとして出力す
る。音声フレームの構成は、図１０に示すように、３２
ビットのヘッダ、１６ビットのエラーチェックデータ、
ビット割り当て情報、スケールファクタ及びサンプルか
らなる。 なお、音声フレームのデータ長は、固定長で
ある。ただし、音声符号化データのデータレートと、サ
ンプリング周波数に依存する。下記の式（３）に、その
関係を示す。 音声フレーム長(ビット)＝３８４×音声符号化データのデータレート ÷サンプリング周波数 ・・・・・・・・・（３） 例えば、音声符号化データのデータレート＝３８４kbp
s、サンプリング周波数＝４８kHz の場合は、音声フレ
ーム長＝３０７２ビット(３８４バイト)となる。これを
時間で示すと、８ｍｓ(３０７２÷３８４ kbps）に相当
する。つまり、この単位で音声の特徴判定が可能にな
る。
【００２２】以上により、図１１のような簡単な処理
で、ビット割り当て情報と、スケールファクタを検出
し、パラメータ値Ｓとすることができる。図１１では、
まずステップ８４１でヘッダの同期ビットを確認し、Ｙ
ＥＳ(確認)の場合には、ステップ８４２で、ビット割り
当て情報とスケールファクタを読みとり、パラメータ値
Ｓ(ｎ)として設定する。 そして、ステップ８４３で、
音声フレームの最終データまで読み飛ばし、次の音声フ
レームに対して、同様に実行する。 なお、ｎは音声フ
レーム番号を示すものとする。ここで、この音声符号化
処理パラメータ検出部１７で検出したビット割り当て情
報とスケールファクタについて説明する。まず、ビット
割り当て情報は、音声フレームをサブバンド分割(３２
個)した各々の周波数成分に対する割り当てビットを示
す。 つまり、この情報により値がゼロを示す周波数成
分は、音声にその周波数成分が含まれていないことがわ
かる。また、スケールファクタは、音声フレーム内の各
周波数成分のダイナミックレンジを示す。 つまり、ど
の程度の音量であるかを周波数成分ごとに認識できる。
で、ビット割り当て情報と、スケールファクタを検出
し、パラメータ値Ｓとすることができる。図１１では、
まずステップ８４１でヘッダの同期ビットを確認し、Ｙ
ＥＳ(確認)の場合には、ステップ８４２で、ビット割り
当て情報とスケールファクタを読みとり、パラメータ値
Ｓ(ｎ)として設定する。 そして、ステップ８４３で、
音声フレームの最終データまで読み飛ばし、次の音声フ
レームに対して、同様に実行する。 なお、ｎは音声フ
レーム番号を示すものとする。ここで、この音声符号化
処理パラメータ検出部１７で検出したビット割り当て情
報とスケールファクタについて説明する。まず、ビット
割り当て情報は、音声フレームをサブバンド分割(３２
個)した各々の周波数成分に対する割り当てビットを示
す。 つまり、この情報により値がゼロを示す周波数成
分は、音声にその周波数成分が含まれていないことがわ
かる。また、スケールファクタは、音声フレーム内の各
周波数成分のダイナミックレンジを示す。 つまり、ど
の程度の音量であるかを周波数成分ごとに認識できる。
【００２３】次に、音声特徴判定部１９の処理について
説明する。ここでは前記パラメータ値Ｓを入力し、対象
とする周波数成分が参照レベル以上あるか判定し、参照
レベル以上の時に音声符号化データにおけるサーチポイ
ントであるとして、サーチポイント判定部２５へ判定デ
ータ２０を出力する。火山噴火の例においては、噴火音
の周波数を Ｆref 、その音量レベルを Ｖref以上とす
れば、図１２に示す処理で実現可能である。まず、ステ
ップ８５１で、Ｆref に対応するビット割り当て情報が
ゼロでないか判定する。ＮＯ(ゼロ)の場合は、ステップ
８５３により、判定データ２０で音声としてのサーチポ
イントでない事を示し終了する。 ＹＥＳ(ゼロでない)
の場合は、次にステップ８５２で、Ｆref に対応する音
量レベルが、Ｖref 以上か判定する。ＮＯ(Ｖref 以下)
ならば、ステップ８５３により判定データ２０で音声と
してのサーチポイントでない事を示し終了する。 ＹＥ
Ｓ(Ｖref 以上)ならばステップ８５４により、判定デー
タ２０で音声としてのサーチポイントであることを示し
終了する。
説明する。ここでは前記パラメータ値Ｓを入力し、対象
とする周波数成分が参照レベル以上あるか判定し、参照
レベル以上の時に音声符号化データにおけるサーチポイ
ントであるとして、サーチポイント判定部２５へ判定デ
ータ２０を出力する。火山噴火の例においては、噴火音
の周波数を Ｆref 、その音量レベルを Ｖref以上とす
れば、図１２に示す処理で実現可能である。まず、ステ
ップ８５１で、Ｆref に対応するビット割り当て情報が
ゼロでないか判定する。ＮＯ(ゼロ)の場合は、ステップ
８５３により、判定データ２０で音声としてのサーチポ
イントでない事を示し終了する。 ＹＥＳ(ゼロでない)
の場合は、次にステップ８５２で、Ｆref に対応する音
量レベルが、Ｖref 以上か判定する。ＮＯ(Ｖref 以下)
ならば、ステップ８５３により判定データ２０で音声と
してのサーチポイントでない事を示し終了する。 ＹＥ
Ｓ(Ｖref 以上)ならばステップ８５４により、判定デー
タ２０で音声としてのサーチポイントであることを示し
終了する。
【００２４】次に、サーチポイント判定部２５の動作に
ついて説明する。ここでは、動画像としてのサーチポイ
ントと、音声としてのサーチポイントを、判定データ１
５，２０で入力し、そのコンビネーションによりアプリ
ケーションに適応した判定データ２１を出力する。単純
には、以下のような例が考えられる。 例１： 判定データ２１＝ 判定データ１５ ∩ 判定データ２０ 例２： 判定データ２１＝ 判定データ１５ ∪ 判定データ２０ この他にも、アプリケーションによっては、時間的なフ
ァクタを加味したものも考えられる。以上のようにして
生成された判定信号２１が、ハードディスク制御部５へ
出力され、自動サーチが可能となる。
ついて説明する。ここでは、動画像としてのサーチポイ
ントと、音声としてのサーチポイントを、判定データ１
５，２０で入力し、そのコンビネーションによりアプリ
ケーションに適応した判定データ２１を出力する。単純
には、以下のような例が考えられる。 例１： 判定データ２１＝ 判定データ１５ ∩ 判定データ２０ 例２： 判定データ２１＝ 判定データ１５ ∪ 判定データ２０ この他にも、アプリケーションによっては、時間的なフ
ァクタを加味したものも考えられる。以上のようにして
生成された判定信号２１が、ハードディスク制御部５へ
出力され、自動サーチが可能となる。
【００２５】このように、本発明では動画像符号化デー
タと音声符号化データを復号化することなく、符号化デ
ータの単純な解析でサーチポイントへの自動サーチが可
能となる。また、音声符号化データをも考慮しているた
め、より正確に実行できる。さらに、本発明は、サーチ
ポイント位置の自動検出にも利用可能である。つまり、
ハードディスク制御部５による図３の動作の内、Ｓ１か
らＳ２への移動を操作者の指示でなく、自動的に行えば
実現できる。これにより、事前に、ハードディスク内の
音声・動画像符号化データについて、サーチポイントの
位置を自動検出しておき、該情報をハードディスクに追
加記録することができ、操作者が検索する時は、その記
録されたサーチポイントの位置情報をもとに、瞬時にサ
ーチポイントへのアクセスが可能になる。当然のことな
がら、前述の操作者の自動サーチ指示検索においても、
次回の検索のために検出したサーチポイントの結果を記
録しても良い。また、サーチポイントの画像表示につい
ても、複数の画像を小画像にして一度にモニタに表示す
ることも可能である。 これにより、符号化データの内
容把握が、より容易になる。
タと音声符号化データを復号化することなく、符号化デ
ータの単純な解析でサーチポイントへの自動サーチが可
能となる。また、音声符号化データをも考慮しているた
め、より正確に実行できる。さらに、本発明は、サーチ
ポイント位置の自動検出にも利用可能である。つまり、
ハードディスク制御部５による図３の動作の内、Ｓ１か
らＳ２への移動を操作者の指示でなく、自動的に行えば
実現できる。これにより、事前に、ハードディスク内の
音声・動画像符号化データについて、サーチポイントの
位置を自動検出しておき、該情報をハードディスクに追
加記録することができ、操作者が検索する時は、その記
録されたサーチポイントの位置情報をもとに、瞬時にサ
ーチポイントへのアクセスが可能になる。当然のことな
がら、前述の操作者の自動サーチ指示検索においても、
次回の検索のために検出したサーチポイントの結果を記
録しても良い。また、サーチポイントの画像表示につい
ても、複数の画像を小画像にして一度にモニタに表示す
ることも可能である。 これにより、符号化データの内
容把握が、より容易になる。
【００２６】ここで、前述したＭＰＥＧ２では、以下の
よく知られた、３種類のピクチャを用いて符号化する。 ・ Ｉ ピクチャ (Intra-coded picture) ・ Ｐ ピクチャ (Predictive-coded picture)・ Ｂ ピクチャ (Bidirectionally predictive-coded p
icture) これらピクチャの使用する組み合わせとしては、主に以
下の３つの場合がある。 （１）Ｉ ピクチャのみ （２）Ｉ，Ｐ ピクチャ （３）Ｉ，Ｐ，Ｂ ピクチャ ここで、同一の複雑さの画像を同一の量子化ステップ値
で処理しても、上記ピクチャの種類により、その符号量
は以下のような比率になることが知られている。(比率
は、一般画像に対する一例) Ｉピクチャ符号量：Ｐピクチャ符号量：Ｂピクチャ符号
量＝７：３：２ 従って、前述の式（２）の複雑さＣの演算結果を、異な
るピクチャ間で比較する場合には、上記のような比率か
らスケーリングをすれば可能である。ただし、一般に、
ランダムアクセス可能なピクチャは、Ｉピクチャである
ため、システムによってはＩピクチャだけの複雑さの比
較だけでも実用可能である。
よく知られた、３種類のピクチャを用いて符号化する。 ・ Ｉ ピクチャ (Intra-coded picture) ・ Ｐ ピクチャ (Predictive-coded picture)・ Ｂ ピクチャ (Bidirectionally predictive-coded p
icture) これらピクチャの使用する組み合わせとしては、主に以
下の３つの場合がある。 （１）Ｉ ピクチャのみ （２）Ｉ，Ｐ ピクチャ （３）Ｉ，Ｐ，Ｂ ピクチャ ここで、同一の複雑さの画像を同一の量子化ステップ値
で処理しても、上記ピクチャの種類により、その符号量
は以下のような比率になることが知られている。(比率
は、一般画像に対する一例) Ｉピクチャ符号量：Ｐピクチャ符号量：Ｂピクチャ符号
量＝７：３：２ 従って、前述の式（２）の複雑さＣの演算結果を、異な
るピクチャ間で比較する場合には、上記のような比率か
らスケーリングをすれば可能である。ただし、一般に、
ランダムアクセス可能なピクチャは、Ｉピクチャである
ため、システムによってはＩピクチャだけの複雑さの比
較だけでも実用可能である。
【００２７】また、前述の図４は、ハードディスク制御
部５を、ＣＰＵで実現する具体例であるが、本発明は単
純な演算処理で、サーチポイントの検出が可能であるた
め、ピクチャ符号量検出部１０、ピクチャ符号化処理パ
ラメータ検出部１１、ピクチャ特徴判定部１４、音声符
号化処理パラメータ検出部１７、音声特徴判定部１９及
びサーチポイント判定部２５を、ハードディスク制御部
５のＣＰＵで実現することも可能である。さらに、前述
の実施例は、蓄積された音声・動画像符号化データに対
する処理として説明したが、リアルタイムに伝送されて
くる音声・動画像符号化データに対して利用することも
可能である。 この場合、サーチポイントを判定した時
点でアラーム等をならし、監視者に注意を促したり、音
声・動画像符号化データの記録とともに、サーチポイン
ト情報をリアルタイムに記録し、後の検索時に利用する
などが考えられる。
部５を、ＣＰＵで実現する具体例であるが、本発明は単
純な演算処理で、サーチポイントの検出が可能であるた
め、ピクチャ符号量検出部１０、ピクチャ符号化処理パ
ラメータ検出部１１、ピクチャ特徴判定部１４、音声符
号化処理パラメータ検出部１７、音声特徴判定部１９及
びサーチポイント判定部２５を、ハードディスク制御部
５のＣＰＵで実現することも可能である。さらに、前述
の実施例は、蓄積された音声・動画像符号化データに対
する処理として説明したが、リアルタイムに伝送されて
くる音声・動画像符号化データに対して利用することも
可能である。 この場合、サーチポイントを判定した時
点でアラーム等をならし、監視者に注意を促したり、音
声・動画像符号化データの記録とともに、サーチポイン
ト情報をリアルタイムに記録し、後の検索時に利用する
などが考えられる。
【００２８】
【発明の効果】本発明によれば、音声・動画像符号化デ
ータの検索において、操作者が全内容を目視で確認する
ことなく、符号化データの内容を判断するために適した
部分を自動サーチ可能なため、操作者の作業負担を大幅
に軽減でき、かつ、高速に内容判断ができる。 また、
目視確認における人的ミスを防止可能である。さらに、
音声と動画像からサーチすべきポイントを判定するた
め、より正確に、かつ様々な組み合わせの指定で実行可
能である。さらに、音声・動画像の各符号化データを復
号化することなくサーチポイントの判定が可能なため、
演算処理量や回路規模の大幅な削減が可能であり、効率
的で、高精度の音声・動画像検索方法及び検索装置を提
供することができる。
ータの検索において、操作者が全内容を目視で確認する
ことなく、符号化データの内容を判断するために適した
部分を自動サーチ可能なため、操作者の作業負担を大幅
に軽減でき、かつ、高速に内容判断ができる。 また、
目視確認における人的ミスを防止可能である。さらに、
音声と動画像からサーチすべきポイントを判定するた
め、より正確に、かつ様々な組み合わせの指定で実行可
能である。さらに、音声・動画像の各符号化データを復
号化することなくサーチポイントの判定が可能なため、
演算処理量や回路規模の大幅な削減が可能であり、効率
的で、高精度の音声・動画像検索方法及び検索装置を提
供することができる。
【図１】本発明の音声・動画像検索装置の一実施例を示
すブロック図
すブロック図
【図２】従来技術における検索動作を説明する模式図
【図３】本発明のハードディスク制御部５の動作を説明
する図
する図
【図４】本発明のハードディスク制御部５の一実施例を
示すブロック図
示すブロック図
【図５】ＭＰＥＧ２のピクチャ階層構造を示す模式図
【図６】本発明のピクチャ符号量検出部１０の動作を説
明するフローチャート
明するフローチャート
【図７】本発明の符号化パラメータ検出部１１の動作を
説明するフローチャート
説明するフローチャート
【図８】符号量Ｂとパラメータ値(量子化ステップ値)の
関係の一般例を示す特性図
関係の一般例を示す特性図
【図９】本発明のピクチャ判定部１４の動作を示すフロ
ーチャート
ーチャート
【図１０】一般的な音声フレームの構造を示す模式図
【図１１】本発明の音声符号化処理パラメータ検出部１
７の動作を示すフローチャート
７の動作を示すフローチャート
【図１２】本発明の音声特徴判定部１９の動作を説明す
るフローチャート
るフローチャート
５：ハードディスク制御部、７：動画像符号化データ再
生部、１０：ピクチャ符号量検出部、１１：ピクチャ符
号化処理パラメータ検出部、１４：ピクチャ特徴判定
部、１７：音声符号化処理パラメータ検出部、１９：音
声特徴判定部、２５：サーチポイント判定部、２３：音
声符号化データ再生部。
生部、１０：ピクチャ符号量検出部、１１：ピクチャ符
号化処理パラメータ検出部、１４：ピクチャ特徴判定
部、１７：音声符号化処理パラメータ検出部、１９：音
声特徴判定部、２５：サーチポイント判定部、２３：音
声符号化データ再生部。
Claims (9)
- 【請求項１】 所定の記録再生手段に記録された動画像
圧縮符号化データの内容を検索する方法において、前記
動画像圧縮符号化データにおける各ピクチャの符号量と
符号化処理パラメータを検出して、当該各ピクチャの特
徴を判定し、当該判定結果に基づき、前記記録再生手段
を制御し、対応する動画像圧縮符号化データを検索出力
することを特徴とする動画像符号化データ検索方法。 - 【請求項２】 所定の記録再生手段に記録された動画像
圧縮符号化データを検索する場合、前記記録再生手段か
ら高速で前記動画像圧縮符号化データを順次読み出し、
該動画像圧縮符号化データにおける各ピクチャの符号量
と符号化処理パラメータを検出して当該各ピクチャの特
徴を解析し、該解析結果に基づき当該各ピクチャの必要
性を判定し、必要とするピクチャであると判定された
時、前記記録再生手段を制御し、対応する動画像圧縮符
号化データを標準速で読み出し、復号化処理して出力す
ることを特徴とする動画像符号化データ検索方法。 - 【請求項３】 検出する前記ピクチャ符号化処理パラメ
ータを、各ピクチャの量子化ステップ値とすることを特
徴とする請求項１または２記載の動画像符号化データ検
索方法。 - 【請求項４】 動画像符号化データを検索する装置にお
いて、複数の動画像圧縮符号化データを記録する記録再
生装置と、当該動画像圧縮符号化データを復号化再生す
る動画像符号化データ再生部と、前記動画像符号化デー
タから各ピクチャの符号量を検出するピクチャ符号量検
出部と、当該動画像符号化データから各ピクチャの符号
化処理パラメータを検出するピクチャ符号化処理パラメ
ータ検出部と、前記ピクチャ符号量検出部とピクチャ符
号化処理パラメータ検出部の出力を入力として当該各ピ
クチャの特徴を判定するピクチャ特徴判定部と、該ピク
チャ特徴判定部の判定出力に基づき前記記録再生装置の
アクセスを制御する記録再生制御部を備えたことを特徴
とする動画像符号化データ検索装置。 - 【請求項５】 前記ピクチャ符号化処理パラメータ検出
部において、各ピクチャの量子化ステップ値を検出する
ことを特徴とする請求項４記載の動画像符号化データ検
索装置。 - 【請求項６】 所定の記録再生手段に記録された音声・
動画像圧縮符号化データを検索する場合、前記記録再生
手段から高速で前記音声・動画像圧縮符号化データを順
次読み出し、当該動画像圧縮符号化データにおける各ピ
クチャの符号量と符号化処理パラメータを検出して当該
各ピクチャの特徴を解析し、当該音声圧縮符号化データ
から各音声フレームの符号化処理パラメータを検出して
当該各音声の特徴を解析し、これら各々の解析結果に基
づき前記音声・動画像圧縮符号化データの必要性を判定
し、必要とする音声・動画像圧縮符号化データであると
判定された時、前記記録再生手段を制御し、対応する音
声・動画像圧縮符号化データを標準速で読み出し、復号
化処理して出力することを特徴とする音声・動画像符号
化データ検索方法。 - 【請求項７】 音声・動画像符号化データの内容を検索
する装置において、複数の音声・動画像圧縮符号化デー
タを記録する記録再生装置と、当該音声・動画像圧縮符
号化データを復号化再生する音声・動画像符号化データ
再生部と、当該動画像符号化データから各ピクチャの符
号量を検出するピクチャ符号量検出部と、当該動画像符
号化データから各ピクチャの符号化処理パラメータを検
出するピクチャ符号化処理パラメータ検出部と、前記ピ
クチャ符号量検出部とピクチャ符号化処理パラメータ検
出部の出力を入力として当該各ピクチャの特徴を判定す
るピクチャ特徴判定部と、前記音声圧縮符号化データか
ら各音声フレームの符号化処理パラメータを検出する音
声符号化処理パラメータ検出部と、該音声符号化処理パ
ラメータ検出部の出力を入力として当該各音声の特徴を
判定する音声特徴判定部と、前記ピクチャ特徴判定部と
前記音声特徴判定部の判定出力に基づきサーチすべきポ
イントであるか否かの判定をするサーチポイント判定部
と、該サーチポイント判定部の判定出力に基づき前記記
録再生装置のアクセスを制御する記録再生制御部を備え
たことを特徴とする音声・動画像符号化データ検索装
置。 - 【請求項８】 前記ピクチャ符号化処理パラメータ検出
部において、各ピクチャの量子化ステップ値を検出する
ことを特徴とする請求項７記載の音声・動画像符号化デ
ータ検索装置。 - 【請求項９】 前記音声符号化処理パラメータ検出部に
おいて、各音声フレームのビット割り当て情報とスケー
ルファクタを検出することを特徴とする請求項７記載の
音声・動画像符号化データ検索装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP12974296A JP3496907B2 (ja) | 1996-05-24 | 1996-05-24 | 音声・動画像符号化データ検索方法及び検索装置 |
| US08/862,409 US6144799A (en) | 1996-05-24 | 1997-05-23 | Method and apparatus of retrieving voice coded data and moving image coded data |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP12974296A JP3496907B2 (ja) | 1996-05-24 | 1996-05-24 | 音声・動画像符号化データ検索方法及び検索装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09312829A true JPH09312829A (ja) | 1997-12-02 |
| JP3496907B2 JP3496907B2 (ja) | 2004-02-16 |
Family
ID=15017092
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP12974296A Expired - Fee Related JP3496907B2 (ja) | 1996-05-24 | 1996-05-24 | 音声・動画像符号化データ検索方法及び検索装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6144799A (ja) |
| JP (1) | JP3496907B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004120497A (ja) * | 2002-09-27 | 2004-04-15 | Ricoh Co Ltd | シーンチェンジ検出装置、シーンチェンジ検出方法、画像処理装置、プログラム及び記録媒体 |
| US6977962B2 (en) | 2001-06-19 | 2005-12-20 | Sankyo Electric Co., Ltd. | Method and apparatus for decoding and coding images with scene change detection function |
| KR100546226B1 (ko) * | 1997-07-09 | 2006-04-28 | 소니 가부시끼 가이샤 | 정보검색장치및방법과전송매체 |
| WO2008149448A1 (ja) * | 2007-06-07 | 2008-12-11 | Fujitsu Limited | 動画像類似判定装置、符号化装置、および特徴量算出方法 |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6868224B1 (en) * | 1999-05-05 | 2005-03-15 | Ati International Srl | Method and apparatus for providing multimedia playback |
| JP4297010B2 (ja) * | 2004-08-13 | 2009-07-15 | ソニー株式会社 | 情報処理装置および情報処理方法、並びに、プログラム |
| WO2006025489A1 (ja) * | 2004-09-01 | 2006-03-09 | Matsushita Electric Industrial Co., Ltd. | 画像再生方法及び画像再生装置 |
| CN112685594B (zh) * | 2020-12-24 | 2022-10-04 | 中国人民解放军战略支援部队信息工程大学 | 基于注意力的弱监督语音检索方法及系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0622304A (ja) * | 1992-03-06 | 1994-01-28 | Mitsubishi Electric Corp | シーンチェンジ検出装置 |
| JPH06133305A (ja) * | 1992-09-07 | 1994-05-13 | Fujitsu Ltd | 画像データ符号化方法、その方法を用いた画像データ符号化装置、画像データ復元方法、その方法を用いた画像データ復元装置、シーン変化検出方法、その方法を用いたシーン変化検出装置、シーン変化記録装置、及び画像データのシーン変化記録・再生装置 |
| JPH08214315A (ja) * | 1994-11-29 | 1996-08-20 | Matsushita Electric Ind Co Ltd | 符号化画像カット検出装置 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03129987A (ja) * | 1989-10-14 | 1991-06-03 | Sony Corp | 映像信号符号化装置及び映像信号符号化方法 |
| US5122875A (en) * | 1991-02-27 | 1992-06-16 | General Electric Company | An HDTV compression system |
| JPH06205386A (ja) * | 1992-12-28 | 1994-07-22 | Canon Inc | 画像再生装置 |
| JP3085024B2 (ja) * | 1993-06-01 | 2000-09-04 | 松下電器産業株式会社 | 画像再圧縮器及び画像記録装置 |
| KR100213015B1 (ko) * | 1994-03-31 | 1999-08-02 | 윤종용 | 양자화 방법 및 회로 |
| KR100213018B1 (ko) * | 1994-07-30 | 1999-08-02 | 윤종용 | 동화상 부호화장치 |
| US5615018A (en) * | 1994-11-22 | 1997-03-25 | Industrial Technology Research Instiutute | Apparatus and a method for variable speed searching of recorded pictures |
| JP3319678B2 (ja) * | 1995-08-11 | 2002-09-03 | ケイディーディーアイ株式会社 | 動画像の高速ブラウジング装置 |
| US5686964A (en) * | 1995-12-04 | 1997-11-11 | Tabatabai; Ali | Bit rate control mechanism for digital image and video data compression |
-
1996
- 1996-05-24 JP JP12974296A patent/JP3496907B2/ja not_active Expired - Fee Related
-
1997
- 1997-05-23 US US08/862,409 patent/US6144799A/en not_active Expired - Lifetime
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0622304A (ja) * | 1992-03-06 | 1994-01-28 | Mitsubishi Electric Corp | シーンチェンジ検出装置 |
| JPH06133305A (ja) * | 1992-09-07 | 1994-05-13 | Fujitsu Ltd | 画像データ符号化方法、その方法を用いた画像データ符号化装置、画像データ復元方法、その方法を用いた画像データ復元装置、シーン変化検出方法、その方法を用いたシーン変化検出装置、シーン変化記録装置、及び画像データのシーン変化記録・再生装置 |
| JPH08214315A (ja) * | 1994-11-29 | 1996-08-20 | Matsushita Electric Ind Co Ltd | 符号化画像カット検出装置 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100546226B1 (ko) * | 1997-07-09 | 2006-04-28 | 소니 가부시끼 가이샤 | 정보검색장치및방법과전송매체 |
| US6977962B2 (en) | 2001-06-19 | 2005-12-20 | Sankyo Electric Co., Ltd. | Method and apparatus for decoding and coding images with scene change detection function |
| JP2004120497A (ja) * | 2002-09-27 | 2004-04-15 | Ricoh Co Ltd | シーンチェンジ検出装置、シーンチェンジ検出方法、画像処理装置、プログラム及び記録媒体 |
| WO2008149448A1 (ja) * | 2007-06-07 | 2008-12-11 | Fujitsu Limited | 動画像類似判定装置、符号化装置、および特徴量算出方法 |
| JPWO2008149448A1 (ja) * | 2007-06-07 | 2010-08-19 | 富士通株式会社 | 動画像類似判定装置、符号化装置、および特徴量算出方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3496907B2 (ja) | 2004-02-16 |
| US6144799A (en) | 2000-11-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5493345A (en) | Method for detecting a scene change and image editing apparatus | |
| KR100464075B1 (ko) | 비디오 하이라이트 자동 생성 방법 및 장치 | |
| US5471239A (en) | Detecting scene changes | |
| US6094234A (en) | Method of and an apparatus for decoding video data | |
| US5742517A (en) | Method for randomly accessing stored video and a field inspection system employing the same | |
| US8098729B2 (en) | Implementing B-picture scene changes | |
| US7933333B2 (en) | Method and apparatus for detecting motion in MPEG video streams | |
| US20020118756A1 (en) | Video coding method and data processing device | |
| US20030058946A1 (en) | Motion picture data converter, and computer product | |
| US7075985B2 (en) | Methods and systems for efficient video compression by recording various state signals of video cameras | |
| US20020110358A1 (en) | Advancing playback of video data based on parameter values of video data | |
| JP3496907B2 (ja) | 音声・動画像符号化データ検索方法及び検索装置 | |
| US20070058951A1 (en) | Recording apparatus, recording method, program of recording method, and recording medium having program of recording method recorded thereon | |
| US7050700B2 (en) | Picture compression managing apparatus and picture compression managing method used therefor | |
| JPH0869597A (ja) | 動きベクトル検出手段を用いた監視装置 | |
| JP2005175710A (ja) | デジタル記録再生装置及びデジタル記録再生方法 | |
| JPH09298739A (ja) | 画像抽出装置 | |
| KR100478017B1 (ko) | 다채널 영상데이타 처리장치 및 방법 | |
| KR100900607B1 (ko) | 멀티미디어 데이터 복호장치 | |
| JP4443387B2 (ja) | 動画像再生装置 | |
| KR100453010B1 (ko) | 디지털 영상 녹화 장치 및 방법 | |
| JPH10112864A (ja) | カメラワーク算出方法及び装置 | |
| JP2000023090A (ja) | 圧縮動画像編集装置および記憶媒体 | |
| JP3166572B2 (ja) | 動画像音声圧縮装置 | |
| JP2002152051A (ja) | 圧縮符号編集装置および圧縮符号編集方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071128 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081128 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091128 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091128 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101128 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111128 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111128 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121128 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121128 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131128 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |