JPH09322174A - 動画データの再生方法 - Google Patents

動画データの再生方法

Info

Publication number
JPH09322174A
JPH09322174A JP13618596A JP13618596A JPH09322174A JP H09322174 A JPH09322174 A JP H09322174A JP 13618596 A JP13618596 A JP 13618596A JP 13618596 A JP13618596 A JP 13618596A JP H09322174 A JPH09322174 A JP H09322174A
Authority
JP
Japan
Prior art keywords
image data
picture
frame
data
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP13618596A
Other languages
English (en)
Inventor
Itaru Nonomura
到 野々村
Takeo Tomokane
武郎 友兼
Nobukazu Kondo
伸和 近藤
Kazuaki Tanaka
和明 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP13618596A priority Critical patent/JPH09322174A/ja
Priority to EP19970108604 priority patent/EP0810793A3/en
Priority to US08/864,913 priority patent/US6094234A/en
Publication of JPH09322174A publication Critical patent/JPH09322174A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/142—Detection of scene cut or scene change
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】本発明は、動画データおよび音声付き動画デー
タを取り扱う情報処理装置に関する。特に動画データの
シーンチェンジを検出するシーンチェンジ検出装置に関
する。 【解決手段】上記目的を達成するために、本発明の動画
データシーンチェンジ検出装置は、動画データに含まれ
るフレーム内予測符号化フレームと、該フレームの前の
フレーム内予測符号化フレームとの間でのシーンチェン
ジを検出する、フレーム内予測符号化フレームシーンチ
ェンジ検出手段と、該フレーム内予測符号化フレームシ
ーンチェンジ検出手段が検出した、シーンチェンジ情報
を記録するシーンチェンジ情報記録手段を備えて構成さ
れる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、動画データおよび
音声付き動画データの再生方法に関する。
【０００２】
【従来の技術】近年、情報処理技術の進歩に伴い、動画
や音声をデジタル化して記録・再生するシステムが普及
しつつある。
【０００３】デジタルデータは、劣化することなく複製
を作ることが可能であり、編集に適しているため、デジ
タル動画データや、デジタル音声データを対象とした編
集システムに対するニーズがある。
【０００４】このとき、動画や音声の編集作業を効率良
く行うためには、記録するデータを高速に検索できるこ
とが必須である。
【０００５】そこで、デジタルデータを蓄積するメディ
アとして、磁気ディスクや光磁気ディスク、光ディスク
等のランダムアクセス可能なメディアを使用するノンリ
ニア編集システムが注目を集めている。
【０００６】しかし、一般に、上記のようなランダムア
クセス可能なメディアは、容量に限界がある。
【０００７】一方、デジタル動画データやデジタル音声
データのデータ量は多い。特に、動画データのデータ量
は膨大である。
【０００８】例えば、毎秒３０フレームで各フレームが
３５２画素×２４０画素、そして各画素が２４ビットで
構成されているデジタル動画データを１時間分蓄積する
ためには、約２５ギガバイトもの記憶容量が必要であ
る。
【０００９】従って、ノンリニア編集システムでは、デ
ータ圧縮技術を用いて動画のデータ量を削減することが
一般に行われている。
【００１０】現在、業務用のノンリニア編集システムの
動画データ圧縮に広く使用されているのは、Ｍｏｔｉｏ
ｎＪＰＥＧ(Joint Photographic Experts Group)方式で
ある。
【００１１】ＭｏｔｉｏｎＪＰＥＧ方式は、本来静止画
像データを圧縮するために開発されたＪＰＥＧ方式を用
いて動画データを圧縮する方式であり、音声データに関
しては考慮されていない。このため、音声付き動画デー
タの形式は、編集システムによって異なり、データの互
換性に問題がある。
【００１２】一方、ＭＰＥＧ方式は動画と音声の圧縮伸
長および動画と音声の同期再生の方式を含む国際標準規
格である。このため、ＭＰＥＧ方式に準拠したデータ
は、データ互換性が高い。
【００１３】従って、一般ユーザがデータのやり取りを
行う際には、ＭＰＥＧ方式を採用した編集システムが便
利である。
【００１４】ＭＰＥＧ方式の詳細については、「ポイン
ト図解式最新ＭＰＥＧ教科書」、アスキー社刊のｐ８９
−１８７、ｐ２３１−２５３に記載されている。
【００１５】動画や音声付き動画に対して、欲しいシー
ンを残し、不要なシーンを削除するための編集を行う際
には、一般的には動画や音声付き動画の内容を確認した
上でシーンを取捨選択するが、この作業は非常に手間の
かかる作業である。
【００１６】そこで、動画編集システムや音声付き動画
編集システムに、シーンチェンジを自動検出する機能を
持たせることで、シーンの取捨選択を容易とし、編集作
業の手間を軽減することが考えられる。
【００１７】ＭＰＥＧ方式などで圧縮された動画データ
のシーンチェンジを検出するためには、まず圧縮された
動画データを復号して画像データを得、該画像データに
対してシーンチェンジ検出処理を行う方法が考えられ
る。
【００１８】しかし、この方法では、復号処理とシーン
チェンジ検出処理の２つの処理が必要であるため、処理
負荷が高い。
【００１９】従って、この方法では動画編集システムに
高い処理能力が必要であり、動画編集システムに高い処
理能力を持たせることはコストが高くなるという問題点
がある。
【００２０】上記の問題点を解決するため、圧縮動画デ
ータを復号せず圧縮動画データのフレーム毎のデータ量
に基づいてシーンチェンジを検出する技術が特開平６−
１３３３０５号公報に開示されている。
【００２１】
【発明が解決しようとする課題】前述のＭＰＥＧ方式に
は、３種類の符号化方法があり、符号化方法によってフ
レーム毎のデータ量が異なる。
【００２２】従って、フレーム毎のデータ量に基づいて
シーンチェンジを検出する場合には、フレーム毎に符号
化方法について考慮する必要がある。
【００２３】さらに、ＭＰＥＧ方式では、符号化時に単
位時間当たりのデータ量が一定になるようにデータ量制
御を行うのが一般的である。
【００２４】すなわち、結果として、符号化方法が同一
のフレームのデータ量は、近い値になることが多い。
【００２５】従って、特開平６−１３３３０５号公報記
載の方法では、ＭＰＥＧ形式の動画データの場合に誤検
出を生じる恐れがある。
【００２６】また、同公報記載の方法は、音声データに
ついての考慮がなされていないという課題がある。
【００２７】本発明は上記の課題に鑑み成されたもので
あり、動画データのフレーム毎に符号化方法について考
慮し、符号化方法に適合したシーンチェンジ検出を行う
ことにより、少ない処理量で検出率良好にシーンチェン
ジを検出可能な動画データの再生方法を提供することを
目的とする。
【００２８】また、音声付き動画データの場合に、少な
い処理量で検出率良好にシーンチェンジを検出可能な動
画データの再生方法を提供することを目的とする。
【００２９】
【課題を解決するための手段】上記目的を達成するため
に、本発明の動画データシーンチェンジ検出装置は、 （１）圧縮された動画データ内に含まれる他のフレーム
との相関関係を用いず符号化することによって生成され
るＩ−ピクチャを検出し、前記検出されたＩ−ピクチャ
のデータをデコードして１フレーム分の画像データを順
次生成することで、複数フレームの画像データをそれぞ
れ生成し、前記生成された任意の第１フレームの第１の
画像データと、該第１のフレームと隣接する第２フレー
ムの第２の画像データとの差分を算出し、前記算出され
た両画像データの差分が所定の閾値以上の場合に、前記
動画データ中にシーンチェンジがあったと判断するよう
構成されている。
【００３０】（２）圧縮された動画データ内に含まれて
おり、現フレームが過去１フレームとの相関関係を用い
て符号化することによって生成されるＰ−ピクチャであ
ることを示すピクチャタイプと、１フレーム分の画像デ
ータに対応するデータの開始を示す情報を含むピクチャ
ヘッダを検出し、前記検出されたピクチャヘッダに続く
１フレーム分のデータを順次デコードすることで複数フ
レームの画像データをそれぞれ生成し、前記判別された
現フレームのピクチャタイプが前記Ｐ−ピクチャである
場合、該現フレームのＰ−ピクチャの画像データ量と、
該現フレームと隣接する前フレームのＰ−ピクチャの画
像データ量との差分を算出し、前記算出された両画像デ
ータ量の差分が所定の閾値以上となった場合に前記圧縮
された動画データ中にシーンチェンジがあったと判断す
るよう構成されている。
【００３１】（３）圧縮された動画データ内に含まれて
おり、他のフレームとの相関関係を用いず独立のフレー
ムとして符号化することによって生成されるＩ−ピクチ
ャであるか、過去１フレームとの相関関係を用いて符号
化することによって生成されるＰ−ピクチャであるかを
示すピクチャタイプと、１フレーム分の画像データに対
応するデータの関係を示す情報とを含むピクチャヘッダ
とを検出し、前記検出されたピクチャヘッダに続く１フ
レーム分のデータを順次デコードすることで複数フレー
ムの画像データをそれぞれ生成し、前記検出されたピク
チャヘッダに含まれるピクチャタイプに基づいて現フレ
ームのピクチャタイプを判別し、前記判別されたピクチ
ャタイプが前記Ｉ−ピクチャである場合、該現フレーム
のＩ−ピクチャの画像データと、該現フレームと隣接す
る前フレームのＩ−ピクチャの画像データとの差分を算
出し、前記算出された両画像データの差分が所定の閾値
以上の場合に前記動画データ中にシーンチェンジがあっ
た判断し、一方、前記判別された現フレームのピクチャ
タイプが前記Ｐ−ピクチャである場合には、該現フレー
ムのＰ−ピクチャの画像データ量と、該現フレームと隣
接する前フレームのＰ−ピクチャの画像データ量との差
分が所定の閾値以上である場合に前記動画データ中にシ
ーンチェンジがあったと判断するよう構成されている。
【００３２】（４）圧縮された動画データ内に含まれて
おり、現フレームが過去及び未来の２枚のフレームとの
相関関係を用いて符号化することによって生成されるＢ
−ピクチャであることを示すピクチャタイプと、１フレ
ーム分の画像データに対応するデータの開始を示す情報
を含むピクチャヘッダを検出し、前記検出されたピクチ
ャヘッダに続く１フレーム分のデータを順次デコードす
ることで複数フレームの画像データをそれぞれ生成し、
前記判別された現フレームのピクチャタイプが前記Ｂ−
ピクチャである場合、該現フレームのＢ−ピクチャの画
像データ量と、該現フレームと隣接する前フレームのＢ
−ピクチャの画像データ量との差分を算出し、前記算出
された両画像データ量の差分が所定の閾値以上となった
場合に前記圧縮された動画データ中にシーンチェンジが
あったと判断するよう構成されている。
【００３３】（５）圧縮された動画データ内に含まれて
おり、他のフレームとの相関関係を用いず独立のフレー
ムとして符号化することによって生成されるＩ−ピクチ
ャであるか、過去１フレームとの相関関係を用いて符号
化することによって生成されるＰ−ピクチャであるか、
現フレームが過去及び未来の２枚のフレームとの相関関
係を用いて符号化することによって生成されるＢ−ピク
チャであるかを示すピクチャタイプと、１フレーム分の
画像データに対応するデータの関係を示す情報とを含む
ピクチャヘッダを検出し、前記検出されたピクチャヘッ
ダに続く１フレーム分のデータを順次デコードすること
で複数フレームの画像データをそれぞれ生成し、前記検
出されたピクチャヘッダに含まれるピクチャタイプに基
づいて現フレームのピクチャタイプを判別し、前記判別
されたピクチャタイプが前記Ｉ−ピクチャである場合、
該現フレームのＩ−ピクチャの画像データと、該現フレ
ームと隣接する前フレームのＩ−ピクチャの画像データ
との差分を算出し、前記算出された両画像データの差分
が所定の閾値以上の場合に前記動画データ中にシーンチ
ェンジがあった判断し、前記判別された現フレームのピ
クチャタイプが前記Ｐ−ピクチャである場合には、該現
フレームのＰ−ピクチャの画像データ量と、該現フレー
ムと隣接する前フレームのＰ−ピクチャの画像データ量
との差分が所定の閾値以上である場合に前記動画データ
中にシーンチェンジがあったと判断し、一方、前記判別
された現フレームのピクチャタイプが前記Ｂ−ピクチャ
である場合、該現フレームのＢ−ピクチャの画像データ
量と、該現フレームと隣接する前フレームのＢ−ピクチ
ャの画像データ量との差分を算出し、前記算出された両
画像データ量の差分が所定の閾値以上となった場合に前
記圧縮された動画データ中にシーンチェンジがあったと
判断するよう構成されている。
【００３４】（６）音声付き動画データから音声データ
と動画データとを分離し、該分離された音声データをデ
コードしてパルスコードモジュレーション（ＰＣＭ）デ
ータを生成し、前記生成されたＰＣＭデータを再生時間
帯域毎に分類し、該分類された再生時間帯域毎に特徴量
を計算し、連続する前記再生時間帯域において前記計算
された特徴量の差分が所定の閾値以上の場合に前記音声
付き動画データ中にシーンチェンジが合ったと判断する
よ構成されている。
【００３５】
【発明の実施の形態】以下、本発明の実施例について図
面を参照して説明する。
【００３６】図１は、シーンチェンジの様子を示す図で
ある。
【００３７】図１において、フレーム１、フレーム２お
よびフレーム３は時間的に連続したフレームである。
【００３８】図のようにフレーム１とフレーム２の画像
の内容は類似しているが、フレーム２とフレーム３の画
像の内容は全く異なる。すなわち、フレーム２とフレー
ム３の間でシーンチェンジが発生している。
【００３９】本発明のシーンチェンジ検出装置は、図１
におけるフレーム２とフレーム３の間で発生したよう
な、動画のシーンチェンジを検出することを目的とす
る。
【００４０】以下の説明では、動画データ、音声データ
および音声付き動画データは、いずれもＭＰＥＧ形式の
データである場合を例にとって説明する。
【００４１】まず、ＭＰＥＧ形式の動画データについて
図２、図３および図４を用いて説明する。
【００４２】図２は、ＭＰＥＧ形式の動画データに含ま
れる、３種類のフレームタイプを示す図である。
【００４３】Ｉピクチャは、符号化時に他のフレームと
の相関関係を用いずに符号化することによって生成され
る、フレーム内予測符号化フレームである。一般的に、
Ｉピクチャは圧縮率が小さいためデータ量が多い。
【００４４】Ｐピクチャは、過去の１枚のフレームとの
相関関係を用いて符号化することによって生成される、
前方向フレーム間予測符号化フレームである。
【００４５】つまり、図２においては、Ｐピクチャ２０
２は、Ｉピクチャ２０１との相関を利用して符号化され
ている。
【００４６】一般に動画では、時間的に連続したフレー
ムの内容は近い。このため、時間的に連続した２枚のフ
レームの間には、高い相関がある。この相関関係を利用
して符号化するため、Ｐピクチャの圧縮率はＩピクチャ
より高く、Ｐピクチャ１枚あたりのデータ量はＩピクチ
ャに比して少ない。
【００４７】Ｂピクチャは、過去および未来の２枚のフ
レームとの相関関係を用いて符号化することによって生
成される、双方向フレーム間予測符号化フレームであ
る。
【００４８】２枚のフレームとの相関を利用して符号化
するため、Ｂピクチャの圧縮率はＰピクチャよりもさら
に高く、Ｂピクチャ１枚あたりのデータ量は、Ｐピクチ
ャよりもさらに少ない。
【００４９】シーンチェンジが発生した場合には、過去
のフレームとの相関が低くなる。このため、Ｐピクチャ
あるいはＢピクチャでは、圧縮率が小さくなり、データ
量が増加する。一方、Ｉピクチャでは、フレーム間の相
関を利用しないため、シーンチェンジによってデータ量
が変化するかどうかは、画像の内容に依存し、一概には
言えない。
【００５０】ＭＰＥＧ動画データにおいては、Ｉピクチ
ャは、１５フレーム〜３０フレームに１枚、Ｐピクチャ
は２〜３フレームに１枚、Ｂピクチャは２フレームに１
枚から３フレームに２枚程度含まれることが多い。
【００５１】図３は、ＭＰＥＧ動画データのフレーム毎
のデータ量を示すグラフである。
【００５２】図３において、データ量が１００００バイ
ト以上のフレームはＩピクチャ、データ量が３０００バ
イトから９９９９バイトまでのフレームはＰピクチャ、
データ量が２９９９バイト以下のフレームがＢピクチャ
である。
【００５３】図４は、ＭＰＥＧ形式の動画データのデー
タ構造を示す図である。
【００５４】ＭＰＥＧ形式の動画データは、シーケンス
層、ＧＯＰ(Group Of Picture)層、ピクチャ層、スライ
ス層、マクロブロック層、ブロック層の６層構造をなし
ている。
【００５５】ブロック層４０６は、８画素×８画素分の
画像データに対応する。
【００５６】マクロブロック層４０５は、１６画素×１
６画素分の画像データに対応する。
【００５７】スライス層４０４は、画面上で水平方向に
並んだ１以上のマクロブロックで構成される。
【００５８】ピクチャ層４０３は、１フレーム分の画像
に対応し、ピクチャヘッダ４０３ａと１以上の複数のス
ライス層とで構成される。
【００５９】ピクチャヘッダ４０３ａは、ピクチャ層の
開始を意味するＰＳＣ(Picture Start Code)で始まり、
ピクチャがＩピクチャ、Ｐピクチャ、Ｂピクチャのいず
れであるのかを示すＰＴＹＰＥ(Picture TYPE)符号を含
む。従って、ピクチャヘッダ４０３ａに基づいてピクチ
ャタイプを判定可能である。
【００６０】ＧＯＰ層４０２は、ＧＯＰヘッダと１以上
のピクチャ層で構成される。
【００６１】シーケンス層４０１は、シーケンスヘッダ
と１以上のＧＯＰ層とシーケンスの終了を示すＳＥＣ(S
equence End Code)とで構成される。
【００６２】図２４は、第一の実施例を適用したＰＣ(P
ersonal Computer)ベースＤＶＤ(Digital Video Disc)
再生システムの外観図である。 ＰＣベースＤＶＤ再生
システムは、ＰＣ本体３００１と、ディスプレイ３００
２と、スピーカ３００３と、キーボード３００４とを備
えて構成されている。
【００６３】ディスプレイ３００２は、ＰＣ本体３００
１から出力される画像信号を表示する装置である。スピ
ーカ３００３は、ＰＣ本体３００１から供給される音声
信号を出力する装置である。キーボード３００４は、
ＰＣベースＤＶＤ再生システムのユーザによるキー入力
を受け付け、該キー入力をＰＣ本体３００１に出力する
装置である。
【００６４】続いて、ＰＣ本体３００１のハードウエア
構成について図面を用いて説明する。
【００６５】図５は、ＰＣ本体３００１のハードウエア
構成図である。
【００６６】ＰＣ本体３００１は、ＣＰＵ５０１と、メ
インメモリ５０２と、ハードディスク５０３と、 ＤＶ
Ｄドライブ５０４と、動画デコーダ５０５と、音声デコ
ーダ５０６と、 画像出力部５０７と、音声出力部５０
８と、キーボードインタフェース５０９と、バス５１０
とを備えて構成されている。
【００６７】本実施例において、 ＰＣベースＤＶＤ再
生システムは、 ＤＶＤドライブ５０４に格納されてい
る動画データに含まれるシーンチェンジを検出し、該動
画データにシーンチェンジに関する情報を生成し、該シ
ーンチェンジ情報をハードディスク５０３に格納する動
画シーンチェンジ検出処理を行う。
【００６８】本実施例は、動画シーンチェンジ検出装置
が行う動画シーンチェンジ検出処理をソフトウエアで実
現した例である。
【００６９】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ５０１が、ハードディスク５０３に格納され
ているソフトウエアをメインメモリ５０２にロードし、
メインメモリ５０２上で実行することによって実現され
る。
【００７０】メインメモリ５０２は、半導体メモリなど
の記憶媒体を用いて構成された揮発性の記憶装置であ
る。ハードディスク５０３は、磁気記憶装置等の記憶媒
体を用いて構成した不揮発性の記憶装置である。ＤＶＤ
ドライブ５０４は、ＤＶＤに記録されたデジタル情報を
読み取る、読み出し専用記憶装置である。動画デコーダ
５０５は、ＣＰＵ５０１から供給される動画データを復
号して画像データを得、該画像データを画像出力部５０
６に供給する。音声デコーダ５０７は、ＣＰＵ５０１か
ら供給される音声データを復号して音声データを得、該
音声データを音声出力部５０３に供給する。画像出力部
５０７は、ＣＰＵ５０１あるいは動画デコーダ５０５か
ら供給される画像データを画像信号に変換し、該画像信
号をディスプレイ３００２に出力する。音声出力部５０
８は、ＣＰＵ５０１あるいは音声デコーダ５０７から供
給される音声データを音声信号に変換し、該音声信号を
スピーカ３００３に出力する。キーボードインタフェー
ス５０９は、キーボード３００４から供給される信号
を、ＣＰＵ５０１に供給する。
【００７１】まず、本発明の第一の実施例における動画
シーンチェンジ検出処理の処理手順について、図面を参
照して説明する。
【００７２】図６は、本発明の第一の実施例における動
画シーンチェンジ検出処理の処理手順を示すフローチャ
ートである。
【００７３】まず、 ＤＶＤドライブ５０４から動画デ
ータを入力し、該動画データに含まれる最初のＰＳＣを
検出する（ステップ６０１）。
【００７４】そして、該動画データにおいて、ステップ
６０１あるいはステップ６０７で検出したＰＳＣを含む
ピクチャヘッダを入力する（ステップ６０２）。
【００７５】続いて、該ピクチャヘッダに含まれるＰＴ
ＹＰＥ符号に基づいてピクチャタイプを判別する。そし
て、現フレームがＩピクチャであればステップ６０４
を、現フレームがＰピクチャあるいはＢピクチャであれ
ばステップ６０５をそれぞれ実行する（ステップ６０
３）。
【００７６】以下、ステップ６０４のＩピクチャシーン
チェンジ検出について図７を用いて説明する。
【００７７】図７はＩピクチャシーンチェンジ検出の処
理の流れを示すフローチャートである。
【００７８】まず、現フレームのデータ８０１をデコー
ドして、１フレーム分の画像データ８０２を得る（ステ
ップ７０１）。
【００７９】そして、該画像データ８０２と、直前のＩ
ピクチャを復号して得た画像データ８０３との差分を画
素毎に計算して差分データ８０４を得る。そして、差分
データ８０４に含まれるデータの絶対値和を計算する
（ステップ７０２）。
【００８０】また、ステップ７０１およびステップ７０
２は、以下に説明する処理に置き換えることも可能であ
る。
【００８１】まず、現フレームのデータ９０１をデコー
ドして、１フレーム分の画像データのＤＣ成分９０２を
得る（ステップ７０１）。
【００８２】そして、該ＤＣ成分９０２と、直前のＩピ
クチャを復号して得たＤＣ成分９０３との差分を画素毎
に計算して差分データ９０４を得る。そして、差分デー
タ９０４に含まれるデータの絶対値和を計算する（ステ
ップ７０２）。
【００８３】ＤＣ成分は、ＭＰＥＧ形式動画データにお
いて、８画素×８画素のブロックのデータの平均値であ
る。動画データのデコードをＤＣ成分までに限定する
と、解像度は低下するが、処理負荷は低くすることがで
きる。
【００８４】該絶対値和と、あらかじめ用意した閾値と
を比較し、該絶対値和が該閾値よりも大きい場合にはシ
ーンチェンジありと判定し、該絶対値和が該閾値よりも
小さい場合と、該絶対値和と該閾値とが等しい場合には
シーンチェンジなしと判定する（ステップ７０３）。
【００８５】図６に戻る。
【００８６】次に、ステップ６０４でシーンチェンジが
検出された場合にはステップ６０６を、ステップ６０４
でシーンチェンジが検出されない場合には、ステップ６
０７をそれぞれ実行する（ステップ６０５）。
【００８７】以下、ステップ６０６のシーンチェンジ情
報記録について、図１０を用いて説明する。
【００８８】図１０はシーンチェンジ情報テーブルの構
造の一例を示す図である。
【００８９】シーンチェンジ情報テーブルは、少なくと
もシーンチェンジが発生したフレームの先頭アドレス
と、シーンチェンジ点の再生時刻とを含む。
【００９０】ステップ６０６のシーンチェンジ情報記録
は、図１０のシーンチェンジ情報テーブルを作成し、該
テーブルをハードディスク５０３に蓄積する。
【００９１】終了検出ステップ６０７では、動画データ
において、次に含まれるＰＳＣとＳＥＣを探索し、ＳＥ
Ｃを先に検出した場合には動画シーンチェンジ検出を終
了し、ＰＳＣを先に検出した場合にはステップ６０２を
実行する。
【００９２】以上説明を行った第一の実施例によれば、
ＭＰＥＧ形式の動画データに対して、Ｉピクチャをデコ
ードしてシーンチェンジを検出することにより、低い処
理負荷でシーンチェンジを検出することが可能である。
【００９３】続いて、本発明の第二の実施例について説
明する。
【００９４】本発明の第二の実施例は、動画データのシ
ーンチェンジ検出処理の例である。
【００９５】第二の実施例の動画データシーンチェンジ
検出装置のハードウエア構成は、第一の実施例の動画シ
ーンチェンジ検出装置のハードウエア構成と同一であ
る。
【００９６】本実施例において、動画シーンチェンジ検
出装置は、ハードディスク５０３に格納されている動画
データに含まれるシーンチェンジを検出し、該動画デー
タのシーンチェンジに関する情報を生成し、該シーンチ
ェンジ情報をハードディスク５０３に格納する動画シー
ンチェンジ検出処理を行う。
【００９７】本実施例は、動画シーンチェンジ検出装置
が行う動画シーンチェンジ検出処理をソフトウエアで実
現した例である。
【００９８】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ５０１が、ハードディスク５０３に格納され
ているソフトウエアをメインメモリ５０２にロードし、
メインメモリ５０２上で実行することによって実現され
る。
【００９９】以下、本発明の第二の実施例における動画
シーンチェンジ検出処理について図面を参照して説明す
る。
【０１００】図１１は、動画シーンチェンジ検出処理の
処理手順を示すフローチャートである。
【０１０１】まず、ハードディスク５０３から動画デー
タを入力し、該動画データに含まれる最初のＰＳＣを検
出する（ステップ１１０１）。
【０１０２】そして、該動画データにおいて、ステップ
１１０１あるいはステップ１１０８で検出したＰＳＣを
含むピクチャヘッダを入力する（ステップ１１０２）。
【０１０３】続いて、ピクチャヘッダに含まれるＰＴＹ
ＰＥに基づいてピクチャタイプを判別し、現フレームが
Ｉピクチャであればステップ１１０４を、現フレームが
Ｐピクチャであればステップ１１０５を、現フレームが
Ｂピクチャであればステップ１１０６をそれぞれ実行す
る（ステップ１１０３）。
【０１０４】ステップ１１０４のＩピクチャシーンチェ
ンジ検出は、第一の実施例のＩピクチャシーンチェンジ
検出と同一である。
【０１０５】以下、ステップ１１０５のＰピクチャシー
ンチェンジ検出について図１２、図１３を用いて説明す
る。
【０１０６】図１２は、Ｐピクチャシーンチェンジ検出
の処理の流れを示すフローチャートである。
【０１０７】図１３は、Ｐピクチャ毎のデータ量に基づ
いてシーンチェンジの有無を判定するときに使用するテ
ーブルである。
【０１０８】まず、現フレームのデータ量を計測し、計
測結果をメインメモリ５０２に格納する（ステップ１２
０１）。
【０１０９】続いて、ステップ１２０１でメインメモリ
５０２に格納したＰピクチャのデータ量に基づいて、過
去３フレームのデータ量の平均値を求める（ステップ１
２０２）。
【０１１０】さらに、ステップ１２０１で計測した現Ｐ
ピクチャのデータ量と、ステップ１２０２で計算した過
去３フレームのデータ量の平均値とに基づいて、シーン
チェンジの有無を判定する（ステップ１２０３）。
【０１１１】図１３の例では、ステップ１２０１で計測
した現Ｐピクチャのデータ量が、ステップ１２０２で計
算した過去３フレームのデータ量の平均値の２倍を超え
たときにシーンチェンジが発生したと判定している。
【０１１２】図１１に戻る。
【０１１３】ステップ１１０４あるいはステップ１１０
５でシーンチェンジが検出された場合には、ステップ１
１０７を実行し、ステップ１１０４あるいはステップ１
１０５でシーンチェンジが検出されない場合には、ステ
ップ１１０８を実行する（ステップ１１０６）。
【０１１４】シーンチェンジが検出された場合にはシー
ンチェンジ情報テーブルを作成し、該テーブルをハード
ディスク５０３に蓄積する（ステップ１１０７）。
【０１１５】ステップ１１０７で作成するシーンチェン
ジ情報テーブルは、第一の実施例で説明したシーンチェ
ンジ情報テーブルと同一である。
【０１１６】再び図１１に戻る。
【０１１７】終了検出ステップ１１０８では、動画デー
タにおいて、次に含まれるＰＳＣとＳＥＣを探索し、Ｓ
ＥＣを先に検出した場合には動画シーンチェンジ検出を
終了し、ＰＳＣを先に検出した場合にはステップ１１０
２を実行する。
【０１１８】以上説明を行った第二の実施例によれば、
ＭＰＥＧ形式の動画データに対して、Ｉピクチャをデコ
ードしてシーンチェンジを検出することと、Ｐピクチャ
のデータ量に基づいてシーンチェンジを検出することと
により、低い処理負荷でシーンチェンジを検出すること
ができる。
【０１１９】続いて、本発明の第三の実施例について説
明する。
【０１２０】図２５は、第三の実施例を適用したＰＣベ
ースＭＰＥＧ１符号化システムの外観図である。 ＰＣ
ベースＭＰＥＧ１符号化システムは、ＰＣ本体４００１
と、ディスプレイ４００２と、キーボード４００３とを
備えて構成されている。
【０１２１】ディスプレイ４００２は、ＰＣ本体４００
１から出力される画像信号を表示する装置である。
【０１２２】キーボード４００３は、 ＰＣベースＭＰ
ＥＧ１符号化システムのユーザによるキー入力を受け付
け、該キー入力をＰＣ本体４００１に出力する装置であ
る。
【０１２３】続いて、ＰＣ本体４００１のハードウエア
構成について図面を用いて説明する。
【０１２４】図２６は、ＰＣ本体４００１のハードウエ
ア構成図である。
【０１２５】ＰＣ本体４００１は、ＣＰＵ４１０１と、
メインメモリ４１０２と、ハードディスク４１０３と、
動画ＣＯＤＥＣ４１０４と、 画像出力部４１０５と、
キーボードインタフェース４１０６と、バス４１０７と
を備えて構成されている。
【０１２６】本実施例において、 ＰＣベースＭＰＥＧ
１符号化システムは、動画ＣＯＤＥＣ４１０４が出力す
る動画データに含まれるシーンチェンジを検出し、該動
画データにシーンチェンジに関する情報を生成し、該シ
ーンチェンジ情報をハードディスク４１０３に格納する
動画シーンチェンジ検出処理を行う。
【０１２７】本実施例は、 ＰＣベースＭＰＥＧ１符号
化システムが行う動画シーンチェンジ検出処理をソフト
ウエアで実現した例である。
【０１２８】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ４１０１が、ハードディスク４１０３に格納
されているソフトウエアをメインメモリ４１０２にロー
ドし、メインメモリ４１０２上で実行することによって
実現される。
【０１２９】メインメモリ４１０２は、半導体メモリな
どの記憶媒体を用いて構成された揮発性の記憶装置であ
る。ハードディスク４１０３は、磁気記憶装置等の記憶
媒体を用いて構成した不揮発性の記憶装置である。動画
ＣＯＤＥＣ４１０４は、ＣＰＵ４１０１から供給される
動画データを復号して画像データを得、該画像データを
画像出力部４１０５に供給することと、外部に接続され
たビデオカメラや、ＶＴＲ(Video Tape Recorder)等か
ら供給された画像信号を符号化し、動画データを生成す
ることとを行なう。画像出力部４１０５は、ＣＰＵ４１
０１あるいは動画デコーダ５０５から供給される画像デ
ータを画像信号に変換し、該画像信号をディスプレイ４
１０２に出力する。キーボードインタフェース４１０６
は、キーボード３００４から供給される信号を、ＣＰＵ
４１０１に供給する。
【０１３０】以下、本発明の第三の実施例における動画
シーンチェンジ検出処理について図面を参照して説明す
る。
【０１３１】図１４は、動画シーンチェンジ検出処理の
処理手順を示すフローチャートである。
【０１３２】まず、動画ＣＯＤＥＣ４１０４から動画デ
ータを入力し、該動画データに含まれる最初のＰＳＣを
検出する（ステップ１４０１）。
【０１３３】そして、該動画データにおいて、ステップ
１４０１で検出したＰＳＣを含むピクチャヘッダを入力
する（ステップ１４０２）。
【０１３４】続いて、ピクチャヘッダに含まれるＰＴＹ
ＰＥに基づいてピクチャタイプを判別し、現フレームが
Ｉピクチャであればステップ１４０４を、現フレームが
Ｐピクチャであればステップ１４０５を、現フレームが
Ｂピクチャであればステップ１４０６を実行する（ステ
ップ１４０３）。
【０１３５】ステップ１４０４のＩピクチャシーンチェ
ンジ検出は、第一あるいは第二の実施例のＩピクチャシ
ーンチェンジ検出と同一である。
【０１３６】ステップ１４０５のＰピクチャシーンチェ
ンジ検出は、第一の実施例のＰピクチャシーンチェンジ
検出と同一である。
【０１３７】以下、ステップ１４０６のＢピクチャシー
ンチェンジ検出について図１５、図１６を用いて説明す
る。
【０１３８】図１５は、Ｂピクチャシーンチェンジ検出
の処理の流れを示すフローチャートである。
【０１３９】図１６は、Ｂピクチャ毎のデータ量に基づ
いてシーンチェンジの有無を判定するときに使用するテ
ーブルである。
【０１４０】まず、現フレームのデータ量を計測し、計
測結果をメインメモリ５０２に格納する（ステップ１５
０１）。
【０１４１】続いて、ステップ１５０１でメインメモリ
５０２に格納した過去のＢピクチャのデータ量に基づい
て、過去３フレームのデータ量の平均値を求める（ステ
ップ１５０２）。
【０１４２】さらに、ステップ１５０１で計測した現Ｂ
ピクチャのデータ量と、ステップ１５０２で計算した過
去３フレームのデータ量の平均値とに基づいて、シーン
チェンジの有無を判定する。
【０１４３】図１６の例では、ステップ１５０１で計測
した現Ｂピクチャのデータ量が、ステップ１５０２で計
算した過去３フレームのデータ量の平均値の４倍を超え
たときにシーンチェンジが発生したと判定している。
【０１４４】なお、一般にＢピクチャはＰピクチャに比
して圧縮率が高い。
【０１４５】従って、シーンチェンジ発生時のＢピクチ
ャの、非シーンチェンジ発生時のＢピクチャに対するデ
ータ量増加の度合いは、シーンチェンジ発生時のＰピク
チャの、非シーンチェンジ発生時のＰピクチャに対する
データ量増加の度合いよりも、一般に大きい。
【０１４６】従って、ステップ１４０６においてシーン
チェンジが発生したか否かの判定に用いる閾値は、ステ
ップ１４０５においてシーンチェンジが発生したか否か
の判定に用いる閾値よりも大きくすることで、シーンチ
ェンジ検出率を高めることができる。
【０１４７】図１４に戻る。
【０１４８】ステップ１４０４あるいはステップ１４０
５あるいはステップ１４０６でシーンチェンジが検出さ
れた場合には、ステップ１４０８を実行し、ステップ１
４０４あるいはステップ１４０５あるいはステップ１４
０６でシーンチェンジが検出されない場合には、ステッ
プ１４０９を実行する（ステップ１４０７）。
【０１４９】シーンチェンジが検出された場合にはシー
ンチェンジ情報テーブルを作成し、該テーブルをハード
ディスク５０３に蓄積する（ステップ１４０８）。
【０１５０】ステップ１４０８で作成するシーンチェン
ジ情報テーブルは、第一の実施例で説明したシーンチェ
ンジ情報テーブルと同一である。
【０１５１】終了検出ステップ１４０９では、動画デー
タに含まれるＰＳＣとＳＥＣを探索し、ＳＥＣを先に検
出した場合には動画シーンチェンジ検出を終了し、ＰＳ
Ｃを先に検出した場合にはステップ１４０２を実行す
る。
【０１５２】以上説明を行った第三の実施例によれば、
ＭＰＥＧ形式の動画データに対して、Ｉピクチャをデコ
ードしてシーンチェンジを検出することと、Ｐピクチャ
のデータ量に基づいてシーンチェンジを検出すること
と、Ｂピクチャのデータ量に基づいてシーンチェンジを
検出することとにより、低い処理負荷で正確にシーンチ
ェンジを検出することができる。
【０１５３】続いて、本発明の第四の実施例について説
明する。
【０１５４】図２７は、第四の実施例を適用したＤＶＤ
(Digital Video Disc)再生システムの外観図である。Ｄ
ＶＤ再生システムは、ＤＶＤプレーヤ５００１と、テレ
ビジョン５００２とを備えて構成されている。
【０１５５】図２８は、ＤＶＤプレーヤ５００１のハー
ドウエア構成図である。
【０１５６】ＤＶＤプレーヤ５００１は、ＣＰＵ５１０
１と、メインメモリ５１０２と、ＤＶＤドライブ５１０
３と、動画デコーダ５１０４と、音声デコーダ５１０５
と、画像出力部５１０６と、音声出力部５１０７と、Ｒ
ＯＭ５１０８と、バス５１０９とを備えて構成されてい
る。
【０１５７】本実施例において、ＤＶＤプレーヤは、
ＤＶＤドライブ５１０３に格納されている動画データに
含まれるシーンチェンジを検出し、該動画データにシー
ンチェンジに関する情報を生成し、該シーンチェンジ情
報をメインメモリ５１０２に格納する動画シーンチェン
ジ検出処理を行う。
【０１５８】本実施例は、動画シーンチェンジ検出装置
が行う動画シーンチェンジ検出処理をソフトウエアで実
現した例である。
【０１５９】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ５１０１が、ＲＯＭ５１０８に格納されてい
るソフトウエアをメインメモリ５１０２にロードし、メ
インメモリ５１０２上で実行することによって実現され
る。
【０１６０】メインメモリ５１０２は、半導体メモリな
どの記憶媒体を用いて構成された揮発性の記憶装置であ
る。ＤＶＤドライブ５１０３は、ＤＶＤに記録されたデ
ジタル情報を読み取る、読みだし専用記憶装置である。
動画デコーダ５１０４は、ＣＰＵ５１０１から供給され
る動画データを復号して画像データを得、該画像データ
を画像出力部５１０６に供給する。音声デコーダ５１０
５は、ＣＰＵ５１０１から供給される音声データを復号
して音声データを得、該音声データを音声出力部５１０
７に供給する。画像出力部５１０６は、ＣＰＵ５１０１
あるいは動画デコーダ５１０４から供給される画像デー
タを画像信号に変換し、該画像信号をテレビジョン５０
０２に出力する。音声出力部５１０７は、ＣＰＵ５１０
１あるいは音声デコーダ５１０５から供給される音声デ
ータを音声信号に変換し、該音声信号をテレビジョン５
００２に出力する。ＲＯＭ５１０８は、半導体メモリな
どの記憶媒体を用いて構成した不揮発性の記憶装置であ
る。
【０１６１】本実施例において、動画シーンチェンジ検
出装置は、ＤＶＤドライブ５１０３に格納されている音
声付き動画データに含まれるシーンチェンジを検出し、
該音声付き動画データのシーンチェンジに関する情報を
生成し、該シーンチェンジ情報をメインメモリ５１０２
に格納する動画シーンチェンジ検出処理を行う。
【０１６２】本実施例は、動画シーンチェンジ検出装置
が行う動画シーンチェンジ検出処理をソフトウエアで実
現した例である。
【０１６３】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ５１０１が、ＲＯＭ５１０８に格納されてい
るソフトウエアをメインメモリ５１０２にロードし、メ
インメモリ５１０２上で実行することによって実現され
る。
【０１６４】以下、本発明の第四の実施例における動画
シーンチェンジ検出処理について図面を参照して説明す
る。
【０１６５】図１７は、動画シーンチェンジ検出処理の
処理手順を示すフローチャートである。
【０１６６】まず、音声付き動画データをＤＶＤドライ
ブ５１０３から入力し、該音声付き動画データを、動画
データと音声データとに分離する（ステップ１７０
１）。
【０１６７】そして、音声データに基づいてシーンチェ
ンジ検出を行う（ステップ１７０２）。
【０１６８】ステップ１７０２の音声シーンチェンジ検
出について、図１８、図１９および図２０を用いて説明
する。
【０１６９】図１８は、音声シーンチェンジ検出の処理
手順を示すフローチャートである。
【０１７０】図１９は、平均音量計算の様子を示す模式
図である。
【０１７１】図２０は、周波数成分計算の様子を示す模
式図である。
【０１７２】まず、音声データをデコードしてＰＣＭ(P
ulse Code Modulation)データを得、該ＰＣＭデータを
ハードディスク５０３に蓄積する（ステップ１８０
１）。
【０１７３】続いて、ステップ１８０１で得たＰＣＭデ
ータを再生時間帯域ごと分類し、該再生時間帯域毎に特
徴量を計算する（ステップ１８０２）。
【０１７４】特徴量としては、再生時間帯域毎の平均音
量(図１９）や、再生時間帯域毎の周波数成分(図２０）
などが考えられる。
【０１７５】そして、ステップ１８０２で得た特徴量に
基づいて、シーンチェンジを検出する（ステップ１８０
３）。
【０１７６】以下、図１９及び図２０を用いてステップ
１８０３のシーンチェンジ検出処理を説明する。
【０１７７】図１９においては、時刻Ａおよび時刻Ｂ
で、平均音量が大きく異なっている。従って、時刻Ａ及
び時刻Ｂでシーンチェンジが発生したと判定する。
【０１７８】図２０においては、再生時間帯域Ｘ、Ｙ及
びＺで、周波数成分のグラフの形がそれぞれ大きく異な
っている。従って、時刻Ａ及び時刻Ｂでシーンチェンジ
が発生したと判定する。即ち、連続する再生時間帯域の
特徴量の差分が所定の閾値以上となった場合に音声付き
動画データ中にシーンチェンジがあったと判断する。
【０１７９】図１７に戻る。
【０１８０】ステップ１７０２でシーンチェンジが検出
された場合には、ステップ１７０４を実行し、ステップ
１７０２でシーンチェンジが検出されない場合には、ス
テップ１７０５を実行する。以下、ステップ１７０４の
シーンチェンジ情報記録について、図２１を用いて説明
する。
【０１８１】図２１はシーンチェンジ情報テーブルの構
造を示す図である。
【０１８２】シーンチェンジ情報テーブルは、少なくと
もシーンチェンジが発生した音声データの先頭アドレス
と、シーンチェンジ点の再生時刻とを含む。
【０１８３】ステップ１７０４のシーンチェンジ情報記
録は、図２１のシーンチェンジ情報テーブルを作成し、
該テーブルをメインメモリ５１０２に蓄積する。
【０１８４】再び図１７に戻る。
【０１８５】終了検出ステップ１７０５では、音声デー
タの終端に達している場合にはステップ１７０２を実行
し、音声データの終端に達していない場合にはステップ
１７０２を実行する。
【０１８６】続いて、本発明の第五の実施例について説
明する。
【０１８７】第五の実施例の動画データシーンチェンジ
検出装置の構成は、第四の実施例の動画シーンチェンジ
検出装置の構成と同一である。
【０１８８】本実施例において、動画シーンチェンジ検
出装置は、ＤＶＤドライブ５１０３に格納されている音
声付き動画データに含まれるシーンチェンジを検出し、
該音声付き動画データのシーンチェンジに関する情報を
生成し、該シーンチェンジ情報をメインメモリ５１０２
に格納する動画シーンチェンジ検出処理を行う。
【０１８９】本実施例は、動画シーンチェンジ検出装置
が行う動画シーンチェンジ検出処理をソフトウエアで実
現した例である。
【０１９０】すなわち、動画シーンチェンジ検出処理
は、ＣＰＵ５１０１が、ＲＯＭ５１０８に格納されてい
るソフトウエアをメインメモリ５１０２にロードし、メ
インメモリ５１０２上で実行することによって実現され
る。
【０１９１】以下、本発明の第五の実施例における動画
シーンチェンジ検出処理について図面を参照して説明す
る。
【０１９２】図２２は、動画シーンチェンジ検出処理の
処理手順を示すフローチャートである。
【０１９３】まず、音声付き動画データをＤＶＤドライ
ブ５１０３から入力し、該音声付き動画データを、動画
データと音声データとに分離する（ステップ２２０
１）。
【０１９４】そして、第一、第二あるいは第三の実施例
において説明した動画シーンチェンジ検出処理で、動画
シーンチェンジ検出を行う（ステップ２２０２）。
【０１９５】続いて、第四の実施例において説明した処
理で、音声シーンチェンジ検出処理で、シーンチェンジ
検出を行う（ステップ２２０３）。
【０１９６】続いて、ステップ２２０４のシーンチェン
ジ点決定について、図面を用いて説明する。
【０１９７】図２３は、シーンチェンジ情報テーブルの
構造の一例を示す図である。
【０１９８】シーンチェンジ情報テーブルは、少なくと
もシーンチェンジが発生した時点の動画あるいは音声デ
ータの先頭アドレスと、シーンチェンジ点の再生時刻と
を含む。
【０１９９】ステップ２２０４では、ステップ２２０２
で得た動画のシーンチェンジ情報と、ステップ２２０３
で得た音声のシーンチェンジ情報とに基づいてシーンチ
ェンジ点を決定する。
【０２００】このとき、動画にシーンチェンジが発生し
た時刻をシーンチェンジ点とすること、あるいは、音声
にシーンチェンジが発生した時刻をシーンチェンジ点と
すること、あるいは、動画、音声共にシーンチェンジが
発生した時刻をシーンチェンジ点とすること、あるい
は、動画あるいは音声にシーンチェンジが発生した時刻
をシーンチェンジ点とすること、が可能である。
【０２０１】以上説明を行った本発明によれば、音声付
き動画データの動画データと音声データに分離し、動画
データと音声データに対してそれぞれシーンチェンジ検
出を行って動画、音声それぞれのシーンチェンジ情報を
得、該２つのシーンチェンジ情報に基づいてシーンチェ
ンジ点を検出することにより、シーンチェンジを低い処
理負荷で正確に検出することが可能である。
【０２０２】従って、以上説明してきた第一から第五の
いずれの実施例によっても、動画データあるいは音声付
き動画データに対して、シーンチェンジを低い処理負荷
で正確に検出することが可能である。
【０２０３】上記各実施例に記載のシーンチェンジ検出
装置に入力される動画データまたは音声付き動画データ
は、読み出し専用記憶装置によって読み出される動画デ
ータ、ハードディスクに格納されている動画データ、動
画コーデックが出力する動画データの何れであっても適
応できることは言うまでもなく、各実施例記載のものに
限定する趣旨ではない。
【０２０４】
【発明の効果】動画データあるいは音声付き動画データ
に対するシーンチェンジ検出を、低い処理負荷で正確に
検出することが可能である。
【図面の簡単な説明】
【図１】動画のシーンチェンジの様子を示す図である。
【図２】ＭＰＥＧ動画符号化方式による３種類のフレー
ムの符号化の様子を示す図である。
【図３】ＭＰＥＧ動画データのフレームごとのデータ量
のグラフである。
【図４】ＭＰＥＧ動画データのデータ構造を示す図であ
る。
【図５】本発明の第一の実施例におけるＰＣのハードウ
エア構成図である。
【図６】本発明の第一の実施例における動画シーンチェ
ンジ検出の処理の流れを示すフローチャートである。
【図７】本発明の第一の実施例におけるＩピクチャシー
ンチェンジ検出の処理の流れを示すフローチャートであ
る。
【図８】本発明の第一の実施例におけるＩピクチャシー
ンチェンジ検出のデータの流れを示すブロック図であ
る。
【図９】本発明の第一の実施例におけるＩピクチャシー
ンチェンジ検出のデータの流れを示すブロック図であ
る。
【図１０】本発明の第一の実施例における動画シーンチ
ェンジ情報の構造の一例を示す図である。
【図１１】本発明の第二の実施例における動画シーンチ
ェンジ検出の処理の流れを示すフローチャートである。
【図１２】本発明の第二の実施例におけるＰピクチャシ
ーンチェンジ検出の処理の流れを示すフローチャートで
ある。
【図１３】本発明の第二の実施例においてシーンチェン
ジを検出するときに使用する補助データの一例である。
【図１４】本発明の第三の実施例における動画シーンチ
ェンジ検出の処理の流れを示すフローチャートである。
【図１５】本発明の第三の実施例におけるＢピクチャシ
ーンチェンジ検出の処理の流れを示すフローチャートで
ある。
【図１６】本発明の第三の実施例においてシーンチェン
ジを検出するときに使用する補助データの一例である。
【図１７】本発明の第四の実施例における動画シーンチ
ェンジ検出の処理の流れを示すフローチャートである。
【図１８】本発明の第四の実施例における音声ピクチャ
シーンチェンジ検出の処理の流れを示すフローチャート
である。
【図１９】本発明の第四の実施例における平均音量計算
の様子を示す模式図である。
【図２０】本発明の第四の実施例における周波数成分計
算の様子を示す模式図である。
【図２１】本発明の第四の実施例における動画シーンチ
ェンジ情報の構造の一例を示す図である。
【図２２】本発明の第五の実施例における動画シーンチ
ェンジ検出の処理の流れを示すフローチャートである。
【図２３】本発明の第五の実施例におけるシーンチェン
ジ情報の構造の一例を示す図である。
【図２４】本発明の第一の実施例におけるＰＣベースＤ
ＶＤ再生システムの外観を示す図である。
【図２５】本発明の第三の実施例におけるＭＰＥＧ１符
号化システムの外観を示す図である。
【図２６】本発明の第三の実施例におけるＰＣ本体のハ
ードウエア構成図である。
【図２７】本発明の第四の実施例におけるＤＶＤ再生シ
ステムの外観を示す図である。
【図２８】本発明の第四の実施例におけるＤＶＤプレー
ヤのハードウエア構成図である。
【符号の説明】
５０１…ＣＰＵ、５０２…メインメモリ、５０３…ハー
ドディスク、５０４…ＤＶＤドライブ、５０５…動画デ
コーダ、５０６…画像出力部、５０７…音声デコーダ、
５０８…音声出力部、５０９…キーボードインタフェー
ス、５１０…バス ４１０１…ＣＰＵ、４１０２…メインメモリ、４１０３
…ハードディスク、４１０４…動画ＣＯＤＥＣ、４１０
５…画像出力部、４１０６…キーボードインタフェー
ス、４１０７…バス ５１０１…ＣＰＵ、５１０２…メインメモリ、５１０３
…ＤＶＤドライブ、５１０４…動画デコーダ、５１０５
…音声デコーダ、５１０６…画像出力部、５１０７…音
声出力部、５１０８…ＲＯＭ、５１０９…バス
───────────────────────────────────────────────────── フロントページの続き (72)発明者 田中 和明 神奈川県横浜市戸塚区戸塚町5030番地株式 会社日立製作所ソフトウェア開発本部内

Claims (24)

    【特許請求の範囲】
  1. 【請求項１】圧縮された動画データ内に含まれる他のフ
    レームとの相関関係を用いず符号化することによって生
    成されるＩ−ピクチャを検出し、 前記検出されたＩ−ピクチャのデータをデコードして１
    フレーム分の画像データを順次生成することで、複数フ
    レームの画像データをそれぞれ生成し、 前記生成された任意の第１フレームの第１の画像データ
    と、該第１のフレームと隣接する第２フレームの第２の
    画像データとの差分を算出し、 前記算出された両画像データの差分が所定の閾値以上の
    場合に、前記動画データ中にシーンチェンジがあったと
    判断することを特徴とする動画データの再生方法。
  2. 【請求項２】前記動画データ内にシーンチェンジがあっ
    た時点を、該時点のフレームの先頭アドレスと再生時刻
    とを対応付けて記憶することを特徴とする請求項１記載
    の動画データの再生方法。
  3. 【請求項３】前記検出されたＩ−ピクチャのデータをデ
    コードして各フレーム内のDC成分を順次生成することで
    複数フレームのＤＣ成分をそれぞれ生成し、 前記生成された任意の第１フレームの第１のＤＣ成分
    と、該第１のフレームと隣接する第２のフレームの第２
    のＤＣ成分との差分を算出し、 前記算出された両ＤＣ成分の差分が所定の閾値以上の場
    合に、前記動画データ中にシーンチェンジがあったと判
    断することを特徴とする請求項１記載の動画データの再
    生方法。
  4. 【請求項４】圧縮された動画データ内に含まれており、
    現フレームが過去１フレームとの相関関係を用いて符号
    化することによって生成されるＰ−ピクチャであること
    を示すピクチャタイプと、１フレーム分の画像データに
    対応するデータの開始を示す情報を含むピクチャヘッダ
    を検出し、 前記検出されたピクチャヘッダに続く１フレーム分のデ
    ータを順次デコードすることで複数フレームの画像デー
    タをそれぞれ生成し、 前記判別された現フレームのピクチャタイプが前記Ｐ−
    ピクチャである場合、該現フレームのＰ−ピクチャの画
    像データ量と、該現フレームと隣接する前フレームのＰ
    −ピクチャの画像データ量との差分を算出し、前記算出
    された両画像データ量の差分が所定の閾値以上となった
    場合に前記圧縮された動画データ中にシーンチェンジが
    あったと判断することを特徴とする動画データの再生方
    法。
  5. 【請求項５】前記動画データ内にシーンチェンジがあっ
    た時点を、該時点のフレームの先頭アドレスと再生時刻
    とを対応付けて記憶することを特徴とする請求項４記載
    の動画データの再生方法。
  6. 【請求項６】前記隣接する前フレームのＰ−ピクチャの
    画像データ量として、前記現フレームの直前の３フレー
    ム分のデータ量の平均値を用いることを特徴とする請求
    項４記載の動画データの再生方法。
  7. 【請求項７】前記所定の閾値として、前記現フレームの
    データ量が該現フレームの直前のＰ−ピクチャの３フレ
    ーム分の平均値の２倍以上となったとき前記動画データ
    中にシーンチェンジがあったと判断する請求項６記載の
    動画データの再生方法。
  8. 【請求項８】圧縮された動画データ内に含まれており、
    他のフレームとの相関関係を用いず独立のフレームとし
    て符号化することによって生成されるＩ−ピクチャであ
    るか、過去１フレームとの相関関係を用いて符号化する
    ことによって生成されるＰ−ピクチャであるかを示すピ
    クチャタイプと、１フレーム分の画像データに対応する
    データの関係を示す情報とを含むピクチャヘッダとを検
    出し、 前記検出されたピクチャヘッダに続く１フレーム分のデ
    ータを順次デコードすることで複数フレームの画像デー
    タをそれぞれ生成し、 前記検出されたピクチャヘッダに含まれるピクチャタイ
    プに基づいて現フレームのピクチャタイプを判別し、 前記判別されたピクチャタイプが前記Ｉ−ピクチャであ
    る場合、該現フレームのＩ−ピクチャの画像データと、
    該現フレームと隣接する前フレームのＩ−ピクチャの画
    像データとの差分を算出し、 前記算出された両画像データの差分が所定の閾値以上の
    場合に前記動画データ中にシーンチェンジがあった判断
    し、 一方、前記判別された現フレームのピクチャタイプが前
    記Ｐ−ピクチャである場合には、該現フレームのＰ−ピ
    クチャの画像データ量と、該現フレームと隣接する前フ
    レームのＰ−ピクチャの画像データ量との差分が所定の
    閾値以上である場合に前記動画データ中にシーンチェン
    ジがあったと判断することを特徴とする動画データの再
    生方法。
  9. 【請求項９】前記動画データ内にシーンチェンジがあっ
    た時点を、該時点のフレームの先頭アドレスと再生時刻
    とを対応付けて記憶することを特徴とする請求項８記載
    の動画データの再生方法。
  10. 【請求項１０】前記判別された現フレームのピクチャタ
    イプがＩ−ピクチャであった場合、該Ｉ−ピクチャのデ
    ータをデコードして各Ｉ−ピクチャのＤＣ成分をそれぞ
    れ生成し、 前記現フレームのＩ−ピクチャのＤＣ成分と、該現フレ
    ームと隣接する前フレームのＩ−ピクチャのＤＣ成分の
    差分を算出し、 前記算出された両ＤＣ成分の差分が所定の閾値以上の場
    合に前記動画データ中にシーンチェンジがあったと判断
    することを特徴とする請求項８記載の動画データの再生
    方法。
  11. 【請求項１１】前記判別された現フレームのピクチャタ
    イプがＰ−ピクチャである場合、前記現フレームと隣接
    する前フレームのＰ−ピクチャの画像データ量として、
    前記現フレームの直前の３フレーム分のデータ量の平均
    値を用いることを特徴とする請求項８記載の動画データ
    の再生方法。
  12. 【請求項１２】前記判別された現フレームのピクチャタ
    イプがＰ−ピクチャである場合、前記所定の閾値とし
    て、前記現フレームのデータ量が前記現フレームと隣接
    する直前のＰ−ピクチャの３フレーム分のデータ量の平
    均値の２倍以上となった場合、前記動画データ中にシー
    ンチェンジがあったと判断することを特徴とする請求項
    ８記載の動画データの再生方法。
  13. 【請求項１３】圧縮された動画データ内に含まれてお
    り、現フレームが過去及び未来の２枚のフレームとの相
    関関係を用いて符号化することによって生成されるＢ−
    ピクチャであることを示すピクチャタイプと、１フレー
    ム分の画像データに対応するデータの開始を示す情報を
    含むピクチャヘッダを検出し、 前記検出されたピクチャヘッダに続く１フレーム分のデ
    ータを順次デコードすることで複数フレームの画像デー
    タをそれぞれ生成し、 前記判別された現フレームのピクチャタイプが前記Ｂ−
    ピクチャである場合、該現フレームのＢ−ピクチャの画
    像データ量と、該現フレームと隣接する前フレームのＢ
    −ピクチャの画像データ量との差分を算出し、前記算出
    された両画像データ量の差分が所定の閾値以上となった
    場合に前記圧縮された動画データ中にシーンチェンジが
    あったと判断することを特徴とする動画データの再生方
    法。
  14. 【請求項１４】前記動画データ内にシーンチェンジがあ
    った時点を、該時点のフレームの先頭アドレスと再生時
    刻とを対応付けて記憶することを特徴とする請求項１３
    記載の動画データの再生方法。
  15. 【請求項１５】前記隣接する前フレームのＢ−ピクチャ
    の画像データ量として、前記現フレームの直前の３フレ
    ーム分のデータ量の平均値を用いることを特徴とする請
    求項１３記載の動画データの再生方法。
  16. 【請求項１６】前記所定の閾値として、前記現フレーム
    のデータ量が該現フレームの直前のＢ−ピクチャの３フ
    レーム分の平均値の４倍以上となったとき前記動画デー
    タ中にシーンチェンジがあったと判断する請求項１５記
    載の動画データの再生方法。
  17. 【請求項１７】圧縮された動画データ内に含まれてお
    り、他のフレームとの相関関係を用いず独立のフレーム
    として符号化することによって生成されるＩ−ピクチャ
    であるか、過去１フレームとの相関関係を用いて符号化
    することによって生成されるＰ−ピクチャであるか、現
    フレームが過去及び未来の２枚のフレームとの相関関係
    を用いて符号化することによって生成されるＢ−ピクチ
    ャであるかを示すピクチャタイプと、１フレーム分の画
    像データに対応するデータの関係を示す情報とを含むピ
    クチャヘッダを検出し、 前記検出されたピクチャヘッダに続く１フレーム分のデ
    ータを順次デコードすることで複数フレームの画像デー
    タをそれぞれ生成し、 前記検出されたピクチャヘッダに含まれるピクチャタイ
    プに基づいて現フレームのピクチャタイプを判別し、 前記判別されたピクチャタイプが前記Ｉ−ピクチャであ
    る場合、該現フレームのＩ−ピクチャの画像データと、
    該現フレームと隣接する前フレームのＩ−ピクチャの画
    像データとの差分を算出し、 前記算出された両画像データの差分が所定の閾値以上の
    場合に前記動画データ中にシーンチェンジがあった判断
    し、 前記判別された現フレームのピクチャタイプが前記Ｐ−
    ピクチャである場合には、該現フレームのＰ−ピクチャ
    の画像データ量と、該現フレームと隣接する前フレーム
    のＰ−ピクチャの画像データ量との差分が所定の閾値以
    上である場合に前記動画データ中にシーンチェンジがあ
    ったと判断し、 一方、前記判別された現フレームのピクチャタイプが前
    記Ｂ−ピクチャである場合、該現フレームのＢ−ピクチ
    ャの画像データ量と、該現フレームと隣接する前フレー
    ムのＢ−ピクチャの画像データ量との差分を算出し、前
    記算出された両画像データ量の差分が所定の閾値以上と
    なった場合に前記圧縮された動画データ中にシーンチェ
    ンジがあったと判断することを特徴とする動画データの
    再生方法。
  18. 【請求項１８】前記動画データ内にシーンチェンジがあ
    った時点を、該時点のフレームの先頭アドレスと再生時
    刻とを対応付けて記憶することを特徴とする請求項１７
    記載の圧縮された動画データの再生方法。
  19. 【請求項１９】前記隣接する前フレームのＢ−ピクチャ
    の画像データ量として、前記現フレームの直前の３フレ
    ーム分のデータ量の平均値を用いることを特徴とする請
    求項１７記載の動画データの再生方法。
  20. 【請求項２０】前記所定の閾値として、前記現フレーム
    のデータ量が該現フレームの直前のＢ−ピクチャの３フ
    レーム分の平均値の４倍以上となったとき前記動画デー
    タ中にシーンチェンジがあったと判断する請求項２１記
    載の動画データの再生方法。
  21. 【請求項２１】音声付き動画データから音声データと動
    画データとを分離し、該分離された音声データをデコー
    ドしてパルスコードモジュレーション（ＰＣＭ）データ
    を生成し、 前記生成されたＰＣＭデータを再生時間帯域毎に分類
    し、該分類された再生時間帯域毎に特徴量を計算し、連
    続する前記再生時間帯域において前記計算された特徴量
    の差分が所定の閾値以上の場合に前記音声付き動画デー
    タ中にシーンチェンジが合ったと判断することを特徴と
    する音声付き動画データの再生方法。
  22. 【請求項２２】前記特徴量は、前記再生時間帯域毎の平
    均音量であることを特徴とする請求項２１記載の音声付
    き動画データの再生方法。
  23. 【請求項２３】前記特徴量は、前記再生時間毎の周波数
    成分であることを特徴とする請求項２１記載の音声付き
    動画データの再生方法。
  24. 【請求項２４】音声付き圧縮された動画データの再生方
    法であって、 前記音声付き圧縮された動画データから音声データと圧
    縮された動画データとを分離し、 前記分離された音声データをデコードしてパルスコード
    モジュレーション（ＰＣＭ）データを生成し、 前記生成されたＰＣＭデータを再生時間帯域毎に分類
    し、該分類された再生時間帯域毎に特徴量を計算し、連
    続する前記再生時間帯域において前記計算された特徴量
    の差分が所定の閾値以上の場合に前記音声付き動画デー
    タ中にシーンチェンジが合ったと判断し、 前記分離された圧縮動画データ内に含まれる他のフレー
    ムとの相関関係を用いず符号化することによって生成さ
    れるＩ−ピクチャを検出し、 前記検出されたＩ−ピクチャのデータをデコードして１
    フレーム分の画像データを順次生成することで、複数フ
    レームの画像データをそれぞれ生成し、 前記生成された任意の第１フレームの第１の画像データ
    と、該第１のフレームと隣接する第２フレームの第２の
    画像データとの差分を算出し、 前記算出された両画像データの差分が所定の閾値以上の
    場合に、前記動画データ中にシーンチェンジがあったと
    判断することを特徴とする音声付き動画データの再生方
    法。
JP13618596A 1996-05-30 1996-05-30 動画データの再生方法 Pending JPH09322174A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP13618596A JPH09322174A (ja) 1996-05-30 1996-05-30 動画データの再生方法
EP19970108604 EP0810793A3 (en) 1996-05-30 1997-05-28 A method of and an apparatus for decoding video data
US08/864,913 US6094234A (en) 1996-05-30 1997-05-29 Method of and an apparatus for decoding video data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13618596A JPH09322174A (ja) 1996-05-30 1996-05-30 動画データの再生方法

Publications (1)

Publication Number Publication Date
JPH09322174A true JPH09322174A (ja) 1997-12-12

Family

ID=15169340

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13618596A Pending JPH09322174A (ja) 1996-05-30 1996-05-30 動画データの再生方法

Country Status (3)

Country Link
US (1) US6094234A (ja)
EP (1) EP0810793A3 (ja)
JP (1) JPH09322174A (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09322119A (ja) * 1996-05-30 1997-12-12 Nippon Telegr & Teleph Corp <Ntt> 符号化映像カット検出方法
JP2007528146A (ja) * 2003-07-18 2007-10-04 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ デジタルビデオストリーム中のコンテンツ項目の検出
JP2009134803A (ja) * 2007-11-29 2009-06-18 Sony Corp 情報記録装置、情報記録システムおよび情報記録方法
JP2010219929A (ja) * 2009-03-17 2010-09-30 Oki Networks Co Ltd 動画像解析装置、プログラム及び方法、並びに、動画像処理装置及び動画像配信装置
WO2010125757A1 (ja) * 2009-04-28 2010-11-04 三菱電機株式会社 映像音声再生装置、映像音声記録再生装置、映像音声再生方法、および映像音声記録再生方法
JP2014086913A (ja) * 2012-10-24 2014-05-12 Nippon Telegr & Teleph Corp <Ntt> 映像解析装置
JP2014191495A (ja) * 2013-03-26 2014-10-06 Fujitsu Ltd 動画像データ比較方法、動画像データ比較プログラム、動画像データ比較装置
JP2015502713A (ja) * 2011-11-25 2015-01-22 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ シーンカットアーチファクトを考慮するビデオ品質評価
US10917643B2 (en) 2016-08-23 2021-02-09 Huawei Technologies Co., Ltd. Method and apparatus for detecting scene change frame and system

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1132294A (ja) * 1997-07-09 1999-02-02 Sony Corp 情報検索装置および方法、並びに伝送媒体
US6697566B2 (en) * 1997-10-17 2004-02-24 Sony Corporation Encoded signal characteristic point recording apparatus
US7359619B1 (en) * 1997-12-23 2008-04-15 Intel Corporation Transmitting signals to cause replays to be recorded at a plurality of receivers
US6591058B1 (en) 1997-12-23 2003-07-08 Intel Corporation Time shifting by concurrently recording and playing a data stream
US6480667B1 (en) 1997-12-23 2002-11-12 Intel Corporation Method of time shifting to simultaneously record and play a data stream
JP2000032393A (ja) * 1998-07-09 2000-01-28 Sony Corp 画像情報処理装置および方法、並びに提供媒体
US6233389B1 (en) 1998-07-30 2001-05-15 Tivo, Inc. Multimedia time warping system
US7558472B2 (en) * 2000-08-22 2009-07-07 Tivo Inc. Multimedia signal processing system
US8577205B2 (en) 1998-07-30 2013-11-05 Tivo Inc. Digital video recording system
US6327390B1 (en) * 1999-01-14 2001-12-04 Mitsubishi Electric Research Laboratories, Inc. Methods of scene fade detection for indexing of video sequences
US6449392B1 (en) 1999-01-14 2002-09-10 Mitsubishi Electric Research Laboratories, Inc. Methods of scene change detection and fade detection for indexing of video sequences
JP3433125B2 (ja) * 1999-01-27 2003-08-04 三洋電機株式会社 動画像再生装置
AU7706500A (en) 1999-09-20 2001-04-24 Tivo, Inc. Closed caption tagging system
JP2001211310A (ja) * 2000-01-27 2001-08-03 Hitachi Ltd 画像データ操作方法およびその処理プログラムを記録した記録媒体
US6970510B1 (en) * 2000-04-25 2005-11-29 Wee Susie J Method for downstream editing of compressed video
US6973130B1 (en) 2000-04-25 2005-12-06 Wee Susie J Compressed video signal including information for independently coded regions
US7386217B2 (en) * 2001-12-14 2008-06-10 Hewlett-Packard Development Company, L.P. Indexing video by detecting speech and music in audio
US7266287B2 (en) * 2001-12-14 2007-09-04 Hewlett-Packard Development Company, L.P. Using background audio change detection for segmenting video
TW550952B (en) * 2002-02-07 2003-09-01 Ulead Systems Inc Method for detecting scene change in compressed video data
US6993182B2 (en) * 2002-03-29 2006-01-31 Koninklijke Philips Electronics N.V. Method and apparatus for detecting scene changes in video using a histogram of frame differences
US8027562B2 (en) * 2002-06-11 2011-09-27 Sanyo Electric Co., Ltd. Method and apparatus for recording images, method and apparatus for recording and reproducing images, and television receiver utilizing the same
US7558318B2 (en) * 2002-06-11 2009-07-07 Sanyo Electric Co., Ltd. Method and apparatus for processing images, method and apparatus for recording and reproducing images, and television receiver utilizing the same
US20060104601A1 (en) * 2004-11-15 2006-05-18 Ati Technologies, Inc. Method and apparatus for programming the storage of video information
US7934170B2 (en) 2004-11-19 2011-04-26 Tivo Inc. Method and apparatus for displaying branded video tags
KR100885443B1 (ko) * 2005-04-06 2009-02-24 엘지전자 주식회사 레이어간 예측방식를 사용해 엔코딩된 영상신호를디코딩하는 방법
CN101171845A (zh) * 2005-03-17 2008-04-30 Lg电子株式会社 对使用层间预测编码的视频信号进行解码的方法
JP2007208874A (ja) * 2006-02-06 2007-08-16 Nec Electronics Corp 変化点検出装置及び変化点検出方法、並びに記録装置及び記録再生装置
WO2013053385A1 (en) * 2011-10-11 2013-04-18 Telefonaktiebolaget L M Ericsson (Publ) Scene change detection for perceptual quality evaluation in video sequences
US9615131B2 (en) * 2013-08-08 2017-04-04 Honeywell International Inc. System and method of motion detection on encrypted or scrambled video data streams
CN109413427B (zh) * 2017-08-17 2022-04-08 腾讯科技（深圳）有限公司 一种视频帧编码方法及终端
US20210176475A1 (en) * 2019-12-05 2021-06-10 Mediatek Inc. Specifying Layout In Video Pictures
CN112055218B (zh) * 2020-09-15 2024-04-26 杭州萤石软件有限公司 事件上报方法、装置和系统
US11743474B2 (en) 2021-08-27 2023-08-29 Meta Platforms, Inc. Shot-change detection using container level information

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU657510B2 (en) * 1991-05-24 1995-03-16 Apple Inc. Improved image encoding/decoding method and apparatus
JP3093499B2 (ja) * 1992-03-06 2000-10-03 三菱電機株式会社 シーンチェンジ検出装置
GB9206651D0 (en) * 1992-03-26 1992-05-06 Solid State Logic Ltd Video processing
JP2611607B2 (ja) * 1992-06-29 1997-05-21 日本ビクター株式会社 シーンチェンジ検出装置
JP3315766B2 (ja) * 1992-09-07 2002-08-19 富士通株式会社 画像データ符号化方法、その方法を用いた画像データ符号化装置、画像データ復元方法、その方法を用いた画像データ復元装置、シーン変化検出方法、その方法を用いたシーン変化検出装置、シーン変化記録装置、及び画像データのシーン変化記録・再生装置
JP3036287B2 (ja) * 1992-12-15 2000-04-24 富士ゼロックス株式会社 動画像シーン検出装置
JP2518503B2 (ja) * 1993-03-08 1996-07-24 日本電気株式会社 画面切り替え検出方法
DE69422960T2 (de) * 1993-12-01 2000-06-15 Matsushita Electric Ind Co Ltd Verfahren und Vorrichtung zum Editieren oder zur Mischung von komprimierten Bildern
US5642294A (en) * 1993-12-17 1997-06-24 Nippon Telegraph And Telephone Corporation Method and apparatus for video cut detection
EP0675495B1 (en) * 1994-03-31 2002-07-24 Siemens Corporate Research, Inc. Detecting scene changes in encoded video sequences
JP3711571B2 (ja) * 1994-09-29 2005-11-02 ソニー株式会社 画像符号化装置及び画像符号化方法
JPH08275170A (ja) * 1995-03-30 1996-10-18 Canon Inc 画像処理装置
US5844607A (en) * 1996-04-03 1998-12-01 International Business Machines Corporation Method and apparatus for scene change detection in digital video compression

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09322119A (ja) * 1996-05-30 1997-12-12 Nippon Telegr & Teleph Corp <Ntt> 符号化映像カット検出方法
JP2007528146A (ja) * 2003-07-18 2007-10-04 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ デジタルビデオストリーム中のコンテンツ項目の検出
JP4795947B2 (ja) * 2003-07-18 2011-10-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ デジタルビデオストリーム中のコンテンツ項目の検出
JP2009134803A (ja) * 2007-11-29 2009-06-18 Sony Corp 情報記録装置、情報記録システムおよび情報記録方法
US8184955B2 (en) 2007-11-29 2012-05-22 Sony Corporation Information recording apparatus, information recording system, and information recording method
JP2010219929A (ja) * 2009-03-17 2010-09-30 Oki Networks Co Ltd 動画像解析装置、プログラム及び方法、並びに、動画像処理装置及び動画像配信装置
WO2010125757A1 (ja) * 2009-04-28 2010-11-04 三菱電機株式会社 映像音声再生装置、映像音声記録再生装置、映像音声再生方法、および映像音声記録再生方法
JP2015502713A (ja) * 2011-11-25 2015-01-22 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ シーンカットアーチファクトを考慮するビデオ品質評価
JP2014086913A (ja) * 2012-10-24 2014-05-12 Nippon Telegr & Teleph Corp <Ntt> 映像解析装置
JP2014191495A (ja) * 2013-03-26 2014-10-06 Fujitsu Ltd 動画像データ比較方法、動画像データ比較プログラム、動画像データ比較装置
US10917643B2 (en) 2016-08-23 2021-02-09 Huawei Technologies Co., Ltd. Method and apparatus for detecting scene change frame and system

Also Published As

Publication number Publication date
EP0810793A3 (en) 2000-11-22
US6094234A (en) 2000-07-25
EP0810793A2 (en) 1997-12-03

Similar Documents

Publication Publication Date Title
JPH09322174A (ja) 動画データの再生方法
JP3491365B2 (ja) 符号化データ復号方法および復号装置
US6363212B1 (en) Apparatus and method for encoding and decoding digital video data
JP3254924B2 (ja) データ再生方法およびデータ再生装置
US7587090B2 (en) Method and device for condensed image recording and reproduction
JP3932546B2 (ja) Ｍｐｅｇビデオ編集装置及びｍｐｅｇビデオ編集方法
JP2001084706A (ja) 動映像記録／再生装置と方法及び記録媒体
US6341192B1 (en) Decoding method and decoding player and recording medium
KR100614507B1 (ko) 인코드된 비디오 신호의 포맷화
JP3147792B2 (ja) 高速再生のためのビデオデータの復号化方法及びその装置
JP3253530B2 (ja) 動画像記録装置
US6373905B1 (en) Decoding apparatus and decoding method
US6728469B1 (en) Video signal reproduction apparatus and method
JP3258673B2 (ja) 動画像記録装置および動画像再生装置
JP4323685B2 (ja) 再生装置及び再生方法
US20040197080A1 (en) Apparatus and method for duplicating digital data
US7474841B2 (en) Image processing apparatus and its control method, and computer program and computer-readable storage medium
JP2989417B2 (ja) デジタル情報再生装置
JPH06153146A (ja) 動画像のシーンチェンジ検出装置および編集装置
JP3897783B2 (ja) 画像処理装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
JP2002218396A (ja) 情報再生装置および情報再生方法、記録媒体、並びにプログラム
JPH05128810A (ja) 動画出力システム
JP3885525B2 (ja) 符号化信号記録装置
KR100232949B1 (ko) 포토그래프 기록재생장치
JP2003101968A (ja) 再生装置