JP4253972B2 - 情報信号処理方法及び情報信号処理装置 - Google Patents
情報信号処理方法及び情報信号処理装置 Download PDFInfo
- Publication number
- JP4253972B2 JP4253972B2 JP36118299A JP36118299A JP4253972B2 JP 4253972 B2 JP4253972 B2 JP 4253972B2 JP 36118299 A JP36118299 A JP 36118299A JP 36118299 A JP36118299 A JP 36118299A JP 4253972 B2 JP4253972 B2 JP 4253972B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- predetermined
- characteristic
- audio
- video signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、情報信号処理方法及び情報信号処理装置に関するものであり、詳しくは、映像信号、音声信号などの情報信号を光磁気ディスク、ハードディスク、半導体メモリーなどの記録媒体に記録する記録装置において、例えば放送番組を記録して再生時にその番組内の指定した任意のシーンに類似したシーンを選択的に再生してスキミング動作を行い効率的に短時間で所望の内容を把握できる情報信号処理方法及び情報信号処理装置に関するものである。
【０００２】
【従来の技術】
最近では、テープ記録媒体を初めハードディスクや光磁気ディスクなどの情報記録媒体は記録容量が増大すると共に価格も低価格になり広く普及している。一方、ＭＰＥＧなどデータ圧縮方式の発展で比較的信号処理ＬＳＩも低価格になり記録再生装置も様々なものが出てきている。放送番組も様々なものがありユーザーは容易にそれらの番組を記録できるようになっている。しかし、様々な番組が容易に記録できる一方で再生する場合にそれら記録した放送番組を全て見るには時間がかかってしまうという問題がある。又、従来方式のＶＴＲやＤＶＤ装置では特殊再生機能としてフォワード方向高速再生機能等があり記録した放送番組などの概要を短時間に見ることができる。
【０００３】
【発明が解決しようとする課題】
しかしながら、上述したような従来方式の高速再生では比較的短時間で記録した放送番組の概要を把握できるものの、見たいと思うシーンが飛ばされてしまったり、再生速度が早すぎて内容が良く分からないことがある。
【０００４】
従って、以上のような観点から、ユーザーが見たいと思うシーンを選択的に容易に再生できる技術を提供することに解決しなければならない課題を有する。
【０００５】
【課題を解決するための手段】
上記課題を解決するために、本願発明に係る情報信号処理方法及び情報信号処理装置は下記のようにすることである。
【０００６】
（１） 所定の映像信号及び／又は音声信号を入力し、該入力した映像信号及び／又は音声信号の中から所定の第１の特性信号を検出し、上記入力した映像信号及び／又は音声信号の中から所定の時点を指定し、上記指定された時点を含む所定区間の映像信号及び／又は音声信号の中から所定の第２の特性信号を検出し、上記第１の特性信号と上記第２の特性信号とを所定の演算処理に基づいて比較判別処理しその結果に応じて識別信号を生成し、生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生することを特徴とする情報信号処理方法。
（２） 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録することを特徴とする（１）に記載の情報信号処理方法。
（３） 上記第１の特性信号と上記第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成することを特徴とする（１）に記載の情報信号処理方法。
上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（１）に記載の情報信号処理方法。
【０００７】
（５） 所定の映像信号及び／又は音声信号を入力する入力手段と、該入力手段からの映像信号及び／又は音声信号の所定の第１の特性信号を検出する第１の特性検出手段と、上記入力手段からの映像信号及び／又は音声信号において所定の時点を指定する指定手段と、該指定手段で指定された時点を含む所定区間の映像信号及び／又は音声信号の所定の第２の特性信号を検出する第２の特性検出手段と、上記第１の特性検出手段で検出した第１の特性信号と上記第２の特性検出手段で検出される所定区間の第２の特性信号とを所定の比較判別処理する判別処理手段と、該判別処理手段に基づく結果に応じて識別信号を生成する手段と、上記識別信号を生成する手段に基づき生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生する再生手段と、を備えたことを特徴とする情報信号処理装置。
（６） 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録することを特徴とする（５）に記載の情報信号処理装置。
（７） 上記第１の特性検出手段及び上記第２の特性検出手段で検出する第１の特性信号及び第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成することを特徴とする（５）に記載の情報信号処理装置。
上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（５）に記載の情報信号処理装置。
（８） 上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（５）に記載の情報信号処理装置。
【０００９】
このように、情報信号再生方法及び情報信号再生装置は、映像音声信号など放送番組の情報信号を入力手段から入力し、その入力信号を例えば、ＦＦＴ（高速フーリエ変換）解析やＤＣＴ（離散コサイン変換）解析や所定のウェーブレット解析などで周波数解析して所定の第１の特性信号を第１の特性検出手段で検出する。上記の入力手段からの情報信号において所定の時点を指定手段で指定してその指定手段で指定された時点を含む所定区間の情報信号の所定の第２の特性信号を第２の特性検出手段で検出する。これら第１の特性信号と第２の特性信号との２乗誤差又は相関関数などを求め、それにより類似性を所定の判別手段で判別して識別信号を付与することができる。
【００１１】
【発明の実施の形態】
次に、本発明に係る情報信号再生方法及び情報信号再生装置の実施の形態について図面を用いて以下の順序に従って説明する。
［１］本発明の概要及び原理
［２］本発明の情報信号処理装置ブロック構成図
［３］本発明の特性信号検出方法
［４］本発明の情報信号処理方法動作フローチャート
【００１２】
［１］本発明の概要及び原理
本発明は、入力映像信号の所望の時点を指定しその時点を含む所定の区間のシーンの映像信号、音声信号を周波数領域で解析し所定の特性信号（第２の特性信号）を検出する。逐次入力される映像信号、音声信号を同様に周波数領域で解析し所定の特性信号（第１の特性信号）を検出する。ここで、特性信号としては、放送番組等の情報信号に代替えできる実時間領域以外の信号であり、ＦＦＴ（高速フーリエ変換）解析やＤＣＴ（離散コサイン変換）解析やウェーブレット解析などの係数である。このような係数を特性信号とすると実時間領域でのデータ量に比較してデータ量が少ないので信号処理時間、演算時間が少なくなり効率的である。検出された各々の特性信号の類似性を例えば相互相関関数や最小２乗誤差により求めることで、指定した時点のシーンと類似するシーンを検出していく。そのように類似シーンが検出されたら識別信号を生成し映像信号、音声信号が記録されるハードディスクや光磁気ディスクや半導体メモリーなどの記録媒体の所定の記録領域に記録する。再生時にその識別信号を検出してその場所を再生すれば始めに指定した時点のシーンと類似したシーンを選択的に再生できる。
【００１３】
図１は本発明の動作説明図である。この図１（ａ）はある放送番組のシーン（フレームまたはフィールド）を時系列的に並べたものである。例えば、ユーザーが野球の放送番組を見ながらハードディスクや光磁気ディスクなどの記録媒体に録画をすることを考える。ユーザーは少しの間、例えば５分くらい見ながら記録し、後は見ないで記録してもよい。
【００１４】
例えば、ユーザーは後で再生したときにバッターの打撃シーンだけをダイジェスト再生したいとすると、丁度そのシーンがｆ１の区間であったとすると、図１（ｂ）のようにユーザーはその区間のシーン３を見ているときにその時点を指定するボタンを押してシステムコントローラーに指定する。各所定区間ｆ１、ｆ２、ｆ３−−−−−の特性信号は図１（ｃ）のように逐次求める。
【００１５】
指定した時点を含む所定区間ｆ１の特性信号ｐ１はメモリーなどの記憶手段に一時貯えておき、後で演算を行う時に読み出す。ユーザーが指定したシーン以降の所定区間毎の特性信号は図１（ｃ）に示すようにｐ２、ｐ３、ｐ４、−−−−−−ｐｎ＋１、ｐｎ＋２−−−−−とする。そこで指定したシーン区間の特性信号ｐ１とｐ２、ｐ３、ｐ４、−−−−ｐｎ、ｐｎ＋１、ｐｎ＋２−−−−との相互相関関数を演算する。例えば、ｐ３とｐｎ＋１で、しきい値として設定した所定の値以上の相関性が検出されれば、図１（ｆ）のように、その区間ｆ３、ｆｍ＋１で識別信号ＩＤ１を生成する。
【００１６】
次に、ユーザーがこの野球の放送番組のｆ１区間とは別のシーン例えば、選手の走塁シーンｆｍの区間におけるｎの時点でシステムコントローラーに指定したとする。上記と同様に指定した時点を含む所定区間ｆｍの特性信号Ｐｎ＋１とそれ以降の特性信号ｐｎ＋２、ｐｎ＋３、−−−−−−との相互相関関数を演算する。ｐｎ＋１とｐｎ＋４で相関性が検出されれば、図１（ｆ）に示すように前記した識別信号ＩＤ１とは別の識別信号ＩＤ２を生成する。
【００１７】
ここで指定は複数行っても良いが、指定数があまり多くなると本発明の目的の一つであるダイジェスト再生が効率的でなくなるので、指定数を制限しても良い。例えば記録時間が１０分くらいなのに２０分も３０分も指定しては効率的な動作を行うことが困難になる可能性があるので、例えば図２に示す特性図のように記録時間に応じて指定数の上限を設定しても良い。
【００１８】
ここで、図３は所定区間処理方法の概念説明図である。例えば、ある一連の画像系列１、２、３、４、−−−−−−を見ていて画像系列９を指定したいと思ってシステムコントローラーにコマンドを送ることを考えるとユーザーが指定した時点ではすでに時間ｔが経過しており図３の画像系列１２を指定することがある。また、ある放送番組などを見ている瞬間はそうは思わないが、数秒経ってから指定したいと思うことも考えられる。
【００１９】
そこで、図３に示すように、例えば、本当に指定したい時点である画像系列９と指定時点である画像系列１２を含む、指定時点に対して後方向区間ｔｂと前方向区間ｔｆの前後の区間の画像系列６〜１４を所定の区間とすることで見たいと思うシーンを見逃すことを防ぐことができる。ここで所定区間があまり長いと冗長度が多くなるので、ｔｂ、ｔｆともおおよそ２分以下とする。
【００２０】
以上のように識別信号を生成しこれを、所定の映像音声データと記録し再生時に各々の識別信号を検出しその区間を再生すれば、例えば、野球の打撃シーンを含む所定の区間の場面シーンだけ、打者の走塁シーンを含む所定の区間の場面シーンだけ、あるいは、打撃シーンと走塁シーンの両方を含む所定の区間の場面シーンだけを再生できるので、効率的にしかも効果的なスキミングやダイジェスト再生を行うことができる。
【００２１】
［２］本発明の情報信号処理装置ブロック構成図
図４は本発明の情報信号処理装置ブロック構成図の一例である。入力した映像信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理して映像信号処理系２に入力する映像信号Ａ／Ｄ系１と、この映像信号Ａ／Ｄ系１で生成された映像データ信号をＭＰＥＧなどの所定のデータ圧縮処理をする映像信号処理系２と、この圧縮した映像データ信号を蓄積記憶するメモリー系３と、映像信号処理系２により得られた信号を入力し、後で説明する処理（［３］本発明の特性信号検出比較方法）により映像信号の特性信号を検出する映像信号特性解析系４と、この検出した特性信号を蓄積するメモリー系５と、入力した音声信号を所定のサンプリング周波数および量子化ビット数でＡ／Ｄ変換処理する音声信号Ａ／Ｄ系６と、この音声信号Ａ／Ｄ系６で生成された音声データ信号をＭＰＥＧなど所定のデータ圧縮処理をする音声信号処理系７と、このデータ圧縮された音声データ信号を蓄積記憶するメモリー系８と、音声信号処理系７における信号を入力し、後で説明する処理（［３］本発明の特性信号検出比較方法）により音声信号の特性信号を検出する音声信号特性解析系９と、この検出された特性信号を蓄積するメモリー系１０と、ユーザが指定した時点を含む所定区間の映像信号又は音声信号とメモリー系５又はメモリー系１０をアクセスして逐次入力する映像信号又は音声信号の特性信号との相関性をそれぞれ検出し、相関性が所定のしきい値以上であるかどうかの結果を出す特性信号相関処理系１１と、ユーザが指定するシーンの入力及び特性信号の結果を入力すると共に記録媒体駆動系１８を制御するシステムコントローラー１２と、映像信号及び音声信号を出力する映像音声モニター系１３と、システムコントローラー１２からの制御信号によりユーザーが指定した時点を含む所定の区間のシーンと類似したシーンの所定区間内の類似シーンで識別信号を生成する識別信号生成系１４と、映像信号処理系２により圧縮された映像データ信号及び音声信号処理系７により圧縮された音声データ信号及び識別信号生成系１４により生成された識別信号を入力し所定の信号処理を施すデータマルチプレックス系１５と、所定の誤り訂正符号付加や記録変調方式の処理や所定の記録レベルになるように信号処理がなされる記録信号処理系１６と、ハードディスクや光磁気ディスク等で構成されている記録媒体系１７と、この記録媒体系１７をシステムコントローラー１２の制御により駆動制御する記録媒体駆動系１８とから構成されている。
【００２２】
次に、このような構成からなる情報信号処理装置におけるデータの流れについて説明する。先ず、映像信号Ａ／Ｄ系１では入力した映像信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理され、映像信号処理系２に入力する。音声信号Ａ／Ｄ系６では入力した音声信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理され、音声信号処理系７に入力する。
【００２３】
映像信号処理系２及びメモリー系３により映像データ信号はＭＰＥＧなど所定のデータ圧縮処理がなされる。又、映像信号処理系２における信号は、映像信号特性解析系４に入力し、後で説明する処理（［３］本発明の特性信号比較検出方法）により映像信号の特性信号を検出する。ユーザーが指定した所望の時点を含む所定区間の検出された映像信号特性解析系４からの特性信号はメモリー系５に記憶され所定の読み出し時点毎に特性信号相関処理系１６に入力する。入力映像信号は逐次映像信号特性解析系４に入力し特性検出され、検出された入力映像信号の特性信号は特性信号相関処理系１１に入力する。
【００２４】
音声信号は音声信号処理系７及びメモリー系８によりＭＰＥＧオーディオなど所定の圧縮処理がなされる。又、音声信号処理系７における信号は音声信号特性解析系９に入力し、後で説明する処理（［３］本発明の特性信号比較検出方法）により音声信号の特性信号を検出する。ユーザーが指定した所望の時点を含む所定区間の検出された音声信号特性解析系９からの特性信号はメモリー系１０に記憶され、所定の読み出し時点毎に特性信号相関処理系１１に入力する。
【００２５】
特性信号相関処理系１１では、上記で述べたようにユーザーが指定した時点を含む所定区間の映像信号又は音声信号の特性信号と逐次入力する映像信号又は音声信号の特性信号との相関性を各々検出し、相関性が所定のしきい値以上であるかどうかの結果をシステムコントローラー１２に入力する。
【００２６】
識別信号生成系１４では、システムコントローラー１２からの制御信号によりユーザーが指定した時点を含み所定の区間のシーンと類似したシーンの所定区間内の時点で識別信号を生成する。ここで、識別信号の生成は、例えば、所定の記録データのヘッダ位置に設けられた識別データ（ＩＤデータ）を設定するものとする。
【００２７】
例えば、ＩＤデータが４ビット設けられている場合は１５通りのシーンを指定でき、ＩＤデータを（ｄ０，ｄ１，ｄ２，ｄ３）とすると以下のように設定する。
【００２８】
【表１】
（ＩＤデータ設定の一例）
【００２９】
【表２】
（ヘッダデータ配置の概念図）
【００３０】
生成された識別信号生成系１４からの識別信号と、所定の映像圧縮信号処理がなされた映像信号処理系２からの映像データ信号と、所定の音声圧縮信号処理がなされた音声信号処理系７からの音声データ信号はデータマルチプレックス系１５に入力し所定のデータ構成になるように所定の信号処理がなされる。
【００３１】
所定のデータマルチプレックス処理がなされたデータは記録信号処理系１６に入力し所定の誤り訂正符号付加や後の記録媒体の記録に適した記録変調方式の処理や所定の記録レベルになるように信号処理がなされハードディスクや光磁気ディスクなどの記録媒体系１７に所定の記録レートで記録される。システムコントローラー１２からの制御信号は記録媒体駆動系１８に入力し記録媒体系１７の動作を制御する。
【００３２】
［３］本発明の特性信号検出比較方法
ここではＦＦＴ解析、ＤＣＴ解析、ウェーブレット解析などで特性信号を検出する。例えば、指定区間の信号ｆ（ｔ）をＦＦＴ解析によりＦ（ω）に解析されたとし、指定区間以外の所定区間ｎの信号をｆｎ（ｔ）がＦＦＴ解析によりＦｎ（ω）と解析されたとする。ここで、下記数１に示す、所定区間内でＦ（ω）とＦｎ（ω）との２乗誤差信号Ｇｎを考える。
【００３３】
【数１】
【００３４】
次に、下記数２に示す、上記数１で得られた値と所定のしきい値Ｐｔｈとを比較し、所定の類似性が認められるかを判定する。
【００３５】
【数２】
【００３６】
これらの信号解析は映像信号については輝度信号と色信号について行うが、場合によっては輝度信号のみについて行っても良い。又、音声信号についても行い、映像信号の演算結果と総合的に判定しても良い。上記で述べたように、ＦＦＴ解析の他にＤＣＴ解析を用いても良く、この場合に映像信号はＭＰＥＧエンコード処理に伴って行っても良い。
【００３７】
又、ウェーブレット解析を用いた場合について考える。指定区間の信号ｆ（ｔ）が、解析レベルｋでＣｋ（ｘ）と解析され、指定区間以外の所定区間の信号ｆｎ（ｔ）が同様に解析レベルｋでＣｎｋ（ｘ）と解析される。ここで、数３に示す、２乗誤差信号Ｒｎｋを考える。
【００３８】
【数３】
【００３９】
上記数３により得られた値と所定のしきい値との比較処理を行うが、エネルギーの大きな解析レベルを選択してこのレベルだけについて比較処理しても良い。
【００４０】
誤差信号演算は、全ての解析レベルについて行っても良く、その場合は、数４に示す、全ての解析レベルの誤差演算の値を加算する。
【００４１】
【数４】
【００４２】
次に、数５に示す、上記数４により得られた値と所定のしきい値Ｑｔｈと比較し、所定の類似性が認められるかを判定する。
【００４３】
【数５】
【００４４】
例えば、映像信号については演算処理が容易なようにウェーブレット関数はＨａａｒ（ハール）ウェーブレットが考えられるがその他のウェーブレット関数を用いても良い。
【００４５】
ここで上記で述べたような２乗誤差関数の他に相関関数を求めることも考えられる。例えば、下記の数６に示す、ＦＦＴ解析又はＤＣＴ解析によるＦ（ω）とＦｎ（ω）の相互相関関数ｍ（ω，ω＋τ）を考える。Ｔは所定区間とする。
【００４６】
【数６】
【００４７】
ここで、更にτを時間変数とみなしてＦＦＴ解析を行いＭ（ω）が求められたとする。
【００４８】
所定の相関性が検出されればこのＭ（ω）にはスペクトルピークが認められるので、下記の数７により、所定のしきい値Ｎｔｈを設定しスペクトルピーク値Ｍ（ωｐｋ）を比較する。
【００４９】
【数７】
【００５０】
又、上記で述べたようなウェーブレット解析についても相関関数処理を行うことも考えられる。下記の数８に示す、Ｃｋ（ｘ）とＣｎｋ（ｘ）について相互相関関数Ｈ（ω，ω＋τ）を考える。
【００５１】
【数８】
【００５２】
ここでＦＦＴ解析を考えてＮｋ（ω）が求められたとすると、所定の相関性が検出されればスペクトルピークＮｋ（ωｐｋ）が認められる。下記の数９に示すように、所定のしきい値Ｓｔｈを設定し解析レベルｋでの差信号Ｗｋを求める。
【００５３】
【数９】
【００５４】
ここで、解析レベルの内でエネルギーの一番大きな解析レベルだけに着目して所定のしきい値と比較しても良いが、ここでは、下記の数１０に示すように、全ての解析レベルについて考えて差信号Ｗａｌｌを求める。
【００５５】
【数１０】
【００５６】
次に、下記の数１１に示すように、上記数１０により得られた値と所定のしきい値Ｅｔｈと比較する。
【００５７】
【数１１】
【００５８】
以上のように解析比較処理を行うことができるのである。
【００５９】
［４］本発明の情報信号処理方法動作フローチャート
図５は、本発明の動作フローチャートの一例である。ステップＳＴ１からスタートし指定数ｎと所定区間検出数ｍの初期値を０に設定する。ステップＳＴ３で所定区間を検出し、ステップＳＴ４で所定の特性を検出する。ステップＳＴ５では所定区間の検出回数ｍを１インクリメントし、ステップＳＴ６で指定が行われたかが判定される。
【００６０】
指定が行われたと判定された場合は、ステップＳＴ７に移行し所定区間検出回数が２以上かが判定される。これは検出回数が１の場合は指定区間と同一になってしまうのでこれを避けるためである。ステップＳＴ６で指定が行われていないと判定された場合は、ステップＳＴ８に移行しそれ以前に指定がされているかどうかが判定され、指定されている場合はステップＳＴ１３に移行し相関処理に移り、指定がされていない場合はステップＳＴ２１にジャンプする。
【００６１】
ステップＳＴ９で所定の回数ｎ１以下かが判定される。これは指定数が多すぎると処理に時間がかかり過ぎるためと、指定数が多いと本発明の目的の一つであるダイジェスト再生あるいはスキミング動作が良好に行えない可能性が出てくるためである。所定回数ｎ１より大きい場合は、ステップＳＴ１２で表示又は音声などでユーザーに警告を行い、ステップＳＴ２１に移行する。
【００６２】
ステップＳＴ９で指定数が所定以下であると判定された場合は、ステップＳＴ１０で指定数ｎを１インクリメントしてステップＳＴ１１に移行し検出された所定の特性データをＲＡＭなどの所定のメモリーに記憶する。ステップＳＴ１３では後でループ処理を行うため指定数ｎを別の変数Ｋに代入し、ステップＳＴ１４で所定の相関演算を行う。ステップＳＴ１５で相関値が所定のしきい値と比較され所定の相関性が検出され類似性があると検出された場合は、ステップＳＴ１６で所定の識別データが設定され、ステップＳＴ１７でデータマルチプレックス処理に移行する。ステップＳＴ１５で所定の相関性が検出されない場合は、ステップＳＴ１７にジャンプし識別データを設定せずに処理を行う。
【００６３】
ステップＳＴ１７で所定のデータマルチプレックス処理されたデータは、ステップＳＴ１８で変調などの記録に伴う所定の処理を行い所定のタイミングでデータが記録される。ステップＳＴ１９ではループ処理を行うため所定区間検出数ｍを再度別の変数Ｌに代入し、指定数の変数Ｋを１ディクリメントする。
【００６４】
ステップＳＴ２０ではディクリメントされた指定数の変数Ｋが０かが判定され所定の相関処理が全て終了されたかが判定される。所定の処理が全て終了したと判定された場合は、ステップＳＴ２１に移行し停止か否かが判定され、停止の場合はステップＳＴ２２で停止し、停止しない場合はステップＳＴ３にジャンプし以上の処理ルーチンを繰り返す。
【００６５】
【発明の効果】
以上説明したように、本発明により長時間記録した野球や相撲などのスポーツ番組で打撃シーン出塁シーンや取り組みシーンなどユーザーが指定したシーンだけを識別信号を使用して選択的に再生することができる。これにより長時間記録した放送番組を効率的に短時間でスキミングやダイジェスト再生することができ効果的に内容を把握することができるという効果がある。
【図面の簡単な説明】
【図１】本発明の動作原理図である。
【図２】記録時間と設定可能指定数の特性図の一例である。
【図３】所定区間処理方法の概念説明図である。
【図４】本発明の情報信号処理装置ブロック構成図の一例である。
【図５】本発明の動作フローチャートの一例である。
【符号の説明】
１：映像信号Ａ／Ｄ系、２：映像信号処理系、３：メモリー系、４：映像信号特性解析系、５：メモリー系、６：音声信号Ａ／Ｄ系、７：音声信号処理系、８：メモリー系、９：音声信号特性解析系、１０：メモリー系、１１：特性信号相関処理系、１２：システムコントローラー、１３：映像音声モニター系、１４：識別信号生成系、１５：データマルチプレックス系、１６：記録信号処理系、１７：記録媒体系、１８：記録媒体駆動系
【発明の属する技術分野】
本発明は、情報信号処理方法及び情報信号処理装置に関するものであり、詳しくは、映像信号、音声信号などの情報信号を光磁気ディスク、ハードディスク、半導体メモリーなどの記録媒体に記録する記録装置において、例えば放送番組を記録して再生時にその番組内の指定した任意のシーンに類似したシーンを選択的に再生してスキミング動作を行い効率的に短時間で所望の内容を把握できる情報信号処理方法及び情報信号処理装置に関するものである。
【０００２】
【従来の技術】
最近では、テープ記録媒体を初めハードディスクや光磁気ディスクなどの情報記録媒体は記録容量が増大すると共に価格も低価格になり広く普及している。一方、ＭＰＥＧなどデータ圧縮方式の発展で比較的信号処理ＬＳＩも低価格になり記録再生装置も様々なものが出てきている。放送番組も様々なものがありユーザーは容易にそれらの番組を記録できるようになっている。しかし、様々な番組が容易に記録できる一方で再生する場合にそれら記録した放送番組を全て見るには時間がかかってしまうという問題がある。又、従来方式のＶＴＲやＤＶＤ装置では特殊再生機能としてフォワード方向高速再生機能等があり記録した放送番組などの概要を短時間に見ることができる。
【０００３】
【発明が解決しようとする課題】
しかしながら、上述したような従来方式の高速再生では比較的短時間で記録した放送番組の概要を把握できるものの、見たいと思うシーンが飛ばされてしまったり、再生速度が早すぎて内容が良く分からないことがある。
【０００４】
従って、以上のような観点から、ユーザーが見たいと思うシーンを選択的に容易に再生できる技術を提供することに解決しなければならない課題を有する。
【０００５】
【課題を解決するための手段】
上記課題を解決するために、本願発明に係る情報信号処理方法及び情報信号処理装置は下記のようにすることである。
【０００６】
（１） 所定の映像信号及び／又は音声信号を入力し、該入力した映像信号及び／又は音声信号の中から所定の第１の特性信号を検出し、上記入力した映像信号及び／又は音声信号の中から所定の時点を指定し、上記指定された時点を含む所定区間の映像信号及び／又は音声信号の中から所定の第２の特性信号を検出し、上記第１の特性信号と上記第２の特性信号とを所定の演算処理に基づいて比較判別処理しその結果に応じて識別信号を生成し、生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生することを特徴とする情報信号処理方法。
（２） 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録することを特徴とする（１）に記載の情報信号処理方法。
（３） 上記第１の特性信号と上記第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成することを特徴とする（１）に記載の情報信号処理方法。
上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（１）に記載の情報信号処理方法。
【０００７】
（５） 所定の映像信号及び／又は音声信号を入力する入力手段と、該入力手段からの映像信号及び／又は音声信号の所定の第１の特性信号を検出する第１の特性検出手段と、上記入力手段からの映像信号及び／又は音声信号において所定の時点を指定する指定手段と、該指定手段で指定された時点を含む所定区間の映像信号及び／又は音声信号の所定の第２の特性信号を検出する第２の特性検出手段と、上記第１の特性検出手段で検出した第１の特性信号と上記第２の特性検出手段で検出される所定区間の第２の特性信号とを所定の比較判別処理する判別処理手段と、該判別処理手段に基づく結果に応じて識別信号を生成する手段と、上記識別信号を生成する手段に基づき生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生する再生手段と、を備えたことを特徴とする情報信号処理装置。
（６） 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録することを特徴とする（５）に記載の情報信号処理装置。
（７） 上記第１の特性検出手段及び上記第２の特性検出手段で検出する第１の特性信号及び第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成することを特徴とする（５）に記載の情報信号処理装置。
上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（５）に記載の情報信号処理装置。
（８） 上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする（５）に記載の情報信号処理装置。
【０００９】
このように、情報信号再生方法及び情報信号再生装置は、映像音声信号など放送番組の情報信号を入力手段から入力し、その入力信号を例えば、ＦＦＴ（高速フーリエ変換）解析やＤＣＴ（離散コサイン変換）解析や所定のウェーブレット解析などで周波数解析して所定の第１の特性信号を第１の特性検出手段で検出する。上記の入力手段からの情報信号において所定の時点を指定手段で指定してその指定手段で指定された時点を含む所定区間の情報信号の所定の第２の特性信号を第２の特性検出手段で検出する。これら第１の特性信号と第２の特性信号との２乗誤差又は相関関数などを求め、それにより類似性を所定の判別手段で判別して識別信号を付与することができる。
【００１１】
【発明の実施の形態】
次に、本発明に係る情報信号再生方法及び情報信号再生装置の実施の形態について図面を用いて以下の順序に従って説明する。
［１］本発明の概要及び原理
［２］本発明の情報信号処理装置ブロック構成図
［３］本発明の特性信号検出方法
［４］本発明の情報信号処理方法動作フローチャート
【００１２】
［１］本発明の概要及び原理
本発明は、入力映像信号の所望の時点を指定しその時点を含む所定の区間のシーンの映像信号、音声信号を周波数領域で解析し所定の特性信号（第２の特性信号）を検出する。逐次入力される映像信号、音声信号を同様に周波数領域で解析し所定の特性信号（第１の特性信号）を検出する。ここで、特性信号としては、放送番組等の情報信号に代替えできる実時間領域以外の信号であり、ＦＦＴ（高速フーリエ変換）解析やＤＣＴ（離散コサイン変換）解析やウェーブレット解析などの係数である。このような係数を特性信号とすると実時間領域でのデータ量に比較してデータ量が少ないので信号処理時間、演算時間が少なくなり効率的である。検出された各々の特性信号の類似性を例えば相互相関関数や最小２乗誤差により求めることで、指定した時点のシーンと類似するシーンを検出していく。そのように類似シーンが検出されたら識別信号を生成し映像信号、音声信号が記録されるハードディスクや光磁気ディスクや半導体メモリーなどの記録媒体の所定の記録領域に記録する。再生時にその識別信号を検出してその場所を再生すれば始めに指定した時点のシーンと類似したシーンを選択的に再生できる。
【００１３】
図１は本発明の動作説明図である。この図１（ａ）はある放送番組のシーン（フレームまたはフィールド）を時系列的に並べたものである。例えば、ユーザーが野球の放送番組を見ながらハードディスクや光磁気ディスクなどの記録媒体に録画をすることを考える。ユーザーは少しの間、例えば５分くらい見ながら記録し、後は見ないで記録してもよい。
【００１４】
例えば、ユーザーは後で再生したときにバッターの打撃シーンだけをダイジェスト再生したいとすると、丁度そのシーンがｆ１の区間であったとすると、図１（ｂ）のようにユーザーはその区間のシーン３を見ているときにその時点を指定するボタンを押してシステムコントローラーに指定する。各所定区間ｆ１、ｆ２、ｆ３−−−−−の特性信号は図１（ｃ）のように逐次求める。
【００１５】
指定した時点を含む所定区間ｆ１の特性信号ｐ１はメモリーなどの記憶手段に一時貯えておき、後で演算を行う時に読み出す。ユーザーが指定したシーン以降の所定区間毎の特性信号は図１（ｃ）に示すようにｐ２、ｐ３、ｐ４、−−−−−−ｐｎ＋１、ｐｎ＋２−−−−−とする。そこで指定したシーン区間の特性信号ｐ１とｐ２、ｐ３、ｐ４、−−−−ｐｎ、ｐｎ＋１、ｐｎ＋２−−−−との相互相関関数を演算する。例えば、ｐ３とｐｎ＋１で、しきい値として設定した所定の値以上の相関性が検出されれば、図１（ｆ）のように、その区間ｆ３、ｆｍ＋１で識別信号ＩＤ１を生成する。
【００１６】
次に、ユーザーがこの野球の放送番組のｆ１区間とは別のシーン例えば、選手の走塁シーンｆｍの区間におけるｎの時点でシステムコントローラーに指定したとする。上記と同様に指定した時点を含む所定区間ｆｍの特性信号Ｐｎ＋１とそれ以降の特性信号ｐｎ＋２、ｐｎ＋３、−−−−−−との相互相関関数を演算する。ｐｎ＋１とｐｎ＋４で相関性が検出されれば、図１（ｆ）に示すように前記した識別信号ＩＤ１とは別の識別信号ＩＤ２を生成する。
【００１７】
ここで指定は複数行っても良いが、指定数があまり多くなると本発明の目的の一つであるダイジェスト再生が効率的でなくなるので、指定数を制限しても良い。例えば記録時間が１０分くらいなのに２０分も３０分も指定しては効率的な動作を行うことが困難になる可能性があるので、例えば図２に示す特性図のように記録時間に応じて指定数の上限を設定しても良い。
【００１８】
ここで、図３は所定区間処理方法の概念説明図である。例えば、ある一連の画像系列１、２、３、４、−−−−−−を見ていて画像系列９を指定したいと思ってシステムコントローラーにコマンドを送ることを考えるとユーザーが指定した時点ではすでに時間ｔが経過しており図３の画像系列１２を指定することがある。また、ある放送番組などを見ている瞬間はそうは思わないが、数秒経ってから指定したいと思うことも考えられる。
【００１９】
そこで、図３に示すように、例えば、本当に指定したい時点である画像系列９と指定時点である画像系列１２を含む、指定時点に対して後方向区間ｔｂと前方向区間ｔｆの前後の区間の画像系列６〜１４を所定の区間とすることで見たいと思うシーンを見逃すことを防ぐことができる。ここで所定区間があまり長いと冗長度が多くなるので、ｔｂ、ｔｆともおおよそ２分以下とする。
【００２０】
以上のように識別信号を生成しこれを、所定の映像音声データと記録し再生時に各々の識別信号を検出しその区間を再生すれば、例えば、野球の打撃シーンを含む所定の区間の場面シーンだけ、打者の走塁シーンを含む所定の区間の場面シーンだけ、あるいは、打撃シーンと走塁シーンの両方を含む所定の区間の場面シーンだけを再生できるので、効率的にしかも効果的なスキミングやダイジェスト再生を行うことができる。
【００２１】
［２］本発明の情報信号処理装置ブロック構成図
図４は本発明の情報信号処理装置ブロック構成図の一例である。入力した映像信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理して映像信号処理系２に入力する映像信号Ａ／Ｄ系１と、この映像信号Ａ／Ｄ系１で生成された映像データ信号をＭＰＥＧなどの所定のデータ圧縮処理をする映像信号処理系２と、この圧縮した映像データ信号を蓄積記憶するメモリー系３と、映像信号処理系２により得られた信号を入力し、後で説明する処理（［３］本発明の特性信号検出比較方法）により映像信号の特性信号を検出する映像信号特性解析系４と、この検出した特性信号を蓄積するメモリー系５と、入力した音声信号を所定のサンプリング周波数および量子化ビット数でＡ／Ｄ変換処理する音声信号Ａ／Ｄ系６と、この音声信号Ａ／Ｄ系６で生成された音声データ信号をＭＰＥＧなど所定のデータ圧縮処理をする音声信号処理系７と、このデータ圧縮された音声データ信号を蓄積記憶するメモリー系８と、音声信号処理系７における信号を入力し、後で説明する処理（［３］本発明の特性信号検出比較方法）により音声信号の特性信号を検出する音声信号特性解析系９と、この検出された特性信号を蓄積するメモリー系１０と、ユーザが指定した時点を含む所定区間の映像信号又は音声信号とメモリー系５又はメモリー系１０をアクセスして逐次入力する映像信号又は音声信号の特性信号との相関性をそれぞれ検出し、相関性が所定のしきい値以上であるかどうかの結果を出す特性信号相関処理系１１と、ユーザが指定するシーンの入力及び特性信号の結果を入力すると共に記録媒体駆動系１８を制御するシステムコントローラー１２と、映像信号及び音声信号を出力する映像音声モニター系１３と、システムコントローラー１２からの制御信号によりユーザーが指定した時点を含む所定の区間のシーンと類似したシーンの所定区間内の類似シーンで識別信号を生成する識別信号生成系１４と、映像信号処理系２により圧縮された映像データ信号及び音声信号処理系７により圧縮された音声データ信号及び識別信号生成系１４により生成された識別信号を入力し所定の信号処理を施すデータマルチプレックス系１５と、所定の誤り訂正符号付加や記録変調方式の処理や所定の記録レベルになるように信号処理がなされる記録信号処理系１６と、ハードディスクや光磁気ディスク等で構成されている記録媒体系１７と、この記録媒体系１７をシステムコントローラー１２の制御により駆動制御する記録媒体駆動系１８とから構成されている。
【００２２】
次に、このような構成からなる情報信号処理装置におけるデータの流れについて説明する。先ず、映像信号Ａ／Ｄ系１では入力した映像信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理され、映像信号処理系２に入力する。音声信号Ａ／Ｄ系６では入力した音声信号を所定のサンプリング周波数及び量子化ビット数でＡ／Ｄ変換処理され、音声信号処理系７に入力する。
【００２３】
映像信号処理系２及びメモリー系３により映像データ信号はＭＰＥＧなど所定のデータ圧縮処理がなされる。又、映像信号処理系２における信号は、映像信号特性解析系４に入力し、後で説明する処理（［３］本発明の特性信号比較検出方法）により映像信号の特性信号を検出する。ユーザーが指定した所望の時点を含む所定区間の検出された映像信号特性解析系４からの特性信号はメモリー系５に記憶され所定の読み出し時点毎に特性信号相関処理系１６に入力する。入力映像信号は逐次映像信号特性解析系４に入力し特性検出され、検出された入力映像信号の特性信号は特性信号相関処理系１１に入力する。
【００２４】
音声信号は音声信号処理系７及びメモリー系８によりＭＰＥＧオーディオなど所定の圧縮処理がなされる。又、音声信号処理系７における信号は音声信号特性解析系９に入力し、後で説明する処理（［３］本発明の特性信号比較検出方法）により音声信号の特性信号を検出する。ユーザーが指定した所望の時点を含む所定区間の検出された音声信号特性解析系９からの特性信号はメモリー系１０に記憶され、所定の読み出し時点毎に特性信号相関処理系１１に入力する。
【００２５】
特性信号相関処理系１１では、上記で述べたようにユーザーが指定した時点を含む所定区間の映像信号又は音声信号の特性信号と逐次入力する映像信号又は音声信号の特性信号との相関性を各々検出し、相関性が所定のしきい値以上であるかどうかの結果をシステムコントローラー１２に入力する。
【００２６】
識別信号生成系１４では、システムコントローラー１２からの制御信号によりユーザーが指定した時点を含み所定の区間のシーンと類似したシーンの所定区間内の時点で識別信号を生成する。ここで、識別信号の生成は、例えば、所定の記録データのヘッダ位置に設けられた識別データ（ＩＤデータ）を設定するものとする。
【００２７】
例えば、ＩＤデータが４ビット設けられている場合は１５通りのシーンを指定でき、ＩＤデータを（ｄ０，ｄ１，ｄ２，ｄ３）とすると以下のように設定する。
【００２８】
【表１】
（ＩＤデータ設定の一例）
【表２】
（ヘッダデータ配置の概念図）
生成された識別信号生成系１４からの識別信号と、所定の映像圧縮信号処理がなされた映像信号処理系２からの映像データ信号と、所定の音声圧縮信号処理がなされた音声信号処理系７からの音声データ信号はデータマルチプレックス系１５に入力し所定のデータ構成になるように所定の信号処理がなされる。
【００３１】
所定のデータマルチプレックス処理がなされたデータは記録信号処理系１６に入力し所定の誤り訂正符号付加や後の記録媒体の記録に適した記録変調方式の処理や所定の記録レベルになるように信号処理がなされハードディスクや光磁気ディスクなどの記録媒体系１７に所定の記録レートで記録される。システムコントローラー１２からの制御信号は記録媒体駆動系１８に入力し記録媒体系１７の動作を制御する。
【００３２】
［３］本発明の特性信号検出比較方法
ここではＦＦＴ解析、ＤＣＴ解析、ウェーブレット解析などで特性信号を検出する。例えば、指定区間の信号ｆ（ｔ）をＦＦＴ解析によりＦ（ω）に解析されたとし、指定区間以外の所定区間ｎの信号をｆｎ（ｔ）がＦＦＴ解析によりＦｎ（ω）と解析されたとする。ここで、下記数１に示す、所定区間内でＦ（ω）とＦｎ（ω）との２乗誤差信号Ｇｎを考える。
【００３３】
【数１】
次に、下記数２に示す、上記数１で得られた値と所定のしきい値Ｐｔｈとを比較し、所定の類似性が認められるかを判定する。
【００３５】
【数２】
これらの信号解析は映像信号については輝度信号と色信号について行うが、場合によっては輝度信号のみについて行っても良い。又、音声信号についても行い、映像信号の演算結果と総合的に判定しても良い。上記で述べたように、ＦＦＴ解析の他にＤＣＴ解析を用いても良く、この場合に映像信号はＭＰＥＧエンコード処理に伴って行っても良い。
【００３７】
又、ウェーブレット解析を用いた場合について考える。指定区間の信号ｆ（ｔ）が、解析レベルｋでＣｋ（ｘ）と解析され、指定区間以外の所定区間の信号ｆｎ（ｔ）が同様に解析レベルｋでＣｎｋ（ｘ）と解析される。ここで、数３に示す、２乗誤差信号Ｒｎｋを考える。
【００３８】
【数３】
上記数３により得られた値と所定のしきい値との比較処理を行うが、エネルギーの大きな解析レベルを選択してこのレベルだけについて比較処理しても良い。
【００４０】
誤差信号演算は、全ての解析レベルについて行っても良く、その場合は、数４に示す、全ての解析レベルの誤差演算の値を加算する。
【００４１】
【数４】
次に、数５に示す、上記数４により得られた値と所定のしきい値Ｑｔｈと比較し、所定の類似性が認められるかを判定する。
【００４３】
【数５】
例えば、映像信号については演算処理が容易なようにウェーブレット関数はＨａａｒ（ハール）ウェーブレットが考えられるがその他のウェーブレット関数を用いても良い。
【００４５】
ここで上記で述べたような２乗誤差関数の他に相関関数を求めることも考えられる。例えば、下記の数６に示す、ＦＦＴ解析又はＤＣＴ解析によるＦ（ω）とＦｎ（ω）の相互相関関数ｍ（ω，ω＋τ）を考える。Ｔは所定区間とする。
【００４６】
【数６】
ここで、更にτを時間変数とみなしてＦＦＴ解析を行いＭ（ω）が求められたとする。
【００４８】
所定の相関性が検出されればこのＭ（ω）にはスペクトルピークが認められるので、下記の数７により、所定のしきい値Ｎｔｈを設定しスペクトルピーク値Ｍ（ωｐｋ）を比較する。
【００４９】
【数７】
又、上記で述べたようなウェーブレット解析についても相関関数処理を行うことも考えられる。下記の数８に示す、Ｃｋ（ｘ）とＣｎｋ（ｘ）について相互相関関数Ｈ（ω，ω＋τ）を考える。
【００５１】
【数８】
ここでＦＦＴ解析を考えてＮｋ（ω）が求められたとすると、所定の相関性が検出されればスペクトルピークＮｋ（ωｐｋ）が認められる。下記の数９に示すように、所定のしきい値Ｓｔｈを設定し解析レベルｋでの差信号Ｗｋを求める。
【００５３】
【数９】
ここで、解析レベルの内でエネルギーの一番大きな解析レベルだけに着目して所定のしきい値と比較しても良いが、ここでは、下記の数１０に示すように、全ての解析レベルについて考えて差信号Ｗａｌｌを求める。
【００５５】
【数１０】
次に、下記の数１１に示すように、上記数１０により得られた値と所定のしきい値Ｅｔｈと比較する。
【００５７】
【数１１】
以上のように解析比較処理を行うことができるのである。
【００５９】
［４］本発明の情報信号処理方法動作フローチャート
図５は、本発明の動作フローチャートの一例である。ステップＳＴ１からスタートし指定数ｎと所定区間検出数ｍの初期値を０に設定する。ステップＳＴ３で所定区間を検出し、ステップＳＴ４で所定の特性を検出する。ステップＳＴ５では所定区間の検出回数ｍを１インクリメントし、ステップＳＴ６で指定が行われたかが判定される。
【００６０】
指定が行われたと判定された場合は、ステップＳＴ７に移行し所定区間検出回数が２以上かが判定される。これは検出回数が１の場合は指定区間と同一になってしまうのでこれを避けるためである。ステップＳＴ６で指定が行われていないと判定された場合は、ステップＳＴ８に移行しそれ以前に指定がされているかどうかが判定され、指定されている場合はステップＳＴ１３に移行し相関処理に移り、指定がされていない場合はステップＳＴ２１にジャンプする。
【００６１】
ステップＳＴ９で所定の回数ｎ１以下かが判定される。これは指定数が多すぎると処理に時間がかかり過ぎるためと、指定数が多いと本発明の目的の一つであるダイジェスト再生あるいはスキミング動作が良好に行えない可能性が出てくるためである。所定回数ｎ１より大きい場合は、ステップＳＴ１２で表示又は音声などでユーザーに警告を行い、ステップＳＴ２１に移行する。
【００６２】
ステップＳＴ９で指定数が所定以下であると判定された場合は、ステップＳＴ１０で指定数ｎを１インクリメントしてステップＳＴ１１に移行し検出された所定の特性データをＲＡＭなどの所定のメモリーに記憶する。ステップＳＴ１３では後でループ処理を行うため指定数ｎを別の変数Ｋに代入し、ステップＳＴ１４で所定の相関演算を行う。ステップＳＴ１５で相関値が所定のしきい値と比較され所定の相関性が検出され類似性があると検出された場合は、ステップＳＴ１６で所定の識別データが設定され、ステップＳＴ１７でデータマルチプレックス処理に移行する。ステップＳＴ１５で所定の相関性が検出されない場合は、ステップＳＴ１７にジャンプし識別データを設定せずに処理を行う。
【００６３】
ステップＳＴ１７で所定のデータマルチプレックス処理されたデータは、ステップＳＴ１８で変調などの記録に伴う所定の処理を行い所定のタイミングでデータが記録される。ステップＳＴ１９ではループ処理を行うため所定区間検出数ｍを再度別の変数Ｌに代入し、指定数の変数Ｋを１ディクリメントする。
【００６４】
ステップＳＴ２０ではディクリメントされた指定数の変数Ｋが０かが判定され所定の相関処理が全て終了されたかが判定される。所定の処理が全て終了したと判定された場合は、ステップＳＴ２１に移行し停止か否かが判定され、停止の場合はステップＳＴ２２で停止し、停止しない場合はステップＳＴ３にジャンプし以上の処理ルーチンを繰り返す。
【００６５】
【発明の効果】
以上説明したように、本発明により長時間記録した野球や相撲などのスポーツ番組で打撃シーン出塁シーンや取り組みシーンなどユーザーが指定したシーンだけを識別信号を使用して選択的に再生することができる。これにより長時間記録した放送番組を効率的に短時間でスキミングやダイジェスト再生することができ効果的に内容を把握することができるという効果がある。
【図面の簡単な説明】
【図１】本発明の動作原理図である。
【図２】記録時間と設定可能指定数の特性図の一例である。
【図３】所定区間処理方法の概念説明図である。
【図４】本発明の情報信号処理装置ブロック構成図の一例である。
【図５】本発明の動作フローチャートの一例である。
【符号の説明】
１：映像信号Ａ／Ｄ系、２：映像信号処理系、３：メモリー系、４：映像信号特性解析系、５：メモリー系、６：音声信号Ａ／Ｄ系、７：音声信号処理系、８：メモリー系、９：音声信号特性解析系、１０：メモリー系、１１：特性信号相関処理系、１２：システムコントローラー、１３：映像音声モニター系、１４：識別信号生成系、１５：データマルチプレックス系、１６：記録信号処理系、１７：記録媒体系、１８：記録媒体駆動系
Claims (8)
- 所定の映像信号及び／又は音声信号を入力し、
該入力した映像信号及び／又は音声信号の中から所定の第１の特性信号を検出し、
上記入力した映像信号及び／又は音声信号の中から所定の時点を指定し、
上記指定された時点を含む所定区間の映像信号及び／又は音声信号の中から所定の第２の特性信号を検出し、
上記第１の特性信号と上記第２の特性信号とを所定の演算処理に基づいて比較判別処理しその結果に応じて識別信号を生成し、
生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生すること
を特徴とする情報信号処理方法。 - 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録すること
を特徴とする請求項１に記載の情報信号処理方法。 - 上記第１の特性信号と上記第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成することを特徴とする請求項１に記載の情報信号処理方法。
- 上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする請求項１に記載の情報信号処理方法。
- 所定の映像信号及び／又は音声信号を入力する入力手段と、
該入力手段からの映像信号及び／又は音声信号の所定の第１の特性信号を検出する第１の特性検出手段と、
上記入力手段からの映像信号及び／又は音声信号において所定の時点を指定する指定手段と、
該指定手段で指定された時点を含む所定区間の映像信号及び／又は音声信号の所定の第２の特性信号を検出する第２の特性検出手段と、
上記第１の特性検出手段で検出した第１の特性信号と上記第２の特性検出手段で検出される所定区間の第２の特性信号とを所定の比較判別処理する判別処理手段と、
該判別処理手段に基づく結果に応じて識別信号を生成する手段と、
上記識別信号を生成する手段に基づき生成された上記識別信号を用いて、再生時に所定の区間の場面シーンだけを再生する再生手段と、
を備えたことを特徴とする情報信号処理装置。 - 上記識別信号は上記映像信号及び／又は音声信号を記録する際に所定の記録媒体に記録することを特徴とする請求項５に記載の情報信号処理装置。
- 上記第１の特性検出手段及び上記第２の特性検出手段で検出する第１の特性信号及び第２の特性信号は、上記入力した映像信号及び／又は音声信号に代替えできる実時間領域以外の信号で形成すること
を特徴とする請求項５に記載の情報信号処理装置。 - 上記比較判別処理は、誤差信号演算処理又は相関関数演算処理であることを特徴とする請求項５に記載の情報信号処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP36118299A JP4253972B2 (ja) | 1999-12-20 | 1999-12-20 | 情報信号処理方法及び情報信号処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP36118299A JP4253972B2 (ja) | 1999-12-20 | 1999-12-20 | 情報信号処理方法及び情報信号処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001177805A JP2001177805A (ja) | 2001-06-29 |
| JP4253972B2 true JP4253972B2 (ja) | 2009-04-15 |
Family
ID=18472534
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP36118299A Expired - Fee Related JP4253972B2 (ja) | 1999-12-20 | 1999-12-20 | 情報信号処理方法及び情報信号処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4253972B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20020059706A (ko) * | 2000-09-08 | 2002-07-13 | 요트.게.아. 롤페즈 | 저장 매체상에 저장된 정보 신호를 재생하는 장치 |
| JP2004247407A (ja) | 2003-02-12 | 2004-09-02 | Sharp Corp | 固体撮像素子およびその製造方法、携帯型電子機器 |
| JP5140247B2 (ja) * | 2006-04-27 | 2013-02-06 | シャープ株式会社 | 記憶装置 |
-
1999
- 1999-12-20 JP JP36118299A patent/JP4253972B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001177805A (ja) | 2001-06-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4076754B2 (ja) | 同期方法 | |
| KR100533433B1 (ko) | 정보기록및재생을위한장치및방법 | |
| JP4683281B2 (ja) | 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム | |
| US5701386A (en) | Recording and reproducing apparatus and method for compressed video signal | |
| JP2002044572A5 (ja) | 情報信号処理装置及び情報信号処理方法及び情報信号記録装置及び情報信号記録方法 | |
| WO2007039994A1 (ja) | ダイジェスト作成装置およびそのプログラム | |
| US20070071406A1 (en) | Video recording and reproducing apparatus and video reproducing apparatus | |
| JP4253139B2 (ja) | フレーム情報記述方法、フレーム情報生成装置及び方法、映像再生装置及び方法並びに記録媒体 | |
| JP4435130B2 (ja) | 映像再生装置、再生装置 | |
| JP2004186845A5 (ja) | ||
| JP2006331591A (ja) | 情報処理装置および方法、並びにプログラム | |
| JP3947979B2 (ja) | ビデオコンテンツ自動レビューシステム | |
| CN100420294C (zh) | 用于在视频特技模式期间的选通静寂消除的方法和设备 | |
| CN102611863B (zh) | 动画记录重放装置 | |
| JP4253972B2 (ja) | 情報信号処理方法及び情報信号処理装置 | |
| US8369681B2 (en) | Video reproducing apparatus | |
| JPH04237284A (ja) | 映像内容圧縮表示処理方法 | |
| JP4519074B2 (ja) | 映像蓄積再生装置 | |
| JP2001177788A (ja) | 情報信号再生方法及び情報信号再生装置 | |
| JP2008153920A (ja) | 動画像一覧表示装置 | |
| JP2001177806A (ja) | 情報信号表示方法及び情報信号表示装置 | |
| JPWO2007039995A1 (ja) | ダイジェスト作成装置およびそのプログラム | |
| JP2006270233A (ja) | 信号処理方法及び信号記録再生装置 | |
| US20060110127A1 (en) | Method and apparatus for making archival copies of audiovisual recordings | |
| JP2740271B2 (ja) | ビデオテープレコーダの反復再生方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060314 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080529 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080603 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080729 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080909 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081105 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090106 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090119 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130206 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |