JPWO2010122617A1 - 番組間重複部分検出方法とそれを搭載する映像音声記録装置 - Google Patents

Abstract

ｎを２以上の整数とするとき、録画データ記録部（１１）に連続ドラマのｎ−１回目番組データとｎ回目番組データとが記録されており、音声復号化部（１２）は各番組の音声データを生成する。重複部判定部（１３）は、ｎ−１回目番組の音声データの終端部とｎ回目番組の音声データの先頭部とから比較対象となる部分データをそれぞれ抽出して重複部を検出し、ｎ−１回目番組とｎ回目番組との重複時間を重複時間格納部（１４）に記録する。録画データ編集部（１５）は、重複時間格納部（１４）に記録された重複時間分をｎ−１回目番組データの終端から削除して、録画データ記録部（１１）にｎ−１回目番組編集後データとして記録する。

Description

本発明は、ＴＶ放送受信機能を持つ機器あるいはパーソナルコンピュータの外付けボード及びソフトウェアにおいて、連続性のある番組の録画データの再生、記録、編集の技術に関するものである。

ＤＶＤ／ＢＤ／ＨＤＤ／フラッシュメモリ等の記録メディアに録画するビデオレコーダやパーソナルコンピュータの録画用ソフトには、放送データやインターネット経由からＥＰＧ（Electric Program Guide）と呼ばれる番組データを用いて録画予約する機能がある。また、週ごとに放送される連続ドラマについては、ＥＰＧの情報を用いてユーザが指定するドラマについて週ごとに録画することが可能である。この機能によりユーザは見たい連続ドラマを毎回録画予約することなく、連続ドラマ全体で予約することができ、利便性が高まる。

一般的に、連続ドラマでは各回の番組の構成に類似性が見られる。このことを利用したレコーダが知られている。これは、初回に所望の編集を行った際に編集情報を抽出、記録しておき、２回目番組の編集の際には初回の編集情報を用いて初回番組と同様のパターンで自動的に編集を行うものである（特許文献１参照）。

特開２００８−２４５２１９号公報

発明が解決しようとしている課題

上記従来例は、連続ドラマを編集する際に、初回番組の編集時に抽出した編集情報を用いて２回目番組以降の編集を自動的に行うものである。一方、ｎを２以上の整数とするとき、連続ドラマではｎ回目番組の先頭部分にはｎ−１回目番組の末尾部分が繰り返されることがあり、連続ドラマ全体の記録データを考慮すると、繰り返し部分は冗長とみなされる。この重複部分は記録データから削除すれば記録メディアの節約が可能であり、ユーザが記録データを再生する場合に重複部分を視聴しなくて済むことになる。ところが、従来例では重複部分の抽出ができないので重複部分の削除を効率的に行うことができず、自動編集による重複部分の削除も行うことはできない。

本発明は上記課題を解決するためのもので、今回番組について前回番組に対する重複部分の提示や、自動編集による重複部分の削除を可能とし、記録メディアの節約や重複部分の視聴を避けることができるシステムを提供することを目的とする。

本発明に係る映像音声記録装置は、ｎを２以上の整数とするとき、ｎ−１回目番組とｎ回目番組との重複部を抽出する手段を持ち、ｎ−１回目番組とｎ回目番組との重複時間を利用して編集又は再生を行うこととしたものである。

具体的には、ｎ−１回目番組とｎ回目番組との重複部を抽出する手段を持ち、自動編集でｎ−１回目番組との重複部分のデータを削除することを特徴とする。

また、ｎ−１回目番組とｎ回目番組との重複部を抽出する手段を持ち、ｎ回目番組の先頭の重複部分をスキップして再生することを特徴とする。

また、ｎ−１回目番組とｎ回目番組との重複部を抽出する手段を持ち、マニュアル編集でｎ−１回目番組とｎ回目番組との重複部分を同時に再生することを特徴とする。

番組間重複部分検出方法としては、ｎ−１回目番組データの終端から前方向に時間Ｔ（ｍ）の位置の時間Δ分のデータを抽出し、ｎ回目番組データの先頭から時間Δ分のデータを抽出し、それぞれの抽出データのサンプルデータの差分和を計算し、ｍを一定範囲でずらして差分和の結果を比較し、最も小さい値を持つ抽出データに対応するＴ（ｐ）を決定して重複部分と判定することを特徴とする。

あるいは、ｎ−１回目番組データの終端から時間Δ（ｍ）分のデータを抽出し、ｎ回目番組データの先頭から時間Δ（ｍ）分のデータを抽出し、それぞれの抽出データのサンプルデータの差分和をΔ（ｍ）で割り算して平均差分Ｅ（ｍ）を計算し、ｍを一定範囲でずらして平均差分Ｅ（ｍ）を比較し、最も小さい値を持つ抽出データに対応するΔ（ｐ）を決定して重複部分と判定することを特徴とする。

ｎ−１回目番組とｎ回目番組との重複部を抽出する手段を持つことにより、重複部のデータ時間位置を用いることができるので、自動編集にて連続ドラマの重複部を削除することができ、記録メディアの容量削減ができる。また、ｎ回目番組の再生で先頭の重複部分をスキップして再生することにより、視聴時間を少なくすることできる。また、マニュアル編集でユーザはｎ−１回目番組とｎ回目番組との重複部を同時に再生することで削除候補部を確認することができ、編集効率を上げることができる。

本発明の映像音声記録装置の構成例を示すブロック図である。 本発明の番組間重複部分検出方法のフロー図である。 図２の番組間重複部分検出方法における抽出データの関係を示す図である。 本発明の番組間重複部分検出方法の他のフロー図である。 図４の番組間重複部分検出方法における抽出データの関係を示す図である。 本発明の映像音声記録装置の他の構成例を示すブロック図である。 本発明の映像音声記録装置の更に他の構成例を示すブロック図である。 図７の映像音声記録装置にて連続ドラマの編集を行う際の削除候補部分の再生を行う際のデータ関係を示す図である。

《実施の形態１》
図１を用いて、本発明の映像音声記録装置の構成について説明する。図１において１１は録画データ記録部、１２は音声復号化部、１３は重複部判定部、１４は重複時間格納部、１５は録画データ編集部である。

録画データ記録部１１に連続ドラマのｎ−１回目番組データとｎ回目番組データとが記録されている（ｎは２以上の整数）。記録の形式はアナログＴＶ放送であれば圧縮してストリームの形式で記録され、ディジタルＴＶ放送の場合には放送されたストリームの形式か、又は再エンコードされたストリームの形式である。音声復号化部１２は、録画データ記録部１１からｎ−１回目番組データとｎ回目番組データとを読み出し、それぞれの音声部分を復号化する。この音声復号化部１２ではストリーム中の音声であるという情報に従い、音声ストリームを分離して音声復号化を行い、ｎ−１回目番組の音声データとｎ回目番組の音声データとを生成する。重複部判定部１３では、入力されたｎ−１回目番組の音声データとｎ回目番組の音声データとを用いてｎ−１回目番組の音声データの終端部とｎ回目番組の音声データの先頭部とから比較対象となる部分データをそれぞれ抽出して重複部を検出し、検出した結果をｎ−１回目番組とｎ回目番組との重複時間として重複時間格納部１４に記録する。録画データ編集部１５では、録画データ記録部１１からｎ−１回目番組データを読み出し、重複時間格納部１４に記録されたｎ−１回目番組とｎ回目番組との重複時間に対応するデータ分をｎ−１回目番組データの終端から削除して録画データ記録部１１にｎ−１回目番組編集後データとして記録する。

図２を用いて、重複部判定部１３の処理について説明する。Ｓ２１ではｎ−１回目番組の音声データの終端から時間Ｔ（ｍ）だけずれた位置の部分データを抽出し、Ｓ２２ではｎ回目番組の音声データの先頭から部分データを抽出する。これらの部分データは同じ時間Δ分のデータとする。

Ｓ２３では、ｎ−１回目番組の音声データの時間Ｔ（ｍ）だけずれた位置の部分データとｎ回目番組の音声データの部分データとの差分Ｄ（ｍ）を計算する。ｉを時間Δの部分データの各サンプル時間とし、ｎ−１回目番組の音声データの時間Ｔ（ｍ）だけずれた位置の部分データをＡｎ−１（ｍ，ｉ）、ｎ回目番組の音声データの部分データをＡｎ（ｉ）とすると、計算方法としては、部分データ間のサンプル値の差の絶対値和を計算する、
Δ−１
Ｄ（ｍ）＝Σ｜Ａｎ−１（ｍ，ｉ）−Ａｎ（ｉ）｜ …［１］
ｉ＝０
のような方法や、部分データ間のサンプル値の差の２乗和を計算する、
Δ−１
Ｄ（ｍ）＝Σ（Ａｎ−１（ｍ，ｉ）−Ａｎ（ｉ））^２ …［２］
ｉ＝０
のような方法が、パターン認識等で知られている。

Ｓ２４では、差分Ｄ（ｍ）が最小となるｍを判定し、ｐとする。Ｓ２５では、Ｓ２４で選択されたｐに対応する時間Ｔ（ｐ）を重複時間と判定する。

図３を用いて、抽出データと処理との関係について説明する。図３で３１はｎ−１回目番組音声データ、３２はｎ回目番組音声データ、３３はｎ−１回目番組の時間Δ分の部分データ、３４はｎ回目番組の時間Δ分の部分データを表す。ｎ−１回目番組の時間Δ分の部分データ３３はｎ−１回目番組音声データ３１の中の終端から時間Ｔ（ｍ）だけずれた位置からΔ時間分抽出し、Ａｎ−１（ｍ，ｉ）を構成する。ｎ回目番組の時間Δ分の部分データ３４はｎ回目番組音声データ３２の中の先頭からΔ時間分抽出し、Ａｎ（ｉ）を構成する。Ｔ（ｍ）を一定範囲でずらしながらｎ−１回目番組の部分データを抽出して、ｎ回目番組の部分データと比較することにより、最もマッチした部分が時間Ｔ（ｐ）だけずれた位置に存在することを番組間の重複とみなし、重複時間をＴ（ｐ）と判定するのである。

以上説明した方法により、録画データ編集部１５は、ｎ−１回目番組データとｎ回目番組データとの重複部を削除することができ、録画データを記録するメディアの容量を削減することができ、より多くの番組データを記録することを可能とする。

なお、記録データの削除は、録画データ編集部１５にて録画データ記録部１１からｎ回目番組データを読み出し、重複時間格納部１４に記録されたｎ−１回目番組とｎ回目番組との重複時間に対応するデータ分をｎ回目番組データの先頭から削除することもできる。

また、時間ずれＴ（ｍ）に最小時間と最大時間とを設定することにより、判定に要する時間を抑えることが可能となる。

《実施の形態２》
図４を用いて、重複部判定部１３の他の処理について説明する。Ｓ４１では、ｎ−１回目番組の音声データのΔ（ｍ）時間分の部分データを抽出する。Ｓ４２では、ｎ回目番組の音声データのΔ（ｍ）時間分の部分データを抽出する。

Ｓ４３では、ｎ−１回目番組の音声データの部分データとｎ回目番組の音声データの部分データとの差分Ｄ（ｍ）を計算する。ｉを時間Δ（ｍ）の部分データの各サンプル時間とし、ｎ−１回目番組の音声データの時間Δ（ｍ）分の部分データをＡｎ−１（ｍ，ｉ）、ｎ回目番組の音声データの時間Δ（ｍ）分の部分データをＡｎ（ｍ，ｉ）とすると、実施の形態１と同様に、
Δ（ｍ）−１
Ｄ（ｍ）＝Σ｜Ａｎ−１（ｍ，ｉ）−Ａｎ（ｍ，ｉ）｜ …［３］
ｉ＝０
という計算方法や、
Δ（ｍ）−１
Ｄ（ｍ）＝Σ（Ａｎ−１（ｍ，ｉ）−Ａｎ（ｍ，ｉ））^２ …［４］
ｉ＝０
という計算方法がある。

Ｓ４４では、差分Ｄ（ｍ）を時間Δ（ｍ）で割り、
Ｅ（ｍ）＝Ｄ（ｍ）／Δ（ｍ） …［５］
により平均差分Ｅ（ｍ）を計算する。式［３］や式［４］で計算した差分Ｄ（ｍ）はｍ毎に時間Δ（ｍ）が異なるのでｍ間で比較するときに用いるデータ長である時間Δ（ｍ）が異なることによりマッチングの誤判定を防ぐため、差分値を規格化するのである。

Ｓ４５では、平均差分Ｅ（ｍ）が最小となるｍをｐとする。Ｓ４６では、Ｓ４５で選択されたｐに対応する時間Δ（ｐ）を重複時間と判定する。

図５を用いて、抽出データと処理との関係について説明する。図５で５１はｎ−１回目番組音声データ、５２はｎ回目番組音声データ、５３はｎ−１回目番組の長さΔ（ｍ）の部分データ、５４はｎ回目番組の長さΔ（ｍ）の部分データを表す。ｎ−１回目番組の長さΔ（ｍ）の部分データ５３はｎ−１回目番組音声データ５１の中の終端からΔ（ｍ）時間分抽出し、Ａｎ−１（ｍ，ｉ）を構成する。ｎ回目番組の長さΔ（ｍ）の部分データ５４はｎ回目番組音声データ５２の中の先頭からΔ（ｍ）時間分抽出し、Ａｎ（ｍ，ｉ）を構成する。Δ（ｍ）を一定範囲でずらしながらｎ−１回目番組の部分データとｎ回目番組の部分データとを比較することにより、最もマッチした部分がΔ（ｐ）時間分を番組間の重複とみなし、重複時間をΔ（ｐ）と判定するのである。

なお、時間Δ（ｍ）に最小時間と最大時間とを設定することにより、判定に要する時間を抑えることが可能となる。

《実施の形態３》
図６を用いて、本発明の映像音声記録装置の他の構成について説明する。図６において６１は録画データ記録部、６２は音声復号化部、６３は重複部判定部、６４は重複時間格納部、６５は再生部である。

録画データ記録部６１に連続ドラマのｎ−１回目番組データとｎ回目番組データとが記録されている。記録の形式はアナログＴＶ放送であれば圧縮してストリームの形式で記録され、ディジタルＴＶ放送の場合には放送されたストリームの形式か、又は再エンコードされたストリームの形式である。音声復号化部６２は、録画データ記録部６１からｎ−１回目番組データとｎ回目番組データとを読み出し、それぞれの音声部分を復号化する。この音声復号化部６２ではストリーム中の音声であるという情報に従い、音声ストリームを分離して音声復号化を行い、ｎ−１回目番組の音声データとｎ回目番組の音声データとを生成する。重複部判定部６３では、入力されたｎ−１回目番組の音声データとｎ回目番組の音声データとを用いてｎ−１回目番組の音声データの終端部とｎ回目番組の音声データの先頭部とから比較対象となる部分データをそれぞれ抽出して重複部を検出し、検出した結果をｎ−１回目番組とｎ回目番組との重複時間として重複時間格納部６４に記録する。ｎ回目番組の再生時に再生部６５では、録画データ記録部６１からｎ回目番組データを読み出し、重複時間格納部６４に記録されたｎ−１回目番組とｎ回目番組との重複時間に対応する時間分をｎ回目番組データの先頭からスキップして再生する。

《実施の形態４》
図７を用いて、本発明の映像音声記録装置の更に他の構成について説明する。図７において７１は録画データ記録部、７２は音声復号化部、７３は重複部判定部、７４は重複時間格納部、７５は再生部、７６は録画データ編集部である。

録画データ記録部７１に連続ドラマのｎ−１回目番組データとｎ回目番組データとが記録されている。記録の形式はアナログＴＶ放送であれば圧縮してストリームの形式で記録され、ディジタルＴＶ放送の場合には放送されたストリームの形式か、又は再エンコードされたストリームの形式である。音声復号化部７２は、録画データ記録部７１からｎ−１回目番組データとｎ回目番組データとを読み出し、それぞれの音声部分を復号化する。この音声復号化部７２ではストリーム中の音声であるという情報に従い、音声ストリームを分離して音声復号化を行い、ｎ−１回目番組の音声データとｎ回目番組の音声データとを生成する。重複部判定部７３では、入力されたｎ−１回目番組の音声データとｎ回目番組の音声データとを用いてｎ−１回目番組の音声データの終端部とｎ回目番組の音声データの先頭部とから比較対象となる部分データをそれぞれ抽出して重複部を検出し、検出した結果をｎ−１回目番組とｎ回目番組との重複時間として重複時間格納部７４に記録する。録画番組の編集時に再生部７５では、録画データ記録部７１からｎ−１回目番組データとｎ回目番組データとを読み出し、同時に再生を行う。このときにｎ−１回目番組データは、終端から重複時間格納部７４に記録されたｎ−１回目番組とｎ回目番組との重複時間に対応する時間分前のデータから再生し、ｎ回目番組データは先頭から再生する。

図８を用いて、同時再生のデータの時間関係を説明する。図８で８１はｎ−１回目番組音声データ、８２はｎ回目番組音声データ、８３はｎ−１回目番組の終端から重複時間格納部７４に記録されたｎ−１回目番組とｎ回目番組との重複時間Ｔに対応する時間分前の時間位置である。ｎ−１回目番組は、ｎ−１回目番組の終端から重複時間格納部７４に記録されたｎ−１回目番組とｎ回目番組との重複時間Ｔに対応する時間分前のデータ位置８３から再生し、ｎ回目番組は先頭から再生する。これらを同時に再生することにより、ユーザは削除候補のデータを確認することができる。

ユーザは削除可能と判断した場合に、削除指示することにより録画データ編集部７６で録画データ記録部７１からｎ−１回目番組データを読み出し、重複時間格納部７４に記録されたｎ−１回目番組とｎ回目番組との重複時間に対応するデータ分をｎ−１回目番組データの終端から削除して録画データ記録部７１にｎ−１回目番組編集後データとして記録する。

なお、ｎ回目番組データの先頭から重複部を削除することができるのは、実施の形態１と同様である。

以上説明してきたとおり、本発明に係る番組間重複部分検出方法とそれを搭載する映像音声記録装置は、連続ドラマの重複部分の提示や、自動編集による重複部分の削除を可能とし、記録メディアの節約や重複部分の視聴を避けることができるシステムを提供することができるので、ＴＶ放送受信機能を持つ機器あるいはパーソナルコンピュータの外付けボード及びソフトウェア等として有用である。

１１，６１，７１ 録画データ記録部
１２，６２，７２ 音声復号化部
１３，６３，７３ 重複部判定部
１４，６４，７４ 重複時間格納部
１５，７６ 録画データ編集部
６５，７５ 再生部

Claims (6)

1. 録画データ記録部と、音声復号化部と、重複部判定部と、重複時間格納部とを備えた映像音声記録装置であって、ｎを２以上の整数とするとき、
   前記録画データ記録部に連続ドラマのｎ−１回目番組データとｎ回目番組データとが記録され、
   前記音声復号化部は、前記録画データ記録部から入力されるｎ−１回目番組データとｎ回目番組データとのそれぞれの音声部分を復号化してｎ−１回目番組の音声データとｎ回目番組の音声データとを生成し、
   前記重複部判定部は、入力されたｎ−１回目番組の音声データとｎ回目番組の音声データとを用いてｎ−１回目番組の音声データの終端部とｎ回目番組の音声データの先頭部とから比較対象となる部分データをそれぞれ抽出して重複部を検出し、検出した結果をｎ−１回目番組とｎ回目番組との重複時間として前記重複時間格納部に記録し、
   編集又は再生時に、前記重複時間格納部からｎ−１回目番組とｎ回目番組との重複時間を読み出して使用することを特徴とする映像音声記録装置。
2. 請求項１記載の映像音声記録装置において、
   録画データ編集部を更に備え、
   前記録画データ編集部は、前記録画データ記録部からｎ−１回目番組データを読み出し、前記重複時間格納部に記録されたｎ−１回目番組とｎ回目番組との重複時間分をｎ−１回目番組データの終端から削除して、前記録画データ記録部にｎ−１回目番組編集後データとして記録することを特徴とする映像音声記録装置。
3. 請求項１記載の映像音声記録装置において、
   再生部を更に備え、
   前記再生部は、前記録画データ記録部からｎ回目番組データを読み出し、前記重複時間格納部に記録されたｎ−１回目番組とｎ回目番組との重複時間分だけｎ回目番組データの先頭からスキップして再生することを特徴とする映像音声記録装置。
4. 請求項１記載の映像音声記録装置において、
   再生部と、録画データ編集部とを更に備え、
   前記再生部は、前記録画データ記録部からｎ−１回目番組データとｎ回目番組データとを読み出し、ｎ−１回目番組は終端から前記重複時間格納部に記録されたｎ−１回目番組とｎ回目番組との重複時間分だけ前の時間位置から、ｎ回目番組データは先頭からそれぞれを同時に再生し、
   前記録画データ編集部は、前記再生の結果を受けてユーザから与えられた指示に応じ、前記録画データ記録部からｎ−１回目番組データを読み出し、前記重複時間格納部に記録されたｎ−１回目番組とｎ回目番組との重複時間分をｎ−１回目番組データの終端から削除して、前記録画データ記録部にｎ−１回目番組編集後データとして記録することを特徴とする映像音声記録装置。
5. 映像音声記録装置で用いる番組間重複部分検出方法であって、ｎを２以上の整数とするとき、
   ｎ−１回目番組データの終端から前方向に時間Ｔ（ｍ）の位置の時間Δ分のデータを抽出し、
   ｎ回目番組データの先頭から時間Δ分のデータを抽出し、
   それぞれの抽出データのサンプルデータの差分和を計算し、
   ｍを一定範囲でずらして差分和の結果を比較し、
   最も小さい値を持つ抽出データに対応するＴ（ｐ）を決定して重複部分と判定することを特徴とする番組間重複部分検出方法。
6. 映像音声記録装置で用いる番組間重複部分検出方法であって、ｎを２以上の整数とするとき、
   ｎ−１回目番組データの終端から時間Δ（ｍ）分のデータを抽出し、
   ｎ回目番組データの先頭から時間Δ（ｍ）分のデータを抽出し、
   それぞれの抽出データのサンプルデータの差分和をΔ（ｍ）で割り算して平均差分Ｅ（ｍ）を計算し、
   ｍを一定範囲でずらして平均差分Ｅ（ｍ）を比較し、
   最も小さい値を持つ抽出データに対応するΔ（ｐ）を決定して重複部分と判定することを特徴とする番組間重複部分検出方法。

Images