JP2016103714A

JP2016103714A - 録画再生装置

Info

Publication number: JP2016103714A
Application number: JP2014240473A
Authority: JP
Inventors: 英行太田; Hideyuki Ota
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2014-11-27
Filing date: 2014-11-27
Publication date: 2016-06-02

Abstract

【課題】注目人物が登場しないシーンもダイジェスト再生可能にする。【解決手段】録画再生装置（１０）は、情報記録装置（１３）と、録画実行部（１６１）と、情報記録装置に保持された録画番組の部分区間である各シーンに登場する人物を識別する登場人物識別部（１６３）と、各シーンと識別された登場人物との対応関係をシーン管理テーブル（１３２）に記録するシーン管理部（１６４）と、シーン管理テーブルを参照して、登場人物別のダイジェスト再生における対象人物が登場する第１のシーンを対象人物のダイジェストシーンと特定し、さらに、第１のシーンの前後のシーンであって対象人物が登場せずに第１のシーンに登場する別人物が登場する第２のシーンを対象人物のダイジェストシーンと特定するダイジェストシーン特定部（１６５）と、特定されたダイジェストシーンを情報記録装置から読み出して再生するダイジェストシーン再生部（１６６）とを備える。【選択図】図２

Description

本発明は、放送番組やネットワークを通じて配信される番組の録画再生装置に関し、特に、録画した番組を登場人物別にダイジェスト再生する技術に関する。

放送番組やネットワークを通じて配信される番組を録画し、録画番組を再生する録画再生装置において、録画番組を効率よく視聴できるようにするために、番組の適当なシーンをつなぎ合わせて再生するダイジェスト再生機能を備えたものがある。

ダイジェスト再生の方法はさまざまあるが、そのうちの一つに登場人物別のダイジェスト再生がある。そのような登場人物別のダイジェスト再生を行う録画再生装置として、例えば、映像コンテンツに出現する人物のうち、特定の人物に注目して、当該注目人物が画面上に出現する期間だけを抽出して再生するものがある（例えば、特許文献１を参照）。

特開２００８−２８３４８６号公報

従来の登場人物別のダイジェスト再生では、注目人物が登場するシーンしか再生されない。そのため、例えば、サッカー、バスケットボール、アメリカンフットボールといった複数の人物がプレーに関連することにより構成されるスポーツの番組をダイジェスト再生すると、注目選手が登場しないシーンがカットされて試合の流れが掴みにくくなるといった問題が生じることがある。

上記問題に鑑み、本発明は、放送番組やネットワークを通じて配信される番組を録画および再生する録画再生装置における登場人物別のダイジェスト再生に関して、注目人物が登場しないが注目人物に関連するシーンも再生可能にすることを目的とする。

本発明の一局面に従った録画再生装置は、録画番組を保持する情報記録装置と、前記情報記録装置に番組を録画する録画実行部と、前記情報記録装置に保持された録画番組の部分区間である各シーンに登場する人物を識別する登場人物識別部と、前記各シーンと前記識別された登場人物との対応関係をシーン管理テーブルに記録するシーン管理部と、前記シーン管理テーブルを参照して、登場人物別のダイジェスト再生における対象人物が登場する第１のシーンを前記対象人物のダイジェストシーンと特定し、さらに、前記第１のシーンの前後のシーンであって前記対象人物が登場せずに前記第１のシーンに登場する別人物が登場する第２のシーンを前記対象人物のダイジェストシーンと特定するダイジェストシーン特定部と、前記特定されたダイジェストシーンを前記情報記録装置から読み出して再生するダイジェストシーン再生部と、を備えている。

これによると、登場人物別のダイジェスト再生において、対象人物が登場しないシーンも当該人物のダイジェストシーンとして特定されてダイジェスト再生することができる。

上記録画再生装置は、前記情報記録装置に保持された録画番組を複数のシーンに分割するシーン分割部を備えていてもよい。

これによると、録画番組がチャプター情報などであらかじめシーン分割されていなくても録画番組の各シーンを取得することができる。

前記ダイジェストシーン特定部は、前記第１のシーンと前記第２のシーンとが時間的に連続していないとき、前記第１のシーンと前記第２のシーンとの間の区間も前記対象人物のダイジェストシーンと特定してもよい。

これによると、ダイジェストシーンが飛び飛びで再生されるのを防いで、時間的に連続する比較的長い区間を対象人物に関連する一つのまとまったシーンとしてダイジェスト再生することができる。

上記録画再生装置は、前記情報記録装置に保持された録画番組からハイライトシーンを抽出するハイライトシーン抽出部を備えていてもよく、前記登場人物識別部は、前記抽出された各ハイライトシーンに登場する人物を識別してもよい。

これによると、録画番組において盛り上がる部分やストーリー上意味のある重要なシーンをハイライトシーンとして取得することができ、そのようなハイライトシーンに登場する人物を識別することができる。

前記ダイジェストシーン特定部は、前記第１のシーンと前記第２のシーンとが一部重複しているとき、前記第１のシーンと前記第２のシーンとを含む区間を前記対象人物のダイジェストシーンと特定してもよい。

これによると、登場人物別のダイジェスト再生において、対象人物が登場しないハイライトシーンも当該人物のダイジェストシーンとして特定されてダイジェスト再生することができる。

以上のように本発明によると、登場人物別のダイジェスト再生に関して、注目人物が登場しないが注目人物に関連するシーンも再生することができる。

本発明の一実施形態に係る録画再生装置の概略構成図第１の実施形態に係る登場人物別のダイジェスト再生機能のブロック図ダイジェストシーン特定の一例を示す模式図ダイジェストシーン特定の別例を示す模式図第２の実施形態に係る登場人物別のダイジェスト再生機能のブロック図ダイジェストシーン特定の一例を示す模式図

以下、図面を参照しながら本発明を実施するための形態について説明する。なお、本発明は、以下の実施形態に限定されるものではない。

図１は、本発明の一実施形態に係る録画再生装置の概略構成を示す。本実施形態に係る録画再生装置１０は、地上デジタル放送、ＢＳ／ＣＳデジタル放送、ケーブル放送などの放送番組や、インターネットなどのネットワークを通じて配信される番組（コンテンツ）を録画し、また、録画番組を再生する装置である。録画再生装置１０は、具体的には、ビデオレコーダー、テレビジョン受像機、セットトップボックス、放送受信機能を有するＰＣ、携帯端末などとして実現することができる。

録画再生装置１０は、受信処理部１１、コーデック１２、情報記録装置１３、ビデオ信号処理部１４、オーディオ信号処理部１５、および制御部１６を備えている。録画再生装置１０がテレビジョン受信機やＰＣなどで実現される場合、録画再生装置１０は、さらに、表示デバイス２００およびスピーカー３００を備えている。

受信処理部１１は、アンテナ１００から放送波を受信して、所望のチャンネルの放送信号を取得する。録画再生装置１０がネットワークに接続可能であれば、受信処理部１１は、図示しないネットワークカードを通じてインターネットなどからストリームデータを取得する。

受信処理部１１が受信した放送信号またはコンテンツには映像信号と音声信号が含まれ、さらにその他の信号（例えば、字幕データ信号や電子番組ガイド情報など）が含まれ得る。これら信号は、ＭＰＥＧ−２やＨ．２６４／ＭＰＥＧ−４ＡＶＣなどの所定の符号化形式で圧縮符号化されている。コーデック１２は、受信処理部１１からそのような圧縮符号化された信号（ストリームデータ）を受けて分離およびデコードを行い、映像信号と音声信号を出力する。

情報記録装置１３は、番組を記録する装置である。情報記録装置１３は、例えば、ＨＤＤ（Hard Disk Drive）や、ブルーレイ（登録商標）などの光ディスク装置などで構成することができる。番組は、映像信号、音声信号、およびその他の信号（例えば、字幕データ信号など）などからなるデータである。情報記録装置１３においてこれら信号が所定の方式で圧縮符号化されて記録されている。コーデック１２は、受信処理部１１から受けたストリームデータをそのまま、または、ストリームデータをデコードしてさらに別の符号化形式で再エンコードして情報記録装置１３に記録する。以下、受信処理部１１から受けてそのまま情報記録装置１３に記録されるストリームデータや別の符号化形式に再エンコードされて情報記録装置１３に記録される圧縮符号化データのことを番組と称する。

なお、情報記録装置１１には、ＥＰＧ（Electronic Program Guide）あるいはＩＰＧ（Interactive Program Guide）などと呼ばれる電子番組ガイド情報も記録される。

映像信号処理部１４は、コーデック１２から映像信号を受けて、それをデジタル／アナログ変換して表示デバイス２００に出力する。表示デバイス２００は、例えば、液晶表示装置や有機ＥＬ表示装置などのフラットディスプレイパネルである。音声信号処理部１５は、コーデック１２から音声信号を受けて、それをデジタル／アナログ変換してスピーカー３００に出力する。

制御部１６は、受信処理部１１、コーデック１２、情報記録装置１３、映像信号処理装置１４、および音声信号処理装置１５の各構成要素の動作を制御する。制御部１６は、例えば、ＣＰＵ（Central Processing Unit）で実現することができる。ＣＰＵで構成された制御部１６は、図示しないＲＯＭやフラッシュメモリに格納されたプログラムを実行して上記各構成要素の動作を制御する。

次に、制御部１６が有する登場人物別のダイジェスト再生機能について説明する。

≪第１の実施形態≫
図２は、第１の実施形態に係る登場人物別のダイジェスト再生機能のブロック図である。例えば、制御部１６は、録画実行部１６１、シーン分割部１６２、登場人物識別部１６３、シーン管理部１６４、ダイジェストシーン特定部１６５、およびダイジェストシーン再生部１６６を備えている。また、シーン管理テーブル１３２が情報記録装置１３に格納されている。

録画実行部１６１は、コーデック１２から受けた圧縮符号化データを情報記録装置１１に記録する、すなわち番組を録画する。

シーン分割部１６２は、情報記録装置１３から任意の録画番組を読み出して、その録画番組を複数のシーンに分割し、その結果を情報記録装置１３のシーン管理テーブル１３２に記録する。シーンとは、録画番組の部分区間、すなわち、任意の時間長の動画コンテンツである。換言すると、録画番組は、複数のシーンが集まって構成されたシーン集合である。

シーンの分割方法には、
１）音声データを解析して無音状態が一定時間以上続く無音区間を検出し、無音区間の前後でシーン分割する
２）字幕データを解析して文頭の特定の語句を検出し、特定の語句が出現する前後でシーン分割する
３）映像データを解析して映像フレームの輝度が大きく変化する部分を検出し、輝度が大きく変化する前後でシーン分割する
などがある。

なお、番組によっては放送事業者によってチャプター情報が付与されている場合もあり、そのような場合には、シーン分割部１６２は、チャプター情報を用いてシーン分割する。なお、シーン分割部１６２は、チャプター情報の有無にかかわらず、上記の方法により録画番組を複数のシーンに分割することができる。

登場人物識別部１６３は、シーン分割部１６２によって分割された各シーンに登場する人物を識別する。登場人物識別部１６３は、各シーンの映像データ、音声データ、および字幕データなどを解析して、そのシーンに登場する人物を識別することができる。識別された人物には人物ＩＤが割り当てられる。なお、人物識別には既存の技術を用いることができる。

シーン管理部１６４は、シーン分割部１６２によって分割された録画番組の各シーンと登場人物識別部１６３によって識別された各シーンの登場人物との対応関係をシーン管理テーブル１３２に記録する。シーン管理テーブル１３２は、例えば、録画番組ＩＤ、シーンＩＤ、シーン開始時刻、シーン終了時刻、および人物ＩＤの各項目からなるテーブルである。

ダイジェストシーン特定部１６５は、シーン管理テーブル１３２を参照して、登場人物別のダイジェスト再生における対象人物が登場するシーンをその対象人物のダイジェストシーンと特定する。ダイジェストシーン特定部１６５によるダイジェストシーン特定処理については後述する。

ダイジェストシーン再生部１６６は、ダイジェストシーン特定部１６５によって特定されたダイジェストシーンを情報記録装置１３から読み出して再生する。より詳細には、ダイジェストシーン再生部１６６は、ダイジェストシーン特定部１６５からダイジェスト再生すべきシーンのシーンＩＤを受け、シーン管理テーブル１３２を参照してそのシーンＩＤに該当するシーン開始時刻およびシーン終了時刻を取得し、情報記録装置１３から該当録画番組の該当区間のデータを読み出してそれを再生する。

次に、本実施形態におけるダイジェストシーン特定部１６５によるダイジェストシーン特定処理について説明する。

図３は、ダイジェストシーン特定の一例を示す模式図である。例えば、ある録画番組においてシーン１、シーン２、シーン３が時間的に連続しており、シーン１には人物Ｂが登場し、シーン２には人物Ａおよび人物Ｂが登場し、シーン３には人物Ｂが登場するとする。

人物Ａのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ａが登場するシーン２を人物Ａのダイジェストシーンとして特定する。ここで、シーン２には人物Ａの他に人物Ｂも登場しており、その前後のシーンであるシーン１およびシーン３には人物Ａは登場しないが人物Ｂが登場する。したがって、ダイジェストシーン特定部１６５は、そのようなシーン２の前後のシーン１およびシーン３も人物Ａのダイジェストシーンと特定する。この結果、人物Ａのダイジェストシーンとしてシーン１、シーン２、シーン３が特定される。

人物Ｂのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、人物Ｂが登場するシーン１、シーン２、シーン３を人物Ｂのダイジェストシーンとして特定する。

図４は、ダイジェストシーン特定の別例を示す模式図である。例えば、ある録画番組においてシーン１、シーン２、シーン３、シーン４、シーン５が時間的に連続しており、シーン１には人物Ｂが登場し、シーン２には人物Ｃが登場し、シーン３には人物Ａおよび人物Ｂが登場し、シーン４には人物Ｄが登場し、シーン５には人物Ｂが登場するとする。

人物Ａのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ａが登場するシーン３を人物Ａのダイジェストシーンとして特定する。ここで、シーン３には人物Ａの他に人物Ｂも登場しており、シーン３とは時間的に連続しないがシーン３の前後のシーン１およびシーン５には人物Ａは登場しないが人物Ｂが登場する。したがって、ダイジェストシーン特定部１６５は、そのようなシーン３とは時間的に連続しないがシーン３の前後のシーン１およびシーン５も人物Ａのダイジェストシーンと特定する。この結果、人物Ａのダイジェストシーンとしてシーン１、シーン３、シーン５が特定される。

さらに、ダイジェストシーン特定部１６５は、シーン１とシーン３に挟まれたシーン２、およびシーン３とシーン５に挟まれたシーン４についても、人物Ａが登場しないが、人物Ａのダイジェストシーンとして特定する。これは、二つのシーンに挟まれたシーンに注目人物が登場していなくても当該シーンを再生することで、それら二つのシーンのストーリーのつながり（例えば、スポーツ番組では試合の展開）がより明確になると考えられるためである。

以上の結果、人物Ａのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、シーン１からシーン５までの連続する５つのシーンを人物Ａのダイジェストシーンと特定する。

人物Ｂのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ｂが登場するシーン１、シーン３、シーン５を人物Ｂのダイジェストシーンとして特定する。さらに、上述したように、ダイジェストシーン特定部１６５は、シーン１とシーン３に挟まれたシーン２、およびシーン３とシーン５に挟まれたシーン４も人物Ｂのダイジェストシーンと特定する。

以上の結果、人物Ｂのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、シーン１からシーン５までの連続する５つのシーンを人物Ｂのダイジェストシーンと特定する。

人物Ｃのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ｃが登場するシーン２を人物Ｃのダイジェストシーンとして特定する。それ以外のシーンには人物Ｃおよびシーン２に登場する別の人物のいずれも登場しないため、シーン２のみが人物Ｃのダイジェストシーンとして特定される。

人物Ｄのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ｄが登場するシーン４を人物Ｃのダイジェストシーンとして特定する。それ以外のシーンには人物Ｄおよびシーン４に登場する別の人物のいずれも登場しないため、シーン４のみが人物Ｄのダイジェストシーンとして特定される。

≪第２の実施形態≫
図５は、第１の実施形態に係る登場人物別のダイジェスト再生機能のブロック図である。本実施形態は、第１の実施形態に係る制御部１６におけるシーン分割部１６２をハイライトシーン抽出部１６７に置き換えたものである。以下、第１の実施形態との同様の構成については説明を省略し、第１の実施形態と異なる点を主に説明する。

ハイライトシーン抽出部１６７は、情報記録装置１３から任意の録画番組を読み出して、その録画番組から任意の数のハイライトシーンを抽出し、その結果を情報記録装置１３のシーン管理テーブル１３２に記録する。ハイライトシーンとは、録画番組の部分区間であるシーンの一種であり、盛り上がりやストーリー上意味のある重要なシーンのことをいう。前後のハイライトシーンは必ずしも時間的に連続している必要はなく、逆に、複数のハイライトシーンが部分的に重複することもあり得る。ハイライトシーン抽出部１６７は、録画番組の映像データ、音声データ、および字幕データなどを解析してハイライトシーンを抽出することができる。なお、ハイライトシーン抽出には既存の技術を用いることができる。

登場人物識別部１６３は、ハイライトシーン抽出部１６７によって抽出された各ハイライトシーンに登場する人物を識別する。

シーン管理部１６４は、ハイライトシーン抽出部１６７によって抽出された録画番組の各ハイライトシーンと登場人物識別部１６３によって識別された各ハイライトシーンの登場人物との対応関係をシーン管理テーブル１３２に記録する。

図６は、ダイジェストシーン特定の一例を示す模式図である。例えば、ある録画番組においてハイライトシーン１、ハイライトシーン２が部分的に重複しており、ハイライトシーン１には人物Ａおよび人物Ｂが登場し、ハイライトシーン２には人物Ｂおよび人物Ｃが登場するとする。

人物Ａのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、まず、人物Ａが登場するハイライトシーン１を人物Ａのダイジェストシーンとして特定する。ここで、ハイライトシーン１には人物Ａの他に人物Ｂも登場しており、その前後のシーンであるハイライトシーン２には人物Ａは登場しないが人物Ｂが登場する。したがって、ダイジェストシーン特定部１６５は、そのようなハイライトシーン１の前後のハイライトシーン２も人物Ａのダイジェストシーンと特定する。この結果、人物Ａのダイジェストシーンとしてハイライトシーン１とハイライトシーン２を含む区間が特定される。

人物Ｂのダイジェストプレイが指示された場合、ダイジェストシーン特定部１６５は、人物Ｂが登場するハイライトシーン１およびハイライトシーン２を人物Ｂのダイジェストシーンとして特定する。この結果、人物Ｂのダイジェストシーンとしてハイライトシーン１とハイライトシーン２を含む区間が特定される。

以上のように本発明に係る各実施形態によると、放送番組やネットワークを通じて配信される番組を録画および再生する録画再生装置１０における登場人物別のダイジェスト再生に関して、注目人物が登場しないが注目人物に関連するシーンも再生することができる。例えば、複数の人物（プレーヤー）が関連することによりプレーが構成される、サッカーやバスケットボール、アメリカンフットボールなどの団体競技の録画番組のダイジェスト再生に関して、視聴者がシーンの意味をより理解しやすいような登場人物別のダイジェスト再生が可能となる。

以上、本発明の実施形態について説明したが、本発明は上記の実施形態の構成に限られず種々の変形が可能である。例えば、シーン管理テーブル１３２を情報記録装置１３ではなく、フラッシュメモリなどの別の記憶装置に記録してもよい。

また、上記実施形態により示した構成および処理は、本発明の一実施形態に過ぎず、本発明を当該構成および処理に限定する趣旨ではない。

１０録画再生装置
１３情報記録装置
１３２シーン管理テーブル
１６１録画実行部
１６２シーン分割部
１６３登場人物識別部
１６４シーン管理部
１６５ダイジェストシーン特定部
１６６ダイジェストシーン再生部
１６７ハイライトシーン抽出部

Claims

録画番組を保持する情報記録装置と、
前記情報記録装置に番組を録画する録画実行部と、
前記情報記録装置に保持された録画番組の部分区間である各シーンに登場する人物を識別する登場人物識別部と、
前記各シーンと前記識別された登場人物との対応関係をシーン管理テーブルに記録するシーン管理部と、
前記シーン管理テーブルを参照して、登場人物別のダイジェスト再生における対象人物が登場する第１のシーンを前記対象人物のダイジェストシーンと特定し、さらに、前記第１のシーンの前後のシーンであって前記対象人物が登場せずに前記第１のシーンに登場する別人物が登場する第２のシーンを前記対象人物のダイジェストシーンと特定するダイジェストシーン特定部と、
前記特定されたダイジェストシーンを前記情報記録装置から読み出して再生するダイジェストシーン再生部と、を備えた録画再生装置。
前記情報記録装置に保持された録画番組を複数のシーンに分割するシーン分割部を備えた、請求項１に記載の録画再生装置。
前記ダイジェストシーン特定部は、前記第１のシーンと前記第２のシーンとが時間的に連続していないとき、前記第１のシーンと前記第２のシーンとの間の区間も前記対象人物のダイジェストシーンと特定する、請求項１または請求項２に記載の録画再生装置。
前記情報記録装置に保持された録画番組からハイライトシーンを抽出するハイライトシーン抽出部を備え、
前記登場人物識別部は、前記抽出された各ハイライトシーンに登場する人物を識別する、請求項１に記載の録画再生装置。
前記ダイジェストシーン特定部は、前記第１のシーンと前記第２のシーンとが一部重複しているとき、前記第１のシーンと前記第２のシーンとを含む区間を前記対象人物のダイジェストシーンと特定する、請求項１または請求項４に記載の録画再生装置。