JP2004336787A - ビデオコンテンツ自動レビューシステム - Google Patents

Abstract

【課題】ユーザーが一度視聴した部分までは要約視聴により視聴し、自身が視聴した部分に対する記憶をたどって自身が視聴しかった部分は、正常に再生できるようにする。
【解決手段】ユーザーはコンテンツを選択し、自動レビュー機能を要求する（Ｓ１００）。前記選択されたコンテンツに対するブックマーク情報をローディングし、要約視聴を終了して正常再生を始める位置情報を求める（Ｓ１１０）。コンテンツの最初の位置から要約視聴で再生を行い、現在、要約視聴再生がなされる位置が、前記ローディングされたブックマーク情報を基礎にして求めた要約視聴終了及び正常再生開始位置であるか否かを判断する（Ｓ１２０）（Ｓ１３０）。現在位置がブックマーク位置でない場合には、要約視聴再生を続け、現在位置がブックマーク位置に到達したら、それ以後、該コンテンツを正常再生モードで再生する（Ｓ１４０）。
【選択図】図２

Description

本発明は、コンテンツに対するブックマークと要約視聴（summary view）を利用したコンテンツ自動レビューシステムに関する。

最近、記録装置にユーザーの視聴記録を記録して、ユーザーの趣向に合うサービスを提供し、ユーザーに適応したビデオ視聴機能を提供しようという努力がなされている。このような機能は、特に個人用ビデオ記録及び再生装置（ＰＶＲ：Personal Video Recorder）の登場でさらに増加している。

個人の視聴記録を利用したユーザーに適応したビデオ再生技法のうちの一つは、ユーザーがあるコンテンツを選択した時、最初の位置から再生を始めるのか、以前に再生を中断した位置から再生を再開するのかを、選択するようにするものである。

以前に再生を中断した位置から再生をすれば、ユーザーは既に視聴した部分を除いて、未だ視聴しなかった部分から視聴できるようになる有利な点がある。

しかし、再生を中断して再生を再開する時間差がそんなに大きくなければ、以前に再生を中断した位置から再生する機能が非常に有用であるが、そのような時間差が非常に大きな場合には、以前に再生を中断した位置から再生する機能は、それ程、大きな助けにならない。

むしろ、このような場合には、以前に再生を中断した位置までは要約視聴を提供し、以前に再生を中断した位置からビデオを正常再生モードに転換して再生することが、ユーザーにはるかに有用である。

再生を中断した位置から再生再開をなすことができる既存ＰＶＲシステムは、放送中のコンテンツを記録装置に記憶して、後ほど再び見たり、あるいはタイムシフト機能を利用して、録画と再生を同時に可能なようにする。

このような装置では、記録装置にユーザーが設定したブックマークや、コンテンツに対する以前の再生中断位置を記録することによって、以前に再生を中断した位置から再生する機能を提供して、ユーザーに便宜を提供する。

要約視聴のためのハイライトは、一般にビデオコンテンツで重要な場面を集め、新しく構成された一つの物理的／論理的コンテンツで理解することができることである。その例としては、"スポーツハイライト"、"映画予告篇"、"ヘッドラインニュース"などがある。

また、放送局でハイライトストリームやハイライト情報を提供しなくても、システムで場面分析と要約視聴インデックス生成を介して、自動的に要約視聴を提供するビデオスキミングシステムが提案された。

したがって、ユーザーは、コンテンツの再生途中のある位置からでも、要約視聴再生要求が可能である。

大部分のビデオ要約視聴システムでは、コンテンツを物理的に編集してハイライトを提供せずに、論理的にある部分が、要約視聴で再生するセグメントなのかどうかを指定するインデックスを生成することによって、要約視聴を提供している。ユーザーは要約視聴の水準までも指定できる。

最近の種々の研究は、ビデオコンテンツに対する場面分析と、それを基礎にした要約視聴インデックスの生成が可能なことを報告している。

また、いろいろなインデクシングアルゴリズム及びこれを利用したビデオブラウジング方法（スマートスキップや要約視聴）が開発され、このようなインデクシングシステムとビデオブラウジング機能はＰＶＲに統合される趨勢である。

本発明は、コンテンツに対する要約視聴機能とユーザーの視聴により発生したブックマーク機能を利用して、該ブックマーク地点までは要約視聴を提供し、それ以後の位置からは、ビデオを正常再生モードで再生することによって、ユーザーが一度視聴した部分までは要約視聴を視聴し、自身が視聴した部分に対する記憶をたどって、自身が視聴しなかった部分は正常に再生を要求できるようにすることによって、ユーザーの満足度をさらに高めることができるコンテンツ自動レビューシステムを提供することを目的にする。

本発明によるビデオコンテンツ自動レビュー方法は、ユーザーのビデオコンテンツ自動レビュー要求に対応して、ユーザーが選択したコンテンツに対して設定された要約視聴／正常再生転換位置情報を検索する段階、前記ビデオコンテンツに対して、前記検索された要約視聴／正常再生転換位置まで要約視聴再生を行って、要約視聴再生が終了された後には、ビデオコンテンツを正常再生モードで再生する段階を含んで構成されることを特徴とする。

本発明によるビデオコンテンツ自動レビュー装置は、デジタルビデオコンテンツ信号が入力される信号入力手段、ユーザーの命令をシステムに伝達するための機器操作手段、ビデオコンテンツの再生出力のための出力手段、前記信号入力手段を介して入力されたデジタルビデオコンテンツ信号及びインデックス情報などを記憶する記憶手段、前記入力手段からのユーザー選択と操作に応じて該コンテンツを選択してその選択されたコンテンツに対するインデックス情報を基礎にして、指定された位置まで要約視聴を行い、それ以後、正常再生を行わせるシステム制御手段を含んで構成されることを特徴とする。

本発明のコンテンツに対するブックマークと要約視聴を利用した知能型コンテンツ自動レビュー機能提供方法及びシステムを利用すれば、既存の以前に再生を中断した位置から再生する機能が、再生を中断した後、再生を再開する時点までの時間差が大きい場合に、それほど効力を発揮できない短所を克服できる。

そして、既に視聴した部分に対しては、要約視聴を提供して該位置からは正常再生を提供することによって、ユーザーは以前に再生を中断した位置からは正常モードでの再生になるので、視聴できない部分を逃す心配がないし、既に視聴した部分に対しては、圧縮的な情報を得ることによって、新しく視聴する部分との自然なつながりを提供することができる長所がある。

このような機能は、既存のＰＶＲと即時統合が可能であり、放送局での要約視聴の提供の有無に関係なく、インテリジェントにコンテンツの要約視聴機能を提供することによって、ビデオ記録／再生装置の品質を高める特徴的な機能になる。また、本発明の機能は、録画されたコンテンツだけでなく、録画中であるコンテンツにも適用が可能であるので、タイムシフトモードにおいても動作が可能である。

図１は、本発明のコンテンツに対するブックマークと要約視聴を利用した、インテリジェント自動ビデオコンテンツ自動レビュー機能（提供方法）を、図式的に要約して示したものである。

本発明のビデオコンテンツ自動レビュー方法は、ユーザーのビデオコンテンツ自動レビュー要求に対応して、ユーザーが選択したコンテンツに対して設定された要約視聴／正常再生転換位置情報を検索する段階、前記ビデオコンテンツに対して前記検索された要約視聴／正常再生転換位置まで要約視聴再生を行い、要約視聴再生が終了された後にはビデオコンテンツを正常再生モードで再生する段階を含んで構成されることを特徴とする。

本発明において、前記要約視聴／正常再生転換位置情報は、例えば、ビデオコンテンツに対するブックマーク情報である。

図１に示すように、本発明のビデオコンテンツ自動レビュー方法では、ユーザーがコンテンツを選択し、このコンテンツに対する自動レビュー機能を要求すれば、システムはユーザーが選択したコンテンツに対して設定されたブックマーク情報をローディングして、前記検索されたブックマーク地点まで要約視聴機能を利用して圧縮的な情報を提供し、前記ブックマークによって要約視聴終了位置として決定された地点までの再生が終了された後に、ビデオを正常再生モードで再生することにより、ユーザーのコンテンツに対するブックマークと要約視聴を利用したインテリジェントコンテンツ自動レビュー機能を提供する。

図２は、このようなインテリジェントコンテンツ自動レビュー方法を示している。

図２に示すように、まずユーザーがコンテンツを選択し、該コンテンツに対する自動レビュー機能を要求する。（Ｓ１００）

そして、前記選択されたコンテンツに対するブックマーク情報をローディングし、要約視聴を終了して正常再生を始める位置情報を求める。（Ｓ１１０）

次に、コンテンツの最初の位置から要約視聴で再生を行い、現在、要約視聴再生がなされる位置が、前記ローディングされたブックマーク情報を基礎にして求めた要約視聴終了及び正常再生開始位置であるか否かを判断する。（Ｓ１２０）（Ｓ１３０）

現在位置がブックマーク位置でない場合には、要約視聴再生を続けて行って、現在位置がブックマーク位置に到達したら、ブックマーク位置以後から該コンテンツを正常再生モードで再生する。（Ｓ１４０）

このように、ユーザーが選択したコンテンツに対するブックマーク情報を利用して、ユーザーにコンテンツに対するブックマークと要約視聴を利用した、インテリジェントコンテンツ自動レビュー機能を提供する。

このような動作をするためには、ユーザーのブックマーク情報が必要であって、このようなブックマーク情報は、以前、視聴途中指定した位置に対する情報であるか、ユーザーが以前に視聴途中視聴を中断した位置に対する情報であって、非揮発性記録装置に記録できる。

非揮発性記録媒体は、システムが有しているディスクなどの記録装置であってもよく、携帯可能な非揮発性記録装置であるスマートカードであってもよい。

また、ユーザー別にそれぞれ異なるブックマークが記録されてもよく、ユーザーに関係がなく、コンテンツに対してだけブックマークを記録することもできる。ユーザー別にブックマークを記録するには、一旦、システムにログイン作業が必要である。ログイン作業は、簡単なパスワード方法または生体認識方法、スマートカード認識などの、他のシステムでマルチユーザーを支援するための方法がすべて使うことができる。

また、コンテンツの最初の位置からブックマーク位置まで提供される要約視聴は、放送局で提供する物理的に編集されたハイライト情報、放送局で提供する論理的なハイライト情報、あるいは、システムがコンテンツの録画途中に、場面分析などの方法を介して、既に生成した要約視聴情報であることがある。

ここでハイライト情報の記述方法は、ハイライトセグメント情報で構成されることができ、多段階ハイライトの提供のために、要約視聴レベルが記述されることもある。

要約視聴の再生は、放送局で提供されるハイライト情報または場面転換情報を利用して提供が可能であり、放送局から別途のハイライト情報または場面転換情報が提供できない状況で、場面転換分析を介して、要約視聴を提供する既存のビデオスキミング提供方法で構成が可能である。

一方、本発明においてユーザーは、ブックマーク位置までの要約視聴再生のために、該当要約視聴のレベルを決定することができる。すなわち、多段階ハイライト情報スキームを利用する場合には、ユーザーの要約視聴レベルに合うハイライトを提供し、そうでない場合にはビデオスキミングの要約視聴レベルを変更することによって、ユーザーの要求に合うハイライトを提供することができる。

前記ブックマークは、一つのコンテンツに対して複数個、指定することができる。一つのコンテンツに対するブックマークが複数個である場合には、ユーザーが要約視聴を利用して再生される位置までのブックマークを直接決定することもでき、また、システムが決定することもできる。

システムがブックマークを選定する場合には色々な情報に対する重み関数を適用でき、ここに使われる「重み」はユーザーが直接指定したブックマークなのか否かによって「重み」を違うように設定でき、以前に再生を中断した位置であるのか否かによって違うようにすることができ、複数回、繰り返して見た部分に対する情報なのかなどを総合的に適用して決定することができる。

一方、前記目的を達成するための本発明のビデオコンテンツ自動レビュー装置は、デジタルビデオコンテンツ信号が入力される信号入力手段と、ユーザーの命令をシステムに伝達するための機器操作手段と、ビデオコンテンツの再生出力のための出力手段と、前記信号入力手段を介して入力されたデジタルビデオコンテンツ信号及びインデックス情報などを記憶する記憶手段と、前記入力手段からのユーザー選択と操作に応じて該コンテンツを選択し、その選択されたコンテンツに対するインデックス情報を基礎にして指定された位置まで要約視聴を行い、それ以後、正常再生を行わせるシステム制御手段を含んで構成されることを特徴とする。

信号入力手段を介してデジタルＡ／Ｖ信号が入力されると、システム制御手段は、これを記憶手段に記憶させる。

機器操作手段を介してユーザーが、ビデオコンテンツを選択して自動レビュー機能を要求すれば、システム制御手段は該ビデオコンテンツに対する前記要約視聴／正常再生転換位置情報を検索する。ここで要約視聴／正常再生転換位置情報は、例えば、ビデオコンテンツに対するブックマーク情報であり、このブックマーク情報は装置自体の記録装置（非揮発性メモリー）に記録することもでき、また、携帯可能な非揮発性メモリーであるスマートカードなどを利用して記録することもできる。

システム制御手段は、前記検索されたブックマーク情報を基礎にして、該ビデオコンテンツの最初の位置からブックマーク位置までは、要約視聴で再生して出力手段を介して出力し、ブックマーク位置以後からは、正常再生モードで制御し、出力手段を介して正常速度のビデオコンテンツを再生して出力する。ここで要約視聴のための情報は、外部（放送局）から提供することもでき、入力されたあるいは記憶されたビデオコンテンツに対して要約視聴インデックス情報を、自動的に生成し、記憶しておいて用いることもできる。

図３は、本発明のコンテンツに対するブックマークと要約視聴を利用したインテリジェントコンテンツ自動レビュー装置の実施例を示す。

図３に示す本発明のインテリジェントコンテンツ自動レビューシステムは、デジタルＡ／Ｖ信号が入力されるソースである信号入力部１と、ユーザーの命令をシステムに伝達するためのキーボード／リモートコントローラなどの装置で構成された入力装置２と、デジタルＡ／Ｖ信号を出力するためのモニター／スピーカーなどで構成された出力装置３と、色々なビデオ再生制御を担当し、要約視聴再生と正常再生モード再生制御を担当して、該再生モード変更の制御を行うための再生制御器４と、信号入力部を介して入力されたＡ／Ｖストリームを記憶するためのメディア記憶部５と、信号入力部により入力されるＡ／Ｖソースをメディア記憶部に記憶する録画制御器６と、録画制御器によりメディア記憶部に記憶されるストリームの情報に対するショットインデックス、要約視聴インデックスを抽出するためのインデックス生成器または放送局から伝えられる要約視聴インデックスを受信するためのインデックス入力手段７と、前記生成されたショットインデックス及び要約視聴インデックス情報または放送局から伝えられた要約視聴インデックスが記憶されるインデックス記憶部８と、要約視聴情報を解析して再生制御器に伝達するための要約視聴制御器９と、インデックス記憶部からインデックスをローディングして、これを要約視聴制御器及び再生制御器に伝達するためのインデックス管理器１０と、ユーザーの視聴情報を記録するためのユーザー視聴記録部１１と、入力装置及びユーザー視聴記録部からの命令を解析してインデックスの生成と録画及び要約視聴と再生制御のために提供する命令解析器１２を含んで構成される。

このように構成された本発明のインテリジェント自動レビューシステムでは、先に記述したようにユーザーのインテリジェントコンテンツ自動レビュー要求に対して、ユーザーが選択したコンテンツに対して設定されたブックマーク情報をローディングして、検索されたブックマーク地点まで要約視聴機能を利用して圧縮的な情報を提供し、該位置までの要約再生が終了された後には、ビデオを正常再生モードで再生することによってコンテンツに対するブックマークと要約視聴を利用したインテリジェントコンテンツ自動レビュー機能を提供する。

放送局で、要約視聴情報やショットインデックス情報を直接提供する場合には、インデックス生成器は不要である。インデックス生成器は、放送局で要約視聴やショットインデックス情報を直接提供しない場合に、ショットインデックス情報及び要約視聴情報を直接生成するための装置である。

システムの動作を簡単に説明すると次の通りである。デジタル信号が入力されると、再生制御器４は、現在のシステムの状態によって、入力ストリームを、録画制御器６を介して録画し、あるいは、出力装置３に出力する。

図３のシステムは、再生だけでなく録画も可能なシステムであるので、入力ストリームは録画モードである場合には、ディスク等のようなメディア記憶部５に記憶され、入力信号に場面転換情報または要約視聴インデックス情報が含まれた場合に、該インデックスはインデックス入力手段７を介してインデックス記憶部８に記憶され、そうでない場合には、インデックス生成器を介して、インデックス生成器が自動的に生成する場面転換及び要約視聴インデックスが、インデックス記憶部８に記憶される。

また、ユーザーの視聴記録部１１には、ユーザーが明示的または暗示的に指定したブックマーク情報が記録される。ユーザーが、特定コンテンツに対して、コンテンツに対するブックマークと要約視聴を利用したインテリジェントコンテンツ自動レビュー機能を、入力装置２を介してシステムに要求すれば、命令解析器１２の解析によって、インデックス管理器１０がインデックス記憶部８に記憶されているインデックスをローディングし、ユーザー視聴記録部１１の視聴関連情報もローディングされてブックマークを検索する。

前記検索されたブックマークのうちから一つのブックマークが決定されると、要約視聴制御部９は再生制御器４との持続的な通信で該ブックマークまで要約視聴再生を提供して、出力装置３を介して出力し、該ブックマークの位置まで到達すれば、再生制御器４は正常再生モードに転換して、該コンテンツを再生して出力装置３を介して出力する。

本発明は、ビデオコンテンツの再生において有用である。

本発明によるコンテンツ自動レビュー機能を示した図面である。 本発明のコンテンツ自動レビュー方法を示したフローチャートである。 本発明のコンテンツ自動レビュー装置を示したブロック図である。

符号の説明

１；信号入力部 ２；入力装置
３；出力装置 ４；再生制御器
５；メディア記憶部 ６；録画制御器
７；入力手段 ８；インデックス記憶部
９；要約視聴制御器 １０；インデックス管理器
１１；視聴記録部 １２；命令解析器

Claims (13)

1. ユーザーのビデオコンテンツ自動レビュー要求に対応して、ユーザーが選択したコンテンツに対して設定された要約視聴／正常再生転換位置情報を検索する段階、
   前記ビデオコンテンツに対して、前記検索された要約視聴／正常再生転換位置まで要約視聴再生を行って、要約視聴再生が終了し後にはビデオコンテンツを正常再生モードで再生する段階を含むことを特徴とするビデオコンテンツ自動レビュー方法。
2. 前記要約視聴／正常再生転換位置情報は、該ビデオコンテンツに対するブックマーク情報であることを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
3. 前記要約視聴／正常再生転換位置情報は、ユーザーが以前に視聴途中指定した位置に対する情報であるか、ユーザーが以前に視聴途中視聴を中断した位置に対する情報であることを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
4. 前記要約視聴／正常再生転換位置情報は、記録のためにシステムにユーザーが誰なのかを知らせ、システムは現在ユーザーが誰なのかを認識して、ユーザー別にそれぞれ記録することを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
5. 前記要約視聴は、放送局から提供される物理的なハイライトを利用して該位置と一致する地点まで再生され、あるいは、放送局から提供される論理的なハイライト情報を利用して再生されることを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
6. 前記要約視聴は、ビデオ記憶及び再生装置で自動インデクシングシステムにより、自動的に発生する要約視聴情報であることを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
7. 前記要約視聴区間で要約の水準を決定し、システムに要求する段階、及び、前記要求された水準の要約視聴を実行する段階をさらに含むことを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
8. 前記ビデオコンテンツに対して設定された要約視聴／正常再生転換位置情報が複数個である場合に、ユーザーが、複数個の位置情報のうちから要約視聴で再生される位置までの位置情報を、直接決定することを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
9. 前記ビデオコンテンツに対して設定された要約視聴／正常再生転換位置情報が複数個である場合に、ユーザーが複数個の位置情報のうちから要約視聴で再生される位置までの位置情報を、システムが、自動的に決定することを特徴とする請求項１に記載のビデオコンテンツ自動レビュー方法。
10. 前記システムが自動的に決定する要約視聴／正常再生転換位置情報は、ユーザーが直接指定した位置であるのか否か、以前に再生を中断した位置であるのか否か、複数回繰り返して再生した部分であるのか否かのうちから、少なくともいずれか一つ以上を参照して決定し、参照事項に対してそれぞれ重みを付与して決定することを特徴とする請求項９に記載のビデオコンテンツ自動レビュー方法。
11. デジタルビデオコンテンツ信号が入力される信号入力手段、
    ユーザーの命令をシステムに伝達するための機器操作手段、
    ビデオコンテンツの再生出力のための出力手段、
    前記信号入力手段を介して入力されたデジタルビデオコンテンツ信号及びインデックス情報などを記憶する記憶手段、
    ユーザーの選択と前記入力手段からの操作に応じてコンテンツの選択を制御し、選択されたコンテンツに対するインデックス情報を基づいて指定された位置まで要約視聴を行うことを制御し、それ以後、正常再生を行わせるシステム制御手段を含むことを特徴とするビデオコンテンツ自動レビュー装置。
12. 前記要約視聴／正常再生転換位置情報を記憶するための記録装置は、システムの記録装置あるいは、携帯可能な記録装置を含むことを特徴とする請求項１１に記載のビデオコンテンツ自動レビュー装置。
13. 前記ビデオコンテンツに対する要約視聴／正常再生転換位置情報を抽出して、前記記憶手段に記憶させるための要約視聴インデックス生成手段を含むことを特徴とする請求項１１に記載のビデオコンテンツ自動レビュー装置。
    

Images