JP2006114949A

JP2006114949A - 映像再生装置

Info

Publication number: JP2006114949A
Application number: JP2004297121A
Authority: JP
Inventors: Noboru Wakabayashi; 昇若林
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2004-10-12
Filing date: 2004-10-12
Publication date: 2006-04-27
Anticipated expiration: 2024-10-12
Also published as: US20060078313A1; CN1761306A; CN100576897C; US8064750B2; JP4774204B2

Abstract

【課題】
ユーザがタイミングを逸することなく、切りが良い箇所で自動的に一時停止することができ、また、切りが良い箇所から再生を再開することができる映像再生装置を提供することを課題とする。
【解決手段】
コンテンツに対してシーン変化点を検出し、そのシーン変化点情報を用いて一時停止する箇所および再生再開する箇所を決定する。シーン変化点検出する際に、複数の閾値を設けてシーン変化点に変化点レベルを設定する。コンテンツ再生時にユーザが一時停止機能ボタンを押した場合、シーン変化点レベルを利用して、一時停止箇所をユーザに表示する。これによりユーザは所望するレベルの一時停止箇所を決めることができる。また、コンテンツ一時停止中にユーザが再生再開機能ボタンを押した場合、同様にシーン変化点レベルを利用して、再生再開箇所をユーザに表示する。これによりユーザは所望するレベルの再生再開箇所を決めることができる。
【選択図】図２

Description

本発明は、動画像を再生、停止などが可能な映像処理技術に関し、特に動画像のシーン変化点を用いた停止、再生を行う映像記録再生技術に関する。

テレビ番組などの映像コンテンツを視聴中にユーザが少しの間中座する時は、ユーザは自分自身が判断したタイミングで再生を一時停止していた。そして、再生を再開する場合には、一時停止した箇所から再生を再開していた。この時、映画やドラマなどのコンテンツで登場人物が台詞を言っている途中で一時停止した場合には、その台詞の内容を理解するために、ユーザは少し前のシーンに手動で戻して再生し直す必要があり、操作が面倒であった。

この問題に対し、特許文献１は台詞の字幕を利用してシーンの先頭箇所に戻って再生を再開していた。
特許文献１の例では、ユーザが中座する場合に一時停止を指示すると再生が一時停止され、再生を再開する場合は、ユーザが再生を指示すると再生再開位置決定手段が、字幕などが含まれている副映像信号の有無に応じて再開位置を決定する。再生再開位置決定手段は、一時停止時に字幕が含まれている場合、登場人物が台詞を言っているため、字幕のあるシーンの先頭位置に再生再開位置を決定する。一方、一時停止時に字幕がない場合、再生再開位置決定手段は、一時停止した位置に再生再開位置を決定する。または、一時停止している間の時間をタイマがカウントし、第１所定時間が経過した場合は、第２所定時間だけ戻した位置に再生再開位置を決定する。これにより、字幕の台詞があるシーンで一時停止した場合は台詞の先頭位置から再生を再開でき、また、字幕が無い場合で比較的長時間中座した場合であっても内容を理解することが容易になる。

また、動画像の変化点を検出する方法が、特許文献２に開示されている。ここでは、例えば、動画像の再生中に、ユーザが停止ボタンを押すと、ユーザによるフレームの指定が有ったものと判別し、その近傍の動画像のカットの変わり目（変化点）を検出し、その変化点で再生を停止技術が開示されている。
特開２００１−３０９２９４号公報特開平９−１０７５１７号公報

休憩などの緊急でない中座である場合、ユーザはできるだけ切りの良い箇所で一時停止したいと考える。しかし、従来のようにユーザが自身で判断したタイミングで一時停止する場合、ユーザはシーン変化点などの切りの良い箇所がわからない為、そのタイミングを逃してしまったり、いつまで待てば良いかわからないなどの課題がある。

これに対し、特許文献１にて提案された例では、コンテンツに字幕が無い場合は、一時停止した箇所あるいは一定時間遡った箇所から再生を再開するものであり、ユーザがコンテンツの内容を容易に理解できるとは言い難い。よって、これらの使い勝手については十分ではなかった。

一方、特許文献２にて提案された例では、シーン変化点にて動画像の停止を行っているが、動画像の編集を目的としているため、視聴中のコンテンツを一時停止して再生を再開する場合に使い勝手がよいとは言い難い。

そこで、本発明では停止および再生の使い勝手を向上させることを目的とする。

上記の課題を解決するために本発明では、映像コンテンツの再生を行う映像再生装置に、コンテンツのシーン変化点を判別するシーン変化点判別手段と、再生や一時停止を制御する再生制御手段を設け、前記シーン変化点判別手段により判別したシーン変化点に関する情報を用いて一時停止または再生再開を行う。

また、コンテンツのシーン変化点のレベルを設定する変化点レベル設定手段を設け、前記シーン変化点情報に前記変化点レベル設定手段で設定された変化点レベルの情報を付加し、前記変化点レベルによって一時停止または再生再開する箇所の変更を行う。

本発明では停止および再生の使い勝手を向上させることができる。

以下に、本発明の実施の形態を説明する。

本実施例は本発明の映像再生装置の１実施例である。以下に本実施例を図１〜図５を用いて説明する。
本実施例はコンテンツのシーン変化点にて一時停止及び再生再開がなされるものである。なお、シーン変化点とは、各シーンとシーンの内容の変わり目のことである。例えば、ドラマ番組ならば場面が変わる変わり目であったり、話し手が変わる変わり目などである。音楽番組ならば音楽演奏中とそうでない時の変わり目であったりする。このシーン変化点の検出には、入力されるフレームごとに画像や音声等の特徴量を算出し、さらに、フレーム間の特徴量の相関係数を計算して、この相関係数の値が予め定めたレベルを超える変化点を検出する方法が用いることができる。シーンの変化点の検出には、動画像の前後のフレームの相違（輝度やカラーヒストグラムなど）、動画像の符号化／復号化に際して計算される種々の特徴量（移動ベクトル量（動き補償）など）、オーディオ変化（モノラルとステレオの切り替え、音量変化、無音検出など）などを用いることができる。たとえば、シーン変化点の検出に動画像の前後のフレームの相違を用いると、アナログの動画像や非圧縮の動画像に対してシーン変化点を検出することができる。また、動画像の符号化／復号化に際して計算される種々の特徴量をシーン変化点検出に用いると、シーン変化点検出にもちいる特徴量がシーン変化点検出前に既に計算されているので、シーン変化点検出時の負荷が軽くなる。さらに、オーディオ変化をシーン変化点検出に用いると、音楽番組などのコンテンツによってはシーン変化点検出の精度が上がるメリットもある。

図１は本発明におけるコンテンツのシーン変化点を用いた一時停止（以後、再生後一時停止と呼ぶ）の機能の概略を示す図であり、図２は本発明における映像再生装置のブロック図であり、図３はコンテンツ再生時に再生後一時停止を行った際の前記映像再生装置における処理手順を示すフロー図である。さらに、図４は本発明におけるコンテンツのシーン変化点を用いた再生再開の機能の概略を示す図であり、図５はコンテンツ一時停止時に再生再開を行った際の前記映像再生装置における処理手順を示すフロー図である。

図１は本発明における再生後一時停止機能の概略を示す図であり、横軸に時間を縦軸にシーン変化点の検出値を表示したものである。コンテンツは、シーンの変化点を判別するシーン変化点検出部によりシーン変化点が自動検出される。その際、閾値を複数設定することで、シーン変化点にレベルをつけることができる。すなわち、シーン変化点の検出値がレベル０の閾値０を越えた場合はそのシーン変化点をレベル０とし、検出値がレベル１の閾値１を超え、かつレベル０の閾値０を超えない場合はそのシーン変化点をレベル１とし、検出値がレベル２の閾値２を超え、かつレベル１の閾値１を超えない場合はそのシーン変化点をレベル２とする。または、シーン変化点及びそのレベルをメタデータなどの付加情報としてコンテンツに付随する。図１では、１０１及び１０２のシーン変化点の検出値は閾値０を超えているので、レベル０のシーン変化点となり、１１１のシーン変化点の検出値は閾値１を超え、閾値０を超えていないので、レベル１のシーン変化点となり、さらには、１２１、１２２、１２３及び１２４のシーン変化点の検出値は閾値２を超え、閾値１を超えていないので、レベル２のシーン変化点となる。コンテンツ再生時に、ユーザが、レベル２のシーン変化点１２１とレベル２のシーン変化点１２２の間で装置本体の操作パネルあるいはリモコンなどの入力装置に設けられた再生後一時停止ボタンを押した場合、本発明における映像再生装置は、時間軸上の右側で最も近いレベル０のシーン変化点１０２で一時停止するように設定し、映像表示画面に「一時停止まであと○秒」など一時停止箇所までの時間を表示する。ユーザが前記シーン変化点１０２まで待てない場合、前記再生後一時停止ボタンを再度押すことで、本発明における映像再生装置は、最も近いレベル１以下のシーン変化点１１１で一時停止するように設定し、映像表示画面に「一時停止まであと△秒」など一時停止箇所までの時間を再度表示する。さらにユーザが前記シーン変化点１１１まで待てない場合は、再度前記再生後一時停止ボタンを再度押すことで、本発明における映像再生装置は、最も近いレベル２以下のシーン変化点１２２で一時停止するように設定し、映像表示画面に「一時停止まであと□秒」など一時停止箇所までの時間を再度表示する。このようにユーザは再生後一時停止ボタンを繰り返し押すことで一時停止箇所を変えることができる。本実施例のようにシーン変化点に段階的なレベルをつけ、これをユーザが選択することにより、ユーザの事情によって一時停止位置を決定することができる。なお、本実施例では装置本体の操作パネルあるいはリモコンなどの入力装置に設けられた再生後一時停止ボタンを繰り返し押すことで一時停止箇所を変えるようにしたが、装置本体の操作パネルあるいはリモコンなどの入力装置に再生後一時停止ボタンとは別にシーン変化点レベルを切り替えるシーン変化点レベル切替ボタンを設けても良い。この場合、ユーザは前記再生後一時停止ボタンを押した後、前記シーン変化点レベル切替ボタンを押すことで一時停止する位置を切り替えることができる。また、一時停止までの時間を表すのに時間を表す帯状のメータを用いてもよい。これにより視覚的に一時停止までの時間を捕らえることができる。また、本実施例では、シーンの変化点のレベルが大きくなるほど閾値が小さくなるような例を挙げたが、もちろんレベルが小さくなるほど閾値を小さくしてもよい。

図２は本実施例の映像再生装置のブロック図であり、２００は映像再生装置、２１０は放送やインターネット、あるいはDVDパッケージメディアなどの外部メディアであるコンテンツ提供側であり、２２０は再生後一時停止ボタンを設けたリモコンであり、２３０は映像等を表示する表示画面である。映像再生装置２００には、前記コンテンツ提供側２１０からコンテンツを取得するコンテンツ取得部２０１と、取得したコンテンツを蓄積するコンテンツ蓄積部２０２と、シーン変化点のレベルを設定する変化点レベル設定部２０３と、前記コンテンツ蓄積部２０２により蓄積されたコンテンツに対して前記変化点レベル設定部２０３に従ってシーン変化点を検出しそのシーン変化点の情報を取得するシーン変化点検出部２０４と、前記シーン変化点検出部２０４で取得したシーン変化点情報を保存するシーン変化点情報保存部２０５と、前記コンテンツ蓄積部２０２に蓄積されたコンテンツを再生する再生部２０６と、装置本体の操作パネルや前記リモコン２２０などの入力装置から一時停止、再生再開などの信号を取得する再生停止信号取得部２０７と、前記再生停止信号取得部２０７により再生停止信号を取得した時に前記シーン変化点情報保存部２０５に保存されたシーン変化点情報から再生停止する箇所を指定する再生停止箇所指定部２０８が装備されている。
なお、前記シーン変化点検出情取得部２０５で取得したシーン変化点情報には、シーン変化点の時間などの位置情報の他に前記変化点レベル設定部２０３で設定されたシーン変化点のレベルが含まれる。
次に、図３を用いて本実施例の動作の詳細を説明する。

図３はコンテンツ再生時に、ユーザが再生後一時停止ボタンを押した際の前記映像再生装置２００における再生後一時停止の処理手順である。なお、シーン変化点情報は、あらかじめ前記シーン変化点検出部２０４によって前記コンテンツ蓄積部２０２に蓄積されたコンテンツのシーン変化点を検出し、前記シーン変化点情報保存部２０５に保存しておく。ユーザはコンテンツ再生中に中座したい場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生後一時停止ボタンを押す。これを契機に、図３に示す処理が実行される。前記停止信号取得部２０６に前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置から一時停止などの停止信号を取得すると、前記停止箇所指定部２０８は前記シーン変化点情報保存部２０５に保存されたシーン変化点情報を取得する（ステップＳ３０１）。ステップＳ３０１で取得したシーン変化点情報においてシーン変化点のレベルＬを０に設定し（ステップＳ３０２）、レベルＬ以下で最も近いシーン変化点までの時間を前記表示画面２３０に表示する（ステップＳ３０３）。表示した残り時間に対してユーザが納得いかなければユーザは再度再生後一時停止ボタンを押すが、そのボタンが押されたかどうかを判定する（ステップＳ３０４）。ステップＳ３０４にてボタンが押された場合、すなわち表示した残り時間に対してユーザが納得いかない場合は、シーン変化点のレベルＬが前記変化点レベル設定部で設定された最大レベルＭＡＸを超えていないかを判断（ステップＳ３０５）してから、最大レベルＭＡＸを超えていない場合のみシーン変化点のレベルＬを１増やす（ステップＳ３０６）。その後、ステップＳ３０３に戻って新たなレベルＬ以下のレベルについて最も近いシーン変化点までの時間を前記表示画面２３０に表示して処理を繰り返す。ステップＳ３０５でシーン変化点のレベルＬが最大レベルＭＡＸを超えた場合は、ステップＳ３０２に戻ってレベルＬを０に戻して処理を繰り返す。ステップＳ３０４でボタンが押されなかった場合、ステップＳ３０３で表示したレベルＬ以下のシーン変化点まで再生されたかを判断し（ステップＳ３０７）、シーン変化点までまだ再生されていない場合は、ステップＳ３０３に戻って処理を繰り返す。ステップＳ３０７で、シーン変化点まで再生されている場合はそのシーン変化点で一時停止し（ステップＳ３０８）処理を終了する。

図４は本発明におけるコンテンツのシーン変化点を用いた再生再開機能の概略を示す図であり、横軸に時間を縦軸にシーン変化点の検出値を表示したものである。コンテンツは、シーンの変化点を判別するシーン変化点検出部によりシーン変化点が自動検出される。その際、閾値を複数設定することで、シーン変化点にレベルをつけることができる。すなわち、シーン変化点の検出値がレベル０の閾値０を越えた場合はそのシーン変化点をレベル０とし、検出値がレベル１の閾値１を超えた場合はそのシーン変化点をレベル１とし、検出値がレベル２の閾値２を超えた場合はそのシーン変化点をレベル２とする。または、シーン変化点及びそのレベルをメタデータなどの付加情報としてコンテンツに付随する。図９では、９０１及び９０２のシーン変化点の検出値は閾値０を超えているので、レベル０のシーン変化点となり、９１１のシーン変化点の検出値は閾値１を超えているので、レベル１のシーン変化点となり、さらには、９２１、９２２、９２３及び９２４のシーン変化点の検出値は閾値２を超えているので、レベル２のシーン変化点となる。レベル２のシーン変化点９２３とレベル２のシーン変化点９２４の間で一時停止している場合、ユーザが装置本体の操作パネルあるいはリモコンなどの入力装置に設けられた再生再開箇所サーチボタンを押すと、本発明における映像再生装置は、時間軸の左側で最も近いレベル２以下のシーン変化点９２３に再生再開箇所を設定し、その再生再開箇所までの時間あるいはそのシーンのサムネイル画像を映像表示画面に表示する。ユーザが前記シーン変化点９２３よりも前に遡りたい場合、前記再生再開箇所サーチボタンを再度押すことで、本発明における映像再生装置は、最も近いレベル１以下のシーン変化点９１１に再生再開箇所を設定し、その再生再開箇所までの時間あるいはそのシーンのサムネイル画像を映像表示画面に再度表示する。さらに遡りたい場合は、前記再生再開箇所サーチボタンを再度押すことで、本発明における映像再生装置は、最も近いレベル０のシーン変化点９０１に再生再開箇所を設定し、その再生再開箇所までの時間あるいはそのシーンのサムネイル画像を映像表示画面に再度表示する。気に入った再生再開箇所が見つかれば、装置本体の操作パネルあるいはリモコンなどの入力装置に設けられた再生再開ボタンを押すことで設定された再生再開箇所から再生を再開することができる。このようにユーザは再生再開ボタンを繰り返し押すことで再生再開箇所を変えることができる。本実施例のようにシーン変化点に段階的なレベルをつけ、これをユーザが選択することにより、ユーザの事情によって再生再開位置を決定することができる。また、再生再開箇所までの時間を表すのに時間を表す帯状のメータを用いてもよい。これにより視覚的に再生再開までの時間を捕らえることができる。また、本実施例では、シーンの変化点のレベルが大きくなるほど閾値が小さくなるような例を挙げたが、もちろんレベルが小さくなるほど閾値を小さくしてもよい。

次に、図５を用いて再生再開の動作の詳細を説明する。
図５はコンテンツ一時停止時に、ユーザが再生再開箇所サーチボタンを押した際の前記映像再生装置２００における再生再開の処理手順である。なお、シーン変化点情報は、あらかじめ前記シーン変化点検出部２０４によって前記コンテンツ蓄積部２０２に蓄積されたコンテンツのシーン変化点を検出し、前記シーン変化点情報保存部２０５に保存しておく。ユーザはコンテンツを一時停止から再生再開したい場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生再開箇所サーチボタンを押す。これを契機に、図５に示す処理が実行される。前記再生停止信号取得部２０７に前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置から再生再開箇所サーチ信号を取得すると、前記再生再開箇所指定部２０８は前記シーン変化点情報保存部２０５に保存されたシーン変化点情報を取得する（ステップＳ１１０１）。ステップＳ１１０１で取得したシーン変化点情報においてシーン変化点のレベルＬを前記変化点レベル設定部２０３で設定された最大レベルＭＡＸに設定し（ステップＳ１１０２）、レベルＬ以下で最も近いシーン変化点までの時間またはそのシーンのサムネイル画像を前記表示画面２３０に表示する（ステップＳ１１０３）。表示した時間またはサムネイル画像に対してユーザが納得いかなければユーザは再度再生再開箇所サーチボタン（ボタンＡ）を押すが、そのボタンＡが押されたかどうかを判定する（ステップＳ１１０４）。ステップＳ１１０４にてボタンＡが押された場合、すなわち表示した時間またはサムネイル画像に対してユーザが納得いかない場合は、シーン変化点のレベルＬが０より大きいかを判断（ステップＳ１１０５）してから、０より大きい場合のみシーン変化点のレベルＬを１減らす（ステップＳ１１０６）。その後、ステップＳ１１０３に戻って新たなレベルＬ以下のレベルについて最も近いシーン変化点までの時間またはそのシーンのサムネイル画像を前記表示画面２３０に表示して処理を繰り返す。ステップＳ１１０５でシーン変化点のレベルＬが０以下になった場合は、ステップＳ１１０２に戻ってレベルＬを最大レベルＭＡＸに戻して処理を繰り返す。ステップＳ１１０４でボタンＡが押されなかった場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生再開ボタン（ボタンＢ）が押されたかどうかを判定する（ステップＳ１１０７）。ボタンＢが押されていない場合は、ステップＳ１１０３に戻って処理を繰り返す。ステップＳ１１０７で、ボタンＢが押された場合はそのシーン変化点まで遡って再生を再開し（ステップＳ１１０８）、処理を終了する。

以上のように、本実施例では、一時停止ボタンが押された時点より後のシーン変化点で一時停止し、再生再開ボタンが押された時点より前のシーン変化点から再生される。よって、この実施例では同一の場面を重複して視聴することになり、ユーザは比較的長時間にわたって中座した場合であっても内容を理解することが容易になる。
また、一時停止ボタンが押された時点より後のシーン変化点で一時停止し、再生再開ボタンが押された時点から再生がなされるようにしてもよい。このようにすると、区切りのよい所まで視聴し、その時点から再生再開するので、同じ場面を重複してみる事はなく、ユーザは内容を理解することが容易になる。
さらにまた、一時停止ボタンが押された時点で一時停止し、再生再開ボタンが押された時点より前のシーン変化点から再生がなされるようにしてもよい。このようにすると、すぐに一時停止できるが、前のシーン変化点から再生再開するので、内容を思い出すことができ、ユーザは内容を理解することが容易になる。

また、本実施例では、シーン変化点を決めている基準（例えば動画像の前後のフレームの輝度の相違）のレベルを３段階に設定して、これをユーザがリモコンで選択しているが、この基準をユーザがリモコン等で選択してもよい。例えば、動画像の前後のフレームの輝度の相違から動画像の前後のフレームのカラーヒストグラムの相違に変更することである。こうすることにより、コンテンツにより適切な基準を選択することができる。もちろん適切な基準を自動で設定してもよい。
また、本実施例では、一時停止、再生再開を想定しているが、もちろん通常の停止、再生にも本発明は適用できる。

なお、本実施例におけるコンテンツ蓄積部２０２は映像再生装置２００に内蔵されているが、書き換え可能なDVDメディアやメディアカード、USBメモリなどの外付けの記憶装置を用いても良い。これにより多様な形態の記録装置をユーザの好みによって取り替えることができる。さらに記録装置の保守、点検等も容易に行われる。また、前記コンテンツ蓄積部２０２に保存されているコンテンツのうちまだシーン変化点検出を行っていないコンテンツを再生する場合は、再生時に一定時間だけ先のコンテンツデータに対してシーン変化点検出を順次行っていくことで、本実施例を実施することができる。例えば、何倍速かのデコーダを搭載してコンテンツを早読みしてシーン変化点検出しても良いし、メモリ上に展開されたコンテンツデータに対してシーン変化点検出をしてから再生するようにしても良い。この場合、前記シーン変化点検出部２０４で取得したシーン変化点情報は直接、前記停止箇所指定部２０８に渡しても良い。これらの操作によりシーン変化点を速やかに検出することができる。

本実施例により、HDDレコーダやDVDレコーダなどの録画装置に録画されたコンテンツに対して、ユーザがタイミングを逸することなく、切りが良い箇所で自動的に一時停止、再生再開することができる。また、一時停止、再生再開する箇所までの時間をユーザに通知することで、ユーザがいつまで待てば良いかわかることができ、またその表示された時間に対して納得がいかない場合は、ユーザの操作によってさらに一時停止する箇所を短くしたり長くしたりすることができ、ユーザの利便性が向上する。

本実施例は、第１の実施例の映像再生装置においてコンテンツ取得時にコンテンツのシーン変化点検出処理を行ったものである。なお、本実施例におけるコンテンツのシーン変化点検出による一時停止、再生再開機能の概略は実施例１と同じである。
以下に本発明の第２の実施例を、図６を用いて説明する。
図６に示す各構成は図２と同じ構成のものには同じ番号が付されている。
第１の実施例では、一度蓄積したコンテンツデータに対してシーン変化点検出を行っているが、本実施例ではコンテンツ取得時にシーン変化点検出を行ってから蓄積する。すなわち、前記コンテンツ取得部２０１でコンテンツを取得すると、前記変化点レベル設定部２０３で設定された変化点レベルによって前記シーン変化点検出部２０４でシーン変化点を検出してシーン変化点検出を行い、そのシーン変化点情報を前記シーン変化点情報保存部２０５に保存する。

本実施例により、コンテンツ取得時にシーン変化点検出を行うので、再生時には必ずシーン変化点情報があり、再生時にシーン変化点を取得するよりも負荷を軽減することができる。

本実施例は、第１の実施例の映像再生装置においてコンテンツのシーン変化点情報を映像再生装置の外部、例えば放送局やインターネットから取得するものである。なお、本実施例におけるコンテンツのシーン変化点検出による一時停止、再生再開機能の概略は実施例１と同じである。
以下に本発明の第３の実施例を、図７を用いて説明する。
図７は本実施例の映像再生装置のブロック図であり、図７に示す各構成は図２と同じ構成のものには同じ番号が付されている。コンテンツ提供側２１０からシーン変化点情報を取得するシーン変化点情報取得部２１３を新たに備えている。

第１の実施例では、一度蓄積したコンテンツデータに対してシーン変化点検出を行っているが、本実施例では、コンテンツ提供側２１０から該当するコンテンツのシーン変化点情報を取得する。すなわち、前記コンテンツ取得部２０１でコンテンツを取得すると同時に、前記シーン変化点情報取得部２１３で前記コンテンツに対するシーン変化点情報を取得する。

なお、本実施例ではコンテンツ取得と同時にシーン変化点情報も取得しているが、同時でなくても良い。例えば、前記再生停止信号取得部２０７が再生停止信号を取得した時に、前記シーン変化点情報取得部２１３によってシーン変化点情報を取得しても良い。この場合、取得したシーン変化点情報は前記シーン変化点情報保存部２０５に保存する必要はなく、直接、前記停止箇所指定部２０８に渡しても良い。これによりすみやかにシーン変化点を再生及び停止に利用することができる。

また、あらかじめコンテンツ提供側がコンテンツ配信時にメタデータとしてシーン変化点情報をコンテンツデータに埋め込むこともできる。さらにはメタデータをサーバなどに置いておき必要時に参照できるようにしておくなどの方法もある。これによりシーン変化点を必要としている人にシーン変化点を届けることができ、データ送信の効率が上がるメリットがある。

本実施例により、シーン変化点情報を外部から取得する為、装置内部でシーン変化点検出を行う必要が無く、装置の負荷を軽減することができる。

本実施例は、コンテンツデータを蓄積せずに再生のみ行う場合、すなわち、コンテンツの視聴のみで録画は行わない場合に本発明の再生後一時停止、再生再開機能を実施する例である。なお、本実施例におけるコンテンツのシーン変化点検出による一時停止、再生再開機能の概略は実施例１と同じである。
以下に本発明の第４の実施例を、図８〜図１１を用いて説明する。
図８は本実施例の映像再生装置の再生後一時停止機能を用いる際のブロック図であり、図９は本実施例におけるコンテンツ再生時に再生後一時停止を行った際の処理手順を示すフロー図である。また、図１０は本実施例の映像再生装置の再生再開機能を用いる際のブロック図であり、図１１は本実施例におけるコンテンツ一時停止時に再生再開を行った際の処理手順を示すフロー図である。
図８は本実施例の映像再生装置の一時停止機能を用いる際のブロック図であり、図８に示す各構成は図２と同じ構成のものには同じ番号が付されている。本実施例では、再生停止信号取得部２０７により停止信号を取得した時にコンテンツ取得部２０１で取得したコンテンツデータをシーン変化点検出部２０４に渡す切替部２１１と、停止箇所以降のコンテンツデータを一時保存しておくコンテンツ一時保存部２１２が新たに装備されている。

次に、図９を用いて本実施例の動作の詳細を説明する。
図９はコンテンツ再生時に、ユーザが再生後一時停止ボタンを押した際の前記映像再生装置２００における再生後一時停止の処理手順である。ユーザはコンテンツ視聴中に中座したい場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生後一時停止ボタンを押す。これを契機に、図７に示す処理が実行される。前記再生停止信号取得部２０７に前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置から一時停止などの停止信号を取得すると、前記切替部２１１は前記コンテンツ取得部２０１で取得したコンテンツデータを前記シーン変化点検出部２０４に渡す。前記シーン変化点検出部２０４は前記切替部２１１から渡されたコンテンツデータについて前記変化点レベル設定部２０３に従ってシーン変化点を検出し、前記停止箇所指定部２０３にシーン変化点情報を渡す（ステップＳ７０１）。前記シーン変化点検出部２０４で検出されたコンテンツデータは前記再生部２０６に渡し、再生を続行する。なお、シーン変化点を検出する際、一定時間だけ先のコンテンツデータに対してシーン変化点検出を順次行っていくことで、本実施例を実施することができる。例えば、前記コンテンツ取得部２０１から一定時間先のコンテンツデータを先に取得し、何倍速かのデコーダを搭載してコンテンツを早読みしてシーン変化点検出しても良いし、メモリ上に展開されたコンテンツデータに対してシーン変化点検出をしてから再生するようにしても良い。前記停止箇所指定部２０８は、前記シーン変化点情報においてシーン変化点のレベルＬを０に設定し（ステップＳ７０２）、レベルＬ以下で最も近いシーン変化点までの時間を表示画面に表示する（ステップＳ７０３）。表示した残り時間に対してユーザが納得いかなければユーザは再度再生後一時停止ボタンを押すが、そのボタンが押されたかどうかを判定する（ステップＳ７０４）。ステップＳ７０４にてボタンが押された場合、すなわち表示した残り時間に対してユーザが納得いかない場合は、シーン変化点のレベルＬが前記変化点レベル設定部で設定された最大レベルＭＡＸを超えていないかを判断（ステップＳ７０５）してから、最大レベルＭＡＸを超えていない場合のみシーン変化点のレベルＬを１増やす（ステップＳ７０６）。その後、ステップＳ７０３に戻って新たなレベルＬ以下のレベルについて最も近いシーン変化点までの時間を表示画面に表示して処理を繰り返す。ステップＳ７０５でシーン変化点のレベルＬが最大レベルＭＡＸを超えた場合は、ステップＳ７０２に戻ってレベルＬを０に戻して処理を繰り返す。ステップＳ７０４でボタンが押されなかった場合、ステップＳ７０３で表示したレベルＬのシーン変化点まで再生されたかを判断し（ステップＳ７０７）、シーン変化点までまだ再生されていない場合は、ステップＳ７０３に戻って処理を繰り返す。ステップＳ７０７で、シーン変化点まで再生されている場合は、そのシーン変化点からのコンテンツデータを前記コンテンツ一時保存部２１２で一時保存を開始（ステップＳ７０８）してから、そのシーン変化点で一時停止し（ステップＳ７０９）処理を終了する。なお、再生を再開する場合は、前記コンテンツ一時保存部２１２に一時保存したコンテンツを再生する。

図１０は本実施例の映像再生装置の再生再開機能を用いる際のブロック図であり、図１０に示す各構成は図２、図８と同じ構成のものには同じ番号が付されており、図１１を用いて本実施例の動作の詳細を説明する。

図１１はコンテンツ一時停止時に、ユーザが再生再開箇所サーチボタンを押した際の前記映像再生装置２００における再生再開の処理手順である。ユーザはコンテンツを一時停止から再生再開したい場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生再開箇所サーチボタンを押す。これを契機に、図１１に示す処理が実行される。前記再生停止信号取得部２０７に前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置から再生再開箇所サーチ信号を取得すると、前記シーン変化点検出部２０４は前記データ保存部２１２に再生開始時から一時保存されたコンテンツデータについて前記変化点レベル設定部２０３に従ってシーン変化点を検出し、前記再生停止箇所指定部２０８にシーン変化点情報を渡す（ステップＳ１５０１）。ステップＳ１５０１で取得したシーン変化点情報においてシーン変化点のレベルＬを前記変化点レベル設定部２０３で設定された最大レベルＭＡＸに設定し（ステップＳ１５０２）、レベルＬ以下で最も近いシーン変化点までの時間またはそのシーンのサムネイル画像を表示画面に表示する（ステップＳ１５０３）。表示した時間またはサムネイル画像に対してユーザが納得いかなければユーザは再度再生再開箇所サーチボタン（ボタンＡ）を押すが、そのボタンＡが押されたかどうかを判定する（ステップＳ１５０４）。ステップＳ１５０４にてボタンＡが押された場合、すなわち表示した時間またはサムネイル画像に対してユーザが納得いかない場合は、シーン変化点のレベルＬが０より大きいかを判断（ステップＳ１５０５）してから、０より大きい場合のみシーン変化点のレベルＬを１減らす（ステップＳ１５０６）。その後、ステップＳ１５０３に戻って新たなレベルＬ以下のレベルについて最も近いシーン変化点までの時間またはそのシーンのサムネイル画像を表示画面に表示して処理を繰り返す。ステップＳ１５０５でシーン変化点のレベルＬが０以下になった場合は、ステップＳ１５０２に戻ってレベルＬを最大レベルＭＡＸに戻して処理を繰り返す。ステップＳ１５０４でボタンＡが押されなかった場合、前記映像再生装置２００の操作パネルあるいは前記リモコン２２０などの入力装置に設けられた再生再開ボタン（ボタンＢ）が押されたかどうかを判定する（ステップＳ１５０７）。ボタンＢが押されていない場合は、ステップＳ１５０３に戻って処理を繰り返す。ステップＳ１５０７で、ボタンＢが押された場合はそのシーン変化点まで遡って再生を再開し（ステップＳ１５０８）、処理を終了する。
本実施例により、コンテンツデータを蓄積せずに再生のみ行う場合、すなわち、コンテンツの視聴のみで録画は行わない場合にでも本発明を実施することができる。

本実施例は、第４の実施例の映像再生装置においてコンテンツのシーン変化点情報を外部から取得するものである。なお、本実施例におけるコンテンツのシーン変化点検出による一時停止機能の概略は実施例１と同じである。
以下に本発明の第５の実施例を、図１２、図１３を用いて説明する。
図１２は本実施例の映像再生装置の一時停止機能を用いる際のブロック図であり、図１３は本実施例の映像再生装置の再生再開機能を用いる際のブロック図である。
図１２において、各構成は図２、図７、図８と同じ構成のものには同じ番号が付されている。
本実施例では、コンテンツ提供側２１０から該当するコンテンツのシーン変化点情報を取得する。すなわち、前記再生停止信号取得部２０７が停止信号を取得した時に、前記シーン変化点情報取得部２１３によって再生中のコンテンツに対するシーン変化点情報を取得し、そのシーン変化点情報を前記停止箇所指定部２０８に渡す。

なお、コンテンツ取得と同時にシーン変化点情報を取得しても良い。この場合、取得したシーン変化点情報はメモリなどの一時記憶装置に記憶しておく必要がある。
図１３において、各構成は図２、図７、図８と同じ構成のものには同じ番号が付されている。
図１３では、コンテンツ提供側２１０などの外部から該当するコンテンツのシーン変化点情報を取得する。すなわち、前記再生停止信号取得部２０７が再生再開箇所サーチ信号を取得した時に、前記シーン変化点情報取得部２１３によって再生中のコンテンツに対するシーン変化点情報を取得し、そのシーン変化点情報を前記再生再開箇所指定部２０８に渡す。

なお、コンテンツ取得と同時にシーン変化点情報を取得しても良い。この場合、取得したシーン変化点情報はメモリなどの一時記憶装置に記憶しておく必要がある。
本実施例により、シーン変化点情報を外部から取得する為、装置内部でシーン変化点検出を行う必要が無く、装置の負荷を軽減することができる。

本発明における一時停止機能の概略を示す図。本発明の第１の実施形態における映像再生装置のブロック図。本発明の第１の実施形態における一時停止機能の処理手順を示すフロー図。本発明における再生再開機能の概略を示す図。本発明の第１の実施形態における再生再開機能の処理手順を示すフロー図。本発明の第２の実施形態における映像再生装置のブロック図。本発明の第３の実施形態における映像再生装置のブロック図。本発明の第４の実施形態における一時停止機能使用時の映像再生装置のブロック図。本発明の第４の実施形態における一時停止機能の処理手順を示すフロー図。本発明の第４の実施形態における再生再開機能使用時の映像再生装置のブロック図。本発明の第４の実施形態における再生再開機能の処理手順を示すフロー図。本発明の第５の実施形態における一時停止機能使用時の映像再生装置のブロック図。本発明の第５の実施形態における再生再開機能仕様時の映像再生装置のブロック図。

符号の説明

２００…映像再生装置
２０１…コンテンツ取得部
２０２…コンテンツ蓄積部
２０３…変化点レベル設定部
２０４…シーン変化点検出部
２０５…シーン変化点情報保存部
２０６…再生部
２０７…再生停止信号取得部
２０８…再生停止箇所指定部
２１０…コンテンツ提供側
２２０…リモコン
２３０…表示画面

Claims

映像の再生を行う映像再生装置であって、
シーンの変化点を判別するシーン変化点判別手段と、再生及び再生の停止を制御する再生制御手段とを具備し、
前記シーン変化点判別手段が、シーン変化点を判別する判別レベルを２つ以上持ち、前記再生制御手段はユーザが指定した判別レベルのシーン変化点に達した時点で映像の停止及び再生するように制御することを特徴とした映像再生装置。
請求項１に記載の映像再生装置において、
前記シーン変化点判別手段は、前記再生中の動画像の各フレームの信号中の特徴量を算出し、該各フレームの特徴量の比較に基づきシーン変化点を判別することを特徴とした映像再生装置。
請求項２に記載の映像再生装置において、
前記フレームの特徴量は、前記画像信号のカラーヒストグラムを含むことを特徴とする映像再生装置。
請求項２に記載の映像再生装置において、
前記フレームの特徴量は、前記動画像から読み出されたオーディオ情報を含むことを特徴とする映像再生装置。
請求項２に記載の映像再生装置において、
前記フレームの特徴量は、前記動画像信号の動き補償情報を含むことを特徴とする映像再生装置。
請求項１に記載の映像再生装置において、
前記判別レベルを設定する変化点レベル設定手段を備え、
前記シーン変化点判別手段は、前変化点レベル設定手段により設定された判別レベルにもとづきシーン変化点を判別することを特徴とする映像再生装置。
請求項１に記載の映像再生装置において
前記シーン変化点判別手段は、シーン変化点を判別する判別基準を２種類以上有し、
前記再生制御手段は、ユーザが選択した判別基準によるシーン変化点において、映像の停止及び再生するように制御することを特徴とした映像再生装置。
請求項１に記載の映像再生装置において
前記シーン変化点判別手段は、映像に付随した付加情報に基づいてシーンの変化点を判別することを特徴とした映像再生装置。
請求項１に記載の映像再生装置であって、
前記シーン変化点判別手段により判別したシーンの変化点に関する情報を記録するシーン変化点記録手段を具備し、
前記シーン変化点判別手段は、映像を再生する前にあらかじめ該映像のシーンの変化点を判別し、前記シーン変化点記録手段に記録することを特徴とした請求項に記載の映像再生装置。
映像の再生を行う映像再生装置であって、
シーンの変化点を判別するシーン変化点判別手段と、映像を表示する表示手段と、を具備し、
ユーザが再生中の映像の一時停止を要求すると、前記シーン変化点判別手段が判別したシーンの変化点に達するまでの時間に関する情報を前記表示手段が表示することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した時点とは異なる時点で再生中の映像は停止し、ユーザが再生の操作をすると、該停止した時点から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した時点で映像の再生を停止し、ユーザが再生の要求をすると、ユーザが操作した時点とは異なる時点から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した時点とは異なる時点で停止し、ユーザが再生の操作をすると、ユーザが操作した時点とは異なる時点から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生の操作をすると、ユーザが操作した時点とは異なる時点から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した場面とは異なる場面で再生中の映像は停止し、ユーザが再生の操作をすると、該停止した場面から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した場面で映像の再生を停止し、ユーザが再生の要求をすると、ユーザが操作した場面とは異なる場面から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生中の映像の停止の操作をすると、ユーザが操作した場面とは異なる場面で停止し、ユーザが再生の操作をすると、ユーザが操作した場面とは異なる場面から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
映像の再生を行う映像再生装置であって、
再生の停止及び再生を制御する再生制御手段を具備し、
ユーザが再生の操作をすると、ユーザが操作した場面とは異なる場面から再生をするように前記再生制御手段が制御することを特徴とした映像再生装置。
請求項１０から請求項１７のいづれか一つに記載の映像再生装置において、
シーンの変化点を判別するシーン変化点判別手段を備え、
前記ユーザが操作した時点とは異なる時点とは、前記シーン変化点判別手段が判別したシーン変化点であることを特徴とする映像再生装置。
番組及び番組に関する情報の信号を送信する送信装置であって、
前記送信装置は、前記番組のシーンが変化するシーン変化点に関する情報を送信することを特徴とする送信装置。
番組及び番組に関する情報の信号を送信する送信方法であって、
前記送信方法は、前記番組のシーンが変化するシーン変化点に関する情報を送信するステップを有することを特徴とする送信方法。
番組及び前記番組のシーンの変わり目であるシーン変化点に関する情報を送信する送信装置と、
前記番組及び前記シーン変化点に関する情報を受信する受信装置とを有する送受信システムであって、
前記受信装置は、前記送信装置により送信された番組及びシーン変化点に関する情報を記憶する記憶手段と、前記記憶手段に記憶された番組の再生の再生及び停止を制御する再生制御手段と、前記記憶手段に記憶されたシーン変化点に関する情報よりシーン変化点を検出するシーン変化点検出手段を備え、
ユーザが再生中の映像の停止の操作をすると、前記シーン変化点取得手段で取得したシーン変化点で再生中の映像は停止し、ユーザが再生の操作をすると、該停止した時点から再生をするように前記再生制御手段が制御することを特徴とした送受信システム。