JP6583516B2 - 再生装置、再生方法及び再生プログラム - Google Patents

Description

本発明は再生装置、再生方法及び再生プログラムに関し、特に動画を再生する再生装置、再生方法及び再生プログラムに関する。

デジタルカメラやデジタルビデオで撮影した動画データを再生する方法において、通常の再生速度より速い早送り速度で動画データを再生することにより、再生時間を短縮することが行われている。

例えば、特許文献１には、録画内容に物体または人物の動きがあるシーンを検出して、通常の再生速度で再生し、それ以外のシーンでは、早送りとする再生装置が記載されている。

特開平１０−１７４０５６号公報

しかしながら特許文献１に記載された再生装置では、通常の再生速度で再生されるシーンと、撮影者が重要と考えて通常の再生速度で再生したいシーンとが一致しないという問題があった。すなわち、撮影者が重要と考えていないシーンであっても、録画内容に物体または人物の動きがある場合、特許文献１の再生装置では、通常の再生速度で再生されてしまい、再生時間が十分に短縮されず、限られた時間内で再生を希望する録画データ全てを視聴することができないという問題があった。

本発明の再生装置は、動画データのシーン単位の重要度に基づいて、前記重要度がより高いシーンをより遅い再生速度に設定し、前記重要度がより低いシーンをより速い再生速度に設定する再生制御部と、前記動画データをシーン単位で前記再生制御部に設定された再生速度に変換する画像データ処理部と、を備え、前記再生制御部は、あらかじめ設定された再生時間内に前記動画データを再生する。

本発明の再生装置は、前記再生制御部は、前記重要度がより高いシーンを１倍速の再生速度に設定し、前記重要度がより低いシーンを、１倍速より速い再生速度、かつ前記再生時間内に前記動画データ全体を再生可能な再生速度に設定する。

これらの構成によれば、動画データのうち、撮影者が重要と考えたシーンが遅い再生速度で再生されることにより内容を十分に視聴でき、また、撮影者が重要ではないと考えたシーンが速い再生速度で再生されることにより再生時間を短縮することができるので、限られた時間内で重要度に応じた再生速度で録画データ全てを視聴することができる。

本発明の再生装置は、前記動画データは、少なくとも動画及びタグをシーン単位で組み合わせた動画データであり、前記動画データに付与されたタグをシーン単位で取り出すタグデータ処理部を更に備え、前記再生制御部は、前記タグが付与されたシーンを前記重要度がより高いシーンとして、より遅い再生速度に設定し、前記タグが付与されていないシーンを前記重要度がより低いシーンをより速い再生速度に設定する。

この構成によれば、動画データのうち、タグが付与されたシーンが遅い再生速度で再生されることにより内容を十分に視聴でき、またタグが付与されていないシーンが速い再生速度で再生されることにより再生時間を短縮することができるので、限られた時間内で重要度に応じた再生速度で録画データ全てを視聴することができる。

本発明の再生装置は、前記動画データは、少なくとも動画、タグ及び重要度をシーン単位で組み合わせたデータであり、前記動画データに付与されたタグ及び優先度をシーン単位で取り出すタグデータ処理部を更に備え、前記再生制御部は、前記タグが付与され、かつ前記優先度がより高いシーンを、より遅い再生速度に設定し、前記タグが付与され、かつ前記優先度がより低いシーンを、より速い再生速度に設定し、前記タグが付与されていないシーンを、前記タグが付与され、かつ前記優先度がより低いシーンより更に速い再生速度に設定する。

この構成によれば、動画データのうち、タグが付与され、かつ重要であるシーンが遅い再生速度で再生されることにより内容を十分に視聴でき、またタグが付与されたかつ重要ではないシーンが速い再生速度で再生され、またタグが付与されていないシーンが更に速い再生速度で再生されることにより再生時間を短縮することができるので、限られた時間内で再生を希望する録画データ全てを視聴することができる。

本発明の再生方法は、動画データのシーン単位の重要度に基づいて、前記重要度がより高いシーンをより遅い再生速度で再生し、前記重要度がより低いシーンをより速い再生速度であらかじめ設定された再生時間内に前記動画データを再生する。

本発明の再生プログラムは、動画データ、及び前記動画データのシーン単位の重要度を記録媒体より読み出す読み出しステップと、前記シーン単位の前記重要度に基づいて、前記重要度がより高いシーンをより遅い再生速度で再生し、前記重要度がより低いシーンをより速い再生速度で、あらかじめ設定された再生時間内に前記動画データを表示デバイスで再生する表示ステップと、をコンピュータに実行させる。

これらの構成によれば、動画データのうち、重要度なシーンは、遅い再生速度で再生することにより、内容を十分に視聴でき、また重要度ではないシーンを速い再生速度で再生することにより、時間を短縮することができるので、限られた時間内で再生を希望する録画データ全てを視聴することができる。

本発明の再生装置、再生方法及び再生プログラムによれば、限られた時間内で再生を希望する録画データ全てを視聴することができる。

実施の形態１にかかる再生装置の構成を示すブロック図である。 実施の形態１にかかる再生装置の動作の例を示すフローチャートである。 実施の形態１にかかる再生装置の動作の例を示すフローチャートである。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 動画データの各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。 記録時間と再生時間との関係を示す図である。 実施の形態１に係るタギングシステム１の概略構成を示すブロック図である。 実施の形態１に係る心拍数の時間変化と、タグの範囲との関係を示す図である。 実施の形態１に係る心拍数の時間変化と、タグの範囲との詳細な関係を示す図である。 実施の形態１に係るタグ範囲処理部の詳細な処理手順を示すフローチャートである。

（実施の形態１）
以下、図面を参照して本発明の実施の形態について説明する。図１は、実施の形態１にかかる再生装置の構成を示すブロック図である。図１において、再生装置１００は、ＣＰＵ１０１と、記録媒体１０２と、データ入出力部１０３と、タグデータ処理部１０４と、再生制御部１０５と、画像データ処理部１０６と、キー入力部１０７と、キー制御部１０８と、表示デバイス１０９と、表示制御部１１０とを備える。

ＣＰＵ１０１は、中央処理ユニット(Central Processing Unit)であり、データ入出力部１０３と、タグデータ処理部１０４と、再生制御部１０５と、画像データ処理部１０６と、キー制御部１０８と、表示制御部１１０とデータバスで接続し、プログラムの命令を実行することで情報処理を行う。

記録媒体１０２は、動画データを記録する媒体である。例えば、記録媒体１０２は、フラッシュメモリ等の不揮発性メモリが好適である。また、記録媒体１０２は、再生装置１００から取り外し可能としてもよい。

データ入出力部１０３は、記録媒体１０２にデータを記憶する、または記録媒体１０２からデータを読み出す。例えば、データ入出力部１０３は、記録媒体１０２とのインターフェース回路で構成されることが好適である。

タグデータ処理部１０４は、動画データに付属しているタグデータ及び重要度の情報を取り出して、再生制御部１０５に出力する。

再生制御部１０５は、動画データに付属するタグデータ及び重要度の情報に基づいて、動画データの再生速度を設定する。例えば、再生制御部１０５は、動画データに付属するタグデータ及び重要度の情報に基づいて、動画データの再生速度をシーン単位で設定する。

例えば、再生制御部１０５は、動画データのシーン単位の重要度に基づいて、重要度がより高いシーンをより遅い再生速度に設定し、重要度がより低いシーンをより速い再生速度に設定する。また、例えば、再生制御部１０５は、重要度がより高いシーンを１倍速の再生速度に設定し、重要度がより低いシーンを、１倍速より速い再生速度、かつ希望する再生時間内に動画データ全体を再生可能な再生速度に設定する。

また、例えば、再生制御部１０５は、少なくとも動画及びタグをシーン単位で組み合わせた動画データに対して、タグが付与されたシーンを重要度がより高いシーンとして、より遅い再生速度に設定し、タグが付与されていないシーンを重要度がより低いシーンをより速い再生速度に設定する。

また、例えば、再生制御部１０５は、少なくとも動画、タグ及び重要度をシーン単位で組み合わせた動画データに対して、タグが付与され、かつ優先度がより高いシーンを、より遅い再生速度に設定し、タグが付与され、かつ優先度がより低いシーンを、より速い再生速度に設定し、タグが付与されていないシーンを、タグが付与され、かつ優先度がより低いシーンより更に速い再生速度に設定する。

画像データ処理部１０６は、記録媒体１０２に記憶された動画データに画像処理を行う。具体的には、画像データ処理部１０６は、動画データをＣＰＵ１０１または再生制御部１０５が指示するフレームレート（再生速度）に変換する。

キー入力部１０７は、再生装置１００の操作に必要な入力を受け付ける。例えば、キー入力部１０７は、ボタンの押下等の操作により電気回路を接続するスイッチ等が好適である。

キー制御部１０８は、キー入力部１０７の操作による信号に対して各種処理を行い、出力する。例えば、キー制御部１０８は、電気信号の増幅、チャタリングによるノイズの除去等の処理を行う。

表示デバイス１０９は、表示制御部１１０を介して画像データ処理部１０６で処理された動画データを表示するデバイスである。例えば、表示デバイス１０９は、液晶ディスプレイ、有機ＥＬディスプレイ、プラズマディスプレイ、ビデオプロジェクタ、ブラウン管等が好適である。

表示制御部１１０は、画像データ処理部１０６で変換された動画データを再制御部１０５によって再生させて表示デバイス１０９で表示するために、電気信号の変換、増幅を行う。例えば、表示制御部１１０は、ディスプレイドライバ回路が好適である。

次に、再生装置１００の動作について説明する。図２、３は、実施の形態１に係る再生装置の動作の例を示すフローチャートである。

まず、キー入力部１０７の操作による入力もしくは選択肢から選ぶなどして、あらかじめ動画データの目標再生時間を設定しておく。目標再生時間とは、ユーザが自由に設定できる時間のことであり、動画データが目標再生時間よりも長い時間のデータだった場合でも動画データの再生速度を変化させることで目標再生時間として設定した時間内で再生される。ここで、目標再生時間は、ＣＰＵに付属した記憶領域（図示しない）に保存される。

次にステップＳ２０１において、再生する動画データの再生速度を設定する必要があるか否かを判断する。具体的には、ステップＳ２０１において、再生制御部１０５が、再生する動画データの総記録時間が目標とする再生時間以上であるか否か判断する。再生する動画データの総記録時間が目標とする再生時間以上である場合、再生速度を変更する必要があるのでステップＳ２０２に進む。また、再生する動画データの総記録時間が目標とする再生時間未満である場合、再生速度を変更する必要がないので、処理を終了する。

次にステップＳ２０２において、再生制御部１０５が、重要度の情報が付与されているシーンを、重要なシーンとして各々Ｓ０〜Ｓｎ（ｎは整数）と設定し、ステップＳ２０３に進む。

ステップＳ２０３において、再生制御部１０５が、シーンＳ０〜Ｓｎの中で最も重要なシーンの記録時間が第１の設定時間以下であるか否か判断する。ここで第１の設定時間は、重要なシーンを再生するための時間であり、例えば１倍速の再生速度で再生するシーンのための再生時間である。シーンＳ０〜Ｓｎの中で最も重要なシーンの記録時間が第１の設定時間以下である場合、ステップＳ２０５に進む。シーンＳ０〜Ｓｎの中で最も重要なシーンの記録時間が第１の設定時間より大きい場合、ステップＳ２０４に進む。

ステップＳ２０４において、再生制御部１０５が、第１の設定時間を予め設定した値から最も重要なシーンの記録時間に変更し、少なくとも１つの最も重要なシーンを第１の設定時間に（１倍速で）再生できるようにして、ステップＳ２０５に進む。

ステップＳ２０５及びＳ２０６において、タグが付与されたシーンのうち、第１の設定時間以内に１倍速で再生可能なシーンを選択する。

具体的には、ステップＳ２０５において、再生制御部１０５が、シーンＳ０〜Ｓｎの総記録時間が第１の設定時間以内であるか否か判断する。シーンＳ０〜Ｓｎの総記録時間が第１の設定時間以内である場合、ステップＳ２０７に進み、シーンＳ０〜Ｓｎの総記録時間が第１の設定時間より大きい場合、ステップＳ２０６に進む。

そして、ステップＳ２０６において、再生制御部１０５が、シーンＳ０〜Ｓｎの中で最も重要度の低いシーンを除き、新たなシーンＳ０〜Ｓｎとし、除外されたシーンをＪ０〜Ｊｍ（ｍは整数）として、ステップＳ２０５に戻る。すなわち、ステップＳ２０５及びステップＳ２０６のループ処理により、重要度が低い順に除外して、第１の設定時間以内に収まるシーンＳ０〜Ｓｎを選択している。なお、このｎおよびｍはこの対象シーン除外の処理により変動する。対象シーン除外の処理が行われると、ｎは減少し、ｍが増加する。

ステップＳ２０７において、再生制御部１０５が、第１の設定時間に収まらないため除外したシーンＪ０〜Ｊｍがあるか否か判断する。第１の設定時間に収まらないため除外したシーンＪ０〜Ｊｍがある場合、ステップＳ２０８に進み、第１の設定時間に収まらないため除外したシーンＪ０〜Ｊｍがない場合、ステップＳ２１２に進む。

ステップＳ２０８において、再生制御部１０５が、シーンＳ０〜Ｓｎの記録時間と第１の設定時間とが一致せずに余った時間である、第１の設定時間からシーンＳ０〜Ｓｎの記録時間を減算した値を、第２の設定時間に加え、ステップＳ２０９に進む。

ステップＳ２０９において、再生制御部１０５が、シーンＪ０〜Ｊｍの総記録時間が第２の設定時間以内であるか否か判断する。シーンＪ０〜Ｊｍの総記録時間が第１の設定時間以内である場合、ステップＳ２１１に進み、シーンＪ０〜Ｊｍの総記録時間が第２の設定時間より大きい場合、ステップＳ２１０に進む。

ステップＳ２１０において、再生制御部１０５が、シーンＪ０〜Ｊｍを第２の設定時間内で再生できる、Ｊ０〜Ｊｍの再生速度（第２再生速度）を設定し、ステップＳ２１３に進む。具体的には、ステップＳ２１０では、シーンＪ０〜Ｊｍの総記録時間を第２の設定時間で除算することにより、Ｊ０〜Ｊｍの再生速度（第２再生速度）を得る。

ステップＳ２１１において、再生制御部１０５が、シーンＪ０〜Ｊｍの再生速度（第２再生速度）を１倍速に設定し、第２設定時間からシーンＪ０〜Ｊｍの記録時間を減算した値を、第３の設定時間に加え、ステップＳ２１３に進む。

ステップＳ２１２において、再生制御部１０５が、第３の設定時間を設定し、ステップＳ２１３に進む。具体的には、ステップＳ２１２では、第１の設定時間に第２の設定時間を加え、シーンＳ０〜Ｓｎの総記録時間を減じて得られた値を、第３の設定時間に加える。

ステップＳ２１３において、再生制御部１０５が、重要度が付加されていないシーンの再生速度設定（第３再生速度）を設定し、ステップＳ２１４に進む。具体的には、ステップＳ２１３では、重要度が付加されていないシーンの総記録時間を第３の設定時間で除算して、重要度が付加されていないシーンの再生速度設定（第３再生速度）を得る。なお、重要度が付加されていないシーンが存在せず、第３再生速度がない場合、第３再生速度を０とする。

ステップＳ２１４では、重要度が下位であるシーンの再生速度（第２の再生速度）が、タグが付与されていない重要度が下位であるシーンの再生速度（第３の再生速度）より遅いか確認する。ステップＳ２１４において、再生制御部１０５が、第２再生速度が第３再生速度以下であるか否か判断する。第２再生速度が第３再生速度以下である場合、ステップＳ２１６に進み、第２再生速度が第３再生速度より大きい場合、ステップＳ２１５に進む。

ステップＳ２１５において、再生制御部１０５が、第２再生速度と第３再生速度と等しくし、ステップＳ２１６に進む。具体的には、ステップＳ２１５では、Ｓ０〜Ｓｎを除いたシーンの総再生時間を、第２と第３の設定時間の和で除算することにより、第２再生速度及び第３再生速度を得る。

ステップＳ２１６において、再生制御部１０５が、Ｓ０〜Ｓｎを１倍速（第１の再生速度）に、Ｊ０〜Ｊｍを第２の再生速度に、その他のシーンを第３の再生速度に、各々設定し、ステップＳ２１７に進む。

ステップＳ２１７において、画像データ処理部１０６が、動画データの各シーンを設定された再生速度に対応するデータに変換し、表示制御部１１０を介して、表示デバイス１０９で表示する。

以上の動作により、再生装置１００は、シーン単位で重要度を考慮した再生速度を決定することができる。

次に、再生装置１００を用いて再生速度を決定する例について説明する。ここでは、一例として、１２０分の記録映像を重要度に応じて再生速度を変えて、再生時間を３０分に収める例について説明する。具体的には、仮に１２０分の記録映像の内容が、１２０分の野球の試合があった場合について説明する。

１２０分の記録映像の中で、タグが打たれたシーンのうち重要度が高いシーンを１５分、重要度が高くないシーンを１０分、タグが打たれていないシーンを５分の計３０分で再生する設定とした場合、以下の配分が考えられる。

ヒット、ファインプレーやクロスプレー、ピンチを三振や併殺などでしのいだシーン、その他ポイントとなるシーン等で合計６０回、それぞれに一律３０秒の範囲を持つタグが打ち込まれたと仮定する。この場合、タグが打たれた回数は６０回、それぞれ３０秒なので、タグが打たれた範囲を全て１倍速で再生すると１８００秒＝３０分となる。

この中で、重要度の高い３０個のタグを１倍速で再生すると、再生時間は、３０個×３０秒＝９００秒＝１５分となる。そして、残りの重要度の高くない３０個のタグを１倍速で再生すると３０個×３０秒＝９００秒＝１５分となるが、この再生時間１５分を１０分に収めるために１５／１０＝１．５倍速で再生する。

また、タグが打たれていない９０分の記録映像を残りの５分の再生時間に収めるためには、１８倍速で再生することになる。この結果、再生時間は合計して３０分に収まる。

通常の動画は１秒間に６０フレーム（６０枚）の画像で構成されており、１８倍速で再生するということは、１秒間の６０枚の画像から３．３３枚の画像を抜き出して再生するということである。言い換えれば３秒間の１８０枚の画像から１０枚の画像を抜き出して再生するということである。１８倍速程度であればピッチャーが投げた球の種類やバッターが打つ瞬間などを確認することはできないものの、投球回数や打者の交代や走塁、チェンジのシーンなど試合の流れ自体を把握するのには問題の無い速度である。

また、タグの数が上記の半分程度だった場合、タグが打たれたシーンの時間は１５分程度で、タグの打たれたシーンすべてを１倍速で再生できる。タグが打たれていないシーンの１１５分を、残りの１５分で再生すればよいので、タグが打たれていないシーンの再生速度は７．６６倍となる。

逆に、タグの数が９０個あった場合は重要度の高い３０個は１倍速、重要度の低い６０個は３倍速、タグの打たれていないシーンは１５倍速となる。

さらにタグが１度も打たれなかった場合、再生速度は、記録時間１２０分を目標再生時間３０分で割った４倍速となる。

このように通常のケースでは、タグが打たれた部分の重要度が高くないシーンでも１〜４倍速程度で再生され（ただし、記録時間全体に占めるタグのあるシーンの時間が多くなっていくと最大７倍になる）、タグが打たれていない部分は４〜２０倍程度で再生されることになる（なお、計算上の最大値は１９倍となる）。

なお、上記説明の具体的な数値は１２０分の記録画像を３０分で再生する場合であり、１２０分の記録画像をもっと短い時間で再生する場合はここに記載した値よりも早い再生速度となり、逆の場合は遅い再生速度となる。

以上のようにして、再生制御部１０５は、動画データのシーン単位の再生速度を決定し、画像データ処理部１０６によって再生速度を変換された動画データは、再生制御部１０５によって再生される。

以下、タグ及び重要度の付与のパターン別にケースを示して再生速度の算出例について説明する。

通常、記録された映像の中にタグが打たれたシーンが離散的に存在し、その間の部分がタグの無いシーンとなるが、ここでは、特殊なケースを発生させることと説明を簡単にするために、１２０分中１２のシーンがあり、タグの持つシーンを数分単位と想定して説明を行う。また、説明の簡略化のため、小数点第２位以下の省略した説明とするが、実際には小数点第２位以下について考慮してもよい。

図４、６、８、１０、１２、１４、１６は、各シーンの番号（Ｎｏ．）、記録時間、タグが打たれたシーンを表すマーク（＊）、マークがあるシーンの重要度の順番、再生速度及び再生時間の関係を示す図である。また、図５、７、９、１１、１３、１５、１７は、記録時間と再生時間との関係を示す図である。これら図４−１７について、図２、３のフローに沿って説明する。

＜ケース１＞
ケース１では、標準的な例について図４、５を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分に設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン１の記録時間は６分であり、第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

次に、タグが付与されたシーン１，５，３，８の総記録時間が２７分であり、第１の設定時間１５分より大きく、図３のステップＳ２０５の判定がＮｏとなる。したがって、タグが付与されたシーンの総記録時間が第１の設定時間内に収まらないので、ステップＳ２０５〜Ｓ２０６のループによりタグが付与されたシーンを重要度が低い順に除外する。そして、シーン１，５の総記録時間９分が、第１の設定時間１５分以内であるので、シーン１，５は、重要度が上位であるシーンＳ０〜Ｓ１に設定され、除外されたシーン３，８は重要度が下位であるシーンＪ０〜Ｊ１に設定される。

次に、タグが付与されたシーンが第１の設定時間内に収まらないことにより、図３のステップＳ２０７の判定がＹｅｓとなるので、重要度が下位であるシーンの総再生時間（第２の設定時間）の設定を行う。具体的には、第２の設定時間１０分に、第１の設定時間１５分からＳ０〜Ｓ１の記録時間９分を減算した値６分を加えて１６分とする。

次に、Ｊ０〜Ｊ１の記録時間１８分が第２の設定時間１６分より大きく、図３のステップＳ２０９の判定がＮｏであるので、第２の設定時間内でＪ０〜Ｊ１のシーンを再生するための再生速度を決定する。具体的には、Ｊ０〜Ｊ１の再生時間１８分を第２の設定時間１６分で除算し、再生速度を１８／１６＝１．１２５倍速とする。

また、タグが付与されていないシーンの総記録時間９３分を、タグが付与されていないシーンの総再生時間（第３の設定時間）５分に収めるため再生速度を９３／５＝１８．６倍速とする。

次に、重要度が下位であるシーンの再生速度（第２の再生速度）が、タグが付与されていないシーンの再生速度（第３の再生速度）より遅いか確認する。具体的には、第２の再生速度１．１２５倍速が第３の再生速度１８．６倍速以下であり、図３のステップＳ２１４の判定がＹｅｓであるので、第２再生速度と第３再生速度は変更しない。そして、第２再生速度と第３再生速度は変更しない。そして、第１の再生速度が１倍速、第２の再生速度が１．１２５倍速、第３の再生速度が１８．６倍速、にそれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図５に示す。

＜ケース２＞
ケース２では、最も重要なシーンの記録時間が第１の設定時間より大きく、図３のステップＳ２０３の判定がＮｏとなる例について、図６、７を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分、にそれぞれ設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン２の記録時間１８分が、第１の設定時間の１５分を超えており、図３のステップＳ２０３の判定がＮｏであるので、第１の設定時間を１８分とする。

次に、タグが付与されたシーン２，１，６，４の総記録時間が４５分であり、第１の設定時間１８分より大きく、図３のステップＳ２０５の判定がＮｏとなる。したがって、タグが付与されたシーンの総記録時間が第１の設定時間内に収まらないので、ステップＳ２０５〜Ｓ２０６のループによりタグが付与されたシーンを重要度が低い順に除外する。そして、シーン２の総記録時間１８分が、第１の設定時間１８分以内であるので、シーン２をＳ０に設定し、シーン１，６，４をＪ０〜Ｊ２に設定する。

次に、第１の設定時間１８分からＳ０の記録時間１８分を減算した値が０分であり、図３のステップＳ２０７の判定がＮｏであるので、第２の設定時間を変更しない。

次に、Ｊ０〜Ｊ２の記録時間２７分が第２の設定時間１０分より大きく、図３のステップＳ２０９の判定がＮｏであるので、Ｊ０〜Ｊ２の再生時間を１０分に収めるため、再生速度を２７／１０＝２．７倍速とする。

次に、タグが付与されていないシーンの総記録時間７５分を、タグが付与されていないシーンの総再生時間（第３の設定時間）５分に収めるため、再生速度を７５／５＝１５倍速とする。

次に、第２の再生速度２．７倍速が第３の再生速度１５倍速以下であり、図３のステップＳ２１４の判定がＹｅｓであるので、第２再生速度と第３再生速度は変更しない。そして、第１の再生速度が１倍速、第２の再生速度が２．７倍速、第３の再生速度が１５倍速、にそれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図７に示す。

なお、ケース２では、図３のステップＳ２０３の判定が最も重要なシーンが、第１の設定時間の初期値に対して３分だけ超えているので、第１の設定時間の初期値を１５分のままとした場合、合計再生時間は３３分になってしまう。

最も重要なシーンが第１の設定時間を超えた分、第２・第３の設定時間を減少させるという処理も考えられるが、通常の撮影においてはまず発生しない事案である事と最も重要なシーンが目標再生時間以上だった場合の処理も発生するため、このような処理は行わず、第１の設定時間を最も重要なシーンの記録時間とする。

また、原則として最も重要なシーンの再生速度は１倍速とするので、最も重要なシーンが第１の設定時間を超えた分だけ全体の再生時間は延びるが、後処理として最終的に算出された再生時間から全体の再生速度を３０分に収まるよう（３３／３０＝１．１倍速にして３０分、）にしてもよい。

＜ケース３＞
ケース３では、第１の設定時間に収まらないために除外したシーンがなく、図３のステップＳ２０７の判定がＮｏである場合について、図８、９を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分に設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン５の記録時間は３分であり、第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

次に、タグが付与されたシーン５，１，１０の総記録時間が１２分であり、第１の設定時間１５分より小さく、タグが付与されたシーンの総記録時間が第１の設定時間内に収まるので、図３のステップＳ２０５の判定がＹｅｓとなり、シーン５，１，１０を重要度が上位であるシーンＳ０〜Ｓ２に設定される。すなわち、また除外したシーンに対応するＪ０〜Ｊｍは設定されない。

次に、除外したシーンがなく、図３のステップＳ２０７の判定がＮｏであるので、（第１の設定時間１５分に第２の設定時間１０分を加えＳ０〜Ｓ２の記録時間１２分を減算した値１３分を第３の設定時間５分に加えて、第３の設定時間を１８分とする。

次に、タグが付与されていないシーンの総記録時間１０８分について、タグが付与されていないシーンの総再生時間（第３の設定時間）１８分に収めるため再生速度を１０８／１８＝６倍速とする。

次に、第２の再生速度が設定されていない場合は、図３のステップＳ２１４の判定を例外処理としてＹｅｓにする。この結果、（第２再生速度と）第３再生速度は変更されない。そして、第１の再生速度が１倍速、第２の再生速度が無し、第３の再生速度が６倍速、にそれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図９に示す。

＜ケース４＞
ケース４では、図３のステップＳ２０９の判定がＹｅｓになる場合について、図１０、１１を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分、にそれぞれ設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン５の記録時間は３分であり、第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

次に、タグが付与されたシーン５，１，１０，３の総記録時間が２１分であり、第１の設定時間１５分より大きく、図３のステップＳ２０５の判定がＮｏとなる。したがって、タグが付与されたシーンの総記録時間が第１の設定時間内に収まらないので、ステップＳ２０５〜Ｓ２０６のループによりタグが付与されたシーンを重要度が低い順に除外する。そして、シーン５，１，１０の総記録時間が１２分であり、第１の設定時間１５分以内であるので、シーン５，１，１０をＳ０〜Ｓ２に設定し、シーン３をＪ０に設定する。

次に、タグが付与されたシーンが第１の設定時間内に収まらないことにより、図３のステップＳ２０７の判定がＹｅｓとなるので、第１の設定時間１５分からＳ０の記録時間１２分を減算した値３分を、第２の設定時間に加えて、第２の設定時間を１３分とする。

次に、Ｊ０の記録時間９分が第２の設定時間１３分より小さく、図３のステップＳ２０９の判定がＹｅｓであるので、Ｊ０の再生速度を１倍速とする。

そして、第３の設定時間に第２の設定時間１３分からＪ０の記録時間９分を減算した値４分を加えて９分とする。

タグが付与されていないシーンの総記録時間９９分について、タグが付与されていないシーンの総再生時間（第３の設定時間）９分に収めるため再生速度を９９／９＝１１倍速とする。

第２の再生速度１倍速が第３の再生速度１１倍速以下であり、図３のステップＳ２１４の判定がＹｅｓであるので、第２再生速度と第３再生速度は変更しない。そして、第１の再生速度が１倍速、第２の再生速度が１倍速、第３の再生速度が１１倍速、にそれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図１１に示す。

＜ケース５＞
ケース５では、図３のステップＳ２１４の判定がＮｏである場合について、図１２、１３を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分、にそれぞれ設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン５の記録時間は３分であり、第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

次に、タグが付与されたシーン５，１，１０，３，９，１２，７，２，６，４の総記録時間が９９分であり、第１の設定時間１５分より大きく、図３のステップＳ２０５の判定がＮｏとなる。したがって、タグが付与されたシーンの総記録時間が第１の設定時間内に収まらないので、ステップＳ２０５〜Ｓ２０６のループによりタグが付与されたシーンを重要度が低い順に除外する。そして、シーン５，１，１０の総記録時間が１２分であり、第１の設定時間１５分以内であるので、シーン５，１，１０を重要度が上位であるＳ０〜Ｓ２に設定し、除外されたシーン３，９，１２，７，２，６，４を重要度が下位であるＪ０〜Ｊ６に設定する。

次に、タグが付与されたシーンが第１の設定時間内に収まらないことにより、図３のステップＳ２０７の判定がＹｅｓとなるので、第２の設定時間に第１の設定時間１５分からＳ０〜Ｓ２の記録時間１２分を減算した値３分を加えて１３分とする。

次に、Ｊ０〜Ｊ６の記録時間８７分が第２の設定時間１３分より大きく、図３のステップＳ２０９の判定がＮｏであるので、Ｊ０〜Ｊ６の再生時間を１３分に収めるため再生速度を８７／１３＝６．６９倍速とする。

また、タグが付与されていないシーンの総記録時間２１分について、タグが付与されていないシーンの総再生時間（第３の設定時間）５分に収めるため再生速度を２１／５＝４．２倍速とする。

第２の再生速度６．６９倍速が第３の再生速度４．２倍速より大きく、図３のステップＳ２１４の判定がＮｏであるので、第２の再生速度と第３の再生速度とを再計算する。具体的には、Ｊ０〜Ｊ６の記録時間８７分、とタグが打たれていないシーンの記録時間２１分、の和の１０８分を、第２の設定時間と第３の設定時間の和である１８分に収めるため、
第２の再生速度と第３の再生速度を１０８／１８＝６倍速とする。

そして、第１の再生速度が１倍速、第２の再生速度が６倍速、第３の再生速度が６倍速に設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図１３に示す。

＜ケース６＞
ケース６では、すべてのシーンにタグが有る場合について図１４、１５を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分、にそれぞれ設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

次に、最も重要なシーン５の記録時間は３分であり、第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

次に、タグが付与されたシーン５，１，１０，３，９，１２，７，２，６，４，８，１１の総記録時間が１２０分であり、第１の設定時間１５分より大きく、図３のステップＳ２０５の判定がＮｏとなる。したがって、タグが付与されたシーンの総記録時間が第１の設定時間内に収まらないので、ステップＳ２０５〜Ｓ２０６のループによりタグが付与されたシーンを重要度が低い順に除外する。そして、シーン５，１，１０の総記録時間が１２分であり、第１の設定時間１５分以内であるので、重要度が上位であるシーン５，１，１０をＳ０〜Ｓ２に設定し、除外されたシーン３，９，１２，７，２，６，４，８，１１を重要度が下位であるＪ０〜Ｊ８に設定する。

次に、図３のステップＳ２０７の判定がＹｅｓとなるので、第２の設定時間に第１の設定時間１５分からＳ０〜Ｓ２の記録時間１２分を減算した値３分を加えて１３分とする。

次に、Ｊ０〜Ｊ８の記録時間１０８分が第２の設定時間１３分より大きく、図３のステップＳ２０９の判定がＮｏであるので、Ｊ０〜Ｊ８の再生時間を１３分に収めるため再生速度を１０８／１３＝８．３倍速とする。また、タグ無し（第３の設定時間）シーンが無いため、第３の再生速度は設定されない。

次に、第３の再生速度が設定されない場合は、図３のステップＳ２１４の判定を例外処理としてＮｏにする。この結果、第２の設定時間（と第３の設定時間）を再計算する。具体的には、Ｊ０〜Ｊ８の記録時間１０８分を第２の設定時間と第３の設定時間の和である１８分に収めるため、第２の再生速度を１０８／１８＝６倍速とする。

そして、第１の再生速度が１倍速、第２の再生速度が６倍速、第３の再生速度が無し、にぞれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図１５に示す。

＜ケース７＞
ケース７では、タグがまったく無い場合について図１６、１７を用いて説明する。

最初に割り当て初期値について、重要度が上位であるシーンの総再生時間（第１の設定時間）が１５分、重要度が下位であるシーンの総再生時間（第２の設定時間）が１０分、タグ無し（第３の設定時間）が５分、にそれぞれ設定される。

まず、総記録時間１２０分が目標再生時間３０分より大きく、動画を全て１倍速で再生した場合、目標再生時間に収まらないので、図３のステップＳ２０１の判定がＹｅｓとなり、目標再生時間内に収めるために再生速度を設定する必要がある。

最も重要なシーンの記録時間は、０分であり、タグが付与されたシーンが存在しないので第１の設定時間１５分に収まるので、図３のステップＳ２０３の判定がＹｅｓとなり、第１の設定時間は変更されない。

重要度上位の映像は存在せず記録時間０分であり、図３のステップＳ２０５の判定がＹｅｓとなる。

次に、除外したシーンが無く、図３のステップＳ２０７の判定がＮｏであるので、第１の設定時間に第２の設定時間を加え、Ｓ０〜の記録時間０分を減算し、さらに第３の設定時間５分に加えた３０分を、改めて第３の設定時間とする。

そして、第３の再生速度は（総記録時間１２０分／３０分）＝４倍速となる。

そして、第２の再生速度は無く、図３のステップＳ２１４の判定がＹｅｓであるので、第２再生速度と第３再生速度は変更しない。そして、第１の再生速度が１倍速（但し、該当シーン無し）、第２の再生速度が無し、第３の再生速度が４倍速、にそれぞれ設定される。

以上により、第１の再生速度、第２の再生速度及び第３の再生速度が設定された場合の記録時間と再生時間とを図１７に示す。

＜ケース８＞
ケース８では、図３のステップＳ２０１の判定がＮｏである場合について説明する。

まず、総記録時間が目標再生時間より小さく、動画を全て１倍速で再生しても、目標再生時間に収まるので、図３のステップＳ２０１の判定がＮｏとなり、再生時間の設定について何もせず、全てのシーンを１倍速で再生する。

このように実施の形態１の再生装置によれば、撮影者が重要と考えたシーンが遅い再生速度で再生されることにより、内容を十分に視聴でき、また、撮影者が重要ではないと考えたシーンが速い再生速度で再生されることにより、時間を短縮することができるので、限られた時間内で再生を希望する録画データ全てを視聴することができる。

また、実施の形態１の再生装置によれば、タグが付与されたシーンが、遅い再生速度で再生されることにより、内容を十分に視聴でき、またタグが付与されていないシーンが速い再生速度で再生されることにより、再生時間を短縮することができるので、限られた時間内で重要度に応じた再生速度で録画データ全てを視聴することができる。

また、実施の形態１の再生装置によれば、タグが付与されたかつ重要であるシーンが、遅い再生速度で再生されることにより、内容を十分に視聴でき、またタグが付与されたかつ重要ではないシーンが速い再生速度で再生され、またタグが付与されていないシーンが更に速い再生速度で再生されることにより、再生時間を短縮することができるので、限られた時間内で再生を希望する録画データ全てを視聴することができる。

また、タグと関連づけるデータは、動画のデータに限らず、音声または動画、あるいは音声及び動画を含むデータであれば、いずれも適用できる。

次に、再生装置１００が再生する動画データ、タグ、重要度の情報の作成の一例について説明する。

以下、実施の形態１に係るタギングシステムについて説明する。実施の形態１に係るタギングシステムは、ユーザがスポーツの試合などを撮影しているときに、当該ユーザのバイタルデータ（生体情報）と、当該ユーザが重要と考えたシーンに対してタギングすることで入力されたタグデータとを用いて、撮影データの重要な範囲、重要なフレームに精度良くタグを設定するものである。このタギングシステムによって付与されたタグに基づいてシーン単位の重要度を定義してもよい。

まず、本実施の形態に係るタギングシステムの構成について説明する。
図１８は、本実施の形態に係るタギングシステム３００の概略構成を示すブロック図である。
タギングシステム３００は、センサ装置３１０、タグ入力装置３２０、撮像装置３３０などを備える。センサ装置３１０と撮像装置３３０との間、及び、タグ入力装置３２０と撮像装置３３０との間は、有線又は無線により通信を行うことができる。

センサ装置３１０は、ユーザ（図示せず）が撮像装置３３０で撮影しているときに、当該ユーザのバイタルデータである心拍数を測定するものである。センサ装置３１０は、センサ本体３１１、センサ制御部３１２、センサデータ処理部３１３、ＣＰＵ３１４などの一般的なセンサ装置が備える構成に加えて、測定した心拍数をリアルタイムで撮像装置３３０に送信するデータ通信部３１５を備えている。

タグ入力装置３２０は、ユーザが撮像装置３３０で撮影していて、撮影データにタグを付けた方が良いと思う瞬間、例えば、サッカーの試合であればゴールの瞬間などに、ボタンなどを押してタグを入力するものである。タグ入力装置３２０は、ボタン、画面などのキー入力部３２１、キー制御部３２２、入力タグデータ処理部３２３、ＣＰＵ３２４などの一般的なタグ入力装置が備える構成に加えて、ユーザが入力したタグのデータである入力タグデータをリアルタイムで撮像装置３３０に送信するデータ通信部３２５を備えている。

撮像装置３３０は、ビデオカメラ、デジタルカメラなどのような動画像を撮影できるものである。撮像装置３３０は、イメージセンサ３３１、撮像部３３２、画像データ処理部３３３、データ出力部３３４、記録媒体３３５、ＣＰＵ３３６などの一般的な撮像装置が備える構成に加えて、データ通信部３３７、センサデータ記録部３３８、タグ制御部３３９、タグ範囲処理部３４０、タグ記録部３４１などを備えている。

データ通信部３３７は、センサ装置３１０のデータ通信部３１５が送信したセンサデータ、タグ入力装置３２０のデータ通信部３２５が送信した入力タグデータなどを受信する。また、データ通信部３３７は、センサ装置３１０、タグ入力装置３２０などに対して、動作開始のタイミングを制御する信号などを送信しても良い。つまり、センサ装置３１０のデータ通信部３１５、及びタグ入力装置３２０のデータ通信部３２５は、撮像装置３３０のデータ通信部３３７と一方向又は双方向で制御信号、ステータス通知信号などの通信を行っても良い。
センサデータ記録部３３８は、センサ装置３１０から受信したセンサデータを記録する。
タグ制御部３３９は、撮像装置３３０におけるタグ付与動作（タギング方法）の全体を制御する。

タグ範囲処理部３４０は、受信したセンサデータ及び入力タグデータを用いて、撮像装置３３０が撮影した動画データの適切な範囲、例えば、タグが記録されたタイミングで、バイタルデータが予め設定した閾値以上である場合、その閾値以上である期間をタグ範囲に設定する。タグ範囲処理部３４０は、このようなタグ範囲の設定を撮影中に行うことができる。さらに、動画再生時にタグ範囲の設定を行っても良い。
タグ記録部３４１は、受信したセンサデータ、入力タグデータ、設定したタグ範囲を動画データに関連付けて撮影中または動画再生中に記録する。また、タグ記録部３４１は設定したタグ範囲内にタグ付与してそのタイミングデータを記録する。
受信したセンサデータ、入力タグデータ、設定したタグ範囲のデータ、及び、これらと関連付けられた動画データなどは記録媒体３３５に記録されることもある。

入力タグデータには、例えば、ユーザがタグを入力した時刻や、撮像装置３３０がタグ入力を受信した時刻が含まれる。時刻でなくても、センサ装置３１０、タグ入力装置３２０及び撮像装置３３０が録画開始などの何らかの同期するタイミングを共有できれば、その時点からの経過時間の情報でも代用が可能である。
なお、センサ装置３１０、タグ入力装置３２０及び撮像装置３３０が時計を内蔵しているのであれば、センサ装置３１０、タグ入力装置３２０は測定した心拍数、入力タグデータをリアルタイムで撮像装置３３０に送信する必要はない。後で、それぞれの時計情報に基づいて、動画データ、バイタルデータ及び入力タグデータのタイミングを合わせることが可能である。

また、撮像装置３３０が実現する各構成要素は、ＣＰＵ３３６の制御によって、プログラムを実行させることによって実現できる。より具体的には、撮像装置３３０は、記憶部（図示せず）に格納されたプログラムを主記憶装置（図示せず）にロードし、ＣＰＵ３３６の制御によってプログラムを実行して実現する。また、各構成要素は、プログラムによるソフトウェアで実現することに限ることなく、ハードウェア、ファームウェア、及びソフトウェアのうちのいずれかの組み合わせ等により実現しても良い

続いて、本実施の形態に係るタギングシステム３００の動作、すなわち、タギング方法について説明する。ここでは、タグ範囲処理部３４０の動作について主に説明する。
まず、タグ範囲処理部３４０のタグ範囲設定動作の概要について説明する。タグ範囲処理部３４０は、上述したように、受信したセンサデータ及び入力タグデータを用いて、撮像装置３３０が撮影した動画データの適切な範囲にタグを設定するものである。

図１９は本実施の形態に係る心拍数の時間変化と、タグ範囲との関係を示す図である。心拍数のグラフに入力タグデータを示したものを上に、入力タグデータから設定したタグ範囲を動画データに関連付けたものを下に示している。心拍数のグラフの横軸は時刻、縦軸は心拍数を示す。また、心拍数７５付近の横線はタグ範囲を設定するための閾値を示す。また、心拍数４０付近に記入している横方向の矢印及び「平常」「緊張」等の文字は、そのときのユーザの状態を説明するためのものである。

図１９に示した心拍数の例では、ユーザの状態はゲーム開始からゲーム終了までの間に心拍数の変化から、平常状態、緊張状態もしくは興奮状態、そして平常（緩和）状態へと変化する。緊張状態又は興奮状態のときに、心拍数の４つのピーク（１〜４）が生じ、それぞれのピークにおいてユーザはタグＦ１〜Ｆ４を入力している。
タグ範囲処理部３４０は、心拍数が所定値（ここでは、閾値の７５）以上のときの時間範囲であって、当該時間範囲内でユーザがタグＦを入力している場合に、当該時間範囲をユーザが入力したタグＦの範囲として設定する。当該時間範囲のフレームに対してタグＦを付与しても良い。

例えば、第１のピークについては、時間範囲ｔ１〜ｔ２において、心拍数が所定値を超え、かつ、ユーザがタグＦ１を入力しているので、時間範囲ｔ１〜ｔ２をタグＦ１のタグ範囲に設定する。また、第２のピークについては、時間範囲ｔ３〜ｔ４において、心拍数が所定値を超え、かつ、ユーザがタグＦ２を入力しているので、時間範囲ｔ３〜ｔ４をタグＦ２のタグ範囲に設定する。第３、４のピークについても同様である。

なお、タグ範囲処理部３４０は、心拍数が所定値以上の時間範囲であっても、当該時間範囲内でユーザがタグＦを入力していない場合には、タグ範囲を設定しない。
また、タグ範囲処理部３４０は、ユーザがタグＦを入力していても、心拍数が所定値以上でない場合には、デフォルト、又はユーザが設定した時間やフレーム数でタグ範囲を設定する。

次に、タグ範囲処理部３４０の詳細な処理手順について説明する。
図２０は本実施の形態に係る心拍数の時間変化と、タグ範囲との詳細な関係を示す図である。心拍数のグラフを上に、タグ範囲を下に示している。グラフ中の横点線は閾値を示し、横点線上の等間隔の点は心拍数のサンプリング点、すなわち、サンプリング時間を示している。なお、心拍数のサンプリングは例えば１秒間隔で行う。
図２１は本実施の形態に係るタグ範囲処理部３４０の詳細な処理手順を示すフローチャートである。
図２０及び図２１を参照しながら、タグ範囲処理部３４０の詳細な処理手順について説明する。

まず、処理を開始すると、まずバイタルデータの状態を示すステータスを「閾値未満」に設定し（ステップＳ４０１）、「前バイタルデータ時間値」を記録開始時間ｔ０に初期化する（ステップＳ４０２）。

サンプリング時間ｔ０において、ステータスが「閾値以上」か判断する（ステップＳ４０３）。時間ｔ０では、ステータスはステップＳ４０１で設定した「閾値未満」のままなので（ステップＳ４０３のＮｏ）、時間ｔ０の受信したバイタルデータがあるか判断する
（ステップＳ４０４）。
時間ｔ０では受信したバイタルデータがあるので（ステップＳ４０４のＹｅｓ）、時間ｔ０のバイタルデータの値が閾値以上か判断する（ステップＳ４０５）。図２０に示すように、時間ｔ０のバイタルデータの値は閾値未満なので（ステップＳ４０５のＮｏ）、現在のバイタルデータ時間ｔ０を「前バイタルデータ時間値」として保存する（ステップＳ４０８）。そして、ステップＳ４０３に戻る。ｔ１１までは平常状態つまりバイタルデータが閾値未満のため、同様な処理を繰り返すことになる。

サンプリング時間ｔ１２になると、ステータスが「閾値未満」で、ｔ１２のバイタルデータがあるので（ステップＳ４０３のＮｏ、ステップＳ４０４のＹｅｓ）、時間ｔ１２のバイタルデータの値が閾値以上か判断する（ステップＳ４０５）。図２０に示すように、時間ｔ１２のバイタルデータの値は閾値以上なので（ステップＳ４０５のＹｅｓ）、「前バイタルデータ時間値」、ここでは、ステップＳ４０８で保存した時間ｔ１１を「タグ範囲開始時間値」として保存し（ステップＳ４０６）、ステータスを「閾値以上」に設定し（ステップＳ４０７）、現在のバイタルデータ時間ｔ１２を「前バイタルデータ時間値」として保存して（ステップＳ４０８）、ステップＳ４０３に戻る。

次に、サンプリング時間ｔ１３になると、ステップＳ４０７で設定したようにステータスが「閾値以上」であるので（ステップＳ４０３のＹｅｓ）、時間ｔ１３のバイタルデータがあるか判断する（ステップＳ４０９）。
時間ｔ１３では受信したバイタルデータがあるので（ステップＳ４０９のＹｅｓ）、時間ｔ１３のバイタルデータの値が閾値以上か判断する（ステップＳ４１０）。図２０に示すように、時間ｔ１３のバイタルデータの値は閾値以上なので（ステップＳ４１０のＹｅｓ）、現在のバイタルデータ時間ｔ１３を「前バイタルデータ時間値」として保存し（ステップＳ４０８）、ステップＳ４０３に戻る。
そして、サンプリング時間ｔ２１までは、時間ｔ１３のときの処理と同じ処理が継続する。

次に、サンプリング時間ｔ２２になると、ステータスが「閾値以上」で、時間ｔ２２の受信したバイタルデータがあるので（ステップＳ４０３のＹｅｓ、ステップＳ４０９のＹｅｓ）、時間ｔ２２のバイタルデータの値が閾値以上か判断する（ステップＳ４１０）。図２０に示すように、時間ｔ２２のバイタルデータの値は閾値未満なので（ステップＳ４１０のＮｏ）、現在のバイタルデータ時間ｔ２２を「タグ範囲終了時間値」として保存し（ステップＳ４１１）、タグ記録要求はあるか、すなわち、バイタルデータの値が閾値以上のときにタグを入力しているか判断する（ステップＳ４１２）。図２０に示すように、時間ｔ１６と時間ｔ１７との間にユーザがタグＦを入力しているので（ステップＳ４１２のＹｅｓ）、ステップＳ４０６、Ｓ１１０で得られたタグ範囲の「タグ範囲開始時間値」ｔ１１〜「タグ範囲終了時間値」ｔ２２でタグＦを記録し（ステップＳ４１３）、ステータスを「閾値未満」に設定し（ステップＳ４１４）、現在のバイタルデータ時間ｔ２２を「前バイタルデータ時間値」として保存し（ステップＳ４０８）、ステップＳ４０３に戻る。

次に、サンプリング時間ｔ２５になると、ステータスが「閾値未満」で、時間ｔ２５のバイタルデータもないので（ステップＳ４０３のＮｏ、ステップＳ４０４のＮｏ）、処理を終了する。
なお、現在のバイタルデータ時間ｔを「タグ範囲終了時間値」として保存し（ステップＳ４１１）、タグ記録要求がないとき、すなわち、ユーザがタグを入力していないときは（ステップＳ４１２のＮｏ）、ステータスを「閾値未満」に設定する（ステップＳ４１４）。つまり、上述したように、心拍数が所定値以上の時間範囲があっても、当該時間範囲内でユーザがタグを入力していない場合には、当該時間範囲をタグ範囲に設定しない。

また、ステータスが「閾値以上」で、その時間ｔのバイタルデータがないときは（ステップＳ４０３のＹｅｓ、ステップＳ４０９のＮｏ）、記録終了時間を「タグ範囲終了時間値」として保存し（ステップＳ４１５）、ステップＳ４１２、Ｓ４１３と同様に、タグ記録要求があるときは、得られたタグ範囲でタグＦを記録して処理を終了し、タグ記録要求がないときは、そのまま処理を終了する。
本実施の形態に係るタギングシステム３００は、このような構成により、動画データを撮影中に、その重要範囲に精度良くタグを付与することができる。

なお、本実施の形態に係るタギングシステム３００では、心拍数が閾値を超える時間範囲として時間ｔ１１〜時間ｔ２２を選択し、この時間範囲をタグ範囲として設定したが、時間範囲としてそれぞれ一つ内側のサンプリング時間に対応する時間ｔ１２〜時間ｔ２１を選択し、この時間範囲をタグ範囲として設定しても良い。もちろん、時間範囲として時間ｔ１１〜時間ｔ２１、時間ｔ１２〜時間ｔ２２を選択することも可能であり、さらに、心拍数が閾値を超える交点〜交点を選択することも可能である。その際は交点を算出しても良く、動画のサンプリング数とバイタルデータのサンプリング数を同じにしても良い。
また、本実施の形態に係るタギングシステム３００では、タグ範囲を設定するための心拍数の閾値を固定にしていたが、ユーザ毎、シーン毎などのように状況に応じて設定できるようにしても良い。また、この閾値をいつでも変更できるようにして、動画データを記録した後でもタグ範囲を調整できるようにしても良い。

また、本実施の形態に係るタギングシステム３００では、心拍数が所定値以上の時間範囲であって、当該時間範囲内にユーザがタグを入力している場合に、当該時間範囲をタグ範囲として設定したが、心拍数が所定値以上の時間範囲であって、当該時間範囲内にユーザがタグを入力している場合に、ユーザが入力したタグの前後の所定時間、例えば、当該タグの前後それぞれ３秒間をタグ範囲として設定して良い。もちろん、心拍数が所定値以上の時間範囲又はタグの前後の所定時間をユーザが選択できるようにしても良い。

また、本実施の形態に係るタギングシステム３００では、バイタルデータとして心拍数を用いたが、バイタルデータとして心拍数以外のデータ、ユーザの興奮の度合いを示すようなデータを用いても良く、このときは、バイタルデータが所定値以下又は所定値未満などの時間範囲であって、当該時間範囲内にユーザがタグを入力している場合に、当該時間範囲をタグ範囲として設定しても良い。

また、本実施の形態に係るタギングシステム３００は、センサ装置３１０、タグ入力装置３２０、撮像装置３３０などを備える構成としたが、撮像装置がセンサ装置及びタグ入力装置を兼ねる構成、又は、撮像装置がセンサ装置、タグ入力装置の一方を兼ねる構成としても良い。すなわち、タギングシステムをタギング装置として構成するようにしても良い。
また、本実施の形態に係るタギングシステム３００は、ユーザが撮像装置３３０を用いて撮影しているときの、すなわち、ユーザが動画データを記録しているときの、ユーザのバイタルデータ及び入力タグデータに基づいてタグ範囲を設定していたが、ユーザが画像処理装置などを用いて動画を視聴又は編集しているときなどの、すなわち、ユーザが動画データを再生しているときの、ユーザのバイタルデータ及び入力タグデータに基づいてタグ範囲を設定しても良い。このため、本実施の形態に係るタギング装置も撮像装置に限るものではなく、画像処理装置などであっても良い。

上述したように、本実施の形態に係る撮像装置３３０は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信部３３７と、データ通信部３３７で受け付けたバイタルデータが予め設定された値以上である時間範囲に当該タイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理部３４０とを備えるものである。
また、本実施の形態に係るタギングシステム３００は、ユーザのバイタルデータを計測しデータ通信部３３７に出力するセンサ装置３１０と、タイミングデータをデータ通信部３３７に出力するタグ入力装置３２０と、撮像装置３３０とを備えるものである。

また、本実施の形態に係るタギング方法は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信ステップと、データ通信ステップで受け付けたバイタルデータが予め設定された値以上である時間範囲に当該タイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理ステップＳ４１２、Ｓ４１３とを有するものである。

また、本実施の形態に係るプログラムは、コンピュータに、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグＦ入力のタイミングデータを受け付けるデータ通信手順と、当該データ通信手順で受け付けた当該バイタルデータが予め設定された値以上である時間範囲に当該タイミングデータに対応する時間が含まれる場合に、動画データの当該時間範囲をタグＦの範囲に設定する手順Ｓ４１２、Ｓ４１３とを実行させるためのものである。

上記のタギングシステムによって付与されたタグに基づいて動画データのシーン単位の重要度を定義してもよい。たとえば、タグの時間範囲や、バイタルデータのピーク値、タグの時間範囲でバイタルデータを積分した値、などによって重要度を定義してもよい。

また、上記実施の形態においては重要度を高い、低い、の２種類とし、重要度の高いシーンに対する再生速度、重要度の低いシーンに対する再生速度、タグの付与されていないシーンに対する再生速度、の３種類の再生速度としたが、重要度の分割数を３つ４つと増やして４種類、５種類の再生速度に分類するように展開してもよい。

また、上記実施の形態における、データ入出力部１０３、タグデータ処理部１０４、再生制御部１０５、画像データ処理部１０６、キー制御部１０８、表示制御部１１０については、ＡＳＩＣ（Application Specific Integrated Circuit）等のハードウェアまたはソフトウェアで実施できる。また、処理の一部をソフトウェアで実施し、それ以外をハードウェアで実施することとしてもよい。ソフトウェアで実施する際には、マイクロプロセッサ等の１つあるいは複数のＣＰＵ（Central Processing Unit）を有するコンピュータシステムに機能ブロックの処理に関するプログラムを実行させればよい。これらのプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、ＤＶＤ−ＲＯＭ（Digital Versatile Disc Read Only Memory）、ＤＶＤ−Ｒ（DVD Recordable）、ＤＶＤ−Ｒ ＤＬ（DVD-R Dual Layer)、ＤＶＤ−ＲＷ（DVD ReWritable）、ＤＶＤ−ＲＡＭ、ＤＶＤ＋Ｒ、ＤＶＲ＋Ｒ ＤＬ、ＤＶＤ＋ＲＷ、ＢＤ−Ｒ（Blu-ray（登録商標） Disc Recordable）、ＢＤ−ＲＥ（Blu-ray （登録商標）Disc Rewritable）、ＢＤ−ＲＯＭ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

１００ 再生装置
１０１、３１４、３２４、３３６ ＣＰＵ
１０２、３３５ 記録媒体
１０３ データ入出力部
１０４ タグデータ処理部
１０５ 再生制御部
１０６、３３３ 画像データ処理部
１０７ キー入力部
１０８ キー制御部
１０９ 表示デバイス
１１０ 表示制御部
３００ タギングシステム
３１０ センサ装置
３１１ センサ本体
３１２ センサ制御部
３１３ センサデータ処理部
３１５、３２５、３３７ データ通信部
３２０ タグ入力装置
３２１ キー入力部
３２２ キー制御部
３２３ 入力タグデータ処理部
３３０ 撮像装置
３３１ イメージセンサ
３３２ 撮像部
３３４ データ出力部
３３８ センサデータ記録部
３３９ タグ制御部
３４０ タグ範囲処理部
３４１ タグ記録部

Claims (4)

1. 動画データのシーン単位の重要度と、前記重要度が上位である第１のシーンの総再生時間として仮設定された第１の再生時間と、前記重要度が下位である第２のシーンの総再生時間として仮設定された第２の再生時間とに基づいて、各シーンの再生速度を設定し、
   最も重要度の高い第３のシーンの再生速度を１倍速に設定し、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも長い場合、前記第３のシーンの総再生時間を新たに第１の再生時間として設定するとともに、重要度が設定されたシーンの内、前記第３のシーン以外のシーンを前記第２のシーンとして設定し、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも短い場合、前記第３のシーンの総再生時間に加え、前記第３のシーンの次以降に重要度の高いシーンを順に１倍速で再生したときに前記第１の再生時間内で再生可能となるシーンの再生速度を１倍速に設定し、前記１倍速で再生するシーンの総再生時間を前記第１の再生時間から引いた差分を前記第２の再生時間に加え、重要度が設定されたシーンの内、前記第１の再生時間内で再生可能と判断されなかったシーンを前記第２のシーンとして設定し、
   前記第２のシーンの再生速度を前記第２の再生時間内で再生可能となるように設定する再生制御部と、
   前記動画データをシーン単位で前記再生制御部に設定された再生速度に変換する画像データ処理部と
   を備えることを特徴とする再生装置。
2. 前記再生制御部は、
   更に、前記重要度が設定されていない第４のシーンの総再生時間として設定された第３の再生時間に基づき、前記第４のシーンが前記第３の再生時間内で再生可能となるように前記第４のシーンの再生速度を前記第２のシーンの再生速度よりも更に速い再生速度に設定する
   ことを特徴とする請求項１に記載の再生装置。
3. 動画データのシーン単位の重要度と、前記重要度が上位である第１のシーンの総再生時
   間として仮設定された第１の再生時間と、前記重要度が下位である第２のシーンの総再生
   時間として仮設定された第２の再生時間とに基づいて、各シーンの再生速度を設定し、
   最も重要度の高い第３のシーンの再生速度を１倍速に設定し、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも長い場合、前記第３のシー
   ンの総再生時間を新たに第１の再生時間として設定するとともに、重要度が設定されたシ
   ーンの内、前記第３のシーン以外のシーンを前記第２のシーンとして設定し、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも短い場合、前記第３のシー
   ンの総再生時間に加え、前記第３のシーンの次以降に重要度の高いシーンを順に１倍速で
   再生したときに前記第１の再生時間内で再生可能となるシーンの再生速度を１倍速に設定
   し、前記１倍速で再生するシーンの総再生時間を前記第１の再生時間から引いた差分を前
   記第２の再生時間に加え、重要度が設定されたシーンの内、前記第１の再生時間内で再生
   可能と判断されなかったシーンを前記第２のシーンとして設定し、
   前記第２のシーンの再生速度を前記第２の再生時間内で再生可能となるように設定する
   ことを特徴とする再生方法。
4. コンピュータに
   動画データのシーン単位の重要度と、前記重要度が上位である第１のシーンの総再生時間として仮設定された第１の再生時間と、前記重要度が下位である第２のシーンの総再生時間として仮設定された第２の再生時間とに基づいて、各シーンの再生速度を設定するステップと、
   最も重要度の高い第３のシーンの再生速度を１倍速に設定するステップと、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも長い場合、前記第３のシーンの総再生時間を新たに第１の再生時間として設定するとともに、重要度が設定されたシーンの内、前記第３のシーン以外のシーンを前記第２のシーンとして設定するステップと、
   前記第３のシーンの総再生時間が前記第１の再生時間よりも短い場合、前記第３のシーンの総再生時間に加え、前記第３のシーンの次以降に重要度の高いシーンを順に１倍速で再生したときに前記第１の再生時間内で再生可能となるシーンの再生速度を１倍速に設定し、前記１倍速で再生するシーンの総再生時間を前記第１の再生時間から引いた差分を前記第２の再生時間に加え、重要度が設定されたシーンの内、前記第１の再生時間内で再生可能と判断されなかったシーンを前記第２のシーンとして設定するステップと、
   前記第２のシーンの再生速度を前記第２の再生時間内で再生可能となるように設定するステップ
   とを実行させることを特徴とする再生プログラム。