JP2017005558A - ダイジェスト作成装置、ダイジェスト作成システム、ダイジェスト作成方法及びプログラム - Google Patents

Abstract

【課題】動画データから重要な範囲を精度良く抽出してダイジェスト映像を作成するダイジェスト作成装置、ダイジェスト作成システム、ダイジェスト作成方法及びプログラムを提供する。
【解決手段】ダイジェスト作成システム１は、ユーザのバイタルデータを出力するセンサ装置２と、ユーザのタグ入力のタイミングデータを出力するタグ入力装置３と、ダイジェスト作成装置４とを備えるものである。また、ダイジェスト作成装置４は、動画データの記録又は再生をおこなうユーザのバイタルデータが予め設定された値以上である時間範囲ｔｍ〜ｔｎにタイミングデータに対応する時間が含まれるときに、時間範囲ｔｍ〜ｔｎをタグ範囲に設定し、動画データのタグ範囲ｔｍ〜ｔｎに基づいて、動画データのダイジェストを作成するダイジェスト処理部５２を備える。
【選択図】図１

Description

本発明はダイジェスト作成装置、ダイジェスト作成システム、ダイジェスト作成方法及びプログラムに関する。

動画データからダイジェスト映像を作成することが行われている。例えば、特許文献１には、ハイライト静止画生成・配信装置において、カメラで撮影した映像からハイライトシーン動画像を切り出し、当該動画像から重要なシーンをハイライト静止画像として抽出することが記載されている。

特開２００５−１９１７７０号公報

背景技術に係るハイライト静止画生成・配信装置により、重要なシーンを抽出することができる。しかしながら、当該装置は撮影中の動画においてハイライトとして抽出する箇所をセンサ信号や人手によって指定するものであり、動画データからユーザにとって重要な範囲を必ずしも精度良く抽出することができていなかった。

本発明は、このような問題を解決するためになされたものであり、動画データからユーザにとって重要な範囲を精度良く抽出してダイジェスト映像を作成することができるダイジェスト作成装置、ダイジェスト作成システム、ダイジェスト作成方法及びプログラムを提供することを目的とする。

そこで、本発明は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信部と、データ通信部で受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理部と、タグ範囲処理部で設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理部とを備え、ダイジェスト処理部は、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて、複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するダイジェスト作成装置を提供する。

また、本発明は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信ステップと、データ通信ステップで受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理ステップと、タグ範囲処理ステップで設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理ステップとを備え、ダイジェスト処理ステップは、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて、複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するイジェスト作成方法を提供する。

また、本発明は、コンピュータに、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信手順と、データ通信手順で受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理手順と、タグ範囲処理手順で設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理手順と、を実行させるためのプログラムであって、ダイジェスト処理手順は、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて、複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するプログラムを提供する。

本発明により、動画データからユーザにとって重要な範囲を精度良く抽出してダイジェスト映像を作成するダイジェスト作成装置、ダイジェスト作成システム、ダイジェスト作成方法及びプログラムを提供することができる。

実施の形態に係るダイジェスト作成システム１の概略構成を示すブロック図である。 実施の形態に係る心拍数の時間変化と、タグＦの範囲との関係を示す図である。 実施の形態に係るダイジェスト処理部５２の処理手順を示すフローチャートである。 実施の形態に係るダイジェスト処理部５２の処理内容を説明するための図である。 実施の形態に係るダイジェスト処理部５２の処理内容を説明するための図である。 実施の形態に係るダイジェスト映像データを説明するための図である。

以下、図面を参照して本実施の形態に係るダイジェスト作成システムについて説明する。本実施の形態に係るダイジェスト作成システムは、ユーザがスポーツの試合などを撮影しているときに、当該ユーザのバイタルデータ（生体情報）と、当該ユーザが重要なシーンで入力したタグのタイミングデータとを用いて、撮影データの重要な範囲に精度良くタグ範囲を設定して、ダイジェスト映像を作成するものである。

まず、本実施の形態に係るダイジェスト作成システムの構成について説明する。
図１は本実施の形態に係るダイジェスト作成システム１の概略構成を示すブロック図である。
ダイジェスト作成システム１は、センサ装置２、タグ入力装置３、撮像装置４などを備える。センサ装置２と撮像装置４との間、及び、タグ入力装置３と撮像装置４との間は、無線又は有線により通信を行うことができる。

センサ装置２は、ユーザ（図示せず）が撮像装置４で撮影しているときに、当該ユーザのバイタルデータである心拍数を測定するものである。センサ装置２は、センサ本体２１、センサ制御部２２、センサデータ処理部２３、ＣＰＵ２４などの一般的なセンサ装置が備える構成に加えて、測定した心拍数をリアルタイムで撮像装置４に送信するデータ通信部２５を備えている。
タグ入力装置３は、ユーザが撮像装置４で撮影して、撮影データにタグを付けた方が良いと思うとき、例えば、サッカーの試合であればゴールの瞬間などに、ボタンなどを押してタグを入力するものである。タグ入力装置３は、ボタン、画面などのキー入力部３１、キー制御部３２、入力タグデータ処理部３３、ＣＰＵ３４などの一般的なタグ入力装置が備える構成に加えて、ユーザが入力したタグのデータである入力タグデータをリアルタイムで撮像装置４に送信するデータ通信部３５を備えている。入力タグデータには、例えば、ユーザがタグを入力した時刻の情報が含まれる。

撮像装置（ダイジェスト作成装置）４は、ビデオカメラ、デジタルカメラなどのような動画像を撮影できるものである。撮像装置４は、イメージセンサ４１、撮像部４２、画像データ処理部４３、データ出力部４４、記録媒体４５、ＣＰＵ４６などの一般的な撮像装置が備える構成に加えて、データ通信部４７、センサデータ記録部４８、タグ制御部４９、タグ範囲処理部５０、タグ記録部５１、ダイジェスト処理部５２、ダイジェスト記録部５３などを備えている。

データ通信部４７は、センサ装置２のデータ通信部２５が送信したセンサデータ、タグ入力装置３のデータ通信部３５が送信した入力タグデータなどを受信する。また、データ通信部４７は、センサ装置２、タグ入力装置３などに対して、動作開始のタイミングを制御する信号などを送信しても良い。つまり、センサ装置２のデータ通信部２５、及びタグ入力装置３のデータ通信部３５は、撮像装置４のデータ通信部４７と一方向又は双方向で制御信号、ステータス通知信号などの通信を行っても良い。
センサデータ記録部４８は、センサ装置２から受信したセンサデータを記録する。
タグ制御部４９は、撮像装置４におけるタグを付与する動作の全体を制御する。
タグ範囲処理部５０は、受信したセンサデータ及び入力タグデータを用いて、撮像装置４が撮影した動画データの適切な範囲にタグを設定する。

タグ記録部５１は、受信したセンサデータ、入力タグデータ、設定したタグの範囲のデータなどを動画データに関連付けて記憶する。
受信したセンサデータ、入力タグデータ、設定したタグの範囲のデータ、及び、これらと関連付けられた動画データなどは記録媒体４５に記録されることもある。
ダイジェスト処理部５２は、タグ範囲処理部５０が設定したタグの範囲に基づいて、ダイジェスト映像を作成する。
ダイジェスト記録部５３は、ダイジェスト処理部５２が作成したダイジェスト映像に関するデータなどを動画データに関連付けて記憶する。

入力タグデータには、例えば、ユーザがタグを入力した時刻や、撮像装置４がタグ入力を受信した時刻が含まれる。時刻でなくても、センサ装置２、タグ入力装置３及び撮像装置４が録画開始などの何らかの同期するタイミングを共有できれば、その時点からの経過時間の情報でも代用が可能である。
なお、センサ装置２、タグ入力装置３及び撮像装置４が時計を内蔵しているのであれば、センサ装置２、タグ入力装置３は測定した心拍数、入力タグデータをリアルタイムで撮像装置４に送信する必要はない。後で、それぞれの時計情報に基づいて、動画データ、バイタルデータ及び入力タグデータのタイミングを合わせることが可能である。

なお、撮像装置４が実現する各構成要素は、ＣＰＵ４６の制御によって、プログラムを実行させることによって実現できる。より具体的には、撮像装置４は、記憶部（図示せず）に格納されたプログラムを主記憶装置（図示せず）にロードし、ＣＰＵ４６の制御によってプログラムを実行して実現する。また、各構成要素は、プログラムによるソフトウェアで実現することに限ることなく、ハードウェア、ファームウェア、及びソフトウェアのうちのいずれかの組み合わせ等により実現しても良い。

上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、撮像装置４に供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。

また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によって撮像装置４に供給されても良い。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムを撮像装置４に供給できる。

続いて、本実施の形態に係るダイジェスト作成システム１の動作、すなわち、ダイジェスト作成方法について説明する。
まず、タグ範囲処理部５０の動作の概要について説明する。タグ範囲処理部５０は、上述したように、受信したセンサデータ及び入力タグデータを用いて、撮像装置４が撮影した動画データの適切な範囲にタグを設定するものである。

図２は本実施の形態に係る心拍数の時間変化と、バイタルデータ（心拍数）とユーザが入力したタグデータとを用いて設定されたタグ範囲との関係を示す図である。
心拍数のグラフと入力タグデータであるタグＦ（本実施形態ではタグＦ１〜タグＦ４）を示したものを上部に、タグＦの範囲を動画データに関連付けたもの（タグ範囲）を下部に示している。心拍数のグラフの横軸は時刻、縦軸は心拍数を示す。また、心拍数７５付近の横線はタグＦのタグ範囲を設定するための閾値を示す。また、心拍数４０付近に記入している横方向の矢印及び「平常」「緊張」等の文字は、そのときのユーザの状態を説明するためのものである。

図２に示した心拍数の例では、ユーザの状態はゲーム開始からゲーム終了までの間に心拍数の変化から、平常状態、緊張状態もしくは興奮状態、そして平常（緩和）状態へと変化する。緊張状態又は興奮状態のときに、心拍数の４つのピーク（１〜４）が生じ、それぞれのピークにおいてユーザはタグＦ１〜タグＦ４を入力している。
タグ範囲処理部５０は、心拍数が所定値（ここでは、閾値の７５）以上の時間範囲であって、当該時間範囲内でユーザがタグＦを入力している場合に、当該時間範囲をユーザが入力したタグＦのタグ範囲として設定する。当該時間範囲のフレームに対してタグを付与しても良い。

例えば、第１のピークについては、時間範囲ｔ１〜ｔ２において、心拍数が所定値を超え、かつ、ユーザがタグＦ１を入力しているので、時間範囲ｔ１〜ｔ２をタグＦ１のタグ範囲に設定する。また、第２のピークについては、時間範囲ｔ３〜ｔ４において、心拍数が所定値を超え、かつ、ユーザがタグＦ２を入力しているので、時間範囲ｔ３〜ｔ４をタグＦ２のタグ範囲に設定する。第３、４のピークについても同様である。
そして、タグ範囲処理部５０は、タグＦと当該タグＦのタグ範囲とその時間範囲（タグ時間）とを記録タグリストとして、タグ記録部５１に記録する。

なお、タグ範囲処理部５０は、心拍数が所定値以上の時間範囲があっても、当該時間範囲内でユーザがタグＦを入力していない場合には、タグ範囲を設定しない。
また、タグ範囲処理部５０は、ユーザがタグＦを入力していても、心拍数が所定値以上でない場合には、デフォルト、又はユーザが設定した時間やフレーム数でタグ範囲を設定する。
このようにして、タグ範囲処理部５０は動画データの重要範囲に精度良くタグ範囲を設定することができる。

次に、ダイジェスト処理部５２の動作について説明する。
図３は本実施の形態に係るダイジェスト処理部５２の処理手順を示すフローチャートである。
図４、５は本実施の形態に係るダイジェスト処理部５２の処理内容を説明するための図である。図４、５ではそれぞれその左側から記録タグリスト、ダイジェスト候補リスト、作成ダイジェストを示す。

記録タグリストは、上述のようにタグ範囲処理部５０が作成してタグ記録部５１に記録するもので、タグ範囲処理部５０が設定したタグのタグＩＤ、タグ開始時間、タグ時間などの情報を含む。ダイジェスト候補リストは、ダイジェスト処理部５２が作成し、ダイジェスト処理部５２の内部にある記憶部又はダイジェスト記録部５３に記録するもので、ダイジェスト映像で用いる可能性があるタグのタグＩＤ、各タグのバイタルデータ積算値、各タグのタグ時間などの情報を含む。

作成ダイジェストは、ダイジェスト処理部５２が作成し、ダイジェスト記録部５３に記録するもので、ダイジェスト映像で用いるタグのタグＩＤの情報を含む。
なお、図４は、次に説明する処理手順において、タグＦ１、タグＦ２の処理が終わった状態を示している。図５は、同処理手順において、処理が終了した状態を示している。
また、記憶タグリスト、ダイジェスト候補リスト及び作成ダイジェストは動画データと一緒に記録媒体４５に記録することもできる。

図３〜図５を参照しながら、ダイジェスト処理部５２の処理手順について説明する。ダイジェスト処理部５２は、ダイジェスト映像設定時間の設定を参照して１０分以内のダイジェスト映像を作成するものとする。ダイジェスト映像設定時間は、作成したいダイジェスト映像の長さをユーザがあらかじめ設定するものである。

まず、処理を開始すると、ダイジェスト処理部５２は記録タグリストに追加するタグＦがあるか判断する（ステップＳ１０）。ダイジェスト処理部５２は記録タグリストをその上から順番に参照し、タグＦ１があると判断する（ステップＳ１０のＹｅｓ）。
そして、当該タグＦがバイタルデータとユーザが入力したタグデータとを用いて設定されたタグであるかを判断する（ステップＳ２０）。タグＦ１はバイタルデータとユーザが入力したタグデータとを利用したタグであると判断する（ステップＳ２０のＹｅｓ）。

そして、タグ範囲内のバイタルデータ値を積算する（ステップＳ３０）。ここでは、タグＦ１のタグ範囲である時間範囲ｔ１〜ｔ２の心拍数を積算し、積算値３００を算出する。バイタルデータの積算値はタグＦの重要度の指標である。
そして、候補リストにあるタグＩＤとバイタルデータ積算値を比較する（ステップＳ４０）。タグＦ１のときには、候補リストに他のタグＩＤが記録されていないので次に進む。

そして、候補リストのタグＩＤに対応するタグＦをバイタルデータの積算値の大きい順に並べる（ステップＳ５０）。タグＦ１のときには、候補リストに他のタグＦが記録されていないので、タグＦ１を記録して次に進む。
そして、ダイジェスト映像設定時間を超えたか判断する（ステップＳ６０）。タグＦ１のタグ時間は３分（１８０秒）であり、上述したダイジェスト映像設定時間の１０分を超えていないと判断し（ステップＳ６０のＮｏ）、ステップＳ１０に戻る。

次に、ダイジェスト処理部５２は、同様に、タグＦ２があると判断し（ステップＳ１０のＹｅｓ）、タグＦ２はバイタルデータを利用したタグであると判断し（ステップＳ２０のＹｅｓ）、タグＦ２のタグ範囲である時間範囲ｔ３〜ｔ４における心拍数の積算値５００を算出する（ステップＳ３０）。

そして、候補リストにあるタグＦ１とバイタルデータ積算値を比較し（ステップＳ４０）、候補リストのタグＩＤをバイタルデータの積算値の大きい順に並べる（ステップＳ５０）。ここでは、タグＦ１の積算値が３００であり、タグＦ２の積算値が５００であり、タグＦ２がタグＦ１よりも上に来るように並べる。
そして、タグＦ２のタグ時間は４分（２４０秒）であり、タグＦ１のタグ時間は３分であり、合計しても７分であって、ダイジェスト映像設定時間の１０分を超えていないと判断する（ステップＳ６０のＮｏ）。上述したように、図４は、この時点、つまり、タグＦ１、タグＦ２の処理が終わった状態を示している。そして、ステップＳ１０に戻る。

次に、ダイジェスト処理部５２は、同様に、タグＦ３のタグ範囲である時間範囲ｔ５〜ｔ６の心拍数における積算値４００を算出する（ステップＳ１０〜Ｓ３０）。
そして、候補リストにあるタグＦ２、タグＦ１とバイタルデータ積算値を比較し（ステップＳ４０）、候補リストのタグＦをバイタルデータの積算値の大きい順、つまり、タグＦ２、タグＦ３、タグＦ１の順に並べる（ステップＳ５０）。

そして、タグＦ３のタグ時間は、４分（２４０秒）であり、タグＦ２、タグＦ１のタグ時間はそれぞれ４分、３分であり、合計して１１分になるので、ダイジェスト映像設定時間の１０分を超えていると判断する（ステップＳ６０のＹｅｓ）。
そして、設定時間に収まるまでバイタルデータ積算値の小さいタグＩＤを候補リストから削除する（ステップＳ７０）。ここでは、まずバイタルデータ積算値の小さいタグＦ１を削除する。これにより、タグＦ２、タグＦ３のタグ時間の合計が８分となって設定時間に収まるので、ステップＳ１０に戻る。

次に、ダイジェスト処理部５２は、同様に、タグＦ４のタグ時間である時間範囲ｔ７〜ｔ８の心拍数における積算値１４０を算出し（ステップＳ１０〜Ｓ３０）、候補リストのタグＩＤをバイタルデータの積算値の大きい順、タグＦ２、タグＦ３、タグＦ４の順に並べる（ステップＳ４０、Ｓ５０）。
そして、タグＦ４のタグ時間は２分２０秒（１４０秒）であり、タグＦ２、タグＦ３のタグ時間と合計して１０分２０秒になるので、ダイジェスト映像設定時間を超えていると判断し、バイタルデータ積算値の小さいタグＦ４を削除してタグ時間の合計を設定時間に収め（ステップＳ６０、Ｓ７０）、ステップＳ１０に戻る。

そして、ダイジェスト処理部５２は、次のタグＦがないと判断すると（ステップＳ１０のＮｏ）、ダイジェスト候補リストに残っているタグＦのタグＩＤを作成ダイジェストに記録して処理を終了する。図５は、この時点、つまり、処理が終了した状態を示している。ダイジェスト候補リストに残っているタグＦ２、タグＦ３が、そのまま作成ダイジェストに記録されている。なお、図５では参考のために、削除したタグＦ１、タグＦ４も取り消し線（二重線）を付けて示している。
また、ダイジェスト処理部５２は、タグＦがバイタルデータを利用したタグではないと判断したときは（ステップＳ２０のＮｏ）、ステップＳ１０に戻るようにしている。

図６は本実施の形態に係るダイジェスト映像データを説明するための図である。上側に元の撮影データを示し、下側にダイジェスト映像データを示す。ここではダイジェスト映像設定時間を無限大としている。
ダイジェスト映像データでは、タグＦ１〜タグＦ４のタグ時間が異なっており、ユーザにとって重要な範囲を精度良く抽出してダイジェスト映像を作成していることが分かる。
本実施の形態に係るダイジェスト作成システム１は、このように、動画データからユーザにとって重要な範囲を精度良く抽出してダイジェスト映像を作成することができるものであり、また、抽出した範囲についても、それらの重要度を判別して、設定された時間内でダイジェスト映像を作成することができるものである。

なお、本実施の形態に係るダイジェスト作成システム１では、バイタルデータとして心拍数を用いたが、バイタルデータとして心拍数以外のデータ、例えば、ユーザの興奮の度合いを示すようなデータを用いても良く、このときは、バイタルデータが所定値以下又は所定値未満などの時間範囲であって、当該時間範囲内にユーザがタグＦを入力している場合に、当該時間範囲をタグＦのタグ範囲として設定しても良い。

また、本実施の形態に係るダイジェスト作成システム１では、心拍数（バイタルデータ）の積分値を用いてタグＦの重要度を判断していたが、閾値より上にある心拍数の積分値、つまり、「心拍数から閾値を差し引いた値」の積分値を用いてタグＦの重要度を判断しても良い。また、バイタルデータの積分値以外にも、バイタルデータのピークの絶対値の大きさ、バイタルデータのピークの急峻性（変化率の大きさ）、単位時間当たりのタグＦの数（タグ密度）、タグ範囲の長さ（タグ時間の長さ）などを用いて、タグＦの重要度を判断しても良い。

また、本実施の形態に係るダイジェスト作成システム１では、タグＦのタグ範囲を設定するための心拍数の閾値を固定にしていたが、ユーザ毎、シーン毎などのように状況に応じて閾値を設定できるようにしても良い。また、この閾値をいつでも変更できるようにして、動画データを記録した後でもタグＦのタグ範囲を調整できるようにしても良い。
また、本実施の形態に係るダイジェスト作成システム１では、心拍数が所定値以上の時間範囲であって、当該時間範囲内にユーザがタグＦを入力している場合に、当該時間範囲をタグＦのタグ範囲として設定したが、心拍数が所定値以上の時間範囲であって、当該時間範囲内にユーザがタグＦを入力している場合に、ユーザが入力したタグＦの前後の所定時間、例えば、当該タグＦの前後それぞれ３秒間をタグＦのタグ範囲として設定して良い。もちろん、心拍数が所定値以上の時間範囲又はタグＦの前後の所定時間をユーザが選択できるようにしても良い。

また、本実施の形態に係るダイジェスト作成システム１は、センサ装置２、タグ入力装置３、撮像装置４などを備える構成としたが、撮像装置がセンサ装置及びタグ入力装置を兼ねる構成、又は、撮像装置がセンサ装置、タグ入力装置の一方を兼ねる構成としても良い。すなわち、ダイジェスト作成システムをダイジェスト作成装置として構成するようにしても良い。
また、本実施の形態に係るダイジェスト作成システム１は、ユーザが撮像装置４を用いて撮影しているときの、すなわち、ユーザが動画データを記録しているときの、ユーザのバイタルデータ及び入力タグデータに基づいてダイジェスト映像を作成していたが、ユーザが画像処理装置などを用いて動画を視聴又は編集しているときなどの、すなわち、ユーザが動画データを再生しているときの、ユーザのバイタルデータ及び入力タグデータに基づいてダイジェスト映像を作成しても良い。このため、本実施の形態に係るダイジェスト作成装置も撮像装置に限るものではなく、画像処理装置などであっても良い。

上述したように、本実施の形態に係るダイジェスト作成装置４は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信部４７と、データ通信部４７で受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、時間範囲ｔｍ〜ｔｎをタグ範囲ｔｍ〜ｔｎに設定するタグ範囲処理部５０と、タグ範囲処理部５０で設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理部５２とを備え、ダイジェスト処理部５２は、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するものである。

また、本実施の形態に係るダイジェスト作成装置４は、ダイジェスト処理部５２におけるバイタルデータの重要度をタグ範囲内のバイタルデータ値の積算により算出するものである。
また、本実施の形態に係るダイジェスト作成システム１は、ユーザのバイタルデータを計測しデータ通信部４７に出力するセンサ装置２と、当該ユーザによるタグ入力のタイミングデータをデータ通信部４７に出力するタグ入力装置３と、ダイジェスト作成装置４とを備えるものである。

また、本実施の形態に係るダイジェスト作成方法は、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信ステップと、データ通信ステップで受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理ステップと、タグ範囲処理ステップで設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理ステップとを備え、ダイジェスト処理ステップは、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて、複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するものである。

また、本実施の形態に係るプログラムは、コンピュータに、動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに当該ユーザのタグ入力のタイミングデータを受け付けるデータ通信手順と、データ通信手順で受け付けたバイタルデータが予め設定された値以上である時間範囲にタイミングデータに対応する時間が含まれる場合に、当該時間範囲をタグ範囲に設定するタグ範囲処理手順と、タグ範囲処理手順で設定されたタグ範囲に基づいて、動画データのダイジェスト映像を作成するダイジェスト処理手順とを実行させるためのものであり、ダイジェスト処理手順は、タグ範囲が複数存在する際に、タグ範囲におけるバイタルデータの重要度に基づいて、複数のタグ範囲からダイジェスト映像を作成するためのタグ範囲を選択するものである。

１ ダイジェスト作成システム
２ センサ装置
３ タグ入力装置
４ 撮像装置（ダイジェスト作成装置）
５０ タグ範囲処理部
５２ ダイジェスト処理部

Claims (5)

1. 動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに前記ユーザのタグ入力のタイミングデータを受け付けるデータ通信部と、
   前記データ通信部で受け付けた前記バイタルデータが予め設定された値以上である時間範囲に前記タイミングデータに対応する時間が含まれる場合に、前記時間範囲をタグ範囲に設定するタグ範囲処理部と、
   前記タグ範囲処理部で設定された前記タグ範囲に基づいて、前記動画データのダイジェスト映像を作成するダイジェスト処理部とを備え、
   前記ダイジェスト処理部は、前記タグ範囲が複数存在する際に、前記タグ範囲における前記バイタルデータの重要度に基づいて、複数の前記タグ範囲から前記ダイジェスト映像を作成するための前記タグ範囲を選択する
   ことを特徴とするダイジェスト作成装置。
2. 前記ダイジェスト処理部における前記バイタルデータの重要度は前記タグ範囲内のバイタルデータ値の積算により算出する
   ことを特徴とする請求項１記載のダイジェスト作成装置。
3. 前記ユーザの前記バイタルデータを計測し前記データ通信部に出力するセンサ装置と、
   前記ユーザによる前記タグ入力の前記タイミングデータを前記データ通信部に出力するタグ入力装置と、
   請求項１又は請求項２記載のダイジェスト作成装置と
   を備えることを特徴とするダイジェスト作成システム。
4. 動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに前記ユーザのタグ入力のタイミングデータを受け付けるデータ通信ステップと、
   前記データ通信ステップで受け付けた前記バイタルデータが予め設定された値以上である時間範囲に前記タイミングデータに対応する時間が含まれる場合に、前記時間範囲をタグ範囲に設定するタグ範囲処理ステップと、
   前記タグ範囲処理ステップで設定された前記タグ範囲に基づいて、前記動画データのダイジェスト映像を作成するダイジェスト処理ステップとを備え、
   前記ダイジェスト処理ステップは、前記タグ範囲が複数存在する際に、前記タグ範囲における前記バイタルデータの重要度に基づいて、複数の前記タグ範囲から前記ダイジェスト映像を作成するための前記タグ範囲を選択する、
   ことを特徴とするダイジェスト作成方法。
5. コンピュータに、
   動画データの記録又は再生をおこなうユーザのバイタルデータを連続して受け付けるとともに前記ユーザのタグ入力のタイミングデータを受け付けるデータ通信手順と、
   前記データ通信手順で受け付けた前記バイタルデータが予め設定された値以上である時間範囲に前記タイミングデータに対応する時間が含まれる場合に、前記時間範囲をタグ範囲に設定するタグ範囲処理手順と、
   前記タグ範囲処理手順で設定された前記タグ範囲に基づいて、前記動画データのダイジェスト映像を作成するダイジェスト処理手順と、
   を実行させるためのプログラムであって、
   前記ダイジェスト処理手順は、前記タグ範囲が複数存在する際に、前記タグ範囲における前記バイタルデータの重要度に基づいて、複数の前記タグ範囲から前記ダイジェスト映像を作成するための前記タグ範囲を選択する
   ことを特徴とするプログラム。

Images