JP2017225099A - 自動映像遅延表示プログラム - Google Patents

Abstract

【課題】被写体を撮影して得られるスイングフォーム等の動画データを自動的かつ連続的にスローモーションで遅延表示できる自動映像遅延表示プログラムを開発すること。【解決手段】カメラで撮影した動画画像の再生開始時間とスローモーションスピードを、遅れ時間の設定３０２と再生スピードの設定３０３とにより設定し、録画開始ボタンの操作３０４を実行すると、カメラから取得した動画像データ３１３をフラッシュメモリ３１６に記憶し、設定された遅れ時間後に設定されたスピードで再生を自動的に開始３１５するとともに、遅れ時間と撮影時間と現時点での経過位置との関連をタイミング表示手段より表示開始３０７して、スイングフォームを確認したい使用者が直観的に撮影時間のタイミングを理解できるようにするとともに、スローモーションでの確認が連続的にできるようにした。【選択図】図３

Description

本発明は、デジタルカメラ等から送出される映像データ（音声データを含む場合もある）をリアルタイムで記憶媒体に記録すると同時にその記録された任意の映像データを再生して表示する事が可能な映像遅延表示システムにおける自動映像遅延表示プログラムに関する。

近年、デジタルカメラ等で撮影された動画像データや、テレビ放送された動画像データ（いずれも音声データを含む）をリアルタイムで表示すると共に、これらの動画像データを所定時間だけ遅延させてから再生することも可能な映像遅延表示システムが開発されている。このような技術としては、例えば特許文献１（特開２００６−３２４７２２）に開示された技術等がある。

特許文献１では、撮像手段３と、記憶手段１４と、表示手段１５を有し、動画再生の遅れ時間を設定する遅れ時間設定手段６１７と、撮影開始・終了の操作が行なえる開始終了手段６１１、６１２を持ち、動画像データは複数の静止画面を１画面ずつ走査して得られる複数画面分の画像データから成り、この画像データをＲＡＭ等の半導体メモリー１２やハードディスク駆動装置１４等の記憶媒体に保存して、それを所定時間後に再生する事で実現している。

この技術ではユーザーが遅延時間を設定して録画開始ボタンを押下すると、デジタルカメラから得られた映像信号を、その遅延時間に最適な記憶媒体に保存して、その設定された遅延時間分過去の映像データを繰り返し再生する事によって、ユーザーが操作する事無しに繰り返し過去の映像を遅延再生できるようになっている。このため、ゴルフのスイングフォームをユーザー自身でチェックするような場合であれば、ユーザーは遅延時間を設定して録画ボタンを押すだけで、繰り返し自分のスイングフォームをチェックする事が可能となる。

しかし特許文献１の技術では、録画中に表示される遅延動画の再生画面では、等速再生しか考慮されておらず、スローモーション再生等の再生スピードを可変にすることは考慮されていない。ユーザーがスローモーションで自分のスイングフォームを確認しようとした場合は、一旦録画を終了してそれまでに録画された過去の録画ファイルから希望するものを選択し、それを再生する操作を行って、その録画ファイルが画面で再生された後に、初めて再生スピードの変更が行えるようになっている。このため、ユーザーがその装置に触れることなく連続的にスローモーションによって自身のスイングフォームをチェックする事は不可能である。

このような映像遅延表示システムの利用用途としては、先のゴルフのスイングフォームのチェックや、野球のバッティング・ピッチングフォーム、テニスのスイングフォーム、ダンス等の動き等様々なスポーツにおける動作の確認に用いられる事が予想される。このような場合は、等速再生だけでなく、スローモーション再生も自動的かつ連続的に行えるようになれば、利用者にとって非常に便利なシステムとなる。

特開２００６−３２４７２２

特許文献１の技術では、先述のようにスイングフォーム等をスローモーションで確認しようとした場合、過去の録画した映像ファイルの中から希望するものを選択して、再生速度を設定し、見たいシーンの頭出しをして、その場面からスローモーション再生を行うといった使用者の煩雑な操作が必要という問題があった。本発明ではこれを解決し、使用者が簡単な操作をするだけで自動的かつ連続的にスローモーションによっても自身のスイングフォーム等を確認できるようにするものである。

本発明では、このようなスローモーション再生による被写体の動きのチェックを、装置に触れることなく連続的に行う事ができるようにするため、内蔵若しくは接続可能で被写体を撮影できる撮像手段と、動画信号を記憶するための記憶手段と、動画信号を再生する表示手段を有し、動画再生の遅れ時間を設定する遅れ時間設定手段または撮影時間を設定する撮影時間設定手段と、撮影開始・終了の操作が行なえる開始終了手段とからなり、撮影開始の操作を行うと設定された遅れ時間の後に録画された動画を、停止の操作をするまでの間、自動的にかつ連続的に再生させる事ができる自動映像遅延表示システムにおいて、再生時のスピードを任意の倍率に設定できる再生スピード設定手段と、その再生スピード設定手段によって設定された任意の倍率設定値に従って動画を再生する事が可能な可変スピード動画再生手段と、設定された遅れ時間または撮影時間に基づいて遅れ時間と撮影時間と現時点での経過位置を表したタイミング表示手段と、を持つことを特徴とする。

これらの手段を用いれば、使用者が仮に１０秒の遅れ時間を設定し、再生スピードを１／２に設定して撮影を開始した場合、または使用者が５秒の撮影時間を設定し再生スピードを同じく１／２に設定して撮影を開始した場合、撮影開始から１０秒経過した後に１０秒前の過去の映像が１／２スピードのスローモーションにて繰り返し再生する事が可能となる。また、このようにスローモーション再生を繰り返し行う場合は、設定された遅れ時間１０秒のうちの後半５秒部分は、スローモーションで再生されない部分が出来てしまうため、ユーザーが撮影時間と遅れ時間と現時点での経過位置が直感的に理解できるようにタイミング表示手段を設けている。

本発明によるプログラムを用いれば、使用者は機器に触れることなく繰り返し自身のスイングフォーム等のチェックをスローモーション再生により自動的かつ連続的に行う事が可能であり、しかもスローモーション再生によってチェックしたい場合には、その撮影タイミングがグラフィック表示を認識する事によって瞬時に判断できるため、最適なタイミングで自身がチェックしたい動きを撮影する事が可能となる。

代表的なタブレット型端末機のハードウェア構成図を示す。 ディスプレイの表示例を示す。 録画開始から終了までの処理の流れを簡単に示すフローチャートである。 撮影・記録と再生処理のタイミングを示す図である。等倍速再生時と１／２倍速再生時の場合を示している。 使用者に撮影タイミングを示すグラフィックの例である。１／２倍速再生の場合を示している。 使用者に撮影タイミングを示すグラフィックの例である。１／３倍速再生の場合を示している。

以下、本発明の実施形態について具体的に説明する。今回提示する実施例はタブレット型の端末機について説明を行うが、同じ構成部品を持つものであれば、ノートブックパソコンやデスクトップパソコン等でも良い。また、具体的な実施例では遅れ時間設定手段を設けた場合について説明をする。

図１はタブレット型端末機のハードウェア構成を示している。
１０１は全体の動きを制御して様々なプログラムを実行して計算するＣＰＵ（中央演算装置Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）で、これは様々な機器とデータをやり取りするためにバスライン１００に接続されている。このバスライン１１０には、実行するプログラムの一部が保存されているＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２や計算時に一時的にデータを記録するためのＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３、補助記憶装置として内部フラッシュメモリ１０４や外部記憶装置用インターフェース１０５を通して、ＳＤカードメモリ等が装備されている。フラッシュメモリ１０４やＳＤカードメモリ１０６には、実行するプログラム本体が格納されている他に、プログラムによって記録された様々なデータを保存しておく場所として使われている。

またバスライン１１０には、有線や無線で外部と通信するためのネットワークインターフェース１０７や、カメラ素子用インターフェース１０８を通してカメラ装置１０９、１１０が接続されている。カメラはタブレット型端末機の表側と後ろ側との２カ所に装備されているものが多く、このカメラを切り替えて使う事によって、様々な用途に使う事が可能となっている。音声入出力用インターフェース１１１にはマイク１１２とスピーカー１１３が接続されている。

ディスプレイ用インターフェース１１４を通してディスプレイ１１５が接続されており、タブレット型端末機ではこのディスプレイ１１５にタッチセンサ１１７が装備されており、画面の表示部分をユーザーが触れる事により、様々な動作を実行する事ができるようになっている。タッチセンサ１１７は入出力用インターフェース１１６に接続されているが、この他の入力機器としては電源スイッチ１１８、操作ボタン１１９等が装備されている。

本発明の動作を行うプログラムは、前述のＲＯＭ１０２、フラッシュメモリ１０４、またはＳＤカードメモリ１０６等に記録されており、使用者のタッチセンサ１１７に対するタッチ操作や、各種操作ボタン１１９の操作によってその本プログラムが起動されるようになっている。

プログラム実行時のディスプレイ１１５における表示例を図２に示す。

ディスプレイには、プレビュー表示部２０１があり、ここには現在のカメラから取得できる動画像が表示される。このため、現在カメラでどの範囲が撮影されているのかを確認する事ができる。

また画面下部にはボタンが並んでおり、メニュー画面を表示するためのメニューボタン２０４と動画を撮影・停止するための録画・停止ボタン２０５が配置されている。

メニューボタン２０４をタッチする事により表示されるメニュー画面では、遅延時間を設定する機能と、内蔵されている複数のカメラのうちどのカメラを使うかを指定する機能と、カメラを縦長で撮影するのか横長で撮影するのか撮影方向を決める機能と、スローモーション再生の倍率を設定する機能を有する。これらを使用者が希望する任意の値に設定する事で目的に合った最適な動作を実現する事ができるようになっている。

使用者が希望する撮影方法をメニュー画面にて設定した後に録画・停止ボタン２０５をタッチすると、すぐに録画が開始される。この録画は使用者が設定した遅延時間分だけ記録され、その遅延時間が経過した後にその記録された動画像が遅延動画表示部２０２に表示再生される。この再生処理と並行して次の録画処理も開始するため、この録画と再生の処理を連続的に繰り返す事により、使用者が操作する事無く、連続的に希望する時間差にて動画像を遅延表示する事が可能となる。

この録画と再生の制御部分のフローチャートを図３に示す。

使用者が本プログラムを実行すると図中３００にて処理が開始され、３０１にてメニューボタンがタッチされたかどうかを判定する。メニューボタンがタッチされると、画面表示が切り替わりそこで遅れ時間の設定処理３０２や、再生スピードの設定処理３０３等を行う。ここで設定されたそれぞれの設定値はＲＡＭ１０３等に記憶される。また、３０４では録画開始ボタンがタッチされたかどうか判定をしていて、ここで録画開始と判定されると３０５において録画の準備処理が行われる。ここでは、カメラの接続状況の確認や取得動画像の解像度等の設定等、録画に先立って行うべき処理が実行される。また３０６では、現在の時刻に使用者が設定した遅れ時間を加算した時刻を計算して録画終了時刻として記憶しておく。そして３０７においてディスプレイ上に後述図５で示すような撮影タイミングを示すグラフィックの表示を開始する。次の３０８では、録画データを保存しておくフラッシュメモリ３１６の記憶領域に新規の記録領域を確保する処理を行う。この記憶領域を確保する処理３０８では、必要であれば不要な過去の動画像データを削除してフラッシュメモリ内の空き領域を確保する処理も行う。次のステップ３１１では使用者が録画の停止ボタンを操作したかどうか判断して、操作していれば３０９へ進み先述の撮影タイミングを示すグラフィック表示を停止する処理を行い、３１０にておいて録画の終了処理を行う。３１１にて停止の操作をしていなければ次の３１２のステップにて現在時刻が３０６で記憶された録画終了時刻を経過しているか判断し、まだ録画終了時刻になっていなければ、３１３にて使用者が指定したカメラから動画像データを取得して、このデータを３１４の処理ルーチンでデータの圧縮処理や記録処理を行って内部のフラッシュメモリ３１６等の記憶装置にデータを記録する。この動画像データの記録はステップ３０８にてよって確保された記憶領域に対して行われる。このステップを通過した後は３１１の録画停止ボタンを操作したかどうか判定する処理に戻って処理を繰り返す。一方３１２にて現在時刻が録画終了時刻を経過している場合は、処理３１５に進み直前にフラッシュメモリ３１６に記録されている動画像データを読み込み、その圧縮されたデータを伸張する処理を行いながらディスプレイの遅延動画表示部２０２に再生表示する処理を開始する。尚、この３１５の処理では３０８の処理にて直近に確保された記憶領域に保存された動画像データを再生するため、その再生時間は等速で再生する場合は使用者が設定した遅れ時間とほぼ同じ長さとなる。

これらの処理により使用者が録画停止の操作をしなければ、設定した遅れ時間分の長さの動画像データがフラッシュメモリ内に記録され、その動画像データを遅れ時間が経過後に再生する事を自動で繰り返す事が可能となる。これによって使用者が操作する事無く、自身のゴルフのスイングフォームを連続して自分でチェックする事が可能となる。

ここで、自身のスイングフォームをスローモーション再生したい場合、仮に希望する再生スピードが１／２倍速であると、３１５における動画像の伸張表示処理では、直近に保存されたフラッシュメモリの動画像データの前半の半分の長さのデータを１／２倍速で表示すれば、次の３１２において録画終了時刻だと判定され、次のサイクルの動画像を再生するタイミングにそのスローモーション再生が丁度終了する事となる。

撮影・記録処理と再生処理とのタイミングについて表したタイミングチャートを図４に示す。

図４において、等速再生の場合は録画を開始すると使用者によって設定された遅れ時間設定値の間、カメラからの動画像データＤ１が記録される。そして遅れ時間設定値が経過したａの時点では、記録されたＤ１のデータを再生すると共に次のＤ２のデータの記録を開始する。この作業を録画停止の操作がされるまで繰り返し続けることによって連続的に遅延再生を実現する事ができる。

一方で１／２倍速再生時には、録画動作を開始して遅れ時間設定値が経過したａの時点において、記録されているＤ１の前半半分の長さであるＤ１ａの部分だけを、１／２のスローモーション再生すればその再生が終わるタイミングは次のｂの時点となるので、これによって連続的にスローモーション再生を行う事が可能となる。但し、記録されたＤ１データの後半部分であるＤ１ｂの部分に関しては、再生がされないため、撮影時に使用者に対して現時点がスローモーション再生の対象となっているのか、または再生されないタイミングであるのかを提示する必要が生じる。

これを解決するために本発明では、ディスプレイ上に図５のような撮影サイクルのタイミングを表す図形を用いる。

この図は撮影サイクルのタイミングを示すもので、ディスプレイ上には図２中の２０３のように示される。円の１周が撮影サイクル１回分を示しており、その上を現時点を表示するマーカーである５０２が時間経過と共に円内を５０３の矢印の方向へ進んで行く。撮影サイクル１回分は、使用者が設定した遅れ時間と等しいので、例えば遅れ時間が１０秒に設定されていれば、５０２のマーカーは撮影が開始されると５０１を起点として１０秒間で時計方向に１周する事となる。もちろんこの場合は、マーカー５０２が円周の半分の地点である５０４を５秒後に通過する事になる。このマーカー５０２は撮影中は絶えずこの円周を回っている。

先述のように、仮に１／２倍速でスローモーション再生する場合、再生される部分は、撮影サイクル１回分の前半半分の長さだけであるので、これは図５中の５０１から５０４の間をマーカーが進んでいる範囲となる。このため、この図を利用者が見れば一目で現時点が後にスローモーション再生されるタイミングであるかどうか判断する事ができる。

図６は仮に１／３倍速でスローモーション再生する場合のタイミング図である。

１／３倍速では、スローモーション再生の範囲終端を示す６０４は、円周の１／３の部分、角度としては１２０度の位置に示される事となる。現時点を示すマーカー６０２は、先の例と同じく設定された遅れ時間で円周を１周回る事になる。

このようなタイミングを示す図をディスプレイ上に表示する事によって、利用者は一目でスローモーション再生されるタイミングで、自身が検証したい動作を行う事ができるので、ゴルフのスイングをチェックする場合等において、何の操作をする事も無く繰り返し自身のフォームを手軽に確認する事が可能となる。

尚、このようなタイミングを示す図は必ずしも円である必要は無く、例えば棒状や楕円、半円等の形態でも良い。撮影サイクルの１回分の長さと現在時点、それと再生される範囲が明示されていれば、その形態は問わない。

また、今まで説明してきた実施例では、遅れ時間設定手段を設けた場合について説明してきたが、再生スピード、遅れ時間、撮影時間のうち二つを決定すれば、残りの一つは計算によって求められるため、遅れ時間設定手段の替わりに撮影時間設定手段を設ける事によっても本発明を実現する事ができる。

１０ タブレット型端末本体
１０１ ＣＰＵ（中央演算装置）
１０２ ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）
１０３ ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）
１０４ フラッシュメモリ
１０５ 外部記憶装置用インターフェース
１０６ ＳＤカードメモリ
１０７ ネットワークインターフェース
１０８ カメラ素子用インターフェース
１０９ カメラ１
１１０ カメラ２
１１１ 音声入出力用インターフェース
１１２ マイク
１１３ スピーカー
１１４ ディスプレイ用インターフェース
１１５ ディスプレイ
１１６ 入出力機器用インターフェース
１１７ タッチセンサ
１１８ 電源スイッチ
１１９ 操作ボタン
２０１ プレビュー動画表示部
２０２ 遅延動画表示部
２０３ タイミングチャート表示部
２０４ メニュー画面への遷移用ボタン
２０５ 録画・停止ボタン

Claims (1)

1. 被写体を撮影して得られる動画データを連続的に遅延表示できるための映像遅延表示システムの自動映像遅延表示プログラムであって、内蔵若しくは接続可能で被写体を撮影できる撮像手段と、撮像手段により撮影した動画信号を記憶するための記憶手段と、動画信号を再生する表示手段を有し、動画再生の遅れ時間を設定する遅れ時間設定手段または撮影時間を設定する撮影時間設定手段と、撮影開始・終了の操作が行なえる開始終了手段とからなり、開始終了手段により撮影開始の操作を行うと、設定された遅れ時間または撮影時間の後に、記憶手段に記憶されている録画された動画を停止の操作をするまでの間自動的にかつ連続的に再生させる事ができる自動映像遅延表示システムにおいて、再生時のスピードを任意の倍率に設定できる再生スピード設定手段と、その再生スピード設定手段によって設定された任意の倍率設定値に従って動画を再生する事が可能な可変スピード動画再生手段と、設定された遅れ時間または撮影時間に基づいて遅れ時間と撮影時間と現時点での経過位置との関連を表したタイミング表示手段と、を持つことを特徴とする自動映像遅延表示プログラム。

Images