JP2004080615A

JP2004080615A - 画像編集装置

Info

Publication number: JP2004080615A
Application number: JP2002240715A
Authority: JP
Inventors: Masakazu Nishijima; 西嶋　征和
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 2002-08-21
Filing date: 2002-08-21
Publication date: 2004-03-11

Abstract

【課題】動画ファイルを一括して編集することにより、画像中の特定箇所の変化過程を確認するのに便宜な画像編集装置を提供する。
【解決手段】再生中の動画を一時停止させ、所定のフレーム画像を表示させる手段と、表示されたフレーム画像より、予め設定されたｎコマ前のフレーム画像を表示させる手段と、表示されたフレーム画像より、予め設定されたｍコマ後のフレーム画像を表示させる手段と、表示されたフレーム画像よりｎコマ前のフレーム画像を先頭画像とし、表示されたフレーム画像よりｍコマ後のフレーム画像を最後尾画像とし、ｍ＋ｎ＋１コマのフレーム画像を同時にインデックス表示させる手段と、を備える。
【選択図】　　　　　図３

Description

【０００１】
【発明の属する技術分野】本発明は画像編集装置に係り、特にデジタルカメラによって撮影された動画ファイルを一括して編集することにより、画像中の特定箇所の変化過程を確認するのに便宜な画像編集装置に関する。
【０００２】
【従来の技術】
近年、デジタルカメラが普及してきた。これらのデジタルカメラには、通常の単写機能の他に動画撮影機能や連写機能を有するものもある。
【０００３】
デジタルカメラで撮影された静止画は、ＪＰＥＧ（Ｊｏｉｎｔ　Ｐｈｏｔｏｇｒａｐｈｉｃ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）などの圧縮・伸張方式による静止画ファイルとしてデジタルカメラ付属の記録メディアに記録され、デジタルカメラで撮影された動画は、Ｍｏｔｉｏｎ　ＪＰＥＧ　などの動画ファイルとしてデジタルカメラ付属の記録メディアに記録され、その記録メディアは保存用・鑑賞用として使用されている。なお、Ｍｏｔｉｏｎ　ＪＰＥＧ　は、各フレーム画像をＪＰＥＧ方式で圧縮し、一連の画像群として記録する方法であり、再生時は各フレームが連続的に再生される。
【０００４】
また、デジタルカメラの連写機能によって撮影された一連の静止画は、１枚ずつ静止画ファイルとしてデジタルカメラ付属の記録メディアに記録される。
【０００５】
ところで、撮影された動画を再生してゴルフ、テニス等におけるフォームをチェックする要求も多くなっている。たとえば、ゴルフのスイング動作をチェックしたり、投げ釣りでの投竿動作をチェックしたりし、フォームの良否を判定することは多い。この場合、動作の時系列的な変化を一度に表示すれば、フォームの良否判定に便利である。
【０００６】
このような用途に利用できる動画再生機能として、動画ファイルを分解表示する機能を持ったアプリケーションソフトが市販されている。これらのアプリケーションソフトの多くは、動画ファイル内の全てのフレーム画像を一旦分解した後、それら分解後のフレーム画像の全てを一覧表示するようになっている。
【０００７】
ところが、このような方式では、全てのフレーム画像が表示されるまでに時間を要し、また、複数のフレーム画像の中から所望のフレーム画像を検索・選択するのに手間を要する。
【０００８】
また、シーンの切れ目のフレーム画像を代表的な画像として表示したり（以下、タイプａと称する）、所定時間（たとえば、１秒）毎のフレーム画像を切り出して代表的な画像として表示したり（以下、タイプｂと称する）するものもあるが、所望の複数のフレーム画像がそれらの代表的な画像の前後に跨る場合や（タイプａの場合）、所望の複数のフレーム画像が代表的な画像同士の間に入ってしまう場合（タイプｂの場合）がある。この場合、更に代表的な画像の周辺のフレーム画像を検索・選択しなければならず、使用上も不便であった。
【０００９】
従来より、このような動画再生の用途に適用できる技術として各種の提案がなされている。たとえば、画像圧縮時に得られる動きベクトルデータの挙動を解析することにより、シーンの切れ目を抽出し、更に同一シーン内での画像内容の類似度を計算し、動画画像の全体を階層的に定義する技術がある。（特許文献１参照。）。
【００１０】
また、動画ファイルの先頭から時系列の順に対応したサムネイルを示すサムネイル情報を生成させる技術がある。（特許文献２参照。）。
【００１１】
【特許文献１】
特開平９−９３５８８号公報
【００１２】
【特許文献２】
特開平１０−９３９２５号公報
【００１３】
【発明が解決しようとする課題】
しかしながら、これらの従来技術を使用しても、上記の課題の解決は困難であった。すなわち、特許文献１は、タイプａの技術であり、一覧表示、インデックス表示には不向きである。また、特許文献２は、タイプｂの技術であり、一覧表示、インデックス表示には不向きである。
【００１４】
本発明はこのような事情に鑑みてなされたもので、動画ファイルを一括して編集することにより、画像中の特定箇所の変化過程を確認するのに便宜な画像編集装置を提供することを目的とする。
【００１５】
【課題を解決するための手段】
前記目的を達成するために、請求項１に係る発明は、再生中の動画を一時停止させ、所定のフレーム画像を表示させる手段と、前記表示されたフレーム画像より、予め設定されたｎコマ前のフレーム画像を表示させる手段と、前記表示されたフレーム画像より、予め設定されたｍコマ後のフレーム画像を表示させる手段と、前記表示されたフレーム画像よりｎコマ前のフレーム画像を先頭画像とし、前記表示されたフレーム画像よりｍコマ後のフレーム画像を最後尾画像とし、ｍ＋ｎ＋１コマのフレーム画像を同時にインデックス表示させる手段と、を備えたことを特徴とする画像編集装置を提供する。
【００１６】
また、請求項２に係る発明は、再生中の動画を一時停止させ、所定のフレーム画像を表示させる手段と、前記表示されたフレーム画像より、予め設定されたｎコマ前のフレーム画像を表示させる手段と、前記表示されたフレーム画像より、予め設定されたｍコマ後のフレーム画像を表示させる手段と、前記表示されたフレーム画像よりｎコマ前のフレーム画像を先頭画像とし、前記表示されたフレーム画像よりｍコマ後のフレーム画像を最後尾画像とし、ｍ＋ｎ＋１コマのフレーム画像を保存させる手段と、を備えたことを特徴とする画像編集装置を提供する。
【００１７】
ここで、上記ｍ及びｎの値は、動画ファイル中のフレーム画像の性質より、０を含む整数である。
【００１８】
本発明によれば、一時停止させた動画像、及びこれよりｎコマ前のフレーム画像（先頭画像）と、これよりｍコマ後のフレーム画像（最後尾画像）とを同時に表示させることができる。また、更に、先頭画像と最後尾画像及びこの間の画像全てを同時にインデックス表示させることができる。これにより、動画画像中の特定箇所の変化過程を確認するのに便宜となる。
【００１９】
本発明において、前記ｍ及び／又はｎの値が再設定可能であることが好ましい。たとえば、ｍ及びｎの値が短時間の動作（たとえば、ゴルフのスイング動作）の判定に便宜であっても、これより長時間の動作（たとえば、投げ釣りでの投竿動作）の判定に便宜であるとは限らない。この場合であっても、ｍ及び／又はｎの値が再設定可能であれば容易に対応可能となる。
【００２０】
【発明の実施の形態】
以下、添付図面に従って本発明に係る画像編集装置の好ましい実施の形態について詳説する。図１は本発明に係る画像編集装置としての機能を備えたパソコン（パーソナルコンピュータ）のハードウェア構成例を示すブロック図である。
【００２１】
図１に示されるように、パソコン１は、主として各構成要素の動作を制御する中央処理装置（ＣＰＵ）１０と、装置の制御プログラムが格納されたり、プログラム実行時の作業領域となる主メモリ１２と、パソコン１のオペレーティングシステム（ＯＳ）、パソコン１に接続された周辺機器のデバイスドライバ、画像編集処理のプログラムを含む各種のアプリケーションソフト、ユーザの画像等が格納されるハードディスク装置１４と、ＤＶＤ−Ｒ／ＲＷ装置であるＣＤ−ＲＯＭドライブ１６と、表示用データを一時記憶する表示メモリ１８と、この表示メモリ１８からの画像データ、文字データ等により画像や文字等を表示するＣＲＴモニタや液晶モニタ等のモニタ装置２０と、キーボード２２と、位置入力装置としてのマウス２４と、マウス２４の状態を検出してモニタ装置２０上のマウスポインタの位置やマウス２４の状態等の信号をＣＰＵ１０に出力するマウスコントローラ２６と、デジタルカメラ２と接続して画像データ等の入力が可能なＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）などのインターフェース２７と、上記各構成要素を接続するバス２８とから構成されている。
【００２２】
なお、上記構成のパソコン１及びデジタルカメラ２は、周知のものであるため、各構成要素の詳細な説明については省略する。
【００２３】
次に、インターフェース２７を介して接続されているデジタルカメラ２のメモリカード、又はパソコン１のハードディスク装置１４に格納されている複数の動画ファイルから所定のフレーム画像及び先頭画像、最後尾画像を表示し、更にｍ＋ｎ＋１コマのフレーム画像をモニタ装置２０にインデックス表示させる場合、又は、ＤＶＤ−ＲＡＭやＣＤ−Ｒなどの記録メディアに書き込む場合の実施の形態について説明する。
【００２４】
図２は、本発明に係る画像編集装置におけるモニタ装置の操作画面（所定のフレーム画像及び先頭画像、最後尾画像）を示す図であり、図３は、同じく操作画面（インデックス表示されたｍ＋ｎ＋１コマのフレーム画像）を示す図であり、図４は、動画ファイル編集の処理手順を説明するフローチャートである。
【００２５】
以下、処理手順にしたがって説明する。パソコン１を起動し、動画表示のプログラムを実行させ、編集を行なう動画ファイルを選択する（ステップＳ１０）。そして、選択した動画ファイルをパソコン１のモニタ装置２０に再生表示させる（ステップＳ１２）。
【００２６】
再生表示の際に、一時停止させ、基準となるフレーム画像を表示させる（ステップＳ１４）。この際、最適なフレーム画像を選択できるように、再生表示をスローモードで行なわせてもよい。
【００２７】
再生表示で一時停止した場合、モニタ装置２０の画面は、図２に示される操作画面５０となり、中央部に比較的大きい基準フレーム画像ＧＳが、左側に小さい先頭画像ＧＴが、右側に小さい最後尾画像ＧＥが、それぞれ表示される。ここで、先頭画像ＧＴは、基準フレーム画像ＧＳよりｎコマ前のフレーム画像であり、最後尾画像ＧＥは、基準フレーム画像ＧＳよりｍコマ後のフレーム画像である。
【００２８】
操作画面５０の基準フレーム画像ＧＳの下方にはコマ送り操作用のスイッチ（ボタン）が複数個配列されており、コマ送り・一時停止操作ができるようになっている。中央の一時停止ボタン３２は、一時停止操作の機能、右隣の一コマ送りボタン３４は、一コマ送りの機能、左隣の一コマ戻りボタン３６は、一コマ戻りの機能、右端の連続送りボタン３８は、連続送りの機能、左端の連続戻りボタン４０は、連続戻りの機能、をそれぞれ有する。各ボタンはマウス２４の操作によって起動できる。
【００２９】
図２に示される操作画面５０において、たとえば、一コマ送りボタン３４を操作すると、基準フレーム画像ＧＳは操作した数だけコマ送りされるとともに、先頭画像ＧＴ及び最後尾画像ＧＥも連動してコマ送りされる。他のボタン３６、３８、４０を操作した場合も同様に、先頭画像ＧＴ及び最後尾画像ＧＥは基準フレーム画像ＧＳに連動する。
【００３０】
後述するインデックス表示（図３参照）した場合に、画像中の特定箇所の変化過程（たとえば、ゴルフのスイング動作）を確認するのに便宜なように、先頭画像ＧＴから最後尾画像ＧＥまでの間に全ての動作が含まれていることが好ましい。したがって、先頭画像ＧＴ又は最後尾画像ＧＥが不適切な場合には、コマ送り（戻り）操作を行い、適切な位置に一時停止させる。
【００３１】
すなわち、一時停止位置の適否を確認し（ステップＳ１６）、良ければ（ＹＥＳ）以降のステップへ進み、不適な場合（ＮＯ）にはステップＳ１４に戻り、コマ送り（戻り）操作を行い、適切な位置に一時停止させる。
【００３２】
図２の例は、ゴルフのスイング動作の画像であり、先頭画像ＧＴから最後尾画像ＧＥまでの間に全ての動作が含まれている適切な状態にある。ただし、ｍとｎの設定が不適切な場合、たとえば、ｍ＋ｎ＋１が小さ過ぎる場合には、全ての動作が含まれず、一方、ｍ＋ｎ＋１が大き過ぎる場合には、不要な動作まで含まれ、いずれも好ましくない。このような場合に対処すべく、ｍ及びｎの値が再設定可能となっている。
【００３３】
すなわち、コマ数（ｍ＋ｎ＋１の範囲）の適否を確認し（ステップＳ１８）、良ければ（ＹＥＳ）以降のステップへ進み、不適な場合（ＮＯ）にはｍとｎの値の再設定（ステップＳ２０）を行なった後にステップＳ１４に戻り、コマ送り（戻り）操作を行い、適切な位置に一時停止させる。
【００３４】
以上の操作を行い、図２に示される操作画面５０が良好であった場合、画面右下の一覧表示スイッチ４２を操作（マウス２４による）してインデックス表示させる（ステップＳ２２）。
【００３５】
図３は、このようにインデックス表示された操作画面７０であり、ゴルフのスイングの開始から終了までの動作が１５コマでインデックス表示されている。すなわち、時系列的にｇＴ〜ｇＥまでが横書き（文章の）の順列で表示されている。このうち、ｇＴは先頭画像ＧＴに、ｇＳは基準フレーム画像ＧＳに、ｇＥは最後尾画像ＧＥに、それぞれ対応している。
【００３６】
したがって、この設定ではｎは７、ｍは７であり、インデックス表示画面の中央に基準フレーム画像ＧＳに対応する画面ｇＳが配されている。画面ｇＴ〜ｇＳの間には画面ｇ６−〜ｇ１−が、画面ｇＳ〜ｇＥの間には画面ｇ１＋〜ｇ６＋が、それぞれ配されている。
【００３７】
なお、基準フレーム画像ＧＳに対応する画面ｇＳは、このように必ずしも中央の配列される必要はなく、使用者の好み等に応じて任意の位置に配列されてもよい。この場合、たとえば、ｎを５とし、ｍを９ともでき、ｎを１０とし、ｍを４ともでき、ｍ＋ｎ＋１＝１５となる組み合わせの範囲で任意に設定できる。なお、既述のように、ｍ及びｎの値は０を含む整数である。
【００３８】
既にステップＳ１８においてコマ数（ｍ＋ｎ＋１の範囲）の適否が確認され、不適な場合（ＮＯ）にはステップＳ２０においてｍとｎの値の再設定がなされているが、図３でインデックス表示された操作画面７０において、再度適否を判断する必要も生じる（ステップＳ２４）。
【００３９】
操作画面７０の表示が良ければ（ＹＥＳ）以降のステップへ進み、不適な場合（ＮＯ）にはｍとｎの値の再設定（ステップＳ２０）を行なった後にステップＳ１４に戻り、コマ送り（戻り）操作を行い、適切な位置に一時停止させる等の操作を繰り返す。
【００４０】
以上のように表示された図３に示されるインデックス表示を見ることにより、ゴルフのスイング動作の一連の動きの変化が容易に理解でき、スイング動作の矯正等が容易となる。
【００４１】
なお、既述のように、図３のインデックス表示は例示であり、これ以外の設定画面とすることは用途に応じて任意に選択し得る。本例では、ゴルフのスイング動作の開始から終了までが１５画面に分割されて時系列的に表示されている。これ以外の一例では、たとえば、野球の投球動作のフォームをチェックする用途が挙げられる。
【００４２】
以上、インデックス表示（ステップＳ２２）について説明したが、この後にプリント（ハードコピー）が必要な場合の有無が問われ（ステップＳ２６）、必要（ＹＥＳ）な場合にはプリントがなされる（ステップＳ２８）。更に、このインデックス表示画像の保存が必要な場合の有無が問われ（ステップＳ３０）、必要（ＹＥＳ）な場合にはメモリーへのセーブがなされる（ステップＳ３２）。
【００４３】
以上でこの動画ファイルの編集は終了するが、他の動画ファイルの編集が必要な場合の有無が問われ（ステップＳ３４）、必要、すなわち終了しない（ＮＯ）場合にはフローの最初（ステップＳ１０）に戻って新たな動画ファイルの選択がなされ、不要、すなわち終了する（ＹＥＳ）場合にはプログラムを終了する（ステップＳ９９９）。
【００４４】
以上に説明した動画ファイル編集の処理手順を実施するためのハードウェア及びソフトウェアは、いずれも公知の各種手段を採用することにより実現できるので、ここでは詳細な説明は省略する。たとえば、ハードウェアとしては図１に示したパソコン１が採用でき、ソフトウェアとしては既存の動画ファイルソフト、図形表示ソフト等の組み合わせが採用できる。
【００４５】
以上、本発明に係る画像編集装置の実施形態の例について説明したが、本発明は上記実施形態の例に限定されるものではなく、各種の態様が採り得る。
【００４６】
たとえば、本実施形態では、動画ファイルのフレーム画像を連続して表示するようになっているが、比較的ゆっくりとした動作の場合（たとえば、太極拳の動作）、動画ファイルのフレーム画像をもれなく連続して表示する必要性に乏しく、かえって冗長ともなる。このような場合には、数コマおきに間引いて表示する方式を採用してもよい。
【００４７】
また、場合によっては、インデックス表示画面のフレーム画像の数（ｍ＋ｎ＋１）が多い場合に数画面に分けて表示してもよく、また、画像のサイズを縮小して１画面に表示してもよい。
【００４８】
また、図４における処理フローにおいて、インデックス表示（ステップＳ２２）の後にメモリーへのセーブ（ステップＳ３２）がなされているが、インデックス表示せずにメモリーへのセーブを行なうフローも採用できる。たとえば、定型のパターンで画像記録を行なう場合には、このようなフローの方が便宜となる。
【００４９】
更に、本発明に係る画像編集装置は、パソコンに限らず、デジタルカメラ内の画像合成処理機能として追加されたものでもよい。これによれば、装置がよりコンパクトに構成できる。
【００５０】
【発明の効果】
以上説明したように、本発明によれば、一時停止させた動画像、及びこれよりｎコマ前のフレーム画像（先頭画像）と、これよりｍコマ後のフレーム画像（最後尾画像）とを同時に表示させることができる。また、更に、先頭画像と最後尾画像及びこの間の画像全てを同時にインデックス表示させることができる。これにより、動画画像中の特定箇所の変化過程を確認するのに便宜となる。
【図面の簡単な説明】
【図１】本発明に係る画像編集装置としての機能を備えたパソコンのハードウェア構成例を示すブロック図
【図２】本発明に係る画像編集装置におけるモニタ装置の操作画面（基準フレーム画像、先頭画像、最後尾画像）を示す図
【図３】本発明に係る画像編集装置におけるモニタ装置の操作画面（インデックス表示）を示す図
【図４】本発明に係る動画ファイル編集の処理手順を説明するフローチャート
【符号の説明】
１…パソコン、２…デジタルカメラ、１０…中央処理装置（ＣＰＵ）、１２…主メモリ、１４…ハードディスク装置、１６…ＣＤ−ＲＯＭドライブ、２０…モニタ装置、２２…キーボード、２４…マウス、２７…インターフェース、５０…操作画面、７０…操作画面、ＧＳ…基準フレーム画像、ＧＴ…先頭画像、ＧＥ…最後尾画像

Claims

再生中の動画を一時停止させ、所定のフレーム画像を表示させる手段と、
前記表示されたフレーム画像より、予め設定されたｎコマ前のフレーム画像を表示させる手段と、
前記表示されたフレーム画像より、予め設定されたｍコマ後のフレーム画像を表示させる手段と、
前記表示されたフレーム画像よりｎコマ前のフレーム画像を先頭画像とし、前記表示されたフレーム画像よりｍコマ後のフレーム画像を最後尾画像とし、ｍ＋ｎ＋１コマのフレーム画像を同時にインデックス表示させる手段と、
を備えたことを特徴とする画像編集装置。
再生中の動画を一時停止させ、所定のフレーム画像を表示させる手段と、
前記表示されたフレーム画像より、予め設定されたｎコマ前のフレーム画像を表示させる手段と、
前記表示されたフレーム画像より、予め設定されたｍコマ後のフレーム画像を表示させる手段と、
前記表示されたフレーム画像よりｎコマ前のフレーム画像を先頭画像とし、前記表示されたフレーム画像よりｍコマ後のフレーム画像を最後尾画像とし、ｍ＋ｎ＋１コマのフレーム画像を保存させる手段と、
を備えたことを特徴とする画像編集装置。
前記ｍ及び／又はｎの値が再設定可能である請求項１又は２のいずれか１項に記載の画像編集装置。