JP2004134891A

JP2004134891A - 画像処理装置

Info

Publication number: JP2004134891A
Application number: JP2002295304A
Authority: JP
Inventors: Eriko Sato; 佐藤　絵里子
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2002-10-08
Filing date: 2002-10-08
Publication date: 2004-04-30

Abstract

【課題】ユーザの負担を増加させることなく、同時に再生表示する複数の異なる動画像を容易に比較できるようにする。
【解決手段】動画像における被写体画像を切り出し、切り出した被写体画像からなる動画像と、当該動画像とは異なる動画像とを、それぞれの動画像における被写体画像を重ねて１つの画面にて表示するようにして、ユーザが複数の画面を見比べることなく、同時に再生表示する複数の異なる動画像における被写体画像を容易に比較することができるようにする。
【選択図】　図２

Description

【０００１】
【発明の属する技術分野】
本発明は、画像処理装置に関し、特に、複数の異なる動画像を同時に表示するための画像処理装置に用いて好適なものである。
【０００２】
【従来の技術】
従来から、ゴルフ、テニスおよびダンス等のスポーツにおいては、そのフォームの状態が重要であるため、上達を図る方法としてプレーヤーが自分のプレー状態をビデオカメラなどにより撮影して自らのフォームを確認することがあった。
【０００３】
このとき、手本になるプレーのフォーム、あるいは前回の自分のプレーのフォームなど比較するフォームの動画像がある場合には、撮影した動画像と比較する動画像とを順番に再生表示しただけでは比較することが困難であるので、比較しやすいようにマルチ画面表示などで並べて再生表示するものがあった。例えば、複数の動画像に対して再生タイミングを合わせてマルチ画面表示させることにより、複数の動画像を同時に再生表示させる技術が提案されていた（例えば、特許文献１参照。）。
【０００４】
また、例えば、ゴルフのスイングを撮影して録画し、再生する際にプレーヤーの軸に対して基準線を重ねて表示させる技術が提案されていた（例えば、特許文献２参照。）。
【０００５】
【特許文献１】
特開平１０−３０４２９９号公報
【特許文献２】
特開平１０−２１０４１６号公報
【０００６】
【発明が解決しようとする課題】
ここで、人間の目では１つのものを注視した際に他の物体に視点が合わないために、同時に動く２つの動画像の双方を同時に注視することは非常に困難である。したがって、上記特許文献１に記載されているように、撮影した動画像と比較する動画像とをマルチ画面表示により並べて表示させるだけでは、双方の動画像を細かく比較することが非常に困難であるという問題があった。
【０００７】
また、フォームの確認においては、頭や腰などの体の向きがどのように変化していくかも重要な点である。したがって、上記特許文献２に記載されているように、被写体を線だけで表現するように動画像に変更を加えて表示すると、頭や腰などの体の向きが分かりにくくなってしまうという問題があった。
【０００８】
本発明は、このような問題を解決するために成されたものであり、ユーザの負担を増加させることなく、同時に再生表示する複数の異なる動画像を容易に比較できるようにすることを目的とする。
【０００９】
【課題を解決するための手段】
本発明の画像処理装置は、入力される動画像を記憶するための画像記憶手段と、上記動画像を表示するための表示手段と、上記画像記憶手段に記憶された動画像に所定の画像処理を施す画像処理手段と、上記画像記憶手段に記憶された動画像と、当該動画像とは異なる上記画像処理手段にて所定の画像処理が施された動画像とをそれぞれの動画像における被写体画像を重ねて上記表示手段に表示させる制御手段とを備え、上記画像処理手段は、上記動画像における被写体画像を切り出す画像切り出し手段を有することを特徴とする。
【００１０】
【発明の実施の形態】
以下、本発明の実施形態を図面に基づいて説明する。
図１は、本発明の一実施形態による画像処理装置を適用したカメラ付き携帯情報端末（以下、「携帯情報端末」とも称す。）の一構成例を示すブロック図である。
【００１１】
図１において、１０は携帯情報端末本体、２０は動画像を撮影するためのカメラ部、３０は撮影した動画像等を記憶するための記憶部である。記憶部３０は、画像記憶部３１と再生情報記憶部３２とを有する。
【００１２】
画像記憶部３１は、カメラ部２０により撮影した動画像や、携帯情報端末１０が備える通信機能等を用いて他の機器およびウェブ（Ｗｅｂ）サイト等より図示しない画像入力部を介して取得した動画像を記憶するためのものである。また、再生情報記憶部３２は、以前に複数の動画像を重ねて再生表示した際に指定された表示方法に係るパラメータを記憶するためのものである。
【００１３】
４０は表示部であり、撮影する際に撮られる画像を表示したり、再生される撮影した動画像を表示したりする。５０はシステム制御部であり、図１に示した携帯情報端末１０が備える各機能部を制御する。システム制御部５０は、プログラムを内蔵したＲＯＭ５１や、そのプログラムに従って動作するＣＰＵ５２等を備えている。
【００１４】
６０は画像処理部であり、ユーザからの指示に応じて、画像記憶部３１に記憶されている動画像を加工する。画像処理部６０は、画像切り出し部６１、画像編集部６２、再生速度制御部６３、および表示位置変更部６４を有する。
【００１５】
画像切り出し部６１は、動画像における被写体画像（動画像内の被写体領域）を当該動画像から切り出す。画像編集部６２は、動画像における被写体画像の色や構造を編集するものであり、例えば被写体画像を簡単な図形の組み合わせで示す骨子構造に編集したり、サイズや色を変更したりする。
【００１６】
再生速度制御部６３は、重ねて再生表示する複数の動画像が同期して表示されるように、複数の動画像の再生速度をそれぞれ変更し制御する。表示位置変更部６４は、複数の動画像を重ねて再生表示する際の複数の動画像における被写体画像間の相対的な表示位置を変更する。
【００１７】
７０は操作部であり、ユーザの操作による指示を受ける（入力する）ためのものである。
ここで、携帯情報端末１０が備える各機能部は、システムバス８０を介して互いに通信可能なように接続されている。
【００１８】
次に、上記図１に示した携帯情報端末１０において、動画像を再生し表示する際の動作について説明する。
【００１９】
図２は、携帯情報端末１０における再生表示動作を示すフローチャートである。図２においては、第１の動画像（例えば、画像記憶部３１に記憶されている動画像）と、第１の動画像とは異なる第２の動画像（例えば、画像記憶部３１に記憶されている、予め撮影された動画像）とを同時に表示部４０に表示する際に、第２の動画像において、その被写体画像と背景画像とを切り離すことにより、被写体画像のみで構成される第２の動画像と第１の動画像とをそれぞれの被写体画像を重ねて表示することが可能な再生表示動作を示している。
【００２０】
まず、ユーザの操作に応じて操作部７０より第１の動画像の再生が要求されると（ステップＳ２０１）、システム制御部５０は、操作部７０に対する所定の処理により被写体画像を重ねて複数の動画像を表示するように予め設定されてない、もしくは再生の要求に続いて他の動画像を重ねて表示する要求がない場合には（ステップＳ２０２のＮｏ）、第１の動画像のみを再生して表示部４０に表示させ（ステップＳ２０３）、動作を終了する。
【００２１】
一方、操作部７０等により重ねて表示する要求があった場合には（ステップＳ２０２のＹｅｓ）、操作部７０を介したユーザからの指示に応じて、第１の動画像とともに同時に再生し重ねて表示する第２の動画像を選択する（ステップＳ２０４）。
【００２２】
ここで、システム制御部５０は、第２の動画像に対して画像処理を施すか否かを、表示部４０等を介してユーザに確認する（ステップＳ２０５）。当該確認の応答として、操作部７０等を介して画像処理を施す旨の応答があった場合には、画像処理部６０にて第２の動画像に画像処理を施し、そうでない場合にはステップＳ２１０に進む。
【００２３】
画像処理部６０にて第２の動画像に画像処理を施す際、システム制御部５０は、第２の動画像において被写体画像の切り出しを行うか否かを、表示部４０等を介してユーザに確認する（ステップＳ２０６）。当該確認の応答として、操作部７０等を介して被写体画像の切り出しを行う旨の応答があった場合には、画像切り出し部６１は、ユーザの指示に応じて第２の動画像において切り出す被写体画像を選択し、選択した被写体画像とその他の画像（背景画像）とを切り離すことにより被写体画像を切り出す（ステップＳ２０７）。
【００２４】
次に、システム制御部５０は、第２の動画像において被写体画像の大きさ、色および構造を編集するか否かを表示部４０等を介してユーザに確認する（ステップＳ２０８）。当該確認の応答として、操作部７０等を介して被写体画像を編集する旨の応答があった場合には、画像編集部６２は、第２の動画像における被写体画像に対し、ユーザの指示に応じてサイズ変更、色変更等の編集処理を施す（ステップＳ２０９）。
【００２５】
続いて、システム制御部５０は、第１および第２の動画像について再生速度を変更するか否かを表示部４０等を介してユーザに確認する（ステップＳ２１０）。当該確認の応答として、操作部７０等を介して再生速度を変更する旨の応答があった場合には、再生速度制御部６３は、第１および第２の動画像の再生速度を調節する（ステップＳ２１１）。
【００２６】
このとき、再生速度制御部６３は、全体の速さを一定に変化させるだけでよい場合には第１および第２の動画像の再生速度が揃うように一方の動画像の再生速度を変更する。また、再生速度制御部６３は、動画像における再生場面が揃うように（開始フレームや終了フレームが揃うように）、フレームの削除や冗長フレームの付加を行う。
【００２７】
次に、システム制御部５０は、第１の動画像と適宜画像処理が施された第２の動画像とを同時に再生し、それぞれの被写体画像を重ねて表示部４０に表示させ（ステップＳ２１２）、動作を終了する。
【００２８】
上記図２に示したようにして、第１および第２の動画像を同時に再生するとともに、それぞれの動画像における被写体画像を重ねて表示部４０に表示することにより、別々に撮影したりした、異なる動画像における被写体画像を容易に比較することができる。また、第１および第２の動画像における被写体画像の動きを重ねて比較することができ、一連の動きの中で被写体画像をより細かく比較することができる。例えば、構えから終了状態までの軌道等をより細かく比較することができる。
【００２９】
さらに、被写体画像を１つの画面にて重ねて表示させることにより、再生する動画像をマルチ画面表示により並べて表示させたときのようにそれぞれの画面を見比べる必要がなく、マルチ画面表示と比較して、ユーザの負担を軽減することができる。
【００３０】
また、第２の動画像に画像処理を施す際に、被写体画像を線画や簡単な図形の組み合わせで示した骨子構造にしたり、単色で表現したりした場合には、第１および第２の動画像を同時に表示する際に、被写体画像が高い一致度で重ね合わさることで一方の被写体画像が隠れてしまったり、あるいは隠れていなくてもどの被写体画像の動作なのか判別しにくくなってしまったりする問題を解消し、表示される被写体画像を容易に区別することができる。また、顔の向きなどを知りたい場合には、被写体画像に変更を加えずに切り出しだけを行った後、もしくはそれらの情報が十分わかるように簡略化した後、重ねて表示させることで被写体画像を細かく比較することができる。
【００３１】
なお、上記図２に示した画像処理部６０での画像処理（被写体画像の切り出し、被写体画像の編集等）の手順は一例であり、画像処理の手順は任意である。また、再生表示前に前工程に戻って画像処理をやり直しても良いし、画像編集のみのやり直しても良い。
【００３２】
また、上述した画像処理以外にも、被写体画像をドット、あるいは網掛け模様等で表示したりするなど様々な画像処理を適用することが可能であり、被写体画像を見易くするという目的の他にも、面白くするなどそれぞれの被写体画像を比較するために工夫される適用可能な画像処理であれば、どのような被写体画像の表現方法でも良い。
【００３３】
図３は、携帯情報端末１０における再生表示動作において、第１および第２の動画像における被写体画像を重ねて表示する際に、少しずらして表示させるための処理を示すフローチャートである。なお、図３に示した処理は、上記図２に示したステップＳ２０５〜Ｓ２１１の任意の時点で実行可能であり、例えば、上記図２に示したステップＳ２０７とステップＳ２０８との間にて実行することができる。
【００３４】
まず、ユーザの操作に応じて操作部７０より第１および第２の動画像における被写体画像をずらし、重ねて表示する要求がなされると（ステップＳ３０１のＹｅｓ）、システム制御部５０は、被写体画像のずらし具合を指定するためのパラメータをユーザ自らが設定するか否かを表示部４０等を介してユーザに確認する（ステップＳ３０２）。
【００３５】
当該確認の結果、ユーザ自らがパラメータを設定しない場合には、表示位置変更部６４は、動画像における被写体画像の大きさ等に応じて予め決定されている割合（デフォルトの割合）で、第１および第２の動画像における被写体画像をずらして重ねる。さらに、システム制御部５０は、被写体画像をずらして重ねた第１および第２の動画像を同時に再生し、表示部４０に表示させる（ステップＳ３０３）。
【００３６】
一方、ステップＳ３０２での確認の結果、ユーザ自らがパラメータを設定する場合には、システム制御部５０は、被写体画像のずらし具合として割合あるいは距離のいずれを設定するかを、表示部４０等を介してユーザに確認する（ステップＳ３０４）。当該確認の結果、被写体画像のずらし方を大きくしたり、小さくしたりするなどの割合を設定する場合には、操作部７０を介して被写体画像をずらす割合を設定する（ステップＳ３０５）。
【００３７】
一方、ずらす割合ではなく、縦だけに大きくずらしたり、斜めに大きくずらしたりするために距離を設定する場合には、操作部７０を介して被写体画像をずらす際の画面上の距離を画素数等の数値で設定する（ステップＳ３０６）。ここで、設定する距離は、画素数に限らず、実際に何センチメートルずらすかといった単位指定など数量的に表すことができれば何であっても良い。
【００３８】
次に、表示位置変更部６４は、ステップＳ３０５またはステップＳ３０６において設定されたパラメータ（値）に基づいて、第１および第２の動画像における被写体画像をずらして重ねる。さらに、システム制御部５０は、被写体画像をずらして重ねた第１および第２の動画像を同時に再生し、表示部４０に表示させる（ステップＳ３０７）。
【００３９】
上記図３に示したようにして、第１および第２の動画像における被写体画像を完全には重ねずにずらして重ね、表示部４０に表示することにより、被写体画像を容易に区別して比較することができ、ずらさずに重ねてしまうと見えにくくなる部分であっても容易に比較することができる。
【００４０】
なお、上記図３に示した処理において、ユーザ自らがパラメータを設定する場合には、操作部７０を介した動画像のドラッグアンドドロップ操作などによりずらす位置（割合、距離）を決定できるようにしても良い。
【００４１】
図４は、携帯情報端末１０における再生表示動作において、以前に１度重ねて表示させたことがある第１および第２の動画像を再び（２度目以降に）重ねて表示させる際の処理を示すフローチャートである。なお、図４に示した処理は、上記図２に示したステップＳ２０４とステップＳ２０５との間等にて実行可能である。
【００４２】
まず、ユーザの操作に応じて操作部７０より動画像の再生が要求され、再生する動画像が選択される（ステップＳ４０１）。次に、システム制御部５０は、ステップＳ４０１にて選択された動画像が、以前に重ねて表示されているか否かを判定する（ステップＳ４０２）。
【００４３】
上記判定の結果、以前に重ねて表示されている場合には、システム制御部５０は、重ねて表示した際の表示に係る指定パラメータ情報（再生情報）を再生情報記憶部３２から読み出し、当該指定パラメータ情報に基づいて動画像を同時に再生し表示部４０に重ねて表示させる（ステップＳ４０３）。ここで、指定パラメータ情報（再生情報）は、動画像にリンクされ再生情報記憶部３２に記憶されている。なお、操作部７０等により指示することで、以前に重ねて表示した際の指定パラメータ情報を用いずに、再生して表示させることも可能である。
【００４４】
上述のようにして、重ねて表示させる際に指定した表示方法のパラメータ情報を再生情報記憶部３２に記憶し、同じ動画像の組み合わせでの２回目以降の再生表示の場合には、再生情報記憶部３２に記憶されている、以前に重ねて表示させた際のパラメータ情報に基づいて、前回と同様に動画像を再生し表示部４０に表示させることができる。したがって、同じ組み合わせの動画像を何度も繰り返し見たい場合には、その都度、パラメータ情報を設定する必要がなくなり、ユーザの負担を軽減することができる。
【００４５】
ここで、複数の動画像を比較するための従来の装置においては、基準線を表示したり、グラフなどを作成して表示したりするものが提案されているが、一般的な利用者にとっては、基準線やグラフを用いて比較を行うことは難しく面白みがない。そこで、本実施形態では再生表示する第１および第２の動画像における被写体画像の差分に基づく偏差を求めて、それを利用した点数付けを行い、容易に被写体画像を比較できるようにする。
【００４６】
図５は、携帯情報端末１０における再生表示動作において、第１および第２の動画像における被写体画像を重ねて表示する際に、被写体画像同士の動きの差に基づいて点数を表示する処理を示すフローチャートである。なお、図５に示した処理は、上記図２に示したステップＳ２０５〜Ｓ２１１の任意の時点で実行可能である。
【００４７】
まず、ユーザの操作に応じて操作部７０より点数表示が要求されると（ステップＳ５０１）、システム制御部５０は、選択された第１および第２の動画像における被写体画像の動きの差分を示すデータを、過去に重ねて表示させることにより予め数値として有するか否かを判断する（ステップＳ５０２）。
【００４８】
上記判断の結果、第１および第２の動画像についての動きの差分を示すデータを数値として有しない場合には、システム制御部５０は、重ねて表示している第１および第２の動画像における被写体画像での動きの差分を算出する（ステップＳ５０３）。
【００４９】
次に、システム制御部５０は、第１および第２の動画像が有する動きの差分を示すデータ、あるいはステップＳ５０３において算出した動きの差分を示すデータを点数化する（ステップＳ５０４）。そして、システム制御部５０は、ステップＳ５０４において得られた点数を表示部４０に表示させる。
【００５０】
上記図５に示したようにして、それぞれの動画像における被写体画像の差分を数値化して点数化することで、被写体画像のずれの程度を容易かつ客観的に判断することができ、目で見ても容易には判断できない被写体画像間の僅かな違いであっても、点数を表示することにより容易に比較して判断することができる。また、ユーザは操作部７０等を用いて被写体画像を比較したい動画像を選択するだけで、被写体画像の動きの違いを点数として得ることができるので、ユーザにとって少ない作業量で容易に被写体画像を比較することができる。
【００５１】
例えば、基準となる状態と、前回の状態および今回の状態とを比較する際、表示部４０に表示される点数を評価の基準に用いれば、数値として表示されることにより技術等の上達具合を容易に判断でき、より快適に使用できる。
【００５２】
また、例えば、スポーツ等において、自らのフォームと何人かのプロ選手の見本フォームとを比較して点数表示すれば、最も自分に近いフォームのプロ選手などを表示された点数に基づき簡単に知ることができる。また、他人との点数の比較に用いれば、見た目だけでは難しい客観的な比較をより簡単に行うことができる。このような利用法で、ゲーム感覚の楽しい練習方法を提供することができる。
【００５３】
ここで、動画像の動きの差分を示すデータは、予め比較する動画像における被写体画像の動きを数値化しておいたデータや動きの差分から算出した数値を用いる他にも、点数として用いることができるものであれば何であっても良い。
【００５４】
なお、上述した本実施形態では、２つの動画像（第１および第２の動画像）における被写体画像を重ねて表示する場合について説明したが、本発明はこれに限られるものではない。例えば、表示する動画像を選択する処理を繰り返し行ったり、既に重ねた画像に対して同様の処理を施したりすることにより、３つ以上の動画像における被写体画像を重ねて表示することも可能である。
【００５５】
また、被写体画像を重ねて表示させる複数の動画像を予めすべて選択した後、比較しやすいように被写体画像をそれぞれ編集するようにしても良いし、あるいは１つの動画像についてのみ被写体画像を編集し、他のすべての動画像に同じ編集を反映させるようにしても良い。また、２つ以上の動画像における被写体画像を重ねて表示する際にも、デフォルトの設定を予め用意しておくことで、重ねて表示する動画像を選択するだけで決められた設定での重ね表示を行うようにしても良い。
【００５６】
また、上述した説明においては、本実施形態による画像処理装置をカメラ付き携帯情報端末１０に適用した場合について説明したが、本発明はこれに限られるものではない。例えば、携帯情報端末以外の携帯端末でも良く、カメラ付き携帯電話やＰＨＳ端末、デジタルスチルカメラなどの端末であっても良い。また、据え付け型のカメラなど、携帯端末でなくても撮影機能と表示機能とを有するものであれば良い。
【００５７】
また、本実施形態における画像処理装置は、スポーツのフォーム確認に限らず、スポーツに限らず見本に合わせた動きが必要になるものや、動きを揃える必要があるものなど、動きの変化を伴うものに用いることができる。例えば、手本の手話に合わせる練習に用いたり、歩行訓練などのリハビリに用いたりすることが可能である。
【００５８】
（本発明の他の実施形態）
上述した実施形態の機能を実現するべく各種のデバイスを動作させるように、該各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、上記実施形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って上記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
【００５９】
また、この場合、上記ソフトウェアのプログラムコード自体が上述した実施形態の機能を実現することになり、そのプログラムコードは本発明を構成する。また、そのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記録媒体は本発明を構成する。かかるプログラムコードを記憶する記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
【００６０】
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施形態の機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等と共同して上述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれることは言うまでもない。
【００６１】
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合にも本発明に含まれることは言うまでもない。
【００６２】
なお、上記実施形態は、何れも本発明を実施するにあたっての具体化のほんの一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
本発明の実施態様例を以下に示す。
【００６３】
（実施態様１）入力される動画像を記憶するための画像記憶手段と、上記動画像を表示するための表示手段と、上記画像記憶手段に記憶された動画像に所定の画像処理を施す画像処理手段と、上記画像記憶手段に記憶された動画像と、当該動画像とは異なる上記画像処理手段にて所定の画像処理が施された動画像とをそれぞれの動画像における被写体画像を重ねて上記表示手段に表示させる制御手段とを備え、上記画像処理手段は、上記動画像における被写体画像を切り出す画像切り出し手段を有することを特徴とする画像処理装置。
（実施態様２）上記画像処理手段は、上記動画像における被写体画像の色および構造の少なくとも一方を編集する画像編集手段、および上記表示手段に表示させる動画像の再生速度を制御する再生速度制御手段の少なくとも一方をさらに有することを特徴とする実施態様１に記載の画像処理装置。
（実施態様３）上記画像処理手段は、上記表示手段に表示させる上記動画像における被写体画像の相対位置を設定する表示位置変更手段をさらに備えることを特徴とする実施態様１または２に記載の画像処理装置。
（実施態様４）複数の上記動画像における被写体画像を重ねて表示させた際に表示に係る再生情報を記憶する再生情報記憶手段をさらに備え、上記制御手段は、再び同じ動画像を表示させるときには、上記再生情報記憶手段に記憶された再生情報を利用して上記複数の動画像を表示させることを特徴とする実施態様１〜３の何れか１項に記載の画像処理装置。
（実施態様５）表示させる複数の上記動画像における被写体画像にて偏差を算出し、上記算出した偏差に基づく点数を上記表示手段に表示させることを特徴とする実施態様１〜４の何れか１項に記載の画像処理装置。
（実施態様６）動画像を撮影して上記画像記憶手段に対して入力する撮像手段をさらに備えることを特徴とする実施態様１〜５の何れか１項に記載の画像処理装置。
（実施態様７）動画像を撮影するための撮像手段と、上記撮像手段により撮影された動画像を記憶する記憶手段と、上記撮像手段により撮影された動画像を表示するための表示手段と、上記撮像手段により撮影された動画像に対して、被写体画像を切り出す画像処理手段とを備え、上記記憶手段に記憶されている動画像および上記画像処理手段により切り出した被写体画像による動画像を複数重ねて上記表示手段に表示することを特徴とする画像処理装置。
（実施態様８）上記画像処理手段は、上記切り出した被写体画像を簡単な図形の組み合わせで示す骨子表現に変更する機能、上記切り出した被写体画像の色および大きさを加工する機能、および再生する動画像の再生速度を制御する機能の少なくとも１つの機能を有することを特徴とする実施態様７に記載の画像処理装置。
（実施態様９）上記複数の動画像を重ねて表示する際に、ユーザからの指示に応じて、表示する動画像における被写体画像をずらすとともに重ねて上記表示手段に表示することを特徴とする実施態様７または８に記載の画像処理装置。
（実施態様１０）上記複数の動画像を重ねて表示する際に再生情報を記憶し、上記複数の動画像を重ねて表示した後、再び同じ動画像の再生を要求されたときには、上記再生情報に基づいて上記複数の動画像を重ねて表示することを特徴とする実施態様７〜９の何れか１項に記載の画像処理装置。
（実施態様１１）重ねて表示する上記複数の動画像をそれぞれ比較して偏差を算出し、算出した上記偏差を点数化して表示することを特徴とする実施態様７〜１０の何れか１項に記載の画像処理装置。
（実施態様１２）入力される動画像を記憶媒体に記憶する画像記憶ステップと、上記記憶媒体に記憶された動画像にて、当該動画像における被写体画像を切り出す画像処理ステップと、上記記憶媒体に記憶された動画像と、当該動画像とは異なる上記画像処理ステップにて被写体画像を切り出した動画像とをそれぞれの動画像における被写体画像を重ねて表示手段に表示させる表示制御ステップとを有することを特徴とする画像処理方法。
（実施態様１３）上記画像処理ステップでは、上記動画像における被写体画像の色および構造の少なくとも一方の編集、および上記表示手段に表示させる動画像の再生速度を制御の少なくとも一方をさらに行うことを特徴とする実施態様１２に記載の画像処理方法。
（実施態様１４）入力される動画像を記憶媒体に記憶する画像記憶ステップと、上記記憶媒体に記憶された動画像にて、当該動画像における被写体画像を切り出す画像処理ステップと、上記記憶媒体に記憶された動画像と、当該動画像とは異なる上記画像処理ステップにて被写体画像を切り出した動画像とをそれぞれの動画像における被写体画像を重ねて表示手段に表示させる表示制御ステップとをコンピュータに実行させるためのプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
（実施態様１５）上記画像処理ステップでは、上記動画像における被写体画像の色および構造の少なくとも一方の編集、および上記表示手段に表示させる動画像の再生速度を制御の少なくとも一方をさらにコンピュータに実行させるためのプログラムを記録したことを特徴とする実施態様１４に記載のコンピュータ読み取り可能な記録媒体。
（実施態様１６）入力される動画像を記憶媒体に記憶する画像記憶ステップと、上記記憶媒体に記憶された動画像にて、当該動画像における被写体画像を切り出す画像処理ステップと、上記記憶媒体に記憶された動画像と、当該動画像とは異なる上記画像処理ステップにて被写体画像を切り出した動画像とをそれぞれの動画像における被写体画像を重ねて表示手段に表示させる表示制御ステップとをコンピュータに実行させるためのプログラム。
（実施態様１７）上記画像処理ステップでは、上記動画像における被写体画像の色および構造の少なくとも一方の編集、および上記表示手段に表示させる動画像の再生速度を制御の少なくとも一方をさらにコンピュータに実行させるためのプログラム。
【００６４】
【発明の効果】
以上説明したように、本発明によれば、複数の異なる動画像を同時に再生するとともに、それぞれの動画像における被写体画像を重ねて表示することにより、異なる動画像をマルチ画面表示により並べて表示したときのようにそれぞれの画面を見比べる必要がないので、ユーザの負担を増加させることなく、異なる動画像における被写体画像を容易に比較することができる。
【図面の簡単な説明】
【図１】本発明の実施形態による画像処理装置を適用したカメラ付き携帯情報端末の一構成例を示すブロック図である。
【図２】本実施形態における再生表示動作を示すフローチャートである。
【図３】本実施形態において、動画像における被写体画像をずらして表示させるための処理を示すフローチャートである。
【図４】本実施形態において、再生情報を用いて動画像を重ねて表示させる処理を示すフローチャートである。
【図５】本実施形態において、動画像における被写体画像同士の動きの差を示す点数を表示する処理を示すフローチャートである。
【符号の説明】
１０　携帯情報端末
２０　カメラ部
３０　記憶部
３１　画像記憶部
３２　再生情報記憶部
４０　表示部
５０　システム制御部
５１　ＲＯＭ
５２　ＣＰＵ
６０　画像処理部
６１　画像切り出し部
６２　画像編集部
６３　再生速度制御部
６４　表示位置変更部
７０　操作部
８０　システムバス

Claims

入力される動画像を記憶するための画像記憶手段と、
上記動画像を表示するための表示手段と、
上記画像記憶手段に記憶された動画像に所定の画像処理を施す画像処理手段と、
上記画像記憶手段に記憶された動画像と、当該動画像とは異なる上記画像処理手段にて所定の画像処理が施された動画像とをそれぞれの動画像における被写体画像を重ねて上記表示手段に表示させる制御手段とを備え、
上記画像処理手段は、上記動画像における被写体画像を切り出す画像切り出し手段を有することを特徴とする画像処理装置。