JP2004140602A - 画像処理装置 - Google Patents

Abstract

【課題】記録した動画像の編集を容易に行なえるようにする。
【解決手段】被写体からの光を光電変換して撮像する撮像素子５と、撮像素子によって撮像された画像を記録媒体３に記録する画像記録部１と、記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷部１２と、記録媒体に記録されている画像に対する操作の指示を、一覧印刷部によって印刷された印刷物と共に撮像素子を用いて画像として入力する画像操作入力部４と、画像操作入力部の入力の対象となった印刷物と、操作の対象となっている記録媒体との対応状態を判定する対応判定部２とを備える。
【選択図】　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は画像処理技術に関し、特に磁気テープやディスク媒体、メモリーカード等に静止画や動画像を記録するディジタルビデオカムコーダ、もしくは、ディジタルカメラ等における画像処理技術に関するものである。
【０００２】
【従来の技術】
従来より動画像を撮影して磁気テープカセットやディスク型記録媒体、或いはカード型記録媒体に記録するディジタルビデオカムコーダが普及している。これらを用いて撮影した動画像は失敗シーンや冗長な場面が多く含まれるため、鑑賞する前に編集を行うことが必要とされる。
【０００３】
磁気テープを用いたカムコーダで撮影した場合は、シーケンシャルアクセスであるため本質的にアクセス性が悪く（所望のシーンにすぐにアクセスできない）、特に再生時のアクセス性改善や編集が重要とされる。磁気テープ型カムコーダで撮影された素材を編集する場合は、通常シリアル通信インタフェースなどを介してパーソナルコンピュータ（以下、ＰＣと称す）にビデオ素材を取り込んだ後、ＰＣ上の編集ソフトウェアを用いて編集が行われる。
【０００４】
また、近年テープのアクセス性の悪さを改善するためディスク型ディジタルカムコーダが提案されている。このディスク型ディジタルカムコーダは撮影した各ショットを代表する静止画をディスプレイ上にサムネール表示し、カムコーダ上に設置されたボタンでの操作により、見たいシーンを検索して再生したり、編集作業を行う機能を有する。
【０００５】
更に近年のフラッシュメモリの大容量低価格化に伴い、カードメモリを用いた静止画用ディジタルカメラに動画機能を搭載した機種も登場している。
【０００６】
また、ディジタルカメラとプリンタをＵＳＢなどで接続し、ディジタルカメラの液晶ディスプレイに表示された静止画のサムネイルを用いて、印刷する静止画を選択し、ＰＣを介さずにディジタルカメラからプリンタへ直接プリントすることを可能とした機種も登場している。
【０００７】
【特許文献１】
特開平６−２４５１８１号公報
【特許文献２】
特開平９−０９５５０５号公報
【０００８】
【発明が解決しようとする課題】
しかしながらテープ型カムコーダの場合、ＩＥＥＥ１３９４などのシリアル通信インタフェースを有するＰＣは、高価である、ＰＣでの編集作業が難しい、等の理由で、実際にビデオ編集を行っているカムコーダユーザーは極めて少数である。
【０００９】
またディスク型カムコーダやディジタルカメラの場合は、２〜３インチ程度の小画面ディスプレイに表示されるわずかなサムネイルを見ながら限られた数と機能のボタンで操作するため、頭出しや編集や印刷などの操作性は極めて悪く、特に編集は操作が複雑になるため、実際には十分使われていない。撮影された静止画や動画の数が増えるとこれらの操作は更に困難となる。
【００１０】
またカードメモリ型の場合においては、更に本体とディスプレイが小型となるため操作性を向上することは一層困難である。
【００１１】
特に、通常多くのカムコーダユーザーが必要とする編集は、ワイプやディゾルブなどの画面効果挿入などよりも、もっと単純な、失敗シーンや冗長なシーンのカットやショットの並べ替え程度であり、このような基本的な編集機能を簡単な操作で行えることが要望されている。
【００１２】
また、撮影した動画あるいは静止画から所望の１枚の静止画をプリンタで印刷しようとする場合にも、小画面ディスプレイに表示されるわずかなサムネイルを見ながら目標とする画像を選択することとなるため、ＰＣを介さずに所望の静止画をプリントする場合も操作性が悪いという問題点もある。
【００１３】
さらに、従来、動画像をシーンあるいはショットごとに分割し、その代表フレームを抽出して一覧形式でプリントし、該プリントされた一覧面像を撮影することで再生するためのシーンを特定する技術が提案されている。
例えば、特開平６−２４５１８１号公報に開示されているビデオプリンタでは、動画のシーンを一覧で印刷し、最後に一覧画像を取り込むようにビデオカメラで撮影することで、インデックス用の画像を作成し記録する技術が提案されている。
【００１４】
一方、特開平９−０９５５０５号公報におけるビデオプリントアクセス方法およびシステムにおいては、ビデオ再生機で再生したビデオを、ビデオ内容の把握に重要なビデオ内の大きな変化をイベントとして捕らえ、その結果として抜き出した画像をプリントし、同時に該画像の付属情報をバーコードあるいは磁性体としてプリントし、ビデオアクセス装置付属のスキャナにより出力紙上の付属情報をバーコードあるいは磁性体として読み取り、関連するビデオのアクセス、再生を自動的に行う方法が提案されている。
【００１５】
しかしバーコードや磁性体を塗布することで、プリントされた一覧画像の中に画像以外の物体が入り込むことになり、動画像の各シーンに何が撮影されているかを把握するという意味では、一覧性が失われている。
【００１６】
そのため再生しようとするシーンを探しにくくなるという欠点が生じる。
従って、本発明は上述した課題に鑑みてなされたものであり、その目的は、記録した動画像の編集を容易に行なえるようにすることである。
【００１７】
また、本発明の他の目的は、複数枚の画像から所望の画像を選択してプリントする場合の操作性を向上させることである。
【００１８】
また、本発明のさらに他の目的は、複数のシーンから所望のシーンを選択して再生する場合の操作性を向上させることである。
【００１９】
【課題を解決するための手段】
上述した課題を解決し、目的を達成するために、本発明に係わる画像処理装置は、被写体からの光を光電変換して撮像する撮像手段と、該撮像手段によって撮像された画像を記録媒体に記録する画像記録手段と、前記記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷手段と、前記記録媒体に記録されている画像に対する操作の指示を、前記一覧印刷手段によって印刷された印刷物と共に前記撮像手段を用いて画像として入力する画像操作入力部と、該画像操作入力部の入力の対象となった印刷物と、前記操作の対象となっている記録媒体との対応状態を判定する対応判定手段とを備えることを特徴としている。
【００２０】
また、この発明に係わる画像処理装置において、前記記録媒体は、前記画像処理装置に着脱可能であり、前記一覧印刷手段は、前記記録媒体を識別するための第１の識別情報を、前記複数の画像のそれぞれを代表する静止画が一覧印刷された印刷物に印刷し、前記対応判定手段は、前記第１の識別情報と、前記記録媒体に格納されている第２の識別情報とに基づいて、前記印刷物と前記記録媒体の対応状態を判定することを特徴としている。
【００２１】
また、この発明に係わる画像処理装置において、前記一覧印刷手段は、前記記録媒体に格納された画像の更新を識別するための第１の更新識別情報を、前記複数の画像のそれぞれを代表する静止画が一覧印刷された印刷物に印刷し、前記対応判定手段は、前記第１の更新識別情報と、前記記録媒体に格納されている、画像の更新を識別するための第２の更新識別情報とに基づいて、前記印刷物と前記記録媒体の対応状態を判定することを特徴としている。
【００２２】
また、この発明に係わる画像処理装置において、前記第１及び第２の更新識別情報は、前記記録媒体の最新の更新日時であることを特徴としている。
【００２３】
また、この発明に係わる画像処理装置において、前記対応判定手段により、前記印刷物と前記記録媒体の対応が取れていないと判定された場合に、ユーザーに判定結果を通知することを特徴としている。
【００２４】
また、この発明に係わる画像処理装置において、ユーザーに前記判定結果を通知した後に、ユーザーにより前記記録媒体が交換された場合、前記対応判定手段は、再度前記印刷物と前記記録媒体の対応状態を判定することを特徴としている。
【００２５】
また、この発明に係わる画像処理装置において、前記対応判定手段により、前記印刷物と前記記録媒体の対応が取れていないと判定された場合に、対応が取れている画像と対応が取れていない画像とを弁別する画像弁別手段をさらに備えることを特徴としている。
【００２６】
また、この発明に係わる画像処理装置において、前記第１及び第２の更新識別情報は、前記記録媒体の最新の更新日時であり、前記画像弁別手段は、前記第１の更新識別情報と前記第２の更新識別情報を比較して、対応が取れている画像と対応が取れていない画像とを弁別することを特徴としている。
【００２７】
また、この発明に係わる画像処理装置において、前記画像弁別手段によって弁別された、対応が取れている画像と対応が取れていない画像とを、ユーザーが識別できるように表示する画像識別表示手段をさらに備えることを特徴としている。
【００２８】
また、この発明に係わる画像処理装置において、前記画像識別表示手段は、対応が取れていない画像が目立つように表示することを特徴としている。
【００２９】
また、この発明に係わる画像処理装置において、前記画像弁別手段によって対応がとれていないと判定された画像に対して、前記画像操作入力手段によって操作の対象となっているかどうかを判定する操作対象判定手段をさらに備えることを特徴としている。
【００３０】
また、この発明に係わる画像処理装置において、前記画像弁別手段によって弁別された、対応が取れている画像と対応が取れていない画像とを、ユーザーが識別できるように表示する画像識別表示手段をさらに備え、前記操作対象判定手段によって対応が取れていない画像が操作の対象となっていると判定された場合に、前記画像識別表示手段は前記対応が取れていない画像を目立つように表示することを特徴としている。
【００３１】
また、この発明に係わる画像処理装置において、前記操作対象判定手段により、前記対応がとれていない画像が操作の対象となっていると判定された場合には、前記画像操作入力手段によって入力された指示を実行せず、前記対応が取れていない画像が操作の対象となっていないと判定された場合には、前記画像操作入力手段によって入力された指示を実行することを特徴としている。
【００３２】
また、この発明に係わる画像処理装置において、前記画像操作入力部により入力される操作の指示は、頭出し、再生、印刷、編集のいずれかであることを特徴としている。
【００３３】
また、本発明に係わる画像処理方法は、被写体からの光を撮像手段により光電変換して撮像する撮像ステップと、該撮像ステップにおいて撮像された画像を記録媒体に記録する画像記録ステップ、前記記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷ステップと、前記記録媒体に記録されている画像に対する操作の指示を、前記一覧印刷工程において印刷された印刷物と共に前記撮像手段を用いて画像として入力する画像操作入力ステップと、該画像操作入力ステップにおける入力の対象となった印刷物と、前記操作の対象となっている記録媒体との対応状態を判定する対応判定ステップとを備えることを特徴としている。
【００３４】
また、本発明に係わるプログラムは、上記の画像処理方法をコンピュータに実行させることを特徴としている。
【００３５】
また、本発明に係わる記憶媒体は、上記のプログラムをコンピュータ読み取り可能に記憶したことを特徴としている。
【００３６】
また、本発明に係わる画像処理装置は、被写体からの光を光電変換して撮像する撮像手段と、該撮像手段によって撮像された画像を記録媒体に記録する画像記録手段と、前記記録媒体に記録されている個々の画像を識別する情報を印刷する画像情報印刷手段と、前記記録媒体に記録されている個々の画像の印刷枚数を指定する情報を、前記画像情報印刷手段によって印刷された印刷物と共に前記撮像手段を用いて画像として入力する印刷情報入力部と、該印刷情報入力部によって入力された指定枚数だけ、前記記録媒体に記録されている画像を印刷する画像印刷手段とを備えることを特徴としている。
【００３７】
また、この発明に係わる画像処理装置において、前記画像情報印刷手段は、前記個々の画像を識別する情報として、画像に対応付けられた番号を印刷することを特徴としている。
【００３８】
また、この発明に係わる画像処理装置において、前記画像情報印刷手段は、前記個々の画像を識別する情報として、画像を代表するサムネール画像を印刷することを特徴としている。
【００３９】
また、本発明に係わる画像処理方法は、被写体からの光を撮像手段により光電変換して撮像する撮像ステップと、該撮像ステップにおいて撮像された画像を記録媒体に記録する画像記録ステップと、前記記録媒体に記録されている個々の画像を識別する情報を印刷する画像情報印刷ステップと、前記記録媒体に記録されている個々の画像の印刷枚数を指定する情報を、前記画像情報印刷ステップにおいて印刷された印刷物と共に前記撮像手段を用いて画像として入力する印刷情報入力ステップと、該印刷情報入力ステップにおいて入力された指定枚数だけ、前記記録媒体に記録されている画像を印刷する画像印刷ステップとを備えることを特徴としている。
【００４０】
また、本発明に係わるプログラムは、上記の画像処理方法をコンピュータに実行させることを特徴としている。
【００４１】
また、本発明に係わる記憶媒体は、上記のプログラムをコンピュータ読み取り可能に記憶したことを特徴としている。
【００４２】
また、本発明に係わる画像処理装置は、被写体からの光を光電変換して撮像する撮像手段と、該撮像手段によって撮像された画像を記録媒体に記録する画像記録手段と、前記記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷手段と、前記記録媒体に記録されている画像に対する操作の機能と、該機能を実行するために必要な情報を、前記一覧印刷手段によって印刷された印刷物と共に前記撮像手段を用いて画像として入力する画像操作入力部と、該画像操作入力部によって入力された画像から操作の機能を判別する機能判別手段と、該機能判別手段の判別結果に基づいて、機能を実行する機能実行手段とを備えることを特徴としている。
【００４３】
また、この発明に係わる画像処理装置において、前記一覧印刷手段は、前記機能判別手段によって機能を判別するために必要な情報を印刷することを特徴としている。
【００４４】
また、この発明に係わる画像処理装置において、前記一覧印刷手段は、機能を実行するために必要な情報を入力するエリアも同時に印刷し、該エリアは全ての機能に対して共通であることを特徴としている。
【００４５】
また、この発明に係わる画像処理装置において、前記画像操作入力部により入力される操作の機能は、頭出し、再生、印刷、編集のいずれかであることを特徴としている。
【００４６】
また、本発明に係わる画像処理方法は、被写体からの光を撮像手段により光電変換して撮像する撮像ステップと、該撮像ステップにおいて撮像された画像を記録媒体に記録する画像記録ステップと、前記記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷ステップと、前記記録媒体に記録されている画像に対する操作の機能と、該機能を実行するために必要な情報を、前記一覧印刷ステップにおいて印刷された印刷物と共に前記撮像手段を用いて画像として入力する画像操作入力ステップと、該画像操作入力ステップにおいて入力された画像から操作の機能を判別する機能判別ステップと、該機能判別ステップの判別結果に基づいて、機能を実行する機能実行ステップとを備えることを特徴としている。
【００４７】
また、本発明に係わるプログラムは、上記の画像処理方法をコンピュータに実行させることを特徴としている。
【００４８】
また、本発明に係わる記憶媒体は、上記のプログラムをコンピュータ読み取り可能に記憶したことを特徴としている。
【００４９】
また、本発明に係わる画像処理装置は、動画像を複数のシーンに分割する分割手段と、前記複数のシーンの代表画像を抽出する抽出手段と、前記代表画像を並べてそれぞれの画像の印刷位置を記憶する記憶手段と、前記代表画像を一覧印刷する一覧印刷手段と、前記一覧印刷手段により印刷された印刷物を撮影する撮影手段と、前記記憶手段により記憶した印刷位置に基づいて、前記動画像の所望のシーンを特定する特定手段とを備えることを特徴としている。
【００５０】
また、この発明に係わる画像処理装置において、前記特定手段により特定したシーンを再生する再生手段をさらに備えることを特徴としている。
【００５１】
また、この発明に係わる画像処理装置において、前記代表画像が一覧印刷された印刷物と前記動画像を記録した記録媒体との対応状態を判定する判定手段をさらに備えることを特徴としている。
【００５２】
また、この発明に係わる画像処理装置において、前記判定手段による判定結果をユーザーに通知する通知手段をさらに備えることを特徴としている。
【００５３】
また、本発明に係わる画像処理方法は、動画像を複数のシーンに分割する分割ステップと、前記複数のシーンの代表画像を抽出する抽出ステップと、前記代表画像を並べてそれぞれの画像の印刷位置を記憶する記憶ステップと、前記代表画像を一覧印刷する一覧印刷ステップと、前記一覧印刷ステップにおいて印刷された印刷物を撮影する撮影ステップと、前記記憶ステップにおいて記憶した印刷位置に基づいて、前記動画像の所望のシーンを特定する特定ステップとを備えることを特徴としている。
【００５４】
また、本発明に係わるプログラムは、上記の画像処理方法をコンピュータに実行させることを特徴としている。
【００５５】
また、本発明に係わる記憶媒体は、上記のプログラムをコンピュータ読み取り可能に記憶したことを特徴としている。
【００５６】
【発明の実施の形態】
以下、本発明の好適な実施形態について、添付図面を参照して詳細に説明する。
【００５７】
（第１の実施形態）
図１は、本発明の第１の実施形態に係わる交換可能な光磁気ディスク型記録媒体を用いるディジタルカムコーダの構成を示すブロック図である。
【００５８】
ドライブユニット１はメカ機構とサーボ機構、光ピックアップ等から成り、主制御部２によって、光磁気ディスク３とともに制御される。主制御部２はドライブユニット１やシステム全体を制御するためのシステム制御部２１の他に、動画に関する処理を行う動画処理部２２、静止画に関する処理を行うための静止画処理部２３、印刷を行うための印刷処理部２４、ユーザの操作をサポートする表示処理部２５を有する。主制御部は図２に示すように内部にＣＰＵ４１とＲＯＭ４２、ＲＡＭ４３を有し、これらの処理は内部のＲＯＭ４２にプログラムとして格納されている。
【００５９】
システム制御部２１は図３に示すようにドライブ制御部２０１、信号処理制御部２０２、入力処理部２０３、タイムコードカウンタ２０４、ショットＮＯ．カウンタ２０５、日時タイマ２０６、メディア管理部２０７、ショット管理部２０８などから構成されている。
【００６０】
動画処理部２２は図４に示すように、空間フィルタ２２１、マルチプレクサ２２２、デマルチプレクサ２２３、圧縮伸長部２２４等から構成されている。
【００６１】
静止画処理部２３は図５に示すように代表画像抽出部２３１、ＪＰＥＧ圧縮伸長部２３２、サムネール作成部２３３等から構成されている。
【００６２】
まず、ドライブユニット１に光磁気ディスク３が装填されたときの初期化処理を説明する。
【００６３】
光磁気ディスク３がドライブユニット１に装填されると、ドライブ制御部２０１によって、図１８に示される光磁気ディスク上のメディア管理情報３０とショット管理情報３１が、フラッシュメモリ１１（途中で電源を落としても内容が消えないように不揮発性）に読み込まれる。
【００６４】
図８に、メディア管理情報３０とショット管理情報３１が読み込まれたフラッシュメモリ１１の状態を示す。図８に示されるように、メディア管理情報は、メディアＩＤと最新更新日時と最大タイムコードと最大ショットＮＯ．から構成される。図８において、カムコーダＩＤは、個々のカムコーダを識別するための識別子であり、９桁の１０進数で表現され、カムコーダ製造時に記録されるものである。メディアカウンタは、カムコーダが扱った未使用のメディアの数をカウントアップするものであり、カムコーダ製造時には０が格納されている。
【００６５】
ドライブ制御部２０１によって、メディア管理情報３０がフラッシュメモリ１１に読み込まれると、メディア管理部によって装填されている光磁気ディスク３が未使用であるかどうか判定される。光磁気ディスク３上のメディアＩＤは、製造時に０に設定されており、フラッシュメモリ１１上のメディアＩＤが０であれば、未使用であると判定し、メディア管理部は、フラッシュメモリ１１上の最大タイムコードに初期値０を代入し、更に、最大ショットＮＯ．に初期値１を代入し、続いて、フラッシュメモリ１１上のメディアカウントを１だけカウントアップし、続いて、メディアＩＤを新たに生成して、フラッシュメモリ上１１のメディアＩＤと光磁気ディスク３上のメディアＩＤに生成された値を書き込む。生成されるメディアＩＤの値は、フラッシュメモリ１１上のカムコーダＩＤの９桁の数字を上９桁とし、フラッシュメモリ１１上のメディアカウンタの値３桁を下３桁とする１２桁の値とする。未使用でないと判定されれば、メディアカウンタとメディアＩＤの更新は行なわない。
【００６６】
次に、ドライブユニット１から光磁気ディスク３が取り出されたときの処理を説明する。
【００６７】
ドライブユニット１から光磁気ディスク３が取り出されると、フラッシュメモリ１１上のメディアＩＤに０を格納する。
【００６８】
次に、撮影対象の動画の記録再生過程を説明する。
【００６９】
被写体からの反射光は光学系４を通して撮像素子５に投影され、電気信号に変換される。
【００７０】
撮像素子５は標準ＴＶ信号の解像度に対する画素数（水平７２０，垂直４８０）以上の画素数を有するものとする。
【００７１】
入力部７の“撮影開始”ボタン７１が押されると、撮像素子５からはＴＶ信号の１フレーム期間の全ての画素が順次走査で読み出され、撮像系処理回路６にてディジタル化された輝度信号と色差信号が生成される。
【００７２】
図６は撮像系処理回路の内部の詳細ブロック図である。撮像素子５から読み出された撮像信号はＣＤＳ（相関二重サンプル）回路６１にてノイズを除去され、ＡＧＣ（自動利得）回路６２にて自動的にゲイン調整された後Ａ／Ｄ変換器６３にてディジタル映像信号となる。続いてＹ−Ｃ分離回路６４により輝度信号と色差信号に分離され、カメラ信号処理部６５にて輪郭強調、ホワイトバランス、ガンマ補正などの処理を施されて前記のディジタル化された輝度信号（Ｙ）と色差信号（Ｐｒ、Ｐｂ）が生成される。
【００７３】
輝度信号（Ｙ）と色差信号（Ｐｒ、Ｐｂ）はそれぞれ、主制御部２の動画処理部２２（以下、内部の構成は図４を参照）の空間フィルタ２２１により図７に示すごとく帯域制限される。即ち、ＤＶ規格で標準動画を記録する場合、折り返しノイズを考慮して輝度信号は水平６．７５ＭＨｚ、垂直２４０本に（同図の斜線部）、色差信号はＰｒとＰｂが点順次化されているため水平は更に３．３７５ＭＨｚに帯域制限される（色差信号は省略）。
【００７４】
帯域制限された、輝度信号と点順次色差信号は動画処理部２２のマルチプレクサ２２２にて多重化され、４：２：２フォーマットのＹ／Ｐｒ／Ｐｂデータが生成される。このＹ／Ｐｒ／Ｐｂデータはバッファメモリ８に蓄積された後、主制御部の動画処理部２２の圧縮伸長部２２４にてＤＣＴを用いた圧縮アルゴリズムによって圧縮され、最後に記録信号処理回路９にて同期符号やエラー訂正符号の付加、シャフリング、変調などが行われてドライブユニット１を介して光磁気ディスク３上の映像記録領域３２に記録される。なお、音声信号の記録は本発明とは無関係であるので説明は省略する。
【００７５】
このようにして“撮影終了”ボタン７２が押されるまで動画が記録される。なお、“撮影開始”ボタンの再押下により終了するようにしてもよい。
【００７６】
なお、後述の方法で生成したショット番号、タイムコード、撮影日時、サムネール画像データが同時に光磁気ディスク上の所定の領域（ショット管理情報３１および映像記録領域３２）に記録される。また、光磁気ディスク３上のメディア管理情報３０も、フラッシュメモリ１１上のメディア管理情報の値で同時に更新される。
【００７７】
再生は上記と逆の処理を行えば良いので説明を省略する。
【００７８】
次に、印刷用の静止画と時間情報の記録過程を説明する。
【００７９】
“撮影開始”ボタンが押され、サーボ機構が安定して上記の動画記録が開始すると、主制御部２のシステム制御部２１のショット管理部２０８は、フラッシュメモリ１１上のショット管理情報中の有効なデータの末尾に、ショットの情報を追加する。すなわち、フラッシュメモリ１１上のメディア管理情報中の最大ショットＮＯ．をショットＮＯ．とし、最大タイムコードをタイムコードとし、“撮影開始”ボタンが押された時の日時タイマ２０６の日時の値を撮影日時として、ショットの情報を追加する。そして、主制御部２のシステム制御部２１のタイムコードカウンタ２０４とショットＮＯ．カウンタ２０５は、それぞれ、フラッシュメモリ１１上の最大タイムカウンタと最大ショットＮＯ．のカウントアップを開始する（ショットＮＯ．カウンタは１カウントのみ）。併行して主制御部２の静止画処理部２３（以下、内部の構成は図５を参照）の代表画像抽出部２３１により最初のフレーム画像が代表静止画として抽出され、続いてＪＰＥＧ圧縮伸長部２３２により圧縮された後、サムネール作成部２３３により縮小されたサムネール画像として生成され、フラッシュメモリ１１上のショット管理情報中の処理中のショットＮＯ．に対応したサムネイル画像データの領域に追記される。
【００８０】
また、上記の撮影中にフレーム単位でカウントアップされているタイムコードは、前述したように動画記録と同時に光磁気ディスク上の所定の領域にフレーム毎に記録される。
【００８１】
以下に続くショットでも同様である。
【００８２】
“撮影終了”ボタン７２の押下によってタイムコードカウンタ２０４は停止する。そして、メディア管理部２０７は、“撮影終了”ボタン７２が押下されたときの日時タイマ２０６の日時の値を、フラッシュメモリ１１上の最新更新日時に書き込み、フラッシュメモリ１１上のメディア管理情報を、光磁気ディスク３上のメディア管理情報３０に書き込む。さらに、ショット管理部２０８は、フラッシュメモリ１１上のショット管理情報を、光磁気ディスク３上のショット管理情報３１に書き込む。
【００８３】
以上を繰り返すことにより、“撮影開始”ボタンを押下するごとに各ショットの代表静止画としての最初のフレーム画像のサムネール画像とともに、各ショットのディスク上の開始位置を表わすタイムコードと、ショットＮＯ．と、撮影日時が、フラッシュメモリ１１上のショット管理情報に追記されて行く。
【００８４】
次に、サムネール画像を用いたコマンド入力用紙の印刷過程について説明する。
【００８５】
ユーザーが入力部７の“印刷”ボタン７３を押下すると、主制御部２の印刷処理部２４（以下、内部の構成は図９を参照）が起動され、その中の印刷条件設定部２４０が表示処理部２５、出力回路１４を介して表示部１５に“サムネール一覧を印刷しますか？”のメッセージを表示する。ユーザーが“ＯＫ”ボタン７５を押下すると印刷処理部２４のメディアＩＤ印刷部は、フラッシュメモリ１１上のメディアＩＤと最新更新日時を文字データとして、プリンタ１３により印刷用紙に印刷する。
【００８６】
続いて、印刷処理部２４のデータ伸長部２４２により、ＪＰＥＧ圧縮されているサムネールデータ（フラッシュメモリ１１上のショット管理情報中のサムネイル画像データ：図８を参照）が順次伸長され、元の縮小されたサムネール画像に復号される。このサムネール画像はＹ／Ｐｒ／Ｐｂ信号であるため、マトリクス変換部２４３によりプリンタ１３に適したＲ，Ｇ，Ｂ信号に変換される。次に、ラスタライザ２４４によりＲ，Ｇ，Ｂ変換された画像データは、Ｒ，Ｇ，Ｂ毎にラスタ化された多階調（例えば６４階調）のビットイメージデータとなり、続く色補正処理部２４５によりインクに対応した印刷用のＹ，Ｍ，Ｃ，Ｋの多階調ビットイメージデータに変換される。この多階調ビットイメージデータは各色毎に、ハーフトーン処理部２４６によりディザ法や誤差拡散法などにて２値化されたビットマップデータに変換される。ハーフトーン処理が終わると、データ送信部２４７により２値化されたビットマップデータとなったサムネール画像データは、キャラクタデータであるショットＮＯ．と入力枠とともに所定の印字フォーマットに変換され、通信インタフェース部１２を介してプリンタ１３に送信され、プリンタ１３により印刷用紙に印刷が行われる。
【００８７】
なお、通信インタフェースとしては汎用のＩＥＥＥ１３９４やＵＳＢなどを使用することが出来る。
【００８８】
図１０に印刷例（コマンド入力用紙と称す）を示す。
【００８９】
この例では、Ａ４用紙１枚に３０個のサムネール画像と、対応したショットＮＯ．がその上に、またそれぞれのサムネール画像の下に空欄の入力枠が印刷されている。ショットＮＯ．とサムネイル画像との対応付けは、フラッシュメモリ上のショット管理情報によって行なうことができる。用紙の上部には、フラッシュメモリ１１上のメディアＩＤが左側に、最新更新日時が右側に印刷されている。メディアＩＤの「０１０２０３０４０５０６」は、カムコーダＩＤが「０１０２０３０４０」であり、メディアカウンタが「５０６」であることを示している。最新更新日時の「０２０３０４０５０６」は、「２００２年３月４日５時６分」であることを示している。
【００９０】
ユーザーはこの印刷結果のコマンド入力用紙を用いることで、再生したいショットや、編集にあたってカットしたいショットや残したいショットの順番を直感的に判断して、その意図を指定することが出来る。
【００９１】
例えば、ショットＮＯ．０３から再生したい場合、図１１に示されるように、ショットＮＯ．０３に対応した入力枠を黒く塗りつぶして黒四角とするか、入力枠と同じ大きさの黒四角の紙片などを、ショットＮＯ．０３に対応した入力枠の位置に置く。また、例えば、ショットＮＯ．０１と０３をカットし、ショットＮＯ．０２、０５、０４の順番に編集したいものとすると、図１２のようにショットＮＯ．０１と０３に対応した入力枠は、空欄のまま未記入とし、ショットＮＯ．０２に対応した入力枠に“０１”、ショットＮＯ．０５に対応した入力枠に“０２”、ショットＮＯ．０４に対応した入力枠に“０３”を、それぞれ手書きで記入するか、入力枠と同じ大きさの数字順番が印刷された紙片を入力枠の位置に置く。コマンド用紙に直接入力しないことで、コマンド用紙を何度も利用することができる。
【００９２】
次に、コマンド入力用紙を用いて、ドライブユニット１に装填されている光磁気ディスク３に対するコマンド実行について説明する。
【００９３】
ユーザーは、記入済みのコマンド入力用紙全体がほぼフル画面となるようにズーム機構を操作してカムコーダの静止画撮影機能を用いて静止画撮影を行う。
【００９４】
撮影が終了すると、取り込まれだ静止画像としてのコマンド入力用紙はバッファメモリ８に蓄積される。
【００９５】
ユーザーが入力部の“実行”ボタン７７を押下すると、主制御部２の認識処理部２７が起動される。
【００９６】
認識処理部２７は図１５に示す機能で構成されている。
【００９７】
まず、バッファメモリ８に蓄積されている静止画像は二値化部２７１にて二値化が行われ、続いて図形抽出部２７２にて図１１または図１２におけるメディアＩＤ枠（左上）と最新更新日時枠（右上）とショットＮＯ．枠と入力枠とが抽出される。これらの枠は予め形状とサイズと位置関係が決まっているので認識は容易である。
【００９８】
次に、数字切り出し部２７３により上記の各枠内の数字の切り出しが行われる。これも予めサイズと桁数が決まっているので切り出しは容易である。
【００９９】
切り出された数字は数字認識部２７４にて、不図示の特徴抽出や、いくつかの候補との比較が行われ、数字が認識される。
【０１００】
なお、上記において数字はビデオカメラの解像度に対して十分大きいサイズで記述されているので高精度で検出することが可能であり、公知の技術を用いて上記の数字認識が可能である。
【０１０１】
また、入力枠には、図１１に示されるように、数字ではなく黒四角であることがあり、この場合は、枠内の黒がその占める割合が一定以上であれば、黒四角であると判定することができる。
【０１０２】
次に、コマンド判定部２７７において、コマンド入力用紙で指定されたコマンドの種類を判定する。数字認識部２７４において、黒四角と判定された場合は、コマンドは頭出しであると判定し、数字と判定された場合は、コマンドは編集であると判定される。
【０１０３】
次に、認識決定部２７５において、図形抽出部２７２で認識されたそれぞれの枠の位置関係と、数字認識部２７４とで認識された数字を元に、バッファメモリ８に蓄積されたコマンド入力用紙の画像データから入力された情報を認識結果として決定する。すなわち、コマンド入力用紙の左上の枠の数字をメディアＩＤ、右上の数字を最新更新日時として決定する。また、コマンド判定部２７７において、コマンドが頭出しと判定された場合は、黒四角の入力枠に対応したショットＮＯ．を頭出しのショットＮＯ．として決定する。さらに、コマンドが編集である場合、入力枠の数値が編集順序を表しているので、数値が入力された入力枠と対応したショットＮＯ．から、編集結果としてのショットＮＯ．の並び、すなわち、編集テーブルを決定することができる。
【０１０４】
次に、メディア対応確認部２７６において、ドライブユニット１に装填されている光磁気ディスク３とバッファメモリ８に蓄積されたコマンド入力用紙との対応を判定し、判定結果に基づいて、ユーザに処理続行の確認を行なう。
【０１０５】
図１９にメディア対応確認部２７６のフローチャートを示す。
【０１０６】
メディア対応確認部２７６では、フラッシュメモリ１１上の光磁気ディスクに関する情報とメディアＩＤと、バッファメモリ８に蓄積されたコマンド入力用紙上の光磁気ディスクに関する情報とを比較して分岐する。
【０１０７】
ステップＳ２００１において、フラッシュメモリ１１上のメディアＩＤの値が０であるかどうか判定し、０であれば、ドライブユニット１に光磁気ディスクが装填されていないとしてステップＳ２００２へ進み、０でなければ、装填されているものとしてステップＳ２００４へ進む。
【０１０８】
ステップＳ２００２では、表示部１５にエラーメッセージとして“ディスクが装填されていません。ディスクを装填してください。”のメッセージを表示する。続いて、ユーザが光磁気ディスクを装填すると、前述の初期化処理が行なわれて、ステップＳ２００３を経てステップＳ２００１へ進む。ユーザが取り消しボタンを押下すると、ステップＳ２００３を経てコマンド入力用紙に対する処理を終了する。
【０１０９】
ステップＳ２００４では、フラッシュメモリ１１上のメディアＩＤと認識決定部２７５において決定されたコマンド入力用紙上のメディアＩＤの値を比較して分岐する。等しくなければ、装填されている光磁気ディスクとコマンド入力用紙の対応が取れていないものとしてステップＳ２００５へ進み、等しければ、対応が取れているものとしてステップＳ２００７へ進む。
【０１１０】
ステップＳ２００５では、図１３に示されるように、表示部１５にエラーメッセージとして“コマンド入力用紙とディスクが一致しません。ディスクを交換してください。”のメッセージを表示する。同時に、表示部１５に、その時に装填されている光磁気ディスクに記録されているショットの一覧を、フラッシュメモリ１１上のショット情報を元に表示する。フラッシュメモリ１１上のショット情報にはシーンＮＯ．とサムネール画像データが対応付けて格納されているので、図１３に示されるような画面を容易に表示することができる。これにより、その時に装填されている光磁気ディスクの内容を確認できる。続いて、ユーザが光磁気ディスクを交換すると、前述の初期化処理が行なわれて、ステップＳ２００６を経てステップＳ２００１へ進む。ユーザが取り消しボタンを押下すると、ステップＳ２００６を経てコマンド入力用紙に対する処理を終了する。
【０１１１】
ステップＳ２００７では、フラッシュメモリ１１上の最新更新日時と認識決定部２７５において決定されたコマンド入力用紙上の最新更新日時の値を比較して分岐する。等しくなければ、コマンド入力用紙の内容と装填されている光磁気ディスクの内容が一致していない可能性があるものとして、ステップＳ２００８へ進み、等しければ、コマンド入力用紙を印刷してから、光磁気ディスクの内容が変更されていないものとして、ステップＳ２０１１へ進む。
【０１１２】
ステップＳ２００８では、図１４に示されるように、表示部１５にエラーメッセージとして“コマンド入力用紙を印刷してからディスクの内容が更新されています”のメッセージを表示する。同時に、表示部１５に、装填されている光磁気ディスクに記録されているショットの一覧を、フラッシュメモリ１１上のショット情報を元に表示する。フラッシュメモリ１１上のショット情報にはシーンＮＯ．とサムネール画像データが対応付けて格納されているので、図１４に示されるような画面を容易に表示することができる。各ショットのサムネールを表示する際、ショットの撮影日時（フラッシュメモリ１１上のショット情報に格納）と、コマンド入力用紙上の最新更新日時の値を比較し、コマンド入力用紙上の最新更新日時よりも以前に撮影されたショットのサムネールは、図１４に示すように、輝度を落としたり、１画素ずつ間引いて表示したりして、コマンド入力用紙上の最新更新日時よりも後に撮影されたショットよりも目立たないように、表示形態を変えて表示する。続いて、ユーザがＯＫボタンを押下するとステップＳ２００９を経てステップＳ２０１０へ進み、取り消しボタンを押下すると。ステップＳ２００９を経てコマンド入力用紙に対する処理を終了する。
【０１１３】
ステップＳ２０１０では、コマンドの対象となるショット、すなわち、数字または黒四角が入力されたコマンド入力用紙の入力枠に対応したショットの撮影日時が、コマンド入力用紙上の最新更新日時よりも古いかどうか判定し、古いショットが一つでも有れば、コマンドの実行に影響するものとして、表示部１５に“コマンドの実行に影響があるので処理を終了します”のメッセージを表示して、コマンド入力用紙に対する処理を終了する。古いショットが一つもなければ、ステップＳ２０１１へ進む。
【０１１４】
ステップＳ２０１１では、コマンド判定部２７７で判定された結果に従って分岐する。頭出しと判定されていれば、主制御部２の再生処理部２９へ制御を移す。編集と判定されていれば、主制御部２の編集処理部２６へ制御を移す。
【０１１５】
再生処理部２９では、認識決定部２７７で決定された頭出しのショットＮＯ．に基づき、システム制御部２１のドライブ制御部２０１、信号処理制御部２０２等と連携して、光磁気ディスク３から頭出しのショットＮＯ．に対応した画像データを表示部１５に再生する。例えば図１１の頭出しの指示がなされているとすると、まず、システム制御部２１のドライブ制御部２０１はドライブユニット１の不図示の光ピックアップをディスク３上のショットＮＯ．が０３に対応した画像データの先頭位置にシークさせ、再生信号処理部１０を介して画像データを読み取り、動画処理部２２において伸張し、表示処理部２５、出力回路１４を経て、表示部１５に再生する。
【０１１６】
編集処理部２６では、認識決定部２７７で決定された編集テーブルを用い、システム制御部２１のドライブ制御部２０１、信号処理制御部２０２と連携して実際に画像データの自動編集作業を遂行する。
【０１１７】
次にその詳細を説明する。
【０１１８】
例えば図１６のようにディスク上に記録されたデータに対し、図１２の編集指示がなされているとすると、まず、システム制御部２１のドライブ制御部２０１はドライブユニット１の不図示の光ピックアップをディスク３上のショットＮＯ．が０２に対応した画像データの先頭位置にシークさせ、ショットＮＯ．が０３の位置までのデータを再生信号処理部１０を介して読み取り、一旦バッファメモリ８に蓄積した後、再び記録信号処理部９を介して光磁気ディスク３の他の領域に記録する。この時、最大ショットＮＯ．が３１であるとすると、新たに記録されたショットのショットＮＯ．は、３１になり、同様に、タイムコードも最大タイムコードを基に変更され、最大ショットＮＯ．と最大タイムコードが更新される。なお、この時、バッファメモリ８の容量が不足する場合は上記の動作をバッファメモリの容量内で複数回に分けて行えばよい。
【０１１９】
続いて同様の動作により、ショットＮＯ．が０５のデータ、ショットＮＯ．が０４のデータの順番に光磁器ディスク３上の対応した領域から読み出され、バッファメモリ８を介して上記の新しい領域に記録されたショットＮＯ．が３１のデータの後にシーケンシャルに記録される。
【０１２０】
以上の結果、図１７に示すように編集指示内容どおりに編集が行われたことになる。
【０１２１】
本実施形態においては、印刷されたコマンド入力用紙の空欄に、単に編集順序を手書き等で指定したり、頭出し位置を指定するだけ、という極めて簡単かつ直感的な操作で編集指示や頭出し指示を行い、これを静止画撮影するだけで自動的に編集や頭出しが行われるため、一般のユーザーでも極めて手軽にビデオ編集や頭出しなどの操作を行うことが可能である。
【０１２２】
また、カムコーダとプリンタだけで編集操作が行えるため、従来のようなＰＣを使うわずらわしさからユーザーを解放することが可能となる。
【０１２３】
（第２の実施形態）
図２０は本発明の第２の実施形態に係わるディジタルカムコーダまたはディジタルカメラの構成を示すブロック図である。第１の実施形態と共通する部分には同じ番号を付与している。
【０１２４】
ブロック構成としては記録媒体としてカード型フラッシュメモリ３３を使用しているところ、及びメカ部を持たないためドライブが省かれているところが第１の実施形態と異なる。
【０１２５】
また、基本動作としては可動部を持たないところとを除いて第１の実施形態と同じであるため、第１の実施形態と異なる特徴について説明する。
【０１２６】
本実施形態は動画記録機能を有するディジタルカメラに好適であり、ディジタルカメラの静止画解像度（２００〜３００万画素）は通常カムコーダのそれ（約４０万画素）より高いので、１枚のコマンド入力用紙に記載するショットの数を多く（文字を小さく）しても十分読み取ることができ、対象のショット数が多くなった場合でもコマンド入力用紙を撮影する回数を低減することが可能となり、ユーザーの操作性を向上させることが可能となる。
【０１２７】
（第３の実施形態）
上記の実施形態では記録媒体上の開始位置または開始時間を表わす情報としてタイムコードを用いたが、その他の情報、例えば実時間（時計）であってもよい。
【０１２８】
また、代表静止画として先頭フレームを用いたが、必ずしも先頭である必要はなく、画像認識手段を用いて検出した、ショットの中間の画像であっても良い。
【０１２９】
また、上記の実施形態では数字認識を容易にするためにショットＮＯ．を枠付きで印刷したが、認識側で工夫することによりこれを省くことも可能である。
【０１３０】
また、上記実施形態では手書き数字認識を容易にするために空欄枠を印刷し、そこに編集順序を指示する数字を書き込むようにしたが、認識側で工夫することによりこれを省くことも可能である。
【０１３１】
また、上記の実施形態では、メディアＩＤと最新更新日を図１０に示されるように、数字で印刷していたが、代わりに、図２１に示されるように、バーコードや二次元バーコードなどで印字するようにしても良い。こうすることによって、メディアＩＤと最新更新日の印字スペースを少なくし、他の情報（例えば、図２１に示されるようなコマンド等）を印刷できるようになる。
【０１３２】
また、上記の実施形態では、コマンドの種別を、コマンド入力用紙の入力枠への入力方法（数字または黒四角）で判別していたが、図２１に示されるように、コマンドを指定する領域を明示的に印刷し、その中で明示的に指定するようにしても良い。図２１に示されるように、コマンドの種別（再生と印刷と編集）に対応した白四角をそれぞれ印刷しておき、ユーザは、白四角を黒く塗りつぶすなどして、コマンドの種別を指定する。図２１では、印刷が指定されているものと判定される。コマンドを指定する黒四角の位置は、コマンド入力用紙の中であらかじめ定められているので、コマンドの種別を文字認識する必要はなく、容易にコマンドの種別を判定できる。
【０１３３】
あるいは、図２１に示されるように、コマンドの種別の指定は、あらかじめ一つの機能に対してのみ黒四角で印刷しておき、ユーザは、所望の機能に対するコマンド入力用紙を選ぶようにしても良い。
【０１３４】
また、上記の実施形態では、光磁気ディスク３に格納する画像として動画を扱う例を示したが、静止画を扱うことも可能である。静止画は、１フレームのみの動画とみなすことによって、上記の実施形態と同じ構成で扱うことができる。例えば、図２１に示されるコマンド入力用紙を、静止画のサムネールの一覧を印刷したものであるとすると、コマンドとして再生、もしくは、編集が指示された場合は、入力枠は、静止画のスライドショーの再生順序を指定するためのものである。再生が指示された場合は、指定された順序に従って、表示部１５にスライドショーを再生し、編集が指示された場合は、指定された再生順序をスライドショーのデータとして、光磁気ディスク３に記録する。一方、印刷が指示された場合は、入力枠は、対応する静止画の印刷枚数を指定するためのものである。例えば、図２１のコマンド入力用紙をもとに実行すると、ショットＮＯ．２の静止画が１枚、ショットＮＯ．４の静止画が３枚、ショットＮＯ．５の静止画が２枚、それぞれ印刷される。
【０１３５】
また、上記の実施形態では、コマンド入力用紙のショットＮＯ．を文字認識するために、大きく印字していたが、ショットの並び順とサムネイルと入力枠の位置は、あらかじめコマンド入力用紙の中で決まっているので、図２１に示されるように、大きく印字する必要はない。入力枠の位置からショットＮＯ．を容易に判定できる。これにより、１枚のコマンド入力用紙の中に印刷できるショットの数を増やすことができるので、一度に目視で確認できるショットの数が増えると共に、コマンド入力用紙を撮影する回数を低減することが可能となり、ユーザーの操作性を向上することが可能となる。
【０１３６】
また、上記の実施形態では、メディアＩＤをディジタルカムコーダが作成していたが、光磁気ディスク３の製造時に、あらかじめメディアＩＤを個々の光磁気ディスクに付与しておき、ディジタルカムコーダは、光磁気ディスクに格納されているメディアＩＤを読み取って利用するようにしても良い。
【０１３７】
また、上記の実施形態では、ステップＳ２００１とステップＳ２００２において、ドライブユニット１に光磁気ディスク３が装填されているかどうかを判定し、装填されていない場合は処理を中断するようにしていたが、コマンド判定部２７７において、コマンドが編集であると判定されている場合は、光磁気ディスク３に書き込み可能かどうかも、同時に判定し、書き込み不可能であれば、表示部１５に“光磁気ディスクは書込み禁止です”のメッセージを表示して、ステップＳ２００３へ進むようにしても良い。
【０１３８】
以上詳述したように、上記の第１乃至第３の実施形態によれば、コマンド入力用紙と装填されている記録媒体との対応を確認しているので、ユーザの誤操作や、ユーザの期待したものと異なる結果が生じることを防ぐことができる。また、コマンド入力用紙と装填されている記録媒体との対応が取れていない場合に、できるだけ、ユーザに無駄な操作を強いることなく、正常な状態に復帰できるようにすることができる。
【０１３９】
また、上記の実施形態では、ステップＳ２００８において、コマンド入力用紙上の最新更新日時よりも後に撮影されたショットが目立つように、表示形態を変えて表示していたが、コマンド入力用紙上の最新更新日時よりも後に撮影されたショットのうち、コマンドの対象となるショットのみを目立つように表示しても良い。そして、このようなショットがなければ、表示をせずにそのままステップＳ２００１へ進み、コマンドを実行するようにしても良い。
【０１４０】
また、コマンド入力用紙に印刷された画像と記録媒体に記録されている画像との対応が取れていない場合に、個々の画像が対応が取れているかどうかを弁別しており、弁別された結果がわかるように表示しているので、対応が取れていない画像がコマンド入力用紙で指定された操作に影響を及ぼすかどうかが判定でき、ユーザの誤操作や、ユーザの期待したものと異なる結果が生じることを防ぐことができる。また、対応が取れていない画像がコマンド入力用紙で指定された操作に影響を及ぼすかどうかを判定しているので、ユーザの誤操作や、ユーザの期待したものと異なる結果が生じることを防ぐことができる。
【０１４１】
また、記録媒体に記録されている画像の識別情報と、印刷する枚数を指定するための入力枠の一覧を印刷し、印刷された用紙に印刷したい画像の必要枚数を記入し、この紙を画像記録再生装置で撮像することにより、指定された画像に対して、必要な枚数の印刷を行なうので、撮影された静止画や動画の数が多い場合でも、極めて簡単な操作で印刷を行なうことができ、操作性を大幅に改善できる。
【０１４２】
また、コマンド入力用紙から機能の種別を判別する手段を有するため、多数のサムネールが印刷されている入力用紙を用いて、複数の機能を実行できるため、一覧性に優れ、カムコーダやディジタルカメラなどの小さいディスプレイしか備えていない機器においても、複数の機能の操作を簡単に行なえ、操作性を大幅に改善することができる。
【０１４３】
また、複数の機能に対して用いる入力用紙は同一であるため、機能ごとに入力用紙の入力方法も同一になり、同様の操作で複数の機能を実行することができる。また、あらかじめ印刷しておく入力用紙の数も少なくてすみ、印刷の無駄を少なくすることができる。
【０１４４】
（第４の実施形態）
図２２は、第４の実施形態に係る装置にの基本構成を示す図である。
【０１４５】
本装置はビデオカメラ等の画像入力機器１００と、その印刷データに基づいて画像を形成するプリンタ２００とで構成される。
１００はビデオカメラ等の画像入力機器であり、プリンタ２００へ撮像データを送信するため、及び各種ステータスをプリンタ２００に通知したり受信したりするためのインターフェイス１０１、主として撮像した光学的情報を光電変換し、イメージデータを発生するレンズ制御部１０２、実際に画像を取り込むＣＣＤ等のレンズ１０３、撮影開始、撮影終了等を指示する操作パネル１０４、撮影した画像を記録するためのＤＶテープ等の記録媒体へ書き込み、読み出し等を制御するテープドライブ１０５、再生する画像を表示したり、撮影中の画像および録画中・テープ残量等の撮影状態を表示する液晶モニタ等の表示部１０６、撮影したデータ等を記憶するメモリなどの記憶部１０７、および機器全体を制御するＣＰＵ１Ｏ８を具備している。なお、インターフェイス１０１はプリンタ２００と例えばＩＥＥＥ１３９４親格やＵＳＢ規格等のケーブルで接続される。
また、本構成では、表示部として液晶モニタを用いているが、再生する画像あるいは撮影中の画像の表示が可能であればファインダーを覗くタイプ等であってもよいことは言うまでもない。
【０１４６】
操作パネル１０４の構成の一例を図２３に示す。
【０１４７】
１０４−１は記録媒体への画像の録画、１０４−２は記録媒体中の画像の再生、１０４−３は早送り、１０４−４は巻き戻し、１０４−５は停止、１０４−６は印刷、１０４−７は後述する画像の位置特定指示を表すものである。
図１に戻って、２００はプリンタであり、画像入力機器１００から印刷データを受信するため、及び各種ステータスを画像入力機器１００に通知するためのインターフェイス２０１、主として受信したプリンタデータを解釈し、ビットマップイメージデータを発生するプリンタ制御部２０２、プリンタ制御部２０２から出力されてきたビットマップイメージデータを受け、実際に画像を形成するプリンタエンジン２０３、およびインターフェイス２０１より受け取った印刷データを一時的に退避するバッファメモリ２０４で構成される。
なお、図示してはいないが操作パネル等も具備している。
また、プリンタエンジン２０３は、インクジェット方式、電子写真方式、感熱方式等、何れの方式を用いたものでもよい。なお、本発明の機能が実行されるのであれば、単体の機据であっても、複数の機器からなるシステムであっても、ＬＡＮなどのネットワークを介して処理が行われるシステムであっても本発明を適用できるのは言うまでもない。
図２４は、本実施形態のうち、動画の代表フレームを印刷する手続きに係るフローチャートを示す。
【０１４８】
以下このフローチャートに基づいて本装置の動作を説明する。
なお本装置を制御するプログラムは記憶部１０７から読み出され、ＣＰＵ１Ｏ８によって制御される。
【０１４９】
まず、ステップＳ３０１では撮影した画像を記録した記録媒体中の画像を、テープドライブ１０５より記憶部１０７へ読み出す。
【０１５０】
ステップＳ３０２では、ＣＰＵ１Ｏ８の制御の下で該画像のカット点を検出し、カット点から次のカット点までを１つのシーンとして画像をシーン単位に分割する。
【０１５１】
このときカット点検出アルゴリズムとしては、例えば特開平５−０３７８５３号公報（「動画のカット自動分割方法」）を利用するが、本発明では特にその方法について限定するものではない。
ステップＳ３０３では前記ステップＳ３０２で分割されたシーンより代表シーンをそれぞれ抽出する。
代表シーンとしては、シーンの先頭フレームを選ぷ方法、真中のフレームを選ぶ方法、何らかの基準に従って選ぶ方法等様々な方法があるが、本発明ではその基準については特に限定されるものではない。
【０１５２】
ステップＳ３０４では重複しないように各代表シーンにシーンＩＤを付与し、シーンＩＤと代表シーンとの組を記憶部１０７に格納する。
【０１５３】
シーンＩＤやその格納方法としては、例えば図２５ではシーンＩＤ２０−３０１，２０−３０２，２０−３０３，…，の画像が格納されていることを示している。シーンＩＤは各シーン固有のものであり、かつ、記録媒体ごとにも相異なるものとする。
例えば２つのシーンＩＤ、２０−３０１、２１−３０１があったとすれば、記録媒体２０と記録媒体２１のように異なる楳体上にそれぞれ対応するシーンは存在していることを示す。
【０１５４】
ステップＳ３０５では本装置の利用者によって操作パネル１０４中の印刷指示ボタン１０４−６より印刷指示を受信する。
【０１５５】
ステップＳ３０６では記憶部１０６より代表シーン群を読み出し、代表シーンを画像として印刷する形に並べる。
【０１５６】
図２６は代表シーンを並べ印刷する際の印刷形態の一例である。
【０１５７】
このとき、各シーンの印刷位置をシーンＩＤと共に記憶部に格納する。例えば図２６ではシーンＩＤ２０−３０１，２０−３０２，２０−３０３，…，の画像が格納されており、印刷位置が１，２，３であることを示している。
ステップＳ３０７では、印刷する形に整形した代表シーンが並んだ画像群をプリンタコントローラ１０６およぴインターフェイス２０１を介してプリンタ２００に印刷データとして送信する。
ステップＳ３０８では、プリンタ２００は受信した印刷データに従ってプリンタ制御部２０２を駆動しプリンタエンジン２０３を制御することで該印刷データを１枚の用紙に出力する。
図２７は出力の一例であり、出力として得られた印刷物の左上の部分を示している。
以下では、図２７に示したような、出力した状態を印刷画像群と呼ぶ。
当然ステップＳ３０７とステップＳ３０８においては、プリンタ２００がインターフェイス２０１を介して画像を受信する速度とプリンタエンジン２０３が印刷する速度は一致せず、通常の場合、前者の方が速いため、受信した画像を一時退避するためにバッファメモリ２０４を利用することとなる。このときバッファメモリ２０４がオーバーフローすることも十分に考えられる。
【０１５８】
このときインターフェイス２０１を介してプリンタコントローラ１０６にその旨を伝え、プリンタコントローラ１０６は画像の送信を適宜制御することとするが、制御の方法については様々考えられるが本発明では特に限定するものではない。
次に本実施形態において、再生するシーンを指定する手続きについて図２８に示すフローチャートを用いて説明する。
【０１５９】
前記した手続きによって得られた印刷画像群のうち、ステップＳ７０１では本装置の利用者が操作パネル１０４中の画像の位置特定指示ボタン１０４−７を押したことを受信し、このとき本装置の利用者は再生したいシーンと対応した１つの画像を指し示すところを画像入力装置１００によって撮影する。
指し示す方法は指やペン等で、画像入力装置による撮影で画像を持定できさえすればよく、本発明ではその方法は問わない。
【０１６０】
例えば図２９では、左から３番目の画像を本装置の利用者が指で指定した状態を示している。
【０１６１】
ステップＳ７０２では、前記ステップＳ７０１で撮影された印刷画像群の中から１つの画像が指し示された状態である画像を記憶部１０７に格納する。
当該印刷画像群から指し示された位置および画像を検出する方法は、例えば持開平８−３３５１３６号公報「座標検出装置および方法」を用いるが本発明では特にその方法については限定しない。
【０１６２】
ステップＳ７０３では、指し示された画像の位置と図２５で示したシーンＩＤと印刷位置との組より該シーンのシーンＩＤを特定する。
【０１６３】
図２５および図２９の例では指し示された印刷位置は「３」であるので、シーンＩＤは２０−３０３と求められる。
ステップＳ７０４では該シーンＩＤより該当シーンを特定し、表示部１０６を利用して当該シーンの先頭より再生を行う。図２５の例ではシーンＩＤ２０−３０３より再生を行う。
【０１６４】
（第５の実施形態）
第４の実施形態においては、プリンタによって印刷画像群が印刷された用紙と画像を格納した記録媒体との対応付けは利用者に任せていたが、第５の実施形態においては、印刷画像群が印刷された用紙に識別子を付与することにより、画像を格納した記録媒体との対応付けを本装置が指示するように構成する。
本実施形態に係る装置の基本構成については、第４の実施形態と同様なので説明を省略する。
【０１６５】
本装置は印刷データ（制御コマンドを含む）を生成する情報処理装置１００と、その印刷データに基づいて画像を形成するプリンタ２００、および、ビデオカメラ等の画像入力機器３００とで構成される。
図３０は、印刷画像群が印刷された用紙に付与された識別子と、画像を格納した記録媒体との対応付けを取るテーブルの一例である。このテーブルは記録媒体１０６上に存在する。
【０１６６】
図３０の例では、用紙に付与され印刷される用紙識別子２２、２３に対応する画像を格納した記録媒体のＩＤがそれぞれ２５、２７であることを示している。なお本実施形態では用紙識別子を数字としたが、バーコード等のようにレンズ１０３により取り込み可能であれば所期目的を達成できることは言うまでもない。
【０１６７】
図３１は本実施形態のうち、動画の代表フレームを印刷する手続きに係るフローチャートを示す。
【０１６８】
以下このフローチャートに基づいて本装置の動作を説明する。
なお本装置を制御するプログラムは記憶部１０７から読み出され、ＣＰＵ１Ｏ８によって制御される。
まず、ステップＳ１００１では撮影した画像を記録した記録媒体中の画像を、テープドライブ１０５より記億部１０７へ読み出す。
ステップＳ１００２では、ＣＰＵ１Ｏ８の制御の下で該画像のカット点を検出し、カット点から次のカット点までを１つのシーンとして該画像をシーン単位に分割する。
このときカット点検出アルゴリズムとしては、第４の実施形態と同様に本発明では特にその方法について限定するものではない。
【０１６９】
ステップＳ１００３では前記ステップＳ１００２で分割されたシーンより代表シーンをそれぞれ抽出する。
代表シーンとしては、シーンの先頭フレームを選ぶ方法、真中のフレームを選ぶ方法、何らかの基準に従って選ぶ方法等様々な方法があるが、第４の実施形態と同様に本発明ではその基準については特に限定しない。
ステップＳ１００４では重複しないように各代表シーンにシーンＩＤを付与し、シーンＩＤと代表シーンとの組を記億部１０７に格納する。
シーンＩＤやその格納方法としては、例えば図２５ではシーンＩＤ２０−３０１，２０−３０２，２０−３０３，…，の画像が格納されていることを示している。
【０１７０】
シーンＩＤは各シーン固有のものであり、かつ、記録媒体ごとにも相異なるものとする。例えば２つのシーンＩＤ、２０−３０１、２１−３０１があったとすれば、記録媒体２０と記録媒体２１のように異なる楳体上にそれぞれ対応するシーンは存在していることを示す。
ステップＳ１００５では本装置の利用者によって操作パネル１０４中の印刷指示ボタン１０４−６より印刷指示を受信する。
【０１７１】
ステップＳ１００６では記憶部１０７より代表シーン群を読み出し、代表シーンを画像として印刷する形に並べる。
図２６は代表シーンを並べ印刷する際の印刷形態の一例である。このとき、各シーンの印刷位置をシーンＩＤと共に記憶部に格納する。例えば図２６ではシーンＩＤ２０−３０１，２０−３０２，２０−３０３，・・・，の画像が格納されており、印刷位置が１，２，３であることを示している。
ステップＳ１００７では、用紙識別子を重複のないよう発番し、図３０で示した用紙識別子と記録媒体との対応テーブルに用紙識別子と記録媒体ＩＤと対応付けて収め記憶部１０７に格納する。
ステップＳ１００８では、印刷する形に整形した代表シーンが並んだ画像群および用紙識別子をプリンタコントローラ１０６およびインターフェイス２０１を介してプリンタ２００に印刷データとして送信する。ステップＳ１００９では、プリンタ２００は受信した印刷データに従ってプリンタ制御部２０２を駆動しプリンタエンジン２０３を制御することで該印刷データを１枚の用紙に出力する。
【０１７２】
図３２は出力の一例であり、出力として得られた印刷物の左上の部分を示している。用紙識別子は図３２の場合左上に「２２」と印刷表示されている。
【０１７３】
当然ステップＳ１００８とステップＳ１００９においては、プリンタ２００がインターフェイス２０１を介して画像を受信する速度とプリンタエンジン２０３が印刷する速度は一致せず、通常の場合、前者の方が速いため、受信した画像を一時退避するためにバッファメモリ２０４を利用することとなる。第４の実施形態と同様にプリンタコントローラ１０６は画像の送信を適宜制御することとするが、制御の方法については様々考えられるが本発明では特に限定するものではない。
次に本実施形態において、再生するシーンを指定する手続きについて図３３に示すフローチャートを用いて説明する。
前記した手続きによって得られた印刷画像群のうち、ステップＳ１２０１では本装置の利用者が操作パネル１０４中の画像の位置特定指示ボタン１０４−７を押したことを受信し、このとき本装置の利用者は再生したいシーンと対応した１つの画像を指し示すところを画像入力装置１００によって撮影する。
指し示す方法は指やペン等で画像入力装置による撮影で画像を特定できさえすればよく、本発明ではその方法は問わない。
【０１７４】
例えば図２９では、左から３番日の画像を本装置の利用者が指で指定した状態を示している。
ステップＳ１２０２では、前記ステップＳ１２０１で撮影された印刷画像群の中から１つの画像が指し示された状態である画像を記憶部１０７に格納する。
ステップＳ１２０３では、前記図３１で示したフローチャートによって印刷画像群が印刷された紙に印刷された用紙識別子を前記ステップＳ１２０２で記憶部１０７に格納した撮影画像より判別する。
【０１７５】
判別方法については、用紙識別子が数字や文字であればＯＣＲによる方法、バーコードであればバーコード等を利用すれば可能であるが、本発明では特に限定せず、該用紙より読み取りが可能であればよい。
ステップＳ１２０４では前記ステップＳ１２０３で判別した用紙識別子を利用して図３０で示した用紙識別子と記録媒体との対応テーブルより記録媒体ＩＤを取り出す。
【０１７６】
前記ステップＳ１２０４により用紙識別子が「２２」と判別できた場合に図３０の例では、対応テーブルより記録媒体ＩＤとして「２５」が得られる。
ステップＳ１２０５では、現在テープドライブ１０５中に存在している記録媒体が、前記ステップＳ１２０５で得た記録媒体ＩＤのものであるか否かを判定する。
もしそうであればステップＳ１２０８へ移る。
そうでなければステップＳ１２０６へ移る。
ステップＳ１２０６では、表示部１０６に記録媒体を交換するよう利用者に通知する。図３４は利用者に通知する場合の表示部１０６の画面例である。
【０１７７】
ステップＳ１２０７では、本装置の利用者が記録媒体を入れ替えたことを受信し、ステップＳ１２０５へ戻る。
【０１７８】
ステップＳ１２０８では、指し示された画像の位置と図２５で示したシーンＩＤと印刷位置との組より該シーンのシーンＩＤを特定する。
【０１７９】
図２５および図３０の例では指し示された印刷位置は「３」であるので、シーンＩＤは２０−３０３と求められる。
ステップＳ１２０９では該シーンＩＤより該当シーンを特定し、表示部１０６を利用して当該シーンの先頭より再生を行う。
【０１８０】
図２５の例ではシーンＩＤ２０−３０３より再生を行う。
（他の実施形態）
以上、幾つかの実施形態について詳述したが、本発明は、複数の機器から構成されるシステムに適用しても良いし、また、単体の機器から成る装置に適用しても良いしＬＡＮなどのネットワークを介して処理が行われるシステムに適用しても良い。
【０１８１】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、達成されることは言うまでもない。
【０１８２】
その場合、プログラムの機能を有していれば、形態は、プログラムである必要はない。
従って、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を間わない。
【０１８３】
プログラムを供給するための記憶媒体としては、例えば、フロッピイディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤなどを用いることができる。
この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記億媒体は本発明を構成することになる。
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムそのもの、もしくは、圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。
【０１８４】
また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。
【０１８５】
つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷ（ワールドワイドウェブ）サーバやｆｔｐサーバ等も本発明の範疇に含まれるものである。
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【０１８６】
また、コンピュータが読出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
更に、記億媒体から読出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０１８７】
以上説明したように、上記の第４及び第５の実施形態によれば、動画像のシーンをシーンごとに分割してその代表フレームの並びであるマルチ画像を印刷し、再生するためのシーンを特定するためにマルチ画像を撮影して利用する場合において、マルチ画像中の各代表フレームである面像の位置を印刷時に記憶することで、画像の横にバーコードを同時に印刷したり磁性体を同時に塗布したりすることなく、再生するシーンを特定する効果をあげることが可能となる。
【０１８８】
【発明の効果】
以上説明したように、本発明によれば、記録した動画像の編集を容易に行なえるようにすることが可能となる。
【０１８９】
また、複数枚の画像から所望の画像を選択してプリントする場合の操作性を向上させることが可能となる。
【０１９０】
また、複数のシーンから所望のシーンを選択して再生する場合の操作性を向上させることが可能となる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態に係わるカムコーダのブロック図である。
【図２】主制御部のブロック図である。
【図３】主制御部の中のシステム制御部の構成図である。
【図４】主制御部の中の動画制御部の構成図である。
【図５】主制御部の中の静止画制御部の構成図である。
【図６】撮像系処理回路のブロック図である。
【図７】空間フィルタの特性を示す図である。
【図８】フラッシュメモリの記録領域の模式図である。
【図９】主制御部の中の印刷処理部の構成図である。
【図１０】コマンド入力用紙の印刷例を示す図である。
【図１１】コマンド入力用紙の入力例を示す図である。
【図１２】コマンド入力用紙の入力例を示す図である。
【図１３】入力フォームの入力例を示す図である。
【図１４】表示部の表示例を示す図である。
【図１５】表示部の表示例を示す図である。
【図１６】ディスク媒体上の映像記録領域のデータ構成図（編集前）である。
【図１７】ディスク媒体上の映像記録領域のデータ構成図（編集後）である。
【図１８】ディスク媒体上のデータ構成例を示す図である。
【図１９】メディア対応確認部のフローチャートである。
【図２０】第２の実施形態のカムコーダのブロック図である。
【図２１】コマンド入力用紙の印刷例を示す図である。
【図２２】本発明の第４の実施形態の基本構成を示すブロック図である。
【図２３】画像入力機器における操作パネルを示す図である。
【図２４】動画の代表フレームを印刷する手順を示すフローチャートである。
【図２５】シーンＩＤとシーンの格納形式を示す図である。
【図２６】シーンＩＤとシーンと印刷位置の格納形式を示す図である。
【図２７】印刷画像群を示す図である。
【図２８】再生するシーンを指定する手順を示すフローチャートである。
【図２９】印刷画像群のうち１つの画像を指し示した状態を示す図である。
【図３０】第２の実施形態における用紙識別子と記録媒体の対応テーブルを示す図である。
【図３１】第２の実施形態における動画の代表フレームを印刷する手順を示すフローチャートである。
【図３２】第２の実施形態における印刷画像群を示す図である。
【図３３】第２の実施形態における再生するシーンを指定する手順を示すフローチャートである。
【図３４】第２の実施形態における印刷画像群と記録媒体が不一致の場合に表示部に表示するメッセージを示す図である。
【符号の説明】
１　ドライブユニット
２　主制御部
３　光磁気ディスク
４　光学系
５　撮像素子
６　撮像系処理部
７　入力部
８　バッファメモリ
９　記録信号処理部
１０　再生信号処理部
１１　フラッシュメモリ
１２　通信インターフェイス
１３　プリンタ
１４　出力回路
１５　表示部
１００　画像入力機器
２００　プリンタ
１０１　インターフェイス
１０２　レンズ制御部
１０３　レンズ
１０４　操作パネル
１０５　テープドライブ
１０６　表示部
１０７　記憶部
１０８　ＣＰＵ
１Ｏ４−１　録画指示ボタン
１０４−２　再生指示ボタン
１０４−３　早送り指示ボタン
１０４−４　巻き戻し指示ボタン
１０４−５　停止指示ボタン
１０４−６　印刷指示ボタン
１０４−７　画像の位置特定指示ボタン
２０１　インターフェイス
２０２　プリンタ制御部
２０３　プリンタエンジン
２０４　バッファメモリ

Claims (1)

1. 被写体からの光を光電変換して撮像する撮像手段と、
   該撮像手段によって撮像された画像を記録媒体に記録する画像記録手段と、
   前記記録媒体に記録されている複数の画像のそれぞれを代表する静止画を一覧印刷する一覧印刷手段と、
   前記記録媒体に記録されている画像に対する操作の指示を、前記一覧印刷手段によって印刷された印刷物と共に前記撮像手段を用いて画像として入力する画像操作入力部と、
   該画像操作入力部の入力の対象となった印刷物と、前記操作の対象となっている記録媒体との対応状態を判定する対応判定手段とを備えることを特徴とする画像処理装置。

Images