JP2011071591A - 印刷装置および印刷方法 - Google Patents

Abstract

【課題】動画の中から所望の静止画像を容易に選択して印刷する印刷装置を提供する。
【解決手段】プリンター１０は、動画像が入力される動画像入力部５０と、入力された動画像のシーン変化に基づいて静止画像を切り出す静止画像切り出し部５２と、切り出した静止画像を保存する静止画像保存部５６と、保存した静止画像が含むオブジェクトに基づいて、静止画像を分類する静止画像分類部５８と、静止画像を分類したオブジェクトの少なくとも１つが選択されるオブジェクト選択部６０と、選択されたオブジェクトに基づいて分類された静止画像の少なくとも１つが選択される画像選択部６６と、選択された画像を印刷する印刷部６８と、を備える。
【選択図】図２

Description

本発明は、印刷装置および印刷方法に関する。

近年、デジタルビデオ機器の普及により、デジタル動画を扱うことが容易になっている。デジタル動画には、デジタルカメラで録画した日常風景やテレビの情報番組など、様々な種類が存在する。このようなデジタル動画の中から、ユーザーが所望する人物や物体等のオブジェクトが写る静止画像を切り出す方法として、デジタル動画におけるチャプターの先頭の画像を切り出したり、時間的なタイミングで画像を切り出したり、ユーザーが動画を視聴して希望の画像を切り出したりしていた。ところが、これらの方法では、所望の画像を切り出せなかったり、動画を視聴するのに多くの時間が掛かったりするため、例えば、下記特許文献１に示す方法が提案されている。
このような方法では、動画中の連続する各フレームをそれぞれ比較して、類似する画像か否かを判定する。そして、判定の結果、類似するフレームが所定数以上連続する場合、静止画に適するフレームであると判定して、選択したフレームを印刷する。

特開２００８−１３００５０号公報

しかしながら、上記の方法では、類似する画像も抽出されて印刷されるため、動画の中から所望のオブジェクトが写る静止画像のみを抽出して印刷するのに手間がかかるという問題を有した。本発明は、動画の中から所望の静止画像を容易に選択して印刷することを目的とする。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態又は適用例として実現することが可能である。

［適用例１］
本適用例にかかる印刷装置は、動画像が入力される動画像入力部と、前記動画像入力部に入力された前記動画像のシーン変化に基づいて静止画像を切り出す静止画像切り出し部と、前記静止画像切り出し部が切り出した前記静止画像を保存する静止画像保存部と、前記静止画像保存部に保存した前記静止画像が含むオブジェクトに基づいて、前記静止画像を分類する静止画像分類部と、前記静止画像分類部が前記静止画像を分類した前記オブジェクトの少なくとも１つが選択されるオブジェクト選択部と、前記オブジェクト選択部で選択された前記オブジェクトに基づいて分類された前記静止画像の少なくとも１つが選択される画像選択部と、前記画像選択部で選択された前記静止画像を印刷する印刷部と、を備えることを特徴とする。

このような構成によれば、シーンの変化に基づいて動画像から静止画像を切り出して保存し、静止画像が含むオブジェクトに基づいて保存した静止画像を分類し、所望のオブジェクトが選択され、更に、選択されたオブジェクトに基づき分類された静止画像の中から所望の静止画像が選択されて、選択された静止画像が印刷される。従って、シーンの変化に基づいて静止画像が切り出されるため、動画像に写るオブジェクトを遍く抽出でき、抽出したオブジェクトから所望のオブジェクトを含む静止画像を選択し、選択した静止画像を印刷するため、ユーザーは動画に写るオブジェクトの中から、所望の静止画像を容易に選択し、選択した静止画像を印刷することができる。

［適用例２］
上記適用例にかかる印刷装置において、前記静止画像切り出し部は、前記動画像のシーンの切り替わりを検出し、シーンが切り替わった前記静止画像を切り出しても良い。

［適用例３］
本適用例にかかる印刷方法は、動画像が入力される動画像入力工程と、前記動画像入力工程で入力された前記動画像のシーン変化に基づいて静止画像を切り出す静止画像切り出し工程と、前記静止画像切り出し工程で切り出された前記静止画像を保存する静止画像保存工程と、前記静止画像保存工程で保存した前記静止画像が含むオブジェクトに基づいて、前記静止画像を分類する静止画像分類工程と、前記静止画像分類工程で前記静止画像を分類した前記オブジェクトの少なくとも１つが選択されるオブジェクト選択工程と、前記オブジェクト選択工程で選択された前記オブジェクトに基づいて分類された前記静止画像の少なくとも１つが選択される画像選択工程と、前記画像選択工程で選択された前記静止画像を印刷する印刷工程と、を有することを特徴とする。

このような方法によれば、シーンの変化に基づいて動画像から静止画像を切り出して保存し、静止画像が含むオブジェクトに基づいて保存した静止画像を分類し、所望のオブジェクトが選択され、更に、選択されたオブジェクトに基づき分類された静止画像の中から所望の静止画像が選択されて、選択された静止画像が印刷される。従って、シーンの変化に基づいて静止画像が切り出されるため、動画像に写るオブジェクトを遍く抽出でき、抽出したオブジェクトから所望のオブジェクトを含む静止画像を選択し、選択した静止画像を印刷するため、ユーザーは動画に写るオブジェクトの中から、所望の静止画像を容易に選択し、選択した静止画像を印刷することができる。

本発明の実施形態に係る印刷装置であるプリンターのハードウェア構成を示す図。 プリンターの機能構成を示すブロック図。 オブジェクト選択ウィンドウの一例を示す図。 印刷対象画像選択部の一例を示す図。 プリンターの処理の流れを示すフローチャート。 静止画像を切り出す処理の流れを示すフローチャート。 静止画像をオブジェクト毎に分類する処理の流れを示すフローチャート。

以下、印刷装置について図面を参照して説明する。

（実施形態）
図１は、本発明の実施形態に係る印刷装置であるプリンター１０のハードウェア構成を示す図である。このプリンター１０は、ＲＭＣ（Ｒｅｍｏｖａｂｌｅ Ｍｅｍｏｒｙ Ｃｏｎｔｒｏｌｌｅｒ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１６と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１４と、表示制御部１８と、外部Ｉ／Ｆ（Ｉｎｔｅｒ Ｆａｃｅ）２２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２４と、フラッシュメモリー２６と、印刷制御部２８と、操作部３２、画像処理回路３４とを備え、これらはバス３６により、種々の信号が授受可能に接続されている。このプリンター１０は、画像のデータを含む画像ファイルを読み込み、読み込んだ画像ファイルに含まれる画像データが示す画像を印刷する所謂スタンドアロン型プリンターである。画像ファイルは、静止画像ファイルに加えて、動画像ファイルを読み込むことができる。この場合、動画像ファイルの中から所望の静止画像を選択して印刷できる。また、このプリンター１０は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）４２のプリンタードライバーで生成された印刷データを入力し、入力したデータに基づいた印刷も可能である。更に、このプリンター１０は、印刷機能に加えて、スキャナー機能やコピー機能等を具備した多機能プリンターであっても良い。尚、本実施形態では、動画像ファイルが入力された場合を想定し、入力された動画像ファイルに対する処理について説明する。

ＲＭＣ１２は、図示しないコネクターを介してリムーバブルメモリー４０に接続され、このリムーバブルメモリー４０とＲＡＭ１６やフラッシュメモリー２６との間でデータ転送を制御する。リムーバブルメモリー４０は、カード型メモリーカードでもよいし、その他の繰り返し書き込み可能な不揮発性記憶媒体であってもよい。
外部Ｉ／Ｆ２２は、ＰＣ４２、デジタルビデオカメラ４４および図示を略したカメラ付携帯型電話端末などの外部システムと通信するためのＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）コントローラー、ＵＳＢコネクターなどを備える。通信規格はＵＳＢに限らず、ＩＥＥＥ１３９４、赤外線、イーサネット（登録商標）などの規格でもよい。

ＣＰＵ１４は、プリンター１０の各部を制御する中央制御部であり、フラッシュメモリー２６やＲＯＭ２４に格納されている制御プログラムを実行することにより、各部を制御して印刷を実行する。ＲＡＭ１６は、各種のプログラムやデータが一時的に格納される揮発性メモリーであり、フラッシュメモリー２６は、制御プログラム、色空間変換プログラムなど各種のプログラムやデータを記憶している不揮発性メモリーである。これら各種のプログラムやデータは、コンピューターで読み取り可能な記憶媒体からＲＡＭ１６やフラッシュメモリー２６に転送されてもよいし、遠隔地のサーバーから通信ネットワークを経由して、ＲＡＭ１６やフラッシュメモリー２６に転送されてもよい。

表示制御部１８は、図示を略したグラフィックコントローラーやＶＲＡＭ（Ｖｉｄｅｏ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等などを備え、この表示制御部１８に接続された液晶表示体などのディスプレー２０に対して表示信号を生成する。尚、ディスプレー２０に文字や画像を表示するために必要なフレームメモリー領域は、図示を略したＶＲＡＭに確保してもよく、また、ＲＡＭ１６の一部領域に割り当ててもよい。フレームメモリー領域に書き込まれたデータは、グラフィックコントローラーによって定期的に読み出され、ディスプレー２０に表示される文字や画像が更新される。

画像処理回路３４は、圧縮されているデジタル画像の伸張処理、γ補正、カラーマッチング、シャープネス補整処理・階調補整処理などの画像補整処理、分版処理、ハーフトーニング、インタレース処理などをＣＰＵ１４と協働して実行し、印刷データを生成する画像処理ＬＳＩである。なお、画像処理回路３４は、例えばＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）で構成されてもよい。また、これらの処理をＣＰＵ１４によるプログラム処理によって実行してもよい。

印刷制御部２８は、画像処理回路３４で生成された印刷データに基づいてインクジェット方式で用紙に画像を形成するための印刷ユニット３０の動作を制御する。この印刷ユニット３０は、記録ヘッド、記録ヘッドの往復移動機構、給排紙機構などを備える。尚、本実施形態１では、カラーインクジェット方式を採用するが、カラーに限定されるものでは無く、モノクロ専用のプリンターでも良い。また、印刷方式は、インクジェット方式に限定されず、レーザー方式、サーマル方式およびドットインパクト方式などのいかなる印刷方式でも良い。

操作部３２は、ユーザーのメニュー操作や印刷要求を受け付けるための操作ボタン、ジョグダイヤル、その他各種のボタンを備えている。所定のモードで特定のボタンが押されると、そのモードに応じた各種の要求がプリンター１０に入力される。

図２は、プリンター１０の機能構成を示すブロック図である。このプリンター１０は、動画像入力部５０と、静止画像切り出し部５２と、静止画像保存部５６と、静止画像分類部５８と、オブジェクト選択部６０と、画像表示部６４と、印刷対象画像選択部６６と、印刷部６８とを備える。また、静止画像切り出し部５２は、シーン切り替わり検出部５４を備え、静止画像分類部５８は、オブジェクト抽出部５９を備える。各機能部は、前記したハードウェア資源と、ＲＯＭ２４やフラッシュメモリー２６等に記憶された種々のソフトウェアとが有機的に協働することによりそれぞれの機能を実現している。

動画像入力部５０は、動画像のデータファイルが入力される。本実施形態では、このデータファイルは、リムーバブルメモリー４０やデジタルビデオカメラ４４等から入力され、ＭＰＥＧ規格のようなデータ圧縮のための規格に従い、動画像データが圧縮された様態を想定する。動画像入力部５０に入力されたデータファイルは、静止画像切り出し部５２に送られる。
静止画像切り出し部５２は、動画像入力部５０から送られるデータファイルに対してデータ伸張処理を必要に応じて施した後、動画像から静止画像のフレームを切り出す。本実施形態では、動画像データから切り出した静止画像に対して、シーン切り替わり検出部５４が順次切り出される静止画像からシーンの切り替わりを検出し、シーンが切り替わった静止画像データを静止画像保存部５６に記憶する。尚、シーン切り替わり検出部５４がシーンの切り替わりを検出する方法は、例えば、特開平９−１３０７３２号公報に開示されているシーンチェンジ検出方法等の公知の方法を採用できる。尚、静止画像を切り出すタイミングは、シーンの切り替わりのみに限定されるものではなく、動画像中に占めるオブジェクトの割合が一連のシーンの中で最大値となる場合や、所定の設定値を超えた場合を検出して併用しても良い。

静止画像分類部５８は、静止画像保存部５６に保存される静止画像データを読み込み、読み込んだ静止画像をオブジェクト毎に分類する。本実施形態では、オブジェクト抽出部５９が静止画像に写る被写体を識別し、識別した被写体をオブジェクトとして抽出する。オブジェクト抽出部５９が静止画像からオブジェクトを抽出する技術は、例えば、特開２００１−２７３４９３号公報に開示されているオブジェクト検索方法等の公知の方法を採用できる。オブジェクト抽出部５９が抽出したオブジェクトは、例えば、人物Ａ、人物Ｂ、自動車Ａ、自動車Ｂ・・・のように分類され、オブジェクト選択部６０および印刷対象画像選択部６６から参照される。尚、静止画像を分類するオブジェクトは、ユーザーにより予め指定されても良い。

オブジェクト選択部６０は、静止画像分類部５８が分類したオブジェクトの中から、少なくとも１つのオブジェクトがユーザーにより選択される。本実施形態では、オブジェクト選択部６０は、画像表示部６４にユーザーインターフェイスとして表示される。図３は、画像表示部６４に表示されるオブジェクト選択ウィンドウ７０の一例を示す。このオブジェクト選択ウィンドウ７０には、抽出されたオブジェクト名が分類されて抽出された枚数の多い順に表示され、オブジェクト名の右側には、それぞれのオブジェクトが抽出された枚数情報７４が表示される。また、枚数情報の右側には、抽出した画像を見るためのボタン７６が表示される。このボタン７６が押下された場合、図示を略したウィンドウが画像表示部６４に表示され、対応するオブジェクトの画像が順次表示される。この場合、対象のオブジェクトが動画の画面に現れるまで早送りで再生され、対象のオブジェクトが写っている間は通常の速度で再生される。その後、対象のオブジェクトが動画の画面から消えると再度早送りで再生されても良い。また、対象のオブジェクトが抽出され、動画として再生されても良い。

ユーザーは、所望のオブジェクト名を操作ボタン等で選択し、対応するチェックボックス７２をチェックしてＯＫボタン７８を押下することで、オブジェクトを選択できる。また、ユーザーがキャンセルボタン８０を押下すると、オブジェクトは選択されることなく終了する。また、オブジェクト選択部６０で選択されたオブジェクトに関する情報は、印刷対象画像選択部６６に送られる。

図２に戻り、印刷対象画像選択部６６は、オブジェクト選択部６０で選択されたオブジェクトを含む画像の中から、印刷を行う少なくとも１つの画像がユーザーにより選択される。選択された画像のデータは、印刷部６８に送られて印刷される。本実施形態では、印刷対象画像選択部６６は、画像表示部６４にユーザーインターフェイスとして表示される。図４は、画像表示部６４に表示される印刷対象画像選択ウィンドウ８２の一例を示す。この印刷対象画像選択部６６では、オブジェクト選択ウィンドウ７０で「人物Ａの画像」が選択されたことを想定し、静止画像分類部５８を参照して人物Ａの画像を収集し、このウィンドウに表示する。尚、表示される画像は静止画に限定されず、動画であっても良い。
ユーザーは所望の画像を操作ボタン等で選択する。選択された画像は、他の画像と区別可能に表示される。更に、ユーザーが印刷ボタン８６を押下することで、選択された画像に関するデータは印刷部６８に送られ、予め設定された印刷設定に従い、順次印刷される。また、ユーザーがキャンセルボタン８８を押下すると、オブジェクトは選択されることなく終了する。

次に、図５は、プリンター１０の処理の流れを示すフローチャートである。処理が開始されると、ＣＰＵ１４は、動画像データを読み込む（ステップＳ１００）。次に、ＣＰＵ１４は、静止画像を切り出す（ステップＳ１０５）。ここで、静止画像を切り出す処理の詳細を、図６に示すフローチャートに基づいて説明する。
最初に、ＣＰＵ１４は、動画像データから最初の１枚の静止画像を切り出す（ステップＳ２００）。次に、ＣＰＵ１４は、動画像データから次の１枚の静止画像を切り出す（ステップＳ２０５）。ここで、ＣＰＵ１４は、今回切り出した画像と、その前に切り出した画像とは撮影されているシーンが異なるか、否かを判定する（ステップＳ２１０）。

ここで、２つの画像のシーンが同じである場合（ステップＳ２１０でＮｏ）、ＣＰＵ１４は、動画像データから次の１枚の静止画像を切り出す工程（ステップＳ２０５）に戻る。他方で、２つの画像のシーンが異なる場合（ステップＳ２１０でＹｅｓ）、ＣＰＵ１４は、シーンが変化した静止画像を保存する（ステップＳ２１５）。続いて、ＣＰＵ１４は、全ての静止画像を切り出したか、否かを判定し（ステップＳ２２０）、全ての静止画像を切り出していない場合（ステップＳ２２０でＮｏ）、ＣＰＵ１４は、動画像データから次の１枚の静止画像を切り出す工程（ステップＳ２０５）に戻る。また、全ての静止画像を切り出した場合（ステップＳ２２０でＹｅｓ）、ＣＰＵ１４は、静止画像を切り出す工程（ステップＳ１０５）を終了する。

図５に戻り、ＣＰＵ１４は、静止画像をオブジェクト毎に分類する（ステップＳ１１０）。ここで、静止画像をオブジェクト毎に分類する処理の詳細を、図７に示すフローチャートに基づいて説明する。最初に、ＣＰＵ１４は、１枚の静止画像を読み込む（ステップＳ３００）。次に、ＣＰＵ１４は、読み込んだ静止画像からオブジェクトを検索する（ステップＳ３０５）。次に、ＣＰＵ１４は、読み込んだ静止画像にオブジェクトが含まれるか、否かを判定する（ステップＳ３１０）。ここで、読み込んだ静止画像にオブジェクトが含まれない場合（ステップＳ３１０でＮｏ）、ＣＰＵ１４は、１枚の静止画像を読み込む工程（ステップＳ３００）に戻る。他方で、読み込んだ静止画像にオブジェクトが含まれる場合（ステップＳ３１０でＹｅｓ）、ＣＰＵ１４は、読み込んだ静止画像を分類する（ステップＳ３１５）。
続いて、ＣＰＵ１４は、全ての静止画像を読み込んだか、否かを判定し（ステップＳ３２０）、全ての静止画像を読み込んでいない場合（ステップＳ３２０でＮｏ）、ＣＰＵ１４は、１枚の静止画像を読み込む（ステップＳ３００）に戻る。また、全ての静止画像を読み込んだ場合（ステップＳ３２０でＹｅｓ）、ＣＰＵ１４は、静止画像をオブジェクト毎に分類する（ステップＳ１１０）を終了する。

図５に戻り、ＣＰＵ１４は、分類した結果を表示する（ステップＳ１１５）。次に、ＣＰＵ１４は、オブジェクトがユーザーにより選択されたか、否かを判定する（ステップＳ１２０）。ここで、オブジェクトがユーザーにより選択されなかった場合（ステップＳ１２０でＮｏ）、一連の処理を終了する。他方で、オブジェクトがユーザーにより選択された場合（ステップＳ１２０でＹｅｓ）、オブジェクトを含む画像を表示する（ステップＳ１３０）。続いて、ＣＰＵ１４は、印刷する画像がユーザーに選択されたか、否かを判定する（ステップＳ１３５）。ここで、印刷する画像が選択されなかった場合（ステップＳ１３５でＮｏ）、一連の処理を終了する。他方で、印刷する画像が選択された場合（ステップＳ１３５でＹｅｓ）、ＣＰＵ１４は選択された画像を印刷し（ステップＳ１４０）、一連の処理を終了する。

以上述べた実施形態によれば、以下のような効果を奏する。
（１）動画像の中から抽出されたオブジェクトは、シーンごとに分類されて表示されるため、ユーザーは所望のオブジェクトが写った画像を容易に選択し、印刷することができる。

本発明の実施形態について、図面を参照して説明したが、具体的な構成は、この実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。例えば、抽出されたオブジェクトに関する情報や、選択されたオブジェクトが含む画像データは保存され、ユーザーの都合に合わせて後刻印刷しても良い。また、以上のような手法を実施する装置は、単独の装置によって実現される場合もあれば、複数の装置を組み合わせることによって実現される場合もあり、各種の態様を含むものである。

１０…プリンター、１２…ＲＭＣ、１４…ＣＰＵ、１６…ＲＡＭ、１８…表示制御部、２０…ディスプレー、２２…外部Ｉ／Ｆ、２４…ＲＯＭ、２６…フラッシュメモリー、２８…印刷制御部、３０…印刷ユニット、３２…操作部、３４…画像処理回路、３６…バス、４０…リムーバブルメモリー、４２…ＰＣ、４４…デジタルビデオカメラ、５０…動画像入力部、５２…静止画像切り出し部、５４…シーン切り替わり検出部、５６…静止画像保存部、５８…静止画像分類部、５９…オブジェクト抽出部、６０…オブジェクト選択部、６４…画像表示部、６６…印刷対象画像選択部、６８…印刷部、７０…オブジェクト選択ウィンドウ、７２…チェックボックス、７４…枚数情報、７６…ボタン、７８…ＯＫボタン、８０…キャンセルボタン、８２…印刷対象画像選択ウィンドウ、８６…印刷ボタン、８８…キャンセルボタン。

Claims (3)

1. 動画像が入力される動画像入力部と、
   前記動画像入力部に入力された前記動画像のシーン変化に基づいて静止画像を切り出す静止画像切り出し部と、
   前記静止画像切り出し部が切り出した前記静止画像を保存する静止画像保存部と、
   前記静止画像保存部に保存した前記静止画像が含むオブジェクトに基づいて、前記静止画像を分類する静止画像分類部と、
   前記静止画像分類部が前記静止画像を分類した前記オブジェクトの少なくとも１つが選択されるオブジェクト選択部と、
   前記オブジェクト選択部で選択された前記オブジェクトに基づいて分類された前記静止画像の少なくとも１つが選択される画像選択部と、
   前記画像選択部で選択された前記静止画像を印刷する印刷部と、を備えることを特徴とする印刷装置。
2. 請求項１に記載の印刷装置において、
   前記静止画像切り出し部は、前記動画像のシーンの切り替わりを検出し、シーンが切り替わった前記静止画像を切り出すことを特徴とする印刷装置。
3. 動画像が入力される動画像入力工程と、
   前記動画像入力工程で入力された前記動画像のシーン変化に基づいて静止画像を切り出す静止画像切り出し工程と、
   前記静止画像切り出し工程で切り出された前記静止画像を保存する静止画像保存工程と、
   前記静止画像保存工程で保存した前記静止画像が含むオブジェクトに基づいて、前記静止画像を分類する静止画像分類工程と、
   前記静止画像分類工程で前記静止画像を分類した前記オブジェクトの少なくとも１つが選択されるオブジェクト選択工程と、
   前記オブジェクト選択工程で選択された前記オブジェクトに基づいて分類された前記静止画像の少なくとも１つが選択される画像選択工程と、
   前記画像選択工程で選択された前記静止画像を印刷する印刷工程と、を有することを特徴とする印刷方法。

Images