JP4838777B2 - 画像処理装置、画像処理装置の制御方法、プログラム及び記憶媒体 - Google Patents

Description

本発明は、複数の画像で構成される合成画像を扱う画像処理装置、画像処理装置の制御方法、プログラム及び記憶媒体に関する。

近年、デジタルカメラの普及により、デジタルカメラで撮影した画像データを、自宅のパーソナルコンピュータやテレビジョン受信機で閲覧する機会が増えている。この場合、閲覧の方法として、ユーザ選択した１枚の画像データを表示する、または複数の画像データを一定時間で切り替え、順次複数の表示するスライドショー表示等が提案されている。

さらに、最近では、ユーザがより楽しく閲覧するために、スライドショー表示における画像データの表示方法として、複数の画像データを同時に表示する、切り換える、重ねる等といった複雑な表示機能を有するスライドショー表示も提案されている。下記の特許文献１においては、１つの画像データと、その画像データの１部を抽出した部分画像データを表示し、また印刷することが可能な画像形成プログラムに関する発明が開示されている。しかし、この特許文献１に開示された発明では、変化の伴わない固定された画像データの領域を指定し、表示装置や印刷媒体に表示または記録する。

また、複数の画像データが同時表示されている場合、静止状態の画像データを指定して表示または印刷することもすでに提案されている。
特開２００３−１９６２８３号公報

複数の画像データを同時に表示する、切り換える、重ねる等といった複雑な表示機能を有するスライドショー表示において、特定の画像データを指定して表示し、印刷したい要求がある。すなわち、ユーザはスライドショー表示の実行中であっても、スライドショー表示に含まれる複数の画像データの中から特定の画像データを指定し、表示や印刷を行えれば、印刷画像の指定が簡単になる。この場合、たとえその画像データが動的に変化している画像データであっても簡単に指定できれば、ユーザの使い勝手が向上する。

したがって、本発明の目的は、複数の画像データで構成された合成画像データから、特定の画像データを指定可能とし、表示や印刷を可能とするシステムを提供することである。

本発明の上記の目的を達成するため、本発明の実施形態における画像処理装置は、
複数の画像で構成される合成画像を、前記複数の画像のうちの１つ以上の画像を動的に変化させながら表示装置に表示させる表示制御手段と、
前記表示制御手段により前記表示装置に前記合成画像を表示している間に、出力指示を受け付ける受け付け手段と、
前記受け付け手段により前記出力指示を受け付けたタイミングで前記複数の画像のいずれかが変化中である場合は、当該変化の前のタイミングにおける前記合成画像と、前記変化の後のタイミングにおける前記合成画像とを、そのいずれかを出力すべき画像としてユーザが選択可能に表示する選択手段とを有することを特徴とする。

本発明の上記の目的を達成するため、本発明の他の実施形態における画像処理装置の制御方法は、
表示制御手段が、複数の画像で構成される合成画像を、前記複数の画像のうちの１つ以上の画像を動的に変化させながら表示装置に表示させる表示制御工程と、
受け付け手段が、前記表示制御工程により前記表示装置に前記合成画像を表示している間に、ユーザから出力指示を受け付ける受け付け工程と、
選択手段が、前記受け付け工程により前記出力指示を受け付けたタイミングで前記複数の画像のいずれかが変化中である場合は、当該変化の前のタイミングにおける前記合成画像と、前記変化の後のタイミングにおける前記合成画像とを、そのいずれかを出力すべき画像としてユーザが選択可能に表示する選択工程とを有することを特徴とする。

本発明の上記の目的を達成するため、本発明の、更に他の実施形態は、
コンピュータを本発明の画像処理装置の各手段として機能させるためのプログラムを提供する。

本発明の上記の目的を達成するため、本発明の、更に他の実施形態は、
コンピュータを本発明の画像処理装置の各手段として機能させるためのプログラムを記録したコンピュータが読み取り可能な記憶媒体を提供する。

本発明によれば、複数の画像データで構成された合成画像データの表示画面から、特定の画像データを指定可能とし、表示や印刷を実行することが可能となる。

以下、本発明の実施形態が適用された画像処理装置に関し、テレビジョン放送受信装置（以下ＴＶ受信装置とする）１００を例として説明する。

図１は、本発明の実施形態１に係る画像処理装置であるＴＶ受信装置１００にプリンタ装置２００が接続されたシステムの概略図である。ＴＶ受信装置１００は、アンテナ１８０を備え、放送局よりの放送信号を受信し、映像信号、音声信号その他の情報信号を取得する。そして、これら映像信号、音声信号その他の情報信号を、ＬＣＤパネルまたはＣＲＴなどの表示部１１０（詳細は後述する）、さらにはスピーカなどの音声出力部１１１に出力する。基本的に、ＴＶ受信装置１００は、リモコン装置１５０からの信号で、各種の制御が行われる。勿論、場合によっては、アンテナ１８０を使用することなく、ケーブルＴＶ会社のケーブルから放送局の放送信号を受信することもありうる。

また、表示部１１０は、放送の映像を表示することのみならず、他のＡＶ機器の映像信号、後で述べるメモリに蓄積された画像信号の表示や、リモコン装置１５０を使用する各種の制御のユーザインタフェースとして使用される。したがって、接続されたプリンタ装置２００での印刷制御の際にも、ユーザインタフェースとして使用される。ＴＶ受信装置１００とプリンタ装置２００はＵＳＢケーブル１４０で結合される。ＴＶ受信装置１００とプリンタ装置２００との結合は、有線でも無線でも実施可能である。有線の例ではＵＳＢ接続が考えられ、無線でのの例では無線ＬＡＮ接続やＩＲ通信接続が考えられる。図示の例では、ＴＶ受信装置１００とプリンタ装置２００はＵＳＢケーブル１４０で接続される。また、ＴＶ受信装置１００は、ネットワークケーブル１４５およびルータ１４６を介してインターネットへ接続されている。したがって、ＴＶ受信装置１００はインターネットの情報も閲覧可能に構成されている。なお、プリンタ装置２００もネットワークケーブル１４５を介して接続してもよい。

次にＴＶ受信装置１００の回路ブロックについて、図２の機能ブロック図を参照して詳細に説明する。
図２は、本発明の実施形態１として構成されたＴＶ受信装置１００の回路構成を説明する機能的なブロック図である。図２において、１０１はチューナ部であって、受信したテレビジョン放送（以下ＴＶ放送）の高周波信号を増幅し、受信したい放送チャンネルの選局を行い、復調して、映像／音声番組データ、各種データ等が混合されたＴＳデータを出力する。

また、１０２はデータ分離部であって、チューナ部１０１から出力されるＴＳデータを、映像／音声番組データと、後述する番組情報データ、データ放送データ（データ放送コンテンツ、各種メタデータ、制御文書、その他データ放送用データ）等に分離する。分離された映像／音声番組データは、後述するＡＶデコーダ部１０３へ供給され、その他の番組情報データとデータ放送データは、内部バス１０４を通じてメモリ部１０５へ出力される。

ＡＶデコーダ部１０３は、データ分離部１０２から供給された映像／音声番組データや、メモリ部１０５から内部バス１０４を通じて供給される、ＭＰＥＧ等でエンコードされた映像／音声データをデコードする。

ＡＶデコーダ部１０３から出力される音声データは音声制御部１０７に供給され、必要に応じて他の音声データと混合された後、音声出力部１１１から音として出力される。また、ＡＶデコーダ部１０３から出力される映像データは、表示合成制御部１０８で、重畳される他の映像データ、文字データ、グラフィックデータ等と合成された後、表示部１１０で表示される。

音声制御部１０７では、ＡＶデコーダ部１０３からの音声データと、内部バス１０４からの音声データを切り替え、あるいは合成し、又、音量、音質、臨場感などを制御して音声出力部１１１へ出力する。

表示合成制御部１０８では、ＡＶデコーダ部１０３よりの映像番組データと、グラフィック制御部１０９で生成されたデジタルカメラ等の画像データを、システム制御部１１２の制御に基づき処理する。すなわち、表示合成制御部１０８では、複数の画像データの切替え、合成、拡大／縮小、その他各種変換や補正等を行い、表示部１１０へ出力する。

グラフィック制御部１０９は、データ放送画面、このＴＶ受信装置１００内のデジタルカメラの閲覧のためのアプリケーション画面、メッセージ等のＧＵＩ画面等を後述するシステム制御部１１２の制御に基づき生成する。

表示部１１０は、表示合成制御部１０８より出力される映像／画像データを表示し、たとえば解像度１９２０×１０８０画素、フレームレート６０Ｈｚ、サイズが５０インチの性能を有する大画面、高画質表示が可能な表示装置を含む。

メモリ部１０５は、データ分離部１０２で分離されたデータ放送コンテンツ、番組情報データ等の一時保存等を行う。さらに、このＴＶ受信装置１００でのスライドショー表示、あるいは印刷するためのデジタルカメラ画像の展開データ、表示データテーブル、表示状態テーブル、印刷候補バッファ、その他の制御データの一時保存等を行う。また、システム制御部１１２がプログラム実行のために使用するワークメモリとしても使用される。

１１３はデータ蓄積部であって、たとえばＨＤＤ装置で構成され、受信した映像／音声番組データや、メモリカード１１５に蓄積されているデジタルカメラの画像データ等の保存にも使用される。また、スライドショー表示中に印刷のための指定（以後、印刷ブックマークという）された印刷候補としての印刷候補リストもデータ蓄積部１１３に保存される。さらに、ＯＳＤ（On Screen Display）、ＧＵＩ（Graphical User Interface）をはじめとする、表示データ等も保存されている。

１１６はインタフェース部であって、プリンタ装置２００を接続し、各種データの印刷を行う時に、プリンタ装置２００にデータを転送するものである。

１１４は外部メモリ接続部であり、デジタルカメラ等のメモリカード１１５を接続するためのコネクタ部で構成される。

メモリカード１１５は、デジタルカメラ等の画像データの蓄積に使用される半導体の不揮発性メモリから構成され、ＴＶ受信装置１００において、スライドショー表示や、印刷を行うためのデジタルカメラ等の画像データが蓄積されている。

１１７は、インターネット接続部であり、たとえば、ルータ１４６を介してインターネットと接続し、放送局サーバ、課金サーバ等と接続することで各種データの送受信を行う。勿論、その他各種のインタネット情報の閲覧等も可能である。

１１８は、リモコン制御部であって、赤外線を利用したリモコン送受信をリモコン装置１５０との間で行い、受信データをシステム制御部１１２に転送する。

システム制御部１１２は、ＴＶ受信装置１００内の各部を統括的に制御する。 このシステム制御部１１２は、ＣＰＵ、主記憶メモリ、バス制御部、プログラム格納メモリ、パラメータ保存メモリ、ＩＤ保存メモリ、時計部、タイマ部等から成る。そして、チューナ部１０１、データ分離部１０２の制御により受信チャネルの切り替えを行い、所望の放送局からの信号を受信するように制御する。

また、システム制御部１１２は、映像／音声番組データ、番組情報、データ放送データ等を分離し、番組を表示するとともに、データ放送、ＥＰＧ（Elctronic Program Guide）データの生成を行う。さらに、グラフィック制御部１０９を制御し、データ放送、ＥＰＧ等の表示を行うように制御する。さらに、メモリカード１１５よりデジタルカメラ等の画像データを読み出し、スライドショー表示されるように制御する。この詳細については後述する。

また、ＴＶ受信装置１００内の他のアプリケーションの表示、メッセージ、操作パネル等の表示の制御も行う。デジタルカメラ等の画像データの印刷の要求があると、インタフェース部１１６に接続したプリンタ装置２００を認識して制御し、要求された画像データを印刷する。

さらにシステム制御部１１２は表示合成制御部１０８を制御し、ＡＶデコーダ部１０３よりの映像データと、グラフィック制御部１０９等よりの画像データの合成、補正等の各種情報表示処理等を行い、表示部１１０へ表示する。同様に、システム制御部１１２は音声制御部１０７を制御し、音声の合成や出力の制御を行い、音声出力部１１１への出力の制御を行う。また、ユーザである視聴者の操作するリモコン装置１５０とのデータの送受信を制御し、該データに基づき、ＴＶ受信装置１００内の制御を行う。内部バス１０４は、データ並びに制御バスであり、前述してきたように、画像データ、音声データの転送、各部間の情報の転送に使用されるＴＶ受信装置１００内に設けられたバスである。

図３は、本発明の実施形態であるＴＶ受信装置１００と共に使用されるリモコン装置１５０の操作面の詳細を示している。リモコン装置１５０のキーボタンは、電源キー１５１、音量キー１５２、チャネルキー１５３等、通常のＴＶ視聴時に使用するキーを備える。さらに、データ放送への移行に使用するデータ放送キー１５４（以後“ｄキー”と略す）、ＴＶ受信装置１００のアプリケーション操作用の、メニューキー１５５、データ放送、アプリケーション等のボタンを備える。またさらに、ＧＵＩや、操作パネル等の操作を行うためのカーソル及び決定キー、取り消しキー１５６を具備する。また、１５７Ｒ乃至１５７Ｂは、赤キー、黄キー、青キー、緑キーであり、ＴＶ受信装置１００でファンクションキーとして使用されるカラーキーである。本実施形態のＴＶ受信装置１００では、スライドショー表示や、印刷画像の設定にも使用される。

赤キー１５７Ｒは、スライドショー表示の稼動中、印刷ブックマークを行うキーとして使用するが、切り替えにより、直接印刷メニューを起動するように切り替えが可能である。また、リモコン装置１５０は表示部１６０を具備し、時刻や各種のメッセージの表示を行う。リモコン装置１５０は、ＴＶ受信装置１００のリモコン制御部１１８を通じてキーコードを転送する。

図４は、スライドショー表示の稼動中の画面であり、後述する、短冊型スライドショー表示が表示部１１０で実行されている画像である。図においては、短冊状の４つの画像データＡ、Ｂ、Ｃ及びＤが表示されている。また、この短冊状の４つの画像データＡ、Ｂ、Ｃ及びＤの下側には、リモコン装置１５０で操作可能なユーザインタフェースが表示される。これにより、スライドショー表示の稼動中における赤キー１５７Ｒ、黄キー１５７Ｙ、青キー１５７Ｂ及び緑キー１５７Ｇの機能が表示されている。

図５は、ＴＶ受信装置１００のシステム制御部１１２の制御部別のソフトウエアの階層構造を示した図である。５０１はＯＳを含む基本システム制御部であり、他の制御部は基本システム制御部５０１の管理の元に、スライドショー表示制御部５０２、印刷候補作成部５０３、印刷制御部５０４および他の制御部５０５が動作する階層構造となっている。

スライドショー表示制御部５０２は、視聴者よりの操作および設定に基づき、後述する表示データテーブルを生成し、それに基づき後述する表示状態テーブルを生成する。印刷候補作成部５０３は、スライドショー表示中に受け付けた、視聴者からの出力指示である印刷ブックマークの操作に基づき印刷候補リストを生成し、データ蓄積部１１３に保存する。印刷制御部５０４は、視聴者よりの操作に基づき前記印刷候補リストより印刷画像データを選択する。そして、インタフェース部１１６を通してプリンタ装置２００を制御し、視聴者の要求するメモリカード１１５に蓄積されたデジタルカメラ等の画像データを印刷する。

他の制御部５０５は、ＴＶ放送の受信、データ放送の制御、通信制御、表示制御、リモコン制御等を含むＴＶ受信装置１００その他のすべての制御部を含むものである。

前述のスライドショー表示も、この他の制御部５０５内にある表示制御部が、上記表示状態テーブルに基づき、メモリカード１１５に蓄積された画像データを読み出し、表示画像データとして展開する。そして、グラフィック制御部１０９、表示合成制御部１０８を制御し、スライドショー表示を制御する。

図６は表示データテーブルであって、スライドショー表示を行う際の、表示する画像データと表示情報、制御情報、印刷設定情報が一括記述されている。表示データテーブルは、図６（ａ）のスライドショー表示の共通表示情報６０１と、図６（ｂ）の各画像データの個別表示情報６０２を含む。共通表示情報６０１は、画像の表示形態、表示間隔、表示順、遷移効果および印刷モードの５つの項目からなる。これらは、スライドショー表示の開始前に、ユーザがリモコン装置１５０を使用して設定した内容が反映されている。

スライドショー表示の表示形態には、１画面に１枚の画像を順次表示してゆく、通常スライドショー表示の他に、２枚毎、４枚毎の短冊スライドショー表示、ランダム重ね型スライドショー表示等が考えられる。短冊型スライドショー表示とは、ひとつの画像データを適宜切り出し、図４で説明したように短冊状に並べて表示してゆく表示形態である。

本発明の実施形態１では、後述する図７（ｃ）で示す表示状態７０３のように、表示部１１０の表示画面を縦４つに分割し、画像Ａから順に表示する。４枚全て表示されると、次の画像が最初の画像に重なるように表示されるような短冊型スライドショー表示の動作を行う場合で説明する。ランダム重ね型スライドショー表示とは、後述する図８（ｃ）の右側で示す表示状態８０３ように、複数の画像が、画面全体にちりばめるように表示する表示形態であり、各画像の表示位置はスライドショー表示制御部５０２で適宜算出して、決定される。

また、これらの表示間隔は、スライドショー表示で次の画像を表示開始するまでの時間間隔であり、その間は表示が一時的に停止状態となる。表示間隔はユーザが好みに応じ設定する。本発明の実施形態では、３秒の設定としてある。表示順は、スライドショー表示させたい画像の表示順を、ファイル名順、撮影日時順又はランダムの中から選択できる。

遷移効果とは、現在の表示に対し、次の画像を表示する際の画像の出現の仕方であり、本発明の実施形態では、スライドイン、ディゾルブ、ワイプ等が用意されている。

印刷モードは、スライドショー表示全体に関わる設定として、表示だけでなく、スライドショー表示中に印刷のための印刷ブックマークを行う際、印刷候補画像を自動選択するための設定モードである。これは印刷候補選択モード１、印刷候補選択モード２、ダイレクト印刷モードの３つの印刷モードからの選択が可能である。

ここで、印刷候補選択モード１は、ユーザの印刷したい画像が印刷ブックマークボタンの押下時に表示されている画像の中にある、という想定に基く。そして印刷ブックマーク時、スライドショー表示が動的に変化中でなければ、その合成画像を構成している各画像とスライドショー表示全体（合成画像）が印刷候補となる。また、スライドショー表示が動的に変化中である場合は、変化前後の各スライドショー表示を構成している各画像とスライドショー表示全体を印刷候補とする。
すなわち、動的な変化により、新たに追加表示された画像を含む合成画像と、動的な変化の前の合成画像であって、この追加表示された画像を含まない合成画像とを印刷候補に含める。

印刷候補選択モード２は、上記の印刷候補選択モード１に加え、印刷ブックマーク時、表示を構成している各画像が１枚でも含まれている、現在のスライドショー表示以外のスライドショー表示全体の中にもある、という想定に基づき候補の選択を行っている。すなわち、出力指示である印刷ブックマークボタンの押下を受け付けたタイミングで『見えている』各画像が含まれている他のスライドショー表示すべても印刷候補とするというものである。この場合、印刷ブックマークボタンの押下を受け付けたタイミングより前のスライドショー表示画像だけを印刷候補とするものではない。すなわち、印刷ブックマークボタンの押下を受け付けたタイミングの後、さらにスライドショー表示が進み、印刷ブックマーク時に表示されていた画像がすべて『隠され見えなくなる、あるいは消滅する』までのスライドショー表示画像も印刷候補とする。

ダイレクト印刷モードは、出力指示としてのブックマークのキー押下を受け付けた時点で、スライドショー表示を一時停止し、直前の画像とそれに含まれる画像を印刷候補とし、印刷メニュー画面を起動し、印刷を行うモードである。

一方、表示データテーブルの各個別画像の個別情報としては、図６（ｂ）の６０２に示すように、画像のファイル名、保存場所、各個別画像の表示順、切出位置、切出サイズ、表示の際の他画像との重なり、表示位置、画像の回転角度、倍率が画像毎に記載されている。これらの設定は、スライドショー表示の開始前に、ユーザがリモコン装置１５０を使用して入力した表示形態の設定と、表示するために選択された画像に基づき、スライドショー表示制御部５０２で算出されたものである。

図７（ｂ）及び（ｃ）は、短冊型スライドショー表示の場合の表示状態テーブル７０２と表示画面の表示状態７０３を並べたものである。表示状態テーブル７０２とは、個別表示情報６０２の中で、現在表示に関わっている画像（他の画像の下になり、全く表示されていない画像以外の画像すべて）とその状態が記述される。そして、図７（ｂ）の表示状態テーブル７０２に表示変化と表示状態の項目が追加された状態になる。この表示状態テーブル７０２にしたがってスライドショー表示のひとつの画像が生成される。尚、図７（ａ）は、スライドショー表示の共通表示情報である。

図７（ｂ）の表示状態テーブル７０２において、表示変化とは、表示が変化の動作中であるかどうかを示している。表示変化の項が“Ｃ”の場合は、『表示が変化中である』ことを示している。『表示が変化中である』とは、『画像がないところから表示されつつある』、『見えている画像が消去されつつある』、『見えている画像が他の画像の表示により重ねられて見えなくなりつつある』の場合である。また、表示変化の項が“Ｆ”の場合は、『表示が変化していない』ことを示している。

さらに、表示状態とは、スライドショー表示の合成画像を構成しているある個別画像が、画面上に表示されているかどうかを以下の基準により決定している。すなわち、表示状態の項が“Ｖ”である場合、該個別画像が『見えている』状態にある。この『見えている』状態とは、その表示状態テーブル７０２に基づく表示画面（表示変化中の場合は、変化動作が終了した時点の表示画面）において以下のようにする。すなわち、画像の顔部分の一定以上（本実施形態では２０％以上）が表示されている、あるいは画像全体の一定以上（本実施形態では５０％以上）が表示されている、という基準で判定する。

また、表示状態の項が“Ｈ”である場合は、画像が『他の画像により隠され、あるいは消滅し見えない』状態であり、上記の『見えている』以外の場合をいう。

図７（ｂ）の表示状態テーブル７０２は、スライドショー表示表示が開始されると、スライドショー表示制御部５０２によって、ＴＶ受信装置１００内のメモリ部１０５に生成される。そして、スライドショー表示制御部５０２により動的な表示変化のある毎に書き換えられる。したがって、常に最新の表示状態を示すようになっており、表示合成制御部１０８は、この表示状態テーブルに沿って、表示部１１０での表示を制御する。

図７（ｂ）では、表示のないところから、Ｄ１の時点で画像Ａの表示が開始され、Ｄ１０時点の画像Ｆまでが全て表示された状況までの表示状態テーブル７０２と、図７（ｃ）では、その際の画面の表示状態７０３を表している。Ｄ１、Ｄ３、Ｄ５、Ｄ７およびＤ９の時点における斜線の入った画像は表示変化中の画像（表示変化“Ｃ”）であることを示している。その他、図７（ａ）の共通表示情報７０１で示されるように、表示間隔３秒、表示順はファイル名順、遷移効果はスライドイン、印刷モードは、印刷候補選択モード１に設定されている。従って、Ｄ２，Ｄ４及びＤ８の時点から、次に新たな画像Ｂ，画像Ｃ，画像Ｆの追加表示が開始されるまで、３秒間、動的な表示が一時的な停止状態となる。

図８（ａ）〜（ｃ）は、共通表示情報８０１、ランダム重ね型スライドショー表示の表示状態テーブル８０２と表示画面の表示状態８０３を示したものである。

本実施形態では、Ｄ’１の画像Ａおよび画像Ｂが表示された状態の時点から開始し、Ｄ’１１の画像Ｉが表示された時点までの合成画像を示している。このランダム重ね型スライドショー表示においても、前述と同様、図８（ｂ）の表示状態テーブル８０２が作成される。図７（ｃ）と同様に、斜線の入った画像は変化中の画像（表示変化“Ｃ”）であることを示している。図８（ｃ）では、Ｄ’７時点以降は、画像が『表示が変化中である』状態は、図面で表現し難いので省略してある。

図９の（ａ）乃至（ｄ）は、図７（ｃ）の短冊型スライドショー表示の動作中、Ｄ４、Ｄ５、Ｄ６およびＤ９の時点の表示状態において、ユーザが印刷ブックマークボタンを押下した場合に、印刷候補画像として印刷候補リストへ登録される画像を示している。すなわち、Ｄ４時点で印刷ブックマークボタンを押下した場合は、画像Ａ、画像Ｂ及び画像Ａと画像Ｂの合成画像が印刷候補画像となることを示している。実際の画像Ａと画像Ｂの合成画像は、表示部１１０の左半分に表示されているが、印刷では幅方向にのばされた合成画像が印刷候補画像となる。したがって、Ｄ４時点で３枚、Ｄ５時点で５枚、Ｄ６時点で４枚さらにＤ９時点で７枚の印刷候補画面が登録されることとなる。

図１０は、図７（ｃ）のＤ４およびＤ９の２つの時点の表示時に印刷ブックマークボタンを押下し、スライドショー表示を終了させた後、印刷を行う操作の際に、ＴＶ受信装置１００の表示部１１０に表示される画像の例を示す。ここでは、Ｄ４時点及びＤ９時点で登録された印刷候補画像が印刷すべき画像の選択肢としてユーザに選択可能なように一覧表示される。

図１１の（ａ）乃至（ｄ）は、図８（ｃ）のランダム重ね型スライドショー表示の動作中、Ｄ’1、Ｄ’５、Ｄ’６およびＤ’８の時点の表示状態で、印刷ブックマークボタンを押下した場合に印刷候補画像として印刷候補リストへ登録される表示画像を示している。

図１２は、前記の、図８（ｃ）のＤ’1、Ｄ’８の表示の際に、２回印刷ブックマークボタンを押下して登録され、表示部１１０に表示された印刷候補画像の一覧画像である。

次に、本実施形態で使用されるテーブルに関するバッファメモリに関して説明する。印刷候補バッファは、印刷候補として可能性のある表示状態テーブルを一時保存しておくためのものであり、スライドショー表示制御部５０２により、メモリ部１０５に生成される。また表示画像リストは、スライドショー表示画像の中で、前述、『見えている』と判断されている個別画像（表示状態“Ｖ”のもの）を、印刷候補画像を登録しておくリストである。これは、印刷ブックマークボタンが押下された際に、必要に応じデータ蓄積部１１３に生成され、印刷候補画像表示時、印刷候補リストと共に使用される。 さらに印刷候補リストは、印刷候補作成部５０３により、印刷候補となる画像を含む表示状態テーブルを前記の印刷候補バッファより選択して保存しておくためのものであり、データ蓄積部１１３に生成され、印刷の際に使用される。

＜実施形態１＞
次に、短冊型スライドショー表示を使用した場合の動作に関して、図７と、図１３乃至図１５を用いて、実施形態１の動作を説明する。

ユーザがスライドショー表示の表示形態、遷移モード、表示間隔といった前述のパラメータと画像データをリモコン装置１５０を使用して設定した後に、スライドショー表示が実行される。図１３はスライドショー表示の制御の動作の流れを示す。

処理の開始後、ステップＳ１３０１で、スライドショー表示制御部５０２は設定値の確認を行い、ステップＳ１３０２で表示データテーブルを生成する。かくして生成された表示データテーブルに基づき、ステップＳ１３０２で、表示制御のため表示状態テーブルを生成する。そして、ステップＳ１３０３で、共通表示情報７０１における表示間隔に基づいて書き換えタイミングかどうかを判断し、書き換えタイミングであれば、ステップＳ１３０４に進み、書き換える。書き換えタイミングでなければ、書き換えタイミングになるまで待つこととなる。従って、この間は動的な表示が一時的な停止状態となる。

次に、ステップＳ１３０５で、書き換えた表示状態テーブルが“表示変化”の状態を調べ、“表示変化がない”場合、すなわち、『表示変化“Ｆ”』のみの表示状態テーブルである場合、ステップＳ１３０６に進む。そして、表示状態テーブルを印刷候補バッファにも保存する。しかし、表示変化のある場合、すなわち『表示変化“Ｃ”』がひとつでもある場合は、印刷候補バッファへの保存は行わない。表示状態テーブルを印刷候補バッファに保存した後、ステップＳ１３０７に進み、スライドショー表示が終了かどうかを判断する。もし終了でない場合には、ステップＳ１３０２に戻り、次の表示の書き換えタイミングを判断し、ステップＳ１３０４で『次の表示状態テーブル』に書き換えることとなる。そして、ステップＳ１３０６にて『次の表示状態テーブル』を印刷候補バッファに追加保存してゆく。この一連の処理が、スライドショー表示が終了するまで行われる。

スライドショー表示の表示は、他の制御部５０５内の表示制御部が、表示状態テーブルが書き換えられたことを検知し、該表示状態テーブルに基づき、表示制御を行いスライドショー表示表示を行ってゆく。

図１４は、印刷候補作成部５０３の動作の流れであり、この処理ルーチンは、スライドショー表示が開始されると、処理を開始し、まずステップＳ１４０１で印刷ブックマークボタン（たとえば、リモコン装置１５０の赤キー１５７Ｒ）が押下されるのを待つ。

ここで、スライドショー表示を鑑賞しているユーザが、印刷画像登録のため、印刷ブックマークボタン（赤キー１５７Ｒ）を押下すると、出力指示として受け付けられる。そして印刷候補作成部５０３は、ステップＳ１４０２でスライドショー表示の設定値を確認する。そして、ステップＳ１４０３で印刷モードが印刷候補選択モード１と判断された場合は、ステップＳ１４０４で印刷バッファに登録された最新の表示状態テーブルを印刷候補リストに登録する。次にステップＳ１４０５に進み、現在の表示状態が“表示変化”中であるかどうかを調べる。そして“表示変化”中であれば、ステップＳ１４０６に進み、表示状態テーブルから印刷バッファへの保存動作の発生を待つ。ここで、保存動作が発生した場合は、ステップＳ１４０７に進み、その保存された表示状態テーブルを印刷候補リストに登録する。登録後、ステップＳ１４０８に進み、スライドショー表示が終了しているかどうかを確認する。終了でなければ、ステップＳ１４０１へ戻り、次の印刷ブックマークボタン押下を待つ。

ステップＳ１４０５で、“表示変化”中でない場合も、ステップＳ１４０８に進み、スライドショー表示が終了しているかどうかを確認し、終了でなければ、ステップＳ１４０１へ戻り、次の印刷ブックマークボタン押下を待つ。また、ステップＳ１４０３の判断で、印刷候補選択モード１でない場合には、ステップＳ１４０９に進み、別のモードの処理を行う。

なお、この動作ルーチンのステップＳ１４０１以外のタイミングで印刷ブックマークボタンが押下された場合はいつでも、ステップＳ１４０１へ戻り、動作を再開する。このようにして、スライドショー表示の鑑賞と印刷したい画像の選択が進んでゆく。

図１５は、印刷を行う際の動作ルーチンの動作の流れである。印刷したい画像の選択の終了後スライドショー表示を終了し、ユーザはスライドショー表示で印刷ブックマークをした画像を印刷するため、リモコン装置１５０を使用して、ステップＳ１５０１でメニュー画面を開き、印刷メニューを表示する。さらに印刷候補の一覧の表示をボタンを押下すると、ステップＳ１５０２に進み、印刷候補の一覧の表示を行い、さらにステップＳ１５０３に進んで、印刷候補リストより印刷状態テーブルを調査し、印刷候補画像を決定する。

ここで、いくつかのタイミングで、印刷ブックマークボタンを押下した際の、印刷候補の決定に関して図９で説明する。

図９（ａ）〜（ｄ）は、図７（ｃ）の、Ｄ４、Ｄ５、Ｄ６およびＤ９の時点で印刷ブックマークボタンを押下した場合の各印刷候補画像である。Ｄ４、Ｄ５およびＤ９の右側の★印がついている画像は、印刷ブックマークボタンを押下したタイミング時のスライドショー表示画像であり、×をつけて説明のため記載したが、印刷候補画像とはされない合成画像である。

先に説明したように、図９の（ａ）は、図７（ｃ）のＤ４の時点で印刷ブックマークボタンが押下された場合である。この場合、まずＤ４の時点での最新の印刷候補バッファの内容（図７（ｃ）のＤ４の時点の表示状態テーブル７０２）が印刷候補リストに保存される。このＤ４の時点は、表示変化がないタイミングである。したがって、印刷候補バッファの再度の保存を待たず、このＤ４の時点の表示状態テーブル７０２内の個別画像、画像Ａ、画像Ｂと該表示状態テーブル７０２より構成されるスライドショー表示の画像Ａと画像Ｂの合成画像が印刷候補となる。

この場合、スライドショー表示の合成画像をそのまま印刷候補するのであれば、右の×印の画像になる。しかし、短冊型スライドショー表示の場合、この画像では、全体のバランスが悪いので、合成画像を全体に横に引き伸ばした合成画像をスライドショー表示の合成画像に対応した印刷候補画像とする。

図９の（ｂ）は、図７（ｃ）のＤ５の時点で印刷ブックマークボタンが押下された場合である。この場合、まずＤ４の時点での最新の印刷候補バッファの内容（図７（ｃ）のＤ４の時点の表示状態テーブル７０２）が印刷候補画像リストに保存される。このＤ５の時点は、表示変化中のタイミングであるので、次のＤ６の時点の表示状態テーブル７０２の印刷候補バッファへの保存を待ち、保存された最新の印刷候補バッファの内容（図７（ｃ）のＤ６の時点の表示状態テーブル）も、印刷候補画像リストに登録される。

このＤ６の時点に対応する印刷候補画像が図９（ｃ）であり、図７（ｃ）のＤ５の時点の印刷候補画像は、前記のＤ４の時点と、Ｄ６の時点の印刷候補画像のどちらかに含まれる画像となる。すなわち、図９（ｂ）のようになり、印刷ブックマークボタンを押下した時点の表示変化中の画像（図９（ｂ）の右の×印の画像）は印刷候補とはならない。

図９（ｄ）は、図７（ｃ）のＤ９の時点で印刷ブックマークボタンを押下した場合の、印刷候補画像である。この場合も前述と同様、印刷ブックマーク押下時点のスライドショー表示の合成画像は印刷候補とはせず、その前後のＤ８およびＤ１０の時点表示の変化のないスライドショー表示の合成画像とそれを構成する個別画像となる。

図１０は、図７（ｃ）のＤ４とＤ９の時点で印刷ブックマークボタンが押下された場合の印刷候補画像を一括して表示した画像をＴＶ受信装置１００の表示部１１０に表示した場合の画像である。

このようにして、ステップＳ１５０２では、図１２に示すように、決定された印刷候補画像を出力すべき画像の選択肢として、ユーザによって選択可能なように一覧表示する。ここから、ステップＳ１５０３に進んで、印刷候補画像と印刷枚数を選択する。こうして印刷画像が決定されると、印刷開始ボタンに割り当てられているリモコン装置１５０の赤キー１５７Ｒを押下し、ステップＳ１５０４で印刷を行う。この際、印刷の詳細を設定したい場合は、リモコン装置１５０の黄色キー１５７Ｙにより詳細項目を選択する。

＜実施形態２＞
実施形態１においては、印刷ブックマークボタンの押下時に『見えている』個別画像、あるいはその前後のスライドショー表示画像と『見えている』個別画像を印刷候補画像とした。しかし、実施形態２では、図８（ｃ）に示したランダム重ね型スライドショー表示の際に、印刷候補選択モード２を適用した場合に関して、図１６の動作の流れとともに説明する。

本実施形態２の動作は、印刷ブックマークボタン押下時に『見えている』個別画像が含まれている他のスライドショー表示の画像のすべても印刷候補とする例である。

この場合、印刷ボタン押下以前だけでなく、印刷ボタン押下後、さらにスライドショー表示が進み、印刷ボタン押下直後に『見えている』個別画像がすべて『隠され見えなくなる、あるいは消滅する』までのスライドショー表示の画像も印刷候補とする。

まず、スライドショー表示が進み、ある時点でユーザが、リモコン装置１５０を使用して印刷ブックマークボタンを押下する。処理の開始後、ステップＳ１６０１でその印刷ブックマークボタンを押下を検出すると、ステップＳ１６０２で、スライドショー表示の設定内容を確認する。その後、ステップＳ１６０３に進み、印刷候補の決定の選択モードを調べる。もし、印刷候補の決定の選択モードが印刷候補選択モード２であれば、ステップＳ１６０４に進み、印刷候補バッファの最新表示状態テーブルを印刷リストに登録する。しかし、印刷候補選択モード２でなければ、ステップＳ１６１１において他の処理を行う。

印刷候補選択モード２の場合には、ステップＳ１６０４の登録処理の後、ステップＳ１６０５に進む。そして、表示状態テーブルより、前述した『見えている』個別画像を調査し、表示画像リストへ登録する。さらに、ステップＳ１６０６では、印刷候補バッファ内の他のすべての表示状態テーブルより生成されるスライドショー表示画像に、上記表示画像リストに登録した個別画像が『見えている』状態にあるかどうかを調べる。そして、１枚でも『見えている』状態にある表示状態テーブルはすべて印刷候補バッファに登録する。

次に、ステップＳ１６０７に進み、現在のスライドショー表示が『表示が変化中』であるかどうかを調査し、『表示が変化中』である場合は、スライドショー表示制御部５０２よりの印刷候補バッファへの保存があったかどうかをステップＳ１６１２で調べる。そして、保存があった場合、ステップＳ１６１３に進み、印刷バッファへ保存された最新の表示状態テーブルを印刷候補リストへ加える。さらに、ステップＳ１６１４に進み、見えている』個別画像を検知し、該個別画像を表示画像リストへ追加登録する。そして、この後、印刷候補バッファへの保存があったかどうかをステップＳ１６０８で調べ、保存があった場合、ステップＳ１６０９に進む。ステップＳ１６０９では、印刷候補バッファへ保存された最新の表示状態テーブルに、表示画像リスト内の『見えている』個別画像が表示されているかどうかを調べる。そして１枚でも表示されている個別画像がある場合は、ステップＳ１６１５に進んで、印刷候補バッファへ追加する。ステップＳ１６０７で、『表示が変化中』でない場合も、上記と同様の動作をする。

そして、ステップＳ１６０８に戻り、再度印刷候補バッファへの保存を待つ。そして表示状態テーブルに個別画像が検知されなくなると、スライドショー表示が終了かどうかをステップＳ１６１０で調べる。もし終了でなければ、印刷ブックマークボタンの検出のステップＳ１６０１へ戻る。

なお、該ランダム重ね型スライドショー表示の動作ルーチン中、再度、印刷ブックマークボタンが押下された場合は、処理を中止し、再度ステップＳ１６０１より動作を行う。但し、この際、印刷候補リストと表示画像リストの内容はそのまま残っている。

また、ランダム重ね型スライドショー表示の動作が途中で終了された場合は、その時点で表示が終了し、印刷画像バッファへの保存も終了され、印刷候補リストの作成もその時点で終了となる。こうして、スライドショー表示鑑賞とが終了すると、実施形態１と同様、図１５に従って動作する。すなわち、図１５に示すように、処理の開始後、まず、ユーザはステップＳ１５０１で表示された印刷メニューより印刷ボタンを選択し、印刷候補ボタンを選択する。するとステップＳ１５０２に進み、表示画像リストより『見えている』個別画像と、印刷候補リストより表示状態テーブルに基づきスライドショー表示の状態画像を再現し、印刷候補画像として表示する。

図１２は、図８（ｃ）のＤ‘１とＤ’８の両方の時点で印刷ブックマークボタンを押下した際、印刷候補画像をＴＶ受信装置１００の表示部１１０に表示したものである。これは、図１１（ａ）と図１１（ｄ）のいずれかに含まれる画像となっている。こうして印刷候補画像の一覧後、ステップＳ１５０３で印刷したい画像と枚数を選択し、ステップＳ１５０４で印刷を開始する。尚、図１１（ａ）〜（ｄ）において、×の表示がなされている画像は印刷候補画像としては登録されない。

＜他の実施形態＞
前述の実施形態１、２は、スライドショー表示中にまず、印刷のブックマークを行い、スライドショー表示終了後、印刷候補となる画像を一括表示し、その中から、印刷画像を選択した。しかし、スライドショー表示設定時、印刷候補選択モードを“ダイレクト印刷”に設定する。そして、印刷モード選択１の印刷候補決定手順により、印刷ブックマークボタンが押下されるたびに、スライドショー表示の表示動作を一時停止し、印刷候補画面を表示できるモードが用意されている。この場合の動作を示す流れ図を図１７に示す。

先の実施形態１、２と重複する部分の説明は省略する。すなわち、処理の前半の、印刷ブックマークボタンが押下され、ステップＳ１７０１からＳ１７０７までは、実施形態１と同様である。しかし、この後、ステップＳ１７０８でスライドショー表示制御部５０２に対し一時停止を指示し、次いで、ステップＳ１７０９で印刷起動ルーチンが起動する。印刷起動ルーチンＳ１７０９は、この中で、印刷リスト内に登録された印刷候補画像として表示し、印刷動作を行う。尚、Ｓ１７１３は、先の実施形態と同様に、他のモードの処理である。

この後、スライドショー表示制御部５０２は、印刷ルーチンが終了しているかどうかをステップＳ１７１０で調べる。ここで、終了したことが検知されると、ステップＳ１７１１に進み、スライドショー表示の再開の指示を出し、ステップＳ１７１２でスライトショーが終了するまで、スライドショー表示を続ける。このようにすることで、スライドショー表示を鑑賞しながらの印刷も可能である。

上記説明した本発明の実施形態においては、短冊型スライドショー表示及びランダム重ね型スライドショー表示で説明したが、別の型式のスライドショー表示にも本発明は適用可能である。また、合成画像を構成する個別画像は、各種の画像情報源からの画像で構成するのみならず、放送信号、ＤＶＤの映像情報、ＨＤＤ装置に蓄積した映像情報等、各種の画像情報源からの画像を混在させて使用することもありうる。

また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給しても達成可能である。すなわち、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。

プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性の半導体メモリカード、ＲＯＭなどを用いることができる。また、コンピュータが読出したプログラムコードを実行することにより、前述した実施形態の機能が実現される場合もある。

しかし、さらにそのプログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

さらに、記憶媒体から読出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれる場合もあり得る。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

本発明の実施形態における合成画像処理装置の全体システム構成を示す図である。 本発明の実施形態における合成画像処理装置で使用されるＴＶ受信装置のブロック図である。 本発明の実施形態で使用されるＴＶ受信装置を制御するリモコン装置の操作面を表す図である。 本発明の実施形態で実行される短冊型スライドショー表示の図である。 本発明の実施形態で使用されるシステム制御部のソフトウエアの階層構造を説明する図である。 本発明の実施形態で使用される表示データテーブルを示す図である。 本発明の実施形態で実行される短冊型スライドショー表示における表示状態テーブル及び表示状態を示す図である。 本発明の実施形態で実行されるランダム重ね型スライドショー表示における表示状態テーブル及び表示状態を示す図である。 本発明の実施形態で実行される短冊型スライドショー表示における印刷候補画像の登録を説明する図である。 本発明の実施形態で実行される短冊型スライドショー表示の終了後に表示される登録された印刷候補画像が一覧表示された状態を示す図である。 本発明の実施形態で実行されるランダム重ね型スライドショー表示における印刷候補画像の登録を説明する図である。 本発明の実施形態で実行されるランダム重ね型スライドショー表示の終了後に表示される登録された印刷候補画像が一覧表示された状態を示す図である。 本発明の実施形態１の印刷候補画像の登録動作を説明するフローチャートである。 本発明の実施形態１の印刷候補画像の登録動作を説明するフローチャートでである。 本発明の実施形態１、２の印刷動作を説明するフローチャートである。 本発明の実施形態２の印刷候補画像の登録動作を説明するフローチャートでである。 本発明のその他の実施形態の動作を説明するフローチャートである。

Claims (8)

1. 複数の画像で構成される合成画像を、前記複数の画像のうちの１つ以上の画像を動的に変化させながら表示装置に表示させる表示制御手段と、
   前記表示制御手段により前記表示装置に前記合成画像を表示している間に、出力指示を受け付ける受け付け手段と、
   前記受け付け手段により前記出力指示を受け付けたタイミングで前記複数の画像のいずれかが変化中である場合は、当該変化の前のタイミングにおける前記合成画像と、前記変化の後のタイミングにおける前記合成画像とを、そのいずれかを出力すべき画像としてユーザが選択可能に表示する選択手段とを有することを特徴とする画像処理装置。
2. 前記変化の後のタイミングにおける前記合成画像が、前記動的な変化により追加表示された画像を含む合成画像であり、前記変化の前のタイミングにおける前記合成画像が、前記追加表示された画像を含まない合成画像であることを特徴とする請求項１に記載の画像処理装置。
3. 前記選択手段が、さらに、当該変化の前のタイミングにおける前記合成画像を構成する複数の画像の各々と、前記変化の後のタイミングにおける前記合成画像を構成する複数の画像の各々とを、前記出力すべき画像としてユーザが選択可能に表示することを特徴とする請求項１に記載の画像処理装置。
4. 前記表示制御手段は、前記画像の動的な変化を周期的かつ一時的に停止させながら前記合成画像の表示を行い、
   前記選択手段が表示する合成画像は、前記受け付け手段により前記出力指示を受け付けたタイミングの前後の、前記画像の動的な変化が一時的に停止した状態で表示される合成画像であることを特徴とする請求項１に記載の画像処理装置。
5. 前記選択手段を通じて選択された合成画像を、印刷装置に出力する手段をさらに有することを特徴とする請求項１に記載の画像処理装置。
6. 表示制御手段が、複数の画像で構成される合成画像を、前記複数の画像のうちの１つ以上の画像を動的に変化させながら表示装置に表示させる表示制御工程と、
   受け付け手段が、前記表示制御工程により前記表示装置に前記合成画像を表示している間に、ユーザから出力指示を受け付ける受け付け工程と、
   選択手段が、前記受け付け工程により前記出力指示を受け付けたタイミングで前記複数の画像のいずれかが変化中である場合は、当該変化の前のタイミングにおける前記合成画像と、前記変化の後のタイミングにおける前記合成画像とを、そのいずれかを出力すべき画像としてユーザが選択可能に表示する選択工程とを有することを特徴とする画像処理装置の制御方法。
7. コンピュータを請求項１乃至請求項５のいずれか１項に記載の画像処理装置における各手段として機能させるためのプログラム。
8. 請求項７記載のプログラムを記録したコンピュータが読み取り可能な記憶媒体。

Images