JP4243956B2

JP4243956B2 - Image printing system, image processing apparatus and method, recording medium, and program

Info

Publication number: JP4243956B2
Application number: JP2003009126A
Authority: JP
Inventors: 龍信小池
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2003-01-17
Filing date: 2003-01-17
Publication date: 2009-03-25
Anticipated expiration: 2023-01-17
Also published as: JP2004222108A

Description

【０００１】
【発明の属する技術分野】
本発明は、画像印刷システム、画像処理装置および方法、並びに、記録媒体に関し、特に、例えば、デジタルスチルカメラで撮影された画像とともに、その画像に関する付随情報を印刷するようにした画像印刷システム、画像処理装置および方法、並びに、記録媒体に関する。
【０００２】
【従来の技術】
従来、デジタルスチルカメラでは、被写体の画像だけなく、例えば、その画像の撮影時の設定状態情報や輝度情報などを読み出し、画像とともに表示させることができる。
【０００３】
また、例えば、デジタルスチルカメラとプリンタを、ケーブルを介して接続し、撮影された画像とともに、設定状態情報や輝度情報などを印刷することが行われている（特許文献１参照）。
【０００４】
【特許文献１】
特開平１１−１４６３１１号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、特許文献１に開示されている技術では、設定状態情報や輝度情報が、画像上の任意の位置に配置されてしまい、ユーザが望む印刷結果とは異なる課題があった。
【０００６】
本発明はこのような状況に鑑みてなされたものであり、画像とともに設定状態情報や輝度情報を印刷する場合、表示状態がそのまま印刷結果となるようにするものである。
【０００７】
【課題を解決するための手段】
本発明の画像印刷システムは、画像処理装置が、画像に付随された付随情報に基づいて、付随情報に関するOSD表示データを作成し、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かを１画素毎に判定し、OSD表示データの値が有効な値であると判定した場合、所定の位置の画素のOSD表示データによる表示を制御し、OSD表示データの値が有効な値でないと判定した場合、所定の位置の画素の画像データによる表示を制御し、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かを１画素毎に判定し、 OSD 表示データの値が有効な値であると判定した場合、画像データにおける所定の位置の画素に OSD 表示データを書き込み、 OSD 表示データの値が有効な値でないと判定した場合、画像データにおける所定の位置の画素をそのままとした画像イメージを作成し、画像イメージを画像印刷装置に送信し、画像印刷装置が、画像処理装置からの画像イメージを印刷することを特徴とする。
本発明の画像処理装置は、画像の画像データに付随された付随情報に基づいて、前記付随情報に関するOSD表示データを作成する作成手段と、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かを１画素毎に判定し、OSD表示データの値が有効な値であると判定した場合、所定の位置の画素のOSD表示データによる表示を制御し、OSD表示データの値が有効な値でないと判定した場合、所定の位置の画素の画像データによる表示を制御する表示制御手段と、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かを１画素毎に判定し、 OSD 表示データの値が有効な値であると判定した場合、画像データにおける所定の位置の画素に OSD 表示データを書き込み、 OSD 表示データの値が有効な値でないと判定した場合、画像データにおける所定の位置の画素をそのままとした画像イメージを作成する書き込み手段と、画像イメージを画像印刷装置に送信する送信手段とを備えることを特徴とする。
【００１０】
前記付随情報は、撮影時の設定状態情報、または輝度情報のうち少なくとも１つを含むようにすることができる。
【００１１】
本発明の画像処理方法は、画像の画像データに付随された付随情報に基づいて、付随情報に関するOSD表示データを作成する作成ステップと、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かを１画素毎に判定し、OSD表示データの値が有効な値であると判定した場合、所定の位置の画素のOSD表示データによる表示を制御し、OSD表示データの値が有効な値でないと判定した場合、所定の位置の画素の画像データによる表示を制御する表示制御ステップと、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かを１画素毎に判定し、 OSD 表示データの値が有効な値であると判定した場合、画像データにおける所定の位置の画素に OSD 表示データを書き込み、 OSD 表示データの値が有効な値でないと判定した場合、画像データにおける所定の位置の画素をそのままとした画像イメージを作成する書き込みステップと、画像イメージを画像印刷装置に送信する送信ステップとを含むことを特徴とする。
【００１２】
本発明の記録媒体に記録されているプログラムは、画像の画像データに付随された付随情報に基づいて、付随情報に関するOSD表示データを作成する作成ステップと、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かを１画素毎に判定し、OSD表示データの値が有効な値であると判定した場合、所定の位置の画素のOSD表示データによる表示を制御し、OSD表示データの値が有効な値でないと判定した場合、所定の位置の画素の画像データによる表示を制御する表示制御ステップと、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かを１画素毎に判定し、 OSD 表示データの値が有効な値であると判定した場合、画像データにおける所定の位置の画素に OSD 表示データを書き込み、 OSD 表示データの値が有効な値でないと判定した場合、画像データにおける所定の位置の画素をそのままとした画像イメージを作成する書き込みステップと、画像イメージの画像印刷装置への送信を制御する送信制御ステップとを含むことを特徴とする。
【００１３】
第１の本発明においては、画像処理装置で、画像の画像データに付随された付随情報に基づいて、付随情報に関するOSD表示データが作成され、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かが１画素毎に判定され、OSD表示データの値が有効な値であると判定された場合、所定の位置の画素のOSD表示データによる表示が制御され、OSD表示データの値が有効な値でないと判定された場合、所定の位置の画素の画像データによる表示が制御され、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かが１画素毎に判定され、 OSD 表示データの値が有効な値であると判定された場合、画像データにおける所定の位置の画素に OSD 表示データが書き込まれ、 OSD 表示データの値が有効な値でないと判定された場合、画像データにおける所定の位置の画素がそのままとされた画像イメージが作成され、画像イメージが画像印刷装置に送信される。画像印刷装置では、画像処理装置からの画像イメージが印刷される。
【００１４】
第２の本発明においては、画像の画像データに付随された付随情報に基づいて、付随情報に関するOSD表示データが作成され、所定の位置の画素におけるOSD表示データの値が有効な値であるか否かが１画素毎に判定され、OSD表示データの値が有効な値であると判定された場合、所定の位置の画素のOSD表示データによる表示が制御され、OSD表示データの値が有効な値でないと判定された場合、所定の位置の画素の画像データによる表示が制御され、画像の印刷が指示されたとき、所定の位置の画素における OSD 表示データの値が有効な値であるか否かが１画素毎に判定され、 OSD 表示データの値が有効な値であると判定された場合、画像データにおける所定の位置の画素に OSD 表示データが書き込まれ、 OSD 表示データの値が有効な値でないと判定された場合、画像データにおける所定の位置の画素がそのままとされた画像イメージが作成され、画像イメージが画像印刷装置に送信される。
【００１５】
【発明の実施の形態】
以下、図を参照して、本発明の実施の形態について説明する。
【００１６】
図１は、本発明を適用した自動印刷システムの構成例を示す図である。このシステムにおいては、デジタルスチルカメラ１が、IEEE（Institute of Electrical and Electronics Engineers）1394やUSB（Universal Serial Bus）などのケーブル２を介してプリンタ３に接続されている。
【００１７】
デジタルスチルカメラ１は、被写体を撮像し、被写体の画像をLCD（Liquid Crystal Display）１６（図２）に表示させたり、それを画像データとして、記録メディア３３（図２）に記録する。プリンタ３は、ケーブル２を介してデジタルスチルカメラ１から供給された画像データの印刷を行なう。
【００１８】
デジタルスチルカメラ１とプリンタ３が、ケーブル２を介して相互に接続されたとき、互いの機器がDPS（ダイレクトプリントサービス）機能を有するか否かのネゴシエーションが行なわれ、互いにDPS機能を有する電子機器であると確認されると、通信可能になされる。
【００１９】
ここで、DPS規格とは、デジタルスチルカメラとプリンタをダイレクトに接続して、簡単に印刷することができるようにするためのアプリケーションレベルの規格であり、物理インターフェースやトランスポート層に依存しないため、他のトランスポート層への拡張が可能である。
【００２０】
また、このDPS規格の特徴としては、ユーザによる簡単な操作で、画像のプリントを実現することができるとともに、メーカおよび機種によらず相互に接続された、DPS規格を搭載した機器間でのプリントが可能である。
【００２１】
なお、デジタルスチルカメラ１とプリンタ３を、ケーブル２の有線で接続して通信させる他、IEEE802.11a,802.11bなどのいわゆる無線LANやBluetooth（登録商標）などで通信させるようにしてもよい。
【００２２】
図２は、デジタルスチルカメラ１の電気的構成例を示す図である。
【００２３】
レンズブロック１１は、光（すなわち、被写体の映像）を、CCD（Charge Coupled Devices）１２に入射させる。CCD１２は、受光した光の強度を電気信号に変換し、カメラ信号処理部１３に出力する。
【００２４】
カメラ信号処理部１３は、CCD１２から入力された電気信号を、Ｙ，Ｃｒ，Ｃｂの色差信号に変換し、画像信号処理部１４に出力する。画像信号処理部１４は、コントローラ２１の制御の下、カメラ信号処理部１３から入力された画像信号を、バス１７を介してDRAM（Dynamic Random Access Memory）１８に供給し、そこに一時的に記憶させる。また画像信号処理部１４は、コントローラ２１によってLCD１６の画像サイズに変更された画像信号をDRAM１８から読み出し、それに、オンスクリーンディスプレイ（OSD）２０から入力されたデータを重畳して、RGBデコーダ１５に出力する。
【００２５】
RGBデコーダ１５は、画像信号処理部１４から入力された画像信号をRGB信号に変換し、LCD１６に出力する。LCD１６は、RGBデコーダ１５から入力されたRGB信号に対応する画像を表示する。
【００２６】
DRAM１８は、記憶するデータの種類によって記憶領域が分けられており、ここでは、DISPLAYエリア１８ＡとOSDエリア１８Ｂが設けられている。DISPLAYエリア１８Ａは、画像データを記憶するものであって、画像の左上隅の画素から順に、１画素毎の色データを記憶する。OSDエリア１８Ｂは、オンスクリーンディスプレイ２０から供給される、記号、文字、または図形などのOSD表示データを記憶するものであって、画像の左上隅の画素から順に、１画素毎の色データを記憶する。なお、OSD表示データにおいて、色データの値が０の画素は、何も表示を行わないことを示す。
【００２７】
オンスクリーンディスプレイ２０は、コントローラ２１の制御の下、記号、文字、または図形からなるメニュー画面やアイコンなどのデータを、バス１７を介して画像信号処理部１４に出力する。
【００２８】
コントローラ２１は、ユーザが操作部２２を用いて指令した内容を示す信号に基づいて、各種処理を実行するとともに、バス１７を介して、画像信号処理部１４、DRAM１８、外部インターフェース１９、オンスクリーンディスプレイ２０、およびメディアドライブ２３を制御する。FLASH ROM２４には、コントローラ２１が各種処理を実行する上で必要なプログラムが格納されている。
【００２９】
またコントローラ２１は、操作部２２のシャッタボタンが操作された場合、画像信号処理部１４を制御し、画面１枚分の画像信号をDRAM１８に取り込ませる。そして、コントローラ２１は、DRAM１８に取り込まれた画像信号を、JPEG（Joint Photographic Experts Group）方式などの圧縮形式で圧縮し、DRAM１８の他のアドレスに格納させるとともに、ファイルヘッダなどを付加し、JPEGファイルとしてストリームに成形させる。
【００３０】
なお、画像信号の圧縮形式は、JPEG形式に限らず、例えば、TIFF（Tagged Image File Format）形式やMPEG（Moving Picture Experts Group）形式、あるいは、その他各種フォーマットなどでもよい。
【００３１】
さらにまたコントローラ２１は、操作部２２から画像印刷の開始が指示された場合、DRAM１８から画像データを読み出し、バス１７を介して外部インターフェース１９に接続されたプリンタ３に送信する。
【００３２】
記録メディア３３は、例えば、半導体メモリなどで構成され、その内部には、電気的に書き換えや消去が可能な不揮発性メモリが格納されており、画像や音声等の各種データの書き込み、および読み出しが可能になされている。この記録メディア３３は、DRAM１８に一時的に記憶されているデータ（画像ファイル）を永続的に保存するために、あるいは、保存されているデータを読み出すために、必要に応じてメディアドライブ２３に挿入される。
【００３３】
外部インターフェース１９は、例えば、USB入出力端子などで構成され、画像の印刷を行なう場合に、プリンタ３と接続される。外部インターフェース１９にはまた、必要に応じてドライブ３１が接続され、磁気ディスク、光ディスク、あるいは光磁気ディスクなどのリムーバブルメディア３２が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて、FLASH ROM２４にインストールされる。
【００３４】
図３は、DRAM１８に格納される画像ファイルの形式を示す図である。同図に示されるように、画像ファイル内のヘッダ部分に、Exif（Exchange Image File）情報が設けられ、続いて、画像データが配置されている。Exif情報には、例えば、絞り値、シャッタスピード、EV補正値、ISO感度、ストロボ発光、および、測光方式などの撮影時の設定状態情報が示される。
【００３５】
このように、DRAM１８に格納される画像ファイルは、画像データにExif情報が付随された構造となっているため、その詳細は後述するが、画像データとともに、Exif情報を表示させることができる。
【００３６】
次に、デジタルスチルカメラ１の基本的動作について説明する。
【００３７】
レンズブロック１１で取り込まれた光（被写体の映像）は、CCD１２に入射され、そこで電気信号に変換される。変換された電気信号は、カメラ信号処理部１３でＹ，Ｃｒ，Ｃｂの色差信号に変換され、画像信号処理部１４およびバス１７を介してDRAM１８に展開され、そこに一時的に記憶される。
【００３８】
DRAM１８に一時的に記憶された画像信号は、コントローラ２１によって、LCD１６に表示させるための画像サイズに変更され、再び、DRAM１８の他のアドレスに記憶される。そして、この画像信号が画像信号処理部１４によって読み出され、RGBデコーダ１５に出力され、RGB信号に変換された後、LCD１６に出力される。これにより、LCD１６には、被写体の画像がリアルタイムで表示される（すなわち、モニタリング画像が表示される）。
【００３９】
例えば、ユーザが、所定のタイミングで、操作部２２のシャッタボタンを操作すると、コントローラ２１は、DRAM１８に一時的に記憶されている画像信号を読み出し、JPEG方式で圧縮した後、DRAM１８の他のアドレスに格納させるとともに、格納された画像信号にファイルヘッダなどを付加し、JPEGファイルとしてストリームに成形させる。コントローラ２１は、このJPEGファイルを読み出し、バス１７を介してメディアドライブ２３に挿入された記録メディア３３に転送し、そこに永続的に保存させる。
【００４０】
このようにして、１枚の画像が１個の画像データとして、記録メディア３３に記録される。
【００４１】
例えば、ユーザが、操作部２２を操作して、記録メディア３３に保存されている画像の再生（表示）を指示すると、コントローラ２１は、記録メディア３３に保存されている画像ファイルを、バス１７を介してDRAM１８に転送し、そこからデータを取り込みながら圧縮されたファイルを伸張し、DRAM１８の他のアドレスに記憶させる。伸張処理終了後、コントローラ２１は、画像信号処理部１４を制御し、DRAM１８に記憶されている画像データを読み出させる。画像信号処理部１４は、読み出した画像データに、オンスクリーンディスプレイ２０から入力されたデータを重畳し、RGBデコーダ１５を介してLCD１６に出力する。
【００４２】
このようにして、記録メディア３３に保存されている画像データがLCD１６に表示される。
【００４３】
また、上述したようにして画像を再生するにあたり、コントローラ２１は、画像に付随されているExif情報などの撮影時の設定状態情報や、伸張処理後の画像データを画像信号処理部１４に読み出させる際に得られる画像データの輝度情報を、オンスクリーンディスプレイ２０に供給し、そこで、Exif情報に関するOSD表示データや、輝度情報を元にしたヒストグラムに関するOSD表示データを作成させる。
【００４４】
これにより、例えば、図４に示されるように、LCD１６には、画像データ５１とともに、Exif情報やヒストグラムなどのOSD表示データ５２が表示される。同図においては、Exif情報として、絞り値「F2.0」、EV補正値「500＋0.3EV」、およびISO感度「ISO100」が表示されている。
【００４５】
次に、図５のフローチャートを参照して、画像の再生および印刷処理について説明する。なお、この処理は、ユーザにより操作部２２が操作され、画像の再生が指示された場合に開始される。
【００４６】
ステップＳ１において、コントローラ２１は、メディアドライブ２３に挿入された記録メディア３３から、圧縮された画像データを、バス１７を介してDRAM１８に転送し、そこに一時的に記憶させる。ステップＳ２において、コントローラ２１は、DRAM１８に一時的に記憶された画像データを取り込みながら伸張する。ステップＳ３において、コントローラ２１は、ステップＳ２の処理で伸張された画像データをDRAM１８のDISPLAYエリア１８Ａに転送し、そこに記憶させる。
【００４７】
ステップＳ４において、コントローラ２１は、画像信号処理部１４を制御し、DRAM１８のDISPLAYエリア１８Ａに記憶されている画像データを読み出させ、RGBデコーダ１５を介してLCD１６に出力させる。これにより、例えば、図６Ａに示されるような画像データ５１がLCD１６に表示される。
【００４８】
ステップＳ５において、コントローラ２１は、記録メディア３３から取得し、LCD１６に表示させた画像データにExif情報が存在するか否かを判定し、Exif情報が存在すると判定した場合、ステップＳ６に進み、画像データに付随されているExif情報を取得する。
【００４９】
ステップＳ７において、コントローラ２１は、ステップＳ６の処理で取得したExif情報をオンスクリーンディスプレイ２０に供給する。オンスクリーンディスプレイ２０は、表示仕様（表示位置、表示桁数、および色など）に基づいて、Exif情報に関するOSD表示データを作成する。
【００５０】
これにより、図６Ｂに示されるようなOSD表示データ５２のうち、Exif情報に関する、絞り値「F2.0」、EV補正値「500＋0.3EV」、およびISO感度「ISO100」のOSD表示データが作成される。
【００５１】
ステップＳ８において、オンスクリーンディスプレイ２０は、コントローラ２１の制御の下、ステップＳ７の処理で作成されたOSD表示データをDRAM１８のOSDエリア１８Ｂに転送し、そこに記憶させる。
【００５２】
ステップＳ５において、画像データにExif情報が存在しないと判定された場合、処理は、ステップＳ９に進む。
【００５３】
ステップＳ９において、コントローラ２１は、LCD１６に表示させた画像データに輝度情報が存在するか否か、すなわち、ステップＳ４の処理において、画像信号処理部１４に画像データを読み出させる際に輝度情報が得られたか否かを判定する。
【００５４】
ステップＳ９において、画像データに輝度情報が存在すると判定された場合、ステップＳ１０に進み、コントローラ２１は、その画像データの輝度情報を取得する。ステップＳ１１において、コントローラ２１は、ステップＳ１０の処理で取得した輝度情報をオンスクリーンディスプレイ２０に供給する。オンスクリーンディスプレイ２０は、表示仕様（表示位置、表示桁数、および色など）に基づいて、輝度情報に関するOSD表示データを作成する。
【００５５】
これにより、図６Ｂに示されるようなOSD表示データ５２のうち、輝度情報を元にしたヒストグラムのOSD表示データが作成される。
【００５６】
そして、オンスクリーンディスプレイ２０は、コントローラ２１の制御の下、作成したOSD表示データをDRAM１８のOSDエリア１８Ｂに転送し、そこに記憶させる。
【００５７】
ステップＳ９において、画像データに輝度情報が存在しないと判定された場合、処理は、ステップＳ１２に進む。
【００５８】
ステップＳ１２において、コントローラ２１は、画像信号処理部１４を制御し、OSDエリア１８Ｂに記憶されているOSD表示データを読み出させ、重ね合わせ表示処理を実行させる。
【００５９】
ここで、図７を参照して、画像信号処理部１４が実行する、重ね合わせ表示処理の詳細について説明する。なお、説明を分かりやすくするため、横方向ｍ番目、縦方向ｎ番目の画素を、（ｍ，ｎ）の画素と記載する。
【００６０】
ステップＳ３１において、画像信号処理部１４は、変数ｍおよび変数ｎを１にセットする。ステップＳ３２において、画像信号処理部１４は、DRAM１８のOSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素に、OSD表示データが存在するか否か、すなわち、OSD表示データの値が０以外の有効な値であるか否かを判定する。
【００６１】
ステップＳ３２において、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にOSD表示データが存在する、すなわち、OSD表示データの値が０以外の有効な値であると判定された場合、ステップＳ３３に進み、画像信号処理部１４は、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にあるOSD表示データを、RGBデコーダ１５を介してLCD１６に出力し、そこに表示させる。
【００６２】
ステップＳ３２において、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にOSD表示データが存在しない、すなわち、OSD表示データの値が０であると判定された場合、ステップＳ３４に進み、画像信号処理部１４は、DISPLAYエリア１８Ａ内における画像の（ｍ，ｎ）の画素にある画像データを、RGBデコーダ１５を介してLCD１６に出力し、そこに表示させる。
【００６３】
ステップＳ３５において、画像信号処理部１４は、変数ｍが最大値Ｍ（横方向の最終画素）であるか否かを判定し、変数ｍが最大値Ｍではないと判定した場合、ステップＳ３６に進み、変数ｍを１だけインクリメントし、ステップＳ３２に戻り、上述した処理を繰り返し実行する。
【００６４】
ステップＳ３５において、変数ｍが最大値Ｍであると判定された場合、ステップＳ３７に進み、画像信号処理部１４は、さらに変数ｎが最大値Ｎ（縦方向の最終画素）であるか否かを判定し、変数ｎが最大値Ｎではないと判定した場合、ステップＳ３８に進み、変数ｎを１だけインクリメントするとともに、変数ｍを１にリセットする。その後、処理は、ステップＳ３２に戻り、上述した処理が繰り返し実行される。
【００６５】
そして、ステップＳ３７において、変数ｎが最大値Ｎであると判定された場合、すなわち、DISPLAYエリア１８ＡとOSDエリア１８Ｂ内における全ての画素について、重ね合わせ処理が終了されると、図５のステップＳ１３にリターンする。
【００６６】
これにより、図６Ｃに示されるように、ユーザが再生指示した画像データ５１（図６Ａ）と、その画像データ５１のExif情報や輝度情報などのOSD表示データ５２（図６Ｂ）とが重ね合わせられて、LCD１６に表示される。
【００６７】
付言すれば、１画素毎に、OSD表示データの値が０であれば、DISPLAYエリア１８Ａの画像データを、OSD表示データの値が０でなければ（OSD表示データが有効な値であれば）、OSDエリア１８ＢのOSD表示データを、それぞれLCD１６に表示させることができる。
【００６８】
図５の説明に戻る。ステップＳ１３において、コントローラ２１は、ユーザにより操作部２２が操作され、画像の印刷が指示されたか否かを判定し、画像の印刷が指示されるまで待機する。
【００６９】
なお、ステップＳ１３の処理において、画像の印刷が指示されるまで、それ以降の処理は行わないものとして説明しているが、勿論、他の画像の再生が指示されることもある。この場合、ステップＳ１の処理に戻り、上述した処理が再び実行される。
【００７０】
ステップＳ１３において、画像の印刷が指示されたと判定された場合、ステップＳ１４に進み、コントローラ２１は、DISPLAYエリア１８Ａに記憶されている画像データと、OSDエリア１８Ｂに記憶されているOSD表示データとの重ね合わせ書き込み処理を実行する。
【００７１】
ここで、図８を参照して、コントローラ２１が実行する、重ね合わせ書き込み処理の詳細について説明する。なお、図７と同様に、横方向ｍ番目、縦方向ｎ番目の画素を、（ｍ，ｎ）の画素と記載する。
【００７２】
ステップＳ５１において、コントローラ２１は、変数ｍおよび変数ｎを１にセットする。ステップＳ５２において、コントローラ２１は、DRAM１８のOSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素に、OSD表示データが存在するか否か、OSD表示データの値が０以外の有効な値であるか否かを判定する。
【００７３】
ステップＳ５２においてし、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にOSD表示データが存在する、すなわち、OSD表示データの値が０以外の有効な値であると判定された場合、ステップＳ５３に進み、コントローラ２１は、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にあるOSD表示データを、DRAM１８のDISPLAYエリア１８Ａに転送し、DISPLAYエリア１８Ａにおける画像の（ｍ，ｎ）の画素に書き込ませる。
【００７４】
ステップＳ５２において、OSDエリア１８Ｂ内における画像の（ｍ，ｎ）の画素にOSD表示データが存在しない、すなわち、OSD表示データの値が０であると判定された場合、ステップＳ５４に進み、コントローラ２１は、DRAM１８のDISPLAYエリア１８Ａ内における画像の（ｍ，ｎ）の画素にある画像データをそのまま残させる。
【００７５】
ステップＳ５５において、コントローラ２１は、変数ｍが最大値Ｍ（横方向の最終画素）であるか否かを判定し、変数ｍが最大値Ｍではないと判定した場合、ステップＳ５６に進み、変数ｍを１だけインクリメントし、ステップＳ５２に戻り、上述した処理を繰り返し実行する。
【００７６】
ステップＳ５５において、変数ｍが最大値Ｍであると判定された場合、ステップＳ５７に進み、コントローラ２１は、さらに変数ｎが最大値Ｎ（縦方向の最終画素）であるか否かを判定し、変数ｎが最大値Ｎではないと判定した場合、ステップＳ５８に進み、変数ｎを１だけインクリメントするとともに、変数ｍを１にリセットする。その後、処理は、ステップＳ５２に戻り、上述した処理が繰り返し実行される。
【００７７】
そして、ステップＳ５７において、変数ｎが最大値Ｎであると判定された場合、すなわち、DISPLAYエリア１８ＡとOSDエリア１８Ｂ内における全ての画素について、重ね合わせ書き込み処理が終了されると、図５のステップＳ１５にリターンする。
【００７８】
このように、１画素毎に、OSD表示データの値が０であれば、DISPLAYエリア１８Ａの画像データをそのまま残し、OSD表示データの値が０でなければ（OSD表示データが有効な値であれば）、OSDエリア１８ＢのOSD表示データをDISPLAYエリア１８Ａに書き込むといった処理を、DISPLAYエリア１８Ａの全ての画素に対して行うことにより、画像データとOSD表示データとの重ね合わせが完了する。
【００７９】
このように、DRAM１８内に、印刷する画像イメージを作成するため、例えば、記録メディア３３などに、新たに画像ファイルを作成する必要がない。
【００８０】
ステップＳ１５において、コントローラ２１は、ステップＳ１４の処理で、画像データとOSD表示データとが重ね合わせられたデータ（すなわち、画像上にExif情報やヒストグラムなどが重ね合わせられた画面イメージ）をDRAM１８から読み出し、バス１７および外部バス１９を介してプリンタ３に送信し、そのデータの印刷を開始させる。
【００８１】
ここで、印刷実行の形態は特に問わないが、例えば、デジタルスチルカメラ１とプリンタ３が互いにDPS機能を有している場合、DPS定義ファイルを相互に交換することで（ネゴシエーションすることにより）、互いの機器が、DPS機能をサポートした機器であることが認識される。これにより、コントローラ２１は、プリンタ３のDPSサービスを確認するとともに、プリンタ情報などを取得し、印刷を開始させることができる。
【００８２】
以上の処理により、再生画像に関する設定状態情報を合わせ込んだ画像の再生が可能になるとともに、デジタルスチルカメラ１のLCD１６に表示されている、設定状態情報が合わせ込まれた画面イメージそのものを印刷することが可能になる。これにより、ユーザは、撮影時の設定状態情報を容易に確認することができる。
【００８３】
なお、上述のステップＳ１４の処理で、コントローラ２１は、OSD表示データが重ね合わせられた画像データをDRAM１８から読み出し、JPEG方式で圧縮した後、DRAM１８の他のアドレスに格納させるとともに、格納された画像信号にファイルヘッダなどを付加し、JPEGファイルとしてストリームに成形させることにより、画像データとOSD表示データとが重ね合わせられた、JPEGファイルを新たに作成することもできる。
【００８４】
さらに、コントローラ２１は、このJPEGファイルを読み出し、バス１７を介してメディアドライブ２３に挿入された記録メディア３３に転送し、そこに永続的に保存させることもできる。
【００８５】
以上においては、絞り値、シャッタスピード、EV補正値、ISO感度、ストロボ発光、および、測光方式などの撮影時の設定状態情報を示すExif情報や、画像の輝度情報に関するヒストグラムを画像に重ね合わせて印刷するようにしたが、本発明はこれに限らず、例えば、撮影日時、撮影場所名、撮影者名、またはコメントなどの撮影情報を重ね合わせて印刷することも勿論可能である。
【００８６】
また、再生画像に関する情報の表示レイアウト、色、属性、またはフォントタイプなどのデザインを重ね合わせて印刷することも可能であり、見栄えの良いデザインにすることにより、画像印刷を修飾するような場合に適用することも可能である。
【００８７】
また以上においては、再生画像に関する情報を合わせ込んだ画像の再生および印刷を行うようにしたが、再生画像だけでなく、例えば、撮影モード時のモニタリング画像に関する設定状態情報を合わせ込んだ画像の表示および印刷を行うこともできる。この場合の処理について、図９を参照して説明する。
【００８８】
ステップＳ７１において、コントローラ２１は、カメラ信号処理部１３を制御し、CCD１２から入力された電気信号を取り込ませ、Ｙ，Ｃｒ，Ｃｂの色差信号に変換させる。その後、コントローラ２１は、画像信号処理部１４を制御し、変換された画像信号を、バス１７を介してDRAM１８に供給させ、そこに一時的に記憶させる。
【００８９】
ステップＳ７２において、コントローラ２１は、DRAM１８に一時的に記憶されている画像信号を読み出して画格（縦横サイズ）を変更し、再び、DRAM１８のDISPLAYエリア１８Ａに転送し、そこに記憶させる。
【００９０】
ステップＳ７３乃至Ｓ８４の処理は、図５のステップＳ４乃至Ｓ１５の処理と同様であるため、その説明は省略する。
【００９１】
以上の処理により、静止画像ファイルとして記録メディア３３に保存しなくても、設定状態情報や撮影情報などを合わせ込んだモニタリング中の画面イメージを、そのまま印刷することが可能になる。
【００９２】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【００９３】
この記録媒体は、図２に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM（Compact Disc-Read Only Memory）、DVD(Digital Versatile Disc)を含む）、もしくは光磁気ディスク（MD(Mini-Disc)（登録商標）を含む）などよりなるリムーバブルメディア３２、または、半導体メモリなどよりなる記録メディア３３により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているFLASH ROM２４またはハードディスクなどで構成される。
【００９４】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【００９５】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表わすものである
【００９６】
【発明の効果】
以上のように、第１の本発明によれば、デジタルスチルカメラで撮影された画像を印刷することが可能となる。特に、画面に表示されている設定状態情報や輝度情報が合わせ込まれた画像をそのまま印刷することが可能となる。
【００９７】
第２の本発明によれば、デジタルスチルカメラで撮影された画像とともに、その画像に関する付随情報を印刷することが可能となる。特に、画面に表示されている設定状態情報や輝度情報が合わせ込まれた画像をプリンタに送信し、その表示状態のまま印刷することが可能となる。
【図面の簡単な説明】
【図１】本発明を適用した自動印刷システムの構成例を示す図である。
【図２】デジタルスチルカメラの電気的構成例を示す図である。
【図３】画像ファイルの形式を示す図である。
【図４】 Exif情報とヒストグラムが重ね合わせられた画像の表示例を示す図である。
【図５】画像の再生および印刷処理を説明するフローチャートである。
【図６】 Exif情報とヒストグラムが画像に重ね合わせられる処理を模式的に示す図である。
【図７】図５のステップＳ１２の重ね合わせ表示処理の詳細を説明するフローチャートである。
【図８】図５のステップＳ１４の重ね合わせ書き込みの詳細を説明するフローチャートである。
【図９】撮影モード時での画像の表示および印刷処理を説明するフローチャートである。
【符号の説明】
１デジタルスチルカメラ，２バス，３プリンタ，１４画像信号処理部，１８ DRAM，１９外部インターフェース，２１コントローラ，２２操作部，２３メディアドライブ，２４ FLASH ROM，３３記録メディア[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image printing system, an image processing apparatus and method, and a recording medium, and in particular, an image printing system and an image printing system configured to print, for example, an image taken with a digital still camera and accompanying information about the image. The present invention relates to a processing apparatus and method, and a recording medium.
[0002]
[Prior art]
Conventionally, a digital still camera can read not only an image of a subject but also setting state information and luminance information at the time of shooting the image and display them together with the image.
[0003]
In addition, for example, a digital still camera and a printer are connected via a cable, and setting state information, luminance information, and the like are printed together with a photographed image (see Patent Document 1).
[0004]
[Patent Document 1]
Japanese Patent Laid-Open No. 11-146311
[0005]
[Problems to be solved by the invention]
However, in the technique disclosed in Patent Document 1, the setting state information and the luminance information are arranged at arbitrary positions on the image, and there is a problem that is different from the print result desired by the user.
[0006]
The present invention has been made in view of such a situation, and when printing setting state information and luminance information together with an image, the display state is directly used as a printing result.
[0007]
[Means for Solving the Problems]
 In the image printing system of the present invention, the image processing apparatus creates OSD display data related to the accompanying information based on the accompanying information attached to the image, and the value of the OSD display data in the pixel at the predetermined position is an effective value. Whether or notEvery pixelIf it is determined that the value of the OSD display data is a valid value, the display by the OSD display data of the pixel at the predetermined position is controlled, and if the value of the OSD display data is determined to be not a valid value, the predetermined value When the display by the image data of the pixel at the position is controlled and printing of the image is instructed,In a pixel at a given position OSD It is determined for each pixel whether or not the value of the display data is a valid value, OSD If it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Write the display data, OSD If it is determined that the value of the display data is not a valid value, an image is created with the pixel at the predetermined position in the image data as it is.,ImageTo the image printing device, and the image printing deviceImageIs printed.
 The image processing apparatus according to the present invention has a creation means for creating OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image, and the value of the OSD display data in a pixel at a predetermined position is valid. Whether it is a valueEvery pixelIf it is determined that the value of the OSD display data is a valid value, the display by the OSD display data of the pixel at the predetermined position is controlled, and if the value of the OSD display data is determined to be not a valid value, the predetermined value Display control means for controlling display by image data of the pixel at the position, and when printing of the image is instructed,In a pixel at a given position OSD It is determined for each pixel whether or not the value of the display data is a valid value, OSD If it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Write the display data, OSD If it is determined that the value of the display data is not a valid value, an image is created with the pixel at a predetermined position in the image data as it is.Writing means;ImageTransmission means for transmitting the image to the image printing apparatus.
[0010]
The accompanying information may include at least one of setting state information at the time of shooting or luminance information.
[0011]
 The image processing method of the present invention includes a creation step of creating OSD display data related to accompanying information based on accompanying information attached to image data of an image, and a value in which the value of OSD display data in a pixel at a predetermined position is effective Whether or notEvery pixelIf it is determined that the value of the OSD display data is a valid value, the display by the OSD display data of the pixel at the predetermined position is controlled, and if the value of the OSD display data is determined to be not a valid value, the predetermined value A display control step for controlling the display of the pixel at the position of the image data, and when printing of the image is instructed,In a pixel at a given position OSD It is determined for each pixel whether or not the value of the display data is a valid value, OSD If it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Write the display data, OSD If it is determined that the value of the display data is not a valid value, an image is created with the pixel at a predetermined position in the image data as it is.A writing step;ImageTransmitting to the image printing apparatus.
[0012]
 The program recorded on the recording medium of the present invention includes a creation step of creating OSD display data relating to accompanying information based on accompanying information attached to image data of an image, and OSD display data of a pixel at a predetermined position. Whether the value is a valid valueEvery pixelIf it is determined that the value of the OSD display data is a valid value, the display by the OSD display data of the pixel at the predetermined position is controlled, and if the value of the OSD display data is determined to be not a valid value, the predetermined value A display control step for controlling the display of the pixel at the position of the image data, and when printing of the image is instructed,In a pixel at a given position OSD It is determined for each pixel whether or not the value of the display data is a valid value, OSD If it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Write the display data, OSD If it is determined that the value of the display data is not a valid value, an image is created with the pixel at a predetermined position in the image data as it is.A writing step;ImageAnd a transmission control step for controlling transmission to the image printing apparatus.
[0013]
 In the first aspect of the present invention, the OSD display data related to the accompanying information is created based on the accompanying information attached to the image data of the image by the image processing apparatus, and the value of the OSD display data in the pixel at the predetermined position is valid. Whether or notEvery pixelIf it is determined that the OSD display data value is valid, the OSD display data of the pixel at the predetermined positionbydisplayControlIf the OSD display data value is not valid, the image data of the pixel at the predetermined positionbydisplayControlWhen an image print is instructed,In a pixel at a given position OSD Whether or not the value of the display data is a valid value is determined for each pixel, OSD When it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Display data is written, OSD When it is determined that the value of the display data is not a valid value, an image image is created in which the pixel at a predetermined position in the image data is left as it is.,ImageIs transmitted to the image printing apparatus. In the image printing device, from the image processing deviceImageIs printed.
[0014]
 In the second aspect of the invention, based on the accompanying information attached to the image data of the image, the OSD display data related to the accompanying information is created, and whether the value of the OSD display data in the pixel at the predetermined position is a valid value Whether or notEvery pixelIf it is determined that the OSD display data value is valid, the OSD display data of the pixel at the predetermined positionbydisplayControlIf the OSD display data value is not valid, the image data of the pixel at the predetermined positionbydisplayControlWhen an image print is instructed,In a pixel at a given position OSD Whether or not the value of the display data is a valid value is determined for each pixel, OSD When it is determined that the value of the display data is a valid value, the pixel at the predetermined position in the image data OSD Display data is written, OSD When it is determined that the value of the display data is not a valid value, an image image is created in which the pixel at a predetermined position in the image data is left as it is.,ImageIs transmitted to the image printing apparatus.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0016]
FIG. 1 is a diagram showing a configuration example of an automatic printing system to which the present invention is applied. In this system, a digital still camera 1 is connected to a printer 3 via a cable 2 such as IEEE (Institute of Electrical and Electronics Engineers) 1394 or USB (Universal Serial Bus).
[0017]
The digital still camera 1 captures an image of an object and displays an image of the object on an LCD (Liquid Crystal Display) 16 (FIG. 2) or records it as image data on a recording medium 33 (FIG. 2). The printer 3 prints image data supplied from the digital still camera 1 via the cable 2.
[0018]
When the digital still camera 1 and the printer 3 are connected to each other via the cable 2, whether or not each other device has a DPS (Direct Print Service) function is negotiated, and the electronic devices having the DPS function with each other. If it is confirmed, communication is made possible.
[0019]
Here, the DPS standard is an application-level standard that allows a digital still camera and printer to be directly connected to enable easy printing, and does not depend on the physical interface or transport layer. Extensions to other transport layers are possible.
[0020]
Another feature of the DPS standard is that it allows you to print images with a simple operation by the user, and enables printing between devices that are connected to each other and are connected to each other regardless of the manufacturer and model. Is possible.
[0021]
In addition, the digital still camera 1 and the printer 3 may be connected via a cable 2 to communicate with each other, or may be communicated with a so-called wireless LAN such as IEEE802.11a or 802.11b or Bluetooth (registered trademark).
[0022]
FIG. 2 is a diagram illustrating an electrical configuration example of the digital still camera 1.
[0023]
The lens block 11 causes light (that is, an image of the subject) to enter a CCD (Charge Coupled Devices) 12. The CCD 12 converts the intensity of the received light into an electric signal and outputs it to the camera signal processing unit 13.
[0024]
The camera signal processing unit 13 converts the electrical signal input from the CCD 12 into Y, Cr, and Cb color difference signals and outputs them to the image signal processing unit 14. The image signal processing unit 14 supplies the image signal input from the camera signal processing unit 13 to a DRAM (Dynamic Random Access Memory) 18 via the bus 17 under the control of the controller 21 and temporarily stores it. Let Further, the image signal processing unit 14 reads out the image signal changed to the image size of the LCD 16 by the controller 21 from the DRAM 18, superimposes the data input from the on-screen display (OSD) 20, and outputs it to the RGB decoder 15. To do.
[0025]
The RGB decoder 15 converts the image signal input from the image signal processing unit 14 into an RGB signal and outputs the RGB signal to the LCD 16. The LCD 16 displays an image corresponding to the RGB signal input from the RGB decoder 15.
[0026]
The storage area of the DRAM 18 is divided according to the type of data to be stored. Here, a DISPLAY area 18A and an OSD area 18B are provided. The DISPLAY area 18A stores image data, and stores color data for each pixel in order from the pixel at the upper left corner of the image. The OSD area 18B stores OSD display data such as symbols, characters, or graphics supplied from the on-screen display 20, and stores color data for each pixel in order from the pixel at the upper left corner of the image. To do. In the OSD display data, a pixel whose color data value is 0 indicates that nothing is displayed.
[0027]
Under the control of the controller 21, the on-screen display 20 outputs data such as menu screens and icons composed of symbols, characters, or figures to the image signal processing unit 14 via the bus 17.
[0028]
The controller 21 executes various processes based on a signal indicating the content instructed by the user using the operation unit 22, and also via the bus 17, the image signal processing unit 14, DRAM 18, external interface 19, on-screen display. 20 and the media drive 23 are controlled. The FLASH ROM 24 stores programs necessary for the controller 21 to execute various processes.
[0029]
Further, when the shutter button of the operation unit 22 is operated, the controller 21 controls the image signal processing unit 14 and causes the DRAM 18 to capture an image signal for one screen. Then, the controller 21 compresses the image signal taken into the DRAM 18 in a compression format such as a JPEG (Joint Photographic Experts Group) system, stores it in another address of the DRAM 18, adds a file header or the like, and adds a JPEG file. As a stream.
[0030]
The compression format of the image signal is not limited to the JPEG format, and may be, for example, a TIFF (Tagged Image File Format) format, an MPEG (Moving Picture Experts Group) format, or other various formats.
[0031]
Furthermore, when the start of image printing is instructed from the operation unit 22, the controller 21 reads the image data from the DRAM 18 and transmits it to the printer 3 connected to the external interface 19 via the bus 17.
[0032]
The recording medium 33 is composed of, for example, a semiconductor memory, and stores an electrically rewritable and erasable nonvolatile memory therein, and can write and read various data such as images and sounds. It has been made possible. This recording medium 33 is inserted into the media drive 23 as necessary in order to permanently store data (image file) temporarily stored in the DRAM 18 or to read out the stored data. Is done.
[0033]
The external interface 19 is composed of, for example, a USB input / output terminal, and is connected to the printer 3 when printing an image. A drive 31 is connected to the external interface 19 as necessary, and a removable medium 32 such as a magnetic disk, an optical disk, or a magneto-optical disk is appropriately mounted, and a computer program read from these is loaded as necessary. , Installed in the FLASH ROM 24.
[0034]
FIG. 3 is a diagram showing the format of the image file stored in the DRAM 18. As shown in the figure, Exif (Exchange Image File) information is provided in the header portion of the image file, and subsequently, image data is arranged. Exif information includes setting state information at the time of shooting such as an aperture value, shutter speed, EV correction value, ISO sensitivity, strobe light emission, and photometry method.
[0035]
As described above, the image file stored in the DRAM 18 has a structure in which Exif information is attached to the image data, and the Exif information can be displayed together with the image data, as will be described in detail later.
[0036]
Next, the basic operation of the digital still camera 1 will be described.
[0037]
The light (image of the subject) captured by the lens block 11 is incident on the CCD 12 where it is converted into an electrical signal. The converted electrical signal is converted into Y, Cr, Cb color difference signals by the camera signal processing unit 13, developed in the DRAM 18 via the image signal processing unit 14 and the bus 17, and temporarily stored therein.
[0038]
The image signal temporarily stored in the DRAM 18 is changed to an image size to be displayed on the LCD 16 by the controller 21 and stored again in another address of the DRAM 18. Then, this image signal is read by the image signal processing unit 14, output to the RGB decoder 15, converted into an RGB signal, and then output to the LCD 16. Thereby, the image of the subject is displayed on the LCD 16 in real time (that is, a monitoring image is displayed).
[0039]
For example, when the user operates the shutter button of the operation unit 22 at a predetermined timing, the controller 21 reads an image signal temporarily stored in the DRAM 18, compresses it in the JPEG method, and then other addresses of the DRAM 18. And a file header is added to the stored image signal to form a stream as a JPEG file. The controller 21 reads this JPEG file, transfers it to the recording medium 33 inserted in the media drive 23 via the bus 17, and permanently stores it there.
[0040]
In this way, one image is recorded on the recording medium 33 as one image data.
[0041]
For example, when the user operates the operation unit 22 to instruct reproduction (display) of an image stored in the recording medium 33, the controller 21 transfers the image file stored in the recording medium 33 to the bus 17. The data is transferred to the DRAM 18 and the compressed file is expanded while taking in the data, and stored in another address of the DRAM 18. After the expansion process is completed, the controller 21 controls the image signal processing unit 14 to read out the image data stored in the DRAM 18. The image signal processing unit 14 superimposes the data input from the on-screen display 20 on the read image data, and outputs it to the LCD 16 via the RGB decoder 15.
[0042]
In this way, the image data stored in the recording medium 33 is displayed on the LCD 16.
[0043]
Further, when playing back an image as described above, the controller 21 reads out setting state information at the time of shooting such as Exif information attached to the image and image data after decompression processing to the image signal processing unit 14. The luminance information of the image data obtained at the time of the image data is supplied to the on-screen display 20, where OSD display data related to Exif information and OSD display data related to a histogram based on the luminance information are created.
[0044]
As a result, for example, as shown in FIG. 4, OSD display data 52 such as Exif information and a histogram is displayed on the LCD 16 together with the image data 51. In the figure, as the Exif information, an aperture value “F2.0”, an EV correction value “500 + 0.3EV”, and an ISO sensitivity “ISO100” are displayed.
[0045]
Next, image reproduction and printing processing will be described with reference to the flowchart of FIG. This process is started when the user operates the operation unit 22 and gives an instruction to reproduce an image.
[0046]
In step S 1, the controller 21 transfers the compressed image data from the recording medium 33 inserted in the media drive 23 to the DRAM 18 via the bus 17 and temporarily stores it therein. In step S 2, the controller 21 decompresses the image data stored in the DRAM 18 while taking it in. In step S3, the controller 21 transfers the image data expanded in the process of step S2 to the DISPLAY area 18A of the DRAM 18 and stores it therein.
[0047]
In step S 4, the controller 21 controls the image signal processing unit 14 to read out the image data stored in the DISPLAY area 18 A of the DRAM 18 and output it to the LCD 16 via the RGB decoder 15. Thereby, for example, image data 51 as shown in FIG. 6A is displayed on the LCD 16.
[0048]
In step S5, the controller 21 determines whether or not Exif information exists in the image data acquired from the recording medium 33 and displayed on the LCD 16, and if it is determined that Exif information exists, the process proceeds to step S6. Get Exif information attached to data.
[0049]
In step S 7, the controller 21 supplies the Exif information acquired in step S 6 to the on-screen display 20. The on-screen display 20 creates OSD display data related to Exif information based on display specifications (display position, number of display digits, color, etc.).
[0050]
As a result, among the OSD display data 52 as shown in FIG. 6B, the OSD display data of the aperture value “F2.0”, the EV correction value “500 + 0.3EV”, and the ISO sensitivity “ISO100” related to the Exif information is created. Is done.
[0051]
In step S8, the on-screen display 20 transfers the OSD display data created in step S7 to the OSD area 18B of the DRAM 18 under the control of the controller 21, and stores it therein.
[0052]
If it is determined in step S5 that Exif information does not exist in the image data, the process proceeds to step S9.
[0053]
In step S9, the controller 21 determines whether or not the luminance information exists in the image data displayed on the LCD 16, that is, the luminance information is obtained when the image signal processing unit 14 reads out the image data in the process of step S4. It is determined whether or not it has been obtained.
[0054]
If it is determined in step S9 that the luminance information exists in the image data, the process proceeds to step S10, and the controller 21 acquires the luminance information of the image data. In step S 11, the controller 21 supplies the luminance information acquired in step S 10 to the on-screen display 20. The on-screen display 20 creates OSD display data related to luminance information based on display specifications (display position, number of display digits, color, etc.).
[0055]
Thereby, among OSD display data 52 as shown in FIG. 6B, histogram OSD display data based on luminance information is created.
[0056]
Then, the on-screen display 20 transfers the created OSD display data to the OSD area 18B of the DRAM 18 under the control of the controller 21, and stores it therein.
[0057]
If it is determined in step S9 that no luminance information exists in the image data, the process proceeds to step S12.
[0058]
In step S12, the controller 21 controls the image signal processing unit 14 to read out the OSD display data stored in the OSD area 18B, and execute the overlay display process.
[0059]
Here, with reference to FIG. 7, the details of the overlay display process executed by the image signal processing unit 14 will be described. For ease of explanation, the m-th pixel in the horizontal direction and the n-th pixel in the vertical direction are described as (m, n) pixels.
[0060]
In step S31, the image signal processing unit 14 sets a variable m and a variable n to 1. In step S32, the image signal processing unit 14 determines whether or not OSD display data exists in the (m, n) pixels of the image in the OSD area 18B of the DRAM 18, that is, the value of the OSD display data is other than 0. It is determined whether it is a valid value.
[0061]
If it is determined in step S32 that the OSD display data exists in the (m, n) pixels of the image in the OSD area 18B, that is, it is determined that the value of the OSD display data is a valid value other than 0, step S33 Then, the image signal processing unit 14 outputs the OSD display data in the (m, n) pixels of the image in the OSD area 18B to the LCD 16 via the RGB decoder 15, and displays it there.
[0062]
If it is determined in step S32 that no OSD display data exists in the (m, n) pixels of the image in the OSD area 18B, that is, the value of the OSD display data is 0, the process proceeds to step S34, and the image signal The processing unit 14 outputs the image data in the (m, n) pixels of the image in the DISPLAY area 18A to the LCD 16 via the RGB decoder 15, and displays the image data there.
[0063]
In step S35, the image signal processing unit 14 determines whether or not the variable m is the maximum value M (final pixel in the horizontal direction). If it is determined that the variable m is not the maximum value M, the process proceeds to step S36. The variable m is incremented by 1, and the process returns to step S32 to repeatedly execute the above-described processing.
[0064]
If it is determined in step S35 that the variable m is the maximum value M, the process proceeds to step S37, and the image signal processing unit 14 further determines whether or not the variable n is the maximum value N (the final pixel in the vertical direction). If it is determined that the variable n is not the maximum value N, the process proceeds to step S38, the variable n is incremented by 1, and the variable m is reset to 1. Thereafter, the processing returns to step S32, and the above-described processing is repeatedly executed.
[0065]
When it is determined in step S37 that the variable n is the maximum value N, that is, when the superimposition processing is completed for all the pixels in the DISPLAY area 18A and the OSD area 18B, step S13 in FIG. Return to
[0066]
Thereby, as shown in FIG. 6C, the image data 51 (FIG. 6A) instructed to be reproduced by the user and the OSD display data 52 (FIG. 6B) such as Exif information and luminance information of the image data 51 are superimposed. Is displayed on the LCD 16.
[0067]
In addition, if the value of the OSD display data is 0 for each pixel, the image data in the DISPLAY area 18A is not the value of the OSD display data is 0 (if the OSD display data is a valid value). The OSD display data in the OSD area 18B can be displayed on the LCD 16, respectively.
[0068]
Returning to the description of FIG. In step S 13, the controller 21 determines whether or not the user has operated the operation unit 22 and instructed to print an image, and waits until an instruction to print an image is given.
[0069]
In the processing in step S13, it is described that the subsequent processing is not performed until image printing is instructed. Of course, the reproduction of another image may be instructed. In this case, it returns to the process of step S1 and the process mentioned above is performed again.
[0070]
If it is determined in step S13 that printing of an image has been instructed, the process proceeds to step S14, where the controller 21 calculates the image data stored in the DISPLAY area 18A and the OSD display data stored in the OSD area 18B. The overlay writing process is executed.
[0071]
Here, with reference to FIG. 8, the details of the overlay writing process executed by the controller 21 will be described. As in FIG. 7, the m-th pixel in the horizontal direction and the n-th pixel in the vertical direction are referred to as (m, n) pixels.
[0072]
In step S51, the controller 21 sets a variable m and a variable n to 1. In step S52, the controller 21 determines whether or not OSD display data exists in the (m, n) pixels of the image in the OSD area 18B of the DRAM 18, and the value of the OSD display data is a valid value other than zero. It is determined whether or not.
[0073]
If it is determined in step S52 that OSD display data exists in the (m, n) pixels of the image in the OSD area 18B, that is, if it is determined that the value of the OSD display data is a valid value other than 0, step In S53, the controller 21 transfers the OSD display data in the (m, n) pixels of the image in the OSD area 18B to the DISPLAY area 18A of the DRAM 18, and the (m, n) of the image in the DISPLAY area 18A. Write to the pixel.
[0074]
If it is determined in step S52 that no OSD display data exists in the (m, n) pixels of the image in the OSD area 18B, that is, the value of the OSD display data is 0, the process proceeds to step S54, and the controller 21 Causes the image data in the (m, n) pixels of the image in the DISPLAY area 18A of the DRAM 18 to remain as they are.
[0075]
In step S55, the controller 21 determines whether or not the variable m is the maximum value M (final pixel in the horizontal direction). If it is determined that the variable m is not the maximum value M, the process proceeds to step S56, where the variable m Is incremented by 1, and the process returns to step S52 to repeat the above-described processing.
[0076]
If it is determined in step S55 that the variable m is the maximum value M, the process proceeds to step S57, and the controller 21 further determines whether or not the variable n is the maximum value N (vertical pixel in the vertical direction). If it is determined that the variable n is not the maximum value N, the process proceeds to step S58 where the variable n is incremented by 1 and the variable m is reset to 1. Thereafter, the processing returns to step S52, and the above-described processing is repeatedly executed.
[0077]
When it is determined in step S57 that the variable n is the maximum value N, that is, when the overlay writing process is completed for all the pixels in the DISPLAY area 18A and the OSD area 18B, the step of FIG. Return to S15.
[0078]
Thus, if the value of the OSD display data is 0 for each pixel, the image data in the DISPLAY area 18A is left as it is, and the value of the OSD display data is not 0 (if the OSD display data is a valid value). For example, the process of writing the OSD display data in the OSD area 18B to the DISPLAY area 18A is performed on all the pixels in the DISPLAY area 18A, thereby completing the superposition of the image data and the OSD display data.
[0079]
Thus, since an image image to be printed is created in the DRAM 18, it is not necessary to create a new image file on the recording medium 33, for example.
[0080]
In step S15, the controller 21 reads from the DRAM 18 the data in which the image data and the OSD display data are superimposed (that is, the screen image in which the Exif information and the histogram are superimposed on the image) in the process of step S14. The data is transmitted to the printer 3 via the bus 17 and the external bus 19, and printing of the data is started.
[0081]
Here, the form of printing execution is not particularly limited. For example, when the digital still camera 1 and the printer 3 have the DPS function, the DPS definition files can be exchanged with each other (by negotiation). It is recognized that each other device is a device that supports the DPS function. As a result, the controller 21 can confirm the DPS service of the printer 3, acquire printer information and the like, and start printing.
[0082]
With the above processing, it is possible to reproduce an image combined with setting state information related to a reproduced image, and print the screen image itself combined with the setting state information displayed on the LCD 16 of the digital still camera 1. It becomes possible. Thereby, the user can easily confirm the setting state information at the time of shooting.
[0083]
In the process of step S14 described above, the controller 21 reads out the image data on which the OSD display data is superimposed from the DRAM 18, compresses the image data using the JPEG method, stores the image data at another address of the DRAM 18, and stores the stored image. A JPEG file in which image data and OSD display data are superimposed can be newly created by adding a file header or the like to the signal and forming the stream as a JPEG file.
[0084]
Furthermore, the controller 21 can read out the JPEG file, transfer it to the recording medium 33 inserted in the media drive 23 via the bus 17, and permanently store it there.
[0085]
In the above, Exif information indicating the setting status information at the time of shooting such as aperture value, shutter speed, EV correction value, ISO sensitivity, flash emission, and metering method, and histogram related to the luminance information of the image are superimposed on the image. Although printing is performed, the present invention is not limited to this, and it is of course possible to superimpose and print shooting information such as shooting date and time, shooting place name, photographer name, or comment.
[0086]
In addition, it is possible to print by overlaying the display layout, color, attribute, or font type design of information related to the playback image. It is also possible to apply.
[0087]
Further, in the above, the reproduction and printing of the image including the information related to the reproduction image is performed. However, not only the reproduction image but also the display of the image including the setting state information related to the monitoring image in the shooting mode, for example, is displayed. And printing can also be performed. Processing in this case will be described with reference to FIG.
[0088]
In step S 71, the controller 21 controls the camera signal processing unit 13 to take in the electrical signal input from the CCD 12 and convert it into Y, Cr, Cb color difference signals. Thereafter, the controller 21 controls the image signal processing unit 14 so that the converted image signal is supplied to the DRAM 18 via the bus 17 and is temporarily stored therein.
[0089]
In step S72, the controller 21 reads the image signal temporarily stored in the DRAM 18, changes the picture quality (vertical / horizontal size), transfers it again to the DISPLAY area 18A of the DRAM 18, and stores it therein.
[0090]
The processing in steps S73 to S84 is the same as the processing in steps S4 to S15 in FIG.
[0091]
With the above processing, it is possible to print a screen image during monitoring, which includes setting state information and shooting information, without being stored in the recording medium 33 as a still image file.
[0092]
The series of processes described above can be executed by hardware or can be executed by software. When a series of processing is executed by software, a program constituting the software may execute various functions by installing a computer incorporated in dedicated hardware or various programs. For example, it is installed from a network or a recording medium into a general-purpose personal computer or the like.
[0093]
As shown in FIG. 2, the recording medium is distributed to provide a program to the user separately from the apparatus main body, and includes a magnetic disk (including a flexible disk) on which the program is recorded, an optical disk (CD- Removable media 32 such as ROM (compact disc-read only memory), DVD (digital versatile disc), or magneto-optical disc (including MD (mini-disc) (registered trademark)), or semiconductor memory In addition to the recording medium 33, it is configured by a FLASH ROM 24, a hard disk, or the like on which a program is provided, which is provided to the user in a state of being incorporated in the apparatus main body in advance.
[0094]
In the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in chronological order according to the described order, but is not necessarily performed in chronological order. It also includes processes that are executed individually.
[0095]
Further, in this specification, the system represents the entire apparatus composed of a plurality of apparatuses.
[0096]
【The invention's effect】
As described above, according to the first aspect of the present invention, it is possible to print an image taken with a digital still camera. In particular, it is possible to print an image in which setting state information and luminance information displayed on the screen are combined as it is.
[0097]
According to the second aspect of the present invention, it is possible to print accompanying information related to an image taken with a digital still camera. In particular, it is possible to send an image combined with setting state information and luminance information displayed on the screen to the printer and print the image in its display state.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a configuration example of an automatic printing system to which the present invention is applied.
FIG. 2 is a diagram illustrating an electrical configuration example of a digital still camera.
FIG. 3 is a diagram illustrating a format of an image file.
FIG. 4 is a diagram illustrating a display example of an image in which Exif information and a histogram are superimposed.
FIG. 5 is a flowchart illustrating image reproduction and printing processing.
FIG. 6 is a diagram schematically illustrating a process in which Exif information and a histogram are superimposed on an image.
FIG. 7 is a flowchart illustrating details of the overlay display process in step S12 of FIG.
FIG. 8 is a flowchart illustrating details of overlay writing in step S14 of FIG. 5;
FIG. 9 is a flowchart illustrating image display and print processing in a shooting mode.
[Explanation of symbols]
1 Digital still camera, 2 buses, 3 printer, 14 image signal processing unit, 18 DRAM, 19 external interface, 21 controller, 22 operation unit, 23 media drive, 24 FLASH ROM, 33 recording media

Claims

In an image printing system comprising an image processing device that displays an image obtained by photographing a subject, and an image printing device that is connected to the image processing device and prints the image,
The image processing apparatus includes:
Creating means for creating OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image;
It is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is an effective value, and when it is determined that the value of the OSD display data is an effective value, When controlling the display of the pixel by the OSD display data and determining that the value of the OSD display data is not a valid value, display control means for controlling the display of the pixel at a predetermined position by the image data;
When printing of the image is instructed, it is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is a valid value, and the value of the OSD display data is a valid value. If it is determined that there is, the OSD display data is written to the pixel at a predetermined position in the image data, and if it is determined that the value of the OSD display data is not a valid value, the pixel at the predetermined position in the image data is left as it is. A writing means for creating the image
Transmission means for transmitting the image image to the image printing apparatus,
The image printing apparatus includes:
An image printing system comprising printing means for printing the image image from the image processing apparatus.

In an image processing apparatus that displays an image obtained by photographing a subject,
Creating means for creating OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image;
It is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is an effective value, and when it is determined that the value of the OSD display data is an effective value, When controlling the display of the pixel by the OSD display data and determining that the value of the OSD display data is not a valid value, display control means for controlling the display of the pixel at a predetermined position by the image data;
When printing of the image is instructed, it is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is a valid value, and the value of the OSD display data is a valid value. If it is determined that there is, the OSD display data is written to the pixel at a predetermined position in the image data, and if it is determined that the value of the OSD display data is not a valid value, the pixel at the predetermined position in the image data is left as it is. A writing means for creating the image
An image processing apparatus comprising: transmission means for transmitting the image image to an image printing apparatus.

The image processing apparatus according to claim 2, wherein the accompanying information includes at least one of setting state information at the time of shooting or luminance information.

In an image processing method of an image processing apparatus for displaying an image obtained by photographing a subject,
Creating the OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image;
It is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is an effective value, and when it is determined that the value of the OSD display data is an effective value, A display control step for controlling display by the OSD display data of a pixel and controlling the display by the image data of a pixel at a predetermined position when it is determined that the value of the OSD display data is not a valid value;
When printing of the image is instructed, it is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is a valid value, and the value of the OSD display data is a valid value. If it is determined that there is, the OSD display data is written to the pixel at a predetermined position in the image data, and if it is determined that the value of the OSD display data is not a valid value, the pixel at the predetermined position in the image data is left as it is. A writing step to create a picture image
And a transmission step of transmitting the image image to an image printing apparatus.

In a program for causing a computer to function as an image processing apparatus that displays an image obtained by photographing a subject,
Creating the OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image;
It is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is an effective value, and when it is determined that the value of the OSD display data is an effective value, A display control step for controlling display by the OSD display data of a pixel and controlling the display by the image data of a pixel at a predetermined position when it is determined that the value of the OSD display data is not a valid value;
When printing of the image is instructed, it is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is a valid value, and the value of the OSD display data is a valid value. If it is determined that there is, the OSD display data is written to the pixel at a predetermined position in the image data, and if it is determined that the value of the OSD display data is not a valid value, the pixel at the predetermined position in the image data is left as it is. A writing step to create a picture image
And a transmission control step for controlling transmission of the image image to an image printing apparatus. A recording medium on which a computer-readable program is recorded.

In a program for causing a computer to function as an image processing apparatus that displays an image obtained by photographing a subject,
Creating the OSD display data related to the accompanying information based on the accompanying information attached to the image data of the image;
It is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is an effective value, and when it is determined that the value of the OSD display data is an effective value, A display control step for controlling display by the OSD display data of a pixel and controlling the display by the image data of a pixel at a predetermined position when it is determined that the value of the OSD display data is not a valid value;
When printing of the image is instructed, it is determined for each pixel whether or not the value of the OSD display data in a pixel at a predetermined position is a valid value, and the value of the OSD display data is a valid value. If it is determined that there is, the OSD display data is written to the pixel at a predetermined position in the image data, and if it is determined that the value of the OSD display data is not a valid value, the pixel at the predetermined position in the image data is left as it is. A writing step to create a picture image
And a transmission control step for controlling transmission of the image image to the image printing apparatus.