JP3808662B2

JP3808662B2 - Image reproduction method and apparatus

Info

Publication number: JP3808662B2
Application number: JP14032599A
Authority: JP
Inventors: 金城　　直人
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 1998-05-20
Filing date: 1999-05-20
Publication date: 2006-08-16
Anticipated expiration: 2019-05-20
Also published as: JP2000066312A

Description

【０００１】
【発明の属する技術分野】
本発明は、画像再生方法および装置に関し、詳しくは、従来型カメラによって写真フィルムに被写体が撮影された画像を光電的に読み取りデジタル画像データを得、あるいはデジタルカメラによって被写体が撮影された画像のデジタル画像データを得て、所定の画像処理を施した後、可視画像として再生して写真プリントや表示手段に出力する際の画像処理に関する技術分野に属する。
【０００２】
【従来技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム（以下、フィルムとする）に撮影された画像の感光材料（印画紙）への焼き付けは、フィルムの画像を感光材料に投影して感光材料を面露光する、いわゆる直接露光（アナログ露光）によって行われている。
【０００３】
これに対して、近年では、デジタル露光を利用する焼付装置、すなわち従来型カメラによって撮影され、写真フィルムに記録された撮影コマの画像を光電的に読み取り、読み取った画像をデジタル画像データとして得た後、あるいはデジタルカメラによって撮影された撮影コマの画像のデジタル画像データを得た後、種々の画像処理を施して記録用画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像（潜像）を記録し、（仕上がり）写真プリントとするデジタルフォトプリンタが実用化されている。
【０００４】
デジタルフォトプリンタでは、画像をデジタル画像データとして、画像データ処理によって焼付時の露光条件を決定することができるので、逆光やストロボ撮影等に起因する画像の飛びやツブレの補正、シャープネス（鮮鋭化）処理、カラーフェリアや濃度フェリアの補正、アンダー露光やオーバー露光の補正、周辺光量不足の補正等を好適に行って、従来の直接露光では得られなかった高品位な写真プリントを得ることができる。しかも、複数画像の合成や画像分割、さらには文字の合成等も画像データ処理によって行うことができ、用途に応じて自由に編集／処理した写真プリントも出力可能である。
しかも、デジタルフォトプリンタによれば、画像を写真プリントとして出力するのみならず、画像データをコンピュータ等に供給したり、フロッピーディスク等の画像記録媒体に保存しておくこともできるので、画像データを、写真以外の様々な用途に利用することができる。
【０００５】
このようなデジタルフォトプリンタは、基本的に、フィルムに記録された画像を光電的によみとるスキャナ（画像読取装置）、読み取った画像を画像処理して記録画像データ（露光条件）とする画像処理装置、および、この記録（出力）画像データに応じて感光材料を走査露光して現像処理を施して写真プリントとするプリンタ（画像記録装置）より構成される。
【０００６】
スキャナでは、光源から射出された読取光をフィルムに入射して、フィルムに撮影された画像を担持する投影光を得て、この投影光を結像レンズによってＣＣＤセンサ等のイメージセンサに結像して光電変換することにより画像を読み取り、必要に応じて各種の画像処理を施した後に、フィルムの入力画像データ（画像データ信号）として画像処理装置に送る。
画像処理装置は、スキャナによって読み取られて、または画像記録媒体から読み出されて、画像処理装置に送られてきた入力画像データから画像処理条件を設定し、設定した条件に応じた画像処理を入力画像データに施し、画像記録のための出力画像データ（露光条件）としてプリンタに送る。
プリンタでは、例えば、光ビーム走査露光を利用する装置であれば、画像処理装置から送られた出力画像データに応じて光ビームを変調して、感光材料を二次元的に走査露光（焼付け）して潜像を形成し、次いで、所定の現像処理等を施して、フィルムに撮影された画像が可視再生画像として再生された写真プリントを出力する。
【０００７】
また、撮影された画像をスキャナで読み取りデジタル画像データを得る方法以外に、例えばデジタルカメラ等で撮影され、フロッピーディスクやＭＯやＺｉｐ等の画像記録媒体に記録されたデジタル画像の画像データを得、またネットワークを介してデジタル画像データを得て、入力画像データとすることができ、この入力画像データから画像処理条件を設定し、設定した条件に応じた画像処理を入力画像データに施し、画像記録のための出力画像データ（露光条件）としてプリンタに送り可視再生画像としてプリント出力することができる。
【０００８】
このように、デジタルフォトプリンタによれば、従来型のカメラによってフィルムに撮影した画像やデジタルカメラによって撮影されたデジタル画像を単に写真プリントとして出力するだけでなく、撮影時の不適切な撮影条件によって画像の再現性の良くないものについても、デジタル画像処理を施して、逆光シーン、ハイコントラストシーン、アンダー露光ネガ、シャープネス、周辺光量不足等の補正を行うことで、高品位で美しい画像を容易に写真プリントとして出力することができる特徴を有している。
【０００９】
【発明が解決しようとする課題】
現状のデジタルフォトプリントのデジタル処理による写真プリントサービスにおいて、撮影日時がフィルムに光学的に記録された場合や、撮影日時が磁気記録されている新写真システムＡＰＳの場合に、仕上がりプリント上に撮影された日付や撮影時刻が表示されるサービスを受けることができる。そして、そのサービスは、プリントされた画像と撮影日付や撮影時刻を見て撮影時の状況を振り返る場合に役立つ。しかし、撮影日付や撮影時刻の情報のみからでは、撮影当時の種々の状況を十分に振り返ることが難しい場合もある。すなわちこれらの写真プリントの画像を後日鑑賞する場合、撮影日時を手がかりとしてプリントされた画像を振り返るが、何を目的とし、どうゆう状況下で撮影したのか十分思い出せない場合も多い。また、例えば、人物を撮影した画像の背景に山が撮影されている場合、その背景の山の名前や標高や歴史を知りたい場合もある。
これに対し、撮影日付や撮影時刻だけでなく、これらに関する付帯的情報や撮影場所やその付帯情報があれば撮影当時を容易に振り返ることができる場合が多い。
【００１０】
一方、近年のパーソナルコンピュータの普及によって、パーソナルコンピュータでデジタル画像処理を行うことが容易となり、スキャナやデジタルカメラで取り込んで画像を合成したり、またフォトレタッチソフトを使って画像を修正することも個人的に可能となり、デジタル処理による写真プリントを含むデジタル画像は、画像合成や、画像修正により、画像を好みによって変化させる娯楽性の強いものとなっている。しかし、現状のデジタル処理による写真プリントサービスでは、写真プリントに提供されるのは、撮影日時や時刻の表示のサービスのみであり、ユーザ（顧客）の嗜好にあわせて画像に撮影日時に関する付加的情報や撮影画像の内容に合わせた付加情報を表示することはできない。
今後、ユーザにとって魅力のある写真プリントサービスを行うにあたって、写真プリントに撮影日時以外の付加情報を提供し、写真プリントの機能を高め、なおかつ娯楽性の強いものにすることが望まれる。
【００１１】
本発明の目的は、上記従来技術の問題点を解消し、フィルムに記録された画像から光電的に読み取られたデジタル画像データやデジタルカメラ等で撮影して得られたデジタル画像データに所定の画像処理を施して出力画像データを得、この出力画像データに応じた可視再生画像を写真プリントとして出力したり、モニタなどの表示装置に表示する際に、ユーザの希望にあわせて、撮影日時や撮影位置等に基づいた撮影画像の撮影状況や撮影画像の被写体に関連する付加情報などの、撮影画像に付随した付加情報を写真プリントや表示画像に付加し、ユーザが可視再生画像をみて容易に撮影当時を振り返ることができるとともに、写真プリントや表示画像の機能を高め、またユーザの好みに応じた娯楽性に富んだ写真プリントや表示画像をユーザに提供できる画像再生方法および装置を提供することにある。
【００１２】
【課題を解決するための手段】
上記目的を達成するために、本発明は、被写体を撮影した画像のデジタル画像データを取得し、取得されたデジタル画像データに所定の画像処理を施して出力画像データを得、この出力画像データに基づいて前記撮影画像を可視画像として再生して出力するに際し、
前記撮影画像の撮影日時データの少なくとも一部を含む撮影情報および複数の項目から少なくとも１つの項目が選択されたユーザ指定データを取得し、
予めデータベースに蓄積された付加情報の中から前記撮影情報の少なくとも一部および前記ユーザ指定データに関連する付加情報を検索し選択して、前記撮影情報の少なくとも一部および前記ユーザ指定データに関連する付加情報を得、
得られた付加情報を前記撮影画像に付加して再生することを特徴とする画像再生方法を提供するものである。
ここで、前記付加情報は、予めデータベースに格納された前記付加情報の中から、前記撮影日時データの少なくとも一部を用いて、年、月、日および時刻の少なくとも一つを単位として検索して選択された付加情報であることが好ましい。
また、前記ユーザー指定データに基づいて、プリント毎に異なる付加情報を選択することが好ましい。
また、前記項目は、花、ニュース、音楽、映画の少なくとも１つを含むことが好ましい。
ここで、前記デジタル画像データは、前記被写体を撮影した写真フィルムの前記撮影画像を光電的に読み取ることによって得られたデジタル画像データ、あるいは前記被写体を撮影することによって直接得られた前記撮影画像のデジタル画像データであるのが好ましく、また、前記可視画像の出力は、写真プリントの出力および表示手段への表示の少なくとも一方であるのが好ましく、この表示手段への表示は、モニタへの表示およびプロジェクタによる投影の少なくとも１つであるのが好ましく、さらに、前記付加情報は、前記撮影画像の撮影時の日時もしくは撮影場所に関連する情報、または撮影画像の被写体に関連する情報であるのが好ましい。
【００１３】
また、前記付加情報は、文字データ、文書データ、音声データ、静止画像データおよび動画像データの少なくとも一つであるのが好ましく、さらに、前記可視画像が、写真プリントに出力される時および表示手段に表示される時の少なくとも一方である時、前記付加情報は、前記写真プリントの前記可視画像および前記表示手段の表示画像の少なくとも一方に合成される、前記写真プリントの裏側に出力される、前記写真プリントに裏プリントされる、前記表示手段に表示された前記可視画像にリンクして文字、文書、静止画像および動画像の少なくとも１つとして表示される、または前記表示手段に表示された前記可視画像にリンクして音声として出力されるのが好ましい。
【００１４】
また、上記画像再生方法であって、
前記撮影情報および前記付加情報の少なくとも一方は、磁気記録層を持つ写真フィルムの前記撮影画像が撮影された撮影コマに対応する前記磁気記録層に記録されるか、写真フィルムの撮影コマに対応して光学的に記録されるか、写真フィルムを収納するＩＣメモリ付きフィルムカートリッジの前記ＩＣメモリに撮影コマに対応して記録されるか、前記撮影画像のデジタル画像データを記録する画像記録媒体に撮影コマに対応して記録されるか、写真フィルムの撮影コマまたはデジタル画像データと対応付けてデータ記録媒体に記録されるか、写真フィルムの撮影コマあるいはデジタル画像データと対応付けてデータベースに記録されるか、写真フィルムの撮影コマまたはデジタル画像データと対応付けてネットワーク経由で指定された記録先に記録されるかの少なくとも１つの方法によって記録され、
当該撮影コマの撮影画像を前記可視画像として再生するに際し、当該撮影コマの前記撮影情報または前記付加情報を、前記磁気記録層、前記光学的記録、前記ＩＣメモリ、前記画像記録媒体、前記データ記録媒体、前記データベースおよび前記記録先から読み出し、読み出された前記撮影情報から取得される付加情報または読み出された前記付加情報を当該撮影コマの前記撮影画像に付加して再生するのが好ましい。
【００１６】
また、本発明は、撮影画像のデジタル画像データを取得する画像入力手段と、
この画像入力手段によって取得されたデジタル画像データに所定の画像処理を施して出力画像データ得る画像処理手段と、
この画像処理手段から出力された前記出力画像データに基づいて前記撮影画像を可視画像として出力する画像出力手段とを有する画像再生装置であって、
前記撮影画像に関連付けて撮影情報を取得する撮影情報取得手段と、
この撮影情報取得手段によって取得された前記撮影情報の少なくとも一部に関連する付加情報を取得する付加情報取得手段と、
この付加情報取得手段によって取得された付加情報を前記可視画像として再生される前記撮影画像に付加する付加情報出力手段とを有し、
前記撮影情報取得手段は、前記撮影情報として前記撮影画像に付随させて撮影日時データの少なくとも一部を取得し、
前記付加情報取得手段は、前記付加情報を格納するデータベースと、このデータベースを前記撮影日時データの少なくとも一部を用いて検索し、予め前記データベースに格納された付加情報の中から前記撮影日時データの少なくとも一部と関連する前記付加情報を選択する付加情報選択手段とを備え、
前記付加情報選択手段は、前記撮影日時データの少なくとも一部に加え、複数の項目から少なくとも１つの項目が選択されたユーザ指定データに基づいて前記データベースを検索し、前記撮影日時データおよび前記ユーザ指定データに関連する前記付加情報を選択することを特徴とする画像再生装置を提供するものである。
ここで、前記撮影情報取得手段は、前記撮影日時データとして前記画像の撮影日付および撮影時刻の少なくとも一部を取得するものであることが好ましい。
また、前記付加情報選択手段は、前記ユーザ指定データに基づいて、プリント毎に異なる付加情報を選択することが好ましい。
また、前記項目は、花、ニュース、音楽、映画の少なくとも１つを含むことが好ましい。
【００１８】
ここで、前記画像入力手段は、前記被写体が撮影された写真フィルムの前記撮影画像から光電的に前記デジタル画像データを読み取るあるい前記被写体を撮影することによって直接前記撮影画像のデジタル画像データを得るのが好ましく、また、前記画像出力手段は、前記可視画像が再生された写真プリントを出力する画像記録手段および前記可視画像を再生して表示する表示手段の少なくとも一方であるのが好ましく、この表示手段は、前記可視画像を表示するモニタ、および前記可視画像を投影するプロジェクタの少なくとも１つであるのが好ましく、さらに、前記付加情報は、前記撮影画像の撮影時の日時もしくは撮影場所に関連する情報、または前記撮影画像の被写体に関連する情報であるのが好ましい。
【００１９】
また、前記画像出力手段は、前記可視画像が再生された写真プリントを出力する画像記録手段および前記可視画像を再生して表示する表示手段の少なくとも一方であり、前記画像出力手段は、前記可視画像が再生された写真プリントを出力する画像記録手段および前記可視画像を再生して表示する表示手段の少なくとも一方であり、前記付加情報出力手段は、前記付加情報をデジタル画像情報に展開して前記画像処理手段で画像処理されるデジタル画像データと合成する画像合成手段、前記付加情報を前記写真プリントの裏側に出力する出力手段、前記付加情報を前記写真プリントの裏側にプリントする裏プリント手段、または前記表示手段の再生可視画像にリンクして前記付加情報を文字、文書、静止画像および動画像の少なくとも１つとして前記表示手段に表示させるためのリンク手段、または前記表示手段の再生可視画像にリンクして前記付加情報を音声として出力させるための音声出力手段であるのが好ましい。
【００２０】
【発明の実施の形態】
本発明に係る画像再生方法および装置を添付の図面に示す好適実施形態に基づいて以下に詳細に説明する。
【００２１】
図１に本発明の画像再生方法を実施する本発明の画像再生装置を適用するデジタルフォトプリンタの一実施例のブロック図を示している。
同図に示されるデジタルフォトプリンタ１０は、基本的に、フィルムＦに撮影された画像を光電的に読み取るスキャナ（画像読取装置）１２と、読み取られた画像データ（画像情報）の画像処理や本発明の画像再生方法を実施するための種々のデータ処理やデジタルフォトプリンタ１０全体の操作および制御等を行う画像処理装置１４と、画像処理装置１４から出力された画像データに応じて変調した光ビームで感光材料を画像露光し、現像処理して写真プリントとして出力するプリンタ１６とを有する。
【００２２】
また、画像処理装置１４には、様々な条件の入力や設定、処理の選択や指示、色／濃度補正などの指示等を入力するためのキーボード１８ａおよびマウス１８ｂを有する操作系１８と、スキャナ１２で読み取られた画像、各種の操作指示、様々な条件の設定／登録画面等を表示する画像表示装置（モニタ）２０とを含んでいる。
スキャナ１２は、フィルムＦに撮影された画像を光電的に読み取る装置で、光源２２と、可変絞り２４と、フィルムＦに入射する読取光をフィルムＦの面方向で均一にする拡散ボックス２８と、結像レンズユニット３２と、フィルムの撮影画像を読み取るフォトセンサであるＣＣＤセンサ３４と、アンプ（増幅器）３６と、Ａ／Ｄ（アナログ／デジタル）変換器３７とを有し、さらに、スキャナ１２の本体に装着自在な専用のキャリア３０から構成される。
【００２３】
キャリア３０は、例えば２４枚取りの１３５サイズのフィルムや新写真システムフィルム（ＡＰＳのカートリッジ）等の、長尺なフィルムに対応する各種専用のキャリアが用意されており、図２（Ａ）に示されるように、所定の読み取り位置にフィルムＦを保持しつつ、ＣＣＤセンサ３４のラインＣＣＤセンサの延在方向（主走査方向）と直交する副走査方向に、フィルムＦの長手方向を一致して搬送する、読み取り位置を副走査方向に挟んで配置される搬送ローラ対３０ａおよび３０ｂと、フィルムＦの投影光を所定のスリット状に規制する、読み取り位置に対応して位置する主走査方向に延在するスリット２９ａを有するマスク２９、更に、磁気読取書込装置３１とを有する。
フィルムＦはこのキャリア３０によって保持されて副走査方向に搬送されつつこのフィルムＦには読み取り光が入射される。これにより、フィルムＦが主走査方向に延在するスリット２９ａによって２次元的にスリット走査され、フィルムＦに撮影された各コマの画像が読み取られる。
【００２４】
ＣＣＤセンサ３４は、図２（Ｂ）に示すように、Ｒ画像の読み取りを行うラインＣＣＤセンサ３４Ｒ、Ｇ画像の読み取りを行うラインＣＣＤセンサ３４Ｇ、Ｂ画像の読み取りを行うラインＣＣＤセンサ３４Ｂを有するラインセンサで、ラインセンサは主走査方向に延在している。フィルムＦの投影光は、このＣＣＤセンサによってＲ、ＧおよびＢの３原色に分解されて光電的に読み取られる。
光源２２から射出され、可変絞り２４によって光量調整され拡散ボックス２８を通して均一にされた読み取り光が、キャリア３０によって所定の読み取り位置に保持されつつ搬送されるフィルムＦに入射して、透過することにより、フィルムＦに撮影された画像を担持する投影光を得る。
フィルムＦの投影光は、結像レンズユニット３２によってＣＣＤセンサ３４の受光面に結像され、ＣＣＤセンサ３４によって光電的に読み取られ、その出力信号は、アンプ３６で増幅されて、Ａ／Ｄ変換器３７でデジタル画像データに変換され、入力画像データとして画像処理装置１４に送られる。
【００２５】
図３に示される新写真システムＡＰＳのフィルムＦの場合においては、周知のように、フィルムＦの裏面（非乳化剤面）側で撮影画像を記録した各コマの画像記録領域Ｇ１、Ｇ２等の上部および下部の領域Ｓ２に磁気記録層が形成され、カートリッジＩＤやフィルム種等や撮影情報、例えば撮影日付や撮影時刻等の撮影日時や、撮影位置や撮影方位や撮影倍率等のデータや、さらにはこれらの撮影情報に基づく付加情報、特に、これらの撮影情報によって特定される撮影画像の被写体自体またはこの撮影画像の撮影状況に関連する付加情報、また、場合によっては以前の写真プリント注文時に付加された付加情報などの撮影情報の少なくとも一部に関連する付加情報が記録されている。
これらの記録された情報は、スキャナ１２でフィルムＦの画像が読み取られる際に、同時に磁気読取書込装置３１にて読み取られる。すなわち、新写真システムＡＰＳのフィルム（カートリッジ）がそれに対応するキャリア３０にセットされ、フィルムＦがキャリア３０によって副走査方向に搬送されてＣＣＤセンサ３４で読み取られる間に、図２（Ａ）に示す磁気読取書込装置３１にて磁気記録された情報が読み取られ、撮影情報を含む各種の情報が画像処理装置１４に送られる。場合によっては、磁気読取書込装置３１によって磁気記録層に撮影情報に基づく付加情報などの必要な情報が記録される。
【００２６】
また、フィルムカートリッジ３３がＩＣメモリを装着したものである時、装着されたＩＣメモリにカートリッジＩＤやフィルム種、また撮影日時、撮影位置や撮影（カメラ）方位や撮影倍率等の撮影情報のデータが記録されている場合は、その情報を読み取ることができ、また、すでに以前の写真プリント注文時に付加された付加情報が記録されている場合は、その付加情報も読み取る。また、必要な情報が場合に応じてＩＣメモリに記録される。
撮影情報やこれに基づく付加情報の取得方法および記録方法は、ＡＰＳフィルムの磁気記録層やＩＣメモリ付きフィルムカートリッジのＩＣメモリからの読み出しや記録に限定されないのはもちろんである。これら以外の撮影情報や付加情報の取得および記録方法については、それぞれ後述する。
【００２７】
なお、デジタルフォトプリンタ１０を構成するスキャナ１２は、上述のスリット走査によるものに限定されず、１コマの画像の全面を一度に読み取る面露光を利用したＣＣＤエリアセンサであってもよい。その場合、図１に示す可変絞り２４と拡散ボックス２８との間にＲ，ＧおよびＢの色フィルタを設け、そこを通過してＲ、ＧおよびＢに色調整された光を、フィルムＦの１コマに入射して、透過することにより、フィルムＦに撮影されたこのコマの画像を担持する投影光を得てもよい。この場合、色フィルタを順次Ｒ、ＧおよびＢについて３回行う必要がある。
【００２８】
また、スキャナ１２における画像のＣＣＤセンサでの読み取りは、写真プリントを出力するために画像を読み取る本スキャンに先立ち、画像処理条件等を決定するために、画像を低解像度で読み取るプレスキャンを行ない画像処理条件を決定し、オペレータ（またはユーザ）がモニタ２０で確認し調整した後、高解像度で画像を読み取る本スキャンを行うため、スキャンはプレスキャンと本スキャンの２回行われる。そのため、Ｒ、ＧおよびＢの色フィルタを設け、面露光を利用したＣＣＤエリアセンサを用いた場合、Ｒ、ＧおよびＢの色フィルタを用いて３回スキャンする必要があるため、計６回のスキャンを行うことになる。ラインＣＣＤセンサを用いる場合は、２回で済むことになるので、迅速な処理にとっては有利である。
また、プレスキャンは、フィルムＦのすべての画像を一気にプレスキャンで取り込んで、画像処理条件を設定した後、本スキャンを行っているが、フィルムＦを一コマごとにプレスキャンと本スキャンを逐次行ってもよい。
【００２９】
また、本発明では、ネガやリバーサル等のフィルムに撮影された画像を光電的に読み取るスキャナ１２以外にも、反射原稿の画像を読み取る画像読取装置、コンピュータ通信等の通信手段（モデムを介するものも含む）、デジタルカメラやデジタルビデオカメラ等の撮像デバイスや内蔵メモリ、ＰＣカードやスマートメディア等のデジタルカメラ用の画像記録媒体、ＦＤ（フロッピーディスク）やＭＯ（光磁気記録媒体）等の汎用の画像記録媒体などの各種の画像データ供給源を利用することができ、これらを直接またはその駆動装置を介して画像処理装置１４に接続することができ、画像処理装置１４は、これらの画像データ供給源からデジタル画像データやその撮影情報や付加情報を受け取ることができる。
【００３０】
特に、図示例のフォトプリンタ１０では、デジタルカメラ等で撮影して得られたデジタル画像データを記録したＰＣＭＣＩＡ（ＰＣカード）、ＡＴＡカード、コンパクトフラッシュカード等のカードメモリやスマートメディア等のデジタルカメラ用画像記録媒体２５や、ＦＤ（フロッピーディスク）、ＣＤ−Ｒ（レコーダブルコンパクトディスク）、ＭＯ（マグネトオプティカルディスク）、ＤＶＤ（ディジタルバーサタイルディスク）やＺｉｐ等の汎用の画像記録媒体２５から画像データやを読み出し取得するためのドライブ装置２６が画像処理装置１４に接続されている。また、（パーソナル）コンピュータやデジタルカメラや他のデジタルフォトプリンタのスキャナや画像処理装置等の種々の画像データ供給源に直接ケーブル（例えば、ＲＳ２３２Ｃ）を介して接続して、あるいは通信ネットワークを介して接続して、デジタル画像データやその撮影情報や付加情報を取得するためのスロット２７等が画像処理装置１４に配置される。
なお、図示例では、入力信号（デジタル画像データ、撮影情報、付加情報）は、スキャナ１２やドライブ装置２６等の種々の画像データ供給源から画像処理装置１４に入力されるが、以下の説明では、主としてスキャナ１２から画像処理装置１４にデジタル画像データが供給される場合を代表例として説明する。
【００３１】
画像処理装置１４は、スキャナ１２で読み取られ、デジタルデータとして、画像処理装置１４に送られてきた画像データに所定の画像処理を施し、プリンタ１６またはモニタ２０に出力するもので、そのブロック図が図４に示される。画像処理装置１４は、データ処理部３８、プレスキャンメモリ４０、本スキャンメモリ４２、プレスキャン画像処理部４４、本スキャン画像処理部４６、条件設定部４８、および付加情報取得部６２から構成される。
【００３２】
データ処理部３８では、スキャナ１２から出力されたＲ，ＧおよびＢのデジタル画像データ（入力画像データ信号）に、Ｌｏｇ変換、ＤＣオフセット補正、暗時補正、シェーディング補正等を行い、処理済プレスキャン（画像）データはプレスキャンメモリ４０に、処理済本スキャン（画像）データは本スキャンメモリ４２に、それぞれ記憶（格納）される。なお、Ａ／Ｄ変換は、スキャナ１２で行わず、このデータ処理部３８で行うようにしてもよい。
プレスキャンメモリ４０および本スキャンメモリ４２には、データ処理部３８で処理されたデジタル画像データが記憶され、必要に応じて、画像処理を施し出力するために、プレスキャン画像処理部４４、または、本スキャン画像処理部４６に呼び出される。
【００３３】
プレスキャン画像処理部４４は、画像処理部５０と画像データ変換部５２とからなり、画像処理部５０は、色バランス調整、コントラスト補正、明るさ補正、さらにシャープネス処理や覆い焼処理等の従来技術としての画像処理のほか、撮影レンズの収差特性に基づく歪曲収差や倍率色収差や周辺光量低下や画像ボケなどの収差の補正処理を実施する部分である。
画像データ変換部５２では、画像処理部５０で画像処理の施された画像データを、モニタ２０による表示に対応する画像データに加工するため、３Ｄ（三次元）−ＬＵＴ等を用いて変換する。
【００３４】
本スキャン画像処理部４６は、画像処理部５４および画像データ変換部５８から構成される。
画像処理部５４では、本スキャン画像データについて、プレスキャン画像データにおいて決定された画像処理条件下、色バランス調整、コントラスト補正（階調処理）、明るさ補正が図示しないＬＵＴ（ルックアップテーブル）による処理によって、また、彩度補正が図示しないＭＴＸ演算によって公知の方法で行われ、さらに、オペレータの指示や画像データ等に応じて、シャープネス処理や覆い焼き処理等が行わる他、撮影レンズの特性による歪曲収差や倍率色収差などの補正および写真プリントの出力サイズに応じて画像を拡大縮小する電子変倍処理を行う。
画像データ変換部５８では、画像処理部５４で画像処理の施された画像データを、プリンタ１６にプリント出力する画像データに加工するため、３Ｄ（三次元）−ＬＵＴ等を用いて変換する。
【００３５】
条件設定部４８は、プレスキャン画像データがプレスキャンメモリ４０から読み出され、画像処理条件を決定するのに用いられる。
具体的には、プレスキャン画像データから、濃度ヒストグラムの作成や、平均濃度、ＬＡＴＤ（大面積透過濃度）、ハイライト（最低濃度）、シャドー（最高濃度）等の画像特徴量の算出等を行い、加えて、必要に応じて行われるオペレータによる指示に応じて、前述のグレイバランス調整等のテーブル（ＬＵＴ）や彩度補正を行うマトリクス演算の作成等を行い、画像処理条件を決定する。決定された画像処理条件は、さらに、キーボード１８ａおよびマウス１８ｂを有する操作系１８で調整され、画像処理条件が再設定される。
【００３６】
また、撮影日時データや撮影位置などの撮影情報の少なくとも一部に関連する付加情報を選択する際に、ユーザの希望に応じて項目を指定するために、キーボード１８ａやマウス１８ｂを用いる。
なお、モニタ２０は、プレスキャン画像データの画像処理が適切かどうか、オペレータが確認、検定するものであり、画像データ変換部５２を介して画像処理装置１４と接続される。
【００３７】
なお、図４は主に画像処理関連の部位を示すものであり、画像処理装置１４には、これ以外にも、画像処理装置１４を含むデジタルフォトプリンタ１０全体の制御や管理を行うＣＰＵ、デジタルフォトプリンタ１０の作動等に必要な情報を記憶するメモリ、本スキャンの際の可変絞り２４の絞り値やＣＣＤセンサ３４の蓄積時間を決定する手段等が配置される。
【００３８】
付加情報取得部６２は、本発明の特徴とする部分であって、撮影日時や撮影位置や撮影方位や撮影倍率の撮影情報に基づいて付加情報を選択する付加情報選択部６２ａおよび付加情報として引用するデータを蓄えた百科事典等のデータベースや撮影された画像内の被写体の特定のために用いられる地図データベースや著名な山などの撮影画像を蓄えた撮影画像データベースを有するデータベース部６２ｂから構成される。
【００３９】
まず、付加情報取得部６２が、撮影情報として撮影日付や撮影時刻などの撮影日時データを用い、この撮影日時データの少なくとも一部に関連する付加情報を取得する本発明の第１実施形態について説明する。
本実施形態では、付加情報取得部６２の付加情報選択部６２ａは、付加情報として引用されるデータを格納したデータベース部６２ｂの中から撮影日時データの少なくとも一部と関連するデータを引用して付加情報として選択する。
【００４０】
図５（Ａ）および図５（Ｂ）は、それぞれ付加情報取得部６２で行う付加情報の取得を中心に、その流れを示している。
新写真システムＡＰＳの場合、図５（Ａ）に示す様に、スキャナ１２のキャリア３０に設けられている磁気読み取り書き込み装置３１でフィルムＦに磁気記録された撮影日時データである撮影日付および撮影時刻の少なくとも一方の情報、またすでに記録されている付加情報が読み込まれ、スキャナ１２から画像データと別の経路で付加情報取得部６２へ送られ、取得される。付加情報取得部６２内の付加情報選択部６２ａで、引用されるデータを格納した百科事典等の大きなデータベース部６２ｂの中から、その撮影日付や撮影時刻の年、月、日および時刻の少なくとも一つを単位としてデータを検索し選択して付加情報を取得する。また、磁気記録されている付加情報を読み取った場合、ユーザの希望に従い、読み取った付加情報をそのまま付加情報として取得し、写真プリントに付加することができる。
【００４１】
また、通常の１３５サイズのフィルムにおいては、図５（Ｂ）に示す様に、現像前に撮影日付や撮影時刻また付加情報をフィルムＦに光学的に焼き付け、フィルム画像にすでに撮影日付や撮影時刻また付加情報を表示している場合がある。その場合、光学的に焼き付けられた文字等は、そのフィルム撮影領域の内、焼き付けられる場所がおよそ決まっており、また、その色濃度も高いため判別が容易にでき、フィルム画像から公知の文字認識技術により文字認識し、撮影日時データである撮影日付や撮影時刻のデータまた光学的に記録されている付加情報を読み出しデータが取得される。さらに、取得した撮影日時データの中の年、月、日および時刻の少なくとも一つを単位としてデータベース部６２ｂからデータを検索し選択して付加情報を取得することができる。また文字認識により付加情報が読み出され取得されている場合は、ユーザの希望に応じて、読み取った付加情報をそのまま、または加工して取得することもできる。
【００４２】
前述したように、デジタル画像データをフロッピーディスク等の画像記録媒体２５からドライブ装置２６を介して、通信ネットワークを介してスロット２７から取得する場合、デジタル画像データのヘッダ部に記録された撮影日時データやすでに記録されている付加情報を読み取り、付加情報部６２へ送る。以下、新写真システムＡＰＳの場合と同様に、データの検索や選択を通じて、付加情報が取得される。
【００４３】
例えば、取得された撮影日付が３月３日の場合は、雛祭に関する文書や画像を、また３月の祭りや花や鳥等を選択する。ユーザが「花」を項目として指定すれば花に関する撮影日付や撮影時刻に関連したデータを、ユーザが「ニュース」を項目として指定すればニュースに関する撮影日付や撮影時刻に関係したデータを、「音楽」や「映画」を項目として指定すれば、撮影日付に流行した音楽の曲名や映画の題名等のデータを付加情報として選択する。
【００４４】
なお、上記「花」、「ニュース」、「音楽」や「映画」等の項目を、ユーザが画像に付随してユーザ指定データとして指定することができるが、その指定は、ネガフィルムの現像と同時にプリント出力をする同時プリントの出力サービス時やプリント出力のみをする再プリントの出力サービス時に、ユーザが注文表で直接指定する方法やプリントの出力サービスを行う者がユーザのデータベースを予め初期登録し、それに基づいて項目を指定する方法で、さらには新写真システムＡＰＳにおいては、新写真システムＡＰＳに対応するカメラ等によって磁気記録層Ｓ２に磁気記録された項目を、キャリア３０に設けられている磁気読み取り書き込み装置３１で読み取り、その項目を指定データとすることでユーザ指定データを取得することができる。
【００４５】
付加情報として取得されるデータは、文章や単語のほか、図形や記号や画像等であってもよい。例えば、数字による撮影時刻のデジタル表示のかわりに、撮影時刻を示す長針や短針を表現したアナログ時計表示の図形であってもよく、また撮影日付の月や日の表示を、一周を一年とした円として、また、一周を一月とした円として、アナログ針の表示をしてもよい。また、撮影日付を、曜日付きのカレンダーで表示し、赤丸等で印をつける表示であってもよい。アナログ表示をすることで、撮影日付や撮影時刻の情報を視覚的に理解でき、撮影時の状況を容易に振り返ることができるからである。
【００４６】
また、付加情報取得部６２において、ユーザ指定データとして指定した項目や付加情報として選択した付加情報は、同一のユーザが行う次回のプリント依頼の出力サービス時に同一の付加情報を選択しないように、付加情報取得部６２のデータベース部６２ｂ内に設けられたユーザ管理データベースに記録しておくことができる。ユーザにとっては、プリントごとに異なる付加情報を得られるので、飽きがなく、出力された仕上がりプリントの娯楽性を維持することができる。
【００４７】
新写真システムＡＰＳにおいては、本スキャン読み取り時にフィルムＦがキャリア３０によって搬送される間に、磁気読み取り書き込み装置３１で、付加情報として選択されたデータを、フィルムＦの磁気記録層Ｓ２へ磁気記録することができ、この記録されたデータを再プリント注文時に読み出し、ユーザの希望に応じて、磁気記録された付加情報と同一の付加情報を提供しないように他のデータを、また、磁気記録された付加情報と同一のデータを、付加情報として選択することができる。
通常の１３５サイズのフィルムにおいては、ネガフィルムを現像する前に、付加情報を光学的に焼き付け、再プリント注文時に同一の付加情報を、もしくはユーザの希望に応じて、そのデータを加工した付加情報を提供でき、付加情報の取得の処理が簡略化できる。
【００４８】
次に、付加情報取得部６２が、撮影情報として撮影位置、撮影方位および撮影倍率などのデータを用い、これらのデータの少なくとも１つに関連する付加情報を取得する本発明の第２実施形態について説明する。
本実施形態でも、付加情報取得部６２の付加情報選択部６２ａは、第１実施形態と同様に、付加情報として引用されるデータを格納したデータベース部６２ｂの中から撮影位置、撮影方位および撮影倍率などの撮影情報の少なくとも一部と関連するデータを引用して付加情報として選択する。
図６は、付加情報取得部６２で行われる付加情報の取得を中心に、撮影位置、撮影方位および撮影倍率のデータなどの撮影情報の取得からプリント出力するまでの流れを示している。
【００４９】
新写真システムＡＰＳの場合、図３に示される新写真システムＡＰＳ対応フィルムＦの領域Ｓ２に磁気記録層が形成されており、撮影情報を記録することができるため、人工衛星を用いたＧＰＳ（Global Positioning System)を利用し、さらに方向探知機用方位指示器を付加した新写真システムＡＰＳ対応カメラで撮影すると、撮影した緯度、経度および高度さらには、水平面および垂直面に関する撮影方位角が記録される他、撮影時の撮影倍率も記録することができる。この記録された情報は、スキャナ１２のキャリア３０に設けられている磁気読取書込装置３１で読み込まれ、スキャナ１２から画像データと別の経路で付加情報取得部６２へ送られ、撮影位置からなる第１のデータ構成、撮影位置と撮影方位からなる第２のデータ構成、撮影位置と撮影倍率からなる第３のデータ構成、および撮影位置と撮影方位と撮影倍率からなる第４のデータ構成等のいずれか一つの構成のデータよりなる、撮影画像に関連づけて取得される撮影情報を取得する。
【００５０】
取得した撮影情報である撮影位置、撮影方位、および撮影倍率などからなる第１〜第４のデータ構成のいずれか１つの構成のデータを用いて、データベース部６２ｂ内の地図データベースを参照して、撮影された画像の被写体や撮影地点を特定する。被写体や撮影地点の特定は、以下のように行う。
例えば、撮影された被写体が山である場合、その山が何であるかや、どの地点にあるかを特定するには、得られた撮影位置と方位から地図データベースを用いて特定する。複数の人工衛星からの信号をもとに位置を正確に知ることのできるＧＰＳを利用することで、撮影した位置、すなわち経度、緯度および高度を得ることができる。これらの経度、緯度および高度の位置に関する測位精度は１００ｍ以内であり実用上問題はなく、方位角についても方向探知機用方位指示器を用いることで方位を精度よく測定できるので、撮影倍率データに依存して定まる地図上の所定の画角内に収まる対象物と撮影された被写体を照合することで、撮影被写体や撮影地点を地図データベース上の対象物として特定することができる。なお、撮影地点には、画面内に写っている、撮影画像内の被写体の位置、すなわち撮影された地点（位置）のみならず、撮影者またはカメラの位置などの撮影する位置、すなわち撮影位置を含めてもよい。こうすることにより、撮影画像の内の被写体だけでなく、撮影位置そのものに関する情報も付加情報として撮影画像に付加することができるからである。
【００５１】
さらに、一層精度が要求される場合や撮影位置や撮影方位さらに撮影倍率の精度がなんらかの理由で不十分な場合においても、地図データベースを利用して、撮影位置や撮影方位や撮影倍率を精度良く知ることができ、被写体や撮影地点を詳細に特定できる。つまり、撮影情報をもとに地図データベースによる３次元コンピュータグラフィック画像を公知のコンピュータグラフィック（以下、ＣＧと称する）作成手法により作成し、この作成されたＣＧ画像と実際の撮影された画像とのパターンマッチング、例えば、得られた撮影位置や撮影方位や撮影倍率データをもとに地図データベースから作成したＣＧ画像の山の稜線と撮影画像上の山の稜線との間で、２次元的にＣＧ画像の画素をずらしながらパターンマッチングを行い、もっともマッチするような位置および方位さらに撮影倍率を算出することで、撮影位置や撮影方位や撮影倍率を高い精度で知ることができ、その結果被写体の山やその山のある地点を特定できるのである。なお、撮影画像上の山の稜線は、画素の色濃度の違いからエッジを抽出して行う。
【００５２】
このようにして撮影位置や撮影方位や撮影倍率を精度良く知ることで、地図データベースから撮影された山の位置（地点）や撮影された山の一つ一つの山名等を詳細に特定できるのである。
被写体および撮影地点の少なくとも一方が特定されるとデータベース部６２ｂ内の百科事典等のデータベースからユーザの注文に応じて、付加情報として引用すべきデータを検索し選択する。例えば、付加情報として、山名のみ、あるいは山名、標高および歴史についての文字データや文書データや音声データなどを付加情報として取得する。また、データベース部６２ｂ内の著名な山などの撮影画像を蓄えた撮影画像データベースから静止画データや動画データを付加情報として取得し、最適な撮影画像（静止画または動画）を選択する。こうして得られた文字データや文書データや静止画データなどの付加情報を、撮影された画像に合成してまたは付加して写真プリントと出力しても良いし、文字データや文書データや音声データや静止画データや動画データなどの付加情報を、表示手段であるモニタ２０の表示された撮影画像に合成して、もしくは付加して出力するようにしても良い。また、撮影地点に関する情報として、各被写体間の距離または撮影位置と各被写体間の距離等を付加してもよい。
【００５３】
プリント出力された写真プリントが、図７（Ａ）および図７（Ｂ）に例示されている。
図７（Ａ）に示す写真プリントは、被写体情報、被写体名である山名および撮影場所に関する情報である撮影位置の名称等を文字データとして撮影画像に合成し、また、該当する山の標高や歴史を百科事典等のデータベースから引用し、文書データを写真プリント裏面に裏印字している。
【００５４】
図７（Ｂ）に示す写真プリントは、背景である山の被写体が雲により見えない場合である。この場合、データベース部６２ｂ内の撮影画像データベースに予め撮影された著名な被写体の画像をデータベース化して蓄えているが、そのデータベース化した複数の画像の中から最も撮影情報が近い被写体が写っているデータベース化した画像を選択し、撮影情報を基にして撮影フィルムの画像の構図および被写体の大きさに合わせて修正し、撮影フィルムの画像に合成する。撮影画像データベース内では、著名な山の画像を撮影位置や撮影方位別に、また季節別にデータベース化しているので、取得した撮影位置、撮影方位や撮影倍率さらには撮影日時等の撮影情報と最も近いデータベース化した画像を選び出すことができるのである。撮影位置、撮影方位や撮影倍率等のデータの精度が低い場合は、上述したように、精度の低い撮影位置や撮影方向や撮影倍率データを基準として地図データベースによる３次元ＣＧ画像を公知のＣＧ作成手法により作成し、作成されたＣＧ画像と実際の撮影された画像とのパターンマッチングを行い撮影位置や撮影方位や撮影倍率を高い精度で知ることができる。
【００５５】
図７（Ｂ）に示される写真プリントは雲に隠れて被写体が見えない画像にデータベース化した画像の被写体を合成する場合であるが、そのほかに、撮影画像の被写体がピンボケで不鮮明な場合においてもデータベース化した画像の被写体を撮影画像に合成する場合においても有効である。
【００５６】
また、撮影画像の被写体に関連する図形や撮影画像とパターンマッチングした３次元ＣＧ画像、たとえば等高線ＣＧ画像を撮影画像に合成してもよく、被写体に応じてスケール表示、例えば被写体が山の場合、写真プリント上１ｃｍ当たり高さ５０ｍを意味するスケールの表示等を撮影画像に合成してもよく、また撮影地点がもっとも近いデータベース化した画像を、また撮影地点とは別の角度から撮影したデータベース化した画像やＣＧ画像、例えば見どころの角度のシーンや、別の季節のシーン、見どころの季節のシーンや裏側からのシーンや鳥瞰的シーン等の画像を付加してもよい。
【００５７】
また、写真プリントに付加する付加情報は、撮影された被写体に関する付加情報の他、撮影地点、場所に関する付加情報であってもよく、撮影地点と各被写体との距離や標高差などの測量的データ、撮影された各被写体間の距離等を付加情報として付加してもよい。
写真プリントへの付加は、撮影画像の写真プリントの裏面にも感光層を設けて付加情報を露光・焼付けして裏プリントしてもよい。さらに、多量な文書データを付加情報として付加する場合であって、同一の被写体が複数のコマに撮影されている場合、撮影コマ順に複数の写真プリントに裏印字してもよい。このように付加することで、写真プリントの娯楽性が一層向上する。
【００５８】
なお、新写真システムＡＰＳの場合、プリント出力するために特定された被写体に関する付加情報等を、図３に示すフィルム上の領域Ｓ２に設けられた磁気記録層にキャリア３０の磁気読み取り記録装置３１を用いて記録し、次回のプリント出力サービスを受ける際、被写体の特定や付加情報とする引用データの検索を簡略化することができる。
なお、撮影位置に関する情報は、ＧＰＳ以外の方法を利用して得られる撮影位置情報であっても良く、例えば、方位は可変で位置のみ固定されている観光地等の展望台に設置されている双眼鏡のようなカメラを利用することで、少なくとも撮影位置は正確に判っているので、被写体を容易に特定することができるのである。
【００５９】
さらに、本出願人の出願に係る特願平９ー２４５７４８号公報において、デジタルデータ記録カメラで記録されたデジタルビットパターンの技術を開示しているが、付加情報取得部６２は、付加情報選択部６２ａで取得された付加情報を、スキャナ１２に逆送して、図８に示す様にフィルムＦの未撮影かつ未現像のコマの部分を光学的に焼き付けることもできる。これによって、デジタルビットパターン化したデジタルデータ記録コマを設けることができ、フィルムの現像サービスと同時プリントのサービスを受けている場合、その部分に撮影日付や撮影時刻に基づくデータを付加情報としてデジタルデータ部Ｄ３に書き込むことが可能となっているし、予め撮影被写体等の情報が判っている時は、そこに撮影位置や方位に基づく付加情報を書き込んでもよい。フィルムへの書き込み時、デジタルデータのコマであることを判定をさせるため、識別データＤ１を設けている。
【００６０】
なお、上述した例では、撮影画像が可視画像として再生された写真プリントにおいて、撮影画像と関連する付加情報を、写真プリントの表側の撮影画像の再生画像に合成し、または写真プリントの裏側に裏印字し、もしくは写真プリントの裏側に裏プリントしているが、本発明は、このように付加情報を写真プリントに付加する場合に限定されず、例えば、撮影画像の再生可視画像を表示する表示手段において、表示再生可視画像（ソフトコピー画像）に付加情報を付加するものであってもよい。
例えば、表示手段としては、モニタ２０のような表示モニタや、プロジェクタや、フォトプレーヤなどを挙げることができ、これらの表示手段に撮影画像およびその付加情報を両方同時にまたは一方づつ切り換えて再生処理を行って表示することができる。
【００６１】
例えば、モニタ２０は、撮影画像を再生した可視画像を表示するとともに、本発明の画像再生方法に従って表示された再生可視画像（表示画像）内に付加情報を合成して表示する、あるいは表示画像にリンクして付加情報を表示する表示手段（ディスプレイ）としても利用できる。表示画像と付加情報のリンクおよび付加情報の表示は、特に制限的ではなく、モニタ２０のスクリーン（画面）の所定部分、例えば、メニューバーや、表示画像上の特定部分、例えば被写体をマウス１８ｂ等によってクリックすることによって、表示画像に付加されるべき付加情報、例えば、表示再生可視画像や撮影画像の撮影状況や撮影画像の被写体自体に関する解説情報などを、モニタ２０のスクリーンの表示画像の一部あるいはスクリーンの一部または全部に表示するものであってもよいし、スピーカ等の音声出力手段２１によって音声で出力するものであってもよい。
もちろん、本発明においては、モニタ２０とは別にディスプレイおよび音声出力手段等を有するパーソナルコンピュータを画像処理装置１４に接続し、本発明の画像再生方法によって付加情報が合成された合成画像や、表示画像とリンクした付加情報を表示または音声出力するようにしてもよい。
【００６２】
画像表示装置（モニタ）に再生することを目的としたフォトプレーヤを用いる場合、コマの種類の判定の結果によって、通常の撮影された画像は、所定の画像処理が施されフォトプレーヤの画像表示装置に出力される一方、デジタルビットパターン（デジタルデータ記録コマ）の場合は、データに応じて、データ（付加情報など）が解読され付加情報として出力される。この場合、付加情報は、文章や単語、図形や記号のほか、動画や音声も付加情報として扱うことができ、動画は画像表示装置に、音声はスピーカ等の音声出力手段から出力される。
また、付加情報が付加されたデジタル画像データは、プリンタ１６において画像再生されて写真プリントとして出力されるのみならず、ドライブ装置２６によってフロッピーディスクやＭＯやＺｉｐ等の画像記録媒体２５にも記録することができる。この場合、デジタル画像の再生の際、フォトプレーヤやパーソナルコンピュータは画像記録媒体から付加情報が付加された画像を呼び出し、その画像再生装置に表示する事ができ、また画像再生装置上で特定される被写体をマウス等で指定することで、撮影状況や被写体に関する解説情報などの付加情報を呼び出し、画像表示装置上に表示することができる。
【００６３】
なお、プリンタ１６は、印画紙などの反射型モノクロまたはカラー感光材料に反射ポジ画像（ハードコピー画像）として出力するものであるが、本発明はこれに限定されず、リバーサルフィルムやオーバーヘッドプロジェクタ用フィルムのような透過型モノクロまたはカラー感光材料に透過ポジ画像（ソフトコピー画像）として出力するものであってもよい。このような場合にも、付加情報が合成された透過ポジ画像を出力し、得られた透過ポジ画像をプロジェクタによって投影してスクリーンに再生可視画像を表示するものであってもよい。なお、この時、プロジェクタでの撮影画像の再生処理に合わせて、付加情報を音声出力してもよい。
本発明において用いられるプロジェクタとしては、フィルムを投影する通常のプロジェクタの他、このフィルムを投影するプロジェクタの構造において、フィルムに相当する位置に液晶表示装置を置き、この液晶表示装置に画像を表示させて、その透過光をスクリーンに投影する構成のプロジェクタを含んでいてもよい。
【００６４】
上述した例では、撮影情報や付加情報は、ＡＰＳフィルムの撮影コマに対応する磁気記録層への磁気記録、写真フィルムへの撮影コマに対応した光学的記録、ＩＣメモリ付きフィルムカートリッジのＩＣメモリへの撮影コマに対応した記録およびデジタルカメラ用画像記録媒体や汎用画像記録媒体への撮影コマのデジタル画像データに対応した記録（ヘッダ記録）のいずれか少なくとも１つを利用して、取得され、かつ記録されているが、本発明は、このように撮影画像または撮影画像データと、撮影情報または付加情報とが物理的に一体に記録されているものに限定されず、両者が物理的に別々に分離して記録されているものであってもよい。
【００６５】
ここで、撮影画像または撮影画像データが記録される撮影画像データ記録部と撮影情報または付加情報が記録される情報記録部とが物理的に分離されている場合には、撮影コマ識別情報と撮影情報または付加情報とをセットにすることにより、従来公知のデータ記録媒体、例えば、ＦＤ，ＣＤ−Ｒ，ＭＯ，ＤＶＤ等の記録媒体に記録したり、データベースとして、例えば、付加情報取得部６２のデータベース部６２ｂにラボ管理用として記録したり、通信ネットワーク経由で指定された記録先に記録することができる。
このような分離記録の場合に用いられる撮影コマ識別情報としては、例えば、ＡＰＳフィルムや１３５フィルム等の写真フィルムに撮影画像が記録されている場合、フィルムまたはカートリッジＩＤなどの識別情報と撮影コマ番号情報を用いることができ、デジタルカメラのように撮影画像のデジタル画像データが記録されている場合には、画像ファイル名を用いることができる。
【００６６】
本発明の写真プリント装置の一実施例のデジタルフォトプリンタ１０の画像処理装置１４は、基本的に以上のように構成されるが、以下に、その作用および本発明の画像再生方法について説明する。
スキャナ１２でプレスキャンされ読み取られたプレスキャン画像データは、デジタル入力画像データとして処理部３８でＬｏｇ変換、ＤＣオフセット補正、暗時補正、シェーディング補正等の各処理が施された後、プレスキャンメモリ４０に記憶される。また、条件設定部４８からプレスキャンメモリ４０に記憶されたプレスキャン画像データは呼び出され、画像特徴量の算出等を行い画像処理条件が自動的に決定され、またオペレータの指示により調整された後、定まった画像処理条件の下、プレスキャン画像処理部４４の画像処理部５０で色バランス調整、色濃度補正や明るさ補正およびコントラスト補正や彩度補正、さらには、撮影レンズに起因する倍率色収差や歪曲収差などの収差の補正が行われ、またオペレータの指定により、シャープネス処理や覆い焼処理（濃度ダイナミックレンジの圧縮／伸長）が行われた後、画像データ変換部５２に送られ、３Ｄ（三次元）−ＬＵＴ等を用いて変換して、モニタ２０の表示に対応する画像データに加工された後、モニタ２０に表示される。
【００６７】
なお、デジタルカメラ等で撮影されたデジタル画像の場合、フロッピーディスクやＭＯやＺｉｐ等の画像記録媒体からディスクドライブを介して画像データを得、また通信ネットワークから画像データを得ることができ、その場合、プレスキャンメモリ４０および本スキャンメモリ４２に画像データが記憶され、以降の画像処理はスキャナ１２で読み取られた画像データと同様の処理が行われる。
【００６８】
このように、プレスキャン画像データの補正等の画像処理が行われる一方、付加情報取得部６２では、付加情報の取得が同時に行われる。
新写真システムＡＰＳの場合、スキャナ１２のキャリア３０に設けられている磁気読取書込装置３１で読み込まれたフィルム磁気記録層Ｓ２に記録された情報である撮影日付および撮影時刻の少なくとも一方を含む撮影日時、撮影位置、撮影方位および撮影倍率等の撮影情報は、スキャナ１２から画像データと別の経路で付加情報取得部６２へ送られる。
【００６９】
本発明の第１実施形態では、付加情報選択部６２ａでは、その撮影日付および撮影時刻の少なくとも一部の情報と関連するデータを、百科事典等の大きなデータベース部６２ｂの中から付加情報として選択する。
また、新写真システムＡＰＳ以外の通常の１３５サイズのフィルムにおいては、撮影日付や撮影時刻をフィルムＦに光学的に焼き付けている場合、光学的に焼き付けられる文字は、その撮影コマの内、場所がおよそ決まっており、また、その色濃度も高いため、判別が容易にでき、フィルム画像から公知の文字認識技術により年、月、日および時刻について文字認識して読み出し、読み出された年、月、日および時刻の少なくとも一つを単位として、百科事典等の大きなデータベース部６２ｂからデータを検索し選択して付加情報を取得する。
【００７０】
再プリントサービス時に、磁気記録層Ｓ２から以前のサービスで磁気記録した付加情報を取得した場合、ユーザの希望に応じてそのまま付加情報とし、あるいはデータベース部６２ｂから他のデータを検索し、付加情報として選択する。また、光学的に付加情報がフィルムに焼き付けられている場合、ユーザの希望に応じて、読み取った付加情報をそのまま、あるいは、付加情報を加工した付加情報を取得する。
ユーザ指定データの項目の指定は、プリントの出力サービス時にユーザが直接指定した項目をオペレータがキーボード１８ａやマウス１８ｂを用いて指定することで、また、予め初期登録したユーザのデータベースを参照することで、さらには新写真システムＡＰＳにおいては、新写真システムＡＰＳに対応するカメラ等によってフィルムＦ上に形成されている磁気記録層Ｓ２に記録したユーザ指定データを、磁気読み取り書き込み装置３１で読み取ることで行う。
【００７１】
一方、本発明の第２実施形態においては、付加情報選択部６２ａでは、取得した撮影位置、撮影方位および撮影倍率の撮影情報に基づいてデータベース部６２ｂにある地図データベースを参照し、必要に応じて、地図データベースを参照して作られた３次元ＣＧ画像と撮影画像とのパターンマッチングを行ない、撮影画像内の被写体の特定を行う。さらに、特定した被写体に関する文字データや文書データさらには画像データをデータベース部６２ｂから検索、選択する。文字データや文書データは、百科事典等のデータベースから、画像データは予め撮影された著名な山などの撮影画像データベースの中から、検索し選択する。
【００７２】
再プリントサービス時に、磁気記録層から以前のプリントサービスの際に磁気記録した付加情報に関する内容を取得した場合、読み取った付加情報の内容にしたがって付加情報を付加することができ、付加情報の検索や選択の処理が簡略化できる。
選択された付加情報の写真プリントへの付加方法については、キーボード１８ａおよびマウス１８ｂを有する操作系１８を用いて、オペレータが指定する。例えば、撮影被写体が山である場合、特定された山について山名のみを写真プリントに付加するのか、プリント裏面にのみ山名、標高および歴史を裏印字するのか等を指定する。
なお、本発明においては、第１および第２実施形態に分けて説明しているが、本発明は、これらを別々に実施するものに限定されず、両者を一緒に実施してよいことはもちろんである。
【００７３】
プレスキャン画像についてモニタ２０ですべて確認し、検定し、さらに付加する付加情報を取得し、写真プリントへの付加方法について指示した後、設定された画像処理条件の下に、本スキャンされ、画像が読み取られる。データ処理部３８でプレスキャン画像データと同様の処理が施され、本スキャン画像データとして本スキャンメモリ４２に記憶される。
画像処理部５４では、記憶された本スキャン画像データが本スキャンメモリ４２から読み出され、決定された画像処理条件の下で、色バランス調整、明るさ補正およびコントラスト補正や彩度補正、さらには、撮影レンズに起因する倍率色収差や歪曲収差などの収差の補正や写真プリントの出力サイズに応じて画像を電子変倍処理が行われ、またオペレータの指定により、シャープネス処理や覆い焼処理（濃度ダイナミックレンジの圧縮／伸長）が行われる。
【００７４】
なお、付加情報取得部６２で取得された付加情報が撮影された画像とともに合成される場合、文字データや文書データや画像データが呼び出され、必要に応じて文字データや文書データは、ビットマップ展開され、本スキャンの画像処理部５４に供給され、所定の方法で画像合成が行われる。
各種の画像処理が画像処理部５４で施された後、画像データ変換部５８に送られ、画像変換された後、プリンタ１６への出力に対応する画像データに加工された後、プリンタ１６へ出力される。また、付加情報取得部６２で文字データや文書データの裏印字（バックプリント）を選択した場合は、付加情報としての文字データや文書データがそのままプリンタ１６へ送られる。
【００７５】
プリンタ１６は、供給された画像データに応じて感光材料（印画紙）を露光して潜像を記録する記録装置（焼付装置）と、露光材の感光材料に所定の処理を施して写真プリントとして出力するプロセサ（現像装置）とから構成される。
記録装置では、感光材料を写真プリントに応じた所定長に切断した後に、画像処理装置１４の条件設定部４８から送られてきた、付加情報取得部６２で取得された文字データや文書データ、さらに、特定された被写体に関する文書データや文書データをドットインパクトプリンタやインクリボンプリンタ等のバックプリント手段によって裏印字（バックプリント）する。また、場合によっては裏プリントする。ついで、感光材料の分光感度特性に応じたＲ露光、Ｇ露光、Ｂ露光用の３種のビームを画像処理装置１４から出力された画像データに応じて変調して主走査方向に偏向するとともに、主走査方向と直交する副走査方向に感光材料を搬送することにより、前記光ビームで感光材料を２次元的に走査露光して潜像を記録し、プロセサに供給する。付加情報取得部６２で付加情報を画像に合成することを選択した場合、すでに画像処理部５４で合成されているため、付加情報を合成しない画像の場合と同様に潜像を記録する。感光材料を受け取ったプロセサは、発色現象、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥して写真プリントとしてフィルム１本分等の所定単位に仕分けして集積する。
本発明の画像再生方法および装置は、基本的に以上のように構成される。
【００７６】
以上、本発明の画像再生方法および装置について詳細に説明したが、本発明は上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【００７７】
【発明の効果】
以上詳述したように、本発明によれば、写真フィルムに撮影された画像からスキャナ等で読み取られたデジタル画像データ、あるいはデジタルカメラ等で撮影して得られたデジタル画像データに、所定の画像処理を施した出力画像データに応じた画像を写真プリントや表示画像として出力する際に、撮影画像に付随させて、撮影情報、例えば、第１実施形態では、撮影日時データの少なくとも一部、第２実施形態では、撮影位置を少なくとも含み、必要に応じて撮影方位および撮影倍率等の少なくとも一部を含む撮影情報を取得し、取得された撮影情報から得られ、その少なくとも一部に関連する付加情報を得、得られた付加情報を写真プリントや表示画像に付加することで、ユーザが写真プリントや表示画像を見て、撮影当時を容易にまた直感的に振り返ることができ、メモ的機能を持ち実用性にも優れ、また、ユーザの好みに応じた娯楽性の強い画像を持つ娯楽性の高い写真プリントや表示画像をユーザに提供することができる。
【図面の簡単な説明】
【図１】本発明の画像再生方法を実施する本発明の画像再生装置の一実施例のブロック図である。
【図２】（Ａ）は、図１に示される画像再生装置のスキャナの要部を模式的に示す斜視図であり、（Ｂ）は、（Ａ）に示されるスキャナに用いられるイメージセンサの概念図である。
【図３】図１に示される画像再生装置のスキャナにセットされる新写真システムのフィルムの平面図である。
【図４】図１に示される画像再生装置の画像処理装置の一実施例のブロック図である。
【図５】（Ａ）および（Ｂ）は、それぞれ本発明の画像再生方法のフローの一例を示すフローチャートである。
【図６】本発明の画像再生方法のフローの別の一例を示すフローチャートである。
【図７】（Ａ）および（Ｂ）は、それぞれ本発明の画像再生方法および画像再生装置を用いてプリントした写真プリントの実施例を示す模式図である。
【図８】本発明の画像再生方法によってデジタルデータを焼き付けたネガフィルムの一例を示す模式図である。
【符号の説明】
１０（デジタル）フォトプリンタ
１２スキャナ
１４画像処理装置
１６プリンタ
１８操作系
１８ａキーボード
１８ｂマウス
２０モニタ
２１音声出力手段
２２光源
２４可変絞り
２５画像記録媒体
２６ドライブ装置
２７スロット
２８拡散ボックス
２９マスク
３０キャリア
３１磁気読取書込装置
３２結像レンズユニット
３３フィルムカートリッジ
３４ＣＣＤセンサ
３６アンプ
３７Ａ／Ｄ（アナログ／デジタル）変換器
３８データ処理部
４０プレスキャン（フレーム）メモリ
４２本スキャン（フレーム）メモリ
４４プレスキャン画像処理部
４６本スキャン画像処理部
４８条件設定部
５０，５４（画像）処理部
５２，５８画像データ変換部
６２付加情報取得部
６２ａ付加情報選択部
６２ｂデータベース部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image reproduction method and apparatus, and more specifically, photoelectrically reads an image of a subject photographed on a photographic film by a conventional camera to obtain digital image data, or digitally captures an image of a subject photographed by a digital camera. The present invention belongs to a technical field related to image processing when image data is obtained, subjected to predetermined image processing, reproduced as a visible image, and output to a photographic print or display means.
[0002]
[Prior art]
Currently, printing of images taken on photographic films (hereinafter referred to as films) such as negative films and reversal films onto photosensitive materials (printing paper) is performed by projecting the film images onto photosensitive materials and exposing the photosensitive materials to surface exposure. The so-called direct exposure (analog exposure) is performed.
[0003]
On the other hand, in recent years, an image of a shooting frame photographed by a printing apparatus using digital exposure, that is, a conventional camera and recorded on a photographic film is photoelectrically read, and the read image is obtained as digital image data. Later, or after obtaining digital image data of an image of a shot frame taken by a digital camera, various image processing is performed to obtain image data for recording, and the photosensitive material is scanned with recording light modulated in accordance with the image data. Digital photo printers that have been exposed to record images (latent images) to produce (finished) photographic prints have been put into practical use.
[0004]
In digital photo printers, images can be converted into digital image data, and the exposure conditions during printing can be determined by image data processing. Therefore, correction of image skipping and blurring caused by backlighting, flash photography, etc., and sharpness (sharpening) Processing, color feria and density feria correction, underexposure and overexposure correction, peripheral light insufficiency correction, and the like can be suitably performed to obtain a high-quality photographic print that cannot be obtained by conventional direct exposure. Moreover, composition of multiple images, image division, and composition of characters can also be performed by image data processing, and photographic prints that are freely edited / processed according to applications can be output.
Moreover, according to the digital photo printer, not only the image can be output as a photographic print, but also the image data can be supplied to a computer or the like or stored in an image recording medium such as a floppy disk. It can be used for various purposes other than photography.
[0005]
Such a digital photo printer basically has a scanner (image reading device) that photoelectrically picks up an image recorded on a film, and performs image processing on the read image to obtain recorded image data (exposure conditions). The apparatus includes a printer (image recording apparatus) that scans and exposes a photosensitive material in accordance with the recorded (output) image data, develops the photosensitive material, and produces a photographic print.
[0006]
In a scanner, reading light emitted from a light source is incident on a film to obtain projection light carrying an image photographed on the film, and this projection light is imaged on an image sensor such as a CCD sensor by an imaging lens. Then, the image is read by photoelectric conversion, subjected to various image processing as required, and then sent to the image processing apparatus as film input image data (image data signal).
The image processing device sets image processing conditions from input image data read by a scanner or read from an image recording medium and sent to the image processing device, and inputs image processing according to the set conditions. It is applied to the image data and sent to the printer as output image data (exposure conditions) for image recording.
In a printer, for example, if the apparatus uses light beam scanning exposure, the light beam is modulated in accordance with output image data sent from the image processing apparatus, and the photosensitive material is scanned and exposed (baked) two-dimensionally. Then, a latent image is formed, and then a predetermined development process or the like is performed to output a photographic print in which an image photographed on the film is reproduced as a visible reproduction image.
[0007]
In addition to a method of reading a photographed image with a scanner and obtaining digital image data, for example, obtaining image data of a digital image photographed with a digital camera or the like and recorded on a floppy disk, an image recording medium such as MO or Zip, In addition, digital image data can be obtained via the network and used as input image data. Image processing conditions are set from the input image data, image processing according to the set conditions is performed on the input image data, and image recording is performed. Can be sent to a printer as output image data (exposure conditions) and printed out as a visible reproduced image.
[0008]
As described above, according to the digital photo printer, not only an image photographed on a film by a conventional camera or a digital image photographed by a digital camera is output as a photographic print, but also by inappropriate photographing conditions at the time of photographing. Even for images with poor image reproducibility, digital image processing is performed to correct backlight scenes, high contrast scenes, underexposure negatives, sharpness, lack of ambient light, etc. It has the feature that it can be output as a photographic print.
[0009]
[Problems to be solved by the invention]
In the current photo print service by digital processing of digital photo print, when the shooting date and time is optically recorded on the film, or in the case of the new photo system APS in which the shooting date and time is magnetically recorded, it is shot on the finished print. You can receive a service that displays the date and shooting time. The service is useful for looking back at the state of shooting by looking at the printed image and the shooting date and time. However, there are cases where it is difficult to sufficiently look back on various situations at the time of shooting only from information on the shooting date and shooting time. In other words, when viewing these photographic print images at a later date, the printed images are looked back at the shooting date and time, but it is often impossible to fully remember what the objective was and how the shot was taken. Further, for example, when a mountain is photographed in the background of an image of a person, there are cases where it is desired to know the name, altitude, and history of the mountain in the background.
On the other hand, in addition to the shooting date and shooting time, it is often possible to easily look back at the time of shooting if there is incidental information, shooting location, and incidental information related thereto.
[0010]
On the other hand, with the spread of personal computers in recent years, it has become easier to perform digital image processing with personal computers, and it is also possible for individuals to combine images by using a scanner or digital camera, or to modify images using photo retouching software. Digital images including photographic prints by digital processing are highly entertaining, in which images are changed according to preference by image composition and image correction. However, in the current digital photo printing service, only the shooting date and time display service is provided for photo printing, and additional information regarding the shooting date and time is added to the image according to the user's (customer) preference. And additional information that matches the content of the captured image cannot be displayed.
In the future, in providing a photo print service that is attractive to users, it is desired to provide the photo print with additional information other than the shooting date and time to enhance the function of the photo print and make it highly entertaining.
[0011]
An object of the present invention is to solve the above-mentioned problems of the prior art, and to add a predetermined image to digital image data obtained by photoelectrically reading from an image recorded on a film or digital image data obtained by photographing with a digital camera or the like. Processed to obtain output image data, and when a visible playback image corresponding to this output image data is output as a photographic print or displayed on a display device such as a monitor, the shooting date and time and shooting are selected according to the user's wishes. Additional information attached to the photographic image, such as the shooting status of the photographic image based on the position, etc. and additional information related to the subject of the photographic image, is added to the photographic print or display image, and the user can easily shoot by viewing the visible playback image. In addition to being able to look back on those days, the functions of photo prints and display images have been enhanced, and photo prints and display images that are highly entertaining according to user preferences can be used. And an image reproducing method and apparatus capable of providing a.
[0012]
[Means for Solving the Problems]
  In order to achieve the above object, the present invention acquires digital image data of an image obtained by photographing a subject, performs predetermined image processing on the acquired digital image data to obtain output image data, and outputs the output image data to the output image data. When reproducing and outputting the captured image as a visible image based on
  Acquiring shooting information including at least a part of shooting date / time data of the shot image and user-specified data in which at least one item is selected from a plurality of items;
  At least a part of the shooting information and additional information related to the user-specified data are searched and selected from the additional information stored in the database in advance, and at least a part of the shooting information and the user-specified data are related Get additional information,
  It is an object of the present invention to provide an image reproduction method characterized by adding the obtained additional information to the photographed image and reproducing it.
  Here, the additional information is searched from at least one of year, month, day and time using at least a part of the photographing date / time data from the additional information stored in advance in a database. The selected additional information is preferable.
  Further, it is preferable to select different additional information for each print based on the user-specified data.
  The item preferably includes at least one of flowers, news, music, and movies.
  Here, the digital image data is digital image data obtained by photoelectrically reading the photographed image of the photographic film that photographed the subject or the photographed image obtained directly by photographing the subject. Digital image data is preferable, and the output of the visible image is preferably at least one of the output of a photographic print and the display on the display means. The display on the display means is the display on the monitor and Preferably, the additional information is at least one of projections by a projector, and the additional information is preferably information related to a date and time or a shooting location at the time of shooting of the captured image, or information related to a subject of the captured image. .
[0013]
The additional information is preferably at least one of character data, document data, audio data, still image data, and moving image data, and when the visible image is output to a photographic print and display means. The additional information is output to the back side of the photographic print, which is combined with at least one of the visible image of the photographic print and the display image of the display means. The visible image printed on the back of the photo print, linked to the visible image displayed on the display means, displayed as at least one of a character, a document, a still image and a moving image, or displayed on the display means It is preferable to link the image and output it as sound.
[0014]
Also, in the above image reproduction method,
At least one of the shooting information and the additional information is recorded on the magnetic recording layer corresponding to the shooting frame on which the shot image of the photographic film having the magnetic recording layer was shot or corresponds to the shooting frame of the photographic film. Recorded optically, recorded in the IC memory of a film cartridge with an IC memory for storing photographic film, corresponding to a shooting frame, or shot on an image recording medium for recording digital image data of the shot image Recorded in correspondence with frames, recorded on a data recording medium in association with photographic film shooting frames or digital image data, or recorded in a database in association with photographic film shooting frames or digital image data Or a recording specified via the network in association with a photograph film frame or digital image data Is recorded by at least one method of either recorded,
When reproducing the captured image of the shooting frame as the visible image, the shooting information or the additional information of the shooting frame is recorded as the magnetic recording layer, the optical recording, the IC memory, the image recording medium, and the data recording. It is preferable that the additional information acquired from the read shooting information or the read additional information is read from the medium, the database, and the recording destination and added to the shot image of the shooting frame and reproduced.
[0016]
  The present invention also provides an image input means for acquiring digital image data of a captured image;
Image processing means for performing predetermined image processing on the digital image data acquired by the image input means to obtain output image data;
An image reproduction device having image output means for outputting the captured image as a visible image based on the output image data output from the image processing means,
Shooting information acquisition means for acquiring shooting information in association with the shot image;
Additional information acquisition means for acquiring additional information related to at least a part of the imaging information acquired by the imaging information acquisition means;
Additional information output means for adding the additional information acquired by the additional information acquisition means to the captured image reproduced as the visible image;
  The shooting information acquisition means acquires at least a part of shooting date / time data attached to the shot image as the shooting information,
  The additional information acquisition means searches the database for storing the additional information and the database using at least a part of the shooting date / time data, and stores the shooting date / time data from the additional information stored in the database in advance. Additional information selection means for selecting the additional information related to at least a part,
  The additional information selection means searches the database based on user-specified data in which at least one item is selected from a plurality of items in addition to at least a part of the shooting date / time data, and the shooting date / time data and the user-specified data It is an object of the present invention to provide an image reproducing apparatus that selects the additional information related to data.
  Here, it is preferable that the shooting information acquisition unit acquires at least a part of a shooting date and a shooting time of the image as the shooting date and time data..
  Further, it is preferable that the additional information selection means selects different additional information for each print based on the user-specified data.
  Also,The items preferably include at least one of flowers, news, music, and movies.
[0018]
  Here, the image input means obtains digital image data of the photographed image directly by reading the digital image data photoelectrically from the photographed image of the photographic film on which the subject is photographed or photographing the subject. Preferably, the image output means is at least one of an image recording means for outputting a photographic print on which the visible image is reproduced and a display means for reproducing and displaying the visible image. The means is preferably at least one of a monitor that displays the visible image and a projector that projects the visible image, and the additional information includes the captured image.Information related to the date and time of shooting or shooting location,Or it is preferable that it is the information relevant to the to-be-photographed image subject.
[0019]
  Further, the image output means is at least one of an image recording means for outputting a photographic print on which the visible image is reproduced and a display means for reproducing and displaying the visible image, and the image output means includes the visible image Is at least one of image recording means for outputting a reproduced photographic print and display means for reproducing and displaying the visible image, wherein the additional information output means expands the additional information into digital image information and outputs the image. Image combining means for combining with digital image data processed by the processing means, output means for outputting the additional information to the back side of the photographic print, back printing means for printing the additional information on the back side of the photographic print, or The additional information is linked to the reproduced visible image of the display means and at least one of a character, a document, a still image, and a moving image. The an audio output means for outputting the additional information linked to the reproduction visible image link means or said display means, for displaying on said display means as a voice Te is preferred.
[0020]
DETAILED DESCRIPTION OF THE INVENTION
An image reproducing method and apparatus according to the present invention will be described below in detail based on preferred embodiments shown in the accompanying drawings.
[0021]
FIG. 1 is a block diagram showing an embodiment of a digital photo printer to which the image reproducing apparatus of the present invention for executing the image reproducing method of the present invention is applied.
The digital photo printer 10 shown in FIG. 1 basically includes a scanner (image reading device) 12 that photoelectrically reads an image taken on a film F, image processing of read image data (image information), and a book. An image processing device 14 for performing various data processing for carrying out the image reproducing method of the invention, operation and control of the entire digital photo printer 10, and a light beam modulated in accordance with image data output from the image processing device 14 And a printer 16 for image-exposing the photosensitive material, developing it and outputting it as a photographic print.
[0022]
Further, the image processing apparatus 14 includes an operation system 18 having a keyboard 18a and a mouse 18b for inputting various conditions input and settings, process selection and instructions, color / density correction instructions, and the like, and a scanner 12. And an image display device (monitor) 20 for displaying various operation instructions, various condition setting / registration screens, and the like.
The scanner 12 is a device that photoelectrically reads an image photographed on the film F, and includes a light source 22, a variable aperture 24, a diffusion box 28 that makes reading light incident on the film F uniform in the surface direction of the film F, It has an imaging lens unit 32, a CCD sensor 34 that is a photo sensor for reading a photographed image of a film, an amplifier 36, and an A / D (analog / digital) converter 37. It is composed of a dedicated carrier 30 that can be attached to the main body.
[0023]
  As the carrier 30, for example, various types of carriers corresponding to a long film such as a 24-size 135 size film and a new photographic system film (APS cartridge) are prepared, as shown in FIG. As shown in the figure, while the film F is held at a predetermined reading position, the extension direction (main scanning direction) of the line CCD sensor of the CCD sensor 34OrthogonalA pair of conveying rollers 30a and 30b that are arranged with the reading position sandwiched in the sub-scanning direction, and the projection light of the film F is regulated in a predetermined slit shape. A mask 29 having a slit 29a extending in the main scanning direction and corresponding to the reading position, and a magnetic reading / writing device 31.
  The film F is held by the carrier 30 and conveyed in the sub-scanning direction, and reading light is incident on the film F. Accordingly, the film F is two-dimensionally slit-scanned by the slits 29a extending in the main scanning direction, and the images of the frames shot on the film F are read.
[0024]
As shown in FIG. 2B, the CCD sensor 34 includes a line CCD sensor 34R that reads an R image, a line CCD sensor 34G that reads a G image, and a line CCD sensor 34B that reads a B image. In the sensor, the line sensor extends in the main scanning direction. The projection light of the film F is separated into the three primary colors R, G and B by this CCD sensor and is read photoelectrically.
Reading light emitted from the light source 22, adjusted in light quantity by the variable aperture 24 and made uniform through the diffusion box 28 is incident on the film F being conveyed while being held at a predetermined reading position by the carrier 30 and is transmitted therethrough. The projection light carrying the image photographed on the film F is obtained.
The projection light of the film F is imaged on the light receiving surface of the CCD sensor 34 by the imaging lens unit 32, is read photoelectrically by the CCD sensor 34, and the output signal is amplified by the amplifier 36 and A / D converted. The digital image data is converted by the device 37 and sent to the image processing apparatus 14 as input image data.
[0025]
In the case of the film F of the new photographic system APS shown in FIG. 3, as is well known, the upper part of the image recording areas G1, G2, etc. of each frame in which the photographed image is recorded on the back surface (non-emulsifier surface) side of the film F. In addition, a magnetic recording layer is formed in the lower region S2, and cartridge ID, film type, and shooting information, such as shooting date and time, shooting date and time, shooting position, shooting direction, shooting magnification, and other data, Additional information based on these shooting information, in particular, additional information related to the subject of the shot image specified by the shooting information or the shooting status of the shot image, and in some cases, added when a previous photo print is ordered. Additional information related to at least a part of shooting information such as additional information is recorded.
These recorded information are simultaneously read by the magnetic reading / writing device 31 when the image of the film F is read by the scanner 12. That is, while the film (cartridge) of the new photographic system APS is set on the carrier 30 corresponding to the film, the film F is conveyed by the carrier 30 in the sub-scanning direction and read by the CCD sensor 34 as shown in FIG. Information magnetically recorded by the magnetic reading / writing device 31 is read, and various information including photographing information is sent to the image processing device 14. In some cases, the magnetic reading / writing device 31 records necessary information such as additional information based on photographing information on the magnetic recording layer.
[0026]
Further, when the film cartridge 33 has an IC memory attached, data of shooting information such as a cartridge ID, a film type, a shooting date, a shooting position, a shooting (camera) direction, and a shooting magnification are stored in the mounted IC memory. If recorded, the information can be read. If additional information added at the time of the previous photo print order is already recorded, the additional information is also read. In addition, necessary information is recorded in the IC memory according to circumstances.
Needless to say, the acquisition method and recording method of shooting information and additional information based thereon are not limited to reading and recording from the magnetic recording layer of the APS film or the IC memory of the film cartridge with IC memory. Other methods for acquiring and recording photographing information and additional information will be described later.
[0027]
The scanner 12 constituting the digital photo printer 10 is not limited to the one using the above-described slit scanning, and may be a CCD area sensor using surface exposure that reads the entire surface of one frame image at a time. In that case, R, G, and B color filters are provided between the variable aperture 24 and the diffusion box 28 shown in FIG. Projection light carrying an image of this frame photographed on the film F may be obtained by entering and transmitting one frame. In this case, it is necessary to sequentially perform the color filter for R, G, and B three times.
[0028]
Further, reading of an image by the CCD sensor in the scanner 12 is performed by performing a pre-scan for reading an image at a low resolution in order to determine image processing conditions and the like prior to a main scan for reading an image to output a photographic print. After the processing conditions are determined and the operator (or user) confirms and adjusts on the monitor 20, the main scan for reading the image with high resolution is performed. Therefore, the scan is performed twice: the pre-scan and the main scan. Therefore, when a CCD area sensor using surface exposure is provided with R, G, and B color filters, it is necessary to scan three times using the R, G, and B color filters. A scan will be performed. In the case of using a line CCD sensor, since only two times are required, it is advantageous for rapid processing.
In pre-scanning, all images on film F are captured by pre-scanning at once, and after setting the image processing conditions, main scanning is performed. However, pre-scanning and main scanning are sequentially performed on film F frame by frame. You may go.
[0029]
Further, in the present invention, in addition to the scanner 12 that photoelectrically reads an image photographed on a film such as a negative or a reversal, an image reading device that reads an image of a reflected original, or communication means such as computer communication (something via a modem) Image capture devices such as digital cameras and digital video cameras, built-in memory, image recording media for digital cameras such as PC cards and smart media, general-purpose images such as FD (floppy disk) and MO (magneto-optical recording media) Various image data supply sources such as a recording medium can be used, and these can be connected to the image processing device 14 directly or via a driving device thereof. The image processing device 14 is connected to these image data supply sources. Can receive digital image data, its photographing information and additional information.
[0030]
In particular, in the illustrated photo printer 10, for a digital camera such as a smart card or a card memory such as a PCMCIA (PC card), an ATA card or a compact flash card that records digital image data obtained by photographing with a digital camera or the like. Image data from the general-purpose image recording medium 25 such as the image recording medium 25, FD (floppy disk), CD-R (recordable compact disk), MO (magnetic optical disk), DVD (digital versatile disk), Zip, etc. A drive device 26 for reading and acquiring is connected to the image processing device 14. Also, it is directly connected to various image data supply sources such as (personal) computers, digital cameras, scanners of other digital photo printers, image processing apparatuses, etc. via a cable (for example, RS232C) or via a communication network. The image processing apparatus 14 is provided with a slot 27 for acquiring digital image data, its shooting information, and additional information.
In the illustrated example, input signals (digital image data, photographing information, additional information) are input to the image processing device 14 from various image data supply sources such as the scanner 12 and the drive device 26, but in the following description. A case where digital image data is mainly supplied from the scanner 12 to the image processing apparatus 14 will be described as a representative example.
[0031]
The image processing device 14 is a block diagram of the image processing device 14 that performs predetermined image processing on the image data read by the scanner 12 and sent to the image processing device 14 as digital data, and outputs it to the printer 16 or the monitor 20. It is shown in FIG. The image processing apparatus 14 includes a data processing unit 38, a prescan memory 40, a main scan memory 42, a prescan image processing unit 44, a main scan image processing unit 46, a condition setting unit 48, and an additional information acquisition unit 62. .
[0032]
The data processing unit 38 performs log conversion, DC offset correction, dark correction, shading correction, and the like on the R, G, and B digital image data (input image data signal) output from the scanner 12 to perform processed prescans. The (image) data is stored (stored) in the pre-scan memory 40 and the processed main scan (image) data is stored in the main scan memory 42, respectively. The A / D conversion may be performed by the data processing unit 38 instead of the scanner 12.
The pre-scan memory 40 and the main scan memory 42 store the digital image data processed by the data processing unit 38, and perform pre-scan image processing unit 44 or Called by the main scan image processing unit 46.
[0033]
The pre-scan image processing unit 44 includes an image processing unit 50 and an image data conversion unit 52. The image processing unit 50 is a conventional technique such as color balance adjustment, contrast correction, brightness correction, sharpness processing, dodging processing, and the like. In addition to the image processing as described above, correction processing for aberrations such as distortion aberration, lateral chromatic aberration, peripheral light amount reduction, and image blur based on the aberration characteristics of the photographing lens is performed.
The image data conversion unit 52 converts the image data that has been subjected to the image processing by the image processing unit 50 into image data corresponding to the display on the monitor 20 using a 3D (three-dimensional) -LUT or the like.
[0034]
The main scan image processing unit 46 includes an image processing unit 54 and an image data conversion unit 58.
The image processing unit 54 performs color balance adjustment, contrast correction (gradation processing), and brightness correction on the main scan image data using an LUT (look-up table) (not shown) under the image processing conditions determined in the pre-scan image data. Depending on the processing, saturation correction is performed by a known method by MTX calculation (not shown), and further, sharpness processing, dodging processing, etc. are performed according to an operator's instruction, image data, etc. Correction of distortion aberration and lateral chromatic aberration due to, and electronic scaling processing for enlarging and reducing the image according to the output size of the photographic print are performed.
The image data conversion unit 58 converts the image data subjected to the image processing by the image processing unit 54 into image data to be output to the printer 16 by using a 3D (three-dimensional) -LUT or the like.
[0035]
The condition setting unit 48 is used to determine pre-scan image data from the pre-scan memory 40 and determine image processing conditions.
Specifically, density histograms are created from pre-scan image data, and image feature quantities such as average density, LATD (large area transmission density), highlight (lowest density), and shadow (highest density) are calculated. In addition, according to an instruction given by an operator as necessary, the above-described table (LUT) such as gray balance adjustment and matrix calculation for performing saturation correction are performed to determine image processing conditions. The determined image processing conditions are further adjusted by the operation system 18 having the keyboard 18a and the mouse 18b, and the image processing conditions are reset.
[0036]
In addition, when selecting additional information related to at least a part of shooting information such as shooting date / time data and shooting position, the keyboard 18a and the mouse 18b are used to specify items according to the user's wishes.
The monitor 20 is for an operator to check and verify whether the image processing of the pre-scan image data is appropriate, and is connected to the image processing device 14 via the image data conversion unit 52.
[0037]
FIG. 4 mainly shows image processing-related parts. Besides, the image processing apparatus 14 includes a CPU for controlling and managing the entire digital photo printer 10 including the image processing apparatus 14, a digital A memory for storing information necessary for the operation of the photo printer 10 and the like, a means for determining the aperture value of the variable aperture 24 and the accumulation time of the CCD sensor 34 at the time of the main scan are arranged.
[0038]
The additional information acquisition unit 62 is a characteristic feature of the present invention, and includes an additional information selection unit 62a that selects additional information based on shooting information of shooting date / time, shooting position, shooting orientation, and shooting magnification, and is cited as additional information. A database section 62b having a database such as an encyclopedia that stores data to be stored, a map database used for specifying a subject in a captured image, and a captured image database storing captured images of famous mountains .
[0039]
First, a description will be given of the first embodiment of the present invention in which the additional information acquisition unit 62 acquires additional information related to at least a part of the shooting date / time data by using shooting date / time data such as shooting date and time as shooting information. To do.
In this embodiment, the additional information selection unit 62a of the additional information acquisition unit 62 cites and adds data related to at least a part of the shooting date / time data from the database unit 62b storing data cited as additional information. Select as information.
[0040]
FIG. 5A and FIG. 5B show the flow centering on acquisition of additional information performed by the additional information acquisition unit 62, respectively.
In the case of the new photographic system APS, as shown in FIG. 5A, the shooting date and the shooting time which are shooting date and time data magnetically recorded on the film F by the magnetic reading / writing device 31 provided in the carrier 30 of the scanner 12 And the additional information already recorded are read from the scanner 12 and sent to the additional information acquisition unit 62 through a different route from the image data. In the additional information selection unit 62a in the additional information acquisition unit 62, at least one of the year, month, day, and time of the shooting date or shooting time from the large database unit 62b such as an encyclopedia storing the cited data. Data is retrieved and selected in units of one to acquire additional information. Further, when additional information recorded magnetically is read, the read additional information can be directly acquired as additional information and added to a photo print according to the user's wishes.
[0041]
In the case of a normal 135 size film, as shown in FIG. 5B, the shooting date, shooting time, and additional information are optically printed on the film F before development, and the shooting date and shooting time are already printed on the film image. Further, additional information may be displayed. In that case, optically baked characters, etc. are roughly determined in the film shooting area, and the color density is also high so that they can be easily discriminated and known character recognition from the film image. Characters are recognized by a technique, and data of photographing date and time, which is photographing date / time data, and additional information recorded optically are read and data is acquired. Further, additional information can be acquired by searching and selecting data from the database unit 62b in units of at least one of year, month, day, and time in the acquired shooting date / time data. When additional information is read and acquired by character recognition, the read additional information can be acquired as it is or after processing according to the user's desire.
[0042]
As described above, when the digital image data is acquired from the image recording medium 25 such as a floppy disk via the drive device 26 and the slot 27 via the communication network, the shooting date / time data recorded in the header portion of the digital image data. The additional information already recorded is read and sent to the additional information section 62. Thereafter, as in the case of the new photo system APS, additional information is acquired through data search and selection.
[0043]
For example, when the acquired shooting date is March 3, a document or an image related to a doll festival, a March festival, a flower, a bird, or the like is selected. If the user specifies “flower” as an item, data related to the shooting date and shooting time related to the flower, and if the user specifies “news” as an item, data related to the shooting date and shooting time related to the news, “music” "Or" movie "is specified as an item, data such as a song name of a music popular on the shooting date and a title of a movie are selected as additional information.
[0044]
The items such as “flower”, “news”, “music”, and “movie” can be specified by the user as user-specified data accompanying the image. At the time of simultaneous print output service that performs print output simultaneously or at the time of reprint output service that performs only print output, the user directly specifies in the order table or the person who performs the print output service registers the user database in advance. In the new photo system APS, the items magnetically recorded on the magnetic recording layer S2 by a camera or the like corresponding to the new photo system APS are magnetically provided on the carrier 30. The user-specified data can be acquired by reading with the reading / writing device 31 and using the item as the specified data. That.
[0045]
The data acquired as additional information may be graphics, symbols, images, etc., in addition to sentences and words. For example, instead of digital display of the shooting time with numbers, it may be an analog clock display figure representing the long and short hands indicating the shooting time, and the month and day of the shooting date may be displayed as a year. An analog hand may be displayed as a circle or a circle with one round as one month. Alternatively, the shooting date may be displayed with a calendar with a day of the week and marked with a red circle or the like. This is because the analog display allows the user to visually understand the shooting date and shooting time information and easily look back on the shooting situation.
[0046]
Also, the additional information acquisition unit 62 adds items specified as user-specified data and additional information selected as additional information so that the same additional information is not selected during the next print request output service performed by the same user. The information can be recorded in a user management database provided in the database unit 62b of the information acquisition unit 62. For the user, additional information different for each print can be obtained, so that the user is not bored and can maintain the amusement of the output finished print.
[0047]
In the new photographic system APS, while the film F is transported by the carrier 30 during the main scan reading, the magnetic reading / writing device 31 magnetically records the data selected as the additional information on the magnetic recording layer S2 of the film F. This recorded data can be read out at the time of reprint order, and other data can also be magnetically recorded so as not to provide the same additional information as the magnetically recorded additional information, as desired by the user The same data as the additional information can be selected as the additional information.
In ordinary 135 size film, additional information is optically printed before developing the negative film, and the same additional information is processed when reprinting is ordered, or the additional information is processed according to the user's request. Can be provided, and the process of acquiring additional information can be simplified.
[0048]
Next, the additional information acquisition unit 62 uses data such as a shooting position, a shooting direction, and a shooting magnification as shooting information, and acquires additional information related to at least one of these data. explain.
Also in this embodiment, as in the first embodiment, the additional information selection unit 62a of the additional information acquisition unit 62 uses the shooting position, shooting direction, and shooting magnification from the database unit 62b that stores data cited as additional information. Data related to at least a part of the photographing information such as is cited and selected as additional information.
FIG. 6 shows a flow from acquisition of shooting information such as shooting position, shooting direction, and shooting magnification data to print output, centering on acquisition of additional information performed by the additional information acquisition unit 62.
[0049]
  In the case of the new photographic system APS, a magnetic recording layer is formed in the area S2 of the film F corresponding to the new photographic system APS shown in FIG. 3, and shooting information can be recorded. PositioningSystem), And shooting with a new photo system APS compatible camera with an additional direction indicator for direction detector, the recorded latitude, longitude and altitude, as well as the shooting azimuth angle for the horizontal and vertical planes are recorded, The shooting magnification at the time of shooting can also be recorded. This recorded information is read by a magnetic reading / writing device 31 provided on the carrier 30 of the scanner 12 and sent from the scanner 12 to the additional information acquisition unit 62 via a different path from the image data, and consists of the photographing position. A first data configuration, a second data configuration consisting of a shooting position and a shooting orientation, a third data configuration consisting of a shooting position and a shooting magnification, a fourth data configuration consisting of a shooting position, a shooting orientation and a shooting magnification, etc. Shooting information that is acquired in association with a shot image, which includes data of any one of the configurations, is acquired.
[0050]
With reference to the map database in the database unit 62b, using the data of any one of the first to fourth data configurations consisting of the acquired shooting information, such as the shooting position, shooting direction, and shooting magnification, Identify the subject and shooting location of the captured image. The subject and the shooting point are specified as follows.
For example, when a photographed subject is a mountain, in order to identify what the mountain is and at which point, the map is used to identify the obtained shooting position and orientation. By using GPS capable of accurately knowing the position based on signals from a plurality of artificial satellites, the photographed position, that is, the longitude, latitude, and altitude can be obtained. The positioning accuracy regarding the position of longitude, latitude and altitude is within 100 m, and there is no problem in practical use. Since the azimuth can be measured accurately by using the direction indicator for the direction detector, By comparing an object that falls within a predetermined angle of view on the map that is determined depending on the object that has been photographed, the photographed object and the photographing point can be identified as the object on the map database. Note that the shooting location includes not only the position of the subject in the captured image, that is, the shooting location (position), but also the shooting position such as the position of the photographer or camera, that is, the shooting position. May be included. By doing so, not only the subject in the photographed image but also information relating to the photographing position itself can be added to the photographed image as additional information.
[0051]
Furthermore, even when higher accuracy is required, or when the shooting position, shooting direction, and shooting magnification accuracy are insufficient for some reason, the map database is used to accurately know the shooting position, shooting direction, and shooting magnification. The subject and the shooting point can be specified in detail. That is, a three-dimensional computer graphic image based on the shooting information is created by a known computer graphic (hereinafter referred to as CG) creation method using a map database, and the pattern of the created CG image and the actually taken image is created. Matching, for example, a pixel of a CG image two-dimensionally between a mountain ridge line of a CG image created from a map database based on the obtained shooting position, shooting direction, and shooting magnification data, and a mountain ridge line on the shot image By performing pattern matching while shifting the position and calculating the best matching position and orientation, and the shooting magnification, the shooting position, shooting direction, and shooting magnification can be known with high accuracy. A certain point can be identified. Note that the edge of the mountain on the photographed image is extracted by extracting the edge from the difference in color density of the pixels.
[0052]
In this way, by knowing the shooting position, shooting direction, and shooting magnification with high accuracy, it is possible to specify in detail the position (point) of the mountain taken from the map database and the name of each mountain taken. .
When at least one of the subject and the shooting point is specified, data to be cited as additional information is searched and selected from a database such as an encyclopedia in the database unit 62b according to the user's order. For example, as additional information, only the mountain name, or character data, document data, audio data, etc. regarding the mountain name, altitude, and history are acquired as additional information. Further, still image data and moving image data are acquired as additional information from a captured image database storing captured images such as famous mountains in the database unit 62b, and an optimal captured image (still image or moving image) is selected. Additional information such as character data, document data, and still image data obtained in this way may be combined with or added to the photographed image and output as a photo print, or may be output as character data, document data, audio data, Additional information such as still image data and moving image data may be combined with or added to the captured image displayed on the monitor 20 as a display means for output. Further, as information regarding the shooting point, a distance between the subjects or a distance between the shooting position and each subject may be added.
[0053]
The printed photo prints are illustrated in FIGS. 7A and 7B.
The photographic print shown in FIG. 7A synthesizes subject information, a mountain name as a subject name, a shooting position name as information about a shooting location, and the like as a character data into a photographed image, and the altitude and history of the corresponding mountain. Is quoted from a database such as an encyclopedia and the document data is printed on the back of the photo print.
[0054]
The photographic print shown in FIG. 7B is a case where a mountain subject as a background cannot be seen by clouds. In this case, the image of a well-known subject previously captured in the captured image database in the database unit 62b is stored in a database, and the subject with the closest shooting information is captured from the plurality of images stored in the database. The database image is selected, corrected according to the composition of the photographic film image and the size of the subject based on the photographic information, and combined with the photographic film image. In the photographic image database, famous mountain images are stored in a database for each shooting position, shooting direction, and season, so the database closest to the shooting information such as the shooting position, shooting direction, shooting magnification, and shooting date and time. It is possible to select the converted image. When the accuracy of data such as the shooting position, shooting direction, and shooting magnification is low, as described above, a well-known CG creation of a three-dimensional CG image using a map database based on the shooting position, shooting direction, and shooting magnification data with low accuracy is used. It is possible to know the shooting position, shooting direction, and shooting magnification with high accuracy by performing pattern matching between the created CG image and the actually shot image.
[0055]
The photograph print shown in FIG. 7B is a case where the subject of the image created in the database is combined with an image hidden behind the cloud and the subject is not visible, but in addition, even when the subject of the photographed image is out of focus and unclear This is also effective in the case of compositing the subject of the image in the database with the photographed image.
[0056]
Further, a figure related to the subject of the photographed image or a three-dimensional CG image that is pattern-matched with the photographed image, for example, a contour CG image, may be combined with the photographed image, and a scale display according to the subject, for example, when the subject is a mountain, The display of a scale that means a height of 50m per cm on a photo print may be combined with the photographed image, and the database that is the closest to the shooting point in the database is also taken as a database that is taken from a different angle from the shooting point An image such as an image or a CG image such as a scene at an angle of highlight, a scene of another season, a scene of a highlight season, a scene from the back side, or a bird's eye view may be added.
[0057]
Further, the additional information added to the photo print may be additional information regarding the shooting point and location in addition to the additional information regarding the photographed subject, and the survey data such as the distance between the shooting point and each subject and the altitude difference. Further, the distance between each photographed subject may be added as additional information.
The addition to the photographic print may be performed by providing a photosensitive layer on the back side of the photographic print of the photographed image, exposing and printing the additional information, and printing the back side. Furthermore, when a large amount of document data is added as additional information, and the same subject is photographed in a plurality of frames, the back print may be performed on a plurality of photo prints in the order of the photographed frames. Addition in this way further enhances the amusement of photographic prints.
[0058]
In the case of the new photographic system APS, additional information regarding the subject specified for printout is transferred to the magnetic recording layer 31 provided in the area S2 on the film shown in FIG. When the next print output service is received, it is possible to simplify the identification of the subject and the retrieval of the citation data used as additional information.
The information on the shooting position may be shooting position information obtained by using a method other than GPS. For example, the shooting position information is installed on an observation platform such as a tourist spot where the direction is variable and only the position is fixed. By using a camera such as binoculars, at least the shooting position is known accurately, so that the subject can be easily specified.
[0059]
Further, Japanese Patent Application No. 9-245748, which is filed by the present applicant, discloses a technique of a digital bit pattern recorded by a digital data recording camera. The additional information acquisition unit 62 is an additional information selection unit. The additional information acquired in 62a can be sent back to the scanner 12 to optically print an unphotographed and undeveloped frame portion of the film F as shown in FIG. As a result, a digital data recording frame with a digital bit pattern can be provided. When the film development service and the simultaneous printing service are received, the data based on the shooting date and the shooting time is added to the digital data as additional information. It is possible to write in the part D3, and when information such as the subject to be photographed is known in advance, additional information based on the photographing position and orientation may be written there. Identification data D1 is provided to determine whether the frame is a digital data frame when writing to the film.
[0060]
In the above-described example, in the photographic print in which the photographed image is reproduced as a visible image, the additional information related to the photographed image is combined with the reproduced image of the photographed image on the front side of the photograph print, or on the back side of the photograph print. Although it is printed or printed on the back side of the photographic print, the present invention is not limited to the case where the additional information is added to the photographic print in this way. For example, display means for displaying a reproduced visible image of the photographed image In this case, additional information may be added to the display / playback visible image (soft copy image).
For example, the display means can include a display monitor such as the monitor 20, a projector, a photo player, and the like. The display means can switch both the captured image and its additional information simultaneously or one by one to perform a reproduction process. Can go and display.
[0061]
For example, the monitor 20 displays a visible image obtained by reproducing a captured image, and synthesizes and displays additional information in a reproduced visible image (display image) displayed according to the image reproducing method of the present invention, or displays the displayed image on the display image. It can also be used as a display means (display) for displaying additional information by linking. The link between the display image and the additional information and the display of the additional information are not particularly limited, and a predetermined portion of the screen (screen) of the monitor 20 such as a menu bar or a specific portion on the display image such as the subject such as the mouse 18b. The additional information to be added to the display image, for example, the display reproduction visible image, the shooting situation of the shot image, the commentary information about the subject of the shot image, and the like are displayed as a part of the display image on the screen of the monitor 20. Alternatively, it may be displayed on a part or all of the screen, or may be output by sound by sound output means 21 such as a speaker.
Of course, in the present invention, a personal computer having a display, audio output means and the like separately from the monitor 20 is connected to the image processing apparatus 14, and a composite image in which additional information is synthesized by the image reproduction method of the present invention, or a display image The additional information linked with “” may be displayed or output as audio.
[0062]
When a photo player intended for reproduction is used on an image display device (monitor), a normal photographed image is subjected to predetermined image processing based on the result of frame type determination, and the image display device of the photo player On the other hand, in the case of a digital bit pattern (digital data recording frame), data (such as additional information) is decoded and output as additional information according to the data. In this case, the additional information can be handled as additional information in addition to sentences, words, figures and symbols, and moving images and sounds. The moving images are output to the image display device, and the sound is output from sound output means such as a speaker.
The digital image data to which the additional information is added is not only reproduced on the printer 16 and output as a photographic print, but also recorded on the image recording medium 25 such as a floppy disk, MO, and Zip by the drive device 26. be able to. In this case, when playing back a digital image, a photo player or personal computer can call up an image with additional information added from an image recording medium and display it on the image playback device, and is specified on the image playback device. By specifying a subject with a mouse or the like, additional information such as shooting conditions and commentary information about the subject can be called and displayed on the image display device.
[0063]
The printer 16 outputs a reflected positive image (hard copy image) to a reflective monochrome or color photosensitive material such as photographic paper. However, the present invention is not limited to this, and a reversal film or an overhead projector film is used. The image may be output as a transmission positive image (soft copy image) on a transmission type monochrome or color light-sensitive material. Even in such a case, a transmission positive image in which the additional information is combined may be output, and the obtained transmission positive image may be projected by a projector to display the reproduced visible image on the screen. At this time, the additional information may be output as audio in accordance with the reproduction processing of the captured image by the projector.
As a projector used in the present invention, in addition to a normal projector that projects a film, in the structure of the projector that projects the film, a liquid crystal display device is placed at a position corresponding to the film, and an image is displayed on the liquid crystal display device. In addition, a projector configured to project the transmitted light onto a screen may be included.
[0064]
In the above-described example, the shooting information and the additional information are stored in the magnetic recording layer corresponding to the shooting frame of the APS film, the optical recording corresponding to the shooting frame on the photographic film, and the IC memory of the film cartridge with the IC memory. Obtained by using at least one of the recording corresponding to the shooting frame and the recording corresponding to the digital image data of the shooting frame on the digital camera image recording medium or the general-purpose image recording medium (header recording), and However, the present invention is not limited to the case where the photographed image or the photographed image data and the photographed information or the additional information are physically recorded as described above. It may be recorded separately.
[0065]
Here, when the photographed image data recording unit for recording the photographed image or the photographed image data and the information recording unit for recording the photographed information or additional information are physically separated, the photographed frame identification information and the photographed image are recorded. By setting information or additional information as a set, it can be recorded on a conventionally known data recording medium, for example, a recording medium such as FD, CD-R, MO, DVD, etc. The data can be recorded in the database unit 62b for lab management or in a recording destination designated via a communication network.
As the shooting frame identification information used in the case of such separate recording, for example, when a shot image is recorded on a photographic film such as an APS film or 135 film, identification information such as a film or cartridge ID and a shooting frame number are used. Information can be used, and when digital image data of a captured image is recorded as in a digital camera, an image file name can be used.
[0066]
The image processing apparatus 14 of the digital photo printer 10 of one embodiment of the photographic printing apparatus of the present invention is basically configured as described above. The operation and the image reproducing method of the present invention will be described below.
The prescan image data prescanned and read by the scanner 12 is subjected to processing such as log conversion, DC offset correction, dark correction, shading correction, and the like as digital input image data by the processing unit 38, and then the prescan memory. 40. Also, after the prescan image data stored in the prescan memory 40 is called from the condition setting unit 48, the image processing amount is calculated and the image processing conditions are automatically determined, and after being adjusted by an operator's instruction The image processing unit 50 of the pre-scan image processing unit 44 performs color balance adjustment, color density correction, brightness correction, contrast correction, saturation correction, and chromatic aberration of magnification caused by the photographic lens under fixed image processing conditions. And correction of aberrations such as distortion and the like, and sharpness processing and dodging processing (compression / expansion of density dynamic range) are performed according to an operator's designation, and then sent to the image data conversion unit 52 to 3D ( The image data is converted by using a (three-dimensional) -LUT or the like, processed into image data corresponding to the display on the monitor 20, and then displayed on the monitor 20.
[0067]
In the case of a digital image taken with a digital camera or the like, image data can be obtained from a floppy disk, an image recording medium such as MO or Zip via a disk drive, and image data can be obtained from a communication network. The image data is stored in the pre-scan memory 40 and the main scan memory 42, and the subsequent image processing is performed in the same manner as the image data read by the scanner 12.
[0068]
In this manner, image processing such as correction of pre-scan image data is performed, while the additional information acquisition unit 62 acquires additional information at the same time.
In the case of the new photographic system APS, photographing including at least one of photographing date and photographing time which is information recorded in the film magnetic recording layer S2 read by the magnetic reading / writing device 31 provided on the carrier 30 of the scanner 12 is performed. Shooting information such as date and time, shooting position, shooting orientation, and shooting magnification is sent from the scanner 12 to the additional information acquisition unit 62 via a different route from the image data.
[0069]
In the first embodiment of the present invention, the additional information selection unit 62a selects data related to at least a part of the shooting date and shooting time as additional information from a large database unit 62b such as an encyclopedia. .
In addition, in a normal 135 size film other than the new photo system APS, when the shooting date and the shooting time are optically printed on the film F, the characters to be optically printed are located within the shooting frame. Since the color density is high and the color density is high, discrimination is easy, and the year, month, day, and time are recognized and read out from the film image by a known character recognition technique. The data is retrieved and selected from a large database unit 62b such as an encyclopedia or the like, with at least one of day and time as a unit, and additional information is acquired.
[0070]
When the additional information magnetically recorded by the previous service is acquired from the magnetic recording layer S2 at the time of the reprint service, the additional information is used as it is according to the user's request, or other data is retrieved from the database unit 62b as the additional information. select. If the additional information is optically burned onto the film, the read additional information is directly used or additional information obtained by processing the additional information is acquired according to the user's request.
The user-specified data item is specified by the operator specifying the item directly specified by the user at the time of the print output service by using the keyboard 18a or the mouse 18b, or by referring to the user database initially registered in advance. Furthermore, in the new photo system APS, the user-specified data recorded on the magnetic recording layer S2 formed on the film F by a camera or the like corresponding to the new photo system APS is read by the magnetic reading / writing device 31. .
[0071]
  On the other hand, in the second embodiment of the present invention, the additional information selection unit 62a refers to the map database in the database unit 62b based on the acquired shooting information of the shooting position, shooting direction, and shooting magnification, and if necessary. , A 3D CG image created with reference to a map database and a captured imagepatternMatching is performed, and the subject in the captured image is specified. Furthermore, character data, document data, and image data relating to the specified subject are retrieved and selected from the database unit 62b. Character data and document data are searched and selected from a database such as an encyclopedia, and image data is searched and selected from a photographed image database such as a famous mountain photographed in advance.
[0072]
When the content related to the additional information magnetically recorded at the time of the previous print service is acquired from the magnetic recording layer at the time of the reprint service, the additional information can be added according to the content of the read additional information. The selection process can be simplified.
The method of adding the selected additional information to the photographic print is designated by the operator using the operation system 18 having the keyboard 18a and the mouse 18b. For example, when the subject to be photographed is a mountain, it is specified whether only the mountain name of the specified mountain is added to the photo print, or whether the mountain name, altitude and history are printed on the back side of the print.
In the present invention, the description is divided into the first and second embodiments, but the present invention is not limited to those separately implemented, and it goes without saying that both may be carried out together. It is.
[0073]
All the pre-scan images are checked on the monitor 20, verified, additional information to be added is acquired, and instructions for adding to the photographic print are given. Then, the main scan is performed under the set image processing conditions, and the image is displayed. Read. The data processing unit 38 performs the same processing as the pre-scan image data, and stores it in the main scan memory 42 as main scan image data.
In the image processing unit 54, the stored main scan image data is read from the main scan memory 42, and under the determined image processing conditions, color balance adjustment, brightness correction, contrast correction and saturation correction, and further Correction of aberrations such as chromatic aberration of magnification and distortion caused by the photographic lens, and electronic scaling processing are performed on the image according to the output size of the photographic print, and sharpness processing and dodging processing (density dynamic processing are specified by the operator) Range compression / decompression).
[0074]
Note that when the additional information acquired by the additional information acquisition unit 62 is combined with the captured image, character data, document data, and image data are called up, and the character data and document data are bitmap-expanded as necessary. Then, it is supplied to the image processing unit 54 of the main scan, and image synthesis is performed by a predetermined method.
After various image processing is performed by the image processing unit 54, it is sent to the image data conversion unit 58, converted into images, processed into image data corresponding to output to the printer 16, and then output to the printer 16. Is done. When the additional information acquisition unit 62 selects back printing of character data or document data, the character data or document data as additional information is sent to the printer 16 as it is.
[0075]
The printer 16 exposes the photosensitive material (printing paper) in accordance with the supplied image data and records a latent image, and performs a predetermined process on the photosensitive material of the exposed material as a photographic print. And an output processor (developing device).
In the recording apparatus, after the photosensitive material is cut into a predetermined length corresponding to a photographic print, the character data and document data acquired by the additional information acquisition unit 62 sent from the condition setting unit 48 of the image processing apparatus 14, and further The document data and document data relating to the specified subject are printed on the back (back print) by back print means such as a dot impact printer or an ink ribbon printer. In some cases, a reverse print is made. Next, the three types of beams for R exposure, G exposure, and B exposure corresponding to the spectral sensitivity characteristics of the photosensitive material are modulated according to the image data output from the image processing device 14 and deflected in the main scanning direction. By conveying the photosensitive material in the sub-scanning direction orthogonal to the main scanning direction, the photosensitive material is scanned and exposed two-dimensionally with the light beam, and a latent image is recorded and supplied to the processor. When the additional information acquisition unit 62 selects to synthesize additional information with an image, the image is already synthesized by the image processing unit 54, and thus a latent image is recorded as in the case of an image without additional information. The processor which has received the light-sensitive material is subjected to predetermined wet development processes such as color development, bleach-fixing, and water washing, and is dried and sorted into a predetermined unit such as one film as a photographic print and accumulated.
The image reproduction method and apparatus of the present invention are basically configured as described above.
[0076]
The image reproducing method and apparatus according to the present invention have been described in detail above. However, the present invention is not limited to the above embodiments, and various improvements and modifications may be made without departing from the gist of the present invention. Of course.
[0077]
【The invention's effect】
As described above in detail, according to the present invention, a predetermined image is added to digital image data read by a scanner or the like from an image shot on a photographic film, or digital image data obtained by shooting with a digital camera or the like. When an image corresponding to the processed output image data is output as a photographic print or display image, it is attached to the photographic image, and photographic information, for example, in the first embodiment, at least part of the photographic date / time data, In the second embodiment, shooting information including at least a shooting position, and including at least a part of a shooting direction and a shooting magnification, if necessary, is obtained, obtained from the acquired shooting information, and an addition related to at least a part thereof By obtaining the information and adding the obtained additional information to the photo print or display image, the user can easily view the photo print or display image and change the shooting time. It is possible to provide a user with highly entertaining photo prints and display images that can be looked back emotionally, have a memo function, have excellent practicality, and have a highly entertaining image according to the user's preference. it can.
[Brief description of the drawings]
FIG. 1 is a block diagram of an embodiment of an image reproduction apparatus of the present invention that implements an image reproduction method of the present invention.
2A is a perspective view schematically showing a main part of a scanner of the image reproducing apparatus shown in FIG. 1, and FIG. 2B is an image sensor used for the scanner shown in FIG. It is a conceptual diagram.
3 is a plan view of a film of a new photographic system set in the scanner of the image reproducing device shown in FIG. 1. FIG.
4 is a block diagram of an embodiment of an image processing apparatus of the image reproduction apparatus shown in FIG.
FIGS. 5A and 5B are flowcharts illustrating an example of a flow of an image reproduction method according to the present invention, respectively.
FIG. 6 is a flowchart showing another example of the flow of the image reproduction method of the present invention.
FIGS. 7A and 7B are schematic diagrams showing examples of photographic prints printed using the image reproduction method and the image reproduction apparatus of the present invention, respectively.
FIG. 8 is a schematic diagram showing an example of a negative film on which digital data is printed by the image reproduction method of the present invention.
[Explanation of symbols]
10 (Digital) Photo Printer
12 Scanner
14 Image processing device
16 Printer
18 Operation system
18a keyboard
18b mouse
20 Monitor
21 Voice output means
22 Light source
24 Variable aperture
25 Image recording media
26 Drive device
27 slots
28 Diffusion box
29 Mask
30 career
31 Magnetic read / write device
32 Imaging lens unit
33 Film cartridge
34 CCD sensor
36 amplifiers
37 A / D (analog / digital) converter
38 Data processing section
40 Pre-scan (frame) memory
42 main scan (frame) memory
44 Pre-scan image processing unit
46 Scanned image processing unit
48 Condition setting section
50, 54 (image) processing unit
52, 58 Image data converter
62 Additional information acquisition unit
62a Additional information selection section
62b Database part

Claims

Obtain digital image data of an image obtained by photographing a subject, perform predetermined image processing on the obtained digital image data to obtain output image data, and reproduce the captured image as a visible image based on the output image data When outputting,
Acquiring shooting information including at least a part of shooting date / time data of the shot image and user-specified data in which at least one item is selected from a plurality of items;
At least a part of the shooting information and additional information related to the user-specified data are searched and selected from the additional information stored in the database in advance, and at least a part of the shooting information and the user-specified data are related Get additional information,
An image reproduction method, wherein the obtained additional information is added to the photographed image and reproduced.

The additional information is selected from among the additional information stored in advance in a database by searching for at least one of year, month, day, and time using at least a part of the shooting date / time data. The image reproduction method according to claim 1, wherein the image reproduction method is additional information.

The image reproduction method according to claim 1, wherein different additional information is selected for each print based on the user-specified data.

The image reproduction method according to claim 1, wherein the item includes at least one of a flower, news, music, and a movie.

The digital image data is digital image data obtained by photoelectrically reading the photographed image of the photographic film in which the subject is photographed, or digital image data of the photographed image obtained directly by photographing the subject. The image reproduction method according to any one of claims 1 to 4 .

The output of the visible image is at least one of the display to output and display means of a photographic print, display on the display means, according to claim 1 to 5 is at least one of the display and the projection by the projector to the monitor The image reproducing method according to any one of the above.

The additional information is image reproducing method according to any one of the information relating to the date or shooting location at the time of photographing of the photographic image according to claim 1-6 or information related to the subject of the captured image.

The additional information is text data, document data, voice data, image reproduction method according to any one of claims 1 to 7 at least one of the still image data and moving image data.

When the visible image is at least one of when output to a photographic print and when displayed on a display means;
The additional information is combined with at least one of the visible image of the photographic print and the display image of the display means, outputted to the back side of the photographic print, printed on the back of the photographic print, on the display means A link to the displayed visible image is displayed as at least one of a character, a document, a still image, and a moving image, or a voice is output by linking to the visible image displayed on the display means. The image reproduction method according to any one of 1 to 8 .

The image reproduction method according to any one of claims 1 to 9 ,
At least one of the shooting information and the additional information is recorded on the magnetic recording layer corresponding to the shooting frame on which the shot image of the photographic film having the magnetic recording layer was shot or corresponds to the shooting frame of the photographic film. Recorded optically, recorded in the IC memory of a film cartridge with an IC memory for storing photographic film, corresponding to a shooting frame, or shot on an image recording medium for recording digital image data of the shot image Recorded in correspondence with frames, recorded on a data recording medium in association with photographic film shooting frames or digital image data, or recorded in a database in association with photographic film shooting frames or digital image data Or a recording specified via the network in association with a photograph film frame or digital image data Is recorded by at least one method of either recorded,
When reproducing the captured image of the shooting frame as the visible image, the shooting information or the additional information of the shooting frame is recorded as the magnetic recording layer, the optical recording, the IC memory, the image recording medium, and the data recording. It is read from the medium, the database and the recording destination, and the additional information acquired from the read shooting information or the read additional information is added to the shot image of the shooting frame and played back Image playback method.

Image input means for acquiring digital image data of a photographed image;
Image processing means for performing predetermined image processing on the digital image data acquired by the image input means to obtain output image data;
An image reproduction device having image output means for outputting the captured image as a visible image based on the output image data output from the image processing means,
Shooting information acquisition means for acquiring shooting information in association with the shot image;
Additional information acquisition means for acquiring additional information related to at least a part of the imaging information acquired by the imaging information acquisition means;
Additional information output means for adding the additional information acquired by the additional information acquisition means to the captured image reproduced as the visible image;
The shooting information acquisition means acquires at least a part of shooting date / time data attached to the shot image as the shooting information,
The additional information acquisition means searches the database for storing the additional information and the database using at least a part of the shooting date / time data, and stores the shooting date / time data from the additional information stored in the database in advance. And additional information selection means for selecting the additional information related to at least a part,
The additional information selection means searches the database based on user-specified data in which at least one item is selected from a plurality of items in addition to at least a part of the shooting date / time data, and the shooting date / time data and the user-specified data An image reproducing apparatus, wherein the additional information related to data is selected.

The image reproducing apparatus according to claim 11 , wherein the shooting information acquisition unit acquires at least a part of a shooting date and a shooting time of the image as the shooting date and time data.

The image reproducing apparatus according to claim 11 or 12 , wherein the additional information selection unit selects different additional information for each print based on the user-specified data.

The image reproduction device according to claim 11 , wherein the item includes at least one of a flower, news, music, and a movie.

The image input means photoelectrically reads the digital image data from the photographed image of the photographic film on which the subject is photographed, or obtains digital image data of the photographed image directly by photographing the subject. The image reproduction device according to any one of 11 to 14 .

The image output means is at least one of an image recording means for outputting a photographic print on which the visible image is reproduced and a display means for reproducing and displaying the visible image. The display means displays the visible image. The image reproduction device according to claim 11 , which is at least one of a monitor and a projector that projects the visible image.

The image reproduction device according to claim 11 , wherein the additional information is information related to a date and time or a shooting location at the time of shooting of the captured image, or information related to a subject of the captured image.

The image output means is at least one of an image recording means for outputting a photographic print on which the visible image is reproduced and a display means for reproducing and displaying the visible image;
The additional information output means develops the additional information into digital image information, and synthesizes it with digital image data image-processed by the image processing means, and outputs the additional information to the back side of the photographic print Means for printing the additional information on the back side of the photographic print, or displaying the additional information as at least one of a character, a document, a still image, and a moving image by linking to the reproduced visible image of the display means. 18. An image reproducing apparatus according to claim 11 , wherein the image reproducing apparatus is a linking means for displaying on the means, or an audio output means for outputting the additional information as sound by linking to a reproduced visible image of the display means. .