JP4275983B2 - Image processing system - Google Patents

Image processing system Download PDF

Info

Publication number
JP4275983B2
JP4275983B2 JP2003118169A JP2003118169A JP4275983B2 JP 4275983 B2 JP4275983 B2 JP 4275983B2 JP 2003118169 A JP2003118169 A JP 2003118169A JP 2003118169 A JP2003118169 A JP 2003118169A JP 4275983 B2 JP4275983 B2 JP 4275983B2
Authority
JP
Japan
Prior art keywords
information
article
image processing
image
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003118169A
Other languages
Japanese (ja)
Other versions
JP2004328202A (en
Inventor
金城  直人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2003118169A priority Critical patent/JP4275983B2/en
Publication of JP2004328202A publication Critical patent/JP2004328202A/en
Application granted granted Critical
Publication of JP4275983B2 publication Critical patent/JP4275983B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Facsimiles In General (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Description

【0001】
【発明の属する技術分野】
本発明はデジタルカメラ等で撮影された画像(画像データ)の画像処理の技術分野に属し、詳しくは、カメラの性能や撮影光源等によらず、撮影された画像中に存在する各種の物品の色等を適正に再生することを可能にする画像処理システムに関する。
【0002】
【従来の技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム(以下、フィルムとする)に撮影された画像の印画紙(感光材料)への焼き付けを、スキャナによって、フィルム(フィルムに撮影された画像)を光電的に読み取って、画像処理装置によって、得られた信号をデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、プリンタ(プリンタ/プロセサ)によってこの画像データに応じて変調した記録光で印画紙を露光して行い、所定の現状処理を施してプリントとして出力する、デジタルフォトプリンタが実用化されている。
【0003】
一方で、パーソナルコンピュータ(PC)やPDA(Personal Digital Assistant) 等の普及に伴い、デジタルカメラの普及率が拡大している。デジタルカメラで撮影された画像は、例えば、PC等に取り込まれて処理され、ホームページや年賀状等の各種の用途に使用される。
また、デジタルフォトプリンタによれば、画像を光電的に読み取って、デジタルの画像データとして画像処理を行うので、デジタルカメラ(これに装填される記録媒体)や、先に画像データを出力したCD−Rなどの記録媒体等から画像データを受け取り、この画像データが担持する画像を再生したプリントを出力することもできるので、近年では、ラボ店等の専門のプリント業者によって、デジタルカメラで撮影された画像からのプリント作成が行われている。
【0004】
ところで、デジタルカメラや写真フィルムによる画像は、カメラの性能や撮影光源等によって大きく影響を受ける。そのため、これらによるデジタルの画像データを、プリントやディスプレイの表示画像などの可視像として再生する際には、画像の色味等を適正にするために、各種の画像処理が行われる。
【0005】
例えば、特許文献1には、複数コマの画像データの画像処理を行う際に、第1のコマの画像において指定された、顔、頭髪、眼、唇、胴体、衣服、装身具の特定領域の画像を修正すると共に、この特定領域の画像特徴量と処理条件を記憶して、これ以降のコマについて、特定領域と画像特徴量が類似する領域は、第1のコマにおける特定領域と同様の処理条件で画像処理を行う画像処理方法が開示されている。
また、特許文献2には、主にフィルムに撮影された画像の画像処理において、1件の全コマの画像データから求めた全コマに共通のグレーバランスと、各コマ毎に求めた各コマのグレーバランスとを重み付けして用いて、各コマ毎のグレーバランスの調整条件を求める画像処理が開示されている。
【0006】
【特許文献1】
特開平11−275351号公報
【特許文献2】
特開平11−317880号公報
【0007】
【発明が解決しようとする課題】
特許文献1に開示される画像処理方法によれば、第1のコマで特定領域として指定された部分は適正に仕上がる。
しかしながら、この方法では、特定領域の指定という作業が必要であり、さらに、特定領域として指定された物以外に関しては、色味等が実物とは異なる不適正な物になってしまう可能性もある。
【0008】
他方、特許文献2に開示される画像処理によれば、全コマに共通のグレーバランスを用いて、各コマのグレーバランスと重み付けしてグレーバランスの調整条件を設定することにより、カラーフェリア等の影響を排除して、再生画像の全体的なグレーバランスを適正できる。
しかしながら、この方法でも、やはり、画像中に存在する個々の物体等に関しては、色味等が実物とは異なる不適正な物になってしまう可能性がある。
【0009】
本発明の目的は、前記従来技術の問題点を解決することにあり、デジタルカメラ等で撮影されたデジタルの画像データの画像処理において、撮影光源やカメラの性能等によらず、画像データを可視像として再生した際に、画像中に存在する各種の物品を実物に極めて近い適正な色味やテクスチャで再生することを可能にする画像処理システムを提供することにある。
【0010】
【課題を解決するための手段】
前記の目的を達成するために、本発明に係る画像処理システムは、自身が取り付けられた物品の識別情報を記憶する非接触読取が可能なメモリと、自身を識別する識別情報が記憶された非接触読取が可能なメモリを取り付けられた、撮影方向および撮影時間の検出手段を有する撮影手段と、前記両メモリを非接触で読み取る、所定の領域に二次元的に配列された読取手段と、物品に関する情報である物品情報と前記識別情報とを対応付けして記憶するデータベースと、前記読取手段が前記メモリから読み取った識別情報を取得し、また、前記撮影手段によって撮影された画像中に存在する各種の物品を濃度,色味およびテクスチャのいずれか1つ以上について適正に再生する画像処理を行う画像処理手段とを有し、前記撮影手段は、自身の前記識別情報、撮影方向および撮影時間を対応付けして、撮影した画像を前記画像処理手段に供給し、前記画像処理手段は、前記読取手段が前記メモリから読み取った識別情報を取得して、この識別情報に対応する物品および撮影手段の位置を検出すると共に、前記撮影手段から供給された識別情報、撮影方向および撮影時間から、撮影画像と画像中に存在する物品の識別情報とを対応付けし、この識別情報を用いて前記データベースから対応する物品情報を読み出し、この物品情報を用いて前記画像処理を行うことを特徴とする。
【0011】
また、本発明に係る画像処理システムは、自身が取り付けられた物品に関する情報である物品情報を記憶する非接触読取が可能なメモリと、自身を識別する識別情報が記憶された非接触読取が可能なメモリを取り付けられた、撮影方向および撮影時間の検出手段を有する撮影手段と、前記両メモリを非接触で読み取る、所定の領域に二次元的に配列された読取手段と、前記読取手段が前記メモリから読み取った物品情報を取得し、また、前記撮影手段によって撮影され画像中に存在する各種の物品を濃度,色味およびテクスチャのいずれか1つ以上について適正に再生する画像処理を行う画像処理手段とを有し、前記撮影手段は、自身の前記識別情報、撮影方向および撮影時間を対応付けして、撮影した画像を前記画像処理手段に供給し、前記画像処理手段は、前記読取手段が前記メモリから読み取った情報を用いて、この情報に対応する物品および撮影手段の位置を検出すると共に、撮影手段から供給された識別情報、撮影方向および撮影時間から、撮影画像と画像中に存在する物品の物品情報とを対応付けし、この物品情報を用いて前記画像処理を行うことを特徴とする。
【0014】
このような本発明の画像処理システムにおいて、前記物品情報が、この物品の色味情報としての分光反射率データおよびこの物品のテクスチャパターンに関する情報の少なくとも1つを含むのが好ましく、また、前記画像処理手段は、必要に応じて、この物品以外の画像中の被写体に関しても、前記物品情報を用いて、この物品に応じた画像処理を行うのが好ましく、また、前記物品情報として、適正な状態の前記物品を含む基準画像を有し、前記画像処理手段は、この基準画像を用いて前記画像処理を行うのが好ましく、また、前記物品情報として、前記物品に関連する情報を有し、前記画像処理手段は、必要に応じて、前記物品に関連する情報を前記画像に合成するのが好ましく、また、前記物品の識別情報を記憶する非接触読取が可能なメモリに記憶された情報と複数の画像とを対応付けして記憶する画像データベースを有し、前記画像処理手段は、前記メモリに記憶された情報を用いて前記画像データベースから対応する画像を読み出し、読み出した画像についても、前記物品に関する情報を用いた画像処理を行うのが好ましく、さらに、特定場所の照明光に関する照明情報の記憶手段を有し、前記画像処理手段は、前記記憶手段から照明情報を読み出して、この照明情報と前記物品情報とを用いて、対応する特定場所における前記物品の見え方を再現するのが好ましい。
【0015】
【発明の実施の形態】
以下、本発明の画像処理システムについて、添付の図面に示される好適実施例を基に、詳細に説明する。
【0016】
図1に、本発明の画像処理システムの一例の概念図を示す。
図示例の画像処理システム10(以下、システム10とする)は、デジタルカメラ12(以下、カメラ12とする)が撮影した画像に画像処理を施すシステムで、カメラ12と、衣類やアクセサリなどの各種の物品に取り付けられるICタグ14と、画像処理部16と、データベース18とを有して構成される。
画像処理部16とデータベース18とは通信手段24で接続されており、また、画像処理部16には、ディスプレイ20およびプリンタ22が接続される。
【0017】
なお、通信手段24は、各種のものが利用可能であり、インターネットやLAN(Local Area Network)等のコンピュータ通信ネットワークでも、本発明のシステム10に専用の専用回線でもよい。
ディスプレイ20も、CRT(Cathode Ray Tube)やLCD(液晶ディスプレイ)などの各種のディスプレイが利用可能である。
さらに、プリンタ22も、画像データに応じて変調した記録光で印画紙(感光材料)を露光して湿式の現像処理を施す写真プリンタ、電子写真プリンタ、インクジェットプリンタ等の各種のプリンタ(画像記録装置)が利用可能である。
【0018】
ICタグ14は、アンテナやメモリなどを含むICチップなどを有し、非接触でICタグリーダ30(読取手段)と無線で接続/通信する、例えばRFID(Radio Frequency IDentification)技術を利用する、公知のICタグである。
なお、本発明において、各種の物品に取り付けられるメモリは、ICタグ14に限定はされず、カメラ12に装着された読取手段による非接触読取が可能なものであれば、各種のものが利用可能である。
【0019】
本発明において、ICタグ14(メモリ)は、各種の物品(動物などの生物を含む)に取り付けられ、その物品を識別するためのID情報を記憶している。
図示例のシステム10においては、ICタグ14は、被写体(人物)が身に付ける各種の物品、例えば、指輪、ネックレス、イヤリング、ピアス、ブローチなどのアクセサリー、ハンドバック、ショルダーバッグ、セカンドバッグなどのバッグ類、帽子、シャツ、スカート、ジャケット、ネクタイなどの衣類、ファンデーション、口紅、アイシャドーなどの化粧品(例えば、ケースに取り付ければよい)等に取り付けられる。
図1に示される例においては、イヤリング32にICタグ14aが、シャツ34にICタグ14bが、それぞれ取り付けられている。
【0020】
本発明において、ICタグ14の取り付け位置には、特に限定はなく、取り付ける物品に応じて、外観、機能、取り扱い性などの低下を生じることなく、かつ、無線通信が可能な位置を、適宜、決定すればよい。
【0021】
なお、図示例において、ID情報は、基本的に、物品の個々を判別できる必要はなく、物品の種類(例えば、物品のメーカおよび型番)が判別できればよい。但し、後述する、例えば動物や動物を収容する檻等にICタグを取り付ける場合のように、同じ種類でも色味等に個体差を有する物品にICタグを取り付ける場合には、個々を判別できるようにID情報を付与してもよい。
【0022】
(デジタル)カメラ12は、ICタグ14に記録されている情報を読み取るためのICタグセンサ30(以下、タグセンサ30とする)、および、ICタグ14から読み取った情報と、撮影した画像とを対応付けして出力する機能を有する以外には、基本的に、通常のデジタル(スチル)カメラである。
タグセンサ30は、ICタグ14と無線接続して、ICタグ14に記録された情報を読み取る、例えば先と同様のRFID技術を利用する公知のICタグセンサ(ICタグリーダ/ライタ)である。
【0023】
システム10において、カメラ12は、例えば撮影時にタグセンサ30によってICタグ14に記録された情報(ICタグ14が取り付けられた物品のID情報)を読み取る。
カメラ12は、撮影した画像の画像データと、ICタグ14から読み取ったID情報とを対応付けして、例えば、内蔵するメモリに記憶し、あるいは、カメラ12に装着されるスマートメディアTMやxD−ピクチャーカードTMなどの記憶媒体に記憶する。なお、物品のID情報は、例えば、画像データ(画像ファイル)のヘッダ等に記録すればよい。
【0024】
画像処理部16は、カメラ12が撮影した画像データに画像処理を施すものである。具体的には、画像処理部16は、カメラ12のタグセンサ30によって読み取られた物品のID情報を用いて、後述するデータベース18から、このID情報に対応する物品の色味情報を読み出し、この色味情報を用いて、画像中の対応する物品の色味が、この色味情報に応じた色となるように、画像を補正する。この作用に関しては、後に詳述する。
また、図示例においては、画像処理部16は、処理済の画像データをディスプレイ20に出力して、この画像を表示させ、および/または、画像データをプリンタ22に出力して、この画像を再生したプリントを出力させる。
【0025】
なお、画像処理部16が行う画像処理は、これに限定はされず、色/濃度補正、階調補正、電子変倍処理、シャープネス処理(鮮鋭度強調)、画像濃度ダイナミックレンジの圧縮(画像データ処理による覆い焼き効果の付与)等、公知の各種の画像処理を行ってもよい。
このような画像処理部16は、例えば、パーソナルコンピュータ(PC)やワークステーション(WS)等を利用して構成すればよく、あるいは、前述のデジタルフォトプリンタの画像処理装置に組み込まれるものであってもよい。
【0026】
データベース18は、例えば、PCやWS等を利用して構成されるもので、ICタグ14に記憶される各種の物品のID情報と、その物品の実際の色を示す色味情報とを、対応付けして登録(記憶)している。例えば、イヤリング32およびシャツ34のそれぞれについて、ID情報と色味情報とを対応付けして記憶している。
色味情報は、対応する物品の実際の色を知見できる情報であればよい。例えば、Day Light などの所定の光源下におけるR(赤)、G(緑)およびB(青)の画像データや、分光反射率データを色味情報とすればよい。
【0027】
データベース18は、例えば、写真館やラボ店等が有し、物品のメーカ等からのデータ取得、適正条件下で物品を撮影して色を測定、両者の併用等を行って構築してもよく、あるいは、物品のメーカや販売会社に構築されるものであってもよい。従って、データベース18は、1つであるのにも限定はされず、複数であってもよい。さらに、データベースへの物品情報の登録のタイミングにも特に限定はない。
また、図示例においては、データベース18と画像処理部16とは、通信手段24によって接続されているが、本発明は、これに限定はされず、例えば、画像処理部16とデータベース18とは、直接的に接続される構成でもよく、画像処理部16とデータベース18とが一体的な構成でもよい。
【0028】
以下、システム10の作用を説明することにより、本発明の画像処理システムについて、より詳細に説明する。
【0029】
前述のように、カメラ12は、被写体を撮影する際に、タグリーダ30が被写体が身につけている物品のICタグ14を読み取って、物品のID情報を取得し、撮影画像の画像データと物品のID情報とを対応付けして、自身のメモリに記憶し、あるいは、xD−ピクチャーカードTMなどの記憶媒体に記憶する。
図示例においては、イヤリング32にICタグ14aが、シャツ34にICタグ14bが、それぞれ取り付けられているので、カメラ12は、両ICタグ14から、イヤリング32のID情報およびシャツ34のID情報を取得し、これと画像データとを対応付けして、記憶する。
【0030】
カメラ12で撮影した画像を画像処理部16で処理する際には、画像処理部16は、例えば、カメラ12から、直接、画像データ(画像ファイル)を読み取り、あるいは、画像データを記憶する記憶媒体を装着され、これを読み取ることによって、画像データ(画像ファイル)を取得する。
次いで、画像処理部16は、画像データに関連付けされたイヤリング32とシャツ34のID情報を知見する。さらに、通信手段24でデータベース18と接続して、このID情報を用いてデータベース18を検索し、イヤリング32とシャツ34の色味情報を読み出す。すなわち、物品に取り付けられたICタグ14からID情報を読み取り、このID情報を用いて物品の種類を認識して、データベース18から、この物品の色味情報を取得する。
【0031】
次いで、画像処理部16は、この色味情報を用いて、イヤリング32およびシャツ34が色味情報に対応する色となるように、画像データを補正する。
まず、画像処理部16は、色/濃度検出、形状認識、テンプレートマッチング、テクスチャパターンの認識等により、画像中から対応する物品すなわちイヤリング32およびシャツ34の領域を抽出する。
次いで、この領域の画像解析を行って、再生画像においてイヤリング32およびシャツ34が色味情報に応じた色となるような画像処理条件を設定し、画像データの画像処理を行う。例えば、色味情報が Day Light下におけるR、GおよびBの画像データであれば、再生画像中のイヤリング32およびシャツ34が、この色となるように画像処理条件を設定し、画像処理を行う。
【0032】
この色味情報に応じた画像処理は、個々の物品毎に、その物品の領域(図示例であれば、イヤリング32およびシャツ34の領域)のみに行ってもよく、あるいは、全体的に画像処理を行ってもよい。
なお、全体的に画像処理を行う場合に、図示例のように、ICタグ14を有する物品が複数ある場合には、総合的に画像処理条件を設定する。
【0033】
画像処理を終了したら、画像処理部16は、処理済の画像データをディスプレイ20に出力して、可視像として再生し、あるいは、プリンタ22に出力して、撮影画像を再生したプリントを出力する。
【0034】
すなわち、本発明によれば、カメラ12によって、各種の物品に取り付けられたICタグ14からID情報を読み取り、このID情報を用いて物品の種類を認識して、データベース18から、この物品の色味情報を読み出して、画像中における対応する物品の色が、この色味情報に対応した色となるように、画像を補正する。
従って、カメラ12の性能や撮影光源等によらず、カメラ12で撮影した画像を可視像として再生した際に、画像中の物品を実物に近い色で再現した、高画質な画像を再生できる。
【0035】
本発明において、データベース18に記憶する物品情報は物品の色味情報に限定はされず、物品に関する各種の情報が利用可能であり、また、複数種の物品情報を記憶してもよく、画像処理部16では、これに応じて、各種の画像処理を行うようにしてもよい。
【0036】
例えば、データベース18に、各物品のメーカが推奨する明度の情報を物品情報として記憶しておき、この明度となるように、あるいは近づけるように、画像処理を行うようにしてもよい。
【0037】
また、物品のテクスチャパターンを物品情報として記憶しておき、このテクスチャパターンを適正に再現するように、画像処理部16で画像処理を行うようにしてもよい。また、例えば、物品のメーカ等で、エンブレムやロゴなど、物品(商品)の強調したい部分を指定して、これを物品情報として記憶し、シャープネス処理などによってこの部分を強調するように、画像処理部16で画像処理を行うようにしてもよい。あるいは、データベース18に用意された高解像度画像データを、局所的に合成するようにしてもよい。
これらの態様によれば、例えば、カメラ12の解像度が低い場合であっても、物品の性状や特徴を好適に表現した画像を再生することが可能である。
【0038】
また、写真館等において、事前に最適な撮影条件下でICタグ14が取り付けられた(あるいは取り付け予定)の物品を撮影し、この画像(以下、基準画像とする)を物品情報としてデータベース18に記憶してもよい。画像処理部16では、この基準画像を読み出し、再生する画像中で物品の色味やテクスチャが基準画像と一致するように、画像処理条件を設定して、画像処理を行う。
さらに、痩身仕上げ、色白仕上げ、ソフトフォーカス仕上げのような、顧客の好みなどを顧客情報を登録しておき、物品のID情報から、被写体人物を特定し、この顧客情報に応じた補正を行うように、画像処理条件を設定してもよい。
【0039】
また、この物品の外観以外の物品に関連する情報(以下、関連情報とする)を物品情報としてもよい。関連情報としては、例えば、物品の詳細情報、物品の関連商品の情報、物品の最新製品の情報等が例示される。
このような関連情報を取得した際には、例えば、画像処理部16は、これらの情報をテキスト情報として画像(画像データ)に合成して、ディスプレイ20に表示する。もしくは、関連情報を静止画や動画として再生してもよく、さらに、画像データに対応する音声情報として合成を行い、画像表示中に音声で関連情報を再生してもよい。
【0040】
さらに、結婚式場やホテルのパーティー会場など、特定の場所の照明情報をデータベース18(他の場所でも可)に記憶しておき、照明情報と色味情報を用いて、この特定場所での物品の見え方をシミュレーションしてもよい。
この際には、例えば、画像データを供給された際に、画像処理部16がID情報を用いて物品(一例としてシャツ34とする)の色味情報を読み出すと共に、指定された特定場所の照明情報とを読み出す。次いで、照明情報と色味情報とを用いて、シャツ34が、この特定場所でどのように見えるかをシミュレーションして、シミュレーション結果に応じて、特定場所での見え方を再現するように、画像処理条件を設定する。以降は、同様に、画像データを、この画像処理条件で処理して、指定された特定場所でのシャツ34の見え方をシミュレーションした画像をディスプレイ20に表示し、あるいは、プリンタ22で出力する。
【0041】
画像処理部16による画像処理は、ID情報を取得した物品に対応した物のみにも限定されず、物品の色味情報等に応じて、他の領域の色味等を補正するようにしてもよい。
例えば、ID情報からファンデーションや口紅の色味情報を取得した際に、その色が特定の色の場合には、その色に応じて、歯や歯茎の色味を調整するように画像処理条件を設定する。同様に、洋服の色が特定の色の場合には、その色に応じて、顔などの肌の色味を調整するように、画像処理条件を設定する。
この際において、どのような方向に歯や肌などの調整を行うと好ましいなど、画像処理条件の設定に必要な情報は、例えば、化粧品や衣料品のメーカが設定して、データベース18に記録しておけばよい。あるいは、物品毎にID情報に対応付けして、補正情報としてデータベース18に記憶してもよい。
【0042】
以上の例では、ICタグ14が衣料品やアクセサリー等、人物が身に付けるものに取り付けられていたが、本発明は、これに限定はされず、各種の物品にID情報を記憶するICタグ14を取り付けて、かつ、そのID情報と色味情報等とを対応付けしてデータベース18に登録して、カメラ12で撮影された画像で、その物品が適正に仕上がるように、画像処理条件を設定することができる。
【0043】
対応可能な物品としては、例えば、動物園や水族館において、動物自身や、動物を飼育する檻や水槽等にICタグ14を取り付けてもよい。
また、車や電車などの乗り物にICタグを取り付けてもよい。
【0044】
図示例のシステム10は、データベース18を有しており、ここに識別情報と物品情報とを対応付けして記憶しているが、本発明の別の態様では、ICタグ14に、このICタグ14が取り付けられた物品の色味情報やテクスチャパターン情報等の物品情報を記憶する。すなわち、図示例であれば、ICタグ14aにイヤリング32の物品情報を、ICタグ14bにシャツ34の物品情報を、それぞれ記憶する。
【0045】
カメラ12は、例えば撮影時にICタグ14から物品情報を読み取り、物品情報と撮影画像とを対応付けして画像処理部16に供給する。画像処理部16は、カメラ12から供給された物品情報を用いて、以下、先の態様と同様に、撮影された画像に画像処理を行う。
この構成によれば、データベース18へのアクセスが不要になり、よりコンパクトで処理効率の良好な画像処理システムが実現できる。なお、本態様においては、物品を識別するための識別情報は、必ずしもICタグ14に記憶する必要はない。
【0046】
以上の例では、カメラ12がタグリーダ30を有し、物品のICタグ14とカメラ12のタグリーダ30とで交信を行っているが、本発明の別の態様では、カメラ12がタグリーダ30を有さず、両者での交信を行わない。
【0047】
この態様においては、カメラ12(撮影手段)に、タグセンサ30に変えて、自身のID情報を記憶するICタグ14を取り付けると共に、撮影方向および撮影時間の検出手段を付与する。撮影時間はデート機能のために内蔵する時計を利用すればよく、撮影方向は、各種の方向センサを利用すればよい。
また、ある所定領域の例えば床面に、二次元的に、時計を内蔵するタグセンサ30を配列する。
【0048】
カメラ12は、前記所定領域で撮影を行った際には、撮影した画像(その画像データ)に対応付けして、自身のID情報(ICタグ14が記憶しているID情報)、撮影時間および撮影方向を画像処理部16に供給する。
【0049】
一方、タグセンサ30は、連続的にICタグ14の検出を行い、カメラ12や物品のICタグ14から読み取ったID情報と読取時間とを対応付けして画像処理部16に供給する。なお、タグセンサ30が時計を有していない場合には、ICタグ14の読取結果をリアルタイムで画像処理部16に供給することで、画像処理部16において、ID情報と読取時間との対応付けを取ればよい。
画像処理部16は、ID情報を読み取ったタグセンサ30の位置および読取時間、ならびに、このID情報を用いて、このID情報に対応する物体(すなわちカメラ12もしくは物品)が、前記所定領域のどの位置に何時存在しているかを知見し、記憶する(以下、便宜的に、物体の位置時間情報とする)。
【0050】
画像処理部16は、カメラ12から前記所定領域で撮影した撮影画像を供給されると、撮影画像に対応付けされているID情報、撮影時間および撮影方向、ならびに、前記物体の位置時間情報を用いて、撮影時にカメラ12が存在した所定領域の位置、および撮影方向を検出する。
さらに、画像処理部16は、撮影時間、検出したカメラ12の位置と撮影方向、さらに、物体の位置時間情報を用いて、この撮影時間にカメラ12による撮影領域に存在する物品のID情報を知見する。
【0051】
これ以降は、先の例と同様に、ID情報を用いてデータベース18から対応する物品情報を読み出し、この物品情報を用いて、画像処理を行う。
【0052】
本発明においては、このカメラ12がタグセンサ30を有さない構成においても、別の態様として、先の例と同様に、データベースではなく、物品に取り付けられたICタグ14に色味情報やテクスチャパターン等の物品情報を記憶して、画像処理部において、同様の処理を行うようにしてもよい。
【0053】
以上、本発明の画像処理システムについて説明したが、本発明は、上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよいのは、もちろんである。
【0054】
例えば、以上の説明は、本発明の画像処理システムを静止画を撮影するカメラ12で構成したが、本発明は、これに限定はされず、動画を撮影するデジタルビデオカメラで本発明の画像処理システムを構成してもよく、さらに、静止画を撮影するカメラと動画を撮影するカメラとを混在して本発明の画像処理システムを構成してもよい。
また、本発明は基本的に、4つの態様を有するが、本発明にかかる画像処理システムにおいては、上述の4つの態様の2つ以上が混在してもよいのは、もちろんである。
【0055】
さらに、画像処理結果をプリントやモニタに出力するのみならず、CD−RやDVD等の記録媒体に記録できるようにしてもよい。
また、本発明による画像処理を実施した画像と実施しない画像とを比較できるように、モニタに両画像を表示したり、表示する画像の切替等を行えるようにしてもよい。
【0056】
【発明の効果】
以上、詳細に説明したように、本発明によれば、デジタルカメラ等で撮影された画像データの画像処理において、撮影光源やカメラの性能等によらず、画像データを可視像として再生した際に、画像中に存在する各種の物品を実物に極めて近い適正な色味やテクスチャで再生することができる。
【図面の簡単な説明】
【図1】 本発明の画像処理システムの一例の概念図である。
【符号の説明】
10 (画像処理)システム
12 (デジタル)カメラ
14 ICタグ
16 画像処理部
18 データベース
20 ディスプレイ
22 プリンタ
24 通信手段
30 タグリーダ
32 イヤリング
34 シャツ
[0001]
BACKGROUND OF THE INVENTION
The present invention belongs to the technical field of image processing of images (image data) captured by a digital camera or the like, and more specifically, various articles existing in the captured image regardless of the performance of the camera or the imaging light source. The present invention relates to an image processing system that makes it possible to properly reproduce colors and the like.
[0002]
[Prior art]
Currently, the image (photographed on the film) is photoelectrically printed by a scanner, and the image taken on a photographic film (photosensitive material) such as a negative film, reversal film, etc. Then, after the signal obtained by the image processing apparatus is converted into a digital signal, various image processes are performed to obtain image data for recording, and the recording is modulated by the printer (printer / processor) according to the image data. 2. Description of the Related Art Digital photo printers that perform exposure by exposing photographic paper with light, perform predetermined current processing, and output as a print have been put into practical use.
[0003]
On the other hand, with the spread of personal computers (PCs), PDAs (Personal Digital Assistants), etc., the penetration rate of digital cameras is increasing. For example, an image taken with a digital camera is captured and processed by a PC or the like, and is used for various applications such as a homepage or a New Year's card.
Also, according to the digital photo printer, an image is photoelectrically read and image processing is performed as digital image data. Therefore, a digital camera (a recording medium loaded in the digital camera) or a CD- that has previously output image data is used. Since it is possible to receive image data from a recording medium such as R and to output a print that reproduces the image carried by this image data, in recent years, it has been photographed with a digital camera by a specialized printing company such as a lab shop. A print is created from the image.
[0004]
By the way, an image by a digital camera or a photographic film is greatly influenced by the performance of the camera, the photographing light source, and the like. Therefore, when digital image data based on these is reproduced as a visible image such as a display image on a print or a display, various image processes are performed in order to make the color of the image appropriate.
[0005]
For example, Patent Document 1 discloses an image of a specific region of the face, hair, eyes, lips, torso, clothes, and accessories specified in the first frame image when performing image processing of a plurality of frame image data. And the image feature quantity and processing conditions of this specific area are stored, and for the subsequent frames, the area where the specific area and the image feature quantity are similar is the same processing condition as the specific area in the first frame. Discloses an image processing method for performing image processing.
Patent Document 2 discloses a gray balance common to all frames obtained from the image data of all frames in image processing mainly for images shot on film, and each frame obtained for each frame. Image processing for obtaining gray balance adjustment conditions for each frame using weighted gray balance is disclosed.
[0006]
[Patent Document 1]
JP-A-11-275351 [Patent Document 2]
JP-A-11-317880 [0007]
[Problems to be solved by the invention]
According to the image processing method disclosed in Patent Document 1, the portion designated as the specific area in the first frame is properly finished.
However, in this method, the work of specifying a specific area is necessary, and there is a possibility that colors other than those specified as the specific area may be inappropriate and different from the actual thing. .
[0008]
On the other hand, according to the image processing disclosed in Patent Document 2, a gray balance common to all the frames is used, and the gray balance adjustment condition is set by weighting the gray balance of each frame, so The overall gray balance of the reproduced image can be made appropriate by eliminating the influence.
However, even with this method, there is a possibility that an individual object or the like existing in the image becomes an inappropriate object having a different color from the actual object.
[0009]
An object of the present invention is to solve the above-mentioned problems of the prior art, and in image processing of digital image data shot with a digital camera or the like, image data can be used regardless of the shooting light source or the performance of the camera. An object of the present invention is to provide an image processing system that enables various articles existing in an image to be reproduced with appropriate colors and textures that are very close to the actual object when reproduced as a visual image.
[0010]
[Means for Solving the Problems]
In order to achieve the above object, an image processing system according to the present invention includes a non-contact-readable memory that stores identification information of an article to which the image processing system is attached, and a non-memory that stores identification information for identifying itself. A photographing unit having a photographing direction and a photographing time detection unit attached with a memory capable of contact reading, a reading unit two-dimensionally arranged in a predetermined area for reading both the memories in a non-contact manner, and an article A database that stores article information that is information related to the identification information in association with each other, identification information read by the reading unit from the memory, and exists in an image captured by the imaging unit Image processing means for performing image processing for appropriately reproducing any one or more of various articles in terms of density, color, and texture, and the photographing means The identification information, the photographing direction, and the photographing time are associated with each other, the photographed image is supplied to the image processing means, and the image processing means acquires the identification information read from the memory by the reading means, and this identification Detecting the position of the article corresponding to the information and the photographing means, associating the photographed image with the identification information of the article existing in the image from the identification information, the photographing direction and the photographing time supplied from the photographing means; The corresponding article information is read from the database using the identification information, and the image processing is performed using the article information.
[0011]
In addition, the image processing system according to the present invention can perform non-contact reading in which non-contact reading is possible for storing article information that is information relating to an article to which the image processing system is attached, and non-contact reading in which identification information for identifying itself is stored. A photographing unit having a photographing direction and a photographing time attached with a memory, a reading unit two-dimensionally arranged in a predetermined area for reading the both memories in a non-contact manner, and the reading unit Image processing for acquiring article information read from a memory, and performing image processing for appropriately reproducing various kinds of articles photographed by the photographing unit and existing in the image for at least one of density, color, and texture The imaging means associates the identification information, the imaging direction and the imaging time of itself, supplies the captured image to the image processing means, and The image processing means uses the information read from the memory by the reading means to detect the position of the article and the photographing means corresponding to this information, and from the identification information, the photographing direction and the photographing time supplied from the photographing means. The photographed image is associated with the article information of the article present in the image, and the image processing is performed using the article information.
[0014]
In such an image processing system of the present invention, it is preferable that the article information includes at least one of spectral reflectance data as color information of the article and information on a texture pattern of the article. The processing means preferably performs image processing according to the article using the article information for the subject in the image other than the article as necessary, and the article information is in an appropriate state. The image processing means preferably performs the image processing using the reference image, and the product information includes information related to the product, image processing means, if necessary, it is preferable to synthesize the information relating to the article in the image, also, non-contact reading is possible to store identification information of said article And an image database that associates and stores the information and a plurality of images stored in the memory, the image processing unit reads out the corresponding image from the image database by using the information stored in said memory, The read image is preferably subjected to image processing using information on the article, and further includes a storage unit for storing illumination information about illumination light at a specific location, and the image processing unit receives illumination information from the storage unit. It is preferable to reproduce the appearance of the article at the corresponding specific location using the illumination information and the article information.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, the image processing system of the present invention will be described in detail based on preferred embodiments shown in the accompanying drawings.
[0016]
FIG. 1 shows a conceptual diagram of an example of an image processing system of the present invention.
An image processing system 10 (hereinafter, referred to as system 10) in the illustrated example is a system that performs image processing on an image captured by a digital camera 12 (hereinafter referred to as camera 12). The IC tag 14 attached to the article, the image processing unit 16, and the database 18 are configured.
The image processing unit 16 and the database 18 are connected by a communication unit 24, and the display 20 and the printer 22 are connected to the image processing unit 16.
[0017]
Various communication means 24 can be used, and may be a computer communication network such as the Internet or a LAN (Local Area Network), or a dedicated line dedicated to the system 10 of the present invention.
As the display 20, various displays such as a CRT (Cathode Ray Tube) and an LCD (Liquid Crystal Display) can be used.
Further, the printer 22 also exposes photographic paper (photosensitive material) with recording light modulated in accordance with image data and performs various types of printers (image recording apparatuses) such as a photographic printer, an electrophotographic printer, and an inkjet printer that perform wet development processing. ) Is available.
[0018]
The IC tag 14 includes an IC chip including an antenna, a memory, and the like, and is wirelessly connected / communication with the IC tag reader 30 (reading unit) in a non-contact manner, for example, using an RFID (Radio Frequency IDentification) technique. IC tag.
In the present invention, the memory attached to various articles is not limited to the IC tag 14, and various memories can be used as long as they can be read by the reading means attached to the camera 12. It is.
[0019]
In the present invention, the IC tag 14 (memory) is attached to various articles (including organisms such as animals) and stores ID information for identifying the articles.
In the system 10 of the illustrated example, the IC tag 14 is a variety of articles worn by a subject (person), for example, accessories such as rings, necklaces, earrings, earrings, brooches, bags such as handbags, shoulder bags, and second bags. Attached to clothing such as clothing, hats, shirts, skirts, jackets, ties, etc., cosmetics such as foundations, lipsticks, and eye shadows (for example, it may be attached to a case).
In the example shown in FIG. 1, the IC tag 14 a is attached to the earring 32, and the IC tag 14 b is attached to the shirt 34.
[0020]
In the present invention, the attachment position of the IC tag 14 is not particularly limited, and a position where wireless communication can be performed without causing a decrease in appearance, function, handleability, and the like is appropriately determined depending on the article to be attached. Just decide.
[0021]
In the illustrated example, the ID information basically does not need to be able to discriminate each item, and it is only necessary to discriminate the type of the item (for example, the manufacturer and model number of the item). However, if the IC tag is attached to an article having an individual difference in color or the like even if the IC tag is attached to an animal or a cage containing the animal, which will be described later , the individual can be discriminated. ID information may be assigned to the.
[0022]
The (digital) camera 12 associates an IC tag sensor 30 (hereinafter referred to as a tag sensor 30) for reading information recorded on the IC tag 14, and information read from the IC tag 14 with a photographed image. Basically, it is a normal digital (still) camera, except that it has a function of outputting in a normal manner.
The tag sensor 30 is a known IC tag sensor (IC tag reader / writer) that uses the same RFID technology as described above, for example, which wirelessly connects to the IC tag 14 and reads information recorded on the IC tag 14.
[0023]
In the system 10, the camera 12 reads, for example, information recorded on the IC tag 14 by the tag sensor 30 at the time of photographing (ID information of an article to which the IC tag 14 is attached).
The camera 12 associates the image data of the photographed image with the ID information read from the IC tag 14 and stores the image data in, for example, a built-in memory or the SmartMedia TM or xD- mounted on the camera 12. stored in a storage medium such as a picture card TM. The article ID information may be recorded, for example, in the header of image data (image file).
[0024]
The image processing unit 16 performs image processing on image data captured by the camera 12. Specifically, the image processing unit 16 reads the color information of the article corresponding to the ID information from the database 18 described later using the ID information of the article read by the tag sensor 30 of the camera 12, and this color. Using the taste information, the image is corrected so that the color of the corresponding article in the image has a color corresponding to the color information. This effect will be described in detail later.
In the illustrated example, the image processing unit 16 outputs the processed image data to the display 20 to display the image and / or outputs the image data to the printer 22 to reproduce the image. Print out the completed print.
[0025]
The image processing performed by the image processing unit 16 is not limited to this. Color / density correction, gradation correction, electronic scaling processing, sharpness processing (sharpness enhancement), image density dynamic range compression (image data) Various known image processing such as dodging effect by processing) may be performed.
Such an image processing unit 16 may be configured using, for example, a personal computer (PC), a workstation (WS), or the like, or may be incorporated in the image processing apparatus of the above-described digital photo printer. Also good.
[0026]
The database 18 is configured using, for example, a PC, WS, or the like, and corresponds to ID information of various articles stored in the IC tag 14 and color information indicating actual colors of the articles. It is registered (memorized). For example, ID information and color information are stored in association with each other for each of the earring 32 and the shirt 34.
The color information may be information that allows the actual color of the corresponding article to be found. For example, R (red), G (green), and B (blue) image data or spectral reflectance data under a predetermined light source such as Day Light may be used as the color information.
[0027]
The database 18 may be constructed by, for example, a photo studio or a lab shop, acquiring data from a manufacturer of the article, photographing the article under appropriate conditions, measuring the color, and using both together. Alternatively, it may be constructed by an article manufacturer or sales company. Therefore, the number of the database 18 is not limited to one, and may be plural. Furthermore, there is no particular limitation on the timing of registering article information in the database.
In the illustrated example, the database 18 and the image processing unit 16 are connected by the communication means 24. However, the present invention is not limited to this. For example, the image processing unit 16 and the database 18 are A configuration in which the image processing unit 16 and the database 18 are integrated may be employed.
[0028]
Hereinafter, the image processing system of the present invention will be described in more detail by explaining the operation of the system 10.
[0029]
As described above, when the camera 12 captures a subject, the tag reader 30 reads the IC tag 14 of the article worn by the subject, acquires the ID information of the article, and acquires image data of the photographed image and the article. The ID information is associated with each other and stored in its own memory or stored in a storage medium such as an xD-Picture Card TM .
In the illustrated example, since the IC tag 14 a and the IC tag 14 b are respectively attached to the earring 32 and the shirt 34, the camera 12 receives the ID information of the earring 32 and the ID information of the shirt 34 from both IC tags 14. It is acquired, and this is associated with image data and stored.
[0030]
When an image captured by the camera 12 is processed by the image processing unit 16, the image processing unit 16 reads image data (image file) directly from the camera 12 or stores the image data, for example. Is read and image data (image file) is obtained by reading this.
Next, the image processing unit 16 knows the ID information of the earring 32 and the shirt 34 associated with the image data. Furthermore, it connects with the database 18 by the communication means 24, searches the database 18 using this ID information, and reads the color information of the earring 32 and the shirt 34. That is, the ID information is read from the IC tag 14 attached to the article, the type of the article is recognized using the ID information, and the color information of the article is acquired from the database 18.
[0031]
Next, the image processing unit 16 corrects the image data using the color information so that the earring 32 and the shirt 34 have colors corresponding to the color information.
First, the image processing unit 16 extracts regions of corresponding articles, that is, earrings 32 and shirts 34 from the image by color / density detection, shape recognition, template matching, texture pattern recognition, and the like.
Next, image analysis of this area is performed, image processing conditions are set so that the earring 32 and the shirt 34 have colors according to the color information in the reproduced image, and image processing of the image data is performed. For example, if the color information is R, G, and B image data under Day Light, image processing conditions are set so that the earring 32 and the shirt 34 in the reproduced image have this color, and image processing is performed. .
[0032]
The image processing according to the color information may be performed only for each article area (in the illustrated example, the area of the earring 32 and the shirt 34) for each article, or the entire image processing may be performed. May be performed.
In addition, when performing image processing as a whole, when there are a plurality of articles having the IC tag 14 as shown in the example in the figure, image processing conditions are set comprehensively.
[0033]
When the image processing is completed, the image processing unit 16 outputs the processed image data to the display 20 and reproduces it as a visible image, or outputs it to the printer 22 and outputs a print reproducing the captured image. .
[0034]
That is, according to the present invention, the camera 12 reads ID information from the IC tag 14 attached to various articles, recognizes the type of the article using the ID information, and reads the color of the article from the database 18. The taste information is read out, and the image is corrected so that the color of the corresponding article in the image becomes a color corresponding to the color information.
Therefore, when the image captured by the camera 12 is reproduced as a visible image regardless of the performance of the camera 12, the imaging light source, or the like, it is possible to reproduce a high-quality image in which an article in the image is reproduced with a color close to the real thing. .
[0035]
In the present invention, the article information stored in the database 18 is not limited to the color information of the article, and various types of information about the article can be used, and plural kinds of article information may be stored. The unit 16 may perform various types of image processing according to this.
[0036]
For example, information on the brightness recommended by the manufacturer of each article may be stored in the database 18 as article information, and image processing may be performed so as to be close to this brightness.
[0037]
Alternatively, the texture pattern of the article may be stored as article information, and the image processing unit 16 may perform image processing so that the texture pattern is appropriately reproduced. In addition, for example, an article maker or the like designates a part to be emphasized of an article (product) such as an emblem or a logo, stores it as article information, and performs image processing so that this part is emphasized by sharpness processing or the like. The unit 16 may perform image processing. Alternatively, the high resolution image data prepared in the database 18 may be locally synthesized.
According to these aspects, for example, even when the resolution of the camera 12 is low, it is possible to reproduce an image that suitably represents the properties and characteristics of the article.
[0038]
Further, in a photo studio or the like, an article with the IC tag 14 attached (or scheduled to be attached) is photographed in advance under optimum photographing conditions, and this image (hereinafter referred to as a reference image) is stored in the database 18 as article information. You may remember. The image processing unit 16 reads out this reference image, sets image processing conditions so that the color and texture of the article matches the reference image in the image to be reproduced, and performs image processing.
Further, customer information such as slimming finish, fair white finish, and soft focus finish is registered as customer information, the subject person is identified from the ID information of the article, and correction according to the customer information is performed. In addition, image processing conditions may be set.
[0039]
Information related to an article other than the appearance of the article (hereinafter referred to as related information) may be used as the article information. Examples of the related information include detailed information on the article, information on the related product of the article, information on the latest product of the article, and the like.
When such related information is acquired, for example, the image processing unit 16 combines the information as text information with an image (image data) and displays the image on the display 20. Alternatively, the related information may be reproduced as a still image or a moving image, and further, the information may be synthesized as audio information corresponding to the image data, and the related information may be reproduced with sound during image display.
[0040]
Furthermore, lighting information of a specific place such as a wedding hall or a hotel party venue is stored in the database 18 (or other places are possible), and the lighting information and the color information are used to store the article information at the specific place. You may simulate how it looks.
In this case, for example, when the image data is supplied, the image processing unit 16 reads the color information of the article (for example, the shirt 34 as an example) using the ID information, and the illumination of the specified specific place. Read information. Next, the lighting information and the color information are used to simulate how the shirt 34 looks at this specific location, and according to the simulation result, the image at the specific location is reproduced. Set the processing conditions. Thereafter, similarly, the image data is processed under this image processing condition, and an image simulating the appearance of the shirt 34 at the specified specific place is displayed on the display 20 or output by the printer 22.
[0041]
The image processing by the image processing unit 16 is not limited to only the object corresponding to the article for which the ID information has been acquired, and the color of the other area may be corrected according to the color information of the article. Good.
For example, when the foundation or lipstick color information is acquired from the ID information, if the color is a specific color, the image processing conditions are set so that the color of the teeth and gums is adjusted according to the color. Set. Similarly, when the color of the clothes is a specific color, the image processing conditions are set so that the color of the skin such as the face is adjusted according to the color.
At this time, information necessary for setting the image processing conditions is preferably set by a manufacturer of cosmetics or clothing, and recorded in the database 18, for example, it is preferable to adjust teeth or skin in any direction. Just keep it. Alternatively, each article may be stored in the database 18 as correction information in association with the ID information.
[0042]
In the above example, the IC tag 14 is attached to a thing worn by a person such as clothing or accessories, but the present invention is not limited to this, and the IC tag stores ID information in various articles. 14, the ID information and the color information are associated with each other and registered in the database 18, and image processing conditions are set so that the article is properly finished with the image captured by the camera 12. Can be set.
[0043]
As a compatible article, for example, in a zoo or aquarium, the IC tag 14 may be attached to the animal itself, a cage or an aquarium for raising animals.
Further, an IC tag may be attached to a vehicle such as a car or a train.
[0044]
The system 10 in the illustrated example has a database 18 in which identification information and article information are stored in association with each other. In another aspect of the present invention, the IC tag 14 includes the IC tag. 14 stores article information such as color information and texture pattern information of the article to which 14 is attached. That is, in the illustrated example, the article information of the earring 32 is stored in the IC tag 14a, and the article information of the shirt 34 is stored in the IC tag 14b.
[0045]
The camera 12 reads article information from the IC tag 14 at the time of photographing, for example, and associates the article information with the photographed image and supplies them to the image processing unit 16. The image processing unit 16 uses the article information supplied from the camera 12 to perform image processing on the captured image in the same manner as in the previous aspect.
According to this configuration, access to the database 18 becomes unnecessary, and a more compact image processing system with good processing efficiency can be realized. In this aspect, identification information for identifying an article need not necessarily be stored in the IC tag 14.
[0046]
In the above example, the camera 12 has the tag reader 30 and the IC tag 14 of the article communicates with the tag reader 30 of the camera 12. However, in another aspect of the present invention, the camera 12 has the tag reader 30. Without communication between the two.
[0047]
In this embodiment, an IC tag 14 for storing its own ID information is attached to the camera 12 (photographing means) instead of the tag sensor 30, and a photographing direction and photographing time detecting means is provided. The photographing time may be a built-in clock for the date function, and the photographing direction may be various direction sensors.
In addition, tag sensors 30 having a built-in clock are arranged two-dimensionally on, for example, a floor surface of a predetermined area.
[0048]
When shooting in the predetermined area, the camera 12 associates with the shot image (its image data) in association with its own ID information (ID information stored in the IC tag 14), shooting time, and The shooting direction is supplied to the image processing unit 16.
[0049]
On the other hand, the tag sensor 30 continuously detects the IC tag 14, associates the ID information read from the camera 12 or the IC tag 14 of the article with the reading time, and supplies them to the image processing unit 16. If the tag sensor 30 does not have a clock, the image processing unit 16 associates the ID information with the reading time by supplying the reading result of the IC tag 14 to the image processing unit 16 in real time. Take it.
The image processing unit 16 uses the ID information to read the position and reading time of the tag sensor 30 and the position corresponding to the ID information (that is, the camera 12 or the article) in which position of the predetermined region. Is stored and stored (hereinafter referred to as object position time information for convenience).
[0050]
When the captured image captured in the predetermined area is supplied from the camera 12, the image processing unit 16 uses the ID information associated with the captured image, the capturing time and the capturing direction, and the position time information of the object. Thus, the position of the predetermined area where the camera 12 was present at the time of shooting and the shooting direction are detected.
Further, the image processing unit 16 uses the shooting time, the detected position and shooting direction of the camera 12, and the position / time information of the object to find the ID information of the article existing in the shooting area by the camera 12 at this shooting time. To do.
[0051]
Thereafter, as in the previous example, the corresponding article information is read from the database 18 using the ID information, and image processing is performed using this article information.
[0052]
In the present invention, even in a configuration in which the camera 12 does not have the tag sensor 30, as another aspect, as in the previous example, not the database but the IC tag 14 attached to the article is not colored information or texture pattern. Or the like, and similar processing may be performed in the image processing unit.
[0053]
The image processing system of the present invention has been described above. However, the present invention is not limited to the above-described embodiments, and various improvements and modifications may be made without departing from the gist of the present invention. It is.
[0054]
For example, in the above description, the image processing system of the present invention is configured by the camera 12 that captures a still image, but the present invention is not limited to this, and the image processing of the present invention is performed by a digital video camera that captures a moving image. A system may be configured, and a camera that captures still images and a camera that captures moving images may be mixed to configure the image processing system of the present invention.
In addition, the present invention basically has four aspects. Of course, in the image processing system according to the present invention, two or more of the above-described four aspects may be mixed.
[0055]
Furthermore, the image processing result may be recorded on a recording medium such as a CD-R or DVD as well as being output to a print or monitor.
Further, both images may be displayed on the monitor, or the displayed image may be switched so that the image subjected to the image processing according to the present invention can be compared with the image not performed.
[0056]
【The invention's effect】
As described above in detail, according to the present invention, in image processing of image data captured by a digital camera or the like, when image data is reproduced as a visible image regardless of the performance of the imaging light source or the camera. In addition, various articles present in the image can be reproduced with appropriate colors and textures that are very close to the actual product.
[Brief description of the drawings]
FIG. 1 is a conceptual diagram of an example of an image processing system of the present invention.
[Explanation of symbols]
10 (Image Processing) System 12 (Digital) Camera 14 IC Tag 16 Image Processing Unit 18 Database 20 Display 22 Printer 24 Communication Means 30 Tag Reader 32 Earring 34 Shirt

Claims (8)

自身が取り付けられた物品の識別情報を記憶する非接触読取が可能なメモリと、自身を識別する識別情報が記憶された非接触読取が可能なメモリを取り付けられた、撮影方向および撮影時間の検出手段を有する撮影手段と、前記メモリを非接触で読み取る、所定の領域に二次元的に配列された読取手段と、物品に関する情報である物品情報と前記識別情報とを対応付けして記憶するデータベースと、前記読取手段が前記メモリから読み取った識別情報を取得し、また、前記撮影手段によって撮影され画像中に存在する各種の物品を濃度,色味およびテクスチャのいずれか1つ以上について適正に再生する画像処理を行う画像処理手段とを有し、
前記撮影手段は、自身の前記識別情報、撮影方向および撮影時間を対応付けして、撮影した画像を前記画像処理手段に供給し、前記画像処理手段は、前記読取手段が前記両メモリから読み取った識別情報を取得して、この識別情報に対応する物品および撮影手段の位置を検出すると共に、前記撮影手段から供給された識別情報、撮影方向および撮影時間から、撮影画像と画像中に存在する物品の識別情報とを対応付けし、この識別情報を用いて前記データベースから対応する物品情報を読み出し、この物品情報を用いて前記画像処理を行うことを特徴とする画像処理システム。
Detection of shooting direction and shooting time with memory capable of non-contact reading that stores identification information of the article to which it is attached and memory capable of non-contact reading that stores identification information identifying itself A database that stores the image information having the information in association with each other, the reading means that is two-dimensionally arranged in a predetermined area, and the article information that is information about the article and the identification information. And the reading means acquires the identification information read from the memory , and appropriately reproduces various kinds of articles photographed by the photographing means and existing in the image with respect to any one or more of density, color and texture. Image processing means for performing image processing to be performed,
The photographing unit associates the identification information, the photographing direction, and the photographing time of itself, supplies the photographed image to the image processing unit, and the image processing unit reads the memory from both the memories. Acquires identification information, detects the position of the article corresponding to the identification information and the photographing means, and uses the identification information, the photographing direction and the photographing time supplied from the photographing means to present the photographed image and the article present in the image. An image processing system, wherein the corresponding article information is read out from the database using the identification information, and the image processing is performed using the article information.
自身が取り付けられた物品に関する情報である物品情報を記憶する非接触読取が可能なメモリと、自身を識別する識別情報が記憶された非接触読取が可能なメモリを取り付けられた、撮影方向および撮影時間の検出手段を有する撮影手段と、前記メモリを非接触で読み取る、所定の領域に二次元的に配列された読取手段と、前記読取手段が前記両メモリから読み取った物品情報を取得し、また、前記撮影手段によって撮影され画像中に存在する各種の物品を濃度,色味およびテクスチャのいずれか1つ以上について適正に再生する画像処理を行う画像処理手段とを有し、
前記撮影手段は、自身の前記識別情報、撮影方向および撮影時間を対応付けして、撮影した画像を前記画像処理手段に供給し、前記画像処理手段は、前記読取手段が前記メモリから読み取った情報を用いて、この情報に対応する物品および撮影手段の位置を検出すると共に、撮影手段から供給された識別情報、撮影方向および撮影時間から、撮影画像と画像中に存在する物品の物品情報とを対応付けし、この物品情報を用いて前記画像処理を行うことを特徴とする画像処理システム。
Shooting direction and shooting with a non-contact readable memory for storing article information, which is information related to the article to which it is attached, and a non-contact readable memory storing identification information for identifying itself. A photographing means having a time detecting means; a reading means that reads the memory in a non-contact manner; two-dimensionally arranged in a predetermined area; and the article information read from the memories by the reading means; Image processing means for performing image processing for appropriately reproducing any one or more of density, color and texture of various articles photographed by the photographing means and existing in the image,
The photographing unit associates the identification information, the photographing direction, and the photographing time of itself, supplies the photographed image to the image processing unit, and the image processing unit includes information read from the memory by the reading unit. Is used to detect the position of the article and the photographing means corresponding to this information, and from the identification information, the photographing direction and the photographing time supplied from the photographing means, the photographed image and the article information of the article present in the image are obtained. An image processing system characterized by associating and performing the image processing using the article information.
前記物品情報が、この物品の色味情報としての分光反射率データ、およびこの物品のテクスチャパターンに関する情報の少なくとも1つを含む請求項1または2に記載の画像処理システム。The image processing system according to claim 1, wherein the article information includes at least one of spectral reflectance data as color information of the article and information regarding a texture pattern of the article. 前記画像処理手段は、必要に応じて、この物品以外の画像中の被写体に関しても、前記物品情報を用いて、この物品に応じた画像処理を行う請求項1〜のいずれかに記載の画像処理システム。The image according to any one of claims 1 to 3 , wherein the image processing unit performs image processing according to the article using the article information for a subject in an image other than the article as necessary. Processing system. 前記物品情報として、適正な状態の前記物品を含む基準画像を有し、前記画像処理手段は、この基準画像を用いて前記画像処理を行う請求項1〜のいずれかに記載の画像処理システム。As the article information, it includes a reference image containing the article the proper conditions, the image processing means, the image processing system according to any one of claims 1 to 4 for the image processing using the reference image . 前記物品情報として、前記物品に関連する情報を有し、前記画像処理手段は、必要に応じて、前記物品に関連する情報を前記画像に合成する請求項1〜のいずれかに記載の画像処理システム。As the article information includes information related to the article, said image processing means, if necessary, according to information relating to the article to any one of claims 1 to 5, combined with the image image Processing system. 前記物品の識別情報を記憶する非接触読取が可能なメモリに記憶された情報と複数の画像とを対応付けして記憶する画像データベースを有し、前記画像処理手段は、前記メモリに記憶された情報を用いて前記画像データベースから対応する画像を読み出し、読み出した画像についても、前記物品に関する情報を用いた画像処理を行う請求項1〜のいずれかに記載の画像処理システム。An image database for storing a plurality of images in association with information stored in a non-contact-readable memory for storing identification information of the article, and the image processing means is stored in the memory said read the corresponding image from the image database, read the even image, the image processing system according to any one of claims 1 to 6 for image processing using information about the article with the information. 特定場所の照明光に関する照明情報の記憶手段を有し、前記画像処理手段は、前記記憶手段から照明情報を読み出して、この照明情報と前記物品情報とを用いて、対応する特定場所における前記物品の見え方を再現する請求項1〜のいずれかに記載の画像処理システム。The image processing means reads out the illumination information from the storage means, and uses the illumination information and the article information to store the article at the corresponding particular place. the image processing system according to any one of claims 1 to 7 for reproducing the appearance of.
JP2003118169A 2003-04-23 2003-04-23 Image processing system Expired - Fee Related JP4275983B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003118169A JP4275983B2 (en) 2003-04-23 2003-04-23 Image processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003118169A JP4275983B2 (en) 2003-04-23 2003-04-23 Image processing system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2009004638A Division JP4746680B2 (en) 2009-01-13 2009-01-13 Image processing system

Publications (2)

Publication Number Publication Date
JP2004328202A JP2004328202A (en) 2004-11-18
JP4275983B2 true JP4275983B2 (en) 2009-06-10

Family

ID=33497785

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003118169A Expired - Fee Related JP4275983B2 (en) 2003-04-23 2003-04-23 Image processing system

Country Status (1)

Country Link
JP (1) JP4275983B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7916179B2 (en) 2005-03-18 2011-03-29 Nikon Corporation Digital camera
JP2007003646A (en) * 2005-06-22 2007-01-11 Fujifilm Holdings Corp Camera system, lens unit and accessory
JP2010503168A (en) * 2006-09-06 2010-01-28 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Lighting control
JP2015179915A (en) 2014-03-19 2015-10-08 有限会社パパラボ Color fidelity simulation device and color fidelity simulation method

Also Published As

Publication number Publication date
JP2004328202A (en) 2004-11-18

Similar Documents

Publication Publication Date Title
US7577310B2 (en) Image processing method
JP4291963B2 (en) Image processing method
CN101617339B (en) Image processing device and image processing method
JP6090679B2 (en) Electronic mirror device
JP4344925B2 (en) Image processing apparatus, image processing method, and printing system
US20150172513A1 (en) Methods And Apparatus For Color Balance Correction
US20060210165A1 (en) Image extracting apparatus, image extracting method, and image extracting program
JP2004246456A (en) Apparatus and method for image editing
JP2005086516A (en) Imaging device, printer, image processor and program
CN101790035A (en) Camera, image display device, image display method and program
JP2007193824A (en) Image processing method
JP2011077764A (en) Multidimensional image processing device, multidimensional image photographing system, multidimensional image printed matter and multidimensional image processing method
CN106887091A (en) It is a kind of go abroad, the self-service method handled of exit certificate and its system and device
JP2010098404A (en) Imaging device, mobile terminal provided with imaging device, portrait image processing method, portrait image processing program, and recording medium
CN103856708B (en) The method and photographic device of auto-focusing
US20050041103A1 (en) Image processing method, image processing apparatus and image processing program
JP4275983B2 (en) Image processing system
CN108052883A (en) User's photographic method, device and equipment
JP2002305717A (en) Image processing system and ordering system
JP4746680B2 (en) Image processing system
JP4795988B2 (en) Image processing method
JP5111702B2 (en) Color correction method and ID card creation system in ID card creation system
JP2010224775A (en) Eye-catch synthesizing device and method
JP2006303780A (en) Imaging apparatus
JP7260737B2 (en) Image capturing device, control method for image capturing device, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060301

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061212

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080710

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080729

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080926

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090224

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090305

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120313

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120313

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130313

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130313

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140313

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees