JP2004282143A - Image processor and display control method therefor - Google Patents

Image processor and display control method therefor Download PDF

Info

Publication number
JP2004282143A
JP2004282143A JP2003066900A JP2003066900A JP2004282143A JP 2004282143 A JP2004282143 A JP 2004282143A JP 2003066900 A JP2003066900 A JP 2003066900A JP 2003066900 A JP2003066900 A JP 2003066900A JP 2004282143 A JP2004282143 A JP 2004282143A
Authority
JP
Japan
Prior art keywords
image
thumbnail
file
stored
thumbnail image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003066900A
Other languages
Japanese (ja)
Other versions
JP4269724B2 (en
Inventor
Taketoshi Yamashita
武利 山下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2003066900A priority Critical patent/JP4269724B2/en
Publication of JP2004282143A publication Critical patent/JP2004282143A/en
Application granted granted Critical
Publication of JP4269724B2 publication Critical patent/JP4269724B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processor and a display control method therefor for carrying out index display at high speed with high definition. <P>SOLUTION: The image processor replaces an image having a photographing resolution used at reading with an image having a low resolution corresponding to that in index display and displays the resulting image when the photographing resolution image in pairs with the low resolution image in the index display is read from a medium A and in use after a display / operation section displays the index display for displaying a list of low resolution images resulting from reading the low resolution images without the need for reading the medium A such as a digital camera, and in carrying out again the index display including the low resolution image after the photographing resolution image is read and in use. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、例えば、コンビニエンスストア等に設置され、ディジタルカメラ等のメディアに記憶されている画像を読み取って印刷する画像印刷装置に具わる画像処理装置に関し、特に、インデックス表示を高速且つ高精細に行うことができる画像処理装置及びその表示制御方法に関するものである。
【0002】
【従来の技術】
近年、ディジタルカメラ等のメディア(例えば、スマートメディアなど)内の1つの写真のファイルは、Exifに代表されるように、圧縮された撮影解像度(例えば、3000×2000)のデータとそれを間引きした低解像度(例えば、160×120)のサムネイル画像が入っている。
【0003】
そして、従来、コンビニエンスストア等に設置され、上記ディジタルカメラのメディアに記憶されている画像を読み取って印刷する画像印刷装置においては、所定のメディア挿入口にメディアが挿入されると、該メディアに記憶されている複数の画像を同時に表示して目的の画像を検索しやすくする為の一覧画像を表示するようにしている。具体的には、写真画像を印刷するのに先立って挿入されたメディアから現在記憶されている撮影解像度の画像全てに対応する上記サムネイル画像データを読み出し、サムネイル画像を一覧表示したインデックス表示(図8参照)を表示画面に表示する。
【0004】
これは、複数の撮影解像度の画像そのものを読み取って一覧表示すると大変時間がかかってしまうが、画像の小さいサムネイル画像を読み取って一覧表示すれば短時間で行えるからである。
【0005】
そして、一覧表示後、画像印刷装置では、その表示したインデックス表示の中でユーザにより印刷指示されたサムネイル画像に対応する上記撮影解像度データをメディアから読み出して印刷する。
【0006】
ところで、このように従来の画像印刷装置では、メディアに記憶されている写真画像の一覧を表示する際、高速に行うために撮影解像度の画像を読み取るのではなく撮影解像度の画像を間引いたサムネイル画像を読み取って一覧表示しているため、インデックス表示内の画像は画質が荒く見ずらいものとなっている。更に、インデックス表示内でサムネイル画像の拡大表示等を行うと表示が更に荒くなって見ずらいものとなっている。
【0007】
尚、近い従来技術を以下に示す。
【0008】
例えば、従来では、複数の画像を選択して印刷するものが知られている(以下、従来技術1という。)(特許文献1参照)。この従来技術1では、操作性向上のみであり、高速化には寄与しない。
【0009】
また、従来、プレビュー画像とサムネイル画像を同一画面上に表示するものが知られている(以下、従来技術2という。)(特許文献2参照)。この従来技術2では、操作性向上のみであり、高速化には寄与しない。
【0010】
また、従来、画像サイズによって縮小アルゴリズムを画質優先/速度優先に切り替えるものが知られている(以下、従来技術3という。)(特許文献3参照)。この従来技術3では、縮小アルゴリズムを変化させる必要がある。
【0011】
また、従来、拡大されたサムネイル画像の早送りによる高速画像選択方法が知られている(以下、従来技術4という。)(特許文献4参照)。この従来技術4では、ユーザによるトリミング指定ができない。
【0012】
また、従来、画像データにトリミングを可能な限り実行せず、見栄えが良好な大きさの画像が得られる画像印刷方法を提供するものが知られている(以下、従来技術5という。)(特許文献5参照)。この従来技術5では、ユーザによるトリミング指定ができない。
【0013】
【特許文献1】
特開平10−2000839号公報。
【0014】
【特許文献2】
特開平10−243273号公報。
【0015】
【特許文献3】
特開平10−293676号公報。
【0016】
【特許文献4】
特開2001−47684号公報。
【0017】
【特許文献5】
特開2002−325198号公報。
【0018】
【発明が解決しようとする課題】
上述の如く、従来の画像印刷装置にあっては、メディアに記憶されている写真画像の一覧を表示する際、高速に行うために撮影解像度の画像を読み取るのではなく撮影解像度の画像を間引いたサムネイル画像を読み取って一覧表示しているため、インデックス表示内の画像は荒く見ずらいものとなっている。更に、インデックス表示内でサムネイル画像の拡大表示を行うと表示が更に荒くなって見ずらいものとなってしまう。
【0019】
そこで、本発明は上記実情に鑑み、インデックス表示を高速且つ高精細に行うことができる画像処理装置及びその表示制御方法の提供を目的とするものである。
【0020】
【課題を解決するための手段】
上記目的を達成する為に、請求項1の発明は、同一ファイル内に画像と該画像を間引いたサムネイル画像を格納し、前記サムネイル画像に基づき該ファイル内に格納された画像のインデックス表示を行うとともに該ファイルから前記画像を読み出して該画像の所望の処理を行い、画像印刷装置に対して前記ファイル内に格納された画像の印刷指示を行う画像処理装置において、前記ファイルから前記画像を読み出して該画像の所望の処理を行う画像処理手段と、前記画像処理手段により処理を行った画像で該画像に対応するサムネイル画像を置き換えるサムネイル画像置換手段とを具備することを特徴とする。
【0021】
また、請求項2の発明は、請求項1の発明において、前記ファイルから前記サムネイル画像を読み出して前記ファイル内に格納された画像の一覧のインデックス表示を行うインデックス表示手段と、前記インデックス表示手段によりインデックス表示されたサムネイル画像により前記処理手段で処理する所望の画像を指定する画像指定手段とを更に具備することを特徴とする。
【0022】
また、請求項3の発明は、請求項1または2の発明において、前記画像処理装置に着脱自在の記憶媒体に前記ファイルが記憶され、前記記憶媒体に記憶されたファイルから読み出して所望の処理を行った画像を記憶する記憶手段を更に具備し、前記サムネイル画像置換手段は、前記画像処理手段で処理した画像に対応するサムネイル画像を前記記憶手段に記憶した画像で置き換えることを特徴とする。
【0023】
また、請求項4の発明は、請求項1の発明において、前記サムネイル画像置換手段は、前記画像処理手段で処理した画像に対応するサムネイル画像を該前記画像処理手段で処理した画像でそのまま置き換え、前記インデックス表示手段は、前記サムネイル画像置換手段で置き換えた画像を前記サムネイル画像に対応するサイズに縮小して表示することを特徴とする。
【0024】
また、請求項5の発明は、請求項1の発明において、前記サムネイル画像置換手段は、前記サムネイル画像置換手段で置き換えた画像を前記サムネイル画像に対応して間引いて対応するサムネイル画像に置き換えることを特徴とする。
【0025】
また、請求項6の発明は、同一ファイル内に画像と該画像を間引いたサムネイル画像を格納し、前記サムネイル画像に基づき該ファイル内に格納された画像のインデックス表示を行うとともに該ファイルから前記画像を読み出して該画像の所望の処理を行い、画像印刷装置に対して前記ファイル内に格納された画像の印刷指示を行う画像処理装置の表示制御方法において、前記ファイルから前記画像を読み出して該画像の処理を行った場合は、該画像に対応するサムネイル画像を該処理を行った画像に入れ換えて前記インデックス表示を行うことを特徴とする。
【0026】
また、請求項7の発明は、請求項6の発明において、前記ファイルから前記サムネイル画像を読み出して前記ファイル内に格納された画像の一覧のインデックス表示を行い、該インデックス表示に基づき前記ファイル内に格納された所望の画像を指定して該指定した画像を前記ファイルから読み出して所望の処理を行うとともに、該読み出した画像に対応するサムネイル画像を該所望の処理を行った画像に置き換えることを特徴とする。
【0027】
また、請求項8の発明は、請求項6または7の発明において、前記画像処理装置に着脱自在の記憶媒体に前記ファイルが記憶され、前記記憶媒体に記憶されたファイルから読み出して所望の処理を行った画像を所定の記憶手段に記憶するとともに、前記所定の処理を行った画像に対応するサムネイル画像を前記記憶手段に記憶した画像で置き換えることを特徴とする。
【0028】
また、請求項9の発明は、請求項6の発明において、前記所望の処理を行った画像を対応するサムネイル画像にそのまま置き換え、前記インデックス表示に際しては、前記置き換えた画像を前記サムネイル画像に対応するサイズに縮小して表示することを特徴とする。
【0029】
また、請求項10の発明は、請求項6の発明において、前記所望の処理を行った画像を前記サムネイル画像に対応して間引いて対応するサムネイル画像に置き換えることを特徴とする。
【0030】
【発明の実施の形態】
以下、この発明に係わる実施の形態を添付図面を参照して詳細に説明する。
【0031】
図1は、本発明の画像処理装置及びその表示制御方法を適用した写真印刷機1の概略外観構成を示す図である。この写真印刷機1は、コンビニエンスストア等に設置され、ディジタルカメラ等の撮影解像度画像を記憶するメディアに記憶されている撮影解像度画像を読み取って印刷するものである。
【0032】
図2は、図1に示した写真印刷機1を機能ブロック化して示したブロック図である。
【0033】
図2において、この写真印刷機1は、表示・操作部11と、処理制御部12と、メディアリーダ13と、記憶部14と、課金部15と、印刷部16とから構成される。
【0034】
ここで、表示・操作部11は、ユーザインタフェース(UI)部であり、メディアAに記憶されている画像を表示したり、この写真印刷機1における各種操作情報を表示する表示機能と、その表示した各種操作情報に応じてユーザが各種指示設定を入力する操作機能を有する。
【0035】
処理制御部12は、この写真印刷機1における各種処理を統括的に制御する。例えば、パーソナルコンピュータ(PC)等で実現できる。そして、この処理制御部12は、表示・操作部11やメディアリーダ13や記憶部14や課金部15や印刷部16等の間で各種データの計算を処理制御すると共に自己を制御する制御部と、メディアAから読み取った画像の画像処理を行う画像処理部と、各種計算処理する場合の作業データを一時記憶する作業メモリと、この写真印刷機1における各種処理(具体的には例えば、後述の図3乃至図5の写真選択印刷処理)を行う為の処理プログラムを記憶する処理プログラム記憶部とを具えている。
【0036】
メディアリーダ13は、定位置のメディア挿入口1aから挿入されたディジタルカメラ等のメディアAから該メディアAに記憶されている画像データを読み取り、前述の処理制御部12に受け渡す。尚、このメディアリーダ13は、例えば、CompactFlash Microdriveや、SmartMedia(登録商標)や、SDメモリーカードや、xDピクチャーカードや、メモリースティック等のメディアから画像データを読み出す機能を有している。
【0037】
記憶部14は、前述のメディアリーダ13から読み取った画像データを記憶する部分であり、例えば、ハードディスク(HDD)等で構成される。
【0038】
課金部15は、紙幣挿入/排出口1b或いは硬貨投入口1cから入金された入金額を計数し、その入金額から印刷代金を差し引き、その残高分の硬貨或いはキャンセル硬貨を硬貨払出口1dから払出す機能を有する。
【0039】
印刷部16は、メディアAから読み取った画像の印刷を行って写真Xを排出トレイ1eに排出するプリンタである。
【0040】
尚、上記図2の構成では、記憶部(HDD)14が処理制御部12の外側にあるような構成を示したが、これに限らず、処理制御部12が記憶部(HDD)を持っているように構成しても良い。また、上記図1及び図2の構成では、表示部と操作部とが一体となっている例を示したが、これ以外に、表示だけ行う表示部と各種指示を入力する操作部とが別々に設置されている構成であっても良い。また、上記図1の構成では、課金部、処理制御部、表示・操作部、印刷部が別々の筐体であるように示したが、一つの筐体として組み立てても良い。
【0041】
次に、上記構成による本発明に係る処理動作について説明する。
【0042】
図3は、図1及び図2に示した写真印刷機1における写真選択印刷処理の処理手順を示すフローチャートであり、詳しくは、ユーザによりメディアAがセットされて印刷する写真の選択が行われ、選択指定された写真を印刷するまでの流れを示している。
【0043】
図3において、まず、ユーザによってディジタルカメラ等のメディアAがメディアリーダ13の読み取り定位置(図1のメディア挿入口1a)にセットされる(ステップS101)。すると、写真印刷機1では、例えば、図6に示すような初期画面を表示・操作部11に表示する。そして、ユーザによりこの画面上の例えばメディア読み込みボタンB等の押下が行われると、メディアリーダ13を用いてセットされたメディアA内の情報を読み取り(ステップS102)、インデックス一覧の情報を検索する(ステップS103)。具体的にこのS102及びS103の処理では、例えば、図7に示すメディア内に格納されている写真ファイルのうち撮影解像度画像(JPEG)の情報部分とメーカ独自の情報部分を読み取り、インデックス一覧を表示するのに必要な情報(例えば、ファイル名、撮影日時情報、トータル枚数情報等のインデックス情報)を検索する。尚、ここで言うインデックス一覧とは図8に示すようなものであり、メディアに記憶されている複数のサムネイル画像を所定の大きさで所定数(m×n個、m、nは任意の整数)同時に整列表示して目的の画像を検索しやすくする為の画像閲覧表示のことである。ただし、ユーザ等の指定により1ページにサムネイル画像1個を表示する設定がされていれば1個のみ表示する場合もある。
【0044】
インデックス一覧の情報の検索後、上述のS102及びS103の処理で読み取り検索した情報に基づきインデックス一覧の表示を行う。具体的には、インデックス一覧の表示画面を表示すると共に、メディア内のサムネイル画像を読み取りサムネイル表示処理を行う(ステップS104)。即ち、インデックス一覧表における各サムネイル画像の表示処理を行う。例えば、図8に示したインデックス一覧表の左最上部のサムネイル画像から右最下部方向へと順次サムネイル画像を表示する。尚、このS104の処理については、後で詳細に説明する。
【0045】
その後、上記S104の処理により1ページ分のインデックス一覧表に所定数[予め装置側で設定されている数或いはユーザにより指定された数(例えば、1枚或いは9枚或いは20枚等)]のサムネイル画像が全て表示し終わったかどうか、又は上記所定数には達しないが1ページ分のインデックス一覧表に表示するサムネイル画像が無いかどうかを監視する(S105)。
【0046】
この監視の結果、1ページ分のインデックス一覧表内のサムネイル画像の表示が途中である場合は(ステップS105NO)、上述のS104の処理に戻ってサムネイル表示処理を行う。
【0047】
他方、上記監視の結果、1ページ分のインデックス一覧表内のサムネイル画像の表示が完了していれば(ステップS105YES)、次いで、ユーザによる必要な印刷選択候補の写真の選択指定を監視する(ステップS106)。ここで、ユーザにより写真の選択指定が行われると(尚、この場合、ユーザはインデックス一覧表示画面上で所望のサムネイル画像をタッチすることで印刷選択候補の写真を選択することができる)(ステップS106YES)、次いで、その選択された写真の確認、トリミング等の確認・編集指定を監視する。例えば、図8に示すインデックス一覧表示画面内の確認・編集ボタンC等の押下による確認・編集指定が行われると(ステップS107YES)、例えば、図9に示すような確認・編集画面を表示・操作部11に表示して確認、トリミング等の確認・編集処理を行う(ステップS108)。尚、このS108の処理については後で詳細に説明する。
【0048】
この確認、トリミング等の確認・編集処理が完了すると、再度現在表示指定されているページのインデックス一覧表の表示処理を行う(ステップS109)。尚、この処理は、上述のS103と同様に後で詳細に説明する。
【0049】
その後、上記S109の処理により1ページ分のインデックス一覧表に所定数のサムネイル画像が全て表示し終わったかどうか、又は上記所定数には達しないが1ページ分のインデックス一覧表に表示するサムネイル画像が無いかどうかを監視し(S110)、この監視の結果、1ページ分のインデックス一覧表内のサムネイル画像の表示が途中である場合は(ステップS110NO)、上述のS109の処理に戻ってサムネイル表示処理を行う。
【0050】
他方、上記監視の結果、1ページ分のインデックス一覧表内のサムネイル画像の表示が完了していれば(ステップS110YES)、その後、(ステップS111)及び(ステップS112)及び(ステップS106)にて、ユーザによる印刷指示の入力及び表示ページの切り替え指示の入力及び現在表示中のインデックス一覧での写真選択入力を監視する。
【0051】
そして、ここで、ユーザが現在表示中のインデックス一覧において写真選択が途中の場合は、印刷指示が無く(ステップS111NO)、表示ページの切り替えが無く(ステップS112NO)、ユーザによる他の写真選択が行われる場合なので、上述のステップS106YES以降の処理を繰り返すことになる。
【0052】
また、他方、ユーザがインデックス一覧の表示ページを切り替える場合には、印刷指示が無く(ステップS110NO)、表示ページの切り替えが有る場合(ステップS112YES)であり、上述のステップS104に戻って切り替え指定されたページのインデックス一覧の表示処理を行う。そして、以下、同様の処理を繰り返す。
【0053】
更に、他方、ユーザが印刷を指示する場合には、ユーザにより印刷部数等の指定がされて印刷開始指示(例えば、プリントボタンEの選択押下)が行われた場合(ステップS111YES)となり、指定された写真に対応する撮影解像度画像を用意し指定された部数分印刷処理する(ステップS113)。即ち、このS113では、通常、確認・編集指示がされず単に写真選択のみで印刷開始指示が行われた際には、印刷指定されたサムネイル画像に対応する撮影解像度画像をメディアAから読み取って記憶部(HDD)14等に記憶して所定の形式の印刷データを作成して印刷部(プリンタ)16にて印刷を行う。また、確認・編集指示がされて該確認・編集時にメディアAから読み出して使用した画像を記憶部(HDD)14に記憶している場合には、その記憶している画像をもとに印刷データを作成して印刷部(プリンタ)16にて印刷を行う。尚、ユーザは、プリントボタンE等の選択押下により印刷開始指示を行う前に、予め紙幣挿入/排出口1b或いは硬貨投入口1cから紙幣或いは硬貨を投入してプリント代金を支払う。
【0054】
図4は、図3に示した処理フロー中のS108の確認・編集処理の手順を詳しく示したフローチャートである。即ち、ユーザによりある一つの撮影解像度画像に対する確認・編集指示(例えば、確認・編集ボタンCの選択押下)がされた場合の処理手順を示している。
【0055】
図4において、この確認・編集処理は、まず、ユーザにより確認・編集対象として指定されたサムネイル画像に対応する撮影解像度画像(図7参照)をメディアAから読み取って表示・操作部11に表示する(ステップS201)。尚、この時、表示・操作部11に表示する撮影解像度画像は例えば図9に示す確認・編集画面内に表示される。
【0056】
これにより、ユーザは、撮影解像度画像の表示確認や、撮影解像度画像の拡大、回転、トリミング指定等の所望の確認及び編集指定を行える。
【0057】
そして、実際に、ユーザによりこの確認・編集画面を用いた拡大、回転、トリミング等の確認・編集指定が入力されると、その入力された指示に応じて所定の編集作業を行うと共に、編集作業に合わせて画像表示を変更する(ステップS202)。
【0058】
ここで、ユーザにより例えば確認・編集完了ボタンD等の選択押下が行われ、確認・編集指定が完了すると(ステップS203YES)、次いで、記憶部(HDD)14にここでの確認・編集時に読み出して使用した画像を記憶する(ステップS204)。
【0059】
そして、それ以降、上述の図3に示した処理フロー中のS109に移行する。
【0060】
尚、上記S204で記憶する画像としては、例えば、1)図9に示す確認・編集画面において最終的に編集作業が完了した際に画面上に表示されているイメージ画像を記憶する。或いは、2)上記1)で述べた最終的に編集作業が完了した際に画面上に表示されているイメージ画像をインデックス用に縮小した画像を記憶する。或いは、3)上記確認・編集時にメディアAから読み出した未編集の撮影解像度画像をそのまま記憶する。或いは、4)上記3)で述べた未編集の撮影解像度画像を間引き縮小した画像を記憶する。
【0061】
尚、通常は、上記1)乃至4)の形式の画像の内、いずれか一つの形式の画像を記憶するように写真印刷機に設定する。そして、この1)乃至4)のいずれの形式の画像を記憶するかは予め写真印刷機を提供する側が通常行うが、写真印刷機を設置する店側で設定できるようにしたり、或いはユーザが選択指定できるようにしても良い。
【0062】
図5は、図3に示した処理フロー中のS104或いはS109のサムネイル表示処理の手順を詳しく示したフローチャートである。即ち、メディアがセットされて最初にインデックス一覧を表示する場合のサムネイル画像の表示処理と、ページ切り替えが行われた場合のサムネイル画像の表示処理と、ユーザによる確認・編集処理が行われた後のページ切り替えを含むサムネイル画像の表示処理とを示している。
【0063】
図5において、このサムネイル表示処理は、インデックス一覧表における個々のサムネイル画像の表示処理である。
【0064】
まず、この処理では、記憶部(HDD)14内に、現在表示対象のサムネイル画像に対応する画像があるかどうかを判定する(ステップS301)。具体的に例えば、図8に示したインデックス一覧表の各サムネイル画像を順次表示する際の或るサムネイル画像を表示処理する場合、そのサムネイル画像に対応する画像、即ち、上述の図4のS204の処理で記憶される確認・編集時に使用した画像があるかどうかを判定する。
【0065】
この判定の結果、現在表示対象のサムネイル画像に対応する画像が記憶部(HDD)14に無い場合(ステップS301NO)、メディアAから該当するサムネイル画像を読み取る(ステップS302)。尚、サムネイル画像がメディアAに圧縮されて格納されている場合には伸長する。
【0066】
その後、その読み取った画像に対して、インデックス一覧表内で表示する画像サイズに合わせるようにサイズ調整を行う(ステップS303)。即ち、インデックス画像のサイズに合わせて拡大又は縮小する。尚、そのまま利用できる場合には拡大/縮小せずにそのまま利用する。
【0067】
その後、インデックス一覧の所定位置に画像を表示する(ステップS304)。尚、このS301NO→S302→S303→S304の処理時の表示が、図8及び図10に示したインデックス一覧表示においてサムネイル画像を表示した場合である。即ち、従来と同様のインデックス一覧におけるサムネイル画像の表示処理である。
【0068】
それ以降、上述の図3に示した処理フロー中のS105或いはS110に移行する。
【0069】
他方、上記S301の判定の結果、現在表示対象のサムネイル画像に対応する画像が記憶部(HDD)14に有る場合、即ち、現在表示対象のサムネイル画像に対応する確認・編集時に使用した画像が上述の図4のS204の処理で記憶されている場合には(ステップS301YES)、その記憶部(HDD)14内に記憶されている対応した画像を読み出す(ステップS305)。
【0070】
その後、上述のS303に移行し、記憶部(HDD)14から読み出した画像に対して、インデックス一覧表内で表示する画像サイズに合わせるようにサイズ調整を行う。即ち、インデックス画像のサイズに合わせて拡大又は縮小する。尚、そのまま利用できる場合には拡大/縮小せずにそのまま利用する。
【0071】
その後、インデックス一覧の所定位置にサムネイル画像と差し替えてその画像を表示する(ステップS304)。尚、このS304の表示処理において、ユーザにより確認・編集時にトリミング指定がされている場合には、その領域のみを表示する。尚、このS301YES→S305→S303→S304の処理時の表示が、図10に示すインデックス一覧表示において確認・編集時にメディアから読み出して使用した画像(右側列の真中段の「A」という画像)を表示した場合である。即ち、この部分が本発明のインデックス一覧におけるサムネイル画像と、撮影解像度を持つ画像とを入れ替え表示する処理である。
【0072】
それ以降、上述の図3に示した処理フロー中のS105或いはS110に移行する。
【0073】
以上説明した構成によると、初回のインデックス一覧表示をするときには高速に表示でき、且つ、ユーザが確認または拡大、回転、トリミング等の確認・編集作業をした後のその確認・編集した画像の表示を含むインデックス一覧を再度表示する場合に高速且つ高精細に表示を行うことができる。
【0074】
ここで、高速に行えるとは、本実施例では、確認・編集時にメディアAから読み取った元の撮影解像度画像或いはそれを編集した画像を写真印刷機1内の記憶部(HDD)に記憶し、再度インデックス表示を行う際に、読み取り速度の遅いメディアAから読み込むのでは無く、写真印刷機内の読み込み速度の速い記憶部(HDD)に記憶している画像を読み出して対応するサムネイル画像と入れ替えて表示することにより、解像度が高くデータサイズの大きい撮像解像度画像でも高速に表示することができるということである。
【0075】
具体的には、図2を参照して、メディアからの読み取り速度は大体約0.5MB/sであるのに対し、記憶部(HDD)から読み出す速度は大体約30MB/sであり、メディアから読み取る速度は記憶部(HDD)から読み取る速度に比べると5倍以上遅く、メディアから1つの撮影解像度画像そのものを読み取ると3秒近くかかってしまう。従って、読み取る撮影解像度画像が複数あるとユーザが待ち時間を長く感じすることになる。例えば、9つの撮影解像度画像を読み取るとすると、3(秒)×9=27秒もかかってしまう。これに対し、本発明のように記憶部(HDD)から一つの撮影解像度画像を読み出す場合には、0.6秒で済み、9つの画像でも0.6(秒)×9=5.4秒で済むことになり、ユーザが待ち時間を長く感じることは無い。
【0076】
また、高精細に行える点について例えば図12を参照して説明する。
【0077】
従来では、インデックス一覧表内で或るサムネイル画像を拡大表示すると、元の撮影解像度画像を間引いたサムネイル画像を用いている為、拡大表示すると荒く表示されてしまう[図12(a)]のに対し、本発明の実施例によると、確認・編集時にメディアから元の撮影解像度画像を読み出し使用した画像をサムネイル画像と入れ替えて表示するようにしたため、インデックス一覧表内で更に拡大しても図12(b)に示すような表示が行え、高精細な表示が可能となる。
【0078】
尚、上記図3乃至図5の処理フローでは、いずれもユーザによるキャンセル処理は示していないが、基本的にはどのタイミングでもユーザは処理を終了したりキャンセルすることができるものとする。
【0079】
また、上記図3、図4、図5の実施例では、S109の確認・編集処理後直ぐにサムネイル表示処理を行う場合と、S104における確認・編集処理(S108)後にページ切り替え等をした場合に再度過去に確認・編集した画像を含むインデックス一覧のサムネイル表示を行う場合の両方で、入れ替え表示をするように示したが、これに限らず、いずれか一方のみで入れ替え表示するように構成しても良い。即ち、確認・編集処理後のS109の場合にのみ入れ替え表示しても良いし、S104においてページ切り替え処理をした場合にのみ入れ替え表示するようにしても良い。
【0080】
また、上記実施例では、確認・編集時にメディアから読み出して使用した画像を写真印刷機内の記憶部に記憶し、この記憶した画像をそのまま対応するサムネイル画像と入れ替える構成を示したが、本発明は、これ以外に確認・編集時にメディアから読み出した撮影解像度画像をそのまま記憶部(HDD)に記憶し、対応するサムネイル画像と入れ替え表示する際に記憶部(HDD)に記憶した画像を読み出し、確認・編集時にユーザにより指定された編集を施した画像を対応するサムネイル画像と入れ替えるようにしても良い。
【0081】
また、上記実施例ではインデックス一覧のサムネイル画像の入れ替え表示について説明したが、このようなインデックス一覧表示以外に、メディアから元の撮影解像度画像を読み出す事無くその元の撮影解像度画像を間引いたサムネイル画像を読み出して表示する構成において、或るサムネイル画像に対応する元の撮影解像度画像をメディアから読み込んで使用した後にそのサムネイル画像を再度表示する際に既に読み込んで使用した画像を入れ替えて表示するようにしても良い。これにより、インデックス一覧のように、複数の撮影解像度画像を読み取って表示する程ではないが、一つの解像度の高い撮影解像度画像を読み出して表示するより解像度の低いサムネイル画像を用いて高速に表示させるような構成においても画質の良い表示が高速に行える。
【0082】
また、上記実施例では、インデックス一覧を表示する都度サムネイル画像をメディアから読み取る構成を示したが、これ以外にも、一旦読み出したサムネイル画像は装置内の記憶部等に記憶しておき、確認・編集作業後に再度インデックス一覧を表示する際に、上記装置内の記憶部に記憶したサムネイル画像と確認・編集時に記憶した画像とを利用して入れ替え表示するようにしても良い。具体的には、例えば、上述の図3で示したS109の処理即ち上述の図5に示したS302の処理において、メディアからサムネイル画像を読み出すのではなく、記憶部に記憶したサムネイル画像を読み出して表示する。
【0083】
また、上記実施例では、一つのインデックス一覧内で一つでもサムネイル画像に対応する撮影解像度画像の確認・編集が行われた場合、その後に同じインデックス一覧を表示する際にサムネイル画像と記憶部(HDD)に記憶した画像の入れ替え表示をする構成を採っているが、これに限らず、一つのインデックス一覧内でユーザが選択したサムネイル画像に対応する撮影解像度画像の複数全ての確認・編集が完了した時点で始めて入れ替え表示をするようにしても良い。
【0084】
即ち、本発明は、メディア等の記憶媒体から元の撮影解像度画像を読み取る事無く元の撮影解像度画像を間引いた低解像度画像を読み取って、この読み取った低解像度画像の表示をした後、この表示した低解像度画像とペアの対応関係にある撮影解像度画像を記憶媒体から読み出して使用した場合、その読み出し使用後に上記表示した低解像度画像の表示を再度行う際、上記読み出し時に使用した撮影解像度画像に入れ替えて表示することにより、撮影解像度画像を読み取った後の低解像画像の表示時に、その低解像度画像と解像度の高い画像とを入れ替えても高速且つ高精細な表示を行うようにすることをねらいとするものである。
【0085】
尚、上記実施例ではコンビニエンスストア等に設置される写真印刷機を示したが、これ以外にも課金の無い自宅等のプリンタに印刷指示可能なパーソナルコンピュータ等の画像処理装置に適用しても良い。
【0086】
最後に、上記実施例で示した記憶部(HDD)に記憶した確認・編集時にメディアから読み出し使用した画像は、メモリ資源とセキュリティ上の問題から永久に保持するのではなく、例えば、メディアが引き抜かれた場合に自動的に消去したり、或いは、印刷が正常に完了した場合に自動的に消去する。
【0087】
【発明の効果】
以上説明したように、本発明によれば、ファイルから画像を読み出してこの画像の処理を行った場合は、この画像に対応するサムネイル画像を該処理を行った画像に入れ換えてインデックス表示を行うようにしたため、画像を読み取った後のインデックス表示を高精細に行うことができる。
【0088】
また、それに加えて本発明では、ファイルからサムネイル画像を読み出してファイル内に格納された画像の一覧のインデックス表示を行い、このインデックス表示に基づきファイル内に格納された所望の画像を指定してこの指定した画像をファイルから読み出して所望の処理を行うとともに、この読み出した画像に対応するサムネイル画像をその所望の処理を行った画像に置き換えるようにしたため、複数の画像を一覧表示するインデックス表示を高精細に行うことができる。
【0089】
また、それらに加えて本発明では、画像処理装置に着脱自在の記憶媒体にファイルが記憶され、その記憶媒体に記憶されたファイルから読み出して所望の処理を行った画像を所定の記憶手段に記憶するとともに、所定の処理を行った画像に対応するサムネイル画像を記憶手段に記憶した画像で置き換えるようにしたため、置き換え表示を高速に行うことができる。
【図面の簡単な説明】
【図1】本発明の画像処理装置及びその表示制御方法を適用した写真印刷機の概略外観構成を示す図。
【図2】図1に示した写真印刷機を機能ブロック化して示したブロック図。
【図3】図1及び図2に示した写真印刷機における写真選択印刷処理の処理手順を示すフローチャート。
【図4】図3に示した処理フロー中のS108の確認・編集処理の手順を詳しく示したフローチャート。
【図5】図3に示した処理フロー中のS104或いはS109のサムネイル表示処理の手順を詳しく示したフローチャート。
【図6】初期画面の一構成例を示す図。
【図7】メディア内の写真ファイルの一構成例を示す図。
【図8】インデックス一覧の一構成例を示す図。
【図9】確認・編集画面の一構成例を示す図。
【図10】確認・編集後に再度インデックス一覧を表示した場合のインデックス一覧表示の一例を示す図。
【図11】従来と本発明のインデックス一覧の一つのサムネイル表示の例を示す図。
【符号の説明】
1…写真印刷機、1a…メディア挿入口、1b…紙幣挿入/排出口、1c…硬貨投入口、1d…硬貨払出口、1e…排出トレイ、A…メディア、X…印刷写真、11…表示・操作部(UI)、12…処理制御部、13…メディアリーダ、14…記憶部(HDD)、15…課金部、16…印刷部(プリンタ)、B…メディア読み込みボタン
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing apparatus provided in an image printing apparatus installed in a convenience store or the like and reading and printing an image stored in a medium such as a digital camera. The present invention relates to an image processing apparatus and a display control method thereof.
[0002]
[Prior art]
In recent years, a file of one photograph in a medium such as a digital camera (for example, smart media) has been thinned out with data of a compressed shooting resolution (for example, 3000 × 2000) as represented by Exif. Contains thumbnail images of low resolution (for example, 160 × 120).
[0003]
Conventionally, in an image printing apparatus that is installed in a convenience store or the like and reads and prints an image stored in a medium of the digital camera, when the medium is inserted into a predetermined medium insertion slot, the medium is stored in the medium. A plurality of images are displayed at the same time, and a list image is displayed to make it easier to search for a target image. Specifically, the thumbnail image data corresponding to all the images of the currently stored shooting resolution is read from the inserted media before printing the photo image, and an index display (FIG. 8) showing a list of thumbnail images is displayed. Is displayed on the display screen.
[0004]
This is because it takes a lot of time to read the images of a plurality of shooting resolutions themselves and display them in a list, but it is possible to read a thumbnail image of a small image and display the list in a short time.
[0005]
After displaying the list, the image printing apparatus reads out the shooting resolution data corresponding to the thumbnail image designated by the user in the displayed index display from the medium and prints the data.
[0006]
By the way, in the conventional image printing apparatus, when displaying a list of photographic images stored in the medium, thumbnail images obtained by thinning out the images of the shooting resolution instead of reading the images of the shooting resolution for high speed operation are displayed. Are read and displayed in a list, so that the images in the index display have rough image quality and are difficult to see. Further, when an enlarged display or the like of a thumbnail image is performed in the index display, the display is further roughened and becomes difficult to see.
[0007]
A close prior art is shown below.
[0008]
For example, in the related art, a method of selecting and printing a plurality of images is known (hereinafter, referred to as conventional technology 1) (see Patent Document 1). In the prior art 1, only operability is improved, and it does not contribute to speeding up.
[0009]
Further, conventionally, there is known an image displaying a preview image and a thumbnail image on the same screen (hereinafter, referred to as prior art 2) (see Patent Document 2). In the prior art 2, only operability is improved, and it does not contribute to speeding up.
[0010]
Further, conventionally, there is known a technique in which a reduction algorithm is switched between image quality priority and speed priority depending on an image size (hereinafter, referred to as conventional technology 3) (see Patent Document 3). In Prior Art 3, it is necessary to change the reduction algorithm.
[0011]
A high-speed image selection method by fast-forwarding an enlarged thumbnail image is conventionally known (hereinafter, referred to as conventional technology 4) (see Patent Document 4). In the prior art 4, the user cannot specify the trimming.
[0012]
Further, conventionally, there has been known an image printing method which does not perform trimming on image data as much as possible and provides an image having a good-looking size (hereinafter referred to as Conventional Technique 5) (Patent Document 5). Reference 5). In the related art 5, the user cannot specify the trimming.
[0013]
[Patent Document 1]
JP-A-10-200039.
[0014]
[Patent Document 2]
JP-A-10-243273.
[0015]
[Patent Document 3]
JP-A-10-293676.
[0016]
[Patent Document 4]
JP-A-2001-47684.
[0017]
[Patent Document 5]
JP-A-2002-325198.
[0018]
[Problems to be solved by the invention]
As described above, in the conventional image printing apparatus, when displaying a list of the photographic images stored in the medium, the images of the photographic resolution were thinned instead of reading the images of the photographic resolution for high-speed display. Since the thumbnail images are read and displayed in a list, the images in the index display are rough and difficult to see. Furthermore, when the thumbnail image is enlarged and displayed in the index display, the display is further roughened and becomes difficult to see.
[0019]
In view of the above circumstances, an object of the present invention is to provide an image processing apparatus capable of performing index display at high speed and with high definition, and a display control method thereof.
[0020]
[Means for Solving the Problems]
In order to achieve the above object, according to the first aspect of the present invention, an image and a thumbnail image obtained by thinning the image are stored in the same file, and an index display of the image stored in the file is performed based on the thumbnail image. Reads the image from the file, reads the image from the file, performs desired processing on the image, and instructs an image printing apparatus to print an image stored in the file. An image processing unit for performing a desired process on the image, and a thumbnail image replacing unit for replacing a thumbnail image corresponding to the image with the image processed by the image processing unit.
[0021]
Further, according to the invention of claim 2, in the invention of claim 1, the index display means for reading the thumbnail image from the file and displaying an index of a list of images stored in the file, and the index display means Image processing means for designating a desired image to be processed by the processing means using the thumbnail image displayed as an index.
[0022]
According to a third aspect of the present invention, in the first or second aspect of the invention, the file is stored in a storage medium that is detachable from the image processing apparatus, and a desired process is performed by reading from the file stored in the storage medium. The image processing apparatus further includes a storage unit that stores the performed image, wherein the thumbnail image replacement unit replaces a thumbnail image corresponding to the image processed by the image processing unit with an image stored in the storage unit.
[0023]
Also, in the invention according to claim 4, in the invention according to claim 1, the thumbnail image replacing means replaces a thumbnail image corresponding to the image processed by the image processing means with the image processed by the image processing means as it is, The index display means displays the image replaced by the thumbnail image replacement means in a size corresponding to the thumbnail image.
[0024]
According to a fifth aspect of the present invention, in the first aspect of the present invention, the thumbnail image replacing means thins out the image replaced by the thumbnail image replacing means in correspondence with the thumbnail image and replaces the image with a corresponding thumbnail image. Features.
[0025]
Further, according to the invention of claim 6, an image and a thumbnail image obtained by thinning the image are stored in the same file, an index display of the image stored in the file is performed based on the thumbnail image, and the image is displayed from the file. Reading out the image from the file, performing a desired process on the image, and instructing the image printing device to print the image stored in the file. Is performed, the thumbnail image corresponding to the image is replaced with the processed image, and the index display is performed.
[0026]
Further, according to the invention of claim 7, in the invention of claim 6, the thumbnail image is read from the file, an index display of a list of images stored in the file is performed, and the file is stored in the file based on the index display. Designating a stored desired image, reading the specified image from the file, performing desired processing, and replacing a thumbnail image corresponding to the read image with an image that has been subjected to the desired processing. And
[0027]
According to an eighth aspect of the present invention, in the sixth or seventh aspect, the file is stored in a storage medium detachable from the image processing apparatus, and a desired process is performed by reading the file from the file stored in the storage medium. The performed image is stored in a predetermined storage unit, and a thumbnail image corresponding to the image on which the predetermined process has been performed is replaced with an image stored in the storage unit.
[0028]
According to a ninth aspect of the present invention, in the sixth aspect of the present invention, the image on which the desired processing has been performed is directly replaced with a corresponding thumbnail image, and at the time of index display, the replaced image corresponds to the thumbnail image. It is characterized by being reduced in size and displayed.
[0029]
According to a tenth aspect of the present invention, in the sixth aspect, the image on which the desired processing has been performed is thinned out in correspondence with the thumbnail image and replaced with a corresponding thumbnail image.
[0030]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
[0031]
FIG. 1 is a diagram showing a schematic external configuration of a photo printing machine 1 to which an image processing apparatus and a display control method thereof according to the present invention are applied. The photo printer 1 is installed in a convenience store or the like, and reads and prints a photograph resolution image stored in a medium such as a digital camera that stores the photograph resolution image.
[0032]
FIG. 2 is a block diagram showing functional blocks of the photo printing machine 1 shown in FIG.
[0033]
2, the photo printing press 1 includes a display / operation unit 11, a processing control unit 12, a media reader 13, a storage unit 14, a charging unit 15, and a printing unit 16.
[0034]
Here, the display / operation unit 11 is a user interface (UI) unit that displays an image stored in the medium A, displays various operation information in the photo printer 1, and displays the display function. The user has an operation function of inputting various instruction settings according to the various operation information.
[0035]
The process control unit 12 controls various processes in the photo printing machine 1 in an integrated manner. For example, it can be realized by a personal computer (PC) or the like. The processing control unit 12 controls the calculation of various data among the display / operation unit 11, the media reader 13, the storage unit 14, the accounting unit 15, the printing unit 16, and the like, and a control unit that controls itself. An image processing unit for performing image processing of an image read from the medium A; a work memory for temporarily storing work data for performing various calculation processes; and various processes in the photo printing machine 1 (specifically, for example, And a processing program storage unit for storing a processing program for performing the photo selection printing process of FIGS. 3 to 5).
[0036]
The media reader 13 reads image data stored in the medium A from a medium A such as a digital camera inserted from the medium insertion slot 1a at a fixed position, and transfers the image data to the processing control unit 12 described above. The media reader 13 has a function of reading image data from a medium such as CompactFlash Microdrive, SmartMedia (registered trademark), an SD memory card, an xD picture card, or a memory stick.
[0037]
The storage unit 14 is a unit that stores the image data read from the media reader 13 described above, and includes, for example, a hard disk (HDD).
[0038]
The billing unit 15 counts the amount of money received from the bill insertion / ejection port 1b or the coin insertion port 1c, deducts the printing price from the amount of money, and pays out the balance of coins or canceled coins from the coin payout exit 1d. It has a function to put out.
[0039]
The printing unit 16 is a printer that prints an image read from the medium A and discharges the photograph X to the discharge tray 1e.
[0040]
In the configuration of FIG. 2 described above, the configuration is such that the storage unit (HDD) 14 is located outside the processing control unit 12. However, the configuration is not limited thereto. May be configured. Also, in the configurations of FIGS. 1 and 2 described above, an example in which the display unit and the operation unit are integrated is shown. It may be a configuration installed in the system. Further, in the configuration of FIG. 1 described above, the billing unit, the processing control unit, the display / operation unit, and the printing unit are shown as separate casings, but may be assembled as one casing.
[0041]
Next, a processing operation according to the present invention having the above configuration will be described.
[0042]
FIG. 3 is a flowchart showing a processing procedure of the photo selection printing process in the photo printing machine 1 shown in FIGS. 1 and 2. More specifically, the user sets a medium A and selects a photo to be printed. The flow until printing of the selected and designated photograph is shown.
[0043]
In FIG. 3, first, a user sets a medium A such as a digital camera at a reading fixed position of the media reader 13 (media insertion slot 1a in FIG. 1) (step S101). Then, in the photo printing machine 1, for example, an initial screen as shown in FIG. When the user presses, for example, the media read button B on this screen, the information in the set medium A is read using the media reader 13 (step S102), and the information in the index list is searched (step S102). Step S103). More specifically, in the processing of S102 and S103, for example, the information part of the shooting resolution image (JPEG) and the information part unique to the manufacturer are read out of the photograph file stored in the medium shown in FIG. (For example, index information such as a file name, shooting date and time information, and total number information). Note that the index list referred to here is as shown in FIG. 8, and a plurality of thumbnail images stored in a medium in a predetermined size (m × n, m and n are arbitrary integers) ) This is an image browsing display for displaying images side by side in order to make it easy to search for a target image. However, if one thumbnail image is set to be displayed on one page by a user or the like, only one thumbnail image may be displayed.
[0044]
After the search of the information of the index list, the index list is displayed based on the information read and searched in the processing of S102 and S103 described above. Specifically, a display screen of the index list is displayed, and a thumbnail image in the medium is read to perform a thumbnail display process (step S104). That is, display processing of each thumbnail image in the index list is performed. For example, the thumbnail images are sequentially displayed from the uppermost leftmost thumbnail image in the index list shown in FIG. 8 to the lowermost rightward direction. The processing in S104 will be described later in detail.
[0045]
After that, the predetermined number of thumbnails [the number set in advance in the apparatus or the number specified by the user (for example, 1, 9, or 20)] is displayed in the index list for one page by the process of S104. It is monitored whether or not all the images have been displayed, or whether or not there is no thumbnail image to be displayed in the index list for one page which does not reach the predetermined number (S105).
[0046]
As a result of the monitoring, if the thumbnail image in the index list for one page is being displayed (NO in step S105), the process returns to the above-described step S104 to perform the thumbnail display process.
[0047]
On the other hand, as a result of the monitoring, if the display of the thumbnail images in the index list for one page has been completed (YES in step S105), then the user is monitored to select a necessary print selection candidate photo (step S105). S106). Here, when the user selects and specifies a photo (in this case, the user can select a photo as a print selection candidate by touching a desired thumbnail image on the index list display screen) (step (S106 YES), and then monitor the confirmation / edit designation of the selected photo, such as confirmation and trimming. For example, when confirmation / edit designation is performed by pressing the confirmation / edit button C or the like in the index list display screen shown in FIG. 8 (step S107 YES), for example, a confirmation / edit screen as shown in FIG. 9 is displayed and operated. The information is displayed on the unit 11 and a confirmation / editing process such as confirmation and trimming is performed (step S108). Note that the process of S108 will be described later in detail.
[0048]
When the confirmation and editing processes such as the confirmation and trimming are completed, the display process of the index list of the page currently designated for display is performed again (step S109). Note that this processing will be described later in detail similarly to the above-described S103.
[0049]
Thereafter, it is determined whether all the predetermined number of thumbnail images have been displayed in the index list for one page by the process of S109 or whether the thumbnail images which do not reach the predetermined number but are displayed in the index list for one page are displayed. It is monitored whether or not there is any thumbnail image (S110). As a result of this monitoring, if the display of the thumbnail image in the index list for one page is in the middle (NO in step S110), the process returns to the above-described step S109 and the thumbnail display process is performed. I do.
[0050]
On the other hand, as a result of the monitoring, if the display of the thumbnail images in the index list for one page is completed (step S110 YES), then in (step S111), (step S112) and (step S106) It monitors a user's input of a print instruction, an input of a display page switching instruction, and a photo selection input in the index list currently displayed.
[0051]
If the user is currently selecting a photo in the index list currently being displayed, there is no print instruction (NO in step S111), there is no switching of the display page (NO in step S112), and the user selects another photo. Therefore, the processing after step S106 YES is repeated.
[0052]
On the other hand, when the user switches the display page of the index list, there is no print instruction (step S110 NO), and when there is a display page switch (step S112 YES), the process returns to step S104 described above and switching is designated. Display processing of the index list of the page that was set. Thereafter, the same processing is repeated.
[0053]
On the other hand, when the user instructs printing, the user designates the number of copies and the like and issues a print start instruction (for example, selecting and pressing the print button E) (YES in step S111). The photograph resolution image corresponding to the photograph is prepared, and printing processing is performed for a designated number of copies (step S113). That is, in this S113, normally, when the print start instruction is given only by selecting a photograph without confirmation / edit instruction, the photographing resolution image corresponding to the thumbnail image designated to be printed is read from the medium A and stored. The print data is stored in a storage unit (HDD) 14 or the like to create print data in a predetermined format, and is printed by a print unit (printer) 16. When a confirmation / edit instruction is given and an image read from the medium A and used at the time of confirmation / edit is stored in the storage unit (HDD) 14, print data is stored based on the stored image. Is created and printed by the printing unit (printer) 16. Before the user instructs the start of printing by selecting and pressing the print button E or the like, the user inserts bills or coins through the bill insertion / ejection port 1b or the coin insertion slot 1c in advance and pays for the print.
[0054]
FIG. 4 is a flowchart showing in detail the procedure of the confirmation / editing process in S108 in the process flow shown in FIG. That is, it shows a processing procedure when the user issues a confirmation / edit instruction (for example, selecting and pressing the confirmation / edit button C) for one photographed resolution image.
[0055]
In FIG. 4, the confirmation / edit processing first reads a shooting resolution image (see FIG. 7) corresponding to a thumbnail image designated as a confirmation / edit target by the user from the medium A and displays it on the display / operation unit 11. (Step S201). At this time, the photographed resolution image displayed on the display / operation unit 11 is displayed in, for example, a confirmation / edit screen shown in FIG.
[0056]
As a result, the user can confirm the display of the captured resolution image, and perform desired confirmation and edit designation such as enlargement, rotation, and trimming of the captured resolution image.
[0057]
When the user actually inputs confirmation / edit designation such as enlargement, rotation, and trimming using the confirmation / edit screen, the user performs a predetermined edit operation in accordance with the input instruction, and performs an edit operation. The image display is changed according to (step S202).
[0058]
Here, for example, when the user selects and presses the confirmation / edit completion button D or the like and the confirmation / edit designation is completed (YES in step S203), the data is read out to the storage unit (HDD) 14 at the time of confirmation / editing here. The used image is stored (step S204).
[0059]
Thereafter, the process shifts to S109 in the processing flow shown in FIG.
[0060]
As the image stored in S204, for example, 1) the image image displayed on the confirmation / edit screen shown in FIG. 9 when the editing work is finally completed is stored. Alternatively, 2) an image obtained by reducing the image displayed on the screen for the index when the editing operation is finally completed as described in 1) above is stored. Alternatively, 3) the unedited shooting resolution image read out from the medium A at the time of the above-mentioned confirmation / editing is stored as it is. Alternatively, 4) an image obtained by thinning out and reducing the unedited shooting resolution image described in 3) above is stored.
[0061]
It is to be noted that the photographic printing machine is usually set so as to store an image in any one of the images in the above 1) to 4). The type of the images 1) to 4) to be stored is usually determined in advance by the side providing the photo printing machine, but can be set at the shop where the photo printing machine is installed, or can be selected by the user. You may make it possible to specify.
[0062]
FIG. 5 is a flowchart showing in detail the procedure of the thumbnail display processing in S104 or S109 in the processing flow shown in FIG. That is, the thumbnail image display processing when the index list is displayed first after the media is set, the thumbnail image display processing when the page is switched, and the confirmation / edit processing after the user performs the confirmation / edit processing. 3 shows a thumbnail image display process including page switching.
[0063]
In FIG. 5, the thumbnail display process is a process of displaying individual thumbnail images in the index list.
[0064]
First, in this process, it is determined whether or not there is an image corresponding to the currently displayed thumbnail image in the storage unit (HDD) 14 (step S301). Specifically, for example, when a certain thumbnail image is to be displayed when each thumbnail image in the index list shown in FIG. 8 is sequentially displayed, the image corresponding to the thumbnail image, that is, the process of S204 in FIG. It is determined whether there is an image used at the time of confirmation / edit stored in the processing.
[0065]
If the result of this determination is that there is no image corresponding to the currently displayed thumbnail image in the storage unit (HDD) 14 (step S301 NO), the corresponding thumbnail image is read from the medium A (step S302). If the thumbnail image is stored in the medium A after being compressed, the image is decompressed.
[0066]
Thereafter, size adjustment is performed on the read image so as to match the image size displayed in the index list (step S303). That is, the image is enlarged or reduced according to the size of the index image. If it can be used as it is, it is used without being enlarged or reduced.
[0067]
Thereafter, the image is displayed at a predetermined position in the index list (step S304). The display at the time of the processing of S301 NO → S302 → S303 → S304 is a case where a thumbnail image is displayed in the index list display shown in FIG. 8 and FIG. That is, it is a process of displaying a thumbnail image in the index list as in the related art.
[0068]
Thereafter, the flow shifts to S105 or S110 in the processing flow shown in FIG.
[0069]
On the other hand, as a result of the determination in S301, when the image corresponding to the thumbnail image to be currently displayed is present in the storage unit (HDD) 14, that is, the image used at the time of confirmation / edit corresponding to the thumbnail image to be currently displayed is If it is stored in the process of S204 in FIG. 4 (step S301 YES), the corresponding image stored in the storage unit (HDD) 14 is read (step S305).
[0070]
Thereafter, the process proceeds to S303 described above, and the image read out from the storage unit (HDD) 14 is adjusted in size to match the image size displayed in the index list. That is, the image is enlarged or reduced according to the size of the index image. If it can be used as it is, it is used without being enlarged or reduced.
[0071]
After that, the image is displayed in place of the thumbnail image at a predetermined position in the index list (step S304). In the display process of S304, if the user has specified trimming at the time of confirmation / edit, only that area is displayed. Note that the display at the time of processing of S301 YES → S305 → S303 → S304 indicates the image read out from the medium at the time of confirmation / editing in the index list display shown in FIG. 10 (the image “A” in the middle row in the right column). This is the case when it is displayed. That is, this portion is a process of exchanging and displaying a thumbnail image in the index list of the present invention and an image having a shooting resolution.
[0072]
Thereafter, the flow shifts to S105 or S110 in the processing flow shown in FIG.
[0073]
According to the configuration described above, when displaying the index list for the first time, it can be displayed at a high speed, and the display of the confirmed / edited image after the user has confirmed / edited such as confirmation or enlargement, rotation, trimming, etc. When the index list including the index is displayed again, high-speed and high-definition display can be performed.
[0074]
Here, to be able to perform at high speed, in this embodiment, the original shooting resolution image read from the medium A at the time of confirmation / editing or an image obtained by editing the original shooting resolution image is stored in the storage unit (HDD) in the photo printing machine 1. When the index display is performed again, instead of reading from the medium A having a low reading speed, the image stored in the storage unit (HDD) having a high reading speed in the photo printer is read and replaced with the corresponding thumbnail image and displayed. This means that a high-resolution image with a high resolution and a large data size can be displayed at high speed.
[0075]
Specifically, referring to FIG. 2, the reading speed from the medium is about 0.5 MB / s, while the reading speed from the storage unit (HDD) is about 30 MB / s. The reading speed is at least five times slower than the reading speed from the storage unit (HDD), and it takes nearly three seconds to read one photographed resolution image itself from the medium. Therefore, if there are a plurality of photographing resolution images to be read, the user feels that the waiting time is long. For example, if nine photographic resolution images are read, it takes 3 (seconds) × 9 = 27 seconds. On the other hand, in the case of reading out one shooting resolution image from the storage unit (HDD) as in the present invention, it takes only 0.6 seconds, and even for 9 images, 0.6 (seconds) × 9 = 5.4 seconds. And the user does not feel a long waiting time.
[0076]
Further, a point that can be performed with high definition will be described with reference to FIG.
[0077]
In the related art, when a certain thumbnail image is enlarged and displayed in the index list, a thumbnail image obtained by thinning out the original shooting resolution image is used. On the other hand, according to the embodiment of the present invention, the original shooting resolution image is read from the medium at the time of confirmation / editing, and the used image is replaced with the thumbnail image and displayed. The display shown in (b) can be performed, and high-definition display can be performed.
[0078]
Note that none of the processing flows of FIGS. 3 to 5 show a canceling process by the user, but basically, the user can end or cancel the process at any timing.
[0079]
In the embodiments of FIGS. 3, 4 and 5, the thumbnail display processing is performed immediately after the confirmation / edit processing in S109, and the page switching or the like is performed again after the confirmation / edit processing (S108) in S104. In both cases where the thumbnail list of the index list including the images confirmed and edited in the past is displayed, the replacement display is shown. However, the present invention is not limited to this, and the configuration may be such that only one of the images is replaced and displayed. good. That is, the replacement display may be performed only in the case of S109 after the confirmation / edit processing, or may be performed only when the page switching processing is performed in S104.
[0080]
Further, in the above-described embodiment, the configuration is described in which the image read and used from the medium at the time of confirmation and editing is stored in the storage unit in the photo printing machine, and the stored image is directly replaced with the corresponding thumbnail image. In addition to this, the captured resolution image read out from the medium at the time of confirmation / editing is stored in the storage unit (HDD) as it is, and when the corresponding thumbnail image is replaced and displayed, the image stored in the storage unit (HDD) is read out and confirmed / At the time of editing, the edited image specified by the user may be replaced with the corresponding thumbnail image.
[0081]
In the above embodiment, the replacement of the thumbnail images in the index list is described. However, in addition to the display of the index list, the thumbnail images obtained by thinning out the original shooting resolution images without reading the original shooting resolution images from the medium are read out. In the configuration for reading and displaying a thumbnail image, the original shooting resolution image corresponding to a certain thumbnail image is read from the medium and used, and then when the thumbnail image is displayed again, the images already read and used are replaced and displayed. May be. As a result, a plurality of shooting resolution images are not read and displayed as in an index list, but are displayed at a high speed using a lower resolution thumbnail image than reading and displaying one high resolution shooting resolution image. Even in such a configuration, high-quality display can be performed at high speed.
[0082]
Further, in the above-described embodiment, the configuration is described in which the thumbnail images are read from the medium each time the index list is displayed. However, the thumbnail images once read out may be stored in a storage unit or the like in the apparatus, and the thumbnail images may be checked and stored. When the index list is displayed again after the editing operation, the thumbnail list stored in the storage unit in the apparatus and the image stored at the time of checking / editing may be replaced and displayed. Specifically, for example, in the process of S109 shown in FIG. 3 described above, that is, in the process of S302 shown in FIG. 5, the thumbnail image stored in the storage unit is read instead of reading the thumbnail image from the medium. indicate.
[0083]
Further, in the above embodiment, when at least one photographing resolution image corresponding to a thumbnail image is checked / edited in one index list, when the same index list is subsequently displayed, the thumbnail image and the storage unit ( The configuration is such that the images stored in the HDD are replaced and displayed. However, the present invention is not limited to this, and confirmation and editing of all of the plurality of shooting resolution images corresponding to the thumbnail image selected by the user in one index list is completed. The replacement display may be performed for the first time at that point.
[0084]
That is, the present invention reads a low-resolution image obtained by thinning out the original shooting resolution image without reading the original shooting resolution image from a storage medium such as a medium, and displays the read low-resolution image. If a captured resolution image that is in a paired relationship with the low-resolution image read out from the storage medium and used, when the low-resolution image displayed above is displayed again after the reading and use, the captured resolution image used at the time of the reading is used. By switching and displaying, when displaying a low-resolution image after reading a captured resolution image, high-speed and high-definition display is performed even if the low-resolution image and the high-resolution image are switched. It is the aim.
[0085]
In the above-described embodiment, a photo printing machine installed in a convenience store or the like is shown. However, the present invention may be applied to an image processing apparatus such as a personal computer that can instruct printing to a printer at home or the like without charge. .
[0086]
Finally, the image read out from the medium at the time of confirmation / editing and stored in the storage unit (HDD) shown in the above-described embodiment is not permanently retained due to memory resources and security problems. It is automatically deleted when it is removed, or automatically when printing is completed normally.
[0087]
【The invention's effect】
As described above, according to the present invention, when an image is read from a file and the image is processed, an index display is performed by replacing the thumbnail image corresponding to the image with the processed image. Therefore, the index display after reading the image can be performed with high definition.
[0088]
In addition, in the present invention, a thumbnail image is read from a file, an index of a list of images stored in the file is displayed, and a desired image stored in the file is specified based on the index display. Since the specified image is read from the file and the desired processing is performed, and the thumbnail image corresponding to the read image is replaced with the image that has been subjected to the desired processing, the index display for listing a plurality of images is enhanced. It can be done with precision.
[0089]
In addition, in the present invention, in the present invention, a file is stored in a removable storage medium in the image processing apparatus, and an image read from the file stored in the storage medium and subjected to desired processing is stored in predetermined storage means. In addition, since the thumbnail image corresponding to the image on which the predetermined processing has been performed is replaced with the image stored in the storage means, the replacement display can be performed at high speed.
[Brief description of the drawings]
FIG. 1 is a diagram showing a schematic external configuration of a photo printing machine to which an image processing apparatus and a display control method thereof according to the present invention are applied.
FIG. 2 is a block diagram showing functional blocks of the photo printing machine shown in FIG. 1;
FIG. 3 is a flowchart showing a processing procedure of a photo selection printing process in the photo printing machine shown in FIGS. 1 and 2;
FIG. 4 is a flowchart detailing a procedure of a confirmation / editing process in S108 in the process flow shown in FIG. 3;
FIG. 5 is a flowchart showing in detail a procedure of a thumbnail display process in S104 or S109 in the process flow shown in FIG. 3;
FIG. 6 is a diagram showing a configuration example of an initial screen.
FIG. 7 is a diagram showing a configuration example of a photo file in a medium.
FIG. 8 is a diagram showing a configuration example of an index list.
FIG. 9 is a diagram showing a configuration example of a confirmation / edit screen.
FIG. 10 is a diagram showing an example of an index list display when an index list is displayed again after confirmation and editing.
FIG. 11 is a diagram showing an example of displaying one thumbnail of an index list according to the related art and the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Photo printing machine, 1a ... Media insertion slot, 1b ... Bill insertion / ejection slot, 1c ... Coin slot, 1d ... Coin exit, 1e ... Ejection tray, A ... Media, X ... Printed photo, 11 ... Display / Operation unit (UI), 12: processing control unit, 13: media reader, 14: storage unit (HDD), 15: billing unit, 16: printing unit (printer), B: media read button

Claims (10)

同一ファイル内に画像と該画像を間引いたサムネイル画像を格納し、前記サムネイル画像に基づき該ファイル内に格納された画像のインデックス表示を行うとともに該ファイルから前記画像を読み出して該画像の所望の処理を行い、画像印刷装置に対して前記ファイル内に格納された画像の印刷指示を行う画像処理装置において、
前記ファイルから前記画像を読み出して該画像の所望の処理を行う画像処理手段と、
前記画像処理手段により処理を行った画像で該画像に対応するサムネイル画像を置き換えるサムネイル画像置換手段と
を具備することを特徴とする画像処理装置。
An image and a thumbnail image obtained by thinning the image are stored in the same file, an index of the image stored in the file is displayed based on the thumbnail image, and the image is read out from the file to perform desired processing on the image. In the image processing device that performs an instruction to print the image stored in the file to the image printing device,
Image processing means for reading the image from the file and performing desired processing on the image;
An image processing apparatus comprising: a thumbnail image replacement unit that replaces a thumbnail image corresponding to an image processed by the image processing unit with a thumbnail image.
前記ファイルから前記サムネイル画像を読み出して前記ファイル内に格納された画像の一覧のインデックス表示を行うインデックス表示手段と、
前記インデックス表示手段によりインデックス表示されたサムネイル画像により前記処理手段で処理する所望の画像を指定する画像指定手段と
を更に具備することを特徴とする請求項1記載の画像処理装置。
Index display means for reading the thumbnail image from the file and displaying an index of a list of images stored in the file;
2. The image processing apparatus according to claim 1, further comprising: an image specification unit that specifies a desired image to be processed by the processing unit based on the thumbnail image index-displayed by the index display unit.
前記画像処理装置に着脱自在の記憶媒体に前記ファイルが記憶され、
前記記憶媒体に記憶されたファイルから読み出して所望の処理を行った画像を記憶する記憶手段を更に具備し、
前記サムネイル画像置換手段は、
前記画像処理手段で処理した画像に対応するサムネイル画像を前記記憶手段に記憶した画像で置き換える
ことを特徴とする請求項1または2記載の画像処理装置。
The file is stored in a removable storage medium in the image processing apparatus,
The image processing apparatus further includes a storage unit configured to store an image read from a file stored in the storage medium and subjected to a desired process,
The thumbnail image replacement means,
3. The image processing apparatus according to claim 1, wherein a thumbnail image corresponding to the image processed by the image processing unit is replaced with an image stored in the storage unit.
前記サムネイル画像置換手段は、
前記画像処理手段で処理した画像に対応するサムネイル画像を該前記画像処理手段で処理した画像でそのまま置き換え、
前記インデックス表示手段は、
前記サムネイル画像置換手段で置き換えた画像を前記サムネイル画像に対応するサイズに縮小して表示する
ことを特徴とする請求項1記載の画像処理装置。
The thumbnail image replacement means,
Replacing the thumbnail image corresponding to the image processed by the image processing means with the image processed by the image processing means,
The index display means,
2. The image processing apparatus according to claim 1, wherein the image replaced by the thumbnail image replacement unit is displayed in a reduced size corresponding to the thumbnail image.
前記サムネイル画像置換手段は、
前記サムネイル画像置換手段で置き換えた画像を前記サムネイル画像に対応して間引いて対応するサムネイル画像に置き換える
ことを特徴とする請求項1記載の画像処理装置。
The thumbnail image replacement means,
2. The image processing apparatus according to claim 1, wherein the image replaced by the thumbnail image replacement unit is thinned out in correspondence with the thumbnail image and replaced with a corresponding thumbnail image.
同一ファイル内に画像と該画像を間引いたサムネイル画像を格納し、前記サムネイル画像に基づき該ファイル内に格納された画像のインデックス表示を行うとともに該ファイルから前記画像を読み出して該画像の所望の処理を行い、画像印刷装置に対して前記ファイル内に格納された画像の印刷指示を行う画像処理装置の表示制御方法において、
前記ファイルから前記画像を読み出して該画像の処理を行った場合は、該画像に対応するサムネイル画像を該処理を行った画像に入れ換えて前記インデックス表示を行う
ことを特徴とする画像処理装置の表示制御方法。
An image and a thumbnail image obtained by thinning the image are stored in the same file, an index display of the image stored in the file is performed based on the thumbnail image, and the image is read from the file to perform desired processing of the image. A display control method of the image processing apparatus for instructing the image printing apparatus to print the image stored in the file,
When the image is read from the file and processed, the index display is performed by replacing a thumbnail image corresponding to the image with the processed image. Control method.
前記ファイルから前記サムネイル画像を読み出して前記ファイル内に格納された画像の一覧のインデックス表示を行い、
該インデックス表示に基づき前記ファイル内に格納された所望の画像を指定して該指定した画像を前記ファイルから読み出して所望の処理を行うとともに、
該読み出した画像に対応するサムネイル画像を該所望の処理を行った画像に置き換える
ことを特徴とする請求項6記載の画像処理装置の表示制御方法。
Read the thumbnail image from the file and perform index display of a list of images stored in the file,
While specifying a desired image stored in the file based on the index display and reading out the specified image from the file to perform desired processing,
7. The display control method for an image processing apparatus according to claim 6, wherein a thumbnail image corresponding to the read image is replaced with an image on which the desired processing has been performed.
前記画像処理装置に着脱自在の記憶媒体に前記ファイルが記憶され、
前記記憶媒体に記憶されたファイルから読み出して所望の処理を行った画像を所定の記憶手段に記憶するとともに、
前記所定の処理を行った画像に対応するサムネイル画像を前記記憶手段に記憶した画像で置き換える
ことを特徴とする請求項6または7記載の画像処理装置の表示制御方法。
The file is stored in a removable storage medium in the image processing apparatus,
An image read from a file stored in the storage medium and subjected to desired processing is stored in predetermined storage means,
8. The display control method according to claim 6, wherein a thumbnail image corresponding to the image on which the predetermined processing has been performed is replaced with an image stored in the storage unit.
前記所望の処理を行った画像を対応するサムネイル画像にそのまま置き換え、
前記インデックス表示に際しては、前記置き換えた画像を前記サムネイル画像に対応するサイズに縮小して表示する
ことを特徴とする請求項6記載の画像処理装置の表示制御方法。
The image subjected to the desired processing is directly replaced with a corresponding thumbnail image,
7. The display control method for an image processing apparatus according to claim 6, wherein, at the time of the index display, the replaced image is reduced and displayed to a size corresponding to the thumbnail image.
前記所望の処理を行った画像を前記サムネイル画像に対応して間引いて対応するサムネイル画像に置き換える
ことを特徴とする請求項6記載の画像処理装置の表示制御方法。
7. The display control method for an image processing apparatus according to claim 6, wherein the image on which the desired processing has been performed is thinned out in correspondence with the thumbnail image and replaced with a corresponding thumbnail image.
JP2003066900A 2003-03-12 2003-03-12 Image processing device Expired - Fee Related JP4269724B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003066900A JP4269724B2 (en) 2003-03-12 2003-03-12 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003066900A JP4269724B2 (en) 2003-03-12 2003-03-12 Image processing device

Publications (2)

Publication Number Publication Date
JP2004282143A true JP2004282143A (en) 2004-10-07
JP4269724B2 JP4269724B2 (en) 2009-05-27

Family

ID=33284668

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003066900A Expired - Fee Related JP4269724B2 (en) 2003-03-12 2003-03-12 Image processing device

Country Status (1)

Country Link
JP (1) JP4269724B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016060102A (en) * 2014-09-18 2016-04-25 京セラドキュメントソリューションズ株式会社 Image formation device, program for image formation device, and printing program
CN114727011A (en) * 2022-03-07 2022-07-08 深圳创维-Rgb电子有限公司 Camera optimization method and device, electronic equipment and readable storage medium

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016060102A (en) * 2014-09-18 2016-04-25 京セラドキュメントソリューションズ株式会社 Image formation device, program for image formation device, and printing program
CN114727011A (en) * 2022-03-07 2022-07-08 深圳创维-Rgb电子有限公司 Camera optimization method and device, electronic equipment and readable storage medium

Also Published As

Publication number Publication date
JP4269724B2 (en) 2009-05-27

Similar Documents

Publication Publication Date Title
US7038714B1 (en) Printing system and method having a digital printer that uses a digital camera image display
EP1156453B1 (en) Image processing apparatus, image processing method, storage medium, and program
JP2002158949A (en) Color digital printer having graphical user interface for displaying and selecting image for local and remote printing
JP2004255740A (en) Image output unit, program, and recording medium
JP2007095001A (en) Print processing system
JP2009083236A (en) Image forming device
US7995865B2 (en) Apparatus and method for laying out images and program therefor
JP4148117B2 (en) Printing system and printing method
JP2005119083A (en) Image output device, image display method, program, and recording medium
JP2004282224A (en) Photo printer and control method thereof
JP2007095002A (en) Photograph processor
JP4269724B2 (en) Image processing device
JP4277152B2 (en) Image display method and apparatus
KR100571961B1 (en) Method for processing/editing images and printing out the processed/edited images in a lump and apparatus thereof
JP2007098794A (en) Printer, printing system, printing method and printing program
JP2004282225A (en) Photo printer and display control method thereof
JP2000177210A (en) Storage built-in printer
JP2006060662A (en) Image output device, program and recording medium
JP2002283647A (en) Image processing apparatus and image processing program
JP2005039626A (en) Image printer, and image printing system and program
JP5585164B2 (en) Image print system, image output reception terminal, and image output method
JP5329873B2 (en) camera
JP2004268432A (en) Image output device, program, and recording medium
JP4579738B2 (en) Image printing system, print server, image output device
JP4288545B2 (en) ID photo processing equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080715

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081014

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090203

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090216

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120306

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130306

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130306

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140306

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees