JP2004234500A - 画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム、及び画像編集装置 - Google Patents
画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム、及び画像編集装置 Download PDFInfo
- Publication number
- JP2004234500A JP2004234500A JP2003024375A JP2003024375A JP2004234500A JP 2004234500 A JP2004234500 A JP 2004234500A JP 2003024375 A JP2003024375 A JP 2003024375A JP 2003024375 A JP2003024375 A JP 2003024375A JP 2004234500 A JP2004234500 A JP 2004234500A
- Authority
- JP
- Japan
- Prior art keywords
- image
- layout
- images
- template
- attention
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
【課題】本発明は、複数の画像をレイアウトする場合に、テンプレートのレイアウト順序情報と、画像の注目度の評価による画像の順序づけ情報とを基に、画像のレイアウトを自動的に行う、画像レイアウト装置を提供することを目的とする。
【解決手段】本発明の画像レイアウト装置は、画像記憶手段からレイアウトする画像を選択する画像選択手段と、画像を読み取る画像読取手段と、画像の注目度を算出する注目領域算出手段を有する。また、レイアウトの順序情報を含むテンプレートを、テンプレート記憶手段から選択するテンプレート選択手段を有する。また、テンプレートに記載されているレイアウト順序情報と、画像の注目度の順序に従いレイアウト処理を行うレイアウト手段を有する。
【選択図】 図１
【解決手段】本発明の画像レイアウト装置は、画像記憶手段からレイアウトする画像を選択する画像選択手段と、画像を読み取る画像読取手段と、画像の注目度を算出する注目領域算出手段を有する。また、レイアウトの順序情報を含むテンプレートを、テンプレート記憶手段から選択するテンプレート選択手段を有する。また、テンプレートに記載されているレイアウト順序情報と、画像の注目度の順序に従いレイアウト処理を行うレイアウト手段を有する。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、デジタルカメラ等で撮影された複数のデジタル画像（単に「画像」ともいう）を注目度を基にして順序づけを行うと共に、複数の画像のレイアウト（画像の配置）を自動的に行うことができる画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラムに関し、またさらに、複数の画像について、各画像の注目度を算出し、画像の順序づけを自動的に行うことのできる画像編集装置に関するものである。
【０００２】
【従来の技術】
近時、デジタルカメラが普及し、撮影したデジタル画像をＰＣ（パーソナルコンピュータ）内に取り込み、ＰＣ画面上でデジタル画像を編集し、印刷することが簡単にできるようになってきた。例えば、旅行先でデジタルカメラで撮影したデジタル画像を編集し、旅行アルバムなどを簡単に作成できるようになってきた。
このＰＣ画面上でデジタル画像の編集を行う際には、図７に示すように、複数の画像を、１つの画像にレイアウトするような場合がある。このようなレイアウトにおいては、従来は、人間が手動で、各画像の内の注目領域（目立つ領域）の内容を考慮して、できるだけインパクト（強い印象を与える）のある画像となるように、マウス等を操作してレイアウトを行っていた。
この手動によるレイアウトは、デジタル画像の枚数が少ない場合は、それほど手間がかからず問題とならないが、多数のデジタル画像をアルバムとして編集するような場合には、手動によるレイアウト作業は結構煩わしい作業となる。
また、デジタルカメラに普及と共に、利用者層の範囲が広がり、利用者の中にはＰＣ操作に不慣れな人もおり、複数の画像のレイアウトが、より簡単に行える装置の提供が望まれていた。
【０００３】
このようなデジタル画像のレイアウトについての先行技術として、例えば、特許文献１「画像処理方法、装置及び記憶媒体」がある。
特許文献１で開示された発明は、画像に対して施された複数の編集情報や、画像を選択するときの選択条件にレイアウト名称を対応付けて登録することにより、そのレイアウト名称の指示に応じてそれらの情報を再利用することを可能とする。これにより、異なる画像に、同じレイアウトを指定するときの操作性を向上することができる。また、複数の画像情報のなかから所望の画像情報を選択するための選択条件を入力するときの操作性を向上することができる。
【０００４】
【特許文献１】
特開２０００−２６１６４９号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、特許文献１に開示された発明は、オペレータ自身が手動で画像をレイアウトすることを基本とし、そのレイアウト情報を再利用することを目的とした発明である。見た目を考慮したレイアウトを自動的に行いたい場合、レイアウトテンプレートには、レイアウト順番を指定することができたが、レイアウトすべき画像の順序づけは人手で行う必要があった。
【０００６】
本発明はこのような問題を解決するためになされたもので、その目的は、複数の画像をレイアウトする場合に、レイアウトテンプレートにおけるレイアウト順序を指定すると共に、画像の注目領域を算出して、レイアウトすべき画像の順序づけを自動的に行うことができる、画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラムを提供することにある。
またさらには、複数の画像について、各画像の注目度を算出し、画像の順序づけを自動的に行う画像編集装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は上記課題を解決するためになされたものであり、本発明の画像レイアウト装置は、複数の画像をレイアウトする画像レイアウト装置であって、レイアウト対象となる画像を記憶する画像記憶手段と、前記画像記憶手段により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手段と、前記選択した画像を読み取る画像読取手段と、画像の注目度を算出する注目領域算出手段と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手段と、前記テンプレート記憶手段により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手段と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手段とを具備することを特徴とする。
【０００８】
このような構成であれば、画像選択手段により、画像記憶手段に記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手段により、レイアウト対象となる画像を読み取り、注目領域算出手段により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。また、テンプレート選択手段により、テンプレート記憶手段に記憶されたレイアウト用のテンプレート（レイアウト順序情報を含む）の中から、レイアウトに使用するテンプレートを選択する。そして、レイアウト手段により、レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトする。
これにより、レイアウト対象となる画像を、テンプレートのレイアウト順序に従い、注目度合が高い画像が優先順位が高くなるようにレイアウトできる。すなわち、目に付き易い画像の順から、指定されたレイアウト順序に従いレイアウトされるため、よりインパクト（強い印象を与える）のある画像のレイアウトが実現できる。
【０００９】
また、本発明の画像レイアウト装置は、前記注目領域算出手段によって得られた注目度と、注目領域の面積を基に画像評価値を算出する画像評価値算出手段と、前記画像評価値により画像の注目度の順序を決定する画像順序決定手段とを具備することを特徴とする。
このような構成であれば、レイアウトする画像を評価する場合に、画像評価値算出手段では、注目領域算出手段により得られた注目度、注目領域の面積に応じて、例えば、注目度と面積を掛け算するなどして、画像評価値を算出する。そして、画像順序決定手段では、画像評価値の大小に応じて、レイアウトする画像の順序づけを行う。
これにより、画像の順序づけを行う際に、人間の視覚特性に合った形で、画像の注目度による順序づけを行うことができる。
【００１０】
また、本発明の画像レイアウト装置は、前記テンプレートのレイアウト順序は、レイアウト枠の大きさに従い順序付られていることを特徴とする。
このような構成であれば、レイアウト枠の大きなものに、注目度（または画像評価値）の高い画像が配置される。
これにより、注目すべき画像を大きくしてレイアウトできる。
【００１１】
また、本発明の画像レイアウト方法は、複数の画像をレイアウトする画像レイアウト装置における画像レイアウト方法であって、レイアウト対象となる画像を記憶する画像記憶手順と、前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、前記選択した画像を読み取る画像読取手順と、画像の注目度を算出する注目領域算出手順と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順とを含むことを特徴とする。
【００１２】
このような手順であれば、画像選択手順により、画像記憶手順により記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手順により、レイアウト対象となる画像を読み取り、注目領域算出手順により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。また、テンプレート選択手順により、テンプレート記憶手順により記憶されたレイアウト用のテンプレート（レイアウト順序情報を含む）の中から、レイアウトに使用するテンプレートを選択する。そして、レイアウト手順により、レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトする。
これにより、レイアウト対象となる画像を、テンプレートのレイアウト順序に従い、注目度合が高い画像が優先順位が高くなるようにレイアウトできる。すなわち、目に付き易い画像の順から、指定されたレイアウト順序に従いレイアウトされるため、よりインパクトのある画像のレイアウトが実現できる。
【００１３】
また、本発明の画像レイアウト装置におけるコンピュータプログラムは、複数の画像をレイアウトする画像レイアウト装置内のコンピュータに、レイアウト対象となる画像を記憶する画像記憶手順と、前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、前記選択した画像を読み取る画像読取手順と、画像の注目度を算出する注目領域算出手順と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順とを実行させるためのプログラムである。
【００１４】
また、本発明の画像編集装置は、複数の画像の順序づけを行う画像編集装置であって、順序づけの対象となる画像を記憶する画像記憶手段と、前記画像記憶手段により記憶された画像の中から、順序づけを行う画像を選択する画像選択手段と、前記選択した画像を読み取る画像読取手段と、画像の注目領域を算出する注目領域算出手段と、前記注目領域算出手段によって得られた注目度に従い、画像を順序づけする画像順序決定手段とを具備することを特徴とする。
【００１５】
このような構成であれば、画像選択手段により、画像記憶手段に記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手段により、レイアウト対象となる画像を読み取り、注目領域算出手段により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。そして、画像順序決定手段により、前記注目領域算出手段によって得られた注目度に従い、画像を順序づけする
これにより、画像の注目度の程度により、画像を順序づけすることができ、例えば、注目度を指標とした画像の登録や検索などに利用できる。
【００１６】
また、本発明の画像編集装置は、前記注目領域算出手段によって得られた注目度と、注目領域の面積とを基に画像評価値を算出する画像評価値算出手段と、前記画像評価値により画像の注目度の順序を決定する画像順序決定手段とをさらに具備することを特徴とする。
このような構成であれば、画像を評価する場合に、画像評価値算出手段では、注目領域算出手段により得られた注目度、注目領域の面積に応じて、例えば、注目度と面積を掛け算するなどして、画像評価値を算出する。そして、画像順序決定手段では、画像評価値の大小に応じて、画像の順序づけを行う。
これにより、画像の順序づけを行う際に、人間の視覚特性に合った形で、画像の注目度による順序づけを行うことができる。
【００１７】
【発明の実施の形態】
次に本発明の実施の形態例について図面を参照して説明する。
【００１８】
図１は、本発明の画像レイアウト装置１００が備える手段の構成例を示す図である。図１に示す画像レイアウト装置１００に設けられた各手段は、以下に示す処理を行う。
（１）画像記憶手段１０１は、レイアウトの対象となる画像を記憶するための手段であり、画像データベースなどである。
（２）画像選択手段１０２
画像選択手段１０２は、画像記憶手段１０１から、レイアウトする画像を選択するための手段である（図３及び図５参照）。
（３）画像読取手段１０３
画像読取手段１０３は、レイアウトの対象となる画像を構成する画素ごとの値（ＲＧＢ値等）を読み出すための手段である。
（４）注目領域算出手段１０４
注目領域算出手段１０４は、レイアウトの対象となる画像の注目領域を算出するための手段である。画像内を複数の領域に分離し、分離した領域ごとに、注目度の程度を２段階以上に区分けする。この注目領域の算出には、例えば、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）」に開示された「誘目度」を使用することができる。なお、誘目度については、後述する「誘目度についての補足説明」の項目で、その概要について説明する。
以下、注目領域算出手段１０４により算出された注目領域の具体例について、図３乃至図６により、説明する。
【００１９】
図３は、レイアウト対象となる第１の画像１を示す図であり、人物が左端に配置されている画像の例を模式的に示した画像の例である。図４は、図３に対応する誘目度のパターンを模式的に示した図である。誘目度は領域Ａが最も高く算出され、領域Ｂ、領域Ｃがこの順に低く算出されている。
【００２０】
図５は、レイアウト対象となる第２の画像２を示す図であり、花が右端に配置されている画像の例を模式的に示した画像の例である。図６は、図５に対応する誘目度のパターンを模式的に示した図である。誘目度は領域Ａ’が最も高く算出され、領域Ｂ’、領域Ｃ’がこの順に低く算出されている。
【００２１】
そして、例えば、図４に示す誘目度のパターン画像において、算出された誘目度は、それぞれ、ｆ（領域Ａ）、ｆ（領域Ｂ）、ｆ（領域Ｃ）として表されるものとする。
また、図６に示す誘目度のパターン画像において、算出された誘目度は、それぞれ、ｆ（領域Ａ’）、ｆ（領域Ｂ’）、ｆ（領域Ｃ’）として表されるものとする。
そして、ｆ（領域Ａ）とｆ（領域Ａ’）の関係は、以下のようになっているものとする。
ｆ（領域Ａ）＜ｆ（領域Ａ’）
【００２２】
（５）画像評価値算出手段１０５
注目領域算出手段１０４で算出された注目度（誘目度）に基づいて、画像評価値を算出する。画像評価値の算出方法としては、例えば、以下に示す方法を使用することができる。
・第１の画像評価値算出方法
画像評価値をｈ（画像）で表すとすると、図３に示す画像１に対する画像評価値は、
ｈ（画像１）＝ Ｍａｘ（ｆ（領域ｉ））
として算出される。また、画像１の領域Ａ、領域Ｂ、領域Ｃの関係は、
ｆ（領域Ａ）＞ｆ（領域Ｂ）＞ｆ（領域Ｃ）
となっており、Ｍａｘ（ｆ（領域ｉ））は、ｆ（領域Ａ）となっているものとする。つまり、ｈ（画像１）は、
ｈ（画像１）＝ ｆ（領域Ａ） となる。
同様にして、
ｈ（画像２）＝ ｆ（領域Ａ’） となる。
【００２３】
・第２の画像評価値算出方法
第１の画像評価値算出方法では、領域Ａ〜領域Ｃまででｆ関数が最大となる場合のみに着目したが、これに限らず、
ｈ（画像１）＝Ｘ×ｆ（領域Ａ）＋Ｙ×ｆ（領域Ｂ）＋Ｚ×ｆ（領域Ｃ）
（Ｘ，Ｙ，Ｚは重み係数）
のように、すべての領域を加味した算術式で画像評価値を算出してもよい。これにより、すべての領域を加味した評価値となり、より画像全体の注目度（誘目度）が反映できるようになる。
【００２４】
・第３の画像評価値算出方法
また、領域Ａの面積をｋ（領域Ａ）とすると、誘目度ｆ’は、
ｆ’（領域Ａ）＝ｆ（領域Ａ）× ｋ（領域Ａ）
として、算出され、画像評価値ｈは、
ｈ（画像１）＝ ｆ’（領域Ａ）
として求められる。このように注目領域の面積の要素を加味して、画像評価値を算出することもできる。また、第２の画像評価値算出方法における係数（Ｘ、Ｙ、Ｚ）を面積に関する係数とすることもできる。
【００２５】
なお、本実施の形態例では、第１の画像評価値算出方法を用いると、
［ｈ（画像１）＝ｆ（領域Ａ）］＜［ｈ（画像２）＝ｆ（領域Ａ’）］
となるが、
第３の画像評価値算出方法（注目領域の面積を考慮）を用いると、
と、注目領域の面積により、画像の評価値が反対になる場合もある。
【００２６】
（６）画像順序決定手段１０６は、画像評価値算出手段１０５により求めた画像評価値を基に、画像の注目度の順序を決定するための手段である。
（７）テンプレート記憶手段１０７
テンプレート記憶手段１０７は、レイアウトに使用するテンプレートを記憶するための手段であり、テンプレートデータベースなどである。
（８）テンプレート選択手段１０８
テンプレート記憶手段１０７に記憶されているテンプレートを１つ選択する。テンプレートの選択方法は、ユーザがテンプレートを指定するようにしてもよいし、上述した画像評価値ｈの合計によってテンプレートを選択するなど、自動選択するようにしてもよい。
例えば、テンプレートの選択条件として、画像評価値の合計「ｈ（画像１）＋ｈ（画像２）」が、０．２以下ならばテンプレートＡを、１．０以上ならばテンプレートＢを選択するなど、画像評価値の合計によりテンプレートを自動的に選択するようにもできる。
以下、テンプレートの具体的な例を図２により説明する。
【００２７】
図２は、テンプレートの例を示す図であり、ある主題を持った画像（在学期間、旅行期間、旅行場所など）で撮影した画像をレイアウトする例である。図２に示す例では、予め決まっているテンプレートにしたがって、２枚の画像、（撮影し、格納しておいた写責）を配置する。本実施の形態例では、図２に示すテンプレートが選択されたものとする。また、図２に示すテンプレートでは、レイアウト枠ａの画像位置▲１▼、レイアウト枠ｂの画像位置▲２▼の順番で優先度が順序付けられているものとする。この優先順位は、予めテンプレートの作成者が付与しても良いし、テンプレートの各画像位置の面積（レイアウト枠の面積）の大小によって優先度の順序付けが自動的に行われてもよい。面積の大きいものが優先度が高いとすると、注目度の大きな画像が大きくレイアウトされることとなり、よりインパクトの強い、良いレイアウトが自動的に実現できるようになる。
【００２８】
（９）レイアウト手段１０９
テンプレート内の画像位置（レイアウト枠）の優先順位と、画像評価値によって順序付けられた画像とに従い、レイアウト処理を実行するための手段である。今、図３に示す画像１、図５に示す画像２の画像評価値の関係が、
ｈ（画像１）＞ｈ（画像２）
であったとした場合、テンプレートの画像位置▲１▼には画像１が、画像位置▲２▼には画像２がレイアウトされる。なお、画像１及び画像２をテンプレート内にはめ込む場合には、各画像は、レイアウト枠内に適切に収まるように拡大または縮小されることがある。レイアウト結果の例を図７に示す。
【００２９】
図７は、図３に示す画像１と、図５に示す画像２を、図２に示すテンプレートにレイアウトをした例を示す図であり、画像評価値の高い画像１が、レイアウト枠の大きな画像位置▲１▼に配置される。また、画像評価値の低い画像２が、レイアウト枠の小さな画像位置▲２▼に配置される。このように、画像１と画像２が画像評価値に応じて配置され、よりインパクトのあるレイアウトを実現できることになる。
【００３０】
（１０）表示手段１１０
表示手段１１０は、表示装置にレイアウトした結果を表示するための手段である。
（１１）印刷手段１１１
印刷手段１１１は、レイアウトした結果を印刷するための手段である。
【００３１】
また、図８は、本発明の画像レイアウト装置における処理手順を示す図であり、注目度（誘目度）を利用したレイアウトの手順を示すフローチャートである。
（１）ステップＳ１：画像選択手段１０２により、画像記憶手段１０１からレイアウトする画像を選択する。
（２）ステップＳ２：画像読取手段１０３により、レイアウトする画像を読みより、画像の注目度（誘目度）を算出し、例えば、図４または図６に示す注目領域のパターン画像を作成する。
（３）ステップＳ３：画像評価値算出手段１０５により、図４または図６に示す注目領域のパターン画像から、画像評価値を算出する。
（４）ステップＳ４：テンプレート選択手段１０８により、テンプレート記憶手段１０７からテンプレートを選択する。
（５）ステップＳ５：レイアウト手段１０９により、テンプレート内のレイアウト位置の順序と、画像評価値に従い、レイアウト処理を実行する。
（６）ステップＳ６：レイアウトした結果を表示または印刷する。
【００３２】
また、図９は、画像レイアウト装置の構成例を示すブロック図であり、本発明に直接関係する部分についてのみ示したものである。図９において、１００は画像レイアウト装置、１０はインターネット網などの通信ネットワーク、１１２は画像レイアウト装置と通信ネットワーク１０とを接続する通信用インタフェース、１１３は画像レイアウト装置全体を統括制御する制御部、１１４はレイアウトされる画像のデータを記憶する画像データベース、１１５はレイアウトに使用するテンプレートを記憶するテンプレートデータベース、１２０は処理プログラム部を示している。なお、本発明による画像レイアウト装置は、ＰＣ（パーソナルコンピュータ）を使用しても実現できるものである。
【００３３】
また、処理プログラム部１２０には、以下の処理部が含まれている。
・画像選択処理部１２１は、画像データベース１１４からレイアウトする画像を選び出すための処理部である。
・画像読取処理部１２２は、画像を構成する画素ごとの値（ＲＧＢ値等）を読み出すための処理部である。
・注目領域算出処理部１２３は、注目領域を算出するための処理部である。画像内を複数の領域に分離し、分離した領域ごとに、注目度の程度を２段階以上に区分けする。この注目領域の算出には、例えば、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）」に開示された「誘目度」を使用することができる。
・画像評価値算出処理部１２４は、注目領域算出処理部１２３で算出された注目度（誘目度）に基づいて、画像評価値を算出するための処理部である。
・画像順序決定処理部１２５は、画像評価値算出処理部１２４により求めた画像評価値を基に、画像の注目度の順序を決定するための処理部である。
・テンプレート選択処理部１２６は、画像のレイアウトを記述するテンプレートを、テンプレートデータベース１１５から選択するための処理部である。
・レイアウト処理部１２７は、テンプレート選択処理部１２６で選択したテンプレートと画像評価値に基づいて、複数の画像を、テンプレートに配置するための処理部である。
・表示処理部１２８は、表示装置にレイアウトした結果を表示するための処理部である。
・印刷処理部１２９は、レイアウトした結果を印刷するための処理部である。
【００３４】
なお、この処理プログラム部１２０は専用のハードウエアにより実現されるものであってもよく、またこの処理プログラム部はメモリおよびＣＰＵ（中央処理装置）等の汎用の情報処理装置により構成され、この処理部の機能を実現するためのプログラム（図示せず）をメモリにロードして実行することによりその機能を実現させるものであってもよい。また、この画像レイアウト装置１００には、周辺機器として入力装置、表示装置、印刷装置等（いずれも図示せず）が接続されているものとする。ここで、入力装置としては、キーボード、マウス等の入力デバイスのことをいう。表示装置とは、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）や液晶表示装置等のことをいう。印刷装置とは、レーザープリンタ、インクジェットプリンタ等のことをいう。
【００３５】
［第２の実施の形態］
以上、本発明の画像レイアウト装置の実施の形態について説明したが、本発明の技術的思想としての、注目度（誘目度）による画像の順序づけは、さらに、より広い用途に使用することができる。例えば、予め画像を注目度により順序づけして、あるいは、注目度の数値を付与して、データベースに登録しておき、画像の注目度を指標として画像を検索する用途などに使用することもできる。
【００３６】
図１０は、本発明による画像編集装置が備える手段の構成例を示す図であり、画像の注目度（誘目度）の評価と、画像の順序づけを行うための装置である。図１０に示す画像編集装置１００ａは、画像記憶手段１０１、画像選択手段１０２、画像読取手段１０３、注目領域算出手段１０４、画像評価値算出手段１０５、及び画像順序決定手段１０６から構成される。なお、画像記憶手段１０１、画像選択手段１０２、画像読取手段１０３、注目領域算出手段１０４、画像評価値算出手段１０５、及び画像順序決定手段１０６は図１に示すものと同じであり、その説明は省略する。ただし、図１０に示す画像編集装置１００ａでは、図１に示す画像レイアウト装置１００と比較して、画像順序決定手段１０６から出力される順序づけされた画像の情報が、画像記憶手段１０１に記憶される点が異なる。
【００３７】
また、図１１は、本発明の画像編集装置像の構成例を示すブロック図であり、画像編集装置１００ａを構成する、通信用インタフェース１１２、制御部１１３、画像データベース１１４は、図９に示す画像レイアウト装置１００と同じものである。
また、処理プログラム部１２０ａ内の、画像選択処理部１２１、画像読取処理部１２２、注目領域算出処理部１２３、画像評価値算出処理部１２４、画像順序決定処理部１２５も、図９に示す各処理部と同じであり、図９と同様に、画像の注目度による評価と、画像の順序づけを行うための処理部である。
【００３８】
以上、本発明の実施の形態について説明したが、図９に示す画像レイアウト装置１００、及び図１１に示す画像編集装置１００ａの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより本発明の画像レイアウト装置１００及び画像編集装置１００ａに必要な処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）を含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可般媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの（伝送媒体ないしは伝送波）、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。
また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【００３９】
以上、本発明の実施の形態について説明したが、本発明の画像レイアウト装置及び画像編集装置は、上述の図示例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【００４０】
［誘目度についての補足説明］
本発明の実施の形態では、注目領域の抽出基準として「誘目度」を使用しているが、この「誘目度」の算出方法の一例が、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）に詳細に開示されている。
ここでは、その概要についてだけ説明する。
注目領域の抽出のために、原画像の物理的特徴に従って誘目度を評価する。ここで、誘目度とは、人間の主観に合ったパラメータをいう。注目領域の抽出は、評価結果から一番目立つ領域を注目領域として抽出する。つまり、注目領域の評価の際は、物理的特徴に従って人間の主観に合った評価をするので、人間の主観に適合した注目領域を抽出することができる。
例えば、物理的特徴が色の異質度を含む場合、各領域の色の違いに基づいて誘目度を評価することができる。
また、物理的特徴が、色の異質度に加えて、形の異質度、面積の異質度およびテクスチャ（模様）の異質度をさらに含むので、この４つの異質度の少なくとも１つの異質度に基づいて誘目度を評価すれば、原画像の特徴に応じて的確に誘目度を評価することができる。
また、色の３要素（色相、彩度、明度）についても評価する場合であれば、人間の主観による目立つ色（赤色）に近い領域を最も目立つ領域と評価することができる。
さらに、空間周波数や原画像における各領域の面積についても評価すれば、最も目立つ領域の評価をさらに的確に判断することができる。
【００４１】
また、誘目度の評価は、以下の手順により行う。
（１）最初に原画像を領域分割する。この場合、原画像を図領域と絵領域に分割する。この領域分割の方法には、１９９７ＩＥＥＥにおいてＷ．Ｙ．ＭａやＢ．Ｓ．Ｍａｎｊｕｎａｔｈ らが「Ｅｄｇｅ Ｆｌｏｗ：Ａ Ｆｒａｍｅｗｏｒｋ ｏｆ Ｂｏｕｎｄａｒｙ Ｄｅｔｅｃｔｉｏｎ ａｎｄ Ｉｍａｇｅ Ｓｅｇｍｅｎｔａｔｉｏｎ」に記載した“ｅｄｇｅ ｆｌｏｗ ”に基づく境界検出方法が適用される。
（２）次に、分割した図領域を抽出し、領域の誘目度を評価する。
この誘目度の評価は、概略以下のようにして行う。
・最初に各領域の異質性誘目度を求める。この場合、色の異質度，テクスチャの異質度，形の異質度および面積の異質度を各々求め、それぞれに重み係数を付与して線形結合し、各領域の異質性誘目度を求める。
・次に、各領域における特徴誘目度を求める。この場合、色の誘目度、空間周波数の誘目度、面積の誘目度を求め、それぞれに重み係数を付与して線形結合し、各領域の特徴誘目度を求める。
・次に、各領域の異質性誘目度と特徴誘目度を加算し、特徴量統合値を求め、この特徴量統合値を、所定のベータ関数により評価して、誘目度を算出する。
（３）また、原画像から誘目度を評価したパターン図を生成する。
【図面の簡単な説明】
【図１】本発明の画像レイアウト装置が備える手段の構成例を示す図。
【図２】テンプレートの例を示す図。
【図３】レイアウト対象となる第１の画像１を示す図。
【図４】図３に対応する誘目度のパターンを模式的に示した図。
【図５】レイアウト対象となる第２の画像２を示す図。
【図６】図５に対応する誘目度のパターンを模式的に示した図。
【図７】画像１と画像２をレイアウトをした例を示す図。
【図８】画像レイアウト装置における処理手順を示す図。
【図９】画像レイアウト装置の構成例を示すブロック図。
【図１０】本発明の画像編集装置が備える手段の構成例を示す図。
【図１１】画像編集装置の構成例を示すブロック図。
【符号の説明】
１００ 画像レイアウト装置、１０１ 画像記憶手段、１０２ 画像選択手段
１０３ 画像読取手段、１０４ 注目領域算出手段、
１０５ 画像評価値算出手段、１０６ 画像順序決定手段
１０７ テンプレート記憶手段、１０８ テンプレート選択手段
１０９ レイアウト手段、１１０ 表示手段、１１１ 印刷手段
【発明の属する技術分野】
本発明は、デジタルカメラ等で撮影された複数のデジタル画像（単に「画像」ともいう）を注目度を基にして順序づけを行うと共に、複数の画像のレイアウト（画像の配置）を自動的に行うことができる画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラムに関し、またさらに、複数の画像について、各画像の注目度を算出し、画像の順序づけを自動的に行うことのできる画像編集装置に関するものである。
【０００２】
【従来の技術】
近時、デジタルカメラが普及し、撮影したデジタル画像をＰＣ（パーソナルコンピュータ）内に取り込み、ＰＣ画面上でデジタル画像を編集し、印刷することが簡単にできるようになってきた。例えば、旅行先でデジタルカメラで撮影したデジタル画像を編集し、旅行アルバムなどを簡単に作成できるようになってきた。
このＰＣ画面上でデジタル画像の編集を行う際には、図７に示すように、複数の画像を、１つの画像にレイアウトするような場合がある。このようなレイアウトにおいては、従来は、人間が手動で、各画像の内の注目領域（目立つ領域）の内容を考慮して、できるだけインパクト（強い印象を与える）のある画像となるように、マウス等を操作してレイアウトを行っていた。
この手動によるレイアウトは、デジタル画像の枚数が少ない場合は、それほど手間がかからず問題とならないが、多数のデジタル画像をアルバムとして編集するような場合には、手動によるレイアウト作業は結構煩わしい作業となる。
また、デジタルカメラに普及と共に、利用者層の範囲が広がり、利用者の中にはＰＣ操作に不慣れな人もおり、複数の画像のレイアウトが、より簡単に行える装置の提供が望まれていた。
【０００３】
このようなデジタル画像のレイアウトについての先行技術として、例えば、特許文献１「画像処理方法、装置及び記憶媒体」がある。
特許文献１で開示された発明は、画像に対して施された複数の編集情報や、画像を選択するときの選択条件にレイアウト名称を対応付けて登録することにより、そのレイアウト名称の指示に応じてそれらの情報を再利用することを可能とする。これにより、異なる画像に、同じレイアウトを指定するときの操作性を向上することができる。また、複数の画像情報のなかから所望の画像情報を選択するための選択条件を入力するときの操作性を向上することができる。
【０００４】
【特許文献１】
特開２０００−２６１６４９号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、特許文献１に開示された発明は、オペレータ自身が手動で画像をレイアウトすることを基本とし、そのレイアウト情報を再利用することを目的とした発明である。見た目を考慮したレイアウトを自動的に行いたい場合、レイアウトテンプレートには、レイアウト順番を指定することができたが、レイアウトすべき画像の順序づけは人手で行う必要があった。
【０００６】
本発明はこのような問題を解決するためになされたもので、その目的は、複数の画像をレイアウトする場合に、レイアウトテンプレートにおけるレイアウト順序を指定すると共に、画像の注目領域を算出して、レイアウトすべき画像の順序づけを自動的に行うことができる、画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラムを提供することにある。
またさらには、複数の画像について、各画像の注目度を算出し、画像の順序づけを自動的に行う画像編集装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は上記課題を解決するためになされたものであり、本発明の画像レイアウト装置は、複数の画像をレイアウトする画像レイアウト装置であって、レイアウト対象となる画像を記憶する画像記憶手段と、前記画像記憶手段により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手段と、前記選択した画像を読み取る画像読取手段と、画像の注目度を算出する注目領域算出手段と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手段と、前記テンプレート記憶手段により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手段と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手段とを具備することを特徴とする。
【０００８】
このような構成であれば、画像選択手段により、画像記憶手段に記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手段により、レイアウト対象となる画像を読み取り、注目領域算出手段により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。また、テンプレート選択手段により、テンプレート記憶手段に記憶されたレイアウト用のテンプレート（レイアウト順序情報を含む）の中から、レイアウトに使用するテンプレートを選択する。そして、レイアウト手段により、レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトする。
これにより、レイアウト対象となる画像を、テンプレートのレイアウト順序に従い、注目度合が高い画像が優先順位が高くなるようにレイアウトできる。すなわち、目に付き易い画像の順から、指定されたレイアウト順序に従いレイアウトされるため、よりインパクト（強い印象を与える）のある画像のレイアウトが実現できる。
【０００９】
また、本発明の画像レイアウト装置は、前記注目領域算出手段によって得られた注目度と、注目領域の面積を基に画像評価値を算出する画像評価値算出手段と、前記画像評価値により画像の注目度の順序を決定する画像順序決定手段とを具備することを特徴とする。
このような構成であれば、レイアウトする画像を評価する場合に、画像評価値算出手段では、注目領域算出手段により得られた注目度、注目領域の面積に応じて、例えば、注目度と面積を掛け算するなどして、画像評価値を算出する。そして、画像順序決定手段では、画像評価値の大小に応じて、レイアウトする画像の順序づけを行う。
これにより、画像の順序づけを行う際に、人間の視覚特性に合った形で、画像の注目度による順序づけを行うことができる。
【００１０】
また、本発明の画像レイアウト装置は、前記テンプレートのレイアウト順序は、レイアウト枠の大きさに従い順序付られていることを特徴とする。
このような構成であれば、レイアウト枠の大きなものに、注目度（または画像評価値）の高い画像が配置される。
これにより、注目すべき画像を大きくしてレイアウトできる。
【００１１】
また、本発明の画像レイアウト方法は、複数の画像をレイアウトする画像レイアウト装置における画像レイアウト方法であって、レイアウト対象となる画像を記憶する画像記憶手順と、前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、前記選択した画像を読み取る画像読取手順と、画像の注目度を算出する注目領域算出手順と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順とを含むことを特徴とする。
【００１２】
このような手順であれば、画像選択手順により、画像記憶手順により記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手順により、レイアウト対象となる画像を読み取り、注目領域算出手順により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。また、テンプレート選択手順により、テンプレート記憶手順により記憶されたレイアウト用のテンプレート（レイアウト順序情報を含む）の中から、レイアウトに使用するテンプレートを選択する。そして、レイアウト手順により、レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトする。
これにより、レイアウト対象となる画像を、テンプレートのレイアウト順序に従い、注目度合が高い画像が優先順位が高くなるようにレイアウトできる。すなわち、目に付き易い画像の順から、指定されたレイアウト順序に従いレイアウトされるため、よりインパクトのある画像のレイアウトが実現できる。
【００１３】
また、本発明の画像レイアウト装置におけるコンピュータプログラムは、複数の画像をレイアウトする画像レイアウト装置内のコンピュータに、レイアウト対象となる画像を記憶する画像記憶手順と、前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、前記選択した画像を読み取る画像読取手順と、画像の注目度を算出する注目領域算出手順と、レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順とを実行させるためのプログラムである。
【００１４】
また、本発明の画像編集装置は、複数の画像の順序づけを行う画像編集装置であって、順序づけの対象となる画像を記憶する画像記憶手段と、前記画像記憶手段により記憶された画像の中から、順序づけを行う画像を選択する画像選択手段と、前記選択した画像を読み取る画像読取手段と、画像の注目領域を算出する注目領域算出手段と、前記注目領域算出手段によって得られた注目度に従い、画像を順序づけする画像順序決定手段とを具備することを特徴とする。
【００１５】
このような構成であれば、画像選択手段により、画像記憶手段に記憶された画像の中から、レイアウトの対象となる複数の画像を選択する。そして、画像読取手段により、レイアウト対象となる画像を読み取り、注目領域算出手段により、レイアウト対象となる画像の注目度と注目度の領域（注目領域）を算出する。そして、画像順序決定手段により、前記注目領域算出手段によって得られた注目度に従い、画像を順序づけする
これにより、画像の注目度の程度により、画像を順序づけすることができ、例えば、注目度を指標とした画像の登録や検索などに利用できる。
【００１６】
また、本発明の画像編集装置は、前記注目領域算出手段によって得られた注目度と、注目領域の面積とを基に画像評価値を算出する画像評価値算出手段と、前記画像評価値により画像の注目度の順序を決定する画像順序決定手段とをさらに具備することを特徴とする。
このような構成であれば、画像を評価する場合に、画像評価値算出手段では、注目領域算出手段により得られた注目度、注目領域の面積に応じて、例えば、注目度と面積を掛け算するなどして、画像評価値を算出する。そして、画像順序決定手段では、画像評価値の大小に応じて、画像の順序づけを行う。
これにより、画像の順序づけを行う際に、人間の視覚特性に合った形で、画像の注目度による順序づけを行うことができる。
【００１７】
【発明の実施の形態】
次に本発明の実施の形態例について図面を参照して説明する。
【００１８】
図１は、本発明の画像レイアウト装置１００が備える手段の構成例を示す図である。図１に示す画像レイアウト装置１００に設けられた各手段は、以下に示す処理を行う。
（１）画像記憶手段１０１は、レイアウトの対象となる画像を記憶するための手段であり、画像データベースなどである。
（２）画像選択手段１０２
画像選択手段１０２は、画像記憶手段１０１から、レイアウトする画像を選択するための手段である（図３及び図５参照）。
（３）画像読取手段１０３
画像読取手段１０３は、レイアウトの対象となる画像を構成する画素ごとの値（ＲＧＢ値等）を読み出すための手段である。
（４）注目領域算出手段１０４
注目領域算出手段１０４は、レイアウトの対象となる画像の注目領域を算出するための手段である。画像内を複数の領域に分離し、分離した領域ごとに、注目度の程度を２段階以上に区分けする。この注目領域の算出には、例えば、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）」に開示された「誘目度」を使用することができる。なお、誘目度については、後述する「誘目度についての補足説明」の項目で、その概要について説明する。
以下、注目領域算出手段１０４により算出された注目領域の具体例について、図３乃至図６により、説明する。
【００１９】
図３は、レイアウト対象となる第１の画像１を示す図であり、人物が左端に配置されている画像の例を模式的に示した画像の例である。図４は、図３に対応する誘目度のパターンを模式的に示した図である。誘目度は領域Ａが最も高く算出され、領域Ｂ、領域Ｃがこの順に低く算出されている。
【００２０】
図５は、レイアウト対象となる第２の画像２を示す図であり、花が右端に配置されている画像の例を模式的に示した画像の例である。図６は、図５に対応する誘目度のパターンを模式的に示した図である。誘目度は領域Ａ’が最も高く算出され、領域Ｂ’、領域Ｃ’がこの順に低く算出されている。
【００２１】
そして、例えば、図４に示す誘目度のパターン画像において、算出された誘目度は、それぞれ、ｆ（領域Ａ）、ｆ（領域Ｂ）、ｆ（領域Ｃ）として表されるものとする。
また、図６に示す誘目度のパターン画像において、算出された誘目度は、それぞれ、ｆ（領域Ａ’）、ｆ（領域Ｂ’）、ｆ（領域Ｃ’）として表されるものとする。
そして、ｆ（領域Ａ）とｆ（領域Ａ’）の関係は、以下のようになっているものとする。
ｆ（領域Ａ）＜ｆ（領域Ａ’）
【００２２】
（５）画像評価値算出手段１０５
注目領域算出手段１０４で算出された注目度（誘目度）に基づいて、画像評価値を算出する。画像評価値の算出方法としては、例えば、以下に示す方法を使用することができる。
・第１の画像評価値算出方法
画像評価値をｈ（画像）で表すとすると、図３に示す画像１に対する画像評価値は、
ｈ（画像１）＝ Ｍａｘ（ｆ（領域ｉ））
として算出される。また、画像１の領域Ａ、領域Ｂ、領域Ｃの関係は、
ｆ（領域Ａ）＞ｆ（領域Ｂ）＞ｆ（領域Ｃ）
となっており、Ｍａｘ（ｆ（領域ｉ））は、ｆ（領域Ａ）となっているものとする。つまり、ｈ（画像１）は、
ｈ（画像１）＝ ｆ（領域Ａ） となる。
同様にして、
ｈ（画像２）＝ ｆ（領域Ａ’） となる。
【００２３】
・第２の画像評価値算出方法
第１の画像評価値算出方法では、領域Ａ〜領域Ｃまででｆ関数が最大となる場合のみに着目したが、これに限らず、
ｈ（画像１）＝Ｘ×ｆ（領域Ａ）＋Ｙ×ｆ（領域Ｂ）＋Ｚ×ｆ（領域Ｃ）
（Ｘ，Ｙ，Ｚは重み係数）
のように、すべての領域を加味した算術式で画像評価値を算出してもよい。これにより、すべての領域を加味した評価値となり、より画像全体の注目度（誘目度）が反映できるようになる。
【００２４】
・第３の画像評価値算出方法
また、領域Ａの面積をｋ（領域Ａ）とすると、誘目度ｆ’は、
ｆ’（領域Ａ）＝ｆ（領域Ａ）× ｋ（領域Ａ）
として、算出され、画像評価値ｈは、
ｈ（画像１）＝ ｆ’（領域Ａ）
として求められる。このように注目領域の面積の要素を加味して、画像評価値を算出することもできる。また、第２の画像評価値算出方法における係数（Ｘ、Ｙ、Ｚ）を面積に関する係数とすることもできる。
【００２５】
なお、本実施の形態例では、第１の画像評価値算出方法を用いると、
［ｈ（画像１）＝ｆ（領域Ａ）］＜［ｈ（画像２）＝ｆ（領域Ａ’）］
となるが、
第３の画像評価値算出方法（注目領域の面積を考慮）を用いると、
【００２６】
（６）画像順序決定手段１０６は、画像評価値算出手段１０５により求めた画像評価値を基に、画像の注目度の順序を決定するための手段である。
（７）テンプレート記憶手段１０７
テンプレート記憶手段１０７は、レイアウトに使用するテンプレートを記憶するための手段であり、テンプレートデータベースなどである。
（８）テンプレート選択手段１０８
テンプレート記憶手段１０７に記憶されているテンプレートを１つ選択する。テンプレートの選択方法は、ユーザがテンプレートを指定するようにしてもよいし、上述した画像評価値ｈの合計によってテンプレートを選択するなど、自動選択するようにしてもよい。
例えば、テンプレートの選択条件として、画像評価値の合計「ｈ（画像１）＋ｈ（画像２）」が、０．２以下ならばテンプレートＡを、１．０以上ならばテンプレートＢを選択するなど、画像評価値の合計によりテンプレートを自動的に選択するようにもできる。
以下、テンプレートの具体的な例を図２により説明する。
【００２７】
図２は、テンプレートの例を示す図であり、ある主題を持った画像（在学期間、旅行期間、旅行場所など）で撮影した画像をレイアウトする例である。図２に示す例では、予め決まっているテンプレートにしたがって、２枚の画像、（撮影し、格納しておいた写責）を配置する。本実施の形態例では、図２に示すテンプレートが選択されたものとする。また、図２に示すテンプレートでは、レイアウト枠ａの画像位置▲１▼、レイアウト枠ｂの画像位置▲２▼の順番で優先度が順序付けられているものとする。この優先順位は、予めテンプレートの作成者が付与しても良いし、テンプレートの各画像位置の面積（レイアウト枠の面積）の大小によって優先度の順序付けが自動的に行われてもよい。面積の大きいものが優先度が高いとすると、注目度の大きな画像が大きくレイアウトされることとなり、よりインパクトの強い、良いレイアウトが自動的に実現できるようになる。
【００２８】
（９）レイアウト手段１０９
テンプレート内の画像位置（レイアウト枠）の優先順位と、画像評価値によって順序付けられた画像とに従い、レイアウト処理を実行するための手段である。今、図３に示す画像１、図５に示す画像２の画像評価値の関係が、
ｈ（画像１）＞ｈ（画像２）
であったとした場合、テンプレートの画像位置▲１▼には画像１が、画像位置▲２▼には画像２がレイアウトされる。なお、画像１及び画像２をテンプレート内にはめ込む場合には、各画像は、レイアウト枠内に適切に収まるように拡大または縮小されることがある。レイアウト結果の例を図７に示す。
【００２９】
図７は、図３に示す画像１と、図５に示す画像２を、図２に示すテンプレートにレイアウトをした例を示す図であり、画像評価値の高い画像１が、レイアウト枠の大きな画像位置▲１▼に配置される。また、画像評価値の低い画像２が、レイアウト枠の小さな画像位置▲２▼に配置される。このように、画像１と画像２が画像評価値に応じて配置され、よりインパクトのあるレイアウトを実現できることになる。
【００３０】
（１０）表示手段１１０
表示手段１１０は、表示装置にレイアウトした結果を表示するための手段である。
（１１）印刷手段１１１
印刷手段１１１は、レイアウトした結果を印刷するための手段である。
【００３１】
また、図８は、本発明の画像レイアウト装置における処理手順を示す図であり、注目度（誘目度）を利用したレイアウトの手順を示すフローチャートである。
（１）ステップＳ１：画像選択手段１０２により、画像記憶手段１０１からレイアウトする画像を選択する。
（２）ステップＳ２：画像読取手段１０３により、レイアウトする画像を読みより、画像の注目度（誘目度）を算出し、例えば、図４または図６に示す注目領域のパターン画像を作成する。
（３）ステップＳ３：画像評価値算出手段１０５により、図４または図６に示す注目領域のパターン画像から、画像評価値を算出する。
（４）ステップＳ４：テンプレート選択手段１０８により、テンプレート記憶手段１０７からテンプレートを選択する。
（５）ステップＳ５：レイアウト手段１０９により、テンプレート内のレイアウト位置の順序と、画像評価値に従い、レイアウト処理を実行する。
（６）ステップＳ６：レイアウトした結果を表示または印刷する。
【００３２】
また、図９は、画像レイアウト装置の構成例を示すブロック図であり、本発明に直接関係する部分についてのみ示したものである。図９において、１００は画像レイアウト装置、１０はインターネット網などの通信ネットワーク、１１２は画像レイアウト装置と通信ネットワーク１０とを接続する通信用インタフェース、１１３は画像レイアウト装置全体を統括制御する制御部、１１４はレイアウトされる画像のデータを記憶する画像データベース、１１５はレイアウトに使用するテンプレートを記憶するテンプレートデータベース、１２０は処理プログラム部を示している。なお、本発明による画像レイアウト装置は、ＰＣ（パーソナルコンピュータ）を使用しても実現できるものである。
【００３３】
また、処理プログラム部１２０には、以下の処理部が含まれている。
・画像選択処理部１２１は、画像データベース１１４からレイアウトする画像を選び出すための処理部である。
・画像読取処理部１２２は、画像を構成する画素ごとの値（ＲＧＢ値等）を読み出すための処理部である。
・注目領域算出処理部１２３は、注目領域を算出するための処理部である。画像内を複数の領域に分離し、分離した領域ごとに、注目度の程度を２段階以上に区分けする。この注目領域の算出には、例えば、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）」に開示された「誘目度」を使用することができる。
・画像評価値算出処理部１２４は、注目領域算出処理部１２３で算出された注目度（誘目度）に基づいて、画像評価値を算出するための処理部である。
・画像順序決定処理部１２５は、画像評価値算出処理部１２４により求めた画像評価値を基に、画像の注目度の順序を決定するための処理部である。
・テンプレート選択処理部１２６は、画像のレイアウトを記述するテンプレートを、テンプレートデータベース１１５から選択するための処理部である。
・レイアウト処理部１２７は、テンプレート選択処理部１２６で選択したテンプレートと画像評価値に基づいて、複数の画像を、テンプレートに配置するための処理部である。
・表示処理部１２８は、表示装置にレイアウトした結果を表示するための処理部である。
・印刷処理部１２９は、レイアウトした結果を印刷するための処理部である。
【００３４】
なお、この処理プログラム部１２０は専用のハードウエアにより実現されるものであってもよく、またこの処理プログラム部はメモリおよびＣＰＵ（中央処理装置）等の汎用の情報処理装置により構成され、この処理部の機能を実現するためのプログラム（図示せず）をメモリにロードして実行することによりその機能を実現させるものであってもよい。また、この画像レイアウト装置１００には、周辺機器として入力装置、表示装置、印刷装置等（いずれも図示せず）が接続されているものとする。ここで、入力装置としては、キーボード、マウス等の入力デバイスのことをいう。表示装置とは、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）や液晶表示装置等のことをいう。印刷装置とは、レーザープリンタ、インクジェットプリンタ等のことをいう。
【００３５】
［第２の実施の形態］
以上、本発明の画像レイアウト装置の実施の形態について説明したが、本発明の技術的思想としての、注目度（誘目度）による画像の順序づけは、さらに、より広い用途に使用することができる。例えば、予め画像を注目度により順序づけして、あるいは、注目度の数値を付与して、データベースに登録しておき、画像の注目度を指標として画像を検索する用途などに使用することもできる。
【００３６】
図１０は、本発明による画像編集装置が備える手段の構成例を示す図であり、画像の注目度（誘目度）の評価と、画像の順序づけを行うための装置である。図１０に示す画像編集装置１００ａは、画像記憶手段１０１、画像選択手段１０２、画像読取手段１０３、注目領域算出手段１０４、画像評価値算出手段１０５、及び画像順序決定手段１０６から構成される。なお、画像記憶手段１０１、画像選択手段１０２、画像読取手段１０３、注目領域算出手段１０４、画像評価値算出手段１０５、及び画像順序決定手段１０６は図１に示すものと同じであり、その説明は省略する。ただし、図１０に示す画像編集装置１００ａでは、図１に示す画像レイアウト装置１００と比較して、画像順序決定手段１０６から出力される順序づけされた画像の情報が、画像記憶手段１０１に記憶される点が異なる。
【００３７】
また、図１１は、本発明の画像編集装置像の構成例を示すブロック図であり、画像編集装置１００ａを構成する、通信用インタフェース１１２、制御部１１３、画像データベース１１４は、図９に示す画像レイアウト装置１００と同じものである。
また、処理プログラム部１２０ａ内の、画像選択処理部１２１、画像読取処理部１２２、注目領域算出処理部１２３、画像評価値算出処理部１２４、画像順序決定処理部１２５も、図９に示す各処理部と同じであり、図９と同様に、画像の注目度による評価と、画像の順序づけを行うための処理部である。
【００３８】
以上、本発明の実施の形態について説明したが、図９に示す画像レイアウト装置１００、及び図１１に示す画像編集装置１００ａの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより本発明の画像レイアウト装置１００及び画像編集装置１００ａに必要な処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）を含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可般媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの（伝送媒体ないしは伝送波）、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。
また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【００３９】
以上、本発明の実施の形態について説明したが、本発明の画像レイアウト装置及び画像編集装置は、上述の図示例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【００４０】
［誘目度についての補足説明］
本発明の実施の形態では、注目領域の抽出基準として「誘目度」を使用しているが、この「誘目度」の算出方法の一例が、「特開２００１−１２６０７０号公報（注目領域抽出装置およびそれを用いた自動構図決定装置）に詳細に開示されている。
ここでは、その概要についてだけ説明する。
注目領域の抽出のために、原画像の物理的特徴に従って誘目度を評価する。ここで、誘目度とは、人間の主観に合ったパラメータをいう。注目領域の抽出は、評価結果から一番目立つ領域を注目領域として抽出する。つまり、注目領域の評価の際は、物理的特徴に従って人間の主観に合った評価をするので、人間の主観に適合した注目領域を抽出することができる。
例えば、物理的特徴が色の異質度を含む場合、各領域の色の違いに基づいて誘目度を評価することができる。
また、物理的特徴が、色の異質度に加えて、形の異質度、面積の異質度およびテクスチャ（模様）の異質度をさらに含むので、この４つの異質度の少なくとも１つの異質度に基づいて誘目度を評価すれば、原画像の特徴に応じて的確に誘目度を評価することができる。
また、色の３要素（色相、彩度、明度）についても評価する場合であれば、人間の主観による目立つ色（赤色）に近い領域を最も目立つ領域と評価することができる。
さらに、空間周波数や原画像における各領域の面積についても評価すれば、最も目立つ領域の評価をさらに的確に判断することができる。
【００４１】
また、誘目度の評価は、以下の手順により行う。
（１）最初に原画像を領域分割する。この場合、原画像を図領域と絵領域に分割する。この領域分割の方法には、１９９７ＩＥＥＥにおいてＷ．Ｙ．ＭａやＢ．Ｓ．Ｍａｎｊｕｎａｔｈ らが「Ｅｄｇｅ Ｆｌｏｗ：Ａ Ｆｒａｍｅｗｏｒｋ ｏｆ Ｂｏｕｎｄａｒｙ Ｄｅｔｅｃｔｉｏｎ ａｎｄ Ｉｍａｇｅ Ｓｅｇｍｅｎｔａｔｉｏｎ」に記載した“ｅｄｇｅ ｆｌｏｗ ”に基づく境界検出方法が適用される。
（２）次に、分割した図領域を抽出し、領域の誘目度を評価する。
この誘目度の評価は、概略以下のようにして行う。
・最初に各領域の異質性誘目度を求める。この場合、色の異質度，テクスチャの異質度，形の異質度および面積の異質度を各々求め、それぞれに重み係数を付与して線形結合し、各領域の異質性誘目度を求める。
・次に、各領域における特徴誘目度を求める。この場合、色の誘目度、空間周波数の誘目度、面積の誘目度を求め、それぞれに重み係数を付与して線形結合し、各領域の特徴誘目度を求める。
・次に、各領域の異質性誘目度と特徴誘目度を加算し、特徴量統合値を求め、この特徴量統合値を、所定のベータ関数により評価して、誘目度を算出する。
（３）また、原画像から誘目度を評価したパターン図を生成する。
【図面の簡単な説明】
【図１】本発明の画像レイアウト装置が備える手段の構成例を示す図。
【図２】テンプレートの例を示す図。
【図３】レイアウト対象となる第１の画像１を示す図。
【図４】図３に対応する誘目度のパターンを模式的に示した図。
【図５】レイアウト対象となる第２の画像２を示す図。
【図６】図５に対応する誘目度のパターンを模式的に示した図。
【図７】画像１と画像２をレイアウトをした例を示す図。
【図８】画像レイアウト装置における処理手順を示す図。
【図９】画像レイアウト装置の構成例を示すブロック図。
【図１０】本発明の画像編集装置が備える手段の構成例を示す図。
【図１１】画像編集装置の構成例を示すブロック図。
【符号の説明】
１００ 画像レイアウト装置、１０１ 画像記憶手段、１０２ 画像選択手段
１０３ 画像読取手段、１０４ 注目領域算出手段、
１０５ 画像評価値算出手段、１０６ 画像順序決定手段
１０７ テンプレート記憶手段、１０８ テンプレート選択手段
１０９ レイアウト手段、１１０ 表示手段、１１１ 印刷手段
Claims (7)
- 複数の画像をレイアウトする画像レイアウト装置であって、
レイアウト対象となる画像を記憶する画像記憶手段と、
前記画像記憶手段により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手段と、
前記選択した画像を読み取る画像読取手段と、
画像の注目度を算出する注目領域算出手段と、
レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手段と、
前記テンプレート記憶手段により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手段と、
前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手段と
を具備することを特徴とする画像レイアウト装置。 - 前記注目領域算出手段によって得られた注目度と、注目領域の面積を基に画像評価値を算出する画像評価値算出手段と、
前記画像評価値により画像の注目度の順序を決定する画像順序決定手段と
を具備することを特徴とする請求項１に記載の画像レイアウト装置。 - 前記テンプレートのレイアウト順序は、レイアウト枠の大きさに従い順序付られていること
を特徴とする請求項１または請求項２に記載の画像レイアウト装置。 - 複数の画像をレイアウトする画像レイアウト装置における画像レイアウト方法であって、
レイアウト対象となる画像を記憶する画像記憶手順と、
前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、
前記選択した画像を読み取る画像読取手順と、
画像の注目度を算出する注目領域算出手順と、
レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、
前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、
前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順と
を含むことを特徴とする画像レイアウト方法。 - 複数の画像をレイアウトする画像レイアウト装置内のコンピュータに、
レイアウト対象となる画像を記憶する画像記憶手順と、
前記画像記憶手順により記憶された画像の中から、レイアウトする複数の画像を選択する画像選択手順と、
前記選択した画像を読み取る画像読取手順と、
画像の注目度を算出する注目領域算出手順と、
レイアウト順序情報を含むレイアウト用のテンプレートを記憶するテンプレート記憶手順と、
前記テンプレート記憶手順により記憶されたテンプレートの中から、レイアウトに使用するテンプレートを選択するためのテンプレート選択手順と、
前記レイアウト対象となる画像を、テンプレートに記載されているレイアウト順序と、画像の注目度の順序に従いレイアウトするレイアウト手順と
を実行させるためのプログラム。 - 複数の画像の順序づけを行う画像編集装置であって、
順序づけの対象となる画像を記憶する画像記憶手段と、
前記画像記憶手段により記憶された画像の中から、順序づけを行う画像を選択する画像選択手段と、
前記選択した画像を読み取る画像読取手段と、
画像の注目領域を算出する注目領域算出手段と、
前記注目領域算出手段によって得られた注目度に従い、画像を順序づけする画像順序決定手段と
を具備することを特徴とする画像編集装置。 - 前記注目領域算出手段によって得られた注目度と、注目領域の面積とを基に画像評価値を算出する画像評価値算出手段と、
前記画像評価値により画像の注目度の順序を決定する画像順序決定手段と
をさらに具備することを特徴とする請求項６に記載の画像編集装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003024375A JP4348956B2 (ja) | 2003-01-31 | 2003-01-31 | 画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003024375A JP4348956B2 (ja) | 2003-01-31 | 2003-01-31 | 画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004234500A true JP2004234500A (ja) | 2004-08-19 |
| JP4348956B2 JP4348956B2 (ja) | 2009-10-21 |
Family
ID=32952924
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003024375A Expired - Fee Related JP4348956B2 (ja) | 2003-01-31 | 2003-01-31 | 画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4348956B2 (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007094236A1 (ja) * | 2006-02-13 | 2007-08-23 | Matsushita Electric Industrial Co., Ltd. | 表示データ生成装置 |
| JP2007312058A (ja) * | 2006-05-18 | 2007-11-29 | Fujifilm Corp | アルバム作成システム、アルバム作成方法及びプログラム |
| JP2009288822A (ja) * | 2008-05-27 | 2009-12-10 | Fujifilm Corp | 注目度算出装置および方法並びにプログラム |
| JP2010262648A (ja) * | 2009-04-30 | 2010-11-18 | Xerox Corp | 文書オブジェクトを自動位置合わせするための方法及び装置 |
| US8665294B2 (en) | 2009-05-12 | 2014-03-04 | Canon Kabushiki Kaisha | Image layout device, image layout method, and storage medium |
| WO2016017320A1 (ja) * | 2014-07-28 | 2016-02-04 | 京セラドキュメントソリューションズ株式会社 | 情報処理装置、情報処理方法 |
| JP2016164748A (ja) * | 2015-03-06 | 2016-09-08 | キヤノン株式会社 | 情報処理装置、プログラム、及び情報処理方法 |
| JP2016189076A (ja) * | 2015-03-30 | 2016-11-04 | 株式会社Ｎｔｔドコモ | 情報処理装置、及び文章画像化プログラム |
| WO2022045170A1 (ja) * | 2020-08-31 | 2022-03-03 | 武藤工業株式会社 | ラスタイメージ変換装置及びプログラム並びに印刷システム |
-
2003
- 2003-01-31 JP JP2003024375A patent/JP4348956B2/ja not_active Expired - Fee Related
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007094236A1 (ja) * | 2006-02-13 | 2007-08-23 | Matsushita Electric Industrial Co., Ltd. | 表示データ生成装置 |
| JP2007312058A (ja) * | 2006-05-18 | 2007-11-29 | Fujifilm Corp | アルバム作成システム、アルバム作成方法及びプログラム |
| JP4642695B2 (ja) * | 2006-05-18 | 2011-03-02 | 富士フイルム株式会社 | アルバム作成システム、アルバム作成方法、プログラムおよびアルバム作成装置 |
| JP2009288822A (ja) * | 2008-05-27 | 2009-12-10 | Fujifilm Corp | 注目度算出装置および方法並びにプログラム |
| JP2010262648A (ja) * | 2009-04-30 | 2010-11-18 | Xerox Corp | 文書オブジェクトを自動位置合わせするための方法及び装置 |
| US8665294B2 (en) | 2009-05-12 | 2014-03-04 | Canon Kabushiki Kaisha | Image layout device, image layout method, and storage medium |
| WO2016017320A1 (ja) * | 2014-07-28 | 2016-02-04 | 京セラドキュメントソリューションズ株式会社 | 情報処理装置、情報処理方法 |
| US9438766B2 (en) | 2014-07-28 | 2016-09-06 | Kyocera Document Solutions Inc. | Information processing apparatus, information processing method |
| JP6038359B2 (ja) * | 2014-07-28 | 2016-12-07 | 京セラドキュメントソリューションズ株式会社 | 情報処理装置、情報処理方法 |
| JP2016164748A (ja) * | 2015-03-06 | 2016-09-08 | キヤノン株式会社 | 情報処理装置、プログラム、及び情報処理方法 |
| US10498909B2 (en) | 2015-03-06 | 2019-12-03 | Canon Kabushiki Kaisha | Information processing apparatus, information processing method, and storage medium |
| JP2016189076A (ja) * | 2015-03-30 | 2016-11-04 | 株式会社Ｎｔｔドコモ | 情報処理装置、及び文章画像化プログラム |
| WO2022045170A1 (ja) * | 2020-08-31 | 2022-03-03 | 武藤工業株式会社 | ラスタイメージ変換装置及びプログラム並びに印刷システム |
| JP7464729B2 (ja) | 2020-08-31 | 2024-04-09 | 武藤工業株式会社 | ラスタイメージ変換装置及びプログラム並びに印刷システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4348956B2 (ja) | 2009-10-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3690391B2 (ja) | 画像編集装置、画像のトリミング方法、及びプログラム | |
| JP4315344B2 (ja) | 画像編集装置および方法並びにプログラム | |
| JP4171574B2 (ja) | 画像処理条件決定装置および画像処理条件決定プログラム記憶媒体 | |
| JP4329475B2 (ja) | 装飾画像の選択 | |
| JP2000069304A (ja) | 画像データ管理装置、画像データ管理方法および画像データ管理プログラムを記録した媒体 | |
| JP2004199248A (ja) | 画像レイアウト装置、画像レイアウト方法、及びプログラム | |
| JP4029636B2 (ja) | オブジェクトレイアウト装置、画像レイアウト装置、オブジェクトレイアウトプログラム及び画像レイアウトプログラム、並びにオブジェクトレイアウト方法及び画像レイアウト方法 | |
| JP2007158824A (ja) | 画像処理装置、肌色調整方法及びプログラム | |
| US20010004258A1 (en) | Method, apparatus and recording medium for generating composite image | |
| JP4348956B2 (ja) | 画像レイアウト装置、画像レイアウト方法、画像レイアウト装置におけるプログラム | |
| JP2006350936A (ja) | 画像作成装置、及び画像作成用プログラム | |
| JP4052128B2 (ja) | 画像トリミング装置、画像のトリミング方法、及びプログラム | |
| JP5413143B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
| JPH09190546A (ja) | 自動画像編集装置 | |
| JP2011061860A (ja) | 画像データ処理装置、画像データセットを記録した媒体、画像データ処理プログラムを記録した媒体および画像データ処理方法 | |
| JP2001056867A (ja) | 画像データ処理装置、画像データセットを記録した媒体、画像データ処理プログラムを記録した媒体および画像データ処理方法 | |
| JP2001056867A5 (ja) | ||
| JP3719247B2 (ja) | 画像編集装置、画像のトリミング方法、及びプログラム | |
| JP6675594B2 (ja) | 画像処理システム、画像処理方法およびプログラム | |
| JP5009864B2 (ja) | 候補画像表示方法および装置ならびにプログラム | |
| JP2003348334A (ja) | 画像合成方法およびプログラム | |
| JP4725683B2 (ja) | 画像データ管理装置および画像データ管理プログラム | |
| JP4715950B2 (ja) | 画像データ処理装置、記録媒体、画像データ処理方法 | |
| JP4586932B2 (ja) | 画像データ管理装置、画像データ管理方法および画像データ管理プログラムを記録した媒体 | |
| JP2008118671A (ja) | 画像データ管理装置、画像データ管理方法および画像データ管理プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20030204 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060105 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20060106 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080924 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080930 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081201 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090113 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090316 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090407 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090608 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090630 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090713 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120731 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120731 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130731 Year of fee payment: 4 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |