JP7443107B2 - 画像処理装置、画像処理方法、及びプログラム - Google Patents
画像処理装置、画像処理方法、及びプログラム Download PDFInfo
- Publication number
- JP7443107B2 JP7443107B2 JP2020045618A JP2020045618A JP7443107B2 JP 7443107 B2 JP7443107 B2 JP 7443107B2 JP 2020045618 A JP2020045618 A JP 2020045618A JP 2020045618 A JP2020045618 A JP 2020045618A JP 7443107 B2 JP7443107 B2 JP 7443107B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- layout
- album
- model
- similar
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 114
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000034 method Methods 0.000 claims description 74
- 238000011156 evaluation Methods 0.000 claims description 62
- 230000008569 process Effects 0.000 claims description 59
- 238000005034 decoration Methods 0.000 claims description 47
- 238000004458 analytical method Methods 0.000 claims description 41
- 238000009966 trimming Methods 0.000 claims description 23
- 238000010191 image analysis Methods 0.000 description 44
- 230000008859 change Effects 0.000 description 43
- 238000010586 diagram Methods 0.000 description 17
- 238000004364 calculation method Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000008602 contraction Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 241000238370 Sepia Species 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/42—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/761—Proximity, similarity or dissimilarity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Databases & Information Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Human Computer Interaction (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Processing Or Creating Images (AREA)
- Editing Of Facsimile Originals (AREA)
Description
本実施形態では、画像処理装置において、アルバム作成のためのアプリケーション(以下、「アプリケーション」または単純に「アプリ」ともいう)を動作させ、該アプリケーション上で複数の写真画像が自動でレイアウトされたアルバムデータを生成する。そして、このアルバムデータを印刷することで印刷物として複数のアルバムを作成する。本実施形態では、お手本となるアルバムデータに基づいて、お手本アルバムデータに配置された画像群とは異なる画像群を用いて、お手本アルバムデータと類似するアルバムデータを作成する。より詳しく説明すると、お手本アルバムデータと同じページ数を持ち、お手本アルバムデータの各ページに配置された各お手本画像に類似する画像を、該お手本画像と同じ位置に配置したアルバムデータを作成する。これにより、多数の撮影画像の中から画像を選択したり、レイアウトを決定したり、テンプレートを決定したりするような、手間がかかる作業を簡略化することができる。
図1は、本実施形態における画像処理装置のハードウェア構成を示す図である。尚、以下では、画像処理装置が情報処理装置(PC)である例を説明するが、画像処理装置として、スマートフォン等の他の装置を採用してもよい。
図2は、本実施形態における画像処理装置のソフトウェア構成、言い換えると、画像処理装置にインストールされているアルバム作成アプリケーションにより実現される機能構成を示す図である。アルバム作成アプリケーションは、ディスプレイ105に表示されているアプリケーションのアイコンがユーザによりマウス107を使ってダブルクリックされることにより起動する。アルバム作成アプリケーションは様々な機能を有するが、以下では主に、自動レイアウト処理部201により提供される自動レイアウト機能を説明する。
図5は、本実施形態におけるアルバム作成アプリケーションのGUI画面を示す図である。図5は、起動したアルバム作成アプリケーションによって提供され、ディスプレイ105に表示されるGUI画面501を示している。ユーザは、GUI画面501を介して、アルバムの作成条件を設定することができる。
以下、本実施形態における自動レイアウト処理について、図6を用いて説明する。図6(a)は、本実施形態に係るアルバム作成アプリケーションの自動レイアウトを実行する処理のフローチャートである。尚、図6に示すフローチャートは、例えば、CPU101がHDD104に記憶されたプログラムをROM102またはRAM103に読み出して実行することにより実現される。
図8は、レイアウト作成部208の詳細を説明するブロック図である。レイアウト作成部208は、見開きレイアウト作成部802、レイアウト評価部804、処理変更部805、および見開きレイアウト更新部812を含む。処理変更部805は、画像シフト設定部806、シフト画像配置部807、画像倍率設定部808、変倍画像配置部809、画像再選択部810、および再選択画像配置部811を含む。
第1実施形態では、スロットに類似画像を配置した場合に、画像の変倍率を変更したり、画像をシフトさせたり、配置する画像自体を変更したりすることで、レイアウト時の処理変更を行う例を説明した。本実施形態では、お手本テンプレートのスロットに装飾加工が施されている場合において、所望の出来栄えのレイアウトが作成されない場合に、装飾加工を変更する処理を行う例を説明する。
実施形態2では、お手本テンプレートに従って加工を実施した場合のレイアウトを評価し、評価結果に基づいて対応する処理を変更する処理変更を実施する例を説明したが、これに限られない。例えば、お手本テンプレートに従って実施される加工を行わないように処理を変更してもよい。
208 レイアウト作成部
804 レイアウト評価部
805 処理変更部
Claims (18)
- コンピュータを、
お手本となるお手本アルバムのアルバムデータと、前記お手本アルバムに配置されているお手本画像の解析情報と、アルバム作成に用いる候補画像群と、前記候補画像群の各候補画像の解析情報と、を取得する取得手段と、
前記お手本画像に類似する類似画像を、前記解析情報に基づいて前記候補画像群の中から選択する選択手段と、
前記アルバムデータに含まれるテンプレートに従って、前記類似画像を、当該類似画像に対応するお手本画像が配置されているスロットに配置することでレイアウトを作成する作成手段と、
前記作成されたレイアウトを評価する評価手段と、
前記評価手段による評価結果に基づいて、前記類似画像が前記スロットに配置された場合に行われる加工処理の内容を変更する変更手段と、
として機能させるためのプログラム。 - 前記評価手段は、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えかを評価し、
前記変更手段は、前記評価結果が、前記アルバムに適した出来栄えではないことを示す場合、前記加工処理の内容を変更することを特徴とする請求項1に記載のプログラム。 - 前記評価手段は、前記作成されたレイアウトにおいて、前記類似画像の主要被写体の領域が欠損する場合、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えではないと評価することを特徴とする請求項2に記載のプログラム。
- 前記加工処理の内容は、トリミングを含み、
前記変更手段は、前記トリミングによって主要被写体の領域が欠損しないように、前記作成されたレイアウトにおいて配置される前記類似画像をシフトさせることを特徴とする請求項3に記載のプログラム。 - 前記評価手段は、前記作成されたレイアウトにおいて、前記類似画像の解像度が所定値に満たない場合、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えではないと評価することを特徴とする請求項2乃至4のいずれか一項に記載のプログラム。
- 前記所定値は、前記類似画像が配置されるスロットに配置されている前記お手本画像に少なくとも基づいて決定されることを特徴とする請求項5に記載のプログラム。
- 前記加工処理の内容は、前記類似画像の変倍処理を含み、
前記変更手段は、前記所定値以上の解像度となるように前記類似画像を変倍して前記スロットに配置することを特徴とする請求項5または6に記載のプログラム。 - 前記評価手段は、前記作成されたレイアウトにおいて、前記類似画像の主要被写体の領域が他の第二スロットに遮蔽される場合、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えではないと評価することを特徴とする請求項2乃至7のいずれか一項に記載のプログラム。
- 前記加工処理の内容は、第一スロットの上に第二スロットを重ねて配置するレイヤー加工を含み、
前記変更手段は、前記第二スロットによって主要被写体の領域が遮蔽されないように、前記候補画像の中から、第一スロットに配置する他の類似画像を選択することを特徴とする請求項8に記載のプログラム。 - 前記評価手段は、前記作成されたレイアウトにおいて、前記類似画像の主要被写体の領域が、綴じ部と重なる場合、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えではないと評価することを特徴とする請求項2乃至9のいずれか一項に記載のプログラム。
- 前記変更手段は、前記主要被写体の領域が前記アルバムの綴じ部と重ならないように、前記候補画像の中から、前記スロットに配置する他の類似画像を選択することを特徴とする請求項10に記載のプログラム。
- 前記評価手段は、前記作成されたレイアウトにおいて、前記類似画像の主要被写体の領域が、当該類似画像が配置されるスロットに施されるフレーム装飾と重なる場合、前記作成されたレイアウトの出来栄えが、アルバムに適した出来栄えではないと評価することを特徴とする請求項2乃至11のいずれか一項に記載のプログラム。
- 前記加工処理の内容は、スロットにフレーム装飾を施すことを含み、
前記変更手段は、異なる種類のフレーム装飾を施したレイアウトを作成することを特徴とする請求項12に記載のプログラム。 - 前記変更手段は、異なる種類のフレーム装飾を施したレイアウトをそれぞれ作成し、作成したレイアウトと前記お手本画像が配置されているお手本のテンプレートとの類似度が最も高いレイアウトを、変更後のレイアウトとして決定することを特徴とする請求項13に記載のプログラム。
- 前記作成手段は、前記変更手段によって前記加工処理の内容が変更された場合、変更後の内容に従ってレイアウトを再作成することを特徴とする請求項1乃至14のいずれか一項に記載のプログラム。
- 前記コンピュータを、
前記再作成されたレイアウト、または、前記作成手段で作成されたレイアウトでアルバムの各見開きが構成されるアルバムデータを出力する出力手段としてさらに機能させることを特徴とする請求項15に記載のプログラム。 - お手本となるお手本アルバムのアルバムデータと、前記お手本アルバムに配置されているお手本画像の解析情報と、アルバム作成に用いる候補画像群と、前記候補画像群の各候補画像の解析情報と、を取得する取得手段と、
前記お手本画像に類似する類似画像を、前記解析情報に基づいて前記候補画像群の中から選択する選択手段と、
前記アルバムデータに含まれるテンプレートに従って、前記類似画像を、当該類似画像に対応するお手本画像が配置されているスロットに配置することでレイアウトを作成する作成手段と、
前記作成されたレイアウトを評価する評価手段と、
前記評価手段による評価結果に基づいて、前記類似画像が前記スロットに配置された場合に行われる加工処理の内容を変更する変更手段と、
を有することを特徴とする画像処理装置。 - お手本となるお手本アルバムのアルバムデータと、前記お手本アルバムに配置されているお手本画像の解析情報と、アルバム作成に用いる候補画像群と、前記候補画像群の各候補画像の解析情報と、を取得する取得工程と、
前記お手本画像に類似する類似画像を、前記解析情報に基づいて前記候補画像群の中から選択する選択工程と、
前記アルバムデータに含まれるテンプレートに従って、前記類似画像を、当該類似画像に対応するお手本画像が配置されているスロットに配置することでレイアウトを作成する作成工程と、
前記作成されたレイアウトを評価する評価工程と、
前記評価工程による評価結果に基づいて、前記類似画像が前記スロットに配置された場合に行われる加工処理の内容を変更する変更工程と、
を有することを特徴とする画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020045618A JP7443107B2 (ja) | 2020-03-16 | 2020-03-16 | 画像処理装置、画像処理方法、及びプログラム |
US17/191,767 US11978133B2 (en) | 2020-03-16 | 2021-03-04 | Image processing apparatus, image processing method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020045618A JP7443107B2 (ja) | 2020-03-16 | 2020-03-16 | 画像処理装置、画像処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021149193A JP2021149193A (ja) | 2021-09-27 |
JP7443107B2 true JP7443107B2 (ja) | 2024-03-05 |
Family
ID=77664815
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020045618A Active JP7443107B2 (ja) | 2020-03-16 | 2020-03-16 | 画像処理装置、画像処理方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11978133B2 (ja) |
JP (1) | JP7443107B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005184789A (ja) | 2003-11-27 | 2005-07-07 | Fuji Photo Film Co Ltd | 画像編集装置および方法並びにプログラム |
JP2012221005A (ja) | 2011-04-04 | 2012-11-12 | Canon Inc | 画像処理装置、画像処理装置におけるフォトブック作成方法およびプログラム |
WO2020066291A1 (ja) | 2018-09-25 | 2020-04-02 | 富士フイルム株式会社 | 画像処理装置,画像処理方法および画像処理プログラム |
WO2020195188A1 (ja) | 2019-03-26 | 2020-10-01 | 富士フイルム株式会社 | 画像処理装置,画像処理方法および画像処理プログラム |
JP2021144618A (ja) | 2020-03-13 | 2021-09-24 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10567598B2 (en) * | 2016-11-24 | 2020-02-18 | Canon Kabushiki Kaisha | Information processing apparatus and method of controlling the same |
JP7128665B2 (ja) | 2018-06-11 | 2022-08-31 | 富士フイルム株式会社 | 画像処理装置,画像処理方法ならびに画像処理プログラムおよびそのプログラムを格納した記録媒体 |
US11003939B2 (en) | 2018-07-06 | 2021-05-11 | Canon Kabushiki Kaisha | Information processing apparatus, information processing method, and storage medium |
-
2020
- 2020-03-16 JP JP2020045618A patent/JP7443107B2/ja active Active
-
2021
- 2021-03-04 US US17/191,767 patent/US11978133B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005184789A (ja) | 2003-11-27 | 2005-07-07 | Fuji Photo Film Co Ltd | 画像編集装置および方法並びにプログラム |
JP2012221005A (ja) | 2011-04-04 | 2012-11-12 | Canon Inc | 画像処理装置、画像処理装置におけるフォトブック作成方法およびプログラム |
WO2020066291A1 (ja) | 2018-09-25 | 2020-04-02 | 富士フイルム株式会社 | 画像処理装置,画像処理方法および画像処理プログラム |
WO2020195188A1 (ja) | 2019-03-26 | 2020-10-01 | 富士フイルム株式会社 | 画像処理装置,画像処理方法および画像処理プログラム |
JP2021144618A (ja) | 2020-03-13 | 2021-09-24 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2021149193A (ja) | 2021-09-27 |
US20210287412A1 (en) | 2021-09-16 |
US11978133B2 (en) | 2024-05-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7487362B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US10958796B2 (en) | Image processing apparatus, image processing method, and storage medium | |
JP7286392B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6902886B2 (ja) | 画像処理装置、方法およびプログラム | |
JP5686673B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP7286393B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7341676B2 (ja) | 装置、方法、及びプログラム | |
US9299177B2 (en) | Apparatus, method and non-transitory computer-readable medium using layout similarity | |
JP7341677B2 (ja) | 装置、方法、及びプログラム | |
JP7336211B2 (ja) | 画像処理装置、制御方法、及びプログラム | |
JP2022123210A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム | |
JP2022123209A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2022123213A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム | |
JP2007317077A (ja) | 画像分類装置および方法ならびにプログラム | |
JP2022123211A (ja) | プログラム、画像処理装置、及び画像処理方法 | |
JP2022123212A (ja) | プログラム、画像処理装置、及び画像処理方法 | |
JP6681192B2 (ja) | 画像処理装置、画像処理方法、及びコンピュータプログラム | |
JP7336209B2 (ja) | 画像処理装置、制御方法、及びプログラム | |
JP7027101B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
JP7443107B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2018124776A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP7451242B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US11979523B2 (en) | Storage medium, image processing method, and image processing apparatus | |
JP2021149196A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7446876B2 (ja) | プログラム、画像処理方法、及び画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230307 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240115 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240123 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240221 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7443107 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |