JP5953285B2 - 画像処理装置、画像処理方法、プログラムおよび記録媒体 - Google Patents
画像処理装置、画像処理方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP5953285B2 JP5953285B2 JP2013233104A JP2013233104A JP5953285B2 JP 5953285 B2 JP5953285 B2 JP 5953285B2 JP 2013233104 A JP2013233104 A JP 2013233104A JP 2013233104 A JP2013233104 A JP 2013233104A JP 5953285 B2 JP5953285 B2 JP 5953285B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- processed
- original
- candidate
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 121
- 238000003672 processing method Methods 0.000 title claims description 14
- 239000002131 composite material Substances 0.000 claims description 213
- 238000001514 detection method Methods 0.000 claims description 16
- 238000012958 reprocessing Methods 0.000 claims description 14
- 230000002093 peripheral effect Effects 0.000 claims description 6
- 238000004587 chromatography analysis Methods 0.000 claims 3
- 238000000034 method Methods 0.000 description 27
- 238000012937 correction Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 241000238370 Sepia Species 0.000 description 3
- 238000005034 decoration Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012913 prioritisation Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
- Processing Or Creating Images (AREA)
Description
これに対し、近年では、例えば、SNS(ソーシャルネットワークシステム)上にアップロードされた画像等を使用して合成画像を作成することが行われている。
また、加工画像には、SNS上に画像をアップロードした時に、SNS側で画像のサイズが縮小されたもの、Exif(Exchangeable Image File Format)情報等の付帯情報(メタ情報)が削除されたもの等も含まれる。
また、画像の付帯情報が欠落している場合、付帯情報に基づいて、撮影日時の順序で画像を分類することなどができないため、ユーザの望むページやページ内の所望の位置に画像を自動レイアウトすることができず、フォトブックの価値が損なわれる場合がある。
特許文献2には、選別キーとして、選別者の「お気に入り度」を画像ごとに付加しておき、「お気に入り度」に基づいて、所定の枚数の画像を抽出して配置して、フォトアルバムを作成する画像処理方法が記載されている。
候補画像が、加工処理されていない元画像なのか、元画像を加工処理して作成された加工画像なのかを判定する加工画像判定部と、
加工画像判定部による判定結果に基づいて、候補画像に含まれる元画像の枚数が、あらかじめ設定された閾値以上なのか否かを判定する画像枚数判定部と、
元画像の枚数が閾値以上であると判定された場合に、元画像のみを合成画像の作成に使用する画像に決定し、元画像の枚数が閾値未満であると判定された場合に、元画像および加工画像を合成画像の作成に使用する画像に決定する、もしくは、合成画像の作成を中止することに決定する使用画像決定部と、
加工画像における付帯情報の有無、候補画像内の元画像における登場回数が他の人物よりも多い人物を重要人物として、加工画像における重要人物の有無、加工画像を再加工処理して作成された再加工画像の有無、および、加工画像が加工処理される前の元画像の有無の少なくとも1つに応じて、候補画像の優先順位を決定する優先順位決定部と、
使用画像決定部により決定された画像を使用して合成画像を作成する合成画像作成部とを備え、
合成画像作成部は、優先順位が高い順に、元画像および加工画像を使用して合成画像を作成するものである画像処理装置を提供するものである。
優先順位決定部は、顔認証部による人物の特定に基づいて、複数の元画像に含まれている同一人物を含む加工画像の優先順位が、複数の元画像に含まれている同一人物を含んでいない加工画像の優先順位よりも高くなるように決定するものであることが好ましい。
優先順位決定部は、顔認証部による人物の特定に基づいて、ユーザにより加工処理された加工画像に含まれる人物を含む元画像の優先順位が、ユーザにより加工処理された加工画像に含まれる人物を含まない元画像の優先順位よりも高くなるように決定するものであることが好ましい。
優先順位決定部は、さらに、加工度が低くなるに従って、加工画像の優先順位が高くなるように決定するものであることが好ましい。
優先順位決定部は、再加工画像の優先順位が、加工画像の優先順位よりも高くなるように決定するものであることが好ましい。
優先順位決定部は、元画像判定部による判定結果に基づいて、ユーザにより加工処理された加工画像に含まれる元画像の優先順位が、ユーザにより加工処理された加工画像に含まれていない元画像の優先順位よりも高くなるように決定するものであることが好ましい。
また、本発明は、合成画像の作成に使用する候補画像を取得する候補画像取得部と、
候補画像の付帯情報の有無、候補画像における画像の境界、または、候補画像の彩度の値に応じて、候補画像が、加工処理されていない元画像なのか、元画像を加工処理して作成された加工画像なのかを判定する加工画像判定部と、
加工画像判定部による判定結果に基づいて、候補画像に含まれる元画像の枚数が、あらかじめ設定された閾値以上なのか否かを判定する画像枚数判定部と、
元画像の枚数が閾値以上であると判定された場合に、元画像のみを合成画像の作成に使用する画像に決定し、元画像の枚数が閾値未満であると判定された場合に、元画像および加工画像を合成画像の作成に使用する画像に決定する、もしくは、合成画像の作成を中止することに決定する使用画像決定部とを備える画像処理装置を提供する。
合成画像作成部は、付帯情報がない候補画像を、フォトブックの同じページにまとめて配置するものであることが好ましい。
合成画像作成部は、1枚の加工画像を、フォトブックの、画像が1枚だけ配置されるページに配置するものであることが好ましい。
再加工処理部は、顔領域検出部による顔領域の検出結果に基づいて、再加工画像として、元画像にフレームが合成された加工画像、もしくは、複数の元画像が合成された加工画像に含まれる人物の顔を含む領域の画像を切り出すものであり、
合成画像作成部は、加工画像から切り出された人物の顔を含む領域の再加工画像を使用して合成画像を作成するものであることが好ましい。
合成画像作成部は、加工画像から切り出されたフレーム以外の領域の再加工画像を使用して合成画像を作成するものであることが好ましい。
合成画像作成部は、加工画像から切り出された各々の元画像の再加工画像を使用して合成画像を作成するものであることが好ましい。
さらに、ユーザが所有する複数の画像を取得する画像取得部と、
複数の画像の中から、候補画像を選択する候補画像選択部とを備え、
候補画像取得部は、候補画像選択部により選択された候補画像を取得するものであることが好ましい。
さらに、使用画像決定部により決定された画像を表示する表示部を備えることが好ましい。
候補画像が、加工処理されていない元画像なのか、元画像を加工処理して作成された加工画像なのかを、加工画像判定部が判定するステップと、
加工画像判定部による判定結果に基づいて、候補画像に含まれる元画像の枚数が、あらかじめ設定された閾値以上なのか否かを、画像枚数判定部が判定するステップと、
使用画像決定部が、元画像の枚数が閾値以上であると判定された場合に、元画像のみを合成画像の作成に使用する画像に決定し、元画像の枚数が閾値未満であると判定された場合に、元画像および加工画像を合成画像の作成に使用する画像に決定する、もしくは、合成画像の作成を中止することに決定するステップと、
優先順位決定部が、加工画像における付帯情報の有無、候補画像内の元画像における登場回数が他の人物よりも多い人物を重要人物として、加工画像における重要人物の有無、加工画像を再加工処理して作成された再加工画像の有無、および、加工画像が加工処理される前の元画像の有無の少なくとも1つに応じて、候補画像の優先順位を決定するステップと、
合成画像作成部が、使用画像決定部により決定された画像を使用して合成画像を作成するステップとを含み、
合成画像作成部は、優先順位が高い順に、元画像および加工画像を使用して合成画像を作成する画像処理方法を提供する。
また、本発明は、候補画像取得部が、合成画像の作成に使用する候補画像を取得するステップと、
加工画像判定部が、候補画像の付帯情報の有無、候補画像における画像の境界、または、候補画像の彩度の値に応じて、候補画像が、加工処理されていない元画像なのか、元画像を加工処理して作成された加工画像なのかを判定するステップと、
加工画像判定部による判定結果に基づいて、候補画像に含まれる元画像の枚数が、あらかじめ設定された閾値以上なのか否かを、画像枚数判定部が判定するステップと、
使用画像決定部が、元画像の枚数が閾値以上であると判定された場合に、元画像のみを合成画像の作成に使用する画像に決定し、元画像の枚数が閾値未満であると判定された場合に、元画像および加工画像を合成画像の作成に使用する画像に決定する、もしくは、合成画像の作成を中止することに決定するステップとを含む画像処理方法を提供する。
候補画像選択部が、複数の画像の中から、候補画像を選択するステップとを含み、
候補画像取得部は、候補画像選択部により選択された候補画像を取得することが好ましい。
これにより、本発明によれば、合成画像の作成に適していない加工画像を極力使用することなく、合成画像の作成に使用する画像を決定し、決定した画像を使用して合成画像を作成することができる。
また、候補画像の優先順位を決定することにより、優先順位が高い順に、合成画像の作成に適した候補画像を使用して合成画像を作成することができる。
画像処理装置10は、画像取得部12により取得された複数の画像を記憶する画像記憶部を備えていてもよい。
ユーザの指示は、例えば、画像処理装置10が備える、図示していない指示入力部を介して、あるいは、ユーザが所有するPC(パーソナルコンピュータ)、タブレット、携帯端末等の端末装置が備える、キーボード、マウス、タッチパネル等の指示入力部を介して入力され、指示取得部14により取得される。
本実施形態のように、ユーザが、自分が所有する複数の画像の中から、合成画像の作成に使用する画像群を指定する指示を入力した場合、候補画像選択部16は、指示取得部14により取得された指示に従って、複数の画像の中から、ユーザが指定した画像群を候補画像として選択する。
あるいは、候補画像選択部16は、例えば、ユーザがSNS上にアップロードした画像群から、あらかじめ設定された基準(アルバム内の画像、一定期間内の画像等)に基づいて、候補画像を自動的に決定することもできる。
(1)候補画像の付帯情報の有無を確認し、付帯情報がない候補画像を、付帯情報なし画像(元画像の付帯情報が削除された加工画像)であると判定する。
(2)候補画像における画像の境界を検出し、周辺部に沿って画像の境界がある候補画像を、フレーム合成画像(元画像にフレームが合成された加工画像)であると判定する。
(3)候補画像における画像の境界を検出し、周辺部から中央部へ向かう画像の境界がある、および、1枚の候補画像の中に同一人物の顔が2以上存在する、の少なくとも一方に該当する候補画像を、複数合成画像(複数の元画像が合成された加工画像)であると判定する。
(4)候補画像の彩度(色調)の値を検出し、色補正されていない標準画像と比べて彩度の値が偏っている候補画像を、セピアまたはモノクロへ等への色補正を含む各種の色補正が行われた色補正画像(元画像が色補正された加工画像)であると判定する。
ここで、閾値は、画像処理装置10が作成する合成画像の仕様に応じて決定される。例えば、合成画像としてフォトブックを作成する場合、閾値は、フォトブックの仕様、つまり、フォトブックのページ数、ページ構成(カバー、表紙、中ページ、裏表紙等の有無)、ページレイアウト(ページ内に含まれる画像数等)等に応じて決定される。合成画像として、シャッフルプリント、ポストカード等を作成する場合も同様である。
ここで、画像枚数判定部20により、元画像の枚数が閾値以上であると判定された場合、合成画像作成部22は、元画像のみを使用して合成画像を作成する。一方、元画像の枚数が閾値未満であると判定された場合、合成画像作成部22は、元画像および加工画像を使用して合成画像を作成する、もしくは、合成画像の作成を中止することができる。
この場合、使用画像決定部は、元画像の枚数が閾値以上であると判定された場合に、元画像のみを合成画像の作成に使用する画像に決定する。一方、元画像の枚数が閾値未満であると判定された場合、使用画像決定部は、元画像および加工画像を合成画像の作成に使用する画像に決定する、もしくは、合成画像の作成を中止することに決定することができる。
なお、候補画像や使用することに決定した画像を表示する際、元画像なのか加工画像なのか、また選択の際の優先度等が分かる情報を併せて表示してもよい(画像枠を変える、点滅させる、アイコンやバッジを表示する等)。
例えば、警告発生部36は、合成画像が加工画像を使用して作成される前に、加工画像を使用して合成画像を作成するか否かを確認するための警告をユーザに発することができる。これにより、ユーザの指示に従って、合成画像の作成を中止することができる。
あるいは、警告発生部36は、合成画像が加工画像を使用して作成された後に、合成画像が加工画像を使用して作成されたことを表す警告をユーザに発することができる。これにより、ユーザは、加工画像を使用して合成画像が作成されたことを認識することができる。
警告は、文字のメッセージを表示部に表示する警告、音声のメッセージをスピーカ等の音声再生部で再生する警告等を利用することができる。
ここで、加工画像がフレーム合成画像の場合、再加工処理部30は、再加工画像として、フレーム合成画像から、フレーム以外の領域の画像を切り出す。これにより、合成画像作成部22は、加工画像から切り出されたフレーム以外の領域の再加工画像を使用して合成画像を作成することができる。
加工画像が複数合成画像の場合、再加工処理部30は、再加工画像として、複数合成画像から、各々の元画像を切り出す。これにより、合成画像作成部22は、加工画像から切り出された各々の元画像の再加工画像を使用して合成画像を作成することができる。
加工画像がフレーム合成画像もしくは複数合成画像の場合、再加工処理部30は、顔領域検出部34による顔領域の検出結果に基づいて、再加工画像として、フレーム合成画像もしくは複数合成画像に含まれる人物の顔を含む領域の画像を切り出す。これにより、合成画像作成部22は、加工画像から切り出された人物の顔を含む領域の再加工画像を使用して合成画像を作成することができる。
(1)候補画像とユーザ加工画像の顔認識を行う。
顔認証部26は、候補画像に含まれる人物の顔認証を行って人物を特定し、元画像に含まれる人物とユーザ加工画像に含まれる人物とを比較し、両者の類似度に基づいて、ユーザ加工画像に含まれる人物を含む元画像の有無を判定することができる。
候補画像の中に、加工画像が加工処理される前の元画像が存在する場合、加工度算出部28は、加工画像と、その元画像との差分を検出することにより、差分に応じて、加工画像の加工度を算出することができる。
加工画像がフレーム合成画像または複数合成画像の場合、加工度算出部28は、加工画像判定部18による、加工画像における画像の境界の検出、1枚の加工画像中に同一人物の顔が2以上含まれているか否かの検出等により、画像合成の度合に応じて、加工画像の加工度を算出することができる。
加工画像が色補正画像の場合、加工度算出部28は、加工画像判定部18による、加工画像と、色補正されていない標準画像との彩度の比較により、色補正の度合に応じて、加工画像の加工度を算出することができる。
元画像判定部32は、候補画像とユーザ加工画像の付帯情報を比較することにより、両者の類似度に基づいて、ユーザ加工画像が加工処理される前の元画像の有無を判定することができる。
なお、元画像判定部32は、DateTime(日時)タグやSoftware(加工処理に使用したソフトウェアの名称)タグ等のように、加工処理時に変更される可能性がある情報を除外して比較する。
元画像判定部32は、顔領域検出部34により検出された、候補画像に含まれる人物の顔領域に基づいて、候補画像から検出された顔領域の画像とユーザ加工画像から検出された顔領域の画像とを比較することにより、両者の類似度に基づいて、ユーザ加工画像が加工処理される前の元画像の有無を判定することができる。
ここで、元画像判定部32は、顔領域検出部34により検出された顔領域が、加工処理により拡縮、回転されている場合には、ユーザ加工画像に含まれる人物の顔領域に合わせて拡縮、回転した後、両者を比較することが望ましい。
この場合、顔領域検出部34により、図3(B)に示すように、元画像に含まれる一人の人物の顔領域が検出され、同様に、図4(B)に示すように、ユーザ加工画像の3枚の元画像に含まれる5人の人物の顔領域が検出されたとする。
元画像判定部32は、顔領域検出部34により検出された、元画像に含まれる一人の人物の顔領域の画像と、ユーザ加工画像に含まれる5人の人物の顔領域の画像とを比較することにより、元画像に含まれる一人の人物の顔領域の画像と、ユーザ加工画像に含まれる5人の人物のうちの、図4(B)の最も右側に示す人物の顔領域の画像との類似度が高いことから、図3(A)に示す画像が、図4(A)に示すユーザ加工画像が加工処理される前の元画像であると判定する。
優先順位決定部24が、合成画像の作成に使用される候補画像の優先順位を決定する場合、合成画像作成部22は、優先順位が高い順に、元画像および加工画像を使用して合成画像を作成する。
ここで、重要人物は、候補画像内の、より多くの元画像(非加工画像)に含まれている人物(元画像における登場回数が多い人物)である。より多くの元画像に含まれている人物ほど重要度が高い重要人物である。
なお、色補正画像の中でも、色補正の度合に応じて優先順位を決定することができる。例えば、彩度が少しだけ補正された加工画像の優先順位が、「セピア」や「モノクロ」への色補正のように、彩度が大きく補正された加工画像の優先順位よりも高くなるように決定することができる。
例えば、付帯情報がある候補画像を、フォトブックの先頭のページから時系列順に配置し、付帯情報がない加工画像を、付帯情報がある候補画像を配置した後のページから、加工画像のファイルタイムスタンプ順に配置する。
このように、フレーム合成画像からフレーム以外の領域の再加工画像を切り出すことにより、再加工画像を元画像と同様に使用して合成画像を作成することができる。
このように、1枚の加工画像を、画像が1枚だけ配置されるページにそのまま配置することにより、他の画像と混在して配置されることがないため、違和感なく、かつ、フォトブックのデザインを損ねることなく、加工画像を使用することができる。
このように、加工画像を縮小して使用して合成画像を作成することにより、加工画像をなるべく目立たないように使用することができるため、違和感なく、かつ、合成画像のデザインを損ねることなく、加工画像を使用することができる。
例えば、画像が1枚だけ配置されるフォトブックのページがなく、かつ、加工画像が1枚だけしかない場合、合成画像作成部22は、加工画像を合成画像の作成に使用しない。
このように、優先順位決定部24は、再加工画像の有無に応じて、加工画像の優先順位を変更することができる。
(1)優先順位の高い元画像をページ内に大きく配置する。
(2)優先順位の高い元画像をページの中央に配置する。
(3)優先順位の高い元画像にフォトブックのテーマに合った加工処理(装飾)を施す。
(4)優先順位の高い元画像をカバーや表紙などの特別なページに配置する。
(1)同一人物を含む元画像をページ内に大きく配置する。
(2)同一人物を含む元画像をページの中央に配置する。
(3)同一人物を含む元画像にフォトブックのテーマに合った加工(装飾)を施す。
(4)同一人物を含む元画像をカバーや表紙などの特別なページに配置する。
(5)同一人物を含む元画像をフォトブックに多めに使用する。
(6)同一人物を含んでいない元画像をフォトブックに使用しない。
続いて、候補画像選択部16により、複数の画像の中から、合成画像の作成に使用する候補画像が選択される(ステップS2)。
続いて、加工画像判定部18により、候補画像が、元画像なのか、加工画像なのかの判定が行われる(ステップS3)。
続いて、画像枚数判定部20により、加工画像判定部18による判定結果に基づいて、候補画像に含まれる元画像の枚数が、あらかじめ設定された閾値以上なのか否かの判定が行われる(ステップS4)。
ここで、元画像の枚数が閾値以上であると判定された場合(ステップS5で「YES」)、合成画像作成部22により、元画像のみを使用して合成画像が作成される(ステップS6)。一方、元画像の枚数が閾値未満であると判定された場合(ステップS5で「NO」)、合成画像作成部22により、元画像および加工画像を使用して合成画像が作成される、もしくは、合成画像の作成が中止される(ステップS7)。
これにより、画像処理装置10では、合成画像の作成に適していない加工画像を極力使用することなく、合成画像の作成に使用する画像を決定し、決定した画像を使用して合成画像を作成することができる。
また、前述のように、候補画像の優先順位を決定することにより、優先順位が高い順に、合成画像の作成に適した候補画像を使用して合成画像を作成することができる。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
12 画像取得部
14 指示取得部
16 候補画像選択部
18 加工画像判定部
20 画像枚数判定部
22 合成画像作成部
24 優先順位決定部
26 顔認証部
28 加工度算出部
30 再加工処理部
32 元画像判定部
34 顔領域検出部
36 警告発生部
Claims (31)
- 合成画像の作成に使用する候補画像を取得する候補画像取得部と、
前記候補画像が、加工処理されていない元画像なのか、前記元画像を加工処理して作成された加工画像なのかを判定する加工画像判定部と、
前記加工画像判定部による判定結果に基づいて、前記候補画像に含まれる前記元画像の枚数が、あらかじめ設定された閾値以上なのか否かを判定する画像枚数判定部と、
前記元画像の枚数が前記閾値以上であると判定された場合に、前記元画像のみを前記合成画像の作成に使用する画像に決定し、前記元画像の枚数が前記閾値未満であると判定された場合に、前記元画像および前記加工画像を前記合成画像の作成に使用する画像に決定する、もしくは、前記合成画像の作成を中止することに決定する使用画像決定部と、
前記加工画像における付帯情報の有無、前記候補画像内の元画像における登場回数が他の人物よりも多い人物を重要人物として、前記加工画像における重要人物の有無、前記加工画像を再加工処理して作成された再加工画像の有無、および、前記加工画像が加工処理される前の元画像の有無の少なくとも1つに応じて、前記候補画像の優先順位を決定する優先順位決定部と、
前記使用画像決定部により決定された画像を使用して前記合成画像を作成する合成画像作成部とを備え、
前記合成画像作成部は、前記優先順位が高い順に、前記元画像および前記加工画像を使用して前記合成画像を作成するものである画像処理装置。 - 前記優先順位決定部は、付帯情報がある加工画像の優先順位が、前記付帯情報がない加工画像の優先順位よりも高くなるように決定するものである請求項1に記載の画像処理装置。
- 前記候補画像に含まれる人物の顔認証を行って前記人物を特定する顔認証部を備え、
前記優先順位決定部は、前記顔認証部による人物の特定に基づいて、複数の元画像に含まれている同一人物を含む加工画像の優先順位が、前記複数の元画像に含まれている同一人物を含んでいない加工画像の優先順位よりも高くなるように決定するものである請求項1または2に記載の画像処理装置。 - 前記候補画像に含まれる人物の顔認証を行って前記人物を特定する顔認証部を備え、
前記優先順位決定部は、前記顔認証部による人物の特定に基づいて、ユーザにより加工処理された加工画像に含まれる人物を含む元画像の優先順位が、前記ユーザにより加工処理された加工画像に含まれる人物を含まない元画像の優先順位よりも高くなるように決定するものである請求項1または2に記載の画像処理装置。 - 前記優先順位決定部は、前記ユーザにより加工処理された複数の加工画像に含まれる同一人物を含む元画像の優先順位が、前記ユーザにより加工処理された複数の加工画像に含まれる同一人物を含んでいない元画像の優先順位よりも高くなるように決定するものである請求項4に記載の画像処理装置。
- 前記加工画像の加工度を算出する加工度算出部を備え、
前記優先順位決定部は、さらに、前記加工度が低くなるに従って、前記加工画像の優先順位が高くなるように決定するものである請求項1〜5のいずれか一項に記載の画像処理装置。 - 前記加工画像に対して再加工処理を行って、前記元画像の領域のみを含む再加工画像を作成する再加工処理部を備え、
前記優先順位決定部は、前記再加工画像の優先順位が、前記加工画像の優先順位よりも高くなるように決定するものである請求項1〜6のいずれか一項に記載の画像処理装置。 - 前記候補画像の中に、ユーザにより加工処理された加工画像が加工処理される前の元画像があるか否かを判定する元画像判定部を備え、
前記優先順位決定部は、前記元画像判定部による判定結果に基づいて、前記ユーザにより加工処理された加工画像に含まれる元画像の優先順位が、前記ユーザにより加工処理された加工画像に含まれていない元画像の優先順位よりも高くなるように決定するものである請求項1〜7のいずれか一項に記載の画像処理装置。 - 前記優先順位決定部は、複数の加工画像に含まれる元画像の優先順位が、前記複数の加工画像に含まれていない元画像の優先順位よりも高くなるように決定するものである請求項8に記載の画像処理装置。
- 合成画像の作成に使用する候補画像を取得する候補画像取得部と、
前記候補画像の付帯情報の有無、前記候補画像における画像の境界、または、前記候補画像の彩度の値に応じて、前記候補画像が、加工処理されていない元画像なのか、前記元画像を加工処理して作成された加工画像なのかを判定する加工画像判定部と、
前記加工画像判定部による判定結果に基づいて、前記候補画像に含まれる前記元画像の枚数が、あらかじめ設定された閾値以上なのか否かを判定する画像枚数判定部と、
前記元画像の枚数が前記閾値以上であると判定された場合に、前記元画像のみを前記合成画像の作成に使用する画像に決定し、前記元画像の枚数が前記閾値未満であると判定された場合に、前記元画像および前記加工画像を前記合成画像の作成に使用する画像に決定する、もしくは、前記合成画像の作成を中止することに決定する使用画像決定部とを備える画像処理装置。 - 前記加工画像判定部は、前記候補画像の付帯情報の有無を確認し、付帯情報がない前記候補画像を前記加工画像であると判定するものである請求項1または10に記載の画像処理装置。
- 前記加工画像判定部は、前記候補画像における画像の境界を検出し、周辺部に沿って前記画像の境界がある候補画像を、前記元画像にフレームが合成された加工画像であると判定するものである請求項1〜10のいずれか一項に記載の画像処理装置。
- 前記加工画像判定部は、前記候補画像における画像の境界を検出し、周辺部から中央部へ向かう前記画像の境界がある、および、同一人物の顔が2以上存在する、の少なくとも一方に該当する候補画像を、複数の元画像が合成された加工画像であると判定するものである請求項1〜10のいずれか一項に記載の画像処理装置。
- 前記加工画像判定部は、前記候補画像の彩度の値を検出し、色補正されていない標準画像と比べて前記彩度の値が偏っている候補画像を、前記元画像が色補正された加工画像であると判定するものである請求項1〜10のいずれか一項に記載の画像処理装置。
- 前記合成画像作成部は、前記加工画像を、前記元画像よりも小さいサイズに縮小して使用して前記合成画像を作成するものである請求項1〜9のいずれか一項に記載の画像処理装置。
- 前記合成画像は、フォトブックであり、
前記合成画像作成部は、付帯情報がない候補画像を、前記フォトブックの同じページにまとめて配置するものである請求項1〜9のいずれか一項に記載の画像処理装置。 - 前記合成画像は、フォトブックであり、
前記合成画像作成部は、1枚の加工画像を、前記フォトブックの、画像が1枚だけ配置されるページに配置するものである請求項1〜9のいずれか一項に記載の画像処理装置。 - 前記候補画像に含まれる人物の顔領域を検出する顔領域検出部を備え、
前記再加工処理部は、前記顔領域検出部による顔領域の検出結果に基づいて、前記再加工画像として、前記元画像にフレームが合成された加工画像、もしくは、複数の元画像が合成された加工画像に含まれる人物の顔を含む領域の画像を切り出すものであり、
前記合成画像作成部は、前記加工画像から切り出された人物の顔を含む領域の再加工画像を使用して前記合成画像を作成するものである請求項7に記載の画像処理装置。 - 前記再加工処理部は、前記再加工画像として、前記元画像にフレームが合成された加工画像から、前記フレーム以外の領域の画像を切り出すものであり、
前記合成画像作成部は、前記加工画像から切り出されたフレーム以外の領域の再加工画像を使用して前記合成画像を作成するものである請求項7に記載の画像処理装置。 - 前記再加工処理部は、前記再加工画像として、複数の元画像が合成された加工画像から、各々の元画像を切り出すものであり、
前記合成画像作成部は、前記加工画像から切り出された各々の元画像の再加工画像を使用して前記合成画像を作成するものである請求項7に記載の画像処理装置。 - 前記合成画像が前記加工画像を使用して作成される場合に、前記合成画像が前記加工画像を使用して作成されることを表す警告をユーザに発する警告発生部を備える請求項1〜20のいずれか一項に記載の画像処理装置。
- 前記警告発生部は、前記合成画像が前記加工画像を使用して作成される前に、前記加工画像を使用して前記合成画像を作成するか否かを確認するための警告を前記ユーザに発するものである請求項21に記載の画像処理装置。
- 前記警告発生部は、前記合成画像が前記加工画像を使用して作成された後に、前記合成画像が前記加工画像を使用して作成されたことを表す警告を前記ユーザに発するものである請求項21に記載の画像処理装置。
- さらに、ユーザが所有する複数の画像を取得する画像取得部と、
前記複数の画像の中から、前記候補画像を選択する候補画像選択部とを備え、
前記候補画像取得部は、前記候補画像選択部により選択された候補画像を取得するものである請求項1〜23のいずれか一項に記載の画像処理装置。 - さらに、前記使用画像決定部により決定された画像を表示する表示部を備える請求項1〜24のいずれか一項に記載の画像処理装置。
- 候補画像取得部が、合成画像の作成に使用する候補画像を取得するステップと、
前記候補画像が、加工処理されていない元画像なのか、前記元画像を加工処理して作成された加工画像なのかを、加工画像判定部が判定するステップと、
前記加工画像判定部による判定結果に基づいて、前記候補画像に含まれる前記元画像の枚数が、あらかじめ設定された閾値以上なのか否かを、画像枚数判定部が判定するステップと、
使用画像決定部が、前記元画像の枚数が前記閾値以上であると判定された場合に、前記元画像のみを前記合成画像の作成に使用する画像に決定し、前記元画像の枚数が前記閾値未満であると判定された場合に、前記元画像および前記加工画像を前記合成画像の作成に使用する画像に決定する、もしくは、前記合成画像の作成を中止することに決定するステップと、
優先順位決定部が、前記加工画像における付帯情報の有無、前記候補画像内の元画像における登場回数が他の人物よりも多い人物を重要人物として、前記加工画像における重要人物の有無、前記加工画像を再加工処理して作成された再加工画像の有無、および、前記加工画像が加工処理される前の元画像の有無の少なくとも1つに応じて、前記候補画像の優先順位を決定するステップと、
合成画像作成部が、前記使用画像決定部により決定された画像を使用して前記合成画像を作成するステップとを含み、
前記合成画像作成部は、前記優先順位が高い順に、前記元画像および前記加工画像を使用して前記合成画像を作成する画像処理方法。 - 候補画像取得部が、合成画像の作成に使用する候補画像を取得するステップと、
加工画像判定部が、前記候補画像の付帯情報の有無、前記候補画像における画像の境界、または、前記候補画像の彩度の値に応じて、前記候補画像が、加工処理されていない元画像なのか、前記元画像を加工処理して作成された加工画像なのかを判定するステップと、
前記加工画像判定部による判定結果に基づいて、前記候補画像に含まれる前記元画像の枚数が、あらかじめ設定された閾値以上なのか否かを、画像枚数判定部が判定するステップと、
使用画像決定部が、前記元画像の枚数が前記閾値以上であると判定された場合に、前記元画像のみを前記合成画像の作成に使用する画像に決定し、前記元画像の枚数が前記閾値未満であると判定された場合に、前記元画像および前記加工画像を前記合成画像の作成に使用する画像に決定する、もしくは、前記合成画像の作成を中止することに決定するステップとを含む画像処理方法。 - さらに、画像取得部が、ユーザが所有する複数の画像を取得するステップと、
候補画像選択部が、前記複数の画像の中から、前記候補画像を選択するステップとを含み、
前記候補画像取得部は、前記候補画像選択部により選択された候補画像を取得する請求項26または27に記載の画像処理方法。 - さらに、表示部が、前記使用画像決定部により決定された画像を表示するステップを含む請求項26〜28のいずれか一項に記載の画像処理方法。
- 請求項26〜29のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラム。
- 請求項26〜29のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013233104A JP5953285B2 (ja) | 2013-11-11 | 2013-11-11 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
US14/535,794 US9600916B2 (en) | 2013-11-11 | 2014-11-07 | Image processing apparatus for creating composite images, image processing method, and non-transitory computer readable recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013233104A JP5953285B2 (ja) | 2013-11-11 | 2013-11-11 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015095711A JP2015095711A (ja) | 2015-05-18 |
JP5953285B2 true JP5953285B2 (ja) | 2016-07-20 |
Family
ID=53043871
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013233104A Active JP5953285B2 (ja) | 2013-11-11 | 2013-11-11 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9600916B2 (ja) |
JP (1) | JP5953285B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10298781B2 (en) * | 2009-03-18 | 2019-05-21 | Shutterfly, Inc. | Cloud storage for image data, image product designs, and image projects |
JP5938379B2 (ja) * | 2013-09-24 | 2016-06-22 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
JP5953285B2 (ja) * | 2013-11-11 | 2016-07-20 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
US11169661B2 (en) | 2017-05-31 | 2021-11-09 | International Business Machines Corporation | Thumbnail generation for digital images |
CN108520508B (zh) * | 2018-04-04 | 2019-02-01 | 掌阅科技股份有限公司 | 基于用户行为的用户形象优化方法、计算设备及存储介质 |
JP7250567B2 (ja) * | 2019-02-28 | 2023-04-03 | キヤノン株式会社 | 装置、方法、及びプログラム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3313399B2 (ja) * | 1991-09-20 | 2002-08-12 | 株式会社リコー | 画像処理装置 |
JP2004246868A (ja) | 2003-01-22 | 2004-09-02 | Canon Inc | 画像抽出方法及び該方法をコンピュータに実行させるプログラム |
US7656399B2 (en) * | 2004-09-03 | 2010-02-02 | Fujifilm Corporation | Displaying apparatus, a displaying method, and a machine readable medium storing thereon a computer program |
JP4408779B2 (ja) * | 2004-09-15 | 2010-02-03 | キヤノン株式会社 | 画像処理装置 |
JP2006120076A (ja) | 2004-10-25 | 2006-05-11 | Canon Inc | 画像処理方法 |
US8064675B2 (en) * | 2008-01-30 | 2011-11-22 | Carestream Health, Inc. | Computer-aided tubing detection |
JP5300387B2 (ja) * | 2008-09-12 | 2013-09-25 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP2010176459A (ja) * | 2009-01-30 | 2010-08-12 | Nikon Corp | 電子機器およびランク付けプログラム |
JP5567235B2 (ja) * | 2012-03-30 | 2014-08-06 | 富士フイルム株式会社 | 画像処理装置、撮影装置、プログラム及び画像処理方法 |
JP5953285B2 (ja) * | 2013-11-11 | 2016-07-20 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
-
2013
- 2013-11-11 JP JP2013233104A patent/JP5953285B2/ja active Active
-
2014
- 2014-11-07 US US14/535,794 patent/US9600916B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20150131925A1 (en) | 2015-05-14 |
JP2015095711A (ja) | 2015-05-18 |
US9600916B2 (en) | 2017-03-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5953285B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
JP5686673B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
US8345118B2 (en) | Image capturing apparatus, image capturing method, album creating apparatus, album creating method, album creating system and computer readable medium | |
US9721189B2 (en) | Image processing apparatus, image processing method, and recording medium | |
US10573041B2 (en) | Rear image candidate determination device, rear image candidate determination method, and rear image candidate determination program | |
JP2013033453A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP5938379B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
US10115216B2 (en) | Display control apparatus, display control method, and program | |
JP2005210573A (ja) | 映像表示システム | |
JP2009260957A (ja) | 画像作成装置および画像作成方法 | |
JP2011170892A (ja) | 画像抽出装置、画像抽出方法、及び画像抽出プログラム | |
US20110199510A1 (en) | Titling apparatus, a titling method, and a machine readable medium storing thereon a computer program for titling | |
JP2010057073A (ja) | アルバム作成装置及びアルバム作成プログラム | |
JP2011217125A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP7463473B2 (ja) | 画像候補決定装置,画像候補決定方法,ならびに画像候補決定装置を制御するプログラムおよびそのプログラムを格納した記録媒体 | |
US9832439B2 (en) | Device for determining principal facial image in photographic image, and method and program for controlling same | |
JP2011139329A (ja) | 画像処理装置、及び、画像加工プログラム | |
JP2010086221A (ja) | 画像編集方法および装置、ならびに画像編集方法を実行させるプログラムを記録したコンピュータに読取可能な記録媒体 | |
JP6197063B2 (ja) | 画像処理装置、重要人物判定方法、画像レイアウト方法ならびにプログラムおよび記録媒体 | |
JP2008140107A (ja) | 画像処理装置、画像処理方法、制御プログラム及び記録媒体 | |
US9082065B2 (en) | Image editing device, image editing method, program, and computer readable storage medium | |
JP7451242B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2006086732A (ja) | 画像処理装置及び画像処理方法 | |
JP2007166383A (ja) | デジタルカメラ及び画像合成方法並びにプログラム | |
JP2021149196A (ja) | 画像処理装置、画像処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150608 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160517 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160613 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5953285 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |