JP2021015345A - 情報処理装置、情報処理方法、プログラム、および表示制御装置 - Google Patents

Abstract

【課題】ユーザが望む構図でトリミングした画像を生成すること。【解決手段】アルバム作成アプリケーションは、トリミングを行う画像データと画像データを配置するスロットを含むテンプレートとを表示し、入力装置１０７を用いてスロットとそのスロットに配置する画像データを選択する。スロットに配置する画像における注目点の位置情報を取得する。注目点が指定された画像に適用する構図パターンをユーザに提示し、それらの中からユーザが選択した適用する構図パターンを取得する。注目点と、ステップＳ２０４で選択された構図パターンとに基づきトリミングを行う。トリミングされた画像を列挙し、トリミング案として複数のトリミングされた画像をユーザに提示する。提示したトリミング案から、ユーザが選択したトリミング画像を取得する。【選択図】図２

Description

本開示の技術は、デジタルカメラなどで撮影された画像を自動で特定の構図にトリミングするための情報処理技術に関する。

従来、画像を所定のスロットに適合するよう自動でトリミングを行い、その結果を複数提示することで、ユーザが好みのトリミングを選択できる方法がある（特許文献１参照）。

特開２０１０−１６０７９０号公報

しかしながら、従来の自動で所定のスロットに適合させるトリミングの方法では、トリミングされる領域が「人物周辺」など一律の決定方法により決められ、必ずしもユーザが望む領域がトリミングされないという課題がある。

そこで本開示の技術は、ユーザが望む構図でトリミングした画像を生成することを目的とする。

本開示の技術は、コンピュータを、画像における注目点の位置を指定する第１の指定手段と、所定の複数の構図パターンから、前記画像に対するトリミングに用いられる構図パターンを選択する第１の選択手段と、指定された前記注目点の位置が、選択された前記構図パターンに適合するように前記画像がトリミングされた少なくとも１つのトリミング案を表示手段に表示させる表示制御手段と、を備える装置として機能させることを特徴とするプログラムである。

ユーザが望む構図でトリミングした画像を生成することができる。

実施形態に係る情報処理装置のシステム構成図である。 実施形態において、三分割構図の処理を説明するフローチャート図である。 実施形態において、注目点を指定する具体例を示すＵＩ図である。 実施形態において、構図パターンを選択する具体例を示すＵＩ図である。 実施形態において、三分割構図を適用した具体例を示す説明図である。 実施形態において、三分割構図を適用する方法の説明図である。 実施形態において、三分割構図を適用する方法を説明するフローチャート図である。 実施形態において、三分割構図を適用した具体例を示す説明図である。 実施形態において、三分割構図を適用する方法の説明図である。 実施形態において、日の丸構図を適用した具体例を示す説明図である。 実施形態において、日の丸構図を適用する方法の説明図である。 実施形態において、日の丸構図を適用する方法を説明するフローチャート図である。 実施形態において、日の丸構図を適用する方法の説明図である。 実施形態において、トリミング案を提示する具体例を示すＵＩ図である。 実施形態において、スコアリングの具体例を示す表である。 実施形態において、トリミング案を適用した具体例を示す説明図である。 実施形態において、複数注目点の処理を説明するフローチャート図である。 実施形態において、複数注目点の処理を説明する表である。 実施形態において、複数注目点の処理を説明する説明図である。 実施形態において、複数注目点の処理を説明するフローチャート図である。 実施形態において、包含面を用いた処理を説明するフローチャート図である。 実施形態において、包含面を用いた処理を説明する説明図である。 実施形態において、包含面を用いた処理を説明するフローチャート図である。 実施形態において、包含面を用いた処理を説明する説明図である。

以下、添付図面を参照して本開示の技術の好適な実施の形態を詳しく説明する。尚、以下の実施の形態は特許請求の範囲に係る本開示の技術を限定するものでなく、また本実施の形態で説明されている特徴の組み合わせの全てが本開示の技術の解決手段に必須のものとは限らない。

＜実施形態１＞
図１に、本実施形態に係る印刷システム１００の構成図を示す。まず図１を用いて、本開示の技術において用いる情報処理装置１０４の構成について説明する。

情報処理装置１０４は、ＲＯＭ１０９、ＲＡＭ１１０、ＣＰＵ１１１を備える。また、プリンタ１０５、モニタ１０６、入力装置１０７、記憶装置１０８等の外部装置、及びネットワーク１０３と接続するための入出力インターフェース（不図示）を備える。

ＣＰＵ１１１は、中央演算装置であり、記憶装置１０８やＲＯＭ１０９、ＲＡＭ１１０に記憶されているオペレーションシステムプログラム（以下、ＯＳと略す）を実行することにより情報処理装置１０４全体の制御を行う。また、ＣＰＵ１１１は、ＲＯＭ１０９やＲＡＭ１１０に記憶されているプログラムを実行することによって、入力されたデータに基づき演算を行い、データを加工して出力したり、各ハードを制御したりして、情報処理装置１０４の各機能を実現する。ＲＯＭ１０９は読み出し専用メモリであり、各プログラムが格納されている。ＲＡＭ１１０は、ランダムアクセスメモリであり、ＣＰＵ１１１のワークメモリとして使用されるが、不揮発性のＲＡＭであれば各プログラムを格納することもできる。

情報処理装置１０４は、ＲＯＭ１０９等に格納されたアルバム作成アプリケーション５０を備えており、アルバム作成アプリケーション５０により画像データの画像が配置されたアルバムに対応するアルバムデータを生成することができる。また情報処理装置１０４は、生成したアルバムデータを印刷データとしてプリンタ１０５に出力することや、ネットワーク１０３を介して外部サーバ１０２にアップロードすることが可能である。なお本開示では、アルバムには、フォトアルバムやフォトブックが含まれる。

ネットワーク１０３は、情報処理装置１０４、外部サーバ１０２と接続されており、接続されているそれぞれの情報の伝達を行うための通信網である。

外部サーバ１０２は、プリンタ１０１と接続するための入出力インターフェース（不図示）を有しており、入出力インターフェースを介してプリンタ１０１が接続されている。

情報処理装置１０４で作成されたアルバムデータは、ネットワーク１０３を介して外部サーバ１０２にアップロードされる。外部サーバ１０２では、アップロードされたアルバムデータが印刷可能であれば、プリンタ１０１に出力する。例えば、外部サーバ１０２はアルバム受注・管理サーバであり、ユーザにより情報処理装置１０４で作成したアルバムデータがアップロードされ、必要なアルバム購入手続きが取られると、プリンタ１０１を用いて出力する。その後、出力された印刷物は製本され、ユーザの手元に届けられる。

プリンタ１０５は、情報処理装置１０４から直接印刷するためのプリンタである。アルバムは、ユーザが所有し、情報処理装置１０４に接続されたプリンタ１０５で印刷し、ユーザが製本し、アルバムに仕上げてもよい。

モニタ１０６は、情報処理装置１０４により表示制御され、情報処理装置１０４から出力された画像情報を表示する表示装置である。

入力装置１０７は、ユーザが情報処理装置１０４に入力を行うためのキーボードやポインティングデバイス等の入力装置である。入力装置１０７には、モニタと一体となっており、モニタに直接触れ入力する構成の装置もある。

記憶装置１０８は、画像データや、画像を配置するための画像配置枠（スロット）を有するテンプレート等を保存するＨＤＤやＳＳＤ等の記憶装置である。

なお、図１に示すブロック図では、情報処理装置１０４は、モニタ１０６、入力装置１０７、及び記憶装置１０８と別の構成物として記載されている。しかし、情報処理装置１０４は、モニタ１０６、入力装置１０７、記憶装置１０８（情報処理装置のＲＡＭと共有となる場合もある）が情報処理装置１０４の構成物として情報処理装置１０４と一体化されているものであってもよい。

次に、図２に、本実施形態におけるトリミング案を提示する処理のフローチャートを示す。

Ｓ２０１において、アルバム作成アプリケーション５０が、トリミングを行う画像データと画像データを配置するスロットを含むテンプレートとをユーザが選択可能に表示する。そしてアルバム作成アプリケーション５０は、ユーザが入力装置１０７を用いてスロットとそのスロットに配置する画像データを選択する。

Ｓ２０２において、アルバム作成アプリケーション５０が、スロットに配置する画像における注目点の位置情報を取得する。注目点はトリミングを行う上で主対象の中心を示す点で、主対象としたい人物の顔の中心や、主対象としたい物の中心などを指定するものである。

図３は、本実施形態においてユーザが注目点を指定可能にするためのＵＩ画面例である。３００はアルバムを編集する画面３００を表し、３０１がアルバムのテンプレートを表している。３０２は、テンプレート３０１のスロットを表し、図３にはスロット３０２の形状に合わせて機械的に人物の全身をトリミングされた画像が配置されている様子を示している。ユーザは、スロット３０２に配置する画像を見栄え良くトリミングするために、このスロット３０２に配置する画像に対しての注目点を指定することができる。

注目点を指定可能にするため、ユーザがスロット単位で操作できるメニュー３０３において、ポインタなどを用いて注目点指定の指示を行うと、注目点指定の指示に従って注目点を設定する注目点設定画面３０４が開かれる。注目点設定画面３０４上には、スロット３０２にトリミングされて配置された画像の全体が表示される。ユーザは、ポインタ３０５で表示された画像に対して注目点を指定する。例えば、ユーザがトリミングを行う上で主対象としたい人物の顔の中心をポインタで指定すれば、人物の顔の中心が注目点となる。また、ユーザが指定する代わりに、顔認識エンジンを用いて注目点を自動で設定してもよい。例えば、顔が１つだけ検知された場合は、その顔の中心を注目点とし、顔が複数検知された場合は、その中からユーザが指定した顔の中心を注目点とするようにしてもよい。

Ｓ２０３において、アルバム作成アプリケーション５０が、注目点が指定された画像に適用する構図パターンをユーザに選択可能に提示し、それらの中からユーザが選択した適用する構図パターンを取得する。図４は、構図パターンをユーザに提示するＵＩ画面の例であり、三分割構図と日の丸構図が選択された様子を表す。所定の複数の構図パターンのうちのトリミングに使用される構図パターンは、ユーザにより選択されてもよいし、自動で選択されてもよい。例えば、予め定められた構図パターンを選択する方法や、注目点の位置を解析し、適用しやすい構図パターンを自動で選択する方法としてもよい。なお、本開示において構図パターンとは、注目点の位置とトリミングする領域の外周縁との相対的な位置関係を規定するものである。

Ｓ２０４で、アルバム作成アプリケーション５０が、Ｓ２０２で指定された注目点と、Ｓ２０４で選択された構図パターンとに基づきトリミングを行う。Ｓ２０４では、Ｓ２０２で指定された注目点と、Ｓ２０４で選択された構図パターンとに基づき、採用し得る複数のトリミング処理をそれぞれ実行する。例えば、三分割構図の場合、後述するように、注目点を配置し得るパターンが複数あり得る。Ｓ２０４では、複数あり得るトリミングをそれぞれ実行する。ここで三分割構図を用いたトリミングの具体例を説明する。三分割構図は、画面を縦に三分割する２本の補助線と画面を横に三分割する２本の補助線の交点と、中心としたい対象（人物・物）とを重ねることで適用される。本開示では、主対象の注目点と、４つの交点のうちのいずれか１つとを重ねることで、三分割構図が適用されることになる。

図５は、人物の顔の中心が注目点で、三分割構図の４つの交点のうち左下の交点と注目点とが重なった様子を表している。５００の外枠がトリミングを行う領域（以下、トリミング領域）を表し、図３のスロット３０２と同じアスペクト比で、取り得る最大面積となっている。

図６は、トリミング領域６００の位置を算出する具体例を説明するための図である。また図７は、トリミング領域の上端線、下端線、左端線、右端線の位置を求める処理のフローチャートである。

図６における６０１は注目点の位置する交点であり、三分割構図の４つの交点のうちの左下の交点（以下、単に交点）に位置している。

まずＳ７０１において、アルバム作成アプリケーション５０は、その注目点と重なっている交点（または交点と重なっている注目点）の位置を基準に、トリミング領域６００の上端線６０２の位置を求める。トリミング領域６００を最大面積にするため、画像の上端を上端線６０２の位置とする。トリミング領域を最大面積にする方法の詳細は、図９を用いて後述する。

Ｓ７０２において、アルバム作成アプリケーション５０は、交点６０１から下端線６０３の長さ６０５が、交点６０１から上端線６０２までの長さ６０４の半分の長さとなるように下端線６０３の位置を求める。これは、交点６０１が三分割構図の４つの交点のうち左下であるためである。

この時Ｓ７０３において、アルバム作成アプリケーション５０は、下端線６０３の位置が画像の下端を超えていないかを判定する。下端線６０３の位置が画像の下端を超えている場合は、Ｓ７０４に移行し、下端線６０３の位置が画像の下端を超えていない場合は、Ｓ７０６に移行する。

Ｓ７０４において、アルバム作成アプリケーション５０は、画像の下端を下端線６０３の位置とする。

Ｓ７０５において、アルバム作成アプリケーション５０は、交点から上端線６０２の長さ６０４が、交点から下端線６０３の長さ６０５までの２倍の長さとなるように上端線６０２の位置を設定する。

次に、Ｓ７０６において、アルバム作成アプリケーション５０は、トリミング領域６００の左端線６０６と右端線６０７の位置を求める。左端線６０６から右端線６０７の長さ６０９は、上端線６０２から下端線６０３までの長さ６０８とスロットのアスペクト比から求まる。例えば、長さ６０８（縦の長さに当たる）が１０００ピクセルで、スロットのアスペクト比が、縦：横＝１：２の場合、長さ６０９（横の長さに当たる）は、１０００×２÷１＝２０００と計算することができる。

なお、図６の例ではスロットのアスペクト比が１：１であり、注目点と重なる交点は三分割構図の４つの交点のうち左下であるため、算出した長さ６０９の３分の１の長さが交点から左端線６０６までの長さ６１０となる。同様に、長さ６０９の３分の２の長さが交点から右端線６０７までの長さ６１１となる。このようにして左端線６０６および右端線６０７の位置をそれぞれ設定する。

次にＳ７０７において、アルバム作成アプリケーション５０は、左端線６０６または右端線６０７の位置が画像の端を超えていないかを判定する。左端線６０６または右端線６０７の位置が画像の端を超えている場合は、Ｓ７０８に移行し、左端線６０６または右端線６０７の位置が画像の端を超えていない場合は、このフローを終了する。

左端線６０６または右端線６０７の位置が画像の端を超える場合、Ｓ７０８において、アルバム作成アプリケーション５０は、先に求めた上端線６０２と下端線６０３の位置を破棄し、右端線６０７の位置を画像の右端に設定する。

Ｓ７０９において、アルバム作成アプリケーション５０は、交点が４つのうちの左下であることから、右端線６０７の位置を画像の右端の位置とする。そして交点６０１から右端線６０７までの長さの半分の長さが、交点６０１から左端線６０６の長さとなるように左端線６０６の位置を求める。

Ｓ７１０において、アルバム作成アプリケーション５０は、Ｓ７０９で求めた左端線６０６の位置が画像の端を超えていないかを判定する。左端線６０６の位置が画像の端を超えている場合は、Ｓ７１２に移行し、左端線６０６の位置が画像の左端を超えていない場合は、Ｓ７１３に移行する。

左端線６０６の位置が画像の端を超えている場合、Ｓ７１１において、アルバム作成アプリケーション５０は、左端線６０６の位置を画像の左端に設定する。

Ｓ７１２において、アルバム作成アプリケーション５０は、交点６０１から右端線６０７の長さが交点６０１から左端線６０６の２倍の長さとなるように右端線６０７の位置を求める。

Ｓ７１３において、アルバム作成アプリケーション５０は、左端線６０６または右端線６０７の位置およびスロットのアスペクト比に基づき、上端線６０２と下端線６０３の位置を求める。

このように、図７に示す処理では、画像における注目点を、構図パターンで特定される交点のいずれかに配置した場合において、トリミング領域が最大面積となるようトリミングすることができる。

以上で求めた上端線６０２、下端線６０３、左端線６０６、右端線６０７の位置から、トリミング領域６００の位置（座標等）を取得する。なお、上記フローにおいて、上端線６０２と下端線６０３の位置決定順は入れ替え可能であり、左端線６０６と右端線６０７の位置決定順も入れ替え可能である。

図８（ａ）〜（ｃ）は、人物の顔の中心が注目点で、三分割構図の４つの交点のうち右下、左上、右上の交点と注目点が重なった様子をそれぞれ表す図である。

図８（ａ）の人物の顔の中心が注目点で、三分割構図の４つの交点のうち右下の交点と注目点が重なった様子を表す図である。８１０の外枠がトリミングを行う領域で、スロットと同じアスペクト比で、取り得る最大面積となっている。この外枠８１０の位置は、先に述べた図６を用いた具体例の一部の長さの比を変更することで、同じアルゴリズムで求めることができる。具体的には、Ｓ７１０を、交点６０１から右端線６０７までの長さ６１１の２倍の長さが、交点６０１から左端線６０６までの長さ６１０となるように左端線６０６の位置を求めるように変更すればよい。また、Ｓ７１３を、交点６０１から右端線６０７までの長さ６１１が、交点６０１から左端線６０６までの長さ６１０の半分の長さとなるように右端線６０７の位置を求めるように変更すればよい。

図８（ｂ）は、人物の顔の中心が注目点で、三分割構図の４つの交点のうち左上の交点と注目点が重なった様子を表す図である。８２０の外枠がトリミングを行う領域で、スロットと同じアスペクト比で、取り得る最大面積となっている。この外枠８２０の位置は、先に述べた図６を用いた具体例の一部の長さの比を変更することで、同じアルゴリズムで求めることができる。具体的には、Ｓ７０２を、交点６０１から上端線６０２までの長さ６０４の２倍の長さが、交点６０１から下端線６０３までの長さ６０５となるように下端線６０３の位置を求めるように変更すればよい。また、Ｓ７０５を、交点６０１から上端線６０２までの長さ６０４が、交点６０１から下端線６０３までの長さ６０５の半分の長さとなるように上端線６０２の位置を求めるように変更すればよい。

図８（ｃ）は、人物の顔の中心が注目点で、三分割構図の４つの交点のうち右上の交点と注目点が重なった様子を表す図である。８３０の外枠がトリミングを行う領域で、スロットと同じアスペクト比で、取り得る最大面積となっている。この外枠８３０の位置は、先に述べた図６を用いた具体例の一部の長さの比を変更することで、同じアルゴリズムで求めることがでる。具体的には、Ｓ７０２を、交点６０１から上端線６０２までの長さ６０４の２倍の長さが、交点６０１から下端線６０３までの長さ６０５となるように下端線６０３の位置を求めるように変更すればよい。また、Ｓ７０５を、交点６０１から上端線６０２までの長さ６０４が、交点６０１から下端線６０３までの長さ６０５の半分の長さとなるように上端線６０２の位置を求めるように変更すればよい。さらに、Ｓ７１０を、交点６０１から右端線６０７までの長さ６１１の２倍の長さが、交点６０１から左端線６０６までの長さ６１０となるように左端線６０６の位置を求めるように変更すればよい。また、Ｓ７１３を、交点６０１から右端線６０７までの長さ６１１が、交点６０１から左端線６０６までの長さ６１０の半分の長さとなるように右端線６０７の位置を求めるように変更すればよい。

図９は、三分割構図を適用した外枠の位置を算出する別の具体例を説明する図である。９０１は注目点の位置する交点であり、また、三分割構図の４つの交点のうち左下の交点（以下、交点）が位置することになる。なお、本アルゴリズムは４つの交点の何れの場合でも同様に処理できるため、以降、交点の位置は不問として説明する。最初に、仮のトリミングを行う領域９００（以下、仮のトリミング領域９００）を定める。仮のトリミング領域９００は、画像領域内に必ず収まるサイズで、例えば、交点９０１から仮のトリミング領域９００の上端までの長さを、画像の縦の長さの１０分の１とするなど、画像のサイズに対して小さい長さで上端の位置を定める。そして、残りの仮のトリミング領域９００の下端、仮のトリミング領域９００の左端、仮のトリミング領域９００の右端の位置を交点の位置、スロットのアスペクト比により、順次求める。

仮のトリミング領域９００を定めた後に、仮のトリミング領域９００の上端と画像の上端までの長さ９０２と、仮のトリミング領域９００の下端から画像の下端までの長さ９０３を求める。また、仮のトリミング領域９００の左端から画像の左端までの長さ９０４と、仮のトリミング領域９００の右端から画像の右端までの長さ９０５を求める。そして、交点９０１からの仮のトリミング領域９００の上端、下端、左端、右端までの長さの比が例えば２：１：１：２だとすると、長さ９０２の長さと、長さ９０３の半分と、長さ９０４の半分と、長さ９０５の長さとの中で最も短いものを求める。そして、その最も短い長さに合わせて、当該長さに対応する辺が移動するように、仮のトリミング領域９００の変倍が行われる。即ち、当該変倍により、各辺が画像からはみ出さないように、変倍の基準となる辺が決められる。以降、本例では最も長さが短いものは長さ９０２であり、変倍の基準となる辺が上辺だとして説明する。

仮のトリミング領域９００の上端の位置を長さ９０２の分だけ上方向に移動し、仮のトリミング領域９００の下端の位置を、注目点と重なる交点が三分割構図の４つの交点のうち左下であるため長さ９０２の半分の長さだけ下方向に移動する。この時、仮のトリミング領域９００の上端は画像の上端と同じ位置となり、仮のトリミング領域９００の下端は画像領域内となる。

次に、仮のトリミング領域９００の左端および右端を移動する長さを、長さ９０２とスロットのアスペクト比で算出する。本例の長さ９０２は縦方向の長さであるので、スロットのアスペクト比で横方向の長さを算出する。例えば長さ９０２が１００ピクセルで、スロットのアスペクト比が、縦：横＝１：１の場合、縦方向に伸びる長さは１５０ピクセルであり、また横方向に伸びる長さも１５０ピクセルとなる。注目点と重なる交点が三分割構図の４つの交点のうち左下のものであるため、仮のトリミング領域９００は仮のトリミング領域９００の左端の位置を求めた横方向に伸びる長さ（ここでは１５０ピクセル）の１／３分だけ左方向に移動する。同様に、仮のトリミング領域９００は、仮のトリミング領域９００の右端の位置を求めた横方向に伸びる長さ（１５０）の２／３分だけ右方向に移動する。この時、仮のトリミング領域９００の右端と左端は必ず画像領域内となる。以上で求めた上端、下端、左端、右端の位置から、トリミング領域の位置（座標等）を取得することができる。

次に、日の丸構図を用いたトリミングの具体例を説明する。日の丸構図は、画面の中心点を、中心としたい対象（人物・物）と重ねることで適用される。本開示では、中心としたい対象を注目点として指定するので、画面の中心点と注目点を重ねることで、日の丸構図が適用されることになる。

図１０は、人物の顔の中心が注目点で、トリミングを行う領域の中心点と注目点が重なった様子を表している。１０００の外枠がトリミングを行う領域（以下、トリミング領域）である。そのトリミング領域１０００はスロットと同じアスペクト比で、取り得る最大面積となっている。

図１１は、日の丸構図の外枠の位置を算出する具体例を説明する図である。図１２は、ここで述べた上端線、下端線、左端線、右端線の位置を求める処理のフローチャートである。１１０１が注目点の位置であり、また、日の丸構図を適用するのでトリミング領域１１００の中心点（以下、中心点）が注目点１１０１と重なるように位置することになる。

まず、注目点１１０１と重なる中心点の位置を基準に、トリミング領域１１００の上端線１１０２とトリミング領域の下端線１１０３の位置を求める。

Ｓ１２０１において、アルバム作成アプリケーション５０は、注目点１１０１と重なるトリミング領域１１００の中心点が画像の上半分の領域に位置するか否かを判定する。中心点が上半分の領域に位置する場合、Ｓ１２０２に移行し、中心点が上半分の領域に位置しない場合、Ｓ１２０４に移行する。

中心点が画像の上半分の領域内に位置する場合、Ｓ１２０２において、アルバム作成アプリケーション５０は、画像の上端を上端線１１０２の位置とする。

Ｓ１２０３において、アルバム作成アプリケーション５０は、中心点から下端線１１０３までの長さ１１０４が、中心点から上端線１１０２までの長さ１１０５と等しくなるよう下端線１１０３の位置を求める。

中心点が画像の下半分の領域内に位置する場合、Ｓ１２０４において、アルバム作成アプリケーション５０は、画像の下端を下端線１１０３の位置とする。

Ｓ１２０５において、アルバム作成アプリケーション５０は、中心点から上端線１１０２までの長さ１１０５が、中心点から下端線１１０３までの長さ１１０４と等しくなるよう上端線１１０２の位置を求める。

次に、トリミング領域１１００の左端線１１０６とトリミング領域１１００の右端線１１０７を求める。

Ｓ１２０６において、アルバム作成アプリケーション５０は、トリミング領域１１００の左端線１１０６と右端線１１０７の位置を求める。左端線１１０６から右端線１１０７の長さ１１０８は、上端線１１０２から下端線１１０３の長さ１１０９とスロットのアスペクト比から求まる。例えば、長さ１１０９（縦の長さに当たる）が１０００ピクセルで、スロットのアスペクト比が、縦：横＝１：２の場合、長さ１１０８（横の長さに当たる）は、１０００×２÷１＝２０００と計算することができる。

なお、図１１の例ではスロットのアスペクト比が１：１であり、中心点はトリミング領域１１００の中心なので、算出した長さ１１０８の半分の長さが、中心点から左端線１１０６までの長さ１１０９と、中心点から右端線１１０７までの長さ１１１０となる。そのため、左端線１１０６の位置と右端線１１０７の位置を求めることができる。このようにして左端線１１０６および右端線１１０７の位置をそれぞれ設定する。

次にＳ１２０７において、アルバム作成アプリケーション５０は、左端線１１０６または右端線１１０７の位置が画像の端を超えているかを判定する。左端線１１０６または右端線１１０７の位置が画像の端を超えている場合は、Ｓ１２０８に移行し、左端線１１０６または右端線１１０７の位置が画像の端を超えていない場合は、このフローを終了する。

左端線１１０６または右端線１１０７の位置が画像の端を超えている場合、Ｓ１２０８において、アルバム作成アプリケーション５０は、中心点が画像の左半分の領域に位置するか否かを判定する。中心点が左半分の領域に位置する場合、Ｓ１２０９に移行し、中心点が左半分の領域に位置しない場合、Ｓ１２１１に移行する。

中心点が左半分の領域に位置する場合、Ｓ１２０９において、アルバム作成アプリケーション５０は、先に求めた上端線１１０２と下端線１１０３の位置を破棄し、左端線１１０６の位置を画像の左端の位置とする。

Ｓ１２１０において、アルバム作成アプリケーション５０は、注目点１１０１が位置する中心点から右端線１１０７までの長さ１１１０が、中心点から左端線１１０６の長さ１１０９と等しくなるよう右端線１１０７の位置を求める。

中心点が左半分の領域に位置しない場合、Ｓ１２１１において、アルバム作成アプリケーション５０は、先に求めた上端線１１０２と下端線１１０３の位置を破棄し、右端線１１０７の位置を画像の右端の位置とする。

Ｓ１２１２において、アルバム作成アプリケーション５０は、注目点１１０１が位置する中心点から左端線１１０６までの長さ１１０９が、中心点から右端線１１０７の長さ１１１０と等しくなるよう左端線１１０６の位置を求める。

Ｓ１２１３において、アルバム作成アプリケーション５０は、左端線１１０６または右端線１１０７の位置およびスロットのアスペクト比に基づき、上端線１１０２と下端線１１０３の位置を求める。

以上で求めた上端線１１０２、下端線１１０３、左端線１１０６、右端線１１０７の位置から、トリミング領域の位置（座標等）を取得する。なお、上記フローにおいて、上端線１１０２と下端線１１０３の位置決定順は入れ替え可能であり、左端線１１０６と右端線１１０７の位置決定順も入れ替え可能であることは言うまでもない。

図１３は、日の丸構図の外枠の位置を算出する別の具体例を説明する図である。１８００は注目点の位置であり、また、日の丸構図の中心点１３０１（以下、中心点１３０１）が位置することになる。最初に、仮のトリミングを行う領域１３００（以下、仮のトリミング領域１３００）を定める。仮のトリミング領域１３００は、画像領域内に必ず収まるサイズで、例えば、中心点１３０１から仮のトリミング領域１３００の上端までの長さを、画像の縦の長さの１０分の１とするなど、画像のサイズに対して小さい長さで上端の位置を定める。そして、残りの仮のトリミング領域１３００の下端、仮のトリミング領域１３００の左端、仮のトリミング領域１３００の右端の位置を交点の位置、スロットのアスペクト比により、順次求める。

仮のトリミング領域１３００を定めた後に、仮のトリミング領域１３００の上端と画像の上端までの長さ１３０２と、仮のトリミング領域１３００の下端から画像の下端までの長さ１３０３を求める。また、仮のトリミング領域１３００の左端から画像の左端までの長さ１３０４と、仮のトリミング領域１３００の右端から画像の右端までの長さ１３０５を求める。そして、それらの中で最も長さが短いものを求める。このように求められた最も短い長さに対応する辺が、変倍において基準となる辺として決定される。以降、本例では最も長さが短いものは長さ１３０３として説明する。

仮のトリミング領域１３００の下端の位置を長さ１３０３の分だけ下方向に移動し、仮のトリミング領域１３００の上端の位置を長さ１３０３の分だけ上方向に移動する。この時、仮のトリミング領域１３００の下端は画像の下端と同じ位置となり、仮のトリミング領域１３００の上端は画像領域内となる。

次に、仮のトリミング領域１３００の左端、および右端を移動する長さを、長さ１３０３とスロットのアスペクト比とに基づき求める。本例の長さ１３０３は縦方向の長さであるので、スロットのアスペクト比で横方向の長さを算出する。例えば長さ１３０３が１００ピクセルで、スロットのアスペクト比が、縦：横＝１：２の場合、横方向の長さは、１００×２÷１＝２００と計算することで求めることができる。仮のトリミング領域１３００の左端の位置を求めた横方向の長さ分だけ左方向に移動し、仮のトリミング領域１３００の右端の位置を求めた横方向の長さ分だけ右方向に移動する。この時、仮のトリミング領域１３００の右端と左端は必ず画像領域内となる。以上で求めた仮のトリミング領域１３００の上端、下端、左端、右端の位置から、トリミング領域の位置（座標等）を取得することができる。

ここで図２に戻る。Ｓ２０５で、アルバム作成アプリケーション５０は、Ｓ２０４で得たトリミングされた画像を列挙し、トリミング案として複数のトリミングされた画像をユーザに提示する。図１４（ａ）、（ｂ）は、トリミング画像をユーザに提示するためのＵＩ画面の例であり、編集画面１４００上にトリミング画像の一覧画面１４０１が表示されている。それぞれのトリミングされた画像サイズが異なる場合は、見栄えが比べ易くなるよう、それぞれ解像度を調整して、全て同じサイズの枠に収めて列挙することが望ましい。また、この複数のトリミング画像を提示する際、優先度や警告を付加することでユーザによるトリミング画像の選択を補助することができる。図１４（ａ）は、トリミング画像に所定の方法でスコアを付し、スコア順にトリミング画像を列挙した様子を表し、１４０２は警告を表示する例である（スコアリングの詳細は、図１５を用いて後述する）。

Ｓ２０６において、アルバム作成アプリケーション５０は、ユーザがＳ２０５で提示されたトリミング案から１つ選択した結果に従って、トリミング画像を取得する。図１４（ｂ）は、編集画面１４００上にトリミング画像が列挙され、ユーザが好みのトリミング画像を選択する様子を表す。トリミング画像の一覧画面１４０１には、同じサイズの枠にトリミング画像が列挙され、ユーザは、ポインティングデバイス１４０３で好みのトリミング画像を選択する様子を表す。

また、Ｓ２０５で行う複数のトリミング画像の提示から、本の一連のフローは、自動で行うことができる。例えば、Ｓ２０４で取得したトリミング画像を解析し、スコアリングし、最もスコアの高いものをスロットに反映してもよい。図１５はスコアリングの例で、この場合、注目点を指定した後は自動で、スコアの最も高い案１のトリミング画像がスロット３０２に反映されることになる。

Ｓ２０７で、アルバム作成アプリケーション５０は、Ｓ２０６で選択されたトリミング画像を、スロット上に反映する。図１６は、選択されたトリミング画像が図３に示すスロット３０２に配置された様子を示す図である。

本実施形態では、ユーザは、スロットに配置する画像を選択し、注目点を指定し、トリミング案から好みの１つを選択するだけで、所望の構図で画像のトリミングを行うことができる。なお、アルバム作成アプリケーション５０は、選択された画像に対して注目点を指定し、トリミング案をユーザに提示するまでの構成を有するトリミング用のアプリケーションとしてもよい。

また、図２のフローチャートでは、Ｓ２０２で注目点を指定した後、Ｓ２０３で構図パターンを選択するとしているが、Ｓ２０２とＳ２０３の順序を入れ替えて、構図パターンを選択した後に注目点を指定するようにしてもよい。

＜実施形態２＞
本実施形態では、注目点を複数指定してトリミングを行う。ユースケースとしては、例えば、ユーザが複数の注目点を設定した場合や、顔認識エンジンが複数の顔を検知し、それぞれを注目点とした場合などである。図１７に、注目点を複数指定された場合にトリミング案を提示する処理のフローチャートを示す。

Ｓ１７０１において、アルバム作成アプリケーション５０が、トリミングを行う画像データと画像データを配置するスロットを含むテンプレートとを選択可能に表示し、入力装置１０７を用いてスロットとそのスロットに配置する画像データを選択する。

Ｓ１７０２において、アルバム作成アプリケーション５０が、スロットに配置する画像における複数の注目点の位置情報を取得する。例えば、ユーザがトリミングを行う上で主対象としたい人物の顔の中心や、物の中心を複数指定する。または、顔認識エンジンを用いて、自動で複数の顔を検知し、それぞれの顔の中心を注目点としてもよい。

Ｓ１７０３において、アルバム作成アプリケーション５０が、注目点が指定された画像に適用する構図パターンをユーザに提示し、それらの中からユーザが選択した適用する構図パターンを取得する。ここでは、実施形態１のＳ２０３で述べた方法を採ることができる。

Ｓ１７０４において、アルバム作成アプリケーション５０が、Ｓ１７０２で指定された複数の注目点と、Ｓ１７０３で選択された構図パターンとに基づきトリミングを行う。

ここで図１８に、注目点と三分割構図における交点の位置との対応関係を決める条件を示す。まず、アルバム作成アプリケーション５０は、指定された複数の注目点から、最も画像の端に近い位置にある２点を選択する。次に、三分割構図の４つの交点から２点を選択する。選択された２つの注目点間の縦の長さと横の長さを求め、それぞれの長さの比率を求める。選択された２つの注目点間の縦の長さと横の長さの比率である縦／横が１／２以上、且つ、２／１未満であれば、三分割構図における注目点と重ねる交点は、左上と右下、または左下と右上とする。２つの注目点の内、左側にある注目点が、右側にある注目点よりも上、または同じ縦の位置であれば、交点は左上と右下とし（図１８の１段目）、左側にある注目点が、右側にある注目点よりも下に位置していれば、交点は左下と右上にする（図１８の２段目）。

また、注目点間の縦の長さと横の長さの比率である縦／横が、１／２未満の場合、交点は左上と右上、または左下と右下とする。２つの注目点の縦の位置の中間位置が画像の上半分（ちょうど半分を含む）の領域内であれば、交点は左上と右上とし（図１８の３段目）、画像の下半分（ちょうど半分は含まない）の領域内であれば、交点は左下と右下とする（図１８の４段目）。

また、注目点間の縦の長さと横の長さの比率である縦／横が、２／１以上の場合、交点は左上と左下、または右上と右下とする。２つの注目点の横の位置の中間位置が画像の左半分（ちょうど半分を含む）の領域内であれば、交点は左上と左下とし（図１８の５段目）、画像の右半分（ちょうど半分は含まない）の領域内であれば、交点は右上と右下とする（図１８の６段目）。

このように、注目点を複数指定する場合、注目点が１つの場合に比べ、１つの構図パターンに対して取り得るトリミング案の数は少なくなる。

図１９（ａ）〜（ｄ）に、注目点が２つ指定された場合の三分割構図を用いたトリミングの具体例を示す。

図１９（ａ）で、三分割構図において注目点が重なる交点が左上と右下の場合の具体例を説明する。図２０は、注目点の配置が図１９（ａ）のような場合におけるトリミング領域の上端、下端、左端、右端の位置を求める処理のフローチャートである。なお、図２０に示すアルゴリズムは交点が左下と右上の場合でも同様に適用できる。

２００１において、アルバム作成アプリケーション５０が、指定された２つの注目点１９１１と１９１２との間の縦の長さ１９０３を計測する。

Ｓ２００２において、アルバム作成アプリケーション５０が、長さ１９０３に基づき、注目点１９１１からトリミング領域１９００の上端までの長さ１９０４と注目点１９１２からトリミング領域１９００の下端までの長さ１９０５とを求める。Ｓ２００１で求めた長さ１９０３は、三分割構図においてはトリミング領域１９００の縦の長さの３分の１の長さに相当する。そのため、注目点１９１１からトリミング領域１９００の上端までの長さ１９０４と注目点１９１２からトリミング領域１９００の下端までの長さ１９０５が求められるため、トリミング領域１９００の上端と下端の位置を算出できる。

Ｓ２００３において、アルバム作成アプリケーション５０が、算出したトリミング領域１９００の上端または下端が画像の端を超えていないか判定する。トリミング領域１９００の上端または下端が画像の端を超えていない場合、Ｓ２００６に移行し、トリミング領域１９００の上端または下端が画像の端を超えている場合、Ｓ２００４に移行する。

Ｓ２００４において、アルバム作成アプリケーション５０が、トリミング領域１９００の上端または下端が画像の端を超えた分の長さが、長さ１９０３の半分を超えたかを判定する。具体的には、トリミング領域１９００の上端が画像の上端を超えた長さ、またはトリミング領域１９００の下端が画像の下端を超えた長さが、長さ１９０３の半分の長さを超えたかを判定する。トリミング領域１９００の上端または下端が画像の端を超えた分の長さが、長さ１９０３の半分を超えた場合、Ｓ２０１１に移行する。トリミング領域１９００の上端または下端が画像の端を超えた分の長さが、長さ１９０３の半分を超えていない場合、Ｓ２００５に移行する。

Ｓ２００５において、アルバム作成アプリケーション５０が、トリミング領域１９００の上端は画像の上端の位置とし、トリミング領域１９００の下端が画像の下端を超える場合、トリミング領域１９００の下端は画像の下端の位置とする。これらの場合は、注目点１９１１、１９１２と三分割構図の交点が完全に重ならなくなり、それらの間にズレが生じる。このズレは、Ｓ２００４における判定対象であるトリミング領域１９００の上端または下端が画像の端を超えた分の長さのことである。このズレの長さが大きい場合は、構図パターンを適用していることにならないため、Ｓ２００４においてズレの長さが所定の範囲内に収まらない、すなわち長さ１９０３の半分の長さを超える場合に処理を中断し、トリミング案に含めないようにしている。

次にＳ２００６において、アルバム作成アプリケーション５０が、指定された２つの注目点１９１１と１９１２との間横の長さ１９０７を計測する。

Ｓ２００７において、アルバム作成アプリケーション５０が、長さ１９０７に基づき、注目点１９１１からトリミング領域１９００の左端までの長さ１９０６と注目点１９１２からトリミング領域１９００の右端までの長さ１９０８とを求める。長さ１９０７は、三分割構図においてはトリミング領域１９００の横の長さの３分の１の長さに相当する。そのため、注目点１９１１からトリミング領域１９００の左端までの長さ１９０６と注目点１９１２からトリミング領域１９００の右端までの長さ１９０８が求められるため、トリミング領域１９００の左端と右端の位置を算出できる。

Ｓ２００８において、アルバム作成アプリケーション５０が、算出したトリミング領域１９００の左端または右端が画像の端を超えていないか判定する。トリミング領域１９００の左端または右端が画像の端を超えていない場合、処理を終了し、トリミング領域１９００の左端または右端が画像の端を超えている場合、Ｓ２００９に移行する。

Ｓ２００９において、アルバム作成アプリケーション５０が、トリミング領域１９００の左端または右端が画像の端を超えた分の長さが、長さ１９０３の半分を超えたかを判定する。具体的には、トリミング領域１９００の左端が画像の左端を超えた長さ、またはトリミング領域１９００の右端が画像の右端を超えた長さが、長さ１９０３の半分の長さを超えたかを判定する。トリミング領域１９００の左端または右端が画像の端を超えた分の長さが、長さ１９０３の半分を超えた場合、Ｓ２０１１に移行する。トリミング領域１９００の左端または右端が画像の端を超えた分の長さが、長さ１９０３の半分を超えていない場合、Ｓ２０１０に移行する。

Ｓ２０１０において、アルバム作成アプリケーション５０が、トリミング領域１９００の左端が画像の左端を超える場合、トリミング領域１９００の左端は画像の左端の位置とする。一方、トリミング領域１９００の右端が画像の右端を超える場合、トリミング領域１９００の右端は画像の右端の位置とする。これらの場合は、注目点１９１１、１９１２と三分割構図の交点が完全に重ならなくなり、それらの間にズレが生じる。このズレの長さは、Ｓ２００９における判定対象であるトリミング領域１９００の左端または右端が画像の端を超えた分の長さのことである。このズレの長さが大きい場合は、構図パターンを適用していることにならないため、Ｓ２００９においてズレの長さが所定の長さ、すなわち長さ１９０３の半分の長さを超える場合に処理を中断し、トリミング案に含めないようにしている。

図１９（ｂ）で、三分割構図において注目点と重なる交点が左上と右上の場合の具体例を説明する。なお、注目点の配置が図１９（ｂ）に示すような場合には、図２０に示すフローチャートの一部を変更することで、同じアルゴリズムで求めることができ、交点が左下と右下の場合でも同様に適用できる。まず、Ｓ２００１〜Ｓ２００５における縦、上端、下端を、横、左端、右端に変更し、トリミング領域の横方向の位置、またはトリミング案に含めないことを決定する。具体的には以下の通りである。

まず、注目点１９２１から１９２２までの横の長さ１９０７を計測する。この長さ１９０７はトリミング領域１９００の横の長さの３分の１となるので、注目点１９２１からトリミング領域１９００の左端までの長さ１９０６と注目点１９２２からトリミング領域１９００の右端までの長さ１９０８が求められる。そのため、トリミング領域１９００の左端と右端の位置を算出できる。

この時、トリミング領域１９００の左端が画像の左端を超える場合、トリミング領域１９００の左端は画像の左端の位置とする。また、トリミング領域１９００の右端が画像の右端を超える場合、トリミング領域１９００の右端は画像の右端の位置とする。これらの場合は、注目点と三分割構図の交点が完全に重ならなくなり、ズレが生じる。ズレの長さが大きい場合は、構図パターンを適用していることにならないため、処理を中断し、トリミング案に含めない。具体的には、算出したトリミング領域１９００の左端が画像の左端を超えた長さ、または算出したトリミング領域１９００の右端が画像の右端を超えた長さが、長さ１９０７の半分の長さを超えた場合は処理を中断する。

次に、Ｓ２００６〜Ｓ２０１０における横、左端、右端を、縦、上端、下端に変更し、さらに、Ｓ２００６における長さを、長さ１９０７とスロットのアスペクト比に基づき求めるように変更する。トリミング領域の縦方向の位置、またはトリミング案に含めないことを決定する。具体的には以下の通りである。

例えば、長さ１９０７（横の長さに当たる）が１０００ピクセルで、スロットのアスペクト比が、縦：横＝１：２の場合、長さ１９０３は１０００×１÷２＝５００と計算することができる。長さ１９０３は、長さ１９０４と長さ１９０５と等しいため、トリミング領域の上端と下端の位置を算出できる。この時、トリミング領域の上端が画像の上端を超える場合、トリミング領域の上端は画像の上端の位置とする。また、トリミング領域の下端が画像の下端を超える場合、トリミング領域の下端は画像の下端の位置とする。これらの場合は、注目点と三分割構図の交点が完全に重ならなくなり、ズレが生じる。ズレの長さが大きい場合は、構図パターンを適用していることにならないため、処理を中断し、トリミング案に含めない。具体的には、算出したトリミング領域の上端が画像の上端を超えた長さ、または算出したトリミング領域の下端が画像の下端を超えた長さが、長さ１９０７の半分の長さを超えた場合は処理を中断する。

図１９（ｃ）で、三分割構図において注目点と重なる交点が左上と左下の場合の具体例を説明する。なお、注目点の配置が図１９（ｃ）に示すような場合には、図２０に示すフローチャートの一部を変更することで、同じアルゴリズムで求めることができ、交点が右上と右下の場合でも同様に適用できる。Ｓ２００１〜Ｓ２００５は、図２０のままで変更はなく、具体的には以下の通りである。

まず、注目点１９３１から１９３２までの縦の長さ１９０４を計測する。この長さ１９０３はトリミング領域の横の長さの３分の１となるので、注目点１９３１からトリミング領域の上端までの長さ１９０４と注目点１９３２からトリミング領域の下端までの長さ１９０５が求められる。そのため、トリミング領域１９００の上端とした端の位置を算出できる。

この時、トリミング領域１９００の上端が画像の上端を超える場合、トリミング領域１９００の上端は画像の上端の位置とする。また、トリミング領域１９００の下端が画像の下端を超える場合、トリミング領域１９００の下端は画像の下端の位置とする。これらの場合は、注目点と三分割構図の交点が完全に重ならなくなり、ズレが生じる。ズレの長さが大きい場合は、構図パターンを適用していることにならないため、処理を中断し、トリミング案に含めない。具体的には、算出したトリミング領域１９００の上端が画像の上端を超えた長さ、または算出したトリミング領域１９００の下端が画像の下端を超えた長さが、長さ１９０４の半分の長さを超えた場合は処理を中断する。

次に、Ｓ２００６における長さの計測を、長さ１９０３とスロットのアスペクト比とに基づき求めるように変更する。具体的には以下の通りである。

例えば、長さ１９０３（縦の長さに当たる）が１０００ピクセルで、スロットのアスペクト比が、縦：横＝１：２の場合、長さ１９０７は１０００×２÷１＝２０００と計算することができる。長さ１９０７は、長さ１９０６と長さ１９０８と等しいため、トリミング領域の左端と右端の位置を算出できる。この時、トリミング領域の左端が画像の左端を超える場合、トリミング領域の左端は画像の左端の位置とする。また、トリミング領域の右端が画像の右端を超える場合、トリミング領域の右端は画像の右端の位置とする。これらの場合は、注目点と三分割構図の交点が完全に重ならなくなり、ズレが生じる。ズレの長さが大きい場合は、構図パターンを適用していることにならないため、処理を中断し、トリミング案に含めない。具体的には、算出したトリミング領域の左端が画像の左端を超えた長さ、または算出したトリミング領域の右端が画像の右端を超えた長さが、長さ１９０７の半分の長さを超えた場合は処理を中断する。

次に、日の丸構図において注目点が複数指定された場合の具体例を説明する。まず、アルバム作成アプリケーション５０は、複数の注目点の中心位置を算出する。具体的には、それぞれの注目点の座標位置を取得し、それらの平均値の座標を複数注目点の中心位置とする方法がある。図１９（ｄ）で以降の処理を説明する。１９４１と１９４２はそれぞれ指定された注目点である。１９４３は、注目点１９４１と１９４２の中心位置である。以降は、中心位置を注目点として、実施形態１で図１１、図１２、図１３を用いて説明した方法と同じ方法でトリミング領域を求めることができる。

ここで図１７に戻る。以降の、Ｓ１７０５、Ｓ１７０６、Ｓ１７０７は、実施形態１で説明したＳ２０５、Ｓ２０６、Ｓ２０７と同様の処理を行う。

＜実施形態３＞
本実施形態では、トリミングの主対象を、点ではなく領域で指定する。図２１に、トリミングの対象を領域で指定された場合にトリミング案を提示する処理のフローチャートを示す。

Ｓ２１０１において、アルバム作成アプリケーション５０は、スロットに配置する画像におけるトリミング対象を含む領域についての位置情報を取得する。指定した領域を以降、包含面と呼ぶ。図２２（ａ）、（ｂ）を用いて、ユーザが包含面を指定する具体例を説明する。

図２２（ａ）において、２２００がアルバムを編集する画面を表し、２２０１がアルバムのテンプレートを表している。２２０２は、テンプレート２２０１のスロットを表し、スロット２２０２の形状に合わせて人物の全身を含む領域がトリミングされた画像が配置されている様子を表す。ユーザは、スロット２２０２に配置する画像を見栄え良くトリミングするために、このスロット２２０２に配置する画像に対しての包含面の指定を行うことができる。ユーザがスロット単位で操作できるメニュー２２０３において、ポインタなど用いて包含面指定の指示を行うと、包含面指定の指示に従って包含面を設定する包含面設定画面２２０４が開かれる。包含面設定画面２２０４上には、スロット２２０２にトリミングされて配置された画像２２０５の全体が表示される。ユーザは、ポインタ２２０６で包含面の矩形を示すことで、２２０２の画像に対しての包含面を指定する。２２０７はユーザによって示された矩形の包含面を表す。また、ユーザが指定する代わりに、包含面２２０７の設定を自動で行ってもよい。例えば、顔認識エンジンが検知した顔を全て含む領域を包含面２２０７とするようにしてもよい。

Ｓ２１０２において、アルバム作成アプリケーション５０が、包含面２２０７の領域内から注目点を１つ以上設定する。注目点の設定は、実施形態１、２で述べた方法で行うことができる。

Ｓ２１０３において、アルバム作成アプリケーション５０が、包含面を含み、構図パターンに合ったトリミングを実行する。なお、S２１０３で用いられる構図パターンは、図４に示したように、ユーザの指示により選択された構図パターンであってもよいし、予め定められた構図パターンでもよい。図２２（ｂ）で包含面２２０７を含み、三分割構図を適用する具体的な方法を説明する。２２０８は指定された注目点であり、図２２（ｂ）に示す例では三分割構図の４つの交点のうちの左上の交点上に注目点２２０８が位置する。包含面２２０７が指定されている場合、トリミング領域２２０９は、できるだけ包含面２２０７に近い面積となることが望ましい。そのため、実施形態１ではトリミング領域２２０９の下端線は画像の下端としたが、本実施形態はトリミング領域２２０９を包含面２２０７に近い面積にするため、トリミング領域２２０９の下端線は包含面２２０７の下端とする。

以降は、実施形態１で説明した方法と同様にトリミング領域２２０９を求める。トリミング領域２２０９はスロット２２０２と同じアスペクト比にする必要があるため、包含面２２０７とスロット２２０２の形状によっては包含面全体を含めることができない場合がある。例えば、縦長のスロット２２０２に対して、横長の画像上に横長の包含面２２０７が設定された場合、包含面２２０７を全て含めたトリミングを行うと、スロット２２０２のアスペクト比に合わせることができない場合がある。その場合の対処方法を以下で説明する。

第一の方法は、包含面２２０７を変更することである。具体的には、スロット２２０２のアスペクト比に合うよう、包含面２２０７の横の長さを縮めることで対処する。

第二の方法はスロット２２０２の形状を変更することである。包含面２２０７は全て含め、できるだけスロット２２０２に近いアスペクト比でトリミングを行い、スロット２２０２の形状をトリミング画像に合わせることで対処する。

以降の、Ｓ２１０４、Ｓ２１０５、Ｓ２１０６は、実施形態１で説明したＳ２０５、Ｓ２０６、Ｓ２０７と同様の処理を行う。

＜実施形態４＞
本実施形態では、トリミングを行う際に、トリミング領域に含めない領域を指定する。そのトリミング領域に含めない領域を以降、除外面と呼ぶ。図２３は、除外面を設定する場合のトリミング案を提示する処理のフローチャートである。また図２４は、除外面は含めずに、三分割構図を適用する具体的な方法を説明する図である。２４００は指定された除外面であり、２４０１は指定された注目点である。

Ｓ２３０１において、アルバム作成アプリケーション５０が、スロットに配置する画像におけるトリミングに含めない領域となる除外面２４００についての位置情報を取得する。具体的な方法は実施形態３で説明した包含面の領域についての位置情報の取得と同様である。

Ｓ２３０２において、アルバム作成アプリケーション５０が、除外面２４００の領域外から注目点２４０１を１つ以上設定する。注目点２４０１の設定は、実施形態１及び実施形態２で述べた方法で行うことができる。

Ｓ２３０３において、アルバム作成アプリケーション５０が、指定された除外面２４００は含めず、選択された構図パターンに合ったトリミングを実行する。なお、Ｓ２３０３で用いられる構図パターンは、図４に示したように、ユーザの指示により選択された構図パターンであってもよいし、予め定められた構図パターンでもよい。図２４に示す例では、三分割構図の４つの交点のうちの左上に注目点２４０１が位置する。また、今回の説明では、トリミング領域２４０２は、除外面２４００は含めずに最大面積となるようにする。実施形態１では、トリミング領域を最大化するため、トリミング領域の左端線は画像の左端としたが、本実施形態はトリミング領域を、除外面２４００を含めずに最大化するため、トリミング領域２４０２の左端線の位置は除外面２４００の右端とする。以降は、実施形態１と同様にトリミング領域２４０２を求める。

以降の、Ｓ２３０４、Ｓ２３０５、Ｓ２３０６は、実施形態１で説明したＳ２０５、Ｓ２０６、Ｓ２０７と同様の処理を行う。

なお、本開示では、三分割構図および日の丸構図を例にトリミング処理について説明したが、適用する構図における注目点が配置される位置と構図の外枠との相対的な位置関係と同様に、注目点とトリミング領域との位置関係を設定する例であればよい。そのため、三分割構図や日の丸構図以外でも、注目点が配置される位置と構図の外枠との相対的な位置関係が分かる構図であれば、本開示の技術は適用可能である。

また、本開示における「トリミング」とは、画像における一部のみを切り出し、個別の画像として生成する場合であってもよいし、その一部のみが出力されるものであってもよい。後者の場合、例えば画像におけるトリミング対象領域以外の領域に対し、当該画像より上のレイヤーの別のオブジェクトを重ね、当該領域が表示されず、当該トリミング対象領域のみが表示されるようにするものも、本開示における「トリミング」に含まれる。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

Claims (14)

1. コンピュータを、
   画像における注目点の位置を指定する第１の指定手段と、
   所定の複数の構図パターンから、前記画像に対するトリミングに用いられる構図パターンを選択する第１の選択手段と、
   指定された前記注目点の位置が、選択された前記構図パターンに適合するように前記画像がトリミングされた少なくとも１つのトリミング案を表示手段に表示させる表示制御手段と、
   を備える装置として機能させることを特徴とするプログラム。
2. 前記表示制御手段は、前記注目点が前記構図パターンを決めるための補助線の交点から所定の範囲内に位置するようにトリミングする領域を決定する
   ことを特徴とする請求項１に記載のプログラム。
3. 前記表示制御手段は、前記注目点が前記補助線の複数の交点のそれぞれから所定の範囲内に位置するようにトリミングする領域が決定された、複数のトリミング案を表示させる
   ことを特徴とする請求項２に記載のプログラム。
4. 前記表示制御手段は、前記注目点が複数指定されている場合、複数の前記注目点の中心位置を、前記構図パターンを決めるための補助線の交点から所定の範囲内に位置するようにトリミングする領域を決定する
   ことを特徴とする請求項２に記載のプログラム。
5. 前記第１の指定手段は、前記注目点の位置をユーザからの入力に従って指定することを特徴とする請求項１乃至４のいずれか１項に記載のプログラム。
6. 前記トリミングする領域に含める前記画像における領域である包含面の外周縁の位置を指定する第２の指定手段をさらに備え、
   前記表示制御手段は、前記包含面を含むようにトリミングする領域を決定する
   ことを特徴とする請求項１乃至５のいずれか１項に記載のプログラム。
7. 第２の指定手段は、前記包含面の位置をユーザからの入力に従って指定することを特徴とする請求項６に記載のプログラム。
8. 前記トリミングする領域に含めない前記画像における領域である除外面の外周縁の位置を指定する第３の指定手段をさらに備え、
   前記表示制御手段は、前記除外面を含まないようにトリミングする領域を決定する
   ことを特徴とする請求項１乃至５のいずれか１項に記載のプログラム。
9. 第３の指定手段は、前記除外面の位置をユーザからの入力に従って指定することを特徴とする請求項８に記載のプログラム。
10. 表示された前記トリミング案のうちの１つをユーザからの入力に従って選択する第２の選択手段と、
    選択された前記トリミング案に応じたトリミングが実行された前記画像をアルバムのスロット上に配置する配置手段と
    をさらに備えることを特徴とする請求項１乃至９のいずれか１項に記載のプログラム。
11. 前記表示制御手段は、前記スロットのアスペクト比に応じて前記画像がトリミングされたトリミング案を表示させることを特徴とする請求項１０に記載のプログラム。
12. 前記第１の選択手段は、ユーザによる指示に応じて、前記所定の複数の構図パターンから前記画像に対するトリミングに用いられる構図パターンを選択することを特徴とする請求項１乃至１１のいずれか１項に記載のプログラム。
13. 画像における注目点の位置を指定するステップと、
    所定の複数の構図パターンから、前記画像に対するトリミングに用いられる構図パターンを選択するステップと、
    指定された前記注目点の位置が、選択された前記構図パターンに適合するように前記画像がトリミングされた少なくとも１つのトリミング案を表示手段に表示させるステップと、
    を備えることを特徴とする情報処理方法。
14. 画像における注目点の位置を指定する第１の指定手段と、
    所定の複数の構図パターンから、前記画像に対するトリミングに用いられる構図パターンを選択する第１の選択手段と、
    指定された前記注目点の位置が、選択された前記構図パターンに適合するように前記画像がトリミングされた少なくとも１つのトリミング案を表示手段に表示させる表示制御手段と、
    を備えることを特徴とする情報処理装置。

Images