JP4704225B2 - Album creating apparatus, album creating method, and album creating program - Google Patents

Album creating apparatus, album creating method, and album creating program Download PDF

Info

Publication number
JP4704225B2
JP4704225B2 JP2006021540A JP2006021540A JP4704225B2 JP 4704225 B2 JP4704225 B2 JP 4704225B2 JP 2006021540 A JP2006021540 A JP 2006021540A JP 2006021540 A JP2006021540 A JP 2006021540A JP 4704225 B2 JP4704225 B2 JP 4704225B2
Authority
JP
Japan
Prior art keywords
image
specific subject
album
unit
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006021540A
Other languages
Japanese (ja)
Other versions
JP2007206751A (en
Inventor
昌弘 松下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2006021540A priority Critical patent/JP4704225B2/en
Publication of JP2007206751A publication Critical patent/JP2007206751A/en
Application granted granted Critical
Publication of JP4704225B2 publication Critical patent/JP4704225B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、アルバム作成装置、アルバム作成方法、およびアルバム作成プログラムに関する。特に、本発明は、アルバムにおける主人公を簡易な指定により識別できるアルバム作成装置、アルバム作成方法、およびアルバム作成プログラムに関する。   The present invention relates to an album creating apparatus, an album creating method, and an album creating program. In particular, the present invention relates to an album creating apparatus, an album creating method, and an album creating program that can identify a hero in an album by simple designation.

アルバム作成を所望する顧客自身が画像をレイアウトしたレイアウトデータを受け取ってアルバムを作成するシステムが提案されている(例えば、特許文献1参照。)。特許文献1に記載の発明においては、顧客自身が画像をアルバムにレイアウトして、顧客によってレイアウトされたレイアウトデータに基づいてアルバムを作成するので、顧客の希望通りのアルバムを作成できる。
特開2001−331704号公報
A system has been proposed in which a customer who desires album creation receives layout data in which images are laid out and creates an album (see, for example, Patent Document 1). In the invention described in Patent Document 1, since the customer lays out images on an album and creates an album based on layout data laid out by the customer, an album as desired by the customer can be created.
JP 2001-331704 A

しかしながら、特許文献1に記載の発明においては、顧客自身がアルバムにレイアウトするので、顧客が複数の画像からアルバムの作成を所望する場合には、画像を1枚ごと確認しながらレイアウトしなければならないので、アルバムの作成に多大な時間と労力を費やす場合がある。また、アルバムを作成するアルバム作成者が顧客から画像を受け取ってアルバムを作成する場合には、顧客から第三者であるアルバム作成者に画像に含まれる主人公および登場人物を識別する情報を的確に伝えることが困難である。したがって、アルバム作成者が画像に含まれる複数の人物を適切に見分けて画像をアルバムテンプレートにレイアウトすることが困難である場合がある。   However, in the invention described in Patent Document 1, since the customer himself lays out the album, when the customer desires to create an album from a plurality of images, the user must lay out the images while checking each image. So, it may take a lot of time and effort to create an album. In addition, when an album creator who creates an album receives an image from a customer and creates an album, the customer accurately identifies information identifying the main character and characters included in the image from the third party album creator. It is difficult to convey. Therefore, it may be difficult for the album creator to appropriately identify a plurality of persons included in the image and lay out the image in the album template.

そこで本発明は、上記課題を解決することができるアルバム作成装置、アルバム作成方法、およびアルバム作成プログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。   Therefore, an object of the present invention is to provide an album creation apparatus, an album creation method, and an album creation program that can solve the above-described problems. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.

上記課題を解決するために、本発明の第1の形態においては、アルバム作成装置であって、複数の画像を格納する画像格納部と、特定被写体を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の特徴部分の位置を示す特徴位置情報を有する特定被写体情報を取得する特定被写体情報取得部と、画像識別情報で識別される画像から、特徴位置情報で示される特徴部分の画像である特徴部分画像を抽出する特徴部分画像抽出部と、画像格納部が格納している複数の画像と特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と特徴部分画像との類似度を算出する類似度算出部と、画像格納部が格納している複数の画像のうち、類似度算出部が算出した類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部と、特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部とを備える。   In order to solve the above-described problem, in the first embodiment of the present invention, an album creating apparatus, an image storage unit for storing a plurality of images, image identification information for identifying an image including a specific subject, and an image A specific subject information acquisition unit that acquires specific subject information having characteristic position information indicating a position of a characteristic part of a specific subject in an image identified by the identification information, and an image identified by the image identification information. A feature part image extracting unit that extracts a feature part image that is an image of a feature part to be obtained, and a plurality of images stored in the image storage unit by comparing the plurality of images stored in the image storage unit with the feature part images A similarity calculation unit that calculates the similarity between a part of the image and the feature part image, and a similarity calculated by the similarity calculation unit among a plurality of images stored in the image storage unit is predetermined. Degree of similarity The specific subject image selecting section that selects the larger image Ri, by laying the image is specified subject image selecting unit selected and an album creating section for creating an album.

また、特定被写体情報取得部は、画像識別情報で識別される画像における特定被写体の顔の特徴部分の位置を示す特徴位置情報を有する特定被写体情報を取得し、特徴部分画像抽出部は、画像識別情報で識別される画像から、特徴位置情報で示される特定被写体の顔の特徴部分の特徴部分画像を抽出してもよい。そして、画像配置枠に対応づけて、画像配置枠に特定被写体画像選択部が選択した画像を配置すべき旨を示す合成情報が予め定められたテンプレートを格納しているテンプレート格納部を更に備え、アルバム作成部は、テンプレート格納部が格納しているテンプレートに予め定められた合成情報に基づいて、特定被写体画像選択部が選択した画像を画像配置枠にレイアウトしてアルバムを作成してもよい。   The specific subject information acquisition unit acquires specific subject information having feature position information indicating the position of the feature portion of the face of the specific subject in the image identified by the image identification information, and the feature portion image extraction unit A feature portion image of the feature portion of the face of the specific subject indicated by the feature position information may be extracted from the image identified by the information. And a template storage unit that stores a template in which composite information indicating that the image selected by the specific subject image selection unit is to be arranged in the image arrangement frame is stored in association with the image arrangement frame, The album creating unit may create an album by laying out the images selected by the specific subject image selecting unit in an image arrangement frame based on synthesis information predetermined for a template stored in the template storage unit.

また、本発明の第2の形態においては、アルバム作成方法であって、複数の画像を画像格納部に格納する画像格納段階と、特定被写体を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の特徴部分の位置を示す特徴位置情報を有する特定被写体情報を取得する特定被写体情報取得段階と、画像識別情報で識別される画像から、特徴位置情報で示される特徴部分の画像である特徴部分画像を抽出する特徴部分画像抽出段階と、画像格納部が格納している複数の画像と特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と特徴部分画像との類似度を算出する類似度算出段階と、画像格納部が格納している複数の画像のうち、類似度算出段階において算出された類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択段階と、特定被写体画像選択段階において選択された画像をレイアウトしてアルバムを作成するアルバム作成段階とを備える。   According to the second aspect of the present invention, there is provided an album creating method, an image storage stage for storing a plurality of images in an image storage unit, image identification information for identifying an image including a specific subject, and image identification information A specific subject information acquisition stage for acquiring specific subject information having feature position information indicating a position of a feature portion of the specific subject in the image identified by the feature, and a feature indicated by the feature location information from the image identified by the image identification information A feature partial image extraction stage for extracting a feature partial image that is a partial image, and a plurality of images stored in the image storage unit by comparing the plurality of images stored in the image storage unit with the feature partial images The similarity calculated in the similarity calculation step for calculating the similarity between a part of the image and the feature portion image, and the similarity calculated in the similarity calculation step among the plurality of images stored in the image storage unit are determined in advance. Comprising the the specific subject image selecting step of selecting a larger image than the similarity, the album creating step for creating an album by laying the image selected in the specific object image selection step.

また、本発明の第3の形態においては、アルバムを作成するアルバム作成装置用のアルバム作成プログラムであって、アルバム作成装置を、複数の画像を格納する画像格納部、特定被写体を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の特徴部分の位置を示す特徴位置情報を有する特定被写体情報を取得する特定被写体情報取得部、画像識別情報で識別される画像から、特徴位置情報で示される特徴部分の画像である特徴部分画像を抽出する特徴部分画像抽出部、画像格納部が格納している複数の画像と特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と特徴部分画像との類似度を算出する類似度算出部、画像格納部が格納している複数の画像のうち、類似度算出部が算出した類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部、特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部として機能させる。   According to a third aspect of the present invention, there is provided an album creating program for an album creating apparatus for creating an album, the album creating apparatus identifying an image including a specific subject, an image storage unit for storing a plurality of images From the image identified by the image identification information, the specific subject information acquisition unit for acquiring the specific subject information having the characteristic position information indicating the position of the characteristic part of the specific subject in the image identified by the image identification information, and the image identification information A feature part image extraction unit that extracts a feature part image that is an image of the feature part indicated by the feature position information, and compares the plurality of images stored in the image storage unit with the feature part image, and the image storage unit A similarity calculation unit that calculates a similarity between a part of a plurality of stored images and a feature part image, and a similarity calculation unit out of a plurality of images stored in the image storage unit Specified subject image selecting section for selecting a larger image than the similarity degree of similarity is predetermined that issued to function as an album creating section for creating an album by laying a specific subject image selected by the image selecting section.

また、本発明の第4の形態においては、複数の画像がレイアウトされたアルバムを作成するアルバム作成装置であって、複数の画像を格納する画像格納部と、画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成部と、特定被写体の顔画像を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得部と、画像識別情報で識別される画像から、顔画像位置情報で特定される特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出部と、特定被写体顔画像と平均顔画像とを比較して、特定被写体顔画像のうちで、平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出部と、画像格納部が格納している複数の画像と第1特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と第1特徴部分画像との第1類似度を算出する類似度算出部と、画像格納部が格納している複数の画像のうち、類似度算出部が算出した第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部と、特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部とを備える。   According to the fourth aspect of the present invention, there is provided an album creating apparatus for creating an album in which a plurality of images are laid out, and an image storage unit that stores a plurality of images, and a plurality of images stored in the image storage unit. An average face image generation unit that generates an average face image, which is an average face image of a plurality of subjects, from an image of a face area of a plurality of subjects included in each of the images, and an image including a face image of a specific subject And a specific subject information acquisition unit that acquires specific subject information having face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information and the image identification information, and identified by the image identification information The specific subject face image extraction unit that extracts the specific subject face image that is the face image of the specific subject specified by the face image position information from the image, and the specific subject face image and the average face image are compared Then, from the specific subject face image, an image of a region having the largest difference from the average face image or an image of a region having a larger predetermined difference is extracted as the first feature portion image of the specific subject. The feature partial image extraction unit, the plurality of images stored in the image storage unit and the first feature partial image are compared, and a part of the plurality of images stored in the image storage unit and the first feature partial image And a first similarity calculated by the similarity calculation unit among a plurality of images stored in the image storage unit is greater than a predetermined similarity. A specific subject image selection unit that selects the image, and an album creation unit that creates an album by laying out the images selected by the specific subject image selection unit.

また、特徴部分画像抽出部は、特定被写体顔画像と平均顔画像とを比較して、特定被写体顔画像のうちで、第1特徴部分画像の次に平均顔画像との差異が大きい部位の領域の画像を、特定被写体の第2特徴部分画像として更に抽出し、類似度算出部は、画像格納部が格納している複数の画像と第2特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と第2特徴部分画像との第2類似度を算出し、特定被写体画像選択部は、画像格納部が格納している複数の画像のうち、第1類似度に第2類似度よりも大きく重み付けして、第1類似度と第2類似度とを合計することによって算出された合計類似度が予め定められた類似度より大きい画像を選択してもよい。更に、画像配置枠に対応づけて、画像配置枠に特定被写体画像選択部が選択した画像を配置すべき旨を示す合成情報が予め定められたテンプレートを格納しているテンプレート格納部を更に備え、アルバム作成部は、テンプレート格納部が格納しているテンプレートに予め定められた合成情報に基づいて、特定被写体画像選択部が選択した画像を画像配置枠にレイアウトしてアルバムを作成してもよい。   The feature portion image extraction unit compares the specific subject face image with the average face image, and in the specific subject face image, an area of a portion having the largest difference from the average face image next to the first feature portion image Are further extracted as the second feature partial image of the specific subject, and the similarity calculation unit compares the plurality of images stored in the image storage unit with the second feature partial image, and the image storage unit The second similarity between a part of the plurality of stored images and the second feature partial image is calculated, and the specific subject image selection unit selects the first similarity among the plurality of images stored in the image storage unit. An image may be selected in which the total similarity calculated by summing the first similarity and the second similarity is weighted higher than the second similarity each time and the total similarity is greater than a predetermined similarity. . Furthermore, a template storage unit that stores a template in which composite information indicating that the image selected by the specific subject image selection unit should be placed in the image placement frame is stored in association with the image placement frame, The album creating unit may create an album by laying out the images selected by the specific subject image selecting unit in an image arrangement frame based on synthesis information predetermined for a template stored in the template storage unit.

また、本発明の第5の形態においては、複数の画像がレイアウトされたアルバムを作成するアルバム作成方法であって、複数の画像を画像格納部に格納する画像格納段階と、画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成段階と、特定被写体の顔画像を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得段階と、画像識別情報で識別される画像から、顔画像位置情報で特定される特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出段階と、特定被写体顔画像と平均顔画像とを比較して、特定被写体顔画像のうちで、平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出段階と、画像格納部が格納している複数の画像と第1特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と第1特徴部分画像との第1類似度を算出する類似度算出段階と、画像格納部が格納している複数の画像のうち、類似度算出段階において算出された第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択段階と、特定被写体画像選択段階において選択された画像をレイアウトしてアルバムを作成するアルバム作成段階とを備える。   According to a fifth aspect of the present invention, there is provided an album creating method for creating an album in which a plurality of images are laid out, the image storing stage storing a plurality of images in the image storing unit, and the image storing unit storing An average face image generation stage for generating an average face image that is an average face image of a plurality of subjects from images of face areas of a plurality of subjects included in each of the plurality of images, and a face image of a specific subject A specific subject information acquisition stage for acquiring specific subject information having image identification information for identifying the image to be included, and face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information; A specific subject face image extraction step of extracting a specific subject face image that is a face image of the specific subject specified by the face image position information from the image identified by Compared with the average face image, among the specific subject face images, the image of the region of the region with the largest difference from the average face image or the image of the region of the region with the larger predetermined difference is obtained. The feature partial image extraction stage to be extracted as one feature partial image is compared with the plurality of images stored in the image storage unit and the first feature partial image, and one of the plurality of images stored in the image storage unit is stored. The first similarity calculated in the similarity calculation step among the plurality of images stored in the image storage unit is calculated in advance as the similarity calculation step for calculating the first similarity between the image and the first feature partial image. A specific subject image selection step of selecting an image having a degree of similarity greater than a predetermined similarity; and an album creation step of laying out the image selected in the specific subject image selection step to create an album.

また、本発明の第6の形態においては、複数の画像がレイアウトされたアルバムを作成するアルバム作成装置用のアルバム作成プログラムであって、アルバム作成装置を、複数の画像を格納する画像格納部、画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成部、特定被写体の顔画像を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得部、画像識別情報で識別される画像から、顔画像位置情報で特定される特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出部、特定被写体顔画像と平均顔画像とを比較して、特定被写体顔画像のうちで、平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出部、画像格納部が格納している複数の画像と第1特徴部分画像とを比較して、画像格納部が格納している複数の画像の一部と第1特徴部分画像との第1類似度を算出する類似度算出部、画像格納部が格納している複数の画像のうち、類似度算出部が算出した第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部、特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部として機能させる。   According to a sixth aspect of the present invention, there is provided an album creating program for an album creating apparatus for creating an album in which a plurality of images are laid out, the album creating apparatus including an image storage unit for storing a plurality of images, An average face image generation unit that generates an average face image that is an average face image of a plurality of subjects from images of face areas of the plurality of subjects included in each of the plurality of images stored in the image storage unit, and a specific subject Specific subject information acquisition unit for acquiring specific subject information having image identification information for identifying an image including the face image of the subject and face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information; A specific subject face image extraction unit that extracts a specific subject face image that is a face image of a specific subject specified by face image position information from an image identified by image identification information The specific subject face image and the average face image are compared, and among the specific subject face images, an image of a region having the largest difference from the average face image or an image of a region having a larger predetermined difference is obtained. A feature portion image extracting unit that extracts the first feature portion image of the specific subject, and a plurality of images stored in the image storage portion by comparing the plurality of images stored in the image storage portion with the first feature portion image. A similarity calculation unit that calculates a first similarity between a part of the first image and the first feature partial image, and a first similarity calculated by the similarity calculation unit among a plurality of images stored in the image storage unit Function as an album creating unit that lays out images selected by the specific subject image selecting unit and creates an album by laying out images selected by the specific subject image selecting unit.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。   The above summary of the invention does not enumerate all the necessary features of the present invention, and sub-combinations of these feature groups can also be the invention.

本発明によれば、被写体の特徴部分に基づいて画像に含まれる複数の被写体のそれぞれを的確に識別できるので、所望の被写体が含まれる画像を用いて容易にアルバムを作成できる。   According to the present invention, since each of a plurality of subjects included in an image can be accurately identified based on the feature portion of the subject, an album can be easily created using an image including a desired subject.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention. However, the following embodiments do not limit the invention according to the scope of claims, and all combinations of features described in the embodiments are included. It is not necessarily essential for the solution of the invention.

図1は、本発明の一実施形態に係るアルバム作成装置10の概要を示す。アルバム作成装置10は、顧客からアルバムの作成に用いる画像群350および特定被写体情報200を受け取る。特定被写体情報200は、被写体が含まれる画像を識別する画像識別情報、および当該被写体の特徴部分の位置を示す特徴位置情報等を有する。なお、画像識別情報は、画像を一意に識別できる識別子及びファイル名等であってよい。また、被写体の特徴部分とは、当該被写体の識別に用いることができる特徴的な部位の領域であってよい。なお、特徴部分が被写体の特徴的な部位を複数含む場合には、特徴部分を、特徴部分である部位を複数含む特徴領域として定義してもよい。例えば、特徴部分は、人物の顔のほくろ、えくぼ、目、鼻、および耳等であってよい。本実施形態に係るアルバム作成装置10は、特定被写体情報200を受け取り、特定被写体情報200で特定される画像に含まれる人物の特徴部分の画像を用いて当該人物が含まれる画像を画像群350から自動的に抽出して、抽出した画像をレイアウトすることによりアルバムを作成することを目的とする。   FIG. 1 shows an outline of an album creating apparatus 10 according to an embodiment of the present invention. The album creating apparatus 10 receives an image group 350 and specific subject information 200 used for creating an album from a customer. The specific subject information 200 includes image identification information for identifying an image including the subject, feature position information indicating the position of the feature portion of the subject, and the like. The image identification information may be an identifier and a file name that can uniquely identify the image. The feature portion of the subject may be a characteristic region that can be used to identify the subject. When the characteristic part includes a plurality of characteristic parts of the subject, the characteristic part may be defined as a characteristic region including a plurality of parts that are characteristic parts. For example, the characteristic portion may be a mole, dimple, eyes, nose, ears, or the like of a person's face. The album creating apparatus 10 according to the present embodiment receives the specific subject information 200, and uses the image of the characteristic portion of the person included in the image specified by the specific subject information 200 to extract an image including the person from the image group 350. The purpose is to create an album by automatically extracting and laying out the extracted images.

まず、アルバム作成装置10は、アルバムの主人公が含まれる画像の特定被写体情報200を受け取る。なお、アルバム作成装置10は、アルバムの被写体ごとに特定被写体情報200を受け取ってもよい。アルバム作成装置10は、特定被写体情報200が有する画像識別情報で特定される画像を画像群350から抽出する。続いて、アルバム作成装置10は、抽出した画像に含まれる被写体の特徴部分の画像を、特定被写体情報200が有する特徴位置情報を用いて抽出する。そして、アルバム作成装置10は、抽出した特徴部分の画像と画像群350が有する複数の画像に含まれる人物の画像とをそれぞれ比較して、抽出した特徴部分の画像と一致する、または類似する特徴部分を有する被写体を含む画像を、特定被写体情報200で特定される被写体が含まれる画像として画像群350から抽出する。アルバム作成装置10は、画像群350からアルバムの登場人物ごとに画像を抽出する。そして、アルバム作成装置10は、抽出した画像をテンプレート450にレイアウトしてアルバムを作成する。   First, the album creating apparatus 10 receives the specific subject information 200 of an image including the main character of the album. Note that the album creating apparatus 10 may receive the specific subject information 200 for each subject of the album. The album creating apparatus 10 extracts an image specified by the image identification information included in the specific subject information 200 from the image group 350. Subsequently, the album creating apparatus 10 extracts the image of the feature portion of the subject included in the extracted image using the feature position information included in the specific subject information 200. Then, the album creating apparatus 10 compares the extracted image of the feature portion with the image of the person included in the plurality of images included in the image group 350, and matches or is similar to the extracted feature portion image. An image including a subject having a part is extracted from the image group 350 as an image including the subject specified by the specific subject information 200. The album creating apparatus 10 extracts an image for each character in the album from the image group 350. Then, the album creating apparatus 10 lays out the extracted images on the template 450 to create an album.

本実施形態に係るアルバム作成装置10は、画像群350に含まれる複数の画像のうち、アルバムの主人公が含まれる一の画像について特定被写体情報200を指定するだけで、特定被写体情報200で特定される人物の特徴部分の画像を抽出して画像群350に含まれる画像内の人物の画像と比較できるので、画像群350に含まれる複数の画像のそれぞれについて特定被写体情報200を取得しなくても、特定被写体情報200で特定される人物と同一人物が含まれる画像を自動的に抽出できる。これにより、アルバム作成装置10は、自動的に複数の画像から特定の人物が含まれる画像を的確に抽出してアルバムを作成できる。   The album creating apparatus 10 according to the present embodiment is specified by the specific subject information 200 only by specifying the specific subject information 200 for one image including the main character of the album among a plurality of images included in the image group 350. Therefore, it is possible to extract the image of the characteristic part of the person and compare it with the image of the person in the image included in the image group 350, without acquiring the specific subject information 200 for each of the plurality of images included in the image group 350. The image including the same person as the person specified by the specific subject information 200 can be automatically extracted. Thereby, the album creating apparatus 10 can automatically create an album by accurately extracting images including a specific person from a plurality of images.

図2は、本実施形態に係るアルバム作成装置10の機能構成の一例を示す。アルバム作成装置10は、画像入力部100、特定被写体情報取得部105、画像格納部110、テンプレート格納部115、特徴部分画像抽出部120、類似度算出部130、特定被写体画像選択部140、アルバム作成部150、およびアルバム出力部160を備える。画像入力部100は、アルバム作成装置10の外部から画像を入力する。具体的には、画像入力部100は、複数の画像を含む画像群350を入力する。画像入力部100は、メモリおよびインターネット等のネットワークを介して画像を入力してよい。画像入力部100は外部から入力した画像群350に含まれる複数の画像を、画像格納部110に供給する。画像格納部110は、画像入力部100から受け取った複数の画像を、複数の画像のそれぞれを一意に識別できる識別子に対応づけて格納する。画像格納部110は、画像を特徴部分画像抽出部120、類似度算出部130、および特定被写体画像選択部140に供給する。   FIG. 2 shows an example of a functional configuration of the album creating apparatus 10 according to the present embodiment. The album creating apparatus 10 includes an image input unit 100, a specific subject information acquisition unit 105, an image storage unit 110, a template storage unit 115, a feature partial image extraction unit 120, a similarity calculation unit 130, a specific subject image selection unit 140, and an album creation. Unit 150 and album output unit 160. The image input unit 100 inputs an image from outside the album creating apparatus 10. Specifically, the image input unit 100 inputs an image group 350 including a plurality of images. The image input unit 100 may input an image via a network such as a memory and the Internet. The image input unit 100 supplies a plurality of images included in the image group 350 input from the outside to the image storage unit 110. The image storage unit 110 stores a plurality of images received from the image input unit 100 in association with identifiers that can uniquely identify each of the plurality of images. The image storage unit 110 supplies the image to the feature partial image extraction unit 120, the similarity calculation unit 130, and the specific subject image selection unit 140.

特定被写体情報取得部105は、特定被写体を含む画像を識別する画像識別情報、画像識別情報で識別される画像における特定被写体の位置を示す特定被写体位置情報、および画像識別情報で識別される画像における特定被写体の特徴部分の位置を示す特徴位置情報を有する特定被写体情報200を取得する。また、特定被写体情報取得部105は、画像識別情報で識別される画像における特定被写体の顔の特徴部分の位置を示す特徴位置情報を有する特定被写体情報200を取得してもよい。なお、特定被写体情報取得部105は、複数の被写体ごとに異なる複数の特定被写体情報200を取得してよい。ここで、特定被写体とは、画像に含まれる特定の被写体であって、アルバムの主人公およびアルバムの主人公と所定の関係を有する人物等のオブジェクトであってよい。また、特定被写体位置情報とは、画像識別情報で識別される画像に含まれる被写体が、画像において占める位置を示す情報である。   The specific subject information acquisition unit 105 includes image identification information for identifying an image including the specific subject, specific subject position information indicating the position of the specific subject in the image identified by the image identification information, and an image identified by the image identification information. The specific subject information 200 having the characteristic position information indicating the position of the characteristic portion of the specific subject is acquired. Further, the specific subject information acquisition unit 105 may acquire specific subject information 200 having feature position information indicating the position of the feature portion of the face of the specific subject in the image identified by the image identification information. The specific subject information acquisition unit 105 may acquire a plurality of specific subject information 200 that is different for each of the plurality of subjects. Here, the specific subject is a specific subject included in the image, and may be an object such as a main character of the album and a person having a predetermined relationship with the main character of the album. The specific subject position information is information indicating the position occupied by the subject included in the image identified by the image identification information in the image.

例えば、特定被写体位置情報は、画像の中心を原点とした場合に、被写体が画像に占める位置を示した座標データであってよい。また、顔の特徴部分は、顔の輪郭、目の位置、目の大きさ、両目の間隔、眉の位置、眉の形、ほくろの位置、ほくろの数、ほくろの大きさ、えくぼの位置、えくぼの大きさ、および耳の形等であってよい。そして、特徴位置情報は、特徴部分が人物の顔の中で占める位置、または領域を示す情報であってよい。具体的には、特徴位置情報は、特徴部分が人物の顔の中で占める、所定の領域を特定する複数の座標データであってよい。また、特定被写体情報200は、画像に含まれる被写体の名称、および画像の撮像時の撮像条件を示す情報等を有していてもよい。特定被写体情報取得部105は、特定被写体情報200を特徴部分画像抽出部120およびアルバム作成部150に供給する。   For example, the specific subject position information may be coordinate data indicating the position of the subject in the image when the center of the image is the origin. In addition, the facial features are the face outline, eye position, eye size, distance between both eyes, eyebrow position, eyebrow shape, mole position, mole number, mole size, dimple position, It may be the size of the dimple and the shape of the ear. The feature position information may be information indicating the position or area that the feature portion occupies in the face of the person. Specifically, the feature position information may be a plurality of coordinate data that specifies a predetermined region that the feature portion occupies in the face of a person. Further, the specific subject information 200 may include information indicating the name of the subject included in the image and the imaging conditions at the time of imaging. The specific subject information acquisition unit 105 supplies the specific subject information 200 to the feature partial image extraction unit 120 and the album creation unit 150.

特徴部分画像抽出部120は、特定被写体情報取得部105から受け取った特定被写体情報200に基づいて、特定被写体の特徴部分の画像である特徴部分画像を抽出する。具体的には、特徴部分画像抽出部120は、画像識別情報で識別される画像を画像格納部110から抽出する。そして、特徴部分画像抽出部120は、画像格納部110から抽出した画像から、特徴位置情報で特定される特徴部分の画像である特徴部分画像を抽出する。より具体的には、特徴部分画像抽出部120は、画像識別情報で識別される画像から、特徴位置情報で特定される特定被写体の顔の特徴部分の特徴部分画像を抽出する。例えば、特徴部分画像抽出部120は、特徴位置情報が特定被写体の顔に含まれるほくろの位置を示す情報であった場合には、当該ほくろを含む領域の画像を特徴部分画像として抽出する。なお、特徴部分画像抽出部120は、特定被写体情報取得部105が被写体ごとに特定被写体情報200を取得していた場合には、被写体ごとに特徴部分画像を抽出する。特徴部分画像抽出部120は、抽出した特徴部分画像を類似度算出部130に供給する。   Based on the specific subject information 200 received from the specific subject information acquisition unit 105, the feature partial image extraction unit 120 extracts a feature partial image that is an image of the characteristic portion of the specific subject. Specifically, the feature partial image extraction unit 120 extracts an image identified by the image identification information from the image storage unit 110. Then, the feature part image extraction unit 120 extracts a feature part image that is an image of the feature part specified by the feature position information from the image extracted from the image storage unit 110. More specifically, the feature part image extraction unit 120 extracts a feature part image of the feature part of the face of the specific subject specified by the feature position information from the image identified by the image identification information. For example, when the feature position information is information indicating the position of the mole included in the face of the specific subject, the feature part image extraction unit 120 extracts an image of the region including the mole as the feature part image. Note that the feature partial image extraction unit 120 extracts the feature partial image for each subject when the specific subject information acquisition unit 105 has acquired the specific subject information 200 for each subject. The feature partial image extraction unit 120 supplies the extracted feature partial image to the similarity calculation unit 130.

類似度算出部130は、特徴部分画像抽出部120から受け取った特徴部分画像と画像格納部110から受け取った複数の画像の一部とを比較する。そして、類似度算出部130は、画像格納部110から受け取った複数の画像の一部と特徴部分画像との類似度を算出する。具体的には、類似度算出部130は、特徴部分画像と画像格納部110から受け取った画像の一部とをマッチングして、特徴部分画像に含まれる特徴部分と画像格納部110から受け取った画像の特徴部分に対応する部分との差異を算出する。そして、類似度算出部130は、算出した差異の大きさに応じて特徴部分画像の類似度を算出する。例えば、類似度算出部130は、算出した差異が予め定められた差異よりも大きい場合には、算出した差異が予め定められた差異よりも小さい場合と比較して、類似度をより小さく算出してよい。なお、差異は、画像格納部110から受け取った画像の一部と特徴部分画像の特徴部分との画像における距離であってよい。また、類似度算出部130は、被写体ごとに類似度を算出してよい。類似度算出部130は、算出した類似度を特定被写体画像選択部140に供給する。   The similarity calculation unit 130 compares the feature partial image received from the feature partial image extraction unit 120 with some of the plurality of images received from the image storage unit 110. Then, the similarity calculation unit 130 calculates the similarity between a part of the plurality of images received from the image storage unit 110 and the feature part image. Specifically, the similarity calculation unit 130 matches the feature part image with a part of the image received from the image storage unit 110, and the feature part included in the feature part image and the image received from the image storage unit 110. The difference from the part corresponding to the characteristic part is calculated. Then, the similarity calculation unit 130 calculates the similarity of the feature portion image according to the calculated difference size. For example, when the calculated difference is larger than the predetermined difference, the similarity calculation unit 130 calculates the similarity smaller than when the calculated difference is smaller than the predetermined difference. It's okay. Note that the difference may be a distance in the image between a part of the image received from the image storage unit 110 and the feature portion of the feature portion image. Further, the similarity calculation unit 130 may calculate the similarity for each subject. The similarity calculation unit 130 supplies the calculated similarity to the specific subject image selection unit 140.

特定被写体画像選択部140は、画像格納部110が格納している複数の画像のうち、類似度算出部130から受け取った類似度が予め定められた類似度よりも大きい画像を選択する。特定被写体画像選択部140は、画像格納部110が格納している複数の画像から、類似度算出部130が算出した類似度が予め定められた類似度よりも大きい画像を複数選択してもよい。なお、特定被写体画像選択部140は、被写体ごとに当該被写体が含まれる画像を選択してよい。特定被写体画像選択部140は、選択した画像をアルバム作成部150に供給する。テンプレート格納部115は、画像を配置する画像配置枠に対応づけて、画像配置枠に特定被写体画像選択部140が選択した画像を配置すべき旨を示す合成情報が予め定められたテンプレートを格納している。テンプレート格納部115が格納しているテンプレートは、アルバムテンプレートであってよく、例えば、アルバムの見開きページに画像配置枠が配置されているテンプレートであってよい。また、テンプレートはアルバムの見開きページに限られず、アルバムの表紙、背表紙、裏表紙、およびアルバムのページ等に画像配置枠を少なくとも1つ配置したテンプレートであってよい。テンプレート格納部115は、テンプレートをアルバム作成部150に供給する。   The specific subject image selection unit 140 selects an image whose similarity received from the similarity calculation unit 130 is larger than a predetermined similarity among the plurality of images stored in the image storage unit 110. The specific subject image selection unit 140 may select a plurality of images in which the similarity calculated by the similarity calculation unit 130 is greater than a predetermined similarity from the plurality of images stored in the image storage unit 110. . The specific subject image selection unit 140 may select an image including the subject for each subject. The specific subject image selection unit 140 supplies the selected image to the album creation unit 150. The template storage unit 115 stores a template in which composite information indicating that the image selected by the specific subject image selection unit 140 should be placed in the image placement frame is associated with the image placement frame in which the image is placed. ing. The template stored in the template storage unit 115 may be an album template. For example, the template may be a template in which an image arrangement frame is arranged on a spread page of an album. The template is not limited to the spread page of the album, and may be a template in which at least one image arrangement frame is arranged on the cover, back cover, back cover, album page, and the like of the album. The template storage unit 115 supplies the template to the album creation unit 150.

アルバム作成部150は、特定被写体画像選択部140から受け取った画像をレイアウトしてアルバムを作成する。具体的には、アルバム作成部150は、特定被写体画像選択部140から受け取った画像の中から、テンプレート格納部115から受け取ったアルバムテンプレートの画像配置枠の合成情報と一致する画像を選択して、選択した画像をレイアウトしてアルバムを作成する。アルバム作成部150は、作成したアルバムをアルバム出力部160に供給する。アルバム出力部160は、アルバム作成部150から受け取ったアルバムを出力する。例えば、アルバム出力部160は、画像配置枠に画像を配置したアルバムの見開きページを、紙媒体に印刷してアルバムを出力する。また、アルバム出力部160は、DVD等の記録媒体にアルバムを記録して出力してもよい。更に、アルバム出力部160は、LAN、WAN、およびインターネット等のネットワークを介して、例えば、ユーザのPC等の端末にアルバムを送信してもよい。   The album creating unit 150 creates an album by laying out the images received from the specific subject image selecting unit 140. Specifically, the album creating unit 150 selects an image that matches the composite information of the image layout frame of the album template received from the template storage unit 115 from the images received from the specific subject image selecting unit 140, and Lay out selected images and create an album. The album creating unit 150 supplies the created album to the album output unit 160. The album output unit 160 outputs the album received from the album creation unit 150. For example, the album output unit 160 outputs an album by printing a spread page of an album in which an image is arranged in an image arrangement frame on a paper medium. Further, the album output unit 160 may record and output the album on a recording medium such as a DVD. Further, the album output unit 160 may transmit the album to a terminal such as a user's PC via a network such as LAN, WAN, and the Internet.

本実施形態に係るアルバム作成装置10によれば、特定被写体情報200で特定される被写体の特徴部分の画像を抽出して、抽出した特徴部分の画像と複数の画像の一部とを比較して予め定められた類似度より大きい画像を自動的に選択してレイアウトできるので、ユーザが複数の画像の中から、アルバムに配置することを所望する被写体が含まれているか否かを判断することなく、容易にアルバムに配置すべき被写体が含まれる画像を抽出できる。また、被写体の特徴部分の画像を用いて複数の画像の中から当該被写体が含まれている画像を抽出できるので、画像に複数の人物が含まれていた場合でも的確に所望の被写体が含まれる画像を抽出できる。例えば、複数の画像に兄弟および双子等、複数の画像を提供したユーザを除く第三者には識別が困難な被写体が含まれている場合でも、本実施形態に係るアルバム作成装置10によれば、的確に所望の被写体が含まれる画像を自動的に選択してアルバムを作成できる。   According to the album creating apparatus 10 according to the present embodiment, an image of a feature portion of a subject specified by the specific subject information 200 is extracted, and the extracted feature portion image is compared with a part of a plurality of images. Images that are larger than a predetermined similarity can be automatically selected and laid out, so that the user does not have to determine whether or not a subject desired to be placed in an album is included from among a plurality of images Thus, it is possible to easily extract an image including a subject to be arranged in the album. In addition, since an image including the subject can be extracted from a plurality of images using an image of a characteristic portion of the subject, a desired subject is accurately included even when a plurality of persons are included in the image. Images can be extracted. For example, according to the album creating apparatus 10 according to the present embodiment, even when a third party excluding a user who provided a plurality of images such as brothers and twins includes a subject that is difficult to identify. An album can be created by automatically selecting an image including a desired subject accurately.

図3は、本実施形態に係る特定被写体情報200の一例を示す。特定被写体情報200は、名称情報202、画像識別情報204、特定被写体位置情報206、配役情報208、誕生日情報210、および特徴位置情報212を有する。特定被写体情報200は、アルバムに含まれる被写体ごとに作成されていてよい。名称情報202は、画像に含まれる被写体の名称を示す情報であってよい。具体的には、名称情報202は、被写体の名称を示す文字列の情報であってよい。画像識別情報204は、特定被写体が含まれる画像を識別する情報であってよい。具体的には、画像識別情報204は、画像入力部100が入力する複数の画像に含まれる画像のうち、特定被写体が含まれる一の画像を識別する情報であってよい。例えば、画像識別情報204は、画像を一意に識別する識別子、ファイル名等であってよい。また、特定被写体位置情報206は、画像識別情報204で識別される画像に含まれる特定被写体が、当該画像において占める位置を示す情報であってよい。例えば、特定被写体位置情報206は、画像識別情報204で識別される画像において特定被写体が占める領域に含まれる座標を示すデータであってよい。   FIG. 3 shows an example of the specific subject information 200 according to the present embodiment. The specific subject information 200 includes name information 202, image identification information 204, specific subject position information 206, casting information 208, birthday information 210, and characteristic position information 212. The specific subject information 200 may be created for each subject included in the album. The name information 202 may be information indicating the name of the subject included in the image. Specifically, the name information 202 may be character string information indicating the name of the subject. The image identification information 204 may be information for identifying an image including a specific subject. Specifically, the image identification information 204 may be information for identifying one image including a specific subject among images included in a plurality of images input by the image input unit 100. For example, the image identification information 204 may be an identifier that uniquely identifies an image, a file name, or the like. Further, the specific subject position information 206 may be information indicating a position occupied by the specific subject included in the image identified by the image identification information 204 in the image. For example, the specific subject position information 206 may be data indicating coordinates included in an area occupied by the specific subject in the image identified by the image identification information 204.

配役情報208は、アルバムでの被写体の立場を示す情報であってよい。例えば、配役情報208は、アルバムで特定被写体が主人公である旨を示す情報、または脇役である旨を示す情報、若しくは、主人公と特定の関係を有する人物であることを示す情報(例えば、主人公の友人、兄弟、父母、および祖父母等であることを示す情報)、主人公のペットであることを示す情報、主人公の持ち物であることを示す情報等であってよい。また、誕生日情報210は、画像識別情報204で識別される画像に含まれる特定被写体が人物である場合には、当該人物の誕生日を示す情報であってよい。更に、特徴位置情報212は、画像識別情報204で識別される画像に含まれる特定被写体の特徴部分の位置または領域を示す情報であってよい。特徴位置情報212は、被写体の特徴部分が画像において占める位置を示す座標データであってよい。また、特徴位置情報212は、特徴部分を含む領域を、複数の座標データで特定する情報であってよい。例えば、特徴位置情報212は、特定被写体の所定の特徴部分を含む、矩形で区切った領域を特定する情報である。なお、特定被写体の特徴部分を含む領域を特定する形状は矩形に限らず、円形等他の形状であってもよい。また、特徴位置情報212は、特定被写体の一の特徴部分と他の特徴部分との相関関係を示す情報であってよい。例えば、特徴位置情報212は、一の特徴部分と他の特徴部分との間の距離を示す情報であってもよい。   The casting information 208 may be information indicating the position of the subject in the album. For example, the casting information 208 is information indicating that the specific subject is the main character in the album, information indicating that the specific subject is a supporting character, or information indicating that the subject has a specific relationship with the main character (for example, the hero's character). Information indicating that it is a friend, sibling, parent, grandparent, etc.), information indicating that it is a hero's pet, information indicating that it is a hero's belongings, or the like. The birthday information 210 may be information indicating the birthday of the person when the specific subject included in the image identified by the image identification information 204 is a person. Further, the feature position information 212 may be information indicating the position or area of the feature portion of the specific subject included in the image identified by the image identification information 204. The feature position information 212 may be coordinate data indicating the position occupied by the feature portion of the subject in the image. Further, the feature position information 212 may be information for specifying a region including a feature portion with a plurality of coordinate data. For example, the feature position information 212 is information for specifying a rectangular region including a predetermined feature portion of a specific subject. Note that the shape for specifying the region including the characteristic portion of the specific subject is not limited to a rectangle, and may be another shape such as a circle. The feature position information 212 may be information indicating a correlation between one feature portion of the specific subject and another feature portion. For example, the feature position information 212 may be information indicating a distance between one feature portion and another feature portion.

図4は、本実施形態に係るテンプレート格納部115が格納しているテンプレート400の一例を示す。テンプレート格納部115は、画像配置枠と当該画像配置枠に配置されるべき画像の合成情報とが予め定められた出力領域のテンプレートを格納している。なお、一つの出力領域には、複数の画像配置枠が含まれていてよい。また、画像配置枠は略円形、略多角形、および画像に含まれるオブジェクトの形状等の形状であってよい。例えば、テンプレート400には画像配置枠410および画像配置枠420が含まれている。そして、画像配置枠410には合成情報412が対応づけられており、画像配置枠420には合成情報422が対応づけられている。係る場合において、アルバム作成部150は、例えば、画像配置枠420に対応づけられている合成情報422を抽出して、合成情報422と一致する情報を有する画像を特定被写体画像選択部140から受け取る。例えば、合成情報422に主人公を特定する情報(例えば、Heroine)が対応づけられていた場合には、アルバム作成部150は、当該主人公を特定する情報と一致する人物が含まれる画像を、特定被写体画像選択部140から受け取る。また、合成情報412に、主人公の友人を特定する情報(例えば、Friend)が対応づけられていた場合には、アルバム作成部150は、当該友人を特定する情報と一致する人物が含まれる画像を、特定被写体画像選択部140から受け取る。そして、アルバム作成部150は、受け取った画像をそれぞれ画像配置枠410および画像配置枠420にレイアウトしてアルバムを作成する。   FIG. 4 shows an example of the template 400 stored in the template storage unit 115 according to the present embodiment. The template storage unit 115 stores a template of an output area in which an image arrangement frame and synthesis information of images to be arranged in the image arrangement frame are predetermined. One output area may include a plurality of image arrangement frames. Further, the image arrangement frame may be a shape such as a substantially circular shape, a substantially polygonal shape, and a shape of an object included in the image. For example, the template 400 includes an image arrangement frame 410 and an image arrangement frame 420. Then, the composition information 412 is associated with the image arrangement frame 410, and the composition information 422 is associated with the image arrangement frame 420. In such a case, for example, the album creating unit 150 extracts the synthesis information 422 associated with the image arrangement frame 420 and receives an image having information matching the synthesis information 422 from the specific subject image selection unit 140. For example, when information (for example, Heroine) that identifies the main character is associated with the composite information 422, the album creating unit 150 displays an image including a person that matches the information that identifies the main character as a specific subject. Received from the image selector 140. In addition, when the composite information 412 is associated with information that identifies a friend of the main character (for example, Friends), the album creating unit 150 displays an image including a person that matches the information that identifies the friend. And received from the specific subject image selection unit 140. Then, the album creating unit 150 creates an album by laying out the received images in the image arrangement frame 410 and the image arrangement frame 420, respectively.

また、テンプレート400には、画像配置枠410に対応づけて文字情報414が対応づけられている。更に、画像配置枠420には文字情報424が対応づけられている。アルバム作成部150は、特定被写体情報取得部105から受け取った特定被写体情報200に応じて、文字情報414および文字情報424を変更して配置してよい。例えば、特定被写体情報取得部105から名称情報を受け取った場合には、アルバム作成部150は、文字情報424の一部を、受け取った名称情報が示す被写体の名前に変更して画像配置枠420に重畳して配置する。なお、アルバム作成部150は、文字情報424の一部を変更して、画像配置枠420に並べて配置してもよい。また、特定被写体情報取得部105から被写体の誕生日情報を受け取った場合には、アルバム作成部150は、誕生日情報から被写体の年齢を計算して、被写体の年齢に応じて文字情報414のフォントおよび色を変更してもよい。   The template 400 is associated with character information 414 in association with the image arrangement frame 410. Furthermore, character information 424 is associated with the image arrangement frame 420. The album creating unit 150 may change and arrange the character information 414 and the character information 424 in accordance with the specific subject information 200 received from the specific subject information acquisition unit 105. For example, when the name information is received from the specific subject information acquisition unit 105, the album creation unit 150 changes a part of the character information 424 to the name of the subject indicated by the received name information and displays it in the image arrangement frame 420. Superimpose and arrange. Note that the album creating unit 150 may change a part of the character information 424 and arrange it side by side in the image arrangement frame 420. When the birthday information of the subject is received from the specific subject information acquisition unit 105, the album creating unit 150 calculates the age of the subject from the birthday information, and the font of the character information 414 according to the age of the subject. And the color may be changed.

図5は、本実施形態に係るアルバム作成装置10における処理の流れの一例を示す。まず、特徴部分画像抽出部120は、特定被写体情報取得部105から受け取った特定被写体情報200が有する画像識別情報で識別される画像を、画像格納部110から抽出する(S1000)。例えば、画像識別情報で識別される画像が画像300である場合には、特徴部分画像抽出部120は画像300を画像格納部110から抽出する。画像300には、人物302の画像が含まれている。そして、特定被写体情報200は、画像識別情報の他に、人物302の名称情報、画像300において人物302が占める位置を示す特定被写体位置情報、人物302のアルバムにおける立場を示す配役情報、および人物302の特徴部分の領域を示す特徴位置情報等を有する。続いて、特徴部分画像抽出部120は、特徴位置情報で指定される特徴部分の特徴部分画像を抽出する(S1100)。例えば、画像300では人物302の特徴部分は、特徴部分304で示すほくろを含む領域である。そして、特徴部分画像抽出部120は、画像300から特徴部分304の画像である特徴部分画像306を抽出する。特徴部分画像抽出部120は、抽出した特徴部分画像306を類似度算出部130に供給する。   FIG. 5 shows an example of a processing flow in the album creating apparatus 10 according to the present embodiment. First, the feature partial image extraction unit 120 extracts an image identified by the image identification information included in the specific subject information 200 received from the specific subject information acquisition unit 105 from the image storage unit 110 (S1000). For example, when the image identified by the image identification information is the image 300, the feature portion image extraction unit 120 extracts the image 300 from the image storage unit 110. The image 300 includes an image of the person 302. The specific subject information 200 includes, in addition to the image identification information, name information of the person 302, specific subject position information indicating the position occupied by the person 302 in the image 300, casting information indicating the position of the person 302 in the album, and the person 302. And feature position information indicating the region of the feature portion. Subsequently, the feature part image extraction unit 120 extracts a feature part image of the feature part specified by the feature position information (S1100). For example, in the image 300, the characteristic part of the person 302 is an area including a mole indicated by the characteristic part 304. Then, the feature part image extraction unit 120 extracts a feature part image 306 that is an image of the feature part 304 from the image 300. The feature partial image extraction unit 120 supplies the extracted feature partial image 306 to the similarity calculation unit 130.

類似度算出部130は、特徴部分画像抽出部120から受け取った特徴部分画像306と、画像格納部110が格納している複数の画像の一部との類似度を算出する(S1200)。具体的には、類似度算出部130は、特徴部分画像306と複数の画像とをマッチングして、複数の画像のそれぞれについて特徴部分画像306との類似度を算出する。そして、類似度算出部130は、算出した類似度を複数の画像のそれぞれに対応づけて特定被写体画像選択部140に供給する。特定被写体画像選択部140は、画像格納部110が格納している複数の画像から、類似度算出部130から受け取った類似度が予め定められた類似度よりも大きい画像320を選択する(S1300)。なお、特定被写体画像選択部140は、複数の画像を選択してよい。特定被写体画像選択部140は、選択した画像をアルバム作成部150に供給する。アルバム作成部150は、テンプレート格納部115から受け取ったアルバムのテンプレート400に配置されている画像配置枠の合成情報に基づいて、特定被写体画像選択部140から受け取った画像を画像配置枠にレイアウトしてアルバムを作成する(S1400)。アルバム作成部150は作成したアルバムをアルバム出力部160に供給する。アルバム出力部160は、アルバム作成部150が作成したアルバムを出力する(S1500)。   The similarity calculation unit 130 calculates the similarity between the feature partial image 306 received from the feature partial image extraction unit 120 and some of the plurality of images stored in the image storage unit 110 (S1200). Specifically, the similarity calculation unit 130 matches the feature partial image 306 with a plurality of images, and calculates the similarity with the feature partial image 306 for each of the plurality of images. Then, the similarity calculation unit 130 supplies the calculated similarity to the specific subject image selection unit 140 in association with each of a plurality of images. The specific subject image selection unit 140 selects an image 320 in which the similarity received from the similarity calculation unit 130 is greater than a predetermined similarity from the plurality of images stored in the image storage unit 110 (S1300). . Note that the specific subject image selection unit 140 may select a plurality of images. The specific subject image selection unit 140 supplies the selected image to the album creation unit 150. The album creation unit 150 lays out the image received from the specific subject image selection unit 140 in the image arrangement frame based on the combination information of the image arrangement frame arranged in the album template 400 received from the template storage unit 115. An album is created (S1400). The album creating unit 150 supplies the created album to the album output unit 160. The album output unit 160 outputs the album created by the album creation unit 150 (S1500).

図6は、本発明の他の実施形態に係るアルバム作成装置10の機能構成の一例を示す。アルバム作成装置10は、画像入力部100、特定被写体情報取得部105、画像格納部110、テンプレート格納部115、特徴部分画像抽出部120、特定被写体顔画像抽出部125、類似度算出部130、特徴部分情報格納部135、特定被写体画像選択部140、アルバム作成部150、アルバム出力部160、および平均顔画像生成部170を備える。なお、本実施形態に係るアルバム作成装置10は、図1から図5の上記説明で説明したアルバム作成装置10の機能の一部または全部を更に備えてよい。また、本実施形態に係るアルバム作成装置10が備える部材のうち、図1から図5の上記説明において説明した部材と同一の符号が付されている部材については、略同一の機能および作用を奏するので、詳細な説明は省略する。   FIG. 6 shows an example of a functional configuration of the album creating apparatus 10 according to another embodiment of the present invention. The album creating apparatus 10 includes an image input unit 100, a specific subject information acquisition unit 105, an image storage unit 110, a template storage unit 115, a feature partial image extraction unit 120, a specific subject face image extraction unit 125, a similarity calculation unit 130, a feature. A partial information storage unit 135, a specific subject image selection unit 140, an album creation unit 150, an album output unit 160, and an average face image generation unit 170 are provided. The album creating apparatus 10 according to the present embodiment may further include some or all of the functions of the album creating apparatus 10 described in the above description of FIGS. Of the members provided in the album creating apparatus 10 according to the present embodiment, members having the same reference numerals as those described in the above description of FIGS. 1 to 5 have substantially the same functions and operations. Therefore, detailed description is omitted.

画像入力部100は、複数の画像を入力する。画像入力部100は入力した複数の画像を、画像格納部110に供給する。画像格納部110は、画像入力部100から受け取った複数の画像を、複数の画像のそれぞれを一意に識別できる識別子に対応づけて格納する。画像格納部110は、画像を特定被写体顔画像抽出部125、類似度算出部130、特定被写体画像選択部140、および平均顔画像生成部170に供給する。特定被写体情報取得部105は、特定被写体の顔画像を含む画像を識別する画像識別情報、および画像識別情報で識別される画像における特定被写体の顔画像の位置を示す顔画像位置情報等を有する特定被写体情報200を取得する。顔画像位置情報は、画像における特定被写体の顔画像の位置を示す座標データであってよい。また、顔画像位置情報は、特定被写体の顔画像の領域内の少なくとも1つの点を指定する座標データ、または、特定被写体の顔画像の領域を含む領域を指定する複数の座標データであってよい。なお、特定被写体情報取得部105は、複数の被写体ごとに異なる特定被写体情報200を取得してよい。特定被写体情報取得部105は、特定被写体情報200を特定被写体顔画像抽出部125およびアルバム作成部150に供給する。   The image input unit 100 inputs a plurality of images. The image input unit 100 supplies a plurality of input images to the image storage unit 110. The image storage unit 110 stores a plurality of images received from the image input unit 100 in association with identifiers that can uniquely identify each of the plurality of images. The image storage unit 110 supplies the image to the specific subject face image extraction unit 125, the similarity calculation unit 130, the specific subject image selection unit 140, and the average face image generation unit 170. The specific subject information acquisition unit 105 includes image identification information for identifying an image including the face image of the specific subject, and face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information. Subject information 200 is acquired. The face image position information may be coordinate data indicating the position of the face image of the specific subject in the image. Further, the face image position information may be coordinate data specifying at least one point in the face image area of the specific subject, or a plurality of coordinate data specifying areas including the face image area of the specific subject. . The specific subject information acquisition unit 105 may acquire different specific subject information 200 for each of a plurality of subjects. The specific subject information acquisition unit 105 supplies the specific subject information 200 to the specific subject face image extraction unit 125 and the album creation unit 150.

特定被写体顔画像抽出部125は、特定被写体情報取得部105から受け取った特定被写体情報200が有する画像識別情報で識別される画像から、顔画像位置情報で特定される特定被写体の顔画像である特定被写体顔画像を抽出する。特定被写体顔画像抽出部125は、顔画像位置情報として、画像における特定被写体の顔画像の領域内1つの点を指定する座標データを受け取った場合には、エッジ抽出および肌色抽出等の画像処理を用いて特定被写体の輪郭を特定して、特定被写体顔画像を抽出してもよい。特定被写体顔画像抽出部125は、抽出した特定被写体顔画像を、特徴部分画像抽出部120に供給する。平均顔画像生成部170は、画像格納部110から受け取った複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する。なお、被写体の顔は、人物の顔だけではなく、動物、車等のオブジェクトの外観を意味する。平均顔画像生成部170は、生成した平均顔画像を特徴部分画像抽出部120に供給する。   The specific subject face image extraction unit 125 is a face image of a specific subject specified by face image position information from the image identified by the image identification information included in the specific subject information 200 received from the specific subject information acquisition unit 105. A subject face image is extracted. When the specific subject face image extraction unit 125 receives, as face image position information, coordinate data specifying one point in the area of the face image of the specific subject in the image, image processing such as edge extraction and skin color extraction is performed. The contour of the specific subject may be specified to extract the specific subject face image. The specific subject face image extraction unit 125 supplies the extracted specific subject face image to the feature portion image extraction unit 120. The average face image generation unit 170 generates an average face image that is an image of the average face of the plurality of subjects from the images of the face areas of the plurality of subjects included in each of the plurality of images received from the image storage unit 110. The face of the subject means not only the face of a person but also the appearance of an object such as an animal or a car. The average face image generation unit 170 supplies the generated average face image to the feature portion image extraction unit 120.

特徴部分画像抽出部120は、特定被写体顔画像抽出部125から受け取った特定被写体顔画像と平均顔画像生成部170から受け取った平均顔画像とを比較する。そして、特徴部分画像抽出部120は、特定被写体顔画像のうちで、平均顔画像と最も差異が大きい部位の領域の画像、または、予め定められた差異がより大きい部位の領域の画像を、特定被写体の第1特徴部分画像として抽出する。なお、部位とは、被写体の顔に含まれる眼、鼻、口、耳、ほくろ、えくぼ、頬、しみ、およびそばかす等であってよい。例えば、特徴部分画像抽出部120は、特定被写体顔画像に含まれる部位の画像と平均顔画像に含まれる部位の画像とをマッチングして、複数の部位ごとの差異を算出する。そして、特徴部分画像抽出部120は、特定被写体顔画像に含まれる部位の画像のうちで平均顔画像に含まれる部位の画像と最も差異が大きい部位の領域の画像を第1特徴部分画像として抽出する。また、特徴部分画像抽出部120は、特定被写体顔画像と平均顔画像とを比較して、特定被写体顔画像のうちで第1特徴部分画像の次に平均顔画像との差異が大きい部位の領域の画像を、第2特徴部分画像として抽出する。なお、特徴部分画像抽出部120は、特定被写体顔画像と平均顔画像とを比較して、特定被写体画像のうちで平均顔画像との差異が大きい順に複数の部位の領域の画像を、特徴部分画像として抽出してもよい。特徴部分画像抽出部120は、抽出した第1特徴部分画像および第2特徴部分画像を、類似度算出部130に供給する。また、特徴部分画像抽出部120は、特定被写体画像における特徴部分の位置を示す情報を特徴部分情報格納部135に供給する。   The feature partial image extraction unit 120 compares the specific subject face image received from the specific subject face image extraction unit 125 with the average face image received from the average face image generation unit 170. Then, the feature part image extraction unit 120 identifies an image of a region having the largest difference from the average face image or an image of a region having a larger predetermined difference among the specific subject face images. Extracted as a first characteristic partial image of the subject. The part may be an eye, a nose, a mouth, an ear, a mole, a dimple, a cheek, a stain, a freckles, etc. included in the face of the subject. For example, the feature part image extraction unit 120 matches a part image included in the specific subject face image with a part image included in the average face image, and calculates a difference for each of the plurality of parts. Then, the feature part image extraction unit 120 extracts, as a first feature part image, an image of a part having the largest difference from the part image included in the average face image among the part images included in the specific subject face image. To do. Further, the feature part image extraction unit 120 compares the specific subject face image with the average face image, and in the part of the specific subject face image, the region having the largest difference from the average face image next to the first feature part image Are extracted as the second feature partial image. Note that the feature portion image extraction unit 120 compares the specific subject face image and the average face image, and extracts the images of the regions of the plurality of parts in the descending order of the difference from the average face image in the specific subject image. You may extract as an image. The feature partial image extraction unit 120 supplies the extracted first feature partial image and second feature partial image to the similarity calculation unit 130. Further, the feature part image extraction unit 120 supplies information indicating the position of the feature part in the specific subject image to the feature part information storage unit 135.

類似度算出部130は、画像格納部110から受け取った複数の画像と特徴部分画像抽出部120から受け取った第1特徴部分画像とを比較して、画像格納部110が格納している複数の画像の一部と第1特徴部分画像との第1類似度を算出する。また、類似度算出部130は、画像格納部110から受け取った複数の画像と特徴部分画像抽出部120から受け取った第2特徴部分画像とを比較して、画像格納部110が格納している複数の画像の一部と第2特徴部分画像との第2類似度を算出する。なお、類似度算出部130は、複数の特徴部分画像について、それぞれ類似度を算出してもよい。類似度算出部130は、算出した類似度を画像格納部110から受け取った複数の画像のそれぞれに対応づけて、特徴部分情報格納部135および特定被写体画像選択部140に供給する。   The similarity calculation unit 130 compares the plurality of images received from the image storage unit 110 with the first feature partial image received from the feature part image extraction unit 120, and stores a plurality of images stored in the image storage unit 110. A first similarity between a part of the first feature partial image and the first feature partial image is calculated. The similarity calculation unit 130 compares the plurality of images received from the image storage unit 110 with the second feature partial image received from the feature part image extraction unit 120, and stores the plurality of images stored in the image storage unit 110. The second similarity between the part of the image and the second feature partial image is calculated. Note that the similarity calculation unit 130 may calculate the similarity for each of the plurality of feature portion images. The similarity calculation unit 130 associates the calculated similarity with each of the plurality of images received from the image storage unit 110 and supplies the similarity to the feature portion information storage unit 135 and the specific subject image selection unit 140.

特徴部分情報格納部135は、複数の特定被写体のそれぞれに対応づけて、特定被写体画像における特徴部分の位置を示す情報を格納する。具体的には、特徴部分情報格納部135は、特徴部分画像抽出部120から受け取った特徴部分の位置を示す情報を、特定被写体ごとに対応づけて格納する。なお、特徴部分情報格納部135は、特徴部分を含む領域である特徴領域の範囲を特定する情報を、特定被写体ごとに対応づけて格納してもよい。また、特徴部分情報格納部135は、特定被写体画像において特徴部分が複数ある場合には、複数の特徴部分ごとに特徴部分の位置を特定する座標データを特定被写体に対応づけて格納してもよい。更に、特徴部分情報格納部135は、類似度算出部130から類似度を受け取った場合には、画像格納部110が格納している複数の画像のそれぞれに対応づけて特徴部分の位置を示す情報を格納すると共に、特徴部分の位置に更に類似度を対応づけて格納する。特徴部分情報格納部135は、特定被写体画像選択部140の制御に基づいて、格納している類似度を特定被写体画像選択部140に供給してよい。   The feature part information storage unit 135 stores information indicating the position of the feature part in the specific subject image in association with each of the plurality of specific subjects. Specifically, the feature part information storage unit 135 stores information indicating the position of the feature part received from the feature part image extraction unit 120 in association with each specific subject. Note that the feature portion information storage unit 135 may store information for specifying the range of the feature region that is a region including the feature portion in association with each specific subject. In addition, when there are a plurality of feature portions in the specific subject image, the feature portion information storage unit 135 may store coordinate data for specifying the position of the feature portion for each of the plurality of feature portions in association with the specific subject. . Furthermore, when the feature portion information storage unit 135 receives the similarity from the similarity calculation unit 130, the feature portion information storage unit 135 indicates the position of the feature portion in association with each of the plurality of images stored in the image storage unit 110. Is stored, and the similarity is further associated with the position of the feature portion. The feature portion information storage unit 135 may supply the stored similarity to the specific subject image selection unit 140 based on the control of the specific subject image selection unit 140.

特定被写体画像選択部140は、画像格納部110が格納している複数の画像のうち、類似度算出部130から受け取った第1類似度が予め定められた類似度よりも大きい画像を選択する。また、特定被写体画像選択部140は、画像格納部110が格納している複数の画像のうち、類似度算出部130から受け取った第1類似度に第2類似度よりも大きく重みづけする。なお、特定被写体画像選択部140は、特徴部分情報格納部135から受け取った類似度を用いて、第1類似度および第2類似度にそれぞれ重みを重みづけてもよい。特定被写体画像選択部140が特徴部分情報格納部135に格納されている類似度を用いることにより、類似度算出部130は、特定被写体画像選択部140が画像を選択するたびに処理をすることがなくなるので、アルバム作成の処理効率を向上させることができる。   The specific subject image selection unit 140 selects an image in which the first similarity received from the similarity calculation unit 130 is greater than a predetermined similarity among the plurality of images stored in the image storage unit 110. In addition, the specific subject image selection unit 140 weights the first similarity received from the similarity calculation unit 130 more than the second similarity among the plurality of images stored in the image storage unit 110. The specific subject image selection unit 140 may weight each of the first similarity and the second similarity by using the similarity received from the feature part information storage unit 135. By using the similarity stored in the characteristic part information storage unit 135 by the specific subject image selection unit 140, the similarity calculation unit 130 can perform processing each time the specific subject image selection unit 140 selects an image. As a result, the processing efficiency of album creation can be improved.

続いて、特定被写体画像選択部140は、重み付けした第1類似度と第2類似度との合計を算出する。そして、特定被写体画像選択部140は、算出した合計類似度が予め定められた類似度より大きい画像を選択する。なお、特定被写体画像選択部140は、類似度算出部130から複数の類似度を受け取った場合には、受け取った類似度のそれぞれに重みづけしてよい。これにより、特定被写体画像選択部140は、画像格納部110から受け取った複数の画像と複数の特徴部分画像とから算出した複数の類似度のそれぞれに重みづけして、重みづけした複数の類似度を合計した合計類似度から画像を選択するので、一の特徴部分画像から一の類似度を算出して画像を選択する場合よりも、より的確に特定被写体が含まれる画像を抽出できる。特定被写体画像選択部140は、選択した画像をアルバム作成部150に供給する。   Subsequently, the specific subject image selection unit 140 calculates the sum of the weighted first similarity and second similarity. Then, the specific subject image selection unit 140 selects an image in which the calculated total similarity is greater than a predetermined similarity. When the specific subject image selection unit 140 receives a plurality of similarities from the similarity calculation unit 130, the specific subject image selection unit 140 may weight each of the received similarities. Thus, the specific subject image selection unit 140 weights each of the plurality of similarities calculated from the plurality of images and the plurality of feature portion images received from the image storage unit 110, and weights the plurality of similarities. Since the image is selected from the total similarity obtained by summing up the images, an image including the specific subject can be extracted more accurately than in the case of selecting one image by calculating one similarity from one feature image. The specific subject image selection unit 140 supplies the selected image to the album creation unit 150.

テンプレート格納部115は、画像を配置する画像配置枠に対応づけて、画像配置枠に特定被写体画像選択部140が選択した画像を配置すべき旨を示す合成情報が予め定められたテンプレートを格納している。テンプレート格納部115は、テンプレートをアルバム作成部150に供給する。アルバム作成部150は、特定被写体画像選択部140から受け取った画像をレイアウトしてアルバムを作成する。アルバム作成部150は、作成したアルバムをアルバム出力部160に供給する。アルバム出力部160は、アルバム作成部150から受け取ったアルバムを出力する。   The template storage unit 115 stores a template in which composite information indicating that the image selected by the specific subject image selection unit 140 should be placed in the image placement frame is associated with the image placement frame in which the image is placed. ing. The template storage unit 115 supplies the template to the album creation unit 150. The album creating unit 150 creates an album by laying out the images received from the specific subject image selecting unit 140. The album creating unit 150 supplies the created album to the album output unit 160. The album output unit 160 outputs the album received from the album creation unit 150.

本実施形態に係るアルバム作成装置10は、複数の画像に含まれる被写体の顔画像から平均顔画像を生成する。そして、生成した平均顔画像と特定被写体情報で特定される被写体の特定被写体顔画像とを比較して、平均顔画像と最も差異が大きい部位の領域の画像を被写体の特徴部分画像と決定することができる。そして、決定した特徴部分画像を用いて、特定被写体情報で特定される被写体が含まれる画像を自動的に抽出できる。これにより、アルバム作成装置10は、特定被写体情報が被写体の特徴部分の位置を示す特徴位置情報を有していない場合でも、的確に特定被写体が含まれるが画像を抽出できる。   The album creating apparatus 10 according to the present embodiment generates an average face image from face images of subjects included in a plurality of images. Then, the generated average face image is compared with the specific subject face image of the subject specified by the specific subject information, and the image of the region having the largest difference from the average face image is determined as the feature partial image of the subject. Can do. Then, an image including the subject specified by the specific subject information can be automatically extracted using the determined feature portion image. Thereby, even when the specific subject information does not have the characteristic position information indicating the position of the characteristic portion of the subject, the album creating apparatus 10 can accurately extract the image although the specific subject is included.

図7は、本実施形態に係る特徴部分情報格納部135のデータ構造の一例を示す。特徴部分情報格納部135は、特徴部分画像抽出部120から受け取った特徴部分の位置を示す情報を、特定被写体ごとに対応づけて格納する。例えば、特定被写体情報で特定される被写体が人物600である場合には、特徴部分情報格納部135は、人物600に対応づけて、人物600の特徴部分の位置を示す情報を格納する。ここで、特徴部分の位置を示す情報は、特定被写体画像において特徴部分が占める範囲を特定する座標データであってよい。また、特徴部分情報格納部135は、特定被写体画像において特徴部分が複数ある場合には、複数の特徴部分の領域を特定する座標データを、特定被写体に対応づけて格納してよい。   FIG. 7 shows an example of the data structure of the feature portion information storage unit 135 according to this embodiment. The feature part information storage unit 135 stores information indicating the position of the feature part received from the feature part image extraction unit 120 in association with each specific subject. For example, when the subject specified by the specific subject information is the person 600, the feature portion information storage unit 135 stores information indicating the position of the feature portion of the person 600 in association with the person 600. Here, the information indicating the position of the characteristic part may be coordinate data that specifies a range occupied by the characteristic part in the specific subject image. In addition, when there are a plurality of feature portions in the specific subject image, the feature portion information storage unit 135 may store coordinate data for specifying regions of the plurality of feature portions in association with the specific subject.

また、特徴部分情報格納部135は、画像格納部110が格納している複数の画像のそれぞれに対応づけて、特定被写体ごとに特徴部分の類似度を格納してもよい。具体的には、画像格納部110が格納している画像360、画像370等に対応づけて、人物600、人物610等の複数の特定被写体ごとに、特徴部分の類似度を格納する。例えば、画像360に人物600の特徴部分が含まれている場合には、特徴部分情報格納部135は、画像360および人物600に対応づけて、人物600の特徴部分の類似度を格納する。また、画像360に人物610の特徴部分が含まれていない場合には、特徴部分情報格納部135は、画像360および人物610に対応づけて、人物610の特徴部分の類似度を格納しないか、または、類似度をゼロとして格納する。   Further, the feature portion information storage unit 135 may store the similarity of the feature portion for each specific subject in association with each of the plurality of images stored in the image storage unit 110. Specifically, the similarity of the characteristic portion is stored for each of a plurality of specific subjects such as the person 600 and the person 610 in association with the image 360 and the image 370 stored in the image storage unit 110. For example, when the feature portion of the person 600 is included in the image 360, the feature portion information storage unit 135 stores the similarity of the feature portion of the person 600 in association with the image 360 and the person 600. If the feature portion of the person 610 is not included in the image 360, the feature portion information storage unit 135 may store the similarity of the feature portion of the person 610 in association with the image 360 and the person 610. Alternatively, the similarity is stored as zero.

図8は、本実施形態に係るアルバム作成装置10のハードウェア構成の一例を示す。本実施形態に係るアルバム作成装置10は、ホスト・コントローラ1582により相互に接続されるCPU1505、RAM1520、グラフィック・コントローラ1575、及び表示装置1580を有するCPU周辺部と、入出力コントローラ1584によりホスト・コントローラ1582に接続される通信インターフェイス1530、ハードディスクドライブ1540、及びCD−ROMドライブ1560を有する入出力部と、入出力コントローラ1584に接続されるROM1510、フレキシブルディスク・ドライブ1550、及び入出力チップ1570を有するレガシー入出力部とを備える。   FIG. 8 shows an example of a hardware configuration of the album creating apparatus 10 according to the present embodiment. The album creating apparatus 10 according to this embodiment includes a CPU peripheral unit including a CPU 1505, a RAM 1520, a graphic controller 1575, and a display device 1580 connected to each other by a host controller 1582, and a host controller 1582 by an input / output controller 1584. I / O unit having a communication interface 1530, a hard disk drive 1540, and a CD-ROM drive 1560 connected to the I / O controller, and a legacy input having a ROM 1510, a flexible disk drive 1550, and an I / O chip 1570 connected to the I / O controller 1584. And an output unit.

ホスト・コントローラ1582は、RAM1520と、高い転送レートでRAM1520をアクセスするCPU1505及びグラフィック・コントローラ1575とを接続する。CPU1505は、ROM1510及びRAM1520に格納されたプログラムに基づいて動作して、各部を制御する。グラフィック・コントローラ1575は、CPU1505等がRAM1520内に設けたフレーム・バッファ上に生成する画像データを取得して、表示装置1580上に表示させる。これに代えて、グラフィック・コントローラ1575は、CPU1505等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。   The host controller 1582 connects the RAM 1520 to the CPU 1505 and the graphic controller 1575 that access the RAM 1520 at a high transfer rate. The CPU 1505 operates based on programs stored in the ROM 1510 and the RAM 1520 to control each unit. The graphic controller 1575 acquires image data generated by the CPU 1505 or the like on a frame buffer provided in the RAM 1520 and displays the image data on the display device 1580. Alternatively, the graphic controller 1575 may include a frame buffer that stores image data generated by the CPU 1505 or the like.

入出力コントローラ1584は、ホスト・コントローラ1582と、比較的高速な入出力装置である通信インターフェイス1530、ハードディスクドライブ1540、CD−ROMドライブ1560を接続する。通信インターフェイス1530は、ネットワークを介して他の装置と通信する。ハードディスクドライブ1540は、アルバム作成装置10内のCPU1505が使用するプログラム及びデータを格納する。CD−ROMドライブ1560は、CD−ROM1595からプログラム又はデータを読み取り、RAM1520を介してハードディスクドライブ1540に提供する。   The input / output controller 1584 connects the host controller 1582 to the communication interface 1530, the hard disk drive 1540, and the CD-ROM drive 1560, which are relatively high-speed input / output devices. The communication interface 1530 communicates with other devices via a network. The hard disk drive 1540 stores programs and data used by the CPU 1505 in the album creating apparatus 10. The CD-ROM drive 1560 reads a program or data from the CD-ROM 1595 and provides it to the hard disk drive 1540 via the RAM 1520.

また、入出力コントローラ1584には、ROM1510と、フレキシブルディスク・ドライブ1550、及び入出力チップ1570の比較的低速な入出力装置とが接続される。ROM1510は、アルバム作成装置10が起動時に実行するブート・プログラム、アルバム作成装置10のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ1550は、フレキシブルディスク1590からプログラム又はデータを読み取り、RAM1520を介してハードディスクドライブ1540に提供する。入出力チップ1570は、フレキシブルディスク・ドライブ1550、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。   The input / output controller 1584 is connected to the ROM 1510, the flexible disk drive 1550, and the relatively low-speed input / output device of the input / output chip 1570. The ROM 1510 stores a boot program executed when the album creating apparatus 10 is started, a program depending on the hardware of the album creating apparatus 10, and the like. The flexible disk drive 1550 reads a program or data from the flexible disk 1590 and provides it to the hard disk drive 1540 via the RAM 1520. The input / output chip 1570 connects various input / output devices via a flexible disk drive 1550 such as a parallel port, a serial port, a keyboard port, and a mouse port.

RAM1520を介してハードディスクドライブ1540に提供されるアルバム作成プログラムは、フレキシブルディスク1590、CD−ROM1595、又はICカード等の記録媒体に格納されて利用者によって提供される。アルバム作成プログラムは、記録媒体から読み出され、RAM1520を介してアルバム作成装置10内のハードディスクドライブ1540にインストールされ、CPU1505において実行される。アルバム作成装置10にインストールされて実行されるアルバム作成プログラムは、CPU1505等に働きかけて、アルバム作成装置10を、図1から図7にかけて説明した画像入力部100、特定被写体情報取得部105、画像格納部110、テンプレート格納部115.特徴部分画像抽出部120、特定被写体顔画像抽出部125、類似度算出部130、特徴部分情報格納部135、特定被写体画像選択部140、アルバム作成部150、アルバム出力部160、および平均顔画像生成部170として機能させる。   The album creation program provided to the hard disk drive 1540 via the RAM 1520 is stored in a recording medium such as the flexible disk 1590, the CD-ROM 1595, or an IC card and provided by the user. The album creation program is read from the recording medium, installed on the hard disk drive 1540 in the album creation apparatus 10 via the RAM 1520, and executed by the CPU 1505. The album creating program installed and executed in the album creating apparatus 10 works on the CPU 1505 or the like to make the album creating apparatus 10 the image input unit 100, the specific subject information obtaining unit 105, and the image storage described with reference to FIGS. Unit 110, template storage unit 115. Feature part image extraction unit 120, specific subject face image extraction unit 125, similarity calculation unit 130, feature part information storage unit 135, specific subject image selection unit 140, album creation unit 150, album output unit 160, and average face image generation It functions as the unit 170.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加え得ることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

アルバム作成装置10の概要を示す図である。1 is a diagram showing an outline of an album creating apparatus 10. アルバム作成装置10の機能構成を示すブロック図である。3 is a block diagram showing a functional configuration of an album creating apparatus 10. FIG. 特定被写体情報200を示す図である。It is a figure which shows the specific subject information. テンプレート400を示す図である。It is a figure which shows the template 400. FIG. アルバム作成装置10の処理の流れを示すフロー図である。FIG. 4 is a flowchart showing a process flow of the album creating apparatus 10. アルバム作成装置10の機能構成を示すブロック図である。3 is a block diagram showing a functional configuration of an album creating apparatus 10. FIG. 特徴部分情報格納部135のデータ構造を示す図である。It is a figure which shows the data structure of the characteristic part information storage part 135. FIG. アルバム作成装置10のハードウェア構成を示すブロック図である。2 is a block diagram showing a hardware configuration of an album creating apparatus 10. FIG.

符号の説明Explanation of symbols

10 アルバム作成装置
100 画像入力部
105 特定被写体情報取得部
110 画像格納部
115 テンプレート格納部
120 特徴部分画像抽出部
125 特定被写体顔画像抽出部
130 類似度算出部
135 特徴部分情報格納部
140 特定被写体画像選択部
150 アルバム作成部
160 アルバム出力部
170 平均顔画像生成部
200 特定被写体情報
202 名称情報
204 画像識別情報
206 特定被写体位置情報
208 配役情報
210 誕生日情報
212 特徴位置情報
300、320 画像
302 人物
304 特徴部分
306 特徴部分画像
350 画像群
360、370 画像
400、450 テンプレート
410、420 画像配置枠
412、422 合成情報
414、424 文字情報
600、610 人物
1505 CPU
1510 ROM
1520 RAM
1530 通信インターフェイス
1540 ハードディスクドライブ
1550 フレキシブルディスク・ドライブ
1560 CD−ROMドライブ
1570 入出力チップ
1575 グラフィック・コントローラ
1580 表示装置
1582 ホスト・コントローラ
1584 入出力コントローラ
1590 フレキシブルディスク
1595 CD−ROM
DESCRIPTION OF SYMBOLS 10 Album production apparatus 100 Image input part 105 Specific subject information acquisition part 110 Image storage part 115 Template storage part 120 Feature part image extraction part 125 Specific subject face image extraction part 130 Similarity degree calculation part 135 Feature part information storage part 140 Specific subject image Selection unit 150 Album creation unit 160 Album output unit 170 Average face image generation unit 200 Specific subject information 202 Name information 204 Image identification information 206 Specific subject position information 208 Casting information 210 Birthday information 212 Feature position information 300, 320 Image 302 Person 304 Characteristic portion 306 Characteristic portion image 350 Image group 360, 370 Image 400, 450 Template 410, 420 Image arrangement frame 412, 422 Composition information 414, 424 Character information 600, 610 Person 1505 CPU
1510 ROM
1520 RAM
1530 Communication interface 1540 Hard disk drive 1550 Flexible disk drive 1560 CD-ROM drive 1570 Input / output chip 1575 Graphic controller 1580 Display device 1582 Host controller 1584 Input / output controller 1590 Flexible disk 1595 CD-ROM

Claims (5)

複数の画像がレイアウトされたアルバムを作成するアルバム作成装置であって、
複数の画像を格納する画像格納部と、
前記画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成部と、
特定被写体の顔画像を含む画像を識別する画像識別情報、および前記画像識別情報で識別される画像における前記特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得部と、
前記画像識別情報で識別される画像から、前記顔画像位置情報で特定される前記特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出部と、
前記特定被写体顔画像と前記平均顔画像とを比較して、前記特定被写体顔画像のうちで、前記平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、前記特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出部と、
前記画像格納部が格納している複数の画像と前記第1特徴部分画像とを比較して、前記画像格納部が格納している複数の画像の一部と前記第1特徴部分画像との第1類似度を算出する類似度算出部と、
前記画像格納部が格納している複数の画像のうち、前記類似度算出部が算出した前記第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部と、
前記特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部と
を備えるアルバム作成装置。
An album creating apparatus for creating an album in which a plurality of images are laid out,
An image storage unit for storing a plurality of images;
An average face image generation unit that generates an average face image, which is an average face image of a plurality of subjects, from images of face areas of a plurality of subjects included in each of the plurality of images stored in the image storage unit;
Specific subject for acquiring specific subject information having image identification information for identifying an image including a face image of the specific subject, and face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information An information acquisition unit;
A specific subject face image extraction unit that extracts a specific subject face image that is a face image of the specific subject specified by the face image position information from an image identified by the image identification information;
The specific subject face image and the average face image are compared, and among the specific subject face images, an image of a region having the largest difference from the average face image or a portion having a larger predetermined difference is obtained. A feature portion image extraction unit that extracts an image of a region as a first feature portion image of the specific subject;
The plurality of images stored in the image storage unit and the first feature partial image are compared, and a part of the plurality of images stored in the image storage unit and the first feature partial image are compared. A similarity calculation unit for calculating one similarity,
A specific subject image selection unit that selects an image in which the first similarity calculated by the similarity calculation unit is greater than a predetermined similarity among a plurality of images stored in the image storage unit;
An album creation device comprising: an album creation unit that creates an album by laying out the images selected by the specific subject image selection unit.
前記特徴部分画像抽出部は、前記特定被写体顔画像と前記平均顔画像とを比較して、前記特定被写体顔画像のうちで、前記第1特徴部分画像の次に前記平均顔画像との差異が大きい部位の領域の画像を、前記特定被写体の第2特徴部分画像として更に抽出し、
前記類似度算出部は、前記画像格納部が格納している複数の画像と前記第2特徴部分画像とを比較して、前記画像格納部が格納している複数の画像の一部と前記第2特徴部分画像との第2類似度を算出し、
前記特定被写体画像選択部は、前記画像格納部が格納している複数の画像のうち、前記第1類似度に前記第2類似度よりも大きく重み付けして、前記第1類似度と前記第2類似度とを合計することによって算出された合計類似度が予め定められた類似度より大きい画像を選択する
請求項に記載のアルバム作成装置。
The feature portion image extraction unit compares the specific subject face image and the average face image, and among the specific subject face images, a difference from the average face image next to the first feature portion image is determined. An image of a large region is further extracted as a second characteristic partial image of the specific subject,
The similarity calculation unit compares the plurality of images stored in the image storage unit with the second characteristic partial image, and compares a part of the plurality of images stored in the image storage unit with the second feature partial image. Calculate the second similarity with the two feature partial images,
The specific subject image selection unit weights the first similarity higher than the second similarity among the plurality of images stored in the image storage unit, and the first similarity and the second The album creating apparatus according to claim 1 , wherein an image whose total similarity calculated by summing the similarities is larger than a predetermined similarity is selected.
画像配置枠に対応づけて、前記画像配置枠に前記特定被写体画像選択部が選択した画像を配置すべき旨を示す合成情報が予め定められたテンプレートを格納しているテンプレート格納部
を更に備え、
前記アルバム作成部は、前記テンプレート格納部が格納しているテンプレートに予め定められた合成情報に基づいて、前記特定被写体画像選択部が選択した画像を前記画像配置枠にレイアウトしてアルバムを作成する
請求項1または請求項2に記載のアルバム作成装置。
A template storage unit that stores a template in which composite information indicating that the image selected by the specific subject image selection unit is to be placed in the image placement frame is stored in association with the image placement frame;
The album creation unit creates an album by laying out the images selected by the specific subject image selection unit in the image arrangement frame based on synthesis information predetermined in the template stored in the template storage unit. The album creating apparatus according to claim 1 or 2 .
RAMに読み出されたプログラムをCPUが実行することにより、前記CPUを有するコンピュータが、複数の画像がレイアウトされたアルバムを作成するアルバム作成方法であって、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、複数の画像を画像格納部に格納する画像格納段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、特定被写体の顔画像を含む画像を識別する画像識別情報、および前記画像識別情報で識別される画像における前記特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記画像識別情報で識別される画像から、前記顔画像位置情報で特定される前記特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記特定被写体顔画像と前記平均顔画像とを比較して、前記特定被写体顔画像のうちで、前記平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、前記特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記画像格納部が格納している複数の画像と前記第1特徴部分画像とを比較して、前記画像格納部が格納している複数の画像の一部と前記第1特徴部分画像との第1類似度を算出する類似度算出段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記画像格納部が格納している複数の画像のうち、前記類似度算出段階において算出された前記第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択段階と、
前記CPUが、前記プログラムに基づいて動作して前記コンピュータが有するハードウェアを制御することにより、前記特定被写体画像選択段階において選択された画像をレイアウトしてアルバムを作成するアルバム作成段階と
を備えるアルバム作成方法。
A method of creating an album in which a computer having the CPU creates an album in which a plurality of images are laid out by causing a CPU to execute a program read into a RAM .
An image storage step of storing a plurality of images in an image storage unit by the CPU operating based on the program and controlling the hardware of the computer ;
The CPU operates based on the program and controls the hardware of the computer, so that images of face areas of a plurality of subjects included in each of the plurality of images stored in the image storage unit are obtained. An average face image generation stage for generating an average face image that is an average face image of a plurality of subjects;
In the image identified by the image identification information for identifying the image including the face image of the specific subject, and the image identified by the image identification information by the CPU operating based on the program and controlling the hardware of the computer A specific subject information acquisition step of acquiring specific subject information having face image position information indicating a position of the face image of the specific subject;
The CPU operates based on the program and controls the hardware of the computer , whereby the face image of the specific subject specified by the face image position information from the image identified by the image identification information A specific subject face image extraction stage for extracting a specific subject face image,
The CPU operates based on the program and controls the hardware of the computer to compare the specific subject face image with the average face image, and among the specific subject face images, A feature partial image extraction step of extracting an image of a region of a region having the largest difference from the average face image or an image of a region of a region having a larger predetermined difference as a first feature partial image of the specific subject;
The CPU operates based on the program and controls the hardware of the computer , thereby comparing the plurality of images stored in the image storage unit with the first feature partial image, A similarity calculation step of calculating a first similarity between a part of the plurality of images stored in the image storage unit and the first feature partial image;
When the CPU operates based on the program and controls the hardware of the computer , the first calculated in the similarity calculation step among the plurality of images stored in the image storage unit. A specific subject image selection step of selecting an image in which one similarity is greater than a predetermined similarity;
An album comprising: an album creating step in which the CPU operates based on the program and controls the hardware of the computer to lay out the images selected in the specific subject image selecting step to create an album How to make.
複数の画像がレイアウトされたアルバムを作成するアルバム作成装置用のアルバム作成プログラムであって、前記アルバム作成装置を、
複数の画像を格納する画像格納部、
前記画像格納部が格納している複数の画像のそれぞれに含まれる複数の被写体の顔領域の画像から、複数の被写体の平均顔の画像である平均顔画像を生成する平均顔画像生成部、
特定被写体の顔画像を含む画像を識別する画像識別情報、および前記画像識別情報で識別される画像における前記特定被写体の顔画像の位置を示す顔画像位置情報を有する特定被写体情報を取得する特定被写体情報取得部、
前記画像識別情報で識別される画像から、前記顔画像位置情報で特定される前記特定被写体の顔画像である特定被写体顔画像を抽出する特定被写体顔画像抽出部、
前記特定被写体顔画像と前記平均顔画像とを比較して、前記特定被写体顔画像のうちで、前記平均顔画像と最も差異が大きい部位の領域の画像または予め定められた差異がより大きい部位の領域の画像を、前記特定被写体の第1特徴部分画像として抽出する特徴部分画像抽出部、
前記画像格納部が格納している複数の画像と前記第1特徴部分画像とを比較して、前記画像格納部が格納している複数の画像の一部と前記第1特徴部分画像との第1類似度を算出する類似度算出部、
前記画像格納部が格納している複数の画像のうち、前記類似度算出部が算出した前記第1類似度が予め定められた類似度より大きい画像を選択する特定被写体画像選択部、
前記特定被写体画像選択部が選択した画像をレイアウトしてアルバムを作成するアルバム作成部
として機能させるアルバム作成プログラム。
An album creating program for an album creating apparatus for creating an album in which a plurality of images are laid out, the album creating apparatus comprising:
An image storage unit for storing a plurality of images;
An average face image generation unit that generates an average face image that is an average face image of a plurality of subjects from images of face areas of a plurality of subjects included in each of the plurality of images stored in the image storage unit,
Specific subject for acquiring specific subject information having image identification information for identifying an image including a face image of the specific subject, and face image position information indicating the position of the face image of the specific subject in the image identified by the image identification information Information acquisition unit,
A specific subject face image extraction unit that extracts a specific subject face image that is a face image of the specific subject specified by the face image position information from an image identified by the image identification information;
The specific subject face image and the average face image are compared, and among the specific subject face images, an image of a region having the largest difference from the average face image or a portion having a larger predetermined difference is obtained. A feature portion image extraction unit that extracts an image of a region as a first feature portion image of the specific subject;
The plurality of images stored in the image storage unit and the first feature partial image are compared, and a part of the plurality of images stored in the image storage unit and the first feature partial image are compared. A similarity calculation unit for calculating one similarity,
A specific subject image selection unit that selects an image in which the first similarity calculated by the similarity calculation unit is greater than a predetermined similarity among a plurality of images stored in the image storage unit;
An album creation program that functions as an album creation unit that creates an album by laying out images selected by the specific subject image selection unit.
JP2006021540A 2006-01-30 2006-01-30 Album creating apparatus, album creating method, and album creating program Active JP4704225B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006021540A JP4704225B2 (en) 2006-01-30 2006-01-30 Album creating apparatus, album creating method, and album creating program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006021540A JP4704225B2 (en) 2006-01-30 2006-01-30 Album creating apparatus, album creating method, and album creating program

Publications (2)

Publication Number Publication Date
JP2007206751A JP2007206751A (en) 2007-08-16
JP4704225B2 true JP4704225B2 (en) 2011-06-15

Family

ID=38486213

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006021540A Active JP4704225B2 (en) 2006-01-30 2006-01-30 Album creating apparatus, album creating method, and album creating program

Country Status (1)

Country Link
JP (1) JP4704225B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5043767B2 (en) 2008-07-08 2012-10-10 キヤノン株式会社 Image processing apparatus and image processing method
JP5402122B2 (en) * 2009-03-18 2014-01-29 日本電気株式会社 Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc.
JP5398396B2 (en) * 2009-07-17 2014-01-29 キヤノン株式会社 Image processing apparatus and control method thereof
JP5059835B2 (en) * 2009-11-20 2012-10-31 株式会社エヌ・ティ・ティ・ドコモ Information search device, information search method, and information search program
WO2016063917A1 (en) * 2014-10-23 2016-04-28 リンテック株式会社 Surface protective sheet
KR102407903B1 (en) * 2014-10-23 2022-06-10 린텍 가부시키가이샤 Surface protective sheet
JP6976531B2 (en) * 2020-02-18 2021-12-08 バックス情報システム株式会社 Album creation support device and album creation support system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003223647A (en) * 2001-12-20 2003-08-08 Ricoh Co Ltd Automatic image disposing method and device
JP2004192213A (en) * 2002-12-10 2004-07-08 Nec Soft Ltd Face collating system, face collating method, and face collating program
JP2005210369A (en) * 2004-01-22 2005-08-04 Konica Minolta Photo Imaging Inc Image processing apparatus and image processing method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003223647A (en) * 2001-12-20 2003-08-08 Ricoh Co Ltd Automatic image disposing method and device
JP2004192213A (en) * 2002-12-10 2004-07-08 Nec Soft Ltd Face collating system, face collating method, and face collating program
JP2005210369A (en) * 2004-01-22 2005-08-04 Konica Minolta Photo Imaging Inc Image processing apparatus and image processing method

Also Published As

Publication number Publication date
JP2007206751A (en) 2007-08-16

Similar Documents

Publication Publication Date Title
JP5084938B2 (en) Image extraction apparatus, image extraction method, and image extraction program
JP4704225B2 (en) Album creating apparatus, album creating method, and album creating program
JP4800104B2 (en) Album creating apparatus, album creating method, and program
JP2006287917A (en) Image output apparatus, image output method and image output program
US8300883B2 (en) Sketch generating system and method for generating sketch based on image
US8345118B2 (en) Image capturing apparatus, image capturing method, album creating apparatus, album creating method, album creating system and computer readable medium
JP4998637B1 (en) Image processing apparatus, information generation apparatus, image processing method, information generation method, control program, and recording medium
US8107688B2 (en) Gaze detection apparatus and the method of the same
JP4504322B2 (en) Image extraction apparatus, image extraction method, and image extraction program
JP5791364B2 (en) Face recognition device, face recognition method, face recognition program, and recording medium recording the program
JP2014016822A (en) Image processing apparatus, and control method and program
JP2006331393A (en) Album creating apparatus, album creating method and program
JP4303191B2 (en) Image recognition system, image recognition method, and image recognition program
US20120218270A1 (en) Facial sketch creation device, configuration information generation device, configuration information generation method, and storage medium
EP1820158B1 (en) Album creating apparatus, album creating method, and album creating program
US9405494B2 (en) Apparatus and method for outputting layout data according to timing information, and storage medium
JP2007312058A (en) Album-making system, album-making method, and program
JP4790444B2 (en) Image extraction apparatus, image extraction method, and image extraction program
CN102483857B (en) Imaging device and computer reading and recording medium
JP7247579B2 (en) Information processing device, information processing method and program
JP2019180749A (en) Image processing program, image processing apparatus, and image processing method
JP2006236217A (en) Person recognition system, person recognition method, and person recognition program
JP2020107037A (en) Information processing apparatus, information processing method, and program
JP2006236216A (en) Person recognition system, person recognizing method and person recognition program
Nejati et al. A study on recognizing non-artistic face sketches

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080716

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101124

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110309

R150 Certificate of patent or registration of utility model

Ref document number: 4704225

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250