JP2020140556A - Image processing device, control method, and program - Google Patents

Image processing device, control method, and program Download PDF

Info

Publication number
JP2020140556A
JP2020140556A JP2019036829A JP2019036829A JP2020140556A JP 2020140556 A JP2020140556 A JP 2020140556A JP 2019036829 A JP2019036829 A JP 2019036829A JP 2019036829 A JP2019036829 A JP 2019036829A JP 2020140556 A JP2020140556 A JP 2020140556A
Authority
JP
Japan
Prior art keywords
image data
data
album
page
individual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019036829A
Other languages
Japanese (ja)
Other versions
JP7336210B2 (en
Inventor
浦谷 充
Mitsuru Uratani
充 浦谷
山田 貴之
Takayuki Yamada
貴之 山田
寛康 國枝
Hiroyasu Kunieda
寛康 國枝
堀 信二郎
Shinjiro Hori
信二郎 堀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2019036829A priority Critical patent/JP7336210B2/en
Priority to US16/787,399 priority patent/US11501476B2/en
Publication of JP2020140556A publication Critical patent/JP2020140556A/en
Priority to US18/045,965 priority patent/US20230112555A1/en
Application granted granted Critical
Publication of JP7336210B2 publication Critical patent/JP7336210B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

To allow for appropriately generating multiple sets of album data comprising common pages that are common to all of the sets of album data and individual pages that are not common to all of the sets of album data.SOLUTION: The above problem is solved by providing a program configured to make a computer perform a second selection step for selecting at least one of multiple sets of image data as individual image data corresponding to images to be placed on individual pages that are not common to all of multiple albums, and to provide control such that cover page image data corresponding to images to be placed on cover pages of the albums is selected as the individual image data.SELECTED DRAWING: Figure 1

Description

本発明は、画像処理装置、制御方法、及びプログラムに関する。 The present invention relates to image processing devices, control methods, and programs.

近年、画像が配置されたアルバムを出力するためのアルバムデータを生成する方法が知られている。特許文献1では、複数のユーザが共同でアルバムデータを編集する方法が提案されている。 In recent years, a method of generating album data for outputting an album in which images are arranged has been known. Patent Document 1 proposes a method in which a plurality of users jointly edit album data.

特開2016−66328JP 2016-66328

しかしながら、特許文献1では、複数のアルバムデータ全てに共通するページである共通ページと、複数のアルバムデータ全てには共通しないページである個別ページとを含む複数のアルバムデータを生成する場合の処理については、考慮されていない。 However, Patent Document 1 describes a process for generating a plurality of album data including a common page which is a page common to all the plurality of album data and an individual page which is a page not common to all the plurality of album data. Is not considered.

そこで本発明は、複数のアルバムデータ全てに共通するページである共通ページと、複数のアルバムデータ全てには共通しないページである個別ページとを含む複数のアルバムデータを適切に生成することを目的とする。 Therefore, an object of the present invention is to appropriately generate a plurality of album data including a common page which is a page common to all the plurality of album data and an individual page which is a page not common to all the plurality of album data. To do.

本発明のプログラムは、複数のアルバムに対応する複数のアルバムデータを生成する画像処理装置のコンピュータに、
複数の画像データを取得する取得ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てに共通するページである共通ページに配置される画像に対応する共通画像データとして選択する第1選択ステップと、
前記共通画像データとして選択された前記少なくとも1つの画像データに基づいて、前記共通ページに対応する共通ページデータを生成する第1生成ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てには共通しないページである個別ページに配置される画像に対応する個別画像データとして選択する第2選択ステップと、
前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記個別ページに対応する個別ページデータを、複数生成する第2生成ステップと、
前記共通ページデータと複数の前記個別ページデータに基づいて、前記複数のアルバムデータを生成する第3生成ステップと、を実行させ、
前記複数のアルバムデータのうち第1のアルバムデータに対応する前記個別ページデータと、前記複数のアルバムデータのうち第2のアルバムデータに対応する前記個別ページデータは異なり、
前記複数のアルバムデータのうち前記第1のアルバムデータに対応する前記共通ページデータと、前記複数のアルバムデータのうち前記第2のアルバムデータに対応する前記共通ページデータは同一であり、
アルバムの表紙に配置される画像に対応する表紙画像データが、前記個別画像データとして選択されるように制御されることを特徴とする。
The program of the present invention applies to a computer of an image processing device that generates a plurality of album data corresponding to a plurality of albums.
The acquisition step to acquire multiple image data and
A first selection step of selecting at least one image data out of the plurality of image data as common image data corresponding to an image arranged on a common page which is a page common to all the plurality of albums.
A first generation step of generating common page data corresponding to the common page based on the at least one image data selected as the common image data, and
A second selection step of selecting at least one image data out of the plurality of image data as individual image data corresponding to an image arranged on an individual page which is a page not common to all the plurality of albums.
A second generation step of generating a plurality of individual page data corresponding to the individual page based on the at least one image data selected as the individual image data.
A third generation step of generating the plurality of album data based on the common page data and the plurality of individual page data is executed.
The individual page data corresponding to the first album data among the plurality of album data and the individual page data corresponding to the second album data among the plurality of album data are different.
The common page data corresponding to the first album data among the plurality of album data and the common page data corresponding to the second album data among the plurality of album data are the same.
The cover image data corresponding to the image arranged on the cover of the album is controlled so as to be selected as the individual image data.

本発明によれば、複数のアルバムデータに共通するページである共通ページと、複数のアルバムデータに共通しないページである個別ページとを含む複数のアルバムデータを適切に生成することができる。 According to the present invention, it is possible to appropriately generate a plurality of album data including a common page which is a page common to a plurality of album data and an individual page which is a page not common to the plurality of album data.

画像処理装置のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware structure of an image processing apparatus. アルバム作成アプリケーションにより作成されるアルバムに含まれる見開きの例を示す図である。It is a figure which shows the example of the spread included in the album created by the album creation application. アルバム作成アプリケーションにより表示される設定画面の図である。It is a figure of the setting screen displayed by an album creation application. アルバム作成アプリケーションにより実行される自動レイアウト処理を示すフローチャートである。It is a flowchart which shows the automatic layout processing executed by an album creation application. 画像データ群の分割を説明するための図である。It is a figure for demonstrating division of an image data group. シーンの分類分けを説明するための図である。It is a figure for demonstrating the classification of a scene. 画像データの選択を説明するための図である。It is a figure for demonstrating selection of image data. レイアウト画像の作成に利用するテンプレートを決定する処理を示すフローチャートである。It is a flowchart which shows the process of determining the template used for creating a layout image. 画像データのレイアウトを説明するための図である。It is a figure for demonstrating the layout of image data. アルバム作成アプリケーションにより実行される見開き結合処理を示すフローチャートである。It is a flowchart which shows the spread joining process executed by an album creation application. アルバム作成アプリケーションにより実行される自動レイアウト処理を示すフローチャートである。It is a flowchart which shows the automatic layout processing executed by an album creation application. アルバム作成アプリケーションにより実行される自動レイアウト処理を示すフローチャートである。It is a flowchart which shows the automatic layout processing executed by an album creation application. アルバム作成アプリケーションにより実行される自動レイアウト処理を示すフローチャートである。It is a flowchart which shows the automatic layout processing executed by an album creation application. 表紙モード設定領域を説明するための図である。It is a figure for demonstrating the cover mode setting area. 表紙用テンプレートの一例を示す図である。It is a figure which shows an example of the cover template.

(第1実施形態)
以下、本発明の実施形態について図面を用いて詳細に説明する。
(First Embodiment)
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

以下の実施形態では、画像処理装置上で、アルバム作成のためのアプリケーションプログラム(以下、「アルバム作成アプリ」ともいう)を動作させ、自動レイアウトを生成するまでの手順について説明する。以下に説明する画像とは、特に断りが無い限り、静止画、動画、動画中のフレーム画像、また、SNS(ソーシャル・ネットワーキング・サービス)サーバ上の静止画と動画と動画中のフレーム画像を含む。 In the following embodiment, a procedure for operating an application program for creating an album (hereinafter, also referred to as an “album creation application”) on an image processing device and generating an automatic layout will be described. Unless otherwise specified, the images described below include still images, videos, frame images in videos, and still images, videos, and frame images in videos on SNS (Social Networking Service) servers. ..

図1は、本発明に係る画像処理装置のハードウェアの構成を説明するブロック図である。画像処理装置としては、例えば、PC(パーソナルコンピュータ)、スマートフォン、タブレット端末、カメラ、プリンタ等が挙げられ、本実施形態ではPCとする。 FIG. 1 is a block diagram illustrating a hardware configuration of an image processing device according to the present invention. Examples of the image processing device include a PC (personal computer), a smartphone, a tablet terminal, a camera, a printer, and the like, and in the present embodiment, the image processing device is a PC.

図1において、画像処理装置100は、CPU101と、ROM102、RAM103、HDD104、ディスプレイ105、キーボード106、マウス107、データ通信部108等を備えている。これらは、データバス109により相互に接続されている。CPU101と、ROM102、RAM103等によって、画像処理装置100のコンピュータが形成される。 In FIG. 1, the image processing device 100 includes a CPU 101, a ROM 102, a RAM 103, an HDD 104, a display 105, a keyboard 106, a mouse 107, a data communication unit 108, and the like. These are connected to each other by the data bus 109. The computer of the image processing apparatus 100 is formed by the CPU 101, the ROM 102, the RAM 103, and the like.

CPU(中央演算装置/プロセッサ)101は、システム制御部であり、画像処理装置100全体を制御する。また、CPU101は、本実施形態で説明する画像処理方法をプログラムに従って実行する。なお、図中のCPUは1つとしたが、これに限定されず、複数備えられていても良い。 The CPU (Central Processing Unit / Processor) 101 is a system control unit and controls the entire image processing unit 100. Further, the CPU 101 executes the image processing method described in the present embodiment according to a program. Although the number of CPUs in the figure is one, the number of CPUs is not limited to one, and a plurality of CPUs may be provided.

ROM102には、CPU101により実行されるプログラムやOS(オペレーティングシステム)が記憶されている。RAM103は、CPU101によるプログラムの実行時に、各種情報を一時的に記憶するためのメモリを提供している。HDD(ハードディスク)104は、画像ファイルや画像解析などの処理結果を保持するデータベースなどを記憶するための記憶媒体である。本実施形態では、RAM103は、後述するアルバム作成アプリを記憶する。 The ROM 102 stores a program and an OS (operating system) executed by the CPU 101. The RAM 103 provides a memory for temporarily storing various information when the program is executed by the CPU 101. The HDD (hard disk) 104 is a storage medium for storing an image file, a database that holds processing results such as image analysis, and the like. In this embodiment, the RAM 103 stores an album creation application described later.

ディスプレイ105(表示部)は、本実施形態のUI(ユーザインターフェイス)や画像のレイアウト結果をユーザに提示する装置である。ディスプレイ105は、タッチセンサー機能を備えていても良い。キーボード106は、入力装置の1つであり、例えば、ディスプレイ105に表示されたUI上に所定の情報を入力するのに用いられる。所定の情報とは、例えば、作成したいアルバムの見開き数やページ数等の情報である。マウス107は、入力装置の1つであり、例えば、ディスプレイ105に表示されたUI上のボタンをクリックするのに用いられる。なお、例えばユーザが、ディスプレイ105に表示されている、アルバム作成アプリに対応するアイコンを、マウス107の操作によりダブルクリックすることで、アルバム作成アプリが起動する。 The display 105 (display unit) is a device that presents the UI (user interface) of the present embodiment and the layout result of the image to the user. The display 105 may have a touch sensor function. The keyboard 106 is one of the input devices, and is used, for example, to input predetermined information on the UI displayed on the display 105. The predetermined information is, for example, information such as the number of spreads and the number of pages of the album to be created. The mouse 107 is one of the input devices and is used, for example, to click a button on the UI displayed on the display 105. For example, the user double-clicks the icon corresponding to the album creation application displayed on the display 105 by operating the mouse 107 to start the album creation application.

データ通信部108(通信部)は、プリンタやサーバなどの外部装置と通信するための装置である。例えば、アルバム作成アプリによって作成されたデータは、データ通信部108を介して、画像処理装置100に接続された不図示のプリンタやサーバに送信される。また、データ通信部108は、不図示のサーバやSNS(ソーシャルネットワーキングサービス)サーバ上の静止画データを受信する。なお、本実施形態では、データ通信部108は、SNSサーバから静止画データを受信するが、動画データも受信しても良い。 The data communication unit 108 (communication unit) is a device for communicating with an external device such as a printer or a server. For example, the data created by the album creation application is transmitted to a printer or server (not shown) connected to the image processing device 100 via the data communication unit 108. In addition, the data communication unit 108 receives still image data on a server (not shown) or an SNS (social networking service) server. In the present embodiment, the data communication unit 108 receives the still image data from the SNS server, but may also receive the moving image data.

データバス109は、上述した各部(102〜108)とCPU101とを接続する。 The data bus 109 connects each unit (102 to 108) described above to the CPU 101.

本実施形態では、アルバム作成アプリは、共通ページと個別ページとを含む複数のアルバムデータを、一度に生成する機能を有するものとする。共通ページとは、アルバム作成アプリによって一度に生成される全てのアルバムデータに共通して含まれるページである。個別ページとは、アルバム作成アプリによって一度に生成されるアルバムデータのいずれかに含まれるページであり、アルバム作成アプリによって一度に生成される全てのアルバムデータに共通しては含まれないページである。個別ページは、それぞれのアルバムデータに対応した内容となるため、アルバムデータ毎に、個別ページの内容が異なる。そして本実施形態では、共通ページに含まれる画像データを選択するための要素(基準)と、個別ページに含まれる画像データを選択するための要素がそれぞれ異なる。そして、個別ページに含まれる画像データを選択するための要素は、アルバムデータ毎にそれぞれ異なる。 In the present embodiment, the album creation application has a function of generating a plurality of album data including a common page and an individual page at one time. The common page is a page that is commonly included in all the album data generated by the album creation application at one time. The individual page is a page included in any of the album data generated by the album creation application at one time, and is not included in all the album data generated by the album creation application at once. .. Since the individual pages have contents corresponding to each album data, the contents of the individual pages are different for each album data. In the present embodiment, the element (reference) for selecting the image data included in the common page and the element for selecting the image data included in the individual page are different from each other. Then, the elements for selecting the image data included in the individual pages are different for each album data.

例えば、複数のユーザが、それぞれ画像データを持ち寄って、アルバムデータを生成するユースケースがあるとする。このケースにおいて、複数のユーザそれぞれに対して出力される複数のアルバムデータには、複数のアルバムデータに共通するページである共通ページと、複数のアルバムデータに共通せずアルバム毎に異なるページである個別ページとが含まれることが要望される。共通ページと個別ページの両方を含むアルバムデータを生成する方法として例えば、共通ページのみによって構成されるアルバムデータを生成した後、当該アルバムデータをユーザが手動で編集する方法がある。しかしながらこの方法は、ユーザにとって手間がかかるため、ユーザビリティが低い。本実施形態のように、それぞれ異なる基準によって、共通ページに含まれる画像データと個別ページに含まれる画像データとを選択し、複数のアルバムデータを生成することで、適切な内容のアルバムデータを、簡便に生成することが可能となる。 For example, suppose there is a use case where a plurality of users bring their own image data and generate album data. In this case, the plurality of album data output to each of the plurality of users includes a common page that is common to the plurality of album data and a page that is not common to the plurality of album data and is different for each album. It is requested that individual pages are included. As a method of generating album data including both common pages and individual pages, for example, there is a method of manually editing the album data after generating album data composed of only common pages. However, this method has low usability because it takes time and effort for the user. As in the present embodiment, the image data included in the common page and the image data included in the individual pages are selected according to different criteria, and a plurality of album data are generated to generate album data having appropriate contents. It can be easily generated.

本実施形態に係るアルバム作成アプリが、画像処理装置100にインストールされると画像処理装置100上で動作するOSによりディスプレイ105に表示されるトップ画面(デスクトップ)上に起動アイコンが生成される。そして、ユーザが起動アイコンをマウス107の操作によりダブルクリックすると、HDD104に保存されているアルバム作成アプリのプログラムがRAM103にロードされる。そして、RAM103にロードされたプログラムがCPU101によって実行されて、アルバム作成アプリケーションが起動する。 When the album creation application according to the present embodiment is installed in the image processing device 100, a start icon is generated on the top screen (desktop) displayed on the display 105 by the OS running on the image processing device 100. Then, when the user double-clicks the start icon by operating the mouse 107, the program of the album creation application stored in the HDD 104 is loaded into the RAM 103. Then, the program loaded in the RAM 103 is executed by the CPU 101, and the album creation application is started.

図3は、起動したアルバム作成アプリが提供する設定画面301の一例を示す図である。設定画面301は、ディスプレイ105に表示される。ユーザが設定画面301を介して、アルバムの作成条件を設定することで、アルバム作成アプリは、ユーザから指定される設定内容を取得する。 FIG. 3 is a diagram showing an example of the setting screen 301 provided by the started album creation application. The setting screen 301 is displayed on the display 105. When the user sets the album creation conditions via the setting screen 301, the album creation application acquires the setting contents specified by the user.

本実施形態では、アルバムの作成条件として、アルバムに使用される画像データ群、総見開きデータ数、アルバムの作成に利用される商材、一度に作成するアルバムデータ数及びアルバム毎の主被写体を設定可能である。なお本実施形態においてページとは、見開きページ(以下、見開き)と、個別ページを含む。そして本実施形態において見開きとは、異なるシートに印刷された、互いに隣接する1対の個別ページに相当し、見開きデータとは、見開きのレイアウトを決定し、決定されたレイアウトによって見開きを印刷するためのデータである。なお本実施形態では、見開きデータ毎に処理を行う形態としているが、1ページ(1つの個別ページ)に対応するページデータ毎に処理を行う形態であっても良い。また、主被写体とは、アルバム中で優先的にレイアウトされる被写体のことである。主被写体として例えば、特定の個人や、犬や猫、花、料理といった物体のカテゴリ、オブジェクト等を設定可能である。 In the present embodiment, the image data group used for the album, the total number of spread data, the products used for creating the album, the number of album data to be created at one time, and the main subject for each album are set as the album creation conditions. It is possible. In the present embodiment, the page includes a spread page (hereinafter referred to as a spread) and an individual page. Then, in the present embodiment, the spread corresponds to a pair of individual pages printed on different sheets and adjacent to each other, and the spread data is for determining the layout of the spread and printing the spread according to the determined layout. It is the data of. In this embodiment, processing is performed for each spread data, but processing may be performed for each page data corresponding to one page (one individual page). The main subject is a subject that is preferentially laid out in the album. As the main subject, for example, a specific individual, a category of an object such as a dog, a cat, a flower, or a dish, an object, or the like can be set.

設定画面301上のパスボックス302は、アルバム作成の対象となる画像データ群のHDD104中の保存場所(パス)を示す。フォルダ選択ボタン303は、ユーザによるマウス107の操作によりクリックされることより、アルバム作成の対象とする画像データ群を含むフォルダをツリー構成でユーザが選択可能に表示する。そして、ユーザにより選択された画像データ群を含むフォルダパスがパスボックス302に表示される。ここで指定された画像データ群が取得されて、アルバムデータが生成される。なお、データ通信部108を介してネットワーク上のサーバやSNSサーバ等の記憶領域から画像データ群が取得されても良い。ここでいう画像データ群とは、アルバム作成に利用される画像データの候補を指す。また、アルバム作成の対象となる画像データ群の指定に当たり、アルバム作成の対象となる画像データ群の保存場所以外の情報が入力されても良い。例えば、アルバム作成の対象となる画像データ群が生成された(当該画像データに対応する写真が撮影された)日時(以後、撮影日時という。)が指定されても良い。 The pass box 302 on the setting screen 301 indicates a storage location (path) in the HDD 104 of the image data group to be created as an album. The folder selection button 303 is clicked by the operation of the mouse 107 by the user to display a folder containing an image data group to be created as an album so that the user can select it in a tree structure. Then, the folder path including the image data group selected by the user is displayed in the pass box 302. The image data group specified here is acquired and album data is generated. The image data group may be acquired from a storage area such as a server on the network or an SNS server via the data communication unit 108. The image data group referred to here refers to image data candidates used for creating an album. Further, when designating the image data group to be created as an album, information other than the storage location of the image data group to be created as an album may be input. For example, the date and time (hereinafter referred to as the shooting date and time) when the image data group to be created for the album is generated (the photo corresponding to the image data was taken) may be specified.

アルバム作成の対象となる画像データは、例えば、静止画像データや、動画データからフレームが切り出されることで取得される切り出し画像データである。静止画像データや切り出し画像データは、撮像デバイスから取得されたものである。撮像デバイスは、画像処理装置100が備えていても良いし、画像処理装置100の外部の装置である外部装置(PCやスマートフォン、デジタルカメラ、タブレット端末等)が備えるものであっても良い。なお、画像処理装置100は、外部装置から画像データを取得する場合は、データ通信部108を介して画像データを取得する。また、画像処理装置100は、静止画像データや切り出し画像データを、データ通信部108を介してネットワークやサーバから取得しても良い。CPU101は、画像データに付随したデータを解析して、各画像データがどこから取得されたのかを判定する。なお、CPU101は、アルバム作成アプリを介してSNSサーバから画像データを取得した場合は、アルバム作成アプリによって、当該画像データがどこから取得されたのかを管理しても良い。なお、アルバム作成アプリによって利用される画像データは、上述した種類の画像データに限定されるものではなく、他の種類の画像データであっても良い。 The image data to be created as an album is, for example, still image data or cut-out image data obtained by cutting out a frame from moving image data. The still image data and the cut-out image data are acquired from the imaging device. The image processing device may be provided by the image processing device 100, or may be provided by an external device (PC, smartphone, digital camera, tablet terminal, etc.) which is an external device of the image processing device 100. When the image processing device 100 acquires the image data from the external device, the image processing device 100 acquires the image data via the data communication unit 108. Further, the image processing device 100 may acquire still image data and cut-out image data from a network or a server via a data communication unit 108. The CPU 101 analyzes the data accompanying the image data to determine where each image data was acquired. When the CPU 101 acquires the image data from the SNS server via the album creation application, the album creation application may manage where the image data is acquired. The image data used by the album creation application is not limited to the above-mentioned types of image data, and may be other types of image data.

見開き数ボックス304は、1冊のアルバムにおける総見開き数の指定をユーザから受け付けるためのボックスである。ユーザは、キーボード106を使って見開き数ボックス304に直接数字を入力したり、マウス107を使ってリストから見開き数ボックス304に数字を入力したりすることで、総見開き数を指定できる。なお、ここで指定された見開き数は、アルバム数ボックス310で指定される数に対応する全てのアルバムに適用されるが、例えば、各アルバムに総見開き数が指定される構成としても良い。 The spread number box 304 is a box for accepting from the user the designation of the total spread number in one album. The user can specify the total number of spreads by directly inputting a number into the spread number box 304 using the keyboard 106 or by inputting a number into the spread number box 304 from the list using the mouse 107. The number of spreads specified here is applied to all albums corresponding to the number specified in the album number box 310, but for example, the total number of spreads may be specified for each album.

アルバム数ボックス310は、アルバム作成アプリによって一度に作成するアルバムの数の指定をユーザから受け付けるためのボックスである。ユーザは、キーボード106を使ってアルバム数ボックス310に直接数字を入力したり、マウス107を使ってリストからアルバム数ボックス310に数字を入力したりすることで、アルバム作成アプリによって作成するアルバムの数を指定できる。 The album number box 310 is a box for accepting from the user the number of albums to be created at one time by the album creation application. The number of albums created by the album creation app by the user by entering a number directly into the album number box 310 using the keyboard 106 or by entering a number from the list into the album number box 310 using the mouse 107. Can be specified.

アルバム作成アプリによって作成されるアルバムに含まれる見開きの例を、図2を用いて説明する。上述したように、本実施形態では、アルバム数ボックス310によって指定された数の各アルバムには、共通ページと個別ページとが含まれるため、各アルバムは、それぞれ少なくとも一部の内容が異なる。 An example of the spread included in the album created by the album creation application will be described with reference to FIG. As described above, in the present embodiment, since each album of the number specified by the album number box 310 includes a common page and an individual page, each album has at least a part of content different from each other.

ここでは、アルバム数ボックス310に対する指定により、一度に3冊のアルバム(アルバム1〜3)が作成されるものとする。画像301はアルバム1の見開きに配置された画像の例であり、画像301中の文字は画像中に写っている主被写体を表している。見開き302は、共通ページによって構成される見開きであり、アルバム1〜3全てに含まれている。そして、このように共通ページは、全てのアルバムに含まれるため、各アルバムに指定されたそれぞれの主被写体が写っている画像を中心にレイアウトされている。一方、見開き303、304、305は、個別ページによって構成される見開きである。そのため、それぞれの見開きは、1つのアルバムにしか含まれていない。そして例えば、アルバム1に含まれる見開き303は、アルバム1に指定された主被写体である主被写体Aが写っている画像を中心にレイアウトされている。また、アルバム2に含まれる見開き304は、アルバム2に指定された主被写体である主被写体Bが写っている画像を中心にレイアウトされている。このように、本実施形態では、それぞれ異なる基準で作成される2種類の見開きで構成される複数のアルバムを作成する。 Here, it is assumed that three albums (albums 1 to 3) are created at a time by designating the album number box 310. Image 301 is an example of an image arranged in a spread of album 1, and the characters in image 301 represent the main subject shown in the image. The spread 302 is a spread composed of common pages and is included in all of albums 1 to 3. Since the common page is included in all the albums in this way, the layout is centered on the image in which each main subject specified in each album is shown. On the other hand, the spreads 303, 304, and 305 are spreads composed of individual pages. Therefore, each spread is included in only one album. Then, for example, the spread 303 included in the album 1 is laid out centering on an image in which the main subject A, which is the main subject designated in the album 1, is captured. Further, the spread 304 included in the album 2 is laid out centering on an image in which the main subject B, which is the main subject designated in the album 2, is shown. As described above, in the present embodiment, a plurality of albums composed of two types of spreads, which are created according to different criteria, are created.

主被写体指定部305は、アルバム数ボックス310に入力された数に対応する各アルバムに対する主被写体の指定をユーザから受け付けるための領域である。ユーザは例えば、主被写体が写っている画像データをマウス107によって、主被写体指定部305中の各アルバムに対応する領域にドラッグ&ドロップすることで、アルバムごとに主被写体を指定することができる。 The main subject designation unit 305 is an area for receiving the designation of the main subject for each album corresponding to the number input in the album number box 310 from the user. For example, the user can specify the main subject for each album by dragging and dropping the image data in which the main subject is captured to the area corresponding to each album in the main subject designation unit 305 with the mouse 107.

見開き写真枚数306は、作成するアルバムの各見開きに配置される画像データの枚数の多寡の指定をユーザから受け付けるための領域である。ユーザは、スライダーバーを「多」側に設定すると、各見開きに配置される画像データの枚数を増やすことができる。なお、各見開きに配置される画像データの枚数が増やされることで、結果的に、各アルバムに配置される画像データの枚数が増やされる。また、ユーザは、スライダーバーを「少」側に設定すると、各見開きに配置される画像データの枚数を減らすことができる。なお、各見開きに配置される画像データの枚数が減らされることで、結果的に、各アルバムに配置される画像データの枚数が減らされる。なお、ここで指定された画像データの枚数の多寡は、アルバム数ボックス310で指定される数に対応する全てのアルバムに適用されるが、例えば、各アルバムごとに画像データの枚数の多寡が指定される構成としても良い。 The spread photo number 306 is an area for accepting from the user the designation of the number of image data arranged in each spread of the album to be created. The user can increase the number of image data arranged in each spread by setting the slider bar to the "many" side. By increasing the number of image data arranged in each spread, as a result, the number of image data arranged in each album is increased. In addition, the user can reduce the number of image data arranged in each spread by setting the slider bar to the "small" side. The number of image data arranged in each spread is reduced, and as a result, the number of image data arranged in each album is reduced. The number of image data specified here is applied to all albums corresponding to the number specified in the album number box 310. For example, the number of image data is specified for each album. It may be configured to be done.

商材指定部307は、作成するアルバムに用いられる商材の指定をユーザから受け付けるための領域である。ユーザは、商材指定部307に対する入力により、アルバムのサイズ、アルバムの用紙の種類、アルバムの表紙の種類、アルバムの綴じ部の種類等を設定することができる。 The product designation unit 307 is an area for receiving the designation of the product used for the album to be created from the user. The user can set the size of the album, the type of paper of the album, the type of the cover of the album, the type of the binding part of the album, and the like by inputting to the product designation unit 307.

OKボタン308は、作成するアルバムに関する設定が完了したことの入力をユーザから受け付けるためのボタンである。ユーザによりOKボタン308がマウス107でクリックされると、アルバム作成アプリは、設定画面301上で設定されている内容を取得し、取得した内容を、以下で説明するアルバムデータ作成処理に利用する。 The OK button 308 is a button for receiving an input from the user that the setting related to the album to be created is completed. When the OK button 308 is clicked by the user with the mouse 107, the album creation application acquires the contents set on the setting screen 301, and uses the acquired contents for the album data creation process described below.

リセットボタン309は、設定画面301上の各設定情報をリセットするためのボタンである。 The reset button 309 is a button for resetting each setting information on the setting screen 301.

なお、設定画面301上では、上述した設定以外の設定を実行可能であっても良い。例えば、動画に関する設定や、画像・動画データの取得先の設定等を実行可能であっても良いし、作成対象のアルバムのモードを指定可能であっても良い。なお、アルバムのモードとは、所定のオブジェクトを含む画像を優先してテンプレートにレイアウトするためのモードであり、例えば、「人物」、「動物」、「料理」の3つのモードである。なお、アルバムのモードは、例えば、アルバムのテーマと言い換えることができる。例えば、「人物」が選択された場合は、人物を含む画像を優先してテンプレートにレイアウトする。また、例えば、「動物」が選択された場合は、動物を含む画像を優先してテンプレートにレイアウトする。また、例えば、「料理」が選択された場合は、料理を含む画像を優先してテンプレートにレイアウトする。なお、上述の3つ以外のオブジェクトが写りこんでいる画像を表わす画像データを優先してテンプレートにレイアウトするためのモードがあっても良い。また、同時に複数のモードが選択されても良い。その場合、選択された複数のモードに対応する複数のオブジェクトの少なくとも1つを含む画像を優先してテンプレートにレイアウトする。ユーザがマウス107によってクリックすることで、ユーザは、各モードに対応する複数のアイコンのなかのいずれかのアイコンを選択可能である。そして、選択されたアイコンに対応するモードが、作成対象のアルバムのモードとして設定される。なお、アルバムのモードは上述の3つに限定されず、例えば、「建物」、「乗り物」、「花」等、他のモードがあっても良い。 It should be noted that settings other than the above-mentioned settings may be executed on the setting screen 301. For example, it may be possible to execute settings related to moving images, settings of acquisition destinations of image / moving image data, and the like, and it may be possible to specify the mode of the album to be created. The album mode is a mode for preferentially laying out an image including a predetermined object in a template, and is, for example, three modes of "person", "animal", and "cooking". The album mode can be rephrased as the theme of the album, for example. For example, when "person" is selected, the image including the person is preferentially laid out in the template. Further, for example, when "animal" is selected, the image including the animal is preferentially laid out in the template. Further, for example, when "cooking" is selected, the image including the cooking is preferentially laid out in the template. In addition, there may be a mode for laying out the image data representing the image in which objects other than the above three objects are reflected in the template with priority. Moreover, a plurality of modes may be selected at the same time. In that case, the image containing at least one of the plurality of objects corresponding to the plurality of selected modes is preferentially laid out in the template. When the user clicks with the mouse 107, the user can select one of the plurality of icons corresponding to each mode. Then, the mode corresponding to the selected icon is set as the mode of the album to be created. The mode of the album is not limited to the above three modes, and there may be other modes such as "building", "vehicle", and "flower".

図5は、本実施形態に係るアルバム作成アプリにより実行される自動レイアウト処理を示すフローチャートである。図5に示すフローチャートは、例えば、CPU101がHDD104に格納されたアルバム作成アプリに対応するプログラムをROM102やRAM103に読み出して実行することにより実現される。なお本実施形態では、HDD104に保存されたアルバム作成アプリは、ディスプレイ105に表示されているアルバム作成アプリに対応するアイコンがユーザによりマウス107を使って操作されることにより起動して、以下の処理を実行する。 FIG. 5 is a flowchart showing an automatic layout process executed by the album creation application according to the present embodiment. The flowchart shown in FIG. 5 is realized, for example, by the CPU 101 reading a program corresponding to the album creation application stored in the HDD 104 into the ROM 102 or the RAM 103 and executing the program. In the present embodiment, the album creation application saved in the HDD 104 is activated by the user operating the icon corresponding to the album creation application displayed on the display 105 by using the mouse 107, and the following processing is performed. To execute.

S401では、CPU101は、アルバム作成条件を設定する。具体的には例えば、図3に示す画面を介して、ユーザからアルバム作成条件の設定を受け付ける。アルバム作成条件の設定の詳細は、図3を用いた説明にて上述したとおりである。 In S401, the CPU 101 sets the album creation conditions. Specifically, for example, the user accepts the setting of the album creation condition via the screen shown in FIG. The details of setting the album creation conditions are as described above in the description using FIG.

S402では、CPU101は、パスボックス302において指定されている画像データ群に含まれる画像データを取得する。具体的には、CPU101は、パスボックス302において指定されている画像データ群を、HDD104から読み込み、RAM103に展開する。 In S402, the CPU 101 acquires the image data included in the image data group specified in the pass box 302. Specifically, the CPU 101 reads the image data group specified in the pass box 302 from the HDD 104 and expands it into the RAM 103.

S403では、CPU101は、S402にてRAM103に展開された画像データを解析する画像解析処理を実行する。図5(B)は、本実施形態に係るアルバム作成アプリにより実行される画像解析処理を示すフローチャートである。 In S403, the CPU 101 executes an image analysis process for analyzing the image data expanded in the RAM 103 in S402. FIG. 5B is a flowchart showing an image analysis process executed by the album creation application according to the present embodiment.

S40301では、CPU101は、S402で取得した画像データに付随する情報(Exif情報等)から撮影日時に関する情報を取得する。 In S40301, the CPU 101 acquires information regarding the shooting date and time from information (Exif information and the like) associated with the image data acquired in S402.

S40302では、CPU101は、S402で取得した画像データから、画像データの特徴量に関する情報を取得する。特徴量としては、例えば、ピントが挙げられる。ピントの特徴量を取得するためのエッジの検出方法としては、例えば、一般的なソーベルフィルタが用いられる。ソーベルフィルタでエッジ検出して、エッジの始点と終点の輝度差を始点と終点の距離で割ればエッジの傾き、すなわち輝度勾配が算出可能である。画像中のエッジの平均傾きを算出した結果から、平均傾きが大きい画像は、平均傾きが小さい画像よりもピントが合っているとみなすことができる。そして、傾きに対して異なる値の複数の閾値を設定すれば、どの閾値以上かを判定することにより、ピント量の評価値を出力可能である。本実施形態では、異なる2つの閾値を予め設定しておき、○△×の3段階により、ピント量を判定する。閾値については、アルバムに採用したいピントの傾きが「○」、許容できるピントの傾きが「△」、許容できない傾きが「×」となるようにして、実験等により予め設定される。なお、閾値の設定は、例えば、アルバム作成アプリの作成元等により提供されても良いし、ユーザインタフェース上で設定可能としても良い。 In S40302, the CPU 101 acquires information regarding the feature amount of the image data from the image data acquired in S402. Examples of the feature amount include focus. As an edge detection method for acquiring the feature amount of focus, for example, a general Sobel filter is used. The edge inclination, that is, the brightness gradient can be calculated by detecting the edge with the Sobel filter and dividing the brightness difference between the start point and the end point of the edge by the distance between the start point and the end point. From the result of calculating the average inclination of the edges in the image, it can be considered that the image having a large average inclination is in focus more than the image having a small average inclination. Then, if a plurality of threshold values having different values are set for the slope, it is possible to output an evaluation value of the focus amount by determining which threshold value or more. In the present embodiment, two different threshold values are set in advance, and the focus amount is determined in three steps of ○ △ ×. The threshold value is set in advance by an experiment or the like so that the inclination of the focus to be adopted for the album is "○", the allowable inclination of the focus is "Δ", and the unacceptable inclination is "x". The threshold value may be provided by, for example, the creator of the album creation application, or may be set on the user interface.

S40303では、CPU101は、S402で取得した各画像データに対してオブジェクト検出処理を実行する。まず、CPU101は、S402で取得した各画像データが表す画像から人物の顔を検出する。顔検出の処理には、公知の方法を用いることができ、例えば、複数用意した弱識別器から強識別器を作成するAdaboostが用いられる。本実施形態では、Adaboostにより作成した強識別器により人物(オブジェクト)の顔画像が検出される。また、CPU101は、顔画像を抽出すると共に、検出した顔画像の位置の左上座標値と右下座標値を取得する。この2種類の座標を持つことにより、CPU101は、顔画像の位置と顔画像のサイズを取得することが可能となる。また、S40303では、CPU101は、なお、顔に限らず、犬や猫等の動物、花、料理、建物、置物、乗り物等のオブジェクトを検出対象としてAdaboostによって強識別器を作成しても良い。これにより、CPU101は、顔以外のオブジェクトも検出することが可能となる。また、Adaboostではなく、ディープニュートラルネットワーク等によってオブジェクトが検索されても良い。 In S40303, the CPU 101 executes an object detection process for each image data acquired in S402. First, the CPU 101 detects a person's face from the image represented by each image data acquired in S402. A known method can be used for the face detection process. For example, AdaBoost, which creates a strong classifier from a plurality of weak classifiers prepared, is used. In the present embodiment, a face image of a person (object) is detected by a strong classifier created by AdaBoost. Further, the CPU 101 extracts the face image and acquires the upper left coordinate value and the lower right coordinate value of the position of the detected face image. By having these two types of coordinates, the CPU 101 can acquire the position of the face image and the size of the face image. Further, in S40303, the CPU 101 may create a strong classifier by AdaBoost not only for the face but also for objects such as animals such as dogs and cats, flowers, dishes, buildings, figurines, and vehicles. As a result, the CPU 101 can detect objects other than the face. Further, the object may be searched by a deep neutral network or the like instead of AdaBoost.

S40304では、CPU101は、個人認識処理を実行する。具体的には、CPU101は、S40303で抽出した顔画像と、顔辞書データベースに個人ID毎に保存されている代表顔画像との類似性を比較することで、個人認識を実施する。CPU101は、S40303で抽出した顔画像と各代表顔画像との類似性を判定し、類似性が閾値以上であり且つ最も類似性が高い代表顔画像のIDを、S40304で抽出した顔画像のIDとする。すなわち、類似性が閾値以上であり且つ最も類似性が高い代表顔画像に対応する人物が、S40304で抽出した顔画像に対応する人物として特定する。なお、CPU101は、S40304で抽出した顔画像と、顔辞書データベースに保存されている全ての代表顔画像との類似性が閾値未満の場合は、抽出した顔画像に新規の個人IDを割り振って、新規の人物として顔辞書データベースに登録する。なお顔辞書データベースは例えば、HDD104に格納されている。 In S40304, the CPU 101 executes the personal recognition process. Specifically, the CPU 101 performs personal recognition by comparing the similarity between the face image extracted in S40303 and the representative face image stored in the face dictionary database for each personal ID. The CPU 101 determines the similarity between the face image extracted in S40303 and each representative face image, and determines the ID of the representative face image whose similarity is equal to or higher than the threshold value and has the highest similarity, and the ID of the face image extracted in S40304. And. That is, the person corresponding to the representative face image having the similarity equal to or higher than the threshold value and having the highest similarity is specified as the person corresponding to the face image extracted in S40304. If the similarity between the face image extracted in S40304 and all the representative face images stored in the face dictionary database is less than the threshold value, the CPU 101 assigns a new personal ID to the extracted face image. Register as a new person in the face dictionary database. The face dictionary database is stored in the HDD 104, for example.

S404では、CPU101は、パスボックス302において指定されている画像データ群に含まれる画像データ全てに対して画像解析処理が終了したか否かを判定する。終了していない場合(S404でNo)、S402に戻り、まだ処理の対象となっていない画像データが取得される。終了している場合(S404でYes)はS405に進む。 In S404, the CPU 101 determines whether or not the image analysis process has been completed for all the image data included in the image data group specified in the pass box 302. If it is not finished (No in S404), the process returns to S402, and image data that has not yet been processed is acquired. If it is finished (Yes in S404), the process proceeds to S405.

S405では、CPU101は、シーン分割をする。シーン分割とは、S401〜S404にて得られた全画像データを、シーン毎に分割して、複数の画像群として管理することを指す。具体的には、CPU101は、S403で取得済みの撮影日時情報から算出した、各画像データの撮影日時の時間差に基づいて、全画像データを複数の画像群に分割する。なお、以下の説明において、全画像データ(メイン画像群)が分割されて得られる各画像群を、サブ画像群と言う。本実施形態では、例えば、以下に示す方法によって、シーン分割を行う。まず、撮像日時が古い順においてN番目の撮像画像データの撮像日時と(N+1)番目の撮像画像データの撮像日時との差が1日以下であれば、以下の通りである。撮像日時が古い順においてN番目の撮像画像データの撮像日時と(N+1)番目の撮像画像データの撮像日時との差が16時間以上であれば、N番目の撮像画像データと(N+1)番目の撮像画像データとの間にグループの境界を設定する。また、撮像日時が古い順において隣接する撮像画像データ間で撮像日時の差が、どの撮像画像データ間であっても16時間未満であるとする。この場合、1日で撮像した撮像画像データ群において最初に撮像した撮像画像データの撮像日時と最後に撮像した撮像画像データの撮像日時との差が4時間未満であれば、該1日の撮像画像データ群を1つのサブ画像群(グループ)とする。一方、該1日で撮像した撮像画像データ群において最初に撮像した撮像画像データの撮像日時と最後に撮像した撮像画像データの撮像日時との差が4時間以上であったとする。この場合、該1日で撮像した撮像画像データの数が50枚未満(1日で撮像した撮像画像の数が50未満)であれば、該1日の撮像画像データ群を1つのサブ画像群(グループ)とする。このような撮像画像データのグループ分けの一例を図5(A)に示す。図5(A)〜(C)において横軸は撮像日時(左側に向かうほど古く、右側に向かうほど新しい)、縦軸は撮像画像データの数を示す。図5(A)では、撮像画像データ群をグループ601〜608の8個のサブ画像群(グループ)に分割している。図5(A)において矢印はグループの境界を示している。なお、上記のシーン分割方法の説明において使用した撮像日時の差に対する閾値や撮像画像データの数に対する閾値は一例であり、これらの値に限るものではない。なお、分割後の画像群を分割画像群と呼び、1つのシーン毎に1つの分割画像群が設定される。 In S405, the CPU 101 divides the scene. The scene division refers to dividing all the image data obtained in S401 to S404 for each scene and managing them as a plurality of image groups. Specifically, the CPU 101 divides all the image data into a plurality of image groups based on the time difference between the shooting dates and times of each image data calculated from the shooting date and time information acquired in S403. In the following description, each image group obtained by dividing all the image data (main image group) is referred to as a sub image group. In the present embodiment, for example, the scene is divided by the method shown below. First, if the difference between the imaging date and time of the Nth captured image data and the imaging date and time of the (N + 1) th captured image data in the order of oldest imaging date and time is one day or less, it is as follows. If the difference between the imaging date and time of the Nth captured image data and the imaging date and time of the (N + 1) th captured image data is 16 hours or more in the order of the oldest imaging date and time, the Nth captured image data and the (N + 1) th captured image data Set the boundary of the group with the captured image data. Further, it is assumed that the difference in imaging date and time between adjacent captured image data in the order of oldest imaging date and time is less than 16 hours regardless of which captured image data. In this case, if the difference between the imaging date and time of the first captured image data and the imaging date and time of the last captured image data in the captured image data group captured in one day is less than 4 hours, the imaging of the day Let the image data group be one sub-image group (group). On the other hand, it is assumed that the difference between the imaging date and time of the first captured image data and the imaging date and time of the last captured image data in the captured image data group captured in the one day is 4 hours or more. In this case, if the number of captured image data captured in one day is less than 50 (the number of captured images captured in one day is less than 50), the captured image data group of the day is divided into one sub-image group. (Group). An example of such grouping of captured image data is shown in FIG. 5 (A). In FIGS. 5A to 5C, the horizontal axis represents the imaging date and time (older toward the left side and newer toward the right side), and the vertical axis represents the number of captured image data. In FIG. 5A, the captured image data group is divided into eight sub-image groups (groups) of groups 601-608. In FIG. 5A, the arrows indicate the boundaries of the groups. The threshold value for the difference in the imaging date and time and the threshold value for the number of captured image data used in the above description of the scene division method are examples, and are not limited to these values. The divided image group is called a divided image group, and one divided image group is set for each scene.

また、本実施形態では、シーン分割に撮影日時情報を用いるが、これに限らない。例えば撮影位置情報を用いて、撮影位置が近い画像データ同士を、1つの分割画像群として設定しても良い。また例えば、個人認識結果を用いても良い。例えば、あるグループ(クラスや部活等)に所属する生徒の画像データを事前にアルバム作成アプリ登録しておく。そして、当該画像データによって認識される個人認識結果を用いることで、グループに所属する生徒が写っている画像データ同士を、1つの分割画像群として設定しても良い。また例えば、画像が保存されているフォルダ名やソーシャルネットワーキングサービス等で付けたタグ情報を用いても良い。具体的には例えば「運動会」や「修学旅行」などの検索ワードを含むタグ情報を持つ画像データ同士を、1つの分割画像群として設定しても良い。検索ワードは例えば、設定画面301を介してユーザから入力される。 Further, in the present embodiment, the shooting date / time information is used for scene division, but the present invention is not limited to this. For example, using the shooting position information, image data whose shooting positions are close to each other may be set as one divided image group. Further, for example, the personal recognition result may be used. For example, the image data of students belonging to a certain group (class, club activities, etc.) is registered in advance in the album creation application. Then, by using the individual recognition result recognized by the image data, the image data showing the students belonging to the group may be set as one divided image group. Further, for example, the name of the folder in which the image is stored or the tag information attached by the social networking service or the like may be used. Specifically, for example, image data having tag information including a search word such as "athletic meet" or "school trip" may be set as one divided image group. The search word is input by the user via, for example, the setting screen 301.

S406では、CPU101は、シーン分類をする。具体的には、CPU101は、S407でシーン分割されることで得られたサブ画像群をシーンの種類毎に得点化して、一番得点が高いシーンの種類に、当該サブ画像群を分類する。なお、以下の説明において、S406における得点化をシーン分類得点化という。本実施形態では、シーンの種類として、「旅行」、「日常」、「セレモニー」があるものとし、サブ画像群をこれらのシーンのいずれかに分類する例を説明する。なお、シーン分類得点化には、シーンの各種類に対応する特徴量の情報が格納されたシーン分類テーブルが利用される。 In S406, the CPU 101 classifies the scenes. Specifically, the CPU 101 scores the sub-image group obtained by dividing the scene in S407 for each scene type, and classifies the sub-image group into the type of the scene having the highest score. In the following description, scoring in S406 is referred to as scene classification scoring. In the present embodiment, it is assumed that there are "travel", "daily life", and "ceremony" as the types of scenes, and an example of classifying the sub-image group into any of these scenes will be described. A scene classification table in which information on features corresponding to each type of scene is stored is used for scene classification scoring.

ここで、プログラムに予め格納される、シーン分類テーブルの作成方法について説明する。まず、「旅行」、「日常」、「セレモニー」のシーンに分類されると予め判定された複数の画像データ群がプログラムの設計者によって集められ、集められた画像データ群について、特徴量が取得される。ここで取得される特徴量の例は、例えば撮影期間、撮影枚数、撮影人数である。撮影期間は、各画像データ群において最初に生成された画像データと最後に生成された画像データとの撮影時間差である。撮影枚数は、各画像データ群の枚数である。撮影人数は、各画像データ群が表す各画像に含まれる顔の平均数である。その結果、例えば、旅行シーンであると予め判定された複数の画像データから成る1画像データ群について、撮影期間、撮影枚数、撮影人数の特徴量が取得される。なお、特徴量は撮影期間、撮影枚数、撮影人数に限定されず、他の特徴量が用いられても良いし、その中のいずれかのみが用いられても良い。 Here, a method of creating a scene classification table stored in advance in the program will be described. First, a plurality of image data groups determined in advance to be classified into "travel", "daily life", and "ceremony" scenes are collected by the program designer, and the feature amount is acquired for the collected image data groups. Will be done. Examples of the feature amount acquired here are, for example, the shooting period, the number of shots, and the number of shots. The shooting period is the shooting time difference between the first generated image data and the last generated image data in each image data group. The number of shots is the number of each image data group. The number of photographers is the average number of faces included in each image represented by each image data group. As a result, for example, the shooting period, the number of shots, and the feature amount of the number of shots are acquired for one image data group composed of a plurality of image data determined in advance as a travel scene. The feature amount is not limited to the shooting period, the number of shots, and the number of photographers, and other feature amounts may be used, or only one of them may be used.

そして、上記のような撮影期間、撮影枚数、撮影人数の特徴量の取得が、予め集められた他の画像データ群についても行われる。次に、シーン毎に集められた複数の画像データ群から取得された特徴量に基づいて、撮影期間の平均値と標準偏差、撮影枚数の平均値と標準偏差、1画像あたりの撮影人数の平均値と標準偏差とが求められる。このようにして求められた値と、シーンの各種類とが対応付けられることで、シーンの種類ごとの各平均値と標準偏差を示すシーン分類テーブルが作成される。 Then, the acquisition of the shooting period, the number of shots, and the feature amount of the number of shots as described above is also performed for other image data groups collected in advance. Next, based on the feature quantities acquired from a plurality of image data groups collected for each scene, the average value and standard deviation of the shooting period, the average value and standard deviation of the number of shots, and the average number of shots per image. The value and standard deviation are calculated. By associating the values obtained in this way with each type of scene, a scene classification table showing each average value and standard deviation for each type of scene is created.

本実施形態では、シーン分類テーブルとして、図6に示すテーブル600が利用されるものとする。テーブル600では、シーンID601に対応付けて、撮影期間602、撮影枚数603、撮影人数604それぞれの平均値と標準偏差とが登録されている。CPU101は、テーブル600をROM102やHDD104等の記憶領域にシーン分類処理前に予め記憶しておく。なお、テーブル600は、アルバム作成アプリケーションのプログラムに予め組み込まれていても良いし、アルバム作成アプリケーション外のプログラムに組み込まれていても良い。 In the present embodiment, the table 600 shown in FIG. 6 is used as the scene classification table. In the table 600, the average values and standard deviations of the shooting period 602, the number of shots 603, and the number of shots 604 are registered in association with the scene ID 601. The CPU 101 stores the table 600 in a storage area such as the ROM 102 or the HDD 104 in advance before the scene classification process. The table 600 may be incorporated in the program of the album creation application in advance, or may be incorporated in a program other than the album creation application.

ここで、シーン分類得点化について説明する。アルバム作成アプリが起動された後、ユーザがパスボックス302で指定した画像データ群がS405でシーン分割されることで得られた各サブ画像群に対して、CPU101は、撮影期間、撮影枚数、撮影人数の各特徴量の得点を算出する。CPU101は、各分割分の撮影期間、撮影枚数、撮影人数の得点、及びそれらの平均得点を、図6に示すシーン毎の平均値と標準偏差を用いて式(1)及び(2)より算出する。なお、下式における、所定の種類のシーンに対応する所定の特徴量の平均値および所定の種類のシーンに対応する所定の特徴量の標準偏差は、テーブル600に登録されている。また、特徴量は、撮影期間と撮影枚数、撮影人数の3つの特徴項目について取得される。そのため、特徴項目数は本例では3となる。 Here, scene classification scoring will be described. After the album creation application is started, the CPU 101 performs the shooting period, the number of shots, and the shooting for each sub-image group obtained by dividing the image data group specified by the user in the pass box 302 into scenes in S405. Calculate the score for each feature of the number of people. The CPU 101 calculates the shooting period for each division, the number of shots, the score of the number of shots, and the average score thereof from the equations (1) and (2) using the average value and standard deviation for each scene shown in FIG. To do. In the following formula, the average value of the predetermined feature amount corresponding to the predetermined type of scene and the standard deviation of the predetermined feature amount corresponding to the predetermined type of scene are registered in the table 600. In addition, the feature amount is acquired for three feature items of the shooting period, the number of shots, and the number of shots. Therefore, the number of feature items is 3 in this example.

まず、CPU101は、式(1)により、サブ画像群の、シーンの各種類および各特徴量毎の得点を取得する。 First, the CPU 101 acquires a score for each type of scene and each feature amount of the sub-image group by the equation (1).

サブ画像群の、所定の種類のシーンに対応する所定の特徴量の得点=50−|10×(所定の種類のシーンに対応する所定の特徴量の平均値−サブ画像群の所定の特徴量)/所定の種類のシーンに対応する所定の特徴量の標準偏差|・・・式(1)
これにより、例えば、サブ画像群において、「旅行」シーンに対応する撮影期間、撮影枚数、撮影人数それぞれの得点が取得される。なお、CPU101は、「旅行」シーンだけでなく、他の各種類のシーンについても得点を取得する。
Score of a predetermined feature amount corresponding to a predetermined type of scene in the sub-image group = 50- | 10 × (average value of a predetermined feature amount corresponding to a predetermined type of scene-a predetermined feature amount of the sub-image group ) / Standard deviation of a predetermined feature amount corresponding to a predetermined type of scene | ... Equation (1)
As a result, for example, in the sub-image group, the scores of the shooting period, the number of shots, and the number of shots corresponding to the "travel" scene are acquired. The CPU 101 acquires points not only for the "travel" scene but also for each of the other types of scenes.

次に、CPU101は、式(1)により求めた各得点を式(2)により平均化して、サブ画像群の、各種類のシーンに関する得点を取得する。 Next, the CPU 101 averages each score obtained by the equation (1) by the equation (2), and acquires the score for each type of scene of the sub-image group.

サブ画像群の、所定の種類のシーンに関する得点=(サブ画像群の、所定の種類のシーンに対応する撮影期間の得点+撮影枚数の得点+撮影人数の得点)/特徴項目数・・・式(2)
これにより、例えば、サブ画像群において、「旅行」、「日常」、「セレモニー」の各種類のシーンに関する得点が取得される。なお、CPU101は、シーン分類得点化を、各サブ画像群について行う。
Score of a predetermined type of scene in the sub image group = (Score of the shooting period corresponding to the scene of the predetermined type of the sub image group + score of the number of shots + score of the number of shots) / Number of feature items ... (2)
As a result, for example, in the sub-image group, scores for each type of scene of "travel", "daily life", and "ceremony" are acquired. The CPU 101 performs scene classification scoring for each sub-image group.

以上によって、各サブ画像群について「旅行」、「日常」、「セレモニー」毎の得点が算出される。そして、CPU101は、得点が1位であるシーンをそのサブ画像群のシーンであると分類する。例えば、図5(A)のシーン分割された後のシーン5に対応するサブ画像群5は、撮影期間が36時間、撮影枚数が300枚、撮影人数が1.7人であったとする。すると、サブ画像群5において、「旅行」に関する得点は45.32、「日常」に関する得点は18.38、「セレモニー」に関する得点は−29.92となり、サブ画像群5は最高得点のシーンである「旅行」に分類される。なお、いずれのサブ画像群がいずれのシーンに分類されているかは識別ができるようにシーンIDで管理される。また、各シーンに関する得点のうち、同点の得点がある場合は、CPU101は、予め定められた優先度に従って、サブ画像群を、同点のシーンのうちいずれかのシーンに分類する。具体的には、CPU101は、サブ画像群を、同点のシーンのうち、優先度の大きいシーンに分類する。なお、例えば、本実施形態では、優先度の大きさは、日常>セレモニー>旅行の順であるものとする。優先度の大きさの順番はこれに限定されるものではなく、例えばユーザが優先度の順番を設定できるようにしても良い。 Based on the above, the scores for each "travel", "daily life", and "ceremony" are calculated for each sub-image group. Then, the CPU 101 classifies the scene having the highest score as the scene of the sub-image group. For example, it is assumed that the sub-image group 5 corresponding to the scene 5 after the scene division in FIG. 5A has a shooting period of 36 hours, the number of shots is 300, and the number of shots is 1.7. Then, in the sub image group 5, the score for "travel" is 45.32, the score for "daily life" is 18.38, the score for "ceremony" is -29.92, and the sub image group 5 is the scene with the highest score. It is classified as a certain "travel". It should be noted that which sub-image group is classified into which scene is managed by the scene ID so that it can be identified. If there is a tie score among the scores for each scene, the CPU 101 classifies the sub-image group into one of the tie scenes according to a predetermined priority. Specifically, the CPU 101 classifies the sub-image group into scenes having a high priority among the scenes having the same score. For example, in the present embodiment, the order of priority is daily> ceremony> travel. The order of priority magnitude is not limited to this, and for example, the user may be able to set the order of priority.

なお、シーン分類得点化に用いられる特徴量は、撮影期間と撮影枚数、撮影人数の3つであるものとしたが、この形態に限定されない。例えば、各シーンに対応する所定のオブジェクトが画像データに含まれるか否か、といったフラグを特徴量としても良い。例えば、「旅行」に対応する所定のオブジェクトが「空」である場合、「空」が含まれている画像データが多いサブ画像群の、「旅行」に関する得点が高くなるように設定される。また、個人識別情報を特徴量としても良い。例えば、「セレモニー」がさらに細かく分類された「結婚式」、「披露宴」というシーンがあるとする。そして、CPU101は、メイン画像群の中で最も多く画像データに含まれている二人を新郎新婦として識別する。そして、新郎新婦のみが含まれているか、新郎新婦以外の人が含まれているか、といったフラグを特徴量とする。この場合例えば、新郎新婦のみが含まれている画像データが多いサブ画像群の、「結婚式」に関する得点が高くなるように設定され、新郎新婦以外の人が含まれている画像データが多いサブ画像群の、「披露宴」に関する得点が高くなるように設定される。なお、シーン分類は例えば、Convolution Neural Network(CNN)を用いた機械学習による出力等によって行われても良い。 It should be noted that the feature quantities used for scoring the scene classification are three, the shooting period, the number of shots, and the number of shots, but the present invention is not limited to this form. For example, a flag such as whether or not a predetermined object corresponding to each scene is included in the image data may be used as a feature amount. For example, when the predetermined object corresponding to "travel" is "sky", the score related to "travel" is set to be high in the sub-image group having a lot of image data including "sky". In addition, personal identification information may be used as a feature quantity. For example, suppose there are scenes such as "wedding" and "reception" in which "ceremonies" are further classified. Then, the CPU 101 identifies the two people included in the image data most in the main image group as the bride and groom. Then, the feature amount is a flag such as whether only the bride and groom are included or a person other than the bride and groom is included. In this case, for example, a sub-image group containing many image data containing only the bride and groom is set so that the score related to "wedding" is high, and many sub-image data including people other than the bride and groom are included. The score for the "wedding reception" of the image group is set to be high. Note that the scene classification may be performed by, for example, output by machine learning using Convolution Neural Network (CNN) or the like.

S407では、CPU101は、CPU101は、主被写体指定部305に対するユーザの入力に従って、アルバム数ボックス310に入力された数に対応する各アルバムについて主被写体を設定する。ここでは説明のため、アルバム1に主被写体1、アルバム2に主被写体2を設定したとする。 In S407, the CPU 101 sets the main subject for each album corresponding to the number input in the album number box 310 according to the user's input to the main subject designation unit 305. Here, for the sake of explanation, it is assumed that the main subject 1 is set in the album 1 and the main subject 2 is set in the album 2.

S408では、CPU101は、画像得点化を実行する。S418における画像得点化とは、画像データ毎に後述の観点で評価した得点を付与する(スコアリング)ことであり、後述の、テンプレートに配置される画像データの選択時に参照される。本実施形態において画像得点化は、S40302で取得された各画像データの特徴量に基づいて、複数の観点において行われる。すなわち、本実施形態において画像得点化により、各画像データに対して、複数の点数が付与される。具体的には、本実施形態では、画質に基づく得点、主被写体1に基づく得点、主被写体2に基づく得点の3つの観点における得点が、各画像データに対して付与される。 In S408, the CPU 101 executes image scoring. The image scoring in S418 is to give a score evaluated from the viewpoint described later for each image data (scoring), and is referred to when selecting the image data to be arranged in the template, which will be described later. In the present embodiment, the image scoring is performed from a plurality of viewpoints based on the feature amount of each image data acquired in S40302. That is, in the present embodiment, a plurality of points are given to each image data by image scoring. Specifically, in the present embodiment, a score based on the image quality, a score based on the main subject 1, and a score based on the main subject 2 are given to each image data.

まず、画質に基づく画像得点化について説明する。本実施形態では例えば、画質に基づく画像得点化において、ピントや画素数等の特徴量が用いられる。具体的には例えば、S40302で取得されたピントの特徴量が「○」である画像データに対して付加される得点が、ピントの特徴量が「△」や「×」である画像データに対して付加される得点より高くなるように、画質に基づく得点が付加される。また例えば、画素数が高い画像を表す画像データに対して付加される得点が、画素数が低い画像を表す画像データに対して付加される得点より高くなるように、画質に基づく得点が画像データに対して付加される。なお、画質に基づく画像得点化に用いられる特徴量は、撮影時に使用されたレンズ情報などの撮影情報であっても良いし、アプリケーションに入力される画像の圧縮フォーマットであっても良い。 First, image scoring based on image quality will be described. In this embodiment, for example, in image scoring based on image quality, feature quantities such as focus and the number of pixels are used. Specifically, for example, the score added to the image data whose focus feature amount is "○" acquired in S40302 is for the image data whose focus feature amount is "Δ" or "×". The score based on the image quality is added so as to be higher than the score added. Further, for example, the score based on the image quality is the image data so that the score added to the image data representing the image having a high number of pixels is higher than the score added to the image data representing the image having a low number of pixels. Is added to. The feature amount used for image scoring based on image quality may be shooting information such as lens information used at the time of shooting, or may be a compression format of an image input to an application.

次に、主被写体1に基づく画像得点化、主被写体2に基づく画像得点化について説明する。これらの画像得点化は、S40303およびS40304で解析された顔のサイズおよび個人認識が用いられて特定される、主被写体が含まれているか否かに関する情報に基づいて行われる。例えば、主被写体1が含まれている画像データに対して付加される得点が、主被写体1が含まれていない画像データに対して付加される得点より高くなるように、主被写体1に基づく得点が画像データに対して付加される。また例えば、主被写体1が占める面積(サイズ)が大きい画像データに対して付加される得点が、主被写体1が占める面積が小さい画像データに対して付加される得点より高くなるように、主被写体1に基づく得点が画像データに対して付加される。また例えば、笑顔の主被写体1が含まれる画像データに対して付加される得点が、笑顔でない主被写体1が含まれる画像データに対して付加される得点より高くなるように、主被写体1に基づく得点が画像データに対して付加される。主被写体2についても、同様の観点で得点化が行われる。 Next, image scoring based on the main subject 1 and image scoring based on the main subject 2 will be described. These image scoring is performed based on the information regarding whether or not the main subject is included, which is identified using the face size and personal recognition analyzed in S40303 and S40304. For example, a score based on the main subject 1 so that the score added to the image data including the main subject 1 is higher than the score added to the image data not including the main subject 1. Is added to the image data. Further, for example, the score added to the image data in which the area (size) occupied by the main subject 1 is large is higher than the score added to the image data in which the area occupied by the main subject 1 is small. A score based on 1 is added to the image data. Further, for example, it is based on the main subject 1 so that the score added to the image data including the smiling main subject 1 is higher than the score added to the image data including the non-smiling main subject 1. Scores are added to the image data. The main subject 2 is also scored from the same viewpoint.

S409では、CPU101は、パスボックス302において指定されている画像データ群全てに対して画像得点化が終了したか否かを判定する。終了していない場合(S409でNo)、S408に戻り、まだ処理の対象となっていない画像データに対して画像得点化が実行される。終了している場合(S409でYes)、S410に移行する。 In S409, the CPU 101 determines whether or not the image scoring has been completed for all the image data groups specified in the pass box 302. If it is not completed (No in S409), the process returns to S408, and image scoring is executed for the image data that has not yet been processed. If it is finished (Yes in S409), the process proceeds to S410.

S410では、CPU101は、S409において実行された画像得点化の結果を踏まえ、S402で取得された全画像データに関して、共通ページ用の得点と、個別ページ用の得点とを特定する。共通ページとは、設定画面301によって作成を指示された全てのアルバムに共通して含まれるページである。一方、個別ページとは、設定画面301によって作成を指示されたアルバムの内、1つのアルバムにのみ含まれるページである。個別ページ用の得点は、設定画面301によって作成を指示されたそれぞれのアルバム毎に特定される。 In S410, the CPU 101 specifies the score for the common page and the score for the individual page with respect to all the image data acquired in S402 based on the result of the image scoring executed in S409. The common page is a page commonly included in all the albums instructed to be created by the setting screen 301. On the other hand, the individual page is a page included in only one album among the albums instructed to be created by the setting screen 301. The score for the individual page is specified for each album instructed to be created by the setting screen 301.

画像データIの共通ページ用の得点scoreを以下の式(3)で表す。
score=Σscore 式(3)
ここで、scoreは画像データIに付与されたそれぞれの得点(画質に基づく得点、主被写体1に基づく得点、主被写体2に基づく得点)のうちi番目の得点を表し、wは各得点に対する重みを表す。本実施形態では、w=1/3に設定することで、画質に基づく得点、主被写体1に基づく得点、主被写体2に基づく得点を均等に評価する。これにより、画質が良く、且つそれぞれの主被写体が多く(あるいは大きく)写っている画像の得点が高くなるように、共通ページ用の得点が特定される。つまり、作成が指示された全てのアルバムデータの個々に対応するそれぞれの主被写体が考慮されて、共通ページ用の得点が特定される。
The score I score s for the common page of the image data I is expressed by the following equation (3).
I score s = Σ i w i · I score i formula (3)
Here, I score i represents the i-th score of each score given to the image data I (score based on quality, score based on the main subject 1, the score based on the main subject 2), w i is the Represents the weight for the score. In the present embodiment, by setting wi = 1/3, the score based on the image quality, the score based on the main subject 1, and the score based on the main subject 2 are equally evaluated. As a result, the score for the common page is specified so that the image quality is good and the score of the image in which each main subject is large (or large) is high. That is, the score for the common page is specified by considering each main subject corresponding to each of all the album data instructed to be created.

画像データIの、アルバムデータOに対応する個別ページ用の得点scoreIOを以下の式(4)で表す。なお、Oは、ユーザによって作成を指示された複数のアルバムデータにそれぞれ割り当てられたアルバム番号である。すなわち、本実施形態では、画像データIに対し、アルバムデータの数分、個別ページ用の得点が付加されることとなる。 The score I score IO of the image data I for the individual page corresponding to the album data O is represented by the following equation (4). Note that O is an album number assigned to each of the plurality of album data instructed to be created by the user. That is, in the present embodiment, points for individual pages are added to the image data I by the number of album data.

ここで、scoreは画像データIに付与された画質に基づく得点を表し、scoreは画像Iに付与された、アルバムデータOに対応する主被写体sOに基づく得点を表し、wは画質に基づく得点に対する重みを表し、wは主被写体sOに基づく得点に対する重みを表す。本実施形態では、w=w=1に設定することで、画質が良く、且つと主被写体sOが多く(あるいは大きく)写っている画像の得点が高くなるように、個別ページ用の得点が特定される。言い換えれば、主被写体sO以外の主被写体(アルバムデータOに対応していない主被写体)は考慮されずに、個別ページ用の得点が特定される。個別ページ用の得点の特定は、各アルバムデータについて行われる。すなわち結果としてS410では、個別用ページの得点が、設定画面301によって作成を指示されたアルバムデータの数だけ特定され、共通用ページの得点が1つ特定されることとなる。なお本実施形態では、scoreが0点の場合は、scoreの点数にかかわらず、scoreIOは0点となる。 Here, I score q represents a score based on the image quality given to the image data I, I score o represents a score given to the image I based on the main subject s O corresponding to the album data O, and w q is It represents the weight for the score based on the image quality, w o represents the weight for the score based on the main subject sO. In the present embodiment, by setting w q = w o = 1, the score for the individual page is high so that the image quality is good and the score of the image in which the main subject so is large (or large) is high. Is identified. In other words, the score for each page is specified without considering the main subject other than the main subject sO (the main subject that does not correspond to the album data O). The identification of the score for each page is performed for each album data. That is, as a result, in S410, the score of the individual page is specified by the number of album data instructed to be created by the setting screen 301, and one score of the common page is specified. In the present embodiment, when I score o is 0 points, I score I O is 0 points regardless of the score of I score q .

このように、本実施形態では、共通ページ用の評価と、個別ページ用の評価とが、それぞれ異なる要素に基づいて行われる。具体的には、共通ページ用の評価は、複数のアルバムデータのそれぞれに対応する複数の主被写体に関する要素に基づいて行われる。一方で、アルバムOに対応する個別ページ用の評価は、アルバムOに対応する主被写体に関する要素に基づいて行われ、他のアルバムに対応する主被写体に関する要素に基づいて行われない。これにより、共通ページ用の評価と、個別ページ用の評価を適切に行うことができる。 As described above, in the present embodiment, the evaluation for the common page and the evaluation for the individual page are performed based on different elements. Specifically, the evaluation for the common page is performed based on the elements related to the plurality of main subjects corresponding to each of the plurality of album data. On the other hand, the evaluation for the individual page corresponding to the album O is performed based on the element related to the main subject corresponding to the album O, and not based on the element related to the main subject corresponding to another album. As a result, the evaluation for the common page and the evaluation for the individual page can be appropriately performed.

なお、共通ページ用の得点の特定と、個別ページ用の得点の特定とが、画質及び主被写体に基づいて行われたが、この形態に限定されない。例えば、主被写体が含まれていない画像データ(例えば「風景」にシーン分類される画像データ)は、画像データに紐付けられている他の画像情報から得点が特定されても良い。また例えば、得点が高い画像データとの撮影時間の差が小さい画像データは、得点が高くなるように制御されても良い。これにより例えば、主被写体が含まれている画像データと関連性がある可能性が高い画像データにも高得点を付けることができる。 It should be noted that the identification of the score for the common page and the identification of the score for the individual page were performed based on the image quality and the main subject, but the present invention is not limited to this form. For example, the score of the image data that does not include the main subject (for example, the image data classified into a “landscape”) may be specified from other image information associated with the image data. Further, for example, the image data having a small difference in shooting time from the image data having a high score may be controlled so that the score is high. Thereby, for example, it is possible to give a high score to the image data that is likely to be related to the image data including the main subject.

S411では、CPU101は、S410で特定された得点を用いて、アルバムに含まれる見開きを表す見開きデータを作成する。図5(C)は、本実施形態に係るアルバム作成アプリにより実行される見開きデータ生成処理を示すフローチャートである。 In S411, the CPU 101 uses the score specified in S410 to create spread data representing the spread included in the album. FIG. 5C is a flowchart showing a spread data generation process executed by the album creation application according to the present embodiment.

S41101では、CPU101は、S402で取得された全画像データに関して、S410で特定された得点のうち1つを読み込む。本実施形態では、ユーザによって作成を指定されたアルバムの数が2つであるものとする。そしてCPU101は、アルバム1に関する個別ページ用の得点、アルバム2に関する個別ページ用の得点、共通ページ用の得点の順に各画像データの得点を読み込むものとする。しかし、これに限定されず、CPU101は、どの得点を先に読み込んでも良い。なお、S41101で個別ページ用の得点が読み込まれた場合、以下の処理では、個別ページ用の見開きデータを作成し、S41101で共通ページ用の得点が読み込まれた場合、以下の処理では、共通ページ用の見開きデータを作成することとなる。 In S41101, the CPU 101 reads one of the scores specified in S410 with respect to all the image data acquired in S402. In this embodiment, it is assumed that the number of albums specified to be created by the user is two. Then, the CPU 101 reads the score of each image data in the order of the score for the individual page related to the album 1, the score for the individual page related to the album 2, and the score for the common page. However, the present invention is not limited to this, and the CPU 101 may read any score first. When the score for the individual page is read in S41011, the spread data for the individual page is created in the following processing, and when the score for the common page is read in S41101, the common page is read in the following processing. Spread data for will be created.

S41102では、CPU101は、S41101で読み込まれた得点に基づいて、S402で取得された全画像データから、見開きに配置される画像データの候補となる候補画像データを取得する。なお、S41101で読み込まれた得点が個別ページ用の得点である場合、ここでは、個別ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。また、S41101で読み込まれた得点が共通ページ用の得点である場合、ここでは、共通ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。本実施形態では、CPU101は、S41101で読み込まれた得点として閾値以上の得点を有する画像データを、候補画像データとして取得する。閾値以上の得点を有する画像データがない場合は、最も高い得点を有する画像データを候補画像とする。なお、ここでは全画像群から候補画像を取得したが、これに限らない。後述する画像選択処理で既に選ばれた画像は取得対象から除外しても良い。 In S41102, the CPU 101 acquires candidate image data as a candidate for the image data arranged in the spread from all the image data acquired in S402 based on the score read in S41101. When the score read in S41011 is the score for the individual page, the candidate image data that is a candidate for the image data arranged in the template for the individual page is acquired here. Further, when the score read in S41011 is the score for the common page, the candidate image data that is a candidate for the image data arranged in the template for the common page is acquired here. In the present embodiment, the CPU 101 acquires image data having a score equal to or higher than the threshold value as the score read in S41101 as candidate image data. If there is no image data having a score equal to or higher than the threshold value, the image data having the highest score is used as a candidate image. Here, candidate images were acquired from all the image groups, but the present invention is not limited to this. Images already selected in the image selection process described later may be excluded from the acquisition target.

S41103では、CPU101は、S405で行ったシーン分割の結果と、S41102で取得した候補画像データとを基に見開き数を設定する。まずCPU101は、各シーンにいずれの枚数の候補画像データが属するかを特定する。本実施形態では、シーン毎に見開きデータが作成される。そのため、CPU101は、各シーンに対応する見開きデータの数を式(5)により特定する。なお、1見開きあたりの最大画像データ数は、見開き写真枚数306に対する入力に応じて定められる。 In S41103, the CPU 101 sets the number of spreads based on the result of the scene division performed in S405 and the candidate image data acquired in S41102. First, the CPU 101 specifies which number of candidate image data belongs to each scene. In this embodiment, spread data is created for each scene. Therefore, the CPU 101 specifies the number of spread data corresponding to each scene by the equation (5). The maximum number of image data per spread is determined according to the input for the number of spread photographs 306.

以下ではまず、S41101で読み込まれた得点が個別ページ用の得点である場合について説明する。各シーンに対応する見開きデータの集合によって、個別ページに対応する見開きデータが生成されるため、CPU101は、個別ページに対応する見開きデータの数を式(6)により特定する。Sは、各シーンに割り振られたシーン番号である。 In the following, first, a case where the score read in S41011 is a score for an individual page will be described. Since the spread data corresponding to the individual pages is generated by the set of the spread data corresponding to each scene, the CPU 101 specifies the number of spread data corresponding to the individual pages by the equation (6). S is a scene number assigned to each scene.

シーンSの見開きデータ数=ceil(シーンSに属する候補画像データ数
÷1見開きあたりの最大画像データ数) 式(5)
個別ページに対応する見開きデータ数=ΣシーンSの見開きデータ数 式(6)
なお、式(6)により特定された個別ページに対応する見開きデータの数が、見開き数ボックス304でユーザにより指定された数(総見開きデータ数)以上になる場合、以下の式にて個別ページに対応する見開きデータの数を再特定する。
個別ページに対応する見開きデータ数=総見開きデータ数−1 式(7)
Number of spread data of scene S = ceil (number of candidate image data belonging to scene S)
÷ Maximum number of image data per spread) Equation (5)
Number of spread data corresponding to individual pages = Number of spread data of Σ S scene S Equation (6)
If the number of spread data corresponding to the individual page specified by the formula (6) is equal to or greater than the number (total number of spread data) specified by the user in the spread number box 304, the individual page is described by the following formula. Respecify the number of spread data corresponding to.
Number of spread data corresponding to individual pages = Total number of spread data-1 Equation (7)

上述したように本実施形態では、アルバムに、共通ページと個別ページとを混在させる。少なくとも1つは、共通ページにより構成される見開きをアルバムに含ませるために、上述のような特定が行われる。なお、個別ページに対応する見開きデータの数は上限値、下限値が設定されても良い。なお、S41101で読み込まれた得点がアルバム1に関する個別ページ用の得点である場合、本処理によりアルバム1内に含まれる個別ページに対応する見開きデータ数が特定される。そして、S41101で読み込まれた得点がアルバム2に関する個別ページ用の得点である場合、本処理によりアルバム2内に含まれる個別ページに対応する見開きデータ数が特定される。 As described above, in the present embodiment, the common page and the individual page are mixed in the album. At least one is specified as described above in order to include a spread composed of common pages in the album. An upper limit value and a lower limit value may be set for the number of spread data corresponding to individual pages. When the score read in S41011 is the score for the individual page related to the album 1, the number of spread data corresponding to the individual page included in the album 1 is specified by this process. Then, when the score read in S41011 is the score for the individual page related to the album 2, the number of spread data corresponding to the individual page included in the album 2 is specified by this process.

次に、S41101で読み込まれた得点が共通ページ用の得点である場合について説明する。アルバムを構成する見開きのうち、個別ページに対応する見開き以外が、共通ページに対応する見開きとなる。そのため、CPU101は、共通ページに対応する見開きデータの数を式(8)により特定する。 Next, a case where the score read in S41011 is a score for a common page will be described. Of the spreads that make up the album, the spreads other than the spreads that correspond to the individual pages are the spreads that correspond to the common pages. Therefore, the CPU 101 specifies the number of spread data corresponding to the common page by the equation (8).

共通ページに対応する見開きデータ数=総見開きデータ数−MIN
(個別ページに対応する見開きデータ数) 式(8)
すなわち、本実施形態では、総見開きデータ数から個別ページに対応する見開きデータの数を引いた値が、共通ページに対応する見開きデータの数となる。
Number of spread data corresponding to common page = Total number of spread data-MIN
(Number of spread data corresponding to individual pages) Equation (8)
That is, in the present embodiment, the value obtained by subtracting the number of spread data corresponding to individual pages from the total number of spread data is the number of spread data corresponding to the common page.

なお、本実施形態では、各シーンに含まれる候補画像数に応じて、個別ページに対応する見開きデータと共通ページに対応する見開きデータの各見開きデータ数を設定したが、これに限らない。例えば、各見開きデータ数は、アルバム作成アプリに予め設定されている数であっても良いし、ユーザによって指定された数であっても良い。 In the present embodiment, the number of spread data corresponding to the individual page and the spread data corresponding to the common page are set according to the number of candidate images included in each scene, but the present invention is not limited to this. For example, the number of spread data may be a number preset in the album creation application, or may be a number specified by the user.

S41104では、CPU101は、S41102で取得した候補画像データを、各見開きデータに割り当てる。ここではまずCPU101は、S41102で取得した候補画像データを、S41103で特定した見開きデータ数分の画像データ群に分割する。なお、S41102で取得された候補画像データが、個別ページ用の候補画像データであれば、それらが、個別ページに対応する見開き数分の画像データ群に分割される。また、S41102で取得された候補画像データが、共通ページ用の候補画像データであれば、それらが、共通ページに対応する見開き数分の画像データ群に分割される。具体的にはCPU101は、S41102で取得した候補画像データを、S40301で取得した情報に基づいて撮影時間順に並べる。そしてCPU101は、隣り合う画像データとの間で撮影時間の差が閾値より大きい場合、当該隣り合う画像データ間で、候補画像データを分割する。S41103で特定した見開き数分の画像データ群が形成されるまで、この方法による分割が繰り返される。その後、分割により形成された各画像データ群を、それぞれ、撮影日時が先頭の画像データ群から順に、アルバムの見開きの先頭に割り当てる。すなわち、撮影日時順に画像データ群をアルバムの各見開きに割り当てる。これにより、撮影日時順に画像データが並んだアルバムを作成することができる。なお、1つの見開きページ内では、画像は撮影日時に並んでいなくても良い。 In S41104, the CPU 101 allocates the candidate image data acquired in S41102 to each spread data. Here, first, the CPU 101 divides the candidate image data acquired in S41102 into an image data group corresponding to the number of spread data specified in S41103. If the candidate image data acquired in S41102 is candidate image data for individual pages, they are divided into image data groups corresponding to the number of spreads corresponding to the individual pages. If the candidate image data acquired in S41102 is candidate image data for a common page, they are divided into image data groups corresponding to the number of spreads corresponding to the common page. Specifically, the CPU 101 arranges the candidate image data acquired in S41102 in order of shooting time based on the information acquired in S4301. Then, when the difference in shooting time between the adjacent image data is larger than the threshold value, the CPU 101 divides the candidate image data between the adjacent image data. The division by this method is repeated until the image data group for the number of spreads specified in S41103 is formed. After that, each image data group formed by the division is assigned to the beginning of the spread of the album in order from the image data group having the first shooting date and time. That is, the image data group is assigned to each spread of the album in the order of shooting date and time. This makes it possible to create an album in which image data are arranged in order of shooting date and time. The images do not have to be arranged at the shooting date and time in one spread page.

S41105では、CPU101は、見開きに配置される画像データを選択する画像選択処理を実行する。ここでは、ある見開きに割り当てられた分割画像データ群から画像データを4枚選択する例を、図7を参照しながら説明する。なお、見開きとは、2ページ分の領域であるが、最初の見開き(表紙)及び最後の見開き(裏表紙)は、1ページ分の領域となる。また、いずれの見開きデータにおいて、いずれの枚数の画像データが選択されるかは、例えば、見開き写真枚数306に対するユーザ入力等に応じて定められる。例えば、見開き写真枚数306に対するユーザ入力に基づく枚数が4である場合、アルバム内の各見開きデータに含まれる画像データの平均が4となるように、S41105で選択される画像の枚数が決定される。そのため、アルバム内の各見開きデータに含まれる画像データの枚数は、それぞれ異なっていても良い。また、個別ページ用の分割画像データ群から画像データが選択されるのであれば、個別ページ用の得点に基づいて本処理が実行される。個別ページ用の分割画像データ群から個別ページ用の得点に基づいて選択された画像データが、個別画像データである。また、共通ページ用の分割画像データ群から画像データが選択されるのであれば、共通ページ用の得点に基づいて本処理が実行される。共通ページ用の分割画像データ群から共通ページ用の得点に基づいて選択された画像データが、共通画像データである。 In S41105, the CPU 101 executes an image selection process for selecting image data arranged in a spread. Here, an example of selecting four image data from the divided image data group assigned to a certain spread will be described with reference to FIG. 7. The spread is an area for two pages, but the first spread (front cover) and the last spread (back cover) are areas for one page. Further, in which spread data, which number of image data is selected is determined according to, for example, a user input for the spread photo number 306. For example, when the number of spread photos 306 based on user input is 4, the number of images selected in S41105 is determined so that the average of the image data included in each spread data in the album is 4. .. Therefore, the number of image data included in each spread data in the album may be different. If the image data is selected from the divided image data group for the individual pages, this process is executed based on the score for the individual pages. The image data selected from the divided image data group for the individual page based on the score for the individual page is the individual image data. Further, if the image data is selected from the divided image data group for the common page, this process is executed based on the score for the common page. The image data selected from the divided image data group for the common page based on the score for the common page is the common image data.

図7(A)は見開きに割り当てられた分割画像データ群のうち、撮影日時が一番早い画像データと一番遅い画像データとの撮影日時の時間差(分割撮影期間)、言い換えれば、分割画像データ群の撮影期間を示している。なお、ここでは、画像データの選択を、メインスロット、サブスロットの順で行う。ここでは、見開きに対応するテンプレートには1枚のメインスロットが含まれるものとする。そのため、1枚目に選択される画像データは、メインスロット用の画像データである。CPU101は、メインスロット用の画像データとして、図7(B)に示す分割撮影期間に対応する画像データのうち、S410で特定された得点が最高点の画像データ(1)を選択する。 FIG. 7A shows the time difference between the shooting date and time (divided shooting period) between the image data with the earliest shooting date and time and the image data with the latest shooting date and time among the divided image data groups assigned to the spread, in other words, the divided image data It shows the shooting period of the group. Here, the image data is selected in the order of the main slot and the sub slot. Here, it is assumed that the template corresponding to the spread includes one main slot. Therefore, the image data selected for the first image is the image data for the main slot. As the image data for the main slot, the CPU 101 selects the image data (1) having the highest score specified in S410 from the image data corresponding to the divided shooting period shown in FIG. 7 (B).

2枚目以降に選択される画像データは、サブスロット用の画像データである。2枚目以降の画像データの選択は分割撮影期間の一部に集中しないように、以下説明するような方法により行われる。まず、CPU101は、図7(C)に示すように、分割撮影期間を2分割する。次にCPU101は、図7(D)に示すように、1枚目の画像データが選ばれていない分割撮影期間(図中、実線で示している期間)に生成された画像データから2枚目の画像データを選択する。なお、2枚目の画像データとしては、1枚目の画像データが選ばれていない分割撮影期間に生成された画像データのうちS410で特定された得点が最高点の画像データ(2)を選択する。次にCPU101は、図7(E)に示すように図7(D)に示す各分割撮影期間を2分割する。そして、CPU101は、図7(F)に示すように1枚目の画像データと2枚目の画像データがいずれも選ばれていない分割撮影期間(図中、実線で示している期間)に生成された画像データから3枚目の画像データを選択する。なお、3枚目の画像データとしては、1枚目の画像データと2枚目の画像データがいずれも選ばれていない分割撮影期間に生成された画像データのうちS410で特定された得点が最高点の画像データ(3)を選択する。そして、4枚目の画像データとしては、1枚目、2枚目及び3枚目の画像データがいずれも選ばれていない分割撮影期間に生成された画像データのうちS410で特定された得点が最高点の画像データを選択する。 The image data selected for the second and subsequent images is the image data for the subslot. The selection of the second and subsequent image data is performed by the method described below so as not to concentrate on a part of the divided shooting period. First, the CPU 101 divides the divided shooting period into two, as shown in FIG. 7 (C). Next, as shown in FIG. 7D, the CPU 101 is the second image from the image data generated during the divided shooting period (the period shown by the solid line in the figure) in which the first image data is not selected. Select the image data of. As the second image data, the image data (2) having the highest score specified in S410 is selected from the image data generated during the divided shooting period in which the first image data is not selected. To do. Next, as shown in FIG. 7 (E), the CPU 101 divides each divided imaging period shown in FIG. 7 (D) into two. Then, as shown in FIG. 7 (F), the CPU 101 generates the first image data and the second image data in the divided shooting period (the period shown by the solid line in the figure) in which neither of them is selected. The third image data is selected from the obtained image data. As the third image data, the score specified in S410 is the highest among the image data generated during the divided shooting period in which neither the first image data nor the second image data is selected. Select the point image data (3). Then, as the fourth image data, the score specified in S410 among the image data generated in the divided shooting period in which none of the first, second, and third image data is selected is obtained. Select the highest point image data.

次に、1枚目、2枚目及び3枚目の画像データがいずれも選ばれていない分割撮影期間に生成された画像が存在せず、当該分割撮影期間に生成された画像データから4枚目の画像データを選択できない例を説明する。ここで、図9(G)に示すように、まだ画像データが選ばれていない分割撮影期間(図中、斜線で示している期間)に生成された画像データは存在しないものとする。その場合、CPU101は、図9(H)に示すように各分割撮影期間をさらに2分割する。次にCPU101は、図9(I)に示すように、期間内に生成された画像データがないと認識された分割撮影期間以外で、且つ未だ画像データが選ばれていない分割撮影期間(図中、実線で示している期間)に生成された画像から4枚目の画像データを選択する。なお、CPU101は、4枚目の画像データとしては、当該分割撮影期間に生成された画像データのうちサブスロット用の最高点の画像データ(4)を選択する。 Next, there is no image generated in the divided shooting period in which none of the first, second, and third image data is selected, and four images are generated from the image data generated in the divided shooting period. An example in which the image data of the eyes cannot be selected will be described. Here, as shown in FIG. 9 (G), it is assumed that there is no image data generated during the divided shooting period (the period indicated by the diagonal line in the figure) in which the image data has not been selected yet. In that case, the CPU 101 further divides each divided shooting period into two as shown in FIG. 9 (H). Next, as shown in FIG. 9 (I), the CPU 101 has a divided shooting period other than the divided shooting period in which it is recognized that there is no image data generated within the period, and the image data has not yet been selected (in the figure). , The fourth image data is selected from the images generated in the period indicated by the solid line). The CPU 101 selects the highest point image data (4) for the subslot among the image data generated during the divided shooting period as the fourth image data.

S41106では、CPU101は、設定画面301に対する入力に応じた複数のテンプレートを取得する。具体的には、CPU101は、商材指定部307に対応するデザインの複数のテンプレートを取得する。なお、設定画面301には例えば、各見開きに生じさせる余白の大きさ等の入力が受け付けられても良く、ここで取得されるテンプレートは、入力された余白等に応じて決定されても良い。このように本実施形態では、テンプレートに配置される画像データが、ユーザによる画像データの選択操作を画像処理装置100が受け付けることなく自動で選択される。 In S41106, the CPU 101 acquires a plurality of templates according to the input to the setting screen 301. Specifically, the CPU 101 acquires a plurality of templates of the design corresponding to the product designation unit 307. Note that the setting screen 301 may accept, for example, input of the size of the margin generated in each spread, and the template acquired here may be determined according to the input margin or the like. As described above, in the present embodiment, the image data arranged in the template is automatically selected without the image processing device 100 accepting the image data selection operation by the user.

S41107では、CPU101は、処理対象の見開きの画像レイアウトを決定し、見開きデータを生成する。具体的にはまず、CPU101は、S41106で取得された複数のテンプレートの中から、S41105で選択された画像データをレイアウトするのに適したテンプレートを決定する。図8は、本実施形態における、レイアウト画像の作成に利用するテンプレートを決定する処理を示すフローチャートである。 In S41107, the CPU 101 determines the image layout of the spread to be processed and generates the spread data. Specifically, first, the CPU 101 determines a template suitable for laying out the image data selected in S41105 from the plurality of templates acquired in S41106. FIG. 8 is a flowchart showing a process of determining a template used for creating a layout image in the present embodiment.

S801では、CPU101は、S41105で選択された画像データの枚数と、当該画像データに関する情報を取得する。画像データに関する情報とは、例えば、当該画像データによって表わされる画像の幅と高さ、当該画像データの撮影日時情報、当該画像データの得点である。なお、ここでは、S424で選択された画像データの枚数は3であるものとする。 In S801, the CPU 101 acquires the number of image data selected in S41105 and information about the image data. The information regarding the image data is, for example, the width and height of the image represented by the image data, the shooting date / time information of the image data, and the score of the image data. Here, it is assumed that the number of image data selected in S424 is 3.

S802では、CPU101は、S41105で選択された画像データの枚数とスロット数が一致するテンプレートを選択する。なお、ここでは、S41105で選択された画像データの枚数が3であるものとして説明するため、スロット数が3のテンプレートが選択される。ここでは、スロット数が3のテンプレートとして、図9の(1−1)〜(4−4)が選択されたものとする。 In S802, the CPU 101 selects a template in which the number of image data selected in S41105 and the number of slots match. Here, since the number of image data selected in S41105 is assumed to be 3, a template having 3 slots is selected. Here, it is assumed that (1-1) to (4-4) of FIG. 9 are selected as the template having 3 slots.

S803では、CPU101は、S41105で選択された画像データを撮影日時順にソートする。なお、ここでは、3枚の各画像データが表わす各画像の撮影日時は図9(A)に示すような順番であったとする。また、ここでは、画像905がメインスロット用の画像(メイン画像)であり、画像906と画像907がサブスロット用の画像(サブ画像)とする。 In S803, the CPU 101 sorts the image data selected in S41105 in order of shooting date and time. Here, it is assumed that the shooting dates and times of the respective images represented by the three image data are in the order shown in FIG. 9A. Further, here, the image 905 is an image for the main slot (main image), and the images 906 and 907 are images for the sub slot (sub image).

S804では、CPU101は、S802で選択されたテンプレートのうち、メイン画像に適したテンプレートを選択する。本実施形態では、テンプレートのより左上のスロットに撮影日時がより古い画像データ、より右下のスロットに撮影日時がより新しい画像データをレイアウトするものとする。そのため、まずCPU101は、S802で選択されたテンプレートのうち、メインスロットの位置が、メイン画像を表わす画像データの撮影日時の順番に対応するテンプレートを選択する。すなわち、例えば、メイン画像を表わす画像データの撮影日時順が1番古い場合には、メインスロットが、全スロットのうち左から1番目のスロットであるテンプレートが選択される。なお、画像データが撮影日時順にソートされているため、CPU101は、メイン画像を表わす画像データの撮影日時の順番を把握することができる。また、CPU101は、このようにして選択したテンプレートのうち、メイン画像が配置されるスロットのアスペクト比が、メイン画像のアスペクト比と一致する(又は近い)テンプレートを最終的に選択する。そしてここでは、メイン画像である画像905は、撮影日時が一番新しく、且つ縦長の画像であるため、ここでは図9(3−1)〜(3−4)のテンプレートが選択される。 In S804, the CPU 101 selects a template suitable for the main image from the templates selected in S802. In the present embodiment, the image data with the older shooting date and time is laid out in the upper left slot of the template, and the image data with the newer shooting date and time is laid out in the lower right slot. Therefore, first, the CPU 101 selects a template in which the position of the main slot corresponds to the order of the shooting date and time of the image data representing the main image among the templates selected in S802. That is, for example, when the image data representing the main image is the oldest in the order of shooting date and time, the template in which the main slot is the first slot from the left among all the slots is selected. Since the image data is sorted in the order of the shooting date and time, the CPU 101 can grasp the order of the shooting date and time of the image data representing the main image. Further, the CPU 101 finally selects a template in which the aspect ratio of the slot in which the main image is arranged matches (or is close to) the aspect ratio of the main image among the templates selected in this way. Here, since the image 905, which is the main image, has the latest shooting date and time and is a vertically long image, the templates of FIGS. 9 (3-1) to (3-4) are selected here.

S805では、CPU101は、S802で選択されたテンプレートのうち、サブ画像に適したテンプレートを選択する。具体的にはまず、CPU101は、サブスロットの位置が、サブ画像を表わす画像データの撮影日時の順番に対応するテンプレートを選択する。また、CPU101は、このようにして選択したテンプレートのうち、サブスロットのアスペクト比が、サブ画像のアスペクト比と一致する(又は近い)テンプレートを最終的に選択する。ここでは、サブ画像である画像906は、撮影日時が一番古く、且つ縦長の画像である。また、サブ画像である画像907は、撮影日時が2番目に新しく、且つ横長の画像である。そのため、図9(3−2)のテンプレートが選択される。なお、このとき、どのサブスロットにどのサブ画像が配置されるかも特定される。 In S805, the CPU 101 selects a template suitable for the sub-image from the templates selected in S802. Specifically, first, the CPU 101 selects a template in which the positions of the sub slots correspond to the order of the shooting date and time of the image data representing the sub image. Further, the CPU 101 finally selects a template in which the aspect ratio of the subslot matches (or is close to) the aspect ratio of the sub image among the templates selected in this way. Here, the image 906, which is a sub image, is an image having the oldest shooting date and time and being vertically long. Further, the image 907, which is a sub image, is a horizontally long image having the second newest shooting date and time. Therefore, the template shown in FIG. 9 (3-2) is selected. At this time, it is also specified which sub-image is arranged in which sub-slot.

このようにして、CPU101は、見開きに対応するレイアウト画像の作成に用いるテンプレートと、テンプレートのいずれのスロットにいずれの画像をレイアウトするかを決定することで、見開きデータを生成する。具体的には、CPU101は、選択したテンプレートに含まれる各スロットの情報と、各スロットにレイアウトされる画像に対応する画像データとを紐づけて管理する。すなわち、見開きデータには、見開きに使用されるテンプレートと、当該テンプレートに配置された各画像データとが含まれる。このように本実施形態では、各ページに利用されるテンプレートが、ユーザによる画像データの選択操作を画像処理装置100が受け付けることなく自動で選択される。また本実施形態では、テンプレートに画像データが、ユーザによる画像データの配置操作を画像処理装置100が受け付けることなく自動で配置される。なお、本処理によって、個別ページに対応する見開きデータ(個別ページデータ)と、共通ページに対応する見開きデータ(共通ページデータ)が生成される。なお上述では、見開き単位でデータを生成していたが、ページ単位でデータを生成しても良い。 In this way, the CPU 101 generates spread data by deciding which template to lay out in which slot of the template and the template used for creating the layout image corresponding to the spread. Specifically, the CPU 101 manages the information of each slot included in the selected template in association with the image data corresponding to the image laid out in each slot. That is, the spread data includes a template used for the spread and each image data arranged in the template. As described above, in the present embodiment, the template used for each page is automatically selected without the image processing device 100 accepting the image data selection operation by the user. Further, in the present embodiment, the image data is automatically arranged in the template without the image processing device 100 accepting the image data arrangement operation by the user. By this process, spread data (individual page data) corresponding to individual pages and spread data (common page data) corresponding to common pages are generated. In the above, the data is generated in the spread unit, but the data may be generated in the page unit.

S41108では、CPU101は、S41105からS41107の処理が、全ての見開きデータに対して終了したか否かを判定する。なお、S41101で個別ページ用の得点が読み込まれていた場合、S41108における全ての見開きデータとは、個別ページに対応する全ての見開きデータである。また、S41101で共通ページ用の得点が読み込まれていた場合、S41108における全ての見開きデータとは、共通ページに対応する全ての見開きデータである。CPU101は、終了していない場合、S41105に戻り、未だ処理対象となっていない見開きに対して、S41105からS41107の処理を行う。一方、CPU101は、終了している場合、S41109に移行する。 In S41108, the CPU 101 determines whether or not the processing of S41105 to S41107 has been completed for all the spread data. When the score for the individual page is read in S41101, all the spread data in S41108 are all the spread data corresponding to the individual page. Further, when the score for the common page is read in S41101, all the spread data in S41108 are all the spread data corresponding to the common page. If the CPU 101 has not finished, it returns to S41105 and performs the processing of S41105 to S41107 on the spread that has not yet been processed. On the other hand, when the CPU 101 is finished, the CPU 101 shifts to S41109.

S41109では、CPU101は、S410で特定された全ての得点(ここでは、アルバム1に関する個別ページ用の得点、アルバム2に関する個別ページ用の得点、共通ページ用の得点)がS41101で読み込まれたか否かを判定する。言い換えれば、ユーザによって作成を指示された複数のアルバムを構成するそれぞれの個別ページと、共通ページとに関して、テンプレートの特定を行ったか否かを判定する。CPU101は、終了していない場合、S41101に戻り、未だ取得されていない得点を読み込んで、S41102からS41108の処理を行う。一方、CPU101は、終了している場合、S412に移行する。 In S41109, whether or not the CPU 101 has read all the scores specified in S410 (here, the score for the individual page regarding the album 1, the score for the individual page regarding the album 2, and the score for the common page) in S41101. To judge. In other words, it is determined whether or not the template has been specified for each individual page constituting the plurality of albums instructed to be created by the user and the common page. If the CPU 101 has not finished, it returns to S41101, reads a score that has not been acquired yet, and performs processing from S41102 to S41108. On the other hand, when the CPU 101 is finished, the CPU 101 shifts to S412.

S412では、CPU101は、生成された各見開きデータを結合して、アルバムデータを生成する見開き結合処理を実行する。ここでは、CPU101は、アルバム内でのページ番号に対応するページ番号情報を各見開きデータに付加することで、アルバム全体のレイアウトを作成する。またこのとき、CPU101は、見開きデータ内のテンプレートに配置された画像データの撮影時間に基づき、撮影時間が早い画像データが配置されているページのページ番号がより小さくなるように、見開きデータを並べたうえで、各見開きデータを結合する。図10は、本実施形態に係るアルバム作成アプリにより実行される見開き結合処理を示すフローチャートである。 In S412, the CPU 101 combines the generated spread data to execute a spread join process for generating album data. Here, the CPU 101 creates the layout of the entire album by adding the page number information corresponding to the page numbers in the album to each spread data. At this time, the CPU 101 arranges the spread data so that the page number of the page on which the image data having a fast shooting time is arranged becomes smaller based on the shooting time of the image data arranged in the template in the spread data. After that, each spread data is combined. FIG. 10 is a flowchart showing a spread joining process executed by the album creation application according to the present embodiment.

S1001では、CPU101は、S411で生成された見開きデータのうち、1つのアルバムに関する見開きデータを取得する。本実施形態では、例えばアルバム1に関する見開きデータとは、「共通ページ用の見開きデータ+アルバム1に関する個別ページ用の見開きデータ」になる。 In S1001, the CPU 101 acquires the spread data related to one album among the spread data generated in S411. In the present embodiment, for example, the spread data for the album 1 is "spread data for a common page + spread data for individual pages related to the album 1".

S1002では、CPU101は、S1001で取得した各見開きデータに関する、ソートの基準となる値(ソート基準値)を特定する。本実施形態では、ソート基準値を、見開きデータに配置された画像データの平均撮影時間とする。なお、ソート基準値は平均撮影時間に限らない。例えばソート基準値は、見開きデータに配置された画像データの平均撮影位置(緯度経度)であっても良いし、見開きデータに配置された画像データの枚数であっても良い。また例えば、見開きデータに配置された画像データの画像解析情報(色ヒストグラム等)であっても良い。 In S1002, the CPU 101 specifies a sort reference value (sort reference value) for each spread data acquired in S1001. In the present embodiment, the sort reference value is the average shooting time of the image data arranged in the spread data. The sort reference value is not limited to the average shooting time. For example, the sort reference value may be the average shooting position (latitude / longitude) of the image data arranged in the spread data, or may be the number of image data arranged in the spread data. Further, for example, the image analysis information (color histogram or the like) of the image data arranged in the spread data may be used.

S1003では、CPU101は、S1001で取得した見開きデータを、S1002で特定したソート基準値を基にソートする。上述したように本実施形態ではソート基準値は平均撮影時間であるため、CPU101は、平均撮影時間が早い見開きデータのページ番号がより小さくなるように、見開きデータを並べる。 In S1003, the CPU 101 sorts the spread data acquired in S1001 based on the sort reference value specified in S1002. As described above, since the sort reference value is the average shooting time in the present embodiment, the CPU 101 arranges the spread data so that the page number of the spread data having an early average shooting time becomes smaller.

S1004では、CPU101は、S1001で取得されたアルバムの見開きデータ数が総見開きデータ数と同じか否かを判定する。S1001で取得されたアルバムの見開きデータ数が総見開きデータ数と同じでない場合(S1004でNo)は、S1005に移行する。そして、S1001で取得されたアルバムの見開きデータ数が総見開きデータ数と同じである場合(S1004でYes)はS1006に移行する。 In S1004, the CPU 101 determines whether or not the number of spread data of the album acquired in S1001 is the same as the total number of spread data. When the number of spread data of the album acquired in S1001 is not the same as the total number of spread data (No in S1004), the process proceeds to S1005. Then, when the number of spread data of the album acquired in S1001 is the same as the total number of spread data (Yes in S1004), the process proceeds to S1006.

S1005では、CPU101は、S1001で取得された見開きデータのうち、不要な見開きデータを削除し、処理対象のアルバムの見開きデータ数が総見開きデータ数になるように調整する。本実施形態では、CPU101は、共通ページ用の見開きデータからを削除対象の見開きデータを選択することで、見開きデータ数を調整する。具体的には、共通ページ用の見開きデータのうち、平均撮影時間が、いずれかの個別ページ用の見開きデータの平均撮影時間に最も近い見開きデータを削除する。CPU101は、この削除処理を繰り返すことで、見開きデータ数を調整する。なお平均撮影時間とは、見開きデータ内に含まれる複数の画像データの撮影時間の平均である。その後、CPU101は、S1004に移行する。なお、本実施形態では共通ページ用の見開きデータから削除対象の見開きデータを選択し、個別ページ用の見開きデータから削除対象の見開きデータを選択しなかったがこれに限らない。例えば、個別ページ用の見開きデータから削除対象の見開きデータを選択し、共通ページ用の見開きデータから削除対象の見開きデータを選択しなくても良い。また例えば、個別ページ用の見開きデータと共通ページ用の見開きデータの両方から削除対象の見開きデータを選択しても良い。このようにして、見開きデータ数が確定した場合、CPU101は、削除されずに残った各見開きデータを、S1003でソートされた順番に従って結合することで、アルバムデータを作成する。 In S1005, the CPU 101 deletes unnecessary spread data from the spread data acquired in S1001 and adjusts the number of spread data of the album to be processed to be the total number of spread data. In the present embodiment, the CPU 101 adjusts the number of spread data by selecting the spread data to be deleted from the spread data for the common page. Specifically, among the spread data for the common page, the spread data whose average shooting time is closest to the average shooting time of the spread data for any of the individual pages is deleted. The CPU 101 adjusts the number of spread data by repeating this deletion process. The average shooting time is the average of the shooting times of a plurality of image data included in the spread data. After that, the CPU 101 shifts to S1004. In the present embodiment, the spread data to be deleted is selected from the spread data for the common page, and the spread data to be deleted is not selected from the spread data for the individual pages, but the present invention is not limited to this. For example, it is not necessary to select the spread data to be deleted from the spread data for individual pages and to select the spread data to be deleted from the spread data for the common page. Further, for example, the spread data to be deleted may be selected from both the spread data for individual pages and the spread data for common pages. When the number of spread data is determined in this way, the CPU 101 creates album data by combining the spread data that remains without being deleted in the order sorted by S1003.

S1006では、CPU101は、設定画面301によって作成を指示された全てのアルバムに関する見開きデータに関して、S1001からS1005の処理が行われたか否かを判定する。言い換えれば、CPU101は、設定画面301によって作成を指示された全てのアルバムに関するアルバムデータを作成したか否かを判定する。全てのアルバムに関する見開きデータに関して、S1001からS1005の処理が行われていない場合、CPU101は、S1001に移行し、まだ取得されていないアルバムに関する見開きデータを取得し、当該見開きデータに対して処理を行う。全てのアルバムに関する見開きデータに関して、S1001からS1005の処理が行われた場合、CPU101は、自動レイアウト処理を終了し、S413に進む。 In S1006, the CPU 101 determines whether or not the processes S1001 to S1005 have been performed on the spread data related to all the albums instructed to be created by the setting screen 301. In other words, the CPU 101 determines whether or not the album data for all the albums instructed to be created by the setting screen 301 has been created. When the spread data of all the albums is not processed from S1001 to S1005, the CPU 101 shifts to S1001, acquires the spread data of the album that has not been acquired yet, and processes the spread data. .. When the processes of S1001 to S1005 are performed for the spread data related to all the albums, the CPU 101 ends the automatic layout process and proceeds to S413.

S413では、CPU101は、CPU101は、作成したアルバムデータを出力する。アルバムデータの出力として、CPU101は、例えば、アルバムデータのディスプレイ105への表示や、アルバムデータの送信、アルバムデータに基づくアルバムの印刷等を実行可能である。例えばCPU101は、作成したアルバムデータをプリンタに送信することで、作成したアルバムデータに基づくアルバムをプリンタに印刷させることができる。 In S413, the CPU 101 outputs the created album data. As the output of the album data, the CPU 101 can execute, for example, display the album data on the display 105, transmit the album data, print the album based on the album data, and the like. For example, the CPU 101 can make the printer print an album based on the created album data by transmitting the created album data to the printer.

本実施形態では、ユーザは、完成した見開きデータを任意に編集可能であるものとする。例えば、ユーザは、各スロットに配置された画像データのうち、変更したい画像データがある場合は、マウス107により変更したい画像データをクリックする。その後、ユーザは、変更したい画像データの代わりに配置したい画像データを選択することで、ユーザが任意に選択した画像データを、クリックされた画像データの代わりに新たに配置することができる。なお、CPU101は、ユーザが変更したい画像データがクリックされた場合、変更後の画像データの候補を表示しても良い。また例えば、CPU101は、ユーザが変更したい画像データが個別ページ内の画像データである場合、個別ページ用の得点が高い画像データを、変更後の画像データの候補として表示しても良い。同様に、CPU101は、ユーザが変更したい画像データが共通ページ内の画像データである場合、共通ページ用の得点が高い画像データを、変更後の画像データの候補として表示しても良い。 In the present embodiment, it is assumed that the user can arbitrarily edit the completed spread data. For example, if there is image data to be changed among the image data arranged in each slot, the user clicks the image data to be changed with the mouse 107. After that, the user can select the image data to be arranged in place of the image data to be changed, so that the image data arbitrarily selected by the user can be newly arranged in place of the clicked image data. When the user clicks the image data to be changed, the CPU 101 may display the image data candidates after the change. Further, for example, when the image data that the user wants to change is the image data in the individual page, the CPU 101 may display the image data having a high score for the individual page as a candidate for the changed image data. Similarly, when the image data that the user wants to change is the image data in the common page, the CPU 101 may display the image data having a high score for the common page as a candidate for the changed image data.

このように本実施形態では、アルバム作成アプリによって、共通ページと個別ページとを含むアルバムを作成するためのアルバムデータを生成することができる。また、共通ページに配置される画像データの選択基準と、個別ページに配置される画像データの選択基準が異なるように制御される。このような制御により、共通ページに適した画像データを、共通ページに配置される画像データとして選択し、個別ページに適した画像データを、個別ページに配置される画像データとして選択することができる。また、共通ページに配置される画像データと、個別ページに配置される画像データと同じになってしまうことを抑制する。 As described above, in the present embodiment, the album creation application can generate album data for creating an album including a common page and an individual page. Further, the selection criteria of the image data arranged on the common page and the selection criteria of the image data arranged on the individual pages are controlled to be different. By such control, the image data suitable for the common page can be selected as the image data arranged on the common page, and the image data suitable for the individual page can be selected as the image data arranged on the individual page. .. In addition, it is possible to prevent the image data arranged on the common page from becoming the same as the image data arranged on the individual pages.

(第2実施形態)
上述の実施形態では、同一のシーンに属する画像データを、共通ページ用の見開きデータにも、個別ページ用の見開きデータにも使用していた。本実施形態では、同一のシーンに属する画像データを、共通ページ用の見開きデータと個別ページ用の見開きデータのうちいずれかのみに使用する。これにより、共通ページ用の見開きデータと個別ページ用の見開きデータのどちらにも、同じシーンに属する画像データが含まれてしまうことを抑制する。
(Second Embodiment)
In the above-described embodiment, the image data belonging to the same scene is used for both the spread data for the common page and the spread data for the individual pages. In the present embodiment, the image data belonging to the same scene is used only for either the spread data for the common page or the spread data for the individual pages. As a result, it is possible to prevent the image data belonging to the same scene from being included in both the spread data for the common page and the spread data for the individual pages.

なお、特記しない限り、本実施形態の構成は、第1実施形態の構成と同様であるものとする。 Unless otherwise specified, the configuration of the present embodiment shall be the same as the configuration of the first embodiment.

図11は、本実施形態に係るアルバム作成アプリにより実行される自動レイアウト処理を示すフローチャートである。図11に示すフローチャートは、例えば、CPU101がHDD104に格納されたアルバム作成アプリに対応するプログラムをROM102やRAM103に読み出して実行することにより実現される。 FIG. 11 is a flowchart showing an automatic layout process executed by the album creation application according to the present embodiment. The flowchart shown in FIG. 11 is realized, for example, by the CPU 101 reading a program corresponding to the album creation application stored in the HDD 104 into the ROM 102 or the RAM 103 and executing the program.

S401〜S410までの処理は、第1実施形態にて説明した処理と同様である。 The processes from S401 to S410 are the same as the processes described in the first embodiment.

S1101では、CPU101は、共通ページと個別ページのどちらに適しているのかを、シーン毎に特定する。言い換えれば、CPU101は、共通ページ用の得点と個別ページ用の得点のどちらを適用するのかをシーン毎に特定する。共通ページに適しているシーンに含まれる画像データ群が、共通画像データ群であり、個別ページに適しているシーンに含まれる画像データ群が、個別画像データ群である。本実施形態では、各シーンに、共通ページ用の得点と個別ページ用の得点のどちらを適用するのかを下記の式により特定する。 In S1101, the CPU 101 specifies whether it is suitable for a common page or an individual page for each scene. In other words, the CPU 101 specifies whether to apply the score for the common page or the score for the individual page for each scene. The image data group included in the scene suitable for the common page is the common image data group, and the image data group included in the scene suitable for the individual page is the individual image data group. In the present embodiment, it is specified by the following formula whether the score for the common page or the score for the individual page is applied to each scene.

=ΣI∈S 式(9) S Q P = Σ I∈S I T P (9)

scoreは画像データIに付加された得点Pの値を表し、Sは判定対象のシーンに割り振られたシーン番号を表し、THRは閾値を表す。は得点Pに対応するページが判定対象のシーンにどれだけ適しているかの指標である。なお、得点Pとは、個別ページ用の得点Pdと共通ページ用の得点Pcのいずれかである。 I score P represents the value of the score P added to the image data I, S represents the scene number assigned to the scene to be determined, and THR represents the threshold value. S Q P is an indication of whether the page corresponding to the score P is suitable much to the determination target scene. The score P is either a score Pd for individual pages or a score Pc for common pages.

CPU101は、得点Pが個別ページ用の得点である場合、画像データIが個別ページに適しているか否かを示す値Pdを式(10)によって算出する。そしてCPU101は、得点Pが共通ページ用の得点である場合、画像データIが共通ページに適しているか否かを示す値Pcを式(10)によって算出する。結果として、個別ページ用の得点が閾値より高い画像データに対しては、式(10)によって、個別ページに適していることを示す値が算出される。そして、共通ページ用の得点が閾値より高い画像データに対しては、式(10)によって、共通ページに適していることを示す値が算出される。 CPU101, if the score P is a score for individual pages, the value I T Pd indicating whether the image data I are suitable for individual pages calculated by the equation (10). Then CPU101, if the score P is a score for the common page, the value I T Pc that indicates whether the image data I are suitable for common page is calculated by equation (10). As a result, for the image data in which the score for the individual page is higher than the threshold value, a value indicating that the image data is suitable for the individual page is calculated by the equation (10). Then, for the image data in which the score for the common page is higher than the threshold value, a value indicating that the image data is suitable for the common page is calculated by the equation (10).

その後、CPU101は、得点Pが個別ページ用の得点である場合、判定対象のシーンに個別ページに適している画像データがどれだけ多く含まれているかを示す値Pdを式(9)によって算出する。またCPU101は、得点Pが共通ページ用の得点である場合、判定対象のシーンに共通ページに適している画像データがどれだけ多く含まれているかを示す値Pcを式(9)によって算出する。 After that, when the score P is a score for an individual page, the CPU 101 uses the equation (9) to set a value S Q Pd indicating how much image data suitable for the individual page is included in the scene to be determined. calculate. Further, when the score P is a score for a common page, the CPU 101 calculates a value S Q Pc indicating how much image data suitable for the common page is included in the scene to be determined by the equation (9). To do.

そして、式(9)及び式(10)によって特定される、共通ページ用の得点Pcに関する指標Pcと個別ページ用の得点Pdに関する指標Pdによって、判定対象のシーンが、共通ページと個別ページのどちらに適しているのかを特定する。具体的には、共通ページ用の得点Pcに関する指標Pcと個別ページ用の得点Pdに関する指標Pdのうち値が大きい方に対応する得点を用いて、判定対象のシーンに属する画像データが配置される見開きデータを作成することを特定する。全てのシーンを対象として、本処理を繰り返すことにより、CPU101は、いずれのシーンが、個別ページと共通ページのうちいずれに適しているのかを特定することができる。これにより、共通ページと個別ページのうち、シーンに適しているページにのみ、当該シーンに属する画像データが用いられることとなる。本処理により例えば、図5(B)におけるシーン(1)〜(6)には共通ページ用の得点を適用し、シーン(7)〜(10)には個別ページ用の得点を適用することが特定される。 Then, specified by equations (9) and (10), the score Pd relates index S Q Pd for index S Q Pc and the individual pages for scoring Pc for common page, the determination target scene is a common page Identify which of the individual pages is suitable. Specifically, by using a score corresponding to the larger value out of the index S Q Pd about score Pd for individual and index S Q Pc about the score Pc for common page, the image data belonging to the determination target scene Identifies to create spread data in which is placed. By repeating this process for all the scenes, the CPU 101 can specify which scene is suitable for the individual page or the common page. As a result, the image data belonging to the scene is used only for the page suitable for the scene among the common page and the individual page. By this processing, for example, the score for the common page can be applied to the scenes (1) to (6) in FIG. 5 (B), and the score for the individual page can be applied to the scenes (7) to (10). Be identified.

なお、本実施形態では、共通ページと個別ページのどちらに適しているのかをシーン毎に特定するための指標として、各シーンに含まれる画像データの、個別ページ用の得点と共通ページ用の得点とが用いられたが、これに限らない。例えば、主被写体が写っている画像データの多寡や、写っている顔の数が多い画像データの多寡、シーン内の画像データの枚数等の指標が用いられても良い。また、S406におけるシーン分類結果によって決定されたシーンの種類に基づいて、各シーンが共通ページと個別ページのどちらに適しているのかが決定されても良い。例えば、「結婚式」として分類されたシーンは、新郎新婦を主被写体とした共通ページが適しているものとして特定され、「披露宴」として分類されたシーンは、親族あるいは友人をそれぞれ主被写体とした個別ページが適しているものとして特定される。このように、いずれの種類のシーンが、いずれのページに適しているものとして特定されるかに関する情報が、予めアルバム作成アプリに組み込まれていても良い。 In this embodiment, the score for the individual page and the score for the common page of the image data included in each scene are used as an index for specifying which of the common page and the individual page is suitable for each scene. Was used, but it is not limited to this. For example, an index such as the amount of image data in which the main subject is shown, the amount of image data in which the number of faces in the picture is large, or the number of image data in the scene may be used. Further, it may be determined whether each scene is suitable for a common page or an individual page based on the type of scene determined by the scene classification result in S406. For example, a scene classified as "wedding" was identified as suitable for a common page with the bride and groom as the main subject, and a scene classified as "wedding reception" was identified with relatives or friends as the main subjects, respectively. Individual pages are identified as suitable. In this way, information on which type of scene is identified as suitable for which page may be incorporated in the album creation application in advance.

なお上述では、いずれのシーンが個別ページと共通ページのうちいずれに適しているのかを特定するための方法として、式(9)や式(10)を用いる方法を説明したが、この形態に限定されない。例えば、以下に示す方法によって、いずれのシーンが個別ページと共通ページのうちいずれに適しているのかを特定しても良い。 In the above description, as a method for specifying which scene is suitable for the individual page or the common page, the method using the formula (9) or the formula (10) has been described, but the method is limited to this form. Not done. For example, it is possible to specify which scene is suitable for an individual page or a common page by the method shown below.

例えば、CPU101は、判定対象のシーンに含まれる(内包される)各画像データの、共通ページ用の得点の平均値と、個別ページ用の得点の平均値とを算出する。そしてCPU101は、共通ページ用の得点の平均値が個別ページ用の得点の平均値より大きい場合、判定対象のシーンが共通ページ用の得点に適していると判定する。またCPU101は、個別ページ用の得点の平均値が共通ページ用の得点の平均値より大きい場合、判定対象のシーンが個別ページ用の得点に適していると判定する。 For example, the CPU 101 calculates the average value of the scores for the common page and the average value of the scores for the individual pages of each image data included (included) in the scene to be determined. Then, when the average value of the scores for the common page is larger than the average value of the scores for the individual pages, the CPU 101 determines that the scene to be determined is suitable for the scores for the common page. Further, when the average value of the scores for the individual pages is larger than the average value of the scores for the common pages, the CPU 101 determines that the scene to be determined is suitable for the scores for the individual pages.

また例えば、CPU101は、判定対象のシーンに含まれる各画像データの共通ページ用の得点のうち最大値と、判定対象のシーンに含まれる各画像データの個別ページ用の得点のうち最大値とを算出する。そしてCPU101は、共通ページ用の得点の最大値が個別ページ用の得点の最大値より大きい場合、判定対象のシーンが共通ページ用の得点に適していると判定する。またCPU101は、個別ページ用の得点の最大値が共通ページ用の得点の最大値より大きい場合、判定対象のシーンが個別ページ用の得点に適していると判定する。 Further, for example, the CPU 101 sets the maximum value among the scores for the common page of each image data included in the determination target scene and the maximum value among the scores for the individual pages of each image data included in the determination target scene. calculate. Then, when the maximum value of the score for the common page is larger than the maximum value of the score for the individual page, the CPU 101 determines that the scene to be determined is suitable for the score for the common page. Further, when the maximum value of the score for the individual page is larger than the maximum value of the score for the common page, the CPU 101 determines that the scene to be determined is suitable for the score for the individual page.

S1102では、CPU101は、S410で特定された得点を用いて、アルバムに含まれる見開きを表す見開きデータを作成する。図11(C)は、本実施形態に係るアルバム作成アプリにより実行される見開きデータ生成処理を示すフローチャートである。 In S1102, the CPU 101 uses the score specified in S410 to create spread data representing the spread included in the album. FIG. 11C is a flowchart showing a spread data generation process executed by the album creation application according to the present embodiment.

S41101の処理は、第1実施形態にて説明した処理と同様である。 The process of S41101 is the same as the process described in the first embodiment.

S110201では、CPU101は、S41101で読み込まれた得点に対応するシーンに属する画像データから、テンプレートに配置される画像データの候補となる候補画像データを、S41101で読み込まれた得点に基づいて取得する。S41101で読み込まれた得点が、個別ページ用の得点である場合、S41101で読み込まれた得点に対応するシーンとは、個別ページに適しているとS1101で特定されたシーンである。また、S41101で読み込まれた得点が、共通ページ用の得点である場合、S41101で読み込まれた得点に対応するシーンとは、共通ページに適しているとS1101で特定されたシーンである。なお、S41101で読み込まれた得点が個別ページ用の得点である場合、ここでは、個別ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。また、S41101で読み込まれた得点が共通ページ用の得点である場合、ここでは、共通ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。本実施形態では、CPU101は、S41101で読み込まれた得点として閾値以上の得点を有する画像データを、候補画像データとして取得する。閾値以上の得点を有する画像データがない場合は、最も高い得点を有する画像データを候補画像とする。なお、後述する画像選択処理で既に選ばれた画像は、取得対象から除外しても良い。 In S110201, the CPU 101 acquires candidate image data as a candidate for the image data arranged in the template from the image data belonging to the scene corresponding to the score read in S41101 based on the score read in S41101. When the score read in S41101 is a score for an individual page, the scene corresponding to the score read in S41101 is a scene specified in S1101 as being suitable for an individual page. Further, when the score read in S41101 is a score for a common page, the scene corresponding to the score read in S41101 is a scene specified in S1101 as being suitable for the common page. When the score read in S41011 is the score for the individual page, the candidate image data that is a candidate for the image data arranged in the template for the individual page is acquired here. Further, when the score read in S41011 is the score for the common page, the candidate image data that is a candidate for the image data arranged in the template for the common page is acquired here. In the present embodiment, the CPU 101 acquires image data having a score equal to or higher than the threshold value as the score read in S41101 as candidate image data. If there is no image data having a score equal to or higher than the threshold value, the image data having the highest score is used as a candidate image. The image already selected in the image selection process described later may be excluded from the acquisition target.

S110202では、CPU101は、S405で行ったシーン分割の結果と、S110201で取得した候補画像データとを基に見開き数を設定する。本処理の詳細は、第1実施形態のS41103で説明したものと同様であるが、第1実施形態との違いについて以下に説明する。第1実施形態では、S41101で読み込まれた得点が個別ページ用の得点であったとしても共通ページ用の得点であったとしても、全てのシーンに関して、式(5)を適用して、見開きデータ数を特定した。しかし、本実施形態では、S41101で読み込まれた得点が個別ページ用の得点であった場合は、個別ページに適しているとS1101で特定されたシーンに関してのみ、見開きデータ数を特定する。また、S41101で読み込まれた得点が共通ページ用の得点であった場合は、共通ページに適しているとS1101で特定されたシーンに関してのみ、見開きデータ数を特定する。 In S110202, the CPU 101 sets the number of spreads based on the result of the scene division performed in S405 and the candidate image data acquired in S110201. The details of this process are the same as those described in S41103 of the first embodiment, but the differences from the first embodiment will be described below. In the first embodiment, regardless of whether the score read in S41101 is a score for an individual page or a score for a common page, the equation (5) is applied to all the scenes to apply the spread data. Identified the number. However, in the present embodiment, when the score read in S41101 is the score for the individual page, the number of spread data is specified only for the scene specified in S1101 as being suitable for the individual page. Further, when the score read in S41101 is the score for the common page, the number of spread data is specified only for the scene specified in S1101 as being suitable for the common page.

S110203では、CPU101は、S110201で取得した候補画像データを、S110202で特定した見開き数分の画像データ群に分割する。本処理の詳細は、第1実施形態のS41104で説明したものと同様である。その後、CPU101は、S41105に移行する。 In S110203, the CPU 101 divides the candidate image data acquired in S110201 into image data groups for the number of spreads specified in S110202. The details of this process are the same as those described in S41104 of the first embodiment. After that, the CPU 101 shifts to S41105.

以降の処理は、第1実施形態で説明した処理と同様である。 Subsequent processing is the same as the processing described in the first embodiment.

このような制御を実行することで、本実施形態では、同一のシーンに属する画像データを、共通ページ用の見開きデータと個別ページ用の見開きデータのうちいずれかのみに使用するように制御する。これにより、共通ページ用の見開きデータと個別ページ用の見開きデータのどちらにも、同じシーンに属する画像データが含まれてしまうことを抑制することができる。 By executing such control, in the present embodiment, the image data belonging to the same scene is controlled to be used only for either the spread data for the common page or the spread data for the individual page. As a result, it is possible to prevent the image data belonging to the same scene from being included in both the spread data for the common page and the spread data for the individual pages.

(第3実施形態)
上述したように、各シーンにはそれぞれ1又は複数の画像データが含まれている。1つのシーンに含まれている1つの画像データ群を、シーン画像データ群というものとする。第1実施形態では、共通ページ用の見開きデータに使用する画像データも、個別ページ用の見開きデータに使用する画像データも、全てのシーン画像データ群からそれぞれ取得していた。本実施形態では、共通ページ用の見開きデータに使用する画像データは、全てのシーン画像データ群からそれぞれ取得する。そして、個別ページ用の見開きデータに使用する画像データは、全てのシーン画像データ群からは取得せず、一部のシーン画像データ群からのみ取得する。
(Third Embodiment)
As described above, each scene contains one or more image data. One image data group included in one scene is referred to as a scene image data group. In the first embodiment, both the image data used for the spread data for the common page and the image data used for the spread data for the individual pages are acquired from all the scene image data groups. In the present embodiment, the image data used for the spread data for the common page is acquired from all the scene image data groups. Then, the image data used for the spread data for the individual page is not acquired from all the scene image data groups, but is acquired only from some scene image data groups.

なお、特記しない限り、本実施形態の構成は、第1実施形態の構成と同様であるものとする。 Unless otherwise specified, the configuration of the present embodiment shall be the same as the configuration of the first embodiment.

図12は、本実施形態に係るアルバム作成アプリにより実行される自動レイアウト処理を示すフローチャートである。図12に示すフローチャートは、例えば、CPU101がHDD104に格納されたアルバム作成アプリに対応するプログラムをROM102やRAM103に読み出して実行することにより実現される。 FIG. 12 is a flowchart showing an automatic layout process executed by the album creation application according to the present embodiment. The flowchart shown in FIG. 12 is realized, for example, by the CPU 101 reading a program corresponding to the album creation application stored in the HDD 104 into the ROM 102 or the RAM 103 and executing the program.

S401〜S410までの処理は、第1実施形態にて説明した処理と同様である。 The processes from S401 to S410 are the same as the processes described in the first embodiment.

S1201では、CPU101は、個別ページに適しているのか否かを、シーン毎に特定する。言い換えれば、CPU101は、共通ページ用の得点と個別ページ用の得点のどちらを適用するのかをシーン毎に特定する。例えば、図5(A)におけるシーン(1)〜(8)には共通ページ用の得点を適用し、シーン(2)及び(5)には個別ページ用の得点を適用することを特定する。本実施形態では、全てのシーンに、共通ページ用の得点を適用することを特定する。そして、いずれのシーンに、個別ページ用の得点を適用するのかは、第2実施形態にて説明した式(9)及び式(10)と同じ式(11)及び式(12)により特定する。 In S1201, the CPU 101 specifies whether or not it is suitable for individual pages for each scene. In other words, the CPU 101 specifies whether to apply the score for the common page or the score for the individual page for each scene. For example, it is specified that the scores for the common page are applied to the scenes (1) to (8) in FIG. 5 (A), and the scores for the individual pages are applied to the scenes (2) and (5). In the present embodiment, it is specified that the score for the common page is applied to all the scenes. Then, to which scene the score for the individual page is applied is specified by the same equations (11) and (12) as the equations (9) and (10) described in the second embodiment.

=ΣI∈S 式(11) S Q P = Σ I∈S I T P formula (11)

CPU101は、式(9)及び式(10)の説明にて上述したようにして、個別ページ用の得点Pdに関する指標Pdを算出する。そして、CPU101は、個別ページ用の得点Pdに関する指標Pdが閾値THR2以上である場合、判定対象のシーンが個別ページに適していると判定する。またCPU101は、個別ページ用の得点Pに関する指標Pdが閾値THR2未満である場合、判定対象のシーンが個別ページに適していないと判定する。全てのシーンを対象として、本処理を繰り返すことにより、CPU101は、いずれのシーンが、個別ページに適しているのかを特定することができる。 CPU101 is as described above in the description of formula (9) and (10), calculates an index S Q Pd about score Pd for individual pages. Then, CPU 101 determines that if the index S Q Pd about score Pd for individual pages is the threshold value THR2 above, the determination target scene is suitable for individual pages. The CPU101 determines that the index S Q Pd relates score P d for the individual pages is less than the threshold value THR2, the scene determination target is not suitable for individual pages. By repeating this process for all the scenes, the CPU 101 can specify which scene is suitable for the individual page.

なお、本実施形態では、個別ページに適しているのかをシーン毎に特定するための指標として、各シーンに含まれる画像データの、個別ページ用の得点が用いられたが、これに限らない。例えば、主被写体が写っている画像データの多寡や、写っている顔の数が多い画像データの多寡、シーン内の画像データの枚数等の指標が用いられても良い。また、S406におけるシーン分類結果によって決定されたシーンの種類に基づいて、各シーンが個別ページに適しているのかが決定されても良い。例えば、「披露宴」として分類されたシーンは、親族あるいは友人をそれぞれ主被写体とした個別ページが適しているものとして特定される。このように、いずれの種類のシーンが、個別ページに適しているものとして特定されるかに関する情報が、予めアルバム作成アプリに組み込まれていても良い。 In the present embodiment, the score for the individual page of the image data included in each scene is used as an index for specifying whether the image is suitable for the individual page for each scene, but the present invention is not limited to this. For example, an index such as the amount of image data in which the main subject is shown, the amount of image data in which the number of faces in the picture is large, or the number of image data in the scene may be used. Further, it may be determined whether each scene is suitable for an individual page based on the type of scene determined by the scene classification result in S406. For example, a scene classified as a "wedding reception" is identified as suitable for individual pages with relatives or friends as the main subjects. In this way, information on which type of scene is identified as suitable for the individual page may be incorporated in the album creation application in advance.

S1202では、CPU101は、S410で特定された得点を用いて、アルバムに含まれる見開きを表す見開きデータを作成する。図11(C)は、本実施形態に係るアルバム作成アプリにより実行される見開きデータ生成処理を示すフローチャートである。 In S1202, the CPU 101 uses the score specified in S410 to create spread data representing the spread included in the album. FIG. 11C is a flowchart showing a spread data generation process executed by the album creation application according to the present embodiment.

S41101の処理は、第1実施形態にて説明した処理と同様である。 The process of S41101 is the same as the process described in the first embodiment.

S120201では、CPU101は、S41101で読み込まれた得点に対応するシーンに属する画像データから、テンプレートに配置される画像データの候補となる候補画像データを、S41101で読み込まれた得点に基づいて取得する。S41101で読み込まれた得点が、個別ページ用の得点である場合、S41101で読み込まれた得点に対応するシーンとは、個別ページに適しているとS1101で特定されたシーンである。また、S41101で読み込まれた得点が、共通ページ用の得点である場合、S41101で読み込まれた得点に対応するシーンとは、全てのシーンである。なお、S41101で読み込まれた得点が個別ページ用の得点である場合、ここでは、個別ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。また、S41101で読み込まれた得点が共通ページ用の得点である場合、ここでは、共通ページ用のテンプレートに配置される画像データの候補となる候補画像データが取得される。本実施形態では、CPU101は、S41101で読み込まれた得点として閾値以上の得点を有する画像データを、候補画像データとして取得する。閾値以上の得点を有する画像データがない場合は、最も高い得点を有する画像データを候補画像とする。なお、後述する画像選択処理で既に選ばれた画像は、取得対象から除外しても良い。 In S120201, the CPU 101 acquires candidate image data that is a candidate for the image data arranged in the template from the image data belonging to the scene corresponding to the score read in S41011, based on the score read in S41101. When the score read in S41101 is a score for an individual page, the scene corresponding to the score read in S41101 is a scene specified in S1101 as being suitable for an individual page. Further, when the score read in S41011 is a score for a common page, the scenes corresponding to the score read in S41101 are all scenes. When the score read in S41011 is the score for the individual page, the candidate image data that is a candidate for the image data arranged in the template for the individual page is acquired here. Further, when the score read in S41011 is the score for the common page, the candidate image data that is a candidate for the image data arranged in the template for the common page is acquired here. In the present embodiment, the CPU 101 acquires image data having a score equal to or higher than the threshold value as the score read in S41101 as candidate image data. If there is no image data having a score equal to or higher than the threshold value, the image data having the highest score is used as a candidate image. The image already selected in the image selection process described later may be excluded from the acquisition target.

また、本実施形態では、以下の式に従って候補画像データを選択する。 Further, in the present embodiment, candidate image data is selected according to the following formula.

は、S41101で読み込まれた得点が、個別ページ用の得点P1と共通ページ用の得点P2のうちいずれかの得点Pである場合に、画像データIが候補画像データとして選択されるか否かを表す値である。SIは得点Pに対応するシーンSに属する画像データの集合である。scorep=P1scorep≠P1は画像データIの個別ページ用の得点P1と、画像データIの個別ページ用の得点P1でない得点(すなわち、共通ページ用の得点P2)をそれぞれ表す。THRは閾値を表す。が1である場合、は、画像データIが候補画像データして選択されることを表し、が0である場合、は、画像データIが候補画像データして選択されないことを表す。 Or I C P is scored read in S41101 is, if it is one of the score P of the scores for the common page with scores P1 for individual pages P2, the image data I is selected as the candidate image data It is a value indicating whether or not. SI is a set of image data belonging to the scene S corresponding to the score P. I score p = P1 and I score p ≠ P1 represent the score P1 for the individual page of the image data I and the score P1 for the individual page of the image data I (that is, the score P2 for the common page). THR represents a threshold. When I C P is 1, I C P means that the image data I is selected as the candidate image data, and when I C P is 0, I C P means that the image data I is the candidate image. Indicates that the data is not selected.

これにより、個別ページ用のテンプレートに配置される画像データの候補となる候補画像データとして、個別ページ用の点数が共通ページ用の点数より高い画像データが選択される。また、共通ページ用のテンプレートに配置される画像データの候補となる候補画像データとして、共通ページ用の点数が個別ページ用の点数より高い画像データが選択される。このような形態とすることで、個別ページと共通ページとで、同じ画像データが使用されてしまうことを抑制できる。なお、上述の式による画像データの選択方法は、例えば、第1実施形態や第2実施形態において適用されても良い。 As a result, as the candidate image data that is a candidate for the image data to be arranged in the template for the individual page, the image data whose score for the individual page is higher than the score for the common page is selected. Further, as the candidate image data that is a candidate for the image data arranged in the template for the common page, the image data whose score for the common page is higher than the score for the individual page is selected. By adopting such a form, it is possible to prevent the same image data from being used on the individual page and the common page. The method of selecting image data according to the above formula may be applied, for example, in the first embodiment or the second embodiment.

S120202では、CPU101は、S405で行ったシーン分割の結果と、S110201で取得した候補画像データとを基に見開き数を設定する。本処理の詳細は、第1実施形態のS41103で説明したものと同様であるが、第1実施形態との違いについて以下に説明する。第1実施形態では、S41101で読み込まれた得点が個別ページ用の得点であったとしても共通ページ用の得点であったとしても、全てのシーンに関して、式(5)を適用して、見開きデータ数を特定した。しかし、本実施形態では、S41101で読み込まれた得点が個別ページ用の得点であった場合は、個別ページに適しているとS1101で特定されたシーンに関してのみ、見開きデータ数を特定する。一方、S41101で読み込まれた得点が共通ページ用の得点であった場合は、全てのシーンに関して、見開きデータ数を特定する。 In S120202, the CPU 101 sets the number of spreads based on the result of the scene division performed in S405 and the candidate image data acquired in S110201. The details of this process are the same as those described in S41103 of the first embodiment, but the differences from the first embodiment will be described below. In the first embodiment, regardless of whether the score read in S41101 is a score for an individual page or a score for a common page, the equation (5) is applied to all the scenes to apply the spread data. Identified the number. However, in the present embodiment, when the score read in S41101 is the score for the individual page, the number of spread data is specified only for the scene specified in S1101 as being suitable for the individual page. On the other hand, when the score read in S41011 is the score for the common page, the number of spread data is specified for all the scenes.

S120203では、CPU101は、S120201で取得した候補画像データを、S120202で特定した見開き数分の画像データ群に分割する。本処理の詳細は、第1実施形態のS41104で説明したものと同様である。その後、CPU101は、S41105に移行する。 In S120203, the CPU 101 divides the candidate image data acquired in S120201 into image data groups for the number of spreads specified in S120202. The details of this process are the same as those described in S41104 of the first embodiment. After that, the CPU 101 shifts to S41105.

以降の処理は、第1実施形態で説明した処理と同様である。 Subsequent processing is the same as the processing described in the first embodiment.

このように本実施形態では、全てのシーンが共通ページ用の画像を選択するための候補となることで、一部のシーンのみが共通ページ用の画像を選択するための候補となっている形態と比較し、共通ページ用の画像としてより良い画像が選択される可能性が向上する。また、一部のシーンのみが個別ページ用の画像を選択するための候補となることで、共通ページ用の画像として選択される画像と個別ページ用の画像として選択される画像が同一となってしまうことを抑制できる。 As described above, in the present embodiment, all the scenes are candidates for selecting the image for the common page, so that only some scenes are candidates for selecting the image for the common page. Compared with, the possibility that a better image is selected as the image for the common page is improved. In addition, since only some scenes are candidates for selecting an image for an individual page, the image selected as the image for the common page and the image selected as the image for the individual page become the same. It can be suppressed from being stored.

なお、本実施形態では、共通ページ用の見開きデータに使用する画像データは、全てのシーン画像データ群からそれぞれ取得し、個別ページ用の見開きデータに使用する画像データは、全てのシーン画像データ群からは取得せず、一部のシーン画像データ群からのみ取得していた。しかしながらこの形態に限定されない。例えば、個別ページ用の見開きデータに適した画像データの数が少ないケースがある。そのようなケースでは例えば、個別ページ用の見開きデータに使用する画像データを、全てのシーン画像データ群からそれぞれ取得しても良い。また、共通ページ用の見開きデータに使用する画像データを、全てのシーン画像データ群からは取得せず、一部のシーン画像データ群からのみ取得しても良い。これにより、個別ページ用の見開きデータに使用する画像データを十分な枚数確保しつつ、共通ページ用の画像として選択される画像と個別ページ用の画像として選択される画像が同一となってしまうことを抑制できる。 In the present embodiment, the image data used for the spread data for the common page is acquired from all the scene image data groups, and the image data used for the spread data for the individual pages is all the scene image data groups. It was not acquired from, but was acquired only from some scene image data groups. However, it is not limited to this form. For example, there are cases where the number of image data suitable for spread data for individual pages is small. In such a case, for example, the image data used for the spread data for individual pages may be acquired from all the scene image data groups. Further, the image data used for the spread data for the common page may not be acquired from all the scene image data groups, but may be acquired only from some scene image data groups. As a result, the image selected as the image for the common page and the image selected as the image for the individual page become the same while securing a sufficient number of image data to be used for the spread data for the individual page. Can be suppressed.

(第4実施形態)
上述の実施形態では、表紙に対応するページとそれ以外のページが区別されることなく、アルバムデータが生成されていた。本実施形態では、表紙に対応するページとそれ以外のページを区別してアルバムデータを生成する。さらに本実施形態では、表紙に対応するページが共通ページとなるように制御する形態と、表紙に対応するページが個別ページとなるように制御する形態について説明する。
(Fourth Embodiment)
In the above-described embodiment, the album data is generated without distinguishing between the page corresponding to the cover page and the other pages. In the present embodiment, the album data is generated by distinguishing the page corresponding to the cover page from the other pages. Further, in the present embodiment, a mode in which the page corresponding to the cover page is controlled to be a common page and a mode in which the page corresponding to the cover page is controlled to be an individual page will be described.

なお、特記しない限り、本実施形態の構成は、第1実施形態の構成と同様であるものとする。 Unless otherwise specified, the configuration of the present embodiment shall be the same as the configuration of the first embodiment.

本実施形態では、アルバム作成アプリは、図14(A)に示すような表紙のモードの設定を受け付けるための表紙モード設定領域1400を設定画面301上にさらに表示する。領域1401は、表紙のモードとして個別モードを選択するための領域であり、領域1402は、表紙のモードとして共通モードを選択するための領域である。個別モードとは、表紙に対応するページが個別ページとなるように制御するモードであり、共通モードとは、表紙に対応するページが共通ページとなるように制御するモードである。なお、ここで選択された表紙のモードは、設定画面301によって作成を指示された全てのアルバムに適用されるが、この形態に限定されず、アルバム毎に表紙のモードが選択されても良い。 In the present embodiment, the album creation application further displays the cover mode setting area 1400 for accepting the cover mode setting as shown in FIG. 14A on the setting screen 301. The area 1401 is an area for selecting an individual mode as the cover mode, and the area 1402 is an area for selecting a common mode as the cover mode. The individual mode is a mode for controlling the page corresponding to the cover page to be an individual page, and the common mode is a mode for controlling the page corresponding to the cover page to be a common page. The cover mode selected here is applied to all the albums instructed to be created by the setting screen 301, but the form is not limited to this, and the cover mode may be selected for each album.

図13は、本実施形態に係るアルバム作成アプリにより実行される自動レイアウト処理を示すフローチャートである。図13に示すフローチャートは、例えば、CPU101がHDD104に格納されたアルバム作成アプリに対応するプログラムをROM102やRAM103に読み出して実行することにより実現される。 FIG. 13 is a flowchart showing an automatic layout process executed by the album creation application according to the present embodiment. The flowchart shown in FIG. 13 is realized, for example, by the CPU 101 reading a program corresponding to the album creation application stored in the HDD 104 into the ROM 102 or the RAM 103 and executing the program.

S401〜S411までの処理は、第1実施形態にて説明した処理と同様である。 The processes from S401 to S411 are the same as the processes described in the first embodiment.

S1301では、CPU101は、表紙のレイアウトを決定し、決定されたレイアウトによって表紙を印刷するための表紙データを生成する表紙データ生成処理を実行する。なお本実施形態では、表紙データは、表表紙と裏表紙のそれぞれに対応するページを印刷するためのデータであるものとする。しかしながらこの形態に限定されず、例えば表紙データは、表表紙のみに対応するページを印刷するためのデータであっても良い。図13(D)は、本実施形態に係るアルバム作成アプリにより実行される表紙データ生成処理を示すフローチャートである。 In S1301, the CPU 101 determines a cover layout, and executes a cover data generation process for generating cover data for printing the cover according to the determined layout. In the present embodiment, the front cover data is data for printing pages corresponding to each of the front cover and the back cover. However, the present invention is not limited to this form, and for example, the cover data may be data for printing a page corresponding only to the front cover. FIG. 13D is a flowchart showing a cover data generation process executed by the album creation application according to the present embodiment.

S130101では、CPU101は、設定画面301によって作成を指示された複数のアルバムの内、いずれのアルバムの表紙データを生成するかを特定する。 In S130101, the CPU 101 specifies which of the plurality of albums instructed to be created by the setting screen 301 to generate the cover data of the album.

S130102では、CPU101は、表紙モード設定領域1400に対するユーザ入力に基づき、S13101で特定されたアルバムの表紙のモードを特定する。 In S130102, the CPU 101 specifies the cover mode of the album specified in S13101 based on the user input to the cover mode setting area 1400.

S130103では、CPU101は、S130101で特定されたアルバムの表紙に配置される画像データの候補となる表紙候補画像データを取得する。具体的には、CPU101は、S130101で特定されたアルバムの表紙のモードが個別モードである場合、S411で生成された見開きデータのうち個別ページに対応する見開きデータに含まれる画像データを、表紙候補画像データとして取得する。そしてCPU101は、S130101で特定されたアルバムの表紙のモードが共通モードである場合、S411で生成された見開きデータのうち共通ページに対応する見開きデータに含まれる画像データを、表紙候補画像データとして取得する。 In S130103, the CPU 101 acquires cover candidate image data that is a candidate for image data arranged on the cover of the album specified in S130101. Specifically, when the mode of the cover page of the album specified in S130101 is the individual mode, the CPU 101 selects the image data included in the spread data corresponding to the individual page among the spread data generated in S411 as the cover candidate. Acquire as image data. Then, when the mode of the cover of the album specified in S130101 is the common mode, the CPU 101 acquires the image data included in the spread data corresponding to the common page among the spread data generated in S411 as the cover candidate image data. To do.

S130104では、CPU101は、CPU101は、表紙候補画像データから、表紙に配置される画像データを選択する。本実施形態では、表紙に配置される画像データは1つであることから、CPU101は、1つのみ画像データを選択する。具体的には、CPU101は、S130101で特定されたアルバムの表紙のモードが個別モードである場合、表紙候補画像データから、個別ページ用の得点が高い画像データを選択する。なお、このとき参照される個別ページ用の得点は、S130101で特定されたアルバムに設定された主被写体に基づいて評価された個別ページ用の得点である。また、CPU101は、S130101で特定されたアルバムの表紙のモードが共通モードである場合、表紙候補画像データから、共通ページ用の得点が高い画像データを選択する。なお表紙に配置される画像データが複数であれば、このとき複数の画像データが選択されても良い。 In S130104, the CPU 101 selects the image data to be arranged on the cover from the cover candidate image data. In the present embodiment, since there is only one image data arranged on the cover, the CPU 101 selects only one image data. Specifically, when the cover mode of the album specified in S130101 is the individual mode, the CPU 101 selects image data having a high score for individual pages from the cover candidate image data. The score for the individual page referred to at this time is the score for the individual page evaluated based on the main subject set in the album specified in S130101. Further, when the mode of the cover of the album specified in S130101 is the common mode, the CPU 101 selects the image data having a high score for the common page from the cover candidate image data. If there are a plurality of image data arranged on the cover, a plurality of image data may be selected at this time.

なお上述では、S411で生成された見開きデータに含まれる画像データから、表紙に配置される画像データが選択されていたが、この形態に限定されない。表紙のモードに対応する(すなわち、表紙のモードに対応する得点が高い)画像データであれば、S411で生成された見開きデータに含まれない画像データが選択されても良い。 In the above description, the image data to be arranged on the cover is selected from the image data included in the spread data generated in S411, but the present invention is not limited to this form. As long as the image data corresponds to the cover mode (that is, the score corresponding to the cover mode is high), the image data not included in the spread data generated in S411 may be selected.

また、表紙のモードに対応する得点以外の要素に基づいて、画像データが選択されても良い。例えば、主被写体以外の人物が写っている画像データより、主被写体のみが写っている画像データが優先的に選択されても良い。また、表紙用のテンプレートに配置されているスロットのデザインやアスペクト比に対応する画像データが、それらに対応していない画像データより優先的に選択されても良い。また、スロットに配置された場合の画像データの解像度が所定値以上となる画像データが優先的に選択されても良い。 In addition, image data may be selected based on factors other than the score corresponding to the cover mode. For example, the image data in which only the main subject is shown may be preferentially selected over the image data in which a person other than the main subject is shown. Further, the image data corresponding to the slot design and aspect ratio arranged in the cover template may be selected with priority over the image data not corresponding to them. Further, the image data whose resolution of the image data when arranged in the slot is equal to or higher than a predetermined value may be preferentially selected.

S130105では、CPU101は、表紙用のテンプレートを取得する。本実施形態では、表紙用のテンプレートは、1つのみ用意されているものとする。このとき取得される表紙用テンプレートの一例を図15(A)に示す。図15に示す各表紙用テンプレートにおいて、中心線に対して右側の領域が表表紙に対応する領域であり、中心線に対して左側の領域が裏表紙に対応する領域である。例えば、表紙用テンプレート1501の表表紙に対応する領域には、スロット1502が配置されており、表紙用テンプレート1501の裏表紙に対応する領域には、いずれのスロットも配置されていない。なお、S130105では、それぞれ異なる種類の複数の表紙用のテンプレートが取得されても良い。また、裏表紙に対応する領域にも、スロットが配置されていても良い。なお、図15に示すような表紙用テンプレートと、図9に示すような表紙以外のページ用のテンプレートは、それぞれスロットの大きさや数等のレイアウトが異なるものとする。また、表紙用テンプレートには、アルバム名等のテキストが配置されるための領域が設けられていても良い。 In S130105, the CPU 101 acquires a template for the cover page. In this embodiment, it is assumed that only one template for the cover page is prepared. An example of the cover template acquired at this time is shown in FIG. 15 (A). In each cover template shown in FIG. 15, the area on the right side with respect to the center line is the area corresponding to the front cover, and the area on the left side with respect to the center line is the area corresponding to the back cover. For example, the slot 1502 is arranged in the area corresponding to the front cover of the front cover template 1501, and none of the slots is arranged in the area corresponding to the back cover of the front cover template 1501. In S130105, templates for a plurality of different types of covers may be acquired. In addition, slots may be arranged in the area corresponding to the back cover. It should be noted that the cover template as shown in FIG. 15 and the template for pages other than the cover as shown in FIG. 9 have different layouts such as the size and number of slots. In addition, the cover template may be provided with an area for arranging text such as an album name.

S130106では、CPU101は、表紙データを生成する。具体的にはCPU101は、S130105で取得されたテンプレートのスロットに対して、S130104で選択された画像データを配置することで、表紙データを生成する。なお、S130105で複数の表紙用のテンプレートが取得されていた場合、CPU101は、複数の表紙用のテンプレートのうちいずれを用いるかについてや、いずれのスロットにいずれの画像データを配置するかについてを、図8に示した処理と同様にして決定しても良い。なお、裏表紙に対応する領域にもスロットが配置されている場合は、S130104で選択された画像データを、裏表紙に対応する領域に配置されているスロットにも配置する。なお例えば、表紙モードが共通モードである場合であっても、裏表紙に対応する領域に配置されているスロットには、個別ページ用の画像データ(個別ページ用の得点が高い画像データ)を配置しても良い。 In S130106, the CPU 101 generates cover data. Specifically, the CPU 101 generates cover data by arranging the image data selected in S130104 in the slot of the template acquired in S130105. When a plurality of cover page templates have been acquired in S130105, the CPU 101 determines which of the plurality of cover page templates should be used and which image data should be placed in which slot. It may be determined in the same manner as the process shown in FIG. If the slot is also arranged in the area corresponding to the back cover, the image data selected in S130104 is also arranged in the slot arranged in the area corresponding to the back cover. For example, even when the front cover mode is the common mode, image data for individual pages (image data with a high score for individual pages) is placed in the slots arranged in the area corresponding to the back cover. You may.

S130107では設定画面301によって作成を指示されたすべてのアルバムの表紙データの生成が終了したか否かを判定する。終了していない場合、S130101に戻り、まだ表紙データを生成していないアルバムの表紙データを生成することを特定する。一方、終了している場合、S1302に移行する。 In S130107, it is determined whether or not the generation of the cover data of all the albums instructed to be created by the setting screen 301 is completed. If it is not finished, the process returns to S130101 and specifies that the cover data of the album for which the cover data has not been generated is generated. On the other hand, if it is finished, the process proceeds to S1302.

S1302では、CPU101は、生成された表紙データ及び各見開きデータを結合して、アルバムデータを生成する見開き結合処理を実行する。本処理は、第1実施形態で説明したS412と同様だが、表表紙に対応するページのページ番号が一番小さく、裏表紙に対応するページのページ番号が一番大きくなるように、表紙データ及び各見開きデータを並べたうえで、それらを結合する。このとき、表紙データ以外の見開きデータはソート基準値に基づいて並べられるが、表紙データはソート基準値に関係なく並べられる。また、見開きデータ数の調整において、表紙データは、削除対象とならないように制御する。その後、CPU101は、S413に移行する。 In S1302, the CPU 101 executes a spread combination process for generating album data by combining the generated cover data and each spread data. This process is the same as S412 described in the first embodiment, but the cover data and the page number corresponding to the back cover are the smallest and the page number of the page corresponding to the back cover is the largest. After arranging each spread data, combine them. At this time, the spread data other than the cover data is arranged based on the sort reference value, but the cover data is arranged regardless of the sort reference value. In addition, when adjusting the number of spread data, the cover data is controlled so as not to be deleted. After that, the CPU 101 shifts to S413.

以降の処理は、第1実施形態で説明した処理と同様である。 Subsequent processing is the same as the processing described in the first embodiment.

このような形態とすることで、表紙に対応するページとそれ以外のページを区別してアルバムデータを生成することができる。また、表紙に含まれる画像として、表紙に適した画像を、表紙用テンプレートに配置することができる。 With such a form, the album data can be generated by distinguishing the page corresponding to the cover page from the other pages. Further, as an image included in the cover, an image suitable for the cover can be arranged in the cover template.

なお上述では、個別モードと共通モードをユーザが選択可能な形態を説明したが、この形態に限定されない。例えば、個別モードと共通モードのうちあらかじめ決められた一方でしか、表紙データを作成しない形態であっても良い。その場合、表紙モード設定領域を表示して、ユーザから表紙モードの選択を受け付ける必要はない。 In the above description, the mode in which the user can select the individual mode and the common mode has been described, but the mode is not limited to this mode. For example, the cover data may be created only in one of the individual mode and the common mode, which is predetermined. In that case, it is not necessary to display the cover mode setting area and accept the user to select the cover mode.

(第5実施形態)
本実施形態では、表紙のモードの設定をより詳細に受け付ける形態について説明する。
(Fifth Embodiment)
In this embodiment, a mode for accepting the cover mode setting in more detail will be described.

なお、特記しない限り、本実施形態の構成は、第1実施形態の構成と同様であるものとする。 Unless otherwise specified, the configuration of the present embodiment shall be the same as the configuration of the first embodiment.

本実施形態では、アルバム作成アプリは、図14(B)に示すような表紙のモードの設定を受け付けるための表紙モード設定領域1410を設定画面301上にさらに表示する。本実施形態では、表紙のモードとして個別モードを選択するための領域には、3つの領域(領域1411〜1413)が含まれるものとする。領域1411は、領域1402と同様である。領域1412は、他のアルバムに設定された主被写体を含む画像を、裏表紙に配置する個別モードを選択するための領域である。領域1413は、他のアルバムに設定された主被写体を含む画像を、表表紙に配置する個別モードを選択するための領域である。領域1413は、領域1403と同様である。なお、ここで選択された表紙のモードは、設定画面301によって作成を指示された全てのアルバムに適用されるが、この形態に限定されず、アルバム毎に表紙のモードが選択されても良い。 In the present embodiment, the album creation application further displays the cover mode setting area 1410 for accepting the cover mode setting as shown in FIG. 14B on the setting screen 301. In the present embodiment, it is assumed that the area for selecting the individual mode as the cover mode includes three areas (areas 141 to 1413). Region 1411 is similar to region 1402. The area 1412 is an area for selecting an individual mode for arranging an image including a main subject set in another album on the back cover. The area 1413 is an area for selecting an individual mode for arranging an image including a main subject set in another album on the front cover. Region 1413 is similar to region 1403. The cover mode selected here is applied to all the albums instructed to be created by the setting screen 301, but the form is not limited to this, and the cover mode may be selected for each album.

領域1411が選択された場合のアルバムデータ生成処理は、領域1402が選択された場合のアルバムデータ生成処理と同様である。また、領域1413が選択された場合のアルバムデータ生成処理は、領域1403が選択された場合のアルバムデータ生成処理と同様である。 The album data generation process when the area 1411 is selected is the same as the album data generation process when the area 1402 is selected. Further, the album data generation process when the area 1413 is selected is the same as the album data generation process when the area 1403 is selected.

領域1412が選択された場合の処理について説明する。S130104では、CPU101は、S130101で特定されたアルバムに設定された主被写体に基づいて評価された個別ページ用が高い画像データを、第3実施形態と同様に選択する。そしてさらに、CPU101は、S130101で特定されたアルバム以外のアルバムに設定された主被写体に基づいて評価された個別ページ用が高い画像データを選択する。 The processing when the area 1412 is selected will be described. In S130104, the CPU 101 selects high image data for individual pages evaluated based on the main subject set in the album specified in S130101, as in the third embodiment. Further, the CPU 101 selects high image data for individual pages evaluated based on the main subject set in the album other than the album specified in S130101.

S130105では、CPU101は、領域1412に対応する表紙用テンプレート1503(図15(B))を取得する。 In S130105, the CPU 101 acquires the cover template 1503 (FIG. 15B) corresponding to the area 1412.

S130106では、CPU101は、S130101で特定されたアルバムに設定された主被写体に基づいて評価された個別ページ用の得点が高い画像データを、表紙内のスロット1504に配置する。そして、CPU101は、S130101で特定されたアルバム以外のアルバムに設定された主被写体に基づいて評価された個別ページ用の得点が高い画像データを、裏表紙内のスロット1505及びスロット1506に配置する。これにより、S130101で特定されたアルバムに設定された主被写体を目立たせつつ、アルバムの裏表紙のレイアウトのバリエーションを増やすことができる。 In S130106, the CPU 101 arranges image data having a high score for individual pages evaluated based on the main subject set in the album specified in S130101 in slot 1504 in the cover page. Then, the CPU 101 arranges the image data having a high score for the individual page evaluated based on the main subject set in the album other than the album specified in S130101 in the slots 1505 and 1506 in the back cover. As a result, it is possible to increase the variation of the layout of the back cover of the album while making the main subject set in the album specified in S130101 stand out.

以降の処理は、第3実施形態で説明した処理と同様である。 Subsequent processing is the same as the processing described in the third embodiment.

領域1413が選択された場合の処理について説明する。S130104では、CPU101は、S130101で特定されたアルバムに設定された主被写体に基づいて評価された個別ページ用が高い画像データを、第3実施形態と同様に選択する。そしてさらに、CPU101は、S130101で特定されたアルバム以外のアルバムに設定された主被写体に基づいて評価された個別ページ用が高い画像データを選択する。 The processing when the area 1413 is selected will be described. In S130104, the CPU 101 selects high image data for individual pages evaluated based on the main subject set in the album specified in S130101, as in the third embodiment. Further, the CPU 101 selects high image data for individual pages evaluated based on the main subject set in the album other than the album specified in S130101.

S130105では、CPU101は、領域1413に対応する表紙用テンプレート1507(図15(C))を取得する。 In S130105, the CPU 101 acquires the cover template 1507 (FIG. 15C) corresponding to the area 1413.

S130106では、CPU101は、S130101で特定されたアルバムに設定された主被写体に基づいて評価された個別ページ用の得点が高い画像データを、表紙内のスロット1508に配置する。そして、CPU101は、S130101で特定されたアルバム以外のアルバムに設定された主被写体に基づいて評価された個別ページ用の得点が高い画像データを、裏表紙内のスロット1509及びスロット1510に配置する。スロット1508は、スロット1509やスロット1510に比べて大きい。これにより、S130101で特定されたアルバムに設定された主被写体を目立たせつつ、アルバムの表表紙のレイアウトのバリエーションを増やすことができる。 In S130106, the CPU 101 arranges high-scoring image data for individual pages evaluated based on the main subject set in the album specified in S130101 in slot 1508 in the cover page. Then, the CPU 101 arranges image data having a high score for individual pages evaluated based on the main subject set in an album other than the album specified in S130101 in slots 1509 and 1510 in the back cover. Slot 1508 is larger than slot 1509 and slot 1510. As a result, it is possible to increase the variation of the layout of the front cover of the album while making the main subject set in the album specified in S130101 stand out.

以降の処理は、第1実施形態で説明した処理と同様である。 Subsequent processing is the same as the processing described in the first embodiment.

(第6実施形態)
本実施形態では、表紙のモードとして共通モードが選択された場合の処理として、上述の実施形態における処理と異なる処理を実行する形態について説明する。
(Sixth Embodiment)
In this embodiment, a mode different from the processing in the above-described embodiment will be described as a processing when the common mode is selected as the cover mode.

上述の実施形態では、CPU101は、表紙のモードが共通モードである場合、表紙候補画像データから、共通ページ用の得点が高い画像データを選択していた。しかしながら本実施形態では、表紙のモードが共通モードである場合、表紙候補画像データから、個別ページ用の得点が高い画像データを複数選択する。具体的には例えば、主被写体Aが設定されたアルバム、主被写体Bが設定されたアルバム、主被写体Cが設定されたアルバムの3つのアルバムの作成が指示されていたとする。その場合、S130104では、CPU101は、主被写体Aに基づく個別ページ用の得点が高い画像データと、主被写体Bに基づく個別ページ用の得点が高い画像データと、主被写体Cに基づく個別ページ用の得点が高い画像データをそれぞれ選択する。なお、選択される画像データの数は、3つに限らない。少なくとも、作成が指示されたアルバムの数以上の数の画像データが選択されれば良い。 In the above-described embodiment, when the cover mode is the common mode, the CPU 101 selects image data having a high score for the common page from the cover candidate image data. However, in the present embodiment, when the cover mode is the common mode, a plurality of image data having a high score for individual pages are selected from the cover candidate image data. Specifically, for example, it is assumed that three albums, an album in which the main subject A is set, an album in which the main subject B is set, and an album in which the main subject C is set are instructed to be created. In that case, in S130104, the CPU 101 has image data having a high score for the individual page based on the main subject A, image data having a high score for the individual page based on the main subject B, and image data for the individual page based on the main subject C. Select each image data with a high score. The number of image data selected is not limited to three. At least, a number of image data equal to or larger than the number of albums instructed to be created may be selected.

S130105では、CPU101は、共通モード用の表紙用テンプレート1511(図15(D))を取得する。 In S130105, the CPU 101 acquires the cover template 1511 (FIG. 15D) for the common mode.

S130106では、CPU101は、S130104で選択された各画像データを、スロット1512〜スロット1514にそれぞれ配置する。スロット1512〜スロット1514の大きさは、同じであるものとする。また、いずれのスロットにいずれの画像データが配置されるかは特に限定されない。例えば、S130101で特定されたアルバムの主被写体に基づいて評価された個別ページ用の得点が高い画像データを、表紙領域の中心に位置するスロット1513に配置しても良い。 In S130106, the CPU 101 arranges each image data selected in S130104 in slots 1512 to 1514, respectively. It is assumed that the sizes of slots 1512 to 1514 are the same. Further, which image data is arranged in which slot is not particularly limited. For example, high-scoring image data for individual pages evaluated based on the main subject of the album identified in S130101 may be placed in slot 1513 located in the center of the cover area.

このように本実施形態では、表紙にそれぞれの主被写体に対応する複数の画像データを配置することで、共通モードの表紙を構成する。なお表紙のモードとして個別モードが選択された場合は、第4実施形態や第5実施形態にて説明したようにして、表紙には、1つの主被写体に対応する少なくとも1つの画像データを配置する。 As described above, in the present embodiment, the cover of the common mode is configured by arranging a plurality of image data corresponding to each main subject on the cover. When the individual mode is selected as the cover mode, at least one image data corresponding to one main subject is arranged on the cover as described in the fourth embodiment and the fifth embodiment. ..

(その他の実施形態)
上述の実施形態では、個別ページに対応する見開きデータの数が、アルバムによって異なる形態を説明した。しかしながら、この形態に限定されず、ユーザによって作成を指示された複数のアルバム全てにおいて、個別ページに対応する見開きデータの数が同一になるように制御されても良い。
(Other embodiments)
In the above-described embodiment, the form in which the number of spread data corresponding to individual pages differs depending on the album has been described. However, the present invention is not limited to this form, and the number of spread data corresponding to individual pages may be controlled to be the same in all of the plurality of albums instructed to be created by the user.

上述の実施形態では、共通ページに対応する見開きデータの数が、アルバムによって異なる形態を説明した。しかしながら、この形態に限定されず、ユーザによって作成を指示された複数のアルバム全てにおいて、共通ページに対応する見開きデータの数が同一になるように制御されても良い。 In the above-described embodiment, the form in which the number of spread data corresponding to the common page differs depending on the album has been described. However, the present invention is not limited to this form, and the number of spread data corresponding to the common page may be controlled to be the same in all of the plurality of albums instructed to be created by the user.

上述の実施形態では、共通ページ用の見開きデータと個別ページ用の見開きデータの集合が、ソート基準値によってソートされて、アルバムデータが生成されていた。すなわち、アルバムデータにおいて共通ページ用の見開きデータや個別ページ用の見開きデータがいずれの位置(ページ番号)となるかは、アルバムデータ毎に異なっていた。しかしながらこの形態に限定されず、例えば、共通ページ用の見開きデータの位置及び、共通ページ用の見開きデータの位置が、それぞれのアルバムデータ内で固定されていても良い。例えば、共通ページ用の見開きデータの後に、個別ページ用の見開きデータが位置するように、それぞれの見開きデータが並べられても良い。より詳細には例えば、ソート基準値によってソートされた共通ページ用の見開きデータの後に、ソート基準値によってソートされた個別ページ用の見開きデータが位置するように、それぞれの見開きデータが並べられても良い。もちろん、個別ページ用の見開きデータの後に、共通ページ用の見開きデータが位置するように、それぞれの見開きデータが並べられても良い。 In the above-described embodiment, the set of the spread data for the common page and the spread data for the individual pages is sorted by the sort reference value to generate the album data. That is, the position (page number) of the spread data for the common page and the spread data for the individual pages in the album data was different for each album data. However, the present invention is not limited to this form, and for example, the position of the spread data for the common page and the position of the spread data for the common page may be fixed in each album data. For example, each spread data may be arranged so that the spread data for individual pages is located after the spread data for the common page. More specifically, for example, even if each spread data is arranged so that the spread data for the common page sorted by the sort reference value is followed by the spread data for the individual pages sorted by the sort reference value. good. Of course, each spread data may be arranged so that the spread data for the common page is located after the spread data for the individual pages.

上述した各実施形態は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(CPUやMPU等)がプログラムを読み出して実行する処理である。また、プログラムは、1つのコンピュータで実行させても、複数のコンピュータで連動させて実行させるようにしても良い。また、上記した処理の全てをソフトウェアで実現する必要はなく、処理の一部または全部をASIC等のハードウェアで実現するようにしても良い。また、CPUも1つのCPUで全ての処理を行うものに限らず、複数のCPUが適宜連携をしながら処理を行うものとしても良い。
Each of the above-described embodiments is also realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiment is supplied to the system or device via a network or various storage media, and the computer (CPU, MPU, etc.) of the system or device reads and executes the program. It is a process to do. Further, the program may be executed on one computer or may be executed in conjunction with a plurality of computers. Further, it is not necessary to realize all of the above-mentioned processes by software, and a part or all of the processes may be realized by hardware such as ASIC. Further, the CPU is not limited to one that performs all processing by one CPU, and a plurality of CPUs may perform processing while appropriately coordinating with each other.

Claims (23)

複数のアルバムに対応する複数のアルバムデータを生成する画像処理装置のコンピュータに、
複数の画像データを取得する取得ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てに共通するページである共通ページに配置される画像に対応する共通画像データとして選択する第1選択ステップと、
前記共通画像データとして選択された前記少なくとも1つの画像データに基づいて、前記共通ページに対応する共通ページデータを生成する第1生成ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てには共通しないページである個別ページに配置される画像に対応する個別画像データとして選択する第2選択ステップと、
前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記個別ページに対応する個別ページデータを、複数生成する第2生成ステップと、
前記共通ページデータと複数の前記個別ページデータに基づいて、前記複数のアルバムデータを生成する第3生成ステップと、を実行させ、
前記複数のアルバムデータのうち第1のアルバムデータに対応する前記個別ページデータと、前記複数のアルバムデータのうち第2のアルバムデータに対応する前記個別ページデータは異なり、
前記複数のアルバムデータのうち前記第1のアルバムデータに対応する前記共通ページデータと、前記複数のアルバムデータのうち前記第2のアルバムデータに対応する前記共通ページデータは同一であり、
アルバムの表紙に配置される画像に対応する表紙画像データが、前記個別画像データとして選択されるように制御されることを特徴とするプログラム。
On the computer of the image processing device that generates multiple album data corresponding to multiple albums,
The acquisition step to acquire multiple image data and
A first selection step of selecting at least one image data out of the plurality of image data as common image data corresponding to an image arranged on a common page which is a page common to all the plurality of albums.
A first generation step of generating common page data corresponding to the common page based on the at least one image data selected as the common image data, and
A second selection step of selecting at least one image data out of the plurality of image data as individual image data corresponding to an image arranged on an individual page which is a page not common to all the plurality of albums.
A second generation step of generating a plurality of individual page data corresponding to the individual page based on the at least one image data selected as the individual image data.
A third generation step of generating the plurality of album data based on the common page data and the plurality of individual page data is executed.
The individual page data corresponding to the first album data among the plurality of album data and the individual page data corresponding to the second album data among the plurality of album data are different.
The common page data corresponding to the first album data among the plurality of album data and the common page data corresponding to the second album data among the plurality of album data are the same.
A program characterized in that cover image data corresponding to an image arranged on the cover of an album is controlled to be selected as the individual image data.
前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データから、前記表紙画像データが、前記個別画像データとして選択されることを特徴とする請求項1に記載のプログラム。 The first aspect of claim 1 is that the cover image data is selected as the individual image data from the image data corresponding to the images already selected as the individual image data and arranged on a page other than the cover. Described program. 表紙に対応する表紙データに関するユーザの入力を受け付ける受け付けステップと、をさらに実行させ、
前記表紙画像データが、前記共通画像データと前記個別画像データのうち、前記入力に基づく画像データとして選択されるように制御されることを特徴とする請求項1又は2に記載のプログラム。
Further execute the acceptance step of accepting the user's input regarding the cover data corresponding to the cover.
The program according to claim 1 or 2, wherein the cover image data is controlled so as to be selected as image data based on the input among the common image data and the individual image data.
前記第1のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データ及び、前記第2のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データから、それぞれ前記表紙画像データが、前記個別画像データとして選択されることを特徴とする請求項2に記載のプログラム。 As the image data corresponding to the image already selected as the individual image data corresponding to the first album data and arranged on the page other than the cover page, and the individual image data corresponding to the second album data. The program according to claim 2, wherein the cover image data is selected as the individual image data from the image data corresponding to the images already selected and arranged on the page other than the cover. 表紙に対応する表紙データに関するユーザの入力を受け付ける受け付けステップと、をさらに実行させ、
前記入力が第1の入力である場合、前記第1のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データ及び、前記第2のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データから、それぞれ前記表紙画像データが、前記個別画像データとして選択され、
前記入力が第2の入力である場合、前記第1のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データ及び、前記第2のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データのうちいずれかから、前記表紙画像データが、前記個別画像データとして選択されることを特徴とする請求項4に記載のプログラム。
Further execute the acceptance step of accepting the user's input regarding the cover data corresponding to the cover.
When the input is the first input, the image data corresponding to the image already selected as the individual image data corresponding to the first album data and arranged on the page other than the cover page, and the second image data. The cover image data is selected as the individual image data from the image data already selected as the individual image data corresponding to the album data of the above and corresponding to the images arranged on the pages other than the cover.
When the input is the second input, the image data corresponding to the image already selected as the individual image data corresponding to the first album data and arranged on the page other than the cover page, and the second image data. The cover image data is selected as the individual image data from any of the image data already selected as the individual image data corresponding to the album data of the above and corresponding to the image arranged on the page other than the cover. The program according to claim 4, wherein the program is characterized by the above.
アルバムの裏表紙に配置される画像に対応する表紙画像データが、前記個別画像データとして選択されるように制御されることを特徴とする請求項1乃至5のいずれか1項に記載のプログラム。 The program according to any one of claims 1 to 5, wherein the cover image data corresponding to the image arranged on the back cover of the album is controlled to be selected as the individual image data. 第1の要素に基づいて、前記複数の画像データのそれぞれを評価する第1評価ステップと、
前記第1の要素と異なる第2の要素に基づいて、前記複数の画像データのそれぞれを評価する第2評価ステップと、をさらに実行させ、
前記共通画像データ群として特定された前記少なくとも1つの画像データ群のうち、少なくとも1つの画像データが、前記第1の要素に基づく評価に基づいて前記共通画像データとして選択され、
前記個別画像データ群として特定された前記少なくとも1つの画像データ群のうち、少なくとも1つの画像データが、前記第2の要素に基づく評価に基づいて前記個別画像データとして選択されることを特徴とする請求項1乃至6のいずれか1項に記載のプログラム。
A first evaluation step of evaluating each of the plurality of image data based on the first element, and
A second evaluation step of evaluating each of the plurality of image data based on a second element different from the first element is further executed.
Of the at least one image data group specified as the common image data group, at least one image data is selected as the common image data based on the evaluation based on the first element.
Of the at least one image data group specified as the individual image data group, at least one image data is selected as the individual image data based on an evaluation based on the second element. The program according to any one of claims 1 to 6.
前記複数の画像データのそれぞれは、前記第1のアルバムデータに関する前記第2の要素及び、前記第2のアルバムデータに関する前記第2の要素によって評価され、
前記複数の画像データのうち少なくとも1つの画像データが、前記第1のアルバムデータに対応する前記個別画像データとして、前記第1のアルバムデータに関する前記第2の要素に基づく評価に基づいて、自動で選択され、
前記複数の画像データのうち少なくとも1つの画像データが、前記第2のアルバムデータに対応する前記個別画像データとして、前記第2のアルバムデータに関する前記第2の要素に基づく評価に基づいて、自動で選択され、
前記第1のアルバムデータに対応する前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記第1のアルバムデータに対応する前記個別ページデータが生成され、
前記第2のアルバムデータに対応する前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記第2のアルバムデータに対応する前記個別ページデータが生成され、
前記共通ページデータと前記第1のアルバムデータに対応する前記個別ページデータに基づいて、前記第1のアルバムデータに対応する前記アルバムデータが生成され、
前記共通ページデータと前記第2のアルバムデータに対応する前記個別ページデータに基づいて、前記第2のアルバムデータに対応する前記アルバムデータが生成されることを特徴とする請求項7に記載のプログラム。
Each of the plurality of image data is evaluated by the second element relating to the first album data and the second element relating to the second album data.
At least one image data out of the plurality of image data is automatically used as the individual image data corresponding to the first album data based on the evaluation based on the second element regarding the first album data. Selected,
At least one of the plurality of image data is automatically used as the individual image data corresponding to the second album data based on the evaluation based on the second element regarding the second album data. Selected,
The individual page data corresponding to the first album data is generated based on at least one image data selected as the individual image data corresponding to the first album data.
The individual page data corresponding to the second album data is generated based on the at least one image data selected as the individual image data corresponding to the second album data.
The album data corresponding to the first album data is generated based on the common page data and the individual page data corresponding to the first album data.
The program according to claim 7, wherein the album data corresponding to the second album data is generated based on the common page data and the individual page data corresponding to the second album data. ..
前記複数のアルバムデータのそれぞれに対応する少なくとも1つの主被写体を特定する主被写体特定ステップをさらに実行させ、
前記第1の要素は、前記第1のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素及び、前記第2のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素を含み、
前記第1のアルバムデータに関する前記第2の要素は、前記第1のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素を含み、前記第2のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素を含まず、
前記第2のアルバムデータに関する前記第2の要素は、前記第2のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素を含み、前記第1のアルバムデータに対応する前記少なくとも1つの主被写体に関する要素を含まないことを特徴とする請求項8に記載のプログラム。
Further executing the main subject identification step of identifying at least one main subject corresponding to each of the plurality of album data is performed.
The first element includes an element relating to the at least one main subject corresponding to the first album data and an element relating to the at least one main subject corresponding to the second album data.
The second element relating to the first album data includes an element relating to the at least one main subject corresponding to the first album data, and the element relating to the at least one main subject corresponding to the second album data. Does not contain elements
The second element relating to the second album data includes an element relating to the at least one main subject corresponding to the second album data, and the element relating to the at least one main subject corresponding to the first album data. The program according to claim 8, wherein the program does not include an element.
前記第1の要素及び前記第2の要素は、画質に関する要素を含むことを特徴とする請求項8又は9に記載のプログラム。 The program according to claim 8 or 9, wherein the first element and the second element include an element related to image quality. 前記第1の要素に基づく評価によって、前記第1の評価値が前記複数の画像データに付加され、
前記第2の要素に基づく評価によって、前記第2の評価値が前記複数の画像データに付加され、
前記複数の画像データのうち少なくとも1つの画像データが、前記共通画像データとして、前記第1の評価値に基づいて、自動で選択され、
前記複数の画像データのうち少なくとも1つの画像データが、前記個別画像データとして、前記第2の評価値に基づいて、自動で選択されることを特徴とする請求項8乃至10のいずれか1項に記載のプログラム。
By the evaluation based on the first element, the first evaluation value is added to the plurality of image data.
By the evaluation based on the second element, the second evaluation value is added to the plurality of image data.
At least one image data out of the plurality of image data is automatically selected as the common image data based on the first evaluation value.
One of claims 8 to 10, wherein at least one image data out of the plurality of image data is automatically selected as the individual image data based on the second evaluation value. The program described in.
前記複数の画像データのうち、他の画像データより値が大きい前記第1の評価値が付加された少なくとも1つの画像データが、前記共通画像データとして、自動で選択され、
前記複数の画像データのうち、他の画像データより値が大きい前記第2の評価値が付加された少なくとも1つの画像データが、前記個別画像データとして、自動で選択されることを特徴とする請求項11に記載のプログラム。
Of the plurality of image data, at least one image data to which the first evaluation value having a larger value than the other image data is added is automatically selected as the common image data.
A claim characterized in that at least one image data to which the second evaluation value having a larger value than the other image data is added is automatically selected as the individual image data among the plurality of image data. Item 2. The program according to item 11.
前記複数の画像データのうち、他の画像データより値が大きい前記第1の評価値が付加され、且つ前記第2の評価値より値が大きい前記第1の評価値が付加されている少なくとも1つの画像データが、前記共通画像データとして、自動で選択され、
前記複数の画像データのうち、他の画像データより値が大きい前記第2の評価値が付加され、且つ前記第1の評価値より値が大きい前記第2の評価値が付加されている少なくとも1つの画像データが、前記個別画像データとして、自動で選択されることを特徴とする請求項12に記載のプログラム。
Of the plurality of image data, at least one to which the first evaluation value having a larger value than the other image data is added and the first evaluation value having a value larger than the second evaluation value is added. One image data is automatically selected as the common image data,
Of the plurality of image data, at least one to which the second evaluation value having a larger value than the other image data is added and the second evaluation value having a value larger than the first evaluation value is added. The program according to claim 12, wherein one image data is automatically selected as the individual image data.
前記複数の画像データを、所定の基準に従って、複数の画像データ群に分割する分割ステップと、
前記複数の画像データ群のうち、少なくとも1つの画像データ群を、前記共通画像データを選択するための共通画像データ群として特定する第1特定ステップと、
前記複数の画像データ群のうち、少なくとも1つの画像データ群を、前記個別画像データを選択するための個別画像データ群として特定する第2特定ステップと、をさらに実行させ、
前記共通画像データ群として特定された前記少なくとも1つの画像データ群のうち、少なくとも1つの画像データが、前記共通画像データとして選択され、
前記個別画像データ群として特定された前記少なくとも1つの画像データ群のうち、少なくとも1つの画像データが、前記個別画像データとして選択されることを特徴とする請求項1乃至13のいずれか1項に記載のプログラム。
A division step of dividing the plurality of image data into a plurality of image data groups according to a predetermined standard, and
A first specific step of specifying at least one image data group among the plurality of image data groups as a common image data group for selecting the common image data, and
A second specific step of identifying at least one image data group among the plurality of image data groups as an individual image data group for selecting the individual image data is further executed.
Of the at least one image data group specified as the common image data group, at least one image data is selected as the common image data.
The invention according to any one of claims 1 to 13, wherein at least one image data out of the at least one image data group specified as the individual image data group is selected as the individual image data. Described program.
前記共通画像データ群として特定される前記少なくとも1つの画像データ群のうち少なくとも1つの画像データ群が、前記個別画像データ群として特定されないように制御されることを特徴とする請求項14に記載のプログラム。 The 14th aspect of claim 14, wherein at least one image data group out of at least one image data group specified as the common image data group is controlled so as not to be specified as the individual image data group. program. 前記共通画像データ群として特定される前記少なくとも1つの画像データ群のうち全ての画像データ群が、前記個別画像データ群として特定されないように制御されることを特徴とする請求項15に記載のプログラム。 The program according to claim 15, wherein all the image data groups of the at least one image data group specified as the common image data group are controlled so as not to be specified as the individual image data group. .. 前記複数の画像データ群のうち全ての画像データ群が、前記共通画像データ群として特定され、
前記複数の画像データ群のうち少なくとも1つの画像データ群が、前記個別画像データ群として特定されないことを特徴とする請求項15に記載のプログラム。
All the image data groups among the plurality of image data groups are specified as the common image data group, and the image data group is specified.
The program according to claim 15, wherein at least one image data group among the plurality of image data groups is not specified as the individual image data group.
第1のテンプレートに、前記共通画像データとして選択された前記少なくとも1つの画像データが、ユーザによる配置操作の受け付け無しに自動で配置されることで、前記共通ページデータが生成され、
第2のテンプレートに、前記個別画像データとして選択された前記少なくとも1つの画像データが、ユーザによる配置操作の受け付け無しに自動で配置されることで、前記個別ページデータが生成されることを特徴とする請求項1乃至17のいずれか1項に記載のプログラム。
The common page data is generated by automatically arranging the at least one image data selected as the common image data in the first template without accepting the arrangement operation by the user.
The second template is characterized in that the individual page data is generated by automatically arranging the at least one image data selected as the individual image data without accepting the arrangement operation by the user. The program according to any one of claims 1 to 17.
前記表紙画像データが配置されるテンプレートと、前記表紙画像データ以外の画像データが配置されるテンプレートはそれぞれ異なることを特徴とする請求項18に記載のプログラム。 The program according to claim 18, wherein the template in which the cover image data is arranged and the template in which the image data other than the cover image data is arranged are different from each other. 前記第1のアルバムデータに対応する前記個別画像データとして既に選択され、且つ前記表紙以外のページに配置される画像に対応する画像データから選択された前記表紙画像データが、前記表紙の中心となるように前記第1のテンプレートに配置されることで、前記第1のアルバムデータに対応する前記共通ページデータが生成されることを特徴とする請求項18又は19に記載のプログラム。 The cover image data already selected as the individual image data corresponding to the first album data and selected from the image data corresponding to the image arranged on the page other than the cover is the center of the cover. The program according to claim 18 or 19, wherein the common page data corresponding to the first album data is generated by being arranged in the first template as described above. 前記複数のアルバムデータを出力する出力ステップと、さらに実行させ
前記複数のアルバムデータの出力は、前記複数のアルバムデータの表示及び、前記複数のアルバムデータの送信、前記複数のアルバムデータに基づく前記複数のアルバムの印刷のうち、少なくとも1つであることを特徴とする請求項1乃至20のいずれか1項に記載のプログラム。
The output step of outputting the plurality of album data and the output of the plurality of album data to be further executed include displaying the plurality of album data, transmitting the plurality of album data, and the plurality of album data based on the plurality of album data. The program according to any one of claims 1 to 20, wherein the printing of the album is at least one.
複数のアルバムに対応する複数のアルバムデータを生成する画像処理装置であって、
複数の画像データを取得する取得手段と、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てに共通するページである共通ページに配置される画像に対応する共通画像データとして選択する第1選択手段と、
前記共通画像データとして選択された前記少なくとも1つの画像データに基づいて、前記共通ページに対応する共通ページデータを生成する第1生成手段と、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てには共通しないページである個別ページに配置される画像に対応する個別画像データとして選択する第2選択手段と、
前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記個別ページに対応する個別ページデータを、複数生成する第2生成ステップと、
前記共通ページデータと複数の前記個別ページデータに基づいて、前記複数のアルバムデータを生成する第3生成手段と、を実行させ、
前記複数のアルバムデータのうち第1のアルバムデータに対応する前記個別ページデータと、前記複数のアルバムデータのうち第2のアルバムデータに対応する前記個別ページデータは異なり、
前記複数のアルバムデータのうち前記第1のアルバムデータに対応する前記共通ページデータと、前記複数のアルバムデータのうち前記第2のアルバムデータに対応する前記共通ページデータは同一であり、
アルバムの表紙に配置される画像に対応する表紙画像データが、前記個別画像データとして選択されるように制御されることを特徴とする画像処理装置。
An image processing device that generates multiple album data corresponding to multiple albums.
An acquisition method for acquiring multiple image data,
A first selection means for selecting at least one image data out of the plurality of image data as common image data corresponding to an image arranged on a common page which is a page common to all the plurality of albums.
A first generation means for generating common page data corresponding to the common page based on at least one image data selected as the common image data.
A second selection means for selecting at least one image data out of the plurality of image data as individual image data corresponding to an image arranged on an individual page which is a page not common to all the plurality of albums.
A second generation step of generating a plurality of individual page data corresponding to the individual page based on the at least one image data selected as the individual image data.
A third generation means for generating the plurality of album data based on the common page data and the plurality of individual page data is executed.
The individual page data corresponding to the first album data among the plurality of album data and the individual page data corresponding to the second album data among the plurality of album data are different.
The common page data corresponding to the first album data among the plurality of album data and the common page data corresponding to the second album data among the plurality of album data are the same.
An image processing apparatus characterized in that cover image data corresponding to an image arranged on the cover of an album is controlled so as to be selected as the individual image data.
複数のアルバムに対応する複数のアルバムデータを生成する画像処理装置の制御方法であって、
複数の画像データを取得する取得ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てに共通するページである共通ページに配置される画像に対応する共通画像データとして選択する第1選択ステップと、
前記共通画像データとして選択された前記少なくとも1つの画像データに基づいて、前記共通ページに対応する共通ページデータを生成する第1生成ステップと、
前記複数の画像データのうち少なくとも1つの画像データを、前記複数のアルバム全てには共通しないページである個別ページに配置される画像に対応する個別画像データとして選択する第2選択ステップと、
前記個別画像データとして選択された前記少なくとも1つの画像データに基づいて、前記個別ページに対応する個別ページデータを、複数生成する第2生成ステップと、
前記共通ページデータと複数の前記個別ページデータに基づいて、前記複数のアルバムデータを生成する第3生成ステップと、を有し、
前記複数のアルバムデータのうち第1のアルバムデータに対応する前記個別ページデータと、前記複数のアルバムデータのうち第2のアルバムデータに対応する前記個別ページデータは異なり、
前記複数のアルバムデータのうち前記第1のアルバムデータに対応する前記共通ページデータと、前記複数のアルバムデータのうち前記第2のアルバムデータに対応する前記共通ページデータは同一であり、
アルバムの表紙に配置される画像に対応する表紙画像データが、前記個別画像データとして選択されるように制御されることを特徴とする制御方法。
It is a control method of an image processing device that generates multiple album data corresponding to a plurality of albums.
The acquisition step to acquire multiple image data and
A first selection step of selecting at least one image data out of the plurality of image data as common image data corresponding to an image arranged on a common page which is a page common to all the plurality of albums.
A first generation step of generating common page data corresponding to the common page based on the at least one image data selected as the common image data, and
A second selection step of selecting at least one image data out of the plurality of image data as individual image data corresponding to an image arranged on an individual page which is a page not common to all the plurality of albums.
A second generation step of generating a plurality of individual page data corresponding to the individual page based on the at least one image data selected as the individual image data.
It has a third generation step of generating the plurality of album data based on the common page data and the plurality of individual page data.
The individual page data corresponding to the first album data among the plurality of album data and the individual page data corresponding to the second album data among the plurality of album data are different.
The common page data corresponding to the first album data among the plurality of album data and the common page data corresponding to the second album data among the plurality of album data are the same.
A control method characterized in that cover image data corresponding to an image arranged on the cover of an album is controlled so as to be selected as the individual image data.
JP2019036829A 2019-02-28 2019-02-28 Image processing device, control method, and program Active JP7336210B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019036829A JP7336210B2 (en) 2019-02-28 2019-02-28 Image processing device, control method, and program
US16/787,399 US11501476B2 (en) 2019-02-28 2020-02-11 Image processing apparatus, control method, and storage medium
US18/045,965 US20230112555A1 (en) 2019-02-28 2022-10-12 Image processing apparatus, control method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019036829A JP7336210B2 (en) 2019-02-28 2019-02-28 Image processing device, control method, and program

Publications (2)

Publication Number Publication Date
JP2020140556A true JP2020140556A (en) 2020-09-03
JP7336210B2 JP7336210B2 (en) 2023-08-31

Family

ID=72280425

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019036829A Active JP7336210B2 (en) 2019-02-28 2019-02-28 Image processing device, control method, and program

Country Status (1)

Country Link
JP (1) JP7336210B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018097491A (en) * 2016-12-09 2018-06-21 キヤノン株式会社 Image processing device, image processing method and program
JP2020115294A (en) * 2019-01-18 2020-07-30 富士フイルム株式会社 Image candidate determination device, image candidate determination method, program controlling image candidate determination device, and storage media storing program thereof

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018097491A (en) * 2016-12-09 2018-06-21 キヤノン株式会社 Image processing device, image processing method and program
JP2020115294A (en) * 2019-01-18 2020-07-30 富士フイルム株式会社 Image candidate determination device, image candidate determination method, program controlling image candidate determination device, and storage media storing program thereof

Also Published As

Publication number Publication date
JP7336210B2 (en) 2023-08-31

Similar Documents

Publication Publication Date Title
US11562516B2 (en) Apparatus, method and storage medium
JP6902860B2 (en) Image processing equipment, image processing methods, and programs
US11361487B2 (en) Apparatus, method and storage medium
US11140277B2 (en) Apparatus, method and storage medium
JP6711937B2 (en) Image processing device, image processing method, and program
US11450045B2 (en) Apparatus, method and medium
US11645795B2 (en) Apparatus, method and medium
JP7336211B2 (en) Image processing device, control method, and program
US11501476B2 (en) Image processing apparatus, control method, and storage medium
US20190102926A1 (en) Image processing apparatus and control method
US10917529B2 (en) Image processing apparatus, control method, and storage medium
JP7451242B2 (en) Image processing device, image processing method, and program
US11979523B2 (en) Storage medium, image processing method, and image processing apparatus
JP7336212B2 (en) Image processing device, control method, and program
JP7336210B2 (en) Image processing device, control method, and program
US11887214B2 (en) Storage medium storing program for generating album data, image processing method for generating album data, and image processing apparatus for generating album data
JP7263054B2 (en) Apparatus, method and program
JP7350496B2 (en) Apparatus, method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220225

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230330

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230718

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230821

R151 Written notification of patent or utility model registration

Ref document number: 7336210

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151