JP2017059245A - Image processor, image processing method, program and recording medium - Google Patents
Image processor, image processing method, program and recording medium Download PDFInfo
- Publication number
- JP2017059245A JP2017059245A JP2016209572A JP2016209572A JP2017059245A JP 2017059245 A JP2017059245 A JP 2017059245A JP 2016209572 A JP2016209572 A JP 2016209572A JP 2016209572 A JP2016209572 A JP 2016209572A JP 2017059245 A JP2017059245 A JP 2017059245A
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- composite
- images
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
本発明は、ユーザが所有する複数枚の画像からなる画像群から複数のパターンの合成画像（フォト商材）を自動で生成してユーザに提案する画像処理装置、画像処理方法、プログラムおよび記録媒体に関するものである。 The present invention provides an image processing apparatus, an image processing method, a program, and a recording medium that automatically generate a composite image (photo product) of a plurality of patterns from an image group consisting of a plurality of images owned by the user and propose to the user It is about.
例えば、フォトブックは、ユーザが所有する複数枚の画像（画像データ）からなる画像群の中から一定枚数の画像を選択し、選択した一定枚数の画像を使用して、ユーザが希望するレイアウトの写真集（フォトアルバム）を作成したものである。しかし、ユーザが所有する複数枚の画像の中からフォトブックで使用したい画像を自分で選択することや、フォトブックのレイアウト、つまり、フォトブックの各々のページにどの画像をどのように配置するのかを考えるのが非常に手間であるという問題があった。 For example, a photo book selects a fixed number of images from an image group consisting of a plurality of images (image data) owned by the user, and uses the selected fixed number of images to have a layout desired by the user. A photo book (photo album) was created. However, you can select the image you want to use in the photo book from among multiple images that you own, and the layout of the photo book, that is, what image to place on each page of the photo book. There was a problem that it was very troublesome to think about.
これに対し、現在では、例えば、画像の撮影期間およびフォトブックのページ数を指定することにより、複数枚の画像の中から撮影期間により指定された一定枚数の画像を自動的に選択し、選択した一定枚数の画像を使用して、ページ数により指定されたフォトブックの各々のページのレイアウトを自動的に生成する自動レイアウト機能が実現されている。これにより、ユーザは、ユーザが所有する複数枚の画像から手間をかけずに簡単にフォトブックを作成することができる。 On the other hand, at present, for example, by specifying an image shooting period and the number of pages of a photo book, a predetermined number of images specified by the shooting period are automatically selected from a plurality of images and selected. An automatic layout function for automatically generating the layout of each page of the photo book specified by the number of pages using the fixed number of images is realized. Accordingly, the user can easily create a photo book from a plurality of images owned by the user without taking time and effort.
しかし、従来の自動レイアウト機能では、画像群のテーマを理解して、ユーザの嗜好に合致したフォトブックをユーザに提案することは難しいという問題があった。また、フォト商材としては、フォトブックの他に、シャッフルプリント（１枚の台紙に複数の画像をランダムな順番に並べて配置したもの）、ポストカード、通常の写真プリント等があるが、一定枚数の画像を使用して合成画像を生成する必要のあるフォト商材の場合には、いずれも同様の問題があった。 However, the conventional automatic layout function has a problem that it is difficult to understand the theme of the image group and propose a photo book that matches the user's preference to the user. In addition to photo books, photo merchandise includes shuffle prints (multiple images arranged in a random order on a single mount), postcards, and regular photo prints. In the case of photo merchandise that needs to generate a composite image using these images, there were similar problems.
ここで、本発明に関連性のある先行技術文献として、特許文献１がある。 Here, there is Patent Document 1 as a prior art document relevant to the present invention.
特許文献１には、ユーザの友人のための画像を配信する情報処理装置であって、ユーザのネットワーク上での活動に基づいて、ユーザと友人との関係を判定手段で判定し、判定手段での判定に応じて、友人のための画像を取得手段で取得し、取得手段で取得した画像をレイアウト手段でレイアウトし、レイアウト手段でレイアウトした画像を配信手段で友人に配信するものが記載されている。 Patent Document 1 discloses an information processing apparatus that distributes an image for a user's friend. Based on an activity on the user's network, the relationship between the user and the friend is determined by a determination unit. According to the determination, an image for a friend is acquired by the acquisition unit, the image acquired by the acquisition unit is laid out by the layout unit, and the image laid out by the layout unit is distributed to the friend by the distribution unit. Yes.
本発明の目的は、前記従来技術の問題点を解消し、画像群のテーマやユーザの嗜好に応じた最適な合成画像をユーザに提案することができる画像処理装置、画像処理方法、プログラムおよび記録媒体を提供することにある。 An object of the present invention is to solve the above-mentioned problems of the prior art, and to provide an image processing apparatus, an image processing method, a program, and a recording capable of proposing an optimal composite image according to the theme of the image group and the user's preference To provide a medium.
上記目的を達成するために、本発明は、ユーザが所有する複数枚の画像からなる画像群を取得する画像取得部と、
複数枚の画像の各々の画像解析情報を取得する画像解析情報取得部と、
画像解析情報に基づいて、あらかじめ定義されたテーマの中から画像群のテーマを判別するテーマ判別部と、
画像群のテーマに基づいて、あらかじめ定義された嗜好の中からユーザの嗜好を分析する嗜好分析部と、
複数枚の画像の中から、画像解析情報に基づいて、ユーザの嗜好に対応する一定枚数の画像を選択し、選択された一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像を生成する合成画像生成部と、
ユーザにより入力された指示を受け取る指示入力部と、
画像を表示する画像表示部と、
複数のパターンの合成画像の中から選択された１枚の合成画像を画像表示部に表示し、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像を、複数のパターンの合成画像の中から指示により指定された１枚の合成画像に切り替えて画像表示部に表示するように制御する表示制御部とを備えることを特徴とする画像処理装置を提供するものである。
In order to achieve the above object, the present invention provides an image acquisition unit that acquires an image group composed of a plurality of images owned by a user,
An image analysis information acquisition unit that acquires image analysis information of each of a plurality of images;
A theme discriminating unit for discriminating a theme of an image group from predefined themes based on image analysis information;
A preference analysis unit that analyzes user preferences from predefined preferences based on the theme of the image group;
Based on image analysis information, select a certain number of images corresponding to the user's preference from multiple images, and select from a predefined pattern using the selected number of images A composite image generation unit that generates a composite image of the plurality of patterns,
An instruction input unit for receiving an instruction input by the user;
An image display unit for displaying an image;
One composite image selected from the composite images of a plurality of patterns is displayed on the image display unit, and the composite image displayed on the image display unit is displayed based on an instruction input via the instruction input unit. Provided is an image processing apparatus comprising: a display control unit that controls to switch to a single composite image specified by an instruction from composite images of a plurality of patterns and display the composite image on an image display unit It is.
ここで、表示制御部は、画像表示部に表示された合成画像とともに、複数のパターンの合成画像の各々に対応する複数のボタンを画像表示部に表示し、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像を、複数のパターンの合成画像の中から指示により複数のボタンの中から指定された１つのボタンに対応する１枚の合成画像に切り替えて画像表示部に表示するように制御するものであることが好ましい。 Here, the display control unit displays a plurality of buttons corresponding to each of the composite images of the plurality of patterns on the image display unit together with the composite image displayed on the image display unit, and is input via the instruction input unit. Based on the instruction, the composite image displayed on the image display unit is switched from a composite image of a plurality of patterns to a single composite image corresponding to one button specified from the plurality of buttons by the instruction. It is preferable that the display is controlled to be displayed on the image display unit.
また、表示制御部は、複数のパターンの合成画像の優先度に応じて、複数のボタンの配列を変更して表示するものであることが好ましい。 Moreover, it is preferable that a display control part changes and displays the arrangement | sequence of a some button according to the priority of the synthesized image of a some pattern.
さらに、画像表示部に表示された合成画像のレイアウトの編集で使用される画像として、複数枚の画像の中から、画像表示部に表示された合成画像で使用されている画像を含む複数枚の候補画像を選択する候補画像選択部を備え、
表示制御部は、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像とともに、候補画像選択部により選択された複数枚の候補画像を画像表示部に表示するように制御するものであることが好ましい。
Further, as an image used for editing the layout of the composite image displayed on the image display unit, a plurality of images including an image used in the composite image displayed on the image display unit from among the plurality of images. A candidate image selection unit for selecting a candidate image;
The display control unit displays, on the image display unit, a plurality of candidate images selected by the candidate image selection unit along with the composite image displayed on the image display unit based on the instruction input via the instruction input unit. It is preferable to control it.
また、候補画像選択部は、レイアウトの編集で使用される画像として、画像表示部に表示された合成画像で使用されている画像に加えて、複数枚の画像の中から、画像表示部に表示された合成画像のパターンに合致する１枚以上の画像を含む複数枚の候補画像を選択するものであることが好ましい。 In addition to the image used in the composite image displayed on the image display unit, the candidate image selection unit displays the image used for editing the layout on the image display unit from a plurality of images. It is preferable to select a plurality of candidate images including one or more images that match the pattern of the synthesized image.
また、表示制御部は、画像表示部に表示された複数枚の候補画像のうち、画像表示部に表示された合成画像で使用されている画像の各々に対して、画像表示部に表示された合成画像で使用されている画像であることを表すマークを表示するように制御するものであることが好ましい。 The display control unit is displayed on the image display unit for each of the images used in the composite image displayed on the image display unit among the plurality of candidate images displayed on the image display unit. It is preferable to control to display a mark indicating that the image is used in the composite image.
さらに、画像解析情報に基づいて、複数枚の候補画像の各々の評価値を算出する画像評価部を備え、
画像評価部は、画像表示部に表示された合成画像のパターンに合致する画像内容の候補画像の評価値が、画像表示部に表示された合成画像のパターンに合致しない画像内容の候補画像の評価値よりも高くなるようにするものであり、
表示制御部は、画像表示部に表示された複数枚の候補画像の各々に対して、評価値を表すマークを表示するように制御するものであることが好ましい。
Furthermore, an image evaluation unit that calculates the evaluation value of each of the plurality of candidate images based on the image analysis information,
The image evaluation unit evaluates the candidate image of the image content whose evaluation value of the candidate image of the image content that matches the pattern of the composite image displayed on the image display unit does not match the pattern of the composite image displayed on the image display unit. To be higher than the value,
It is preferable that the display control unit controls to display a mark representing an evaluation value for each of a plurality of candidate images displayed on the image display unit.
さらに、レイアウトの編集で行われる複数種類の編集処理について、各々の種類の編集処理に含まれる複数の処理内容の中から、画像表示部に表示された合成画像のパターンに合致する処理内容を選択する処理内容選択部を備え、
表示制御部は、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像とともに、指示により指定された種類の編集処理の処理内容として、処理内容選択部により選択された処理内容を画像表示部に表示するように制御するものであることが好ましい。
Furthermore, for multiple types of editing processing performed in layout editing, select the processing content that matches the pattern of the composite image displayed on the image display unit from the multiple processing content included in each type of editing processing A processing content selection unit for
The display control unit is selected by the processing content selection unit as the processing content of the type of editing processing specified by the instruction along with the composite image displayed on the image display unit based on the instruction input via the instruction input unit. It is preferable that control is performed so that the processed content is displayed on the image display unit.
さらに、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像のレイアウトを編集するレイアウト編集部を備え、
レイアウト編集部は、画像表示部に表示された複数枚の候補画像、および、画像表示部に表示された編集処理の処理内容の少なくとも一方を使用して、画像表示部に表示された合成画像のレイアウトを編集するものであることが好ましい。
Furthermore, a layout editing unit that edits the layout of the composite image displayed on the image display unit based on an instruction input via the instruction input unit,
The layout editing unit uses at least one of the plurality of candidate images displayed on the image display unit and the processing content of the editing process displayed on the image display unit to display the composite image displayed on the image display unit. The layout is preferably edited.
また、テーマ判別部は、画像群から異なる２以上のテーマを判別するものであり、
合成画像生成部は、異なる２以上のテーマの各々に対応するパターンの合成画像を生成するものであることが好ましい。
The theme discriminating unit discriminates two or more different themes from the image group.
Preferably, the composite image generation unit generates a composite image of a pattern corresponding to each of two or more different themes.
また、合成画像生成部は、１つのテーマに対して、２以上のパターンの合成画像を生成するものであることが好ましい。 Moreover, it is preferable that a synthetic | combination image generation part produces | generates the synthetic image of two or more patterns with respect to one theme.
さらに、ユーザに関するユーザ情報を登録するユーザ情報登録部を備え、
テーマ判別部は、画像解析情報に加え、ユーザ情報に基づいて、画像群のテーマを判別するものであることが好ましい。
Furthermore, a user information registration unit for registering user information related to the user is provided,
The theme discrimination unit preferably discriminates the theme of the image group based on user information in addition to image analysis information.
また、合成画像生成部は、一定枚数の合成画像を生成するものであることが好ましい。 Moreover, it is preferable that the composite image generation unit generates a fixed number of composite images.
また、合成画像生成部は、合成画像の候補となる複数のパターンの候補合成画像を生成し、複数のパターンの候補合成画像の中から選択された一定枚数の候補合成画像を合成画像として出力するものであり、複数のパターンの候補合成画像のうちの任意の２つのパターンの候補合成画像に含まれた画像の一致度が閾値以上である場合に、一致度が閾値以上である２つのパターンの候補合成画像のうちの一方を合成画像として出力し、他方を合成画像として出力しないものであることが好ましい。 The composite image generation unit generates a candidate composite image of a plurality of patterns that are candidates for the composite image, and outputs a certain number of candidate composite images selected from the candidate composite images of the plurality of patterns as a composite image. If the coincidence degree of images included in the candidate composite image of any two patterns among the candidate composite images of a plurality of patterns is equal to or greater than the threshold value, It is preferable that one of the candidate composite images is output as a composite image and the other is not output as a composite image.
また、画像解析情報取得部は、複数枚の画像の各々の画像解析を行って画像解析情報を取得するものであることが好ましい。 The image analysis information acquisition unit preferably performs image analysis of each of a plurality of images to acquire image analysis information.
また、本発明は、画像取得部が、ユーザが所有する複数枚の画像からなる画像群を取得するステップと、
画像解析情報取得部が、複数枚の画像の各々の画像解析情報を取得するステップと、
テーマ判別部が、画像解析情報に基づいて、あらかじめ定義されたテーマの中から画像群のテーマを判別するステップと、
嗜好分析部が、画像群のテーマに基づいて、あらかじめ定義された嗜好の中からユーザの嗜好を分析するステップと、
合成画像生成部が、複数枚の画像の中から、画像解析情報に基づいて、ユーザの嗜好に対応する一定枚数の画像を選択し、選択された一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像を生成するステップと、
表示制御部が、複数のパターンの合成画像の中から選択された１枚の合成画像を画像表示部に表示し、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像を、複数のパターンの合成画像の中から指示により指定された１枚の合成画像に切り替えて画像表示部に表示するように制御するステップとを含むことを特徴とする画像処理方法を提供する。
In the present invention, the image acquisition unit acquires an image group consisting of a plurality of images owned by the user;
An image analysis information acquiring unit acquiring image analysis information of each of the plurality of images;
A step of determining a theme of a group of images from predefined themes based on image analysis information;
A step in which a preference analysis unit analyzes a user's preference from among predefined preferences based on a theme of an image group;
The composite image generation unit selects a predetermined number of images corresponding to the user's preference from a plurality of images based on the image analysis information, and uses the selected predetermined number of images to define the images in advance. Generating a composite image of a plurality of patterns selected from the selected patterns;
The display control unit displays one composite image selected from the composite images of a plurality of patterns on the image display unit, and is displayed on the image display unit based on the instruction input via the instruction input unit. An image processing method comprising: switching the synthesized image to a single synthesized image designated by an instruction from among a plurality of synthesized images of patterns and displaying the synthesized image on the image display unit. provide.
ここで、表示制御部は、画像表示部に表示された合成画像とともに、複数のパターンの合成画像の各々に対応する複数のボタンを画像表示部に表示し、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像を、複数のパターンの合成画像の中から指示により複数のボタンの中から指定された１つのボタンに対応する１枚の合成画像に切り替えて画像表示部に表示するように制御することが好ましい。 Here, the display control unit displays a plurality of buttons corresponding to each of the composite images of the plurality of patterns on the image display unit together with the composite image displayed on the image display unit, and is input via the instruction input unit. Based on the instruction, the composite image displayed on the image display unit is switched from a composite image of a plurality of patterns to a single composite image corresponding to one button specified from the plurality of buttons by the instruction. It is preferable to control to display on the image display unit.
さらに、候補画像選択部が、画像表示部に表示された合成画像のレイアウトの編集で使用される画像として、複数枚の画像の中から、画像表示部に表示された合成画像で使用されている画像を含む複数枚の候補画像を選択するステップと、
表示制御部が、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像とともに、候補画像選択部により選択された複数枚の候補画像を画像表示部に表示するように制御するステップとを含むことが好ましい。
Further, the candidate image selection unit is used in the composite image displayed on the image display unit from among a plurality of images as an image used for editing the layout of the composite image displayed on the image display unit. Selecting a plurality of candidate images including images;
The display control unit displays a plurality of candidate images selected by the candidate image selection unit on the image display unit together with the composite image displayed on the image display unit based on an instruction input via the instruction input unit. Preferably controlling step.
さらに、処理内容選択部が、レイアウトの編集で行われる複数種類の編集処理について、各々の種類の編集処理に含まれる複数の処理内容の中から、画像表示部に表示された合成画像のパターンに合致する処理内容を選択するステップと、
表示制御部が、指示入力部を介して入力された指示に基づいて、画像表示部に表示された合成画像とともに、指示により指定された種類の編集処理の処理内容として、処理内容選択部により選択された処理内容を画像表示部に表示するように制御するステップとを含むことが好ましい。
In addition, the processing content selection unit selects a composite image pattern displayed on the image display unit from among a plurality of processing contents included in each type of editing processing for a plurality of types of editing processing performed in layout editing. Selecting matching process details;
Based on the instruction input via the instruction input unit, the display control unit selects, with the composite image displayed on the image display unit, the processing content selection unit as the processing content of the type of editing processing specified by the instruction And controlling to display the processed content on the image display unit.
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。 The present invention also provides a program for causing a computer to execute each step of the image processing method described above.
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。 The present invention also provides a computer-readable recording medium on which a program for causing a computer to execute each step of the image processing method described above is recorded.
本発明によれば、ユーザが所有する複数枚の画像から、複数のパターンの合成画像を自動で生成し、その中の１枚の合成画像を初期画像として画像表示部に表示することにより、ユーザの嗜好に合致する合成画像を提案することができる。
また、ユーザは、複数のパターンの合成画像の中から、所望の１枚の合成画像を指定する指示を、指示入力部を介して順次入力することにより、複数のパターンの合成画像を順次切り替えて画像表示部に表示させて閲覧することができる。
According to the present invention, a composite image of a plurality of patterns is automatically generated from a plurality of images owned by the user, and one composite image among them is displayed as an initial image on the image display unit, thereby enabling the user to It is possible to propose a composite image that matches the user's preference.
In addition, the user can sequentially switch the composite images of the plurality of patterns by sequentially inputting an instruction for designating a desired composite image from the composite images of the plurality of patterns via the instruction input unit. The image can be viewed on the image display unit.
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置、画像処理方法、プログラムおよび記録媒体を詳細に説明する。 Hereinafter, an image processing apparatus, an image processing method, a program, and a recording medium of the present invention will be described in detail based on preferred embodiments shown in the accompanying drawings.
図１は、本発明の画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、ユーザが所有する複数枚の画像からなる画像群から、複数のパターンの合成画像を生成し、生成された複数のパターンの合成画像を表示してユーザに提案するものである。
画像処理装置１０は、画像取得部１２と、画像解析部１４と、テーマ判別部１６と、嗜好分析部１８と、合成画像生成部２０と、指示入力部２２と、画像表示部２４と、表示制御部２６と、候補画像選択部２８と、画像評価部３０と、処理内容選択部３２と、レイアウト編集部３４と、ユーザ情報登録部３６とを備えている。
FIG. 1 is a block diagram of an embodiment showing a configuration of an image processing apparatus of the present invention. The image processing apparatus 10 shown in the figure generates a composite image of a plurality of patterns from an image group consisting of a plurality of images owned by the user, displays the generated composite images of the plurality of patterns, and proposes to the user To do.
The image processing apparatus 10 includes an image acquisition unit 12, an image analysis unit 14, a theme determination unit 16, a preference analysis unit 18, a composite image generation unit 20, an instruction input unit 22, an image display unit 24, and a display. A control unit 26, a candidate image selection unit 28, an image evaluation unit 30, a processing content selection unit 32, a layout editing unit 34, and a user information registration unit 36 are provided.
画像取得部１２は、ユーザが所有する複数枚の画像からなる画像群を取得するものである。
画像処理装置１０は、画像取得部１２により取得された画像群を記憶（保存）する画像記憶部を備えていてもよい。
The image acquisition unit 12 acquires an image group composed of a plurality of images owned by the user.
The image processing apparatus 10 may include an image storage unit that stores (saves) the image group acquired by the image acquisition unit 12.
画像解析部１４は、画像取得部１２により取得された複数枚の画像の各々の画像解析を行って画像解析情報を出力するものである。
画像解析は、画像内容（画像特徴）を解析する処理であり、顔検出、顔認識、ボケブレ、明るさ、類似解析、撮影時間ないしＧＰＳ情報（位置情報）を利用した画像のグルーピング、画像認識（被写体判別）、シーン認識（夜景、海、紅葉、砂浜、空、…）、オブジェクト認識（金閣寺、自由の女神、料理、花、ケーキ、…）等を利用することができる。また、画像解析には、Ｅｘｉｆなどの画像の付帯情報（タグ情報）を解析する処理も含まれる。画像解析部１４は、画像解析として、画像内容および付帯情報の解析のうちの少なくとも一方を行うことができる。複数枚の画像の中で付帯情報を持たない画像の場合、画像解析部１４は、画像内容の画像解析のみを行い、付帯情報の画像解析を行わない（行うことができない）。
なお、画像解析方法は何ら限定されず、従来公知の画像解析方法を含む、各種の画像解析方法を利用することができる。
The image analysis unit 14 performs image analysis of each of a plurality of images acquired by the image acquisition unit 12 and outputs image analysis information.
Image analysis is a process of analyzing image contents (image features). Face detection, face recognition, blurring, brightness, similarity analysis, image grouping using image capturing time or GPS information (position information), image recognition ( Subject recognition), scene recognition (night view, sea, autumn leaves, sandy beach, sky,...), Object recognition (Kinkakuji, Statue of Liberty, cooking, flowers, cakes,...), Etc. can be used. Further, the image analysis includes processing for analyzing incidental information (tag information) of an image such as Exif. The image analysis unit 14 can perform at least one of analysis of image content and incidental information as image analysis. In the case of an image having no supplementary information among a plurality of images, the image analysis unit 14 performs only image analysis of the image content, and does not perform image analysis of the supplementary information (cannot be performed).
The image analysis method is not limited at all, and various image analysis methods including a conventionally known image analysis method can be used.
上記のように、画像処理装置１０の内部で複数枚の画像の各々の画像解析を行って画像解析情報を出力する代わりに、画像解析部１４を設けることなく、画像解析情報取得部を設け、画像解析情報取得部が、画像処理装置１０の外部から入力される、複数枚の画像の各々の画像解析情報を取得する構成とすることができる。この場合、画像解析情報は、各々対応する画像に関連付けされていればよく、各々対応する画像に付帯させてもよいし、あるいは、各々対応する画像と独立させて持っていてもよい。
あるいは、画像解析情報取得部が、画像解析部１４と同様に、複数枚の画像の各々について、画像解析を行って複数枚の画像の各々の画像解析情報を出力する構成とすることができる。
As described above, instead of performing image analysis of each of a plurality of images and outputting image analysis information inside the image processing apparatus 10, an image analysis information acquisition unit is provided without providing the image analysis unit 14, The image analysis information acquisition unit may be configured to acquire image analysis information of each of a plurality of images input from the outside of the image processing apparatus 10. In this case, the image analysis information only needs to be associated with each corresponding image, and may be attached to each corresponding image, or may be held independently of each corresponding image.
Alternatively, similarly to the image analysis unit 14, the image analysis information acquisition unit can perform image analysis on each of the plurality of images and output the image analysis information of each of the plurality of images.
テーマ判別部１６は、画像解析部１４から出力された複数枚の画像の各々の画像解析情報に基づいて、あらかじめ定義されたテーマの中から画像群のテーマを判別するものである。
画像群のテーマとは、ユーザが画像群を閲覧したときに感じる雰囲気や印象を表すキーワードであり、子供、旅行、結婚式、誕生日、運動会等があらかじめ定義されている。
The theme discriminating unit 16 discriminates the theme of the image group from the predefined themes based on the image analysis information of each of the plurality of images output from the image analyzing unit 14.
The theme of the image group is a keyword representing the atmosphere and impression that the user feels when browsing the image group, and children, travel, wedding, birthday, athletic meet, etc. are defined in advance.
例えば、表１に示すように、画像群において、「子供」の撮影比率が高い場合、画像群のテーマは子供であると判別することができる。
画像群の撮影期間が１日〜数日で、「風景」「料理」等の画像が混在し、かつ、撮影場所が点在（ＧＰＳ情報を利用）している場合、画像群のテーマは旅行であると判別することができる。
画像群の撮影期間が１〜２時間で、「指輪」、「ケーキ」等の画像が混在し、かつ、撮影場所が固定（ＧＰＳ情報を利用）の場合、画像群のテーマは結婚式であると判別することができる。同様の画像特徴で、「子供」、「ろうそく」等の画像が混在している場合、画像群のテーマは誕生日であると判別することができ、「子供」、「運動場」等の画像が混在している場合、画像群のテーマは運動会であると判別することができる。
上記以外の場合も同様にして画像群のテーマを判別することができる。
なお、画像群のテーマの判別方法は何ら限定されず、従来公知の判別方法を含む、各種の判別方法を利用することができる。
For example, as shown in Table 1, when the shooting ratio of “children” is high in the image group, it can be determined that the theme of the image group is a child.
When the image period is one to several days, images such as “landscape” and “cooking” are mixed, and the shooting locations are scattered (using GPS information), the theme of the image group is travel Can be determined.
When the image group has a shooting period of 1 to 2 hours, images such as “rings” and “cake” are mixed, and the shooting location is fixed (using GPS information), the theme of the image group is wedding Can be determined. When images with the same image characteristics, such as “children” and “candles”, are mixed, it can be determined that the theme of the image group is birthday, and images such as “children” and “playground” When they are mixed, it can be determined that the theme of the image group is athletic meet.
In other cases, the theme of the image group can be similarly determined.
Note that the method for determining the theme of the image group is not limited at all, and various determination methods including a conventionally known determination method can be used.
嗜好分析部１８は、テーマ判別部１６により判別された画像群のテーマに基づいて、あらかじめ定義された嗜好の中から画像群の所有者であるユーザの嗜好を分析するものである。
嗜好として、子供画像優先、父母画像優先、子供画像＋父母画像優先、人物画像優先、風景画像優先、人物画像＋風景画像優先、夫婦の２ショット画像優先、登場人物優先、等があらかじめ定義されている。
The preference analysis unit 18 analyzes the preference of the user who is the owner of the image group from among the predefined preferences based on the theme of the image group determined by the theme determination unit 16.
As preferences, child image priority, parent image priority, child image + parent image priority, person image priority, landscape image priority, person image + landscape image priority, couple two-shot image priority, character priority, etc. are predefined. Yes.
前述の表１に示すように、嗜好分析部１８は、画像群のテーマが子供である場合、ユーザの嗜好として、子供が撮影された画像（子供画像）を最優先、子供の父母が撮影された画像（父母画像）を優先と分析とする。一方、非人物画像の優先度は低いと分析する。
画像群のテーマの旅行の場合、人物が撮影された画像（人物画像）および風景画撮影された画像（風景画像）が重要（優先度が高い）と分析する。
画像群のテーマが結婚式の場合、「夫婦」の二人が撮影された画像（２ショット画像）を優先と分析する。
画像群のテーマが誕生日、運動会、…、等の場合も同様にしてユーザの嗜好を分析することができる。
なお、ユーザの嗜好を分析する方法は何ら限定されず、従来公知の分析方法を含む、各種の分析方法を利用することができる。
As shown in Table 1 above, when the theme of the image group is a child, the preference analysis unit 18 gives priority to an image (child image) in which a child is photographed and a child's parent is photographed as a user preference. Images (parent images) are given priority and analysis. On the other hand, it is analyzed that the priority of the non-person image is low.
In the case of a travel of an image group theme, an image (person image) taken with a person and an image (landscape image) taken with a landscape image are analyzed as important (high priority).
In the case where the theme of the image group is wedding, an image (two-shot image) taken by two people of “couple” is analyzed as priority.
Similarly, when the theme of the image group is birthday, athletic meet,..., Etc., the user's preference can be analyzed.
In addition, the method of analyzing the user's preference is not limited at all, and various analysis methods including a conventionally known analysis method can be used.
合成画像生成部２０は、複数枚の画像の中から、画像解析情報に基づいて、嗜好分析部１８により分析されたユーザの嗜好に対応する一定枚数の画像を選択し、選択されたユーザの嗜好に対応する一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像を生成するものである。
例えば、ユーザの嗜好が子供の場合、合成画像生成部２０は、複数枚の画像の中から、画像解析情報に基づいて、子供が撮影された一定枚数の画像を選択し、子供が撮影された一定枚数の画像を使用して複数のパターンの合成画像を生成する。
パターンとして、人物認識結果に基づいて、複数枚の画像の中で登場回数が多い人物の人物画像優先のパターン（例えば、仲のよい友達の画像を優先して選択する）、人物画像＋風景画像優先のパターン（人物画像と風景画像を一定の割合で混在させて選択する）、登場人物優先のパターン（できるだけ多くの人物が採用されるように、各撮影日から登場人物が多い画像を優先して選択する）の他、子供画像優先のパターン、父母画像優先のパターン、子供画像＋父母画像優先のパターン、風景画像優先のパターン、夫婦の２ショット画像優先のパターン、等があらかじめ定義されている。
The composite image generation unit 20 selects a predetermined number of images corresponding to the user's preference analyzed by the preference analysis unit 18 based on the image analysis information from the plurality of images, and selects the selected user's preference. Is used to generate a composite image of a plurality of patterns selected from predefined patterns.
For example, when the preference of the user is a child, the composite image generation unit 20 selects a certain number of images in which the child is photographed from a plurality of images based on the image analysis information, and the child is photographed. A composite image of a plurality of patterns is generated using a certain number of images.
As a pattern, based on the person recognition result, a person image priority pattern of a person who appears frequently among a plurality of images (for example, select a friend image with priority), person image + landscape image priority Pattern (select a mix of portrait and landscape images at a certain ratio), character-priority pattern (priority is given to images with many characters from each shooting date so that as many people as possible are adopted) In addition, a child image priority pattern, a parent image priority pattern, a child image + parent image priority pattern, a landscape image priority pattern, a couple two-shot image priority pattern, and the like are defined in advance.
指示入力部２２は、ユーザにより入力された指示を受け取るものであり、マウス、タッチパネル、キーボード等を例示することができる。
指示入力部２２を介して入力される指示には、合成画像生成部２０により生成された複数のパターンの合成画像の中から１枚の合成画像を指定する指示、後述する候補画像選択部２８により選択された複数枚の候補画像を画像表示部２４に表示する指示、後述するレイアウト編集部３４で行われる編集処理の種類を指定する指示等が含まれる。
The instruction input unit 22 receives an instruction input by the user, and can be exemplified by a mouse, a touch panel, a keyboard, and the like.
The instruction input via the instruction input unit 22 includes an instruction for designating one composite image from the composite images of a plurality of patterns generated by the composite image generation unit 20, and a candidate image selection unit 28 described later. An instruction to display a plurality of selected candidate images on the image display unit 24, an instruction to specify the type of editing processing performed in the layout editing unit 34 described later, and the like are included.
画像表示部２４は、各種の画像を表示するものであり、液晶ディスプレイ等を例示することができる。
画像表示部２４は、合成画像の表示画面、合成画像のレイアウトの編集で使用される画像である候補画像の表示画面、合成画像に対する編集処理の処理内容を表示する表示画面等を表示することができる。
The image display unit 24 displays various images, and examples thereof include a liquid crystal display.
The image display unit 24 may display a composite image display screen, a display screen of candidate images that are images used for editing the layout of the composite image, a display screen that displays the processing content of the edit processing for the composite image, and the like. it can.
表示制御部２６は、複数のパターンの合成画像の中から選択された１枚の合成画像を初期画像として画像表示部２４に表示し、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像を、複数のパターンの合成画像の中から指示により指定された１枚の合成画像に切り替えて画像表示部２４に表示するように制御するものである。
また、表示制御部２６は、前述の候補画像の表示画面、編集処理の処理内容を表示する表示画面等を画像表示部２４に表示するように制御する。
The display control unit 26 displays one composite image selected from the composite images of a plurality of patterns as an initial image on the image display unit 24, and based on an instruction input via the instruction input unit 22, Control is performed so that the composite image displayed on the image display unit 24 is switched to a single composite image designated by an instruction from composite images of a plurality of patterns and displayed on the image display unit 24.
Further, the display control unit 26 controls the image display unit 24 to display the above-described candidate image display screen, a display screen for displaying the processing content of the editing process, and the like.
候補画像選択部２８は、画像表示部２４に表示された合成画像のレイアウトの編集で使用される画像として、複数枚の画像の中から、画像表示部２４に表示された合成画像で使用されている画像を含む複数枚の候補画像を選択するものである。
候補画像は、画像表示部２４に表示された合成画像のレイアウトを編集するために、合成画像で使用されている画像と入れ替えて使用することができる画像である。
候補画像には、画像表示部２４に表示された合成画像で使用されている画像の他、複数枚の画像の中から選択された１枚以上の画像を含めることができる。この場合、合成画像で使用されている画像の傾向と合致するように、例えば、画像表示部２４に表示された合成画像のパターンに合致する１枚以上の画像を含めることが望ましい。
The candidate image selection unit 28 is used as a composite image displayed on the image display unit 24 from among a plurality of images as an image used for editing the layout of the composite image displayed on the image display unit 24. A plurality of candidate images including the existing image are selected.
The candidate image is an image that can be used by replacing the image used in the composite image in order to edit the layout of the composite image displayed on the image display unit 24.
Candidate images can include one or more images selected from a plurality of images, in addition to the images used in the composite image displayed on the image display unit 24. In this case, for example, it is desirable to include one or more images that match the pattern of the composite image displayed on the image display unit 24 so as to match the tendency of the image used in the composite image.
画像評価部３０は、画像解析情報に基づいて、候補画像選択部２８により選択された複数枚の候補画像の各々の評価値を算出するものである。
画像評価部３０は、例えば、画像表示部２４に表示された合成画像のパターンに合致する画像内容の候補画像の評価値が、画像表示部２４に表示された合成画像のパターンに合致しない画像内容の候補画像の評価値よりも高くなるようにする。例えば、合成画像が人物画像優先のパターンである場合には、人物画像の評価値がそれ以外の画像の評価値よりも高くなるようにする。
評価値は、例えば、複数の解析方法に対応する画像解析情報のうちの１つ、もしくは、２以上の組み合わせによる総合評価値を利用することができる。また、総合評価値を算出する場合、２以上の解析方法に対応する画像解析情報について重み付けを行ってもよい。
なお、候補画像の評価値の算出方法は何ら限定されず、従来公知の算出方法を含む、各種の算出方法を利用することができる。
The image evaluation unit 30 calculates each evaluation value of a plurality of candidate images selected by the candidate image selection unit 28 based on the image analysis information.
For example, the image evaluation unit 30 is configured such that the evaluation value of the candidate image whose image content matches the pattern of the composite image displayed on the image display unit 24 does not match the pattern of the composite image displayed on the image display unit 24. Higher than the evaluation value of the candidate image. For example, when the composite image is a human image priority pattern, the evaluation value of the human image is set to be higher than the evaluation values of the other images.
As the evaluation value, for example, one of image analysis information corresponding to a plurality of analysis methods or a comprehensive evaluation value by a combination of two or more can be used. When calculating the comprehensive evaluation value, the image analysis information corresponding to two or more analysis methods may be weighted.
The method for calculating the evaluation value of the candidate image is not limited at all, and various calculation methods including a conventionally known calculation method can be used.
処理内容選択部３２は、レイアウトの編集で行われる複数種類の編集処理について、各々の種類の編集処理に含まれる複数の処理内容の中から、画像表示部２４に表示された合成画像のパターンに合致する処理内容を選択するものである。
編集処理には、合成画像に対するクリップアートの挿入、合成画像で使用されているテンプレートの変更、合成画像で使用されている画像に対する各種の画像補正処理（明るさ、色合い等の補正）が含まれる。
また、編集処理に含まれる処理内容は、各々の編集処理において行うことが可能な処理の内容である。クリップアートの挿入の場合には、挿入することが可能なクリップアートの種類、テンプレートの変更の場合には、変更することが可能なテンプレートの種類、画像補正処理の場合には、補正することができる画像補正処理の種類である。
例えば、合成画像のパターンが、子供画像優先の場合には、各種のクリップアートの中から、子供に合致するクリップアートが選択される。
The processing content selection unit 32 selects a composite image pattern displayed on the image display unit 24 from among a plurality of processing contents included in each type of editing processing for a plurality of types of editing processing performed in layout editing. The matching processing content is selected.
The editing process includes insertion of clip art into the composite image, change of the template used in the composite image, and various image correction processes (correction of brightness, hue, etc.) for the image used in the composite image. .
Further, the processing content included in the editing processing is processing content that can be performed in each editing processing. In the case of clip art insertion, the type of clip art that can be inserted, in the case of template change, the type of template that can be changed, and in the case of image correction processing, correction can be made. This is the type of image correction processing that can be performed.
For example, when the pattern of the composite image has priority on the child image, a clip art that matches the child is selected from various clip arts.
レイアウト編集部３４は、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像のレイアウトを編集するものである。
レイアウト編集部３４は、画像表示部２４に表示された複数枚の候補画像、および、画像表示部２４に表示された編集処理の処理内容の少なくとも一方を使用して、画像表示部２４に表示された合成画像のレイアウトを編集することができる。
つまり、レイアウト編集部３４は、例えば、合成画像で使用されている画像と候補画像とを入れ替えたり、合成画像に対して各種の編集処理を行って、クリップアートを挿入したり、テンプレートを変更したり、各種の画像処理を施したりすることができる。
The layout editing unit 34 edits the layout of the composite image displayed on the image display unit 24 based on the instruction input via the instruction input unit 22.
The layout editing unit 34 is displayed on the image display unit 24 using at least one of the plurality of candidate images displayed on the image display unit 24 and the processing content of the editing process displayed on the image display unit 24. You can edit the layout of the combined image.
That is, for example, the layout editing unit 34 replaces the image used in the composite image with the candidate image, performs various editing processes on the composite image, inserts clip art, or changes the template. Or various types of image processing.
ユーザ情報登録部３６は、ユーザに関するユーザ情報を登録するものである。
ユーザ情報には、例えば、ユーザの年齢、性別、住所、国籍等が含まれる。
The user information registration unit 36 registers user information related to the user.
The user information includes, for example, the user's age, sex, address, nationality, and the like.
次に、図２〜図４に示すフローチャートを参照して、画像処理装置１０の動作を説明する。 Next, the operation of the image processing apparatus 10 will be described with reference to the flowcharts shown in FIGS.
画像処理装置１０では、まず、画像取得部１２により、ユーザが所有する複数枚の画像からなる画像群が取得される（図２のステップＳ１）。 In the image processing apparatus 10, first, the image acquisition unit 12 acquires an image group composed of a plurality of images owned by the user (step S1 in FIG. 2).
続いて、画像解析部１４により、画像取得部１２により取得された複数枚の画像の各々の画像解析が行われて画像解析情報が出力される（図２のステップＳ２）。 Subsequently, the image analysis unit 14 performs image analysis of each of the plurality of images acquired by the image acquisition unit 12 and outputs image analysis information (step S2 in FIG. 2).
続いて、テーマ判別部１６により、複数枚の画像の各々の画像解析情報に基づいて、あらかじめ定義されたテーマの中から画像群のテーマが判別される（図２のステップＳ３）。 Subsequently, the theme discriminating unit 16 discriminates the theme of the image group from the predefined themes based on the image analysis information of each of the plurality of images (step S3 in FIG. 2).
続いて、嗜好分析部１８により、テーマ判別部１６により判別された画像群のテーマに基づいて、あらかじめ定義された嗜好の中から画像群の所有者であるユーザの嗜好が分析される（図２のステップＳ４）。 Subsequently, the preference analysis unit 18 analyzes the preference of the user who is the owner of the image group from among the predefined preferences based on the theme of the image group determined by the theme determination unit 16 (FIG. 2). Step S4).
続いて、合成画像生成部２０により、複数枚の画像の中から、画像解析情報に基づいて、嗜好分析部１８により分析されたユーザの嗜好に対応する一定枚数の画像が選択され、選択されたユーザの嗜好に対応する一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像が生成される（図２のステップＳ５）。
本実施形態では、子供画像優先のパターン、子供画像＋父母画像優先のパターン、人物画像＋風景画像優先のパターン、登場人物優先のパターンからなる４つのパターンの合成画像が生成される。
Subsequently, the composite image generation unit 20 selects and selects a predetermined number of images corresponding to the user's preference analyzed by the preference analysis unit 18 from the plurality of images based on the image analysis information. A composite image of a plurality of patterns selected from the predefined patterns is generated using a certain number of images corresponding to the user's preference (step S5 in FIG. 2).
In the present embodiment, a composite image of four patterns including a child image priority pattern, a child image + parent image priority pattern, a person image + landscape image priority pattern, and a character priority pattern is generated.
ここで、テーマ判別部１６は、画像群から異なる２以上のテーマを判別してもよい。
この場合、合成画像生成部２０は、異なる２以上のテーマの各々に対応するパターンの合成画像を生成することができる。また、合成画像生成部２０は、１つのテーマに対して、２以上のパターンの合成画像を生成してもよい。
Here, the theme determination unit 16 may determine two or more different themes from the image group.
In this case, the composite image generation unit 20 can generate a composite image of a pattern corresponding to each of two or more different themes. The composite image generation unit 20 may generate a composite image of two or more patterns for one theme.
例えば、テーマ判別部１６により、画像群のテーマが、「子供」と「旅行」の２つであると判別されたとする。この場合、嗜好分析部１８により、例えば、ユーザの嗜好が、「子供」のテーマに対して、子供画像、および、子供画像＋父母画像が優先であると分析される。また、「旅行」のテーマに対して、人物画像＋風景画像が優先であると分析される。これに応じて、合成画像生成部２０では、子供画像優先のパターン、子供画像＋父母画像優先のパターン、人物画像＋風景画像優先のパターンからなる３つのパターンの合成画像が生成される。 For example, it is assumed that the theme discriminating unit 16 discriminates that there are two themes of the image group, “child” and “travel”. In this case, for example, the preference analysis unit 18 analyzes that the user's preference is given priority to the child image and the child image + parent image with respect to the theme of “child”. In addition, it is analyzed that a person image + landscape image has priority over the theme of “travel”. In response to this, the composite image generation unit 20 generates a composite image of three patterns including a child image priority pattern, a child image + parent image priority pattern, and a person image + landscape image priority pattern.
また、テーマ判別部１６は、画像解析情報に加え、ユーザ情報に基づいて、画像群のテーマを判別してもよい。
例えば、ユーザ情報として、複数枚の画像の各々のＧＰＳ情報を利用することにより、複数枚の画像の中に、自宅から離れた場所で撮影された画像が多い場合、テーマ判別部１６は、画像群のテーマが「旅行」であると判別することができる。
The theme determination unit 16 may determine the theme of the image group based on user information in addition to the image analysis information.
For example, when the GPS information of each of a plurality of images is used as user information, and there are many images taken at a location away from home in the plurality of images, the theme determination unit 16 selects the image It can be determined that the theme of the group is “travel”.
ここで、画像表示部２４の表示領域には制限がある。そのため、合成画像の枚数が多すぎると、ユーザが、複数のパターンの合成画像の中から１枚の合成画像を指定する場合に迷う原因となる。従って、合成画像生成部２０は、生成する合成画像の枚数の上限を制限し、一定枚数の合成画像を生成することが望ましい。 Here, the display area of the image display unit 24 is limited. For this reason, if the number of composite images is too large, the user may be at a loss when specifying one composite image from composite images of a plurality of patterns. Therefore, it is desirable that the composite image generation unit 20 generates a fixed number of composite images by limiting the upper limit of the number of composite images to be generated.
また、複数のパターンの合成画像の差異が小さいと、同様にユーザが混乱する原因となる。従って、差異が大きい合成画像を生成することが望ましい。例えば、子供画像優先のパターン、子供画像＋父母画像優先のパターンの場合、子供と父母が一緒に撮影された画像が多くなるほど、両者の差異が小さくなる。 In addition, if the difference between the composite images of a plurality of patterns is small, the user is similarly confused. Therefore, it is desirable to generate a composite image with a large difference. For example, in the case of a child image priority pattern and a child image + parent image priority pattern, the difference between the two becomes smaller as the number of images taken together of the child and the parent increases.
ここで、複数のパターンの合成画像の差異とは、複数のパターンの合成画像の各々に含まれる画像の一致度により表すことができる。例えば、２つのパターンの合成画像の各々で使用されている１０枚の画像のうち、８枚の画像が同じであれば、両者の差異は小さいと考えられる。逆に、１０枚の画像のうち、２枚の画像だけが同じであれば、両者の差異は大きいと考えられる。 Here, the difference between the composite images of a plurality of patterns can be represented by the degree of coincidence of images included in each of the composite images of the plurality of patterns. For example, if 8 images are the same among 10 images used in each of the two patterns of combined images, the difference between the two images is considered to be small. Conversely, if only two images are the same among the ten images, the difference between the two images is considered large.
従って、合成画像生成部２０は、合成画像の候補となる複数のパターンの候補合成画像を生成し、複数のパターンの候補合成画像の中から選択された一定枚数の候補合成画像を合成画像として出力するものとする。そして、複数のパターンの候補合成画像のうちの任意の２つのパターンの候補合成画像に含まれた画像の一致度が閾値以上である場合に、一致度が閾値以上である２つのパターンの候補合成画像のうちの一方を合成画像として出力し、他方を合成画像として出力しないようにすることが望ましい。
例えば、子供画像優先のパターンの候補合成画像と、人物画像＋風景画像優先のパターンの候補合成画像は一致度が小さいので共に合成画像として出力する。
Therefore, the composite image generation unit 20 generates a candidate composite image of a plurality of patterns that are candidates for the composite image, and outputs a certain number of candidate composite images selected from the candidate composite images of the plurality of patterns as a composite image. It shall be. Then, when the degree of coincidence of images included in the candidate composite image of any two patterns among the candidate composite images of a plurality of patterns is equal to or greater than the threshold, candidate combination of the two patterns whose degree of coincidence is equal to or greater than the threshold It is desirable to output one of the images as a composite image and not output the other as a composite image.
For example, since the candidate composite image of the child image priority pattern and the candidate composite image of the person image + landscape image priority pattern have a low degree of coincidence, both are output as a composite image.
続いて、表示制御部２６により、図５に示すように、複数のパターンの合成画像の中から選択された１枚の合成画像、本実施形態では、子供画像優先のパターンの合成画像を初期画像として画像表示部２４に表示するように制御される（図２のステップＳ６）。 Subsequently, as shown in FIG. 5, the display control unit 26 selects one composite image selected from a plurality of pattern composite images, in this embodiment, a composite image of a child image priority pattern as an initial image. To be displayed on the image display unit 24 (step S6 in FIG. 2).
このように、画像処理装置１０は、ユーザが所有する複数枚の画像から、複数のパターンの合成画像を自動で生成し、その中の１枚の合成画像を初期画像として画像表示部２４に表示することにより、ユーザの嗜好に合致する合成画像を提案することができる。一方、ユーザは、画像処理装置１０により自動生成され、画像表示部２４に表示されることによって提案された合成画像を閲覧することができる。 In this way, the image processing apparatus 10 automatically generates a composite image of a plurality of patterns from a plurality of images owned by the user, and displays one of the composite images as an initial image on the image display unit 24. By doing so, it is possible to propose a composite image that matches the user's preference. On the other hand, the user can view the proposed composite image that is automatically generated by the image processing apparatus 10 and displayed on the image display unit 24.
図５は、画像表示部に表示された合成画像の表示画面を表す一例の概念図である。同図において、合成画像は、表示画面の中央部に表示されている。
合成画像の表示画面の左上部には、候補画像の表示画面を表示するための「ひらく」ボタンが表示され、左下部には、合成画像を切り替えるための複数の切り替えボタンが表示されている。
複数の切り替えボタンは、複数のパターンの合成画像の各々に対応するものである。本実施形態の場合、子供画像優先のパターン、子供画像＋父母画像優先のパターン、人物画像＋風景画像優先のパターン、登場人物優先のパターンの各々に対応する４つの切り替えボタンが表示されている。なお、複数のパターンの合成画像の優先度に応じて、複数の切り替えボタンの配列を変更して表示してもよい。例えば、優先度が最も高い合成画像を一番上に表示し、優先度が低くなるに従って順次下側に並べて表示することができる。
表示画面の右部には、編集処理の処理内容を表示する表示画面を表示するための複数の編集ボタンが表示されている。本実施形態の場合、クリップアートの挿入、テンプレートの変更、画像補正処理の各々に対応する３つの編集ボタンが表示されている。
FIG. 5 is a conceptual diagram illustrating an example of a composite image display screen displayed on the image display unit. In the figure, the composite image is displayed at the center of the display screen.
A “open” button for displaying a candidate image display screen is displayed at the upper left of the composite image display screen, and a plurality of switching buttons for switching the composite image are displayed at the lower left.
The plurality of switching buttons correspond to each of a plurality of pattern composite images. In the present embodiment, four switching buttons corresponding to a child image priority pattern, a child image + parent image priority pattern, a person image + landscape image priority pattern, and a character priority pattern are displayed. Note that the arrangement of the plurality of switching buttons may be changed and displayed according to the priority of the composite image of the plurality of patterns. For example, the composite image with the highest priority can be displayed at the top, and can be displayed side by side sequentially as the priority decreases.
On the right side of the display screen, a plurality of editing buttons for displaying a display screen for displaying the processing contents of the editing process are displayed. In the present embodiment, three edit buttons corresponding to clip art insertion, template change, and image correction processing are displayed.
続いて、例えば、ユーザにより、複数のパターンの合成画像の中から１枚の合成画像を指定する指示が指示入力部２２を介して入力される（図２のステップＳ７）。例えば、図５の左下部に示す４つの切り替えボタンのうちの１つの切り替えボタンが押下される（指示入力部２２がマウスの場合には切り替えボタンがクリックされ、指示入力部２２がタッチパネルの場合には切り替えボタンがタッチされる）。 Subsequently, for example, the user inputs an instruction for designating one composite image from the composite images of a plurality of patterns via the instruction input unit 22 (step S7 in FIG. 2). For example, one of the four switching buttons shown in the lower left part of FIG. 5 is pressed (when the instruction input unit 22 is a mouse, the switching button is clicked, and when the instruction input unit 22 is a touch panel). Is touched by the switch button).
続いて、表示制御部２６により、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像を、複数のパターンの合成画像の中から指示により指定された１枚の合成画像、本実施形態の場合、指示により複数の切り替えボタンの中から指定された１つの切り替えボタンに対応する１枚の合成画像に切り替えて画像表示部２４に表示するように制御される（図２のステップＳ８）。 Subsequently, based on the instruction input via the instruction input unit 22 by the display control unit 26, the composite image displayed on the image display unit 24 is designated by an instruction from the composite images of a plurality of patterns. One composite image, in the case of the present embodiment, control is performed so as to switch to one composite image corresponding to one switch button designated from among a plurality of switch buttons by an instruction and display it on the image display unit 24. (Step S8 in FIG. 2).
つまり、ユーザは、複数のパターンの合成画像の中から、所望の１枚の合成画像を指定する指示を、指示入力部２２を介して順次入力することにより、複数のパターンの合成画像を順次切り替えて画像表示部２４に表示させて閲覧することができる。 In other words, the user sequentially switches the composite images of a plurality of patterns by sequentially inputting an instruction for designating a desired composite image from the composite images of a plurality of patterns via the instruction input unit 22. Can be displayed on the image display unit 24 for browsing.
ここで、例えば、ユーザにより、候補画像の表示画面を表示する指示が指示入力部２２を介して入力される（図３のステップＳ９）。例えば、図５の左上部に示す「ひらく」ボタンが押下される。 Here, for example, an instruction to display a candidate image display screen is input by the user via the instruction input unit 22 (step S9 in FIG. 3). For example, the “open” button shown in the upper left part of FIG. 5 is pressed.
この場合、候補画像選択部２８により、画像表示部２４に表示された合成画像のレイアウトの編集で使用される画像として、複数枚の画像の中から、画像表示部２４に表示された合成画像で使用されている画像を含む複数枚の候補画像が選択される（図３のステップＳ１０）。 In this case, the candidate image selection unit 28 uses a composite image displayed on the image display unit 24 from among a plurality of images as an image used for editing the layout of the composite image displayed on the image display unit 24. A plurality of candidate images including the image being used are selected (step S10 in FIG. 3).
また、画像評価部３０により、画像解析情報に基づいて、候補画像選択部２８により選択された複数枚の候補画像の各々の評価値が算出される（図３のステップＳ１１）。 Further, the image evaluation unit 30 calculates the evaluation value of each of the plurality of candidate images selected by the candidate image selection unit 28 based on the image analysis information (step S11 in FIG. 3).
続いて、表示制御部２６により、図６に示すように、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像とともに、候補画像選択部２８により選択された複数枚の候補画像を画像表示部２４に表示するように制御される（図３のステップＳ１２）。 Subsequently, as shown in FIG. 6, the display control unit 26 selects the candidate image selection unit 28 together with the composite image displayed on the image display unit 24 based on the instruction input via the instruction input unit 22. Control is performed to display the plurality of candidate images thus displayed on the image display unit 24 (step S12 in FIG. 3).
これにより、ユーザは、画像表示部２４に表示された合成画像のレイアウトを編集するための複数枚の候補画像を閲覧することができる。 Thereby, the user can browse a plurality of candidate images for editing the layout of the composite image displayed on the image display unit 24.
また、表示制御部２６により、画像表示部２４に表示された複数枚の候補画像のうち、画像表示部２４に表示された合成画像で使用されている画像の各々に対して、チェックマークを表示するように制御される。
なお、チェックマークに限らず、画像表示部２４に表示された合成画像で使用されている画像であることを表すことができれば、どのようなマークを表示してもよい。
Also, the display control unit 26 displays a check mark for each of the images used in the composite image displayed on the image display unit 24 among the plurality of candidate images displayed on the image display unit 24. To be controlled.
Note that not only the check mark but also any mark may be displayed as long as it can represent that the image is used in the composite image displayed on the image display unit 24.
これにより、ユーザは、複数枚の候補画像のうち、画像表示部２４に表示された合成画像で使用されている画像を一目で把握することができる。 Thereby, the user can grasp | ascertain the image currently used by the synthesized image displayed on the image display part 24 at a glance among several candidate images.
また、表示制御部２６により、画像表示部２４に表示された複数枚の候補画像の各々に対して、画像評価部３０により算出された評価値を表す星マークを表示するように制御される。星マークの個数は、複数枚の候補画像のお奨め度（評価値）を表している。
なお、星マークに限らず、複数枚の候補画像の各々の評価値を表すことができれば、どのようなマークを表示してもよい。
Further, the display control unit 26 is controlled to display a star mark representing the evaluation value calculated by the image evaluation unit 30 for each of a plurality of candidate images displayed on the image display unit 24. The number of star marks represents the recommendation level (evaluation value) of a plurality of candidate images.
In addition, not only a star mark but what kind of mark may be displayed as long as each evaluation value of a plurality of candidate images can be expressed.
これにより、ユーザは、複数枚の候補画像のうち、画像処理装置１０が推奨する候補画像を一目で把握することができる。 Thereby, the user can grasp at a glance the candidate images recommended by the image processing apparatus 10 among the plurality of candidate images.
図６は、画像表示部に表示された候補画像の表示画面を表す一例の概念図である。同図において、合成画像は、図５に示す表示画面の中央部から移動されて表示画面の右部に表示され、候補画像は、左部から引き出されて表示画面の左部に表示されている。
候補画像の表示画面の右上部には、「ひらく」ボタンに代えて、候補画像の表示画面を非表示とするための「とじる」ボタンが表示され、右下部には、図５に示すものと同じ４つの切り替えボタンが表示されている。
候補画像の表示画面内には、複数枚の候補画像が表示されている。前述のように、複数枚の候補画像のうち、画像表示部２４に表示された合成画像で使用されている画像にはチェックマークが表示されている。また、複数枚の候補画像の各々には、星マークが表示されている。
候補画像の表示画面には、一定枚数の候補画像を表示することができる。全ての候補画像を表示することができない場合には、候補画像の表示画面の右部に設けられたスクロールバーを使って、表示される候補画像を切り替えることができる。
FIG. 6 is a conceptual diagram illustrating an example of a candidate image display screen displayed on the image display unit. In the figure, the composite image is moved from the center portion of the display screen shown in FIG. 5 and displayed on the right portion of the display screen, and the candidate images are drawn from the left portion and displayed on the left portion of the display screen. .
In the upper right part of the candidate image display screen, instead of the “open” button, a “close” button for hiding the candidate image display screen is displayed, and in the lower right part, as shown in FIG. The same four switching buttons are displayed.
A plurality of candidate images are displayed in the candidate image display screen. As described above, a check mark is displayed on an image used in the composite image displayed on the image display unit 24 among the plurality of candidate images. A star mark is displayed on each of the plurality of candidate images.
A fixed number of candidate images can be displayed on the candidate image display screen. When all the candidate images cannot be displayed, the displayed candidate images can be switched using a scroll bar provided on the right part of the candidate image display screen.
なお、画像表示部２４に表示された合成画像が別の合成画像に入れ替えられた場合、入れ替えられた合成画像のパターンに合致する候補画像が選択し直され、これに応じて、画像表示部２４に表示される候補画像が変更される。 When the composite image displayed on the image display unit 24 is replaced with another composite image, a candidate image that matches the pattern of the replaced composite image is selected again, and the image display unit 24 is selected accordingly. The candidate image displayed on is changed.
続いて、例えば、ユーザにより、画像表示部２４に表示された合成画像で使用されている画像と候補画像とを入れ替える指示が指示入力部２２を介して入力される（図３のステップＳ１３）。 Subsequently, for example, the user inputs an instruction to replace the image used in the composite image displayed on the image display unit 24 with the candidate image via the instruction input unit 22 (step S13 in FIG. 3).
この場合、レイアウト編集部３４により、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像で使用されている画像と、指示により指定された候補画像とを入れ替えるように、画像表示部２４に表示された合成画像のレイアウトが編集される（図３のステップＳ１４）。
また、表示制御部２６により、レイアウト編集部３４によりレイアウトが編集された合成画像を画像表示部２４に表示するように制御される（図３のステップＳ１５）。
In this case, based on the instruction input via the instruction input unit 22 by the layout editing unit 34, the image used in the composite image displayed on the image display unit 24, and the candidate image specified by the instruction The layout of the composite image displayed on the image display unit 24 is edited so as to replace (step S14 in FIG. 3).
Further, the display control unit 26 controls the composite image whose layout is edited by the layout editing unit 34 to be displayed on the image display unit 24 (step S15 in FIG. 3).
これにより、ユーザは、画像表示部２４に表示された合成画像で使用されている画像と候補画像とを入れ替えるように、画像表示部２４に表示された合成画像のレイアウトを編集することができる。 Thereby, the user can edit the layout of the composite image displayed on the image display unit 24 so that the image used in the composite image displayed on the image display unit 24 and the candidate image are interchanged.
また、例えば、ユーザにより、編集処理の処理内容を表示する表示画面を表示する指示が指示入力部２２を介して入力される（図４のステップＳ１６）。例えば、図５の右部に示す、クリップアートの挿入に対応する編集ボタンが押下される。 Further, for example, an instruction to display a display screen for displaying the processing content of the editing process is input by the user via the instruction input unit 22 (step S16 in FIG. 4). For example, an edit button shown in the right part of FIG.
この場合、処理内容選択部３２により、レイアウトの編集で行われる複数種類の編集処理について、各々の種類の編集処理に含まれる複数の処理内容の中から、画像表示部２４に表示された合成画像のパターンに合致する処理内容が選択される（図４のステップＳ１７）。
例えば、編集処理がクリップアートの挿入の場合で、かつ、合成画像のパターンが子供画像優先の場合には、処理内容として、各種のクリップアートの中から、子供に合致するクリップアートが選択される。
In this case, the composite image displayed on the image display unit 24 from among a plurality of processing contents included in each type of editing processing by the processing content selection unit 32 for a plurality of types of editing processing performed in layout editing. Is selected (step S17 in FIG. 4).
For example, in the case where the editing process is insertion of clip art and the pattern of the composite image has priority on the child image, the clip art that matches the child is selected from various clip arts as the processing content. .
続いて、表示制御部２６により、図７に示すように、指示入力部２２を介して入力された指示に基づいて、画像表示部２４に表示された合成画像とともに、指示により指定された種類の編集処理の処理内容として、処理内容選択部３２により選択された処理内容を画像表示部２４に表示するように制御される（図４のステップＳ１８）。
前述のように、編集処理がクリップアートの挿入の場合で、合成画像のパターンが子供画像優先の場合には、処理内容として、子供に合致するクリップアートが画像表示部２４に表示される。
Subsequently, as shown in FIG. 7, the display control unit 26, based on the instruction input via the instruction input unit 22, together with the composite image displayed on the image display unit 24, the type specified by the instruction. Control is performed so that the processing content selected by the processing content selection unit 32 is displayed on the image display unit 24 as the processing content of the editing process (step S18 in FIG. 4).
As described above, when the editing process is insertion of clip art and the pattern of the composite image has priority on the child image, the clip art that matches the child is displayed on the image display unit 24 as the processing content.
これにより、ユーザは、画像表示部２４に表示された合成画像のレイアウトを編集するための、編集処理の処理内容を閲覧することができる。 As a result, the user can view the processing contents of the editing process for editing the layout of the composite image displayed on the image display unit 24.
図７は、画像表示部に表示された編集処理の処理内容を表示する表示画面を表す一例の概念図である。同図において、合成画像は、図５に示す表示画面の中央部から移動されて表示画面の左部に表示され、編集処理の処理内容は、表示画面の右部に表示されている。
本実施形態の場合、編集処理の処理内容の表示画面内には、子供に合致する複数のクリップアートが表示されている。
FIG. 7 is a conceptual diagram illustrating an example of a display screen that displays the processing content of the editing process displayed on the image display unit. In the figure, the composite image is moved from the center portion of the display screen shown in FIG. 5 and displayed on the left portion of the display screen, and the processing content of the editing process is displayed on the right portion of the display screen.
In the case of the present embodiment, a plurality of clip arts matching the child are displayed in the display screen of the processing content of the editing process.
なお、画像表示部２４に表示された合成画像が別の合成画像に入れ替えられた場合、入れ替えられた合成画像のパターンに合致する編集処理の処理内容が選択し直され、これに応じて、画像表示部２４に表示される処理内容が変更される。 When the composite image displayed on the image display unit 24 is replaced with another composite image, the processing content of the editing process that matches the pattern of the replaced composite image is selected again, and the image is displayed accordingly. The processing content displayed on the display unit 24 is changed.
ここで、例えば、ユーザにより、画像表示部２４に表示されたクリップアートの中から選択されたクリップアートを、画像表示部２４に表示された合成画像の指定位置に挿入する指示が指示入力部２２を介して入力される（図４のステップＳ１９）。 Here, for example, the instruction input unit 22 is instructed by the user to insert the clip art selected from the clip art displayed on the image display unit 24 into the designated position of the composite image displayed on the image display unit 24. (Step S19 in FIG. 4).
この場合、レイアウト編集部３４により、指示入力部２２を介して入力された指示に基づいて、指示により指定されたクリップアートを、画像表示部２４に表示された合成画像の指定位置に挿入するように、画像表示部２４に表示された合成画像のレイアウトが編集される（図４のステップＳ２０）。
また、表示制御部２６により、レイアウト編集部３４によりレイアウトが編集された合成画像を画像表示部２４に表示するように制御される（図４のステップＳ２１）。
In this case, the layout editing unit 34 inserts the clip art designated by the instruction at the designated position of the composite image displayed on the image display unit 24 based on the instruction input via the instruction input unit 22. Then, the layout of the composite image displayed on the image display unit 24 is edited (step S20 in FIG. 4).
Further, the display control unit 26 controls to display the composite image whose layout has been edited by the layout editing unit 34 on the image display unit 24 (step S21 in FIG. 4).
これにより、ユーザは、クリップアートを、画像表示部２４に表示された合成画像に挿入するように、画像表示部２４に表示された合成画像のレイアウトを編集することができる。 Thereby, the user can edit the layout of the composite image displayed on the image display unit 24 so that the clip art is inserted into the composite image displayed on the image display unit 24.
本発明の装置は、装置が備える各々の構成要素を専用のハードウェアで構成してもよいし、各々の構成要素をプログラムされたコンピュータで構成してもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
In the apparatus of the present invention, each component included in the apparatus may be configured by dedicated hardware, or each component may be configured by a programmed computer.
The method of the present invention can be implemented, for example, by a program for causing a computer to execute each step. It is also possible to provide a computer-readable recording medium in which this program is recorded.
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
The present invention is basically as described above.
Although the present invention has been described in detail above, the present invention is not limited to the above-described embodiment, and it is needless to say that various improvements and modifications may be made without departing from the gist of the present invention.
１０ 画像処理装置
１２ 画像取得部
１４ 画像解析部
１６ テーマ判別部
１８ 嗜好分析部
２０ 合成画像生成部
２２ 指示入力部
２４ 画像表示部
２６ 表示制御部
２８ 候補画像選択部
３０ 画像評価部
３２ 処理内容選択部
３４ レイアウト編集部
３６ ユーザ情報登録部
DESCRIPTION OF SYMBOLS 10 Image processing apparatus 12 Image acquisition part 14 Image analysis part 16 Theme discrimination | determination part 18 Preference analysis part 20 Composite image generation part 22 Instruction input part 24 Image display part 26 Display control part 28 Candidate image selection part 30 Image evaluation part 32 Process content selection Section 34 Layout Editing Section 36 User Information Registration Section
Claims (21)
前記複数枚の画像の各々の画像解析情報を取得する画像解析情報取得部と、
前記画像解析情報に基づいて、あらかじめ定義されたテーマの中から前記画像群のテーマを判別するテーマ判別部と、
前記画像群のテーマに基づいて、あらかじめ定義された嗜好の中から前記ユーザの嗜好を分析する嗜好分析部と、
前記複数枚の画像の中から、前記画像解析情報に基づいて、前記ユーザの嗜好に対応する一定枚数の画像を選択し、前記選択された一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像を生成する合成画像生成部と、
前記ユーザにより入力された指示を受け取る指示入力部と、
画像を表示する画像表示部と、
前記複数のパターンの合成画像の中から選択された１枚の合成画像を前記画像表示部に表示し、前記指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像を、前記複数のパターンの合成画像の中から前記指示により指定された１枚の合成画像に切り替えて前記画像表示部に表示するように制御する表示制御部とを備えることを特徴とする画像処理装置。 An image acquisition unit for acquiring an image group consisting of a plurality of images owned by the user;
An image analysis information acquisition unit that acquires image analysis information of each of the plurality of images;
A theme discriminating unit for discriminating a theme of the image group from predefined themes based on the image analysis information;
Based on the theme of the image group, a preference analysis unit that analyzes the user's preference from among predefined preferences;
Based on the image analysis information, a predetermined number of images corresponding to the user's preference are selected from the plurality of images, and a predetermined pattern is selected using the selected fixed number of images. A composite image generation unit that generates a composite image of a plurality of patterns selected from
An instruction input unit for receiving an instruction input by the user;
An image display unit for displaying an image;
One composite image selected from the composite images of the plurality of patterns is displayed on the image display unit, and is displayed on the image display unit based on an instruction input via the instruction input unit. A display control unit configured to control the composite image to be displayed on the image display unit by switching from the composite image of the plurality of patterns to the single composite image designated by the instruction. Image processing device.
前記表示制御部は、前記指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像とともに、前記候補画像選択部により選択された複数枚の候補画像を前記画像表示部に表示するように制御するものである請求項１〜３のいずれか１項に記載の画像処理装置。 Further, the image used for editing the layout of the composite image displayed on the image display unit includes an image used in the composite image displayed on the image display unit from among the plurality of images. A candidate image selection unit for selecting a plurality of candidate images;
The display control unit displays a plurality of candidate images selected by the candidate image selection unit together with the composite image displayed on the image display unit based on an instruction input via the instruction input unit. The image processing apparatus according to claim 1, wherein the image processing apparatus is controlled so as to be displayed on a display unit.
前記画像評価部は、前記画像表示部に表示された合成画像のパターンに合致する画像内容の候補画像の評価値が、前記画像表示部に表示された合成画像のパターンに合致しない画像内容の候補画像の評価値よりも高くなるようにするものであり、
前記表示制御部は、前記画像表示部に表示された複数枚の候補画像の各々に対して、前記評価値を表すマークを表示するように制御するものである請求項４〜６のいずれか１項に記載の画像処理装置。 Furthermore, an image evaluation unit that calculates an evaluation value of each of the plurality of candidate images based on the image analysis information,
The image evaluation unit is an image content candidate whose evaluation value of a candidate image having an image content that matches the pattern of the composite image displayed on the image display unit does not match the pattern of the composite image displayed on the image display unit. It is intended to be higher than the evaluation value of the image,
The said display control part controls so that the mark showing the said evaluation value may be displayed with respect to each of the several candidate image displayed on the said image display part. The image processing apparatus according to item.
前記表示制御部は、前記指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像とともに、前記指示により指定された種類の編集処理の処理内容として、前記処理内容選択部により選択された処理内容を前記画像表示部に表示するように制御するものである請求項４〜７のいずれか１項に記載の画像処理装置。 Further, for a plurality of types of editing processing performed in the layout editing, processing that matches a pattern of the composite image displayed on the image display unit from among a plurality of processing contents included in each type of the editing processing A processing content selection section for selecting content
The display control unit, based on the instruction input via the instruction input unit, together with the composite image displayed on the image display unit, as the processing content of the type of editing processing specified by the instruction, The image processing apparatus according to claim 4, wherein the processing content selected by the content selection unit is controlled to be displayed on the image display unit.
前記レイアウト編集部は、前記画像表示部に表示された複数枚の候補画像、および、前記画像表示部に表示された編集処理の処理内容の少なくとも一方を使用して、前記画像表示部に表示された合成画像のレイアウトを編集するものである請求項８に記載の画像処理装置。 Furthermore, a layout editing unit that edits a layout of the composite image displayed on the image display unit based on an instruction input via the instruction input unit,
The layout editing unit is displayed on the image display unit using at least one of the plurality of candidate images displayed on the image display unit and the processing content of the editing process displayed on the image display unit. The image processing apparatus according to claim 8, which edits a layout of the synthesized image.
前記合成画像生成部は、前記異なる２以上のテーマの各々に対応するパターンの合成画像を生成するものである請求項１〜９のいずれか１項に記載の画像処理装置。 The theme discriminating unit discriminates two or more different themes from the image group,
The image processing apparatus according to claim 1, wherein the composite image generation unit generates a composite image having a pattern corresponding to each of the two or more different themes.
前記テーマ判別部は、前記画像解析情報に加え、前記ユーザ情報に基づいて、前記画像群のテーマを判別するものである請求項１〜１１のいずれか１項に記載の画像処理装置。 And a user information registration unit for registering user information related to the user.
The image processing apparatus according to claim 1, wherein the theme determination unit determines a theme of the image group based on the user information in addition to the image analysis information.
画像解析情報取得部が、前記複数枚の画像の各々の画像解析情報を取得するステップと、
テーマ判別部が、前記画像解析情報に基づいて、あらかじめ定義されたテーマの中から前記画像群のテーマを判別するステップと、
嗜好分析部が、前記画像群のテーマに基づいて、あらかじめ定義された嗜好の中から前記ユーザの嗜好を分析するステップと、
合成画像生成部が、前記複数枚の画像の中から、前記画像解析情報に基づいて、前記ユーザの嗜好に対応する一定枚数の画像を選択し、前記選択された一定枚数の画像を使用して、あらかじめ定義されたパターンの中から選択された複数のパターンの合成画像を生成するステップと、
表示制御部が、前記複数のパターンの合成画像の中から選択された１枚の合成画像を画像表示部に表示し、指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像を、前記複数のパターンの合成画像の中から前記指示により指定された１枚の合成画像に切り替えて前記画像表示部に表示するように制御するステップとを含むことを特徴とする画像処理方法。 An image acquisition unit acquiring an image group composed of a plurality of images owned by the user;
An image analysis information acquisition unit acquiring image analysis information of each of the plurality of images;
A theme discriminating unit discriminating a theme of the image group from predefined themes based on the image analysis information;
A preference analysis unit, based on the theme of the image group, analyzing the user's preference from among predefined preferences;
A composite image generation unit selects a fixed number of images corresponding to the user's preference from the plurality of images based on the image analysis information, and uses the selected fixed number of images. Generating a composite image of a plurality of patterns selected from predefined patterns;
The display control unit displays one composite image selected from the composite images of the plurality of patterns on the image display unit, and displays the composite image on the image display unit based on an instruction input via the instruction input unit. And a step of switching the displayed composite image to one composite image designated by the instruction from the composite images of the plurality of patterns and displaying the composite image on the image display unit. Image processing method.
前記表示制御部が、前記指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像とともに、前記候補画像選択部により選択された複数枚の候補画像を前記画像表示部に表示するように制御するステップとを含む請求項１６または１７に記載の画像処理方法。 Further, the candidate image selection unit uses the composite image displayed on the image display unit from among the plurality of images as an image used for editing the layout of the composite image displayed on the image display unit. Selecting a plurality of candidate images including the image being processed;
Based on the instruction input via the instruction input unit, the display control unit displays a plurality of candidate images selected by the candidate image selection unit together with the composite image displayed on the image display unit. The image processing method according to claim 16, further comprising a step of controlling to display on the display unit.
前記表示制御部が、前記指示入力部を介して入力された指示に基づいて、前記画像表示部に表示された合成画像とともに、前記指示により指定された種類の編集処理の処理内容として、前記処理内容選択部により選択された処理内容を前記画像表示部に表示するように制御するステップとを含む請求項１６〜１８のいずれか１項に記載の画像処理方法。 Further, for a plurality of types of editing processing performed by the layout editing, the processing content selection unit displays a composite image displayed on the image display unit from among a plurality of processing contents included in each type of the editing processing. Selecting the processing content that matches the pattern of
Based on the instruction input via the instruction input unit, the display control unit, together with the composite image displayed on the image display unit, as the processing content of the type of editing process specified by the instruction, The image processing method according to any one of claims 16 to 18, further comprising a step of controlling the processing content selected by the content selection unit to be displayed on the image display unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016209572A JP6393302B2 (en) | 2016-10-26 | 2016-10-26 | Image processing apparatus, image processing method, program, and recording medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016209572A JP6393302B2 (en) | 2016-10-26 | 2016-10-26 | Image processing apparatus, image processing method, program, and recording medium |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014187014A Division JP6033821B2 (en) | 2014-09-12 | 2014-09-12 | Image processing apparatus, image processing method, program, and recording medium |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2017059245A true JP2017059245A (en) | 2017-03-23 |
| JP2017059245A5 JP2017059245A5 (en) | 2017-07-13 |
| JP6393302B2 JP6393302B2 (en) | 2018-09-19 |
Family
ID=58390324
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016209572A Active JP6393302B2 (en) | 2016-10-26 | 2016-10-26 | Image processing apparatus, image processing method, program, and recording medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6393302B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11394919B2 (en) | 2019-07-02 | 2022-07-19 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method and medium |
| US11582435B2 (en) | 2019-07-02 | 2023-02-14 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method and medium |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006510113A (en) * | 2002-12-12 | 2006-03-23 | イーストマン コダック カンパニー | Method for generating customized photo album pages and prints based on person and gender profiles |
| JP2007058793A (en) * | 2005-08-26 | 2007-03-08 | Fujifilm Holdings Corp | Apparatus, method, and program for image processing |
| JP2007310553A (en) * | 2006-05-17 | 2007-11-29 | Konica Minolta Opto Inc | Program and method for creating composite image |
| JP2009237703A (en) * | 2008-03-26 | 2009-10-15 | Fujifilm Corp | Image output method, device and program |
| JP2011103135A (en) * | 2005-10-18 | 2011-05-26 | Fujifilm Corp | Album creating apparatus, album creating method and album creating program |
| JP2013033453A (en) * | 2011-06-28 | 2013-02-14 | Fujifilm Corp | Image processor, image processing method, and image processing program |
| JP2014016800A (en) * | 2012-07-09 | 2014-01-30 | Canon Inc | Image processor, image processing method, and program |
| JP2014075777A (en) * | 2012-09-14 | 2014-04-24 | Fujifilm Corp | Composite image generation system, image processor and image processing method |
| JP2014075778A (en) * | 2012-09-14 | 2014-04-24 | Fujifilm Corp | Composite image generation system, image processor and image processing method |
-
2016
- 2016-10-26 JP JP2016209572A patent/JP6393302B2/en active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006510113A (en) * | 2002-12-12 | 2006-03-23 | イーストマン コダック カンパニー | Method for generating customized photo album pages and prints based on person and gender profiles |
| JP2007058793A (en) * | 2005-08-26 | 2007-03-08 | Fujifilm Holdings Corp | Apparatus, method, and program for image processing |
| JP2011103135A (en) * | 2005-10-18 | 2011-05-26 | Fujifilm Corp | Album creating apparatus, album creating method and album creating program |
| JP2007310553A (en) * | 2006-05-17 | 2007-11-29 | Konica Minolta Opto Inc | Program and method for creating composite image |
| JP2009237703A (en) * | 2008-03-26 | 2009-10-15 | Fujifilm Corp | Image output method, device and program |
| JP2013033453A (en) * | 2011-06-28 | 2013-02-14 | Fujifilm Corp | Image processor, image processing method, and image processing program |
| JP2014016800A (en) * | 2012-07-09 | 2014-01-30 | Canon Inc | Image processor, image processing method, and program |
| JP2014075777A (en) * | 2012-09-14 | 2014-04-24 | Fujifilm Corp | Composite image generation system, image processor and image processing method |
| JP2014075778A (en) * | 2012-09-14 | 2014-04-24 | Fujifilm Corp | Composite image generation system, image processor and image processing method |
Non-Patent Citations (1)
| Title |
|---|
| 内田 久貴: "複数写真で楽々アルバム年賀状", 日経ＰＣ２１ 第１６巻 第１号, vol. 2011年1月号, JPN6018019823, 24 November 2010 (2010-11-24), JP, pages 91 - 105, ISSN: 0003807676 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11394919B2 (en) | 2019-07-02 | 2022-07-19 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method and medium |
| US11582435B2 (en) | 2019-07-02 | 2023-02-14 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method and medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6393302B2 (en) | 2018-09-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6033821B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP6982013B2 (en) | Image processing equipment, image processing methods, programs and recording media | |
| US8903200B2 (en) | Image processing device, image processing method, and image processing program | |
| JP5936658B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP5568148B2 (en) | Layout device, layout method, and program | |
| JP6601966B2 (en) | Rear image candidate determination device, rear image candidate determination method, and rear image candidate determination program | |
| US20110123124A1 (en) | Method and apparatus for generating an image collection | |
| JP5938379B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| US9449411B2 (en) | Ranking image importance with a photo-collage | |
| JP7077462B2 (en) | Image processing equipment, image processing methods, programs and recording media | |
| JP6559609B2 (en) | Image composition apparatus, image composition method, and image composition program | |
| JP2012044646A (en) | Image processing device, image processing method and program | |
| JP2015172795A (en) | Image processing apparatus, important person determination method, image layout method and program, and recording medium | |
| Manovich | The aesthetic society: or how I edit my Instagram 1 | |
| JP2016167299A (en) | Image processing device, image processing method, program, and recording medium | |
| JP6393302B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP6197063B2 (en) | Image processing apparatus, important person determination method, image layout method, program, and recording medium | |
| JP2017045374A (en) | Information processing device and program | |
| JP6622168B2 (en) | Image composition apparatus, image composition method, and program | |
| JP6623597B2 (en) | Information processing device and program | |
| JP6622662B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP6650364B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP2017058996A (en) | Electronic album template selection system, electronic album template selection method, electronic album template selection program, and storage medium storing electronic album template selection program | |
| JP2004110384A (en) | Layout system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170529 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170529 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180524 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180605 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180726 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180731 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180824 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6393302 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |