JP2012146071A - Image processing apparatus - Google Patents
Image processing apparatus Download PDFInfo
- Publication number
- JP2012146071A JP2012146071A JP2011003147A JP2011003147A JP2012146071A JP 2012146071 A JP2012146071 A JP 2012146071A JP 2011003147 A JP2011003147 A JP 2011003147A JP 2011003147 A JP2011003147 A JP 2011003147A JP 2012146071 A JP2012146071 A JP 2012146071A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image processing
- reference image
- processing apparatus
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
Description
本発明は、ユーザが画像に対して所定の処理を適用して画像を加工する画像処理装置に関する。 The present invention relates to an image processing apparatus in which a user applies a predetermined process to an image and processes the image.
画像に対して様々な効果をかけて画像を加工するいわゆる画像処理ソフトは、有料のものから無料のものまで多種多様なものが提供されている。ユーザが画像に対してある効果をかけたい場合、画像処理ソフトにおいて目的の効果を指定し、その強度などを表す各種パラメータを設定するのが一般的である。画像処理ソフトによっては、処理対象の画像の特徴に合わせてパラメータを自動的に設定する技術が考えられ既に知られている。 A wide variety of so-called image processing software that processes images by applying various effects to the images is available, from paid ones to free ones. When a user wants to apply an effect to an image, it is common to specify a desired effect in image processing software and set various parameters representing the intensity and the like. Depending on the image processing software, a technique for automatically setting parameters in accordance with the characteristics of an image to be processed is considered and already known.
しかし、今までの画像処理ソフトを利用するためには画像処理に関するある程度の知識を必要とするという問題があった。より具体的には、ユーザが画像処理ソフトを利用して画像を加工する際は、画質をどのように変えたいかという明確な目的がある場合が多い。例えば、「建物の立体感を出したい」、「布の質感を高めたい」、「花の色鮮やかさを強調したい」等である。 However, there has been a problem that a certain amount of knowledge about image processing is required in order to use the conventional image processing software. More specifically, when a user processes an image using image processing software, there is often a clear purpose of how to change the image quality. For example, “I want to give the building a three-dimensional effect”, “I want to enhance the texture of the cloth”, “I want to emphasize the vividness of flowers”, and the like.
しかしながら、一般的な画像処理ソフトが提供する機能は、画像の物理的な特徴を直接的に操作するものであり、名称もそれに沿って付けられている。例えば、鮮鋭化処理、コントラスト補正、明度補正、ガンマ補正等である。 However, a function provided by general image processing software directly manipulates the physical characteristics of an image, and names are assigned accordingly. For example, sharpening processing, contrast correction, brightness correction, gamma correction, and the like.
このため、不慣れなユーザの視点からは、どの処理を実行すれば目的とする画質に近づけるのかが分かりづらいという問題があった。特に、複数の処理を組合せる必要があるようなケースでは組合せパターンが多いうえ、効果が高い組合せやそうでない組合せの判断が難しい。 For this reason, from the viewpoint of an unfamiliar user, there is a problem that it is difficult to understand which process should be performed to achieve the target image quality. In particular, in a case where a plurality of processes need to be combined, there are many combination patterns, and it is difficult to determine a combination that is highly effective and a combination that is not.
また、特許文献１には、印刷指示における設定作業を容易にする目的で、印刷文書の用途を示す印刷目的を選択することにより、選択された目的と対応付けて予め登録された推奨印刷条件に基づいて印刷設定画面を表示する技術が開示されている。しかし、設定画面を表示するだけではユーザが印刷結果をイメージすることは困難であり、操作が直感的でないという問題は解消できていない。 Further, in Patent Document 1, for the purpose of facilitating the setting work in the print instruction, by selecting a print purpose indicating the use of the print document, the recommended print condition registered in advance in association with the selected purpose is set. A technique for displaying a print setting screen based on the above is disclosed. However, it is difficult for the user to visualize the print result only by displaying the setting screen, and the problem that the operation is not intuitive cannot be solved.
つまり、ユーザの目的と画像処理ソフトが提供する機能が必ずしも直接的には対応つかず、直感的な操作がしづらいという問題があった。 That is, there is a problem that the user's purpose and the function provided by the image processing software do not always correspond directly and it is difficult to perform an intuitive operation.
そこで、本発明は、ユーザが画像に対して所定の処理を適用して画像を加工する画像処理装置において、ユーザが画像処理の専門知識を必要とせず、直感的に意図する画質に近づけることができることを目的とする。 Therefore, according to the present invention, in an image processing apparatus in which a user applies a predetermined process to an image and processes the image, the user can intuitively approach the intended image quality without requiring specialized knowledge of image processing. The purpose is to be able to.
本発明は、入力画像を解析して特徴量を抽出する画像特徴抽出手段と、予め用意された参照画像、参照画像から画像特徴抽出手段を用いて抽出された特徴量、参照画像を加工した結果である結果画像、加工に使用した画像処理、並びに加工に使用した画像処理のパラメータとを対応付けて記憶する参照画像記憶手段と、入力画像から抽出された特徴量を用いて参照画像記憶手段を検索し、入力画像に類似する参照画像を取得する参照画像検索手段と、参照画像検索手段により取得された参照画像と対応する結果画像とをセットで表示する画像表示手段と、画像表示手段に表示されたセットから任意のセットを選択する参照画像選択手段と、参照画像選択手段によって選択されたセットと対応する画像処理のパラメータとを用いて入力画像を加工する画像処理手段とを備えることを特徴とする。 According to the present invention, an image feature extraction unit that analyzes an input image and extracts a feature amount, a reference image prepared in advance, a feature amount extracted from the reference image using the image feature extraction unit, and a result of processing the reference image A reference image storage means for storing the result image, the image processing used for the processing, and the parameters of the image processing used for the processing in association with each other, and a reference image storage means using the feature amount extracted from the input image Reference image search means for searching and acquiring a reference image similar to the input image, image display means for displaying the reference image acquired by the reference image search means and the corresponding result image, and display on the image display means The input image is added using the reference image selection means for selecting an arbitrary set from the set, and the image processing parameters corresponding to the set selected by the reference image selection means. Characterized in that it comprises an image processing means for.
本発明によれば、画像処理ソフトにより画像を加工する際は、適用する処理に関する知識を必要とせず、直感的に実行することができるという効果を奏する。 According to the present invention, when an image is processed by image processing software, there is an effect that it is possible to execute intuitively without requiring knowledge about processing to be applied.
また、事例として蓄積された画像処理前後の画像の中から、処理対象画像と類似するものを検索して参照することによって、画像処理の適用によって処理対象画像がどのように変化するかをイメージすることができるという効果を奏する。 In addition, the image similar to the processing target image is searched for and referred to from the images stored before and after the image processing as an example, and it is imaged how the processing target image changes due to the application of the image processing. There is an effect that can be.
更に、蓄積された事例の画像処理とパラメータを用いて処理対象画像を加工することができるため、ユーザが画像処理の種類やパラメータを意識する必要がないという効果を奏する。 Furthermore, since the processing target image can be processed using the image processing and parameters of the accumulated cases, there is an effect that the user does not need to be aware of the type and parameters of the image processing.
本発明の実施形態について説明を行う。本発明は、画像処理に際して、以下の特徴を有する。即ち、データベースに登録された参照画像の中から処理対象画像に類似するものを選び、その参照画像とその参照画像の加工後の画像（結果画像）とをセット（参照画像セット）でユーザに提示して、ユーザが自分の加工意図に最も沿っていると考えるセットを選択すると、選択されたセットが加工された際に利用された画像処理やパラメータを用いて処理対象画像を加工することが特徴になっている。 An embodiment of the present invention will be described. The present invention has the following features in image processing. That is, an image similar to the processing target image is selected from the reference images registered in the database, and the reference image and the processed image (result image) of the reference image are presented to the user as a set (reference image set). Then, when the user selects a set that he thinks is most in line with his processing intention, the processing target image is processed using the image processing and parameters used when the selected set is processed It has become.
上記の本発明の特徴について、以下の図面を用いて詳細に解説する。図１は、本発明の実施形態に係る画像処理装置の機能ブロック図（その１）である。 The characteristics of the present invention will be described in detail with reference to the following drawings. FIG. 1 is a functional block diagram (part 1) of the image processing apparatus according to the embodiment of the present invention.
本発明を実装した画像処理装置１００は、ユーザによって入力された処理対象画像から予め設定された画像特徴量を抽出する画像特徴抽出部１０１と、予め用意された参照画像と、前記参照画像から前記画像特徴抽出部１０１により抽出された画像特徴量、前記参照画像を加工した結果である結果画像、並びに前記加工に使用した画像処理の種類、前記加工に使用したパラメータとを対応付けて記憶する参照画像記憶部１０６と、前記画像特徴抽出部１０１で抽出された画像特徴量を用いて前記参照画像記憶部１０６を検索する参照画像検索部１０２と、前記参照画像検索部１０２によって類似すると判断された参照画像と結果画像とを対応付けて参照画像セットとして表示する画像表示部１０３と、前記画像表示部１０３に表示された参照画像セットから任意のセットをユーザに選択させる参照画像選択部１０４と、前記参照画像選択部１０４により選択されたセットに対応する画像処理の種類とパラメータとを取得し、処理対象画像に対して前記画像処理を前記パラメータで実行する画像処理部１０５から構成される。 An image processing apparatus 100 in which the present invention is implemented includes an image feature extraction unit 101 that extracts a preset image feature amount from a processing target image input by a user, a reference image prepared in advance, and the reference image based on the reference image. Reference that stores the image feature amount extracted by the image feature extraction unit 101, the result image obtained by processing the reference image, the type of image processing used for the processing, and the parameters used for the processing in association with each other The image storage unit 106, the reference image search unit 102 that searches the reference image storage unit 106 using the image feature amount extracted by the image feature extraction unit 101, and the reference image search unit 102 have determined that they are similar. An image display unit 103 that displays the reference image and the result image in association with each other as a reference image set, and the reference displayed on the image display unit 103 A reference image selection unit 104 that allows a user to select an arbitrary set from an image set, and an image processing type and a parameter corresponding to the set selected by the reference image selection unit 104, and The image processing unit 105 executes image processing with the parameters.
なお、参照画像記憶部１０６に記憶されている参照画像に対応する画像特徴量は、画像特徴抽出部１０１で予め抽出されたものである。また、参照画像記憶部１０６に記憶されている参照画像と結果画像、画像処理の種類、並びにそのパラメータは、予めオペレータにより設定されたものである。 Note that the image feature amount corresponding to the reference image stored in the reference image storage unit 106 is previously extracted by the image feature extraction unit 101. The reference image and result image stored in the reference image storage unit 106, the type of image processing, and its parameters are set in advance by the operator.
図２は、本発明の実施形態に係る画像処理装置の処理フロー図（その１）である。 FIG. 2 is a process flowchart (part 1) of the image processing apparatus according to the embodiment of the present invention.
始めに、ユーザは、処理対象画像を本発明による画像処理装置（以下、本装置と略す）１００に入力する（ステップＳ２０１）。次に、本装置１００は、処理対象画像を解析し、予め設定された画像特徴に関する画像特徴量を画像特徴抽出部１０１を用いて抽出する（ステップＳ２０２）。 First, the user inputs an image to be processed to an image processing apparatus (hereinafter abbreviated as “this apparatus”) 100 according to the present invention (step S201). Next, the apparatus 100 analyzes the processing target image, and extracts an image feature amount related to a preset image feature using the image feature extraction unit 101 (step S202).
次に、本装置１００は、抽出された画像特徴量を用いて、参照画像検索部１０２により参照画像記憶部１０６に記憶された参照画像群を検索し、一致度の高い参照画像を見つけるとともに、それらに対応付けて記憶されている結果画像、画像処理の種類、並びにパラメータを取得する（ステップＳ２０３）。 Next, the apparatus 100 searches the reference image group stored in the reference image storage unit 106 by the reference image search unit 102 using the extracted image feature amount, finds a reference image having a high degree of coincidence, The result image, the type of image processing, and parameters stored in association with them are acquired (step S203).
次に、本装置１００は、取得された参照画像と結果画像とを対応付けて画像表示部１０３に表示する（ステップＳ２０４）。次に、ユーザは、本装置１００の参照画像選択部１０４を用いて、処理対象画像の加工イメージに最も近い参照画像と結果画像とのセットを選択する（ステップＳ２０５）。 Next, the present apparatus 100 displays the acquired reference image and result image in association with each other on the image display unit 103 (step S204). Next, the user uses the reference image selection unit 104 of the apparatus 100 to select a set of a reference image and a result image that is closest to the processed image of the processing target image (step S205).
次に、本装置１００は、画像処理部１０５により選択されたセットに対応する画像処理の種類とパラメータを用いて処理対象画像を加工する（ステップＳ２０６）。最後に、本装置１００は、処理結果の画像を出力する（ステップＳ２０７）。 Next, the apparatus 100 processes the processing target image using the type and parameters of the image processing corresponding to the set selected by the image processing unit 105 (step S206). Finally, the apparatus 100 outputs an image as a processing result (step S207).
図３は、本発明の実施形態に係る画像処理装置の装置構成図である。本装置１００は、処理対象画像を取得するカメラ３０１、画像特徴抽出部１０１と、参照画像検索部１０２と、画像表示部１０３と、参照画像選択部１０４と、並びに画像処理部１０５を構成するコンピュータ３０２、および、参照画像記憶部１０６を構成する参照画像データベース３０４から構成される。 FIG. 3 is an apparatus configuration diagram of the image processing apparatus according to the embodiment of the present invention. The apparatus 100 includes a camera 301 that acquires a processing target image, an image feature extraction unit 101, a reference image search unit 102, an image display unit 103, a reference image selection unit 104, and a computer that configures the image processing unit 105. 302 and a reference image database 304 constituting the reference image storage unit 106.
なお、画像特徴抽出部１０１、参照画像検索部１０２、並びに画像処理部１０５は、コンピュータ３０２のＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略）が構成し、画像表示部１０３はディスプレイ、参照画像選択部１０４はキーボードとマウスにより構成される。 Note that the image feature extraction unit 101, the reference image search unit 102, and the image processing unit 105 are configured by a CPU (abbreviation of Central Processing Unit) of the computer 302, the image display unit 103 is a display, and the reference image selection unit 104 is a keyboard. And a mouse.
図４は、本発明の実施形態に係る画像処理画面の例１である。画像処理画面は、処理対象画像を表示するプレビュー表示領域４０１と、参照画像セットを表示しユーザに選択させるための参照画像セット表示領域４０２とから構成される。 FIG. 4 is an example 1 of an image processing screen according to the embodiment of the present invention. The image processing screen includes a preview display area 401 for displaying a processing target image, and a reference image set display area 402 for displaying a reference image set and allowing a user to select it.
ユーザがカメラで撮影した画像や既に蓄積された画像を処理対象画像として入力すると、処理対象画像はプレビュー表示領域に表示されるとともに、先述した手続きにより参照画像セットが取得される。取得された参照画像セットは、参照画像セット表示領域に表示され、ユーザは任意のセットを選択することができる。 When a user inputs an image captured by a camera or an image already accumulated as a processing target image, the processing target image is displayed in the preview display area, and a reference image set is acquired by the above-described procedure. The acquired reference image set is displayed in the reference image set display area, and the user can select an arbitrary set.
本実施例では、三つの参照画像セット４０３〜４０５が表示されている。参照画像セットは、左側に参照画像が、右側に結果画像が表示され、間に矢印を表示することにより加工前後が識別できるようになっている。なお、参照画像セットの並び順は、処理対象画像と参照画像との類似度順に表示することが望ましい。また、表示する参照画像セットの数は、任意に指定できることが望ましく、また参照画像と結果画像との位置関係も左右だけでなく上下など他の配置も指定できることが望ましい。 In this embodiment, three reference image sets 403 to 405 are displayed. In the reference image set, a reference image is displayed on the left side, a result image is displayed on the right side, and an arrow is displayed between them, so that before and after processing can be identified. Note that it is desirable to display the arrangement order of the reference image set in the order of similarity between the processing target image and the reference image. It is desirable that the number of reference image sets to be displayed can be arbitrarily specified, and it is desirable that the positional relationship between the reference image and the result image can be specified not only on the left and right but also on other positions such as the top and bottom.
ユーザは、表示されている参照画像セットの中から処理対象画像の加工後のイメージに最も近いものを選択する。参照画像セットが選択されると、その参照画像セットに対応する画像処理の種類とパラメータを用いて処理対象画像に画像処理を実行する。画像処理の結果は、プレビュー表示領域に表示される。ユーザは表示された画像が満足のいくものであれば、画像を保存したり、印刷したりして出力することができる。 The user selects an image closest to the processed image of the processing target image from the displayed reference image set. When a reference image set is selected, image processing is executed on the processing target image using the type and parameters of image processing corresponding to the reference image set. The result of the image processing is displayed in the preview display area. If the displayed image is satisfactory, the user can save the image or print it and output it.
この様にして、ユーザは過去に類似する画像がどのように加工されたかの事例をベースに、処理対象画像に対して適用する画像処理の種類やパラメータを決定することができるため、画像処理に関する知識を必要とせず、直感的な操作で画像を好みに加工することができる。 In this way, the user can determine the type and parameters of image processing to be applied to the processing target image based on the case of how similar images have been processed in the past. The image can be processed to your liking by intuitive operation.
本実施例の機能ブロック図や処理フロー図、装置構成図は、実施例１と同じであるため、省略する。本実施例と実施例１との差異は、処理対象画像を加工する際に、参照画像セットに基づく画像処理に加えて任意の画像処理を実行できる点である。 Since the functional block diagram, process flow diagram, and apparatus configuration diagram of the present embodiment are the same as those of the first embodiment, a description thereof will be omitted. The difference between the present embodiment and the first embodiment is that arbitrary image processing can be executed in addition to the image processing based on the reference image set when the processing target image is processed.
図５は、本発明の実施形態に係る画像処理画面の例２である。図５は図４と比較して、パラメータ指定領域５０６が存在する点が異なる。パラメータ指定領域には、ユーザにより選択された参照画像セットの加工に用いられた画像処理が表示されており、例えば、スライドバーを用いてその画像処理に利用するパラメータを指定することができる。 FIG. 5 is an example 2 of an image processing screen according to the embodiment of the present invention. FIG. 5 differs from FIG. 4 in that a parameter designation area 506 exists. In the parameter designation area, image processing used to process the reference image set selected by the user is displayed. For example, a parameter used for the image processing can be designated using a slide bar.
ここでは、パラメータの指定にスライドバーを用いているが、値を直接指定するなど他の手段を用いても良い。またパラメータの初期値は参照画像セットの加工に用いられた値であることが望ましい。更に、パラメータ指定領域で指定できる画像処理の種類は、参照画像セットの加工に用いられたものの他に、例えば、他の参照画像セットの加工に用いられたものも利用できたり、ユーザが任意に追加できたりすることが望ましい。パラメータ指定領域で何らかの画像処理のパラメータが変更された際には、変更後のパラメータを用いて処理対象画像に画像処理を実行し、得られた画像でプレビュー表示領域を更新する。 Here, a slide bar is used for specifying parameters, but other means such as specifying values directly may be used. The initial value of the parameter is preferably a value used for processing the reference image set. Furthermore, the types of image processing that can be specified in the parameter specification area are not limited to those used for processing the reference image set, for example, those used for processing other reference image sets can be used, or the user can arbitrarily specify them. It is desirable to be able to add. When any image processing parameter is changed in the parameter designation area, image processing is executed on the processing target image using the changed parameter, and the preview display area is updated with the obtained image.
この様にして、ユーザは過去に類似する画像がどのように加工されたかの事例をベースに、処理対象画像に対して適用する画像処理の種類やパラメータを決定できるだけでなく、更に好みに合わせて画像を調整することができる。 In this way, the user can not only determine the type and parameters of image processing to be applied to the image to be processed based on the case of how similar images have been processed in the past, but also images according to preference. Can be adjusted.
図６は、本発明の実施形態に係る画像処理装置の機能ブロック図（その３）である。本実施例の機能ブロック図（その３）と実施例１の機能ブロック図（その１）との差異は、画像処理部６０５が処理結果画像を出力する際に、処理対象画像、処理結果画像、利用した画像処理の種類、並びにパラメータを参照画像記憶部６０６に新しいエントリとして登録する点と、参照画像セットの利用頻度を管理する利用頻度記憶部６０７が追加されている点である。 FIG. 6 is a functional block diagram (part 3) of the image processing apparatus according to the embodiment of the present invention. The difference between the functional block diagram (No. 3) of the present embodiment and the functional block diagram (No. 1) of the first embodiment is that when the image processing unit 605 outputs the processing result image, the processing target image, the processing result image, The type of image processing used and the parameters are registered as new entries in the reference image storage unit 606, and the usage frequency storage unit 607 for managing the usage frequency of the reference image set is added.
本装置は、画像の加工に関する事例が多いほど、ユーザの意図に近い事例が見つかりやすくなり、より使い勝手がよくなる。このため、参照画像記憶部６０６に新しいエントリを登録することによって、画像の加工に関する事例を蓄積し、次回以降に本装置を利用する際、よりユーザの意図に近い参照画像セットが見つかる可能性が高まる。 In this apparatus, the more examples of image processing, the easier it is to find an example that is closer to the user's intention, and the usability is improved. Therefore, by registering a new entry in the reference image storage unit 606, cases relating to image processing are accumulated, and a reference image set closer to the user's intention may be found when the apparatus is used next time. Rise.
また、参照画像の利用頻度を管理することによって、参照画像セット表示部に表示する参照画像セットの順番を決定する際に利用頻度順に並べたり、処理対象画像を用いて類似する参照画像を検索する際に参照画像の利用頻度も考慮して一致度を評価したりすることができる。これは利用頻度の高い参照画像セットはより高品質な事例であるという仮定に基づいており、よりユーザの意図に近い参照画像セットを提示できることが期待できる。 Further, by managing the frequency of use of reference images, when determining the order of reference image sets to be displayed on the reference image set display unit, they are arranged in order of use frequency, or similar reference images are searched using processing target images. In this case, the degree of coincidence can be evaluated in consideration of the frequency of use of the reference image. This is based on the assumption that a frequently used reference image set is a higher quality case, and it can be expected that a reference image set closer to the user's intention can be presented.
図７は、本発明の実施形態に係る画像処理装置の処理フロー図（その３）である。 FIG. 7 is a process flowchart (part 3) of the image processing apparatus according to the embodiment of the present invention.
始めに、ユーザは、処理対象の画像を本発明による画像処理装置（以下、本装置と略す）６００に入力する（ステップＳ７０１）。次に、本装置６００は、処理対象画像を解析し、予め設定された画像特徴に関する画像特徴量を画像特徴抽出部６０１を用いて抽出する（ステップＳ７０２）。 First, the user inputs an image to be processed into an image processing apparatus (hereinafter abbreviated as “this apparatus”) 600 according to the present invention (step S701). Next, the apparatus 600 analyzes the processing target image and extracts an image feature amount related to a preset image feature using the image feature extraction unit 601 (step S702).
次に、本装置６００は、抽出された画像特徴量を用いて参照画像検索部６０２により参照画像記憶部６０６に記憶された参照画像群を検索し、一致度の高い参照画像を見つけるとともに、それらに対応付けて記憶されている結果画像、画像処理の種類、並びにパラメータを取得する（ステップＳ７０３）。 Next, the present apparatus 600 searches the reference image group stored in the reference image storage unit 606 by the reference image search unit 602 using the extracted image feature amount, and finds a reference image having a high degree of coincidence. The result image, the type of image processing, and the parameters stored in association with are acquired (step S703).
次に、本装置６００は、取得された参照画像と結果画像とを対応付けて画像表示部６０３に表示する（ステップＳ７０４）。次に、ユーザは、本装置６００の参照画像選択部６０４を用いて、処理対象画像の加工イメージに最も近い参照画像と結果画像とのセットを選択する（ステップＳ７０５）。 Next, the apparatus 600 displays the acquired reference image and result image in association with each other on the image display unit 603 (step S704). Next, the user uses the reference image selection unit 604 of the apparatus 600 to select a set of a reference image and a result image that is closest to the processed image of the processing target image (step S705).
次に、本装置６００は、画像処理部６０５により選択されたセットに対応する画像処理の種類とパラメータを用いて処理対象画像を加工する（ステップＳ７０６）。次に、本装置６００は、処理結果の画像を出力する（ステップＳ７０７）。 Next, the apparatus 600 processes the processing target image using the type and parameters of the image processing corresponding to the set selected by the image processing unit 605 (step S706). Next, the apparatus 600 outputs a processing result image (step S707).
次に、本装置６００は、ユーザにより画像が確定されると処理対象画像と処理結果画像、画像処理の種類、パラメータを対応付けて参照画像記憶部６０６に記録する（ステップＳ７０８）。最後に、本装置６００は、利用頻度記憶部６０７に記憶された処理結果画像の作成に利用された参照画像セットの利用頻度を更新する（ステップＳ７０９）。 Next, when the image is determined by the user, the apparatus 600 records the processing target image, the processing result image, the type of image processing, and the parameters in association with each other in the reference image storage unit 606 (step S708). Finally, the apparatus 600 updates the use frequency of the reference image set used for creating the processing result image stored in the use frequency storage unit 607 (step S709).
図８は、本発明の実施形態に係る画像処理装置の機能ブロック図（その４）である。本実施例の機能ブロック図（その４）と実施例１の機能ブロック図（その１）との差異は、参照画像記憶部８０６において参照画像と対応つけられているものが画像処理の種類ではなく感性語である点、並びに感性語と対応する画像処理の種類とパラメータとを対応付けて記憶する感性語記憶部８０７を備える点である。 FIG. 8 is a functional block diagram (part 4) of the image processing apparatus according to the embodiment of the present invention. The difference between the functional block diagram (No. 4) of the present embodiment and the functional block diagram (No. 1) of the first embodiment is that what is associated with the reference image in the reference image storage unit 806 is not the type of image processing. It is a point provided with a sensitivity word storage unit 807 that stores a point that is a sensitivity word and a type of image processing corresponding to the sensitivity word and a parameter in association with each other.
実施例２では、ユーザにより参照画像セットが選択された際に、更に画像を調整するために画像処理のパラメータを指定するためのスライドバーを表示していた。しかし、先述したように画像処理の名称は画像の物理的な特徴を表していることが多いため、画像処理の知識を持たないユーザには直感的に分かりづらい。そこで、画像処理の名称を画像の特徴を表す形容詞である感性語で代替することにより、直感的に分かりやすくなることが期待できる。 In the second embodiment, when a reference image set is selected by the user, a slide bar for designating image processing parameters is displayed to further adjust the image. However, as described above, since the name of the image processing often represents the physical characteristics of the image, it is difficult for a user who does not have knowledge of image processing to understand intuitively. Therefore, by replacing the name of the image processing with a sensitivity word that is an adjective representing the characteristics of the image, it can be expected to be intuitively easy to understand.
本発明では、予めオペレータにより参照画像と、その画像を表現する感性語、並びに画像と感性語との一致度とを対応付けて参照画像記憶部８０６に登録しておく。併せて各感性語と、その一致度に影響を与える画像処理の種類と各処理の影響度合いを表す重みとを対応付けて感性語記憶部８０７に登録しておく。 In the present invention, the reference image is stored in advance in the reference image storage unit 806 in association with the reference image, the sensitivity word expressing the image, and the degree of coincidence between the image and the sensitivity word. In addition, each sensitivity word is registered in the sensitivity word storage unit 807 in association with the type of image processing that affects the degree of coincidence and the weight that represents the degree of influence of each processing.
ユーザに対してパラメータ指定領域を表示する際には、参照画像に対応つけられた感性語の中から特に一致度の高いものを１つ以上選択し、その感性語を表示する。併せて各感性語のパラメータを変更するためのスライドバーの初期値として一致度を利用する。ユーザによってある感性語のスライドバーが変更されると、その感性語に影響を与える画像処理の種類と重みに基づいて画像処理を実行し、処理結果を用いてプレビュー表示領域を更新する。 When displaying the parameter designation area for the user, one or more emotion words having a particularly high matching degree are selected from the sensitivity words associated with the reference image, and the sensitivity words are displayed. In addition, the degree of coincidence is used as the initial value of the slide bar for changing the parameter of each sensitivity word. When the user changes the slide bar of a sensitivity word, the image processing is executed based on the type and weight of image processing that affects the sensitivity word, and the preview display area is updated using the processing result.
この様にして、ユーザに画像処理を意識させることなく、より抽象的な感性語を用いることによって、直感的に分かりやすい操作が実現できる。 In this way, an intuitively easy-to-understand operation can be realized by using more abstract sensitivity words without making the user aware of image processing.
以上、いくつかの実施例を説明したが、特許請求の範囲に定義された本発明は趣旨、及び、その範囲から逸脱することなく、これらの実施例や具体例に様々な修正、及び、変更が可能である。 Although several embodiments have been described above, the present invention defined in the scope of the claims is intended to be variously modified and changed without departing from the spirit and scope of the present invention. Is possible.
１００ 画像処理装置
１０１ 画像特徴抽出部
１０２ 参照画像検索部
１０３ 画像表示部
１０４ 参照画像選択部
１０５ 画像処理部
１０６ 参照画像記憶部
３０１ カメラ
３０２ コンピュータ
３０４ 参照画像データベース
４０１ プレビュー表示領域
４０２ 参照画像セット表示領域
４０３ 参照画像セット
５０６ パラメータ指定領域
６０７ 利用頻度記憶部
８０７ 感性語記憶部
DESCRIPTION OF SYMBOLS 100 Image processing apparatus 101 Image feature extraction part 102 Reference image search part 103 Image display part 104 Reference image selection part 105 Image processing part 106 Reference image memory | storage part 301 Camera 302 Computer 304 Reference image database 401 Preview display area 402 Reference image set display area 403 Reference image set 506 Parameter designation area 607 Usage frequency storage unit 807 Sensitivity word storage unit
Claims (9)
予め用意された参照画像、前記参照画像から前記画像特徴抽出手段を用いて抽出された特徴量、前記参照画像を加工した結果である結果画像、前記加工に使用した画像処理、並びに前記加工に使用した前記画像処理のパラメータとを対応付けて記憶する参照画像記憶手段と、
前記入力画像から抽出された特徴量を用いて前記参照画像記憶手段を検索し、前記入力画像に類似する参照画像を取得する参照画像検索手段と、
前記参照画像検索手段により取得された参照画像と対応する結果画像とをセットで表示する画像表示手段と、
前記画像表示手段に表示された前記セットから任意のセットを選択する参照画像選択手段と、
前記参照画像選択手段によって選択された前記セットと対応する画像処理のパラメータとを用いて前記入力画像を加工する画像処理手段と、
を備えることを特徴とする画像処理装置。 Image feature extraction means for analyzing the input image and extracting features;
Reference image prepared in advance, feature amount extracted from the reference image using the image feature extraction means, result image obtained by processing the reference image, image processing used for the processing, and used for the processing Reference image storage means for storing the image processing parameters in association with each other;
A reference image search means for searching the reference image storage means using a feature amount extracted from the input image and acquiring a reference image similar to the input image;
Image display means for displaying the reference image acquired by the reference image search means and the corresponding result image as a set;
Reference image selection means for selecting an arbitrary set from the set displayed on the image display means;
Image processing means for processing the input image using the image processing parameters corresponding to the set selected by the reference image selection means;
An image processing apparatus comprising:
前記画像表示手段が、前記参照画像選択手段によって選択された参照画像と対応する画像処理とパラメータとを表示し、前記パラメータの変更を受け付けるパラメータ指定手段を更に備え、
前記パラメータ指定手段によって前記パラメータが変更された際に、
前記画像処理手段が変更後の前記パラメータを用いて前記入力画像を加工した出力画像を生成し、前記画像表示手段が前記出力画像を表示する
ことを特徴とする画像処理装置。 The image processing apparatus according to claim 1.
The image display means further includes a parameter designation means for displaying an image process and a parameter corresponding to the reference image selected by the reference image selection means, and accepting the change of the parameter,
When the parameter is changed by the parameter specifying means,
An image processing apparatus, wherein the image processing unit generates an output image obtained by processing the input image using the changed parameter, and the image display unit displays the output image.
前記入力画像、前記出力画像、前記出力画像の生成に使用した画像処理、並びに前記画像処理に用いたパラメータとを対応付けて前記参照画像記憶手段に登録する事例登録手段を更に備えることを特徴とする画像処理装置。 The image processing apparatus according to claim 1 or 2,
The image processing apparatus further comprises case registration means for registering the input image, the output image, the image processing used to generate the output image, and the parameters used for the image processing in association with the reference image storage means. An image processing apparatus.
前記参照画像とその利用頻度とを対応付けて記憶する利用頻度記憶手段
を更に備えることを特徴とする画像処理装置。 The image processing apparatus according to any one of claims 1 to 3,
An image processing apparatus further comprising usage frequency storage means for storing the reference image and its usage frequency in association with each other.
前記参照画像検索手段が前記参照画像記憶手段を検索する際に、前記利用頻度記憶手段に記憶された利用頻度を検索結果に反映する
ことを特徴とする画像処理装置。 The image processing apparatus according to claim 4.
When the reference image search unit searches the reference image storage unit, the use frequency stored in the use frequency storage unit is reflected in a search result.
前記画像表示手段が前記セットを表示する際に、前記利用頻度記憶手段に記憶された利用頻度を用いて前記セットの並び順を決定する
ことを特徴とする画像処理装置。 The image processing apparatus according to claim 4 or 5,
An image processing apparatus, wherein when the image display means displays the set, the arrangement order of the sets is determined using the use frequency stored in the use frequency storage means.
感性語と画像処理、並びに前記画像処理が前記感性語に与える影響度とを対応付けて記憶する感性語記憶手段
を更に備え、
前記参照画像記憶手段が前記参照画像と前記感性語、並びに前記参照画像と前記感性語との一致度とを対応付けて記憶する
ことを特徴とする画像処理装置。 The image processing apparatus according to any one of claims 1 to 6,
Sensitivity word storage means for storing the sensitivity word, image processing, and the degree of influence of the image processing on the sensitivity word in association with each other;
The image processing apparatus, wherein the reference image storage unit stores the reference image and the sensitivity word, and the degree of coincidence between the reference image and the sensitivity word in association with each other.
前記パラメータ指定手段が前記画像処理と前記パラメータではなく、前記感性語と前記一致度を表示し、前記一致度が変更された際に、前記感性語記憶手段に記憶された前記感性語に対応する画像処理と重みとを用いてパラメータを変更する
ことを特徴とする画像処理装置。 The image processing apparatus according to claim 7.
The parameter designation means displays the sensitivity word and the degree of coincidence instead of the image processing and the parameter, and corresponds to the sensitivity word stored in the sensitivity word storage means when the degree of coincidence is changed. An image processing apparatus, wherein parameters are changed using image processing and weights.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011003147A JP5707947B2 (en) | 2011-01-11 | 2011-01-11 | Image processing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011003147A JP5707947B2 (en) | 2011-01-11 | 2011-01-11 | Image processing device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012146071A true JP2012146071A (en) | 2012-08-02 |
| JP5707947B2 JP5707947B2 (en) | 2015-04-30 |
Family
ID=46789582
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011003147A Expired - Fee Related JP5707947B2 (en) | 2011-01-11 | 2011-01-11 | Image processing device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5707947B2 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015219790A (en) * | 2014-05-19 | 2015-12-07 | 株式会社リコー | Image processor, image processing method, and image processing program |
| US9489748B2 (en) | 2014-02-28 | 2016-11-08 | Fuji Xerox Co., Ltd. | Image processing apparatus and method, image processing system, and non-transitory computer readable medium |
| US9544462B2 (en) | 2014-06-09 | 2017-01-10 | Olympus Corporation | Image capturing apparatus and control method of image capturing apparatus |
| JP2017126345A (en) * | 2012-12-21 | 2017-07-20 | グーグル インコーポレイテッド | Recommending transformations for photography |
| WO2020130747A1 (en) * | 2018-12-21 | 2020-06-25 | 삼성전자 주식회사 | Image processing apparatus and method for style transformation |
| JP2022060393A (en) * | 2019-05-31 | 2022-04-14 | 富士フイルム株式会社 | Image processing apparatus, image processing system, image processing method, and image processing program |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11185034A (en) * | 1997-12-24 | 1999-07-09 | Casio Comput Co Ltd | Image data correction device and recording medium recording image data correction processing program |
| JP2002373344A (en) * | 2001-06-15 | 2002-12-26 | Oki Data Corp | Device for supporting color arrangement |
| JP2005202469A (en) * | 2004-01-13 | 2005-07-28 | Fuji Xerox Co Ltd | Image processor, image processing method and program |
| JP2006318449A (en) * | 2005-04-13 | 2006-11-24 | Fujifilm Holdings Corp | Album creating apparatus, album creating method and program |
| JP2007293582A (en) * | 2006-04-25 | 2007-11-08 | Dainippon Screen Mfg Co Ltd | Image processor, setting method of image processing condition in the image processor, and program |
| JP2008011316A (en) * | 2006-06-30 | 2008-01-17 | Casio Comput Co Ltd | Camera-apparatus and camera apparatus control program |
| JP2008146227A (en) * | 2006-12-07 | 2008-06-26 | Canon Inc | Edition device, edition method, and edition program |
| JP2009031854A (en) * | 2007-07-24 | 2009-02-12 | Seiko Epson Corp | Image processor, image processing method and computer program |
-
2011
- 2011-01-11 JP JP2011003147A patent/JP5707947B2/en not_active Expired - Fee Related
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11185034A (en) * | 1997-12-24 | 1999-07-09 | Casio Comput Co Ltd | Image data correction device and recording medium recording image data correction processing program |
| JP2002373344A (en) * | 2001-06-15 | 2002-12-26 | Oki Data Corp | Device for supporting color arrangement |
| JP2005202469A (en) * | 2004-01-13 | 2005-07-28 | Fuji Xerox Co Ltd | Image processor, image processing method and program |
| JP2006318449A (en) * | 2005-04-13 | 2006-11-24 | Fujifilm Holdings Corp | Album creating apparatus, album creating method and program |
| JP2007293582A (en) * | 2006-04-25 | 2007-11-08 | Dainippon Screen Mfg Co Ltd | Image processor, setting method of image processing condition in the image processor, and program |
| JP2008011316A (en) * | 2006-06-30 | 2008-01-17 | Casio Comput Co Ltd | Camera-apparatus and camera apparatus control program |
| JP2008146227A (en) * | 2006-12-07 | 2008-06-26 | Canon Inc | Edition device, edition method, and edition program |
| JP2009031854A (en) * | 2007-07-24 | 2009-02-12 | Seiko Epson Corp | Image processor, image processing method and computer program |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2936796B1 (en) * | 2012-12-21 | 2021-12-08 | Google LLC | Recommending transformations for photography |
| JP2017126345A (en) * | 2012-12-21 | 2017-07-20 | グーグル インコーポレイテッド | Recommending transformations for photography |
| US9489748B2 (en) | 2014-02-28 | 2016-11-08 | Fuji Xerox Co., Ltd. | Image processing apparatus and method, image processing system, and non-transitory computer readable medium |
| JP2015219790A (en) * | 2014-05-19 | 2015-12-07 | 株式会社リコー | Image processor, image processing method, and image processing program |
| US9544462B2 (en) | 2014-06-09 | 2017-01-10 | Olympus Corporation | Image capturing apparatus and control method of image capturing apparatus |
| WO2020130747A1 (en) * | 2018-12-21 | 2020-06-25 | 삼성전자 주식회사 | Image processing apparatus and method for style transformation |
| KR20200078214A (en) * | 2018-12-21 | 2020-07-01 | 삼성전자주식회사 | Image processing apparatus and method for transfering style |
| US20220067421A1 (en) * | 2018-12-21 | 2022-03-03 | Samsung Electronics Co., Ltd. | Image processing apparatus and method for style transformation |
| US11887215B2 (en) | 2018-12-21 | 2024-01-30 | Samsung Electronics Co., Ltd. | Image processing apparatus and method for style transformation |
| KR102646889B1 (en) * | 2018-12-21 | 2024-03-12 | 삼성전자주식회사 | Image processing apparatus and method for transfering style |
| JP2022060393A (en) * | 2019-05-31 | 2022-04-14 | 富士フイルム株式会社 | Image processing apparatus, image processing system, image processing method, and image processing program |
| JP7314338B2 (en) | 2019-05-31 | 2023-07-25 | 富士フイルム株式会社 | Image processing device, image processing system, image processing method, and image processing program |
| US12056850B2 (en) | 2019-05-31 | 2024-08-06 | Fujifilm Corporation | Image processing device, image processing system, image processing method, and image processing program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5707947B2 (en) | 2015-04-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5707947B2 (en) | Image processing device | |
| US9846708B2 (en) | Searching of images based upon visual similarity | |
| JP5820935B2 (en) | Search result display method, apparatus, system, and computer storage medium | |
| US9009617B2 (en) | Decision aiding user interfaces | |
| JP5693369B2 (en) | Information processing apparatus, control method thereof, and computer program | |
| US20110093478A1 (en) | Filter hints for result sets | |
| JP2020510896A (en) | Diagram for structured data | |
| JP2009230248A (en) | Evaluation display system, server device, evaluation display method, and program | |
| JP6523188B2 (en) | Work procedure generation support device, work procedure generation support method, and program | |
| US9552443B2 (en) | Information processing apparatus and search method | |
| CN117218239A (en) | Data processing method and device, electronic equipment and readable storage medium | |
| US20200089685A1 (en) | Search device, method and program recording medium | |
| JP6955161B2 (en) | Information processing program, information processing device and information processing method | |
| JP6385616B1 (en) | Display screen creation support apparatus and display screen creation support program | |
| JP6190904B1 (en) | Similar document search device | |
| JP7264171B2 (en) | Image retrieval system, image retrieval method, and program | |
| JP6244902B2 (en) | Inter-gadget display cooperation method, inter-gadget display cooperation program, and information processing apparatus | |
| JP2013222379A (en) | Information processing device, icon display method and program | |
| JPWO2012101700A1 (en) | UI (UserInterface) creation support apparatus, UI creation support method, and program | |
| JP4969536B2 (en) | Design support apparatus, method thereof, and storage medium thereof | |
| JPWO2020085374A1 (en) | Proficiency index providing device, proficiency index providing method, and program | |
| JP2015111429A (en) | Alteration management support apparatus, alteration management support method, and alteration management support program | |
| US9990387B2 (en) | Information processing apparatus, information processing method and non-transitory computer readable medium | |
| US9208152B2 (en) | Document retrieval apparatus, document retrieval method, and computer readable medium | |
| JPWO2014112060A1 (en) | Programmable controller system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131202 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140901 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140916 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141008 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141125 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141212 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150203 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150216 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5707947 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |