WO2017134751A1 - 撮像装置、画像処理装置、画像処理方法および画像処理プログラム - Google Patents
撮像装置、画像処理装置、画像処理方法および画像処理プログラム Download PDFInfo
- Publication number
- WO2017134751A1 WO2017134751A1 PCT/JP2016/053104 JP2016053104W WO2017134751A1 WO 2017134751 A1 WO2017134751 A1 WO 2017134751A1 JP 2016053104 W JP2016053104 W JP 2016053104W WO 2017134751 A1 WO2017134751 A1 WO 2017134751A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- parameter
- scene
- image
- shooting
- unit
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims description 36
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000003384 imaging method Methods 0.000 claims description 37
- 238000011161 development Methods 0.000 description 58
- 230000000875 corresponding effect Effects 0.000 description 14
- 230000000694 effects Effects 0.000 description 11
- 238000012937 correction Methods 0.000 description 8
- 238000000034 method Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
Definitions
- the present invention relates to an imaging device, an image processing device, an image processing method, and an image processing program.
- Patent Literature 1 Since the imaging device of Patent Literature 1 presents a shooting mode that matches the user's preference estimated by the user's past shooting history, it is easy to obtain a similar image, and the user's preference is fixed. There is an inconvenience that it will be converted. That is, it cannot be said that a shooting mode that has not been used in the past does not necessarily match the user's preference, and if a previously selected shooting mode is preferentially presented, a new shooting is performed. The opportunity to determine whether the mode meets the user's preference will be lost.
- the present invention has been made in view of the circumstances described above, and is an imaging apparatus and an image processing apparatus that can prevent a user's preference from being fixed and can give a user notice of a new image different from the preference.
- An object of the present invention is to provide an image processing method and an image processing program.
- An aspect of the present invention includes an imaging unit that captures an image by capturing a subject, and a scene determination unit that detects a subject in the image and determines a shooting scene for the image acquired by the imaging unit.
- a parameter storage unit that associates and stores a plurality of shooting scenes and parameters used to generate an image corresponding to each shooting scene; and the parameter storage unit based on the shooting scene determined by the scene determination unit
- a parameter selection unit that selects the parameter from a unit, and a parameter presentation unit that presents the parameter selected by the parameter selection unit, and the parameter stored in the parameter storage unit is stored in the past by the imaging unit.
- Including the first parameter used for generation of the acquired past image, and the parameter selection unit includes the scene determination unit. When the previous image corresponding to another has been photographed scene exists, and the first parameter and at least partially the first parameter is an imaging device for selecting a second parameter which is positioned the counter electrode.
- the scene discrimination unit detects the subject in the image and discriminates the shooting scene.
- the parameter selection unit searches the corresponding parameter in the parameter storage unit using the determined shooting scene.
- the parameter selection unit selects the first parameter used to generate the past image, and at least a part of the first parameter is opposite to the first parameter.
- the second parameter that is located is selected.
- the selected parameter is presented by the parameter presentation unit.
- a development parameter for generating an image that matches the user's own preference can be presented to the user as an option.
- a parameter for generating an image deviating from the user's own preference can be presented to the user as an option. That is, according to this aspect, not only the parameter reflecting the user's preference but also the parameter different from the user preference can be presented, so that the user can be aware of the possibility of a new image.
- the parameter selection unit may select any of the parameters corresponding to the shooting scene when there is no past image corresponding to the shooting scene determined by the scene determination unit. . In this way, when there is no past image corresponding to the shooting scene, the user's preference has not yet been formed, so by selecting and presenting the parameter corresponding to the shooting scene, the appropriate parameter Can be recommended to the user.
- the first parameter stored in the parameter storage unit includes a use frequency
- the parameter selection unit includes a plurality of past images corresponding to the shooting scene determined by the scene determination unit. If present, the first parameter having the highest use frequency may be selected. In this way, it is possible to present the first parameter that most strongly reflects the user's preference among the first parameters that match the user's preference.
- the second parameter partly positioned opposite to the first parameter selected in this way is also presented, the user can be aware of an image greatly deviating from the user's preference.
- a scene discrimination unit that detects a subject in the image and discriminates a shooting scene, a plurality of shooting scenes, and each of the shooting scenes
- a parameter storage unit that stores parameters used for generating an image corresponding to a scene in association with each other, and a parameter selection unit that selects the parameters from the parameter storage unit based on the shooting scene determined by the scene determination unit
- the parameter stored in the parameter storage unit includes a first parameter used for generation of a past image acquired in the past, and the parameter selection unit is the imaging determined by the scene determination unit When the past image corresponding to a scene exists, the first parameter and at least a part of the first image are opposite to the first parameter.
- An image processing apparatus for selecting a second parameter for location for an image obtained by photographing a subject.
- a scene determination step for determining a shooting scene by detecting a subject in the image obtained by shooting the subject, and a shooting scene determined by the scene determination step.
- a parameter selection step of selecting a parameter stored in association with the photographic scene, the parameter including a first parameter used to generate a past image acquired in the past, and the parameter selection step Is an image for selecting the first parameter and the second parameter at least partially positioned opposite to the first parameter when the past image corresponding to the shooting scene determined by the scene determination step exists. It is a processing method.
- a scene determination step for detecting a subject in the image and determining a shooting scene, and a shooting determined by the scene determination step
- a parameter selection step of selecting a parameter stored in association with a photographic scene based on a scene, wherein the parameter includes a first parameter used to generate a past image acquired in the past, and the parameter selection The step selects the first parameter and the second parameter at least partially positioned opposite to the first parameter when the past image corresponding to the photographic scene determined by the scene determination step exists.
- An image processing program for causing a computer to execute image processing.
- FIG. 3 It is a block diagram showing an imaging device concerning one embodiment of the present invention. It is a figure explaining the parameter in the imaging device of FIG. 3 is a flowchart for explaining the operation of the imaging apparatus in FIG. 1. It is a flowchart which shows the detail of the development parameter selection step for presentation in the flowchart of FIG. It is a figure which shows an example of the parameter in the imaging device of FIG.
- the imaging device 1 includes an imaging unit 2, an image processing device 3 according to an embodiment of the present invention that processes an image acquired by the imaging unit 2, A monitor (parameter presenting unit) 4 that displays an image processed by the image processing apparatus 3, an input unit 5 that allows an operator to select a development parameter (parameter), and an image generated by the determined development parameter are stored. And an image storage unit 6.
- the imaging unit 2 is, for example, a camera that captures an image by capturing a subject.
- the image processing apparatus 3 processes an image acquired by the imaging unit 2 to recognize a subject, and generates a past image acquired in the past by a user, and a scene determination unit 7 that determines a shooting scene.
- a preference parameter storage unit (parameter storage unit) 8 that stores the development parameters used in order to be associated with the shooting scene, and is considered to be suitable for each shooting scene and the shooting scene.
- a recommended parameter storage unit (parameter storage unit) 9 that stores development parameters in association with each other is provided.
- the development parameter is a parameter used in image processing in order to perform image processing on the image acquired by the imaging unit 2 in accordance with user settings and add a desired effect to the image.
- color and contrast can be mentioned.
- Examples of the color as the development parameter include chromatic to achromatic, warm to cold, and the like.
- the image processing apparatus 3 searches the preference parameter storage unit 8 and the recommended parameter storage unit 9 using the shooting scene determined by the scene determination unit 7, and acquires a shooting scene similar to the shooting scene of the acquired image.
- the similar image selection unit 10 that reads the development parameters associated with is provided.
- the image processing apparatus 3 includes a parameter selection unit 11 that selects a development parameter to be presented to the user according to the photographic scene determined by the scene determination unit 7 and a parameter determination unit 12.
- the parameter selection unit 11 selects all the read parameters as development parameters to be presented.
- the first development parameter which is a development parameter for the past image
- the parameter selection unit 11 has a second position at least a part of which is opposite to the first development parameter. Development parameters are selected.
- the first development parameter read out from the preference parameter storage unit 8 is “chromatic color, cold color system, high contrast”
- the “achromatic color” located at the counter electrode of the chromatic color, and the counter electrode of the cold color system.
- One or more second development parameters including at least one of the “warm color system” positioned and the “low contrast” positioned at the opposite side of the high contrast are selected.
- the parameter selection unit 11 processes the image acquired by the imaging unit 2 using the development parameters read from the selected first development parameter, second development parameter, and recommended parameter storage unit 9, and converts the generated image into the development parameters. At the same time, it is output to the monitor 4. The user confirms the image displayed on the monitor 4, selects a desired development parameter, and inputs it from the input unit 5.
- the input unit 5 is an arbitrary input device such as a keyboard, a mouse, or a touch panel.
- the parameter determination unit 12 When the user determines any image and development parameters displayed on the monitor 4 via the input unit 5, the parameter determination unit 12 outputs the generated image to the image storage unit 6, and the scene determination unit The development parameters determined together with the photographic scene determined by 7 are stored in the preference parameter storage unit 8.
- the image storage unit 6 is, for example, a memory card.
- an image is acquired by the imaging unit 2 as shown in FIG. 3 (step S1).
- an image processing method is performed.
- the acquired image is sent to the scene determination unit 7, and the scene determination unit 7 recognizes the subject in the image and determines the shooting scene (scene determination step S2).
- the determined photographic scene is sent to the similar image selection unit 10, the preference parameter storage unit 8 and the recommended parameter storage unit 9 are searched, and the stored development parameters are selected (parameter selection step S3).
- the development parameter selected by the similar image selection unit 10 is sent to the parameter selection unit 11 to select a development parameter to be presented on the monitor 4 (parameter selection step S4).
- the selection of the development parameter in the parameter selection unit 11 is performed as shown in FIG.
- step S41 it is determined whether or not the development parameter selected by the similar image selection unit 10 includes a first development parameter that is a development parameter for the past image read from the preference parameter storage unit 8 (step S41). If it exists, it is determined whether or not the number of times of shooting of the determined shooting scene (target scene) is equal to or greater than a predetermined threshold (step S42).
- the first development parameter is selected from the preference parameter storage unit 8.
- the preference parameter storage unit 8 stores the usage frequency in association with the shooting scene and the development parameter.
- a second development parameter arranged at a position where at least one of the parameters is a counter electrode is also selected (step S44).
- the development parameter of the past image of the target scene stored in the preference parameter storage unit 8 is selected ( Step S45).
- the development parameter considered to be most appropriate for the shooting scene is selected in the recommended parameter storage unit 9 (step S46).
- the image acquired by the imaging unit 2 is subjected to image processing to generate an image (step S5), and the generated image and the used image are used.
- the developed parameters are displayed on the monitor 4 in a correlated form (step S6).
- a user who views the image displayed on the monitor 4 inputs a desired development parameter from the input unit 5 to determine the development parameter (step S7).
- the image generated using the determined development parameter is stored in the image storage unit 6 and the determined development parameter is stored in the preference parameter storage unit 8 in association with the shooting scene (step S8).
- the first development parameter used for the past image is selected using the shooting scene determined by the scene determination unit 7. Therefore, an image reflecting the user's preference can be presented to the user.
- the second development parameter at least a part of which is opposite to the first development parameter, is selected, so that it deviates from the user's preference that is not intended by the user.
- An image to which the effect is added can also be presented as an option.
- the recommended parameter storage unit 9 may be realized by a server connected via a network. Further, the development parameters determined by the user input may be fed back to the recommended parameter storage unit 9 and updated as well as being fed back to the preference parameter storage unit 8.
- chromatic and achromatic colors, cold and warm colors, low contrast and high contrast are exemplified as development parameters.
- the present invention is not limited to this, and any other development parameters are adopted. May be.
- the parameters stored in the preference parameter storage unit 8 are not limited to the development parameters, and effect parameters may be employed.
- the development parameters include tone curve correction and contrast correction
- the effect parameters include HDR processing and painting-like filters.
- the development parameters include noise reduction and contrast correction
- the effect parameters include HDR processing and color enhancement processing.
- the development parameter can be a resolution enhancement system process (for example, edge enhancement, super-resolution process, etc.), and the effect parameter can be a picture-like filter.
- the development parameters include noise reduction and color correction (skin color correction), and the effect parameters include blur control (background blur etc.) and soft focus.
- the development parameter may include saturation correction
- the effect parameter may include a painting filter and a color enhancement system.
- resolution improvement system processing for example, edge strength, super-resolution processing, etc.
- color correction green correction
- HDR processing and color are used as effect parameters. Emphasis processing can be mentioned.
- resolution enhancement system processing can be given as the development parameter
- tilt enhancement processing and illustration-like processing can be given as the effect parameters.
- An example of the parameters is shown in FIG.
- the processing performed by the image processing apparatus 3 is assumed to be performed by hardware.
- the present invention is not limited to this, and can be processed by software, for example.
- the image processing apparatus 3 includes a CPU (not shown) that performs processing and a main storage device (not shown) such as a RAM, and stores a program for causing the CPU to execute all or part of the above processing. Any storage medium that can be read by a computer may be provided.
- this program is called an image processing program.
- the CPU reads out the image processing program stored in the storage medium and executes information processing / calculation processing, thereby realizing the same processing as that of the image processing apparatus 3 described above.
- the image processing program may be distributed to a computer via a communication line, and the computer that has received the distribution may execute the image processing program.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
ユーザの嗜好の固定化を防止し、新たな画像への気づきをユーザに与えることを目的として、本発明に係る撮像装置（１）は、撮像部（２）と、取得された画像内の被写体を検出して撮影シーンの判別を行うシーン判別部（７）と、複数の撮影シーンと各撮影シーンに対応する画像の生成に使用されるパラメータとを対応づけて記憶するパラメータ記憶部（８，９）と、判別された撮影シーンに基づいてパラメータ記憶部（８，９）からパラメータを選択するパラメータ選択部（１１）と、選択されたパラメータを提示するパラメータ提示部（４）とを備え、過去に取得された過去画像の生成に使用した第１パラメータを含むパラメータが記憶され、パラメータ選択部（１１）は、第１パラメータおよび少なくとも一部が第１パラメータとは対極に位置する第２パラメータを選択する。
Description
本発明は、撮像装置、画像処理装置、画像処理方法および画像処理プログラムに関するものである。
複数の撮影モードを有する撮像装置において、ユーザの過去の撮影において選択された撮影モードの履歴を保存しておき、新たな撮影時に保存して保存しておいた撮影モードを反映させることでユーザの嗜好に合った画像を取得する撮像装置が知られている（例えば、特許文献１参照。）。
特許文献１の撮像装置は、ユーザによる過去の撮影履歴によって推定されるユーザの嗜好に合致するような撮影モードを提示するものであるため、同様の画像が取得され易くなり、ユーザの嗜好が固定化されてしまうという不都合がある。すなわち、過去に利用したことのない撮影モードが必ずしもユーザの嗜好に合わないものであると言うことはできず、過去に選択された撮影モードが優先的に提示される場合には、新たな撮影モードがユーザの嗜好に合うか否かを判断する機会が失われることになる。
本発明は、上述した事情に鑑みてなされたものであって、ユーザの嗜好の固定化を防止し、嗜好とは異なる新たな画像への気づきをユーザに与えることができる撮像装置、画像処理装置、画像処理方法および画像処理プログラムを提供することを目的としている。
本発明の一態様は、被写体を撮影して画像を取得する撮像部と、該撮像部により取得された前記画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別部と、複数の撮影シーンと、各該撮影シーンに対応する画像の生成に使用されるパラメータとを対応づけて記憶するパラメータ記憶部と、前記シーン判別部により判別された撮影シーンに基づいて前記パラメータ記憶部から前記パラメータを選択するパラメータ選択部と、該パラメータ選択部により選択された前記パラメータを提示するパラメータ提示部とを備え、前記パラメータ記憶部に記憶されている前記パラメータが、前記撮像部により過去に取得された過去画像の生成に使用した第１パラメータを含み、前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する撮像装置である。
本態様によれば、撮像部により被写体が撮影されて画像が取得されると、シーン判別部によって画像内の被写体が検出されて撮影シーンが判別される。撮影シーンが判別されると、パラメータ選択部において、判別された撮影シーンを用いてパラメータ記憶部内の対応するパラメータが検索される。判別された撮影シーンに対応する過去画像が存在する場合には、パラメータ選択部により、該過去画像の生成に使用した第１パラメータが選択されるとともに、少なくとも一部が第１パラメータとは対極に位置する第２パラメータが選択される。そして、選択されたパラメータはパラメータ提示部によって提示される。
第１パラメータが提示されることにより、ユーザ自身の嗜好に合致する画像を生成するための現像パラメータを選択肢としてユーザに提示することができる。また、第２パラメータが提示されることにより、ユーザ自身の嗜好とは乖離した画像を生成するためのパラメータについても選択肢としてユーザに提示することができる。すなわち、本態様によれば、ユーザの嗜好が反映されたパラメータのみならず、ユーザ嗜好とは異なるパラメータをも提示することにより、ユーザに新たな画像の可能性について気づきを与えることができる。
上記態様においては、前記パラメータ選択部は、前記シーン判別部により判別された前記撮影シーンに対応する過去画像が存在しない場合に、前記撮影シーンに対応するいずれかの前記パラメータを選択してもよい。
このようにすることで、撮影シーンに対応する過去画像が存在しない場合には、ユーザの嗜好が未だ形成されていないため、撮影シーンに対応するパラメータを選択して提示することにより、適正なパラメータをユーザに推奨することができる。
このようにすることで、撮影シーンに対応する過去画像が存在しない場合には、ユーザの嗜好が未だ形成されていないため、撮影シーンに対応するパラメータを選択して提示することにより、適正なパラメータをユーザに推奨することができる。
また、上記態様においては、前記パラメータ記憶部に記憶されている前記第１パラメータが使用頻度を含み、前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が複数存在する場合に、使用頻度が最も高い前記第１パラメータを選択してもよい。
このようにすることで、ユーザの嗜好に合う第１パラメータのうち、ユーザの嗜好を最も強く反映した第１パラメータを提示することができる。また、そのようにして選択される第１パラメータに対して一部が対極に位置する第２パラメータをも提示するので、ユーザの嗜好とは大きく乖離した画像についてユーザに気づきを与えることができる。
このようにすることで、ユーザの嗜好に合う第１パラメータのうち、ユーザの嗜好を最も強く反映した第１パラメータを提示することができる。また、そのようにして選択される第１パラメータに対して一部が対極に位置する第２パラメータをも提示するので、ユーザの嗜好とは大きく乖離した画像についてユーザに気づきを与えることができる。
また、本発明の他の態様は、被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別部と、複数の撮影シーンと、各該撮影シーンに対応する画像の生成に使用されるパラメータとを対応づけて記憶するパラメータ記憶部と、前記シーン判別部により判別された撮影シーンに基づいて前記パラメータ記憶部から前記パラメータを選択するパラメータ選択部とを備え、前記パラメータ記憶部に記憶されている前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理装置である。
また、本発明の他の態様は被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別ステップと、該シーン判別ステップにより判別された撮影シーンに基づいて、撮影シーンと対応づけて記憶されたパラメータを選択するパラメータ選択ステップとを含み、前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、前記パラメータ選択ステップは、前記シーン判別ステップにより判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理方法である。
また、本発明の他の態様は、被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別ステップと、該シーン判別ステップにより判別された撮影シーンに基づいて、撮影シーンと対応づけて記憶されたパラメータを選択するパラメータ選択ステップとを含み、前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、前記パラメータ選択ステップは、前記シーン判別ステップにより判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理をコンピュータに実行させる画像処理プログラムである。
本発明によれば、ユーザの嗜好の固定化を防止し、嗜好とは異なる新たな画像への気づきをユーザに与えることができるという効果を奏する。
以下、本発明の一実施形態に係る撮像装置１について、図面を参照して以下に説明する。
本実施形態に係る撮像装置１は、図１に示されるように、撮像部２と、該撮像部２により取得された画像を処理する本発明の一実施形態に係る画像処理装置３と、該画像処理装置３により処理された画像等を表示するモニタ（パラメータ提示部）４と、操作者に現像パラメータ（パラメータ）を選択させる入力部５と、決定された現像パラメータにより生成した画像を記憶する画像記憶部６とを備えている。
本実施形態に係る撮像装置１は、図１に示されるように、撮像部２と、該撮像部２により取得された画像を処理する本発明の一実施形態に係る画像処理装置３と、該画像処理装置３により処理された画像等を表示するモニタ（パラメータ提示部）４と、操作者に現像パラメータ（パラメータ）を選択させる入力部５と、決定された現像パラメータにより生成した画像を記憶する画像記憶部６とを備えている。
撮像部２は、例えば、被写体を撮影して画像を取得するカメラである。
本実施形態に係る画像処理装置３は、撮像部２により取得された画像を処理して被写体を認識し、撮影シーンを判別するシーン判別部７と、ユーザにより過去に取得された過去画像を生成するために使用された現像パラメータを撮影シーンに対応づけて記憶する嗜好パラメータ記憶部（パラメータ記憶部）８と、各撮影シーンと該撮影シーンに対して好適であると考えられている一般的な現像パラメータとを対応づけて記憶する推奨パラメータ記憶部（パラメータ記憶部）９とを備えている。
本実施形態に係る画像処理装置３は、撮像部２により取得された画像を処理して被写体を認識し、撮影シーンを判別するシーン判別部７と、ユーザにより過去に取得された過去画像を生成するために使用された現像パラメータを撮影シーンに対応づけて記憶する嗜好パラメータ記憶部（パラメータ記憶部）８と、各撮影シーンと該撮影シーンに対して好適であると考えられている一般的な現像パラメータとを対応づけて記憶する推奨パラメータ記憶部（パラメータ記憶部）９とを備えている。
ここで、現像パラメータは、ユーザの設定に応じて撮像部２により取得された画像を画像処理して所望の効果を画像に付加するために、画像処理において使用されるパラメータであり、例えば、図２に示されるように、色およびコントラストを挙げることができる。
また、現像パラメータとしての色は、例えば、有彩色から無彩色、暖色系から寒色系等を挙げることができる。
また、現像パラメータとしての色は、例えば、有彩色から無彩色、暖色系から寒色系等を挙げることができる。
また、画像処理装置３は、シーン判別部７により判別された撮影シーンを用いて嗜好パラメータ記憶部８内および推奨パラメータ記憶部９内を検索し、取得された画像の撮影シーンに類似する撮影シーンに対応づけられた現像パラメータを読み出す類似画像選択部１０を備えている。
さらに、画像処理装置３は、シーン判別部７により判別された撮影シーンに応じてユーザに提示するための現像パラメータを選択するパラメータ選択部１１と、パラメータ決定部１２とを備えている。パラメータ選択部１１は、嗜好パラメータ記憶部８および推奨パラメータ記憶部９から現像パラメータが読み出された場合には、読み出されたパラメータ全てを提示する現像パラメータとして選択するようになっている。また、パラメータ選択部１１は、嗜好パラメータ記憶部８から過去画像に対する現像パラメータである第１現像パラメータが読み出された場合に、第１現像パラメータに対して少なくとも一部が対極に位置する第２現像パラメータを選択するようになっている。
例えば、嗜好パラメータ記憶部８から読み出された第１現像パラメータが、「有彩色、寒色系、高コントラスト」である場合に、有彩色の対極に位置する「無彩色」、寒色系の対極に位置する「暖色系」および高コントラストの対極に位置する「低コントラスト」の少なくとも１つが含まれる１以上の第２現像パラメータが選択されるようになっている。
パラメータ選択部１１は、選択した第１現像パラメータ、第２現像パラメータおよび推奨パラメータ記憶部９から読み出した現像パラメータを用いて撮像部２により取得された画像を処理し、生成された画像を現像パラメータとともにモニタ４に出力するようになっている。
ユーザはモニタ４に表示された画像を確認して、所望する現像パラメータを選択して入力部５から入力するようになっている。入力部５は、キーボード、マウス、タッチパネル等任意の入力装置である。
ユーザはモニタ４に表示された画像を確認して、所望する現像パラメータを選択して入力部５から入力するようになっている。入力部５は、キーボード、マウス、タッチパネル等任意の入力装置である。
ユーザが入力部５を介してモニタ４に表示されたいずれかの画像および現像パラメータを決定した場合にはパラメータ決定部１２が、生成された画像を画像記憶部６に出力するとともに、シーン判別部７により判別された撮影シーンとともに決定された現像パラメータを嗜好パラメータ記憶部８に記憶させるようになっている。画像記憶部６は、例えば、メモリカードである。
このように構成された本実施形態に係る撮像装置１の作用について以下に説明する。
本実施形態に係る撮像装置１を用いて所望の画像を取得するには、図３に示されるように、撮像部２により画像を取得する（ステップＳ１）。
本実施形態に係る撮像装置１を用いて所望の画像を取得するには、図３に示されるように、撮像部２により画像を取得する（ステップＳ１）。
以下、本発明の一実施形態に係る画像処理方法が実施される。
本実施形態に係る画像処理方法によれば、取得された画像はシーン判別部７に送られ、シーン判別部７において画像内の被写体が認識されて撮影シーンが判別される（シーン判別ステップＳ２）。判別された撮影シーンは、類似画像選択部１０に送られて、嗜好パラメータ記憶部８および推奨パラメータ記憶部９が検索され、記憶されている現像パラメータが選択される（パラメータ選択ステップＳ３）。
本実施形態に係る画像処理方法によれば、取得された画像はシーン判別部７に送られ、シーン判別部７において画像内の被写体が認識されて撮影シーンが判別される（シーン判別ステップＳ２）。判別された撮影シーンは、類似画像選択部１０に送られて、嗜好パラメータ記憶部８および推奨パラメータ記憶部９が検索され、記憶されている現像パラメータが選択される（パラメータ選択ステップＳ３）。
類似画像選択部１０において選択された現像パラメータは、パラメータ選択部１１に送られて、モニタ４に提示する現像パラメータが選択される（パラメータ選択ステップＳ４）。
パラメータ選択部１１における現像パラメータの選択は、図４に示されるように実施される。
パラメータ選択部１１における現像パラメータの選択は、図４に示されるように実施される。
すなわち、類似画像選択部１０において選択された現像パラメータ内に嗜好パラメータ記憶部８から読み出された過去画像に対する現像パラメータである第１現像パラメータが存在するか否かが判定され（ステップＳ４１）、存在する場合には、判別された撮影シーン（対象シーン）の撮影回数が所定の閾値以上であるか否かが判定される（ステップＳ４２）。
対象シーンによる撮影回数が所定の閾値以上である場合には、ユーザの嗜好が形成されていると判断できるため、嗜好パラメータ記憶部８内から第１現像パラメータが選択される。ここで、嗜好パラメータ記憶部８内に複数の過去画像が存在する場合には、最大頻度の第１現像パラメータが選択される（ステップＳ４３）。このため、嗜好パラメータ記憶部８には、撮影シーンおよび現像パラメータと対応づけて使用頻度が記憶されている。
さらに、このようにして第１現像パラメータが選択された場合には、いずれか少なくとも１つのパラメータが対極となる位置に配される第２現像パラメータも選択される（ステップＳ４４）。
一方、対象シーンの撮影回数が閾値より少ない場合には、未だ嗜好が形成されていないと考えられるため、嗜好パラメータ記憶部８に記憶されている対象シーンの過去画像の現像パラメータが選択される（ステップＳ４５）。
一方、対象シーンの撮影回数が閾値より少ない場合には、未だ嗜好が形成されていないと考えられるため、嗜好パラメータ記憶部８に記憶されている対象シーンの過去画像の現像パラメータが選択される（ステップＳ４５）。
さらに、判別された撮影シーンに対応する過去画像が存在しない場合には、推奨パラメータ記憶部９内において、撮影シーンに対して最も適正と考えられる現像パラメータが選択される（ステップＳ４６）。
その後、パラメータ選択部１１において選択された１以上の現像パラメータを用いて、撮像部２により取得された画像に画像処理が施されて画像が生成され（ステップＳ５）、生成された画像および用いられた現像パラメータが対応づけられた形態でモニタ４に表示される（ステップＳ６）。モニタ４に表示された画像を見たユーザが、所望する現像パラメータを入力部５から入力することにより、現像パラメータが決定される（ステップＳ７）。
決定された現像パラメータを用いて生成された画像が画像記憶部６に記憶されるとともに、決定された現像パラメータが撮影シーンと対応づけられて嗜好パラメータ記憶部８に記憶される（ステップＳ８）。
このように、本実施形態に係る撮像装置１、画像処理装置３および画像処理方法によれば、シーン判別部７により判別された撮影シーンを用いて過去画像に用いられた第１現像パラメータが選択されるので、ユーザの嗜好を反映した画像をユーザに提示することができる。そして、本実施形態によれば、これに加えて、少なくとも一部が第１現像パラメータとは対極に位置する第２現像パラメータが選択されるので、ユーザが意図していない、ユーザの嗜好から乖離した効果が付加された画像も、選択肢として提示することができる。
これにより、ユーザの嗜好に合致した画像のみが提供されることによる嗜好の固定化を防止して、嗜好とは乖離した効果を付加した画像の可能性への気づきをユーザに与えることができるという利点がある。
なお、本実施形態においては、画像処理装置３が、推奨パラメータ記憶部９を備えている場合について説明したが、推奨パラメータ記憶部９は、ネットワーク経由で接続されたサーバにより実現されてもよい。また、ユーザの入力により決定された現像パラメータを嗜好パラメータ記憶部８にフィードバックするのみならず、推奨パラメータ記憶部９にフィードバックして更新することにしてもよい。
また、本実施形態においては、有彩色と無彩色、寒色系と暖色系および低コントラストと高コントラストを現像パラメータとして例示したが、これに限定されるものではなく、他の任意の現像パラメータを採用してもよい。
また、嗜好パラメータ記憶部８に記憶するパラメータとしては現像パラメータに限られずエフェクトパラメータを採用することもできる。
また、嗜好パラメータ記憶部８に記憶するパラメータとしては現像パラメータに限られずエフェクトパラメータを採用することもできる。
例えば、逆光の撮影シーンである場合には、現像パラメータとしてはトーンカーブ補正およびコントラスト補正、エフェクトパラメータとしてはＨＤＲ系処理および絵画調フィルタを挙げることができる。
また、夜景の撮影シーンである場合には、現像パラメータとしてはノイズ低減およびコントラスト補正、エフェクトパラメータとしてはＨＤＲ系処理および色強調系処理を挙げることができる。
また、夜景の撮影シーンである場合には、現像パラメータとしてはノイズ低減およびコントラスト補正、エフェクトパラメータとしてはＨＤＲ系処理および色強調系処理を挙げることができる。
また、遠景の撮影シーンである場合には、現像パラメータとしては解像感向上系処理（例えば、エッジ強調、超解像処理など）、エフェクトパラメータとしては絵画調フィルタを挙げることができる。
また、人物の撮影シーンである場合には、現像パラメータとしてはノイズ低減および色補正（肌色補正）、エフェクトパラメータとしてはボケコントロール（背景ぼかしなど）およびソフトフォーカスを挙げることができる。
また、人物の撮影シーンである場合には、現像パラメータとしてはノイズ低減および色補正（肌色補正）、エフェクトパラメータとしてはボケコントロール（背景ぼかしなど）およびソフトフォーカスを挙げることができる。
また、花の撮影シーンである場合には、現像パラメータとしては彩度補正、エフェクトパラメータとしては絵画調フィルタおよび色強調系を挙げることができる。
また、風景の撮影シーンである場合には、現像パラメータとして解像感向上系処理（例えば、エッジ強、超解像処理など）および色補正（緑補正）、エフェクトパラメータとしてはＨＤＲ系処理および色強調系処理を挙げることができる。
また、風景の撮影シーンである場合には、現像パラメータとして解像感向上系処理（例えば、エッジ強、超解像処理など）および色補正（緑補正）、エフェクトパラメータとしてはＨＤＲ系処理および色強調系処理を挙げることができる。
また、人工構造物の撮影シーンである場合には、現像パラメータとして解像感向上系処理、エフェクトパラメータとしては、あおり強調系処理およびイラスト調処理（ポスタリゼーションなど）を挙げることができる。
パラメータの一例を図５に示す。
パラメータの一例を図５に示す。
また、本実施形態においては、画像処理装置３が行う処理としてハードウェアによる処理を前提としたが、これに限定されるものではなく、例えば、ソフトウェアにて処理することもできる。この場合、画像処理装置３は、処理を行うＣＰＵ（図示略）およびＲＡＭ等の主記憶装置（図示略）を備え、上記処理の全て或いは一部をＣＰＵに実行させるためのプログラムが記憶されたコンピュータで読み取ることができる記憶媒体を備えていればよい。ここでは、このプログラムを画像処理プログラムと呼ぶ。
そして、ＣＰＵが記憶媒体に記憶されている画像処理プログラムを読み出して、情報の加工・演算処理を実行することにより、上述の画像処理装置３と同様の処理を実現させる。また、この画像処理プログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該画像処理プログラムを実行するようにしてもよい。
１ 撮像装置
２ 撮像部
３ 画像処理装置
４ モニタ（パラメータ提示部）
７ シーン判別部
８ 嗜好パラメータ記憶部（パラメータ記憶部）
９ 推奨パラメータ記憶部（パラメータ記憶部）
１１ パラメータ選択部
Ｓ２ シーン判別ステップ
Ｓ３，Ｓ４ パラメータ選択ステップ
２ 撮像部
３ 画像処理装置
４ モニタ（パラメータ提示部）
７ シーン判別部
８ 嗜好パラメータ記憶部（パラメータ記憶部）
９ 推奨パラメータ記憶部（パラメータ記憶部）
１１ パラメータ選択部
Ｓ２ シーン判別ステップ
Ｓ３，Ｓ４ パラメータ選択ステップ
Claims (6)
- 被写体を撮影して画像を取得する撮像部と、
該撮像部により取得された前記画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別部と、
複数の撮影シーンと、各該撮影シーンに対応する画像の生成に使用されるパラメータとを対応づけて記憶するパラメータ記憶部と、
前記シーン判別部により判別された撮影シーンに基づいて前記パラメータ記憶部から前記パラメータを選択するパラメータ選択部と、
該パラメータ選択部により選択された前記パラメータを提示するパラメータ提示部とを備え、
前記パラメータ記憶部に記憶されている前記パラメータが、前記撮像部により過去に取得された過去画像の生成に使用した第１パラメータを含み、
前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する撮像装置。 - 前記パラメータ選択部は、前記シーン判別部により判別された前記撮影シーンに対応する過去画像が存在しない場合に、前記撮影シーンに対応するいずれかの前記パラメータを選択する請求項１に記載の撮像装置。
- 前記パラメータ記憶部に記憶されている前記第１パラメータが使用頻度を含み、
前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が複数存在する場合に、使用頻度が最も高い前記第１パラメータを選択する請求項１または請求項２に記載の撮像装置。 - 被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別部と、
複数の撮影シーンと、各該撮影シーンに対応する画像の生成に使用されるパラメータとを対応づけて記憶するパラメータ記憶部と、
前記シーン判別部により判別された撮影シーンに基づいて前記パラメータ記憶部から前記パラメータを選択するパラメータ選択部とを備え、
前記パラメータ記憶部に記憶されている前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、
前記パラメータ選択部は、前記シーン判別部により判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理装置。 - 被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別ステップと、
該シーン判別ステップにより判別された撮影シーンに基づいて、撮影シーンと対応づけて記憶されたパラメータを選択するパラメータ選択ステップとを含み、
前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、
前記パラメータ選択ステップは、前記シーン判別ステップにより判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理方法。 - 被写体を撮影して取得された画像について、該画像内の被写体を検出して撮影シーンの判別を行うシーン判別ステップと、
該シーン判別ステップにより判別された撮影シーンに基づいて、撮影シーンと対応づけて記憶されたパラメータを選択するパラメータ選択ステップとを含み、
前記パラメータが、過去に取得された過去画像の生成に使用した第１パラメータを含み、
前記パラメータ選択ステップは、前記シーン判別ステップにより判別された撮影シーンに対応する前記過去画像が存在する場合に、前記第１パラメータおよび少なくとも一部が前記第１パラメータとは対極に位置する第２パラメータを選択する画像処理をコンピュータに実行させる画像処理プログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2016/053104 WO2017134751A1 (ja) | 2016-02-02 | 2016-02-02 | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2016/053104 WO2017134751A1 (ja) | 2016-02-02 | 2016-02-02 | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2017134751A1 true WO2017134751A1 (ja) | 2017-08-10 |
Family
ID=59499553
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2016/053104 WO2017134751A1 (ja) | 2016-02-02 | 2016-02-02 | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2017134751A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107395976A (zh) * | 2017-08-11 | 2017-11-24 | 维沃移动通信有限公司 | 一种拍摄参数设置方法及移动终端 |
| CN114143429A (zh) * | 2021-11-30 | 2022-03-04 | 惠州Tcl移动通信有限公司 | 图像拍摄方法、装置、电子设备和计算机可读存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003187215A (ja) * | 2001-12-18 | 2003-07-04 | Fuji Xerox Co Ltd | 画像処理システム及び画像処理サーバ |
| JP2011114662A (ja) * | 2009-11-27 | 2011-06-09 | Sony Corp | 画像処理装置、画像処理方法、プログラム、及び、記録媒体 |
| JP2014236358A (ja) * | 2013-05-31 | 2014-12-15 | 株式会社ニコン | 画像処理プログラム |
-
2016
- 2016-02-02 WO PCT/JP2016/053104 patent/WO2017134751A1/ja active Application Filing
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003187215A (ja) * | 2001-12-18 | 2003-07-04 | Fuji Xerox Co Ltd | 画像処理システム及び画像処理サーバ |
| JP2011114662A (ja) * | 2009-11-27 | 2011-06-09 | Sony Corp | 画像処理装置、画像処理方法、プログラム、及び、記録媒体 |
| JP2014236358A (ja) * | 2013-05-31 | 2014-12-15 | 株式会社ニコン | 画像処理プログラム |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107395976A (zh) * | 2017-08-11 | 2017-11-24 | 维沃移动通信有限公司 | 一种拍摄参数设置方法及移动终端 |
| CN107395976B (zh) * | 2017-08-11 | 2019-11-19 | 维沃移动通信有限公司 | 一种拍摄参数设置方法及移动终端 |
| CN114143429A (zh) * | 2021-11-30 | 2022-03-04 | 惠州Tcl移动通信有限公司 | 图像拍摄方法、装置、电子设备和计算机可读存储介质 |
| CN114143429B (zh) * | 2021-11-30 | 2024-03-19 | 惠州Tcl移动通信有限公司 | 图像拍摄方法、装置、电子设备和计算机可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9338311B2 (en) | Image-related handling support system, information processing apparatus, and image-related handling support method | |
| JP4519708B2 (ja) | 撮影装置および方法並びにプログラム | |
| US8411171B2 (en) | Apparatus and method for generating image including multiple people | |
| EP3664016B1 (en) | Image detection method and apparatus, and terminal | |
| JP6899002B2 (ja) | 画像処理方法、装置、コンピュータ読み取り可能記憶媒体及び電子機器 | |
| CN106412458A (zh) | 一种图像处理方法和装置 | |
| JP4672587B2 (ja) | 画像出力方法および装置ならびにプログラム | |
| JP2011015091A (ja) | 撮像装置 | |
| WO2017134751A1 (ja) | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム | |
| JP2008035246A (ja) | 構図評価装置、構図調整装置、画像撮影装置、構図評価プログラム、構図調整プログラム、画像撮影プログラム、構図評価方法、構図調整方法及び画像撮影方法 | |
| JP2018084861A (ja) | 情報処理装置、情報処理方法、及び情報処理プログラム | |
| US20150178589A1 (en) | Apparatus for processing digital image and method of controlling the same | |
| CN114979487B (zh) | 图像处理方法、装置及电子设备和存储介质 | |
| JP6497030B2 (ja) | 撮影システム、情報処理装置、撮影方法、プログラム、記憶媒体 | |
| US20190174057A1 (en) | Image acquisition device, image processing device, image processing method, image processing program, and image acquisition system | |
| JP2013038591A (ja) | 撮像装置、その制御方法およびプログラム | |
| JP2011040860A (ja) | 画像処理装置及び画像処理プログラム | |
| JP2020191546A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| JP2005027161A (ja) | 画像処理装置及び画像処理方法 | |
| JP5543636B2 (ja) | 撮像装置 | |
| KR101392382B1 (ko) | 휴대용 단말기에서 카메라의 파노라마 기능 구현 방법 및장치 | |
| JP7500236B2 (ja) | 撮像装置、撮像装置の制御方法、撮像システム、およびプログラム | |
| JP5200776B2 (ja) | デジタルカメラ | |
| WO2024042976A1 (ja) | 画像生成方法、画像ファイル作成方法、及び画像生成装置 | |
| JP2016170637A (ja) | 画像処理装置および画像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16889241 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 16889241 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: JP |