WO2005125184A1 - Procede d’aide a l’acquisition d’images numeriques - Google Patents

Procede d’aide a l’acquisition d’images numeriques Download PDF

Info

Publication number
WO2005125184A1
WO2005125184A1 PCT/FR2005/050428 FR2005050428W WO2005125184A1 WO 2005125184 A1 WO2005125184 A1 WO 2005125184A1 FR 2005050428 W FR2005050428 W FR 2005050428W WO 2005125184 A1 WO2005125184 A1 WO 2005125184A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
fault
indication signal
sharpness
screen
Prior art date
Application number
PCT/FR2005/050428
Other languages
English (en)
Inventor
Frédéric Guichard
Bruno Liege
Jérôme MENIERE
Original Assignee
Dxo Labs
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dxo Labs filed Critical Dxo Labs
Publication of WO2005125184A1 publication Critical patent/WO2005125184A1/fr

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00318—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a multi-media apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0093—Facsimile machine

Definitions

  • the invention relates to a method of assisting in the acquisition of still or moving images by a user of a digital image acquisition device. It also relates to a digital image acquisition device using such a help method.
  • the quality of the image capture as well as the quality of the images are largely conditioned, on the one hand, by the quality of the device and the image processing, on the other hand, by the behavior of the user before, during and after shooting. It is therefore important to guide this user, to train him and to give him advice.
  • the digital type cameras have, compared to conventional cameras with photo film, the advantage of having a display screen on which one can observe the result of the shooting. However, the small size and the low resolution of these screens are insufficient to detect faults.
  • Such defects which are not perceptible on a small screen but which can be troublesome on a large screen or during printing, are:
  • the cameras fitted to mobile phones are particularly sensitive to these defects.
  • the cameras include a certain number of aids providing indications before the shooting on risks of image defect. These means are, in particular: [014] - An indicator of focusing distance too short and of risk of focusing blur. An indicator of exposure time too long and therefore of risk of camera shake.
  • the devices most often include several modes linked to the content of the scene to adapt the aperture and the exposure time to this scene. This is for example, portrait mode which favors a large aperture so that the background is blurred. It is also the landscape mode for which the exposure time is relatively long (1/60 me of a second in general) so that the aperture of the lens is small and so that we obtain a great depth of field.
  • portrait mode which favors a large aperture so that the background is blurred.
  • the landscape mode for which the exposure time is relatively long (1/60 me of a second in general) so that the aperture of the lens is small and so that we obtain a great depth of field.
  • the sport mode which favors a relatively short exposure time to avoid camera shake.
  • the flash can be activated automatically to avoid backlighting.
  • the invention aims to provide a user of a digital image acquisition device, an aid for this acquisition.
  • a signal for indicating defects is calculated from this image which relates to the color and / or to the contrast and / or sharpness and / or noise and / or details of the acquired image.
  • the calculation of the fault indication signal is carried out in the acquisition device and / or remotely, for example in a remote server.
  • the fault indication signal comprises the display of an image derived from the acquired image with exaggeration of the fault or faults.
  • the derived image is determined in the acquisition device and / or remotely.
  • the defect is exaggerated by adding noise and / or reducing the number of pixels without increasing the sharpness and / or modifying the colors and / or modifying the contrast and / or reducing the details and / or reduction of sharpness.
  • the fault indication signal is a function of a quantification of the fault.
  • the acquired image being intended to undergo digital processing after shooting, the calculation of the signal for indicating the fault, or faults, is carried out taking this processing into account by simulation, estimation or treatment.
  • This simulation or processing is carried out in the acquisition device and / or remotely.
  • the indication signal includes information on an adjustment of the device making it possible to limit or eliminate the fault.
  • the indication signal may include several adjustment proposals with, preferably, associated with each proposed adjustment, an image display.
  • the indication signal is a function of at least one adjustment of the device, in particular an indication of the end use of the image. For example, if the image is intended to be displayed on a mobile screen, the defects will often be less visible than if the image must be printed in standard format 10cm x 15cm.
  • the invention also relates to an apparatus for acquiring digital images comprising a means for calculating and / or receiving, after the acquisition of a digital image, and from this image, an indication signal of defect which relates to the color and / or to the contrast and / or to the sharpness and / or to the noise and / or to the details of the acquired image.
  • this device comprises means for displaying an image derived from the image acquired with exaggeration of the defect or defects, this display means receiving said fault indication signal.
  • the derived image is determined in the device and / or remotely.
  • the apparatus comprises means for exaggerating the defect by adding noise and / or reducing the number of pixels without increasing the sharpness and / or modification of the colors and / or modification of the contrast and / or reduction of the details and / or reduction of sharpness.
  • the device comprises a means for quantifying the fault to generate the fault indication signal.
  • the device comprises means for digital processing of the image acquired after the shot, the signal for indicating the fault, or faults, taking into account this treatment.
  • the device comprises means for generating an indication signal comprising information on an adjustment of the device making it possible to limit or eliminate the fault.
  • the device may include means so that the indication signal comprises several adjustment proposals with, preferably, associated with each proposed adjustment, an image display.
  • the device comprises means so that the indication signal is a function of at least one setting of the device, in particular an indication of the end use of the image.
  • the apparatus comprises means for transmitting to a server, data allowing this server to calculate the fault indication signal (s), the apparatus comprising means for receiving the signal indication of fault (s).
  • an aid is provided to a user of a device 20 for acquiring digital images 22.
  • This method consists, after acquiring image 22, in calculating, from this image 22, a signal 24 for indication of defect (s) 26.
  • the defect or defects 26 relate to color, and / or contrast, and / or sharpness, and / or noise, and / or the detail of the image acquired. In general, fault 26 is not visible on the screen, usually small, of the acquisition device. This is why, this defect 26 has been represented outside the image.
  • the image 22 is used to produce a derived image 28 in which the defect or defects is (are) exaggerated (s).
  • the fault indication signal 24 then consists in displaying said derived image 28.
  • the fault indication signal 24 is, for example, obtained from a quantification 30 of the fault from of said image 22.
  • the apparatus 20 comprises means for connection to a network, as is the case with a photophone or camraphone, that is to say a mobile telephone terminal equipped of a camera, the signal 24 can be calculated either in the camera 20 or in a remote server 32. It is also possible to perform part of the calculation in the device 20 and part of the calculations in the server 32.
  • the device 20 comprises means for transmitting the image signals to the server 32 and means for receiving signals from this server 32.
  • the indication signal 24 it is preferable for the indication signal 24 to include information on an adjustment 36 of the device making it possible to limit or eliminate the fault.
  • Digital image Apparatus for acquiring digital images. Image acquisition, sensors, color.
  • digital image is meant an image in digital form.
  • the image can come from a digital image acquisition device, also called an image capture device.
  • the image can be a still or animated image, an image of a video sequence before shooting or an image intended to be transmitted or stored.
  • the digital image can be represented by a set of digital values, hereinafter called gray levels, each digital value being associated with a color sensitivity and a relative geometric position on a surface or a volume.
  • Gray levels hereinafter called gray levels
  • Color in the sense of the invention means all the numerical values associated with the same color sensitivity.
  • the digital image is preferably the raw image of the sensor (“raw” format in English) before demosaicing operation (“demosaicing” in English).
  • the digital image may also have undergone processing, such as demosaicing, white balance, or subsampling.
  • the image capture device comprises a sensor provided with sensitive elements.
  • sensitive element means an element of the sensor making it possible to convert a flow of energy into an electrical signal.
  • the energy flow can take the form in particular of a light flux, X-rays, a magnetic field, an electromagnetic field or sound waves.
  • the sensitive elements can be, depending on the case, juxtaposed on a surface and / or superimposed in a volume.
  • the sensitive elements can be arranged in a rectangular matrix, a hexagonal matrix or another geometry.
  • the invention applies to sensors comprising sensitive elements of a type given or of several different types; each type has a color sensitivity and each color sensitivity corresponds to the part of the energy flow converted into an electrical signal by the sensitive element of the sensor.
  • the sensors In the case of a visible image sensor, the sensors generally have a sensitivity in 3 colors and the digital image has 3 colors: red, green and blue. Some sensors have a sensitivity in 4 colors: red, green, emerald, blue.
  • color is also meant a combination, in particular linear, of the signals delivered by the sensor.
  • the sharpness of a color can correspond to the measurement of a value called BXU which is a measurement of the blur spot area, as described in the article published in the “Proceedings of IEEE, international ConfInter of Image Processing, Singapore 2004 ”, and entitled“ Uniqueness of Blur Measure ”by Jércons BUZZI and Frédéric GUICHARD.
  • the blurring of an optical system is measured from the image, called “impulse response”, of an infinitely small point located in the plane of sharpness.
  • the parameter BXU is the variance of the impulse response (i.e. its mean area). Processing capabilities may be limited to a maximum value of BXU.
  • the sharpness is obtained by calculating a gradient.
  • the sharpness can be obtained by calculating a gradient of 9 gray levels taken in neighboring geometric positions.
  • An image capture device is, for example, a disposable camera, a digital camera, a reflex camera (digital or not), a scanner, a fax, an endoscope, a camera, a camcorder, a surveillance camera, a toy, a camera or a camera integrated or connected to a telephone, a personal assistant or a computer, a thermal camera, an ultrasound machine, an MRI (magnetic resonance) imaging device , an x-ray machine.
  • optical image capture system means the optical means making it possible to restore images on a sensor.
  • image sensor means mechanical, chemical or electronic means allowing the capture and / or recording of an image.
  • servo system means means of the mechanical, chemical, electronic or computer type allowing elements or parameters of the device to respect a set point. These include the focus system automatic (autofocus), automatic white balance control, automatic exposure control, control of optical elements, in order, for example, to maintain a uniform quality of images, a stabilization system of image, an optical and / or digital zoom factor control system, or a saturation control system, or a contrast control system.
  • the digital image processing means can take various forms depending on the application.
  • the digital image processing means can be integrated, in whole or in part, into the apparatus, as in the following examples:
  • An image rendering device which displays or prints modified images, for example a video projector or a printer including image processing means.
  • a mixed device which corrects the faults of its elements, for example a scanner / printer / fax machine including image processing means.
  • a professional image capture device which produces modified images, for example an endoscope including image processing means.
  • the image processing means can be deported in whole or in part on a server.
  • the fault indication signal (also called an indicator or fault indicator), as indicated above, is preferably an image derived 28 from the acquired image 22 with exaggeration of the fault or faults. It may also be (in place of the display of the derived image or in addition to this display) an audible signal and / or a visual signal in the form of a light signal, texts and / or on-screen drawings and / or a vibrating signal, in particular to indicate camera shake.
  • an audible signal and / or a visual signal in the form of a light signal, texts and / or on-screen drawings and / or a vibrating signal, in particular to indicate camera shake.
  • the invention is distinguished from the prior art by the fact that it uses the image to produce, in particular quantify, a fault signal while the prior state of the art considers only the shooting conditions, such as the exposure time.
  • the device can, in addition to the fault indication signal, take another photo with other settings and offer it to the user as an alternative to the photo already taken. We can then offer the user to keep the other photo taken automatically and / or to change the camera settings.
  • a still image camera acquires several types of images 22: - it acquires a sequence of images, generally small, adapted to the screen of the camera , to display a photo and allow framing before the user presses the shooting button, - when the user presses the shooting button, another image is acquired with the final size .
  • a fault indication signal can be calculated before shooting, for example to indicate a contrast or color defect
  • a fault indication signal can be calculated before the shot but can only be confirmed after the shot, for example to indicate a camera shake fault which depends on the scene and the movement user at the time of shooting.
  • the image is part of the sequence displayed before shooting, it may be advantageous to take into account the processing applied to the image that will be acquired during shooting to calculate the signal for indicating default. Indeed, the shooting parameters, in particular exposure, resolution will be different.
  • the examples below give an example for each fault which explains how treatment can be taken into account.
  • adjustment is meant an explicit adjustment such that, in the case of a photophone, an adjustment for sending an image to another mobile phone or to a printing service, or implicit such that, always in the case of a photophone, a recipient telephone number entered by the user for sending a message.
  • the device settings include one or more of the following settings: [090] - The mode of use, for example: automatic, aperture priority, speed priority, portrait, landscape, sport, night, etc. The mode of use notably has an influence on ISO sensitivity, exposure time, noise and blur. [091] - Manual exposure correction which has an influence on noise and contrast in particular. [092] - The ISO sensitivity setting which in particular has an influence on noise and camera shake. [093] - The setting of exposure time which has in particular an influence on the blurring of camera shake.
  • the white balance setting for example: automatic, tungsten, fluorescent, halogen, sunny, covered, shaded, which has an influence on the color in particular.
  • Contrast adjustment for example: strong, normal, weak.
  • the sharpness setting for example: strong, normal, weak which notably has an influence on the blurring.
  • the resolution setting which influences, in particular, the details and the sharpness.
  • the digital zoom setting which has an influence on the details in particular.
  • the color rendering setting for example: color, black and white, sepia, saturated.
  • the image processing parameters in particular: the coefficients and tables used by the various filters and processing necessary for the construction of color, sharpness, contrast, details and noise reduction . demosaicing, "tone curve" parameters (used to adapt the dynamic range of the sensor signal, for example 10 bits, to the dynamic range of the image signal, for example 8 bits, noise reduction, white balance, [107] - The other fixed or variable parameters depending on the image and having an influence on the image or on the image delivered by the service.
  • the multimedia data is an image
  • service is meant in particular services as described above but also services corresponding to a use of the determined image, the service not necessarily being offered by a service provider but can also be carried out by the user himself or by a third party
  • the use of the determined image can correspond to uses of image sharing (on a small screen, on a screen of computer, on a print, on an electronic or physical support) and memory (archiving for later consultation by printing or saving the image file) such as: [111] - the display on a small screen, usually less than 100 000 pixels, in particular: the screen of the acquisition device, or the screen of another device or the screen of a multimedia data storage device, [112] - the display on a screen of big size, usually 1 to 2 million pixels in particular: a computer screen, a television set, a projector, [113] - printing in standard format (10cmxl5cm approximately), usually 2 million pixels, [114] - enlarging by several million pixels,
  • a white balance can be, for example, characterized by a gain to be applied to the different green, blue and red channels.
  • this estimation treatment can also be taken into account by modifying the quantified value with an estimate of the impact that the treatment would have had, for example using tabulated correction values previously calculated.
  • the fault indication signal (s) may include:
  • [142] White balance adjustment information to limit or eliminate the fault.
  • the indication signal can be a function of at least one adjustment of the device, in particular:
  • the contrast can be characterized by a histogram calculation followed by an analysis of the minimum, average and maximum values.
  • a gray veil is characterized by a minimum value above a threshold, for example 20% of the dynamic range
  • a black veil is characterized by a maximum value below a threshold, for example 80% of the dynamic range
  • [161] - an image that is too bright is characterized by an average value greater than a threshold, for example 80% of the dynamic range
  • [162] - an image that is too dark is characterized by an average value less than a threshold, for example 20% of the dynamics.
  • This treatment by estimation can also be taken into account by modifying the histogram before quantification of the defect with an estimate of the impact that the treatment would have had, for example using a linear transformation followed by l application of a gamma.
  • the indication signal may include:
  • [172] - Information for adjusting manual correction, exposure, or exposure time, or opening to limit or eliminate the fault For example, when the user has set the camera with manual underexposure correction, one can use the analysis of the maximum histogram value for, when this deviates from the maximum of the dynamics by more than a predefined threshold, for example 10%, to warn the user that the exposure setting is perhaps ill-suited: by asking a question: "do you want to modify the exposure compensation?" ”, By changing the color or by flashing the symbol indicating the exposure compensation setting, if present, using another signal as described above.
  • a predefined threshold for example 10%
  • [173] - A proposal for several exposure compensation settings, for example the automatic mode and / or the manual mode or modes for which the quantification of the defect is the weakest.
  • the indication signal can be a function of at least one setting of the device, in particular:
  • One such defect may be:
  • a focus blur in manual focus mode for example: an image taken in macro mode of an object too far away, an image taken in normal mode of an object too close.
  • a blur visible for a given use for example a blur which is not seen on the screen of the device but which is seen on an impression.
  • the sharpness can be characterized by a histogram calculation of the maximum of the gradients in each direction for each pixel.
  • the quantification of the sharpness can then be the percentage of the pixels for which the maximum of the gradient is less than a threshold, in particular 10% of the dynamics.
  • the sharpness defects are less visible the smaller the screen and therefore, they are difficult to detect on a device screen while they can be more annoying on a computer screen or a screen. impression. For example a bad focus or a blurring of camera shake are not necessarily seen on the screen of the device while they are revealed for other uses.
  • [193] unlike the classic methods which increase the sharpness, the number of pixels is reduced without increasing the sharpness to allow its display on the screen of the device for example by chaining the following steps: [194] - we estimate the blurring of the captured image (using for example a gradient method as described above). [195] - the captured image is sub-sampled to a “preview” image.
  • the estimated blur on the captured image is added to the "preview" image, for example by means of a linear Gaussian filter where the standard deviation corresponds to the amount of estimated blur.
  • a treatment having an impact on the sharpness for example a treatment for reducing or increasing the number of pixels, in particular for carrying out a printing
  • a display on a screen d mobile device or a display on a computer screen This treatment can be taken into account by applying it to the image before quantifying the defect.
  • This treatment by estimation can also be taken into account by modifying the quantified value of the defect with an estimate of the impact that the treatment would have had, for example using tabulated correction values, previously calculated for each reduction factor. or increasing the number of pixels.
  • Particular care will be taken to take into account the number of pixels actually captured, which may be less than the resolution of the sensor if a digital zoom has been applied, since such a zoom retains only the central part of the image.
  • the indication signal may include:
  • [199] Information for adjusting the exposure - including ISO sensitivity, exposure time, a predefined mode - or focusing, this information making it possible to limit or eliminate the defect.
  • a quantification of the defect for, when this- if it exceeds a predefined threshold, warn the user that the focus may be incorrectly adjusted: by asking a question: "do you want to switch to automatic focus mode?" ”, By changing the color or by flashing the symbol indicating the setting de in macro mode, if present, using another signal as described above.
  • a proposal for several adjustment settings and / or exposure for example the automatic mode and / or the manual mode or modes for which the quantification of the fault as described above is the lowest.
  • the indication signal can be a function of at least one setting of the camera, in particular: [203] - The settings of exposure and / or focus.
  • [204] An indication of the end use of the image, for example: in the case of a mobile telephone, use on a telephone screen (less than 100,000 pixels) and / or a computer screen (Approximately 1 million pixels) and / or standard size printing (approximately 10cmxl5cm, i.e. 2 million pixels) and / or other which makes it possible to determine the final sharpness perceived by the user as a function of the increase or reduction factor the number of pixels that will be applied later; in the case of a camera, use for standard size printing (approximately 10x15 or 2 million pixels) and / or computer screen (approximately 1 million pixels) and / or enlargement (no reduction). [205] Faults relating to noise:
  • a fault indication signal which relates to the noise of the image acquired.
  • a defect may be the noise associated with lighting of too low intensity. The noise is all the more visible when the sensor is small, the lighting is weak and the image is enlarged, especially on prints from photophones.
  • noise depends on the gain of the sensor and the gray level. Such a defect can be quantified using values previously tabulated for each gain value of the sensor.
  • [213] by adding noise having the characteristics of quantified noise for example by means of an algorithm as explained in the work of WH, Teukolsky, SA, Vetterling, WT, Flannery, BP, “Numerical Recipes in C: The Art ofScientific Computing ”. Cambridge University Press, Cambridge; 1992, this at the scale of the screen and not of the image at the initial size, [214] - by adding noise having the characteristics of the quantized noise corresponding to the gray level, this at the scale of l screen and not the image at the initial size, [215] - by adding noise having the characteristics of the noise corresponding to the gain of the sensor and / or to the gray level, this on the scale of the screen and not from the image to the original size.
  • the indication signal may include:
  • [218] Information on exposure adjustment, or resolution, or ISO sensitivity making it possible to limit or eliminate the defect. For example in manual mode if the user has set his device in sport mode and has forgotten to change the setting when he tries to make an indoor portrait, we can use a quantification of the fault as described above, for, when that -this exceeds a predefined threshold, warn the user that the exposure may be incorrectly adjusted: by asking a question: "do you want to switch to automatic exposure?" ”, By changing the exposure or by flashing the symbol indicating the exposure mode setting, if present, using another signal as described above. [219] - A proposal for several exposure and / or resolution and / or ISO settings, for example the automatic mode and / or the manual mode or modes for which the quantification of the defect, as described above, is the lowest for the amount of light in the scene.
  • the indication signal can be a function of at least one adjustment of the device, in particular:
  • Such a defect may be in particular:
  • [228] the resolution which is linked to the number of pixels of the sensor and to the optics, as well as to the digital zoom applied as well as to any cropping. Too few pixels require for example to limit the size of a print.
  • Such a defect can be quantified by counting the number of pixels actually used on the sensor. It should be noted that this number depends in particular on the digital zoom factor applied.
  • An exaggeration of such a defect can be carried out by reducing the details, for example by reducing the resolution of the image to approach the conditions of use during printing.
  • the acquired image has 250,000 pixels; if we want to use this image to print in standard format (therefore with approximately 2 million pixels for a standard format 10x15cm) it will be necessary to enlarge it approximately 3 times in each direction; and if we display the 250,000 pixel image on the 60,000 pixel screen, the loss of detail during printing will not be visible.
  • the indication signal may include:
  • [235] Information for adjusting the resolution and / or the digital zoom making it possible to limit or eliminate the fault, for example using a quantification of the fault as described above, for, when it exceeds a predefined threshold, warn the the user that the digital zoom is perhaps incorrectly adjusted: by asking a question: "do you want to deactivate the digital zoom?" ”, By changing the color or by flashing the symbol indicating the digital zoom factor or the resolution, if present, using another signal as described above.
  • [236] A proposal for several resolution and / or digital zoom settings, for example the automatic mode and / or the manual mode or modes for which the quantification of the defect, as described above, is the lowest.
  • [237] A proposal to resume sight.
  • the indication signal can be a function of at least one adjustment of the device, in particular: [239] - The digital zoom and / or resolution adjustment.
  • the user is informed of the presence of faults which arise from the actions of this user and, preferably, a corrective action is indicated.
  • help can be provided before shooting, it is indicated by a signal in the viewfinder or on the screen or by a signal indication of framing or a message, for example encouraging the use of a stable support for the device.
  • These shooting aids can also be used when using retouching software to guide the user, in particular when cropping or applying a specific filter or effect. These indications take into account the perception of defects by the eye and therefore treatments such as noise reduction, improvement of contrast, cleaning of a text photo, reduction of device defects and / or of the screen.
  • framing aids are as follows: For the portrait of a person: outline of the head and, where appropriate, of the bust, preferably with respect for the rule of three-thirds: several framing are offered, for example: close-up of the head in vertical screen, bust in vertical screen to the left of the image, bust in vertical screen to the right of the image, standing in vertical screen, close-up of the head in horizontal screen to the right of the image, large head shot in horizontal screen to the left of the image; in the case of close-ups, in order to encourage the photographer to position the subject in front of a solid or uninteresting background, we can gray or hide the image around the silhouette.
  • This framing aid preferably respects the golden rule of so-called three-thirds photography: never center the subject or the horizon.
  • This framing aid also makes it possible to determine where the top of the image is located and then automatically apply a rotation to it so that the top of the scene is at the top of the screen even if the camera was turned during without taking a sensor to determine if the camera is in a horizontal or vertical position.
  • the exposure time must be shorter for printing or sending to an email address, than for sending to another mobile.
  • the exposure time and the exposure must also be adapted to the chosen framing. It takes a long exposure for fireworks, rather under-expose at night to obtain blacks and avoid overexposing the lighted areas; short exposure is required for fast subjects.
  • An improved image can be shown on the screen in order to realize the final quality perceived by the receiver of the service and to avoid deleting photos which can be used after improvement but which appear to be of poor quality. before improvement by digital processing.
  • the improved image can be calculated on a small number of pixels adapted to the screen resolution in order to reduce the computation time and the battery resource.
  • the photo is then sent to a remote server, the latter can perform the calculation at the resolution necessary for using the service.
  • We can show an image indicator that is too blurred (shake and / or focus) suited to the chosen service, for example following an analysis of the content of the image, and / or display or put the corresponding message : "Please put your hand on a stable support", "please stay away from the subject”.
  • the measurement (which is a way of carrying out a quantification) of defect can be carried out a posteriori on the image as described above, and / or a sensor can be used and / or an analysis of the photo or video can be effective to detect movement and adjust the exposure time accordingly.
  • a noisy image indicator can be shown.
  • Noise can be measured in the image, and / or noise can be calculated from the gain of the sensor and the known noise for a gain value.
  • the measurement can be carried out on the average of the image and / or by looking at the maximum of the dynamics as described above in the embodiment relating to the defects which relate to the contrast.
  • the right and left keys allow you to choose a category and the up and down keys allow you to choose a variant.
  • the possible categories are: standard, portrait, landscape, night, sport, photo ID.
  • the possible variants are the different framing.
  • the category can be displayed by a system of tabs.
  • a "help" button allows you to obtain a sample photo and an explanatory text providing photography rules.
  • the photo course can have several of the following characteristics:
  • [277] A part adapted to the situation, of the contextual help type: choice of the user: type of framing, type of service, image analysis, with the various controls described above.
  • [278] A general, more abstract part, on the rules of composition and the main rules of photography: importance of light to set the mood (quantity, contrast, shade, direction, direct or indirect), ensuring that nothing will attract the eye more than the main subject, rule of thirds: in the image divided into 9 equal rectangles, the dominant subject must be in one of the 4 chosen areas of interest, take the subjects from above or below, no level, use almost white or black areas to highlight the main subject, choose the moment for the image to inspire a feeling, the images must contain detailed textures to give the impression in reality, lines leading to the subject highlight it, the background should be simple to highlight the main subject. [279] - Include sample photos.
  • [311] Sending via MMS, Wap, http ... to a server or directly from the terminal to a fax machine.
  • [312] For sending a fax from a terminal, one can also proceed as follows: [313] - Shooting of a document containing text and / or drawings,
  • An identity photo service includes, in one embodiment, the following steps: [320] - Shooting with framing assistance.
  • This framing aid can be adapted to the country's standards for official documents. [322] - The framing aid makes it possible to segment the image to more easily carry out the checks below. [323] - Monitoring compliance with the rules: The rules that can be checked are for example: checking the uniformity of the background, checking the background color, checking whether the background is bright enough, checking the presence of shadow on the background, checking of the lighting of the face (which should not be too dark), the control of the absence of a hat or veil, the control of the absence of accessories, the control of the proportions of the face, the control that the face is front and not in profile. [324] The control can be automatic and / or manual.
  • the correction is automatic, and / or the correction is carried out manually by an operator, for example cleaning the background, otherwise a message is returned to the user, preferably quickly so that he can retake the photo.
  • This message indicates for example how to take a photo without the defect.
  • [327] Optionally entering a text to put on the back, for example: the name, the name and the class for a school photo.
  • [328] Entering the recipient's postal address or the photo collection point.
  • This service can be adapted to the rules of a country for official documents.
  • [339] Template for text and photos, for example for Mother's Day or Valentine's Day or for poetry.
  • [340] Medical emergencies, for difficult situations, for example at sea or in the mountains.
  • [341] - Amicable finding in the event of an automobile accident. An application asks the questions and indicates the photos to take to establish an observation.
  • [342] Remote diagnosis, for example for a plant disease.
  • - Security and identification or authentication Signature the written signature (added to a number generated by a server for example) can be used for authentication. The photo can also be used for authentication.
  • - Professional services Quotation: The seller coming to establish a quote sometimes needs to consult a specialist. The cameraphone provides a means of consulting the installer / supplier when drawing up the estimate. For example, an installer of roller shutter motors can consult an installer to determine the complexity of dismantling.
  • the remote server also called correction server, can be located:
  • This network allows rapid terminal-server exchanges. It is therefore possible to perform the processing in the server and quickly display the result on the phone. We can thus work with any computing power on the terminal and a high number of pixels.
  • [368] b) Application with a 2.5G network and a high-end telephone (“smartphone” in English). [369] The network does not allow rapid terminal-server exchanges. However, the terminal has high computing power. [370] It is therefore possible to carry out the processing in the image terminal at the screen size to show an overview to the user, and to quickly display the result on this terminal. [371] Processing can be carried out at full resolution on the server without any necessary return to the user.
  • [372] c) Application with a 2.5G network and a mid-range telephone (“Featurephone” in English). [373] The network does not allow rapid terminal-server exchanges.
  • the terminal has limited computing power and exchanges are slow.
  • the availability of overviews for the user will be more limited, but the other advantages (ergonomics, accessibility to services ...) are preserved.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

L'invention concerne un procédé d'aide a 1' acquisition d'images par un utilisateur d'appareil (20) d'acquisition d'images numériques. Après l'acquisition de l'image (22), on calcule, a partir de ladite image, un signal (24) d'indication de défaut(s) (26) qui se rapporte à la couleur et/ou au contraste et/ou a la netteté et/ou au bruit et/ou aux détails de l'image acquise. Le signal d'indication de défaut(s) comprend par exemple l'affichage d'une image dérivée (28) de l'image acquise avec exagération du défaut ou des défauts.

Description

Description
[001] PROCEDE D ' aide à 1 ' acquisition d ' images numériques
[002] L'invention est relative à un procédé d'aide à l'acquisition d'images fixes ou animées par un utilisateur d'appareil d'acquisition d'images numériques. Elle concerne aussi un appareil d'acquisition d'images numériques faisant appel à un tel procédé d'aide.
[003] La qualité de la prise de vue des images ainsi que la qualité des images sont largement conditionnées, d'une part, par la qualité de l'appareil et des traitements des images, d'autre part, par le comportement de l'utilisateur avant, pendant et après la prise de vue. Il est donc important de guider cet utilisateur, de le former et de lui prodiguer des conseils. Les appareils de type numérique présentent, par rapport aux appareils classiques à pellicule photos, l'avantage de disposer d'un écran de visualisation sur lequel on peut observer le résultat de la prise de vue. Mais, la faible dimension et la faible résolution de ces écrans sont insuffisantes pour détecter les défauts.
[004] De tels défauts, qui ne sont pas perceptibles sur un petit écran mais qui peuvent être gênants sur un grand écran ou lors d'une impression, sont :
[005] - Le bruit qui, en particulier, est lié à un éclairage d'intensité trop faible. Ce bruit est en outre accentué lorsque le capteur est de taille réduite et/ou lorsque l'image est agrandie, notamment pour les impressions.
[006] - Le flou de bougé qui se produit lorsque l'utilisateur bouge ou lorsque le sujet est en mouvement rapide. Ce défaut est particulièrement important lorsque le temps de pose est long, ce qui se produit avec les appareils dépourvus de flash et/ou pour des scènes de nuit. Les appareils photographiques équipant les téléphones mobiles sont particulièrement sensibles à ces défauts.
[007] - Le flou de mise au point qui se produit lorsque la scène se trouve à une courte distance de l'appareil. Ce défaut survient en particulier avec les appareils à mise au point fixe ou avec des appareils ou objectifs dépourvus de mode dit « macro ». Ce flou de mise au point peut aussi se produire avec des appareils à mise au point automatique lorsque celle-ci est défaillante.
[008] - La résolution qui dépend du nombre de pixels du capteur et des qualités de l'optique. Cette résolution dépend aussi de l'agrandissement numérique (zoom) appliqué, ainsi que d'un éventuel recadrage. Ainsi, lorsque la résolution est adaptée à la taille de l'image, cette image ne doit pas être trop agrandie, surtout pour l'impression.
[009] Il existe aussi des défauts visibles sur un écran ou dans un viseur mais pour lesquels il faut un apprentissage de l'utilisateur pour déceler le défaut et déterminer la manière d'y remédier afin que la photographie soit agréable. Il s'agit, en particulier : [010] - Du cadrage du sujet, c'est-à-dire sa position et sa taille dans l'image,
[011] - Du fond utilisé.
[012] - De l'éclairage du sujet et du fond, et plus particulièrement l'orientation du sujet par rapport à la lumière et l'intensité de l'éclairage. [013] Les appareils de prise de vue comportent un certain nombre d'aides fournissant des indications avant la prise de vue sur des risques de défaut de l'image. Ces moyens sont, en particulier : [014] - Un indicateur de distance de mise au point trop courte et de risque de flou de mise au point. [015] Un indicateur de temps de pose trop long et donc de risque de flou de bougé.
[016] En outre, dans les appareils connus, on prévoit, pour minimiser le bruit, une mise en marche automatique du flash si l'intensité lumineuse est insuffisante. [017] De plus, les appareils comportent le plus souvent plusieurs modes liés au contenu de la scène pour adapter l'ouverture et le temps de pose à cette scène. Il s'agit par exemple, du mode portrait qui privilégie une grande ouverture afin que le fond soit flou. Il s'agit aussi du mode paysage pour lequel le temps de pose est relativement long (1/60 me de seconde en général) afin que l'ouverture de l'objectif soit faible et qu'ainsi on obtienne une grande profondeur de champ. Par exemple encore, le mode sport qui privilégie un temps de pose relativement court pour éviter le flou de bougé. On sait aussi qu'en mode portrait, le flash peut être mis en service automatiquement pour éviter les contre-jour. [018] On sait également qu'il est possible de contrôler a posteriori le flou en observant, sur l'écran, une petite partie de l'image par un agrandissement de type numérique. Mais, cette indication nécessite, de la part de l'utilisateur, des manipulations qui ne sont pas aisées et qui prennent du temps. [019] L'invention a pour but de fournir à un utilisateur d'appareil d'acquisition d'images numériques, une aide pour cette acquisition. [020] Dans le procédé selon l'invention, après l'acquisition de l'image, on calcule, à partir de cette image, un signal d'indication de défauts qui se rapporte à la couleur et/ou au contraste et/ou à la netteté et/ou au bruit et/ou aux détails de l'image acquise. [021] Le calcul du signal d'indication de défaut est effectué dans l'appareil d'acquisition et/ou à distance, par exemple dans un serveur distant. Cette dernière réalisation s'applique notamment quand l'appareil d'acquisition d'images fait partie d'un terminal de téléphonie mobile. [022] Ainsi, avec l'invention, l'utilisateur est informé du défaut de l'image prise et peut prendre une nouvelle photo ou vidéo en corrigeant le défaut, pendant que c'est encore possible. [023] Dans une réalisation, le signal d'indication de défaut comprend l'affichage d'une image dérivée de l'image acquise avec exagération du défaut ou des défauts. L'image dérivée est déterminée dans l'appareil d'acquisition et/ou à distance.
[024] Selon un mode de réalisation, le défaut est exagéré par ajout de bruit et/ou réduction du nombre de pixels sans augmenter la netteté et/ou modification des couleurs et/ou modification du contraste et/ou réduction des détails et/ou réduction de la netteté.
[025] Dans une réalisation, le signal d'indication de défaut est fonction d'une quantification du défaut.
[026] Selon une réalisation, l'image acquise étant destinée à subir un traitement numérique après la prise de vue, le calcul de signal d'indication du défaut, ou des défauts, est effectué en tenant compte de ce traitement par simulation, estimation ou traitement. Cette simulation ou traitement est effectuée dans l'appareil d'acquisition et/ ou à distance.
[027] Dans une réalisation, le signal d'indication comporte une information sur un réglage de l'appareil permettant de limiter ou supprimer le défaut. Dans ce cas, le signal d'indication peut comporter plusieurs propositions de réglage avec, de préférence, associé à chaque réglage proposé, un affichage d'image.
[028] Dans une réalisation, le signal d'indication est fonction d'au moins un réglage de l'appareil, notamment une indication de l'utilisation finale de l'image. Par exemple, si l'image est destinée à être affichée sur un écran de mobile, les défauts seront souvent moins visibles que si l'image doit être imprimée en format standard 10cm x 15cm.
[029] L'invention concerne aussi un appareil d'acquisition d'images numériques comprenant un moyen pour calculer et/ou recevoir, après l'acquisition d'une image numérique, et à partir de cette image, un signal d'indication de défaut qui se rapporte à la couleur et/ou au contraste et/ou à la netteté et/ou au bruit et/ou aux détails de l'image acquise.
[030] De préférence, cet appareil comprend un moyen d'affichage d'une image dérivée de l'image acquise avec exagération du défaut ou des défauts, ce moyen d'affichage recevant ledit signal d'indication de défaut. L'image dérivée est déterminée dans l'appareil et/ou à distance.
[031] Dans une réalisation, l'appareil comprend un moyen pour exagérer le défaut par ajout de bruit et/ou réduction du nombre de pixels sans augmenter la netteté et/ou modification des couleurs et/ou modification du contraste et/ou réduction des détails et/ou réduction de la netteté.
[032] Dans une réalisation, l'appareil comprend un moyen de quantification du défaut pour générer le signal d'indication de défaut.
[033] Selon une réalisation, l'appareil comprend des moyens de traitement numérique de l'image acquise après la prise de vue, le signal d'indication du défaut, ou des défauts, tenant compte de ce traitement. [034] De préférence, l'appareil comprend un moyen pour générer un signal d'indication comportant une information sur un réglage de l'appareil permettant de limiter ou supprimer le défaut. [035] Dans ce dernier cas, l'appareil peut comprendre un moyen pour que le signal d'indication comporte plusieurs propositions de réglage avec, de préférence, associé à chaque réglage proposé, un affichage d'image. [036] Dans une réalisation, l'appareil comprend un moyen pour que le signal d'indication soit fonction d'au moins un réglage de l'appareil, notamment une indication de l'utilisation finale de l'image. [037] Dans une réalisation, l'appareil comprend des moyens pour émettre vers un serveur, des données permettant à ce serveur de calculer le signal d'indication de défaut(s), l'appareil comprenant des moyens de réception du signal d'indication de défaut(s). [038] D'autres caractéristique et avantages de l'invention apparaîtront avec la description de certains de ses modes de réalisation, celle-ci étant effectuée en se référant aux dessins ci-annexés sur lesquels : [039] la figure 1 est un schéma représentant un procédé selon l'invention,
[040] Dans le procédé selon l'invention, on fournit une aide à un utilisateur d'appareil 20 d'acquisition d'images numériques 22. [041] Ce procédé consiste, après acquisition de l'image 22, à calculer, à partir de cette image 22, un signal 24 d'indication de défaut(s) 26. Le défaut ou les défauts 26 se rapportent à la couleur, et/ou au contraste, et/ou à la netteté, et/ou au bruit, et/ou au détail de l'image acquise. [042] En général, le défaut 26 n'est pas visible sur l'écran, habituellement de petite taille, de l'appareil d'acquisition. C'est pourquoi, on a représenté ce défaut 26 en dehors de l'image. [043] Dans une réalisation, l'image 22 est utilisée pour produire une image dérivée 28 dans laquelle le défaut ou les défauts est (sont) exagéré(s). Cette exagération s'obtient, par exemple, par ajout de bruit, et/ou par réduction du nombre de pixels sans augmenter la netteté, et/ou modification des couleurs et/ou modification du contraste, et/ou réduction des détails, et/ou réduction de la netteté. Le signal 24 d'indication de défaut consiste alors à afficher ladite image dérivée 28. [044] Dans une autre réalisation, le signal 24 d'indication de défaut est, par exemple, obtenu à partir d'une quantification 30 du défaut à partir de ladite image 22. [045] Lorsque l'appareil 20 comporte des moyens de connexion à un réseau, comme c'est le cas d'un photophone ou caméraphone, c'est-à-dire d'un terminal de téléphonie mobile équipé d'un appareil photographique, le calcul du signal 24 peut être effectué soit dans l'appareil 20, soit dans un serveur distant 32. Il est également possible d'effectuer une partie du calcul dans l'appareil 20 et une partie des calculs dans le serveur 32.
[046] Dans ce cas, l'appareil 20 comporte des moyens pour émettre les signaux d'images vers le serveur 32 et des moyens pour recevoir des signaux de ce serveur 32.
[047] Lorsque l'image acquise est destinée à subir un traitement numérique après la prise de vue, ce traitement numérique 34 étant effectué soit dans l'appareil 20, soit dans le serveur 32 soit en partie dans l'appareil 20 et en partie dans le serveur 32, le calcul du signal 24 est effectué en tenant compte de ce traitement ultérieur par simulation, estimation ou traitement.
[048] Il est préférable que le signal d'indication 24 comporte une information sur un réglage 36 de l'appareil permettant de limiter ou supprimer le défaut.
[049] Préalablement à la description plus détaillée de certains modes de réalisation, on précise ici la d é finition des termes utilis é s :
[050] Image num é rique. Appareil d ' acquisition d ' images num é riques. Acquisition d ' image, capteurs, couleur.
[051] Par image numérique, on entend une image sous forme numérique. L'image peut être issue d'un appareil d'acquisition d'images numérique, également appelé appareil de capture d'image. L'image peut être une image fixe ou animée, une image d'une séquence vidéo avant prise de vue ou une image destinée à être transmise ou conservée.
[052] L'image numérique peut être représentée par un ensemble de valeurs numériques, ci-après appelées niveaux de gris, chaque valeur numérique étant associée à une sensibilité en couleur et une position géométrique relative sur une surface ou un volume. On appelle couleur au sens de l'invention, l'ensemble des valeurs numériques associées à la même sensibilité en couleur.
[053] L'image numérique est de préférence l'image brute du capteur (format « raw » en anglais) avant opération de dématriçage (« demosaicing » en anglais). L'image numérique peut également avoir subi un traitement, par exemple un dématriçage, une balance des blancs ou un sous-échantillonnage.
[054] - Lorsque l'image numérique est issue d'un appareil de capture d'image, l'appareil de capture d'image comprend un capteur doté d'éléments sensibles. Par élément sensible, on entend un élément du capteur permettant de convertir un flux d'énergie en signal électrique. Le flux d'énergie peut prendre la forme notamment d'un flux lumineux, de rayons X, d'un champ magnétique, d'un champ électromagnétique ou d'ondes sonores. Les éléments sensibles peuvent être, selon les cas, juxtaposés sur une surface et/ou superposés dans un volume. Les éléments sensibles peuvent être disposés selon une matrice rectangulaire, une matrice hexagonale ou une autre géométrie.
[055] - L'invention s'applique à des capteurs comportant des éléments sensibles d'un type donné ou de plusieurs types différents ; chaque type a une sensibilité en couleur et chaque sensibilité en couleur correspond à la partie du flux d'énergie converti en signal électrique par l'élément sensible du capteur. Dans le cas d'un capteur d'image visible, les capteurs ont généralement une sensibilité en 3 couleurs et l'image numérique a 3 couleurs : rouge, vert et bleu. Certains capteurs ont une sensibilité en 4 couleurs : rouge, vert, émeraude, bleu.
[056] - Par couleur on entend également une combinaison, notamment linéaire, des signaux délivrés par le capteur.
[057] - L'invention s'applique avec les diverses définitions de la netteté connues. Par exemple, la netteté d'une couleur peut correspondre à la mesure d'une valeur dénommée BXU qui est une mesure de la surface de tache de flou, telle que décrite dans l'article publié dans les « Proceedings of IEEE, international Conférence of Image Processing, Singapore 2004 », et intitulé « Uniqueness of Blur Measure » de Jérôme BUZZI et Frédéric GUICHARD.
[058] De façon simplifiée, le flou d'un système optique se mesure à partir de l'image, appelée « réponse impulsionelle », d'un point infiniment petit situé dans le plan de netteté. Le paramètre BXU est la variance de la réponse impulsionelle (c'est-à-dire sa surface moyenne). Les capacités du traitement peuvent être limitées à une valeur maximale de BXU.
[059] Divers procédés de mesures d'une telle netteté sont décrits dans des manuels et publications tels que, par exemple, le « Handbook of Imange& Video processing » édité par Al Bovik et publié par Académie press, pages 415 à 430.
[060] Dans une réalisation, la netteté est obtenue par calcul d'un gradient. Par exemple la netteté peut être obtenue par un calcul de gradient de 9 niveaux de gris pris en des positions géométriques voisines.
[061] - Un appareil de capture d'images est, par exemple, un appareil photo jetable, un appareil photo numérique, un appareil reflex (numérique ou pas), un scanner, un fax, un endoscope, une caméra, un caméscope, une caméra de surveillance, un jouet, une caméra ou un appareil photo intégré ou relié à un téléphone, à un assistant personnel ou à un ordinateur, une caméra thermique, un appareil d'échographie, un appareil d'imagerie IRM (résonance magnétique), un appareil de radiographie à rayons X.
[062] - Par système optique de capture d'images, on entend les moyens optiques permettant de restituer des images sur un capteur.
[063] - Par capteur d'images, on entend des moyens mécaniques, chimiques, ou électroniques permettant la capture et/ou l'enregistrement d'une image.
[064] Par syst è me d ' asservissement on entend des moyens de type mécanique, chimique, électronique, ou informatique permettant que des éléments ou paramètres de l'appareil respectent une consigne. Il s'agit notamment du système de mise au point automatique (autofocus), du contrôle automatique de la balance des blancs, du contrôle automatique de l'exposition, du contrôle d'éléments optiques, afin, par exemple, de conserver une qualité uniforme d'images, d'un système de stabilisation d'image, d'un système de contrôle de facteur de zoom optique et/ou numérique, ou d'un système de contrôle de saturation, ou d'un système de contrôle de contraste.
[065] - Les moyens de traitement numériques d'images peuvent prendre diverses formes selon l'application.
[066] Les moyens de traitement numériques d'images peuvent être intégrés, en tout ou partie, à l'appareil, comme dans les exemples suivants :
[067] - Un appareil de capture d'images qui produit des images modifiées, par exemple un appareil photo numérique qui intègre des moyens de traitement d'images.
[068] - Un appareil de restitution d'images qui affiche ou imprime des images modifiées, par exemple un projecteur vidéo ou une imprimante incluant des moyens de traitement d'images.
[069] - Un appareil mixte qui corrige les défauts de ses éléments, par exemple un scanner/ imprimante/télécopieur incluant des moyens de traitement d'images.
[070] - Un appareil de capture d'image professionnel qui produit des images modifiées, par exemple un endoscope incluant des moyens de traitement d'images.
[071] Les moyens de traitement d'images peuvent être déportés en tout ou partie sur un serveur.
[072] Signal d ' indication de d é faut :
[073] Le signal d'indication de défaut (également appelé indicateur ou indicateur de défaut), comme indiqué ci-dessus, est de préférence une image dérivée 28 de l'image acquise 22 avec exagération du défaut ou des défauts. Il peut s'agir aussi (à la place de l'affichage de l'image dérivée ou en complément de cet affichage) d'un signal sonore et/ou d'un signal visuel sous forme de signal lumineux, de textes et/ou de dessins sur l'écran et/ou d'un signal vibratoire, en particulier pour indiquer un flou de bougé. Ainsi, l'utilisateur obtient rapidement une indication du résultat lors de l'utilisation finale telle que sur un écran d'ordinateur ou lors d'une impression et il peut, dans ces conditions, prendre une autre photo s'il l'estime nécessaire et s'il en est encore temps.
[074] On rappelle ici que l'invention se distingue de la technique antérieure par le fait qu'elle fait appel à l'image pour produire, notamment quantifier, un signal de défaut alors que l'état antérieur de la technique ne considère que les conditions de prise de vue, comme par exemple le temps de pose.
[075] L'appareil peut, en plus du signal d'indication de défaut, prendre une autre photo avec d'autres réglages et la proposer à l'utilisateur en alternative de la photo déjà prise. On peut alors proposer à l'utilisateur de conserver l'autre photo prise automatiquement et/ou de changer les réglages de l'appareil. [076] Il convient de rappeler qu'un appareil de prise de vue d'images fixes acquiert plusieurs types d'images 22 : - il acquiert une séquence d'images, généralement de petite taille, adaptées à l'écran de l'appareil, pour affichage d'une photo et permettre le cadrage avant que l'utilisateur n'appuie sur le bouton de prise de vue, - lorsque l'utilisateur appuie sur le bouton de prise de vue, une autre image est acquise avec la taille définitive.
[077] Le signal d'indication de défaut est fourni :
[078] - de manière préférentielle avant la prise de vue, l'image faisant partie de la séquence acquise pour affichage avant la prise de vue, et/ou
[079] - après la prise de vue, l'image étant celle qui est acquise pour être conservée et/ou utilisée pour le service, et/ou
[080] - après la prise de vue et avant l'utilisation pour un service, lors d'une édition de l'image par exemple un recadrage, l'image étant celle obtenue après recadrage, et/ou
[081] - avant l'utilisation pour un service, l'image étant celle qui est traitée, notamment par compression et/ou réduction de taille pour le service.
[082] Ainsi,
[083] - un signal d'indication de défaut peut être calculé avant la prise de vue, par exemple pour indiquer un défaut de contraste ou de couleur
[084] - un signal d'indication de défaut peut être calculé avant la prise de vue mais ne peut être confirmé qu'après la prise de vue, par exemple pour indiquer un défaut de flou de bougé qui dépend de la scène et du mouvement de l'utilisateur au moment de la prise de vue.
[085] Si l'image fait partie de la séquence affichée avant la prise de vue, il peut être avantageux de tenir compte du traitement appliqué à l'image qui sera acquise lors de la prise de vue pour calculer le signal d'indication de défaut. En effet les paramètres de prise de vue, notamment d'exposition, de résolution seront différents. Les exemples ci- dessous donnent pour chaque défaut un exemple qui explique comment on peut tenir compte d'un traitement.
[086] R é glage de 1 ' appareil :
[087] Par réglage, on entend un réglage explicite tel que, dans le cas d'un photophone, un réglage de l'envoi d'une image vers un autre téléphone mobile ou vers un service d'impression, ou implicite tel que, toujours dans le cas d'un photophone, un numéro de téléphone destinataire saisi par l'utilisateur pour l'envoi d'un message.
[088] Par exemple, le flou se voyant beaucoup moins sur un écran de téléphone que sur une impression, si l'utilisateur a indiqué qu'il veut utiliser l'image pour l'envoi d'un téléphone à un autre, l'exagération du flou n'est pas nécessaire, alors que si l'utilisateur a indiqué qu'il veut utiliser l'image pour envoi à un ordinateur ou un service d'impression, l'exagération du flou devra être plus importante. [089] Les réglages de l'appareil comportent notamment un ou plusieurs des réglages suivants : [090] - Le mode d'utilisation, par exemple : automatique, priorité ouverture, priorité vitesse, portrait, paysage, sport, nuit, etc. Le mode d'utilisation a notamment une influence sur la sensibilité ISO, le temps de pose, le bruit et le flou. [091] - La correction manuelle d'exposition qui a notamment une influence sur le bruit et le contraste. [092] - Le réglage de sensibilité ISO qui a notamment une influence sur le bruit et le flou de bougé. [093] - Le réglage de temps de pose qui a notamment une influence sur le flou de bougé.
[094] - Le réglage d'ouverture qui a notamment une influence sur le flou.
[095] - Le réglage de mise au point qui a notamment une influence sur le flou.
[096] - Le mode macro qui a notamment une influence sur le flou.
[097] - Le réglage de balance des blancs, par exemple : automatique, tungstène, fluorescent, halogène, ensoleillé, couvert, ombragé qui a notamment une influence sur la couleur. [098] - Le réglage de contraste, par exemple : fort, normal, faible.
[099] - Le réglage de netteté, par exemple : fort, normal, faible qui a notamment une influence sur le flou. [100] - Le réglage de résolution qui a une influence sur, notamment, les détails et la netteté. [101] - Le réglage de zoom numérique qui a notamment une influence sur les détails.
[102] - Le réglage de rendu couleur, par exemple : couleur, noir et blanc, sépia, saturé.
[103] - Le réglage d'espace colorimétrique de sortie.
[104] - La valeur maximale de facteur de zoom numérique, la valeur 1 étant fournie pour désactiver le zoom numérique. [105] - Les paramètres des différents asservissements.
[106] - Les paramètres de traitement de l'image, en particulier : les coefficients et tables utilisés par les différents filtres et traitements nécessaires à la construction de la couleur, de la netteté, du contraste, des détails et à la réduction du bruit. les paramètres de dématriçage, de « tone curve » (utilisée pour adapter la dynamique du signal du capteur, par exemple 10 bits, à la dynamique du signal de l'image par exemple 8 bits, de réduction de bruit, de balance des blancs, d'interpolation. [107] - Les autres paramètres fixes ou variables selon l'image et ayant une influence sur l'image ou sur l'image délivrée par le service. [108] - Une indication de l'utilisation finale de l'image sous la forme d'un ou plusieurs services et/ou sous la forme du nombre de pixels nécessaires à l'utilisation et/ou sous la forme du type de périphérique de restitution (notamment écran d'appareil, impression, agrandissement) et/ou sous une des formes décrites plus loin ; l'indication de l'utilisation finale de l'image peut se faire de différentes façons : lors de la création d'un message pour un service particulier, le signal d'indication de défaut apparaissant lors de l'acquisition de l'image ou lors de la sélection de l'image dans un album, ou à défaut lors de l'affichage de l'image dans le message avant envoi, par exemple : pour un service de carte postale sur mobile après la demande de création de carte postale pour un service MMS sur mobile, après le choix du destinataire, ce qui permet, s'il s'agit d'un numéro ou adresse de service carte postale, de savoir que l'image va être imprimée, s'il s'agit d'une adresse email de savoir que l'image va être utilisée sur un écran d'ordinateur ou pour une impression, s'il s'agit d'un numéro de téléphone mobile de savoir que l'image va être utilisée sur un écran de mobile, via un réglage effectué par l'utilisateur, via un réglage effectué par l'opérateur du service, via un réglage effectué par le fabricant ou le vendeur du téléphone, afin de favoriser certains types de services, via un historique des usages des images. [109] Utilisation de 1 ' image :
[110] Dans le cas où la donnée multimédia est une image, par service on entend notamment des services tels que décrits précédemment mais également des services correspondant à une utilisation de l'image déterminée, le service n'étant pas nécessairement proposé par un prestataire mais pouvant également être réalisé par l'utilisateur lui-même ou par un tiers, en particulier l'utilisation de l'image déterminée peut correspondre à des usages de partage d'images (sur un écran de petite taille, sur un écran d'ordinateur, sur une impression, sur un support électronique ou physique) et mémoire (archivage pour consultation ultérieure par impression ou enregistrement du fichier image) tels que: [111] - l'affichage sur un écran de petite taille, usuellement de moins de 100 000 pixels, notamment : l'écran de l'appareil d'acquisition, ou l'écran d'un autre appareil ou l'écran d'un appareil de stockage de données multimédia, [112] - l'affichage sur un écran de grande taille, usuellement de 1 à 2 millions de pixels notamment : un écran d'ordinateur, un téléviseur, un projecteur, [113] - l'impression au format standard (10cmxl5cm environ), usuellement de 2 millions de pixels, [114] - l' agrandissement de plusieurs millions de pixels,
[115] - la retouche
[116] - l'archivage sur support électronique (disque dur, CD, DVD...).
[117] On peut regrouper les services en fonction du nombre de pixels nécessaire à l'utilisation : [118] - Utilisation en petite taille, par exemple 100 000 pixels,
[119] - Utilisation en taille standard, par exemple à 1 à 2 million de pixels, et
[120] - Utilisation en taille maximale possible.
[121] D é fauts qui se rapportent à la couleur :
[122] On va maintenant décrire une réalisation de l'invention dans laquelle, après l'acquisition de l'image, on calcule à partir de l'image un signal d'indication de défaut(s) qui se rapporte à la couleur de l'image acquise. [123] Un tel défaut peut être notamment :
[124] - Lorsque l'appareil est utilisé en mode balance des blancs automatique, un défaut issu d'une mauvaise estimation de balance des blancs automatique. [125] - Lorsque l'appareil est utilisé en mode balance des blancs manuelle, un défaut issu d'un mauvais réglage de l'utilisateur ; par exemple l'utilisateur a réglé son appareil en mode ensoleillé et a oublié de changer le réglage lorsqu'il est entré dans un local éclairé en tungstène. [126] - Une mauvaise restitution des couleurs pour un usage donné.
[127] Il convient de rappeler qu'une balance des blancs peut être, par exemple, caractérisée par un gain à appliquer sur les différents canaux vert, bleu et rouge. On peut, par exemple, se rapporter à l'ouvrage de Mark D. Fairchild : « Color Appearance Models », 1997, Addison Wesley Longman. [128] Dans ce cas :
[129] - un réglage manuel de balance des blancs de l'appareil revient à utiliser des gains prédéterminés qui seront appliqués à l'image, [130] - Si l'appareil est réglé en mode automatique, les gains sont calculés à partir de l'image, par exemple par la méthode « gray world » comme décrit dans l'article de K. Barnard, V. Cardei, B. Funt : "A Comparison of Computational Color Constancy algorithms — Part 1 : Methodology [131] and Experiments with Synthesized Data", IEEE Trans. Image Processing, Vol. 11, No. 9, pp. 972983, 2002. [132] On peut alors quantifier la différence entre deux balances des blancs comme la somme de la valeur absolue des différences de gain pour chaque couleur. [133] Lorsque la balance des blancs est réglée en mode manuel, un tel défaut peut ainsi être quantifié en faisant un calcul de balance des blancs sur l'image acquise, et en quantifiant la différence entre ces balances des blancs comme indiqué.
[134] Il est également connu que les défauts de couleurs sont d'autant moins visibles que l'écran présente un faible contraste et/ou un faible gamut et donc qu'il sont difficilement décelables sur un écran d'appareil alors qu'ils peuvent être plus gênants sur un écran d'ordinateur ou une impression. Ainsi, un mauvais réglage de balance des blancs ne se voit pas forcément sur l'écran de l'appareil alors qu'il se révélera pour d'autres usages.
[135] Une exagération d'un tel défaut peut être effectuée :
[136] - en modifiant les couleurs par augmentation de saturation, afin d'augmenter le contraste entre les différentes couleurs et/ou
[137] - en corrigeant les défauts de contraste et de couleur de l'écran, par exemple par application de courbe à chaque couleur.
[138] Dans le cas où l'image numérique est destinée à subir un traitement de modification de rendu des couleurs, par exemple un traitement d'augmentation de saturation couleur si l'appareil est réglé en mode paysage :
[139] - on peut tenir compte de ce traitement en appliquant ce dernier sur l'image avant quantification du défaut,
[140] - on peut également tenir compte de ce traitement par estimation en modifiant la valeur quantifiée avec une estimation de l'impact qu'aurait eu le traitement, par exemple à l'aide de valeurs de corrections tabulées préalablement calculées.
[141] Le signal d'indication de défaut(s) peut comporter :
[142] - Une information de réglage de balance des blancs permettant de limiter ou supprimer le défaut. Par exemple en mode manuel si l'utilisateur a réglé son appareil en mode ensoleillé et a oublié de changer le réglage lorsqu'il est entré dans un local éclairé en tungstène, on peut utiliser une quantification du défaut telle que décrite précédemment, pour, lorsque cette quantification dépasse un seuil prédéfini, avertir l'utilisateur que la balance des blancs est peut-être mal réglée : en posant une question : « voulez- vous passer en balance des blancs automatique ? » en changeant la couleur ou en faisant clignoter le symbole indiquant le réglage de balance des blancs, s'il est présent en utilisant un autre signal tel que décrit précédemment.
[143] - Une proposition de plusieurs réglages de balance des blancs, par exemple le mode automatique et/ou le ou les modes manuels pour lesquels la quantification de la différence avec le réglage manuel de l'appareil comme décrit précédemment est la plus faible. [144] - Une proposition de reprendre la vue.
[145] Le signal d'indication peut être fonction d'au moins un réglage de l'appareil, notamment :
[146] - Le réglage de balance des blancs comme décrit précédemment.
[147] - Une indication de l'utilisation finale de l'image. Notamment en cas d'utilisation sur un écran de téléphone mobile, les défauts de couleurs sont généralement moins visibles et le signal peut apparaître pour une quantification du défaut plus élevée que dans le cas d'une utilisation pour un service d'impression. [148] D é fauts qui se rapportent au contraste :
[149] On va maintenant décrire une réalisation de l'invention dans laquelle, après l'acquisition de l'image, on calcule à partir de cette image un signal d'indication de défaut(s) qui se rapporte au contraste de l'image acquise. [150] Un tel défaut peut être notamment :
[151] - une image sombre,
[152] - un contre-jour,
[153] - une image trop claire avec des zones saturées,
[154] - une image trop contrastée, notamment d'une scène présentant des variations d'éclairage trop fortes, [155] - un manque de noir,
[156] - un voile blanc, gris, ou noir,
[157] - un manque de contraste pour un usage donné.
[158] Il convient de rappeler que le contraste peut être caractérisé par un calcul d'histogramme suivi d'une analyse des valeurs minimales, moyenne et maximale. Dans ce cas : [159] - un voile gris se caractérise par une valeur minimale supérieure à un seuil, par exemple 20% de la dynamique, [160] - un voile noir se caractérise par une valeur maximale inférieure à un seuil, par exemple 80% de la dynamique, [161] - une image trop claire se caractérise par une valeur moyenne supérieure à un seuil, par exemple 80% de la dynamique, [162] - une image trop sombre se caractérise par une valeur moyenne inférieure à un seuil, par exemple 20% de la dynamique. [163] On peut alors quantifier le défaut de contraste par la somme du dépassement de chaque valeur par rapport à ces seuils. [164] Lorsque l'exposition est réglée en mode manuel (par exemple avec une correction d'exposition manuelle, ou un choix manuel d'ouverture et temps de pose), un tel défaut peut ainsi être quantifié en quantifiant le contraste comme indiqué. [165] Il est connu que les défauts de contraste sont d'autant moins visibles que l'écran présente un faible contraste et/ou un faible gamut et donc qu'il sont difficilement décelables sur un écran d'appareil alors qu'ils peuvent être plus gênants sur un écran d'ordinateur ou une impression. Ainsi, un mauvais réglage d'exposition ne se voit pas forcément sur l'écran de l'appareil alors qu'il se révélera pour d'autres usages.
[166] Une exagération d'un tel défaut peut être effectuée :
[167] - par modification du contraste, par exemple en appliquant une courbe en S qui réduit le contraste quand il est trop faible et qui l'augmente quand il est trop fort,
[168] - en corrigeant les défauts de contraste et de couleur de l'écran, par exemple par application de profil de l'écran conforme au standard ICC.
[169] Dans le cas où l'image numérique est destinée à subir un traitement d'amélioration de contraste par exemple selon le brevet « procédé et système pour modifier une image numérique de manière quasi régulière par pixel » déposé le 23 septembre 2003 par « Do Labs » sous le numéro 03/50596, on peut tenir compte de ce traitement par traitement en appliquant ce traitement sur l'image avant quantification du défaut.
[170] On peut également tenir compte de ce traitement par estimation en modifiant l' histogramme avant quantification du défaut avec une estimation de l'impact qu'aurait eu le traitement, par exemple à l'aide d'une transformation linéaire suivie de l'application d'un gamma.
[171] Le signal d' indication peut comporter :
[172] - Une information de réglage de correction manuelle, d'exposition, ou de temps de pose, ou d'ouverture permettant de limiter ou supprimer le défaut. Par exemple lorsque l'utilisateur a réglé l'appareil avec une correction de sous-exposition manuelle, on peut utiliser l'analyse de la valeur maximale de histogramme pour, lorsque celle-ci s'écarte du maximum de la dynamique de plus d'un seuil prédéfini, par exemple 10%, avertir l'utilisateur que le réglage d'exposition est peut-être mal adapté: en posant une question : « voulez- vous modifier la correction d'exposition ? », en changeant la couleur ou en faisant clignoter le symbole indiquant le réglage de correction d'exposition, s'il est présent, en utilisant un autre signal tel que décrit précédemment.
[173] - Une proposition de plusieurs réglages de correction d'exposition, par exemple le mode automatique et/ou le ou les modes manuels pour lesquels la quantification du défaut est la plus faible.
[ 174] - Une proposition de reprendre la vue.
[175] Le signal d'indication peut être fonction d'au moins un réglage de l'appareil, notamment :
[176] - le réglage de correction d' exposition,
[177] - le réglage du mode d' exposition, [178] - une indication de l'utilisation finale de l'image. Notamment en cas d'utilisation sur un écran de téléphone mobile, les défauts de contraste sont généralement moins visibles et le signal peut apparaître pour une quantification du défaut plus forte que dans le cas d'une utilisation pour un service d'impression.
[179] D é fauts qui se rapportent à la nettet é :
[180] On va maintenant décrire une réalisation de l'invention dans laquelle, après l'acquisition de l'image, on calcule à partir de cette image un signal d'indication de défaut(s) qui se rapporte à la netteté de l'image acquise.
[181] Un tel défaut peut être notamment :
[182] - Le flou de bougé, qui se produit si l'utilisateur bouge trop ou si le sujet est en mouvement rapide. Ce défaut est d'autant plus important que le temps de pose est long, en particulier sur les appareils, notamment les photophones, dépourvus de flash, ou pour des scènes de nuit.
[183] - Le flou de mise au point, qui se produit si l'image est prise trop près, en particulier sur les appareils à mise au point fixe, ou pour les appareils ou objectifs dépourvus de mode macro ou si la mise au point automatique est défaillante, ce qui arrive sur les appareils photos numériques notamment.
[184] - Un flou de mise au point en mode mise au point manuelle, par exemple : une image prise en mode macro d'un objet trop éloigné, une image prise en mode normal d'un objet trop proche.
[185] - Un flou visible pour un usage donné, par exemple un flou qui ne se voit pas sur l'écran de l'appareil mais qui se voit sur une impression.
[186] Il convient de rappeler que la netteté peut être caractérisée par un calcul d'histogramme du maximum des gradients dans chaque direction pour chaque pixel. La quantification de la netteté peut alors être le pourcentage des pixels pour lesquels le maximum du gradient est inférieur à un seuil, notamment 10% de la dynamique.
[187] Il est connu par ailleurs que lorsque le nombre de pixels d'image est réduit par un sous-échantillonnage classique tel que bilinéaire ou bicubique, sa netteté augmente. On peut par exemple se reporter à l'article publié dans les « Proceedings of IEEE, International Conférence of Image Processing, Singapore 2004 », et intitulé « Uniqueness of Blur Measure » de Jérôme BUZZI et Frédéric GUICHARD.
[188] Ainsi, les défauts de netteté sont d'autant moins visibles que l'écran est petit et donc, ils sont difficilement décelables sur un écran d'appareil alors qu'ils peuvent être plus gênants sur un écran d'ordinateur ou une impression. Par exemple une mauvaise mise au point ou un flou de bougé ne se voient pas forcément sur l'écran de l'appareil alors qu'ils se révèlent pour d'autres usages.
[189] On sait que le réglage de temps de pose (un des paramètres de l'exposition) est directement lié au flou de bougé. [190] Enfin à quantité de lumière donnée dans une scène, en basse lumière un compromis est à réaliser entre bruit et flou de bougé. [191] Une exagération d'un tel défaut peut être effectuée :
[192] - en réduisant d'autant plus la netteté que l'image manque de netteté
[193] - contrairement aux méthodes classique qui augmentent la netteté, on réduit le nombre de pixels sans augmenter la netteté pour permettre son affichage sur l'écran de l'appareil par exemple en enchaînant les étapes suivantes : [194] - on estime le flou de l'image capturée (au moyen par exemple d'une méthode de gradient telle que décrite précédement). [195] - on sous-échantillone l'image capturée en une image « preview ».
[196] - on rajoute le flou estimé sur l'image capturée à l'image « preview », au moyen par exemple d'un filtre linéaire gaussien où l'écart type correspond à la quantité de flou estimée. [197] Dans le cas où l'image numérique est destinée à subir un traitement ayant un impact sur la netteté, par exemple un traitement de réduction ou d'augmentation du nombre de pixels, notamment pour réaliser une impression, un affichage sur écran d'appareil mobile ou un affichage sur écran d'ordinateur : On peut tenir compte de ce traitement en appliquant ce dernier sur l'image avant quantification du défaut. On peut également tenir compte de ce traitement par estimation en modifiant la valeur quantifiée du défaut avec une estimation de l'impact qu'aurait eu le traitement, par exemple à l'aide de valeurs de corrections tabulées, préalablement calculées pour chaque facteur de réduction ou d'augmentation du nombre de pixels. On veillera particulièrement à tenir compte du nombre de pixels effectivement capturés qui peut être inférieur à la résolution du capteur si un zoom numérique a été appliqué, car un tel zoom ne conserve que la partie centrale de l'image. [198] Le signal d'indication peut comporter :
[199] - Une information de réglage de l'exposition - dont la sensibilité ISO, le temps de pose, un mode prédéfini - ou de la mise au point, cette information permettant de limiter ou supprimer le défaut. Par exemple en mode manuel, si l'utilisateur a réglé son appareil en mode macro et a oublié de changer le réglage lorsqu'il essaie de photographier un portrait, on peut utiliser une quantification du défaut telle que décrite précédemment, pour, lorsque celle-ci dépasse un seuil prédéfini, avertir l'utilisateur que la mise au point est peut-être mal réglée : en posant une question : « voulez- vous passer en mode mise au point automatique ? », en changeant la couleur ou en faisant clignoter le symbole indiquant le réglage de en mode macro, s'il est présent, en utilisant un autre signal tel que décrit précédemment. [200] - Une proposition de plusieurs réglages de mise au point et/ou exposition, par exemple le mode automatique et/ou le ou les modes manuels pour lesquels la quantification du défaut comme décrit précédemment est la plus faible. [201] - Une proposition de reprendre la vue.
[202] Le signal d'indication peut être fonction d'au moins un réglage de l'appareil, notamment : [203] - Les réglages de l'exposition et/ou de la mise au point.
[204] - Une indication de l'utilisation finale de l'image, par exemple : dans le cas d'un téléphone mobile, utilisation sur écran de téléphone (moins de 100 000 pixels) et/ou d'un écran d'ordinateur (1 million de pixels environ) et/ou impression de taille standard (10cmxl5cm environ, soit 2 millions de pixels) et/ou autre qui permet de déterminer la netteté finale perçue par l'utilisateur en fonction du facteur d'augmentation ou de réduction du nombre de pixels qui sera appliqué ultérieurement ; dans le cas d'un appareil photo, utilisation pour impression de taille standard (10x15 environ soit 2 millions de pixels) et/ou écran d'ordinateur (1 million de pixels environ) et/ou agrandissement (pas de réduction). [205] D é fauts qui se rapportent au bruit :
[206] On va maintenant décrire une réalisation de l'invention dans laquelle après l'acquisition de l'image, on calcule, à partir de cette image, un signal d'indication de défaut(s) qui se rapporte au bruit de l'image acquise. [207] Un tel défaut peut être le bruit lié à un éclairage d'intensité trop faible. Le bruit est d'autant plus visible que le capteur est de petite taille, que l'éclairage est faible et que l'image est agrandie, en particulier sur les impressions provenant de photophones. [208] Il est connu que le bruit dépend du gain du capteur et du niveau de gris. Un tel défaut peut être quantifié en utilisant des valeurs préalablement tabulées pour chaque valeur de gain du capteur. Ces valeurs tabulées peuvent être obtenues en mesurant pour plusieurs valeurs de niveau de gris et de gain du capteur, le bruit, par exemple à l'aide d'un outil tel que « DxO analyzer » qui détermine notamment une quantité de bruit sous forme d'écart type, la taille du bruit sous forme d'un grain, et l'aspect coloré du bruit sous forme d'un pourcentage. [209] Il est également connu que le bruit est d'autant moins visible que l'image est réduite en taille et donc qu'il est difficilement décelable sur un écran d'appareil alors qu'il peut être plus gênant sur un écran d'ordinateur ou une impression. Par exemple un bruit provenant d'un mauvais réglage d'exposition ou d'une quantité insuffisante de lumière ne se voit pas forcément sur l'écran de l'appareil alors qu'il se révélera pour d'autres usages. [210] Par ailleurs, il est connu que le gain du capteur est directement lié au réglage de sensibilité ISO. [211] Enfin il est connu qu'à quantité de lumière donnée dans une scène, en basse lumière, un compromis est à réaliser entre bruit et flou de bougé par l'intermédiaire des réglages automatiques ou manuels d'ISO et de temps de pose. [212] Une exagération d'un tel défaut peut être effectuée :
[213] - en ajoutant un bruit ayant les caractéristiques du bruit quantifié par exemple au moyen d'un algorithme tel que explicité dans l'ouvrage de W.H., Teukolsky, S.A., Vetterling, W.T., Flannery, B.P., « Numerical Recipes in C: The Art ofScientific Computing ». Cambridge University Press, Cambridge ; 1992, ce à l'échelle de l'écran et non pas de l'image à la taille initiale, [214] - en ajoutant un bruit ayant les caractéristiques du bruit quantifié correspondant au niveau de gris, ce à l'échelle de l'écran et non pas de l'image à la taille initiale, [215] - en ajoutant un bruit ayant les caractéristiques du bruit correspondant au gain du capteur et/ou au niveau de gris, ce à l'échelle de l'écran et non pas de l'image à la taille initiale. [216] Dans le cas où l'image numérique est destinée à subir un traitement de modification de bruit, par exemple une modification du nombre de pixels ou une réduction de bruit : on peut tenir compte de ce traitement en appliquant ce dernier sur l'image avant quantification du défaut ; on peut également tenir compte de ce traitement par estimation en modifiant la valeur quantifiée avec une estimation de l'impact qu'aurait eu le traitement, par exemple à l'aide de valeurs de corrections tabulées préalablement calculées. [217] Le signal d'indication peut comporter :
[218] - Une information de réglage d'exposition, ou de résolution, ou de sensibilité ISO permettant de limiter ou supprimer le défaut. Par exemple en mode manuel si l'utilisateur a réglé son appareil en mode sport et a oublié de changer le réglage lorsqu'il essaie de faire un portrait en intérieur, on peut utiliser une quantification du défaut telle que décrite précédemment, pour, lorsque celle-ci dépasse un seuil prédéfini, avertir l'utilisateur que l'exposition est peut-être mal réglée : en posant une question : « voulez- vous passer en exposition automatique ? », en changeant l'exposition ou en faisant clignoter le symbole indiquant le réglage de mode d'exposition, s'il est présent, en utilisant un autre signal tel que décrit précédemment. [219] - Une proposition de plusieurs réglages d'exposition et/ou de résolution et/ou d'ISO, par exemple le mode automatique et/ou le ou les modes manuels pour lesquels la quantification du défaut, comme décrit précédemment, est la plus faible pour la quantité de lumière de la scène.
[220] - Une proposition de reprendre la vue.
[221] Le signal d'indication peut être fonction d'au moins un réglage de l'appareil, notamment :
[222] - les réglages de mode d'exposition,
[223] - une indication de l'utilisation finale de l'image ; notamment en cas d'utilisation sur un écran de téléphone mobile le bruit sera moins visible que sur un écran d'ordinateur.
[224] D é fauts qui se rapportent aux d é tails :
[225] On va maintenant décrire une réalisation de l'invention dans laquelle, après l'acquisition de l'image, on calcule, à partir de cette image, un signal d'indication de défaut(s) qui se rapporte aux détails de l'image acquise.
[226] Un tel défaut peut être notamment :
[227] - un nombre de pixels insuffisant pour un usage donné,
[228] - la résolution qui est liée au nombre de pixels du capteur et à l'optique, ainsi qu'au zoom numérique appliqué ainsi qu'à un recadrage éventuel. Un nombre trop faible de pixels oblige par exemple à limiter la taille d'une impression.
[229] Un tel défaut peut être quantifié en comptant le nombre de pixels effectivement utilisés sur le capteur. Il est à noter que ce nombre dépend notamment du facteur de zoom numérique appliqué.
[230] Il est connu que les défauts liés aux détails sont d'autant moins visibles que l'écran présente une faible taille et donc qu'il sont difficilement décelables sur un écran d'appareil alors qu'ils peuvent être plus gênants sur un écran d'ordinateur ou une impression. Par exemple un mauvais réglage de qualité d'image, ou de résolution, ou un zoom numérique trop important ne se voit pas forcément sur l'écran de l'appareil alors qu'il se révélera pour d'autres usages.
[231] Une exagération d'un tel défaut peut être effectuée en réduisant les détails, par exemple en réduisant la résolution de l'image pour se rapprocher des conditions d'utilisation lors d'une impression. Dans l'exemple d'une image d'un appareil 4 millions de pixels prise avec un zoom numérique d'un facteur de 4 affichée sur un écran de 60000 pixels : l'image acquise présente 250 000 pixels ; si on veut utiliser cette image pour imprimer en format standard (donc avec environ 2 millions de pixels pour un format standard 10x15cm) il faudra l'agrandir 3 fois environ dans chaque direction ; et si on affiche l'image de 250000 pixels sur l'écran de 60000 pixels, la perte de détails lors de l'impression ne sera pas visible.
[232] Par contre si on réduit l'image à 7000 pixels environ, pour l'afficher il faudra l'agrandir 3 fois dans chaque direction ce qui donnera un aspect similaire à l'impression. Pour cela, on peut d'abord réduire l'image par exemple par un filtre bilinéaire correspondant à une matrice 2x2 puis l'agrandir par exemple par application d'un filtre bicubique ou d'un filtre d'interpolation comme ceux décrits dans l'article de Philippe Thévenaz, Thierry Blu, Michael Unser : « interpolation revisited », IEEE Transactions on médical Imaging, Vol 19, N-7, p 739-758, 2000. Afin de gagner du temps de calcul, il est bien entendu possible d'appliquer un filtre qui calcule directement la réduction combinée avec l'agrandissement, par exemple par application d'un filtre correspondant à la convolution des 2 filtres, c'est à dire application d'un filtre par un matrice correspondant à la multiplication des 2 matrices. [233] Dans le cas où l'image numérique est destinée à subir un traitement de modification des détails, par exemple un agrandissement : on peut tenir compte de ce traitement en l'appliquant sur l'image avant quantification du défaut ; on peut également tenir compte de ce traitement par estimation en modifiant la valeur quantifiée avec une estimation de l'impact qu'aurait eu le traitement, par exemple comme décrit dans l'exemple ci-dessus. [234] Le signal d'indication peut comporter :
[235] - Une information de réglage de la résolution et/ou du zoom numérique permettant de limiter ou supprimer le défaut, par exemple utiliser une quantification du défaut telle que décrite précédemment, pour, lorsque celle-ci dépasse un seuil prédéfini, avertir l'utilisateur que le zoom numérique est peut être mal réglé : en posant une question : « voulez- vous désactiver le zoom numérique ? », en changeant la couleur ou en faisant clignoter le symbole indiquant le facteur de zoom numérique ou la résolution, s'il est présent, en utilisant un autre signal tel que décrit précédemment. [236] - Une proposition de plusieurs réglages de résolution et/ou du zoom numérique, par exemple le mode automatique et/ou le ou les modes manuels pour lesquels la quantification du défaut, comme décrit précédemment, est la plus faible. [237] - Une proposition de reprendre la vue.
[238] Le signal d'indication peut être fonction d'au moins un réglage de l'appareil, notamment : [239] - Le réglage de zoom numérique et/ou de résolution.
[240] - Une indication de l'utilisation finale de l'image, notamment : dans le cas d'un téléphone mobile, utilisation sur écran de téléphone (moins de 100 000 pixels) et/ou écran d'ordinateur (1 million de pixels environ) et/ou impression de taille standard (10cmxl5cm environ soit 2 millions de pixels) et/ou autre qui permet de déterminer la netteté finale perçue par l'utilisateur en fonction du facteur d'augmentation ou de réduction du nombre de pixels qui sera appliqué ultérieurement, dans le cas d'un appareil photo, utilisation pour impression de taille standard (10x15 environ soit 2 millions de pixels) et/ou écran d'ordinateur (1 million de pixels environ) et ou agrandissement (pas de réduction). [241] De fa ç on g é n é raie, on indique à l'utilisateur la présence des défauts qui proviennent des actions de cet utilisateur et, de préférence, on lui indique une action corrective à effectuer. [242] Lorsqu'il est possible de fournir une aide avant la prise de vue, celle-ci est indiquée à l'aide d'un signal dans le viseur ou sur l'écran ou à l'aide d'un signal d'indication de cadrage ou d'un message, par exemple incitant à faire appel à un support stable pour l'appareil. [243] Ces aides à la prise de vue peuvent également être utilisées lorsqu'on fait appel à un logiciel de retouche pour guider l'utilisateur notamment lors d'un recadrage ou de l'application d'un filtre ou effet spécifique. Ces indications tiennent compte de la perception des défauts par l'œil et donc des traitements tels que la réduction de bruit, l'amélioration du contraste, le nettoyage d'une photo de texte, la réduction des défauts de l'appareil et/ou de l'écran. Ceci est effectué soit en montrant avant la prise de vue, une photo ou vidéo ayant subi les mêmes traitements soit en procédant comme décrit ci-dessus, c'est-à-dire en montrant l'image traitée après la prise de vue, en effectuant des mesures sur l'image traitée ou en corrigeant les mesures sur l'image brute par une estimation de l'effet de traitement. [244] Une ou plusieurs des fonctions suivantes permettent d ' augmenter la qualit é des photos ou vid é os : [245] Aide au cadrage : par superposition de silhouette sur l'image qui indique à l'utilisateur comment cadrer dans différents cas qu'il peut choisir en écran horizontal (image plus large que haute) ou en écran vertical, ce qui permet d'obtenir à la fois une image cadrée correctement et une meilleure résolution que si un recadrage ultérieur était effectué. Ces aides au cadrage sont les suivantes : Pour le portrait d'une personne : contour de la tête et, le cas échéant, du buste, de préférence avec respect de la règle des trois tiers : plusieurs cadrages sont proposés, par exemple : gros plan de la tête en écran vertical, buste en écran vertical à gauche de l'image, buste en écran vertical à droite de l'image, debout en écran vertical, gros plan de la tête en écran horizontal à droite de l'image, gros plan de la tête en écran horizontal à gauche de l'image ; dans le cas des gros plans, afin d'inciter le photographe à positionner le sujet devant un fond plein ou sans intérêt, on peut griser ou cacher l'image autour de la silhouette. Pour la photo de 2 personnes ou de groupes : contour des têtes et bustes : plusieurs cadrages sont proposés, par exemple : deux bustes en écran horizontal, les silhouettes d'un groupe devant un trait symbolisant l'horizon disposé à un tiers en haut de l'image en écran horizontal. Pour un paysage : un trait symbolise l'horizon de préférence à environ un tiers de l'image. Plusieurs cadrages sont proposés, par exemple : horizon haut en écran horizontal, horizon bas en écran horizontal, horizon haut en vertical, horizon bas en écran vertical. Pour une photo de texte : quelques caractères de taille et orientation adaptées sont proposés, ce qui permet de déterminer où se trouve le haut du texte et donc le tourner correctement pour l'afficher sur un écran ou pour le coller sur une carte postale. Pour une photo de nuit plusieurs cadrages sont proposés, par exemple : portrait rapproché, feux d'artifice. Pour une photo d'identité on propose un cadrage de contour de la tête et des épaules.
[246] Toutes ces aides peuvent être disponibles pour un cadrage en écran horizontal (photo plus large que haute) ou en écran vertical.
[247] On peut également présenter des exemples de photos, notamment de grands photographes.
[248] On peut aussi fournir des explications adaptées au cas (type de scène et type de service) par exemple sous la forme d'un cours photo et/ou d'exemples.
[249] Cette aide au cadrage respecte de préférence la règle d'or de la photographie dite des trois tiers : ne jamais centrer le sujet ou l'horizon.
[250] Cette aide au cadrage permet également de déterminer où se trouve le haut de l'image et ensuite automatiquement lui appliquer une rotation pour que le haut de la scène se trouve en haut de l'écran même si l'appareil était tourné lors de la prise de vue, ce sans avoir besoin d'un capteur pour déterminer si l'appareil est en position horizontale ou verticale.
[251] Adaptation du temps de pose et de 1 ' exposit ion au type de service ou d ' utilisation.
[252] Ainsi, sur un mobile, le temps de pose doit être plus court pour une impression ou l'envoi à une adresse email, que pour un envoi à un autre mobile. Le temps de pose et l'exposition doivent aussi être adaptés au cadrage choisi. Il faut ainsi une exposition longue pour un feu d'artifice, plutôt sous-exposer de nuit pour obtenir des noirs et éviter de surexposer les zones éclairées ; il faut une exposition courte pour les sujets rapides. [253] On peut montrer une image am é lior é e sur 1 ' é cran afin de se rendre compte de la qualité finale perçue par le récepteur du service et d'éviter de supprimer des photos utilisables après amélioration mais qui semblent de mauvaise qualité avant amélioration par traitement numérique. [254] L'image améliorée peut être calculée sur un nombre faible de pixels adapté à la résolution de l'écran afin de réduire le temps de calcul et la ressource batterie. Si la photo est ensuite acheminée vers un serveur distant, ce dernier peut effectuer le calcul à la résolution nécessaire à l'utilisation du service. [255] On peut montrer un indicateur d ' image trop floue (bougé et/ou mise au point) adapté au service choisi, par exemple suite à une analyse du contenu de l'image, et/ou afficher ou é mettre le message correspondant : « veuillez poser votre main sur un support stable », « veuillez vous éloigner du sujet ». [256] La mesure (qui est une façon de réaliser une quantification) de défaut peut être effectuée à posteriori sur l'image comme décrit ci-dessus, et/ou un capteur peut être utilisé et/ou une analyse de la photo ou vidéo peut être effective pour détecter le mouvement et adapter le temps de pose en conséquence. [257] On peut montrer un indicateur d ' image bruit é e. et/ou afficher ou é met tre le message correspondant : « veuillez éclairer davantage le sujet principal ». [258] Le bruit peut être mesuré dans l'image, et/ou le bruit peut être calculé à partir du gain du capteur et du bruit connu pour une valeur du gain. [259] On peut montrer un indicateur d ' image sombre et/ou afficher ou é mettre le message correspondant : « veuillez éclairer davantage la scène ». [260] La mesure peut être effectuée sur la moyenne de l'image et/ou en regardant le maximum de la dynamique comme décrit ci-dessus dans l'exemple de réalisation relatif aux défauts qui se rapportent au contraste. [261] On peut montrer un indicateur de contre-jour, et/ou afficher ou é mettre le message correspondant : « veuillez éclairer davantage le sujet principal ». [262] On peut montrer un indicateur de manque de r é solution, et/ou afficher ou é mettre le message correspondant : « votre image manque de détails, veuillez ne pas utiliser le zoom numérique ». [263] On peut montrer un indicateur de non respect des r è gles pour les photos d ' identit é d'un pays (on décrit plus loin un service photo d'identité), et/ou afficher ou é mettre le message correspondant. [264] On peut montrer un indicateur de fond non uniforme, et/ou afficher ou é mettre le message correspondant : « le fond est mal adapté, veuillez utiliser un fond plus uniforme ». [265] Cet indicateur est particulièrement adapté aux portraits de près.
[266] On peut utiliser une touche d é di é e ou des onglets d'un menu, de manière cohérente avec le contexte, afin de permettre à l'utilisateur de prendre une photo à tout moment rapidement et simplement. [267] On peut fournir une indication sur la meilleure direction d ' é clairage : lorsque l'utilisateur tourne l'appareil vers la droite ou la gauche, un indicateur (rouge, orange, vert ou une flèche) indique la et les directions où l'éclairage permet d'obtenir la meilleure qualité d'image. [268] Pour un portrait par exemple, cette fonction permet de positionner le sujet dans cette direction. Pour réaliser cette fonction on analyse, par exemple, la quantité de bruit, le contraste, le temps de pose, les couleurs pour déterminer la qualité de l'image et donc la meilleure direction. [269] On peut fournir une indication du r é sultat de 1 ' analyse a utomatique de balance des blancs (éclairage du jour, ombragé, éclairage artificiel) afin de permettre de forcer à priori ou à posteriori le réglage automatique. [270] L ' ergonomie est par exemple la suivante :
[271] Les touches droite et gauche permettent de choisir une catégorie et des touches haut et bas permettent de choisir une variante. [272] Les catégories possibles sont : standard, portrait, paysage, nuit, sport, photo d'identité. [273] Les variantes possibles sont les différents cadrages.
[274] La catégorie peut être affichée par un système d'onglets.
[275] Une touche « aide » permet d'obtenir un exemple de photo et un texte explicatif fournissant des règles de photographie. [276] Le cours photo peut présenter plusieurs des caractéristiques suivantes :
[277] - Une partie adaptée à la situation, du type aide contextuelle : choix de l'utilisateur : type de cadrage, type de service, analyse de l'image, avec les différents contrôles décrits plus haut. [278] - Une partie générale, plus abstraite, sur les règles de composition et les principales règles de la photographie : importance de la lumière pour donner l'ambiance (quantité, contraste, ombre, direction, directe ou indirecte), s'assurer que rien n'attirera l'œil plus que le sujet principal, règle des tiers : dans l'image divisée en 9 rectangles égaux, le sujet dominant doit être dans l'une des 4 zones d'intérêt choisies, prendre les sujets du dessus ou du dessous, pas de niveau, utiliser des zones quasi blanches ou noires pour mettre en valeur le sujet principal, choisir le moment pour que l'image inspire un sentiment, les images doivent contenir des textures détaillées pour donner l'impression de réalité, des lignes conduisant vers le sujet le mettent en valeur, le fond doit être simple pour mettre en valeur le sujet principal. [279] - Inclure des exemples de photos.
[280] - Inclure des textes courts.
[281] L'utilisateur doit indiquer, de préférence avant la prise de vue, le ou les types de services qu'il souhaite utiliser avec cette image. Dans le cas où le souhait de l'utilisateur n'est pas connu, ou s'il souhaite utiliser tout type de service, on considère le cas le plus défavorable. Des exemples de services ou cas d'utilisation sont les suivants : [282] - Pour toutes les photos : impression 8cm xlOcm, adaptée aux images de 300 000 pixels, impression 10cmxl5cm, adaptée aux images de 1 million de pixels ou plus, impression de taille quelconque, affichage sur écran d'ordinateur, affichage sur écran de terminal mobile. [283] - Pour les photos de texte : envoi par fax, impression 8cm xlOcm, impression 10cmxl5cm, tout type d'impression, affichage sur écran d'ordinateur, affichage sur écran de terminal mobile. [284] SERVICES
[285] 1. Les divers services considérés utilisant l'image sont :
[286] - Envoi d'une télécopie depuis un terminal,
[287] - Envoi vers un autre terminal,
[288] - Envoi vers un email,
[289] - Envoi vers un album en ligne,
[290] - Envoi vers un site internet personnel (« moblog » en langue anglaise),
[291 ] - Envoi d' une carte postale,
[292] - Envoi d'une demande d'impression,
[293] - Envoi d'une demande de photos d'identité,
[294] - Demande d'un retour sur le terminal émetteur.
[295] 2. Pour chacun des services :
[296] On effectue une prise de vue et/ou on effectue une recherche dans un album et/ou on effectue une retouche avec amélioration de la prise de vue (cours, aide au cadrage, contrôle...), [297] - on améliore l'ergonomie d'utilisation,
[298] - on améliore la qualité de l'image comme décrit plus loin en effectuant un traitement local et/ou déporté vers un serveur, [299] - on utilise, le cas échéant, une photo de texte (quelquefois appelée FotoText+).
[300] 3. Pour envoyer une télécopie (fax) depuis un terminal, on peut procéder comme suit : [301] - on effectue une prise de vue d'un document contenant du texte et/ou des dessins,
[302] - on effectue un traitement de nettoyage du fond, • en local (dans le terminal) ou • distant sur un serveur, puis acheminement vers un télécopieur, [303] - on peut saisir un texte,
[304] - on met en page la télécopie,
[305] - on envoie via MMS, Wap, http..., ou directement depuis le terminal, vers un télécopieur si le traitement est local. [306] Pour l'envoi d'une télécopie depuis un terminal, on peut également procéder comme suit : [307] - Prise de vue d'un document contenant du texte et/ou des dessins,
[308] - Traitement de nettoyage du fond dans le terminal,
[309] - Eventuellement saisie de texte,
[310] - Mise en page de la télécopie,
[311] - Envoi via MMS, Wap, http... vers un serveur ou directement depuis le terminal vers un télécopieur. [312] Pour un envoi d'une télécopie depuis un terminal, on peut encore procéder de la façon suivante : [313] - Prise de vue d'un document contenant du texte et/ou des dessins,
[314] - Eventuellement saisie de texte,
[315] - Envoi via MMS, Wap, http... vers un serveur,
[316] - Traitement de nettoyage du fond dans un serveur,
[317] - Mise en page de la télécopie,
[318] - Acheminement vers un télécopieur.
[319] 4. Un service de photo d'identité comprend, dans une réalisation, les étapes suivantes : [320] - Prise de vue avec aide au cadrage.
[321] Cette aide au cadrage peut être adaptée aux normes du pays pour les documents officiels. [322] - L'aide au cadrage permet de segmenter l'image pour effectuer plus facilement les contrôles ci-dessous. [323] - Contrôle du respect des règles : Les règles qui peuvent être contrôlées sont par exemple : le contrôle de l'uniformité du fond, le contrôle de la couleur du fond, le contrôle si le fond est assez clair, le contrôle de la présence d'ombre sur le fond, le contrôle de l'éclairage du visage (qui ne doit pas être trop sombre), le contrôle de l'absence d'un chapeau ou voile, le contrôle de l'absence d'accessoires, le contrôle des proportions du visage, le contrôle que le visage est de face et non de profil. [324] Le contrôle peut être automatique et/ou manuel.
[325] En cas de non respect de la règle : de préférence la correction est automatique, et/ou la correction est effectuée manuellement par un opérateur, par exemple le nettoyage du fond, sinon un message est renvoyé à l'utilisateur, de préférence rapidement pour qu'il puisse reprendre la photo. [326] Ce message indique par exemple comment reprendre une photo sans le défaut.
[327] - Eventuellement saisie d'un texte à mettre au dos, par exemple : le nom le nom et la classe pour une photo scolaire. [328] - Saisie de l'adresse postale du destinataire ou du point de récupération des photos.
[329] - Choix éventuel du fournisseur du service.
[330] - Retouche éventuelle de l'image (nettoyage du fond, contraste...). La retouche est manuelle par transmission automatique de la photo à un opérateur, et/ou automatique. [331] - Transmission.
[332] Ce service peut être adapté aux règles d'un pays pour les documents officiels.
[333] 5. Autres services possibles avec un cameraphone (ou photophone) :
[334] - Reconnaissance de caractères.
[335] - Reconnaissance de visage.
[336] - Lecture de Code barre.
[337] - Gestion des droits et signature digitale (« watermark »).
[338] - Site personnel Mobile (« blog »).
[339] - Modèle de texte et photos, par exemple pour la fête des mères ou la St Valentin ou encore pour des poésies. [340] - Urgences Médicales, pour des situations difficiles, par exemple en mer ou en montagne. [341] - Constat amiable en cas d'accident automobile. Une application pose les questions et indique les photos à prendre pour établir un constat. [342] - Télédiagnostic, par exemple pour une maladie de plante.
[343] - Services pratiques Mesures. Par exemple, on peut mesurer les dimensions d'un meuble ou autre objet auquel on juxtapose un élément ayant une dimension déterminée, tel qu'une carte de crédit. Couleur : Calcul d'assortiment entre les couleurs de deux objets. Par exemple l'assortiment de la couleur d'un pantalon avec celle des chaussures, ou l'assortiment entre une cravate et une chemise. [344] - Services divers Morpho astrologie : chaque jour l'horoscope est calculé et personnalisé à partir de la date de naissance et du visage. « Morpho matching » : Evaluation du taux d'entente entre deux personnes, ce taux étant basé sur les photos des visages. Aura : rajouter une « aura » colorée à la personne (ou l'objet) sur la photo. [345] - Sécurité et identification ou authentification Signature : la signature écrite (adjointe à un numéro généré par un serveur par exemple) peut servir d' authentification. La photo peut aussi servir d' authentification. [346] - Services professionnels : Devis : Le vendeur venant établir un devis a parfois besoin de consulter un spécialiste. Le cameraphone fournit un moyen de consulter l' installateur/fournisseur au moment de l'établissement du devis. Par exemple un installateur de moteurs de volets roulants peut consulter un installateur pour déterminer la complexité du démontage. [347] On peut aussi valider auprès d'un client des choix qui émergent tardivement pour éviter des délais ou des erreurs d'appréciation, par exemple autoriser une coupe d'arbre plus violente que prévue, ou montrer avec le cameraphone une racine qui empêche le creusement d'une tranchée. [348] Le serveur distant, appelé également serveur de correction, peut se situer:
[349] - dans le MMS-C (système de traitement des MMS chez l'opérateur),
[350] - à l'entrée du MMS-C,
[351] - à la sortie du MMS-C,
[352] - dans la passerelle WAP,
[353] - dans le MM9,
[354] - dans le MM7.
[355] Les combinaisons suivantes de terminal et de serveur sont possibles:
[356] - terminal standard et serveur, [357] - terminal avec application qui réalise du traitement d'image, sans serveur,
[358] - terminal avec application qui réalise du traitement d'image, avec serveur,
[359] - terminal avec application qui ne réalise pas les traitements, avec serveur,
[360] - terminal avec application qui réalise les traitements pour donner un aperçu à l'utilisateur sur une image de taille réduite, avec serveur. [361] Les traitements destinés à un retour vers l'utilisateur peuvent se faire:
[362] - en local (dans le terminal), ou
[363] - à distance via http ou un autre protocole.
[364] EXEMPLES D' APPLICATION AVEC DES TERMINAUX DE TELEPHONE MOBILE [365] Des exemples de répartition des traitements sont donnés ci-après :
[366] a) Application avec un réseau 3G
[367] Ce réseau permet des échanges rapides terminal - serveur. Il est donc possible d'effectuer les traitements dans le serveur et d'afficher rapidement le résultat sur le téléphone. On peut ainsi travailler avec une puissance de calcul quelconque sur le terminal et un nombre de pixels élevé. [368] b) Application avec un réseau 2.5G et un téléphone haut de gamme (« smartphone » en anglais). [369] Le réseau ne permet pas des échanges rapides terminal - serveur. Mais le terminal dispose d'une puissance de calcul élevée. [370] Il est donc possible d'effectuer les traitements dans le terminal d'images à la taille de l'écran pour montrer un aperçu à l'utilisateur, et d'afficher rapidement le résultat sur ce terminal. [371] On peut effectuer les traitements à pleine résolution sur le serveur sans retour nécessaire vers l'utilisateur. [372] c) Application avec un réseau 2.5G et un téléphone milieu de gamme (« Featurephone » en anglais). [373] Le réseau ne permet pas des échanges rapides terminal - serveur.
[374] Le terminal a une puissance de calcul limitée et les échanges sont lents. La disponibilité d'aperçus pour l'utilisateur sera plus limitée, mais les autres avantages (ergonomie, accessibilité aux services...) sont préservés. [375] Il est donc possible d'effectuer les traitements dans le serveur en limitant les retours vers l'utilisateur. Texte inconnu
[376] revendications
[377] PROCEDE D'AIDE A L'ACQUISITION D'IMAGES NUMERIQUES
[378] Abr é g é

Claims

REVENDICATIONS
I . Procédé d'aide à l'acquisition d'images par un utilisateur d'appareil (20) d'acquisition d'images numériques, procédé dans lequel, après l'acquisition de l'image (22), on calcule, à partir de ladite image, un signal (24) d'indication de défaut(s) (26) qui se rapporte à la couleur et/ou au contraste et/ou à la netteté et/ou au bruit et/ou aux détails de l'image acquise. 2. Procédé selon la revendication 1 dans lequel le signal d'indication de défaut(s) comprend l'affichage d'une image dérivée (28) de l'image acquise avec exagération du défaut ou des défauts. 3. Procédé selon la revendication 2 dans lequel le défaut est exagéré par ajout de bruit et ou réduction du nombre de pixels sans augmenter la netteté et/ou modification des couleurs et/ou modification du contraste et/ou réduction des détails el/ou réduction de la netteté. 4. Procédé selon l'une des revendications 1 à 3 dans lequel le signal d'indication de défaut(s) est fonction d'une quantification (30) du défaut. 5. Procédé selon l'une des revendications précédentes dans lequel l'image acquise est destinée à subir un traitement numérique après la prise de vue, et le calcul du signal d'indication du défaut, ou des défauts, est effectué en tenant compte de ce traitement par simulation, estimation ou traitement. 6. Procédé selon l'une des revendications précédentes dans lequel le signal d'indication comporte une information sur un réglage de l'appareil permettant de limiter ou supprimer le défaut. 7. Procédé selon la revendication 6 dans lequel le signal d'indication comporte plusieurs propositions de réglage avec, de préférence, associé à chaque réglage proposé, un affichage d'image. 8. Procédé selon l'une des revendications précédentes dans lequel le signal d'indication est fonction d'au moins un réglage de l'appareil, notamment une indication de l'utilisation finale de l'image. 9. Appareil d'acquisition d'images numériques comprenant un moyen pour calculer el ou recevoir, après l'acquisition d'une image numérique, et à partir de cette image, un signal d'indication de défaut(s) qui se rapporte à la couleur et/ou au contraste et/ou à la netteté et/ou au bruit el/ou aux détails de l'image acquise. 10. Appareil selon la revendication 9 comprenant un moyen d'affichage d'une image dérivée de l'image acquise avec exagération du défaut ou des défauts, ce moyen d'affichage recevant ledit signal d'indication de défaut(s), l'image dérivée étant déterminée dans l'appareil et/ou à distance. I I . Appareil selon la revendication 10 comprenant un moyen pour exagérer le défaut par ajout de bruit et/ou réduction du nombre de pixels sans augmenter la netteté et ou modification des couleurs et/ou modification du contraste et/ou réduction des détails et/ou réduction de la netteté. 12. Appareil selon l'une des revendications 9 à 11 comprenant un moyen de quantification du défaut pour générer le signal d'indication de défaut. 13. Appareil selon l'une des revendications 9 à 12 comprenant des moyens de traitement numérique de l'image acquise après la prise de vue, le signal d'indication du défaut, ou des défauts tenant compte de ce traitement. 14. Appareil selon l'une des revendications 9 à 13 comprenant un moyen pour générer un signal d'indication comportant une information sur un réglage de l'appareil permettant de limiter ou supprimer le défaut. 15. Appareil selon la revendication 14 comprenant un moyen pour que le signal d'indication comporte plusieurs propositions de réglage avec, de préférence, associé à chaque réglage proposé, un affichage d'image. 16. Appareil selon l'une des revendications 9 à 15 comprenant un moyen pour que le signal d'indication soit fonction d'au moins un réglage de l'appareil, notamment une indication de l'utilisation finale de l'image. 17. Appareil selon l'une des revendications 9 à 16 comprenant des moyens pour émettre vers un serveur (32) es données permettant à ce serveur de calculer le signal d'indication de défaut(s), l'appareil comprenant des moyens de réception du signal de défaut(s).
PCT/FR2005/050428 2004-06-08 2005-06-08 Procede d’aide a l’acquisition d’images numeriques WO2005125184A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0451132A FR2872317A1 (fr) 2004-06-08 2004-06-08 Procede pour ameliorer la qualite d'utilisation d'un service relatif a au moins une donnee multimedia
FR0451132 2004-06-08

Publications (1)

Publication Number Publication Date
WO2005125184A1 true WO2005125184A1 (fr) 2005-12-29

Family

ID=35064880

Family Applications (3)

Application Number Title Priority Date Filing Date
PCT/FR2005/050428 WO2005125184A1 (fr) 2004-06-08 2005-06-08 Procede d’aide a l’acquisition d’images numeriques
PCT/FR2005/050429 WO2005125099A2 (fr) 2004-06-08 2005-06-08 Procede pour ameliorer la qualite d'utilisation de services en telephonie mobile
PCT/FR2005/050430 WO2005125242A2 (fr) 2004-06-08 2005-06-08 Procede d'amelioration de services relatifs a des donnees multimedia en telephonie mobile

Family Applications After (2)

Application Number Title Priority Date Filing Date
PCT/FR2005/050429 WO2005125099A2 (fr) 2004-06-08 2005-06-08 Procede pour ameliorer la qualite d'utilisation de services en telephonie mobile
PCT/FR2005/050430 WO2005125242A2 (fr) 2004-06-08 2005-06-08 Procede d'amelioration de services relatifs a des donnees multimedia en telephonie mobile

Country Status (7)

Country Link
US (2) US20090017795A1 (fr)
EP (2) EP1757155A2 (fr)
JP (2) JP2008502249A (fr)
KR (2) KR20070034048A (fr)
CN (2) CN1981555A (fr)
FR (1) FR2872317A1 (fr)
WO (3) WO2005125184A1 (fr)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7710658B2 (en) 2006-03-06 2010-05-04 Omnivision Cdm Optics, Inc. Zoom lens systems with wavefront coding
US8379115B2 (en) 2007-11-20 2013-02-19 Motorola Mobility Llc Image capture device with electronic focus
US8643748B2 (en) 2007-11-20 2014-02-04 Motorola Mobility Llc Compact stationary lens optical zoom image capture system
CN108844537A (zh) * 2018-04-27 2018-11-20 广州布塔智能科技有限公司 移动终端获取玩具运动状态的方法与移动终端

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7743323B1 (en) * 2005-10-06 2010-06-22 Verisign, Inc. Method and apparatus to customize layout and presentation
US20070121146A1 (en) * 2005-11-28 2007-05-31 Steve Nesbit Image processing system
US7813724B2 (en) * 2006-03-17 2010-10-12 Comverse Ltd. System and method for multimedia-to-video conversion to enhance real-time mobile video services
TWI335178B (en) * 2006-12-20 2010-12-21 Asustek Comp Inc Apparatus, system and method for remotely opearting multimedia streaming
KR101290215B1 (ko) * 2007-01-02 2013-07-30 엘지전자 주식회사 이동통신단말기의 메시지 작성 가이드방법, 미디어 파일의품질 변경방법, 미디어 파일의 재생구간 설정방법
US20090086278A1 (en) * 2007-09-27 2009-04-02 Ringcentral, Inc. Electronic facsimile delivery systems and methods
US20100030872A1 (en) * 2008-08-04 2010-02-04 Serge Caleca System for remote processing, printing, and uploading of digital images to a remote server via wireless connections
WO2010033384A1 (fr) 2008-09-19 2010-03-25 Dolby Laboratories Licensing Corporation Traitement de signal d'amélioration de qualité amont pour dispositifs clients à ressource réduite
ES2385293T3 (es) 2008-09-19 2012-07-20 Dolby Laboratories Licensing Corporation Procesamiento de señales ascendentes para dispositivos clientes en una red inalámbrica de células pequeñas
US8780383B2 (en) * 2008-11-25 2014-07-15 Ringcentral, Inc. Authenticated facsimile transmission from mobile devices
US8324859B2 (en) * 2008-12-15 2012-12-04 Comverge, Inc. Method and system for co-operative charging of electric vehicles
US20100161491A1 (en) * 2008-12-19 2010-06-24 International Business Machines Corporation Vehicle fed accident report
CN102387125B (zh) * 2010-09-02 2015-01-07 腾讯科技（深圳）有限公司 访问微博的方法和系统及微博网站图片发送方法和系统
CN102685080B (zh) * 2011-03-17 2015-05-20 腾讯科技（北京）有限公司 图片处理方法及系统
CN103634032B (zh) * 2012-08-30 2016-05-04 上海斐讯数据通信技术有限公司 数据转移方法、系统及移动终端
US10559034B2 (en) * 2015-08-05 2020-02-11 The Toronto-Dominion Bank Systems and methods for verifying user identity based on social media messaging
US10848624B2 (en) 2016-10-05 2020-11-24 Global Tel*Link Corporation Intermediary service bureau system and method
CN108092828A (zh) * 2018-01-25 2018-05-29 北京艾提米科技有限公司 一种动态服务提供方法、装置及程序
JP2019200534A (ja) * 2018-05-15 2019-11-21 大日本印刷株式会社 フォトブック編集装置及び考査支援システム
JP7065738B2 (ja) * 2018-09-18 2022-05-12 富士フイルム株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
JP7218142B2 (ja) * 2018-10-16 2023-02-06 キヤノン株式会社 情報処理装置、情報処理装置の制御方法及びプログラム
JP2022125701A (ja) 2021-02-17 2022-08-29 富士フイルム株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
CN113837291A (zh) * 2021-09-27 2021-12-24 知守科技(杭州)有限公司 一种基于背光模组与多模板匹配的识别与定位方法及系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1280340A2 (fr) * 2001-07-17 2003-01-29 Eastman Kodak Company Caméra et méthode reprennant une prise de vue corrigée

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3850952T2 (de) * 1987-12-22 1995-02-23 Philips Nv Videosignalkodierung und -dekodierung mit einem adaptiven Filter.
JPH0566637U (ja) * 1992-02-12 1993-09-03 旭光学工業株式会社 画面サイズ切替えカメラ
US5854978A (en) * 1996-04-16 1998-12-29 Nokia Mobile Phones, Ltd. Remotely programmable mobile terminal
US6091777A (en) * 1997-09-18 2000-07-18 Cubic Video Technologies, Inc. Continuously adaptive digital video compression system and method for a web streamer
JPH11249980A (ja) * 1998-03-04 1999-09-17 Matsushita Electric Ind Co Ltd データ配信システム
JP2000010178A (ja) * 1998-06-19 2000-01-14 Fuji Photo Optical Co Ltd カメラおよび写真プリントシステム
US6411651B1 (en) * 1998-06-26 2002-06-25 Compaq Information Technologies Group, L.P. Method and system for distributed video compression in personal computer architecture
US20020001412A1 (en) * 1998-07-21 2002-01-03 Hewlett-Packard Company System for variable quantization in jpeg for compound documents
US20020059481A1 (en) * 1998-12-30 2002-05-16 Patrick O. Nunally Method and apparatus for a multimedia application specific processor
WO2001063485A2 (fr) * 2000-02-24 2001-08-30 Transfinity Corporation Systeme de distribution de contenu
JP3748509B2 (ja) * 2000-09-25 2006-02-22 キヤノン株式会社 撮像装置及び方法、並びに記憶媒体、並びに通信装置及び方法、並びに記憶媒体
WO2002039306A1 (fr) * 2000-11-09 2002-05-16 Sri International Systemes et procedes destines a une utilisation de ressource negociee
BE1013870A6 (nl) * 2000-12-08 2002-11-05 Methodiek, presentatie- en distributie-systeem van korte video-opnames. -
EP1241891A1 (fr) * 2001-03-13 2002-09-18 eJay AG Appareil et procédé pour transmettre des données audio et/ou vidéo
AU2002256477A1 (en) * 2001-05-07 2002-11-18 Summus, Inc. Color video codec method and system
JP2002369110A (ja) * 2001-06-06 2002-12-20 Funai Electric Co Ltd 撮影画像印刷システム、プリンタ、携帯型端末機
US20030193967A1 (en) * 2001-12-31 2003-10-16 Gregg Fenton Method, apparatus and system for processing multimedia messages
JP2004040517A (ja) * 2002-07-04 2004-02-05 Hitachi Ltd 携帯端末および画像配信システム
KR100486713B1 (ko) * 2002-09-17 2005-05-03 삼성전자주식회사 멀티미디어 스트리밍 장치 및 방법
JP4345286B2 (ja) * 2002-11-01 2009-10-14 日本電気株式会社 圧縮画像データ送信方法、そのプログラム及び携帯端末
US7637430B2 (en) * 2003-05-12 2009-12-29 Hand Held Products, Inc. Picture taking optical reader
GB2404803A (en) * 2003-07-16 2005-02-09 Empics Ltd Image editing and distribution system
US7403568B2 (en) * 2003-08-13 2008-07-22 Apple Inc. Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using temporal filtering

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1280340A2 (fr) * 2001-07-17 2003-01-29 Eastman Kodak Company Caméra et méthode reprennant une prise de vue corrigée

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7710658B2 (en) 2006-03-06 2010-05-04 Omnivision Cdm Optics, Inc. Zoom lens systems with wavefront coding
US8379115B2 (en) 2007-11-20 2013-02-19 Motorola Mobility Llc Image capture device with electronic focus
US8643748B2 (en) 2007-11-20 2014-02-04 Motorola Mobility Llc Compact stationary lens optical zoom image capture system
CN108844537A (zh) * 2018-04-27 2018-11-20 广州布塔智能科技有限公司 移动终端获取玩具运动状态的方法与移动终端

Also Published As

Publication number Publication date
JP2008502249A (ja) 2008-01-24
JP2008502250A (ja) 2008-01-24
KR20070034051A (ko) 2007-03-27
EP1757155A2 (fr) 2007-02-28
WO2005125242A3 (fr) 2006-05-04
WO2005125099A3 (fr) 2006-04-13
WO2005125242A2 (fr) 2005-12-29
US20090116471A1 (en) 2009-05-07
EP1757154A2 (fr) 2007-02-28
FR2872317A1 (fr) 2005-12-30
US20090017795A1 (en) 2009-01-15
WO2005125099A2 (fr) 2005-12-29
CN1981555A (zh) 2007-06-13
KR20070034048A (ko) 2007-03-27
CN1985535A (zh) 2007-06-20

Similar Documents

Publication Publication Date Title
WO2005125184A1 (fr) Procede d’aide a l’acquisition d’images numeriques
CA2834883C (fr) Procede pour commander une action, notamment une modification de nettete, a partir d'une image numerique en couleurs
EP1444651B1 (fr) Procede et systeme pour reduire la frequence des mises a jour de moyens
EP1523730B1 (fr) Procede et systeme pour calculer une image transformee a partir d'une image numerique
CN109844804B (zh) 一种图像检测的方法、装置及终端
JPH10191246A (ja) デジタルカメラにより取得されたデジタル画像データを再生する画像再生方法及び装置並びにその方法に使用するデジタルカメラ
EP2259218A1 (fr) Procédé et système pour recommander des photographies
EP2011329B1 (fr) Procédé de traitement d'un phénomène d'éclairement relatif sur une image numérique et système de traitement associé
US20090016565A1 (en) Image analysis
WO2005031646A1 (fr) Procede et systeme pour m7difier une image numérique de maniere differenciee et quasi reguliere par pixel
JP4672587B2 (ja) 画像出力方法および装置ならびにプログラム
WO2021218536A1 (fr) Procédé de synthèse d'image de plage dynamique élevée et dispositif électronique
CN111757012A (zh) 基于个体与摄影美学结合的图像处理方法
CN110992283A (zh) 图像处理方法、图像处理装置、电子设备和可读存储介质
CN110992284A (zh) 图像处理方法、图像处理装置、电子设备和计算机可读存储介质
FR2880958A1 (fr) Procede d'amelioration de la nettete d'au moins une couleur d'une image numerique
WO2017096855A1 (fr) Procédé et appareil permettant de régler de façon dynamique un paramètre gamma
JP5453820B2 (ja) デジタルカメラ
KR20120120872A (ko) 스마트 기기를 이용한 사진 보정 서비스 제공 방법
JP2021150854A (ja) 撮像装置、撮像装置の制御方法、撮像システム、およびプログラム
Loeffler A digital photography short course
FR2887346A1 (fr) Procede et dispositif d'amelioration d'une image numerique
Anderson Single RAW files--HDR comes to the rescue
Kubara Image Enhancing on Consumer's Displays for Increased Printing

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

WWW Wipo information: withdrawn in national office

Country of ref document: DE

122 Ep: pct application non-entry in european phase