WO2020193320A1 - Dispositif, systeme et procede de capture d'image - Google Patents

Dispositif, systeme et procede de capture d'image Download PDF

Info

Publication number
WO2020193320A1
WO2020193320A1 PCT/EP2020/057488 EP2020057488W WO2020193320A1 WO 2020193320 A1 WO2020193320 A1 WO 2020193320A1 EP 2020057488 W EP2020057488 W EP 2020057488W WO 2020193320 A1 WO2020193320 A1 WO 2020193320A1
Authority
WO
WIPO (PCT)
Prior art keywords
capture device
elements
infrared
filter
image capture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2020/057488
Other languages
English (en)
Inventor
Frederic Blain
Dirk Strothmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Valeo Comfort and Driving Assistance SAS
Original Assignee
Valeo Comfort and Driving Assistance SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Comfort and Driving Assistance SAS filed Critical Valeo Comfort and Driving Assistance SAS
Publication of WO2020193320A1 publication Critical patent/WO2020193320A1/fr
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Definitions

  • the present invention relates to the technical field of image sensors used for example in video cameras.
  • the present invention relates in particular to an image capture device, an image capture system and an image capture method.
  • an image capture device comprising a matrix of contiguous elements sensitive to light and each generating an electrical signal as a function of the light received in accordance with a curve of quantum efficiency associated with the element concerned.
  • a matrix forms an image sensor, for example an RGB sensor.
  • elements are conventionally used whose quantum efficiency curve has a maximum in the visible and a local maximum in the infrared (this maximum local being linked to the design of the elements).
  • Each element thus makes it possible to measure visible light at the level of a given maximum, which corresponds to a particular color of the visible spectrum (typically the colors red, green and blue for an RGB sensor), and thus corresponds to a sub-pixel of the image sensor.
  • a filter stopping the infrared radiation so that only visible light reaches the matrix.
  • a filter is generally deposited on a collimating lens placed in front of the image sensor.
  • the invention proposes an image capture device comprising a matrix of contiguous elements sensitive to light and each generating an electrical signal as a function of the light received in accordance with an associated quantum efficiency curve to the element concerned; a filter disposed upstream of the matrix on the path of the light; a unit for processing the electrical signals generated by said elements; wherein, for each of said elements, the quantum efficiency curve has a maximum in the visible and a value of at least 10% for at least one wavelength in the infrared; characterized in that the filter comprises a first transmission window in the visible and a second transmission window in the infrared.
  • the image capture device can also capture illuminated images. by an infrared illuminator (which does not cause any discomfort around). The infrared radiation is in fact transmitted through the filter (thanks to the second transmission window) and detected by the photosensitive elements.
  • the processing unit is designed to compensate for a detection, by said elements, of infrared radiation transmitted by the filter;
  • the processing unit is designed to compensate for said detection by means of a
  • the processing unit is designed to compensate for said detection by reading values in a correspondence table
  • the processing unit is designed to compensate for said detection by means of a
  • the processing unit comprises a compensation module designed to compensate for said detection and used in daytime operating mode (the
  • said wavelength in the infrared is located in the second transmission window.
  • the invention also provides an image capture system comprising a capture device as defined above and an illuminator designed to emit infrared radiation.
  • the infrared radiation emitted by the illuminator can then be located frequentially in the second transmission window.
  • the illuminator can moreover be selectively activatable.
  • the illuminator is for example activated (at least intermittently) in night-time operating mode (and can then be deactivated in daytime operating mode).
  • the invention finally proposes an image capture method by means of an image capture device according to claim 1, comprising the following steps:
  • FIG. 1 represents an example of an image capture device according to the invention
  • FIG. 2 shows a transmission curve of a filter of the image capture device of FIG. 1,
  • FIG. 3 is a partial schematic representation of an example that can be envisaged for a matrix of photosensitive elements of the image capture device of FIG. 1,
  • FIG. 4 shows by way of example the quantum efficiency as a function of the wavelength for different types of these photosensitive elements
  • FIG. 5 shows an example of a processing unit that can be used in the
  • FIG. 6 represents a videoconferencing system which includes an alternative embodiment of the invention.
  • Figure 1 shows the elements of an image capture device 2 useful for
  • the image capture device 2 comprises a collimating optics 6 (produced here in the form of a lens) and an image sensor comprising in particular a matrix 8 of photosensitive elements 9 R , 9G, 9 b .
  • the collimation optics 6 and the matrix 8 are arranged so that the matrix 8 can produce an image of the environment facing the image capture device 2.
  • the image capture device 2 also comprises a filter 4 disposed on the path of the incident rays I upstream of the matrix 8 so that the light rays which reach the matrix 8 have been processed by this filter 4.
  • the filter 4 is for example produced in the form of a film deposited on one face of lens 6.
  • the image capture device 2 also comprises a processing unit 10 designed to process the electrical signals R B , G B , B B produced by the matrix 8 in order to generate in particular video signals Rv, Gv, Bv.
  • a processing unit 10 designed to process the electrical signals R B , G B , B B produced by the matrix 8 in order to generate in particular video signals Rv, Gv, Bv.
  • a possible example of the implementation of the processing unit 10 is described below with reference to FIG. 5.
  • the image capture device 2 also comprises an illuminator 12 designed to emit infrared radiation E towards the scene captured by the image sensor 2.
  • This illuminator 12 is here selectively activatable, here by means of a controlled switch 14 and on the basis of a selection signal S, as explained below.
  • Figure 2 shows the transmission curve of the filter 4 used in the example described as a function of the wavelength of the incident light.
  • the filter 4 is a two-band filter (or “dual band” according to the Anglo-Saxon name sometimes used). Such a filter comprises two distinct transmission windows.
  • the term “transmission window” of the filter is used here as a spectral transmission band, that is to say for example a (continuous) band of frequencies for which the transmission coefficient of the filter is greater than 10%.
  • the filter 4 comprises a first transmission window Fi in the visible (here a transmission window extending from 400 nm to 650 nm) and a second transmission window F in the infrared (here a transmission window s 'ranging from 820 nm to 880 nm).
  • the first transmission window Fi in the visible covers (that is to say includes) at least the range of wavelengths extending from 450 nm to 600 nm and / or the second window of F transmission (in the infrared) includes wavelengths greater than 700 nm.
  • the illuminator 12 emits infrared radiation comprising at least one component whose wavelength is located inside the second transmission window F2.
  • Figure 3 is a partial schematic representation of the matrix 8 of the photosensitive elements 9 R , 9G, 9 b .
  • the photosensitive elements 9 R , 9G, 9 B are contiguous to each other.
  • the photosensitive elements 9 R , 9G, 9 B are of different types (as explained below); however, all the photosensitive elements 9 R , 9G, 9 B are here sensitive in the visible.
  • Each photosensitive element 9 R , 9G, 9 B generates an electrical signal R B , G B , B B as a function of the light received in accordance with a quantum efficiency curve Q R , QG, Q B associated with the photosensitive element 9 R , 9G, 9 B concerned.
  • FIG. 4 represents the quantum efficiency Q R , QG, Q B as a function of the wavelength for each of the different types of photosensitive elements 9 R , 9G, 9 b .
  • the relevant quantum efficiency curve Q R , QG, Q B has a maximum for a wavelength ⁇ R , At G , l B of the visible domain.
  • the different quantum efficiency curves Q R , QG, Q B also each have a local maximum for a wavelength l R , IG, I B located in the infrared (and for example between 750 nm and 900 nm) so that each of the quantum efficiency curves has a value greater than 10% for a range of wavelengths located in the infrared.
  • any photosensitive element 9 R , 9G, 9 B of the matrix 8 has a quantum efficiency curve Q R , QG, Q B exhibiting a maximum in the visible range and a value of at least 10% for at least at least one wavelength in the infrared, and adjoins another photosensitive element also having a quantum efficiency curve having a maximum in the visible and a value of at least 10% for at least one wavelength in the 'infrared.
  • the quantum efficiency curve Q R of the photosensitive elements 9 R also indicates a quantum efficiency value greater than 10% in the infrared over the wavelength range extending between 700 nm and 950 nm (with a local maximum for the wavelength l R equal here to 760 nm).
  • the quantum efficiency curve Q G of these photosensitive elements 9 G indicates by
  • the quantum efficiency curve Q B of these photosensitive elements 9 B indicates by
  • the wavelength ⁇ R , ⁇ G , ⁇ B corresponding to the maximum quantum efficiency in the visible range is located in the first transmission window Fi of filter 4.
  • each photosensitive element 9 R , 9G, 9 B of the matrix 8 has a quantum efficiency greater than 10% for wavelengths included in the second transmission window F2 (here a quantum efficiency greater than 10% over the entire second transmission window F2). Therefore, each photosensitive element 9 R , 9G, 9 B of the matrix 8 generates an electrical signal R B , G B , B B as a function of a part of the light received in a part of the visible range and on the other hand, radiation received in the infrared (specifically: in the second transmission window F2).
  • Each electrical signal R B , G B , B B therefore comprises an (indeterminate) component linked to the detection (by the photosensitive element 9 R , 9G, 9 B concerned) of the infrared radiation transmitted by the filter 4 (in the second window transmission rate F2).
  • the matrix 8 only comprises elements 9 R , 9G, 9 B sensitive in particular in the visible, and therefore no element sensitive only in the infrared.
  • Figure 5 shows, in functional form, a possible example of implementation of the processing unit 10.
  • the elements of Figure 5 do not necessarily correspond to physical electronic circuits but can be put implemented in practice by software instructions executable by a processor.
  • the processing unit 10 is in this case formed by this processor and by these instructions stored in a memory associated with the processor and which can be executed by the processor.
  • the processing unit 10 comprises a color image processing module 20, a compensation module 22 and a selection module 26.
  • the processing unit 10 receives as input the electrical signals R B , G B , B B generated by the photosensitive elements 9 R , 9G, 9 B as explained above.
  • the electrical signals R B , G B , B B relating to the various photosensitive elements 9 R , 9G, 9 B (OR sub-pixels) having the type concerned are for example time multiplexed.
  • the electrical signals R B , G B , B B relating to the various photosensitive elements 9 R , 9G, 9 B having the type concerned are successively transmitted to the within a frame.
  • the electrical signals R B , G B , B B received at the input are applied at the input of the color image processing module 20.
  • the color image processing module 20 generates video signals Ri, Gi, Bi on the basis of the electrical signals R B , G B , B B received from the matrix 8.
  • the video signals Ri, Gi, Bi are signals representative of the image captured by the image capture device 2.
  • the video signals Ri, Gi, Bi are for example signals in RGB format (here in the form digital), usable by a display to display the image captured by the image capture device 2.
  • the color image processing module 20 performs for example in particular the
  • the electrical signals R B , G B , B B each comprise a component (indeterminate) linked to the detection (by the photosensitive element 9R, 9G, 9 B concerned) of the radiation infrared transmitted by filter 4 (solar radiation which directly or indirectly illuminates the captured daytime scene comprising an infrared component).
  • an image displayed on the basis of the video signals Ri, Gi, Bi produced by the color image processing module 20 would have an artificial reddish coloration (linked to this detection of infrared radiation during 'a daytime image capture), not in accordance with that of the scene captured by the image capture device 2.
  • the selection module 26 is shown in Figure 5 in the form of a switch controlled by the selection signal S; as already indicated, the selection functionality can be implemented in practice in software form.
  • the selection signal S makes it possible to switch the operation of the
  • the selection signal S is for example determined by means of an ambient light sensor (not shown).
  • the selection signal S could be determined as a function of a command from the user (here the driver of the vehicle equipped by the image capture device 2), for example a command to put the headlights into operation. vehicle.
  • the selection signal S could be determined as a function of the luminance defined by the electrical signals R B , G B , B B received at the input (or by the RGB signals after processing mentioned below).
  • rilluminator 12 In the daytime operating mode (that is to say when the selection signal S is indicative of the daytime operating mode), rilluminator 12 is inactive (the controlled switch 14 being open in the example of FIG. 1) and the video signals Ri, Gi, Bi produced by the color image processing module 20 are applied to the input of the compensation module 22 (by the selection module 26).
  • rilluminator 12 In the night-time operating mode (that is to say when the selection signal S is indicative of the night-time operating mode), rilluminator 12 is activated (the controlled switch 14 being closed in the example of the figure 1) at least part of the time (that is to say at least intermittently, for example during the acquisition phases of the image capture device 2), and thus emits infrared radiation E in the direction of the scene facing the image capture device 2; the video signals Ri, Gi, Bi produced by the color image processing module 20 are in this case directly used as output video signals Rv, Gv, Bv.
  • the infrared radiation E being at least partly located in the second transmission window F2 as already indicated, the scene facing the image capture device 2, illuminated by the infrared radiation E, will return a part of this radiation through the filter 4 and up to the photosensitive elements 9 R , 9G, 9 b , which all here have an infrared sensitivity as explained above.
  • the compensation module 22 (to which the video signals Ri, Gi, Bi are applied in daytime operating mode as explained above) is designed to compensate for the detection, by the photosensitive elements 9 R , 9G, 9 b , infrared radiation transmitted through the filter 4 (through the second transmission window F2), as explained above.
  • the image represented by the corrected video signals Rv, Gv, Bv is similar to the image
  • the compensation module 22 performs filtering of the video signals Ri, Gi, Bi, for example by applying respectively different treatments to the various colorimetric components Ri, Gi, Bi.
  • the compensation module 22 performs filtering of the video signals Ri, Gi, Bi, for example by applying respectively different treatments to the various colorimetric components Ri, Gi, Bi.
  • the filtering of the video signals Ri, Gi, Bi comprises the following steps:
  • the compensation module 22 reads (for each pixel) the triplet Rv, Gv, Bv associated with the triplet Ri, Gi, Bi (received as input) in a correspondence table stored in the capture device 2.
  • the triplet Rv, Gv, Bv read can then be used as corrected video signals produced by the compensation module 22.
  • the correspondence table is in this case constructed by means of experiments during the design of the product. For example, for a large quantity of images captured simultaneously by the capture device 2 (giving pixels of coordinates R ,, G ,,
  • the compensation module 22 applies to the video signals Ri, Gi, Bi a processing constructed by automatic learning (in English "Machine Learning"), for example by means of a neural network.
  • the learning algorithm used is for example of the GAN type (for "Generative
  • the learning can be carried out on the basis of a large quantity of images each taken on the one hand by the capture device 2 (the components of which Ri, G ,, B, correspond to the values supplied at the input of the neural network) and on the other hand by a conventional capture device (whose components R s , G s , B s correspond to the values expected at the output of the neural network).
  • the corrected video signals produced at the output of the compensation module 22 are then emitted as output video signals Rv, Gv, Bv at the output of the processing unit 10 and can thus be used by a display to display an image of the scene captured by the image capture device 2, with colors faithful to the actual colors of the captured scene.
  • FIG. 6 represents a videoconferencing system including another form of
  • the videoconferencing system of FIG. 6 comprises an image capture device
  • the image capture device 52 and / or the communication module 70 are by
  • the image capture device 52 or the communication module 70 could be part of a portable terminal (such as a cell phone) used by a passenger of the vehicle.
  • the image capture device 52 comprises a filter 54, a collimation optics 56 and a matrix 58 of photosensitive elements.
  • the filter 54, the collimation optic 56 and the matrix 58 are identical respectively to the filter 4, to the collimation optic 6 and to the matrix 8 of the embodiment of FIG. 1 and will therefore not be described again.
  • the image capture device 52 further comprises a processing module
  • color image processing module 60 which receives as input the electrical signals R B , G B , B B produced by the matrix 58 and generates video signals Ri, Gi, Bi at output, here in RGB format.
  • the color image processing module 60 is identical to the color image processing module 20 described above (with reference to FIG. 5) and will therefore not be described again.
  • the use of a filter 54 having a second transmission window in the infrared results in an artificial reddish coloration of the image represented by the video signals Ri, Gi, Bi (coloration linked, as explained above, to the detection of infrared radiation transmitted through the filter 54).
  • the video signals Ri, Gi, Bi thus produced are transmitted (for example via a computer network on board the vehicle) by the image capture device 52 to the communication module 70, which transmits these video signals Ri, Gi , Bi to the remote infrastructure 80.
  • the remote infrastructure 80 (carried out for example in practice by means of a remote server) comprises a reception unit 82, a compensation unit 84 and a transmission unit 86.
  • the remote infrastructure 80 receives the video signals Ri, Gi, Bi by means of the reception unit 82.
  • the video signals Ri, Gi, Bi are then processed by the compensation unit 84 so as to produce corrected video signals Rv, Gv, Bv.
  • the compensation unit 84 performs a treatment identical to that carried out by the compensation module 22 described with reference to FIG. 5, in order to compensate for the detection, by the photosensitive elements of the matrix 58, of the infrared radiation transmitted by the filter 54. In certain embodiments, other processing could be carried out at the level of the remote infrastructure 80.
  • the image represented by the corrected video signals Rv, Gv, Bv is similar to the image represented by the video signals Ri, Gi, Bi and therefore corresponds to the image captured by the device.
  • image capture 52 without reddish coloration linked to the detection of infrared radiation by the photosensitive elements of the matrix 58.
  • the remote infrastructure 80 can then send, by means of the transmission unit 86, the corrected video signals Rv, Gv, Bv to the remote viewing system 90.
  • the remote viewing system 90 comprises a reception module 92 and a
  • the corrected video signals Rv, Gv, Bv are received by the remote display system 90 by means of the reception module 92 and can thus be applied at the input of the display 94.
  • the display 94 thus displays an image corresponding to the scene captured by the image capture device 52, without reddish coloration linked to the detection of infrared radiation by the photosensitive elements of the matrix 58.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

Un dispositif de capture d'image (2) comprend : - une matrice (8) d'éléments contigus sensibles à la lumière et générant chacun un signal électrique (RB; GB; BB) en fonction de la lumière reçue conformément à une courbe d'efficacité quantique associée à l'élément concerné, - un filtre (4) disposé en amont de la matrice (8) sur le trajet de la lumière, - une unité de traitement (10) des signaux électriques (RB, GB, BB) générés par lesdits éléments. Pour chacun desdits éléments, la courbe d'efficacité quantique présente un maximum dans le visible et une valeur d'au moins 10% pour au moins une longueur d'onde dans l'infrarouge. Le filtre (4) comprend une première fenêtre de transmission dans le visible et une seconde fenêtre de transmission dans l'infrarouge.

Description

Description
DISPOSITIF, SYSTEME ET PROCEDE DE CAPTURE D'IMAGE
[0001] La présente invention concerne le domaine technique des capteurs d'image utilisés par exemple dans les caméras vidéo.
[0002] La présente invention concerne en particulier un dispositif de capture d'image, un système de capture d'image et un procédé de capture d'image.
[0003] On utilise couramment, par exemple dans une caméra vidéo, un dispositif de capture d'image comprenant une matrice d'éléments contigus sensibles à la lumière et générant chacun un signal électrique en fonction de la lumière reçue conformément à une courbe d'efficacité quantique associée à l'élément concerné. Une telle matrice forme un capteur d'image, par exemple un capteur RGB.
[0004] Dans le cas fréquent où une telle caméra est conçue pour capturer une image dans le visible, on utilise classiquement des éléments dont la courbe d'efficacité quantique présente un maximum dans le visible et un maximum local dans l'infrarouge (ce maximum local étant lié à la conception des éléments). Chaque élément permet ainsi de mesurer la lumière visible au niveau d'un maximum donné, qui correspond à une couleur particulière du spectre visible (typiquement les couleurs rouge, vert et bleu pour un capteur RGB), et correspond ainsi à un sous-pixel du capteur d'image.
[0005] Afin d'éviter une perturbation des mesures effectués du fait de la sensibilité des éléments dans l'infrarouge, on dispose usuellement sur le trajet de la lumière (en amont de la matrice) un filtre arrêtant le rayonnement infrarouge de sorte que seule la lumière visible atteigne la matrice. Un tel filtre est généralement déposé sur une lentille de collimation placée devant le capteur d'image.
[0006] Avec une telle conception classique toutefois, l'éclairage artificiel d'une scène sombre doit nécessairement être réalisé dans le visible, ce qui peut être gênant dans certains cas (comme par exemple lorsque la caméra est placée dans un habitacle de véhicule et qu'un éclairage dans le visible serait alors préjudiciable à la conduite de nuit).
[0007] Dans ce contexte, l'invention propose un dispositif de capture d'image comprenant une matrice d'éléments contigus sensibles à la lumière et générant chacun un signal électrique en fonction de la lumière reçue conformément à une courbe d'efficacité quantique associée à l'élément concerné ; un filtre disposé en amont de la matrice sur le trajet de la lumière ; une unité de traitement des signaux électriques générés par lesdits éléments ; dans lequel, pour chacun desdits éléments, la courbe d'efficacité quantique présente un maximum dans le visible et une valeur d'au moins 10% pour au moins une longueur d'onde dans l'infrarouge ; caractérisé en ce que le filtre comprend une première fenêtre de transmission dans le visible et une seconde fenêtre de transmission dans l'infrarouge.
[0008] Ainsi, bien qu'on utilise un capteur courant (et donc bon marché) ne comprenant que des éléments ayant une sensibilité dans le visible (typiquement un capteur RGB), le dispositif de capture d'image peut également capturer des images éclairées par un illuminateur infrarouge (qui n'occasionne aucune gêne alentour). Le rayonnement infrarouge est en effet transmis à travers le filtre (grâce à la seconde fenêtre de transmission) et détecté par les éléments photosensibles.
[0009] On profite donc ici du fait que ces éléments dédiés à mesurer la lumière incidente dans le visible sont également sensibles dans l'infrarouge, ce qui est classiquement considéré problématique et entraîne l'utilisation d'un filtre ayant une unique fenêtre de transmission dans le visible.
[0010] Selon d'autres caractéristiques envisageables à titre optionnel :
[0011] - l'unité de traitement est conçue pour compenser une détection, par lesdits éléments, de rayonnement infrarouge transmis par le filtre ;
[0012] - l'unité de traitement est conçue pour compenser ladite détection au moyen d'un
processus de filtrage ;
[0013] - l'unité de traitement est conçue pour compenser ladite détection par lecture de valeurs dans une table de correspondance ;
[0014] - l'unité de traitement est conçue pour compenser ladite détection au moyen d'un
traitement construit par apprentissage automatique ;
[0015] - l'unité de traitement comprend un module de compensation conçu pour compenser ladite détection et utilisé en mode de fonctionnement diurne (le module de
compensation étant par exemple inutilisé en mode de fonctionnement nocturne) ;
[0016] - pour au moins une partie desdits éléments, ladite longueur d'onde dans l'infrarouge est située dans la seconde fenêtre de transmission.
[0017] L'invention propose également un système de capture d'image comprenant un dispositif de capture tel que défini ci-dessus et un illuminateur conçu pour émettre un rayonnement infrarouge. [0018] Le rayonnement infrarouge émis par l'illuminateur peut alors être situé fréquentiellement dans la seconde fenêtre de transmission. L'illuminateur peut par ailleurs être sélectivement activable. L'illuminateur est par exemple activé (au moins par intermittence) en mode de fonctionnement nocturne (et peut alors être désactivé en mode de fonctionnement diurne).
[0019] L'invention propose enfin un procédé de capture d'image au moyen d'un dispositif de capture d'image selon la revendication 1, comprenant les étapes suivantes :
- génération de signaux vidéo par l'unité de traitement sur la base desdits signaux électriques ;
- traitement des signaux vidéo pour compenser une détection, par lesdits éléments, de rayonnement infrarouge transmis par le filtre.
[0020] Bien entendu, les différentes caractéristiques, variantes et formes de réalisation de l'invention peuvent être associées les unes avec les autres selon diverses combinaisons dans la mesure où elles ne sont pas incompatibles ou exclusives les unes des autres. [0021] De plus, diverses autres caractéristiques de l'invention ressortent de la description annexée effectuée en référence aux dessins qui illustrent des formes, non limitatives, de réalisation de l'invention et où :
[0022] [Fig. 1] représente un exemple de dispositif de capture d'image conforme à l'invention,
[0023] [Fig. 2] présente une courbe de transmission d'un filtre du dispositif de capture d'image de la figure 1,
[0024] [Fig. 3] est une représentation schématique partielle d'un exemple envisageable pour une matrice d'éléments photosensibles du dispositif de capture d'image de la figure 1,
[0025] [Fig. 4] représente à titre d'exemple l'efficacité quantique en fonction de la longueur d'onde pour différents types de ces éléments photosensibles, [0026] [Fig. 5] représente un exemple d'unité de traitement utilisable dans le dispositif de
capture d'image de la figure 1,
[0027] [Fig. 6] représente un système de visioconférence qui inclut une variante de mise en oeuvre de l'invention.
[0028] La figure 1 représente les éléments d'un dispositif de capture d'image 2 utiles à la
compréhension de l'invention. [0029] Le dispositif de capture d'image 2 comprend une optique de collimation 6 (réalisée ici sous forme d'une lentille) et un capteur d'image comprenant en particulier une matrice 8 d'éléments photosensibles 9R, 9G, 9b.
[0030] L'optique de collimation 6 et la matrice 8 sont disposées de sorte que la matrice 8 puisse produire une image de l'environnement faisant face au dispositif de capture d'image 2.
[0031] Le dispositif de capture d'image 2 comprend également un filtre 4 disposé sur le trajet des rayons incidents I en amont de la matrice 8 de sorte que les rayons lumineux qui atteignent la matrice 8 ont été traités par ce filtre 4. Le filtre 4 est par exemple réalisé sous forme d'un film déposé sur une face de la lentille 6 .
[0032] Le dispositif de capture d'image 2 comprend également une unité de traitement 10 conçue pour traiter les signaux électriques RB, GB, BB produits par la matrice 8 afin de générer notamment des signaux vidéo Rv, Gv, Bv. Un exemple possible de mise en oeuvre de l'unité de traitement 10 est décrit plus loin en référence à la figure 5.
[0033] Le dispositif de capture d'image 2 comprend également un illuminateur 12 conçu pour émettre un rayonnement infrarouge E en direction de la scène capturée par le capteur d'image 2. Cet illuminateur 12 est ici sélectivement activable, ici au moyen d'un interrupteur commandé 14 et sur la base d'un signal de sélection S, comme expliqué plus loin.
[0034] La figure 2 présente la courbe de transmission du filtre 4 utilisé dans l'exemple décrit en fonction de la longueur d'onde de la lumière incidente.
[0035] Comme visible sur la figure 2, le filtre 4 est une filtre à deux bandes (ou "dual band" selon l'appellation anglo-saxonne parfois utilisée). Un tel filtre comprend deux fenêtres de transmission distinctes. On dénomme ici "fenêtre de transmission" du filtre une bande spectrale de transmission, c'est-à-dire par exemple une bande (continue) de fréquences pour lesquelles le coefficient de transmission du filtre est supérieur à 10%.
[0036] Le filtre 4 comprend une première fenêtre de transmission Fi dans le visible (ici une fenêtre de transmission s'étendant de 400 nm à 650 nm) et une seconde fenêtre de transmission F dans l'infrarouge (ici une fenêtre de transmission s'étendant de 820 nm à 880 nm). En pratique, la première fenêtre de transmission Fi (dans le visible) couvre (c'est-à-dire inclut) au moins la plage de longueurs d'onde s'étendant de 450 nm à 600 nm et/ou la seconde fenêtre de transmission F (dans l'infrarouge) comprend des longueurs d'ondes supérieures à 700 nm. [0037] On remarque ici que l'illuminateur 12 émet un rayonnement infrarouge comprenant au moins une composante dont la longueur d'onde est située à l'intérieur de la seconde fenêtre de transmission F2.
[0038] La figure 3 est une représentation schématique partielle de la matrice 8 des éléments photosensibles 9R, 9G, 9b.
[0039] Du fait de la disposition sous forme d'une matrice, les éléments photosensibles 9R, 9G, 9B sont contigus les uns aux autres. Les éléments photosensibles 9R, 9G, 9B sont de différents types (comme expliqué plus loin) ; toutefois, tous les éléments photosensibles 9R, 9G, 9B sont ici sensibles dans le visible.
[0040] Chaque élément photosensible 9R, 9G, 9B génère un signal électrique RB, GB, BB en fonction de la lumière reçue conformément à une courbe d'efficacité quantique QR, QG, QB associée à l'élément photosensible 9R, 9G, 9B concerné.
[0041] La figure 4 représente l'efficacité quantique QR, QG, QB en fonction de la longueur d'onde pour chacun des différents types d'éléments photosensibles 9R, 9G, 9b.
[0042] Comme visible sur la figure 4, quel que soit le type d'élément photosensible considéré 9R,
9G, 9b, et donc pour tous les éléments photosensibles 9R, 9G, 9B de la matrice 8, la courbe d'efficacité quantique concernée QR, QG, QB présente un maximum pour une longueur d'onde ÀR, ÀG, lB du domaine visible.
[0043] Les différentes courbes d'efficacité quantique QR, QG, QB présentent par ailleurs chacune un maximum local pour une longueur d'onde lR, IG, IB située dans l'infrarouge (et comprise par exemple entre 750 nm et 900 nm) de sorte que chacune des courbes d'efficacité quantique présente une valeur supérieure à 10% pour une plage de longueur d'ondes situées dans l'infrarouge.
[0044] Ainsi, tout élément photosensible 9R, 9G, 9B de la matrice 8 a une courbe d'efficacité quantique QR, QG, QB présentant un maximum dans le visible et une valeur d'au moins 10% pour au moins une longueur d'onde dans l'infrarouge, et jouxte un autre élément photosensible ayant également une courbe d'efficacité quantique présentant un maximum dans le visible et une valeur d'au moins 10% pour au moins une longueur d'onde dans l'infrarouge.
[0045] Précisément, la courbe d'efficacité quantique QR (représentée en pointillés) des éléments photosensibles 9R présente un maximum pour la longueur d'onde ÀR (avec ÀR comprise entre 590 nm et 650 nm, ici ÀR = 610 nm) de sorte que ces éléments photosensibles sont sensibles à la lumière rouge.
[0046] La courbe d'efficacité quantique QR des éléments photosensibles 9R indique par ailleurs une valeur d'efficacité quantique supérieure à 10% dans l'infrarouge sur la plage de longueurs d'onde s'étendant entre 700 nm et 950 nm (avec un maximum local pour la longueur d'onde lR égale ici à 760 nm).
[0047] La courbe d'efficacité quantique QG (représentée en trait plein) des éléments
photosensibles 9G présente quant à elle un maximum pour la longueur d'onde ÀG (avec ÀG comprise entre 500 nm et 570 nm, ici ÀR = 540 nm) de sorte que ces éléments photosensibles sont sensibles à la lumière verte.
[0048] La courbe d'efficacité quantique QG de ces éléments photosensibles 9G indique par
ailleurs une valeur d'efficacité quantique supérieure à 10% dans l'infrarouge sur la plage de longueurs d'onde s'étendant entre 700 nm et 950 nm (avec un maximum local pour la longueur d'onde IG égale ici à 810 nm).
[0049] Enfin, la courbe d'efficacité quantique QB (représentée en trait mixte) des éléments photosensibles 9B présente un maximum pour la longueur d'onde lB (avec lB comprise entre 420 nm et 500 nm, ici lB = 460 nm) de sorte que ces éléments photosensibles sont sensibles à la lumière bleue.
[0050] La courbe d'efficacité quantique QB de ces éléments photosensibles 9B indique par
ailleurs une valeur d'efficacité quantique supérieure à 10% dans l'infrarouge sur la plage de longueurs d'onde s'étendant entre 770 nm et 950 nm (avec un maximum local pour la longueur d'onde IG égale ici à 820 nm).
[0051] Ainsi, pour chaque courbe d'efficacité quantique QR, QG, QB (et donc pour tout élément photosensible 9R, 9G, 9B de la matrice 8), la longueur d'onde ÀR, ÀG, ÀB correspondant au maximum d'efficacité quantique dans le visible est située dans la première fenêtre de transmission Fi du filtre 4.
[0052] Par ailleurs, comme indiqué par les courbes d'efficacité quantique QR, QG, QB et
mentionné ci-dessus, chaque élément photosensible 9R, 9G, 9B de la matrice 8 présente une efficacité quantique supérieure à 10% pour des longueurs d'ondes comprises dans la seconde fenêtre de transmission F2 (ici une efficacité quantique supérieure à 10% sur toute la seconde fenêtre de transmission F2). [0053] De ce fait, chaque élément photosensible 9R, 9G, 9B de la matrice 8 génère un signal électrique RB, GB, BB en fonction d'une part de la lumière reçue dans une partie du domaine visible et d'autre part du rayonnement reçu dans l'infrarouge (précisément : dans la seconde fenêtre de transmission F2). Chaque signal électrique RB, GB, BB comporte donc une composante (indéterminée) liée à la détection (par l'élément photosensible 9R, 9G, 9B concerné) du rayonnement infrarouge transmis par le filtre 4 (dans la seconde fenêtre de transmission F2).
[0054] Comme déjà indiqué, la matrice 8 ne comporte que des éléments 9R, 9G, 9B sensibles notamment dans le visible, et donc aucun élément sensible uniquement dans l'infrarouge.
[0055] La figure 5 représente, sous forme fonctionnelle, un exemple possible de mise en oeuvre de l'unité de traitement 10. A cet égard, les éléments de la figure 5 ne correspondent pas nécessairement à des circuits électroniques physiques mais peuvent être mis en oeuvre en pratique par des instructions logicielles exécutables par un processeur. L'unité de traitement 10 est dans ce cas formée par ce processeur et par ces instructions mémorisées dans une mémoire associée au processeur et exécutables par le processeur.
[0056] Dans l'exemple décrit, l'unité de traitement 10 comprend un module de traitement d'image couleur 20, un module de compensation 22 et un module de sélection 26.
[0057] L'unité de traitement 10 reçoit en entrée les signaux électriques RB, GB, BB générés par les éléments photosensibles 9R, 9G, 9B comme expliqué ci-dessus. En pratique, pour chaque type d'élément photosensible RB, GB, Bb, les signaux électriques RB, GB, BB relatifs aux différents éléments photosensibles 9R, 9G, 9B (OU sous-pixels) ayant le type concerné sont par exemple multiplexés temporellement. Autrement dit, pour chaque type d'élément photosensible RB, GB, Bb, les signaux électriques RB, GB, BB relatifs aux différents éléments photosensibles 9R, 9G, 9B ayant le type concerné sont transmis successivement au sein d'une trame.
[0058] Les signaux électriques RB, GB, BB reçus en entrée sont appliqués en entrée du module de traitement d'image couleur 20.
[0059] Le module de traitement d'image couleur 20 génère des signaux vidéo Ri, Gi, Bi sur la base des signaux électriques RB, GB, BB reçus de la matrice 8. Les signaux vidéo Ri, Gi, Bi sont des signaux représentatifs de l'image capturée par le dispositif de capture d'image 2. Les signaux vidéo Ri, Gi, Bi sont par exemple des signaux au format RGB (ici sous forme numérique), utilisables par un afficheur pour afficher l'image capturée par le dispositif de capture d'image 2.
[0060] Le module de traitement d'image couleur 20 effectue par exemple notamment les
traitements suivants : suppression de pixel(s) éteint(s), balance de couleurs, amélioration du contraste. Ces traitements sont usuels pour l'obtention de signaux au format RGB à partir de signaux électriques issus d'éléments photosensibles ne recevant que de la lumière visible.
[0061] Ici toutefois, comme expliqué ci-dessus, les signaux électriques RB, GB, BB comprennent chacun une composante (indéterminée) liée à la détection (par l'élément photosensible 9R, 9G, 9B concerné) du rayonnement infrarouge transmis par le filtre 4 (le rayonnement solaire qui éclaire directement ou indirectement la scène capturée de jour comprenant une composante dans l'infrarouge).
[0062] Par conséquent, sans traitement spécifique, une image affichée sur la base des signaux vidéo Ri, Gi, Bi produits par le module de traitement d'image couleur 20 aurait une coloration rougeâtre artificielle (liée à cette détection du rayonnement infrarouge lors d'une capture d'image de jour), non conforme à celle de la scène capturée par le dispositif de capture d'image 2.
[0063] On propose donc ici d'appliquer, en fonctionnement diurne et au moyen du module de sélection 26, les signaux vidéo Ri, Gi, Bi produits par le module de traitement d'image couleur 20 en entrée du module de compensation 22, qui génère en sortie des signaux vidéo corrigés Rv, Gv, Bv.
[0064] Le module de sélection 26 est représenté en figure 5 sous la forme d'un interrupteur commandé par le signal de sélection S ; comme déjà indiqué, la fonctionnalité de sélection peut être mise en oeuvre en pratique sous forme logicielle.
[0065] Le signal de sélection S permet de faire basculer le fonctionnement du dispositif de
capture d'image 2 entre un mode de fonctionnement diurne et un mode de
fonctionnement nocturne. Le signal de sélection S est par exemple déterminé au moyen d'un capteur de luminosité ambiante (non représenté). En variante, le signal de sélection S pourrait être déterminé en fonction d'une commande de l'utilisateur (ici le conducteur du véhicule équipé par le dispositif de capture d'image 2), par exemple une commande de mise en fonctionnement des projecteurs du véhicule. Selon une autre variante encore, le signal de sélection S pourrait être déterminé en fonction de la luminance définie par les signaux électriques RB, GB, BB reçus en entrée (ou par les signaux RGB après traitement mentionnés plus bas).
[0066] Dans le mode de fonctionnement diurne (c'est-à-dire lorsque le signal de sélection S est indicatif du mode de fonctionnement diurne), rilluminateur 12 est inactif (l'interrupteur commandé 14 étant ouvert dans l'exemple de la figure 1) et les signaux vidéo Ri, Gi, Bi produits par le module de traitement d'image couleur 20 sont appliqués en entrée du module de compensation 22 (par le module de sélection 26).
[0067] Dans le mode de fonctionnement nocturne (c'est-à-dire lorsque le signal de sélection S est indicatif du mode de fonctionnement nocturne), rilluminateur 12 est activé (l'interrupteur commandé 14 étant fermé dans l'exemple de la figure 1) au moins une partie du temps (c'est-à-dire au moins par intermittence, par exemple pendant les phases d'acquisition du dispositif de capture d'image 2), et émet ainsi un rayonnement infrarouge E en direction de la scène faisant face au dispositif de capture d'image 2 ; les signaux vidéo Ri, Gi, Bi produits par le module de traitement d'image couleur 20 sont dans ce cas directement utilisés en tant que signaux vidéo de sortie Rv, Gv, Bv.
[0068] En effet, le rayonnement infrarouge E étant au moins en partie situé dans la seconde fenêtre de transmission F2 comme déjà indiqué, la scène faisant face au dispositif de capture d'image 2, illuminée par le rayonnement infrarouge E, renverra une partie de ce rayonnement à travers le filtre 4 et jusqu'aux éléments photosensibles 9R, 9G, 9b, qui ont tous ici une sensibilité dans l'infrarouge comme expliqué plus haut.
[0069] Le module de compensation 22 (auquel sont appliqués les signaux vidéo Ri, Gi, Bi en mode de fonctionnement diurne comme expliqué ci-dessus) est conçu pour compenser la détection, par les éléments photosensibles 9R, 9G, 9b, du rayonnement infrarouge transmis à travers le filtre 4 (à travers la seconde fenêtre de transmission F2), comme expliqué ci-dessus.
[0070] L'image représentée par les signaux vidéo corrigés Rv, Gv, Bv est similaire à l'image
représentée par les signaux vidéo Ri, Gi, Bi avec toutefois une différence de coloration du fait de la compensation susmentionnée (cette différence de coloration visant à obtenir pour l'image représentée par les signaux vidéo corrigés Rv, Gv, Bv des couleurs plus fidèles à celle de la scène capturée par le dispositif de capture d'image 2).
[0071] Selon une première possibilité, le module de compensation 22 effectue un filtrage des signaux vidéo Ri, Gi, Bi, par exemple en appliquant des traitements respectivement différents aux différents composantes colorimétriques Ri, Gi, Bi. Au cours de ces traitements, on peut par exemple appliquer des coefficients multiplicateurs distincts KR, KG, KB respectivement aux composantes rouge Ri, verte Gi et bleue Bi (le coefficient multiplicateur KR appliqué à la composante rouge Ri étant inférieur au coefficient multiplicateur KG appliqué à la composante verte Gi et au coefficient multiplicateur KB appliqué à la composante bleue Bi).
[0072] Selon une possibilité de réalisation, le filtrage des signaux vidéo Ri, Gi, Bi comprend les étapes suivantes :
- multiplication des composantes Ri, Gi, Bi respectivement par KR = 0,8, KG = 0,9 et KB = 1 ;
- conversion des composantes Ri, Gi, Bi en coordonnées teinte saturation luminosité (ou HSL pour "Hue Saturation Value" ;
- application d'une fonction gamma de coefficient 0,95 à la coordonnée de saturation ;
- conversion des coordonnées teinte saturation luminosité en coordonnées RGB ;
- multiplication des composantes R, G, B obtenues respectivement par 1,28, 1,15 et 1,15.
[0073] Selon une seconde possibilité, le module de compensation 22 lit (pour chaque pixel) le triplet Rv, Gv, Bv associé au triplet Ri, Gi, Bi (reçu en entrée) dans une table de correspondance mémorisée dans le dispositif de capture 2. Le triplet Rv, Gv, Bv lu peut alors être utilisé en tant que signaux vidéo corrigés produits par le module de compensation 22.
[0074] La table de correspondance est dans ce cas construite au moyen d'expériences lors de la conception du produit. Par exemple, pour une grande quantité d'images capturées simultanément par le dispositif de capture 2 (donnant des pixels de coordonnées R,, G,,
B,) et par un dispositif de capture classique (donnant des pixels de coordonnées R, G, B), on considère tous les pixels ayant un triplet R,, G,, B, donné et on associe à ce triplet R,, G,, B, un triplet Rs, Gs, Bs ayant une distance minimum à l'ensemble des triplets R, G, B mesurés par le dispositif de capture classique pour ces pixels (cette opération étant répétée pour tous les triplets R,, G,, B, possibles). On utilise par exemple dans ce cadre une distance de type DE.
[0075] Selon une troisième possibilité, le module de compensation 22 applique aux signaux vidéo Ri, Gi, Bi un traitement construit par apprentissage automatique (en anglais "Machine Learning"), par exemple au moyen d'un réseau neuronal.
[0076] L'algorithme d'apprentissage utilisé est par exemple de type GAN (pour "Generative
Adversarial Networks"). [0077] Ici également , l'apprentissage peut être réalisé sur la base d'une grande quantité d'images prises chacune d'une part par le dispositif de capture 2 (dont les composantes Ri, G,, B, correspondent aux valeurs fournies en entrée du réseau neuronal) et d'autre part par un dispositif de capture classique (dont les composantes Rs, Gs, Bs correspondent aux valeurs attendues en sortie du réseau neuronal). Les signaux vidéo corrigés produits en sortie du module de compensation 22 sont alors émis en tant que signaux vidéo de sortie Rv, Gv, Bv en sortie de l'unité de traitement 10 et peuvent ainsi être utilisés par un afficheur pour afficher une image de la scène capturée par le dispositif de capture d'image 2, avec des couleurs fidèles aux couleurs réelles de la scène capturée.
[0078] La figure 6 représente un système de visioconférence incluant une autre forme de
réalisation de l'invention.
[0079] Le système de visioconférence de la figure 6 comprend un dispositif de capture d'image
52, un module de communication 70, une infrastructure distante 80 et un système distant de visualisation 90.
[0080] Le dispositif de capture d'image 52 et/ou le module de communication 70 sont par
exemple embarqués dans un véhicule automobile. En variante, le dispositif de capture d'image 52 ou le module de communication 70 pourrait faire partie d'un terminal portable (tel qu'un téléphone portable) utilisé par un passager du véhicule.
[0081] Le dispositif de capture d'image 52 comprend un filtre 54, une optique de collimation 56 et une matrice 58 d'éléments photosensibles. Le filtre 54, l'optique de collimation 56 et la matrice 58 sont identiques respectivement au filtre 4, à l'optique de collimation 6 et à la matrice 8 du mode de réalisation de la figure 1 et ne seront donc pas décrits à nouveau.
[0082] Le dispositif de capture d'image 52 comprend par ailleurs un module de traitement
d'image couleur 60 qui reçoit en entrée les signaux électriques RB, GB, BB produits par la matrice 58 et génère en sortie des signaux vidéo Ri, Gi, Bi, ici au format RGB. Le module de traitement d'image couleur 60 est identique au module de traitement d'image couleur 20 décrit ci-dessus (en référence à la figure 5) et ne sera donc pas décrit à nouveau.
[0083] Comme dans le mode de réalisation de la figure 1, l'utilisation d'un filtre 54 ayant une seconde fenêtre de transmission dans l'infrarouge entraîne une coloration rougeâtre artificielle de l'image représentée par les signaux vidéo Ri, Gi, Bi (coloration liée comme expliqué ci-dessus à la détection du rayonnement infrarouge transmis à travers le filtre 54). [0084] Les signaux vidéo Ri, Gi, Bi ainsi produits sont transmis (par exemple via un réseau informatique embarqué dans le véhicule) par le dispositif de capture d'image 52 au module de communication 70, qui transmet ces signaux vidéo Ri, Gi, Bi à destination de l'infrastructure distante 80.
[0085] L'infrastructure distante 80 (réalisée par exemple en pratique au moyen d'un serveur distant) comprend une unité de réception 82, une unité de compensation 84 et une unité d'émission 86.
[0086] L'infrastructure distante 80 reçoit les signaux vidéo Ri, Gi, Bi au moyen de l'unité de réception 82.
[0087] Les signaux vidéo Ri, Gi, Bi sont alors traités par l'unité de compensation 84 de manière à produire des signaux vidéo corrigés Rv, Gv, Bv. L'unité de compensation 84 effectue un traitement identique à celui effectué par le module de compensation 22 décrit en référence à la figure 5, afin de compenser la détection, par les éléments photosensibles de la matrice 58, du rayonnement infrarouge transmis par le filtre 54. Dans certains modes de réalisation, d'autres traitements pourraient être effectués au niveau de l'infrastructure distante 80.
[0088] Comme expliqué plus haut, l'image représentée par les signaux vidéo corrigés Rv, Gv, Bv est similaire à l'image représentée par les signaux vidéo Ri, Gi, Bi et correspond donc à l'image capturée par le dispositif de capture d'image 52, sans coloration rougeâtre liée à la détection de rayonnement infrarouge par les éléments photosensibles de la matrice 58.
[0089] L'infrastructure distante 80 peut alors émettre, au moyen de l'unité d'émission 86, les signaux vidéo corrigés Rv, Gv, Bv à destination du système distant de visualisation 90.
[0090] Le système distant de visualisation 90 comprend un module de réception 92 et un
afficheur 94.
[0091] Les signaux vidéo corrigés Rv, Gv, Bv sont reçus par le système distant de visualisation 90 au moyen du module de réception 92 et peuvent ainsi être appliqués en entrée de l'afficheur 94.
[0092] L'afficheur 94 affiche ainsi une image correspondant à la scène capturée par le dispositif de capture d'image 52, sans coloration rougeâtre liée à la détection de rayonnement infrarouge par les éléments photosensibles de la matrice 58.

Claims

Revendications
[Revendication 1] Dispositif de capture d'image (2 ; 52) comprenant :
- une matrice (8 ; 58) d'éléments contigus (9R, 9G, 9b) sensibles à la lumière et générant chacun un signal électrique (RB ; GB ; Bb) en fonction de la lumière reçue conformément à une courbe d'efficacité quantique (QR ; QG ; QB) associée à l'élément concerné (9R ; 9G ; 9B),
- un filtre (4 ; 54) disposé en amont de la matrice (8 ; 58) sur le trajet de la lumière,
- une unité de traitement (10 ; 60) des signaux électriques (RB, GB, Bb) générés par lesdits éléments (9R, 9G, 9b) ;
dans lequel, pour chacun desdits éléments (9R, 9G, 9b), la courbe d'efficacité quantique (QR ; QG ; QB) présente un maximum dans le visible et une valeur d'au moins 10% pour au moins une longueur d'onde dans l'infrarouge ,
caractérisé en ce que le filtre (4) comprend une première fenêtre de transmission (Fi) dans le visible et une seconde fenêtre de transmission (F2) dans l'infrarouge.
[Revendication 2] Dispositif de capture selon la revendication 1, dans lequel l'unité de traitement (10) est conçue pour compenser une détection, par lesdits éléments (9R, 9G, 9b), de rayonnement infrarouge transmis par le filtre (4).
[Revendication 3] Dispositif de capture selon la revendication 2, dans lequel l'unité de traitement (10) est conçue pour compenser ladite détection au moyen d'un processus de filtrage.
[Revendication 4] Dispositif de capture selon la revendication 2, dans lequel l'unité de traitement (10) est conçue pour compenser ladite détection par lecture de valeurs dans une table de correspondance.
[Revendication 5] Dispositif de capture selon la revendication 2, dans lequel l'unité de traitement (10) est conçue pour compenser ladite détection au moyen d'un traitement construit par apprentissage automatique.
[Revendication 6] Dispositif de capture selon l'une des revendications 1 à 5, dans lequel, pour au moins une partie desdits éléments, ladite longueur d'onde dans l'infrarouge est située dans la seconde fenêtre de transmission (F2).
[Revendication 7] Système de capture d'image comprenant un dispositif de capture (2) selon l'une des revendications 1 à 6 et un illuminateur (12) conçu pour émettre un
rayonnement infrarouge.
[Revendication 8] Système de capture selon la revendication 7, dans lequel le rayonnement
infrarouge émis par l'illuminateur (12) est situé fréquentiellement dans la seconde fenêtre de transmission (F2).
[Revendication 9] Système de capture selon la revendication 7 ou 8, dans lequel rilluminateur (12) est sélectivement activable.
[Revendication 10] Procédé de capture d'image au moyen d'un dispositif de capture d'image (2 ; 52) selon la revendication 1, comprenant les étapes suivantes :
- génération de signaux vidéo (Ri, Gi, Bi) par l'unité de traitement (10 ; 60) sur la base desdits signaux électriques (RB, GB, Bb) ;
- traitement des signaux vidéo (Ri, Gi, Bi) pour compenser une détection, par lesdits éléments (9R, 9G, 9b), de rayonnement infrarouge transmis par le filtre (4 ; 54).
PCT/EP2020/057488 2019-03-22 2020-03-18 Dispositif, systeme et procede de capture d'image Ceased WO2020193320A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1903014A FR3094139B1 (fr) 2019-03-22 2019-03-22 Dispositif, système et procédé de capture d’image
FRFR1903014 2019-03-22

Publications (1)

Publication Number Publication Date
WO2020193320A1 true WO2020193320A1 (fr) 2020-10-01

Family

ID=67262673

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2020/057488 Ceased WO2020193320A1 (fr) 2019-03-22 2020-03-18 Dispositif, systeme et procede de capture d'image

Country Status (2)

Country Link
FR (1) FR3094139B1 (fr)
WO (1) WO2020193320A1 (fr)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3151729B1 (fr) * 2023-07-24 2025-12-26 Valeo Comfort & Driving Assistance Dispositif de capture d’image et système associé

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2929477A1 (fr) * 2008-03-25 2009-10-02 E2V Semiconductors Soc Par Act Camera a prise de vue simultanee couleur et infrarouge
US20130222603A1 (en) * 2012-02-28 2013-08-29 Aptina Imaging Corporation Imaging systems for infrared and visible imaging
US20150062347A1 (en) * 2013-08-27 2015-03-05 Semiconductor Components Industries, Llc Image processing methods for visible and infrared imaging
US20180359431A1 (en) * 2017-06-12 2018-12-13 Omnivision Technologies, Inc. Combined visible and infrared image sensor incorporating selective infrared optical filter

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2929477A1 (fr) * 2008-03-25 2009-10-02 E2V Semiconductors Soc Par Act Camera a prise de vue simultanee couleur et infrarouge
US20130222603A1 (en) * 2012-02-28 2013-08-29 Aptina Imaging Corporation Imaging systems for infrared and visible imaging
US20150062347A1 (en) * 2013-08-27 2015-03-05 Semiconductor Components Industries, Llc Image processing methods for visible and infrared imaging
US20180359431A1 (en) * 2017-06-12 2018-12-13 Omnivision Technologies, Inc. Combined visible and infrared image sensor incorporating selective infrared optical filter

Also Published As

Publication number Publication date
FR3094139A1 (fr) 2020-09-25
FR3094139B1 (fr) 2021-09-17

Similar Documents

Publication Publication Date Title
CA2909554C (fr) Dispositif d'acquisition d'images bimode
US8803994B2 (en) Adaptive spatial sampling using an imaging assembly having a tunable spectral response
US10419685B2 (en) Image processing apparatus, image processing method, and computer-readable recording medium
FR2861936A1 (fr) Systeme et methode destines a compenser la balance des blancs d'images saisies
US9294742B2 (en) Spectral improvement of digital camera color images
US10416026B2 (en) Image processing apparatus for correcting pixel value based on difference between spectral sensitivity characteristic of pixel of interest and reference spectral sensitivity, image processing method, and computer-readable recording medium
CN101072365A (zh) 白平衡控制方法及摄像装置
US10431616B2 (en) Color filter arrays for image sensors
EP2011329B1 (fr) Procédé de traitement d'un phénomène d'éclairement relatif sur une image numérique et système de traitement associé
WO2020126179A1 (fr) Dispositif de capture d'images et système associé de surveillance d'un conducteur
FR2984664A1 (fr) Dispositif d'affichage
JP2008288859A (ja) 高度な色再現が可能な映像表示システム
US20100007752A1 (en) Spectral improvement of digital camera color images
WO2020193320A1 (fr) Dispositif, systeme et procede de capture d'image
EP4156080B1 (fr) Procédé de traitement, au sein d'une chaine de traitement d'image, d'une matrice de pixels et dispositif électronique correspondant
EP1351498A2 (fr) Procédé de traitement en temps réel d'un signal représentatif d'une image
EP4158887A1 (fr) Procédé de reconstruction d'une image, notamment d'une image exacte en couleur, programme d'ordinateur, dispositif et système associés
US20070236757A1 (en) Rich color image processing method and apparatus
FR2985856A1 (fr) Capteur d'image comprenant des pixels a bande spectrale etroite pour analyse colorimetrique
FR3104363A1 (fr) Dispositif de capture d’images
EP1789949A1 (fr) Procédé et système d'affichage d'une image numérique en couleurs vraies
US12418729B2 (en) System and method of correcting radial color distortion in an image captured by an image sensor through a transflective coating
JP2006140767A (ja) 撮像装置および撮像方法
FR3082032A1 (fr) Dispositif de surveillance d'un conducteur et systeme embarque associe
FR2687265A1 (fr) Dispositif de prise de vue electronique a haute dynamique et procede de prise de vue de scenes tres contrastees.

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20710557

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20710557

Country of ref document: EP

Kind code of ref document: A1