EP3662315A1 - Dispositif optique pour l'observation d'un habitacle de véhicule - Google Patents

Dispositif optique pour l'observation d'un habitacle de véhicule

Info

Publication number
EP3662315A1
EP3662315A1 EP18750152.3A EP18750152A EP3662315A1 EP 3662315 A1 EP3662315 A1 EP 3662315A1 EP 18750152 A EP18750152 A EP 18750152A EP 3662315 A1 EP3662315 A1 EP 3662315A1
Authority
EP
European Patent Office
Prior art keywords
optical
driver
resolution
optical device
high resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP18750152.3A
Other languages
German (de)
English (en)
Inventor
Frédéric AUTRAN
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Valeo Comfort and Driving Assistance SAS
Original Assignee
Valeo Comfort and Driving Assistance SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Comfort and Driving Assistance SAS filed Critical Valeo Comfort and Driving Assistance SAS
Publication of EP3662315A1 publication Critical patent/EP3662315A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512—Passenger detection systems
    • B60R21/0153—Passenger detection systems using field detection presence sensors
    • B60R21/01538—Passenger detection systems using field detection presence sensors for image processing, e.g. cameras or sensor arrays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/06—Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions

Definitions

  • the present invention relates to an optical device, for the observation of a vehicle passenger compartment, and more particularly to the users present in said passenger compartment.
  • Motor vehicles in particular those with automated driving, may include optical devices, in particular cameras, directed at the driver and the passengers, in particular at the front of the vehicle, the shooting of which makes it possible to establish indicators as to the presence and / or current status of a user, driver or passenger.
  • optical devices in particular cameras, directed at the driver and the passengers, in particular at the front of the vehicle, the shooting of which makes it possible to establish indicators as to the presence and / or current status of a user, driver or passenger.
  • Such optical devices generally comprise a high resolution camera, with a narrow angle of view (30 to 60 °), directed towards the expected position of the driver's face of the vehicle (upper part of the driver's seat).
  • the camera records high resolution images of the driver's face, and a control unit extracts said images from the estimates, particularly with respect to a driver's level of alertness.
  • control unit can in particular establish a direction of the driver's gaze (towards the front, towards a side window, on an object inside the passenger compartment ...) and / or a number of eyelid blinks per unit of time to assess a driver's state of fatigue and level of attention to surrounding traffic.
  • the optical devices include cameras with a wide angle of view (greater than 8o °) and low resolution, to observe the entire cabin or at least its front portion. These cameras with a wide angle of view, especially with a spherical optics are generally directed towards the center of the passenger compartment, so as to observe both the driver and passenger seats.
  • a control unit connected to said wide-angle camera then uses the captured images to establish the presence of an adult passenger.
  • Wide angle cameras often arranged at a console central or a ceiling of the vehicle, can also or alternatively be used to perform a gesture recognition for a gesture recognition control module.
  • the two types of camera (low angle and high resolution against wide angle at low resolution) can not, a priori, be combined into a single optical device.
  • the subject of the invention is an optical device for observing a user and a space surrounding the user, comprising:
  • an optical objective defining an optical axis and an image plane
  • a matrix of optical sensors disposed in the image plane of the objective
  • the center of the optical sensor array is disposed eccentrically with respect to the optical axis of the optical lens.
  • An optical field-of-view device is thus obtained with a portion in high resolution eccentric in a controlled manner as needed, and allowing simultaneous observation of two portions of the observed space with two levels of resolution: a high resolution around the optical axis and a lower resolution on the edges of the field of view.
  • the optical device can then have one or more of the following characteristics taken alone or in combination.
  • the offset between the center of the optical sensor array and the optical axis of the optical lens is between o, id, and od, where d is the spatial extent of the array of optical sensors in the optical plane. 'picture.
  • the distortion of the lens is barreled and increasing with the deviation of the incident rays relative to the optical axis.
  • the array of optical sensors is for example a rectangular matrix of diagonal optical sensors d.
  • the optical objective is configured so that the image plane comprises a portion of high resolution, in particular circular and centered around the optical axis, and an annular portion of lower resolution surrounding the high resolution portion.
  • the resolution in the high resolution zone is greater than a value of between three and ten pixels per degree of angle.
  • the resolution in the annular area can be between a low value of 0.3-1.0 pixels per degree of angle and a high resolution value at the boundary with the high resolution portion.
  • the array of optical sensors is disposed with a vertex of the rectangle disposed on the image circle corresponding to the low resolution value.
  • the subject of the invention is also a module for monitoring the state of attention of a driver of a vehicle and for detecting the presence of a driver.
  • passenger characterized in that it comprises an optical device as defined above, and in that the optical axis of the objective is directed towards an expected position of the face or the bust of the driver or a passenger of the vehicle.
  • the monitoring module may have one or more of the following features, taken alone or in combination.
  • control unit configured to isolate in the portion of the array of optical sensors contained in the high resolution portion of the characteristics of the driver's face such as:
  • control unit configured to isolate in the images from the matrix of optical sensors specific gestures performed by the driver and / or the passenger for the control of vehicle functions.
  • FIG. 1 diagrammatically shows an optical device arranged in a passenger compartment of a motor vehicle
  • FIG. 2 schematically shows the passenger compartment in plan view with a optical device and the associated field of view
  • FIG. 3 shows in more detail the optical device
  • FIG. 4 is a graph illustrating the angular resolution of a barrel distortion lens, according to the angle of incidence
  • FIG. 5 is a diagram of the image plane of the objective, with examples of arrangement of an array of optical sensors in it,
  • FIGS. 6a and 6b show two examples of array layout of optical sensors in the image plane of the objective
  • Figures 7a, 7b schematically show two different arrangements of an optical device in a cockpit side view.
  • the optical elements in particular the lenses used, have an invariance by rotation about an optical axis Ox, which makes it possible to define a longitudinal direction.
  • the image plane of the optical device makes it possible to define, with local gravity, transverse directions Oy and vertical Oz.
  • Figure 1 schematically shows a passenger compartment 1 of a motor vehicle with an optical device 100.
  • the optical device 100 is here installed at the center console of the vehicle: the front wall vertical or inclined, located between the driver and the passenger at the front of the vehicle. This location allows the driver, who is here the user U of the optical device 100, to be in the field of view of the optical device 100 in the normal driving position.
  • the optical device 100 may be installed at a ceiling lamp module or at or in the rear-view mirror.
  • the optical device 100 is for example part of a monitoring module of the state of vigilance of the driver and detection of the presence of a passenger.
  • a monitoring module can be used both to determine a level of attention of the driver U and to establish the presence or absence of a passenger, and for example the possible size of the passenger for the selective activation of passenger airbags .
  • the optical device 100 may be part of a gesture recognition control module.
  • Such a control module allows the control of at least one function of a member of the motor vehicle by performing specific gestures in the field of view of the optical device 100, functions such as the control of an air conditioning system, an audio system, a telephony system or a navigation assistant.
  • the control module can also be used for window regulators, exterior mirrors, moving power seats, interior lights, central locking, sunroof, hazard lights, lights of atmosphere or the handbrake.
  • FIG. 2 is also a diagrammatic representation in more detail of the optical device 100.
  • the passenger compartment comprises a driver's seat 3 and a passenger seat 5, arranged on each side of a central console 7, here in particular comprising a display screen 9.
  • the optical device 100 comprises an objective lens 101 with one or more lenses defining an optical axis Ox, and an optical sensor matrix 103.
  • the array of optical sensors 103 is arranged parallel to the focal plane of the optical objective 101 in the image plane of the optical objective 101 and therefore perpendicular to the optical axis Ox.
  • the optical lens 101 presents spatially variable distortion. According to an exemplary embodiment, this is a wide angle lens according to one embodiment an optical or at least one spherical lens.
  • Such wide-angle lenses have a very short focal length, in particular with a large and spherical convex face, so that a viewing angle is very important, typically of the order of 10 ° and more.
  • the optical objective law has for example a barrel distortion, that is to say that the rays incident at a high angle with respect to the optical axis are concentrated on a zone of less surface in the objective image plane optical law. Objects on the periphery of the field of view will appear as compressed.
  • the optical device 100 may further comprise means for positioning and translating the objective lens along the optical axis Ox, to allow dynamic focusing.
  • the optical axis Ox of the objective lens is directed towards the expected position of the conductor U, and more particularly of the face and / or the bust thereof, that is to say at the of the headrest of the driver's seat 3, this, as will be described later to allow observation at high resolution.
  • the array of optical sensors 103 is for example a CCD (charge coupled device) matrix or a matrix of a CMOS sensor comprising a matrix of miniature photodiodes.
  • the optical sensor array 103 is in particular rectangular.
  • the optical sensor array 103 has a grid of sensors individual optics, with each optical sensor being associated one or more pixels of the image captured by the optical sensor array 103.
  • the optical sensor array 103 is disposed in the image plane of the lens 101, eccentrically, that is to say that the center C of the optical sensor array 103 is off-center and thus offset from the optical axis of the optical lens 101.
  • the center C of the optical sensor matrix 103 is offset from the optical axis Ox in the direction of the driver's seat 3.
  • the field of view of the optical device 100 is then asymmetrical, with a greater viewing angle on the side of the passenger seat 5 which is then also observed by the optical device 100.
  • the field of view of the optical device 100 can then be divided into three conical, vertex zones situated at the center O of the lens 101.
  • the three zones comprise two zones of low resolution LD separated by a zone High resolution HD centered on the Ox optical axis.
  • the lower resolution area LD on the left in FIG. 2 has an angular aperture smaller than the low resolution zone LD on the right.
  • the optical sensor array 103 is disposed eccentrically with respect to the optical axis Ox, with an offset ⁇ in the image plane of the objective 101.
  • the image captured by the sensor array 103 corresponds to the field of view of the camera, which is in the form of a crown cone O, delimited by the projection of the edges of the array of optical sensors 103. Due to the shift ⁇ (here downwardly in the image of FIG. 3) with respect to the optical axis Ox, said cone is asymmetrical with respect to the optical axis Ox.
  • the objective 101 has a greater angular resolution around its optical axis Ox, so that by the arrangement of the optical sensor matrix 103 with respect to the optical axis Ox of the objective, the high resolution HD area of the field of view is eccentrically.
  • the lower resolution area LD located below the high resolution area HD is cone-shaped with less angular aperture than the lower resolution area LD situated above the high resolution area HD.
  • FIG. 4 is a graph of the resolution R in pixels per degree of field of view (px / °), as a function of the angle ⁇ of observation with respect to the optical axis Ox.
  • the resolution of a lens 101 with conventional barrel deformation is, at least around the origin, in the form of a convex curve, symmetrical with respect to the ordinate axis.
  • a pixel must correspond to an angular aperture of approximately 0.15 ° (arctan (o, oo3)), ie a resolution of the order of the order of six pixels per degree of field of view.
  • a resolution of one centimeter is required. Considering that the passenger is at a distance of about one meter from the optical device 100, a pixel must correspond to an angular aperture of about 1.5 ° (arctan (o, oi)), ie a resolution of the order of 0.6 pixels per degree.
  • FIG. 5 is a representation of the image plane of the objective 101, with two axes corresponding to the directions y (ordinate) and z (dimension).
  • two concentric circles 11, 13 are represented, corresponding to the resolution points respectively worth RLD for the outer circle 11 and RHD for the inner circle 13.
  • RLD resolution point
  • RHD resolution point
  • the diameter of the outer circle 11 is denoted D in the image plane.
  • the disk contained in this outer circle 11 corresponds to the portion of the exploitable image plane to obtain images with a resolution greater than the low resolution value RLD-
  • the resolution is greater than RHD and between the inner circle 131 and the outer circle 11, the resolution is between RHD and RLD, at the boundary of the high resolution area HD defined by the circle. Inside 13, the resolution worth RHD.
  • optical sensor array 103 Two examples of optical sensor array 103 are shown in FIG. 5, referenced 103a and 103b with their respective centers Ca and Cb.
  • the extension d of the rectangle occupied by the optical sensor matrix 103 is smaller than the diameter of the image circle D corresponding here to the outer circle 11 to allow it to be decentered in the outer circle 11 .
  • optical sensor array 103a is of reduced diagonal d, equal to 3D / 4.
  • the second example of optical sensor array 103b is diagonal d equal to D / 2.
  • the optical sensor matrices 103a, 103b are arranged in the outer circle 11 with their upper right-hand top in contact with said outer circle 11.
  • the diagonal values d for the optical sensor matrices 103 preferably between 0.5.0 and o, gD allow a shift ⁇ , in particular between o, id and o, yd, with respect to the centered position. capable of capturing both an image of the driver U in high resolution and the rest of the passenger compartment 1, in a lower resolution but higher than the low resolution value RLD.
  • optical sensor matrix 103 may also be used, for example a shape refined at the edges, taking into account the barrel distortion of the final image obtained.
  • Figures 6a and 6b illustrate the shift of the array of optical sensors 103 relative to a centered position.
  • Figures 6a, 6b show the image plane portion of the lens 101, with the outer circles 11 and inner 13 corresponding to the areas of lower resolution LD and high resolution HD.
  • the offset is only in y (ordinate), in FIG. 6b the offset ⁇ further comprises a component ⁇ ⁇ in z (dimensions).
  • the optical sensor array 103 is shifted to the left in the image plane relative to the centered position, shown in dashed lines.
  • the shift 5 y along the abscissa axis allows to adjust the position of the cone of vision in high resolution HD in the field of view of the optical device 100 in the horizontal plane xOy ( Figure 2).
  • the array of optical sensors 103 and the optical objective 101 are sized and arranged so that the array of optical sensors 103 completely contains the circular portion of the image plane of the lens 101.
  • the offset ⁇ of the optical sensor matrix 103 comprises a component 5 y along the abscissa axis y, and a component 5 Z along the axis of the dimensions z.
  • FIGS. 7a and 7b illustrate the effect of the component ⁇ ⁇ along the axis of the dimensions z of the shift ⁇ and its application.
  • Figures 7a, 7b schematically show a passenger compartment 1 of a motor vehicle, in side view, in which is essentially visible the driver seat 3, with the driver U sitting on and holding the steering wheel of the motor vehicle.
  • the optical device 100 is disposed at the level of the central console 7 of the vehicle, at the height of the vehicle steering wheel.
  • the overall field of view of said device 100 has an angular opening from the driver's pelvis U to the driver's hands U placed on the steering wheel.
  • the high resolution portion of said field of view, hatched in FIG. 7a, is centered on the driver's face, and is relatively in the middle of the overall field of view.
  • the vertical component ⁇ ⁇ of the offset ⁇ is then small or zero, which corresponds to the arrangement of FIG. 6a.
  • the optical device 100 is disposed at a ceiling or a central rearview mirror of the vehicle.
  • the overall field of vision of the vehicle has an angular aperture from the top of the skull of the driver U to the hands of the driver U placed on the steering wheel.
  • the high-resolution portion of said field of view, hatched in Figure 7b, is centered on the driver's face, and is therefore almost at the highest in the global field of vision.
  • the portion located under the high-resolution portion of low-resolution field of view, which covers the torso of the driver U, his arms and his hands resting on the steering wheel is larger than the low-resolution portion above the hatched high resolution portion, which is almost non-existent.
  • the optical sensor array 103 is connected to a control unit (not shown) including in particular an image processing unit.
  • control unit comprises calculation means and an electronic memory.
  • the control unit may in particular be dedicated or integrated in a global electronic circuit of the vehicle.
  • control unit can control one or more functional modules of the vehicle by means of electronic actuators (integrated circuits, transistors, logic switches).
  • the control unit receives the images recorded by the optical sensor array 103 and analyzes them to extract data relating to the driver.
  • control unit can extract information relating to one or more characteristics of the conductor U, of its behavior. and its physiological state.
  • control unit can derive from the images a direction of the driver's gaze U, in particular if he looks towards the front of the vehicle, if he looks at a point located in the cockpit, or if he looks by a side window.
  • control unit can trigger the emission of an alert, either with indicator lights, the display of a message on a screen or the transmission of a sound by the vehicle's multimedia playback system.
  • control unit can analyze the open or closed state of the eyes of the driver U, and by tracking over a predetermined period of time, to deduce a frequency of blinking of the eyelids of the driver U.
  • the control can trigger the emission of a sound, particularly acute or shrill, to wake up the driver U possibly asleep, and / or invite him to pay attention to the traffic.
  • a high or increasing frequency of blinking of the eyes or yawning of the driver U can trigger the display or audio playback of a message inviting the driver to pause or change places with the passenger.
  • control unit can use data extracted from the low-resolution portion of the field of view of the optical device 100, such as the position of the bust of the driver U, the position of his hands, especially in relation to the steering wheel.
  • control unit can extract passenger data, such as its presence or absence, as well as its size.
  • the passenger data can be used to selectively activate a portion of the passenger, front and side airbags, depending on the presence and size of the detected passenger.
  • control unit can be configured to isolate in the images specific gestures, in particular in a defined space of the passenger compartment (for example in front of the display screen 9 or the central console 7), corresponding to the control various functions of the vehicle (multimedia device, navigation assistant, interior and exterior lighting).
  • the optical device according to the invention requires only a slight oversizing of the lens relative to the optical sensor array 103, and can in particular use a conventional wide-angle optical lens 101.
  • the device is invariant by rotation around the optical axis Ox, and therefore easy to set up.
  • the optical device 100 and the monitoring module obtained by means of the latter are more compact and less expensive than a solution combining two cameras, a wide angle and a high resolution, while allowing a two-level observation simultaneous resolution.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Studio Devices (AREA)

Abstract

L'invention a pour objet un dispositif optique pour l'observation d'un utilisateur et d'un espace environnant l'utilisateur, comprenant : ◦ un objectif optique (101), définissant un axe optique (Ox) et un plan image, ◦ une matrice de capteurs optiques (103), disposée dans le plan image de l'objectif optique (101) caractérisé en ce que : ◦ l'objectif optique possède une distorsion variable spatialement, ◦ le centre de la matrice de capteurs optiques (103) est disposé de façon excentrée par rapport à l'axe optique de l'objectif optique (101).

Description

Dispositif optique pour l'observation d'un habitacle de véhicule
La présente invention concerne un dispositif optique, pour l'observation d'un habitacle de véhicule, et plus particulièrement des usagers présents dans ledit habitacle.
Les véhicules automobiles, notamment à conduite automatisée, peuvent comporter des dispositifs optiques, en particulier des caméras de prise de vue, dirigés sur le conducteur et les passagers, en particulier à l'avant du véhicule, dont les prises de vue permettent d'établir des indicateurs quant à la présence et/ou l'état actuel d'un utilisateur, conducteur ou passager.
De tels dispositifs optiques comportent généralement une caméra haute résolution, à angle de vue étroit (30 à 6o°), dirigée vers la position attendue du visage du conducteur du véhicule (partie supérieure du siège conducteur). La caméra enregistre des images haute résolution du visage du conducteur, et une unité de contrôle extrait desdites images des estimations, en particulier quant à un niveau de vigilance du conducteur.
Pour ce faire, l'unité de contrôle peut notamment établir une direction du regard du conducteur (vers l'avant, vers une fenêtre latérale, sur un objet à l'intérieur de l'habitacle...) et/ ou un nombre de clignements de paupière par unité de temps pour évaluer un état de fatigue du conducteur et son niveau d'attention à la circulation alentour.
En alternative ou en complément, les dispositifs optiques comportent des caméras à grand angle de vue (supérieur à 8o°) et à faible résolution, pour observer l'ensemble de l'habitacle ou au moins de sa portion avant. Ces caméras à grand angle de vue, notamment avec une optique sphérique sont généralement dirigées vers le centre de l'habitacle, de sorte à observer à la fois les sièges conducteur et passager.
Une unité de contrôle reliée à ladite caméra à grand angle de vue utilise alors les images capturées pour établir la présence d'un passager adulte.
Les caméras grand angle, souvent disposées au niveau d'une console centrale ou d'un plafonnier du véhicule, peuvent aussi ou en alternative être utilisées pour effectuer une reconnaissance de gestes pour un module de contrôle à reconnaissance de geste.
Les deux types de caméra (angle réduit et haute résolution contre grand angle à faible résolution) ne peuvent pas, à priori, être combinées en un seul dispositif optique.
Des solutions approchant peuvent être obtenues avec des caméras dynamiques, dont l'objectif comporte des lentilles mobiles en translation le long de l'axe optique pour permettre un zoom dynamique selon la portion d'image à étudier. Ces dispositifs ne permettent cependant pas une analyse simultanée d'une portion réduite du champ de vision avec une grande résolution et d'une portion étendue de vision avec une résolution moindre, mais seulement de façon séquentielle. En outre, le zoom dynamique et les éléments mobiles requièrent un actionnement précis et rapide, et sont donc sujets à l'usure et au décalage avec le temps.
Il est aussi possible de réaliser des lentilles non-uniformes de focale variable, mais ces lentilles sont complexes dans leur conception et leur fabrication et chères à réaliser. De plus elles nécessitent un positionnement et un alignement très précis lors de leur montage.
Afin de résoudre au moins partiellement le problème précédemment mentionné, l'invention a pour objet un dispositif optique pour l'observation d'un utilisateur et d'un espace environnant l'utilisateur, comprenant :
0 un objectif optique, définissant un axe optique et un plan image,
° une matrice de capteurs optiques, disposée dans le plan image de l'objectif,
caractérisé en ce que :
° l'objectif optique présente une distorsion variable spatialement, et
° le centre de la matrice de capteurs optiques est disposé de façon excentrée par rapport à l'axe optique de l'objectif optique. On obtient ainsi un dispositif optique à champs de vision avec une portion en haute résolution excentrée de façon contrôlée selon les besoins, et permettant l'observation en simultané de deux portions de l'espace observé avec deux niveaux de résolution : une résolution élevée autour de l'axe optique et une résolution moindre sur les bords du champ de vision.
Le dispositif optique peut alors présenter une ou plusieurs des caractéristiques suivantes prises seules ou en combinaison.
Selon un aspect, le décalage entre le centre de la matrice de capteurs optiques et l'axe optique de l'objectif optique est compris entre o,id et o d, d étant l'extension spatiale de la matrice de capteurs optiques dans le plan d'image.
Selon un autre aspect, la distorsion de l'objectif est en barillet et croissante avec l'écart des rayons incidents par rapport à l'axe optique.
La matrice de capteurs optiques est par exemple une matrice rectangulaire de capteurs optiques de diagonale d.
Selon un autre aspect, l'objectif optique est configuré de sorte que le plan image comporte une portion de haute résolution, notamment circulaire et centrée autour de l'axe optique, et une portion annulaire de moindre résolution entourant la portion de haute résolution.
Selon encore un autre aspect, la résolution dans la zone de résolution haute est supérieure à une valeur comprise entre trois et dix pixels par degré d'angle.
La résolution dans la zone annulaire peut être comprise entre une valeur basse valant 0,3-1,0 pixel par degré d'angle et une valeur de résolution haute à la frontière avec la portion de haute résolution.
La matrice de capteurs optiques est disposée avec un sommet du rectangle disposé sur le cercle d'image correspondant à la valeur de basse résolution.
L'invention a aussi pour objet un module de surveillance de l'état d'attention d'un conducteur d'un véhicule et de détection de la présence d'un passager, caractérisé en ce qu'il comporte un dispositif optique tel que défini ci- dessus, et en ce que l'axe optique de l'objectif est dirigé vers une position attendue du visage ou du buste du conducteur ou d'un passager du véhicule.
Ledit module de surveillance peut présenter une ou plusieurs des caractéristiques suivantes, prises seules ou en combinaison.
Il comporte en outre une unité de contrôle configurée pour isoler dans la portion de la matrice de capteurs optiques contenue dans la portion de haute résolution des caractéristiques du visage du conducteur telles que :
° la direction du regard du conducteur,
° l'état ouvert ou fermé des yeux du conducteur,
° une fréquence de clignement des paupières du conducteur.
Il comporte en outre une unité de contrôle configurée pour isoler dans les images issues d'une portion de la matrice de capteurs optiques contenue dans la portion annulaire basse résolution des caractéristiques du passager ou du conducteur telles que :
° la présence ou l'absence de passager,
° la taille du passager,
0 la position des mains du conducteur,
0 la position du buste du conducteur.
II comporte en outre une unité de contrôle configurée pour isoler dans les images issues de la matrice de capteurs optiques des gestes spécifiques exécutés par le conducteur et/ou le passager pour le contrôle de fonctions du véhicule.
D'autres caractéristiques et avantages de l'invention apparaîtront plus clairement à la lecture de la description suivante, donnée à titre d'exemple illustratif et non limitatif, et des dessins annexés parmi lesquels :
la figure ι montre schématiquement un dispositif optique disposé dans un habitacle de véhicule automobile,
la figure 2 montre schématiquement l'habitacle en vue de dessus avec un dispositif optique et le champ de vision associé,
la figure 3 montre plus en détail le dispositif optique,
la figure 4 est un graphe illustrant la résolution angulaire d'un objectif à distorsion en barillet, selon l'angle d'incidence,
- la figure 5 est un schéma du plan image de l'objectif, avec des exemples de disposition d'une matrice de capteurs optiques dans celui-ci,
les figures 6a, 6b montrent deux exemples de disposition de matrice de capteurs optiques dans le plan image de l'objectif,
les figures 7a, 7b montrent schématiquement deux dispositions différentes d'un dispositif optique dans un habitacle en vue de côté.
Sur toutes les figures, les mêmes références se rapportent aux mêmes éléments.
Les réalisations décrites en faisant référence aux figures sont des exemples. Bien que la description se réfère à un ou plusieurs modes de réalisation, ceci ne signifie pas nécessairement que chaque référence concerne le même mode de réalisation, ou que les caractéristiques s'appliquent seulement à un seul mode de réalisation. De simples caractéristiques de différents modes de réalisation peuvent également être combinées pour fournir d'autres modes de réalisation.
Les éléments optiques, en particulier les lentilles utilisées, présentent une invariance par rotation autour d'un axe optique Ox, qui permet de définir un sens longitudinal. Le plan image du dispositif optique permet de définir, avec la gravité locale, les directions transverses Oy et verticale Oz.
La figure 1 montre de façon schématique un habitacle 1 de véhicule automobile avec un dispositif optique 100.
Le dispositif optique 100 est ici installé au niveau de la console centrale du véhicule : la paroi avant verticale ou inclinée, située entre le conducteur et le passager à l'avant du véhicule. Cet emplacement permet au conducteur, qui est ici l'utilisateur U du dispositif optique 100, d'être dans le champ de vision du dispositif optique 100 en position normale de conduite. En alternative, le dispositif optique 100 peut être installé au niveau d'un module de plafonnier ou encore au niveau de ou dans le rétroviseur.
Le dispositif optique 100 fait par exemple partie d'un module de surveillance de l'état de vigilance du conducteur et de détection de la présence d'un passager. Un tel module de surveillance peut être utilisé à la fois pour déterminer un niveau d'attention du conducteur U et pour établir la présence ou non d'un passager, ainsi que par exemple la taille éventuelle du passager pour l'activation sélective des airbags passagers.
Le dispositif optique 100 peut faire partie d'un module de commande par reconnaissance de gestes.
Un tel module de commande permet la commande d'au moins une fonction d'un organe du véhicule automobile par exécution de gestes spécifiques dans le champ de vision du dispositif optique 100, fonctions telles que la commande d'un système de climatisation, d'un système audio, d'un système de téléphonie ou encore d'un assistant de navigation. Le module de commande peut également servir pour les commandes de lève-vitres, de positionnement des rétroviseurs extérieurs ou encore pour le déplacement de sièges motorisés ou pour commander des lumières intérieures, un verrouillage central, un toit ouvrant, les feux de détresse, les lumières d'ambiance ou le frein à main.
Une vue simplifié de l'habitacle ι du véhicule est montré en vue de dessus sur la figure 2. En figure 2 est aussi représenté schématiquement plus en détail le dispositif optique 100.
L'habitacle ι comporte un siège conducteur 3 et un siège passager 5, disposés de chaque côté d'une console centrale 7, comportant ici en particulier un écran d'affichage 9.
Le dispositif optique 100 comporte un objectif 101 avec une ou plusieurs lentilles définissant un axe optique Ox, et une matrice de capteurs optiques 103.
La matrice de capteurs optiques 103 est disposée parallèlement au plan focal de l'objectif optique 101 dans le plan image de l'objectif optique 101 et donc perpendiculairement à l'axe optique Ox. L'objectif optique 101 présente distorsion variable spatialement. Selon un exemple de réalisation, il s'agit d'un objectif grand angle présentent selon un mode de réalisation une optique ou au moins une lentille sphérique.
De tels objectifs grands angles sont de focale très courte, notamment avec une face bombée de manière importante et sphérique, de sorte à obtenir un angle de vision est très important, typiquement de l'ordre de ioo° et plus.
D'autres distorsions variables spatialement peuvent être envisagés, par exemple avec un objectif optique présentant des lentilles à faible focale, pour générer une image couvrant un champ de vision plus étroit, tout en conservant deux ou plus niveaux de résolution.
L'objectif optique loi présente par exemple une distorsion en barillet, c'est-à-dire que les rayons incidents avec un angle élevé par rapport à l'axe optique sont concentrés sur une zone de moindre surface dans le plan image d'objectif optique loi. Les objets situés en périphérie du champ de vision apparaissent alors comme compressés.
On observe que la compression est d'autant plus importante qu'on s'éloigne du centre de l'image obtenue.
Le dispositif optique 100 peut en outre comporter des moyens de positionnement et de translation de l'objectif loi le long de l'axe optique Ox, pour permettre une mise au point dynamique.
Dans le présent exemple de réalisation l'axe optique Ox de l'objectif loi est dirigé vers la position attendue du conducteur U, et plus particulièrement du visage et/ou du buste de celui-ci, c'est-à-dire au niveau de l'appuie-tête du siège conducteur 3, ceci, comme cela sera décrit plus loin pour permettre une observation à résolution élevée.
La matrice de capteurs optiques 103 est par exemple une matrice CCD (« charge coupled device » - capteurs à transfert de charge) ou une matrice d'un capteur CMOS comportant une matrice de photodiodes miniatures. La matrice de capteurs optiques 103 est en particulier rectangulaire.
La matrice de capteurs optiques 103 comporte un quadrillage de capteurs optiques individuels, à chaque capteur optique étant associé un ou plusieurs pixels de l'image captée par la matrice de capteurs optiques 103.
La matrice de capteurs optiques 103 est disposée dans le plan image de l'objectif 101, de façon excentrée, c'est-à-dire que le centre C de la matrice de capteurs optiques 103 est excentrée et donc décalé par rapport à l'axe optique de l'objectif optique 101.
Comme on peut le voir sur la figure 2, le centre C de la matrice de capteurs optique 103 est décalé de l'axe optique Ox dans la direction du siège conducteur 3.
II en résulte que le champ de vision du dispositif optique 100 est alors asymétrique, avec un angle d'observation plus important du côté du siège passager 5 qui est alors aussi observé par le dispositif optique 100.
En référence aux figures 2 et 3, le champ de vision du dispositif optique 100 peut alors être divisé en trois zones coniques, de sommet situé au centre O de la lentille 101. Les trois zones comportent deux zones de moindre résolution LD séparées par une zone de haute résolution HD centrée sur l'axe optique Ox. La zone de moindre résolution LD à gauche en figure 2 présente une ouverture angulaire inférieure à la zone de basse résolution LD à droite.
En figure 3, on peut voir plus en détail que la matrice de capteurs optiques 103 est disposée de façon excentrée par rapport à l'axe optique Ox, avec un décalage δ dans le plan image de l'objectif 101.
L'image capturée par la matrice de capteurs 103 correspond au champ de vision de la caméra, qui est en forme de cône de sommet O, délimité par la projection des bords de la matrice de capteurs optiques 103. Du fait du décalage δ (ici vers la bas sur l'image de la figure 3) par rapport à l'axe optique Ox, ledit cône est asymétrique par rapport à l'axe optique Ox.
Du fait de la distorsion décrite ci-dessus, l'objectif 101 possède une résolution angulaire plus importante autour de son axe optique Ox, de sorte que par la disposition de la matrice de capteurs optiques 103 par rapport à l'axe optique Ox de l'objectif, la zone de haute résolution HD du champ de vision est excentrée.
En particulier, en figure 3, la zone de moindre résolution LD située en dessous de la zone de résolution élevée HD est en forme de cône de moindre ouverture angulaire que la zone de moindre résolution LD située au- dessus de la zone de résolution élevée HD.
La figure 4 est un graphe de la résolution R en pixels par degré de champs de vision (px/°), en fonction de l'angle a d'observation par rapport à l'axe optique Ox.
La résolution d'un objectif 101 à déformation en barillet classique est, au moins autour de l'origine, en forme de courbe convexe, symétrique par rapport à l'axe des ordonnées.
Pour permettre une évaluation d'un état d'attention du conducteur U, des détails tels que les pupilles des yeux et leur position sont à prendre en compte, par exemple pour déterminer la direction du regard du conducteur U, ce qui implique de distinguer des détails de l'ordre de trois millimètres. En considérant que le conducteur U est à une distance d'environ un mètre du dispositif optique 100, un pixel doit correspondre à une ouverture angulaire de 0,15° environ (arctan(o,oo3)), soit une résolution de l'ordre de l'ordre de six pixels par degré de champs de vision.
Pour évaluer la présence et la taille d'un passager, une résolution de l'ordre du centimètre est requise. En considérant que le passager est à une distance d'environ un mètre du dispositif optique 100, un pixel doit correspondre à une ouverture angulaire de 1,5° environ (arctan(o,oi)), soit une résolution de l'ordre de 0,6 pixels par degré.
On a ainsi une valeur limite de résolution haute RHD pouvant être de l'ordre de trois à dix pixels par degré d'angle, et une valeur limite de résolution basse RLD de l'ordre de 0,3-1,0 pixel par degré.
Ces considérations se traduisent dans le plan focal ou le plan image de la lentille 101 comme illustré en figure 5. La figure 5 est une représentation du plan image de l'objectif 101, avec deux axes correspondant aux directions y (ordonnées) et z (cote). Dans le plan image de l'objectif optique 101, deux cercles concentriques 11, 13 sont représentés, correspondant aux points de résolution valant respectivement RLD pour le cercle extérieur 11 et RHD pour le cercle intérieur 13. Ainsi, la résolution à l'intérieur du cercle 13 est élevée et la résolution entre le cercle 13 et le cercle extérieur 11 est plus faible.
Le diamètre du cercle extérieur 11 est noté D dans le plan image. Le diamètre D peut être calculé en fonction de l'angle a auquel la résolution basse RLD est atteinte comme valant environ D =/*tan(a) avec/ la distance focale (en considérant une mise au point autour du plan focal). Le disque contenu dans ce cercle extérieur 11 correspond à la portion du plan image exploitable pour obtenir des images d'une résolution supérieure à la valeur de résolution basse RLD-
À l'intérieur du cercle intérieur 13, la résolution est supérieure à RHD et entre le cercle intérieur 131 et le cercle extérieur 11, la résolution est comprise entre RHD et RLD, à la frontière de la zone de haute résolution HD définie par le cercle intérieur 13, la résolution valant RHD.
Deux exemples de matrice de capteurs optiques 103 sont représentés en figure 5, référencés 103a et 103b avec leurs centres respectifs Ca et Cb.
Comme on le voit sur la figure 5, l'extension d du rectangle occupé par la matrice de capteurs optiques 103 est plus petite que le diamètre du cercle d'image D correspondant ici au cercle extérieur 11 pour permettre son décentrage dans le cercle extérieur 11.
Le premier exemple de matrice de capteurs optiques 103a est de diagonale d réduite, valant 3D/4. Le deuxième exemple de matrice de capteurs optiques 103b est de diagonale d valant D/2. Les matrices de capteurs optiques 103a, 103b, sont disposées dans le cercle extérieur 11 avec leur sommet supérieur droit en contact avec ledit cercle extérieur 11.
Les valeurs de diagonale d pour les matrices de capteurs optiques 103 préférentiellement comprises entre 0,5.0 et o,gD permettent un décalage δ, notamment compris entre o,id et o,yd, par rapport à la position centrée susceptible de permettre de capturer à la fois une image du conducteur U en haute résolution et du reste de l'habitacle 1, dans une résolution moindre mais supérieure à la valeur de résolution basse RLD.
En alternative, il est possible de décaler encore plus la matrice de capteurs optiques 103a vers l'extérieur du cercle image. On peut ainsi avoir une partie des pixels autour du coin situé en dehors du cercle extérieur 11 dont la résolution angulaire inférieure à la valeur basse RLD qui ne permettra peut-être pas l'exploitation, mais on pourra en revanche excentrer la portion haute résolution HD de l'image au plus proche du bord de l'image.
D'autres formes de matrice de capteurs optiques 103 peuvent aussi être utilisées, par exemple une forme s'affinant sur les bords, tenant compte de la distorsion en barillet de l'image finale obtenue.
Les figures 6a et 6b illustrent le décalage de la matrice de capteurs optiques 103 par rapport à une position centrée. Les figures 6a, 6b représentent la portion de plan image de la lentille 101, avec les cercles extérieur 11 et intérieur 13 correspondant aux zones de moindre résolution LD et de haute résolution HD.
En figure 6a, le décalage est uniquement en y (ordonnées), en figure 6b, le décalage δ comporte en outre une composante δζ en z (cotes).
En figure 6a, la matrice de capteurs optiques 103 est décalée vers la gauche dans le plan image par rapport à la position centrée, représentée en pointillés. Le décalage 5y selon l'axe des abscisses y permet d'ajuster la position du cône de vision en haute résolution HD dans le champ de vision du dispositif optique 100 dans le plan horizontal xOy (figure 2). La matrice de capteurs optiques 103 et l'objectif optique 101 sont dimensionnés et disposés de sorte que la matrice de capteurs optiques 103 contienne entièrement la portion circulaire du plan image de la lentille 101.
En figure 6b, le décalage δ de la matrice de capteurs optiques 103 comporte une composante 5y selon l'axe des abscisses y, et une composante 5Z selon l'axe des cotes z. Les figures 7a, 7b illustrent l'effet de la composante δζ selon l'axe des cotes z du décalage δ et son application. Les figures 7a, 7b représentent schématiquement un habitacle 1 de véhicule automobile, en vue de côté, dans lequel est essentiellement visible le siège conducteur 3, avec le conducteur U assis dessus et tenant le volant du véhicule automobile.
En figure 7a, le dispositif optique 100 est disposé au niveau de la console centrale 7 du véhicule, à hauteur du volant du véhicule. Le champ de vision global dudit dispositif 100 présente une ouverture angulaire allant du bassin du conducteur U aux mains du conducteur U posées sur le volant. La portion de haute résolution dudit champ de vision, hachurée en figure 7a, est centrée sur le visage du conducteur, et se trouve relativement au milieu du champ de vision global.
Pour ce mode de réalisation, la composante verticale δζ du décalage δ est alors faible voire nulle, ce qui correspond à la disposition de la figure 6a.
En figure 7b, le dispositif optique 100 est disposé au niveau d'un plafonnier ou d'un rétroviseur central du véhicule. Le champ de vision global du véhicule présente une ouverture angulaire allant du sommet du crâne du conducteur U aux mains du conducteur U posées sur le volant. La portion de haute résolution dudit champ de vision, hachurée en figure 7b, est centrée sur le visage du conducteur, et se trouve donc presque au plus haut dans le champ de vision global.
En particulier, la portion située sous la portion haute résolution de champ de vision en basse résolution, qui couvre le torse du conducteur U, ses bras et ses mains posées sur le volant est plus importante que la portion de basse résolution située au-dessus de la portion haute résolution hachurée, qui est presque inexistante.
Pour obtenir ce décentrage vers le haut de la portion de haute résolution, un décalage δ avec une composante δζ selon l'axe des cotes z correspondant à la figure 6b est indiqué.
Dans le cadre d'un module de surveillance d'un état d'attention du conducteur U, la matrice de capteurs optiques 103 est reliée à une unité de contrôle (non représentée) comportant en particulier une unité de traitement d'images.
Pour ce faire, l'unité de contrôle comporte des moyens de calcul et une mémoire électronique. L'unité de contrôle peut en particulier être dédiée ou intégrée dans un circuit électronique global du véhicule. L'unité de contrôle peut en particulier contrôler un ou plusieurs modules fonctionnels du véhicule au moyen d'actionneurs électroniques (circuits intégrés, transistors, interrupteurs logiques).
L'unité de contrôle reçoit les images enregistrées par la matrice de capteurs optiques 103 et les analyse pour en extraire des données relatives au conducteur.
De la portion en haute résolution du champ de vision du dispositif optique 100, dirigée vers le visage et le haut du corps du conducteur U, l'unité de contrôle peut extraire des informations relatives à une ou plusieurs caractéristiques du conducteur U, de son comportement et de son état physiologique.
Par exemple, l'unité de contrôle peut déduire des images une direction du regard du conducteur U, en particulier s'il regarde vers l'avant du véhicule, s'il regarde un point situé dans l'habitacle, ou s'il regarde par une fenêtre latérale.
Si le conducteur U regarde un point à l'intérieur de l'habitacle ou par une fenêtre latérale de façon prolongée, l'unité de contrôle peut déclencher l'émission d'une alerte, soit avec des voyants lumineux, l'affichage d'un message sur un écran ou l'émission d'un son par le système de lecture multimédia du véhicule.
En alternative ou en complément, l'unité de contrôle peut analyser l'état ouvert ou fermé des yeux du conducteur U, et par suivi sur une durée prédéterminée, en déduire une fréquence de clignement des paupières du conducteur U.
Si les yeux du conducteur U restent fermés de façon prolongés, l'unité de contrôle peut déclencher l'émission d'un son, en particulier aigu ou strident, pour réveiller le conducteur U possiblement endormi, et/ou l'inviter à porter son attention sur la circulation.
De façon analogue, une fréquence élevée ou croissante de clignement des yeux ou de bâillements du conducteur U peut déclencher l'affichage ou la lecture audio d'un message invitant le conducteur à faire une pause ou changer de place avec le passager.
Pour compléter le diagnostic de l'état de vigilance du conducteur U, l'unité de contrôle peut utiliser des données extraites de la portion basse résolution du champ de vision du dispositif optique 100, telles que la position du buste du conducteur U, la position de ses mains, en particulier par rapport au volant.
Ces données peuvent soit être suivies en continu soit, dans le cadre d'un véhicule à conduite autonome, en prévision d'une potentielle remise des contrôles du véhicule au conducteur (entrée en agglomération, sortie d'autoroute, approche d'une situation potentiellement dangereuse).
De la portion de champs de vision de résolution basse, l'unité de contrôle peut extraire des données relatives au passager, telles que sa présence ou son absence, ainsi que sa taille.
Les données quant au passager peuvent être utilisées pour activer sélectivement une portion des airbags passager, frontal et latéraux, selon la présence et la taille du passager détecté.
Enfin, l'unité de contrôle peut être configurée pour isoler dans les images des gestes spécifiques, en particulier dans un espace délimité de l'habitacle (par exemple devant l'écran d'affichage 9 ou la console centrale 7), correspondant au contrôle de fonctions diverses du véhicule (dispositif multimédia, assistant de navigation, éclairage intérieur et extérieur).
D'autres usages sont aussi possibles dans les capteurs, détecteurs et systèmes de surveillance requérant de combiner une observation d'un espace réduit en haute résolution HD, et d'un espace important avec une résolution moindre LD. Par exemple, dans le cadre de l'observation des utilisateurs d'un distributeur automatique de billets (DAB), où le visage des utilisateurs peut être enregistré en haute résolution, tout en permettant de surveiller une portion importante des alentours avec une résolution moindre.
Le dispositif optique selon l'invention ne requiert qu'un léger surdimensionnement de l'objectif par rapport à la matrice de capteurs optiques 103, et peut en particulier utiliser un objectif optique 101 à grand angle de facture classique. Le dispositif est donc invariant par rotation autour de l'axe optique Ox, et par conséquent aisé à mettre en place. En particulier, le dispositif optique 100 et le module de surveillance obtenu au moyen de ce dernier sont plus compacts et moins coûteux qu'une solution combinant deux caméras, une à grand angle et une à haute résolution, tout en permettant une observation à deux niveaux de résolution en simultané.

Claims

REVENDICATIONS
Dispositif optique pour l'observation d'un utilisateur (U) et d'un espace environnant l'utilisateur, comprenant :
° un objectif optique (101), définissant un axe optique (Ox) et un plan image,
° une matrice de capteurs optiques (103), disposée dans le plan image de l'objectif optique (101)
caractérisé en ce que :
0 l'objectif optique possède une distorsion variable spatialement, et
0 le centre de la matrice de capteurs optiques (103) est disposé de façon excentrée par rapport à l'axe optique de l'objectif optique (101).
Dispositif optique selon la revendication précédente, caractérisé en ce que le décalage (δ) entre le centre de l'objectif optique (101) et l'axe optique (Ox) est compris entre o,id et 0,7 d, d étant l'extension spatiale de la matrice de capteurs optiques (103) dans le plan d'image
Dispositif optique selon l'une quelconque des revendications précédentes, caractérisé en ce que la distorsion de l'objectif optique (101) est en barillet et croissante avec l'écart des rayons incidents par rapport à l'axe optique (Ox).
Dispositif optique selon l'une quelconque des revendications précédentes, caractérisé en ce que la matrice de capteurs optiques (103) est une matrice rectangulaire de capteurs optiques (103) de diagonale d.
Dispositif optique selon l'une quelconque des revendications précédentes, caractérisé en ce que l'objectif optique (101) comporte une portion de haute résolution (HD), et une portion annulaire (LD) de résolution moindre entourant la portion de haute résolution.
6. Dispositif optique selon la revendication 5, caractérisé en ce que la résolution dans la zone de résolution haute est supérieure à une valeur de résolution haute (RKO) comprise entre trois et dix pixels par degré d'angle.
7. Dispositif optique selon l'une des revendications 5 ou 6, caractérisé en ce que la résolution dans la zone annulaire est comprise entre une valeur basse (Ri.n) valant entre 0,3-1,0 pixels par degré d'angle et la valeur de résolution haute (Ri m) à la frontière avec la portion de haute résolution (HD).
8. Dispositif selon la revendication 7, caractérisé en ce que la matrice de capteurs optiques (103) est disposée avec un sommet du rectangle disposé sur le cercle d'image (11) correspondant à la valeur basse de résolution (Ri.n).
9. Module de surveillance de l'état d'attention du conducteur d'un véhicule et de détection de la présence d'un passager, caractérisé en ce qu'il comporte un dispositif optique (100) selon l'une quelconque des revendications 1 à 8, et en ce que l'axe optique (O.v) de l'objectif optique (101) est dirigé vers une position attendue du visage ou du buste du conducteur (U) ou d'un passager du véhicule.
10. Module de surveillance selon la revendication précédente, caractérisé en ce qu'il comporte en outre une unité de contrôle configurée pour isoler dans la portion de la matrice de capteurs optiques (103) contenue dans la portion de haute résolution des caractéristiques du visage du conducteur (U) telles que :
° la direction du regard du conducteur,
° l'état ouvert ou fermé des yeux du conducteur ( U),
° une fréquence de clignement des paupières du conducteur.
11. Module de surveillance selon la revendication 9, caractérisé en ce qu'il comporte en outre une unité de contrôle configurée pour isoler dans les images issues d'une portion de la matrice de capteurs optiques (103) contenue dans la portion annulaire basse résolution des caractéristiques du passager ou du conducteur (U) telles que :
° la présence ou l'absence de passager,
° la taille du passager, 0 la position des mains du conducteur,
0 la position du buste du conducteur.
12. Module de surveillance selon la revendication 9, caractérisé en ce qu'il comporte en outre une unité de contrôle configurée pour isoler dans les images issues de la matrice de capteurs optiques (103) des gestes spécifiques exécutés par le conducteur (U) et/ou le passager pour le contrôle de fonctions du véhicule.
EP18750152.3A 2017-07-31 2018-07-31 Dispositif optique pour l'observation d'un habitacle de véhicule Withdrawn EP3662315A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1757310A FR3069657A1 (fr) 2017-07-31 2017-07-31 Dispositif optique pour l'observation d'un habitacle de vehicule
PCT/EP2018/070803 WO2019025469A1 (fr) 2017-07-31 2018-07-31 Dispositif optique pour l'observation d'un habitacle de véhicule

Publications (1)

Publication Number Publication Date
EP3662315A1 true EP3662315A1 (fr) 2020-06-10

Family

ID=60888469

Family Applications (1)

Application Number Title Priority Date Filing Date
EP18750152.3A Withdrawn EP3662315A1 (fr) 2017-07-31 2018-07-31 Dispositif optique pour l'observation d'un habitacle de véhicule

Country Status (4)

Country Link
EP (1) EP3662315A1 (fr)
CN (1) CN110945400A (fr)
FR (1) FR3069657A1 (fr)
WO (1) WO2019025469A1 (fr)

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5835613A (en) * 1992-05-05 1998-11-10 Automotive Technologies International, Inc. Optical identification and monitoring system using pattern recognition for use with vehicles
JP3766145B2 (ja) * 1996-10-16 2006-04-12 株式会社日本自動車部品総合研究所 車室内状況検出装置
JP4658899B2 (ja) * 2006-10-24 2011-03-23 本田技研工業株式会社 車両の乗員検知装置
CN101930161B (zh) * 2009-08-28 2014-06-18 杭州普维光电技术有限公司 一种全景成像调整方法和装置以及全景成像装置
DE102010044449B4 (de) * 2009-12-31 2014-05-08 Volkswagen Ag Erkennen des Grades der Fahrfähigkeit des Fahrers eines Kraftfahrzeugs
DE102011089195A1 (de) * 2011-06-30 2013-01-03 Johnson Controls Gmbh Vorrichtung und Verfahren zur berührungslosen Erfassung von Gegenständen und/oder Personen und von diesen ausgeführten Gesten und/oder Bedienvorgängen
DE102013002111B4 (de) * 2013-02-08 2021-11-18 Mekra Lang Gmbh & Co. Kg Sichtsystem für Fahrzeuge, insbesondere Nutzfahrzeuge
US20150379362A1 (en) * 2013-02-21 2015-12-31 Iee International Electronics & Engineering S.A. Imaging device based occupant monitoring system supporting multiple functions
KR101537936B1 (ko) * 2013-11-08 2015-07-21 현대자동차주식회사 차량 및 그 제어방법
KR101534742B1 (ko) * 2013-12-10 2015-07-07 현대자동차 주식회사 차량용 제스처 인식 시스템 및 그 방법
US20160021309A1 (en) * 2014-07-21 2016-01-21 Honeywell International Inc. Image based surveillance system
US9533687B2 (en) * 2014-12-30 2017-01-03 Tk Holdings Inc. Occupant monitoring systems and methods
US10044932B2 (en) * 2015-03-13 2018-08-07 Sensormatic Electronics, LLC Wide angle fisheye security camera having offset lens and image sensor
US10829072B2 (en) * 2015-04-10 2020-11-10 Robert Bosch Gmbh Detection of occupant size and pose with a vehicle interior camera
DE102015213769A1 (de) * 2015-07-22 2017-01-26 Robert Bosch Gmbh Verfahren und Vorrichtung zum Prädizieren einer Blickrichtung eines Fahrzeuginsassen

Also Published As

Publication number Publication date
WO2019025469A1 (fr) 2019-02-07
CN110945400A (zh) 2020-03-31
FR3069657A1 (fr) 2019-02-01

Similar Documents

Publication Publication Date Title
JP7266165B2 (ja) 撮像装置、撮像システム、および表示システム
EP3501898B1 (fr) Dispositif d'imagerie, système d'affichage et système d'imagerie
EP1923280A1 (fr) Capteur photosensible dans le domaine automobile
US20150294169A1 (en) Vehicle vision system with driver monitoring
WO2010050012A1 (fr) Module de caméra monté sur un véhicule
FR2711593A1 (fr) Dispositif de surveillance de l'espace arrière, respectivement avant d'un véhicule automobile en manÓoeuvre de stationnement.
FR2886415A1 (fr) Module de formation d'image
FR2947781A1 (fr) Dispositif de saisie de donnees d'image pour un vehicule automobile
EP1713017A1 (fr) Procédé, dispositif et caméra pour la détection d'objets à partir d'images numériques
FR2999852A1 (fr) Module de camera et systeme de surveillance dote de celui-ci
US11062149B2 (en) System and method for recording images reflected from a visor
US9662979B2 (en) Method for presenting safety information, driver assistance system and motor vehicle
FR3016573B1 (fr) Installation de retroviseur de vehicule
US11975609B1 (en) Systems and methods for selective steering wheel transparency and control of the same
EP3655290B1 (fr) Caméra à bas coût
EP3662315A1 (fr) Dispositif optique pour l'observation d'un habitacle de véhicule
FR3130732A1 (fr) Procédé pour déterminer l’attention d’un conducteur dans un véhicule circulant de manière partiellement autonome
WO2010037795A1 (fr) Procédé de commande et système d'aide à la conduite associé
FR3035519B1 (fr) Dispositif d'affichage pour vehicule automobile
EP3602253B1 (fr) Système de transparence pour caméra banalisée
FR3099104A1 (fr) Dispositif d’observation de rétroviseur extérieur de véhicule
FR3107483A1 (fr) Vehicule avec retrovision numerique a affichage reglable
KR20170001984A (ko) 차량용 후방 관제 시스템
KR102588904B1 (ko) 차량에 설치되는 인캐빈 안전센서
JP2020162021A (ja) 多方向同時モニタリング装置

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20200117

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20200922