FR3048110A1 - METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE - Google Patents

METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE Download PDF

Info

Publication number
FR3048110A1
FR3048110A1 FR1651522A FR1651522A FR3048110A1 FR 3048110 A1 FR3048110 A1 FR 3048110A1 FR 1651522 A FR1651522 A FR 1651522A FR 1651522 A FR1651522 A FR 1651522A FR 3048110 A1 FR3048110 A1 FR 3048110A1
Authority
FR
France
Prior art keywords
image
passenger compartment
vehicle
living
forgotten
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
FR1651522A
Other languages
French (fr)
Inventor
Xavier Morel
Antoine Boilevin
Thierry Fleurence
Nicolas Boiroux
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Valeo Vision SAS
Original Assignee
Valeo Vision SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Vision SAS filed Critical Valeo Vision SAS
Priority to FR1651522A priority Critical patent/FR3048110A1/en
Publication of FR3048110A1 publication Critical patent/FR3048110A1/en
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60HARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00735Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models
    • B60H1/00742Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models by detection of the vehicle occupants' presence; by detection of conditions relating to the body of occupants, e.g. using radiant heat detectors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/593Recognising seat occupancy

Abstract

La présente invention concerne un dispositif de détection d'un objet ou d'un être vivant, tel qu'une personne ou un animal, potentiellement oublié dans l'habitacle d'un véhicule automobile. Le dispositif comporte: - au moins un capteur (10) pour capturer au moins une image de l'intérieur de l'habitacle du véhicule, dite image d'habitacle; - des moyens d'analyse (11) pour analyser l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle; et - des moyens de commande (12) pour, en cas de détection positive, déclencher une action informant le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.The present invention relates to a device for detecting an object or a living being, such as a person or an animal, potentially forgotten in the passenger compartment of a motor vehicle. The device comprises: at least one sensor (10) for capturing at least one image of the interior of the passenger compartment of the vehicle, said passenger compartment image; - analysis means (11) for analyzing the passenger compartment image so as to detect the presence of an object or a living being potentially forgotten in the passenger compartment; and control means (12) for, in the event of positive detection, triggering an action informing the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment.

Description

PROCEDE ET DISPOSITIF DE DETECTION D'UN OBJET OUBLIE DANS L'HABITACLEMETHOD AND DEVICE FOR DETECTION OF A FORGOTTEN OBJECT IN THE HABITACLE

D'UN VEHICULEOF A VEHICLE

Domaine techniqueTechnical area

La présente invention se concerne le domaine de la détection d'objets ou d'êtres vivants oubliés dans l'habitacle d'un véhicule automobile.The present invention relates to the field of the detection of objects or living beings forgotten in the passenger compartment of a motor vehicle.

Etat de la techniqueState of the art

Lorsqu'un conducteur sort de son véhicule, il peut arriver que ce dernier oublie dans l'habitacle de son véhicule un objet, tel que par exemple un téléphone mobile (ou smart phone en langue anglaise), ou un être vivant tel que par exemple un bébé ou un animal.When a driver leaves his vehicle, it may happen that the latter forgets in the cockpit of his vehicle an object, such as for example a mobile phone (or smart phone in English), or a living being such as for example a baby or an animal.

Cet oubli peut avoir des conséquences plus ou moins graves selon l'objet, la personne ou l'animal oublié. Ces conséquences peuvent être notamment très graves lorsqu'un bébé est oublié dans l'habitacle d'un véhicule stationné au soleil. De même, l'oubli d'un téléphone portable peut être fâcheux pour son propriétaire lorsqu'il attend un appel téléphonique ou un courriel important.This forgetfulness can have more or less serious consequences according to the object, the person or the animal forgotten. These consequences can be particularly serious when a baby is forgotten in the passenger compartment of a vehicle parked in the sun. Likewise, forgetting a mobile phone can be a nuisance for the owner when he is waiting for a phone call or an important email.

On connaît dans l'état de la technique une solution pour répondre au problème d'oubli d'un dispositif électronique portable dans l'habitacle d'un véhicule. Le brevet Américain US 8 941478 décrit un système comprenant un bus de données et un module de contrôle, tous les deux embarqués dans le véhicule. Le bus de données transmet de multiples données, notamment des événements indiquant que le conducteur est sorti du véhicule. Le module de contrôle communique avec le dispositif électronique portable et le bus de données. Dès que le module de contrôle reçoit un événement indiquant que le conducteur sort du véhicule, il détermine, via sa connexion avec le dispositif électronique portable, si ce dernier est à l'intérieur du véhicule. Si tel est le cas, le module de contrôle active un dispositif indicateur (actionnement de l'avertisseur sonore du véhicule, allumage de feux du véhicule...) pour avertir le conducteur de la présence du dispositif électronique portable est à l'intérieur du véhicule.It is known in the state of the art a solution to address the problem of forgetting a portable electronic device in the passenger compartment of a vehicle. US Pat. No. 8,914,778 describes a system comprising a data bus and a control module, both of which are embedded in the vehicle. The data bus transmits multiple data, including events indicating that the driver has exited the vehicle. The control module communicates with the portable electronic device and the data bus. As soon as the control module receives an event indicating that the driver is leaving the vehicle, it determines, via its connection with the portable electronic device, if the latter is inside the vehicle. If this is the case, the control module activates an indicating device (actuation of the vehicle horn, ignition of vehicle lights, etc.) to warn the driver of the presence of the portable electronic device is inside the vehicle. vehicle.

Ce système a pour inconvénient de n'être applicable qu'à la détection de dispositifs électroniques qui, de plus, doivent être aptes à communiquer avec un module de commande du véhicule. Résumé de l'invention L'invention a pour but de proposer un dispositif apte à détecter tout type d'objets ou tout être vivant qui serait potentiellement oublié dans l'habitacle d'un véhicule. A cet effet, l'invention concerne un dispositif de détection d'un objet ou d'un être vivant, tel qu'une personne ou un animal, potentiellement oublié dans l'habitacle d'un véhicule automobile, ledit dispositif comportant: - au moins un capteur pour capturer au moins une image de l'intérieur de l'habitacle du véhicule, dite image d'habitacle; - des moyens d'analyse pour analyser l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle; et - des moyens de commande pour, en cas de détection positive, déclencher une action informant le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.This system has the disadvantage of being applicable only to the detection of electronic devices which, in addition, must be able to communicate with a control module of the vehicle. SUMMARY OF THE INVENTION The object of the invention is to propose a device capable of detecting any type of object or any living being that might be potentially forgotten in the passenger compartment of a vehicle. For this purpose, the invention relates to a device for detecting an object or a living being, such as a person or an animal, potentially forgotten in the passenger compartment of a motor vehicle, said device comprising: at least one sensor for capturing at least one image of the interior of the passenger compartment of the vehicle, said cabin image; analysis means for analyzing the passenger compartment image so as to detect the presence of an object or a living being potentially forgotten in the passenger compartment; and control means for, in the event of positive detection, triggering an action informing the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment.

Selon l'invention, le dispositif est basé sur la capture d'images de l'intérieur de l'habitacle du véhicule.According to the invention, the device is based on capturing images of the interior of the passenger compartment of the vehicle.

Selon un mode de réalisation particulier, le capteur est une caméra.According to a particular embodiment, the sensor is a camera.

Selon un mode de réalisation préférée, le capteur est un capteur apte à travailler dans le domaine des ondes submillimétriques (fréquence de l'ordre du térahertz).According to a preferred embodiment, the sensor is a sensor capable of working in the field of submillimeter waves (frequency of the terahertz order).

Selon un mode de réalisation particulier, les moyens d'analyse sont aptes à comparer le contenu de l'image d'habitacle avec le contenu d'une image de référence préenregistrée. L'image de référence est par exemple une image de l'habitacle vide.According to a particular embodiment, the analysis means are able to compare the contents of the cabin image with the contents of a prerecorded reference image. The reference image is for example an image of the empty cabin.

Selon un mode de réalisation particulier, les moyens d'analyse sont aptes à soustraire l'image de référence de l'image d'habitacle de manière à générer au moins une image dite de différence et à déterminer la présence d'un objet ou d'un être vivant potentiellement oublié à partir de ladite image de différence.According to a particular embodiment, the analysis means are able to subtract the reference image of the passenger compartment image so as to generate at least one so-called difference image and to determine the presence of an object or a living being potentially forgotten from the image of difference.

Selon un autre mode de réalisation, les moyens d'analyse sont aptes à appliquer une opération de segmentation à l'image d'habitacle et à l'image de référence de manière à diviser l'image d'habitacle et l'image de référence en une pluralité de zones et à déterminer la présence d'un objet ou d'un être vivant potentiellement oublié par comparaison des zones de l'image d'habitacle aux zones de l'image de référence.According to another embodiment, the analysis means are able to apply a segmentation operation to the cockpit image and to the reference image so as to divide the cabin image and the reference image. in a plurality of zones and to determine the presence of a potentially forgotten object or living being by comparing the areas of the cabin image with the zones of the reference image.

Selon un mode de réalisation particulier, le capteur est piloté par les moyens de commande et ces derniers déclenchent la capture et l'enregistrement de l'image de référence après déverrouillage du véhicule, avant ou lors de l'ouverture d'une porte latérale conducteur du véhicule. Ainsi, l'image de référence est capturée avant que le conducteur ne monte dans le véhicule.According to a particular embodiment, the sensor is controlled by the control means and the latter trigger the capture and registration of the reference image after unlocking the vehicle, before or during the opening of a driver's side door. of the vehicle. Thus, the reference image is captured before the driver gets into the vehicle.

Selon un mode de réalisation particulier, les moyens de commande déclenchent la capture de ladite au moins une image d'habitacle après verrouillage du véhicule. L'image à analyser est ainsi capturée lorsque le conducteur est sorti du véhicule et a verrouillé celui-ci. Eventuellement, les moyens de commande déclenchent la capture de ladite au moins une image d'habitacle à la fermeture d'une porte latérale conducteur. L'action pour informer le conducteur de l'oubli potentiel peut prendre différentes formes. Selon un mode de réalisation particulier, ladite action est l'une quelconque des actions suivantes: - éclairage de l'habitacle, - émission d'un signal sonore par le véhicule, - allumage des feux de changement de direction du véhicule, - envoi d'un message vers un téléphone du conducteur.According to a particular embodiment, the control means trigger the capture of said at least one cabin image after locking the vehicle. The image to be analyzed is captured when the driver has left the vehicle and locked it. Optionally, the control means trigger the capture of said at least one cockpit image when closing a conductive side door. The action to inform the driver of the potential forgetting can take different forms. According to a particular embodiment, said action is any of the following actions: - lighting of the passenger compartment, - emission of an audible signal by the vehicle, - lighting of the vehicle's direction-change lights, - sending of a message to a driver's phone.

Selon un mode de réalisation avantageux, les moyens d'analyse du dispositif de l'invention sont en outre aptes à déterminer la position dudit objet ou être vivant potentiellement oublié.According to an advantageous embodiment, the analysis means of the device of the invention are further able to determine the position of said object or living being potentially forgotten.

Dans ce mode de réalisation, l'action pour informer le conducteur comprend alors au moins l'une quelconque des actions suivantes: - éclairage, dans l'habitacle, de la zone où l'objet ou l'être vivant potentiellement oublié est présent, - envoi, vers un téléphone du conducteur, d'un message d'alerte incluant de préférence une image montrant la zone où l'objet ou l'être vivant potentiellement oublié est présent. L'invention concerne également un véhicule automobile comprenant un habitacle, lequel véhicule comprend un dispositif de détection tel que défini précédemment. L'invention concerne aussi un procédé de détection d'un objet ou d'un être vivant, tel qu'une personne ou un animal, potentiellement oublié dans l'habitacle d'un véhicule automobile, comportant au moins les étapes suivantes: - capture d'au moins une image de l'intérieur de l'habitacle du véhicule, dite image d'habitacle; - analyse de l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle; et - en cas de détection positive, déclenchement d'une action pour informer le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.In this embodiment, the action to inform the driver then comprises at least one of the following actions: lighting, in the cockpit, of the zone where the object or the potentially forgotten living being is present, - sending, to a phone of the driver, an alert message preferably including an image showing the area where the object or the potentially forgotten living being is present. The invention also relates to a motor vehicle comprising a passenger compartment, which vehicle comprises a detection device as defined above. The invention also relates to a method for detecting an object or a living being, such as a person or an animal, potentially forgotten in the passenger compartment of a motor vehicle, comprising at least the following steps: at least one image of the interior of the passenger compartment of the vehicle, said cabin image; - analysis of the cabin image so as to detect the presence of an object or a living being potentially forgotten in the cabin; and - in case of positive detection, triggering an action to inform the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment.

Selon un mode de réalisation particulier, l'analyse de l'image d'habitacle consiste à comparer le contenu de l'image d'habitacle avec le contenu d'une image de référence préenregistrée. L'analyse de l'image d'habitacle comprend les étapes suivantes: - soustraire l'image de référence de l'image d'habitacle de manière à générer au moins une image dite de différence; et - déterminer la présence d'un objet ou d'un être vivant potentiellement oublié à partir de ladite image de différence.According to a particular embodiment, the analysis of the cabin image consists in comparing the contents of the cabin image with the contents of a pre-recorded reference image. The analysis of the cabin image comprises the following steps: subtracting the reference image from the cabin image so as to generate at least one so-called difference image; and - determining the presence of an object or living being potentially forgotten from said difference image.

En variante, l'analyse de l'image d'habitacle comprend les étapes suivantes: - appliquer une opération de segmentation à l'image d'habitacle et à l'image de référence de manière à diviser l'mage d'habitacle et l'image de référence en une pluralité de zones, - déterminer la présence d'un objet ou d'un être vivant potentiellement oublié par comparaison des zones de l'image d'habitacle aux zones de l'image de référence.Alternatively, the analysis of the cockpit image comprises the following steps: - applying a segmentation operation to the cockpit image and the reference image so as to divide the cabin mage and the reference image in a plurality of zones, - determining the presence of a potentially forgotten object or living being by comparing the areas of the cabin image with the zones of the reference image.

Avantageusement, le procédé comporte des étapes de capture et d'enregistrement de l'image de référence lors de l'ouverture d'une porte latérale conducteur du véhicule.Advantageously, the method comprises steps of capturing and recording the reference image when opening a conductive side door of the vehicle.

Avantageusement, l'étape de capture de l'image d'habitacle est déclenchée à la fermeture d'une porte latérale conducteur ou en variante après le verrouillage du véhicule.Advantageously, the step of capturing the passenger compartment image is triggered when a driver's side door is closed or, alternatively, after the vehicle has been locked.

Selon un mode de réalisation avantageux, le procédé de l'invention comporte en outre une étape de détermination de la position dudit objet ou être vivant potentiellement oublié. L'action pour informer le conducteur de cette position comprend au moins l'une quelconque des actions suivantes: - éclairage de l'habitacle, - émission d'un signal sonore par le véhicule, - allumage des feux de changement de direction du véhicule, - envoi d'un message vers un téléphone du conducteur, - éclairage, dans l'habitacle, de la zone où l'objet ou l'être vivant potentiellement oublié est présent, - envoi, vers un téléphone du conducteur, d'une image montrant la zone où l'objet ou l'être vivant potentiellement oublié est présent. D'autres avantages pourront encore apparaître à l'homme du métier à la lecture des exemples ci-dessous, illustrés par les figures annexées, donnés à titre illustratif.According to an advantageous embodiment, the method of the invention further comprises a step of determining the position of said object or living being potentially forgotten. The action of informing the driver of this position shall include at least one of the following actions: - lighting of the passenger compartment, - sounding of the vehicle, - lighting of the vehicle direction-change lamps, - sending a message to a phone of the driver, - lighting, in the passenger compartment, of the area where the object or the potentially forgotten living being is present, - sending, to a telephone of the driver, an image showing the area where the object or living being potentially forgotten is present. Other advantages may still appear to those skilled in the art on reading the examples below, illustrated by the appended figures, given for illustrative purposes.

Brève description des figures - La figure 1 représente une vue schématique d'un dispositif conforme à l'invention; etBRIEF DESCRIPTION OF THE FIGURES FIG. 1 represents a schematic view of a device according to the invention; and

La figure 2 est un organigramme représentant les étapes du procédé de l'invention.Fig. 2 is a flowchart showing the steps of the method of the invention.

Description détaillée de l'inventionDetailed description of the invention

En référence à la figure 1, le dispositif de l'invention, référencé 1, comporte essentiellement: - un capteur 10, par exemple une caméra, pour capturer des images de l'intérieur de l'habitacle du véhicule, appelées images d'habitacle, - des moyens d'analyse 11 pour analyser les images d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle, et - des moyens de commande 12 pour, en cas de détection positive, déclencher une action informant le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.With reference to FIG. 1, the device of the invention, referenced 1, essentially comprises: a sensor 10, for example a camera, for capturing images of the interior of the passenger compartment of the vehicle, called cockpit images analysis means 11 for analyzing the passenger compartment images so as to detect the presence of an object or living being potentially forgotten in the passenger compartment, and control means 12 for, in the case of positive detection, trigger an action informing the driver of the vehicle of the presence of said object or living being potentially forgotten in the cockpit.

Le capteur 10 est de préférence disposée à un endroit de l'habitacle permettant d'avoir une vue d'ensemble de celui-ci. Le capteur 10 est par exemple disposé à proximité du rétroviseur intérieur du véhicule et/ou au niveau du plafonnier.The sensor 10 is preferably arranged at a location in the passenger compartment to have an overall view thereof. The sensor 10 is for example disposed near the vehicle rearview mirror and / or at the ceiling.

Le capteur est avantageusement un capteur apte à travailler dans le domaine des ondes submillimétriques correspondant à des fréquences de l'ordre du térahertz. Ce type de capteur est particulièrement adapté au domaine d'application de l'invention puisqu'elle est insensible à la luminosité du jour. Elle permet également de visualiser des objets à travers le tissu des sièges ou le tissu des vêtements. Un seul capteur suffit alors pour avoir une image d'ensemble de l'habitacle du véhicule.The sensor is advantageously a sensor capable of working in the submillimeter wave domain corresponding to terahertz frequencies. This type of sensor is particularly suited to the field of application of the invention since it is insensitive to the brightness of the day. It also allows you to view objects through the fabric of the seats or the fabric of the clothes. A single sensor is then sufficient to have an overall picture of the passenger compartment of the vehicle.

Bien entendu, il est possible d'utiliser d'autres types de capteurs ou caméras, par exemple une caméra thermique qui sera plus particulièrement adaptée à la détection d'êtres vivants ou une caméra classique opérant uniquement dans le domaine du visible.Of course, it is possible to use other types of sensors or cameras, for example a thermal camera which will be more particularly adapted to the detection of living beings or a conventional camera operating only in the visible range.

En variante, le dispositif peut comporter plusieurs capteurs, un capteur étant par exemple prévu pour capturer une image de la partie avant de l'habitacle comportant notamment le siège conducteur, le siège passager avant et la console centrale du véhicule et un autre capteur étant prévu pour capturer une image de la partie arrière de l'habitacle comportant notamment les sièges passagers arrière.Alternatively, the device may comprise several sensors, a sensor being for example designed to capture an image of the front part of the passenger compartment comprising in particular the driver's seat, the front passenger seat and the central console of the vehicle and another sensor being provided to capture an image of the rear part of the passenger compartment including the rear passenger seats.

Selon l'invention, le capteur 10 est piloté par les moyens de commande 12. Ces derniers déclenchent avantageusement la capture de l'image d'habitacle après verrouillage du véhicule, c'est-à-dire après que le conducteur soit sorti du véhicule. L'image capturée est transmise aux moyens d'analyse 11 pour détecter ou non la présence d'un objet ou d'un être vivant potentiellement oublié dans le véhicule.According to the invention, the sensor 10 is controlled by the control means 12. These advantageously trigger the capture of the passenger compartment image after locking the vehicle, that is to say after the driver has left the vehicle . The captured image is transmitted to the analysis means 11 to detect or not the presence of an object or a living being potentially forgotten in the vehicle.

Selon un mode de réalisation particulier, l'analyse consiste à comparer le contenu de l'image d'habitacle capturée avec le contenu d'une image de référence préenregistrée. L'image de référence est par exemple une image de l'habitacle vide. Cette image de référence est par exemple capturée par le capteur 10 après déverrouillage du véhicule mais avant ou lors de l'ouverture de la porte conducteur du véhicule. L'image de référence est ainsi capturée avant que le conducteur ne monte dans le véhicule. Cette capture de l'image de référence est déclenchée par les moyens de commande 12. L'analyse peut consister à soustraire l'image de référence de l'image d'habitacle de manière à générer une image dite de différence et à déterminer la présence d'un objet ou d'un être vivant potentiellement oublié à partir de l'image de différence. Toutes les zones de l'image de différence comportant des pixels dont le niveau est non nul et/ou supérieur à un seuil prédéfini sont susceptibles de correspondre à des zones de l'habitacle comportant des objets ou êtres vivants oubliés.According to a particular embodiment, the analysis consists in comparing the content of the captured cabin image with the content of a prerecorded reference image. The reference image is for example an image of the empty cabin. This reference image is for example captured by the sensor 10 after unlocking the vehicle but before or during the opening of the driver door of the vehicle. The reference image is thus captured before the driver gets into the vehicle. This capture of the reference image is triggered by the control means 12. The analysis may consist in subtracting the reference image of the passenger compartment image so as to generate a so-called difference image and to determine the presence of an object or living being potentially forgotten from the image of difference. All areas of the difference image having pixels whose level is non-zero and / or greater than a predefined threshold are likely to correspond to areas of the passenger compartment with objects or living beings forgotten.

Selon un autre mode de réalisation, les moyens d'analyse sont aptes à appliquer une opération de segmentation à l'image d'habitacle et à l'image de référence de manière à diviser ces deux images en une pluralité de zones et à déterminer la présence d'un objet ou d'un être vivant potentiellement oublié par comparaison des zones de l'image d'habitacle aux zones de l'image de référence.According to another embodiment, the analysis means are able to apply a segmentation operation to the cockpit image and to the reference image so as to divide these two images into a plurality of zones and to determine the presence of a potentially forgotten object or living being by comparing the areas of the cabin image with the zones of the reference image.

Le résultat de l'analyse est transmis aux moyens de commande 12. Si le résultat de l'analyse montre une différence entre l'image d'habitacle et l'image de référence, cela signifie que l'habitacle renferme un objet ou élément potentiellement oublié. Le conducteur est alors informé de cet oubli potentiel. Différentes actions peuvent être déclenchées par les moyens de commande 12 pour informer le conducteur de cet oubli : - éclairage de l'habitacle, - émission d'un signal sonore par le véhicule, par exemple en activant l'avertisseur sonore du véhicule, - allumage des feux de changement de direction du véhicule, - envoi d'un message vers un téléphone du conducteur.The result of the analysis is transmitted to the control means 12. If the result of the analysis shows a difference between the cockpit image and the reference image, it means that the cabin contains an object or element potentially forget it. The driver is then informed of this potential forgetting. Different actions can be triggered by the control means 12 to inform the driver of this omission: - illumination of the passenger compartment, - emission of an audible signal by the vehicle, for example by activating the audible alarm of the vehicle, - ignition vehicle direction change lights, - sending a message to a driver's phone.

Avantageusement, le conducteur est non seulement informé de cet oubli potentiel mais il est également informé de la position, au moins approximative, de l'objet oublié. Dans ce mode de réalisation, les moyens d'analyse 11 déterminent la position de l'objet potentiellement oublié en identifiant la zone de l'image d'habitacle comportant des différences avec l'image de référence (zone où les pixels de l'image de différence ont un niveau non nul ou supérieur à un seuil prédéfini). Cette position est transmise aux moyens de commande 12 qui déclenchent alors une action permettant au conducteur non seulement d'être informé de l'oubli potentiel mais aussi de connaître la position au moins approximative de l'objet oublié.Advantageously, the driver is not only informed of this potential forgetting but he is also informed of the position, at least approximate, of the forgotten object. In this embodiment, the analysis means 11 determine the position of the potentially forgotten object by identifying the area of the cabin image having differences with the reference image (area where the pixels of the image of difference have a non-zero level or greater than a predefined threshold). This position is transmitted to the control means 12 which then trigger an action allowing the driver not only to be informed of the potential forgetting but also to know the at least approximate position of the forgotten object.

Cette action est par exemple l'éclairage de la zone d'habitacle où l'objet potentiellement oublié est présent. Par exemple, dans le cas d'un véhicule équipé de liseuse au dessus de chaque siège, les moyens de commande 12 activent la liseuse du siège sur lequel ou à proximité duquel l'objet a été oublié.This action is for example the lighting of the cabin area where the potentially forgotten object is present. For example, in the case of a vehicle equipped with a reading lamp above each seat, the control means 12 activate the reading lamp of the seat on which or near which the object has been forgotten.

Cette action peut aussi être l'envoi, vers un téléphone du conducteur, d'un message d'alerte incluant de préférence une image montrant la zone où l'objet potentiellement oublié est présent. A cet effet, si la capture d'images pour l'analyse est opérée au moyen d'un capteur submillimétrique (Terahertz), l'image transmise est avantageusement une image capturée par un autre capteur (par exemple une caméra classique) sur laquelle l'objet oublié est plus facilement identifiable.This action can also be the sending, to a phone of the driver, an alert message preferably including an image showing the area where the potentially forgotten object is present. For this purpose, if the image capture for the analysis is performed by means of a submillimetric sensor (Terahertz), the image transmitted is advantageously an image captured by another sensor (for example a conventional camera) on which the forgotten object is more easily identifiable.

Le conducteur peut également être informé du type d'objet potentiellement oublié. Ce type peut être déterminé en appliquant un traitement de reconnaissance de forme ou de reconnaissance d'objet sur l'image d'habitacle capturée ou, le cas échéant, sur l'image de différence générée par les moyens d'analyse 11. Ce traitement permet d'indiquer au conducteur si l'objet est un téléphone mobile, une boite, une bouteille... L'invention concerne également un procédé dont les étapes sont illustrées par la figure 2. En référence à cette figure, le procédé comporte les étapes suivantes: - étape El : capture d'au moins une image de l'habitacle du véhicule; - étape E2 : analyse de l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle du véhicule; - étape E3 : en cas de détection positive, déclenchement d'une action pour informer le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.The driver can also be informed of the type of potentially forgotten object. This type can be determined by applying a shape recognition or object recognition process on the captured cabin image or, if appropriate, on the difference image generated by the analysis means 11. This treatment to indicate to the driver whether the object is a mobile phone, a box, a bottle, etc. The invention also relates to a method whose steps are illustrated in FIG. 2. With reference to this figure, the method comprises the following steps: step E1: capture of at least one image of the passenger compartment of the vehicle; step E2: analysis of the cabin image so as to detect the presence of an object or a potentially forgotten living being in the passenger compartment of the vehicle; - E3 step: in case of positive detection, triggering an action to inform the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment.

Comme mentionné précédemment, l'étape E2 peut consister à comparer le contenu de l'image d'habitacle avec le contenu d'une image de référence préenregistrée. Elle comprend alors les étapes suivantes: - soustraire l'image de référence de l'image d'habitacle de manière à générer au moins une image dite de différence; et - déterminer la présence d'un objet ou d'un être vivant potentiellement oublié à partir de ladite image de différence.As mentioned previously, step E2 may consist of comparing the contents of the cabin image with the contents of a pre-recorded reference image. It then comprises the following steps: subtracting the reference image from the cabin image so as to generate at least one so-called difference image; and - determining the presence of an object or living being potentially forgotten from said difference image.

Avantageusement, l'étape E2 comporte une étape additionnelle de détermination de la position de l'objet potentiellement oublié.Advantageously, step E2 comprises an additional step of determining the position of the potentially forgotten object.

Les modes de réalisation décrits ci-dessus ont été donnés à titre d'exemple. Il est évident pour l'homme de l'art qu'ils peuvent être modifiés, notamment quant aux moyens utilisés pour capturer les images d'habitacle et analyser les images capturées et quant aux actions déclenchées pour informer le conducteur de l'oubli potentiel d'un objet, d'une personne ou d'un animal dans l'habitacle de son véhicule.The embodiments described above have been given by way of example. It is obvious to those skilled in the art that they can be modified, especially as to the means used to capture the cockpit images and analyze captured images and actions triggered to inform the driver of the potential forgetting of an object, a person or an animal in the passenger compartment of his vehicle.

Claims (11)

REVENDICATIONS 1) Dispositif de détection d'un objet ou d'un être vivant, tel qu'une personne ou un animal, potentiellement oublié dans l'habitacle d'un véhicule automobile, comportant: - au moins un capteur (10) pour capturer au moins une image de l'intérieur de l'habitacle du véhicule, dite image d'habitacle; - des moyens d'analyse (11) pour analyser l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle; et - des moyens de commande (12) pour, en cas de détection positive, déclencher une action informant le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.1) Device for detecting an object or a living being, such as a person or an animal, potentially forgotten in the passenger compartment of a motor vehicle, comprising: - at least one sensor (10) for capturing at least one image of the interior of the passenger compartment of the vehicle, said cabin image; - analysis means (11) for analyzing the passenger compartment image so as to detect the presence of an object or a living being potentially forgotten in the passenger compartment; and control means (12) for, in the event of positive detection, triggering an action informing the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment. 2) Dispositif selon la revendication 1, caractérisé en ce que le capteur est une caméra.2) Device according to claim 1, characterized in that the sensor is a camera. 3) Dispositif selon la revendication 1 ou 2, caractérisé en ce que le capteur (10) est un capteur apte à travailler dans le domaine des ondes submillimétriques.3) Device according to claim 1 or 2, characterized in that the sensor (10) is a sensor capable of working in the field of submillimeter waves. 4) Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que les moyens d'analyse (11) sont aptes à comparer le contenu de l'image d'habitacle avec le contenu d'une image de référence préenregistrée.4) Device according to any one of the preceding claims, characterized in that the analysis means (11) are able to compare the contents of the passenger compartment image with the contents of a prerecorded reference image. 5) Dispositif selon la revendication précédente, caractérisé en ce que les moyens d'analyse (11) sont aptes à soustraire l'image de référence de l'image d'habitacle de manière à générer au moins une image dite de différence et à déterminer la présence d'un objet ou d'un être vivant potentiellement oublié à partir de ladite image de différence.5) Device according to the preceding claim, characterized in that the analysis means (11) are able to subtract the reference image of the passenger compartment image so as to generate at least one so-called difference image and to be determined the presence of an object or living being potentially forgotten from the difference image. 6) Dispositif selon la revendication 4 ou 5, dans lequel le capteur (10) est piloté par les moyens de commande et dans lequel les moyens de commande (12) déclenchent la capture et l'enregistrement de l'image de référence après déverrouillage du véhicule, avant ou lors de l'ouverture d'une porte latérale conducteur du véhicule.6) Device according to claim 4 or 5, wherein the sensor (10) is controlled by the control means and wherein the control means (12) trigger the capture and registration of the reference image after unlocking the vehicle, before or when opening a driver's side door of the vehicle. 7) Dispositif selon la revendication précédente, caractérisé en ce que les moyens de commande (12) déclenchent la capture de ladite au moins une image d'habitacle après verrouillage du véhicule.7) Device according to the preceding claim, characterized in that the control means (12) trigger the capture of said at least one cabin image after locking the vehicle. 8) Dispositif selon l'une quelconque des revendications précédentes, dans lequel les moyens d'analyse (11) sont aptes à déterminer la position dudit objet ou être vivant potentiellement oublié.8) Device according to any one of the preceding claims, wherein the analysis means (11) are able to determine the position of said object or living being potentially forgotten. 9) Dispositif selon la revendication précédente, dans lequel l'action pour informer le conducteur comprend au moins l'une quelconque des actions suivantes: - éclairage, dans l'habitacle, de la zone où l'objet ou l'être vivant potentiellement oublié est présent, - envoi, vers un téléphone du conducteur, d'un message d'alerte incluant de préférence une image montrant la zone où l'objet ou l'être vivant potentiellement oublié est présent.9) Device according to the preceding claim, wherein the action to inform the driver comprises at least one of the following actions: - lighting, in the passenger compartment, the area where the object or living being potentially forgotten is present, - sending, to a phone of the driver, an alert message preferably including an image showing the area where the object or the potentially forgotten living being is present. 10) Véhicule automobile comprenant un habitacle, dans lequel le véhicule comprend un dispositif de détection selon l'une quelconque des revendications précédentes.10) A motor vehicle comprising a passenger compartment, wherein the vehicle comprises a detection device according to any one of the preceding claims. 11) Procédé de détection d'un objet ou d'un être vivant, tel qu'une personne ou un animal, potentiellement oublié dans l'habitacle d'un véhicule automobile, comportant au moins les étapes suivantes: - capture (El) d'au moins une image de l'intérieur de l'habitacle du véhicule, dite image d'habitacle; - analyse (E2) de l'image d'habitacle de manière à détecter la présence d'un objet ou d'un être vivant potentiellement oublié dans l'habitacle; et - en cas de détection positive, déclenchement d'une action (E3) pour informer le conducteur du véhicule de la présence dudit objet ou être vivant potentiellement oublié dans l'habitacle.11) A method for detecting an object or a living being, such as a person or an animal, potentially forgotten in the passenger compartment of a motor vehicle, comprising at least the following steps: capture (El) d at least one image of the interior of the passenger compartment of the vehicle, said cabin image; - Analysis (E2) of the cabin image so as to detect the presence of an object or a living being potentially forgotten in the passenger compartment; and - in case of positive detection, triggering an action (E3) to inform the driver of the vehicle of the presence of said object or living being potentially forgotten in the passenger compartment.
FR1651522A 2016-02-24 2016-02-24 METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE Pending FR3048110A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR1651522A FR3048110A1 (en) 2016-02-24 2016-02-24 METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1651522A FR3048110A1 (en) 2016-02-24 2016-02-24 METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE

Publications (1)

Publication Number Publication Date
FR3048110A1 true FR3048110A1 (en) 2017-08-25

Family

ID=55590099

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1651522A Pending FR3048110A1 (en) 2016-02-24 2016-02-24 METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE

Country Status (1)

Country Link
FR (1) FR3048110A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019204632A1 (en) * 2019-04-02 2020-10-08 Audi Ag Method, warning device and motor vehicle for informing a user about an object located in the motor vehicle
EP3809323A1 (en) * 2019-10-18 2021-04-21 Denso Corporation Vehicle mounted system, vehicle control system and method
WO2023025707A1 (en) * 2021-08-23 2023-03-02 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Method for function control on a vehicle under consideration of a detected level of attention of a person in an interior of the vehicle

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110267186A1 (en) * 2010-04-29 2011-11-03 Ford Global Technologies, Llc Occupant Detection
US20150286882A1 (en) * 2014-04-03 2015-10-08 David Stuart Nicol Device, system and method for vehicle safety sensing and alerting

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110267186A1 (en) * 2010-04-29 2011-11-03 Ford Global Technologies, Llc Occupant Detection
US20150286882A1 (en) * 2014-04-03 2015-10-08 David Stuart Nicol Device, system and method for vehicle safety sensing and alerting

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019204632A1 (en) * 2019-04-02 2020-10-08 Audi Ag Method, warning device and motor vehicle for informing a user about an object located in the motor vehicle
EP3809323A1 (en) * 2019-10-18 2021-04-21 Denso Corporation Vehicle mounted system, vehicle control system and method
US11498457B2 (en) 2019-10-18 2022-11-15 Denso Corporation Vehicle mounted system, vehicle control system and method for monitoring an infant in a vehicle cabin
WO2023025707A1 (en) * 2021-08-23 2023-03-02 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Method for function control on a vehicle under consideration of a detected level of attention of a person in an interior of the vehicle

Similar Documents

Publication Publication Date Title
US10740631B2 (en) Enhanced vehicle monitoring
FR2975647A1 (en) METHOD AND DEVICE FOR WARNING OF TRAFFIC PARTICIPANTS
FR2919727A1 (en) METHOD FOR DETECTION BY A VEHICLE OF A VISIBILITY DISPERSING PHENOMENON
FR3048110A1 (en) METHOD AND DEVICE FOR DETECTING A FORGOTTEN OBJECT IN THE CABIN OF A VEHICLE
WO2018158163A1 (en) Device for determining the attentiveness of a driver of a vehicle, on-board system comprising such a device, and associated method
US20060244828A1 (en) Vehicle passenger occupancy alert system using passenger image recognition
EP1100050B1 (en) System and method of counting passengers for buses
EP3627467B1 (en) Method and device for detecting the state of a front bonnet of a motor vehicle by comparing fields of view
FR3078035A1 (en) VEHICLE ENVIRONMENT DETECTION SYSTEM
FR2837444A1 (en) Biometric monitoring circuit for motor vehicle occupants has video camera connected to security circuit to monitor drivers biometric facial parameters and sounds alarm if driver is not identified correctly
EP3752394B1 (en) Method for monitoring an environment of a parked motor vehicle comprising an asynchronous camera
JP6500692B2 (en) Vehicle security system, vehicle security method
FR3058970A1 (en) HANDS-FREE LOCKOUT OF A MOTOR VEHICLE
FR3099104A1 (en) Vehicle exterior mirror observation device
FR3086250A1 (en) ASSISTANCE PROCESS FOR THE OPERATION OF A REAR TAILGATE VEHICLE
FR3103612A1 (en) CONTROL OF THE AUDIBLE WARNING OF THIRD PARTY VEHICLES IN AREAS OF PROHIBITION OF THE USE OF THE AUDIBLE HORN
FR3100501A1 (en) PROCEDURE AND DEVICE FOR CONTROL OF A PARKED VEHICLE CONTAINING AT LEAST ONE PASSENGER
FR3120587A1 (en) Motor vehicle protection system
EP3554102B1 (en) Method for automatically establishing a wireless connection between a mobile terminal and a multimedia computer of a vehicle
FR3063356A1 (en) DEVICE FOR DISPLAYING A DISTRACTION STATUS LEVEL AND A SOMNOLENCE STATUS LEVEL.
FR3093971A1 (en) System for detecting the presence of a person occupying a vehicle seat
EP4296136A1 (en) Method for warning a driver of a motor vehicle after determining areas not monitored by the driver
EP4072921A1 (en) Method for driving an autonomous vehicle
FR3136421A1 (en) Method and device for controlling the opening of a trunk door of a vehicle to prevent an object from falling
WO2023002098A1 (en) Method and device for controlling the opening of a vehicle door

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20170825