FR2902381A1 - Fusion d'images entre un systeme de navigation et un systeme de vision de nuit - Google Patents
Fusion d'images entre un systeme de navigation et un systeme de vision de nuit Download PDFInfo
- Publication number
- FR2902381A1 FR2902381A1 FR0652550A FR0652550A FR2902381A1 FR 2902381 A1 FR2902381 A1 FR 2902381A1 FR 0652550 A FR0652550 A FR 0652550A FR 0652550 A FR0652550 A FR 0652550A FR 2902381 A1 FR2902381 A1 FR 2902381A1
- Authority
- FR
- France
- Prior art keywords
- image
- night vision
- vehicle
- vision system
- road
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004297 night vision Effects 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000015572 biosynthetic process Effects 0.000 title claims abstract description 23
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 18
- 238000001514 detection method Methods 0.000 claims description 13
- 230000004927 fusion Effects 0.000 claims description 11
- 238000002513 implantation Methods 0.000 claims description 4
- 230000004438 eyesight Effects 0.000 claims description 2
- 238000004519 manufacturing process Methods 0.000 claims description 2
- 238000004321 preservation Methods 0.000 claims 1
- 230000004313 glare Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000004397 blinking Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005764 inhibitory process Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/30—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/106—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using night vision cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
- B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/302—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
- B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/804—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/8053—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for bad weather conditions or night vision
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Navigation (AREA)
Abstract
- Le véhicule comprend un système de navigation routière (SNR), un système de vision de nuit (SVN) avec une caméra située à l'avant du véhicule, un module électronique de fusion d'images (MOF) et un écran intérieur (E) destiné au conducteur.- Le procédé comporte les étapes suivantes : détection de la localisation de la zone de la scène routière vue par le dispositif de formation d'images, réalisation d'une image de synthèse correspondant à ladite zone de la scène routière localisée, et fusion de l'image captée par le dispositif de formation d'images et de ladite image de synthèse, le résultat de ladite fusion étant affiché sur l'écran du véhicule.- Véhicules automobiles. Systèmes de navigation routière. Systèmes de vision de nuit pour véhicules. Systèmes d'aide à la conduite des véhicules automobiles.
Description
PROCEDE D'AIDE A LA CONDUITE ROUTIERE DE NUIT, ET DISPOSITIF POUR LA MISE
EN îUVRE D'UN TEL PROCEDE SUR UN VEHICULE. La présente invention concerne un procédé d'aide à la navigation routière de nuit. Elle concerne également un dispositif pour la mise en oeuvre d'un tel procédé sur un véhicule, en particulier un véhicule automobile. Des systèmes de navigation routière permettent d'avoir à l'écran des images représentant des lieux précis sur un parcours donné : ce sont, par exemple, les nouveaux systèmes de navigation GPS avec des images à trois dimensions (ou images 3D). Des images numériques sont composées à partir de données cartographiques, à la manière des solutions classiques en 3D pour le cinéma, permettant d'avoir des informations détaillées sur chaque portion de route. Il existe également, sur certains véhicules automobiles de haut de gamme , des systèmes de vision de nuit , qui utilisent une caméra plus sensible que l'oeil humain pour filmer la scène à l'avant du véhicule, et qui restituent cette image au conducteur sur un écran. L'objectif de ces systèmes est de pouvoir conduire la nuit, ou par conditions de visibilité réduite (pluie, neige, brouillard,...) avec une visibilité plus élevée que celle offerte par les phares, tout en évitant l'éblouissement. Ces systèmes rendent accessibles au conducteur des informations sur la scène routière qu'il ne perçoit pas ou perçoit moins bien en regardant la route, mais qu'il a la possibilité de voir s'il regarde l'écran, comme, par exemple, la présence d'un piéton sur les bas côtés de la route ou bien un profil de route au loin. Ainsi, le brevet d'invention français n 2 854 251 décrit un dispositif d'aide à la conduite d'un véhicule comportant un moyen de prise de vues et un moyen de projection d'une image virtuelle dans le champ de vision du conducteur. Ce dispositif comprend également un écran opaque placé dans le champ de vision du conducteur pour la formation d'une image virtuelle projetée à l'infini dans le champ de vision du conducteur du véhicule, et des moyens pour la filtration des zones de forte intensité lumineuse (analyseur d'image incidente qui commande un moyen d'inhibition des zones dont la luminosité dépasse une valeur seuil). La demande de brevet d'invention des Etats-Unis d'Amérique n 2002/0191388 décrit un procédé de protection contre les éblouissements de la route, selon lequel on éclaire la route avec des impulsions de lumière plus courtes que la période obtenue en divisant la distance observée d'éblouissement en avant du véhicule par la vitesse de la lumière, on fixe la même période entre des impulsions lumineuses pour tous les véhicules, on divise cette période en un nombre prédéterminé d'intervalles avec une durée également prédéterminée pour chaque intervalle, on assigne chaque intervalle de temps prédéterminé à un groupe de véhicules donné, on règle la précision de ladite période entre des impulsions lumineuses pour qu'elle soit égale à au moins le rapport entre la durée d'un intervalle de repos divisé par le temps nécessaire au véhicule pour parcourir ladite distance d'éblouissement. Les demandes de brevet d'invention des Etats-Unis d'Amérique n 2005/0065721 et 2004/0236506 concernent des systèmes qui affichent dans une image vidéo de la scène routière (acquise par une caméra installée sur le véhicule) des consignes issues du système de navigation. Dans tous ces systèmes sur écran de l'art antérieur, il s'agit soit d'améliorer le fonctionnement des systèmes de navigation par l'incrustation des consignes de guidage dans une image de la scène routière, soit d'améliorer les performances des systèmes d'aide à la vision de nuit par l'adjonction de dispositifs anti-éblouissement. Le but de la présente invention est d'aller plus loin dans le perfectionnement des systèmes de navigation routière et d'aide à la vision nocturne, connus de l'art antérieur, en concevant un nouveau procédé d'aide à la conduite routière de nuit.
Un autre but de la présente invention est de concevoir un tel procédé nouveau d'aide à la conduite routière de nuit, qui utilise des images de synthèse 3D. Un autre but également de la présente invention est de réaliser un dispositif pour la mise en oeuvre d'un tel nouveau procédé, qui assure les fonctions d'aide à la vision de nuit et d'aide à la navigation routière, simultanément, avec un nombre minimal d'organes, de pièces et d'équipements automobiles.
C'est également un but de la présente invention de réaliser un tel dispositif qui soit de montage et d'utilisation simple, fiable et économique. Pour atteindre ces buts, le nouveau procédé d'aide à la conduite routière de nuit est mis en oeuvre sur un véhicule comprenant un système de navigation routière, un système de vision de nuit comportant un dispositif de formation d'images situé à l'avant du véhicule et un écran intérieur destiné au conducteur, et ledit procédé comporte les étapes suivantes, prises en combinaison : - détection de la localisation de la zone de la scène routière vue par le dispositif de formation d'images, -réalisation d'une image de synthèse (image 3D) correspondant à ladite zone de la scène routière localisée, et - fusion de l'image captée par le dispositif de formation d'images et de ladite image de synthèse, le résultat de ladite fusion étant affiché sur ledit écran du véhicule, de manière à permettre au conducteur d'utiliser simultanément les fonctions des deux systèmes sur un seul écran. Selon un mode de réalisation préféré de l'invention, la détection de la localisation de la zone de la scène routière vue par le dispositif de formation d'images est obtenue à partir des données sur la position dans l'espace du dispositif de formation d'images, complétées par des informations sur le roulis et le tangage du véhicule.
Selon ce mode de réalisation préféré également, la réalisation d'une image de synthèse correspondant à ladite zone de la scène routière localisée est obtenue à partir de la position du véhicule calculée par le système de navigation routière, et à partir de données mémorisées sur l'environnement en trois dimensions de ladite zone. De manière préférentielle, la fusion de l'image captée par le dispositif de formation d'images et de ladite image de synthèse comporte les étapes suivantes : - superposition de ladite image captée et de ladite image de synthèse, - détection des éléments identiques dans les deux images, - conservation des éléments de l'environnement qui 15 viennent de la cartographie, - adjonction d'informations supplémentaires issues du système de vision de nuit qui se trouvent sur la route. De préférence, les données sur la position dans l'espace du dispositif de formation d'images comprennent les 20 données suivantes relatives au dispositif de formation d'images : données sur son implantation géométrique sur le véhicule, angles d'orientation d'ouverture horizontal et vertical, De préférence également, la de son axe, angles résolution d'image. superposition de ladite 25 image captée et de ladite image de synthèse est réalisée en utilisant un algorithme connu en soi de détection d'éléments caractéristiques. De préférence aussi, l'adjonction d'informations supplémentaires issues du système de vision de nuit qui se 30 trouvent sur la route est réalisée avec une surbrillance. En variante, il est prévu un algorithme de détection des piétons, et la présence de piétons est mise en évidence par un moyen de clignotement et/ou une couleur différente. L'invention fournit également un dispositif d'aide à 35 la conduite routière avec vision de nuit pour la mise en oeuvre du procédé conforme au procédé exposé ci-dessus dans ses grandes lignes. Ce nouveau dispositif comprend un système de navigation routière, un système de vision de nuit comportant un dispositif de formation d'images situé à l'avant du véhicule, un écran intérieur destiné au conducteur, et un module de fusion d'images pour la fusion de l'image captée par le dispositif de formation d'images avec une image de synthèse calculée à partir du système de navigation. De préférence, ledit dispositif de formation d'images est constitué par au moins une caméra de vision de nuit, installée sur l'avant du véhicule (dans la calandre ou derrière le pare-brise). D'autres buts, avantages et caractéristiques de l'invention apparaîtront dans la description qui suit d'un mode de réalisation préféré, non limitatif de l'objet et de la portée de la présente demande de brevet, accompagnée de dessins dans lesquels : - la figure 1 est une représentation schématique d'un tableau de bord de véhicule automobile équipé d'un écran de système de navigation de type GPS classique et d'un écran de système de vision de nuit , - la figure 2 est un exemple schématique d'image de rendu réaliste en 3 dimensions pour indiquer l'itinéraire à suivre, - la figure 3 est une représentation schématique d'un tableau de bord de véhicule automobile équipé d'un système perfectionné de navigation routière de nuit, selon la présente invention, et - la figure 4 est un schéma fonctionnel simplifié de l'architecture du système de navigation perfectionné selon 30 la présente invention. Sur le dessin de la figure 1, on a représenté un tableau de bord de véhicule automobile équipé de deux écrans. Le premier écran, référencé 1, est l'écran d'un système de navigation routière classique, de type GPS (sigle 35 pour Global Positioning System ), affichant, de manière connue en soi, une cartographie et des tracés, des perspectives, des couleurs et des informations. Le second écran - référencé 2 - est l'écran d'un système dit de vision de nuit . Dans un système de vision de nuit, selon une première technologie, une caméra discrètement intégrée à l'avant du véhicule reçoit les images de projecteurs infra rouges réfléchies par la route ou, selon une deuxième technologie, une caméra capte le rayonnement thermique des éléments de la scène. Qu'il s'agisse de la première ou de la deuxième technologie, l'image est affichée sur l'écran. Sur l'écran 2, le résultat est semblable à une image vidéo très détaillée en blanc et noir, de la scène routière référencée Z. Comme déjà mentionné dans le préambule de la présente demande de brevet, des systèmes de navigation routière sont connus qui proposent des images de synthèse en trois dimensions (groupes d'immeubles, arbres, etc.), de façon à mieux indiquer au conducteur l'itinéraire à suivre. Un exemple schématisé d'une telle image 3D de rendu réaliste est donné par la figure 2, à titre d'illustration. On a représenté sur le dessin de la figure 3 un tableau de bord de véhicule automobile équipé d'un système perfectionné de navigation routière de nuit, selon la présente invention. L'écran 3 du tableau de bord de la figure 3 fait fonction d'écran pour les images fusionnées des deux systèmes, à savoir le système de navigation routière classique et le système de vision de nuit. La scène routière est également désignée, de façon générale, par la référence Z. L'architecture du système de l'invention est illustrée 30 par le schéma fonctionnel de la figure 4. Les images en provenance d'un système de navigation routière - référencé SNR -et les images en provenance d'un système de vision de nuit référencé SVN - sont fusionnées par un module de fusion - référencé MOF et le résultat de 35 la fusion est affiché sur un écran E du véhicule, qui peut être l'écran référencé 3 sur le dessin de la figure 3, ou un autre système de projection d'images selon un autre mode de réalisation. Ainsi, l'écran intérieur 3 peut être un écran classique de type LCD (acronyme de Liquid Cristal Display pour écran à cristaux liquides), par exemple, ou bien un système de projection d'images de type HUD (acronyme de Head Up Display pour affichage tête-haute ), par exemple. Une caméra de vision de nuit (non représentée sur les dessins) est discrètement intégrée à l'avant du véhicule. La position de cette caméra est caractérisée par son implantation géométrique sur le véhicule : à savoir les coordonnées en X, Y et Z du point d'implantation, les angles d'orientation de l'axe de la caméra, les angles d'ouverture horizontal et vertical, et la résolution d'image de la caméra (longueur x largeur en pixels). A partir de ces informations, complétées par des informations relatives au roulis (rotation autour de l'axe longitudinal) et au tangage (rotation autour de l'axe transversal) du véhicule issues de données fournies par des capteurs ou calculées par modélisation, on connaît avec précision la localisation de la zone Z de la scène routière vue par la caméra. Le système de navigation SNR, avec la position de localisation GPS du véhicule et les données mémorisées sur l'environnement en trois dimensions de la zone Z, peut calculer l'image de synthèse - désignée ISz - correspondant à la même zone Z que celle vue par la caméra de vision de nuit. L'étape suivante du procédé consiste à réaliser l'étape de fusion des images, à savoir à chaque instant l'image désignée Iz de la zone de scène routière Z fournie par la caméra et l'image ISz de synthèse qui correspond à la même zone Z de scène routière. Pour permettre une superposition précise des deux images, on peut utiliser un algorithme, connu en soi, de détection d'éléments caractéristiques : lignes de perspectives de la route, lignes verticales correspondant à des parois d'immeuble, des arbres, etc. La détection des mêmes éléments dans les deux images, Iz et ISzr permet de disposer d'informations pour recaler précisément les images. La fusion proprement dite des images consiste à conserver les éléments de l'environnement qui viennent de la cartographie et à ajouter avec une surbrillance importante les informations supplémentaires issues du système de vision de nuit qui se trouvent sur la route (éléments dynamiques de l'environnement). Si un algorithme de détection de piéton est disponible, les piétons, illustrés sur le dessin de la figure 3 et désignés 4, peuvent être encore davantage mis en évidence, par exemple en les faisant clignoter dans une couleur rouge. La présente invention concerne également un dispositif 15 pour la mise en oeuvre du procédé décrit ci-dessus. Ce dispositif d'aide à la navigation routière de nuit comprend un système de navigation routière SNR et un système de vision de nuit SVN. Le système SVN comporte un dispositif de formation d'images situé à l'avant du véhicule, et un 20 écran intérieur 3 destiné au conducteur. Le dispositif, selon la présente invention, comporte, de plus, un module (module électronique) de fusion d'images MOF (figure 4) pour la fusion de l'image captée Iz par le dispositif de formation d'images avec une image de synthèse ISz calculée à partir de 25 données fournies par le système de navigation routière SNR. Le dispositif de formation d'images est constitué par au moins une caméra de vision de nuit, installée sur l'avant du véhicule. Bien entendu, la présente invention n'est pas limitée 30 aux modes de réalisation décrits et représentés ci-dessus à titre d'exemples ; d'autres modes de réalisation peuvent être conçus par l'homme de métier sans sortir du cadre et de la portée de la présente invention.
Claims (13)
1. Procédé d'aide à la conduite routière de nuit mis en oeuvre sur un véhicule comprenant un système de navigation routière (SNR), un système de vision de nuit (SVN) comportant un dispositif de formation d'images situé à l'avant du véhicule, et un écran intérieur (3) destiné au conducteur, caractérisé en qu'il comporte les étapes suivantes, prises en combinaison : - détection de la localisation de la zone (Z) de la scène routière vue par le dispositif de formation d'images, - réalisation d'une image de synthèse (ISz) correspondant à ladite zone (Z) de la scène routière localisée, et - fusion de l'image (Iz) captée par le dispositif de formation d'images du système de vision de nuit (SVN) et de ladite image de synthèse (ISz), le résultat de ladite fusion étant affiché sur ledit écran (3) du véhicule, de manière à permettre au conducteur d'utiliser simultanément les fonctions des deux systèmes sur un seul écran (3).
2. Procédé selon la revendication 1, caractérisé en ce que la détection de la localisation de la zone (Z) de la scène routière vue par le dispositif de formation d'images est obtenue à partir des données sur la position du dispositif de formation d'images, complétées par des informations sur le roulis et le tangage du véhicule.
3. Procédé selon l'une quelconque des revendications 1 et 2, caractérisé en ce que la réalisation d'une image de synthèse (ISz) correspondant à ladite zone (Z) de la scène routière localisée est obtenue à partir de la position du véhicule calculée par le système de navigation routière (SNR), et à partir de données mémorisées sur l'environnement en trois dimensions de ladite zone (Z).
4. Procédé selon l'une quelconque des revendications 1 à 3, caractérisé en ce que la fusion de l'image captée (Iz)par le dispositif de formation d'images et de ladite image de synthèse (ISz) comporte les étapes suivantes : - superposition de ladite image captée (Iz) et de ladite image de synthèse (ISz), - détection des mêmes éléments dans les deux images, -conservation des éléments de l'environnement qui viennent de la cartographie, - adjonction d'informations supplémentaires issues du système de vision de nuit (SVN) qui se trouvent sur la 10 route.
5. Procédé selon la revendication 2, caractérisé en ce que les données sur la position du dispositif de formation d'images comprennent les données suivantes relatives au dispositif de formation d'images données sur son 15 implantation géométrique sur le véhicule, angles d'orientation de son axe, angles d'ouverture horizontal et vertical, résolution d'image.
6. Procédé selon la revendication 4, caractérisé en ce que la superposition de ladite image captée (Iz) et de ladite 20 image de synthèse (ISz) est réalisée en utilisant un algorithme de détection d'éléments caractéristiques.
7. Procédé selon la revendication 4, caractérisé en ce que l'adjonction d'informations supplémentaires issues du système de vision de nuit (SVN) qui se trouvent sur la route 25 est réalisée avec une surbrillance.
8. Procédé selon l'une quelconque des revendications 1 à 7, caractérisé en ce qu'il est prévu un algorithme de détection des piétons.
9. Procédé selon la revendication 1 et la 30 revendication 8, caractérisé en ce que la présence de piétons (4) est mise en évidence par un moyen de clignotement et une couleur différente.
10. Dispositif d'aide à la conduite routière de nuit pour la mise en oeuvre du procédé conforme à l'une quelconque 35 des revendications 1 à 9, comprenant un système de navigation routière (SNR), un système de vision de nuit (SVN) qui comporte un dispositif de formation d'images situéà l'avant du véhicule et un écran intérieur (3) destiné au conducteur, caractérisé en qu'il comporte, de plus, un module de fusion d'images (MOF) pour la fusion de l'image captée (Iz) par le dispositif de formation d'images avec une image de synthèse (ISz) calculée à partir de données fournies par le système de navigation routière (SNR).
11. Dispositif selon la revendication 10, caractérisé en ce que ledit dispositif de formation d'images est constitué par au moins une caméra de vision de nuit, installée sur la face avant du véhicule.
12. Dispositif selon la revendication 10, caractérisé en ce que ledit écran intérieur (3) est un écran de type LCD.
13. Dispositif selon la revendication 10, caractérisé 15 en ce que ledit écran intérieur (3) est un système de projection d'images de type HUD.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR0652550A FR2902381B1 (fr) | 2006-06-20 | 2006-06-20 | Fusion d'images entre un systeme de navigation et un systeme de vision de nuit |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR0652550A FR2902381B1 (fr) | 2006-06-20 | 2006-06-20 | Fusion d'images entre un systeme de navigation et un systeme de vision de nuit |
Publications (2)
Publication Number | Publication Date |
---|---|
FR2902381A1 true FR2902381A1 (fr) | 2007-12-21 |
FR2902381B1 FR2902381B1 (fr) | 2008-11-28 |
Family
ID=37763946
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
FR0652550A Expired - Fee Related FR2902381B1 (fr) | 2006-06-20 | 2006-06-20 | Fusion d'images entre un systeme de navigation et un systeme de vision de nuit |
Country Status (1)
Country | Link |
---|---|
FR (1) | FR2902381B1 (fr) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012019901A1 (fr) * | 2010-08-12 | 2012-02-16 | Valeo Schalter Und Sensoren Gmbh | Procédé d'affichage d'images sur un dispositif d'affichage, et système d'aide à la conduite |
CN102087116B (zh) * | 2009-12-08 | 2013-07-10 | 财团法人工业技术研究院 | 移动摄像机对路景图像的处理方法及系统 |
WO2016038639A1 (fr) * | 2014-09-08 | 2016-03-17 | Domenico Bacci | Système de sécurité pour véhicules |
WO2016120363A3 (fr) * | 2015-01-28 | 2016-09-29 | Valeo Schalter Und Sensoren Gmbh | Procédé de fonctionnement d'un système d'aide à la conduite d'un véhicule à moteur avec affichage de données environnementales dans un mode de conduite autonome, système d'aide à la conduite ainsi que véhicule à moteur |
FR3062742A1 (fr) * | 2017-02-07 | 2018-08-10 | Peugeot Citroen Automobiles Sa | Dispositif d’aide a la navigation routiere de nuit |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102055956B (zh) * | 2009-11-02 | 2017-05-10 | 通用汽车环球科技运作公司 | 车载三维视频系统及用其监测车辆周围环境的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0406946A1 (fr) * | 1989-07-04 | 1991-01-09 | Koninklijke Philips Electronics N.V. | Procédé pour reproduire des données de navigation pour un véhicule dans une image du voisinage du véhicule, système de navigation pour la mise en oeuvre de ce procédé et véhicule muni d'un système de navigation |
DE19546391A1 (de) * | 1994-12-12 | 1996-06-13 | Hisatsugu Nakamura | Bewegliche interakitv eingesetzte Arbeitsstation |
WO1999054848A1 (fr) * | 1998-04-17 | 1999-10-28 | Magellan Dis, Inc. | Affichage tridimensionnel d'une intersection pour systeme de navigation d'un vehicule |
US20040066376A1 (en) * | 2000-07-18 | 2004-04-08 | Max Donath | Mobility assist device |
-
2006
- 2006-06-20 FR FR0652550A patent/FR2902381B1/fr not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0406946A1 (fr) * | 1989-07-04 | 1991-01-09 | Koninklijke Philips Electronics N.V. | Procédé pour reproduire des données de navigation pour un véhicule dans une image du voisinage du véhicule, système de navigation pour la mise en oeuvre de ce procédé et véhicule muni d'un système de navigation |
DE19546391A1 (de) * | 1994-12-12 | 1996-06-13 | Hisatsugu Nakamura | Bewegliche interakitv eingesetzte Arbeitsstation |
WO1999054848A1 (fr) * | 1998-04-17 | 1999-10-28 | Magellan Dis, Inc. | Affichage tridimensionnel d'une intersection pour systeme de navigation d'un vehicule |
US20040066376A1 (en) * | 2000-07-18 | 2004-04-08 | Max Donath | Mobility assist device |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102087116B (zh) * | 2009-12-08 | 2013-07-10 | 财团法人工业技术研究院 | 移动摄像机对路景图像的处理方法及系统 |
WO2012019901A1 (fr) * | 2010-08-12 | 2012-02-16 | Valeo Schalter Und Sensoren Gmbh | Procédé d'affichage d'images sur un dispositif d'affichage, et système d'aide à la conduite |
CN103140377A (zh) * | 2010-08-12 | 2013-06-05 | 法雷奥开关和传感器有限责任公司 | 用于在显示装置上显示图像的方法和驾驶员辅助系统 |
CN103140377B (zh) * | 2010-08-12 | 2016-09-07 | 法雷奥开关和传感器有限责任公司 | 用于在显示装置上显示图像的方法和驾驶员辅助系统 |
WO2016038639A1 (fr) * | 2014-09-08 | 2016-03-17 | Domenico Bacci | Système de sécurité pour véhicules |
WO2016120363A3 (fr) * | 2015-01-28 | 2016-09-29 | Valeo Schalter Und Sensoren Gmbh | Procédé de fonctionnement d'un système d'aide à la conduite d'un véhicule à moteur avec affichage de données environnementales dans un mode de conduite autonome, système d'aide à la conduite ainsi que véhicule à moteur |
FR3062742A1 (fr) * | 2017-02-07 | 2018-08-10 | Peugeot Citroen Automobiles Sa | Dispositif d’aide a la navigation routiere de nuit |
WO2018146401A1 (fr) | 2017-02-07 | 2018-08-16 | Psa Automobiles Sa | Dispositif d'aide a la navigation routiere de nuit. |
Also Published As
Publication number | Publication date |
---|---|
FR2902381B1 (fr) | 2008-11-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3300942B1 (fr) | Procédé de projection d'images par un système de projection d'un véhicule automobile, et système de projection associé | |
EP1810907B1 (fr) | Procédé de réglage de l'orientation d'une caméra installée dans un véhicule et système de mise ene oeuvre de ce procédé | |
EP1724153B1 (fr) | Dispositif d'éclairage ou de signalisation de véhicule automobile | |
FR2993509A1 (fr) | Dispositif electronique de protection contre l'eblouissement d'un pilote ou d'un conducteur. | |
EP2133237B1 (fr) | Procédé d'affichage d'aide au parking | |
FR2902381A1 (fr) | Fusion d'images entre un systeme de navigation et un systeme de vision de nuit | |
FR3056490A1 (fr) | Procede de projection d'une image par un systeme de projection d'un vehicule automobile, et systeme de projection associe | |
FR2952599A1 (fr) | Systeme d'assistance du conducteur d'un vehicule automobile | |
CN116249632A (zh) | 用于使用门控成像来控制照明的设备、系统和方法 | |
FR2785434A1 (fr) | Procede d'aide a la conduite d'un vehicule et dispositif de mise en oeuvre | |
EP0667550A1 (fr) | Dispositif de visualisation d'informations pour conducteur routier | |
FR2965956A1 (fr) | Procede et dispositif de representation optique de l'environnement d'un vehicule | |
FR2942064A1 (fr) | Procede et systeme pour alerter un conducteur de vehicule | |
EP3488380B1 (fr) | Procédé de détermination d'un niveau d'éblouissement d'un conducteur de véhicule automobile | |
WO2015075402A1 (fr) | Système et procédé de formation d'images nocturnes pour un véhicule automobile | |
FR3056771A1 (fr) | Dispositif d'assistance a la conduite de vehicule automobile | |
FR2854251A1 (fr) | Dispositif d'aide a la conduite | |
WO2020007624A1 (fr) | Dispositif de retrovision panoramique par cameras avec affichage tete-haute | |
EP3494412B1 (fr) | Système d'aide visuelle à la conduite | |
FR3062742A1 (fr) | Dispositif d’aide a la navigation routiere de nuit | |
FR2893573A1 (fr) | Procede de deection d'obstacles mis en oeuvre au sein d'un vehicule automobile. | |
FR3060775A1 (fr) | Procede pour determiner une zone d'affichage d'un element dans un dispositif d'affichage | |
FR2937775A1 (fr) | Procede de detection d'un objet cible pour vehicule automobile | |
FR3056533A1 (fr) | Dispositif d'aide a l'orientation des roues d'un vehicule | |
FR3061113A1 (fr) | Procede de pilotage d’un systeme de video-retroviseur pour vehicule automobile |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
ST | Notification of lapse |
Effective date: 20140228 |