WO2019031851A1 - 지도 제공 장치 - Google Patents

지도 제공 장치 Download PDF

Info

Publication number
WO2019031851A1
WO2019031851A1 PCT/KR2018/009046 KR2018009046W WO2019031851A1 WO 2019031851 A1 WO2019031851 A1 WO 2019031851A1 KR 2018009046 W KR2018009046 W KR 2018009046W WO 2019031851 A1 WO2019031851 A1 WO 2019031851A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
vehicle
map
processor
electrical component
Prior art date
Application number
PCT/KR2018/009046
Other languages
English (en)
French (fr)
Inventor
김성민
김지현
이진상
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US16/637,598 priority Critical patent/US11513531B2/en
Publication of WO2019031851A1 publication Critical patent/WO2019031851A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/44—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for communication between vehicles and infrastructures, e.g. vehicle-to-cloud [V2C] or vehicle-to-home [V2H]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001—Planning or execution of driving tasks
    • B60W60/0025—Planning or execution of driving tasks specially adapted for specific operations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005—Handover processes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • G01C21/30—Map- or contour-matching
    • G01C21/32—Structuring or formatting of map data
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/3407—Route searching; Route guidance specially adapted for specific applications
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
    • G01C21/3863—Structures of map data
    • G01C21/387—Organisation of map data, e.g. version management or database structures
    • G01C21/3881—Tile-based structures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
    • G01C21/3885—Transmission of map data to client devices; Reception of map data by client devices
    • G01C21/3889—Transmission of selected map data, e.g. depending on route
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0044—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with a computer generated representation of the environment of the vehicle, e.g. virtual reality, maps
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0055—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements
    • G05D1/0061—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00—Maps; Plans; Charts; Diagrams, e.g. route diagram
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle

Definitions

  • the present invention relates to a map providing apparatus, and more particularly, to a map providing apparatus mounted on a vehicle and providing map data to a plurality of electric products provided in the vehicle.
  • a vehicle means a means of transporting people or goods by using kinetic energy.
  • Typical examples of vehicles include automobiles and motorcycles.
  • the function of the vehicle can be divided into a convenience function for the convenience of the driver and a safety function for the safety of the driver and / or the pedestrian.
  • the convenience function has the motive for development related to driver convenience, such as providing infotainment (information + entertainment) function to the vehicle, supporting partial autonomous driving function, assisting driver's vision such as night vision or blind spot .
  • driver convenience such as providing infotainment (information + entertainment) function to the vehicle, supporting partial autonomous driving function, assisting driver's vision such as night vision or blind spot .
  • ACC active cruise control
  • SPAS smart parking assist system
  • NV night vision
  • HUD head up display
  • AHS adaptive headlight system
  • the safety function is to secure the safety of the driver and / or pedestrians.
  • LDWS lane departure warning system
  • LKAS lane keeping assist system
  • AEB autonomous emergency braking
  • V2I Vehicle to Infrastructure
  • V2V Vehicle to Vehicle
  • V2X Vehicle to Everything
  • ADAS Advanced Driving Assist System
  • ADASIS Advanced Driver Assist System Interface Specification
  • EHorizon which provides map data to a plurality of electric equipments provided in a vehicle, is an essential element for autonomous driving of a vehicle.
  • the vehicle downloads various maps from the server and uses them, and transmits various information sensed by the electric equipments provided in the vehicle to the server.
  • the server manages the information received from the vehicle as big data, and maintains the currentness of the maps it has.
  • the present invention is directed to solving the above-mentioned problems and other problems.
  • the present invention relates to a map providing apparatus mounted on a vehicle and providing map data to a plurality of electric products provided in the vehicle.
  • the map providing apparatus includes: a communication unit configured to communicate with the electrical components, the communication unit configured to receive an original map including a plurality of layers from a server; And a processor for calculating the reliability of the electrical component information using the electrical component information received from at least one of the electrical components and the original map, and performing control related to the electrical component information based on the reliability.
  • the processor when the reliability satisfies a preset condition, the processor generates a machining map from the original map using the electrical component information, and the machining map is provided to the electrical components Can be controlled.
  • the processor may select at least one of the original map and the electrical product information based on the reliability, and generate the machining map using the selected information.
  • the information not selected by the processor among the original map and the electrical product information may not be included in the machining map.
  • the processor selects at least one of the plurality of layers included in the original map based on the electrical component information, and selects one or more of the plurality of layers not selected by the processor
  • the layers may be excluded from the machining map.
  • the original map includes a plurality of dynamic objects to be sensed by at least one electrical component
  • the processor may include at least one of the plurality of dynamic objects included in the original map, One or more dynamic objects not selected by the processor among the plurality of dynamic objects may be excluded from the machining map.
  • the electrical component information includes first electrical component information received from the first electrical component and second electrical component information received from the second electrical component, wherein the processor is configured to determine the first reliability of the first electrical component information, The second reliability of the second electrical component information is calculated. In generating the machining map, different weights can be given to the first electrical component information and the second electrical component information in consideration of the first reliability and the second reliability have.
  • the original map includes a plurality of dynamic objects to be sensed by at least one electrical component
  • the electrical component information includes a plurality of local objects sensed by at least one electrical component
  • the reliability can be calculated using the dynamic objects and the local objects.
  • the processor may modify the original map using the local objects when the reliability meets a predetermined condition.
  • the processor can move at least one of the reference point and the reference axis of the original map using the local objects.
  • the processor classifies the dynamic objects into a first group that matches the local objects and a second group that does not match the local objects, and when the reliability satisfies the predetermined condition , The dynamic objects included in the second group can be modified.
  • the processor may cause the local object information about the one or more local objects to be transmitted to the server So that the communication unit can be controlled.
  • the processor may control the communication unit to transmit the local object information to another vehicle when there are one or more local objects among the local objects that do not match the dynamic objects .
  • the local object information may include an image capturing the one or more local objects, and location information for guiding the one or more local objects.
  • the processor generates a predicted path, in which the vehicle is expected to or should be moved, and if there is one or more local objects of the local objects that do not match the dynamic objects, The prediction path can be changed to a new prediction path.
  • the processor may control the communication unit such that, when the predicted path is changed to the new predicted path, an original map for the new predicted path is received from the server.
  • the processor may determine whether to transmit the electrical component information to the server based on the reliability of the electrical component information.
  • the processor may control the communication component to transmit the electrical component information to the server.
  • the processor may control the communication unit such that the original map is not transmitted to the electric components.
  • the electrical components include an image sensor, and the electrical component information may include sensing information sensed by the image sensor.
  • the external information received from the server is compared with the internal information generated by the electrical equipment provided in the vehicle and the highly reliable information is provided to the electrical products, the reliability and safety of the information provided to the electrical products can be assured. Since the electrical component information updated to the server is also selected according to the reliability, the amount of computation of the server is reduced, and only necessary information is updated.
  • FIG. 1 is a view showing an appearance of a vehicle according to an embodiment of the present invention.
  • FIG. 2 is a view of a vehicle according to an embodiment of the present invention viewed from various angles.
  • 3 to 4 are views showing an interior of a vehicle according to an embodiment of the present invention.
  • FIG. 7 is a block diagram for explaining a vehicle according to an embodiment of the present invention.
  • FIG. 8 is a conceptual diagram for explaining eHorizon related to the present invention.
  • FIG. 9 is a conceptual diagram for explaining a map providing apparatus according to an embodiment of the present invention.
  • FIGS 10A and 10B are conceptual diagrams illustrating an LDM (Local Dynamic Map) and an ADAS (Advanced Driver Assistance System) MAP associated with the present invention.
  • LDM Local Dynamic Map
  • ADAS Advanced Driver Assistance System
  • 11A and 11B are conceptual diagrams for explaining a method of controlling a vehicle using an LDM and an ADAS MAP associated with the present invention.
  • FIG. 12 is a block diagram for explaining the eHorizon system.
  • FIG. 13 is a flowchart for explaining the operation of the map providing apparatus.
  • 14 is a flowchart for explaining an embodiment of control related to electrical equipment information.
  • 15 is a flowchart for explaining a method of calculating the reliability of the electrical component information.
  • 16 is a flowchart for explaining an embodiment of control related to the electrical component information.
  • 17 is a block diagram for explaining the map providing apparatus according to the present invention in more detail.
  • FIG. 18 is a flowchart for explaining the operation of the map providing apparatus of FIG. 17;
  • 19 is a flowchart for explaining an embodiment of control relating to electrical equipment information.
  • the vehicle described herein may be a concept including a car, a motorcycle.
  • the vehicle will be described mainly with respect to the vehicle.
  • the vehicle described in the present specification may be a concept including both an internal combustion engine vehicle having an engine as a power source, a hybrid vehicle having an engine and an electric motor as a power source, and an electric vehicle having an electric motor as a power source.
  • the left side of the vehicle means the left side in the running direction of the vehicle
  • the right side of the vehicle means the right side in the running direction of the vehicle
  • FIG. 1 is a view showing an appearance of a vehicle according to an embodiment of the present invention.
  • FIG. 2 is a view of a vehicle according to an embodiment of the present invention viewed from various angles.
  • 3 to 4 are views showing an interior of a vehicle according to an embodiment of the present invention.
  • FIG. 7 is a block diagram for explaining a vehicle according to an embodiment of the present invention.
  • the vehicle 100 may include a wheel rotated by a power source, and a steering input device 510 for adjusting the traveling direction of the vehicle 100.
  • the vehicle 100 may be an autonomous vehicle.
  • the vehicle 100 can be switched to the autonomous running mode or the manual mode based on the user input.
  • the vehicle 100 can be switched from the manual mode to the autonomous mode, or switched from the autonomous mode to the manual mode, based on the received user input, via the user interface device 200.
  • the vehicle 100 can be switched to the autonomous running mode or the manual mode based on the running situation information.
  • the running situation information can be generated based on the object information provided by the object detecting apparatus 300.
  • the vehicle 100 may be switched from the manual mode to the autonomous mode, or may be switched from the autonomous mode to the manual mode, based on the running status information generated by the object detection device 300.
  • the vehicle 100 can be switched from the manual mode to the autonomous mode or switched from the autonomous mode to the manual mode based on the running condition information received via the communication device 400.
  • the vehicle 100 can be switched from the manual mode to the autonomous mode based on information, data and signals provided from the external device, or can be switched from the autonomous mode to the manual mode.
  • the autonomous vehicle 100 can be operated on the basis of the running system 700.
  • the autonomous vehicle 100 may be operated based on information, data, or signals generated in the traveling system 710, the outgoing system 740, and the parking system 750.
  • the autonomous vehicle 100 can receive a user input for driving through the driving operation device 500. [ Based on the user input received through the driving operation device 500, the vehicle 100 can be operated.
  • the overall length means the length from the front portion to the rear portion of the vehicle 100 and the width is the width of the vehicle 100 and the height means the length from the bottom of the wheel to the roof.
  • the total length direction L is a direction in which the full length direction of the vehicle 100 is measured
  • the full width direction W is a standard for measuring the full width of the vehicle 100, Which is a reference for the measurement of the height of the object 100.
  • the vehicle 100 includes a user interface device 200, an object detection device 300, a communication device 400, a driving operation device 500, a vehicle driving device 600, A navigation system 770, a sensing unit 120, an interface unit 130, a memory 140, a control unit 170, and a power supply unit 190.
  • the vehicle 100 may further include other components than the components described herein, or may not include some of the components described.
  • the user interface device 200 is a device for communicating between the vehicle 100 and a user.
  • the user interface device 200 may receive user input and provide information generated by the vehicle 100 to the user.
  • the vehicle 100 can implement UI (User Interfaces) or UX (User Experience) through the user interface device 200.
  • UI User Interfaces
  • UX User Experience
  • the user interface device 200 may include an input unit 210, an internal camera 220, a biological sensing unit 230, an output unit 250, and a processor 270.
  • the user interface device 200 may further include other components than the components described, or may not include some of the components described.
  • the input unit 200 is for receiving information from the user.
  • the data collected by the input unit 120 may be analyzed by the processor 270 and processed by a user's control command.
  • the input unit 200 can be disposed inside the vehicle.
  • the input unit 200 may include one area of a steering wheel, one area of an instrument panel, one area of a seat, one area of each pillar, one area of the head console, one area of the door, one area of the center console, one area of the head lining, one area of the sun visor, one area of the windshield, One area or the like.
  • the input unit 200 may include an audio input unit 211, a gesture input unit 212, a touch input unit 213, and a mechanical input unit 214.
  • the voice input unit 211 can switch the voice input of the user into an electrical signal.
  • the converted electrical signal may be provided to the processor 270 or the control unit 170.
  • the voice input unit 211 may include one or more microphones.
  • the gesture input unit 212 may switch the user's gesture input to an electrical signal.
  • the converted electrical signal may be provided to the processor 270 or the control unit 170.
  • the gesture input unit 212 may include at least one of an infrared sensor and an image sensor for detecting a user's gesture input.
  • the gesture input 212 may sense a user's three-dimensional gesture input.
  • the gesture input unit 212 may include an optical output unit for outputting a plurality of infrared rays or a plurality of image sensors.
  • the gesture input unit 212 can sense a user's three-dimensional gesture input through a time of flight (TOF) method, a structured light method, or a disparity method.
  • TOF time of flight
  • the touch input unit 213 can switch the touch input of the user into an electrical signal.
  • the converted electrical signal may be provided to the processor 270 or the controller 170.
  • the touch input unit 213 may include a touch sensor for sensing a touch input of a user.
  • the touch input unit 213 is integrated with the display unit 251, thereby realizing a touch screen.
  • a touch screen may provide an input interface and an output interface between the vehicle 100 and a user.
  • the mechanical input unit 214 may include at least one of a button, a dome switch, a jog wheel, and a jog switch.
  • the electrical signal generated by the mechanical input 214 may be provided to the processor 270 or the controller 170.
  • the mechanical input unit 214 may be disposed on a steering wheel, a centepascia, a center console, a cockpit module, a door, or the like.
  • the internal camera 220 can acquire the in-vehicle image.
  • the processor 270 can sense the state of the user based on the in-vehicle image.
  • the processor 270 can obtain the user's gaze information from the in-vehicle image.
  • the processor 270 may sense the user's gesture in the in-vehicle video.
  • the biometric sensor 230 can acquire biometric information of the user.
  • the biometric sensor 230 includes a sensor capable of acquiring biometric information of a user, and can acquire fingerprint information, heartbeat information, etc. of a user using a sensor. Biometric information can be used for user authentication.
  • the output unit 250 is for generating an output related to a visual, auditory or tactile sense or the like.
  • the output unit 250 may include at least one of a display unit 251, an acoustic output unit 252, and a haptic output unit 253.
  • the display unit 251 may display graphic objects corresponding to various information.
  • the display unit 251 may be a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED) display, a 3D display, and an e-ink display.
  • LCD liquid crystal display
  • TFT LCD thin film transistor-liquid crystal display
  • OLED organic light-emitting diode
  • the display unit 251 may have a mutual layer structure with the touch input unit 213 or may be integrally formed to realize a touch screen.
  • the display unit 251 may be implemented as a Head Up Display (HUD).
  • HUD Head Up Display
  • the display unit 251 may include a projection module to output information through an image projected on a windshield or a window.
  • the display unit 251 may include a transparent display.
  • the transparent display may be attached to the windshield or window.
  • the transparent display can display a predetermined screen while having a predetermined transparency.
  • Transparent displays can be made of transparent TFEL (Thin Film Elecroluminescent), transparent OLED (Organic Light-Emitting Diode), transparent LCD (Liquid Crystal Display), transmissive transparent display, transparent LED (Light Emitting Diode) Or the like. The transparency of the transparent display can be adjusted.
  • the user interface device 200 may include a plurality of display units 251a to 251g.
  • the display unit 251 includes one area of the steering wheel, one area of the inspiration panel 521a, 251b and 251e, one area of the seat 251d, one area of each filler 251f, 251g), one area of the center console, one area of the head lining, one area of the sun visor, one area 251c of the windshield, and one area 251h of the window.
  • the audio output unit 252 converts an electric signal provided from the processor 270 or the control unit 170 into an audio signal and outputs the audio signal.
  • the sound output section 252 may include one or more speakers.
  • the haptic output unit 253 generates a tactile output.
  • the haptic output section 253 may operate to vibrate the steering wheel, the seat belt, the seat 110FL, 110FR, 110RL, and 110RR so that the user can recognize the output.
  • the processor 270 may control the overall operation of each unit of the user interface device 200.
  • the user interface device 200 may include a plurality of processors 270, or may not include a processor 270.
  • the user interface device 200 may be operated under the control of a processor or control unit 170 of another apparatus in the vehicle 100.
  • the user interface device 200 may be referred to as a vehicle display device.
  • the user interface device 200 may be operated under the control of the control unit 170.
  • the object detecting apparatus 300 is an apparatus for detecting an object located outside the vehicle 100.
  • the object may be various objects related to the operation of the vehicle 100.
  • an object O is a vehicle that is a vehicle that has a lane OB10, another vehicle OB11, a pedestrian OB12, a two-wheeled vehicle OB13, traffic signals OB14 and OB15, Speed bumps, terrain, animals, and the like.
  • the lane OB10 may be a driving lane, a side lane of the driving lane, or a lane on which the opposed vehicle runs.
  • the lane OB10 may be a concept including left and right lines Line forming a lane.
  • the other vehicle OB11 may be a vehicle running in the vicinity of the vehicle 100.
  • the other vehicle may be a vehicle located within a predetermined distance from the vehicle 100.
  • the other vehicle OB11 may be a vehicle preceding or following the vehicle 100.
  • the pedestrian OB12 may be a person located in the vicinity of the vehicle 100. [ The pedestrian OB12 may be a person located within a predetermined distance from the vehicle 100. [ For example, the pedestrian OB12 may be a person who is located on the delivery or driveway.
  • the two-wheeled vehicle OB12 may mean a vehicle located around the vehicle 100 and moving using two wheels.
  • the two-wheeled vehicle OB12 may be a rider having two wheels positioned within a predetermined distance from the vehicle 100.
  • the two-wheeled vehicle OB13 may be a motorcycle or a bicycle located on a sidewalk or a motorway.
  • the traffic signal may include a traffic light (OB15), a traffic sign (OB14), a pattern drawn on the road surface, or text.
  • the light may be light generated from lamps provided in other vehicles.
  • Light can be light generated from a street light.
  • Light can be solar light.
  • the road may include a slope such as a road surface, a curve, an uphill, a downhill, and the like.
  • the structure may be an object located around the road and fixed to the ground.
  • the structure may include street lamps, street lamps, buildings, electric poles, traffic lights, and bridges.
  • the terrain may include mountains, hills, and the like.
  • an object can be classified into a moving object and a fixed object.
  • the moving object may be a concept including an other vehicle, a pedestrian.
  • the fixed object may be a concept including a traffic signal, a road, and a structure.
  • the object detection apparatus 300 may include a camera 310, a radar 320, a LR 330, an ultrasonic sensor 340, an infrared sensor 350, and a processor 370.
  • the object detecting apparatus 300 may further include other elements other than the described elements, or may not include some of the described elements.
  • the camera 310 may be located at an appropriate location outside the vehicle to obtain the vehicle exterior image.
  • the camera 310 may be a mono camera, a stereo camera 310a, an AVM (Around View Monitoring) camera 310b, or a 360 degree camera.
  • the camera 310 may be disposed in the interior of the vehicle, close to the front windshield, to acquire an image of the front of the vehicle.
  • the camera 310 may be disposed around a front bumper or radiator grill.
  • the camera 310 may be disposed in the interior of the vehicle, close to the rear glass, to acquire images of the rear of the vehicle.
  • the camera 310 may be disposed around a rear bumper, trunk, or tailgate.
  • the camera 310 may be disposed close to at least one of the side windows in the interior of the vehicle to obtain the image of the side of the vehicle.
  • the camera 310 may be disposed around a side mirror, fender, or door.
  • the camera 310 may provide the acquired image to the processor 370.
  • the radar 320 may include an electromagnetic wave transmitting unit and a receiving unit.
  • the radar 320 may be implemented by a pulse radar system or a continuous wave radar system in terms of the radio wave emission principle.
  • the radar 320 may be implemented by a Frequency Modulated Continuous Wave (FMCW) scheme or a Frequency Shift Keying (FSK) scheme according to a signal waveform in a continuous wave radar scheme.
  • FMCW Frequency Modulated Continuous Wave
  • FSK Frequency Shift Keying
  • the radar 320 detects an object based on a time-of-flight (TOF) method or a phase-shift method through electromagnetic waves, and detects the position of the detected object, the distance to the detected object, Can be detected.
  • TOF time-of-flight
  • phase-shift method through electromagnetic waves
  • the radar 320 may be disposed at a suitable location outside the vehicle to sense objects located at the front, rear, or side of the vehicle.
  • the ladder 330 may include a laser transmitting unit and a receiving unit.
  • the LIDAR 330 may be implemented in a time of flight (TOF) scheme or a phase-shift scheme.
  • the lidar 330 may be implemented as a drive or an unshifted drive.
  • the LIDAR 330 When implemented in a driving manner, the LIDAR 330 is rotated by a motor and can detect an object in the vicinity of the vehicle 100.
  • the LIDAR 330 can detect an object located within a predetermined range with respect to the vehicle 100 by optical steering.
  • the vehicle 100 may include a plurality of non-driven RRs 330.
  • the laser 330 detects an object based on a laser light medium, a time of flight (TOF) method, or a phase-shift method, and detects the position of the detected object, The relative speed can be detected.
  • TOF time of flight
  • the lidar 330 may be disposed at an appropriate location outside the vehicle to sense objects located at the front, rear, or side of the vehicle.
  • the ultrasonic sensor 340 may include an ultrasonic transmitter and a receiver.
  • the ultrasonic sensor 340 can detect the object based on the ultrasonic wave, and can detect the position of the detected object, the distance to the detected object, and the relative speed.
  • the ultrasonic sensor 340 may be disposed at an appropriate position outside the vehicle for sensing an object located at the front, rear, or side of the vehicle.
  • the infrared sensor 350 may include an infrared ray transmitter and a receiver.
  • the infrared sensor 340 can detect the object based on the infrared light, and can detect the position of the detected object, the distance to the detected object, and the relative speed.
  • the infrared sensor 350 may be disposed at an appropriate position outside the vehicle for sensing an object located at the front, rear, or side of the vehicle.
  • the processor 370 can control the overall operation of each unit of the object detecting apparatus 300.
  • the processor 370 can detect and track the object based on the acquired image.
  • the processor 370 can perform operations such as calculating a distance to an object, calculating a relative speed with respect to the object, and the like through an image processing algorithm.
  • the processor 370 can detect and track the object based on the reflected electromagnetic waves that are reflected from the object by the transmitted electromagnetic waves.
  • the processor 370 can perform operations such as calculating a distance to an object and calculating a relative speed with respect to the object based on electromagnetic waves.
  • the processor 370 can detect and track the object based on the reflected laser light reflected back from the object by the transmitted laser. Based on the laser light, the processor 370 can perform operations such as calculating the distance to the object and calculating the relative speed with respect to the object.
  • the processor 370 can detect and track the object on the basis of the reflected ultrasonic waves reflected by the object and transmitted back.
  • the processor 370 can perform operations such as calculating the distance to the object and calculating the relative speed with respect to the object based on the ultrasonic waves.
  • the processor 370 can detect and track the object based on the reflected infrared light that the transmitted infrared light reflects back to the object.
  • the processor 370 can perform operations such as calculating the distance to the object and calculating the relative speed with respect to the object based on the infrared light.
  • the object detecting apparatus 300 may include a plurality of processors 370 or may not include the processor 370.
  • processors 370 may individually include a processor.
  • the object detecting apparatus 300 can be operated under the control of the processor of the apparatus in the vehicle 100 or the controller 170 when the object detecting apparatus 300 does not include the processor 370.
  • the object detecting apparatus 400 can be operated under the control of the control unit 170.
  • the communication device 400 is a device for performing communication with an external device.
  • the external device may be another vehicle, a mobile terminal, or a server.
  • the communication device 400 may include at least one of a transmission antenna, a reception antenna, an RF (Radio Frequency) circuit capable of implementing various communication protocols, and an RF device to perform communication.
  • RF Radio Frequency
  • the communication device 400 may include a local communication unit 410, a location information unit 420, a V2X communication unit 430, an optical communication unit 440, a broadcast transmission / reception unit 450, and a processor 470.
  • the communication device 400 may further include other components than the components described, or may not include some of the components described.
  • the short-range communication unit 410 is a unit for short-range communication.
  • the short-range communication unit 410 may be a wireless communication unit such as Bluetooth TM, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Wi- -Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) technology.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee Near Field Communication
  • NFC Near Field Communication
  • Wi- -Fidelity Wi-Fi Direct
  • Wireless USB Wireless Universal Serial Bus
  • the short-range communication unit 410 may form short-range wireless communication networks to perform short-range communication between the vehicle 100 and at least one external device.
  • the position information section 420 is a unit for acquiring the position information of the vehicle 100.
  • the location information unit 420 may include a Global Positioning System (GPS) module or a Differential Global Positioning System (DGPS) module.
  • GPS Global Positioning System
  • DGPS Differential Global Positioning System
  • the V2X communication unit 430 is a unit for performing wireless communication with a server (V2I: Vehicle to Infra), another vehicle (V2V: Vehicle to Vehicle), or a pedestrian (V2P: Vehicle to Pedestrian).
  • the V2X communication unit 430 may include an RF circuit capable of implementing communication with the infrastructure (V2I), inter-vehicle communication (V2V), and communication with the pedestrian (V2P) protocol.
  • the optical communication unit 440 is a unit for performing communication with an external device via light.
  • the optical communication unit 440 may include a light emitting unit that converts an electric signal into an optical signal and transmits the optical signal to the outside, and a light receiving unit that converts the received optical signal into an electric signal.
  • the light emitting portion may be formed so as to be integrated with the lamp included in the vehicle 100.
  • the broadcast transmission / reception unit 450 is a unit for receiving a broadcast signal from an external broadcast management server through a broadcast channel or transmitting a broadcast signal to a broadcast management server.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the broadcast signal may include a TV broadcast signal, a radio broadcast signal, and a data broadcast signal.
  • the processor 470 can control the overall operation of each unit of the communication device 400.
  • the communication device 400 may include a plurality of processors 470 or may not include a processor 470.
  • the communication device 400 can be operated under the control of the processor or the control unit 170 of another apparatus in the vehicle 100.
  • the communication device 400 can implement the vehicle display device together with the user interface device 200.
  • the vehicle display device may be named as a telematics device or an AVN (Audio Video Navigation) device.
  • the communication device 400 may be operated under the control of the control unit 170.
  • the driving operation device 500 is a device for receiving a user input for operation.
  • the vehicle 100 can be operated on the basis of the signal provided by the driving operation device 500.
  • the driving operation device 500 may include a steering input device 510, an acceleration input device 530, and a brake input device 570.
  • the steering input device 510 may receive a forward direction input of the vehicle 100 from a user.
  • the steering input device 510 is preferably formed in a wheel shape so that steering input is possible by rotation.
  • the steering input device may be formed as a touch screen, a touch pad, or a button.
  • the acceleration input device 530 may receive an input for acceleration of the vehicle 100 from a user.
  • the brake input device 570 can receive an input for deceleration of the vehicle 100 from the user.
  • the acceleration input device 530 and the brake input device 570 are preferably formed in a pedal shape.
  • the acceleration input device or the brake input device may be formed as a touch screen, a touch pad, or a button.
  • the driving operation device 500 can be operated under the control of the control unit 170.
  • the vehicle driving device 600 is an apparatus for electrically controlling the driving of various devices in the vehicle 100.
  • the vehicle driving apparatus 600 includes a power train driving unit 610, a chassis driving unit 620, a door / window driving unit 630, a safety driving unit 640, a lamp driving unit 650 and an air conditioning driving unit 660 .
  • the vehicle drive system 600 may further include other elements other than the described elements, or may not include some of the elements described.
  • the vehicle drive apparatus 600 may include a processor. Each unit of the vehicle drive apparatus 600 may individually include a processor.
  • the power train driving unit 610 can control the operation of the power train apparatus.
  • the power train driving unit 610 may include a power source driving unit 611 and a transmission driving unit 612.
  • the power source drive unit 611 can perform control on the power source of the vehicle 100.
  • the power source drive unit 610 can perform electronic control of the engine.
  • the output torque of the engine and the like can be controlled.
  • the power source drive unit 611 can adjust the engine output torque under the control of the control unit 170.
  • the power source driving unit 610 can perform control on the motor.
  • the power source drive unit 610 can adjust the rotation speed, torque, and the like of the motor under the control of the control unit 170.
  • the transmission drive unit 612 can perform control on the transmission.
  • the transmission drive unit 612 can adjust the state of the transmission.
  • the transmission drive unit 612 can adjust the state of the transmission to forward (D), reverse (R), neutral (N), or parking (P).
  • the transmission drive unit 612 can adjust the gear engagement state in the forward (D) state.
  • the chassis driving unit 620 can control the operation of the chassis apparatus.
  • the chassis driving unit 620 may include a steering driving unit 621, a brake driving unit 622, and a suspension driving unit 623.
  • the steering driver 621 may perform electronic control of the steering apparatus in the vehicle 100. [ The steering driver 621 can change the traveling direction of the vehicle.
  • the brake driver 622 can perform electronic control of the brake apparatus in the vehicle 100. [ For example, it is possible to reduce the speed of the vehicle 100 by controlling the operation of the brakes disposed on the wheels.
  • the brake driver 622 can individually control each of the plurality of brakes.
  • the brake driving unit 622 can control the braking forces applied to the plurality of wheels to be different from each other.
  • the suspension driving unit 623 can perform electronic control on a suspension apparatus in the vehicle 100. [ For example, when there is a curvature on the road surface, the suspension driving unit 623 can control the suspension device so as to reduce the vibration of the vehicle 100. [
  • the suspension driving unit 623 can individually control each of the plurality of suspensions.
  • the door / window driving unit 630 may perform electronic control of a door apparatus or a window apparatus in the vehicle 100.
  • the door / window driving unit 630 may include a door driving unit 631 and a window driving unit 632.
  • the door driving unit 631 can control the door device.
  • the door driving unit 631 can control the opening and closing of a plurality of doors included in the vehicle 100. [
  • the door driving unit 631 can control the opening or closing of a trunk or a tail gate.
  • the door driving unit 631 can control the opening or closing of the sunroof.
  • the window driving unit 632 may perform an electronic control on a window apparatus. It is possible to control the opening or closing of the plurality of windows included in the vehicle 100.
  • the safety device driving unit 640 may perform electronic control of various safety apparatuses in the vehicle 100.
  • the safety device driving unit 640 may include an airbag driving unit 641, a seat belt driving unit 642, and a pedestrian protection device driving unit 643. [
  • the airbag driver 641 may perform electronic control of the airbag apparatus in the vehicle 100. [ For example, the airbag driver 641 can control the deployment of the airbag when a danger is detected.
  • the seat belt driving portion 642 can perform electronic control on the seat belt appartus in the vehicle 100.
  • the seat belt driving portion 642 can control the passenger to be fixed to the seats 110FL, 110FR, 110RL, and 110RR using the seat belt when a danger is detected.
  • the pedestrian protection device driving section 643 can perform electronic control on the hood lift and the pedestrian airbag.
  • the pedestrian protection device driving section 643 can control the hood lift-up and the pedestrian airbag deployment when a collision with a pedestrian is detected.
  • the lamp driving unit 650 can perform electronic control of various lamp apparatuses in the vehicle 100.
  • the air conditioning driving unit 660 can perform electronic control on the air conditioner in the vehicle 100. [ For example, when the temperature inside the vehicle is high, the air conditioning driving unit 660 can control the air conditioner to operate so that the cool air is supplied to the inside of the vehicle.
  • the vehicle drive apparatus 600 may include a processor. Each unit of the vehicle drive apparatus 600 may individually include a processor.
  • the vehicle drive apparatus 600 can be operated under the control of the control section 170.
  • the operating system 700 is a system for controlling various operations of the vehicle 100. [ The travel system 700 can be operated in the autonomous mode.
  • the travel system 700 may include a travel system 710, an outbound system 740, and a parking system 750.
  • the travel system 700 may further include other components than the components described, or may not include some of the components described.
  • the travel system 700 may include a processor.
  • Each unit of the travel system 700 may each include a processor individually.
  • the driving system 700 when the driving system 700 is implemented in software, it may be a sub-concept of the control unit 170.
  • the operating system 700 includes at least one of the user interface device 200, the object detecting device 300, the communication device 400, the vehicle driving device 600, and the control unit 170 It can be a concept that includes.
  • the traveling system 710 can perform traveling of the vehicle 100.
  • the navigation system 710 can receive navigation information from the navigation system 770 and provide a control signal to the vehicle drive system 600 to perform the travel of the vehicle 100.
  • the traveling system 710 can receive the object information from the object detection device 300 and provide a control signal to the vehicle driving device 600 to perform the traveling of the vehicle 100.
  • the traveling system 710 can receive a signal from an external device via the communication device 400 and provide a control signal to the vehicle driving device 600 to perform the traveling of the vehicle 100.
  • the departure system 740 can perform the departure of the vehicle 100.
  • the outpost system 740 can receive navigation information from the navigation system 770 and provide control signals to the vehicle driving apparatus 600 to perform the departure of the vehicle 100.
  • the departure system 740 can receive object information from the object detecting apparatus 300 and provide a control signal to the vehicle driving apparatus 600 to carry out the departure of the vehicle 100.
  • the departure system 740 can receive a signal from the external device via the communication device 400 and provide a control signal to the vehicle driving device 600 to perform the departure of the vehicle 100.
  • the parking system 750 can perform parking of the vehicle 100.
  • the parking system 750 may receive navigation information from the navigation system 770 and provide a control signal to the vehicle driving device 600 to perform parking of the vehicle 100.
  • the parking system 750 is capable of performing parking of the vehicle 100 by receiving object information from the object detecting apparatus 300 and providing a control signal to the vehicle driving apparatus 600.
  • the parking system 750 can receive the signal from the external device via the communication device 400 and provide a control signal to the vehicle driving device 600 to perform parking of the vehicle 100.
  • the navigation system 770 may provide navigation information.
  • the navigation information may include at least one of map information, set destination information, route information according to the destination setting, information about various objects on the route, lane information, and current location information of the vehicle.
  • the navigation system 770 may include a memory, a processor.
  • the memory can store navigation information.
  • the processor may control the operation of the navigation system 770.
  • the navigation system 770 can receive information from an external device via the communication device 400 and update the stored information.
  • the navigation system 770 may be classified as a subcomponent of the user interface device 200.
  • the sensing unit 120 can sense the state of the vehicle.
  • the sensing unit 120 may include a sensor such as a yaw sensor, a roll sensor, a pitch sensor, a collision sensor, a wheel sensor, a velocity sensor, A sensor, a weight sensor, a heading sensor, a yaw sensor, a gyro sensor, a position module, a vehicle forward / backward sensor, a battery sensor, A vehicle interior temperature sensor, an internal humidity sensor, an ultrasonic sensor, an illuminance sensor, an accelerator pedal position sensor, a brake pedal position sensor, and the like.
  • a sensor such as a yaw sensor, a roll sensor, a pitch sensor, a collision sensor, a wheel sensor, a velocity sensor, A sensor, a weight sensor, a heading sensor, a yaw sensor, a gyro sensor, a position module, a vehicle forward / backward sensor, a battery sensor, A vehicle interior temperature sensor, an internal humidity sensor, an ultra
  • the sensing unit 120 is configured to generate the sensing information based on the vehicle attitude information, the vehicle collision information, the vehicle direction information, the vehicle position information (GPS information), the vehicle angle information, the vehicle speed information, Obtain a sensing signal for information, fuel information, tire information, vehicle lamp information, vehicle interior temperature information, vehicle interior humidity information, steering wheel rotation angle, vehicle exterior illumination, pressure applied to the accelerator pedal, pressure applied to the brake pedal, can do.
  • the sensing unit 120 may further include an accelerator pedal sensor, a pressure sensor, an engine speed sensor, an air flow sensor AFS, an intake air temperature sensor ATS, a water temperature sensor WTS, (TPS), a TDC sensor, a crank angle sensor (CAS), and the like.
  • the interface unit 130 may serve as a pathway to various kinds of external devices connected to the vehicle 100.
  • the interface unit 130 may include a port that can be connected to the mobile terminal, and may be connected to the mobile terminal through the port. In this case, the interface unit 130 can exchange data with the mobile terminal.
  • the interface unit 130 may serve as a channel for supplying electrical energy to the connected mobile terminal.
  • the interface unit 130 may provide the mobile terminal with electric energy supplied from the power supply unit 190 under the control of the controller 170.
  • the memory 140 is electrically connected to the control unit 170.
  • the memory 140 may store basic data for the unit, control data for controlling the operation of the unit, and input / output data.
  • the memory 140 may be, in hardware, various storage devices such as ROM, RAM, EPROM, flash drive, hard drive, and the like.
  • the memory 140 may store various data for operation of the vehicle 100, such as a program for processing or controlling the controller 170.
  • the memory 140 may be formed integrally with the controller 170 or may be implemented as a subcomponent of the controller 170.
  • the control unit 170 can control the overall operation of each unit in the vehicle 100.
  • the control unit 170 may be referred to as an ECU (Electronic Control Unit).
  • the power supply unit 190 can supply power necessary for the operation of each component under the control of the control unit 170. Particularly, the power supply unit 190 can receive power from a battery or the like inside the vehicle.
  • processors and controls 170 included in vehicle 100 may be implemented as application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs) field programmable gate arrays, processors, controllers, micro-controllers, microprocessors, and other electrical units for performing other functions.
  • ASICs application specific integrated circuits
  • DSPs digital signal processors
  • DSPDs digital signal processing devices
  • PLDs programmable logic devices field programmable gate arrays
  • processors controllers, micro-controllers, microprocessors, and other electrical units for performing other functions.
  • FIG. 8 is a conceptual diagram for explaining eHorizon related to the present invention.
  • the map providing apparatus 800 related to the present invention can autonomously run the vehicle 100 on the basis of eHorizon.
  • eHorizon can be categorized into categories such as software, system, concept. eHorizon combines real-time traffic information such as road markings, road surface conditions, and accidents in real-time events, such as an external server (cloud) and V2X (Vehicle to everything) As shown in FIG.
  • eHorizon can refer to an external server (or cloud, cloud server).
  • eHorizon can deliver the precise map road shape and real-time event in front of the vehicle to the autonomous driving system and the infotainment system under the external server / V2X environment.
  • eHorizon data (information) transmitted from eHorizon (ie, external server) is transmitted according to a standard called 'ADASIS (Advanced Driver Assistance Systems Interface Specification)' to effectively transmit data to autonomous traveling system and infotainment system .
  • eHorizon ie, external server
  • 'ADASIS Advanced Driver Assistance Systems Interface Specification
  • the map providing apparatus 800 related to the present invention can use information received from eHorizon for an autonomous navigation system and / or an infotainment system.
  • autonomous navigation systems can be divided into safety aspects and ECO aspects.
  • the map providing apparatus 800 of the present invention can search the LKA (Lane) by using the road shape information and event information received from eHorizon and the surrounding object information sensed through the sensing unit 840 provided in the vehicle, (Advanced Driver Assistance System) functions such as Keeping Assist (TJA) and Traffic Jam Assist (TJA), and / or AD (AutoDrive) functions such as forwarding, road joining and lane changing.
  • LKA Longe
  • the map providing device 800 can improve the fuel efficiency by controlling the vehicle so as to receive the inclination information, the traffic light information, and the like of the road ahead from the eHorizon to provide efficient engine thrust.
  • the map providing device 800 receives incident information, road surface state information, and the like of the front road received from the eHorizon and displays it on a display unit (e.g., a Head Up Display (HUD) To provide guidance information for allowing the driver to perform safe driving.
  • a display unit e.g., a Head Up Display (HUD)
  • HUD Head Up Display
  • the eHorizon may be configured to store location information of various event information (e.g., road surface state information 1010a, construction information 1010b, accident information 1010c, etc.)
  • the road specific speed information 1010d can be received from the vehicle 100 or the other vehicles 1020a and 1020b or can be collected from an infrastructure installed on the road (e.g., a measurement device, a sensing device, a camera, and the like).
  • the event information or the road speed limit information may be related to the map information or may be updated.
  • the location information of the event information may be divided into lane units.
  • the eHorizon (external server) of the present invention is capable of providing information necessary for an autonomous travel system and an infotainment system to each vehicle based on a precise map that can determine a road situation (or road information) Lt; / RTI >
  • the eHorizon (external server) of the present invention provides an absolute high-precision MAP using the absolute coordinates of information related to the road (e.g., event information, position information of the vehicle 100, etc.) can do.
  • the information related to the road provided by the eHorizon can be provided only within the predetermined area (predetermined space) based on the vehicle 100.
  • the map providing device 800 of the present invention can acquire positional information of another vehicle through communication with the other vehicle.
  • Communication with another vehicle can be performed through V2X (Vehicle to everything) communication.
  • Data transmitted / received to / from another vehicle via V2X communication can be data in a format defined by the LDM (Local Dynamic Map) standard.
  • the LDM means a conceptual data store located in a vehicle control unit (or ITS station) that contains information related to the safe and normal operation of an application (or application program) contained in the vehicle (or ITS (Intelligent Transport System) .
  • the LDM may, for example, comply with EN standards.
  • the LDM differs from the ADAS MAP described above in the data format and transmission method.
  • the ADAS MAP corresponds to a high-precision MAP having absolute coordinates received from an eHorizon (external server), and the LDM can refer to a high-precision MAP having relative coordinates based on data transmitted and received through V2X communication.
  • the LDM data is data that is mutually transmitted and received in V2X communication (Vehicle to everything) (for example, V2V (Vehicle to Vehicle) communication, V2I (Vehicle to Infra) communication, V2P .
  • V2X communication Vehicle to everything
  • V2V Vehicle to Vehicle
  • V2I Vehicle to Infra
  • the LDM is a concept of a storage for storing data transmitted and received in V2X communication, and the LDM can be formed (stored) in a vehicle control device provided in each vehicle.
  • the LDM data may mean, for example, data exchanged with a vehicle and a vehicle (infrastructure, pedestrian) or the like.
  • the LDM data may include, for example, a Basic Safety Message (BSM), a Cooperative Awareness Message (CAM), and a Decentralized Environmental Notification message (DENM).
  • BSM Basic Safety Message
  • CAM Cooperative Awareness Message
  • DENM Decentralized Environmental Notification message
  • the LDM data may be, for example, a V2X message or an LDM message.
  • the vehicle control apparatus related to the present invention can efficiently manage the LDM data (or the V2X message) transmitted and received between the vehicles efficiently using the LDM.
  • the LDM Based on the LDM data received via the V2X communication, the LDM obtains all relevant information about the traffic situation around the place where the current vehicle is located (or the road situation for the area within a certain distance from the place where the current vehicle is located) For example, the position, speed, traffic light status, weather information, road surface condition, etc. of this vehicle (other vehicle) can be stored and distributed to other vehicles and continuously updated.
  • the V2X application included in the map providing device 800 registers with the LDM and receives a specific message such as a warning message for all the DENMs including a warning about the faulty vehicle.
  • the LDM then automatically assigns the received information to the V2X application, and the V2X application can control the vehicle based on the information allocated from the LDM.
  • the vehicle of the present invention can control the vehicle using the LDM formed by the LDM data collected through the V2X communication.
  • the LDM associated with the present invention can provide road-related information to the vehicle control device.
  • the road-related information provided by the LDM provides only relative distances and relative distances between other vehicles (or event points generated), rather than map information with absolute coordinates.
  • the vehicle of the present invention can construct autonomous driving using the ADAS MAP (absolute coordinate high-precision MAP) according to ADASIS standard provided by eHorizon, it can judge the road condition of the peripheral area of the present vehicle It can be used only to do.
  • ADAS MAP absolute coordinate high-precision MAP
  • the vehicle of the present invention is capable of configuring autonomous driving using an LDM (relative coordinate high-precision MAP) formed by LDM data received via V2X communication, but there is a limitation in that accuracy is inferior due to insufficient absolute position information .
  • LDM relative coordinate high-precision MAP
  • the vehicle control apparatus included in the vehicle of the present invention generates a fusion precision map using the LDM data received through the VAS communication with the ADAS MAP received from eHorizon and controls the vehicle using the fusion precision map in an optimized manner (Self-driving).
  • FIG. 9 is a conceptual diagram for explaining a vehicle control apparatus according to an embodiment of the present invention.
  • 10A and 10B are conceptual diagrams illustrating an LDM (Local Dynamic Map) and an ADAS (Advanced Driver Assistance System) MAP associated with the present invention.
  • LDM Local Dynamic Map
  • ADAS Advanced Driver Assistance System
  • the map providing apparatus 800 related to the present invention may include a communication unit 810, a sensing unit 840, and a processor 870.
  • the communication unit 810 may be the communication device 400 described above.
  • the communication unit 810 related to the present invention can determine the current position of the vehicle through the position information unit 420.
  • the communication unit 810 may communicate with the surrounding vehicle (or another vehicle) or may communicate with the external server eHorizon (or cloud server).
  • the communication unit 810 related to the present invention may be configured to acquire positional information of the present vehicle, and to perform communication with at least one of the external server and other vehicles.
  • the communication unit 810 may include a V2X module 820 and an eHorizon module 830.
  • Fig. 9 the communication unit 810 may include a V2X module 820 and an eHorizon module 830.
  • the V2X module 820 can perform V2X communication with other vehicles. That is, the communication unit 810 can perform communication with the nearby vehicle (or another vehicle). This can be named V2V (Vehicle to Vehicle) communication.
  • V2V communication can be generally defined as a technology for exchanging information between vehicles, and it is possible to share nearby vehicle position, speed information, and the like.
  • the communication unit 810 can perform communication with all devices (e.g., mobile terminals, servers, etc.) capable of communicating with each other.
  • This can be named Vehicle to everything (V2X) communication.
  • V2X communication can be generally defined as technology that exchanges information such as traffic situation while communicating with road infrastructure and other vehicles while driving.
  • V2V communication can be understood as an example of V2X communication or as a concept included in V2X communication.
  • the processor 870 can perform V2V communication or V2X communication with the nearby vehicle (other vehicle) through the communication unit 810. [
  • the peripheral vehicle may refer to at least one of a vehicle existing within a predetermined distance from the vehicle 100 or a vehicle entering within a predetermined distance based on the vehicle 100.
  • the peripheral vehicle may include all vehicles capable of communicating with the communication unit 810 of the vehicle 100. [ In this specification, for convenience of explanation, it is assumed that the peripheral vehicle exists within a predetermined distance from the vehicle 100, or the vehicle enters within the predetermined distance.
  • the predetermined distance may be determined based on a distance that can be communicated through the communication unit 810, or may be determined according to specifications of the product, or may be determined / varied based on user's setting or V2X communication standard.
  • the V2X module 820 may be configured to receive LDM data from other vehicles.
  • the LDM data may be V2X messages (BSM, CAM, DENM, etc.) transmitted and received between vehicles via V2X communication.
  • the LDM data may include position information of another vehicle.
  • the relative position can be determined.
  • the LDM data may include speed information of another vehicle.
  • the processor 870 may also determine the relative speed of the other vehicle using the speed information of the vehicle and the speed information of the other vehicle.
  • the speed information of the vehicle is calculated using the degree to which the positional information of the vehicle received through the communication unit 810 changes over time or the speed information of the driving operation device 500 or the powertrain driving unit 610 of the vehicle 100, As shown in FIG.
  • the V2X module 820 may be the V2X communication unit 430 described above.
  • the communication unit 810 of the present invention may include an eHorizon module 830.
  • the eHorizon module 830 may perform wireless communication with an external server eHorizon.
  • the eHorizon module 830 can receive the ADAS MAP from the external server.
  • the ADAS MAP may include map information.
  • the map information included in the ADAS MAP may be formed such that information related to the road (event information) is divided into lane-by-lane units.
  • the processor 870 of the map providing apparatus 800 related to the present invention calculates the absolute coordinates of the information (event information) related to the road based on the ADAS MAP received from the external server eHorizon through the eHorizon module 830 It can be judged. Further, the processor 870 can perform vehicle control to autonomously drive the vehicle using the absolute coordinates of the information (event information) related to the road.
  • FIG. 10A shows an example of the data format of the LDM data (or LDM) transmitted and received between the vehicles via the V2X communication
  • FIG. 10B shows an example of the data format of the ADAS MAP received from the external server eHorizon .
  • LDM data (or LDM) 1050 may be formed to have four layers.
  • the LDM data 1050 may include a first layer 1052, a second layer 1054, a third layer 1056, and a fourth layer 1058.
  • the first layer 1052 may include static information, for example, map information, among information related to the road.
  • the second layer 1054 may include landmark information (for example, specific place information specified by a maker among a plurality of place information included in the map information) among information related to the road.
  • the landmark information may include location information, name information, size information, and the like.
  • the third layer 1056 may include traffic-related information (for example, traffic light information, construction information, accident information, etc.) among information related to the road.
  • the construction information and the accident information may include location information.
  • the fourth layer 1058 may include dynamic information (e.g., object information, pedestrian information, other vehicle information, etc.) among the information related to the road.
  • the object information, walking low information, and other vehicle information may include location information.
  • the LDM data 1050 may include information sensed through a sensing unit of another vehicle or information sensed through a sensing unit of the present vehicle, and may be related to a road that is transformed in real time from the first layer to the fourth layer Information may be included.
  • the ADAS MAP may be formed to have four layers similar to the LDM data.
  • the ADAS MAP 1060 may be data received from eHorizon and formed to conform to the ADASIS standard.
  • the ADAS MAP 1060 may include a first layer 1062 to a fourth layer 1068.
  • the first layer 1062 may include topology information.
  • the topology information may be, for example, information that explicitly defines a spatial relationship, and may refer to map information.
  • the second layer 1064 may include landmark information (for example, specific place information specified by a maker among a plurality of place information included in the map information) among information related to the road.
  • the landmark information may include location information, name information, size information, and the like.
  • the third layer 1066 may include high-precision map information.
  • the high-precision map information may be referred to as an HD-MAP, and information related to the road (for example, traffic light information, construction information, accident information) may be recorded in units of lanes.
  • the construction information and the accident information may include location information.
  • the fourth layer 1068 may include dynamic information (e.g., object information, pedestrian information, other vehicle information, etc.).
  • object information, walking low information, and other vehicle information may include location information.
  • the ADAS MAP 1060 may include information related to a road that is transformed in real time from the first layer to the fourth layer, such as the LDM data 1050.
  • the map providing apparatus 800 related to the present invention may include a sensing unit 840.
  • the sensing unit 840 may be the object detecting device 300 described in FIG. 7 or the sensing unit 120 provided in the vehicle 100.
  • the sensing unit 840 may be an independent sensing unit of the object detecting apparatus 300 provided in the vehicle or the sensing unit 120 provided in the vehicle 100. [ Even if the sensing unit 840 is an independent sensing unit, the sensing unit 840 may include the characteristics of the sensing unit 120 or the object device 300 described with reference to FIG.
  • the sensing unit 820 may include the camera 310 described with reference to FIG.
  • the sensing unit 840 may include a camera 310, a radar 320, a line sensor 330, an ultrasonic sensor 340, an infrared sensor 350, a sensing unit 350, (120) may be implemented in combination.
  • the sensing unit 840 can sense an object existing in the vicinity of the vehicle 100 and sense information related to the object.
  • the object may include the above-mentioned nearby vehicles, nearby people, surrounding objects, surrounding terrain, and the like.
  • the sensing unit 820 can sense information related to the vehicle 100 of the present invention.
  • the information related to the vehicle may be at least one of vehicle information (or a traveling state of the vehicle) and the peripheral information of the vehicle.
  • the vehicle information includes at least one of a running speed of the vehicle, a weight of the vehicle, a number of passengers of the vehicle, a braking force of the vehicle, a maximum braking force of the vehicle, a running mode (whether the vehicle is in an autonomous mode or a manual mode) (Autonomous parking mode, automatic parking mode, manual parking mode), whether or not the user is aboard the vehicle, and information related to the user (for example, whether or not the user is an authorized user).
  • the peripheral information of the vehicle includes, for example, the state of the road surface (friction force) on which the vehicle is running, the weather, the distance from the front (or rear) vehicle, the relative speed of the front.
  • the information about the object existing in the reference area (the predetermined area) on the basis of the vehicle the information about the position of the object in the predetermined area, Whether or not a user is present around the vehicle, and information related to the user (e.g., whether or not the user is an authorized user).
  • the surrounding information (or the surrounding environment information) of the vehicle may include at least one of the external information of the vehicle (for example, the surrounding brightness, the temperature, the sun position, the surrounding subject (person, another vehicle, signboard) , Feature information, line information, driving lane information), and information necessary for autonomous driving / autonomous parking / automatic parking / manual parking mode.
  • the external information of the vehicle for example, the surrounding brightness, the temperature, the sun position, the surrounding subject (person, another vehicle, signboard) , Feature information, line information, driving lane information
  • information necessary for autonomous driving / autonomous parking / automatic parking / manual parking mode for example, the surrounding brightness, the temperature, the sun position, the surrounding subject (person, another vehicle, signboard)
  • the surrounding subject person, another vehicle, signboard
  • the peripheral information of the vehicle includes an object (object) existing in the vicinity of the vehicle and an object for identifying the distance to the vehicle 100, the type of the object, the parking space in which the vehicle can park, A parking line, a cord, a riding vehicle, a wall, etc.).
  • the sensing unit 820 is separately provided in the map providing apparatus 800 as an example.
  • the processor 870 acquires certain information through the sensing unit 820 by the processor 870 using at least one of the object detecting apparatus 300 and the sensing unit 120 provided in the vehicle 100, Information can be understood to be obtained.
  • the map providing apparatus 800 of the present invention may include a processor 870 capable of controlling a communication unit 810, a V2X module 820, an eHorizon module 830, a sensing unit 840, and the like.
  • the processor 870 may be the controller 170 described with reference to FIG.
  • the processor 870 can control the components described in Fig. 7 and the components described in Fig.
  • the processor 870 can autonomously run the vehicle 100.
  • the processor 870 can autonomously run the vehicle 100 based on the information sensed through the sensing unit 840 and the information received through the communication unit 810.
  • the technology for autonomously driving the vehicle is a general technique, and a detailed description thereof will be omitted.
  • the processor 870 can control the communication unit 810 to acquire positional information of the present vehicle.
  • the processor 870 can obtain the positional information (positional coordinates) of the vehicle 100 viewed through the positional information section 420 of the communication unit 810.
  • the processor 870 may also control the eHorizon module 830 of the communication unit 810 to receive the map information from the external server.
  • the eHorizon module 830 can receive the ADAS MAP from the external server eHorizon.
  • the map information may be included in the ADAS MAP.
  • the processor 870 can also control the V2X module 820 of the communication unit 810 to receive position information of the other vehicle from another vehicle.
  • the V2X module 820 can receive LDM data from another vehicle.
  • the position information of the other vehicle may be included in the LDM data.
  • the other vehicle means a vehicle existing within a certain distance from the vehicle, and the predetermined distance may be a communication available distance of the communication unit 810 or a distance set by a user.
  • the processor 870 can control the communication unit to receive the map information from the external server and the position information of the other vehicle from the other vehicle.
  • the processor 870 fuses the acquired vehicle position information and the received position information of the other vehicle with the received map information, and transmits the fused map information and the sensed vehicle through the sensing unit 840 And can control the vehicle 100 based on at least one of the related information.
  • the map information received from the external server may mean high-precision map information (HD-MAP) included in the ADAS MAP.
  • the high-precision map information can be recorded with information related to the road in a lane-based unit.
  • the processor 870 can fuse the positional information of the present vehicle 100 and the positional information of the other vehicle to the map information in units of lanes. In addition, the processor 870 can integrate information related to roads received from an external server and road-related information received from other vehicles into the map information in a lane-based unit.
  • the processor 870 can generate an ADAS MAP necessary for controlling the vehicle by using information related to the vehicle received through the ADAS MAP received from the external server and the sensing unit 840.
  • the processor 870 may apply information related to the vehicle sensed within a certain range to the map information received from the external server through the sensing unit 840.
  • the predetermined range may be an available distance at which the sensing unit 840 senses information, or may be a distance set by a user.
  • the processor 870 may apply the information related to the vehicle sensed within a certain range to the map information through the sensing unit, and then control the vehicle by further fusing the position information of the other vehicle.
  • the processor 870 can use only the information within the predetermined range from the vehicle, It can be an enemy.
  • the position information of the other vehicle received through the V2X module may be received from another vehicle existing in a space outside the predetermined range. This is because the communication available distance of the V2X module communicating with the other vehicle through the V2X module is farther than a certain range of the sensing unit 840.
  • the processor 870 fuses position information of other vehicles included in the LDM data received through the V2X module 820 with map information on which information related to the vehicle is sensed, It is possible to more effectively control the vehicle by using the position information of the vehicle.
  • the sensing unit can sense only the position information of the vehicle immediately preceding the vehicle.
  • the processor 870 can generate a control command for controlling the vehicle such that the vehicle overtakes the preceding vehicle.
  • the present invention can acquire position information of the other vehicle received through the V2X module.
  • the position information of the received other vehicle can acquire positional information of not only the vehicle immediately preceding the present vehicle 100 but also a plurality of other vehicles in front of the preceding vehicle.
  • the processor 870 can further determine whether the position information of the plurality of other vehicles obtained through the V2X module is inadequate to intervene by pasting the position information of the other vehicles to the map information to which the information related to the vehicle is applied.
  • the present invention can overcome the conventional technical limitations in which only the information related to the vehicle obtained through the sensing unit 840 is merely combined with the high-precision map information so that autonomous travel can be performed only within a certain range. That is, the present invention relates not only to the information related to the vehicle sensed through the sensing unit in the map information but also to the information related to the other vehicle received from the other vehicle at a greater distance than the predetermined range through the V2X module The vehicle control can be performed more accurately and stably.
  • Vehicle control described in this specification may include at least one of autonomously driving the vehicle 100 and outputting a warning message related to the running of the vehicle.
  • the processor controls the vehicle by using the LDM data received through the V2X module, the ADAS MAP received from the external server (eHorizon), and information related to the vehicle sensed through the sensing unit included in the vehicle The following is a more detailed description of how to do this.
  • 11A and 11B are conceptual diagrams for explaining a method of controlling a vehicle using an LDM and an ADAS MAP associated with the present invention.
  • a processor 870 included in the map providing apparatus 800 of the present invention may include a V2X / ADASIS IF (InterFace) and an ADASIS system.
  • the V2X / ADASIS IF and ADASIS systems may be in a hardware configuration or in the form of components that are software-dependent on functionality.
  • the V2X module 820 of the communication unit 810 can generate the V2X message (S1100).
  • the V2X message may include LDM data.
  • the V2X module 820 may generate the V2X message based on receipt of a V2X message transmission request from an infrastructure installed in another vehicle or on the road.
  • the V2X module 820 may generate the V2X message to request the position information of the other vehicle to another vehicle.
  • the processor 870 may transmit the V2X message to another vehicle and receive position information of another vehicle from the other vehicle.
  • the other vehicle to which the V2X message is transmitted may be another vehicle existing within a certain distance from the vehicle 100.
  • the predetermined distance may be determined by the available distance of the V2X module or the setting of the user.
  • the processor 870 can obtain position information of the other vehicle from at least one of the plurality of other vehicles through the V2X module 820.
  • the processor 870 (V2X / ADASIS IF) can calculate the relative position (relative distance) between the present vehicle and the other vehicle based on the position information of the received other vehicle (S1104).
  • the processor 870 may receive the ADAS MAP from the external server eHorizon through the eHorizon module 830 (S1104).
  • the ADAS MAP may include an accurate map capable of receiving map information, that is, information related to the road in lane-by-line units.
  • the processor 870 can determine information (vehicle information) related to the road in units of lanes in the received map information (S1106).
  • the processor 870 can align the relative position between the main vehicle and the other vehicle in the received map information (S1108).
  • the processor 870 extracts the relative position between the vehicle and the other vehicle that has transmitted the LDM data based on the LDM data received through the V2X module 820, and outputs the ADAS received via the eHorizon module 830
  • the relative positions of the extracted vehicles can be arranged in the lane-by-line in MAP (map information).
  • the present invention arranges the relative positions of the main vehicle and the other vehicle extracted through the V2X communication to a precision map (ADAS MAP received from an external server (eHorizon)) capable of fusing information on a lane basis, It is possible to generate a fusion map that can determine the real-time relative position between the vehicle and the other vehicle in units of lanes.
  • ADAS MAP received from an external server (eHorizon)
  • the V2X module 820 can redefine the V2X message using the ADAS MAP in which the relative position between the present vehicle and the other vehicle is aligned in a lane basis (S1110). Thereafter, processor 870 may send the redefined V2X message to another vehicle or infrastructure.
  • the processor 870 can generate an ADASIS standard message using the ADAS MAP received from the external server eHorizon (S1114).
  • the message may be a message used for autonomous driving of the vehicle.
  • the message may include an alert message generated in autonomous driving, an alert message informing road related information such as accident information / construction information, and the like.
  • the processor 870 can transmit the ADAS MAP (map information, high-precision map) in which the relative position between the present vehicle and the other vehicle is aligned in lane-by-line to the ADASIS system (S1108). Thereafter, the processor 870 performs the AD function (autonomous travel) using the ADASIS standard message and the ADAS MAP (map information, high-precision map) in which the relative position between the main vehicle and the other vehicle is aligned in a lane- (S1118).
  • AD function autonomous travel
  • the processor 870 of the present invention can control the vehicle using the ADAS MAP (map information, high-precision map) in which the relative positions between the present vehicle and the other vehicles are aligned in lane-by-line units (S1118) .
  • ADAS MAP map information, high-precision map
  • the present invention can calculate the relative position between the present vehicle and another vehicle using the position information of the other vehicle received from the other vehicle through the V2X communication. Then, the calculated relative position information can be arranged in a lane-based unit on the high-precision map received from the external server eHorizon.
  • the ADASIS system can be used for autonomous driving control by improving the accuracy of the autonomous driving (AD) functions by using the ADAS MAP which aligns relative position between the vehicle and the other vehicle in the lane unit.
  • AD autonomous driving
  • the V2X module can improve the accuracy of outputting warning messages related to driving of the vehicle by using a high-precision map capable of recording road-related information in a lane basis.
  • the LDM data and the ADAS MAP of the present invention can use different coordinates.
  • the processor 870 converts the coordinate system of the ADAS MAP 1060 received via the eHorizon module 830 into the coordinate system of the LDM data received via the V2X module 820 ,
  • the coordinate system of the LDM data 1050 can be converted into the coordinate system of the ADAS MAP.
  • the processor 870 may determine the coordinate system of the LDM data received through the V2X module and the coordinate system of the ADAS MAP received through the eHorizon module.
  • the coordinate system of the LDM data received through the V2X module may be a coordinate system of various kinds of coordinate systems such as a radial coordinate system, a Cartesian coordinate system, The coordinate system conversion can be performed so that the coordinate system is matched.
  • the processor 870 of the present invention can fuse (align) the position information of other vehicles included in the LDM data to the ADAS MAP in a lane-by-lane manner.
  • FIG. 12 is a block diagram for explaining the eHorizon system.
  • the eHorizon system consists of a server (or backend) and a vehicle (or vehicle).
  • the server provides a map to the vehicle, and the vehicle controls various devices provided in the vehicle using a map.
  • the map providing device 800 receives one or more maps from a server using a memory (or Horizon Cache), and provides the received maps to the electrical products.
  • the map providing device 800 collects the electrical equipment information received from the electrical equipment and performs positioning (or localization) using the collected electrical equipment information.
  • Positioning means specifying the current position of the vehicle using various information. For example, by comparing the information contained in the map received from the server with the electrical equipment information, one point at which the information is matched can be specified as the current position of the vehicle.
  • the vehicle performs autonomous driving using the map provided by the map providing device 800 or executes various functions related to autonomous driving. Therefore, the latest accuracy and accuracy of maps must be guaranteed for the safety of passengers on board the vehicle.
  • the map providing device 800 transmits the electrical equipment information generated by the electrical equipment to the server, and the server updates the map using the information transmitted from the map providing device 800.
  • the server manages the information received from the map providing device as big data, and adds new information to the map or edits or deletes existing information using the big data.
  • the object detection capability of the camera in the vehicle is deteriorated from a sensor capable of obtaining information on the surrounding environment (operation of the windshield wiper, fog lamp, weather information on the outside, sensor capable of detecting the degree of moisture in the windshield, etc.) Must not be passed on to other electrical products, and should not be forwarded to the server to update false information.
  • the positioning may be performed at a wrong position. If wrongly photographed signpost information is updated to the server, other vehicles will also use the wrong signpost information.
  • information updated from the map providing device to the server is processed as big data, so that real-time information can not be reflected.
  • the information received from the server is not real time information
  • the information received from the server should not be transmitted to the electrical products, and the information detected by the camera should be available.
  • FIG. 13 is a flowchart for explaining the operation of the map providing apparatus.
  • the present invention relates to a map providing apparatus (800) mounted on a vehicle (100) and providing map data to a plurality of electric products provided in the vehicle (100).
  • An electrical component is defined as any device that is provided in the vehicle 100 and communicates with the map providing device 800 by wire or wireless, and uses electricity as a power source.
  • each of the components described above in Fig. 7 may correspond to an electrical component.
  • the map providing device 800 includes the communication unit 810 and the processor 870.
  • the communication unit 810 is configured to communicate with the electric components and receives an original map including a plurality of layers from the server.
  • the communication unit 810 communicates with at least one of the electrical equipments in a wired or wireless manner, and can use a controller area network (CAN).
  • CAN controller area network
  • the original map may include one or more maps, and each map may comprise a plurality of layers.
  • the original map may include the LDM and the ADAS MAP described in FIGS. 10A and 10B. Further, the original map may further include a high-precision map (HD map) and a standard precision map (SD map).
  • HD map high-precision map
  • SD map standard precision map
  • the processor 870 receives electrical equipment information from at least one of the electrical components through the communication unit 810 (S1310).
  • the map providing device 800 receives the electrical equipment information generated by the electrical equipment through the communication unit 810.
  • the electrical equipment information includes weather information such as the operation of the wiper or the lamp, the humidity / temperature, and the rider / And local object information searched by using the local object information.
  • Electrical equipment information means information transmitted by electrical equipment, and it is possible to transmit different electrical equipment information for each electronic equipment.
  • the wiper can send wiper information to indicate whether the wiper is on / off, and if it is on, at what speed the wiper is operating.
  • the electric components may include an image sensor such as a camera / lidar / radar, and the electrical component information may include sensing information sensed by the image sensor.
  • the sensing information may include an image generated by the image sensor, one or more local objects searched from the image.
  • the processor 870 calculates the reliability of the electrical component information (S1330).
  • the map providing apparatus 800 receives the latest map from the server.
  • the most up-to-date information is electrical equipment information directly detected by various electric products installed in the vehicle. Therefore, an electric control unit (ECU) provided in a vehicle must simultaneously use external information such as a map received from a server and internal information such as electrical equipment information generated by electrical equipment provided in the vehicle.
  • ECU electric control unit
  • the processor 870 calculates the reliability of the electrical equipment information using the information received through the communication unit 810.
  • the processor 870 may use both the external information received from the server and the internal information received from the electrical equipments provided in the vehicle, as variables for calculating the reliability of electrical equipment information.
  • the processor 870 may conclude from the wiper information received from the wiper that the image sensor information received from the image sensor is not reliable if the wiper confirms that it is operating at a faster rate than the reference value.
  • weather information that the current temperature is 43 degrees can be received from the server.
  • the processor 870 may conclude that the RLID information received from the RL is unreliable if the reliable operation interval of RL is less than or equal to -10 degrees and less than or equal to 39 degrees.
  • the processor 870 can calculate the reliability of the electrical equipment information of each electrical component and the overall reliability of all the electrical component information received through the communication unit 810 for a predetermined time. For example, when the first electrical component information is received from the first electrical component and the second electrical component information is received from the second electrical component, the processor 870 calculates the first reliability of the first electrical component information and the second reliability of the second electrical component, The second reliability for the second electrical component information can be calculated. Furthermore, the total reliability of the first and second electrical component information may be calculated.
  • the predetermined time may be variable according to the amount of information received through the communication unit 810. For example, the predetermined time may become shorter as the amount of information increases, and may become longer as the amount of information decreases.
  • the time required to calculate the reliability is kept constant, and the control related to the electrical equipment information is made in time.
  • the predetermined time may vary depending on the speed of the vehicle 100 or the position of the vehicle 100. [ This is to maintain the response time required for autonomous driving in accordance with the autonomous driving situation. For example, the predetermined time may be shortened if the speed of the vehicle 100 is high, and may be long if the speed is low. For example, the predetermined time may be shortened when the vehicle 100 is located in an urban area with a large amount of traffic, and may be extended when the vehicle 100 is located in an outer area having a small amount of Kyoto.
  • the processor 870 can calculate not only the reliability of the electrical component information but also the reliability of the original map by comparing the original map and the electrical component information with each other.
  • the image sensor may provide the electrical product information of the two lanes as a search result, while the original map may be defined as eight lanes.
  • the reliability of the image sensor can be calculated higher and the reliability of the original map can be calculated to be lower.
  • the processor 870 may perform control related to the electrical component information based on the reliability.
  • the processor 870 may determine whether to generate a machining map based on the reliability using the electrical component information.
  • the processor 870 may include the electrical component information whose reliability is higher than or equal to the machining criterion, except for the electrical component information whose reliability is lower than the machining criterion, in generating the machining map.
  • the processor 870 can determine whether to transmit the electrical component information to the server based on the reliability. For example, the electrical component information whose reliability is lower than the update criterion is excluded from the update, and the electrical component information whose reliability is higher than or equal to the update criterion can be updated.
  • 14 is a flowchart for explaining an embodiment of control related to electrical equipment information.
  • the processor 870 may generate the machining map from the original map using the electrical equipment information when the reliability meets predetermined conditions.
  • the processor 870 provides an original map or a machining map as electrical components provided in the vehicle 100.
  • the electrical component information to be included in the machining map to be transmitted to the electrical products can be determined based on the reliability.
  • the processor 870 selects at least one of the original map and the electrical component information based on the reliability (S1410).
  • an external information criterion for the original map and an internal information criterion for the electrical component information may be set. If the reliability of the original map is higher than the external information criterion, the original map is selected. However, if the reliability of the original map is lower than or equal to the external information criterion, the original map is not selected. If the reliability of the electrical component information is higher than the internal information criterion, the electrical component information is selected. However, if the reliability of the electrical component information is lower than or equal to the internal information criterion, the electrical component information is not selected.
  • the processor 870 may compare the reliability of the original map with the reliability of the electrical equipment information, and may select either the original map or the electrical equipment information. In this case, the original map or electrical equipment information is selected.
  • the machining map can be generated using the selected information (S1430).
  • the information not selected by the processor among the original map and the electrical product information is not included in the machining map.
  • the vehicle 100 can perform autonomous traveling using purely internal information generated in the vehicle without utilizing the map received from the server.
  • the vehicle 100 does not use the electrical component information even when the electrical component information is directly received from the electrical component.
  • the processor 870 may select at least one of the plurality of layers included in the original map based on the electrical component information. In this case, one or more layers of the plurality of layers not selected by the processor are excluded from the machining map.
  • the third layer of the original map includes the traffic light information
  • the electrical equipment information that the traffic light included in the third layer is not lost from the image sensor may be received.
  • the original map may include a plurality of dynamic objects to be sensed by at least one electrical component.
  • a traffic light corresponds to an example of a dynamic object.
  • the processor 870 may select at least one of the plurality of dynamic objects included in the original map based on the electrical component information.
  • One or more dynamic objects not selected by the processor among the plurality of dynamic objects are excluded from the machining map.
  • a traffic light not all of the third layer is excluded from the machining map, but a specific dynamic object called a traffic light can be deleted from the machining map.
  • the electrical component information may include a plurality of electrical component information received from different electrical components.
  • the electrical component information may include first electrical component information received from the first electrical component and second electrical component information received from the second electrical component.
  • the processor 870 calculates the first reliability of the first electrical component information and the second reliability of the second electrical component information, and generates the machining map based on the first reliability and the second reliability, 1 < / RTI > electrical component information and the second electrical component information.
  • the location information of a predetermined object is provided as (x1, y1, z1), and the location of the predetermined object is defined as (x2, y2, z2)
  • the radar may provide the second electrical component information by sensing the position information of the predetermined object as (x3, y3, z3).
  • the processor 870 specifies the position of a predetermined object by using the original map, the first and second electrical product information, and based on the first reliability of the first electrical product information and the second reliability of the second electrical product information, The first electrical component and the second electrical component information may be assigned different weights. Thus, more reliable location information can be provided.
  • the machining map is provided to the electrical equipment through the communication unit 810, and the electrical equipment performs its own operation using the provided machining map.
  • 15 is a flowchart for explaining a method of calculating the reliability of the electrical component information.
  • the processor 870 receives electrical equipment information including a plurality of local objects from at least one electrical component (S1510).
  • a dynamic object is made to be sensed by at least one electrical component and, unlike the one contained in the original map, the local object is sensed by at least one electrical component.
  • a speed limit sign may be set as a dynamic object, and location information of the speed limit sign may be included.
  • the image sensor may sense the speed limit sign as a local object, and generate the sensed position information as electrical equipment information.
  • the reliability of the electrical equipment information is calculated by comparing the local objects and the plurality of dynamic objects included in the original map (S1530).
  • the original map is corrected based on the reliability (or a machining map is generated) (S1550).
  • the processor 870 corrects the original map using the local objects when the reliability of the electrical equipment information satisfies a predetermined condition.
  • At least one of the reference point and the reference axis of the original map can be moved using the local objects.
  • the processor 870 may classify the dynamic objects into a first group that matches the local objects and a second group that does not match the local objects have.
  • the dynamic objects included in the second group can be modified. That is, it is possible not to change the reference point or the reference axis but to change the position information set in the specific dynamic object.
  • 16 is a flowchart for explaining an embodiment of control related to the electrical component information.
  • the processor 870 can determine whether to transmit the electrical component information to the server based on the reliability of the electrical component information.
  • the processor 870 controls the communication unit 810 to transmit the electrical component information to the server when the reliability of the electrical component information is higher than the reliability of the original map. On the contrary. When the reliability of the electrical component information is higher than the reliability of the original map, the processor 870 controls the communication unit 810 so that the original map is not transmitted to the electric components.
  • the processor 870 determines the electrical equipment information to be updated based on the reliability of the electrical equipment information (S1610), and transmits the determined information to the server (S1630).
  • the processor 870 selects the first electrical component information, Only the selected first electrical component information can be transmitted to the server.
  • the processor 870 has one or more local objects that do not match the dynamic objects among the local objects included in the electrical equipment information, the local object information about the one or more local objects is transmitted to the server The communication unit 810 can be controlled.
  • the processor 870 controls the communication unit 810 to transmit the local object information to another vehicle It is possible. In this case, since it is transmitted to another vehicle through V2X communication, it is possible to transmit local object information more directly.
  • the local object information may include an image capturing the one or more local objects, and location information for guiding the one or more local objects.
  • FIG. 17 is a block diagram for more specifically explaining a map providing apparatus according to the present invention
  • FIG. 18 is a flowchart for explaining the operation of the map providing apparatus of FIG.
  • the map providing apparatus 800 receives an original map (inCloud) from a server and receives electrical component information (inCAM, inENV) from a sensor or other device.
  • inCloud original map
  • inENV electrical component information
  • the map providing apparatus 800 may further include a data comparator that performs the task of the processor 870 described above with reference to FIG. 13 to FIG.
  • the data comparator can generate map data (outEHP) to be transmitted to the electrical devices and determine the internal data (outCloud) to be transmitted to the server.
  • the data comparator when the reliability of the original map (inCould) received from the server is higher than or equal to the reliability of the electrical component information (inCAM) received from the sensor, the data comparator provides the original map to the electrical products, Do not transmit information.
  • the reliability of the original map (inCould) received from the server is smaller than the reliability of the electrical component information (inCAM) received from the sensor, a machining map is generated.
  • the electric devices are provided with a processing map instead of the original map, and the inCAM information is transmitted to the server.
  • 19 is a flowchart for explaining an embodiment of control relating to electrical equipment information.
  • the processor 870 of the map providing device 800 generates a predicted route in which the vehicle 100 is predicted to move or move (S1810).
  • the processor 870 extracts a part of the original map based on the predicted path and provides the extracted part to the electrical products instead of providing the whole of the original map received from the server to the electrical products. This is to reduce the computational complexity of electronic devices and to use cache effectively.
  • the processor 870 changes the predicted path to a new predicted path in operation S1830. Then, the processor 870 controls the communication unit 810 to receive the original map of the new predicted path from the server (S1850).
  • the original map managed by the server needs to immediately reflect the real-time information that occurs on the road. Since the information transmitted by a plurality of vehicles is processed as big data and can not be reflected immediately, there is a need for a process of performing an immediate update on necessary information.
  • the map providing device may have an emergency update condition preset to perform an immediate update. If the electrical component information received from at least one of the electric components corresponds to the emergency update condition, the processor 870 performs emergency update on the electrical component information. The server immediately updates the information received in the emergency update and reflects it on the map. Vehicles arriving in the area will receive a map of urgent updates, ensuring safety for multiple vehicles.
  • the emergency update condition for example, when a mismatch between a lane provided by an original map and a lane in which an image sensor or the like senses exceeds a reference value, there is an object whose collision possibility exceeds the reference value .
  • a vehicle designated as an emergency update such as an ambulance or a police car is detected within a predetermined range based on the vehicle 100.
  • the above-described present invention can be implemented as a computer-readable code (or application or software) on a medium on which the program is recorded.
  • the control method of the above-described autonomous vehicle can be realized by a code stored in a memory or the like.
  • the computer readable medium includes all kinds of recording devices in which data that can be read by a computer system is stored.
  • Examples of the computer readable medium include a hard disk drive (HDD), a solid state disk (SSD), a silicon disk drive (SDD), a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, , And may also be implemented in the form of a carrier wave (e.g., transmission over the Internet).
  • the computer may include a processor or a control unit. Accordingly, the above description should not be construed in a limiting sense in all respects and should be considered illustrative. The scope of the present invention should be determined by rational interpretation of the appended claims, and all changes within the scope of equivalents of the present invention are included in the scope of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Electromagnetism (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • Game Theory and Decision Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Educational Technology (AREA)
  • Human Resources & Organizations (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 차량에 장착되며 상기 차량에 구비된 복수의 전장품들에 지도 데이터를 제공하는 지도 제공 장치에 관한 것이다. 상기 지도 제공 장치는, 상기 전장품들과 통신을 수행하도록 이루어지며, 서버로부터 복수의 레이어들을 포함하는 원본 지도를 수신하도록 이루어지는 통신부 및 상기 전장품들 중 적어도 하나로부터 수신된 전장품 정보와 상기 원본 지도를 이용하여 상기 전장품 정보의 신뢰도를 산출하고, 상기 신뢰도에 근거하여 상기 전장품 정보와 관련된 제어를 수행하는 프로세서를 포함한다.

Description

지도 제공 장치
본 발명은 지도 제공 장치에 관한 것으로, 구체적으로 차량에 장착되며 상기 차량에 구비된 복수의 전장품들에 지도 데이터를 제공하는 지도 제공 장치에 관한 것이다.
차량은 운동 에너지를 이용하여 사람이나 짐을 이동시킬 수 있는 교통 수단을 의미한다. 차량의 대표적인 예로, 자동차 및 오토바이를 들 수 있다.
차량을 이용하는 사용자의 안전 및 편의를 위해, 차량에는 각종 센서와 장치가 구비되고 있으며, 차량의 기능이 다양화 되고 있다.
차량의 기능은 운전자의 편의를 도모하기 위한 편의 기능, 그리고 운전자 및/또는 보행자의 안전을 도모하기 위한 안전 기능으로 나뉠 수 있다.
먼저, 편의 기능은 차량에 인포테인먼트(information + entertainment) 기능을 부여하고, 부분적인 자율 주행 기능을 지원하거나, 야간 시야나 사각 지대와 같은 운전자의 시야 확보를 돕는 등의 운전자 편의와 관련된 개발 동기를 가진다. 예를 들어, 적응 순향 제어(active cruise control, ACC), 스마트주자시스템(smart parking assist system, SPAS), 나이트비전(night vision, NV), 헤드 업 디스플레이(head up display, HUD), 어라운드 뷰 모니터(around view monitor, AVM), 적응형 상향등 제어(adaptive headlight system, AHS) 기능 등이 있다.
안전 기능은 운전자의 안전 및/또는 보행자의 안전을 확보하는 기술로, 차선 이탈 경고 시스템(lane departure warning system, LDWS), 차선 유지 보조 시스템(lane keeping assist system, LKAS), 자동 긴급 제동(autonomous emergency braking, AEB) 기능 등이 있다.
상술한 편의 기능과 안전 기능이 보다 더 향상될 수 있도록, 차량에 특화된 통신 기술이 개발되고 있다. 예를 들어, 차량과 인프라간의 통신을 가능케 하는 V2I(Vehicle to Infrastructure), 차량과 차량간의 통신을 가능케 하는 V2V(Vehicle to Vehicle) 그리고, 차량과 사물간의 통신을 가능케 하는 V2X(Vehicle to Everything) 등이 있다.
ADAS(Advanced Driving Assist System)에 대한 개발이 활발히 이루어짐에 따라, 차량 운행에 있어서 사용자 편의와 안전을 극대화할 수 있는 기술 개발의 필요성이 대두되고 있다.
이에 대한 일환으로, EU OEM(European Union Original Equipment Manufacturing) 연합은 이호라이즌((electronic Horizon, 이하 ‘eHorizon’로 호칭)을 자율주행 시스템 및 인포테인먼트(infortainment) 시스템으로 효과적으로 전달하기 위해, 데이터규격과 전송방식을 ‘ADASIS(Advanced Driver Assist System Interface Specification)’라는 이름의 표준으로 제정하였다.
차량에 구비된 복수의 전장품들에 지도 데이터를 제공하는 eHorizon은 차량의 자율 주행을 위한 필수요소로 자리잡고 있다.
자율 주행 표준 아키텍쳐의 핵심은 데이터의 최신성 유지이다. 이를 위해, 차량은 서버로부터 다양한 지도를 다운로드 하여 이용함과 동시에, 차량에 구비된 전장품들에 의하여 센싱된 다양한 정보를 서버로 전달한다. 서버는 차량으로부터 수신된 정보를 빅데이터로 관리하며, 자신이 가지고 있는 지도의 최신성을 유지한다.
서버로부터 수신된 외부 정보와 전장품들에 의하여 생성된 내부 정보가 불일치 할 경우가 문제된다. 적어도 하나의 정보는 잘못된 정보에 해당하며, 이를 차량이 그대로 이용할 경우 사고의 원인이 되기 때문이다.
본 발명은 전술한 문제 및 다른 문제를 해결하는 것을 목적으로 한다.
본 발명의 일 목적은, 서버로부터 수신된 외부 정보와 차량 내에서 생성된 내부 정보가 불일치 하는 상태에서 차량의 안전을 도모할 수 있는 지도 제공 장치를 제공하는 것이다.
본 발명의 일 목적은, 차량의 안전을 도모하면서도 연산량을 획기적으로 축소시킬 수 있는 지도 제공 장치를 제공하는 것이다.
본 발명은 차량에 장착되며 상기 차량에 구비된 복수의 전장품들에 지도 데이터를 제공하는 지도 제공 장치에 관한 것이다.
상기 지도 제공 장치는, 상기 전장품들과 통신을 수행하도록 이루어지며, 서버로부터 복수의 레이어들을 포함하는 원본 지도를 수신하도록 이루어지는 통신부; 및 상기 전장품들 중 적어도 하나로부터 수신된 전장품 정보와 상기 원본 지도를 이용하여 상기 전장품 정보의 신뢰도를 산출하고, 상기 신뢰도에 근거하여 상기 전장품 정보와 관련된 제어를 수행하는 프로세서를 포함한다.
일 실시 예에 따르면, 상기 프로세서는, 상기 신뢰도가 기설정된 조건을 만족하는 경우, 상기 전장품 정보를 이용하여 상기 원본 지도로부터 가공 지도를 생성하며, 상기 가공 지도가 상기 전장품들에 제공되도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 신뢰도에 근거하여 상기 원본 지도 및 상기 전장품 정보 중 적어도 하나를 선택하고, 선택된 정보를 이용하여 상기 가공 지도를 생성할 수 있다.
일 실시 예에 따르면, 상기 원본 지도 및 상기 전장품 정보 중 상기 프로세서에 의하여 선택되지 않은 정보는 상기 가공 지도에 포함되지 않을 수 있다.
일 실시 예에 따르면, 상기 프로세서는 상기 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 레이어들 중 적어도 하나를 선택하며, 상기 복수의 레이어들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 레이어들은 상기 가공 지도에서 제외될 수 있다.
일 실시 예에 따르면, 상기 원본 지도에는 적어도 하나의 전장품에 의하여 센싱 되도록 이루어지는 복수의 다이내믹 객체들이 포함하고, 상기 프로세서는 상기 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 다이내믹 객체들 중 적어도 하나를 선택하며, 상기 복수의 다이내믹 객체들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 다이내믹 객체들은 상기 가공 지도에서 제외될 수 있다.
일 실시 예에 따르면, 상기 전장품 정보는 제1 전장품에서 수신된 제1 전장품 정보 및 제2 전장품에서 수신된 제2 전장품 정보를 포함하며, 상기 프로세서는, 상기 제1 전장품 정보의 제1 신뢰도 및 상기 제2 전장품 정보의 제2 신뢰도를 산출하며, 상기 가공 지도를 생성함에 있어서 상기 제1 신뢰도 및 상기 제2 신뢰도를 고려하여 상기 제1 전장품 정보 및 상기 제2 전장품 정보에 서로 다른 가중치를 부여할 수 있다.
일 실시 예에 따르면, 상기 원본 지도에는 적어도 하나의 전장품에 의하여 센싱 되도록 이루어지는 복수의 다이내믹 객체들이 포함하고, 상기 전장품 정보에는 적어도 하나의 전장품에 의하여 센싱된 복수의 로컬 객체들이 포함하며, 상기 프로세서는, 상기 다이내믹 객체들과 상기 로컬 객체들을 이용하여 상기 신뢰도를 산출할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 신뢰도가 기설정된 조건을 만족하는 경우, 상기 로컬 객체들을 이용하여 상기 원본 지도를 수정할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 로컬 객체들을 이용하여 상기 원본 지도의 기준점 및 기준축 중 적어도 하나를 이동시킬 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 다이내믹 객체들을 상기 로컬 객체들과 매칭되는 제1그룹과 상기 로컬 객체들과 매칭되지 않는 제2그룹으로 분류하고, 상기 신뢰도가 상기 기설정된 조건을 만족하는 경우, 상기 제2그룹에 포함된 다이내믹 객체들을 수정할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 하나 또는 그 이상의 로컬 객체들에 관한 로컬 객체 정보가 상기 서버로 전송되도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 로컬 객체 정보가 타 차량에 전송되도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 로컬 객체 정보는 상기 하나 또는 그 이상의 로컬 객체들을 캡쳐한 이미지, 그리고 상기 하나 또는 그 이상의 로컬 객체들을 가이드 하는 위치 정보를 포함할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 차량이 이동할 것으로 예측되거나 이동해야 하는 예측 경로를 생성하며, 상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 상기 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 예측 경로를 새로운 예측 경로로 변경할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 예측 경로가 상기 새로운 예측 경로로 변경되는 경우, 상기 새로운 예측 경로에 대한 원본 지도가 상기 서버로부터 수신되도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 전장품 정보의 신뢰도에 근거하여 상기 전장품 정보를 상기 서버로 전송할지 여부를 결정할 수 있다.
일 실시 예에 따르면, 상기 프로세서는 상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 전장품 정보가 상기 서버로 전송되도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 원본 지도가 상기 전장품들에 전송되지 않도록 상기 통신부를 제어할 수 있다.
일 실시 예에 따르면, 상기 전장품들에는 이미지 센서가 포함되고, 상기 전장품 정보에는 상기 이미지 센서에 의하여 센싱된 센싱 정보가 포함될 수 있다.
본 발명에 따른 지도 제공 장치의 효과에 대해 설명하면 다음과 같다.
서버로부터 수신된 외부 정보와 차량에 구비된 전장품이 생성한 내부 정보를 비교하고 신뢰도가 더 높은 정보를 전장품들에 제공하기 때문에, 전장품들에 제공하는 정보의 신뢰성과 안전성을 보장할 수 있다. 신뢰도에 따라 서버로 업데이트 되는 전장품 정보도 선별되기 때문에, 서버의 연산량이 축소되며, 꼭 필요한 정보만 업데이트 되는 새로운 효과가 있다.
도 1은 본 발명의 실시예에 따른 차량의 외관을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 차량을 외부의 다양한 각도에서 본 도면이다.
도 3 내지 도 4는 본 발명의 실시예에 따른 차량의 내부를 도시한 도면이다.
도 5 내지 도 6은 본 발명의 실시예에 따른 오브젝트를 설명하는데 참조되는 도면이다.
도 7은 본 발명의 실시예에 따른 차량을 설명하는데 참조되는 블럭도이다.
도 8은 본 발명과 관련된 eHorizon을 설명하기 위한 개념도이다.
도 9는 본 발명의 일 실시 예에 따른 지도 제공 장치를 설명하기 위한 개념도이다.
도 10a 및 도 10b는 본 발명과 관련된 LDM(Local Dynamic Map)과 ADAS(Advanced Driver Assistance System) MAP을 설명하기 위한 개념도이다.
도 11a 및 도 11b는 본 발명과 관련된 LDM과 ADAS MAP을 이용하여 차량을 제어하는 방법을 설명하기 위한 개념도이다.
도 12는 eHorizon 시스템을 설명하기 위한 블록도이다.
도 13은 지도 제공 장치의 동작을 설명하기 위한 흐름도이다.
도 14는 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
도 15는 전장품 정보의 신뢰도를 산출하는 방법을 설명하기 위한 흐름도이다.
도 16은 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
도 17은 본 발명에 따른 지도 제공 장치를 좀 더 구체적으로 설명하기 위한 블록도이다.
도 18은 도 17의 지도 제공 장치의 동작을 설명하기 위한 흐름도이다.
도 19는 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서 기술되는 차량은, 자동차, 오토바이를 포함하는 개념일 수 있다. 이하에서는, 차량에 대해 자동차를 위주로 기술한다.
본 명세서에서 기술되는 차량은, 동력원으로서 엔진을 구비하는 내연기관 차량, 동력원으로서 엔진과 전기 모터를 구비하는 하이브리드 차량, 동력원으로서 전기 모터를 구비하는 전기 차량등을 모두 포함하는 개념일 수 있다.
이하의 설명에서 차량의 좌측은 차량의 주행 방향의 좌측을 의미하고, 차량의 우측은 차량의 주행 방향의 우측을 의미한다.
도 1은 본 발명의 실시예에 따른 차량의 외관을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 차량을 외부의 다양한 각도에서 본 도면이다.
도 3 내지 도 4는 본 발명의 실시예에 따른 차량의 내부를 도시한 도면이다.
도 5 내지 도 6은 본 발명의 실시예에 따른 오브젝트를 설명하는데 참조되는 도면이다.
도 7은 본 발명의 실시예에 따른 차량을 설명하는데 참조되는 블럭도이다.
도 1 내지 도 7을 참조하면, 차량(100)은 동력원에 의해 회전하는 바퀴, 차량(100)의 진행 방향을 조절하기 위한 조향 입력 장치(510)를 포함할 수 있다.
차량(100)은 자율 주행 차량일 수 있다.
차량(100)은, 사용자 입력에 기초하여, 자율 주행 모드 또는 메뉴얼 모드로 전환될 수 있다.
예를 들면, 차량(100)은, 사용자 인터페이스 장치(200)를 통해, 수신되는 사용자 입력에 기초하여, 메뉴얼 모드에서 자율 주행 모드로 전환되거나, 자율 주행 모드에서 메뉴얼 모드로 전환될 수 있다.
차량(100)은, 주행 상황 정보에 기초하여, 자율 주행 모드 또는 메뉴얼 모드로 전환될 수 있다. 주행 상황 정보는, 오브젝트 검출 장치(300)에서 제공된 오브젝트 정보에 기초하여 생성될 수 있다.
예를 들면, 차량(100)은, 오브젝트 검출 장치(300)에서 생성되는 주행 상황 정보에 기초하여, 메뉴얼 모드에서 자율 주행 모드로 전환되거나, 자율 주행 모드에서 메뉴얼 모드로 전환될 수 있다.
예를 들면, 차량(100)은, 통신 장치(400)를 통해 수신되는 주행 상황 정보에 기초하여, 메뉴얼 모드에서 자율 주행 모드로 전환되거나, 자율 주행 모드에서 메뉴얼 모드로 전환될 수 있다.
차량(100)은, 외부 디바이스에서 제공되는 정보, 데이터, 신호에 기초하여 메뉴얼 모드에서 자율 주행 모드로 전환되거나, 자율 주행 모드에서 메뉴얼 모드로 전환될 수 있다.
차량(100)이 자율 주행 모드로 운행되는 경우, 자율 주행 차량(100)은, 운행 시스템(700)에 기초하여 운행될 수 있다.
예를 들면, 자율 주행 차량(100)은, 주행 시스템(710), 출차 시스템(740), 주차 시스템(750)에서 생성되는 정보, 데이터 또는 신호에 기초하여 운행될 수 있다.
차량(100)이 메뉴얼 모드로 운행되는 경우, 자율 주행 차량(100)은, 운전 조작 장치(500)를 통해 운전을 위한 사용자 입력을 수신할 수 있다. 운전 조작 장치(500)를 통해 수신되는 사용자 입력에 기초하여, 차량(100)은 운행될 수 있다.
전장(overall length)은 차량(100)의 앞부분에서 뒷부분까지의 길이, 전폭(width)은 차량(100)의 너비, 전고(height)는 바퀴 하부에서 루프까지의 길이를 의미한다. 이하의 설명에서, 전장 방향(L)은 차량(100)의 전장 측정의 기준이 되는 방향, 전폭 방향(W)은 차량(100)의 전폭 측정의 기준이 되는 방향, 전고 방향(H)은 차량(100)의 전고 측정의 기준이 되는 방향을 의미할 수 있다.
도 7에 예시된 바와 같이, 차량(100)은, 사용자 인터페이스 장치(200), 오브젝트 검출 장치(300), 통신 장치(400), 운전 조작 장치(500), 차량 구동 장치(600), 운행 시스템(700), 내비게이션 시스템(770), 센싱부(120), 인터페이스부(130), 메모리(140), 제어부(170) 및 전원 공급부(190)를 포함할 수 있다.
실시예에 따라, 차량(100)은, 본 명세서에서 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수 있다.
사용자 인터페이스 장치(200)는, 차량(100)과 사용자와의 소통을 위한 장치이다. 사용자 인터페이스 장치(200)는, 사용자 입력을 수신하고, 사용자에게 차량(100)에서 생성된 정보를 제공할 수 있다. 차량(100)은, 사용자 인터페이스 장치(200)를 통해, UI(User Interfaces) 또는 UX(User Experience)를 구현할 수 있다.
사용자 인터페이스 장치(200)는, 입력부(210), 내부 카메라(220), 생체 감지부(230), 출력부(250) 및 프로세서(270)를 포함할 수 있다.
실시예에 따라, 사용자 인터페이스 장치(200)는, 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수도 있다.
입력부(200)는, 사용자로부터 정보를 입력받기 위한 것으로, 입력부(120)에서 수집한 데이터는, 프로세서(270)에 의해 분석되어, 사용자의 제어 명령으로 처리될 수 있다.
입력부(200)는, 차량 내부에 배치될 수 있다. 예를 들면, 입력부(200)는, 스티어링 휠(steering wheel)의 일 영역, 인스투루먼트 패널(instrument panel)의 일 영역, 시트(seat)의 일 영역, 각 필러(pillar)의 일 영역, 도어(door)의 일 영역, 센타 콘솔(center console)의 일 영역, 헤드 라이닝(head lining)의 일 영역, 썬바이저(sun visor)의 일 영역, 윈드 쉴드(windshield)의 일 영역 또는 윈도우(window)의 일 영역 등에 배치될 수 있다.
입력부(200)는, 음성 입력부(211), 제스쳐 입력부(212), 터치 입력부(213) 및 기계식 입력부(214)를 포함할 수 있다.
음성 입력부(211)는, 사용자의 음성 입력을 전기적 신호로 전환할 수 있다. 전환된 전기적 신호는, 프로세서(270) 또는 제어부(170)에 제공될 수 있다.
음성 입력부(211)는, 하나 이상의 마이크로 폰을 포함할 수 있다.
제스쳐 입력부(212)는, 사용자의 제스쳐 입력을 전기적 신호로 전환할 수 있다. 전환된 전기적 신호는, 프로세서(270) 또는 제어부(170)에 제공될 수 있다.
제스쳐 입력부(212)는, 사용자의 제스쳐 입력을 감지하기 위한 적외선 센서 및 이미지 센서 중 적어도 어느 하나를 포함할 수 있다.
실시예에 따라, 제스쳐 입력부(212)는, 사용자의 3차원 제스쳐 입력을 감지할 수 있다. 이를 위해, 제스쳐 입력부(212)는, 복수의 적외선 광을 출력하는 광출력부 또는 복수의 이미지 센서를 포함할 수 있다.
제스쳐 입력부(212)는, TOF(Time of Flight) 방식, 구조광(Structured light) 방식 또는 디스패러티(Disparity) 방식을 통해 사용자의 3차원 제스쳐 입력을 감지할 수 있다.
터치 입력부(213)는, 사용자의 터치 입력을 전기적 신호로 전환할 수 있다. 전환된 전기적 신호는 프로세서(270) 또는 제어부(170)에 제공될 수 있다.
터치 입력부(213)는, 사용자의 터치 입력을 감지하기 위한 터치 센서를 포함할 수 있다.
실시예에 따라, 터치 입력부(213)는 디스플레이부(251)와 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한, 터치 스크린은, 차량(100)과 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 함께 제공할 수 있다.
기계식 입력부(214)는, 버튼, 돔 스위치(dome switch), 조그 휠 및 조그 스위치 중 적어도 어느 하나를 포함할 수 있다. 기계식 입력부(214)에 의해 생성된 전기적 신호는, 프로세서(270) 또는 제어부(170)에 제공될 수 있다.
기계식 입력부(214)는, 스티어링 휠, 센테 페시아, 센타 콘솔, 칵픽 모듈, 도어 등에 배치될 수 있다.
내부 카메라(220)는, 차량 내부 영상을 획득할 수 있다. 프로세서(270)는, 차량 내부 영상을 기초로, 사용자의 상태를 감지할 수 있다. 프로세서(270)는, 차량 내부 영상에서 사용자의 시선 정보를 획득할 수 있다. 프로세서(270)는, 차량 내부 영상에서 사용자의 제스쳐를 감지할 수 있다.
생체 감지부(230)는, 사용자의 생체 정보를 획득할 수 있다. 생체 감지부(230)는, 사용자의 생체 정보를 획득할 수 있는 센서를 포함하고, 센서를 이용하여, 사용자의 지문 정보, 심박동 정보 등을 획득할 수 있다. 생체 정보는 사용자 인증을 위해 이용될 수 있다.
출력부(250)는, 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것이다.
출력부(250)는, 디스플레이부(251), 음향 출력부(252) 및 햅틱 출력부(253) 중 적어도 어느 하나를 포함할 수 있다.
디스플레이부(251)는, 다양한 정보에 대응되는 그래픽 객체를 표시할 수 있다.
디스플레이부(251)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉서블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전자잉크 디스플레이(e-ink display) 중에서 적어도 하나를 포함할 수 있다.
디스플레이부(251)는 터치 입력부(213)와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다.
디스플레이부(251)는 HUD(Head Up Display)로 구현될 수 있다. 디스플레이부(251)가 HUD로 구현되는 경우, 디스플레이부(251)는 투사 모듈을 구비하여 윈드 쉴드 또는 윈도우에 투사되는 이미지를 통해 정보를 출력할 수 있다.
디스플레이부(251)는, 투명 디스플레이를 포함할 수 있다. 투명 디스플레이는 윈드 쉴드 또는 윈도우에 부착될 수 있다.
투명 디스플레이는 소정의 투명도를 가지면서, 소정의 화면을 표시할 수 있다. 투명 디스플레이는, 투명도를 가지기 위해, 투명 디스플레이는 투명 TFEL(Thin Film Elecroluminescent), 투명 OLED(Organic Light-Emitting Diode), 투명 LCD(Liquid Crystal Display), 투과형 투명디스플레이, 투명 LED(Light Emitting Diode) 디스플레이 중 적어도 하나를 포함할 수 있다. 투명 디스플레이의 투명도는 조절될 수 있다.
한편, 사용자 인터페이스 장치(200)는, 복수의 디스플레이부(251a 내지 251g)를 포함할 수 있다.
디스플레이부(251)는, 스티어링 휠의 일 영역, 인스투루먼트 패널의 일 영역(521a, 251b, 251e), 시트의 일 영역(251d), 각 필러의 일 영역(251f), 도어의 일 영역(251g), 센타 콘솔의 일 영역, 헤드 라이닝의 일 영역, 썬바이저의 일 영역에 배치되거나, 윈드 쉴드의 일영역(251c), 윈도우의 일영역(251h)에 구현될 수 있다.
음향 출력부(252)는, 프로세서(270) 또는 제어부(170)로부터 제공되는 전기 신호를 오디오 신호로 변환하여 출력한다. 이를 위해, 음향 출력부(252)는, 하나 이상의 스피커를 포함할 수 있다.
햅틱 출력부(253)는, 촉각적인 출력을 발생시킨다. 예를 들면, 햅틱 출력부(253)는, 스티어링 휠, 안전 벨트, 시트(110FL, 110FR, 110RL, 110RR)를 진동시켜, 사용자가 출력을 인지할 수 있게 동작할 수 있다.
프로세서(270)는, 사용자 인터페이스 장치(200)의 각 유닛의 전반적인 동작을 제어할 수 있다.
실시예에 따라, 사용자 인터페이스 장치(200)는, 복수의 프로세서(270)를 포함하거나, 프로세서(270)를 포함하지 않을 수도 있다.
사용자 인터페이스 장치(200)에 프로세서(270)가 포함되지 않는 경우, 사용자 인터페이스 장치(200)는, 차량(100)내 다른 장치의 프로세서 또는 제어부(170)의 제어에 따라, 동작될 수 있다.
한편, 사용자 인터페이스 장치(200)는, 차량용 디스플레이 장치로 명명될 수 있다.
사용자 인터페이스 장치(200)는, 제어부(170)의 제어에 따라 동작될 수 있다.
오브젝트 검출 장치(300)는, 차량(100) 외부에 위치하는 오브젝트를 검출하기 위한 장치이다.
오브젝트는, 차량(100)의 운행과 관련된 다양한 물체들일 수 있다.
도 5 내지 도 6을 참조하면, 오브젝트(O)는, 차선(OB10), 타 차량(OB11), 보행자(OB12), 이륜차(OB13), 교통 신호(OB14, OB15), 빛, 도로, 구조물, 과속 방지턱, 지형물, 동물 등을 포함할 수 있다.
차선(Lane)(OB10)은, 주행 차선, 주행 차선의 옆 차선, 대향되는 차량이 주행하는 차선일 수 있다. 차선(Lane)(OB10)은, 차선(Lane)을 형성하는 좌우측 선(Line)을 포함하는 개념일 수 있다.
타 차량(OB11)은, 차량(100)의 주변에서 주행 중인 차량일 수 있다. 타 차량은, 차량(100)으로부터 소정 거리 이내에 위치하는 차량일 수 있다. 예를 들면, 타 차량(OB11)은, 차량(100)보다 선행 또는 후행하는 차량일 수 있다.
보행자(OB12)는, 차량(100)의 주변에 위치한 사람일 수 있다. 보행자(OB12)는, 차량(100)으로부터 소정 거리 이내에 위치하는 사람일 수 있다. 예를 들면, 보행자(OB12)는, 인도 또는 차도상에 위치하는 사람일 수 있다.
이륜차(OB12)는, 차량(100)의 주변에 위치하고, 2개의 바퀴를 이용해 움직이는 탈것을 의미할 수 있다. 이륜차(OB12)는, 차량(100)으로부터 소정 거리 이내에 위치하는 2개의 바퀴를 가지는 탈 것일 수 있다. 예를 들면, 이륜차(OB13)는, 인도 또는 차도상에 위치하는 오토바이 또는 자전거일 수 있다.
교통 신호는, 교통 신호등(OB15), 교통 표지판(OB14), 도로면에 그려진 문양 또는 텍스트를 포함할 수 있다.
빛은, 타 차량에 구비된 램프에서 생성된 빛일 수 있다. 빛은, 가로등에서 생성된 빛을 수 있다. 빛은 태양광일 수 있다.
도로는, 도로면, 커브, 오르막, 내리막 등의 경사 등을 포함할 수 있다.
구조물은, 도로 주변에 위치하고, 지면에 고정된 물체일 수 있다. 예를 들면, 구조물은, 가로등, 가로수, 건물, 전봇대, 신호등, 다리를 포함할 수 있다.
지형물은, 산, 언덕, 등을 포함할 수 있다.
한편, 오브젝트는, 이동 오브젝트와 고정 오브젝트로 분류될 수 있다. 예를 들면, 이동 오브젝트는, 타 차량, 보행자를 포함하는 개념일 수 있다. 예를 들면, 고정 오브젝트는, 교통 신호, 도로, 구조물을 포함하는 개념일 수 있다.
오브젝트 검출 장치(300)는, 카메라(310), 레이다(320), 라이다(330), 초음파 센서(340), 적외선 센서(350) 및 프로세서(370)를 포함할 수 있다.
실시예에 따라, 오브젝트 검출 장치(300)는, 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수 있다.
카메라(310)는, 차량 외부 영상을 획득하기 위해, 차량의 외부의 적절한 곳에 위치할 수 있다. 카메라(310)는, 모노 카메라, 스테레오 카메라(310a), AVM(Around View Monitoring) 카메라(310b) 또는 360도 카메라일 수 있다.
예를 들면, 카메라(310)는, 차량 전방의 영상을 획득하기 위해, 차량의 실내에서, 프런트 윈드 쉴드에 근접하게 배치될 수 있다. 또는, 카메라(310)는, 프런트 범퍼 또는 라디에이터 그릴 주변에 배치될 수 있다.
예를 들면, 카메라(310)는, 차량 후방의 영상을 획득하기 위해, 차량의 실내에서, 리어 글라스에 근접하게 배치될 수 있다. 또는, 카메라(310)는, 리어 범퍼, 트렁크 또는 테일 게이트 주변에 배치될 수 있다.
예를 들면, 카메라(310)는, 차량 측방의 영상을 획득하기 위해, 차량의 실내에서 사이드 윈도우 중 적어도 어느 하나에 근접하게 배치될 수 있다. 또는, 카메라(310)는, 사이드 미러, 휀더 또는 도어 주변에 배치될 수 있다.
카메라(310)는, 획득된 영상을 프로세서(370)에 제공할 수 있다.
레이다(320)는, 전자파 송신부, 수신부를 포함할 수 있다. 레이더(320)는 전파 발사 원리상 펄스 레이더(Pulse Radar) 방식 또는 연속파 레이더(Continuous Wave Radar) 방식으로 구현될 수 있다. 레이더(320)는 연속파 레이더 방식 중에서 신호 파형에 따라 FMCW(Frequency Modulated Continuous Wave)방식 또는 FSK(Frequency Shift Keyong) 방식으로 구현될 수 있다.
레이더(320)는 전자파를 매개로, TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식에 기초하여, 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다.
레이더(320)는, 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
라이다(330)는, 레이저 송신부, 수신부를 포함할 수 있다. 라이다(330)는, TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식으로 구현될 수 있다.
라이다(330)는, 구동식 또는 비구동식으로 구현될 수 있다.
구동식으로 구현되는 경우, 라이다(330)는, 모터에 의해 회전되며, 차량(100) 주변의 오브젝트를 검출할 수 있다.
비구동식으로 구현되는 경우, 라이다(330)는, 광 스티어링에 의해, 차량(100)을 기준으로 소정 범위 내에 위치하는 오브젝트를 검출할 수 있다. 차량(100)은 복수의 비구동식 라이다(330)를 포함할 수 있다.
라이다(330)는, 레이저 광 매개로, TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식에 기초하여, 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다.
라이다(330)는, 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
초음파 센서(340)는, 초음파 송신부, 수신부를 포함할 수 있다. 초음파 센서(340)은, 초음파를 기초로 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다.
초음파 센서(340)는, 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
적외선 센서(350)는, 적외선 송신부, 수신부를 포함할 수 있다. 적외선 센서(340)는, 적외선 광을 기초로 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다.
적외선 센서(350)는, 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
프로세서(370)는, 오브젝트 검출 장치(300)의 각 유닛의 전반적인 동작을 제어할 수 있다.
프로세서(370)는, 획득된 영상에 기초하여, 오브젝트를 검출하고, 트래킹할 수 있다. 프로세서(370)는, 영상 처리 알고리즘을 통해, 오브젝트와의 거리 산출, 오브젝트와의 상대 속도 산출등의 동작을 수행할 수 있다.
프로세서(370)는, 송신된 전자파가 오브젝트에 반사되어 되돌아오는 반사 전자파에 기초하여, 오브젝트를 검출하고, 트래킹할 수 있다. 프로세서(370)는, 전자파에 기초하여, 오브젝트와의 거리 산출, 오브젝트와의 상대 속도 산출 등의 동작을 수행할 수 있다.
프로세서(370)는, 송신된 레이저가 오브젝트에 반사되어 되돌아오는 반사 레이저 광에 기초하여, 오브젝트를 검출하고, 트래킹할 수 있다. 프로세서(370)는, 레이저 광에 기초하여, 오브젝트와의 거리 산출, 오브젝트와의 상대 속도 산출 등의 동작을 수행할 수 있다.
프로세서(370)는, 송신된 초음파가 오브젝트에 반사되어 되돌아오는 반사 초음파에 기초하여, 오브젝트를 검출하고, 트래킹할 수 있다. 프로세서(370)는, 초음파에 기초하여, 오브젝트와의 거리 산출, 오브젝트와의 상대 속도 산출 등의 동작을 수행할 수 있다.
프로세서(370)는, 송신된 적외선 광이 오브젝트에 반사되어 되돌아오는 반사 적외선 광에 기초하여, 오브젝트를 검출하고, 트래킹할 수 있다. 프로세서(370)는, 적외선 광에 기초하여, 오브젝트와의 거리 산출, 오브젝트와의 상대 속도 산출 등의 동작을 수행할 수 있다.
실시예에 따라, 오브젝트 검출 장치(300)는, 복수의 프로세서(370)를 포함하거나, 프로세서(370)를 포함하지 않을 수도 있다. 예를 들면, 카메라(310), 레이다(320), 라이다(330), 초음파 센서(340) 및 적외선 센서(350) 각각은 개별적으로 프로세서를 포함할 수 있다.
오브젝트 검출 장치(300)에 프로세서(370)가 포함되지 않는 경우, 오브젝트 검출 장치(300)는, 차량(100)내 장치의 프로세서 또는 제어부(170)의 제어에 따라, 동작될 수 있다.
오브젝트 검출 장치(400)는, 제어부(170)의 제어에 따라 동작될 수 있다.
통신 장치(400)는, 외부 디바이스와 통신을 수행하기 위한 장치이다. 여기서, 외부 디바이스는, 타 차량, 이동 단말기 또는 서버일 수 있다.
통신 장치(400)는, 통신을 수행하기 위해 송신 안테나, 수신 안테나, 각종 통신 프로토콜이 구현 가능한 RF(Radio Frequency) 회로 및 RF 소자 중 적어도 어느 하나를 포함할 수 있다.
통신 장치(400)는, 근거리 통신부(410), 위치 정보부(420), V2X 통신부(430), 광통신부(440), 방송 송수신부(450) 및 프로세서(470)를 포함할 수 있다.
실시예에 따라, 통신 장치(400)는, 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수 있다.
근거리 통신부(410)는, 근거리 통신(Short range communication)을 위한 유닛이다. 근거리 통신부(410)는, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다.
근거리 통신부(410)는, 근거리 무선 통신망(Wireless Area Networks)을 형성하여, 차량(100)과 적어도 하나의 외부 디바이스 사이의 근거리 통신을 수행할 수 있다.
위치 정보부(420)는, 차량(100)의 위치 정보를 획득하기 위한 유닛이다. 예를 들면, 위치 정보부(420)는, GPS(Global Positioning System) 모듈 또는 DGPS(Differential Global Positioning System) 모듈을 포함할 수 있다.
V2X 통신부(430)는, 서버(V2I : Vehicle to Infra), 타 차량(V2V : Vehicle to Vehicle) 또는 보행자(V2P : Vehicle to Pedestrian)와의 무선 통신 수행을 위한 유닛이다. V2X 통신부(430)는, 인프라와의 통신(V2I), 차량간 통신(V2V), 보행자와의 통신(V2P) 프로토콜이 구현 가능한 RF 회로를 포함할 수 있다.
광통신부(440)는, 광을 매개로 외부 디바이스와 통신을 수행하기 위한 유닛이다. 광통신부(440)는, 전기 신호를 광 신호로 전환하여 외부에 발신하는 광발신부 및 수신된 광 신호를 전기 신호로 전환하는 광수신부를 포함할 수 있다.
실시예에 따라, 광발신부는, 차량(100)에 포함된 램프와 일체화되게 형성될 수 있다.
방송 송수신부(450)는, 방송 채널을 통해, 외부의 방송 관리 서버로부터 방송 신호를 수신하거나, 방송 관리 서버에 방송 신호를 송출하기 위한 유닛이다. 방송 채널은, 위성 채널, 지상파 채널을 포함할 수 있다. 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 수 있다.
프로세서(470)는, 통신 장치(400)의 각 유닛의 전반적인 동작을 제어할 수 있다.
실시예에 따라, 통신 장치(400)는, 복수의 프로세서(470)를 포함하거나, 프로세서(470)를 포함하지 않을 수도 있다.
통신 장치(400)에 프로세서(470)가 포함되지 않는 경우, 통신 장치(400)는, 차량(100)내 다른 장치의 프로세서 또는 제어부(170)의 제어에 따라, 동작될 수 있다.
한편, 통신 장치(400)는, 사용자 인터페이스 장치(200)와 함께 차량용 디스플레이 장치를 구현할 수 있다. 이경우, 차량용 디스플레이 장치는, 텔레 매틱스(telematics) 장치 또는 AVN(Audio Video Navigation) 장치로 명명될 수 있다.
통신 장치(400)는, 제어부(170)의 제어에 따라 동작될 수 있다.
운전 조작 장치(500)는, 운전을 위한 사용자 입력을 수신하는 장치이다.
메뉴얼 모드인 경우, 차량(100)은, 운전 조작 장치(500)에 의해 제공되는 신호에 기초하여 운행될 수 있다.
운전 조작 장치(500)는, 조향 입력 장치(510), 가속 입력 장치(530) 및 브레이크 입력 장치(570)를 포함할 수 있다.
조향 입력 장치(510)는, 사용자로부터 차량(100)의 진행 방향 입력을 수신할 수 있다. 조향 입력 장치(510)는, 회전에 의해 조향 입력이 가능하도록 휠 형태로 형성되는 것이 바람직하다. 실시예에 따라, 조향 입력 장치는, 터치 스크린, 터치 패드 또는 버튼 형태로 형성될 수도 있다.
가속 입력 장치(530)는, 사용자로부터 차량(100)의 가속을 위한 입력을 수신할 수 있다. 브레이크 입력 장치(570)는, 사용자로부터 차량(100)의 감속을 위한 입력을 수신할 수 있다. 가속 입력 장치(530) 및 브레이크 입력 장치(570)는, 페달 형태로 형성되는 것이 바람직하다. 실시예에 따라, 가속 입력 장치 또는 브레이크 입력 장치는, 터치 스크린, 터치 패드 또는 버튼 형태로 형성될 수도 있다.
운전 조작 장치(500)는, 제어부(170)의 제어에 따라 동작될 수 있다.
차량 구동 장치(600)는, 차량(100)내 각종 장치의 구동을 전기적으로 제어하는 장치이다.
차량 구동 장치(600)는, 파워 트레인 구동부(610), 샤시 구동부(620), 도어/윈도우 구동부(630), 안전 장치 구동부(640), 램프 구동부(650) 및 공조 구동부(660)를 포함할 수 있다.
실시예에 따라, 차량 구동 장치(600)는, 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수 있다.
한편, 차량 구동 장치(600)는 프로세서를 포함할 수 있다. 차량 구동 장치(600)의 각 유닛은, 각각 개별적으로 프로세서를 포함할 수 있다.
파워 트레인 구동부(610)는, 파워 트레인 장치의 동작을 제어할 수 있다.
파워 트레인 구동부(610)는, 동력원 구동부(611) 및 변속기 구동부(612)를 포함할 수 있다.
동력원 구동부(611)는, 차량(100)의 동력원에 대한 제어를 수행할 수 있다.
예를 들면, 화석 연료 기반의 엔진이 동력원인 경우, 동력원 구동부(610)는, 엔진에 대한 전자식 제어를 수행할 수 있다. 이에 의해, 엔진의 출력 토크 등을 제어할 수 있다. 동력원 구동부(611)는, 제어부(170)의 제어에 따라, 엔진 출력 토크를 조정할 수 있다.
예를 들면, 전기 에너지 기반의 모터가 동력원인 경우, 동력원 구동부(610)는, 모터에 대한 제어를 수행할 수 있다. 동력원 구동부(610)는, 제어부(170)의 제어에 따라, 모터의 회전 속도, 토크 등을 조정할 수 있다.
변속기 구동부(612)는, 변속기에 대한 제어를 수행할 수 있다.
변속기 구동부(612)는, 변속기의 상태를 조정할 수 있다. 변속기 구동부(612)는, 변속기의 상태를, 전진(D), 후진(R), 중립(N) 또는 주차(P)로 조정할 수 있다.
한편, 엔진이 동력원인 경우, 변속기 구동부(612)는, 전진(D) 상태에서, 기어의 물림 상태를 조정할 수 있다.
샤시 구동부(620)는, 샤시 장치의 동작을 제어할 수 있다.
샤시 구동부(620)는, 조향 구동부(621), 브레이크 구동부(622) 및 서스펜션 구동부(623)를 포함할 수 있다.
조향 구동부(621)는, 차량(100) 내의 조향 장치(steering apparatus)에 대한 전자식 제어를 수행할 수 있다. 조향 구동부(621)는, 차량의 진행 방향을 변경할 수 있다.
브레이크 구동부(622)는, 차량(100) 내의 브레이크 장치(brake apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 바퀴에 배치되는 브레이크의 동작을 제어하여, 차량(100)의 속도를 줄일 수 있다.
한편, 브레이크 구동부(622)는, 복수의 브레이크 각각을 개별적으로 제어할 수 있다. 브레이크 구동부(622)는, 복수의 휠에 걸리는 제동력을 서로 다르게 제어할 수 있다.
서스펜션 구동부(623)는, 차량(100) 내의 서스펜션 장치(suspension apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 서스펜션 구동부(623)는 도로면에 굴곡이 있는 경우, 서스펜션 장치를 제어하여, 차량(100)의 진동이 저감되도록 제어할 수 있다.
한편, 서스펜션 구동부(623)는, 복수의 서스펜션 각각을 개별적으로 제어할 수 있다.
도어/윈도우 구동부(630)는, 차량(100) 내의 도어 장치(door apparatus) 또는 윈도우 장치(window apparatus)에 대한 전자식 제어를 수행할 수 있다.
도어/윈도우 구동부(630)는, 도어 구동부(631) 및 윈도우 구동부(632)를 포함할 수 있다.
도어 구동부(631)는, 도어 장치에 대한 제어를 수행할 수 있다. 도어 구동부(631)는, 차량(100)에 포함되는 복수의 도어의 개방, 폐쇄를 제어할 수 있다. 도어 구동부(631)는, 트렁크(trunk) 또는 테일 게이트(tail gate)의 개방 또는 폐쇄를 제어할 수 있다. 도어 구동부(631)는, 썬루프(sunroof)의 개방 또는 폐쇄를 제어할 수 있다.
윈도우 구동부(632)는, 윈도우 장치(window apparatus)에 대한 전자식 제어를 수행할 수 있다. 차량(100)에 포함되는 복수의 윈도우의 개방 또는 폐쇄를 제어할 수 있다.
안전 장치 구동부(640)는, 차량(100) 내의 각종 안전 장치(safety apparatus)에 대한 전자식 제어를 수행할 수 있다.
안전 장치 구동부(640)는, 에어백 구동부(641), 시트벨트 구동부(642) 및 보행자 보호 장치 구동부(643)를 포함할 수 있다.
에어백 구동부(641)는, 차량(100) 내의 에어백 장치(airbag apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 에어백 구동부(641)는, 위험 감지시, 에어백이 전개되도록 제어할 수 있다.
시트벨트 구동부(642)는, 차량(100) 내의 시트벨트 장치(seatbelt appartus)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 시트벨트 구동부(642)는, 위험 감지시, 시트 밸트를 이용해 탑승객이 시트(110FL, 110FR, 110RL, 110RR)에 고정되도록 제어할 수 있다.
보행자 보호 장치 구동부(643)는, 후드 리프트 및 보행자 에어백에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 보행자 보호 장치 구동부(643)는, 보행자와의 충돌 감지시, 후드 리프트 업 및 보행자 에어백 전개되도록 제어할 수 있다.
램프 구동부(650)는, 차량(100) 내의 각종 램프 장치(lamp apparatus)에 대한 전자식 제어를 수행할 수 있다.
공조 구동부(660)는, 차량(100) 내의 공조 장치(air cinditioner)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 공조 구동부(660)는, 차량 내부의 온도가 높은 경우, 공조 장치가 동작하여, 냉기가 차량 내부로 공급되도록 제어할 수 있다.
차량 구동 장치(600)는, 프로세서를 포함할 수 있다. 차량 구동 장치(600)의 각 유닛은, 각각 개별적으로 프로세서를 포함할 수 있다.
차량 구동 장치(600)는, 제어부(170)의 제어에 따라 동작될 수 있다.
운행 시스템(700)은, 차량(100)의 각종 운행을 제어하는 시스템이다. 운행 시스템(700)은, 자율 주행 모드에서 동작될 수 있다.
운행 시스템(700)은, 주행 시스템(710), 출차 시스템(740) 및 주차 시스템(750) 을 포함할 수 있다.
실시예에 따라, 운행 시스템(700)은, 설명되는 구성 요소외에 다른 구성 요소를 더 포함하거나, 설명되는 구성 요소 중 일부를 포함하지 않을 수 있다.
한편, 운행 시스템(700)은, 프로세서를 포함할 수 있다. 운행 시스템(700)의 각 유닛은, 각각 개별적으로 프로세서를 포함할 수 있다.
한편, 실시예에 따라, 운행 시스템(700)이 소프트웨어적으로 구현되는 경우, 제어부(170)의 하위 개념일 수도 있다.
한편, 실시예에 따라, 운행 시스템(700)은, 사용자 인터페이스 장치(200), 오브젝트 검출 장치(300), 통신 장치(400), 차량 구동 장치(600) 및 제어부(170) 중 적어도 어느 하나를 포함하는 개념일 수 있다.
주행 시스템(710)은, 차량(100)의 주행을 수행할 수 있다.
주행 시스템(710)은, 내비게이션 시스템(770)으로부터 내비게이션 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주행을 수행할 수 있다.
주행 시스템(710)은, 오브젝트 검출 장치(300)로부터 오브젝트 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주행을 수행할 수 있다.
주행 시스템(710)은, 통신 장치(400)를 통해, 외부 디바이스로부터 신호를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주행을 수행할 수 있다.
출차 시스템(740)은, 차량(100)의 출차를 수행할 수 있다.
출차 시스템(740)은, 내비게이션 시스템(770)으로부터 내비게이션 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 출차를 수행할 수 있다.
출차 시스템(740)은, 오브젝트 검출 장치(300)로부터 오브젝트 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 출차를 수행할 수 있다.
출차 시스템(740)은, 통신 장치(400)를 통해, 외부 디바이스로부터 신호를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 출차를 수행할 수 있다.
주차 시스템(750)은, 차량(100)의 주차를 수행할 수 있다.
주차 시스템(750)은, 내비게이션 시스템(770)으로부터 내비게이션 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주차를 수행할 수 있다.
주차 시스템(750)은, 오브젝트 검출 장치(300)로부터 오브젝트 정보를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주차를 수행할 수 있다.
주차 시스템(750)은, 통신 장치(400)를 통해, 외부 디바이스로부터 신호를 제공받아, 차량 구동 장치(600)에 제어 신호를 제공하여, 차량(100)의 주차를 수행할 수 있다.
내비게이션 시스템(770)은, 내비게이션 정보를 제공할 수 있다. 내비게이션 정보는, 맵(map) 정보, 설정된 목적지 정보, 상기 목적지 설정 따른 경로 정보, 경로 상의 다양한 오브젝트에 대한 정보, 차선 정보 및 차량의 현재 위치 정보 중 적어도 어느 하나를 포함할 수 있다.
내비게이션 시스템(770)은, 메모리, 프로세서를 포함할 수 있다. 메모리는 내비게이션 정보를 저장할 수 있다. 프로세서는 내비게이션 시스템(770)의 동작을 제어할 수 있다.
실시예에 따라, 내비게이션 시스템(770)은, 통신 장치(400)를 통해, 외부 디바이스로부터 정보를 수신하여, 기 저장된 정보를 업데이트 할 수 있다.
실시예에 따라, 내비게이션 시스템(770)은, 사용자 인터페이스 장치(200)의 하위 구성 요소로 분류될 수도 있다.
센싱부(120)는, 차량의 상태를 센싱할 수 있다. 센싱부(120)는, 자세 센서(예를 들면, 요 센서(yaw sensor), 롤 센서(roll sensor), 피치 센서(pitch sensor)), 충돌 센서, 휠 센서(wheel sensor), 속도 센서, 경사 센서, 중량 감지 센서, 헤딩 센서(heading sensor), 요 센서(yaw sensor), 자이로 센서(gyro sensor), 포지션 모듈(position module), 차량 전진/후진 센서, 배터리 센서, 연료 센서, 타이어 센서, 핸들 회전에 의한 스티어링 센서, 차량 내부 온도 센서, 차량 내부 습도 센서, 초음파 센서, 조도 센서, 가속 페달 포지션 센서, 브레이크 페달 포지션 센서, 등을 포함할 수 있다.
센싱부(120)는, 차량 자세 정보, 차량 충돌 정보, 차량 방향 정보, 차량 위치 정보(GPS 정보), 차량 각도 정보, 차량 속도 정보, 차량 가속도 정보, 차량 기울기 정보, 차량 전진/후진 정보, 배터리 정보, 연료 정보, 타이어 정보, 차량 램프 정보, 차량 내부 온도 정보, 차량 내부 습도 정보, 스티어링 휠 회전 각도, 차량 외부 조도, 가속 페달에 가해지는 압력, 브레이크 페달에 가해지는 압력 등에 대한 센싱 신호를 획득할 수 있다.
센싱부(120)는, 그 외, 가속페달센서, 압력센서, 엔진 회전 속도 센서(engine speed sensor), 공기 유량 센서(AFS), 흡기 온도 센서(ATS), 수온 센서(WTS), 스로틀 위치 센서(TPS), TDC 센서, 크랭크각 센서(CAS), 등을 더 포함할 수 있다.
인터페이스부(130)는, 차량(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행할 수 있다. 예를 들면, 인터페이스부(130)는 이동 단말기와 연결 가능한 포트를 구비할 수 있고, 상기 포트를 통해, 이동 단말기와 연결할 수 있다. 이경우, 인터페이스부(130)는 이동 단말기와 데이터를 교환할 수 있다.
한편, 인터페이스부(130)는 연결된 이동 단말기에 전기 에너지를 공급하는 통로 역할을 수행할 수 있다. 이동 단말기가 인터페이스부(130)에 전기적으로 연결되는 경우, 제어부(170)의 제어에 따라, 인터페이스부(130)는 전원 공급부(190)에서 공급되는 전기 에너지를 이동 단말기에 제공할 수 있다.
메모리(140)는, 제어부(170)와 전기적으로 연결된다. 메모리(140)는 유닛에 대한 기본데이터, 유닛의 동작제어를 위한 제어데이터, 입출력되는 데이터를 저장할 수 있다. 메모리(140)는, 하드웨어적으로, ROM, RAM, EPROM, 플래시 드라이브, 하드 드라이브 등과 같은 다양한 저장기기 일 수 있다. 메모리(140)는 제어부(170)의 처리 또는 제어를 위한 프로그램 등, 차량(100) 전반의 동작을 위한 다양한 데이터를 저장할 수 있다.
실시예에 따라, 메모리(140)는, 제어부(170)와 일체형으로 형성되거나, 제어부(170)의 하위 구성 요소로 구현될 수 있다.
제어부(170)는, 차량(100) 내의 각 유닛의 전반적인 동작을 제어할 수 있다. 제어부(170)는 ECU(Electronic Contol Unit)로 명명될 수 있다.
전원 공급부(190)는, 제어부(170)의 제어에 따라, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다. 특히, 전원 공급부(190)는, 차량 내부의 배터리 등으로부터 전원을 공급받을 수 있다.
차량(100)에 포함되는, 하나 이상의 프로세서 및 제어부(170)는, ASICs (application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적 유닛 중 적어도 하나를 이용하여 구현될 수 있다.
이하에서는, 첨부된 도면을 참조하여 본 발명과 관련된 차량을 최적화된 방법으로 자율 주행시키거나 차량의 주행과 관련된 경고 메시지를 최적화된 상황에 출력하는 방법에 대하여 보다 구체적으로 살펴본다.
도 8은 본 발명과 관련된 eHorizon을 설명하기 위한 개념도이다.
도 8을 참조하면, 본 발명과 관련된 지도 제공 장치(800)는, eHorizon 기반으로 차량(100)을 자율주행시킬 수 있다.
eHorizon은 소프트웨어, 시스템, 개념(컨셉) 등의 카테고리로 분류될 수 있다. eHorizon은 외부 서버(클라우드), V2X(Vehicle to everything) 등의 커넥티드 환경 하에서 정밀 지도의 도로형상 정보와 실시간 교통표지, 노면상태, 사고 등 실시간 이벤트들을 융합하여 자율주행시스템과 인포테인먼트 시스템으로 해당정보를 제공하는 구성을 의미한다.
일 예로, eHorizon은 외부 서버(또는 클라우드, 클라우드 서버)를 의미할 수 있다.
즉, eHorizon은 외부서버/V2X 환경 하에서 차량 전방의 정밀지도 도로형상 및 실시간 이벤트를 자율주행시스템 및 인포테인먼트(infortainment) 시스템으로 전달하는 역할을 수행할 수 있다.
eHorizon(즉, 외부 서버)로부터 전송되는 eHorizon 데이터(정보)는, 자율주행 시스템 및 인포테인먼트 시스템으로 효과적으로 전달하기 위해, 데이터규격과 전송방식을 ‘ADASIS(Advanced Driver Assistance Systems Interface Specification)’라는 표준에 따라 형성될 수 있다.
본 발명과 관련된 지도 제공 장치(800)는, eHorizon으로부터 수신된 정보를 자율주행시스템 및/또는 인포테인먼트 시스템에 이용할 수 있다.
예를 들어, 자율주행시스템에서는 안전 측면과 ECO 측면으로 구분될 수 있다.
안전 측면을 살펴보면, 본 발명의 지도 제공 장치(800)는, eHorizon으로부터 수신한 도로형상 정보, 이벤트 정보와 차량에 구비된 센싱부(840)를 통해 센싱된 주변물체 정보를 이용하여, LKA(Lane Keeping Assist), TJA(Traffic Jam Assist) 등과 같은 ADAS(Advanced Driver Assistance System)기능 및/또는 앞지르기, 도로합류, 차선변경 등의 AD(AutoDrive)기능을 수행할 수 있다.
또한, ECO 측면을 살펴보면, 지도 제공 장치(800)는, eHorizon으로부터 전방 도로의 경사정보, 신호등 정보 등을 수신하여 효율적인 엔진추력을 하도록 차량을 제어하여 연료 효율을 향상시킬 수 있다.
인포테인먼트 시스템에서는 편의성 측면이 포함될 수 있다.
일 예로, 지도 제공 장치(800)는, eHorizon으로부터 수신한 전방도로의 사고정보, 노면상태정보 등을 수신하여 차량에 구비된 디스플레이부(예를 들어, HUD(Head Up Display), CID, Cluster 등)에 출력하여 운전자가 안전운행을 할 수 있도록 하는 가이드 정보를 제공할 수 있다.
도 8을 참조하면, eHorizon(외부 서버)은 도로에서 발생된 각종 이벤트 정보(예를 들어, 노면상태 정보(1010a), 공사정보(1010b), 사고정보(1010c) 등)의 위치정보 및/또는 도로별 제한속도 정보(1010d)를 본 차량(100) 또는 타차량(1020a, 1020b)으로부터 수신하거나, 도로에 설치된 인프라(예를 들어, 측정장치, 센싱장치, 카메라 등)으로부터 수집할 수 있다.
또한, 상기 이벤트 정보나 도로별 제한속도 정보는, 지도정보에 기 연계되어 있거나, 업데이드될 수 있다.
또한, 상기 이벤트 정보의 위치정보는, 차선(Lane) 단위로 구분될 수 있다.
이와 같은 정보들을 이용하여, 본 발명의 eHorizon(외부 서버)은, 차선단위로 도로 상황(또는 도로 정보)를 판단할 수 있는 정밀 지도를 기반으로, 각 차량으로 자율주행시스템 및 인포테인먼트 시스템에 필요한 정보들을 제공할 수 있다.
즉, 본 발명의 eHorizon(외부 서버)는, 정밀 지도를 바탕으로 도로와 관련된 정보(예를 들어, 이벤트 정보, 본 차량(100)의 위치정보 등)에 대한 절대좌표를 이용한 절대 고정밀MAP을 제공할 수 있다.
이러한 eHorizon에서 제공하는 도로와 관련된 정보는 본 차량(100)을 기준으로 일정영역(일정공간) 이내에 해당하는 정보만을 제공받을 수 있다.
한편, 본 발명의 지도 제공 장치(800)는, 타차량과의 통신을 통해 타차량의 위치정보를 획득할 수 있다. 타차량과의 통신은 V2X(Vehicle to everything) 통신을 통해 이루어질 수 있으며, V2X 통신을 통해 타차량과 송수신되는 데이터는 LDM(Local Dynamic Map) 표준에서 정의한 형식의 데이터일 수 있다.
LDM은, 차량(또는 ITS(Intelligent Transport System))에 구비된 애플리케이션(또는 응용 프로그램)의 안전하고 정상적인 작동과 관련된 정보를 포함하는 차량 제어 장치(또는 ITS station) 내에 위치한 개념적인 데이터 저장소를 의미할 수 있다. 상기 LDM은 일 예로, EN 표준에 따를 수 있다.
LDM은 앞서 설명한 ADAS MAP과 데이터 형식 및 전송방법에 있어서 차이가 있다. 일 예로, ADAS MAP은 eHorizon(외부 서버)로부터 수신된 절대좌표를 갖는 고정밀 MAP에 해당하며, LDM은 V2X 통신을 통해 송수신된 데이터에 근거하여 상대좌표를 갖는 고정밀 MAP을 의미할 수 있다.
LDM 데이터(또는 LDM 정보)는, V2X 통신(Vehicle to everything)(예를 들어, V2V(Vehicle to Vehicle) 통신, V2I(Vehicle to Infra) 통신, V2P(Vehicle to Pedestrian) 통신)에서 상호 송수신되는 데이터를 의미한다.
LDM은 V2X 통신에서 송수신되는 데이터를 저장하는 저장소의 개념으로, 상기 LDM은 각 차량에 구비된 차량 제어 장치에 형성(저장)될 수 있다.
LDM 데이터는, 일 예로, 차량과 차량(인프라, 보행자) 등과 상호 송수신하는 데이터를 의미할 수 있다. 상기 LDM 데이터는, 일 예로, BSM(Basic Safety Message), CAM(Cooperative Awareness Message), DENM(Decentralized Environmental Notification message) 등을 포함할 수 있다.
상기 LDM 데이터는, 일 예로, V2X 메시지 또는 LDM 메시지로 명명될 수 있다.
본 발명과 관련된 차량 제어 장치는, LDM을 이용하여 효율적으로 차량간 송수신되는 LDM 데이터(또는 V2X 메시지)를 효율적으로 관리할 수 있다.
LDM은 V2X 통신을 통해 수신된 LDM 데이터에 근거하여, 현재 차량이 위치한 장소의 주변의 교통 상황(또는 현재 차량이 위치한 장소로부터 일정거리 이내의 영역에 대한 도로 상황)에 관한 모든 관련 정보(예를 들어, 본 차량(타차량) 위치, 속도, 신호등 상태, 날씨 정보, 노면 상태 등)를 저장 및 타차량으로 배포하고 지속적으로 업데이트할 수 있다.
일 예로, 지도 제공 장치(800)에 구비된 V2X 애플리케이션은 LDM에 등록하고, 고장 차량에 대한 경고를 비롯한 모든 DENM 등의 특정 메시지를 수신한다. 이후, LDM은 수신된 정보를 V2X 애플리케이션에 자동으로 할당하고, V2X 애플리케이션은 LDM으로부터 할당된 정보에 근거하여 차량을 제어할 수 있다.
이와 같이, 본 발명의 차량은 V2X 통신을 통해 수집된 LDM 데이터에 의해 형성된 LDM을 이용하여 차량을 제어할 수 있다.
본 발명과 관련된 LDM은 도로와 관련된 정보를 차량 제어 장치에 제공할 수 있다. LDM에서 제공된 도로와 관련된 정보는 절대좌표를 갖는 지도정보가 아닌, 타차량(또는 발생된 이벤트 지점) 사이의 상대거리 및 상대속도만을 제공한다.
즉, 본 발명의 차량은, eHorizon에서 제공하는 ADASIS의 표준에 따른 ADAS MAP(절대좌표 고정밀 MAP)을 이용하여 자율주행을 구성할 수 있으나, 본 차량(자기 차량)의 주변영역의 도로 상황을 판단하는 데에만 이용할 수 있다.
또한, 본 발명의 차량은, V2X 통신을 통해 수신된 LDM 데이터에 의해 형성된 LDM(상대좌표 고정밀 MAP)을 이용하여 자율주행을 구성할 수 있으나, 절대위치 정보가 부족하여 정확도가 떨어진다는 한계가 있다.
본 발명의 차량에 포함된 차량 제어 장치는, eHorizon에서 수신된 ADAS MAP과 V2X 통신을 통해 수신된 LDM 데이터를 이용하여 융합정밀지도를 생성하고, 융합정밀지도를 이용하여 차량을 최적화된 방법으로 제어(자율주행)할 수 있다.
이하에서는, 융합정밀지도를 생성할 수 있는 차량 제어 장치에 대하여 첨부된 도면을 참조하여 보다 구체적으로 살펴본다.
도 9는 본 발명의 일 실시 예에 따른 차량 제어 장치를 설명하기 위한 개념도이다. 도 10a 및 도 10b는 본 발명과 관련된 LDM(Local Dynamic Map)과 ADAS(Advanced Driver Assistance System) MAP을 설명하기 위한 개념도이다.
도 9를 참조하면, 본 발명과 관련된 지도 제공 장치(800)는, 통신부(810), 센싱부(840) 및 프로세서(870)를 포함할 수 있다.
통신부(810)는, 앞서 설명한 통신장치(400)일 수 있다.
또한, 본 발명과 관련된 통신부(810)는, 위치 정보부(420)를 통해 차량의 현재 위치를 결정할 수 있다. 또한, 통신부(810)는, 주변 차량(또는 타 차량)과 통신을 수행하거나, 외부 서버(eHorizon)(또는 cloud 서버)와 통신을 수행할 수 있다.
즉, 본 발명과 관련된 통신부(810)는, 본 차량의 위치정보를 획득하고, 외부 서버 및 타차량 중 적어도 하나와 통신을 수행하도록 형성될 수 있다.
도 9에 도시된 것과 같이, 통신부(810)는, V2X 모듈(820) 및 eHorizon 모듈(830)을 포함할 수 있다.
V2X 모듈(820)은, 타차량과 V2X 통신을 수행할 수 있다. 즉, 통신부(810)는, 주변 차량(또는 타 차량)과 통신을 수행할 수 있다. 이는, V2V(Vehicle to Vehicle) 통신으로 명명될 수 있다. V2V 통신은, 자동차끼리 정보를 주고받는 기술로 일반적으로 정의될 수 있으며, 근처 차량 위치, 속도 정보 등을 공유하는 것이 가능하다.
또한, 통신부(810)는, 통신 가능한 모든 기기(예를 들어, 이동 단말기, 서버 등)와 통신을 수행할 수 있다. 이는, V2X(Vehicle to everything) 통신으로 명명될 수 있다. V2X 통신은 운전 중 도로 인프라 및 다른 차량과 통신하면서 교통상황 등의 정보를 교환하거나 공유하는 기술로 일반적으로 정의될 수 있다.
V2V 통신은 V2X 통신의 일 예로 이해되거나, V2X 통신에 포함되는 개념으로 이해될 수 있다.
프로세서(870)는, 통신부(810)를 통해(이용하여) 주변 차량(타 차량)과 V2V통신 또는 V2X 통신을 수행할 수 있다.
여기서, 상기 주변 차량은, 본 차량(100)을 기준으로 일정 거리 이내에 존재하는 차량 또는 상기 본 차량(100)을 기준으로 일정 거리 이내로 진입하는 차량 중 적어도 하나를 의미할 수 있다.
이에 한정되지 않고, 상기 주변 차량은, 본 차량(100)의 통신부(810)와 통신 가능한 모든 차량을 포함할 수도 있다. 본 명세서에서는, 설명의 편의를 위해, 상기 주변 차량이 본 차량(100)으로부터 일정 거리 이내에 존재하거나 상기 일정 거리 이내로 진입하는 차량인 것을 예로 설명하기로 한다.
상기 일정 거리는, 통신부(810)를 통해 통신 가능한 거리에 근거하여 결정되거나, 제품의 사양에 따라 결정되거나, 사용자의 설정 또는 V2X 통신의 표준에 근거하여 결정/가변될 수 있다.
구체적으로, 상기 V2X모듈(820)은, 타차량으로부터 LDM 데이터를 수신하도록 형성될 수 있다. LDM 데이터는, V2X 통신을 통해 차량간에 송수신되는 V2X 메시지(BSM, CAM, DENM 등)일 수 있다.
상기 LDM 데이터에는 타차량의 위치정보가 포함될 수 있다.
프로세서(870)는, 통신부(810)를 통해 획득된 본 차량의 위치정보와 V2X 모듈(820)을 통해 수신된 LDM 데이터에 포함된 타차량의 위치정보에 근거하여, 본 차량과 타차량 사이의 상대위치를 결정할 수 있다.
또한, 상기 LDM 데이터에는 타차량의 속도정보가 포함될 수 있다. 또한, 프로세서(870)는, 본 차량의 속도정보와 타차량의 속도정보를 이용하여, 타차량의 상대속도를 판단할 수도 있다. 본 차량의 속도정보는, 통신부(810)를 통해 수신되는 본 차량의 위치정보가 시간별로 변화되는 정도를 이용하여 산출되거나, 차량(100)의 운전조작 장치(500) 또는 파워 트레인 구동부(610)에서 수신되는 정보에 근거하여 산출될 수 있다.
상기 V2X 모듈(820)은, 앞서 설명한 V2X 통신부(430)일 수 있다.
한편, 본 발명의 통신부(810)는, eHorizon 모듈(830)을 포함할 수 있다.
상기 eHorizon 모듈(830)은, 외부 서버(eHorizon)과 무선 통신을 수행할 수 있다. eHorizon 모듈(830)은 외부 서버로부터 ADAS MAP을 수신할 수 있다.
상기 ADAS MAP에는 지도정보가 포함되어 있을 수 있다. 상기 ADAS MAP에 포함된 지도정보에는 차선단위로 도로와 관련된 정보(이벤트 정보)가 구분되도록 형성될 수 있다.
본 발명과 관련된 지도 제공 장치(800)의 프로세서(870)는, eHorizon 모듈(830)을 통해 외부 서버(eHorizon)으로부터 수신되는 ADAS MAP에 근거하여, 도로와 관련된 정보(이벤트 정보)의 절대좌표를 판단할 수 있다. 또한, 프로세서(870)는, 상기 도로와 관련된 정보(이벤트 정보)의 절대좌표를 이용하여, 본 차량을 자율주행하거자 차량제어를 수행할 수 있다.
도 10a에는 V2X 통신을 통해 차량간 상호 송수신되는 LDM 데이터(또는 LDM)의 데이터형식의 일 예가 도시되어 있고, 도 10b에는 외부 서버(eHorizon)으로부터 수신되는 ADAS MAP의 데이터 형식의 일 예가 도시되어 있다.
우선, 도 10a를 살펴보면, LDM 데이터(또는 LDM)(1050)는 4개의 레이어를 갖도록 형성될 수 있다.
LDM 데이터(1050)에는 제1 레이어(1052), 제2 레이어(1054), 제3 레이어(1056) 및 제4 레이어(1058)가 포함될 수 있다.
제1 레이어(1052)에는, 도로와 관련된 정보 중 static한 정보, 예를 들어, 지도 정보가 포함될 수 있다.
제2 레이어(1054)에는, 도로와 관련된 정보 중 랜드 마크 정보(예를 들어, 지도정보에 포함된 복수의 장소 정보 중 제작자에 의해 지정된 특정 장소정보)가 포함될 수 있다. 상기 랜드마크 정보에는 위치정보, 명칭정보 및 크기정보 등이 포함될 수 있다.
제3 레이어(1056)에는 도로와 관련된 정보 중 교통상황과 관련된 정보(예를 들어, 신호등 정보, 공사정보, 사고정보 등)가 포함될 수 있다. 상기 공사정보 및 사고정보 등에는 위치정보가 포함될 수 있다.
제4 레이어(1058)에는 도로와 관련된 정보 중 다이나믹한 정보(예를 들어, 객체 정보, 보행자 정보, 타차량 정보 등)가 포함될 수 있다. 상기 객체 정보, 보행저 정보 및 타차량 정보 등에는 위치정보가 포함될 수 있다.
즉, 상기 LDM 데이터(1050)는, 타차량의 센싱부를 통해 센싱된 정보 또는 본 차량의 센싱부를 통해 센싱된 정보가 포함될 수 있으며, 제1 레이어에서 제4 레이어로 갈수록 실시간으로 변형되는 도로와 관련된 정보가 포함될 수 있다.
도 10b를 살펴보면, ADAS MAP은 LDM 데이터와 유사하게 4개의 레이어를 갖도록 형성될 수 있다.
상기 ADAS MAP(1060)은 eHorizon으로부터 수신되며 ADASIS규격에 맞도록 형성된 데이터를 의미할 수 있다.
ADAS MAP(1060)에는, 제1 레이어(1062) 내지 제4 레이어(1068)를 포함할 수 있다.
제1 레이어(1062)에는 토폴로지(topology) 정보가 포함되어 있을 수 있다. 상기 토폴로지 정보는, 일 예로, 공간 관계를 명시적으로 정의한 정보로서, 지도정보를 의미할 수 있다.
제2 레이어(1064)에는 도로와 관련된 정보 중 랜드 마크 정보(예를 들어, 지도정보에 포함된 복수의 장소 정보 중 제작자에 의해 지정된 특정 장소정보)가 포함될 수 있다. 상기 랜드마크 정보에는 위치정보, 명칭정보 및 크기정보 등이 포함될 수 있다.
제3 레이어(1066)에는 고정밀 지도정보가 포함될 수 있다. 상기 고정밀 지도정보는 HD-MAP으로 명명될 수 있으며, 차선단위로 도로와 관련된 정보(예를 들어, 신호등 정보, 공사정보, 사고정보)가 기록될 수 있다. 상기 공사정보 및 사고정보 등에는 위치정보가 포함될 수 있다.
제4 레이어(1068)에는 다이나믹한 정보(예를 들어, 객체 정보, 보행자 정보, 타차량 정보 등)가 포함될 수 있다. 상기 객체 정보, 보행저 정보 및 타차량 정보 등에는 위치정보가 포함될 수 있다.
즉, ADAS MAP(1060)은, LDM 데이터(1050)와 같이, 제1 레이어에서 제4 레이어로 갈수록 실시간으로 변형되는 도로와 관련된 정보가 포함될 수 있다.
본 발명과 관련된 지도 제공 장치(800)는, 센싱부(840)를 포함할 수 있다.
상기 센싱부(840)는, 도 7에서 설명한 오브젝트 검출장치(300)일 수도 있고, 차량(100)에 구비된 센싱부(120)일 수 있다.
또한, 상기 센싱부(840)는, 차량에 구비된 오브젝트 검출장치(300) 또는 차량(100)에 구비된 센싱부(120)는 독립된 별개의 센싱부일 수 있다. 상기 센싱부(840)가 독립된 센싱부인 경우라도, 상기 센싱부(840)는, 도 7에서 설명한 센싱부(120) 또는 오브젝트 장치(300)의 특징을 포함할 수 있다.
상기 센싱부(820)는, 도 7에서 설명한 카메라(310)를 포함할 수 있다.
또한, 상기 센싱부(840)는, 상기 오브젝트 검출장치(300)에 포함된 카메라(310), 레이다(320), 라이다(330), 초음파센서(340), 적외선 센서(350), 센싱부(120) 중 적어도 두 개가 조합되어 구현될 수도 있다.
센싱부(840)는 본 차량(100)의 주변에 존재하는 객체를 감지할 수 있고, 상기 객체와 관련된 정보를 센싱할 수 있다.
예를 들어, 상기 객체는, 앞서 설명한 주변 차량, 주변 사람, 주변 물체, 주변 지형 등을 포함할 수 있다.
센싱부(820)는, 본 발명의 차량(100)과 관련된 정보를 센싱할 수 있다.
상기 차량과 관련된 정보는, 차량 정보(또는, 차량의 주행 상태) 및 차량의 주변정보 중 적어도 하나일 수 있다.
예를 들어, 차량 정보는, 차량의 주행속도, 차량의 무게, 차량의 탑승인원, 차량의 제동력, 차량의 최대 제동력, 차량의 주행모드(자율주행모드인지 수동주행인지 여부), 차량의 주차모드(자율주차모드, 자동주차모드, 수동주차모드), 차량 내에 사용자가 탑승해있는지 여부 및 상기 사용자와 관련된 정보(예를 들어, 상기 사용자가 인증된 사용자인지 여부) 등을 포함할 수 있다.
차량의 주변정보는, 예를 들어, 차량이 주행중인 노면의 상태(마찰력), 날씨, 전방(또는 후방) 차량과의 거리, 전방(또는 후방) 차량의 상대속도, 타차량의 위치정보, 객체(오브젝트)의 위치정보, 주행중인 차선이 커브인 경우 커브의 굴곡률, 차량 주변밝기, 차량을 기준으로 기준영역(일정영역) 내에 존재하는 객체와 관련된 정보, 상기 일정영역으로 객체가 진입/이탈하는지 여부, 차량 주변에 사용자가 존재하는지 여부 및 상기 사용자와 관련된 정보(예를 들어, 상기 사용자가 인증된 사용자인지 여부) 등일 수 있다.
또한, 상기 차량의 주변정보(또는 주변 환경정보)는, 차량의 외부 정보(예를 들어, 주변밝기, 온도, 태양위치, 주변 피사체(사람, 타차량, 표지판 등) 정보, 주행중인 노면의 종류, 지형지물, 차선(Line) 정보, 주행차로(Lane) 정보), 자율주행/자율주차/자동주차/수동주차 모드에 필요한 정보를 포함할 수 있다.
또한, 차량의 주변정보는, 차량 주변에 존재하는 객체(오브젝트)와 차량(100)까지의 거리, 상기 객체의 종류, 차량이 주차 가능한 주차공간, 주차공간을 식별하기 위한 객체(예를 들어, 주차선, 노끈, 타차량, 벽 등) 등을 더 포함할 수 있다.
이하에서는, 설명의 편의를 위해, 센싱부(820)가 지도 제공 장치(800)에 별도로 구비된 것을 일 예로 설명하기로 한다. 프로세서(870)가 센싱부(820)를 통해 어느 정보를 획득한다는 것은, 프로세서(870)가 오브젝트 검출장치(300) 및 차량(100)에 구비된 센싱부(120) 중 적어도 하나를 이용하여 어느 정보를 획득한다는 것으로 이해될 수 있다.
본 발명의 지도 제공 장치(800)는, 통신부(810), V2X모듈(820), eHorizon 모듈(830) 및 센싱부(840) 등을 제어하는 것이 가능한 프로세서(870)를 포함할 수 있다.
상기 프로세서(870)는, 도 7에서 설명한 제어부(170)일 수 있다.
프로세서(870)는, 도 7에서 설명한 구성요소들 및 도 8에서 설명한 구성요소들을 제어할 수 있다.
상기 프로세서(870)는, 본 차량(100)을 자율주행 시킬 수 있다.
예를 들어, 프로세서(870)는, 센싱부(840)를 통해 센싱된 정보 및 통신부(810)를 통해 수신된 정보에 근거하여, 본 차량(100)을 자율주행 시킬 수 있다.
차량을 자율주행시키는 기술에 대해서는 일반적인 기술이므로, 보다 구체적인 설명은 생략하기로 한다.
구체적으로, 프로세서(870)는, 본 차량의 위치정보를 획득하도록 통신부(810)를 제어할 수 있다. 예를 들어, 프로세서(870)는, 통신부(810)의 위치 정보부(420)를 통해 본 차량(100)의 위치 정보(위치 좌표)를 획득할 수 있다.
또한, 프로세서(870)는, 외부 서버로부터 지도 정보를 수신하도록 통신부(810)의 eHorizon 모듈(830)을 제어할 수 있다. 여기서, eHorizon 모듈(830)은 외부 서버(eHorizon)으로부터 ADAS MAP을 수신할 수 있다. 상기 지도 정보는 상기 ADAS MAP에 포함될 수 있다.
또한, 프로세서(870)는, 타차량으로부터 상기 타차량의 위치정보를 수신하도록 통신부(810)의 V2X 모듈(820)을 제어할 수 있다. 여기서, V2X 모듈(820)은 타차량으로부터 LDM 데이터를 수신할 수 있다. 상기 타차량의 위치정보는, 상기 LDM 데이터에 포함될 수 있다.
상기 타차량은, 차량으로부터 일정거리 이내에 존재하는 차량을 의미하며, 상기 일정거리는 통신부(810)의 통신 가용거리일 수도 있고, 사용자에 의해 설정된 거리일 수도 있다.
프로세서(870)는, 외부 서버로부터 지도정보와 타차량으로부터 타차량의 위치정보를 수신하도록 통신부를 제어할 수 있다.
또한, 프로세서(870)는, 획득된 차량의 위치정보와 상기 수신된 타차량의 위치정보를 상기 수신된 지도 정보에 융합시키고, 상기 융합된 지도 정보 및 센싱부(840)를 통해 센싱된 차량과 관련된 정보 중 적어도 하나에 근거하여 차량(100)을 제어할 수 있다.
여기서, 상기 외부 서버로부터 수신된 지도정보는, ADAS MAP에 포함된 고정밀 지도정보(HD-MAP)을 의미할 수 있다. 고정밀 지도정보는 차선단위로 도로와 관련된 정보가 기록될 수 있다.
프로세서(870)는, 본 차량(100)의 위치 정보와 타차량의 위치정보를 상기 지도정보에 차선 단위로 융합할 수 있다. 또한, 프로세서(870)는, 외부 서버로부터 수신되는 도로와 관련된 정보 및 타차량으로부터 수신되는 도로와 관련된 정보를 상기 지도정보에 차선단위로 융합시킬 수 있다.
프로세서(870)는, 외부 서버로부터 수신되는 ADAS MAP과 센싱부(840)를 통해 수신되는 차량과 관련된 정보를 이용하여, 차량의 제어에 필요한 ADAS MAP을 생성할 수 있다.
구체적으로, 프로세서(870)는, 외부 서버로부터 수신된 지도 정보에 센싱부(840)를 통해 일정 범위 내에서 센싱된 차량과 관련된 정보를 적용할 수 있다.
여기서, 상기 일정 범위는, 센싱부(840)가 정보를 센싱할 수 있는 가용거리일 수도 있고, 사용자에 의해 설정된 거리일 수도 있다.
프로세서(870)는, 상기 지도 정보에 상기 센싱부를 통해 일정 범위 내에서 센싱된 차량과 관련된 정보를 적용한 후 타차량의 위치정보를 추가적으로 융합하여 상기 차량을 제어할 수 있다.
즉, 지도 정보에 센싱부를 통해 일정 범위 내에서 센싱된 차량과 관련된 정보를 적용한 경우, 프로세서(870)는, 차량으로부터 상기 일정 범위 내에서의 정보만을 이용할 수 있으므로, 차량을 제어할 수 있는 범위가 지협적일 수 있다.
그러나, 상기 V2X 모듈을 통해 수신된 타차량의 위치정보는 상기 일정 범위를 벗어난 공간에 존재하는 타차량으로부터 수신될 수 있다. 이는, V2X 모듈을 통해 타차량과 통신하는 V2X 모듈의 통신 가용거리가 상기 센싱부(840)의 일정범위보다 멀기 때문일 수 있다.
이에, 프로세서(870)는, 상기 차량과 관련된 정보가 센싱된 지도 정보에 V2X 모듈(820)을 통해 수신된 LDM 데이터에 포함된 타차량의 위치정보를 융합하여, 보다 넓은 범위에 존재하는 타차량의 위치정보를 획득할 수 있고, 이를 이용하여 차량을 보다 효과적으로 제어할 수 있다.
예를 들어, 본 차량이 존재하는 차선에 전방으로 복수의 타차량이 밀집되어 있다고 가정하고, 센싱부는, 본 차량의 바로 앞차량의 위치정보만을 센싱할 수 있다고 가정한다.
이 경우, 지도 정보에 일정 범위 내에서 센싱된 차량과 관련된 정보만을 이용하는 경우, 프로세서(870)는, 본 차량이 앞 차량을 추월하여 끼어들도록 차량을 제어하는 제어명령을 생성할 수 있다.
그러나, 실제로는 전방으로 복수의 타차량이 밀집되어 있어 추월하여 끼어들기가 용이하지 않은 상황일 수 있다.
이 때, 본 발명은 V2X 모듈을 통해 수신된 타차량의 위치정보를 획득할 수 있다. 이 때, 상기 수신된 타차량의 위치정보는, 본 차량(100)의 바로 앞차량뿐만 아니라 상기 앞차량의 앞에 있는 복수의 타차량의 위치정보를 획득할 수 있다.
프로세서(870)는, 상기 V2X 모듈을 통해 획득된 복수의 타차량의 위치정보를 차량과 관련된 정보가 적용된 지도정보에 추가적으로 융합하여, 앞 차량을 추월하여 끼어들기 부적절한 상황인 것을 판단할 수 있다.
이러한 구성을 통해, 본 발명은 단순히 고정밀 지도정보에 센싱부(840)를 통해 획득된 차량과 관련된 정보만을 융합하여 일정범위 내에서만 자율주행이 가능했던 종래의 기술적 한계를 극복할 수 있다. 즉, 본원발명은 지도정보에 센싱부를 통해 센싱된 차량과 관련된 정보뿐만 아니라 V2X 모듈을 통해 상기 일정범위보다 더 먼 거리에 있는 타차량으로부터 수신된 타차량과 관련된 정보(타차량의 속도, 타차량의 위치)를 추가적으로 이용함으로써 보다 정확하고 안정적으로 차량 제어를 수행할 수 있다.
본 명세서에서 설명하는 차량 제어는, 차량(100)을 자율주행 시키는 것 및 차량의 주행과 관련된 경고 메시지를 출력하는 것 중 적어도 하나를 포함할 수 있다.
이하에서는 첨부된 도면을 참조하여, 프로세서가 V2X모듈을 통해 수신된 LDM 데이터와 외부 서버(eHorizon)으로부터 수신된 ADAS MAP 및 차량에 구비된 센싱부를 통해 센싱된 차량과 관련된 정보를 이용하여 차량을 제어하는 방법에 대하여 보다 구체적으로 살펴본다.
도 11a 및 도 11b는 본 발명과 관련된 LDM과 ADAS MAP을 이용하여 차량을 제어하는 방법을 설명하기 위한 개념도이다.
우선 도 11a를 참조하면, 본 발명의 지도 제공 장치(800)에 포함된 프로세서(870)는, V2X/ADASIS IF(InterFace) 및 ADASIS 시스템을 포함할 수 있다. 상기 V2X/ADASIS IF 및 ADASIS 시스템은 하드웨어적인 구성일 수도 있고, 소프트웨어적으로 기능에 따라 구별된 컴포넌트의 형태일 수도 있다.
통신부(810)의 V2X 모듈(820)은 V2X 메시지를 생성할 수 있다(S1100). 여기서, 상기 V2X 메시지는 LDM 데이터를 포함할 수 있다.
일 예로, V2X 모듈(820)은 타차량 또는 도로에 설치된 인프라로부터 V2X 메시지 전송 요청이 수신되는 것에 근거하여 상기 V2X 메시지를 생성할 수 있다.
다른 예로, 상기 V2X 모듈(820)은 타차량에게 상기 타차량의 위치정보를 요청하기 위해 상기 V2X 메시지를 생성할 수 있다. 여기서, 프로세서(870)는, 상기 V2X 메시지를 타차량으로 전송하고, 상기 타차량으로부터 타차량의 위치정보를 수신할 수 있다.
이 때, 상기 V2X 메시지가 전송되는 타차량은, 본 차량(100)으로부터 일정거리 이내에 존재하는 타차량일 수 있다. 상기 일정거리는, V2X 모듈의 가용거리 또는 사용자의 설정에 의해 결정될 수 있다. 상기 V2X 메시지가 전송되는 타차량의 개수가 복수대인 경우, 프로세서(870)는, 상기 V2X 모듈(820)을 통해 복수의 타차량 중 적어도 하나로부터 타차량의 위치정보를 획득할 수 있다.
이후, 프로세서(870)(V2X/ADASIS IF)는 수신된 타차량의 위치정보에 근거하여 본 차량과 타차량 사이의 상대위치(상대거리)를 계산할 수 있다(S1104).
또한, 프로세서(870)는, eHorizon 모듈(830)을 통해 외부 서버(eHorizon)으로부터 ADAS MAP을 수신할 수 있다(S1104). 상기 ADAS MAP에는, 지도정보, 즉 차선단위로 도로와 관련된 정보를 수신할 수 있는 정밀지도가 포함되어 있을 수 있다.
프로세서(870)는, 수신된 지도 정보에서 차선단위로 도로와 관련된 정보(차량정보)를 판단할 수 있다(S1106).
이후, 프로세서(870)는, 수신된 지도정보에 상기 본 차량과 타차량 사이의 상대위치를 정렬할 수 있다(S1108).
즉, 프로세서(870)는, V2X 모듈(820)을 통해 수신된 LDM 데이터에 근거하여, 차량과 LDM 데이터를 전송한 타차량과의 상대위치를 추출하고, eHorizon 모듈(830)을 통해 수신된 ADAS MAP(지도 정보)에 상기 추출된 타차량의 상대위치를 차선단위로 정렬할 수 있다.
즉 본 발명은, V2X 통신을 통해 추출된 본 차량과 타차량과의 상대위치를 차선단위로 정보를 융합할 수 있는 정밀지도(외부 서버(eHorizon)으로부터 수신된 ADAS MAP)에 정렬하여, 본 차량과 타차량 사이의 실시간 상대위치를 차선단위로 판단할 수 있는 융합지도를 생성할 수 있다.
V2X 모듈(820)은 본 차량과 타차량 사이의 상대위치가 차선단위로 정렬된 ADAS MAP을 이용하여 V2X 메시지를 재정의할 수 있다(S1110). 이후, 프로세서(870)는, 상기 재정의된 V2X 메시지를 타차량 또는 인프라에 전송할 수 있다.
또한, 프로세서(870)는, 외부 서버(eHorizon)으로부터 수신된 ADAS MAP을 이용하여 ADASIS 규격의 메시지를 생성할 수 있다(S1114). 상기 메시지는 차량의 자율주행에 이용되는 메시지일 수 있다. 예를 들어, 상기 메시지는, 자율주행에서 발생되는 경고 메시지, 사고정보/공사정보 등 도로와 관련된 정보를 알리는 알림 메시지 등을 포함할 수 있다.
프로세서(870)는, 본 차량과 타차량 사이의 상대위치가 차선단위로 정렬된 ADAS MAP(지도 정보, 고정밀 지도)를 ADASIS 시스템으로 전송할 수 있다(S1108). 이후, 프로세서(870)는, 상기 ADASIS 규격의 메시지와 상기 본 차량과 타차량 사이의 상대위치가 차선단위로 정렬된 ADAS MAP(지도 정보, 고정밀 지도)를 이용하여 AD기능(자율 주행)을 수행할 수 있다(S1118).
이러한 구성을 통해, 본 발명의 프로세서(870)는, 본 차량과 타차량 사이의 상대위치가 차선단위로 정렬된 ADAS MAP(지도 정보, 고정밀 지도)를 이용하여 차량을 제어할 수 있다(S1118).
즉, 본 발명은 V2X 통신을 통해 타차량으로부터 수신된 타차량의 위치정보를 이용하여 본 차량과 타차량 사이의 상대위치(network)를 계산할 수 있다. 이후, 계산된 상대위치 정보는 외부 서버(eHorizon)으로부터 수신된 고정밀 지도에 차선단위로 정렬될 수 있다.
ADASIS 시스템은 차선단위로 본 차량과 타차량 사이의 상대위치가 정렬된 ADAS MAP을 이용하여 자율주행(AD) 기능들의 정확도를 향상시켜 자율주행 제어에 이용할 수 있다.
또한, V2X 모듈은 차선 단위로 도로와 관련된 정보를 기록할 수 있는 고정밀지도를 이용하여 차량의 주행과 관련된 경고 메시지 출력의 정확도를 향상시킬 수 있다.
한편, 본 발명의 LDM 데이터와 ADAS MAP은 서로 다른 좌표를 이용할 수 있다. 이 경우, 도 11b에 도시된 것과 같이, 프로세서(870)는, eHorizon모듈(830)을 통해 수신된 ADAS MAP(1060)의 좌표계를 V2X 모듈(820)을 통해 수신된 LDM 데이터의 좌표계로 변환하거나, LDM 데이터(1050)의 좌표계를 ADAS MAP의 좌표계로 변환할 수 있다.
좌표계의 종류는, 위경도좌표계, 데카르트좌표계, 폴라좌표계 등 다양한 종류의 좌표계가 있을 수 있으며, 프로세서(870)는, V2X 모듈을 통해 수신된 LDM 데이터의 좌표계와 eHorizon 모듈을 통해 수신된 ADAS MAP의 좌표계가 일치되도록 좌표계 변환을 수행할 수 있다.
이를 통해, 본 발명의 프로세서(870)는, LDM 데이터에 포함된 타차량의 위치정보를 ADAS MAP에 차선단위로 융합(정렬)시킬 수 있다.
도 12는 eHorizon 시스템을 설명하기 위한 블록도이다.
eHorizon 시스템은 서버(또는, Backend)와 차량(또는, Vehicle)으로 이루어진다.
서버는 차량으로 지도를 제공하고, 차량은 지도를 이용하여 차량에 구비된 각종 장치를 제어한다.
지도 제공 장치(800)는 메모리(또는, Horizon Cache)를 이용하여 하나 또는 그 이상의 지도들을 서버로부터 수신하고, 수신된 지도를 상기 전장품들에 제공한다.
나아가, 지도 제공 장치(800)는 상기 전장품들로부터 수신된 전장품 정보를 수집하고, 수집된 전장품 정보를 이용하여 측위(또는, localization)를 수행한다.
측위는 다양한 정보들을 이용하여 차량의 현재 위치를 특정하는 것을 의미한다. 예를 들어, 서버로부터 수신된 지도에 포함된 정보와 전장품 정보를 비교함으로써, 정보가 매칭되는 일 지점을 차량의 현재 위치로 특정할 수 있다.
차량은 지도 제공 장치(800)가 제공한 지도를 이용하여 자율 주행을 수행하거나, 자율 주행과 관련된 각종 기능을 실행한다. 따라서, 지도의 최신성과 정확성은 차량에 탑승한 탑승객의 안전을 위해서 반드시 보장되어야만 한다.
이를 위해, 지도 제공 장치(800)는 전장품에 의하여 생성된 전장품 정보를 서버로 전송하며, 서버는 지도 제공 장치(800)로부터 전송된 정보를 이용하여 지도를 업데이트 한다.
서버는 지도 제공 장치로부터 수신된 정보를 빅데이터로 관리하며, 빅데이터를 이용하여 지도에 새로운 정보를 추가하거나, 기존 정보를 편집 또는 삭제한다.
전장품의 고장이나 기타 다양한 사유로 신뢰할 수 없는 전장품 정보를 생성하는 경우, 측위에 문제가 생길 뿐만 아니라, 서버가 잘못된 정보를 이용하여 지도를 업데이트 함으로써 지도를 이용하는 모든 차량에 잘못된 정보를 제공하는 문제가 있다.
주변환경정보를 알수 있는 센서(윈드쉴드 와이퍼의 동작, 안개 램프, 외부의 날씨정보, 윈드실드에 습기찬 정도를 알수 있는 센서 등)로부터 차량 내에 있는 카메라의 물체검출 능력이 떨어진다고 판단되면, 카메라 정보는 다른 전장품들로 전달되면 안될 뿐만 아니라, 서버로 전달되어 잘못된 정보가 업데이트 되는 일이 없어야 한다.
예를 들어, 비가 많이 오는 상황에서 카메라가 촬영한 표지판을 전장품 정보로 이용하는 경우, 잘못된 위치로 측위가 이루어질 수 있다. 잘못 촬영한 표지판 정보가 서버로 업데이트 된다면, 다른 차량들도 잘못된 표지판 정보를 이용하게 되는 문제가 발생한다.
반대로, 지도 제공 장치에서 서버로 업데이트 되는 정보는 빅데이터로 처리 되기 때문에 실시간 정보를 반영할 수 없는 문제가 있다. 서버로부터 수신된 정보가 실시간 정보가 아니라고 판단되는 상태에서는 서버로부터 수신된 정보를 전장품들로 전달하면 안되고, 카메라가 검출한 정보를 이용할 수 있게 해야 한다.
예를 들어, 차량 사고에 의한 파편들이 도로에 놓여 있어 차선 변경을 해야 하는 상황의 경우, 서버로부터 수신된 정보 대신, 카메라가 생성한 정보를 이용해야 한다.
지도에 포함된 정보와 전장품이 생성한 정보(또는, 센서가 센싱한 정보)가 불일치 되었을 때에 차량은 부정확한 정보를 이용하게 되어 자율주행 안정성에 문제가 생긴다. 나아가, 부정확한 정보가 서버로 업데이트 되기 때문에, 불필요한 업데이트가 이루어지는 문제도 있다.
상술한 문제를 해결하면서도 지도의 최신성과 정확성을 보장할 수 있는 지도 제공 장치(800)를 제공하는 것이 본 발명의 일 목적이다.
도 13은 지도 제공 장치의 동작을 설명하기 위한 흐름도이다.
본 발명은 차량(100)에 장착되며 상기 차량(100)에 구비된 복수의 전장품들에 지도 데이터를 제공하는 지도 제공 장치(800)에 관한 것이다.
전장품은 차량(100)에 구비되어 유선 또는 무선으로 지도 제공 장치(800)와 통신을 수행하며, 전기를 동력원으로 하는 모든 장치로 정의된다. 예를 들어, 도 7에서 상술한 각각의 구성요소가 전장품에 해당할 수 있다.
상기 지도 제공 장치(800)는 상기 통신부(810) 및 상기 프로세서(870)를 포함한다.
상기 통신부(810)는 상기 전장품들과 통신을 수행하도록 이루어지며, 서버로부터 복수의 레이어들을 포함하는 원본 지도를 수신하도록 이루어진다. 상기 통신부(810)는 유선 또는 무선으로 상기 전장품들 중 적어도 하나와 통신을 수행하며, CAN(controller area network)을 이용할 수 있다.
원본 지도는 하나 또는 그 이상의 지도들을 포함할 수 있고, 각 지도는 복수의 레이어들로 이루어질 수 있다. 예를 들어, 상기 원본 지도는 도 10a 및 도 10b에서 상술한 LDM과 ADAS MAP을 포함할 수 있다. 나아가, 상기 원본 지도는 고정밀도 지도(HD map)와 표준정밀도 지도(SD map)를 더 포함할 수 있다.
상기 프로세서(870)는 상기 통신부(810)를 통해 전장품들 중 적어도 하나로부터 전장품 정보를 수신한다(S1310).
지도 제공 장치(800)는 통신부(810)를 통해 전장품들이 생성한 전장품 정보를 수신하는데, 상기 전장품 정보에는 와이퍼나 램프의 동작, 습도/기온과 같은 기상 정보, 라이더/레이더/카메라가 이미지 데이터를 이용하여 탐색한 로컬 객체 정보 등이 포함될 수 있다.
전장품 정보는 전장품이 전송한 정보를 의미하며, 전장품마다 서로 다른 전장품 정보를 전송할 수 있다. 예를 들어, 와이퍼는 온/오프 여부, 그리고 온인 경우 와이퍼가 어떤 속도로 작동하고 있는지를 알리는 와이퍼 정보를 전송할 수 있다. 다른 예를 들어, 상기 전장품들에는 카메라/라이다/레이더와 같은 이미지 센서가 포함되고, 상기 전장품 정보에는 상기 이미지 센서에 의하여 센싱된 센싱 정보가 포함될 수 있다. 센싱 정보는 이미지 센서에 의해 생성된 이미지, 이미지로부터 탐색된 하나 또는 그 이상의 로컬 객체들을 포함할 수 있다.
다음으로, 프로세서(870)는 전장품 정보의 신뢰도를 산출한다(S1330).
지도 제공 장치(800)는 서버로부터 최신의 지도를 제공받는다. 하지만, 가장 최신의 정보는 차량에 구비된 각종 전장품들이 직접 검출한 전장품 정보이다. 따라서, 차량에 구비된 ECU(electric control unit)는 서버로부터 수신된 지도라는 외부 정보와 차량에 구비된 전장품들이 생성한 전장품 정보라는 내부 정보를 동시에 이용해야 한다.
프로세서(870)는 통신부(810)를 통해 수신되는 정보를 이용하여 전장품 정보의 신뢰도를 산출한다. 프로세서(870)는 전장품 정보의 신뢰도를 산출하기 위한 변수들로 서버로부터 수신되는 외부 정보와 차량 내 구비된 전장품들로부터 수신되는 내부 정보를 모두 이용할 수 있다.
예를 들어, 와이퍼가 기준치 보다 빠른 빠르기로 동작하고 있는 경우가 있을 수 있다. 상기 기준치는 이미지 센서가 촬영한 이미지를 사용할 수 없을 정도로 많은 비가 내리는 상황에서 비를 닦아내기 위한 모터의 속도를 의미할 수 있다. 상기 프로세서(870)는, 와이퍼로부터 수신된 와이퍼 정보로부터 상기 와이퍼가 상기 기준치보다 빠른 속도로 동작하고 있음을 확인하면, 이미지 센서로부터 수신된 이미지 센서 정보는 신뢰할 수 없다는 결론을 내릴 수 있다.
다른 예를 들어, 현재 온도가 43도라는 기상 정보가 서버로부터 수신될 수 있다. 라이다의 신뢰 동작 구간이 영하 10도이상 영상 39도 이하라면, 상기 프로세서(870)는 상기 라이다로부터 수신되는 라이다 정보는 신뢰할 수 없다는 결론을 내릴 수 있다.
이밖에 다양한 알고리즘과 수식을 통해, 상기 프로세서(870)는 전장품들 각각의 전장품 정보에 대한 신뢰도와, 소정시간 상기 통신부(810)를 통해 수신된 모든 전장품 정보에 대한 종합 신뢰도를 산출할 수 있다. 예를 들어, 제1 전장품으로부터 제1 전장품 정보가 수신되고 제2 전장품으로부터 제2 전장품 정보가 수신되는 경우, 상기 프로세서(870)는 서로 다른 방식으로 상기 제1 전장품 정보에 대한 제1 신뢰도와 상기 제2 전장품 정보에 대한 제2 신뢰도를 산출할 수 있다. 나아가, 제1 및 제2 전장품 정보 전체에 대한 종합 신뢰도를 산출할 수도 있다.
상기 소정시간은 기 설정되어 있으나, 상기 통신부(810)를 통해 수신되는 정보량에 따라 가변될 수 있다. 예를 들어, 소정시간은, 정보량이 많아지면 짧아지고, 정보량이 적어지면 길어질 수 있다. 신뢰도 산출에 소요되는 시간을 일정하게 유지하고, 전장품 정보와 관련된 제어가 제때 이루어질 수 있도록 하기 위함이다.
상기 소정시간은 상기 차량(100)의 속도나 상기 차량(100)의 위치에 따라 가변될 수도 있다. 자율 주행에서 요구되는 응답 시간을 자율 주행 상황에 맞추어 적합하게 유지하기 위함이다. 예를 들어, 상기 소정시간은 상기 차량(100)의 속도가 빠르면 짧아지고, 속도가 느리면 길어질 수 있다. 다른 예를 들어, 상기 소정시간은 상기 차량(100)이 교통량이 많은 도심 지역에 위치하면 짧아지고, 교토량이 적은 외곽 지역에 위치하면 길어질 수 있다.
상기 프로세서(870)는 상기 원본 지도와 상기 전장품 정보를 상호 비교함으로써 상기 전장품 정보의 신뢰도뿐만 아니라 상기 원본 지도의 신뢰도도 산출할 수 있다.
예를 들어, 상기 차량(100)이 주행 중인 도로에 대하여, 이미지 센서는 탐색 결과로 2차선이라는 전장품 정보를 제공하는데 반해, 원본 지도는 8차선으로 정의하고 있을 수 있다. 이 경우, 이미지 센서의 신뢰도를 더 높게 산출하고, 원본 지도의 신뢰도를 더 낮게 산출할 수 있다.
다음으로, 상기 프로세서(870)는 신뢰도에 근거하여 전장품 정보와 관련된 제어를 수행할 수 있다.
일 예로, 프로세서(870)는 전장품 정보를 이용하여 가공 지도를 생성할지 여부를 신뢰도에 근거하여 결정할 수 있다. 프로세서(870)는, 가공 지도를 생성함에 있어, 신뢰도가 가공 기준보다 낮은 전장품 정보는 제외하고, 신뢰도가 상기 가공 기준보다 높거나 같은 전장품 정보는 포함시킬 수 있다.
프로세서(870)는 전장품 정보를 서버로 전송할지 여부를 신뢰도에 근거하여 결정할 수 있다. 예를 들어, 신뢰도가 업데이트 기준보다 낮은 전장품 정보는 업데이트에서 제외되고, 신뢰도가 업데이트 기준보다 높거나 같은 전장품 정보는 업데이트 할 수 있다.
전장품 정보를 필터링하거나 업데이팅 함에 있어서, 전장품 정보를 제공한 전장품마다 서로 다른 기준이 적용될 수 있다.
이하에서는 신뢰도에 근거하여 전장품 정보와 관련된 제어의 일 실시 예로 가공 지도를 생성하는 예를 설명한다.
도 14는 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
프로세서(870)는 신뢰도가 기설정된 조건을 만족하는 경우, 전장품 정보를 이용하여 원본 지도로부터 가공 지도를 생성할 수 있다. 프로세서(870)는 원본 지도 또는 가공 지도를 상기 차량(100)에 구비된 전장품들로 제공하는데, 상기 전장품들로 전송할 가공 지도에 포함시킬 전장품 정보를 상기 신뢰도에 근거하여 결정할 수 있다.
구체적으로, 프로세서(870)는 신뢰도에 근거하여 원본 지도 및 전장품 정보 중 적어도 하나를 선택한다(S1410).
예를 들어, 원본 지도에 대한 외부 정보 기준과 전장품 정보에 대한 내부 정보 기준이 설정되어 있을 수 있다. 원본 지도의 신뢰도가 외부 정보 기준보다 높다면 원본 지도가 선택되지만, 외부 정보 기준보다 낮거나 같다면 원본 지도는 선택되지 않는다. 전장품 정보의 신뢰도가 내부 정보 기준보다 높다면 전장품 정보가 선택되지만, 내부 정보 기준보다 낮거나 같다면 전장품 정보는 선택되지 않는다.
다른 예를 들어, 상기 프로세서(870)는 원본 지도의 신뢰도와 전장품 정보의 신뢰도를 상호 비교하고, 원본 지도 및 전장품 정보 중 어느 하나를 선택할 수도 있다. 이경우, 원본 지도 또는 전장품 정보가 선택된다.
다음으로, 선택된 정보를 이용하여 가공 지도를 생성할 수 있다(S1430).
상기 원본 지도 및 상기 전장품 정보 중 상기 프로세서에 의하여 선택되지 않은 정보는 상기 가공 지도에 포함되지 않는다.
전장품 정보가 선택되고 원본 지도가 선택되지 않는 경우, 상기 전장품들에게 상기 원본 지도가 제공되지 않고, 전장품 정보만 전달된다. 이때 차량(100)은 서버로부터 수신된 지도를 활용하지 않고, 차량 내부에서 생성된 내부 정보만 순수하게 이용하여 자율 주행을 수행할 수 있다.
원본 지도만 선택되고 전장품 정보가 선택되지 않는 경우, 차량(100)는 전장품 정보가 전장품으로부터 직접 수신되는 경우라도 전장품 정보를 이용하지 않는다.
상기 프로세서(870)는 상기 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 레이어들 중 적어도 하나를 선택할 수 있다. 이경우, 상기 복수의 레이어들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 레이어들은 상기 가공 지도에서 제외된다.
예를 들어, 원본 지도의 제3 레이어에는 신호등 정보를 포함하고 있지만, 이미지 센서로부터 상기 제3 레이어에 포함된 신호등은 사라지고 없다는 전장품 정보가 수신될 수 있다. 이경우, 제3 레이어에 대한 신뢰도가 외부 정보 기준보다 낮은 것으로 판단하고, 가공 지도에서 상기 제3 레이어를 제외할 수 있다.
한편, 상기 원본 지도에는 적어도 하나의 전장품에 의하여 센싱 되도록 이루어지는 복수의 다이내믹 객체들이 포함될 수 있다. 앞서 설명한 실시 예에서 신호등이 다이내믹 객체의 일 예에 해당한다.
상기 프로세서(870)는 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 다이내믹 객체들 중 적어도 하나를 선택할 수 있다. 상기 복수의 다이내믹 객체들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 다이내믹 객체들은 상기 가공 지도에서 제외된다. 상술한 신호등 예에서, 제3 레이어 전체가 가공 지도에서 제외되는 것이 아니라, 신호등이라는 특정 다이내믹 객체가 가공 지도에서 삭제될 수 있다.
한편, 전장품 정보는 서로 다른 전장품으로부터 수신된 복수 개의 전장품 정보들이 포함될 수 있다. 예를 들어, 상기 전장품 정보는 제1 전장품에서 수신된 제1 전장품 정보 및 제2 전장품에서 수신된 제2 전장품 정보를 포함할 수 있다.
상기 프로세서(870)는 상기 제1 전장품 정보의 제1 신뢰도 및 상기 제2 전장품 정보의 제2 신뢰도를 산출하며, 상기 가공 지도를 생성함에 있어서 상기 제1 신뢰도 및 상기 제2 신뢰도를 고려하여 상기 제1 전장품 정보 및 상기 제2 전장품 정보에 서로 다른 가중치를 부여할 수 있다.
예를 들어, 원본 지도에서는 소정 객체의 위치 정보를 (x1, y1, z1)으로 제공하고, 라이다는 상기 소정 객체의 위치 정보를 (x2, y2, z2)로 센싱한 제1 전장품 정보를 제공하며, 레이다는 상기 소정 객체의 위치 정보를 (x3, y3, z3)로 센싱한 제2 전장품 정보를 제공할 수 있다. 이때, 상기 프로세서(870)는 원본 지도, 제1 및 제2 전장품 정보를 이용하여 소정 객체의 위치를 특정하는데, 제1 전장품 정보의 제1 신뢰도 및 제2 전장품 정보의 제2 신뢰도에 근거하여, 제1 전장품 및 제2 전장품 정보에 각각 서로 다른 가중치를 부여할 수 있다. 이를 통해 좀 더 신뢰도가 높은 위치 정보가 제공될 수 있다.
가공 지도는 상기 통신부(810)를 통해 전장품들에 제공되며, 전장품들은 제공받은 가공 지도를 이용하여 자신의 동작을 수행한다.
도 15는 전장품 정보의 신뢰도를 산출하는 방법을 설명하기 위한 흐름도이다.
프로세서(870)는 적어도 하나의 전장품으로부터 복수의 로컬 객체들을 포함하는 전장품 정보를 수신한다(S1510).
다이내믹 객체는 적어도 하나의 전장품에 의하여 센싱되도록 이루어진 것으로 원본 지도에 포함되어 있는 것과 달리, 로컬 객체는 적어도 하나의 전장품에 의하여 센싱된 것이다. 예를 들어, 속도 제한 표지판이 다이내믹 객체로 설정될 수 있으며, 속도 제한 표지판의 위치 정보가 포함될 수 있다. 이미지 센서는 상기 속도 제한 표지판을 로컬 객체로 센싱하고, 센싱한 위치 정보를 전장품 정보로 생성할 수 있다.
로컬 객체들과 원본 지도에 포함된 복수의 다이내믹 객체들을 비교하여 상기 전장품 정보의 신뢰도를 산출한다(S1530).
신뢰도에 근거하여 원본 지도를 수정(또는 가공 지도를 생성)한다(S1550).
상기 프로세서(870)는 상기 전장품 정보의 신뢰도가 기설정된 조건을 만족하는 경우, 상기 로컬 객체들을 이용하여 상기 원본 지도를 수정한다.
예를 들어, 로컬 객체들을 이용하여 상기 원본 지도의 기준점 및 기준축 중 적어도 하나를 이동시킬 수 있다.
다른 예를 들어, 상기 프로세서(870)는 보다 정확한 가공 지도를 생성하기 위하여, 상기 다이내믹 객체들을 상기 로컬 객체들과 매칭되는 제1그룹과 상기 로컬 객체들과 매칭되지 않는 제2그룹으로 분류할 수 있다. 상기 신뢰도가 상기 기설정된 조건을 만족하는 경우, 상기 제2그룹에 포함된 다이내믹 객체들을 수정할 수 있다. 즉, 기준점이나 기준축을 변경하는 것이 아니라, 특정 다이내믹 객체에 설정되어 있는 위치 정보를 변경할 수 있다.
도 16은 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
상기 프로세서(870)는 상기 전장품 정보의 신뢰도에 근거하여 상기 전장품 정보를 상기 서버로 전송할지 여부를 결정할 수 있다.
상기 프로세서(870)는 상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 전장품 정보가 서버로 전송되도록 상기 통신부(810)를 제어한다. 이와 달리. 상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 프로세서(870)는 상기 원본 지도가 상기 전장품들에 전송되지 않도록 상기 통신부(810)를 제어한다.
프로세서(870)는 전장품 정보의 신뢰도에 근거하여 업데이트 할 전장품 정보를 결정하고(S1610), 결정된 정보를 서버로 전송할 수 있다(S1630).
예를 들어, 제1 전장품 정보의 제1 신뢰도는 기준 조건을 만족하고, 제2 전장품 정보의 제2 신뢰도는 기준 조건을 만족하지 않는 경우, 상기 프로세서(870)는 제1 전장품 정보를 선택하고, 선택된 제1 전장품 정보만 서버에 전송할 수 있다.
상기 프로세서(870)는 전장품 정보에 포함된 로컬 객체들 중 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 하나 또는 그 이상의 로컬 객체들에 관한 로컬 객체 정보가 상기 서버로 전송되도록 상기 통신부(810)를 제어할 수 있다.
나아가, 상기 프로세서(870)는, 상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 로컬 객체 정보가 타 차량에 전송되도록 상기 통신부(810)를 제어할 수도 있다. 이경우 V2X 통신에 의하여 타 차량에 전송되므로, 보다 직접적으로 로컬 객체 정보를 전달할 수 있다.
상기 로컬 객체 정보는 상기 하나 또는 그 이상의 로컬 객체들을 캡쳐한 이미지, 그리고 상기 하나 또는 그 이상의 로컬 객체들을 가이드 하는 위치 정보를 포함할 수 있다.
신뢰도가 보장되는 정보만 선택적으로 서버로 업데이트 되기 때문에, 서버의 연산량이 축소되며, 꼭 필요한 정보만 업데이트 되는 새로운 효과가 있다.
도 17은 본 발명에 따른 지도 제공 장치를 좀 더 구체적으로 설명하기 위한 블록도이고, 도 18은 도 17의 지도 제공 장치의 동작을 설명하기 위한 흐름도이다.
본 발명에 따른 지도 제공 장치(800)는 서버로부터 원본 지도(inCloud)를 수신하고, 센서나 기타장치로부터 전장품 정보(inCAM, inENV)를 수신할 수 있다.
지도 제공 장치(800)는, 도 13 내지 도 16에서 상술한 프로세서(870)의 역할을 전담으로 수행하는 데이터비교기(Data comparator)가 추가적으로 구비될 수 있다. 데이터비교기는 전장품들에게 전송할 지도 데이터(outEHP)를 생성하고, 서버로 전송할 내부 데이터(outCloud)를 결정할 수 있다.
도 18을 참조하면, 데이터비교기는 서버로부터 수신된 원본 지도(inCould)의 신뢰도가 센서로부터 수신된 전장품 정보(inCAM)의 신뢰도 보다 높거나 같은 경우, 원본 지도를 전장품들에게 제공하고, 서버로 전장품 정보를 전송하지 않는다.
이와 달리, 서버로부터 수신된 원본 지도(inCould)의 신뢰도가 센서로부터 수신된 전장품 정보(inCAM)의 신뢰도 보다 작은 경우, 가공 지도를 생성한다. 전장품들에게는 원본 지도 대신 가공 지도가 제공되고, 서버로 전장품 정보(inCAM)가 전송된다.
도 19는 전장품 정보와 관련된 제어의 일 실시 예를 설명하기 위한 흐름도이다.
지도 제공 장치(800)의 프로세서(870)는 차량(100)이 이동할 것으로 예측되거나 이동해야 하는 예측 경로를 생성한다(S1810). 프로세서(870)는 서버로부터 수신된 원본 지도의 전체를 전장품들에 제공하는 것이 아니라, 예측 경로에 근거하여 원본 지도의 일부를 추출하고, 추출된 일부를 전장품들에 제공한다. 이는 전장품들의 연산량을 축소하고, 캐시(cache)를 효율적으로 사용하기 위함이다.
상기 프로세서(870)는 전장품 정보에 포함된 로컬 객체들 중 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 예측 경로를 새로운 예측 경로로 변경한다(S1830). 그리고, 상기 프로세서(870)는 새로운 예측 경로에 대한 원본 지도가 서버로부터 수신되도록 통신부(810)를 제어한다(S1850).
이는 원본 지도의 신뢰도에 문제가 있는 경우이므로, 보다 안전한 주행이 가능하도록 하기 위함이다.
한편, 서버에 의하여 관리되는 원본 지도는 도로 상에 발생하는 실시간 정보를 즉각적으로 반영할 필요가 있다. 다수의 차량들에 의해 전송되는 정보는 빅데이터로 처리되어 즉각적으로 반영하지 못하는 문제가 있으므로, 꼭 필요한 정보에 대해서는 즉각적인 업데이트를 수행하는 프로세스가 필요하다.
보다 구체적으로, 지도 제공 장치에는 즉각적인 업데이트를 수행해야 하는 긴급 업데이트 조건이 기설정되어 있을 수 있다. 상기 전장품들 중 적어도 하나로부터 수신된 전장품 정보가 상기 긴급 업데이트 조건에 해당하는 경우, 상기 프로세서(870)는 상기 전장품 정보에 대하여 긴급 업데이트를 수행한다. 서버는 긴급 업데이트로 수신된 정보에 대하여 즉각적으로 업데이트를 수행하고, 이를 지도에 반영한다. 해당 지역에 진입하는 차량들은 긴급 업데이트가 수행된 지도를 수신받으므로 다수의 차량들에 대한 안전을 보장하게 된다.
상기 긴급 업데이트 조건에는, 예를 들어, 원본 지도가 제공하는 차선과 이미지 센서 등이 센싱한 차선 사이의 불일치가 기준치를 초과하는 경우, 원본 지도에는 존재하지 않지만 충돌가능성이 기준치를 초과하는 물체가 있는 경우, 구급차나 경찰차와 같이 긴급 업데이트로 지정된 차량이 상기 차량(100)을 기준으로 소정 범위 내에 감지되는 경우가 있을 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드(또는, 애플리케이션이나 소프트웨어)로서 구현하는 것이 가능하다. 상술한 자율 주행 차량의 제어 방법은 메모리 등에 저장된 코드에 의하여 실현될 수 있다.
컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 프로세서 또는 제어부를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 차량에 장착되며 상기 차량에 구비된 복수의 전장품들에 지도 데이터를 제공하는 지도 제공 장치에 관한 것으로,
    상기 전장품들과 통신을 수행하도록 이루어지며, 서버로부터 복수의 레이어들을 포함하는 원본 지도를 수신하도록 이루어지는 통신부; 및
    상기 전장품들 중 적어도 하나로부터 수신된 전장품 정보와 상기 원본 지도를 이용하여 상기 전장품 정보의 신뢰도를 산출하고, 상기 신뢰도에 근거하여 상기 전장품 정보와 관련된 제어를 수행하는 프로세서를 포함하는 지도 제공 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 신뢰도가 기설정된 조건을 만족하는 경우, 상기 전장품 정보를 이용하여 상기 원본 지도로부터 가공 지도를 생성하며, 상기 가공 지도가 상기 전장품들에 제공되도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 신뢰도에 근거하여 상기 원본 지도 및 상기 전장품 정보 중 적어도 하나를 선택하고, 선택된 정보를 이용하여 상기 가공 지도를 생성하는 것을 특징으로 하는 지도 제공 장치.
  4. 제3항에 있어서,
    상기 원본 지도 및 상기 전장품 정보 중 상기 프로세서에 의하여 선택되지 않은 정보는 상기 가공 지도에 포함되지 않는 것을 특징으로 하는 지도 제공 장치.
  5. 제3항에 있어서,
    상기 프로세서는 상기 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 레이어들 중 적어도 하나를 선택하며,
    상기 복수의 레이어들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 레이어들은 상기 가공 지도에서 제외되는 것을 특징으로 하는 지도 제공 장치.
  6. 제3항에 있어서,
    상기 원본 지도에는 적어도 하나의 전장품에 의하여 센싱 되도록 이루어지는 복수의 다이내믹 객체들이 포함하고,
    상기 프로세서는 상기 전장품 정보에 근거하여 상기 원본 지도에 포함된 상기 복수의 다이내믹 객체들 중 적어도 하나를 선택하며,
    상기 복수의 다이내믹 객체들 중 상기 프로세서에 의하여 선택되지 않은 하나 또는 그 이상의 다이내믹 객체들은 상기 가공 지도에서 제외되는 것을 특징으로 하는 지도 제공 장치.
  7. 제1항에 있어서,
    상기 전장품 정보는 제1 전장품에서 수신된 제1 전장품 정보 및 제2 전장품에서 수신된 제2 전장품 정보를 포함하며,
    상기 프로세서는,
    상기 제1 전장품 정보의 제1 신뢰도 및 상기 제2 전장품 정보의 제2 신뢰도를 산출하며, 상기 가공 지도를 생성함에 있어서 상기 제1 신뢰도 및 상기 제2 신뢰도를 고려하여 상기 제1 전장품 정보 및 상기 제2 전장품 정보에 서로 다른 가중치를 부여하는 것을 특징으로 하는 지도 제공 장치.
  8. 제1항에 있어서,
    상기 원본 지도에는 적어도 하나의 전장품에 의하여 센싱 되도록 이루어지는 복수의 다이내믹 객체들이 포함하고,
    상기 전장품 정보에는 적어도 하나의 전장품에 의하여 센싱된 복수의 로컬 객체들이 포함하며,
    상기 프로세서는, 상기 다이내믹 객체들과 상기 로컬 객체들을 이용하여 상기 신뢰도를 산출하는 것을 특징으로 하는 지도 제공 장치.
  9. 제8항에 있어서,
    상기 프로세서는,
    상기 신뢰도가 기설정된 조건을 만족하는 경우, 상기 로컬 객체들을 이용하여 상기 원본 지도를 수정하는 것을 특징으로 하는 지도 제공 장치.
  10. 제9항에 있어서,
    상기 프로세서는,
    상기 로컬 객체들을 이용하여 상기 원본 지도의 기준점 및 기준축 중 적어도 하나를 이동시키는 것을 특징으로 하는 지도 제공 장치.
  11. 제9항에 있어서,
    상기 프로세서는,
    상기 다이내믹 객체들을 상기 로컬 객체들과 매칭되는 제1그룹과 상기 로컬 객체들과 매칭되지 않는 제2그룹으로 분류하고,
    상기 신뢰도가 상기 기설정된 조건을 만족하는 경우, 상기 제2그룹에 포함된 다이내믹 객체들을 수정하는 것을 특징으로 하는 지도 제공 장치.
  12. 제8항에 있어서,
    상기 프로세서는,
    상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 하나 또는 그 이상의 로컬 객체들에 관한 로컬 객체 정보가 상기 서버로 전송되도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  13. 제12항에 있어서,
    상기 프로세서는,
    상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 로컬 객체 정보가 타 차량에 전송되도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  14. 제12항에 있어서,
    상기 로컬 객체 정보는 상기 하나 또는 그 이상의 로컬 객체들을 캡쳐한 이미지, 그리고 상기 하나 또는 그 이상의 로컬 객체들을 가이드 하는 위치 정보를 포함하는 것을 특징으로 하는 지도 제공 장치.
  15. 제12항에 있어서,
    상기 프로세서는,
    상기 차량이 이동할 것으로 예측되거나 이동해야 하는 예측 경로를 생성하며,
    상기 로컬 객체들 중 상기 다이내믹 객체들에 매칭되지 않는 상기 하나 또는 그 이상의 로컬 객체들이 있는 경우, 상기 예측 경로를 새로운 예측 경로로 변경하는 것을 특징으로 하는 지도 제공 장치.
  16. 제15항에 있어서,
    상기 프로세서는,
    상기 예측 경로가 상기 새로운 예측 경로로 변경되는 경우, 상기 새로운 예측 경로에 대한 원본 지도가 상기 서버로부터 수신되도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  17. 제1항에 있어서,
    상기 프로세서는,
    상기 전장품 정보의 신뢰도에 근거하여 상기 전장품 정보를 상기 서버로 전송할지 여부를 결정하는 것을 특징으로 하는 지도 제공 장치.
  18. 제17항에 있어서,
    상기 프로세서는
    상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 전장품 정보가 상기 서버로 전송되도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  19. 제18항에 있어서,
    상기 프로세서는
    상기 전장품 정보의 신뢰도가 상기 원본 지도의 신뢰도보다 높은 경우, 상기 원본 지도가 상기 전장품들에 전송되지 않도록 상기 통신부를 제어하는 것을 특징으로 하는 지도 제공 장치.
  20. 제1항에 있어서,
    상기 전장품들에는 이미지 센서가 포함되고, 상기 전장품 정보에는 상기 이미지 센서에 의하여 센싱된 센싱 정보가 포함되는 것을 특징으로 하는 지도 제공 장치.
PCT/KR2018/009046 2017-08-08 2018-08-08 지도 제공 장치 WO2019031851A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/637,598 US11513531B2 (en) 2017-08-08 2018-08-08 Apparatus for providing map

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762542295P 2017-08-08 2017-08-08
US62/542,295 2017-08-08

Publications (1)

Publication Number Publication Date
WO2019031851A1 true WO2019031851A1 (ko) 2019-02-14

Family

ID=65271462

Family Applications (3)

Application Number Title Priority Date Filing Date
PCT/KR2018/009048 WO2019031853A1 (ko) 2017-08-08 2018-08-08 지도 제공 장치
PCT/KR2018/009046 WO2019031851A1 (ko) 2017-08-08 2018-08-08 지도 제공 장치
PCT/KR2018/009047 WO2019031852A1 (ko) 2017-08-08 2018-08-08 지도 제공 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/009048 WO2019031853A1 (ko) 2017-08-08 2018-08-08 지도 제공 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/009047 WO2019031852A1 (ko) 2017-08-08 2018-08-08 지도 제공 장치

Country Status (2)

Country Link
US (3) US11409307B2 (ko)
WO (3) WO2019031853A1 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021221181A1 (ko) * 2020-04-27 2021-11-04 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
CN113626545A (zh) * 2020-05-08 2021-11-09 大众汽车股份公司 用于确定合并环境地图的车辆、装置、方法和计算机程序
WO2021230387A1 (ko) * 2020-05-11 2021-11-18 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021235576A1 (ko) * 2020-05-22 2021-11-25 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246534A1 (ko) * 2020-06-01 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246550A1 (ko) * 2020-06-04 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246551A1 (ko) * 2020-06-04 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
EP4014062B1 (de) * 2019-10-01 2024-01-31 Audi AG Verfahren zum bereitstellen einer aktuellen lokalen umgebungszustandskarte für ein kraftfahrzeug sowie kraftfahrzeug zum durchführen eines derartigen verfahrens

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11362882B2 (en) * 2017-08-25 2022-06-14 Veniam, Inc. Methods and systems for optimal and adaptive urban scanning using self-organized fleets of autonomous vehicles
WO2019116784A1 (ja) * 2017-12-12 2019-06-20 ソニー株式会社 情報処理装置、移動体、制御システム、情報処理方法及びプログラム
KR102612960B1 (ko) * 2018-01-23 2023-12-13 삼성전자주식회사 지도 수신 방법 및 이를 위한 장치
US10887433B2 (en) * 2018-04-03 2021-01-05 Pony Ai Inc. System and method for incremental data processing
US11333503B2 (en) 2018-04-19 2022-05-17 Uatc, Llc Global and local navigation for self-driving
US10909866B2 (en) * 2018-07-20 2021-02-02 Cybernet Systems Corp. Autonomous transportation system and methods
US11113959B2 (en) * 2018-12-28 2021-09-07 Intel Corporation Crowdsourced detection, identification and sharing of hazardous road objects in HD maps
US20220090939A1 (en) * 2019-01-04 2022-03-24 Visteon Global Technologies, Inc. Ehorizon upgrader module, moving objects as ehorizon extension, sensor detected map data as ehorizon extension, and occupancy grid as ehorizon extension
WO2020171262A1 (ko) * 2019-02-22 2020-08-27 엘지전자 주식회사 경로 제공 장치 및 그것을 포함하는 통신 시스템
WO2020171267A1 (ko) * 2019-02-22 2020-08-27 엘지전자 주식회사 경로 제공 장치 및 그것을 포함하는 통신 시스템
DE102019205994A1 (de) * 2019-04-26 2020-10-29 Robert Bosch Gmbh Verfahren zum Ausbilden einer Lokalisierungsschicht einer digitalen Lokalisierungskarte zum automatisierten Fahren
US11823568B2 (en) * 2019-05-02 2023-11-21 Toyota Motor North America, Inc. Dynamic speed limit for vehicles and autonomous vehicles
KR102349159B1 (ko) * 2019-05-21 2022-01-10 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2020240243A1 (ja) * 2019-05-28 2020-12-03 日産自動車株式会社 ナビゲーシヨン装置、自動運転制御装置、及びナビゲーシヨン方法
DE102019209398A1 (de) * 2019-06-27 2020-12-31 Robert Bosch Gmbh Angleichen von Koordinatensystemen mehrerer Karten basierend auf Trajektorien
US11536573B2 (en) 2019-09-03 2022-12-27 Here Global B.V. Method, apparatus, and computer program product for generating correspondence between map versions
US10969232B1 (en) * 2019-12-06 2021-04-06 Ushr Inc. Alignment of standard-definition and High-Definition maps
US11674819B2 (en) 2019-12-30 2023-06-13 Subaru Corporation Mobility information provision system, server, and vehicle
US11900796B2 (en) 2019-12-30 2024-02-13 Subaru Corporation Map generation system
US11688279B2 (en) 2019-12-30 2023-06-27 Subaru Corporation Mobility information provision system, server, and vehicle
US11816988B2 (en) 2019-12-30 2023-11-14 Subaru Corporation Mobility information provision system, server, and vehicle
US11816982B2 (en) 2019-12-30 2023-11-14 Subaru Corporation Mobility information provision system, server, and vehicle
US11423780B2 (en) 2019-12-30 2022-08-23 Subaru Corporation Traffic control system
US11395208B2 (en) 2019-12-30 2022-07-19 Subaru Corporation Mobility information provision system for mobile bodies, server, and vehicle
DE102020101445A1 (de) * 2020-01-22 2021-07-22 Bayerische Motoren Werke Aktiengesellschaft Bestimmen einer Route auf einer Karte
KR20210115128A (ko) * 2020-03-12 2021-09-27 현대자동차주식회사 공장 내 차량 무인주행 시스템 및 그 방법
US11375352B2 (en) 2020-03-25 2022-06-28 Intel Corporation Devices and methods for updating maps in autonomous driving systems in bandwidth constrained networks
US20210101620A1 (en) * 2020-12-17 2021-04-08 Intel Corporation Systems, methods, and devices for generating and using safety threat maps
JP2022121103A (ja) * 2021-02-08 2022-08-19 パナソニックＩｐマネジメント株式会社 合流支援装置、合流支援システム、及び合流支援方法
CN113010793A (zh) * 2021-04-09 2021-06-22 阿波罗智联(北京)科技有限公司 地图数据处理的方法、装置、设备、存储介质及程序产品
US11543264B1 (en) * 2022-02-23 2023-01-03 Plusai, Inc. Methods and apparatus for navigating an autonomous vehicle based on a map updated in regions

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004198997A (ja) * 2002-12-20 2004-07-15 Denso Corp 地図評価システム、及び、照合装置、並びに、地図評価装置
JP2007003568A (ja) * 2005-06-21 2007-01-11 Nissan Motor Co Ltd 地図情報生成装置
JP2016133386A (ja) * 2015-01-19 2016-07-25 一般財団法人道路交通情報通信システムセンター マップマッチングシステムおよびマップマッチング方法
JP2016143324A (ja) * 2015-02-04 2016-08-08 株式会社デンソー 物体検出装置
KR20160128077A (ko) * 2015-04-28 2016-11-07 한국전자통신연구원 차량 센서의 자동 보정 장치 및 그 방법

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3374361B2 (ja) * 1997-04-04 2003-02-04 矢崎総業株式会社 車両の異常電流検出方法及び車両の異常電流検出装置並びに車両用電源供給装置
JP4065108B2 (ja) 2001-04-06 2008-03-19 三菱電機株式会社 車両用ナビゲーション装置
JP2003004468A (ja) 2001-06-26 2003-01-08 Alpine Electronics Inc ナビゲーション装置及びその地図表示方法
JP2007121139A (ja) 2005-10-28 2007-05-17 Alpine Electronics Inc 車載用ナビゲーション装置及び車両の速度に基づくマップマッチング方法
US20090281717A1 (en) 2006-06-02 2009-11-12 Pioneer Corporation Information providing device, information providing method, and information providing program
JP2008068777A (ja) * 2006-09-15 2008-03-27 Toyota Motor Corp 電動パワーステアリング装置
ATE554367T1 (de) * 2008-05-09 2012-05-15 Research In Motion Ltd Vorausschauendes herunterladen von kartendaten
US9062982B2 (en) * 2008-12-15 2015-06-23 Blackberry Limited Pre-loading waypoint data
US20120109763A1 (en) * 2010-11-02 2012-05-03 Lisa Mae Laughner Mobile Charging of Electric Vehicles Off the Electric Power Grid
KR101820502B1 (ko) 2011-01-05 2018-02-28 에스케이플래닛 주식회사 실시간 지도 데이터 업데이트 방법 및 이를 위한 장치
US20140227907A1 (en) * 2011-09-29 2014-08-14 Yazaki Corporation Connector
KR101284344B1 (ko) * 2011-12-09 2013-07-08 현대자동차주식회사 구동모터를 구비한 차량의 전류센서 재설정 방법
US9633564B2 (en) 2012-09-27 2017-04-25 Google Inc. Determining changes in a driving environment based on vehicle behavior
JP6086697B2 (ja) 2012-11-05 2017-03-01 株式会社ゼンリン ナビゲーションシステム
CN104071102B (zh) * 2013-03-28 2016-10-26 比亚迪股份有限公司 汽车的双电压电气控制方法和控制系统及汽车
US10078811B2 (en) * 2013-11-29 2018-09-18 Fedex Corporate Services, Inc. Determining node location based on context data in a wireless node network
US9473408B1 (en) * 2014-01-14 2016-10-18 Google Inc. Shortest first longer next routing with congestion reduction
US9409644B2 (en) 2014-07-16 2016-08-09 Ford Global Technologies, Llc Automotive drone deployment system
US20160052516A1 (en) * 2014-08-19 2016-02-25 Hyundai Motor Company Method and apparatus for detecting a poor driving pattern while tracking a lane
JP6225927B2 (ja) * 2015-02-02 2017-11-08 トヨタ自動車株式会社 車両状態予測システム
US10002156B2 (en) 2015-03-16 2018-06-19 Here Global B.V. Version management for incrementally compiled map data
KR20160140055A (ko) 2015-05-29 2016-12-07 현대자동차주식회사 내비게이션 장치 및 그의 동적 지도 제공 방법
US10422651B2 (en) 2015-07-15 2019-09-24 Mitsubishi Electric Corporation Route evaluation apparatus and route evaluation method
JP7066607B2 (ja) 2015-08-03 2022-05-13 トムトム グローバル コンテント ベスローテン フエンノートシャップ ローカライゼーション基準データを生成及び使用する方法及びシステム
WO2017057058A1 (ja) 2015-09-30 2017-04-06 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
KR102113816B1 (ko) 2016-01-05 2020-06-03 한국전자통신연구원 차량 자율주행 서비스 시스템 및 이를 위한 클라우드 서버 및 그 동작 방법
KR20170082674A (ko) * 2016-01-06 2017-07-17 한국전자통신연구원 차량안전 주행지원 단말장치 및 차량안전 주행지원 방법
US9616896B1 (en) 2016-03-15 2017-04-11 Uber Technologies, Inc. System for switching control of an autonomous vehicle
WO2017165627A1 (en) 2016-03-23 2017-09-28 Netradyne Inc. Advanced path prediction
US10168696B2 (en) * 2016-03-31 2019-01-01 International Business Machines Corporation Dynamic analysis of real-time restrictions for remote controlled vehicles
US10502577B2 (en) * 2016-06-30 2019-12-10 Here Global B.V. Iterative map learning based on vehicle on-board sensor data
US11468765B2 (en) 2016-07-20 2022-10-11 Harman Becker Automotive Systems Gmbh Generating road segment attributes based on spatial referencing
US10112595B2 (en) * 2016-11-08 2018-10-30 Hyundai America Technical Center, Inc Predictive control of powertrain systems based on vehicle-to-vehicle (V2V) communications
US10564638B1 (en) 2017-07-07 2020-02-18 Zoox, Inc. Teleoperator situational awareness

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004198997A (ja) * 2002-12-20 2004-07-15 Denso Corp 地図評価システム、及び、照合装置、並びに、地図評価装置
JP2007003568A (ja) * 2005-06-21 2007-01-11 Nissan Motor Co Ltd 地図情報生成装置
JP2016133386A (ja) * 2015-01-19 2016-07-25 一般財団法人道路交通情報通信システムセンター マップマッチングシステムおよびマップマッチング方法
JP2016143324A (ja) * 2015-02-04 2016-08-08 株式会社デンソー 物体検出装置
KR20160128077A (ko) * 2015-04-28 2016-11-07 한국전자통신연구원 차량 센서의 자동 보정 장치 및 그 방법

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4014062B1 (de) * 2019-10-01 2024-01-31 Audi AG Verfahren zum bereitstellen einer aktuellen lokalen umgebungszustandskarte für ein kraftfahrzeug sowie kraftfahrzeug zum durchführen eines derartigen verfahrens
US12000710B2 (en) 2019-10-01 2024-06-04 Audi Ag Method for providing a current local environment status map for a motor vehicle, and motor vehicle for carrying out a method of this kind
WO2021221181A1 (ko) * 2020-04-27 2021-11-04 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
CN113626545A (zh) * 2020-05-08 2021-11-09 大众汽车股份公司 用于确定合并环境地图的车辆、装置、方法和计算机程序
WO2021230387A1 (ko) * 2020-05-11 2021-11-18 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021235576A1 (ko) * 2020-05-22 2021-11-25 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246534A1 (ko) * 2020-06-01 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246550A1 (ko) * 2020-06-04 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법
WO2021246551A1 (ko) * 2020-06-04 2021-12-09 엘지전자 주식회사 경로 제공 장치 및 그것의 경로 제공 방법

Also Published As

Publication number Publication date
US11409307B2 (en) 2022-08-09
US20200183389A1 (en) 2020-06-11
US20200256681A1 (en) 2020-08-13
WO2019031852A1 (ko) 2019-02-14
WO2019031853A1 (ko) 2019-02-14
US11513531B2 (en) 2022-11-29
US20200166945A1 (en) 2020-05-28

Similar Documents

Publication Publication Date Title
WO2019031851A1 (ko) 지도 제공 장치
WO2020235813A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2017222299A1 (en) Vehicle control device mounted on vehicle and method for controlling the vehicle
WO2021045257A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021141142A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
EP3475134A1 (en) Vehicle control device mounted on vehicle and method for controlling the vehicle
WO2019098434A1 (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
WO2018088615A1 (ko) 차량 주행 제어 장치 및 방법
WO2021090971A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2018230768A1 (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
WO2019117333A1 (ko) 차량에 구비된 디스플레이 장치 및 디스플레이 장치의 제어방법
WO2021045256A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021029444A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021141143A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2020149427A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021157760A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021025212A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2020149431A1 (ko) 경로 제공 장치 및 그것의 제어 방법
WO2021045255A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021025216A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021029445A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021010507A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021230387A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2018097424A1 (ko) 차량용 통신 장치 및 차량
WO2021246534A1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18844902

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18844902

Country of ref document: EP

Kind code of ref document: A1