JP2021093162A - 走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体 - Google Patents

走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体 Download PDF

Info

Publication number
JP2021093162A
JP2021093162A JP2020203670A JP2020203670A JP2021093162A JP 2021093162 A JP2021093162 A JP 2021093162A JP 2020203670 A JP2020203670 A JP 2020203670A JP 2020203670 A JP2020203670 A JP 2020203670A JP 2021093162 A JP2021093162 A JP 2021093162A
Authority
JP
Japan
Prior art keywords
vehicle
data
accident
traveling
driving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020203670A
Other languages
English (en)
Inventor
ヨンス カン
Yonsu Kan
ヨンス カン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thinkware Corp
Original Assignee
Thinkware Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thinkware Corp filed Critical Thinkware Corp
Publication of JP2021093162A publication Critical patent/JP2021093162A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • G06Q50/40
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • B60W40/072Curvature of the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/3617Destination input or retrieval using user history, behaviour, conditions or preferences, e.g. predicted or inferred from previous use or current movement
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/0265Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric the criterion being a learning criterion
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/04Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators
    • G05B13/048Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators using a predictor
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/018Certifying business or products
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/18Legal services; Handling legal documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/26Government or public services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/012Measuring and analyzing of parameters relative to traffic conditions based on the source of data from other sources than vehicle or roadside beacons, e.g. mobile networks
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • G08G1/0129Traffic data processing for creating historical data or processing based on historical data
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • G08G1/0145Measuring and analyzing of parameters relative to traffic conditions for specific applications for active traffic flow control
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/096741Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where the source of the transmitted information selects which information to transmit to each vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/123Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
    • G08G1/127Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams to a central station ; Indicators in a central station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/143Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces inside the vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/144Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces on portable or mobile units, e.g. personal digital assistant [PDA]
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/164Centralised systems, e.g. external to vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/16Control of vehicles or other craft
    • G09B19/167Control of land vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W2030/082Vehicle operation after collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/10Historical data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/08Predicting or avoiding probable or impending collision
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G06F18/24133Distances to prototypes
    • G06F18/24137Distances to cluster centroïds
    • G06F18/2414Smoothing the distance, e.g. radial basis function networks [RBFN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/08Insurance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808Diagnosing performance data

Abstract

【課題】サービス提供サーバの走行関連案内サービスの提供する。【解決手段】車両用端末装置から、車両の特定の走行状況に関連する車両のADASデータ、車両の位置データ、車両の走行データ、及び車両の走行中に撮影された走行映像を受信するステップと、受信されたデータと走行映像を分析し、車両の特定の走行状況に関連する案内情報を生成するステップと、生成された案内情報を用いて車両に対する走行関連案内サービスを提供するステップと、を含む。【選択図】図2

Description

本発明は、走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体に関し、より詳細には、車両の走行中に撮影された映像、及び車両の走行中に獲得された各種データに基づいて、走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体に関する。
自動車技術の急速な発展は、全世界的な車両の増加をもたらしており、このような車両の増加に伴い、車両に関連する位置情報サービス(Location Based Service;LBS)も活性化されている。
かかる位置情報サービスを用いる代表的なデバイスとしては、車両などの現在の位置を測位したり、目的地までの移動経路を案内する車両用ナビゲーションがある。
さらに、近年、車両の停車または運行中に発生した事故の責任の所在による過失割合を判断するために、客観的な資料を提供可能な車両用ブラックボックスが用いられており、性能の向上に伴い、車両用ブラックボックスからも位置情報サービスが提供されている。
このように、各種車両用端末装置の使用が普遍化されており、これに伴い、運転者の走行安定性を高めることができる方案、運転者の便宜のための各種付加サービスに対する消費者のニーズが益々増加している。
本発明は、上述の必要性によりなされたものであって、本発明の目的は、車両の走行中に特定の走行状況が検知されると、検知された特定の走行状況に関連するADASデータ、位置データ、走行データ、及び走行映像を利用して、事故状況予測案内サービス、事故法律案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体を提供することにある。
また、本発明の目的は、運転者の過去走行履歴データ、他運転者の過去走行履歴データを利用して、車両の運転者に走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体を提供することにある。
上述の目的を達成するための本発明の一実施形態に係る車両用端末装置の走行関連案内サービスの提供方法は、車両の走行中に撮影された走行映像を獲得するステップと、車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールから前記車両のADASデータを受信し、前記車両のECU(Electronic Control Unit)モジュールから前記車両の走行データを受信するステップと、前記車両の位置データを受信するステップと、前記車両の走行中に特定の走行状況が検知されると、前記検知された特定の走行状況に関連する前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像をサービス提供サーバに伝送するステップと、を含む。
そして、前記伝送するステップは、前記車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況が検知されると、検知された第1走行状況の時点の前の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を前記サービス提供サーバに伝送するステップを含むことができる。
また、前記車両の走行中に事故が発生した第2走行状況が検知されると、前記検知された第2走行状況の時点から所定時間前乃至所定時間後の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を前記サービス提供サーバに伝送するステップをさらに含むことができる。
そして、前記車両の走行中に撮影された走行映像を獲得するステップは、前方カメラにより撮影された前方走行映像と、後方カメラにより撮影された後方走行映像とを獲得するステップを含み、前記前方走行映像と前記後方走行映像を結合し、結合された映像における自車の位置に自車客体を配置させたトップビュー(Top view)映像を生成するステップをさらに含み、前記サービス提供サーバに伝送される走行映像は、前記トップビュー(Top view)映像であることができる。
また、前記トップビュー映像は、複数のフレームが抽出されて形成されたGIF(Graphics Interchange Format)フォーマットであることができる。
そして、前記サービス提供サーバで、前記車両用端末装置から受信されたデータに基づいて、前記車両に発生する可能性があった事故状況予測情報が生成されると、前記生成された事故状況予測情報を受信するステップと、前記受信された事故状況予測情報に基づいて案内を行うステップと、をさらに含むことができる。
また、前記サービス提供サーバで、前記車両用端末装置から受信されたデータに基づいて事故法律評価情報が生成されると、前記生成された事故法律評価情報を受信するステップと、前記受信された事故法律評価情報に基づいて案内を行うステップと、をさらに含むことができる。
そして、衝撃レベルを検知するステップと、既設定の第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃が検知され、前記衝撃が検知される前に、前記ADASデータに基づいて車線離脱報知、前方追突、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知されると、事故発生可能性のある第1走行状況と判断するステップと、既設定の第2衝撃レベルを超える衝撃が検知されると、事故が発生した第2走行状況と判断するステップと、をさらに含むことができる。
一方、上述の目的を達成するための本発明の一実施形態に係るサービス提供サーバの走行関連案内サービスの提供方法は、車両用端末装置から、車両の特定の走行状況に関連する前記車両のADASデータ、前記車両の位置データ、前記車両の走行データ、及び前記車両の走行中に撮影された走行映像を受信するステップと、前記受信されたデータと走行映像を分析し、前記車両の特定の走行状況に関連する案内情報を生成するステップと、前記生成された案内情報を用いて、前記車両に対する走行関連案内サービスを提供するステップと、を含む。
そして、前記生成するステップでは、前記車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況の時点の前の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を分析し、前記第1走行状況で車両に発生する可能性があった事故状況予測情報を生成し、前記提供するステップでは、前記生成された事故状況予測情報を用いて事故状況予測案内サービスを提供することができる。
また、前記生成するステップでは、前記車両に事故が発生した第2走行状況の時点から所定時間前乃至所定時間後の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を分析して事故法律評価情報を生成し、前記提供するステップでは、前記生成された事故法律評価情報を用いて事故法律案内サービスを提供することができる。
そして、前記受信された走行映像は、前方走行映像と後方走行映像が結合され、結合された映像における自車の位置に自車客体が配置されたトップビュー(Top view)映像であることができる。
また、前記事故状況予測情報を生成するステップは、前記トップビュー映像から自車の周囲の車両を検出するステップと、前記検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて前記第1走行状況で車両に発生する可能性があった事故状況を予測し、前記事故状況予測情報を生成するステップと、を含むことができる。
そして、前記事故法律評価情報を生成するステップは、前記トップビュー映像から自車の周囲の車両を検出するステップと、前記検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて事故過失割合を分析するステップと、前記分析による事故過失割合を含む前記事故法律評価情報を生成するステップと、を含むことができる。
また、前記車両の運転者に対して駐車位置毎の目的地データセットを格納するステップと、前記車両が駐車から走行状態に変更されると、前記車両の位置データと、既格納の駐車位置毎の目的地データセットとを比較し、前記車両の運転者の予想目的地を判断するステップと、前記判断された予想目的地を用いて目的地予測案内サービスを提供するステップと、をさらに含むことができる。
そして、前記車両の運転者に対して走行位置毎のADASデータセットを格納するステップと、前記車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、前記車両の運転者の位置に合致するADASデータを検出するステップと、前記検出されたADASデータを用いて運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
また、他運転者に対する走行位置毎のADASデータセットを格納するステップと、前記車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、前記車両の運転者の位置に合致するADASデータを検出するステップと、前記検出されたADASデータを用いて他運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
一方、上述の目的を達成するための本発明の一実施形態に係る車両用端末装置は、通信部と、車両の走行中に撮影された走行映像を獲得する映像獲得部と、車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールからADASデータを受信するADASデータ獲得部と、前記車両のECU(Electronic Control Unit)モジュールから前記車両の走行データを受信するECUデータ獲得部と、前記車両の位置データを受信する位置データ獲得部と、前記車両の走行中に特定の走行状況が検知されると、前記検知された特定の走行状況に関連する前記ADASデータ、前記位置データ、前記車両の走行データ、及び前記走行映像をサービス提供サーバに伝送するように前記通信部を制御する制御部と、を含む。
また、上述の目的を達成するための本発明の一実施形態に係るサービス提供サーバは、車両用端末装置から、車両の特定の走行状況に関連する前記車両のADASデータ、前記車両の位置データ、前記車両の走行データ、及び前記車両の走行中に撮影された走行映像を受信する通信部と、前記受信されたデータと走行映像を分析して前記車両の特定の走行状況に関連する案内情報を生成し、前記生成された案内情報を用いて、前記車両に対する走行関連案内サービスを提供するサービス提供部と、を含む。
一方、上述の目的を達成するための本発明の一実施形態によると、走行関連案内サービスの提供方法を実行するために、記録媒体に格納されているプログラムを含むことができる。
また、上述の目的を達成するための本発明の一実施形態によると、走行関連案内サービスの提供方法を実行するためのプログラムコードが記録されているコンピュータ読み取り可能な記録媒体を含むことができる。
上述の本発明の様々な実施形態によると、車両の事故発生可能性のある第1走行状況で、車両に発生する可能性があった事故状況を予測し、事故状況予測情報を生成して事故状況予測サービスを提供することで、運転者に危険性を想起させるとともに、運転者の安全な運転を図ることができる。
また、本発明の様々な実施形態によると、車両の事故が発生した第2走行状況で、事故の経緯を分析し、分析による事故過失割合を含む事故法律評価情報を生成して事故法律案内サービスを提供することで、車両の修理費用などのような金銭的要素の法律サービス、保険関連諮問を自動で支援することができて、運転者の便宜を高めることができる。
また、本発明の様々な実施形態によると、目的地予測案内サービス、運転者の過去運転履歴案内サービス、他運転者の過去運転履歴案内サービスなどにより、運転者の便宜を高めることができる。
本発明の一実施形態に係るサービス提供システムを示すブロック図である。 本発明の一実施形態に係るサービス提供システムの動作を示すタイミング図である。 本発明の一実施形態に係る車両用端末装置を示すブロック図である。 本発明の一実施形態に係る車両用端末装置の走行関連案内サービスの提供方法を示すフローチャートである。 本発明の一実施形態に係る車両用端末装置の走行状況の検知方法を示すフローチャートである。 本発明の一実施形態に係るサービス提供サーバを示すブロック図である。 本発明の一実施形態に係るサービス提供部をより具体的に示すブロック図である。 本発明の一実施形態に係るトップビュー映像を示す図である。 本発明の一実施形態に係る事故状況の予測方法を示す図である。 本発明の一実施形態に係る法律評価情報の生成方法を示す図である。 本発明の一実施形態に係る事故状況予測案内サービスの提供方法を示すフローチャートである。 本発明の一実施形態に係る事故法律案内サービスの提供方法を示すフローチャートである。
以下の内容は、単に本発明の原理を例示するものである。よって、当業者であれば、本明細書で明確に説明または図示されていなくても、本発明の原理を実現し、本発明の概念と範囲に含まれた種々の装置を発明することができる。また、本明細書に列挙された全ての条件付き用語及び実施形態は、原則的に、本発明の概念を理解させるという目的でのみ明確に意図され、このように特別に列挙された実施形態及び状態によって制限されるものではないことを理解すべきである。
また、本発明の原理、観点、及び実施形態だけでなく、特定の実施形態を列挙する全ての詳細な説明は、このような事項の構造的及び機能的均等物を含むように意図されると理解すべきである。また、このような均等物は、現在公知となっている均等物だけでなく、将来に開発される均等物、すなわち、構造にかかわらず、同じ機能を果たすように発明される全ての素子を含むと理解すべきである。
したがって、例えば、本明細書のブロック図は、本発明の原理を具体化する例示的な回路の概念的な観点を示すものと理解すべきである。これと類似に、全てのフローチャート、状態変換図、疑似コードなどは、コンピュータにより読み取り可能な媒体に実質的に示すことができ、コンピュータまたはプロセッサが明確に図示されたか否かにかかわらず、コンピュータまたはプロセッサにより行われる様々なプロセスを示すものと理解すべきである。
プロセッサまたはこれと類似の概念として表示された機能ブロックを含む図に図示された種々の素子の機能は、専用ハードウェアだけでなく、適切なソフトウェアと関連してソフトウェアを実行する能力を有するハードウェアの使用により提供できる。プロセッサにより提供される際に、前記機能は単一の専用プロセッサ、単一の共有プロセッサ、または複数の個別的プロセッサにより提供されることができ、これらのうちの一部は共有可能である。
また、プロセッサ、制御、またはこれと類似の概念として提示される用語の明確な使用は、ソフトウェアを実行する能力を有するハードウェアを排他的に引用して解釈してはならず、制限無しに、デジタル信号プロセッサ(DSP)ハードウェア、ソフトウェアを格納するためのROM、RAM、及び不揮発性メモリを暗示的に含むものと理解すべきである。周知慣用の他のハードウェアも含まれることができる。
本明細書の請求範囲において、詳細な説明に記載された機能を果たすための手段として表現された構成要素は、例えば、上記の機能を果たす回路素子の組み合わせまたはファームウエア/マイクロコードなどを含む全ての形式のソフトウェアを含む機能を果たす全ての方法を含むと意図されたものであり、前記機能を果たすように前記ソフトウェアを実行するための適切な回路と結合される。このような請求範囲により定義される本発明は、多様に列挙された手段により提供される機能が結合され、請求項が要求する方式と結合されるため、前記機能を提供できる如何なる手段も本明細書から把握されるものと均等なものと理解すべきである。
上述の目的、特徴、及び利点は、添付の図面と関連した以下の詳細な説明によってより明らかになり、これにより、本発明が属する技術分野において通常の知識を有する者が本発明の技術的思想を容易に実施することができるはずである。また、本発明を説明するに当たり、本発明と関連した公知技術についての具体的な説明が本発明の要旨を不明瞭にする可能性があると判断される場合に、その詳細な説明を省略する。
以下、添付図面を参照して、本発明の様々な実施形態について詳細に説明する。
図1は、本発明の一実施形態に係るサービス提供システムを示すブロック図である。図2は、本発明の一実施形態に係る走行関連案内システムの動作を示すタイミング図である。図1及び2を参照すると、本発明の一実施形態に係るサービス提供システム1000は、車両用端末装置100、ユーザ端末装置200、サービス提供サーバ300の全部または一部を含む。
車両用端末装置100は、車両に備えられるものであって、本発明に係る走行関連案内サービスを提供するために必要な各種データを収集し、収集されたデータの前処理、分析などを行い、収集されたデータまたは処理されたデータをサービス提供サーバ300に伝送し、サービス提供サーバ300と連携して各種走行関連案内を提供する装置であることができる。
具体的に、車両用端末装置100は、車両の走行中に撮影された走行映像を獲得し(S11)、車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールからADASデータを受信し、車両のECU(Electronic Control Unit)OBD(On-Board Diagnostics)モジュールから走行データを受信し、位置データ獲得部150により獲得された位置データを受信することができる(S12)。そして、車両用端末装置100は、車両の走行中に特定の走行状況が検知されると(S13:Y)、検知された特定の走行状況に関連するADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバ300に伝送することができる(S14)。
かかる車両用端末装置100は、ナビゲーション(navigation)、車両用映像撮影装置である車載カメラ(Car dash cam)またはカービデオレコーダ(Car video recorder)などのような様々な装置で実現されることができる。但し、これに限定されるものではなく、車両用端末装置100は、各種車両用デバイスで獲得されたADASデータ、走行データ、位置データ、及び走行映像をサービス提供サーバ300に中継する通信ドングル(dongle)で実現されてもよい。
そして、上述の「車両の走行中」という表現は、車両が自律走行システムにより、または人により運転されている状態を意味し、車両の停車状態、車両の走行状態、車両の駐車状態などのように様々な状態を含む概念である。
また、上述の車両の特定の走行状況は、前記車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況と、車両の走行中に事故が発生した第2走行状況と、を含むことができる。
また、車両は、動力を用いて生命体を移動させることができる運送体を含む概念であり、線路上を走行する鉄道車両及び車路上を走行する車両(Car)、バイク、自転車などの運送機械を何れも含む概念である。
一方、サービス提供サーバ300は、車両用端末装置100から車両の特定の走行状況に関連するADASデータ、位置データ、走行データ、及び走行映像を受信し、受信されたデータと走行映像を分析し、車両の特定の走行状況に関連する案内情報を生成することができる(S15)。一例として、サービス提供サーバ300は、車両用端末装置100から受信されたデータ及び走行映像を分析し、第1走行状況で車両に発生する可能性があった事故状況予測情報を生成することができる。または、サービス提供サーバ300は、車両用端末装置100から受信されたデータ及び走行映像を分析し、車両の事故の経緯に基づく事故法律評価情報を生成することができる。
そして、サービス提供サーバ300は、生成された案内情報を用いて、車両に対する走行関連案内サービスを提供することができる。具体的に、サービス提供サーバ300は、生成された案内情報を車両用端末装置100に伝送することで、車両用端末装置100に、車両に対する走行関連案内サービスを行うことができる。また、サービス提供サーバ300は、生成された案内情報をユーザ端末装置200に伝送することで、ユーザ端末装置200に、車両に対する走行関連案内サービスを行うことができる。
この際、車両用端末装置100及びユーザ端末装置200は、サービス提供サーバ300から受信された案内情報を用いて、音声または画面を介して走行関連案内を提供することができる。
ここで、ユーザ端末装置200は、車両の運転者や同乗者などのように、車両の走行関連案内が必要な人が備える機器であって、ユーザ端末装置200は、スマートフォン、タブレット型コンピュータ、ノート型パソコン、PDA(personal digital assistant)、PMP(portable multimedia player)、スマートグラス、プロジェクトグラス、ナビゲーション(navigation)などのような種々の装置で実現可能である。
このような本発明に係る走行関連案内システム1000は、車両用端末装置100から受信されたADASデータ、位置データ、走行データ、及び走行映像のうち少なくとも1つを用いて、車両の走行に関連するサービスを提供することができる。
以下では、後続の図を参照して、本発明の一実施形態に係るサービス提供システム1000を構成する各構成モジュールについてより具体的に説明する。
図3は、本発明の一実施形態に係る車両用端末装置を示すブロック図である。図3を参照すると、本発明の一実施形態に係る車両用端末装置100は、通信部110、映像獲得部120、ADASデータ獲得部130、ECUデータ獲得部140、位置データ獲得部150、映像処理部160、出力部170、格納部180、衝撃検知部190、及び制御部195の全部または一部を含む。
通信部110は、車両用端末装置100と、他の装置との間の通信を行うことができる。具体的に、通信部110は、サービス提供サーバ300、ユーザ端末装置200、他車両に備えられた車両用端末装置などの全部または一部と通信し、データを送受信する機能を果たすことができる。
特に、通信部110は、車両の走行中に獲得された走行映像、ADASデータ、走行データ、及び位置データをサービス提供サーバ300に伝送することができ、サービス提供サーバ300は、車両用端末装置100から受信されたデータに基づいて、車両の走行に関連する案内情報を生成することができる。そして、通信部110は、サービス提供サーバ300で生成された車両の走行に関連する案内情報を受信することができる。
ここで、通信部110は、ローカルエリアネットワーク(LAN:Local Area Network)及びインターネット網を介して無線または有線方式により接続される形態、USB(Universal Serial Bus)ポートを介して接続される形態、3G、4Gのような移動通信ネットワークを介して接続される形態、NFC(Near Field Communication)、RFID(Radio Frequency Identification)、Wi-Fiなどのような無線ローカルエリアネットワーク方式により接続される形態などのように、様々な通信方式を用いて実現されることができる。
映像獲得部120は、車両の走行中に撮影された映像を獲得することができる。一例として、車両用端末装置100が映像撮影機能を備えた装置である場合、映像獲得部120は、映像撮影を行うカメラであることができる。他の例として、車両用端末装置100が通信ドングルである場合、映像獲得部120は、外部カメラにより撮影された映像を受信するモジュールで実現されることができる。
このように、映像獲得部120で獲得された車両の走行映像には、車両が走行する実世界の環境に位置する数多くの客体、例えば、車両、人、動物、橋梁、建物、車道、人道、車道案内標識、横断歩道、交差点、信号灯、中央分離帯、バス停留所、樹木などが含まれることができる。
一例として、車道の撮影映像には、車線に沿って区別される複数の車路、複数の車路から構成された車道、車道を走行している複数の車両が含まれることができる。また、車両が走行中である車道によっては、走行映像には車道案内標識が含まれていてもよい。ここで、車線は、車両が位置する車路(lane)を形成する両側の線(line)をそれぞれ意味し得る。また、車路(lane)は、1車路、2車路、…、N車路などのように、車線により形成され、かつ車両が走行する車道を意味し得る。
そして、車両の走行映像は、前方カメラにより撮影された前方映像と、後方カメラにより撮影された後方映像と、を含むことができる。さらに、車両の走行映像は、左側カメラにより撮影された左側映像と、右側カメラにより撮影された右側映像と、をさらに含んでもよい。
このように映像獲得部120で獲得された車両の走行映像は、映像処理のために映像処理部160に伝送されることができる。
ADASデータ獲得部130は、ADAS(Advanced Driver Assistance System)モジュールから車両のADASデータを受信することができる。ここで、ADASは、車両の前方に位置している前方車両の出発を案内または警告する前方車両の出発報知システム(FVSA:Forward Vehicle Start Alert)、車両の前方に位置している前方車両との追突可能性があることを案内または警告する前方追突警報システム(FCWS:Forward Collision Warning System)、車両が車線を離脱していることを案内または警告する車線離脱警報システム(LDWS:Lane Departure Warning System)、車両の前方に急カーブがあることを案内または警告する急カーブ報知システム(CSWS:Curve Speed Warning System)、車両が急停止したことを案内または警告する急停止報知システム、車両が急回転したことを案内または警告する急回転報知システム、車両の死角地点に他の車両があることを案内または警告する死角地点警報システム(BSD:Blind Spot Detection)を含むことができる。さらに、ADASは、過速地点の取り締まり案内、自動緊急ブレーキシステム(AEB:Autonomous Emergency Braking)、車線離脱の際に走行方向を調節して車線を維持するレーンキープアシストシステム(LKAS:Lane Keep Assist System)、予め決定された速度で走りながら、前方車両との間隔を適当に維持するアドバンスドスマートクルーズコントロール(ASCC:Advanced Smart Cruise Control)、車両の周辺状況を視覚的に見せるアラウンドビューモニターシステム(AVM:Around View Monitor)、車両の操舵角、操舵トルクなどの車両信号と車線内における車両の位置など、車両の運転者の走行パターンを分析し、走行パターンに不注意があると判断された際に案内する運転者不注意警報(DAW:Driver Attention Warning)などを含むことができる。但し、ADASの例示は上述の例示に限定されず、本発明に係るADASは、車両の運転者が走行中に遭遇し得る数多くの走行環境で、運転者の安全な運転を補助するための運転者サポート機能を何れも含む概念である。
一方、車両の走行中に、上述の多数のADAS機能のうち少なくとも1つが実行される場合、ADASデータ獲得部130は、実行されたADAS識別データ、該当ADASの実行過程で検知されたデータをADASモジュールから獲得することができる。一例として、車両の走行中に、ADAS機能のうち前方追突警報システム(FCWS)機能が実行される場合、ADASデータ獲得部130は、実行された機能がFCWSであることを示す、実行されたADAS識別データ、FCWSの実行過程で検知されたデータ(例えば、前方車両との距離)を獲得することができる。
ECUデータ獲得部140は、車両のECU(Electronic Control Unit)モジュールから車両の走行データを受信することができる。ここで、ECUは、車両のエンジン、自動変速機、ABSなどの状態をコンピュータで制御する電子制御装置を意味する。具体的に、ECUデータ獲得部140は、車両のECUに結合されたOBD端子と互いに連結されることができ、ECUデータ獲得部140とECUとのOBDインタフェースを介した連結において、OBD通信プロトコルを利用して周期的なポーリングをし、車両の走行データをECUから獲得することができる。
ここで、車両の走行データは、車両のエンジンON/OFF状態の変化データ、車両の速度データ、車両操舵装置の操舵角、操舵トルクデータ、車両の燃料データなどを含むことができる。
位置データ獲得部150は、GNSS(Global Navigation Satellite System)により位置データを獲得する装置である。GNSSは、人工衛星から受信した電波信号を利用して受信端末機の位置を算出できる航法システムを意味する。GNSSの具体的な例としては、その運営主体によって、GPS(Global Positioning System)、Galileo、GLONASS(Global Orbiting Navigational Satellite System)、COMPASS、IRNSS(Indian Regional Navigational Satellite System)、QZSS(Quasi−Zenith Satellite System)などであることができる。本発明の一実施形態に係る位置データ獲得部150は、車両用端末装置100が使用される地域でサービスするGNSS信号を受信し、位置データを獲得することができる。または、位置データ獲得部150は、GNSSの他にも、基地局またはAP(Access Point)との通信により位置データを獲得することもできる。
映像処理部160は、映像獲得部120で獲得された車両の走行映像の処理を行うことができる。具体的に、映像処理部160は、映像データの圧縮処理を行うことができる。一例として、映像獲得部120で獲得された車両の走行映像は、時間軸に沿って複数のフレームで構成された連続撮影映像であって、このような映像の容量は、圧縮しないと非常に大きく、そのままメモリに格納する場合、非常に非効率的である。そのため、デジタル変換された映像は、必ず圧縮しなければならない。そこで、映像処理部160は、フレーム間の相関関係、空間的な相関関係、及び低周波成分に敏感な視覚の特性を用いた方法などに基づいて、圧縮処理を行うことができる。
また、映像処理部160は、映像獲得部120で獲得された前方走行映像と後方走行映像を結合し、結合された映像における自車の位置に自車客体を配置させたトップビュー(Top view)映像を生成することができる。このようなトップビュー映像はサービス提供サーバ300に伝送されることができ、サービス提供サーバ300に伝送されたトップビュー映像は、ADASデータ、走行データ、及び位置データのうち少なくとも1つとともに分析され、事故状況予測情報、法律評価情報などを生成するのに利用されることができる。
ここで、トップビュー映像は、一例として、複数のフレームが抽出されて形成されたGIF(Graphics Interchange Format)フォーマットであることができる。すなわち、映像獲得部120により圧縮処理された走行映像であっても、動画像をサーバに伝送する場合にはデータのサイズが大きいため、本発明によると、事故状況予測情報、法律評価情報などのために動的情報を含み、且つ、最小のデータサイズで目的を達成するために、映像処理部160は、走行映像をGIFフォーマットとして生成してサービス提供サーバ300に伝送することができる。
上述の例示によると、トップビュー映像の生成動作が、車両用端末装置100の映像処理部160で行われることを例として説明したが、これに限定されるものではない。本発明の他の実施形態によると、車両用端末装置100は、撮影された走行映像をサービス提供サーバ300に伝送することができ、サービス提供サーバ300で、車両用端末装置100から受信した走行映像を再結合して前記トップビュー映像を生成するようにしてもよい。
一方、出力部170は、車両用端末装置100のデータをユーザに映像及び/または音声で出力する装置である。ここで、出力部170は、ディスプレイ部(不図示)とオーディオ出力部(不図示)の全部または一部を含むことができる。
ディスプレイ部は、ユーザが視覚的に認識できるデータを出力する装置である。ディスプレイ部は、車両用端末装置100のハウジングの前面に設けられたディスプレイ部で実現されることができる。また、ディスプレイ部は、車両用端末装置100と一体に形成されて視覚的認識データを出力してもよく、HUD(Head Up Display)のように、システム100と別に設けられて視覚的認識データを出力してもよい。
オーディオ出力部は、車両用端末装置100が聴覚的に認識できるデータを出力する装置である。オーディオ出力部は、車両用端末装置100のユーザに知らせるべきデータを音で表現するスピーカで実現されることができる。
格納部180は、車両用端末装置100の動作に必要な種々のデータ及びアプリケーションを格納する機能を果たす。特に、格納部180は、車両用端末装置100の動作に必要なデータ、例えば、OS、経路探索アプリケーション、地図データなどを格納することができる。また、格納部180は、車両用端末装置100の動作により生成された走行映像、ADASデータ、走行データ、位置データを時間別または位置別に分類して格納することができる。
かかる格納部180は、RAM(Random Access Memory)、フレッシュメモリ、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、EEPROM(Electronically Erasable and Programmable ROM)、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、USIM(Universal Subscriber Identity Module)などのような内蔵形態の格納素子はいうまでもなく、USBメモリなどのような着脱可能な形態の格納素子で実現されてもよい。
一方、衝撃検知部190は、車両の走行中における衝撃を検知し、検知された衝撃に対応する衝撃レベル値を制御部195に出力することができる。ここで、衝撃検知部190は、一例として、加速度センサで実現されることができる。
制御部195は、車両用端末装置100の全般的な動作を制御することができる。具体的に、制御部195は、通信部110、映像獲得部120、ADASデータ獲得部130、ECUデータ獲得部140、位置データ獲得部150、映像処理部160、出力部170、格納部180、及び衝撃検知部190の全部または一部を制御することができる。
特に、制御部195は、サービス提供サーバ300と連携して車両の走行関連案内サービスを提供することができる。ここで、車両の走行関連案内サービスは、事故状況予測案内サービス、事故法律案内サービス、車両の運転者の目的地予測案内サービス、車両の運転者の過去運転履歴案内サービス、及び他運転者の過去運転履歴案内サービスのうち少なくとも1つを含むことができる。
具体的に、制御部195は、車両の走行中に特定の走行状況を検知し、検知された特定の走行状況に関連するADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバに伝送するように、通信部110を制御することができる。ここで、特定の走行状況は、車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況と、車両の走行中に事故が発生した第2走行状況と、を含むことができる。
具体的に、制御部195は、車両の走行中に衝撃検知部190から衝撃レベル値を受信する。制御部195は、既設定の第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃が検知され、衝撃が検知される前に、ADASデータに基づいて車線変更報知、前方車両追突報知、急カーブ報知、急停止報知、急回転報知、及び死角地点報知(同様にはBSD報知)のうち少なくとも1つが検知されると、事故発生可能性のある第1走行状況と判断することができる。ここで、第2衝撃レベルは、車両の事故であると判断され得る衝撃レベルの閾値であって、各種実験データを数値化して算出された値であることができる。
すなわち、運転者が、走行中に、隣の車路で走行中の他車両を感知できずに車線を変更する途中に、他車両を発見し急停止する場合、運転者が運転した車両は、実際には事故が発生していないが、事故発生可能性のある状況とみなされる。この場合、実際に事故は発生しなかったため、衝撃検知部190では、第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃レベルが検知され、ADASデータ獲得部130で獲得されたADASデータは、車線変更報知データ、死角地点報知データ、急停止報知データを含むことができる。
または、運転者が前方車両を認知できずに走行する途中に、前方車両を発見し急停止する場合、運転者が運転した車両は、実際には事故が発生していないが、事故発生可能性のある状況とみなされる。この場合、実際に事故は発生しなかったため、衝撃検知部190では、第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃レベルが検知され、ADASデータ獲得部130で獲得されたADASデータは、前方車両追突報知データ、急停止報知データを含むことができる。
または、運転者が急カーブを認知できずに高速走行する途中に、急カーブを発見して急減速する場合、運転者が運転した車両は、実際には事故が発生していないが、事故発生可能性のある状況とみなされる。この場合、実際に事故は発生しなかったため、衝撃検知部190では、第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃レベルが検知され、ADASデータ獲得部130で獲得されたADASデータは、急カーブ報知データを含むことができる。
このように、制御部195は、車両の走行中に衝撃検知部190で所定レベル範囲内の衝撃レベル値が検知され、ADASデータに基づいて車線変更報知、前方車両追突報知、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知されると、事故発生可能性のある第1走行状況と判断することができる。
但し、制御部195は、衝撃検知部190で既設定の第2衝撃レベルを超える衝撃が検知されると、車両の状況を、事故が発生した第2走行状況と判断することができる。
一方、車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況が検知されると、制御部195は、検知された第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバ300に伝送するように、通信部110を制御することができる。この際、サービス提供サーバ300は、車両の第1走行状況で車両用端末装置100から受信されたデータ及び走行映像を分析し、第1走行状況で車両に発生する可能性があった事故状況予測情報を生成することができる。
また、サービス提供サーバ300は、各車両から、各走行状況毎の走行映像、走行データ、ADASデータ、位置データ、事故データを収集した後、収集されたデータに基づいて、マシンラーニング(machine learning)またはディープラーニング(deep learning)により学習を行うことで、事故発生可能性予測モデルを構築することができる。そして、サービス提供サーバ300は、構築された事故発生可能性予測モデルを用いて車両の走行状況毎、道路区間毎の事故発生可能性を予測し、その予測された結果の条件(車両の速度、運転者の運転習慣、周辺車両の走行情報、車両が走行するか、車両の走行経路上に位置する道路の状態情報など)を満たす状態の車両に、事故発生可能性を含む事故状況予測情報を生成して報知することもできる。これにより、本発明の実施形態に係るサービス提供サーバ300は、V2V(Vehicle to Vehicle)、V2I(Vehicle to infrastructure)、V2X(Vehicle to Everything)などの通信を介して、全道路上を走行中の車両から、走行映像、走行データ、ADASデータ、位置データ、事故データ、道路状態情報などの各種走行関連データを受信した後、マシンラーニング、ディープラーニングなどの学習によって事故発生可能性を予測し、特定の条件を満たすと予想される車両に、事故発生可能性が高いという情報を提供することができる。
ここで、サービス提供サーバ300で生成された事故状況予測情報は、事故状況予測案内サービスを提供するのに利用されることができる。具体的に、サービス提供サーバ300は、上記の生成された事故状況予測情報を車両用端末装置100またはユーザ端末装置200に伝送することができ、車両用端末装置100またはユーザ端末装置200は、事故状況予測情報に基づいて案内を行うことができる。一例として、運転者が、走行中に、隣の車路で走行中の他車両を感検できずに車線を変更する途中に、他車両を発見し急停止する場合、サービス提供サーバ300は、分析により「約3秒後に、左側後方追突が発生するところでした。」のような事故状況予測情報を生成することができ、車両用端末装置100またはユーザ端末装置200は、生成された事故状況予測情報に基づいて案内を行うことができる。
また、車両の走行中に事故が発生した第2走行状況が検知されると、制御部195は、検知された第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバ300に伝送するように、通信部110を制御することができる。この際、サービス提供サーバ300は、車両の第2走行状況で車両用端末装置100から受信されたデータ及び走行映像を分析し、第2走行状況で車両の事故の経緯に基づいて事故法律評価情報を生成することができる。
ここで、サービス提供サーバ300で生成された事故法律評価情報は、事故法律案内サービスを提供するのに利用されることができる。具体的に、サービス提供サーバ300は、車両用端末装置100またはユーザ端末装置200に生成された事故法律評価情報を伝送することができ、車両用端末装置100またはユーザ端末装置200は、事故法律評価情報に基づいて案内を行うことができる。一例として、事故が発生した際に、サービス提供サーバ300は、分析により「自車両の過失率は30%で、他車両の過失率は70%です。」のような事故法律評価情報を生成することができ、車両用端末装置100またはユーザ端末装置200は、生成された事故法律評価情報に基づいて案内を行うことができる。
すなわち、本発明によると、車両の走行状況が、事故危険性があった第1走行状況であるか、もしくは事故が発生した第2走行状況であるかによって、サービス提供サーバ300に伝送されるデータを異ならせて設定することで、各状況に対応する走行関連案内サービスが提供されるように制御することができる。
一方、本発明の一実施形態に係る車両用端末装置100は、サービス提供サーバ300で、車両が駐車から走行状態に変更されたことにより車両の運転者の予想目的地が判断された場合、車両の運転者の目的地予測案内を提供することができる。一例として、車両が駐車から走行状態に変更された際に、サービス提供サーバ300は、分析により「現在の駐車位置での車両の予想目的地は職場です。」のような目的地予測情報を生成することができ、車両用端末装置100またはユーザ端末装置200は、生成された目的地予測情報に基づいて案内を行うことができる。
また、本発明の一実施形態に係る車両用端末装置100は、サービス提供サーバ300で、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータが検出されると、車両の運転者の過去運転履歴案内を提供することができる。一例として、車両の運転者の位置に合致するADASデータが検出された際に、サービス提供サーバ300は、分析により「現在の位置は、死角地点報知が行われた位置です。」のような運転者の過去走行履歴情報を生成することができ、車両用端末装置100またはユーザ端末装置200は、生成された情報に基づいて案内を行うことができる。
また、本発明の一実施形態に係る車両用端末装置100は、サービス提供サーバ300で、車両の位置データと、既格納の他運転者の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致する他運転者のADASデータが検出されると、他運転者の過去運転履歴案内を提供することができる。一例として、車両の運転者の位置に合致する他運転者のADASデータが検出された際に、サービス提供サーバ300は、分析により「現在の位置は、多数の運転者から急カーブ報知が行われた位置です。」のような他運転者の過去走行履歴情報を生成することができ、車両用端末装置100またはユーザ端末装置200は、生成された情報に基づいて案内を行うことができる。
以下では、図4及び図5を参照して、本発明の一実施形態に係る車両用端末装置100の走行関連案内サービスの提供方法についてより具体的に説明する。
図4は、本発明の一実施形態に係る車両用端末装置の走行関連案内サービスの提供方法を示すフローチャートである。図4を参照すると、始めに、車両用端末装置100は、車両の走行中に撮影された走行映像を獲得することができる(S110)。
そして、車両用端末装置100は、車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールから車両のADASデータを受信し、車両のECU(Electronic Control Unit)モジュールから車両の走行データを受信し、位置データ獲得部150から車両の位置データを受信することができる(S120)。
そして、車両用端末装置100は、車両の走行中に特定の走行状況を検知することができる(S130)。車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況が検知されると、車両用端末装置100は、検知された第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバ300に伝送することができる(S140)。
そして、サービス提供サーバ300で、車両用端末装置100から受信されたデータ及び走行映像に基づいて、車両に発生する可能性があった事故状況予測情報が生成されると、サービス提供サーバ300から事故状況予測情報を受信することができる(S150)。
この際、車両用端末装置100は、受信された事故状況予測情報に基づいて案内を行うことができる(S160)。
但し、車両の走行中に事故が発生した第2走行状況が検知されると、車両用端末装置100は、検知された第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び走行映像をサービス提供サーバ300に伝送することができる(S170)。
そして、サービス提供サーバ300で、車両用端末装置100から受信されたデータ及び走行映像に基づいて、事故の経緯に基づく事故法律評価情報が生成されると、サービス提供サーバ300から事故法律評価情報を受信することができる(S180)。
この際、車両用端末装置100は、受信された事故法律評価情報に基づいて案内を行うことができる(S190)。
一方、走行映像を獲得するステップ(S110)は、前方カメラにより撮影された前方走行映像と、後方カメラにより撮影された後方走行映像と、を獲得するステップを含むことができる。この際、本発明の一実施形態に係る方法は、前方走行映像と後方走行映像を結合し、結合された映像における自車の位置に自車客体を配置させたトップビュー映像を生成するステップをさらに含むことができる。ここで、生成されたトップビュー映像はサービス提供サーバ300に伝送され、事故状況予測情報及び事故法律評価情報を生成するのに利用されることができる。そして、トップビュー映像は、複数のフレームが抽出されて形成されたGIF(Graphics Interchange Format)フォーマットであることができる。
一方、上述の本発明の一実施形態に係る方法は、サービス提供サーバ300と連携して、目的地予測案内、運転者の過去走行履歴案内、他運転者の過去走行履歴案内を行うステップをさらに含むことができる。
図5は、本発明の一実施形態に係る車両用端末装置の走行状況の検知方法を示すフローチャートである。図5を参照すると、本発明の一実施形態に係る車両の走行中に特定の走行状況を検知するステップ(S130)は、次のようなステップで構成されることができる。
始めに、車両用端末装置100は、衝撃レベルを検知することができる(S131)。
そして、車両用端末装置100は、検知された衝撃レベルが、既設定の第1衝撃レベル超過かつ既設定の第2衝撃レベル未満であるかを判断することができる(S132)。
検知された衝撃レベルが、既設定の第2衝撃レベルを超える場合(S132:N1)、車両用端末装置100は、事故が発生した第2走行状況と判断することができる(S133)。
また、検知された衝撃レベルが、既設定の第1衝撃レベルより小さい場合(S132:N2)、車両用端末装置100は、特定の走行状況ではないと判断することができる。
但し、検知された衝撃レベルが、既設定の第1衝撃レベル超過かつ既設定の第2衝撃レベル未満である場合(S132:Y)には、前記衝撃が検知される前に、ADASデータに基づいて車線離脱報知、前方追突、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知されたかを判断することができる(S134)。
衝撃が検知される前に、ADASデータに基づいて車線離脱報知、前方追突、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知された場合(S134:Y)、車両用端末装置100は、事故発生可能性のある第1走行状況と判断することができる(S135)。
但し、衝撃が検知される前に、ADASデータに基づいて車線離脱報知、前方追突、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知されていない場合(S134:N)、車両用端末装置100は、事故発生可能性のある第1走行状況ではないと判断することができる(S136)。
一方、上述の車両用端末装置100は、サービス提供サーバ300と連携して走行関連案内サービスを提供することができる。以下では、後続の図を参照して、本発明の一実施形態に係るサービス提供サーバ300についてより具体的に説明する。
図6は、本発明の一実施形態に係るサービス提供サーバを示すブロック図である。図7は、本発明の一実施形態に係るサービス提供部330をより具体的に示すブロック図である。図6及び7を参照すると、本発明の一実施形態に係るサービス提供サーバ300は、通信部310、格納部320、サービス提供部330、制御部340の全部または一部を含むことができる。そして、サービス提供部330は、事故状況予測案内サービス提供部331、事故法律案内サービス提供部332、目的地予測案内サービス提供部333、運転者過去運転履歴案内サービス提供部334、他運転者過去運転履歴案内サービス提供部335の全部または一部を含むことができる。
通信部310は、サービス提供サーバ300と他の装置との間の通信を行うことができる。具体的に、通信部310は、車両用端末装置100及びユーザ端末装置200と通信し、データを送受信する機能を果たすことができる。
特に、通信部310は、車両の走行中に獲得された走行映像、ADASデータ、走行データ、及び位置データを車両用端末装置100から受信することができ、車両用端末装置100から受信されたデータに基づいて、車両の走行に関連する案内情報を生成することができる。そして、通信部310は、生成された車両の走行に関連する案内情報を車両用端末装置100及び/またはユーザ端末装置200に伝送することができる。
ここで、通信部310は、ローカルエリアネットワーク(LAN:Local Area Network)及びインターネット網を介して無線または有線方式により接続される形態、USB(Universal Serial Bus)ポートを介して接続される形態、3G、4Gのような移動通信ネットワークを介して接続される形態、NFC(Near Field Communication)、RFID(Radio Frequency Identification)、Wi−Fiなどのような無線ローカルエリアネットワーク方式により接続される形態などのように、様々な通信方式を用いて実現されることができる。
格納部320は、サービス提供サーバ300の動作に必要な種々のデータ及びアプリケーションを格納する機能を果たす。特に、格納部320は、車両用端末装置100から受信された各種データ及び走行映像を端末装置別に分類して格納することができる。また、格納部320は、サービス提供部330の動作のための各種プログラムなどを格納することができる。
ここで、格納部320は、RAM(Random Access Memory)、フレッシュメモリ、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、EEPROM(Electronically Erasable and Programmable ROM)、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、USIM(Universal Subscriber Identity Module)などのような内蔵形態の格納素子はいうまでもなく、USBメモリなどのような着脱可能な形態の格納素子で実現されてもよい。
かかる格納部320は、サービス提供サーバ300内に実現されてもよく、またはサービス提供サーバ300と連結された外部データベース(DB)サーバの形態で実現されてもよい。
サービス提供部330は、車両用端末装置100から受信されたデータと走行映像を分析し、車両の特定の走行状況に関連する案内情報を生成することができる。具体的に、サービス提供部330は、通信部310を介して受信された位置データを用いて、車両の特定の走行状況が発生した位置座標を分析及び記録することができる。また、事故状況予測案内サービス提供部331は、サービスの提供のための事故状況予測情報を生成することができ、事故法律案内サービス提供部332は、サービスの提供のための事故法律評価情報を生成することができ、目的地予測案内サービス提供部333は、サービスの提供のための運転者の目的地予測情報を生成することができ、運転者過去運転履歴案内サービス提供部334は、サービスの提供のための車両の運転者の過去運転履歴情報を生成することができ、他運転者過去運転履歴案内サービス提供部335は、サービスの提供のための他運転者の過去運転履歴情報を生成することができる。
そして、サービス提供部330は、生成された案内情報に基づいて車両の走行関連案内サービスを提供することができる。具体的に、サービス提供部330は、生成された案内情報を車両用端末装置100及びユーザ端末装置200に伝送することで、車両の走行関連案内サービスを行うことができる。この際、車両用端末装置100及びユーザ端末装置200は、サービス提供サーバ300から受信された案内情報を用いて、音声または画面を介して走行関連案内を提供することができる。
かかるサービス提供部330は、事故状況予測案内サービス提供部331、事故法律案内サービス提供部332、目的地予測案内サービス提供部333、運転者過去運転履歴案内サービス提供部334、他運転者過去運転履歴案内サービス提供部335の全部または一部を含むことができる。
具体的に、事故状況予測案内サービス提供部331は、車両用端末装置100から、事故発生可能性のある第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び走行映像を受信し、受信されたデータ及び走行映像を分析して、第1走行状況で車両に発生する可能性があった事故状況予測情報を生成することができる。
ここで、走行映像はトップビュー映像であることができる。かかる走行映像については、図8を参照してより具体的に説明する。
図8は、本発明の一実施形態に係るトップビュー映像を示す図である。図8を参照すると、トップビュー映像は、上部から下部を見る視点で製作された映像であって、かかるトップビュー映像は、車両の前方カメラにより撮影された前方走行映像のカメラの視点と、後方カメラにより撮影された後方映像のカメラの視点を、上部から下部を見る視点に変更し、変更された前後方映像を結合することで生成されることができる。
さらに、車両の前方カメラと後方カメラにより撮影された映像に、左/右側のカメラにより撮影された左側映像と右側映像をさらに結合することで、正確性の高いトップビュー映像を生成することができる。
他の例として、車両の前方カメラにより撮影された前方走行映像のカメラの視点と、後方カメラにより撮影された後方映像のカメラの視点を、上部から下部を見る視点に変更し、変更された前後方映像を時間の順につなぎ合わせてトップビュー映像を生成することもできる。
そして、トップビュー映像には、映像内における自車両の位置に、自車両に対応する客体51が配置され、映像内の他車両の位置に、他車両に対応する客体52、53が配置されることができる。ここで、客体51、52、53は、車両の実際の撮影イメージで表出されてもよく、または、車両をアニメーションなどに図形化したイメージで表出されてもよい。
一方、事故状況予測案内サービス提供部331は、走行映像から自車の前方、後方、及び側方の車両を検出し、検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて第1走行状況で車両に発生する可能性があった事故状況を予測し、事故状況予測情報を生成することができる。ここで、ADASデータは、第1走行状況の時点前に実行されたADASの識別情報、ADASの実行過程で検知されたデータ(例えば、FCWSの場合、前方車両との距離など)を含むことができる。そして、車両の走行データは、第1走行状況の時点の前の車両の速度データ、車両の操舵装置の操舵角、操舵トルクデータ、車両の燃料データなどを含むことができる。このような事故状況予測案内サービス提供部331の動作については、図9を参照してより具体的に説明する。
図9は、本発明の一実施形態に係る事故状況の予測方法を示す図である。図9(a)は、本発明の一実施形態に係る第1走行状況を説明するためにトップビュー映像を示したものであって、車両51の運転者が、走行中に、左側車路で走行中である他車両53を感知できずに車線を変更する途中に、他車両53を発見して急停止する場合、運転者が運転した車両51は、実際には事故が発生していないが、事故発生可能性のある第1走行状況である。この場合、車両用端末装置100は、第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び図9(a)のようなトップビュー映像をサービス提供サーバ300に伝送することができる。
そして、事故状況予測案内サービス提供部331は、走行映像から自車51の周囲の車両52、53を検出し、検出された車両52、53に対する自車51のADASデータ及び走行データのうち少なくとも1つを用いて、第1走行状況で車両に発生する可能性があった事故状況を予測することができる。具体的に、図9(a)の状況で、ADASデータは、実行された死角地点報知の識別情報、死角地点報知の実行過程で検知されたデータ(左側後方車両との距離など)であり、走行データである自車51の操舵方向が左側であるため、事故状況予測案内サービス提供部331は、第1走行状況で自車51との事故発生可能性があった車両は、左側の車両53であると判断することができる。
そして、事故状況予測案内サービス提供部331は、自車51と左側車両53との間に発生する可能性があった事故状況を予測することができる。具体的に、事故状況予測案内サービス提供部331は、自車51の速度及び操舵データ、死角地点報知の実行過程で検知された左側後方車両との距離データに基づいて分析し、自車51がそのまま走行した場合における事故を予測する事故状況予測情報を生成することができる。一例として、図9(a)のような状況では、「約3秒後に、左側後方追突が発生するところでした。」のような事故状況予測情報を生成することができる。
図9(b)は、本発明の他の実施形態に係る第1走行状況を説明するためにトップビュー映像を示したものであって、車両51の運転者が、前方車両52を認知できずに走行する途中に、前方車両52を発見して急停止する場合、運転者が運転した車両51は、実際には事故が発生していないが、事故発生可能性のある第1走行状況である。この場合、車両用端末装置100は、第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び図9(b)のようなトップビュー映像をサービス提供サーバ300に伝送することができる。
そして、事故状況予測案内サービス提供部331は、走行映像から自車51の周辺の車両52、53を検出し、検出された車両52、53に対する自車51のADASデータ及び走行データのうち少なくとも1つを用いて、第1走行状況で車両に発生する可能性があった事故状況を予測することができる。具体的に、図9(b)の状況で、ADASデータは、実行されたFCWSの識別情報、FCWSの実行過程で検知されたデータ(前方車両との距離など)であり、走行データである自車51の操舵方向が直進であるため、事故状況予測案内サービス提供部331は、第1走行状況で自車51との事故発生可能性があった車両は、前方車両52であると判断することができる。
そして、事故状況予測案内サービス提供部331は、自車51と前方車両52との間に発生する可能性があった事故状況を予測することができる。具体的に、事故状況予測案内サービス提供部331は、自車51の速度及び操舵データ、FCWSの実行過程で検知された前方車両との距離データ、並びに前方車両の速度に基づいて分析し、自車51がそのまま走行した場合における事故を予測する事故状況予測情報を生成することができる。一例として、図9(b)のような状況では、「約3秒後に、前方追突が発生するところでした。」のような事故状況予測情報を生成することができる。
一方、事故状況予測案内サービス提供部331は、人工神経網(artificial neural network)を利用して車両の事故発生可能性を予測し、特定の条件を満たすと予想される車両に、事故発生可能性が高いという情報を提供することもできる。
そのために、事故状況予測案内サービス提供部331は、学習データ収集部(不図示)、学習部(不図示)、及び学習により生成された事故発生可能性評価モデルを格納するメモリ(不図示)をさらに含むことができる。
学習データ収集部は、各車両から、走行状況毎の走行映像、走行データ、ADASデータ、位置データ、事故データを収集することができる。具体的に、学習データ収集部は、V2V(Vehicle to Vehicle)、V2I(Vehicle to infrastructure)、V2X(Vehicle to Everything)などの車両通信インフラを用いて、全道路上を走行中の車両から、走行映像、走行データ、ADASデータ、位置データ、事故データ、道路状態情報などの各種走行関連データを収集することができる。
学習部は、学習データ収集部で収集された走行映像、走行データ、ADASデータ、位置データ、事故データ、道路状態情報などの各種走行関連データを利用して学習を行い、学習の結果として、事故発生可能性予測モデルを生成することができる。ここで、事故発生可能性予測モデルは、収集されたデータに基づいて、車両に事故の発生可能性があったか否かを予測するアルゴリズムまたはプログラムである。
このような事故発生可能性予測モデルは、車両の走行中に受信されたデータを入力として利用し、事故発生可能性があるか否か、事故発生可能性がある際には、事故状況予測情報、事故発生可能性の数値などを出力として生成することができる。具体的に、事故発生可能性予測モデルは、車両の走行状況毎、道路区間毎に事故発生可能性を予測し、その予測された結果の条件(車両の速度、運転者の運転習慣、周辺車両の走行情報、車両が走行するか、車両の走行経路上に位置する道路の状態情報など)を満たす状態の車両に、事故発生可能性を含む事故状況予測情報を生成して報知することもできる。
また、学習部は、出力値を用いて、事故発生可能性予測モデルをさらに学習させることができる。また、出力結果が誤答である場合、運転者は、出力結果に対する応答を入力することができ、学習部は、運転者の応答に基づいて事故発生可能性予測モデルを学習させることができる。
すなわち、本発明によると、マシンラーニング(machine learning)またはディープラーニング(deep learning)を行って事故発生可能性予測モデルを生成し、生成されたモデルを用いて車両の事故発生可能性を予測し、予測による結果値を運転者に提供することができる。ここで、ディープラーニング(deep learning)には、神経網モデルの1つであるCNN(Convolution Neural Network)アルゴリズムが適用されることができる。この際、ディープラーニングは、走行映像の様々な条件を仮定して拡張(augmentation)されたデータに基づいて学習を行うことができる。ここで、条件とは、神経網モデルの学習のためのデータの生成のために、学習データとして収集された映像を変換するための条件と定義する。具体的に、イメージの移動(shift)、回転(rotation)、明るさ(brightness)変化、ブレ(blur)などの要素によって様々な様相を示し得るため、これを考慮してデータを拡張することができる。
一方、事故法律案内サービス提供部332は、車両用端末装置100から、車両に事故が発生した第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び走行映像を受信し、分析して、車両の事故の経緯に基づく事故法律評価情報を生成することができる。具体的に、事故法律案内サービス提供部332は、トップビュー映像から、自車の前方、後方、及び側方の車両を検出し、検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて事故の経緯を分析し、分析による事故過失割合を含む事故法律評価情報を生成することができる。ここで、走行映像はトップビュー映像であることができる。
そして、事故法律案内サービス提供部332は、車両の周囲に位置した車両の速度、距離、時間などを走行映像にさらに表出し、事実根拠に基づいて事故過失を明らかにすることができる。
かかる本発明の一実施形態に係る事故法律案内サービス提供部332の動作については、図10を参照してより具体的に説明する。
図10は、本発明の一実施形態に係る法律評価情報の生成方法を示す図である。図10を参照すると、図10(a)は、本発明の一実施形態に係る第2走行状況を説明するためにトップビュー映像を示したものであって、車両51の運転者が左側車路へ変更する過程で死角地点報知が行われなかったため、車線変更がほぼ完了されたところで、後方に位置する車両53が車両51と衝突して事故が発生した、第2走行状況を示す。この場合、車両用端末装置100は、第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び図10(a)のようなトップビュー映像をサービス提供サーバ300に伝送することができる。
そして、事故法律案内サービス提供部332は、走行映像から車両51の周囲の車両52、53を検出し、検出された車両52、53に対する車両51のADASデータ及び走行データのうち少なくとも1つを用いて、第2走行状況で車両に発生した事故の経緯を分析することができる。具体的に、図10(a)の状況で、事故法律案内サービス提供部332は、検出された車両52、53のうち車両51に最も隣接した車両を、事故車両53として検出することができる。そして、図10(a)の状況で、事故法律案内サービス提供部332は、車両51の車線変更の前に死角地点報知が全く実行されなかったというデータと、車両の事故発生時点まで車両51の速度が減少されなかったという点を分析し、車両51の運転者が車両53を認知していない状態で、車両53の過失により事故が発生したという、事故の経緯情報を生成することができる。そして、事故法律案内サービス提供部332は、事故の経緯情報に基づいて、事故過失割合を含む事故法律評価情報を生成することができる。
図10(b)は、本発明の他の実施形態に係る第2走行状況を説明するためにトップビュー映像を示したものであって、車両51の運転者が左側車路に変更する過程で、死角地点報知が実行されたのにもかかわらず車線変更を試して、後方に位置する車両53が車両51と衝突して事故が発生した第2走行状況を示す。この場合、車両用端末装置100は、第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び図10(b)のようなトップビュー映像をサービス提供サーバ300に伝送することができる。
そして、事故法律案内サービス提供部332は、走行映像から車両51の周囲の車両52、53を検出し、検出された車両52、53に対する車両51のADASデータ及び走行データのうち少なくとも1つを用いて、第2走行状況で車両に発生した事故の経緯を分析することができる。具体的に、図10(b)の状況で、事故法律案内サービス提供部332は、検出された車両52、53のうち車両51に最も隣接した車両を、事故車両53として検出することができる。そして、図10(b)の状況で、事故法律案内サービス提供部332は、ADASデータに含まれている、死角地点報知が実行されたというデータと、事故車両間の距離データ、車両の事故発生時点まで車両51の速度データ、及び操舵データに基づいて、事故車両51、53の間に事故が発生するまで、車両51の運転者が車両53を認知できたはずであるのに車両51の過失により事故が発生したという、事故の経緯情報を生成することができる。そして、事故法律案内サービス提供部332は、事故の経緯情報に基づいて、事故過失割合を含む事故法律評価情報を生成することができる。
一方、目的地予測案内サービス提供部333は、車両が駐車から走行状態に変更されると、車両の位置データと、既格納の駐車位置毎の目的地データセットとを比較し、車両の運転者の予想目的地を判断することができる。格納部320には、車両の運転者毎の駐車位置データ、該当駐車位置から向かった目的地データをマッチングしたテーブルを格納することができる。この際、目的地予測案内サービス提供部333は、車両が駐車から走行状態に変更されると、車両の駐車位置データに基づいて、車両の駐車位置に対応する目的地の候補群を格納部320から検出し、検出された目的地の候補群のうち、車両の運転者の予想目的地を判断することができる。一例として、目的地予測案内サービス提供部333は、車両が駐車状態から走行状態に変更された時点の時間、天気などを考慮して、目的地の候補群のうち車両の運転者の予想目的地を判断することができる。
そして、目的地予測案内サービス提供部333は、判断された予想目的地を用いて目的地予測案内サービスを提供することができる。具体的に、目的地予測案内サービス提供部333は、「現在の駐車位置での車両の予想目的地は職場です。」のような目的地予測情報を生成し、車両用端末装置100またはユーザ端末装置200に伝送することができる。この際、車両用端末装置100またはユーザ端末装置200は、受信された目的地予測情報に基づいて案内を行うことができる。
また、運転者過去運転履歴案内サービス提供部334は、車両の運転者に対して走行位置毎のADASデータセットを格納し、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出することができる。具体的に、格納部320には、車両の運転者の走行位置毎のADASデータ(例えば、実行されたADASの識別情報、実行されたADASの検知情報)を格納することができる。この際、運転者過去運転履歴案内サービス提供部334は、車両の走行中における位置データに基づいて、格納部320から車両の走行位置に対応するADASデータを検出することができる。
この際、運転者過去運転履歴案内サービス提供部334は、検出されたADASデータを用いて運転者の過去運転履歴案内サービスを提供することができる。具体的に、運転者過去運転履歴案内サービス提供部334は、「現在の位置は、死角地点報知が行われた位置です。」のような過去ADAS履歴情報を生成し、車両用端末装置100またはユーザ端末装置200に伝送することができる。この際、車両用端末装置100またはユーザ端末装置200は、受信された過去ADAS履歴情報に基づいて案内を行うことができる。
そして、他運転者過去運転履歴案内サービス提供部335は、他運転者に対する走行位置毎のADASデータセットを格納し、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出することができる。具体的に、格納部320には、他運転者の走行位置毎のADASデータ(例えば、実行されたADASの識別情報、実行されたADASの検知情報、回数)を格納することができる。この際、他運転者過去運転履歴案内サービス提供部335は、車両の走行中における位置データに基づいて、格納部320から車両の走行位置に対応する他運転者のADASデータを検出することができる。
この際、他運転者過去運転履歴案内サービス提供部335は、検出されたADASデータを用いて他運転者の過去運転履歴案内サービスを提供することができる。具体的に、運転者過去運転履歴案内サービス提供部334は、「現在の位置は、多数の運転者から急カーブ報知が行われた位置です。」のような他運転者の過去ADAS履歴情報を生成し、車両用端末装置100またはユーザ端末装置200に伝送することができる。この際、車両用端末装置100またはユーザ端末装置200は、受信された他運転者の過去ADAS履歴情報に基づいて案内を行うことができる。
制御部340は、サービス提供サーバ300の全般的な動作を制御する。具体的に、制御部340は、通信部310、格納部320、サービス提供部330の全部または一部を制御することができる。
特に、制御部340は、車両用端末装置100及びユーザ端末装置200と連携して車両の走行関連案内サービスを提供することができる。ここで、車両の走行関連案内サービスは、事故状況予測案内サービス、事故法律案内サービス、車両の運転者の目的地予測案内サービス、車両の運転者の過去運転履歴案内サービス、及び他運転者の過去運転履歴案内サービスのうち少なくとも1つを含むことができる。
以下では、図11及び図12を参照して、本発明の一実施形態に係るサービス提供サーバ300の走行関連案内サービスの提供方法についてより具体的に説明する。
図11は、本発明の一実施形態に係る事故状況予測案内サービスの提供方法を示すフローチャートである。図11を参照すると、始めに、サービス提供サーバ300は、車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況の時点の前のADASデータ、位置データ、走行データ、及び走行映像を受信することができる(S201)。ここで、受信された走行映像は、前方走行映像と後方走行映像が結合され、結合された映像における自車の位置に自車客体が配置されたトップビュー(Top view)映像であることができる。
そして、サービス提供サーバ300は、走行映像から自車の周囲の車両を検出することができる(S202)。
そして、サービス提供サーバ300は、検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて事故発生可能性があった他車両を検出することができる(S203)。
そして、サービス提供サーバ300は、事故発生可能性があった他車両に対するADASデータ及び走行データのうち少なくとも1つを用いて事故状況を予測し、事故状況予測情報を生成することができる(S204)。
そして、サービス提供サーバ300は、生成された事故状況予測情報に基づいて事故状況予測案内サービスを提供することができる(S205)。
図12は、本発明の一実施形態に係る事故法律案内サービスの提供方法を示すフローチャートである。図12を参照すると、始めに、サービス提供サーバ300は、車両に事故が発生した第2走行状況の時点から所定時間前乃至所定時間後のADASデータ、位置データ、走行データ、及び走行映像を受信することができる(S301)。
そして、サービス提供サーバ300は、走行映像から自車の周囲の車両を検出することができる(S302)。
そして、サービス提供サーバ300は、検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて事故が発生した他車両を検出することができる(S303)。
そして、サービス提供サーバ300は、検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて車両の事故の経緯を分析し、事故法律評価情報を生成することができる(S304)。
そして、サービス提供サーバ300は、事故法律評価情報に基づいて事故法律案内サービスを提供することができる(S305)。
一方、本発明の一実施形態に係るサービスの提供方法は、車両の運転者に対して駐車位置毎の目的地データセットを格納するステップと、車両が駐車から走行状態に変更されると、車両の位置データと、既格納の駐車位置毎の目的地データセットとを比較し、車両の運転者の予想目的地を判断するステップと、判断された予想目的地を用いて目的地予測案内サービスを提供するステップと、をさらに含むことができる。
また、本発明の一実施形態に係るサービスの提供方法は、車両の運転者に対して走行位置毎のADASデータセットを格納するステップと、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出するステップと、検出されたADASデータを用いて運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
また、本発明の一実施形態に係るサービスの提供方法は、他運転者に対する走行位置毎のADASデータセットを格納するステップと、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出するステップと、検出されたADASデータを用いて他運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
一方、上述の本発明の一実施形態に係る機能は、一モジュールで実現されたデータ処理装置により実行されるように実現されることができる。すなわち、本発明に係るデータ処理装置は、ADASデータ、走行データ、位置データ、及び走行映像を受信及び分析し、分析により、事故状況予測、事故法律評価、予想目的地判断、運転者の過去運転履歴判断、他運転者の過去運転履歴判断を行うことができる。
ここで、データ処理装置は、ソフトウェア、ハードウェア、またはこれらの組み合わせを用いて実現されることができる。一例として、ハードウェア的な実現によると、ASICs(application specific integrated circuits)、DSPs(digital signal processors)、DSPDs(digital signal processing devices)、PLDs(programmable logic devices)、FPGAs(field programmable gate arrays)、プロセッサ(processors)、コントローラ(controllers)、マイクロコントローラ(micro−controllers)、マイクロプロセッサ(micro−processors)、その他の機能を果たすための電気的なユニットのうち少なくとも1つを用いて実現されることができる。
かかるデータ処理装置は、車両用端末装置100、ユーザ端末装置200、サービス提供サーバ300に搭載されることができ、受信された各種データを分析し、事故状況予測、事故法律評価、予想目的地判断、運転者の過去運転履歴判断、他運転者の過去運転履歴判断などを行うことができる。
このような本発明の様々な実施形態によると、車両の事故発生可能性のある第1走行状況で、車両に発生する可能性があった事故状況を予測し、事故状況予測情報を生成して事故状況予測サービスを提供することで、運転者の危険性を想起させるとともに、運転者の安全な運転を図ることができる。
また、本発明の様々な実施形態によると、車両の事故が発生した第2走行状況で、事故の経緯を分析し、分析による事故過失割合を含む事故法律評価情報を生成して事故法律案内サービスを提供することで、車両の修理費用などのような金銭的要素の法律サービス、保険関連諮問を自動で支援することができて、運転者の便宜を高めることができる。
また、本発明の様々な実施形態によると、目的地予測案内サービス、運転者の過去運転履歴案内サービス、他運転者の過去運転履歴案内サービスなどにより、運転者の便宜を高めることができる。
一方、本発明の一実施形態に係る走行関連案内サービスの提供方法は、車両の運転者に対して駐車位置毎の目的地データセットを格納するステップと、車両が駐車から走行状態に変更されると、車両の位置データと、既格納の駐車位置毎の目的地データセットとを比較し、車両の運転者の予想目的地を判断するステップと、判断された予想目的地を用いて目的地予測案内サービスを提供するステップと、をさらに含むことができる。
また、本発明の一実施形態に係る走行関連案内サービスの提供方法は、車両の運転者に対して走行位置毎のADASデータセットを格納するステップと、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出するステップと、検出されたADASデータを用いて運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
また、本発明の一実施形態に係る走行関連案内サービスの提供方法は、他運転者に対する走行位置毎のADASデータセットを格納するステップと、車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、車両の運転者の位置に合致するADASデータを検出するステップと、検出されたADASデータを用いて他運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことができる。
一方、明細書及び特許請求の範囲において、「第1」、「第2」、「第3」、及び「第4」などの用語が記載されている場合、類似の構成要素同士を区分するために用いられ、必ずしもそうではないが、特定順次または発生順序を記述するために用いられる。そのように用いられる用語は、これに述べられた本発明の実施形態が、例えば、ここで図示または説明されたものではない他のシーケンスにより動作できるように、適切な環境下で互換可能であると理解されるべきである。同様に、ここで、方法が一連のステップを含むと記述される場合、これに提示されたそのようなステップの順序が、必ずしもそのようなステップが実行され得る順序であるわけではなく、任意に記述されたステップは省略されることがあり、及び/またはこれに記述されていない任意の他のステップが、その方法に付加可能である。
また、明細書及び請求範囲において、「左側」、「右側」、「前」、「後」、「上部」、「底部」、「上に」、「下に」などの用語は、説明のために用いられるものであり、必ずしも不変の相対的な位置を記述するためのものではない。そのように用いられる用語は、これに記述された本発明の実施形態が、例えば、これに図示または説明されたものではなく他の方向に動作するように適切な環境下で互換可能であると理解されるべきである。これに用いられた用語「連結された」は、電気的または非電気的な方式により直接または間接的に接続されることと定義される。ここで、互いに「隣接する」と記述された対象は、その文章が用いられる文脈において適切に、互いに物理的に接触するか、互いに近接するか、互いに同一の一般的な範囲または領域に存在することができる。ここで、「一実地形態において」という文章は、必ずしもそうではないが、同一の実施形態を意味する。
また、明細書及び請求範囲において、「連結される」、「連結する」、「締結される」、「締結する」、「結合される」、「結合する」などと、これらの表現の多様な変形は、他の構成要素と直接的に連結されるか、他の構成要素を挟んで間接的に連結されることを含む意味で用いられる。
また、本明細書で用いられる構成要素に対する接尾辞の「モジュール」及び「部」は、明細書の作成における容易さのみを考慮して付与または混用されるものであり、それ自体が互いに区別される意味または役割を有するわけではない。
また、本明細書で用いられた用語は、実施形態を説明するためのものであり、本発明を制限するためのものではない。本明細書において、単数形は、文章において得に言及しない限り、複数形も含む。明細書で用いられる「含む(comprise)」及び/または「含んでいる(comprising」)」は、言及された構成要素、ステップ、動作、及び/または素子が、一つ以上の他の構成要素、ステップ、動作、及び/または素子の存在または追加を排除するわけではない。
これまで、その好ましい実施形態を中心に本発明について説明した。本明細書に開示された全ての実施形態及び条件付きの例示は、本発明の技術分野において通常の知識を有する当業者が、本発明の原理と概念を容易に理解するように記述されたものであり、当業者であれば、本発明が、本発明の本質的な特性を逸脱しない範囲で変形された形態で実現可能であることを理解することができる。
よって、開示された実施形態は、限定的な観点ではなく、説明的な観点で考慮されるべきである。本発明の範囲は、前述の説明ではなく、特許請求の範囲に示されており、それと同等な範囲内の相違は、何れも本発明に含まれると解釈されるべきである。
一方、上述の本発明の様々な実施形態に係る走行関連案内サービスの提供方法は、プログラムで実現されてサーバまたは機器に提供されることができる。これにより、それぞれの装置は、プログラムが格納されたサーバまたは機器に接続し、前記プログラムをダウンロードすることができる。
また、上述の本発明の様々な実施形態に係る方法は、プログラムで実現されて多様な非一時的な読み取り可能な媒体(non−transitory computer readable medium)に格納されて提供されることができる。非一時的な読み取り可能媒体とは、レジスタ、キャッシュ、メモリなどのように、短い瞬間の間にデータを格納する媒体ではなく、半永久的にデータを格納し、機器により読み取り(reading)が可能な媒体を意味する。具体的には、上述の多様なアプリケーションまたはプログラムは、CD、DVD、ハードディスク、ブルーレイディスク、USB、メモリカード、ROMなどのような非一時的な読み取り可能な媒体に格納されて提供されることができる。
また、以上では、本発明の好ましい実施形態について図示して説明したが、本発明は上述の特定の実施形態に限定されず、請求範囲で請求する本発明の要旨を逸脱することなく当該発明が属する技術分野において通常の知識を有する者によって様々な変形実施が可能であることはいうまでもなく、このような変形実施が、本発明の技術的思想や見込みから個別的に理解されてはならない。

Claims (21)

  1. 車両用端末装置の走行関連案内サービスの提供方法であって、
    車両の走行中に撮影された走行映像を獲得するステップと、
    車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールから前記車両のADASデータを受信し、前記車両のECU(Electronic Control Unit)モジュールから前記車両の走行データを受信するステップと、
    前記車両の位置データを受信するステップと、
    前記車両の走行中に特定の走行状況が検知されると、前記検知された特定の走行状況に関連する前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像をサービス提供サーバに伝送するステップと、を含む、走行関連案内サービスの提供方法。
  2. 前記伝送するステップは、前記車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況が検知されると、検知された第1走行状況の時点の前の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を前記サービス提供サーバに伝送するステップを含むことを特徴とする、請求項1に記載の走行関連案内サービスの提供方法。
  3. 前記車両の走行中に事故が発生した第2走行状況が検知されると、前記検知された第2走行状況の時点から所定時間前乃至所定時間後の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を前記サービス提供サーバに伝送するステップをさらに含む、請求項2に記載の走行関連案内サービスの提供方法。
  4. 前記車両の走行中に撮影された走行映像を獲得するステップは、前方カメラにより撮影された前方走行映像と、後方カメラにより撮影された後方走行映像とを獲得するステップを含み、
    前記前方走行映像と前記後方走行映像を結合し、結合された映像における自車の位置に自車客体を配置させたトップビュー(Top view)映像を生成するステップをさらに含み、
    前記サービス提供サーバに伝送される走行映像は、前記トップビュー(Top view)映像であることを特徴とする、請求項3に記載の走行関連案内サービスの提供方法。
  5. 前記トップビュー映像は、複数のフレームが抽出されて形成されたGIF(Graphics Interchange Format)フォーマットであることを特徴とする、請求項4に記載の走行関連案内サービスの提供方法。
  6. 前記サービス提供サーバで、前記車両用端末装置から受信されたデータに基づいて、前記車両に発生する可能性があった事故状況予測情報が生成されると、前記生成された事故状況予測情報を受信するステップと、
    前記受信された事故状況予測情報に基づいて案内を行うステップと、をさらに含むことを特徴とする、請求項2から5の何れか一項に記載の走行関連案内サービスの提供方法。
  7. 前記サービス提供サーバで、前記車両用端末装置から受信されたデータに基づいて事故法律評価情報が生成されると、前記生成された事故法律評価情報を受信するステップと、
    前記受信された事故法律評価情報に基づいて案内を行うステップと、をさらに含むことを特徴とする、請求項3から6の何れか一項に記載の走行関連案内サービスの提供方法。
  8. 衝撃レベルを検知するステップと、
    既設定の第1衝撃レベル超過かつ既設定の第2衝撃レベル未満の衝撃が検知され、前記衝撃が検知される前に、前記ADASデータに基づいて車線離脱報知、前方追突、急カーブ報知、急停止報知、急回転報知、及び死角地点報知のうち少なくとも1つが検知されると、事故発生可能性のある第1走行状況と判断するステップと、
    既設定の第2衝撃レベルを超える衝撃が検知されると、事故が発生した第2走行状況と判断するステップと、をさらに含むことを特徴とする、請求項3から7の何れか一項に記載の走行関連案内サービスの提供方法。
  9. サービス提供サーバの走行関連案内サービスの提供方法であって、
    車両用端末装置から、車両の特定の走行状況に関連する前記車両のADASデータ、前記車両の位置データ、前記車両の走行データ、及び前記車両の走行中に撮影された走行映像を受信するステップと、
    前記受信されたデータと走行映像を分析し、前記車両の特定の走行状況に関連する案内情報を生成するステップと、
    前記生成された案内情報を用いて、前記車両に対する走行関連案内サービスを提供するステップと、を含む、走行関連案内サービスの提供方法。
  10. 前記生成するステップでは、
    前記車両の走行中に事故は発生していないが、事故発生可能性のある第1走行状況の時点の前の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を分析し、前記第1走行状況で車両に発生する可能性があった事故状況予測情報を生成し、
    前記提供するステップでは、
    前記生成された事故状況予測情報を用いて事故状況予測案内サービスを提供することを特徴とする、請求項9に記載の走行関連案内サービスの提供方法。
  11. 前記生成するステップでは、
    前記車両に事故が発生した第2走行状況の時点から所定時間前乃至所定時間後の前記ADASデータ、前記位置データ、前記走行データ、及び前記走行映像を分析して事故法律評価情報を生成し、
    前記提供するステップでは、
    前記生成された事故法律評価情報を用いて事故法律案内サービスを提供することを特徴とする、請求項10に記載の走行関連案内サービスの提供方法。
  12. 前記受信された走行映像は、前方走行映像と後方走行映像が結合され、結合された映像における自車の位置に自車客体が配置されたトップビュー(Top view)映像であることを特徴とする、請求項11に記載の走行関連案内サービスの提供方法。
  13. 前記事故状況予測情報を生成するステップは、
    前記トップビュー映像から自車の周囲の車両を検出するステップと、
    前記検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて前記第1走行状況で車両に発生する可能性があった事故状況を予測し、前記事故状況予測情報を生成するステップと、を含むことを特徴とする、請求項12に記載の走行関連案内サービスの提供方法。
  14. 前記事故法律評価情報を生成するステップは、
    前記トップビュー映像から自車の周囲の車両を検出するステップと、
    前記検出された車両に対する自車のADASデータ及び走行データのうち少なくとも1つを用いて事故過失割合を分析するステップと、
    前記分析による事故過失割合を含む前記事故法律評価情報を生成するステップと、を含むことを特徴とする、請求項12または13に記載の走行関連案内サービスの提供方法。
  15. 前記車両の運転者に対して駐車位置毎の目的地データセットを格納するステップと、
    前記車両が駐車から走行状態に変更されると、前記車両の位置データと、既格納の駐車位置毎の目的地データセットとを比較し、前記車両の運転者の予想目的地を判断するステップと、
    前記判断された予想目的地を用いて目的地予測案内サービスを提供するステップと、をさらに含むことを特徴とする、請求項11から14の何れか一項に記載の走行関連案内サービスの提供方法。
  16. 前記車両の運転者に対して走行位置毎のADASデータセットを格納するステップと、
    前記車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、前記車両の運転者の位置に合致するADASデータを検出するステップと、
    前記検出されたADASデータを用いて運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことを特徴とする、請求項11から15の何れか一項に記載の走行関連案内サービスの提供方法。
  17. 他運転者に対する走行位置毎のADASデータセットを格納するステップと、
    前記車両の位置データと、既格納の走行位置毎のADASデータセットとを比較し、前記車両の運転者の位置に合致するADASデータを検出するステップと、
    前記検出されたADASデータを用いて他運転者の過去運転履歴案内サービスを提供するステップと、をさらに含むことを特徴とする、請求項11から16の何れか一項に記載の走行関連案内サービスの提供方法。
  18. 車両用端末装置であって、
    通信部と、
    車両の走行中に撮影された走行映像を獲得する映像獲得部と、
    車両の運転を補助するADAS(Advanced Driver Assistance System)モジュールからADASデータを受信するADASデータ獲得部と、
    前記車両のECU(Electronic Control Unit)モジュールから前記車両の走行データを受信するECUデータ獲得部と、
    前記車両の位置データを受信する位置データ獲得部と、
    前記車両の走行中に特定の走行状況が検知されると、前記検知された特定の走行状況に関連する前記ADASデータ、前記位置データ、前記車両の走行データ、及び前記走行映像をサービス提供サーバに伝送するように前記通信部を制御する制御部と、を含む、車両用端末装置。
  19. サービス提供サーバであって、
    車両用端末装置から、車両の特定の走行状況に関連する前記車両のADASデータ、前記車両の位置データ、前記車両の走行データ、及び前記車両の走行中に撮影された走行映像を受信する通信部と、
    前記受信されたデータと走行映像を分析して前記車両の特定の走行状況に関連する案内情報を生成し、前記生成された案内情報を用いて、前記車両に対する走行関連案内サービスを提供するサービス提供部と、を含む、サーバ。
  20. 請求項1から17の何れか一項に記載の走行関連案内サービスの提供方法を実行するために、記録媒体に格納されているプログラム。
  21. 請求項1から17の何れか一項に記載の走行関連案内サービスの提供方法を実行するためのプログラムコードが記録されているコンピュータ読み取り可能な記録媒体。
JP2020203670A 2019-12-10 2020-12-08 走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体 Pending JP2021093162A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190164008A KR20210073313A (ko) 2019-12-10 2019-12-10 주행 관련 안내 서비스를 제공하는 차량용 단말 장치, 서비스 제공 서버, 방법, 컴퓨터 프로그램 및 컴퓨터 판독 가능한 기록 매체
KR10-2019-0164008 2019-12-10

Publications (1)

Publication Number Publication Date
JP2021093162A true JP2021093162A (ja) 2021-06-17

Family

ID=73789969

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020203670A Pending JP2021093162A (ja) 2019-12-10 2020-12-08 走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体

Country Status (4)

Country Link
US (2) US11861754B2 (ja)
EP (2) EP4266266A3 (ja)
JP (1) JP2021093162A (ja)
KR (1) KR20210073313A (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11475774B2 (en) * 2020-04-03 2022-10-18 Verizon Patent And Licensing Inc. Systems and methods for machine learning based collision avoidance
US11769332B2 (en) * 2020-06-15 2023-09-26 Lytx, Inc. Sensor fusion for collision detection
US11887481B2 (en) * 2021-06-30 2024-01-30 Volvo Car Corporation Rear view collision warning indication and mitigation
CN113240756B (zh) * 2021-07-13 2021-09-17 天津所托瑞安汽车科技有限公司 车载bsd摄像头的位姿变动检测方法、设备和存储介质
CN113989466B (zh) * 2021-10-28 2022-09-20 江苏濠汉信息技术有限公司 一种基于事态认知的超视距辅助驾驶系统
CN114373311B (zh) * 2022-01-27 2023-06-06 支付宝(杭州)信息技术有限公司 车辆驾驶引导方法及装置
CN115186912B (zh) * 2022-07-21 2023-05-05 深圳市百慧文化发展有限公司 一种用于智慧商圈的车主服务系统及方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130086681A (ko) 2012-01-26 2013-08-05 김홍곤 블랙박스와 스마트폰을 이용한 차량 사고 신고 시스템
US20150006023A1 (en) * 2012-11-16 2015-01-01 Scope Technologies Holdings Ltd System and method for determination of vheicle accident information
EP3013643A4 (en) 2013-06-27 2017-03-15 Scope Technologies Holdings Limited Onboard vehicle accident detection and damage estimation system and method of use
US8954226B1 (en) * 2013-10-18 2015-02-10 State Farm Mutual Automobile Insurance Company Systems and methods for visualizing an accident involving a vehicle
US20160189303A1 (en) * 2014-03-21 2016-06-30 Gil Emanuel Fuchs Risk Based Automotive Insurance Rating System
US9868394B1 (en) * 2015-08-28 2018-01-16 State Farm Mutual Automobile Insurance Company Vehicular warnings based upon pedestrian or cyclist presence
US9969329B2 (en) * 2015-09-16 2018-05-15 Sony Corporation System and method for generation of a preventive alert
KR101656302B1 (ko) 2016-03-07 2016-09-09 (주)디지탈엣지 사고 방지 및 처리 시스템 및 방법
US10832331B1 (en) * 2016-07-11 2020-11-10 State Farm Mutual Automobile Insurance Company Systems and methods for allocating fault to autonomous vehicles
IT201600094858A1 (it) * 2016-09-21 2018-03-21 St Microelectronics Srl Procedimento per un cross traffic alert avanzato a basso costo, corrispondente sistema di elaborazione, sistema per cross traffic alert e veicolo
US20200294401A1 (en) * 2017-09-04 2020-09-17 Nng Software Developing And Commercial Llc. A Method and Apparatus for Collecting and Using Sensor Data from a Vehicle
US11113969B2 (en) * 2019-03-07 2021-09-07 Toyota Jidosha Kabushiki Kaisha Data-to-camera (D2C) based filters for improved object detection in images based on vehicle-to-everything communication
US11514482B2 (en) * 2019-09-06 2022-11-29 Honda Motor Co., Ltd. Systems and methods for estimating a remaining value

Also Published As

Publication number Publication date
US20210171027A1 (en) 2021-06-10
US11861754B2 (en) 2024-01-02
EP4266266A3 (en) 2024-01-03
EP3836114A1 (en) 2021-06-16
EP4266266A2 (en) 2023-10-25
US20240112292A1 (en) 2024-04-04
KR20210073313A (ko) 2021-06-18
EP3836114B1 (en) 2023-09-13

Similar Documents

Publication Publication Date Title
JP2021093162A (ja) 走行関連案内サービスを提供する車両用端末装置、サービス提供サーバ、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記録媒体
CN107608388B (zh) 自主警车
US11475119B2 (en) Recognizing assigned passengers for autonomous vehicles
US10336252B2 (en) Long term driving danger prediction system
EP3663978A1 (en) Method for detecting vehicle and device for executing the same
US10614320B2 (en) System and method for advanced highway lane detection
JP2008285015A (ja) 運転タイプ判別装置、プログラム、及び運転支援装置
US11713046B2 (en) Driving assistance apparatus and data collection system
US9536157B2 (en) Method for identification of a projected symbol on a street in a vehicle, apparatus and vehicle
JP2013080286A (ja) 移動体識別装置及び移動体情報発信装置
CN111278708B (zh) 用于辅助驾驶的方法和装置
JP2021099720A (ja) 危険運転判定装置、危険運転判定方法、および危険運転判定プログラム
JP2018045732A (ja) 移動体識別装置
US20220237926A1 (en) Travel management device, travel management method, and recording medium
US11365975B2 (en) Visual confirmation system for driver assist system
JP2012256138A (ja) 携帯端末装置およびこれを備えた運転評価システム
JP2012103849A (ja) 情報提供装置
Li et al. Rear-end collision prevention using mobile devices
JP7428076B2 (ja) サーバ装置、制御装置、車両、及び情報処理システムの動作方法
JP2023045191A (ja) 情報処理装置及び情報処理方法
Jiang Enhancing driving safety via smart sensing techniques
TWM478885U (zh) 具有智能數據採集及雲端訊息推送的電子裝置
JP2012103850A (ja) 注視点推定装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231205