WO2015129072A1 - 車両走行状態監視装置 - Google Patents

車両走行状態監視装置 Download PDF

Info

Publication number
WO2015129072A1
WO2015129072A1 PCT/JP2014/070887 JP2014070887W WO2015129072A1 WO 2015129072 A1 WO2015129072 A1 WO 2015129072A1 JP 2014070887 W JP2014070887 W JP 2014070887W WO 2015129072 A1 WO2015129072 A1 WO 2015129072A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
data
running state
monitoring device
image
Prior art date
Application number
PCT/JP2014/070887
Other languages
English (en)
French (fr)
Inventor
阿部　智彦
Original Assignee
株式会社ブリヂストン
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ブリヂストン filed Critical 株式会社ブリヂストン
Priority to EP14884103.4A priority Critical patent/EP3113120B1/en
Priority to CN201480076292.5A priority patent/CN106030667B/zh
Priority to US15/121,811 priority patent/US10107640B2/en
Publication of WO2015129072A1 publication Critical patent/WO2015129072A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3647—Guidance involving output of stored or live camera images or video streams
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/02—Non-photorealistic rendering
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125—Traffic data processing
    • G08G1/0133—Traffic data processing for classifying traffic situation
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096716—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information does not generate an automatic action on the vehicle control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/096758—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where no selection takes place on the transmitted or the received information
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station

Definitions

  • the present invention relates to a vehicle running state monitoring device that measures and displays the running state of a running vehicle.
  • vehicle travel data is measured by connecting various sensors to a data logger such as a hard disk via wired or wireless wiring and accumulating the measured data.
  • the accumulated measurement data is transferred to a server device such as a vehicle manager or a vehicle service provider via a wireless LAN (see, for example, Patent Document 1).
  • the vehicle information storage device disclosed in Patent Document 1 has a function of storing vehicle travel data such as engine speed and acceleration and a vehicle travel locus on a road map.
  • vehicle travel data such as engine speed and acceleration
  • a vehicle travel locus on a road map.
  • the present invention has been made in view of conventional problems, and displays an image of the front of the vehicle while traveling and data obtained by measuring the traveling state of the vehicle such as acceleration acting on the vehicle as an image on the same screen, It is an object of the present invention to provide a vehicle running state monitoring device having a function of storing displayed images as moving image data.
  • the present invention is an apparatus that is mounted on a vehicle and monitors the running state of the vehicle, a Web information acquisition unit that acquires Web information via an external network, and an imaging unit that captures an image of the exterior or interior of the vehicle, Vehicle running state measuring means including a GPS, a triaxial acceleration sensor, and a triaxial angular velocity sensor, measurement data measured by the vehicle running state measuring means, photographing data photographed by the photographing means, and the Web information obtaining means.
  • the composite image creation means for creating a composite image obtained by combining a plurality of data of the Web information data acquired at the predetermined time, and the composite image synthesized by the composite image creation means is displayed on the display screen as a moving image.
  • It is characterized by comprising display means and storage means for saving the moving picture data as travel record data of the vehicle.
  • display means and storage means for saving the moving picture data as travel record data of the vehicle.
  • Web information such as weather data and map information data
  • data obtained by measuring the running state of the vehicle such as acceleration acting on the vehicle, and the like
  • the displayed image can be stored as travel record data (moving image data) of the vehicle, so that it is possible to sufficiently grasp the travel state of the vehicle and the road surface condition at that time.
  • FIG. 1 is a functional block diagram showing an outline of a vehicle running state monitoring system 100 according to the present embodiment.
  • the vehicle running state monitoring system 100 includes a vehicle running state monitoring device 10 mounted on a vehicle and an Internet as an external network. 20 and a vehicle travel data analysis device 40 connected to the vehicle travel state monitoring device 10 via a server 30.
  • the vehicle travel state monitoring device 10 includes a communication unit 11, a photographing unit 12, a vehicle travel state measurement unit 13, a data correction unit 14, a composite image designation unit 15, a composite image creation unit 16, and a display unit 17.
  • the travel record data creating means 18 and the storage means 19 are provided.
  • the communication means 11 accesses the Internet 20 to acquire Web information such as weather data and map information data from the server 30, and data for transmitting travel record data to be described later to the vehicle travel data analyzer 40. And a transmission unit 11b.
  • the server 30 may have the function of the vehicle travel data analysis device 40.
  • the photographing means 12 is installed in the vehicle interior to photograph the outside or inside of the vehicle, and stores the photographed data in the storage means 19 as image data.
  • the vehicle running state measuring means 13 includes a GPS 131, a triaxial acceleration sensor 132, and a triaxial angular velocity sensor 133.
  • the GPS 131 acquires the position data (latitude / longitude / altitude) of the vehicle on which the vehicle running state monitoring device 10 is mounted based on the radio wave transmitted from the satellite S, and calculates the vehicle speed V from the position data of the vehicle. calculate.
  • the vehicle position data may be only latitude and longitude.
  • the triaxial acceleration sensor 132 has an acceleration G in the X-axis direction.
  • the triaxial angular velocity sensor 133 includes an angular velocity sensor that detects an angular velocity (roll angular velocity) ⁇ X around the X axis, an angular velocity sensor that measures an angular velocity (pitch angular velocity) ⁇ Y around the Y axis, and an angular velocity (yaw around the Z axis).
  • the vehicle running state monitoring device 10 is configured from a portable terminal device
  • the three-axis acceleration sensor 132 and the three-axis angular velocity sensor 133 are dependent on the direction and mounting position of the portable terminal device. Since the detection values are different from those when the triaxial acceleration sensor 132 and the triaxial angular velocity sensor 133 are installed at the center of gravity of the vehicle, the data correction means 14 corrects the detection values in this example.
  • the data correction unit 14 detects the detected values G x , G y , G z is converted into accelerations G X , G Y , and G Z in the X-axis direction, the Y-axis direction, and the Z-axis direction, respectively, and the installation position of each angular velocity sensor constituting the three-axis angular velocity sensor 133 is used as the origin.
  • the detected values ⁇ x , ⁇ y , ⁇ z of the angular velocity sensor which are the measured angular velocities, are converted into angular velocities ⁇ X , ⁇ Y , ⁇ Z with the center of gravity of the vehicle body as the origin. It is also possible to calculate the attitude angle (roll angle, pitch angle, and yaw angle) from the angular velocities ⁇ X , ⁇ Y , and ⁇ Z. The coordinates of the posture angle are similarly converted.
  • the detection values G x , G y , G z of each acceleration sensor and the detection values ⁇ x , ⁇ y , ⁇ z of each angular velocity sensor are corrected by the data correction unit 14 and then stored in the storage unit 19.
  • measured or calculated position data (X, Y, Z) vehicle speed V data, acceleration data G X , G Y , G Z and angular velocity data ⁇ X , ⁇ Y , ⁇ Z are referred to as measurement data. .
  • the composite image designating unit 15 designates a combination of data to be displayed on the display screen 17G of the display unit 17.
  • the measurement data measured by the vehicle running state measuring unit 13 and the image taken by the photographing unit 12 are used.
  • a plurality of data selected by the driver's input (selection) is specified from the shooting data and the Web information data acquired by the Web information acquisition unit 11a.
  • the composite image creating unit 16 creates a composite image (moving image data) obtained by compositing a plurality of data selected by the composite image designating unit 15 every predetermined time and sends the composite image to the display unit 17. It is sent to the travel record data creation means 18.
  • the display unit 17 displays the composite image created by the composite image creation unit 16 as a moving image on the display screen 17G.
  • the travel record data creation means 18 determines whether any of the components G X , G Y , G Z of the triaxial acceleration has exceeded a preset threshold value, and also determines each component G X , G Y , G Z. If any of exceeds a predetermined threshold value at time t k, especially in vehicle position images created at time t k, create a vehicle position images in the time t k before and after a predetermined time width [Delta] t k And this is memorize
  • the storage unit 19 stores measurement data measured by the vehicle running state measurement unit 13, shooting data shot by the shooting unit 12, and Web information data acquired by the Web information acquisition unit 11 a, and is stored in the display unit 17.
  • a composite image serving as running record data is stored as a moving image file. Note that a composite image that is not adopted as moving image data is deleted after being stored for a certain period of time, or only one image is left as a still image file every one to two minutes, and the other images are deleted.
  • the vehicle travel state monitoring device 10 is a portable terminal device 1 incorporating a vehicle travel state measurement means 13 having a GPS 131, a triaxial acceleration sensor 132, and a triaxial angular velocity sensor 133 as shown in FIG. Consists of.
  • the portable terminal device 1 of this example includes a CPU (Central Processing Unit) 2, and the CPU 2 includes a ROM (Read Only Memory) 3, a RAM (Random Access Memory) 4, an input / output unit 5, a camera 6, a wireless device.
  • the communication device 7 and the vehicle running state measuring means 13 are connected via the bus 8.
  • the operation screen is the input / output unit 5.
  • the camera 6 corresponds to the photographing unit 12
  • the wireless communication device 7 corresponds to the communication unit 11 of the vehicle running state monitoring device 10
  • the input / output unit 5 corresponds to the composite image designation unit 15 and the display unit 17,
  • the ROM 3 and the RAM 4 Corresponds to the storage means 19 of the vehicle running state monitoring device 10.
  • the ROM 3 stores various control programs executed by the CPU 2 such as the control of the GPS 131, the three-axis acceleration sensor 132, the three-axis angular velocity sensor 133, and the photographing unit 12, the data correction unit 14, the composite image creation unit 16, and the like.
  • An arithmetic program for execution is stored
  • the RAM 4 stores measurement data, image data, Web information, and travel record data.
  • the CPU 2 develops and executes a control program and a calculation program on the RAM 4.
  • the portable terminal device 1 has an installation table 54 provided on the dashboard 53, and the shooting direction of a camera (not shown) is the traveling direction of the vehicle 50. It is mounted so that the video to be shot becomes a horizontally long screen.
  • the portable terminal device 1 By attaching the portable terminal device 1 to the installation base 54, the road surface condition in the traveling direction of the vehicle 50 can be stably photographed, and the relationship between the position of the vehicle running state measuring means 13 and the position of the center of gravity of the vehicle is made almost constant. can do.
  • the operation screen (input / output unit 5) that is a display screen for the driver D is sufficiently provided. In addition to being visible, it is possible to shoot a video in front of the vehicle without obstructing the view of the driver D.
  • the operation screen (input / output unit 5) of the portable terminal device 1 also functions as the composite image designation unit 15. That is, the measurement item displayed on the operation screen can be specified from the measurement items displayed on the operation screen by operating the operation screen (input / output unit 5) of the portable terminal device 1.
  • the portable terminal device 1 may be attached to the installation base 54, or after the portable terminal device 1 is attached to the installation base 54, the measurement item may be designated.
  • the vehicle travel data analysis device 40 is composed of, for example, a personal computer and analyzes the road surface condition on which the vehicle travels.
  • the vehicle travel data analysis device 40 includes a travel data storage means 41, a travel data analysis means 42, and an analysis data display means 43.
  • the travel data storage means 41 stores travel record data transmitted from a plurality of vehicles and map information of roads on which the vehicles travel.
  • the travel data analysis means 42 analyzes the road surface condition such as the unevenness of the road surface on which the vehicle travels and the slope / inclination from a plurality of travel record data.
  • the analysis data display means 43 displays the analyzed road surface condition data.
  • step S1 measurement items and images to be displayed on the display screen 17G are designated (step S1). Specifically, as described above, by operating the operation screen (input / output unit 5) of the portable terminal device 1, the measurement items displayed on the operation screen are selected from the measurement items displayed on the operation screen. Specify (see FIG. 5).
  • Measurement items include travel route, vehicle acceleration, vehicle posture change, road surface condition, weather / temperature / humidity, and the like.
  • the travel route is created using the vehicle position data and vehicle speed data measured by the GPS 131 and the map information acquired by the Web information acquisition unit 11a, and is displayed as an image.
  • the vehicle acceleration and the vehicle attitude change are obtained from the vehicle acceleration data and the vehicle angular velocity data measured by the triaxial acceleration sensor 132 and the triaxial angular velocity sensor 133, respectively, and are displayed as measurement data.
  • the shooting data shot by the shooting means 12 is used as an image (moving image).
  • weather information acquired by the Web information acquisition unit 11a is displayed as measurement data.
  • the travel route, vehicle acceleration, road surface condition, and temperature are used as measurement items.
  • vehicle position data, vehicle speed data, vehicle acceleration data, shooting data, weather information, and map information are collected (step S2).
  • Vehicle position data, vehicle speed data, vehicle acceleration data, and imaging data are collected every predetermined time.
  • the weather information and the map information may be performed every predetermined number of traveling kilometers.
  • the predetermined time for collecting the vehicle acceleration data and the photographing data may be every frame (for example, 1/30 second) of the video signal from the photographing means 12.
  • an average value (RMS average value) of 1/30 seconds may be used.
  • the collection of the vehicle position data and the vehicle speed data is sufficient, for example, every second.
  • map information stored in the storage unit 19 in advance may be used.
  • FIG. 7 is a diagram illustrating an example of a composite image displayed on the display screen 17G.
  • vehicle speed (Speed) vehicle position (LAT; latitude, LNG; longitude, ALT; altitude), time, temperature, and vehicle acceleration (G X , G Y , G Z ) data are displayed.
  • LAT vehicle position
  • LAT latitude, LNG
  • ALT latitude
  • ALT altitude
  • time temperature
  • temperature time
  • vehicle acceleration G X , G Y , G Z
  • the composite image is created every predetermined time (for example, 1/30 second), displayed sequentially on the display screen 17G, and temporarily stored in the buffer of the storage unit 19 for a predetermined time (step S5).
  • step S6 it is determined whether or not the vehicle vertical acceleration G Z exceeds a preset threshold value G 0 (step S6). If the vehicle vertical acceleration G Z exceeds the threshold value G 0 at time t k , data collection is continued (step S7), and whether the elapsed time ⁇ T from time t k has reached ⁇ T k / 2.
  • step S9 If the elapsed time ⁇ T from time t k is less than ⁇ T k / 2, the process returns to step S7 and data collection is continued. After saving the moving image file, it is determined whether or not a measurement end command is issued (step S10). If the measurement end command is not issued, the process returns to step S2 to continue collecting information such as the vehicle position data and the vehicle speed data. If the measurement end command is issued, the information collection is terminated.
  • step S11 it is determined whether or not the elapsed time ⁇ T from the time t k has reached a certain time ⁇ T p (step S11), and when the certain time T p has elapsed, one sheet created at the time t k + ⁇ T p is determined. only synthetic image, for example; with the still picture file name such as "running record data t k smooth", and stored in the storage unit 19, the other image is erased (step S12). After saving the still image file, the process proceeds to step S10 to determine whether or not a measurement end command has been issued.
  • step S2 If a measurement end command has not been issued, the process returns to step S2 and the measurement end command is issued. If it is, information collection is terminated. On the other hand, when the elapsed time ⁇ T from the time t k has not reached the certain time ⁇ T p , the process returns to step S2 and data collection is continued.
  • FIG. 8 shows an example of the relationship between the composite image displayed on the display screen 17G and the travel record data, and arrows indicate the flow of time.
  • the composite image is a moving image that is created every predetermined time (for example, 1/30 seconds) and sequentially displayed on the display screen 17G, as shown in the upper row of FIG.
  • the travel record data is composed of a still image file and a moving image file. For example, when the state where the vehicle vertical acceleration G Z is equal to or less than the threshold value G 0 continues, the travel record data is composed of a still image file stored in the storage means 19 every predetermined time ⁇ T p .
  • the travel record data includes still image files at time t p , time t p + ⁇ T p , time t p + 2 ⁇ T p ,. File.
  • the vehicle when the vertical acceleration G Z exceeds the threshold value G 0 the time t k - ⁇ T k / 2 from the time t k + ⁇ T k / 2 to the composite image memory means all as a moving image file 19 is stored.
  • the composite image is created every predetermined time, but the travel record data is saved as a still image file saved every certain time ⁇ T p and the recording time interval is ⁇ T k (actually Is a plurality of moving image files of about 30 seconds), and other composite images are temporarily stored in the buffer for a predetermined time and then deleted. Therefore, it is not necessary to transfer the traveling record data to the server 30 every time a moving image file is created.
  • the vehicle accelerations G X , G Y , G Z are also angular accelerations ⁇ X , ⁇ Y , ⁇ Z also increases, but in particular, the vehicle vertical acceleration G Z changes greatly. Therefore, if a moving image file “travel recording data; t k unevenness” is called from the storage means 19 and reproduced, it can be grasped whether the input G z is caused by a pothole or a road step. . If the vehicle travel data analysis device 40 analyzes the change in the input Gz and the shooting data, it is possible to grasp a more detailed road surface condition.
  • the vehicle travel data analysis device 40 transmits the puncture warning information to the portable terminal device 1 so that the tire is given to the driver. If the replacement is promoted, the safety of the vehicle can be improved. In this case, what is necessary is just to use the speaker incorporated in the portable terminal device 1 as an alarm device which issues a warning to a driver
  • FIG. 10 is a diagram showing an analysis example of the travel record data displayed on the analysis data display means 43 of the vehicle travel data analysis device 40, and is a composite screen transferred from the vehicle travel state monitoring device 10.
  • the analysis result is displayed in the upper right of the figure.
  • the travel record data transferred from the vehicle travel state monitoring device 10 is analyzed to obtain the distribution of potholes on the road on which the vehicle travels. As shown in the upper right figure, it can be seen that potholes are distributed on the road at positions indicated by balloons M in the figure.
  • the road surface condition of the road can be analyzed more accurately. Also, by analyzing the travel record data acquired on various roads, it is possible to compare the number of potholes by road, for example, the same national highway No. 1 has many potholes in ** prefectures.
  • the vehicle travel state measurement unit 13 is included in the portable terminal device 1 in which the vehicle travel state measurement unit 13 including the GPS 131, the triaxial acceleration sensor 132, and the triaxial angular velocity sensor 133 is incorporated.
  • the traveling record data is transferred to the computer of the management center that manages the vehicle via the server, the traveling state of the vehicle considering the road surface condition can be analyzed. It is possible to grasp the traveling state and the road surface condition of the vehicle more accurately.
  • the storage means is configured to include travel record data transfer means for transferring the moving image data as travel record data of the vehicle to a computer of a management center that manages the vehicle via a server.
  • travel record data transfer means for transferring the moving image data as travel record data of the vehicle to a computer of a management center that manages the vehicle via a server.
  • the vehicle travel record data is not stored in the vehicle travel state monitoring device, but directly sent to the computer of the management center, and the configuration of analyzing the vehicle travel state in consideration of the road surface condition, It is possible to sufficiently grasp the running state of the vehicle and the road surface condition at that time.
  • the composite image creating unit sets the threshold.
  • Acceleration data including acceleration data exceeding, shooting data of the vehicle traveling direction shot by the shooting means, map information data acquired by the Web information acquisition means, or map information stored in advance in the storage means
  • a composite image is created by combining image data on which the position data of the vehicle acquired by the GPS is displayed.
  • the vehicle running state monitoring device is constituted by a portable terminal device incorporating a GPS, a triaxial acceleration sensor, and a triaxial angular velocity sensor.
  • a portable terminal device incorporating a GPS, a triaxial acceleration sensor, and a triaxial angular velocity sensor is used as a vehicle running state monitoring device, the device can be miniaturized.
  • the vehicle running state monitoring device is a portable terminal device, it can be installed on the dashboard of the driver's seat of the vehicle, so measurement of the running state of the vehicle and video in front of the vehicle can be performed without obstructing the driver's view. Can be taken.
  • attitude angles roll angle, pitch angle, and yaw angle
  • travel record data move record data
  • the moving image file and the still image file are stored in the storage unit 19 as travel record data.
  • the measurement data may be stored without creating the still image file.
  • steps S11 and S12 may be omitted and the process may return immediately to step S2.
  • the measurement items are travel route, vehicle acceleration, road surface condition, and air temperature, but the measurement items are not limited to this, but the travel route, vehicle acceleration, vehicle posture change, road surface are not limited thereto. What is necessary is just to select suitably from a condition, weather, temperature, and humidity. Needless to say, photographing data corresponding to the road surface condition needs to be included in the measurement item as a measurement item.
  • the processing capacity load of CPU may become large and a processing delay may arise.
  • the vehicle running state monitoring device 10 is composed of a portable terminal device, it is possible to provide control means for simultaneously operating the sensors by monitoring and feeding back the processing capacity load and processing delay of the CPU 2 in real time. preferable.
  • the control means determines that the processing capacity of the CPU 2 has decreased, the control means decreases the measurement sampling rate of the vehicle running state measurement means 13 or shortens the shutter speed of the photographing means 12 (increases the frame interval). For example, if the processing capacity load of the CPU 2 is reduced, a large number of sensors can be operated simultaneously.
  • the processing capacity load and processing delay of the CPU can be monitored by detecting a temperature rise of the CPU or detecting a delay in processing time for recording the travel record data.
  • 1 portable terminal device 2 CPU, 3 ROM, 4 RAM, 5 Input / output unit, 6 Camera, 7 Wireless communication device, 8 Bus, 10 vehicle running state monitoring device, 11 communication means, 12 photographing means, 13 vehicle running state measuring means, 131 GPS, 132 3-axis acceleration sensor, 133 3-axis angular velocity sensor, 14 data correction means, 15 composite image designation means, 16 composite image creation means, 17 display means, 17G display screen, 18 travel record data creation means, 19 storage means, 20 Internet, 30 server, 40 vehicle running data analyzer, 41 travel data storage means, 42 travel data analysis means, 43 Analysis data display means, 100 Vehicle running state monitoring system.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Atmospheric Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)

Abstract

　走行中の車両前方の映像と車両に作用する加速度などの車両の走行状態を計測したデータとを同一画面に画像として表示するとともに、表示した画像を動画データとして記憶する機能を有する車両走行状態監視装置を提供するために、ＧＰＳ（１３１）と３軸加速度センサー（１３２）と３軸角速度センサー（１３３）とを備えた車両走行状態計測手段（１３）が内蔵された携帯用端末機器に、車両走行状態計測手段（１３）で計測した計測データ、撮影手段（１２）で撮影した撮影データ、及び、Ｗｅｂ情報取得部（１１ａ）で取得したＷｅｂ情報のデータのうちの、複数のデータを所定時間毎に合成した合成画像を作成する合成画像作成手段（１６）を設け、この合成画像を表示画面（１７Ｇ）に動画として表示画面に表示するとともに、この動画のデータを当該車両の走行記録データとして保存する記憶手段（１９）に保存するようにした。

Description

車両走行状態監視装置
　本発明は、走行中の車両の走行状態を計測して表示する車両走行状態監視装置に関する。
　従来、車両走行データの計測は、各種センサーを有線または無線の配線にてハードディスク等のデータロガーに接続し、計測データを蓄積する方法で行っていた。前記蓄積された計測データは、例えば、無線ＬＡＮにて車両管理者や車両サービス業者などのサーバー装置へ転送される（例えば、特許文献１参照）。
特開２０１３－１８２４２１号公報
　しかしながら、従来の車両走行データ計測では、各種センサーとデータロガーとが有線または無線を介して接続されているだけでなく、データ送信機能を追加する必要があるため、装置が大型化してしまうといった問題点があった。
　また、上記特許文献１開示の車両情報記憶装置では、エンジン回転数や加速度などの車両走行データや道路地図上の車両の走行軌跡については記憶する機能を有するが、どのような路面状況で車両加速度や車両の姿勢角が変化したかについての情報については記憶していないので、車両の走行状態を十分に把握できないといった問題点がある。
　本発明は、従来の問題点に鑑みてなされたもので、走行中の車両前方の映像と車両に作用する加速度などの車両の走行状態を計測したデータとを同一画面に画像として表示するとともに、表示した画像を動画データとして記憶する機能を有する車両走行状態監視装置を提供することを目的とする。
　本発明は、車両に搭載されて当該車両の走行状態を監視する装置であって、外部ネットワークを介してＷｅｂ情報を取得するＷｅｂ情報取得手段と、車両の外部または内部を撮影する撮影手段と、ＧＰＳと３軸加速度センサーと３軸角速度センサーとを備えた車両走行状態計測手段と、前記車両走行状態計測手段で計測した計測データと、前記撮影手段で撮影した撮影データと、前記Ｗｅｂ情報取得手段で取得したＷｅｂ情報のデータのうちの、複数のデータを所定時間毎に合成した合成画像を作成する合成画像作成手段と、前記合成画像作成手段で合成した合成画像を動画として表示画面に表示する表示手段と、前記動画のデータを当該車両の走行記録データとして保存する記憶手段とを備えることを特徴とする。
　これにより、走行中の車両前方の映像データ、気象データや地図情報データなどのＷｅｂ情報、車両に作用する加速度などの車両の走行状態を計測したデータなどを同一画面に画像として表示することができるとともに、表示した画像を車両の走行記録データ（動画データ）として記憶できるので、車両の走行状態やそのときの路面状況を十分に把握することが可能となる。
　なお、前記発明の概要は、本発明の必要な全ての特徴を列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となり得る。
本実施の形態に係る車両走行状態監視システムの概要を示す機能ブロック図である。 車両加速度と車両角速度とを説明するための図である。 本発明の携帯用端末機器の構成を示す図である。 携帯用端末機器の取付方法の一例を示す図である。 携帯用端末機器の操作画面に表示される計測項目の一例を示す図である。 車両走行状態監視システムの動作を示すフローチャートである。 本発明による合成画像の一例を示す図である。 走行記録データを示す図である。 路面状況と車両上下加速度の関係を説明するための図である。 車両走行記録データの解析結果の一例を示す図である。
　以下、本発明の実施の形態について、図面に基づき説明する。
　図１は本実施の形態に係る車両走行状態監視システム１００の概要を示す機能ブロック図で、車両走行状態監視システム１００は、車両に搭載される車両走行状態監視装置１０と、外部ネットワークであるインターネット２０及びサーバー３０を介して車両走行状態監視装置１０と接続される車両走行データ解析装置４０とを備える。
　車両走行状態監視装置１０は、通信手段１１と、撮影手段１２と、車両走行状態計測手段１３と、データ補正手段１４と、合成画像指定手段１５と、合成画像作成手段１６と、表示手段１７と、走行記録データ作成手段１８と、記憶手段１９とを備える。
　通信手段１１は、インターネット２０にアクセスして気象データや地図情報データなどのＷｅｂ情報をサーバー３０から取得するＷｅｂ情報取得部１１ａと、後述する走行記録データを車両走行データ解析装置４０に送信するデータ送信部１１ｂとを備える。なお、サーバー３０が車両走行データ解析装置４０の機能を有していてもよい。
　撮影手段１２は、車室内に設置されて車両の外部または内部を撮影し、この撮影されたデータを画像データとして記憶手段１９に記憶する。
　車両走行状態計測手段１３は、ＧＰＳ１３１と３軸加速度センサー１３２と３軸角速度センサー１３３とを備える。
　ＧＰＳ１３１は、衛星Ｓから発信された電波を元に、車両走行状態監視装置１０が搭載された車両の位置データ（緯度／経度／高度）を取得するとともに、車両の位置データから当該車両速度Ｖを算出する。なお、車両の位置データを緯度と経度のみとしてもよい。
　図２に示すように、車両５０の前後方向をＸ軸方向、幅方向（横方向）をＹ軸方向、上下方向をＺ軸方向とすると、３軸加速度センサー１３２は、Ｘ軸方向の加速度ＧXを検出する加速度センサーと、Ｙ軸方向の加速度ＧYを検出する加速度センサーと、Ｚ軸方向の加速度ＧZを検出する加速度センサーの３つの加速度センサーを一体化したもので、車両加速度のＸ，Ｙ，Ｚ成分ＧX，ＧY，ＧZを計測する。
　３軸角速度センサー１３３は、Ｘ軸周りの角速度（ロール角速度）ΩXを検出する角速度センサーと、Ｙ軸周りの角速度（ピッチ角速度）ΩYを測定する角速度センサーと、Ｚ軸周りの角速度（ヨー角速度）ΩZを測定する角速度センサーの３つの角速度センサーをを一体化したもので、車両の各軸周りの角加速度ΩX，ΩY，ΩZを計測する。
　なお、後述するように、車両走行状態監視装置１０を携帯用端末機器から構成した場合には、携帯用端末機器を装着する方向や装着位置により、３軸加速度センサー１３２及び３軸角速度センサー１３３の検出値が、３軸加速度センサー１３２及び３軸角速度センサー１３３を車両の重心位置に設置したときとは異なるので、本例ではデータ補正手段１４により、上記の検出値を補正する。
　データ補正手段１４は、３軸加速度センサー１３２を構成する各加速度センサーの検出方向と車体の前後方向・左右方向及び上下方向とが異なる場合に、上記各加速度センサーの検出値Ｇx，Ｇy，Ｇzを、それぞれ、Ｘ軸方向、Ｙ軸方向、及びＺ軸方向の加速度ＧX，ＧY，ＧZに変換するとともに、３軸角速度センサー１３３を構成する各角速度センサーの設置位置を原点とした角速度である角速度センサーの検出値Ωx，Ωy，Ωzを、車体の重心位置を原点とした角速度ΩX，ΩY，ΩZに変換する。なお、角速度ΩX，ΩY，ΩZから姿勢角（ロール角、ピッチ角、及び、ヨー角）を算出することも可能である。姿勢角についても、同様に座標変換する。
　各加速度センサーの検出値Ｇx，Ｇy，Ｇz及び各角速度センサーの検出値Ωx，Ωy，Ωzは、データ補正手段１４により補正処理された後、記憶手段１９に記憶される。以下、計測もしくは算出された位置データ（Ｘ，Ｙ，Ｚ）、車両速度Ｖのデータ、加速度データＧX，ＧY，ＧZ、及び、角速度データΩX，ΩY，ΩZを計測データという。
　合成画像指定手段１５は、表示手段１７の表示画面１７Ｇに表示するデータの組み合わせを指定するもので、データの組み合わせとしては、車両走行状態計測手段１３で計測した計測データ、撮影手段１２で撮影した撮影データ、及び、Ｗｅｂ情報取得部１１ａで取得したＷｅｂ情報のデータのうちから、運転者の入力（選択）により選択された複数のデータが指定される。
　合成画像作成手段１６は、合成画像指定手段１５で選択された複数のデータを所定時間毎に合成した合成画像（動画データ）を作成して表示手段１７に送るとともに、所定時間毎の合成画像を走行記録データ作成手段１８に送る。
　表示手段１７は、合成画像作成手段１６で作成した合成画像を表示画面１７Ｇ上に動画として表示する。
　走行記録データ作成手段１８は、３軸加速度の各成分ＧX，ＧY，ＧZのいずれかが予め設定した閾値を超えたか否かを判定するとともに、各成分ＧX，ＧY，ＧZのいずれかが時刻ｔkに予め設定した閾値を超えた場合には、時刻ｔkに作成した車両位置画像を中心に、上記時刻ｔk前後の所定時間幅ΔＴk内の車両位置画像を作成し、これを走行記録データ（動画データ）として記憶手段１９に記憶する。
　記憶手段１９は、車両走行状態計測手段１３で計測した計測データ、撮影手段１２で撮影した撮影データ、及び、Ｗｅｂ情報取得部１１ａで取得したＷｅｂ情報のデータを保存するとともに、前記表示手段１７に表示する動画のデータのうち、走行記録データとなる合成画像を動画ファイルとして保存する。なお、動画データとして採用されない合成画像については、一定時間だけ記憶した後消去するか、もしくは、１～２分毎に１枚の画像のみを静止画ファイルとして残し、他の画像は消去する。
　本例では、車両走行状態監視装置１０を、図３に示すようなＧＰＳ１３１と３軸加速度センサー１３２と３軸角速度センサー１３３とを備えた車両走行状態計測手段１３が内蔵された携帯用端末機器１から構成した。
　本例の携帯用端末機器１には、ＣＰＵ（Central　Processing　Unit）２が搭載され、ＣＰＵ２は、ＲＯＭ（Read　Only　Memory）３、ＲＡＭ（Random　Access　Memory）４、入出力部５、カメラ６、無線通信機７、及び、車両走行状態計測手段１３がバス８を介して接続される。なお、携帯用端末機器がスマートフォンである場合には、操作画面が入出力部５となる。
　カメラ６が撮影手段１２に相当し、無線通信機７が車両走行状態監視装置１０の通信手段１１に相当し、入出力部５が合成画像指定手段１５及び表示手段１７に相当し、ＲＯＭ３及びＲＡＭ４が車両走行状態監視装置１０の記憶手段１９に相当する。ＲＯＭ３には、ＣＰＵ２が実行する、ＧＰＳ１３１、３軸加速度センサー１３２、３軸角速度センサー１３３、撮影手段１２の制御といった各種の制御プログラムや、データ補正手段１４、合成画像作成手段１６等の各手段を実行するための演算プログラムが格納され、ＲＡＭ４には測定データ、画像データ、Ｗｅｂ情報、及び、走行記録データが記憶される。ＣＰＵ２は、制御プログラムや演算プログラムをＲＡＭ４に展開して実行する。
　携帯用端末機器１は、図４（ａ），（ｂ）に示すように、ダッシュボード５３上に設けられた設置台５４に、図示しないカメラの撮影方向が車両５０の進行方向で、かつ、撮影される映像が横長の画面になるように取付けられる。
　携帯用端末機器１を設置台５４に取付けることにより、車両５０の進行方向の路面状況を安定して撮影できるとともに、車両走行状態計測手段１３の位置と車両の重心位置との関係をほぼ一定にすることができる。また、携帯用端末機器１を、運転席５１と助手席５２との中間よりもやや運転席５１側に設置すれば、運転者Ｄが表示画面である操作画面（入出力部５）を十分に視認できるとともに、運転者Ｄの視界を妨げることなく、車両前方の映像の撮影とを行うことができる。
　図５に示すように、携帯用端末機器１の操作画面（入出力部５）は、合成画像指定手段１５としても機能する。すなわち、携帯用端末機器１の操作画面（入出力部５）を操作して、操作画面に表示された計測項目の中から、操作画面に表示される計測項目を指定することができる。なお、計測項目を指定した後、携帯用端末機器１を設置台５４に取付けてもよいし、携帯用端末機器１を設置台５４に取付けた後に、計測項目を指定してもよい。
　車両走行データ解析装置４０は、例えば、パーソナルコンピュータから構成されて、車両が走行する路面状況を解析するもので、走行データ記憶手段４１と、走行データ解析手段４２と、解析データ表示手段４３とを備える。
　走行データ記憶手段４１は、複数の車両から送信されてくる走行記録データと、車両が走行する道路の地図情報とを記憶する。
　走行データ解析手段４２は、複数の走行記録データから、車両が走行する路面の凹凸の状況や勾配・傾斜などの路面状況を解析する。
　解析データ表示手段４３は、解析された路面状況のデータを表示する。
　次に、車両走行状態監視装置１０を用いた走行記録データの作成方法について、図６のフローチャートを参照して説明する。本例では、上下方向（Ｚ軸方向）の車両加速度ＧZが予め設定した閾値Ｇ0を超えた前後の車両位置画像（動画データ）を走行記録データとして保存する場合について説明する。
　まず、表示画面１７Ｇに表示する計測項目及び画像を指定する（ステップＳ１）。
　具体的には、前述したように、携帯用端末機器１の操作画面（入出力部５）を操作して、操作画面に表示された計測項目の中から、操作画面に表示される計測項目を指定する（図５参照）。
　計測項目としては、走行ルート、車両加速度、車両姿勢変化、路面状況、天気・気温・湿度などがある。走行ルートは、ＧＰＳ１３１で計測した車両位置データ及び車両速度データと、Ｗｅｂ情報取得部１１ａで取得した地図情報とを用いて作成され、画像として表示される。車両加速度及び車両姿勢変化は、それぞれ、３軸加速度センサー１３２及び３軸角速度センサー１３３で計測した車両加速度のデータ及び車両角速度のデータから求められ、計測データとして表示される。路面状況は、撮影手段１２で撮影した撮影データが画像（動画）として用いられる。天気・気温・湿度などは、Ｗｅｂ情報取得部１１ａで取得した気象情報が計測データとして表示される。
　本例では、走行ルート、車両加速度、路面状況、及び、気温を計測項目とした。
　次に、車両位置データ、車両速度データ、車両加速度データ、撮影データ、気象情報、及び、地図情報を収集する（ステップＳ２）。
　車両位置データ、車両速度データ、車両加速度データ、及び、撮影データは所定時間毎に収集される。気象情報と地図情報とは、所定の走行キロ数毎に行ってもよい。車両加速度データ、及び、撮影データを収集する所定時間としては、撮影手段１２からの映像信号の１フレーム分（例えば、１／３０秒）毎とすればよい。なお、車両加速度データについては、例えば、１／３０秒の平均値（ＲＭＳ平均値）を用いればよい。また、車両位置データと車両速度データの収集は、例えば、１秒毎であれば十分である。また、地図情報については、予め、記憶手段１９に記憶しておいたものを用いてもよい。
　次に、合成画像を作成し（ステップＳ３）、この作成された合成画像を表示画面１７Ｇに表示する（ステップＳ４）。
　図７は、表示画面１７Ｇに表示された合成画像の一例を示す図である。
　表示画面１７Ｇの上側には、車両速度（Speed）、車両位置（LAT；緯度，LNG；経度，ALT；高度）、時刻、気温、車両加速度（ＧX，ＧY，ＧZ）のデータが表示され、右側には、撮影手段１２で撮影された車両前方の映像が表示される。また、左側には、車両が走行している箇所の地図が表示される。地図上の丸印が車両の位置である。
　合成画像は所定時間（例えば、１／３０秒）毎に作成され、順次表示画面１７Ｇに表示されるとともに、記憶手段１９のバッファに一定時間分だけ一時保存される（ステップＳ５）。
　次に、車両上下加速度ＧZが予め設定した閾値Ｇ0を超えたか否かを判定する（ステップＳ６）。車両上下加速度ＧZが、時刻ｔkにおいて閾値Ｇ0を超えた場合には、データ収集を継続する（ステップＳ７）とともに、時刻ｔkからの経過時間ΔＴがΔＴk/２に達したか否かを判定し（ステップＳ８）、ΔＴ≧ΔＴk/２なら、バッファに一時保存されるデータの中から、時刻ｔk－ΔＴk/２から時刻ｔk＋ΔＴk/２までの間に作成した車両位置画像を取出し、例えば、「走行記録データ；ｔk凹凸」などのような動画ファイル名を付けて、記憶手段１９に保存する（ステップＳ９）。時刻ｔkからの経過時間ΔＴがΔＴk/２未満である場合には、ステップＳ７に戻ってデータ収集を継続する。
　動画ファイルの保存後には、計測終了の指令が出ているか否かを判定する（ステップＳ１０）。計測終了の指令が出ていない場合には、ステップＳ２に戻り、車両位置データ、車両速度データなどの情報収集を継続し、計測終了の指令が出ている場合には、情報収集を終了する。
　一方、車両上下加速度ＧZが閾値Ｇ0以下である場合も、合成画像は記憶手段１９のバッファに一時保存される。そして、時刻ｔkからの経過時間ΔＴが一定時間ΔＴpに達したか否かを判定し（ステップＳ１１）、一定時間Ｔpだけ経過した時点で、時刻ｔk＋ΔＴpにおいて作成した１枚の合成画像のみを、例えば、「走行記録データ；ｔk平滑」などのような静止画ファイル名を付けて、記憶手段１９に保存し、他の画像は消去する（ステップＳ１２）。静止画ファイルの保存後には、ステップＳ１０に進んで、計測終了の指令が出ているか否かを判定し、計測終了の指令が出ていない場合には、ステップＳ２に戻り、計測終了の指令が出ている場合には、情報収集を終了する。また、時刻ｔkからの経過時間ΔＴが一定時間ΔＴpに達していない場合には、ステップＳ２に戻ってデータ収集を継続する。
　図８は、表示画面１７Ｇに表示される合成画像と走行記録データとの関係を示す一例で、矢印は時間の流れを示す。
　合成画像は、同図の上の列に示すように、所定時間（例えば、１／３０秒）毎に作成され、順次表示画面１７Ｇに表示される動画である。
　これに対して、走行記録データは、静止画ファイルと動画ファイルとから構成される。
　例えば、車両上下加速度ＧZが閾値Ｇ0以下である状態が継続している場合には、走行記録データは、一定時間ΔＴp毎に記憶手段１９に保存される静止画ファイルから構成される。すなわち、車両上下加速度ＧZが閾値Ｇ0以下である場合には、走行記録データは、時刻ｔp，時刻ｔp＋ΔＴp，時刻ｔp＋２ΔＴp，……における静止画ファイルを時系列に並べたファイルになる。
　一方、時刻ｔkにおいて、車両上下加速度ＧZが閾値Ｇ0を超えた場合には、時刻ｔk－ΔＴk/２から時刻ｔk＋ΔＴk/２までの合成画像が全て動画ファイルとして記憶手段１９に保存される。
　このように、合成画像は、所定時間毎に作成されるが、走行記録データとして保存されるのは、一定時間ΔＴp毎に保存される静止画ファイルと、記録時間間隔がΔＴk（実際には３０秒程度）の複数の動画ファイルであり、他の合成画像は、バッファに一定時間分だけ一時保存された後消去される。したがって、動画ファイルを作成するごとに走行記録データをサーバー３０に転送する必要はない。
　ところで、図９（ａ）に示すように、車両がポットホール（アスファルト舗装路などに生じる小穴）を通過すると、車両加速度ＧX，ＧY，ＧZも、角加速度ΩX，ΩY，ΩZもともに増加するが、特に、車両上下加速度ＧZが大きく変化する。したがって、「走行記録データ；ｔk凹凸」なる動画ファイルを、記憶手段１９から呼び出して再生すれば、入力Ｇzがポットホールに起因するものか、路面の段差などに起因するものかを把握できる。なお、車両走行データ解析装置４０により、入力Ｇzの変化と撮影データとの解析を行えば、更に、詳しい路面状況を把握することができる。
　例えば、車両進行方向の撮影データから路面の凹凸や段差が小さいにもかかわらず、入力Ｇzの増大が連続して起こっている場合には、図９（ｂ）の符号Ｐに示すような、ピンチカットが起こっていることが予想される。ピンチカットＰは、タイヤ５５内部のカーカスコードが切れて、サイドウォール５６の一部が空気圧により盛り上がった状態になることで、走行上はあまり変化も無く、タイヤの空気も抜けないので気付かないことが多いが、この状態のまま走行を続けるとバーストする可能性があり、大変危険である。また、修理は不可能で、タイヤ交換が必要である。したがって、走行記録データからピンチカットＰに起因するパンクが生じることが予想される場合には、車両走行データ解析装置４０から携帯用端末機器１にパンク警告の情報を送信することで運転者にタイヤ交換を促すようにすれば、車両の安全性を向上させることができる。この場合、携帯用端末機器１に内蔵されているスピーカーを運転者への警告を発する警報装置として用いればよい。
　走行記録データは、サーバー３０に設けられた車両走行データ解析装置４０、もしくは、サーバー３０を介して車両走行状態監視装置１０と接続される車両走行データ解析装置４０に転送されデータ解析される。
　図１０は、車両走行データ解析装置４０の解析データ表示手段４３に表示された走行記録データの解析例を示す図で、車両走行状態監視装置１０から転送された合成画面である。同図の右上に解析結果が表示される。
　本例では、車両走行状態監視装置１０から転送された走行記録データを解析して、車両が走行した道路のポットホールの分布を求めた。右上の図に示すように、この道路では、同図の吹き出しＭに示す位置にポットホールが分布していることが分かる。
　なお、複数の車両を同一の道路で走行してポットホールの分布を求めれば、より正確に道路の路面状況を解析することができる。また、様々な道路で取得した走行記録データを解析すれば、例えば、同じ国道１号線でも、＊＊県ではポットホールが多いなど、道路によるポットホールの多寡も比較できる。
　このように、本実施の形態では、ＧＰＳ１３１と３軸加速度センサー１３２と３軸角速度センサー１３３とを備えた車両走行状態計測手段１３が内蔵された携帯用端末機器１に、車両走行状態計測手段１３で計測した計測データ、撮影手段１２で撮影した撮影データ、及び、Ｗｅｂ情報取得部１１ａで取得したＷｅｂ情報のデータのうちの、複数のデータを所定時間毎に合成した合成画像を作成する合成画像作成手段１６を設け、この合成画像を操作画面である表示画面１７Ｇに動画として表示するとともに、この動画のデータを当該車両の走行記録データとして保存する記憶手段１９に保存するようにしたので、車両の走行状態や路面状況を十分に把握することができる。
　また、路面から大きな入力があった場合に、車両の走行状態と路面の状況とを、定量的かつ視覚的に把握することができる。
　また、動画のデータを当該車両の走行記録データとして、前記車両を管理する管理センターのコンピュータに、サーバーを介して転送する走行記録データ転送手段を更に備えるように構成してもよい。
　この構成によれば、走行記録データを、サーバーを介して、前記車両を管理する管理センターのコンピュータに転送して、路面状況を考慮に入れた車両の走行状態を解析できるようにしたので、車両の走行状態と路面状況を更に精度よく把握することができる。
　また、記憶手段に代えて、動画のデータを当該車両の走行記録データとして、前記車両を管理する管理センターのコンピュータに、サーバーを介して転送する走行記録データ転送手段を備えるように構成した。
　このように、車両の走行記録データを、車両走行状態監視装置には記憶せずに、直接管理センターのコンピュータに送って、路面状況を考慮に入れた車両の走行状態を解析する構成としても、車両の走行状態やそのときの路面状況を十分に把握することができる。
　また、前記合成画像作成手段が、前記３軸加速度センサーにより計測した車両の前後方向加速度、横方向加速度、上下方向加速度のうちの少なくとも１つが、予め設定した閾値を超えたときに、前記閾値を超えた加速度データを含む加速度データと前記撮影手段で撮影した車両進行方向の撮影データと、前記Ｗｅｂ情報取得手段で取得した地図情報のデータ上、もしくは、予め前記記憶手段に記憶された地図情報のデータ上に、前記ＧＰＳで取得した当該車両の位置データが表示された画像データとを合成した合成画像を作成するように構成した。
　これにより、車両路面から大きな入力があった場合には、車両の走行状態と路面の状況とを、定量的かつ視覚的に把握することができるので、車両走行状態監視装置に、３軸加速度の各成分ＧX，ＧY，ＧZのそれぞれの閾値で起動するドライブレコーダの機能を持たせることができる。
　また、３軸加速度センサーやＧＰＳにより計測した他の成分のデータの閾値でドライブレコーダを起動させることも可能である。
　また、車両走行状態監視装置のＣＰＵの処理能力負荷及び処理遅れをリアルタイムでモニタリングしてフィードバックすることで、前記各センサーを同時に作動させる制御手段を備えるように構成した。
　このように、車両走行状態監視装置のＣＰＵの処理能力負荷及び処理遅れをリアルタイムでモニタリングすれば、処理能力に応じて、データ計測時のサンプリングレートの変更や撮影のフレーム変更ができるので、多数のセンサーを同時に作動させることができる。
　また、前記車両走行状態監視装置を、ＧＰＳと３軸加速度センサーと３軸角速度センサーとが内蔵された携帯用端末機器から構成するようにした。
　このように、ＧＰＳと３軸加速度センサーと３軸角速度センサーとが内蔵された携帯用端末機器を車両走行状態監視装置として使用すれば、装置を小型化できる。また、車両走行状態監視装置を携帯用端末機器とすれば、車両の運転席のダッシュボード上などに設置できるので、運転者の視界を妨げることなく、車両の走行状態の計測と車両前方の映像の撮影とを行うことができる。
　以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は前記実施の形態に記載の範囲には限定されない。前記実施の形態に、多様な変更または改良を加えることが可能であることが当業者にも明らかである。そのような変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲から明らかである。
　例えば、前記実施の形態では、上下方向の入力ＧZが大きい場合について説明したが、横方向の入力ＧYが大きい状態が多い場合には、入力ＧYと車両進行方向の撮影データとを同一同画面に表示するとともに、入力ＧYが閾値ＧY0を超えた場合に走行記憶データを作成すれば、道路の勾配・傾斜の状態についても把握することができる。
　また、３軸角速度の各成分ΩX，ΩY，ΩZから姿勢角（ロール角、ピッチ角、及び、ヨー角）を算出し、これら姿勢角の大きさ走行記録データ（動画データ）として、道路の状況を推定してもよい。
　また、前記実施の形態では、動画ファイルと静止画ファイルとを走行記録データとして記憶手段１９に保存したが、静止画ファイルを作成せず、計測データのみを保存してもよい。
　また、図６のフローチャートのステップＳ６で、車両上下加速度ＧZが予め設定した閾値Ｇ0以下の場合には、ステップＳ１１，Ｓ１２を省略して、直ちにステップＳ２に戻ってもよい。
　また、前記実施の形態では、計測項目としては、走行ルート、車両加速度、路面状況、及び、気温を計測項目としたが、これに限るものではなく、走行ルート、車両加速度、車両姿勢変化、路面状況、天気・気温・湿度の中から適宜選択すればよい。なお、計測項目として、路面状況に対応する撮影データについては、計測項目に入れておく必要があることはいうまでもない。
　ところで、計測データや演算処理が多い場合には、ＣＰＵの処理能力負荷が大きくなって処理遅れが生じる場合がある。車両走行状態監視装置１０を携帯用端末機器から構成した場合には、ＣＰＵ２の処理能力負荷及び処理遅れをリアルタイムでモニタリングしてフィードバックすることで、前記各センサーを同時に作動させる制御手段を設けることが好ましい。制御手段がＣＰＵ２の処理能力が低下したと判定した場合には、制御手段は、車両走行状態計測手段１３の計測サンプリングレートを落としたり、撮影手段１２のシャッタースピードを短くする（フレーム間隔を長くする）などして、ＣＰＵ２の処理能力負荷を低減させるようにすれば、多数のセンサーを同時に作動させることができる。
　なお、ＣＰＵの処理能力負荷及び処理遅れは、ＣＰＵの温度上昇を検出したり、あるいは、走行記録データの記録の処理時間の遅れを検出することで、モニタリングできる。
　１　携帯用端末機器、２　ＣＰＵ、３　ＲＯＭ、４　ＲＡＭ、
５　入出力部、６　カメラ、７　無線通信機、８　バス、
１０　車両走行状態監視装置、１１　通信手段、１２　撮影手段、
１３　車両走行状態計測手段、１３１　ＧＰＳ、
１３２　３軸加速度センサー、１３３　３軸角速度センサー、
１４　データ補正手段、１５　合成画像指定手段、
１６　合成画像作成手段、１７　表示手段、１７Ｇ　表示画面、
１８　走行記録データ作成手段、１９　記憶手段、
２０　インターネット、３０　サーバー、４０　車両走行データ解析装置、
４１　走行データ記憶手段、４２　走行データ解析手段、
４３　解析データ表示手段、１００　車両走行状態監視システム。
 

Claims (6)

  1. 　車両に搭載されて当該車両の走行状態を監視する装置であって、
    外部ネットワークを介してＷｅｂ情報を取得するＷｅｂ情報取得手段と、
    車両の外部または内部を撮影する撮影手段と、
    ＧＰＳと３軸加速度センサーと３軸角速度センサーとを備えた車両走行状態計測手段と、
    前記車両走行状態計測手段で計測した計測データ、前記撮影手段で撮影した撮影データ、及び、前記Ｗｅｂ情報取得手段で取得したＷｅｂ情報のデータのうちの、複数のデータを所定時間毎に合成した合成画像を作成する合成画像作成手段と、
    前記合成画像作成手段で合成した合成画像を動画として表示画面に表示する表示手段と、
    前記動画のデータを当該車両の走行記録データとして保存する記憶手段と、
    を備えることを特徴とする車両走行状態監視装置。
  2. 　前記走行記録データを、サーバーを介して、前記車両を管理する管理センターのコンピュータに転送する走行記録データ転送手段を更に備えることを特徴とする請求項１に記載の車両走行状態監視装置。
  3. 　車両に搭載されて当該車両の走行状態を監視する装置であって、
    外部ネットワークを介してＷｅｂ情報を取得するＷｅｂ情報取得手段と、
    車両の外部または内部を撮影する撮影手段と、
    ＧＰＳと３軸加速度センサーと３軸角速度センサーとを備えた車両走行状態計測手段と、
    前記車両走行状態計測手段で計測した計測データ、前記撮影手段で撮影した撮影データ、及び、前記Ｗｅｂ情報取得手段で取得したＷｅｂ情報のデータのうちの、複数のデータを所定時間毎に合成した合成画像を作成する合成画像作成手段と、
    前記合成画像作成手段で合成した合成画像を動画として表示画面に表示する表示手段と、
    前記動画のデータを当該車両の走行記録データとして、前記車両を管理する管理センターのコンピュータに、サーバーを介して転送する走行記録データ転送手段と、
    を備えることを特徴とする車両走行状態監視装置。
  4. 　前記合成画像作成手段は、
    前記３軸加速度センサーにより計測した車両の前後方向加速度、幅方向加速度、上下方向加速度のうちの少なくとも１つが、予め設定した閾値を超えたときに、
    前記閾値を超えた加速度データを含む加速度データと前記撮影手段で撮影した車両進行方向の撮影データと、前記Ｗｅｂ情報取得手段で取得した地図情報のデータ上、もしくは、予め前記記憶手段に記憶された地図情報のデータ上に、前記ＧＰＳで取得した当該車両の位置データが表示された画像データとを合成した合成画像を作成することを特徴とする請求項１～請求項３のいずれかに記載の車両走行状態監視装置。
  5. 　前記車両走行状態監視装置のＣＰＵの処理能力負荷及び処理遅れをリアルタイムでモニタリングしてフィードバックすることで、前記各センサーを同時に作動させる制御手段を備えることを特徴とする請求項１～請求項４のいずれかに記載の車両走行状態監視装置。
  6. 　前記車両走行状態監視装置が、ＧＰＳと３軸加速度センサーと３軸角速度センサーとが内蔵された携帯用端末機器から構成されていることを特徴とする請求項１～請求項５のいずれかに記載の車両走行状態監視装置。
PCT/JP2014/070887 2014-02-28 2014-08-07 車両走行状態監視装置 WO2015129072A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP14884103.4A EP3113120B1 (en) 2014-02-28 2014-08-07 Vehicle travel state monitoring device
CN201480076292.5A CN106030667B (zh) 2014-02-28 2014-08-07 车辆行驶状态监视装置
US15/121,811 US10107640B2 (en) 2014-02-28 2014-08-07 Vehicular travel condition monitoring apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014038248A JP5689993B1 (ja) 2014-02-28 2014-02-28 車両走行状態監視装置
JP2014-038248 2014-02-28

Publications (1)

Publication Number Publication Date
WO2015129072A1 true WO2015129072A1 (ja) 2015-09-03

Family

ID=52823325

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/070887 WO2015129072A1 (ja) 2014-02-28 2014-08-07 車両走行状態監視装置

Country Status (5)

Country Link
US (1) US10107640B2 (ja)
EP (1) EP3113120B1 (ja)
JP (1) JP5689993B1 (ja)
CN (1) CN106030667B (ja)
WO (1) WO2015129072A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018042922A1 (ja) * 2016-09-05 2018-03-08 日本電気株式会社 運転状況記録装置

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017107411A (ja) * 2015-12-10 2017-06-15 株式会社堀場製作所 ドライビングレコーダ、ドライビングレコーダ用プログラム、及び走行管理システム
US9934623B2 (en) * 2016-05-16 2018-04-03 Wi-Tronix Llc Real-time data acquisition and recording system
US11335381B1 (en) * 2016-06-29 2022-05-17 Mike Morgan Surface asset management mapping system
CN108241071A (zh) * 2016-12-23 2018-07-03 大陆汽车电子（连云港）有限公司 具有方向检测功能的速度传感器的测试系统和方法
KR102310379B1 (ko) 2017-06-09 2021-10-12 현대자동차주식회사 주행 정보 안내 장치 및 방법, 그리고 차량 시스템
TWI654106B (zh) * 2017-06-12 2019-03-21 勝捷光電股份有限公司 利用數位錄影方式以記錄行車資訊與產生汽車履歷之方法
CN108437997A (zh) * 2018-03-12 2018-08-24 北京汽车研究总院有限公司 一种驾驶信息分享方法、装置、车辆及网络服务器
CN109187042A (zh) * 2018-08-08 2019-01-11 同济大学 一种自动驾驶车辆爆胎工况行驶性能测试系统及测试方法
JP7249879B2 (ja) * 2018-10-05 2023-03-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理方法、及び、情報処理システム
US10832449B1 (en) 2018-11-30 2020-11-10 BlueOwl, LLC Vehicular telematic systems and methods for generating interactive animated guided user interfaces
US11003330B1 (en) * 2018-11-30 2021-05-11 BlueOwl, LLC Vehicular telematic systems and methods for generating interactive animated guided user interfaces
JP7172739B2 (ja) * 2019-03-01 2022-11-16 トヨタ自動車株式会社 指導システムおよび指導方法
US11132562B2 (en) * 2019-06-19 2021-09-28 Toyota Motor Engineering & Manufacturing North America, Inc. Camera system to detect unusual circumstances and activities while driving
JP2021010126A (ja) * 2019-07-02 2021-01-28 シャープ株式会社 情報処理装置、情報処理システム、制御方法、および制御プログラム
CN110751751A (zh) * 2019-10-09 2020-02-04 广州敏视数码科技有限公司 一种行车轨迹记录方法
CN111445669B (zh) * 2020-03-12 2022-04-05 杭州律橙电子科技有限公司 一种公交车的安全监测系统
CN111516692A (zh) * 2020-04-20 2020-08-11 重庆长安汽车股份有限公司 一种车辆在坑洼路面上行驶的控制系统及方法
KR102421519B1 (ko) * 2020-05-26 2022-07-15 엘지전자 주식회사 이동 로봇 시스템 및 이동 로봇 시스템의 경계 정보 생성 방법
CN112634488B (zh) * 2020-12-01 2022-10-14 广州橙行智动汽车科技有限公司 行程融合方法、装置以及车辆
CN112629530B (zh) * 2020-12-16 2022-01-07 星觅(上海)科技有限公司 一种车辆定位方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010224906A (ja) * 2009-03-24 2010-10-07 Nec Corp 携帯端末、並びにその制御方法及びプログラム
JP2011155552A (ja) * 2010-01-28 2011-08-11 Panasonic Corp 映像再生装置及び映像再生方法
JP2011239001A (ja) * 2010-04-30 2011-11-24 Techno Safety Co Ltd 画像編集装置、画像再生装置及び画像編集方法
JP2013140485A (ja) * 2012-01-04 2013-07-18 Yazaki Energy System Corp 車載情報記録装置およびデータ書き込み管理方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2521024B2 (ja) * 1993-04-20 1996-07-31 淡路フェリーボート株式会社 交通事故デ―タ記録装置及び交通事故再現システム
US6553308B1 (en) * 1999-04-29 2003-04-22 Donnelly Corporation Vehicle-based navigation system with smart map filtering, portable unit home-base registration and multiple navigation system preferential use
US7221287B2 (en) * 2002-03-05 2007-05-22 Triangle Software Llc Three-dimensional traffic report
JP2009032143A (ja) * 2007-07-30 2009-02-12 Seiko Epson Corp ドライブレコーダ、ドライブレコーダシステム、ドライブレコーダの制御方法およびプログラム
WO2010114619A1 (en) * 2009-04-03 2010-10-07 Certusview Technologies, Llc Methods, apparatus, and systems for acquiring and analyzing vehicle data and generating an electronic representation of vehicle operations
EP4195137A3 (en) * 2010-12-15 2023-09-13 Auto Telematics Ltd Method and system for logging vehicle behaviour
CN201937689U (zh) * 2010-12-20 2011-08-17 上海华勤通讯技术有限公司 行车状态记录手机
TW201228863A (en) 2011-01-04 2012-07-16 Aptos Technology Inc Vehicle recording apparatus
US9019126B2 (en) 2011-03-02 2015-04-28 Mobile Devices Ingenierie Traffic information system and method
JP5447488B2 (ja) 2011-10-13 2014-03-19 株式会社デンソー カーナビゲーションシステム
JP5628137B2 (ja) * 2011-11-15 2014-11-19 クラリオン株式会社 車載用環境認識装置
CN103310501B (zh) 2012-03-16 2015-11-25 比亚迪股份有限公司 一种汽车行驶记录装置
CN202650093U (zh) 2012-05-17 2013-01-02 石燕志 汽车用视频监控仪器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010224906A (ja) * 2009-03-24 2010-10-07 Nec Corp 携帯端末、並びにその制御方法及びプログラム
JP2011155552A (ja) * 2010-01-28 2011-08-11 Panasonic Corp 映像再生装置及び映像再生方法
JP2011239001A (ja) * 2010-04-30 2011-11-24 Techno Safety Co Ltd 画像編集装置、画像再生装置及び画像編集方法
JP2013140485A (ja) * 2012-01-04 2013-07-18 Yazaki Energy System Corp 車載情報記録装置およびデータ書き込み管理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3113120A4 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018042922A1 (ja) * 2016-09-05 2018-03-08 日本電気株式会社 運転状況記録装置

Also Published As

Publication number Publication date
EP3113120A1 (en) 2017-01-04
EP3113120A4 (en) 2017-03-22
CN106030667B (zh) 2018-08-07
JP2015162173A (ja) 2015-09-07
CN106030667A (zh) 2016-10-12
EP3113120B1 (en) 2020-07-22
US10107640B2 (en) 2018-10-23
JP5689993B1 (ja) 2015-03-25
US20170010122A1 (en) 2017-01-12

Similar Documents

Publication Publication Date Title
JP5689993B1 (ja) 車両走行状態監視装置
US20210043016A1 (en) Systems and methods for capturing and offloading different information based on event trigger type
US10445954B2 (en) Drive event capturing based on geolocation
US9604648B2 (en) Driver performance determination based on geolocation
US9589393B2 (en) Driver log generation
US10276212B2 (en) Marking stored video
JP6021309B2 (ja) 路面凹凸評価システム
US11587371B2 (en) Systems and methods for using on-board resources of individual vehicles in a fleet of vehicles as a distributed data center
EP2943884B1 (en) Server determined bandwidth saving in transmission of events
US20180362048A1 (en) Detection device, road surface information system, and vehicle
KR102609019B1 (ko) 택배차를 활용한 포트홀 실시간 탐지 방법
JP6451959B2 (ja) 運行管理システム
JP6142338B2 (ja) 運行管理システム
JP6057605B2 (ja) ドライブレコーダ
JP6058907B2 (ja) 車載記録装置
WO2020085223A1 (ja) 情報処理方法、情報処理装置、情報処理プログラム及び情報処理システム
JP2020098414A (ja) 運転行動分析システム
US11615654B1 (en) Signature use for efficient data transfer
US20220189221A1 (en) Information recording device, information recording method, and program for recording information

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14884103

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15121811

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

REEP Request for entry into the european phase

Ref document number: 2014884103

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014884103

Country of ref document: EP