WO2019193830A1 - 警告処理装置、警告処理方法およびプログラム - Google Patents

警告処理装置、警告処理方法およびプログラム Download PDF

Info

Publication number
WO2019193830A1
WO2019193830A1 PCT/JP2019/004122 JP2019004122W WO2019193830A1 WO 2019193830 A1 WO2019193830 A1 WO 2019193830A1 JP 2019004122 W JP2019004122 W JP 2019004122W WO 2019193830 A1 WO2019193830 A1 WO 2019193830A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
warning
person
road
distance
Prior art date
Application number
PCT/JP2019/004122
Other languages
English (en)
French (fr)
Inventor
田端　清史
Original Assignee
株式会社Ｊｖｃケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｊｖｃケンウッド filed Critical 株式会社Ｊｖｃケンウッド
Publication of WO2019193830A1 publication Critical patent/WO2019193830A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/02—Occupant safety arrangements or fittings, e.g. crash pads
    • B60R21/12—Occupant safety arrangements or fittings, e.g. crash pads which protect the occupants against personal attack from the inside or the outside of the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present invention relates to a warning processing device, a warning processing method, and a program.
  • a technology related to an imaging device that can record the situation before and after an accident that can be powerful evidence for accident handling of a vehicle collision accident together with time data, and can store evidence that can accurately determine accident handling is known.
  • Patent Document 1 A technology related to an imaging device that can record the situation before and after an accident that can be powerful evidence for accident handling of a vehicle collision accident together with time data, and can store evidence that can accurately determine accident handling.
  • photographing and recording are performed.
  • the present invention has been made in view of the above, and an object thereof is to perform an appropriate warning process when a trouble with an occupant of another vehicle is predicted.
  • a warning processing device includes a travel path information acquisition unit that acquires information indicating the type of road on which the vehicle is traveling, and the traveling direction of the vehicle.
  • the recognition processing unit for recognizing a person from the captured video by the person recognition processing, and the information indicating the type of the road on which the traveling road information acquisition unit has acquired are target roads on which pedestrians or bicycles are restricted.
  • the recognition processing unit recognizes that a person exists, if the distance between the vehicle and the recognized person is equal to or greater than a predetermined distance, it indicates that a person exists on the target road.
  • a warning processing unit that performs a first warning process and performs a second warning process at a higher level than the first warning process if the distance between the vehicle and the recognized person is less than a predetermined distance.
  • the warning processing method includes a road information acquisition step for acquiring information indicating the type of road on which the vehicle is traveling, and a recognition process for recognizing a person from a video obtained by photographing the traveling direction of the vehicle. And the information indicating the type of road that is being traveled acquired in the travel path information acquisition step indicates that the road is a target road in which pedestrians or bicycles are restricted, and there is a person in the recognition processing step. If the distance between the vehicle and the recognized person is equal to or greater than a predetermined distance, a first warning process is performed to indicate that a person exists on the target road, and the vehicle and the recognized person And a warning process step of performing a second warning process at a higher level than the first warning process.
  • the program according to the present invention includes a travel route information acquisition step for acquiring information indicating a type of road on which the vehicle is traveling, and a recognition processing step for recognizing a person by a person recognition process from an image obtained by capturing the traveling direction of the vehicle.
  • the information indicating the type of road that is being traveled acquired by the travel path information acquiring step indicates that the road is a target road in which pedestrians or bicycles are restricted, and a person is present by the recognition processing step.
  • a first warning process is performed to indicate that a person exists on the target road, and the vehicle and the recognized person If the distance is less than the predetermined distance, a warning processing step for performing a second warning process at a higher level than the first warning process is performed. It is executed by the over data.
  • an appropriate warning process when a trouble with an occupant of another vehicle is predicted, an appropriate warning process can be performed.
  • FIG. 1 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the first embodiment.
  • FIG. 2 is a schematic diagram illustrating an example of video data captured by the warning processing device according to the first embodiment.
  • FIG. 3 is a flowchart showing the flow of processing in the warning processing apparatus according to the first embodiment.
  • FIG. 4 is a flowchart showing a process flow in the warning processing apparatus according to the first embodiment.
  • FIG. 5 is a flowchart showing the flow of processing in the warning processing apparatus according to the first embodiment.
  • FIG. 6 is a block diagram illustrating a configuration example of a warning device including the warning processing device according to the second embodiment.
  • FIG. 7 is a flowchart showing the flow of processing in the warning processing apparatus according to the second embodiment.
  • FIG. 1 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the first embodiment.
  • FIG. 2 is a schematic diagram illustrating an example of video data captured by the warning
  • FIG. 8 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the third embodiment.
  • FIG. 9 is a flowchart showing the flow of processing in the warning processing apparatus according to the third embodiment.
  • FIG. 10 is a flowchart showing the flow of processing in the warning processing apparatus according to the fourth embodiment.
  • FIG. 11 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the fifth embodiment.
  • FIG. 12 is a schematic diagram illustrating an example of video data captured by the warning processing device according to the fifth embodiment.
  • FIG. 13 is a flowchart showing the flow of processing in the warning processing apparatus according to the fifth embodiment.
  • FIG. 1 is a block diagram illustrating a configuration example of a warning processing apparatus having a warning processing apparatus according to the first embodiment.
  • the warning device 1 performs an appropriate warning process when a trouble with a passenger of another vehicle is predicted.
  • the warning device 1 may be a portable device that can be used in the vehicle in addition to the device mounted on the vehicle.
  • the warning device 1 includes a camera 20, a display unit 30, a speaker 40, a recording device 50, a communication device 60, a recognition dictionary storage unit 70, and a warning processing device 80.
  • the camera 20 is a front video camera.
  • the camera 20 is disposed in front of the vehicle.
  • the camera 20 always shoots the periphery around the front of the vehicle from when the engine starts to when it stops.
  • the camera 20 outputs the captured video data to the person recognition unit 841 of the recognition processing unit 84 of the warning processing device 80.
  • the video data is, for example, a moving image composed of images of 30 frames per second.
  • the display unit 30 is, for example, a display device shared with other systems including a navigation device.
  • the display unit 30 displays a warning display when a trouble with an occupant of another vehicle is predicted.
  • the display unit 30 can take various forms as long as the warning display can be confirmed.
  • an electronic room mirror can be used or a function of an instrument panel can be used.
  • the display unit 30 is a display including, for example, a liquid crystal display (LCD: Liquid Crystal Display) or an organic EL (Organic Electro-Luminescence) display.
  • the display unit 30 is disposed at a position that is easily visible to the driver.
  • the display unit 30 is arranged on a dashboard, an instrument panel, a center console, etc. in front of the driver of the vehicle.
  • the display unit 30 displays a warning display based on the video signal output from the warning processing unit 85 of the warning processing device 80.
  • the speaker 40 is, for example, an audio output device shared with other systems including a navigation device.
  • the speaker 40 outputs a warning sound when a trouble with an occupant of another vehicle is predicted.
  • the speaker 40 outputs a warning sound based on the sound signal output from the warning processing unit 85 of the warning processing device 80.
  • the recording device 50 is used for temporary storage of data in the warning device 1.
  • the recording device 50 is, for example, a semiconductor memory device such as a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory (Flash Memory), or a recording device such as a hard disk or an optical disk.
  • a semiconductor memory device such as a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory (Flash Memory), or a recording device such as a hard disk or an optical disk.
  • an external recording device that is wirelessly connected via a communication device (not shown) may be used.
  • the recording device 50 stores video data captured by the camera 20.
  • the recognition dictionary storage unit 70 is, for example, a semiconductor memory device such as a RAM, a ROM, or a flash memory, or a storage device such as a hard disk, an optical disk, or an external storage device via a network.
  • the recognition dictionary storage unit 70 includes a person recognition dictionary 71.
  • the person recognition dictionary 71 is a dictionary in which various shapes and configurations of a person are machine-learned in order to recognize a person from video data.
  • the warning processing device 80 performs warning processing when a trouble with a passenger of another vehicle is predicted to occur.
  • the warning processing device 80 is an arithmetic processing device (control device) configured with, for example, a CPU (Central Processing Unit).
  • the warning processing device 80 loads a program stored in the recording device 50 into the memory and executes instructions included in the program.
  • the warning processing device 80 includes a travel route information acquisition unit 81, a recognition processing unit 84, a warning processing unit 85, a recording processing unit 86, and a communication processing unit 87.
  • the warning processing device 80 includes an internal memory (not shown), and the internal memory is used for temporary storage of data in the warning processing device 80.
  • the travel path information acquisition unit 81 acquires travel path information, which is information indicating the type of travel path on which the vehicle is traveling, based on navigation information or map information from a navigation device, for example.
  • the travel path information acquisition unit 81 acquires travel path information, which is information indicating the type of road on which the vehicle is traveling, based on navigation information from the navigation device.
  • the travel path information acquisition unit 81 outputs the acquired travel path information to the warning processing unit 85.
  • the types of roads are, for example, highways including highway automobile national roads and automobile exclusive roads, and general roads including general national roads, prefectural roads, and municipal roads.
  • the recognition processing unit 84 performs recognition processing on an image obtained by photographing the traveling direction of the vehicle, and recognizes the object being photographed.
  • the recognition processing unit 84 includes a person recognition unit 841.
  • the person recognition unit 841 recognizes a person through a person recognition process from an image obtained by photographing the traveling direction of the vehicle.
  • the person recognition unit 841 recognizes a person by performing a person recognition process on the video captured by the camera 20 using the person recognition dictionary 71 stored in the recognition dictionary storage unit 70.
  • the person recognition process may be a known method and is not limited.
  • the person recognition unit 841 outputs the recognition result to the warning processing unit 85.
  • the person recognizing unit 841 recognizes the person, the length d1 of the person in the height direction in the video, the person's grounding position in the video, and the distance d2 between the person's grounding position in the video and the lower end of the video. And include it in the recognition result.
  • the length d1 of the person in the video in the height direction is the length in the vertical direction of the recognition range that is the range in which the person is recognized in the video, in other words, the range surrounding the outline of the person.
  • the contact position of the person in the video is the position where the foot of the person is in contact with the road surface in the video.
  • the ground contact position may be the position of a person's shoe sole in the video.
  • the ground contact position may be a position on the lower side of the recognition range.
  • the distance d2 between the contact position of the person in the image and the lower end of the image is the distance from the position where the person's foot is in contact with the road surface to the lower end of the image.
  • distance d2 is good also as a distance from the position of a person's shoe sole to the lower end part of a picture in a picture.
  • the distance d2 may be a distance from the position of the lower side of the recognition range to the lower end of the video.
  • FIG. 2 is a schematic diagram illustrating an example of video data captured by the warning processing device according to the first embodiment.
  • the image 100 captured by the camera 20 includes a person image 110 of a person walking toward the vehicle.
  • the person recognition unit 841 recognizes the person video 110 from the recognition range 111 when performing the person recognition process on the video 100.
  • the recognition range 111 is a rectangular range surrounding the outline of a person.
  • the lower side of the recognition range 111 is a person's ground contact position 110a.
  • the warning processing unit 85 indicates that the road information including the information on the type of the road acquired by the road information acquisition unit 81 is a target road in which the passage of pedestrians or bicycles is restricted.
  • a first warning process is performed to indicate that a person exists on the target road. If the distance from the person recognized as the vehicle is less than the predetermined distance, the second warning process at a higher level than the first warning process is performed.
  • the second warning process may include a first warning process.
  • the warning processing unit 85 can be controlled to output a warning from at least one of the display unit 30 and the speaker 40.
  • the warning processing unit 85 can control the recording processing unit 86.
  • the warning processing unit 85 can control the communication processing unit 87.
  • the target road is a road where a person does not normally enter, in other words, a road where a person is not recognized by the person recognition unit 841 of the recognition processing unit 84.
  • the target road is an expressway or a road that is prohibited from passing pedestrians and light vehicles among general roads (hereinafter referred to as “automobile road”).
  • automobile road an expressway or a road that is prohibited from passing pedestrians and light vehicles among general roads
  • facilities arranged on an expressway or an automobile exclusive road such as a resting facility including a parking area and a service area, may be excluded.
  • the distance from the person recognized as the vehicle can be calculated from the distance d2 acquired by the person recognition unit 841 of the recognition processing unit 84. More specifically, the distance from the vehicle to the position on the road surface corresponding to the lower end of the video can be calculated according to the shooting conditions including the angle of view and the magnification of the camera 20. The position from the position on the road surface corresponding to the lower end of the video to the person can be calculated from the distance d2. In this way, the distance from the person recognized as a vehicle can be calculated.
  • Predetermined distance is a measure for the vehicle occupant to lock the vehicle, close the window, or ensure safety when a person approaching the vehicle hits the vehicle or yells at the vehicle occupant The distance that can be taken.
  • the predetermined distance may be about 10 m from the front end of the vehicle, or about 12 m from the driver's seat of the vehicle.
  • the first warning process is a process for giving a warning indicating that a person is present on the expressway or the automobile exclusive road.
  • the first warning process is a warning notification process that warns the driver that there is a person on a road where the person cannot enter normally.
  • the first warning process may be changed between the expressway and the automobile exclusive road.
  • the first warning process includes a warning process for the driver, a storage process for storing video captured by the recording processing unit 86 in the recording device 50, and a road management by the communication processing unit 87.
  • Notification processing for causing a person to report For example, on an automobile-only road, the first warning process may be only a warning notification process for the driver.
  • the second warning process has a higher warning level than the first warning process.
  • the second warning process is performed not only when a person is present on the expressway or automobile road, but also when a trouble with the person is predicted to occur.
  • the second warning processing may include notification processing to a third party or emergency notification processing by the communication processing unit 87.
  • the second warning process may be changed between the expressway and the automobile exclusive road.
  • the second warning process may be a reporting process to the police by the communication processing unit 87.
  • the second warning process may be a storage process for storing the video captured by the recording processing unit 86 in the recording device 50.
  • the second warning process may include a first warning process.
  • the recording processing unit 86 stores the captured video data in the recording device 50 based on the control signal output from the warning processing unit 85.
  • the recording processing unit 86 may store, in the recording device 50, video data from when the person recognition unit 841 recognizes a person among the captured video data.
  • the recording processing unit 86 may store the video data in the recording device 50 starting from a predetermined time before the person recognition unit 841 recognizes the person in the captured video data.
  • the communication processing unit 87 makes a report to the road management company via the communication device 60 based on the control signal output from the warning processing unit 85.
  • the communication processing unit 87 makes an emergency call to the police through the communication device 60 based on the control signal output from the warning processing unit 85.
  • the communication processing unit 87 provides the road management company or the police with the information that the person is recognized, the time when the person is recognized, and the position information corresponding to the time when the person is recognized as provision information.
  • FIG. 3 is a flowchart showing the flow of processing in the warning processing apparatus according to the first embodiment.
  • FIG. 4 is a flowchart showing a process flow in the warning processing apparatus according to the first embodiment.
  • FIG. 5 is a flowchart showing the flow of processing in the warning processing apparatus according to the first embodiment.
  • the camera 20 captures the front of the vehicle.
  • the travel path information acquisition unit 81 acquires travel path information including travel path type information indicating the type of travel path on which the vehicle is traveling.
  • the person recognition unit 841 of the recognition processing unit 84 recognizes a person from the video data captured by the camera 20 through a person recognition process.
  • the traveling road is a highway.
  • the warning processing device 80 determines whether the traveling road is an expressway (step S101). If the travel route type is a highway based on the travel route information acquired by the travel route information acquisition unit 81 (Yes in step S101), the warning processing device 80 proceeds to step S102. If the travel route type is not a highway based on the travel route information acquired by the travel route information acquisition unit 81 (No in step S101), the warning processing device 80 proceeds to step S103.
  • step S101 When it is determined that the traveling road is an expressway (Yes in step S101), the warning processing device 80 performs a first process (step S102). The warning processing device 80 proceeds to step S104.
  • step S101 When it is determined that the traveling road is not a highway (No in step S101), the warning processing device 80 performs the second process (step S103). The warning processing device 80 proceeds to step S104.
  • the warning processing device 80 determines whether there is an end trigger (step S104).
  • the end trigger is a trigger that stops the warning processing by the warning processing unit 85. For example, when the operation of the vehicle is ended, an end trigger is generated.
  • the end trigger may be a combination of engine off, gears put into parking, and side brakes operated.
  • step S104 If the warning processing device 80 determines that there is an end trigger (Yes in step S104), the warning processing device 80 ends the process. If the warning processing device 80 determines that there is no termination trigger (No in step S104), the warning processing device 80 proceeds to step S105.
  • the warning processing device 80 determines whether there is a change in the travel route type (step S105). More specifically, when there is a change in the travel route type of the travel route information acquired by the travel route information acquisition unit 81 (Yes in step S105), the warning processing device 80 returns to step S101 and continues the process. If there is no change in the travel route type of the travel route information acquired by the travel route information acquisition unit 81 (No in step S105), the warning processing device 80 returns to step S102 and continues the process.
  • step S102 The first process is executed when it is determined that the traveling road is an expressway (Yes in step S101).
  • the warning processing device 80 determines whether a person has been recognized (step S111). More specifically, the warning processing device 80 proceeds to step S112 when the person recognition unit 841 of the recognition processing unit 84 recognizes a person through a person recognition process from an image obtained by photographing the traveling direction of the vehicle (Yes in step S111). . If the person recognition unit 841 of the recognition processing unit 84 does not recognize the person through the person recognition process from the video obtained by capturing the traveling direction of the vehicle (No in step S111), the warning processing device 80 ends the process.
  • the warning processing device 80 determines whether the distance to the recognized person is less than a predetermined distance (step S112). More specifically, when the distance from the person recognized as the vehicle is less than a predetermined value based on the recognition result of the person recognition unit 841 of the recognition processing unit 84 (Yes in Step S112), the warning processing device 80 proceeds to Step S114. move on. If the distance from the person recognized as the vehicle is not less than the predetermined distance based on the recognition result of the person recognition unit 841 of the recognition processing unit 84 (No in step S112), the warning processing device 80 proceeds to step S113.
  • the warning processing device 80 causes the warning processing unit 85 to execute the first warning processing. More specifically, the warning processing device 80 is a warning processing for the driver, which is the first warning processing, a storage processing for storing the video captured by the recording processing unit 86 in the recording device 50, and a road processing by the communication processing unit 87. A notification process to notify the administrator is executed (step S113). In such a case, it is highly probable that the person has accidentally entered the expressway or a person who has come from a stopped vehicle that has stopped on the shoulder, and the possibility of taking action on the vehicle is low. Is done. The warning processing device 80 ends the process.
  • the warning processing device 80 causes the warning processing unit 85 to execute the first warning process and the second warning process. More specifically, the warning processing device 80 is a warning processing for the driver, which is the first warning processing, a storage processing for storing the video captured by the recording processing unit 86 in the recording device 50, and a road processing by the communication processing unit 87. In addition to the reporting process for reporting to the administrator, a reporting process to the police by the communication processing unit 87 is executed as a second warning process (step S114). In such a case, it is estimated that the recognized person is highly likely to take action on the vehicle. The warning processing device 80 ends the process.
  • step S103 The second process is executed when it is determined that the traveling road is not a highway (No in step S101).
  • the warning processing device 80 determines whether or not a person has been recognized, similarly to step S111 (step S121). If the warning processing device 80 recognizes a person (Yes in step S121), the warning processing device 80 proceeds to step S122. If the warning processing device 80 does not recognize a person (No in step S121), the warning processing device 80 ends the processing.
  • the warning processing device 80 When the person is recognized (Yes in step S121), the warning processing device 80 performs warning notification processing for warning that the person is present to the driver by the warning processing unit 85 (step S122).
  • the warning notification process for the driver which is the first warning process
  • the video imaged by the recording processing unit 86 are recorded on the recording device 50.
  • the storage process to be stored in is executed. Furthermore, when the detected person has a distance from the vehicle that is less than the predetermined distance, a notification process to the police by the communication processing unit 87 is executed as a second warning process.
  • the warning notification process for the driver which is the first warning process
  • the storage process for storing the video captured by the recording processing unit 86 in the recording device 50 can be executed.
  • the communication processing unit 87 can execute a notification process to the police as a second warning process.
  • an appropriate warning process can be performed. Furthermore, according to the present embodiment, when a person close to the vehicle is recognized on a road where no person normally enters and a trouble with a passenger of another vehicle is predicted to occur, Higher level warning processing, including emergency notification processing or emergency notification processing.
  • FIG. 6 is a block diagram illustrating a configuration example of a warning device including the warning processing device according to the second embodiment.
  • FIG. 7 is a flowchart showing the flow of processing in the warning processing apparatus according to the second embodiment.
  • the basic configuration of the warning device 1A is the same as that of the warning device 1 of the first embodiment. In the following description, the same components as those of the warning device 1 are denoted by the same reference numerals or corresponding reference numerals, and detailed description thereof is omitted.
  • the warning device 1A is different from the first embodiment in that the warning processing device 80A has a vehicle information acquisition unit 83A and the processing in the warning processing unit 85A.
  • the vehicle information acquisition unit 83A acquires vehicle information indicating a vehicle state that can determine whether the vehicle speed or the vehicle is stopped from a CAN (Controller Area Network) or various sensors that sense the vehicle state. To do.
  • the vehicle information acquisition unit 83A acquires at least one of vehicle speed, gear operation information, and brake operation information acquired from CAN, various sensors, or the like as vehicle information.
  • the vehicle information acquisition unit 83A outputs the acquired vehicle information to the warning processing unit 85A.
  • the warning processing unit 85A When the warning processing unit 85A indicates that the traveling speed of the vehicle is less than the predetermined speed or is stopped based on the vehicle information acquired by the vehicle information acquisition unit 83A, the distance from the person recognized as the vehicle is predetermined. If it is less than the distance, the second warning process is performed.
  • the situation is abnormal when the road is a restricted road where pedestrians or bicycles are restricted, the running speed of the vehicle is less than or equal to the predetermined speed, and the distance from the person recognized as the vehicle is less than the predetermined distance. .
  • the second warning process at a higher level than the first warning process is performed.
  • the predetermined speed is a speed at which it can be determined that the vehicle is about to stop.
  • the predetermined speed is a speed at which the vehicle is traveling slowly.
  • the predetermined speed is, for example, about 10 km / h.
  • Steps S221 and S223 through S225 are the same as steps S111 and S112 through S114 in the flowchart shown in FIG.
  • the warning processing device 80 determines whether the vehicle is below a predetermined speed or stopped (step S222). When the warning processing device 80 indicates that the traveling speed of the vehicle is less than the predetermined speed or is stopped based on the vehicle information acquired by the vehicle information acquisition unit 83A (Yes in step S222), the warning processing device 80 proceeds to step S223. . If the warning processing device 80 does not indicate that the traveling speed of the vehicle is less than the predetermined speed or is stopped based on the vehicle information acquired by the vehicle information acquisition unit 83A (No in step S222), the warning processing device 80 proceeds to step S224. .
  • the second warning process is performed.
  • the report processing to the police by the communication processing unit 87 is executed. Even if a person is recognized on a road where no person normally enters, if the vehicle is at a predetermined speed or more, the first warning process is executed.
  • the person is recognized on a road where the person does not normally enter, the vehicle is less than a predetermined speed or stopped, and the distance from the recognized person is short.
  • higher level warning processing can be performed, including notification processing to a third party or emergency notification processing.
  • only the first warning process can be executed if the vehicle is at a predetermined speed or higher. Thereby, this embodiment can suppress performing a warning process of a high level carelessly.
  • FIG. 8 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the third embodiment.
  • FIG. 9 is a flowchart showing the flow of processing in the warning processing apparatus according to the third embodiment.
  • the warning device 1B is different from the second embodiment in that the warning processing device 80B has a traffic information acquisition unit 82B and the processing in the warning processing unit 85B.
  • the traffic information acquisition unit 82B acquires traffic information around the vehicle from a navigation device or the like.
  • the traffic information acquisition unit 82B outputs the acquired traffic information to the warning processing unit 85B.
  • the warning processing unit 85B does not acquire information indicating that the traffic information acquired by the traffic information acquisition unit 82B indicates traffic jam, and the traveling speed of the vehicle acquired by the vehicle information acquisition unit 83B is less than a predetermined speed or is stopped. If the distance from the person recognized as a vehicle is less than the predetermined distance, the second warning process is performed. If the surroundings of the vehicle are not congested, it is an abnormal situation that a person is recognized, so that it is predicted that a trouble with a passenger of another vehicle will occur.
  • Steps S231, S232, and S234 to S236 are the same as steps S221, S222, and S223 to S225 of the flowchart shown in FIG.
  • Step S233 determines whether there is a traffic jam. If the traffic information acquired by the traffic information acquisition unit 82B indicates that there is a traffic jam around the vehicle (Yes in step S233), the warning processing device 80 proceeds to step S235. If the traffic information acquired by the traffic information acquisition unit 82B does not indicate that the surroundings of the vehicle are congested (No in step S233), the warning processing device 80 proceeds to step S234.
  • a person is recognized on a road where the surroundings of the vehicle are not congested and a person cannot normally enter, and the vehicle is below a predetermined speed or stopped, and
  • a notification process to the police by the communication processing unit 87 is executed as the second warning process.
  • the first warning process is executed.
  • the present embodiment recognizes that a person is recognized on a road where the surroundings of the vehicle are not congested and a person cannot normally enter, and the vehicle is below a predetermined speed or stopped.
  • a higher level warning process including a notification process to a third party or an emergency call process can be performed.
  • only the first warning process can be executed if the surroundings of the vehicle are congested. Thereby, this embodiment can suppress performing a warning process of a high level carelessly.
  • FIG. 10 is a flowchart showing the flow of processing in the warning processing apparatus according to the fourth embodiment.
  • the warning device 1A differs from the second embodiment in the processing in the warning processing unit 85A.
  • the warning processing unit 85A recognizes that the vehicle information is acquired when the vehicle information acquired by the vehicle information acquisition unit 83A indicates that the vehicle door is not opened after the traveling speed of the vehicle is less than the predetermined speed or has stopped. If the distance to the person who has performed is less than the predetermined distance, the second warning process is performed. If the vehicle door is not open, the recognized person is a person other than the vehicle occupant including the occupant of the other vehicle.
  • Steps S241, S242, and S244 to S246 are the same as steps S221, S222, and S223 to S225 in the flowchart shown in FIG.
  • Step S243 the warning processing device 80 determines whether the door has been opened. If the vehicle information acquired by the vehicle information acquisition unit 83A indicates that the vehicle door has been opened (Yes in step S243), the warning processing device 80 proceeds to step S245. If the vehicle information acquired by the vehicle information acquisition unit 83A does not indicate that the vehicle door has been opened (No in step S243), the warning processing device 80 proceeds to step S244.
  • a person other than a vehicle occupant is recognized on a road where no person normally enters, and the vehicle is less than a predetermined speed or stopped,
  • higher-level warning processing including notification processing to a third party or emergency notification processing can be performed.
  • only the first warning process can be executed if the vehicle door is opened. Thereby, this embodiment can suppress performing a warning process of a high level carelessly.
  • FIG. 11 is a block diagram illustrating a configuration example of a warning device including a warning processing device according to the fifth embodiment.
  • FIG. 12 is a schematic diagram illustrating an example of video data captured by the warning processing device according to the fifth embodiment.
  • FIG. 13 is a flowchart showing the flow of processing in the warning processing apparatus according to the fifth embodiment.
  • the warning device 1C is different from the second embodiment in that the recognition dictionary storage unit 70C has a vehicle recognition dictionary 72C, the recognition processing unit 84C has a vehicle recognition unit 842C, and the processing in the warning processing unit 85C.
  • the vehicle recognition dictionary 72C is a dictionary in which the shape and configuration of various vehicles such as a four-wheeled vehicle and a two-wheeled vehicle are machine-learned in order to recognize the vehicle from the video data.
  • the vehicle recognizing unit 842C recognizes another vehicle by a vehicle recognition process from an image obtained by photographing the traveling direction of the vehicle.
  • the vehicle recognition unit 842C performs vehicle recognition processing on the video captured by the camera 20 using the vehicle recognition dictionary 72C stored in the recognition dictionary storage unit 70 to recognize other vehicles.
  • the vehicle recognition process may be a known method and is not limited.
  • the vehicle recognition unit 842C outputs the recognition result to the warning processing unit 85C.
  • the vehicle recognition unit 842C recognizes another vehicle, and also includes the length in the height direction of the other vehicle in the image, the contact position of the other vehicle in the image, the contact position of the other vehicle in the image, and the lower end of the image. Acquire at least one of the distance and include it in the recognition result.
  • the vehicle recognition process will be described with reference to FIG.
  • the image 100 captured by the camera 20 includes a person image 110 of a person walking toward the vehicle and an other vehicle image 120 of another vehicle stopped near the person.
  • the vehicle recognition unit 842C recognizes the vehicle video 120 from the vehicle recognition range 121.
  • the vehicle recognition range 121 is a rectangular range surrounding the outer shape of the vehicle.
  • the warning processing unit 85C indicates that the travel speed of the vehicle acquired by the vehicle information acquisition unit 83C is less than the predetermined speed or is stopped, there is another vehicle below the first predetermined distance in the traveling direction of the vehicle. If the distance from the person recognized as the vehicle is less than the second predetermined distance, the second warning process is performed.
  • the distance from the other vehicle recognized as the vehicle is any of the length in the height direction of the other vehicle in the image, the grounding position of the other vehicle in the image, and the distance between the grounding position of the other vehicle in the image and the lower end of the image. Therefore, it can be calculated in the same manner as the distance from the person recognized as the vehicle in the first embodiment.
  • the first predetermined distance is, for example, a distance that is significantly shorter than the inter-vehicle distance that is considered safe as the inter-vehicle distance on an expressway.
  • the first predetermined distance may be about 10 m from the front end of the vehicle to the rear end of the other vehicle, or about 12 m from the vehicle seat to the rear end of the other vehicle.
  • the second predetermined distance is the same as the predetermined distance in the first embodiment.
  • steps S251, S252, and S254 to S256 are the same as those in steps S221, S222, and S223 to S225 of the flowchart shown in FIG.
  • the warning processing device 80 determines whether another vehicle exists below the first predetermined distance in the traveling direction (Ste S253). If the other vehicle recognized by the vehicle recognition unit 842C is located less than the first predetermined distance in the traveling direction (Yes in step S253), the warning processing device 80 proceeds to step S254. If the other vehicle recognized by the vehicle recognition unit 842C is not located less than the first predetermined distance in the traveling direction (No in step S253), the warning processing device 80 proceeds to step S255.
  • the vehicle on a road where a person does not normally enter, the vehicle is less than a predetermined speed or stopped, another vehicle is detected at a close distance, and the person is at a close distance.
  • higher level warning processing including notification processing to a third party or emergency notification processing.
  • warning device 1 has been described so far, but it may be implemented in various different forms other than the above-described embodiment.
  • Each component of the illustrated warning device 1 is functionally conceptual and does not necessarily have to be physically configured as illustrated. That is, the specific form of each device is not limited to the one shown in the figure, and all or a part of them is functionally or physically distributed or integrated in arbitrary units according to the processing load or usage status of each device. May be.
  • the configuration of the warning device 1 is realized by, for example, a program loaded in a memory as software.
  • the above embodiment has been described as a functional block realized by cooperation of these hardware or software. That is, these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.
  • a flash or a red LED may be lit when detecting a person and executing a storage process in which the recording apparatus 50 stores an image captured by the recording processing unit 86. Accordingly, an effect of suppressing occurrence of a trouble by notifying a person who is nearby or approaching that the warning process is being executed by the vehicle is expected.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

車両が走行中の道路の種類を示す情報を取得する走行路情報取得部８１と、車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理部８４と、走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、認識処理部８４が人物が存在することを認識した場合、車両と認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、車両と認識した人物との距離が所定距離未満であれば、第一警告処理より高いレベルの第二警告処理を行う警告処理部８５とを備える。

Description

警告処理装置、警告処理方法およびプログラム
　本発明は、警告処理装置、警告処理方法およびプログラムに関する。
　車両の衝突事故の事故処理に有力な証拠となり得る事故前後の状況を時刻データと共に撮影記録することができ、事故処理を正確に判定し得る証拠を保存することができる撮影装置に関する技術が知られている（例えば、特許文献１参照。）。この技術では、加速度センサで検出した加速度に基づいて、衝突事故が発生したと判断すると、撮影と記録を行う。
特開２０１５－１４９６９７号公報
　例えば、高速道路上において、煽られたり、または、前方に割り込まれて急停車させられたりした上で、他車両の乗員とトラブルになることがある。そこで、他車両の乗員とのトラブルの発生が予測されるとき、警告を発したり、証拠となり得る映像を記録したりすることが望まれている。ところが、特許文献１に記載の技術のように、衝撃を検出すると、衝撃発生時の映像を記録する方法では、煽られたり、または、前方に割り込んで急停車させられたりした場合、車両が事故に相当する衝撃を受けないので、映像が自動で記録されない。
　本発明は、上記に鑑みてなされたものであって、他車両の乗員とのトラブルの発生が予測されるとき、適切な警告処理を行うことを目的とする。
　上述した課題を解決し、目的を達成するために、本発明に係る警告処理装置は、車両が走行中の道路の種類を示す情報を取得する走行路情報取得部と、前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理部と、前記走行路情報取得部が取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理部が人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理部と、を備えることを特徴とする。
　本発明に係る警告処理方法は、車両が走行中の道路の種類を示す情報を取得する走行路情報取得ステップと、前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理ステップと、前記走行路情報取得ステップによって取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理ステップによって人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理ステップと、を含む。
　本発明に係るプログラムは、車両が走行中の道路の種類を示す情報を取得する走行路情報取得ステップと、前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理ステップと、前記走行路情報取得ステップによって取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理ステップによって人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理ステップと、を警告処理装置として動作するコンピュータに実行させる。
　本発明によれば、他車両の乗員とのトラブルの発生が予測されるとき、適切な警告処理を行うことができるという効果を奏する。
図１は、第一実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。 図２は、第一実施形態に係る警告処理装置が撮影した映像データの一例を説明する概略図である。 図３は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図４は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図５は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図６は、第二実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。 図７は、第二実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図８は、第三実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。 図９は、第三実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図１０は、第四実施形態に係る警告処理装置における処理の流れを示すフローチャートである。 図１１は、第五実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。 図１２は、第五実施形態に係る警告処理装置が撮影した映像データの一例を説明する概略図である。 図１３は、第五実施形態に係る警告処理装置における処理の流れを示すフローチャートである。
　以下に添付図面を参照して、本発明に係る警告処理装置、警告処理方法およびプログラムの実施形態を詳細に説明する。なお、以下の実施形態により本発明が限定されるものではない。
［第一実施形態］
　図１は、第一実施形態に係る警告処理装置を有する警告処理装置の構成例を示すブロック図である。警告装置１は、他車両の乗員とのトラブルの発生が予測されるとき、適切な警告処理を行う。
　警告装置１は、車両に載置されているものに加えて、可搬型で車両において利用可能な装置であってもよい。警告装置１は、カメラ２０と、表示部３０と、スピーカ４０と、記録装置５０と、通信装置６０と、認識辞書記憶部７０と、警告処理装置８０とを有する。
　カメラ２０は、前方映像用カメラである。カメラ２０は、車両の前方に配置されている。カメラ２０は、エンジンが始動してから停止するまでの間、車両の前方を中心とした周辺を常時撮影する。カメラ２０は、撮影した映像データを警告処理装置８０の認識処理部８４の人物認識部８４１へ出力する。映像データは、例えば毎秒３０フレームの画像から構成される動画像である。
　表示部３０は、一例としてはナビゲーション装置を含む他のシステムと共用した表示装置などである。表示部３０は、他車両の乗員とのトラブルの発生が予測されるとき、警告表示が表示される。表示部３０は、警告表示を確認することができれば、様々な形態をとりうることがでる。表示部３０の一例としては、電子ルームミラーを用いたり、インストルメントパネルの機能とすることも可能である。表示部３０は、例えば、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）または有機ＥＬ（Ｏｒｇａｎｉｃ　Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどを含むディスプレイである。表示部３０は、運転者から視認容易な位置に配置されている。本実施形態では、表示部３０は、車両の運転者前方の、ダッシュボード、インストルメントパネル、センターコンソールなどに配置されている。表示部３０は、警告処理装置８０の警告処理部８５から出力された映像信号に基づき、警告表示を表示する。
　スピーカ４０は、一例としてはナビゲーション装置を含む他のシステムと共用した音声出力装置などである。スピーカ４０は、他車両の乗員とのトラブルの発生が予測されるとき、警告音声を出力する。スピーカ４０は、警告処理装置８０の警告処理部８５から出力された音声信号に基づき、警告音声を出力する。
　記録装置５０は、警告装置１におけるデータの一時記憶などに用いられる。記録装置５０は、例えば、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、フラッシュメモリ（Ｆｌａｓｈ　Ｍｅｍｏｒｙ）などの半導体メモリ素子、または、ハードディスク、光ディスクなどの記録装置である。または、図示しない通信装置を介して無線接続される外部記録装置であってもよい。記録装置５０は、カメラ２０が撮影した映像データを記憶する。
　認識辞書記憶部７０は、例えば、ＲＡＭ、ＲＯＭ、フラッシュメモリなどの半導体メモリ素子、または、ハードディスク、光ディスク、ネットワークを介した外部記憶装置などの記憶装置である。認識辞書記憶部７０は、人物認識辞書７１を有する。
　人物認識辞書７１は、映像データから人物を認識するために、人物の様々な形状、構成を機械学習させた辞書である。
　警告処理装置８０は、他車両の乗員とのトラブルの発生が予測されるとき、警告処理を行う。警告処理装置８０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などで構成された演算処理装置（制御装置）である。警告処理装置８０は、記録装置５０に記憶されているプログラムをメモリにロードして、プログラムに含まれる命令を実行する。警告処理装置８０は、走行路情報取得部８１と、認識処理部８４と、警告処理部８５と、記録処理部８６と、通信処理部８７とを有する。警告処理装置８０には図示しない内部メモリが含まれ、内部メモリは警告処理装置８０におけるデータの一時記憶などに用いられる。
　走行路情報取得部８１は、例えば、ナビゲーション装置からのナビゲーション情報または地図情報に基づいて、車両が走行中の走行路の種類を示す情報である走行路情報を取得する。本実施形態では、走行路情報取得部８１は、ナビゲーション装置からのナビゲーション情報に基づいて、車両が走行中の道路の種類を示す情報である走行路情報を取得する。走行路情報取得部８１は、取得した走行路情報を警告処理部８５に出力する。
　道路の種類とは、例えば、高速自動車国道と自動車専用道路とを含む高速道路、一般国道と都道府県道と市町村道とを含む一般道路である。
　認識処理部８４は、車両の進行方向を撮影した映像に認識処理を行って、撮影されている被撮影物を認識する。認識処理部８４は、人物認識部８４１を有する。
　人物認識部８４１は、車両の進行方向を撮影した映像から人物認識処理によって人物を認識する。本実施形態では、人物認識部８４１は、カメラ２０が撮影した映像に、認識辞書記憶部７０が記憶した人物認識辞書７１を使用して、人物認識処理を行って人物を認識する。人物認識処理は、公知の方法であればよく、限定されない。人物認識部８４１は、認識結果を警告処理部８５に出力する。
　また、人物認識部８４１は、人物を認識するとともに、映像における人物の高さ方向の長さｄ１と、映像における人物の接地位置と、映像における人物の接地位置と映像の下端部との距離ｄ２とを取得して、認識結果に含める。
　映像における人物の高さ方向の長さｄ１は、映像において人物を認識した範囲、言い換えると、人物の外形を囲む範囲である認識範囲の上下方向の長さである。
　映像における人物の接地位置は、映像において人物の足が路面に接地している位置である。または、接地位置は、映像において人物の靴底の位置としてもよい。または、接地位置は、認識範囲の下側の辺の位置としてもよい。
　映像における人物の接地位置と映像の下端部との距離ｄ２は、映像において人物の足が路面に接地している位置から映像の下端部までの距離である。または、距離ｄ２は、映像において人物の靴底の位置から映像の下端部までの距離としてもよい。または、距離ｄ２は、認識範囲の下側の辺の位置から映像の下端部までの距離としてもよい。
　図２を用いて、人物認識処理について説明する。図２は、第一実施形態に係る警告処理装置が撮影した映像データの一例を説明する概略図である。カメラ２０が撮影した映像１００には、車両に向かって歩いてくる人物の人物映像１１０が含まれている。人物認識部８４１は、映像１００に対して人物認識処理を行うと、認識範囲１１１から、人物映像１１０を認識する。認識範囲１１１は、人物の外形を囲む矩形状の範囲である。認識範囲１１１の下側の辺は、人物の接地位置１１０ａである。
　警告処理部８５は、走行路情報取得部８１が取得した走行路の種類の情報を含む走行路情報が、歩行者または自転車の通行が規制された対象道路であることを示しており、認識処理部８４の人物認識部８４１が人物が存在することを認識した場合、車両と認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、車両と認識した人物との距離が所定距離未満であれば、第一警告処理よりさらに高いレベルの第二警告処理を行う。第二警告処理は第一警告処理を含んでいてもよい。警告処理部８５は、表示部３０とスピーカ４０との少なくともどちらかから警告を出力させるように制御可能である。警告処理部８５は、記録処理部８６を制御可能である。警告処理部８５は、通信処理部８７を制御可能である。
　歩行者または自転車の通行が規制された対象道路であり、人物が存在することを認識し、さらに、車両と認識した人物との距離が所定距離未満の場合、異常な状況であり、その人物とのトラブルの発生が予測される。そこで、このような状況であるとき、第一警告処理よりさらに高いレベルの第二警告処理を行う。
　対象道路は、通常であれば人物が立ち入ることがない道路、言い換えると、認識処理部８４の人物認識部８４１によって人物が認識されることがない道路である。本実施形態では、対象道路は、高速道路、または、一般道路のうち歩行者および軽車両の通行が禁止されている道路（以下、「自動車専用道路」という。）とする。また、高速道路または自動車専用道路上に配置された施設、例えば、パーキングエリアとサービスエリアとを含む休憩施設などは除いてもよい。
　車両と認識した人物との距離は、認識処理部８４の人物認識部８４１が取得した距離ｄ２から、算出可能である。より詳しくは、カメラ２０の画角と倍率とを含む撮影条件によって、車両から映像の下端部に相当する路面上の位置までの距離が算出可能である。そして、距離ｄ２によって、映像の下端部に相当する路面上の位置から人物までの位置が算出可能である。このようにして、車両と認識した人物との距離は算出可能である。
　所定距離は、車両に近づいてくる人物が、車両を叩いたり、車両の乗員に対して怒鳴ったりしたときに、車両の乗員が車両をロックしたり、窓を閉めたり安全を確保するための対応をとることが可能な距離とする。例えば、所定距離は、車両の前側の端部から１０ｍ程度、または、車両の運転席から１２ｍ程度としてもよい。
　第一警告処理は、高速道路または自動車専用道路上に人物が存在することを示す警告を行う処理である。第一警告処理は、通常であれば人物が立ち入ることがない道路上に人物が存在することを運転者に対して警告する警告報知処理である。第一警告処理は、高速道路と自動車専用道路とで、変えてもよい。例えば、高速道路においては、第一警告処理は、運転者に対する警告報知処理に加えて、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理と、通信処理部８７によって道路の管理者に対して通報させる通報処理とを含んでもよい。例えば、自動車専用道路においては、第一警告処理は、運転者に対する警告報知処理のみとしてもよい。
　第二警告処理は、第一警告処理よりも警告のレベルが高い処理を行う。第二警告処理は、高速道路または自動車専用道路上に人物が存在するだけではなく、その人物とのトラブルの発生が予測されるときに行う。第二警告処理は、通信処理部８７による第三者への通報処理または緊急通報処理を含んでもよい。第二警告処理は、高速道路と自動車専用道路とで、変えてもよい。例えば、高速道路においては、第二警告処理は、通信処理部８７による警察への通報処理としてもよい。例えば、自動車専用道路においては、第二警告処理は、記録処理部８６による撮影した映像を記録装置５０に記憶する記憶処理としてもよい。また、第二警告処理は、第一警告処理を含んでいてもよい。
　記録処理部８６は、警告処理部８５から出力された制御信号に基づいて、撮影した映像データを記録装置５０に記憶させる。記録処理部８６は、例えば、撮影された映像データのうち、人物認識部８４１が人物を認識したときからの映像データを記録装置５０に記憶させてもよい。または、記録処理部８６は、例えば、撮影された映像データのうち、人物認識部８４１が人物を認識したときから所定時間前に遡ったところから映像データを記録装置５０に記憶させてもよい。所定時間前に遡ったところから記録することで、トラブルの原因になった出来事が映像に含まれる可能性が高くなる。
　通信処理部８７は、警告処理部８５から出力された制御信号に基づいて、通信装置６０を介して、道路の管理会社に対する通報を行わせる。通信処理部８７は、警告処理部８５から出力された制御信号に基づいて、通信装置６０を介して、警察に対する緊急通報を行わせる。通信処理部８７は、人物を認識したことと、人物を認識した時間と、人物を認識した時間に対応する位置情報とを提供情報として、道路の管理会社または警察に提供する。
　次に、図３ないし図５を用いて、警告処理装置８０における処理の流れについて説明する。図３は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。図４は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。図５は、第一実施形態に係る警告処理装置における処理の流れを示すフローチャートである。
　警告装置１の起動中、カメラ２０は、車両の前方を撮影する。警告装置１の起動中、走行路情報取得部８１は、車両が走行している走行路の種類を示す走行路種類の情報を含む走行路情報を取得する。警告装置１の起動中、認識処理部８４の人物認識部８４１は、カメラ２０で撮影された映像データから人物認識処理によって人物を認識する。ここでは、走行路が高速道路であるものとして説明する。
　警告処理装置８０は、走行路は高速道路であるかを判定する（ステップＳ１０１）。警告処理装置８０は、走行路情報取得部８１が取得した走行路情報に基づいて、走行路種類が高速道路である場合（ステップＳ１０１でＹｅｓ）、ステップＳ１０２に進む。警告処理装置８０は、走行路情報取得部８１が取得した走行路情報に基づいて、走行路種類が高速道路ではない場合（ステップＳ１０１でＮｏ）、ステップＳ１０３に進む。
　走行路が高速道路であると判定された場合（ステップＳ１０１でＹｅｓ）、警告処理装置８０は、第一処理を行う（ステップＳ１０２）。警告処理装置８０は、ステップＳ１０４に進む。
　走行路が高速道路ではないと判定された場合（ステップＳ１０１でＮｏ）、警告処理装置８０は、第二処理を行う（ステップＳ１０３）。警告処理装置８０は、ステップＳ１０４に進む。
　警告処理装置８０は、終了トリガがあるかを判定する（ステップＳ１０４）。
　終了トリガは、警告処理部８５による警告処理を停止するトリガである。例えば、車両の動作を終了することで終了トリガとなる。例えば、エンジンオフ、ギヤをパーキングに入れた、サイドブレーキを動作させたなどの組合せで終了トリガとなる。
　警告処理装置８０は、終了トリガがあると判定した場合（ステップＳ１０４でＹｅｓ）、処理を終了する。警告処理装置８０は、終了トリガがないと判定した場合（ステップＳ１０４でＮｏ）、ステップＳ１０５に進む。
　終了トリガがないと判定された場合（ステップＳ１０４でＮｏ）、警告処理装置８０は、走行路種類に変更があるかを判定する（ステップＳ１０５）。より詳しくは、警告処理装置８０は、走行路情報取得部８１によって取得した走行路情報の走行路種類に変更がある場合（ステップＳ１０５でＹｅｓ）、ステップＳ１０１に戻って処理を継続する。警告処理装置８０は、走行路情報取得部８１によって取得した走行路情報の走行路種類に変更がない場合（ステップＳ１０５でＮｏ）、ステップＳ１０２に戻って処理を継続する。
　つづいて、ステップＳ１０２における第一処理について説明する。第一処理は、走行路が高速道路であると判定された場合（ステップＳ１０１でＹｅｓ）、実行される。
　警告処理装置８０は、人物を認識したかを判定する（ステップＳ１１１）。より詳しくは、警告処理装置８０は、認識処理部８４の人物認識部８４１によって、車両の進行方向を撮影した映像から人物認識処理によって人物を認識した場合（ステップＳ１１１でＹｅｓ）、ステップＳ１１２に進む。警告処理装置８０は、認識処理部８４の人物認識部８４１によって、車両の進行方向を撮影した映像から人物認識処理によって人物を認識しなかった場合（ステップＳ１１１でＮｏ）、処理を終了する。
　人物を認識した場合（ステップＳ１１１でＹｅｓ）、警告処理装置８０は、認識した人物までの距離は所定距離未満であるかを判定する（ステップＳ１１２）。より詳しくは、警告処理装置８０は、認識処理部８４の人物認識部８４１の認識結果に基づいて、車両と認識した人物との距離が所定未満である場合（ステップＳ１１２でＹｅｓ）、ステップＳ１１４に進む。警告処理装置８０は、認識処理部８４の人物認識部８４１の認識結果に基づいて、車両と認識した人物との距離が所定距離未満ではない場合（ステップＳ１１２でＮｏ）、ステップＳ１１３に進む。
　認識した人物までの距離が所定距離未満ではない場合（ステップＳ１１２でＮｏ）、警告処理装置８０は、警告処理部８５によって、第一警告処理を実行する。より詳しくは、警告処理装置８０は、第一警告処理である運転者に対する警告報知処理と、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理と、通信処理部８７によって道路の管理者に対して通報させる通報処理とを実行する（ステップＳ１１３）。このような場合、誤って高速道路に進入してしまった人物、または、路肩に停止した停止車両からおりた人物などである可能性が高く、車両に対して行動を起こす可能性は低いと推定される。警告処理装置８０は、処理を終了する。
　認識した人物までの距離が所定距離未満である場合（ステップＳ１１２でＹｅｓ）、警告処理装置８０は、警告処理部８５によって、第一警告処理と第二警告処理とを実行する。より詳しくは、警告処理装置８０は、第一警告処理である運転者に対する警告報知処理と、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理と、通信処理部８７によって道路の管理者に対して通報させる通報処理とに加えて、第二警告処理として通信処理部８７による警察への通報処理を実行する（ステップＳ１１４）。このような場合、認識された人物が、車両に対して行動を起こす可能性が高いと推定される。警告処理装置８０は、処理を終了する。
　つづいて、ステップＳ１０３における第二処理について説明する。第二処理は、走行路が高速道路ではないと判定された場合（ステップＳ１０１でＮｏ）、実行される。
　警告処理装置８０は、ステップＳ１１１と同様に、人物を認識したかを判定する（ステップＳ１２１）。警告処理装置８０は、人物を認識した場合（ステップＳ１２１でＹｅｓ）、ステップＳ１２２に進む。警告処理装置８０は、人物を認識しなかった場合（ステップＳ１２１でＮｏ）、処理を終了する。
　人物を認識した場合（ステップＳ１２１でＹｅｓ）、警告処理装置８０は、警告処理部８５によって、運転者に対して人物が存在することを警告する警告報知処理を実行する（ステップＳ１２２）。
　このようにして、高速道路上において、車両からの距離が所定距離未満の人物を検出すると、第一警告処理である運転者に対する警告報知処理と、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理とを実行する。さらに、検出した人物が車両からの距離が所定距離未満であると、第二警告処理として通信処理部８７による警察への通報処理を実行する。
　上述したように、本実施形態は、高速道路上において人物を検出すると、第一警告処理である運転者に対する警告報知処理と、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理とを実行することができる。このように、本実施形態によれば、運転者に警告するとともに、証拠となり得る映像を自動で記録することができる。
　さらに、本実施形態は、検出した人物が車両からの距離が所定距離未満であると、第二警告処理として通信処理部８７による警察への通報処理を実行することができる。
　このように、本実施形態によれば、通常であれば人物が立ち入ることがない道路上に人物が認識されると、適切な警告処理を行うことができる。さらに、本実施形態によれば、通常であれば人物が立ち入ることがない道路上において車両に近い人物が認識されて、他車両の乗員とのトラブルの発生が予測されるとき、第三者への通報処理または緊急通報処理を含む、より高いレベルの警告処理を行うことができる。
　例えば、高速道路上において、煽られたり、または、前方に割り込まれて急停車させられたりした上で、他車両の乗員が近づいてきたような、他車両の乗員とのトラブルの発生が予測されるとき、警告を発したり、証拠となり得る映像を記録したりすることを自動で行うことができる。
［第二実施形態］
　図６、図７を参照しながら、本実施形態に係る警告装置１Ａについて説明する。図６は、第二実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。図７は、第二実施形態に係る警告処理装置における処理の流れを示すフローチャートである。警告装置１Ａは、基本的な構成は第一実施形態の警告装置１と同様である。以下の説明においては、警告装置１と同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。警告装置１Ａは、警告処理装置８０Ａが車両情報取得部８３Ａを有する点と、警告処理部８５Ａにおける処理とが、第一実施形態と異なる。
　車両情報取得部８３Ａは、車両の速度または車両が停止していることを判定可能な、車両の状態を示す車両情報を、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）や車両の状態をセンシングする各種センサなどから取得する。車両情報取得部８３Ａは、車両情報として、ＣＡＮや各種センサなどから取得した、車両の速度とギア操作情報とブレーキ操作情報との少なくともいずれかを取得する。車両情報取得部８３Ａは、取得した車両情報を警告処理部８５Ａに出力する。
　警告処理部８５Ａは、車両情報取得部８３Ａが取得した車両情報に基づいて、車両の走行速度が所定速度未満または停止していることを示している場合、車両と認識した人物との距離が所定距離未満であれば、第二警告処理を行う。
　歩行者または自転車の通行が規制された対象道路であり、車両の走行速度が所定速度未満または停止し、さらに、車両と認識した人物との距離が所定距離未満である場合、異常な状況である。このような場合、認識した人物が原因で車両が停車し、トラブルが発生する可能性が高い。そこで、このような状況であるとき、第一警告処理よりさらに高いレベルの第二警告処理を行う。
　所定速度は、車両が停止しかけていると判断可能な速度である。所定速度は、車両が徐行している程度の速度である。所定速度は、例えば、１０ｋｍ／ｈ程度とする。
　次に、図７を用いて、警告処理装置８０Ａにおける処理の流れについて説明する。ステップＳ２２１、ステップＳ２２３ないしステップＳ２２５の処理は、図４に示すフローチャートのステップＳ１１１、ステップＳ１１２ないしステップＳ１１４と同様の処理を行う。
　人物を認識した場合（ステップＳ２２１でＹｅｓ）、警告処理装置８０は、車両が所定速度未満または停止しているかを判定する（ステップＳ２２２）。警告処理装置８０は、車両情報取得部８３Ａが取得した車両情報に基づいて、車両の走行速度が所定速度未満または停止していることを示している場合（ステップＳ２２２でＹｅｓ）、ステップＳ２２３に進む。警告処理装置８０は、車両情報取得部８３Ａが取得した車両情報に基づいて、車両の走行速度が所定速度未満または停止していることを示していない場合（ステップＳ２２２でＮｏ）、ステップＳ２２４に進む。
　このようにして、通常であれば人物が立ち入ることがない道路上に人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近いとき、第二警告処理として通信処理部８７による警察への通報処理を実行する。通常であれば人物が立ち入ることがない道路上に人物が認識されても、車両が所定速度以上であれば、第一警告処理を実行する。
　上述したように、本実施形態は、通常であれば人物が立ち入ることがない道路上に人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近く、他車両の乗員とのトラブルの発生が予測されるとき、第三者への通報処理または緊急通報処理を含む、より高いレベルの警告処理を行うことができる。また、本実施形態によれば、車両が所定速度以上であれば、第一警告処理のみを実行するようにすることができる。これにより、本実施形態は、不用意により高いレベルの警告処理を行うことを抑制することができる。
［第三実施形態］
　図８、図９を参照しながら、本実施形態に係る警告装置１Ｂについて説明する。図８は、第三実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。図９は、第三実施形態に係る警告処理装置における処理の流れを示すフローチャートである。警告装置１Ｂは、警告処理装置８０Ｂが交通情報取得部８２Ｂを有する点と、警告処理部８５Ｂにおける処理とが、第二実施形態と異なる。
　交通情報取得部８２Ｂは、車両の周囲における交通情報を、ナビゲーション装置などから取得する。交通情報取得部８２Ｂは、取得した交通情報を警告処理部８５Ｂに出力する。
　警告処理部８５Ｂは、交通情報取得部８２Ｂが取得した交通情報が渋滞を示す情報を取得しておらず、車両情報取得部８３Ｂが取得した車両の走行速度が所定速度未満または停止していることを示している場合、車両と認識した人物との距離が所定距離未満であれば、第二警告処理を行う。車両の周囲が渋滞していなければ、人物が認識されるということは異常な状況であるので、他車両の乗員とのトラブルの発生が予測される。
　次に、図９を用いて、警告処理装置８０Ｂにおける処理の流れについて説明する。ステップＳ２３１、ステップＳ２３２、ステップＳ２３４ないしステップＳ２３６の処理は、図７に示すフローチャートのステップＳ２２１、ステップＳ２２２、ステップＳ２２３ないしステップＳ２２５と同様の処理を行う。
　車両の走行速度が所定速度未満または停止していることを示している場合（ステップＳ２３２でＹｅｓ）、警告処理装置８０は、渋滞中であるかを判定する（ステップＳ２３３）。警告処理装置８０は、交通情報取得部８２Ｂが取得した交通情報が、車両の周囲が渋滞していることを示している場合（ステップＳ２３３でＹｅｓ）、ステップＳ２３５に進む。警告処理装置８０は、交通情報取得部８２Ｂが取得した交通情報が、車両の周囲が渋滞していることを示していない場合（ステップＳ２３３でＮｏ）、ステップＳ２３４に進む。
　このようにして、車両の周囲が渋滞しておらず、通常であれば人物が立ち入ることがない道路上に人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近いとき、第二警告処理として通信処理部８７による警察への通報処理を実行する。通常であれば人物が立ち入ることがない道路上に人物が認識されても、車両の周囲が渋滞していれば、第一警告処理を実行する。
　上述したように、本実施形態は、車両の周囲が渋滞しておらず、通常であれば人物が立ち入ることがない道路上に人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近く、他車両の乗員とのトラブルの発生が予測されるとき、第三者への通報処理または緊急通報処理を含む、より高いレベルの警告処理を行うことができる。また、本実施形態によれば、車両の周囲が渋滞していれば、第一警告処理のみを実行するようにすることができる。これにより、本実施形態は、不用意により高いレベルの警告処理を行うことを抑制することができる。
［第四実施形態］
　図１０を参照しながら、本実施形態に係る警告装置１Ａについて説明する。図１０は、第四実施形態に係る警告処理装置における処理の流れを示すフローチャートである。警告装置１Ａは、警告処理部８５Ａにおける処理が、第二実施形態と異なる。
　警告処理部８５Ａは、車両情報取得部８３Ａが取得した車両情報が、車両の走行速度が所定速度未満または停止となった後に、車両のドアが開いてないことを示している場合、車両と認識した人物との距離が所定距離未満であれば、第二警告処理を行う。車両のドアが開いていなければ、認識された人物は、他車両の乗員を含め車両の乗員以外の者になる。
　次に、図１０を用いて、警告処理装置８０Ａにおける処理の流れについて説明する。ステップＳ２４１、ステップＳ２４２、ステップＳ２４４ないしステップＳ２４６の処理は、図７に示すフローチャートのステップＳ２２１、ステップＳ２２２、ステップＳ２２３ないしステップＳ２２５と同様の処理を行う。
　車両の走行速度が所定速度未満または停止していることを示している場合（ステップＳ２４２でＹｅｓ）、警告処理装置８０は、ドアを開けたかを判定する（ステップＳ２４３）。警告処理装置８０は、車両情報取得部８３Ａが取得した車両情報が、車両のドアを開けたことを示している場合（ステップＳ２４３でＹｅｓ）、ステップＳ２４５に進む。警告処理装置８０は、車両情報取得部８３Ａが取得した車両情報が、車両のドアを開けたことを示していない場合（ステップＳ２４３でＮｏ）、ステップＳ２４４に進む。
　このようにして、通常であれば人物が立ち入ることがない道路上に車両の乗員以外の人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近いとき、第二警告処理として通信処理部８７による警察への通報処理を実行する。通常であれば人物が立ち入ることがない道路上に人物が認識されても、車両のドアが開けられていれば、第一警告処理を実行する。
　上述したように、本実施形態は、通常であれば人物が立ち入ることがない道路上に車両の乗員以外の人物が認識され、車両が所定速度未満または停止していて、認識された人物との距離が近く、他車両の乗員とのトラブルの発生が予測されるとき、第三者への通報処理または緊急通報処理を含む、より高いレベルの警告処理を行うことができる。また、本実施形態によれば、車両のドアが開けられていれば、第一警告処理のみを実行するようにすることができる。これにより、本実施形態は、不用意により高いレベルの警告処理を行うことを抑制することができる。
［第五実施形態］
　図１１ないし図１３を参照しながら、本実施形態に係る警告装置１Ｃについて説明する。図１１は、第五実施形態に係る警告処理装置を有する警告装置の構成例を示すブロック図である。図１２は、第五実施形態に係る警告処理装置が撮影した映像データの一例を説明する概略図である。図１３は、第五実施形態に係る警告処理装置における処理の流れを示すフローチャートである。警告装置１Ｃは、認識辞書記憶部７０Ｃが車両認識辞書７２Ｃを有し、認識処理部８４Ｃが車両認識部８４２Ｃを有する点と、警告処理部８５Ｃにおける処理が、第二実施形態と異なる。
　車両認識辞書７２Ｃは、映像データから車両を認識するために、四輪車、二輪車など様々な車両の形状、構成を機械学習させた辞書である。
　車両認識部８４２Ｃは、車両の進行方向を撮影した映像から車両認識処理によって他車両を認識する。本実施形態では、車両認識部８４２Ｃは、カメラ２０が撮影した映像に、認識辞書記憶部７０が記憶した車両認識辞書７２Ｃを使用して、車両認識処理を行って他車両を認識する。車両認識処理は、公知の方法であればよく、限定されない。車両認識部８４２Ｃは、認識結果を警告処理部８５Ｃに出力する。
　また、車両認識部８４２Ｃは、他車両を認識するとともに、映像における他車両の高さ方向の長さと、映像における他車両の接地位置と、映像における他車両の接地位置と映像の下端部との距離との少なくともいずれかを取得して、認識結果に含める。
　図１２を用いて、車両認識処理について説明する。カメラ２０が撮影した映像１００には、車両に向かって歩いてくる人物の人物映像１１０と、人物の近くに停車された他車両の他車両映像１２０とが含まれている。車両認識部８４２Ｃは、映像１００に対して車両認識処理を行うと、車両認識範囲１２１から、車両映像１２０を認識する。車両認識範囲１２１は、車両の外形を囲む矩形状の範囲である。
　警告処理部８５Ｃは、車両情報取得部８３Ｃが取得した車両の走行速度が所定速度未満または停止していることを示している場合、車両の進行方向の第一所定距離未満に他車両が存在し、車両と認識した人物との距離が第二所定距離未満であれば、第二警告処理を行う。
　車両と認識した他車両との距離は、映像における他車両の高さ方向の長さと、映像における他車両の接地位置と、映像における他車両の接地位置と映像の下端部との距離とのいずれかから、第一実施形態で車両と認識した人物との距離を算出したのと同様に算出可能である。
　第一所定距離は、例えば、高速道路上における車間距離として安全とされている車間距離より大幅に短い距離である。例えば、第一所定距離は、車両の前側の端部から他車両の後端部まで１０ｍ程度、または、車両の運転席から他車両の後端部まで１２ｍ程度としてもよい。
　第二所定距離は、第一実施形態における所定距離と同様である。
　次に、図１３を用いて、警告処理装置８０Ｃにおける処理の流れについて説明する。ステップＳ２５１、ステップＳ２５２、ステップＳ２５４ないしステップＳ２５６の処理は、図７に示すフローチャートのステップＳ２２１、ステップＳ２２２、ステップＳ２２３ないしステップＳ２２５と同様の処理を行う。
　車両の走行速度が所定速度未満または停止していることを示している場合（ステップＳ２５２でＹｅｓ）、警告処理装置８０は、進行方向第一所定距離未満に他車両が存在するかを判定する（ステップＳ２５３）。警告処理装置８０は、車両認識部８４２Ｃが認識した他車両が、進行方向の第一所定距離未満に位置する場合（ステップＳ２５３でＹｅｓ）、ステップＳ２５４に進む。警告処理装置８０は、車両認識部８４２Ｃが認識した他車両が、進行方向の第一所定距離未満に位置していない場合（ステップＳ２５３でＮｏ）、ステップＳ２５５に進む。
　このようにして、通常であれば人物が立ち入ることがない道路上で、車両が所定速度未満または停止していて、近い距離に他車両が検出されて、近い距離に人物が検出されたとき、第二警告処理として通信処理部８７による警察への通報処理を実行する。
　上述したように、本実施形態は、通常であれば人物が立ち入ることがない道路上で、車両が所定速度未満または停止していて、近い距離に他車両が検出されて、近い距離に人物が検出されて、他車両の乗員とのトラブルの発生が予測されるとき、第三者への通報処理または緊急通報処理を含む、より高いレベルの警告処理を行うことができる。本実施形態によれば、不用意により高いレベルの警告処理を行うことを抑制することができる。
　さて、これまで本発明に係る警告装置１について説明したが、上述した実施形態以外にも種々の異なる形態にて実施されてよいものである。
　図示した警告装置１の各構成要素は、機能概念的なものであり、必ずしも物理的に図示の如く構成されていなくてもよい。すなわち、各装置の具体的形態は、図示のものに限られず、各装置の処理負担や使用状況などに応じて、その全部または一部を任意の単位で機能的または物理的に分散または統合してもよい。
　警告装置１の構成は、例えば、ソフトウェアとして、メモリにロードされたプログラムなどによって実現される。上記実施形態では、これらのハードウェアまたはソフトウェアの連携によって実現される機能ブロックとして説明した。すなわち、これらの機能ブロックについては、ハードウェアのみ、ソフトウェアのみ、または、それらの組み合わせによって種々の形で実現できる。
　上記した構成要素には、当業者が容易に想定できるもの、実質的に同一のものを含む。さらに、上記した構成は適宜組み合わせが可能である。また、本発明の要旨を逸脱しない範囲において構成の種々の省略、置換または変更が可能である。
　人物を検出して、記録処理部８６によって撮影した映像を記録装置５０に記憶させる記憶処理を実行する際に、例えば、フラッシュまたは赤色ＬＥＤを点灯させてもよい。これにより、車両で警告処理を実行していることを、近くにいる、または、近づいてくる人物に対して報知して、トラブルが発生することを抑制する効果が期待される。
　１　　　　警告装置
　２０　　　カメラ
　３０　　　表示部
　４０　　　スピーカ
　５０　　　記録装置
　６０　　　通信装置
　７０　　　認識辞書記憶部
　７１　　　人物認識辞書
　８０　　　警告処理装置
　８１　　　走行路情報取得部
　８４　　　認識処理部
　８４１　　人物認識部
　８５　　　警告処理部
　８６　　　記録処理部
　８７　　　通信処理部

Claims (9)

  1. 　車両が走行中の道路の種類を示す情報を取得する走行路情報取得部と、
    　前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理部と、
    　前記走行路情報取得部が取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理部が人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理部と、
    　を備えることを特徴とする警告処理装置。
  2. 　前記車両の状態を示す情報を取得する車両情報取得部をさらに備え、
    　前記警告処理部は、前記車両情報取得部が取得した前記車両の走行速度が所定速度未満または停止していることを示している場合、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第二警告処理を行う、
    　請求項１に記載の警告処理装置。
  3. 　前記車両の周囲における交通情報を取得する交通情報取得部をさらに備え、
    　前記警告処理部は、前記交通情報取得部が取得した交通情報が渋滞を示す情報を取得しておらず、車両情報取得部が取得した前記車両の走行速度が所定速度未満または停止していることを示している場合、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第二警告処理を行う、
    　請求項２に記載の警告処理装置。
  4. 　前記警告処理部は、前記車両情報取得部が取得した車両情報が、前記車両の走行速度が所定速度未満または停止となった後に、前記車両のドアが開いてないことを示している場合、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第二警告処理を行う、
    　請求項２に記載の警告処理装置。
  5. 　前記認識処理部は、前記車両の進行方向を撮影した映像から他車両の認識をさらに行い、
    　前記警告処理部は、前記車両情報取得部が取得した前記車両の走行速度が所定速度未満または停止していることを示している場合、前記車両の進行方向の所定距離未満に他車両が存在し、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第二警告処理を行う、
    　請求項２に記載の警告処理装置。
  6. 　前記警告処理部は、前記第二警告処理として、緊急通報処理を行う、
    　請求項１から５のいずれか１項に記載の警告処理装置。
  7. 　前記警告処理部は、前記第二警告処理として、前記車両の進行方向を撮影した映像の記録処理を行う、
    　請求項１から６のいずれか１項に記載の警告処理装置。
  8. 　車両が走行中の道路の種類を示す情報を取得する走行路情報取得ステップと、
    　前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理ステップと、
    　前記走行路情報取得ステップによって取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理ステップによって人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理ステップと、
    　を含む警告処理方法。
  9. 　車両が走行中の道路の種類を示す情報を取得する走行路情報取得ステップと、
    　前記車両の進行方向を撮影した映像から人物認識処理によって人物を認識する認識処理ステップと、
    　前記走行路情報取得ステップによって取得した走行中の道路の種類を示す情報が歩行者または自転車の通行が規制された対象道路であることを示しており、前記認識処理ステップによって人物が存在することを認識した場合、前記車両と前記認識した人物との距離が所定距離以上であれば、対象道路上に人物が存在することを示す第一警告処理を行い、前記車両と前記認識した人物との距離が所定距離未満であれば、前記第一警告処理より高いレベルの第二警告処理を行う警告処理ステップと、
    　を警告処理装置として動作するコンピュータに実行させるためのプログラム。
PCT/JP2019/004122 2018-04-03 2019-02-05 警告処理装置、警告処理方法およびプログラム WO2019193830A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-071765 2018-04-03
JP2018071765A JP2019185180A (ja) 2018-04-03 2018-04-03 警告処理装置、警告処理方法およびプログラム

Publications (1)

Publication Number Publication Date
WO2019193830A1 true WO2019193830A1 (ja) 2019-10-10

Family

ID=68100748

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/004122 WO2019193830A1 (ja) 2018-04-03 2019-02-05 警告処理装置、警告処理方法およびプログラム

Country Status (2)

Country Link
JP (1) JP2019185180A (ja)
WO (1) WO2019193830A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7488055B2 (ja) 2020-02-14 2024-05-21 矢崎エナジーシステム株式会社 車両の停車判定報知システム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004046426A (ja) * 2002-07-10 2004-02-12 Honda Motor Co Ltd 車両用警告システム
WO2007135856A1 (ja) * 2006-05-19 2007-11-29 Pioneer Corporation 撮影制御装置、撮影制御方法、撮影制御プログラム、および記録媒体
WO2008075407A1 (ja) * 2006-12-19 2008-06-26 Pioneer Corporation 情報処理装置並びにその制御方法、制御プログラム及び記録媒体
JP2016001464A (ja) * 2014-05-19 2016-01-07 株式会社リコー 処理装置、処理システム、処理プログラム、及び、処理方法
JP2016021200A (ja) * 2014-07-15 2016-02-04 パナソニックＩｐマネジメント株式会社 判定方法、判定システム、及び判定装置
WO2016143306A1 (ja) * 2015-03-10 2016-09-15 株式会社Ｊｖｃケンウッド 警告装置、警告方法及び警告プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004046426A (ja) * 2002-07-10 2004-02-12 Honda Motor Co Ltd 車両用警告システム
WO2007135856A1 (ja) * 2006-05-19 2007-11-29 Pioneer Corporation 撮影制御装置、撮影制御方法、撮影制御プログラム、および記録媒体
WO2008075407A1 (ja) * 2006-12-19 2008-06-26 Pioneer Corporation 情報処理装置並びにその制御方法、制御プログラム及び記録媒体
JP2016001464A (ja) * 2014-05-19 2016-01-07 株式会社リコー 処理装置、処理システム、処理プログラム、及び、処理方法
JP2016021200A (ja) * 2014-07-15 2016-02-04 パナソニックＩｐマネジメント株式会社 判定方法、判定システム、及び判定装置
WO2016143306A1 (ja) * 2015-03-10 2016-09-15 株式会社Ｊｖｃケンウッド 警告装置、警告方法及び警告プログラム

Also Published As

Publication number Publication date
JP2019185180A (ja) 2019-10-24

Similar Documents

Publication Publication Date Title
US10176720B2 (en) Auto driving control system
US11180164B2 (en) Vehicle control apparatus, vehicle, and control method
US20210197846A1 (en) Dynamic inter-vehicle communication regarding risk detected based on vehicle sensor measurements
US11731624B2 (en) Vehicle controller, vehicle, and vehicle control method
CN107672584A (zh) 超车车道控制的系统和方法
WO2018116619A1 (ja) 車両用運転者状態判定装置
US11518330B2 (en) Vehicle accident notification device, system including the same, and method thereof
JP6838124B2 (ja) 自動運転制御システム
KR100820310B1 (ko) 자동차의 추돌방지장치 및 방법
US10977882B1 (en) Driver health profile
US11745745B2 (en) Systems and methods for improving driver attention awareness
CN109866766A (zh) 车辆碰撞预防方法及装置
JP2017033370A (ja) 車載器、通信装置およびこれらを備えた車両管理システム
JP2011028415A (ja) 運転支援装置
JP6351753B2 (ja) 車両制御装置
CN116834655A (zh) 危险预警的方法、装置和车辆
JP6678147B2 (ja) 危険予兆判定装置、危険予兆判定システム、車両、およびプログラム
WO2019193830A1 (ja) 警告処理装置、警告処理方法およびプログラム
JP6235810B2 (ja) 車載器
JP7046221B2 (ja) 運転支援装置および運転支援方法
JP2021099720A (ja) 危険運転判定装置、危険運転判定方法、および危険運転判定プログラム
KR20220002277A (ko) 안전 거리를 준수하지 않는 후속 차량에 경고하는 장치 및 방법
JP2018190232A (ja) 車載器
WO2024150369A1 (ja) 監視システム、情報処理装置、方法及び非一時的なコンピュータ記録媒体
JP7570164B2 (ja) 表示制御装置、表示制御システム及び表示制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19780751

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19780751

Country of ref document: EP

Kind code of ref document: A1