WO2018042536A1 - 装着検出装置、撮影装置、拘束装置及び装着検出プログラム - Google Patents

装着検出装置、撮影装置、拘束装置及び装着検出プログラム Download PDF

Info

Publication number
WO2018042536A1
WO2018042536A1 PCT/JP2016/075446 JP2016075446W WO2018042536A1 WO 2018042536 A1 WO2018042536 A1 WO 2018042536A1 JP 2016075446 W JP2016075446 W JP 2016075446W WO 2018042536 A1 WO2018042536 A1 WO 2018042536A1
Authority
WO
WIPO (PCT)
Prior art keywords
strap
image
identification
seat
photographing
Prior art date
Application number
PCT/JP2016/075446
Other languages
English (en)
French (fr)
Inventor
啓文 大野
達衛 星野
保 増田
諭 前杉
康介 今井
尚登 新川
Original Assignee
東芝デジタルソリューションズ株式会社
東芝アルパイン・オートモティブテクノロジー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 東芝デジタルソリューションズ株式会社, 東芝アルパイン・オートモティブテクノロジー株式会社 filed Critical 東芝デジタルソリューションズ株式会社
Priority to EP16915097.6A priority Critical patent/EP3508385B1/en
Priority to PCT/JP2016/075446 priority patent/WO2018042536A1/ja
Priority to JP2018514489A priority patent/JP6629434B2/ja
Publication of WO2018042536A1 publication Critical patent/WO2018042536A1/ja
Priority to US16/288,294 priority patent/US10997440B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00—Safety belts or body harnesses in vehicles
    • B60R22/12—Construction of belts or harnesses
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00—Safety belts or body harnesses in vehicles
    • B60R22/48—Control systems, alarms, or interlock systems, for the correct application of the belt or harness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00—Safety belts or body harnesses in vehicles
    • B60R22/48—Control systems, alarms, or interlock systems, for the correct application of the belt or harness
    • B60R2022/4808—Sensing means arrangements therefor
    • B60R2022/485—Sensing means arrangements therefor for sensing belt anchor position, belt orientation, or the like
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R22/00—Safety belts or body harnesses in vehicles
    • B60R22/48—Control systems, alarms, or interlock systems, for the correct application of the belt or harness
    • B60R2022/4866—Displaying or indicating arrangements thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo

Definitions

  • the present invention relates to a mounting detection device, a photographing device, a binding device, and a mounting detection program for detecting the mounting of the binding device.
  • an automobile is provided with a restraining device (hereinafter referred to as a seat belt).
  • the seat belt is mounted, for example, by pulling out a strap (webbing) stored in the storage unit and fixing it to the side of the seat.
  • the strap and the seat are fixed by connecting a buckle attached to the strap to a tongue plate fixed to the seat.
  • a mounting detection device for determining whether a passenger is wearing a seat belt by detecting that a buckle and a tongue plate are connected is provided.
  • the conventional wearing detection device determines the wearing of the seat belt by detecting that the buckle is connected to the tongue plate. For this reason, for example, when a passenger who dislikes wearing a seat belt connects a dummy buckle that is not attached to the strap to the tongue plate, the attachment detecting device erroneously detects that the seat belt is attached. That is, in the attachment detection by a mechanical method, the attachment detection device can be easily erroneously detected.
  • the problem to be solved by the present invention is to provide a mounting detection device, a photographing device, a binding device, and a mounting detection program that can detect the mounting of the binding device regardless of a mechanical method.
  • the mounting detection device includes a restraint device, a photographing device, a control unit, and an output device.
  • the restraint device is attached to restrain a passenger seated in the seat, and is provided with a strap that changes the range exposed when the seat is attached and when the seat is not attached.
  • the imaging device captures an image including the strap of the restraining device.
  • the control unit detects an identification image corresponding to an identification member added to a range exposed when the strap is attached, from an image photographed by the photographing device.
  • the output device outputs a result of detection of the identification image.
  • FIG. 1 is a block diagram illustrating a configuration of a mounting detection device according to the first embodiment.
  • FIG. 2 is a diagram illustrating the interior of the automobile on which the mounting detection device according to the first embodiment is mounted.
  • FIG. 3 is a diagram illustrating an example of a left seat of an automobile on which the mounting detection device according to the first embodiment is mounted.
  • FIG. 4 is a diagram illustrating a configuration of a three-point seat belt provided in the right seat according to the first embodiment.
  • FIG. 5 is a view for explaining a range of identification members added to the strap of the seat belt in the first embodiment.
  • FIG. 6 is a diagram illustrating an example of an identification member added to the strap according to the first embodiment.
  • FIG. 7 is a flowchart for explaining the operation of the mounting detection apparatus according to the first embodiment.
  • FIG. 8 is a flowchart for explaining the operation of the seat belt wearing detection process in the first embodiment.
  • FIG. 9 is a diagram illustrating an example of an image input from the camera according to the first embodiment.
  • FIG. 10 is a block diagram illustrating a configuration of a mounting detection device according to the second embodiment.
  • FIG. 1 is a block diagram illustrating a configuration of a mounting detection device 10 according to the first embodiment.
  • the mounting detection device 10 is mounted on, for example, an automobile provided with a restraining device (hereinafter referred to as a seat belt).
  • a seat belt a restraining device
  • the wearing detection device 10 has a function of detecting whether a seat belt is worn by the passenger when the passenger is in the seat.
  • the wearing detection device 10 includes a seat belt (seat belt 4 shown in FIG. 3), a control unit 20, a camera 22 (22A, 22B, 22C), a key sensor 24, and a display device (output device) 28.
  • the seat belt is attached to restrain the passenger seated in the seat, and is provided with a strap that changes the exposed range when the seat belt is worn and when the seat belt is not worn.
  • the detailed configuration of the seat belt is shown in FIG.
  • At least one camera 22 is provided for photographing the inside of the car.
  • the camera 22 is used, for example, to take an image for detecting presence / absence of a passenger, movement of the passenger, and wearing of a seat belt. Accordingly, the camera 22 is installed at a position where an image including a passenger and a seat belt (at least a strap) can be taken.
  • the camera 22 is assumed to be mounted with a light emitting device that can take an image of a specific wavelength light outside visible light and emits a specific wavelength light outside visible light, for example.
  • a light emitting device that can take an image of a specific wavelength light outside visible light and emits a specific wavelength light outside visible light, for example.
  • the camera 22 for example, a near infrared camera is used.
  • the camera 22 is provided with a light emitting device that emits near infrared light such as a near infrared LED (LightLEDEmitting Diode).
  • the camera 22 that can shoot with near-infrared light, it is possible to take an image for detecting the wearing of the seat belt 4 even in a situation where shooting in a visible light environment such as at night or in a tunnel is not possible. be able to.
  • a light-emitting device that emits visible light is required, but this may hinder driving.
  • 1st Embodiment there is no possibility that a driving
  • the camera 22 may be a near ultraviolet camera, for example.
  • the camera 22 is provided with a light emitting device that emits near-ultraviolet light.
  • the control unit 20 is for controlling each part constituting the automobile in response to inputs from various sensors, image data from the camera 22, and the like.
  • the control unit 20 can be realized by, for example, an engine control unit (ECU) (or an engine computer) mounted on an automobile. Further, the control unit 20 can be configured as an independent dedicated unit (computer) separately from an ECU mounted on a general automobile. In this case, the control unit 20 is realized as a seat belt wearing detection device, and is configured to operate in cooperation with the ECU.
  • the control unit 20 realizes a function of detecting, for example, sitting on the passenger's seat and whether or not the passenger is wearing the seat belt based on the image taken by the camera 22.
  • the control unit 20 determines the wearing of the seat belt by detecting an identification image corresponding to an identification member (recognition marking) added to a range exposed when the strap is attached from an image photographed by the camera 22. .
  • control unit 20 can realize not only the function of detecting the seating of the passenger in the seat and the presence or absence of the seat belt by the passenger, but also the function of detecting the operation of the passenger, for example.
  • control unit 20 detects a driver's line-of-sight direction, operation of a steering wheel, and the like based on an image captured by the camera 22 and executes processing for supporting driving.
  • the display device 28 is for displaying a processing result by the control unit 20, and is provided, for example, on an instrument panel (dashboard). For example, the display device 28 displays the result of detection of the identification image of the seat belt by the control unit 20, that is, the determination result of wearing the seat belt.
  • control unit 20 has a processor 20A, a RAM 20B, a storage device 20C, an input circuit 20D, and an output circuit 20E.
  • the processor 20A executes various programs stored in the storage device 20C to realize various functions.
  • the processor 20A executes seat belt wearing detection processing for detecting the wearing of the seat belt based on the image input from the camera 22 based on the wearing detection program.
  • the RAM 20B stores temporary data associated with the processing by the processor 20A.
  • the storage device 20C stores programs and data for controlling the operation of the control unit 20, and is realized by a storage medium such as an EEPROM (registered trademark) (Electrically Erasable and Programmable ROM).
  • EEPROM registered trademark
  • ROM Electrically Erasable and Programmable ROM
  • the input circuit 20D inputs signals from various sensors including the key sensor 24 and data from devices such as the camera 22, for example.
  • the output circuit 20E outputs the processing result by the processor 20A to each unit.
  • the output circuit 20E outputs, for example, the result of the wearing detection process by the processor 20A to the display device 28, and displays the seat belt wearing state.
  • the control unit 20 has a function capable of communicating with an external information device (for example, a personal computer) or a network, and can change programs and data stored in the storage device 20C.
  • the control unit 20 can store (install) a mounting detection program in the storage device 20C from an external information device. Thereby, the control unit 20 can execute the attachment detection process.
  • FIG. 2 is a diagram showing the interior of the automobile in which the mounting detection device 10 of the first embodiment is mounted.
  • FIG. 2 shows an example of a configuration in which, for example, a third row sheet (first row sheet 30, second row sheet 31, third row sheet 32) is provided.
  • the first row seat 30 is provided with a seat where two people can get on the second row seat 31 and three people can get on the third row seat 32.
  • Each seat is provided with a seat belt for restraining a seated passenger.
  • the second row sheet 31 can be moved more greatly in the front-rear direction, for example, than the second row sheet 31 and the third row sheet 32, and the arrangement of the sheets can be changed.
  • three cameras 22A, 22B, and 22C corresponding to the respective row seats are installed in order to photograph the interior of the vehicle.
  • the camera 22A is provided, for example, on the ceiling in the vicinity of the room mirror 34 so that an image including a passenger seated in the first row seat 30 and a seat belt of each seat can be taken.
  • the camera 22B is installed, for example, on the ceiling above the first row seat 30 so as to be able to take an image including a passenger seated in the second row seat 31 and the seat belt of each seat.
  • the camera 22 ⁇ / b> C is installed, for example, on the ceiling above the second row seat 31 so that an image including a passenger seated in the third row seat 32 and a seat belt of each seat can be taken.
  • FIG. 2 shows an example in which three cameras 22A, 22B, and 22C corresponding to each of the three rows of sheets are installed.
  • the number and installation positions of the cameras 22 are the same as those shown in FIG. It is not limited.
  • Installation positions other than the ceiling include, for example, a dashboard, a rear side of the front seat, and a pillar.
  • a plurality of cameras 22 may be provided in association with one row of sheets.
  • a plurality of cameras 22 are installed at positions away from each other so that the same range is photographed in an overlapping manner. Thereby, the range which becomes a blind spot which cannot be image
  • an identification image added to the strap of the seat belt is detected for each of the images taken by the plurality of cameras 22. Then, the detection result corresponding to the plurality of cameras 22 is combined to determine whether the seat belt is worn. Thereby, the presence or absence of the seat belt can be reliably determined.
  • a single camera 22 may be used to photograph a plurality of rows of seats.
  • a camera 22 corresponding to each seat may be provided, or a dedicated camera for detecting seat belt wearing may be provided.
  • the number and installation positions of the cameras 22 are determined according to the shape of the seat.
  • the display device 28 is provided on the instrument panel (dashboard) as shown in FIG. For example, the display device 28 displays information indicating whether or not the seat belt is detected, which is detected by the mounting detection device 10.
  • FIG. 3 is a diagram illustrating an example of the left seat 30A (first row seat 30) of the automobile on which the mounting detection device 10 according to the first embodiment is mounted.
  • FIG. 3 shows the configuration of the three-point seat belt 4 provided in the seat 30A.
  • the seat belt 4 is attached to restrain the passenger H1 seated in the seat 30A.
  • FIG. 3 shows a state where the seat belt 4 is attached to the passenger H1.
  • the seat belt 4 can restrain the passenger H1 by passing the strap (webbing) 40 over the passenger H1 seated in the seat 30A and fixing the strap 40 at three points.
  • one end of the strap 40 is stored in a storage portion 44 provided in the pillar 35, and the other end is fixed to one side surface (side facing the pillar 35) of the seat 30A.
  • the strap 40 stored in the storage unit 44 is wound around a retractor 42 (a retractor with a built-in load limiter) provided in the storage unit 44 so as to be drawn out.
  • the strap 40 is stored in the storage portion 44 when the seat belt 4 is not attached, and is pulled out from the storage portion 44 when the seat belt 4 is attached, and is fixed to the other side surface of the seat 30 ⁇ / b> A via the buckle 45.
  • the buckle 45 is attached to the strap 40 so as to be slidable.
  • a tongue plate 46 that can be engaged with the buckle 45 is fixed to the other side surface of the seat 30A (the side that does not face the pillar 35).
  • the buckle 45 and the tongue plate 46 act as a fixture for fixing the strap 40 pulled out from the storage portion 44.
  • the tongue plate 46 may be attached to the strap 40, and the buckle 45 may be provided on the seat 30A.
  • the belt 35 is provided with a belt guide 41 at a position higher than the shoulder of the passenger H1 seated in the seat 30A.
  • the belt guide 41 guides the strap 40 to a position higher than the shoulder of the occupant H1 by suspending the strap 40 pulled out from the storage portion 44.
  • the strap 40 is engaged with the buckle 45 and the tongue plate 46, so that the shoulder belt that is slanted from the upper shoulder portion of the occupant H ⁇ b> 1 to the lumbar region and the lumbar portion of the occupant H ⁇ b> 1 straddle. It is used as a lap belt that spans the direction (vehicle width direction).
  • identification members 40A and 40B are added to the area where the strap 40 is exposed as recognition markings.
  • the identification members 40 ⁇ / b> A and 40 ⁇ / b> B are described so as to be identifiable, but are configured so that they cannot be visually recognized in a normal visible light environment.
  • identification member 40A, 40B is comprised so that the specific wavelength light outside visible light, for example, near-infrared light, may be reflected.
  • the identification member 40 ⁇ / b> A is provided in a range that is exposed around the position on the shoulder of the passenger of the strap 40 guided by the belt guide 41 when the strap 40 is fixed by the buckle 45 and the tongue plate 46. That is, the identification member 40 ⁇ / b> A is added so as to appear within a range that can be reliably photographed by the camera 22.
  • the strap 40 is not concealed by the passenger's body (for example, arm, head, hair, etc.), luggage, clothing, etc. possessed by the passenger in the vicinity of the position on the shoulder of the passenger. Therefore, it is possible to reliably determine whether or not the identification member 40A is detected based on the image around the shoulder position of the occupant taken by the camera 22.
  • the identification member 40A is provided in a range that appears in the shooting range by the camera 22A when the strap 40 is attached in a state where there is no passenger in the seat 30A. In addition, the identification member 40A appears in the vicinity of the position on the shoulder of the occupant from the state in which there is no occupant in the seat 30A to the state in which the occupant H1 of the maximum body size is on board. , Continuously applied to the strap 40.
  • the identification member 40A When the identification member 40A is exposed, it can be considered that the strap 40 is pulled out from the storage portion 44 and the buckle 45 and the tongue plate 46 are engaged. That is, it can be determined that the seatbelt 4 is in a worn state.
  • the strap 40 shown in FIG. 3 is further provided with an identification member 40B.
  • the identification member 40 ⁇ / b> B is added to a range in the vicinity of the buckle 45 and the tongue plate 46 in a state where the buckle 45 is engaged with the tongue plate 46.
  • the identification member 40B when the identification member 40B is exposed in the vicinity of the buckle 45 and the tongue plate 46, the strap 40 is pulled out from the storage portion 44, and the buckle 45 and the tongue plate 46 are engaged. Can be considered. That is, by detecting the state in which both the identification member 40A and the identification member 40B are exposed, it can be determined that the seat belt 4 is securely attached.
  • the identification member 40A need only be added to the strap 40, and the identification member 40B need not be added.
  • FIG. 4 shows the configuration of the three-point seat belt 4 provided in the right seat 32A (third row seat 32).
  • FIG. 4 shows a state in which the seat belt 4 is attached to restrain the passenger H2 seated in the seat 34A.
  • the seat belt 4 shown in FIG. 4 is basically the same as the seat belt 4 shown in FIG. 3, but the position of the belt guide 41 differs depending on the shape of the seat.
  • the storage portion 44 is provided in the pillar 35, but in FIG. 4, the storage portion 44 (not shown) is provided on the back surface of the seat 34A.
  • a drawer opening for pulling out the strap 40 from the storage portion 44 is provided in the vicinity of the upper end portion of the seat 34A. Therefore, the drawer port functions as the belt guide 41, and the strap 40 can be pulled out from a position higher than the shoulder of the passenger H2 seated on the seat 34A.
  • the identification members 40A and 40B added to the strap 40 are exposed. That is, the identification member 40 ⁇ / b> A is exposed around the position on the shoulder of the occupant of the strap 40, and the identification member 40 ⁇ / b> B is exposed in the vicinity of the buckle 45 and the tongue plate 46.
  • FIG. 5 is a view for explaining the range of the identification member 40A added to the strap 40 of the seat belt 4 in the first embodiment.
  • FIG. 5A shows a state of the strap 40 when the seat belt 4 is not attached.
  • the strap 40 is wound up by a retractor 42 provided inside the storage portion 44. Accordingly, the range 40AH in which the identification member 40A is added to the strap 40 is stored in the storage unit 44. That is, the identification member 40A is not exposed and is not photographed by the camera 22.
  • FIG. 5B shows a state of the strap 40 when the seat belt 4 is attached. As shown in FIG. 5B, when the seat belt 4 is attached, the strap 40 is pulled out from the storage portion 44. Accordingly, the range 40AH in which the identification member 40A is added to the strap 40 is exposed to the outside of the storage unit 44 and can be photographed by the camera 22.
  • the range 40AH to which the identification member 40A is added is provided according to the passenger of the maximum body size assumed, it is exposed at least around the shoulder position of the passenger.
  • FIG. 6 is a diagram illustrating an example of an identification member 40 ⁇ / b> A added to the strap 40.
  • the strap 40 is formed by knitting polyester fiber, for example.
  • the identification member 40A is formed by weaving a material for an identification member that can be photographed by the camera 22 (can reflect near-infrared light) at the stage of manufacturing the strap 40.
  • the material for the identification member made into a fiber may be knitted together with the polyester fiber, or the material for the identification member may be knitted with two strip-shaped members formed of the polyester fiber.
  • Examples of materials that can be photographed by the camera 22 include silicon, metal, resin, and cloth having a specific roughness. Other materials (materials) can also be used. That is, any material can be used as long as it can identify the range in which the identification member 40A is added and the range in which the identification member 40A is not added in the image captured by the camera 22.
  • the identification member 40 ⁇ / b> A can easily identify the identification image corresponding to the identification member 40 ⁇ / b> A from the image captured by the camera 22. In this way, a specific pattern (shape) can be obtained.
  • the pattern of the identification member 40A1 shown in (A) of FIG. For example, the identification member 40A1 is attached to almost the entire surface of the strap 40, so that the camera 22 can easily shoot regardless of the wearing state of the strap 40.
  • the pattern of the identification member 40A2 shown in FIG. 6B shows an example in which a plurality of linear patterns are continuously arranged with a predetermined interval.
  • the pattern of the identification member 40A3 shown in FIG. 6C shows an example in which a grid pattern is arranged.
  • the pattern of the identification member 40A4 shown in FIG. 6D shows an example in which a plurality of patterns having predetermined shapes (for example, circles) having different sizes are arranged. Since the patterns of the identification members 40A2, 40A3, and 40A4 are simple shapes, they can be easily identified from the image captured by the camera 22.
  • identification members 40A2 and 40A3 are arranged in a linear pattern in accordance with the direction of the fibers of the strap 40, when the strap 40 is manufactured, the material for the identification member can be easily knitted.
  • the identification member 40A4 can be formed by sandwiching a pattern having a predetermined shape between two belt-shaped members forming the strap 40.
  • the identification member 40A by forming the identification member 40A with a specific pattern, it is possible to easily identify the image taken by the camera 22. Further, not only the identification member 40A but also other objects present in the vehicle are detected by photographing using near-infrared light by the camera 22, the identification can be easily made based on the pattern of the identification member 40A. It becomes possible. Therefore, it is desirable that the identification member 40A be added in a pattern that can be distinguished from, for example, objects that can be photographed with near-infrared light in the vehicle.
  • the patterns (A) to (C) shown in FIG. 6 are uniformly added to the strap 40 in the same shape, but the shape may be changed according to the position added to the strap 40. good.
  • the pattern of the identification member 40A1 shown in FIG. 6 (A) is formed so that gradation appears in the image photographed by the camera 22.
  • the pattern is formed so as to change stepwise from the end of the identification member 40A1.
  • the identification members 40 ⁇ / b> A ⁇ b> 2 and 40 ⁇ / b> A ⁇ b> 3 the interval between the linear patterns or the thickness of the linear pattern is changed according to the position added to the strap 40.
  • the length of the strap 40 pulled out from the storage portion 44 is identified based on the identification image corresponding to the identification member 40A. It is also possible.
  • the identification member 40B can have the same pattern as the identification member 40A. Since the identification members 40A and 40B are detected at different positions in the image photographed by the camera 22, they can be identified even in the same pattern.
  • the identification member 40B can have a different pattern from the identification member 40A.
  • the identification image corresponding to each of the identification members 40A and 40B can be clearly distinguished from the image captured by the camera 22 based on the difference in the pattern of the identification image.
  • the pattern of the identification member 40A (or identification member 40B) added to the strap 40 of the seat belt 4 may be different for each seat.
  • the pattern of the identification member 40A different for each seat, it is easy to identify each of the identification members 40A of the seat belt 4 provided in a plurality of seats from an image taken by one camera 22. It becomes.
  • the identification members 40A and 40B are added to the strap 40 so that they cannot be recognized by visual observation with visible light. This makes it difficult for a malicious passenger to add a dummy identification member in order to deceive wearing the seat belt 4. That is, it is difficult to create a dummy identification member by making it impossible to recognize the material and pattern of the identification members 40A and 40B by visual inspection.
  • a special paint for example, high solar reflection
  • a material that can be photographed by near infrared light may be attached to the strap 40.
  • FIG. 7 is a flowchart for explaining the operation of the mounting detection apparatus 10 according to the first embodiment.
  • the processor 20A executes a detection process for detecting the presence or absence of a passenger.
  • the processor 20 ⁇ / b> A identifies whether the passenger is captured in the captured image using an existing image processing technique. For example, the processor 20A detects a moving object in an area corresponding to a seat in the image. When a moving object is detected, it is determined whether the shape of the object corresponds to a person. Thereby, the presence or absence of a passenger can be detected.
  • the processor 20 ⁇ / b> A executes detection processing for all seats based on the image input from the camera 22.
  • step A2 the processor 20A executes a seat belt wearing detection process for detecting whether the passenger is wearing the seat belt 4 based on the wearing detection program.
  • FIG. 8 is a flowchart for explaining the operation of the seat belt wearing detection process in the first embodiment.
  • the processor 20A inputs the image data of the photographed image from the camera 22 photographing the seat determined to have a passenger (step B1). As described above, the camera 22 captures an image using, for example, near infrared light.
  • the processor 20A detects an identification image corresponding to the recognition marking (identification members 40A and 40B) from the image input from the camera 22 (step B2). For example, the processor 20A extracts an image area corresponding to the identification image, and executes a recognition process on the image area based on the patterns of the identification members 40A and 40B.
  • FIG. 9 shows an example of an image input from the camera 22 in the first embodiment.
  • FIG. 9 shows an image of an area corresponding to one seat.
  • an area SA1 is an area corresponding to the vicinity of the position on the shoulder of the passenger
  • an area SA2 is an area corresponding to the vicinity of the seat fixture.
  • the processor 20A detects an identification image corresponding to the identification member 40A from the area SA1. Further, the processor 20A detects an identification area corresponding to the identification member 40B from the area SA2.
  • FIG. 9 shows an example in which the pattern identification members 40A and 40B shown in FIG. 6A are used, and includes a uniform pattern identification image photographed by near-infrared light. ing. By detecting the identification image for the areas SA1 and SA2, the processing time can be shortened compared to the case where the entire image is processed, and images that do not correspond to the identification members 40A and 40B are less likely to be detected. It is possible to avoid erroneous recognition of the identification image.
  • step B3 If the processor 20A detects the identification area (step B3, Yes), it outputs that the seat belt is mounted as a detection result (step B4).
  • the control unit 20 outputs that the seat belt is attached when at least an identification image corresponding to the identification member 40A is detected. However, when an identification image corresponding to both of the identification members 40A and 40B is detected, the presence of seat belt may be output.
  • the processor 20A When it is determined that the seat belt is detected by the seat belt mounting detection process (step A3, Yes), the processor 20A causes the display device 28 to display information indicating that the seat belt of the corresponding seat is mounted (step A4). In this case, the processor 20A executes the seat belt mounting process until the key is turned off (No in Step A8), for example, every predetermined period (1 minute interval) (Step A2), so that the seat belt 4 is mounted. Check if it is.
  • step S5 information indicating that the seat belt of the corresponding seat is not mounted (not mounted) is displayed (step A5).
  • the processor 20A confirms whether the seat belt 4 is mounted by executing the seat belt mounting process (step A2), for example, at regular intervals until the key is turned off (step A8, No). To do.
  • the processor 20A displays the presence of attachment on the display device 28 as described above.
  • the processor 20A outputs an alarm for notifying that the seat belt 4 is not worn when the traveling is started in a state where all the passengers are not wearing the seat belt 4 (step A6, Yes). .
  • the processor 20A displays information indicating an alarm on the display device 28, or outputs an alarm sound from a speaker (not shown).
  • the processor 20A continues to execute the seat belt wearing detection process after the running is started, and continues to output an alarm until the wearing of the seat belt 4 in all the seats where the passenger is present is detected.
  • the seat belt wearing detection process during alarm output is executed at intervals (for example, intervals of 1 second) shorter than a certain period when wearing is detected.
  • one seat is taken by one camera 22, but when one seat is taken by a plurality of (for example, two) cameras 22, a plurality of cameras 22 are taken.
  • the seatbelt wearing detection process can be executed for one seat for the image taken by the above.
  • the image captured by the second camera 22 is targeted.
  • a seat belt wearing detection process is executed.
  • the identification image is detected, it is determined that the seat belt is worn. That is, it is determined whether the seat belt is attached to one seat by combining processing results for images taken by a plurality of cameras 22. Thereby, the presence or absence of the seat belt can be reliably determined.
  • the mounting detection device 10 is not a mechanical method of detecting the mounting of the buckle 45 and the tongue plate 46, but the passenger is based on the image captured by the camera 22. It is possible to detect the wearing of the seat belt 4 in each seat. In addition, the wearing detection device 10 determines the presence / absence of a passenger in each seat based on an image taken by the camera 22. Therefore, it is not necessary to provide a weight sensor for detecting the presence or absence of a passenger and a mounting sensor for detecting the mounting of the buckle 45 and the tongue plate 46 in each seat. For this reason, it is not necessary to provide a cable for sending signals from the weight sensor and the mounting sensor to the mounting detection device 10, and the number of wirings in the automobile can be reduced. In particular, the cable arranged from the seat does not become an obstacle in order to be able to move largely like the second row seat 31.
  • FIG. 10 is a block diagram showing a configuration of the mounting detection device 110 in the second embodiment.
  • the same parts as those shown in FIG. 1 are given the same names and detailed description thereof is omitted.
  • the camera unit 122A has the same configuration as the camera units 122B and 122C.
  • the camera unit 122A includes a detection circuit 120 and a camera 121.
  • the camera 121 is configured similarly to the camera 22 in the first embodiment. That is, the camera 121 can take an image with, for example, near infrared light.
  • the detection circuit 120 can detect an identification image corresponding to a member that reflects light of a specific wavelength from an image photographed by the camera 121. That is, the detection circuit 120 has a function of detecting an identification image similar to the control unit 20 in the first embodiment.
  • the detection circuit 120 executes seat belt wearing detection processing based on the image from the camera 121.
  • the detection circuit 120 When the detection circuit 120 detects the identification area, the detection circuit 120 outputs to the control unit 119 that the seat belt is mounted as a detection result. In this case, the control unit 119 causes the display device 128 to display information indicating the presence of the seat belt of the corresponding seat. On the other hand, when the identification area is not detected by the detection circuit 120, the control unit 119 causes the display device 128 to display information indicating that the seat belt of the corresponding seat is not mounted (not mounted).
  • the camera unit 122 can be used as a sensor for detecting the seat belt wearing by detecting the detection circuit 120 that performs the seat belt wearing detection process on the camera unit 122. Therefore, the existing ECU can be configured to input a signal (indicating presence / absence of attachment detection) from the camera unit 122 instead of a signal from a sensor that detects attachment of the buckle 45 and the tongue plate 46. .
  • an automobile provided with a seat belt (restraint device) is described as an example.
  • the present invention can be applied to other vehicles provided with a seat belt.
  • the present invention can be applied to detection of the restraint device.
  • the result of detection of the identification image of the seat belt by the control unit 20, that is, the determination result of the seat belt wearing is displayed on the display device.
  • An apparatus may be used. For example, sound can be output from a speaker or vibration can be generated by a vibration device such as a vibrator according to the detection result of the identification image.
  • the seat belt 4 shown in FIGS. 3 and 4 has been described by taking a three-point seat belt as an example, but it can also be applied to, for example, a two-point or four-point seat belt.
  • the identification member provided on the strap is detected for each of the two straps pulled out from two locations. Thereby, it can be detected whether each of the two straps is attached.
  • the method described in each of the embodiments described above is a magnetic disk (flexible disk, hard disk, etc.), optical disk (CD-ROM, DVD, etc.), magneto-optical, etc. as a program (mounting detection program) that can be executed by a computer. It can also be stored and distributed in a storage medium such as a disk (MO) or semiconductor memory.
  • a storage medium such as a disk (MO) or semiconductor memory.
  • the storage medium can store a program and can be read by a computer
  • the storage format may be any form.
  • the storage medium in each embodiment is not limited to a medium independent of a computer, but also includes a storage medium in which a program transmitted via a LAN, the Internet, or the like is downloaded and stored or temporarily stored.
  • the number of storage media is not limited to one, and the case where the processing in each of the above embodiments is executed from a plurality of media is also included in the storage media in the present invention, and the media configuration may be any configuration.
  • the computer in each embodiment executes each process in each of the above embodiments based on a program stored in a storage medium, and a single device such as a personal computer or a plurality of devices is a network. Any configuration such as a connected system may be used.
  • the computer in each embodiment is a generic term for devices and devices that can realize the functions of the present invention by a program, including an arithmetic processing device, a microcomputer, and the like included in the information processing device.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Textile Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Automotive Seat Belt Assembly (AREA)

Abstract

実施形態によれば、装着検出装置は、拘束装置と、撮影装置と、コントロールユニットと、出力装置を有する。拘束装置は、座席に着席した搭乗者を拘束するために装着されるものであって、装着時と非装着時において露出される範囲が変化するストラップが設けられている。撮影装置は、前記拘束装置のストラップを含む画像を撮影する。コントロールユニットは、前記撮影装置により撮影された画像から、前記ストラップの装着時に露出される範囲に付加された識別部材に相当する識別画像を検出する。出力装置は、前記識別画像の検出の結果を出力する。

Description

装着検出装置、撮影装置、拘束装置及び装着検出プログラム
　本発明は、拘束装置の装着を検出する装着検出装置、撮影装置、拘束装置及び装着検出プログラムに関する。
　一般に、自動車には、拘束装置（以下、シートベルトと称する）が設けられている。シートベルトは、例えば収納部に収納されたストラップ（ウェビング）を引き出し、座席横に固定することで装着される。ストラップと座席とは、ストラップに装着されたバックルを、座席に固定されたタングプレートに接続させることにより固定される。
　従来では、バックルとタングプレートとが接続されたことを検出することで、搭乗者がシートベルトを装着しているか判別する装着検出装置が設けられている。
特許第４４０３１０２号公報
　従来の装着検出装置は、バックルがタングプレートに接続されたことを検出することでシートベルトの装着が判別されている。このため、例えばシートベルトの装着を嫌う搭乗者が、ストラップに装着されていないダミーのバックルをタングプレートに接続すると、装着検出装置は、シートベルトが装着されていると誤検出してしまう。すなわち、機械的な方法による装着検出では、装着検出装置に対して容易に誤検出させることができる。
　本発明が解決しようとする課題は、機械的な方法によらず拘束装置の装着を検出することができる装着検出装置、撮影装置、拘束装置及び装着検出プログラムを提供することである。
　実施形態によれば、装着検出装置は、拘束装置と、撮影装置と、コントロールユニットと、出力装置を有する。拘束装置は、座席に着席した搭乗者を拘束するために装着されるものであって、装着時と非装着時において露出される範囲が変化するストラップが設けられている。撮影装置は、前記拘束装置のストラップを含む画像を撮影する。コントロールユニットは、前記撮影装置により撮影された画像から、前記ストラップの装着時に露出される範囲に付加された識別部材に相当する識別画像を検出する。出力装置は、前記識別画像の検出の結果を出力する。
図１は、第１実施形態における装着検出装置の構成を示すブロック図である。 図２は、第１実施形態の装着検出装置が実装される自動車の車内を示す図である。 図３は、第１実施形態における装着検出装置が搭載された自動車の左側座席の一例を示す図である。 図４は、第１実施形態における右側座席に設けられた３点式のシートベルトの構成を示す図である。 図５は、第１実施形態におけるシートベルトのストラップに付加される識別部材の範囲を説明するための図である。 図６は、第１実施形態におけるストラップに付加される識別部材の一例を示す図である。 図７は、第１実施形態における装着検出装置の動作を説明するためのフローチャートである。 図８は、第１実施形態におけるシートベルト装着検出処理の動作を説明するためのフローチャートである。 図９は、第１実施形態におけるカメラから入力された画像の一例を示す図である。 図１０は、第２実施形態における装着検出装置の構成を示すブロック図である。
　以下、実施形態について図面を参照して説明する。　
　（第１実施形態）
　図１は、第１実施形態における装着検出装置１０の構成を示すブロック図である。装着検出装置１０は、例えば拘束装置（以下、シートベルトと称する）が設けられた自動車に搭載される。自動車には、例えば複数の座席が設けられており、それぞれの座席にシートベルトが設けられている。装着検出装置１０は、座席に搭乗者がいる場合に、搭乗者によってシートベルトが装着された状態にあるか検出する機能を有する。
　図１に示すように、装着検出装置１０は、シートベルト（図３に示すシートベルト４）、コントロールユニット２０、カメラ２２（２２Ａ，２２Ｂ，２２Ｃ）、キーセンサ２４、及び表示装置（出力装置）２８を有する。
　シートベルトは、座席に着席した搭乗者を拘束するために装着されるものであって、装着時と非装着時において露出される範囲が変化するストラップが設けられている。シートベルトの詳細な構成については図３に示す。
　カメラ２２は、自動車の車内を撮影するために少なくとも１台が設けられる。カメラ２２は、例えば、搭乗者の有無、搭乗者の動作、シートベルトの装着を検出するための画像を撮影するために使用される。従って、カメラ２２は、搭乗者及びシートベルト（少なくともストラップ）を含む画像を撮影可能な位置に設置される。
　また、第１実施形態においてカメラ２２は、例えば可視光外の特定の波長光の画像を撮影することができ、可視光外の特定の波長光を放射する発光装置が実装されるものとする。カメラ２２は、例えば近赤外カメラが用いられる。この場合、カメラ２２には、例えば近赤外ＬＥＤ（Light Emitting Diode）などの近赤外光を放射する発光装置が設けられる。
　近赤外光により撮影可能なカメラ２２を用いることで、夜間やトンネル内などの可視光環境下での撮影ができない状況であっても、シートベルト４の装着を検出するための画像撮影をすることができる。夜間等において可視光による撮影をするためには可視光を発光する発光装置が必要となるが、運転に支障が生じる可能性がある。第１実施形態では、可視光外の特定の波長光の画像を撮影することで、運転に支障を生じるおそれがない。
　なお、カメラ２２は、例えば近紫外カメラを用いることも可能である。この場合、カメラ２２には、近紫外光を放射する発光装置が設けられる。
　コントロールユニット２０は、各種のセンサからの信号、カメラ２２からの画像データなどの入力に応じて、自動車を構成する各部を制御するためのものである。コントロールユニット２０は、例えば自動車に搭載されるエンジンコントロールユニット（ＥＣＵ）（あるいはエンジンコンピュータ）によって実現することができる。また、コントロールユニット２０は、一般的な自動車に搭載されるＥＣＵとは別に、独立した専用ユニット（コンピュータ）として構成することもできる。この場合、コントロールユニット２０は、シートベルト装着検出装置として実現され、ＥＣＵと連携して動作するように構成される。
　コントロールユニット２０は、カメラ２２により撮影された画像をもとに、例えば搭乗者の座席への着席と及び搭乗者によるシートベルトの装着の有無を検出する機能を実現する。コントロールユニット２０は、カメラ２２により撮影された画像からストラップの装着時に露出される範囲に付加された識別部材（認識用マーキング）に相当する識別画像を検出することにより、シートベルトの装着を判別する。
　また、コントロールユニット２０は、搭乗者の座席への着席と及び搭乗者によるシートベルトの装着の有無を検出する機能だけでなく、例えば搭乗者の動作を検出する機能を実現することができる。例えば、コントロールユニット２０は、カメラ２２により撮影された画像をもとに、運転者の視線方向、ハンドル等の操作などを検出して、運転をサポートするための処理を実行する。
　表示装置２８は、コントロールユニット２０による処理結果を表示するためのもので、例えばインストルメントパネル（ダッシュボード）に設けられる。例えば、表示装置２８は、コントロールユニット２０によるシートベルトの識別画像の検出の結果、すなわちシートベルトの装着の判別結果を表示する。
　コントロールユニット２０は、図１に示すように、プロセッサ２０Ａ、ＲＡＭ２０Ｂ、記憶装置２０Ｃ、入力回路２０Ｄ及び出力回路２０Ｅを有する。
　プロセッサ２０Ａは、記憶装置２０Ｃに記憶された各種プログラムを実行して各種機能を実現する。プロセッサ２０Ａは、装着検出プログラムに基づいて、カメラ２２から入力された画像をもとにシートベルトの装着を検出するシートベルト装着検出処理を実行する。
　ＲＡＭ２０Ｂは、プロセッサ２０Ａによる処理に伴う一時的なデータ等を記憶する。
　記憶装置２０Ｃは、コントロールユニット２０の動作を制御するためのプログラムやデータを記憶するもので、例えばＥＥＰＲＯＭ（登録商標）（Electrically Erasable and Programmable ROM）などの記憶媒体により実現される。
　入力回路２０Ｄは、例えばキーセンサ２４などを含む各種センサからの信号や、カメラ２２などの機器からのデータを入力する。
　出力回路２０Ｅは、プロセッサ２０Ａによる処理結果を各部に出力する。出力回路２０Ｅは、例えばプロセッサ２０Ａによる装着検出処理の結果を表示装置２８に出力して、シートベルトの装着状態を表示させる。
　なお、コントロールユニット２０は、外部の情報機器（例えばパーソナルコンピュータ）やネットワークと通信可能な機能を設け、記憶装置２０Ｃに記憶されたプログラムやデータを変更することができる。例えば、コントロールユニット２０は、外部の情報機器から記憶装置２０Ｃに装着検出プログラムを記憶（インストール）させることができる。これにより、コントロールユニット２０は、装着検出処理が実行可能となる。
　図２は、第１実施形態の装着検出装置１０が実装される自動車の車内を示す図である。図２は、例えば３列シート（１列目シート３０、２列目シート３１、３列目シート３２）が設けられた構成の一例を示す。例えば、１列目シート３０に２人、２列目シート３１に３人、３列目シート３２に３人が乗車することができる座席が設けられている。そして、各座席には、着席した搭乗者を拘束するためのシートベルトが設けられている。なお、２列目シート３１は、２列目シート３１と３列目シート３２に比較して、例えば前後方向により大きく移動可能となっており、シートの配置を変更できるものとする。
　３列シートの場合には、車内を撮影するために、それぞれの列シートに対応する３台のカメラ２２Ａ，２２Ｂ，２２Ｃが設置される。カメラ２２Ａは、１列目シート３０に着席した搭乗者と、それぞれの座席のシートベルトを含む画像を撮影できるように、例えばルームミラー３４の近傍の天井に設けられる。カメラ２２Ｂは、２列目シート３１に着席した搭乗者と、それぞれの座席のシートベルトを含む画像を撮影することができるように、例えば１列目シート３０の上方の天井に設置される。カメラ２２Ｃは、３列目シート３２に着席した搭乗者と、それぞれの座席のシートベルトを含む画像を撮影することができるように、例えば２列目シート３１の上方の天井に設置される。
　なお、図２に示す例では、３列シートのそれぞれに対応する３台のカメラ２２Ａ，２２Ｂ，２２Ｃを設置した例を示しているが、カメラ２２の台数や設置位置は図２に示す構成に限定されない。天井以外の設置位置としては、例えば、ダッシュボード、前座席背面側、ピラーなどがある。
　例えば、１列のシートに対応づけて複数台のカメラ２２を設けても良い。この場合、複数台のカメラ２２を離れた位置に設置し、同じ範囲を重複して撮影するようにする。これにより、カメラ２２により撮影できない死角となる範囲を少なくすることができる。この場合、複数のカメラ２２により撮影された画像のそれぞれについて、シートベルトのストラップに付加された識別画像を検出する。そして、複数のカメラ２２に対応する検出の結果を組み合わせてシートベルトの装着を判別する。これにより、シートベルトの装着の有無を確実に判定することができる。
　また、１台のカメラ２２によって複数列のシートの座席を撮影できるようにしても良い。さらに、各座席のそれぞれに対応するカメラ２２を設けても良いし、シートベルトの装着検出用の専用のカメラを設けても良い。また、３列シート以外の形状の座席が設けられている自動車の場合には、座席の形状に合わせて、カメラ２２の台数や設置位置が決められる。
　なお、表示装置２８は、図２に示すように、インストルメントパネル（ダッシュボード）に設けられる。表示装置２８は、例えば装着検出装置１０により検出されたシートベルトの装着有無を示す情報が表示される。
　図３は、第１実施形態における装着検出装置１０が搭載された自動車の左側座席３０Ａ（１列目シート３０）の一例を示す図である。図３には、座席３０Ａに設けられた３点式のシートベルト４の構成を示している。シートベルト４は、座席３０Ａに着席した搭乗者Ｈ１を拘束するために装着されるものである。図３では、搭乗者Ｈ１にシートベルト４が装着された状態を示している。
　シートベルト４は、座席３０Ａに着席した搭乗者Ｈ１にストラップ（ウェビング）４０を掛け渡し、ストラップ４０を３点において固定することで搭乗者Ｈ１を拘束することができる。ストラップ４０は、一方の端部が例えばピラー３５に設けられた収納部４４に収納され、他方の端部が座席３０Ａの一側面（ピラー３５と相対する側）に固定される。収納部４４に収納されたストラップ４０は、収納部４４に設けられたリトラクタ４２（ロードリミッタ内蔵型のリトラクタ）に引出し可能に巻取られている。
　ストラップ４０は、シートベルト４の非装着時には、収納部４４に収納された状態にあり、シートベルト４の装着時には収納部４４から引き出されて、バックル４５を介して座席３０Ａの他側面に固定される。バックル４５は、ストラップ４０に摺動可能となるように取り付けられている。座席３０Ａの他側面（ピラー３５と相対しない側）には、バックル４５と係合可能なタングプレート４６が固定されている。バックル４５とタングプレート４６は、収納部４４から引き出されたストラップ４０を固定する固定具として作用する。なお、ストラップ４０にタングプレート４６を取り付け、座席３０Ａにバックル４５を設けても良い。
　ピラー３５には、座席３０Ａに着席した搭乗者Ｈ１の肩より高い位置にベルトガイド４１が設けられる。ベルトガイド４１（誘導部材）は、収納部４４から引き出されたストラップ４０を吊り下げることにより、ストラップ４０を搭乗者Ｈ１の肩より高い位置まで誘導する。これにより、ストラップ４０は、バックル４５とタングプレート４６とが係合されることで、搭乗者Ｈ１の肩部上方から腰部にかけて斜めに掛け渡されるショルダベルトと、搭乗者Ｈ１の腰部を跨いで横方向（車幅方向）掛け渡されるラップベルトとして使用される。
　図３に示すように、シートベルト４の装着時に、ストラップ４０の露出される範囲に認識用マーキングとして識別部材４０Ａ，４０Ｂが付加されている。図３では、識別部材４０Ａ，４０Ｂを識別可能に記載しているが、通常の可視光環境においては視認できないように構成されている。第１実施形態では、識別部材４０Ａ，４０Ｂは、可視光外の特定の波長光、例えば近赤外光を反射するように構成されている。
　識別部材４０Ａは、ストラップ４０がバックル４５とタングプレート４６とにより固定された時に、ベルトガイド４１により誘導されたストラップ４０の搭乗者の肩上位置周辺で露出される範囲に設けられている。すなわち、識別部材４０Ａは、カメラ２２により確実に撮影可能となる範囲で表れるように付加されている。搭乗者の肩上位置周辺は、搭乗者の身体（例えば、腕、頭、髪など）、搭乗者が所持する荷物や衣類などによってストラップ４０が隠されることがない。従って、カメラ２２によって撮影された、搭乗者の肩上位置周辺の画像をもとに、識別部材４０Ａの検出有無を確実に判別することが可能となる。
　識別部材４０Ａは、座席３０Ａに搭乗者がいない状態でストラップ４０が装着された場合に、カメラ２２Ａによる撮影範囲に表れる範囲に設けられる。また、識別部材４０Ａは、座席３０Ａに搭乗者がいない状態から、想定される最大の体サイズの搭乗者Ｈ１が搭乗している状態までの間で、搭乗者の肩上位置周辺で表れるように、ストラップ４０に対して連続的に付加される。
　識別部材４０Ａが露出された状態にある場合には、ストラップ４０が収納部４４から引き出されて、バックル４５とタングプレート４６とが係合された状態と見なすことができる。すなわち、シートベルト４が装着された状態にあると判別することができる。
　また、図３に示すストラップ４０には、識別部材４０Ａの他に、さらに識別部材４０Ｂが設けられている。識別部材４０Ｂは、バックル４５をタングプレート４６に係合させた状態において、バックル４５とタングプレート４６の近傍となる範囲に付加される。
　従って、識別部材４０Ｂがバックル４５とタングプレート４６の近傍において露出された状態にある場合には、ストラップ４０が収納部４４から引き出されて、バックル４５とタングプレート４６とが係合された状態と見なすことができる。すなわち、識別部材４０Ａと識別部材４０Ｂの両方が露出された状態を検出することで、確実にシートベルト４が装着された状態であることを判別することができる。
　なお、ストラップ４０には、少なくとも識別部材４０Ａが付加されていれば良く、識別部材４０Ｂが付加されていなくても良い。
　図４には、右側座席３２Ａ（３列目シート３２）に設けられた３点式のシートベルト４の構成を示している。図４は、座席３４Ａに着席した搭乗者Ｈ２を拘束するために、シートベルト４が装着された状態を示している。図４に示すシートベルト４は、図３に示すシートベルト４と基本的に同じであるが、座席の形状に応じてベルトガイド４１の位置が異なっている。
　図３に示すシートベルト４では、ピラー３５に収納部４４を設けているが、図４では、座席３４Ａの背面に収納部４４（図示せず）を設けている。収納部４４からストラップ４０を引き出す引き出し口は、座席３４Ａの上端部近傍に設けられる。従って、引き出し口は、ベルトガイド４１として機能し、座席３４Ａに着席した搭乗者Ｈ２の肩より高い位置からストラップ４０を引き出すことができる。
　図４に示すように、右側座席３２Ａにおいても、シートベルト４の装着時には、ストラップ４０に付加された識別部材４０Ａ，４０Ｂが露出された状態となる。すなわち、識別部材４０Ａは、ストラップ４０の搭乗者の肩上位置周辺で露出され、識別部材４０Ｂは、バックル４５とタングプレート４６の近傍において露出される。
　図５は、第１実施形態におけるシートベルト４のストラップ４０に付加される識別部材４０Ａの範囲を説明するための図である。　
　図５の（Ａ）には、シートベルト４が装着されていない時のストラップ４０の状態を示している。図５の（Ａ）に示すように、シートベルト４が装着されていない時には、ストラップ４０が収納部４４の内部に設けられたリトラクタ４２により巻き取られる。従って、ストラップ４０に識別部材４０Ａが付加された範囲４０ＡＨは、収納部４４の内部に収納された状態となる。すなわち、識別部材４０Ａは、露出された状態とならないので、カメラ２２により撮影されることはない。
　図５の（Ｂ）には、シートベルト４が装着された時のストラップ４０の状態を示している。図５の（Ｂ）に示すように、シートベルト４が装着された時には、ストラップ４０が収納部４４から引き出される。これにより、ストラップ４０に識別部材４０Ａが付加された範囲４０ＡＨは、収納部４４の外部に露出され、カメラ２２により撮影可能となる。
　識別部材４０Ａが付加された範囲４０ＡＨは、想定される最大の体サイズの搭乗者に応じて設けられているため、少なくとも搭乗者の肩上位置周辺で露出される。
　図６は、ストラップ４０に付加される識別部材４０Ａの一例を示す図である。　
　ストラップ４０は、例えば、ポリエステル繊維を編んで形成される。例えば、識別部材４０Ａは、ストラップ４０を製造する段階において、カメラ２２により撮影可能（近赤外光を反射可能）な識別部材用の素材を編み込むことにより形成される。例えば、繊維状にした識別部材用の素材をポリエステル繊維と共に編み込んでも良いし、あるいはポリエステル繊維により形成された帯状の２枚の部材に識別部材用の素材を挟んで編み込んでも良い。カメラ２２により撮影可能な素材としては、例えばシリコン、金属、樹脂、特定の目の粗さを有する布などを用いることができる。なお、その他の素材（材料）を用いることも可能である。すなわち、カメラ２２によって撮影された画像において、識別部材４０Ａが付加された範囲と、識別部材４０Ａが付加されていない範囲とが識別可能となる素材であれば良い。
　また、図６の（Ａ）（Ｂ）（Ｃ）（Ｄ）に示すように、識別部材４０Ａは、カメラ２２により撮影された画像から、識別部材４０Ａに相当する識別画像の識別が容易となるように、特定のパターン（形状）にすることができる。
　図６の（Ａ）に示す識別部材４０Ａ１のパターンは、面状に形成した例を示している。識別部材４０Ａ１は、例えばストラップ４０のほぼ全面の範囲に付加されているため、ストラップ４０の装着状態に関係なく、カメラ２２により撮影しやすくなる。
　図６の（Ｂ）に示す識別部材４０Ａ２のパターンは、複数の線状のパターンを、所定の間隔を設けて連続して配置した例を示している。図６の（Ｃ）に示す識別部材４０Ａ３のパターンは、格子状のパターンを配置した例を示している。図６の（Ｄ）に示す識別部材４０Ａ４のパターンは、サイズの異なる所定の形状（例えば円）のパターンを複数配置した例を示している。識別部材４０Ａ２，４０Ａ３，４０Ａ４のパターンは、単純な形状のパターンのため、カメラ２２により撮影された画像から容易に識別することができる。また、識別部材４０Ａ２，４０Ａ３は、ストラップ４０の繊維の方向に合わせて線状のパターンを配置するので、ストラップ４０を製造する際に、識別部材用の素材の編み込みを容易にすることができる。識別部材４０Ａ４は、ストラップ４０を形成する帯状の２枚の部材に、所定の形状のパターンを挟み込むことで形成することができる。
　こうして、識別部材４０Ａを特定のパターンによって形成することで、カメラ２２により撮影された画像からの識別を容易にすることができる。また、カメラ２２による近赤外光を用いた撮影によって、識別部材４０Ａだけでなく、車内に存在する他の物体が検出されるとしても、識別部材４０Ａのパターンに基づいて容易に識別することが可能となる。従って、識別部材４０Ａは、例えば近赤外光により撮影可能な物体が車内にあっても、それらの物体と区別することが可能なパターンで付加することが望ましい。
　なお、図６に示す（Ａ）～（Ｃ）のパターンは、ストラップ４０に対して同じ形状により一様に付加されているが、ストラップ４０に付加される位置に応じて形状を変化させても良い。
　例えば、図６の（Ａ）に示す識別部材４０Ａ１のパターンでは、カメラ２２により撮影された画像においてグラデーションが表れるように形成する。例えば、識別部材４０Ａ１の端部から段階的に変化するようにパターンを形成する。また、識別部材４０Ａ２，４０Ａ３では、線状パターンの間隔あるいは線状パターンの太さを、ストラップ４０に付加される位置に応じて変化させる。
　こうして、ストラップ４０に付加される位置に応じて識別部材４０Ａの形状を変化させることで、識別部材４０Ａに相当する識別画像をもとに、ストラップ４０の収納部４４からの引き出し長さを識別することも可能である。
　なお、識別部材４０Ａのみについて説明しているが、識別部材４０Ｂは、識別部材４０Ａと同じパターンとすることができる。識別部材４０Ａ，４０Ｂは、カメラ２２により撮影された画像の異なる位置において検出されるため同じパターンであっても識別可能である。
　また、識別部材４０Ｂは、識別部材４０Ａと異なるパターンとすることも可能である。この場合には、カメラ２２により撮影された画像から、識別画像のパターンの違いをもとにして、識別部材４０Ａ，４０Ｂのそれぞれに対応する識別画像を明確に区別することができる。
　さらに、座席毎にシートベルト４のストラップ４０に付加される識別部材４０Ａ（あるいは識別部材４０Ｂ）のパターンが異なるようにしても良い。例えば、座席毎に識別部材４０Ａのパターンを異なるようにすることで、１つのカメラ２２によって撮影された画像から、複数の座席に設けられたシートベルト４の識別部材４０Ａをそれぞれ識別することが容易となる。
　第１実施形態においては、識別部材４０Ａ，４０Ｂを可視光では目視によって認識できないようにストラップ４０に付加している。これにより、悪意を持った搭乗者がシートベルト４の装着を欺くためにダミーの識別部材を付加しにくいようにしている。すなわち、目視によって識別部材４０Ａ，４０Ｂの材質やパターンを認識できないようにすることで、ダミーの識別部材の作成を困難にしている。
　なお、識別部材４０Ａ，４０Ｂを目視できる形態にすることを許容する場合には、ストラップ４０に対して、例えば近赤外領域の光の反射特性を制御可能な特殊な塗料（例えば、高日射反射率塗料）を塗布することにより、識別部材４０Ａ，４０Ｂを形成することも可能である。さらに、近赤外光により撮影可能な素材をストラップ４０に貼り付けるようにしても良い。これにより、識別部材４０Ａ，４０Ｂが付加されたストラップ４０の製造を簡単にすることが可能である。
　次に、第１実施形態における装着検出装置１０の動作について説明する。
　図７は、第１実施形態における装着検出装置１０の動作を説明するためのフローチャートである。
　プロセッサ２０Ａは、キーセンサ２４からキーオンされたことが通知されると、搭乗者の有無を検出するための検出処理を実行する。プロセッサ２０Ａは、カメラ２２から入力される画像データをもとに、撮影された画像中に搭乗者が撮影されているかを既存の画像処理技術を用いて識別する。例えば、プロセッサ２０Ａは、画像中の座席に相当する領域内において動きのある物体を検出する。そして、動きのある物体が検出された場合に、その物体の形状が人物に該当するかを判別する。これにより搭乗者の有無を検出することができる。なお、プロセッサ２０Ａは、カメラ２２から入力される画像をもとに、全ての座席を対象として検出処理を実行する。
　プロセッサ２０Ａは、搭乗者がいることを検出すると（ステップＡ１、Ｙｅｓ）、装着検出プログラムに基づいて、搭乗者がシートベルト４を装着しているかを検出するためのシートベルト装着検出処理を実行する（ステップＡ２）。
　図８は、第１実施形態におけるシートベルト装着検出処理の動作を説明するためのフローチャートである。　
　プロセッサ２０Ａは、搭乗者がいると判別された座席を撮影しているカメラ２２から、撮影された画像の画像データを入力する（ステップＢ１）。カメラ２２は、前述したように、例えば近赤外光により画像を撮影している。
　プロセッサ２０Ａは、カメラ２２から入力した画像から、認識用マーキング（識別部材４０Ａ，４０Ｂ）に相当する識別画像を検出する（ステップＢ２）。例えば、プロセッサ２０Ａは、識別画像に相当する画像領域を抽出し、この画像領域について識別部材４０Ａ，４０Ｂのパターンに基づいて認識処理を実行する。
　図９は、第１実施形態におけるカメラ２２から入力された画像の一例を示している。図９では、１つの座席に相当する領域の画像を表している。図９において、領域ＳＡ１は、搭乗者の肩上位置周辺に相当する領域であり、領域ＳＡ２は、座席の固定具の近傍に相当する領域である。
　プロセッサ２０Ａは、領域ＳＡ１から識別部材４０Ａに相当する識別画像を検出する。また、プロセッサ２０Ａは、領域ＳＡ２から識別部材４０Ｂに相当する識別領域を検出する。なお、図９には、図６の（Ａ）に示すパターンの識別部材４０Ａ，４０Ｂが用いられた例を示しており、近赤外光により撮影される一様なパターンの識別画像が含まれている。領域ＳＡ１，ＳＡ２を対象として識別画像を検出することで、画像全体を処理対象とする場合よりも処理時間を短縮することができ、また識別部材４０Ａ，４０Ｂに相当しない画像が検出されにくくなるので識別画像の誤認識を回避することができる。
　プロセッサ２０Ａは、識別領域を検出した場合（ステップＢ３、Ｙｅｓ）、検出結果としてシートベルトの装着有りを出力する（ステップＢ４）。なお、コントロールユニット２０は、少なくとも識別部材４０Ａに相当する識別画像が検出された場合に、シートベルトの装着有りを出力するものとする。ただし、識別部材４０Ａ，４０Ｂの両方に相当する識別画像が検出された場合に、シートベルトの装着有りを出力するようにしても良い。
　プロセッサ２０Ａは、シートベルト装着検出処理によって装着有りが判別されると（ステップＡ３、Ｙｅｓ）、表示装置２８において、該当する座席のシートベルトについて装着有りを示す情報を表示させる（ステップＡ４）。この場合、プロセッサ２０Ａは、キーオフされるまでの間（ステップＡ８、Ｎｏ）、例えば一定期間（１分間隔）毎に、シートベルト装着処理を実行することにより（ステップＡ２）、シートベルト４が装着されているかを確認する。
　一方、プロセッサ２０Ａは、シートベルト装着検出処理によって装着有りが判別されなかった場合（ステップＡ３、Ｎｏ）、すなわちカメラ２２により撮影された画像から識別画像が検出されなかった場合には、表示装置２８において、該当する座席のシートベルトについて装着無し（未装着）を示す情報を表示させる（ステップＡ５）。この場合、プロセッサ２０Ａは、キーオフされるまでの間（ステップＡ８、Ｎｏ）、例えば一定期間毎に、シートベルト装着処理を実行することにより（ステップＡ２）、シートベルト４が装着されているかを確認する。装着が検出された場合には、プロセッサ２０Ａは、前述のようにして装着有りを表示装置２８において表示させる。
　プロセッサ２０Ａは、全ての搭乗者がシートベルト４を装着していない状態において、走行が開始された場合には（ステップＡ６、Ｙｅｓ）、シートベルト４の未装着を通知するための警報を出力する。例えば、プロセッサ２０Ａは、表示装置２８に警報を表す情報を表示したり、スピーカ（図示せず）から警報音を出力させたりする。
　プロセッサ２０Ａは、走行が開始された後、シートベルト装着検出処理を続けて実行し、搭乗者がいる全ての座席でのシートベルト４の装着が検出されるまで、警報の出力を続ける。警報出力中のシートベルト装着検出処理は、装着が検出された場合の一定期間よりも短い間隔（例えば１秒間隔）毎に実行する。
　なお、前述した説明では、１つの座席について１台のカメラ２２によって撮影しているが、１つの座席について複数台（例えば２台）のカメラ２２で撮影している場合には、複数のカメラ２２により撮影された画像を対象として１つの座席についてシートベルト装着検出処理を実行することができる。この場合、例えば１台目のカメラ２２により撮影された画像を対象としてシートベルト装着検出処理をした結果、未装着と判別された場合に、２台目のカメラ２２により撮影された画像を対象としてシートベルト装着検出処理を実行する。この結果、識別画像が検出された場合には、シートベルトが装着されているものと判別する。すなわち、複数のカメラ２２により撮影された画像を対象とした処理結果を組み合わせて、１つの座席におけるシートベルトの装着を判別する。これにより、シートベルトの装着の有無を確実に判定することができる。
　このようにして、第１実施形態における装着検出装置１０は、バックル４５とタングプレート４６との装着を検出するといった機械的な方法では無く、カメラ２２によって撮影した画像をもとに、搭乗者がいる各座席におけるシートベルト４の装着を検出することができる。また、装着検出装置１０は、各座席の搭乗者の有無についてカメラ２２により撮影された画像をもとに判別している。従って、各座席において搭乗者の有無を検出するための重量センサ、及びバックル４５とタングプレート４６との装着を検出する装着センサを設ける必要が無い。このため、重量センサと装着センサからの信号を装着検出装置１０に送るためのケーブルを配設する必要がなく、自動車内の配線の数を削減することができる。特に、２列目シート３１のように大きく移動可能とするために、座席から配設するケーブルが障害とならない。
　（第２実施形態）
　次に、第２実施形態について説明する。　
　図１に示す第１実施形態の構成では、コントロールユニット２０に複数のカメラ２２からの画像データを入力して、コントロールユニット２０においてシートベルト装着検出処理を実行している。第２実施形態では、カメラユニットにおいてシートベルト装着検出処理を実行して、検出結果をコントロールユニットに出力する。
　図１０は、第２実施形態における装着検出装置１１０の構成を示すブロック図である。なお、図１に示す構成と同じ部分については、同じ名称を付して詳細な説明を省略する。
　図１０では、例えば３台のカメラユニット１２２（１２２Ａ，１２２Ｂ，１２２Ｃ）が設けられている。カメラユニット１２２Ａは、カメラユニット１２２Ｂ，１２２Ｃと同じ構成を有しているものとする。
　カメラユニット１２２Ａは、検出回路１２０とカメラ１２１とを有する。カメラ１２１は、第１実施形態におけるカメラ２２と同様に構成される。すなわち、カメラ１２１は、例えば近赤外光により画像を撮影することができる。
　検出回路１２０は、カメラ１２１により撮影された画像から、特定の波長光を反射する部材に対応する識別画像を検出することができる。すなわち、検出回路１２０は、第１実施形態におけるコントロールユニット２０と同様の識別画像を検出する機能を有する。検出回路１２０は、カメラ１２１からの画像をもとにシートベルト装着検出処理を実行する。
　検出回路１２０は、識別領域を検出した場合、検出結果としてシートベルトの装着有りをコントロールユニット１１９に出力する。この場合、コントロールユニット１１９は、表示装置１２８において、該当する座席のシートベルトについて装着有りを示す情報を表示させる。一方、コントロールユニット１１９は、検出回路１２０において識別領域が検出されなかった場合、表示装置１２８において、該当する座席のシートベルトについて装着無し（未装着）を示す情報を表示させる。
　このようにして、第２実施形態では、カメラユニット１２２にシートベルト装着検出処理を実行する検出回路１２０を見受けることで、カメラユニット１２２をシートベルト装着検出のセンサとして使用することができる。従って、既存のＥＣＵにおいて、バックル４５とタングプレート４６との装着を検出するセンサからの信号に代えて、カメラユニット１２２からの信号（装着検出有無を示す）を入力するように構成することができる。
　なお、前述した各実施形態の説明では、シートベルト（拘束装置）が設けられた自動車を例にして説明しているが、シートベルトが設けられた他の乗り物に適用することも可能である。例えば、アミューズメント施設に設置された乗り物に拘束装置が設けられている場合に、この拘束装置の装着検出に適用することができる。
　また、前述した各実施形態の説明では、コントロールユニット２０によるシートベルトの識別画像の検出の結果、すなわちシートベルトの装着の判別結果を表示装置に表示させるとしているが、表示装置以外の他の出力装置を使用しても良い。例えば、識別画像の検出の結果に応じて、スピーカから音を出力させたり、バイブレータなどの振動装置によって振動を発生させたりすることも可能である。
　また、図３及び図４に示すシートベルト４は、３点式のシートベルトを例にして説明しているが、例えば２点式あるいは４点式のシートベルトに適用することもできる。４点式のシートベルトの場合には、２箇所から引き出される２本のストラップのそれぞれについて、前述したように、ストラップに設けられた識別部材を検出する。これにより、２本のストラップのそれぞれについて装着されているかを検出することができる。
　なお、上記の各実施形態に記載した手法は、コンピュータに実行させることのできるプログラム（装着検出プログラム）として、磁気ディスク（フレキシブルディスク、ハードディスクなど）、光ディスク（ＣＤ－ＲＯＭ、ＤＶＤなど）、光磁気ディスク（ＭＯ）、半導体メモリなどの記憶媒体に格納して頒布することもできる。
　また、この記憶媒体としては、プログラムを記憶でき、かつコンピュータが読み取り可能な記憶媒体であれば、その記憶形式は何れの形態であっても良い。
　さらに、各実施形態における記憶媒体は、コンピュータと独立した媒体に限らず、ＬＡＮやインターネット等により伝送されたプログラムをダウンロードして記憶または一時記憶した記憶媒体も含まれる。
　また、記憶媒体は１つに限らず、複数の媒体から上記の各実施形態における処理が実行される場合も本発明における記憶媒体に含まれ、媒体構成は何れの構成であっても良い。
　なお、各実施形態におけるコンピュータは、記憶媒体に記憶されたプログラムに基づき、上記の各実施形態における各処理を実行するものであって、パーソナルコンピュータ等の１つからなる装置、複数の装置がネットワーク接続されたシステム等の何れの構成であっても良い。
　また、各実施形態におけるコンピュータとは、情報処理機器に含まれる演算処理装置、マイコン等も含み、プログラムによって本発明の機能を実現することが可能な機器、装置を総称している。
　なお、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

Claims (10)

  1. 　座席に着席した搭乗者を拘束するために装着されるものであって、装着時と非装着時において露出される範囲が変化するストラップが設けられた拘束装置と、
    　前記拘束装置のストラップを含む画像を撮影する撮影装置と、
    　前記撮影装置により撮影された画像から、前記ストラップの装着時に露出される範囲に付加された識別部材に相当する識別画像を検出するコントロールユニットと、
    　前記識別画像の検出の結果を出力する出力装置とを有する装着検出装置。
  2. 　装着時と非装着時において露出される範囲が変化するストラップが設けられた拘束装置の画像を撮影する撮影装置と、
    　前記撮影装置により撮影された画像から、前記ストラップの装着時に露出される範囲に付加された識別部材に相当する識別画像を検出するコントロールユニットと
    を有する装着検出装置。
  3. 　前記撮影装置は、可視光外の特定の波長光の画像を撮影し、
    　前記コントロールユニットは、前記ストラップに設けられた前記特定の波長光を反射する識別部材に対応する識別画像を検出する請求項２記載の装着検出装置。
  4. 　前記コントロールユニットは、前記撮影装置により撮影された画像から、予め決められた複数箇所の範囲のそれぞれにおいて前記識別画像を検出する請求項２記載の装着検出装置。
  5. 　前記コントロールユニットは、
    　前記撮影装置により撮影された画像をもとに座席に着席した搭乗者を検出し、
    　前記搭乗者が検出された場合に前記識別画像を検出する請求項２記載の装着検出装置。
  6. 　可視光外の特定の波長光の画像を撮影する撮影装置と、
    　前記撮影装置により撮影された画像から、特定の波長光を反射する部材に対応する識別画像を検出する検出回路とを有するカメラユニット。
  7. 　前記検出回路は、前記撮影装置により撮影された画像をもとに座席に着席した搭乗者を検出する請求項６記載のカメラユニット。
  8. 　座席に着席した搭乗者を拘束するために装着される拘束装置において、
    　非装着時には収納部内に収納された状態にあり、装着時には前記収納部内から引き出されて露出されるストラップと、
    　装着するために前記収納部内から引き出された前記ストラップを固定する固定具とを有し、
    　前記固定具により固定された前記ストラップの露出される範囲に、可視光外の特定の波長光を反射する識別部材が設けられた拘束装置。
  9. 　座席に着席した搭乗者の肩上位置に前記収納部から引き出された前記ストラップを誘導する誘導部材が設けられ、
    　前記ストラップが前記固定具により固定された時に、前記誘導部材により誘導された前記ストラップの搭乗者の肩上位置周辺で露出される範囲に前記識別部材が設けられた請求項８記載の拘束装置。
  10. 　コンピュータを、
    　装着時と非装着時において露出される範囲が変化するストラップが設けられた拘束装置の画像を撮影装置により撮影させる手段と、
    　前記撮影装置により撮影された画像から、前記ストラップの装着時に露出される範囲に付加された識別部材に相当する識別画像を検出させる手段として機能させるための装着検出プログラム。
PCT/JP2016/075446 2016-08-31 2016-08-31 装着検出装置、撮影装置、拘束装置及び装着検出プログラム WO2018042536A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP16915097.6A EP3508385B1 (en) 2016-08-31 2016-08-31 Wearing detection apparatus, imaging apparatus, restraint device, and wearing detection program
PCT/JP2016/075446 WO2018042536A1 (ja) 2016-08-31 2016-08-31 装着検出装置、撮影装置、拘束装置及び装着検出プログラム
JP2018514489A JP6629434B2 (ja) 2016-08-31 2016-08-31 装着検出装置、撮影装置、拘束装置及び装着検出プログラム
US16/288,294 US10997440B2 (en) 2016-08-31 2019-02-28 Wearing detection apparatus, imaging apparatus, restraint device, and wearing detection program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/075446 WO2018042536A1 (ja) 2016-08-31 2016-08-31 装着検出装置、撮影装置、拘束装置及び装着検出プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/288,294 Continuation US10997440B2 (en) 2016-08-31 2019-02-28 Wearing detection apparatus, imaging apparatus, restraint device, and wearing detection program

Publications (1)

Publication Number Publication Date
WO2018042536A1 true WO2018042536A1 (ja) 2018-03-08

Family

ID=61300380

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/075446 WO2018042536A1 (ja) 2016-08-31 2016-08-31 装着検出装置、撮影装置、拘束装置及び装着検出プログラム

Country Status (4)

Country Link
US (1) US10997440B2 (ja)
EP (1) EP3508385B1 (ja)
JP (1) JP6629434B2 (ja)
WO (1) WO2018042536A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019209908A (ja) * 2018-06-07 2019-12-12 トヨタ自動車株式会社 シートベルト装着状態判定装置
WO2020104352A1 (de) * 2018-11-21 2020-05-28 Trw Automotive Gmbh Verfahren zur herstellung eines gurtbandes für ein sicherheitsgurtsystem in einem fahrzeug, gurtband sowie fahrzeug mit gurtband

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10501048B2 (en) * 2018-01-19 2019-12-10 Ford Global Technologies, Llc Seatbelt buckling detection
US10850702B2 (en) * 2019-03-18 2020-12-01 Pony Ai Inc. Vehicle seat belt monitoring
CN113874259B (zh) * 2019-04-04 2023-11-03 乔伊森安全系统收购有限责任公司 有源光学回射器的检测及监控
US11117545B2 (en) * 2019-04-19 2021-09-14 GM Global Technology Operations LLC System and method for determining seatbelt routing
US11247698B2 (en) * 2019-08-28 2022-02-15 Toyota Motor North America, Inc. Methods and systems for monitoring rear objects in a vehicle
EP3848256A1 (en) 2020-01-07 2021-07-14 Aptiv Technologies Limited Methods and systems for detecting whether a seat belt is used in a vehicle
US20220203930A1 (en) * 2020-12-29 2022-06-30 Nvidia Corporation Restraint device localization
US20220250570A1 (en) * 2021-02-05 2022-08-11 Veoneer Us, Inc. Seatbelt buckle engagement detection
US11975683B2 (en) * 2021-06-30 2024-05-07 Aptiv Technologies AG Relative movement-based seatbelt use detection

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007055294A (ja) * 2005-08-22 2007-03-08 Tokai Rika Co Ltd 車両用乗員検知装置
JP2008068742A (ja) * 2006-09-14 2008-03-27 Honda Motor Co Ltd 車両のシートベルト装置
JP4403102B2 (ja) 2004-05-26 2010-01-20 株式会社東芝 エアバッグ装置及び乗員検知装置並びにプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10142792B4 (de) * 2001-08-31 2005-05-04 Daimlerchrysler Ag Verfahren zur Ermittlung des Anlegestatus eines Sicherheitsgurts
US20070195990A1 (en) * 2006-02-16 2007-08-23 Uri Levy Vision-Based Seat Belt Detection System
US20090096200A1 (en) * 2007-10-15 2009-04-16 Elaine Jamison Reflective seatbelts for increasing safety for patrol officers and motorists
JP2009132303A (ja) 2007-11-30 2009-06-18 Denso Corp 車載ディスプレイ作動装置
JP5251539B2 (ja) * 2009-01-21 2013-07-31 マツダ株式会社 車両の状態認識装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4403102B2 (ja) 2004-05-26 2010-01-20 株式会社東芝 エアバッグ装置及び乗員検知装置並びにプログラム
JP2007055294A (ja) * 2005-08-22 2007-03-08 Tokai Rika Co Ltd 車両用乗員検知装置
JP2008068742A (ja) * 2006-09-14 2008-03-27 Honda Motor Co Ltd 車両のシートベルト装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3508385A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019209908A (ja) * 2018-06-07 2019-12-12 トヨタ自動車株式会社 シートベルト装着状態判定装置
WO2020104352A1 (de) * 2018-11-21 2020-05-28 Trw Automotive Gmbh Verfahren zur herstellung eines gurtbandes für ein sicherheitsgurtsystem in einem fahrzeug, gurtband sowie fahrzeug mit gurtband

Also Published As

Publication number Publication date
US20190197326A1 (en) 2019-06-27
JP6629434B2 (ja) 2020-01-15
EP3508385A1 (en) 2019-07-10
JPWO2018042536A1 (ja) 2018-08-30
EP3508385A4 (en) 2020-01-15
EP3508385B1 (en) 2021-07-14
US10997440B2 (en) 2021-05-04

Similar Documents

Publication Publication Date Title
WO2018042536A1 (ja) 装着検出装置、撮影装置、拘束装置及び装着検出プログラム
JP6730505B2 (ja) 装着検出装置、カメラユニット及び装着検出プログラム
EP3191864B1 (en) Radar sensing of vehicle occupancy
US7920722B2 (en) Occupant detection apparatus
CN104908705B (zh) 安全带使用监控的系统和方法
CN111194283A (zh) 乘员安全带的检测和监控
EP1980452A1 (en) Occupant detection apparatus, operation device control system, seat belt system, and vehicle
US20070229661A1 (en) Object detecting system and method
EP1985505A2 (en) Occupant information detection system, occupant restraint system, and vehicle
CN103359035B (zh) 包括多个主动或被动的安全装置的机动车
US20070085669A1 (en) Seat-belt warning device
JP4856506B2 (ja) 車両のシートベルト装置
JP2007055294A (ja) 車両用乗員検知装置
EP4029739B1 (en) Safety apparatus for indicating the usage state of a seat belt
JP2007276576A (ja) 対象物検出システム、作動装置制御システム、車両、対象物検出方法
JP2016199207A (ja) シートベルト警告装置
US20150125126A1 (en) Detection system in a vehicle for recording the speaking activity of a vehicle occupant
JP2010203836A (ja) 車室内状態の認識装置
JP5952063B2 (ja) シートベルト装置
JP2016222145A (ja) 乗員拘束制御装置
JP6187399B2 (ja) 車両用シートベルト警告装置
JP2016199208A (ja) シートベルト警告装置
GB2622599A (en) Method and system for detecting a seatbelt status of a vehicle seat
JP2011182827A (ja) シートベルト変位検出装置
KR20230090556A (ko) 차량의 시트 벨트 검출 방법 및 그 검출 장치

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2018514489

Country of ref document: JP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16915097

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2016915097

Country of ref document: EP

Effective date: 20190401