WO2020175144A1 - 制御装置及び撮影システム - Google Patents

制御装置及び撮影システム Download PDF

Info

Publication number
WO2020175144A1
WO2020175144A1 PCT/JP2020/005440 JP2020005440W WO2020175144A1 WO 2020175144 A1 WO2020175144 A1 WO 2020175144A1 JP 2020005440 W JP2020005440 W JP 2020005440W WO 2020175144 A1 WO2020175144 A1 WO 2020175144A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
imaging
shooting
unit
lighting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2020/005440
Other languages
English (en)
French (fr)
Inventor
今井　聡
隆太 津田
英人 平原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Isuzu Motors Ltd
Original Assignee
Isuzu Motors Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Isuzu Motors Ltd filed Critical Isuzu Motors Ltd
Priority to US17/433,153 priority Critical patent/US11956525B2/en
Priority to DE112020000918.1T priority patent/DE112020000918T5/de
Priority to CN202080016534.7A priority patent/CN113491101A/zh
Publication of WO2020175144A1 publication Critical patent/WO2020175144A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/02—Illuminating scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means

Definitions

  • the present disclosure relates to a control device and an imaging system for performing imaging with an imaging device.
  • Patent Document 1 Japanese Patent Laid-Open No. 2000-052 4 2 4 2 8
  • the camera used for photographing for detecting the inattentive driving is usually inspected before it is shipped to the vehicle manufacturing factory for whether or not it is installed in the vehicle in the correct orientation. For this inspection, it is necessary for the worker to sit in the driver's seat with the camera facing the camera and to take an image of the worker's face in advance with the camera. This inspection could fail due to the worker not facing the camera when shooting the face.
  • the purpose is to provide a system.
  • the control device is a stage before performing a main photographing for photographing a driving state of a driver by a photographing device for photographing a predetermined range including a face of a driver of a vehicle. And a lighting for emitting light, which is attached to the photographing device or around the photographing device when the preliminary photographing is performed by the preliminary photographing unit.
  • a lighting control unit that lights the device.
  • the control device may include an output unit that outputs a message instructing a driver to look at the lighting device when the pre-shooting is performed by the pre-shooting unit.
  • the image capturing system is arranged obliquely in front of a driver's seat of a vehicle, and an image capturing apparatus for capturing a predetermined range including a face of a driver of the vehicle, the image capturing apparatus or the image capturing.
  • a lighting control unit that lights the lighting device when the preliminary shooting is performed by the preliminary shooting unit.
  • the imaging device and the lighting device may be attached to a pillar on the driver's side.
  • the lighting control unit may detect the presence or absence of an obstacle existing in a blind spot area from the driver, and may turn on the lighting device when the obstacle is detected.
  • Fig. 1 is a diagram for explaining the outline of the imaging system of the embodiment.
  • FIG. 2 is a diagram showing the configuration of an imaging system.
  • Fig. 3 is a flow chart showing a processing procedure of photographing by the photographing system. ⁇ 2020/175 144 3 boxes (:171? 2020 /005440
  • FIG. 1 is a diagram for explaining the outline of the imaging system 3 of the present embodiment.
  • the imaging system 3 includes an imaging device 1 and a lighting device 2 mounted on a vehicle.
  • the image capturing device 1 is a camera for capturing a predetermined area including the face of a vehicle driver.
  • the imaging device 1 is arranged diagonally forward of the driver's seat of the vehicle, but may be arranged in the front direction of the driver's seat.
  • the predetermined range is determined in advance, for example, by a designer or the like setting the orientation and the angle of view of the image capturing device 1 for capturing an average driver's face or upper body.
  • the image capturing device 1 captures an image of the driver in order to detect the driving state of the driver such as looking aside in the image capturing system 3.
  • the image capturing apparatus 1 performs a main image capturing for capturing an image of the driving condition of the driver.
  • the image capturing apparatus 1 performs pre-shooting, which is shooting before the main shooting.
  • the pre-shooting is performed, for example, in order to acquire the feature information indicating the facial features used for determining the face orientation of the driver in the detection of the inattentive driving.
  • Facial features are, for example, the outline of the face and the positional relationship of the eyes or nose.
  • the lighting device 2 is a light source that emits light.
  • the lighting device 2 is attached around the photographing device 1.
  • the lighting device 2 is attached to the pillar on the driver side of the vehicle together with the imaging device 1. Further, the lighting device 2 may be formed integrally with the photographing device 1.
  • the lighting device 2 lights up when pre-shooting is performed by the shooting device 1.
  • the imaging system 3 can cause the driver to face the direction of the imaging device 1 in the pre-shooting. Since the image capturing device 1 generates a captured image of the driver's face while the driver is facing the image capturing device 1, the feature that is the reference for determining the face orientation is acquired from this captured image. can do.
  • FIG. 2 is a diagram showing the configuration of the imaging system 3.
  • Shooting system 3 shoots ⁇ 2020/175 144 4 boxes (: 171-1? 2020 /005440
  • a device 1 a lighting device 2, a millimeter wave radar 3, a display unit 4 and a control device 5 are provided.
  • the millimeter-wave radar 3 uses electromagnetic waves in the millimeter-wave band with a wavelength of approximately 1 cm or less to detect the presence or absence of obstacles in the lateral and rear areas of the vehicle that are blind spots from the driver. Obstacles are, for example, cars and pedestrians.
  • the display unit 4 is a display for displaying a message.
  • the control device 5 includes a storage unit 51 and a control unit 52.
  • the storage unit 51 is composed of, for example, a ROM (Read Only Memory) and a RAM (Random Access Memory).
  • the storage unit 51 stores various programs and various data for operating the control unit 52.
  • the control unit 52 is, for example, an ECU (ElectronicControllUnit). Control unit
  • the 5 2 functions as the pre-imaging unit 5 2 1, the lighting control unit 5 2 2, the output unit 5 2 3 and the state detection unit 5 2 4 by executing various programs stored in the storage unit 5 1. ..
  • the pre-imaging unit 5 21 performs the pre-imaging, which is the imaging in the stage before the main imaging, by the imaging device 1. For example, the pre-imaging unit 5 21 determines whether or not the ON operation of the ignition key has been accepted, and performs the pre-imaging when it is determined that the ON operation has been accepted. The pre-imaging unit 5 21 acquires the feature information indicating the facial features used for determining the driver's face orientation by analyzing the captured image captured by the pre-imaging. Further, the pre-imaging unit 5 21 may perform pre-imaging in order to inspect whether or not the imaging device 1 is attached to the vehicle in the correct orientation at the vehicle manufacturing factory. In this inspection, the pre-imaging unit 5 2 1 images the worker sitting in the driver's seat of the vehicle instead of the driver.
  • the lighting control unit 5 2 2 is used when pre-shooting is performed by the pre-shooting unit 5 2 1.
  • the lighting control unit 52 2 blinks the lighting device 2 immediately before the pre-shooting.
  • the lighting control unit 52 2 can guide the driver to face the imaging device 1 by turning on the lighting device 2 in the pre-shooting. — ⁇ 5,
  • the pre-shooting unit 5 2 1 does not turn on the lighting device 2 in the main shooting by the shooting device 1. ⁇ 2020/175 1445 5: (171?2020/005440
  • the lighting control unit 52 22 detects the presence or absence of an obstacle existing in a blind spot from the driver based on the detection result of the millimeter wave radar 3. When it is determined that the driver has detected an obstacle existing in the blind spot area, the lighting control unit 52 2 turns on the lighting device 2 to warn the driver that the obstacle has been detected. ..
  • the output unit 5 23 outputs a message instructing the driver to look at the lighting device 2 when the pre-imaging unit 5 2 1 performs the pre-imaging. For example, the output unit 5 23 outputs this message to the display unit 4 at the same time when the lighting device 2 is turned on. Further, the output unit 5 23 may output voice including this message by a speaker (not shown).
  • the state detecting unit 5 2 4 performs main photographing by the photographing device 1 at predetermined time intervals after the pre-imaging unit 5 2 1 acquires the characteristic information.
  • the predetermined time is, for example, 0.1 seconds.
  • the state detection unit 5 2 4 detects the driving state of the driver, such as looking aside, on the basis of the photographed image generated from the main photographing.
  • the state detecting unit 5 2 4 specifies the orientation of the driver's face in the captured image generated by the main capturing, using the characteristic information acquired by the pre-capturing unit 5 2 1.
  • the state detection unit 524 determines that the driver's inattentive driving is detected when the angle between the identified face direction and the traveling direction of the vehicle is equal to or greater than the allowable value.
  • a permissible value is, for example, 45° .
  • FIG. 3 is a flow chart showing the processing procedure of shooting by the shooting system 3. This processing procedure is started, for example, when the pre-imaging unit 521 detects that the ignition key ON operation is accepted.
  • the lighting control unit 522 turns on the lighting device 2 immediately before the pre-shooting (
  • the output unit 5 23 outputs a message to the display unit 4 instructing the driver to look at the lighting device 2 (3 1 0 2).
  • the pre-imaging unit 5 21 performs pre-imaging with the imaging device 1 (3 10 3).
  • the state detection unit 5 2 4 starts the main photographing by the photographing device 1 (3 10 4) and finishes the processing. ⁇ 2020/175 144 6 boxes (: 171-1? 2020 /005440
  • the lighting control unit 5 2 2 is configured so that the pre-imaging unit 5 2 2
  • the pre-imaging unit 5 21 can guide the driver to face the imaging device 1 and then perform the pre-imaging. Since the pre-imaging unit 5 21 generates a captured image of the driver's face in a state in which the driver's face orientation is known in the pre-imaging, in order to determine the driver's face orientation from this captured image. It is possible to acquire the characteristic information that serves as the reference of. In addition, the pre-imaging unit 5 21 can prevent the layout from being restricted in the design of the instrumental panel.
  • the pre-imaging unit 5 2 1 works to sit on the driver's seat instead of the driver in the pre-imaging. A photographed image of the person's face is generated.
  • the pre-imaging unit 5 21 determines that the imaging device 1 is attached to the vehicle in the correct orientation when the position of the worker's face is near the center of the captured image.
  • the pre-imaging unit 5 21 guides the operator so as to face the imaging device 1 and then performs the pre-imaging, so that the position of the operator's face can be accurately specified in the captured image. You can Therefore, the pre-imaging unit 5 21 can improve the accuracy of determining whether or not the imaging device 1 is correctly attached.
  • Distributed physically or physically ⁇ Can be integrated and configured. Further, a new embodiment generated by an arbitrary combination of a plurality of embodiments is also included in the embodiments of the present disclosure. The effect of the new embodiment produced by the combination also has the effect of the original embodiment.
  • the imaging device 1 according to the present disclosure can allow the driver or the like to face the imaging device when the driver or the like of the vehicle is imaged in advance.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

車両の運転者の顔を含む所定範囲を撮影する撮影装置１により運転者の運転の様子を撮影するための本撮影を行う前の段階における撮影である事前撮影を行う事前撮影部５２１と、事前撮影部５２１による事前撮影が行われる場合に、撮影装置１又は撮影装置１の周囲に取り付けられた、光を発するための点灯装置２を点灯させる点灯制御部５２２と、を備える。制御装置５は、事前撮影部５２１による事前撮影が行われる場合に、点灯装置を見ることを運転者に指示するメッセージを出力する出力部５２３を備えてもよい。

Description

\¥02020/175144 1 卩（：17 2020/005440
明 細 書
発明の名称 ： 制御装置及び撮影システム
技術分野
[0001 ] 本開示は、 撮影装置により撮影を行うための制御装置及び撮影システムに 関する。
背景技術
[0002] 車両に設けられたカメラで運転者の顔を撮影し、 運転者の顔の撮影画像か ら運転者の脇見運転を検出することが提案されている （例えば、 特許文献 1 を参照） 。
先行技術文献
特許文献
[0003] 特許文献 1 : 日本国特開 2 0 0 5 - 2 4 2 4 2 8号公報
発明の概要
発明が解決しようとする課題
[0004] 脇見運転を検出するためには、 運転者がカメラの方向を向いた状態で運転 者の顔を事前に撮影し、 運転者の顔の特徴を取得しておく必要がある。 しか しながら、 運転者を事前に撮影する際に運転者がカメラの方向を向いていな いことがあり、 運転者の顔の特徴の取得に失敗してしまうという問題が生じ ていた。
[0005] また、 脇見運転の検出のための撮影に用いられるカメラは、 通常、 車両が 出荷される前に車両の製造工場において正しい向きで車両に取り付けられた か否かが検査される。 この検査のために、 作業者がカメラの方向を向いた状 態で運転席に座り、 カメラにより作業者の顔を事前に撮影する必要がある。 この検査は、 作業者が顔の撮影時にカメラの方向を向いていないことに起因 して失敗することがあった。
[0006] 本開示はこれらの点に鑑みてなされたものであり、 事前に撮影する場合に 運転者等に撮影装置の方向を向かせることができる制御装置及び撮影システ 〇 2020/175144 卩（：171? 2020 /005440
ムを提供することを目的とする。
課題を解決するための手段
［0007］ 本開示の第 1の態様の制御装置は、 車両の運転者の顔を含む所定範囲を撮 影する撮影装置により運転者の運転の様子を撮影するための本撮影を行う前 の段階における撮影である事前撮影を行う事前撮影部と、 前記事前撮影部に よる前記事前撮影が行われる場合に、 前記撮影装置又は前記撮影装置の周囲 に取り付けられた、 光を発するための点灯装置を点灯させる点灯制御部と、 を備える。 前記制御装置は、 前記事前撮影部による前記事前撮影が行われる 場合に、 前記点灯装置を見ることを運転者に指示するメツセージを出力する 出力部を備えてもよい。
［0008］ 本開示の第 2の態様の撮影システムは、 車両の運転席の斜め前方に配置さ れ、 車両の運転者の顔を含む所定範囲を撮影する撮影装置と、 前記撮影装置 又は前記撮影装置の周囲に取り付けられた、 光を発するための点灯装置と、 前記撮影装置により運転者の運転の様子を撮影するための本撮影を行う前の 段階における撮影である事前撮影を行う事前撮影部と、 前記事前撮影部によ る前記事前撮影が行われる場合に、 前記点灯装置を点灯させる点灯制御部と 、 を備える。
［0009］ 前記撮影装置及び前記点灯装置が運転席側のピラーに取り付けられてもよ い。 前記点灯制御部は、 運転者から死角となる領域に存在する障害物の有無 を検出し、 前記障害物を検出した場合に、 前記点灯装置を点灯させてもよい 発明の効果
［0010］ 本開示によれば、 車両の運転者等を事前に撮影する場合に運転者等に撮影 装置の方向を向かせることができるという効果を奏する。
図面の簡単な説明
［001 1］ ［図 1］図 1は実施形態の撮影システムの概要を説明するための図である。
［図 2］図 2は撮影システムの構成を示す図である。
［図 3］図 3は撮影システムによる撮影の処理手順を示すフローチヤートである 〇 2020/175144 3 卩（：171? 2020 /005440
発明を実施するための形態
[0012] [撮影システムの概要]
図 1は、 本実施形態の撮影システム 3の概要を説明するための図である。 撮影システム 3は、 車両に搭載された撮影装置 1及び点灯装置 2を備える。 撮影装置 1は、 車両の運転者の顔を含む所定範囲を撮影するためのカメラで ある。 撮影装置 1は、 車両の運転席の斜め前方に配置されるが、 運転席の正 面方向に配置されてもよい。 所定範囲は、 例えば、 平均的な運転者の顔又は 上半身を撮影するための撮影装置 1の向き及び画角を設計者等が設定するこ とによって予め定められる。 撮影装置 1は、 撮影システム 3において運転者 の脇見運転等の運転状態を検出するために、 運転者を撮影する。
[0013] 撮影装置 1は、 運転者の運転の様子を撮影するための本撮影を行う。 また 、 撮影装置 1は、 本撮影を行う前の段階における撮影である事前撮影を行う 。 事前撮影は、 例えば、 脇見運転の検出において運転者の顔の向きの判定に 用いる顔の特徴を示す特徴情報を取得するために行われる。 顔の特徴は、 例 えば、 顔の輪郭や目又は鼻の位置関係である。
[0014] 点灯装置 2は、 光を発する光源である。 点灯装置 2は、 撮影装置 1の周囲 に取り付けられる。 図 1の例では、 点灯装置 2は、 撮影装置 1 とともに車両 の運転席側のピラーに取り付けられている。 また、 点灯装置 2は、 撮影装置 1 と一体的に形成されてもよい。
[0015] 点灯装置 2は、 撮影装置 1 による事前撮影が行われる場合に点灯する。 こ のような構成により、 運転者は、 点灯している点灯装置 2を見るように誘導 される。 したがって、 撮影システム 3は、 事前撮影において運転者に撮影装 置 1の方向を向かせることができる。 撮影装置 1は、 運転者が撮影装置 1の 方向を向いている状態で運転者の顔の撮影画像を生成するので、 この撮影画 像から顔の向きの判定のための基準となる特徴を取得することができる。
[0016] [撮影システムの構成]
図 2は、 撮影システム 3の構成を示す図である。 撮影システム 3は、 撮影 〇 2020/175144 4 卩（：171? 2020 /005440
装置 1、 点灯装置 2、 ミリ波レーダ 3、 表示部 4及び制御装置 5を備える。 ミリ波レーダ 3は、 波長が約 1 c m以下のミリ波帯の電磁波を利用して、 運 転者から死角となる車両の側方及び後方の領域における障害物の有無を検出 する。 障害物は、 例えば、 自動車や歩行者である。 表示部 4は、 メッセージ を表示するためのディスプレイである。
[0017] 制御装置 5は、 記憶部 5 1及び制御部 5 2を備える。 記憶部 5 1は、 例え ば、 R O M (Read On ly Memory) 及び R A M (Random Access Memory) 等に より構成される。 記憶部 5 1は、 制御部 5 2を機能させるための各種プログ ラムや各種データを記憶する。
[0018] 制御部 5 2は、 例えば E C U (E lect ron i c Cont ro l Un i t) である。 制御部
5 2は、 記憶部 5 1 に記憶されている各種プログラムを実行することにより 、 事前撮影部 5 2 1、 点灯制御部 5 2 2、 出力部 5 2 3及び状態検出部 5 2 4として機能する。
[0019] 事前撮影部 5 2 1は、 撮影装置 1 により、 本撮影を行う前の段階における 撮影である事前撮影を行う。 例えば、 事前撮影部 5 2 1は、 イグニッシヨン キーのオン操作を受け付けたか否かを判定し、 オン操作を受け付けたと判定 した場合に事前撮影を行う。 事前撮影部 5 2 1は、 事前撮影により撮影した 撮影画像を解析することにより、 運転者の顔の向きの判定に用いる顔の特徴 を示す特徴情報を取得する。 また、 事前撮影部 5 2 1は、 車両の製造工場に おいて撮影装置 1が正しい向きで車両に取り付けられたか否かを検査するた めに事前撮影を行ってもよい。 この検査では、 事前撮影部 5 2 1は、 運転者 の代わりに車両の運転席に座っている作業者を撮影する。
[0020] 点灯制御部 5 2 2は、 事前撮影部 5 2 1 による事前撮影が行われる場合に
、 点灯装置 2を点灯させる。 例えば、 点灯制御部 5 2 2は、 事前撮影の直前 に点灯装置 2を点滅させる。 点灯制御部 5 2 2は、 事前撮影において点灯装 置 2を点灯させることにより、 運転者に撮影装置 1の方向を向くように誘導 することができる。 —^5、 事前撮影部 5 2 1 には、 撮影装置 1 による本撮影 において点灯装置 2を点灯させない。 〇 2020/175144 5 卩（：171? 2020 /005440
[0021 ] 点灯制御部 5 2 2は、 ミリ波レーダ 3の検出結果に基づいて、 運転者から 死角となる領域に存在する障害物の有無を検出する。 点灯制御部 5 2 2は、 運転者から死角となる領域に存在する障害物を検出したと判定した場合に、 点灯装置 2を点灯させることにより、 障害物を検出したことを運転者に警告 する。
[0022] 出力部 5 2 3は、 事前撮影部 5 2 1 による事前撮影が行われる場合に、 点 灯装置 2を見ることを運転者に指示するメッセージを出力する。 例えば、 出 力部 5 2 3は、 点灯装置 2の点灯と同時に、 このメッセージを表示部 4に出 力する。 また、 出力部 5 2 3は、 スピーカ （不図示） により、 このメッセー ジを含む音声を出力してもよい。
[0023] 状態検出部 5 2 4は、 事前撮影部 5 2 1が特徴情報を取得した後、 所定時 間ごとに撮影装置 1 による本撮影を行う。 所定時間は例えば、 〇. 1秒であ る。 状態検出部 5 2 4は、 本撮影より生成した撮影画像に基づいて、 運転者 の脇見運転等の運転状態を検出する。
[0024] より詳しくは、 状態検出部 5 2 4は、 事前撮影部 5 2 1が取得した特徴情 報を用いて、 本撮影により生成した撮影画像における運転者の顔の向きを特 定する。 状態検出部 5 2 4は、 特定した顔の向きと車両の進行方向とのなす 角度が許容値以上である場合に、 運転者の脇見運転を検出したと判定する。 許容値は、 例えば 4 5 ° である。
[0025] [撮影の処理手順]
図 3は、 撮影システム 3による撮影の処理手順を示すフローチヤートであ る。 この処理手順は、 例えば、 事前撮影部 5 2 1が、 イグニッシヨンキーの オン操作を受け付けたことを検出したときに開始する。
[0026] まず、 点灯制御部 5 2 2は、 事前撮影の直前に点灯装置 2を点灯させる （
3 1 0 1） 。 出力部 5 2 3は、 点灯装置 2の点灯と同時に、 点灯装置 2を見 ることを運転者に指示するメッセージを表示部 4に出力する （3 1 0 2） 。 事前撮影部 5 2 1は、 撮影装置 1 により事前撮影を行う （3 1 0 3） 。 状態 検出部 5 2 4は、 撮影装置 1 による本撮影を開始し （3 1 0 4） 、 処理を終 〇 2020/175144 6 卩（：171? 2020 /005440
了する。
[0027] 運転者は、 通常、 車両を運転している状態では、 進行方向を視認している 。 このため、 ハンドル付近に撮影装置を取り付けたとすれば、 撮影装置によ り運転者を正面から撮影することが可能になる。 しかしながら、 このような 車両では、 ハンドル付近に撮影装置のためのスペースを確保する必要がある ため、 インストウルメンタルパネルの設計においてレイアウトの制約が大き くなるという問題があった。
[0028] これに対し、 本実施形態によれば、 点灯制御部 5 2 2は、 事前撮影部 5 2
1 による事前撮影が行われる場合に、 点灯装置 2を点灯させる。 このため、 事前撮影部 5 2 1は、 運転者に撮影装置 1の方向を向くように誘導した上で 事前撮影を行うことができる。 事前撮影部 5 2 1は、 事前撮影において運転 者の顔の向きが分かっている状態で運転者の顔の撮影画像を生成するので、 この撮影画像から、 運転者の顔の向きを判定するための基準となる特徴情報 を取得することができる。 また、 事前撮影部 5 2 1は、 インストウルメンタ ルパネルの設計においてレイアウトが制約されることを抑制することができ る。
[0029] 事前撮影部 5 2 1は、 車両の製造工場において撮影装置 1が正しい向きで 車両に取り付けられたか否かを検査する場合には、 事前撮影において運転者 の代わりに運転席に座る作業者の顔の撮影画像を生成する。 事前撮影部 5 2 1は、 作業者の顔の位置が撮影画像の中央付近である場合に、 撮影装置 1が 正しい向きで車両に取り付けられていると判定する。 本実施形態では、 事前 撮影部 5 2 1は、 作業者に撮影装置 1の方向を向くように誘導した上で事前 撮影を行うので、 撮影画像において作業者の顔の位置を精度よく特定するこ とができる。 したがって、 事前撮影部 5 2 1は、 撮影装置 1が正しく取り付 けられているか否かを判定する精度を向上させることができる。
[0030] 以上、 実施の形態を用いて本開示を説明したが、 本開示の技術的範囲は上 記実施の形態に記載の範囲には限定されず、 その要旨の範囲内で種々の変形 及び変更が可能である。 例えば、 装置の全部又は一部は、 任意の単位で機能 〇 2020/175144 7 卩（：171? 2020 /005440
的又は物理的に分散 ·統合して構成することができる。 また、 複数の実施の 形態の任意の組み合わせによって生じる新たな実施の形態も、 本開示の実施 の形態に含まれる。 組み合わせによって生じる新たな実施の形態の効果は、 もとの実施の形態の効果を併せ持つ。
[0031] 本出願は、 201 9年2月 25日付で出願された日本国特許出願 （特願 2
01 9-03 1 708） に基づくものであり、 その内容はここに参照として 取り込まれる。
産業上の利用可能性
[0032] 本開示に係る撮影装置 1は、 車両の運転者等を事前に撮影する場合に運転 者等に撮影装置の方向を向かせることができる。
符号の説明
[0033] 1 撮影装置
2 点灯装置
3 ミリ波レーダ
4 表示部
5 制御装置
5 1 記憶部
52 制御部
52 1 事前撮影部
522 点灯制御部
523 出力部
524 状態検出部
3 撮影システム

Claims

\¥02020/175144 8 2020/005440 請求の範囲
[請求項 1 ] 車両の運転者の顔を含む所定範囲を撮影する撮影装置により運転者 の運転の様子を撮影するための本撮影を行う前の段階における撮影で ある事前撮影を行う事前撮影部と、
前記事前撮影部による前記事前撮影が行われる場合に、 前記撮影装 置又は前記撮影装置の周囲に取り付けられた、 光を発するための点灯 装置を点灯させる点灯制御部と、
を備える、 制御装置。
[請求項 2] 前記事前撮影部による前記事前撮影が行われる場合に、 前記点灯装 置を見ることを運転者に指示するメッセージを出力する出力部を備え る、
請求項 1 に記載の制御装置。
[請求項 3] 車両の運転席の斜め前方に配置され、 車両の運転者の顔を含む所定 範囲を撮影する撮影装置と、
前記撮影装置又は前記撮影装置の周囲に取り付けられた、 光を発す るための点灯装置と、
前記撮影装置により運転者の運転の様子を撮影するための本撮影を 行う前の段階における撮影である事前撮影を行う事前撮影部と、 前記事前撮影部による前記事前撮影が行われる場合に、 前記点灯装 置を点灯させる点灯制御部と、
を備える、 撮影システム。
[請求項 4] 前記撮影装置及び前記点灯装置が運転席側のピラーに取り付けられ る、
請求項 3に記載の撮影システム。
[請求項 5] 前記点灯制御部は、 運転者から死角となる領域に存在する障害物の 有無を検出し、 前記障害物を検出した場合に、 前記点灯装置を点灯さ せる、
請求項 3又は 4に記載の撮影システム。
PCT/JP2020/005440 2019-02-25 2020-02-13 制御装置及び撮影システム Ceased WO2020175144A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/433,153 US11956525B2 (en) 2019-02-25 2020-02-13 Control device and photographing system
DE112020000918.1T DE112020000918T5 (de) 2019-02-25 2020-02-13 Steuervorrichtung und photographiersystem
CN202080016534.7A CN113491101A (zh) 2019-02-25 2020-02-13 控制装置及拍摄系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-031708 2019-02-25
JP2019031708A JP2020137053A (ja) 2019-02-25 2019-02-25 制御装置及び撮影システム

Publications (1)

Publication Number Publication Date
WO2020175144A1 true WO2020175144A1 (ja) 2020-09-03

Family

ID=72238827

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/005440 Ceased WO2020175144A1 (ja) 2019-02-25 2020-02-13 制御装置及び撮影システム

Country Status (5)

Country Link
US (1) US11956525B2 (ja)
JP (1) JP2020137053A (ja)
CN (1) CN113491101A (ja)
DE (1) DE112020000918T5 (ja)
WO (1) WO2020175144A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7433188B2 (ja) * 2020-10-15 2024-02-19 三菱電機株式会社 撮像装置、移動体用ディスプレイ、および、ドライバモニタリングシステム
JP7383751B2 (ja) * 2022-03-30 2023-11-20 本田技研工業株式会社 取付構造

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH097099A (ja) * 1995-06-16 1997-01-10 Fuji Heavy Ind Ltd 警報装置
JPH11352987A (ja) * 1998-06-04 1999-12-24 Toyota Motor Corp 音声認識装置
JP2006096316A (ja) * 2004-09-06 2006-04-13 Aisin Seiki Co Ltd 監視装置
JP2008037118A (ja) * 2006-08-01 2008-02-21 Honda Motor Co Ltd 車両用表示装置
JP2009199417A (ja) * 2008-02-22 2009-09-03 Denso Corp 顔追跡装置及び顔追跡方法
JP3208154U (ja) * 2016-09-26 2016-12-28 登志子 北原 脇見運転を察知し警告を発する装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08249454A (ja) 1995-03-07 1996-09-27 Nissan Motor Co Ltd 車両運転者のわき見検出装置
CN100448267C (zh) * 2004-02-06 2008-12-31 株式会社尼康 数码相机
JP2005242428A (ja) 2004-02-24 2005-09-08 Nissan Motor Co Ltd 運転者の顔画像撮影装置
EP1674885A1 (en) 2004-12-21 2006-06-28 Robert Bosch Gmbh Method for detecting objects in the blind zone of the sensor surroundings
US8786704B2 (en) * 2007-08-09 2014-07-22 Donnelly Corporation Vehicle mirror assembly with wide angle element
JP5422622B2 (ja) 2011-09-09 2014-02-19 本田技研工業株式会社 ヘッドアップディスプレイ装置
JP5761074B2 (ja) * 2012-02-24 2015-08-12 株式会社デンソー 撮像制御装置及びプログラム
JP6617602B2 (ja) 2016-02-24 2019-12-11 株式会社デンソー 漫然運転検出システム及び漫然運転検出方法
JP6323602B1 (ja) 2017-08-08 2018-05-16 Tdk株式会社 金属粉末製造装置と金属粉末の製造方法
CN108845327B (zh) 2018-08-13 2022-03-01 河南城建学院 一种大货车视野盲区障碍物的智能检测及提醒系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH097099A (ja) * 1995-06-16 1997-01-10 Fuji Heavy Ind Ltd 警報装置
JPH11352987A (ja) * 1998-06-04 1999-12-24 Toyota Motor Corp 音声認識装置
JP2006096316A (ja) * 2004-09-06 2006-04-13 Aisin Seiki Co Ltd 監視装置
JP2008037118A (ja) * 2006-08-01 2008-02-21 Honda Motor Co Ltd 車両用表示装置
JP2009199417A (ja) * 2008-02-22 2009-09-03 Denso Corp 顔追跡装置及び顔追跡方法
JP3208154U (ja) * 2016-09-26 2016-12-28 登志子 北原 脇見運転を察知し警告を発する装置

Also Published As

Publication number Publication date
US20220182518A1 (en) 2022-06-09
JP2020137053A (ja) 2020-08-31
US11956525B2 (en) 2024-04-09
CN113491101A (zh) 2021-10-08
DE112020000918T5 (de) 2021-11-18

Similar Documents

Publication Publication Date Title
US11267461B2 (en) Driving assistance apparatus and driving assistance method
US9020747B2 (en) Method for recognizing a turn-off maneuver
CN103098110B (zh) 车辆周围监测装置
JP6748206B2 (ja) 運転支援装置
KR20170014168A (ko) 차량의 카메라 장치
US20180335633A1 (en) Viewing direction detector and viewing direction detection system
WO2014109016A1 (ja) 車両周辺表示装置
JP2016031648A (ja) 車載機器
JP2008052029A (ja) 撮像システム、車両乗員検出システム、作動装置制御システム、車両
US11465629B2 (en) Recognition processing apparatus, recognition processing method, and recognition processing program
KR20170120010A (ko) 영상 취득 장치 및 그 방법
WO2015122124A1 (ja) 車両周辺画像表示装置、車両周辺画像表示方法
KR20200071105A (ko) 자동차 상에 존재하는 적어도 하나의 오브젝트를 검출하기 위한 방법, 제어 장치 및 자동차
CN117561191A (zh) 车辆用装置以及车辆控制方法
JP6342074B2 (ja) 車両周辺監視装置及び運転支援システム
JP2018060456A (ja) 車両用制限速度検出装置
US20230169776A1 (en) Driver assistance apparatus, a vehicle, and a method of controlling the same
JP2020137053A (ja) 制御装置及び撮影システム
JP3997945B2 (ja) 周辺画像表示装置
JP7846547B2 (ja) 乗員状態監視装置
WO2020194893A1 (ja) 画像生成装置、カメラ、表示システム及び車両
US20190289185A1 (en) Occupant monitoring apparatus
JP2018060457A (ja) 車両用制限速度検出装置
JP2009282929A (ja) 車両周辺監視装置および車両周辺監視方法
US11813986B2 (en) Driver assistance apparatus, a vehicle, and a method of controlling a vehicle

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20762918

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 20762918

Country of ref document: EP

Kind code of ref document: A1