JP2023115849A - 車両用撮像装置 - Google Patents

車両用撮像装置 Download PDF

Info

Publication number
JP2023115849A
JP2023115849A JP2022018312A JP2022018312A JP2023115849A JP 2023115849 A JP2023115849 A JP 2023115849A JP 2022018312 A JP2022018312 A JP 2022018312A JP 2022018312 A JP2022018312 A JP 2022018312A JP 2023115849 A JP2023115849 A JP 2023115849A
Authority
JP
Japan
Prior art keywords
imaging
vehicle
pattern
distance
irradiation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022018312A
Other languages
English (en)
Inventor
眞嘉 田古里
Masayoshi Takori
裕志 槌谷
Hiroshi Tsuchiya
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2022018312A priority Critical patent/JP2023115849A/ja
Priority to CN202310055064.0A priority patent/CN116577766A/zh
Priority to US18/164,630 priority patent/US20230252660A1/en
Publication of JP2023115849A publication Critical patent/JP2023115849A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/12Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/521Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)
  • Measurement Of Optical Distance (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

Figure 2023115849000001
【課題】撮像装置による撮像画像から、撮像対象までの距離を求めることができる車両用撮像装置を提供すること。
【解決手段】明領域と暗領域が交互に一定間隔で繰り返される所定の照射パターンで車両2における所定の配光領域16に光を照射する光照射部(光照射部としてのパターン照射灯具4)と、配光領域16を含む撮像領域17を撮像する撮像部(撮像部としてのカメラ7)と、撮像部が撮像した画像から、隣り合う明領域a1の距離に基づいて撮像対象(歩行者15)までの距離(Dr1、Dr2)を算出する算出手段(算出手段としての演算処理部8)と、を備えた車両用撮像装置。
【選択図】図5

Description

本発明は、車両用撮像装置に関する。
単眼の撮像装置とレーダを利用して、撮像装置による撮像画像から識別された歩行者との距離をレーダで測定し、歩行者との衝突を回避する措置を行う技術が対案されている(例えば、特許文献1参照)。特許文献1の技術では、撮像装置により撮像した物体の撮像画像情報をニューラルネットワーク手法を適用して処理し、歩行者を識別し、歩行者との距離をレーダで算出するようにしている。
特開2007-148835号公報
しかしながら、撮像装置は、歩行者の識別のための情報取得に用いられ、距離情報を得るには、別途にレーダ等の照射式測距手段を備える必要がある。
本発明は、上述のような状況に鑑みてなされたものであり、撮像装置による撮像画像から、撮像対象までの距離を求めることができる車両用撮像装置を提供すること目的とする。
(1) 明領域と暗領域が交互に一定間隔で繰り返される所定の照射パターンで車両(例えば、後述する車両2)における所定の配光領域(例えば、後述する配光領域16)に光を照射する光照射部(例えば、後述するパターン照射灯具4)と、前記配光領域を含む撮像領域(例えば、後述する撮像領域17)を撮像する撮像部(例えば、後述する撮像部としてのカメラ7)と、前記撮像部が撮像した画像から、隣り合う明領域(例えば、後述する明領域a1)の距離に基づいて撮像対象までの距離を算出する算出手段(例えば、後述する算出手段としての演算処理部8)と、を備えた車両用撮像装置。
(1)の車両用撮像装置では、光照射部から明領域と暗領域が交互に一定間隔で繰り返される所定の照射パターンで車両における所定の配光領域に光を照射することにより、歩行者を認識しやすくすると共に、この照射パターンを投射した配光領域を含む撮像領域を撮像部で撮像して得た画像から、算出手段により、隣り合う明領域の距離に基づいて撮像対象までの距離を算出する。撮像部のほかに測距手段を設けることなく撮像対象までの距離を算出することができる。
本発明の一実施形態としての車両用撮像装置を搭載した車両を正面視で示す模式図である。 本発明の一実施形態としての車両用撮像装置における光照射部の概念的構成図である。 本発明の一実施形態としての車両用撮像装置における光照射部の配光領域を夜間の運転視野で見た様子を示す模式図である。 本発明の一実施形態としての車両用撮像装置における撮像部および算出手段の概念的構成図である。 本発明の一実施形態としての車両用撮像装置における撮像部および算出手段による距離算出の手法を説明する図である。
以下、本発明の一実施形態について、図面を参照しながら説明する。なお、以下の説明において、配光領域とは光の照射域であり、照射パターンとは配光領域における光の照射形態である。
図1は、本発明の一実施形態としての車両用撮像装置を搭載した車両を正面視で示す模式図である。車両用前照灯装置1は、車両2の車幅方向中央位置から見て左右対称になる形態で、左側と右側とにそれぞれ備えられている。車両用前照灯装置1は車幅方向外側から内側に向かう順に、ターンシグナル灯具3、光照射部としてのパターン照射灯具4、ロービーム灯具5、ハイビーム灯具6が配置される。車両2の車室内でフロントウィンドウの上辺中央に撮像部としてのカメラ7が前方に向けて設置されている。
ターンシグナル灯具3は、通常のこの種の灯具である。パターン照射灯具4は、明領域と暗領域が交互に一定間隔で繰り返される照射パターンで、車両2における後述する配光領域に光を照射する。ロービーム灯具5は、ロービーム所定の配光領域に光を照射する。ハイビーム灯具6は、ハイビーム所定の配光領域に光を照射する。カメラ7は、パターン照射灯具4の配光領域を含む撮像領域を撮像する。なお、車両用前照灯装置1を備えた車両2を、以下、適宜、自車両2と称する。
図2は、図1の車両用前照灯装置におけるパターン照射灯具4の概念的構成図である。パターン照射灯具4は、投射パターンジェネレータ41、パネル駆動回路42、光変調部43および投射光学系44を含んで構成される。なお、実際には、パネル駆動回路42と光変調部43とは離れて配置されることにより遮熱がはかられ、この両者はハーネスで結ばれる。投射パターンジェネレータ41は、車両2に搭載された図示しない灯具制御ECUから供給されるパターン選択信号Pssで規定される形態の明領域と暗領域が交互に一定間隔で繰り返される照射パターンを表す照射パターン信号Ptsを生成する。
パネル駆動回路42は、灯具制御ECUから供給される起動指令信号Scsにより起動し、投射パターンジェネレータ41が発する照射パターン信号Ptsで規定される明領域と暗領域が交互に一定間隔で繰り返される照射パターンを形成するための素子駆動信号Edsを発して光変調部43を駆動する。これにより、光変調部43が、投射光学系45を通して、後述する配光領域16に照射パターンを車両2前方に照射する。
図1の光照射部としてのパターン照射灯具4による照射パターンは、明領域と暗領域が交互に一定間隔で繰り返される照射パターンであればどのようなパターンでもよく、例えば格子状や水平に対して傾斜した網状などが好適に適用できる。これらの照射パターンは、図2におけるパターン選択信号Pssに応じて投射パターンジェネレータ41から選択的に出力される照射パターン信号Ptsにより規定される。この照射パターン信号Pts応じてパネル駆動回路42が素子駆動信号Edsを発して光変調部43を駆動する。光変調部43が、投射光学系45を通して、後述する配光領域16に上記のような照射パターンを車両2前方に照射する。
図3は、本発明の一実施形態としての車両用撮像装置における光照射部としてのパターン照射灯具4の配光領域16を夜間の運転視野で見た様子を示す模式図である。道路11は、自車両の走行レーン12の両側方に区画線13と区画線14とが引かれている。道路11の自車両2の走行レーン12の側方に歩行者15が居る状況を想定している。配光領域16は自車両2の左前部から前方に伸びるように設定される。図3の場合における配光領域16に投射されている照射パターンは、網状である。カメラ7の撮像領域17は、配光領域16を含んでいる。
発明者等は、既に、明領域と暗領域が交互に繰り返される照射パターンで車両用前照灯装置1から光を照射することにより、歩行者15の存在を素早く捉える技術を提案している。上述のような照射パターンで光を照射すると、実効的に点滅する光を照射する如く作用し、運転者の視覚特性で動きに対して感度が高い周辺視野で歩行者15の存在が顕著に認識される。
明領域と暗領域が交互に繰り返される照射パターンの光を車両前方に照射するパターン照射灯具4を備えている場合には、投射された照射パターンを撮像手段によって撮像した撮像画像を解析することにより、撮像対象物までの距離を算定できる。配光領域16を含む撮像領域17を撮像する撮像部と、撮像部が撮像した画像から、隣り合う明領域の距離に基づいて撮像対象までの距離を算出する算出手段について次に説明する。
図4は、本発明の一実施形態としての車両用撮像装置における撮像部および算出手段の概念的構成図である。撮像部としてのカメラ7の撮像出力Siが算出手段としての演算処理部8に供給される。演算処理部8は画像処理回路81と距離演算部82とを含んで構成される。
画像処理回路81は、カメラ7の撮像出力Siを解析し、カメラ7による撮像領域17の画像から、パターン照射灯具4による照射パターンの、撮像対象の地点に対応する領域の画像データを抽出する。
距離演算部82は、画像処理回路81により抽出された画像データに基づいて、撮像画像空間内での照射パターンのサイズに基づいて、実空間における撮像対象までの距離を算出する。算出された距離を表すデータが演算処理部8から表示器9に供給されてその距離が表示され、また、距離信号Sdとして出力される。演算処理部8における距離算出の手法について次に説明する。
図5は、撮像部としてのカメラ7および算出手段としての演算処理部8による距離算出の手法を説明する図である。図5に模式的に示される車両2に、光照射部としてのパターン照射灯具4、撮像部としてのカメラ7が搭載されているものとする。撮像対象は歩行者15であると仮定する。パターン照射灯具4から投射された照射パターンがカメラ7で撮像される。図5では、カメラ7で撮像された照射パターンに対応する照射パターン画像Lpが示される。即ち、照射パターン画像Lpは撮像画像空間における撮像画像である。
照射パターン画像Lpは、パターン照射灯具4による照射パターンに対応して明領域a1と暗領域a2が交互に一定間隔で繰り返される。撮像画像空間における隣り合う明領域a1、a1の距離は、実空間における歩行者15の車両2(パターン照射灯具4、カメラ7)からの距離と一定の相関がある。
図5の例では、車両2に相対的に近い歩行者15の位置での照射パターン画像Lpについては、隣り合う明領域a1、a1について、それらの水平方向での距離がdh1であり、垂直方向での距離がdv1である。これら撮像画像空間における距離dh1、dv1に基づいて、実空間における歩行者15の車両2(パターン照射灯具4、カメラ7)からの距離Dr1が一義的に定まる。同様に、車両2から相対的に遠い歩行者15の位置での照射パターンLpについては、隣り合う明領域a1、a1について、それらの水平方向での距離がdh2であり、垂直方向での距離がdv2である。これら撮像画像空間における距離dh2、dv2に基づいて、実空間における歩行者15の車両2(パターン照射灯具4、カメラ7)からの距離Dr2が一義的に定まる。従って、撮像画像空間における隣り合う明領域a1、a1の距離と、この距離に対応する実空間における歩行者15の車両2(パターン照射灯具4、カメラ7)からの距離について、一定の普遍性がある対照テーブルを作成することが可能である。図4を参照して説明した演算処理部8における距離演算部82では、このような対照テーブルを参照して、撮像対象である、例えば、歩行者15の車両2(パターン照射灯具4、カメラ7)からの距離を割り出している。
本実施形態の車両用前照灯装置1によれば、以下の効果を奏する。
(1)の車両用撮像装置では、明領域と暗領域が交互に一定間隔で繰り返される所定の照射パターンで車両2における配光領域16に光を照射するパターン照射灯具4と、配光領域16を含む撮像領域17を撮像する撮像部としてのカメラ7と、カメラ7が撮像した画像から、隣り合う明領域a1、a1の距離に基づいて撮像対象までの距離を算出する算出手段としての演算処理部8とを備えた。これにより、パターン照射灯具4明領域と暗領域が交互に繰り返される所定の照射パターンで配光領域16に光を照射することにより、歩行者15を認識しやすくすると共に、配光領域16を含む撮像領域17をカメラ7で撮像して得た画像から、演算処理部8により、隣り合う明領域a1、a1の距離に基づいて撮像対象である、例えば、歩行者15までの距離を算出することができる。
以上、本発明の実施形態について説明したが、本発明はこれに限られない。本発明の趣旨の範囲内で、細部の構成を適宜変更してもよい。例えば、パターン照射灯具4のパネル駆動回路42からの素子駆動信号Edsにより光変調部43を駆動して照射パターンを照射するようにしたが、この構成は別の態様を採り得る。即ち、パターン照射灯具4を、素子駆動信号Edsに類する信号によりマイクロミラー群を含むDMD(Digital Mirror Device)を駆動して、照射パターンを照射する態様のプロジェクターとして構成してもよい。またカメラ7のほかにレーダ等の測距手段を設けてもよく、この場合は車両用撮像装置による距離の算出を他の測距手段の補完とするとよい。
a1…明領域
a2…暗領域
Ps…照射パターン
Pss…パターン選択信号
Pts…照射パターン信号
Scs…起動指令信号
Eds…素子駆動信号
1…車両用前照灯装置
2…車両
3…ターンシグナル灯具
4…パターン照射灯具
5…ロービーム灯具
6…ハイビーム灯具
7…カメラ
8…演算処理部
9…表示器
11…道路
12…自車両の走行レーン
13…区画線
14…区画線
15…歩行者
16…配光領域
17…撮像領域
41…投射パターンジェネレータ
42…パネル駆動回路
43…光変調部
44…投射光学系
81…画像処理回路
82…距離演算部

Claims (1)

  1. 明領域と暗領域が交互に一定間隔で繰り返される所定の照射パターンで車両における所定の配光領域に光を照射する光照射部と、
    前記配光領域を含む撮像領域を撮像する撮像部と、
    前記撮像部が撮像した画像から、隣り合う明領域の距離に基づいて撮像対象までの距離を算出する算出手段と、を備えた、
    車両用撮像装置。


JP2022018312A 2022-02-08 2022-02-08 車両用撮像装置 Pending JP2023115849A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022018312A JP2023115849A (ja) 2022-02-08 2022-02-08 車両用撮像装置
CN202310055064.0A CN116577766A (zh) 2022-02-08 2023-02-03 车辆用拍摄装置
US18/164,630 US20230252660A1 (en) 2022-02-08 2023-02-06 Image-capturing apparatus for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022018312A JP2023115849A (ja) 2022-02-08 2022-02-08 車両用撮像装置

Publications (1)

Publication Number Publication Date
JP2023115849A true JP2023115849A (ja) 2023-08-21

Family

ID=87521227

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022018312A Pending JP2023115849A (ja) 2022-02-08 2022-02-08 車両用撮像装置

Country Status (3)

Country Link
US (1) US20230252660A1 (ja)
JP (1) JP2023115849A (ja)
CN (1) CN116577766A (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009220631A (ja) * 2008-03-13 2009-10-01 Koito Mfg Co Ltd 車両用前照灯装置
JP2012250618A (ja) * 2011-06-02 2012-12-20 Koito Mfg Co Ltd 画像処理装置および配光制御方法
JP2016035403A (ja) * 2014-08-01 2016-03-17 シャープ株式会社 レーザ測距装置
JP2020177854A (ja) * 2019-04-22 2020-10-29 スタンレー電気株式会社 車両用灯具及び路面状態検知システム
JP2021193026A (ja) * 2017-01-20 2021-12-23 株式会社小糸製作所 車両用灯具の制御装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009220631A (ja) * 2008-03-13 2009-10-01 Koito Mfg Co Ltd 車両用前照灯装置
JP2012250618A (ja) * 2011-06-02 2012-12-20 Koito Mfg Co Ltd 画像処理装置および配光制御方法
JP2016035403A (ja) * 2014-08-01 2016-03-17 シャープ株式会社 レーザ測距装置
JP2021193026A (ja) * 2017-01-20 2021-12-23 株式会社小糸製作所 車両用灯具の制御装置
JP2020177854A (ja) * 2019-04-22 2020-10-29 スタンレー電気株式会社 車両用灯具及び路面状態検知システム

Also Published As

Publication number Publication date
US20230252660A1 (en) 2023-08-10
CN116577766A (zh) 2023-08-11

Similar Documents

Publication Publication Date Title
JP5680573B2 (ja) 車両の走行環境認識装置
US10632899B2 (en) Illumination device for a motor vehicle for increasing the perceptibility of an obstacle
JP5959822B2 (ja) 車両用スポットランプ制御装置および車両用スポットランプシステム
JP6075331B2 (ja) 車両用照明装置
JP6963563B2 (ja) 車両用照明システムおよび車両
JP2004231178A (ja) 道路を変調照明する方法およびこの方法を実行するための車両用ヘッドライト
JP2005350010A (ja) ステレオ式車外監視装置
JP7436696B2 (ja) 自動車の周囲モニタリングシステム
JP2013252796A (ja) 車両用前照灯の点灯制御装置、車両用前照灯システム
KR20230117231A (ko) 마이크로 렌즈 어레이 프로젝션 장치, 조명 장치, 및차량
CN112770936A (zh) 灯具系统
JP7312913B2 (ja) 自動車両の照明システムを制御するための方法
WO2018173715A1 (ja) 照明撮像装置
JP2023115849A (ja) 車両用撮像装置
CN110382296B (zh) 照明装置
JP2016166009A (ja) 車両用スポットランプ
JP2017159853A (ja) 車両用光照射システム及び制御装置
WO2022196296A1 (ja) 車両用灯具の制御装置、車両用灯具の制御方法、車両用灯具システム
JP2013147111A (ja) 車両用前照灯の点灯制御装置、車両用前照灯システム
WO2021193645A1 (ja) ゲーティングカメラ、センシングシステム、車両用灯具
JP7137414B2 (ja) 車両用灯具
EP2698743B1 (en) Driver assisting system and method for a motor vehicle
KR20220066353A (ko) 자동차의 주변환경 모니터링 시스템
CN113711286A (zh) 感测系统及车辆
JP2014101068A (ja) 誤検知判定装置および車両制御システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230914

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20231205