JP6429413B2 - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP6429413B2
JP6429413B2 JP2017046045A JP2017046045A JP6429413B2 JP 6429413 B2 JP6429413 B2 JP 6429413B2 JP 2017046045 A JP2017046045 A JP 2017046045A JP 2017046045 A JP2017046045 A JP 2017046045A JP 6429413 B2 JP6429413 B2 JP 6429413B2
Authority
JP
Japan
Prior art keywords
vehicle
unit
space
possibility
travel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017046045A
Other languages
English (en)
Other versions
JP2018149853A (ja
Inventor
男 鈴木
男 鈴木
木下 真
真 木下
暢 山住
暢 山住
研太郎 山崎
研太郎 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2017046045A priority Critical patent/JP6429413B2/ja
Priority to CN201810047693.8A priority patent/CN108569202B/zh
Priority to US15/877,859 priority patent/US10325488B2/en
Publication of JP2018149853A publication Critical patent/JP2018149853A/ja
Application granted granted Critical
Publication of JP6429413B2 publication Critical patent/JP6429413B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/525Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking automatically indicating risk of collision between vehicles in traffic or with pedestrians, e.g. after risk assessment using the vehicle sensor data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/547Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking for issuing requests to other traffic participants; for confirming to other traffic participants they can proceed, e.g. they can overtake
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/45Special conditions, e.g. pedestrians, road signs or potential dangers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2400/00Special features or arrangements of exterior signal lamps for vehicles
    • B60Q2400/50Projected symbol or information, e.g. onto the road or car body
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background

Description

この発明は、画像表示装置に係り、特に、自車の前方に光を照射して歩行者が横断する道路上に画像を表示する画像表示装置に関する。
一般的に、画像表示装置は、自車の前方に光を照射して道路上に画像を表示するもので、例えば歩行者に対して道路の横断を許可する横断許可画像を表示することで運転者の意思を歩行者に伝達し、歩行者を安全に横断させることができる。
ここで、後続車および対向車などの他車は、自車の横断許可画像に従って道路を横断する歩行者を認識できない場合があり、道路を横断する歩行者と接触するおそれがある。このため、他車の接近を確認して歩行者を安全に誘導する画像表示装置が求められている。
そこで、歩行者を安全に誘導する技術として、例えば、特許文献1には、歩行者などの移動体に対して分かり易く注意を喚起する路面投影装置が提案されている。この路面投影装置は、他車が接近した場合に停止線のイメージを強調表示するため、歩行者を安全に誘導することができる。
特許第4720650号公報
しかしながら、特許文献1の路面投影装置は、他車の接近のみを確認するため、歩行者に対して適切な画像を表示することが困難であった。例えば、自車を追い越すおそれがない後続車が接近した場合にも、歩行者に対して道路の横断を禁止する横断禁止画像を表示するため、歩行者を無用に不安にさせるおそれがあった。
この発明は、このような従来の問題点を解消するためになされたもので、歩行者に対して適切な画像を表示する画像表示装置を提供することを目的とする。
この発明に係る画像表示装置は、自車の前方に光を照射して歩行者が横断する道路上に画像を表示する光照射部と、自車を運転する運転者が光照射部を操作する操作部と、自車の側方において他車が走行可能な走行空間を検出する空間検出部と、他車が道路を走行する走行情報を取得する走行情報取得部と、走行情報取得部で取得された走行情報および空間検出部で検出された走行空間の位置に基づいて、他車が走行空間を走行する走行可能性を演算する可能性演算部と、可能性演算部で演算された走行可能性が所定の値より小さい場合には操作部の操作に従って歩行者に道路の横断を許可する横断許可画像を表示するように光照射部を制御し、可能性演算部で演算された走行可能性が所定の値以上である場合には操作部が操作されると歩行者に道路の横断を禁止させる横断禁止画像を強制的に表示するように光照射部を制御する照射制御部とを備えるものである。
ここで、走行空間は、他車が自車を追い越すための追い越し空間であることが好ましい。
また、走行情報取得部は、他車の動きを検出する動き検出部を有し、可能性演算部は、動き検出部で検出された他車の動きに基づいて走行可能性を演算することが好ましい。
また、可能性演算部は、動き検出部の検出範囲を求め、検出範囲が一定の距離以下である場合には走行可能性を上昇させることができる。
また、走行情報取得部は、他車の幅を検出する幅検出部を有し、可能性演算部は、幅検出部で検出された他車の幅および空間検出部で検出された走行空間の幅に基づいて、走行可能性を修正することが好ましい。
また、光照射部は、ヘッドランプにより構成されることが好ましい。
この発明によれば、可能性演算部が走行情報取得部で取得された走行情報および空間検出部で検出された走行空間の位置に基づいて他車が走行空間を走行する走行可能性を演算するので、歩行者に対して適切な画像を表示する画像表示装置を提供することが可能となる。
この発明の実施の形態1に係る画像表示装置を備えた自動車の構成を示す図である。 画像表示装置の構成を示すブロック図である。 動き検出部が後続車の動きを検出する様子を示す図である。 実施の形態2に係る画像表示装置の要部を示すブロック図である。 実施の形態2の動き検出部が後続車の動きを検出する様子を示す図である。 実施の形態3の動き検出部が後続車の動きを検出する様子を示す図である。 実施の形態4に係る画像表示装置の要部を示すブロック図である。 実施の形態4の空間検出部が走行空間を検出する様子を示す図である。 実施の形態5に係る画像表示装置の要部を示すブロック図である。 実施の形態1〜5の変形例において空間検出部が走行空間を検出する様子を示す図である。
以下、この発明の実施の形態を添付図面に基づいて説明する。
実施の形態1
図1に、この発明の実施の形態1に係る画像表示装置を備えた自動車の構成を示す。この自動車は、自動車本体1と、画像表示装置2とを有する。
自動車本体1は、前部にヘッドランプ(ヘッドライト)が配置され、運転者が運転する運転席の前側にはフロントガラスが配置されている。
画像表示装置2は、自動車本体1の運転席の近傍に配置された操作部3と、自動車本体1の前部に配置された光照射部4と、フロントガラスの上部近傍に配置された空間検出部5と、自動車本体1の後部に配置された動き検出部6とを有する。
操作部3は、運転者が画像表示装置2の操作を行うためのものである。
光照射部4は、自動車本体1の前方に光を照射して歩行者Wが横断する道路上に画像Gを表示するもので、自動車本体1のヘッドランプと一体に設けられている。光照射部4は、例えば、歩行者Wの横断を許可する横断許可画像および歩行者Wの横断を禁止する横断禁止画像などを道路上に表示する。
ここで、横断許可画像としては、例えば、横断歩道の表示および「横断可能」の文字などが挙げられる。また、横断禁止画像としては、例えば、停止線の表示、「横断禁止」の文字および「車両接近注意」の文字などが挙げられる。
なお、歩行者Wは、歩道を通行する人および自転車で道路の端を通行する人などを含むものである。
空間検出部5は、自動車本体1の側方において後続車Tが自動車本体1を追い越すための追い越し空間S1およびS2を検出する。すなわち、空間検出部5は、車道中央線L1を挟んだ両側の道路のうち、他車が自車と同じ方向に走行する片側の道路において追い越し空間S1およびS2を検出する。この時、空間検出部5は、例えば、車道中央線L1、車線境界線L2および車道外側線L3に基づいて追い越し空間S1およびS2を検出することができる。すなわち、空間検出部5は、自動車本体1の右側部と車道中央線L1の間を追い越し空間S1として検出すると共に自動車本体1の左側部と車道外側線L3の間を追い越し空間S2として検出する。空間検出部5としては、例えばカメラを用いることが好ましい。
なお、自動車本体1は本発明における自車に該当し、後続車Tは本発明における他車に該当する。また、後続車Tは、自動車、バイクおよび自転車を含むものである。
動き検出部6は、後続車Tの動きを検出するもので、例えば、レーザレーダ、ミリ波レーダ、超音波センサおよびカメラなどを用いることができる。具体的には、動き検出部6は、後続車Tの進行方向、速度および加速度などを検出する。
次に、画像表示装置2について詳細に説明する。
図2に示すように、画像表示装置2は、空間検出部5および動き検出部6に接続された可能性演算部7を有し、この可能性演算部7が照射制御部8を介して光照射部4に接続されている。また、操作部3が、照射制御部8に接続されている。
操作部3は、自動車本体1を運転する運転者が照射制御部8を介して光照射部4を操作するものである。
可能性演算部7は、動き検出部6で検出された後続車Tの動きおよび空間検出部5で検出された追い越し空間S1およびS2の位置に基づいて後続車Tの進路を予測し、追い越し空間S1およびS2を後続車Tが走行する走行可能性を演算する。
照射制御部8は、可能性演算部7で演算された走行可能性が所定の値以上か否かを判定する。照射制御部8は、走行可能性が所定の値以上である場合には、歩行者Wに対して道路の横断を禁止させる横断禁止画像を表示するように光照射部4を制御する。一方、照射制御部8は、走行可能性が所定の値より小さい場合には、操作部3の操作に従って光照射部4を制御する。
なお、可能性演算部7および照射制御部8は、CPUと、CPUに各種の処理を行わせるための動作プログラムから構成されるが、それらをデジタル回路で構成してもよい。
次に、この実施の形態1の動作について説明する。
まず、図1に示すように、自動車本体1を運転する運転者は、道路を横断するために待機する歩行者Wの手前で自車を停止させる。ここで、自車の後方には後続車Tが自車と同じ車線を走行しているものとし、自車の停止に伴って後続車Tが自車の後方に停止する。続いて、自車の運転者は、光照射部4により歩行者Wに対して横断許可画像を表示するように操作部3を操作する。
この時、空間検出部5が、自車の側方において後続車Tが追い越し可能な追い越し空間S1およびS2を検出する。また、動き検出部6が、後続車Tの動きを検出する。なお、追い越し空間S1およびS2は、自車の前部近傍から前方の空間を検出することが好ましい。
ここで、図3に示すように、後続車Tが、自車と同じ車線から車線境界線L2を超えて自車の右側の車線へ移動した場合には、この後続車Tの動きが動き検出部6により検出される。
このようにして、空間検出部5で検出された追い越し空間S1およびS2と、動き検出部6で検出された後続車Tの動きは、図2に示すように、可能性演算部7に入力される。可能性演算部7は、動き検出部6で検出された後続車Tの進行方向に基づいて後続車Tの進路を予測し、後続車Tの進路に追い越し空間S1およびS2が含まれるか否かを演算する。そして、可能性演算部7は、後続車Tの進路に追い越し空間S1が含まれる場合には、後続車Tが追い越し空間S1を走行する走行可能性を所定の値以上とする。
このように、可能性演算部7は、後続車Tの進行方向および追い越し空間S1およびS2の位置に基づいて、後続車Tが追い越し空間S1を走行する走行可能性を正確に演算することができる。
また、可能性演算部7は、動き検出部6で検出される後続車Tの速度および加速度に基づいて後続車Tが追い越し空間S1を通過するか否か、すなわち自車を追い越すか否かを演算することが好ましい。可能性演算部7は、後続車Tが追い越し空間S1を通過しないと演算した場合には、後続車Tの進路に追い越し空間S1が含まれても走行可能性を所定の値より低減させることができる。
このように、可能性演算部7は、後続車Tの進行方向、速度および加速度に基づいて走行可能性をより正確に演算することができる。
このようにして、可能性演算部7により演算された走行可能性は、可能性演算部7から照射制御部8に出力される。照射制御部8は、可能性演算部7から入力された走行可能性が所定の値以上である場合には、操作部3の操作に関係なく、光照射部4を制御して道路上に横断禁止画像を強制的に表示させる。一方、照射制御部8は、走行可能性が所定の値より小さい場合には、操作部3の操作に従って光照射部4から道路上に横断許可画像を表示させる。例えば、可能性演算部7により後続車Tが追い越し空間S1を通過しないと演算された場合、および後続車Tが自車の後方で停止したままで動き検出部6により後続車Tの動きが検出されない場合には、照射制御部8は操作部3の操作に従って横断許可画像を表示させる。
なお、可能性演算部7は追い越し空間S1およびS2毎に走行可能性を演算し、照射制御部8は少なくとも1つの追い越し空間S1およびS2において走行可能性が所定の値以上である場合には横断禁止画像を表示するように光照射部4を制御することが好ましい。
本実施の形態によれば、可能性演算部7が動き検出部6で検出された後続車Tの動きおよび空間検出部5で検出された追い越し空間S1およびS2の位置に基づいて後続車Tが追い越し空間S1およびS2を走行する走行可能性を演算するため、歩行者Wに対して適切な画像Gを表示することができる。
実施の形態2
実施の形態1において、後続車Tの幅を検出する幅検出部をさらに有し、可能性演算部7が幅検出部で検出された後続車Tの幅および空間検出部5で検出された追い越し空間S1およびS2の幅に基づいて走行可能性を修正することが好ましい。
例えば、図4に示すように、実施の形態1において幅検出部21を新たに配置して可能性演算部7に接続することができる。
幅検出部21は、後続車Tの幅、すなわち進行方向に対する後続車Tの左右方向の長さを検出するもので、例えばカメラを用いることが好ましい。
空間検出部5は、追い越し空間S1およびS2の位置と共に追い越し空間S1およびS2の幅、すなわち自車の進行方向に対する追い越し空間S1およびS2の左右方向の長さを検出する。
可能性演算部7は、動き検出部6で検出された後続車Tの動きおよび空間検出部5で検出された追い越し空間S1およびS2の位置に基づいて、追い越し空間S1およびS2を後続車Tが走行する走行可能性を演算する。続いて、可能性演算部7は、幅検出部21で検出された後続車Tの幅および空間検出部5で検出された追い越し空間S1およびS2の幅に基づいて走行可能性を修正する。
実施の形態1と同様に、道路を横断するために待機する歩行者Wの手前で自車を停止させると、動き検出部6により後続車Tの動きが検出される。また、幅検出部21が後続車Tの幅を検出すると共に、空間検出部5が追い越し空間S1およびS2の位置および幅を検出する。
ここで、図5に示すように、後続車Tが左側へ移動すると、後続車Tの動きが動き検出部6により検出される。そして、可能性演算部7が、動き検出部6で検出された後続車Tの動きおよび空間検出部5で検出された追い越し空間S2の位置に基づいて、後続車Tの進路に追い越し空間S2が含まれると演算し、走行可能性を所定の値以上とする。この時、可能性演算部7は、幅検出部21で検出された後続車Tの幅H1と空間検出部5で検出された追い越し空間S2の幅H2とに基づいて、追い越し空間S2の幅H2と比較して後続車Tの幅H1が大きいと判定する。これにより、可能性演算部7は、後続車Tが追い越し空間S2を走行不可能と判定し、走行可能性を所定の値より小さくなるように修正する。
これにより、照射制御部8は、操作部3の操作に従って光照射部4から道路上に横断許可画像を表示させる。
本実施の形態によれば、可能性演算部7が幅検出部21で検出された後続車Tの幅H1および空間検出部5で検出された追い越し空間S1およびS2の幅H2に基づいて走行可能性を修正するため、歩行者Wに対してより適切な画像Gを表示することができる。
実施の形態3
実施の形態1および2において、可能性演算部7は、動き検出部6の検出範囲を求め、その検出範囲が一定の距離以下である場合には走行可能性を上昇させることが好ましい。
例えば、図6に示すように、後続車T1が動き検出部6の近傍に停止し、動き検出部6が自車の右側の車線を走行する後続車T2を高精度に検出できないものとする。
ここで、可能性演算部7は、動き検出部6で検出された後続車T1の動きが入力されると、後続車T1の動きに基づいて走行可能性を演算すると共に動き検出部6の検出情報に基づいて動き検出部6の検出範囲を求める。例えば、可能性演算部7は、動き検出部6から送受信されたレーダの送受信時間に基づいて、動き検出部6の検出範囲を求めることができる。
この時、可能性演算部7は、動き検出部6の近傍に停止した後続車T1に妨げられて動き検出部6の検出範囲が一定の距離以下である場合、すなわち動き検出部6の検出範囲が自車の右側の車線を走行する後続車T2を検出できない距離である場合には、追い越し空間S1を後続車T2が走行するおそれがあるため追い越し空間S1の走行可能性を所定の値以上とする。
なお、可能性演算部7は、空間検出部5により追い越し空間S1が検出されない場合には、動き検出部6の検出範囲が一定の距離以下であっても追い越し空間S1の走行可能性を所定の値より小さくすることができる。
本実施の形態によれば、可能性演算部7が動き検出部6の検出範囲が一定の距離以下である場合には走行可能性を上昇させるため、歩行者Wに対して安全性の高い画像Gを表示することができる。
実施の形態4
実施の形態1〜3では、空間検出部5は、自車の側方において後続車Tが自車を追い越すための追い越し空間S1およびS2を検出したが、自車の側方において他車が走行可能な走行空間を検出できればよく、追い越し空間S1およびS2に限られるものではない。
例えば、図7に示すように、実施の形態1において空間検出部5に換えて空間検出部41を配置することができる。
空間検出部41は、自車の側方において他車が走行可能な走行空間を検出するものである。具体的には、空間検出部41は、図8に示すように、車道中央線L1を挟んだ両側の道路、すなわち自車が走行する道路および対向車T3が走行する道路において、後続車T1および対向車T3が走行する走行空間S2およびS3を検出する。この時、空間検出部41は、車道外側線L3に基づいて走行空間S2およびS3を検出することができる。すなわち、空間検出部41は、自動車本体1の右側部と反対車線の車道外側線L3との間を走行空間S3として検出すると共に自動車本体1の左側部と自車が走行する車線の車道外側線L3との間を走行空間S2として検出する。
動き検出部6は、後続車T1および対向車T3の動きを検出するもので、自動車本体1の後部と前部にそれぞれ配置されている。
このような構成により、空間検出部41は、走行空間S2およびS3を検出する。また、自動車本体1の後部に配置された動き検出部6が後続車T1の動きを検出すると共に自動車本体1の前部に配置された動き検出部6が対向車T3の動きを検出する。なお、走行空間S2およびS3は、自車の前部近傍から歩行者Wが横断する領域まで含む前方の空間を検出することが好ましい。
続いて、可能性演算部7が、動き検出部6で検出された後続車T1の動きに基づいて後続車T1が走行空間S2を走行する走行可能性を演算すると共に、対向車T3の動きに基づいて対向車T3が走行空間S3を走行する走行可能性を演算する。そして、可能性演算部7は、それぞれの走行可能性が所定の値以上である場合には、横断禁止画像を表示するように光照射部4を制御する。一方、可能性演算部7は、それぞれの走行可能性が所定の値より小さい場合には、操作部3の操作に従って横断許可画像を表示するように光照射部4を制御する。
本実施の形態によれば、可能性演算部7は後続車T1が走行空間S2を走行する走行可能性に加えて対向車T3が走行空間S3を走行する走行可能性を演算するため、歩行者Wに対して安全性の高い画像Gを表示することができる。
実施の形態5
実施の形態1〜4では、可能性演算部7は、動き検出部6で検出された他車の動きに基づいて他車が走行空間を走行する走行可能性を演算したが、他車が道路を走行する走行情報に基づいて走行可能性を演算できればよく、他車の動きに限られるものではない。
例えば、図9に示すように、実施の形態1の動き検出部6に換えて走行情報取得部51を配置することができる。この走行情報取得部51は、他車が道路を走行する走行情報を取得するものである。走行情報としては、例えば、他車の接近情報、道路の混雑情報および交通規制情報などが挙げられる。走行情報取得部51としては、例えばカーナビゲーションシステムおよび車車間通信システムなどから構成することができる。
可能性演算部7は、走行情報取得部51で取得された走行情報および空間検出部で検出された走行空間の位置に基づいて走行可能性を演算する。
なお、走行情報取得部51は、動き検出部6と共に配置することもできる。
本実施の形態によれば、可能性演算部7が走行情報取得部51で取得された走行情報に基づいて走行可能性を演算するため、歩行者Wに対して適切な画像Gを表示することができる。ただし、可能性演算部7は、動き検出部6で検出された他車の動きに基づいて走行可能性を正確に演算することが好ましい。
なお、上記の実施の形態1〜5において、操作部3を除くこともできる。すなわち、照射制御部8が、走行可能性に基づいて道路上に表示する画像Gを自動的に選択し、その選択した画像Gを表示するように光照射部4を制御する。例えば、照射制御部8は、走行可能性が所定の値以上である場合には横断禁止画像を表示するように光照射部4を制御し、走行可能性が所定の値より小さい場合には横断許可画像を表示するように光照射部4を制御することができる。
また、上記の実施の形態1〜5では、空間検出部は、自車の右側方と左側方にそれぞれ1つの走行空間を検出したが、自車の側方において他車が走行可能な走行空間を検出できればよく、1つの走行空間に限られるものではない。
例えば、図10に示すように、実施の形態1において、空間検出部5は、自車の右側方に2つの追い越し空間S4およびS5を検出することができる。ここで、追い越し空間S4は自車の右側部と車線境界線L2の間の空間であり、追い越し空間S5は車線境界線L2と車道中央線L1の間の空間である。これにより、空間検出部5は、自動車に対応した追い越し空間S5を検出すると共にバイクおよび自転車に対応した追い越し空間S2およびS4を検出することができる。
このように、空間検出部5が他車の種類に応じた追い越し空間S2、S4およびS5を検出することにより、可能性演算部7がより高精度に走行可能性を演算することができる。
また、上記の実施の形態1〜5では、光照射部4は、自動車本体1のヘッドランプと一体に設けられたが、ヘッドランプと別体に設けることもできる。光照射部4としては、例えば、ランプ、LED(Light Emitting Diode)、デジタルミラーデバイス、プロジェクタなどの各種光源から構成することができる。
1 自動車本体、2 画像表示装置、3 操作部、4 光照射部、5,41 空間検出部、6 動き検出部、7 可能性演算部、8 照射制御部、21 幅検出部、51 走行情報取得部、G 画像、W 歩行者、S1,S2,S4,S5 追い越し空間、S3 走行空間、L1 車道中央線、L2 車線境界線、L3 車道外側線、T,T1,T2 後続車、T3 対向車、H1 後続車の幅、H2 追い越し空間の幅。

Claims (6)

  1. 自車の前方に光を照射して歩行者が横断する道路上に画像を表示する光照射部と、
    前記自車を運転する運転者が前記光照射部を操作する操作部と、
    前記自車の側方において他車が走行可能な走行空間を検出する空間検出部と、
    前記他車が道路を走行する走行情報を取得する走行情報取得部と、
    前記走行情報取得部で取得された前記走行情報および前記空間検出部で検出された前記走行空間の位置に基づいて、前記他車が前記走行空間を走行する走行可能性を演算する可能性演算部と、
    前記可能性演算部で演算された前記走行可能性が所定の値より小さい場合には前記操作部の操作に従って前記歩行者に道路の横断を許可する横断許可画像を表示するように前記光照射部を制御し、前記可能性演算部で演算された前記走行可能性が所定の値以上である場合には前記操作部が操作されると前記歩行者に道路の横断を禁止させる横断禁止画像を強制的に表示するように前記光照射部を制御する照射制御部とを備える画像表示装置。
  2. 前記走行空間は、前記他車が前記自車を追い越すための追い越し空間である請求項1に記載の画像表示装置。
  3. 前記走行情報取得部は、前記他車の動きを検出する動き検出部を有し、
    前記可能性演算部は、前記動き検出部で検出された前記他車の動きに基づいて前記走行可能性を演算する請求項1または2に記載の画像表示装置。
  4. 前記可能性演算部は、前記動き検出部の検出範囲を求め、前記検出範囲が一定の距離以下である場合には前記走行可能性を上昇させる請求項3に記載の画像表示装置。
  5. 前記走行情報取得部は、前記他車の幅を検出する幅検出部を有し、
    前記可能性演算部は、前記幅検出部で検出された前記他車の幅および前記空間検出部で検出された前記走行空間の幅に基づいて、前記走行可能性を修正する請求項1〜4のいずれか一項に記載の画像表示装置。
  6. 前記光照射部は、ヘッドランプにより構成される請求項1〜5のいずれか一項に記載の画像表示装置。
JP2017046045A 2017-03-10 2017-03-10 画像表示装置 Active JP6429413B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017046045A JP6429413B2 (ja) 2017-03-10 2017-03-10 画像表示装置
CN201810047693.8A CN108569202B (zh) 2017-03-10 2018-01-18 图像显示装置
US15/877,859 US10325488B2 (en) 2017-03-10 2018-01-23 Image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017046045A JP6429413B2 (ja) 2017-03-10 2017-03-10 画像表示装置

Publications (2)

Publication Number Publication Date
JP2018149853A JP2018149853A (ja) 2018-09-27
JP6429413B2 true JP6429413B2 (ja) 2018-11-28

Family

ID=63446589

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017046045A Active JP6429413B2 (ja) 2017-03-10 2017-03-10 画像表示装置

Country Status (3)

Country Link
US (1) US10325488B2 (ja)
JP (1) JP6429413B2 (ja)
CN (1) CN108569202B (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101823230B1 (ko) * 2016-03-29 2018-01-29 엘지전자 주식회사 외장형 모듈 및 이와 연결되는 차량
JP6593803B2 (ja) 2017-03-10 2019-10-23 株式会社Subaru 画像表示装置
JP6497819B2 (ja) 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP6429413B2 (ja) * 2017-03-10 2018-11-28 株式会社Subaru 画像表示装置
JP6465318B2 (ja) 2017-03-10 2019-02-06 株式会社Subaru 画像表示装置
JP6515125B2 (ja) 2017-03-10 2019-05-15 株式会社Subaru 画像表示装置
JP6465317B2 (ja) 2017-03-10 2019-02-06 株式会社Subaru 画像表示装置
JP6497818B2 (ja) 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP7384038B2 (ja) 2020-01-06 2023-11-21 トヨタ自動車株式会社 乗車位置案内システム
JP7318614B2 (ja) * 2020-09-07 2023-08-01 トヨタ自動車株式会社 情報処理装置、情報処理方法、及び路面標示システム
CN112298019A (zh) * 2020-10-19 2021-02-02 上海仙塔智能科技有限公司 一种礼让系统、方法、车辆及计算机存储介质
CN113002422B (zh) * 2021-01-27 2022-12-16 浙江大华技术股份有限公司 安全行车预警方法、系统、终端及计算机可读存储介质
JP7468401B2 (ja) * 2021-02-22 2024-04-16 トヨタ自動車株式会社 情報処理装置、情報処理システム、情報処理方法、及び表示装置
JP2022149728A (ja) * 2021-03-25 2022-10-07 本田技研工業株式会社 車両制御装置、車両、車両制御装置の動作方法及びプログラム
DE102023204762B3 (de) 2023-05-22 2024-05-02 Volkswagen Aktiengesellschaft Verfahren und System zur Überholfreigabe für Kraftfahrzeuge

Family Cites Families (102)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7783403B2 (en) * 1994-05-23 2010-08-24 Automotive Technologies International, Inc. System and method for preventing vehicular accidents
US7359782B2 (en) * 1994-05-23 2008-04-15 Automotive Technologies International, Inc. Vehicular impact reactive system and method
US5654705A (en) 1996-09-06 1997-08-05 Houten; Ronald Van Apparatus for prompting pedestrians
JP3855439B2 (ja) 1998-03-17 2006-12-13 いすゞ自動車株式会社 夜間運転視界支援装置
CA2379446C (en) 2001-04-03 2007-08-28 Gaetan Jette Warning sign system for entering and exiting garage doors and entrances
US6662108B2 (en) * 2002-01-07 2003-12-09 Ford Global Technologies, Llc Method and apparatus for improving a vehicle safety system using a transponder and GPS
NL1024632C2 (nl) 2003-10-27 2005-04-28 Intertruck Benelux B V Inrichting voor het vermijden van verkeersongelukken waarbij tenminste een auto is betrokken.
JP2006072830A (ja) * 2004-09-03 2006-03-16 Aisin Aw Co Ltd 運転支援システム及び運転支援モジュール
JP2006252264A (ja) 2005-03-11 2006-09-21 Omron Corp 障害物報知装置
GB2436916B (en) * 2006-03-29 2008-09-24 John Turnbull Warning System
JP4720650B2 (ja) 2006-06-30 2011-07-13 アイシン・エィ・ダブリュ株式会社 路面投影装置及び路面投影方法
JP5262057B2 (ja) 2006-11-17 2013-08-14 株式会社豊田中央研究所 照射装置
JP2008242544A (ja) * 2007-03-26 2008-10-09 Hitachi Ltd 衝突回避装置および方法
US7881868B2 (en) * 2007-06-12 2011-02-01 Palo Alto Research Center Incorporated Dual assessment for early collision warning
US7831391B2 (en) * 2007-06-12 2010-11-09 Palo Alto Research Center Incorporated Using segmented cones for fast, conservative assessment of collision risk
JP5151452B2 (ja) 2007-12-19 2013-02-27 株式会社豊田中央研究所 情報表示装置
JP5029456B2 (ja) * 2008-03-25 2012-09-19 トヨタ自動車株式会社 運転支援装置
JP5649568B2 (ja) * 2008-05-21 2015-01-07 アー・デー・ツェー・オートモーティブ・ディスタンス・コントロール・システムズ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング 車両と歩行者との衝突を回避するための運転者援助システム
JP5345350B2 (ja) * 2008-07-30 2013-11-20 富士重工業株式会社 車両の運転支援装置
JP5167051B2 (ja) * 2008-09-30 2013-03-21 富士重工業株式会社 車両の運転支援装置
US8269652B2 (en) * 2009-04-02 2012-09-18 GM Global Technology Operations LLC Vehicle-to-vehicle communicator on full-windshield head-up display
JP5299513B2 (ja) * 2009-08-12 2013-09-25 日本電気株式会社 障害物検知装置及び方法並びに障害物検知システム
JP5278292B2 (ja) * 2009-11-27 2013-09-04 株式会社デンソー 情報提示装置
US9007462B2 (en) 2010-06-18 2015-04-14 Mitsubishi Electric Corporation Driving assist apparatus, driving assist system, and driving assist camera unit
US10223915B2 (en) 2011-01-29 2019-03-05 Russell Haines System that warns in advance of occupants exiting or entering a parked vehicle
US20120224060A1 (en) 2011-02-10 2012-09-06 Integrated Night Vision Systems Inc. Reducing Driver Distraction Using a Heads-Up Display
US8556302B2 (en) * 2011-04-05 2013-10-15 Victaulic Company Pivoting pipe coupling having a movable gripping body
JP2013203251A (ja) * 2012-03-28 2013-10-07 Denso Corp ライト照射制御装置、照射警告システム、ライト制御システム、およびライト照射制御プログラム
DE112013002354T5 (de) 2012-05-07 2015-04-16 Honda Motor Co., Ltd. Verfahren zum Erzeugen virtueller Anzeigeflächen aus Videobildern einer straßenbasierten Landschaft
US10089537B2 (en) * 2012-05-18 2018-10-02 Magna Electronics Inc. Vehicle vision system with front and rear camera integration
EP2884477B1 (en) * 2012-08-07 2020-06-17 Sony Corporation Information processing device, information processing method, and information processing system
JP5696701B2 (ja) * 2012-08-31 2015-04-08 株式会社デンソー 対歩行者報知装置
JP2014061786A (ja) * 2012-09-21 2014-04-10 Sony Corp 移動体およびプログラム
US9558409B2 (en) * 2012-09-26 2017-01-31 Magna Electronics Inc. Vehicle vision system with trailer angle detection
US9196164B1 (en) * 2012-09-27 2015-11-24 Google Inc. Pedestrian notifications
DE102013113054B4 (de) * 2012-12-03 2022-01-27 Denso Corporation Zielerfassungsvorrichtung zum Vermeiden einer Kollision zwischen einem Fahrzeug und einem durch einen an dem Fahrzeug montierten Sensor erfassten Ziel
US8996224B1 (en) * 2013-03-15 2015-03-31 Google Inc. Detecting that an autonomous vehicle is in a stuck condition
JP6319943B2 (ja) 2013-03-28 2018-05-09 株式会社小糸製作所 車両用ランプ
CN103233403B (zh) 2013-04-24 2015-07-08 梁育元 平交路口纵横互动人车公交便利反瓶颈模式交通
JP6429368B2 (ja) * 2013-08-02 2018-11-28 本田技研工業株式会社 歩車間通信システムおよび方法
US9654738B1 (en) * 2013-08-07 2017-05-16 Waymo Llc Using multiple exposures to improve image processing for autonomous vehicles
JP5842110B2 (ja) * 2013-10-10 2016-01-13 パナソニックIpマネジメント株式会社 表示制御装置、表示制御プログラム、および記録媒体
KR101901962B1 (ko) 2013-11-08 2018-11-07 한국전자통신연구원 내비게이션을 이용한 자율 주행 제어 장치 및 그 방법
US9988047B2 (en) * 2013-12-12 2018-06-05 Magna Electronics Inc. Vehicle control system with traffic driving control
US20150194082A1 (en) 2014-01-03 2015-07-09 John Arthur MCEWAN Systems, devices, and methods for displaying accessories and information from a vehicle
EP2927942A1 (en) * 2014-04-04 2015-10-07 Nordson Corporation X-ray inspection apparatus for inspecting semiconductor wafers
JP6299370B2 (ja) * 2014-04-18 2018-03-28 株式会社デンソー 前照灯制御装置
KR102260343B1 (ko) * 2014-04-18 2021-06-02 헨켈 아게 운트 코. 카게아아 Emi 차폐 조성물 및 그것의 도포 방법
US20150329043A1 (en) * 2014-05-13 2015-11-19 Continental Automotive Systems, Inc. Warning to a Pedestrian in Dangerous Situation
JP2016001464A (ja) * 2014-05-19 2016-01-07 株式会社リコー 処理装置、処理システム、処理プログラム、及び、処理方法
US9475422B2 (en) * 2014-05-22 2016-10-25 Applied Invention, Llc Communication between autonomous vehicle and external observers
JP6379779B2 (ja) 2014-07-16 2018-08-29 日産自動車株式会社 車両用表示装置
JP6434740B2 (ja) * 2014-08-11 2018-12-05 株式会社小糸製作所 車両用表示システム
WO2016024317A1 (ja) * 2014-08-11 2016-02-18 日産自動車株式会社 走行制御装置および走行制御方法
JP6414221B2 (ja) * 2014-08-11 2018-10-31 日産自動車株式会社 車両の走行制御装置及び方法
CN106573572B (zh) 2014-08-19 2019-07-09 三菱电机株式会社 后方路面照射装置和后方路面照射方法
CN106794797B (zh) * 2014-09-01 2019-06-14 三菱电机株式会社 车辆用照射控制系统及图像照射的控制方法
JP6746270B2 (ja) 2014-09-08 2020-08-26 株式会社小糸製作所 車両用表示システム
US9947215B2 (en) * 2014-09-26 2018-04-17 Harman International Industries, Incorporated Pedestrian information system
CN104309525B (zh) * 2014-10-23 2017-01-25 小米科技有限责任公司 辅助行驶的方法及装置
JP6113375B2 (ja) * 2014-11-26 2017-04-12 三菱電機株式会社 運転支援装置および運転支援方法
JP6555462B2 (ja) 2014-12-05 2019-08-07 大日本印刷株式会社 光学装置
JP6376348B2 (ja) 2015-02-20 2018-08-22 ウシオ電機株式会社 車両運転支援装置
JP6319349B2 (ja) * 2015-04-03 2018-05-09 株式会社デンソー 情報提示装置
CN107406030B (zh) 2015-04-10 2021-01-19 麦克赛尔株式会社 影像投射装置
KR101819000B1 (ko) 2015-05-12 2018-01-16 엘지전자 주식회사 차량용 조명 장치 및 이를 포함하는 차량
JP6485234B2 (ja) 2015-06-09 2019-03-20 株式会社デンソー 路面表示装置
JP2017007502A (ja) * 2015-06-22 2017-01-12 株式会社デンソー 警報装置
US10186150B2 (en) * 2015-07-21 2019-01-22 Nissan Motor Co., Ltd. Scene determination device, travel assistance apparatus, and scene determination method
EP3329420A1 (en) * 2015-07-28 2018-06-06 Apple Inc. System and method for light and image projection
JP6551075B2 (ja) 2015-09-03 2019-07-31 オムロン株式会社 違反抑止装置およびこれを備えた違反抑止システム
US10140870B1 (en) * 2015-09-30 2018-11-27 Waymo Llc Occupant facing vehicle display
CN205344677U (zh) * 2015-10-28 2016-06-29 浙江吉利汽车研究院有限公司 用于机动车的行人灯光警示系统
JP6485328B2 (ja) * 2015-11-09 2019-03-20 株式会社デンソー 車両の運転支援装置
KR102149295B1 (ko) * 2015-11-10 2020-08-28 현대자동차주식회사 추월 차선에서의 차량 제어 장치 및 방법
KR20170058188A (ko) * 2015-11-18 2017-05-26 엘지전자 주식회사 차량 운전 보조장치 및 이를 포함하는 차량
KR101824977B1 (ko) * 2015-11-26 2018-02-02 엠텍씨앤케이 주식회사 컨텐츠와 외부기기 연동방법
KR101750178B1 (ko) * 2015-12-02 2017-06-22 엘지전자 주식회사 차량 외부 알람방법, 이를 실행하는 차량 운전 보조장치 및 이를 포함하는 차량
US20170210283A1 (en) 2016-01-22 2017-07-27 Mitsunori Ishida Display device of operation state of automobile brake
US20170217361A1 (en) * 2016-02-02 2017-08-03 Jeffrey James Miller Optical Warning Illumination Array
US9975487B2 (en) * 2016-02-03 2018-05-22 GM Global Technology Operations LLC Rear vision system for a vehicle and method of using the same
US9902311B2 (en) * 2016-02-22 2018-02-27 Uber Technologies, Inc. Lighting device for a vehicle
US9969326B2 (en) * 2016-02-22 2018-05-15 Uber Technologies, Inc. Intention signaling for an autonomous vehicle
US10315566B2 (en) * 2016-03-07 2019-06-11 Lg Electronics Inc. Vehicle control device mounted on vehicle and method for controlling the vehicle
JP6500814B2 (ja) * 2016-03-07 2019-04-17 トヨタ自動車株式会社 車両用照明装置
JP6709651B2 (ja) 2016-03-24 2020-06-17 株式会社小糸製作所 車両用灯具、車両用灯具制御システムおよびこれらを備えた車両
KR101770642B1 (ko) * 2016-05-16 2017-09-05 엘지전자 주식회사 차량용 조명 장치 및 차량
US10048688B2 (en) * 2016-06-24 2018-08-14 Qualcomm Incorporated Dynamic lane definition
US11086334B2 (en) * 2016-07-21 2021-08-10 Mobileye Vision Technologies Ltd. Crowdsourcing a sparse map for autonomous vehicle navigation
US10248124B2 (en) * 2016-07-21 2019-04-02 Mobileye Vision Technologies, Inc. Localizing vehicle navigation using lane measurements
US9896107B1 (en) * 2016-09-30 2018-02-20 Denso International America, Inc. Digital lane change confirmation projection systems and methods
KR101827698B1 (ko) * 2016-11-01 2018-02-12 현대자동차주식회사 차량 및 그 제어방법
KR102039487B1 (ko) * 2016-11-11 2019-11-26 엘지전자 주식회사 차량 주행 제어 장치 및 방법
US10261513B2 (en) * 2016-12-19 2019-04-16 drive.ai Inc. Methods for communicating state, intent, and context of an autonomous vehicle
DE102016125005A1 (de) * 2016-12-20 2018-06-21 Visteon Global Technologies, Inc. Vorrichtung und Verfahren für ein Fahrzeug zum Bereitstellen einer bidirektionalen Kommunikation zwischen dem Fahrzeug und einem Passanten
US9947221B1 (en) * 2017-02-12 2018-04-17 Robert Mazzola Systems and methods of vehicular communication
CN108501949B (zh) * 2017-02-27 2022-11-22 松下电器(美国)知识产权公司 信息处理装置以及记录介质
JP6429413B2 (ja) * 2017-03-10 2018-11-28 株式会社Subaru 画像表示装置
JP6465318B2 (ja) * 2017-03-10 2019-02-06 株式会社Subaru 画像表示装置
JP6497818B2 (ja) * 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP6497819B2 (ja) * 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP6515125B2 (ja) * 2017-03-10 2019-05-15 株式会社Subaru 画像表示装置

Also Published As

Publication number Publication date
US20180261080A1 (en) 2018-09-13
CN108569202B (zh) 2019-06-14
CN108569202A (zh) 2018-09-25
JP2018149853A (ja) 2018-09-27
US10325488B2 (en) 2019-06-18

Similar Documents

Publication Publication Date Title
JP6429413B2 (ja) 画像表示装置
KR102042371B1 (ko) 주차 스페이스 검출 방법 및 장치
JP6273976B2 (ja) 車両用表示制御装置
EP3366540B1 (en) Information processing apparatus and non-transitory computer-readable recording medium
US9278646B2 (en) Driving support apparatus for vehicle
CN108290519B (zh) 用于划分运动区域的控制单元和方法
JP7189329B2 (ja) 車両制御方法及び車両制御装置
CN107792064B (zh) 车辆控制装置
JP6497819B2 (ja) 画像表示装置
WO2018029978A1 (ja) 車外表示処理装置及び車外表示システム
JP2020163900A (ja) 車両制御装置、車両制御方法、及びプログラム
JPWO2019043847A1 (ja) 走行制御装置、車両および走行制御方法
KR20210030975A (ko) 주행 지원 방법 및 주행 지원 장치
US11105651B2 (en) Display system, display control method, and storage medium for facilitating display of a road shape based on detection of a change
CN108064207B (zh) 车辆控制装置
JP2018086949A (ja) 車両制御装置
CN111587206A (zh) 车辆控制装置、具有该车辆控制装置的车辆以及控制方法
CN110888432B (zh) 显示系统、显示控制方法及存储介质
US20220262254A1 (en) Vehicle display device
JP6447962B2 (ja) 車両制御装置
JP6376520B2 (ja) 車両制御装置
JP6376521B2 (ja) 車両制御装置
JP6988717B2 (ja) 衝突判定装置
JP7139632B2 (ja) 車両の自動運転制御ecuおよび自動運転制御方法
JP2017007581A (ja) 車両安全制御装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180724

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181029

R150 Certificate of patent or registration of utility model

Ref document number: 6429413

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250