JP2017027604A - 車両の乗員の視線方向を推定する方法および装置、ならびに車両の乗員に特有の頭部動作増強パラメータを決定する方法および装置 - Google Patents
車両の乗員の視線方向を推定する方法および装置、ならびに車両の乗員に特有の頭部動作増強パラメータを決定する方法および装置 Download PDFInfo
- Publication number
- JP2017027604A JP2017027604A JP2016145108A JP2016145108A JP2017027604A JP 2017027604 A JP2017027604 A JP 2017027604A JP 2016145108 A JP2016145108 A JP 2016145108A JP 2016145108 A JP2016145108 A JP 2016145108A JP 2017027604 A JP2017027604 A JP 2017027604A
- Authority
- JP
- Japan
- Prior art keywords
- head
- occupant
- movement
- eye
- eccentricity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004886 head movement Effects 0.000 title claims abstract description 96
- 238000000034 method Methods 0.000 title claims abstract description 87
- 238000001514 detection method Methods 0.000 claims abstract description 26
- 210000003128 head Anatomy 0.000 claims description 158
- 230000003287 optical effect Effects 0.000 claims description 26
- 238000004590 computer program Methods 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims 2
- 230000000007 visual effect Effects 0.000 abstract description 2
- 230000004424 eye movement Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 7
- 230000004418 eye rotation Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000008921 facial expression Effects 0.000 description 2
- 230000000284 resting effect Effects 0.000 description 2
- 230000000153 supplemental effect Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000004461 rapid eye movement Effects 0.000 description 1
- 230000004434 saccadic eye movement Effects 0.000 description 1
- 210000003786 sclera Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo or light sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30268—Vehicle interior
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Mathematical Physics (AREA)
- Automation & Control Theory (AREA)
- Image Analysis (AREA)
- Eye Examination Apparatus (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【解決手段】方法は、車両100の乗員102の視線方向130を推定する方法であって、最新の頭部動作の角速度に関するセンサデータ120を使用して、乗員の頭部114の最新の頭部動作が終了する頭部固定位置を検出する検出ステップと、乗員の視線方向を推定するために、頭部固定位置と、対象を注視する場合に人の特有の頭部動作パターンの関数である頭部動作増強パラメータとを組み合わせる組合せステップとを含む。
【選択図】図1
Description
最新の頭部動作の角速度に関するセンサデータを使用して、乗員の最新の頭部動作が終了する頭部固定位置を検出するステップと;
乗員の視線方向を推定するために、頭部固定位置と、対象を注視する場合のその乗員に特有の頭部動作パターンの関数である頭部動作増強パラメータとを組み合わせる組合せステップと
を含む。
目の偏心度が、休止位置からの目の最新の動きが終了する固定位置までの動きにおける乗員の目の向きの角度差を表し、頭部の偏心度は、休止位置からの最新の頭部動作が終了する固定位置までの動作における乗員の頭部の向きの角度差を表す場合に、少なくとも1回対象を注視した場合の乗員の目の偏心度および頭部の偏心度についてのセンサデータを使用して、対象を注視した場合の乗員に特有の頭部動作パターンを形成する形成ステップと;
特有の頭部動作パターンを使用して、乗員に特有の頭部動作増強パラメータを決定するステップと
を含む。
A=γAH
計算する。
102 乗員(観察者)
104 動作追跡システム(ヘッドトラッキングシステム、アイトラッキングシステム)
106 車両カメラ装置(車両カメラシステム)
108 第1光学センサ
110 第2光学センサ
112 装置
114 頭部
116 目
118 センサデータ
120 センサデータ
122 目の検出範囲
124 頭部の検出範囲
126 センサデータ
128 センサデータ
130 視線方向
200 装置
202 装置
204 頭部動作パターン
206 増強パラメータ
208 頭部固定位置、頭部の向き
300 方法
302 生成ステップ
304 決定ステップ
400 方法
402 読取ステップ
404 検出ステップ
406 選択ステップ
408 組合せステップ
500 方法
502 第1プロセス部分
504 第2プロセス部分
600 回転軸線
602 休止位置
700 頭部の向き(第1ベクトル)
702 目の向き(第2ベクトル)
AE 角度差、偏心度
AH 角度差、偏心度
i 注視
Claims (14)
- 車両(100)の乗員(102)の視線方向(130)を推定する方法(400)において、
最新の頭部動作の角速度に関するセンサデータ(120)を使用して、乗員(102)の頭部(114)の最新の頭部動作を終了する頭部固定位置(208)を検出するステップ(404)と;
乗員(102)の視線方向(130)を推定するために、頭部固定位置(208)と、対象を注視した場合に乗員に特有の頭部動作パターン(204)の関数である頭部動作増強パラメータ(206,γ)とを組み合わせる組合せステップ(408)と、
を含む方法。 - 請求項1に記載の方法(400)において、
検出するステップ(404)において、前記最新の頭部動作の角速度に関するセンサデータ(120)が、前記頭部(114)の休止位置(602)と頭部(114)の頭部固定位置(208)との間に形成される角度における角速度を表す、
方法(400)。 - 請求項1または2に記載の方法(400)において、
最新の頭部動作の角度の関数として、複数の頭部動作増強パラメータから頭部動作増強パラメータ(206,γ)を選択する選択ステップ(406)を含む方法(400)。 - 請求項1から3までのいずれか一項に記載の方法(400)において、
車両(100)の光学センサ(110)のインターフェイスを介して乗員(102)の最新の頭部動作の角速度に関する前記センサデータ(120)を読み取る読取ステップ(402)を、
含む方法(400)。 - 車両(100)の乗員(102)に特有の頭部動作増強パラメータ(206,γ)を決定する方法(300)において、
該方法(300)が
目の偏心度が、目(116)の休止位置から目(116)の最新の動きを終了する目(116)の固定位置が達成されるまでの動きにおける乗員(102)の目(116)の向き(702)の角度差(AE)を表し、頭部の偏心度が、頭部(114)の休止位置(602)から頭部(114)の最新の動作を終了する頭部(114)の頭部固定位置(208)が達成されるまでの動作における乗員(102)の頭部(114)の向き(700)の角度差(AH)を表す場合に、少なくとも1回対象を注視した場合の乗員(102)の目の偏心度および頭部の偏心度についてのセンサデータ(126)を使用して、対象を注視した場合に乗員(102)に特有の頭部動作パターン(204)を形成する形成ステップ(302)と、
特有の頭部動作パターン(204)を使用して、乗員(102)に特有の頭部動作増強パラメータ(206,γ)を決定するステップ(304)と、
を含む方法(300)。 - 請求項5に記載の方法(300)において、
前記乗員(102)に特有の頭部動作パターン(204)を形成する形成ステップ(302)で、複数回対象を注視した場合の前記乗員(102)の目の偏心度についての多数のセンサデータ(126)および頭部の偏心度についての多数のセンサデータ(28)の平均値を基にする、
方法。 - 請求項5または6に記載の方法(300)において、
前記乗員(102)に特有の頭部動作パターン(204)を形成する形成ステップ(302)を、所定の較正時間に、および/または車両(100)内の光学検出範囲(122)で行う、
方法(300)。 - 請求項5から7までのいずれか一項に記載の方法(300)において、
前記乗員(102)に特有の頭部動作増強パラメータ(206,γ)を決定する決定ステップ(304)で、頭部の偏心度に関するセンサデータ(128)に対応する前記頭部動作パターン(204)の頭部偏心値と、目の偏心度に関するセンサデータ(126)に対応する頭部動作パターン(204)の目の偏心値との割算を行い、頭部の偏心値が割算の被除数を形成し、目の偏心値が割算の除数を形成する、
方法(300)。 - 請求項5から8までのいずれか一項に記載の方法(300)において、
前記乗員(102)に特有の頭部動作増強パラメータ(206,γ)を決定する決定ステップ(304)で、あらかじめ設定された値が特有の頭部動作増強パラメータ(206,γ)として初期設定され、所定の時間間隔をおいて乗員(102)の目の偏心度の最新のセンサデータ(126)の値および頭部の偏心度の最新のセンサデータ(128)の値を更新および/または変更する、
方法(300)。 - 請求項5から9までのいずれか一項に記載の方法(300)において、
対象を注視した場合の前記乗員(102)の目(116)の動きの角速度に関するセンサデータ(118)を使用して目の固定位置を検出するステップを、
含む方法。 - 車両(100)の乗員(102)の視線方向を推定する方法(500)において、
該方法(500)が、請求項5から10までのいずれか一項に記載の方法(300)のステップ;および
請求項1から4までのいずれか一項に記載の方法(400)のステップを含む方法(500)。 - 請求項5から10までのいずれか一項に記載の方法(300)および/または請求項1から4までのいずれか一項に記載の方法(400)および/または請求項11に記載の方法(500)を実施するように構成された装置(112)。
- 請求項5から10までのいずれか一項に記載の方法(300)および/または請求項1から4までのいずれか一項に記載の方法(400)および/または請求項11に記載の方法(500)を実施するように構成されたコンピュータプログラム。
- 請求項13に記載のコンピュータプログラムが記憶されている機械読取可能な記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015214116.0A DE102015214116A1 (de) | 2015-07-27 | 2015-07-27 | Verfahren und Einrichtung zum Schätzen einer Blickrichtung eines Fahrzeuginsassen, Verfahren und Einrichtung zum Bestimmen eines für einen Fahrzeuginsassen spezifischen Kopfbewegungsverstärkungsparameters und Verfahren und Vorrichtung zum Blickrichtungsschätzen eines Fahrzeuginsassen |
DE102015214116.0 | 2015-07-27 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017027604A true JP2017027604A (ja) | 2017-02-02 |
JP6768390B2 JP6768390B2 (ja) | 2020-10-14 |
Family
ID=57795385
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016145108A Active JP6768390B2 (ja) | 2015-07-27 | 2016-07-25 | 車両の乗員の視線方向を推定する方法および装置、ならびに車両の乗員に特有の頭部動作増強パラメータを決定する方法および装置 |
Country Status (4)
Country | Link |
---|---|
US (2) | US10380441B2 (ja) |
JP (1) | JP6768390B2 (ja) |
CN (1) | CN106406515B (ja) |
DE (1) | DE102015214116A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10701338B2 (en) | 2017-07-25 | 2020-06-30 | Mitsubishi Electric Corporation | Display apparatus |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6982767B2 (ja) * | 2017-03-31 | 2021-12-17 | パナソニックIpマネジメント株式会社 | 検知装置、学習装置、検知方法、学習方法、およびプログラム |
DE102017214546B4 (de) * | 2017-08-21 | 2023-02-02 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zum Betreiben eines Assistenzsystems für ein Fahrzeug und Assistenzsystem |
JP6720951B2 (ja) | 2017-11-15 | 2020-07-08 | オムロン株式会社 | 運転者状態判定装置とその方法およびプログラム |
DE102018214935B4 (de) * | 2018-09-03 | 2023-11-02 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren, Vorrichtung, Computerprogramm und Computerprogrammprodukt zum Ermitteln einer Aufmerksamkeit eines Fahrers eines Fahrzeuges |
US10860098B1 (en) * | 2019-12-30 | 2020-12-08 | Hulu, LLC | Gesture-based eye tracking |
DE102020200221A1 (de) * | 2020-01-09 | 2021-07-15 | Volkswagen Aktiengesellschaft | Verfahren und Vorrichtung zum Schätzen einer Augenposition eines Fahrers eines Fahrzeugs |
DE102020214908B4 (de) | 2020-11-27 | 2024-01-04 | Volkswagen Aktiengesellschaft | Verfahren und Vorrichtung zur Überwachung der Blickrichtung eines Fahrers beim Führen eines Kraftfahrzeugs |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008146356A (ja) * | 2006-12-11 | 2008-06-26 | Nissan Motor Co Ltd | 視線方向推定装置及び視線方向推定方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE515639C2 (sv) | 2000-01-20 | 2001-09-17 | Smart Eye Ab | Anordning och förfarande för att svepa en ljusstråle över ett objekt och system för att låta en användare med ögats hjälp styra en maskin |
ATE454849T1 (de) * | 2002-10-15 | 2010-01-15 | Volvo Technology Corp | Verfahren für die auswertung der kopf- und augenaktivität einer person |
WO2010015962A1 (en) | 2008-08-07 | 2010-02-11 | Koninklijke Philips Electronics N. V. | Method of and system for determining a head-motion/gaze relationship for a user, and an interactive display system |
CN102159136B (zh) * | 2008-09-18 | 2013-09-04 | 学校法人中部大学 | 困意预兆检测装置 |
US20130096820A1 (en) * | 2011-10-14 | 2013-04-18 | Continental Automotive Systems, Inc. | Virtual display system for a vehicle |
CN102915044B (zh) * | 2012-10-25 | 2016-03-30 | 上海大学 | 一种基于仿生机理的机器人头眼协调运动控制方法 |
JP6090129B2 (ja) * | 2013-11-27 | 2017-03-08 | 株式会社デンソー | 視認領域推定装置 |
-
2015
- 2015-07-27 DE DE102015214116.0A patent/DE102015214116A1/de active Pending
-
2016
- 2016-07-22 US US15/217,499 patent/US10380441B2/en active Active
- 2016-07-25 JP JP2016145108A patent/JP6768390B2/ja active Active
- 2016-07-26 CN CN201610592090.7A patent/CN106406515B/zh active Active
-
2019
- 2019-06-26 US US16/452,626 patent/US10509975B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008146356A (ja) * | 2006-12-11 | 2008-06-26 | Nissan Motor Co Ltd | 視線方向推定装置及び視線方向推定方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10701338B2 (en) | 2017-07-25 | 2020-06-30 | Mitsubishi Electric Corporation | Display apparatus |
Also Published As
Publication number | Publication date |
---|---|
US20190318183A1 (en) | 2019-10-17 |
US20170032201A1 (en) | 2017-02-02 |
US10509975B2 (en) | 2019-12-17 |
JP6768390B2 (ja) | 2020-10-14 |
CN106406515A (zh) | 2017-02-15 |
US10380441B2 (en) | 2019-08-13 |
DE102015214116A1 (de) | 2017-02-02 |
CN106406515B (zh) | 2021-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6768390B2 (ja) | 車両の乗員の視線方向を推定する方法および装置、ならびに車両の乗員に特有の頭部動作増強パラメータを決定する方法および装置 | |
US9405982B2 (en) | Driver gaze detection system | |
KR101962302B1 (ko) | 구조화 광을 사용한 안구 추적 | |
US10117577B2 (en) | Visual field calculation apparatus and method for calculating visual field | |
US9526448B2 (en) | State estimation device and state estimation program | |
JP4978721B2 (ja) | 運転支援装置 | |
JP6762157B2 (ja) | 乗員の視線方向を予測する方法および装置 | |
JP7369184B2 (ja) | 運転者注意状態推定 | |
JP2008079737A (ja) | 集中度評価装置及びこれを用いた車両用表示装置 | |
EP3545818B1 (en) | Sight line direction estimation device, sight line direction estimation method, and sight line direction estimation program | |
EP3575926B1 (en) | Method and eye tracking system for providing an approximate gaze convergence distance of a user | |
US20150158494A1 (en) | Method and apparatus for determining carelessness of driver | |
JP2017023519A (ja) | 状態推定装置および状態推定プログラム | |
JP2015085719A (ja) | 注視対象物推定装置 | |
WO2019176492A1 (ja) | 算出システム、情報処理装置、運転支援システム、指標算出方法、コンピュータプログラム、及び記憶媒体 | |
WO2019155914A1 (ja) | データ処理装置、モニタリングシステム、覚醒システム、データ処理方法、データ処理プログラム、及び記憶媒体 | |
JP7267467B2 (ja) | 注意方向判定装置および注意方向判定方法 | |
JP6689470B1 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
JP2005081101A (ja) | 視線方向検出装置及び視線方向検出方法 | |
CN114391129A (zh) | 凝视方向的确定 | |
JP2021527980A (ja) | 高フレームレート画像前処理システム及び方法 | |
JP6859658B2 (ja) | 虚像表示装置および虚像表示方法 | |
JP2023127179A (ja) | 車載装置、情報処理方法、および、プログラム | |
JP2023047835A (ja) | 車載装置および搭乗者モニタリング方法 | |
JP2018106288A (ja) | 撮像状態検出装置、撮像状態検出方法、プログラム、および非一時的記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190711 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200825 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200923 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6768390 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |