JP2010237797A - 画像処理装置および画像処理プログラム - Google Patents
画像処理装置および画像処理プログラム Download PDFInfo
- Publication number
- JP2010237797A JP2010237797A JP2009082714A JP2009082714A JP2010237797A JP 2010237797 A JP2010237797 A JP 2010237797A JP 2009082714 A JP2009082714 A JP 2009082714A JP 2009082714 A JP2009082714 A JP 2009082714A JP 2010237797 A JP2010237797 A JP 2010237797A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- vehicle
- predetermined
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
【課題】
前方を撮影する1つのカメラで撮影した画像情報に基づいて、側方の画像を形成する。
【解決手段】
本発明の画像処理装置は、時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、抽出した所定領域を変形して変形所定領域を生成する変形処理と、画像情報に対応する移動関連情報に基づいて、複数の変形所定領域を合成する合成処理を行うことを特徴とする。
【選択図】図6
前方を撮影する1つのカメラで撮影した画像情報に基づいて、側方の画像を形成する。
【解決手段】
本発明の画像処理装置は、時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、抽出した所定領域を変形して変形所定領域を生成する変形処理と、画像情報に対応する移動関連情報に基づいて、複数の変形所定領域を合成する合成処理を行うことを特徴とする。
【選択図】図6
Description
本発明は、車両などに搭載されたカメラで撮影した画像情報を処理する画像処理装置、および画像処理プログラムに関する。
近年、超音波センサ、カメラ、GPSなど各種センシング技術を車両に搭載し、安全性や快適性を向上させる各種製品が開発されている。中でも、画像情報を提供する車載カメラは、その機能の向上、並びに低価格化により、駐車を補助するバックモニターや全方位モニター、或いは、事故の状況を記録するドライブレコーダなど広く一般に普及しつつある。
特許文献1には、このような車載カメラを利用した多機能車載カメラシステムが記載されている。この多機能車載カメラシステムでは、図3に示されるように、車両の周囲に、前方を撮影する前方カメラ11、真後ろを撮影するリアカメラ18など合計8個のカメラが搭載され、車両の状況を示す信号に応じて、画像処理に使用するカメラの画像を指定するとともに、画像処理手段での画像処理の形態を切り換えることで、安全運転を支援する画像を、運転状況に応じた適切なタイミングで、また、運転者に分かり易い表示形態で表示することが開示されている。
この特許文献1における表示形態としては、隣り合うカメラで取得した画像を繋ぎ合わせて形成したパノラマ画像、全周画像、結合画像などが挙げられ、これらの画像により、運転者は一目で広い範囲の状況を知ることができる。
一方、車両に搭載されるカメラは、このような車両の状況把握だけでなく、事故による衝撃を検出することで、事故直前の映像を記録する事故状況を把握するドライブレコーダにも利用されている。
さらには、車載カメラで撮影した画像をGPSで取得した位置情報と対応付け、インターネット上で地図情報と併せて公開する地図情報サービスも実用化されている。このような地図情報サービスによれば、実際の現場の様子や、走行ルートをインターネット上の地図を参照しながら確認することが可能となっている。
この地図情報サービスに用いられる画像には、車両の全周囲を見渡せるようなパノラマ画像が用いられているが、特許文献2には、このようなパノラマ画像を形成する映像生成システムとして、複数のカメラからなる全方位カメラシステムを用い、カメラ間の映像をパノラマ画像として合成し、実写映像を元にしたウォークスルーアニメーションを形成することが開示されている。
特許文献1、特許文献2ではパノラマ画像のように広い領域の画像を形成するため多数のカメラを車両に搭載することが必要とされる。特に、地図情報サービスでは沿道の風景
が必要とされる場合が多く、その場合、左右両方の沿道風景を撮影するためには、少なくとも2台のカメラを用意する必要があり、カメラ台数の増加に伴うコスト増加や、車両上での限られたスペース内でのカメラの設置場所の確保といった問題が生じる。
が必要とされる場合が多く、その場合、左右両方の沿道風景を撮影するためには、少なくとも2台のカメラを用意する必要があり、カメラ台数の増加に伴うコスト増加や、車両上での限られたスペース内でのカメラの設置場所の確保といった問題が生じる。
本発明の画像形成装置は、時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、所定領域を変形して変形所定領域を生成する変形処理と、画像情報に対応する移動関連情報に基づいて、複数の変形所定領域が重複する領域を変化させて合成する合成処理を行うことを特徴とするものである。
さらに、本発明の画像形成装置において、合成処理は、移動関連情報により画像情報と後の時刻の画像情報間の移動距離を算出し、移動距離に基づいて重複する領域を変化させて合成することとしている。
さらに、本発明の画像形成装置において、合成処理は、複数の変形所定領域が重複する領域の幅を変化させて合成することとしている。
さらに、本発明の画像形成装置において、出力画像には、位置情報が付加されることとしている。
また、本発明の画像形成プログラムは、時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、所定領域を変形して変形所定領域を生成する変形処理と、画像情報に対応する移動関連情報に基づいて、複数の変形所定領域が重複する領域を変化させて合成する合成処理を行うことを特徴とするものである。
図1は、本発明の実施形態に係る前方カメラによる撮影の様子を示した図である。本実施形態では、自車のフロントグリル中央付近に搭載された前方カメラにて車両前方の景色が撮影されるが、この前方カメラの搭載位置は、車室内など適宜な位置に設けてもよく、車両の中央から偏位した位置としてもよい。
また、本発明では、時間的に連続する複数の画像情報が必要とされるが、その取得については、前方カメラで動画(ムービー)を撮影することで取得することとしてもよいし、適宜な時間間隔にて静止画として取得するものであってもよい。
図2は、本発明の実施形態に係るデータ取得システムを示した図であり、図3は、このデータ取得システムによって取得された取得データの一例を示した図である。図2に示すデータ取得システムは、車両に搭載されるシステムであって、本実施形態では、前方カメラ11、加速度センサ12、GPS13、時計14、制御部15、データベース16から構成されている。
前方カメラ11は、図1にて説明したように車両に設置されるカメラであって、車両前方を撮影して前方画像を取得する。前方画像としては、適宜フレーム間隔にて撮影された動画であっても、適宜時間間隔で撮影された静止画であってもよい。
加速度センサ12は、ジャイロによって構成された各種方向の加速度を検出するセンサであって、三軸ジャイロを利用した場合には、その出力となる加速度情報として、図3に示すように、車両の前後、左右、上下の加速度といったものの他、車体の前後軸まわりの運動、すなわち車体が右や左に傾く運動を示すX軸回転度(ローリング)、車体の左右軸まわりの運動、すなわち車首を上下に振る運動を示すY軸回転度(ピッチング)、車体の上下軸まわりの運動、すなわち車首を左右に振る運動(ヨーイング)を取得することができる。
取得した加速度情報の履歴を累算することで、適宜時刻の車両の速度や位置、移動距離を計算することができる。また、トンネル内などGPS13にて位置情報が取得できない場合には、この加速度情報を利用することで位置情報を補間することが可能となる。
GPS13は、衛星から受信したGPS信号により車両の緯度、経度といった位置情報を出力する装置である。なお、GPS信号には、日時、時刻といった計時情報も含まれているため、計時情報は、時計14からの取得に代えて、このGPS信号を利用することとしてもよい。
時計14は、日時、時刻といった計時情報を出力する装置である。記事情報は、取得した画像情報について時間軸での前後関係を規定するために用いることとしている。また、加速度情報から車両の位置、移動距離を計算する場合には、この計時情報が利用される。なお、画像情報の時間軸での前後関係を特定することができれば、計時情報ではなく、画像情報に対応付けられたシリアル番号などを利用してもよく、また、時刻のような絶対的な計時情報に限らず、ある時点を起点として計時を行う相対的な計時情報を用いることとしてもよい。
制御部15は、前方カメラ11、加速度センサ12、GPS13、時計14などから出力される各種情報を対応付け、取得データとしてデータベース16に記憶させる。図3は、データベース16に対応付けて記憶された取得データの一例を示した図である。
大項目に記載されるように画像情報に、移動関連情報、計時情報が対応付けられる。本実施形態では、このように1つの画像情報に移動関連情報、計時情報を対応付けたものとなっているが、画像情報から移動関連情報を特定できる構成であれば、このような対応付けに限らず、例えば、画像情報、移動関連情報の両者に付された計時情報から特定できるようにするなど各種の態様を採用することができる。そして、計時情報については、前述したように画像情報の時間軸での前後関係を特定することができるのであれば必ずしも必要とされない。
小項目をみると解るように、本実施形態において、画像情報は前方画像であり、移動関連情報は位置情報、加速度情報を含んで構成され、計時情報は日時、時刻を含む情報となっている。なお、この実施形態では、移動関連情報は、位置情報、加速度情報の両方を含んで構成しているが、移動関連情報は、少なくとも画像情報間での撮影時における移動距離が特定できる情報であれば足りるものであって、位置情報、加速度情報のどちらか一方を利用するものであってもよい。
詳細には、位置情報として緯度、経度からなるGPSデータが、そして、加速度情報と
して加速度センサ12で説明した各種の加速度情報が記載されている。加速度情報は、このように各種のものを記録することができるが、後に説明する画像処理において必要となる適宜のものを採用して記録することとしてもよい。
して加速度センサ12で説明した各種の加速度情報が記載されている。加速度情報は、このように各種のものを記録することができるが、後に説明する画像処理において必要となる適宜のものを採用して記録することとしてもよい。
このようにデータベース16には、各種センサで収集した情報が対応付けて記憶されることとなる。本実施形態では、図2のデータ取得システムを車両に搭載することとしたが、このデータ取得システムにおいてデータベース16は、車両外に設置することとしてもよい。例えば、制御部15とデータベース16とを通信回線を介して接続し、図3で説明したような取得データを遠隔地に設置されているデータベース16に送信して記憶させることとしてもよい。
図4は、本発明の実施形態に係る画像処理システムの概略を示した図である。本実施形態の画像処理システムは、データベース21と画像処理装置22にて構成されている。この画像処理システムは、図2のデータ取得システムとその一部を共用することとしても、別のシステムとして構築することとしてもよい。共用する場合、データベース21はデータベース16が、画像処理装置22は制御部15が兼用される。
データベース21には、図1にて説明したデータ取得システムにおけるデータベース16から画像処理装置22における画像処理で必要となる情報が格納される。本実施形態では、少なくとも時間軸での前後関係が判別できる画像情報、そして、位置情報、加速度情報といった移動関連情報が必要とされる。
画像処理装置22は、CPU、GPUなどの制御手段、メモリ、ハードディスクといった記憶手段、各種インタフェースを備えたコンピュータにて構成される。この画像処理装置22は、データベース21から画像情報、移動関連情報を取得し、移動関連情報に基づいて画像情報を加工して出力画像を生成する。
画像処理装置22は、パーソナルコンピュータなどの汎用ハードウェアにプログラムを動作させることで構成されることとしてもよい。その場合、本発明はハードウェア上で動作動作するプログラムとして提供される。
では、この画像処理装置22における画像処理について図5〜図8を用いて説明する。図5は、本発明の実施形態に係る画像処理を示すフロー図であり、図6、図8は、本発明の実施形態に係る側方画像形成の様子を示した模式図であり、図7は、本発明の実施形態に係る車両の走行特性を示した図である。
図5は、前方画像から側方画像を形成する一連の画像処理を示したフロー図である。S100にて画像処理が開始されると、まず、時刻Tにおける画像情報(前方画像)がデータベース21から取得される。S102ではS101で取得された画像情報から所定領域の抽出される。図6(a)には、この所定領域の抽出の様子が示されている。この実施形態では、画像情報において左側に位置する台形状の領域を所定領域として抽出している。このように所定領域を台形状としたのは、画像における画角、遠近感を考慮したことを理由とするものである。画像における画角、遠近感は、カメラの光学系によって異なったものとなるため、この所定領域の抽出は撮像に利用された前方カメラ11の各種光学系特性に応じて変更されることとしてもよい。
S103ではS102にて抽出された所定領域に対して変形処理を行う。この変形処理にはアフィン変換などが用いられ、抽出された所定領域が矩形状となるように変形して変形所定領域を形成する。例えば、図6(a)で抽出された所定領域の場合には、台形の短辺側を引き伸ばすようにして図6(c)に示されるような矩形状の変形所定領域が形成さ
れる。
れる。
S104では次の時刻の画像情報がデータベース21から取得される。この画像情報についても、所定領域の抽出(S105)、変形処理による変形所定領域の形成(S106)が前回の画像情報と同様に実行される。図6(b)は、図6(a)に対して時間軸で後に位置する画像情報であって、図6(d)は、図6(b)の所定領域から形成された変形所定領域を示している。
S107では図3にて説明した位置情報、加速度情報といった移動関連情報に基づいて、複数の変形所定領域を重複させる重複領域が算出される。ここで重複領域とは連続する複数の画像情報から取得された変形所定領域を、幅方向、高さ方向についてどれだけ重ねるかを示す情報であって、少なくとも幅方向について算出される。
重複領域は、移動関連情報に基づいて変化させた領域とされることになるが、これは本実施形態において、時間の経過につれて撮影位置が変化することを理由としている。図9は、車両走行の特性を示した図であって、図9(a)は、移動方向Aにて直進する車両の時刻Tと時刻T+1での位置を示した図である。図に示すように時刻TとT+1の間に車両は移動距離Lだけ直進した場合、画像情報の所定領域における撮影範囲は、ちょうどズーム効果が働いたように、画像情報の中央部から側方に向かって移動する。本発明は、この撮影範囲の移動に基づいて、重複領域を変化させて合成を行い、前方画像から側方画像を生成することを特徴としている。
特に、この図9(a)のように車両の移動距離を少なくとも利用することで重複領域が算出される。この移動距離Lは、位置情報、加速度情報にて算出できる。緯度、経度といった位置情報のみを利用した場合には、移動距離は時刻Tと時刻T+1の位置情報の差分を取ることで算出できる。移動距離をより正確に算出するため、加速度情報を併せて算出することとしてもよい。また、この移動距離Lは、加速度情報のみにても算出することができる。この場合には、過去の加速度情報、並びに、それを取得した計時情報にて算出される。
図9(b)は、時刻Tと時刻T+1の間に車両の移動方向が移動方向Aから移動方向A’に変更された場合を示した図である。このように車両の移動方向が変更された場合には、前方カメラで撮影される方向も変更されることとなる。この場合、車両の移動方向の変更をも考慮して重複領域の算出を行うことで、車両の方向変化による撮影範囲の変化に対応した側方画像を生成することが可能となる。車両の移動方向は、位置情報の履歴や、加速度情報、あるいはその両方に基づいて算出、予測することができる。また、このような車両の左右方向についての方向の変更のみならず、段差を通行することで発生する車両の上下方向の方向の変更を考慮することとしてもよい。この場合、上下方向に関する加速度情報を用いて方向の検出が可能となる。
また、図9(b)のように車両が移動方向を変更した場合においても移動距離L’のみで重複領域を算出することとしてもよい。これは、車両は急激に方向を変更することができないという車両の走行特性や、撮像間隔が短い場合においては、車両の左右方向の変化量が車両の前後方向の変化量に対して小さいものであることを理由としている。
S108では、S107で算出された重複領域に基づいて、時間的に前後する変形所定領域を合成する合成処理が行われる。この合成処理は、複数の変形所定領域を接続する処理であって、重複領域については、どちらか一方、あるいは、両方の変形所定領域を用いて画像が形成される。両方の変形所定領域を利用する場合には、両者の画素単位での平均をとるなどの処理を施すこととしてもよいし、両方を用いて解像度の高い画像を形成する
こととしてもよい。
こととしてもよい。
また、この合成処理において、変形所定領域間の相関を取って両者の位置あわせを正確に行うようにすれば、変形所定領域間での画像ずれを抑制することが可能となる。重複領域が既に算出されているため、相関のためにずらす量も限定されたものとなり、相関のための計算量は抑制されたものとなる。
図6(e)に示される合成処理による合成画像の例では、幅L1を有する斜線部の領域が重複領域に相当する部分となっており、このように移動関連情報に基づいて算出された重複領域に基づいて変形所定領域を合成することで、側方画像の幅を順次増加させることができる。
S109ではS108で合成された画像を出力画像として設定する。また、この出力画像に位置情報を対応付けることで、地図情報などから出力画像を検索することが可能となる。本実施形態では、撮影位置が異なる複数の画像情報に基づいて出力画像が作成されるため、適宜な撮影位置の位置情報を代表させたり、位置情報の平均をとるなどして位置情報の対応付けを行うことが考えられるが、出力画像の領域毎に位置情報を対応付けることとしてもよい。
S110では、S109で設定した出力画像のサイズ(幅方向、高さ方向の大きさ)が所定値を超えているか否かが判断される。超えた場合には画像処理を終了する。一方、超えていない場合には、S104に戻って再度、次の時刻の画像情報を取得し、S104〜S109の処理を実行する。このように、前方画像からの所定領域の抽出、変形、合成を再帰的に行うことで、前方画像から側方画像を生成することが可能となる。
図6では、画像情報の左側について側方画像を生成する例を示したが、図8に示すように右側についても同様に画像処理を行うことで、前方画像から左右両方の側方画像の生成が可能となる。
以上、本発明によれば、前方を撮影する1つのカメラで撮影された前方画像に基づいて側方画像を生成することが可能となる。
なお、本発明はこれらの実施形態のみに限られるものではなく、それぞれの実施形態の構成を適宜組み合わせて構成した実施形態も本発明の範疇となるものである。
11…前方カメラ、12…加速度センサ、13…GPS、14…時計、15…制御部、16…データベース、21…データベース、22…画像処理装置
Claims (5)
- 時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、
所定領域を変形して変形所定領域を生成する変形処理と、
画像情報に対応する移動関連情報に基づいて、複数の変形所定領域が重複する領域を変化させて合成する合成処理を行うことを特徴とする
画像処理装置。 - 合成処理は、移動関連情報により画像情報と後の時刻の画像情報間の移動距離を算出し、移動距離に基づいて重複する領域を変化させて合成する
請求項1に記載の画像処理装置。 - 合成処理は、複数の変形所定領域が重複する領域の幅を変化させて合成する
請求項1または請求項2に記載の画像処理装置。 - 出力画像には、位置情報が付加されている
請求項1乃至請求項3のいずれか1項に記載の画像処理装置。 - 時間的に連続する複数の画像情報から所定領域を抽出する抽出処理と、
所定領域を変形して変形所定領域を生成する変形処理と、
画像情報に対応する移動関連情報に基づいて、複数の変形所定領域が重複する領域を変化させて合成する合成処理を行うことを特徴とする
画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009082714A JP2010237797A (ja) | 2009-03-30 | 2009-03-30 | 画像処理装置および画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009082714A JP2010237797A (ja) | 2009-03-30 | 2009-03-30 | 画像処理装置および画像処理プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010237797A true JP2010237797A (ja) | 2010-10-21 |
Family
ID=43092078
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009082714A Pending JP2010237797A (ja) | 2009-03-30 | 2009-03-30 | 画像処理装置および画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010237797A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018078449A (ja) * | 2016-11-09 | 2018-05-17 | トヨタ自動車株式会社 | 画像処理方法 |
JP2021184243A (ja) * | 2020-08-25 | 2021-12-02 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 道路情報データ確定の方法、装置及びコンピュータ記憶メディア |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249103A (ja) * | 2006-03-20 | 2007-09-27 | Zenrin Co Ltd | 道路画像作成システム及び道路画像作成方法,及び道路画像合成装置 |
WO2008130233A1 (en) * | 2007-04-19 | 2008-10-30 | Tele Atlas B.V. | Method of and apparatus for producing road information |
-
2009
- 2009-03-30 JP JP2009082714A patent/JP2010237797A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249103A (ja) * | 2006-03-20 | 2007-09-27 | Zenrin Co Ltd | 道路画像作成システム及び道路画像作成方法,及び道路画像合成装置 |
WO2008130233A1 (en) * | 2007-04-19 | 2008-10-30 | Tele Atlas B.V. | Method of and apparatus for producing road information |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018078449A (ja) * | 2016-11-09 | 2018-05-17 | トヨタ自動車株式会社 | 画像処理方法 |
JP2021184243A (ja) * | 2020-08-25 | 2021-12-02 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 道路情報データ確定の方法、装置及びコンピュータ記憶メディア |
JP7213293B2 (ja) | 2020-08-25 | 2023-01-26 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 道路情報データ確定の方法、装置及びコンピュータ記憶メディア |
US11783570B2 (en) | 2020-08-25 | 2023-10-10 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and apparatus for determining road information data and computer storage medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4863791B2 (ja) | 車両周辺画像生成装置および画像切替方法 | |
JP4831374B2 (ja) | 運転支援装置、運転支援方法、及び運転支援プログラム | |
JP4643860B2 (ja) | 車両用視覚支援装置及び支援方法 | |
JP2008227646A (ja) | 障害物検知装置 | |
WO2005079060A1 (ja) | 運転支援装置 | |
JP4796676B2 (ja) | 車両上方視点画像表示装置 | |
JP2006287892A (ja) | 運転支援システム | |
JP2001218197A (ja) | 車両用周辺表示装置 | |
JP2007235532A (ja) | 車両用監視装置 | |
JP2010016805A (ja) | 画像処理装置、運転支援システム、及び画像処理方法 | |
JP5915923B2 (ja) | 画像処理装置及び運転支援システム | |
US20100002078A1 (en) | Periphery monitoring apparatus | |
JP6375633B2 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
WO2015133072A1 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
JP2010237798A (ja) | 画像処理装置および画像処理プログラム | |
JP6327115B2 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
JP6361415B2 (ja) | 車両用画像処理装置 | |
JP6407596B2 (ja) | 画像処理装置、及び、運転支援システム | |
JP5226621B2 (ja) | 車両用画像表示装置 | |
JP4857159B2 (ja) | 車両運転支援装置 | |
JP2007251880A (ja) | 車両用画像表示装置および画像合成方法 | |
JP2010237797A (ja) | 画像処理装置および画像処理プログラム | |
JP6032141B2 (ja) | 走行路面標示検知装置および走行路面標示検知方法 | |
JP2008182312A (ja) | 撮像画像表示装置 | |
WO2018070338A1 (ja) | 表示制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110325 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120123 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120125 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120704 |