JP2017201477A - 仮想空間を提供する方法、プログラム、および記録媒体 - Google Patents
仮想空間を提供する方法、プログラム、および記録媒体 Download PDFInfo
- Publication number
- JP2017201477A JP2017201477A JP2016093196A JP2016093196A JP2017201477A JP 2017201477 A JP2017201477 A JP 2017201477A JP 2016093196 A JP2016093196 A JP 2016093196A JP 2016093196 A JP2016093196 A JP 2016093196A JP 2017201477 A JP2017201477 A JP 2017201477A
- Authority
- JP
- Japan
- Prior art keywords
- virtual space
- hmd
- coordinate system
- user
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 38
- 238000012937 correction Methods 0.000 claims description 56
- 230000036544 posture Effects 0.000 abstract description 40
- 230000000007 visual effect Effects 0.000 description 95
- 238000001514 detection method Methods 0.000 description 39
- 230000006870 function Effects 0.000 description 25
- 210000001508 eye Anatomy 0.000 description 18
- 238000012545 processing Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 15
- 230000008859 change Effects 0.000 description 13
- 230000008569 process Effects 0.000 description 9
- 238000005192 partition Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000000547 structure data Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
【解決手段】制御回路部は、仮想空間において再生されるコンテンツに応じて、グローバル座標系におけるHMD(110)に対する仮想カメラ(1)の相対的な傾きまたはグローバル座標系に対する仮想空間2のXYZ座標系の相対的な傾きを異ならせた状態で、仮想空間2における仮想カメラ1の向きに応じた視界画像(26)を生成し、HMD(110)に表示させる。
【選択図】図12
Description
本発明の実施形態に係る仮想空間を提供する方法、および、プログラムの具体例を、以下に図面を参照しつつ説明する。本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が本発明に含まれることが意図される。以下の説明では、図面の説明において同一の要素には同一の符号を付し、重複する説明を繰り返さない。
図1は、HMDシステム100の構成を示す図である。この図に示すように、HMDシステム100は、HMD110、HMDセンサ120、制御回路部200、およびコントローラ300を備えている。
図2は、制御回路部200のハード構成を示す図である。制御回路部200は、HMD110に仮想空間を提供させるためのコンピュータである。図2に示すように、制御回路部200は、プロセッサ、メモリ、ストレージ、入出力インターフェース、および通信インターフェースを備えている。これらは、データ伝送路としてのバスを通じて、制御回路部200内において互いに接続されている。
図3は、HMD110に設定されるuwv視野座標系を例示する図である。HMDセンサ120は、HMD110の起動時に、グローバル座標系におけるHMD110の位置および傾きを検出する。そして、傾きの検出値に基づく3次元のuvw視野座標系を、HMD110に設定する。図3に示すように、HMDセンサ120は、HMD110を装着したユーザの頭部を中心(原点)とした3次元のuvw視野座標系を、HMD110に設定する。具体的には、グローバル座標系を規定する横方向、鉛直方向、および前後方向(x軸、y軸、z軸)を、グローバル座標系内においてHMD110の各軸周りの傾きだけ各軸周りにそれぞれ傾けることによって得られる新たな3つの方向を、HMD110におけるuvw視野座標系のピッチ方向(u軸)、ヨー方向(v軸)、およびロール方向(w軸)として設定する。
図4は、ユーザに提供される仮想空間2の概要を説明する図である。この図に示すように、仮想空間2は、中心21の360°方向全体を覆う全天球状の構造を有する。図4には、仮想空間2の全体のうち上半分の天球のみを例示する。仮想空間2には、略正方形または略長方形の複数のメッシュが関連付けられている。仮想空間2における各メッシュの位置は、仮想空間2に規定される空間座標系(XYZ座標系)における座標として、予め規定されている。制御回路部200は、仮想空間2に展開可能なコンテンツ(静止画、動画等)を構成する各部分画像を、仮想空間2における対応する各メッシュに対応付けることによって、ユーザによって視認可能な仮想空間画像22が展開される仮想空間2をユーザに提供する。
注視センサ130は、ユーザの右目および左目の視線が向けられる方向(視線方向)を検出するアイトラッキング機能を有する。注視センサ130として、アイトラッキング機能を有する公知のセンサを採用することができる。注視センサ130は、右目用センサおよび左目用センサを備えていることが好ましい。注視センサ130は、たとえば、ユーザの右目および左目に赤外光を照射すると共に、照射光に対する角膜および虹彩からの反射光を受光することによって、各眼球の回転角を検出するセンサでもよい。注視センサ130は、検出した各回転角に基づき、ユーザの視線方向を検知することができる。
コントローラ300は、ユーザの操作に基づく各種の指令を制御回路部200に対して送信ことができるデバイスである。コントローラ300は、有線または無線通信が可能な携帯端末であり得る。コントローラ300は、たとえば、スマートフォン、PDA(Personal Digital Assistant)、タブレット型コンピュータ、ゲーム用コンソール、汎用のPC(Personal Computer)等であればよい。コントローラ300は、タッチパネルを備えるデバイスであることが好ましく、互いにバス接続されたプロセッサ、メモリ、ストレージ、通信部、表示部と入力部が一体として構成されたタッチパネル、を備える任意の端末が採用され得る。ユーザは、コントローラ300のタッチパネルに対し、タップ、スワイプ、およびホールドを含む各種のタッチ動作を入力することによって、仮想空間2に配置される各種のオブジェクトおよびUI(User Interface)に対して影響を及ぼすことができる。
図7は、制御回路部200の機能的構成を示すブロック図である。制御回路部200は、HMDセンサ120、注視センサ130、およびコントローラ300から受信した各種のデータを用いることによって、ユーザに提供される仮想空間2を制御すると共に、HMD110のディスプレイ112への画像表示を制御する。図7に示すように、制御回路部200は、検出部210、表示制御部220、仮想空間制御部230、記憶部240、および通信部250を備えている。制御回路部200は、図2に示す各ハードウェアの協働によって、検出部210、表示制御部220、仮想空間制御部230、記憶部240、および通信部250として機能する。検出部210、表示制御部220、および仮想空間制御部230は、主としてプロセッサおよびメモリの協働によってその機能が実現され得る。記憶部240は、主としてメモリおよびストレージの協働によってその機能が実現され得る。通信部250は、主としてプロセッサおよび通信インターフェースの協働によってその機能が実現され得る。
図8は、HMDシステム100が仮想空間2をユーザに提供する処理の流れを示すシーケンス図である。仮想空間2は、基本的に、HMD110および制御回路部200の協働によってユーザに提供される。図8に示す処理が開始されると、まず、S1において、仮想空間規定部231が、ユーザに提供される仮想空間2を表す仮想空間データを生成することによって、仮想空間2を規定する。生成の手順は次の通りである。まず仮想空間規定部231は、仮想空間2の雛形データを雛形格納部241から取得することによって、仮想空間2の原型を定義する。仮想空間規定部231は、さらに、仮想空間2において再生されるコンテンツを、コンテンツ格納部242から取得する。仮想空間規定部231は、取得した雛形データに、取得したコンテンツを適合することによって、仮想空間2を規定する仮想空間データを生成する。仮想空間規定部231は、仮想空間データにおいて、仮想空間2の天球を構成する各メッシュの管理データに、コンテンツに含まれる背景画像を構成する各部分画像を適宜関連付ける。仮想空間規定部231は、コンテンツに規定される初期方向を仮想空間2のXYZ座標系におけるZ方向に合致させるように、各部分画像と各メッシュとを関連付けることが好ましい。
本実施形態では、HMDシステム100は、仮想空間2においてユーザが視聴したいコンテンツを仮想空間2においてユーザに選択するための環境(プラットフォーム)を、ユーザに提供する。ユーザが、仮想空間2に展開されるプラットフォームを通じて、視聴したいコンテンツを選択すれば、制御回路部200は、選択されたコンテンツの仮想空間2における再生を開始する。以下に、プラットフォームの提供およびコンテンツの再生処理の詳細について、説明する。
仮想空間2において再生可能な各コンテンツには、その内容に応じた傾き補正値が予め規定されている。制御回路部200は、コンテンツの再生開始時に、この傾き補正値に応じて仮想カメラ1の傾きを適宜補正する。これにより、異なる姿勢で見ることを前提とした様々なコンテンツを、ユーザの姿勢に応じて仮想空間2において好適に再生することができるので、コンテンツに応じた姿勢でユーザがコンテンツを視聴した際にユーザが自然な映像を視認することができる。以下に、制御回路部200がコンテンツの傾き補正値に応じて仮想カメラ1の傾きを補正する際の詳細を説明する。
図12は、コンテンツに応じてHMD110に対する仮想カメラ1の傾きが異なることを説明する図である。図12の(a)に、ユーザが座位姿勢で見ることを前提とした動画コンテンツが再生される仮想空間2を示す。一方、図12の(b)に、ユーザが仰臥姿勢で見ることを前提としたコンテンツが再生される仮想空間2を示す。
HMDシステム100は、動画コンテンツに規定される傾き補正値に基づき仮想カメラ1の傾きを補正することによって、再生される動画コンテンツの内容によらず、動画コンテンツに含まれる広告の表示位置に対する機能区画の位置を統一化することができる。この点について、以下に説明する。
制御回路部200は、コンテンツに規定される傾き補正値を用いて、仮想カメラ1の傾きではなく、仮想空間2のXYZ座標系の傾きを補正してもよい。以下、この例について説明する。
制御回路部200の制御ブロック(検出部210、表示制御部220、仮想空間制御部230、記憶部240、および通信部250)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
本発明の一側面に係る内容を列記すると以下の通りである。
Claims (7)
- ヘッドマウントディスプレイ(以下、HMD)を装着したユーザに仮想空間を提供する方法であって、
前記仮想空間において再生されるコンテンツに応じて、基準座標系における前記HMDに対する仮想カメラの相対的な傾きまたは前記基準座標系に対する前記仮想空間の空間座標系の相対的な傾きを異ならせた状態で、前記仮想空間における前記仮想カメラの向きに応じた視界画像を生成するステップと、
前記視界画像を前記HMDに表示させるステップとを有する、方法。 - 前記基準座標系に平行な前記空間座標系を有する前記仮想空間を規定するステップと、
前記仮想空間に前記仮想カメラを配置するステップと、
前記コンテンツに予め規定される傾き補正値に基づき、前記仮想カメラを前記基準座標系において前記HMDに対して相対的に傾けることによって、前記仮想空間における前記仮想カメラの向きを設定するステップとを有する、請求項1に記載の方法。 - 前記コンテンツに予め規定される傾き補正値に基づき、前記基準座標系に対して相対的に傾いた前記空間座標系を有する前記仮想空間を規定するステップと、
前記仮想空間に前記仮想カメラを配置するステップと、
前記基準座標系における前記仮想カメラの傾きを前記HMDの傾きに一致させることによって、前記仮想空間における前記仮想カメラの向きを設定するステップとを有する、請求項1に記載の方法。 - 前記仮想カメラの向きを設定するステップにおいて、水平方向に対する前記HMDの傾きが前記傾き補正値に一致する場合、前記仮想カメラの向きを、前記仮想空間におけるXZ平面に対して平行に設定する、請求項2または3に記載の方法。
- 前記ユーザの基準視線を特定するステップと、
前記基準視線に基づいて、前記仮想カメラの向きを更新すると共に、視界領域を特定するステップと、
前記視界領域に基づいて、前記視界画像を更新するステップとをさらに有する、請求項1〜4のいずれか1項に記載の方法。 - 請求項1〜5のいずれか1項に記載の方法の各ステップを、コンピュータに実行させるプログラム。
- 請求項6に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016093196A JP6306083B2 (ja) | 2016-05-06 | 2016-05-06 | 仮想空間を提供する方法、プログラム、および記録媒体 |
US15/588,590 US10539797B2 (en) | 2016-05-06 | 2017-05-05 | Method of providing virtual space, program therefor, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016093196A JP6306083B2 (ja) | 2016-05-06 | 2016-05-06 | 仮想空間を提供する方法、プログラム、および記録媒体 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017088999A Division JP2017201524A (ja) | 2017-04-27 | 2017-04-27 | 仮想空間を提供する方法、プログラム、および記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017201477A true JP2017201477A (ja) | 2017-11-09 |
JP6306083B2 JP6306083B2 (ja) | 2018-04-04 |
Family
ID=60264883
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016093196A Active JP6306083B2 (ja) | 2016-05-06 | 2016-05-06 | 仮想空間を提供する方法、プログラム、および記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6306083B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019121224A (ja) * | 2018-01-09 | 2019-07-22 | 株式会社コロプラ | プログラム、情報処理装置、及び情報処理方法 |
JP2019133310A (ja) * | 2018-01-30 | 2019-08-08 | フォージビジョン株式会社 | 画像処理装置、画像処理プログラム及び画像処理方法 |
JP2019145161A (ja) * | 2019-04-25 | 2019-08-29 | 株式会社コロプラ | プログラム、情報処理装置、及び情報処理方法 |
JP2019184689A (ja) * | 2018-04-04 | 2019-10-24 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011128220A (ja) * | 2009-12-15 | 2011-06-30 | Toshiba Corp | 情報提示装置、情報提示方法及びプログラム |
JP2014203153A (ja) * | 2013-04-02 | 2014-10-27 | パイオニア株式会社 | 表示制御装置 |
JP2015095045A (ja) * | 2013-11-11 | 2015-05-18 | 株式会社ソニー・コンピュータエンタテインメント | 画像生成装置および画像生成方法 |
JP5869177B1 (ja) * | 2015-09-16 | 2016-02-24 | 株式会社コロプラ | 仮想現実空間映像表示方法、及び、プログラム |
-
2016
- 2016-05-06 JP JP2016093196A patent/JP6306083B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011128220A (ja) * | 2009-12-15 | 2011-06-30 | Toshiba Corp | 情報提示装置、情報提示方法及びプログラム |
JP2014203153A (ja) * | 2013-04-02 | 2014-10-27 | パイオニア株式会社 | 表示制御装置 |
JP2015095045A (ja) * | 2013-11-11 | 2015-05-18 | 株式会社ソニー・コンピュータエンタテインメント | 画像生成装置および画像生成方法 |
JP5869177B1 (ja) * | 2015-09-16 | 2016-02-24 | 株式会社コロプラ | 仮想現実空間映像表示方法、及び、プログラム |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019121224A (ja) * | 2018-01-09 | 2019-07-22 | 株式会社コロプラ | プログラム、情報処理装置、及び情報処理方法 |
JP2019133310A (ja) * | 2018-01-30 | 2019-08-08 | フォージビジョン株式会社 | 画像処理装置、画像処理プログラム及び画像処理方法 |
JP2019184689A (ja) * | 2018-04-04 | 2019-10-24 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 |
JP7210153B2 (ja) | 2018-04-04 | 2023-01-23 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 |
JP2019145161A (ja) * | 2019-04-25 | 2019-08-29 | 株式会社コロプラ | プログラム、情報処理装置、及び情報処理方法 |
JP7030075B2 (ja) | 2019-04-25 | 2022-03-04 | 株式会社コロプラ | プログラム、情報処理装置、及び情報処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6306083B2 (ja) | 2018-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10539797B2 (en) | Method of providing virtual space, program therefor, and recording medium | |
JP6511386B2 (ja) | 情報処理装置および画像生成方法 | |
JP6126271B1 (ja) | 仮想空間を提供する方法、プログラム及び記録媒体 | |
JP6058184B1 (ja) | ヘッドマウントディスプレイシステムを制御するための方法、および、プログラム | |
JP6523493B1 (ja) | プログラム、情報処理装置、及び情報処理方法 | |
JP6130478B1 (ja) | プログラム及びコンピュータ | |
WO2017033777A1 (ja) | ヘッドマウントディスプレイシステムを制御するプログラム | |
JP6306083B2 (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
JP6276434B1 (ja) | 仮想空間における移動を支援するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 | |
JP6262283B2 (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
JP6126272B1 (ja) | 仮想空間を提供する方法、プログラム及び記録媒体 | |
JP6121496B2 (ja) | ヘッドマウントディスプレイシステムを制御するプログラム | |
JP2017121082A (ja) | プログラム及びコンピュータ | |
JP2017208808A (ja) | 仮想空間を提供する方法、プログラム及び記録媒体 | |
JP6223614B1 (ja) | 情報処理方法、情報処理プログラム、情報処理システム及び情報処理装置 | |
JP6518645B2 (ja) | 情報処理装置および画像生成方法 | |
JP6203346B1 (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
JP2017228322A (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
JP2023065528A (ja) | ヘッドマウント情報処理装置およびヘッドマウントディスプレイシステム | |
JP2017201524A (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
WO2017199848A1 (ja) | 仮想空間を提供する方法、プログラム及び記録媒体 | |
JP7030075B2 (ja) | プログラム、情報処理装置、及び情報処理方法 | |
JP6159455B1 (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
US20220360619A1 (en) | Program, information processing method and information processing device | |
JP2017208809A (ja) | 仮想空間を提供する方法、プログラム及び記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160818 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20160818 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20161027 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161216 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170428 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20170428 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170501 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170523 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20170530 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20170714 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20170725 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20171114 |
|
C302 | Record of communication |
Free format text: JAPANESE INTERMEDIATE CODE: C302 Effective date: 20180116 |
|
C302 | Record of communication |
Free format text: JAPANESE INTERMEDIATE CODE: C302 Effective date: 20180129 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20180130 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20180227 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20180227 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180307 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6306083 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |