JP2016225885A - 情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム - Google Patents
情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム Download PDFInfo
- Publication number
- JP2016225885A JP2016225885A JP2015111680A JP2015111680A JP2016225885A JP 2016225885 A JP2016225885 A JP 2016225885A JP 2015111680 A JP2015111680 A JP 2015111680A JP 2015111680 A JP2015111680 A JP 2015111680A JP 2016225885 A JP2016225885 A JP 2016225885A
- Authority
- JP
- Japan
- Prior art keywords
- imaging unit
- processing apparatus
- unit
- information processing
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 64
- 238000003384 imaging method Methods 0.000 claims abstract description 176
- 230000010365 information processing Effects 0.000 claims description 24
- 238000001514 detection method Methods 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 9
- 238000005375 photometry Methods 0.000 description 8
- 210000000887 face Anatomy 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000009877 rendering Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Optics & Photonics (AREA)
- Architecture (AREA)
- Electromagnetism (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Cameras In General (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
第1の撮像部又は第2の撮像部により撮像された撮像画像の輝度値を取得する輝度値取得手段と、
前記撮像画像を撮像した前記第1の撮像部又は前記第2の撮像部に対して外界の明るさの変化に対応する自動露光制御の追従パラメータを決定する決定手段と、
前記輝度値と前記追従パラメータとに基づいて、前記第1の撮像部又は前記第2の撮像部に対して撮像パラメータを設定する設定手段と、
を備えることを特徴とする。
本実施形態では、情報処理装置としての頭部搭載型の表示装置(以下、HMD。)の、体験用撮像部と位置姿勢取得用撮像部との各Auto Exposure(自動露光とも称する。)機能の制御を分離して制御すること、そして、位置姿勢取得用撮像部のAuto Exposure機能を外界の明るさの変化に対して素早く対応させる制御を行う例を説明する。
輝度変換部1301で輝度値に変換されたデータは、輝度積分値取得部1302へ送られる。輝度積分値取得部1302は、輝度変換部1301から送られてきた輝度値と、測光方法決定部1303から送られてきた測光方法とに基づいて、領域毎に重みづけを加味した輝度積分値を求めてパラメータ設定部1304へ送る。
第1実施形態では位置姿勢取得用撮像部は1つであるが、本実施形態では位置姿勢取得用撮像部が複数ある場合の処理について説明を行う。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (14)
- 第1の撮像部又は第2の撮像部により撮像された撮像画像の輝度値を取得する輝度値取得手段と、
前記撮像画像を撮像した前記第1の撮像部又は前記第2の撮像部に対して、外界の明るさの変化に対応する自動露光制御の追従パラメータを決定する決定手段と、
前記輝度値と前記追従パラメータとに基づいて、前記第1の撮像部又は前記第2の撮像部に対して撮像パラメータを設定する設定手段と、
を備えることを特徴とする情報処理装置。 - 前記第1の撮像部の向きを検出する検出手段と、
前記第1の撮像部の向きに基づいて測光方法を決定する決定手段と、
前記第1の撮像部の撮像画像の輝度値と、前記測光方法とに基づいて、前記輝度値の積分値を取得する取得手段とをさらに備え、
前記設定手段は、前記輝度値の積分値と前記追従パラメータとに基づいて、前記第1の撮像部に対して撮像パラメータを設定することを特徴とする請求項1に記載の情報処理装置。 - 測光方法を決定する決定手段と、
前記第2の撮像部の撮像画像の輝度値と、前記測光方法とに基づいて、前記輝度値の積分値を取得する取得手段とをさらに備え、
前記設定手段は、前記輝度値の積分値と前記追従パラメータとに基づいて、前記第2の撮像部に対して撮像パラメータを設定することを特徴とする請求項1に記載の情報処理装置。 - 前記設定手段は、前記追従パラメータに対応する所定時間が経過した後に撮像パラメータを設定することを特徴とする請求項1乃至3の何れか1項に記載の情報処理装置。
- 前記追従パラメータは、外界の明るさが変化してから自動露光制御の追従を行うまでの時間差を示すことを特徴とする請求項1乃至4の何れか1項に記載の情報処理装置。
- 前記決定手段は、前記第1の撮像部に対応する追従パラメータを、前記第2の撮像部に対応する追従パラメータよりも短く決定することを特徴とする請求項5に記載の情報処理装置。
- 前記撮像パラメータは、シャッター速度とゲインとの少なくとも何れか1つであることを特徴とする請求項1乃至6の何れか1項に記載の情報処理装置。
- 前記第1の撮像部は、前記情報処理装置の位置姿勢取得用の撮像部であり、
前記第2の撮像部は、複合現実感体験用の撮像部である
ことを特徴とする請求項1乃至7の何れか1項に記載の情報処理装置。 - 前記検出手段は、前記第1の撮像部とは異なる第3の撮像部の向きを更に検出し、
前記第1の撮像部の向き及び前記第3の撮像部の向きに基づいて前記第1の撮像部及び前記第3の撮像部を同期させて制御するか、又は別々に制御するかを切り替える制御手段をさらに備えることを特徴とする請求項2に記載の情報処理装置。 - 前記第1の撮像部は、前記情報処理装置の位置姿勢取得用の撮像部であり、
前記第2の撮像部は、複合現実感体験用の撮像部であり、
前記第3の撮像部は、前記情報処理装置の位置姿勢取得用の撮像部であることを特徴とする請求項9に記載の情報処理装置。 - 前記情報処理装置は、頭部搭載型の表示装置であることを特徴とする請求項1乃至10の何れか1項に記載の情報処理装置。
- 請求項1乃至10の何れか1項に記載の情報処理装置と、
前記情報処理装置と有線又は無線で接続された画像処理装置と
を備えることを特徴とする画像処理システム。 - 情報処理装置の制御方法であって、
輝度値取得手段が、第1の撮像部又は第2の撮像部により撮像された撮像画像の輝度値を取得する工程と、
決定手段が、前記撮像画像を撮像した前記第1の撮像部又は前記第2の撮像部に対して外界の明るさの変化に対応する自動露光制御の追従パラメータを決定する工程と、
設定手段が、前記輝度値と前記追従パラメータとに基づいて、前記第1の撮像部又は前記第2の撮像部に対して撮像パラメータを設定する工程と、
を有することを特徴とする情報処理装置の制御方法。 - 請求項13に記載の情報処理装置の制御方法の各工程をコンピュータに実行させるためのプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015111680A JP6525740B2 (ja) | 2015-06-01 | 2015-06-01 | 情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム |
US15/158,869 US10198868B2 (en) | 2015-06-01 | 2016-05-19 | Information processing apparatus, method for controlling information processing apparatus, image processing system and non-transitory computer-readable storage medium |
DE102016006242.8A DE102016006242B4 (de) | 2015-06-01 | 2016-05-20 | Anzeigevorrichtung des kopfgetragenen Typs, Steuerverfahren für Anzeigevorrichtung des kopfgetragenen Typs, Bildverarbeitungssystem und Speichermedium |
GB1609331.2A GB2541073B (en) | 2015-06-01 | 2016-05-26 | Information processing apparatus, method for controlling information processing apparatus, image processing system and storage medium |
CN201610373472.0A CN106210699B (zh) | 2015-06-01 | 2016-05-31 | 信息处理装置、信息处理装置的控制方法及图像处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015111680A JP6525740B2 (ja) | 2015-06-01 | 2015-06-01 | 情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016225885A true JP2016225885A (ja) | 2016-12-28 |
JP6525740B2 JP6525740B2 (ja) | 2019-06-05 |
Family
ID=56410623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015111680A Active JP6525740B2 (ja) | 2015-06-01 | 2015-06-01 | 情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US10198868B2 (ja) |
JP (1) | JP6525740B2 (ja) |
CN (1) | CN106210699B (ja) |
DE (1) | DE102016006242B4 (ja) |
GB (1) | GB2541073B (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019142659A1 (ja) * | 2018-01-19 | 2019-07-25 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102016221123A1 (de) * | 2016-10-26 | 2018-04-26 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Vorrichtung zum Betreiben eines Anzeigesystems mit einer Datenbrille |
US10827164B2 (en) * | 2018-03-01 | 2020-11-03 | Google Llc | Active LCD shutters for virtual and augmented reality low persistence |
US11238662B2 (en) | 2019-09-25 | 2022-02-01 | Apple Inc. | Optimal luminance mapping for augmented reality devices |
US11030817B2 (en) * | 2019-11-05 | 2021-06-08 | Varjo Technologies Oy | Display system and method of using environment map to generate extended-reality images |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002209221A (ja) * | 2001-01-11 | 2002-07-26 | Minolta Co Ltd | デジタル撮像装置および記録媒体 |
JP2005148262A (ja) * | 2003-11-13 | 2005-06-09 | Nec Saitama Ltd | 携帯機器および測光制御方法 |
JP2006295506A (ja) * | 2005-04-08 | 2006-10-26 | Canon Inc | 画像表示装置、およびその制御方法 |
JP2006345255A (ja) * | 2005-06-09 | 2006-12-21 | Canon Inc | 撮像装置 |
JP2007004714A (ja) * | 2005-06-27 | 2007-01-11 | Canon Inc | 情報処理方法、情報処理装置 |
JP2008277920A (ja) * | 2007-04-25 | 2008-11-13 | Canon Inc | システム |
JP2008309631A (ja) * | 2007-06-14 | 2008-12-25 | Canon Inc | 情報処理方法及び情報処理装置 |
JP2011172145A (ja) * | 2010-02-22 | 2011-09-01 | Olympus Imaging Corp | カメラ |
WO2012001755A1 (ja) * | 2010-07-02 | 2012-01-05 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理システム、情報処理装置および情報処理方法 |
WO2014199160A1 (en) * | 2013-06-11 | 2014-12-18 | Sony Computer Entertainment Europe Limited | Head-mountable apparatus and systems |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103945132B (zh) * | 2010-02-19 | 2019-05-14 | 株式会社尼康 | 电子设备及电子设备的图像取得方法 |
US9420166B2 (en) * | 2012-02-13 | 2016-08-16 | Nokia Technologies Oy | Method and apparatus for enhanced automatic adjustment of focus, exposure and white balance in digital photography |
US20130326364A1 (en) | 2012-05-31 | 2013-12-05 | Stephen G. Latta | Position relative hologram interactions |
US9977492B2 (en) | 2012-12-06 | 2018-05-22 | Microsoft Technology Licensing, Llc | Mixed reality presentation |
TWI486630B (zh) * | 2013-03-27 | 2015-06-01 | 聚晶半導體股份有限公司 | 適應性調整頭戴式顯示器的方法與頭戴式顯示器 |
-
2015
- 2015-06-01 JP JP2015111680A patent/JP6525740B2/ja active Active
-
2016
- 2016-05-19 US US15/158,869 patent/US10198868B2/en active Active
- 2016-05-20 DE DE102016006242.8A patent/DE102016006242B4/de active Active
- 2016-05-26 GB GB1609331.2A patent/GB2541073B/en active Active
- 2016-05-31 CN CN201610373472.0A patent/CN106210699B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002209221A (ja) * | 2001-01-11 | 2002-07-26 | Minolta Co Ltd | デジタル撮像装置および記録媒体 |
JP2005148262A (ja) * | 2003-11-13 | 2005-06-09 | Nec Saitama Ltd | 携帯機器および測光制御方法 |
JP2006295506A (ja) * | 2005-04-08 | 2006-10-26 | Canon Inc | 画像表示装置、およびその制御方法 |
JP2006345255A (ja) * | 2005-06-09 | 2006-12-21 | Canon Inc | 撮像装置 |
JP2007004714A (ja) * | 2005-06-27 | 2007-01-11 | Canon Inc | 情報処理方法、情報処理装置 |
JP2008277920A (ja) * | 2007-04-25 | 2008-11-13 | Canon Inc | システム |
JP2008309631A (ja) * | 2007-06-14 | 2008-12-25 | Canon Inc | 情報処理方法及び情報処理装置 |
JP2011172145A (ja) * | 2010-02-22 | 2011-09-01 | Olympus Imaging Corp | カメラ |
WO2012001755A1 (ja) * | 2010-07-02 | 2012-01-05 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理システム、情報処理装置および情報処理方法 |
WO2014199160A1 (en) * | 2013-06-11 | 2014-12-18 | Sony Computer Entertainment Europe Limited | Head-mountable apparatus and systems |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019142659A1 (ja) * | 2018-01-19 | 2019-07-25 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
GB2541073B (en) | 2019-06-19 |
US10198868B2 (en) | 2019-02-05 |
DE102016006242A1 (de) | 2016-12-01 |
GB201609331D0 (en) | 2016-07-13 |
US20160350976A1 (en) | 2016-12-01 |
CN106210699B (zh) | 2019-01-22 |
JP6525740B2 (ja) | 2019-06-05 |
DE102016006242B4 (de) | 2021-04-01 |
GB2541073A (en) | 2017-02-08 |
CN106210699A (zh) | 2016-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10699473B2 (en) | System and method for generating a virtual viewpoint apparatus | |
CN108292489B (zh) | 信息处理装置和图像生成方法 | |
US11190714B2 (en) | Electronic device, head-mounted display, gaze point detector, and pixel data readout method | |
JP6525740B2 (ja) | 情報処理装置、情報処理装置の制御方法、画像処理システム及びプログラム | |
EP3416137A1 (en) | Information processing apparatus, image generating apparatus, control methods therefor, and program | |
US11282224B2 (en) | Information processing apparatus and information processing method | |
JP6344723B2 (ja) | 映像表示システム、映像表示装置及び映像表示方法 | |
CA3041976C (en) | Image processing apparatus, image processing system, image processing method, and storage medium, for generating virtual viewpoint image | |
JP4522307B2 (ja) | 画像撮像装置、画像撮像方法 | |
JP2012247533A (ja) | 電子カメラ | |
CN106375682B (zh) | 影像处理方法、装置与可移动设备、无人机遥控器及系统 | |
JP2023502552A (ja) | ウェアラブルデバイス、インテリジェントガイド方法及び装置、ガイドシステム、記憶媒体 | |
US10757337B2 (en) | Information processing apparatus and information processing method to control exposure for imaging the eye | |
WO2021261248A1 (ja) | 画像処理装置、画像表示システム、方法及びプログラム | |
JP2018157578A (ja) | 映像表示システム、映像表示装置及び映像表示方法 | |
US11003062B2 (en) | Information processing device, method of information processing, and image display system | |
JP2016123517A (ja) | プログラム及びコンピュータシステム | |
CN108476290B (zh) | 用于提供全景图像的电子装置及其控制方法 | |
JP6650738B2 (ja) | 情報処理装置、情報処理システム、情報処理方法及びプログラム | |
KR101488647B1 (ko) | 모바일 단말의 가상 조명 동작방법 및 장치 | |
JP2017072945A (ja) | 画像処理装置、画像処理方法 | |
WO2020084894A1 (ja) | マルチカメラシステム、制御値算出方法及び制御装置 | |
JP6725999B2 (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
JP6700937B2 (ja) | 画像処理装置及びその制御方法、並びにプログラム | |
JP2023124647A (ja) | 映像表示システムおよび映像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180525 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190329 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190507 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6525740 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |