JP6423650B2 - 投射装置のクラスターリング方法、これを用いた管理装置及び管理システム - Google Patents
投射装置のクラスターリング方法、これを用いた管理装置及び管理システム Download PDFInfo
- Publication number
- JP6423650B2 JP6423650B2 JP2014171120A JP2014171120A JP6423650B2 JP 6423650 B2 JP6423650 B2 JP 6423650B2 JP 2014171120 A JP2014171120 A JP 2014171120A JP 2014171120 A JP2014171120 A JP 2014171120A JP 6423650 B2 JP6423650 B2 JP 6423650B2
- Authority
- JP
- Japan
- Prior art keywords
- projection
- information
- area
- devices
- conversion information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
- G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3147—Multi-projection systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3191—Testing thereof
- H04N9/3194—Testing thereof including sensor feedback
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/13—Projectors for producing special effects at the edges of picture, e.g. blurring
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Controls And Circuits For Display Device (AREA)
- Projection Apparatus (AREA)
- Optics & Photonics (AREA)
Description
前記ステップ(c)は、前記部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通じて前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に当たるホモグラフィ行列を算出し、
前記ステップ(d)は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させて点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出し、
前記複数の投射装置が、前記基準となる投射装置と残りの投射装置との間の相対的な変換情報及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて、一つのクラスターを構成して、前記複数の投射装置が、クラスター単位で制御されることを特徴とする。
前記ステップ(b)は、前記互いに部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通して前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に関するホモグラフィ行列を算出し、
前記ステップ(c)は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させて点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出する段階を、コンピュータのマイクロプロセッサーによって実行させることを特徴とする。
前記ユーザインターフェイスを通して入力された情報に基づいて、前記複数の投射装置の投射領域を調節して、前記複数の投射装置の投射領域が部分的に重なり合った状態で複数の投射装置を配置し、前記変換情報演算部は、前記部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通して前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に関するホモグラフィ行列を算出し、前記変換情報演算部は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させ点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出し、前記基準となる投射装置と残りの投射装置との間の相対的な変換情報及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて前記複数の投射装置を、クラスター単位として制御することを特徴とする。
前記相対的な変換情報を、重なり合った投射領域から抽出された点対応情報に基づいて演算し、複数の投射装置を、1つのクラスターに構成し、前記複数の投射装置を、クラスター単位で制御することを特徴とする。
H(3→1)=H(3→2)*H(2→1)
H(I→2)=H(I→1)*H(1→2)
H(I→3)=H(I→1)*H(1→3)
(Hは、特定の投射装置とイメージ領域との間のホモグラフィ行列である。)
Y=v*height+t
B=(int)(v*255*255)/255
G=(u*255*255)%255
A=(v*255*255)%255
v=(B*255+A)/(255*255)
200 管理装置
210 変換情報演算部
220 格納部
230 投射装置動作管理部
240 通信部
250 ユーザーインタフェース部
260 カメラ部
270 制御部
Claims (9)
- (a)投射領域が部分的に重なり合った状態で複数の投射装置が配置されるステップと、
(b)前記複数の投射装置のうち基準となる投射装置が設定されるステップと、
(c)前記基準となる投射装置と残りの投射装置との間の相対的な変換情報が演算されるステップと、
(d)前記基準となる投射装置とイメージ領域との間の相対的な変換情報が演算されるステップと、
(e)前記基準となる投射装置と残りの投射装置との間の相対的な変換情報、及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて、前記イメージ領域と残りの投射装置との間の相対的な変換情報が演算されるステップと、
を含み、
前記ステップ(c)は、前記部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通じて前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に当たるホモグラフィ行列を算出し、
前記ステップ(d)は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させて点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出し、
前記複数の投射装置が、前記基準となる投射装置と残りの投射装置との間の相対的な変換情報及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて、一つのクラスターを構成して、前記複数の投射装置が、クラスター単位で制御されることを特徴とする投射装置のクラスターリング方法。 - 前記ステップ(a)において、
隣り合う投射装置の投射領域が四角形状に重なり合うことを特徴とする請求項1に記載の投射装置のクラスターリング方法。 - 前記ステップ(c)は、
(c−1)隣り合う投射装置間の相対的な変換情報が設定されるステップと、
(c−2)前記ステップ(c−1)において設定された情報に基づいて、前記基準となる投射装置と残りの投射装置との間の相対的な変換情報が演算されるステップと、
を含むことを特徴とする請求項1に記載の投射装置のクラスターリング方法。 - 前記イメージ領域と前記基準となる投射装置と残りの各投射装置との間の相対的な変換情報に基づいて、前記イメージ領域に含まれる各ピクセルと前記基準となる投射装置と残りの各投射装置との投射領域に含まれる各ピクセルとの間の対応関係が算出されることを特徴とする請求項1に記載の投射装置のクラスターリング方法。
- 前記基準となる投射装置と残りの各投射装置との投射領域が矩形状ではない場合には、投射領域の最大値及び最小値を用いて矩形状の基準となる領域を設定し、設定された基準となる領域に基づいて前記基準となる投射装置と残りの各投射装置との投射領域に含まれるピクセルの位置を表現することを特徴とする請求項4に記載の投射装置のクラスターリング方法。
- 前記複数の投射装置は、多面上映劇場の投射面のうち特定の投射面に映像を一緒に投射する集団(クラスター)であることを特徴とする請求項1に記載の投射装置のクラスターリング方法。
- (a)投射領域が互いに部分的に重なり合った状態の複数の投射装置の投射領域情報を獲得するステップと、
(b)前記投射領域情報を用いて前記複数の投射装置のうち基準となる投射装置と残りの投射装置との間の相対的な変換情報を演算するステップと、
(c)前記基準となる投射装置とイメージ領域との間の相対的な変換情報を演算するステップと、
(d)前記基準となる投射装置と残りの投射装置との間の相対的な変換情報、及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて、前記イメージ領域と残りの投射装置との間の相対的な変換情報が演算されるステップと、
を含み、
前記ステップ(b)は、前記互いに部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通して前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に関するホモグラフィ行列を算出し、
前記ステップ(c)は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させて点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出する段階を、コンピュータのマイクロプロセッサーによって実行させることを特徴とするプログラムが記録された記録媒体。 - 複数の投射装置が投射する投射領域に関する情報の入力を受けるユーザインターフェイスと、
前記ユーザインターフェイスを通して入力された情報に基づいて前記複数の投射装置の投射領域が配置された状態を認識するイメージセンシング装置と、
前記複数の投射装置のうち基準となる投射装置を設定し、前記基準となる投射装置と残りの投射装置との間の相対的な変換(Transformation)情報を演算し、前記基準となる投射装置とイメージ領域との間の相対的な変換情報を演算して、前記基準となる投射装置と残りの投射装置との間の相対的な変換情報及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて前記イメージ領域と残りの投射装置との間の相対的な変換情報を演算する変換情報演算部と、
を含み、
前記ユーザインターフェイスを通して入力された情報に基づいて、前記複数の投射装置の投射領域を調節して、前記複数の投射装置の投射領域が部分的に重なり合った状態で複数の投射装置を配置し、
前記変換情報演算部は、前記部分的に重なり合った投射領域から抽出された点対応情報に基づいて、ホモグラフィ変換を通して前記基準となる投射装置の投射領域を前記残りの投射装置の投射領域に変換するか、前記残りの投射装置の投射領域を前記基準となる投射装置の投射領域に変換する、前記相対的な変換情報に関するホモグラフィ行列を算出し、
前記変換情報演算部は、前記基準となる投射装置のイメージ領域上の複数の点に前記基準となる投射装置の投射領域上の複数の点を対応させ点対応情報を算出し、前記点対応情報に基づいてホモグラフィ行列を算出し、
前記基準となる投射装置と残りの投射装置との間の相対的な変換情報及び前記基準となる投射装置とイメージ領域との間の相対的な変換情報に基づいて前記複数の投射装置を、クラスター単位として制御することを特徴とする管理装置。 - 前記複数の投射装置は、多面上映劇場の投射面のうち特定の投射面に映像を一緒に投射する集団(クラスター)であることを特徴とする請求項8に記載の管理装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2013-0101340 | 2013-08-26 | ||
KR1020130101340A KR101515368B1 (ko) | 2013-08-26 | 2013-08-26 | 투사 장치 클러스터링 방법, 이를 이용한 관리 장치 및 관리 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015043086A JP2015043086A (ja) | 2015-03-05 |
JP6423650B2 true JP6423650B2 (ja) | 2018-11-14 |
Family
ID=52480079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014171120A Expired - Fee Related JP6423650B2 (ja) | 2013-08-26 | 2014-08-26 | 投射装置のクラスターリング方法、これを用いた管理装置及び管理システム |
Country Status (6)
Country | Link |
---|---|
US (1) | US9625804B2 (ja) |
EP (1) | EP3039860B1 (ja) |
JP (1) | JP6423650B2 (ja) |
KR (1) | KR101515368B1 (ja) |
CN (1) | CN104427280B (ja) |
WO (1) | WO2015030398A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6594170B2 (ja) * | 2015-11-12 | 2019-10-23 | キヤノン株式会社 | 画像処理装置、画像処理方法、画像投影システムおよびプログラム |
JP6707870B2 (ja) * | 2016-01-20 | 2020-06-10 | セイコーエプソン株式会社 | 投写システムおよび投写位置検出方法 |
US11269250B2 (en) * | 2016-03-10 | 2022-03-08 | Sony Corporation | Information processing apparatus, information processing method, and program |
JP6428694B2 (ja) * | 2016-03-29 | 2018-11-28 | ブラザー工業株式会社 | 投影制御装置、プログラム、及び投影システム |
KR101847996B1 (ko) * | 2016-12-16 | 2018-04-12 | 씨제이씨지브이 주식회사 | 곡면 투사영역에 대한 이미지 투사 방법 및 이를 위한 투사 시스템 |
US10970915B2 (en) * | 2017-01-06 | 2021-04-06 | Canon Kabushiki Kaisha | Virtual viewpoint setting apparatus that sets a virtual viewpoint according to a determined common image capturing area of a plurality of image capturing apparatuses, and related setting method and storage medium |
JP2019078786A (ja) * | 2017-10-20 | 2019-05-23 | セイコーエプソン株式会社 | 画像投射システム、プロジェクター、及び画像投射システムの制御方法 |
US10276075B1 (en) * | 2018-03-27 | 2019-04-30 | Christie Digital System USA, Inc. | Device, system and method for automatic calibration of image devices |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3735158B2 (ja) | 1996-06-06 | 2006-01-18 | オリンパス株式会社 | 画像投影システム、画像処理装置 |
JP3578918B2 (ja) * | 1998-08-12 | 2004-10-20 | 三菱電機株式会社 | マルチビジョンシステムのカラーキャリブレーション方法、カラーキャリブレーション装置およびマルチビジョンシステム |
US6755537B1 (en) * | 2003-03-21 | 2004-06-29 | Mitsubishi Electric Research Laboratories, Inc. | Method for globally aligning multiple projected images |
US7097311B2 (en) * | 2003-04-19 | 2006-08-29 | University Of Kentucky Research Foundation | Super-resolution overlay in multi-projector displays |
JP4830281B2 (ja) * | 2004-10-05 | 2011-12-07 | セイコーエプソン株式会社 | データ生成装置、およびマルチプロジェクションシステム |
US7306341B2 (en) * | 2005-02-28 | 2007-12-11 | Hewlett-Packard Development Company, L.P. | Multi-projector geometric calibration |
JP2007079028A (ja) | 2005-09-13 | 2007-03-29 | Canon Inc | 投射型画像表示装置およびマルチプロジェクションシステム |
KR100750955B1 (ko) | 2006-02-10 | 2007-08-23 | (주)다원미디어 | 프로젝터 원격관리 시스템 및 방법 |
JP4655999B2 (ja) | 2006-05-23 | 2011-03-23 | セイコーエプソン株式会社 | 投写表示システムのメニュー画像表示方法 |
JP4258540B2 (ja) * | 2006-09-01 | 2009-04-30 | セイコーエプソン株式会社 | 情報処理装置、情報処理プログラム、及びその記録媒体 |
US7942530B2 (en) * | 2006-10-31 | 2011-05-17 | The Regents Of The University Of California | Apparatus and method for self-calibrating multi-projector displays via plug and play projectors |
JP2008249908A (ja) | 2007-03-29 | 2008-10-16 | Brother Ind Ltd | プロジェクタ |
KR101265950B1 (ko) * | 2007-09-18 | 2013-05-23 | 삼성전자주식회사 | 프로젝터 및 상기 프로젝터의 프로젝션 제어 방법 |
JP5255250B2 (ja) | 2007-09-20 | 2013-08-07 | パナソニック株式会社 | 映像調整システム |
KR101428064B1 (ko) | 2008-02-22 | 2014-08-07 | 엘지전자 주식회사 | 화면 왜곡 보정 장치 및 방법 |
CN101527865B (zh) * | 2009-01-05 | 2010-09-01 | 清华大学 | 一种投影式高分辨率多视点自由立体显示系统 |
WO2010093361A1 (en) * | 2009-02-11 | 2010-08-19 | Hewlett-Packard Development Company, Lp | Multi-projector system and method |
KR20140048073A (ko) * | 2010-11-15 | 2014-04-23 | 스케일러블 디스플레이 테크놀로지스, 인크. | 수동 및 반자동 기법을 사용하여 디스플레이 시스템을 교정하는 시스템 및 방법 |
WO2013106243A1 (en) * | 2012-01-12 | 2013-07-18 | West Kanye Omari | Multiple screens for immersive audio/video experience |
-
2013
- 2013-08-26 KR KR1020130101340A patent/KR101515368B1/ko active IP Right Grant
-
2014
- 2014-08-06 US US14/453,429 patent/US9625804B2/en not_active Expired - Fee Related
- 2014-08-14 EP EP14840313.2A patent/EP3039860B1/en active Active
- 2014-08-14 WO PCT/KR2014/007573 patent/WO2015030398A1/en active Application Filing
- 2014-08-25 CN CN201410421974.7A patent/CN104427280B/zh not_active Expired - Fee Related
- 2014-08-26 JP JP2014171120A patent/JP6423650B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US9625804B2 (en) | 2017-04-18 |
KR20150024186A (ko) | 2015-03-06 |
WO2015030398A1 (en) | 2015-03-05 |
EP3039860A1 (en) | 2016-07-06 |
EP3039860B1 (en) | 2020-05-13 |
JP2015043086A (ja) | 2015-03-05 |
KR101515368B1 (ko) | 2015-04-27 |
CN104427280A (zh) | 2015-03-18 |
EP3039860A4 (en) | 2017-09-27 |
US20150055099A1 (en) | 2015-02-26 |
CN104427280B (zh) | 2017-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6423650B2 (ja) | 投射装置のクラスターリング方法、これを用いた管理装置及び管理システム | |
EP2685312B1 (en) | Image correction system and method for multi-projection | |
US9671684B2 (en) | Theater parameter management apparatus and method | |
EP2685311B1 (en) | Multi-projection system | |
US9654750B2 (en) | Image processing system, image processing apparatus, and image processing method to respectively display images obtained by dividing one image on first and the second display media | |
JP6524619B2 (ja) | 軌跡描画装置、軌跡描画方法、軌跡描画システム、及びプログラム | |
WO2018196472A1 (zh) | 一种投影方法、装置、系统及存储介质 | |
JP5633320B2 (ja) | 描画画像共有装置 | |
CN111694528B (zh) | 显示墙的排版辨识方法以及使用此方法的电子装置 | |
KR20150015680A (ko) | 특징점의 생성을 이용한 이미지 보정 방법 및 장치 | |
JP2015097350A (ja) | 画像処理装置およびマルチプロジェクションシステム | |
US9479747B2 (en) | Guide image generation device and method using parameters | |
US8480238B2 (en) | Projector array for multiple images | |
JP2020507100A (ja) | 曲面投影領域へのイメージ投影方法およびそのための投影システム | |
KR101553266B1 (ko) | 파라미터를 이용하여 가이드 이미지를 생성하는 장치 및 방법 | |
JP5645448B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN104570557A (zh) | 显示装置与应用其的显示方法 | |
JP2005252676A (ja) | マルチプロジェクションシステムのための画像補正方法 | |
KR20160109927A (ko) | 은닉포인트를 이용한 기하학 보정 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150612 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160308 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160608 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160628 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170210 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170321 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170817 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170825 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170828 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20171020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180829 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181019 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6423650 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |