JP5361618B2 - 画像処理装置及びその制御方法 - Google Patents
画像処理装置及びその制御方法 Download PDFInfo
- Publication number
- JP5361618B2 JP5361618B2 JP2009204720A JP2009204720A JP5361618B2 JP 5361618 B2 JP5361618 B2 JP 5361618B2 JP 2009204720 A JP2009204720 A JP 2009204720A JP 2009204720 A JP2009204720 A JP 2009204720A JP 5361618 B2 JP5361618 B2 JP 5361618B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- image
- parallax amount
- predetermined
- difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
- H04N13/359—Switching between monoscopic and stereoscopic modes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Controls And Circuits For Display Device (AREA)
Description
以下、この発明の実施形態について図面を参照して説明する。図1及び図2は、本発明を実現するためのシステム構成を示した一例である。
本実施形態では、視差量の調整方法として、フレーム画像枠に対して、映像データに含まれる物体の位置を個別に移動させた画像を作成して調整する方法(図7(b))について説明する。
以下、本発明の第3の実施形態について説明する。本実施形態は、オブジェクトのフレーム画像内での移動やフェードアウト等により、視差量を調整に用いるために着目する着目領域が視差量調整処理中に変更になる場合の制御である。実施例1と同様に、視差量の変化率を取得する対象は、図4に示すようなフレーム画像を分割した各ブロック領域とし、視差量の調整方法としては、図7(a)に示す方法を用いる。
22 変化率取得部
23 変化率判定部
24 視差量制御部
25 視差量調整部
100 処理装置
Claims (22)
- 左眼用画像フレーム及び右眼用画像フレームからなる画像データに基づく画像を表示部に立体視可能に表示する画像処理装置であって、
左眼用画像フレーム及び右眼用画像フレームの視差量の、2フレーム間の差分であるフレーム間差分が所定値以上か否かを判別する判別手段と、
前記表示部に表示されるべき左眼用画像フレーム及び右眼用画像フレームの視差量の調整を行う制御手段と、
を備え、
前記制御手段は、所定のフレームに関するフレーム間差分が前記所定値以上であると前記判別手段により判別された場合には、前記所定のフレームにおける、左眼用画像フレーム及び右眼用画像フレームの視差量を小さくする調整を行い、
さらに、前記制御手段は、前記所定のフレームに関するフレーム間差分が前記所定値以上ではないと前記判別手段により判別され、かつ、前記所定のフレームよりも前のフレームにおける左眼用画像フレーム及び右眼用画像フレームの視差量が調整されていた場合には、前記前のフレームにおける調整された視差量に基づいて、前記所定のフレームの視差量を調整することを特徴とする画像処理装置。 - 前記制御手段は、前記所定のフレームに関するフレーム間差分が前記所定値以上であると前記判別手段により判別された場合には、前記所定のフレームに関するフレーム間差分よりも小さいフレーム間差分で前記画像データに基づく画像が表示されるように、前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項1に記載の画像処理装置。
- 前記判別手段は、左眼用画像フレーム及び右眼用画像フレームを所定数に分割したブロック領域のフレーム間差分が、前記所定値以上か否かを判別し、
前記制御手段は、前記所定値以上のフレーム間差分を示すブロック領域を着目領域として決定し、前記着目領域のフレーム間差分から、前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項1または2に記載の画像処理装置。 - 前記制御手段は、左眼用画像フレーム及び右眼用画像フレームのそれぞれのフレーム内における位置に基づいて、前記着目領域を決定することを特徴とする請求項3に記載の画像処理装置。
- 前記制御手段は、前記所定値以上のフレーム間差分を示す前記ブロック領域の中から、左眼用画像フレーム及び右眼用画像フレーム内における前記ブロック領域の位置に応じた重み付けを行って前記着目領域を決定し、前記着目領域のフレーム間差分から前記表示用視差量を決定する制御を行うことを特徴とする請求項3に記載の画像処理装置。
- 前記制御手段は、左眼用画像フレーム及び右眼用画像フレームのそれぞれのブロック領域において、最も大きいフレーム間差分を有するブロック領域を、着目領域として決定することを特徴とする請求項3乃至5のいずれか一項に記載の画像処理装置。
- 前記制御手段は、左眼用画像フレーム及び右眼用画像フレームのそれぞれの中央の領域を、高い優先度で前記着目領域として決定することを特徴とする請求項3乃至6のいずれか一項に記載の画像処理装置。
- 前記制御手段は、前記所定のフレームと前記所定のフレームよりも後のフレームとの間における所定の着目領域のフレーム間差分が、前記所定値以上ではないと前記判別手段により判別された場合には、前記所定の着目領域以外のブロック領域の中から、前記所定のフレームと前記所定のフレームよりも後のフレームとの間におけるフレーム間差分が前記所定値以上であるブロック領域を、着目領域として決定することを特徴とする請求項3乃至7のいずれか一項に記載の画像処理装置。
- 前記画像データに付与されたメタデータを取得することにより、又は前記画像データを解析することにより、前記画像データに含まれる立体視される物体のうち特定のオブジェクトを認識する認識手段を更に有し、
前記判別手段は、前記認識手段により認識された特定のオブジェクトのフレーム間差分が前記所定値以上か否かを判別し、
前記制御手段は、前記特定のオブジェクトのフレーム間差分が前記所定値以上であると前記判別手段によって判別された場合、当該特定のオブジェクトを表示する際に用いる表示用視差量を、当該特定のオブジェクトのサイズ、画像データにおける当該特定のオブジェクトの位置、当該特定のオブジェクトの移動方向の少なくとも1つを用いて決定する制御を行うことを特徴とする請求項1乃至8のいずれか一項に記載の画像処理装置。 - 前記制御手段は、前記制御手段が調整した視差量と調整前視差量との間の差分を算出し、前記差分が時間経過と共に減少していくように前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項1乃至9のいずれか一項に記載の画像処理装置。
- 前記制御手段は、前記所定のフレームに関するフレーム間差分が前記所定値以上ではないと前記判別手段により判別され、かつ、前記所定のフレームよりも前のフレームにおける左眼用画像フレーム及び右眼用画像フレームの視差量が調整されていた場合には、前記所定のフレームに関するフレーム間差分が、前記前のフレームにおける調整された視差量と線形もしくは非線形に連続して変化するように、前記所定のフレームの視差量を調整することを特徴とする請求項1乃至10のいずれか一項に記載の画像処理装置。
- 左眼用画像フレーム及び左眼用画像フレームからなる画像データに基づく画像を表示部に立体視可能に表示する画像処理装置の制御方法であって、
左眼用画像フレーム及び右眼用画像フレームの視差量の、2フレーム間の差分であるフレーム間差分が所定値以上か否かを判別する判別ステップと、
前記表示部に表示されるべき左眼用画像フレーム及び右眼用画像フレームの視差量の調整を行う制御ステップと、
を備え、
前記制御ステップでは、所定のフレームに関するフレーム間差分が前記所定値以上であると前記判別ステップにおいて判別された場合には、前記所定のフレームにおける、左眼用画像フレーム及び右眼用画像フレームの視差量を小さくする調整を行い、
さらに、前記制御ステップでは、前記所定のフレームに関するフレーム間差分が前記所定値以上ではないと前記判別ステップにおいて判別され、かつ、前記所定のフレームよりも前のフレームにおける左眼用画像フレーム及び右眼用画像フレームの視差量が調整されていた場合には、前記前のフレームにおける調整された視差量に基づいて、前記所定のフレームの視差量を調整することを特徴とする画像処理装置の制御方法。 - 前記制御ステップでは、前記所定のフレームに関するフレーム間差分が前記所定値以上であると前記判別ステップにおいて判別された場合には、前記所定のフレームに関するフレーム間差分よりも小さいフレーム間差分で前記画像データに基づく画像が表示されるように、前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項12に記載の画像処理装置の制御方法。
- 前記判別ステップでは、左眼用画像フレーム及び右眼用画像フレームを所定数に分割したブロック領域のフレーム間差分が、前記所定値以上か否かを判別し、
前記制御ステップでは、前記所定値以上のフレーム間差分を示すブロック領域を着目領域として決定し、前記着目領域のフレーム間差分から、前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項12または13に記載の画像処理装置の制御方法。 - 前記制御ステップでは、左眼用画像フレーム及び右眼用画像フレームのそれぞれのフレーム内における位置に基づいて、前記着目領域を決定することを特徴とする請求項14に記載の画像処理装置の制御方法。
- 前記制御ステップでは、前記所定値以上のフレーム間差分を示す前記ブロック領域の中から、左眼用画像フレーム及び右眼用画像フレーム内における前記ブロック領域の位置に応じた重み付けを行って前記着目領域を決定し、前記着目領域のフレーム間差分から前記表示用視差量を決定する制御を行うことを特徴とする、請求項14または15に記載の画像処理装置の制御方法。
- 前記制御ステップでは、左眼用画像フレーム及び右眼用画像フレームのそれぞれのブロック領域において、最も大きいフレーム間差分を有するブロック領域を、着目領域として決定することを特徴とする請求項14乃至16のいずれか一項に記載の画像処理装置の制御方法。
- 前記制御ステップでは、左眼用画像フレーム及び右眼用画像フレームのそれぞれの中央の領域を、高い優先度で前記着目領域として決定することを特徴とする請求項14乃至17のいずれか一項に記載の画像処理装置の制御方法。
- 前記制御ステップでは、前記所定のフレームと前記所定のフレームよりも後のフレームとの間における所定の着目領域のフレーム間差分が、前記所定値以上ではないと前記判別ステップにおいて判別された場合には、前記所定の着目領域以外のブロック領域の中から、前記所定のフレームと前記所定のフレームよりも後のフレームとの間におけるフレーム間差分が前記所定値以上であるブロック領域を、着目領域として決定することを特徴とする請求項3乃至7のいずれか一項に記載の画像処理装置の制御方法。
- 前記画像データに付与されたメタデータを取得することにより、又は前記画像データを解析することにより、前記画像データに含まれる立体視される物体のうち特定のオブジェクトを認識する認識ステップを更に有し、
前記判別ステップでは、前記認識ステップにおいて認識した特定のオブジェクトのフレーム間差分が前記所定値以上か否かを判別し、
前記制御ステップでは、前記特定のオブジェクトのフレーム間差分が前記所定値以上であると前記判別ステップにおいて判別された場合、当該特定のオブジェクトを表示する際に用いる表示用視差量を、当該特定のオブジェクトのサイズ、画像データにおける当該特定のオブジェクトの位置、当該特定のオブジェクトの移動方向の少なくとも1つを用いて決定する制御を行うことを特徴とする請求項12乃至19のいずれか一項に記載の画像処理装置の制御方法。 - 前記制御ステップでは、前記制御ステップにおいて調整した視差量と調整前視差量との間の差分を算出し、前記差分が時間経過と共に減少していくように前記画像データに基づく画像を表示する際に用いる視差量である表示用視差量を決定する制御を行うことを特徴とする請求項12乃至20のいずれか一項に記載の画像処理装置の制御方法。
- 前記制御ステップでは、前記所定のフレームに関するフレーム間差分が前記所定値以上ではないと前記判別ステップにおいて判別され、かつ、前記所定のフレームよりも前のフレームにおける左眼用画像フレーム及び右眼用画像フレームの視差量が調整されていた場合には、前記所定のフレームに関するフレーム間差分が、前記前のフレームにおける調整された視差量と線形もしくは非線形に連続して変化するように、前記所定のフレームの視差量を調整することを特徴とする請求項12乃至21のいずれか一項に記載の画像処理装置の制御方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009204720A JP5361618B2 (ja) | 2009-09-04 | 2009-09-04 | 画像処理装置及びその制御方法 |
US12/875,017 US8610774B2 (en) | 2009-09-04 | 2010-09-02 | Video processing apparatus for displaying video data on display unit and control method therefor |
EP10175305.1A EP2306740B1 (en) | 2009-09-04 | 2010-09-03 | Video processing apparatus and control method therefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009204720A JP5361618B2 (ja) | 2009-09-04 | 2009-09-04 | 画像処理装置及びその制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011055421A JP2011055421A (ja) | 2011-03-17 |
JP2011055421A5 JP2011055421A5 (ja) | 2012-10-18 |
JP5361618B2 true JP5361618B2 (ja) | 2013-12-04 |
Family
ID=43416308
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009204720A Expired - Fee Related JP5361618B2 (ja) | 2009-09-04 | 2009-09-04 | 画像処理装置及びその制御方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8610774B2 (ja) |
EP (1) | EP2306740B1 (ja) |
JP (1) | JP5361618B2 (ja) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011176541A (ja) * | 2010-02-24 | 2011-09-08 | Sony Corp | 立体映像処理装置および方法、並びにプログラム |
JP5546633B2 (ja) * | 2010-06-25 | 2014-07-09 | 富士フイルム株式会社 | 立体画像再生装置、立体画像再生システム及び立体画像再生方法 |
US20120087571A1 (en) * | 2010-10-08 | 2012-04-12 | Electronics And Telecommunications Research Institute | Method and apparatus for synchronizing 3-dimensional image |
JP5250604B2 (ja) * | 2010-10-26 | 2013-07-31 | 富士フイルム株式会社 | 立体画像表示装置、立体画像表示方法およびプログラム |
JP5594067B2 (ja) * | 2010-11-02 | 2014-09-24 | ソニー株式会社 | 画像処理装置および画像処理方法 |
KR101763686B1 (ko) * | 2010-11-15 | 2017-08-01 | 삼성전자 주식회사 | 입체 영상 처리 장치 및 그 처리 방법 |
CN103262545B (zh) * | 2010-12-17 | 2015-10-14 | 富士通株式会社 | 立体动态图像生成装置、立体动态图像生成方法 |
JP5798334B2 (ja) * | 2011-02-18 | 2015-10-21 | 任天堂株式会社 | 表示制御プログラム、表示制御装置、表示制御システム、及び表示制御方法 |
KR20120133951A (ko) * | 2011-06-01 | 2012-12-11 | 삼성전자주식회사 | 3d 영상변환장치 그 깊이정보 조정방법 및 그 저장매체 |
JP2013005238A (ja) * | 2011-06-16 | 2013-01-07 | Sony Corp | 3次元画像処理装置及び3次元画像処理方法、表示装置、並びにコンピューター・プログラム |
JP5367034B2 (ja) * | 2011-08-24 | 2013-12-11 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置および画像処理方法 |
JP2013123153A (ja) * | 2011-12-12 | 2013-06-20 | Sony Corp | 画像処理装置、その制御方法およびプログラム |
JP5181083B1 (ja) | 2012-01-19 | 2013-04-10 | パナソニック株式会社 | 立体画像表示制御装置、立体画像表示制御方法、及びプログラム |
US20130300823A1 (en) * | 2012-05-10 | 2013-11-14 | Jiun-Sian Chu | Stereo effect enhancement systems and methods |
US9628770B2 (en) * | 2012-06-14 | 2017-04-18 | Blackberry Limited | System and method for stereoscopic 3-D rendering |
JP2015146526A (ja) | 2014-02-03 | 2015-08-13 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
JP2015149547A (ja) * | 2014-02-05 | 2015-08-20 | ソニー株式会社 | 画像処理方法、画像処理装置、及び電子機器 |
JP2017211694A (ja) * | 2016-05-23 | 2017-11-30 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US20220130173A1 (en) * | 2019-03-14 | 2022-04-28 | Nec Corporation | Information processing device, information processing system, information processing method, and storage medium |
CN110809188B (zh) * | 2019-12-03 | 2020-12-25 | 珠海格力电器股份有限公司 | 视频内容的识别方法、装置、存储介质及电子设备 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1040420A (ja) * | 1996-07-24 | 1998-02-13 | Sanyo Electric Co Ltd | 奥行き感制御方法 |
JPH11164328A (ja) | 1997-11-27 | 1999-06-18 | Toshiba Corp | 立体映像表示装置 |
JP2003018619A (ja) * | 2001-07-03 | 2003-01-17 | Olympus Optical Co Ltd | 立体映像評価装置およびそれを用いた表示装置 |
US8369607B2 (en) * | 2002-03-27 | 2013-02-05 | Sanyo Electric Co., Ltd. | Method and apparatus for processing three-dimensional images |
KR100804572B1 (ko) * | 2002-09-27 | 2008-02-20 | 샤프 가부시키가이샤 | 입체화상 표시장치, 입체화상 기록장치, 입체화상 부호화장치, 입체화상 복호장치, 입체화상 기록방법 및 입체화상 전송방법 |
JP2004200739A (ja) * | 2002-12-16 | 2004-07-15 | Sanyo Electric Co Ltd | 画像処理装置 |
JP2006268820A (ja) * | 2004-11-02 | 2006-10-05 | Matsushita Electric Ind Co Ltd | 画像識別方法、画像処理方法、画像識別装置、画像識別プログラムおよび集積回路 |
JP4751116B2 (ja) * | 2005-07-20 | 2011-08-17 | 株式会社リコー | 画像処理装置、画像処理方法 |
US8588514B2 (en) | 2007-05-11 | 2013-11-19 | Koninklijke Philips N.V. | Method, apparatus and system for processing depth-related information |
JP4695664B2 (ja) | 2008-03-26 | 2011-06-08 | 富士フイルム株式会社 | 立体動画像処理装置および方法並びにプログラム |
EP2274920B1 (en) | 2008-05-12 | 2019-01-16 | InterDigital Madison Patent Holdings | System and method for measuring potential eyestrain of stereoscopic motion pictures |
JP4637942B2 (ja) * | 2008-09-30 | 2011-02-23 | 富士フイルム株式会社 | 3次元表示装置および方法並びにプログラム |
-
2009
- 2009-09-04 JP JP2009204720A patent/JP5361618B2/ja not_active Expired - Fee Related
-
2010
- 2010-09-02 US US12/875,017 patent/US8610774B2/en not_active Expired - Fee Related
- 2010-09-03 EP EP10175305.1A patent/EP2306740B1/en not_active Not-in-force
Also Published As
Publication number | Publication date |
---|---|
JP2011055421A (ja) | 2011-03-17 |
EP2306740A1 (en) | 2011-04-06 |
US8610774B2 (en) | 2013-12-17 |
US20110058019A1 (en) | 2011-03-10 |
EP2306740B1 (en) | 2013-12-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5361618B2 (ja) | 画像処理装置及びその制御方法 | |
EP2701390B1 (en) | Apparatus for adjusting displayed picture, display apparatus and display method | |
JP5732888B2 (ja) | 表示装置及び表示方法 | |
JP5494283B2 (ja) | 立体表示装置及び立体表示装置の制御方法 | |
US9414041B2 (en) | Method for changing play mode, method for changing display mode, and display apparatus and 3D image providing system using the same | |
JPH11164328A (ja) | 立体映像表示装置 | |
US20130038611A1 (en) | Image conversion device | |
JP5699566B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20120242655A1 (en) | Image processing apparatus, image processing method, and program | |
EP2458895A2 (en) | Information processing apparatus, information processing method and program | |
JP4996720B2 (ja) | 画像処理装置、画像処理プログラム、及び画像処理方法 | |
JP2017510092A (ja) | オートステレオスコピックマルチビューディスプレイのための画像の生成 | |
JP5599063B2 (ja) | 表示制御装置、表示制御方法及びプログラム | |
US9918067B2 (en) | Modifying fusion offset of current, next, second next sequential frames | |
EP2587814A1 (en) | Depth adaptation for multi-view system | |
KR20180099756A (ko) | 2차원 영상의 입체 영상화 표시장치 | |
KR101816846B1 (ko) | 디스플레이 장치 및 이에 적용되는 osd 제공방법 | |
JP5911325B2 (ja) | 立体画像処理装置及び立体画像表示装置 | |
JP2012105153A (ja) | 立体画像表示装置、立体画像表示方法、立体画像表示方法をコンピュータに実行させるためのプログラム、及びそのプログラムを記録した記録媒体 | |
JP2011239172A (ja) | 映像処理装置 | |
KR101329063B1 (ko) | 입체감 조절방법 및 조절장치와 이를 이용한 3d 비디오 인코더 및 3d 단말 | |
JP5601375B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
CN103475831A (zh) | 应用于显示装置的字幕控制方法与元件 | |
KR20120036724A (ko) | 3차원 영상 동기화 방법 및 장치 | |
KR20140124263A (ko) | 디스플레이장치 및 디스플레이장치의 3d 효과 설정 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120904 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120904 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130425 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130514 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130716 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130806 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130903 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5361618 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |