JP2015177469A - 抽出プログラム、方法、及び装置 - Google Patents
抽出プログラム、方法、及び装置 Download PDFInfo
- Publication number
- JP2015177469A JP2015177469A JP2014054206A JP2014054206A JP2015177469A JP 2015177469 A JP2015177469 A JP 2015177469A JP 2014054206 A JP2014054206 A JP 2014054206A JP 2014054206 A JP2014054206 A JP 2014054206A JP 2015177469 A JP2015177469 A JP 2015177469A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- scene
- period
- extraction
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7834—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using audio features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/44—Event detection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Library & Information Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Television Signal Processing For Recording (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【解決手段】スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は音データが所定の大きさより大きい音を示す期間に対応する、スポーツの試合についての撮影画像の一部又は全部を、スポーツの試合における注目シーンを含む動画データ部分として特定する。
【選択図】図1
Description
図1に示すように、第1実施形態に係る映像配信システム10は、抽出装置20と、配信装置30とを含む。抽出装置20と、配信装置30とは、ネットワークを介して接続されている。映像配信システム10では、抽出装置20により抽出された注目シーンを示すメタ情報が付加された映像を、配信装置30により、ネットワークを介して、所定の端末に配信する。抽出装置20は、音変化検出部22と、抽出部24と、作成部26とを含む。なお、音変化検出部22及び抽出部24は、本発明の特定部の一例である。また、配信装置30は、編集部32と、配信部34とを含む。
次に、第2実施形態について説明する。なお、第1実施形態に係る映像配信システム10と同様の部分については、同一符号を付して、詳細な説明を省略する。
コンピュータに、
スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する、
ことを含む処理を実行させる抽出プログラム。
前記コンピュータに、
音の大きさについての、予め定めた閾値と予め定めた所定値以上の音の大きさの継続時間とに基づいて、前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間を検出する
ことを含む処理を実行させる付記1記載の抽出プログラム。
前記コンピュータに、
注目シーンの種類に応じて設定された前記閾値、及び前記所定値以上の音の大きさが継続している継続時間に基づいて、前記動画データ部分に含まれる前記注目シーンを分類する
ことを含む処理を実行させる付記2記載の抽出プログラム。
前記コンピュータに、
前記スポーツがサッカーである場合に、ゴールシーンに対応付けて設定された前記閾値、及び前記継続時間に基づいて、前記注目シーンとしてゴールシーンを含む動画データ部分を特定する
ことを含む処理を実行させる付記3記載の抽出プログラム。
前記コンピュータに、
前記撮影画像に含まれる複数のフレームの各々から、前記複数のフレームそれぞれの画像の特徴に基づいて、ゴール付近が撮影されたフレームを検出し、
前記継続時間が、前記ゴールシーンに基づいて設定された前記閾値以上で、かつ検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームに、前記ゴール付近が撮影されたフレームが含まれる場合に、検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームを、ゴールシーンを含む動画データ部分として特定する
ことを含む処理を実行させる付記4記載の抽出プログラム。
前記コンピュータに、
前記ゴール付近が撮影されたフレームとして、フレームから抽出される画像特徴に基づき、ピッチ外の領域を所定以上含むフレームを検出する
ことを含む処理を実行させる付記5記載の抽出プログラム。
前記コンピュータに、
前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の検出に、、音の大きさの絶対量をさらに用いる
ことを含む処理を実行させる付記1〜付記6のいずれか1項記載の抽出プログラム。
前記コンピュータに、
検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の開始の所定秒前の時刻情報に対応付けられたフレームを、前記注目シーンを含む動画データ部分の開始フレームとする
ことを含む処理を実行させる付記1〜付記7のいずれか1項記載の抽出プログラム。
前記コンピュータに、
特定された前記動画データ部分が、注目シーンを含む動画データ部分であることを示すメタ情報を作成する
ことを含む処理を実行させる付記1〜付記8のいずれか1項記載の抽出プログラム。
コンピュータに、
スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する、
ことを含む処理を実行させる抽出方法。
前記コンピュータに、
音の大きさについての、予め定めた閾値と予め定めた所定値以上の音の大きさの継続時間とに基づいて、前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間を検出する
ことを含む処理を実行させる付記1記載の抽出方法。
前記コンピュータに、
注目シーンの種類に応じて設定された前記閾値、及び前記所定値以上の音の大きさが継続している継続時間に基づいて、前記動画データ部分に含まれる前記注目シーンを分類する
ことを含む処理を実行させる付記11記載の抽出方法。
前記コンピュータに、
前記スポーツがサッカーである場合に、ゴールシーンに対応付けて設定された前記閾値、及び前記継続時間に基づいて、前記注目シーンとしてゴールシーンを含む動画データ部分を特定する
ことを含む処理を実行させる付記12記載の抽出方法。
前記コンピュータに、
前記撮影画像に含まれる複数のフレームの各々から、前記複数のフレームそれぞれの画像の特徴に基づいて、ゴール付近が撮影されたフレームを検出し、
前記継続時間が、前記ゴールシーンに基づいて設定された前記閾値以上で、かつ検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームに、前記ゴール付近が撮影されたフレームが含まれる場合に、検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームを、ゴールシーンを含む動画データ部分として特定する
ことを含む処理を実行させる付記13記載の抽出方法。
前記コンピュータに、
前記ゴール付近が撮影されたフレームとして、フレームから抽出される画像特徴に基づき、ピッチ外の領域を所定以上含むフレームを検出する
ことを含む処理を実行させる付記14記載の抽出方法。
前記コンピュータに、
前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の検出に、、音の大きさの絶対量をさらに用いる
ことを含む処理を実行させる付記10〜付記15のいずれか1項記載の抽出方法。
前記コンピュータに、
検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の開始の所定秒前の時刻情報に対応付けられたフレームを、前記注目シーンを含む動画データ部分の開始フレームとする
ことを含む処理を実行させる付記10〜付記16のいずれか1項記載の抽出方法。
スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する特定部
を含む抽出装置。
前記特定部は、音の大きさについての、予め定めた閾値と予め定めた所定値以上の音の大きさの継続時間とに基づいて、前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間を検出する付記18記載の抽出装置。
前記特定部は、注目シーンの種類に応じて設定された前記閾値、及び前記所定値以上の音の大きさが継続している継続時間に基づいて、前記動画データ部分に含まれる前記注目シーンを分類する付記19記載の抽出装置。
前記特定部は、前記スポーツがサッカーである場合に、ゴールシーンに対応付けて設定された前記閾値、及び前記継続時間に基づいて、前記注目シーンとしてゴールシーンを含む動画データ部分を特定する付記20記載の抽出装置。
前記撮影画像に含まれる複数のフレームの各々から、前記複数のフレームそれぞれの画像の特徴に基づいて、ゴール付近が撮影されたフレームを検出する検出部を含み、
前記特定部は、前記継続時間が、前記ゴールシーンに基づいて設定された前記閾値以上で、かつ検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームに、前記ゴール付近が撮影されたフレームが含まれる場合に、検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームを、ゴールシーンを含む動画データ部分として特定する
付記21記載の抽出装置。
前記検出部は、前記ゴール付近が撮影されたフレームとして、フレームから抽出される画像特徴に基づき、ピッチ外の領域を所定以上含むフレームを検出する付記22記載の抽出装置。
前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の検出に、、音の大きさの絶対量をさらに用いる付記18〜付記23のいずれか1項記載の抽出装置。
前記特定部は、検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の開始の所定秒前の時刻情報に対応付けられたフレームを、前記注目シーンを含む動画データ部分の開始フレームとする付記18〜付記24のいずれか1項記載の抽出装置。
20、220 抽出装置
22 音変化検出部
24、224 抽出部
26 作成部
28 ゴール付近画像検出部
30 配信装置
32 編集部
34 配信部
40、60 コンピュータ
42、62 CPU
44、64 メモリ
46、66 記憶部
50、250 抽出プログラム
70 配信プログラム
Claims (10)
- コンピュータに、
スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する、
ことを含む処理を実行させる抽出プログラム。 - 前記コンピュータに、
音の大きさについての、予め定めた閾値と予め定めた所定値以上の音の大きさの継続時間とに基づいて、前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間を検出する
ことを含む処理を実行させる請求項1記載の抽出プログラム。 - 前記コンピュータに、
注目シーンの種類に応じて設定された前記閾値、及び前記所定値以上の音の大きさが継続している継続時間に基づいて、前記動画データ部分に含まれる前記注目シーンを分類する
ことを含む処理を実行させる請求項2記載の抽出プログラム。 - 前記コンピュータに、
前記スポーツがサッカーである場合に、ゴールシーンに対応付けて設定された前記閾値、及び前記継続時間に基づいて、前記注目シーンとしてゴールシーンを含む動画データ部分を特定する
ことを含む処理を実行させる請求項3記載の抽出プログラム。 - 前記コンピュータに、
前記撮影画像に含まれる複数のフレームの各々から、前記複数のフレームそれぞれの画像の特徴に基づいて、ゴール付近が撮影されたフレームを検出し、
前記継続時間が、前記ゴールシーンに基づいて設定された前記閾値以上で、かつ検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームに、前記ゴール付近が撮影されたフレームが含まれる場合に、検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応するフレームを、ゴールシーンを含む動画データ部分として特定する
ことを含む処理を実行させる請求項4記載の抽出プログラム。 - 前記コンピュータに、
前記ゴール付近が撮影されたフレームとして、フレームから抽出される画像特徴に基づき、ピッチ外の領域を所定以上含むフレームを検出する
ことを含む処理を実行させる請求項5記載の抽出プログラム。 - 前記コンピュータに、
前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の検出に、、音の大きさの絶対量をさらに用いる
ことを含む処理を実行させる請求項1〜請求項6のいずれか1項記載の抽出プログラム。 - 前記コンピュータに、
検出された前記音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間の開始の所定秒前の時刻情報に対応付けられたフレームを、前記注目シーンを含む動画データ部分の開始フレームとする
ことを含む処理を実行させる請求項1〜請求項7のいずれか1項記載の抽出プログラム。 - コンピュータに、
スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する、
ことを含む処理を実行させる抽出方法。 - スポーツの試合について集音して得られた音データが相対的に大きい音を示す期間、又は前記音データが所定の大きさより大きい音を示す期間に対応する、前記スポーツの試合についての撮影画像の一部又は全部を、前記スポーツの試合における注目シーンを含む動画データ部分として特定する特定部
を含む抽出装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014054206A JP6427902B2 (ja) | 2014-03-17 | 2014-03-17 | 抽出プログラム、方法、及び装置 |
US14/633,611 US9508012B2 (en) | 2014-03-17 | 2015-02-27 | Extraction method and device |
EP15156933.2A EP2921973A1 (en) | 2014-03-17 | 2015-02-27 | Extraction method and device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014054206A JP6427902B2 (ja) | 2014-03-17 | 2014-03-17 | 抽出プログラム、方法、及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015177469A true JP2015177469A (ja) | 2015-10-05 |
JP6427902B2 JP6427902B2 (ja) | 2018-11-28 |
Family
ID=52595146
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014054206A Expired - Fee Related JP6427902B2 (ja) | 2014-03-17 | 2014-03-17 | 抽出プログラム、方法、及び装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9508012B2 (ja) |
EP (1) | EP2921973A1 (ja) |
JP (1) | JP6427902B2 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6354229B2 (ja) * | 2014-03-17 | 2018-07-11 | 富士通株式会社 | 抽出プログラム、方法、及び装置 |
JP6682222B2 (ja) * | 2015-09-24 | 2020-04-15 | キヤノン株式会社 | 検知装置及びその制御方法、コンピュータプログラム |
JP6631199B2 (ja) * | 2015-11-27 | 2020-01-15 | ヤマハ株式会社 | 技法判定装置 |
US11172319B2 (en) | 2017-12-21 | 2021-11-09 | Insoundz Ltd. | System and method for volumetric sound generation |
CN109582463B (zh) * | 2018-11-30 | 2021-04-06 | Oppo广东移动通信有限公司 | 资源配置方法、装置、终端及存储介质 |
JP6828133B1 (ja) * | 2019-12-27 | 2021-02-10 | 株式会社ドワンゴ | コンテンツ生成装置、コンテンツ配信サーバ、コンテンツ生成方法、および、コンテンツ生成プログラム |
US20230206635A1 (en) * | 2020-05-26 | 2023-06-29 | Nec Corporation | Information processing device, control method, and recording medium |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6160950A (en) * | 1996-07-18 | 2000-12-12 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for automatically generating a digest of a program |
JP2006013796A (ja) * | 2004-06-24 | 2006-01-12 | Zeta Bridge Corp | ダイジェスト映像提供システム、ダイジェスト映像提供装置および方法、ならびに、端末装置およびダイジェスト映像要求方法 |
JP2007336283A (ja) * | 2006-06-15 | 2007-12-27 | Toshiba Corp | 情報処理装置、情報処理方法および情報処理プログラム |
JP2008511186A (ja) * | 2004-08-27 | 2008-04-10 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | フレームシーケンスを含むビデオにおけるハイライトセグメントを識別する方法 |
JP2011015129A (ja) * | 2009-07-01 | 2011-01-20 | Mitsubishi Electric Corp | 画質調整装置 |
JP2012195811A (ja) * | 2011-03-17 | 2012-10-11 | Fujitsu Ltd | ダイジェスト映像生成装置およびプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004509529A (ja) | 2000-09-13 | 2004-03-25 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 可視的手がかりを用いてビデオプログラムにおける重要情報を強調表示する方法 |
JP4615166B2 (ja) * | 2001-07-17 | 2011-01-19 | パイオニア株式会社 | 映像情報要約装置、映像情報要約方法及び映像情報要約プログラム |
JP4424590B2 (ja) | 2004-03-05 | 2010-03-03 | 株式会社Kddi研究所 | スポーツ映像の分類装置 |
US8068719B2 (en) * | 2006-04-21 | 2011-11-29 | Cyberlink Corp. | Systems and methods for detecting exciting scenes in sports video |
-
2014
- 2014-03-17 JP JP2014054206A patent/JP6427902B2/ja not_active Expired - Fee Related
-
2015
- 2015-02-27 US US14/633,611 patent/US9508012B2/en active Active
- 2015-02-27 EP EP15156933.2A patent/EP2921973A1/en not_active Ceased
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6160950A (en) * | 1996-07-18 | 2000-12-12 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for automatically generating a digest of a program |
JP2006013796A (ja) * | 2004-06-24 | 2006-01-12 | Zeta Bridge Corp | ダイジェスト映像提供システム、ダイジェスト映像提供装置および方法、ならびに、端末装置およびダイジェスト映像要求方法 |
JP2008511186A (ja) * | 2004-08-27 | 2008-04-10 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | フレームシーケンスを含むビデオにおけるハイライトセグメントを識別する方法 |
JP2007336283A (ja) * | 2006-06-15 | 2007-12-27 | Toshiba Corp | 情報処理装置、情報処理方法および情報処理プログラム |
JP2011015129A (ja) * | 2009-07-01 | 2011-01-20 | Mitsubishi Electric Corp | 画質調整装置 |
JP2012195811A (ja) * | 2011-03-17 | 2012-10-11 | Fujitsu Ltd | ダイジェスト映像生成装置およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6427902B2 (ja) | 2018-11-28 |
US20150262017A1 (en) | 2015-09-17 |
EP2921973A1 (en) | 2015-09-23 |
US9508012B2 (en) | 2016-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6427902B2 (ja) | 抽出プログラム、方法、及び装置 | |
JP6354229B2 (ja) | 抽出プログラム、方法、及び装置 | |
US9530061B2 (en) | Extraction method for extracting a pitching scene and device for the same | |
US9681200B2 (en) | Data processing method and device | |
JP2006148932A (ja) | スポーツ動映像の要約方法及び装置 | |
JP4577774B2 (ja) | スポーツ映像の分類装置およびログ生成装置 | |
JP2005210234A (ja) | 映像内容認識装置、録画装置、映像内容認識方法、録画方法、映像内容認識プログラム、および録画プログラム | |
US10200764B2 (en) | Determination method and device | |
JP5664374B2 (ja) | ダイジェスト映像生成装置およびプログラム | |
US20070292112A1 (en) | Searching method of searching highlight in film of tennis game | |
US8542983B2 (en) | Method and apparatus for generating a summary of an audio/visual data stream | |
EP2922060B1 (en) | Extraction method and device | |
JP2016048853A (ja) | 情報処理プログラム、方法、及び装置 | |
US9538244B2 (en) | Extraction method for extracting a pitching scene and device for the same | |
JP2010081531A (ja) | 映像処理装置及びその方法 | |
JP7191760B2 (ja) | 映像情報出力装置、映像情報出力システム、映像情報出力プログラム及び映像情報出力方法 | |
JP6628670B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2022230291A1 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2006166105A (ja) | イベント検出方法及び装置及びプログラム | |
JP2016100614A (ja) | 映像処理装置、映像処理システム、映像処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161206 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170831 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170912 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171113 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180403 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180702 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20180710 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181002 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181015 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6427902 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |