JP5332303B2 - サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム - Google Patents
サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム Download PDFInfo
- Publication number
- JP5332303B2 JP5332303B2 JP2008126319A JP2008126319A JP5332303B2 JP 5332303 B2 JP5332303 B2 JP 5332303B2 JP 2008126319 A JP2008126319 A JP 2008126319A JP 2008126319 A JP2008126319 A JP 2008126319A JP 5332303 B2 JP5332303 B2 JP 5332303B2
- Authority
- JP
- Japan
- Prior art keywords
- presence information
- service providing
- service
- content
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/765—Media network packet handling intermediate
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Telephonic Communication Services (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
ストリーミングサーバは、コンテンツを映像表示装置にストリーミング送信する場合に、サービス提供装置から受信したプレゼンス情報を動画コンテンツに挿入する。
映像表示装置は、ストリーミングサーバから受信した動画コンテンツのデータよりプレゼンス情報を取り出し、プレゼンス情報の内容に基づいた表示を行い、その表示に基づいたユーザの選択操作があるとき、プレゼンス情報に含まれる接続情報を使用した接続処理を第2の伝送方式で行って、サービス提供装置にサービスの提供を要求する。
サービス提供装置は、サービスを要求する映像表示装置に対して、第2の伝送方式を用いてサービスを提供するための伝送路を確立し、伝送路を経由して、映像表示装置にサービスを送信する。
本実施の形態においては、NGNと称される次世代型の電話回線ネットワークに接続されるシステムとして構成したものである。NGNは、主として光ファイバで接続した大容量のデータ転送が行える電話回線によるネットワークであり、音声通話などの通常の電話用回線の他に、マルチキャストなどの配信処理で、比較的データ容量が大きな動画データの配信を行える構成としてある。
本実施の形態例では、サービス提供システム1に適用した例について説明する。
サービス提供システム1は、動画と音声の提供を含むサービスを要求された端末に提供するサービス提供装置2と、サービス提供装置2に対してサービスを要求する映像表示装置3を備える。サービス提供装置2は、法律相談や占い等のサービスをユーザに提供するサービス提供会社によって運営される。
サービス提供装置2は、第1の伝送方式(HTTP)を用いて、SIPプレゼンスサーバ4にプレゼンス情報を送る(経路11)。このプレゼンス情報は、サービス提供装置2の使用状態を示す情報が含まれる。例えば、サービス提供者が、「オンライン」、「オフライン」、「退席中」、「通話中」であることがプレゼンス情報によって示される。「オンライン」のとき、ユーザは通話できる。「オフライン」のとき、サービス提供装置2の電源がオフ状態であるため、ユーザは通話できない。「退席中」のとき、サービス提供者は自席から離れているため、ユーザは通話できない。「通話中」のとき、サービス提供者は他のユーザに対応中であるため、ユーザは通話できない。
NGNは、SIPによる制御が可能なネットワークである。NGNは、別々に構築されているインターネットサービス用IPネットワークと電話サービス用の電話網を、IP技術を用いてQoS(Quality of Service)やセキュリティを向上させたIP通信網として統合し、現行の公衆網を代替する次世代IPネットワークである。電話だけでなくテレビ放送もIPネットワークで統一的に提供しようとする動きも進められている。
サービス提供装置2は、サービス提供者を撮像し、動画を生成する撮像部21と、撮像部21で生成された動画を映像表示装置3に送信する動画送信部22を備える。また、サービス提供装置2は、映像表示装置3からユーザが撮像された動画を受信する動画受信部23を備える。動画受信部23で受信した動画は、表示部26に表示される。また、サービス提供装置2は、サービス提供者が変更したプレゼンス情報をSIPプレゼンスサーバ4に送信するSIPプレゼンス部24を備える。SIPプレゼンスサーバ4に送られたプレゼンス情報は、SIPプレゼンスサーバ4に登録される。また、サービス提供装置2は、サービス提供者のサービスを要求する映像表示装置3との間でSIPセッションを確立し、終了するSIPシグナリング部25を備える。
映像表示装置3は、ユーザを撮像し、動画を生成する撮像部31と、撮像部31で生成された動画をサービス提供装置2に送信する動画送信部32を備える。また、映像表示装置3は、サービス提供装置2からサービス提供者が撮像された動画を受信する動画受信部33を備える。動画受信部33で受信した動画は、表示部35に表示される。また、映像表示装置3は、サービス提供者のサービスを要求するサービス提供装置2との間でSIPセッションを確立し、終了するSIPシグナリング部34を備える。また、映像表示装置3に対してユーザ操作が可能な操作部36を備える。操作部36は、映像表示装置3の筐体に取り付けられるボタン等や、表示部35に表示されたメニュー画面から任意のメニューを選択可能なリモートコントロール装置を含む。
ストリーミングサーバ5は、SIPプレゼンスサーバ4からプレゼンス情報を受信するプレゼンス情報受信部51と、受信したプレゼンス情報を保存するプレゼンス情報保存部55を備える。また、ストリーミングサーバ5は、映像表示装置3に送信するコンテンツを保存するコンテンツ保存部54と、コンテンツ保存部54から読み出したコンテンツを映像表示装置3に送信するコンテンツ送信部53を備える。そして、ストリーミングサーバ5は、所定の方式でコンテンツにプレゼンス情報を挿入するプレゼンス情報挿入部52を備える。プレゼンス情報がコンテンツに挿入されるタイミングは、プレゼンス情報が変更された時である。
本例において、プレゼンス情報のメッセージフォーマットは、PIDF(Presence Information Data Format:RFC3863)に則って、XML(Extensible Markup Language)文書として記述される。
図7は、MPEG2−TS構成としたトランスポートストリームとトランスポートパケットの構成例である。トランスポートストリームとトランスポートパケットは、上述したMPEGストリームとMPEGパケットを上位概念化した表現である。このため、ここで説明するトランスポートストリームとトランスポートパケットに該当する映像伝送フォーマットであれば、使用されるストリームフォーマットは、MPEG2に限られない。
MPEG2−TSは、連続した固定長のトランスポートパケットで構成される。図7(a)より、トランスポートストリームは、複数のトランスポートパケットが連続して構成されることが示される。トランスポートパケットには、基本的に、所定の単位でコンテンツを分割した動画または静止画の情報が含まれるが、音声、プログラムの情報が含まれる場合もある。
トランスポートパケットは、ヘッダ部とボディ部で構成される。通常、ヘッダ部には、パケットの種類、シーケンス番号、タイムスタンプ、送信元、送信先等の情報が含まれる。また、ボディ部には、音声、動画や、電子番組表(EPG:Electronic Program Guide)等のメタデータが格納される。メタデータは、MPEGストリームに含まれ、MPEGのデータ構成を規定するデータである。本例では、ボディ部にメタデータとして、プレゼンス情報を格納する。
ここでは、IP放送で用いられるMEPG2ストリームに、プレゼンス情報を挿入する様子を示す。ストリーミングサーバ5は、SIPプレゼンスサーバ4から変更されたプレゼンス情報を受け取ると、プレゼンス情報を格納したトランスポートパケットを挿入したトランスポートストリームを映像表示装置3に送信する。そして、映像表示装置3は、受信したトランスポートストリームからトランスポートパケットを取り出して、サービス提供装置2が変更したプレゼンス情報を取得できる。
表示部35に表示される画面は、サービス提供者の顔等が表示されるメイン画面41と、各種のメニューを選択可能なメニュー画面42で構成される。映像表示装置3は、ストリーミングサーバ5で運営されるポータルサイトにアクセスすると、メイン画面41とメニュー画面42を含むコンテンツを受信し、表示部35に表示できる。
サービス提供装置2が変更したプレゼンス情報は、SIPプレゼンスサーバ4、ストリーミングサーバ5を介して映像表示装置3に通知される。映像表示装置3は、受け取ったプレゼンス情報を解析し、メイン画面41の下部にサービス提供者の名称、電話番号、メッセージ43をオーバレイ表示する。
メイン画面41にサービス提供者が「オンライン」になったことが表示されると、このサービス提供者に電話を発信するかどうかを選択可能なサブ画面44がメイン画面41に表示される。ここで、ユーザは、操作部36を用いてオンラインになったサービス提供会社が運用するサービス提供装置2に電話発信することを選択する。サービス提供会社が直接、映像表示装置3にサービスを提供するのであれば、以下の画面に遷移しない。
映像表示装置3の表示部35には、複数のサービス提供者が接続する場合、任意のサービス提供者が使用するサービス提供装置2を選ぶため、画面が表示される(図13と図14を参照。)。図12に示すサブ画面44よりサービス提供者に電話を発信することが選択されると、サービス提供会社に所属する各サービス提供者のプレゼンス情報がアイコン45a〜45fに表示される。プレゼンス情報が変更されると、すぐにアイコン45a〜45fに反映される。ユーザは、メイン画面41に表示されているサービス提供者以外のサービス提供者を表示させたい場合、メニュー46を選択して画面を遷移させる。
図13に示すメイン画面41において、ユーザが操作部36でアイコン45eを選択すると、選択したサービス提供者に電話を発信するかどうかを選択可能なサブ画面47が表示される。ユーザは、「はい」を選択することによって、サブ画面47に表示されたサービス提供者に電話を発信する。そして、ユーザは、希望するサービス提供者からサービスを受けることができる。
Claims (13)
- 動画と音声の提供を含むサービスを要求する映像表示装置に前記サービスを提供するサービス提供装置は、第1の伝送方式を用いて、前記サービス提供装置が提供するサービスの内容を含む動画コンテンツを送信するストリーミングサーバに、前記サービス提供装置の使用状態と前記サービス提供装置への接続情報を含むプレゼンス情報を送信し、
前記ストリーミングサーバは、前記サービス提供装置から受信した前記プレゼンス情報を前記動画コンテンツのデータに挿入した状態で、前記動画コンテンツのデータを前記映像表示装置にストリーミング送信し、
前記映像表示装置は、前記ストリーミングサーバから受信した前記動画コンテンツのデータより前記プレゼンス情報を取り出し、前記プレゼンス情報の内容に基づいた表示を行い、その表示に基づいたユーザの選択操作があるとき、前記プレゼンス情報に含まれる接続情報を使用した接続処理を第2の伝送方式で行って、前記サービス提供装置に前記サービスの提供を要求し、
前記サービス提供装置は、前記サービスを要求する映像表示装置に対して、前記第2の伝送方式を用いて前記サービスを提供するための伝送路を確立し、前記伝送路を経由して、前記映像表示装置に前記サービスを提供する
サービス提供方法。 - 請求項1記載のサービス提供方法において、
前記映像表示装置は、受信した動画コンテンツのデータより取り出したプレゼンス情報に含まれる前記サービス提供装置の使用状態として、少なくともオンラインとビジーの区別を表示する
サービス提供方法。 - 請求項2記載のサービス提供方法において、
前記映像表示装置は、前記使用状態でオンラインであることが示されるとき、前記接続情報を使用した接続処理が行える画面を表示する
サービス提供方法。 - 請求項3記載のサービス提供方法において、
前記動画コンテンツのデータは、動画コンテンツのパケットデータが連続したトランスポートストリームとして送信され、
前記プレゼンス情報は、所定のコンピュータ言語で記述されたパケットデータであり、そのプレゼンス情報のパケットデータを前記動画コンテンツのパケットデータが連続したトランスポートストリームに挿入して、前記映像表示装置にストリーミング送信する
サービス提供方法。 - 請求項4記載のサービス提供方法において、
前記トランスポートストリームは、MPEGストリームであり、
前記プレゼンス情報は、前記MPEGストリームに含まれ、MPEGのデータ構成を規定するメタデータに挿入される
サービス提供方法。 - 請求項1記載のサービス提供方法において、
前記ストリーミングサーバは、前記受信したプレゼンス情報を保存部に保存し、前記サービス提供装置が前記プレゼンス情報を変更した場合に、前記変更したプレゼンス情報を前記コンテンツに挿入する
サービス提供方法。 - 動画と音声の提供を含むサービスを要求する映像表示装置に前記サービスを提供するサービス提供装置から、第1の伝送方式を用いて、前記サービス提供装置の使用状態と前記サービス提供装置への接続情報を含むプレゼンス情報を受信するプレゼンス受信部と、
前記サービス提供装置から受信した前記プレゼンス情報を、配信する動画コンテンツに挿入するプレゼンス挿入部と、
前記サービス提供装置が提供するサービスの内容を含む前記プレゼンス情報が挿入された前記動画コンテンツを前記映像表示装置にストリーミング送信するコンテンツ送信部と、を備える
ストリーミングサーバ。 - 請求項7記載のストリーミングサーバにおいて、
前記プレゼンス情報に含まれる前記サービス提供装置の使用状態には、少なくともオンラインとビジーの区別が含まれる
ストリーミングサーバ。 - 請求項8記載のストリーミングサーバにおいて、
前記動画コンテンツのデータは、動画コンテンツのパケットデータが連続したトランスポートストリームとして送信され、
前記プレゼンス情報は、所定のコンピュータ言語で記述されたパケットデータであり、そのプレゼンス情報のパケットデータを前記動画コンテンツのパケットデータが連続したトランスポートストリームに挿入して、ストリーミング送信する
ストリーミングサーバ。 - サービスを提供するサービス提供装置から、第1の伝送方式を用いて、前記サービス提供装置の使用状態と前記サービス提供装置への接続情報を含むプレゼンス情報を受信するプレゼンス情報受信処理と、
前記サービス提供装置から受信した前記プレゼンス情報を、配信する動画コンテンツに挿入するプレゼンス情報挿入処理と、
前記サービス提供装置が提供するサービスの内容を含む前記プレゼンス情報が挿入された前記動画コンテンツを、映像表示装置にストリーミング送信するコンテンツ送信処理と、を含む
ストリーミング送信方法。 - 動画と音声の提供を含むサービスを要求する映像表示装置に前記サービスを提供するサービス提供装置から、第1の伝送方式を用いて、前記サービス提供装置の使用状態と前記サービス提供装置への接続情報を含むプレゼンス情報を受信し、
前記サービス提供装置から受信した前記プレゼンス情報を配信する動画コンテンツに挿入し、
前記サービス提供装置が提供するサービスの内容を含む前記プレゼンス情報が挿入された前記動画コンテンツを前記映像表示装置にストリーミング送信する処理を実行させる
プログラム。 - 請求項11記載のプログラムにおいて、
前記プレゼンス情報に含まれる前記サービス提供装置の使用状態には、少なくともオンラインとビジーの区別が含まれる
プログラム。 - 請求項12記載のプログラムにおいて、
前記動画コンテンツのデータは、動画コンテンツのパケットデータが連続したトランスポートストリームとして送信され、
前記プレゼンス情報は、所定のコンピュータ言語で記述されたパケットデータであり、そのプレゼンス情報のパケットデータを前記動画コンテンツのパケットデータが連続したトランスポートストリームに挿入して、ストリーミング送信する
プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008126319A JP5332303B2 (ja) | 2008-05-13 | 2008-05-13 | サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム |
EP09251083A EP2120417A2 (en) | 2008-05-13 | 2009-04-09 | Method for providing service, streaming server and program |
US12/463,455 US20090288114A1 (en) | 2008-05-13 | 2009-05-11 | Method for providing service, streaming server, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008126319A JP5332303B2 (ja) | 2008-05-13 | 2008-05-13 | サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009278276A JP2009278276A (ja) | 2009-11-26 |
JP5332303B2 true JP5332303B2 (ja) | 2013-11-06 |
Family
ID=41009974
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008126319A Expired - Fee Related JP5332303B2 (ja) | 2008-05-13 | 2008-05-13 | サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20090288114A1 (ja) |
EP (1) | EP2120417A2 (ja) |
JP (1) | JP5332303B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9628831B2 (en) | 2010-03-25 | 2017-04-18 | Whatsapp, Inc. | Multimedia transcoding method and system for mobile devices |
US8995965B1 (en) * | 2010-03-25 | 2015-03-31 | Whatsapp Inc. | Synthetic communication network method and system |
WO2013124814A1 (en) * | 2012-02-21 | 2013-08-29 | Wit-Software, Consultoria E Software Para A Internet Móvel, S.A. | System and method for sharing multimedia content using a television receiver during a voice call |
KR101954802B1 (ko) * | 2012-06-08 | 2019-03-07 | 에스케이플래닛 주식회사 | 오디오 데이터를 이용한 프레즌스 정보 제공 시스템, 이를 위한 장치 및 방법 |
WO2013183816A1 (ko) * | 2012-06-08 | 2013-12-12 | 에스케이플래닛 주식회사 | 오디오 데이터를 이용한 프레즌스 정보 제공 시스템, 이를 위한 장치 및 방법 |
US20140330957A1 (en) * | 2012-08-21 | 2014-11-06 | Intel Corporation | Widi cloud mode |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4668515B2 (ja) * | 2001-01-30 | 2011-04-13 | 韓國電子通信研究院 | マルチメディアコンテンツに同期化されたメタデータ伝送装置及び方法 |
JP3586235B2 (ja) * | 2001-11-09 | 2004-11-10 | 株式会社東芝 | Mpegストリームデータ記録装置、mpegストリームデータ記録方法、及びmpegストリームデータ編集方法 |
JP4151356B2 (ja) * | 2002-09-06 | 2008-09-17 | ソニー株式会社 | プログラム、情報処理方法および装置 |
US7474741B2 (en) * | 2003-01-20 | 2009-01-06 | Avaya Inc. | Messaging advise in presence-aware networks |
US7216147B2 (en) * | 2003-03-27 | 2007-05-08 | Microsoft Corporation | Controlling publication of presence information |
JP2004356897A (ja) * | 2003-05-28 | 2004-12-16 | Neu & Computing Inc | ゲートウェイ装置およびそれを用いた情報提供システム |
JP4300965B2 (ja) * | 2003-10-09 | 2009-07-22 | 沖電気工業株式会社 | サービスシステムおよびサービス提供方法 |
JP2005208685A (ja) | 2004-01-19 | 2005-08-04 | Nippon Telegr & Teleph Corp <Ntt> | プレゼンスとメタデータを利用した情報自動通知方法並びに同システムおよびそれに用いるプレゼンス・サブシステムおよびメタデータ・サブシステム |
JP2006352662A (ja) * | 2005-06-17 | 2006-12-28 | Matsushita Electric Ind Co Ltd | サーバ装置、参照端末装置、および通信方法 |
US8681751B2 (en) * | 2005-07-11 | 2014-03-25 | Nokia Corporation | Method and apparatus for providing presence information in support of wireless communication services |
JP4746397B2 (ja) * | 2005-10-04 | 2011-08-10 | 株式会社東芝 | 再生タイトルに関連した広告表示処理方法およびその装置 |
US9071882B2 (en) * | 2006-02-02 | 2015-06-30 | At&T Intellectual Property I, L.P. | User-configurable video data service and interface |
CN101438256B (zh) * | 2006-03-07 | 2011-12-21 | 索尼株式会社 | 信息处理设备、信息通信系统、信息处理方法 |
JP4954624B2 (ja) * | 2006-07-18 | 2012-06-20 | 三菱電機株式会社 | 宅内中継装置および宅内中継システム |
US8081745B2 (en) * | 2006-12-14 | 2011-12-20 | Microsoft Corporation | Dynamic information publication enabling direct access to a preferred communication channel connection in integrated communication server |
-
2008
- 2008-05-13 JP JP2008126319A patent/JP5332303B2/ja not_active Expired - Fee Related
-
2009
- 2009-04-09 EP EP09251083A patent/EP2120417A2/en not_active Withdrawn
- 2009-05-11 US US12/463,455 patent/US20090288114A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2009278276A (ja) | 2009-11-26 |
US20090288114A1 (en) | 2009-11-19 |
EP2120417A2 (en) | 2009-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11128837B2 (en) | Internet protocol television audio and video calling | |
US8564638B2 (en) | Apparatus and method for video conferencing | |
US9667916B2 (en) | Audio and video calling through multiple terminal devices | |
EP2087692B1 (en) | Media channel management | |
EP2001197B1 (en) | Method of transmitting/receiving broadcasting signals and receiver | |
EP1838102B1 (en) | Communication terminal, system and method for implementing streaming media services | |
US9030968B2 (en) | System and method for processing a conference session through a communication channel | |
EP2001203A2 (en) | Method of transmitting/receiving broadcasting signals and receiver | |
JP2008530835A (ja) | パケット交換ネットワーク上のオンデマンドマルチチャネルストリーミングセッション | |
JP5332303B2 (ja) | サービス提供方法、ストリーミングサーバ、ストリーミング送信方法及びプログラム | |
US20080243602A1 (en) | Systems and methods for providing iptv advertisements | |
US20090055878A1 (en) | Accessing interactive services over internet | |
US9277535B2 (en) | Simultaneous delivery of a telephony call over a broadband access network and a circuit-switched network | |
WO2009052650A1 (en) | Method and terminal for forwarding an iptv program to an sip terminal | |
US8908853B2 (en) | Method and device for displaying information | |
US9246695B2 (en) | Method and apparatus for providing virtual closed circuit television | |
US20070285205A1 (en) | Multimedia data monitoring system and multimedia data monitoring method | |
KR20090017762A (ko) | 방송 신호 재생 중에 커뮤니티 제공 시스템 및 방법 | |
EP1981248B1 (en) | Terminal control method and service provision system using SIP messaging. | |
WO2011036646A2 (en) | Systems and methods for handling advertisements in conjunction with network-based bookmarking | |
JP2010010892A (ja) | 通信制御装置と通信システムおよび通信制御方法 | |
JP2006211001A (ja) | テレビ電話装置 | |
JP2009278275A (ja) | 映像配信装置、映像配信方法、映像受信装置及び映像受信方法 | |
KR20110026685A (ko) | 메신저 기능을 수행하는 iptv의 동작 방법 및 그 방법을 채용한 iptv |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110408 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120925 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120927 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130702 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130715 |
|
LAPS | Cancellation because of no payment of annual fees |