JP6137257B2 - 放送受信システム及び放送受信方法 - Google Patents

放送受信システム及び放送受信方法 Download PDF

Info

Publication number
JP6137257B2
JP6137257B2 JP2015184700A JP2015184700A JP6137257B2 JP 6137257 B2 JP6137257 B2 JP 6137257B2 JP 2015184700 A JP2015184700 A JP 2015184700A JP 2015184700 A JP2015184700 A JP 2015184700A JP 6137257 B2 JP6137257 B2 JP 6137257B2
Authority
JP
Japan
Prior art keywords
broadcast receiving
unit
information processing
decoding
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015184700A
Other languages
English (en)
Other versions
JP2016028495A (ja
Inventor
健次 綱島
健次 綱島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2015184700A priority Critical patent/JP6137257B2/ja
Publication of JP2016028495A publication Critical patent/JP2016028495A/ja
Application granted granted Critical
Publication of JP6137257B2 publication Critical patent/JP6137257B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、広域ネットワークに通信可能に接続される放送受信装置、及び、この放送受信装置を含む放送受信システムに関する。
パーソナルコンピュータ(PC)の高性能化とインターネット接続の広帯域化とに伴い、インターネットを介した映像配信が普及し始めている。インターネットによる映像配信では、MPEG(Moving Picture Experts Group)等の映像圧縮技術を用いて映像信号を圧縮することによって得られた圧縮信号を、ネットワークを介してPCに送る。PCは、この圧縮信号をデコードし、デコードされた映像信号に対応する映像をモニターに表示する。
一方、テレビ放送についても、デジタル化が急速に進められている。デジタルテレビ放送においては、映像信号をMPEG規格に基づいて圧縮したデジタルストリーミングデータを搬送波にのせて、各家庭のデジタルテレビに送っている。
インターネットによる映像配信と、デジタル放送とは、同様のデジタル映像/音声ストリームを用いているが、インターネットによる映像の配信先はPCであり、デジタル放送はデジタルテレビ受信機で視聴されるのが一般的である。
PCは、デジタル放送受信チューナを付加することにより、PC画面上にデジタル放送に基づく映像を表示させることができる。一方、ネットワーク経由で送られてくるストリーミングデータを視聴可能としたデジタルテレビ受信機であるインターネットテレビが、開発されている。インターネットテレビは、例えば、特許文献1に開示されている。
特開2001−94966号公報(図1) 特開2005−284195号公報
一般に、インターネットにアクセスするための機能が付加されたデジタルテレビ受信機では、ユーザが、ブラウザ等を介してインターネット上のコンテンツを選択することで、テレビ画面に選択されたコンテンツの映像が表示される。デジタルテレビ受信機には、組込プロセッサが用いられているのが一般的である。このような組込プロセッサには、ブラウザ等のグラフィカルユーザインターフェースの生成、表示を行うには、処理能力が十分でないものがあり、また、ブラウザ等のグラフィカルユーザインターフェースの実装そのものができないものもある。また、組込プロセッサに実装可能なブラウザの性能は、対応可能なウェブサイトの記述等の点で、PC用のブラウザの性能に及ばないことがあり、例えば、PC用のブラウザで表示可能なサイトであっても、組込プロセッサ用のブラウザでは表示できない場合があった。これらの問題点は、組込プロセッサの性能の向上、実装するメモリの容量増加等のようにハードウェア仕様の向上によって解決可能であるが、ハードウェア仕様の向上は、装置のコストアップに繋がる。
また、デジタルテレビ受信機では、受信した圧縮された信号を処理する専用ハードウェアによるデコーダが用いられており、予めハードウェアで規定された信号以外は受信が困難である。
そこで、本発明は、上記従来技術の課題を解決するためになされたものであり、負荷の重いソフトウェアを実装することなく、広域ネットワークから受信した映像コンテンツを表示可能にすることができる放送受信装置及び放送受信システムを提供することを目的とする。
本発明の一態様に係る放送受信システムは、情報処理装置と、放送受信装置とからなる放送受信システムであって、前記情報処理装置は、インターネットを通して配信されるストリーミングコンテンツを閲覧するためのブラウザを実装し、前記放送受信装置とネットワークにより接続され、該放送受信装置は、受信した放送信号に対応する映像と前記ストリーミングコンテンツに含まれる画像を表示る表示手段と、情報の入力操作が行われる入力手段と、前記インターネット及び前記情報処理装置に対して通信可能に接続されるネットワーク通信手段と、前記ネットワーク通信手段を介して、前記情報処理装置に実装されたブラウザで選択されたストリーミングコンテンツにかかるデータを受信して、受信された前記ストリーミングコンテンツにかかるデータに基づくグラフィックスデータを前記表示手段に表示するとともに、前記入力手段から入力された情報を、前記ネットワーク通信手段を介して、前記情報処理装置に提供するユーザインターフェース提供手段と、前記インターネットから前記ネットワーク通信手段に入力された通信データを監視して、当該通信データに映像データが含まれているか否かを監視する監視手段と、前記映像データをデコードする第1のデコード手段と、前記第1のデコード手段ではデコード処理できない前記映像データを蓄え、前記情報処理装置からの要求に応じて、蓄えた前記映像データを前記情報処理装置に送るキャッシュ手段とを備え、前記情報処理装置は、前記デコード処理できない映像データをデコードする第2のデコード手段を有し、前記表示手段は、前記第1のデコード手段及び前記第2のデコード手段でデコードされた前記映像データに基づいて前記画像を表示させることを特徴としている。
また、本発明の態様に係る放送受信方法は、情報処理装置が行う情報処理ステップと、放送受信装置が行う放送受信ステップとからなる放送受信方法であって、前記情報処理ステップは、前記情報処理装置が実装するブラウザにより、インターネットを通して配信されるストリーミングコンテンツを選択するステップと、該選択されたストリーミングコンテンツに係る映像を前記放送受信装置に送信するステップとを備え、前記放送受信ステップは、受信した放送信号に対応する映像と前記ストリーミングコンテンツに含まれる画像とを表示する表示ステップと、前記ストリーミングコンテンツの選択操作が行われる入力ステップと、前記インターネット及び前記情報処理装置に対して通信可能に接続されるネットワーク通信ステップと、前記選択されたストリーミングコンテンツにかかるデータを受信して、受信された前記ストリーミングコンテンツにかかるデータに基づくグラフィックスデータを前記表示ステップで表示するとともに、前記入力ステップで入力された情報を、前記情報処理装置に提供するユーザインターフェース提供ステップと、前記インターネットから入力された通信データを監視して、当該通信データに映像データが含まれているか否かを監視する監視ステップと、前記映像データをデコードする第1のデコードステップと、前記第1のデコードステップではデコード処理できない前記映像データを蓄え、前記情報処理装置からの要求に応じて、蓄えた前記映像データを前記情報処理装置に送るキャッシュステップとを備え、前記放送受信ステップ及び前記情報処理ステップは、それぞれが前記映像データを分担してデコードするデコードステップを有し、それぞれがデコードした前記映像データに基づいて前記表示ステップで画像を表示させる前記情報処理ステップは、前記デコード処理できない映像データをデコードする第2のデコードステップを有し、前記表示ステップは、前記第1のデコードステップ及び前記第2のデコードステップでデコードされた前記映像データに基づいて前記画像を表示させることを特徴としている。

本発明の一態様に係る放送受信装置及び放送受信システムによれば、負荷の重いソフトウェアを実装することなく、広域ネットワークから受信した種々の映像コンテンツを表示可能にすることができる。
実施の形態1に係る放送受信システムの構成を概略的に示すブロック図である。 実施の形態1に係る放送受信システムの動作の一例を示すシーケンス図である。 実施の形態1及び4におけるHTTPリクエストのフォーマットの一例を示す図である。 実施の形態1及び4におけるHTTPレスポンスのフォーマットの一例を示す図である。 実施の形態2に係る放送受信システムの構成を概略的に示すブロック図である。 実施の形態3に係る放送受信システムの構成を概略的に示すブロック図である。 実施の形態4に係る放送受信システムの構成を概略的に示すブロック図である。 実施の形態4に係る放送受信システムの動作の一例を示すシーケンス図である。 実施の形態5に係る放送受信システムの構成を概略的に示すブロック図である。
実施の形態の概要.
一般に、広域ネットワークとしてのインターネットを通して配信されるストリーミングコンテンツを、デジタルテレビ等の放送受信装置において視聴する際には、コンテンツの検索及び選択等を行うために、放送受信装置に実装されたブラウザが使用される。
しかし、放送受信装置に内蔵される組込プロセッサは、PCに内蔵されるCPUに比べて、処理能力が低く、また、放送受信装置は、PCに比べて、容量の少ないメモリで動作している。このため、放送受信装置に、PC用のブラウザに匹敵する性能を持つブラウザを実装することは容易ではなく、放送受信装置において表示することができるストリーミングコンテンツには制約がある場合が多い。
そこで、本発明の一態様に係る放送受信装置は、内蔵された組込プロセッサへの負荷を高めることなく、PCのブラウザで選択されたストリーミングコンテンツの映像を受信して、画面に表示させることができるように構成されている。
具体的には、本発明の一態様に係る放送受信装置は、PCから放送受信装置を経由してインターネットにアクセスすると共に、PCの画面上に表示されるブラウザのビットマップ等を含むグラフィッカルユーザインターフェースを、PCから放送受信装置に送ることで、放送受信装置の画面を見ながらリモコンなどの入力装置を操作して、コンテンツの選択が可能となるように構成されている。
また、本発明の他の態様に係る放送受信装置は、PCからインターネットに送出されるリクエスト、及び当該リクエストに応じて送られてくるデータを放送受信装置内で監視し、送られてくるデータが映像コンテンツであると判断すると、送られてきたデータをデコードして、画面上に表示するように構成されている。
さらに、本発明のさらに他の態様に係る放送受信装置は、ウェブ画面にリンクされた映像コンテンツを、選択が行われる前から順次デコードを開始するに必要な量だけダウンロードして一時的に蓄えるキャッシュ手段を設けたので、選択後に直ちに選択したストリームに対応する映像の表示が開始されるように構成されている。このため、PCのブラウザで選択されたストリーミングコンテンツの映像が画面上に表示されるため、放送受信装置にブラウザ等の選択手段を実装することなく、インターネットを通して配信されるストリーミングコンテンツを検索、選択できるとともに、選択した映像コンテンツを選択した時点から待ち時間なく放送受信装置の表示部に映像を表示することができる。
実施の形態1.
図1は、実施の形態1に係る放送受信システム10の構成を概略的に示すブロック図である。図1に示されるように、放送受信システム10は、放送受信装置11と、情報処理装置としてのPC13とを備える。
放送受信装置11は、第1ネットワーク通信手段としての第1ネットワークインターフェース手段(以下「第1NIF手段」という)111と、第2ネットワーク通信手段としての第2ネットワークインターフェース手段(以下「第2NIF手段」という)112と、監視手段114を有するネットワークブリッジ処理手段113と、デコード手段115と、表示手段116と、ユーザインターフェース提供手段(以下「UIF提供手段」という)117と、入力手段118と、グラフィック処理手段119とを備える。ここで、デコード手段115及びグラフィック処理手段119により、表示制御手段120が構成される。
第1NIF手段111は、広域ネットワークであるインターネット14との間で情報を送受信するためのインターフェースである。例えば、第1NIF手段111は、図示しないルータ等を介して、インターネット14に接続されている。
第2NIF手段112は、PC13との間で情報を送受信するためのインターフェースである。例えば、第2NIF手段112は、クロスケーブル等を介してPC13に接続されている。
ネットワークブリッジ処理手段113は、第1NIF手段111と、第2NIF手段112とをブリッジ接続する。このため、第2NIF手段112に接続されているPC13は、ネットワークブリッジ処理手段113を介して、第1NIF手段111側のインターネット14に接続することができる。従って、放送受信装置11は、インターネット14とPC13の間に挿入されたプロキシとみなすこともできる。
また、ネットワークブリッジ処理手段113は、PC13とインターネット14との間のHTTP通信を監視する監視手段114を備える。監視手段114は、インターネット14から送られてくる映像ストリーミングデータを分離して、デコード手段115に与える。なお、監視手段114は、インターネット14から送られてくる映像ストリーミングデータを第2NIF部112を介して、PC13にも与える。
デコード手段115は、監視手段114より受け取った映像ストリーミングデータをデコードして、デコードされた映像信号を表示手段116に与える。表示手段116は、液晶ディスプレイなどのような表示装置であり、デコード手段115から受け取った映像信号に対応する映像を表示する。また、表示手段116は、グラフィック処理手段119から与えられる画面データに対応する画像をも表示する。
PC13から送信されてきたグラフィッカルユーザインターフェースは、第2NIF手段112を介してUIF提供手段117に与えられる。UIF提供手段117は、PC13から送信されてきたグラフィッカルユーザインターフェースに基づいて、PC13の遠隔操作を行う。このようなPC13の遠隔操作は、VNC(Virtual Network Computing)と呼ばれるソフトウェアを用いることで、容易に実現可能である。VNCは、例えば、特開2005−284195号公報(特許文献2)に記載されているように、VNCサーバソフトとVNCクライアント(ビューワ)ソフトとからなり、VNCサーバソフトが実行されているコンピュータ(以下「サーバ側コンピュータ」という)で作成されたグラフィッカルユーザインターフェースを、VNCクライアントソフトが実行されているコンピュータ(以下「クライアント側コンピュータ」という)にネットワーク経由で送り、クライアント側コンピュータは、このグラフィッカルユーザインターフェースに対応する画面を表示手段に表示させる。
そして、クライアント側コンピュータは、キーボード又はマウス等の入力装置(実施の形態1においては入力手段118)により入力された操作に対応するユーザイベントをサーバ側コンピュータに送り返すことで、サーバ側コンピュータの遠隔操作を行うことが可能となる。従って、VNCサーバソフトをPC13で実行し、VNCクライアントソフトを放送受信装置11で実行することにより、PC13の遠隔操作を容易に実現することができる。ここで、UIF提供手段117は、例えば、放送受信装置11に備えられている図示しない組込プロセッサ等のプロセッサにおいて、VNCクライアントソフトが実行されることにより実現される。
そして、UIF提供手段117は、第2NIF手段112を介して受け取ったグラフィッカルユーザインターフェースを適切なフォーマットに変更したグラフィックスデータを生成して、このグラフィックスデータをグラフィック処理手段119に与える。また、UIF提供手段117は、入力手段118を介して受け付けた入力に基づいてユーザイベントを特定し、特定したユーザイベントを第2NIF手段112に与えて、PC13に送信させる。
入力手段118は、ユーザによって指示等の情報の入力操作が行われる装置であり、UIF提供手段117に、入力された情報を提供する。入力手段118は、例えば、リモコン(remote control)又は放送受信装置11本体に備えられた操作部により構成することができる。
グラフィック処理手段119は、UIF提供手段117より受け取ったグラフィックスデータから、表示手段116に表示させる画面データを生成して、この画面データを表示手段116に出力する。
次に、PC13について説明する。PC13は、ネットワークインターフェース手段(以下「NIF手段」という)131と、制御手段132と、記憶手段133とを備える。
NIF手段131は、放送受信装置11との間で情報の送受信を行うためのインターフェースである。制御手段132は、PC13における処理を制御する。特に、制御手段132は、ブラウザ等を実行することにより、放送受信装置11を介して、インターネット14との間で情報を送受信する。また、制御手段132は、上述したVNCにおけるVNCサーバソフトが実行されることにより提供される機能に基づいて、放送受信装置11の表示手段116に表示するためのグラフィッカルユーザインターフェースを、NIF手段131を介して、放送受信装置11に送信する。そして、制御手段132は、NIF手段131を介して、放送受信装置11からユーザイベントを受信して、このユーザイベントに対応する処理を実行する。記憶手段133は、PC13で扱うデータを記憶する。記憶手段133は、例えば、NIF手段131を介して、放送受信装置11から送られてきたストリーミングデータ等を記憶する。
図2は、実施の形態1に係る放送受信システム10の動作の一例を示すシーケンス図である。図1に示されるように、放送受信装置11は、インターネット14とPC13とを通信可能に接続する場合に、インターネット14に接続されたネットワークと、PC13が属するネットワークとの間に挿入される。ここで、第1NIF手段111及び第2NIF手段112に接続されるネットワークは、HTTP通信が可能なTCP/IPをサポートするネットワーク、例えば、イーサネット(登録商標)の規格に対応したネットワークである。ただし、ネットワークの種類は、これに限定されない。なお、図2において、サーバ15は、インターネット14に接続され、ストリーミングデータを配信する。
ユーザが、放送受信装置11の表示手段116に表示された画面を見ながら、入力手段118を操作してコンテンツの選択を行うと、UIF提供手段117から、第2NIF手段112を介して、コンテンツを選択した操作に対応するユーザイベントがPC13に送信される。PC13では、NIF手段131を介して、ユーザイベントを受信すると、制御部132が、このようなユーザイベントに対応して、HTTPリクエストREQを作成し、放送受信装置11に送信する(ステップS10)。図3は、HTTPリクエストREQのフォーマットの一例を示す図である。図3に示されるように、HTTPリクエストREQは、リクエスト行REQ1と、メッセージヘッダREQ2とを有する。なお、HTTPリクエストREQを用いて、サーバ15にデータを送信する場合には、メッセージヘッダREQ2の後に空白行が入れられてから、送信するデータを格納するエンティティボディ(entity−body)が追加される。
HTTPリクエストREQを受信した放送受信装置11では、HTTPリクエストREQが、第2NIF手段112からネットワークブリッジ処理手段113に与えられる。ネットワークブリッジ処理手段113の監視手段114は、このHTTPリクエストREQを読み取り、リクエスト行REQ1の「GET」というメソッドと、ファイル名の拡張子「.mpg」とにより、映像コンテンツのストリームデータとしてのMPEGストリーミングデータが送られてくるものと判断する(ステップS11)。
そして、ネットワークブリッジ処理手段113は、第1NIF手段111を介して、HTTPリクエストREQをインターネット14に接続されているサーバ15に送信する(ステップS12)。
HTTPリクエストREQを受信したサーバ15は、このHTTPリクエストREQに対する成功応答であるHTTPレスポンスRESを返信する(ステップS13)。図4は、HTTPレスポンスRESのフォーマットの一例を示す図である。図4に示されるように、HTTPレスポンスRESは、ステータス行RES1と、メッセージヘッダRES2とを有する。HTTPレスポンスRESを用いてデータを送信する場合には、メッセージヘッダRES2の後に空白行が入れられてから、リクエストされたMPEGデータを格納するエンティティボディが追加される。
図2に示すシーケンスにおいては、監視手段114は、ステップS11において、映像コンテンツのストリーミングデータが送られてくるものと判断されているが、HTTPリクエストから、映像コンテンツのストリーミングデータが送られてくるものと判断できない場合もある。例えば、PC13がCGI(Common Gateway Interface)と呼ばれるサーバ15上のプログラムにアクセスする場合には、リクエスト行が、例えば、「GET /path/script.cgi HTTP/1.0」等となり、監視手段114は、送信されてくるデータの種類を判別することはできない。このような場合には、監視手段114は、HTTPレスポンスRESのメッセージヘッダを監視して、その中に含まれている「Content−Type」の行に格納されている情報(例えば、「video」やファイル識別子)に基づき、エンティティボディに映像コンテンツのストリーミングデータが格納されているか否かを判断する。
HTTPレスポンスRESを受信した放送受信装置11では、HTTPレスポンスRESが、第1NIF手段111からネットワークブリッジ処理手段113に与えられる。ネットワークブリッジ処理手段113は、第2NIF手段112を介して、HTTPレスポンスRESをPC13に転送する(ステップS14)。このとき、監視手段114は、ステップS11で映像コンテンツのストリーミングデータが送られてくると判断しているので、HTTPレスポンスRESのエンティティボディからMPEGデータを取得して、デコード手段115に与える(ステップS15)。そして、デコード手段115でデコードされた映像信号に基づく映像が表示手段116に表示される。
以下、ステップS13〜S15と同様の処理が、繰り返される(ステップS16〜S21)。
以上に説明したように、実施の形態1に係る放送受信装置11は、PC13上のブラウザ等を用いて、放送受信装置11の表示手段116を見ながら入力手段118の操作によって、インターネット14上のコンテンツを検索し、選択することができる。このため、放送受信装置11自体に、PC用のブラウザを実装しなくても、PC13で使用されているPC用のブラウザを放送受信装置11で使用することができる。したがって、実施の形態1に係る放送受信装置11又は放送受信システム10によれば、放送受信装置11の組込用ブラウザを用いた場合に利用できないサイトについても、利用することができる。
なお、上記説明においては、第2NIF手段13とPC13との間をクロスケーブル等を介して接続した場合を説明したが、このような構成に限定されるものではない。例えば、第2NIF手段112及びPC13のNIF手段131を、無線通信を行うことのできる無線通信手段で構成してもよく、この場合には、これらの間を接続するケーブルが不要となる。また、第2NIF手段112を、複数のPC13のルーティングを行うルーティング処理手段で構成してもよく、この場合には、放送受信装置11に複数のPC13を接続することができる。
実施の形態2.
図5は、実施の形態2に係る放送受信システム20の構成を概略的に示すブロック図である。図5において、図1に示される構成と同一又は対応する構成には、同じ符合を付す。図5に示されるように、放送受信システム20は、放送受信装置21と、複数のPC13とを備える。実施の形態2に係る放送受信システム20は、放送受信装置21の構成、及びPC13が複数備えられている点において、実施の形態1に係る放送受信システム10と異なっている。
放送受信装置21は、第1NIF手段111と、ネットワークブリッジ処理手段113と、監視手段114と、デコード手段115と、表示手段116と、UIF提供手段117と、入力手段118と、グラフィック処理手段119と、第2ネットワーク通信手段としてのルーティング手段221と、第2ネットワーク通信手段としての無線通信手段222とを備える。実施の形態2に係る放送受信装置21は、実施の形態1における第2NIF手段112(図1)の代わりにルーティング手段221及び無線通信手段222が備えられている点において、実施の形態1に係る放送受信装置21と異なっている。また、実施の形態2においては、PC13がNIF手段131に代えて、又は、NIF手段131の他に、無線通信手段(図示せず)を備えている。
ルーティング手段221は、PC13から無線通信手段222を介して、インターネット14宛のIPパケットを取得すると、このIPパケットのアドレス情報をルーティング手段221に予め定められたアドレス情報に変換して、ネットワークブリッジ処理手段113に与える。また、ネットワークブリッジ処理手段113は、IPパケットを取得すると、ルーティングテーブルに基づいて、IPパケットを送信先のPC13に転送する。無線通信手段222は、PC13との間で無線による通信を行うインターフェースである。以上のようなルーティング手段221及び無線通信手段222を備えたため、放送受信装置21は、複数のPC13との間で無線による通信を行うことができる。
以上のように構成された放送受信システム20の基本的な動作は、実施の形態1に係る放送受信システム10の基本的な動作と同様であり、無線ネットワークに接続されたPC13からのグラフィッカルユーザインターフェースに対応する画面が表示手段116に表示されて、インターネット14上の映像コンテンツが選択され、選択された映像コンテンツの映像が表示手段116に表示される。また、ルーティング手段221を備えることで、複数台のPC13が放送受信装置21にローカルネットワーク(無線ネットワーク)を介して接続可能となっているので、放送受信装置21は、いずれかのPC13が動作していれば、インターネット14上のコンテンツの映像を表示することができる。
しかし、複数台のPC13が同時にインターネット14にアクセスする場合もあるので、監視手段114は、メッセージヘッダ等からリクエストを送り出したPCを複数のPC13の中から区別して、ユーザ等により選択された一つのPC(複数のPC13の中の一つ)から送信されたリクエストに対応する映像コンテンツのストリーミングデータの映像を表示手段116に表示させる。
以上に説明したように、実施の形態2に係る放送受信装置21は、無線LAN機能とルータ機能を内蔵することにより、ローカルネットワーク上の複数のPC13を相互に接続すると共に、インターネットアクセスのゲートウェイとして機能し、かつ、その内一つのPC13を使ってインターネット上の映像コンテンツにアクセスして、この映像コンテンツの映像を表示することができる。このように、実施の形態2に係る放送受信装置21は、PC13上のブラウザ等を用いて、放送受信装置21の表示手段116を見ながら入力手段118の操作によって、インターネット14上のコンテンツを検索し、選択することができる。このため、放送受信装置21自体に、PC用のブラウザを実装しなくても、選択されたPC13で使用されているPC用のブラウザを放送受信装置21で使用することができる。したがって、実施の形態2に係る放送受信装置21又は放送受信システム20によれば、放送受信装置21の組込用ブラウザを用いた場合に利用できないサイトについても、利用することができる。
実施の形態3.
図6は、実施の形態3に係る放送受信システム30の構成を概略的に示すブロック図である。図6において、図5に示される構成と同一又は対応する構成には、同じ符合を付す。図6に示されるように、放送受信システム30は、放送受信装置31と、複数のPC13とを備える。実施の形態3に係る放送受信システム30は、放送受信装置31の構成において、実施の形態2に係る放送受信システム20と異なっている。
放送受信装置31は、監視手段114を有するネットワークブリッジ処理手段113と、デコード手段115と、表示手段116と、UIF提供手段117と、入力手段118と、グラフィック処理手段119と、ルーティング手段221と、無線通信手段222と、第2ネットワーク通信手段としてのケーブル通信手段323とを備える。実施の形態3に係る放送受信装置31は、第1NIF手段111の代わりにケーブル通信手段323が備えられている点において、実施の形態2に係る放送受信装置21と異なっている。
ケーブル通信手段322は、ケーブルテレビ回線を使って、インターネット14に接続するためのインターフェースであり、ケーブルテレビ回線に接続するためのモデムであるケーブルモデムとして機能する。このようなケーブル通信手段322を備えたため、放送受信装置31は、近年普及が進んでいるケーブルインターネット接続に対応できる構成となっている。
一般に、ケーブルインターネット接続では、テレビの近くに設置されたケーブルテレビ端子にケーブルモデムを接続する。したがって、PCをインターネットに接続するためには、テレビの近くからPCまでイーサネット等のケーブルを敷設する必要がある。
これに対し、実施の形態3に係る放送受信装置31がケーブル対応デジタル放送受信装置である場合には、ケーブルテレビ端子と、ケーブルモデムを内蔵する放送受信装置31のRF入力端子とを接続するだけでよい。このように、ケーブルテレビ端子と放送受信装置31を1本のケーブルで接続するだけで、放送受信装置31及びローカルネットワーク上の複数のPC13を、通信可能に接続することができる。また、この場合には、イーサネット等のケーブルを敷設する必要はない。このように、実施の形態3に係る放送受信装置31は、PC13上のブラウザ等を用いて、放送受信装置31の表示手段116を見ながら入力手段118の操作によって、インターネット14上のコンテンツを検索し、選択することができる。このため、放送受信装置31自体に、PC用のブラウザを実装しなくても、選択されたPC13で使用されているPC用のブラウザを放送受信装置31で使用することができる。したがって、実施の形態3に係る放送受信装置31又は放送受信システム30によれば、放送受信装置31の組込用ブラウザを用いた場合に利用できないサイトについても、利用することができる。
なお、上記説明では、放送受信装置31は、実施の形態2に係る放送受信装置21の第1NIF手段111に代えてケーブル通信手段322を備えることにより構成したが、このような構成に限定されず、実施の形態1に係る放送受信装置11の第1NIF手段111に代えてケーブル通信手段322を備えることにより構成することも可能である。
実施の形態4.
図7は、実施の形態4に係る放送受信システム40の構成を概略的に示すブロック図である。図7において、図1に示される構成と同一又は対応する構成には、同じ符合を付す。図7に示されるように、放送受信システム40は、放送受信装置41と、情報処理装置としてのPC13とを備える。
放送受信装置41は、第1ネットワーク通信手段としての第1NIF手段111と、第2ネットワーク通信手段としての第2NIF手段112と、監視手段114及びキャッシュ手段440を有するネットワークブリッジ処理手段413と、デコード手段115と、表示手段116と、UIF提供手段117と、入力手段118と、グラフィック処理手段119とを備える。ここで、デコード手段115及びグラフィック処理手段119により、表示制御手段120が構成される。
ネットワークブリッジ処理手段413は、第1NIF手段111と、第2NIF手段112とをブリッジ接続する。このため、第2NIF手段112に接続されているPC13は、ネットワークブリッジ処理手段413を介して、第1NIF手段111側のインターネット14に接続することができる。ネットワークブリッジ処理手段413は、PC13とインターネット14との間のHTTP通信を監視する監視手段114を備える。監視手段114は、インターネット14から送られてくるウェブ画面データに埋め込まれたリンクが映像ストリーミングデータであれば、ダウンロードを開始してキャッシュ手段440にキャッシュ(一時記録)しておくように指示する。このとき、ウェブ画面データは、第2NIF部112を介して、PC13にも与えられ、そのブラウザ上に表示される。
デコード手段115は、監視手段114によって選択されたキャッシュ手段440より読み出した映像ストリーミングデータをデコードして、デコードされた映像信号を表示手段116に与える。表示手段116は、デコード手段115から受け取った映像信号に対応する映像を表示する。また、表示手段116は、グラフィック処理手段119から与えられる画面データに対応する画像をも表示する。
図8は、実施の形態4に係る放送受信システム40の動作の一例を示すシーケンス図である。図7に示されるように、放送受信装置41は、インターネット14とPC13とを接続する場合に、インターネット14に接続されたネットワークと、PC13が属するネットワークとの間に挿入される。ここで、第1NIF手段111及び第2NIF手段112に接続されるネットワークは、HTTP通信が可能なTCP/IPをサポートするネットワーク、例えば、イーサネット(登録商標)の規格に対応したネットワークであるものとする。なお、図8において、サーバ15は、インターネット14に接続され、ストリーミングデータを配信する。
ユーザが、放送受信装置41の表示手段116に表示された画面を見ながら、入力手段118を操作して、アクセスしたいウェブサイトのURLを入力すると、UIF提供手段117から、第2NIF手段112を介して入力されたURLが、PC13に送信される。PC13では、NIF手段131を介して、URL受けとると、制御部132が、受け取ったURLに対して、HTTPリクエストREQを作成し、放送受信装置41に送信する。HTTPリクエストREQを受信した放送受信装置41では、HTTPリクエストREQが、第2NIF手段112からネットワークブリッジ処理手段413に与えられる(ステップS410)。そして、ネットワークブリッジ処理手段413は、第1NIF手段111を介して、HTTPリクエストREQをインターネット14に接続されているサーバ15に送信する(ステップS412)。
HTTPリクエストREQを受信したサーバ15は、このHTTPリクエストREQに対する成功応答であるHTTPレスポンスRESを返信する(ステップS413)。HTTPレスポンスRESを受信した放送受信装置41では、HTTPレスポンスRESが、第1NIF手段111からネットワークブリッジ処理手段413に与えられる。ネットワークブリッジ処理手段413は、第2NIF手段112を介して、HTTPレスポンスRESをPC13に転送する(ステップS414)。このとき、監視手段114は、レスポンスに含まれるリンクを抽出して、ダウンロードを開始し、HTTPレスポンスRESのメッセージヘッダを監視して、その中に含まれている「Content−Type」の行に格納されている情報(例えば、「video」やファイル識別子)に基づき、エンティティボディに映像コンテンツのストリーミングデータが格納されているか否かを判断し、ストリーミングデータであれば、キャッシュ手段440に一時的に蓄える(ステップS415〜S421)。
ここで、UIF提供手段117を介して放送受信装置41の画面上に表示されたブラウザで映像コンテンツを選択すると、上述のように、PC13から映像コンテンツに対応したリンクを取得すべくHTTPリクエストREQを第2NIF手段112からネットワークブリッジ処理手段413に送る。監視手段114は、PC13からのHTTPリクエストREQを監視し、そのURLが、キャッシュ手段440に蓄積中のURLと一致した場合、当該URLからのダウンロードを継続しながら、キャッシュ手段440から対応する蓄積データの先頭からデコード手段115に供給する。
以上に説明したように、実施の形態4に係る放送受信装置41は、PC13上のブラウザ等を用いて、放送受信装置41の表示手段116を見ながら入力手段118の操作によって、インターネット14上のコンテンツを検索し、選択することができる。このため、放送受信装置41自体に、PC用のブラウザを実装しなくても、PC13で使用されているPC用のブラウザを放送受信装置41で使用することができる。したがって、実施の形態4に係る放送受信装置41又は放送受信システム40によれば、放送受信装置141の組込用ブラウザを用いた場合に利用できないサイトについても、利用することができる。
なお、上記説明においては、第2NIF手段13とPC13との間をクロスケーブル等を介して接続した場合を説明したが、このような構成に限定されるものではない。例えば、第2NIF手段112及びPC13のNIF手段131を、無線通信を行うことのできる無線通信手段で構成してもよく、この場合には、これらの間を接続するケーブルが不要となる。また、第2NIF手段112を、複数のPC13のルーティングを行うルーティング処理手段で構成してもよく、この場合には、放送受信装置11に複数のPC13を接続することができる。また、ブラウザにコンテンツ選択画面が表示される前から、ストリームのダウンロードを始めてキャシュ手段440に蓄積しておくので、コンテンツが選択されるとほぼ同時に放送受信装置41の画面上に選択した映像が表示される。
なお、実施の形態4において、上記以外の点は、上記実施の形態1と同じである。
実施の形態5.
図9は、実施の形態5に係る放送受信システム50の構成を概略的に示すブロック図である。図9において、図7に示される構成と同一又は対応する構成には、同じ符合を付す。図9に示されるように、放送受信システム50は、実施の形態4と同様に、放送受信装置51と、PC53とを備える。実施の形態5に係る放送受信システム50は、PC53に第2のデコード手段としてのソフトウェアデコード手段553と、メモリ手段としてのフレームバッファ552と、VNCサーバ手段としてのVNCサーバソフト(サーバソフトウェア)551とが追加されている点において、実施の形態4に係る放送受信システム40と異なっている。ただし、ソフトウェアデコード手段553及びVNCサーバ手段551は、PC用のソフトウェアとして実装することができ、また、メモリ手段552は、PC53に実装済みのRAM(図示せず)のユーザエリアを使うことができる。したがって、デコード手段553、メモリ手段552、及びVNCサーバ手段551の追加は、ハードウェアの追加によって実現することも可能であるが、ハードウェアの追加を伴わずに、実現することも可能である。
実施の形態5では、第1NIF手段111から取得したストリームデータを、ネットワークブリッジ処理手段413及び第2NIF手段112を介して、PC53に供給している。放送受信装置41の動作は、基本的には、実施の形態4の動作と同じであるが、ストリームデータをデコード手段でデコードできない場合に、PC53からVNCプロトコルを用いてソフトウェアデコードした映像を貰い受け、VNCビューワを用いて画面上に表示するようにした点において、実施の形態4の動作と異なっている。
インターネットストリーミングでは、テレビ放送の場合のように、圧縮規格が1つに限られておらず、新たな方式が導入され、そのデコードを行うプログラムをPCにインストールすることで映像をPC画面上に表示する。一方、放送受信装置では一般に圧縮規格が定められているため、デコーダはハードウェア化され、新たな方式に対応することが困難である。
そこで、放送受信装置51では、自身のデコード手段115では対応できないストリームの場合は、PC53のソフトウェアデコード手段553にストリームのデコードし、VNCプロトコルを用いて、デコードされた映像データを放送入信装置51に送信するように、PC53に依頼する。
PC53は、放送受信装置51からの依頼に基づき、映像データをデコードし、メモリ手段(例えば、フレームバッファ)552に一時的に蓄える。このメモリ手段552は、VNCサーバ手段551の入力バッファとなる。したがって、メモリ手段552は、ユーザが使用できるRAMエリアの一部を、メモリ手段552用のエリアとして割り振っておけばよい。また、デコード手段553に対しては、映像を書き出すフレームバッファ手段として用いられ、VNCサーバからは、このフレームバッファ領域のデータが表示されているものと捉え、そのビットマップデータを転送する。
放送受信装置51では、VNCビューワ機能を備え、PC53から送られてくるビットマップデータを画面上に表示する。
なお、放送受信装置51では、デコード不可のストリームについてもキャッシュ手段440に蓄えておき、PC53からのリクエストに応じて、キャッシュ手段440から読みだして、第2NIF手段112を介してPC53に送ることにより、この場合にも、画像表示がスタートするまでに要する時間を短縮することができる。
以上に説明したように、実施の形態5に係る放送受信装置51は、PC53上のブラウザ等を用いて、放送受信装置51の表示手段116を見ながら入力手段118の操作によって、インターネット14上のコンテンツを検索し、選択することができる。このため、放送受信装置51自体に、PC用のブラウザを実装しなくても、PC53で使用されているPC用のブラウザを放送受信装置51で使用することができる。したがって、実施の形態5に係る放送受信装置51又は放送受信システム50によれば、放送受信装置51の組込用ブラウザを用いた場合に利用できないサイトについても、利用することができる。また、放送受信装置51は、内蔵するデコード手段115でデコード処理できないストリーミングコンテンツの場合は、PC53でデコードした映像のビットマップデータを受け取って表示するので、新たな方式で圧縮されたストリームが送られてきても、PC53に新方式に対応するソフトウェアを実装することで、映像表示が可能となる。
なお、実施の形態5において、上記以外の点は、上記実施の形態5と同じである。
変形例.
実施の形態1〜5における放送受信装置11,21,31,41,51は、図示してはいないが、チューナ等を有する放送受信手段を有することで、デジタルテレビ放送等の放送信号を受信して、この放送信号に対応する映像を表示手段116に表示させることもできる。
また、実施の形態1〜5における放送受信装置11,21,31,41,51は、テレビ受信装置である場合の例を示したが、ビデオ録画再生装置、DVD録画再生装置、BD(Blu−Ray Disc)録画再生装置等のような情報記録再生装置であってもよい。放送受信装置11,21,31,41,51が、画像表示手段を備えない情報記録再生装置である場合には、放送受信装置11,21,31,41,51には、図示しない外部の表示装置に映像及び音声を出力するための出力インターフェース手段が設けられる。
10,20,30,40,50 放送受信システム、 11,21,31,41 放送受信装置、 111 第1ネットワークインターフェース手段(第1NIF手段)、 112 第2ネットワークインターフェース手段(第2NIF手段)、 113,413 ネットワークブリッジ処理手段、 114 監視手段、 115 デコード手段、 116 表示手段、 117 ユーザインターフェース提供手段、 118 入力手段、 119 グラフィック処理手段、 120 表示制御手段、 440 キャッシュ手段、 221 ルーティング手段、 222 無線通信手段、 322 ケーブル通信手段、 13,53 PC、 131 ネットワークインターフェース手段、 132 制御手段、 133 記憶手段、 551 VNCサーバ手段、 552 メモリ手段、 553 ソフトウェアデコード手段。

Claims (2)

  1. 情報処理装置と、
    放送受信装置とからなる放送受信システムであって、
    前記情報処理装置は、
    インターネットを通して配信されるストリーミングコンテンツを閲覧するためのブラウザを実装し、
    前記放送受信装置とネットワークにより接続され、
    該放送受信装置は、
    受信した放送信号に対応する映像と前記ストリーミングコンテンツに含まれる画像を表示る表示手段と、
    情報の入力操作が行われる入力手段と、
    前記インターネット及び前記情報処理装置に対して通信可能に接続されるネットワーク通信手段と、
    前記ネットワーク通信手段を介して、前記情報処理装置に実装されたブラウザで選択されたストリーミングコンテンツにかかるデータを受信して、受信された前記ストリーミングコンテンツにかかるデータに基づくグラフィックスデータを前記表示手段に表示するとともに、前記入力手段から入力された情報を、前記ネットワーク通信手段を介して、前記情報処理装置に提供するユーザインターフェース提供手段と、
    前記インターネットから前記ネットワーク通信手段に入力された通信データを監視して、当該通信データに映像データが含まれているか否かを監視する監視手段と
    前記映像データをデコードする第1のデコード手段と、
    前記第1のデコード手段ではデコード処理できない前記映像データを蓄え、前記情報処理装置からの要求に応じて、蓄えた前記映像データを前記情報処理装置に送るキャッシュ手段と
    を備え、
    前記情報処理装置は、前記デコード処理できない映像データをデコードする第2のデコード手段を有し、
    前記表示手段は、前記第1のデコード手段及び前記第2のデコード手段でデコードされた前記映像データに基づいて前記画像を表示させる
    ことを特徴とする放送受信システム。
  2. 情報処理装置が行う情報処理ステップと、
    放送受信装置が行う放送受信ステップとからなる放送受信方法であって、
    前記情報処理ステップは、
    前記情報処理装置が実装するブラウザにより、インターネットを通して配信されるストリーミングコンテンツを選択するステップと、
    該選択されたストリーミングコンテンツに係る映像を前記放送受信装置に送信するステップとを備え、
    前記放送受信ステップは、
    受信した放送信号に対応する映像と前記ストリーミングコンテンツに含まれる画像を表示る表示ステップと、
    前記ストリーミングコンテンツの選択操作が行われる入力ステップと、
    前記インターネット及び前記情報処理装置に対して通信可能に接続されるネットワーク通信ステップと、
    前記選択されたストリーミングコンテンツにかかるデータを受信して、受信された前記ストリーミングコンテンツにかかるデータに基づくグラフィックスデータを前記表示ステップで表示するとともに、前記入力ステップで入力された情報を、前記情報処理装置に提供するユーザインターフェース提供ステップと、
    前記インターネットから入力された通信データを監視して、当該通信データに映像データが含まれているか否かを監視する監視ステップと
    前記映像データをデコードする第1のデコードステップと、
    前記第1のデコードステップではデコード処理できない前記映像データを蓄え、前記情報処理装置からの要求に応じて、蓄えた前記映像データを前記情報処理装置に送るキャッシュステップと
    を備え、
    前記情報処理ステップは、前記デコード処理できない映像データをデコードする第2のデコードステップを有し、
    前記表示ステップは、前記第1のデコードステップ及び前記第2のデコードステップでデコードされた前記映像データに基づいて前記画像を表示させる
    ことを特徴とする放送受信方法。
JP2015184700A 2010-06-04 2015-09-18 放送受信システム及び放送受信方法 Expired - Fee Related JP6137257B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015184700A JP6137257B2 (ja) 2010-06-04 2015-09-18 放送受信システム及び放送受信方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010128707 2010-06-04
JP2010128707 2010-06-04
JP2015184700A JP6137257B2 (ja) 2010-06-04 2015-09-18 放送受信システム及び放送受信方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014164714A Division JP5818953B2 (ja) 2010-06-04 2014-08-13 放送受信装置及び放送受信方法

Publications (2)

Publication Number Publication Date
JP2016028495A JP2016028495A (ja) 2016-02-25
JP6137257B2 true JP6137257B2 (ja) 2017-05-31

Family

ID=52140594

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014164714A Expired - Fee Related JP5818953B2 (ja) 2010-06-04 2014-08-13 放送受信装置及び放送受信方法
JP2015184700A Expired - Fee Related JP6137257B2 (ja) 2010-06-04 2015-09-18 放送受信システム及び放送受信方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2014164714A Expired - Fee Related JP5818953B2 (ja) 2010-06-04 2014-08-13 放送受信装置及び放送受信方法

Country Status (1)

Country Link
JP (2) JP5818953B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114600444A (zh) * 2020-12-31 2022-06-07 深圳市大疆创新科技有限公司 图像的处理方法、装置、个人终端和存储介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3741425B2 (ja) * 2002-01-29 2006-02-01 株式会社東芝 無線伝送装置
US20050223100A1 (en) * 2002-05-17 2005-10-06 Koninklijke Philips Electronics N.V. Rendering a first media type content on a browser
JP2004145847A (ja) * 2002-08-28 2004-05-20 Sharp Corp 情報通信装置およびそれを用いた出力装置、ならびに、情報通信システム、ホスト装置、および表示端末装置
JP2004274159A (ja) * 2003-03-05 2004-09-30 Toshiba Corp 情報機器及び資源制御方法
KR100501334B1 (ko) * 2003-08-04 2005-07-18 삼성전자주식회사 씬 클라이언트 방식을 개선한 홈 미디어 게이트웨이의멀티미디어 데이터 처리장치 및 그 방법
JP4100421B2 (ja) * 2005-09-26 2008-06-11 株式会社日立製作所 コンピュータシステム
TW200743320A (en) * 2006-05-15 2007-11-16 Tatung Co Ltd Multimedia display apparatus with adding-on personal computer functions capable of entering keyboard keys with remote control
JP5141060B2 (ja) * 2007-03-23 2013-02-13 株式会社Jvcケンウッド データストリーム再生装置及びデータストリーム復号装置
JP2009100286A (ja) * 2007-10-17 2009-05-07 Funai Electric Co Ltd テレビジョン受像機
JP2009217381A (ja) * 2008-03-07 2009-09-24 Nec Corp 障害分析システム、障害分析方法、障害分析サーバおよび障害分析プログラム
JP2010039647A (ja) * 2008-08-01 2010-02-18 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム

Also Published As

Publication number Publication date
JP2014241629A (ja) 2014-12-25
JP2016028495A (ja) 2016-02-25
JP5818953B2 (ja) 2015-11-18

Similar Documents

Publication Publication Date Title
US10567809B2 (en) Selective media playing method and apparatus according to live streaming and recorded streaming
JP4165668B2 (ja) 連続的で分離されていないデータ・ストリームを圧縮する方法および装置
US7783775B2 (en) Providing multimedia content continuously for multiple users so as to accommodate movement to one or more different audience locations
KR101633100B1 (ko) 정보 처리 시스템, 정보 처리 장치, 정보 처리 방법 및 기록 매체
US8667163B2 (en) Systems and methods for projecting images from a computer system
US20170147285A1 (en) Media Playback Processing and Control Method, Apparatus, and System
US20120278728A1 (en) Download monitoring in a media distribution system
EP2549680B1 (en) Content output system and codec information sharing method in same system
US8656443B2 (en) Method and system for providing dynamic time slice encoding for complete internet anywhere
JP2019057921A (ja) 分散型クロスプラットフォームユーザインタフェースおよびアプリケーション投写
EP2695392A2 (en) Content extraction for television display
JP2002342218A (ja) コンテンツ提供方法及びシステム
JP2003177996A (ja) 情報処理システム
JP2006295586A (ja) コンテンツ変換装置及びトランスコードシステム
CN102387187A (zh) 服务器、客户端及利用其远程播放视频文件的方法和系统
US20130007863A1 (en) Streaming video to cellular phones
KR101942269B1 (ko) 웹 브라우저에서 미디어를 재생하고 탐색하는 장치 및 방법
WO2017202373A1 (zh) 流媒体快速启动方法、装置和系统
CN115665474A (zh) 直播方法、装置、电子设备以及存储介质
JPWO2014010445A1 (ja) コンテンツ送信装置、コンテンツ再生装置、コンテンツ配信システム、コンテンツ送信装置の制御方法、コンテンツ再生装置の制御方法、データ構造、制御プログラムおよび記録媒体
JP5627413B2 (ja) 放送受信装置及び放送受信システム
JP6137257B2 (ja) 放送受信システム及び放送受信方法
JP6063952B2 (ja) マルチメディア資産を表示する方法、関連するシステム、メディアクライアント、および関連するメディアサーバ
US20120210373A1 (en) Session synchronization of inactive iptv device with second display device
US11140442B1 (en) Content delivery to playback systems with connected display devices

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160714

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160823

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161021

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170417

R151 Written notification of patent or utility model registration

Ref document number: 6137257

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees