JP5764967B2 - Video distribution device - Google Patents
Video distribution device Download PDFInfo
- Publication number
- JP5764967B2 JP5764967B2 JP2011036658A JP2011036658A JP5764967B2 JP 5764967 B2 JP5764967 B2 JP 5764967B2 JP 2011036658 A JP2011036658 A JP 2011036658A JP 2011036658 A JP2011036658 A JP 2011036658A JP 5764967 B2 JP5764967 B2 JP 5764967B2
- Authority
- JP
- Japan
- Prior art keywords
- speed
- moving image
- playback
- data
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、動画を表す動画データを送信する動画配信装置に関する。 The present invention relates to a moving image distribution apparatus that transmits moving image data representing a moving image.
動画を表す動画データを送信する動画配信装置が知られている。この種の動画配信装置の一つとして特許文献１に記載の動画配信装置は、端末装置が等速再生を実行する場合、動画データを端末装置へ送信する。ここで、等速再生は、動画に含まれるフレーム列のすべてを、動画に対して設定されたフレームレートに従って再生することである。
There is known a moving image distribution device that transmits moving image data representing a moving image. As a moving image distribution device of this type, the moving image distribution device described in
また、動画配信装置は、端末装置が高速再生を実行する場合、動画データの一部のデータのみを端末装置へ送信する。ここで、高速再生は、等速再生時よりも大きい再生速度にて動画を再生することである。 In addition, when the terminal device performs high-speed playback, the moving image distribution device transmits only a part of the moving image data to the terminal device. Here, high-speed playback is playback of a moving image at a higher playback speed than during constant-speed playback.
これによれば、端末装置が動画の高速再生を実行するための処理負荷、及び、動画配信装置から端末装置へデータを伝送するための通信負荷が過大となることを回避することができる。 According to this, it is possible to avoid an excessive processing load for the terminal device to execute high-speed playback of a moving image and a communication load for transmitting data from the moving image distribution device to the terminal device.
ところで、端末装置の処理能力、及び、動画配信装置と端末装置との間の通信路における可用帯域幅が比較的大きい場合がある。この場合においては、動画配信装置が動画データの全体を端末装置へ送信しても、端末装置が動画の高速再生を実行する際の処理負荷、及び、通信負荷が過大とならない。 By the way, the processing capability of the terminal device and the available bandwidth in the communication path between the moving image distribution device and the terminal device may be relatively large. In this case, even if the moving image distribution device transmits the entire moving image data to the terminal device, the processing load and the communication load when the terminal device performs high-speed playback of the moving image are not excessive.
また、特に動画を編集するために動画を高速再生する場合等においては、高速再生される動画の品質として、より高い品質が要求される場合もある。しかしながら、上記動画配信装置によれば、端末装置において、高い品質にて動画を高速再生することができないという問題があった。 In particular, when a moving image is reproduced at high speed for editing the moving image, higher quality may be required as the quality of the moving image reproduced at high speed. However, according to the moving image distribution device, there is a problem that the moving image cannot be reproduced at high speed with high quality in the terminal device.
このため、本発明の目的は、上述した課題である「端末装置において、高い品質にて動画を高速再生することができない場合が生じること」を解決することが可能な動画配信装置を提供することにある。 For this reason, an object of the present invention is to provide a moving picture distribution apparatus capable of solving the above-described problem “a case where a high-quality moving picture cannot be reproduced at high speed in a terminal device occurs”. It is in.
かかる目的を達成するため本発明の一形態である動画配信装置は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付ける高速再生要求受付手段と、
上記受け付けられた高速再生要求に含まれる上記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、上記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する動画データ送信手段と、
を備える。
In order to achieve such an object, a moving image distribution apparatus according to an aspect of the present invention is provided.
High-speed playback request receiving means for requesting high-speed playback of a moving image and receiving a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
If the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image data transmitting means for transmitting, as the transmission data, partial moving image data representing a partial moving image represented by a part of a frame of the frame sequence representing the moving image, if greater than the speed;
Is provided.
また、本発明の他の形態である端末装置は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信する高速再生要求送信手段と、
上記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信する送信データ受信手段と、
上記受信された送信データに基づいて上記動画の高速再生を実行する高速再生実行手段と、
を備える。
In addition, a terminal device according to another embodiment of the present invention,
High-speed playback request transmission means for requesting high-speed playback of a moving image and transmitting a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
Transmission data receiving means for receiving, as transmission data, moving image data representing the moving image or partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image;
High-speed playback execution means for executing high-speed playback of the moving image based on the received transmission data;
Is provided.
また、本発明の他の形態である動画配信システムは、互いに通信可能に構成された、動画配信装置、及び、端末装置を備えるシステムである。 In addition, a moving image distribution system according to another aspect of the present invention is a system including a moving image distribution device and a terminal device configured to be able to communicate with each other.
更に、上記端末装置は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信する高速再生要求送信手段を備え、
上記動画配信装置は、
上記端末装置により送信された高速再生要求を受信し、当該受信された高速再生要求を受け付ける高速再生要求受付手段と、
上記受け付けられた高速再生要求に含まれる上記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、上記動画を表す動画データを送信データとして上記端末装置へ送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして上記端末装置へ送信する動画データ送信手段と、
を備え、
上記端末装置は、更に、
上記動画配信装置により送信された送信データを受信する送信データ受信手段と、
上記受信された送信データに基づいて上記動画の高速再生を実行する高速再生実行手段と、
を備える。
Furthermore, the terminal device
A high-speed playback request transmitting means for requesting high-speed playback of a moving image and transmitting a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
The video distribution device
A high-speed playback request receiving means for receiving a high-speed playback request transmitted by the terminal device and receiving the received high-speed playback request;
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data to the terminal device, while the playback Moving image data transmitting means for transmitting partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image to the terminal device as the transmission data when the speed is higher than the threshold speed; ,
With
The terminal device further includes:
Transmission data receiving means for receiving transmission data transmitted by the video distribution device;
High-speed playback execution means for executing high-speed playback of the moving image based on the received transmission data;
Is provided.
また、本発明の他の形態である動画配信方法は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付け、
上記受け付けられた高速再生要求に含まれる上記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、上記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する方法である。
In addition, a moving image distribution method according to another aspect of the present invention includes:
A request for high-speed playback of a video and a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback is received,
If the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold When the speed is higher than the speed, partial moving image data representing a partial moving image represented by a part of the frame sequence representing the moving image is transmitted as the transmission data.
また、本発明の他の形態である動画配信プログラムは、
動画配信装置に、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付け、
上記受け付けられた高速再生要求に含まれる上記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、上記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する、処理を実行させるためのプログラムである。
In addition, a moving image distribution program according to another aspect of the present invention is
In the video distribution device,
A request for high-speed playback of a video and a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback is received,
If the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold When the speed is greater than the speed, the program is a program for executing a process of transmitting, as the transmission data, partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image.
また、本発明の他の形態である端末制御方法は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信し、
上記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信し、
上記受信された送信データに基づいて上記動画の高速再生を実行する方法である。
In addition, a terminal control method according to another aspect of the present invention includes:
Send a high-speed playback request that requests high-speed playback of a video and includes playback speed information indicating the playback speed of the high-speed playback,
Receiving the moving image data representing the moving image or the partial moving image data representing the partial moving image represented by a part of the frame sequence representing the moving image as transmission data;
In this method, the moving image is reproduced at high speed based on the received transmission data.
また、本発明の他の形態である端末制御プログラムは、
端末装置に、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信し、
上記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信し、
上記受信された送信データに基づいて上記動画の高速再生を実行する、処理を実行させるためのプログラムである。
A terminal control program according to another embodiment of the present invention is
On the terminal device,
Send a high-speed playback request that requests high-speed playback of a video and includes playback speed information indicating the playback speed of the high-speed playback,
Receiving the moving image data representing the moving image or the partial moving image data representing the partial moving image represented by a part of the frame sequence representing the moving image as transmission data;
A program for executing processing for performing high-speed playback of the moving image based on the received transmission data.
本発明は、以上のように構成されることにより、負荷が過大となることを回避しながら、高い品質にて動画を高速再生できるデータを送信することができる。 According to the present invention configured as described above, it is possible to transmit data capable of reproducing a moving image at high speed with high quality while avoiding an excessive load.
以下、本発明に係る、動画配信装置、端末装置、動画配信システム、動画配信方法、動画配信プログラム、端末制御方法、及び、端末制御プログラム、の各実施形態について図１〜図７を参照しながら説明する。 Hereinafter, each embodiment of a video distribution device, a terminal device, a video distribution system, a video distribution method, a video distribution program, a terminal control method, and a terminal control program according to the present invention will be described with reference to FIGS. explain.
＜第１実施形態＞
（構成）
図１に示したように、第１実施形態に係る動画配信システム１は、動画配信装置１０と、端末装置２０と、を含む。動画配信装置１０、及び、端末装置２０は、通信回線（本例では、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網を構成する通信回線）ＮＷを介して、互いに通信可能に接続されている。
<First Embodiment>
(Constitution)
As shown in FIG. 1, the moving
動画配信装置１０は、情報処理装置（本例では、サーバ装置）である。動画配信装置１０は、図示しない中央処理装置（ＣＰＵ；Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、及び、記憶装置（メモリ及びハードディスク駆動装置（ＨＤＤ；Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ））を備える。動画配信装置１０は、記憶装置に記憶されているプログラムをＣＰＵが実行することにより、後述する機能を実現するように構成されている。
The moving
端末装置２０は、情報処理装置（本例では、パーソナル・コンピュータ）である。なお、端末装置２０は、携帯電話端末、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄａｔａ Ａｓｓｉｓｔａｎｃｅ、Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、スマートフォン、カーナビゲーション端末、又は、ゲーム端末等であってもよい。
The
端末装置２０は、図示しないＣＰＵ、記憶装置（メモリ及びＨＤＤ）、入力装置（本例では、キーボード、及び、マウス）、及び、出力装置（本例では、ディスプレイ及びスピーカ）を備える。
端末装置２０は、記憶装置に記憶されているプログラムをＣＰＵが実行することにより、後述する機能を実現するように構成されている。
The
The
（機能）
図２は、上記のように構成された動画配信システム１の機能を表すブロック図である。
動画配信装置１０の機能は、動画データ記憶部ＳＴと、再生要求受付部（高速再生要求受付手段）１１と、データ送信部（動画データ送信手段）１２と、を含む。
端末装置２０の機能は、再生要求送信部（高速再生要求送信手段）２１と、データ受信部（送信データ受信手段）２２と、再生実行部（高速再生実行手段）２３と、を含む。
(function)
FIG. 2 is a block diagram showing functions of the moving
The functions of the moving
The functions of the
動画データ記憶部ＳＴは、動画を表す動画データを予め記憶している。動画データは、動画を表すフレーム列を構成する各フレームを表す情報と、フレームレートを表す情報と、を含む。 The moving image data storage unit ST stores moving image data representing a moving image in advance. The moving image data includes information representing each frame constituting a frame sequence representing a moving image and information representing a frame rate.
本例では、動画データは、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）によって定められた動画圧縮技術に関する規格（例えば、ＭＰＥＧ−２、又は、ＭＰＥＧ−４等）に従ったデータである。従って、動画を表す各フレームは、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム、又は、当該フレームを表す情報と他のフレームを表す情報とに基づいて符号化されるフレーム間予測フレーム、である。 In this example, the moving image data is data in accordance with a standard (for example, MPEG-2 or MPEG-4) related to moving image compression technology defined by MPEG (Moving Picture Experts Group). Therefore, each frame representing a moving image is coded based on an intra-frame coded frame coded based only on information representing the frame, or information representing the frame and information representing another frame. An inter-frame prediction frame.
再生要求送信部２１は、ユーザにより入力装置を介して入力された再生要求を受け付ける。再生要求は、等速再生要求、又は、高速再生要求である。等速再生要求は、動画の等速再生を要求する情報である。等速再生は、動画を表す、すべてのフレームからなるフレーム列を、動画に対して設定されたフレームレートに従って再生することである。
The reproduction
高速再生要求は、動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む情報である。高速再生は、等速再生時よりも大きい再生速度にて動画を再生することである。再生速度は、再生（表示）されているフレームが、動画を表すフレーム列において、単位時間あたりに進行する速度を表す。 The high-speed playback request is information including playback speed information that requests high-speed playback of a moving image and represents the playback speed of the high-speed playback. High speed playback is to play a moving image at a higher playback speed than during constant speed playback. The reproduction speed represents a speed at which a frame being reproduced (displayed) proceeds per unit time in a frame sequence representing a moving image.
本例では、再生速度は、ある時点にて表示されるフレームから単位時間後の時点にて表示されるフレームまでの間の、動画を表す、すべてのフレームからなるフレーム列におけるフレームの数である単位時間フレーム数の、等速再生時における単位時間フレーム数に対する比である。
即ち、等速再生時の再生速度は、１であり、３倍速再生時の再生速度は、３である。
In this example, the playback speed is the number of frames in a frame sequence consisting of all frames representing a moving image from a frame displayed at a certain time point to a frame displayed at a time point after a unit time. This is the ratio of the number of unit time frames to the number of unit time frames during constant speed playback.
That is, the playback speed at the constant speed playback is 1, and the playback speed at the triple speed playback is 3.
再生要求受付部１１は、端末装置２０により送信された再生要求を受信し、受信された再生要求を受け付ける。
The reproduction
データ送信部１２は、再生要求受付部１１により受け付けられた再生要求が等速再生要求である場合、動画データ記憶部ＳＴに記憶されている動画データを送信データとして、当該再生要求を送信してきた端末装置２０へ送信する。本例では、データ送信部１２は、ストリーミング方式を用いてデータを送信する。
When the reproduction request received by the reproduction
データ送信部１２は、再生要求受付部１１により受け付けられた再生要求が高速再生要求である場合、当該高速再生要求に含まれる再生速度情報が表す再生速度を取得する。データ送信部１２は、取得された再生速度が、予め設定された閾値速度（本例では、２）以下である場合、動画データ記憶部ＳＴに記憶されている動画データを送信データとして、当該再生要求を送信してきた端末装置２０へ送信する。
When the playback request received by the playback
データ送信部１２は、取得された再生速度が、上記閾値速度よりも大きい場合、動画データ記憶部ＳＴに記憶されている動画データの一部である部分動画データを送信データとして、当該再生要求を送信してきた端末装置２０へ送信する。部分動画データは、動画データ記憶部ＳＴに記憶されている動画データが表す動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す情報である。
When the acquired playback speed is higher than the threshold speed, the
本例では、データ送信部１２は、動画データ記憶部ＳＴに記憶されている動画データにて、後述する抽出サイズの抽出データブロックを選択する。このとき、データ送信部１２は、隣接する任意の抽出データブロック間に、後述する間隔サイズのデータが配置されるように、抽出データブロックを選択する。データ送信部１２は、選択された複数の抽出データブロックからなるデータを部分動画データとして取得する。
In this example, the
なお、データ送信部１２は、抽出データブロックのそれぞれが、少なくとも１つのフレーム内符号化フレームを含むように、抽出サイズ、及び、間隔サイズを設定する。例えば、データ送信部１２は、動画データ記憶部ＳＴに記憶されている動画データを符号化する際に用いられたプロファイル情報に基づいて抽出サイズを決定する。これにより、抽出データブロックのそれぞれに、少なくとも１つのフレーム内符号化フレームを含ませることができる。
Note that the
更に、データ送信部１２は、取得された再生速度に基づいて、間隔サイズを設定（決定）する。本例では、データ送信部１２は、数式１に基づいて間隔サイズＳｉを決定する。ここで、Ｓｅは、抽出サイズであり、Ｒｔｈは、閾値速度であり、Ｒは、再生速度である。
なお、データ送信部１２は、数式２に基づいて間隔サイズＳｉを決定するように構成されていてもよい。ここで、αは、処理効率である。処理効率は、１以上の実数である。処理効率は、動画データに基づく処理時間に対する、部分動画データに基づく処理時間の比である。
データ受信部２２は、動画配信装置１０により送信された送信データを受信する。
再生実行部２３は、データ受信部２２により受信された送信データが、等速再生要求に応じて送信された場合、当該送信データに基づいて動画の等速再生を実行する。また、再生実行部２３は、データ受信部２２により受信された送信データが、高速再生要求に応じて送信された場合、当該送信データが、動画データ、及び、部分動画データのいずれであるかを判定する。
The
When the transmission data received by the
再生実行部２３は、上記送信データが動画データであると判定した場合、当該動画データに基づいて、上記高速再生要求に含まれる再生速度情報が表す再生速度にて動画の高速再生を実行する。
When the
再生実行部２３は、上記送信データが部分動画データであると判定した場合、当該部分動画データから、フレーム内符号化フレームを表す情報を取得する。本例では、再生実行部２３は、各フレームを表す情報に含まれるヘッダ情報に基づいて、部分動画データから、フレーム内符号化フレームを表す情報を取得する。そして、再生実行部２３は、取得された情報に基づいて、上記高速再生要求に含まれる再生速度情報が表す再生速度にて動画の高速再生を実行する。
When the
（作動）
次に、上述した動画配信システム１の作動について説明する。
動画配信装置１０は、図３にフローチャートにより示した動画配信プログラムを実行するようになっている。
(Operation)
Next, the operation of the above-described moving
The moving
具体的に述べると、動画配信装置１０は、動画配信プログラムの処理を開始すると、ステップＳ１０１にて、再生要求を受信するまで待機する。
先ず、端末装置２０が等速再生要求を送信した場合を想定して説明を続ける。この場合、動画配信装置１０は、端末装置２０から等速再生要求を受信すると、「Ｙｅｓ」と判定してステップＳ１０２へ進み、受信された再生要求が高速再生要求であるか否かを判定する。
Specifically, when starting the processing of the moving image distribution program, the moving
First, the description will be continued assuming that the
上記仮定に従えば、動画配信装置１０は、「Ｎｏ」と判定してステップＳ１０５へ進み、動画データ記憶部ＳＴに記憶されている動画データを送信データとして端末装置２０へ送信する。その後、動画配信装置１０は、ステップＳ１０１へ戻り、ステップＳ１０１〜ステップＳ１０５の処理を繰り返し実行する。
According to the above assumption, the moving
一方、端末装置２０は、動画配信装置１０から送信データを受信する。そして、端末装置２０は、受信された送信データ（動画データ）に基づいて、動画の等速再生を実行する。
On the other hand, the
次に、端末装置２０が、再生速度としての「２」を表す再生速度情報を含む高速再生要求を送信した場合を想定して説明を続ける。この場合、動画配信装置１０は、端末装置２０から高速再生要求を受信すると、「Ｙｅｓ」と判定してステップＳ１０２へ進み、受信された再生要求が高速再生要求であるか否かを判定する。
Next, the description will be continued assuming that the
上記仮定に従えば、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ１０３へ進み、受信された高速再生要求に含まれる再生速度情報が表す再生速度（ここでは、２）が閾値速度（ここでは、２）よりも大きいか否かを判定する。
According to the above assumption, the moving
上記仮定に従えば、動画配信装置１０は、「Ｎｏ」と判定してステップＳ１０５へ進み、動画データ記憶部ＳＴに記憶されている動画データを送信データとして端末装置２０へ送信する。その後、動画配信装置１０は、ステップＳ１０１へ戻り、ステップＳ１０１〜ステップＳ１０５の処理を繰り返し実行する。
According to the above assumption, the moving
一方、端末装置２０は、図４にフローチャートにより示した高速再生時端末制御プログラムを、高速再生要求を送信した時に実行するようになっている。
On the other hand, the
具体的に述べると、端末装置２０は、高速再生時端末制御プログラムの処理を開始すると、ステップＳ２０１にて、送信データを受信するまで待機する。そして、端末装置２０が送信データを受信すると、端末装置２０は、「Ｙｅｓ」と判定してステップＳ２０２へ進み、受信された送信データが部分動画データであるか否かを判定する。
More specifically, when the
上記仮定に従えば、受信された送信データは動画データである。従って、端末装置２０は、「Ｎｏ」と判定してステップＳ２０５へ進み、受信された送信データ（動画データ）に基づいて、上記再生速度（ここでは、２）にて動画の高速再生を実行する。その後、端末装置２０は、高速再生時端末制御プログラムの処理を終了する。
According to the above assumption, the received transmission data is moving image data. Accordingly, the
次に、端末装置２０が、再生速度としての「３」を表す再生速度情報を含む高速再生要求を送信した場合を想定して説明を続ける。この場合、動画配信装置１０は、端末装置２０から高速再生要求を受信すると、「Ｙｅｓ」と判定して、図３のステップＳ１０２へ進み、受信された再生要求が高速再生要求であるか否かを判定する。
Next, the description will be continued assuming that the
上記仮定に従えば、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ１０３へ進み、受信された高速再生要求に含まれる再生速度情報が表す再生速度（ここでは、３）が閾値速度（ここでは、２）よりも大きいか否かを判定する。
According to the above assumption, the moving
上記仮定に従えば、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ１０４へ進み、動画データ記憶部ＳＴに記憶されている動画データの一部である部分動画データを送信データとして端末装置２０へ送信する。その後、動画配信装置１０は、ステップＳ１０１へ戻り、ステップＳ１０１〜ステップＳ１０５の処理を繰り返し実行する。
According to the above assumption, the moving
一方、端末装置２０は、送信データを受信すると、図４のステップＳ２０１にて「Ｙｅｓ」と判定してステップＳ２０２へ進み、受信された送信データが部分動画データであるか否かを判定する。
On the other hand, when receiving the transmission data, the
上記仮定に従えば、受信された送信データは部分動画データである。従って、端末装置２０は、「Ｙｅｓ」と判定してステップＳ２０３へ進み、受信された送信データ（部分動画データ）から、フレーム内符号化フレームを表す情報を取得する。そして、端末装置２０は、取得された情報に基づいて、上記再生速度（ここでは、３）にて動画の高速再生を実行する（ステップＳ２０４）。その後、端末装置２０は、高速再生時端末制御プログラムの処理を終了する。
According to the above assumption, the received transmission data is partial moving image data. Accordingly, the
以上、説明したように、第１実施形態に係る動画配信装置１０によれば、動画配信装置１０は、負荷が過大となることを回避しながら、高い品質にて動画を高速再生できるデータを送信することができる。
As described above, according to the moving
更に、第１実施形態に係る動画配信装置１０は、動画データにて、所定の抽出サイズの抽出データブロックを、隣接する抽出データブロックとの間に所定の間隔サイズのデータが配置されるように選択し、当該選択された複数の抽出データブロックからなるデータを部分動画データとして取得する。
Furthermore, the moving
これによれば、動画データから、特定のフレーム（例えば、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム）を表す情報を抽出する処理を実行する場合と比較して、処理負荷を軽減することができる。 According to this, compared with the case of executing processing for extracting information representing a specific frame (for example, an intra-frame encoded frame encoded based only on information representing the frame) from moving image data, Processing load can be reduced.
加えて、第１実施形態に係る動画配信装置１０は、抽出データブロックのそれぞれが、少なくとも１つのフレーム内符号化フレームを含むように、抽出サイズ及び間隔サイズを設定する。
In addition, the moving
これによれば、部分動画データを受信した端末装置２０は、各抽出データブロックを表す情報に基づいて、少なくとも１つのフレームを再生することができる。この結果、高速再生時の動画の品質が過度に劣化することを防止することができる。
According to this, the
なお、第１実施形態の変形例に係る動画配信装置１０は、抽出数の連続するフレームからなる抽出フレームブロックを選択し、選択された複数の抽出フレームブロックを表す情報を部分動画データとして取得するように構成されていてもよい。
Note that the moving
具体的には、データ送信部１２は、動画データ記憶部ＳＴに記憶されている動画データが表す動画を表すフレーム列にて、後述する抽出数の連続するフレームからなる抽出フレームブロックを選択する。このとき、データ送信部１２は、隣接する任意の抽出フレームブロック間に、後述する間隔数の連続するフレームが配置されるように、抽出フレームブロックを選択する。データ送信部１２は、選択された複数の抽出フレームブロックを表す情報を部分動画データとして取得する。
Specifically, the
なお、データ送信部１２は、抽出フレームブロックのそれぞれが、少なくとも１つのフレーム内符号化フレームを含むように、間隔数、及び、抽出数を設定する。例えば、データ送信部１２は、動画データ記憶部ＳＴに記憶されている動画データが表す動画を表すフレーム列における、隣接するフレーム内符号化フレーム間に配置されたフレームの数よりも大きい数に、抽出数を設定する。これにより、抽出フレームブロックのそれぞれに、少なくとも１つのフレーム内符号化フレームを含ませることができる。
The
更に、データ送信部１２は、取得された再生速度に基づいて、抽出数、及び、間隔数を設定（決定）する。本例では、データ送信部１２は、数式３に基づいて間隔数Ｎｉを決定する。ここで、Ｎｅは、抽出数であり、Ｎｔｈは、閾値速度であり、Ｒは、再生速度である。
なお、データ送信部１２は、数式４に基づいて間隔数Ｎｉを決定するように構成されていてもよい。ここで、αは、処理効率である。処理効率は、１以上の実数である。処理効率は、動画データに基づく処理時間に対する部分動画データに基づく処理時間の比である。
このように、第１実施形態の変形例に係る動画配信装置１０は、抽出フレームブロックを選択し、選択された複数の抽出フレームブロックを表す情報を部分動画データとして取得するように構成されていてもよい。
As described above, the moving
また、第１実施形態の他の変形例において、動画配信システム１は、複数の端末装置を備えていてもよい。
また、第１実施形態の他の変形例において、動画配信装置１０は、動画データを他の装置から受信し、受信した動画データを端末装置２０へ送信するように構成されていてもよい。
In another modification of the first embodiment, the moving
In another modification of the first embodiment, the moving
また、第１実施形態の他の変形例において、動画配信装置１０は、フレーム内符号化フレームを表す情報の、動画データにおける位置及びサイズを予め取得するように構成されていてもよい。この場合、動画配信装置１０は、取得された位置及びサイズに基づいて、フレーム内符号化フレームを表す情報を、動画データから抽出し、抽出された情報を部分動画データとして取得するように構成される。
In another modification of the first embodiment, the moving
これによれば、高速再生時における端末装置２０の処理負荷、及び、部分動画データを伝送するための通信負荷を低減することができる。
According to this, the processing load of the
＜第２実施形態＞
次に、本発明の第２実施形態に係る動画配信システムについて説明する。第２実施形態に係る動画配信システムは、上記第１実施形態に係る動画配信システムに対して、負荷に基づいて閾値速度を決定する点において相違している。従って、以下、かかる相違点を中心として説明する。
Second Embodiment
Next, a video distribution system according to the second embodiment of the present invention will be described. The moving image distribution system according to the second embodiment is different from the moving image distribution system according to the first embodiment in that a threshold speed is determined based on a load. Accordingly, the following description will focus on such differences.
図５に示したように、第２実施形態に係る動画配信装置１０の機能は、第１実施形態に係る動画配信装置１０の機能に加えて、負荷情報受信部（負荷情報取得手段）１３と、閾値速度決定部（閾値速度決定手段）１４と、を含む。
As shown in FIG. 5, the function of the
また、第２実施形態に係る端末装置２０の機能は、第１実施形態に係る端末装置２０の機能に加えて、負荷情報取得部（負荷情報取得手段）２４と、負荷情報送信部（負荷情報送信手段）２５と、を含む。
In addition to the functions of the
負荷情報取得部２４は、負荷を表す負荷情報を取得する。本例では、負荷は、受信された送信データに基づいて動画の高速再生を実行するための処理負荷である。本例では、処理負荷は、ＣＰＵの使用率である。処理負荷は、メモリの使用率であってもよい。また、処理負荷は、ＣＰＵの使用率、及び、メモリの使用率の両方に基づく値であってもよい。
The load
また、負荷は、動画配信装置１０から端末装置２０へ送信データを伝送するための通信負荷であってもよい。例えば、通信負荷は、パケットロス率（パケットが通信網にて消失した割合）である。また、負荷は、処理負荷、及び、通信負荷の両方に基づく値であってもよい。
The load may be a communication load for transmitting transmission data from the moving
負荷情報送信部２５は、負荷情報取得部２４により取得された負荷情報を動画配信装置１０へ送信する。本例では、負荷情報送信部２５は、予め設定された送信周期が経過する毎に負荷情報を送信する。
The load
負荷情報受信部１３は、端末装置２０により送信された負荷情報を受信することにより当該負荷情報を取得する。
閾値速度決定部１４は、負荷情報受信部１３により取得された負荷情報が表す負荷に基づいて閾値速度を決定する。
The load
The threshold
具体的には、閾値速度決定部１４は、取得された負荷情報が表す負荷が、予め設定された第１の閾値負荷（本例では、８０％）よりも大きい場合、閾値速度をより小さい値に変更する。また、閾値速度決定部１４は、取得された負荷情報が表す負荷が、予め設定された第２の閾値負荷（本例では、３０％）よりも小さい場合、閾値速度をより大きい値に変更する。ここで、第２の閾値負荷は、第１の閾値負荷よりも小さい値に設定される。
Specifically, when the load represented by the acquired load information is larger than a preset first threshold load (80% in this example), the threshold
（作動）
次に、上述した動画配信システム１の作動について説明する。
動画配信装置１０は、図３の動画配信プログラムに加えて、図６にフローチャートにより示した閾値速度決定プログラムを実行するようになっている。
(Operation)
Next, the operation of the above-described moving
In addition to the moving image distribution program of FIG. 3, the moving
具体的に述べると、動画配信装置１０は、閾値速度決定プログラムの処理を開始すると、ステップＳ３０１にて、負荷情報を受信するまで待機する。
一方、端末装置２０は、上記送信周期が経過する毎に負荷情報を動画配信装置１０へ送信する。
Specifically, when starting the processing of the threshold speed determination program, the moving
On the other hand, the
従って、動画配信装置１０が端末装置２０により送信された負荷情報を受信すると、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ３０２へ進み、受信された負荷情報が表す負荷が第１の閾値負荷よりも大きいか否かを判定する。
Therefore, when the
受信された負荷情報が表す負荷が第１の閾値負荷よりも大きい場合、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ３０３へ進み、記憶装置に記憶されている閾値速度を減少させる。本例では、動画配信装置１０は、記憶装置に記憶されている閾値速度を１だけ小さい値に更新する。そして、動画配信装置１０は、ステップＳ３０４へ進む。
When the load represented by the received load information is larger than the first threshold load, the moving
一方、受信された負荷情報が表す負荷が第１の閾値負荷以下である場合、動画配信装置１０は、閾値速度を変更することなくステップＳ３０４へ進む。
On the other hand, when the load represented by the received load information is equal to or less than the first threshold load, the moving
次いで、動画配信装置１０は、受信された負荷情報が表す負荷が第２の閾値負荷よりも小さいか否かを判定する。
Next, the moving
受信された負荷情報が表す負荷が第２の閾値負荷よりも小さい場合、動画配信装置１０は、「Ｙｅｓ」と判定してステップＳ３０５へ進み、記憶装置に記憶されている閾値速度を増加させる。本例では、動画配信装置１０は、記憶装置に記憶されている閾値速度を１だけ大きい値に更新する。そして、動画配信装置１０は、ステップＳ３０１へ戻る。
When the load represented by the received load information is smaller than the second threshold load, the moving
一方、受信された負荷情報が表す負荷が第２の閾値負荷以上である場合、動画配信装置１０は、閾値速度を変更することなくステップＳ３０１へ戻る。
On the other hand, when the load represented by the received load information is equal to or greater than the second threshold load, the moving
その後、動画配信装置１０は、ステップＳ３０１〜ステップＳ３０５の処理を繰り返し実行する。
Thereafter, the moving
以上、説明したように、本発明の第２実施形態に係る動画配信装置１０によれば、動画配信装置１０は、負荷に基づいて適切に閾値速度を決定することができる。従って、より一層確実に負荷を低減しながら、高速再生時の動画の品質をより一層確実に高めることができる。
As described above, according to the moving
＜第３実施形態＞
次に、本発明の第３実施形態に係る動画配信装置について図７を参照しながら説明する。
第３実施形態に係る動画配信装置１００は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付ける高速再生要求受付部（高速再生要求受付手段）１０１と、
上記受け付けられた高速再生要求に含まれる上記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、上記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する動画データ送信部（動画データ送信手段）１０２と、
を備える。
<Third Embodiment>
Next, a moving image distribution apparatus according to a third embodiment of the present invention will be described with reference to FIG.
The
A high-speed playback request receiving unit (high-speed playback request receiving means) 101 that requests high-speed playback of a moving image and receives a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
If the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image data transmitting unit (moving image data transmitting unit) 102 that transmits partial moving image data representing a partial moving image represented by a part of the frame sequence representing the moving image as the transmission data when the speed is greater than the speed;
Is provided.
これによれば、動画配信装置は、負荷が過大となることを回避しながら、高い品質にて動画を高速再生できるデータを送信することができる。 According to this, the moving image distribution apparatus can transmit data capable of high-speed reproduction of moving images with high quality while avoiding an excessive load.
以上、上記実施形態を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成及び詳細に、本願発明の範囲内において当業者が理解し得る様々な変更をすることができる。 Although the present invention has been described with reference to the above embodiment, the present invention is not limited to the above-described embodiment. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
なお、上記各実施形態において動画配信システムの各機能は、ＣＰＵがプログラム（ソフトウェア）を実行することにより実現されていたが、回路等のハードウェアにより実現されていてもよい。 In each of the above embodiments, each function of the moving image distribution system is realized by the CPU executing a program (software), but may be realized by hardware such as a circuit.
また、上記各実施形態においてプログラムは、記憶装置に記憶されていたが、コンピュータが読み取り可能な記録媒体に記憶されていてもよい。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。 In each of the above embodiments, the program is stored in the storage device, but may be stored in a computer-readable recording medium. For example, the recording medium is a portable medium such as a flexible disk, an optical disk, a magneto-optical disk, and a semiconductor memory.
また、上記実施形態の他の変形例として、上述した実施形態及び変形例の任意の組み合わせが採用されてもよい。 In addition, as another modified example of the above-described embodiment, any combination of the above-described embodiments and modified examples may be employed.
＜付記＞
上記実施形態の一部又は全部は、以下の付記のように記載され得るが、以下には限られない。
<Appendix>
A part or all of the above embodiment can be described as the following supplementary notes, but is not limited thereto.
（付記１）
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付ける高速再生要求受付手段と、
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する動画データ送信手段と、
を備える動画配信装置。
(Appendix 1)
High-speed playback request receiving means for requesting high-speed playback of a moving image and receiving a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image data transmitting means for transmitting, as the transmission data, partial moving image data representing a partial moving image represented by a part of a frame of the frame sequence representing the moving image, if greater than the speed;
A video distribution device comprising:
これによれば、動画配信装置は、負荷が過大となることを回避しながら、高い品質にて動画を高速再生できるデータを送信することができる。 According to this, the moving image distribution apparatus can transmit data capable of high-speed reproduction of moving images with high quality while avoiding an excessive load.
（付記２）
付記１に記載の動画配信装置であって、
前記送信データを受信する端末装置が当該送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを当該動画配信装置から当該端末装置へ伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得する負荷情報取得手段と、
前記取得された負荷情報が表す負荷に基づいて前記閾値速度を決定する閾値速度決定手段と、
を備える動画配信装置。
(Appendix 2)
The video distribution device according to
A processing load for the terminal device that receives the transmission data to perform high-speed playback of the moving image based on the transmission data, and a communication load for transmitting the transmission data from the moving image distribution device to the terminal device; Load information acquisition means for acquiring load information representing a load including at least one of:
Threshold speed determining means for determining the threshold speed based on the load represented by the acquired load information;
A video distribution device comprising:
これによれば、動画配信装置は、負荷に基づいて適切に閾値速度を決定することができる。従って、より一層確実に負荷を低減しながら、高速再生時の動画の品質をより一層確実に高めることができる。 According to this, the moving image distribution apparatus can appropriately determine the threshold speed based on the load. Therefore, it is possible to further reliably increase the quality of moving images during high-speed playback while further reliably reducing the load.
（付記３）
付記２に記載の動画配信装置であって、
前記閾値速度決定手段は、前記取得された負荷情報が表す負荷が、予め設定された第１の閾値負荷よりも大きい場合、前記閾値速度をより小さい値に変更するように構成された動画配信装置。
(Appendix 3)
The video distribution device according to attachment 2, wherein
The threshold speed determination means is configured to change the threshold speed to a smaller value when the load represented by the acquired load information is larger than a preset first threshold load. .
（付記４）
付記２又は付記３に記載の動画配信装置であって、
前記閾値速度決定手段は、前記取得された負荷情報が表す負荷が、予め設定された第２の閾値負荷よりも小さい場合、前記閾値速度をより大きい値に変更するように構成された動画配信装置。
(Appendix 4)
The video distribution device according to Supplementary Note 2 or Supplementary Note 3, wherein
The threshold speed determining means is configured to change the threshold speed to a larger value when the load represented by the acquired load information is smaller than a preset second threshold load. .
（付記５）
付記１乃至付記４のいずれかに記載の動画配信装置であって、
前記動画データ送信手段は、前記動画データにて、所定の抽出サイズの抽出データブロックを、隣接する抽出データブロックとの間に所定の間隔サイズのデータが配置されるように選択し、当該選択された複数の抽出データブロックからなるデータを前記部分動画データとして取得するように構成された動画配信装置。
(Appendix 5)
A video distribution device according to any one of
The moving image data transmitting means selects an extracted data block having a predetermined extraction size in the moving image data so that data having a predetermined interval size is arranged between adjacent extracted data blocks. A moving image distribution apparatus configured to acquire data including a plurality of extracted data blocks as the partial moving image data.
これによれば、動画データから、特定のフレーム（例えば、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム）を表す情報を抽出する処理を実行する場合と比較して、処理負荷を軽減することができる。 According to this, compared with the case of executing processing for extracting information representing a specific frame (for example, an intra-frame encoded frame encoded based only on information representing the frame) from moving image data, Processing load can be reduced.
（付記６）
付記５に記載の動画配信装置であって、
前記動画を表す各フレームは、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム、又は、当該フレームを表す情報と他のフレームを表す情報とに基づいて符号化されるフレーム間予測フレーム、であり、
前記動画データ送信手段は、前記抽出データブロックのそれぞれが、少なくとも１つの前記フレーム内符号化フレームを含むように、前記抽出サイズ及び前記間隔サイズを設定するように構成された動画配信装置。
(Appendix 6)
The video distribution device according to attachment 5, wherein
Each frame representing the moving image is an intra-frame coded frame coded based only on information representing the frame, or a frame coded based on information representing the frame and information representing another frame. Inter prediction frame, and
The moving image distribution device configured to set the extracted size and the interval size so that each of the extracted data blocks includes at least one intra-frame encoded frame.
これによれば、部分動画データを受信した端末装置は、各抽出データブロックを表す情報に基づいて、少なくとも１つのフレームを再生することができる。この結果、高速再生時の動画の品質が過度に劣化することを防止することができる。 According to this, the terminal device that has received the partial moving image data can reproduce at least one frame based on the information representing each extracted data block. As a result, it is possible to prevent the quality of the moving image during high-speed playback from being excessively deteriorated.
（付記７）
付記１乃至付記４のいずれかに記載の動画配信装置であって、
前記動画データ送信手段は、前記動画を表すフレーム列にて、所定の抽出数の連続するフレームからなる抽出フレームブロックを、隣接する抽出フレームブロックとの間に所定の間隔数の連続するフレームが配置されるように選択し、当該選択された複数の抽出フレームブロックを表す情報を前記部分動画データとして取得するように構成された動画配信装置。
(Appendix 7)
A video distribution device according to any one of
In the frame sequence representing the moving image, the moving image data transmitting means arranges an extracted frame block composed of a predetermined number of consecutive frames and a predetermined number of consecutive frames between adjacent extracted frame blocks. And a moving image distribution device configured to acquire information representing the selected plurality of extracted frame blocks as the partial moving image data.
これによれば、動画データから、特定のフレーム（例えば、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム）を表す情報を抽出する処理を実行する場合と比較して、処理負荷を軽減することができる。 According to this, compared with the case of executing processing for extracting information representing a specific frame (for example, an intra-frame encoded frame encoded based only on information representing the frame) from moving image data, Processing load can be reduced.
（付記８）
付記７に記載の動画配信装置であって、
前記動画を表す各フレームは、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム、又は、当該フレームを表す情報と他のフレームを表す情報とに基づいて符号化されるフレーム間予測フレーム、であり、
前記動画データ送信手段は、前記抽出フレームブロックのそれぞれが、少なくとも１つの前記フレーム内符号化フレームを含むように、前記間隔数及び前記抽出数を設定するように構成された動画配信装置。
(Appendix 8)
The video distribution device according to attachment 7, wherein
Each frame representing the moving image is an intra-frame coded frame coded based only on information representing the frame, or a frame coded based on information representing the frame and information representing another frame. Inter prediction frame, and
The moving image distribution apparatus configured to set the interval number and the extraction number so that each of the extracted frame blocks includes at least one intra-frame encoded frame.
これによれば、部分動画データを受信した端末装置は、各抽出フレームブロックを表す情報に基づいて、少なくとも１つのフレームを再生することができる。この結果、高速再生時の動画の品質が過度に劣化することを防止することができる。 According to this, the terminal device that has received the partial moving image data can reproduce at least one frame based on the information representing each extracted frame block. As a result, it is possible to prevent the quality of the moving image during high-speed playback from being excessively deteriorated.
（付記９）
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信する高速再生要求送信手段と、
前記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信する送信データ受信手段と、
前記受信された送信データに基づいて前記動画の高速再生を実行する高速再生実行手段と、
を備える端末装置。
(Appendix 9)
High-speed playback request transmission means for requesting high-speed playback of a moving image and transmitting a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
Transmission data receiving means for receiving, as transmission data, moving image data representing the moving image or partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image;
High-speed playback execution means for executing high-speed playback of the moving image based on the received transmission data;
A terminal device comprising:
（付記１０）
付記９に記載の端末装置であって、
前記受信された送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得する負荷情報取得手段と、
前記取得された負荷情報を送信する負荷情報送信手段と、
を備える端末装置。
(Appendix 10)
The terminal device according to attachment 9, wherein
A load for acquiring load information representing a load including at least one of a processing load for executing high-speed playback of the moving image and a communication load for transmitting the transmission data based on the received transmission data Information acquisition means;
Load information transmitting means for transmitting the acquired load information;
A terminal device comprising:
（付記１１）
付記９又は付記１０に記載の端末装置であって、
前記動画を表す各フレームは、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム、又は、当該フレームを表す情報と他のフレームを表す情報とに基づいて符号化されるフレーム間予測フレーム、であり、
前記高速再生実行手段は、前記受信された送信データが前記部分動画データである場合、当該受信された送信データから、前記フレーム内符号化フレームを表す情報を取得し、当該取得された情報に基づいて前記動画の高速再生を実行するように構成された端末装置。
(Appendix 11)
A terminal device according to appendix 9 or
Each frame representing the moving image is an intra-frame coded frame coded based only on information representing the frame, or a frame coded based on information representing the frame and information representing another frame. Inter prediction frame, and
When the received transmission data is the partial moving image data, the high-speed playback execution means acquires information representing the intra-frame encoded frame from the received transmission data, and based on the acquired information A terminal device configured to perform high-speed playback of the moving image.
これによれば、送信データを送信する動画配信装置がフレーム内符号化フレームを表す情報を取得する処理を実行する場合と比較して、動画配信装置の処理負荷を軽減することができる。 According to this, it is possible to reduce the processing load of the moving image distribution device as compared with the case where the moving image distribution device that transmits the transmission data executes a process of acquiring information representing the intra-frame encoded frame.
（付記１２）
互いに通信可能に構成された、動画配信装置、及び、端末装置を備える動画配信システムであって、
前記端末装置は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信する高速再生要求送信手段を備え、
前記動画配信装置は、
前記端末装置により送信された高速再生要求を受信し、当該受信された高速再生要求を受け付ける高速再生要求受付手段と、
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして前記端末装置へ送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして前記端末装置へ送信する動画データ送信手段と、
を備え、
前記端末装置は、更に、
前記動画配信装置により送信された送信データを受信する送信データ受信手段と、
前記受信された送信データに基づいて前記動画の高速再生を実行する高速再生実行手段と、
を備える動画配信システム。
(Appendix 12)
A video distribution system configured to be communicable with each other, and a video distribution system including a terminal device,
The terminal device
A high-speed playback request transmitting means for requesting high-speed playback of a moving image and transmitting a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
The video distribution device
A high-speed playback request receiving means for receiving a high-speed playback request transmitted by the terminal device and receiving the received high-speed playback request;
When the playback speed represented by the playback speed information included in the accepted high-speed playback request is lower than a predetermined threshold speed, the video data representing the video is transmitted as transmission data to the terminal device, while the playback Moving image data transmitting means for transmitting partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image to the terminal device as the transmission data when the speed is higher than the threshold speed; ,
With
The terminal device further includes:
Transmission data receiving means for receiving transmission data transmitted by the video distribution device;
High-speed playback execution means for executing high-speed playback of the moving image based on the received transmission data;
A video distribution system.
（付記１３）
付記１２に記載の動画配信システムであって、
前記端末装置は、
前記受信された送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得する負荷情報取得手段と、
前記取得された負荷情報を前記動画配信装置へ送信する負荷情報送信手段と、
を備え、
前記動画配信装置は、
前記端末装置により送信された負荷情報を受信し、当該受信された負荷情報を取得する負荷情報取得手段と、
前記取得された負荷情報が表す負荷に基づいて前記閾値速度を決定する閾値速度決定手段と、
を備える動画配信システム。
(Appendix 13)
The video distribution system according to
The terminal device
A load for acquiring load information representing a load including at least one of a processing load for executing high-speed playback of the moving image and a communication load for transmitting the transmission data based on the received transmission data Information acquisition means;
Load information transmitting means for transmitting the acquired load information to the video distribution device;
With
The video distribution device
Load information acquisition means for receiving the load information transmitted by the terminal device and acquiring the received load information;
Threshold speed determining means for determining the threshold speed based on the load represented by the acquired load information;
A video distribution system.
（付記１４）
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付け、
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する、動画配信方法。
(Appendix 14)
A request for high-speed playback of a video and a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback is received,
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image distribution method of transmitting partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image as the transmission data when the speed is higher than the speed.
（付記１５）
付記１４に記載の動画配信方法であって、
前記送信データを受信する端末装置が当該送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを当該端末装置へ伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得し、
前記取得された負荷情報が表す負荷に基づいて前記閾値速度を決定する、動画配信方法。
(Appendix 15)
The video delivery method according to
At least one of a processing load for the terminal device that receives the transmission data to execute high-speed playback of the moving image based on the transmission data and a communication load for transmitting the transmission data to the terminal device Get load information that represents the load
A moving image distribution method for determining the threshold speed based on a load represented by the acquired load information.
（付記１６）
動画配信装置に、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を受け付け、
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する、処理を実行させるための動画配信プログラム。
(Appendix 16)
In the video distribution device,
A request for high-speed playback of a video and a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback is received,
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image distribution program for executing a process of transmitting partial moving image data representing a partial moving image represented by a part of a frame in a frame sequence representing the moving image as the transmission data when greater than the speed.
（付記１７）
付記１６に記載の動画配信プログラムであって、
前記動画配信装置に、更に、
前記送信データを受信する端末装置が当該送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを当該動画配信装置から当該端末装置へ伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得し、
前記取得された負荷情報が表す負荷に基づいて前記閾値速度を決定する、処理を実行させるための動画配信プログラム。
(Appendix 17)
The video distribution program according to attachment 16, wherein
In addition to the video distribution device,
A processing load for the terminal device that receives the transmission data to perform high-speed playback of the moving image based on the transmission data, and a communication load for transmitting the transmission data from the moving image distribution device to the terminal device; Load information representing a load including at least one of
A moving picture distribution program for executing processing for determining the threshold speed based on a load represented by the acquired load information.
（付記１８）
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信し、
前記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信し、
前記受信された送信データに基づいて前記動画の高速再生を実行する、端末制御方法。
(Appendix 18)
Send a high-speed playback request that requests high-speed playback of a video and includes playback speed information indicating the playback speed of the high-speed playback,
Receiving the moving image data representing the moving image or the partial moving image data representing the partial moving image represented by a part of the frame sequence representing the moving image as transmission data;
A terminal control method for performing high-speed playback of the moving image based on the received transmission data.
（付記１９）
付記１８に記載の端末制御方法であって、
前記受信された送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得し、
前記取得された負荷情報を送信する、端末制御方法。
(Appendix 19)
The terminal control method according to appendix 18, wherein
Obtaining load information representing a load including at least one of a processing load for executing high-speed playback of the moving image based on the received transmission data and a communication load for transmitting the transmission data;
A terminal control method for transmitting the acquired load information.
（付記２０）
端末装置に、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信し、
前記動画を表す動画データ、又は、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを送信データとして受信し、
前記受信された送信データに基づいて前記動画の高速再生を実行する、処理を実行させるための端末制御プログラム。
(Appendix 20)
On the terminal device,
Send a high-speed playback request that requests high-speed playback of a video and includes playback speed information indicating the playback speed of the high-speed playback,
Receiving the moving image data representing the moving image or the partial moving image data representing the partial moving image represented by a part of the frame sequence representing the moving image as transmission data;
A terminal control program for executing processing for executing high-speed playback of the moving image based on the received transmission data.
（付記２１）
付記２０に記載の端末制御プログラムであって、
前記端末装置に、更に、
前記受信された送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得し、
前記取得された負荷情報を送信する、処理を実行させるための端末制御プログラム。
(Appendix 21)
A terminal control program according to
In addition to the terminal device,
Obtaining load information representing a load including at least one of a processing load for executing high-speed playback of the moving image based on the received transmission data and a communication load for transmitting the transmission data;
A terminal control program for executing the process of transmitting the acquired load information.
本発明は、動画を表す動画データを送信する動画配信装置、及び、動画配信装置と動画を再生する端末装置とを含む動画配信システム等に適用可能である。 The present invention is applicable to a moving image distribution device that transmits moving image data representing a moving image, a moving image distribution system including a moving image distribution device and a terminal device that reproduces a moving image, and the like.
１ 動画配信システム
１０ 動画配信装置
１１ 再生要求受付部
１２ データ送信部
１３ 負荷情報受信部
１４ 閾値速度決定部
２０ 端末装置
２１ 再生要求送信部
２２ データ受信部
２３ 再生実行部
２４ 負荷情報取得部
２５ 負荷情報送信部
１００ 動画配信装置
１０１ 高速再生要求受付部
１０２ 動画データ送信部
ＳＴ 動画データ記憶部
DESCRIPTION OF
Claims (7)
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信する動画データ送信手段と、
を備え、
前記動画データ送信手段は、前記動画データにて、所定の抽出サイズの抽出データブロックを、隣接する抽出データブロックとの間に前記再生速度に基づいて設定される間隔サイズのデータが配置されるように選択し、当該選択された複数の抽出データブロックからなるデータを前記部分動画データとして取得するように構成された動画配信装置。 High-speed playback request receiving means for requesting high-speed playback of a moving image and receiving a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold A moving image data transmitting means for transmitting, as the transmission data, partial moving image data representing a partial moving image represented by a part of a frame of the frame sequence representing the moving image, if greater than the speed;
Equipped with a,
In the moving image data, the moving image data transmitting means arranges an extracted data block having a predetermined extraction size and an interval size data set based on the reproduction speed between adjacent extracted data blocks. A moving image distribution device configured to acquire the partial moving image data as data selected from the plurality of extracted data blocks.
前記送信データを受信する端末装置が当該送信データに基づいて前記動画の高速再生を実行するための処理負荷、及び、当該送信データを当該動画配信装置から当該端末装置へ伝送するための通信負荷、の少なくとも１つを含む負荷を表す負荷情報を取得する負荷情報取得手段と、
前記取得された負荷情報が表す負荷に基づいて前記閾値速度を決定する閾値速度決定手段と、
を備える動画配信装置。 The video distribution device according to claim 1,
A processing load for the terminal device that receives the transmission data to perform high-speed playback of the moving image based on the transmission data, and a communication load for transmitting the transmission data from the moving image distribution device to the terminal device; Load information acquisition means for acquiring load information representing a load including at least one of:
Threshold speed determining means for determining the threshold speed based on the load represented by the acquired load information;
A video distribution device comprising:
前記閾値速度決定手段は、前記取得された負荷情報が表す負荷が、予め設定された第１の閾値負荷よりも大きい場合、前記閾値速度をより小さい値に変更するように構成された動画配信装置。 The video distribution device according to claim 2,
The threshold speed determination means is configured to change the threshold speed to a smaller value when the load represented by the acquired load information is larger than a preset first threshold load. .
前記閾値速度決定手段は、前記取得された負荷情報が表す負荷が、予め設定された第２の閾値負荷よりも小さい場合、前記閾値速度をより大きい値に変更するように構成された動画配信装置。 It is a moving image delivery apparatus of Claim 2 or Claim 3,
The threshold speed determining means is configured to change the threshold speed to a larger value when the load represented by the acquired load information is smaller than a preset second threshold load. .
前記動画を表す各フレームは、当該フレームを表す情報のみに基づいて符号化されるフレーム内符号化フレーム、又は、当該フレームを表す情報と他のフレームを表す情報とに基づいて符号化されるフレーム間予測フレーム、であり、
前記動画データ送信手段は、前記抽出データブロックのそれぞれが、少なくとも１つの前記フレーム内符号化フレームを含むように、前記抽出サイズ及び前記間隔サイズを設定するように構成された動画配信装置。 The video distribution device according to claim 1 , wherein:
Each frame representing the moving image is an intra-frame coded frame coded based only on information representing the frame, or a frame coded based on information representing the frame and information representing another frame. Inter prediction frame, and
The moving image distribution device configured to set the extracted size and the interval size so that each of the extracted data blocks includes at least one intra-frame encoded frame.
前記端末装置は、
動画の高速再生を要求し、且つ、当該高速再生の再生速度を表す再生速度情報を含む高速再生要求を送信する高速再生要求送信手段を備え、
前記動画配信装置は、
前記端末装置により送信された高速再生要求を受信し、当該受信された高速再生要求を受け付ける高速再生要求受付手段と、
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして前記端末装置へ送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして前記端末装置へ送信する動画データ送信手段と、
を備え、
前記動画データ送信手段は、前記動画データにて、所定の抽出サイズの抽出データブロックを、隣接する抽出データブロックとの間に前記再生速度に基づいて設定される間隔サイズのデータが配置されるように選択し、当該選択された複数の抽出データブロックからなるデータを前記部分動画データとして取得するように構成され、
前記端末装置は、更に、
前記動画配信装置により送信された送信データを受信する送信データ受信手段と、
前記受信された送信データに基づいて前記動画の高速再生を実行する高速再生実行手段と、
を備える動画配信システム。 A video distribution system configured to be communicable with each other, and a video distribution system including a terminal device,
The terminal device
A high-speed playback request transmitting means for requesting high-speed playback of a moving image and transmitting a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback;
The video distribution device
A high-speed playback request receiving means for receiving a high-speed playback request transmitted by the terminal device and receiving the received high-speed playback request;
When the playback speed represented by the playback speed information included in the accepted high-speed playback request is lower than a predetermined threshold speed, the video data representing the video is transmitted as transmission data to the terminal device, while the playback Moving image data transmitting means for transmitting partial moving image data representing a partial moving image represented by a part of a frame sequence representing the moving image to the terminal device as the transmission data when the speed is higher than the threshold speed; ,
With
In the moving image data, the moving image data transmitting means arranges an extracted data block having a predetermined extraction size and an interval size data set based on the reproduction speed between adjacent extracted data blocks. And is configured to obtain data consisting of the selected plurality of extracted data blocks as the partial video data,
The terminal device further includes:
Transmission data receiving means for receiving transmission data transmitted by the video distribution device;
High-speed playback execution means for executing high-speed playback of the moving image based on the received transmission data;
A video distribution system.
前記受け付けられた高速再生要求に含まれる前記再生速度情報が表す再生速度が、所定の閾値速度よりも小さい場合、前記動画を表す動画データを送信データとして送信し、一方、当該再生速度が当該閾値速度よりも大きい場合、当該動画を表すフレーム列のうちの一部のフレームにより表される部分動画を表す部分動画データを当該送信データとして送信し、
前記動画データにて、所定の抽出サイズの抽出データブロックを、隣接する抽出データブロックとの間に前記再生速度に基づいて設定される間隔サイズのデータが配置されるように選択し、当該選択された複数の抽出データブロックからなるデータを前記部分動画データとして取得する、動画配信方法。 A request for high-speed playback of a video and a high-speed playback request including playback speed information indicating the playback speed of the high-speed playback is received,
When the playback speed represented by the playback speed information included in the received high-speed playback request is smaller than a predetermined threshold speed, the video data representing the video is transmitted as transmission data, while the playback speed is the threshold If it is greater than the speed, partial video data representing a partial video represented by a part of the frame sequence representing the video is transmitted as the transmission data,
In the moving image data, an extraction data block having a predetermined extraction size is selected so that data having an interval size set based on the reproduction speed is arranged between adjacent extraction data blocks, and the selected data block is selected. A moving image distribution method for acquiring data including a plurality of extracted data blocks as the partial moving image data .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011036658A JP5764967B2 (en) | 2011-02-23 | 2011-02-23 | Video distribution device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011036658A JP5764967B2 (en) | 2011-02-23 | 2011-02-23 | Video distribution device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012175488A JP2012175488A (en) | 2012-09-10 |
| JP5764967B2 true JP5764967B2 (en) | 2015-08-19 |
Family
ID=46977942
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011036658A Expired - Fee Related JP5764967B2 (en) | 2011-02-23 | 2011-02-23 | Video distribution device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5764967B2 (en) |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3880438B2 (en) * | 2002-04-16 | 2007-02-14 | キヤノン株式会社 | Image communication device |
| JP5322518B2 (en) * | 2008-07-08 | 2013-10-23 | キヤノン株式会社 | Communication method |
-
2011
- 2011-02-23 JP JP2011036658A patent/JP5764967B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012175488A (en) | 2012-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Petrangeli et al. | An http/2-based adaptive streaming framework for 360 virtual reality videos | |
| WO2020248909A1 (en) | Video decoding method and apparatus, computer device, and storage medium | |
| EP3253064A1 (en) | Frame loss method for video frame and video sending apparatus | |
| JP5882547B2 (en) | Optimizing coding and transmission parameters in pictures as scenes change | |
| JP5100311B2 (en) | Moving image data transmission method, communication apparatus, and program | |
| JP6225446B2 (en) | Moving image data distribution apparatus, method, program, and system | |
| CN110784740A (en) | Video processing method, device, server and readable storage medium | |
| CN106998485B (en) | Video live broadcasting method and device | |
| WO2020140915A1 (en) | Video processing method and apparatus | |
| US20110310965A1 (en) | Communication device, communication method, and communication program product | |
| JP5082152B2 (en) | Video playback device, video conversion playback system, and program | |
| CN110582012B (en) | Video switching method, video processing device and storage medium | |
| WO2018028547A1 (en) | Channel switching method and device | |
| CN111617466B (en) | Method and device for determining coding format and method for realizing cloud game | |
| WO2021196994A1 (en) | Encoding method and apparatus, terminal, and storage medium | |
| JP5282383B2 (en) | Content reproduction apparatus, content reproduction method, program, and content reproduction system | |
| US20170013206A1 (en) | Communication system, communication apparatus, communication method and program | |
| JP2012195831A (en) | Transmission apparatus and transmission method, and program | |
| US20140099039A1 (en) | Image processing device, image processing method, and image processing system | |
| JP5764967B2 (en) | Video distribution device | |
| CN104427383A (en) | Information processing method and electronic equipment | |
| WO2021223577A1 (en) | Video processing method, related apparatus, storage medium, and program product | |
| JP5141656B2 (en) | COMMUNICATION CONTROL DEVICE, COMMUNICATION CONTROL METHOD, AND COMMUNICATION CONTROL PROGRAM | |
| CN112135163A (en) | Video playing starting method and device | |
| JP2008113226A (en) | Communication apparatus and communication method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD07 | Notification of extinguishment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7427 Effective date: 20120719 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140115 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141106 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141111 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150106 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150519 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150601 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5764967 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |