JP2013066045A - Information processing system, information processor, and information processing program - Google Patents

Information processing system, information processor, and information processing program Download PDF

Info

Publication number
JP2013066045A
JP2013066045A JP2011203335A JP2011203335A JP2013066045A JP 2013066045 A JP2013066045 A JP 2013066045A JP 2011203335 A JP2011203335 A JP 2011203335A JP 2011203335 A JP2011203335 A JP 2011203335A JP 2013066045 A JP2013066045 A JP 2013066045A
Authority
JP
Japan
Prior art keywords
moving image
request
band
module
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011203335A
Other languages
Japanese (ja)
Other versions
JP5899738B2 (en
Inventor
Atsushi Ito
敦 伊東
Tsutomu Abe
勉 安部
Takeshi Nagamine
猛志 永峯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2011203335A priority Critical patent/JP5899738B2/en
Publication of JP2013066045A publication Critical patent/JP2013066045A/en
Application granted granted Critical
Publication of JP5899738B2 publication Critical patent/JP5899738B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an information processor which is configured to reproduce a moving image to which a requirement of an operator for one of image quality, resolution, and frame rate or a combination among them for the moving image is applied when the moving image is to be reproduced by a plurality of moving image reproduction devices by synchronizing the devices.SOLUTION: Requirement transmission means of an information processor transmits a requirement for one of image quality, resolution and frame rate or a combination among them for a moving image to be reproduced by synchronizing with other information processors, to a moving image transmitter on the basis of operations by an operator. Moving image reception means receives the moving image converted by the moving image transmitter on the basis of the requirement transmitted by the requirement transmission means. Reproduction means reproduces the moving image received by the moving image reception means.

Description

本発明は、情報処理システム、情報処理装置及び情報処理プログラムに関する。   The present invention relates to an information processing system, an information processing apparatus, and an information processing program.

複数の動画再生装置で動画の再生を同期させる技術がある。
これに関連する技術として、例えば、特許文献1には、接続先と放送番組の記録及び/又は再生を同期させ、記録及び/又は再生する放送番組を接続先から指定可能にすることを課題とし、接続先と放送番組の記録及び/又は再生を同期させ、同期要求の送受によって、同一の放送番組の記録、再生に時間的な制約を受けることなく任意の時間に行える等、接続先と放送番組の同時再生を通話とともに行え、斯かる構成により、接続先と放送番組の記録及び/又は再生を同期させることができ、記録及び/又は再生をする放送番組を接続先から指定可能にすることができ、通信機能、放送受信機能及び放送番組の記録及び/又は再生の機能を備える機器の利便性を高めることが開示されている。
There is a technique for synchronizing the playback of moving images with a plurality of moving image playback devices.
As a technology related to this, for example, Japanese Patent Application Laid-Open No. 2004-151867 has an object to synchronize recording and / or reproduction of a connection destination and a broadcast program, and to specify a broadcast program to be recorded and / or reproduced from the connection destination. Broadcasting with the connection destination can be performed at any time without any restrictions on the recording and playback of the same broadcast program by synchronizing the recording and playback of the broadcast program with the connection destination and sending and receiving the synchronization request. Simultaneous playback of programs can be performed together with a call, and with such a configuration, recording and / or playback of a broadcast program can be synchronized with the connection destination, and broadcast programs to be recorded and / or played can be designated from the connection destination. It is disclosed that the convenience of a device having a communication function, a broadcast reception function, and a broadcast program recording and / or playback function is improved.

また、例えば、特許文献2には、ネットワーク上の複数の機器に対して同一のコンテンツが同時に配信可能な状態において、複数の機器についてコンテンツの再生動作を同期させることを課題とし、コンテンツサーバから複数台のコンテンツ再生装置へ同一のコンテンツを同時に配信可能な状態において、1台のコンテンツ再生装置に対してユーザの操作があったとき、ユーザの操作を受けたコンテンツ再生装置はコンテンツサーバへコンテンツ再生の状態変化に関するイベントの通知を発行し、コンテンツサーバはイベントの通知を受けたときそのコンテンツ再生装置以外のコンテンツ再生装置を制御し、前記あるコンテンツについてその再生状態を前記ユーザの操作を受けたコンテンツ再生装置の再生状態に一致させることが開示されている。   In addition, for example, in Patent Document 2, it is an object to synchronize content reproduction operations for a plurality of devices in a state where the same content can be simultaneously distributed to a plurality of devices on a network. In a state where the same content can be simultaneously delivered to one content playback device, when a user operation is performed on one content playback device, the content playback device that has received the user's operation transmits content playback to the content server. When a notification of an event relating to a state change is issued, and the content server receives the notification of the event, the content server controls a content playback device other than the content playback device. Disclosed to match the playback state of the device That.

また、例えば、特許文献3には、画像フォーマットとフレームレートの2つを独立に操作することなく、1つの操作のみにて総合的な画質調整を実現することを課題とし、符号化映像の総合的な画質調整において、画像フォーマット毎に適用可能な符号化ビットレート、符号化フレームレートを定めたパラメータ変換データを予め記憶部に記憶しておき、パラメータ入力部から画質調整パラメータを入力し、画質調整部において、上記入力された画質調整パラメータをキーとして記憶部のパラメータ変換データを参照することによって、符号化フレームレートと画質フォーマットを決定し、それらを映像符号化処理部に出力することが開示されている。   Further, for example, Patent Document 3 has an object to realize comprehensive image quality adjustment by only one operation without independently operating two of an image format and a frame rate. In typical image quality adjustment, parameter conversion data that defines the encoding bit rate and encoding frame rate applicable for each image format is stored in advance in the storage unit, and the image quality adjustment parameter is input from the parameter input unit. It is disclosed that an adjustment unit determines an encoding frame rate and an image quality format by referring to parameter conversion data in a storage unit using the input image quality adjustment parameter as a key, and outputs them to a video encoding processing unit. Has been.

特開2010−206414号公報JP 2010-206414 A 特開2009−253889号公報JP 2009-253889 A 特開2000−165864号公報JP 2000-165864 A

本発明は、複数の動画再生装置によって動画を同期して再生する場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を再生するようにした情報処理システム、情報処理装置及び情報処理プログラムを提供することを目的としている。   In the present invention, when a moving image is played back synchronously by a plurality of moving image playback devices, a moving image reflecting an operator's request for one or a combination of image quality, resolution, and frame rate for the moving image is reflected. An object of the present invention is to provide an information processing system, an information processing apparatus, and an information processing program that are reproduced.

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項1の発明は、複数の動画再生装置との通信における帯域を取得する帯域取得手段と、前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段を有する動画送信装置と、前記動画送信装置の前記要求受信手段に対して、操作者の操作に基づいて、他の動画再生装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、前記動画送信装置の前記動画送信手段によって送信された動画を受信する動画受信手段と、前記動画受信手段によって受信された動画を再生する再生手段を有する動画再生装置を具備することを特徴とする情報処理システムである。
The gist of the present invention for achieving the object lies in the inventions of the following items.
According to the first aspect of the present invention, a band acquisition unit that acquires a band in communication with a plurality of video playback devices, and a plurality of video playback devices synchronize videos based on the bandwidth acquired by the band acquisition unit. Band determining means for determining a band in communication for reproduction, request receiving means for receiving a request for one or a combination of image quality, resolution, and frame rate for moving images from the moving image reproducing device, or the band determining A video conversion means for converting a video encoding parameter based on the bandwidth determined by the means and the request received by the request receiving means; and according to the bandwidth determined by the bandwidth determination means, each video playback device On the other hand, a moving picture transmitting apparatus having moving picture transmitting means for transmitting the moving picture converted by the moving picture converting means. And any one of image quality, resolution, and frame rate for a video to be played back in synchronization with another video playback device based on an operation of the operator with respect to the request reception unit of the video transmission device, or any of these A moving image having request transmitting means for transmitting a request for a combination, moving image receiving means for receiving the moving image transmitted by the moving image transmitting means of the moving image transmitting apparatus, and reproducing means for reproducing the moving image received by the moving image receiving means An information processing system comprising a playback device.

請求項2の発明は、複数の動画再生装置との通信における帯域を取得する帯域取得手段と、前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段を具備することを特徴とする情報処理装置である。   The invention according to claim 2 is that a band acquisition unit that acquires a band in communication with a plurality of video playback devices, and that the video is synchronized by the plurality of video playback devices based on the band acquired by the band acquisition unit. Band determining means for determining a band in communication for reproduction, request receiving means for receiving a request for one or a combination of image quality, resolution, and frame rate for moving images from the moving image reproducing device, or the band determining A video conversion means for converting a video encoding parameter based on the bandwidth determined by the means and the request received by the request receiving means; and according to the bandwidth determined by the bandwidth determination means, each video playback device On the other hand, it comprises a moving picture transmitting means for sending the moving picture converted by the moving picture converting means. Is an information processing apparatus to be.

請求項3の発明は、動画送信装置に対して、操作者の操作に基づいて、他の情報処理装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、前記要求送信手段によって送信された要求に基づいて前記動画送信装置によって変換された動画を受信する動画受信手段と、前記動画受信手段によって受信された動画を再生する再生手段を具備することを特徴とする情報処理装置である。   According to a third aspect of the present invention, any one or a combination of image quality, resolution, and frame rate for a moving image that is reproduced in synchronization with another information processing device based on an operation of the operator with respect to the moving image transmission device. A request transmission means for transmitting a request for the video, a video reception means for receiving a video converted by the video transmission device based on the request transmitted by the request transmission means, and a reproduction of the video received by the video reception means An information processing apparatus comprising playback means for performing the above-described operation.

請求項4の発明は、前記要求受信手段は、前記動画の各フレームの画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信し、前記動画変換手段は、前記要求受信手段によって受信された要求に基づいて、フレーム毎に動画のエンコードパラメータを変換することを特徴とする請求項2に記載の情報処理装置である。   According to a fourth aspect of the present invention, the request receiving means receives a request for one or a combination of image quality, resolution, and frame rate of each frame of the moving image, and the moving image converting means is the request receiving means. The information processing apparatus according to claim 2, wherein the encoding parameter of the moving image is converted for each frame based on the request received by.

請求項5の発明は、前記動画送信手段が動画を送信している間に、前記要求受信手段が要求を受信した場合は、前記動画変換手段は、未だ送信していない動画に対して、該要求に基づいて動画のエンコードパラメータを変換することを特徴とする請求項2又は4に記載の情報処理装置である。   In the fifth aspect of the present invention, when the request receiving unit receives a request while the moving image transmitting unit is transmitting a moving image, the moving image converting unit applies to the moving image not yet transmitted. 5. The information processing apparatus according to claim 2, wherein the encoding parameter of the moving image is converted based on the request.

請求項6の発明は、前記動画を次回送信する場合に、前記動画変換手段が前記要求に基づいて、該動画のエンコードパラメータを変換し得るように、前記要求受信手段によって受信された要求を記憶する記憶手段をさらに具備し、前記動画変換手段は、前記帯域決定手段によって決定された帯域と前記記憶手段に記憶された要求に基づいて、動画のエンコードパラメータを変換することを特徴とする請求項2、4、5のいずれか一項に記載の情報処理装置である。   The invention of claim 6 stores the request received by the request receiving means so that the moving picture conversion means can convert the encoding parameter of the moving picture based on the request when the moving picture is transmitted next time. The video conversion means further comprises a video encoding parameter that is converted based on the band determined by the band determination means and the request stored in the storage means. The information processing apparatus according to any one of 2, 4, and 5.

請求項7の発明は、前記動画送信手段が動画を送信している間に、該動画を同期して再生する新たな動画再生装置が接続された場合は、前記帯域取得手段は、該動画再生装置との通信における帯域を取得し、前記帯域決定手段は、前記帯域取得手段によって取得された帯域に基づいて、前記新たな動画再生装置を含めた複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定することを特徴とする請求項2、4、5、6のいずれか一項に記載の情報処理装置である。   According to the seventh aspect of the present invention, when a new video playback device that plays back the video in synchronization is connected while the video transmission means is transmitting the video, the bandwidth acquisition means The bandwidth determination unit obtains a bandwidth in communication with the device, and the bandwidth determination unit reproduces the video in synchronization with a plurality of video playback devices including the new video playback device based on the bandwidth acquired by the bandwidth acquisition unit. The information processing apparatus according to any one of claims 2, 4, 5, and 6, wherein a band in communication for communication is determined.

請求項8の発明は、前記動画送信装置によって送信された第2の動画を受信する第2の動画受信手段と、前記第2の動画受信手段によって受信された第2の動画を記憶する動画記憶手段をさらに具備し、前記第2の動画受信手段よって受信された第2の動画は、前記動画受信手段よって受信された第1の動画よりも高画質であり、前記動画再生装置は、前記動画受信手段によって受信された第1の動画を再生している間に、前記第2の動画受信手段による第2の動画の受信が終了したことを検知した場合は、該第1の動画の再生を中止し、前記動画記憶手段によって記憶されている第2の動画を再生することを特徴とする請求項3に記載の情報処理装置である。   The invention according to claim 8 is a second moving image receiving means for receiving the second moving image transmitted by the moving image transmitting apparatus, and a moving image storage for storing the second moving image received by the second moving image receiving means. And the second moving image received by the second moving image receiving means has a higher image quality than the first moving image received by the moving image receiving means. When it is detected that the reception of the second moving image by the second moving image receiving unit is completed while the first moving image received by the receiving unit is being reproduced, the reproduction of the first moving image is performed. The information processing apparatus according to claim 3, wherein the information processing apparatus stops and reproduces the second moving image stored by the moving image storage unit.

請求項9の発明は、コンピュータを、複数の動画再生装置との通信における帯域を取得する帯域取得手段と、前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段として機能させるための情報処理プログラムである。   According to a ninth aspect of the present invention, there is provided a bandwidth acquisition unit that acquires a bandwidth in communication with a plurality of video playback devices, and a video that is acquired by the plurality of video playback devices based on the bandwidth acquired by the bandwidth acquisition unit. Bandwidth determining means for determining a bandwidth in communication for synchronous playback; request receiving means for receiving a request for any one of image quality, resolution, and frame rate for a moving image, or a combination thereof from the moving image reproducing device; Based on the band determined by the band determining unit and the request received by the request receiving unit, the moving image converting unit that converts the encoding parameter of the moving image, and each moving image according to the band determined by the band determining unit A moving picture transmitting means for sending the moving picture converted by the moving picture converting means to the playback apparatus; An information processing program for causing Te.

請求項10の発明は、コンピュータを、動画送信装置に対して、操作者の操作に基づいて、他の情報処理装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、前記要求送信手段によって送信された要求に基づいて前記動画送信装置によって変換された動画を受信する動画受信手段と、前記動画受信手段によって受信された動画を再生する再生手段として機能させるための情報処理プログラムである。   According to a tenth aspect of the present invention, any one of image quality, resolution, and frame rate for a moving image to be reproduced in synchronization with another information processing device based on an operator's operation with respect to the moving image transmitting device, or Request transmission means for transmitting a request for these combinations, video reception means for receiving a video converted by the video transmission device based on the request transmitted by the request transmission means, received by the video reception means It is an information processing program for functioning as a reproduction means for reproducing a moving image.

請求項1の情報処理システムによれば、複数の動画再生装置によって動画を同期して再生する場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を再生することができる。   According to the information processing system of claim 1, when a moving image is reproduced synchronously by a plurality of moving image reproducing devices, the operator's operation for any one of image quality, resolution, and frame rate for the moving image, or a combination thereof. A video that reflects the request can be played.

請求項2の情報処理装置によれば、複数の動画再生装置によって動画を同期して再生させる場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を送信することができる。   According to the information processing apparatus of the second aspect, in the case where a plurality of moving image reproducing devices reproduce a moving image synchronously, an operator's operation for any one of image quality, resolution, and frame rate for the moving image or a combination thereof A moving image reflecting the request can be transmitted.

請求項3の情報処理装置によれば、複数の動画再生装置によって動画を同期して再生する場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を再生することができる。   According to the information processing device of claim 3, when a moving image is reproduced in synchronization by a plurality of moving image reproducing devices, an operator's operation for any one of image quality, resolution, and frame rate for the moving image, or a combination thereof. A video that reflects the request can be played.

請求項4の情報処理装置によれば、動画のフレーム毎に操作者の要求が反映された動画を送信することができる。   According to the information processing apparatus of the fourth aspect, it is possible to transmit a moving image in which the operator's request is reflected for each frame of the moving image.

請求項5の情報処理装置によれば、動画の送信中でも操作者の要求が反映された動画を送信することができる。   According to the information processing apparatus of the fifth aspect, it is possible to transmit a moving image reflecting an operator's request even during transmission of the moving image.

請求項6の情報処理装置によれば、前回の再生における要求にしたがった動画の再生ができるようになる。   According to the information processing apparatus of the sixth aspect, it is possible to reproduce the moving image according to the request in the previous reproduction.

請求項7の情報処理装置によれば、動画の送信中に動画再生装置が増えた場合でも、同期して動画を再生することができる。   According to the information processing device of the seventh aspect, even when the number of moving image playback devices increases during the transmission of the moving image, the moving image can be played back synchronously.

請求項8の情報処理装置によれば、最初は第1の動画の再生を行い、第2の動画の受信が終了した後の情報処理装置では、第1の動画よりも高画質である第2の動画を再生することができるようになる。   According to the information processing apparatus of the eighth aspect, the first moving image is reproduced first, and the information processing device after the reception of the second moving image has the second image quality higher than that of the first moving image. Will be able to play videos.

請求項9の情報処理プログラムによれば、複数の動画再生装置によって動画を同期して再生させる場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を送信することができる。   According to the information processing program of claim 9, when a moving image is reproduced in synchronization by a plurality of moving image reproducing devices, an operator's operation for any one of image quality, resolution, and frame rate for the moving image, or a combination thereof. A moving image reflecting the request can be transmitted.

請求項10の情報処理プログラムによれば、複数の動画再生装置によって動画を同期して再生する場合にあって、動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する操作者の要求が反映された動画を再生することができる。   According to the information processing program of the tenth aspect, in the case where a moving image is reproduced in synchronism with a plurality of moving image reproducing devices, an operator's operation for any one of image quality, resolution, and frame rate for the moving image, or a combination thereof. A video that reflects the request can be played.

第1の実施の形態の構成例についての概念的なモジュール構成図である。It is a conceptual module block diagram about the structural example of 1st Embodiment. 第1の実施の形態を実現する場合のシステム構成例を示す説明図である。It is explanatory drawing which shows the system configuration example in the case of implement | achieving 1st Embodiment. 第1の実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by 1st Embodiment. 第1の実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by 1st Embodiment. 第1の実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by 1st Embodiment. 動画情報テーブルのデータ構造例を示す説明図である。It is explanatory drawing which shows the example of a data structure of a moving image information table. ユーザプロファイルテーブルのデータ構造例を示す説明図である。It is explanatory drawing which shows the example of a data structure of a user profile table. セッション管理テーブルのデータ構造例を示す説明図である。It is explanatory drawing which shows the example of a data structure of a session management table. 再生動画ファイル管理情報テーブルのデータ構造例を示す説明図である。It is explanatory drawing which shows the example of a data structure of a reproduction | regeneration moving image file management information table. 本実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by this Embodiment. 動画表示画面の例を示す説明図である。It is explanatory drawing which shows the example of a moving image display screen. 動画表示画面に対するフレームレートの要求の例を示す説明図である。It is explanatory drawing which shows the example of the request | requirement of the frame rate with respect to a moving image display screen. 動画表示画面に対するフレームレートの要求の例を示す説明図である。It is explanatory drawing which shows the example of the request | requirement of the frame rate with respect to a moving image display screen. 再生動画ファイル管理情報テーブルの例を示す説明図である。It is explanatory drawing which shows the example of a reproduction | regeneration moving image file management information table. 第2の実施の形態の構成例についての概念的なモジュール構成図である。It is a conceptual module block diagram about the structural example of 2nd Embodiment. 第2実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by 2nd Embodiment. 第2実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by 2nd Embodiment. 動画ファイル管理テーブルのデータ構造例を示す説明図である。It is explanatory drawing which shows the example of a data structure of a moving image file management table. 本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。It is a block diagram which shows the hardware structural example of the computer which implement | achieves this Embodiment.

以下、図面に基づき本発明を実現するにあたっての好適な各種の実施の形態の例を説明する。
図1は、第1の実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア(コンピュータ・プログラム)、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム(コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム)、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、1モジュールを1プログラムで構成してもよいし、複数モジュールを1プログラムで構成してもよく、逆に1モジュールを複数プログラムで構成してもよい。また、複数モジュールは1コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって1モジュールが複数コンピュータで実行されてもよい。なお、1つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続(データの授受、指示、データ間の参照関係等)の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。また、「Aである場合、Bをする」という意味を有する記載は、「Aであるか否かを判断し、Aであると判断した場合はBをする」の意味で用いる。ただし、Aであるか否かの判断が不要である場合を除く。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク(一対一対応の通信接続を含む)等の通信手段で接続されて構成されるほか、1つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」(社会システム)にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、RAM(Random Access Memory)、外部記憶媒体、通信回線を介した記憶装置、CPU(Central Processing Unit)内のレジスタ等を含んでいてもよい。
Hereinafter, examples of various preferred embodiments for realizing the present invention will be described with reference to the drawings.
FIG. 1 is a conceptual module configuration diagram of a configuration example according to the first embodiment.
The module generally refers to components such as software (computer program) and hardware that can be logically separated. Therefore, the module in the present embodiment indicates not only a module in a computer program but also a module in a hardware configuration. Therefore, the present embodiment is a computer program for causing these modules to function (a program for causing a computer to execute each procedure, a program for causing a computer to function as each means, and a function for each computer. This also serves as an explanation of the program and system and method for realizing the above. However, for the sake of explanation, the words “store”, “store”, and equivalents thereof are used. However, when the embodiment is a computer program, these words are stored in a storage device or stored in memory. It is the control to be stored in the device. Modules may correspond to functions one-to-one, but in mounting, one module may be configured by one program, or a plurality of modules may be configured by one program, and conversely, one module May be composed of a plurality of programs. The plurality of modules may be executed by one computer, or one module may be executed by a plurality of computers in a distributed or parallel environment. Note that one module may include other modules. Hereinafter, “connection” is used not only for physical connection but also for logical connection (data exchange, instruction, reference relationship between data, etc.). “Predetermined” means that the process is determined before the target process, and not only before the process according to this embodiment starts but also after the process according to this embodiment starts. In addition, if it is before the target processing, it is used in accordance with the situation / state at that time or with the intention to be decided according to the situation / state up to that point. In addition, the description having the meaning of “do B when it is A” is used in the meaning of “determine whether or not it is A and do B when it is judged as A”. However, the case where it is not necessary to determine whether or not A is excluded.
In addition, the system or device is configured by connecting a plurality of computers, hardware, devices, and the like by communication means such as a network (including one-to-one correspondence communication connection), etc., and one computer, hardware, device. The case where it implement | achieves by etc. is also included. “Apparatus” and “system” are used as synonymous terms. Of course, the “system” does not include a social “mechanism” (social system) that is an artificial arrangement.
In addition, when performing a plurality of processes in each module or in each module, the target information is read from the storage device for each process, and the processing result is written to the storage device after performing the processing. is there. Therefore, description of reading from the storage device before processing and writing to the storage device after processing may be omitted. Here, the storage device may include a hard disk, a RAM (Random Access Memory), an external storage medium, a storage device via a communication line, a register in a CPU (Central Processing Unit), and the like.

第1の実施の形態である情報処理システムは、複数のクライアント装置150で同期させて動画を再生するものであって、図1の例に示すように、サーバ装置100とクライアント装置150を有している。サーバ装置100とクライアント装置150は通信回線を介して接続されている。サーバ装置100は、動画送信装置としての機能を有し、クライアント装置150は、動画再生装置としての機能を有する。そして、クライアント装置150は複数ある。   The information processing system according to the first embodiment reproduces a moving image in synchronization with a plurality of client devices 150, and includes a server device 100 and a client device 150 as shown in the example of FIG. ing. Server apparatus 100 and client apparatus 150 are connected via a communication line. The server apparatus 100 has a function as a moving picture transmission apparatus, and the client apparatus 150 has a function as a moving picture reproduction apparatus. There are a plurality of client devices 150.

サーバ装置100は、動画ファイルリポジトリ110、帯域幅測定モジュール115、動画品質調整モジュール120、同期視聴セッション管理モジュール125、動画ストリーミングモジュール130を有している。また、これらのサーバ装置100内の各モジュールは、それぞれ個別の情報処理装置(例えば、サーバ装置)として実現されていてもよいし、いくつかの複数のモジュールを組とした複数の情報処理装置として実現されていてもよい。   The server device 100 includes a moving image file repository 110, a bandwidth measurement module 115, a moving image quality adjustment module 120, a synchronous viewing session management module 125, and a moving image streaming module 130. In addition, each module in the server device 100 may be realized as an individual information processing device (for example, a server device), or as a plurality of information processing devices each including a plurality of modules. It may be realized.

動画ファイルリポジトリ110は、動画品質調整モジュール120と接続されている。動画ファイルリポジトリ110は、動画(動画データ)を記憶する。さらに、その動画から生成されたストリーミング用動画を記憶していてもよい。   The moving image file repository 110 is connected to the moving image quality adjustment module 120. The moving image file repository 110 stores moving images (moving image data). Further, a streaming video generated from the video may be stored.

帯域幅測定モジュール115は、動画品質調整モジュール120、動画ストリーミングモジュール130、ストリーミング再生モジュール170と接続されている。帯域幅測定モジュール115は、複数のクライアント装置150との通信における帯域を取得する。そして、その取得した帯域に基づいて、その複数のクライアント装置150によって動画を同期して再生するための通信における帯域を決定する。
例えば、帯域が最低のものを選択することによって決定すること、帯域が最低のものから予め定められた値を減算すること、帯域が最低のものに予め定められた値(1未満の値)を乗算すること等がある。
また、動画ストリーミングモジュール130が動画を送信している間に、その動画を同期して再生する新たなクライアント装置150が接続された場合は、帯域幅測定モジュール115は、そのクライアント装置150との通信における帯域を取得し、取得した帯域に基づいて、その新たなクライアント装置150を含めた複数のクライアント装置150によって動画を同期して再生するための通信における帯域を決定するようにしてもよい。
The bandwidth measurement module 115 is connected to the video quality adjustment module 120, the video streaming module 130, and the streaming playback module 170. The bandwidth measurement module 115 acquires a bandwidth in communication with the plurality of client devices 150. Based on the obtained bandwidth, the plurality of client devices 150 determine a bandwidth in communication for reproducing a moving image in synchronization.
For example, determining by selecting the lowest bandwidth, subtracting a predetermined value from the lowest bandwidth, a predetermined value (less than 1) to the lowest bandwidth There are things such as multiplication.
In addition, when a new client device 150 that plays back the moving image in synchronization is connected while the moving image streaming module 130 is transmitting the moving image, the bandwidth measurement module 115 communicates with the client device 150. The bandwidth in communication for reproducing a moving image synchronously by a plurality of client devices 150 including the new client device 150 may be determined based on the obtained bandwidth.

動画品質調整モジュール120は、動画ファイルリポジトリ110、帯域幅測定モジュール115、同期視聴セッション管理モジュール125、動画ストリーミングモジュール130、品質調整操作受付モジュール165と接続されている。動画品質調整モジュール120は、クライアント装置150の品質調整操作受付モジュール165から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する。そして、帯域幅測定モジュール115によって決定された帯域と受信した要求に基づいて、動画のエンコードパラメータを変換する、ストリーミング用動画を生成する。なお、「動画のエンコードパラメータを変換する」とは、その動画を変換することを含む。
また、動画品質調整モジュール120は、動画の各フレームの画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信し、その受信した要求に基づいて、フレーム毎に動画のエンコードパラメータを変換するようにしてもよい。
また、動画ストリーミングモジュール130が動画を送信している間に、動画品質調整モジュール120が要求を受信した場合は、動画品質調整モジュール120は、未だ送信していない動画に対して、その要求に基づいて動画のエンコードパラメータを変換するようにしてもよい。
また、動画品質調整モジュール120は、動画を次回送信する場合に、動画品質調整モジュール120が要求に基づいて、その動画のエンコードパラメータを変換し得るように、受信した要求を記憶モジュールに記憶させ、帯域幅測定モジュール115によって決定された帯域とその記憶モジュールに記憶された要求に基づいて、動画のエンコードパラメータを変換するようにしてもよい。ここで「動画を次回送信する場合」とは、次の新しいセッションにおいて、今回の動画と同じ動画の再生指示があった場合のことである。
The moving image quality adjustment module 120 is connected to the moving image file repository 110, the bandwidth measurement module 115, the synchronous viewing session management module 125, the moving image streaming module 130, and the quality adjustment operation reception module 165. The moving image quality adjustment module 120 receives a request for one or a combination of image quality, resolution, and frame rate for the moving image from the quality adjustment operation receiving module 165 of the client device 150. Then, based on the bandwidth determined by the bandwidth measurement module 115 and the received request, a streaming moving image for converting the encoding parameter of the moving image is generated. Note that “converting the encoding parameter of a moving image” includes converting the moving image.
The moving image quality adjustment module 120 receives a request for one or a combination of image quality, resolution, and frame rate of each frame of the moving image, and based on the received request, the moving image encoding parameter is set for each frame. May be converted.
In addition, when the video quality adjustment module 120 receives a request while the video streaming module 130 is transmitting a video, the video quality adjustment module 120 applies a request to a video that has not yet been transmitted. Thus, the encoding parameter of the moving image may be converted.
The video quality adjustment module 120 stores the received request in the storage module so that the video quality adjustment module 120 can convert the encoding parameter of the video based on the request when the video is transmitted next time, The encoding parameter of the moving image may be converted based on the bandwidth determined by the bandwidth measuring module 115 and the request stored in the storage module. Here, “when a moving image is transmitted next time” refers to a case where there is an instruction to reproduce the same moving image as the current moving image in the next new session.

同期視聴セッション管理モジュール125は、動画品質調整モジュール120、同期視聴コマンド送受信モジュール160と接続されている。同期視聴セッション管理モジュール125は、複数のクライアント装置150間で同期をとりながら動画の再生を行っている場合の、その動画に対する操作者の操作を受信する。そして、その操作に関する指示情報(例えば、再生や一時停止等の操作を示す情報(コマンド、イベント等)をいう。以下、単に「操作」という)を記憶モジュールに記憶させる。
例えば、同期視聴セッション管理モジュール125は、どのユーザとどのユーザが何という動画を同期視聴しているかをセッション情報として管理する。加えて、セッション内で発行された同期視聴コマンドを受信し、その発行者以外のユーザが使用しているクライアント装置150の同期視聴コマンド送受信モジュール160に転送する。この機能により同期視聴を実現する。
また、クライアント装置150からの要求にしたがって、記憶されている操作を送信するようにしてもよい。例えば、同期視聴セッション管理モジュール125は、同期視聴コマンドを発生タイミング(発生時刻、動画の再生を開始してからの経過時間等)とともに記録し、それをクライアント装置150からの要求があると、そのクライアント装置150に送信する。
The synchronous viewing session management module 125 is connected to the moving image quality adjustment module 120 and the synchronous viewing command transmission / reception module 160. The synchronized viewing session management module 125 receives the operation of the operator for the moving image when the moving image is being reproduced while being synchronized between the plurality of client devices 150. Then, instruction information relating to the operation (for example, information (command, event, etc.) indicating an operation such as reproduction or pause is referred to as “operation” hereinafter) is stored in the storage module.
For example, the synchronous viewing session management module 125 manages which user and which user is watching what video is synchronized as session information. In addition, the synchronous viewing command issued in the session is received and transferred to the synchronous viewing command transmission / reception module 160 of the client device 150 used by a user other than the issuer. This function realizes synchronous viewing.
Further, the stored operation may be transmitted in accordance with a request from the client device 150. For example, the synchronous viewing session management module 125 records the synchronous viewing command together with the generation timing (occurrence time, elapsed time after starting the reproduction of the moving image, etc.), and when there is a request from the client device 150, It transmits to the client device 150.

動画ストリーミングモジュール130は、帯域幅測定モジュール115、動画品質調整モジュール120、ストリーミング再生モジュール170と接続されている。動画ストリーミングモジュール130は、帯域幅測定モジュール115によって決定された帯域にしたがって、クライアント装置150のストリーミング再生モジュール170に対して、動画品質調整モジュール120によって変換されたストリーミング用動画を送信する。動画ストリーミングモジュール130は、複数のクライアント装置150に対して、ストリーミング用動画を送信する。例えば、動画ストリーミングモジュール130は、ユーザ(操作者、視聴者等)から指定された動画データに対応するストリーミング用動画が動画ファイルリポジトリ110にある場合は、そのストリーミング用動画を送信する。また、動画ファイルリポジトリ110にストリーミング用動画がない場合は、動画品質調整モジュール120が動画ファイルリポジトリ110内のオリジナル版である動画データからストリーミング用動画を生成して、その生成したストリーミング用動画を送信する。   The video streaming module 130 is connected to the bandwidth measurement module 115, the video quality adjustment module 120, and the streaming playback module 170. The video streaming module 130 transmits the streaming video converted by the video quality adjustment module 120 to the streaming playback module 170 of the client device 150 according to the bandwidth determined by the bandwidth measurement module 115. The video streaming module 130 transmits a streaming video to the plurality of client devices 150. For example, when there is a streaming video corresponding to the video data specified by the user (operator, viewer, etc.) in the video file repository 110, the video streaming module 130 transmits the streaming video. If there is no streaming video in the video file repository 110, the video quality adjustment module 120 generates a streaming video from the original video data in the video file repository 110, and transmits the generated streaming video. To do.

クライアント装置150は、同期視聴コマンド送受信モジュール160、品質調整操作受付モジュール165、ストリーミング再生モジュール170を有している。ユーザが動画を視聴するために使用するものである。   The client device 150 includes a synchronous viewing command transmission / reception module 160, a quality adjustment operation reception module 165, and a streaming playback module 170. This is used by the user to view a moving image.

同期視聴コマンド送受信モジュール160は、同期視聴セッション管理モジュール125と接続されている。同期視聴コマンド送受信モジュール160は、サーバ装置100の同期視聴セッション管理モジュール125に記憶された操作を要求し、その要求にしたがって、サーバ装置100の同期視聴セッション管理モジュール125によって送信された操作を受信する。そして、ストリーミング再生モジュール170を制御して、受信した操作に基づいて、動画及び操作の再現を行う。
例えば、同期視聴コマンド送受信モジュール160は、同期視聴セッション管理モジュール125から受信した記録に基づきセッションを再現する。
そして、同期視聴コマンド送受信モジュール160は、操作者によって動画に対する操作が行われた場合は、その操作をサーバ装置100の同期視聴セッション管理モジュール125に送信する。
The synchronous viewing command transmission / reception module 160 is connected to the synchronous viewing session management module 125. The synchronous viewing command transmission / reception module 160 requests an operation stored in the synchronous viewing session management module 125 of the server apparatus 100, and receives an operation transmitted by the synchronous viewing session management module 125 of the server apparatus 100 according to the request. . Then, the streaming reproduction module 170 is controlled to reproduce the moving image and the operation based on the received operation.
For example, the synchronous viewing command transmission / reception module 160 reproduces the session based on the recording received from the synchronous viewing session management module 125.
Then, when an operation is performed on the moving image by the operator, the synchronous viewing command transmission / reception module 160 transmits the operation to the synchronous viewing session management module 125 of the server device 100.

品質調整操作受付モジュール165は、動画品質調整モジュール120と接続されている。品質調整操作受付モジュール165は、サーバ装置100の動画品質調整モジュール120に対して、操作者の操作に基づいて、他のクライアント装置150と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する。
また、品質調整操作受付モジュール165は、動画の各フレームの画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信するようにしてもよい。
また、品質調整操作受付モジュール165は、ストリーミング再生モジュール170が動画を再生している間(又はストリーミング再生モジュール170が動画を受信している間)に、サーバ装置100の動画品質調整モジュール120に対して、その動画に対する要求を送信するようにしてもよい。
The quality adjustment operation reception module 165 is connected to the moving image quality adjustment module 120. The quality adjustment operation accepting module 165 instructs the moving image quality adjusting module 120 of the server device 100 to select one of the image quality, resolution, and frame rate for the moving image to be reproduced in synchronization with the other client devices 150 based on the operation of the operator. Send a request for one or a combination of these.
Further, the quality adjustment operation receiving module 165 may transmit a request for one or a combination of the image quality, resolution, and frame rate of each frame of the moving image.
In addition, the quality adjustment operation reception module 165 receives the moving image quality adjustment module 120 of the server apparatus 100 while the streaming playback module 170 is playing back the moving image (or while the streaming playback module 170 is receiving the moving image). Then, a request for the moving image may be transmitted.

ストリーミング再生モジュール170は、帯域幅測定モジュール115、動画ストリーミングモジュール130と接続されている。ストリーミング再生モジュール170は、サーバ装置100の動画ストリーミングモジュール130によって送信された動画を受信する。そして、その受信したストリーミング用動画を再生する。このストリーミング用動画は、品質調整操作受付モジュール165によって送信された要求に基づいてサーバ装置100の動画品質調整モジュール120によって変換された動画である。
また、ストリーミング再生モジュール170は、ユーザからの同期視聴コマンド操作を受け付け、同期視聴コマンド送受信モジュール160に通知する。
なお、ストリーミング再生モジュール170は、クライアント装置150の表示装置(液晶ディスプレイ、タッチパネル等)に動画ウィンドウを表示し、その動画ウィンドウ内に動画を再生する。
The streaming playback module 170 is connected to the bandwidth measurement module 115 and the video streaming module 130. The streaming playback module 170 receives the moving image transmitted by the moving image streaming module 130 of the server device 100. Then, the received streaming video is played back. This streaming moving image is a moving image converted by the moving image quality adjustment module 120 of the server apparatus 100 based on the request transmitted by the quality adjustment operation receiving module 165.
Also, the streaming playback module 170 accepts a synchronous viewing command operation from the user and notifies the synchronous viewing command transmission / reception module 160.
The streaming playback module 170 displays a moving image window on the display device (liquid crystal display, touch panel, etc.) of the client device 150, and plays the moving image in the moving image window.

図2は、第1の実施の形態を実現する場合のシステム構成例を示す説明図である。
サーバ装置100、クライアント装置150A、クライアント装置150B、クライアント装置150Cは、それぞれ通信回線200を介して接続されている。もちろんのことながら、クライアント装置150は、図2の例のように3つだけでなく、それ以上の数であってもよいし、2つであってもよい。
例えば、遠隔でコミュニケーションする際に、相手に正確に情報を伝えるために動画を使用することが一般的になってきた。遠く離れた場所にいるユーザどうしがある動画コンテンツを同期して視聴しながらコミュニケーション(ユーザどうしは電話やインターネットを介した電話、TV会議システムなどを使って会話する)をするというシステムがある。
動画をあるサーバからストリーミング配信するとネットワーク帯域や通信遅延の関係で画質やフレームレートを落として配信せざるをえない。そこで、事前に動画を送り、再生や一時停止などの操作(コマンド、イベント等)のみをやりとりする手法が前述の特許文献等で提案されている。
FIG. 2 is an explanatory diagram showing an example of a system configuration when the first embodiment is realized.
The server apparatus 100, the client apparatus 150A, the client apparatus 150B, and the client apparatus 150C are connected via the communication line 200, respectively. Of course, the number of client devices 150 is not limited to three as in the example of FIG. 2, but may be more or two.
For example, when communicating remotely, it has become common to use moving images to accurately convey information to the other party. There is a system in which users in distant places communicate with each other while watching a certain moving image content synchronously (users communicate with each other using a telephone, a telephone via the Internet, a TV conference system, etc.).
When streaming video from a certain server, the image quality and frame rate must be reduced due to the network bandwidth and communication delay. Therefore, a method of sending a moving image in advance and exchanging only operations (commands, events, etc.) such as reproduction and pause has been proposed in the above-mentioned patent documents.

しかし、例えば、緊急トラブルで急いで情報共有したい場合、この方法では動画ファイルの転送に時間がかかり(特に国際間の通信などの場合)、緊急対応ができなくなってしまう恐れがある。より具体的には、海外の工場で発生したトラブルについて日本の開発センターに状況をいち早く知らせて議論したい場合などがある。本実施の形態は、このような場合にも用いられるものである。つまり、本実施の形態の用いられ方の一例として、遠隔地間で動画の同期視聴を行う際に、緊急時は低品質の動画でもよいのですぐに利用可能にし、転送が間に合う場合や後で同期視聴の模様を振り返る場合には高画質の動画を利用する。
クライアント装置150間で同期をとりながら動画の再生を行っていることから、各動画再生装置の操作者たちは、同時に同じ動画を視聴していることになる。したがって、例えば、同じ動画を視聴しながら、電話等のリアルタイムでコミュニケーションをとることを行っている。
クライアント装置150の各々は、同じ性能を有していてもよいが、異なる性能を有していてもよい。また、サーバ装置100とクライアント装置150間の通信回線も同じ性能であってもよいが、異なる性能であってもよい。
However, for example, when it is desired to share information quickly due to an emergency trouble, this method may take time to transfer a moving image file (especially in the case of international communication, etc.), and emergency response may not be possible. More specifically, there are cases in which it is necessary to immediately inform the development center in Japan about problems occurring at overseas factories and discuss them. The present embodiment is also used in such a case. In other words, as an example of how this embodiment is used, when performing synchronized viewing of videos between remote locations, low-quality videos may be used immediately in an emergency, so that they can be used immediately and transfer is in time or later. When looking back on the pattern of synchronous viewing, use a high-quality video.
Since the moving images are reproduced while being synchronized between the client devices 150, the operators of the respective moving image reproducing devices are viewing the same moving image at the same time. Therefore, for example, communication is performed in real time such as by telephone while viewing the same video.
Each of the client devices 150 may have the same performance, but may have different performance. Further, the communication line between the server apparatus 100 and the client apparatus 150 may have the same performance, but may have different performance.

図3から図5は、第1の実施の形態による処理例を示すフローチャートである。
まず、本実施の形態による処理の前提として、動画ファイルリポジトリ110に動画ファイルが保存されており、それらには本実施の形態において一意に識別し得る識別子(以下、動画ID(IDentification)ともいう)が割り振られている。ユーザは、ユーザインタフェース(CGIプログラムなど)を通じて、動画ファイルリポジトリ110内の視聴すべき動画の動画IDを検索・取得する。
例えば、動画ファイルリポジトリ110内に動画情報テーブル400を記憶している。図6は、動画情報テーブル400のデータ構造例を示す説明図である。動画情報テーブル400は、動画ID欄410、動画名欄420、キーワード欄430、動画ファイル格納場所欄440を有している。動画ID欄410は、動画IDを記憶している。動画名欄420は、その動画の名称を記憶している。キーワード欄430は、その動画に付されたキーワードを記憶している。動画ファイル格納場所欄440は、その動画が動画ファイルリポジトリ110内で格納されている格納場所(具値的には、ファイル名、URL(Uniform Resource Locator)等)を記憶している。動画情報テーブル400をユーザの検索指示(例えば、キーワード等の指定)に応じて検索し、該当する動画IDを取得する。
3 to 5 are flowcharts showing an example of processing according to the first embodiment.
First, as a premise of the processing according to the present embodiment, a moving image file is stored in the moving image file repository 110, and an identifier that can be uniquely identified in the present embodiment (hereinafter also referred to as a moving image ID (IDentification)). Is allocated. The user searches and acquires the moving image ID of the moving image to be viewed in the moving image file repository 110 through a user interface (CGI program or the like).
For example, the moving image information table 400 is stored in the moving image file repository 110. FIG. 6 is an explanatory diagram showing an example of the data structure of the moving image information table 400. The moving image information table 400 includes a moving image ID column 410, a moving image name column 420, a keyword column 430, and a moving image file storage location column 440. The moving image ID column 410 stores a moving image ID. The movie name column 420 stores the name of the movie. The keyword column 430 stores a keyword attached to the moving image. The moving image file storage location column 440 stores a storage location (specifically, a file name, a URL (Uniform Resource Locator), etc.) where the moving image is stored in the moving image file repository 110. The moving image information table 400 is searched according to a user search instruction (for example, specification of a keyword or the like), and the corresponding moving image ID is acquired.

ステップS302では、同期視聴コマンド送受信モジュール160が、セッションID(セッションを本実施の形態において一意に識別し得る識別子である)、再生対象である動画IDを受け付ける。より具体的には、同期視聴コマンド送受信モジュール160は、ユーザの操作に応じて、同期視聴を行うためのクライアント装置150で動作するクライアントソフトが起動され、セッションIDとしてのセッション名(ユーザが設定する任意の名前であり、例えば、「トラブル対策ミーティング」等)と同期視聴したい動画ID(新しくセッションを作る場合であり、すでにあるセッションに参加する場合は不要である、以下同様)を受け付ける。なお、ここで、セッションとは、動画の同期視聴の処理を開始してから、終了するまでの、一連の操作、処理、通信等のことをいう。セッションを作るとは、新たに動画の同期視聴の処理を開始することをいい、セッションIDが付与される。そして、セッションに参加するとは、すでに動画の同期視聴の処理が行われているものに対して、そのセッションIDにユーザIDを対応させることをいう。
ステップS304では、同期視聴コマンド送受信モジュール160が、同期視聴セッション管理モジュール125に対して、ユーザID、セッションID、動画IDを送信する。より具体的には、同期視聴コマンド送受信モジュール160は、サーバ装置100の同期視聴セッション管理モジュール125に接続し、ユーザID(ユーザを本実施の形態において一意に識別し得る識別子であり、発行・管理方法等については特に問わない)、セッションID、動画IDを送信する。
ステップS306では、同期視聴セッション管理モジュール125が、同期視聴コマンド送受信モジュール160から送信されてきたユーザID、セッションID、動画IDを受信する。
In step S302, the synchronous viewing command transmission / reception module 160 receives a session ID (an identifier that can uniquely identify a session in the present embodiment) and a moving image ID that is a reproduction target. More specifically, in the synchronous viewing command transmission / reception module 160, client software that operates on the client device 150 for performing synchronous viewing is activated in response to a user operation, and a session name (set by the user is set as a session ID). An arbitrary name, for example, “Troubleshooting meeting” or the like, and a moving image ID that is desired to be viewed synchronously (when a new session is created and not necessary when participating in an existing session, the same applies hereinafter) are accepted. Here, the session refers to a series of operations, processing, communication, and the like from the start to the end of synchronous video viewing processing. Making a session means starting a new process of synchronous viewing of a moving image, and a session ID is given. To participate in a session refers to associating a user ID with the session ID for a video that has already been processed for synchronous viewing.
In step S304, the synchronous viewing command transmission / reception module 160 transmits the user ID, the session ID, and the moving image ID to the synchronous viewing session management module 125. More specifically, the synchronous viewing command transmission / reception module 160 is connected to the synchronous viewing session management module 125 of the server device 100, and is a user ID (an identifier that can uniquely identify a user in the present embodiment. The method is not particularly limited), and a session ID and a moving image ID are transmitted.
In step S306, the synchronous viewing session management module 125 receives the user ID, session ID, and moving image ID transmitted from the synchronous viewing command transmission / reception module 160.

ステップS308では、同期視聴セッション管理モジュール125が、既存のセッションIDであるか否かを判断し、既存の場合はステップS310へ進み、それ以外の場合はステップS312へ進む。
より具体的には、同期視聴セッション管理モジュール125は、セッション管理テーブル600を保持している。これによって、セッションに参加しているユーザとセッションで視聴されている動画(のID)を対応付けて保持する。具体例として、図8は、セッション管理テーブル600のデータ構造例を示す説明図である。セッション管理テーブル600は、セッションID欄610、参加ユーザIDのリスト欄620、動画ID欄630、セッション開始時刻欄640、セッションビットレート欄650を有している。セッションID欄610は、現在視聴されている動画のセッションIDを記憶している。参加ユーザIDのリスト欄620は、そのセッションに参加している複数人分のユーザIDを記憶している。動画ID欄630は、そのセッションで同期視聴されている動画の動画IDを記憶している。セッション開始時刻欄640は、そのセッションの開始時刻(年、月、日、時、分、秒を含んでいてもよく、さらに秒以下の時刻を含んでいてもよい)を記憶している。セッションビットレート欄650は、それぞれのユーザが利用可能な帯域(帯域幅、帯域帯、ビットレート等)の情報を記憶している。これらの算出は、ステップS310からステップS332までの処理で行う(算出されるまでは、これらの情報は空白である)。
In step S308, the synchronous viewing session management module 125 determines whether or not the session ID is an existing session ID. If it exists, the process proceeds to step S310. Otherwise, the process proceeds to step S312.
More specifically, the synchronous viewing session management module 125 holds a session management table 600. Thereby, the user participating in the session and the video (ID) viewed in the session are associated with each other and held. As a specific example, FIG. 8 is an explanatory diagram showing a data structure example of the session management table 600. The session management table 600 includes a session ID column 610, a participating user ID list column 620, a moving image ID column 630, a session start time column 640, and a session bit rate column 650. The session ID column 610 stores the session ID of the moving image currently being viewed. The participating user ID list field 620 stores user IDs for a plurality of people participating in the session. The moving image ID column 630 stores a moving image ID of a moving image that is synchronously viewed in the session. The session start time column 640 stores the start time of the session (may include year, month, day, hour, minute, second, and may include time less than a second). The session bit rate column 650 stores information on bandwidth (bandwidth, bandwidth, bit rate, etc.) that can be used by each user. These calculations are performed by the processing from step S310 to step S332 (the information is blank until calculated).

ステップS310では、同期視聴セッション管理モジュール125が、該当するセッション管理テーブル600にユーザIDを追加する。つまり、既存のセッションに参加する場合であり、セッション管理テーブル600の参加ユーザIDのリスト欄620にユーザIDを追加する。
ステップS312では、同期視聴セッション管理モジュール125が、セッション管理テーブル600を生成し、セッション開始時刻をセッション管理テーブル600のセッション開始時刻欄640に記録する。つまり、新しいセッションを作る場合であり、セッション管理テーブル600のインスタンスを新たに作り、セッション管理テーブル600のセッション開始時刻欄640にそのときの時刻であるセッション開始時刻を記録する。
In step S310, the synchronous viewing session management module 125 adds the user ID to the corresponding session management table 600. In other words, this is a case of participating in an existing session, and the user ID is added to the participating user ID list field 620 of the session management table 600.
In step S312, the synchronous viewing session management module 125 generates a session management table 600 and records the session start time in the session start time column 640 of the session management table 600. That is, a new session is created, a new instance of the session management table 600 is created, and the session start time that is the current time is recorded in the session start time column 640 of the session management table 600.

ステップS314では、同期視聴コマンド送受信モジュール160が、セッション参加成功か否かを判断し、成功の場合はステップS316へ進み、それ以外の場合はステップS356へ進む。なお、同期視聴セッション管理モジュール125からセッション参加成功か否かの通知(セッション管理テーブル600のインスタンスが作成されたか、すでにあるセッション管理テーブル600内にユーザIDを記憶させることができた場合は、成功であり、それ以外の場合は成功ではない。)を、同期視聴コマンド送受信モジュール160が受け、判断を行う。
ステップS356では、同期視聴コマンド送受信モジュール160が、セッションに参加できない旨をユーザに提示する。その後、終了する(ステップS399)。
In step S314, the synchronous viewing command transmission / reception module 160 determines whether or not the session participation is successful. If successful, the process proceeds to step S316, otherwise proceeds to step S356. It should be noted that the notification of whether or not the session participation is successful from the synchronous viewing session management module 125 (if the instance of the session management table 600 has been created or if the user ID can be stored in the existing session management table 600, it is successful. Otherwise, it is not a success.) The synchronous viewing command transmission / reception module 160 receives and makes a determination.
In step S356, the synchronous viewing command transmission / reception module 160 presents to the user that it cannot participate in the session. Thereafter, the process ends (step S399).

ステップS316では、同期視聴コマンド送受信モジュール160が、ストリーミング再生モジュール170に対して、セッションIDを通知する。
ステップS318では、ストリーミング再生モジュール170が、使用帯域幅を指定する。なお、ステップS318の処理は行わない場合もある。例えば、オプションとして使用する帯域幅をプルダウンメニュー等で128k、256k、512k、1Mbpsなどを、操作者の操作によって選択し得るようにしてもよい。
ステップS320では、ストリーミング再生モジュール170が、動画ストリーミングモジュール130に対して、セッションID、使用帯域幅を通知する。もちろんのことながら、ステップS318で使用帯域幅が指定されていない場合は、使用帯域幅は通知されないことになる。
In step S316, the synchronous viewing command transmission / reception module 160 notifies the streaming playback module 170 of the session ID.
In step S318, the streaming playback module 170 specifies a use bandwidth. Note that the process of step S318 may not be performed. For example, 128k, 256k, 512k, 1 Mbps, or the like may be selected by an operator's operation as an optional bandwidth.
In step S320, the streaming playback module 170 notifies the video streaming module 130 of the session ID and the used bandwidth. Of course, if the used bandwidth is not designated in step S318, the used bandwidth is not notified.

ステップS322では、帯域幅測定モジュール115が、使用帯域幅は指定されているか否かを判断し、指定されている場合はステップS330へ進み、それ以外の場合はステップS324へ進む。
ステップS324では、帯域幅測定モジュール115が、ユーザプロファイルに使用帯域幅は設定されているか否かを判断し、設定されている場合はステップS326へ進み、それ以外の場合はステップS328へ進む。帯域幅測定モジュール115は、ユーザプロファイル情報を保持し、そこに帯域が記憶されているようにしてもよい。図7は、ユーザプロファイルテーブル500のデータ構造例を示す説明図である。ユーザプロファイルテーブル500は、ユーザID欄510、ビットレート欄520を有している。ユーザID欄510は、ユーザを本実施の形態において一意に識別し得る情報であるユーザIDを記憶している。ビットレート欄520は、そのユーザが利用できる帯域を記憶している。また、ユーザID欄510は、ユーザIDではなく、クライアント装置150を本実施の形態において一意に識別し得る情報であるクライアント装置IDであってもよい。その場合、ビットレート欄520は、そのクライアント装置との通信で利用できる帯域を記憶している。
ステップS326では、帯域幅測定モジュール115が、ユーザプロファイルからユーザIDに対応する使用帯域幅を取り出す。
In step S322, the bandwidth measurement module 115 determines whether or not the use bandwidth is specified. If so, the process proceeds to step S330; otherwise, the process proceeds to step S324.
In step S324, the bandwidth measurement module 115 determines whether or not the use bandwidth is set in the user profile. If it is set, the process proceeds to step S326. Otherwise, the process proceeds to step S328. The bandwidth measurement module 115 may hold user profile information and store the bandwidth therein. FIG. 7 is an explanatory diagram showing an example of the data structure of the user profile table 500. The user profile table 500 has a user ID column 510 and a bit rate column 520. The user ID column 510 stores a user ID that is information that can uniquely identify a user in the present embodiment. The bit rate column 520 stores a bandwidth that can be used by the user. The user ID column 510 may be a client device ID that is information that can uniquely identify the client device 150 in the present embodiment, instead of a user ID. In this case, the bit rate column 520 stores a bandwidth that can be used for communication with the client device.
In step S326, the bandwidth measurement module 115 extracts the used bandwidth corresponding to the user ID from the user profile.

ステップS328では、帯域幅測定モジュール115が、帯域幅を測定する。ユーザからの明示的な指定がない場合であって、ユーザプロファイルにも使用帯域幅が記憶されていない場合は、帯域幅測定モジュール115が帯域幅の測定を行う。その方法は、TV会議システムやストリーミングシステムで一般的に利用されている方法を使うようにすればよい。例えば、サーバ・クライアント間で予め取り決めた時間間隔で、あるサイズのパケットをサーバが送信し、サーバ又はクライアントが実際に受信した間隔から帯域幅を推測する等がある。
ステップS330では、帯域幅測定モジュール115が、同期視聴セッション管理モジュール125にユーザの使用帯域幅を通知する。
ステップS332では、同期視聴セッション管理モジュール125が、そのユーザの使用帯域幅を記録する。
ステップS334では、帯域幅測定モジュール115が、ユーザの使用帯域幅から、そのセッションにおける帯域幅を設定する。例えば、前述のように、複数のユーザの使用帯域幅のうち帯域が最低のものを選択することによって設定してもよいし、その使用帯域幅のうち帯域が最低のものから予め定められた値を減算すること、帯域が最低のものに予め定められた値(1未満の値)を乗算すること等がある。
In step S328, the bandwidth measurement module 115 measures the bandwidth. If there is no explicit designation from the user and the use bandwidth is not stored in the user profile, the bandwidth measurement module 115 measures the bandwidth. The method may be a method generally used in a TV conference system or a streaming system. For example, the server transmits a packet of a certain size at a predetermined time interval between the server and the client, and estimates the bandwidth from the interval actually received by the server or the client.
In step S330, the bandwidth measurement module 115 notifies the user viewing bandwidth to the synchronous viewing session management module 125.
In step S332, the synchronous viewing session management module 125 records the usage bandwidth of the user.
In step S334, the bandwidth measurement module 115 sets the bandwidth in the session from the user's used bandwidth. For example, as described above, it may be set by selecting the lowest bandwidth among the usage bandwidths of a plurality of users, or a predetermined value from the lowest bandwidth among the usage bandwidths. , Subtracting the lowest band, and multiplying the lowest band by a predetermined value (value less than 1).

ステップS336では、動画ストリーミングモジュール130が、動画品質調整モジュール120に対して、セッションIDを通知する。
ステップS338では、動画品質調整モジュール120が、同期視聴セッション管理モジュール125から動画IDと帯域幅を取得する。
ステップS340では、動画品質調整モジュール120が、動画ファイルリポジトリ110から動画IDに対応する動画を取得する。
In step S336, the video streaming module 130 notifies the video quality adjustment module 120 of the session ID.
In step S338, the moving image quality adjustment module 120 acquires the moving image ID and the bandwidth from the synchronous viewing session management module 125.
In step S340, the moving image quality adjustment module 120 acquires a moving image corresponding to the moving image ID from the moving image file repository 110.

ステップS342では、動画品質調整モジュール120が、その動画を帯域幅に合わせた再生用ファイル(ストリーミング用動画)に変換し、動画ストリーミングモジュール130に渡す。ストリーミング用のフォーマット等の必要な変換等を行う。フォーマットの変換としては、例えば、データ量を削減するために低い画質にする、解像度を劣化させる、フレームレートを劣化させる処理がある。
また、動画品質調整モジュール120は、再生動画ファイル管理情報テーブル700を記憶する。図9は、再生動画ファイル管理情報テーブル700のデータ構造例を示す説明図である。再生動画ファイル管理情報テーブル700は、セッションID欄710、オリジナル動画ファイル欄720、フレーム欄730、再生動画ファイル欄740を有している。セッションID欄710は、セッションIDを記憶している。オリジナル動画ファイル欄720は、そのセッションにおいて再生する対象の動画(オリジナル版)のファイル名を記憶している。フレーム欄730は、動画内のフレーム番号を記憶している。再生動画ファイル欄740は、ストリーミング用の動画のファイル名を記憶している。フレーム欄730と再生動画ファイル欄740によって、オリジナル版の動画内のフレーム欄730のフレームの動画に対して変換を施して、再生動画ファイル欄740のストリーミング用動画が生成されたことが示されている。つまり、セッションID欄710のセッションIDにおいて、フレーム欄730の何フレーム目から何フレーム目までは、再生動画ファイル欄740内の再生動画ファイルをストリーミングするということを記録していることになる。この図9に示す例は、初期状態を示している。この後、ユーザからの要求に沿って、フレーム毎の動画が変換されることになる。これについては、図14の例を用いて後述する。
In step S <b> 342, the moving image quality adjustment module 120 converts the moving image into a reproduction file (streaming moving image) that matches the bandwidth, and passes it to the moving image streaming module 130. Perform necessary conversions such as streaming formats. Format conversion includes, for example, processing for reducing the image quality, reducing the resolution, and degrading the frame rate in order to reduce the amount of data.
The moving image quality adjustment module 120 also stores a reproduction moving image file management information table 700. FIG. 9 is an explanatory diagram showing an example of the data structure of the playback moving image file management information table 700. The playback video file management information table 700 has a session ID column 710, an original video file column 720, a frame column 730, and a playback video file column 740. The session ID column 710 stores a session ID. The original moving image file column 720 stores the file name of the moving image (original version) to be reproduced in the session. The frame column 730 stores the frame number in the moving image. The reproduction moving image file column 740 stores the file name of the moving image for streaming. The frame column 730 and the playback movie file column 740 indicate that the movie of the frame in the frame column 730 in the original movie is converted and the streaming movie in the playback movie file column 740 is generated. Yes. In other words, in the session ID of the session ID column 710, it is recorded that the playback video file in the playback video file column 740 is streamed from what frame to what frame of the frame column 730. The example shown in FIG. 9 shows an initial state. Thereafter, the moving image for each frame is converted in accordance with a request from the user. This will be described later using the example of FIG.

ステップS344では、動画ストリーミングモジュール130が、ストリーミング再生モジュール170に対して、再生用ファイルを送信する。
ステップS346では、ストリーミング再生モジュール170が、動画ストリーミングモジュール130から送信されてきた再生用ファイルを受信する。
ステップS348では、ストリーミング再生モジュール170が、再生用ファイルを再生する。
ステップS350では、終了操作があったか否かを判断し、あった場合はステップS352へ進み、それ以外の場合はステップS344からの処理に戻る。例えば、ユーザの操作として、ストリーミング再生モジュール170が表示している動画ウィンドウを閉じるなどの操作があった場合等が該当する。
ステップS352では、同期視聴コマンド送受信モジュール160が、同期視聴セッション管理モジュール125に対して、セッションからの脱退を通知する。
ステップS354では、同期視聴セッション管理モジュール125が、脱退の通知(ユーザIDを含む)を受信し、セッション管理テーブル600から脱退した操作者のユーザIDを削除する。
In step S344, the moving picture streaming module 130 transmits a reproduction file to the streaming reproduction module 170.
In step S346, the streaming playback module 170 receives the playback file transmitted from the video streaming module 130.
In step S348, the streaming playback module 170 plays back the playback file.
In step S350, it is determined whether or not an end operation has been performed. If there is, the process proceeds to step S352, and otherwise, the process returns to step S344. For example, the user operation includes an operation such as closing a moving image window displayed by the streaming playback module 170.
In step S352, the synchronous viewing command transmission / reception module 160 notifies the synchronous viewing session management module 125 of withdrawal from the session.
In step S354, the synchronous viewing session management module 125 receives the withdrawal notification (including the user ID), and deletes the user ID of the operator who has left the session management table 600.

図10は、本実施の形態による処理例を示すフローチャートである。このフローチャートは、ストリーミングが開始され、ストリーミング用動画を再生している間に、新たなユーザがそのセッションに参加する場合の処理例を示すものである。具体的には、図3〜5の例に示すフローチャート内のステップS344〜S348の処理において、新しいユーザが加わった場合は、図10の例に示すフローチャートによる処理を行う。
ステップS802では、動画ストリーミングモジュール130が、セッションIDに該当する再生ファイルを動画品質調整モジュール120から受け取り、ストリーミングを開始する。具体的には、再生動画ファイル管理情報テーブル700にしたがった再生ファイルの送信を行う。
ステップS804では、動画ストリーミングモジュール130が、フレームが最後まで再生されるか、新しいユーザからの接続が来るか、セッションが終了する(セッションの終了とはセッションに参加しているユーザが一人もいなくなった場合を意味する)までストリーミングを続ける。
ステップS806では、動画ストリーミングモジュール130が、対処とするフレームの送信が終わったか否かを判断し、終わった場合はステップS808へ進み、それ以外の場合はステップS810へ進む。
FIG. 10 is a flowchart showing an example of processing according to this embodiment. This flowchart shows a processing example when a new user participates in the session while streaming is started and a streaming moving image is being reproduced. Specifically, when a new user is added in the processes of steps S344 to S348 in the flowcharts shown in the examples of FIGS. 3 to 5, the process according to the flowchart shown in the example of FIG. 10 is performed.
In step S802, the moving image streaming module 130 receives the reproduction file corresponding to the session ID from the moving image quality adjustment module 120, and starts streaming. Specifically, the playback file is transmitted according to the playback video file management information table 700.
In step S804, the video streaming module 130 plays the frame to the end, or a connection is received from a new user, or the session ends (the end of the session means that no user is participating in the session. Continue streaming until it means).
In step S806, the moving image streaming module 130 determines whether or not the transmission of the frame to be dealt with has ended. If completed, the process proceeds to step S808. Otherwise, the process proceeds to step S810.

ステップS808では、動画ストリーミングモジュール130が、動画品質調整モジュール120から該当するセッションIDの次のフレームから始まる再生動画ファイルを検索し、ストリーミングを開始し、ステップS804からの処理に戻る。具体的には、再生動画ファイル管理情報テーブル700にしたがった次の再生ファイルの送信を行う。
ステップS810では、同期視聴セッション管理モジュール125が、新しいユーザからの接続が来たか否かを判断し、来た場合はステップS812へ進み、それ以外の場合はステップS814へ進む。
ステップS812では、同期視聴セッション管理モジュール125が、新しいエントリを作成し、使用帯域幅を変更する必要があるか否かを判断し、ある場合はステップS816へ進み、それ以外の場合はステップS814へ進む。具体的には、セッション管理テーブル600のセッションビットレート欄650内の帯域で、その新たなユーザのクライアント装置150との通信が可能であるか否かを判断する。つまり、その新たなユーザのクライアント装置150との通信の帯域がセッション管理テーブル600のセッションビットレート欄650内の帯域以上であれば、そのままで通信可能であると判断することになる。通信可能であると判断した場合には、セッション管理テーブル600の参加ユーザIDのリスト欄620に、新たなユーザIDを追加する。
In step S808, the moving image streaming module 130 searches the reproduction moving image file starting from the next frame of the corresponding session ID from the moving image quality adjustment module 120, starts streaming, and returns to the processing from step S804. Specifically, the next reproduction file is transmitted according to the reproduction moving image file management information table 700.
In step S810, the synchronous viewing session management module 125 determines whether or not a connection from a new user has come. If it has come, the process proceeds to step S812. Otherwise, the process proceeds to step S814.
In step S812, the synchronous viewing session management module 125 determines whether or not it is necessary to create a new entry and change the used bandwidth. If there is, the process proceeds to step S816; otherwise, the process proceeds to step S814. move on. Specifically, it is determined whether or not communication with the client device 150 of the new user is possible within the bandwidth in the session bit rate column 650 of the session management table 600. In other words, if the bandwidth of communication with the client device 150 of the new user is equal to or greater than the bandwidth in the session bit rate column 650 of the session management table 600, it is determined that communication is possible as it is. If it is determined that communication is possible, a new user ID is added to the participating user ID list field 620 of the session management table 600.

ステップS814では、動画ストリーミングモジュール130が、セッションが終わったか否かを判断し、終わった場合は処理を終了し(ステップS899)、それ以外の場合はステップS804からの処理に戻る。
ステップS816では、動画ストリーミングモジュール130が、現在のストリーミングを中断し、使用帯域幅を変更し、新しいエントリに該当するファイルのストリーミングを開始し、ステップS804からの処理に戻る。ここでの使用帯域幅の変更は、前述のステップS334と同等の処理を行えばよい。新しいエントリを作成するとは、セッション管理テーブル600に新たな行を追加し、セッション管理テーブル600の参加ユーザIDのリスト欄620には、新たなユーザIDを追加し、セッション管理テーブル600のセッションビットレート欄650には、変更された使用帯域幅を記憶させることになる。
In step S814, the moving picture streaming module 130 determines whether or not the session has ended. If it has ended, the process ends (step S899). Otherwise, the process returns to step S804.
In step S816, the moving picture streaming module 130 interrupts the current streaming, changes the used bandwidth, starts streaming the file corresponding to the new entry, and returns to the processing from step S804. The change of the used bandwidth here may be performed in the same manner as in step S334 described above. To create a new entry, a new row is added to the session management table 600, a new user ID is added to the participating user ID list field 620 of the session management table 600, and the session bit rate of the session management table 600 is set. The changed use bandwidth is stored in the column 650.

クライアント装置150の表示装置への表示例を示す。図11は、動画表示画面900の例を示す説明図である。動画表示画面900は、動画プレイヤウィンドウ910、フレームリスト940、品質調整領域930が表示されている。ストリーミング再生モジュール170が、動画プレイヤウィンドウ910、フレームリスト940を表示する。品質調整操作受付モジュール165が、品質調整領域930を表示する。動画プレイヤウィンドウ910には、ストリーミング用動画を再生する。また、ユーザの操作によって、シークバー920上のシークポインタ925が移動させられると、その位置に合わせた動画を再生する。この他に、再生、一時停止、音量調整等の操作のためのボタンを表示してもよい。また、フレームリスト940には、フレーム毎の代表的な画像(例えば、そのフレームにおける最初の画像)を表示する。この各フレームの位置は、品質調整領域930内のフレームレート調整領域932、解像度調整領域934、画質調整領域936による調整の目安としての位置になる。
品質調整領域930は、フレームレート調整領域932、解像度調整領域934、画質調整領域936を有している。これは、ユーザの操作によって変更させられるものである。
The example of a display on the display apparatus of the client apparatus 150 is shown. FIG. 11 is an explanatory diagram illustrating an example of the moving image display screen 900. The moving image display screen 900 displays a moving image player window 910, a frame list 940, and a quality adjustment area 930. The streaming playback module 170 displays a video player window 910 and a frame list 940. The quality adjustment operation receiving module 165 displays the quality adjustment area 930. The moving image player window 910 reproduces the moving image for streaming. Further, when the seek pointer 925 on the seek bar 920 is moved by the user's operation, a moving image in accordance with the position is reproduced. In addition, buttons for operations such as playback, pause, and volume adjustment may be displayed. The frame list 940 displays a representative image for each frame (for example, the first image in the frame). The position of each frame is a position as a standard for adjustment by the frame rate adjustment area 932, the resolution adjustment area 934, and the image quality adjustment area 936 in the quality adjustment area 930.
The quality adjustment area 930 includes a frame rate adjustment area 932, a resolution adjustment area 934, and an image quality adjustment area 936. This can be changed by a user operation.

例えば、ユーザはフレーム1から3までは高画質で見たい(つまり、フレームレートを劣化させる)場合、マウスカーソル1000を用いてフレームレート調整領域932を操作し、フレーム1から3においてはフレームレートを劣化させるように調整して、図12の例に示すフレームレート調整領域932の状態から、図13の例に示すフレームレート調整領域932の状態にすることになる。
品質調整操作受付モジュール165は、ユーザの操作を受け付けると、何フレーム目から何フレーム目までどの品質を劣化させるか等の要求を、サーバ装置100の動画品質調整モジュール120に通知する。
動画品質調整モジュール120は、その通知の要求に応じて、オリジナル版の動画ファイルから該当フレームを切り出し、その要求にしたがった変換を施して、新しい再生用動画ファイルを作成する。つまり、その作成時にはユーザが指定した品質を劣化させるパラメータを使うことになる。もちろんのことながら、動画ストリーミングモジュール130が未だ送信していないフレームの動画に対して、変換を施すことになる。図12の例から図13の例への調整は、未だ送信が開始されていない場合、又は、すでに動画の送信は終了したが、2回目以降の送信が行われる場合であって、未だその2回目以降の送信が行われていない場合等が該当する。
そして、その該当するフレームの再生時に、変換を施した再生用動画ファイルをストリーミングするようにする。もちろんのことながら、動画ストリーミングモジュール130は、現在送信しているフレームを把握しているので、変換を施した再生用動画ファイルのフレームになったら、その再生用動画ファイルを送信すればよい。また、再生動画ファイル管理情報テーブル700を更新する。例えば、図9に例示の再生動画ファイル管理情報テーブル700は、図14に例示の再生動画ファイル管理情報テーブル700となる。具体的には、この再生動画ファイル管理情報テーブル700に沿って、動画ストリーミングモジュール130が送信することになる。
For example, when the user wants to view frames 1 to 3 with high image quality (that is, to deteriorate the frame rate), the user operates the frame rate adjustment area 932 using the mouse cursor 1000 and sets the frame rate for frames 1 to 3. Adjustment is performed so that the frame rate adjustment area 932 shown in the example of FIG. 12 is changed to the state of the frame rate adjustment area 932 shown in the example of FIG.
When receiving a user operation, the quality adjustment operation reception module 165 notifies the moving image quality adjustment module 120 of the server apparatus 100 of a request such as what quality is to be degraded from what frame to what frame.
In response to the notification request, the moving image quality adjustment module 120 cuts out the corresponding frame from the original moving image file, performs conversion according to the request, and creates a new reproduction moving image file. In other words, parameters that degrade the quality specified by the user are used at the time of creation. Of course, the moving image of the frame that has not yet been transmitted by the moving image streaming module 130 is converted. The adjustment from the example of FIG. 12 to the example of FIG. 13 is a case where transmission has not yet started, or when transmission of a moving image has already ended, but transmission from the second time onward is performed. This corresponds to the case where transmission after the first time is not performed.
Then, when the corresponding frame is reproduced, the converted moving image file for reproduction is streamed. Of course, since the moving picture streaming module 130 knows the frame currently being transmitted, if the converted moving picture file frame has been converted, the reproducing moving picture file may be transmitted. Also, the reproduction moving image file management information table 700 is updated. For example, the reproduced moving image file management information table 700 illustrated in FIG. 9 becomes the reproduced moving image file management information table 700 illustrated in FIG. Specifically, the moving image streaming module 130 transmits along the reproduction moving image file management information table 700.

図11〜14の例を用いて説明した処理は、図10の例に示すフローチャートに従う処理を開始する前に行うこと、つまり、図5の例に示すフローチャートのステップS342までに終了していればよい。又は、図10の例に示すフローチャートにおいて、例えば、ステップS810でNoの判断をした後であってもステップS814の処理を開始する前に行うようにしてもよい。   The processing described using the examples of FIGS. 11 to 14 is performed before the processing according to the flowchart shown in the example of FIG. 10 is started, that is, if the processing is completed by step S342 of the flowchart shown in the example of FIG. Good. Alternatively, in the flowchart shown in the example of FIG. 10, for example, it may be performed before the process of step S <b> 814 is started even after No is determined in step S <b> 810.

動画品質調整モジュール120が記憶する再生動画ファイル管理情報テーブル700は、このような品質調整操作受付モジュール165からの要求があると、セッション中に更新されていくことになる。
そして、セッション終了後も、この再生動画ファイル管理情報テーブル700のデータは保持され、別の機会(次に同じ動画に対しての同期視聴セッションが発生した場合)にクライアント装置150がサーバ装置100に接続したとき、セッションIDを受け付けると、保持されている再生動画ファイル管理情報テーブル700に基づいてストリーミングがされる。前述の例に即して説明すると、品質調整操作受付モジュール165による調整の操作が行われていなくても、フレーム1〜3はMovie−1−2が再生され、フレーム4〜6はMovie−1−1が再生されることになる。
The reproduction moving image file management information table 700 stored in the moving image quality adjustment module 120 is updated during the session when such a request from the quality adjustment operation receiving module 165 is received.
Then, even after the session ends, the data of the playback video file management information table 700 is retained, and the client device 150 sends the server device 100 to the server device 100 at another opportunity (when the next synchronous viewing session for the same video occurs). When connected, when a session ID is accepted, streaming is performed based on the stored reproduction video file management information table 700. Explaining with the above example, even if the adjustment operation by the quality adjustment operation receiving module 165 is not performed, the Movie 1-3 is reproduced in the frames 1 to 3 and the Movie 1 to 6 is reproduced in the frames 4 to 6. -1 is reproduced.

ユーザが調整できる品質としては以下の通りである。
(1)フレームレート フレームレートを下げることで、解像度と画質を保つこととなる。
(2)解像度(画素数) 解像度を下げることで、フレームレートと画質を保つこととなる。
(3)画質 画質を下げることで、フレームレートと解像度を保つこととなる。
(4)これら2つ以上の組み合わせ
The quality that can be adjusted by the user is as follows.
(1) Frame rate Reducing the frame rate maintains the resolution and image quality.
(2) Resolution (number of pixels) Lowering the resolution maintains the frame rate and image quality.
(3) Image quality By reducing the image quality, the frame rate and resolution are maintained.
(4) A combination of two or more of these

図15は、第2の実施の形態の構成例についての概念的なモジュール構成図である。
第2の実施の形態である情報処理システムは、複数のクライアント装置150で同期させて動画を再生するものであって、図15の例に示すように、サーバ装置100とクライアント装置150を有している。なお、第1の実施の形態と同種の部位には同一符号を付し重複した説明を省略する。
FIG. 15 is a conceptual module configuration diagram of a configuration example according to the second embodiment.
The information processing system according to the second embodiment reproduces a moving image in synchronization with a plurality of client devices 150, and includes a server device 100 and a client device 150 as shown in the example of FIG. ing. In addition, the same code | symbol is attached | subjected to the site | part same as 1st Embodiment, and the overlapping description is abbreviate | omitted.

サーバ装置100は、動画ファイルリポジトリ110、帯域幅測定モジュール115、動画品質調整モジュール120、同期視聴セッション管理モジュール125、動画ストリーミングモジュール130、動画ファイル転送モジュール1314を有している。   The server apparatus 100 includes a moving image file repository 110, a bandwidth measurement module 115, a moving image quality adjustment module 120, a synchronous viewing session management module 125, a moving image streaming module 130, and a moving image file transfer module 1314.

動画ファイルリポジトリ110は、動画品質調整モジュール120、動画ファイル転送モジュール1314と接続されている。動画ファイルリポジトリ110は、動画(第2の動画)を記憶する。さらに、その動画から生成されたストリーミング用動画(第1の動画)を記憶していてもよい。なお、ストリーミング用動画はオリジナル版の動画(第2の動画)よりも低画質のものである。例えば、解像度を下げる、フレームレートの調整、解像度の調整、圧縮率の調整等を行ったものである。つまり、前述の第1の実施の形態における、帯域幅測定モジュール115によって決定された帯域と動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求に基づいて、動画のエンコードパラメータを変換することである。
例えば、ここでいう高画質や低画質には、次のようなものが含まれる。
(1)フレームレートを調整する場合は、予め定められた基準と比べてフレームレートを高いものを高画質といい、予め定められた基準に対してフレームレートを落としたものを低画質という。
(2)また、解像度を調整する場合は、予め定められた基準と比べて解像度が高いものを高画質といい、予め定められた基準に対して解像度を落としたものを低画質という。
(3)また、非可逆圧縮方法を用いてデータ圧縮率を調整する場合は、予め定められた基準と比べて圧縮率が低いものを高画質といい、予め定められた基準に対して圧縮率を高めたものを低画質という。
The moving image file repository 110 is connected to the moving image quality adjustment module 120 and the moving image file transfer module 1314. The moving image file repository 110 stores moving images (second moving images). Further, a streaming moving image (first moving image) generated from the moving image may be stored. Note that the streaming video has a lower quality than the original video (second video). For example, the resolution is lowered, the frame rate is adjusted, the resolution is adjusted, and the compression rate is adjusted. That is, the encoding parameter of the moving image is determined based on the request for any one of the image quality, the resolution, the frame rate, or the combination of the bandwidth and the moving image determined by the bandwidth measurement module 115 in the first embodiment. Is to convert.
For example, the high image quality and low image quality here include the following.
(1) When adjusting the frame rate, a high frame rate compared to a predetermined standard is referred to as high image quality, and a frame rate that is lower than the predetermined standard is referred to as low image quality.
(2) When the resolution is adjusted, a higher resolution than a predetermined standard is referred to as a high image quality, and a lower resolution than a predetermined standard is referred to as a low image quality.
(3) When the data compression rate is adjusted using the lossy compression method, a low compression rate compared to a predetermined standard is referred to as high image quality, and the compression rate is compared to a predetermined standard. Higher image quality is called low image quality.

動画ファイル転送モジュール1314は、動画ファイルリポジトリ110、動画ファイル受信モジュール1364と接続されている。動画ファイル転送モジュール1314は、動画ファイルリポジトリ110に記憶されているオリジナル版の動画を、複数のクライアント装置150の動画ファイル受信モジュール1364に対して送信する。ここで、送信するオリジナル版の動画とは、動画ストリーミングモジュール130が送信しているストリーミング用動画のオリジナル版の動画である。同じクライアント装置150に対して、動画ストリーミングモジュール130によるストリーミング用動画の送信とともにオリジナル版の動画を送信することになる。つまり、サーバ装置100からは、クライアント装置150に対して、ストリーミング用動画を送信して、残りの通信帯域の一部を利用して動画(オリジナル版)を送信することになる期間がある。例えば、ストリーミング用動画は、複数回再生したり(つまり、複数回の送受信が行われることを意味する)、再生途中で操作者の操作によって再生中止、停止、スロー再生等が行われることがある。したがって、ストリーミング用動画を視聴している間に、高画質の動画を受信し終えることもある。また、前述の帯域の一部をオリジナル版の動画を送信するのに用いてもよい。その場合は、ストリーミング用動画の帯域が、その分抑えられることになる。
動画ファイル転送モジュール1314は、動画ストリーミングモジュール130が送信するストリーミング用動画よりも高画質の動画(オリジナル版)を送信することになる。
The moving image file transfer module 1314 is connected to the moving image file repository 110 and the moving image file receiving module 1364. The moving image file transfer module 1314 transmits the original version of the moving image stored in the moving image file repository 110 to the moving image file receiving modules 1364 of the plurality of client devices 150. Here, the original moving image to be transmitted is the original moving image of the streaming moving image transmitted by the moving image streaming module 130. The original version of the moving image is transmitted to the same client device 150 together with the transmission of the moving image for streaming by the moving image streaming module 130. That is, there is a period in which the server apparatus 100 transmits a streaming moving image to the client device 150 and transmits a moving image (original version) using a part of the remaining communication band. For example, a streaming video may be played a plurality of times (that is, a plurality of times of transmission / reception is performed), or playback may be stopped, stopped, or slow played by an operator's operation during playback. . Therefore, the high-quality moving image may be received while the streaming moving image is being viewed. Further, a part of the above-described band may be used for transmitting the original version of the moving image. In that case, the bandwidth of the streaming video is reduced accordingly.
The moving image file transfer module 1314 transmits a moving image (original version) with higher image quality than the streaming moving image transmitted by the moving image streaming module 130.

クライアント装置150は、同期視聴コマンド送受信モジュール160、品質調整操作受付モジュール165、ストリーミング再生モジュール170、動画ファイル受信モジュール1364、動画ファイル蓄積モジュール1366を有している。   The client device 150 includes a synchronous viewing command transmission / reception module 160, a quality adjustment operation reception module 165, a streaming playback module 170, a moving image file receiving module 1364, and a moving image file storage module 1366.

動画ファイル受信モジュール1364は、ストリーミング再生モジュール170、動画ファイル転送モジュール1314、動画ファイル蓄積モジュール1366と接続されている。動画ファイル受信モジュール1364は、サーバ装置100の動画ファイル転送モジュール1314によって送信されたオリジナル版の動画(現在再生しているストリーミング用動画のオリジナル版の動画、第2の動画)を受信する。動画ファイル受信モジュール1364が受信する動画は、ストリーミング再生モジュール170が受信するストリーミング用動画のオリジナル版である。したがって、前述の通り、動画ファイル受信モジュール1364が受信する動画は、ストリーミング再生モジュール170が受信する動画よりも高画質である。そして、動画ファイル受信モジュール1364は、受信が完了したら、ストリーミング再生モジュール170に受信の完了を通知する。
動画ファイル蓄積モジュール1366は、動画ファイル受信モジュール1364と接続されている。動画ファイル蓄積モジュール1366は、動画ファイル受信モジュール1364によって受信された動画(オリジナル版)を記憶する。
The moving image file receiving module 1364 is connected to the streaming reproduction module 170, the moving image file transfer module 1314, and the moving image file storage module 1366. The moving image file receiving module 1364 receives the original version of the moving image (the original moving image of the streaming moving image currently being played, the second moving image) transmitted by the moving image file transfer module 1314 of the server apparatus 100. The moving image received by the moving image file receiving module 1364 is the original version of the streaming moving image received by the streaming playback module 170. Therefore, as described above, the moving image received by the moving image file receiving module 1364 has higher image quality than the moving image received by the streaming playback module 170. Then, when the reception is completed, the moving image file reception module 1364 notifies the streaming reproduction module 170 of the completion of reception.
The moving image file storage module 1366 is connected to the moving image file reception module 1364. The moving image file storage module 1366 stores the moving image (original version) received by the moving image file receiving module 1364.

ストリーミング再生モジュール170は、帯域幅測定モジュール115、動画ストリーミングモジュール130、動画ファイル受信モジュール1364と接続されている。ストリーミング再生モジュール170は、第1の実施の形態におけるストリーミング再生モジュール170による処理に加えて、ストリーミング再生モジュール170によって受信されたストリーミング用動画を再生している間に、動画ファイル受信モジュール1364による第2の動画の受信が終了したことを検知した場合は、そのストリーミング用動画の再生を中止し、動画ファイル蓄積モジュール1366によって記憶されているオリジナル動画を再生する。つまり、ストリーミング再生モジュール170は、ストリーミング用動画又は動画ファイル蓄積モジュール1366によって記憶されている動画のいずれかを再生する。動画ファイル蓄積モジュール1366によって記憶されている動画(オリジナル版)を再生する場合は、ストリーミング用動画の再生を中止した場面から(現在の再生フレームにシークして)、その動画(オリジナル版)を再生する。
また、ストリーミング再生モジュール170は、同期視聴コマンド送受信モジュール160の制御にしたがって、同期視聴コマンド送受信モジュール160によって受信された操作に基づいて、動画及び操作の再現を行うようにしてもよい。その動画を再現する場合にあって、動画ファイル蓄積モジュール1366によってその動画が記憶されているか否かを判断し、その動画が記憶されていると判断した場合は、その動画を再生する。
第2の実施の形態を実現する場合も、第1の実施の形態と同様に、図2の例に示すシステム構成例のようになる。
The streaming playback module 170 is connected to the bandwidth measurement module 115, the video streaming module 130, and the video file reception module 1364. In addition to the processing by the streaming playback module 170 in the first embodiment, the streaming playback module 170 performs the second playback by the video file reception module 1364 while playing back the streaming video received by the streaming playback module 170. When it is detected that the video has been received, the playback of the streaming video is stopped and the original video stored in the video file storage module 1366 is played back. That is, the streaming playback module 170 plays back either the streaming video or the video stored in the video file storage module 1366. When playing back the movie (original version) stored by the movie file storage module 1366, playback the movie (original version) from the scene where the streaming movie playback was stopped (seek to the current playback frame). To do.
Further, the streaming playback module 170 may reproduce the moving image and the operation based on the operation received by the synchronous viewing command transmission / reception module 160 according to the control of the synchronous viewing command transmission / reception module 160. In reproducing the moving image, it is determined whether or not the moving image is stored by the moving image file storage module 1366. If it is determined that the moving image is stored, the moving image is reproduced.
When the second embodiment is realized, the system configuration example shown in the example of FIG. 2 is obtained as in the first embodiment.

図16は、第2実施の形態による処理例を示すフローチャートである。この処理は、図5の例に示したステップS344以降であって、ステップS350の判断でNOの間に、行われる。
ステップS1402では、同期視聴セッション管理モジュール125が、動画ファイル転送モジュール1314に対して、動画IDを送信する。
ステップS1404では、動画ファイル転送モジュール1314が、クライアント装置150の動画ファイル受信モジュール1364から送信されてきた動画IDを受信して、その動画IDに対応する動画ファイルを動画ファイルリポジトリ110から取り出す。
ステップS1406では、動画ファイル転送モジュール1314が、クライアント装置150の動画ファイル受信モジュール1364に対して、動画ファイルを送信する。
FIG. 16 is a flowchart illustrating a processing example according to the second exemplary embodiment. This processing is performed after step S344 shown in the example of FIG. 5 and during NO in the determination of step S350.
In step S1402, the synchronous viewing session management module 125 transmits the moving image ID to the moving image file transfer module 1314.
In step S <b> 1404, the moving image file transfer module 1314 receives the moving image ID transmitted from the moving image file receiving module 1364 of the client device 150 and extracts the moving image file corresponding to the moving image ID from the moving image file repository 110.
In step S 1406, the moving image file transfer module 1314 transmits the moving image file to the moving image file reception module 1364 of the client device 150.

また、ステップS1406に対応して、クライアント装置150の動画ファイル受信モジュール1364が、その動画ファイルを動画ファイル蓄積モジュール1366に記憶させる。そして、動画ファイルの受信が完了したら、ストリーミング再生モジュール170に受信先のファイルパス名とともに通知する。動画IDと取得した動画ファイルのパス名の対応付けを動画ファイル管理テーブル1600に記憶(ファイルなどに保存)する。図18は、動画ファイル管理テーブル1600のデータ構造例を示す説明図である。動画ファイル管理テーブル1600は、動画ID欄1610、動画ファイル格納場所欄1620を有している。動画ID欄1610は、受信が完了した動画の動画IDを記憶している。動画ファイル格納場所欄1620は、その動画の格納場所(動画ファイルのパス名)を記憶している。
そして、ストリーミング再生モジュール170は、動画ファイル受信モジュール1364からの動画受信完了の通知を受け取ったら、通知されるファイルパスに存在する動画ファイルをオープンし、それまで再生していたストリーミング用動画の現在フレームまでシークし、再生を続行する。この処理については、図17の例に示すフローチャートを用いて詳述する。
Corresponding to step S1406, the moving image file receiving module 1364 of the client device 150 stores the moving image file in the moving image file storage module 1366. When the reception of the moving image file is completed, the streaming playback module 170 is notified together with the file path name of the reception destination. The association between the moving image ID and the path name of the acquired moving image file is stored in the moving image file management table 1600 (saved in a file or the like). FIG. 18 is an explanatory diagram showing an example of the data structure of the moving image file management table 1600. The moving image file management table 1600 has a moving image ID column 1610 and a moving image file storage location column 1620. The movie ID column 1610 stores the movie ID of a movie that has been received. The moving image file storage location column 1620 stores the moving image storage location (the moving image file path name).
When the streaming playback module 170 receives the notification of the completion of the video reception from the video file reception module 1364, the streaming playback module 170 opens the video file that exists in the notified file path, and the current frame of the streaming video that has been played back until then. Seek to continue playback. This process will be described in detail using the flowchart shown in the example of FIG.

図17は、第2実施の形態(クライアント装置150)による処理例を示すフローチャートである。
ステップS1502では、ストリーミング再生モジュール170が、ストリーミング受信を続ける。
ステップS1504では、動画ファイル受信モジュール1364が、動画ファイルの受信が完了したか否かを判断し、完了した場合はステップS1506へ進み、それ以外の場合はステップS1502からの処理を行う。
FIG. 17 is a flowchart illustrating a processing example according to the second exemplary embodiment (client device 150).
In step S1502, the streaming playback module 170 continues streaming reception.
In step S1504, the moving image file receiving module 1364 determines whether or not the receiving of the moving image file is completed. If completed, the process proceeds to step S1506. Otherwise, the process from step S1502 is performed.

ステップS1506では、ストリーミング再生モジュール170が、現在フレーム位置、再生状態(一時停止中か再生中か)、マウスポインタの位置を一時的に記憶する。
ステップS1508では、ストリーミング再生モジュール170が、受信先のファイルパスにある動画ファイルをオープンし、ストリーミング接続を閉じて、動画ウィンドウのオープンした動画ファイルに差し替える。
ステップS1510では、ストリーミング再生モジュール170が、フレーム位置を一時記憶したフレーム位置に合わせる。
In step S1506, the streaming playback module 170 temporarily stores the current frame position, the playback state (whether paused or playing), and the position of the mouse pointer.
In step S1508, the streaming playback module 170 opens the moving image file in the destination file path, closes the streaming connection, and replaces the moving image file with the opened moving image window.
In step S1510, the streaming playback module 170 matches the frame position with the temporarily stored frame position.

ステップS1512では、ストリーミング再生モジュール170が、マウスポインタの位置を一時記憶した位置に合わせる。
ステップS1514では、ストリーミング再生モジュール170が、一時記憶した再生状態を判断し、一時停止中の場合はステップS1516へ進み、再生中の場合はステップS1518へ進む。
ステップS1516では、ストリーミング再生モジュール170が、動画を一時停止させる。
ステップS1518では、ストリーミング再生モジュール170が、動画を再生させる。
この後は、ストリーミング用動画の再生ではなく、動画(オリジナル版)の再生によって、図5に例示のフローチャート内のステップS350以下の処理を行うこととなる。
In step S1512, the streaming playback module 170 adjusts the position of the mouse pointer to the temporarily stored position.
In step S1514, the streaming playback module 170 determines the temporarily stored playback state. If paused, the streaming playback module 170 proceeds to step S1516. If playback is in progress, the streaming playback module 170 proceeds to step S1518.
In step S1516, the streaming playback module 170 pauses the moving image.
In step S1518, the streaming playback module 170 plays back the moving image.
Thereafter, the processing of step S350 and subsequent steps in the flowchart illustrated in FIG. 5 is performed by playing the moving image (original version) instead of playing the moving image for streaming.

なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図19に例示するように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバとなり得るコンピュータ等である。つまり、具体例として、処理部(演算部)としてCPU1901を用い、記憶装置としてRAM1902、ROM1903、HD1904を用いている。HD1904として、例えばハードディスクを用いてもよい。帯域幅測定モジュール115、動画品質調整モジュール120、同期視聴セッション管理モジュール125、動画ストリーミングモジュール130、同期視聴コマンド送受信モジュール160、品質調整操作受付モジュール165、ストリーミング再生モジュール170、動画ファイル転送モジュール1314、動画ファイル受信モジュール1364等のプログラムを実行するCPU1901と、そのプログラムやデータを記憶するRAM1902と、本コンピュータを起動するためのプログラム等が格納されているROM1903と、補助記憶装置であるHD1904と、キーボード、マウス、タッチパネル等に対する利用者の操作に基づいてデータを受け付ける受付装置1906と、CRT、液晶ディスプレイ等の出力装置1905と、ネットワークインタフェースカード等の通信ネットワークと接続するための通信回線インタフェース1907、そして、それらをつないでデータのやりとりをするためのバス1908により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。   Note that the hardware configuration of the computer on which the program according to the present embodiment is executed is a general computer as illustrated in FIG. 19, specifically, a personal computer, a computer that can be a server, or the like. That is, as a specific example, the CPU 1901 is used as a processing unit (calculation unit), and the RAM 1902, the ROM 1903, and the HD 1904 are used as storage devices. For example, a hard disk may be used as the HD 1904. Bandwidth measurement module 115, video quality adjustment module 120, synchronous viewing session management module 125, video streaming module 130, synchronous viewing command transmission / reception module 160, quality adjustment operation reception module 165, streaming playback module 170, video file transfer module 1314, video CPU 1901 for executing a program such as a file receiving module 1364, a RAM 1902 for storing the program and data, a ROM 1903 for storing a program for starting the computer, an HD 1904 as an auxiliary storage device, a keyboard, An accepting device 1906 that accepts data based on user operations on a mouse, touch panel, etc., an output device 1905 such as a CRT, liquid crystal display, etc. Tsu network interface card such as a communication line interface for connecting to the communication network 1907, and, and a bus 1908 for exchanging data by connecting them. A plurality of these computers may be connected to each other via a network.

前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図19に示すハードウェア構成は、1つの構成例を示すものであり、本実施の形態は、図19に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア(例えばASIC等)で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図19に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、情報家電、複写機、ファックス、スキャナ、プリンタ、複合機(スキャナ、プリンタ、複写機、ファックス等のいずれか2つ以上の機能を有している画像処理装置)などに組み込まれていてもよい。
なお、各モジュールの処理内容として背景技術で説明した技術を採用してもよい。
Among the above-described embodiments, the computer program is a computer program that reads the computer program, which is software, in the hardware configuration system, and the software and hardware resources cooperate with each other. Is realized.
Note that the hardware configuration illustrated in FIG. 19 illustrates one configuration example, and the present embodiment is not limited to the configuration illustrated in FIG. 19, and is a configuration capable of executing the modules described in the present embodiment. I just need it. For example, some modules may be configured by dedicated hardware (for example, ASIC), and some modules may be in an external system and connected via a communication line. A plurality of systems shown in FIG. 5 may be connected to each other via communication lines so as to cooperate with each other. In particular, in addition to personal computers, information appliances, copiers, fax machines, scanners, printers, and multifunction machines (image processing apparatuses having two or more functions of scanners, printers, copiers, fax machines, etc.) Etc. may be incorporated.
Note that the technology described in the background art may be adopted as the processing content of each module.

なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク(DVD)であって、DVDフォーラムで策定された規格である「DVD−R、DVD−RW、DVD−RAM等」、DVD+RWで策定された規格である「DVD+R、DVD+RW等」、コンパクトディスク(CD)であって、読出し専用メモリ(CD−ROM)、CDレコーダブル(CD−R)、CDリライタブル(CD−RW)等、ブルーレイ・ディスク(Blu−ray Disc(登録商標))、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、ハードディスク、読出し専用メモリ(ROM)、電気的消去及び書換可能な読出し専用メモリ(EEPROM(登録商標))、フラッシュ・メモリ、ランダム・アクセス・メモリ(RAM)、SD(Secure Digital)メモリーカード等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク(LAN)、メトロポリタン・エリア・ネットワーク(MAN)、ワイド・エリア・ネットワーク(WAN)、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
The program described above may be provided by being stored in a recording medium, or the program may be provided by communication means. In that case, for example, the above-described program may be regarded as an invention of a “computer-readable recording medium recording the program”.
The “computer-readable recording medium on which a program is recorded” refers to a computer-readable recording medium on which a program is recorded, which is used for program installation, execution, program distribution, and the like.
The recording medium is, for example, a digital versatile disc (DVD), which is a standard established by the DVD Forum, such as “DVD-R, DVD-RW, DVD-RAM,” and DVD + RW. Standard “DVD + R, DVD + RW, etc.”, compact disc (CD), read-only memory (CD-ROM), CD recordable (CD-R), CD rewritable (CD-RW), Blu-ray disc ( Blu-ray Disc (registered trademark), magneto-optical disk (MO), flexible disk (FD), magnetic tape, hard disk, read-only memory (ROM), electrically erasable and rewritable read-only memory (EEPROM (registered trademark)) )), Flash memory, Random access memory (RAM) SD (Secure Digital) memory card and the like.
The program or a part of the program may be recorded on the recording medium for storage or distribution. Also, by communication, for example, a local area network (LAN), a metropolitan area network (MAN), a wide area network (WAN), a wired network used for the Internet, an intranet, an extranet, etc., or wireless communication It may be transmitted using a transmission medium such as a network or a combination of these, or may be carried on a carrier wave.
Furthermore, the program may be a part of another program, or may be recorded on a recording medium together with a separate program. Moreover, it may be divided and recorded on a plurality of recording media. Further, it may be recorded in any manner as long as it can be restored, such as compression or encryption.

100…サーバ装置
110…動画ファイルリポジトリ
115…帯域幅測定モジュール
120…動画品質調整モジュール
125…同期視聴セッション管理モジュール
130…動画ストリーミングモジュール
150…クライアント装置
160…同期視聴コマンド送受信モジュール
165…品質調整操作受付モジュール
170…ストリーミング再生モジュール
200…通信回線
1314…動画ファイル転送モジュール
1364…動画ファイル受信モジュール
1366…動画ファイル蓄積モジュール
DESCRIPTION OF SYMBOLS 100 ... Server apparatus 110 ... Movie file repository 115 ... Bandwidth measurement module 120 ... Movie quality adjustment module 125 ... Synchronous viewing session management module 130 ... Movie streaming module 150 ... Client device 160 ... Synchronous viewing command transmission / reception module 165 ... Accepting quality adjustment operation Module 170 ... Streaming playback module 200 ... Communication line 1314 ... Movie file transfer module 1364 ... Movie file reception module 1366 ... Movie file storage module

Claims (10)

複数の動画再生装置との通信における帯域を取得する帯域取得手段と、
前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、
前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、
前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、
前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段
を有する動画送信装置と、
前記動画送信装置の前記要求受信手段に対して、操作者の操作に基づいて、他の動画再生装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、
前記動画送信装置の前記動画送信手段によって送信された動画を受信する動画受信手段と、
前記動画受信手段によって受信された動画を再生する再生手段
を有する動画再生装置
を具備することを特徴とする情報処理システム。
Bandwidth acquisition means for acquiring bandwidth in communication with a plurality of video playback devices;
Based on the band acquired by the band acquisition unit, a band determination unit that determines a band in communication for reproducing a moving image synchronously by the plurality of moving image reproduction devices;
Request receiving means for receiving a request for any one or a combination of image quality, resolution, and frame rate for a moving image from the moving image playback device;
A moving image converting unit that converts a moving image encoding parameter based on the band determined by the band determining unit and the request received by the request receiving unit;
A moving picture transmission device having a moving picture transmission means for sending the moving picture converted by the moving picture conversion means to each of the moving picture reproduction devices according to the band determined by the band determination means;
With respect to the request receiving means of the video transmission device, based on an operator's operation, for any one of image quality, resolution, and frame rate for a video to be played back in synchronization with another video playback device, or a combination thereof A request transmission means for transmitting the request;
Video receiving means for receiving the video transmitted by the video transmitting means of the video transmitting device;
An information processing system comprising: a moving image reproducing apparatus having reproducing means for reproducing the moving image received by the moving image receiving means.
複数の動画再生装置との通信における帯域を取得する帯域取得手段と、
前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、
前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、
前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、
前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段
を具備することを特徴とする情報処理装置。
Bandwidth acquisition means for acquiring bandwidth in communication with a plurality of video playback devices;
Based on the band acquired by the band acquisition unit, a band determination unit that determines a band in communication for reproducing a moving image synchronously by the plurality of moving image reproduction devices;
Request receiving means for receiving a request for any one or a combination of image quality, resolution, and frame rate for a moving image from the moving image playback device;
A moving image converting unit that converts a moving image encoding parameter based on the band determined by the band determining unit and the request received by the request receiving unit;
An information processing apparatus comprising: a moving picture transmitting means for transmitting the moving picture converted by the moving picture converting means to each of the moving picture reproducing devices in accordance with the band determined by the band determining means.
動画送信装置に対して、操作者の操作に基づいて、他の情報処理装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、
前記要求送信手段によって送信された要求に基づいて前記動画送信装置によって変換された動画を受信する動画受信手段と、
前記動画受信手段によって受信された動画を再生する再生手段
を具備することを特徴とする情報処理装置。
Request transmission for transmitting a request for one or a combination of image quality, resolution, and frame rate for a moving image to be reproduced in synchronization with another information processing device to the moving image transmission device based on an operation of the operator Means,
A moving image receiving means for receiving the moving image converted by the moving image transmitting device based on the request transmitted by the request transmitting means;
An information processing apparatus comprising: a reproducing unit that reproduces the moving image received by the moving image receiving unit.
前記要求受信手段は、前記動画の各フレームの画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信し、
前記動画変換手段は、前記要求受信手段によって受信された要求に基づいて、フレーム毎に動画のエンコードパラメータを変換する
ことを特徴とする請求項2に記載の情報処理装置。
The request receiving means receives a request for one or a combination of image quality, resolution, and frame rate of each frame of the moving image,
The information processing apparatus according to claim 2, wherein the moving image conversion unit converts an encoding parameter of a moving image for each frame based on the request received by the request receiving unit.
前記動画送信手段が動画を送信している間に、前記要求受信手段が要求を受信した場合は、前記動画変換手段は、未だ送信していない動画に対して、該要求に基づいて動画のエンコードパラメータを変換する
ことを特徴とする請求項2又は4に記載の情報処理装置。
When the request receiving unit receives a request while the moving image transmitting unit is transmitting a moving image, the moving image converting unit encodes the moving image based on the request with respect to the moving image that has not yet been transmitted. The information processing apparatus according to claim 2, wherein the parameter is converted.
前記動画を次回送信する場合に、前記動画変換手段が前記要求に基づいて、該動画のエンコードパラメータを変換し得るように、前記要求受信手段によって受信された要求を記憶する記憶手段
をさらに具備し、
前記動画変換手段は、前記帯域決定手段によって決定された帯域と前記記憶手段に記憶された要求に基づいて、動画のエンコードパラメータを変換する
ことを特徴とする請求項2、4、5のいずれか一項に記載の情報処理装置。
Storage means for storing the request received by the request receiving means so that the moving picture conversion means can convert the encoding parameter of the moving picture based on the request when the moving picture is transmitted next time. ,
6. The moving image encoding means converts moving image encoding parameters based on the bandwidth determined by the bandwidth determining means and the request stored in the storage means. The information processing apparatus according to one item.
前記動画送信手段が動画を送信している間に、該動画を同期して再生する新たな動画再生装置が接続された場合は、
前記帯域取得手段は、該動画再生装置との通信における帯域を取得し、
前記帯域決定手段は、前記帯域取得手段によって取得された帯域に基づいて、前記新たな動画再生装置を含めた複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する
ことを特徴とする請求項2、4、5、6のいずれか一項に記載の情報処理装置。
When a new video playback device that plays back the video synchronously is connected while the video transmission means is transmitting the video,
The band acquisition means acquires a band in communication with the video playback device,
The band determining unit determines a band in communication for synchronously reproducing a moving image by a plurality of moving image reproducing devices including the new moving image reproducing device, based on the band acquired by the band acquiring unit. The information processing apparatus according to any one of claims 2, 4, 5, and 6.
前記動画送信装置によって送信された第2の動画を受信する第2の動画受信手段と、
前記第2の動画受信手段によって受信された第2の動画を記憶する動画記憶手段
をさらに具備し、
前記第2の動画受信手段よって受信された第2の動画は、前記動画受信手段よって受信された第1の動画よりも高画質であり、
前記動画再生装置は、前記動画受信手段によって受信された第1の動画を再生している間に、前記第2の動画受信手段による第2の動画の受信が終了したことを検知した場合は、該第1の動画の再生を中止し、前記動画記憶手段によって記憶されている第2の動画を再生する
ことを特徴とする請求項3に記載の情報処理装置。
Second moving image receiving means for receiving the second moving image transmitted by the moving image transmitting device;
A moving image storage means for storing the second moving image received by the second moving image receiving means;
The second moving image received by the second moving image receiving means has a higher image quality than the first moving image received by the moving image receiving means;
When the moving image reproducing apparatus detects that the second moving image receiving unit has finished receiving the second moving image while reproducing the first moving image received by the moving image receiving unit, The information processing apparatus according to claim 3, wherein the reproduction of the first moving image is stopped and the second moving image stored in the moving image storage unit is reproduced.
コンピュータを、
複数の動画再生装置との通信における帯域を取得する帯域取得手段と、
前記帯域取得手段によって取得された帯域に基づいて、前記複数の動画再生装置によって動画を同期して再生するための通信における帯域を決定する帯域決定手段と、
前記動画再生装置から動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を受信する要求受信手段と、
前記帯域決定手段によって決定された帯域と前記要求受信手段によって受信された要求に基づいて、動画のエンコードパラメータを変換する動画変換手段と、
前記帯域決定手段によって決定された帯域にしたがって、前記各動画再生装置に対して、前記動画変換手段によって変換された動画を送信する動画送信手段
として機能させるための情報処理プログラム。
Computer
Bandwidth acquisition means for acquiring bandwidth in communication with a plurality of video playback devices;
Based on the band acquired by the band acquisition unit, a band determination unit that determines a band in communication for reproducing a moving image synchronously by the plurality of moving image reproduction devices;
Request receiving means for receiving a request for any one or a combination of image quality, resolution, and frame rate for a moving image from the moving image playback device;
A moving image converting unit that converts a moving image encoding parameter based on the band determined by the band determining unit and the request received by the request receiving unit;
An information processing program for causing each of the moving image playback devices to function as a moving image transmitting unit that transmits the moving image converted by the moving image converting unit according to the band determined by the band determining unit.
コンピュータを、
動画送信装置に対して、操作者の操作に基づいて、他の情報処理装置と同期して再生する動画に対する画質、解像度、フレームレートのいずれか1つ又はこれらの組み合わせに対する要求を送信する要求送信手段と、
前記要求送信手段によって送信された要求に基づいて前記動画送信装置によって変換された動画を受信する動画受信手段と、
前記動画受信手段によって受信された動画を再生する再生手段
として機能させるための情報処理プログラム。
Computer
Request transmission for transmitting a request for one or a combination of image quality, resolution, and frame rate for a moving image to be reproduced in synchronization with another information processing device to the moving image transmission device based on an operation of the operator Means,
A moving image receiving means for receiving the moving image converted by the moving image transmitting device based on the request transmitted by the request transmitting means;
An information processing program for causing a moving image received by the moving image receiving unit to function as a reproducing unit.
JP2011203335A 2011-09-16 2011-09-16 Information processing system, information processing apparatus, and information processing program Expired - Fee Related JP5899738B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011203335A JP5899738B2 (en) 2011-09-16 2011-09-16 Information processing system, information processing apparatus, and information processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011203335A JP5899738B2 (en) 2011-09-16 2011-09-16 Information processing system, information processing apparatus, and information processing program

Publications (2)

Publication Number Publication Date
JP2013066045A true JP2013066045A (en) 2013-04-11
JP5899738B2 JP5899738B2 (en) 2016-04-06

Family

ID=48189153

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011203335A Expired - Fee Related JP5899738B2 (en) 2011-09-16 2011-09-16 Information processing system, information processing apparatus, and information processing program

Country Status (1)

Country Link
JP (1) JP5899738B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015186040A (en) * 2014-03-24 2015-10-22 キヤノン株式会社 Recording device and control method of the same
US10963919B2 (en) 2017-07-28 2021-03-30 Fuji Xerox Co., Ltd. Information processing apparatus and non-transitory computer readable medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002290974A (en) * 2000-12-07 2002-10-04 Matsushita Electric Ind Co Ltd Transmission rate control method
JP2006128997A (en) * 2004-10-28 2006-05-18 Sharp Corp Video transmission device, video reception device, video transmission method, and video transmission system
JP2007228445A (en) * 2006-02-25 2007-09-06 Mitsubishi Materials Corp Audio-visual data communication system and audio-visual data communication method, and audio-visual data communication program
JP2008504793A (en) * 2004-06-07 2008-02-14 スリング メディア,インク. Personal media broadcasting system
JP2008311795A (en) * 2007-06-12 2008-12-25 Sony Corp Content distribution system, distribution server, accepting station and computer program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002290974A (en) * 2000-12-07 2002-10-04 Matsushita Electric Ind Co Ltd Transmission rate control method
JP2008504793A (en) * 2004-06-07 2008-02-14 スリング メディア,インク. Personal media broadcasting system
JP2006128997A (en) * 2004-10-28 2006-05-18 Sharp Corp Video transmission device, video reception device, video transmission method, and video transmission system
JP2007228445A (en) * 2006-02-25 2007-09-06 Mitsubishi Materials Corp Audio-visual data communication system and audio-visual data communication method, and audio-visual data communication program
JP2008311795A (en) * 2007-06-12 2008-12-25 Sony Corp Content distribution system, distribution server, accepting station and computer program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
平栗 健史: "無線LANの通信品質向上を実現するQoS制御技術", NTT技術ジャーナル, vol. 第19巻,第8号, JPN6015021496, 1 August 2007 (2007-08-01), pages 57 - 60, ISSN: 0003085181 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015186040A (en) * 2014-03-24 2015-10-22 キヤノン株式会社 Recording device and control method of the same
US10963919B2 (en) 2017-07-28 2021-03-30 Fuji Xerox Co., Ltd. Information processing apparatus and non-transitory computer readable medium

Also Published As

Publication number Publication date
JP5899738B2 (en) 2016-04-06

Similar Documents

Publication Publication Date Title
KR102484054B1 (en) Establishment and use of temporal mapping based on interpolation using low-rate fingerprinting to facilitate frame-accurate content modification
JP7053943B2 (en) Dynamic control of fingerprint rate to facilitate time-accurate modification of media content
JP5727385B2 (en) Synchronize presentation state across multiple applications
KR102469142B1 (en) Dynamic playback of transition frames while transitioning between media stream playbacks
US20140032778A1 (en) Media playback method and apparatus in multiple media devices
US20100166387A1 (en) Method and apparatus for playing video data of high bit rate format by a player capable of playing video data of low bit rate format
JP2021534699A (en) Dynamic shortening in replacement content playback that helps align the end of the replacement content with the end of the replacement content
TW201327202A (en) Cooperative provision of personalized user functions using shared and personal devices
WO2015173975A1 (en) Reception apparatus, transmission apparatus, and data processing method
CN104683858A (en) Preview method and device for content of stream medium
US9866621B2 (en) Transfer device, client apparatus, server apparatus, reproduction apparatus and transfer method
JP6116240B2 (en) Transmission device, transmission method, and program
JP5899738B2 (en) Information processing system, information processing apparatus, and information processing program
JP2008085934A (en) Remote reproduction system for video and method of resume reproduction
JP5272835B2 (en) Image supply apparatus, image supply method, and image supply program
JP2009194767A (en) Device and method for video evaluation, and video providing device
JP4977585B2 (en) Content reproduction apparatus and content information display method
JP5899718B2 (en) Information processing system, information processing apparatus, and information processing program
JP2013090102A (en) Distribution system
JP6036373B2 (en) Content reproduction system, communication apparatus, and content reproduction method
JP2011087333A (en) Image reproducing device
JP2006211191A (en) Editing operation auxiliary method, device, program, and medium
JP2020145682A (en) Signal processing device
JP5809433B2 (en) Sending system standby instruction method
JP5089757B2 (en) RECORDING DEVICE, RECORDING DEVICE, AND RECORDING DEVICE CONTROL METHOD

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140822

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150522

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150602

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150724

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160209

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160222

R150 Certificate of patent or registration of utility model

Ref document number: 5899738

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees