JP2020107271A - Information processing device, information processing system, control method, and program - Google Patents
Information processing device, information processing system, control method, and program Download PDFInfo
- Publication number
- JP2020107271A JP2020107271A JP2018248348A JP2018248348A JP2020107271A JP 2020107271 A JP2020107271 A JP 2020107271A JP 2018248348 A JP2018248348 A JP 2018248348A JP 2018248348 A JP2018248348 A JP 2018248348A JP 2020107271 A JP2020107271 A JP 2020107271A
- Authority
- JP
- Japan
- Prior art keywords
- data
- streaming
- information processing
- room
- communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 37
- 238000000034 method Methods 0.000 title claims description 17
- 230000006854 communication Effects 0.000 claims abstract description 62
- 238000004891 communication Methods 0.000 claims abstract description 61
- 230000005540 biological transmission Effects 0.000 claims description 21
- 238000013523 data management Methods 0.000 abstract description 20
- 238000012384 transportation and delivery Methods 0.000 abstract description 15
- 230000007246 mechanism Effects 0.000 abstract description 2
- 238000009826 distribution Methods 0.000 description 56
- 230000006870 function Effects 0.000 description 37
- 238000006243 chemical reaction Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 22
- 238000007726 management method Methods 0.000 description 18
- 238000002360 preparation method Methods 0.000 description 18
- 230000004913 activation Effects 0.000 description 17
- 238000013500 data storage Methods 0.000 description 15
- 230000004044 response Effects 0.000 description 15
- 238000003860 storage Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000003672 processing method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Abstract
Description
本発明は、データのやり取りにより行うコミュニケーションの方法に関する。 The present invention relates to a communication method performed by exchanging data.
動画（映像、音声）を双方向に送受信してコミュニケーションをとることができるシステム（以後、本システム）がある（例えば、特許文献１参照）。 2. Description of the Related Art There is a system (hereinafter referred to as the present system) capable of bidirectionally transmitting and receiving moving images (video and audio) (see, for example, Patent Document 1).
このようなシステムにおいて、コミュニケーションを行う端末同士は、サーバを経由して通信することで、複数人による動画（映像、音声）のやりとりを行うことができるようなものも存在する（例えば、ＷｅｂＲＴＣ等）。 In such a system, there are terminals that can communicate with each other via a server so that a plurality of people can exchange moving images (video, audio) (for example, WebRTC, etc.). ).
このようなシステムでは、サーバに接続するクライアントはサーバに対して映像または音声のストリームを送信する必要がある。 In such a system, a client connecting to the server needs to send a video or audio stream to the server.
サーバは、複数のクライアントから送信された映像または音声を１つのストリームにまとめ、接続しているすべてのクライアントにまとめたストリームを送信することで、複数人による動画（映像、音声）のやり取りを実現している。 The server collects video or audio sent from multiple clients into one stream and sends the combined stream to all connected clients, enabling multiple people to exchange video (video, audio). doing.
また、ユーザＡとユーザＢとが動画（映像、音声）によるコミュニケーションを行い、複数人の閲覧のみのユーザが、ユーザＡとユーザＢとのコミュニケーションの内容を閲覧するというような場合であっても、ユーザＡとユーザＢとのコミュニケーションに必要のない、閲覧のみのユーザの映像または音声が、すべてのユーザに配信されるため、通信量が増大する。 Further, even in a case where the user A and the user B communicate with each other by a moving image (video, audio), and a plurality of browsing-only users browse the contents of the communication between the user A and the user B. Since the video or audio of the user who is browsing only, which is not necessary for the communication between the user A and the user B, is distributed to all the users, the communication amount increases.
これにより、システムによっては、通信回線の状況に応じて、映像の画質を自動的に調整し、双方向通信を行うという特性を有するものがあり、通信量の増大により、通信回線のデータ転送速度が低い、通信帯域が狭い場合には、映像の画質が落ち、ブロックノイズが発生して、やり取りしている映像が見えづらくなることがある。 As a result, some systems have the characteristic of automatically adjusting the image quality of video according to the status of the communication line and performing bidirectional communication. Due to the increase in communication volume, the data transfer rate of the communication line is increased. When the communication bandwidth is low and the communication band is narrow, the image quality of the image may be deteriorated, block noise may occur, and the exchanged image may be difficult to see.
そこで、本発明では、ユーザのコミュニケーションを効果的に行うことが可能な仕組みを提供することを目的とする。 Therefore, it is an object of the present invention to provide a mechanism that enables effective user communication.
上記目的を達成するための本発明は、端末間で通信データを中継する通信サーバと情報処理装置とが通信可能なように接続された情報処理システムであって、前記通信サーバは、前記端末間で行われている通信データを情報処理装置へ送信する送信手段を備え、前記情報処理装置は、前記端末以外の所定の条件を満たす端末に対して、前記送信手段により送信された通信データの要求を受け付ける受付手段を備えたことを特徴とする。 The present invention for achieving the above object is an information processing system in which a communication server that relays communication data between terminals and an information processing apparatus are communicably connected to each other, wherein the communication server And a request for communication data transmitted by the transmitting unit to a terminal other than the terminal that satisfies a predetermined condition. It is characterized by comprising a receiving means for receiving
本発明によれば、ユーザのコミュニケーションを効果的に行うことができる、という効果を奏する。 According to the present invention, there is an effect that user communication can be effectively performed.
図１を利用して本実施形態における情報処理システムの概略構成について記述する。 A schematic configuration of the information processing system according to the present embodiment will be described with reference to FIG.
本発明に関わる情報処理システムの概略構成の一例として、情報処理システムは、クライアント端末１００、クライアント端末１０１、ネットワーク１０２、通信サーバ１０３、データ管理システム１０４、クライアント端末１０７で構成されており、それぞれネットワーク１０２を介して、通信可能なように接続されている。
As an example of a schematic configuration of an information processing system according to the present invention, the information processing system includes a
また、データ管理システム１０４は、データ生成装置１０５、及び記憶装置１０６を備えている。
The
クライアント端末１００は、本情報処理システムのクライアント機能を提供し、ログイン画面（詳細後述）、及びコミュニケーション画面（詳細後述）を出力する。
The
クライアント端末１０１は、本情報処理システムのクライアント機能を提供し、ログイン画面（詳細後述）、ルーム選択画面（詳細後述）、及びコミュニケーション画面（詳細後述）を出力する。
The
通信サーバ１０３は、外部のプラットフォームであり、ＷｅｂＲＴＣ技術を利用した複数人での音声、映像などのリアルタイム通信機能を提供する。
The
データ管理システム１０４は、本情報処理システムで利用するデータを管理するシステムであり、例えば、クラウド基盤が想定される。
The
データ生成装置１０５は、データ管理システム１０４上で動作し、本情報処理システムのストリーミング配信機能を持つ。
The
記憶装置１０６は、データ管理システム１０４上で動作し、本除法処理システムのストリーミングデータ用ストレージ機能を持つ。
The
クライアント端末１０７は、本情報処理システムのストリーミング再生用のクライアント機能を提供し、ログイン画面（詳細後述）、及びストリーミング再生画面（詳細後述）を出力する。
The
次に、図２を用いて、クライアント端末１００、クライアント端末１０１、及びクライアント端末１０７のハードウェアの概略構成について説明を行う。
Next, a schematic configuration of hardware of the
図２に示すように、各装置は、システムバス２０４を介してＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３、入力コントローラ２０５、ビデオコントローラ２０６、メモリコントローラ２０７、よび通信Ｉ／Ｆコントローラ２０８が接続される。
As shown in FIG. 2, each device includes a CPU (Central Processing Unit) 201, a ROM (Read Only Memory) 202, a RAM (Random Access Memory) 203, an
ＣＰＵ２０１は、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。
The
ＲＯＭ２０２あるいは外部メモリ２１１は、ＣＰＵ２０１が実行する制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や、本情報処理方法を実現するためのコンピュータ読み取り実行可能なプログラムおよび必要な各種データ（データテーブルを含む）を保持している。
The
ＲＡＭ２０３は、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０２あるいは外部メモリ２１１からＲＡＭ２０３にロードし、ロードしたプログラムを実行することで各種動作を実現する。
The
入力コントローラ２０５は、キーボードや不図示のマウス等のポインティングデバイス等の入力デバイス２０９からの入力を制御する。
The
入力装置がタッチパネルの場合、ユーザがタッチパネルに表示されたアイコンやカーソルやボタンに合わせて押下（指等でタッチ）することにより、各種の指示を行うことができることとする。 When the input device is a touch panel, the user can give various instructions by pressing (touching with a finger or the like) in accordance with an icon, a cursor, or a button displayed on the touch panel.
また、タッチパネルは、マルチタッチスクリーンなどの、複数の指でタッチされた位置を検出することが可能なタッチパネルであってもよい。 Further, the touch panel may be a touch panel such as a multi-touch screen capable of detecting a position touched by a plurality of fingers.
ビデオコントローラ２０６は、ディスプレイ２１０などの外部出力装置への表示を制御する。
The
ディスプレイは本体と一体になったノート型パソコンのディスプレイも含まれるものとする。 The display shall include the display of a laptop computer integrated with the main body.
なお、外部出力装置はディスプレイに限ったものははく、例えばプロジェクタであってもよい。また、前述のタッチ操作を受け付け可能な装置については、入力装置も提供する。 The external output device is not limited to the display, and may be a projector, for example. An input device is also provided for the device that can accept the touch operation described above.
なお、ビデオコントローラ２０６は、表示制御を行うためのビデオメモリ（ＶＲＡＭ）を制御することが可能で、ビデオメモリ領域としてＲＡＭ２０３の一部を利用することもできるし、別途専用のビデオメモリを設けることも可能である。
Note that the
メモリコントローラ２０７は、外部メモリ２１１へのアクセスを制御する。外部メモリとしては、ブートプログラム、各種アプリケーション、フォントデータ、ユーザファイル、編集ファイル、および各種データ等を記憶する外部記憶装置（ハードディスク）、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等を利用可能である。
The
通信Ｉ／Ｆコントローラ２０８は、ネットワークを介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信やＩＳＤＮなどの電話回線、および携帯電話の３Ｇ回線を用いた通信が可能である。
The communication I/
尚、ＣＰＵ２０１は、例えばＲＡＭ２０３内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ディスプレイ２１０上での表示を可能としている。また、ＣＰＵ２０１は、ディスプレイ２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。
Note that the
カメラコントローラ２１２は、カメラ２１４による撮影を制御する。カメラ２１４によって撮影することにより得られた画像は、外部メモリ２１１やＲＯＭ２０２等の記憶領域へ記憶される。
The
音声コントローラ２１３は、マイク／スピーカ２１５による発音や集音の制御を行う。マイク／スピーカ２１５に対して発せられた音を取得して、音声データとして外部メモリ２１１やＲＯＭ２０２等の記憶領域へ記憶したり、音量を調節して発音することができる。
The
尚、通信サーバ１０３、及びデータ管理システム１０４も、ほぼ同様な構成を備えるため、説明は省略する。
Note that the
次に、図３を用いて情報処理システムにおける各機能の概略について説明を行うが、各機能について、後述するフローチャートと合わせて説明を行う。 Next, an outline of each function in the information processing system will be described with reference to FIG. 3, and each function will be described together with a flowchart described later.
クライアント端末１００は、ログイン部３００、ルーム管理部３０１、及び送受信部３０２を備えており、ログイン部３００は、クライアント端末１００における本情報処理システムへのログイン機能を備えている。
The
ルーム管理部３０１は、通信サーバ１０３を利用した音声、映像などをリアルタイムでやり取りしコミュニケーションを行う空間（以後、ルーム）への入室および退室機能を備えている。
The
送受信部３０２は、他の装置等と種々のデータのやり取りを行う機能を備えている。
The transmission/
また、クライアント端末１００を起動したユーザが発した声などの音声を、入室したルームへ配信する機能を備えている。、データ配信起動ＡＰＩ９００（図１０参照）を生成し、データ管理システム１０４に対して送信する機能を備えている
ログイン部３１０は、クライアント端末１０１における本情報処理システムへのログイン機能を備えている。
Further, it has a function of delivering a voice such as a voice uttered by a user who has activated the
ルーム管理部３１１は、ルームへの入室および退室機能を備え、また、クライアント端末１０１を起動したユーザが発した声などの音声を、入室したルームへ配信する機能を備えている。
The
データ生成装置１０５は、ログイン部３２０、ルーム管理部３２１、映像／音声データ保存部３２２、映像／音声データ変換部３２３、変換データアップロード部３２４、データ削除部３２５、及び送受信部３２６を備えている。
The
ログイン部３２０は、データ生成装置１０５における本情報処理システムへのログイン機能を備えている。
The
ルーム管理部３２１は、ルームへの入室および退室機能を備え、映像／音声データ保存部３２２は、ルームに配信されている映像／音声データを取得し、保存する機能を備えている。
The
映像／音声データ変換部３２３は、映像／音声データ保存部３２２によって保存したデータをストリーミング再生可能なデータに変換する機能を持つ。
The video/audio
変換データアップロード部３２４は、ストリーミングデータアップロードＡＰＩ９２０を生成し、ストリーミングデータアップロードＡＰＩ９２０を利用して、映像／音声データ変換部３２３によって変換したストリーミングデータを記憶装置１０６へ送信する機能を備えている。
The conversion data upload
データ削除部３２５は、映像／音声データ変換部３２３および変換データアップロード部３２４で保存、変換したデータを削除する機能を備えている
送受信部３２６は、他の装置等と種々のデータのやり取りを行う機能を備えている。
The
データ管理システム１０４は、起動部３３０、データストレージ部３３１、及び送受信部３３２を備えている。
The
起動部３３０は、クライアント端末１００のルーム管理部３０１において送信されたデータ配信起動ＡＰＩ９００を受信し、ストリーミング配信準備ＡＰＩ９１０（図１０参照）を生成し、データ生成装置１０５に対してストリーミング配信準備ＡＰＩ９１０を送信する機能を備えている。
The
データストレージ部３３１は、本情報処理システムにおいて生成されたストリーミングデータを保存する機能を備えている。
The
送受信部３３２は、他の装置等と種々のデータのやり取りを行う機能を備えている。
The transmission/
クライアント端末１０７は、ログイン部３４０、及びストリーミング再生部３４１を備えている。
The
ログイン部３４０は、クライアント端末１０１における本情報処理システムへのログイン機能を備えている。
The
ストリーミング再生部３４１は、記憶装置１０６に保存されているストリーミングデータを再生する機能を備えている。
The streaming
図４に示すフローチャートを用いて、コミュニケーション通信処理の流れを説明する。 The flow of communication communication processing will be described using the flowchart shown in FIG.
ステップＳ４００では、ログイン部３００は、ログイン画面１２００（図１３参照）を出力し、ログイン画面１２００に対して入力されたユーザＩＤ及びパスワード等のユーザ情報を取得して認証を行い、認証がなされると、情報処理システムへのログインがなされる。
In step S400, the
図１３には、クライアント端末１００に出力されるログイン画面１２００の構成が示されており、ログイン画面１２００は、ユーザＩＤを入力するためのユーザＩＤ入力欄１２０１、パスワードを入力するためのパスワード入力欄１２０２、及びログインの指示を行うために押下するためのログインボタン１２０３を備えている。
FIG. 13 shows the configuration of a
ユーザは、ログインボタン１２０３を押下すると、ユーザＩＤ入力欄１２０１及びパスワード入力欄１２０２に入力されたユーザＩＤ及びパスワードを用いて認証を行い、認証がなされると、情報処理システムへのログインがなされる。
When the user presses the
ステップＳ４０１では、ルーム管理部３０１は、コミュニケーション画面１３００（図１３参照）を出力する。
In step S401, the
図１４には、クライアント端末１００に出力されるコミュニケーション画面１３００の構成が示されており、コミュニケーション画面１３００は、ストリーミング配信開始/終了ボタン１３１１、ルーム選択リストボックス１３１２、ルーム入室ボタン１３１３、及びルーム退室ボタン１３１４を備えている。
FIG. 14 shows the configuration of a
ストリーミング配信開始／終了ボタン１３１１を押下することにより、ストリーミング配信を開始することができる。ストリーミング配信が開始するとボタンが紫色に変わる。
By pressing the streaming distribution start/
一方、ストリーミング配信実行中の状態でストリーミング配信開始／終了ボタン１３１１を押下して、ストリーミング配信を終了することができる。ストリーミング配信が終了するとボタンが黄色に変わる。
On the other hand, the streaming distribution start/
ルーム選択リストボックス１３１２には、入室するルームを出力選択することができ、ルーム入室ボタン１３１３を押下して、選択したルームへの入室ができ、ルーム退室ボタン１３１４を押下すると、入室しているルームから退室することができる。
In the room
本ステップでは、ルーム選択リストボックス１３１２に出力されたルームが選択された状態で、ルーム入室ボタン１３１３が押下されたことを検知すると、選択されたルームへユーザを入室させる。
In this step, when it is detected that the
ステップＳ４０２では、ルーム管理部３０１は、クライアント端末１００で取得した音声をルームに対して配信する。
In step S402, the
ステップＳ４０３では、ルーム管理部３０１は、データ配信起動ＡＰＩ９００（図１０参照）を生成し、データ管理システム１０４に送信する。
In step S403, the
図１０には、データ配信起動ＡＰＩ９００の構成が示されており、データ配信起動ＡＰＩ９００は、ユーザＩＤ、及びルームＩＤで構成される。 FIG. 10 shows the configuration of the data distribution activation API 900, and the data distribution activation API 900 includes a user ID and a room ID.
データ配信起動ＡＰＩ９００は、クライアント端末１００からデータ管理システム１０４に対して、データ生成装置１０５の起動要求を行うためのＡＰＩである。
The data distribution activation API 900 is an API for requesting activation of the
ステップＳ４０４では、起動部３３０は、ステップＳ５０３においてクライアント端末１００から送信されたデータ配信起動ＡＰＩ９００を受信する。
In step S404, the
ステップＳ４０５では、起動部３３０は、ストリーミング配信準備ＡＰＩ９１０（図１０参照）を生成し、データ生成装置１０５に送信する。
In step S405, the
図１０には、ストリーミング配信準備ＡＰＩ９１０の構成が示されており、ストリーミング配信準備ＡＰＩ９１０は、ドメイン（例えば、ユーザＩＤの＠以降の文字列）、及びルームＩＤで構成される。 FIG. 10 shows the configuration of the streaming delivery preparation API 910. The streaming delivery preparation API 910 is composed of a domain (for example, a character string after @ of the user ID) and a room ID.
ストリーミング配信準備ＡＰＩ９１０は、データ管理システム１０４からデータ生成装置１０５に対して、ストリーミング配信準備要求を行うためのＡＰＩである。
The streaming distribution preparation API 910 is an API for making a streaming distribution preparation request from the
ストリーミング配信準備は、データ生成装置１０５が、本情報処理システムへのログインおよびクライアント端末１００と同じルームへの入室処理を指す。
The streaming distribution preparation refers to the process of the
ドメイン、及びルームＩＤの情報を利用することでストリーミング配信準備処理の実行ができる。 The streaming delivery preparation process can be executed by using the information of the domain and the room ID.
ステップＳ４０６では、送受信部３２６は、ステップＳ４０５においてデータ管理システム１０４からストリーミング配信準備ＡＰＩ９１０を受信する。
In step S406, the transmission/
ステップＳ４０７では、ログイン部３２０は、ストリーミング配信準備ＡＰＩ９１０のパラメーターを利用して、本情報処理システムにログインする。
In step S407, the
ステップＳ４０８では、ルーム管理部３２１は、ストリーミング配信準備ＡＰＩ９１０のパラメーターを利用して、クライアント端末１０１と同じルームにデータ生成装置１０５を入室させる。
In step S408, the
ステップＳ４０９では、ルーム管理部３２１は、ストリーミング配信準備ＡＰＩレスポンス９１１（図１０参照）を生成し、送受信部３２６によってデータ管理システム１０４に返す。
In step S409, the
図１０には、ストリーミング配信準備ＡＰＩレスポンス９１１の構成が示されており、ストリーミング配信準備ＡＰＩレスポンス９１１は、ストリーミング配信準備がなされた旨等を示すメッセージで構成される。 FIG. 10 shows the configuration of the streaming delivery preparation API response 911. The streaming delivery preparation API response 911 is composed of a message indicating that the streaming delivery preparation has been made.
ステップＳ４１０では、送受信部３３２は、ステップＳ４０９においてデータ生成装置１０５から送信されたストリーミング配信準備ＡＰＩレスポンス９１１を受信する。
In step S410, the transmission/
ステップＳ４１１では、起動部３３０は、データ配信起動ＡＰＩレスポンス９０１（図１０参照）を生成し、送受信部３３２によって、クライアント端末１００に返す。
In step S411, the
図１０には、データ配信起動ＡＰＩレスポンス９０１の構成が示されており、データ配信起動ＡＰＩレスポンス９０１は、ストリーミング配信準備がなされた旨等を示すメッセージで構成される。 FIG. 10 shows the configuration of the data distribution activation API response 901. The data distribution activation API response 901 is composed of a message indicating that streaming distribution preparation is completed.
ステップＳ４１２では、送受信部３０２は、ステップＳ４１１においてデータ管理システム１０４から送信されたデータ配信起動ＡＰＩレスポンス９０１を受信する。
In step S412, the transmission/
また、同様に、クライアント端末１０１においても、コミュニケーション通信処理を行うため、その処理の流れを図５に示すフローチャートで説明する
ステップＳ５００では、ログイン部３１０によって、ログイン画面１４００（図１４参照）を出力し、ログイン画面１４００に対して入力されたユーザＩＤ及びパスワード等のユーザ情報を取得して認証を行い、認証がなされると、情報処理システムへのログインがなされる。
Similarly, since the
図１５には、クライアント端末１０１に出力されるログイン画面１４００の構成が示されており、ログイン画面１４００は、ユーザＩＤを入力するためのユーザＩＤ入力欄１４０１、パスワードを入力するためのパスワード入力欄１４０２、及びログインの指示を行うために押下するためのログインボタン１４０３を備えている。
FIG. 15 shows the configuration of a
ユーザは、ログインボタン１４０３を押下すると、ユーザＩＤ入力欄１４０１及びパスワード入力欄１４０２に入力されたユーザＩＤ及びパスワードを用いて認証を行い、認証がなされると、情報処理システムへのログインがなされる。
When the user presses the
ステップＳ５０１では、ルーム管理部３１１は、ルーム選択画面１５００（図１６参照）を出力する。
In step S501, the
図１６には、ルーム選択画面１５００の構成が示されており、ルーム選択画面１５００は、ルーム選択リストボックス１５０１で入室するルームを選択し、ルーム入室ボタン１５０４を押下して、選択したルームへの入室ができる。
FIG. 16 shows the configuration of the
また、録画データアップロードボタン１５０３を押下して、映像データのアップロードをすることができる。 Also, the video data upload button 1503 can be pressed to upload the video data.
また、戻るボタン１５０２を押下すると、前に表示されていたログイン画面１４００が表示される。
When the return button 1502 is pressed, the
入室がなされると、コミュニケーション画面１６００（図１７参照）が表示される。 When the user enters the room, a communication screen 1600 (see FIG. 17) is displayed.
図１７には、コミュニケーション画面１６００の構成が示されており、コミュニケーション画面１６００は、ルームを退室する際に押下するためのルーム退室ボタン１６０１、写真撮影を行う撮影ボタン１６０２、録画開始／終了ボタン１６０３を押下すると、録画を開始することができ、再度、録画開始／終了ボタン１６０３を押下すると録画が終了する。
FIG. 17 shows the configuration of the
ステップＳ５０２では、ルーム管理部３１１は、クライアント端末１０１で取得した映像、音声をルームに対して配信する。
In step S502, the
図６に示すフローチャートを用いて、ストリーミング配信処理について説明を行う。 The streaming distribution process will be described with reference to the flowchart shown in FIG.
ステップＳ６００では、コミュニケーション画面１３００のストリーミング配信開始／終了ボタン１３１１が押下されると、ストリーミング配信開始.／終了コマンド１０００（図１１参照）を生成し、送受信部３０２は、入室しているルームに対してストリーミング配信開始／終了コマンド１０００を送信する。ここでは、開始を示すコマンドが送信される。
In step S600, when the streaming distribution start/
図１１には、ストリーミング配信開始／終了コマンド１０００の構成が示されており、ストリーミング配信開始／終了コマンド１０００は、開始あるいは終了を示すコマンド、配信フラグ、及び配信ＩＤで構成される。
FIG. 11 shows the structure of the streaming distribution start/
ストリーミング配信開始／終了コマンド１０００は、クライアント端末１００からデータ生成装置１０５に対して、ストリーミング配信の開始/終了を指示するコマンドである。
The streaming distribution start/
配信ＩＤは、ストリーミングデータ変換処理の入力データとなる映像データおよび音声データ、また出力データとなるストリーミングデータを一意に識別するための情報である。 The distribution ID is information for uniquely identifying video data and audio data that are input data of the streaming data conversion process, and streaming data that is output data.
配信ＩＤを入力データ、及び出力データのファイル名として利用することで、一意に管理することができる。。 By using the distribution ID as the file name of the input data and the output data, it is possible to manage uniquely. ..
ステップＳ６０１では、送受信部３２６は、ステップＳ６００においてクライアント端末１００から送信されたストリーミング配信開始／終了コマンド１０００を受信する。
In step S601, the transmission/
ステップＳ６０２は、後続のステップＳ６０３からＳ６１４の処理を、ストリーミング配信開始.／終了コマンド１０００を再度受信するまで、所定間隔、例えば５秒間隔で繰り返す。
A step S602 repeats the processes of the subsequent steps S603 to S614 at a predetermined interval, for example, an interval of 5 seconds, until the streaming distribution start/
ステップＳ６０３では、ルーム管理部３２１は、入室しているルームの映像／音声配信のモードを判定する。フレームレート優先モードの場合、ステップＳ６０４へ処理を進め、画質優先モードの場合、ステップＳ６０６へ処理を進める。
In step S603, the
ここで、フレームレート優先モードとは、映像（動画、音声）データによりコミュニケーションを行うモードを示しており、画質優先モードとは、音声と映像は切り離して、静止画データと音声データとによりコミュニケーションを行う。 Here, the frame rate priority mode refers to a mode in which communication is performed by video (moving image, audio) data, and the image quality priority mode separates audio and video, and communicates by still image data and audio data. To do.
ステップＳ６０４では、映像／音声データ保存部３２２は、ルームに配信されている映像.／音声データをブラウザのバッファ領域に保存する。
In step S604, the video/audio
ステップＳ６０５では、映像／音声データ保存部３２２は、ブラウザのバッファ領域に保存された５秒分のデータをファイルに書き出し、保存する。
In step S605, the video/audio
ステップＳ６０６では、映像／音声データ保存部３２２は、ルームに配信されている静止画／音声データを別々にブラウザのバッファ領域に保存する。
In step S606, the video/audio
「画質優先モード」の場合、静止画データと音声データとが分かれてルームに配信されているため、それぞれ保存する必要がある。 In the case of the “image quality priority mode”, still image data and audio data are separately delivered to the room, and thus need to be saved respectively.
ステップＳ６０７では、映像／音声データ保存部３２２は、ブラウザのバッファ領域に保存された５秒分のデータをファイルに書き出し、保存する。
In step S607, the video/audio
ステップＳ６０８では、映像／音声データ保存部３２２は、静止画データと音声データとを合成し、ファイルに保存する。
In step S608, the video/audio
ステップＳ６０９では、映像／音声データ変換部３２３は、ファイルに保存されたデータをストリーミングデータに変換する（図９にて、詳細は後述）。
In step S609, the video/audio
ステップＳ６１０では、変換データアップロード部３２４は、ストリーミングデータアップロードＡＰＩ９２０（図１０参照）を生成し、ストリーミングデータアップロードＡＰＩ９２０を利用して、ストリーミングデータをデータ管理システム１０４に送信する。
In step S610, the conversion data upload
図１０には、ストリーミングデータアップロードＡＰＩ９２０の構成が示されており、ストリーミングデータアップロードＡＰＩ９２０は、テナントＩＤ、ルームＩＤ、ファイルＩＤ、及びファイル自体のバイナリデータで構成される。
FIG. 10 shows the configuration of the streaming data upload
データ生成装置１０５からデータ管理システム１０４に対して、記憶装置１０６へストリーミングデータアップロード要求を行うためのＡＰＩである。
This is an API for making a streaming data upload request from the
テナントＩＤ、ルームＩＤ、及びファイルＩＤ（相手との通信を行うために、ＩＤが一意となるように発行される。）を利用することで、記憶装置１０６に保存されたストリーミングデータを一意に管理することができる。
By using the tenant ID, the room ID, and the file ID (issued so that the ID is unique in order to communicate with the other party), the streaming data stored in the
ステップＳ６１１では、送受信部３３２は、ステップＳ６１０においてデータ生成装置１０５から送信されたストリーミングデータアップロードＡＰＩ９２０を受信する。
In step S611, the transmission/
ステップＳ６１２では、データストレージ部３３１は、ストリーミングデータアップロードＡＰＩ９２０からストリーミングデータを取得し、記憶装置１０６に保存する。
In step S612, the
ステップＳ６１３では、データストレージ部３３１は、ストリーミングアップロードＡＰＩレスポンス９２１（図１０参照）をデータ生成装置１０５に返す。
In step S613, the
図１０には、ストリーミングアップロードＡＰＩレスポンス９２１の構成が示されており、ストリーミングアップロードＡＰＩレスポンス９２１は、ストリーミングデータのアップロード結果を示すステータスコードで構成されている。 FIG. 10 shows the structure of the streaming upload API response 921, and the streaming upload API response 921 is composed of a status code indicating the upload result of streaming data.
ステップ６１４では、送受信部３２６は、ストリーミングアップロードＡＰＩレスポンス９２１を受信する。
In step 614, the transmission/
図６のストリーミング配信処理と同時に、図７のフローチャートに示すストリーミング再生処理が行われる。 Simultaneously with the streaming distribution process of FIG. 6, the streaming reproduction process shown in the flowchart of FIG. 7 is performed.
ステップＳ６５０は、クライアント端末１０７は、ストリーミングデータ内に終了メッセージが存在しない間、ステップＳ６５１及びステップＳ６５２の処理を繰り返すことを示している。
Step S650 indicates that the
ステップＳ６５１では、ストリーミング再生部３４１は、記憶装置１０６からストリーミングデータを取得する。
In step S651, the streaming
ステップＳ６５２では、ストリーミング再生部３４１は、ステップＳ６５１において取得したストリーミングデータをストリーミング配信映像画面１７００（図１８参照）に表示し、再生する。
In step S652, the streaming
図１８には、クライアント端末１０７においてストリーミングデータを再生するための画面であるストリーミング配信映像画面１７００の構成が示されており、ストリーミング配信映像画面１７００は、ストリーミングデータを表示するストリーミング再生エリア１７０１、及び表示されているストリーミングデータを最新のものに更新する更新ボタン１７０２を備えている。
FIG. 18 shows the configuration of a streaming
更新ボタン１７０２を押下することにより、ネットワーク遅延によって、ストリーミングデータが遅れてしまった場合でも、すぐに最新の映像に更新することができる。 By pressing the update button 1702, even if the streaming data is delayed due to network delay, the latest video can be immediately updated.
図８に示すフローチャートを用いて、ストリーミング配信終了処理について説明を行う。 The streaming distribution end processing will be described with reference to the flowchart shown in FIG.
ステップＳ７００では、コミュニケーション画面１３００のストリーミング配信開始／終了ボタン１３１１が押下されると、ストリーミング配信開始.／終了コマンド１０００（図１１参照）を生成し、送受信部３０２は、入室しているルームに対してストリーミング配信開始／終了コマンド１０００を送信する。ここでは、終了を示すコマンドが送信される。
In step S700, when the streaming distribution start/
ステップＳ７０１では、送受信部３２６は、ステップＳ７００において送信されたストリーミング配信開始.／終了コマンド１０００を受信する。
In step S701, the transmission/
ステップＳ７０２では、ルーム管理部３２１は、図６のＳ６０２のループ処理を停止する。
In step S702, the
ステップＳ７０３では、ルーム管理部３２１は、ルームに配信されている映像／音声データをブラウザのバッファ領域に保存する。
In step S703, the
ステップＳ７０４では、ルーム管理部３２１は、ブラウザのバッファ領域に保存された５秒分のデータをファイルに書き出し、保存する。
In step S704, the
ステップＳ７０５では、ルーム管理部３２１は、ストリーミングの終了を示すテキストファイルを書き出し、保存する。
In step S705, the
このストリーミングの終了を示すテキストファイルは、ストリーミングデータの変換処理において利用する（図９にて、詳細は後述）。 The text file indicating the end of this streaming is used in the conversion process of streaming data (details will be described later with reference to FIG. 9).
ステップＳ７０６では、映像／音声データ変換部３２３は、ファイルに保存されたデータをストリーミングデータに変換する。
In step S706, the video/audio
ステップＳ７０７は、変換データアップロード部３２４は、ストリーミングデータアップロードＡＰＩ９２０を生成し、ストリーミングデータアップロードＡＰＩ９２０を利用して、ストリーミングデータをデータ管理システム１０４に送信する。
In step S707, the conversion data upload
ステップＳ７０８では、送受信部３３２は、ステップＳ７０７においてデータ生成装置１０５から送信されたストリーミングデータアップロードＡＰＩ９２０を受信する。
In step S708, the transmission/
ステップＳ７０９では、データストレージ部３３１は、ステップＳ７０８で受信したストリーミングデータアップロードＡＰＩ９２０からストリーミングデータ取得し、記憶装置１０６に保存する。
In step S709, the
ステップＳ７１０では、データストレージ部３３１は、ストリーミングアップロードＡＰＩレスポンス９２１を生成し、送受信部３３２によって、データ生成装置１０５へ送信する。
In step S710, the
ステップＳ７１１では、送受信部３２６は、ストリーミングアップロードＡＰＩレスポンス９２１を受信する。
In step S711, the transmission/
図９に示すフローチャートを用いてストリーミングデータ変換処理について説明する。 The streaming data conversion process will be described with reference to the flowchart shown in FIG.
ステップＳ８００では、映像／音声データ変換部３２３は、ファイルに保存した映像／音声データをHttpLiveStreaming（以下、HLS）形式に変換する。
In step S800, the video/audio
ファイルに保存した映像／音声データのファイルの一例として、図１２の映像・音声データ１１００に示すようにファイル名をテナントＩＤ、ルームＩＤ、配信ＩＤ、及び連続した番号で構成する。 As an example of the video/audio data file stored in the file, as shown in the video/audio data 1100 of FIG. 12, the file name is composed of a tenant ID, a room ID, a distribution ID, and a continuous number.
変換によって、一定の再生時間に分割された映像／音声データのMPEG2-TS形式のファイル（以下、tsファイル）群とtsファイルの再生順など、再生するための設定情報が記述されたM3U形式のファイル（以下、m3u8ファイル）が生成される。 A M3U format file that describes setting information for playback, such as a group of MPEG2-TS format files (hereinafter referred to as ts files) of video/audio data that have been divided into fixed playback times by conversion and the playback order of ts files. A file (hereinafter, m3u8 file) is generated.
M3U形式のファイルの一例として、図１２の変換データ１１０１に示すようにファイル名をテナントＩＤ、ルームＩＤ、及び配信ＩＤで構成する。 As an example of the M3U format file, the file name is composed of a tenant ID, a room ID, and a distribution ID as shown in the conversion data 1101 of FIG.
ステップＳ８０１では、映像／音声データ変換部３２３は、m3u8ファイルに記述されている「#EXT-X-MEDIA-SEQUENCE」、「#EXT-X-DISCOUNTINUITYSEQUENCE」命令の値を1足した値に変更する。
In step S801, the video/audio
この2つの命令は、m3u8ファイルに記述されているtsファイル群が、ストリーミングデータの何番目であるかを示す命令である。 These two commands are commands that indicate the order of the streaming data in the ts file group described in the m3u8 file.
「#EXT-X-MEDIA-SEQUENCE」の値は、データ変換時に更新されるが、「#EXT-X-DISCOUNTINUITYSEQUENCE」は、命令自体がデータ変換時に記述されない。 The value of "#EXT-X-MEDIA-SEQUENCE" is updated at the time of data conversion, but the instruction itself of "#EXT-X-DISCOUNTINUITYSEQUENCE" is not described at the time of data conversion.
本実施形態では、ストリーミング配信をリアルタイム行うために、細かく分割した映像／音声データをストリーミングデータに変換する必要がある。 In this embodiment, in order to perform streaming distribution in real time, it is necessary to convert the finely divided video/audio data into streaming data.
分割した映像／音声データを含むファイルの一例として、図１２の変換データ１１０２に示すようにファイル名をテナントＩＤ、、ルームＩＤ、配信ＩＤ、及び連続した番号で構成する。 As an example of the file including the divided video/audio data, as shown in the conversion data 1102 in FIG. 12, the file name is composed of a tenant ID, a room ID, a distribution ID, and a continuous number.
細かく分割した映像／音声データに変換する場合には、「#EXT-X-DISCOUNTINUITYSEQUENCE」命令がHLS形式のファイルとして必須となるため、独自に追加、更新する必要がある。 When converting to finely divided video/audio data, the “#EXT-X-DISCOUNTINUITYSEQUENCE” command is required as an HLS format file, so it is necessary to add or update it independently.
ステップＳ８０２では、、映像／音声データ変換部３２３は、図８のＳ７０５で生成される、ストリーミングの終了を示すテキストファイルが存在するか判定を行う。
In step S802, the video/audio
ステップＳ８０３では、、映像／音声データ変換部３２３は、m3u8ファイルに記述されているデータの終了を示す「#EXT-X-ENDLIST」命令を削除する。
In step S803, the video/audio
生成されたm3u8ファイルには、データの終了を示す「#EXT-X-ENDLIST」命令が記述される。この命令が記述されていると、ストリーミングが終了とみなされるため、クライアント端末１０７でのストリーミング再生が停止してしまう。
In the generated m3u8 file, the “#EXT-X-ENDLIST” command indicating the end of data is described. If this command is described, it is considered that the streaming has ended, so that the streaming reproduction on the
本実施形態では、細かく分割した映像／音声データを繰り返し変換し、m3u8ファイルを更新することで、クライアント端末１０７での再生を実現する。
In the present embodiment, reproduction in the
そのため、本実施形態におけるストリーミング配信終了の処理が行われるまでの間、ストリーミング再生を継続させるには、独自の処理によって、「#EXT-X-ENDLIST」命令をm3u8ファイルから消去する必要がある。 Therefore, in order to continue the streaming reproduction until the processing of ending the streaming distribution in this embodiment is performed, it is necessary to delete the “#EXT-X-ENDLIST” command from the m3u8 file by a unique process.
m3u8ファイルの構造の一例として、図１２のm3u8ファイルの構造１１０３に示されており、図１２では、m3u8ファイルのファイル構造の一例とm3u8ファイルを形成する各命令の説明である。 An example of the structure of the m3u8 file is shown in the m3u8 file structure 1103 in FIG. 12. In FIG. 12, an example of the file structure of the m3u8 file and each instruction that forms the m3u8 file are described.
ステップＳ８０４では、データ削除部３２５は、ストリーミングデータのアップロードが完了後、本実施形態のストリーミングデータ変換の入力ファイル、出力ファイルを削除する。データ生成装置１０５のハードディスク容量を圧迫しないための処理である。
In step S804, the
以上、実施形態について示したが、本発明は、例えば、システム、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能である。 Although the embodiment has been described above, the present invention can be implemented as a system, a method, a program, a recording medium, or the like.
具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。 Specifically, it may be applied to a system composed of a plurality of devices, or may be applied to an apparatus composed of one device.
また、本発明におけるプログラムは、図４乃至９に示すフローチャートの処理方法をコンピュータが実行可能なプログラムであり、本発明の記憶媒体は図４乃至９の処理方法をコンピュータが実行可能なプログラムが記憶されている。なお、本発明におけるプログラムは図４乃至９の各装置の処理方法ごとのプログラムであってもよい。 Further, the program according to the present invention is a program that allows the computer to execute the processing method of the flowcharts shown in FIGS. 4 to 9, and the storage medium according to the present invention stores the program to which the computer can execute the processing method shown in FIGS. Has been done. The program in the present invention may be a program for each processing method of each device in FIGS.
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, the recording medium recording the program that realizes the functions of the above-described embodiments is supplied to the system or apparatus, and the computer (or CPU or MPU) of the system or apparatus executes the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by reading and executing.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium recording the program constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＥＥＰＲＯＭ、シリコンディスク等を用いることが出来る。 As a recording medium for supplying the program, for example, a flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, non-volatile memory card, ROM, EEPROM, silicon. A disk or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, not only the functions of the above-described embodiments are realized by executing the program read by the computer, but also the OS (operating system) running on the computer is actually executed based on the instructions of the program. It goes without saying that a case where a part or all of the processing is performed and the functions of the above-described embodiments are realized by the processing is also included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program read from the recording medium is written in the memory provided in the function expansion board inserted in the computer or the function expansion unit connected to the computer, the function expansion board is instructed based on the instruction of the program code. Needless to say, this also includes the case where the CPU or the like included in the function expansion unit performs some or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。 Further, the present invention may be applied to a system including a plurality of devices or an apparatus including a single device.
また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適用できることは言うまでもない。 Further, it goes without saying that the present invention can be applied to the case where it is achieved by supplying a program to a system or an apparatus.
この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 In this case, by reading the recording medium storing the program for achieving the present invention into the system or device, the system or device can enjoy the effects of the present invention.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 Furthermore, by downloading and reading a program for achieving the present invention from a server, a database or the like on a network using a communication program, the system or apparatus can enjoy the effects of the present invention.
なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 It should be noted that the present invention also includes all configurations that combine the above-described embodiments and modifications thereof.
１００ クライアント端末
１０１ クライアント端末
１０２ ネットワーク
１０３ 通信サーバ
１０４ データ管理システム
１０５ データ生成装置
１０６ 記憶装置
１０７ クライアント端末
100
Claims (2)
前記通信サーバは、
前記端末間で行われている通信データを情報処理装置へ送信する送信手段
を備え、
前記情報処理装置は、
前記端末以外の所定の条件を満たす端末に対して、前記送信手段により送信された通信データの要求を受け付ける受付手段
を備えたことを特徴とする情報処理システム。 An information processing system in which a communication server that relays communication data between terminals and an information processing apparatus are communicably connected to each other,
The communication server is
A transmission means for transmitting the communication data between the terminals to the information processing device,
The information processing device,
An information processing system comprising: a reception unit that receives a request for communication data transmitted by the transmission unit to a terminal that satisfies a predetermined condition other than the terminal.
前記通信サーバは、
前記端末間で行われている通信データを情報処理装置へ送信する送信ステップ
を実行し、
前記情報処理装置は、
前記端末以外の所定の条件を満たす端末に対して、前記送信ステップにより送信された通信データの要求を受け付ける受付ステップ
を実行することを特徴とする情報処理システムの制御方法。 A method for controlling an information processing system in which a communication server relaying communication data between terminals and an information processing device are connected so as to be communicable,
The communication server is
Performing a transmitting step of transmitting communication data performed between the terminals to the information processing device,
The information processing device,
A method of controlling an information processing system, comprising: executing a receiving step of receiving a request for communication data transmitted in the transmitting step, to a terminal that satisfies a predetermined condition other than the terminal.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018248348A JP7319513B2 (en) | 2018-12-28 | 2018-12-28 | Information processing device, information processing system, control method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018248348A JP7319513B2 (en) | 2018-12-28 | 2018-12-28 | Information processing device, information processing system, control method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020107271A true JP2020107271A (en) | 2020-07-09 |
| JP7319513B2 JP7319513B2 (en) | 2023-08-02 |
Family
ID=71449227
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018248348A Active JP7319513B2 (en) | 2018-12-28 | 2018-12-28 | Information processing device, information processing system, control method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7319513B2 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015166573A1 (en) * | 2014-05-01 | 2015-11-05 | 貴弘 市橋 | Live broadcast system |
| US20160266730A1 (en) * | 2013-10-29 | 2016-09-15 | Nec Europe Ltd. | Method and system for recording a multiuser web session and replaying a multiuser web session |
-
2018
- 2018-12-28 JP JP2018248348A patent/JP7319513B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160266730A1 (en) * | 2013-10-29 | 2016-09-15 | Nec Europe Ltd. | Method and system for recording a multiuser web session and replaying a multiuser web session |
| WO2015166573A1 (en) * | 2014-05-01 | 2015-11-05 | 貴弘 市橋 | Live broadcast system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7319513B2 (en) | 2023-08-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10887657B2 (en) | Message transmission method, device and storage medium for media files | |
| US9055193B2 (en) | System and method of a remote conference | |
| CN107534704A (en) | Message processing device, information processing method and message handling program | |
| WO2015117513A1 (en) | Video conference control method and system | |
| JP2014075116A (en) | Information processor, program and conference system | |
| JP7453576B2 (en) | Information processing system, its control method and program. | |
| EP1708456A1 (en) | Media burst control system for multimedia, program, recording medium, media server and terminal | |
| JP6802477B2 (en) | Information processing system, information processing device, its control method and program | |
| JP7319513B2 (en) | Information processing device, information processing system, control method, and program | |
| EP3952302A1 (en) | Communication system, method for communicating to share images, and carrier means | |
| JP7307306B2 (en) | Information processing device, information processing system, control method, and program | |
| JP4413114B2 (en) | Electronic conference record data processing method | |
| JP6442749B2 (en) | Information processing apparatus, information processing system, control method thereof, and program | |
| JP6703259B2 (en) | Information processing system, conference server, control method thereof, and program | |
| JP5322094B2 (en) | VoD system for client-controlled video communication terminals | |
| JP7138217B2 (en) | TERMINAL DEVICE, COMMUNICATION SYSTEM, CONTROL METHOD AND PROGRAM THEREOF | |
| US9525901B2 (en) | Distribution management apparatus for distributing data content to communication devices, distribution system, and distribution management method | |
| JP7141143B2 (en) | online meeting system | |
| JP7024628B2 (en) | Conference system, terminal device, conference system control method, terminal device control method | |
| KR102402600B1 (en) | Method for creating multidedia content through reconstruction of sound and content managing server | |
| JP2020108105A (en) | Information processing apparatus, information processing system, control method, and program | |
| JP6912440B2 (en) | Communication system, its control method and program | |
| KR101983837B1 (en) | A method and system for producing an image based on a user-feedbackable bots, and a non-transient computer-readable recording medium | |
| JP2017151889A (en) | Information processing device and server device used in web conference system, control method for those, and program | |
| JP2019021248A (en) | Information processing device, information processing system, control method thereof and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220920 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220927 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230410 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230620 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230703 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7319513 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |