JP2022161245A - Information processing device, live distribution system, information processing method and program - Google Patents
Information processing device, live distribution system, information processing method and program Download PDFInfo
- Publication number
- JP2022161245A JP2022161245A JP2021065906A JP2021065906A JP2022161245A JP 2022161245 A JP2022161245 A JP 2022161245A JP 2021065906 A JP2021065906 A JP 2021065906A JP 2021065906 A JP2021065906 A JP 2021065906A JP 2022161245 A JP2022161245 A JP 2022161245A
- Authority
- JP
- Japan
- Prior art keywords
- performer
- content
- live
- terminal
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009826 distribution Methods 0.000 title claims abstract description 150
- 230000010365 information processing Effects 0.000 title claims abstract description 30
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000003860 storage Methods 0.000 claims abstract description 39
- 238000000034 method Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 11
- 238000004891 communication Methods 0.000 description 37
- 238000012545 processing Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 23
- 230000008859 change Effects 0.000 description 13
- 238000004519 manufacturing process Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000007726 management method Methods 0.000 description 8
- 230000004044 response Effects 0.000 description 7
- 239000000463 material Substances 0.000 description 6
- 238000002360 preparation method Methods 0.000 description 4
- 238000002583 angiography Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000002591 computed tomography Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
特許法第３０条第２項適用申請有り 令和 ２年 ４月１０日に、株式会社ハート・オーガナイゼーションのウェブサイトにて公開（ｈｔｔｐｓ：／／ｗｗｗ．ｈｅａｒｔｏｒｇ．ｃｏ．ｊｐ／ａｒｃｈｉｖｅｓ／８６２） 令和 ２年 ４月２０日に、ｅ－ｃａｓｅｂｏｏｋ ＬＩＶＥのウェブサイトにて公開（ｈｔｔｐｓ：／／ｗｗｗ．ｅ－ｃａｓｅｂｏｏｋ．ｃｏｍ）（ｈｔｔｐｓ：／／ｗｗｗ．ｅ－ｃａｓｅｂｏｏｋ．ｃｏｍ／ｃａｒｄｉｏｌｏｇｙ） 令和 ２年 ６月 ５日に、株式会社ハート・オーガナイゼーションのウェブサイトにて公開（ｈｔｔｐｓ：／／ｗｗｗ．ｈｅａｒｔｏｒｇ．ｃｏ．ｊｐ／ａｒｃｈｉｖｅｓ／９６０）Applied for application of
本発明は、情報処理装置、ライブ配信システム、情報処理方法及びプログラムに関する。 The present invention relates to an information processing device, a live distribution system, an information processing method, and a program.
特許文献１は、動画と音声を含むプレゼンテーションの内容を、より確実に視聴者に伝えるための機構を開示している。
本発明は、例えば、高画質でコンテンツを共有可能な情報処理装置等を提供する。 The present invention provides, for example, an information processing apparatus and the like capable of sharing content with high image quality.
本発明の一態様に係る情報処理装置は、ライブで使用するコンテンツを前記ライブの配信前に記憶部に格納する格納部と、前記ライブの配信中に、前記ライブに出演する演者が前記コンテンツを操作した情報を含む操作情報を、前記演者が用いる演者用端末から取得する取得部と、前記取得した操作情報に応じて、前記格納したコンテンツを制御する制御部と、前記制御したコンテンツを、視聴用コンテンツとして前記ライブを視聴する視聴者の視聴者用端末に配信する配信部とを備える。 An information processing apparatus according to an aspect of the present invention includes: a storage unit that stores content to be used in a live performance in a storage unit before the live delivery; an acquisition unit for acquiring operation information including operation information from a performer terminal used by the performer; a control unit for controlling the stored content according to the acquired operation information; and viewing the controlled content. a distribution unit that distributes the content for viewing to the viewer terminals of the viewers who watch the live.
以下に、本開示の情報処理装置、ライブ配信システム、情報処理方法及びプログラムについて、その実施形態を示す図面に基づいて詳述する。以下の各実施形態では、講演会、講習会、研修会、セミナー等のように演者が話す映像及び／又は音声を視聴者にリアルタイムで配信するライブ配信を実現するシステムを例に説明する。なお、本開示は、これらの他に例えば、学校及び学習塾等の教育機関の教師が生徒に対してインターネットを介してリアルタイムで授業を行うオンライン授業、スポーツ教室又は英会話教室等の習い事のオンラインレッスンを実現するシステムにも適用できる。 An information processing apparatus, a live distribution system, an information processing method, and a program according to the present disclosure will be described in detail below based on drawings showing embodiments thereof. In each of the following embodiments, a system that realizes live distribution that distributes video and/or audio of a speaker speaking to viewers in real time, such as a lecture, workshop, workshop, seminar, etc., will be described as an example. In addition to these, the present disclosure includes, for example, online classes in which teachers of educational institutions such as schools and cram schools give classes to students in real time via the Internet, online lessons such as sports classes or English conversation classes It can also be applied to a system that realizes
（実施形態１）
図１はライブ配信システムの構成例を示す模式図である。本実施形態では、ライブ配信に出演する演者が演者用端末３０を用いて操作するコンテンツ（ライブ配信用の資料）を、サーバ１０が視聴者用端末４０に配信し、演者用端末３０及び視聴者用端末４０間でコンテンツを共有できるライブ配信システムについて説明する。本実施形態のライブ配信システムは、サーバ１０、管理者用端末２０、演者用端末３０、視聴者用端末４０等を含み、これらの各装置は、インターネット等のネットワークＮに接続され、ネットワークＮ経由で情報の送受信を行う。
(Embodiment 1)
FIG. 1 is a schematic diagram showing a configuration example of a live distribution system. In this embodiment, the
サーバ１０は、種々の情報処理及び情報の送受信が可能な情報処理装置であり、例えばサーバコンピュータ又はパーソナルコンピュータである。サーバ１０は、１台のコンピュータであってもよく、分散処理を実現する複数台のコンピュータであってもよく、１台のサーバ内に設けられた複数の仮想マシンであってもよく、クラウドサーバであってもよい。本実施形態のライブ配信システムにおいて、サーバ１０は例えばＳＦＵ（Selective Forwarding Unit）サーバであり、サーバ１０と各端末２０，３０，４０との間は、例えばＷｅｂＲＴＣ（Real-Time Communication）による通信によって視聴用コンテンツ及び各種情報の送受信が行われる。よって、サーバ１０は、視聴用コンテンツをストリーミング配信することができ、リアルタイムなコンテンツ配信（ライブ配信）を実現することができる。
The
管理者用端末２０は、ライブ配信を管理する管理者が使用する端末であり、例えば１つのライブ配信に対して１又は複数の管理者用端末２０が用意される。管理者用端末２０は、例えばライブ配信を運営する運営会社内に設置され、管理者は管理者用端末２０を操作することによってライブ配信の管理業務（運営業務）を行う。演者用端末３０は、ライブ配信に出演する演者が使用する端末であり、例えば１つのライブ配信に複数の演者が出演（登壇）する場合、複数の演者用端末３０が設けられる。演者用端末３０は、例えば演者の自宅又は職場に設置され、演者は自宅又は職場で演者用端末３０を操作することによってライブ配信に出演する。視聴者用端末４０は、ライブ配信を視聴する視聴者が使用する端末であり、複数台設けられる。視聴者用端末４０は、例えば視聴者の自宅又は職場に設置され、視聴者は自宅又は職場で視聴者用端末４０を操作することによってライブ配信を視聴する。管理者用端末２０、演者用端末３０及び視聴者用端末４０はそれぞれ、種々の情報処理及び情報の送受信が可能な情報処理装置であり、例えばパーソナルコンピュータ、タブレット端末、スマートフォン、専用の端末で構成されてよい。
The administrator's
図２はライブ配信システムにおける処理を説明する説明図である。本実施形態のライブ配信システムでは、演者はライブ配信で用いるコンテンツ（講演用の資料）をライブ配信の開始前にサーバ１０に格納しておく。コンテンツは、プレゼンテーション用ソフトのパワーポイントで作成されたパワーポイントファイルである。なお、コンテンツは、文書作成用ソフトで作成されたドキュメントファイル、ｐｄｆファイル、動画ファイル等であってもよい。ライブ配信が開始された後、管理者は、管理者用端末２０を用いて、各演者に対してコンテンツの操作権限の付与（設定）又は剥奪を行う。コンテンツの操作権限を付与された演者は、サーバ１０に事前に格納したコンテンツの操作が可能となる。一方、コンテンツの操作権限が剥奪された演者は、コンテンツの操作ができなくなる。演者用端末３０は、演者の映像及び／又は音声を取得してサーバ１０に送信し、操作権限を有する演者の演者用端末３０は更に、演者がコンテンツに対して行った操作に関する操作情報をサーバ１０に送信する。管理者用端末２０は、各演者に対する操作権限の付与状況をサーバ１０に送信すると共に、配信すべきコンテンツを指示する切替指示をサーバ１０に送信する。配信すべきコンテンツは、例えば管理者用端末２０を介して管理者によって選択され、選択されたコンテンツへの切替指示がサーバ１０に送信される。サーバ１０は、演者の映像及び／又は音声と、切替指示に従ったコンテンツとを含む視聴用コンテンツを生成し、視聴用コンテンツを視聴者用端末４０に配信する。またサーバ１０は、配信中のコンテンツに対して、操作権限を有する演者による操作が行われた場合、操作に従った処理をコンテンツに行った後、視聴者用端末４０に配信する。上述した処理により、演者がコンテンツを使用しつつ講演する映像のライブ配信を実現できる。また、複数の演者が、それぞれ別の場所（マルチサイト）からライブに参加し、そのライブを視聴者に配信するマルチサイトスピーカを実現できる。なお、演者は、ライブ配信においてプレゼンテーションするプレゼンター、及びプレゼンテーションに対してコメントするコメンテータ等を含み、プレゼンター及びコメンテータは演者の間で役割が入れ替わる。本実施形態では、ライブ配信の進行を管理者が仕切るが、いずれかの演者がライブ配信の進行を仕切ってもよい。なお、サーバ１０は、電話の音声でのみ演者をライブ配信に参加させてもよい。
FIG. 2 is an explanatory diagram for explaining processing in the live distribution system. In the live distribution system of the present embodiment, the presenter stores content (lecture material) to be used for live distribution in the
図３はサーバ１０及び管理者用端末２０の構成例を示すブロック図である。サーバ１０は、制御部１１、記憶部１２、通信部１３、読み取り部１４等を含み、これらの各部はバスを介して相互に接続されている。制御部１１は、ＣＰＵ、ＭＰＵ、ＧＰＵ等の１又は複数のプロセッサを含む。制御部１１は、記憶部１２に格納してある制御プログラム１２Ｐを実行することにより、サーバ１０が行うべき種々の処理を実行する。
FIG. 3 is a block diagram showing a configuration example of the
記憶部１２は、制御部１１が実行する制御プログラム１２Ｐ及び制御プログラム１２Ｐの実行に必要な各種のデータ等が予め格納されたストレージ（ハードディスク等）である。ストレージ（記憶部）には、例えばフォルダ名及びファイル名が付けられたコンテンツが格納されるコンテンツＤＢ（データベース）１２ａ及び配信情報ＤＢ１２ｂが格納されている。コンテンツＤＢ１２ａには、ライブ配信に使用予定のコンテンツが格納され、例えば演者によって演者用端末３０から送信されたコンテンツが格納される。配信情報ＤＢ１２ｂには、例えば配信ＩＤ列、配信日時列、管理者情報列、演者情報列、コンテンツ情報列、管理者用情報列、演者用情報列、視聴者用情報列等を含み、配信ＩＤに対応付けてライブ配信に関する情報が格納される。コンテンツＤＢ１２ａ及び配信情報ＤＢ１２ｂは、サーバ１０に接続された他の記憶装置に格納されてもよく、サーバ１０が通信可能な他の記憶装置に格納されてもよい。
The
読み取り部１４は、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、ＵＳＢメモリ、ＳＤカード等を含む可搬型記憶媒体１０ａに格納された情報を読み取る。記憶部１２に格納される制御プログラム１２Ｐ及び各種のデータは、制御部１１が読み取り部１４を介して可搬型記憶媒体１０ａから読み取って記憶部１２に格納してもよい。また、記憶部１２に格納される制御プログラム１２Ｐ及び各種のデータは、制御部１１が通信部１３を介して他の装置からダウンロードして記憶部１２に格納してもよい。
The
通信部１３は、有線通信又は無線通信によってネットワークＮに接続するためのインタフェースであり、ネットワークＮを介して他の装置との間で情報の送受信を行う。サーバ１０は、上述した構成に加えて、制御部１１からの指示に従って各種の情報を表示する表示部、及び、操作入力を受け付け、操作内容に対応した制御信号を制御部１１へ送出する入力部等を備えていてもよい。
The
管理者用端末２０は、制御部２１、記憶部２２、通信部２３、入力部２４（マウス・キーボード等）、表示部２５（液晶ディスプレイ等）、マイク２６、スピーカ２７、カメラ２８等を含み、これらの各部はバスを介して相互に接続されている。管理者用端末２０の制御部２１、記憶部２２、通信部２３のそれぞれは、サーバ１０の制御部１１、記憶部１２、通信部１３と同様の構成であるので詳細な説明は省略する。なお、管理者用端末２０の記憶部２２には、制御部２１が実行する制御プログラム２２Ｐに加え、ネットワークＮを介してウェブサイトを閲覧するためのブラウザ２２ＡＰが格納されている。
The
図４はサーバ１０の機能の一例を示す機能ブロック図である。サーバ１０は、制御部１１が制御プログラム１２Ｐを実行することにより、格納部１０１、操作情報取得部１０２、コンテンツ受付部１０３、コンテンツ制御部１０４、配信部１０５、ステータス切替部１０６、権限設定部１０７、管理画面表示部１０８等の各機能を実現する。格納部１０１は、ライブで使用予定のコンテンツをライブ配信前に演者用端末３０又は管理者用端末２０から通信部１３を介して取得し、取得したコンテンツをコンテンツＤＢ１２ａに格納する。なお、格納部１０１は、コンテンツＤＢ１２ａに格納したコンテンツのフォルダ名及びファイル名（コンテンツ情報）を、配信ＩＤに対応付けて配信情報ＤＢ１２ｂに格納しておく。
FIG. 4 is a functional block diagram showing an example of the functions of the
ステータス切替部１０６（切替部）は、演者のステータスを待機中（控室）から出演中（本番）に切り替える指示又は出演中から待機中に切り替える指示を管理者用端末２０又は演者用端末３０から取得した場合に、演者のステータスを切り替える。具体的には、ステータス切替部１０６は、記憶部１２に格納されている当該演者のステータスを「本番」又は「控室」に更新する。権限設定部１０７は、ステータスが「本番」の演者のいずれかに対してコンテンツの操作権限を付与（設定）又は剥奪する指示を管理者用端末２０から取得した場合に、当該演者に対して操作権限の設定（付与又は剥奪）を行う。具体的には、権限設定部１０７は、記憶部１２に格納されている当該演者の操作権限の付与状況（設定状況）を「操作権限あり」又は「操作権限なし」に更新する。管理画面表示部１０８は、後述する管理者用のコントローラ画面（ライブに関する設定を制御可能な管理画面）を生成し、通信部１３から管理者用端末２０へ配信する。
The status switching unit 106 (switching unit) acquires from the
コンテンツ受付部１０３（受付部）は、ライブ配信中に、ライブ配信用にコンテンツＤＢ１２ａに格納されたコンテンツのうち、配信すべきコンテンツの指定を例えば管理者用端末２０から取得し、取得したコンテンツの指定をコンテンツ制御部１０４へ送出する。操作情報取得部１０２（取得部）は、ライブ配信中に、権限設定部１０７によって操作権限が付与された演者が演者用端末３０を介して配信中のコンテンツを操作した情報を含む操作情報を、演者用端末３０から通信部１３を介して取得し、取得した操作情報をコンテンツ制御部１０４へ送出する。コンテンツ制御部１０４は、コンテンツ受付部１０３を介して指定されたコンテンツをコンテンツＤＢ１２ａから読み出し、読み出したコンテンツに対して、操作情報取得部１０２が取得した操作情報に応じた制御を行って配信部１０５へ送出する。具体的には、コンテンツ制御部１０４は、操作情報が示す操作内容に従った制御処理をコンテンツに対して行う。配信部１０５は、コンテンツ制御部１０４で制御されたコンテンツを視聴用コンテンツとして視聴者用端末４０に配信する。なお、視聴者用端末４０に配信される視聴用コンテンツは、管理者用端末２０及び演者用端末３０にも配信される。
During live distribution, the content reception unit 103 (reception unit) acquires designation of content to be distributed among the contents stored in the
以下に、本実施形態のライブ配信システムにおいて、管理者、演者及び視聴者がライブ配信に参加する際に端末２０，３０，４０及びサーバ１０が行う処理について説明する。本実施形態のライブ配信システムでは、ライブ配信が予定された場合、例えば管理者がライブ配信に関する各情報をサーバ１０の配信情報ＤＢ１２ｂに登録する。その際、サーバ１０は、管理者用端末２０からの要求（ライブ配信の登録要求）に応じて、管理者、演者及び視聴者がライブ配信に参加するためのＵＲＬ（管理者用情報、演者用情報、視聴者用情報）を発行し、配信情報ＤＢ１２ｂに登録する。管理者、演者及び視聴者のそれぞれは、ライブ配信の開始予定日時までに、予め取得したＵＲＬにブラウザを用いてアクセスし、ライブ配信に参加する。ライブ配信に参加した管理者の管理者用端末２０のブラウザ２２ＡＰには図５に示すコントローラ画面が表示され、演者の演者用端末３０のブラウザには図６に示すウェブコメンテータ画面が表示され、視聴者の視聴者用端末４０のブラウザには図７Ａに示す視聴画面が表示される。なお、演者がＵＲＬを用いてサーバ１０にアクセスした場合、サーバ１０は、演者の参加要求を管理者用端末２０に通知する。管理者は、通知された演者をウェブコメンテータとして迎え入れてよいか否かを判断し、よい場合は参加を許可する。管理者によって許可された場合、サーバ１０は、ウェブコメンテータ画面を演者用端末３０へ送信する。
Processing performed by the
図５はコントローラ画面例を示す模式図である。コントローラ画面（管理画面）は、例えば上部に、視聴者に提供すべきライブ画面が表示されるライブ画面領域２５ａを有する。ライブ画面領域２５ａは、コントローラ画面だけでなく、図６に示すウェブコメンテータ画面、図７Ａ及び図７Ｂに示す視聴画面にも含まれ、演者及び視聴者にも表示される。ライブ画面領域２５ａは、配信中のコンテンツ（講演用の資料）が表示されるコンテンツ領域２５ｂと、ステータスが「本番」（出演中）の演者の映像が表示される演者映像領域２５ｃとを有する。演者は、「本番（ON AIR）」及び「控室（STAND BY）」の２つのステータスを有しており、ステータスは、演者自身又は管理者によって切り替え可能である。ステータスが「本番」の演者は、当該演者の映像が演者映像領域２５ｃに表示され、当該演者の音声及びコンテンツと共にライブ配信される。また、ステータスが「本番」の演者のうちの１人に対して管理者によってコンテンツの操作権限が付与され、操作権限が付与された演者は、配信中のコンテンツに対する操作が可能となる。なお、演者は、ライブ配信に参加した時点では、ステータスが「控室」（待機中）である。複数のコンテンツが配信対象に指定されている場合、コンテンツ領域２５ｂには複数のコンテンツが表示される。
FIG. 5 is a schematic diagram showing an example of a controller screen. The controller screen (management screen) has, for example, a
またコントローラ画面は、ライブ配信に使用予定の各コンテンツが表示されるコンテンツ準備領域２５ｄを有する。コンテンツ準備領域２５ｄには、例えば各コンテンツの１ページ目のサムネイルが表示され、各コンテンツのサムネイルに対応付けて「表示終了」ボタン又は「メインに表示」ボタンが表示されている。なお、現在配信中のコンテンツのサムネイルに対応付けて「表示終了」ボタンが表示され、配信中ではないコンテンツのサムネイルに対応付けて「メインに表示」ボタンが表示される。管理者は、例えば演者との間で予め決めておいた順序に従って、又は登壇者（演者）が話す内容に従って、配信対象のコンテンツを適宜切り替える。例えば、演者が、「では資料をお願いします」等と発言し、プレゼンテーションを開始する合図を出した場合、管理者は、配信すべきコンテンツを選択し、当該演者に操作権限を付与する。その際、コンテンツ準備領域２５ｄにおける「メインに表示」ボタンを操作することにより、対応するコンテンツを配信対象に設定でき、「表示終了」ボタンを操作することにより、配信中のコンテンツの配信を終了することができる。なお、「表示終了」ボタン及び「メインに表示」ボタンは、操作される毎に逐次切り替えられて表示される。
The controller screen also has a
またコントローラ画面は、各演者に関する情報を表示する本番演者領域２５ｅ及び控室演者領域２５ｆを有する。本番演者領域２５ｅは、ステータスが「本番」の演者に関する情報を表示し、控室演者領域２５ｆは、ステータスが「控室」の演者に関する情報を表示する。なお、本番演者領域２５ｅはステータスが「控室」に変更された場合、右側にスライドされて控室演者領域２５ｆとなり、控室演者領域２５ｆはステータスが「本番」に変更された場合、左側にスライドされて本番演者領域２５ｅとなる。演者領域２５ｅ，２５ｆには、演者用端末３０がサーバ１０に送信した演者の映像、演者の氏名及び所属等の個人情報、演者用端末３０の通信環境に関する通信情報等が表示される。通信情報は、例えば通信速度（ビットレート等）、回線状態を例えば５段階評価で表した値等を含む。また演者領域２５ｅ，２５ｆは、演者の演者用端末３０のブラウザを強制的にリロードする指示を行うためのリロードボタンＢ１、演者の音量をミュートに設定又は解除する指示を行うためのマイクボタンＢ２、演者の撮影を実行又は中断する指示を行うためのカメラボタンＢ３、演者のステータスを「控室」又は「本番」に変更する指示を行うためのステータスボタンＢ４を有する。コントローラ画面は、ステータスが「本番」の全演者の演者用端末３０のブラウザを一斉にリロードするためのボタンを有していてもよく、全演者の音量を一括でミュートに設定するためのボタンを有していてもよい。
The controller screen also has a
更に演者領域２５ｅ，２５ｆは、「詳細を開く」ボタンを有しており、「詳細を開く」ボタンが操作された場合、演者３の本番演者領域２５ｅのように、演者用端末３０に対して設定可能な各情報の設定画面２５ｇが表示される。設定画面２５ｇは、演者用端末３０が使用するブラウザの種類及びＯＳに関する情報を表示する。また設定画面２５ｇは、演者用端末３０のブラウザからサーバ１０に送信されるデータ（演者を撮影した映像及び音声）の品質に関する情報の設定を受け付ける。品質に関する情報は、例えば映像のフレームレート及び解像度、音声コーデックの種類等を含む。また設定画面２５ｇは、演者に対してコンテンツの操作権限を付与する指示を行うための「操作権限付与」ボタンを有する。「操作権限付与」ボタンが操作されて操作権限が付与された場合、演者１の本番演者領域２５ｅに示すように、操作権限を有する演者であることを示す「操作権限あり」が表示される。なお、既に操作権限が付与されている演者の設定画面２５ｇでは、操作権限を剥奪する指示を行うための「操作権限剥奪」ボタンが表示されている。また設定画面２５ｇは、演者の映像を表示する指示を行うための「メインに表示」ボタンを有する。更に設定画面２５ｇは、管理者が演者にメッセージ（テキストデータ）を送信するための入力欄２５ｈ及び送信ボタンを有する。入力欄２５ｈには、演者用端末３０から送信されてきたメッセージも表示される。
Furthermore, the
なお、コントローラ画面は、管理者が、ステータスが「控室」の演者に対して個別に又は一斉にメッセージ（テキスト又は音声）のやり取りを行えるように構成されている。また、コントローラ画面に各管理者の情報を表示する管理者領域が設けられていてもよく、管理者領域を介して管理者同士がメッセージ（テキスト又は音声）のやり取りを行えるように構成されていてもよい。 The controller screen is configured so that the administrator can exchange messages (text or voice) with the performers whose status is "waiting room" individually or all at once. Further, an administrator area for displaying information of each administrator may be provided on the controller screen, and the administrators can exchange messages (text or voice) with each other through the administrator area. good too.
図６はウェブコメンテータ画面例を示す模式図である。ウェブコメンテータ画面（演者画面）は、例えば上部にライブ画面領域３５ａを有する。ライブ画面領域３５ａはコンテンツ領域３５ｂ及び演者映像領域３５ｃを含む。ウェブコメンテータ画面は、演者が視聴者に対してアンケートを取りたい場合にアンケートの作成指示を行うためのアンケート作成ボタンを有する。アンケート作成ボタンが操作された場合、アンケートを作成するための作成画面が表示され、作成画面を介して、アンケートの内容及び回答の選択肢の入力が可能となる。またウェブコメンテータ画面は、ステータスが「本番」の演者に関する情報を表示する本番領域３５ｄと、ステータスが「控室」の演者に関する情報を表示する控室領域３５ｅと、自身に関する情報を表示する自分領域３５ｆとを有する。本番領域３５ｄ及び控室領域３５ｅには、各演者について、演者用端末３０がサーバ１０に送信した演者の映像、演者の氏名及び所属等の個人情報、演者の音声がミュートに設定されているか否かを示すマイクアイコン、演者の撮影が実行されているか中断されているかを示すカメラアイコンが表示されている。自分領域３５ｆには、演者用端末３０のカメラで撮影された演者の映像、演者用端末３０の通信環境に関する通信情報が表示されている。また自分領域３５ｆは、演者が自身のステータスを「本番」又は「控室」に変更する指示を行うためのステータスボタンＢ５、自身の音声をミュートに設定又は解除する指示を行うためのマイクボタン、自身の撮影を実行又は中断する指示を行うためのカメラボタンを有する。ウェブコメンテータ画面は、演者自身のステータスが「控室」の場合、控室領域３５ｅに表示された他の演者（ステータスが「控室」の演者）との間でメッセージ（テキスト又は音声）をやり取りできるように構成されている。例えば控室領域３５ｅに表示された演者のいずれかに対する選択が行われた場合、選択された演者にメッセージ（テキスト又は音声）を送信するための入力欄及び送信ボタンが表示され、入力欄及び送信ボタンを用いてメッセージの送信が可能となる。なお、ウェブコメンテータ画面は、ステータスが「本番」の演者の発話音声の音量をミュートに設定又は解除するためのボタンを有する。また、ウェブコメンテータ画面に各管理者の情報を表示する管理者領域が設けられていてもよく、管理者領域を介して演者が管理者とメッセージ（テキスト又は音声）のやり取りを行えるように構成されていてもよい。図６に例示するように、サーバ１０は、前記演者が前記ライブに出演中であることを示す第１のステータス（本番）と、前記演者が待機中であることを示す第２のステータス（控室）とを切り替え可能な演者画面を、前記演者用端末に表示させる。
FIG. 6 is a schematic diagram showing an example of a web commentator screen. The web commentator screen (performer screen) has, for example, a
図７Ａ及び図７Ｂは視聴画面例を示す模式図である。視聴画面はライブ画面領域４５ａを有する。ライブ画面領域４５ａはコンテンツ領域４５ｂ及び演者映像領域４５ｃを含む。視聴画面は、演者又は他の視聴者に対してメッセージ（質問又はコメント）を送信するための入力欄４５ｄ及び「投稿する」ボタンを有する。入力欄４５ｄには、他の視聴者によって投稿されたメッセージも表示される。視聴画面は、演者が演者用端末３０を用いてアンケートを作成した場合に、図７Ｂに示すようなアンケート画面４５ｅを表示する。アンケート画面４５ｅは、アンケートの内容及び回答の選択肢が表示され、選択された回答を送信する指示を行うための送信ボタンを有する。視聴者は、アンケート画面４５ｅにおいて、いずれかの選択肢を選択して送信ボタンを操作することにより、アンケートに対する回答を行うことができる。視聴画面は、ライブ配信中に追いかけ再生できるように構成されている。
7A and 7B are schematic diagrams showing examples of viewing screens. The viewing screen has a
本実施形態において、演者用端末３０は、サーバ１０にアクセスしてライブ配信に参加した後、カメラによる演者の撮影及び／又はマイクを介した演者の音声の取得と、取得した演者の映像及び／又は音声のサーバ１０への送信とを開始する。サーバ１０は、演者用端末３０から送信されてくる演者の映像及び／又は音声を受信し、演者の情報をコントローラ画面の控室演者領域２５ｆに表示し、ウェブコメンテータ画面の控室領域３５ｅに表示して、管理者用端末２０及び演者用端末３０に配信する。
In this embodiment, after accessing the
次に、ライブ配信が開始された後に各ユーザ（管理者、演者、視聴者）及び各装置が行う処理について説明する。図８及び図９はライブ配信時の処理手順の一例を示すフローチャートである。図８及び図９では左側に管理者用端末２０が行う処理を、中央に演者用端末３０が行う処理を、右側にサーバ１０が行う処理をそれぞれ示す。
Next, processing performed by each user (administrator, performer, viewer) and each device after the start of live distribution will be described. 8 and 9 are flowcharts showing an example of a processing procedure during live distribution. 8 and 9, the processing performed by the
本実施形態のライブ配信システムにおいて、ライブ配信に参加中の演者は、自身の出演タイミングに応じて、ウェブコメンテータ画面の自分領域３５ｆ中のステータスボタンＢ５を介して、自身のステータスを「本番」に変更する。演者用端末３０の制御部は、ステータスを「本番」に変更する指示を入力部を介して演者から受け付けたか否かを判断しており（Ｓ３１）、受け付けていないと判断した場合（Ｓ３１：ＮＯ）、受け付けるまで待機する。
In the live distribution system of the present embodiment, a performer participating in the live distribution changes his/her status to "production" via the status button B5 in the
ステータスを「本番」に変更する指示を受け付けたと判断した場合（Ｓ３１：ＹＥＳ）、演者用端末３０の制御部は、ステータスの「本番」への変更をサーバ１０に要求する（Ｓ３２）。サーバ１０の制御部１１（ステータス切替部１０６）は、演者用端末３０からステータスの「本番」への変更を要求された場合、当該演者のステータスを「控室」から「本番」に変更する（Ｓ３３）。なお、制御部１１は、各演者のステータスを、例えば記憶部１２に格納して管理しており、記憶部１２に格納してある当該演者のステータスを「本番」に変更する。そして制御部１１は、ステータスを「本番」に変更した演者に基づいて配信画面（コントローラ画面、ウェブコメンテータ画面、視聴画面）を更新する（Ｓ３４）。具体的には、制御部１１（管理画面表示部１０８）は、当該演者の演者情報を控室演者領域２５ｆから本番演者領域２５ｅに移動し、当該演者の映像を演者映像領域２５ｃに表示することによってコントローラ画面を更新する。また制御部１１は、当該演者の演者情報を控室領域３５ｅから本番領域３５ｄに移動すると共に、当該演者の映像を演者映像領域３５ｃに表示することによってウェブコメンテータ画面を更新する。更に制御部１１は、当該演者の映像を演者映像領域４５ｃに表示することによって視聴画面を更新する。
When determining that an instruction to change the status to "performance" has been received (S31: YES), the control unit of the
制御部１１（配信部１０５）は、更新した配信画面と、ステータスが「本番」の演者の音声とを視聴用コンテンツとして各端末２０，３０，４０に配信する（Ｓ３５）。これにより、管理者、演者及び視聴者は、ステータスが「本番」に変更された演者の映像を演者映像領域２５ｃ，３５ｃ，４５ｃで見ることができるので、ステータスが「本番」の各演者を把握することができる。なお、各端末２０，３０，４０の制御部は、サーバ１０から配信される視聴用コンテンツを表示部に表示する処理を行う。
The control unit 11 (distribution unit 105) distributes the updated distribution screen and the voice of the performer whose status is "performance" to each terminal 20, 30, 40 as viewing contents (S35). As a result, the manager, the performers and the viewers can see the images of the performers whose status has been changed to "performance" in the
ライブ配信に参加中の管理者は、ステータスが「本番」の演者が話す内容等に基づいて、コントローラ画面のコンテンツ準備領域２５ｄに表示されている各コンテンツの「表示終了」ボタン又は「メインに表示」ボタンを操作することにより、配信すべきコンテンツの切替を指示する。例えば演者がプレゼンテーションを開始する合図を出した場合、管理者は、配信すべきコンテンツに対する「メインに表示」ボタンを操作する。管理者用端末２０の制御部２１は、配信すべきコンテンツの切替指示を入力部２４を介して受け付けたか否かを判断しており（Ｓ３６）、受け付けていないと判断した場合（Ｓ３６：ＮＯ）、ステップＳ３７をスキップする。配信すべきコンテンツの切替指示を受け付けたと判断した場合（Ｓ３６：ＹＥＳ）、制御部２１は、受け付けた切替指示をサーバ１０に対して送信する（Ｓ３７）。
An administrator who is participating in the live distribution can click the "end display" button or the "main display" button for each content displayed in the
サーバ１０の制御部１１は、管理者用端末２０からコンテンツの切替指示を受信する。よって、制御部１１は、記憶部１２に格納してある複数のコンテンツのうちで、配信対象のコンテンツの指定を受け付ける受付部（コンテンツ受付部１０３）として機能する。制御部１１は、コンテンツの切替指示を受信した場合、切替指示に従って配信対象のコンテンツを更新する（Ｓ３８）。具体的には、制御部１１（コンテンツ制御部１０４）は、管理者用端末２０でいずれかのコンテンツに対する「メインに表示」が操作された場合、当該コンテンツのコンテンツ領域２５ｂ，３５ｂ，４５ｂでの表示を開始する。なお、管理者用端末２０で配信中のコンテンツに対する「表示終了」が操作された場合、当該コンテンツのコンテンツ領域２５ｂ，３５ｂ，４５ｂでの表示を終了する。制御部１１（配信部１０５）は、更新したコンテンツを各端末２０，３０，４０に配信する（Ｓ３９）。これにより、管理者、演者及び視聴者は、管理者によって切り替えられたコンテンツをコンテンツ領域２５ｂ，３５ｂ，４５ｂを介して見ることができ、制御部１１は、配信すべきコンテンツを制御するスライドコントローラとして機能する。なお、各端末２０，３０，４０の制御部は、サーバ１０から配信される更新後のコンテンツを表示部に表示する処理を行う。
The
また管理者は、各演者の出演順序及び演者が話す内容等に基づいて、コントローラ画面の演者領域２５ｅ，２５ｆ（設定画面２５ｇ）の操作権限付与ボタンを介して、いずれかの演者に対して表示中のコンテンツの操作権限（スライドコントロールの権限）を付与する。なお、ウェブコメンテータ画面は、演者が管理者に対して操作権限を要求できるように構成されていてもよく、この場合、管理者は、要求してきた演者に対して操作権限を付与してもよい。管理者用端末２０の制御部２１は、いずれかの演者に対して操作権限を付与する指示を入力部２４を介して受け付けたか否かを判断しており（Ｓ４０）、受け付けていないと判断した場合（Ｓ４０：ＮＯ）、ステップＳ４１をスキップする。いずれかの演者に対して操作権限を付与する指示を受け付けたと判断した場合（Ｓ４０：ＹＥＳ）、制御部２１は、操作権限を付与すべき演者の演者用端末３０及びサーバ１０に対して、当該演者に対する操作権限の付与を通知する（Ｓ４１）。サーバ１０は、各演者に対する操作権限の付与状況を、例えば記憶部１２に格納して管理している。よって、サーバ１０の制御部１１は、管理者用端末２０から操作権限の付与を通知された場合、記憶部１２に格納してある当該演者の操作権限の付与状況を「操作権限あり」に変更する（Ｓ４２）。これにより、制御部１１（権限設定部１０７）は、いずれかの演者に対して、コンテンツを操作可能となるようにコンテンツに対する操作権限を設定する。
Also, based on the order of appearance of each performer and the content of the performer's speech, etc., the administrator displays to one of the performers via the operation authority grant button in the
演者用端末３０の制御部は、管理者用端末２０から操作権限の付与を通知された場合、ウェブコメンテータ画面のコンテンツ領域３５ｂに表示中のコンテンツに対する操作を行えるように切り替える（Ｓ４３）。具体的には、演者用端末３０の制御部は、表示中のコンテンツに対する演者による操作を入力部を介して受付可能となる。なお、操作権限の付与は、管理者用端末２０から通知される代わりに、演者の操作権限の付与状況を変更したサーバ１０から通知されてもよい。演者用端末３０の制御部は、ウェブコメンテータ画面に表示中のコンテンツに対する操作を受け付けたか否かを判断しており（Ｓ４４）、受け付けていないと判断した場合（Ｓ４４：ＮＯ）、受け付けるまで待機し、受け付けたと判断した場合（Ｓ４４：ＹＥＳ）、受け付けた操作に関する操作情報をサーバ１０に出力する（Ｓ４５）。操作情報は例えば、マウスポインタの位置情報、マウスボタンに対する操作（押下）情報、キーボードに対する操作（押下）情報等を含む。なお、コンテンツに対する操作は例えば、１ページ内での移動（スクロール）、他のページへの移動、コンテンツに埋め込まれた動画の再生、表示領域の拡大又は縮小、表示領域に対する書き込み等を含む。演者用端末３０の制御部は、ステップＳ４５の処理後、ステップＳ４４の処理に戻り、ウェブコメンテータ画面に表示中のコンテンツに対する操作を受け付ける都度、操作情報をサーバ１０に出力する。
When the control unit of the
サーバ１０の制御部１１（操作情報取得部１０２）は、操作権限を有する演者が演者用端末３０を用いて行った操作に関する操作情報を演者用端末３０から取得する。制御部１１（コンテンツ制御部１０４）は、演者用端末３０から操作情報を取得した場合、操作情報に応じた処理をコンテンツ（配信中のコンテンツ）に対して実行する（Ｓ４６）。例えば制御部１１は、１ページ内での移動を示す操作情報を取得した場合、コンテンツ領域２５ｂ，３５ｂ，４５ｂに表示中の１ページのコンテンツにおける表示領域を変更する。また他のページへの移動を示す操作情報を取得した場合、制御部１１は、コンテンツ領域２５ｂ，３５ｂ，４５ｂに表示されるコンテンツの表示ページを変更する。また、コンテンツに埋め込まれた動画の再生を示す操作情報を取得した場合、制御部１１は、動画の再生を開始する。また表示領域の拡大又は縮小を示す操作情報を取得した場合、制御部１１は、コンテンツ領域２５ｂ，３５ｂ，４５ｂに表示中のコンテンツに対して拡大処理又は縮小処理を行う。更に表示領域に対する書き込みを示す操作情報を取得した場合、制御部１１は、コンテンツ領域２５ｂ，３５ｂ，４５ｂに表示中のコンテンツに対して、書き込まれた情報を重ねて表示する。このように制御部１１（コンテンツ制御部１０４）は、演者用端末３０から取得した操作情報が示す操作内容に従った制御処理をコンテンツに対して実行してコンテンツを制御する。制御部１１（配信部１０５）は、操作情報に従った処理を実行したコンテンツ（即ち、操作後のコンテンツ）を各端末２０，３０，４０に配信する（Ｓ４７）。これにより、管理者、演者及び視聴者は、操作権限を付与された演者が表示中のコンテンツに対して行った操作を、コンテンツ領域２５ｂ，３５ｂ，４５ｂを介して見ることができる。制御部１１は、ライブエンコーダによって、操作後のコンテンツと、ステータスが「本番」の演者の映像及び／又は音声とを視聴用コンテンツとして配信する。各端末２０，３０，４０の制御部は、サーバ１０から配信される視聴用コンテンツに基づいて、操作後のコンテンツをコンテンツ領域２５ｂ，３５ｂ，４５ｂに表示する処理を行う。
The control unit 11 (operation information acquisition unit 102 ) of the
管理者は、コントローラ画面において、コンテンツの操作権限を付与されている演者の本番演者領域２５ｅ（設定画面２５ｇ）の操作権限剥奪ボタンを介して、当該演者からコンテンツの操作権限を剥奪する。例えば演者がプレゼンテーションを終了する発言を行った場合、管理者は、当該演者からコンテンツの操作権限を剥奪する。管理者用端末２０の制御部２１は、演者に対して操作権限を剥奪する指示を入力部２４を介して受け付けたか否かを判断しており（Ｓ４８）、受け付けていないと判断した場合（Ｓ４８：ＮＯ）、ステップＳ４９をスキップする。演者に対して操作権限を剥奪する指示を受け付けたと判断した場合（Ｓ４８：ＹＥＳ）、制御部２１は、操作権限を剥奪した演者の演者用端末３０及びサーバ１０に対して、当該演者に対する操作権限の剥奪を通知する（Ｓ４９）。
On the controller screen, the administrator revokes the content operation authority from the performer to whom the content operation authority is granted via the operation authority deprivation button in the
サーバ１０の制御部１１（権限設定部１０７）は、管理者用端末２０から操作権限の剥奪を通知された場合、記憶部１２に格納してある当該演者の操作権限の付与状況を「操作権限なし」に変更（設定）する（Ｓ５０）。演者用端末３０の制御部は、管理者用端末２０から操作権限の剥奪を通知された場合、ウェブコメンテータ画面のコンテンツ領域３５ｂに表示中のコンテンツに対する操作を行えないように切り替える（Ｓ５１）。具体的には、演者用端末３０の制御部は、表示中のコンテンツに対する操作を入力部を介して受付不可とする。演者は自身の出演タイミングが終了した場合、ウェブコメンテータ画面の自分領域３５ｆ中のステータスボタンＢ５を介して、自身のステータスを「控室」に変更する。演者用端末３０の制御部は、ステータスを「控室」に変更する指示を入力部を介して演者から受け付けたか否かを判断しており（Ｓ５２）、受け付けていないと判断した場合（Ｓ５２：ＮＯ）、受け付けるまで待機する。
When the
ステータスを「控室」に変更する指示を受け付けたと判断した場合（Ｓ５２：ＹＥＳ）、演者用端末３０の制御部は、ステータスの「控室」への変更をサーバ１０に要求する（Ｓ５３）。サーバ１０の制御部１１（ステータス切替部１０６）は、演者用端末３０からステータスの「控室」への変更を要求された場合、当該演者のステータスを「本番」から「控室」に変更する（Ｓ５４）。具体的には、制御部１１は、記憶部１２に格納してある当該演者のステータスを「控室」に変更する。そして制御部１１は、ステータスを「控室」に変更した演者に基づいて配信画面（コントローラ画面、ウェブコメンテータ画面、視聴画面）を更新する（Ｓ５５）。具体的には、制御部１１（管理画面表示部１０８）は、当該演者の演者情報を本番演者領域２５ｅから控室演者領域２５ｆに移動し、当該演者の映像の演者映像領域２５ｃでの表示を終了することによってコントローラ画面を更新する。また制御部１１は、当該演者の演者情報を本番領域３５ｄから控室領域３５ｅに移動すると共に、当該演者の映像の演者映像領域３５ｃでの表示を終了することによってウェブコメンテータ画面を更新する。更に制御部１１は、当該演者の映像の演者映像領域４５ｃでの表示を終了することによって視聴画面を更新する。
When determining that an instruction to change the status to "waiting room" has been received (S52: YES), the control unit of the
制御部１１は、更新した配信画面を視聴用コンテンツとして各端末２０，３０，４０に配信する（Ｓ５６）。これにより、各画面の演者映像領域２５ｃ，３５ｃ，４５ｃに対して、ステータスが「控室」に変更された演者の映像の表示が終了するので、管理者、演者及び視聴者は、ステータスが「控室」に変更された演者を把握することができる。また制御部１１は、ステータスが「控室」に変更された演者の音声の配信も終了する。即ち、制御部１１は、視聴用コンテンツに含まれる音声にミキシングする演者の音声から、ステータスが「控室」に変更された演者の音声を除外する。なお、各端末２０，３０，４０の制御部は、サーバ１０から配信される視聴用コンテンツを表示部に表示する処理を行う。
The
管理者用端末２０の制御部２１は、ステップＳ３６の処理に戻り、配信すべきコンテンツの切替指示を受け付けた場合（Ｓ３６：ＹＥＳ）、いずれかの演者に対して操作権限を付与する指示を受け付けた場合（Ｓ４０：ＹＥＳ）、又は、操作権限を付与されている演者に対して操作権限を剥奪する指示を受け付けた場合（Ｓ４８：ＹＥＳ）、それぞれに応じた処理を適宜実行する。
The
上述した処理により、本実施形態では、演者がライブ配信で使用するコンテンツをライブ配信の開始前にサーバ１０に登録（アップロード）しておく。そして、サーバ１０は、ライブ配信中に演者用端末３０から受信する操作情報に応じて配信中のコンテンツを制御し、視聴者用端末４０に配信する。即ち、ライブ配信中に演者用端末３０からサーバ１０には操作情報しか送信されないため、演者用端末３０とサーバ１０との間で送受信されるデータ量が削減される。よって、演者用端末３０とサーバ１０との間で安定した通信が可能となるため、ライブの参加者の間で、高画質でコンテンツを共有できる。なお、当該効果は、本開示の各態様に係るサーバ１０の構成でしか実現できないと考えられるため、同様の効果を奏する類似製品は、本願の権利範囲に入ると推定される。
According to the present embodiment, through the above-described processing, the content to be used by the performer in the live distribution is registered (uploaded) in the
図８及び図９に示す処理の実行中に、演者用端末３０は、入力部を介した演者からの指示に従って、視聴者に対して実施したいアンケートを作成することができる。具体的には、演者は、ウェブコメンテータ画面を介して、アンケートの内容及び回答の選択肢を入力し、演者用端末３０は、入力されたアンケートの内容及び回答の選択肢を含むアンケート情報をサーバ１０へ送信する。サーバ１０の制御部１１は、演者用端末３０からアンケート情報（アンケートに関する情報）を受信し、受信したアンケート情報に基づいてアンケート画面４５ｅを生成し、ライブ画面領域４５ａと共に視聴用コンテンツとして視聴者用端末４０に配信する。これにより、視聴者用端末４０では、図７Ｂに示すようなアンケート画面４５ｅが表示され、視聴者は、アンケート画面４５ｅを介してアンケートに回答することができる。また視聴者用端末４０は、アンケートの回答が入力された場合、入力されたアンケート回答をサーバ１０へ送信する。これにより、サーバ１０の制御部１１は、視聴者が視聴者用端末４０を用いて行ったアンケートの回答情報を視聴者用端末４０から取得することができる。このような構成により、サーバ１０は、演者が作成したアンケートを視聴者用端末４０に配信できると共に、視聴者用端末４０からアンケート回答を収集することができる。よって、サーバ１０は、アンケート回答の集計処理を行うことが可能となり、集計結果を即時に配信することができる。これにより、サーバ１０の制御部１１（回答表示部）は、アンケートに対する視聴者からの回答の集計結果を視聴者用端末４０に表示させることができる。また、アンケート回答はデジタルデータで収集されるので、ライブ配信の終了後に、アンケート結果を各種のフォーマットで整理することができる。よって、各種のフォーマットでアンケート結果を提供することができ、その際の作業負担が増大しない。
During execution of the processing shown in FIGS. 8 and 9, the performer's terminal 30 can create a questionnaire to be given to the audience in accordance with instructions from the performer via the input unit. Specifically, the performer inputs the contents of the questionnaire and the options for answering via the web commentator screen, and the terminal 30 for the performer sends the questionnaire information including the contents of the input questionnaire and the options for the answer to the
また、各端末２０，３０及びサーバ１０が図８及び図９に示す処理の実行中に、視聴者は、視聴画面（入力欄４５ｄ）を介して、演者又は管理者に対する質問又はコメント（メッセージ）を投稿することができる。視聴者用端末４０は、質問又はコメントが入力された場合、入力された質問又はコメントをサーバ１０へ送信する。サーバ１０の制御部１１は、視聴者用端末４０から質問又はコメントを受信し、受信した質問又はコメントを入力欄４５ｄに表示し、ライブ画面領域４５ａと共に視聴用コンテンツとして視聴者用端末４０に配信する。これにより、視聴者用端末４０では、いずれかの視聴者が入力した質問又はコメントが入力欄４５ｄに表示され、視聴者による投稿内容が視聴者間で共有できる。すなわち、サーバ１０では、前記取得部は、前記ライブに関する前記視聴者からのメッセージを前記視聴者用端末４０からさらに取得し、前記配信部は、前記制御したコンテンツと前記メッセージとを、前記視聴者用コンテンツとして配信する。なお、制御部１１は、視聴者用端末４０から受信した質問又はコメントをコントローラ画面及びウェブコメンテータ画面の所定領域に表示して管理者用端末２０及び演者用端末３０にも配信する。これにより、視聴者による投稿内容が、管理者及び演者にも共有される。特に視聴者が演者に対する質問を投稿した場合、演者は、質問に対する回答を行うことが可能となり、演者と視聴者との間での質疑応答を実現することができる。
Also, while the
更に、管理者用端末２０は、コントローラ画面の入力欄２５ｈに、任意の演者に送信すべきメッセージが入力されて送信ボタンが操作された場合、入力されたメッセージをサーバ１０へ送信する。サーバ１０の制御部１１は、管理者用端末２０からメッセージを受信した場合、宛先の演者用端末３０に対して、受信したメッセージを送信する。メッセージを受信した演者用端末３０は、受信したメッセージをウェブコメンテータ画面の所定領域に表示し、当該演者にメッセージを通知する。なお、ウェブコメンテータ画面は、このメッセージに対する返答を入力するための入力欄及び送信ボタンを有しており、ウェブコメンテータ画面に返答メッセージが入力されて送信ボタンが操作された場合、演者用端末３０は、返答メッセージをサーバ１０へ送信する。そして、サーバ１０の制御部１１は、返答メッセージを宛先の管理者用端末２０へ送信する。よって、サーバ１０の制御部１１は、管理者用端末２０と演者用端末３０との間で行われるメッセージの送受信を中継し、管理者と演者との間で個別にメッセージのやり取りを行うことができる。
Furthermore, when a message to be sent to an arbitrary performer is entered in the
上述したように、演者が作成したアンケートの配信、視聴者によるアンケート回答の収集及び集計、視聴者が投稿した質問又はコメントの配信等をサーバ１０が行うので、ライブ配信を管理する管理者の作業負担を軽減できる。よって、ライブ配信の運営に必要な人材の削減が可能であり、その結果、各管理者が、並行して配信される複数のライブ配信の管理を行うことが可能となる。
As described above, the
本実施形態では、管理者が、コントローラ画面を介して、配信すべきコンテンツの切替、各演者に対する操作権限の付与又は剥奪、各演者のステータスの変更、各演者の配信画質の変更、演者用端末３０のブラウザのリロード、演者の音量のミュートの設定又は解除、演者の撮影の実行又は中断等を一括して制御することができる。よって、管理者が必要に応じて演者に関する設定を行うことができるので、演者の操作負担を軽減でき、ライブ配信に不慣れな演者であってもライブ配信を実現することができる。 In this embodiment, the administrator can switch content to be distributed, grant or deprive each performer of operation authority, change the status of each performer, change the distribution image quality of each performer, and perform performer terminals via the controller screen. It is possible to collectively control reloading of the 30 browsers, setting or canceling the mute of the volume of the performer, execution or interruption of photographing of the performer, and the like. Therefore, since the administrator can make settings related to the performer as necessary, the operation burden on the performer can be reduced, and even the performer who is unfamiliar with live distribution can realize live distribution.
本実施形態において、複数の演者がいる場合に、１人の演者が管理者の役割を担ってもよい。例えば、１人の司会者（座長）と、複数の登壇者（コメンテーター）とを演者とする場合に、司会者が本実施形態における管理者となり、登壇者が本実施形態における演者となってもよい。 In this embodiment, if there are multiple performers, one performer may take on the role of administrator. For example, when one moderator (chairperson) and a plurality of speakers (commentators) are used as speakers, even if the moderator is the administrator in this embodiment and the speakers are speakers in this embodiment good.
本実施形態では、視聴者は演者及び他の視聴者に対してメッセージ（質問又はコメント）を投稿することができる。更に、視聴画面を介して視聴者間でのコミュニケーションを可能とするように構成されていてもよい。例えば、視聴画面に、ライブ配信に参加中の視聴者の情報が表示され、各視聴者の情報を介してメッセージ（テキスト又は音声等）のやり取りを行えるように構成されていてもよい。その際、視聴者用端末４０間はＰ２Ｐ（peer to peer）型の通信を行ってもよく、この場合、視聴者間のコミュニケーションを秘匿性の高い通信で実現することができる。このような構成とした場合、視聴者間での挨拶、名刺交換、意見交換等を個人的に行うことができ、オフラインでの学会、研究会等で行われる参加者間での個別のコミュニケーションを、オンラインでも実現することができる。
In this embodiment, viewers can post messages (questions or comments) to the performers and other viewers. Furthermore, it may be configured to enable communication between viewers via the viewing screen. For example, the viewing screen may display information about viewers who are participating in the live distribution, and may be configured such that messages (text, voice, etc.) can be exchanged via the information about each viewer. At that time, P2P (peer-to-peer) communication may be performed between the
本実施形態では、ステータスが「本番」の演者の映像及び／又は音声とコンテンツとが視聴用コンテンツとして配信される構成である。このほかに、操作権限が付与された演者の映像及び／又は音声のみとコンテンツとが視聴用コンテンツとして配信される構成でもよい。この場合、ステータスが「本番」の演者が複数いる場合であっても、操作権限を有する１人の演者の映像のみが演者映像領域２５ｃ，３５ｃ，４５ｃに表示され、演者の音声と共に配信される。また、ステータスが「本番」の全ての演者の映像が演者映像領域２５ｃ，３５ｃ，４５ｃに表示されて配信されるが、演者の音声は、操作権限を有する１人の演者の音声のみが配信される構成でもよい。すなわち、前記配信部は、前記ライブに複数の演者が出演している場合に、前記権限設定部が前記複数の演者に含まれる１人の演者に対して前記操作権限を設定したとき、前記１人の演者の映像又は音声と前記コンテンツとを、前記視聴用コンテンツとして配信する。
In the present embodiment, the video and/or audio of the performer whose status is "production" and the content are distributed as viewing content. In addition, only the video and/or audio of the performer to whom the operation authority is granted and the content may be distributed as the content for viewing. In this case, even if there are a plurality of performers whose status is "production", only the image of one performer who has the operation authority is displayed in the
本実施形態において、サーバ１０と演者用端末３０とを複数回線を介して通信接続しておき、サーバ１０は、ライブ配信中に、より速く通信可能な回線を選択し、選択した回線を介して演者用端末３０と通信するように構成されていてもよい。具体的には、サーバ１０は、複数回線（複数のプロバイダ）のそれぞれについて、通信品質を計測する指標（例えばスループット等）を監視し、インターネットにおけるネットワーク的な位置関係（距離）が近いことにより、サーバ１０と演者用端末３０との間で効率的にデータ通信できる回線を選択する。このような回線を用いることにより、演者用端末３０及びサーバ１０間の通信が安定し、その結果、より安定したライブ配信を実現することができる。
In this embodiment, the
本実施形態において、例えば医療機関等の手術室、治療室及び処置室等に設置され、カメラ及びマイクを有する端末が演者用端末３０として使用されてもよい。この場合、サーバ１０は、予めサーバ１０に登録されたコンテンツに加えて、例えば医療機関で実施される手術、治療及び処置の撮影映像をライブ配信で使用することができる。
In this embodiment, a terminal installed in an operating room, a treatment room, a treatment room, etc., such as a medical institution, etc., and having a camera and a microphone may be used as the terminal 30 for the performer. In this case, the
本実施形態において、サーバ１０は、視聴者用端末４０に配信する視聴用コンテンツを録画及び録音（アーカイブ）する構成を有してもよい。この場合、録画及び録音されたアーカイブデータをライブ配信後にネットワークＮ経由で公開することができる。その際、ライブ配信された視聴用コンテンツにおいて演者の講演の開始前及び終了後の不要な映像及び音声が含まれる場合、サーバ１０は、例えば管理者用端末２０からの指示に従って、不要な箇所をカットしてアーカイブデータを生成してもよい。また、サーバ１０は、管理者用端末２０からの指示に従って、映像の明るさ、彩度、テロップの追加等を行うように構成されていてもよい。なお、アーカイブデータに対する各種の編集処理は、管理者用端末２０又は演者用端末３０等で実行されてもよい。
In this embodiment, the
（実施形態２）
実施形態１では管理者が行っていた処理をいずれかの演者が行うライブ配信システムについて説明する。本実施形態のライブ配信システムは、実施形態１のライブ配信システムと同様の装置にて実現可能であるので、構成についての説明は省略する。なお、本実施形態のライブ配信システムでは、管理者用端末２０が設けられておらず、実施形態１で管理者が行っていた、各演者に対する操作権限の付与又は剥奪、並びに、配信すべきコンテンツの切替指示は、管理者の役割を果たす演者（以下では管理者役の演者という）が行うものとする。
(Embodiment 2)
A live distribution system in which one of the performers performs the processing that was performed by the administrator in the first embodiment will be described. The live distribution system of the present embodiment can be implemented by the same devices as the live distribution system of the first embodiment, so description of the configuration is omitted. In addition, in the live distribution system of this embodiment, the administrator's terminal 20 is not provided. A performer who plays the role of an administrator (hereafter referred to as a performer playing the role of an administrator) gives the switching instruction.
図１０は実施形態２のライブ配信システムにおける処理を説明する説明図である。本実施形態のライブ配信システムにおいても、ライブ配信で用いるコンテンツ（講演用の資料）はライブ配信の開始前にサーバ１０に格納しておく。本実施形態では、ライブ配信が開始された後、管理者役の演者が演者用端末３０を用いて、プレゼンテーションを行う演者に対してコンテンツの操作権限の付与（設定）又は剥奪を行う。なお、管理者役の演者がプレゼンテーションを行ってもよい。管理者役の演者の演者用端末３０は、各演者に対する操作権限の付与状況、及び、配信すべきコンテンツを指示する切替指示をサーバ１０に送信する。なお、管理者役の演者の演者用端末３０も演者の映像及び／又は音声を取得してサーバ１０に送信してもよい。管理者役以外の演者の演者用端末３０及びサーバ１０は、実施形態１と同様の処理を行う。よって、本実施形態では、管理者役の演者が、配信すべきコンテンツを切り替え、プレゼンテーションを行う演者が、切り替えられたコンテンツを使用して講演する映像及び／又は音声のライブ配信を実現できる。
FIG. 10 is an explanatory diagram for explaining processing in the live distribution system of the second embodiment. In the live distribution system of the present embodiment as well, content (lecture material) used in live distribution is stored in the
本実施形態においても、演者用端末３０及び視聴者用端末４０がサーバ１０にアクセスすることにより、演者及び視聴者はライブ配信に参加することができる。なお、管理者役の演者の演者用端末３０のブラウザにはコントローラ画面が表示される。ウェブコメンテータ画面は図６に示す構成と同様であり、視聴画面は図７Ａ及び図７Ｂに示す構成と同様である。
In this embodiment as well, performers and viewers can participate in live distribution by accessing the
本実施形態においても、ライブ配信が開始された後に各ユーザ（演者、視聴者）及び各装置が行う処理は、図８及び図９と同じである。なお、本実施形態では、管理者役の演者の演者用端末３０が、図８及び図９において管理者用端末２０が行う処理を実行する。
Also in this embodiment, the processing performed by each user (performer, viewer) and each device after the start of live distribution is the same as in FIGS. In this embodiment, the
上述した構成により、本実施形態では、管理者役の演者は演者用端末３０を介して、配信すべきコンテンツの切替指示を行うことができ、操作権限を付与された演者は、ウェブコメンテータ画面に表示中のコンテンツに対する操作を行うことができ、操作後のコンテンツを視聴者に配信することができる。よって、サーバ１０は、管理者役の演者の演者用端末３０からの切替指示に従って、配信すべきコンテンツを切り替えるスイッチャー（コンテンツ切替部）として機能する。すなわち、サーバ１０は、複数の映像と前記複数の映像にそれぞれ対応する複数の音声とをライブのコンテンツとして取得する取得部と、前記複数の映像に含まれる１つの映像と、前記１つの映像に対応する音声とをライブ配信する配信部と、前記１つの映像とは異なる別の映像と、前記別の映像に対応する別の音声とに切り替える切替部と、前記切り替えられた別の映像と別の音声とを、前記ライブ配信の視聴用コンテンツとして視聴者の視聴者用端末に配信する配信部とを備える。また、サーバ１０は、前記ライブに出演する複数の演者のうちの少なくとも１人の演者に切替権限を設定する権限設定部をさらに備え、前記切替部は、前記切替権限を設定された演者による切替操作にしたがって、前記複数の映像に含まれる１つの映像と、前記１つの映像に対応する音声とを選択し、前記配信部は、前記選択された映像および音声を、前記ライブ配信の視聴用コンテンツとして配信する。
With the above-described configuration, in the present embodiment, the performer playing the role of the administrator can give an instruction to switch the content to be distributed via the
本実施形態では、上述した実施形態１と同様に、コンテンツをライブ配信の開始前にサーバ１０に登録（アップロード）しておくことにより、ライブ配信中に演者用端末３０からサーバ１０には操作情報しか送信されない。よって、ライブ配信中に演者用端末３０とサーバ１０との間で送受信されるデータ量が削減され、安定した通信が可能となるため、ライブの参加者の間で、高画質でコンテンツを共有できる。また、サーバ１０は、ライブ配信中に演者用端末３０から受信する操作情報に応じてコンテンツに対する操作を行った後、視聴者用端末４０に配信する。よって、操作権限を有する演者が操作するコンテンツを、演者用端末３０及び視聴者用端末４０との間で共有することができる。また本実施形態では、実施形態１で管理者が行っていた処理を管理者役の演者が行うことによって、管理者及び管理者用端末２０の配備が不要となる。本実施形態においても、演者は、ライブ配信で使用したいコンテンツを適宜切り替えることができるので、所望のコンテンツを使用した講演のライブ配信を実現できる。よって、演者は、視聴者に見せたい画面（コンテンツ）を見せることができる。また、本実施形態においても、上述した実施形態１で適宜説明した変形例の適用が可能である。
In this embodiment, as in the first embodiment described above, by registering (uploading) content in the
本実施形態において、操作権限を有する演者の演者用端末３０とサーバ１０との間はＰ２Ｐ型の通信にて、演者の映像及び／又は音声、並びに操作情報を送受信するように構成されていてもよい。これにより、操作権限を有する演者の演者用端末３０とサーバ１０との通信を安定して行うことができ、サーバ１０から視聴者用端末４０に配信されるコンテンツを高品質に維持することができる。
In the present embodiment, the performer's video and/or voice and operation information are transmitted and received between the performer's
（実施形態３）
サーバ１０が管理者からの指示に従って、複数パターンの画面フォームに応じたライブ画面を生成し、視聴者は視聴したい画面フォームでコンテンツを視聴できるライブ配信システムについて説明する。本実施形態のライブ配信システムは、実施形態１のライブ配信システムと同様の装置にて実現可能であるので、構成についての説明は省略する。
(Embodiment 3)
A live distribution system will be described in which the
本実施形態では、管理者は、管理者用端末２０を用いて、複数パターンの画面フォームの設定を行い、サーバ１０は、管理者用端末２０によって設定された画面フォームに従って、各画面フォームに応じたライブ画面を生成する。なお、管理者は、予め各画面フォームを生成しておいてもよく、ライブ配信中に適宜生成してもよい。また、画面フォームは、管理者だけでなく、演者によって設定される構成でもよい。
In this embodiment, the administrator uses the
図１１Ａ～図１１Ｃは画面フォームの例を示す模式図であり、図１２は視聴画面の例を示す模式図である。図１１Ａに示す例では、コンテンツ領域４５ｂに１つのコンテンツ（資料１）が表示され、演者映像領域４５ｃに２人の演者の映像が表示されている。図１１Ｂに示す例では、コンテンツ領域４５ｂに２つのコンテンツ（資料１，２）が表示され、演者映像領域４５ｃに２人の演者の映像が表示されている。図１１Ｃに示す例では、コンテンツ領域４５ｂに３つのコンテンツ（資料１～３）が表示され、演者映像領域４５ｃに１人の演者の映像が表示されている。このようにコンテンツ領域４５ｂに表示されるコンテンツの数、種類及び表示サイズは任意に変更可能であり、演者映像領域４５ｃに表示される演者の数も任意に変更可能である。なお、演者映像領域４５ｃには、少なくとも操作権限を有する演者の映像が表示される。
11A to 11C are schematic diagrams showing examples of screen forms, and FIG. 12 is a schematic diagram showing an example of viewing screens. In the example shown in FIG. 11A, one content (document 1) is displayed in the
サーバ１０は、ライブ配信中に、上述したような画面フォームに従ってライブ画面（ライブ画面領域４５ａ）を生成する。なお、各画面フォームのコンテンツ領域４５ｂに表示されるコンテンツの指定、及び、演者映像領域４５ｃに映像が表示される演者の指定は、管理者用端末２０から取得する。本実施形態では、図１２に示すように、視聴画面がフォーム領域４５ｆを有しており、それぞれ生成されたライブ画面はフォーム領域４５ｆに表示される。よって、視聴者は、視聴画面のフォーム領域４５ｆに表示されたライブ画面の中から所望のライブ画面を選択することにより、所望のライブ画面を受信することができる。
The
以下に、本実施形態において、視聴者がライブ配信中に視聴画面を介してライブ画面の画面フォームを切り替える際に各装置が行う処理について説明する。図１３は画面フォームの切替処理手順の一例を示すフローチャートである。図１３では左側にサーバ１０が行う処理を、右側に視聴者用端末４０が行う処理をそれぞれ示す。
In the present embodiment, processing performed by each device when the viewer switches the screen form of the live screen through the viewing screen during live distribution will be described below. FIG. 13 is a flow chart showing an example of a screen form switching process procedure. In FIG. 13, the processing performed by the
サーバ１０の制御部１１は、視聴画面を生成した場合、生成した視聴画面を含む視聴用コンテンツを視聴者用端末４０に配信する（Ｓ８１）。なお、ステップＳ８１の処理は、例えば図８及び図９中のステップＳ３５，Ｓ３９，Ｓ４７，Ｓ５６の処理である。視聴者用端末４０の制御部は、サーバ１０から視聴用コンテンツを受信した場合、視聴用コンテンツに含まれる視聴画面を表示部に表示する（Ｓ８２）。これにより、図１２に示すような視聴画面が視聴者用端末４０に表示される。
When the viewing screen is generated, the
視聴者は、視聴画面のフォーム領域４５ｆに表示された各ライブ画面において、視聴したい画面フォームのライブ画面がある場合、視聴したいライブ画面を入力部を介して選択することにより、画面フォームの切替を指示する。視聴者用端末４０の制御部は、画面フォームの切替指示を入力部を介して受け付けたか否かを判断しており（Ｓ８３）、受け付けていないと判断した場合（Ｓ８３：ＮＯ）、待機する。このとき、視聴者用端末４０の制御部は、サーバ１０から順次配信されてくる視聴用コンテンツに基づいて視聴画面を表示部に表示する。
If there is a live screen of the screen form that the viewer wants to watch in each live screen displayed in the
画面フォームの切替指示を受け付けたと判断した場合（Ｓ８３：ＹＥＳ）、視聴者用端末４０の制御部は、サーバ１０に対して、画面フォームの切替指示を送信する（Ｓ８４）。例えば制御部は、切替指示された画面フォームの情報（例えばフォームＩＤ）をサーバ１０に送信し、画面フォームの切り替えを指示する。サーバ１０の制御部１１は、視聴者用端末４０から画面フォームの切替指示を取得した場合、視聴画面中のライブ画面を、切替指示された画面フォームに応じたライブ画面に変更し、視聴画面を含む視聴用コンテンツを視聴者用端末４０に配信する（Ｓ８５）。視聴者用端末４０の制御部は、サーバ１０から受信した視聴用コンテンツに基づいて視聴画面を表示部に表示する（Ｓ８６）。これにより、視聴者用端末４０は、図１２に示すような視聴画面のフォーム領域４５ｆを介して切替指示された視聴画面をサーバ１０から取得することができる。視聴者用端末４０は、視聴者からの画面フォームの切替指示を受け付ける都度、画面フォームの切替指示をサーバ１０に送信し、切替指示した画面フォームでのライブ画面を含む視聴用コンテンツをサーバ１０から受信する。
If it is determined that a screen form switching instruction has been received (S83: YES), the control unit of the
上述した処理により、視聴者は、視聴したい画面フォームでコンテンツ及び演者の映像を視聴することができる。本実施形態では、上述した各実施形態と同様に、ライブ配信中に演者用端末３０とサーバ１０との間で送受信されるデータ量が削減され、安定した通信が可能となるため、ライブの参加者の間で、高画質でコンテンツを共有できる。また本実施形態では、視聴者は所望の画面フォームを選択できるので、所望のレイアウトでコンテンツ及び演者の映像を視聴できる。よって、視聴者は、見たい映像を見たい画面フォームで視聴することができる。例えば、手術室で医師が実施中の手技の映像をライブ配信する場合に、医師の手元を撮影した映像、患者のバイタル（生体情報）を表示するモニタを撮影した映像、血管造影検査で使用されるアンギオグラフィ装置を用いて取得されたアンギオ画像、コンピュータ断層撮影（ＣＴ：Computed Tomography）によって取得されたＣＴ画像等を配信対象のコンテンツとすることができる。この場合、視聴者は、自身が見たい映像を表示する画面フォームを選択することによって、自身が見たい映像を視聴することが可能となる。例えば医師の手元を複数方向から撮影した映像が配信される場合に、視聴者は、自身が見たい方向からの撮影映像を選択して視聴することが可能となり、配信されるコンテンツの自由度が向上する。
Through the above-described processing, the viewer can view the content and the video of the performer in the desired screen form. In this embodiment, as in the above-described embodiments, the amount of data transmitted and received between the
本実施形態の構成は、実施形態１及び２のライブ配信システムに適用可能である。実施形態２のライブ配信システムに適用した場合、例えば演者が複数パターンの画面フォームを生成しておくことにより、複数パターンのライブ画面によるコンテンツの配信が可能となり、視聴者は見たいライブ画面でコンテンツを視聴することができる。本実施形態においても、上述した各実施形態で適宜説明した変形例の適用が可能である。 The configuration of this embodiment can be applied to the live distribution systems of the first and second embodiments. When applied to the live distribution system of the second embodiment, for example, by generating multiple patterns of screen forms by the performer, it is possible to distribute content with multiple patterns of live screens, and viewers can view content on the live screen they want to see. can be viewed. Also in this embodiment, it is possible to apply the modified examples appropriately described in each of the above-described embodiments.
上述した各実施形態では、サーバ１０が、複数のコンテンツ及び演者の映像を切り替えて合成するスイッチャーの機能と、生成された視聴用コンテンツをストリーミング配信するストリーミングサーバの機能とを有するが、このような構成に限定されない。例えば、スイッチャーの機能とストリーミングサーバの機能とを各別のサーバで実現してもよい。例えば医療機関からライブ配信を行う場合に、医療機関にスイッチャーの機能を有するサーバ１０を設け、ライブ配信を運営する運営会社にストリーミングサーバを設けてもよい。この場合、医療機関内の管理者又は演者が、配信対象のコンテンツの切替指示をサーバ１０に対して行い、サーバ１０は、切替指示に従った視聴用コンテンツを生成し、生成した視聴用コンテンツをストリーミングサーバへ送信する。そして、ストリーミングサーバは、サーバ１０から取得した視聴用コンテンツを各端末２０，３０，４０に対してストリーミング配信する。このような構成においても、複数のコンテンツ及び複数の演者の映像を適宜切り替えて表示するライブ画面を視聴用コンテンツとして視聴者に配信することができる。
In each of the above-described embodiments, the
上述した各実施形態において、例えば演者が話す言葉を他の言語に通訳する同時通訳、又は、手話に通訳する手話通訳を行う通訳者を１人の演者とし、通訳者が使用する端末を演者用端末３０として設けてもよい。この構成の場合、演者の映像及び／又は音声と、通訳者の映像及び／又は音声と、コンテンツとを視聴用コンテンツとして配信することができる。また、演者の１人が通訳者となり、この演者の映像及び／又は音声と、登壇者の演者（ステータスが「本番」の演者）の映像及び／又は音声とを含む視聴用コンテンツを配信してもよい。
In each of the above-described embodiments, for example, an interpreter who interprets the words spoken by the performer into another language simultaneously or who interprets sign language into sign language is assumed to be one performer, and the terminal used by the interpreter is for the performer. It may be provided as
また、複数言語に通訳する複数の通訳者をそれぞれ演者とし、各通訳者が使用する端末を演者用端末３０としてもよい。この場合、演者の映像及び／又は音声と、複数の通訳者の映像及び／又は音声と、コンテンツとが視聴用コンテンツとして配信される。即ち、１つの映像（演者及び通訳者の映像、コンテンツ）に、複数の音声（演者の音声、各言語の音声）が対応付けられて視聴用コンテンツとして配信される。このような視聴用コンテンツを受信した視聴者用端末４０では、１つの映像と、複数の音声から選択された１つの音声とを同期させて再生（表示及び音声出力）することができる。一般的に映像及び音声を配信する場合、映像及び音声を合成して視聴用コンテンツを生成するが、この場合、言語毎に視聴用コンテンツを生成する必要がある。しかし、本実施形態の構成では、１つの映像に複数の音声を対応付けて視聴用コンテンツが生成されるので、言語毎に視聴用コンテンツを生成する必要がなくなる。
Also, a plurality of interpreters who interpret into a plurality of languages may be used as speakers, and the terminals used by each interpreter may be the
上述した各実施形態において、サーバ１０と、サーバ１０から視聴用コンテンツを受信する端末２０，３０，４０とにおいて、視聴用コンテンツに含まれる映像を複数の区画に分割した区画情報を共有し、サーバ１０は、各区画の映像が更新された場合に当該区画の映像のみを各端末２０，３０，４０に配信するように構成されていてもよい。この場合、最小限の映像のみが送受信されるので、ビットレートが低い通信環境においても各端末２０，３０，４０で高画質の映像の視聴が可能となる。また、サーバ１０は、配信対象の映像の一部の解像度を上下させて配信するように構成されていてもよく、また、操作権限を有する演者（登壇中の演者）の映像のみを大きいサイズ又は高解像度で配信するように構成されていてもよい。このような構成の場合、送受信されるデータ量を削減できると共に、視聴者が見るべき映像を高品質で配信することができる。
In each of the above-described embodiments, the
上述した各実施形態では、サーバ１０はＳＦＵサーバであり、各端末２０，３０，４０に対してＷｅｂＲＴＣによる通信によって視聴用コンテンツを配信する構成であるが、このような構成に限定されない。例えば演者用端末３０及び視聴者用端末４０で共有するＷｅｂページを用意し、このＷｅｂページに視聴用コンテンツを埋め込むことで視聴用コンテンツを配信してもよい。この場合、演者は、演者用端末３０に表示中のＷｅｂページに対する操作を行うことで、操作情報が演者用端末３０から視聴者用端末４０に送信される。また、視聴者用端末４０のブラウザが操作情報に応じた操作を実行することで、演者が行った操作が視聴者用端末４０に表示中のＷｅｂページに伝播され、演者に操作されたコンテンツを視聴者が視聴できる。このような構成では、演者及び視聴者は同じＷｅｂページを閲覧することでＷｅｂページ上の視聴用コンテンツを視聴（共有）することができるので、サーバ１０による視聴用コンテンツのストリーミング配信が不要となる。この場合にも、演者は、Ｗｅｂページ上でコンテンツに対するスクロール及びページ移動、コンテンツの再生及び停止、コンテンツの拡大又は縮小、コンテンツに対する書き込み等の操作を行うことができる。よって、このような構成においても、参加者間で、視聴用コンテンツを用いたライブ配信を高品質にて実現することができる。なお、Ｗｅｂページに埋め込まれるコンテンツは、ブラウザ上で表示可能なファイル形式であれば、どのようなコンテンツでもよく、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）画像等の医用画像であってもよい。
In each of the above-described embodiments, the
上述した各実施形態において、例えば演者側にアップローダを設け、演者用端末３０で取得した演者の映像及び／又は音声をアップローダがサーバ１０にアップロードする構成でもよい。このとき、アップローダは、例えばＵＤＰ（User Datagram Protocol）、ＴＣＰ（Transport Control Protocol）、ＳＲＴＰ（Secure Real-time Transport Protocol）等を使用してアップロードする。このような通信プロトコルを使用する構成では、データをアップロードする際の遅延の発生を抑制することができ、安定した通信が可能となる。なお、サーバ１０は、アップロードされた演者の映像及び／又は音声と、予めサーバ１０に登録してあるコンテンツとを合成して視聴用コンテンツを生成し、生成した視聴用コンテンツをストリーミング配信する。
In each of the above-described embodiments, for example, an uploader may be provided on the side of the performer, and the uploader may upload the video and/or audio of the performer acquired by the
なお、上記ライブ配信システムは、各実施形態に係るサーバと、ライブの管理者が用いる管理者用端末とを含み、前記ライブに出演する演者が用いる演者用端末と、前記ライブを視聴する視聴者が用いる視聴者用端末とをさらに含んでよい。 The live distribution system includes a server according to each embodiment and an administrator terminal used by an administrator of a live performance. and a viewer terminal used by.
今回開示された実施の形態はすべての点で例示であって、制限的なものでは無いと考えられるべきである。本発明の範囲は、上記した意味では無く、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。 The embodiments disclosed this time are illustrative in all respects and should be considered not restrictive. The scope of the present invention is indicated by the scope of the claims rather than the meaning described above, and is intended to include all modifications within the scope and meaning equivalent to the scope of the claims.
Claims (10)
前記ライブの配信中に、前記ライブに出演する演者が前記コンテンツを操作した情報を含む操作情報を、前記演者が用いる演者用端末から取得する取得部と、
前記取得した操作情報に応じて、前記格納したコンテンツを制御する制御部と、
前記制御したコンテンツを、視聴用コンテンツとして前記ライブを視聴する視聴者の視聴者用端末に配信する配信部と
を備える情報処理装置。 a storage unit for storing content to be used live in a storage unit before live distribution;
an acquisition unit configured to acquire, from a performer's terminal used by the performer, operation information including information on the operation of the content by a performer appearing in the live during the distribution of the live;
a control unit that controls the stored content according to the acquired operation information;
and a distribution unit that distributes the controlled content as content for viewing to a viewer terminal of a viewer who views the live.
前記演者が前記コンテンツを操作可能となるように、前記コンテンツに対する操作権限を設定する権限設定部をさらに備え、
前記取得部は、前記操作権限を設定した演者が用いる演者用端末から前記操作情報を取得する
請求項１に記載の情報処理装置。 The information processing device is
further comprising an authority setting unit that sets an operation authority for the content so that the performer can operate the content;
The information processing apparatus according to claim 1, wherein the acquisition unit acquires the operation information from a performer's terminal used by a performer who has set the operation authority.
前記ライブで使用するコンテンツが前記記憶部に複数格納された場合、当該複数のコンテンツのうち、前記視聴者用端末に配信するコンテンツの指定を受け付ける受付部をさらに備え、
前記制御部は、前記指定を受け付けたコンテンツを、前記取得した操作情報に応じて制御する
請求項１又は２に記載の情報処理装置。 The information processing device is
further comprising a reception unit that receives designation of content to be distributed to the viewer terminal among the plurality of contents when a plurality of contents to be used in the live are stored in the storage unit,
The information processing apparatus according to claim 1 or 2, wherein the control unit controls the designated content according to the acquired operation information.
前記演者のステータスを待機中から出演中に切り替える切替部をさらに備え、
前記配信部は、前記ステータスを切り替えた前記演者の映像又は音声と前記コンテンツとを、前記視聴用コンテンツとして前記視聴者用端末に配信する
請求項１から３までのいずれかひとつに記載の情報処理装置。 The information processing device is
further comprising a switching unit that switches the status of the performer from waiting to performing,
The information processing according to any one of claims 1 to 3, wherein the distribution unit distributes the video or audio of the performer whose status has been switched and the content as the viewing content to the viewer terminal. Device.
前記コンテンツを含む複数のコンテンツのうち、１つのコンテンツが配信されている場合、前記１つのコンテンツとは異なる別のコンテンツに切り替えるコンテンツ切替部をさらに備え、
前記配信部は、前記切り替えた別のコンテンツを、前記視聴用コンテンツとして配信する
請求項１から４までのいずれかひとつに記載の情報処理装置。 The information processing device is
Further comprising a content switching unit that switches to another content different from the one content when one content is distributed among a plurality of contents including the content,
The information processing apparatus according to any one of claims 1 to 4, wherein the distribution unit distributes the switched content as the viewing content.
前記情報処理装置は、
前記アンケートに対する前記視聴者からの回答を、前記視聴者用端末に表示させる回答表示部をさらに備える
請求項１から５までのいずれかひとつに記載の情報処理装置。 The distribution unit further distributes information about the questionnaire to the viewer terminal,
The information processing device is
The information processing apparatus according to any one of claims 1 to 5, further comprising an answer display unit that causes the viewer terminal to display an answer from the viewer to the questionnaire.
前記ライブの管理者が用いる管理者用端末に、前記ライブに関する設定を制御可能な管理画面を表示させる管理画面表示部をさらに備える
請求項１から６までのいずれかひとつに記載の情報処理装置。 The information processing device is
7. The information processing apparatus according to any one of claims 1 to 6, further comprising a management screen display unit for displaying a management screen capable of controlling settings related to the live on an administrator terminal used by an administrator of the live.
ライブの管理者が用いる管理者用端末とを含むライブ配信システム。 an information processing apparatus according to any one of claims 1 to 7;
A live distribution system including a manager terminal used by a live manager.
前記ライブの配信中に、前記ライブに出演する演者が前記コンテンツを操作した情報を含む操作情報を、前記演者が用いる演者用端末から取得し、
前記取得した操作情報に応じて、前記格納したコンテンツを制御し、
前記制御したコンテンツを、視聴用コンテンツとして前記ライブを視聴する視聴者の視聴者用端末に配信する
処理をコンピュータが実行する情報処理方法。 storing content to be used in a live performance in a storage unit before the live distribution;
During the distribution of the live, operation information including information on the operation of the content by a performer appearing in the live is acquired from a performer terminal used by the performer,
controlling the stored content according to the acquired operation information;
An information processing method in which a computer executes a process of distributing the controlled content as viewing content to a viewer terminal of a viewer viewing the live.
前記ライブの配信中に、前記ライブに出演する演者が前記コンテンツを操作した情報を含む操作情報を、前記演者が用いる演者用端末から取得し、
前記取得した操作情報に応じて、前記格納したコンテンツを制御し、
前記制御したコンテンツを、視聴用コンテンツとして前記ライブを視聴する視聴者の視聴者用端末に配信する
処理をコンピュータに実行させるプログラム。 storing content to be used in a live performance in a storage unit before the live distribution;
During the distribution of the live, operation information including information on the operation of the content by a performer appearing in the live is acquired from a performer terminal used by the performer,
controlling the stored content according to the acquired operation information;
A program for causing a computer to execute a process of distributing the controlled content as viewing content to a viewer terminal of a viewer viewing the live.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021065906A JP2022161245A (en) | 2021-04-08 | 2021-04-08 | Information processing device, live distribution system, information processing method and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021065906A JP2022161245A (en) | 2021-04-08 | 2021-04-08 | Information processing device, live distribution system, information processing method and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2022161245A true JP2022161245A (en) | 2022-10-21 |
Family
ID=83658758
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021065906A Pending JP2022161245A (en) | 2021-04-08 | 2021-04-08 | Information processing device, live distribution system, information processing method and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2022161245A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117440209A (en) * | 2023-12-15 | 2024-01-23 | 牡丹江师范学院 | Implementation method and system based on singing scene |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013232819A (en) * | 2012-04-27 | 2013-11-14 | Ideep Solutions Corp | Electronic conference system |
| JP2015094970A (en) * | 2013-11-08 | 2015-05-18 | シャープ株式会社 | Conference support system, server, terminal device, conference support method, and conference support program |
| JP2016027458A (en) * | 2014-06-23 | 2016-02-18 | 株式会社リコー | Terminal device, program, role determination method, and information processing system |
-
2021
- 2021-04-08 JP JP2021065906A patent/JP2022161245A/en active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013232819A (en) * | 2012-04-27 | 2013-11-14 | Ideep Solutions Corp | Electronic conference system |
| JP2015094970A (en) * | 2013-11-08 | 2015-05-18 | シャープ株式会社 | Conference support system, server, terminal device, conference support method, and conference support program |
| JP2016027458A (en) * | 2014-06-23 | 2016-02-18 | 株式会社リコー | Terminal device, program, role determination method, and information processing system |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117440209A (en) * | 2023-12-15 | 2024-01-23 | 牡丹江师范学院 | Implementation method and system based on singing scene |
| CN117440209B (en) * | 2023-12-15 | 2024-03-01 | 牡丹江师范学院 | Implementation method and system based on singing scene |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10567448B2 (en) | Participation queue system and method for online video conferencing | |
| US11399212B2 (en) | Terminal device application program, terminal device control method, terminal device, and live broadcast distribution server program providing questionnaire creation by terminal device | |
| US8571956B2 (en) | System architecture and methods for composing and directing participant experiences | |
| JP4555365B2 (en) | Distance education system and multimedia content display control method | |
| US20100005394A1 (en) | Method and system for collaborative viewing | |
| US10291669B2 (en) | Platform for facilitating paced, synchronous interactive experiences | |
| MX2011010522A (en) | System and method for hybrid course instruction. | |
| WO2022164537A1 (en) | Multi-point video presentations with live annotation | |
| JP2018181310A (en) | Application program for terminal equipment, control method for terminal equipment, terminal equipment, and program for live broadcast distribution server | |
| WO2015198869A1 (en) | Terminal device, program, method for sharing content and information processing system | |
| Pishva et al. | Smart Classrooms for Distance Education and their Adoption to Multiple Classroom Architecture. | |
| KR101928524B1 (en) | Apparatus and method for providing lecture | |
| JP6508009B2 (en) | Terminal device, screen recording method, program, and information processing system | |
| JP2022161245A (en) | Information processing device, live distribution system, information processing method and program | |
| JP7408506B2 (en) | Content distribution system, content distribution method, and content distribution program | |
| WO2021001940A1 (en) | Live delivery system | |
| Locatis et al. | A virtual computer lab for distance biomedical technology education | |
| JP2008066794A (en) | Video conference reservation/execution control/recording control unit, video conference reservation/execution control/recording control method, and video conference reservation/execution control/recording control program | |
| Reynolds et al. | Webcasting: casting the web more widely | |
| KR101687901B1 (en) | Method and system for sharing screen writing between devices connected to network | |
| JP2020166898A (en) | Terminal device, program, content sharing method, and information processing system | |
| Labhart et al. | The ShanghAI Lectures: A global education project on artificial intelligence | |
| Chunwijitra | An advanced cloud-based e-learning platform for higher education for low speed internet | |
| Osamnia et al. | A novel automated course generation system embedded in the online lecturing platform for higher education | |
| JP7141143B2 (en) | online meeting system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20210413 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220106 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230222 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230307 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231003 |