JP2024027287A - 遠隔映像配信システム、および遠隔映像配信方法 - Google Patents

Abstract

【課題】遠隔地で撮像した映像をユーザが所望する色調等の映像として配信する。【解決手段】本開示の一態様は、遠隔地に配置された撮像装置により撮像された映像データを配信する映像配信装置と、映像配信装置により配信された映像データを受信する映像受信部と、映像受信部により受信した映像データを用いて映像を表示する映像表示部と、ユーザの操作を受け付ける受付部と、受付部により受け付けた操作に基づいて映像データのパラメータの変更を指示する指示情報を映像配信装置に送信する情報送信部と、を備える映像表示装置と、を備え、映像配信装置は、指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信する、遠隔映像配信システムである。【選択図】図１

Description

特許法第３０条第２項適用申請有り 〔１〕〔ウェブサイト〕 ウェブサイトの掲載日 令和４年５月３０日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｓｏｌｕｔｉｏｎ．ｔｏｐｐａｎ．ｃｏ．ｊｐ／ｓｅｃｕｒｅ／ｓｅｒｖｉｃｅ／ｒｅｍｏｐｉｃｋ．ｈｔｍｌ 遠隔コミュニケーションサービス「ＲｅｍｏＰｉｃｋ（リモピック）」 ＜資 料＞ ウェブサイトのプリントアウト

本発明は、遠隔映像配信システム、および遠隔映像配信方法に関する。

複数の端末装置間で情報を共有する技術が知られている。例えば、特許文献１に記載された遠隔作業支援システムは、複数の端末装置を利用して遠隔作業を支援するために、複数の端末装置のそれぞれのタッチパネルにポインタを表示する。複数の携帯端末のそれぞれは、タッチパネルの表示画面に表示される画像の特徴点の位置情報とポインタの位置情報との相対的な位置関係に基づいて画像の特徴点を原点とする相対座標系を形成し、画像を共有する他の携帯端末との間の表示画面サイズの違いに応じた座標調整を行っている。これにより遠隔作業支援システムは、複数の携帯端末の間で正しく座標調整がなされた映像およびポインタ情報を共有することができるとしている。

特開2014-197745号公報

しかしながら、遠隔作業支援システムは、複数の携帯端末の間で位置情報を共有することができるが、複数の携帯端末の間で映像の色調等を共有することができない。例えば、ユーザが保有する端末装置に、遠隔地で撮像した映像を配信した場合に、ユーザが所望するような色調等の映像を共有することができない可能性がある。

本開示は、このような事情に鑑みてなされたもので、遠隔地で撮像した映像をユーザが所望する色調等の映像として配信することができる遠隔映像配信システム、および遠隔映像配信方法を提供することを目的としている。

本開示は上述した課題を解決するためになされたもので、本開示の一態様は、遠隔地に配置された撮像装置により撮像された映像データを配信する映像配信装置と、前記映像配信装置により配信された前記映像データを受信する映像受信部と、前記映像受信部により受信した前記映像データを用いて映像を表示する映像表示部と、ユーザの操作を受け付ける受付部と、前記受付部により受け付けた操作に基づいて前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信する情報送信部と、を備える映像表示装置と、を備え、前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信する、遠隔映像配信システム、である。

本開示の他の態様は、遠隔地に配置された撮像装置により映像データを生成するステップと、映像配信装置が、前記撮像装置により撮像された映像データを配信するステップと、映像表示装置が、前記映像配信装置により配信された前記映像データを受信するステップと、前記映像表示装置が、受信した前記映像データを用いて映像を表示するステップと、前記映像表示装置が、ユーザの操作を受け付け、前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信するステップとを有し、前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信する、遠隔映像配信方法、である。

本発明の一態様によれば、遠隔地で撮像した映像をユーザが所望する色調等の映像として配信することができる。

実施の形態における遠隔映像配信システムの一構成例を示すブロック図である。 実施の形態における映像配信装置およびユーザ端末装置の一例を示す図である。 実施の形態における映像配信装置およびユーザ端末装置の機能的な構成の一例を示すブロック図である。 実施の形態における映像配信装置とユーザ端末装置との間で送受信されるデータおよび情報等を示すシーケンス図である。

以下、本発明を適用した遠隔映像配信システム、および遠隔映像配信方法を、図面を参照して説明する。

[遠隔映像配信システムの構成例]
図１は、実施の形態における遠隔映像配信システムの一構成例を示すブロック図である。遠隔映像配信システムは、例えば、ユーザ端末装置１００と、映像配信装置２００と、ＡＰＩ（Application Programming Interface）３００と、ルーム管理装置４００とを備える。ユーザ端末装置１００、映像配信装置２００、ＡＰＩ３００およびルーム管理装置４００は、インターネット等のネットワークＮＷに接続するためのＮＩＣ（Network Interface Card）または無線通信モジュールなどの通信インターフェースを有する。ネットワークＮＷは、例えばインターネット等の汎用ネットワーク、およびローカル５ＧまたはＷｉｆｉ（登録商標）などのプライベートなネットワークを含んでよい。実施の形態の遠隔映像配信システムにおいて、映像配信装置２００は、農場でリンゴなどの農作物を販売する映像配信者によって装着されるスマートグラスであり、ユーザ端末装置１００は、農作物の購入するユーザにより操作されるスマートフォン、タブレット、パーソナルコンピュータ等である。

遠隔映像配信システムは、ユーザ端末装置１００と映像配信装置２００とをルーム情報を用いて接続し、リアルタイムで映像および音声を送受信する映像配信サービスを提供する。なお、以下の実施の形態において映像配信装置２００により撮像した映像をユーザ端末装置１００にリアルタイムに配信しながら、音声およびポインタ等の情報を送受信する映像配信サービスについて説明する。

ユーザ端末装置１００は、映像配信サービスを受けるユーザにより操作されるスマートフォンまたはパーソナルコンピュータ等である。ユーザ端末装置１００は、例えば、映像配信サービスを受けるためのアプリケーションソフトウェアをＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等のプロセッサがプログラムメモリに格納されたプログラムを実行する。

映像配信装置２００は、例えば映像配信者が装着するスマートグラス等のグラス型カメラ装置を含む。映像配信装置２００は、映像配信者に装着されるデバイスに限らず、スマートフォンなどの携帯型の端末装置であってよい。映像配信装置２００は、例えば農場の生産物を撮像し、撮像した映像データを、ＡＰＩ３００を介してユーザ端末装置１００に送信する。

ＡＰＩ３００は、例えばリアルタイムでメッセージ情報、映像データ、および音声データを送受信することができるＡＰＩである。メッセージ情報は、例えば、映像データ中におけるポインタの座標を示す情報である。ＡＰＩ３００は、ユーザ端末装置１００と映像配信装置２００との間でメッセージ情報をリアルタイムに送受信する。ＡＰＩ３００は、ユーザ端末装置１００と映像配信装置２００との間で映像データおよび音声データをリアルタイムに送受信する。

ユーザ端末装置１００は、ＡＰＩ３００を用いて指示情報を映像配信装置２００に送信してよい。指示情報は、ユーザの操作に基づいて映像データのパラメータの変更を指示する情報である。映像データのパラメータは、ユーザ端末装置１００において表示される映像の色調を変化させるパラメータであるが、これに限定されず、映像のホワイトバランス、コントラスト、色温度、シャープネス、赤みなどの映像の見え方を調整するパラメータであればよい。

ルーム管理装置４００は、ユーザ端末装置１００および映像配信装置２００にリアルタイムで映像等を送受信するルームを提供するための情報処理装置である。ルーム管理装置４００は、例えば、データベース装置４１０と、認証部４２０と、管理部４３０とを備える。データベース装置４１０は、ユーザ端末装置１００から送信されたルーム情報の設定要求を受け付ける。データベース装置４１０は、映像配信装置２００から送信されたルーム情報の設定要求を受け付ける。認証部４２０は、映像配信サービスを提供する運営者から映像配信サービスのユーザ情報を受け付ける。認証部４２０は、映像配信者のユーザ情報およびユーザ端末装置１００のユーザ情報を映像配信サービスのユーザとして認証し、認証が成功した場合に、データベース装置４１０にユーザ情報を登録する。管理部４３０は、ルームに関する入室および退室の管理を行う。

ルーム管理装置４００は、例えば、映像配信装置２００からルーム予約を受け付けることにより映像配信サービスの利用権限を付与する。映像配信装置２００は、例えば、映像配信サービスを利用する日時、ＩＤ、パスワードなどのルーム情報を取得し、ユーザ端末装置１００との間で共有する。これにより映像配信装置２００およびユーザ端末装置１００は、映像配信サービスの利用権限に対応したルーム情報をルーム管理装置４００に送信することで、映像配信サービスを受けることができる。

図２は、映像配信装置２００およびユーザ端末装置１００の一例を示す図である。映像配信装置２００は、例えば、本体部２００ａと、筐体部２００ｂと、装着部２００ｃおよび２００ｄを備える。本体部２００ａは、映像配信装置２００を動作させるための通信部等が収容されている。筐体部２００ｂは、カメラ部２１０と、マイク部２２０と、スピーカ部（不図示）と、表示部２３０とを収容する。装着部２００ｃおよび２００ｄは、映像配信者の頭部に映像配信装置２００を装着するための部位である。映像配信装置２００は、映像配信者に装着されることで、映像配信者の視線に近い映像を撮像し、映像配信者から発せられた音声および映像配信者周囲の音など検出することができる。これにより映像配信装置２００は、映像データおよび音声データをユーザ端末装置１００に送信する。また、映像配信装置２００は、ユーザ端末装置１００から音声データを受信し、スピーカ部を介してユーザの音声を映像配信者に伝えることができる。

ユーザ端末装置１００は、ディスプレイ部１１０と、マイク部およびスピーカ部（不図示）とを備える。ディスプレイ部１１０は、内蔵センサを備えることによりタッチパネルとして機能する。ディスプレイ部１１０には、映像配信装置２００から受信した映像データを用いて表示された映像、映像調整用操作画像１００ａ、およびポインタ１００ｂが表示される。映像調整用操作画像１００ａには、ディスプレイ部１１０に表示される映像の見え方を表すパラメータに対応した画像が含まれる。具体的に、映像調整用操作画像１００ａには、映像のコントラストを調整する操作画像（黒丸）と、映像の色温度を調整する操作画像と、映像のシャープネスを調整する操作画像と、映像の赤みを調整する操作画像とを含む。ユーザ端末装置１００は、各操作画像を横方向にスライドさせるユーザの操作を受け付け、ディスプレイ部１１０に表示される映像の元となる映像データのパラメータを指示する指示情報を生成する。ポインタ１００ｂは、ユーザの指が接触した位置に基づいてディスプレイ部１１０に表示される。ユーザの指が接触した位置を示す位置情報は、映像配信装置２００に送信される。これによりユーザは、例えば、美味しそうなリンゴを探すために赤みを強くして映像を表示させたいときに、赤みを調整するよう操作画像を操作することで、映像データのパラメータとして赤みを調整する指示情報をユーザ端末装置１００から送信させることができる。

ユーザ端末装置１００は、ユーザの操作に基づいて、または自動的に最適なポインタ色を選択してよい。これによりユーザ端末装置１００は、映像配信者に分かり易い色のポインタ色で位置情報を伝達することができる。

[映像配信装置２００およびユーザ端末装置１００の構成例]
図３は、映像配信装置２００およびユーザ端末装置１００の機能的な構成の一例を示すブロック図である。映像配信装置２００は、例えば、カメラ部２１０と、マイク部２２０と、表示部２３０と、通信部２４０と、画像処理部２５０と、スピーカ部２６０と、を備える。通信部２４０は、例えばWi-Fi、Bluetoothなどを利用して無線通信を行う。通信部２４０は、映像データおよび音声データ等を送受信する。

画像処理部２５０は、カメラ部２１０により生成された映像データを表示部２３０に出力して映像を表示させる。画像処理部２５０は、通信部２４０によりポインタの位置情報を受信した場合、位置情報に対応した表示部２３０内の表示位置にポインタに対応した画像を表示させる。これにより画像処理部２５０は、ユーザ端末装置１００が表示しているポインタの位置を、ユーザと映像配信者との間で共有させることができる。

画像処理部２５０は、通信部２４０により受信した指示情報に基づいて表示データのパラメータを調整して、パラメータ調整後の映像データを、通信部２４０を介してユーザ端末装置１００に送信させる。なお、画像処理部２５０は、カメラ部２１０により撮像された映像データまたはパラメータ調整後の映像データの何れかを表示部２３０に出力して映像を表示させてよい。画像処理部２５０は、カメラ部２１０により撮像された映像データを表示部２３０により表示させることにより、映像配信者がカメラ部２１０により撮像されている映像を確認しやすい映像データのパラメータで映像を表示させることができる。画像処理部２５０は、パラメータ調整後の映像データを表示部２３０により表示させることにより、ユーザ端末装置１００のユーザにとって認識しやすい映像を映像配信者に認識させることできる。

画像処理部２５０は、ユーザ端末装置１００から受信した指示情報の内容を文字情報として表示部２３０に表示させてよい。これにより画像処理部２５０は、ユーザによって映像データのパラメータが調整されたことを映像配信者に認識させることができる。

ユーザ端末装置１００は、例えば、ディスプレイ部１１０と、通信部１２０と、画像処理部１３０と、スピーカ部１４０と、タッチパネルに相当する操作部１５０と、マイク部１６０とを備える。通信部１２０は、例えばWi-Fi、Bluetoothなどを利用して無線通信を行う。通信部１２０は、映像データおよび音声データ等を送受信する。画像処理部１３０は、通信部１２０により受信した映像データをディスプレイ部１１０に出力することで、ディスプレイ部１１０に映像を表示させる。

画像処理部１３０は、操作部１５０に対する操作に基づいて、映像データのパラメータが制御部１７０から供給される。画像処理部１３０は、調整された映像データのパラメータに従って通信部１２０により受信した映像データのパラメータを調整し、パラメータ調整後の映像データをディスプレイ部１１０に表示させる。これにより画像処理部１３０は、ユーザの操作に基づいて映像を調整することができる。

制御部１７０は、操作部１５０に対する操作に基づく映像データのパラメータを指示情報として映像配信装置２００に送信させる。これにより制御部１７０は、指示情報に基づいてパラメータが変更された映像データを映像配信装置２００に生成させ、パラメータ調整後の映像データを受信し、受信した映像データを用いてディスプレイ部１１０に映像を表示させることができる。

なお、本実施の形態においては映像配信装置２００が指示情報に基づいて表示データのパラメータを調整したが、他の手段により表示データのパラメータを変更してよい。例えば、ＡＰＩ３００により映像データのパラメータを調整し、映像データ表示部２３０およびユーザ端末装置１００のディスプレイ部１１０の双方にパラメータの調整が加えられた映像データを用いて表示してよい。

[遠隔映像配信システムの動作例]
図４は、映像配信装置２００とユーザ端末装置１００との間で送受信されるデータおよび情報等を示すシーケンス図である。映像配信装置２００およびユーザ端末装置１００は、ルームの予約日時に、ルーム情報をルーム管理装置４００に送信することでルームを設定する（ステップＳ１）。これにより映像配信装置２００およびユーザ端末装置１００は、ＡＰＩ３００を介してリアルタイムで映像データおよび音声データ等を送受信する通信状態を確立することができる。

映像配信装置２００は、カメラ部２１０により映像を撮像し、撮像した映像データＤ１０をユーザ端末装置１００に配信する（ステップＳ１０）。ユーザ端末装置１００は、映像データＤ１０を受信して映像を表示し、ユーザの操作に基づいて指示情報Ｄ２０を生成して、映像配信装置２００に送信する（ステップＳ２０）。ユーザ端末装置１００は、ユーザの操作に連動してリアルタイムで指示情報Ｄ２０を送信してよく、ユーザの操作により映像データのパラメータ調整が完了したタイミングで指示情報Ｄ２０を送信してよい。映像データのパラメータ調整が完了したタイミングは、例えば、映像調整用操作画像１００ａを閉じる操作を受け付けたタイミングであってよい。

映像配信装置２００は、ユーザ端末装置１００から受信した指示情報Ｄ２０に基づいて撮像した映像データＤ１２をユーザ端末装置１００に送信する（ステップＳ３０）。ユーザ端末装置１００は、指示情報に従ってパラメータが調整された映像データＤ１２を用いて表示を行う（ステップＳ４０）。これによりユーザ端末装置１００は、例えばユーザが好む色調の映像をディスプレイ部１１０に表示させることができる。

ユーザが映像に含まれる対象物（例えばリンゴの一部）をタップする操作を行った場合、制御部１７０は、タップした位置を中心とした所定領域をズームする指示情報Ｄ２２を生成、通信部１２０を介して映像配信装置２００に送信させる（ステップＳ４０）。映像配信装置２００は、指示情報Ｄ２２を受信すると、指示情報Ｄ２２に従ってカメラ部２１０を制御する（ステップＳ５０）。映像配信装置２００は、タップした位置に対応する対象物をズームアップした映像をカメラ部２１０に撮像させた映像データＤ１４をユーザ端末装置１００に送信する。これによりユーザ端末装置１００は、映像データＤ１４を用いて、ディスプレイ部１１０により、タップした対象物をズームアップした映像をリアルタイムで表示することができる（ステップＳ６０）。

なお、映像配信装置２００は、ユーザ端末装置１００に一部をズームアップした映像を送信した場合、ズームアップした映像を表示部２３０に表示させてもよく、ズームアップした映像を表示部２３０に表示させずに所定の画角で撮像した映像を表示しつづけてよい。

ユーザ端末装置１００は、カメラ部２１０を制御する指示情報として、映像の一部をズームアップさせる情報に限定されず、他の情報であってよい。ユーザ端末装置１００は、例えば、映像中の対象物の動きを滑らかに視認するために、映像のフレームレートを示す指示情報を映像配信装置２００に送信してよい。これによりカメラ部２１０は、映像データのフレームレートを指示情報に基づいて変更し、高いフレームレートの映像データを生成することができる。

[実施の形態の効果]
以上説明したように、実施の形態の遠隔映像配信システムによれば、遠隔地に配置された撮像装置（２１０）により撮像された映像データを配信する映像配信装置（２００、２４０）と、映像配信装置により配信された映像データを受信する映像受信部（１２０）と、映像受信部により受信した映像データを用いて映像を表示する映像表示部（１１０）と、ユーザの操作を受け付ける受付部（１５０、１７０）と、受付部により受け付けた操作に基づいて映像データのパラメータの変更を指示する指示情報を映像配信装置に送信する情報送信部（１２０）と、を備える映像表示装置（１００）と、を備え、映像配信装置（２００）は、指示情報に基づいてパラメータが変更された映像データを映像表示装置（１００）に配信する、遠隔映像配信システムを実現することができる。実施の形態の遠隔映像配信システムによれば、例えば色調を調整するように映像データのパラメータを指示する指示情報を映像配信装置に送信することで、遠隔地で撮像した映像をユーザが所望する色調等の映像として配信することができる。また、実施の形態の遠隔映像配信システムによれば、映像を視聴するユーザ側から映像配信側にホワイトバランスの設定をする映像データのパラメータを送信するので、より現実に近い色味を選択した映像を視聴することができる。

実施の形態の遠隔映像配信システムによれば、遠隔地に配置された撮像装置（２１０）により映像データを生成するステップと、撮像装置により撮像された映像データを配信するステップと、映像表示装置（１００）が、映像配信装置（２００）により配信された映像データを受信するステップと、映像表示装置が、受信した映像データを用いて映像を表示するステップと、映像表示装置が、ユーザの操作を受け付け、映像データのパラメータの変更を指示する指示情報を映像配信装置に送信するステップとを有し、映像配信装置は、指示情報に基づいてパラメータが変更された映像データを映像表示装置に配信する、遠隔映像配信方法を実現することができる。実施の形態の遠隔映像配信システムによれば、例えば色調を調整するように映像データのパラメータを指示する指示情報を映像配信装置に送信することで、遠隔地で撮像した映像をユーザが所望する色調等の映像として配信することができる。

実施の形態の遠隔映像配信システムにおいて、映像データのパラメータを、映像データにより表示される映像の色調を調整するパラメータにすることで、遠隔地で撮像した映像をユーザが所望する色調等の映像として配信することができる。

実施の形態の遠隔映像配信システムにおいて、映像配信装置（２００）は、撮像装置（２１０）により撮像された映像データに画像処理を施し、画像処理を施した映像データを映像配信装置に配信させる画像処理部（２５０）を備え、指示情報は画像処理部を制御する情報であり、画像処理部は、パラメータに基づいて、撮像装置により撮像された映像データの色調を調整することができる。これにより実施の形態の遠隔映像配信システムによれば、撮像装置のプロファイルに拘わらず、画像処理により映像データのパラメータを調整することができる。

ユーザの使用環境、映像配信装置２００におけるカメラ部２１０および画像処理部２５０の種類、およびユーザ端末装置１００のディスプレイ部１１０および画像処理部１３０の種類によって映像の見え方が異なる。使用環境等によって映像の見え方が異なるとユーザが所望する色調で対象物を見ることができない場合がある。また、ユーザの操作によって映像の見え方を調整しても映像配信装置２００から送信された映像データのパラメータを調整することができないためユーザが希望する色調等に修正することができないことがある。これに対し、実施の形態の遠隔映像配信システムによれば、ユーザ端末装置１００から映像配信装置２００にユーザの操作に基づく指示情報を送信し、映像配信装置２００から送信する映像データのパラメータを調整することができる。この結果、実施の形態の遠隔映像配信システムによれば、ユーザの使用環境等に合わせたパラメータの映像データを映像配信装置２００からユーザ端末装置１００に送信し、ユーザが更に映像の色調等を調整したい場合には画像処理部１３０の処理によって細やかに映像の色調等を調整することができる。

実施の形態の遠隔映像配信システムによれば、指示情報が撮像装置（２１０）を制御する情報であり、パラメータが撮像装置を制御することにより映像データの一部をズームする情報であるので、ユーザの操作に基づいて撮像装置の光学ズーム機能またはデジタルズーム機能の少なくとも一方を制御することにより、ズームした箇所の高精細な映像をユーザに視認させることができる。

実施の形態の遠隔映像配信システムによれば、指示情報は撮像装置（２１０）を制御する情報であり、パラメータが映像データのフレームレートを示す情報であるので、ユーザの操作に基づいて映像データのフレームレートを制御することにより、滑らかな動きの映像をユーザに視認させることができる。

実施の形態の遠隔映像配信システムによれば、撮像装置（２１０）および映像配信装置（２４０）は表示部（２３０）と共に映像配信者の頭部に装着され、指示情報が映像表示装置（１００）から送信された場合に、映像配信装置は、指示情報に基づいてパラメータが変更された映像データを映像表示装置に配信し、表示部は、パラメータが変更されていない映像データを用いて映像を表示することができる。これにより実施の形態の遠隔映像配信システムによれば、指示情報により映像データのパラメータを変更しても、映像配信者に視認される映像に影響を与えることを回避することができる。また、実施の形態の遠隔映像配信システムによれば、表示部により指示情報を示す情報を表示することで、映像配信者に、ユーザが望む映像を認識させることができる。

[変形例]
ユーザ端末装置１００および映像配信装置２００は、それぞれの装置のプロファイル情報に基づいて映像配信装置２００の表示部２３０により表示される映像の色調と、ユーザ端末装置１００のディスプレイ部１１０により表示される色調とを一致させるように映像データのパラメータを調整してよい。装置のプロファイル情報は、ユーザ端末装置１００および映像配信装置２００のそれぞれの種類、機種、設定等の装置の特性を表す情報である。例えば、映像配信装置２００は、ルームの設定が完了した後、ユーザ端末装置１００のディスプレイ部１１０のプロファイル情報を取得する。映像配信装置２００は、表示部２３０に表示している映像の色調と同じ色調の映像がディスプレイ部１１０で表示されるように、カメラ部２１０により生成した映像データのパラメータを調整する。ユーザ端末装置１００は、パラメータ調整後の映像データを用いてディスプレイ部１１０に映像を表示させることにより、表示部２３０に表示された映像の色調と同じ色調の映像をユーザに視認させることができる。

ユーザ端末装置１００は、カメラ部２１０のプロファイル情報を取得し、映像配信装置２００の表示部２３０に表示している映像の色調と同じ色調の映像がディスプレイ部１１０で表示されるように、カメラ部２１０により生成した映像データのパラメータを調整する指示情報を映像配信装置２００に送信する。映像配信装置２００は、指示情報に基づいて映像データのパラメータを調整してユーザ端末装置１００に映像データを送信する。ユーザ端末装置１００は、パラメータ調整後の映像データを用いてディスプレイ部１１０に映像を表示させることにより、表示部２３０に表示された映像の色調と同じ色調の映像をユーザに視認させることができる。

上述した実施形態の遠隔映像配信システムは、例えばバーチャルりんご狩りなどの果物狩りに限定されず、観光地へのバーチャル旅行などの観光分野、遠隔授業、研修、バーチャル体験などの教育分野または製造分野、ライブコマース、買い物代行、商談などの流通、小売分野、患者の近くにいる者が装着したスマートグラスと医者が操作する端末とを用いる医療分野または介護分野、水中移動または飛行するドローンと観察者が操作する端末とを用いるドローンの活用などにも適用可能である。

なお、各実施の形態および変形例について説明したが、一例であってこれらに限られず、例えば、各実施の形態や各変形例のうちのいずれかや、各実施の形態の一部や各変形例の一部を、他の１または複数の実施の形態や他の１または複数の変形例と組み合わせて本発明の一態様を実現させてもよい。

１００…映像表示装置、ユーザ端末装置、１００ａ…映像調整用操作画像、１００ｂ…ポインタ、１１０…映像表示部、ディスプレイ部、１２０…通信部、映像受信部、情報送信部、１３０…画像処理部、１４０…スピーカ部、１５０…操作部、受付部、１６０…マイク部、１７０…受付部、制御部、２００…映像配信装置、２１０…撮像装置、２１０…カメラ部、２２０…マイク部、２３０…表示部、２４０…通信部、２４０…映像配信装置、２５０…画像処理部、２６０…スピーカ部、４００…ルーム管理装置、４１０…データベース装置、４２０…認証部、４３０…管理部

本開示は上述した課題を解決するためになされたもので、本開示の一態様は遠隔地に配置された撮像装置により撮像された映像データを配信する映像配信装置と、前記映像配信装置により配信された前記映像データを受信する映像受信部と、前記映像受信部により受信した前記映像データを用いて映像を表示する映像表示部と、ユーザの操作を受け付ける受付部と、前記受付部により受け付けた操作に基づいて前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信する情報送信部と、を備える映像表示装置と、を備え、前記撮像装置および前記映像配信装置は表示部と共に映像配信者の頭部に装着され、前記指示情報が前記映像表示装置から送信された場合に、前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信し、前記表示部は、前記パラメータが変更されていない前記映像データを用いて映像を表示する、遠隔映像配信システム、である。

本開示の他の態様は、遠隔地に配置された撮像装置により映像データを生成するステップと、映像配信装置が、前記撮像装置により撮像された映像データを配信するステップと、映像表示装置が、映像配信装置により配信された前記映像データを受信するステップと、前記映像表示装置が、受信した前記映像データを用いて映像を表示するステップと、前記映像表示装置が、ユーザの操作を受け付け、前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信するステップとを有し、前記撮像装置および前記映像配信装置は表示部と共に映像配信者の頭部に装着され、前記指示情報が前記映像表示装置から送信された場合に、前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信し、前記表示部は、前記パラメータが変更されていない前記映像データを用いて映像を表示する、遠隔映像配信方法、である。

Claims (8)

1. 遠隔地に配置された撮像装置により撮像された映像データを配信する映像配信装置と、
   前記映像配信装置により配信された前記映像データを受信する映像受信部と、前記映像受信部により受信した前記映像データを用いて映像を表示する映像表示部と、ユーザの操作を受け付ける受付部と、前記受付部により受け付けた操作に基づいて前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信する情報送信部と、を備える映像表示装置と、を備え、
   前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信する、遠隔映像配信システム。
2. 前記パラメータは、前記映像データにより表示される映像の色調を調整するパラメータである、請求項１に記載の遠隔映像配信システム。
3. 前記映像配信装置は、前記撮像装置により撮像された前記映像データに画像処理を施し、画像処理を施した映像データを前記映像配信装置に配信させる画像処理部を備え、
   前記指示情報は前記画像処理部を制御する情報であり、
   前記画像処理部は、前記パラメータに基づいて、前記撮像装置により撮像された映像データの色調を調整する、請求項２に記載の遠隔映像配信システム。
4. 前記指示情報は前記撮像装置を制御する情報であり、
   前記パラメータは、前記撮像装置を制御することにより前記映像データの一部をズームする情報である、請求項１に記載の遠隔映像配信システム。
5. 前記指示情報は前記撮像装置を制御する情報であり、
   前記パラメータは、前記映像データのフレームレートを示す情報である、請求項１に記載の遠隔映像配信システム。
6. 前記撮像装置および前記映像配信装置は表示部と共に映像配信者の頭部に装着され、
   前記指示情報が前記映像表示装置から送信された場合に、前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信し、前記表示部は、前記パラメータが変更されていない前記映像データを用いて映像を表示する、
   請求項１に記載の遠隔映像配信システム。
7. 前記表示部は、前記指示情報を示す情報を表示する、請求項６に記載の遠隔映像配信システム。
8. 遠隔地に配置された撮像装置により映像データを生成するステップと、
   映像配信装置が、前記撮像装置により撮像された映像データを配信するステップと、
   映像表示装置が、映像配信装置により配信された前記映像データを受信するステップと、
   前記映像表示装置が、受信した前記映像データを用いて映像を表示するステップと、
   前記映像表示装置が、ユーザの操作を受け付け、前記映像データのパラメータの変更を指示する指示情報を前記映像配信装置に送信するステップとを有し、
   前記映像配信装置は、前記指示情報に基づいて前記パラメータが変更された映像データを前記映像表示装置に配信する、遠隔映像配信方法。

Images