JP2020036156A - Video transmission device, video transmission method, and computer program - Google Patents
Video transmission device, video transmission method, and computer program Download PDFInfo
- Publication number
- JP2020036156A JP2020036156A JP2018160292A JP2018160292A JP2020036156A JP 2020036156 A JP2020036156 A JP 2020036156A JP 2018160292 A JP2018160292 A JP 2018160292A JP 2018160292 A JP2018160292 A JP 2018160292A JP 2020036156 A JP2020036156 A JP 2020036156A
- Authority
- JP
- Japan
- Prior art keywords
- communication
- video
- wireless communication
- communication path
- wireless
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Mobile Radio Communication Systems (AREA)
Abstract
Description
本発明は、映像送信装置、映像送信方法及びコンピュータプログラムに関する。 The present invention relates to a video transmission device, a video transmission method, and a computer program.
無線通信品質を向上させるための無線通信技術として、例えば特許文献1に記載の従来技術が知られている。特許文献1に記載の従来技術では、移動端末装置は、複数の契約事業者がそれぞれ提供する無線通信網の受信電界強度や受信信号の誤り率に基づき複数の契約事業者が提供する無線通信網の中からより受信電界強度の高いまたは受信信号の誤り率の低い無線通信網を選択して接続要求を行う。
2. Description of the Related Art As a wireless communication technique for improving wireless communication quality, for example, a conventional technique described in
また、従来の映像伝送技術として、例えば非特許文献1に記載の従来技術が知られている。非特許文献1に記載の従来技術では、複数のIP(Internet Protocol)通信路に映像データを分散させて送信する際に、各IP通信路の混雑状況を予測し、混雑が予測されたIP通信路へのデータ配分比率を減少させる。
Further, as a conventional video transmission technology, for example, a conventional technology described in Non-Patent
しかし、上述した従来の無線通信技術では、移動端末装置が接続する無線通信網を、複数の契約事業者が提供する無線通信網の間で切り替えると、送信側と受信側との間のIP通信が切断されるので、送信側と受信側との間のデータ通信が途切れる。このため、上述した従来の無線通信技術では、例えば映像伝送システムにおいて、受信側で映像データを受信できななくなり、受信側で再生する映像が途絶える等、映像品質が劣化する。また、上述した従来の映像伝送技術では、無線通信路を介するIP通信路が存在する場合、当該無線通信路における無線環境の変化に応じた通信品質の変動に適応することが難しい。 However, in the above-described conventional wireless communication technology, when the wireless communication network to which the mobile terminal device connects is switched between wireless communication networks provided by a plurality of contract operators, IP communication between the transmitting side and the receiving side is not possible. Is disconnected, so that data communication between the transmitting side and the receiving side is interrupted. For this reason, in the above-described conventional wireless communication technology, for example, in a video transmission system, video data cannot be received on the reception side, and video quality to be reproduced on the reception side is interrupted. Further, with the above-described conventional video transmission technology, it is difficult to adapt to a change in communication quality according to a change in a wireless environment in the wireless communication path when an IP communication path exists via the wireless communication path.
本発明は、このような事情を考慮してなされたものであり、その目的は、無線通信路を介する複数のIP通信路を使用して伝送される映像の品質向上を図ることにある。 The present invention has been made in view of such circumstances, and an object of the present invention is to improve the quality of video transmitted using a plurality of IP communication paths via a wireless communication path.
(1)本発明の一態様は、各々異なる無線通信方式の無線通信路を確立する複数の無線通信部と、前記無線通信路の通信品質値を測定する無線測定部と、前記複数の無線通信部の各々に対応して設けられる複数のIP通信部であって、前記IP通信部に対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信部毎に異なるIPアドレスで確立する前記複数の前記IP通信部と、前記IP通信路の通信品質値を測定するIP測定部と、前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断部と、複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う送信制御部と、を備え、前記送信制御部は、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、映像送信装置である。
(2)本発明の一態様は、前記送信制御部は、前記総合通信路品質に基づいて該当する前記IP通信路の通信量上限を判断し、前記通信量上限に達するまで当該前記IP通信路に対して前記映像データを割り当てる、上記(1)の映像送信装置である。
(3)本発明の一態様は、前記無線通信路のハンドオーバタイミングを取得するハンドオーバタイミング取得部をさらに備え、前記送信制御部は、前記ハンドオーバタイミングに合わせて、映像データ送信方法を変更する、上記(1)又は(2)のいずれかの映像送信装置である。
(4)本発明の一態様は、前記送信制御部は、前記ハンドオーバタイミングに合わせて、カバレッジが異なる複数の前記無線通信方式の無線通信路に該当する複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う、上記(3)の映像送信装置である。
(5)本発明の一態様は、前記送信制御部は、前記ハンドオーバタイミングに合わせて、複数の前記IP通信路を使用して前記映像受信装置への映像データ冗長化送信を行う、上記(3)又は(4)のいずれかの映像送信装置である。
(1) One embodiment of the present invention provides a plurality of wireless communication units that establish wireless communication paths of different wireless communication schemes, a wireless measurement unit that measures a communication quality value of the wireless communication path, and the plurality of wireless communication units. A plurality of IP communication units provided corresponding to each of the units, wherein an IP communication path between video receiving apparatuses via the wireless communication path corresponding to the IP communication unit is provided with a different IP address for each of the IP communication units. A combination of the plurality of IP communication units to be established in, an IP measurement unit for measuring a communication quality value of the IP communication channel, and a communication quality value of the IP communication channel corresponding to the communication quality value of the wireless communication channel A communication channel quality determining unit that determines the total communication channel quality, and a transmission control unit that performs video data transmission to the video receiving device using the plurality of IP communication channels, and the transmission control unit includes: The overall channel quality and video data Selecting the IP communication path for transmitting the video data based on the importance of a video transmission apparatus.
(2) In one aspect of the present invention, the transmission control unit determines a communication volume upper limit of the corresponding IP communication channel based on the total communication channel quality, and determines the IP communication channel until the communication traffic upper limit is reached. The video transmission device according to the above (1), wherein the video data is assigned to the video transmission device.
(3) One aspect of the present invention further includes a handover timing acquisition unit that acquires a handover timing of the wireless communication path, wherein the transmission control unit changes a video data transmission method in accordance with the handover timing. The video transmission device according to any one of (1) and (2).
(4) In one aspect of the present invention, the transmission control unit uses the plurality of IP communication channels corresponding to the plurality of wireless communication channels of the plurality of wireless communication systems having different coverages in accordance with the handover timing. The video transmission device according to the above (3), which transmits video data to the video reception device.
(5) In one aspect of the present invention, the transmission control unit performs video data redundant transmission to the video receiving device using the plurality of IP communication paths in accordance with the handover timing. ) Or (4).
(6)本発明の一態様は、映像送信装置が、各々異なる無線通信方式の無線通信路を確立する複数の無線通信ステップと、前記映像送信装置が、前記無線通信路の通信品質値を測定する無線測定ステップと、前記映像送信装置が、前記複数の無線通信ステップの各々に対応して設けられる複数のIP通信ステップであって、前記IP通信ステップに対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信ステップ毎に異なるIPアドレスで確立する前記複数の前記IP通信ステップと、前記映像送信装置が、前記IP通信路の通信品質値を測定するIP測定ステップと、前記映像送信装置が、前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断ステップと、前記映像送信装置が、複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う制御ステップと、を含み、前記制御ステップは、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、映像送信方法である。 (6) In one aspect of the present invention, the video transmitting apparatus establishes a plurality of wireless communication paths of different wireless communication schemes, and the video transmitting apparatus measures a communication quality value of the wireless communication path. A wireless measurement step, wherein the video transmitting apparatus is provided with a plurality of IP communication steps provided corresponding to each of the plurality of wireless communication steps, and wherein the video transmitting apparatus receives video via the wireless communication path corresponding to the IP communication step. A plurality of the IP communication steps for establishing an IP communication path between devices with a different IP address for each IP communication step; and an IP measurement step for the video transmitting apparatus to measure a communication quality value of the IP communication path. A communication channel quality determining unit configured to determine a total communication channel quality based on a combination of a communication quality value of the wireless communication channel and a communication quality value of the corresponding IP communication channel. And a control step in which the video transmission device transmits video data to the video reception device using the plurality of IP communication paths, wherein the control step includes: A video transmission method for selecting the IP communication path for transmitting the video data based on the importance of the video communication.
(7)本発明の一態様は、映像送信装置のコンピュータに、各々異なる無線通信方式の無線通信路を確立する複数の無線通信ステップと、前記無線通信路の通信品質値を測定する無線測定ステップと、前記複数の無線通信ステップの各々に対応して設けられる複数のIP通信ステップであって、前記IP通信ステップに対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信ステップ毎に異なるIPアドレスで確立する前記複数の前記IP通信ステップと、前記IP通信路の通信品質値を測定するIP測定ステップと、前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断ステップと、複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う制御ステップと、を実行させるためのコンピュータプログラムであり、前記制御ステップは、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、コンピュータプログラムである。 (7) One embodiment of the present invention provides a computer of a video transmitting apparatus with a plurality of wireless communication steps for establishing wireless communication paths of different wireless communication schemes, and a wireless measurement step for measuring a communication quality value of the wireless communication path. And a plurality of IP communication steps provided corresponding to each of the plurality of wireless communication steps, wherein the IP communication path between video receiving devices via the wireless communication path corresponding to the IP communication step is the IP communication step. The plurality of IP communication steps established with different IP addresses for each communication step; an IP measurement step of measuring a communication quality value of the IP communication path; and the IP communication path corresponding to the communication quality value of the wireless communication path Channel quality determining step of determining an overall channel quality in combination with a communication quality value of the communication channel, and a video to the video receiving device using a plurality of the IP communication channels. And a control step of transmitting the video communication data based on the overall communication channel quality and the importance of the video data. Select a computer program.
本発明によれば、無線通信路を介する複数のIP通信路を使用して伝送される映像の品質向上を図ることができるという効果が得られる。 Advantageous Effects of Invention According to the present invention, it is possible to obtain an effect that the quality of a video transmitted using a plurality of IP communication paths via a wireless communication path can be improved.
以下、図面を参照し、本発明の実施形態について説明する。
図1は、一実施形態に係る映像送信装置の構成例を示すブロック図である。図1において、映像送信装置1は、複数(n個、nは2以上の整数)の通信部10−1、10−2、・・・、10−n(以下、特に区別しないときは「通信部10」と称する)と、入力部21と、送信バッファ22と、制御部30と、を備える。通信部10は、アンテナ11と、無線通信部12と、無線測定部13と、IP通信部14と、IP測定部15と、を備える。制御部30は、通信路品質判断部31と、送信制御部32と、を備える。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram illustrating a configuration example of a video transmission device according to an embodiment. In FIG. 1, a
通信部10−1、10−2、・・・、10−nにおいて、各無線通信部12は、異なる無線通信方式の無線通信路を確立する。通信部10−1、10−2、・・・、10−nに備わる合計n個の無線通信部12は、同時に無線通信を行っても互いの通信品質に悪影響を及ぼさないように、各無線通信方式が決定される。例えば、利用周波数帯や符号化方式などが異なる無線通信方式が各無線通信部12の無線通信方式に決定される。例えば、複数の無線通信部12は、各々異なる通信事業者が提供する携帯電話ネットワーク等の無線通信ネットワークに接続して無線通信路を確立するものであってもよい。また、複数の無線通信部12は、同じ通信事業者が提供する各々異なる無線通信方式で無線通信路を確立するものであってもよい。
In the communication units 10-1, 10-2,..., 10-n, each
アンテナ11は、自通信部10の無線通信部12の無線通信方式に適合するアンテナである。無線測定部13は、自通信部10の無線通信部12が確立する無線通信路の通信品質値を測定する。無線通信路の通信品質値は、例えば、電界強度や誤り率などである。
The
通信部10−1、10−2、・・・、10−nにおいて、各IP通信部14には、各々異なるIPアドレスが設定される。IP通信部14は、自己のIPアドレスで映像受信装置間のIP通信路を確立する。IP通信部14が確立する映像受信装置間のIP通信路は、自通信部10の無線通信部12が確立する無線通信路を介するIP通信路である。具体的には、IP通信部14は、映像受信装置のIPアドレスを宛先アドレスに設定するIPパケットに対して、自己のIPアドレスを送信元アドレスに設定する。IP通信部14は、映像受信装置宛てのIPパケットを自通信部10の無線通信部12へ渡す。無線通信部12は、自通信部10のIP通信部14から受け取った映像受信装置宛てのIPパケットを、自通信部10のアンテナ11を介して無線送信する。
In the communication units 10-1, 10-2,..., 10-n, different IP addresses are set in the respective
IP測定部15は、自通信部10のIP通信部14が確立するIP通信路の通信品質値を測定する。IP通信路の通信品質値は、例えば、遅延、ジッター、スループットなどである。
The
入力部21は、制御命令や、映像受信装置へ送信される映像データ等の入力データを受け付ける。入力部21が受け付けた制御命令は制御部30に渡される。入力部21が受け付けた映像データは送信バッファ22に格納される。本実施形態の一例として、1個の映像データのデータサイズは、1個のIPパケットに格納できるデータサイズである。また、各映像データは、自己のシーケンス番号(ID)と、自己の重要度とを有する。映像データの重要度は、例えば、MPEG等の動画像符号化方式における符号化フレームであって当該映像データに含まれる符号化フレームの重要度を示すものである。MPEGの3種類の符号化フレーム「Iフレーム」、「Pフレーム」及び「Bフレーム」のうち、Iフレームは、当該Iフレームを参照して復号が行われるPフレーム及びBフレームのキーフレームであって、Pフレーム及びBフレームに比して重要度が高い符号化フレームである。このように、MPEG等の動画像符号化方式における符号化フレームにおいて、復号の際に一の符号化フレームに依存する他の符号化フレームが多い当該一の符号化フレームほど高い重要度を割り当てる。
The
又は、映像データの重要度は、映像内容の重要度を示すものである。
ここで、映像内容の重要度の一例を説明する。本実施形態の一例として、映像データは、自動運転車両に備わる複数台のビデオカメラが撮像した撮像データである。複数台のビデオカメラは、自動運転車両の前方を撮像するビデオカメラ、自動運転車両の両側方(右側と左側)をそれぞれ撮像するビデオカメラ、自動運転車両の後方を撮像するビデオカメラなどである。
Alternatively, the importance of video data indicates the importance of video content.
Here, an example of the importance of the video content will be described. As an example of the present embodiment, the video data is image data captured by a plurality of video cameras provided in the self-driving vehicle. The plurality of video cameras include a video camera that images the front of the self-driving vehicle, a video camera that images both sides (right and left sides) of the self-driving vehicle, and a video camera that images the rear of the self-driving vehicle.
自動運転車両で撮像された映像データは、映像送信装置1から映像受信装置へ送信されて映像受信装置で受信された後、映像再生装置で再生されて、当該自動運転車両を遠隔操作する遠隔操作者に提示される。遠隔操作者は、提示された映像を見ながら、当該自動運転車両を遠隔操作する。このような場合、自動運転車両の運転状況に応じて、各ビデオカメラの映像の重要度が変わる。例えば、自動運転車両が直進している場合、自動運転車両の前方を撮像するビデオカメラの映像の重要度が比較的高く、他のビデオカメラの映像の重要度は比較的低い。一方、自動運転車両が右折や左折等の曲がって進む場合、自動運転車両の前方及び曲がる方の側方を撮像する各ビデオカメラの映像の重要度が比較的高く、他のビデオカメラの映像の重要度は比較的低い。自動運転車両が直進しているか、又は、曲がって進んでいるかは、自動運転車両のハンドル操作量に基づいて判断される。
The video data captured by the self-driving vehicle is transmitted from the
説明を図1に戻す。
制御部30において、通信路品質判断部31は、一の通信部10に係る無線通信路の通信品質値とIP通信路の通信品質値との組合せで総合通信路品質を判断する。例えば、無線通信路の通信品質値とIP通信路の通信品質値とから総合通信路品質値を決定する関数が予め設定され、通信路品質判断部31は、当該関数を使用して総合通信路品質値を求める。
The description returns to FIG.
In the
なお、通信路品質判断部31は、無線通信路の通信品質値とIP通信路の通信品質値とに加えて、さらに無線通信方式の契約情報を加味して総合通信路品質を判断してもよい。無線通信の契約情報は、例えば、通信料金や契約プランなどである。通信路品質判断部31は、例えば、通信料金が比較的安い無線通信方式の無線通信部12が確立する無線通信路に該当する総合通信路品質を、比較的良い品質として判断する。
Note that the channel
送信制御部32は、複数のIP通信路を使用して映像受信装置への映像データ送信を行う。具体的には、送信制御部32は、送信バッファ22から映像データを取り出して、いずれかの通信部10へ渡す。通信部10のIP通信部14は、送信制御部32から受け取った映像データを映像受信装置宛てのIPパケットに格納して自通信部10の無線通信部12へ渡す。無線通信部12は、自通信部10のIP通信部14から受け取った映像受信装置宛てのIPパケットを、自通信部10のアンテナ11を介して無線送信する。送信制御部32は、総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する通信部10つまりIP通信路を選択する。
The
次に図2を参照して本実施形態に係る映像伝送システムを説明する。図2は、本実施形態に係る映像伝送システムの構成例を示すブロック図である。図2において、映像伝送システム100は、映像送信装置1と、映像受信装置4とを備える。映像送信装置1には、映像生成装置2から映像データが入力される。映像生成装置2は、例えば、ビデオカメラで撮像した撮像データから映像データを生成する。又は、映像生成装置2は、例えば、コンピュータグラフィックにより映像データを生成してもよい。
Next, a video transmission system according to the present embodiment will be described with reference to FIG. FIG. 2 is a block diagram illustrating a configuration example of the video transmission system according to the present embodiment. 2, the
映像送信装置1は、通信部10−1、10−2、・・・、10−nに各々対応するn台の無線基地局3−1、3−2、・・・、3−nとの間で、n個の無線通信路を確立する。通信部10−1の無線通信部12は、無線基地局3−1に接続して無線通信方式R−1の無線通信路を確立する。通信部10−2の無線通信部12は、無線基地局3−2に接続して無線通信方式R−2の無線通信路を確立する。同様に、通信部10−nの無線通信部12は、無線基地局3−nに接続して無線通信方式R−nの無線通信路を確立する。
The
映像送信装置1と映像受信装置4との間には、n個のIP通信路が確立される。通信部10−1のIP通信部14は、自己のIPアドレスAd−1をIPパケットの送信元アドレスに使用して映像受信装置間のIP通信路を確立する。通信部10−2のIP通信部14は、自己のIPアドレスAd−2をIPパケットの送信元アドレスに使用して映像受信装置間のIP通信路を確立する。同様に、通信部10−nのIP通信部14は、自己のIPアドレスAd−nをIPパケットの送信元アドレスに使用して映像受信装置間のIP通信路を確立する。
Between the
n個のIP通信路(送信元アドレスAd−1、Ad−2、・・・、Ad−n)は、それぞれ対応する無線通信路(無線通信方式R−1、R−2、・・・、R−n)を介するIP通信路である。具体的には、送信元アドレスAd−1のIPパケットは、無線通信方式R−1の無線通信路を介して無線基地局3−1で受信され、無線基地局3−1からインターネット等のIPネットワークを介して映像受信装置4へ伝送される。送信元アドレスAd−2のIPパケットは、無線通信方式R−2の無線通信路を介して無線基地局3−2で受信され、無線基地局3−2からインターネット等のIPネットワークを介して映像受信装置4へ伝送される。同様に、送信元アドレスAd−nのIPパケットは、無線通信方式R−nの無線通信路を介して無線基地局3−nで受信され、無線基地局3−nからインターネット等のIPネットワークを介して映像受信装置4へ伝送される。
The n IP communication paths (source addresses Ad-1, Ad-2,..., Ad-n) correspond to the corresponding wireless communication paths (wireless communication schemes R-1, R-2,. R-n). Specifically, the IP packet of the source address Ad-1 is received by the wireless base station 3-1 via the wireless communication path of the wireless communication system R-1, and the IP packet of the Internet or the like is transmitted from the wireless base station 3-1. It is transmitted to the
映像受信装置4は、映像送信装置1から送信されたIPパケットを、n個のIP通信路を介して受信する。映像受信装置4は、当該受信したIPパケットに格納された映像データを、映像データのIDの順番で映像再生装置5へ出力する。映像再生装置5は、映像データのIDに基づいて、映像データの再生を行う。
The
次に図3を参照して、本実施形態に係る映像送信装置の動作を説明する。図3は、本実施形態に係る映像送信方法の手順の例を示すフローチャートである。 Next, the operation of the video transmitting apparatus according to the present embodiment will be described with reference to FIG. FIG. 3 is a flowchart illustrating an example of a procedure of the video transmission method according to the present embodiment.
(ステップS1) 映像送信装置1において、入力部21は受け付けた映像データを送信バッファ22に格納する。
(Step S1) In the
(ステップS2) 送信制御部32は、所定の送信条件を満たすか否かを判断する。送信条件は、映像データ送信処理を実行する条件である。送信条件の例を以下に示す。
(Step S2) The
(送信条件の例1) 送信バッファ22内の現在の映像データの総量が所定の閾値を超えること。
(送信条件の例2) 送信バッファ22内の現在の映像データの総個数が所定の閾値を超えること。
(送信条件の例3) 前回の送信タイミングから経過した時間が所定の閾値を超えること。
(Example 1 of Transmission Condition) The total amount of the current video data in the
(Example 2 of transmission condition) The total number of current video data in the
(Example 3 of transmission conditions) The time elapsed since the previous transmission timing exceeds a predetermined threshold.
なお、上記した送信条件の例1、例2、例3は、単独で用いられてもよく、又は、複数が組み合わされて用いられてもよい。 It should be noted that Examples 1, 2, and 3 of the above-described transmission conditions may be used alone, or a plurality of them may be used in combination.
送信条件を満たす場合にはステップS3に進み、送信条件を満たさない場合にはステップS1に戻る。 When the transmission condition is satisfied, the process proceeds to step S3, and when the transmission condition is not satisfied, the process returns to step S1.
(ステップS3) 通信路品質判断部31は、通信部10毎に、無線通信路の通信品質値とIP通信路の通信品質値との組合せで総合通信路品質を判断する。送信制御部32は、通信部10毎に、総合通信路品質に基づいてIP通信路の通信量上限を設定する。IP通信路の通信量上限設定方法の例を以下に示す。
(Step S3) The communication path
(IP通信路の通信量上限設定方法の例)
IP通信路の通信量上限は、当該IP通信路に該当する総合通信路品質値Am(Am;m=1,2,・・・,n)と送信バッファ22内の映像データの総量Bとを引数にした所定の関数Fで求められる。例えば、通信部10−2の通信量上限は、F(A2,B)で求められる。また、関数Fは、「ΣF(Am,B)=B」を満たす。関数Fは、総合通信路品質値Amが大きい(品質がよい)ほどに大きい値(通信量上限が多い)になるように決定される。関数Fは、線形関数であってもよく、又は、指数関数であってもよい。また、関数Fは、映像データの重要度の決め方に適合させて決定されてもよい。
(Example of IP communication channel upper limit setting method)
The upper limit of the communication amount of the IP communication path is determined by the total communication path quality value Am (Am; m = 1, 2,..., N) corresponding to the IP communication path and the total amount B of the video data in the
(ステップS4) 送信制御部32は、送信バッファ22内の映像データのうち、重要度の高い方の映像データから順次選択して、総合通信路品質の高い方の通信部10のIP通信路へ通信量上限まで割り当てる。IP通信路の通信量上限まで映像データを割り当てたら、次に総合通信路品質が高い通信部10のIP通信路へ映像データを割り当てていく。
(Step S <b> 4) The
(ステップS5) 送信制御部32は、送信バッファ22内のすべての映像データをIP通信路に割り当てたか否かを判断する。この判断の結果、すべての映像データをIP通信路に割り当てた場合にはステップS6に進み、まだ未割当の映像データが残っている場合にはステップS4に戻る。
(Step S5) The
(ステップS6) 送信制御部32は、映像データを割り当てた通信部10のIP通信路で送信させる映像データ送信処理を実行する。映像データ送信処理によって、送信バッファ22内の各映像データは、自己が割り当てられたIP通信路で送信される。
(Step S6) The
(ステップS7) 図3の処理の終了の場合は図3の処理を終了する。一方、図3の処理の継続の場合はステップS1に戻る。 (Step S7) When the processing in FIG. 3 is ended, the processing in FIG. 3 is ended. On the other hand, when the process of FIG. 3 is continued, the process returns to step S1.
上述した実施形態によれば、各々異なる無線通信方式の無線通信路を介する映像受信装置間の複数のIP通信路が確立され、無線通信路の通信品質値と対応するIP通信路の通信品質値との組合せで判断された総合通信路品質と映像データの重要度とに基づいて当該映像データを送信するIP通信路が選択される。これにより、各無線通信路における無線環境の変化に応じた通信品質の変動に適応して映像データの送信IP通信路を選択できるので、無線通信路を介する複数のIP通信路を使用して伝送される映像の品質向上を図ることができるという効果が得られる。 According to the above-described embodiment, a plurality of IP communication paths are established between video receiving apparatuses via wireless communication paths of different wireless communication schemes, and a communication quality value of the IP communication path corresponding to the communication quality value of the wireless communication path. The IP communication path for transmitting the video data is selected based on the total communication channel quality and the importance of the video data determined by the combination of. Thereby, the transmission IP communication path of the video data can be selected according to the change of the communication quality according to the change of the wireless environment in each wireless communication path, so that the transmission is performed using the plurality of IP communication paths via the wireless communication paths. The effect that the quality of the image to be performed can be improved is obtained.
本実施形態によれば、例えば自動運転車両の遠隔操作に用いられる映像などのように、映像の信頼性が要求される映像伝送システムにおいて、高品質且つ大容量の映像データの安定した伝送が可能になるという格別の効果が得られる。 According to the present embodiment, stable transmission of high-quality and large-capacity video data is possible in a video transmission system that requires video reliability, such as a video used for remote control of an autonomous vehicle. Is obtained.
[他の実施形態]
次に図4を参照して他の実施形態に係る映像送信装置を説明する。図4は、他の実施形態に係る映像送信装置の構成例を示すブロック図である。図4において図1の各部に対応する部分には同一の符号を付け、その説明を省略する。図4に示される映像送信装置1aは、図1の映像送信装置1に対して、さらにハンドオーバタイミング取得部41を備える。
[Other embodiments]
Next, a video transmission device according to another embodiment will be described with reference to FIG. FIG. 4 is a block diagram illustrating a configuration example of a video transmission device according to another embodiment. In FIG. 4, parts corresponding to the respective parts in FIG. 1 are denoted by the same reference numerals, and description thereof will be omitted. The
ハンドオーバタイミング取得部41は、各無線通信路のハンドオーバタイミングを取得する。送信制御部は、ハンドオーバタイミングに合わせて、映像データ送信方法を変更する。映像データ送信方法の変更例を以下に示す。
The handover
(映像データ送信方法の変更例1)
送信制御部32は、ハンドオーバタイミングに合わせて、カバレッジが異なる複数の無線通信方式の無線通信路に該当する複数のIP通信路を使用して映像受信装置への映像データ送信を行う。無線通信路のハンドオーバタイミングでは、当該無線通信路においてデータ伝送の乱れが発生する可能性がある。そして、カバレッジが異なる複数の無線通信方式の無線通信路の間では、ハンドオーバタイミングが異なることが想定できる。そこで、ハンドオーバタイミングに合わせて、カバレッジが異なる複数の無線通信方式の無線通信路を使用することによって、一の無線通信路のハンドオーバタイミングにおいて、ハンドオーバタイミングではない他の無線通信路で円滑にデータ伝送が行われる。これにより、ハンドオーバタイミングにおける映像データ伝送の乱れを防止する効果が得られる。
(Modification example 1 of video data transmission method)
The
(映像データ送信方法の変更例2)
送信制御部32は、ハンドオーバタイミングに合わせて、複数のIP通信路を使用して映像受信装置への映像データ冗長化送信を行う。映像データ冗長化送信では、同じ映像データが複数のIP通信路で送信される。これにより、あるIP通信路に対応する無線通信路のハンドオーバタイミングにおいて映像データ伝送の乱れが発生しても、他のIP通信路により冗長化されて伝送される映像データによって映像再生の乱れを防止する効果が得られる。
(
The
なお、上記した映像データ送信方法の変更例1、変更例2は、単独で用いられてもよく、又は、両方が組み合わされて用いられてもよい。 The first and second modifications of the video data transmission method described above may be used alone, or may be used in combination.
以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。 As described above, the embodiments of the present invention have been described in detail with reference to the drawings. However, the specific configuration is not limited to the embodiments, and includes a design change or the like without departing from the gist of the present invention.
例えば、上述した各装置の機能を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、DVD(Digital Versatile Disc)等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
For example, a computer program for realizing the function of each device described above may be recorded on a computer-readable recording medium, and the program recorded on the recording medium may be read and executed by a computer system. Here, the “computer system” may include an OS and hardware such as peripheral devices.
The “computer-readable recording medium” includes a writable nonvolatile memory such as a flexible disk, a magneto-optical disk, a ROM, and a flash memory, a portable medium such as a DVD (Digital Versatile Disc), and a computer system. Storage device such as a hard disk.
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(例えばDRAM(Dynamic Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
Further, a “computer-readable recording medium” refers to a volatile memory (for example, a DRAM (Dynamic Dynamic Memory)) in a computer system that serves as a server or a client when a program is transmitted through a network such as the Internet or a communication line such as a telephone line. Random Access Memory), which holds programs for a certain period of time.
Further, the above program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the "transmission medium" for transmitting a program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line.
Further, the program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.
1…映像送信装置、2…映像生成装置、3−1,3−2,・・・,3−n…無線基地局、4…映像受信装置、5…映像再生装置、10−1,10−2,・・・,10−n…通信部、11…アンテナ、12…無線通信部、13…無線測定部、14…IP通信部、15…IP測定部、21…入力部、22…送信バッファ、30…制御部、31…通信路品質判断部、32…送信制御部、41…ハンドオーバタイミング取得部、100…映像伝送システム
DESCRIPTION OF
Claims (7)
前記無線通信路の通信品質値を測定する無線測定部と、
前記複数の無線通信部の各々に対応して設けられる複数のIP通信部であって、前記IP通信部に対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信部毎に異なるIPアドレスで確立する前記複数の前記IP通信部と、
前記IP通信路の通信品質値を測定するIP測定部と、
前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断部と、
複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う送信制御部と、を備え、
前記送信制御部は、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、
映像送信装置。 A plurality of wireless communication units each establishing a wireless communication path of a different wireless communication method,
A wireless measuring unit that measures a communication quality value of the wireless communication path,
A plurality of IP communication units provided for each of the plurality of wireless communication units, wherein an IP communication path between video receiving devices via the wireless communication path corresponding to the IP communication unit is provided by the IP communication unit; The plurality of IP communication units established with different IP addresses for each
An IP measuring unit that measures a communication quality value of the IP communication path;
A channel quality determining unit that determines an overall channel quality by a combination of a communication quality value of the wireless channel and a communication quality value of the corresponding IP channel;
A transmission control unit that transmits video data to the video receiving device using the plurality of IP communication paths,
The transmission control unit selects the IP communication path for transmitting the video data based on the total communication path quality and the importance of the video data.
Video transmission device.
請求項1に記載の映像送信装置。 The transmission control unit determines a communication volume upper limit of the corresponding IP communication channel based on the total communication channel quality, and allocates the video data to the IP communication channel until the communication volume upper limit is reached.
The video transmission device according to claim 1.
前記送信制御部は、前記ハンドオーバタイミングに合わせて、映像データ送信方法を変更する、
請求項1又は2のいずれか1項に記載の映像送信装置。 The wireless communication path further includes a handover timing acquisition unit for acquiring a handover timing,
The transmission control unit changes the video data transmission method in accordance with the handover timing,
The video transmission device according to claim 1.
請求項3に記載の映像送信装置。 The transmission control unit performs video data transmission to the video reception device using the plurality of IP communication paths corresponding to the plurality of wireless communication paths of the plurality of wireless communication schemes having different coverages in accordance with the handover timing. ,
The video transmission device according to claim 3.
請求項3又は4のいずれか1項に記載の映像送信装置。 The transmission control unit performs video data redundant transmission to the video receiving device using the plurality of IP communication paths in accordance with the handover timing.
The video transmission device according to claim 3.
前記映像送信装置が、前記無線通信路の通信品質値を測定する無線測定ステップと、
前記映像送信装置が、前記複数の無線通信ステップの各々に対応して設けられる複数のIP通信ステップであって、前記IP通信ステップに対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信ステップ毎に異なるIPアドレスで確立する前記複数の前記IP通信ステップと、
前記映像送信装置が、前記IP通信路の通信品質値を測定するIP測定ステップと、
前記映像送信装置が、前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断ステップと、
前記映像送信装置が、複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う制御ステップと、を含み、
前記制御ステップは、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、
映像送信方法。 Video transmission device, a plurality of wireless communication steps to establish wireless communication paths of different wireless communication system,
The video transmission device, a wireless measurement step of measuring the communication quality value of the wireless communication path,
An IP communication path between the video reception apparatuses via the wireless communication path corresponding to the plurality of IP communication steps, wherein the plurality of IP communication steps are provided corresponding to each of the plurality of wireless communication steps; The plurality of IP communication steps to establish a different IP address for each IP communication step,
An IP measurement step in which the video transmission device measures a communication quality value of the IP communication path;
A communication channel quality determining step of determining the total channel quality by a combination of the communication quality value of the wireless communication channel and the communication quality value of the corresponding IP communication channel,
The video transmitting device, the control step of transmitting video data to the video receiving device using a plurality of the IP communication path,
The control step selects the IP communication path for transmitting the video data based on the total communication path quality and the importance of the video data,
Video transmission method.
各々異なる無線通信方式の無線通信路を確立する複数の無線通信ステップと、
前記無線通信路の通信品質値を測定する無線測定ステップと、
前記複数の無線通信ステップの各々に対応して設けられる複数のIP通信ステップであって、前記IP通信ステップに対応する前記無線通信路を介する映像受信装置間のIP通信路を、前記IP通信ステップ毎に異なるIPアドレスで確立する前記複数の前記IP通信ステップと、
前記IP通信路の通信品質値を測定するIP測定ステップと、
前記無線通信路の通信品質値と対応する前記IP通信路の通信品質値との組合せで総合通信路品質を判断する通信路品質判断ステップと、
複数の前記IP通信路を使用して前記映像受信装置への映像データ送信を行う制御ステップと、を実行させるためのコンピュータプログラムであり、
前記制御ステップは、前記総合通信路品質と映像データの重要度とに基づいて当該映像データを送信する前記IP通信路を選択する、
コンピュータプログラム。 In the computer of the video transmission device,
A plurality of wireless communication steps for establishing wireless communication paths of different wireless communication systems,
A wireless measurement step of measuring a communication quality value of the wireless communication path,
A plurality of IP communication steps provided corresponding to each of the plurality of wireless communication steps, wherein an IP communication path between video receiving apparatuses via the wireless communication path corresponding to the IP communication step is provided in the IP communication step. Said plurality of said IP communication steps established with a different IP address for each,
An IP measurement step of measuring a communication quality value of the IP communication path;
A channel quality determining step of determining a total channel quality by a combination of a communication quality value of the wireless channel and a corresponding communication quality value of the IP channel;
And a control step of transmitting video data to the video receiving device using the plurality of IP communication paths.
The control step selects the IP communication path for transmitting the video data based on the total communication path quality and the importance of the video data,
Computer program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018160292A JP6989463B2 (en) | 2018-08-29 | 2018-08-29 | Video transmission device for mobile remote control device, video transmission method for mobile remote control device, and computer program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018160292A JP6989463B2 (en) | 2018-08-29 | 2018-08-29 | Video transmission device for mobile remote control device, video transmission method for mobile remote control device, and computer program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020036156A true JP2020036156A (en) | 2020-03-05 |
JP6989463B2 JP6989463B2 (en) | 2022-01-05 |
Family
ID=69668735
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018160292A Active JP6989463B2 (en) | 2018-08-29 | 2018-08-29 | Video transmission device for mobile remote control device, video transmission method for mobile remote control device, and computer program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6989463B2 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005252608A (en) * | 2004-03-03 | 2005-09-15 | Nippon Telegr & Teleph Corp <Ntt> | Method and apparatus for selecting transmission system, based on wireless characteristics information, its program and recording medium |
JP2007531468A (en) * | 2004-04-07 | 2007-11-01 | モトローラ・インコーポレイテッド | Method and apparatus for communicating over a wireless local area network |
WO2012114728A1 (en) * | 2011-02-25 | 2012-08-30 | パナソニック株式会社 | Transmission data processing method, information processing method, transmission device, and reception device |
US20150326636A1 (en) * | 2015-05-08 | 2015-11-12 | Bandwidth.Com, Inc. | Optimal use of multiple concurrent internet protocol (ip) data streams for voice communications |
-
2018
- 2018-08-29 JP JP2018160292A patent/JP6989463B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005252608A (en) * | 2004-03-03 | 2005-09-15 | Nippon Telegr & Teleph Corp <Ntt> | Method and apparatus for selecting transmission system, based on wireless characteristics information, its program and recording medium |
JP2007531468A (en) * | 2004-04-07 | 2007-11-01 | モトローラ・インコーポレイテッド | Method and apparatus for communicating over a wireless local area network |
WO2012114728A1 (en) * | 2011-02-25 | 2012-08-30 | パナソニック株式会社 | Transmission data processing method, information processing method, transmission device, and reception device |
US20150326636A1 (en) * | 2015-05-08 | 2015-11-12 | Bandwidth.Com, Inc. | Optimal use of multiple concurrent internet protocol (ip) data streams for voice communications |
Non-Patent Citations (1)
Title |
---|
武智竜一 他: "モバイルネットワークにおける最適経路制御", 電子情報通信学会論文誌(J89−B)第2号, vol. 第J89-B巻, JPN6021015326, 1 February 2006 (2006-02-01), ISSN: 0004494255 * |
Also Published As
Publication number | Publication date |
---|---|
JP6989463B2 (en) | 2022-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7048745B2 (en) | Communication methods and related products | |
US8942215B2 (en) | System and method for transmission of data from a wireless mobile device over a multipath wireless router | |
US8683007B2 (en) | Seamless transfer of media streams | |
KR101900168B1 (en) | Adaptive media streaming | |
JP5021765B2 (en) | An error filter that distinguishes video data errors on reverse and forward links | |
US9749379B2 (en) | Apparatus and method for receiving video service in hybrid network | |
US20190007723A1 (en) | Apparatus and method for providing adaptive multimedia service | |
US8873590B2 (en) | Apparatus and method for correcting jitter | |
CN104756099A (en) | Additive content and related client devices | |
CN110557230B (en) | Data transmission method and system for unidirectional broadcast and bidirectional network | |
US7428271B2 (en) | Network device and data transmission method for efficient data transmission and reception in mobile ad hoc network environment | |
US8903398B2 (en) | Systems and methods for providing a content proxy in a wireless network | |
US20230140859A1 (en) | Content distribution system | |
US20200305031A1 (en) | Broadcast signal reception method using network switching and apparatus for the same | |
JP5923745B2 (en) | Transmitter | |
US10341047B2 (en) | Method and system for controlling the forwarding of error correction data | |
CN107113459B (en) | Computer-readable recording medium having recorded thereon program for providing network-adapted content and apparatus for providing network-adapted content | |
US20150189543A1 (en) | System and Methods for Providing an Enhanced Content Proxy in a Wireless Network | |
JP6989463B2 (en) | Video transmission device for mobile remote control device, video transmission method for mobile remote control device, and computer program | |
US20070115815A1 (en) | Receiver, transmitter and transmission/reception system for media signal | |
US20080140854A1 (en) | Method and apparatus for streaming av data | |
US20140244855A1 (en) | Method and system for synchronization of data streams | |
KR101780247B1 (en) | Method of processing OTT data based on dynamic adaptive buffering | |
KR20150098045A (en) | Method and apparatus for communication | |
US20230319368A1 (en) | Packet loss recovery device and method using cache server |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200528 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210326 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210427 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210622 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6989463 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |