JP6823540B2 - Video processing method, video processing system and video transmission device - Google Patents

Video processing method, video processing system and video transmission device Download PDF

Info

Publication number
JP6823540B2
JP6823540B2 JP2017105699A JP2017105699A JP6823540B2 JP 6823540 B2 JP6823540 B2 JP 6823540B2 JP 2017105699 A JP2017105699 A JP 2017105699A JP 2017105699 A JP2017105699 A JP 2017105699A JP 6823540 B2 JP6823540 B2 JP 6823540B2
Authority
JP
Japan
Prior art keywords
video
frames
frame
encoding
mmtp packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017105699A
Other languages
Japanese (ja)
Other versions
JP2018201159A (en
Inventor
小野　正人
正人 小野
功次 難波
功次 難波
佐藤　孝子
孝子 佐藤
喜秀 外村
喜秀 外村
山口　徹也
徹也 山口
知之 兼清
知之 兼清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2017105699A priority Critical patent/JP6823540B2/en
Publication of JP2018201159A publication Critical patent/JP2018201159A/en
Application granted granted Critical
Publication of JP6823540B2 publication Critical patent/JP6823540B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、映像を処理する技術に関し、特に超高解像度の映像を処理して伝送する技術に関する。 The present invention relates to a technique for processing an image, and more particularly to a technique for processing and transmitting an ultra-high resolution image.

新しいメディア伝送技術であるＭＭＴ（ＭＰＥＧ Ｍｅｄｉａ Ｔｒａｎｓｐｏｒｔ）が国際標準化されている（非特許文献１）。 MMT (MPEG Media Transport), which is a new media transmission technology, has been internationally standardized (Non-Patent Document 1).

ＭＭＴでは、メディアの提示時刻をＵＴＣ（Ｃｏｏｒｄｉｎａｔｅｄ Ｕｎｉｖｅｒｓａｌ Ｔｉｍｅ）で指定できる。そのため、映像と音声などのコンテンツが、放送と通信のように別々の伝送経路で配信された場合でも、端末側でコンテンツを同期して再生することが可能である。また、複数の端末間でコンテンツを同期して再生することが可能である。 In MMT, the presentation time of the media can be specified by UTC (Coordinated Universal Time). Therefore, even when contents such as video and audio are delivered by different transmission paths such as broadcasting and communication, the contents can be synchronized and played on the terminal side. In addition, it is possible to synchronize and play content between a plurality of terminals.

ＡＲＩＢ ＳＴＡＮＤＡＲＤ、「デジタル放送におけるＭＭＴによるメディアトランスポート方式」、ＡＲＩＢ ＳＴＤ−Ｂ６０ １．４版、一般社団法人電波産業会、平成２７年９月３０日ARIB STANDARD, "Media Transport Method by MMT in Digital Broadcasting", ARIB STD-B60 1.4 Edition, Association of Radio Industries and Businesses, September 30, 2015

近年、超高解像度の４Ｋ映像が広まりつつある。さらに、４Ｋ映像よりも高解像度な８Ｋ映像の登場が見込まれている。 In recent years, ultra-high resolution 4K video has become widespread. Furthermore, it is expected that 8K video with higher resolution than 4K video will appear.

映像処理においては、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのハードウェア支援を受けることにより、処理時間を低減することが可能である。しかしながら、超高解像度の映像処理は、より多くの処理時間や計算リソースが必要である。テレビ電話などのように双方向でインタラクティブに超高解像度の映像を送受信する場合は、映像処理による遅延をできるだけ無くすことが望まれる。また、４Ｋ，８Ｋ用のハードウェアは、２Ｋ用のハードウェアよりもコストが高い。 In video processing, it is possible to reduce the processing time by receiving hardware support such as GPU (Graphics Processing Unit). However, ultra-high resolution video processing requires more processing time and computational resources. When transmitting and receiving ultra-high resolution video interactively in both directions such as a videophone, it is desirable to eliminate the delay due to video processing as much as possible. Further, the hardware for 4K and 8K is more expensive than the hardware for 2K.

動画を構成するフレームにはＩフレーム，Ｐフレーム，Ｂフレームがある。超高解像度の動画の送信においては、データ量が多いＩフレームを送信する際にバーストトラフィックが発生する可能性がある。バーストトラフィックが発生した場合、ネットワーク上の機器で制御が行われ、想定しない遅延やパケットロスが発生し、配信する映像の品質に影響を及ぼす可能性がある。 There are I frame, P frame, and B frame as the frames constituting the moving image. In the transmission of ultra-high resolution moving images, burst traffic may occur when transmitting an I-frame with a large amount of data. When burst traffic occurs, it is controlled by devices on the network, causing unexpected delays and packet loss, which may affect the quality of the delivered video.

本発明は、上記に鑑みてなされたものであり、超高解像度映像の処理時間の低減及び伝送時のバーストトラフィックの発生の抑止を図ることを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to reduce the processing time of ultra-high resolution video and suppress the generation of burst traffic during transmission.

第１の本発明に係る映像処理方法は、映像を符号化して送信する映像送信装置と符号化された映像を復号する映像受信装置による映像処理方法であって、前記映像送信装置による、映像を入力して１つのフレームを複数のフレームに分割するステップと、前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットを送出するステップと、を有し、前記映像受信装置による、前記ＭＭＴＰパケットをそれぞれ復号して前記複数のフレームと前記タイムスタンプを取得するステップと、前記タイムスタンプが同じフレームを結合して前記１つのフレームを生成するステップと、を有し、前記ＭＭＴＰパケットを送出するステップは、前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のデータ量が大きいＭＭＴＰパケットを複数の映像間でずらして送出することを特徴とする。 The first video processing method according to the present invention is a video processing method using a video transmitting device for encoding and transmitting a video and a video receiving device for decoding the encoded video, and the video is transmitted by the video transmitting device. The video reception includes a step of inputting and dividing one frame into a plurality of frames, and a step of encoding each of the plurality of frames and then transmitting an MMTP packet with the same time stamp. a damage, a step of acquiring the time stamp and the plurality of frames the MMTP packet decode respectively, the steps of the time stamp to generate the one frame by combining the same frame, the said The step of transmitting the MMTP packet is characterized in that the timing at which the coding of each of the plurality of frames is started is shifted, and the MMTP packet having a large amount of data after encoding is shifted between the plurality of images and transmitted .

第２の本発明に係る映像処理システムは、映像を符号化して送信する映像送信装置と符号化された映像を復号する映像受信装置を備えた映像処理システムであって、前記映像送信装置は、映像を入力して１つのフレームを複数のフレームに分割する分割手段と、前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットを送出する複数のエンコード手段と、を有し、前記映像受信装置による、前記ＭＭＴＰパケットをそれぞれ復号して前記複数のフレームと前記タイムスタンプを取得する複数のデコード手段と、前記タイムスタンプが同じフレームを結合して前記１つのフレームを生成する結合手段と、を有し、前記複数のエンコード手段は、前記複数のエンコード手段間で前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のデータ量が大きいＭＭＴＰパケットを前記複数のエンコード手段間でずらして送出することを特徴とする。 The second video processing system according to the present invention is a video processing system including a video transmitting device that encodes and transmits a video and a video receiving device that decodes the encoded video. A dividing means for inputting video and dividing one frame into a plurality of frames, and a plurality of encoding means for transmitting an MMTP packet with the same time stamp after encoding each of the plurality of frames. A plurality of decoding means having the video receiving device for decoding the MMTP packet to obtain the plurality of frames and the time stamp, and a frame having the same time stamp are combined to generate the one frame. The plurality of encoding means stagger the timing of starting encoding of each of the plurality of frames among the plurality of encoding means, and the MMTP packet having a large amount of data after encoding is described. It is characterized in that it is transmitted by shifting it between a plurality of encoding means .

第３の本発明に係る映像送信装置は、映像を符号化して送信する映像送信装置であって、映像を入力して１つのフレームを複数のフレームに分割する分割手段と、前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットを送出する複数のエンコード手段と、を有し、前記複数のエンコード手段は、前記複数のエンコード手段間で前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のデータ量が大きいＭＭＴＰパケットを前記複数のエンコード手段間でずらして送出することを特徴とする。 The third video transmission device according to the present invention is a video transmission device that encodes and transmits video, and includes a dividing means for inputting video and dividing one frame into a plurality of frames, and the plurality of frames. Each of the encoding means has a plurality of encoding means for transmitting an MMTP packet with the same time stamp, and the plurality of encoding means have a code for each of the plurality of frames among the plurality of encoding means. It is characterized in that the timing at which the encoding is started is shifted, and the MMTP packet having a large amount of encoded data is transmitted by shifting between the plurality of encoding means .

本発明によれば、超高解像度映像の処理時間の低減及び伝送時のバーストトラフィック発生の抑止を図ることができる。 According to the present invention, it is possible to reduce the processing time of ultra-high resolution video and suppress the generation of burst traffic during transmission.

本実施形態のメディア同期伝送システムの構成を示す全体構成図である。It is an overall block diagram which shows the structure of the media synchronous transmission system of this embodiment. ＭＭＴ送信器の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the MMT transmitter. クライアント端末の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of a client terminal. 分割後の映像を伝送するのに必要な帯域の変化を示す図である。It is a figure which shows the change of the band required for transmitting the video after division.

以下、本発明実施の形態について図面を用いて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１は、本実施形態のメディア同期伝送システムの構成を示す全体構成図である。 FIG. 1 is an overall configuration diagram showing the configuration of the media synchronous transmission system of the present embodiment.

本メディア同期伝送システムは、ＭＭＴ送信器１とクライアント端末３を備える。ＭＭＴ送信器１とクライアント端末３は、ネットワーク１００を介して接続されている。 The media synchronous transmission system includes an MMT transmitter 1 and a client terminal 3. The MMT transmitter 1 and the client terminal 3 are connected to each other via the network 100.

ＭＭＴ送信器１は、カメラやマイク等の集信系機器から入力した映像・音声信号をエンコードし、ＭＭＴＰ（ＭＰＥＧ Ｍｅｄｉａ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）パケットに変換して送出する。ＭＭＴ送信器１は、４Ｋ映像のフレームを２Ｋ映像の４つのフレームに分割したうえで、各２Ｋ映像のエンコード処理及びＭＭＴＰストリーム変換処理を並列に行う。 The MMT transmitter 1 encodes a video / audio signal input from a concentrator device such as a camera or a microphone, converts it into an MMTP (MPEG Media Transport Protocol) packet, and sends it out. The MMT transmitter 1 divides a 4K video frame into four 2K video frames, and then performs encoding processing and MMTP stream conversion processing for each 2K video in parallel.

クライアント端末３は、ＭＭＴＰパケットを受信し、映像・音声信号をデコードし、映像・音声を出力する。クライアント端末３は、各２Ｋ映像のＭＭＴＰパケットを個別にデコードし、デコードした各２Ｋ映像を結合して４Ｋ映像を表示する。各２Ｋ映像はＭＭＴＰパケット化して送出されるので、ＭＭＴにより同期が担保される。そのため、結合後の４Ｋ映像内のある領域だけ他の領域と時間が前後するようなズレや映像の乱れが発生することはない。 The client terminal 3 receives the MMTP packet, decodes the video / audio signal, and outputs the video / audio. The client terminal 3 individually decodes the MMTP packet of each 2K video, combines the decoded 2K video, and displays the 4K video. Since each 2K video is transmitted as an MMTP packet, synchronization is guaranteed by the MMT. Therefore, there is no deviation or distortion of the image such that the time is back and forth with the other area only in a certain area in the combined 4K image.

次に、ＭＭＴ送信器１について説明する。 Next, the MMT transmitter 1 will be described.

図２は、本実施形態のＭＭＴ送信器１の構成を示す機能ブロック図である。同図に示すＭＭＴ送信器１は、分割部１１と複数のエンコード部１２Ａ〜１２Ｄを備える。 FIG. 2 is a functional block diagram showing the configuration of the MMT transmitter 1 of the present embodiment. The MMT transmitter 1 shown in the figure includes a dividing unit 11 and a plurality of encoding units 12A to 12D.

分割部１１は、超高解像度の映像非圧縮データを入力し、複数の映像非圧縮データに分割する。例えば、外部の集信系機器からシリアルデジタルインタフェース（ＳＤＩ）を介して４Ｋ（３８４０×２１６０）の映像非圧縮データを入力し、４つの２Ｋ（１９２０×１０８０）の映像非圧縮データに分割する。なお、超高解像度の映像を任意の大きさに分割してもよい。 The dividing unit 11 inputs ultra-high resolution video uncompressed data and divides it into a plurality of video uncompressed data. For example, 4K (3840 × 2160) video uncompressed data is input from an external concentrator system device via a serial digital interface (SDI), and the data is divided into four 2K (1920 × 1080) video uncompressed data. The ultra-high resolution video may be divided into arbitrary sizes.

エンコード部１２Ａ〜１２Ｄは、分割部１１によって分割された映像非圧縮データを入力して符号化し、分割後のフレームのそれぞれに同じタイムスタンプを付与したＭＭＴＰパケットを送出する。エンコード部１２Ａ〜１２Ｄは、分割後の映像を結合する際に必要な表示位置の情報を含む制御情報も送出する。 The encoding units 12A to 12D input and encode the video uncompressed data divided by the dividing unit 11, and send out an MMTP packet in which the same time stamp is added to each of the divided frames. The encoding units 12A to 12D also transmit control information including information on the display position necessary for combining the divided images.

エンコード部１２Ａ〜１２Ｄのそれぞれを個別のハードウェアで構成し、並列処理することにより処理時間の短縮を図ることができる。また、エンコード部１２Ａ〜１２Ｄを構成するハードウェアとして、より安価な２Ｋ映像用のハードウェアを用いることで、コストの低減を図ることができる。 The processing time can be shortened by configuring each of the encoding units 12A to 12D with individual hardware and performing parallel processing. Further, the cost can be reduced by using the cheaper hardware for 2K video as the hardware constituting the encoding units 12A to 12D.

次に、クライアント端末３について説明する。 Next, the client terminal 3 will be described.

図３は、本実施形態のクライアント端末３の構成を示す機能ブロック図である。同図に示すクライアント端末３は、複数のデコード部３１Ａ〜３１Ｄと結合部３２を備える。 FIG. 3 is a functional block diagram showing the configuration of the client terminal 3 of the present embodiment. The client terminal 3 shown in the figure includes a plurality of decoding units 31A to 31D and a coupling unit 32.

デコード部３１Ａ〜３１Ｄは、分割後の映像のＭＭＴＰパケットを受信して復号し、分割後の映像のフレーム及びタイムスタンプを取得する。 The decoding units 31A to 31D receive the MMTP packet of the divided video, decode it, and acquire the frame and the time stamp of the divided video.

結合部３２は、同じタイムスタンプの分割後の映像のフレームを結合し、超高解像度の映像を出力する。 The joining unit 32 joins the frames of the video after the division of the same time stamp, and outputs an ultra-high resolution video.

デコード部３１Ａ〜３１Ｄのそれぞれを個別のハードウェアで構成し、並列処理することにより処理時間の短縮を図ることができる。また、デコード部３１Ａ〜３１Ｄを構成するハードウェアとして、より安価な２Ｋ映像用のハードウェアを用いることで、コストの低減を図ることができる。 The processing time can be shortened by configuring each of the decoding units 31A to 31D with individual hardware and performing parallel processing. Further, the cost can be reduced by using the cheaper hardware for 2K video as the hardware constituting the decoding units 31A to 31D.

ＭＭＴ送信器１及びクライアント端末３が備える各部は、演算処理装置、記憶装置等を備えたコンピュータにより構成して、各部の処理がプログラムによって実行されるものとしてもよい。このプログラムはＭＭＴ送信器１及びクライアント端末３が備える記憶装置に記憶されており、磁気ディスク、光ディスク、半導体メモリ等の記録媒体に記録することも、ネットワークを通して提供することも可能である。 Each part of the MMT transmitter 1 and the client terminal 3 may be configured by a computer provided with an arithmetic processing unit, a storage device, and the like, and the processing of each part may be executed by a program. This program is stored in a storage device included in the MMT transmitter 1 and the client terminal 3, and can be recorded on a recording medium such as a magnetic disk, an optical disk, or a semiconductor memory, or can be provided through a network.

次に、分割後の映像のＩフレームの送出タイミングについて説明する。 Next, the transmission timing of the I frame of the divided video will be described.

図４は、分割後の映像を伝送するのに必要な帯域の変化を示す図である。図中の実線は、Ｉフレームの送出タイミングをずらした場合に映像の伝送に必要な帯域の変化を示し、破線は、Ｉフレームの送出タイミングをずらさない場合に映像の伝送に必要な帯域の変化を示す。 FIG. 4 is a diagram showing a change in the band required for transmitting the divided video. The solid line in the figure shows the change in the band required for video transmission when the I-frame transmission timing is shifted, and the broken line indicates the change in the band required for video transmission when the I-frame transmission timing is not shifted. Is shown.

Ｉフレームは、フレーム内だけで独立して符号化することによって得られるので、フレーム間予測を用いて符号化されたＰフレームやＢフレームよりも符号化後のデータのサイズが大きくなる。図４の実線で示すように、分割後の２Ｋ映像のＩフレームの送出タイミングをずらすことにより、バーストトラフィックの発生を抑止し、ネットワーク１００における遅延を軽減できる。例えば、エンコード部１２Ａ〜１２Ｄがエンコードを開始するタイミングをずらすことで、各エンコード部１２Ａ〜１２ＤがＩフレームを送出するタイミングをずらすことができる。 Since the I-frame is obtained by encoding independently only within the frame, the size of the encoded data is larger than that of the P-frame or B-frame encoded by the inter-frame prediction. As shown by the solid line in FIG. 4, the generation of burst traffic can be suppressed and the delay in the network 100 can be reduced by shifting the transmission timing of the I frame of the divided 2K video. For example, by shifting the timing at which the encoding units 12A to 12D start encoding, the timing at which each encoding unit 12A to 12D sends an I frame can be shifted.

以上説明したように、本実施の形態によれば、分割部１１が超高解像度の映像非圧縮データを入力して複数の映像非圧縮データに分割し、エンコード部１２Ａ〜１２Ｄのそれぞれが分割された映像非圧縮データを入力して符号化し、分割後の映像のそれぞれに同じタイムスタンプを付与したＭＭＴＰパケットを送出し、デコード部３１Ａ〜３１Ｄのそれぞれが分割後の映像のＭＭＴＰパケットを受信して復号し、結合部３２が同じタイムスタンプの分割後の映像のフレームを結合して超高解像度の映像を出力することにより、超高解像度映像の処理時間の低減を図ることができる。 As described above, according to the present embodiment, the dividing unit 11 inputs ultra-high resolution video uncompressed data and divides the data into a plurality of video uncompressed data, and each of the encoding units 12A to 12D is divided. The uncompressed video data is input and encoded, an MMTP packet with the same time stamp is sent to each of the divided videos, and each of the decoding units 31A to 31D receives the MMTP packet of the divided video. By decoding and combining the frames of the video after the division of the same time stamp by the combining unit 32 to output the ultra-high resolution video, the processing time of the ultra-high resolution video can be reduced.

本実施の形態によれば、エンコード部１２Ａ〜１２ＤのそれぞれがＩフレームの送出タイミングをずらすことにより、バーストトラフィック発生の抑止を図ることができる。 According to the present embodiment, burst traffic generation can be suppressed by shifting the transmission timing of each of the encoding units 12A to 12D of the I frame.

１…ＭＭＴ送信器
１１…分割部
１２Ａ〜１２Ｄ…エンコード部
３…クライアント端末
３１Ａ〜３１Ｄ…デコード部
３２…結合部 1 ... MMT transmitter 11 ... Dividing unit 12A to 12D ... Encoding unit 3 ... Client terminal 31A to 31D ... Decoding unit 32 ... Coupling unit

Claims (3)

映像を符号化して送信する映像送信装置と符号化された映像を復号する映像受信装置による映像処理方法であって、
前記映像送信装置による、
映像を入力して１つのフレームを複数のフレームに分割するステップと、
前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットおよび前記複数のフレームを結合する際に必要な表示位置の情報を含む制御情報を送出するステップと、を有し、
前記映像受信装置による、
前記ＭＭＴＰパケットをそれぞれ復号して前記複数のフレームと前記タイムスタンプを取得するステップと、
前記タイムスタンプが同じフレームを結合して前記１つのフレームを生成するステップと、を有し、
前記ＭＭＴＰパケットを送出するステップは、Ｉフレームに対応する前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のＭＭＴＰパケットを前記複数のフレーム間でずらして送出することを特徴とする映像処理方法。 It is a video processing method using a video transmitting device that encodes and transmits video and a video receiving device that decodes the encoded video.
By the video transmission device
The step of inputting video and dividing one frame into multiple frames,
After encoding each of the plurality of frames, the MMTP packet with the same time stamp and a step of transmitting control information including display position information necessary for combining the plurality of frames are included.
According to the video receiving device
A step of decoding each of the MMTP packets to acquire the plurality of frames and the time stamp,
It has a step of combining frames having the same time stamp to generate the one frame.
The step of transmitting the MMTP packet is characterized in that the timing of starting the coding of each of the plurality of frames corresponding to the I frame is shifted, and the encoded MMTP packet is transmitted by shifting between the plurality of frames. Video processing method to be performed. 映像を符号化して送信する映像送信装置と符号化された映像を復号する映像受信装置を備えた映像処理システムであって、
前記映像送信装置は、
映像を入力して１つのフレームを複数のフレームに分割する分割手段と、
前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットおよび前記複数のフレームを結合する際に必要な表示位置の情報を含む制御情報を送出する複数のエンコード手段と、を有し、
前記映像受信装置による、
前記ＭＭＴＰパケットをそれぞれ復号して前記複数のフレームと前記タイムスタンプを取得する複数のデコード手段と、
前記タイムスタンプが同じフレームを結合して前記１つのフレームを生成する結合手段と、を有し、
前記複数のエンコード手段は、前記複数のエンコード手段間でＩフレームに対応する前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のＭＭＴＰパケットを前記複数のエンコード手段間でずらして送出することを特徴とする映像処理システム。 A video processing system equipped with a video transmitting device that encodes and transmits video and a video receiving device that decodes the encoded video.
The video transmission device
A dividing means that inputs video and divides one frame into multiple frames,
After encoding each of the plurality of frames, an MMTP packet with the same time stamp and a plurality of encoding means for transmitting control information including display position information necessary for combining the plurality of frames. Have and
According to the video receiving device
A plurality of decoding means for decoding the MMTP packet to obtain the plurality of frames and the time stamp, respectively.
It has a combining means that combines frames having the same time stamp to generate the one frame.
The plurality of encoding means shift the timing of starting coding of each of the plurality of frames corresponding to the I frame among the plurality of encoding means, and shift the encoded MMTP packet between the plurality of encoding means. A video processing system characterized by sending. 映像を符号化して送信する映像送信装置であって、
映像を入力して１つのフレームを複数のフレームに分割する分割手段と、
前記複数のフレームのそれぞれを符号化した後、同じタイムスタンプを付与したＭＭＴＰパケットおよび前記複数のフレームを結合する際に必要な表示位置の情報を含む制御情報を送出する複数のエンコード手段と、を有し、
前記複数のエンコード手段は、前記複数のエンコード手段間でＩフレームに対応する前記複数のフレームそれぞれの符号化を開始するタイミングをずらし、符号化後のＭＭＴＰパケットを前記複数のエンコード手段間でずらして送出することを特徴とする映像送信装置。 A video transmission device that encodes and transmits video.
A dividing means that inputs video and divides one frame into multiple frames,
After encoding each of the plurality of frames, an MMTP packet with the same time stamp and a plurality of encoding means for transmitting control information including display position information necessary for combining the plurality of frames. Have and
The plurality of encoding means shift the timing of starting coding of each of the plurality of frames corresponding to the I frame among the plurality of encoding means, and shift the encoded MMTP packet between the plurality of encoding means. A video transmission device characterized by transmitting.
JP2017105699A 2017-05-29 2017-05-29 Video processing method, video processing system and video transmission device Active JP6823540B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017105699A JP6823540B2 (en) 2017-05-29 2017-05-29 Video processing method, video processing system and video transmission device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017105699A JP6823540B2 (en) 2017-05-29 2017-05-29 Video processing method, video processing system and video transmission device

Publications (2)

Publication Number Publication Date
JP2018201159A JP2018201159A (en) 2018-12-20
JP6823540B2 true JP6823540B2 (en) 2021-02-03

Family

ID=64667369

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017105699A Active JP6823540B2 (en) 2017-05-29 2017-05-29 Video processing method, video processing system and video transmission device

Country Status (1)

Country Link
JP (1) JP6823540B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7338992B2 (en) * 2019-03-06 2023-09-05 日本放送協会 Transmitting device, receiving device, and program
CN112911346A (en) * 2021-01-27 2021-06-04 北京淳中科技股份有限公司 Video source synchronization method and device
WO2022254798A1 (en) * 2021-06-03 2022-12-08 ソニーグループ株式会社 Signal processing system and signal processing method
CN113890977A (en) * 2021-10-13 2022-01-04 中国电子科技集团公司第三研究所 Airborne video processing device and unmanned aerial vehicle with same

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4146104B2 (en) * 2001-05-29 2008-09-03 株式会社東芝 Digital broadcast program relay transmission system
JP2004015318A (en) * 2002-06-05 2004-01-15 Fujitsu Ltd Information transmission system having system clock synchronizing means, and information transmission apparatus thereof
KR20100071547A (en) * 2008-12-19 2010-06-29 한국전자통신연구원 Apparatus and controlling method for ultra high definition dvd recording and playback
JP2013141074A (en) * 2011-12-28 2013-07-18 Jvc Kenwood Corp Image pickup device
WO2013140485A1 (en) * 2012-03-17 2013-09-26 富士通株式会社 Encoding device, decoding device, encoding method, and decoding method
BR112015032851B1 (en) * 2013-07-05 2023-03-07 Sony Corporation DEVICES AND METHODS OF TRANSMISSION AND RECEPTION
JP6268066B2 (en) * 2013-09-20 2018-01-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ Transmission method, reception method, transmission device, and reception device
EP2894860A1 (en) * 2014-01-14 2015-07-15 Thomson Licensing Method and apparatus for multiplexing layered coded contents

Also Published As

Publication number Publication date
JP2018201159A (en) 2018-12-20

Similar Documents

Publication Publication Date Title
JP6823540B2 (en) Video processing method, video processing system and video transmission device
KR101967818B1 (en) Receiver and the receiving method thereof
EP3095247B1 (en) Robust live operation of dash
JP6655803B2 (en) Transmission method, reception method, transmission device, and reception device
TW200830874A (en) Image information transmission system, image information transmitting apparatus, image information receiving apparatus, image information transmission method, image information transmitting method, and image information receiving method
WO2011126586A1 (en) Video content distribution
US20230319371A1 (en) Distribution of Multiple Signals of Video Content Independently over a Network
JP2017520940A (en) Method and apparatus for multiplexing hierarchically encoded content
JP5881219B2 (en) Receiver capable of channel change with a single decoder and method at the receiver
JP2013030907A (en) Encoding device and encoding method, and decoding device and decoding method
KR20080076079A (en) Method and apparatus of playing digital broadcasting and method of recording digital broadcasting
JP4373730B2 (en) Video data transmission apparatus, video data transmission / reception system, and method thereof
KR20170070111A (en) Device for Generating a Video Output Data Stream, Video Source, Video System and Method for Generating a Video Output Data Stream or a Video Source Data Stream
JP6193569B2 (en) RECEPTION DEVICE, RECEPTION METHOD, AND PROGRAM, IMAGING DEVICE, IMAGING METHOD, AND PROGRAM, TRANSMISSION DEVICE, TRANSMISSION METHOD, AND PROGRAM
CN113645485A (en) Method and device for realizing conversion from any streaming media protocol to NDI (network data interface)
JP2011004015A (en) Playback device and content playback method
JP2008244781A (en) Ip retransmission system of terrestrial digital broadcast, and seamless switchover control method therefor in mottled composition
JP2008028673A (en) Digital television broadcasting wave transmission apparatus and broadcasting wave transmission method
JP5367771B2 (en) Video transmission system
KR100952309B1 (en) High definition image broadcasting method and system of the same
CN114189727B (en) Synchronous playing method, device, system, electronic equipment and readable storage medium
JP2009296135A (en) Video monitoring system
JP2019016850A (en) Video transmission method, video transmission system, transmission device, and reception device
KR20170093637A (en) Method for buffering media transport stream in heterogeneous networks environment and image receiving apparatus using the method
WO2022205064A1 (en) Video encoder, video decoder and corresponding method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190415

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190514

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190701

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200107

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200323

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200323

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200331

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200402

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200605

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200609

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20200729

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20200826

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201007

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201022

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20201126

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20201225

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20201225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210108

R150 Certificate of patent or registration of utility model

Ref document number: 6823540

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150