JPWO2018092173A1 - Remote video processing system - Google Patents

Remote video processing system Download PDF

Info

Publication number
JPWO2018092173A1
JPWO2018092173A1 JP2017521609A JP2017521609A JPWO2018092173A1 JP WO2018092173 A1 JPWO2018092173 A1 JP WO2018092173A1 JP 2017521609 A JP2017521609 A JP 2017521609A JP 2017521609 A JP2017521609 A JP 2017521609A JP WO2018092173 A1 JPWO2018092173 A1 JP WO2018092173A1
Authority
JP
Japan
Prior art keywords
video
processing
video data
time code
switching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017521609A
Other languages
Japanese (ja)
Inventor
宙蔵 中尾
宙蔵 中尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEXION CORPORATION
Original Assignee
NEXION CORPORATION
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEXION CORPORATION filed Critical NEXION CORPORATION
Publication of JPWO2018092173A1 publication Critical patent/JPWO2018092173A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

【課題】同時に撮影される複数の映像が解像度の高い大容量データであっても、撮影場所と離れた場所において該映像の遠隔処理を容易に行い、臨場感・迫力のある映像を放送することを可能とした遠隔映像処理システムを提供する。【解決手段】撮影システムと映像操作システムとからなる遠隔映像処理システムであって、撮影システムは、映像撮影装置と、ＴＣインサータと、映像バッファ手段と、エンコード手段と、圧縮映像送信手段と、からなるとともに、映像操作システムは、圧縮映像受信手段と、デコード手段と、映像切換加工手段と、制御信号生成手段と、制御タイムコード抽出手段と、制御情報送信手段と、からなり、撮影システムは、更にスイッチャーを装備しており、制御信号および制御タイムコードをスイッチャーが受信するとともに、制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、出力する構成である。【選択図】 図１Even if a plurality of images shot simultaneously are large-capacity data with high resolution, remote processing of the images can be easily performed at a location away from the shooting location, and a realistic and powerful image can be broadcast. A remote video processing system that enables A remote video processing system comprising a video shooting system and a video operation system, the video shooting system comprising a video shooting device, a TC inserter, a video buffer means, an encoding means, and a compressed video transmission means. The video operation system comprises a compressed video receiving means, a decoding means, a video switching processing means, a control signal generating means, a control time code extracting means, and a control information transmitting means. Further, a switcher is provided so that the switcher receives the control signal and the control time code, and the video data stored in the video buffer means is switched or processed based on the control signal and output. [Selection] Figure 1

Description

本発明は、テレビ放送用の映像データを配信するための遠隔映像処理システムに関し、特に、撮影される映像に対して、撮影場所から離れた場所において映像の切換乃至加工等の遠隔処理を行うことを可能とした遠隔映像処理システムに関する。   The present invention relates to a remote video processing system for distributing video data for television broadcasting, and in particular, to perform remote processing such as video switching or processing on a video to be shot at a location away from the shooting location. The present invention relates to a remote video processing system that enables the above.

従来より、テレビジョン放送等に用いられる映像を配信するための各種の技術が開発されており、映像の高品質性、映像配信の効率性や信頼性を考慮した映像配信に関するシステムが開発され、使用されている。近年では、４Ｋ解像度の映像配信など、大容量・高品質の映像データの配信・伝送が頻繁に行われており、映像伝送には、高い信頼性および高速性が要求されることから、高品質、高信頼性、高速伝送を確保する映像データの伝送システムの開発が進められている。   Conventionally, various technologies for distributing video used for television broadcasting and the like have been developed, and a system related to video distribution in consideration of the high quality of video and the efficiency and reliability of video distribution has been developed. It is used. In recent years, distribution and transmission of large-capacity and high-quality video data such as 4K resolution video distribution has been frequently performed, and high reliability and high speed are required for video transmission. Development of a video data transmission system that ensures high reliability and high-speed transmission is underway.

テレビでスポーツやコンサート等の映像を生配信する場合、一点のみのカメラで撮影した単一の映像が配信されることは殆どなく、会場等に設置された複数のカメラ、または、複数のカメラマンが担ぐカメラが撮影した多数の映像を適宜に切り換えたり、加工したりしながら注目される映像を選んで配信することが通常行われている。   When live images of sports, concerts, etc. are distributed live on a TV, a single image taken with only one camera is rarely distributed, and multiple cameras or multiple photographers installed at the venue etc. It is a common practice to select and distribute a video of interest while appropriately switching or processing a large number of videos taken by the camera in charge.

この場合、映像が高解像度であると映像データが大容量となることから、会場で撮影された複数の映像データを、会場から離れた放送局等で編集しながら生放送を行う場合、撮影した各映像データすべてを通常の放送局等の編集地に送信することが必要となるため、ネットワークの負荷が高くなり、対応する設備の増設を要したり、安定した映像データの送信が出来なくなるという問題点があった。従って、現状では、会場またはその近くに中継車などの放送用の機材を設置し、オペレータが、その場で映像を切換乃至加工処理を行っている。これにより、場合によっては、能力のあるオペレータ人員が不足するという深刻な問題が生じていた。   In this case, if the video is high resolution, the video data will be large, so if you are doing live broadcast while editing multiple video data taken at the venue at a broadcasting station etc. away from the venue, Since it is necessary to send all video data to an editing place such as a normal broadcasting station, the load on the network increases, and it is necessary to increase the corresponding equipment, or it becomes impossible to send stable video data There was a point. Therefore, at present, broadcasting equipment such as a relay car is installed at or near the venue, and the operator switches or processes the video on the spot. As a result, in some cases, there has been a serious problem of lack of capable operator personnel.

例えば、遠隔地における映像データを編集可能な映像の伝送システムに関する技術として、特開２０００−２４４８９３号が存在する。ここでは、遠隔地に設置された複数のビデオカメラと、その映像をネットワークを介して受信し、表示するモニタを有する映像配信システムに関する技術であって、カメラに対する切換指示を遠隔地の映像送信装置に送出するとともに、その切換指示に従ったカメラからの映像情報を修飾する文字情報を併せて送出し、モニタに映像情報と文字情報を表示させる映像情報修飾手段を装備した映像配信システムに関する技術が開示されている。   For example, Japanese Patent Laid-Open No. 2000-244893 exists as a technique related to a video transmission system capable of editing video data at a remote place. The present invention relates to a video distribution system having a plurality of video cameras installed at remote locations and a monitor that receives and displays the video images via a network, and transmits a switching instruction to the remote video transmission device. And a video distribution system equipped with video information modification means for displaying video information and text information on a monitor together with text information that modifies video information from the camera according to the switching instruction. It is disclosed.

この技術によれば、映像情報に地名等の文字情報を容易に表示、変更することが可能となり、映像の遠隔操作が可能となると考えられるが、複数ある映像を切り換える処理を容易に行えるとは言えなかった。すなわち、映像の切換にはオペレータが複数の映像を視聴しながら、放送する映像を選択するが、上記技術では、既に放送中の映像に加工を施すのみであり、映像を同時に視聴しながら映像を切換乃至加工することは、ネットワークトラフィックの重量化・増大化を招くため、必ずしも最適なシステムとは言えなかった。   According to this technology, it is possible to easily display and change character information such as place names in video information, and remote control of the video is considered possible. I could not say. In other words, the operator selects a video to be broadcast while watching a plurality of videos for video switching. However, in the above technique, only the video that is already being broadcast is processed. Switching or processing causes an increase in the weight and increase of network traffic, and is not necessarily an optimal system.

また、特開２００１−６９４９２号では、複数の映像入出力の組み合わせを切換えるために、画像入力部が、複数の撮像部からの画像を映像切換装置経由で受けとり、画像符号化部が入力した画像を符号化し、符号化画像保存部が符号化された画像を蓄積して自由時間軸で再生制御をするとともに、映像切換の制御および複数の撮像部の映像出力をネットワークを介し通信するように構成し、複数の映像の入出力制御を行う映像出力制御装置に関する技術が開示されている。   In Japanese Patent Laid-Open No. 2001-69492, an image input unit receives images from a plurality of imaging units via a video switching unit and switches an image input by an image encoding unit in order to switch a combination of a plurality of video input / outputs. The encoded image storage unit stores the encoded image and controls reproduction on a free time axis, and also controls video switching control and video output of a plurality of imaging units via a network. A technique related to a video output control apparatus that performs input / output control of a plurality of videos is disclosed.

この技術によれば、画像や映像をネットワークを介して送受信可能となるとともに、画像および映像の切換をネットワークを介して遠隔で操作可能となると考えられるが、映像の大容量化に対応した技術ということは出来ず、高品質の大容量データの送信およびこのような映像の遠隔切換や加工処理には向かないという大きな問題点があった。   According to this technology, it is considered that images and videos can be transmitted / received via a network, and switching of images and videos can be remotely operated via a network. However, there is a big problem that it is not suitable for the transmission of high-quality large-capacity data and the remote switching and processing of such images.

そこで、映像の生配信などを行う際に、優秀な少数のオペレータが遠隔操作により、複数のカメラで撮影された映像を切り換え、更に加工処理を施したうえで、ネットワークに加工処理済みの映像データを流すことで放送するための遠隔映像処理に関するシステムの開発が望まれていた。
特開２０００−２４４８９３号公報 特開２００１−６９４９２号公報 Therefore, when performing live distribution of video, a small number of excellent operators remotely control the video shot by multiple cameras, and after further processing, video data that has been processed into the network The development of a system related to remote video processing for broadcasting by streaming is desired.
JP 2000-244893 A JP 2001-69492 A

本発明は、放送用の映像データを配信するための遠隔映像処理システムであって、特に、同時に撮影される複数の映像が解像度の高い大容量データである場合であっても、撮影場所と離れた場所において該映像の切換乃至加工等の遠隔処理を容易に行い、臨場感・迫力のある映像を放送することを可能とした遠隔映像処理システムを提供することを目的とする。   The present invention relates to a remote video processing system for distributing video data for broadcasting, and in particular, even when a plurality of videos shot at the same time are large-capacity data with high resolution, they are separated from the shooting location. It is an object of the present invention to provide a remote video processing system that can easily perform remote processing such as switching or processing of the video at a place and broadcast a realistic and powerful video.

上記の目的を達成するために本発明に係る遠隔映像処理システムは、撮影現場に設置する撮影システムと、撮影システムが撮影した映像を遠隔処理する映像操作システムと、からなる遠隔映像処理システムであって、前記撮影システムは、映像を撮影するための映像撮影装置と、前記映像撮影装置から送信される映像データにタイムコードを付加するＴＣインサータと、前記タイムコードが付加された映像データを一時的に記憶するための映像バッファ手段と、前記タイムコードが付加された映像データの圧縮処理を行うエンコード手段と、前記エンコード手段によってエンコードされた映像データを送信する圧縮映像送信手段と、からなるとともに、前記映像操作システムは、前記圧縮映像送信手段より送信された映像データを受信する圧縮映像受信手段と、前記エンコードされた映像データのデコード処理を行うデコード手段と、前記映像データを所望する映像データに切換乃至加工する処理を行うための映像切換加工手段と、前記映像切換加工手段による切換乃至加工処理を制御信号に変換する制御信号生成手段と、前記映像切換加工手段による映像の切換乃至加工処理時のタイムコードを制御タイムコードとして該映像データから抽出する制御タイムコード抽出手段と、前記制御信号と前記制御タイムコードを送信する制御情報送信手段と、からなり、前記撮影システムは、更に、前記映像バッファ手段に記憶された映像データに切換乃至加工処理を施して出力するスイッチャーを装備しており、前記制御信号および前記制御タイムコードを前記スイッチャーが受信するとともに、前記スイッチャーは、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、切換乃至加工処理後の映像データを出力する構成である。   In order to achieve the above object, a remote video processing system according to the present invention is a remote video processing system comprising a shooting system installed at a shooting site, and a video operation system for remotely processing a video shot by the shooting system. The imaging system includes a video imaging device for imaging video, a TC inserter that adds a time code to video data transmitted from the video imaging device, and video data with the time code added temporarily. A video buffer means for storing, an encoding means for compressing the video data to which the time code is added, and a compressed video transmission means for sending the video data encoded by the encoding means, The video operation system is configured to receive a video data transmitted from the compressed video transmission unit. By video receiving means, decoding means for decoding the encoded video data, video switching processing means for switching or processing the video data into desired video data, and video switching processing means Control signal generating means for converting switching or processing processing into control signals; control time code extracting means for extracting from the video data a time code at the time of video switching or processing by the video switching processing means; And a control information transmitting means for transmitting the control signal and the control time code. The photographing system further includes a switcher for switching or processing the video data stored in the video buffer means for output. When the switcher receives the control signal and the control time code Moni, said switcher, on the basis of the control signal, performs a switching 換乃 optimum processing on the image data stored in the video buffer means is configured to output the image data after switching 換乃 optimum processing.

また、前記スイッチャーは、前記制御信号に含まれる制御タイムコードと、前記映像バッファ手段に記憶された映像データ中のタイムコードを比較して、同一のタイムコードを有する映像データのフレームを抽出するとともに、該フレーム位置から、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施す構成である。   The switcher compares a control time code included in the control signal with a time code in the video data stored in the video buffer means, and extracts a frame of video data having the same time code. The video data stored in the video buffer means is switched or processed from the frame position based on the control signal.

また、前記映像撮影装置と、前記エンコード手段と、前記デコード手段は一または複数設置（装備）されるとともに、一または複数からなる前記映像撮影装置によって撮影された一または複数からなる映像データは、それぞれＴＣインサータによって同一のタイムコードが付加され、映像バッファ手段に記憶されるとともに一または複数からなるエンコード手段によって各々エンコード処理され、
エンコード処理された各映像データは、対応するデコード手段によって各々デコード処理される構成でもある。In addition, one or a plurality of the video photographing device, the encoding unit, and the decoding unit are installed (equipped), and one or a plurality of video data photographed by the one or plural video photographing devices are: The same time code is added by each TC inserter, stored in the video buffer means, and encoded by one or a plurality of encoding means,
Each encoded video data is also configured to be decoded by corresponding decoding means.

また、撮影システムは、ＴＣインサータが各映像データに付加するタイムコードを生成するＴＣ生成手段を装備する構成である。
また、前記制御信号は、映像切換加工手段による映像の加工処理と同様の加工処理を映像バッファ手段に記憶された画像に施すための映像データの操作コマンドからなり、該操作コマンドからなる制御信号を前記スイッチャーが受信して前記映像バッファ手段に記憶された一または複数からなる映像データに切換乃至加工処理を施す構成である。The photographing system is configured to include a TC generation unit that generates a time code to be added to each video data by the TC inserter.
The control signal includes an operation command of video data for performing the same processing as the video processing by the video switching processing unit on the image stored in the video buffer unit, and the control signal including the operation command is The switcher is configured to perform switching or processing on one or more video data received by the switcher and stored in the video buffer means.

更に、前記映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなり、該映像形式からなる前記映像データのフレーム毎にタイムコードが付加される構成である。   Further, the video data has a single video format selected from SD video, HD video, 4K video, and 8K video, and a time code is added to each frame of the video data having the video format. .

本発明は、上記詳述した通りの構成であるので、以下のような効果がある。
１．映像データにタイムコードを付与する構成としたため、同期処理が容易となり、処理する映像の再生開始位置を精確に指定することが可能となる。また、エンコードされて送信された加工処理用の映像データをもとに映像の切換乃至加工処理を行う構成としたため、遠隔地（センター）で少数の事情通のオペレータが視聴することが可能となり、切換乃至加工の作業を遠隔で行うことが可能となる。また、遠隔地における映像切換加工手段による上記作業内容を制御信号に変換する制御信号生成手段を設けたため、制御信号を現場にあるスイッチャーに送って遠隔操作することにより、現場のバッファに蓄積された放送用の大容量映像データを遠隔で切換乃至加工処理を自動的に行うことが可能となり、現場にオペレータがいなくても、映像の切換乃至加工処理を行う事が可能となる。Since the present invention is configured as described in detail above, the following effects are obtained.
1. Since the time code is added to the video data, the synchronization process is facilitated, and the playback start position of the video to be processed can be designated accurately. In addition, since the video is switched or processed based on the video data for processing that is encoded and transmitted, it becomes possible for a small number of operators to view and listen at a remote location (center). Switching or machining can be performed remotely. In addition, since the control signal generating means for converting the above-mentioned work contents by the video switching processing means in the remote place to the control signal is provided, the control signal is sent to the switcher at the work site and remotely operated, so that it is stored in the buffer at the work site. It is possible to automatically switch or process large-capacity video data for broadcasting remotely, and it is possible to perform switching or processing of images without an operator at the site.

２．スイッチャーが、制御信号に基づいて、映像データのタイムコードをもとに映像バッファ手段に記憶された映像データを切換乃至加工処理するため、オペレータが遠隔地（センター）で行った切換乃至加工処理と同じ処理を、映像バッファ手段に記憶された映像データに対して正確に施すことが可能となる。
３．映像撮影装置と、エンコード手段と、デコード手段を一または複数設置（装備）する構成としたため、各映像装置で撮影された映像データを、個別のエンコード手段でエンコードするとともに、対応するデコード手段でデコード可能となり、処理用の映像データの伝送の遅延を防止するとともに、エンコード手段とデコード手段の故障時であっても、映像の切換乃至加工処理を継続することが可能となる。2. Since the switcher switches or processes the video data stored in the video buffer means based on the time code of the video data based on the control signal, the switching or processing performed by the operator at a remote place (center) The same processing can be accurately performed on the video data stored in the video buffer means.
3. Since one or more video shooting devices, encoding means, and decoding means are installed (equipped), video data shot by each video device is encoded by individual encoding means and decoded by corresponding decoding means. This makes it possible to prevent delays in the transmission of processing video data and to continue video switching or processing even when the encoding means and decoding means fail.

４．タイムコードを生成するためのＴＣ生成手段を設けたため、映像の同期処理を正確に行う事が可能となる。
５．制御信号を操作コマンドとしたため、スイッチャーによる映像データへの切換乃至加工処理を簡易なものとすることが可能となる。
６．映像データを、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像等としたため、映像データのフレーム毎にタイムコードを付加することが可能となるとともに、鮮明な映像を放送することが可能となる。4). Since the TC generation means for generating the time code is provided, it is possible to accurately perform the video synchronization process.
5. Since the control signal is an operation command, switching to video data or processing by the switcher can be simplified.
6). Since the video data is SD video, HD video, 4K video, 8K video, and the like, a time code can be added to each frame of the video data and a clear video can be broadcast.

以下、本発明に係る遠隔映像処理システムを、図面に示す実施例に基づいて詳細に説明する。図１は、本発明に係る遠隔映像処理システムの概略図であり、図２は、スイッチャーによる切換乃至加工処理の概念図である。   Hereinafter, a remote video processing system according to the present invention will be described in detail based on embodiments shown in the drawings. FIG. 1 is a schematic diagram of a remote video processing system according to the present invention, and FIG. 2 is a conceptual diagram of switching or processing by a switcher.

本発明に係る遠隔映像処理システム１は、図１に示すように、撮影現場に設置される撮影システム１００と、撮影システム１００が撮影した映像を遠隔処理するための映像操作システム２００と、からなり、撮影システムから離れた場所において映像の切換乃至加工処理を行い放送するための映像データを作成することに用いられる。   As shown in FIG. 1, a remote video processing system 1 according to the present invention includes a shooting system 100 installed at a shooting site, and a video operation system 200 for remotely processing a video shot by the shooting system 100. It is used to create video data for broadcasting by switching or processing video at a place away from the photographing system.

撮影システム１００は、サッカーや野球などのスポーツの試合やコンサート等が行われている現場に設置する撮影用の複数の各種機材を含むシステムである。撮影システム１００は、本実施例では、撮影用カメラや撮影した映像を配信する装置等の各種放送用の機材を組み合わせてシステム化した装置からなり、これら各種機材を移動可能な中継車に搭載した構成となっている。これにより、中継車が上記各種現場へ移動し、現場におけるシステムの設置・設定作業を要せずに、直ちに撮影作業に入ることが可能となっている。   The photographing system 100 is a system including a plurality of various photographing equipments installed at a site where sports games such as soccer and baseball, concerts, and the like are held. In this embodiment, the photographing system 100 is composed of a system that is a combination of various broadcasting equipment such as a photographing camera and a device that distributes photographed video, and these various equipment are mounted on a movable relay vehicle. It has a configuration. As a result, the relay vehicle moves to the above-mentioned various sites, and it is possible to immediately start photographing without requiring system installation / setting operations at the sites.

撮影システム１００は、図１に示すように、映像撮影装置１１０と、ＴＣインサータ１２０と、映像バッファ手段１３０と、エンコード手段１４０と、圧縮映像送信手段１５０と、からなる。映像撮影装置１１０は、映像を撮影するための装置であり、本実施例では、現場に固定設置するカメラおよび／またはカメラマンが担いで移動しながら撮影するための複数のカメラからなる構成である。   As shown in FIG. 1, the photographing system 100 includes a video photographing device 110, a TC inserter 120, a video buffer unit 130, an encoding unit 140, and a compressed video transmission unit 150. The video photographing device 110 is a device for photographing a video. In this embodiment, the video photographing device 110 is composed of a camera that is fixedly installed on the site and / or a plurality of cameras that are photographed while being carried by a cameraman.

映像撮影装置１１０によって撮影された映像データ１０ａは、図１に示すように、ＴＣインサータ１２０に伝送される。ＴＣインサータ１２０は、映像を撮影した映像撮影装置１１０から送信されてくるデータ化された映像データ１０ａに対して、フレーム毎にタイムコード１２を付加するための装置である。タームコード１２は、映像データ１０ａに付加される時間（時：分：秒）およびフレーム数情報からなり、本実施例では、ＳＭＰＴＥ規格のタイムコードがフレーム毎に付加されることとなっているが、これに限定されることはなく、任意の規格に基づくタイムコードを付加して使用することが可能である。   Video data 10a shot by the video shooting device 110 is transmitted to the TC inserter 120 as shown in FIG. The TC inserter 120 is a device for adding a time code 12 for each frame to the video data 10a converted into data transmitted from the video imaging device 110 that has captured the video. The term code 12 includes time (hours: minutes: seconds) and frame number information added to the video data 10a. In this embodiment, the SMPTE standard time code is added for each frame. However, the present invention is not limited to this, and a time code based on an arbitrary standard can be added and used.

タイムコード１２を付加された映像データ１０ｂは、次に、映像バッファ手段１３０およびエンコード手段１４０に分岐して伝送される。映像バッファ手段１３０は、タイムコード１２が付加された映像データ１０ｂを一時的に記憶するための手段である。本実施例では、映像データ１０ｂの容量が大きいことから、そのような大容量データを記憶可能なハードディスク等の記憶媒体からなる。また、本実施例では、映像バッファ手段１３０への映像データ１０ｂの読み書きは高速で頻繁かつ継続的に行われるため、記憶媒体の高速性や信頼性が要求される。映像データ１０ｂの書込みおよび読み出し時の機械的遅延や物理的破損、その他のエラーを避ける為、高速読み書きが可能なフラッシュメモリを用いる事も可能であるが、これらに限定されることはなく、任意の記憶媒体を使用することが可能である。   The video data 10b to which the time code 12 is added is then branched and transmitted to the video buffer means 130 and the encoding means 140. The video buffer means 130 is means for temporarily storing the video data 10b to which the time code 12 is added. In this embodiment, since the capacity of the video data 10b is large, the video data 10b is composed of a storage medium such as a hard disk capable of storing such large capacity data. Further, in this embodiment, reading / writing of the video data 10b to / from the video buffer unit 130 is frequently and continuously performed at a high speed, so that high speed and reliability of the storage medium are required. In order to avoid mechanical delays, physical damages, and other errors during writing and reading of the video data 10b, it is possible to use a flash memory capable of high-speed reading and writing. It is possible to use a storage medium.

エンコード手段１４０は、ＴＣインサータ１２０によってタイムコード１２が付加された映像データ１０ｂの圧縮処理を行うエンコーダである。映像データ１０ｂは、エンコード手段１４０によって、圧縮されネットワーク上で送信可能な形に変換される。これにより、大容量の映像データであっても、ネットワークトラフィックの重量化や増大化を回避し、ネットワークへの負荷を抑制して、低遅延伝送を実現し安定したデータ伝送を行うことが可能となる。なお、エンコード手段１４０によってエンコードされる映像データ１０ｂは、実際の放送用に用いる映像データではないため、映像の内容を確認し切換乃至加工処理できる程度の解像度でも支障を来さない事から、映像の解像度を下げてデータを軽くした状態でエンコードする構成とする事が可能となる。   The encoding unit 140 is an encoder that compresses the video data 10b to which the time code 12 is added by the TC inserter 120. The video data 10b is compressed by the encoding means 140 and converted into a form that can be transmitted on the network. As a result, even for large-capacity video data, it is possible to avoid an increase in the network traffic weight and increase the network traffic, suppress the load on the network, realize low-delay transmission and perform stable data transmission. Become. Since the video data 10b encoded by the encoding means 140 is not video data used for actual broadcasting, the video data 10b does not cause any trouble even if the resolution is such that the content of the video can be confirmed and switched or processed. It is possible to encode the data with the resolution reduced and the data lightened.

圧縮映像送信手段１５０は、エンコード手段１４０によってエンコードされた映像データ１０ｃをネットワーク上へと送信するための手段である。映像データ１０ｃは、圧縮等されたデータであるため、圧縮映像送信手段１５０は大きな負荷が掛かることなく、ネットワーク上で映像データ１０ｃを送信することが可能となっている。本実施例では、圧縮映像送信手段１５０は映像データ１０ｃをパケット分割した上で、パケットごとにネットワーク上に送出する構成である。   The compressed video transmission unit 150 is a unit for transmitting the video data 10c encoded by the encoding unit 140 to the network. Since the video data 10c is compressed data, the compressed video transmission means 150 can transmit the video data 10c over the network without applying a large load. In the present embodiment, the compressed video transmission means 150 is configured to divide the video data 10c into packets and send them to the network for each packet.

次に、映像操作システム２００は、撮影システム１００が撮影したスポーツ等の各種の映像を遠隔で切換乃至加工の処理するためのシステムであり、圧縮映像受信手段２１０と、デコード手段２２０と、映像切換加工手段２３０と、制御信号生成手段２４０と、制御タイムコード抽出手段２５０と、制御情報送信手段２６０と、からなる構成である。   Next, the video operation system 200 is a system for remotely switching or processing various sports images taken by the imaging system 100, such as a compressed video receiving unit 210, a decoding unit 220, and a video switching unit. The processing unit 230, the control signal generation unit 240, the control time code extraction unit 250, and the control information transmission unit 260 are configured.

圧縮映像受信手段２１０は、圧縮映像送信手段１５０よりネットワークへ送信された映像データ１０ｃを受信するための手段である。映像データ１０ｃは、圧縮映像送信手段１５０によって映像操作システム２００に向けてネットワーク上に送出されたあと、圧縮映像受信手段２１０によって受信される構成である。圧縮映像受信手段２１０は、映像データ１０ｃにパケットの欠損がないかを検証したうえで、パケットロスが発生した場合に再送要求を行う構成とすることが可能である。   The compressed video receiving unit 210 is a unit for receiving the video data 10c transmitted from the compressed video transmitting unit 150 to the network. The video data 10c is configured to be received by the compressed video receiving unit 210 after being transmitted to the video operation system 200 by the compressed video transmitting unit 150 on the network. The compressed video receiving means 210 can be configured to make a retransmission request when a packet loss occurs after verifying that there is no packet loss in the video data 10c.

なお、前述の通り、映像操作システム２００で扱う映像データ自体は、直接放送に用いられるものではないため、解像度の低いものであっても大きな問題は発生しない。このため、パケットロスにより映像が一部欠損している場合であっても、ごく短時間であれば、再送要求せずそのまま続きの映像を受信し続ける構成とする事も出来るが、却ってその方がコスト的には望ましいと考えられる場合もある。   As described above, the video data itself handled by the video operation system 200 is not directly used for broadcasting, so that no serious problem occurs even if the resolution is low. For this reason, even if the video is partially lost due to packet loss, it can be configured to continue receiving the next video without requesting retransmission in a very short time. May be considered desirable in terms of cost.

デコード手段２２０は、エンコード手段１４０によってエンコードされた映像データ１０ｃのデコード処理を行うための手段であり、これにより映像操作システム２００内においても、受信した映像データ１０ｃを視聴しながら、映像に対して切換乃至加工の処理を行うことが可能となる。   The decoding unit 220 is a unit for performing the decoding process of the video data 10c encoded by the encoding unit 140. With this, even within the video operation system 200, the received video data 10c can be viewed while viewing the video. Switching or processing can be performed.

映像切換加工手段２３０は、映像データ１０ｃを所望する映像データ１０ｄとするため、オペレータが映像に対して切換乃至加工の処理を行うための手段である。映像切換加工手段２３０は、本実施例では、デコードされた映像データ１０ｃをオペレータが画面を見ながら、コンピュータを用いて、他の映像に切り換えたり、画像中に文字情報等を挿入したりする処理を行うことが可能となる。これにより、映像データ１０ｃに対して仮の映像の切換乃至加工処理を行い、映像データ１０ｄとする事ができる。   The video switching processing means 230 is a means for the operator to perform switching or processing on the video so that the video data 10c is the desired video data 10d. In this embodiment, the video switching processing means 230 is a process in which the operator switches the decoded video data 10c to another video or inserts character information or the like in the image while watching the screen. Can be performed. As a result, the video data 10c can be converted into the video data 10d by switching or processing the temporary video.

制御信号生成手段２４０は、映像切換加工手段２３０による映像データ１０ｃの切換乃至加工処理を制御信号１４に変換して取得する手段である。映像切換加工手段２３０では、前述の通り、映像データ１０ｃに対して他の映像へ切り換え処理したり、画像中に文字情報等を挿入する処理、その他、画像データを複数選択して同時に表示する処理などが行われる。制御信号生成手段２４０は、この各処理を再現可能となるように、処理内容をコード化された制御信号１４に変換して生成する。これにより、制御信号１４を介して、放送用の映像データに対して、映像の切換乃至加工処理を施すことが可能となる。   The control signal generation unit 240 is a unit that converts the video data 10c switching or processing by the video switching processing unit 230 into a control signal 14 and obtains it. As described above, the video switching processing means 230 performs processing for switching the video data 10c to another video, processing for inserting character information or the like in the image, and other processing for selecting and displaying a plurality of image data simultaneously. Etc. are performed. The control signal generation means 240 converts the processing content into a coded control signal 14 and generates it so that each processing can be reproduced. Thereby, it is possible to perform video switching or processing on the video data for broadcasting via the control signal 14.

制御タイムコード抽出手段２５０は、上述の映像切換加工手段２３０による映像の切換乃至加工処理の時、すなわち制御信号生成手段２４０による制御信号１４生成時に、各処理を行うタイミングで映像データ１０ｄに記録されているタイムコード１２を参照して制御タイムコード１６として抽出するための手段である。これにより、映像の切換乃至加工処理を行った映像データ１０ｄのフレームを特定することが可能となる。   The control time code extracting means 250 is recorded in the video data 10d at the timing of performing each processing when the video switching or processing is performed by the video switching processing means 230, that is, when the control signal 14 is generated by the control signal generating means 240. This is means for extracting the control time code 16 with reference to the time code 12 being stored. As a result, it is possible to specify the frame of the video data 10d that has undergone video switching or processing.

制御情報送信手段２６０は、生成した制御信号１４と、抽出した制御タイムコード１６を、撮影システム１００に向けてネットワーク上に顕出（出力）し送信するための手段である。この構成とすることにより、ネットワーク上を伝送させるデータは、制御信号１４と制御タイムコード１６のみであるため、トラフィックの増加によるデータ伝送の遅延リスクは解消される。   The control information transmitting unit 260 is a unit for exposing (outputting) the generated control signal 14 and the extracted control time code 16 to the imaging system 100 on the network and transmitting them. By adopting this configuration, since the data to be transmitted on the network is only the control signal 14 and the control time code 16, the risk of data transmission delay due to an increase in traffic is eliminated.

次に、制御信号１４と制御タイムコード１６が送信された撮影システム１００の動作について説明する。撮影システム１００は、更に、スイッチャー１６０を装備した構成となっている。スイッチャー１６０は、映像バッファ手段１３０に予め記憶された映像データ１０ｂに対して、自動的に切換乃至加工処理を行って出力するための装置である。   Next, the operation of the imaging system 100 to which the control signal 14 and the control time code 16 are transmitted will be described. The imaging system 100 is further equipped with a switcher 160. The switcher 160 is a device for automatically switching or processing the video data 10b stored in the video buffer means 130 in advance and outputting it.

スイッチャー１６０は、制御情報送信手段２６０によって送信された制御信号１４と制御タイムコード１６を受信するとともに、処理内容がコード化された制御信号１４によって指定された映像の切換および文字情報の付加などの処理を、映像バッファ手段１３０に予め記憶された映像データ１０ｂに対して行う。この際、制御タイムコード１６を読み取って、映像データ１０ｂ中のタイムコード１２と対比した上で、映像データ１０ｂ中の制御タイムコード１６で指定されたフレームに対して、制御信号１４で指定された切換乃至加工処理を施す（図２参照）。その後、切換乃至加工処理が行われた放送用の映像データ１０ｅを出力する。出力された映像データ１０ｅは放送用の鮮明な大容量の映像データであり、各受像機に送信され放送される。   The switcher 160 receives the control signal 14 and the control time code 16 transmitted by the control information transmitting means 260, and at the same time, switches the video specified by the control signal 14 in which the processing content is coded and adds character information. Processing is performed on the video data 10b stored in the video buffer means 130 in advance. At this time, the control time code 16 is read and compared with the time code 12 in the video data 10b, and the frame specified by the control time code 16 in the video data 10b is designated by the control signal 14. Switching or processing is performed (see FIG. 2). Thereafter, broadcast video data 10e subjected to switching or processing is output. The output video data 10e is clear and large-capacity video data for broadcasting, and is transmitted to each receiver and broadcasted.

この構成とすることにより、撮影システム１００の映像バッファ手段１３０に格納された映像データ１０ｂへの切換乃至加工処理と、映像操作システム２００の映像切換加工手段２３０で行われる切換乃至加工処理とを同期することが可能となる。また、例えば、遠方で行われるスポーツイベントの映像を、センターで切換乃至加工処理するようなことが可能となり、現場には熟練したオペレータがいなくても、センターで待機している専門のオペレータによって適宜に映像の切換乃至加工処理を行う事が可能となる。特に、センターに送信する映像データはエンコードされているため、ネットワーク負荷を最大限に軽減した状態で、大容量映像データの加工処理を遠方において操作処理することが可能となる。   With this configuration, the switching or processing of the video data 10b stored in the video buffer unit 130 of the photographing system 100 and the switching or processing performed by the video switching processing unit 230 of the video operation system 200 are synchronized. It becomes possible to do. In addition, for example, it is possible to switch or process a video of a sporting event held at a distance at the center, and even if there is no skilled operator at the site, it can be appropriately performed by a specialized operator standing by at the center. In addition, it is possible to switch or process images. In particular, since the video data to be transmitted to the center is encoded, it is possible to manipulate the processing of large-capacity video data at a distance while reducing the network load to the maximum.

従来は、このような撮影現場と遠く離れた場所に位置するセンターにおいて映像の切換乃至加工処理を行う場合、現場で撮影されたすべての映像データをセンター等に送り、センターにおいて直接映像データに切換乃至加工処理を施すこととなるため、ネットワーク負荷が大きくなり、生放送を行う場合には、安定した放送を行う事が困難になるという問題点があった。そのために現実的には、中継車等に担当のオペレータが搭乗し、各撮影現場で映像の切換乃至加工処理を行っているが、この処理は技術や経験が必要なため、熟練したオペレータが各撮影現場に帯同すると、オペレータの能力に差があるため熟練したオペレータの人員不足が発生するという深刻な問題が生じていた。   Conventionally, when video switching or processing is performed at a center located far away from the shooting site, all video data shot at the site is sent to the center etc. and switched directly to video data at the center. In addition, since the processing is performed, there is a problem that the network load increases, and it is difficult to perform stable broadcasting when performing live broadcasting. Therefore, in reality, the operator in charge is on board a relay car and the video is switched or processed at each shooting site. This process requires skill and experience. When accompanied by the shooting site, there was a serious problem in that there was a shortage of skilled operators due to differences in operator capabilities.

本発明に係る構造を採用することにより、集中的にセンターに配属された熟練オペレータによる処理で上記問題点が解消され、遠隔地における各撮影現場から送られて来るエンコードされた映像データを切換乃至加工処理することで、現場にバッファされている放送用の映像データの切換乃至加工処理を遠隔操作できるため、生放送用の鮮明な映像データの切換乃至加工処理を遠隔地であるセンターにおいて集中的に行うことが可能となった。   By adopting the structure according to the present invention, the above-mentioned problems are solved by processing by an expert operator who is centrally assigned to the center, and the encoded video data sent from each photographing site in a remote place is switched or switched. By processing, it is possible to remotely control the switching or processing of broadcast video data buffered in the field, so that the switching or processing of clear video data for live broadcasting is concentrated at a remote center. It became possible to do.

スイッチャー１６０による切換乃至加工処理を詳述する。スイッチャー１６０は、映像操作システム２００からの制御信号１４と同時に送信される（または含まれる）制御タイムコード１６と、映像バッファ手段１３０に記憶された映像データ１０ｂ中のタイムコード１２を比較する。そして、同一のタイムコードの映像データ１０ｂのフレームを対比抽出する。その後、抽出したフレーム位置から、制御信号１４に基づいて、映像切換加工手段２３０で行った切換乃至加工処理と同様の処理を施す。この処理を繰り返すことにより、映像バッファ手段１３０に記憶された映像データ１０ｂに対して、切換乃至加工処理を施す。これにより、オペレータが遠隔地で行った切換乃至加工処理と同じ処理を、映像バッファ手段１３０に記憶された映像データ１０ｂに対して正確に施すことが可能となる。   Switching or processing by the switcher 160 will be described in detail. The switcher 160 compares the control time code 16 transmitted (or included) simultaneously with the control signal 14 from the video operation system 200 and the time code 12 in the video data 10b stored in the video buffer means 130. Then, the frames of the video data 10b having the same time code are extracted by contrast. Thereafter, based on the control signal 14, the same processing as the switching or processing performed by the video switching processing means 230 is performed from the extracted frame position. By repeating this processing, switching or processing is performed on the video data 10b stored in the video buffer means 130. As a result, the same processing as switching or processing performed by the operator at a remote location can be accurately performed on the video data 10b stored in the video buffer means 130.

本発明に係る遠隔映像処理システム１の実施例として、映像撮影装置１１０と、エンコード手段１４０と、デコード手段２２０は、一または複数個が別々に設置（装備）される構成である。一のみ設置される場合は、映像データ１０ｂへの文字情報等の加工処理がメインとなり、複数個設置される場合には、例えば、野球やサッカー中継、コンサートの中継のように、映像データの切換処理が多く行われることになる。   As an embodiment of the remote video processing system 1 according to the present invention, one or a plurality of the video photographing device 110, the encoding unit 140, and the decoding unit 220 are separately installed (equipped). When only one is installed, the processing of character information etc. on the video data 10b is the main, and when multiple are installed, switching of the video data is performed, for example, baseball, soccer broadcast, concert broadcast, etc. A lot of processing will be performed.

本実施例では、映像撮影装置１１０を複数設置する構成とした場合、エンコード手段１４０と、デコード手段２２０も同数設け、それぞれが１対１に対応する構成としている。すなわち、複数からなる映像撮影装置１１０によって撮影された複数からなる映像データ１０ａは、それぞれＴＣインサータ１２０によって同一のタイムコード１２が付加される。これにより、タイムコード１２に付された複数の映像データ１０ｂ間における同期を取ることが可能となる。その後、各映像データ１０ｂは、映像バッファ手段１３０に記憶され、一方、複数からなるエンコード手段１４０によって各々エンコード処理が行われる。   In this embodiment, when a plurality of video photographing apparatuses 110 are installed, the same number of encoding means 140 and decoding means 220 are provided, and each of them corresponds to one to one. That is, the same time code 12 is added by the TC inserter 120 to each of the plurality of video data 10 a captured by the plurality of video imaging devices 110. As a result, synchronization between the plurality of video data 10b attached to the time code 12 can be achieved. Thereafter, each video data 10b is stored in the video buffer means 130, and on the other hand, each encoding process is performed by a plurality of encoding means 140.

更に、エンコード処理された各映像データ１０ｃは、対応するデコード手段２２０によって、各々デコード処理される。これにより、映像切換加工手段２３０で行われる切換乃至加工処理用の映像データの伝送処理に掛かる時間を削減することが可能となり、生放送における映像の遅延を最小限に抑えることが可能となった。また、何れかのエンコード手段１４０やデコード手段２２０が故障した場合であっても、他のエンコード手段１４０とデコード手段２２０を予備機として利用することが可能となり、映像の切換乃至加工処理を途切れることなく継続することが可能となった。なお、一のみの映像撮影装置１１０とする場合には、映像同士の同期を取る必要はないため、エンコード手段１４０とデコード手段２２０も一のみ使用する構成とすることで問題はない事となる。   Further, each encoded video data 10 c is decoded by the corresponding decoding means 220. As a result, it is possible to reduce the time required for the transmission processing of the video data for switching or processing performed by the video switching processing means 230, and it is possible to minimize the video delay in live broadcasting. Even if any of the encoding means 140 and the decoding means 220 breaks down, it becomes possible to use the other encoding means 140 and the decoding means 220 as a spare machine, and the video switching or processing process is interrupted. It became possible to continue without. When only one video photographing apparatus 110 is used, it is not necessary to synchronize the videos, and there is no problem if only one encoding unit 140 and one decoding unit 220 are used.

撮影システム１００は、図１に示すように、ＴＣインサータ１２０が各映像データ１０ａに付加するタイムコード１２を生成するためのＴＣ生成手段１２２を装備する構成である。この構成とすることにより、映像の同期処理を正確に行う事が可能となった。   As shown in FIG. 1, the imaging system 100 is configured to include a TC generation unit 122 for generating a time code 12 that the TC inserter 120 adds to each video data 10a. With this configuration, it is possible to accurately perform video synchronization processing.

制御信号１４は、本実施例では、映像データ１０ｂに対する操作コマンドからなる構成となっている。この操作コマンドは、映像切換加工手段２３０によって映像データ１０ｃに施される切換乃至加工処理と同様の処理を映像バッファ手段１３０に記憶された映像データ１０ｂに施すためのものであり、例えば、映像データを他の映像データであって同じタイムコード１２部分からの映像に切り換えるコマンドや、映像データ１０ｂ中の特定のタイムコード１２部分に文字情報を挿入するコマンドなどからなるものである。その他、一定の時間経過後に繰り返し情報を表示したり、一定間隔で映像を自動的に切り換えるコマンドを用いる事も可能である。   In this embodiment, the control signal 14 is composed of an operation command for the video data 10b. This operation command is for applying the same processing as the switching or processing performed on the video data 10c by the video switching processing means 230 to the video data 10b stored in the video buffer means 130. Is a command for switching to other video data and video from the same time code 12 portion, a command for inserting character information into a specific time code 12 portion in the video data 10b, and the like. In addition, it is also possible to display information repeatedly after a certain period of time or use a command for automatically switching the video at a certain interval.

これにより、映像操作システム２００から送信された操作コマンドからなる制御信号１４をスイッチャー１６０が受信し、映像バッファ手段１３０に記憶された一または複数からなる映像データ１０ｂに切換乃至加工処理を施すことが可能となり、スイッチャー１６０による映像データ１０ｂへの切換乃至加工処理を簡易なものとすることが可能となった。なお、本実施例では、映像データのバッファから放送用映像データの配信までのタイムラグは、２００〜３００ｍｓｅｃに抑えることが可能となっている。   As a result, the switcher 160 receives the control signal 14 composed of the operation command transmitted from the video operation system 200, and switches or processes the one or more video data 10b stored in the video buffer means 130. Thus, the switching or processing to the video data 10b by the switcher 160 can be simplified. In this embodiment, the time lag from the video data buffer to the distribution of the broadcast video data can be suppressed to 200 to 300 msec.

本発明で切換乃至加工処理を施す放送用の映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなる構成である。これらの各種の映像形式からなる映像データのフレーム毎にタイムコード１２が付加される構成となっている。この構成とすることにより、鮮明な映像を放送することが可能となった。   Broadcast video data to be switched or processed in the present invention has a configuration of one video format selected from SD video, HD video, 4K video, and 8K video. A time code 12 is added to each frame of video data having these various video formats. With this configuration, it has become possible to broadcast clear video.

本発明に係る遠隔映像処理システムの概略図Schematic of remote video processing system according to the present invention スイッチャーによる切換乃至加工処理の概念図Conceptual diagram of switching or processing by switcher

１ 遠隔映像処理システム
１０ａ 映像データ
１０ｂ 映像データ
１０ｃ 映像データ
１０ｄ 映像データ
１０ｅ 映像データ
１２ タイムコード
１４ 制御信号
１６ 制御タイムコード
１００ 撮影システム
１１０ 映像撮影装置
１２０ ＴＣインサータ
１２２ ＴＣ生成手段
１３０ 映像バッファ手段
１４０ エンコード手段
１５０ 圧縮映像送信手段
１６０ スイッチャー
２００ 映像操作システム
２１０ 圧縮映像受信手段
２２０ デコード手段
２３０ 映像切換加工手段
２４０ 制御信号生成手段
２５０ 制御タイムコード抽出手段
２６０ 制御情報送信手段DESCRIPTION OF SYMBOLS 1 Remote video processing system 10a Video data 10b Video data 10c Video data 10d Video data 10e Video data 12 Time code 14 Control signal 16 Control time code 100 Shooting system 110 Video shooting device 120 TC inserter 122 TC generation unit 130 Video buffer unit 140 Encoding Means 150 Compressed video transmission means 160 Switcher 200 Video operation system 210 Compressed video reception means 220 Decoding means 230 Video switching processing means 240 Control signal generation means 250 Control time code extraction means 260 Control information transmission means

上記の目的を達成するために本発明に係る遠隔映像処理システムは、撮影現場に設置する撮影システムと、撮影システムが撮影した映像を遠隔処理する映像操作システムと、からなる遠隔映像処理システムであって、前記遠隔映像処理システムは、撮影システムから離れた場所において撮影システム内の映像の切換乃至加工処理を行うことにより放送用の映像データを作成するため、前記撮影システムは、映像を撮影するための映像撮影装置と、前記映像撮影装置から送信される映像データにタイムコードを付加するＴＣインサータと、前記タイムコードが付加された映像データを一時的に記憶するための映像バッファ手段と、前記タイムコードが付加された映像データの圧縮処理を行うエンコード手段と、前記エンコード手段によってエンコードされた映像データを送信する圧縮映像送信手段と、からなるとともに、前記映像操作システムは、前記圧縮映像送信手段より送信された映像データを受信する圧縮映像受信手段と、前記エンコードされた映像データのデコード処理を行うデコード手段と、前記映像データを所望する映像データに切換乃至加工する処理を行うための映像切換加工手段と、前記映像切換加工手段による切換乃至加工処理を制御信号に変換する制御信号生成手段と、前記映像切換加工手段による映像の切換乃至加工処理時のタイムコードを制御タイムコードとして該映像データから抽出する制御タイムコード抽出手段と、前記制御信号と前記制御タイムコードを送信する制御情報送信手段と、からなり、前記撮影システムは、更に、前記映像バッファ手段に記憶された映像データに切換乃至加工処理を施して出力するスイッチャーを装備しており、前記制御信号および前記制御タイムコードを前記スイッチャーが受信するとともに、前記スイッチャーは、前記制御信号に含まれる制御タイムコードと、前記映像バッファ手段に記憶された映像データ中のタイムコードを比較して、同一のタイムコードを有する映像データのフレームを抽出するとともに、該フレーム位置から、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、切換乃至加工処理後の映像データを出力する構成である。 In order to achieve the above object, a remote video processing system according to the present invention is a remote video processing system comprising a shooting system installed at a shooting site, and a video operation system for remotely processing a video shot by the shooting system. The remote video processing system creates video data for broadcasting by switching or processing the video in the shooting system at a location away from the shooting system, and the shooting system for shooting the video. A video camera, a TC inserter for adding a time code to the video data transmitted from the video camera, a video buffer means for temporarily storing the video data to which the time code is added, and the time An encoding means for compressing the video data to which the code is added, and the encoding means Compressed video transmission means for transmitting the encoded video data, and the video operation system includes a compressed video reception means for receiving the video data transmitted from the compressed video transmission means, and the encoded video. Decoding means for performing data decoding processing, video switching processing means for performing processing for switching or processing the video data into desired video data, and switching or processing performed by the video switching processing means are converted into control signals. Control signal generating means, control time code extracting means for extracting from the video data the time code at the time of video switching or processing by the video switching processing means as control time code, and transmitting the control signal and the control time code Control information transmitting means, and the photographing system further includes the video buffer means. Equipped with憶video data to the switching換乃optimum processing alms to output switcher, together with the control signal and the control time code receiving the switcher, the switcher control time included in the control signal The code and the time code in the video data stored in the video buffer means are compared to extract a frame of video data having the same time code, and from the frame position , the video is based on the control signal. The video data stored in the buffer means is subjected to switching or processing, and the video data after switching or processing is output.

本発明は、上記詳述した通りの構成であるので、以下のような効果がある。
１．映像データにタイムコードを付与する構成としたため、同期処理が容易となり、処理する映像の再生開始位置を精確に指定することが可能となる。また、エンコードされて送信された加工処理用の映像データをもとに映像の切換乃至加工処理を行う構成としたため、遠隔地（センター）で少数の事情通のオペレータが視聴することが可能となり、切換乃至加工の作業を遠隔で行うことが可能となる。また、遠隔地における映像切換加工手段による上記作業内容を制御信号に変換する制御信号生成手段を設けたため、制御信号を現場にあるスイッチャーに送って遠隔操作することにより、現場のバッファに蓄積された放送用の大容量映像データを遠隔で切換乃至加工処理を自動的に行うことが可能となり、現場にオペレータがいなくても、映像の切換乃至加工処理を行う事が可能となる。
また、スイッチャーが、制御信号に基づいて、映像データのタイムコードをもとに映像バッファ手段に記憶された映像データを切換乃至加工処理するため、オペレータが遠隔地（センター）で行った切換乃至加工処理と同じ処理を、映像バッファ手段に記憶された映像データに対して正確に施すことが可能となる。 Since the present invention is configured as described in detail above, the following effects are obtained.
1. Since the time code is added to the video data, the synchronization process is facilitated, and the playback start position of the video to be processed can be designated accurately. In addition, since the video is switched or processed based on the video data for processing that is encoded and transmitted, it becomes possible for a small number of operators to view and listen at a remote location (center). Switching or machining can be performed remotely. In addition, since the control signal generating means for converting the above-mentioned work contents by the video switching processing means in the remote place to the control signal is provided, the control signal is sent to the switcher at the work site and remotely operated, so that it is stored in the buffer at the work site. It is possible to automatically switch or process large-capacity video data for broadcasting remotely, and it is possible to perform switching or processing of images without an operator at the site.
Further, since the switcher switches or processes the video data stored in the video buffer means based on the time code of the video data based on the control signal, the switching or processing performed by the operator at the remote place (center). The same processing as the processing can be accurately performed on the video data stored in the video buffer means.

２．映像撮影装置と、エンコード手段と、デコード手段を一または複数設置（装備）する構成としたため、各映像装置で撮影された映像データを、個別のエンコード手段でエンコードするとともに、対応するデコード手段でデコード可能となり、処理用の映像データの伝送の遅延を防止するとともに、エンコード手段とデコード手段の故障時であっても、映像の切換乃至加工処理を継続することが可能となる。
３．タイムコードを生成するためのＴＣ生成手段を設けたため、映像の同期処理を正確に行う事が可能となる。 2 . Since one or more video shooting devices, encoding means, and decoding means are installed (equipped), video data shot by each video device is encoded by individual encoding means and decoded by corresponding decoding means. This makes it possible to prevent delays in the transmission of processing video data and to continue video switching or processing even when the encoding means and decoding means fail.
3. Since the TC generation means for generating the time code is provided, it is possible to accurately perform the video synchronization process.

４．制御信号を操作コマンドとしたため、スイッチャーによる映像データへの切換乃至加工処理を簡易なものとすることが可能となる。
５．映像データを、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像等としたため、映像データのフレーム毎にタイムコードを付加することが可能となるとともに、鮮明な映像を放送することが可能となる。
 4 . Since the control signal is an operation command, switching to video data or processing by the switcher can be simplified.
5 . Since the video data is SD video, HD video, 4K video, 8K video, and the like, a time code can be added to each frame of the video data and a clear video can be broadcast.

Claims (6)

撮影現場に設置する撮影システム(100)と、撮影システムが撮影した映像を遠隔処理する映像操作システム(200)と、からなる遠隔映像処理システム(1)において、
前記撮影システム(100)は、映像を撮影するための映像撮影装置(110)と、前記映像撮影装置(110)から送信される映像データ(10a)にタイムコード(12)を付加するＴＣインサータ(120)と、前記タイムコード(12)が付加された映像データ(10b)を一時的に記憶するための映像バッファ手段(130)と、前記タイムコード(12)が付加された映像データ(10b)の圧縮処理を行うエンコード手段(140)と、前記エンコード手段(140)によってエンコードされた映像データ(10c)を送信する圧縮映像送信手段(150)と、からなるとともに、
前記映像操作システム(200)は、前記圧縮映像送信手段(150)より送信された映像データ(10c)を受信する圧縮映像受信手段(210)と、前記エンコードされた映像データのデコード処理を行うデコード手段(220)と、前記映像データを所望する映像データ(10d)に切換乃至加工する処理を行うための映像切換加工手段(230)と、前記映像切換加工手段(230)による切換乃至加工処理を制御信号(14)に変換する制御信号生成手段(240)と、前記映像切換加工手段(230)による映像の切換乃至加工処理時のタイムコードを制御タイムコード(16)として該映像データ(10d)から抽出する制御タイムコード抽出手段(250)と、前記制御信号(14)と前記制御タイムコード(16)を送信する制御情報送信手段(260)と、からなり、
前記撮影システム(100)は、更に、前記映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施して出力するスイッチャー(160)を装備しており、前記制御信号(14)および前記制御タイムコード(16)を前記スイッチャー(160)が受信するとともに、前記スイッチャー(160)は、前記制御信号(14)に基づいて、映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施し、切換乃至加工処理後の映像データ(10e)を出力することを特徴とする遠隔映像処理システム。In a remote video processing system (1) consisting of a shooting system (100) installed at the shooting site and a video operation system (200) for remotely processing video shot by the shooting system,
The photographing system (100) includes a video photographing device (110) for photographing a video, and a TC inserter (12) for adding a time code (12) to the video data (10a) transmitted from the video photographing device (110). 120), video buffer means (130) for temporarily storing video data (10b) to which the time code (12) is added, and video data (10b) to which the time code (12) is added Encoding means (140) for performing the compression processing of the above, and compressed video transmission means (150) for transmitting the video data (10c) encoded by the encoding means (140),
The video operation system (200) includes a compressed video receiving unit (210) that receives the video data (10c) transmitted from the compressed video transmitting unit (150), and a decoding unit that performs a decoding process on the encoded video data. Means (220), video switching processing means (230) for performing processing for switching or processing the video data into desired video data (10d), and switching or processing by the video switching processing means (230). Control signal generating means (240) for converting to control signal (14), and the video data (10d) as a control time code (16) as a time code at the time of video switching or processing by the video switching processing means (230) Control time code extracting means (250) for extracting from, and control information transmitting means (260) for transmitting the control signal (14) and the control time code (16),
The photographing system (100) is further equipped with a switcher (160) that performs switching or processing on the video data (10b) stored in the video buffer means (130) and outputs it, and the control signal ( 14) and the control time code (16) are received by the switcher (160), and the switcher (160) receives the video data stored in the video buffer means (130) based on the control signal (14). A remote video processing system characterized by performing switching or processing on (10b) and outputting video data (10e) after switching or processing. 前記スイッチャー(160)は、前記制御信号(14)に含まれる制御タイムコード(16)と、前記映像バッファ手段(130)に記憶された映像データ(10b)中のタイムコード(12)を比較して、同一のタイムコードを有する映像データ(10b)のフレームを抽出するとともに、該フレーム位置から、前記制御信号(14)に基づいて、映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施すことを特徴とする請求項１記載の遠隔映像処理システム。   The switcher (160) compares the control time code (16) included in the control signal (14) with the time code (12) in the video data (10b) stored in the video buffer means (130). The video data (10b) having the same time code is extracted and the video data (10b) stored in the video buffer means (130) is extracted from the frame position based on the control signal (14). 2. The remote video processing system according to claim 1, wherein switching or processing is performed on the remote video processing system. 前記映像撮影装置(110)と、前記エンコード手段(140)と、前記デコード手段(220)は一または複数設置（装備）されるとともに、一または複数からなる前記映像撮影装置(110)によって撮影された一または複数からなる映像データ(10a)は、それぞれＴＣインサータ(120)によって同一のタイムコード(12)が付加され、前記映像バッファ手段(130)に記憶されるとともに一または複数からなる前記エンコード手段(140)によって各々エンコード処理され、
エンコード処理された各映像データ(10c)は、対応する前記デコード手段(220)によって各々デコード処理されることを特徴とする請求項１記載の遠隔映像処理システム。The video photographing device (110), the encoding means (140), and the decoding means (220) are provided (equipped) with one or a plurality, and are photographed by the video photographing device (110) including one or a plurality. The video data (10a) consisting of one or a plurality is added with the same time code (12) by the TC inserter (120) and stored in the video buffer means (130) and the encoding consisting of one or more. Each encoded by means (140),
The remote video processing system according to claim 1, wherein each encoded video data (10c) is decoded by the corresponding decoding means (220). 前記撮影システム(100)は、ＴＣインサータ(120)が各映像データ(10a)に付加するタイムコード(12)を生成するＴＣ生成手段(122)を装備することを特徴とする請求項１記載の遠隔映像処理システム。   The photographic system (100) is equipped with TC generation means (122) for generating a time code (12) to be added to each video data (10a) by the TC inserter (120). Remote video processing system. 前記制御信号(14)は、映像切換加工手段(230)による映像の加工処理と同様の加工処理を前記映像バッファ手段(130)に記憶された映像データ(10b)に施すための映像データの操作コマンドからなり、該操作コマンドからなる制御信号(14)を前記スイッチャー(160)が受信して前記映像バッファ手段(130)に記憶された一または複数からなる映像データ(10b)に切換乃至加工処理を施すことを特徴とする請求項１記載の遠隔映像処理システム。   The control signal (14) is an operation of video data for performing the same processing as the video processing by the video switching processing means (230) on the video data (10b) stored in the video buffer means (130). The control signal (14) consisting of commands and the control command (14) is received by the switcher (160) and switched or processed into one or more video data (10b) stored in the video buffer means (130) The remote video processing system according to claim 1, wherein: 前記映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなり、該映像形式からなる前記映像データのフレーム毎にタイムコード(12)が付加されることを特徴とする請求項１記載の遠隔映像処理システム。   The video data has one video format selected from SD video, HD video, 4K video, and 8K video, and a time code (12) is added to each frame of the video data having the video format. The remote video processing system according to claim 1, wherein:
JP2017521609A 2016-11-16 2016-11-16 Remote video processing system Pending JPWO2018092173A1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/004905 WO2018092173A1 (en) 2016-11-16 2016-11-16 Remote video processing system

Publications (1)

Publication Number Publication Date
JPWO2018092173A1 true JPWO2018092173A1 (en) 2018-11-29

Family

ID=62146315

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017521609A Pending JPWO2018092173A1 (en) 2016-11-16 2016-11-16 Remote video processing system

Country Status (2)

Country Link
JP (1) JPWO2018092173A1 (en)
WO (1) WO2018092173A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110798688A (en) * 2019-11-20 2020-02-14 珠海市长盛电线电缆有限公司 High-definition video compression coding system based on real-time transmission

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004349749A (en) * 2003-05-20 2004-12-09 Nippon Hoso Kyokai <Nhk> Camera video image monitoring apparatus and camera video image monitoring method
JP2007060031A (en) * 2005-08-22 2007-03-08 Hitachi Kokusai Electric Inc Display apparatus in broadcast system
US20110280540A1 (en) * 2010-05-12 2011-11-17 Woodman Nicholas D Broadcast management system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004349749A (en) * 2003-05-20 2004-12-09 Nippon Hoso Kyokai <Nhk> Camera video image monitoring apparatus and camera video image monitoring method
JP2007060031A (en) * 2005-08-22 2007-03-08 Hitachi Kokusai Electric Inc Display apparatus in broadcast system
US20110280540A1 (en) * 2010-05-12 2011-11-17 Woodman Nicholas D Broadcast management system

Also Published As

Publication number Publication date
WO2018092173A1 (en) 2018-05-24

Similar Documents

Publication Publication Date Title
US20100157020A1 (en) Multiple camera controlling and image storing apparatus for synchronized multiple image acquisition and method thereof
WO2012043358A1 (en) Content supplying device, content supplying method, content reproduction device, content reproduction method, program, and content viewing system
JP4695669B2 (en) Video distribution system
WO2007061068A1 (en) Receiver and line video distributing device
KR101682982B1 (en) An IP Transmitting System For CCTV Video Signal
KR20090028017A (en) Server, system and method for providing multi angle mobile broadcasting service
US8169482B2 (en) Monitor video accumulation system
US10382800B2 (en) Video surveillance system and video surveillance method
JP2003158731A (en) Image delivery system, camera terminal, and receiving terminal
WO2018092173A1 (en) Remote video processing system
KR20120019754A (en) Receiving system for digital braoadcasting using ultrea high definition module
KR101681844B1 (en) Method for conversion to high definition cctv system for metropolitan railway
US11227443B2 (en) Method, device, and computer program for using two network parts to deliver virtual reality content
US11699462B2 (en) Method, apparatus and computer program
KR20190032670A (en) video service providing system using multi-view camera
CN112738609A (en) Multi-channel video stream transmission method and device and multi-channel video stream playing system
Kawamoto et al. Remote Production Experiments with Lightweight Compressed 8K UHDTV over IP Device
JP2013085128A (en) Video multiplex apparatus, video separation apparatus, video signal transmission system and program
KR20150079524A (en) An Transmitting Device For CCTV Video Signal
JP2007312223A (en) Synchronization automatic adjustment device
KR20150035845A (en) An IP Transmitting Device For CCTV Video Signal
KR101676400B1 (en) Camera apparatus and method for providing recorded image
US20220264157A1 (en) A method of providing video content to a production studio by selecting an input video stream from a plurality of wireless video cameras, as well as a corresponding stream controller
JP2002271759A (en) Digital broadcasting signal transmitter and digital broadcasting program relay transmission system
JP2023527550A (en) System for remote production of audiovisual content

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170419

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180612

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181211