JP2009290790A - Apparatus and method for video image transmission - Google Patents

Apparatus and method for video image transmission Download PDF

Info

Publication number
JP2009290790A
JP2009290790A JP2008143732A JP2008143732A JP2009290790A JP 2009290790 A JP2009290790 A JP 2009290790A JP 2008143732 A JP2008143732 A JP 2008143732A JP 2008143732 A JP2008143732 A JP 2008143732A JP 2009290790 A JP2009290790 A JP 2009290790A
Authority
JP
Japan
Prior art keywords
video data
video
transmission
unit
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008143732A
Other languages
Japanese (ja)
Inventor
Daisuke Hayashi
大介 林
Hiromasa Hoshino
弘雅 星野
Tadataka Ueda
恭敬 上田
Seiji Hotta
誠司 堀田
Masanori Miko
正則 三皷
Toshinari Suma
俊成 須間
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2008143732A priority Critical patent/JP2009290790A/en
Publication of JP2009290790A publication Critical patent/JP2009290790A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To solve the following problem encountered, when a mechanism for transmission with a bit rate varied according to the state of communication is used to transmit AV data, obtained by picking up an image with a camera for broadcasting service through a network: the image quality becomes degraded, depending on the state of communication and this can degrade the value of data for broadcasting service. <P>SOLUTION: A video image transmission apparatus transmits images to a server through a transmission path. The apparatus includes: a state-of-communication detection unit that detects the state of communication in the transmission path; a transmission unit that converts the bit rate of an image according to the state of communication and transmits the image; a play list generation unit that generates a play list holding information indicating a section in which the bit rate of the image after conversion becomes equal to or lower than a threshold value; a recording medium for recording audio and video data; and a recording unit for recording the play list and the audio and video data. After the completion of recording to the recording unit, the audio and video data and the play list corresponding to the above section in the recording unit are retransmitted. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、放送業務用ビデオカメラ等のような高品質の映像・音声データを記録する装置に関し、特に、報道番組などの速報性を要する放送用映像データを記録しながら、同じ内容の映像・音声データをネットワーク経由で遠隔地にある編集装置にリアルタイム送信する放送業務用ビデオカメラ等の記録装置に関する。   The present invention relates to an apparatus for recording high-quality video / audio data, such as a video camera for broadcasting business, and more particularly to recording video / audio data having the same contents while recording broadcast video data such as news programs that require rapid reporting. The present invention relates to a recording apparatus such as a video camera for broadcasting business that transmits audio data in real time to a remote editing apparatus via a network.

近年、携帯電話やWiMAXといった無線ネットワーク技術が急速に普及している。このような無線ネットワークを使用して、ビデオカメラで撮影した映像・音声データを遠隔地にリアルタイムで伝送するようなシステムが考案されている。   In recent years, wireless network technologies such as mobile phones and WiMAX are rapidly spreading. A system has been devised that uses such a wireless network to transmit video / audio data captured by a video camera to a remote location in real time.

そんな中、ネットワークの伝送状態の悪化等の要因で低ビットレートでの伝送を余儀なくされた場合、MPEG方式の動画像の特定のピクチャを間引いて低ビットレートで伝送し、のちにネットワークの伝送状態が回復した時に、その低ビットレート伝送要因により送信できなかった間引いたピクチャの映像・音声データを送信するというような技術が公開されている(例えば、特許文献1)。
特開2007−274443号公報
Meanwhile, when transmission at a low bit rate is forced due to factors such as deterioration in the transmission status of the network, a specific picture of the MPEG moving picture is thinned out and transmitted at a low bit rate, and then the transmission status of the network A technique is disclosed in which video / audio data of a thinned picture that could not be transmitted due to the low bit rate transmission factor is transmitted (for example, Patent Document 1).
JP 2007-274443 A

しかしながら、特許文献1に記載の技術では、間引いたピクチャの送信後に受信側で既送信済データとの結合処理を行う必要があった。また、伝送状態の急激な悪化により、一時的に完全にデータ伝送ができないような状況に陥った場合、その区間を復旧するための再送信を行う手段も、すでに受信したピクチャとのちに受信した間引きピクチャとを受信側で結合する手段も記載されていない。   However, in the technique described in Patent Document 1, it is necessary to perform a combining process with already transmitted data on the receiving side after transmitting the thinned picture. In addition, when a situation in which data transmission is temporarily impossible due to a sudden deterioration of the transmission state, means for performing re-transmission to recover the section was also received after the already received picture. No means for combining the thinned picture at the receiving side is described.

従って、本発明は、上記課題に鑑み、伝送状態の急激な悪化によりデータの送信が途切れた場合であっても、受信側で途切れなく映像データを再生できるとともに、伝送状態が一定の基準より悪いときでも基準を満たす画質で映像データを再生することができる映像送信装置および映像送信方法を提供することを目的とする。   Therefore, in view of the above problems, the present invention can reproduce video data without interruption on the receiving side even when transmission of data is interrupted due to a sudden deterioration of the transmission state, and the transmission state is worse than a certain standard. An object of the present invention is to provide a video transmission apparatus and a video transmission method capable of reproducing video data with image quality that satisfies the standards even at times.

本発明の映像送信装置は、上記目的を達成するために、取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置であって、映像データを取得する映像データ取得部と、取得した前記映像データを、第1映像データと、前記第1映像データよりも画質の高い第2映像データとに変換する映像データ変換部と、前記第1映像データを、伝送路を介して前記受信装置へ送信する第1映像データ送信部と、前記第1映像データの前記送信と並行して、前記第2映像データを記録媒体に記録する映像データ記録部と、前記第1映像データ中の1つの部分区間を特定する特定部と、前記第2映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、1つのファイルとして前記受信装置に送信する第2映像データ送信部と、前記第1映像データを再生する場合、前記第1映像データの中で特定された前記部分区間では前記第2映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部とを備える。   In order to achieve the above object, a video transmission device of the present invention is a video transmission device that records acquired video on a recording medium and transmits the video to a receiving device via a transmission path, and acquires video data. A data acquisition unit, a video data conversion unit for converting the acquired video data into first video data and second video data having higher image quality than the first video data, and transmitting the first video data A first video data transmitting unit for transmitting to the receiving device via a path; a video data recording unit for recording the second video data on a recording medium in parallel with the transmission of the first video data; A specifying unit for specifying one partial section in one video data, and video data of a partial section corresponding to the partial section specified by the specifying unit in the second video data as one file When reproducing the first video data and the second video data transmission unit to be transmitted to the receiving device, the file of the second video data should be reproduced in the partial section specified in the first video data A playback order information generating unit that generates playback order information indicating the above, and a playback order information transmitting unit that transmits the generated playback order information to the receiving device.

また、本発明の映像送信装置は、前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部を備え、前記特定部は、前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定するとしてもよい。   In addition, the video transmission apparatus of the present invention detects a transmission bit rate indicating the communication status of the transmission path, and dynamically determines a threshold for specifying the partial section from the detected transmission bit rate. A detection unit, wherein the specifying unit specifies a time point when a transmission bit rate of the transmission path falls below the threshold value determined by the communication status detection unit as a start point of the partial section, and the transmission bit rate is the threshold value You may specify the time of becoming above as the end point of the said partial area.

なお、本発明は、装置として実現できるだけでなく、その装置を構成する処理手段をステップとする方法として実現したり、それらステップをコンピュータに実行させるプログラムとして実現したり、そのプログラムを記録したコンピュータ読み取り可能なCD−ROMなどの記録媒体として実現したり、そのプログラムを示す情報、データ又は信号として実現したりすることもできる。そして、それらプログラム、情報、データ及び信号は、インターネット等の通信ネットワークを介して配信してもよい。   Note that the present invention can be realized not only as an apparatus but also as a method using steps as processing units constituting the apparatus, as a program for causing a computer to execute the steps, or as a computer read recording the program. It can also be realized as a possible recording medium such as a CD-ROM, or as information, data or a signal indicating the program. These programs, information, data, and signals may be distributed via a communication network such as the Internet.

本発明の映像送信装置によれば、記録メディアへの記録と並行して、リアルタイムで映像・音声データを伝送する無線ネットワークの伝送ビットレートが、伝送される映像・音声データに要求される画質を最低限保証できる値を下回る区間では、高画質の状態で記録メディアに記録してある当該区間の映像・音声データを区間ごとにファイルの形式で再送信する。併せて、当該区間では、サーバがリアルタイムで受信した映像・音声データから、当該区間に対応する再送信ファイルに切り替えて再生するようプレイリストを送信する。したがって、映像送信装置によって撮像された映像・音声データを受信するサーバ側では、無線ネットワークの通信状態が悪い区間において、リアルタイムで受信した映像・音声データの間に再送信により受信した映像・音声データを組み込む作業を必要とせず、単純にプレイリストに従って再生するファイルを切り替えればよいので、サーバの負荷も少なくて済み、その分、タイムロスすることなく高画質の映像・音声データを再生することができるという効果がある。   According to the video transmission apparatus of the present invention, the transmission bit rate of the wireless network that transmits the video / audio data in real time in parallel with the recording on the recording medium can reduce the image quality required for the transmitted video / audio data. In the section below the minimum guaranteeable value, the video / audio data of the section recorded on the recording medium with high image quality is retransmitted in the file format for each section. At the same time, in the section, the playlist is transmitted so that the video / audio data received in real time by the server is switched to the retransmission file corresponding to the section and played back. Therefore, on the server side that receives the video / audio data captured by the video transmission device, the video / audio data received by re-transmission between the video / audio data received in real time in the section where the communication state of the wireless network is bad Since the file to be played is simply switched according to the playlist, the load on the server can be reduced, and high-quality video / audio data can be played without time loss. There is an effect.

特に、報道番組などの速報性を要する放送用映像データを記録メディアに記録しながら、同じ内容の映像・音声データをネットワーク経由で遠隔地にある編集装置にリアルタイム送信する放送業務用ビデオカメラ等のような高品質の映像・音声データを記録する映像送信装置では、高い効果を奏することができ、非常に有用である。   In particular, such as broadcast video cameras that record real-time video and audio data to a remote editing device via a network while recording broadcast video data such as news programs on a recording medium that requires rapid reporting. Such a video transmission apparatus that records high-quality video / audio data can be highly effective and is very useful.

さらに、ネットワークの伝送状態の悪化等の要因で高品質の映像・音声データの伝送が完全に途切れた場合にも、所定の映像・音声データを再送信することで、受信側では受信した映像データの結合等の特別な処理を行うことなくあらかじめ定められた基準値以上の画質で映像・音声データを容易に閲覧することが可能となる。   Furthermore, even if transmission of high-quality video / audio data is completely interrupted due to factors such as deterioration of the network transmission status, the video data received on the receiving side can be retransmitted by retransmitting the predetermined video / audio data. Thus, it is possible to easily browse the video / audio data with an image quality higher than a predetermined reference value without performing special processing such as combining these.

以下、図面を用いて本発明の実施の形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(実施の形態1)
図1は、本発明の映像送信装置を含む映像送信システムの構成およびデータの流れを示すブロック図である。同図に示すように、映像送信システムは、ネットワークを介して互いに接続されるカメラ101とサーバ102とを備える。カメラ101は、撮影することにより得られた映像データを内蔵の記録媒体に高画質で記録しながら、並行してサーバ102にリアルタイム送信するカメラ101であって、送信機103、撮像部111、第1記録部112、第1記録メディア113、リスト作成部116およびリスト解釈部301を備える。送信機103は、通信状況検出部115および送信部114を備える。第1記録部112は記録符号化部117を備え、送信部114は送信符号化部118を備える。
(Embodiment 1)
FIG. 1 is a block diagram showing the configuration and data flow of a video transmission system including a video transmission apparatus according to the present invention. As shown in the figure, the video transmission system includes a camera 101 and a server 102 connected to each other via a network. The camera 101 is a camera 101 that records video data obtained by shooting in a high-quality image on a built-in recording medium and simultaneously transmits the video data to the server 102 in parallel. 1 recording unit 112, first recording medium 113, list creation unit 116, and list interpretation unit 301. The transmitter 103 includes a communication status detection unit 115 and a transmission unit 114. The first recording unit 112 includes a recording encoding unit 117, and the transmission unit 114 includes a transmission encoding unit 118.

カメラ101は、撮像部111を用いて被写体を撮影し、撮影によってえられた高画質な映像・音声データを、第1記録部112により、第1記録メディア113に記録する。なお、記録符号化部117は、撮像部111によって得られた映像・音声データを圧縮符号化およびファイル化して記録する機能を有する。ここで、撮像部111は、「映像データを取得する映像データ取得部」の一例である。第1記録部112は、「前記第1映像データの前記送信と並行して、前記第2映像データを記録媒体に記録する映像データ記録部」の一例である。   The camera 101 shoots a subject using the imaging unit 111, and records high-quality video / audio data obtained by the shooting on the first recording medium 113 by the first recording unit 112. Note that the recording encoding unit 117 has a function of recording video / audio data obtained by the imaging unit 111 by compressing and encoding the data. Here, the imaging unit 111 is an example of a “video data acquisition unit that acquires video data”. The first recording unit 112 is an example of a “video data recording unit that records the second video data on a recording medium in parallel with the transmission of the first video data”.

一方、これと並行して、カメラ101は、撮像部111によって撮影された映像・音声データを送信部114に転送し、送信部114を用いて無線ネットワークに送信する。送信部114は、圧縮符号化を行って無線ネットワークに送信する送信符号化部118を有する。記録符号化部117及び送信符号化部118は、「取得した前記映像データを、第1映像データと、前記第1映像データよりも画質の高い第2映像データとに変換する映像データ変換部」の一例であり、送信部114は、「前記第1映像データを、伝送路を介して前記受信装置へ送信する第1映像データ送信部」、「前記第2映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、1つのファイルとして前記受信装置に送信する第2映像データ送信部」および「生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部」の一例である。また、通信状況検出部115およびリスト作成部116は、「前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部」及び「前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定する前記特定部」の一例である。送信部114ではリアルタイムでの伝送が求められるため、送信符号化部118は、リアルタイムにビットレートを変更して圧縮符号化を行う機能を有する。   On the other hand, in parallel with this, the camera 101 transfers the video / audio data captured by the imaging unit 111 to the transmission unit 114 and transmits it to the wireless network using the transmission unit 114. The transmission unit 114 includes a transmission encoding unit 118 that performs compression encoding and transmits the result to the wireless network. The recording encoding unit 117 and the transmission encoding unit 118 are “a video data converting unit that converts the acquired video data into first video data and second video data having higher image quality than the first video data”. The transmission unit 114 is “a first video data transmission unit that transmits the first video data to the reception device via a transmission path”, “by the identification unit in the second video data. "Second video data transmission unit for transmitting video data of partial section corresponding to specified partial section as one file to reception apparatus" and "reproduction order for transmitting generated reproduction order information to reception apparatus" It is an example of an “information transmission unit”. Further, the communication status detecting unit 115 and the list creating unit 116 detect “a transmission bit rate indicating the communication status of the transmission path, and dynamically set a threshold for specifying the partial section from the detected transmission bit rate. A communication state detection unit to be determined ”and“ a time point when the transmission bit rate of the transmission path falls below the threshold value determined by the communication state detection unit is specified as a start point of the partial section, and the transmission bit rate is the threshold value It is an example of “the specifying unit that specifies the time point as described above as the end point of the partial section”. Since the transmission unit 114 is required to transmit in real time, the transmission encoding unit 118 has a function of performing compression encoding by changing the bit rate in real time.

通信状況検出部115は、無線ネットワークの通信状況(伝送ビットレート)を検出し、検出した通信状況を例えば、ビットレートで表して送信部114およびリスト作成部116に通知する。   The communication status detection unit 115 detects the communication status (transmission bit rate) of the wireless network, and notifies the detected communication status to, for example, a bit rate to the transmission unit 114 and the list creation unit 116.

送信部114内の送信符号化部118は、圧縮符号化を行う際、撮像部111から送られてきた映像・音声データを、通信状況検出部115から通知される通信状況に応じて、最適なビットレートで圧縮符号化を行い、無線ネットワークに送信する。   The transmission encoding unit 118 in the transmission unit 114 performs the optimal encoding on the video / audio data transmitted from the imaging unit 111 according to the communication status notified from the communication status detection unit 115. It performs compression coding at the bit rate and transmits it to the wireless network.

リスト作成部116は、通信状況検出部115から通知される通信状況を参照し、所定の手順でプレイリストを生成する。リスト作成部116の詳細制御については後述する。リスト作成部116は、「前記第1映像データ中の1つの部分区間を特定する特定部」と「前記第1映像データを再生する場合、前記第1映像データの中で特定された前記部分区間では前記第2映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部」との一例である。   The list creation unit 116 refers to the communication status notified from the communication status detection unit 115 and generates a playlist in a predetermined procedure. Detailed control of the list creation unit 116 will be described later. The list creating unit 116 includes “a specifying unit that specifies one partial section in the first video data” and “the partial section specified in the first video data when reproducing the first video data”. Then, it is an example of “a reproduction order information generating unit that generates reproduction order information indicating that the file of the second video data is to be reproduced”.

サーバ102は、放送局においてカメラ101の記録メディアに収録された報道番組などの映像・音声データの編集を行うための装置であって、受信機104、受信部121、第2記録部122、第2記録メディア123、表示部124および再生部311を備える。これによりサーバ102のオペレータは、カメラ101からリアルタイムで送られてくる映像・音声データを見ながら、高画質の放送番組に使用できるシーンをいち早く判断することができ、カメラ101の第1記録メディア113に格納された高画質の映像・音声データを入手した後、手早く編集して放送用の映像・音声データを作成することができる。   The server 102 is a device for editing video / audio data such as a news program recorded on a recording medium of the camera 101 in a broadcasting station, and includes a receiver 104, a receiving unit 121, a second recording unit 122, a second recording unit 122, and the like. 2 a recording medium 123, a display unit 124, and a playback unit 311. As a result, the operator of the server 102 can quickly determine a scene that can be used for a high-quality broadcast program while watching the video / audio data sent from the camera 101 in real time. After the high-quality video / audio data stored in is obtained, it can be quickly edited to create video / audio data for broadcasting.

受信機104は、カメラ101からの符号化映像・音声データを受信する。
受信部121は、受信機104で受信された映像・音声データを復調および復号化する。受信部121は、内部にリアルタイムにビットレートを変更して符号化映像・音声データを復号化する復号化部119を備える。受信部121は、復号化部119によって復号化された映像・音声データを第2記録部122と表示部124とに出力する。第2記録部122は、受信部121からの映像・音声データを第2記録メディア123に記録する。この際に、第2記録部122は、映像・音声データを第2記録メディア123に記録するために、符号化し直すとしても良い。また、第2記録部122による第2記録メディア123への記録と並行して、表示部124は、復号化部119で復調および復号化された映像・音声データをモニタに表示する。
The receiver 104 receives encoded video / audio data from the camera 101.
The receiving unit 121 demodulates and decodes the video / audio data received by the receiver 104. The receiving unit 121 includes a decoding unit 119 that decodes encoded video / audio data by changing the bit rate in real time. The receiving unit 121 outputs the video / audio data decoded by the decoding unit 119 to the second recording unit 122 and the display unit 124. The second recording unit 122 records the video / audio data from the receiving unit 121 on the second recording medium 123. At this time, the second recording unit 122 may re-encode the video / audio data in order to record it on the second recording medium 123. In parallel with the recording on the second recording medium 123 by the second recording unit 122, the display unit 124 displays the video / audio data demodulated and decoded by the decoding unit 119 on the monitor.

無線ネットワークの通信状態が最低限の画質を維持できる状態にあるときの各処理部の動作は上記の通りである。   The operation of each processing unit when the communication state of the wireless network is in a state where the minimum image quality can be maintained is as described above.

次に、リスト作成部116の詳細な制御方法を、図2を用いて説明する。
図2は、通信状況検出部115で検出される通信状況(ビットレート)の変化と、通信状況に応じた映像・音声データの再生方法を示すプレイリストとの一例を示す図である。
Next, a detailed control method of the list creation unit 116 will be described with reference to FIG.
FIG. 2 is a diagram illustrating an example of a change in the communication status (bit rate) detected by the communication status detection unit 115 and a playlist indicating a video / audio data reproduction method according to the communication status.

ここでは時刻t1から第1記録メディア113への映像・音声データの記録が開始され、時刻t6で記録を終了したとする。つまり、時刻t1から時刻t6の区間の映像・音声データを、高画質での再生が可能なビットレートに記録符号化部117にて圧縮符号化し、第1記録メディア113にファイル化して記録する。そして、同時にこの区間の映像・音声データを通信状況に応じたビットレートに送信符号化部118にて圧縮符号化し、無線ネットワークに送信する。   Here, it is assumed that the recording of the video / audio data to the first recording medium 113 is started from the time t1, and the recording is ended at the time t6. That is, the video / audio data in the section from time t1 to time t6 is compression-encoded by the recording / encoding unit 117 at a bit rate at which high-quality playback is possible, and is recorded as a file on the first recording medium 113. At the same time, the video / audio data in this section is compression-coded by the transmission encoding unit 118 at a bit rate corresponding to the communication status, and transmitted to the wireless network.

この時、通信状況検出部115では、無線ネットワークの通信状況(伝送ビットレート)を取得し、取得した通信状況をリスト作成部116に通知する。リスト作成部116では、通信状況検出部115により通知される通信状況(伝送ビットレート)をモニタリングし、無線ネットワークの伝送ビットレートとあらかじめ指定されている閾値211とを比較することにより、第1プレイリスト251を作成する。   At this time, the communication status detection unit 115 acquires the communication status (transmission bit rate) of the wireless network, and notifies the list creation unit 116 of the acquired communication status. The list creation unit 116 monitors the communication status (transmission bit rate) notified by the communication status detection unit 115 and compares the transmission bit rate of the wireless network with a threshold value 211 specified in advance, so that the first play is performed. A list 251 is created.

ここでの閾値211は、映像・音声データの圧縮符号化データを、無線ネットワークを経由してサーバ102に伝送する上で、最低限のデータ品質(映像・音声品質)を確保したい時のビットレートの下限値を設定することを想定している。   The threshold value 211 here is the bit rate when it is desired to ensure the minimum data quality (video / audio quality) when transmitting the compression-coded data of the video / audio data to the server 102 via the wireless network. It is assumed that a lower limit value is set.

例えば、図2左のグラフのような状況を想定する。時刻t1から時刻t2の区間は、伝送ビットレートが閾値211よりも高く、時刻t2から時刻t3までの区間は、伝送ビットレートが閾値211よりも低い。同様に、時刻t3から時刻t4までの区間および時刻t5から時刻t6の区間は伝送ビットレートが閾値211よりも高く、時刻t4から時刻t5の区間は、伝送ビットレートが閾値211よりも低い。   For example, a situation like the graph on the left of FIG. 2 is assumed. In the section from time t1 to time t2, the transmission bit rate is higher than the threshold 211, and in the section from time t2 to time t3, the transmission bit rate is lower than the threshold 211. Similarly, the section from time t3 to time t4 and the section from time t5 to time t6 have a transmission bit rate higher than the threshold 211, and the section from time t4 to time t5 has a transmission bit rate lower than the threshold 211.

このような状況の時、リスト作成部116では、時刻t1から時刻t6までの各時刻をそれぞれIN/OUT点とした第1プレイリスト251を作成する。   In such a situation, the list creation unit 116 creates the first playlist 251 with each time from time t1 to time t6 as IN / OUT points.

第1プレイリスト251は、送信部114から映像・音声データの圧縮符号化データを無線ネットワークに送信する際、送信符号化部118が閾値211よりも低いビットレートで圧縮符号化を行っていた場合、閾値211よりも低いビットレートで圧縮符号化を行って送信した区間の映像・音声データを特定し、特定した区間の映像・音声データを後で再送信するために使われるものである。   In the first playlist 251, when the transmission encoding unit 118 performs compression encoding at a bit rate lower than the threshold 211 when transmitting the compression encoded data of the video / audio data from the transmission unit 114 to the wireless network. The video / audio data in the section transmitted by performing compression encoding at a bit rate lower than the threshold 211 is specified, and the video / audio data in the specified section is used later to be retransmitted.

よって、第1プレイリスト251には、時刻t1から時刻t6までの各時刻の情報をIN/OUT点として各区間を示す情報を記録しておき、それぞれの区間のデータの再送信情報(再送信が済んだか否かを示す情報)も同時に記録しておく(図2右の第1プレイリスト251参照)。   Therefore, information indicating each section is recorded in the first playlist 251 with each time information from time t1 to time t6 as IN / OUT points, and data retransmission information (retransmission) of each section is recorded. (Information indicating whether or not) is recorded at the same time (see the first play list 251 on the right side of FIG. 2).

一方で、サーバ102では、カメラ101の送信部114によって無線ネットワークに送信された映像・音声データの圧縮データを、受信機104の受信部121で受信する。受信部121で受信した映像・音声データの圧縮データを、復号化部119がリアルタイムで伸張して、表示部124が表示する。   On the other hand, in the server 102, the reception unit 121 of the receiver 104 receives the compressed data of the video / audio data transmitted to the wireless network by the transmission unit 114 of the camera 101. The decoding unit 119 decompresses the compressed video / audio data received by the receiving unit 121 in real time, and the display unit 124 displays the compressed data.

一方、受信部121で受信し復号化部119で復号化した映像・音声データは、第2記録部122が、第2記録メディア123にファイル化して記録する。このときに、第2記録部122は、復号化された映像・音声データを再び圧縮符号化して第2記録メディア123に記録するとしてもよい。   On the other hand, the video / audio data received by the receiving unit 121 and decoded by the decoding unit 119 is recorded as a file on the second recording medium 123 by the second recording unit 122. At this time, the second recording unit 122 may compress-encode the decoded video / audio data again and record it on the second recording medium 123.

時刻t1から時刻t6までの撮像データを記録する一連の処理の後、カメラ101では、第1プレイリスト251を解釈し、低いビットレートで圧縮符号化を行っていた区間のデータを、送信部114から無線ネットワークへ再送信する。   After a series of processes for recording imaging data from time t1 to time t6, the camera 101 interprets the first playlist 251 and transmits data in a section where compression encoding has been performed at a low bit rate. Retransmit to the wireless network.

図3はデータ再送時のデータの流れを示す映像送信システムの構成図であり、この図を用いてデータの再送信を行う制御について説明する。   FIG. 3 is a block diagram of the video transmission system showing the flow of data at the time of data retransmission, and control for performing data retransmission will be described using this diagram.

記録終了時点では、第1記録メディア113には、時刻t1から時刻t6の区間の映像・音声データの圧縮符号化データファイルおよび第1プレイリスト251ファイルが記録されている。ただし、第1記録部112が映像・音声データの圧縮符号化データを第1記録メディア113に記録する際、記録符号化部117は通信状況(伝送ビットレート)には依存せずに映像・音声データを圧縮符号化し、第1記録部112は符号化された映像・音声データを一定のビットレート(ここではデータ品質を保つ上で十分なビットレートを想定)で第1記録メディア113に記録するものとする。   At the end of recording, the first recording medium 113 is recorded with a compression-encoded data file of video / audio data and a first playlist 251 file in a section from time t1 to time t6. However, when the first recording unit 112 records the compressed encoded data of the video / audio data on the first recording medium 113, the recording / encoding unit 117 does not depend on the communication status (transmission bit rate), and the video / audio is recorded. The data is compression-encoded, and the first recording unit 112 records the encoded video / audio data on the first recording medium 113 at a constant bit rate (assuming a sufficient bit rate for maintaining the data quality here). Shall.

リスト解釈部301は、第1記録メディア113に記録されている第1プレイリスト251を解釈して再送信情報を参照し、再送信が必要な区間の映像・音声データの圧縮符号化データをファイル形式で、送信部114を経由して無線ネットワークに送信する。その制御について図4を用いて説明する。   The list interpreter 301 interprets the first playlist 251 recorded on the first recording medium 113, refers to the retransmission information, and stores the compressed encoded data of the video / audio data in the section that needs to be retransmitted. The data is transmitted to the wireless network via the transmission unit 114 in the form. The control will be described with reference to FIG.

図4は、データ再送信時に、通信状況検出部115で検出された通信状況(ビットレート)の変化と、通信状況に応じて映像・音声データの再送信の要否を示すプレイリストの一例を示す図である。   FIG. 4 shows an example of a playlist indicating changes in the communication status (bit rate) detected by the communication status detection unit 115 and whether video / audio data needs to be retransmitted according to the communication status at the time of data retransmission. FIG.

図4の例では、時刻t2から時刻t3までの区間を再送区間としてみなして再送信を行う。   In the example of FIG. 4, retransmission is performed by regarding the section from time t2 to time t3 as a retransmission section.

この時、再送信する時刻t2から時刻t3までの区間の映像・音声データの圧縮符号化データは、リアルタイム伝送する必要がないため、送信部114は通信状況に関わらず、映像・音声データの圧縮符号化データをそのままのビットレート(第1記録メディア113に記録されているデータのビットレート)で送信する。   At this time, since the compressed encoded data of the video / audio data in the section from time t2 to time t3 to be retransmitted does not need to be transmitted in real time, the transmission unit 114 compresses the video / audio data regardless of the communication status. The encoded data is transmitted at the bit rate as it is (the bit rate of the data recorded on the first recording medium 113).

時刻t2から時刻t3までの区間の映像・音声データの圧縮符号化データの再送信が完了した後、リスト解釈部301は、第1プレイリスト251の再送信対象区間の再送信情報を例えば、「済」に更新し、この区間を再送信対象から外す(図4の第1プレイリスト251参照)。   After the retransmission of the compressed encoded data of the video / audio data in the section from time t2 to time t3 is completed, the list interpretation unit 301 sets the retransmission information of the retransmission target section of the first playlist 251 as, for example, “ Update to “completed”, and this section is excluded from retransmission targets (see the first playlist 251 in FIG. 4).

さらに、リスト解釈部301は、更新した第1プレイリスト251を送信部114により、無線ネットワークを経由してサーバ102に送信する。   Furthermore, the list interpretation unit 301 transmits the updated first playlist 251 to the server 102 via the wireless network by the transmission unit 114.

上記と同様の処理により、第1記録メディア113内の時刻t4から時刻t5までの区間の映像・音声データの圧縮符号化データをサーバ102に再送信し、さらに第1プレイリスト251の時刻t4から時刻t5までの区間の再送信情報を、例えば、「未」から「済」に更新してサーバ102に送信する。   Through the same processing as described above, the compressed encoded data of the video / audio data in the section from the time t4 to the time t5 in the first recording medium 113 is retransmitted to the server 102, and further from the time t4 of the first playlist 251. For example, the retransmission information of the section up to time t5 is updated from “not yet” to “completed” and transmitted to the server 102.

次に、上記のようにしてカメラ101が再送信した各データを受信した時のサーバ102の処理を説明する。   Next, the processing of the server 102 when each data retransmitted by the camera 101 as described above is described.

図3に示すように、サーバ102は、受信機104の受信部121で受信した映像・音声データの圧縮符号化データの再送信データを、第2記録部122により、第2記録メディア123にファイル化して記録する。このとき、受信部121は、受信した再送信データを、復号化部119で復号化することなく第2記録部122に受け渡す。また、同様に、受信機104で受信した第1プレイリスト251を、第2記録部122により、第2記録メディア123にファイル化して記録する。なお、1回の記録処理において、再送信区間が2つ以上に分かれた場合、サーバ102は、第1プレイリスト251も2回以上受信することになる。その場合、第2記録部122は、受信した第1プレイリスト251を最新の第1プレイリスト251で上書きして第2記録メディア123に記録する。   As shown in FIG. 3, the server 102 stores the re-transmission data of the compression encoded data of the video / audio data received by the receiving unit 121 of the receiver 104 in the second recording medium 123 by the second recording unit 122. And record. At this time, the receiving unit 121 passes the received retransmission data to the second recording unit 122 without being decoded by the decoding unit 119. Similarly, the first playlist 251 received by the receiver 104 is recorded as a file on the second recording medium 123 by the second recording unit 122. Note that if the retransmission section is divided into two or more in one recording process, the server 102 also receives the first playlist 251 twice or more. In that case, the second recording unit 122 overwrites the received first playlist 251 with the latest first playlist 251 and records it on the second recording medium 123.

図5は、図4に示した例のように、カメラ101が、時刻t2から時刻t3までの区間の映像・音声データの圧縮符号化データ、および時刻t4から時刻t5までの区間の映像・音声データの圧縮符号化データを再送信した場合のサーバ側のデータの記録状況の一例を示す図である。すなわち第2記録メディア123には図5のような状態で各ファイルが記録されることになる。   5, as in the example illustrated in FIG. 4, the camera 101 performs compression encoded data of video / audio data in a section from time t2 to time t3, and video / audio in a section from time t4 to time t5. It is a figure which shows an example of the data recording condition of the server side at the time of retransmitting the compression encoding data of data. That is, each file is recorded on the second recording medium 123 in the state shown in FIG.

すなわち、第2記録メディア123に記録されているファイルは、図5に示す通り、リアルタイム送信時に受信した第1リアルタイム送信ファイル501(図5の上段右図参照)、時刻t2から時刻t3までの区間のデータの再送信時に受信した第1再送信ファイル502(図5の中段右図参照)、時刻t4から時刻t5までの区間のデータの再送信時に受信した第2再送信ファイル503(図5の中段右図参照)、および第1プレイリストファイル504(図5の下段右図参照)となる。   That is, as shown in FIG. 5, the file recorded on the second recording medium 123 is the first real-time transmission file 501 received during real-time transmission (see the upper right diagram in FIG. 5), the section from time t2 to time t3. The first retransmission file 502 received at the time of retransmission of data (see the middle right diagram in FIG. 5), and the second retransmission file 503 received at the time of retransmission of data in the section from time t4 to time t5 (see FIG. 5). And the first playlist file 504 (see the lower right diagram in FIG. 5).

図5下段右に示す第1プレイリストファイル504には、第1リアルタイム送信ファイル501、第1再送信ファイル502、および第2再送信ファイル503の3つの映像・音声データファイルの再生方法が記載されている。   The first playlist file 504 shown in the lower right of FIG. 5 describes three video / audio data file playback methods: a first real-time transmission file 501, a first retransmission file 502, and a second retransmission file 503. ing.

第1プレイリストファイル504には、具体的には図5下段左の第1プレイリスト251のような内容が記載されている。   Specifically, the first playlist file 504 describes contents such as the first playlist 251 on the lower left side of FIG.

再生部311は第1プレイリスト251を参照して、時刻t1から時刻t6までの各時刻において、再送信情報が存在しない区間、すなわち、時刻t1から時刻t2までの区間、時刻t3から時刻t4までの区間、および時刻t5から時刻t6までの区間においては、再送信が行われていないと判断し、この区間は第1リアルタイム送信ファイル501の該当区間である第1再生対象区間511(図中矢印で示す区間)を再生する。   The playback unit 311 refers to the first playlist 251 and, at each time from time t1 to time t6, a section where there is no retransmission information, that is, a section from time t1 to time t2, from time t3 to time t4 And the section from time t5 to time t6, it is determined that retransmission is not performed, and this section is a first playback target section 511 (an arrow in the figure) that is a corresponding section of the first real-time transmission file 501. ).

一方、第1プレイリスト251を参照して、時刻t1から時刻t6までの各時刻において、再送信情報が「済」となっている区間、すなわち、時刻t2から時刻t3までの区間、および時刻t4から時刻t5までの区間においては、再送信データを受信済と判断し、それぞれ第1再送信ファイル502および第2再送信ファイル503の該当区間である第2再生対象区間512を再生する。   On the other hand, referring to the first playlist 251, a section in which retransmission information is “completed” at each time from time t 1 to time t 6, that is, a section from time t 2 to time t 3, and time t 4. In the section from time t5 to time t5, it is determined that the retransmission data has been received, and the second reproduction target section 512, which is the corresponding section of the first retransmission file 502 and the second retransmission file 503, is reproduced.

図6は、図5に示した第1プレイリスト251に従ってカメラ101からの映像・音声データを再生した場合のビットレートを示す図である。このようにして、第1プレイリストファイル504に従って再生処理を行うことにより、再生時には図6のような再生ビットレートでの再生が可能となり、時刻t1から時刻t6の全再生対象区間において、閾値211よりも高いビットレート、すなわち最低限のデータ品質(映像・音声品質)を確保したい時のビットレートの下限値よりも高いビットレートにて再生を行うことが可能となる。   FIG. 6 is a diagram showing a bit rate when video / audio data from the camera 101 is reproduced according to the first playlist 251 shown in FIG. In this way, by performing playback processing according to the first playlist file 504, playback at the playback bit rate as shown in FIG. 6 is possible during playback, and the threshold value 211 is applied to all playback target sections from time t1 to time t6. It is possible to perform reproduction at a higher bit rate, that is, a bit rate higher than the lower limit value of the bit rate when it is desired to ensure the minimum data quality (video / audio quality).

ただし、第1プレイリストファイル504において、仮に再送信情報が「未」となっている区間が存在した場合、その区間のデータは再送信すべきデータであるにも関わらず、受信側ではその再送信データの受信が完了していないことを示す。よって、この場合は、再送信情報が存在しない区間と同様の処理を行う。   However, in the first playlist file 504, if there is a section in which the retransmission information is “not yet”, the data on the section is data to be retransmitted, but the receiver side does not retransmit it. Indicates that reception of transmission data has not been completed. Therefore, in this case, the same processing as that in the section where there is no retransmission information is performed.

例えば、図4右の第1プレイリスト251のような状況を考える。すなわち、再送信の区間が時刻t2から時刻t3までの区間、および時刻t4から時刻t5までの区間の2区間存在するにも関わらず、前者の区間、すなわち時刻t2から時刻t3までの区間のみが再送信「済」であり、この区間のみの再送信を行ったような状況を考える。   For example, consider a situation like the first playlist 251 on the right side of FIG. That is, only the former section, that is, the section from time t2 to time t3, is present even though there are two retransmission sections, the section from time t2 to time t3 and the section from time t4 to time t5. Consider a situation in which retransmission is “completed” and retransmission is performed only in this section.

図4の状況下では、第1プレイリスト251では、時刻t2から時刻t3までの区間の再送信情報は「済」となっているが、時刻t4から時刻t5までの区間の再送信情報は「未」となっている。この場合、図5中段右の第2再送信ファイル503は受信していないことになるので、時刻t4から時刻t5までの区間の再生対象区間は第1リアルタイム送信ファイル501の該当区間となる。   In the situation of FIG. 4, in the first playlist 251, the retransmission information in the section from time t2 to time t3 is “completed”, but the retransmission information in the section from time t4 to time t5 is “ "Not yet". In this case, since the second retransmission file 503 on the right in the middle of FIG. 5 has not been received, the reproduction target section from the time t4 to the time t5 is the corresponding section of the first real-time transmission file 501.

この仕組みを用いることにより、全再送信候補の区間のデータの全てあるいは一部を受信していない状況下であっても、再生(閲覧)を行うことが可能となる。つまり、再送信の状況がどのような場合であっても、再生(閲覧)を行うには、プレイリストファイルに従うだけでよく、受信側(サーバ102側)での制御が単純となる。   By using this mechanism, reproduction (viewing) can be performed even in a situation where all or part of the data of all retransmission candidate sections has not been received. In other words, in order to perform reproduction (browsing) regardless of the retransmission status, it is only necessary to follow the playlist file, and the control on the receiving side (server 102 side) becomes simple.

なお、第1記録部112は映像・音声データを圧縮符号化して記録する機能を有しているが、その圧縮符号化方式はMPEG、DV、DVCPRO、HDV,H.264等、任意の圧縮方式を用いてもよい。   The first recording unit 112 has a function of compressing and recording video / audio data, but the compression encoding method is MPEG, DV, DVCPRO, HDV, H. Any compression method such as H.264 may be used.

また、送信部114の送信符号化部118は映像・音声データを状況に応じてビットレートを変更しながら圧縮符号化を行う機能を有するが、その圧縮符号化方式はMPEG、DV、DVCPRO、HDV,H.264等、任意の圧縮方式を用いてもよい。   The transmission encoding unit 118 of the transmission unit 114 has a function of compressing and encoding video / audio data while changing the bit rate according to the situation. The compression encoding method is MPEG, DV, DVCPRO, HDV. , H .; Any compression method such as H.264 may be used.

また、第1記録メディア113および第2記録メディア123は、HDD、DVD、BD、フラッシュメモリ等、ランダムアクセス可能なメディアであればその種類は問わない。   The first recording medium 113 and the second recording medium 123 may be of any type as long as they are randomly accessible media such as HDD, DVD, BD, flash memory, and the like.

また、閾値211はユーザの判断で任意で設定できる仕組みであってもよく、または機器で固定の値としてもよい。   Further, the threshold 211 may be a mechanism that can be arbitrarily set by the user's judgment, or may be a fixed value by the device.

また、時刻t1から時刻t6までの区間を示す情報は、必ずしも時刻である必要はなく、タイムコード等でもよく、映像フレームのオフセット値、PTS(Presentation Time Stamp)等、映像フレーム位置を判別するための情報であればその種類は問わない。   Further, the information indicating the section from time t1 to time t6 does not necessarily have to be time, and may be a time code or the like, and is used to determine a video frame position such as a video frame offset value, PTS (Presentation Time Stamp), or the like. The type of information is not limited.

また、本実施の形態では、第1プレイリスト251の形式は、図4〜図6に示すような形式にしたが、再生区間を特定でき、再送信の状況を確認できる情報、すなわち、再送信不要、再送信必要だが未再送信、再送信完了済のような情報が特定できれば、その形式は問わない。   Further, in the present embodiment, the format of the first playlist 251 is as shown in FIGS. 4 to 6, but information that can specify the playback section and confirm the status of retransmission, that is, retransmission. If information such as unnecessary, re-transmission required but not re-transmission, re-transmission completed can be identified, the format is not limited.

(実施の形態2)
実施の形態1では、カメラ101からサーバ102にデータを伝送する処理において、リアルタイム送信を行う時の基本的な制御方法、および再送信を行う時の基本的な制御方法について述べた。本実施の形態では、特にリスト作成部116の詳細制御方法について説明する。具体的には、映像・音声データの重要区間をカメラマンがカメラ101に備えられる「重要釦」などを押すことによって特定し、カメラ101は「重要釦」などが押されたことを検出することによって重要区間の指定を取得する。カメラ101は、取得した重要区間の指定に従って、重要区間における最低ビットレートの閾値を高くする。このようなカメラ101の制御方法について説明する。実施の形態1と構成上異なる点は、(1)カメラ101に重要釦、重要解除釦、リモート釦などを備える点、および(2)リスト作成部116が閾値211及び重要閾値711を記憶しており、これらの釦が押されることによって重要区間が特定された時には、リスト作成部116は重要区間での第1プレイリスト251のIN/OUT区間を重要閾値711に基づいて区切る点である。
(Embodiment 2)
In the first embodiment, in the process of transmitting data from the camera 101 to the server 102, the basic control method when performing real-time transmission and the basic control method when performing retransmission are described. In the present embodiment, a detailed control method of list creation unit 116 will be described in particular. Specifically, a cameraman identifies an important section of video / audio data by pressing an “important button” or the like provided on the camera 101, and the camera 101 detects that an “important button” or the like has been pressed. Get the designation of the important section. The camera 101 increases the minimum bit rate threshold in the important section in accordance with the acquired designation of the important section. A method for controlling the camera 101 will be described. The difference from the first embodiment is that (1) the camera 101 includes an important button, an important release button, a remote button, etc., and (2) the list creation unit 116 stores the threshold value 211 and the important threshold value 711. When the important section is specified by pressing these buttons, the list creation unit 116 divides the IN / OUT section of the first playlist 251 in the important section based on the important threshold value 711.

実施の形態1では、リスト作成部116では、閾値211、すなわち最低限のデータ品質(映像・音声品質)を確保したい時のビットレートの下限値として、ユーザによって設定されたユーザ設定値または機器ごとにあらかじめ定められた機器設定値を用いていた。   In the first embodiment, the list creating unit 116 sets the threshold value 211, that is, the user setting value or the device set by the user as the lower limit value of the bit rate when the minimum data quality (video / audio quality) is to be ensured. The device setting value determined in advance was used.

本実施の形態では、無線ネットワークの通信状況(伝送ビットレート)を監視することにより、閾値211を自動的に決定する。   In this embodiment, the threshold value 211 is automatically determined by monitoring the communication status (transmission bit rate) of the wireless network.

例えば、カメラ101による記録処理を開始する前に、図1に示した通信状況検出部115により、無線ネットワークの通信状況を定常的に監視しておく。そして、記録処理を開始する時に、無線ネットワークの通信状況(伝送ビットレート)に応じて閾値211を決定する。   For example, the communication status of the wireless network is regularly monitored by the communication status detection unit 115 shown in FIG. When the recording process is started, the threshold 211 is determined according to the communication status (transmission bit rate) of the wireless network.

カメラ101への電源投入後、記録処理の開始前の一定期間の通信状況(伝送ビットレート)の監視により、例えば定常的なビットレート(平均ビットレート)の80%のビットレートを閾値211とする。つまり、定常的な通信状況でのビットレートが10[Mbps]だった場合、その80%の8[Mbps]を閾値211として設定する。   By monitoring the communication state (transmission bit rate) for a certain period after the power is turned on to the camera 101, for example, a bit rate of 80% of a steady bit rate (average bit rate) is set as the threshold value 211. . That is, when the bit rate in a steady communication state is 10 [Mbps], 8 [Mbps] of 80% is set as the threshold value 211.

または、記録処理の開始前の一定期間の通信状況(伝送ビットレート)の監視により、最低ビットレートの値をそのまま閾値211に設定してもよく、または、安全のため、最低ビットレートの80%のビットレートを閾値211に設定してもよい。   Alternatively, the minimum bit rate value may be set as the threshold value 211 as it is by monitoring the communication status (transmission bit rate) for a certain period before the start of the recording process, or for safety, 80% of the minimum bit rate. May be set to the threshold value 211.

また、リスト作成部116にて、実施の形態1では、閾値211よりも低いビットレートかどうかで第1プレイリスト251のIN/OUT区間を区切ったが、本実施の形態では、閾値211に加えて、撮影している映像・音声データの区間的な重要度の情報を考慮してIN/OUT区間を区切り、再送信情報を設定する。ここで、区間的な重要度の情報とは、例えば、カメラ101に備えられた重要釦が押されていた時間的区間を示す情報をいう。   In addition, in the first embodiment, the list creating unit 116 divides the IN / OUT section of the first playlist 251 depending on whether the bit rate is lower than the threshold 211, but in this embodiment, in addition to the threshold 211, Then, in consideration of information on the importance of the section of the video / audio data being shot, the IN / OUT section is divided and retransmission information is set. Here, the section importance level information refers to information indicating a time section in which an important button provided in the camera 101 is pressed, for example.

図7は、重要釦と重要解除釦を用いて重要区間を設定した場合の閾値211、重要閾値711および第1プレイリスト251の関係を示す図である。以下では、図7を用いて重要度の情報を考慮したリスト作成部116の制御について説明する。   FIG. 7 is a diagram showing the relationship between the threshold value 211, the important threshold value 711, and the first playlist 251 when an important section is set using the important button and the importance release button. Hereinafter, the control of the list creation unit 116 in consideration of importance information will be described with reference to FIG.

ここでは、特に重要なシーンを、撮影中に動的に指定することにより、その重要なシーンの最低ビットレート、すなわち重要閾値711が通常の閾値211に比べて高くなるようにする。つまり、閾値として2種類の値を用いて第1プレイリスト251のIN/OUT区間を決定する。なお、ここでは、重要閾値711の値をリスト作成部116が記憶しているとしたが、あらかじめ定められた一定値であってもよいし、リスト作成部116により動的に決定される閾値211よりも高い値に決定されるよう計算式を定めておくとしても良い。例えば、それぞれの閾値を算出するための計数を記憶しておくことなどである。すなわち、閾値211を平均ビットレートの80%とし、重要閾値711を平均ビットレートの90%とする場合には、(閾値211)=80%、(重要閾値711)=90%などの値を記憶しておく。   Here, a particularly important scene is dynamically specified during shooting so that the minimum bit rate of the important scene, that is, the important threshold value 711 is higher than the normal threshold value 211. That is, the IN / OUT section of the first playlist 251 is determined using two types of threshold values. Here, it is assumed that the value of the important threshold value 711 is stored in the list creation unit 116, but it may be a predetermined constant value or the threshold value 211 dynamically determined by the list creation unit 116. A calculation formula may be determined so that a higher value is determined. For example, a count for calculating each threshold value is stored. That is, when the threshold 211 is 80% of the average bit rate and the important threshold 711 is 90% of the average bit rate, values such as (threshold 211) = 80%, (important threshold 711) = 90% are stored. Keep it.

図7のように、映像・音声データの撮影中に、例えばカメラマンが重要なシーンに入ったと判断した場合、カメラ101に備えられた図指しない重要釦を押下する。すると重要釦が押下された以降の映像・音声データはリスト作成部116により重要シーンと判断される。これにより、記録中のデータの伝送ビットレートが、あらかじめ設定していた重要閾値711を下回った時、すなわち時刻t2'にてIN/OUT区間が設定される。つまり、重要区間以外の区間では閾値211に基づいて設定される時刻t2にてIN/OUT点が設定されないようになる。   As shown in FIG. 7, when it is determined that a cameraman has entered an important scene during video / audio data shooting, an important button (not shown) provided in the camera 101 is pressed. Then, the video / audio data after the important button is pressed is determined as an important scene by the list creation unit 116. Thus, the IN / OUT section is set when the transmission bit rate of the data being recorded falls below the preset important threshold value 711, that is, at time t2 ′. That is, the IN / OUT point is not set at the time t2 set based on the threshold value 211 in the sections other than the important section.

一方、重要なシーンを撮影中、例えばカメラマンが重要なシーンが終了した、と判断した場合、カメラ101に備えられた図指しない重要解除釦を押下する。すると、重要解除釦が押下された以降の映像・音声データはリスト作成部116により重要シーンでないと判断され、記録中のデータの伝送ビットレートが、あらかじめ設定していた閾値211を下回った時に第1プレイリスト251のIN/OUT区間を分けるよう制御される。これは、すなわち元の制御に戻すということである。   On the other hand, when an important scene is being photographed, for example, when the photographer determines that the important scene has ended, the important release button (not shown) provided in the camera 101 is pressed. Then, the video / audio data after the importance release button is pressed is determined not to be an important scene by the list creation unit 116, and the first time when the transmission bit rate of the data being recorded falls below a preset threshold 211. Control is performed to divide the IN / OUT section of one playlist 251. This is to return to the original control.

この時、図7のように、重要区間にて、記録中のデータの伝送ビットレートが重要閾値711より低く、かつ閾値211よりも高い場合、すなわち時刻t3'のような状況の時に、重要解除釦が押下された場合、その瞬間に重要シーンが解除されることになるため、時刻t3'でIN/OUT点が設定される。つまり、時刻t3にてIN/OUT点が設定されないようになる。   At this time, as shown in FIG. 7, in the important section, when the transmission bit rate of the data being recorded is lower than the important threshold 711 and higher than the threshold 211, that is, in a situation such as time t3 ′, the importance cancellation is performed. When the button is pressed, the important scene is canceled at that moment, so the IN / OUT point is set at time t3 ′. That is, the IN / OUT point is not set at time t3.

また、上述した例では、重要シーンの判定をカメラマンの判断によって手動で行ったが、撮影中の映像・音声データの所定のパラメータから自動的に重要シーンを判定してもよい。   In the above-described example, the important scene is manually determined by the photographer, but the important scene may be automatically determined from predetermined parameters of the video / audio data being shot.

例えば、撮影の過程でズームアップした時は自動的に重要シーンと判定してもよく、あるいは音声のボリュームが上がった時(歓声が上がった時等)、顔認識機能のあるカメラだった場合は、顔認識を検知した時、などに自動的に重要シーンと判定してもよい。   For example, when zooming in during the shooting process, it may be automatically determined as an important scene, or when the volume of the voice is increased (when cheers are raised), if the camera has a face recognition function When a face recognition is detected, it may be automatically determined as an important scene.

上述した制御を行うことにより、様々な状況に応じて、第1記録メディア113に記録されていた高画質な映像・音声データの再送信区間を変更することが可能となる。   By performing the above-described control, it is possible to change the retransmission section of the high-quality video / audio data recorded on the first recording medium 113 according to various situations.

なお、本実施の形態では、閾値を決める際、通信状況(伝送ビットレート)の定常的なビットレート(平均ビットレート)または最低ビットレートの80%を閾値211に設定することを例にしたが、その%値は任意に決定してよい。   In this embodiment, when determining the threshold value, the threshold value 211 is set to 80% of the steady bit rate (average bit rate) of the communication status (transmission bit rate) or the minimum bit rate. The% value may be arbitrarily determined.

また、本実施の形態では、撮影中の映像・音声データにおいて、重要シーンと判断して重要釦を押下するのはカメラマンであることを例にしたが、現場にいるカメラマン以外の第三者がそれを判断し、カメラ101に備えられる図指しない例えば、赤外線や中距離無線などによるリモート釦等を用いて、重要シーンの開始・終了を制御するような仕組みにしてもよい。   In this embodiment, it is an example that a cameraman depresses an important button by determining that it is an important scene in the video / audio data being shot. For example, a mechanism may be adopted in which the start / end of the important scene is controlled by using a remote button or the like provided by the camera 101, for example, by infrared or middle-range wireless, etc.

また、図指しない重要釦と図指しない重要解除釦は同一の釦で開始・終了をトグルとして動作してもよく、またはそれぞれの釦が別々の釦であってもよい。   Further, the important button not shown and the important release button not shown may be operated with the same button as the start / end toggle, or each button may be a separate button.

また、本実施の形態では、閾値211および重要閾値711の2種類の閾値を用いてIN/OUT点の制御を行ったが、3種類以上の閾値を設定し、状況に応じてIN/OUT点の判断の基準となる閾値を用いて制御してもよい。例えば、重要釦、重要解除釦の他に、重要レベル設定釦などを設け、重要釦によって設定された重要区間ごとに、重要レベルに応じた異なる閾値を用いて制御すればよい。   In this embodiment, the IN / OUT point is controlled using two types of threshold values 211 and the important threshold value 711. However, three or more types of threshold values are set, and the IN / OUT point is set according to the situation. You may control using the threshold value used as the reference | standard of these. For example, in addition to the important button and the important release button, an important level setting button or the like may be provided, and control may be performed using a different threshold corresponding to the important level for each important section set by the important button.

また、本実施の形態では、重要シーンの自動判定のパラメータとして、ズームレベル、ボリュームレベル、顔認識等を例にしたが、その他の映像・音声パラメータから自動的に重要シーンと判定する仕組みでもよい。この場合も、自動判定のパラメータに応じて異なる重要レベルを設定し、重要シーンの重要レベルに応じた異なる閾値を用いて制御するようにしてもよい。ここで、リスト作成部116は、「取得した前記映像データ内で、特定の条件を満足する重要区間と、前記重要区間の重要度合いとを判定する重要区間判定部」および「前記重要区間の前記重要度合いに応じて、前記重要度合いが高いほど大きい値をとる閾値と、前記伝送路の伝送ビットレートとを比較して、前記重要区間内において前記重要度合いに応じた前記閾値よりも前記伝送ビットレートが下回る区間を前記部分区間として特定する前記特定部」の一例である。   In this embodiment, zoom level, volume level, face recognition, and the like are exemplified as parameters for automatic determination of important scenes. However, a mechanism for automatically determining important scenes from other video / audio parameters may be used. . Also in this case, different importance levels may be set according to the parameters for automatic determination, and control may be performed using different threshold values according to the importance levels of the important scenes. Here, the list creation unit 116 includes “an important section determination unit that determines an important section that satisfies a specific condition and an importance level of the important section in the acquired video data” and “the important section of the important section. According to the degree of importance, a threshold value that takes a larger value as the degree of importance is higher and a transmission bit rate of the transmission path are compared, and the transmission bit is more than the threshold value according to the degree of importance in the important section. It is an example of “the specifying unit that specifies a section where the rate is lower” as the partial section.

(実施の形態3)
本実施の形態では、無線ネットワークのデータ伝送が一時的に停止してしまった場合、つまり、一時的に伝送ビットレートが0[Mbps]になってしまった時の制御を説明する。本実施の形態において、実施の形態1と異なる点は、無線ネットワークのデータ伝送が停止している間、(1)サーバ102の表示部124が最後に受信した映像フレームを静止画像として表示すること、(2)サーバ102の第2記録部122が、カメラ101からのリアルタイム送信ファイルの途切れ部分をダミーデータで補間し、これによって作成した第2リアルタイム送信ファイル801を第2記録メディア123に記録することである。
(Embodiment 3)
In the present embodiment, a description will be given of control when data transmission of a wireless network is temporarily stopped, that is, when the transmission bit rate is temporarily 0 [Mbps]. The present embodiment is different from the first embodiment in that (1) the display unit 124 of the server 102 displays the last received video frame as a still image while the wireless network data transmission is stopped. (2) The second recording unit 122 of the server 102 interpolates the interrupted portion of the real-time transmission file from the camera 101 with dummy data, and records the second real-time transmission file 801 created thereby on the second recording medium 123. That is.

図8は、無線ネットワークのデータ伝送が一時的に停止した時のリアルタイム送信時のビットレート変化と、それに対する再送信ファイルおよび第1プレイリスト251との関係を示す図である。   FIG. 8 is a diagram illustrating the relationship between the bit rate change during real-time transmission when data transmission of the wireless network is temporarily stopped, and the re-transmission file and the first playlist 251 corresponding thereto.

図8上段左のグラフに示すように、例えば、時刻t3''から一時的に無線ネットワークが停止し、時刻t4''から無線ネットワークがデータ伝送を再開した場合を想定する。   As shown in the upper left graph of FIG. 8, for example, a case is assumed where the wireless network is temporarily stopped from time t3 ″ and the wireless network resumes data transmission from time t4 ″.

時刻t3''から時刻t4''の区間はデータ伝送が不可能なため、撮影中のリアルタイム送信において、サーバ102側で映像・音声データが受信できない区間が発生する。   Since data transmission is impossible in the section from time t3 ″ to time t4 ″, a section in which video / audio data cannot be received on the server 102 side occurs in real-time transmission during shooting.

その場合、図1に示したサーバ102内の表示部124では、受信部121からの映像・音声データ供給が一時的に止まるため、それまでに受信することのできた最後の映像フレーム、すなわち時刻t3''の映像フレームにてSTILL(静止)画像を表示する。   In this case, in the display unit 124 in the server 102 shown in FIG. 1, the video / audio data supply from the receiving unit 121 is temporarily stopped, so that the last video frame that has been received so far, that is, the time t3. A STILL (still) image is displayed in the video frame of ''.

その後、無線ネットワークがデータ伝送を再開した時に、表示部124では、受信部121からの映像・音声データ供給が再開されるため、引き続き映像・音声データを再生表示する。   Thereafter, when the wireless network resumes data transmission, the display unit 124 resumes the video / audio data because the video / audio data supply from the receiving unit 121 is resumed.

一方、同様に、第2記録部122においても、受信部121からの映像・音声データ供給が一時的に止まるため、それまでに受信することのできた最後の映像フレームデータ、すなわち時刻t3''の映像フレームデータ(または受信することのできた最後のGOPデータ)を用いてダミーデータを作り出し、作り出したダミーデータで途切れ部分を補間し第2リアルタイム送信ファイル801の作成を継続する。   On the other hand, similarly, in the second recording unit 122, since the supply of video / audio data from the receiving unit 121 is temporarily stopped, the last video frame data that has been received so far, that is, at the time t3 ″. Dummy data is created using the video frame data (or the last GOP data that could be received), the interrupted portion is interpolated with the created dummy data, and the creation of the second real-time transmission file 801 is continued.

その後、無線ネットワークがデータ伝送を再開した時に、第2記録部122では、受信部121からの映像・音声データ供給が再開されるため、ダミーデータによる補間をやめ、受信部121からの映像・音声データを内容とする第2リアルタイム送信ファイル801の記録を継続する。   After that, when the wireless network resumes data transmission, the second recording unit 122 resumes the video / audio data supply from the receiving unit 121, so the interpolation by the dummy data is stopped and the video / audio from the receiving unit 121 is stopped. Recording of the second real-time transmission file 801 containing the data is continued.

その時、リスト作成部116は、実施の形態1の場合と同様にして第1プレイリスト251を生成する。すなわち、無線ネットワークの通信状況(伝送ビットレート)が閾値211を下回っている区間では、第3再送信ファイル802(図8中段右図参照)が再送されるように第2プレイリストファイル804(図8下段右図参照)を作成する。具体的に、IN/OUT点を示すプレイリストファイルとしては、図8の第1プレイリスト251の示す通り、データ伝送が一時的に停止していた区間、すなわち時刻t3''から時刻t4''までの区間を含めた、閾値211を下回る低ビットレート区間、すなわち時刻t2から時刻t5までの全区間をひとつの区間としてIN/OUT点を設定する。よって、データ再送信時に第2記録部122では、図8の第3再送信ファイル802のようなデータファイルを、第2記録メディア123に記録する。   At that time, the list creation unit 116 generates the first playlist 251 in the same manner as in the first embodiment. That is, in the section where the communication status (transmission bit rate) of the wireless network is below the threshold value 211, the second playlist file 804 (FIG. 8) is retransmitted so that the third retransmission file 802 (see the right diagram in the middle of FIG. 8) is retransmitted. 8 (see the lower right figure). Specifically, as the playlist file indicating the IN / OUT points, as indicated by the first playlist 251 in FIG. 8, the section in which data transmission is temporarily stopped, that is, from time t3 ″ to time t4 ″. The IN / OUT points are set with the low bit rate interval lower than the threshold value 211 including the intervals up to, ie, all intervals from time t2 to time t5 as one interval. Therefore, at the time of data retransmission, the second recording unit 122 records a data file such as the third retransmission file 802 in FIG. 8 on the second recording medium 123.

よって、再送信後のサーバ102の再生部311での再生区間としては、第2リアルタイム送信ファイル801の第3再生対象区間811(時刻t1から時刻t2まで、および時刻t5から時刻t6まで)、第3再送信ファイル802が第4再生対象区間812(時刻t2から時刻t5まで)となる。   Therefore, as the playback section in the playback unit 311 of the server 102 after the retransmission, the third playback target section 811 (from time t1 to time t2 and from time t5 to time t6) of the second real-time transmission file 801, the first The third retransmission file 802 becomes the fourth reproduction target section 812 (from time t2 to time t5).

上述した制御により、無線ネットワークのデータ伝送が一時的に停止した場合でも、無線ネットワークの伝送ビットレートが閾値211を下回る区間の映像・音声データの再送信を行うことにより、サーバ102側では高品質な映像・音声データを再生(閲覧)することが可能となる。   By the above-described control, even when the data transmission of the wireless network is temporarily stopped, the server 102 side performs high quality by retransmitting the video / audio data in the section where the transmission bit rate of the wireless network is lower than the threshold value 211. It is possible to play back (view) video / audio data.

(実施の形態4)
上記実施の形態1〜3では、カメラ101が映像・音声データの記録処理終了後、サーバ102に対して、再送信対象の映像・音声データを自動的に再送信していたが、本実施の形態では、再送信すべきデータをユーザが選択する場合について説明する。本実施の形態4が実施の形態1と異なる点は、カメラ101が(1)IN/OUT区間の先頭映像フレームのサムネイルを表示する表示部を備えること、(2)サムネイルで特定される区間の映像・音声データの再送信を指示するための再送信釦を備えること、(3)リスト解釈部301が、再送信ボタンで指示された再送信ファイルのみを再送信することである。
(Embodiment 4)
In the first to third embodiments, the camera 101 automatically retransmits the video / audio data to be retransmitted to the server 102 after the recording process of the video / audio data is completed. In the embodiment, a case where the user selects data to be retransmitted will be described. The fourth embodiment is different from the first embodiment in that the camera 101 includes (1) a display unit that displays a thumbnail of the first video frame in the IN / OUT section, and (2) the section specified by the thumbnail. A retransmission button for instructing the retransmission of video / audio data is provided. (3) The list interpretation unit 301 retransmits only the retransmission file instructed by the retransmission button.

例えば、図2のように、カメラ101が映像・音声データの記録処理終了後、再送信対象区間が、時刻t2から時刻t3までの区間および時刻t4から時刻t5までの区間の2箇所存在したとする。   For example, as shown in FIG. 2, after the camera 101 finishes recording the video / audio data, there are two retransmission target sections, a section from time t2 to time t3 and a section from time t4 to time t5. To do.

この時、カメラ101内の図指しない表示部により、それぞれの再送信候補の区間のサムネイル、すなわち、時刻t2から時刻t3までの区間のシーンの先頭映像フレームのサムネイル、および時刻t4から時刻t5までの区間の先頭映像フレームのサムネイルを、図指しない表示部の液晶画面等に表示する。   At this time, by a display unit (not shown) in the camera 101, thumbnails of respective retransmission candidate sections, that is, thumbnails of the first video frame of the scene in the section from time t2 to time t3, and from time t4 to time t5 A thumbnail of the first video frame in the section is displayed on a liquid crystal screen or the like of a display unit (not shown).

このサムネイル画面から、それぞれの対象区間の映像データを再生することにより、どのようなシーンが再送信候補のデータになったのかを、ユーザが知ることができる。   By reproducing the video data of each target section from the thumbnail screen, the user can know what scene has become the retransmission candidate data.

再送信候補のシーンをユーザが確認し、再送信が必要なデータ(すなわち重要なデータ)であると判断した場合、図指しない再送信釦を押下することにより、所定の区間の映像・音声データをサーバ102に向けて再送信する。   When the user confirms a scene that is a candidate for retransmission and determines that the data needs to be retransmitted (that is, important data), the video / audio data of a predetermined section can be obtained by pressing a retransmission button (not shown). To the server 102.

例えば、図2において、時刻t2から時刻t3までの区間のシーンは重要なシーンであり、時刻t4から時刻t5までの区間のシーンはそれほど重要でないシーンだった場合、ユーザは意図的に時刻t2から時刻t3までの区間のシーンのみを再送信する。   For example, in FIG. 2, when the scene in the section from time t2 to time t3 is an important scene and the scene in the section from time t4 to time t5 is a less important scene, the user intentionally starts from time t2. Only the scenes in the section up to time t3 are retransmitted.

上述した方法により、映像・音声データの撮影終了後、ユーザが必要と判断した再送信候補のデータのみを伝送することが可能となるため、無駄なデータ伝送を抑制することができる。   According to the above-described method, it is possible to transmit only data of retransmission candidates that the user determines to be necessary after video / audio data shooting is completed, and thus it is possible to suppress useless data transmission.

なお、本実施の形態では、再送信候補の区間のシーンのサムネイルとしては、先頭映像フレームのものとしたが、先頭映像フレームである必要はなく、該当区間のシーン内の映像フレームであれば、任意でよい。また、例えば、ズームアップされたフレーム、顔が画像認識されたフレーム、音声のボリュームが上がったときのフレームなど、実施の形態2で重要度の高さを自動的に判定可能と説明したフレームを、サムネイルとして用いてもよい。   In the present embodiment, the thumbnail of the scene in the retransmission candidate section is the first video frame. However, the thumbnail is not necessarily the first video frame, and if it is a video frame in the scene of the corresponding section, Optional. In addition, for example, a frame described as being capable of automatically determining the high degree of importance in the second embodiment, such as a zoomed-up frame, a frame whose face has been recognized, and a frame when the volume of sound is increased. It may be used as a thumbnail.

また、本実施の形態では、サムネイルを図指しない液晶画面に表示するとしたが、サムネイルが表示できるものであれば液晶画面でなくとも任意でよい。   In the present embodiment, thumbnails are displayed on a liquid crystal screen that does not indicate a thumbnail. However, the thumbnails may be arbitrary as long as the thumbnails can be displayed.

また、本実施の形態では、図指しない再送信釦をユーザが押下することにより、所定の再送信区間のデータの再送信を行ったが、再送信を行うためのトリガを与える機能であれば再送信釦の押下でなくとも任意でよい。   In the present embodiment, the user re-sends data in a predetermined re-sending section by pressing a non-illustrated re-sending button, but any function that provides a trigger for re-sending can be used. It is optional even if the re-send button is not pressed.

また、本実施の形態では、再送信候補の区間のデータを再送信する際、1回の送信に1つの区間のみのデータの再送信を行ったが、複数の再送信対象区間が存在した場合、複数の再送信区間のデータを同時に再送信するような仕組みとしてもよい。   Further, in this embodiment, when retransmitting data of a retransmission candidate section, data of only one section is retransmitted in one transmission, but there are a plurality of retransmission target sections. Alternatively, a mechanism may be adopted in which data of a plurality of retransmission sections is retransmitted simultaneously.

(実施の形態5)
実施の形態1〜4では、カメラ101が映像・音声データの記録処理終了後、同じカメラ101からサーバ102に対してデータを再送信していたが、本実施の形態では、カメラ101以外の別の機器から、サーバ102に対して再送信を行う。本実施の形態5が実施の形態1と異なる点は、(1)リスト作成部116はプレイリストに再送信データおよび当該プレイリストの送信先のアドレスを示す送信IDを書き込むこと、(2)図示しない編集機がリスト作成部116によって作成されたプレイリストに書き込まれている送信IDを解釈して、送信IDで特定される送信先に、再送信データファイルおよび当該プレイリストのファイルを送信することである。
(Embodiment 5)
In the first to fourth embodiments, the camera 101 retransmits data to the server 102 from the same camera 101 after the video / audio data recording process is completed. From the device to the server 102. The fifth embodiment is different from the first embodiment in that (1) the list creating unit 116 writes retransmission data and a transmission ID indicating the transmission destination address of the playlist in the playlist, and (2) illustrated. The editing machine that does not interpret the transmission ID written in the playlist created by the list creation unit 116, and transmits the retransmission data file and the playlist file to the transmission destination specified by the transmission ID. It is.

例えば、図2のように、カメラ101が映像・音声データの記録処理終了後、再送信対象区間が、時刻t2から時刻t3までの区間および時刻t4から時刻t5までの区間の、2箇所存在したとする。   For example, as shown in FIG. 2, after the camera 101 finishes recording the video / audio data, there are two retransmission target sections, a section from time t2 to time t3 and a section from time t4 to time t5. And

この時、第1記録メディア113上には、映像・音声データおよび、プレイリストが記録されている。   At this time, video / audio data and a play list are recorded on the first recording medium 113.

図9は、カメラ101とは異なる機器から再送信データファイルおよびプレイリストファイルを送信する場合の第2プレイリスト951の一例を示す図である。ここで、プレイリストには、例えば、図9の第2プレイリスト951に示すように、再送信先のID(送信ID)として、例えばIPアドレス「11.22.33.44」を記載しておくことにより、再送信を行う際の送信先が特定できる。   FIG. 9 is a diagram illustrating an example of the second playlist 951 when a retransmission data file and a playlist file are transmitted from a device different from the camera 101. Here, for example, as shown in the second playlist 951 in FIG. 9, for example, an IP address “11.22.33.44” is described as the retransmission destination ID (transmission ID). By doing so, it is possible to specify a transmission destination when performing retransmission.

第1記録メディア113が着脱可能な記録メディアである場合、再送信を行う前に、第1記録メディア113をカメラ101から取り外し、図指しない編集機に第1記録メディア113を装着する。   When the first recording medium 113 is a detachable recording medium, the first recording medium 113 is removed from the camera 101 and the first recording medium 113 is mounted on an editing machine (not shown) before re-transmission.

そして、図指しない編集機が、第1記録メディア113上に記録されている第2プレイリスト951の再送信情報を参照し、再送信が「未」となっている区間が存在した場合は、その区間の映像・音声データをサーバ102に再送信する。   When an editing machine (not shown) refers to the retransmission information of the second playlist 951 recorded on the first recording medium 113 and there is a section in which the retransmission is “not yet”, The video / audio data of the section is retransmitted to the server 102.

上述した手法により、カメラ101にて映像・音声データの撮影終了後、すぐに次の別のシーンを撮影したい場合に、カメラ101から第1記録メディア113を取り出し、別の記録メディアをカメラ101に装着することにより、すぐに次のシーンの撮影を開始することが可能となる。   If the camera 101 needs to shoot the next scene immediately after video / audio data has been shot by the above-described method, the first recording medium 113 is taken out from the camera 101 and another recording medium is inserted into the camera 101. By mounting, it becomes possible to immediately start shooting the next scene.

また、同時に、カメラ101から取り出した第1記録メディア113を図指しない編集機に装着し、所定のデータの再送信を行うことが可能となる。   At the same time, the first recording medium 113 taken out from the camera 101 can be mounted on an editing machine (not shown) and predetermined data can be retransmitted.

なお、本実施の形態では、送信IDが記載されている第2プレイリスト951には、再送信先を特定するためのIDとしてIPアドレスを用いたが、送信先を特定することができる情報であればどのようなアドレスであってもよい。   In the present embodiment, the IP address is used as the ID for specifying the retransmission destination in the second playlist 951 in which the transmission ID is described, but it is information that can specify the transmission destination. Any address can be used.

また、本実施の形態では、カメラ101から取り外された第1記録メディア113を、図指しない編集機に装着したが、編集機である必要ではなく、本発明で示す再送信機能を有する機器であればどのような装置であってもよい。   Further, in the present embodiment, the first recording medium 113 removed from the camera 101 is mounted on an editing machine (not shown). However, the first recording medium 113 is not necessarily an editing machine, and is a device having a retransmission function shown in the present invention. Any device may be used.

(実施の形態6)
実施の形態1〜5では、サーバ102に対して所定の区間の映像・音声データを再送信する際、送信側にて再送信する映像・音声データ区間を選択していたが、本実施の形態では、受信側、すなわちサーバ102から再送信して欲しい映像・音声データ区間を指定する場合について説明する。この場合、サーバ102側およびカメラ101側に、新たな構成が必要である。具体的には、サーバ102側では(1)再送信してほしい映像・音声データの区間を指定するためのプレイリストを作成する再送信要求プレイリスト作成部と、(2)作成された再送信要求プレイリストをカメラ101に送信する送信部とが必要である。カメラ101側では、(1)サーバ102から再送信要求プレイリストを受信する受信部と、(2)リスト解釈部301の新たな機能として再送信要求プレイリストを解釈して、要求された区間の映像・音声データを第1記録メディア113から読みだし、サーバ102に送信する機能が必要である。
(Embodiment 6)
In the first to fifth embodiments, when video / audio data in a predetermined section is retransmitted to the server 102, the video / audio data section to be retransmitted is selected on the transmission side. Now, a case where the video / audio data section desired to be retransmitted from the receiving side, that is, the server 102 is designated will be described. In this case, new configurations are required on the server 102 side and the camera 101 side. Specifically, the server 102 side (1) a retransmission request playlist creation unit for creating a playlist for designating a section of video / audio data desired to be retransmitted, and (2) the created retransmission A transmission unit that transmits the requested playlist to the camera 101 is required. On the camera 101 side, (1) a receiving unit that receives a retransmission request playlist from the server 102, and (2) interpreting the retransmission request playlist as a new function of the list interpretation unit 301, A function for reading video / audio data from the first recording medium 113 and transmitting it to the server 102 is required.

ここで、例えば、図2のように、カメラ101が映像・音声データの記録処理終了後、再送信対象区間が、時刻t2から時刻t3までの区間および時刻t4から時刻t5までの区間の2箇所存在したとする。   Here, for example, as shown in FIG. 2, after the camera 101 finishes the recording process of the video / audio data, the retransmission target sections are two sections, a section from time t2 to time t3 and a section from time t4 to time t5. Suppose it exists.

この時、時刻t2から時刻t3までの区間および時刻t4から時刻t5までの区間の映像・音声データは再送信を行っていないため、サーバ102側でこれらの区間を閲覧した場合、所定のビットレート、すなわち、伝送ビットレートが閾値211よりも低い映像・音声データしか確認できないことになる。   At this time, since the video / audio data of the section from time t2 to time t3 and the section from time t4 to time t5 are not retransmitted, when these sections are viewed on the server 102 side, a predetermined bit rate That is, only video / audio data whose transmission bit rate is lower than the threshold value 211 can be confirmed.

ここで、サーバ102側にて編集作業を行う過程で、上記の所定のビットレートよりも低い区間の映像・音声データに対し、高品質データが必要だと判断した場合、すなわち、上記の所定のビットレートよりも低い区間の映像・音声データの再送信が必要と判断した場合に、送信側、すなわちカメラ101に対して再送信要求を行う。なお、この場合、サーバ102側でリアルタイム送信ファイルを視聴したうえで、高品質データが必要だと判断し、再送信要求を行うのであるから、カメラ101側では無線ネットワークの伝送ビットレートが、閾値211や、重要閾値711を上回っている区間であっても再送信するものとする。   Here, in the process of editing on the server 102 side, when it is determined that high quality data is necessary for the video / audio data in the section lower than the predetermined bit rate, that is, the predetermined When it is determined that video / audio data in a section lower than the bit rate needs to be retransmitted, a re-transmission request is made to the transmission side, that is, the camera 101. In this case, after viewing the real-time transmission file on the server 102 side, it is determined that high quality data is necessary, and a retransmission request is made. Therefore, on the camera 101 side, the transmission bit rate of the wireless network is a threshold value. It is assumed that retransmission is performed even in a section that exceeds 211 or the important threshold value 711.

図10は、サーバ102からカメラ101に再送信要求を行う際の再送信区間を示す再送信要求プレイリスト1001を示す図である。図2に示すように、時刻t2から時刻t3までの区間の映像・音声データの再送信を要求する場合、例えば図10に示すような再送信要求プレイリスト1001を、サーバ102からカメラ101に送信する。   FIG. 10 is a diagram showing a retransmission request playlist 1001 indicating a retransmission section when a retransmission request is made from the server 102 to the camera 101. As shown in FIG. 2, when requesting retransmission of video / audio data in a section from time t2 to time t3, for example, a retransmission request playlist 1001 as shown in FIG. 10 is transmitted from the server 102 to the camera 101. To do.

サーバ102から送信された再送信要求プレイリスト1001を、カメラ101が受信し、第1記録部112により第1記録メディア113に記録する。   The camera 101 receives the retransmission request playlist 1001 transmitted from the server 102 and records it on the first recording medium 113 by the first recording unit 112.

リスト解釈部301は、第1記録メディア113に記録された再送信要求プレイリスト1001を解釈し、再送が必要な区間を特定し、実施の形態1〜5の要領で、所定の区間の映像・音声データをサーバ102に送信する。   The list interpretation unit 301 interprets the retransmission request playlist 1001 recorded on the first recording medium 113, identifies the section that needs to be retransmitted, and in the manner described in Embodiments 1 to 5, the video / Audio data is transmitted to the server 102.

上述した制御を行うことにより、受信側(サーバ102)から送信側(カメラ101)に対して所定区間の映像・音声データの再送要求を行うことが可能となる。   By performing the above-described control, it is possible to make a retransmission request for video / audio data in a predetermined section from the reception side (server 102) to the transmission side (camera 101).

なお、本実施の形態では、再送信要求プレイリスト1001としては図10に示すようなプレイリストを用いたが、再送信要求の区間を示すことができる形式であれば、任意の形式でよく、または第1プレイリスト251と等価の形式であってもよい。   In this embodiment, the playlist as shown in FIG. 10 is used as the retransmission request playlist 1001, but any format can be used as long as it can indicate the section of the retransmission request. Or the format equivalent to the 1st play list 251 may be sufficient.

(実施の形態7)
実施の形態1〜6では、映像・音声データを再送信する際に、所定の区間の単位で再送信を行っていたが、本実施の形態では、任意の区間の単位で映像・音声データの再送信を行う。すなわち、実施の形態1〜6では時刻t1から時刻t6までの区間について映像・音声データを記録し、記録した全区間の映像・音声データを対象として無線ネットワークの伝送ビットレートに応じて再送信を行ったが、本実施の形態7では、映像・音声データを記録した一部区間について当該区間内の全映像・音声データの再送信を行う。ただし、当該区間内において伝送ビットレートが閾値211を下回っている区間の映像・音声データと、閾値211以上である区間の映像・音声データとを別のファイルにして再送信する。さらに、当該一部区間以外の区間では、無線ネットワークの伝送ビットレートに応じて再送信を行う。
(Embodiment 7)
In Embodiments 1 to 6, when video / audio data is retransmitted, retransmission is performed in units of a predetermined section. In this embodiment, video / audio data is transmitted in units of arbitrary sections. Re-send. That is, in the first to sixth embodiments, video / audio data is recorded for the section from time t1 to time t6, and re-transmission is performed on the recorded video / audio data in accordance with the transmission bit rate of the wireless network. In the seventh embodiment, all the video / audio data in the section is retransmitted for the partial section in which the video / audio data is recorded. However, the video / audio data in a section in which the transmission bit rate is lower than the threshold value 211 and the video / audio data in a section in which the transmission bit rate is lower than the threshold value 211 are retransmitted as separate files. Further, in the sections other than the partial section, retransmission is performed according to the transmission bit rate of the wireless network.

この場合、カメラ101側で任意の区間(時刻taから時刻tbまで)を設定する場合には、カメラ101に区間(時刻taから時刻tbまで)を指定するための区間開始釦および区間終了釦などを備え、リスト作成部116は時刻taおよび時刻tbをIN/OUT点とするプレイリストを作成するものとする。この釦は、1つの釦でトグル動作をするものであっても良い。また、サーバ102側で任意の区間を設定する場合には、実施の形態6と同様の構成が必要である。具体的には、サーバ102側では(1)再送信してほしい映像・音声データの任意区間を指定するためのプレイリストを作成する再送信要求プレイリスト作成部と、(2)作成された再送信要求プレイリストをカメラ101に送信する送信部とが必要である。カメラ101側では、(1)サーバ102から再送信要求プレイリストを受信する受信部と、(2)リスト解釈部301の新たな機能として再送信要求プレイリストを解釈して、要求された区間の映像・音声データを第1記録メディア113から読みだし、サーバ102に送信する機能が必要である。   In this case, when an arbitrary section (from time ta to time tb) is set on the camera 101 side, a section start button and a section end button for designating the section (from time ta to time tb) for the camera 101, etc. It is assumed that the list creation unit 116 creates a playlist having the time ta and the time tb as IN / OUT points. This button may perform a toggle operation with one button. Further, when setting an arbitrary section on the server 102 side, the same configuration as in the sixth embodiment is required. Specifically, on the server 102 side, (1) a retransmission request playlist creation unit for creating a playlist for designating an arbitrary section of video / audio data desired to be retransmitted, and (2) the created retransmission A transmission unit that transmits the transmission request playlist to the camera 101 is required. On the camera 101 side, (1) a receiving unit that receives a retransmission request playlist from the server 102, and (2) interpreting the retransmission request playlist as a new function of the list interpretation unit 301, A function for reading video / audio data from the first recording medium 113 and transmitting it to the server 102 is required.

図11は、設定された任意の区間(時刻taから時刻tbまで)と無線ネットワークの伝送ビットレートとの関係、およびこの場合の再送信ファイルを示す第3プレイリスト1151の例を示す図である。例えば、カメラ101が映像・音声データの記録処理終了後、図2のように、時刻t1から時刻t6までのような区間に分かれていたとする。   FIG. 11 is a diagram illustrating an example of a third playlist 1151 indicating a relationship between a set arbitrary section (from time ta to time tb) and a transmission bit rate of the wireless network, and a retransmission file in this case. . For example, suppose that the camera 101 is divided into sections from time t1 to time t6 as shown in FIG.

この時、図11に示すように、任意の区間(時刻taから時刻tbまで)を設定する。
送信側、すなわちカメラ101側から再送信しようとした場合(実施の形態1〜5)には、カメラ101内で時刻taおよび時刻tbを設定する。
At this time, as shown in FIG. 11, an arbitrary section (from time ta to time tb) is set.
When re-transmission is to be performed from the transmission side, that is, the camera 101 side (Embodiments 1 to 5), time ta and time tb are set in the camera 101.

一方、受信側、すなわちサーバ102側から再送信要求を行う場合(実施の形態6)には、サーバ102側で時刻taおよび時刻tbを設定する。   On the other hand, when a retransmission request is made from the receiving side, that is, the server 102 side (sixth embodiment), time ta and time tb are set on the server 102 side.

この時、時刻taと時刻tbの間には、時刻t2および時刻t3が存在するものとする。   At this time, it is assumed that time t2 and time t3 exist between time ta and time tb.

この時、第1プレイリスト251を、時刻taおよび時刻tbを考慮した図11に示す第3プレイリスト1151のように書き換える。   At this time, the first playlist 251 is rewritten like the third playlist 1151 shown in FIG. 11 in consideration of the time ta and the time tb.

そして、時刻taから時刻t2までの区間、時刻t2から時刻t3までの区間、および時刻t3から時刻tbまでの各区間を、実施の形態1〜6の要領でそれぞれ別のファイルとして、対応するプレイリストを添付し、高画質の映像・音声データを再送信する。   The section from time ta to time t2, the section from time t2 to time t3, and each section from time t3 to time tb are each handled as a separate file in the manner of the first to sixth embodiments. Attach the list and re-send high-quality video / audio data.

上述した制御を行うことにより、記録した全映像・音声データの任意の区間を再送信することが可能となる。   By performing the above-described control, it is possible to retransmit an arbitrary section of all recorded video / audio data.

なお、上記実施の形態7では、時刻taから時刻t2までの区間、時刻t2から時刻t3までの区間、および時刻t3から時刻tbまでの各区間をそれぞれ別のファイルとして取り扱うとしたが、時刻taから時刻tbまでの区間を1つのファイルとして再送信ファイルおよび第3プレイリスト1151を作成するとしても良い。   In the seventh embodiment, the section from time ta to time t2, the section from time t2 to time t3, and each section from time t3 to time tb are handled as separate files. The re-transmission file and the third playlist 1151 may be created using the section from time tb to time tb as one file.

また、上述した例では、任意の区間の指定をカメラマンのボタン操作を検出することによって取得したが、撮影中の映像・音声データの所定のパラメータから自動的に重要シーンを検出し、任意区間の指定を取得するとしてもよい。   In the above-described example, the designation of an arbitrary section is acquired by detecting the button operation of the cameraman. However, an important scene is automatically detected from predetermined parameters of video / audio data being shot, and You may get a designation.

例えば、撮影の過程でズームアップした時、あるいは音声のボリュームが上がった時(歓声が上がった時等)、顔認識機能のあるカメラだった場合に顔認識を検知した時、などに自動的に任意区間の指定を取得するとしてもよい。ここで、リスト作成部116およびリスト解釈部301は、「第2映像データを再生すべき区間を特定する情報を取得し、取得した区間を、前記部分区間として特定する前記特定部」の一例である。   For example, automatically when zooming up in the shooting process, when the volume of the sound is increased (when cheering is raised, etc.), when face recognition is detected when the camera has a face recognition function, etc. The designation of an arbitrary section may be acquired. Here, the list creation unit 116 and the list interpretation unit 301 are an example of “the specifying unit that acquires information for specifying a section in which the second video data is to be reproduced and specifies the acquired section as the partial section”. is there.

なお、ブロック図(図1、図3など)の各機能ブロックは典型的には集積回路であるLSIとして実現される。これらは個別に1チップ化されても良いし、一部又は全てを含むように1チップ化されても良い。例えばメモリ以外の機能ブロックが1チップ化されていても良い。   Each functional block in the block diagrams (FIG. 1, FIG. 3, etc.) is typically realized as an LSI which is an integrated circuit. These may be individually made into one chip, or may be made into one chip so as to include a part or all of them. For example, the functional blocks other than the memory may be integrated into one chip.

ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。   The name used here is LSI, but it may also be called IC, system LSI, super LSI, or ultra LSI depending on the degree of integration.

また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用しても良い。   Further, the method of circuit integration is not limited to LSI's, and implementation using dedicated circuitry or general purpose processors is also possible. An FPGA (Field Programmable Gate Array) that can be programmed after manufacturing the LSI or a reconfigurable processor that can reconfigure the connection and setting of circuit cells inside the LSI may be used.

さらには、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。   Further, if integrated circuit technology comes out to replace LSI's as a result of the advancement of semiconductor technology or a derivative other technology, it is naturally also possible to carry out function block integration using this technology. Biotechnology can be applied.

また、各機能ブロックのうち、符号化または復号化の対象となるデータを格納する手段だけ1チップ化せずに別構成としても良い。   In addition, among the functional blocks, only the means for storing the data to be encoded or decoded may be configured separately instead of being integrated into one chip.

本発明は、映像・音声データの撮影時に、無線ネットワークを経由したリアルタイム伝送を必要とするようなシステム、その中でも高品質なデータ伝送を必要とするシステム、具体的には、放送、特に素早い編集を要する報道番組などの放送用・業務用カメラシステムに特に有効である。   The present invention relates to a system that requires real-time transmission via a wireless network at the time of video / audio data shooting, among them, a system that requires high-quality data transmission, specifically broadcasting, particularly quick editing. This is particularly effective for broadcast and commercial camera systems for news programs that require a large amount of information.

本発明の映像送信装置を含む映像送信システムの構成およびデータの流れを示すブロック図である。It is a block diagram which shows the structure and data flow of a video transmission system including the video transmission apparatus of this invention. 通信状況検出部で検出される通信状況(ビットレート)の変化と、通信状況に応じた映像・音声データの再生方法を示すプレイリストとの一例を示す図である。It is a figure which shows an example of the play list which shows the change of the communication condition (bit rate) detected by a communication condition detection part, and the reproduction | regeneration method of the video / audio data according to a communication condition. データ再送時のデータの流れを示す映像送信システムの構成図である。It is a block diagram of the video transmission system which shows the data flow at the time of data resending. データ再送信時に、通信状況検出部で検出された通信状況(ビットレート)の変化と、通信状況に応じて映像・音声データの再送信の要否を示すプレイリストの一例を示す図である。It is a figure which shows an example of the playlist which shows the change of the communication condition (bit rate) detected by the communication condition detection part at the time of data retransmission, and the necessity of resending of video / audio data according to a communication condition. 図4に示した例のように、カメラが、時刻t2から時刻t3までの区間の映像・音声データの圧縮符号化データ、および時刻t4から時刻t5までの区間の映像・音声データの圧縮符号化データを再送信した場合のサーバ側のデータの記録状況の一例を示す図である。As in the example shown in FIG. 4, the camera performs compression encoding of video / audio data in a section from time t2 to time t3 and compression encoding of video / audio data in a section from time t4 to time t5. It is a figure which shows an example of the data recording condition of the server side at the time of retransmitting data. 図5に示した第1プレイリストに従ってカメラからの映像・音声データを再生した場合のビットレートを示す図である。It is a figure which shows the bit rate at the time of reproducing | regenerating the video / audio data from a camera according to the 1st play list shown in FIG. 重要釦と重要解除釦を用いて重要区間を設定した場合の閾値、重要閾値および第1プレイリストの関係を示す図である。It is a figure which shows the relationship between the threshold value at the time of setting an important area using an important button and an importance cancellation | release button, an important threshold value, and a 1st play list. 無線ネットワークのデータ伝送が一時的に停止した時のリアルタイム送信時のビットレート変化と、それに対する再送信ファイルおよび第1プレイリストとの関係を示す図である。It is a figure which shows the relationship between the bit rate change at the time of real-time transmission when the data transmission of a wireless network stops temporarily, and the resend file and 1st play list with respect to it. カメラとは異なる機器から再送信データファイルおよびプレイリストファイルを送信する場合の第2プレイリストの一例を示す図である。It is a figure which shows an example of the 2nd playlist in the case of transmitting a resending data file and a playlist file from the apparatus different from a camera. サーバからカメラに再送信要求を行う際の再送信区間を示す再送信要求プレイリストを示す図である。It is a figure which shows the resending request | requirement playlist which shows the resending area | region at the time of making a resending request | requirement to a camera from a server. 設定された任意の区間(時刻taから時刻tbまで)と無線ネットワークの伝送ビットレートとの関係、およびこの場合の再送信ファイルを示す第3プレイリストの例を示す図である。It is a figure which shows the example of the 3rd playlist which shows the relationship between the set arbitrary area (from time ta to time tb) and the transmission bit rate of a wireless network, and the retransmission file in this case.

符号の説明Explanation of symbols

101 カメラ
102 サーバ
103 送信機
104 受信機
111 撮像部
112 第1記録部
113 第1記録メディア
114 送信部
115 通信状況検出部
116 リスト作成部
117 記録符号化部
118 送信符号化部
121 受信部
122 第2記録部
123 第2記録メディア
211 閾値
251 第1プレイリスト
301 リスト解釈部
311 再生部
501 第1リアルタイム送信ファイル
502 第1再送信ファイル
503 第2再送信ファイル
504 第1プレイリストファイル
511 第1再生対象区間
512 第2再生対象区間
711 重要閾値
801 第2リアルタイム送信ファイル
802 第3再送信ファイル
804 第2プレイリストファイル
811 第3再生対象区間
812 第4再生対象区間
951 第2プレイリスト
1001 再送信要求プレイリスト
1151 第3プレイリスト
DESCRIPTION OF SYMBOLS 101 Camera 102 Server 103 Transmitter 104 Receiver 111 Image pick-up part 112 1st recording part 113 1st recording medium 114 Transmission part 115 Communication condition detection part 116 List preparation part 117 Recording encoding part 118 Transmission encoding part 121 Receiving part 122 2 recording unit 123 second recording medium 211 threshold 251 first playlist 301 list interpretation unit 311 playback unit 501 first real-time transmission file 502 first retransmission file 503 second retransmission file 504 first playlist file 511 first reproduction Target section 512 Second playback target section 711 Important threshold 801 Second real-time transmission file 802 Third retransmission file 804 Second playlist file 811 Third playback target section 812 Fourth playback target section 951 Second playlist 10 01 retransmission request playlist 1151 third playlist

Claims (6)

取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置であって、
映像データを取得する映像データ取得部と、
取得した前記映像データを、第1映像データと、前記第1映像データよりも画質の高い第2映像データとに変換する映像データ変換部と、
前記第1映像データを、伝送路を介して前記受信装置へ送信する第1映像データ送信部と、
前記第1映像データの前記送信と並行して、前記第2映像データを記録媒体に記録する映像データ記録部と、
前記第1映像データ中の1つの部分区間を特定する特定部と、
前記第2映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、1つのファイルとして前記受信装置に送信する第2映像データ送信部と、
前記第1映像データを再生する場合、前記第1映像データの中で特定された前記部分区間では前記第2映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、
生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部と
を備える映像送信装置。
A video transmission device that records the acquired video on a recording medium and transmits the video to a reception device via a transmission path,
A video data acquisition unit for acquiring video data;
A video data converter that converts the acquired video data into first video data and second video data having higher image quality than the first video data;
A first video data transmission unit that transmits the first video data to the reception device via a transmission path;
In parallel with the transmission of the first video data, a video data recording unit that records the second video data on a recording medium;
A specifying unit for specifying one partial section in the first video data;
A second video data transmitting unit that transmits video data of a partial section corresponding to the partial section specified by the specifying unit in the second video data to the receiving device as one file;
When reproducing the first video data, reproduction order information generation for generating reproduction order information indicating that the file of the second video data should be reproduced in the partial section specified in the first video data. And
A video transmission apparatus comprising: a reproduction order information transmission unit that transmits the generated reproduction order information to the reception apparatus.
前記映像送信装置は、
前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部を備え、
前記特定部は、前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定する
請求項1記載の映像送信装置。
The video transmission device includes:
A communication status detection unit that detects a transmission bit rate indicating a communication status of the transmission path, and dynamically determines a threshold value for identifying the partial section from the detected transmission bit rate;
The specifying unit specifies a time point when a transmission bit rate of the transmission path is lower than the threshold value determined by the communication status detection unit as a start point of the partial section, and a time point when the transmission bit rate is equal to or higher than the threshold value. The video transmission device according to claim 1, wherein the video transmission device is identified as an end point of the partial section.
前記映像送信装置は、
取得した前記映像データ内で、特定の条件を満足する重要区間と、前記重要区間の重要度合いとを判定する重要区間判定部を備え、
前記特定部は、前記重要区間の前記重要度合いに応じて、前記重要度合いが高いほど大きい値をとる閾値と、前記伝送路の伝送ビットレートとを比較して、前記重要区間内において前記重要度合いに応じた前記閾値よりも前記伝送ビットレートが下回る区間を前記部分区間として特定する
請求項1記載の映像送信装置。
The video transmission device includes:
In the acquired video data, an important section that satisfies a specific condition, and an important section determination unit that determines the importance of the important section,
The identifying unit compares the threshold value, which is larger as the importance degree is higher, with the transmission bit rate of the transmission path according to the importance degree of the important section, and compares the importance degree in the important section. The video transmission device according to claim 1, wherein a section in which the transmission bit rate is lower than the threshold corresponding to is specified as the partial section.
前記特定部は、第2映像データを再生すべき区間を特定する情報を取得し、取得した区間を、前記部分区間として特定する
請求項1記載の映像送信装置。
The video transmission device according to claim 1, wherein the specifying unit acquires information for specifying a section in which the second video data is to be reproduced, and specifies the acquired section as the partial section.
取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信方法であって、
映像データを取得する映像データ取得ステップと、
取得した前記映像データを、第1映像データと、前記第1映像データよりも画質の高い第2映像データとに変換する映像データ変換ステップと、
前記第1映像データを、伝送路を介して前記受信装置へ送信する第1映像データ送信ステップと、
前記第1映像データの前記送信と並行して、前記第2映像データを記録媒体に記録する映像データ記録ステップと、
前記第1映像データ中の1つの部分区間を特定する特定ステップと、
前記第2映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、1つのファイルとして前記受信装置に送信する第2映像データ送信ステップと、
前記第1映像データを再生する場合、前記第1映像データの中で特定された前記部分区間では前記第2映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成ステップと、
生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信ステップと
を含む映像送信方法。
A video transmission method for recording an acquired video on a recording medium and transmitting the acquired video to a receiving device via a transmission path,
A video data acquisition step for acquiring video data;
A video data conversion step of converting the acquired video data into first video data and second video data having higher image quality than the first video data;
A first video data transmission step of transmitting the first video data to the receiving device via a transmission path;
A video data recording step of recording the second video data on a recording medium in parallel with the transmission of the first video data;
A specifying step of specifying one partial section in the first video data;
A second video data transmission step of transmitting video data of a partial section corresponding to the partial section specified by the specifying unit in the second video data to the receiving device as one file;
When reproducing the first video data, reproduction order information generation for generating reproduction order information indicating that the file of the second video data should be reproduced in the partial section specified in the first video data. Steps,
A video transmission method comprising: a reproduction sequence information transmitting step of transmitting the generated reproduction sequence information to the receiving device.
取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置のためのプログラムであって、コンピュータを
映像データを取得する映像データ取得部と、取得した前記映像データを、第1映像データと、前記第1映像データよりも画質の高い第2映像データとに変換する映像データ変換部と、前記第1映像データを、伝送路を介して前記受信装置へ送信する第1映像データ送信部と、前記第1映像データの前記送信と並行して、前記第2映像データを記録媒体に記録する映像データ記録部と、前記第1映像データ中の1つの部分区間を特定する特定部と、前記第2映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、1つのファイルとして前記受信装置に送信する第2映像データ送信部と、前記第1映像データを再生する場合、前記第1映像データの中で特定された前記部分区間では前記第2映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部として機能させるためのプログラム。
A program for a video transmission device that records the acquired video on a recording medium and transmits the video to a reception device via a transmission path, the computer using a video data acquisition unit that acquires video data, and the acquired video data Is converted to first video data and second video data having higher image quality than the first video data, and the first video data is transmitted to the receiving device via a transmission path. In parallel with the transmission of the first video data, a video data recording unit for recording the second video data on a recording medium, and one partial section in the first video data. The specifying unit to be specified and the video data of the partial section corresponding to the partial section specified by the specifying unit in the second video data are transmitted as one file to the receiving device. A second video data transmission unit that reproduces the file of the second video data in the partial section specified in the first video data when the first video data is reproduced. A program for functioning as a reproduction order information generation unit that generates order information and a reproduction order information transmission unit that transmits the generated reproduction order information to the receiving device.
JP2008143732A 2008-05-30 2008-05-30 Apparatus and method for video image transmission Pending JP2009290790A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008143732A JP2009290790A (en) 2008-05-30 2008-05-30 Apparatus and method for video image transmission

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008143732A JP2009290790A (en) 2008-05-30 2008-05-30 Apparatus and method for video image transmission

Publications (1)

Publication Number Publication Date
JP2009290790A true JP2009290790A (en) 2009-12-10

Family

ID=41459482

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008143732A Pending JP2009290790A (en) 2008-05-30 2008-05-30 Apparatus and method for video image transmission

Country Status (1)

Country Link
JP (1) JP2009290790A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015056826A (en) * 2013-09-13 2015-03-23 株式会社Jvcケンウッド Recording device and recording method
WO2021157381A1 (en) * 2020-02-07 2021-08-12 ソニーグループ株式会社 Information processing device, information processing method, and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015056826A (en) * 2013-09-13 2015-03-23 株式会社Jvcケンウッド Recording device and recording method
WO2021157381A1 (en) * 2020-02-07 2021-08-12 ソニーグループ株式会社 Information processing device, information processing method, and program

Similar Documents

Publication Publication Date Title
JP2009038649A (en) Signal processing circuit and imaging apparatus
JP2010034763A (en) Recording device and method, reproducing device and method, and program
US20120194691A1 (en) Imaging apparatus
US20100129047A1 (en) Television broadcast receiving device
JP2010074323A (en) Recording apparatus and method, and recording and playback apparatus and method
US9350935B2 (en) Moving image data recording apparatus
JP5082973B2 (en) Video recording system and imaging apparatus
US20080111892A1 (en) Image device and still image capturing method thereof
US9565360B2 (en) Image data recording apparatus capable of recording still and moving images simultaneously
US20130202272A1 (en) Recording apparatus, recording method, and recording system
JP2010154006A (en) Program for progressive download reproduction
US20100061700A1 (en) Data processing apparatus and data processing method, and computer program
JP2009290790A (en) Apparatus and method for video image transmission
JP4946935B2 (en) Imaging device
US8948573B2 (en) Image processing apparatus
JP2010011287A (en) Image transmission method and terminal device
US9225931B2 (en) Moving image data recording apparatus
JP2005303336A (en) Video signal recording apparatus and video signal reproducing apparatus
US20100129049A1 (en) Editing apparatus, control method of the editing apparatus, and image pickup apparatus
JP2005318180A (en) Hard disk recorder and video recording apparatus
US9595292B2 (en) Image processing apparatus
JP2005277585A (en) Viewing system, control method thereof, viewing device, control method therefor control program and storage medium
US20120020639A1 (en) Image processing apparatus and image pickup apparatus using the image processing appratus
JP2005117447A (en) Animation recording device, animation recording method and animation recording program
JP2004140685A (en) Information recorder, information reproducer, information recording program, information reproducing program, recording medium and information recording medium