JP2016184878A - Signal processing device and signal processing method - Google Patents
Signal processing device and signal processing method Download PDFInfo
- Publication number
- JP2016184878A JP2016184878A JP2015064725A JP2015064725A JP2016184878A JP 2016184878 A JP2016184878 A JP 2016184878A JP 2015064725 A JP2015064725 A JP 2015064725A JP 2015064725 A JP2015064725 A JP 2015064725A JP 2016184878 A JP2016184878 A JP 2016184878A
- Authority
- JP
- Japan
- Prior art keywords
- video signal
- frame
- thinned
- signal
- synchronization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は信号処理装置及び信号処理方法に関し、特に、複数の処理回路により映像信号を処理する装置に関する。 The present invention relates to a signal processing apparatus and a signal processing method, and more particularly to an apparatus for processing a video signal by a plurality of processing circuits.
従来、動画を撮影して記録するカメラが知られている。また、カメラでは、撮影した動画をメモリカードなどの記録媒体に記録するだけでなく、ＳＤＩやＨＤＭＩ（登録商標）等の伝送路を介して外部の表示装置や記録装置に出力する機能や、内蔵の液晶パネル等の表示部に表示する機能を備えている。
ところで、撮影した動画を外部の表示装置や記録装置に出力するカメラにおいては、出力先により扱う動画の形式が異なるので、それぞれの出力先に適した形式に動画を変換して出力する必要がある。
Conventionally, a camera that captures and records a moving image is known. The camera not only records the captured video on a recording medium such as a memory card, but also has a function of outputting to an external display device or recording device via a transmission path such as SDI or HDMI (registered trademark) It has a function of displaying on a display unit such as a liquid crystal panel.
By the way, in a camera that outputs a captured video to an external display device or recording device, the format of the video to be handled differs depending on the output destination. Therefore, it is necessary to convert and output the video to a format suitable for each output destination. .
また、近年では、撮影される動画のフレームレートとして様々な値を設定可能なカメラも登場している。また、動画を記録媒体に記録しながら、外部の装置に出力する装置も提案されている（特許文献１参照）。 In recent years, cameras that can set various values as the frame rate of a moving image to be photographed have appeared. There has also been proposed a device that outputs a moving image to an external device while recording it on a recording medium (see Patent Document 1).
近年では、カメラで扱う動画の画面サイズ（画素数）やフレームレートが高くなっている。そのため、複数の信号処理ＬＳＩを備え、各ＬＳＩにより表示用、記録用、外部出力用の動画処理することが考えられる。 In recent years, the screen size (number of pixels) and frame rate of moving images handled by a camera have increased. For this reason, it is conceivable to provide a plurality of signal processing LSIs, and to perform moving image processing for display, recording and external output by each LSI.
このように複数の処理回路により並列に動画を生成し、記録と外部出力とを行う場合、それぞれの処理回路は独立した同期信号で処理を行うことになる。また、撮影された動画のフレームレートが、出力先に適したフレームレートよりも高い場合には、一部のフレームを間引いて出力する必要がある。 In this way, when moving images are generated in parallel by a plurality of processing circuits and recording and external output are performed, each processing circuit performs processing with independent synchronization signals. In addition, when the frame rate of the captured moving image is higher than the frame rate suitable for the output destination, it is necessary to thin out some frames for output.
しかしながら、複数の処理回路で独立に間引くフレームを決めた場合、間引かれるフレームの位置が互いに異なってしまうことがある。
本発明は前述の問題点に鑑み、複数の処理回路でそれぞれフレームを間引いてフレームを出力する際に、複数の映像信号出力で同じフレームが間引かれるようにすることを目的とする。
However, when frames to be thinned out independently are determined by a plurality of processing circuits, the positions of the thinned frames may be different from each other.
In view of the above-described problems, an object of the present invention is to thin out the same frame by outputting a plurality of video signals when outputting a frame by thinning out a frame by a plurality of processing circuits.
本発明の信号処理装置は、任意の映像同期信号を生成する同期信号生成手段と、前記同期信号生成手段により生成された同期信号に同期した映像信号を出力する映像信号出力手段と、前記映像信号出力手段により出力された映像信号に対し補正を施して出力する複数のカメラ信号処理手段と、前記カメラ信号処理手段により出力された映像信号を符号化して出力する複数の符号化手段と、前記同期信号生成手段により生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する複数の間引きフレーム算出手段と、前記映像信号出力手段、前記カメラ信号処理手段、及び前記符号化手段に対して前記間引きフレーム算出手段により算出されたフレーム情報を伝える通信手段とを備え、前記映像信号出力手段、前記カメラ信号処理手段、及び前記符号化手段の何れかにおいて、前記間引きフレーム算出手段により決められたフレームを間引くことを特徴とする。 The signal processing apparatus according to the present invention includes a synchronization signal generation unit that generates an arbitrary video synchronization signal, a video signal output unit that outputs a video signal synchronized with the synchronization signal generated by the synchronization signal generation unit, and the video signal. A plurality of camera signal processing means for correcting and outputting the video signal output by the output means; a plurality of encoding means for encoding and outputting the video signal output by the camera signal processing means; and the synchronization A plurality of thinned frame calculating means for calculating frames to be thinned out from other synchronizing signals with reference to an arbitrary synchronizing signal among the synchronizing signals generated by the signal generating means, the video signal output means, the camera signal processing means, And a communication means for transmitting the frame information calculated by the thinned frame calculation means to the encoding means, and the video signal Force means, the camera signal processing unit, and in any of the encoding means, characterized in that thinning out frames determined by the frame decimation calculation means.
本発明によれば、異なる同期信号を基準とした複数の映像信号が入力される信号処理装置において、複数の映像信号出力で同じフレームが間引かれるようにすることができる。 According to the present invention, in a signal processing apparatus to which a plurality of video signals based on different synchronization signals are input, the same frame can be thinned out by a plurality of video signal outputs.
＜共通の形態＞
本発明の実施形態では、異なる同期信号を基準とした複数の映像信号が入力され、複数の処理回路により映像信号を処理する信号処理回路について説明する。以下は、本発明における全ての実施形態に共通となる信号処理装置の構成の説明である。
<Common form>
In the embodiment of the present invention, a signal processing circuit will be described in which a plurality of video signals based on different synchronization signals are input and the video signals are processed by a plurality of processing circuits. The following is a description of the configuration of the signal processing apparatus that is common to all the embodiments of the present invention.
図１は、複数の信号処理回路により映像信号を並列に処理する信号処理装置１００の基本構成例を示すブロック図である。
図１の信号処理装置１００は、信号入出力処理部１０２、映像同期信号生成処理部１０８、信号処理部１１０、信号処理部１２０を有する。
FIG. 1 is a block diagram showing a basic configuration example of a
The
映像同期信号生成処理部１０８は、任意の映像同期信号を複数生成する。
信号入出力処理部１０２は、撮像素子１０１から出力される映像信号を入力する映像信号入力処理を行い、撮像素子１０１からの映像信号を異なる同期で複数の映像信号を出力する映像信号出力処理を行う。かつ外部機器への出力も行うことができる。信号入出力処理部１０２は、入力される同期信号の中から、最も周期の短い同期信号で、映像信号が入力されるよう撮像素子１０１を制御する撮像素子制御処理を行う。
The video synchronization signal
The signal input /
信号処理部１１０、信号処理部１２０は、それぞれカメラ信号処理部１０３及びカメラ信号処理部１１３、符号化ユニット１０４及び符号化ユニット１１４、ドライブユニット１０５及びドライブユニット１１５を有する。
カメラ信号処理部１０３及びカメラ信号処理部１１３は、映像信号の補正や現像を行う。符号化ユニット１０４及び符号化ユニット１１４は、映像信号に音声データを重畳させて、所定の記録フォーマットの動画データに変換する。ドライブユニット１０５及びドライブユニット１１５は、動画像データをメモリカードなどの記録メディア１０６、１１６に記録する。モニタ出力１０７、１１７は、外部機器出力装置である。
信号処理部１１０と信号処理部１２０は、それぞれ一つのＬＳＩ（半導体集積回路）として構成される。
The
The camera
The
以下、図１の構成の信号処理装置１００の記録時の構成について説明する。
図１において、撮像素子１０１に入射した光は光電変換され、映像同期信号生成処理部１０８により生成された同期信号に従い、信号入出力処理部１０２において信号のサンプリングとディジタルデータへの変換が行われる。変換されたディジタルデータは、カメラ信号処理部１０３及びカメラ信号処理部１１３へ入力される。カメラ信号処理部１０３とカメラ信号処理部１１３は、互いに情報の授受を行うための通信部（図示せず）を有している。撮像素子１０１の操作はカメラ信号処理部１０３で行う。
Hereinafter, the recording configuration of the
In FIG. 1, light incident on the
カメラ信号処理部１０３及びカメラ信号処理部１１３において処理された映像信号は、符号化ユニット１０４及び符号化ユニット１１４により、音声データを重畳させて、所定の記録フォーマットの動画データに変換される。変換された動画データは、ドライブユニット１０５及びドライブユニット１１５によって、記録メディア１０６及び記録メディア１１６にそれぞれ供給され、記録される。
もしくは、変換された動画データは、信号入出力処理部１０２に入力され、必要に応じて出力フォーマット変換をされてから、モニタ出力１０７および１１７へ出力される。なお、この出力先はモニタであっても外部記録装置であってもよい。
The video signals processed by the camera
Alternatively, the converted moving image data is input to the signal input /
なお、本構成では映像信号は２つのパスで処理されている。図１の上半分の構成要素番号１０３〜１０７のパスは処理できるフレームレートの上限を６０フレーム毎秒（ｆｐｓ）としており、下半分の構成要素番号１１３〜１１７のパスはフレームレートの上限を１２０ｆｐｓとしている。
In this configuration, the video signal is processed in two passes. The upper half of the
＜第１の実施形態＞
以下では、図２、図３、図４及び図５を参照しながら第１の実施の形態について説明する。
<First Embodiment>
The first embodiment will be described below with reference to FIGS. 2, 3, 4 and 5. FIG.
図２は、撮像素子１０１より入力される７４ｆｐｓの映像信号を、６０ｆｐｓで出力する処理と、７４ｆｐｓで出力する処理が混在した信号処理装置１００の構成例を説明するブロック図である。
図２は、フレームレートを７４ｆｐｓから６０ｆｐｓに切り替える事例を元に、この構成で発生する課題を図示したものである。
図２において、図１と同じ機能構成のブロックについては、図１と同じ符号を付している。
この時、７４ｆｐｓの映像信号は撮像素子１０１から１番目のフレームより信号入出力処理部１０２へ入力される。
信号入出力処理部１０２は、カメラ信号処理部１０３への出力とカメラ信号処理部１１３への出力の２系統の出力を保有している。
FIG. 2 is a block diagram illustrating a configuration example of the
FIG. 2 illustrates problems that occur in this configuration based on an example of switching the frame rate from 74 fps to 60 fps.
2, blocks having the same functional configuration as those in FIG. 1 are denoted by the same reference numerals as those in FIG.
At this time, the 74 fps video signal is input from the
The signal input /
信号処理装置１００では、信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜ドライブユニット２０５〜記録メディア２０６への第１の映像信号パスは、上限フレームレートを６０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜信号入出力処理部１０２〜モニタ出力１０７への第２の映像信号パスも上限フレームレートを６０ｆｐｓとしている。
In the
The second video signal path from the signal input /
信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜ドライブユニット１１５〜記録メディア１１６への第３の映像信号パスは、上限フレームレートを１２０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜モニタ出力１１７への第４の映像信号パスの上限フレームレートは６０ｆｐｓとしている。
したがって、撮像素子１０１より入力される７４ｆｐｓの映像信号は、第１の映像信号パス、第２の映像信号パス及び第４の映像信号パスでは１秒あたり１４フレームを間引いて６０ｆｐｓの映像信号として出力する必要がある。第３の映像信号パスではそのまま間引きせずに出力される。
The third video signal path from the signal input /
The upper limit frame rate of the fourth video signal path from the signal input /
Therefore, the 74 fps video signal input from the
この時、第１の映像信号パス及び第２の映像信号パスでは、信号入出力処理部１０２においてフレーム間引きを行う。間引きフレームの計算は信号入出力処理部１０２の内部において予め定められたアルゴリズム、或いはテーブルで行っており、最初に間引くフレームが６番目のフレームとなっている。
At this time, in the first video signal path and the second video signal path, the signal input /
第４の映像信号パスでも同様にフレーム間引きを行うが、間引きフレームの計算を異なる予め定められたアルゴリズム、或いはテーブルにより符号化ユニット１１４で行っており、こちらでは最初に間引くフレームが５番目のフレームとなっている。
Similarly, the fourth video signal path performs frame decimation, but the decimation frame is calculated by the
このため、第１の映像信号パスにより記録メディア１０６に保存された映像信号と、第４の映像信号パスによりモニタ出力１１７から出力されて外部記録機器に記録された映像信号では、間引かれたフレームが異なることになる。この時、前者がＰｒｏｘｙ記録であると、正しい編集結果を後者の映像信号に反映することができなくなってしまい、最適なポストプロダクションが行えなくなる。
Therefore, the video signal stored in the
本発明の実施形態において、この問題点を解決するため、図３に示す構成の信号処理装置を用いる。
図３に示す信号処理装置３００の構成は、１０１〜１０８、１１３〜１１７までは図１で説明した信号処理装置１００と同じである。信号処理装置３００においては、間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９が設けられている。
また、カメラ信号処理部１０３、符号化ユニット１０４、ドライブユニット１０５及び間引きフレーム算出処理部３０９は信号処理部３３０に含まれる。カメラ信号処理部１１３、符号化ユニット１１４、ドライブユニット１１５及び間引きフレーム算出処理部３１９は信号処理部３４０に含まれる。
また、信号処理部３３０と、信号処理部３４０はそれぞれ、一つのＬＳＩ（半導体集積回路）として構成される。
In the embodiment of the present invention, in order to solve this problem, a signal processing apparatus having the configuration shown in FIG. 3 is used.
The configuration of the
The camera
The
このように構成された本実施形態の信号処理装置３００の処理手順を、図４に示すフローチャートに従い説明する。
起動直後には、Ｓ４０１において、間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９は、映像同期信号生成処理部１０８により生成された映像同期信号で、信号入出力処理部１０２で使用されている、全同期信号周波数を取得する。
Ｓ４０２において、間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９は、全同期信号周波数の中で最も周期の長い周波数値Ｆａを取得する。また、基準とする同期信号の周波数を取得する基準周波数取得処理を行う。
Ｓ４０３では、信号入出力処理部１０２は、その他の周波数値Ｆｎ（Ｆ１〜Ｆｍａｘ）を取得して保存する。
A processing procedure of the
Immediately after activation, in S401, the thinned frame
In S402, the decimation frame
In S403, the signal input /
Ｓ４０４〜Ｓ４０７では、それぞれの周波数毎にＳ４０６の処理を繰り返し行う。
まず、Ｓ４０４では、ｎに初期値１を設定する処理（ｎ＝１）を行う。
Ｓ４０５では、Ｆｎが存在するか否かを判断し、存在する場合にはＳ４０６に移行する。
In S404 to S407, the process of S406 is repeated for each frequency.
First, in S404, a process of setting an
In S405, it is determined whether or not Fn exists. If it exists, the process proceeds to S406.
Ｓ４０６では、間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９は、周波数値Ｆｎと全同期信号周波数の中で最も周期の長い周波数値Ｆａとの差分値で任意の周波数Ｆｎを除算することにより間引きフレーム周期算出処理を行う。すなわち、間引きフレーム周期Ｔｎを、Ｔｎ＝Ｆｎ／（Ｆｎ−Ｆａ）により算出する。この際、小数点以下は切り上げる。
Ｓ４０７では、ｎを１つインクリメントする処理（ｎ＝ｎ＋１）を行い、その後、Ｓ４０５に戻る。
全ての周波数Ｆｎにおいて、対応するＴｎを算出する処理を完了したらＳ４０８に移行する。
In S406, the decimation frame
In S407, a process of incrementing n by 1 (n = n + 1) is performed, and then the process returns to S405.
When the process of calculating the corresponding Tn is completed for all the frequencies Fn, the process proceeds to S408.
Ｓ４０８において、間引きフレーム算出処理部３０９は、全てのＴｎ情報を信号入出力処理部１０２とカメラ信号処理部１０３と符号化ユニット１０４に対して通知する。また、間引きフレーム算出処理部３１９は、全てのＴｎ情報を信号入出力処理部１０２とカメラ信号処理部１１３と符号化ユニット１１４に対して通知する。
In step S <b> 408, the thinned frame
次に、各映像信号パスの動作について説明する。
Ｓ４１１において、各映像信号パス（信号入出力処理部１０２及びカメラ信号処理部１０３及びカメラ信号処理部１１３及び符号化ユニット１０４及び符号化ユニット１１４）では、現在の動作信号周期に該当する前述の間引きフレーム周期Ｔｎ値を取得する。
それぞれの処理では、Ｓ４１２において、現行処理しているフレーム番号ＦＲｎを取得する。
Next, the operation of each video signal path will be described.
In S411, each video signal path (the signal input /
In each process, the currently processed frame number FRn is acquired in S412.
Ｓ４１３〜Ｓ４１６において、Ｔｎを１から始まる整数値を乗算して小数点以下を切り上げた値と、ＦＲｎを順次比較する。
まず、Ｓ４１３では、ｎに初期値１を設定する処理（ｎ＝１）を行う。
Ｓ４１４では、Ｔｎを１から始まる整数値を乗算して小数点以下を切り上げた値が、ＦＲｎよりも小さいか否か判断する。小さい場合はＳ４１５へ進む。
In S413 to S416, FRn is sequentially compared with a value obtained by multiplying Tn by an integer value starting from 1 and rounding up after the decimal point.
First, in S413, a process of setting an
In S414, it is determined whether or not a value obtained by multiplying Tn by an integer value starting from 1 and rounding up after the decimal point is smaller than FRn. If it is smaller, the process proceeds to S415.
Ｓ４１５において、Ｔｎを１から始まる整数値を乗算して小数点以下を切り上げた値がＦＲｎと同じであるかどうかを判断する。比較結果が等しい場合は、Ｓ４１７へ進む。
Ｓ４１７においては、そのフレームの出力は行わない。
Ｓ４１５において、同じでない場合はＳ４１６に進んで、ｎを１つインクリメントする処理（ｎ＝ｎ＋１）を行い、その後、Ｓ４１４に戻り、比較処理を再開する。
In S415, it is determined whether the value obtained by multiplying Tn by an integer value starting from 1 and rounding up after the decimal point is the same as FRn. If the comparison results are equal, the process proceeds to S417.
In S417, the frame is not output.
If it is not the same in S415, the process proceeds to S416, where n is incremented by 1 (n = n + 1), and then the process returns to S414 to restart the comparison process.
一方、Ｓ４１４において、Ｔｎを整数倍して小数点以下を切り上げた値がＦＲｎより大きい場合は、間引き対象ではないと判断し、Ｓ４１８へ進み、そのフレームの出力を行う。 On the other hand, if the value obtained by multiplying Tn by an integer and rounding up the fractional part is larger than FRn in S414, it is determined that the object is not a thinning target, and the process proceeds to S418 to output the frame.
以上の操作による結果を図５に示す。
図５において、７４ｆｐｓのフレームレートに同期した映像信号は、撮像素子１０１から１番目のフレームより信号入出力処理部１０２へ入力される。
信号入出力処理部１０２は、カメラ信号処理部１０３への出力と、カメラ信号処理部１１３への出力の２系統の出力を保有している。
The result of the above operation is shown in FIG.
In FIG. 5, a video signal synchronized with a frame rate of 74 fps is input from the
The signal input /
本実施形態の信号処理装置３００では、信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜ドライブユニット１０５〜記録メディア１０６への第５の映像信号パスは、上限フレームレートは６０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜信号入出力処理部１０２〜モニタ出力１０７への第６の映像信号パスも上限フレームレートを６０ｆｐｓとしている。
In the
The sixth video signal path from the signal input /
一方、信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜ドライブユニット１１５〜記録メディア１１６への第７の映像信号パスは、上限フレームレートを１２０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜信号入出力処理部１０２〜モニタ出力１１７への第８の映像信号パスの上限フレームレートは６０ｆｐｓとしている。
On the other hand, the seventh video signal path from the signal input /
The upper limit frame rate of the eighth video signal path from the signal input /
間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９は、６０ｆｐｓの映像信号に対する７４ｆｐｓの映像信号が間引くフレーム周期を計算し、７４／（７４−６０）≒５．２８Ｆｒａｍｅの値を算出する。この値により、各処理で間引かれる対象のフレーム番号は前述のように、５．２８の倍数を切り上げたフレーム番号は、６、１１、１６、２２、２７・・・のようになる。
間引きフレーム算出処理部３０９は、この間引くフレーム周期５．２８を、信号入出力処理部１０２、カメラ信号処理部１０３及び符号化ユニット１０４に対して通知する。
間引きフレーム算出処理部３１９は、間引くフレーム周期５．２８を、信号入出力処理部１０２、カメラ信号処理部１１３及び符号化ユニット１１４に対して通知する。
The decimation frame
The thinned frame
The thinned frame
ここで、信号入出力処理部１０２、カメラ信号処理部１０３、符号化ユニット１０４、カメラ信号処理部１１３及び符号化ユニット１１４の各処理部は、入力された映像信号から通知された間引くフレーム周期５．２８に従い、間引き処理を行う。例えば、図５にあるように６番目のフレームを処理する時、第５の映像信号パス及び第６の映像信号パスでは、カメラ信号処理部１０３において５．２８を切り上げたフレーム６が間引き対象となる。このため、６番目のフレームは符号化ユニット１０４へは出力されない。
Here, each of the signal input /
また、第８の映像信号パスでも、符号化ユニット１１４において、フレーム６が間引き対象となるため、同様に６番目のフレームはモニタ出力１１７へは出力されない。
各映像パスにおいて、間引かれるフレームが同じとなるような処理を行うことが可能となる。
Also, in the eighth video signal path, since the
In each video path, it is possible to perform processing such that the thinned frames are the same.
＜第２の実施形態＞
第１の実施形態において、間引きフレーム算出処理部３０９及び間引きフレーム算出処理部３１９では、間引くフレーム周期を計算により取得していた。
第２の実施形態においては、予め間引かれるフレームをテーブルデータとして保有する。テーブルデータから取得された間引くフレーム周期をそれぞれ、信号入出力処理部１０２とカメラ信号処理部１０３と符号化ユニット１０４、及び信号入出力処理部１０２とカメラ信号処理部１１３と符号化ユニット１１４に対して通知する処理であってもよい。
<Second Embodiment>
In the first embodiment, the thinned frame
In the second embodiment, frames that are thinned out in advance are stored as table data. The thinned-out frame periods acquired from the table data are respectively obtained for the signal input /
＜第３の実施形態＞
第３の実施形態において各構成部の間で行なわれる通信を説明する。
例えば、間引きフレーム算出処理部３０９と信号入出力処理部１０２、カメラ信号処理部１０３と符号化ユニット１０４の間での通信は、Ｉ２ＣやＵＡＲＴのような他のシリアル通信であってもよい。
同様に、間引きフレーム算出処理部３１９と信号入出力処理部１０２、カメラ信号処理部１１３と符号化ユニット１１４の間での通信は、Ｉ２ＣやＵＡＲＴのような他のシリアル通信で接続して行う通信であってもよい。
または、バスアクセスできるのならばお互いのメモリを直接バス経由で更新してもよい。本実施形態においては、信号入出力処理部、カメラ信号処理部及び符号化ユニットとの間でデータを授受する。
更に、無線通信や有線ＬＡＮ通信が利用可能な構成であればそれらを使用してもよい。
<Third Embodiment>
Communication performed between the components in the third embodiment will be described.
For example, the communication between the thinned frame
Similarly, communication between the thinned frame
Alternatively, if the bus can be accessed, the memories of each other may be updated directly via the bus. In this embodiment, data is exchanged among the signal input / output processing unit, the camera signal processing unit, and the encoding unit.
Furthermore, any configuration that can use wireless communication or wired LAN communication may be used.
＜第４の実施形態＞
次に、図６〜図８を参照しながら第４の実施形態を説明する。
図６において、１０１〜１０８、１１３〜１１７までは、図１の１０１〜１０８、１１３〜１１７と同じである。本実施形態においては、間引きフレーム算出処理部６０９、間引きフレーム情報保存処理部６１０、間引きフレーム情報読出処理部６１１、間引きフレーム情報読出処理部６２１が設けられている。
<Fourth Embodiment>
Next, a fourth embodiment will be described with reference to FIGS.
In FIG. 6, 101 to 108 and 113 to 117 are the same as 101 to 108 and 113 to 117 in FIG. In this embodiment, a thinned frame
また、カメラ信号処理部１０３、符号化ユニット１０４、ドライブ ユニット１０５及び間引きフレーム情報読出処理部６１１は、信号処理部６３０に含まれる。
カメラ信号処理部１１３、符号化ユニット１１４、ドライブユニット１１５及び間引きフレーム情報読出処理部６２１は、信号処理部６４０に含まれる。
信号処理部６３０と信号処理部６４０はそれぞれ、一つのＬＳＩ（半導体集積回路）として構成される。
The camera
The camera
Each of the
このように構成された本実施形態の信号処理装置６００の処理手順を、図７のフローチャートを参照しながら説明する。
起動直後には、Ｓ７０１において、間引きフレーム算出処理部６０９は、映像同期信号生成処理部１０８により生成された同期信号で、信号入出力処理部１０２で使用されている、全同期信号周波数を取得する。
Ｓ７０２において、間引きフレーム算出処理部６０９は、全同期信号周波数の中で最も周期の長い周波数値Ｆａを取得する。
A processing procedure of the
Immediately after the activation, in S701, the thinned frame
In step S <b> 702, the thinned frame
Ｓ７０３では、信号入出力処理部１０２は、その他の周波数値Ｆｎ（Ｆ１〜Ｆｍａｘ）を取得して保存する。
Ｓ７０４〜Ｓ７０７では、それぞれの周波数毎にＳ７０６の処理を繰り返し行う。
まず、Ｓ７０４では、ｎに初期値１を設定する処理（ｎ＝１）を行う。
Ｓ７０５では、Ｆｎが存在するか否かを判断し、存在する場合にはＳ７０６に移行する。
In S703, the signal input /
In S704 to S707, the process of S706 is repeated for each frequency.
First, in S704, processing for setting an
In S705, it is determined whether or not Fn exists. If it exists, the process proceeds to S706.
Ｓ７０６では、間引きフレーム算出処理部６０９は、間引きフレーム周期Ｔｎを、Ｔｎ＝Ｆｎ／（Ｆｎ−Ｆａ）により算出する。この際、小数点以下は切り上げる。
Ｓ７０７では、ｎを１つインクリメントする処理（ｎ＝ｎ＋１）を行い、その後、Ｓ７０５に戻る。
全ての周波数Ｆｎにおいて対応するＴｎを算出する処理を完了したらＳ７０８に移行する。
Ｓ７０８においては、間引きフレーム情報保存処理部６１０により全て間引きフレーム周期Ｔｎの情報を同じフレームに紐付けて保存するメタデータ保存処理、複合データ保存処理の何れか、或いは両方を用いて保存処理を行う。
In S706, the thinned frame
In S707, a process of incrementing n by 1 (n = n + 1) is performed, and then the process returns to S705.
When the process of calculating the corresponding Tn for all the frequencies Fn is completed, the process proceeds to S708.
In step S708, the thinning frame information
次に、各映像信号パスの動作について説明する。
Ｓ７１０では、間引きフレーム情報読出処理部６１１及び間引きフレーム情報読出処理部６２１により間引きフレーム周期情報を取得する。
Ｓ７１１において、各映像信号パス（信号入出力処理部１０２及び１０３カメラ信号処理部１０３及び符号化ユニット１０４及び符号化ユニット１１４）では、現在の動作信号周期に該当する前述の間引きフレーム周期Ｔｎ値を取得する。
それぞれの処理では、Ｓ７１２において、現行処理しているフレーム番号ＦＲｎを取得する。
Next, the operation of each video signal path will be described.
In S710, the thinned frame information read
In S711, each video signal path (the signal input /
In each process, in S712, the currently processed frame number FRn is acquired.
Ｓ７１３〜Ｓ７１８で行なわれる処理は、図４のフローチャートのＳ４１３〜Ｓ４１８において説明した処理と同様である。
Ｓ７１３〜Ｓ７１６において、Ｔｎを１から始まる整数値を乗算して小数点以下を切り上げた値とＦＲｎを順次比較する。比較結果が等しい場合は、Ｓ７１７において、そのフレームの出力は行わない。Ｔｎを整数倍して小数点以下を切り上げた値の方がＦＲｎより大きい場合は、間引き対象ではないと判断し、Ｓ７１８において、そのフレームの出力を行う。
また、Ｔｎを整数倍して小数点以下を切り上げた値の方がＦＲｎより小さい場合は、再度Ｓ７１４へ戻り比較処理を再開する。
The processing performed in S713 to S718 is the same as the processing described in S413 to S418 in the flowchart of FIG.
In S713 to S716, FRn is sequentially compared with a value obtained by multiplying Tn by an integer value starting from 1 and rounding up after the decimal point. If the comparison results are equal, the frame is not output in S717. If the value obtained by multiplying Tn by an integer and rounding up the fractional part is larger than FRn, it is determined that it is not a thinning target, and the frame is output in S718.
If the value obtained by multiplying Tn by an integer and rounding up the decimal part is smaller than FRn, the process returns to S714 again to restart the comparison process.
以上の操作による結果を、図８に示す。
図８において、７４ｆｐｓのフレームレートに同期した映像信号は、撮像素子１０１から１番目のフレームより信号入出力処理部１０２へ入力される。
信号入出力処理部１０２は、カメラ信号処理部１０３への出力とカメラ信号処理部１１３への出力の２系統の出力を保有している。
The result of the above operation is shown in FIG.
In FIG. 8, a video signal synchronized with a frame rate of 74 fps is input from the
The signal input /
本実施形態の信号処理装置６００では、信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜ドライブユニット１０５〜記録メディア１０６への第９の映像信号パスは、上限フレームレートは６０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１０３〜符号化ユニット１０４〜信号入出力処理部１０２〜モニタ出力１０７への第１０の映像信号パスも上限フレームレートを６０ｆｐｓとしている。
In the
The tenth video signal path from the signal input /
信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜ドライブユニット１１５〜記録メディア１１６への第１１の映像信号パスは上限フレームレートを１２０ｆｐｓとしている。
信号入出力処理部１０２〜カメラ信号処理部１１３〜符号化ユニット１１４〜信号入出力処理部１０２〜モニタ出力１１７への第１２の映像信号パスの上限フレームレートは６０ｆｐｓとしている。
The eleventh video signal path from the signal input /
The upper limit frame rate of the twelfth video signal path from the signal input /
間引きフレーム算出処理部６０９は、６０ｆｐｓの映像信号に対する７４ｆｐｓの映像信号を間引くフレーム周期を計算し、７４／（７４−６０）≒５．２８Ｆｒａｍｅの値を算出する。この値により、各処理で間引かれる対象のフレーム番号は、６、１１、１６、２２、２７・・・のようになる。間引きフレーム情報保存処理部６１０は、この間引くフレーム周期５．２８Ｆｒａｍｅをフレームに紐付けるため、メタデータに保存する。
The decimation frame
ここで、信号入出力処理部１０２、カメラ信号処理部１０３、符号化ユニット１０４、カメラ信号処理部１１３及び符号化ユニット１１４の各処理部は、メタデータから読み出された間引くフレーム周期の値である５．２８Ｆｒａｍｅに従い、間引き処理を行う。間引くフレーム情報は、間引きフレーム情報読出処理部６１１、間引きフレーム情報読出処理部６２１により読み出す。
例えば、図８にあるように、６番目のフレームを処理する時、第９の映像信号パス及び第１０の映像信号パスでは、カメラ信号処理部１０３において５．２８を切り上げたフレーム６が間引き対象となる。このため、６番目のフレームは符号化ユニット１０４へは出力されない。
また、第１２の映像信号パスでも、符号化ユニット１１４において、フレーム６が間引き対象となるため、同様に６番目のフレームはモニタ出力１１７へは出力されない。
以上のように、各映像パスにおいて間引かれるフレームが同じとなるような処理を行うことが可能となる。
Here, each processing unit of the signal input /
For example, as shown in FIG. 8, when the sixth frame is processed, in the ninth video signal path and the tenth video signal path, the
Also in the twelfth video signal path, since the
As described above, it is possible to perform processing such that the frames to be thinned out in each video path are the same.
また、記録データに間引きフレーム情報が残される。このことから、第１１の映像信号パスにより７４ｆｐｓで記録メディア１１６に記録された映像データの再生時に、第９の映像信号パスで記録されたＰｒｏｘｙ映像信号データの再生と同じフレームを再生できるように、後から間引いて再生することも可能となる。
Further, thinned frame information is left in the recording data. Therefore, when reproducing the video data recorded on the
＜第５の実施形態＞
第４の実施形態において、間引きフレーム算出処理部６０９では、間引くフレーム周期を計算により取得していた。
第５の実施形態においては、予め間引かれるフレームをテーブルデータとして保有し、テーブルデータから取得された間引くフレーム周期を信号入出力処理部１０２に対して通知する処理であってもよい。
<Fifth Embodiment>
In the fourth embodiment, the thinned frame
In the fifth embodiment, a process may be used in which frames to be thinned out in advance are stored as table data, and the signal input /
＜第６の実施形態＞
第４の実施形態において、間引くフレーム情報を対応するフレームと関連付けて同じ映像信号に保存するようにした。本実施形態においては、本信号処理装置が内蔵メモリを別途保有する場合には、間引きフレーム情報保存処理部６１０、間引きフレーム情報読出処理部６１１及び間引きフレーム情報読出処理部６２１はメタデータに保存しないようにする。この場合、フレーム毎に間引くフレーム周期の情報をリスト化したデータとして映像信号とは別に保存する複合データ保存処理を行い、必要に応じて読み出して間引きに利用する形式であってもよい。
<Sixth Embodiment>
In the fourth embodiment, the thinned frame information is stored in the same video signal in association with the corresponding frame. In this embodiment, when the signal processing apparatus has a built-in memory separately, the thinned frame information
（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
(Other examples)
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.
１０１ 撮像素子
１０２ 信号入出力処理部
１０３ カメラ信号処理部
１０４ 符号化ユニット
１０５ ドライブユニット
１０６ 記録メディア
１１３ カメラ信号処理部
１１４ 符号化ユニット
１１５ ドライブユニット
１１６ 記録メディア
３００ 信号処理装置
３０７ モニタ出力
３０８ 映像同期信号生成処理部
３０９ 間引きフレーム算出処理部
３１７ モニタ出力
３１９ 間引きフレーム算出処理部
３３０ 信号処理部
３４０ 信号処理部
DESCRIPTION OF
Claims (12)
前記同期信号生成手段により生成された同期信号に同期した映像信号を出力する映像信号出力手段と、
前記映像信号出力手段により出力された映像信号に対し補正を施して出力する複数のカメラ信号処理手段と、
前記カメラ信号処理手段により出力された映像信号を符号化して出力する複数の符号化手段と、
前記同期信号生成手段により生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する複数の間引きフレーム算出手段と、
前記映像信号出力手段、前記カメラ信号処理手段、及び前記符号化手段に対して前記間引きフレーム算出手段により算出されたフレーム情報を伝える通信手段と、
を備え、
前記映像信号出力手段、前記カメラ信号処理手段、及び前記符号化手段の何れかにおいて、前記間引きフレーム算出手段により決められたフレームを間引くことを特徴とする信号処理装置。 Synchronization signal generating means for generating an arbitrary video synchronization signal;
Video signal output means for outputting a video signal synchronized with the synchronization signal generated by the synchronization signal generation means;
A plurality of camera signal processing means for correcting and outputting the video signal output by the video signal output means;
A plurality of encoding means for encoding and outputting the video signal output by the camera signal processing means;
A plurality of thinned frame calculating means for calculating frames to be thinned out from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated by the synchronization signal generating means;
A communication means for transmitting frame information calculated by the thinned frame calculation means to the video signal output means, the camera signal processing means, and the encoding means;
With
A signal processing apparatus characterized in that, in any one of the video signal output means, the camera signal processing means, and the encoding means, a frame determined by the thinned frame calculating means is thinned out.
一つの撮像素子から出力される映像信号を入力できる映像信号入力手段と、
前記同期信号生成手段により生成される同期信号の中から、最も周期の短い同期信号で映像信号が前記映像信号出力手段に対して入力されるように前記撮像素子を制御する撮像素子制御手段と、
前記映像信号入力手段から入力される映像信号から、フレームを間引くことにより前記同期信号生成手段により生成される同期信号に従った映像信号を出力する間引き出力手段と、を備え、
前記同期信号生成手段により生成される同期信号のそれぞれに同期した映像信号を、前記間引き出力手段により出力することを特徴とする請求項１に記載の信号処理装置。 The video signal output means includes
Video signal input means capable of inputting a video signal output from one image sensor;
An image sensor control unit that controls the image sensor so that a video signal is input to the video signal output unit with a synchronization signal having the shortest cycle among the synchronization signals generated by the synchronization signal generation unit;
A decimation output unit that outputs a video signal in accordance with the synchronization signal generated by the synchronization signal generation unit by decimation of a frame from the video signal input from the video signal input unit;
2. The signal processing apparatus according to claim 1, wherein the video signal synchronized with each of the synchronization signals generated by the synchronization signal generation means is output by the thinning output means.
前記同期信号生成手段により生成された同期信号の中で基準とする同期信号の周波数値を取得する基準周波数取得手段と、
前記基準周波数取得手段により取得された周波数値Ｆａより大きい任意の周波数Ｆｎとの差分値で前記任意の周波数Ｆｎを除算することにより、間引かれるフレーム周期を算出する間引きフレーム周期算出手段と、
を備え、
前記任意の周波数Ｆｎに同期した映像信号から前記間引きフレーム周期算出手段により取得した周期の倍数に当たるフレームを間引かれるフレームとして算出することを特徴とする請求項１または２に記載の信号処理装置。 The decimation frame calculation means includes
Reference frequency acquisition means for acquiring a frequency value of a synchronization signal as a reference among the synchronization signals generated by the synchronization signal generation means;
A thinned-out frame period calculating unit that calculates a frame period to be thinned out by dividing the arbitrary frequency Fn by a difference value from an arbitrary frequency Fn larger than the frequency value Fa acquired by the reference frequency acquiring unit;
With
3. The signal processing apparatus according to claim 1, wherein a frame corresponding to a multiple of a period acquired by the thinned frame period calculating unit is calculated as a frame to be thinned out from the video signal synchronized with the arbitrary frequency Fn.
前記同期信号生成手段により生成された同期信号に同期した映像信号を出力する映像信号出力手段と、
前記映像信号出力手段により出力された映像信号に対し補正を施して出力する複数のカメラ信号処理手段と、
前記カメラ信号処理手段により出力された映像信号を符号化して出力する複数の符号化手段と、
前記同期信号生成手段により生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する間引きフレーム算出手段と、
前記間引きフレーム算出手段により算出された間引くフレーム情報を対応するフレームと関連付けて同じ映像信号に保存する間引きフレーム情報保存手段と、
前記間引きフレーム情報保存手段により保存された間引くフレーム情報をフレームから読み出す複数の間引きフレーム情報読出手段と、
を備え、
前記映像信号出力手段、前記カメラ信号処理手段、及び前記符号化手段の何れかにおいて、入力されたフレームから前記間引きフレーム情報読出手段で読み出した間引くフレーム情報によりフレームを間引くことを特徴とする信号処理装置。 Synchronization signal generating means for generating an arbitrary video synchronization signal;
Video signal output means for outputting a video signal synchronized with the synchronization signal generated by the synchronization signal generation means;
A plurality of camera signal processing means for correcting and outputting the video signal output by the video signal output means;
A plurality of encoding means for encoding and outputting the video signal output by the camera signal processing means;
Thinned frame calculation means for calculating a frame to be thinned out from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated by the synchronization signal generation means;
Thinned frame information storing means for storing the thinned frame information calculated by the thinned frame calculating means in the same video signal in association with the corresponding frame;
A plurality of thinned frame information reading means for reading out the thinned frame information stored by the thinned frame information storing means from a frame;
With
In any one of the video signal output means, the camera signal processing means, and the encoding means, signal processing is characterized in that frames are thinned out based on thinned frame information read out by the thinned frame information reading means from an input frame. apparatus.
一つの撮像素子から出力される映像信号を入力できる映像信号入力手段と、
前記同期信号生成手段により生成される同期信号の中から、最も周期の短い同期信号で映像信号が前記映像信号出力手段に対して入力されるように前記撮像素子を制御する撮像素子制御手段と、
前記映像信号入力手段から入力される映像信号から、フレームを間引くことにより前記同期信号生成手段により生成される同期信号に従った映像信号を出力する間引き出力手段と、を備え、
前記同期信号生成手段により生成される同期信号のそれぞれに同期した映像信号を、前記間引き出力手段により出力することを特徴とする請求項５に記載の信号処理装置。 The video signal output means includes
Video signal input means capable of inputting a video signal output from one image sensor;
An image sensor control unit that controls the image sensor so that a video signal is input to the video signal output unit with a synchronization signal having the shortest cycle among the synchronization signals generated by the synchronization signal generation unit;
A decimation output unit that outputs a video signal in accordance with the synchronization signal generated by the synchronization signal generation unit by decimation of a frame from the video signal input from the video signal input unit;
6. The signal processing apparatus according to claim 5, wherein a video signal synchronized with each of the synchronization signals generated by the synchronization signal generation means is output by the thinning output means.
前記同期信号生成手段により生成された同期信号の中で基準とする同期信号の周波数値を取得する基準周波数取得手段と、
前記基準周波数取得手段により取得された周波数値Ｆａより大きい任意の周波数Ｆｎとの差分値で前記任意の周波数Ｆｎを除算することにより間引かれるフレーム周期を算出する間引きフレーム周期算出手段と、
を備え、
前記任意の周波数Ｆｎに同期した映像信号から前記間引きフレーム周期算出手段により取得した周期の倍数に当たるフレームを間引かれるフレームとして算出することを特徴とする請求項５または６に記載の信号処理装置。 The decimation frame calculation means includes
Reference frequency acquisition means for acquiring a frequency value of a synchronization signal as a reference among the synchronization signals generated by the synchronization signal generation means;
Thinned frame period calculating means for calculating a frame period to be thinned out by dividing the arbitrary frequency Fn by a difference value with an arbitrary frequency Fn larger than the frequency value Fa acquired by the reference frequency acquiring means;
With
7. The signal processing apparatus according to claim 5, wherein a frame corresponding to a multiple of a period acquired by the thinned frame period calculating unit is calculated as a frame to be thinned out from the video signal synchronized with the arbitrary frequency Fn.
メタデータを利用して映像信号に紐付けて保存するメタデータ保存手段と、
映像データと共にフレーム情報と紐付けられたデータをそれぞれ保存する複合データ保存手段と、
を備え、
前記メタデータ保存手段、及び複合データ保存手段の何れか、或いは両方を用いて間引くフレーム情報を保存することを特徴とする請求項５〜７の何れか１項に記載の信号処理装置。 The thinned frame information storage means includes
Metadata storage means for storing the video signal in association with the metadata;
Composite data storage means for storing data associated with frame information together with video data,
With
The signal processing apparatus according to any one of claims 5 to 7, wherein the frame information to be thinned out is stored by using one or both of the metadata storage unit and the composite data storage unit.
前記同期信号生成工程において生成された同期信号に同期した映像信号を出力する映像信号出力工程と、
前記映像信号出力工程において出力された映像信号に対し補正を施して出力する複数のカメラ信号処理工程と、
前記カメラ信号処理工程において出力された映像信号を符号化して出力する複数の符号化工程と、
前記同期信号生成工程において生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する複数の間引きフレーム算出工程と、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程に対して前記間引きフレーム算出工程において算出されたフレーム情報を伝える通信工程と、
を備え、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程の何れかにおいて、前記間引きフレーム算出工程において決められたフレームを間引くことを特徴とする信号処理方法。 A sync signal generating step for generating an arbitrary video sync signal;
A video signal output step of outputting a video signal synchronized with the synchronization signal generated in the synchronization signal generation step;
A plurality of camera signal processing steps for correcting and outputting the video signal output in the video signal output step;
A plurality of encoding steps for encoding and outputting the video signal output in the camera signal processing step;
A plurality of decimation frame calculation steps for calculating frames to be decimation from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated in the synchronization signal generation step;
A communication step for transmitting frame information calculated in the thinned frame calculation step to the video signal output step, the camera signal processing step, and the encoding step;
With
A signal processing method comprising: thinning out frames determined in the thinned frame calculating step in any of the video signal output step, the camera signal processing step, and the encoding step.
前記同期信号生成工程において生成された同期信号に同期した映像信号を出力する映像信号出力工程と、
前記映像信号出力工程において出力された映像信号に対し補正を施して出力する複数のカメラ信号処理工程と、
前記カメラ信号処理工程において出力された映像信号を符号化して出力する複数の符号化工程と、
前記同期信号生成工程において生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する間引きフレーム算出工程と、
前記間引きフレーム算出工程において算出された間引くフレーム情報を対応するフレームと関連付けて同じ映像信号に保存する間引きフレーム情報保存工程と、
前記間引きフレーム情報保存工程において保存された間引くフレーム情報をフレームから読み出す複数の間引きフレーム情報読出工程と、
を備え、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程の何れかにおいて、入力されたフレームから前記間引きフレーム情報読出工程で読み出した間引くフレーム情報によりフレームを間引くことを特徴とする信号処理方法。 A sync signal generating step for generating an arbitrary video sync signal;
A video signal output step of outputting a video signal synchronized with the synchronization signal generated in the synchronization signal generation step;
A plurality of camera signal processing steps for correcting and outputting the video signal output in the video signal output step;
A plurality of encoding steps for encoding and outputting the video signal output in the camera signal processing step;
A decimation frame calculation step of calculating a frame to be decimation from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated in the synchronization signal generation step;
A thinned frame information storing step of storing the thinned frame information calculated in the thinned frame calculating step in the same video signal in association with the corresponding frame;
A plurality of thinned frame information reading steps for reading out the thinned frame information stored in the thinned frame information storing step from the frame;
With
Signal processing characterized in that, in any of the video signal output step, the camera signal processing step, and the encoding step, the frame is thinned out from the input frame by the thinned frame information read out in the thinned frame information reading step. Method.
前記同期信号生成工程において生成された同期信号に同期した映像信号を出力する映像信号出力工程と、
前記映像信号出力工程において出力された映像信号に対し補正を施して出力する複数のカメラ信号処理工程と、
前記カメラ信号処理工程において出力された映像信号を符号化して出力する複数の符号化工程と、
前記同期信号生成工程において生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する複数の間引きフレーム算出工程と、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程に対して前記間引きフレーム算出工程において算出されたフレーム情報を伝える通信工程とをコンピュータに実行させ、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程の何れかにおいて、前記間引きフレーム算出工程において決められたフレームを間引くようコンピュータを制御することを特徴とするプログラム。 A sync signal generating step for generating an arbitrary video sync signal;
A video signal output step of outputting a video signal synchronized with the synchronization signal generated in the synchronization signal generation step;
A plurality of camera signal processing steps for correcting and outputting the video signal output in the video signal output step;
A plurality of encoding steps for encoding and outputting the video signal output in the camera signal processing step;
A plurality of decimation frame calculation steps for calculating frames to be decimation from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated in the synchronization signal generation step;
Causing the computer to execute the video signal output step, the camera signal processing step, and the communication step for transmitting the frame information calculated in the thinned frame calculation step to the encoding step;
A program for controlling a computer to thin out frames determined in the thinned frame calculating step in any of the video signal output step, the camera signal processing step, and the encoding step.
前記同期信号生成工程において生成された同期信号に同期した映像信号を出力する映像信号出力工程と、
前記映像信号出力工程において出力された映像信号に対し補正を施して出力する複数のカメラ信号処理工程と、
前記カメラ信号処理工程において出力された映像信号を符号化して出力する複数の符号化工程と、
前記同期信号生成工程において生成された同期信号の中で任意の同期信号を基準として、その他の同期信号から間引くフレームを算出する間引きフレーム算出工程と、
前記間引きフレーム算出工程において算出された間引くフレーム情報を対応するフレームと関連付けて同じ映像信号に保存する間引きフレーム情報保存工程と、
前記間引きフレーム情報保存工程において保存された間引くフレーム情報をフレームから読み出す複数の間引きフレーム情報読出工程とをコンピュータに実行させ、
前記映像信号出力工程、前記カメラ信号処理工程、及び前記符号化工程の何れかにおいて、入力されたフレームから前記間引きフレーム情報読出工程で読み出した間引くフレーム情報によりフレームを間引くようコンピュータを制御することを特徴とするプログラム。 A sync signal generating step for generating an arbitrary video sync signal;
A video signal output step of outputting a video signal synchronized with the synchronization signal generated in the synchronization signal generation step;
A plurality of camera signal processing steps for correcting and outputting the video signal output in the video signal output step;
A plurality of encoding steps for encoding and outputting the video signal output in the camera signal processing step;
A decimation frame calculation step of calculating a frame to be decimation from other synchronization signals with reference to an arbitrary synchronization signal among the synchronization signals generated in the synchronization signal generation step;
A thinned frame information storing step of storing the thinned frame information calculated in the thinned frame calculating step in the same video signal in association with the corresponding frame;
Causing the computer to execute a plurality of thinned frame information reading steps for reading out the thinned frame information stored in the thinned frame information storing step from the frame;
In any one of the video signal output step, the camera signal processing step, and the encoding step, the computer is controlled to thin out a frame from the inputted frame by the thinned frame information read in the thinned frame information reading step. A featured program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015064725A JP2016184878A (en) | 2015-03-26 | 2015-03-26 | Signal processing device and signal processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015064725A JP2016184878A (en) | 2015-03-26 | 2015-03-26 | Signal processing device and signal processing method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2016184878A true JP2016184878A (en) | 2016-10-20 |
Family
ID=57241953
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015064725A Pending JP2016184878A (en) | 2015-03-26 | 2015-03-26 | Signal processing device and signal processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2016184878A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018156643A (en) * | 2017-03-02 | 2018-10-04 | ブラックマジック デザイン ピーティーワイ リミテッドＢｌａｃｋｍａｇｉｃ Ｄｅｓｉｇｎ Ｐｔｙ Ｌｔｄ | Camera storage system and method |
-
2015
- 2015-03-26 JP JP2015064725A patent/JP2016184878A/en active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018156643A (en) * | 2017-03-02 | 2018-10-04 | ブラックマジック デザイン ピーティーワイ リミテッドＢｌａｃｋｍａｇｉｃ Ｄｅｓｉｇｎ Ｐｔｙ Ｌｔｄ | Camera storage system and method |
| JP7215828B2 (en) | 2017-03-02 | 2023-01-31 | ブラックマジック デザイン ピーティーワイ リミテッド | Camera storage system and method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20190199890A1 (en) | Image capturing apparatus capable of time code synchronization, control method of the same, storage medium, and image capturing system | |
| US10187575B2 (en) | Image acquisition apparatus, method of controlling image acquisition apparatus, computer-readable recording medium non-transitorily storing control program of image acquisition apparatus, and image acquisition system | |
| JP2006238326A (en) | Camera device system and photographed moving image reproduction method | |
| KR102186383B1 (en) | Electronic device and method for processing image | |
| JP2015171042A (en) | Picture processing system and picture imaging apparatus | |
| JP2013165488A (en) | Image processing apparatus, image capturing apparatus, and program | |
| JP6056551B2 (en) | Image processing program and digital camera | |
| JP2014229929A (en) | Imaging device, and method and system of controlling the same | |
| JP2016184878A (en) | Signal processing device and signal processing method | |
| US8842193B2 (en) | Imaging apparatus | |
| CN112788198B (en) | Image capturing apparatus, image transfer system, image capturing apparatus, image transfer method, recording medium, and computer apparatus | |
| JP2009010903A (en) | Imaging device, and imaging method | |
| JP5161939B2 (en) | Image processing apparatus, imaging system, and control method of image processing apparatus | |
| JP2013055590A (en) | Imaging device and imaging method | |
| JP2018056652A (en) | Imaging device and control method for imaging device | |
| JP6351213B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD AND SYSTEM | |
| JP2020072301A (en) | Imaging apparatus, control method of the same, and program | |
| JP6632374B2 (en) | Data processing device, communication device, and control method | |
| JP2015192227A (en) | Imaging apparatus, control method thereof, and program | |
| JP2020022004A (en) | Imaging apparatus | |
| JP2014216668A (en) | Imaging apparatus | |
| US20230059670A1 (en) | Image processing apparatus, control method, and storage medium | |
| US20230054344A1 (en) | Image processing apparatus, control method, and storage medium | |
| JP6739030B2 (en) | Imaging device, electronic device, and imaging system | |
| JP2017216616A (en) | Imaging apparatus and control method for imaging apparatus |