JP2015095720A - 同期式カメラ - Google Patents

同期式カメラ Download PDF

Info

Publication number
JP2015095720A
JP2015095720A JP2013233304A JP2013233304A JP2015095720A JP 2015095720 A JP2015095720 A JP 2015095720A JP 2013233304 A JP2013233304 A JP 2013233304A JP 2013233304 A JP2013233304 A JP 2013233304A JP 2015095720 A JP2015095720 A JP 2015095720A
Authority
JP
Japan
Prior art keywords
timer
value
packet
register
timer value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013233304A
Other languages
English (en)
Other versions
JP5802727B2 (ja
Inventor
岸 順司
Junji Kishi
順司 岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Teli Corp
Original Assignee
Toshiba Teli Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Teli Corp filed Critical Toshiba Teli Corp
Priority to JP2013233304A priority Critical patent/JP5802727B2/ja
Priority to EP13897245.0A priority patent/EP3070926B1/en
Priority to PCT/JP2013/081648 priority patent/WO2015068313A1/ja
Priority to ES13897245T priority patent/ES2865114T3/es
Publication of JP2015095720A publication Critical patent/JP2015095720A/ja
Application granted granted Critical
Publication of JP5802727B2 publication Critical patent/JP5802727B2/ja
Priority to US15/132,881 priority patent/US9807282B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/42Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4282Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】同期化のためのシステム構成並びにカメラ内部の構成を簡素化でき、これによって複数のカメラをシリアルインターフェイスバス上で同期制御するカメラシステムを経済的に有利な構成で容易に構築することのできる同期式カメラを提供する。【解決手段】ローパスフィルタ演算回路113は、タイマーレジスタ114、パケット受信回路111およびパケット送信回路112とともに、IEEE1394およびUSB3.0のシリアルバス規格に準拠する通信を可能にしたシリアルインターフェイス回路を構成し、タイマーレジスタ114がカウントした内部タイマー値を、タイマーレジスタ114の単位カウント値ずつ漸次、増加若しくは減少する補正処理を実施して、上記ずれを収束する。タイマー演算回路15は、タイマーレジスタ114に保持されたタイマー値と、CPU14が生成したフレームレートとをもとに、各カメラ1,1,…に共通の、次に同期を行うタイミングである、タイマー参照値を算出する。【選択図】図2

Description

本発明は、例えばIEEE1394、USB3.0等のシリアルバスに接続される同期式カメラに関する。
IEEE1394、USB3.0等のシリアルバスに接続された複数台のカメラを同期動作させる手段として、従来では、カメラの外部に同期信号発生手段を設けた構成と、カメラに同期信号発生手段を内蔵した構成とが存在した。
同期信号発生手段をカメラの外部に設けた構成では、シリアルバスによるバス接続とは別に、外部に同期信号発生器と、この同期信号発生器から出力される同期信号を各カメラに供給する同期用の専用信号線路とを設け、同期信号発生器から出力される同期信号を同期用の専用信号線路を介して各カメラに供給することにより、シリアルバス上に接続された複数のカメラ各々に対して同期制御を行っていた。
また、カメラに同期信号発生手段を内蔵した構成では、シリアルバスに接続されたカメラ各々に、カメラ相互の間で同期をとるための同期信号発生回路を具備し、上記各カメラに内蔵した同期信号発生回路がそれぞれシリアルバス上の特定パケットを用いて同期信号を発生していた。
特開2006−203817号公報
上記した構成のうち、同期信号発生手段をカメラの外部に設けたシステム構成では、シリアルバス上のカメラ接続構成とは別に、外部に同期信号発生器を設け、この同期信号発生器から出力される同期信号を同期用の専用信号線路を介して各カメラに供給する構成であることから、システム全体の構成が煩雑になるという問題があった。また、カメラに同期信号発生手段を内蔵した構成では、各カメラに内蔵した同期信号発生器が他の制御側の装置から発行された特定パケットの値とカメラ内で生成した一定周期の信号とを用いて同期信号を生成する構成であることからカメラ内部の同期制御回路の構成が煩雑になるという問題があった。
そこで本願出願人は、複数のカメラをIEEE1394バス上で同期制御するカメラシステムを経済的に有利な構成で容易に構築することのできる同期式カメラを実現した(特許第4445984号)。
この同期式カメラは、同期化のためのシステム構成並びにカメラ内部の構成を簡素化でき、これによって複数のカメラをIEEE1394バス上で同期制御するカメラシステムを経済的に有利な構成で容易に構築することのできるという特徴をもつが、IEEE1394バス上の同期制御に比して、パケット到達時間のより大きな揺らぎを許容する他の高速シリアルバスインターフェイス(例えばUSB3.0対応シリアルバスインターフェイス)に対して一定の信頼性を保証できないという問題が生じた。
本発明は上記の点に鑑みてなされたもので、USB3.0を含めた複数種の高速シリアルバスを対象に、信頼性の高いカメラ相互の同期制御を可能にしたカメラシステムを経済的に有利な構成で容易に構築することのできる同期式カメラを提供することを目的とする。
本発明の実施形態に係る同期式カメラは、シリアルバスを介して外部の制御装置に複数接続され、前記制御装置により設定されたフレームレートに従い同期制御される同期式カメラであって、前記制御装置から一定の周期で発行される、タイマー値を付記したパケット(タイマー値を運ぶパケット)を受信する受信手段と、前記パケットが運ぶタイマー値に対応した内部タイマー値のカウント動作を実施するタイマーレジスタと、前記パケットが運ぶタイマー値と前記タイマーレジスタがカウントした内部タイマー値とを比較し、前記パケットが運ぶタイマー値を目標値に前記内部タイマー値を補正するローパスフィルタ演算処理手段と、前記タイマーレジスタから出力された内部タイマー値と、前記フレームレートとをもとに、前記シリアルバスに接続された前記複数のカメラに共通するタイマー参照値を算出する演算手段と、前記演算手段が算出したタイマー参照値をもとに撮影した映像フレームを前記シリアルバスを介して前記制御装置に送出する送信手段と、を具備したことを特徴とする。
さらに前記同期式カメラにおいて、前記ローパスフィルタ演算処理手段は、前記タイマーレジスタとの間にネガティブ・フィードバック・ループを形成し、前記パケットが運ぶタイマー値と前記タイマーレジスタがカウントした内部タイマー値との比較において、前記タイマーレジスタのカウント値に単位カウント値の複数倍のずれ(複数カウントのずれ)が生じているとき、前記タイマー値を付記したパケットが受信される都度、前記タイマーレジスタがカウントした内部タイマー値を、前記タイマーレジスタの単位カウント値ずつ漸次、増加若しくは減少し、前記ずれを収束するハードウェアロジックを有して構成されていることを特徴とする。
本発明の実施形態に係る同期式カメラによれば、USB3.0を含めた複数種の高速シリアルバスを対象に、信頼性の高いカメラ相互の同期制御を可能にしたカメラシステムを経済的に有利な構成で容易に構築することができる。
本発明の実施形態に係る同期式カメラを複数用いて構築された、シリアルインターフェイスバス接続によるカメラシステムの構成例を示すブロック図。 上記実施形態に係る同期式カメラの構成を示すブロック図。 上記実施形態の同期式カメラに用いられるローパスフィルタ演算回路の処理手順を示すフローチャート。 上記実施形態の同期式カメラに用いられるタイマー演算回路の構成を示すブロック図。
以下図面を参照して本発明の実施形態を説明する。
本発明の実施形態に係る同期式カメラは、例えばIEEE1394、USB3.0等の高速シリアルバス規格上に存在するタイマー(IEEE1394ではサイクルタイマー、USB3.0ではアイソクロナスタイムスタンプ)を基準に、ローパスフィルター演算回路により内部タイマー値のずれを収束し、タイマー演算回路により各カメラを同期動作させるための各カメラに共通のタイマー参照値を算出して、タイマー演算回路が算出したタイマー参照値をもとに各カメラで撮影した映像フレームをシリアルバス経由で外部の制御装置に送出する。この同期式カメラの具体的な構成については図2乃至図4を参照して後述する。
本発明に係る同期式カメラを複数用いて構築された、シリアルインターフェイスバス接続によるカメラシステムの構成例を図1に示す。
このカメラシステムは、図1に示すように、複数の同期式カメラ(以下、単にカメラと称す)1,1,…と、外部制御装置2と、複数カメラのリアルタイム映像伝送を可能にした、バス規格上にタイマーが存在する、IEEE1394、USB3.0等の高速シリアルバス(以下、単にシリアルインターフェイスバスと称す)3とを具備して構成される。ここではシリアルインターフェイスバス3に3台のカメラ(カメラA,カメラB,カメラC)を接続した例を示しているが、バス規格で許容される範囲内においてより多くのカメラ接続が可能である。
上記各構成要素のうち、カメラ1,1,…は、それぞれ後述するシリアルインターフェイス回路(図2に示す符号11参照)を有し、シリアルインターフェイスバス3を介して外部制御装置2にインターフェイス接続されて、各カメラ1,1,…に共通のタイミングで撮影した映像フレームをシリアルインターフェイスバス3を介し外部制御装置2に送出する。
各カメラ1,1,…は、外部制御装置2より、各カメラ1,1,…に共通のフレームレートを受信し、さらに、一定の周期で発行される、タイマー値を付記したパケット(TMP)を受信して、当該パケットを受信する都度、当該パケットが運ぶタイマー値と、当該タイマー値に対応した内部タイマー値のカウント動作を実施しているタイマーレジスタがカウントした内部タイマー値とを比較し、パケットが運ぶタイマー値を目標値に内部タイマー値をローパスフィルタ演算処理により補正し、内部タイマーカウントのずれを収束する処理手段と、この処理手段を経てタイマーレジスタから出力された内部タイマー値と、上記フレームレートとをもとに、シリアルインターフェイスバス3に接続された各カメラ1,1,…に共通するタイマー参照値を算出する処理手段と、この処理手段が算出したタイマー参照値をもとに、撮影した映像フレームをシリアルインターフェイスバス3を介して外部制御装置2に送出する処理手段とを具備して構成される。ここで、外部制御装置2から一定の周期で発行される、タイマー値を付記したパケット(TMP)は、同一バスに接続されている機器の全てにバスタイミングの同期を促すために発行されるもので、IEEE1394の場合は「サイクルスタートパケット」、USB3.0の場合は「アイソクロナスタイムスタンプパケット」であり、いずれも一定周期のバスサイクルで(例えば125μsec毎に)発行される。
外部制御装置2は、各カメラ1,1,…の設定条件保持部(図2に示す符号14a参照)に予め設定された、シャッタースピード、イメージサイズ等のカメラの動作条件をもとに各カメラ1,1,…に共通のフレームレートを整定し、このフレームレートをシステム動作の開始に伴いシリアルインターフェイスバス3を介して各カメラ1,1,…に転送する。また、システム動作が開始されると、上記した一定周期のバスサイクルで、タイマー値を付記したパケット(TMP)をシリアルインターフェイスバス3上に送出する。
シリアルインターフェイスバス3は、外部制御装置2と各カメラ1,1,…との間で遣り取りされるデータのパケット転送に供される高速シリアルバスであり、この実施形態では、IEEE1394、USB3.0等の高速シリアルバスにより実現され、外部制御装置2から各カメラ1,1,…へのフレームレートの転送、タイマー値を付記したパケット(TMP)の転送、各カメラ1,1,…から外部制御装置2への映像フレームの転送等に供される。このシリアルインターフェイスバス3は、上記したIEEE1394、USB3.0に限らず、バス規格上にタイマーが存在する他の高速シリアルバスであってもよい。
上記した図1に示すカメラシステムにおいて、外部制御装置2は、タイマー値を付記したパケット(TMP)を一定期間毎に発行する。このタイマー値を付記したパケット(TMP)は、シリアルインターフェイスバス3を介して、上記各カメラ1,1,…に送信される。上記各カメラ1,1,…は、このタイマー値を付記したパケット(TMP)を受信し、受信したパケットが運ぶタイマー値と、設定されたカメラ1,1,…の動作条件(イメージサイズ、シャッタースピード等の設定条件)に従うフレームレートとをもとに所定の演算を行い、上記各カメラ1,1,…に共通のタイマー参照値を算出する。この算出した上記各カメラ1,1,…に共通のタイマー値(共通タイマー値)をもとに映像出力タイミングの制御を行う。これにより上記各カメラ1,1,…は全て一定期間毎に同期化されて動作する。この際、上記各カメラ1,1,…の動作条件(イメージサイズ、シャッタースピード等の設定条件)に従うフレームレートは同一であり、したがって上記各カメラ1,1,…はそれぞれ同一の同期信号にて動作する。
具体的には、カメラ相互の間で、撮像タイミング、映像出力タイミング等が同期制御される。映像出力タイミングを例にとると、上記各カメラ1,1,…は、それぞれ各カメラに共通のタイマー参照値になるまで待って映像フレームを出力する。これにより映像データ出力が共通タイマー参照値で正規化される。上記各カメラ1,1,…がいずれも共通タイマー参照値で正規化されているため、結果として上記各カメラ1,1,…相互間の同期動作が実現される。
上記図1に示したカメラシステムに適用される本発明の実施形態に係る同期式カメラ1の要部の構成を図2乃至図4を参照して説明する。
本発明の実施形態に係る、タイマー参照値の演算機能を備えたカメラ1は、図2に示すように、シリアルインターフェイス回路11と、イメージセンサ制御回路12と、イメージセンサ13と、CPU14および設定条件保持部14aと、タイマー演算回路15と、同期信号発生回路16とを具備して構成される。
シリアルインターフェイス回路11は、パケット受信回路111と、パケット送信回路112と、ローパスフィルタ演算回路113と、タイマーレジスタ114を具備して構成される。
パケット受信回路111は、外部制御装置2からシリアルインターフェイスバス3上に送出された、タイマー値を付記したパケット(TMP)を受信し、このパケット(TMP)が運ぶタイマー値(TMS)をローパスフィルタ演算回路113に送出する。また、システム動作の開始時において、外部制御装置2が整定した各カメラ1,1,…に共通のフレームレートを運ぶパケットを受信し、当該パケットが運ぶフレームレートをCPU14に送出する。このフレームレートはCPU14に保持される。
パケット送信回路112は、イメージセンサ制御回路12から出力された映像フレームをシリアルインターフェイスバス3を介して外部制御装置2に送信するパケット送信処理を行う。
ローパスフィルタ演算回路113は、タイマーレジスタ114、パケット受信回路111およびパケット送信回路112とともに、IEEE1394およびUSB3.0のシリアルバス規格に準拠する通信を可能にしたシリアルインターフェイス回路を構成している。このローパスフィルタ演算回路113は、タイマーレジスタ114との間に負帰還ループ(Negative・FeedBack・loop)115を形成し、タイマー値を付記したパケット(TMP)が受信される都度、タイマーレジスタ114による内部タイマー値(TMI)のカウント動作を一旦停止させ、受信したパケット(TMP)が運ぶタイマー値(TMS)とタイマーレジスタ114がカウントした内部タイマー値(TMI)とを比較して、タイマーレジスタ113のカウント値に複数カウントのずれ(単位カウント値の複数倍のずれ)が生じているとき、タイマーレジスタ114がカウントした内部タイマー値(TMI)を、タイマーレジスタ113の単位カウント値(例えば1)ずつ漸次、増加若しくは減少する補正処理を実施して、上記ずれを収束するローパスフィルタ演算処理機能を有する。この処理により、シリアルインターフェイスバス3におけるバス帯域の混雑状況により上記パケット(TMP)の到達時間に時間的な揺らぎが生じても、その揺らぎを収束させることができ、USB3.0を含めた高速シリアルバスを対象に、信頼性の高いカメラ相互の同期制御が実現可能になる。このローパスフィルタ演算処理機能については図3を参照して後述する。
タイマーレジスタ114は、ローパスフィルタ演算回路113で演算処理したタイマー値を保持した後、外部制御装置2のタイマーカウントに相当するカウントタイミングで内部タイマー値(TMI)を更新する。
上記したローパスフィルタ演算回路113のローパスフィルタ演算処理手順を図3に示している。
このローパスフィルタ演算処理はシステム動作の開始に伴い実施されるもので、シリアルインターフェイス回路11に、タイマー値を付記したパケット(TMP)が受信されると(ステップS11)、タイマーレジスタ114のカウント動作を一端停止し、タイマーレジスタ114から内部タイマー値(TMI)を取得して(ステップS12)、受信したパケット(TMP)が運ぶタイマー値(TMS)とタイマーレジスタ114がカウントした内部タイマー値(TMI)とを比較する(ステップS13)。
ここで、タイマーレジスタ113のカウント値が、予め定めた規定値(例えばパケット(TMP)の転送周期(125μsec)に相当するタイマーカウント値)以上であるか否かを判断し(ステップS14)、タイマーレジスタ113のカウント値に、規定値以上のずれが生じているとき(ステップS14 Yes)、一意にタイマーレジスタ114の内部タイマー値(TMI)を、受信したパケット(TMP)が運ぶタイマー値(TMS)に入れ替える(ステップS15)。
この処理により、システム動作の開始時において、最初に受信したパケット(TMP)が運ぶタイマー値(TMS)がタイマーレジスタ114に内部タイマー値(TMI)として一意にセットされ、当該タイマー値からタイマーレジスタ113のタイマーカウント動作が開始される。
また、タイマーレジスタ113のカウント値が規定値内であるとき(ステップS14 No)、内部タイマー値(TMI)がパケット(TMP)により運ばれたタイマー値(TMS)より大きい値であるか否かを判断し(ステップS16)、大きい値であるとき(ステップS16 Yes)、内部タイマー値(TMI)を単位カウント値(1カウントの値)だけ減じて(マイナス(−)補正して)タイマーレジスタ113に以降のタイマーカウント動作を実施させる(ステップS17)。
また、タイマーレジスタ113のカウント値が規定値内で(ステップS14 No)、かつ内部タイマー値(TMI)がパケット(TMP)により運ばれたタイマー値(TMS)より小さい値であるとき(ステップS18 Yes)、内部タイマー値(TMI)を単位カウント値(1カウントの値)だけ増して(プラス(+)補正して)タイマーレジスタ113に以降のタイマーカウント動作を実施させる(ステップS19)。
また、内部タイマー値(TMI)がパケット(TMP)により運ばれたタイマー値(TMS)と等しい(ステップS16、S18ともにNo)ときは上記補正処理を実施せず、そのままタイマーレジスタ113に以降のタイマーカウント動作を実施させる。
このようにしてローパスフィルタ演算処理を経たタイマー値(TM)がタイマーレジスタ113から出力される。このローパスフィルタ演算処理により、タイマーレジスタ113のカウント値に複数カウントのずれ(単位カウント値の複数倍のずれ)が生じているとき、タイマーレジスタ114がカウントした内部タイマー値(TMI)を、タイマーレジスタ113の単位カウント値(例えば1)ずつ補正され、複数のバスサイクルで漸次収束される。この処理により、上記したパケット(TMP)の到達時間に時間的な揺らぎが生じても、その揺らぎを収束させることができる。また、カメラ各々の内部カウントによる内部タイマー値の微小なずれに対しても、そのずれを正確に補正することができる。
上記した、パケット受信回路111およびパケット送信回路112と、ローパスフィルタ演算回路113およびタイマーレジスタ114とにより、同期式カメラのシリアルバス接続を可能にしたシリアルインターフェイス回路11が構成される。
イメージセンサ制御回路12は、同期信号発生回路16から出力された同期信号をもとに、イメージセンサ13を制御し、イメージセンサ13から映像フレームのデータを取得して、この映像フレームのデータをパケット送信回路112に送出する。
イメージセンサ13は、予め設定された、シャッタースピード、イメージサイズ等のカメラの動作条件に従い、所定の被写体を撮影し、撮影した映像フレームのデータをイメージセンサ制御回路12に送出する。
CPU14は、シリアルインターフェイスバス3上の通信処理を含むカメラ1全体の制御を司るもので、ここでは設定条件保持部14aに保持された設定条件(シャッタースピード、イメージサイズ等のカメラの動作条件)をもとに外部制御装置2により整定された各カメラ1,1,…に共通のフレームレート(FR)を保持し、このフレームレート(FR)をタイマー演算回路15に供給して、各カメラ1,1,…に共通のタイミングで同期信号を生成する。
タイマー演算回路15は、ローパスフィルタ演算を経てタイマーレジスタ114から出力されたタイマー値(TM)と、CPU14から供給されたフレームレート(FR)とをもとに、後述する演算を行い、上記各カメラ1,1,…に共通の、次に同期を行うタイミングである、タイマー参照値(TMR)を算出する。
同期信号発生回路16は、タイマー演算回路15から出力されたタイマー参照値(TMR)と、タイマーレジスタ113から出力されたタイマー値(TM)とをもとに、同期信号を生成し、この同期信号をもとにイメージセンサ制御回路12の映像フレーム出力制御を行う。ここでは、タイマー参照値(TMR)を映像フレームの出力開始タイミングとして、タイマー値(TM)の更新タイミングに従い連続する映像フレームの出力制御を行う。
上記したタイマー演算回路15の内部構成要素を図4に示している。
タイマー演算回路15は、図4に示すように、整数除算器151と、加算器152と、整数乗算器153とを具備して構成される。
整数除算器151は、タイマーレジスタ113から出力されたタイマー値(TM)を、CPU14から供給されたフレームレート(FR)で除算し、その整数部の値を抽出する。
加算器152は、整数除算器151から出力された値(整数値)に更新値(1)を加算する切り上げ処理を実施する。
整数乗算器153は、加算器152の出力値に上記フレームレート(FR)を乗じて、上記各カメラ1,1,…に共通の、次に同期を行うタイミングである、タイマー参照値(TMR)を算出する。
このタイマー参照値(TMR)の具体的な算出手段を図4を参照して例示する。タイマー演算回路15は、上述したように、整数除算器151と、加算器152と、整数乗算器153とを具備して構成される。ここでは、タイマーレジスタ114のタイマー値が「547」、各カメラ1,1,…に共通のフレームレートが「100」である場合に、上記各カメラ1,1,…に共通の、次に同期を行うタイミングである、タイマー参照値を算出する例について説明する。
整数除算器151は、タイマー値「547」をフレームレート「100」で除した整数値「5」を算出する。加算器152は、整数除算器151が算出した「5」に更新値「1」を加える。整数乗算器153は、加算器152が算出した「6」にフレームレート「100」を乗じ、「600」を上記各カメラ1,1,…に共通の、次に同期を行うタイミングである、タイマー参照値(TMR)として算出する。
上記構成によるカメラ1の動作を説明する。システム動作の開始に先立ち、シリアルインターフェイスバス3に繋がる各カメラ1,1,…の設定条件保持部14aに保持された設定条件(カメラのシャッタースピード、イメージサイズ等のカメラの動作条件)をもとに外部制御装置2で整定された各カメラ1,1,…に共通のフレームレートが、外部制御装置2から各カメラ1,1,…にパケット転送され、当該パケットにより運ばれたフレームレートがCPU14のレジスタ領域に保持される。
シリアルインターフェイスバス3上において、IEEE1394ではサイクルスタートパケット、USB3.0ではアイソクロナスタイムスタンプパケットという一定期間毎に主にホストから発行されるパケットが存在する。これは、同一バスに接続されている機器全てにバスタイミングの同期を促すためにあり、現在のタイマー値を付記して送信される。
パケット受信回路111はこのタイマー値を付記したパケット(TMP)を受信し、そのタイマー値(TMS)をローパスフィルター演算回路113に送る。ローパスフィルター演算回路113は、受信したタイマー値(TMS)とタイマーレジスタ114が保持するタイマー値(TMI)を比較し、上記したローパスフィルター演算処理を実施する。この演算処理結果はタイマーレジスタ114に保存される。タイマーレジスタ114は、パケット受信時のローパスフィルター演算処理を除いてカウント動作を継続して実施する。
タイマー演算回路15は、CPU14から供給されたフレームレート(FR)と、タイマーレジスタ114から出力されたタイマー値(TM)とをもとに、次に同期を行うタイミングであるタイマー参照値(TMR)を生成する。
同期信号発生回路16は、タイマーレジスタ114から出力されたタイマー値(TM)と、タイマー演算回路15から出力されたタイマー参照値(TMR)をもとに同期信号を発生する。
イメージセンサ制御回路12は同期信号発生回路16から出力された同期信号を受け、これを基準としてイメージセンサ13を制御する。また、イメージセンサ13の出力映像を読出し、パケット送信回路112に映像フレームを送出する。
パケット送信回路112は、イメージセンサ制御回路12から受けた映像フレームのデータを送信パケット化し、シリアルインターフェイスバス3を介して外部制御装置2に送信する。
このような動作により、シリアルインターフェイスバス3上に接続された各カメラ1,1,…は、タイマー演算回路15から出力されるタイマー参照値(TMR)をもとに映像フレームの送出処理を開始する。すなわち、上記各カメラ1,1,…は、共通のタイマー値が同期周期の整数倍になるまで待って映像フレームを出力する。これにより上記各カメラ1,1,…の映像データ出力が共通タイマー値で正規化され、その結果、上記各カメラ1,1,…相互間の同期動作が実現される。
上記した実施形態によれば、タイマー値を付記したパケット(TMP)の到達時間に時間的な揺らぎが生じても、その揺らぎを収束させることができ、USB3.0を含めた複数種の高速シリアルバスを対象に、信頼性の高いカメラ相互の同期制御を可能にしたカメラシステムを経済的に有利な構成で容易に構築することができる。
上記した実施形態では、外部制御装置2が、シリアルインターフェイスバス3に繋がる各カメラ1,1,…の設定条件をもとにフレームレートを定めたが、各カメラ1,1,…がそれぞれ同一の設定条件のもとに動作する場合は、各カメラ1,1,…のCPU14が、イメージサイズやシャッタースピード等の動作条件をもとに各カメラ1,1,…に共通のフレームレートを算出する構成であってもよく、要は各カメラ1,1,…のフレームレートを一致させることで、タイマー参照値を用いた同期制御機構を実現できる。また、カメラ相互のフレームレートが異なっていても、一方のフレームレートが他方のフレームレートの整数倍である場合においても、本発明の演算によるタイマー参照値を用いた同期制御を適用できる。
また、IEEE1394、USB3.0以外のバスインターフェイスにおいても、タイマー値を付記したパケット(TMP)と同等のバス同期クロックがある場合に、本発明の実施形態に係るタイマー参照値を用いた同期制御機構を実現できる。
1…同期式カメラ(カメラ)、2…外部制御装置(パーソナルコンピュータ)、3…シリアルインターフェイスバス、11…シリアルインターフェイス回路、12…イメージセンサ制御回路、13…イメージセンサ、14…CPU、15…タイマー演算回路、16…同期信号発生回路、111…パケット受信回路、112…パケット送信回路、113…ローパスフィルタ演算回路、114…タイマーレジスタ、151…整数除算器、152…加算器、153…整数乗算器。

Claims (4)

  1. シリアルバスを介して外部の制御装置に複数接続され、前記制御装置により設定されたフレームレートに従い同期制御される同期式カメラであって、
    前記制御装置から一定の周期で発行される、タイマー値を付記したパケットを受信する受信手段と、
    前記パケットが運ぶタイマー値に対応した内部タイマー値のカウント動作を実施するタイマーレジスタと、
    前記パケットが運ぶタイマー値と前記タイマーレジスタがカウントした内部タイマー値とを比較し、前記パケットが運ぶタイマー値を目標値に前記内部タイマー値を補正するローパスフィルタ演算処理手段と、
    前記タイマーレジスタから出力された内部タイマー値と、前記フレームレートとをもとに、前記シリアルバスに接続された前記複数のカメラに共通するタイマー参照値を算出する演算手段と、
    前記演算手段が算出したタイマー参照値をもとに撮影した映像フレームを前記シリアルバスを介して前記制御装置に送出する送信手段と、
    を具備したことを特徴とする同期式カメラ。
  2. 前記ローパスフィルタ演算処理手段は、前記タイマーレジスタとの間にネガティブ・フィードバック・ループを形成し、前記パケットが運ぶタイマー値と前記タイマーレジスタがカウントした内部タイマー値との比較において、前記タイマーレジスタのカウント値に単位カウント値の複数倍のずれが生じているとき、前記タイマー値を付記したパケットが受信される都度、前記タイマーレジスタがカウントした内部タイマー値を、前記タイマーレジスタの単位カウント値ずつ漸次、増加若しくは減少し、前記ずれを収束するハードウェアロジックを有して構成されていることを特徴とする請求項1に記載の同期式カメラ。
  3. 前記演算手段は、
    前記内部タイマー値を前記フレームレートで除した整数値を算出する整数除算器と、
    前記除算器で算出した値に一定の更新値を加える加算器と、
    前記加算器で加算した値に前記フレームレートを乗ずる整数乗算器とを具備し、
    前記整数乗算器より前記タイマー参照値を取得することを特徴とする請求項1に記載の同期式カメラ。
  4. 前記ローパスフィルタ演算処理手段は、前記タイマーレジスタ、前記受信手段および前記送信手段とともに、IEEE1394およびUSB3.0のシリアルバス規格に準拠する通信を可能にしたシリアルインターフェイス回路を構成していることを特徴とする請求項1に記載の同期式カメラ。
JP2013233304A 2013-11-11 2013-11-11 同期式カメラ Active JP5802727B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2013233304A JP5802727B2 (ja) 2013-11-11 2013-11-11 同期式カメラ
EP13897245.0A EP3070926B1 (en) 2013-11-11 2013-11-25 Synchronous camera
PCT/JP2013/081648 WO2015068313A1 (ja) 2013-11-11 2013-11-25 同期式カメラ
ES13897245T ES2865114T3 (es) 2013-11-11 2013-11-25 Cámara sincrónica
US15/132,881 US9807282B2 (en) 2013-11-11 2016-04-19 Synchronous camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013233304A JP5802727B2 (ja) 2013-11-11 2013-11-11 同期式カメラ

Publications (2)

Publication Number Publication Date
JP2015095720A true JP2015095720A (ja) 2015-05-18
JP5802727B2 JP5802727B2 (ja) 2015-10-28

Family

ID=53041113

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013233304A Active JP5802727B2 (ja) 2013-11-11 2013-11-11 同期式カメラ

Country Status (5)

Country Link
US (1) US9807282B2 (ja)
EP (1) EP3070926B1 (ja)
JP (1) JP5802727B2 (ja)
ES (1) ES2865114T3 (ja)
WO (1) WO2015068313A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110515468A (zh) * 2019-08-30 2019-11-29 Oppo广东移动通信有限公司 控制方法、控制装置、电子装置和存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015209129B3 (de) * 2015-05-19 2016-11-10 Robert Bosch Gmbh Verfahren zur Sensorsynchronisierung
EP3537707B1 (de) * 2018-03-06 2021-07-28 B&R Industrial Automation GmbH Kamerakern einer smart kamera für die industrielle bildverarbeitung und verfahren zur industriellen bildverarbeitung
CN116405758A (zh) * 2020-11-26 2023-07-07 华为技术有限公司 一种数据传输方法及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000072597A1 (fr) * 1999-05-24 2000-11-30 Matsushita Electric Industrial Co., Ltd. Dispositif de commutateur d'images et dispositifs de sortie d'images
JP2002247408A (ja) * 2001-02-13 2002-08-30 Canon Inc 撮像システム、撮像装置及び制御方法
JP2006203817A (ja) * 2005-01-24 2006-08-03 Nippon Soken Inc マルチカメラシステム
JP2007280459A (ja) * 2006-04-04 2007-10-25 Sony Corp 磁気記録再生装置及び磁気記録再生方法
JP2009017413A (ja) * 2007-07-06 2009-01-22 Toshiba Teli Corp 同期式カメラ
WO2011092869A1 (ja) * 2010-01-26 2011-08-04 東芝テリー株式会社 カメラ装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69412337T2 (de) * 1993-04-28 1998-12-10 Matsushita Electric Ind Co Ltd Echtzeitdatensender/-empfänger
KR0178766B1 (ko) * 1996-09-02 1999-05-15 삼성전자주식회사 압축되지 않은 디지탈데이타의 전송기능을 갖는 디지탈 인터페이스 장치
CA2301436A1 (en) * 2000-03-20 2001-09-20 Peter Renaud Method and system for multi-protocol clock recovery and generation
EP1198085B1 (en) * 2000-10-10 2011-06-08 Sony Deutschland GmbH Cycle synchronization between interconnected sub-networks
US7499098B2 (en) * 2005-06-07 2009-03-03 Seiko Epson Corporation Method and apparatus for determining the status of frame data transmission from an imaging device
EP1983756A1 (en) * 2007-04-18 2008-10-22 St Microelectronics S.A. Portable device with video output
US20090121925A1 (en) * 2007-11-08 2009-05-14 Scott Miles L Energy Emission Event Detection
DE102008017933B4 (de) * 2008-04-08 2012-04-26 Baumer Optronic Gmbh Verfahren und Vorrichtung zur Synchronisation von Kamerasystemen
JP5874178B2 (ja) * 2010-04-09 2016-03-02 ソニー株式会社 カメラシステム、カメラ装置、カメラ制御装置、および中継装置
JP2012010026A (ja) * 2010-06-23 2012-01-12 Seiko Epson Corp 撮像装置及び撮像制御回路

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000072597A1 (fr) * 1999-05-24 2000-11-30 Matsushita Electric Industrial Co., Ltd. Dispositif de commutateur d'images et dispositifs de sortie d'images
JP2002247408A (ja) * 2001-02-13 2002-08-30 Canon Inc 撮像システム、撮像装置及び制御方法
JP2006203817A (ja) * 2005-01-24 2006-08-03 Nippon Soken Inc マルチカメラシステム
JP2007280459A (ja) * 2006-04-04 2007-10-25 Sony Corp 磁気記録再生装置及び磁気記録再生方法
JP2009017413A (ja) * 2007-07-06 2009-01-22 Toshiba Teli Corp 同期式カメラ
WO2011092869A1 (ja) * 2010-01-26 2011-08-04 東芝テリー株式会社 カメラ装置
JP2011155410A (ja) * 2010-01-26 2011-08-11 Toshiba Teli Corp カメラ装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110515468A (zh) * 2019-08-30 2019-11-29 Oppo广东移动通信有限公司 控制方法、控制装置、电子装置和存储介质

Also Published As

Publication number Publication date
EP3070926A1 (en) 2016-09-21
JP5802727B2 (ja) 2015-10-28
EP3070926A4 (en) 2017-04-05
WO2015068313A1 (ja) 2015-05-14
US9807282B2 (en) 2017-10-31
ES2865114T3 (es) 2021-10-15
EP3070926B1 (en) 2021-04-07
US20160234404A1 (en) 2016-08-11

Similar Documents

Publication Publication Date Title
US8750078B2 (en) Slave device, time synchronization method in slave device, master device, and electronic equipment system
WO2018228352A1 (zh) 一种同步曝光方法、装置及终端设备
JP5802727B2 (ja) 同期式カメラ
CN108923876A (zh) 时间同步方法、装置及系统
KR20160078893A (ko) 반도체 장치, 전자 디바이스ㆍ모듈 및 네트워크 시스템
CN107439000B (zh) 一种同步曝光的方法、装置及终端设备
JP2014011529A (ja) 撮像装置、撮像システム、撮像方法及びプログラム
US10848539B2 (en) Genlock mechanism for software pacing of media constant bit rate streams
US20190149702A1 (en) Imaging apparatus
US20160142592A1 (en) Image capture apparatus having function of generating frame synchronization signal at constant cycle
JP2016139846A (ja) 時刻同期システム、マスタ装置およびスレーブ装置、並びに時刻同期方法
US20170230126A1 (en) Network system, time master station, and time slave station
JP5354913B2 (ja) パケット切換ネットワークのための、同期信号を表すサンプルランプ信号を発生させる装置、及び同期信号の再構成を支援する装置
JP2013058986A (ja) 通信システム、送信装置、受信装置、送信方法、受信方法及びプログラム
US11949767B2 (en) Communication apparatus, method of controlling communication apparatus, and storage medium
KR20120079142A (ko) 카메라 장치
US9442511B2 (en) Method and a device for maintaining a synchronized local timer using a periodic signal
CN107455006B (zh) 一种同步曝光的方法、装置及终端设备
JP4445984B2 (ja) 同期式カメラ
JP6310758B2 (ja) 時刻同期装置および方法
JP5853737B2 (ja) 中継装置、中継装置制御方法、及び、中継装置制御プログラム
WO2020095413A1 (ja) 通信システム、通信装置、方法、及びプログラム
JP2021093695A (ja) 同期制御装置、同期制御装置の制御方法、およびプログラム
JP2023078537A (ja) 通信装置
US20220360845A1 (en) Reception apparatus, reception method, and transmission and reception system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150804

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150831

R150 Certificate of patent or registration of utility model

Ref document number: 5802727

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250