JP2020088671A - 撮像装置及び当前記装置における信号処理方法 - Google Patents
撮像装置及び当前記装置における信号処理方法 Download PDFInfo
- Publication number
- JP2020088671A JP2020088671A JP2018221789A JP2018221789A JP2020088671A JP 2020088671 A JP2020088671 A JP 2020088671A JP 2018221789 A JP2018221789 A JP 2018221789A JP 2018221789 A JP2018221789 A JP 2018221789A JP 2020088671 A JP2020088671 A JP 2020088671A
- Authority
- JP
- Japan
- Prior art keywords
- identification information
- synchronization
- synchronization code
- signal
- image signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Studio Devices (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
【課題】転送データにスクランブルが施された場合でも確実に同期コードを検出する撮像装置、信号処理方法を提供する。【解決手段】撮像装置の送信側は、基準クロックを発生する発振器と、基準クロックに同期して水平同期信号及び垂直同期信号を発生する同期信号発生手段と、水平おおよび垂直同期信号に同期する画像信号読み出し手段と、水平同期信号に同期して画像信号に複数の同期コードを付加する同期コード付加手段と、複数の同期コードの各々に画像信号の先頭位置を示す識別情報を付加する識別情報付加手段と、同期コードと画像信号を送信する送信手段を有する。撮像装置の受信側は、同期コードと画像信号を受信する受信手段と、同期コードを検出する同期コード検出手段と、複数の同期コードの各々に付加された識別情報を取得する識別情報取得手段と、識別情報取得手段で取得した識別情報を用いて、画像信号の先頭位置を判定する情報処理手段を備える。【選択図】図1
Description
本発明は、撮像素子から出力される画像信号に含まれる水平同期信号を検出する技術に関する。
近年のイメージセンサの高画質化、高フレームレート化に伴って、イメージセンサからの画素データの高速な読み出しが求められている。
このような高速の画素データの読み出しに対応できるセンサとして、アナログデータをA/D変換したデジタルデータをパラレルシリアル変換によりシリアル化して高速に転送する方法が知られている。
このような画素データの転送において、画素データの水平、垂直同期のタイミングを取るためにシリアルデータ中に同期コードと呼ばれる複数の符号列を埋め込んで転送することが行われている。
画素データを処理するためには、画像データの先頭位置を示す同期コードを正しく検出することが重要である。
特許文献1には、パケットの先頭位置を示す識別子にエラーが発生しても、正しく画像データを処理する方法について述べられている。また特許文献1には、パケットの先頭位置を示す識別子にエラーが発生した場合、パケットの先頭位置を判断できず、パケットロストが引き起こされることが課題に挙げられている。これを解決するために、パケットの先頭位置を示す識別子を有する同期コードを複数送信し、受信側で識別子の情報を解釈するためのテーブルを有し、パケットの先頭位置を検出する技術が公開されている。
また、近年の高速な画素データの転送においては、転送データにクロック信号を埋め込み、受信した転送データからクロック信号を抽出するクロックデータリカバリ方式と呼ばれる転送方法がしばしば用いられる。
クロックデータリカバリ方式において、AC結合によりデータを転送する場合はクロックを正常に抽出するための転送データ中の0と1の数がなるべく均一になるようなエンコードを施す。エンコードの1つの手段としてデータにスクランブルをかける方式がある。
データにスクランブルをかけるエンコード方式の場合、転送データのデスクランブル処理を行う開始点を誤検出した場合にデータの処理を正しく行えない可能性がある。
特許文献1では、受信側に同期コードが有する識別子の情報を解釈するためのテーブルを有することを前提としている。そのため、送信側で必ず受信側のテーブルに存在する識別子の情報しか同期コードに付加できないことから、送信側で同期コードに付加する識別子の情報の自由度が低いという課題がある。
本発明は、同期コードに付加する識別子の情報の自由度を高くすることができ、転送データにスクランブル処理が施された場合であっても、確実に同期コードを検出し、転送データのデスクランブルを正しいタイミングで開始することを目的とする。
上記の目的を達成するために、本発明に係る撮像装置は、
基準クロックを発生する発振器と、前記基準クロックに同期して水平同期信号及び垂直同期信号を発生する同期信号発生手段と、前記水平同期信号及び前記垂直同期信号に同期して画像信号を読み出す画像信号読み出し手段と、前記水平同期信号に同期して前記画像信号に複数の同期コードを付加する同期コード付加手段と、前記複数の同期コードの各々に前記画像信号の先頭位置を示す識別情報を付加する識別情報付加手段と、前記同期コードと前記画像信号を送信する送信手段と、前記同期コードと前記画像信号を受信する受信手段と、前記同期コードを検出する同期コード検出手段と、前記複数の同期コードの各々に付加された前記識別情報を取得する識別情報取得手段と、前記識別情報取得手段で取得した識別情報を用いて、前記画像信号の先頭位置を判定する情報処理手段を備えることを特徴とする。
基準クロックを発生する発振器と、前記基準クロックに同期して水平同期信号及び垂直同期信号を発生する同期信号発生手段と、前記水平同期信号及び前記垂直同期信号に同期して画像信号を読み出す画像信号読み出し手段と、前記水平同期信号に同期して前記画像信号に複数の同期コードを付加する同期コード付加手段と、前記複数の同期コードの各々に前記画像信号の先頭位置を示す識別情報を付加する識別情報付加手段と、前記同期コードと前記画像信号を送信する送信手段と、前記同期コードと前記画像信号を受信する受信手段と、前記同期コードを検出する同期コード検出手段と、前記複数の同期コードの各々に付加された前記識別情報を取得する識別情報取得手段と、前記識別情報取得手段で取得した識別情報を用いて、前記画像信号の先頭位置を判定する情報処理手段を備えることを特徴とする。
本発明に係る撮像装置によれば、同期コードに付加する識別子の情報の自由度を高くすることができ、転送データにスクランブルが施された場合でも確実に同期コードを検出し、転送データのデスクランブルを正しいタイミングで開始することができる。
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明していくが、本実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
図1は、本発明の実施形態における撮像装置の構成を説明するブロック図である。
図1において、発信器101は、動作の基準となる基準クロックを出力する。
この発振器101から出力される基準クロックに基づいて、後述する各部が動作する。
同期信号発生器(SSG)110は、基準クロックに同期して水平同期信号HD及び垂直同期信号VDを出力する。
タイミング信号発生器(TG)102は、SSG110から供給される水平同期信号(HD)、垂直同期信号(VD)に基づいて、撮像素子(センサ)120を駆動するための駆動パルス信号を発生する。
センサ120は、例えばCCDやCMOSから構成される撮像素子である。
センサ120は、内部光電変換を行うフォトダイオード等の画素部103と、画素部103で得られた画素信号をTG 102から供給される駆動パルス信号(駆動信号)に従って順次出力する転送路と、画素信号を増幅するアンプ、画素信号をデジタル信号に変換するA/D変換器等を有している。
送信データ処理回路104は、画素部103からの画素信号とTG 102からのタイミング信号より、所定のプロトコルに従った送信データを生成してパラレルデータとして出力する。
具体的には、画素データに対して水平同期信号HDに対応した同期コードの付加等を行う。
送信データ処理回路104の構成を図2に示す。
ステートマシン回路(FSM)202が、処理サイクルをカウントするカウンタ201からのカウント値と、TG102からのタイミング信号に従い、出力セレクタ206の出力が所定のプロトコルに従ったデータとなるよう切り替える指示信号を出力する。
具体的には垂直同期信号VDに同期したデータの先頭に、固定パターン生成部203が出力する固定パターンのデータを所定時間出力する。
固定パターンには予め定められた特定の制御コードが繰返し含まれており、後述する画像処理部130内でのデータ処理に使用される。
また、同期コード生成部204が、画素信号の各水平ラインに対して水平同期信号HDに対応した同期コードの付加を行う。
同期コードとは、あらかじめ決められたワード長のデータ(シンボル)の特定のパターンを指している。例えば同期コードが4シンボルで構成されるとすると、{シンボル1、シンボル2、シンボル3、シンボル4}={ALL0のシンボル、ALL0のシンボル、ALL1のシンボル、ALL1のシンボル}といったデータの並びである。
受信側はこれらのデータパターンをパターンマッチングにより同期コードとして検出し、水平同期のタイミングを取る。
同期コードは固定パターンの直後、または水平同期信号HDに同期したデータの先頭に出力されるようFSM202によって制御される。
また、同期コード生成部204は、付加する同期コード内に識別情報を含めることができる。識別情報とは、例えば、同期コードに続くスクランブルデータの先頭位置を示す情報であり、具体的には同期コードからスクランブルデータの先頭位置までの同期コードのシンボル数を示すカウント値である。
画素部103からの画素データについてはスクランブル回路205でスクランブル処理を施す。
スクランブル処理については例えば線形帰還シフトレジスタによって生成した乱数と画素データとの排他的論理和を取って実際に送信するデータを生成する。
転送データの構成の一例を図3に示す。
301は転送データの一例を示している。転送データ301は、固定パターン、同期コード、スクランブルデータから構成される。本実施例では、スクランブルデータの前に同期コードを5つ付加している例を示し、説明を行う。
302〜305は同期コード内の各シンボルを示している。シンボル4 302にはALL1を示す情報、シンボル3 303にはALL1を示す情報、シンボル2 304にはALL0を示す情報、シンボル1 305にはスクランブルデータの先頭位置を示す識別情報が格納されている。同期コード1のカウント値1は、スクランブルデータの先頭位置までの同期コード2〜5のシンボル数の総数である16を示し、同期コード5のカウント値5は、直後にスクランブルデータの先頭が来るため0を示す情報である。
パラレルシリアル変換器106は、送信データ処理回路104から出力されるパラレルデータをシリアルデータに変換する。
変換されたシリアルデータは、送信ドライバ107を通して基板やケーブルを経由し受信ドライバ111へ供給される。
PLL105は基準クロックからパラレルシリアル変換器106のシリアルデータへの変換レートに合わせたシリアルクロックをパラレルシリアル変換器106へ供給する。
ここでは送信データ処理回路104からの出力データを1つの送信ドライバを介して出力する例を示しているが、実現したいデータレートに応じて複数のドライバにデータを分配して送ってもよい。
130は画像処理部である。
シリアルパラレル変換器112は受信ドライバ111からのシリアルデータを入力して内部のシフトレジスタに蓄える。
蓄えられたシリアルデータを例えば8ビットのパラレルデータとして出力する。さらに、シリアルデータから復元したクロックも出力する。
ワードアライン回路113はシリアルパラレル変換器112から出力されたパラレルデータから予め決められたワード長のデータを取り出す回路である。
例えばシリアルパラレル変換器112からのパラレルデータが8ビットで、それに対して画素データが1画素あたり12ビットのワード長であったとすると、8ビット入力から各画素の12ビットの境目を探し出し、12ビットのワードを取り出して出力する。
このようなワード同期を取る(ワードアライン)動作は前述した固定パターンを受信した際に行われる。
固定パターンは予め定められた特定の制御コードであり、ワードアライン回路113はその特定の制御コードのパターンをパターンマッチングにより探すことでワード同期を取る。
ワードアライン回路113はワード同期を取り、同期を取ったデータ信号を同期コード検出回路114と受信データ処理回路115へ出力する。
同期コード検出回路114はワードアライン回路113からのデータ信号を受け、同期コードを検出して同期コード検出信号として出力する。
同期コード検出回路114の構成を図4に示す。
ここでは同期コードが4シンボルで構成されるものとして説明を行う。
401〜404は入力データを遅延させるための遅延素子である。
遅延素子401の出力はカウント値取得回路405にて、スクランブルデータの先頭位置までの同期コードのシンボル数を示すカウント値情報として比較器410に送信される。
遅延素子402〜404の出力をそれぞれ比較器406〜408にて、同期コードの各シンボルそれぞれの期待値と比較する。
期待値と一致すれば1、一致しない場合は0を各比較器が出力する。
各比較器からの出力を加算器409で加算する。
その値とあらかじめ設定された閾値とを比較器410で比較し、3シンボルの比較結果が閾値以上となった場合にカウント値情報を含む同期コード検出信号を出力する。
このように、同期コードを複数シンボル構成とし、各々のシンボル期待値との比較結果を合わせて評価することで、あるサイクルでビットエラーが起きて同期コードの一部が壊れてしまうといったケースに対してエラー耐性を持たせることができる。
受信データ処理回路115は、カウント値処理回路116とデスクランブル回路117を有する。
カウント値処理回路116は、同期コード検出回路114から出力される同期コード検出信号を受けて、同期コード内に含まれるカウント値情報の解析を行う。カウント値処理回路116は、カウント値情報が示すスランブルデータの先頭位置までの同期コードのシンボル数から、デスクランブル回路117へ送信するリセット信号のタイミングを決定する。例えば、同期コード1のカウント値が16、同期コード2のカウント値が12、同期コード3のカウント値が8、同期コード4のカウント値が4、同期コード5のカウント値が0を示しているものとする。この場合、カウント値処理回路116は、同期コード5の直後にスクランブルデータの先頭位置があると判定し、デスクランブル回路117へリセット信号を送信する。
また、カウント値処理回路116は、複数の同期コードのカウント値が連続性を有しているか否かで同期コードのカウント値が誤りであるか否かを判定する。例えば、同期コード1のカウント値が16、同期コード2のカウント値が12、同期コード3のカウント値が8、同期コード4のカウント値が4、同期コード5のカウント値が4を示しているものとする。この場合、同期コード1から4までのカウント値は連続性を有していることから、カウント値処理回路116は同期コード1から4のカウント値が正しい値であると判定する。同期コード5のカウント値は、同期コード5の前に付加されている同期コード4のカウント値と連続性を有していないため、カウント値処理回路116は同期コード5のカウント値が誤った値であると判定する。この場合、カウント値処理回路116は、同期コード1から4のカウント値が示す同期コード5の直後にスクランブルデータの先頭位置があると判定し、デスクランブル回路117へリセット信号を送信する。
また、カウント値処理回路116は、同期コード5の前に付加されている同期コード4のカウント値から同期コード5のカウント値が0を示していると推測することもできる。この場合、カウント値処理回路116は、同期コード1から5のカウント値が示す同期コード5の直後にスクランブルデータの先頭位置があると判定し、デスクランブル回路117へリセット信号を送信してもよい。
また、カウント値処理回路116は、各同期コードのカウント値情報が示すスランブルデータの先頭位置が所定の閾値以上示された同期コードのカウント値を正しい値と判定してもよい。例えば、同期コード1のカウント値が16、同期コード2のカウント値が0、同期コード3のカウント値が4、同期コード4のカウント値が4、同期コード5のカウント値が0を示している場合について説明を行う。同期コード1、同期コード4、同期コード5は、同期コード5の直後にスクランブルデータの先頭位置があることを示している。
同期コード2は、同期コード2の直後にスクランブルデータの先頭位置があることを示している。同期コード3は、同期コード4の直後にスクランブルデータの先頭位置があることを示している。前述した所定の閾値が3である場合には、カウント値処理回路116は同期コード1、同期コード4、同期コード5のカウント値が正しい値であると判定し、同期コード2と同期コード3のカウント値が誤った値であると判定する。カウント値処理回路116は、同期コード5の直後にスクランブルデータの先頭位置があると判定し、デスクランブル回路117へリセット信号を送信する。また、所定の閾値の値を変更することも可能であり、スクランブルデータの先頭位置を示す情報が最も多い同期コードのカウント値を正しい値と判定する処理も可能である。
このように同期コードを複数付加することで、同期コード内の識別情報の一部が壊れてしまうといったケースに対してエラー耐性を持たせることができる。
デスクランブル回路117は、ワードアライン回路113からのデータ信号に対して、カウント値処理回路116からリセット信号を受けたタイミングをデータの先頭として、所定のフォーマットで定義されているデータの中身を解析、処理していく。
以上、本実施形態によれば、複数の同期コードにスクランブルデータの先頭位置を示す識別情報を付加し、識別情報を解析することによって同期コードを確実に検出し、転送データのデスクランブルを正しいタイミングで開始することができる。
120 センサ、104 送信データ処理回路、130 画像処理部、
114 同期コード検出回路、115 受信データ処理回路
114 同期コード検出回路、115 受信データ処理回路
Claims (9)
- 基準クロックを発生する発振器と、
前記基準クロックに同期して水平同期信号及び垂直同期信号を発生する同期信号発生手段と、
前記水平同期信号及び前記垂直同期信号に同期して画像信号を読み出す画像信号読み出し手段と、
前記水平同期信号に同期して前記画像信号に複数の同期コードを付加する同期コード付加手段と、
前記複数の同期コードの各々に前記画像信号の先頭位置を示す識別情報を付加する識別情報付加手段と、
前記同期コードと前記画像信号を送信する送信手段と、
前記同期コードと前記画像信号を受信する受信手段と、
前記同期コードを検出する同期コード検出手段と、
前記複数の同期コードの各々に付加された前記識別情報を取得する識別情報取得手段と、
前記識別情報取得手段で取得した識別情報を用いて、前記画像信号の先頭位置を判定する情報処理手段と、
を備えることを特徴とする撮像装置。 - 前記識別情報付加手段が付加する前記識別情報は、前記同期コードから前記画像信号の先頭位置までのシンボル数を示す情報であることを特徴とする請求項1に記載の撮像装置。
- 前記識別情報取得手段は、前記同期コード検出手段が前記同期コードを検出した場合にのみ前記同期コードに付加された前記識別情報を取得して前記情報処理手段に前記識別情報を通知することを特徴とする請求項1又は2に記載の撮像装置。
- 前記情報処理手段は、前記同期コードの識別情報と前記同期コードの直前に付加された前記同期コードの識別情報を比較し、識別情報間に連続性がない場合には、前記同期コードの識別情報は誤りであると判定し、前記同期コードの識別情報以外の前記同期コードの識別情報を用いて前記画像信号の先頭位置を判定することを特徴とする請求項1乃至3のいずれか一項に記載の撮像装置。
- 前記情報処理手段は、前記同期コードの識別情報と前記同期コードの直前に付加された前記同期コードの識別情報を比較し、識別情報間に連続性がない場合には、前記同期コードの識別情報は誤りであると判定し、前記同期コードの直前に付加された前記同期コードの識別情報と連続性を持つ前記識別情報を生成して採用することを特徴とする請求項1乃至4のいずれか一項に記載の撮像装置。
- 前記情報処理手段は、前記複数の同期コードから取得した前記複数の識別情報が示す前記画像信号の先頭位置のうち、所定の閾値以上の前記識別情報によって示される前記画像信号の先頭位置を前記画像信号の先頭位置と判定することを特徴とする請求項1乃至5のいずれか一項に記載の撮像装置。
- 前記画像信号を所定の係数によりスクランブルするエンコード手段と、
前記エンコード手段によってスクランブルされたデータを復元するデコード手段と、
をさらに備えることを特徴とする請求項1乃至6のいずれか一項に記載の撮像装置。 - 前記垂直同期信号に同期して前記画像信号の先頭に特定のパターンを繰返し送信することを特徴とする請求項1乃至7のいずれか一項に記載の撮像装置。
- 前記同期コード検出手段は、前記同期コードを形成する所定数のシンボルのうち閾値以上のシンボルを受信した場合に同期コードを検出したと判断することを特徴とする請求項1乃至8のいずれか一項に記載の撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018221789A JP2020088671A (ja) | 2018-11-28 | 2018-11-28 | 撮像装置及び当前記装置における信号処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018221789A JP2020088671A (ja) | 2018-11-28 | 2018-11-28 | 撮像装置及び当前記装置における信号処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020088671A true JP2020088671A (ja) | 2020-06-04 |
Family
ID=70909064
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018221789A Pending JP2020088671A (ja) | 2018-11-28 | 2018-11-28 | 撮像装置及び当前記装置における信号処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020088671A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022019161A1 (ja) * | 2020-07-22 | 2022-01-27 | 株式会社日立国際電気 | 無線通信システム |
JP7525320B2 (ja) | 2020-07-22 | 2024-07-30 | 株式会社日立国際電気 | 無線通信システム |
-
2018
- 2018-11-28 JP JP2018221789A patent/JP2020088671A/ja active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022019161A1 (ja) * | 2020-07-22 | 2022-01-27 | 株式会社日立国際電気 | 無線通信システム |
JP7525320B2 (ja) | 2020-07-22 | 2024-07-30 | 株式会社日立国際電気 | 無線通信システム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2013078377A5 (ja) | ||
JP5936030B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN102708080B (zh) | 一种对齐高速串行通信通道的方法和系统 | |
JP5850047B2 (ja) | データ受信装置、マーカ情報抽出方法、及びマーカ位置検出方法 | |
JP2013078378A5 (ja) | ||
US9847792B2 (en) | Communication apparatus, image forming apparatus, communication method, and computer-readable storage medium | |
CN1578207B (zh) | 信息传输系统及其中的信息发送设备和信息接收设备 | |
JP2020088671A (ja) | 撮像装置及び当前記装置における信号処理方法 | |
WO2012122272A1 (en) | Apparatus and method for deskewing serial data transmissions | |
CN107864031A (zh) | 一种适用于m阶ppm调制的单光子通信的同步方法 | |
JP5217919B2 (ja) | シリアル通信装置、通信制御方法、通信制御プログラム | |
JP2008005123A (ja) | 映像データ送信装置、映像データ受信装置および映像データ伝送システム | |
KR950007977B1 (ko) | 디지탈 정보신호의 동기화 방법 및 장치 | |
JP2019149609A (ja) | 撮像装置及び当該装置における信号処理方法 | |
JP2020096281A (ja) | 撮像装置、データ処理装置およびデータ処理方法 | |
JP2005167663A (ja) | シリアル通信装置 | |
JP2016111557A (ja) | 内視鏡装置 | |
JP3465386B2 (ja) | フレーム同期回路と同回路を用いた符号化/復号化処理回路 | |
JP2017050734A (ja) | シリアル通信装置、通信システム及び通信方法 | |
JP2005333513A (ja) | 通信システム | |
JP2016106902A (ja) | 内視鏡装置 | |
JP2019036833A (ja) | 信号処理装置及び信号処理方法 | |
JP4213000B2 (ja) | データ転送方式および送信装置 | |
JP2017103698A (ja) | 画像処理装置 | |
JP6243210B2 (ja) | シリアルデータ送信装置、シリアルデータ受信装置、シリアルデータ送信方法、及び、シリアルデータ送信プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20191125 |