JP2019204156A - Internal clock generation circuit, module for imaging and image processing device - Google Patents

Internal clock generation circuit, module for imaging and image processing device Download PDF

Info

Publication number
JP2019204156A
JP2019204156A JP2018097042A JP2018097042A JP2019204156A JP 2019204156 A JP2019204156 A JP 2019204156A JP 2018097042 A JP2018097042 A JP 2018097042A JP 2018097042 A JP2018097042 A JP 2018097042A JP 2019204156 A JP2019204156 A JP 2019204156A
Authority
JP
Japan
Prior art keywords
frequency
clock signal
internal clock
internal
serial communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018097042A
Other languages
Japanese (ja)
Inventor
内野 雅俊
Masatoshi Uchino
雅俊 内野
貴之 中井
Takayuki Nakai
貴之 中井
幹次 北村
Kanji Kitamura
幹次 北村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2018097042A priority Critical patent/JP2019204156A/en
Publication of JP2019204156A publication Critical patent/JP2019204156A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide an internal clock generation circuit, a module for imaging and an image processing device which enable data communication between own device and another device, even in a period when the frequency of a clock outputted from an internal oscillation circuit is corrected.SOLUTION: An internal oscillator 106 outputs an internal clock signal with accuracy lower than that of a clock signal for serial communication transmitted from a mother board. A frequency measurement unit 104 measures the frequency of the internal clock signal outputted from the internal oscillator 106, based on the clock signal for serial communication transmitted from the mother board. A frequency control unit 105a corrects the frequency of an internal clock outputted from the internal oscillator 106, based on a measured frequency and a target frequency.SELECTED DRAWING: Figure 3

Description

本発明は、内部クロック生成回路、撮像用モジュールおよび画像処理装置に関する。   The present invention relates to an internal clock generation circuit, an imaging module, and an image processing apparatus.

画像処理装置において高精度な画像データを取得するためには、同じ光量の被写体を撮影した際に画素の領域によって明暗の差が発生しないことが求められる。また、同じ光量の被写体を撮影した場合に経過時間によって明るさに差が生じないことも求められる。   In order to acquire highly accurate image data in an image processing apparatus, it is required that a difference in brightness does not occur depending on the pixel area when a subject with the same amount of light is captured. It is also required that there is no difference in brightness depending on the elapsed time when subjects with the same amount of light are photographed.

イメージセンサを用いた撮像装置は、被写体からの光をイメージセンサ内のフォトダイオードにて光電変換する。被写体から入射する光のエネルギーによってシリコン内の電子が励起する。この電子がフォトダイオードの接合容量に蓄積されることによって、光が電気信号に変換される。光の強度が強いほど、励起する電子の量が多くなる。光を当てる時間が長いほど電子が蓄積する量が多くなる。   An imaging apparatus using an image sensor photoelectrically converts light from a subject using a photodiode in the image sensor. Electrons in the silicon are excited by the energy of light incident from the subject. The electrons are accumulated in the junction capacitance of the photodiode, whereby light is converted into an electric signal. The stronger the light intensity, the more electrons are excited. The longer the light is applied, the more electrons accumulate.

時間毎の撮像画像を比較して状態変化を監視する撮像装置においては、撮像装置自体の状態変化によって、撮像装置内部のクロック信号の周波数が変動すると、光量の計測時間が変化する。光量の計測時間が長くなると画像が明るくなり、短くなると画像が暗くなる。つまり、撮像装置自体に起因して画像に明暗の差が生じてしまう。これによって、撮像装置は、状態変化を適切に監視することができない。よって、撮像画像毎の光量計測時間を均一にすることを目的として、クロック周波数の高精度化が求められる。   In an imaging apparatus that monitors a change in state by comparing captured images at different times, when the frequency of the clock signal inside the imaging apparatus fluctuates due to a change in the state of the imaging apparatus itself, the light amount measurement time changes. The image becomes brighter when the measurement time of the light amount becomes longer, and the image becomes darker when the measurement time becomes shorter. That is, a difference in brightness occurs in the image due to the imaging device itself. As a result, the imaging apparatus cannot appropriately monitor the state change. Therefore, high accuracy of the clock frequency is required for the purpose of making the light amount measurement time for each captured image uniform.

マスタであるマザーボードに、スレーブである撮像用モジュールが接続されるシステムにおいても、撮像用モジュールの周囲の温度変化によって、光量の計測時間が変動すると撮像画像に影響を及ぼす。光量の計測時間の変動を抑制するためには、撮像用モジュール内のクロック信号の高精度化が必要となる。高精度なクロック信号を得るために水晶振動子を用いた発振回路を搭載することが一般的であるが、水晶振動子を使用することによって、基板のサイズが大きくなってしまう。マザーボードが製品内部の比較的スペースに余裕がある部分に配置されるのに対して、撮像用モジュールは製品表面に搭載されるため、撮像用モジュール側に水晶振動子を搭載すると、システムの小型化を阻害し、見栄えもよくない。   Even in a system in which an imaging module as a slave is connected to a mother board as a master, if the measurement time of the amount of light varies due to a temperature change around the imaging module, the captured image is affected. In order to suppress fluctuations in the light amount measurement time, it is necessary to increase the accuracy of the clock signal in the imaging module. In order to obtain a highly accurate clock signal, it is common to mount an oscillation circuit using a crystal resonator. However, the use of the crystal resonator increases the size of the substrate. While the motherboard is placed in a relatively large space inside the product, the imaging module is mounted on the surface of the product, so mounting a crystal unit on the imaging module side reduces the size of the system. The appearance is not good.

たとえば、特許文献1に記載される画像形成装置は、高精度な発振回路を有するマスタと、マスタ側の発振回路に対して精度の低い発振回路を内部に有するスレーブとを備える。マスタとスレーブとは、シリアル通信の信号線で接続される。スレーブは、マスタからスレーブに対して送信される所定データの送信時間をスレーブの発振回路が発生するクロック信号に基づいてカウントする。スレーブは、そのカウント値と予め定められた所定時間とに基づいて、スレーブの発振回路のクロック周波数の誤差を求め、誤差を補正する。特許文献1では、スレーブの発振回路は、水晶振動子を用いる必要がないので、画像形成装置の小型化が阻害されない。   For example, the image forming apparatus described in Patent Document 1 includes a master having a high-accuracy oscillation circuit and a slave having an oscillation circuit whose accuracy is lower than that of the master-side oscillation circuit. The master and the slave are connected by a serial communication signal line. The slave counts the transmission time of the predetermined data transmitted from the master to the slave based on the clock signal generated by the slave oscillation circuit. The slave calculates an error in the clock frequency of the slave oscillation circuit based on the count value and a predetermined time, and corrects the error. In Patent Document 1, since the slave oscillation circuit does not need to use a crystal resonator, downsizing of the image forming apparatus is not hindered.

特開2011−150310号公報JP 2011-150310 A

特許文献1に記載の画像形成装置では、スレーブの内部発振回路から出力されるクロックの周波数を補正するために、補正用の期間を設ける必要がある。補正用の期間では、マスタとスレーブとの間のデータ通信ができなくなる。つまり、スレーブ側の構成要素を動作させるためのデータ通信と、スレーブの内部発振回路から出力されるクロックの周波数の補正とが別個の期間に行われることになる。その結果、一定時間内に伝送されるペイロードのデータ量が抑制される。   In the image forming apparatus described in Patent Document 1, it is necessary to provide a correction period in order to correct the frequency of the clock output from the slave internal oscillation circuit. During the correction period, data communication between the master and the slave becomes impossible. In other words, data communication for operating the components on the slave side and correction of the frequency of the clock output from the slave internal oscillation circuit are performed in separate periods. As a result, the amount of payload data transmitted within a certain time is suppressed.

それゆえに、本発明の目的は、内部発振回路から出力されるクロックの周波数を補正する期間においても、他の装置との間のデータ通信を可能とする内部クロック生成回路、撮像用モジュールおよび画像処理装置を提供することである。   Therefore, an object of the present invention is to provide an internal clock generation circuit, an imaging module, and image processing that enable data communication with other devices even during a period in which the frequency of the clock output from the internal oscillation circuit is corrected. Is to provide a device.

上記課題を解決するために、本発明は、シリアル通信用のクロック信号を生成する第2の装置との間でシリアル通信が可能な第1の装置における内部クロック生成回路であって、シリアル通信用のクロック信号よりも低い精度の内部クロック信号を出力する内部発振器と、第2の装置から送信されるシリアル通信用のクロック信号に基づいて、内部発振器から出力される内部クロック信号の周波数を測定する周波数測定部と、測定された周波数と目標周波数とに基づいて、内部発振器から出力される内部クロック信号の周波数を補正する周波数制御部とを備える。   In order to solve the above-described problems, the present invention provides an internal clock generation circuit in a first device capable of serial communication with a second device that generates a clock signal for serial communication. The frequency of the internal clock signal output from the internal oscillator is measured on the basis of the internal oscillator that outputs an internal clock signal with a lower accuracy than the clock signal and the serial communication clock signal transmitted from the second device. A frequency measurement unit; and a frequency control unit that corrects the frequency of the internal clock signal output from the internal oscillator based on the measured frequency and the target frequency.

本発明によれば、内部発振回路から出力されるクロックの周波数を補正する期間においても、他の装置との間のデータ通信ができる。   According to the present invention, data communication with other devices can be performed even during the period of correcting the frequency of the clock output from the internal oscillation circuit.

実施の形態1の画像処理装置の構成を表わす図である。1 is a diagram illustrating a configuration of an image processing apparatus according to a first embodiment. SPIの通信方式を表わす図である。It is a figure showing the communication system of SPI. 実施の形態1の画像処理装置の撮像用モジュール302に含まれる一部の構成を表わす図である。3 is a diagram illustrating a partial configuration included in an imaging module 302 of the image processing apparatus according to Embodiment 1. FIG. 内部発振器106の一例を表わす図である。2 is a diagram illustrating an example of an internal oscillator 106. FIG. 実施の形態1の周波数制御部105aの構成を表わす図である。FIG. 3 is a diagram illustrating a configuration of a frequency control unit 105a according to the first embodiment. 実施の形態1における内部クロック信号SCLKの周波数補正のタイミングチャートである。3 is a timing chart of frequency correction of an internal clock signal SCLK in the first embodiment. 実施の形態2の周波数制御部105bの構成を表わす図である。6 is a diagram illustrating a configuration of a frequency control unit 105b according to Embodiment 2. FIG. 実施の形態2における内部クロック信号SCLKの周波数補正のタイミングチャートである。10 is a timing chart of frequency correction of an internal clock signal SCLK in the second embodiment. 実施の形態3の画像処理装置の構成を表わす図である。6 is a diagram illustrating a configuration of an image processing apparatus according to Embodiment 3. FIG. 実施の形態3における内部クロック信号SCLKの周波数補正のタイミングチャートである。10 is a timing chart of frequency correction of an internal clock signal SCLK in the third embodiment.

以下、実施の形態について、図面を参照して説明する。
実施の形態1.
図1は、実施の形態1の画像処理装置の構成を表わす図である。
Hereinafter, embodiments will be described with reference to the drawings.
Embodiment 1 FIG.
FIG. 1 is a diagram illustrating the configuration of the image processing apparatus according to the first embodiment.

画像処理装置は、マザーボード301と、撮像用モジュール302とを備える。
マザーボード301と撮像用モジュール302との間は、シリアル通信で信号が伝送される。
The image processing apparatus includes a mother board 301 and an imaging module 302.
A signal is transmitted between the mother board 301 and the imaging module 302 by serial communication.

この画像処理装置では、マザーボード301がマスタ、撮像用モジュール302がスレーブである。マスタとスレーブの間の通信手段としてSPI(Serial Peripheral Interface)通信規格に準拠する通信方式が用いられる。   In this image processing apparatus, the mother board 301 is a master and the imaging module 302 is a slave. As a communication means between the master and the slave, a communication method conforming to the SPI (Serial Peripheral Interface) communication standard is used.

マザーボード301と撮像用モジュール302とは、クロック信号線CLKと、信号線MOSIと、信号線MISOとによって接続される。   The motherboard 301 and the imaging module 302 are connected by a clock signal line CLK, a signal line MOSI, and a signal line MISO.

クロック信号線CLKは、マスタからスレーブへのシリアル通信用のクロック信号MCLKを伝送する。   The clock signal line CLK transmits a clock signal MCLK for serial communication from the master to the slave.

信号線MOSIは、マザーボード301(マスタ)から撮像用モジュール302(スレーブ)へのシリアル通信用のクロック信号MCLKに同期したデータ信号DATA_Iを伝送する。データ信号DATA_Iは、撮像用モジュール302を設定するためのデータであり、たとえば、読出しラインの設定または各種のモード設定のためのデータである。   The signal line MOSI transmits a data signal DATA_I synchronized with the serial communication clock signal MCLK from the mother board 301 (master) to the imaging module 302 (slave). The data signal DATA_I is data for setting the imaging module 302, for example, data for setting a readout line or various modes.

信号線MISOは、撮像用モジュール302(スレーブ)からマザーボード301(マスタ)へのシリアル通信用のクロック信号MCLKに同期したデータ信号DATA_Oを伝送する。DATA_Oは、撮像用モジュール302で生成された画像データを含む。   The signal line MISO transmits the data signal DATA_O synchronized with the clock signal MCLK for serial communication from the imaging module 302 (slave) to the mother board 301 (master). DATA_O includes image data generated by the imaging module 302.

マザーボード301(マスタ)は、水晶振動子を使用した水晶発振器を有する。水晶発振器によって、シリアル通信用のクロック信号MCLKが生成される。マザーボード301(マスタ)のシリアル通信用のクロック信号MCLKの発振周波数の偏差は±0.001%程度である。   The mother board 301 (master) has a crystal oscillator using a crystal resonator. A clock signal MCLK for serial communication is generated by the crystal oscillator. The deviation of the oscillation frequency of the clock signal MCLK for serial communication of the mother board 301 (master) is about ± 0.001%.

撮像用モジュール302(スレーブ)は、水晶振動子ではなく半導体集積回路を使用した内部発振器を有する。よって、撮像用モジュール302(スレーブ)の周波数偏差は±10%程度となる。したがって、スレーブのクロックに比べてマスタから出力するクロック信号MCLKの精度が高い。シリアル通信用のクロック信号MCLKに同期して、データ信号DATA_Iおよびデータ信号DATA_Oの授受が行なわれる。撮像用モジュール302で生成された画像データを含むデータ信号DATA_Oが、シリアル通信用のクロック信号MCLKに同期して伝送される。   The imaging module 302 (slave) has an internal oscillator that uses a semiconductor integrated circuit instead of a crystal resonator. Therefore, the frequency deviation of the imaging module 302 (slave) is about ± 10%. Therefore, the accuracy of the clock signal MCLK output from the master is higher than that of the slave clock. Data signal DATA_I and data signal DATA_O are exchanged in synchronization with clock signal MCLK for serial communication. The data signal DATA_O including the image data generated by the imaging module 302 is transmitted in synchronization with the serial communication clock signal MCLK.

図2は、SPIの通信方式を表わす図である。
データ信号DATA_Iおよびデータ信号DATA_Oは、シリアル通信用のクロック信号MCLKの立ち上がりエッジで遷移し、立ち下がりエッジで取り込まれる。シリアル通信は、通常、8ビットを1単位(1ワード)として扱うため、以下では、シリアル通信を行なう毎に8周期分のクロック信号を出力する通信フォーマットを使用した例について説明する。
FIG. 2 is a diagram illustrating an SPI communication method.
The data signal DATA_I and the data signal DATA_O transition at the rising edge of the serial communication clock signal MCLK and are captured at the falling edge. Since serial communication normally handles 8 bits as one unit (1 word), an example using a communication format that outputs a clock signal for 8 cycles each time serial communication is performed will be described.

図2に示すように、シリアル通信用のクロック信号MCLKの1周期毎にマスタおよびスレーブ側のSPI通信部内シフトレジスタ内のデータを1ビットずつシフトすることによって、定められたビット単位のデータを連続して送受信する。通信を行なわないときにはシリアル通信用のクロック信号MCLKは伝送されない。定められたビット単位は、1ワード(8ビット)であるものとする。1ワードのビット数は、通信仕様により任意に定められるため、8ビットでなくてもよい。   As shown in FIG. 2, data in a predetermined bit unit is continuously shifted by shifting the data in the shift register in the SPI communication unit on the master side and the slave side for each cycle of the clock signal MCLK for serial communication. Send and receive. When communication is not performed, serial communication clock signal MCLK is not transmitted. The determined bit unit is one word (8 bits). Since the number of bits of one word is arbitrarily determined according to communication specifications, it may not be 8 bits.

図3は、実施の形態1の画像処理装置の撮像用モジュール302に含まれる一部の構成を表わす図である。   FIG. 3 is a diagram illustrating a partial configuration included in imaging module 302 of the image processing apparatus according to the first embodiment.

撮像用モジュール302は、SPI通信部107および内部クロック生成回路101を備える。   The imaging module 302 includes an SPI communication unit 107 and an internal clock generation circuit 101.

内部クロック生成回路101は、状態検出部102と、状態制御部103と、周波数測定部104と、周波数制御部105aと、内部発振器(OSC)106と、スイッチ108とを備える。   The internal clock generation circuit 101 includes a state detection unit 102, a state control unit 103, a frequency measurement unit 104, a frequency control unit 105a, an internal oscillator (OSC) 106, and a switch 108.

SPI通信部107は、シリアル通信用の高精度なクロック信号MCLKと、シリアル通信用のデータ信号DATA_Iとを受ける。SPI通信部107は、クロック信号MCLKを内部クロック生成回路101および撮像用モジュール302内の図示しない構成要素に供給する。SPI通信部107は、クロック信号MCLKの立下りエッジに同期して、データ信号DATA_Iの値を取り込んで、取り込んだデータ信号DATA_Iを内部クロック生成回路101および撮像用モジュール302内の図示しない構成要素に供給する。SPI通信部107は、撮像用モジュール302内の図示しない構成要素からデータ信号DATA_Oを受けて、シフトレジスタに保持する。SPI通信部107は、シリアル通信用のクロック信号MCLKに同期して、シフトレジスタのデータを1ビットずつシフトさせることによって、データ信号DATA_Oを出力する。   The SPI communication unit 107 receives a high-accuracy clock signal MCLK for serial communication and a data signal DATA_I for serial communication. The SPI communication unit 107 supplies the clock signal MCLK to the internal clock generation circuit 101 and components not shown in the imaging module 302. The SPI communication unit 107 captures the value of the data signal DATA_I in synchronization with the falling edge of the clock signal MCLK, and uses the captured data signal DATA_I as a component (not shown) in the internal clock generation circuit 101 and the imaging module 302. Supply. The SPI communication unit 107 receives a data signal DATA_O from a component (not shown) in the imaging module 302 and holds it in the shift register. The SPI communication unit 107 outputs the data signal DATA_O by shifting the data of the shift register bit by bit in synchronization with the clock signal MCLK for serial communication.

状態検出部102は、クロック信号MCLKの立上りエッジの有無を検出して、検出結果を状態制御部103に出力する。   The state detection unit 102 detects the presence or absence of a rising edge of the clock signal MCLK and outputs the detection result to the state control unit 103.

状態検出部102が、1ワード送信時のクロック信号MCLKの最初のクロックの立下りエッジのタイミングから最後(8番目)のクロックの立下りエッジのタイミングまでの期間、検出信号DEをハイレベルに設定する。   The state detection unit 102 sets the detection signal DE to a high level during a period from the falling edge timing of the first clock of the clock signal MCLK during the transmission of one word to the timing of the falling edge of the last (eighth) clock. To do.

状態制御部103は、状態検出部102からハイレベルの検出信号DEを受けた場合に、周波数測定部104および周波数制御部105aを動作させ、さらにスイッチ108をオンに設定する。状態制御部103は、状態検出部102からロウレベルの検出信号DEを受けた場合に、周波数測定部104および周波数制御部105aを停止させ、さらにスイッチ108をオフに設定する。   When the state control unit 103 receives the high-level detection signal DE from the state detection unit 102, the state control unit 103 operates the frequency measurement unit 104 and the frequency control unit 105a, and further sets the switch 108 to ON. When the state control unit 103 receives the low-level detection signal DE from the state detection unit 102, the state control unit 103 stops the frequency measurement unit 104 and the frequency control unit 105a, and further sets the switch 108 to OFF.

スイッチ108は、SPI通信部107から送られるシリアル通信用のクロック信号MCLKを受ける。スイッチ108がオンに設定されると、シリアル通信用のクロック信号MCLKが周波数測定部104に送られる。スイッチ108がオフに設定されると、シリアル通信のクロック信号MCLKが周波数測定部104に送られない。   The switch 108 receives the serial communication clock signal MCLK sent from the SPI communication unit 107. When the switch 108 is set to ON, the serial communication clock signal MCLK is sent to the frequency measuring unit 104. When the switch 108 is set to OFF, the serial communication clock signal MCLK is not sent to the frequency measurement unit 104.

周波数測定部104は、シリアル通信用のクロック信号MCLKに基づいて、内部発振器106から出力される内部クロック信号SCLKの周波数を測定する。   The frequency measuring unit 104 measures the frequency of the internal clock signal SCLK output from the internal oscillator 106 based on the clock signal MCLK for serial communication.

具体的には、周波数測定部104は、1ワード送信時において、クロック信号MCLKの最初のクロックの立下りエッジから最後(8番目)のクロックの立ち下がりエッジまでの期間における内部発振器106が出力する内部クロック信号SCLKのパルス数をカウントする。周波数測定部104は、測定結果であるパルス数をシリアル通信用のクロック信号MCLKに周波数に基づいて、内部クロック信号SCLKの周波数Aに変換する。   Specifically, the frequency measuring unit 104 outputs the internal oscillator 106 during a period from the falling edge of the first clock of the clock signal MCLK to the falling edge of the last (eighth) clock during one word transmission. The number of pulses of the internal clock signal SCLK is counted. The frequency measurement unit 104 converts the number of pulses as a measurement result into the frequency A of the internal clock signal SCLK based on the frequency of the clock signal MCLK for serial communication.

周波数制御部105aは、測定された内部クロック信号SCLKの周波数Aと、内部クロック信号SCLKの目標周波数Bに基づいて、内部発振器106の周波数制御値Cを補正する。具体的には、周波数制御部105aは、1ワードのデータの送信ごとに、測定された周波数Aが目標周波数Bよりも大きいときに、一定値だけ内部クロック信号SCLKの周波数を低下させ、測定された周波数Aが目標周波数Bよりも小さいときに、一定値だけ内部クロック信号SCLKの周波数を増加させる。   The frequency control unit 105a corrects the frequency control value C of the internal oscillator 106 based on the measured frequency A of the internal clock signal SCLK and the target frequency B of the internal clock signal SCLK. Specifically, the frequency control unit 105a is configured to reduce the frequency of the internal clock signal SCLK by a certain value when the measured frequency A is higher than the target frequency B for each transmission of one word of data. When the frequency A is smaller than the target frequency B, the frequency of the internal clock signal SCLK is increased by a certain value.

内部発振器106は、スレーブ側の内部クロック信号SCLKを出力する。内部発振器106は、周波数制御部105aから送られる周波数制御値Cに応じて、内部発振器106内のコンデンサの値を変更することによって、内部発振器106の発振周波数を補正する。これによって、内部発振器106によって生成される内部クロック信号SCLKの周波数が補正される。内部発振器106の構成に応じて、抵抗、制御電圧、制御電流を変更することによって、内部発振器106の発振周波数を補正してもよい。   The internal oscillator 106 outputs a slave-side internal clock signal SCLK. The internal oscillator 106 corrects the oscillation frequency of the internal oscillator 106 by changing the value of the capacitor in the internal oscillator 106 in accordance with the frequency control value C sent from the frequency control unit 105a. As a result, the frequency of the internal clock signal SCLK generated by the internal oscillator 106 is corrected. Depending on the configuration of the internal oscillator 106, the oscillation frequency of the internal oscillator 106 may be corrected by changing the resistance, the control voltage, and the control current.

図4は、内部発振器106の一例を表わす図である。
図4に示すように、内部発振器106は、水晶振動子を含まない。内部発振器106は、リラクゼーション型発振器である。内部発振器106は、複数個のインバータIV1〜IV10と、容量素子C1〜C14と、否定論理和回路NOR1,NOR2と、NチャネルMOSトランジスタN1〜N14とを備える。
FIG. 4 is a diagram illustrating an example of the internal oscillator 106.
As shown in FIG. 4, the internal oscillator 106 does not include a crystal resonator. The internal oscillator 106 is a relaxation type oscillator. Internal oscillator 106 includes a plurality of inverters IV1 to IV10, capacitive elements C1 to C14, NOR circuits NOR1 and NOR2, and N-channel MOS transistors N1 to N14.

容量素子C7とC8の容量は、10Cである。容量素子C6とC9の容量は、Cである。容量素子C5とC10の容量は、2Cである。容量素子C4とC11の容量は、4Cである。容量素子C3とC12の容量は、8Cである。容量素子C2とC1とC13とC14の容量は、16Cである。   Capacitance elements C7 and C8 have a capacitance of 10C. The capacitances of the capacitive elements C6 and C9 are C. Capacitance elements C5 and C10 have a capacitance of 2C. Capacitance elements C4 and C11 have a capacitance of 4C. Capacitance elements C3 and C12 have a capacity of 8C. Capacitance elements C2, C1, C13, and C14 have a capacitance of 16C.

ノードND1とグランドとの間に、直列接続された容量素子C1およびNMOSトランジスタN1と、直列接続された容量素子C2およびNMOSトランジスタN2と、直列接続された容量素子C3およびNMOSトランジスタN3と、直列接続された容量素子C4およびNMOSトランジスタN4と、直列接続された容量素子C5およびNMOSトランジスタN5と、直列接続された容量素子C6およびNMOSトランジスタN6と、直列接続された容量素子C7およびNMOSトランジスタN7とが並列に配置される。   Between the node ND1 and the ground, the capacitive element C1 and the NMOS transistor N1 connected in series, the capacitive element C2 and the NMOS transistor N2 connected in series, and the capacitive element C3 and the NMOS transistor N3 connected in series are connected in series. Capacitive element C4 and NMOS transistor N4 connected in series, capacitive element C5 and NMOS transistor N5 connected in series, capacitive element C6 and NMOS transistor N6 connected in series, capacitive element C7 and NMOS transistor N7 connected in series Arranged in parallel.

ノードND2とグランドとの間に、直列接続された容量素子C14およびNMOSトランジスタN14と、直列接続された容量素子C13およびNMOSトランジスタN13と、直列接続された容量素子C12およびNMOSトランジスタN12と、直列接続された容量素子C11およびNMOSトランジスタN11と、直列接続された容量素子C10およびNMOSトランジスタN10と、直列接続された容量素子C9およびNMOSトランジスタN9と、直列接続された容量素子C8およびNMOSトランジスタN8とが並列に配置される。   Between the node ND2 and the ground, a capacitive element C14 and an NMOS transistor N14 connected in series, a capacitive element C13 and an NMOS transistor N13 connected in series, and a capacitive element C12 and an NMOS transistor N12 connected in series are connected in series. Capacitive element C11 and NMOS transistor N11 connected in series, capacitive element C10 and NMOS transistor N10 connected in series, capacitive element C9 and NMOS transistor N9 connected in series, capacitive element C8 and NMOS transistor N8 connected in series Arranged in parallel.

ノードND1は、インバータIV5の入力およびインバータIV4の出力に接続される。ノードND2は、インバータIV1の入力およびインバータIV7の出力に接続される。インバータIV5の出力は、インバータIV6の入力に接続される。インバータIV6の出力は、否定論理和回路NOR2の一方の入力に接続される。インバータIV1の出力は、インバータIV2の入力に接続される。インバータIV2の出力は、否定論理和回路NOR1の一方の入力に接続される。否定論理和回路NOR1の他方の入力は、否定論理和回路NOR2の出力に接続される。否定論理和回路NOR2の他方の入力は、否定論理和回路NOR1の出力に接続される。否定論理和回路NOR1の出力は、さらに、インバータIV9の入力、インバータIV8の入力に接続される。否定論理和回路NOR2の出力は、さらに、インバータIV10の入力、インバータIV3の入力に接続される。インバータIV8の出力は、インバータIV7の入力に接続される。インバータIV3の出力は、インバータIV4の入力に接続される。インバータIV9は、内部クロック信号SCLKを出力する。   Node ND1 is connected to the input of inverter IV5 and the output of inverter IV4. Node ND2 is connected to the input of inverter IV1 and the output of inverter IV7. The output of inverter IV5 is connected to the input of inverter IV6. The output of the inverter IV6 is connected to one input of the NOR circuit NOR2. The output of inverter IV1 is connected to the input of inverter IV2. The output of the inverter IV2 is connected to one input of the NOR circuit NOR1. The other input of the NOR circuit NOR1 is connected to the output of the NOR circuit NOR2. The other input of the NOR circuit NOR2 is connected to the output of the NOR circuit NOR1. The output of the NOR circuit NOR1 is further connected to the input of the inverter IV9 and the input of the inverter IV8. The output of the NOR circuit NOR2 is further connected to the input of the inverter IV10 and the input of the inverter IV3. The output of inverter IV8 is connected to the input of inverter IV7. The output of inverter IV3 is connected to the input of inverter IV4. Inverter IV9 outputs internal clock signal SCLK.

6ビットの制御データD<5:0>が内部発振器106に入力される。
NMOSトランジスタN7のゲートとNMOSトランジスタN8のゲートには、電源電圧VDDが入力される。NMOSトランジスタN6のゲートとNMOSトランジスタN9のゲートには、D0が入力される。NMOSトランジスタN5のゲートとNMOSトランジスタN10のゲートには、D1が入力される。NMOSトランジスタN4のゲートとNMOSトランジスタN11のゲートには、D2が入力される。NMOSトランジスタN3のゲートとNMOSトランジスタN12のゲートには、D3が入力される。NMOSトランジスタN2のゲートとNMOSトランジスタN13のゲートには、D4が入力される。NMOSトランジスタN1のゲートとNMOSトランジスタN14のゲートには、D5が入力される。
The 6-bit control data D <5: 0> is input to the internal oscillator 106.
The power supply voltage VDD is input to the gate of the NMOS transistor N7 and the gate of the NMOS transistor N8. D0 is input to the gate of the NMOS transistor N6 and the gate of the NMOS transistor N9. D1 is input to the gate of the NMOS transistor N5 and the gate of the NMOS transistor N10. D2 is input to the gate of the NMOS transistor N4 and the gate of the NMOS transistor N11. D3 is input to the gate of the NMOS transistor N3 and the gate of the NMOS transistor N12. D4 is input to the gate of the NMOS transistor N2 and the gate of the NMOS transistor N13. D5 is input to the gate of the NMOS transistor N1 and the gate of the NMOS transistor N14.

6ビットの制御データD<5:0>によって、NMOSトランジスタN1〜N6、N9〜N14のオン/オフを制御することによって、内部クロック信号SCLKの周波数を変化させることができる。   By controlling on / off of the NMOS transistors N1 to N6 and N9 to N14 by the 6-bit control data D <5: 0>, the frequency of the internal clock signal SCLK can be changed.

図5は、実施の形態1の周波数制御部105aの構成を表わす図である。
図5に示すように、周波数制御部105aは、比較部201と、演算部202と、DAC203とを備える。
FIG. 5 is a diagram illustrating the configuration of the frequency control unit 105a according to the first embodiment.
As shown in FIG. 5, the frequency control unit 105 a includes a comparison unit 201, a calculation unit 202, and a DAC 203.

比較部201は、周波数測定部104から送られる内部クロック信号SCLKの測定周波数Aと目標周波数Bとを比較する。比較部201は、測定周波数Aが目標周波数Bよりも低い場合は、UP信号を出力する。比較部201は、測定周波数Aが目標周波数Bよりも高い場合は、DOWN信号を出力する。目標周波数Bは、予め定められて記憶されているものであってもよいし、マザーボード301から送信されるデータ信号DATA_Iによって指定されるものであってもよい。   The comparison unit 201 compares the measurement frequency A of the internal clock signal SCLK sent from the frequency measurement unit 104 with the target frequency B. The comparison unit 201 outputs an UP signal when the measurement frequency A is lower than the target frequency B. When the measurement frequency A is higher than the target frequency B, the comparison unit 201 outputs a DOWN signal. The target frequency B may be determined and stored in advance, or may be specified by the data signal DATA_I transmitted from the motherboard 301.

演算部202は、比較部201の比較結果から前回の周波数制御値Cに対する演算を実施する。演算部202は、内部に前回の周波数補正時の周波数制御値Cを保持するレジスタを有する。演算部202は、比較部201からUP信号が入力されれば、前回の周波数制御値Cに対して「+1」を加え、DOWN信号が入力されれば前回の周波数制御値Cに対して「−1」を加えることによって、周波数制御値Cを補正する。なお、ここでは、「+1」または「−1」を加えているが、これに限定されるものではなく、「+2」または「−2」、「+3」または「−3」などの任意の値に調整が可能である。   The calculation unit 202 performs a calculation on the previous frequency control value C from the comparison result of the comparison unit 201. The calculation unit 202 includes a register that holds a frequency control value C at the time of the previous frequency correction. The arithmetic unit 202 adds “+1” to the previous frequency control value C when the UP signal is input from the comparison unit 201, and “−” with respect to the previous frequency control value C when the DOWN signal is input. The frequency control value C is corrected by adding “1”. Here, “+1” or “−1” is added, but the present invention is not limited to this, and any value such as “+2” or “−2”, “+3” or “−3” is not limited thereto. Adjustment is possible.

DAC203は、演算部202から出力されるデジタルの周波数制御値Cをアナログの周波数制御値Cに変換する。つまり、前回の周波数制御値Cを補正する場合は、1ワードのデータ通信毎に一定量ずつ周波数制御値Cが補正され、補正を行なわない場合は前回の周波数制御値Cが維持される。   The DAC 203 converts the digital frequency control value C output from the calculation unit 202 into an analog frequency control value C. That is, when the previous frequency control value C is corrected, the frequency control value C is corrected by a fixed amount for each word data communication, and when the correction is not performed, the previous frequency control value C is maintained.

なお、測定周波数Aと目標周波数Bとの差の絶対値が閾値以下の場合は、比較部201は、STAY信号を演算部202に出力し、演算部202は、STAY信号が入力されれば前回の周波数制御値Cに対して0を加えることとしてもよい。   When the absolute value of the difference between the measurement frequency A and the target frequency B is equal to or less than the threshold value, the comparison unit 201 outputs a STAY signal to the calculation unit 202, and the calculation unit 202 returns to the previous time when the STAY signal is input. It is also possible to add 0 to the frequency control value C.

図6は、実施の形態1における内部クロック信号SCLKの周波数補正のタイミングチャートである。   FIG. 6 is a timing chart of frequency correction of internal clock signal SCLK in the first embodiment.

図6には、シリアル通信用のクロック信号MCLKと、マスタからスレーブに対して送信されるシリアル通信用のデータ信号DATA_Iと、スレーブ側の内部発振器106から出力される内部クロック信号SCLKと、内部クロック信号SCLKの周波数が示されている。   FIG. 6 shows a serial communication clock signal MCLK, a serial communication data signal DATA_I transmitted from the master to the slave, an internal clock signal SCLK output from the slave-side internal oscillator 106, and an internal clock. The frequency of the signal SCLK is shown.

タイミングt0に第1のシリアル通信が開始される。タイミングt3に第2のシリアル通信が開始される。タイミングt6に第3のシリアル通信が開始される。   The first serial communication is started at timing t0. The second serial communication is started at timing t3. The third serial communication is started at timing t6.

第1のシリアル通信において、スレーブ側の撮像用モジュール302は、タイミングt0にシリアル通信用のクロック信号MCLKを受ける。   In the first serial communication, the slave imaging module 302 receives the serial communication clock signal MCLK at timing t0.

タイミングt1において、クロック信号MCLKが最初に立ち下がる。タイミングt1に周波数測定部104が、内部発振器106の出力のパルスのカウント動作を開始する。カウント動作は、1ワード送信時の最終クロックの立ち下がりエッジのタイミングt2まで継続する。   At timing t1, the clock signal MCLK first falls. At timing t1, the frequency measuring unit 104 starts counting pulses of the output of the internal oscillator 106. The count operation continues until the timing t2 of the falling edge of the final clock during transmission of one word.

周波数測定部104は、タイミングt1からタイミングt2までにおいて内部発振器106から出力される内部クロック信号SCLKのパルス数を周波数Aに変換して周波数制御部105aに出力する。   The frequency measuring unit 104 converts the number of pulses of the internal clock signal SCLK output from the internal oscillator 106 from the timing t1 to the timing t2 into the frequency A and outputs the frequency A to the frequency control unit 105a.

周波数制御部105aは、周波数測定部104から送られる測定周波数Aと、目標周波数Bに基づいて、内部発振器106の周波数制御値Cを補正する。内部発振器106は、周波数制御値Cに基づいて、発振周波数を補正する。周波数制御値Cは、複数回にわたって、目標周波数Bに徐々に近づく方向に補正される。シリアル通信が行なわれない期間であるタイミングt2からタイミングt3まではシリアル通信のクロック信号MCLKがスレーブに入力されないため、周波数制御値Cは、補正されない。   The frequency control unit 105 a corrects the frequency control value C of the internal oscillator 106 based on the measurement frequency A and the target frequency B sent from the frequency measurement unit 104. The internal oscillator 106 corrects the oscillation frequency based on the frequency control value C. The frequency control value C is corrected in a direction gradually approaching the target frequency B over a plurality of times. Since the serial communication clock signal MCLK is not input to the slave from timing t2 to timing t3 during which serial communication is not performed, the frequency control value C is not corrected.

第2のシリアル通信および第3のシリアル通信時の周波数補正動作は同様であるため、説明は、省略する。   Since the frequency correction operation during the second serial communication and the third serial communication is the same, the description thereof is omitted.

シリアル通信が行なわれていない期間、つまりシリアル通信の信号が送信されていない期間においては、状態制御部103は、スイッチ108をオフに設定するとともに、周波数測定部104および周波数制御部105aを停止させる。これによって、内部発振器106の周波数の補正動作が実施されない。クロック信号を常時入力して周波数を補正しているのではなく、通信時のみ断続的に周波数を補正する動作は、クロック信号を常時補正する回路構成と比較して、消費電力を低減できる。   In a period in which serial communication is not performed, that is, a period in which a serial communication signal is not transmitted, the state control unit 103 sets the switch 108 to OFF and stops the frequency measurement unit 104 and the frequency control unit 105a. . As a result, the frequency correction operation of the internal oscillator 106 is not performed. The operation of correcting the frequency intermittently only during communication, instead of always inputting the clock signal to correct the frequency, can reduce the power consumption as compared with the circuit configuration in which the clock signal is always corrected.

上述したように、特許文献1に記載の画像形成装置では、スレーブの発振回路のクロックの周波数を補正するために、データ通信が行われない補正用の期間を設ける必要がある。また、車載機器の通信プロトコルであるLINの通信方式では、通信フレームのヘッダにクロック信号の周波数を補正するためSynchフィールドを設けて、各スレーブのクロック信号周期を調整する。よって、LINの通信方式では、Synchフィールドの期間には、データ通信ができない。   As described above, in the image forming apparatus described in Patent Document 1, it is necessary to provide a correction period during which data communication is not performed in order to correct the clock frequency of the slave oscillation circuit. In the communication system of LIN, which is a communication protocol for in-vehicle devices, a Synch field is provided in the header of the communication frame to correct the frequency of the clock signal, and the clock signal cycle of each slave is adjusted. Therefore, in the LIN communication method, data communication is not possible during the Synch field period.

これに対して、本実施の形態では、シリアル通信時に間欠的に伝送されるシリアル通信用の高精度なクロック信号MCLKを用いて、内部発振器106の周波数を補正することによって、スレーブの内部発振器106で生成される内部クロック信号SCLKの周波数の補正をデータ通信と平行して実施することができる。   On the other hand, in the present embodiment, the slave internal oscillator 106 is corrected by correcting the frequency of the internal oscillator 106 using the serial communication high-accuracy clock signal MCLK transmitted intermittently during serial communication. Correction of the frequency of the internal clock signal SCLK generated in (1) can be performed in parallel with data communication.

内部発振器106が生成する内部クロック信号SCLKの周波数によって撮像用モジュール302に搭載されたイメージセンサの光量計測時間が変動する。内部発振器106が生成する内部クロック信号SCLKの周波数の補正量が大きくなると補正前と補正後の光量計測時間の差異が大きくなる。これによって、撮像用モジュール302が生成する撮像画像に斑が生じてしまう。本実施の形態では、1回で内部クロック信号SCLKの周波数を目標周波数Bに補正せずに、複数回にわたって内部クロック信号SCLKを目標周波数Bに徐々に近づくように補正することによって、撮像画像の斑を抑制することを可能とする。   The light amount measurement time of the image sensor mounted on the imaging module 302 varies depending on the frequency of the internal clock signal SCLK generated by the internal oscillator 106. As the amount of correction of the frequency of the internal clock signal SCLK generated by the internal oscillator 106 increases, the difference between the light amount measurement time before and after correction increases. As a result, spots occur in the captured image generated by the imaging module 302. In the present embodiment, the frequency of the internal clock signal SCLK is not corrected to the target frequency B at one time, but the internal clock signal SCLK is corrected so as to gradually approach the target frequency B over a plurality of times, thereby It is possible to suppress plaque.

実施の形態2
図7は、実施の形態2の周波数制御部105bの構成を表わす図である。ここでは、実施の形態1と同一の内容に対する説明は省略し、差異のみ説明を行う。
Embodiment 2
FIG. 7 is a diagram illustrating the configuration of the frequency control unit 105b according to the second embodiment. Here, the description for the same contents as in the first embodiment is omitted, and only the difference is described.

周波数制御部105bは、LUT204と、演算部202と、DAC203とを備える。   The frequency control unit 105 b includes an LUT 204, a calculation unit 202, and a DAC 203.

LUT204は、1ワードのデータの送信毎に、周波数測定部104から出力される測定周波数Aを受けて、測定周波数Aに対応する周波数制御値Cの補正値Dを演算部202に出力する。LUT204には、測定周波数Aと目標周波数Bとの差に応じた周波数制御値Cの補正値Dが設定されている。   The LUT 204 receives the measurement frequency A output from the frequency measurement unit 104 every time one word of data is transmitted, and outputs the correction value D of the frequency control value C corresponding to the measurement frequency A to the calculation unit 202. In the LUT 204, a correction value D of the frequency control value C corresponding to the difference between the measurement frequency A and the target frequency B is set.

測定周波数Aが目標周波数Bよりも大きい場合には、周波数制御値Cを小さくする補正値Dが設定されている。測定周波数Aが目標周波数Bよりも小さい場合には、周波数制御値Cを大きくする補正値Dが設定されている。測定周波数Aと目標周波数Bとの差の絶対値が大きいほど、周波数制御値Cの補正値Dが大きい。より好ましくは、1回の補正で、周波数制御値Cが目標周波数Bまたは目標周波数Bに近い周波数となるような補正値Dが定められている。   When the measurement frequency A is higher than the target frequency B, a correction value D that decreases the frequency control value C is set. When the measurement frequency A is smaller than the target frequency B, a correction value D that increases the frequency control value C is set. The greater the absolute value of the difference between the measurement frequency A and the target frequency B, the greater the correction value D of the frequency control value C. More preferably, the correction value D is determined such that the frequency control value C becomes a target frequency B or a frequency close to the target frequency B by one correction.

演算部202は、LUT204から送られる補正値Dに基づいて、周波数制御値Cを出力する。演算部202は、内部に前回の周波数補正時の周波数制御値Cを保持するレジスタを有する。演算部202は、前回の周波数制御値Cに対して、LUT203から送られる補正値Dを加えて、周波数制御値Cを更新して出力する。より好ましくは、1回の周波数補正で内部クロック信号SCLKの周波数が目標周波数Bまたは目標周波数Bに近い周波数に補正される。   The calculation unit 202 outputs a frequency control value C based on the correction value D sent from the LUT 204. The calculation unit 202 includes a register that holds a frequency control value C at the time of the previous frequency correction. The calculation unit 202 adds the correction value D sent from the LUT 203 to the previous frequency control value C, and updates and outputs the frequency control value C. More preferably, the frequency of the internal clock signal SCLK is corrected to the target frequency B or a frequency close to the target frequency B by one frequency correction.

DAコンバータ203は、演算部202から出力されるデジタルの周波数制御値Cをアナログの周波数制御値Cに変換する。   The DA converter 203 converts the digital frequency control value C output from the calculation unit 202 into an analog frequency control value C.

図8は、実施の形態2における内部クロック信号SCLKの周波数補正のタイミングチャートである。   FIG. 8 is a timing chart of frequency correction of internal clock signal SCLK in the second embodiment.

図8には、シリアル通信用のクロック信号MCLKと、マスタからスレーブに対して送信されるシリアル通信用のデータ信号DATA_Iと、スレーブ側の内部発振器106から出力される内部クロック信号SCLKと、内部クロック信号SCLKの周波数が示されている。   FIG. 8 shows a serial communication clock signal MCLK, a serial communication data signal DATA_I transmitted from the master to the slave, an internal clock signal SCLK output from the slave-side internal oscillator 106, and an internal clock. The frequency of the signal SCLK is shown.

内部発振器106のパルス数のカウント動作の開始、終了については実施の形態1と同一であるため、説明を繰り返さない。   Since the start and end of the counting operation of the number of pulses of the internal oscillator 106 are the same as those in the first embodiment, description thereof will not be repeated.

第1のシリアル通信において、スレーブ側の撮像用モジュール302は、タイミングt0にシリアル通信用のクロック信号MCLKを受ける。   In the first serial communication, the slave imaging module 302 receives the serial communication clock signal MCLK at timing t0.

タイミングt1において、クロック信号MCLKが最初に立ち下がる。タイミングt1に周波数測定部104が、内部発振器106の出力のパルスのカウント動作を開始する。カウント動作は、1ワード送信時の最終クロックの立ち下がりエッジのタイミングt2まで継続する。   At timing t1, the clock signal MCLK first falls. At timing t1, the frequency measuring unit 104 starts counting pulses of the output of the internal oscillator 106. The count operation continues until the timing t2 of the falling edge of the final clock during transmission of one word.

周波数測定部104は、タイミングt1からタイミングt2までにおいて内部発振器106から出力される内部クロック信号SCLKのパルス数を測定周波数Aに変換して周波数制御部105bに出力する。周波数制御部105bでは、LUT204は、測定周波数Aに対応する補正値Dを演算部202に出力する。演算部202およびDAC203は、補正値Dに基づいて、更新した周波数制御値Cを内部発振器106に出力する。内部発振器106は、受信した周波数制御値Cに基づいて、発振周波数を補正する。これによって、内部クロック信号SCLKの周波数が補正される。   The frequency measurement unit 104 converts the number of pulses of the internal clock signal SCLK output from the internal oscillator 106 from timing t1 to timing t2 into the measurement frequency A and outputs the measurement frequency A to the frequency control unit 105b. In the frequency control unit 105b, the LUT 204 outputs a correction value D corresponding to the measurement frequency A to the calculation unit 202. The arithmetic unit 202 and the DAC 203 output the updated frequency control value C to the internal oscillator 106 based on the correction value D. The internal oscillator 106 corrects the oscillation frequency based on the received frequency control value C. As a result, the frequency of the internal clock signal SCLK is corrected.

本実施の形態では、内部クロック信号SCLKの周波数は、1回の補正で、目標周波数Bと一致または近くなるように補正される。タイミングt2に1回目の周波数の補正を実施した段階で、内部クロック信号SCLKの周波数が、目標周波数Bまたは目標周波数Bに近い周波数に補正される。   In the present embodiment, the frequency of the internal clock signal SCLK is corrected so as to match or be close to the target frequency B by one correction. When the first frequency correction is performed at timing t2, the frequency of the internal clock signal SCLK is corrected to the target frequency B or a frequency close to the target frequency B.

シリアル通信を行なっていない時間であるタイミングt2からタイミングt3まではシリアル通信のクロック信号MCLKが入力されないため、補正動作を行なわない。   Since the clock signal MCLK for serial communication is not input from timing t2 to timing t3, which is the time when serial communication is not performed, no correction operation is performed.

第2のシリアル通信および第3のシリアル通信時の周波数補正動作も同様である。第2および第3のシリアル通信時の1ワード送信時の最終クロックの立ち下がりエッジのタイミングt5、t8において、周波数が補正される。   The same applies to the frequency correction operation during the second serial communication and the third serial communication. The frequency is corrected at timings t5 and t8 of the falling edge of the final clock when one word is transmitted in the second and third serial communications.

次に、実施の形態2の効果について説明する。
通常、撮像装置ではマスタとスレーブ間でシリアル通信によるデータの送受が頻繁に繰り返されるが、仮に2回の撮像動作のうち1回目の撮像後にシリアル通信を一定期間行なわず2回目の撮像動作を実施したとする。つまり、1回目の撮像動作が、内部クロック信号SCLKの周波数が目標周波数Bで撮像されたとして、1回目の撮像後、シリアル通信を一定期間行なわないために、周波数の補正が実施されず、内部発振器106の周波数が目標周波数Bからずれて、その差が大きくなったとなる。この状態で、2回目の撮像を行なった場合において、内部クロック信号SCLKの周波数を目標周波数Bに近づくよう段階的に補正すると、2回目の撮像時時には、1回目の撮像時から変動した光量計測時間が1段階分補正されたのみなので、1回目撮像時と2回目撮像時の撮像画像の明暗差が大きくなる。
Next, the effect of Embodiment 2 is demonstrated.
Normally, in an imaging device, transmission and reception of data by serial communication are frequently repeated between the master and the slave. However, the second imaging operation is performed without performing serial communication for a certain period after the first imaging among the two imaging operations. Suppose that That is, in the first imaging operation, assuming that the frequency of the internal clock signal SCLK is captured at the target frequency B, the serial communication is not performed for a certain period after the first imaging. The frequency of the oscillator 106 deviates from the target frequency B, and the difference becomes large. In this state, when the second imaging is performed, if the frequency of the internal clock signal SCLK is corrected stepwise so as to approach the target frequency B, the amount of light that has changed since the first imaging is measured during the second imaging. Since the time is only corrected by one step, the difference in brightness between the captured images at the first and second imaging increases.

本実施の形態では、1回の周波数補正で、内部クロック信号SCLKの周波数を目標周波数Bまたは目標周波数Bに近い周波数に補正することが可能である。したがって、前述の1回目撮像時点から周波数補正が一定期間実施されず2回目の撮像を行なった場合において、1回目撮像時と2回目撮像時の撮像画像の明暗差を小さくすることができる。   In the present embodiment, the frequency of the internal clock signal SCLK can be corrected to the target frequency B or a frequency close to the target frequency B by one frequency correction. Therefore, in the case where the frequency correction is not performed for a certain period from the time of the first imaging described above and the second imaging is performed, the difference in brightness between the captured images at the first imaging and the second imaging can be reduced.

実施の形態3
図9は、実施の形態3の画像処理装置の構成を表わす図である。
Embodiment 3
FIG. 9 is a diagram illustrating the configuration of the image processing apparatus according to the third embodiment.

マザーボード301をマスタ、撮像用モジュール302をスレーブとする。
実施の形態3の画像処理装置では、マザーボード301と撮像用モジュール302とが、クロック信号線CLKと、データ信号DATA_Iの信号線MOSIと、データ信号DATA_Oの信号線MISOとで接続される。
The motherboard 301 is a master and the imaging module 302 is a slave.
In the image processing apparatus according to the third embodiment, the motherboard 301 and the imaging module 302 are connected by a clock signal line CLK, a signal line MOSI for the data signal DATA_I, and a signal line MISO for the data signal DATA_O.

撮像用モジュール302は、イメージセンサ304と、AFE(Analog Front End)303とを備える。   The imaging module 302 includes an image sensor 304 and an AFE (Analog Front End) 303.

AFE303は、増幅器307と、ADC306と、デジタル画像処理部305と、タイミング設定部309とを備える。   The AFE 303 includes an amplifier 307, an ADC 306, a digital image processing unit 305, and a timing setting unit 309.

タイミング設定部309は、内部クロック生成回路101と、タイミング制御部308とを備える。   The timing setting unit 309 includes an internal clock generation circuit 101 and a timing control unit 308.

タイミング制御部308は、内部クロック生成回路101から出力される内部クロック信号SCLKに基づいて、イメージセンサ304、ADC306、およびデジタル画像処理部305の動作タイミングを指示するタイミング信号をイメージセンサ304、ADC306、およびデジタル画像処理部305に送る。また、タイミング制御部308は、内部クロック信号SCLKの周波数を補正するタイミングを指示するタイミング信号FCALを内部クロック生成回路101内の周波数制御部105aに送る。タイミング制御部308は、撮像した画像に影響を及ぼさないように、イメージセンサ304が撮像に寄与しない有効画素外の領域を走査する期間(以下、ブランキング期間と称する)において、タイミング信号FCALをハイレベルに設定する。   Based on the internal clock signal SCLK output from the internal clock generation circuit 101, the timing control unit 308 outputs a timing signal indicating the operation timing of the image sensor 304, ADC 306, and digital image processing unit 305 to the image sensor 304, ADC 306, And sent to the digital image processing unit 305. In addition, the timing control unit 308 sends a timing signal FCAL instructing the timing for correcting the frequency of the internal clock signal SCLK to the frequency control unit 105 a in the internal clock generation circuit 101. The timing control unit 308 sets the timing signal FCAL to high during a period during which the image sensor 304 scans an area outside the effective pixel that does not contribute to imaging (hereinafter referred to as a blanking period) so as not to affect the captured image. Set to level.

内部クロック生成回路101は、実施の形態1と同様である。内部クロック生成回路101内の周波数制御部105aは、タイミング制御部308から出力されるタイミング信号FCALがハイレベルのときに、内部クロック生成回路101内の内部発振器106の発振周波数を補正する。   The internal clock generation circuit 101 is the same as that in the first embodiment. The frequency control unit 105a in the internal clock generation circuit 101 corrects the oscillation frequency of the internal oscillator 106 in the internal clock generation circuit 101 when the timing signal FCAL output from the timing control unit 308 is at a high level.

イメージセンサ304は、撮像動作において被写体の光量を電気信号に変換する。
増幅器307は、イメージセンサ304から出力される電気信号を増幅する。
The image sensor 304 converts the amount of light of the subject into an electrical signal in the imaging operation.
The amplifier 307 amplifies the electrical signal output from the image sensor 304.

ADC306は、増幅器307において増幅されたアナログ信号をデジタル信号に変換する。   The ADC 306 converts the analog signal amplified by the amplifier 307 into a digital signal.

デジタル画像処理部305は、ADC306から出力されるデジタル信号を処理する。デジタル画像処理部305において処理された画像データは、信号線MISOを介してマスタであるマザーボード301に送信される。   The digital image processing unit 305 processes the digital signal output from the ADC 306. The image data processed in the digital image processing unit 305 is transmitted to the mother board 301 as a master via the signal line MISO.

図10は、実施の形態3における内部クロック信号SCLKの周波数補正のタイミングチャートである。   FIG. 10 is a timing chart of frequency correction of internal clock signal SCLK in the third embodiment.

図10には、シリアル通信用のクロック信号MCLKと、マスタからスレーブに対して送信されるシリアル通信用のデータ信号DATA_Iと、タイミング信号FCALと、スレーブ側の内部発振器106から出力される内部クロック信号SCLKと、内部クロック信号SCLKの周波数が示されている。   FIG. 10 shows a serial communication clock signal MCLK, a serial communication data signal DATA_I transmitted from the master to the slave, a timing signal FCAL, and an internal clock signal output from the slave-side internal oscillator 106. SCLK and the frequency of the internal clock signal SCLK are shown.

内部発振器106のパルス数のカウント動作の開始、終了については実施の形態1と同一であるため、説明を繰り返さない。   Since the start and end of the counting operation of the number of pulses of the internal oscillator 106 are the same as those in the first embodiment, description thereof will not be repeated.

ここでは、第1のシリアル通信の期間がブランキング期間であるとする。タイミング制御部308は、第1のシリアル通信の期間、タイミング信号FCALをハイレベルに設定する。   Here, it is assumed that the first serial communication period is a blanking period. The timing control unit 308 sets the timing signal FCAL to a high level during the first serial communication.

タイミング制御部308から内部クロック生成回路101に対して出力する周波数補正のタイミング信号FCALによって周波数補正動作が制御される。   The frequency correction operation is controlled by a frequency correction timing signal FCAL output from the timing control unit 308 to the internal clock generation circuit 101.

タイミングt1において、第1のシリアル通信の1クロック目が立ち下がる。タイミングt1から、内部発振器106の出力のパルス数のカウント動作が開始される。タイミングt2の1ワード送信時の最終クロックの立ち下がりエッジまでカウント動作が継続される。   At timing t1, the first clock of the first serial communication falls. From timing t1, counting of the number of pulses output from the internal oscillator 106 is started. The counting operation is continued until the falling edge of the final clock when one word is transmitted at timing t2.

第1のシリアル通信の最終クロックの立ち下がりのタイミングにおいて、タイミング信号FCALがハイレベルに設定されているので、内部クロック生成回路101の周波数制御部105aは、実施の形態1と同様の方法で、内部発振器106の発振周波数を補正することによって、内部クロック信号SCLKの周波数を補正する。   Since the timing signal FCAL is set to the high level at the falling timing of the final clock of the first serial communication, the frequency control unit 105a of the internal clock generation circuit 101 is the same method as in the first embodiment. By correcting the oscillation frequency of the internal oscillator 106, the frequency of the internal clock signal SCLK is corrected.

タイミング制御部308は、第1のシリアル通信の期間の終了後、タイミング信号FCALをロウレベルに設定する。   The timing control unit 308 sets the timing signal FCAL to a low level after the end of the first serial communication period.

タイミングt4に示す第2のシリアル通信の1クロック目の立ち下がりエッジから同様にカウント動作を実施する。タイミングt5に示す第2のシリアル通信の1ワード送信時の最終クロックの立ち下がりのタイミングでは、タイミング信号FCALがロウレベルである。よって、内部クロック生成回路101の周波数制御部105aは、内部発振器106の発振周波数を補正しない。   The count operation is similarly performed from the falling edge of the first clock of the second serial communication indicated at the timing t4. The timing signal FCAL is at the low level at the falling timing of the final clock when transmitting one word of the second serial communication at the timing t5. Therefore, the frequency control unit 105 a of the internal clock generation circuit 101 does not correct the oscillation frequency of the internal oscillator 106.

本実施の形態では、ブランキング期間にのみ内部クロック信号SCLKの周波数を補正し、その他の画素領域を走査している期間では、内部クロック信号SCLKの周波数を補正しないので、撮像画像における斑の発生を抑制することができる。   In this embodiment, the frequency of the internal clock signal SCLK is corrected only during the blanking period, and the frequency of the internal clock signal SCLK is not corrected during the period during which other pixel regions are scanned. Can be suppressed.

(変形例)
本発明は、上記の実施形態に限定されるものではなく、たとえば、以下のような変形例も含まれる。
(Modification)
The present invention is not limited to the above embodiment, and includes, for example, the following modifications.

(1)実施の形態2では、LUTを用いて1回の補正で、内部クロック信号SCLKの周波数を目標周波数Bに補正したが、これに限定されるものではない。LUTを用いて、内部クロック信号SCLKの周波数が目標周波数Bに近づくように段階的に補正することとしてもよい。   (1) In the second embodiment, the frequency of the internal clock signal SCLK is corrected to the target frequency B by one correction using the LUT. However, the present invention is not limited to this. Using the LUT, the frequency of the internal clock signal SCLK may be corrected step by step so as to approach the target frequency B.

(2)実施の形態3において、周波数制御部105aは、ブランキング期間だけ内部クロック信号SCLKの周波数を補正する第1のモードと、ブランキング期間に係らず内部クロック信号SCLKの周波数を補正する第2のモードとを有するものとしてもよい。マスタ側のマザーボード301からスレーブ側の撮像用モジュール302に、データ信号DATA_Iによって、モードを切り替える指示が送られるものとしてもよい。   (2) In the third embodiment, the frequency control unit 105a corrects the frequency of the internal clock signal SCLK only during the blanking period, and the first mode corrects the frequency of the internal clock signal SCLK regardless of the blanking period. It is good also as what has 2 modes. An instruction to switch modes may be sent from the master motherboard 301 to the slave imaging module 302 by the data signal DATA_I.

(3)本実施の形態では、内部発振器106から出力される内部クロック信号SCLKは、内部発振器から直接生成され、内部発振器106の発振周波数と内部クロック信号SCLKの周波数は同一であるものとしたが、これに限定されるものではない。   (3) In this embodiment, the internal clock signal SCLK output from the internal oscillator 106 is directly generated from the internal oscillator, and the oscillation frequency of the internal oscillator 106 and the frequency of the internal clock signal SCLK are the same. However, the present invention is not limited to this.

内部発振器106から出力される内部クロック信号SCLKは、内部発振器106によって生成されたクロックを分周したクロックとしてもよい。この場合、内部クロック信号SCLKの周波数は、内部発振器106の周波数の(1/n)倍となる。nは整数である。   The internal clock signal SCLK output from the internal oscillator 106 may be a clock obtained by dividing the clock generated by the internal oscillator 106. In this case, the frequency of the internal clock signal SCLK is (1 / n) times the frequency of the internal oscillator 106. n is an integer.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

101 内部クロック生成回路、102 状態検出部、103 状態制御部、104 周波数測定部、105a,105b 周波数制御部、106 内部発振器、107 SPI通信部、108 スイッチ、201 比較部、202 演算部、203 DAコンバータ、204 LUT、301 マザーボード、302 撮像用モジュール、303 アナログフロントエンド、304 イメージセンサ、305 画像処理部、306 ADコンバータ、307 増幅器、308 タイミング制御部、309 タイミング生成部、IV1〜IV10 インバータ、NOR1,NOR2 否定論理和回路、C1〜C14 容量素子、N1〜N14 NMOSトランジスタ。   DESCRIPTION OF SYMBOLS 101 Internal clock generation circuit, 102 State detection part, 103 State control part, 104 Frequency measurement part, 105a, 105b Frequency control part, 106 Internal oscillator, 107 SPI communication part, 108 Switch, 201 Comparison part, 202 Operation part, 203 DA Converter, 204 LUT, 301 Motherboard, 302 Imaging module, 303 Analog front end, 304 Image sensor, 305 Image processor, 306 AD converter, 307 Amplifier, 308 Timing controller, 309 Timing generator, IV1 to IV10 Inverter, NOR1 , NOR2 NAND circuit, C1-C14 capacitive element, N1-N14 NMOS transistor.

Claims (12)

シリアル通信用のクロック信号を生成する第2の装置との間でシリアル通信が可能な第1の装置における内部クロック生成回路であって、
前記シリアル通信用のクロック信号よりも低い精度の内部クロック信号を出力する内部発振器と、
前記第2の装置から送信される前記シリアル通信用のクロック信号に基づいて、前記内部発振器から出力される内部クロック信号の周波数を測定する周波数測定部と、
前記測定された周波数と目標周波数とに基づいて、前記内部発振器から出力される前記内部クロック信号の周波数を補正する周波数制御部とを備えた、内部クロック生成回路。
An internal clock generation circuit in a first device capable of serial communication with a second device that generates a clock signal for serial communication,
An internal oscillator that outputs an internal clock signal with lower accuracy than the clock signal for serial communication;
A frequency measurement unit that measures the frequency of the internal clock signal output from the internal oscillator based on the serial communication clock signal transmitted from the second device;
An internal clock generation circuit comprising: a frequency control unit that corrects the frequency of the internal clock signal output from the internal oscillator based on the measured frequency and the target frequency.
前記周波数測定部は、前記第2の装置から定められたビット単位のデータの送信時において、最初に供給される前記シリアル通信用のクロック信号の立下りエッジのタイミングから最後に供給される前記シリアル通信用のクロック信号の立下がりエッジのタイミングまでの期間における前記内部クロック信号のパルス数をカウントすることによって、前記内部クロック信号の周波数を測定する、請求項1記載の内部クロック生成回路。   The frequency measurement unit is configured to transmit the serial data supplied last from a falling edge timing of the serial communication clock signal supplied first when transmitting data in bit units determined from the second device. 2. The internal clock generation circuit according to claim 1, wherein the frequency of the internal clock signal is measured by counting the number of pulses of the internal clock signal in a period until a timing of a falling edge of the communication clock signal. 前記周波数制御部は、前記第2の装置からの前記定められたビット単位のデータの送信ごとに、前記測定された周波数が前記目標周波数よりも大きいときに、一定値だけ前記内部クロック信号の周波数を低下させ、前記測定された周波数が前記目標周波数よりも小さいときに、前記一定値だけ前記内部クロック信号の周波数を増加させる、請求項2記載の内部クロック生成回路。   When the measured frequency is larger than the target frequency for each transmission of the determined bit unit data from the second device, the frequency control unit is configured to reduce the frequency of the internal clock signal by a certain value. The internal clock generation circuit according to claim 2, wherein when the measured frequency is smaller than the target frequency, the frequency of the internal clock signal is increased by the constant value. 前記周波数制御部は、前記測定された周波数と前記目標周波数との差に対する前記内部クロック信号の周波数の補正値を定めたテーブルを有し、前記第2の装置からの前記定められたビット単位のデータの送信ごとに、前記テーブルに基づいて、前記内部クロック信号の周波数を補正する、請求項2記載の内部クロック生成回路。   The frequency control unit has a table that defines a correction value of the frequency of the internal clock signal with respect to the difference between the measured frequency and the target frequency, and the predetermined bit unit from the second device The internal clock generation circuit according to claim 2, wherein the frequency of the internal clock signal is corrected based on the table every time data is transmitted. 前記テーブルにおいて、前記測定された周波数と前記目標周波数との差の絶対値が大きいほど、前記補正値が大きい、請求項4記載の内部クロック生成回路。   5. The internal clock generation circuit according to claim 4, wherein in the table, the correction value increases as the absolute value of the difference between the measured frequency and the target frequency increases. 前記目標周波数は、前記第2の装置から前記シリアル通信用のクロック信号に同期して送信されるデータ信号によって指定される、請求項1に記載の内部クロック生成回路。   2. The internal clock generation circuit according to claim 1, wherein the target frequency is designated by a data signal transmitted from the second device in synchronization with the clock signal for serial communication. 前記周波数測定部の前段に設けられ、前記シリアル通信用のクロック信号を受けるスイッチと、
前記第2の装置から前記定められたビット単位の送信時に前記最初に供給される前記シリアル通信用のクロック信号の立下りエッジのタイミングから前記最後に供給される前記シリアル通信用のクロック信号の立下がりエッジのタイミングまでの期間において、前記スイッチをオンにする状態制御部を備える、請求項2記載の内部クロック生成回路。
A switch provided in a front stage of the frequency measurement unit, for receiving the clock signal for serial communication;
The rising edge of the clock signal for serial communication supplied last from the timing of the falling edge of the clock signal for serial communication supplied first at the time of transmission of the predetermined bit unit from the second device. The internal clock generation circuit according to claim 2, further comprising a state control unit that turns on the switch during a period up to a timing of a falling edge.
前記シリアル通信用のクロック信号は、水晶振動子を使用した発振器で生成され、
前記内部発振器は、水晶振動子を使用せずに、前記内部クロック信号を生成する、請求項1記載の内部クロック生成回路。
The serial communication clock signal is generated by an oscillator using a crystal resonator,
The internal clock generation circuit according to claim 1, wherein the internal oscillator generates the internal clock signal without using a crystal resonator.
前記シリアル通信は、SPI通信規格に準拠する、請求項1記載の内部クロック生成回路。   The internal clock generation circuit according to claim 1, wherein the serial communication conforms to an SPI communication standard. 請求項1〜9のいずれか1項に記載の内部クロック生成回路と、
前記内部クロック信号に基づいて動作するイメージセンサとを備えた撮像用モジュール。
An internal clock generation circuit according to any one of claims 1 to 9,
An imaging module comprising: an image sensor that operates based on the internal clock signal.
前記イメージセンサが有効画素領域外を走査する期間に、前記周波数制御部に前記内部クロック信号の周波数を補正させるタイミング制御部とを備える、請求項10記載の撮像用モジュール。   The imaging module according to claim 10, further comprising: a timing control unit that causes the frequency control unit to correct the frequency of the internal clock signal during a period in which the image sensor scans outside the effective pixel region. 前記第2の装置であって、マスタ装置として機能するマザーボードと、
前記第1の装置であって、スレーブ装置として機能する請求項10または11記載の撮像用モジュールとを備えた画像処理装置。
A motherboard that is the second device and functions as a master device;
An image processing apparatus comprising the imaging module according to claim 10, wherein the image processing module is the first apparatus and functions as a slave apparatus.
JP2018097042A 2018-05-21 2018-05-21 Internal clock generation circuit, module for imaging and image processing device Pending JP2019204156A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018097042A JP2019204156A (en) 2018-05-21 2018-05-21 Internal clock generation circuit, module for imaging and image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018097042A JP2019204156A (en) 2018-05-21 2018-05-21 Internal clock generation circuit, module for imaging and image processing device

Publications (1)

Publication Number Publication Date
JP2019204156A true JP2019204156A (en) 2019-11-28

Family

ID=68726925

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018097042A Pending JP2019204156A (en) 2018-05-21 2018-05-21 Internal clock generation circuit, module for imaging and image processing device

Country Status (1)

Country Link
JP (1) JP2019204156A (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006165829A (en) * 2004-12-06 2006-06-22 Sony Corp Driving method of solid-state image sensor, signal processing unit of solid-state image sensor, and imaging apparatus
JP2011150310A (en) * 2009-12-24 2011-08-04 Canon Finetech Inc Image forming apparatus
US20170060172A1 (en) * 2015-08-25 2017-03-02 Pixart Imaging (Penang) Sdn.Bhd. Navigation system and clock calibration method thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006165829A (en) * 2004-12-06 2006-06-22 Sony Corp Driving method of solid-state image sensor, signal processing unit of solid-state image sensor, and imaging apparatus
JP2011150310A (en) * 2009-12-24 2011-08-04 Canon Finetech Inc Image forming apparatus
US20170060172A1 (en) * 2015-08-25 2017-03-02 Pixart Imaging (Penang) Sdn.Bhd. Navigation system and clock calibration method thereof

Similar Documents

Publication Publication Date Title
US7444168B2 (en) Radio communication semiconductor integrated circuit, data processing semiconductor integrated circuit and portable device
US9060139B2 (en) Solid-state imaging apparatus and method for driving the same
TWI499199B (en) Automatic calibrated oscillation method and apparatus using the same
US10416706B2 (en) Calibration unit for calibrating an oscillator, oscillator arrangement and method for calibrating an oscillator
US20090284298A1 (en) Method for automatically adjusting clock frequency and clock frequency adjusting circuit
JP2008072324A (en) Image sensor, module and electronic equipment
JP2019204156A (en) Internal clock generation circuit, module for imaging and image processing device
KR20220114056A (en) Duty cycle correction circuit and its application
JP2019125841A (en) Video signal receiving device, video signal receiving module, and video signal transmitting/receiving system
TW201830190A (en) Reference clock-less cmos image sensor
US9667238B2 (en) Duty cycle correction circuit and image sensing device including the same
CN112865791B (en) Frequency generator device, image processing chip and frequency signal correction method
TWI385926B (en) Clock generator
JP2005064590A (en) Transmission apparatus
JP4839490B2 (en) Automatic data skew correction system
TW201503601A (en) On-chip oscillating method which is able to calibrate its frequency and on-chip oscillating apparatus which is able to calibrate its frequency
JP6651834B2 (en) Voltage-controlled oscillator, electronic device, and moving object
JP5082697B2 (en) Serial interface circuit and electronic device
JP6180683B2 (en) Imaging device
US11844496B2 (en) Imaging system
US11764728B1 (en) Oscillator using chopper circuit for suppressing flicker noise of current sources and associated clock generation method
TWI766520B (en) Clock generator device, image processing chip, and clock signal calibration method
JP2012050059A (en) Oscillation frequency calibration method and oscillation frequency calibration device
KR102426204B1 (en) Oscillator circuit with low jitter and insensitive to temperature changes
US10720910B1 (en) Eye diagram observation device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220301

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220719