JP4962024B2 - Data transmission / reception system - Google Patents

Data transmission / reception system Download PDF

Info

Publication number
JP4962024B2
JP4962024B2 JP2007020678A JP2007020678A JP4962024B2 JP 4962024 B2 JP4962024 B2 JP 4962024B2 JP 2007020678 A JP2007020678 A JP 2007020678A JP 2007020678 A JP2007020678 A JP 2007020678A JP 4962024 B2 JP4962024 B2 JP 4962024B2
Authority
JP
Japan
Prior art keywords
clock
mode
data
audio
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007020678A
Other languages
Japanese (ja)
Other versions
JP2008187586A (en
Inventor
直樹 江島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2007020678A priority Critical patent/JP4962024B2/en
Publication of JP2008187586A publication Critical patent/JP2008187586A/en
Application granted granted Critical
Publication of JP4962024B2 publication Critical patent/JP4962024B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、HDMI(High−Definition Muitimedia Interface)など、映像、音声、データなどが多重化されたデジタルインターフェースを用いたデータ送信・受信システムに関し、特に、HDMIを改善して、受信側をクロックマスターとして動作可能なシステムを実現し、クロック純度を活用して高音質化を図ろうとするものである。   The present invention relates to a data transmission / reception system using a digital interface in which video, audio, data, etc. are multiplexed, such as HDMI (High-Definition Multimedia Interface), and in particular, the HDMI is improved and the receiving side is a clock master. To achieve high sound quality by utilizing the clock purity.

近年、HDMIが普及している。これは、1本で映像・音声・付加データを伝送できる特徴があるためである。これは、ますますデジタル機器の接続を便利にし、手軽に機器接続が可能となってきた。しかし、一方で、純粋なオーディオ機器ではないため、高音質を熱望する一部のオーディオマニアなどから音質が良くないと、いう厳しい評価も散見されるようになってきた。実際には、機器固有の問題である実装ノイズ対策が不十分であることが課題であることも多いが、システムとして見て、さらに究極を目指すという観点で、まだまだ改善できる余地が残されていると考えられる。   In recent years, HDMI has become widespread. This is because a single video / audio / additional data can be transmitted. This has made it easier and more convenient to connect digital devices. However, on the other hand, since it is not a pure audio device, a severe evaluation that sound quality is not good from some audiophiles who are eager for high sound quality has come to be seen. In practice, there are many problems that are due to insufficient mounting noise countermeasures, which is a problem specific to equipment, but there is still room for improvement in terms of achieving the ultimate as a system. it is conceivable that.

HDMIの特徴は、送信側で、映像信号と、音声信号がクロックベースでコヒーレント同期していれば、その状態を、そっくりそのまま、受信側へ伝送して投影できる点にある。具体的には、映像クロック(ピクセルクロック)と、付加データを伝送して、コヒーレントな音声クロックを再生する仕組みを有する。各種の映像クロック、音声クロックが選択できるよう用意され、それらの組合せも、数10種類と豊富である。また、それらの全ての組合せに対応する伝送パラメータが用意されている(例えば特許文献1、非特許文献1参照)。   The feature of HDMI is that if a video signal and an audio signal are coherently synchronized on a clock basis on the transmission side, the state can be transmitted to the reception side as it is and projected. Specifically, it has a mechanism for reproducing a coherent audio clock by transmitting a video clock (pixel clock) and additional data. Various video clocks and audio clocks are prepared so that they can be selected. In addition, transmission parameters corresponding to all combinations thereof are prepared (for example, see Patent Document 1 and Non-Patent Document 1).

図7は、HDMIを用いた従来のデータ送信・受信システムの一例を示す図である。図において、10は送信側機器、20は受信側機器、15はHDMIケーブルである。送信側機器10は、生成する送信側ピクセルクロック生成手段900と、送信側音声クロック生成手段850と、CTS生成手段100と、BD950を再生して映像信号と音声信号を取り出すBD/DVDデコーダ951と、BD/DVDデコーダ951の出力をエンコードしてHDMIデータDを出力するHDMIデータエンコーダ952と、送信側機器の全体の動作を制御する制御手段610と、を備える。CTS生成手段100は、音声クロック85を制御手段610から与えられる値Nで分周する1/N分周器110と、1/N分周器110の出力をピクセルクロック90で計数するカウンタ120とを備える。また、受信側機器20は、音声クロック再生手段200と、AVデータデコード手段700と、DAコンバータ680と、受信側機器の全体の動作を制御する制御手段620と、を備える。音声クロック再生手段200は、送信側機器10より受信したピクセルクロック(PCK)を送信側機器10より受信したCTS信号で分周する分周器210と、位相比較器(PD)220,電圧制御発振器(VCO)230,及び1/N分周器240で構成されるPLLとを備える。   FIG. 7 is a diagram illustrating an example of a conventional data transmission / reception system using HDMI. In the figure, 10 is a transmission side device, 20 is a reception side device, and 15 is an HDMI cable. The transmission side device 10 includes a transmission side pixel clock generation unit 900, a transmission side audio clock generation unit 850, a CTS generation unit 100, a BD / DVD decoder 951 that reproduces the BD 950 and extracts a video signal and an audio signal. , An HDMI data encoder 952 that encodes the output of the BD / DVD decoder 951 and outputs the HDMI data D, and a control means 610 that controls the overall operation of the transmission-side device. The CTS generation unit 100 includes a 1 / N frequency divider 110 that divides the audio clock 85 by a value N given from the control unit 610, and a counter 120 that counts the output of the 1 / N frequency divider 110 with the pixel clock 90. Is provided. The receiving side device 20 also includes an audio clock reproduction unit 200, an AV data decoding unit 700, a DA converter 680, and a control unit 620 that controls the overall operation of the receiving side device. The audio clock reproduction means 200 includes a frequency divider 210 that divides the pixel clock (PCK) received from the transmission-side device 10 by the CTS signal received from the transmission-side device 10, a phase comparator (PD) 220, and a voltage-controlled oscillator. (VCO) 230 and a PLL configured with a 1 / N frequency divider 240.

このように構成された従来のデータ送信・受信システムの動作について説明する。
送信側機器10において、送信側ピクセルクロック生成手段900が生成するピクセルクロック90は、CTS生成手段100に供給されるとともにHDMIケーブル15を介して受信側機器20へ、PCK1として伝送される。CTS生成手段100では、送信側音声クロック生成手段850が生成する音声クロック85を1/N分周器110で1/Nの周波数に分周する。ここで1/N分周器110のパラメータNは制御手段610から与えられる。カウンタ120は、1/N分周器110の分周出力である周波数128Fs/Nの周期を、ピクセルクロックPCK90で計数する。カウンタ120の出力はHDMIケーブル15を介して受信側機器20へ、CTS1として伝送される。また、パラメータNはHDMIケーブル15を介して受信側機器20へ、N1として伝送される。また、BD/DVDデコーダ951はBD950を再生して映像信号と音声信号を取り出し、HDMIデータエンコーダ952はBD/DVDデコーダ951の出力をエンコードしてHDMIデータDを出力する。このデータDはHDMIケーブル15を介して受信側機器20へ、Data1として伝送される。
The operation of the conventional data transmission / reception system configured as described above will be described.
In the transmission side device 10, the pixel clock 90 generated by the transmission side pixel clock generation unit 900 is supplied to the CTS generation unit 100 and transmitted to the reception side device 20 via the HDMI cable 15 as PCK 1. In the CTS generation unit 100, the audio clock 85 generated by the transmission side audio clock generation unit 850 is frequency-divided by the 1 / N frequency divider 110 to a frequency of 1 / N. Here, the parameter N of the 1 / N frequency divider 110 is given from the control means 610. The counter 120 counts the period of the frequency 128 Fs / N, which is the frequency-divided output of the 1 / N frequency divider 110, with the pixel clock PCK90. The output of the counter 120 is transmitted as CTS 1 to the receiving side device 20 via the HDMI cable 15. The parameter N is transmitted as N1 to the receiving side device 20 via the HDMI cable 15. Also, the BD / DVD decoder 951 reproduces the BD 950 to extract the video signal and the audio signal, and the HDMI data encoder 952 encodes the output of the BD / DVD decoder 951 and outputs the HDMI data D. This data D is transmitted as Data 1 to the receiving side device 20 via the HDMI cable 15.

受信側機器20では、HDMI−1ケーブル15を介して受信したPCK1、CTS1、N1、Data1を基に、音声クロック再生手段200で音声クロック82を再生する。即ち、分周器210で、PCK1をCTS1で分周する。このPCK/CTSとなる周波数を、位相比較器(PD)220,電圧制御発振器(VCO)230,及び1/N分周器240で構成されるPLLでN倍に逓倍する。これにより、128Fsの音声クロック82が再生される。データは、AVデータデコード手段700でデコードし、音声データ70、映像データ71として取り出す。音声データ70は、DAコンバータ680へ供給され、音声クロック再生手段200で再生された音声クロック82のタイミングで、DA変換される。   In the receiving device 20, the audio clock 82 is reproduced by the audio clock reproduction means 200 based on PCK 1, CTS 1, N 1 and Data 1 received via the HDMI-1 cable 15. That is, the frequency divider 210 divides PCK1 by CTS1. The frequency that becomes the PCK / CTS is multiplied by N times by a PLL that includes a phase comparator (PD) 220, a voltage controlled oscillator (VCO) 230, and a 1 / N frequency divider 240. As a result, the 128 Fs audio clock 82 is reproduced. The data is decoded by AV data decoding means 700 and taken out as audio data 70 and video data 71. The audio data 70 is supplied to the DA converter 680 and DA-converted at the timing of the audio clock 82 reproduced by the audio clock reproduction means 200.

このようなHDMIで、音質が劣化する要因は、大きくは以下の2つである。
まず1つめは、映像クロック(ピクセルクロック)だけが伝送されて基準となるため、このクロック純度が低いと、音声クロック純度も同様に低くなることである。
There are two major factors that cause deterioration in sound quality in such HDMI.
First, since only the video clock (pixel clock) is transmitted and becomes a reference, if the clock purity is low, the audio clock purity is similarly lowered.

2つめには、再生PLLの影響である。図8に、各種のクロックのスペクトラムを例示する。   Second is the effect of the regenerative PLL. FIG. 8 illustrates various clock spectra.

図8(A)は、水晶発振出力のスペクトラムである。このスペクトラムでは、サイドバンドノイズも少なく、周波数ドリフトも最小で、クロック純度が十分高いことが分かる。   FIG. 8A shows the spectrum of the crystal oscillation output. In this spectrum, it can be seen that the clock purity is sufficiently high with little sideband noise and minimal frequency drift.

同図(B)は、HDMIを用いて作成したコヒーレントなクロックを、PLLを用いて受信側で再生したときのスペクトラムの一例である。この例では、PLLを構成するVCOなどの影響で、ややジッタの多いクロックとなっている。   FIG. 5B is an example of a spectrum when a coherent clock created using HDMI is reproduced on the receiving side using PLL. In this example, the clock is slightly jittery due to the influence of the VCO constituting the PLL.

また同図(C)は、参考までに、IEEE1394を用いてクロックの送信を行った場合で、非同期クロックのため内在するシステムジッタの影響が出ている一例を示すものである。   For reference, FIG. 2C shows an example in which the influence of the system jitter inherent in the case of transmitting the clock using IEEE 1394 is present due to the asynchronous clock.

高音質の為には、高精度のDAコンバータを、クロック純度の高いクロックで動作させる必要がある。時間軸の揺らぎや、不正確さ(ジッタ)は、DAコンバータで電圧に変換され、信号が歪んだり、ノイズが増加したりするので、例えば同図(C)のようなクロックでは、高音質を望めない。この高音質のためには、クロック純度の高い同図(A)のような特性を示すものが、より良い。   For high sound quality, it is necessary to operate a high-precision DA converter with a clock having high clock purity. Time axis fluctuations and inaccuracies (jitter) are converted to voltage by the DA converter, and the signal is distorted and noise increases. For example, a clock such as the one shown in FIG. I can't hope. For this high sound quality, it is better that the clock purity is as shown in FIG.

これらの両方を解決するには、受信側に、水晶発振手段を置いて、ジッタの無い高純度クロックを、直接DAコンバータに供給するのが好ましい。   In order to solve both of these, it is preferable to place a crystal oscillation means on the receiving side and supply a high-purity clock without jitter directly to the DA converter.

しかしながら、受信側に水晶発振手段を置くためには、長い周期で、データレートを受信側マスターに合わせることが必要になる。そうしなければ、データの過不足が生じるからである。   However, in order to place the crystal oscillation means on the receiving side, it is necessary to adjust the data rate to the receiving master in a long cycle. Otherwise, data deficiency will occur.

そのために、受信側から送信側に、周波数偏差情報を返して、これに合わすように、非同期パケツトデータを細かく、あるいは疎く送るようにする、従来技術がある(例えば特許文献2参照)。   For this purpose, there is a conventional technique in which the frequency deviation information is returned from the receiving side to the transmitting side, and the asynchronous packet data is sent finely or loosely so as to match it (see, for example, Patent Document 2).

次に、この従来技術を、HDMIと組み合わせて解決する場合について述べる。
受信側に水晶発振手段を置いてジッタの無い高純度クロックを直接DAコンバータに供給するために、HDMIを用いて受信側に水晶発信手段を設けて構成した、従来のデータ送信・受信システム9000の例を、図9に示す。
Next, the case where this prior art is solved in combination with HDMI will be described.
In order to directly supply a DA converter with a high-purity clock without jitter by placing a crystal oscillation means on the reception side, a conventional data transmission / reception system 9000 comprising a crystal transmission means on the reception side using HDMI is used. An example is shown in FIG.

図9において、10は送信側機器、20は受信側機器、15はHDMIケーブルである。
図9において、100はHDMIのオーディオクロック再生システムの一部であるが、ここでは、ピクセルクロックPCK1でオーディオクロック周期の128倍を計数したデータを、CTS1として、NパラメータとともにHDMIで伝送している。200は同じく、HDMIのオーディオクロック再生システムの一部である。PLL構成により、送信側の128倍オーディオクロックと同じ周波数82を再生する。通常は、このHDMIのオーディオクロック再生システムを使用する。
In FIG. 9, 10 is a transmission side device, 20 is a reception side device, and 15 is an HDMI cable.
In FIG. 9, reference numeral 100 denotes a part of the HDMI audio clock reproduction system, but here, data obtained by counting 128 times the audio clock period by the pixel clock PCK1 is transmitted as CTS1 by HDMI together with the N parameter. . Similarly, 200 is a part of an HDMI audio clock reproduction system. With the PLL configuration, the same frequency 82 as the 128-times audio clock on the transmission side is reproduced. Normally, this HDMI audio clock reproduction system is used.

800は水晶発振手段である。水晶発振手段800の出力80を、高音質モードにおいては、高純度な音声クロックとして、使用することが出来る。ところが、受信側をマスターにすると、送信側のクロックとは独立であるため、必然的に周波数差が生じる。この周波数差は、時間と共にデータの過不足を生じさせるようになる。ここで、データの過不足があっても、該データの量を、バッファ容量の一定の範囲内に収める必要がある。そのため、バッファ690のデータフローを管理する制御手段620のコントロールで、送信側機器10に、ARC_CONTが、CEC1を介してフィードバックされる。これに基づいて、制御手段610は、送信側の3つの水晶発振手段を切換える。そのうち、850は中心周波数のもの、860は中心+0.1%の偏差のもの、870は中心−0.1%の偏差のものである。制御の概念を、図10に示す。   Reference numeral 800 denotes crystal oscillation means. The output 80 of the crystal oscillation means 800 can be used as a high-purity audio clock in the high sound quality mode. However, when the receiving side is set as a master, it is independent of the clock on the transmitting side, so that a frequency difference inevitably occurs. This frequency difference causes an excess or deficiency of data with time. Here, even if there is an excess or deficiency of data, it is necessary to keep the amount of data within a certain range of the buffer capacity. Therefore, ARC_CONT is fed back to the transmitting-side device 10 via CEC1 under the control of the control unit 620 that manages the data flow in the buffer 690. Based on this, the control means 610 switches the three crystal oscillation means on the transmission side. Of these, 850 is the center frequency, 860 is the center + 0.1% deviation, and 870 is the center -0.1% deviation. The concept of control is shown in FIG.

同図(A)において、最初はまず、バッファサイズをセンターになるよう、高めの水晶を用いる。その後、中心周波数に戻す。中心周波数ではあっても、若干の周波数差があるため、バッファの格納サイズが所定のref1になる。この場合、アンダーフローを避けるように、+側の水晶を選択する。そうすると、バッファの格納サイズが、所定のref2に達するので、今度は、オーバーフローをさけるため、中心周波数のものに戻す。以降、これを繰り返す。このようにして、バッファが管理され、データレートが平均値として受信側水晶のレートに合致する。同図(B)は、送受の中心周波数ずれが逆の場合であるが、詳細な説明は簡単のため省略する。図9に戻って、これらの動作を説明する。このようにして、受信側水晶でのデータレートフロー制御は、達成できる。   In FIG. 2A, first, a higher crystal is used so that the buffer size becomes the center. Thereafter, the center frequency is restored. Even at the center frequency, there is a slight frequency difference, so that the buffer storage size is a predetermined ref1. In this case, the crystal on the + side is selected so as to avoid underflow. Then, the storage size of the buffer reaches a predetermined ref2, and this time, the buffer is returned to the center frequency in order to avoid overflow. This is repeated thereafter. In this way, the buffer is managed and the data rate matches the rate of the receiving crystal as an average value. FIG. 5B shows the case where the transmission / reception center frequency shift is opposite, but a detailed description is omitted for simplicity. Returning to FIG. 9, these operations will be described. In this way, data rate flow control at the receiving crystal can be achieved.

しかしながら、このシステムには、課題がある。すなわち、送信側のクロック周波数を大きく振るので、受信側だけでなく、送信側でも、音声を同時に再生する場合に、音声クロックが大きく変動し、音程が常に高低いずれかかにズレてしまう欠点がある。このようなピッチ、音程のズレは、ハイファイマニアにとっては、容認出来ないものである。   However, this system has challenges. In other words, since the clock frequency on the transmission side is greatly varied, not only on the reception side but also on the transmission side, the sound clock fluctuates greatly and the pitch always shifts to either high or low when reproducing the sound simultaneously. is there. Such pitch and pitch deviations are unacceptable for Hi-Fi enthusiasts.

もう1つの課題は、音声クロックと、映像クロックのズレである。音声が受信側に律速されるのに対して、映像が送信側に律速されるため、時間と共に、画と音の時間差が拡大していくことである。   Another problem is the difference between the audio clock and the video clock. The sound is rate-controlled on the receiving side, while the video is rate-controlled on the transmitting side, so the time difference between the image and the sound increases with time.

図11はこの様子をグラフ化したものである。相対周波数偏差が、±30ppmと、±100ppmの場合を示す。+100ppmでは、30分以内に+100msの時間差が生じてしまうことが分かる。映画などで経験するリップシンクでは、音が画より遅れる場合に、違和感を感じるのが+100ms程度であるという調査がある(図12参照)。   FIG. 11 is a graph showing this situation. The relative frequency deviations are ± 30 ppm and ± 100 ppm. It can be seen that at +100 ppm, a time difference of +100 ms occurs within 30 minutes. In the case of lip sync experienced in movies and the like, there is an investigation that when the sound is delayed from the picture, it feels strange about +100 ms (see FIG. 12).

逆に、音が画より進む場合には、検知限は−20msとさらに厳しくなる。したがって、映像クロックと、音声クロックが非同期であることは、AVコンテンツでは大きな問題になる。
特開2004―23187号公報 特開2002―57636号公報 HDMI (High-Definition Multimedia Interface) Specification V1.3
On the other hand, when the sound advances from the image, the detection limit becomes -20 ms, which becomes even stricter. Therefore, the fact that the video clock and the audio clock are asynchronous becomes a big problem in AV contents.
Japanese Patent Laid-Open No. 2004-23187 JP 2002-57636 A HDMI (High-Definition Multimedia Interface) Specification V1.3

受信側の再生音質を最優先とするため、水晶発振手段を受信側に置く場合の構成として、データフロー制御による方法を用いた場合には、送信側のクロック変動が大きく、送信側の音質が犠牲になる、という問題があり、また、映像クロックと、音声クロックとの周波数偏差により、リップシンクがずれる、という問題があった。   In order to give the highest priority to the playback sound quality on the receiving side, when the crystal oscillation means is placed on the receiving side, when the method using data flow control is used, the clock fluctuation on the transmitting side is large, and the sound quality on the transmitting side is There is a problem of sacrificing, and there is a problem that lip sync is shifted due to a frequency deviation between the video clock and the audio clock.

この発明は、上記従来の問題に鑑みてなされたもので、受信側だけでなく、送信側の音質をも確保することができ、かつ、リップシンクの問題をも解決することのできるデータ送信・受信システムを提供することを目的としている。   The present invention has been made in view of the above-described conventional problems. Data transmission / transmission that can secure sound quality not only on the reception side but also on the transmission side, and can also solve the problem of lip sync. It aims to provide a receiving system.

上記課題を解決するために、本発明にかかるデータ送信・受信システムは、第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する第1の伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、第2の機器から第1の機器へ、映像クロック2を伝送する第2の伝送手段を備え、第2の機器で生成する映像クロック2を第1の機器へ伝送する第2のモードを、さらに有し、前記第2のモードにおいて、第1の機器は、第2の機器で生成して第1の機器へ伝送される映像クロック2を用いて、第1の機器から送出する映像データ1または音声データ1の両方、または何れかの一方のデータレートを調整するものである。   In order to solve the above problems, a data transmission / reception system according to the present invention transmits video data 1, audio data 1, additional data 1, and video clock 1 from a first device to a second device. And a second mode for transmitting the video clock 2 from the second device to the first device, and having a basic mode for transmitting the video clock 1 generated by the first device to the second device. And a second mode for transmitting the video clock 2 generated by the second device to the first device. In the second mode, the first device has the second mode The video clock 2 generated by the device and transmitted to the first device is used to adjust the data rate of either the video data 1 or the audio data 1 sent from the first device or one of them. is there.

これにより、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制できる。   As a result, the data rate of video and audio data transmitted from the transmission side can be adjusted on a clock basis without causing large fluctuations in the clock on the transmission side, thereby ensuring sound quality on the transmission side. The problem of lip sync due to frequency deviation between the video clock and the audio clock can also be suppressed.

また、本発明にかかるデータ送信・受信システムは、第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、第2の機器から第1の機器へ、付加データ2、および映像クロック2を伝送する伝送手段を備え、第2の機器から映像クロック2を第1の機器へ伝送する第2のモードを、さらに有し、第2の機器は、前記第2のモードにおいて、第1の機器から伝送される映像クロック1を第1の機器にそのまま折り返す形で映像クロック2として伝送し、第1の機器は、第2の機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該第2のモードにおいて、前記映像クロック用PLLで再生した映像クロックで該第1の機器の内部を動作させるものである。   The data transmission / reception system according to the present invention includes transmission means for transmitting the video data 1, the audio data 1, the additional data 1, and the video clock 1 from the first device to the second device. A basic mode for transmitting the video clock 1 generated by the second device to the second device, and transmission means for transmitting the additional data 2 and the video clock 2 from the second device to the first device. The second device further has a second mode for transmitting the video clock 2 from the second device to the first device, and the second device receives the video clock 1 transmitted from the first device in the second mode. The video clock 2 is transmitted to the first device as it is, and the first device uses the additional data 2 transmitted from the second device to reproduce the audio clock, and the sound clock PLL. A video clock PLL for reproducing a video clock based on an audio clock reproduced by the clock PLL is provided, and in the second mode, the inside of the first device is operated by the video clock reproduced by the video clock PLL. It is something to be made.

これにより、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制できる。   As a result, the data rate of video and audio data transmitted from the transmission side can be adjusted on a clock basis without causing large fluctuations in the clock on the transmission side, thereby ensuring sound quality on the transmission side. The problem of lip sync due to frequency deviation between the video clock and the audio clock can also be suppressed.

また、本発明にかかるデータ送信・受信システムは、第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、第2の機器から第1の機器へ、付加データ2を伝送する伝送手段を備え、第2の機器で生成する付加データ2を第1の機器へ伝送する第2のモードを、さらに有し、第2の機器は、前記第2のモードにおいて、該第2の機器で生成する音声クロックを用いて、該第2の機器に備えたDAコンバータにより、音声データをアナログに変換するとともに、前記第2の機器で生成する音声クロックを、前記基本モードで使用するのと同じ所定の分周比Nで分周した周期を映像クロック1でカウントしたデータを、前記付加データ2として伝送し、第1の機器は、第2の機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該第2のモードにおいて、前記映像クロック用PLLで再生した映像クロックで該第1の機器の内部を動作させるようにした、あるいはさらに、前記付加データ2は、第2の機器で生成する音声クロックを、基本モードで使用するのと同じ所定の分周比NのさらにM倍(Mは2以上の整数)で分周してより長周期とするようにしたものである。   The data transmission / reception system according to the present invention includes transmission means for transmitting the video data 1, the audio data 1, the additional data 1, and the video clock 1 from the first device to the second device. A basic mode for transmitting the video clock 1 generated by the second device to the second device, and a transmission means for transmitting the additional data 2 from the second device to the first device. A second mode for transmitting the additional data 2 to be transmitted to the first device, wherein the second device uses the audio clock generated by the second device in the second mode, and Audio data is converted to analog by the DA converter provided in the second device, and the audio clock generated by the second device is divided by the same predetermined frequency division ratio N used in the basic mode. The cycle The data counted by the clock 1 is transmitted as the additional data 2, and the first device reproduces the audio clock by using the additional data 2 transmitted from the second device, and the audio clock PLL. A video clock PLL for reproducing a video clock based on an audio clock reproduced by the clock PLL is provided, and in the second mode, the inside of the first device is operated by the video clock reproduced by the video clock PLL. In addition, the additional data 2 may be obtained by further multiplying the audio clock generated by the second device by M times the same predetermined frequency division ratio N as that used in the basic mode (M is an integer of 2 or more). ) Is divided into longer periods.

これにより、極めて高音質を得る構成を受信側で取りながら、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制でき、さらに、送信側と受信側を接続するHDMIケーブルの本数を1本とすることができる。   As a result, the data rate of video and audio data sent from the transmission side can be adjusted on a clock basis without causing large fluctuations in the clock on the transmission side, while taking a configuration that obtains extremely high sound quality on the reception side. As a result, the sound quality on the transmission side can be ensured, the problem of lip sync due to the frequency deviation between the video clock and the audio clock can be suppressed, and the number of HDMI cables connecting the transmission side and the reception side can be reduced to one. can do.

また、上記水晶発振手段を置いた受信側には、音声データをアナログに変換するDAコンバータを受信側に備えることが好ましい。   Moreover, it is preferable that a DA converter for converting audio data into analog is provided on the receiving side on the receiving side where the crystal oscillation means is placed.

また、映像クロックを音声クロックを元として位相同期ループにより再生されたものとすることで、AVリップシンクの問題をも解決することができる。   In addition, since the video clock is reproduced by the phase-locked loop based on the audio clock, the AV lip sync problem can be solved.

また、機器間で相互に上記の特別な構成をとることが出来るか否かを問い合わせて、該機能を有する場合にだけ該動作をさせることで、相互互換性の欠如に伴う不具合を回避することができる。   Also, inquiries about whether or not the above-mentioned special configuration can be taken between devices, and the operation is performed only when the device has the function, thereby avoiding problems associated with lack of mutual compatibility. Can do.

また、システムによっては、レート制御が不可のコンテンツも扱うこともあるため、その場合には、従来のモードを使用するように構成することで、不具合を未然に防止することができる。   Also, depending on the system, content that cannot be rate-controlled may be handled, and in such a case, the configuration can be prevented by using the conventional mode.

以上のように本発明によると、受信側で映像クロック2を生成してこれを送信側へ伝送し、送信側でこの映像クロック2を用いて、送信側から送出する映像データまたは音声データの両方、または何れかの一方のデータレートを調整する構成としたので、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制することができる。   As described above, according to the present invention, the video clock 2 is generated on the reception side and transmitted to the transmission side, and both video data and audio data sent from the transmission side using the video clock 2 are transmitted on the transmission side. Or any one of the data rates is adjusted so that the data rate of video and audio data sent from the transmission side can be adjusted on a clock basis without causing a large fluctuation in the clock on the transmission side. Thus, the sound quality on the transmission side can be ensured, and the problem of lip sync due to the frequency deviation between the video clock and the audio clock can also be suppressed.

また、本発明によると、受信側が、映像クロック2、および付加データ2を送信側へ伝送し、送信側が、受信側から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該映像クロック用PLLで再生した映像クロックで送信側の内部を動作させる構成としたので、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制することができる。   According to the present invention, the receiving side transmits the video clock 2 and the additional data 2 to the transmitting side, and the transmitting side reproduces the audio clock using the additional data 2 transmitted from the receiving side, Since the video clock PLL for reproducing the video clock based on the audio clock reproduced by the audio clock PLL is provided, and the transmission side is operated by the video clock reproduced by the video clock PLL. The data rate of the video and audio data sent from the transmission side can be adjusted on a clock basis, so that the sound quality on the transmission side can be secured, and the problem of lip sync caused by the frequency deviation between the video clock and the audio clock is eliminated. Can also be suppressed.

また、本発明によると、受信側が、音声クロックを生成する水晶発振手段を備え、該水晶発振手段で生成する音声クロックを用いて、音声データをアナログに変換するとともに、該音声クロックを所定の分周比で分周した周期を映像クロック1でカウントしたデータを、付加データ2として送信側に伝送し、かつ、送信側が、受信側から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該映像クロック用PLLで再生した映像クロックで送信側の内部を動作させる構成としたので、受信側で極めて高音質が得られるとともに、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制することができ、さらに、送信側と受信側を接続するHDMIケーブルの本数を1本とすることができる。   According to the present invention, the receiving side includes crystal oscillation means for generating an audio clock, converts audio data to analog using the audio clock generated by the crystal oscillation means, and converts the audio clock to a predetermined amount. Data obtained by counting the frequency divided by the frequency ratio with the video clock 1 is transmitted as additional data 2 to the transmission side, and the transmission side reproduces the audio clock using the additional data 2 transmitted from the reception side. A configuration comprising a clock PLL and a video clock PLL for reproducing a video clock based on the audio clock reproduced by the audio clock PLL, and operating the transmission side with the video clock reproduced by the video clock PLL As a result, extremely high sound quality can be obtained on the receiving side, and the data rate of video and audio data sent from the transmitting side can be It can be adjusted on the basis of this, so that the sound quality on the transmission side can be secured, the problem of lip sync due to the frequency deviation between the video clock and the audio clock can be suppressed, and the transmission side and the reception side can be further controlled. The number of HDMI cables to be connected can be one.

以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。
(実施の形態1)
図1は、本発明の実施の形態1によるデータ送信・受信システム1000の構成を示す。
図1において、送信側機器10は、DVD/BD(ブルーレイディスク)プレーヤ/レコーダ、HDD内蔵テレビ放送受信機、テレビ放送受信機能付きパソコン、HDDレコーダ、などである。受信側機器20は、AVレシーバアンプ、AVシアターシステム、デジタルテレビ、などである。また、HDMI−1ケーブル15により、送信側機器10から受信側機器20へデータ等を伝送する。さらに、HDMI−2ケーブル35は、逆方向に付加データ、クロック等を伝送する。
The best mode for carrying out the present invention will be described below with reference to the drawings.
(Embodiment 1)
FIG. 1 shows a configuration of a data transmission / reception system 1000 according to Embodiment 1 of the present invention.
In FIG. 1, a transmission-side device 10 is a DVD / BD (Blu-ray Disc) player / recorder, an HDD built-in television broadcast receiver, a personal computer with a television broadcast reception function, an HDD recorder, or the like. The receiving side device 20 is an AV receiver amplifier, an AV theater system, a digital television, or the like. In addition, data or the like is transmitted from the transmission-side device 10 to the reception-side device 20 via the HDMI-1 cable 15. Further, the HDMI-2 cable 35 transmits additional data, a clock, and the like in the reverse direction.

送信側機器10は、BD950を再生して、映像信号と、音声信号を取り出す機能、映像信号と、音声信号を、比較的簡単に再生するモニター機能(図示せず)を備えている。   The transmission side device 10 has a function of reproducing the BD 950 to extract a video signal and an audio signal, and a monitor function (not shown) for reproducing the video signal and the audio signal relatively easily.

また、基本的に、HDMI送信部の一部として、クロックパラメータN,CTSを生成する手段100を備える。また、内部の動作状態、モードに対応して、全体を制御する制御手段610、ピクセルクロックの選択手段631,音声クロックの選択手段633の機能を備えている。また、同時に、HDMI受信部の一部機能として、第2のN,CTSパラメータから、音声クロック2を再生する手段400を拡張機能として備えるものである。   In addition, basically, means 100 for generating clock parameters N and CTS is provided as part of the HDMI transmission unit. Further, it has functions of a control unit 610 for controlling the whole, a pixel clock selection unit 631, and an audio clock selection unit 633 in accordance with the internal operation state and mode. At the same time, as a partial function of the HDMI receiving unit, means 400 for reproducing the audio clock 2 from the second N and CTS parameters is provided as an extended function.

受信側機器20は、シアターシステム用アンプであって、基本的には、HDMI−1の受信部の一部として、音声クロック再生手段200、AVデータデコード手段700、音声信号を再生するDAコンバータ680を備える。また、内部の動作状態、モードに対応して、全体を制御する制御手段620、音声クロックの選択手段640の機能を備えている。また、同時に、受信側独立の音声クロック用水晶発振手段800、音声クロックからピクセルクロックを生成するPLL500、伝送用パラメータN2、CTS2を生成する手段300を、拡張機能として備える。   The receiving-side device 20 is an amplifier for a theater system, and basically, as part of the HDMI-1 receiving unit, an audio clock reproducing means 200, an AV data decoding means 700, and a DA converter 680 for reproducing an audio signal. Is provided. Further, it has functions of a control means 620 for controlling the whole and an audio clock selection means 640 corresponding to the internal operation state and mode. At the same time, the receiving side independent crystal oscillator for audio clock 800, the PLL 500 for generating the pixel clock from the audio clock, and the means 300 for generating the transmission parameters N2 and CTS2 are provided as extended functions.

次に、本実施の形態1のデータ送信・受信システム1000の動作について、図1を参照しながら説明する。
まず、本システムの動作モードのうちの基本モードについて説明する。
この基本モードは、従来の動作モードと同じモードであり、初期状態で、接続相手、すなわち、データ送信装置10、データ受信装置20が、ともに本発明の実施の形態1の動作を行えるものであるか否かが判らない場合などに使用する。
Next, the operation of the data transmission / reception system 1000 according to the first embodiment will be described with reference to FIG.
First, the basic mode among the operation modes of this system will be described.
This basic mode is the same as the conventional operation mode, and in the initial state, the connection partner, that is, the data transmission device 10 and the data reception device 20 can both perform the operation of the first embodiment of the present invention. This is used when it is not known whether or not.

従来の動作モードでは、送信側機器10が、全てのクロックマスターとなる。PCコンテンツなどでは、A(音声)と、V(映像)が非同期であることもあるが、一般的なAVコンテンツであれば、Aと、Vは、同期しており、音声クロックと、映像クロックが、コヒーレントであることが多い。この場合、送信側ピクセルクロック生成手段900と、送信側音声クロック生成手段850は、図示上は別個に描いているが、実際には、同期関係が保たれたコヒーレント状態であり、相互に従属関係にある。   In the conventional operation mode, the transmission side device 10 becomes all the clock masters. In PC content and the like, A (audio) and V (video) may be asynchronous, but in general AV content, A and V are synchronized, and an audio clock and a video clock However, it is often coherent. In this case, although the transmission side pixel clock generation unit 900 and the transmission side audio clock generation unit 850 are drawn separately in the drawing, they are actually coherent states in which the synchronization relationship is maintained and are mutually dependent. It is in.

制御手段610は、選択指示データSL11を、ピクセルクロック選択手段631に与え、これにより、ピクセルクロック選択手段631は、送信側ピクセルクロック生成手段900の出力90を、クロック92として出力する。このクロック92は、N,CTSを生成する手段100に供給されるとともに、HDMI−1ケーブル15を介して、受信側機器20へ、PCK1として伝送される。N,CTS生成手段100においては、制御手段610から供給されるNが与えられて、分周器110で音声クロック83を1/Nの周波数に分周する。カウンタ120は、この周波数128Fs/Nの周期を、クロック92、すなわちPCKで計数し、CTS1として出力する。   The control unit 610 supplies the selection instruction data SL11 to the pixel clock selection unit 631. Thus, the pixel clock selection unit 631 outputs the output 90 of the transmission side pixel clock generation unit 900 as the clock 92. The clock 92 is supplied to the means 100 for generating N and CTS, and is transmitted as PCK1 to the receiving-side device 20 via the HDMI-1 cable 15. In the N, CTS generation means 100, N supplied from the control means 610 is given, and the frequency divider 110 divides the audio clock 83 to 1 / N frequency. The counter 120 counts the period of the frequency 128 Fs / N with the clock 92, that is, PCK, and outputs it as CTS1.

また、制御手段610は、選択指示データSL12を音声クロックの選択手段633に与え、これにより、音声クロックの選択手段633は、送信側音声クロック生成手段850の出力85を、クロック83として出力する。このクロック83は、N,CTS生成手段100に供給される。これらのクロックに同期して、AVコンテンツデータが、HDMI−1ケーブル15のData1を通じて、受信側機器20へ伝送される。N,CTS生成手段100で生成するN、CTSは、AVコヒーレントの場合は定数となり、HDMI−1ケーブル15を通じて、N1、CTS1として、受信側機器20へ伝送される。   Further, the control unit 610 provides the selection instruction data SL12 to the audio clock selection unit 633, whereby the audio clock selection unit 633 outputs the output 85 of the transmission side audio clock generation unit 850 as the clock 83. This clock 83 is supplied to the N, CTS generator 100. In synchronization with these clocks, AV content data is transmitted to the receiving-side device 20 through Data 1 of the HDMI-1 cable 15. N and CTS generated by the N and CTS generation means 100 are constants in the case of AV coherent, and are transmitted to the receiving side device 20 as N1 and CTS1 through the HDMI-1 cable 15.

一方の受信側機器20では、HDMI−1ケーブル15を介して受信したPCK1、CTS1、N1、Data1を基に、音声クロック再生手段200で音声クロック82を再生する。詳しくは、以下のようになる。   In one receiving side device 20, the audio clock 82 is reproduced by the audio clock reproducing means 200 based on PCK 1, CTS 1, N 1, and Data 1 received via the HDMI-1 cable 15. Details are as follows.

即ち、分周器210で、PCK1をCTS1で分周する。このPCK/CTSとなる周波数を、PLLでN倍に逓倍する。PLLは、位相比較回路220、電圧制御発振器230、ローカル分周器240からなるループ構成である。これにより、128Fsの音声クロック82が再生される。   That is, the frequency divider 210 divides PCK1 by CTS1. The frequency which becomes this PCK / CTS is multiplied N times by PLL. The PLL has a loop configuration including a phase comparison circuit 220, a voltage controlled oscillator 230, and a local frequency divider 240. As a result, the 128 Fs audio clock 82 is reproduced.

データは、AVデータデコード手段700でデコードし、音声データ70、映像データ71として取り出す。音声データ70は、DAコンバータ680へ供給される。また、制御手段620の制御信号SL2により、音声クロックの選択手段640は、音声クロック82を選択して、DAコンバータ680へクロックを供給する。   The data is decoded by AV data decoding means 700 and taken out as audio data 70 and video data 71. The audio data 70 is supplied to the DA converter 680. The audio clock selection unit 640 selects the audio clock 82 based on the control signal SL2 of the control unit 620 and supplies the clock to the DA converter 680.

以上に説明した通り、従来モードである基本動作モードでは、DAコンバータ680の音声クロックは、PLLにより生成された音声クロック再生手段200の出力であり、それは、ピクセルクロックPCK1を媒介し、送信側機器10にある送信側音声クロック生成手段850を基準とするものである。前述したように、PLLで生成するクロック純度は、さほど高くなく、他のクロックを媒介すると、純度はさらに低下する。   As described above, in the basic operation mode, which is the conventional mode, the audio clock of the DA converter 680 is the output of the audio clock reproduction means 200 generated by the PLL, which is transmitted through the pixel clock PCK1, The transmission side audio clock generation means 850 in FIG. As described above, the purity of the clock generated by the PLL is not so high, and the purity is further lowered when another clock is mediated.

以上説明した従来モードである基本動作モードに加えて、本実施の形態1によるシステムは、第2のモードを有する。次に、第2のモードにおける動作について説明する。   In addition to the basic operation mode, which is the conventional mode described above, the system according to the first embodiment has a second mode. Next, the operation in the second mode will be described.

第2のモードでは、受信側機器20が音声クロックのマスターになる。すなわち、水晶発振手段800の水晶音声クロック80を基準にして、クロックシステムが形成される。   In the second mode, the receiving side device 20 becomes the audio clock master. That is, a clock system is formed based on the crystal audio clock 80 of the crystal oscillation means 800.

受信側機器20において、音声クロックからピクセルクロックを生成するPLL500に、クロック80を供給して、水晶音声クロック80と同期した、即ちこれとコヒーレントなピクセルクロック91を生成する。詳しくは、以下のようになる。   In the receiving device 20, the clock 80 is supplied to the PLL 500 that generates the pixel clock from the audio clock, and the pixel clock 91 that is synchronized with the crystal audio clock 80, that is, coherent with the crystal audio clock 80, is generated. Details are as follows.

即ち、水晶音声クロック80は、分周器510で1/Nに分周され、電圧制御発振器530、ローカル分周器540、位相比較回路520からなるPLLで、映像モードと、音声サンプリング周波数のモードに対応して、HDMI規格で定める所定のCTS値であるNominalCTS倍の周波数に逓倍される。このNominalCTSは、制御手段620より供給する。このように、クロックの周波数は、水晶音声クロック80のCTS/N倍の周波数となり、ピクセルクロック91(=PCK2)となる。   That is, the crystal audio clock 80 is frequency-divided by 1 / N by the frequency divider 510, and is composed of a voltage control oscillator 530, a local frequency divider 540, and a phase comparison circuit 520, and includes a video mode and an audio sampling frequency mode. Corresponding to the frequency, the frequency is multiplied by the frequency of Nominal CTS, which is a predetermined CTS value defined by the HDMI standard. This Nominal CTS is supplied from the control means 620. Thus, the frequency of the clock is CTS / N times that of the crystal audio clock 80, and becomes the pixel clock 91 (= PCK2).

次に、伝送用パラメータN2、CTS2を生成する手段300へ、水晶音声クロック80と、ピクセルクロック91を入力して、伝送用パラメータN2、CTS2を生成する。伝送用パラメータN2、CTS2を生成する手段300は、前記したN,CTSを生成する手段100と同様の構成であり、動作も同じであるので、詳細な説明は省略する。   Next, the crystal sound clock 80 and the pixel clock 91 are input to the means 300 for generating the transmission parameters N2 and CTS2, and the transmission parameters N2 and CTS2 are generated. The means 300 for generating the transmission parameters N2 and CTS2 has the same configuration as that of the means 100 for generating N and CTS described above, and the operation is also the same.

HDMI−2ケーブル35を介して、ピクセルクロック91は、PCK2として、CTS2、N2とともに、送信側機器10へ伝送される。   Through the HDMI-2 cable 35, the pixel clock 91 is transmitted to the transmission side device 10 as PCK2 together with CTS2 and N2.

送信側機器10では、HDMI−2ケーブル35からのクロックと、パラメータとを受信して、第2のN,CTSパラメータN2、CTS2から、音声クロック2を再生する手段400により、音声クロック81を再生する。制御手段610の制御により、SL12が音声クロックの選択手段633へ供給され、音声クロック81が選択されて、クロック83として出力される。第2のN,CTSパラメータから音声クロック2を再生する手段400は、図面の方向は逆であるが、音声クロック再生手段200の構成と同様であり、動作も同じであるので、詳細な説明は省略する。   The transmitting-side device 10 receives the clock and parameters from the HDMI-2 cable 35 and reproduces the audio clock 81 by means 400 for reproducing the audio clock 2 from the second N, CTS parameters N2 and CTS2. To do. Under the control of the control means 610, the SL 12 is supplied to the audio clock selection means 633, and the audio clock 81 is selected and output as the clock 83. The means 400 for reproducing the audio clock 2 from the second N, CTS parameter is reverse in the direction of the drawing, but is the same as the configuration of the audio clock reproducing means 200 and the operation is also the same. Omitted.

一方、HDMI−2ケーブル35から送信側機器10へ供給されたPCK2が、ピクセルクロック選択手段631で、制御手段610の制御により選択され、クロック92として出力される。送信側機器10は、これら2つのクロックに同期して全体が一体動作する。すなわち、BDからのデータ読み出し、デコードからのAVモニタ出力などである。勿論、HDMI−1ケーブル15への出力も、これら2つのクロックを基準にする。すなわちこれを、N,CTSを生成する手段100へ供給すると同時に、PCK1として、クロック92を出力する。   On the other hand, PCK2 supplied from the HDMI-2 cable 35 to the transmission-side device 10 is selected by the pixel clock selection unit 631 under the control of the control unit 610 and output as the clock 92. The transmission side device 10 operates as a whole in synchronism with these two clocks. That is, data reading from BD, AV monitor output from decoding, and the like. Of course, the output to the HDMI-1 cable 15 is also based on these two clocks. That is, this is supplied to the means 100 for generating N and CTS, and at the same time, the clock 92 is output as PCK1.

一方の受信側機器20では、HDMI−1ケーブル15を介して受信したPCK1、CTS1、N1、Data1を基に、音声クロック再生手段200で、音声クロック82を再生する。音声クロック82は、源となる水晶音声クロック80を基準として、一旦送信側機器10へ伝送された後、再び、受信側機器20へ戻される。一巡してしまうため、一見無意味のように見えるが、そうではない。巡回の各部において、それぞれのクロックに同期した送信側機器10でのデータ再生が行われ、HDMI−1ケーブル15のデータ伝送も、それに同期して全体のデータレートが決まり動作するので、重要な意味がある。ただ一巡してきたクロック82そのものは、スペクトラム純度が低下しているので、DAコンバータ680のクロックには適さず、オリジナルである高純度の水晶音声クロック80の方を用いる。すなわち、制御手段620の制御信号SL2で、音声クロックの選択手段640を制御し、水晶発振手段800の出力クロック80を、DAコンバータ680の音声クロックとして供給する。   In one receiving-side apparatus 20, the audio clock 82 is reproduced by the audio clock reproduction means 200 based on PCK 1, CTS 1, N 1, and Data 1 received via the HDMI-1 cable 15. The audio clock 82 is once transmitted to the transmitting device 10 with reference to the crystal audio clock 80 as a source, and then returned to the receiving device 20 again. Although it seems to be meaningless at first glance, it is not so. In each part of the circuit, data reproduction is performed in the transmission side device 10 synchronized with the respective clocks, and the data transmission of the HDMI-1 cable 15 is determined and operated in synchronization with the data transmission. There is. However, since the spectrum purity of the clock 82 itself that has made a round is lowered, it is not suitable for the clock of the DA converter 680, and the original high-purity crystal audio clock 80 is used. That is, the control unit SL 620 controls the audio clock selection unit 640 to supply the output clock 80 of the crystal oscillation unit 800 as the audio clock of the DA converter 680.

以上の説明で明らかなように、第2のモードでは、受信側機器20が音声クロックのマスターになって、送信側機器10を含めた全体が、完全にAV同期するシステムを構成できる。   As is apparent from the above description, in the second mode, the receiving side device 20 becomes the audio clock master, and the entire system including the transmitting side device 10 can be completely AV-synchronized.

上記の構成により、極めて高音質を得る構成を受信側で取りながら、同時に送信側のクロック変動も無く、また、映像クロックとの周波数偏差も生じないので、受信側だけでなく、送信側の音質も確保し、リップシンクの問題も生じないという特有の効果を、得ることができる。   With the above configuration, while taking a configuration that obtains extremely high sound quality on the receiving side, there is no clock fluctuation on the transmitting side and no frequency deviation from the video clock, so not only the receiving side but also the sound quality on the transmitting side Can be obtained, and a specific effect that the problem of lip sync does not occur can be obtained.

次に、本実施の形態1によるシステムの動作について、図2に示した概要動作フローを参照しながら説明する。
まず、基本動作モードから、本発明の実施の形態1における特徴である第2のモードへ遷移するシーケンスについて説明する。
図2において、送信側機器10の動作を、左の点線内に、受信側機器20の動作状態を、右の点線内に示す。
Next, the operation of the system according to the first embodiment will be described with reference to the general operation flow shown in FIG.
First, a sequence for transitioning from the basic operation mode to the second mode, which is a feature of the first embodiment of the present invention, will be described.
In FIG. 2, the operation of the transmission side device 10 is shown in the left dotted line, and the operation state of the reception side device 20 is shown in the right dotted line.

まず、第2のモードの”可否”を、送信側機器10から、受信側機器20へ問い合わせる(S101)。   First, the transmission-side device 10 inquires of the reception-side device 20 about “possibility” of the second mode (S101).

受信側機器20は、これに”可”と答える(S201)。   The receiving side device 20 answers “Yes” to this (S201).

第2のモードの機能を有するとの回答である場合、送信側機器10は、内部の動作モードを、第2のモードに変え、同時に、受信側機器20に、音声クロックからピクセルクロックを生成するPLL500の出力(すなわちPCK2=クロック91)の安定/非安定を問い合わせる。   When it is a reply that it has the function of the second mode, the transmission side device 10 changes the internal operation mode to the second mode, and simultaneously generates a pixel clock from the audio clock in the reception side device 20. Queries the stability / unstableness of the output of the PLL 500 (ie, PCK2 = clock 91).

受信側機器20は、PLL500の出力の安定/非安定を自己判定し、これに答える(S203)。   The receiving side device 20 self-determines whether the output of the PLL 500 is stable or not and responds to this (S203).

次に、送信側機器10は、第2のN,CTSパラメータから、音声クロック2を再生する手段400の出力(音声クロック2=クロック81)の安定/非安定を自己判定する(S104)。   Next, the transmission side device 10 self-determines whether the output of the means 400 for reproducing the audio clock 2 (audio clock 2 = clock 81) is stable or unstable from the second N and CTS parameters (S104).

OKであれば、音声クロックの選択手段633、ピクセルクロック選択手段631を、制御手段610で制御し、音声クロック、及びピクセルクロックとして、第2のN,CTSパラメータから音声クロック2を再生する手段400の出力、及びPCK2を選択する(S105,S106)。   If OK, the audio clock selection means 633 and the pixel clock selection means 631 are controlled by the control means 610, and the audio clock 2 is reproduced from the second N, CTS parameters as the audio clock and the pixel clock 400. And PCK2 are selected (S105, S106).

送信側機器10は、完全に第2のモードへ移行したことを、受信側機器20へ報告する(S107)。   The transmission side device 10 reports to the reception side device 20 that it has completely shifted to the second mode (S107).

受信側機器20は、これを受け、制御手段620の制御信号SL2で、音声クロックの選択手段640を制御し、水晶発振手段800の出力クロック80を、DAコンバータ680の音声クロックとして供給する(S208)。   In response to this, the receiving side device 20 controls the audio clock selection unit 640 with the control signal SL2 of the control unit 620, and supplies the output clock 80 of the crystal oscillation unit 800 as the audio clock of the DA converter 680 (S208). ).

最後に、受信側機器20が、第2のモードへ移行完了したことを、送信側機器10へ報告する(S209)。   Finally, the receiving side device 20 reports to the transmitting side device 10 that the transition to the second mode has been completed (S209).

送信側機器10は、これを受けて、第2のモードへの移行シーケンスを完了する(S110)。   Upon receiving this, the transmission side device 10 completes the transition sequence to the second mode (S110).

このようにして、機器間で相互に第2のモード時の特別な構成をとることが出来るか否かを問い合わせて、該機能を有する場合にだけその動作を行い得るようにすることで、相互互換性の欠如に伴う不具合を防止することができる。   In this way, by inquiring whether or not a special configuration in the second mode can be taken between the devices, it is possible to perform the operation only when the device has the function. Problems associated with incompatibility can be prevented.

また、システムによっては、放送受信や、外部入力信号のリピート伝送など、レート制御が不可のコンテンツも扱うこともあるため、その場合には、従来のモードである基本動作モードを使用するように構成することで、データフローのオーバー/アンダーなどの不具合を未然に防止することができる。   Also, depending on the system, content that cannot be rate controlled, such as broadcast reception and repeat transmission of external input signals, may also be handled. In this case, the basic operation mode, which is the conventional mode, is used. By doing so, it is possible to prevent problems such as data flow over / under.

以上のような本実施の形態1のデータ送信・受信システムでは、送信側機器から受信側機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する伝送手段を備え、かつ、受信側機器から送信側機器へ、付加データ2、および映像クロック2を伝送する伝送手段を、さらに備え、第2の機器で生成して第1の機器へ伝送される映像クロック2を用いて、送信側機器から送出する映像データ1、または音声データ1の両方、またはいずれか一方のデータレートを調整する構成としたので、受信側に音声クロックを生成する水晶発振手段を設けて、関連する映像クロック2、および付加データ2を送信側へ伝送することにより、従来モードに加え、極めて高音質を得る構成を受信側で取りながら、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制できるシステムを得ることができる。   The data transmission / reception system of the first embodiment as described above includes transmission means for transmitting the video data 1, the audio data 1, the additional data 1, and the video clock 1 from the transmission side device to the reception side device. In addition, a transmission means for transmitting the additional data 2 and the video clock 2 from the receiving device to the transmitting device is further provided, and the video clock 2 generated by the second device and transmitted to the first device is used. Since the data rate of the video data 1 and / or the audio data 1 sent from the transmission side device is adjusted, the crystal oscillation means for generating the audio clock is provided on the reception side. By transmitting the video clock 2 to be transmitted and the additional data 2 to the transmitting side, in addition to the conventional mode, the receiving side is configured to obtain extremely high sound quality while the transmitting side clock The data rate of video and audio data sent from the transmission side can be adjusted on a clock basis without causing any significant fluctuations, thereby ensuring the sound quality of the transmission side. A system that can suppress the problem of lip sync due to frequency deviation can be obtained.

(実施の形態2)
図3は、本発明の実施の形態2によるデータ送信・データ受信システムの構成を示す。
図3において、図1と同様の手段には、同一番号を付し、説明を省略する。
本実施の形態2は、水晶発振手段800を受信側機器20に置いて、直接DAコンバータ680に高純度なクロックを供給する構成は、前記実施の形態1におけると同じであるが、本実施の形態2では、水晶音声クロック80を基準にしてピクセルクロックを生成する機能を、送信側機器10側に移動しているものである。
(Embodiment 2)
FIG. 3 shows a configuration of a data transmission / data reception system according to the second embodiment of the present invention.
In FIG. 3, the same means as in FIG.
In the second embodiment, the configuration in which the crystal oscillation means 800 is placed in the receiving-side device 20 and a high-purity clock is directly supplied to the DA converter 680 is the same as in the first embodiment. In the second embodiment, the function of generating the pixel clock with reference to the crystal audio clock 80 is moved to the transmitting device 10 side.

次に、本実施の形態2のデータ送信・受信システム1000の動作について、図3を参照しながら説明する。
基本モードの動作については、実施の形態1と同様であり、以下、第2のモードの動作について説明する。
受信側機器20において、水晶発振手段800の水晶音声クロック80を基準にして、クロックシステムが形成される。受信側機器20においては、クロック80を伝送用パラメータN2、CTS2を生成する手段300に供給して、パラメータを生成し、HDMI−2ケーブル35を介して、送信側機器10へ伝送する。この時、PCKは、送信側機器10から受信したPCK1を供給する。HDMI−2ケーブル35へ供給するPCK2も、PCK1を、折り返し供給する。
Next, the operation of the data transmission / reception system 1000 of the second embodiment will be described with reference to FIG.
The operation in the basic mode is the same as that in the first embodiment, and the operation in the second mode will be described below.
In the receiving-side device 20, a clock system is formed with reference to the crystal audio clock 80 of the crystal oscillation means 800. In the receiving side device 20, the clock 80 is supplied to the means 300 for generating the transmission parameters N <b> 2 and CTS <b> 2, the parameters are generated, and transmitted to the transmitting side device 10 via the HDMI-2 cable 35. At this time, the PCK supplies the PCK1 received from the transmission side device 10. PCK2 supplied to the HDMI-2 cable 35 also returns PCK1.

送信側機器10では、HDMI−2ケーブル35からのクロックと、パラメータを受信して、第2のN,CTSパラメータN2、CTS2から、音声クロック2を再生する手段400により、音声クロック81を再生する。この音声クロック81は、音声クロック80と同期したものである。この時点では、PCKの周波数が不定であるが、送信側機器10と、受信側機器20で共通でありさえすれば、大きな問題はなく、音声クロック同士の同期関係は正しく動作する。制御手段610の制御により、SL12が音声クロックの選択手段633へ供給され、音声クロック81が選択されて、クロック83として出力される。   The transmitting-side device 10 receives the clock and parameters from the HDMI-2 cable 35 and reproduces the audio clock 81 by means 400 for reproducing the audio clock 2 from the second N and CTS parameters N2 and CTS2. . This audio clock 81 is synchronized with the audio clock 80. At this time, the frequency of the PCK is indefinite, but as long as it is common to the transmission side device 10 and the reception side device 20, there is no major problem, and the synchronization relationship between the audio clocks operates correctly. Under the control of the control means 610, the SL 12 is supplied to the audio clock selection means 633, and the audio clock 81 is selected and output as the clock 83.

次に、送信側機器10側の音声クロックから、ピクセルクロックを生成するPLL500へクロック83を供給する。こうして、クロック83に同期したピクセルクロック91を出力するピクセルクロック91は、ピクセルクロック選択手段631で、制御手段610の制御により選択され、クロック92として出力される。送信側機器10は、これら2つのクロックに同期して、全体動作する。すなわち、BDからのデータ読み出し、デコードからのAVモニタ出力などである。勿論、HDMI−1ケーブル15への出力も、これら2つのクロックを基準にする。すなわちこれを、N,CTSを生成する手段100へ供給すると同時に、PCK1としてクロック92を出力する。   Next, the clock 83 is supplied from the audio clock on the transmission side device 10 side to the PLL 500 that generates the pixel clock. Thus, the pixel clock 91 that outputs the pixel clock 91 synchronized with the clock 83 is selected by the pixel clock selection unit 631 under the control of the control unit 610 and is output as the clock 92. The transmission-side device 10 operates as a whole in synchronization with these two clocks. That is, data reading from BD, AV monitor output from decoding, and the like. Of course, the output to the HDMI-1 cable 15 is also based on these two clocks. That is, this is supplied to the means 100 for generating N and CTS, and at the same time, the clock 92 is output as PCK1.

受信側機器20では、HDMI−1ケーブル15を介して受信したPCK1、CTS1、N1、Data1を基に、音声クロック再生手段200で、音声クロック82を再生する。一巡してきたクロック82そのものは、スペクトラム純度が低下しているので、DAコンバータ680のクロックには適さず、オリジナルの高純度の水晶音声クロック80の方を用いる。すなわち、制御手段620の制御信号SL2で、音声クロックの選択手段640を制御し、水晶発振手段800の出力クロック80を、DAコンバータ680の音声クロックとして供給する。   In the receiving device 20, the audio clock 82 is reproduced by the audio clock reproducing means 200 based on PCK 1, CTS 1, N 1, and Data 1 received via the HDMI-1 cable 15. Since the clock 82 itself that has made a round has degraded spectrum purity, it is not suitable for the clock of the DA converter 680, and the original high-purity crystal audio clock 80 is used. That is, the control unit SL 620 controls the audio clock selection unit 640 to supply the output clock 80 of the crystal oscillation unit 800 as the audio clock of the DA converter 680.

以上の説明から明らかなように、本実施の形態2においても、実施の形態1の場合と同様に、第2のモードでは受信側機器20が音声クロックのマスターになって、送信側機器10を含めた全体が、完全にAV同期するシステムを構成することができる。   As is clear from the above description, also in the second embodiment, as in the first embodiment, in the second mode, the receiving side device 20 becomes the audio clock master, and the transmitting side device 10 is The system including the entire system can be completely AV-synchronized.

しかも、極めて高音質を得る構成を、受信側で取りながら、同時に、送信側のクロック変動も無く、また、映像クロックとの周波数偏差も生じないので、受信側だけでなく、送信側の音質も確保し、リップシンクの問題も生じないという特有の効果を、同様に得ることができる。   In addition, while taking a configuration that obtains extremely high sound quality on the receiving side, there is no clock fluctuation on the transmitting side and no frequency deviation from the video clock, so not only on the receiving side but also on the transmitting side It is possible to obtain the specific effect of ensuring that there is no problem of lip sync.

次に、本実施の形態2によるシステムの動作について、図4に示した概要動作フローを参照しながら説明する。
図4において、送信側機器10の動作を、左の点線内に、受信側機器20の動作状態を、右の点線内に示す。
Next, the operation of the system according to the second embodiment will be described with reference to the general operation flow shown in FIG.
In FIG. 4, the operation of the transmission side device 10 is shown in the left dotted line, and the operation state of the reception side device 20 is shown in the right dotted line.

まず、第2のモードの”可否”を、送信側機器10から、受信側機器20へ問い合わせる(S101)。   First, the transmission-side device 10 inquires of the reception-side device 20 about “possibility” of the second mode (S101).

受信側機器20は、これに”可”と答える(S201)。   The receiving side device 20 answers “Yes” to this (S201).

第2のモード機能を有するとの回答である場合、送信側機器10は、内部の動作モードを、第2のモードに変える(S102)。   When it is a reply that it has the second mode function, the transmitting-side device 10 changes the internal operation mode to the second mode (S102).

次に、送信側機器10は、第2のN,CTSパラメータから、音声クロック2を再生する手段400の出力(音声クロック2=クロック81)の安定/非安定を自己判定する(S103)。   Next, the transmission side device 10 self-determines whether the output of the means 400 for reproducing the audio clock 2 (audio clock 2 = clock 81) is stable or unstable from the second N and CTS parameters (S103).

OKであれば、音声クロックの選択手段633、ピクセルクロック選択手段631を、制御手段610で制御し、それぞれ音声クロックとして、クロック81を選択する(S104)。   If OK, the audio clock selection means 633 and the pixel clock selection means 631 are controlled by the control means 610, and the clock 81 is selected as the audio clock (S104).

次に、音声クロックから、ピクセルクロックを生成するPLL500の出力(すなわちPCK2=クロック91)の安定/非安定を、自己判定する(S105)。   Next, whether the output of the PLL 500 that generates the pixel clock from the audio clock (that is, PCK2 = clock 91) is stable or unstable is determined (S105).

OKであれば、ピクセルクロック選択手段631を制御手段610で制御し、ピクセルクロックとして、第2のN,CTSパラメータから、音声クロック2を再生する手段400の出力、PCK2(ピクセルクロック91)を、選択する(S106)。   If OK, the pixel clock selection means 631 is controlled by the control means 610, and the output of the means 400 for reproducing the audio clock 2 from the second N, CTS parameters, PCK2 (pixel clock 91), as the pixel clock, Select (S106).

送信側機器10は、完全に第2のモードへ移行したことを、受信側機器20へ報告する(S107)。   The transmission side device 10 reports to the reception side device 20 that it has completely shifted to the second mode (S107).

受信側機器20はこれを受け、制御手段620の制御信号SL2で、音声クロックの選択手段640を制御し、水晶発振手段800の出力クロック80を、DAコンバータ680の音声クロックとして供給する(S208)。   In response to this, the receiving side device 20 controls the audio clock selection unit 640 with the control signal SL2 of the control unit 620, and supplies the output clock 80 of the crystal oscillation unit 800 as the audio clock of the DA converter 680 (S208). .

最後に、受信側機器20が第2のモードへ移行完了したことを、送信側機器10へ報告する(S209)。   Finally, the transmission side device 10 is notified that the reception side device 20 has completed the transition to the second mode (S209).

送信側機器10は、これを受けて、第2のモードへの移行シーケンスを完了する(S110)。   Upon receiving this, the transmission side device 10 completes the transition sequence to the second mode (S110).

このようにして、前記実施の形態1と同様に、機器間で相互に第2のモード時の特別な構成をとることが出来るか否かを問い合わせて、該機能を有する場合にだけその動作を行いえるようにすることで、相互互換性の欠如に伴う不具合を防止することができる。   In this way, as in the first embodiment, the devices are inquired as to whether or not they can take a special configuration in the second mode, and the operation is performed only when the device has the function. By doing so, it is possible to prevent problems associated with lack of intercompatibility.

また、システムによっては、放送受信や外部入力信号のリピート伝送など、レート制御が不可のコンテンツも扱うこともあるため、その場合には、従来のモードである基本動作モードを使用するように構成することで、不具合を未然に防止することができる点も、前記実施の形態1と同様である。   In addition, depending on the system, content that cannot be rate-controlled, such as broadcast reception and repeat transmission of an external input signal, may be handled. In this case, the basic operation mode, which is the conventional mode, is used. Thus, it is the same as in the first embodiment that the problem can be prevented beforehand.

また、実施の形態1と異なる構成により、送信側機器10側に機能を集約させることが出来るので、受信側機器20の構成が簡単となり、モード移行のシーケンスをシンプルにできる効果も生まれる。   Further, with the configuration different from that of the first embodiment, functions can be concentrated on the transmission side device 10 side, so that the configuration of the reception side device 20 is simplified, and the effect of simplifying the mode transition sequence is also produced.

以上のような本実施の形態2のデータ送信・受信システムでは、受信側機器が、第2のモードにおいて、送信側機器から伝送される映像クロック1を送信側機器にそのまま折り返す形で映像クロック2として伝送するとともに、送信側機器が、受信側機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL400、及び、該音声クロック用PLL400で再生した音声クロックを元に映像クロックを再生する映像クロック用PLL500を備え、第2のモードにおいて、前記映像クロック用PLL500で再生した映像クロックで送信側の内部を動作させる構成としたので、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制できるシステムを得ることができる。   In the data transmission / reception system of the second embodiment as described above, in the second mode, the receiving side device turns the video clock 1 transmitted from the transmitting side device back to the transmitting side device as it is in the second mode. And the audio clock PLL 400 for reproducing the audio clock using the additional data 2 transmitted from the receiving device, and the video clock based on the audio clock reproduced by the audio clock PLL 400 In the second mode, the transmission side is operated by the video clock reproduced by the video clock PLL 500, so that there is no significant fluctuation of the transmission side clock. Adjust the data rate of video and audio data sent from the transmission side on a clock basis. Things can, thereby secured the sound quality of the transmission side, also, it is possible to obtain a system which can also suppress the lip-sync by a frequency deviation of the video clock and the audio clock problem.

(実施の形態3)
図5および図6は、本発明の実施の形態3によるデータ送信・受信システムの構成を示す。
図5および図6において、図3と同様の手段は、同一番号を付し、説明を省略する。
本実施の形態3は、前記実施の形態2で使用したHDMI−2ケーブル35を廃止し、代わりに、HDMI−1ケーブル15の双方向バスを利用する構成としたものである。
(Embodiment 3)
5 and 6 show a configuration of a data transmission / reception system according to the third embodiment of the present invention.
5 and FIG. 6, the same means as those in FIG.
In the third embodiment, the HDMI-2 cable 35 used in the second embodiment is eliminated, and a bidirectional bus of the HDMI-1 cable 15 is used instead.

次に、本実施の形態3のデータ送信・受信システム3000の動作について、図5を参照しながら説明する。
基本モードの動作については、実施の形態1と同様であり、以下、第2のモードの動作について説明する。
Next, the operation of the data transmission / reception system 3000 according to the third embodiment will be described with reference to FIG.
The operation in the basic mode is the same as that in the first embodiment, and the operation in the second mode will be described below.

受信側機器20において、PCKは、送信側機器10から受信したPCK1を、グローバルに使用する。送信側機器10でも、同様にPCK1をグローバルに使用する。パラメータNは、もとより送受で共通パラメータであるので、従来モードで伝送することで充分である。   In the receiving device 20, the PCK globally uses PCK1 received from the transmitting device 10. Similarly, the transmitting device 10 uses PCK1 globally. Since parameter N is a common parameter for transmission and reception, it is sufficient to transmit in the conventional mode.

受信側機器20から、送信側機器10へリターンさせるCTSだけが、システム的に追加パラメータとなるため、HDMI−1ケーブル15のCECラインを、このために活用する。CECは、双方向バスであり、相互の制御のためのものである。この制御データに、受信側機器20から送信側機器10へ返すCTSパラメータ(RCTS)を載せることで、図3と同様に動作をさせることが出来るようになる。   Only the CTS that is returned from the receiving device 20 to the transmitting device 10 is an additional parameter in the system, so the CEC line of the HDMI-1 cable 15 is used for this purpose. CEC is a bi-directional bus for mutual control. By putting a CTS parameter (RCTS) returned from the receiving side device 20 to the transmitting side device 10 in this control data, the operation can be performed as in FIG.

すなわち、HDMIケーブルを、双方向で使用し、計2本必要であったのを、1本に簡単化できるメリットがある。   That is, there is an advantage that the HDMI cable can be used in both directions, and a total of two cables can be simplified to one.

ただ、CECのバスラインで伝送できる帯域は狭く、RCTSを頻繁に伝送できない畏れがある。すなわち、必要とする伝送周期0.7ms〜3.0msに対して、マージンが不足する。   However, the bandwidth that can be transmitted on the CEC bus line is narrow, and there is a possibility that RCTS cannot be transmitted frequently. That is, the margin is insufficient for the required transmission period of 0.7 ms to 3.0 ms.

図6は、図5で課題であった帯域のマージン不足を解決するため、所要の伝送周期を1024倍にした構成である。   FIG. 6 shows a configuration in which the required transmission cycle is multiplied by 1024 in order to solve the shortage of bandwidth margin, which was a problem in FIG.

図6において、伝送用パラメータRCTSを生成する手段300の構成を変更している。また、送信側機器10において、RCTSパラメータから、音声クロック2を再生する手段400の構成を変更している。具体的には、分周数を1024倍としてPLLの比較周期を延ばす構成としている。このようなPLLの動作は、ジッタが増える傾向にある。ジッタが増えるので、一般には好ましくないが、この点は、本実施の形態3においては、受信側でジッタのない水晶音声クロック80を使う構成であり、既にこの課題は解決できるものであり、上記PLLを、データレートの制御のために用いても、ジッタが増えるという問題は生じないものである。すなわち、上記構成のPLLを用いることにより、HDMIケーブルを1本にできる効果が得られることのメリットの方がはるかに大きく、経済的な効果を奏するものとなる。   In FIG. 6, the configuration of the means 300 for generating the transmission parameter RCTS is changed. Further, in the transmission side device 10, the configuration of the means 400 for reproducing the audio clock 2 is changed from the RCTS parameter. Specifically, the PLL comparison cycle is extended by 1024 times the frequency division number. Such PLL operation tends to increase jitter. In general, this is not preferable because the jitter increases. However, in this third embodiment, this is a configuration using the crystal audio clock 80 having no jitter on the receiving side, and this problem has already been solved. Even if the PLL is used for controlling the data rate, the problem of increased jitter does not occur. That is, by using the PLL having the above configuration, the merit of obtaining the effect of being able to use one HDMI cable is much greater, and an economic effect is achieved.

以上のような本実施の形態3のデータ送信・受信システムでは、受信側機器が、第2のモードにおいて、該受信側機器で生成する音声クロックを用いて、受信側機器に備えたDAコンバータにより、音声データをアナログに変換するとともに、該受信側機器で生成する音声クロックを、基本モードで使用するのと同じ所定の分周比Nで分周した周期を映像クロック1でカウントしたデータを、付加データ2として伝送し、送信側機器が、受信側機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL400、及び、該音声クロック用PLL400で再生した音声クロックを元に映像クロックを再生する映像クロック用PLL500を備え、第2のモードにおいて、映像クロック用PLL500で再生した映像クロックで送信側の内部を動作させる構成とした、あるいはさらに、付加データ2を、第2の機器で生成する音声クロックを、基本モードで使用するのと同じ所定の分周比NのさらにM倍(Mは2以上の整数)で分周してより長周期とする構成としたので、極めて高音質を得る構成を受信側で取りながら、送信側のクロックの大きな変動を生ずることなく、送信側から送出する映像、音声データのデータレートを、クロックベースで調整することができて、これにより送信側の音質を確保でき、また、映像クロックと音声クロックの周波数偏差によるリップシンクの問題をも抑制でき、さらに、送信側と受信側を接続するHDMIケーブルの本数を1本とできるシステムを得ることができる。   In the data transmission / reception system of the third embodiment as described above, in the second mode, the receiving side device uses the audio clock generated by the receiving side device and uses the DA converter provided in the receiving side device. In addition to converting the audio data to analog, the data obtained by counting the period obtained by dividing the audio clock generated by the receiving-side device by the same predetermined frequency division ratio N used in the basic mode with the video clock 1, Based on the audio clock PLL 400 that is transmitted as the additional data 2 and the transmission side device reproduces the audio clock by using the additional data 2 transmitted from the reception side device, and the audio clock reproduced by the audio clock PLL 400 A video clock PLL 500 that reproduces the video clock, and a video reproduced by the video clock PLL 500 in the second mode The transmission side is configured to operate inside the lock, or, in addition, the additional data 2 is further M times the same predetermined frequency division ratio N as that used in the basic mode for the audio clock generated by the second device. (M is an integer greater than or equal to 2) is divided into a longer period, so that the receiving side can be configured to obtain extremely high sound quality without causing large fluctuations in the transmitting side clock. The data rate of video and audio data sent from the network can be adjusted on a clock basis, so that the sound quality on the transmission side can be secured, and the problem of lip sync caused by the frequency deviation between the video clock and the audio clock is also suppressed. In addition, it is possible to obtain a system in which the number of HDMI cables connecting the transmission side and the reception side can be one.

なお、上記の各実施の形態では、装置の構成として説明したが、これはプログラムを用いたソフト処理を用いた方法であっても良い。また、AVの同期関係についても、その効果を増すためにコヒーレントであるのが、好都合であるが、必ずしもコヒーレントでなくとも、本来の目的は達成できるものである。   In each of the above embodiments, the configuration of the apparatus has been described. However, this may be a method using a software process using a program. Moreover, it is convenient for the AV synchronization relationship to be coherent in order to increase the effect, but the original purpose can be achieved even if it is not necessarily coherent.

本発明に係るデータ送信方法、データ受信方法、データ送信装置、データ受信装置は、高画質、高音質を重視する民生用あるいは業務用の送受分離型のシアターシステム等に有用である。   The data transmission method, the data reception method, the data transmission device, and the data reception device according to the present invention are useful for a consumer or business use transmission / reception separation type theater system that emphasizes high image quality and high sound quality.

本発明の実施の形態1によるデータ送信・受信システム1000の構成図である。It is a block diagram of the data transmission / reception system 1000 by Embodiment 1 of this invention. 前記実施の形態1におけるシステムの動作フロー図である。It is an operation | movement flowchart of the system in the said Embodiment 1. 本発明の実施の形態2によるデータ送信・受信システム2000の構成図である。It is a block diagram of the data transmission / reception system 2000 by Embodiment 2 of this invention. 前記実施の形態2によるシステムの動作フロー図である。It is an operation | movement flowchart of the system by the said Embodiment 2. FIG. 本発明の実施の形態3によるデータ送信・受信システム3000の構成図である。It is a block diagram of the data transmission / reception system 3000 by Embodiment 3 of this invention. 前記実施の形態3の変形例によるデータ送信・受信システム3010の構成図である。FIG. 10 is a configuration diagram of a data transmission / reception system 3010 according to a modification of the third embodiment. 従来のデータ送信・受信システム7000の構成図である。It is a block diagram of the conventional data transmission / reception system 7000. FIG. 各種のクロックのスペクトラムを示す図である。It is a figure which shows the spectrum of various clocks. 従来のデータ送信・受信システム9000の構成図である。It is a block diagram of the conventional data transmission / reception system 9000. 従来のデータ信号フロー制御の説明図である。It is explanatory drawing of the conventional data signal flow control. AVクロックの偏差による時間ズレの説明図である。It is explanatory drawing of the time shift by the deviation of AV clock. AVクロックの偏差による時間ズレの評価説明図である。It is evaluation explanatory drawing of the time gap by the deviation of AV clock.

符号の説明Explanation of symbols

1000 データ送信・受信システム
2000 データ送信・受信システム
3000 データ送信・受信システム
3010 データ送信・受信システム
10 送信側機器
20 受信側機器
15 HDMI−1ケーブル
35 HDMI−2ケーブル
100 N,CTSを生成する手段
200 音声クロック再生手段
300 伝送用パラメータN2、CTS2を生成する手段
400 第2のN,CTSパラメータから音声クロック2を再生する手段
500 音声クロックからピクセルクロックを生成するPLL
700 AVデータデコード手段
800 水晶発振手段
850 送信側音声クロック生成手段
900 送信側ピクセルクロック生成手段
1000 data transmission / reception system 2000 data transmission / reception system 3000 data transmission / reception system 3010 data transmission / reception system 10 transmission side device 20 reception side device 15 HDMI-1 cable 35 HDMI-2 cable 100 N, means for generating CTS 200 audio clock reproduction means 300 means for generating transmission parameters N2, CTS2 400 means for reproducing audio clock 2 from second N, CTS parameters 500 PLL for generating pixel clock from audio clock
700 AV data decoding means 800 Crystal oscillation means 850 Transmission side audio clock generation means 900 Transmission side pixel clock generation means

Claims (13)

第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する第1の伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、
第2の機器から第1の機器へ、映像クロック2を伝送する第2の伝送手段を備え、第2の機器で生成する映像クロック2を第1の機器へ伝送する第2のモードを、さらに有し、
前記第2のモードにおいて、第1の機器は、第2の機器で生成して第1の機器へ伝送される映像クロック2を用いて、第1の機器から送出する映像データ1または音声データ1の両方、または何れかの一方のデータレートを調整し、
前記第1の機器は、前記映像クロック2を利用した場合、前記第1の機器内で生成した映像クロックに代えて、前記映像クロック2を前記第2の機器に対して送信し、
前記第1の機器は、前記映像クロック2に基づいて導出された付加データを前記第2の機器に送信し、
前記第2の機器は、前記第1の機器から送信される音声クロックであって、前記付加データから生成される音声クロックに代えて、前記第2の機器内で発生した音声クロックを用いて音声データを出力するデータ送信・受信システム。
First transmission means is provided for transmitting video data 1, audio data 1, additional data 1, and video clock 1 from the first device to the second device, and the video clock 1 generated by the first device is the first. It has a basic mode to transmit to 2 devices,
A second mode of transmitting a video clock 2 generated by the second device to the first device, further comprising a second transmission means for transmitting the video clock 2 from the second device to the first device; Have
In the second mode, the first device uses the video clock 2 generated by the second device and transmitted to the first device to transmit video data 1 or audio data 1 transmitted from the first device. Adjust both or one of the data rates ,
When using the video clock 2, the first device transmits the video clock 2 to the second device instead of the video clock generated in the first device,
The first device transmits additional data derived based on the video clock 2 to the second device;
The second device is an audio clock transmitted from the first device, and uses an audio clock generated in the second device instead of an audio clock generated from the additional data. A data transmission / reception system that outputs data.
請求項1に記載のデータ送信・受信システムにおいて、
前記第2の機器は、前記第2のモードにおいて、該第2の機器で生成する音声クロックを用いて音声データをアナログに変換するDAコンバータを、備えた、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 1,
The second device includes a DA converter that converts audio data to analog using an audio clock generated by the second device in the second mode.
A data transmission / reception system.
請求項1に記載のデータ送信・受信システムにおいて、
前記第2のモードにおいて、第2の機器は、前記映像クロック2を、前記第2の機器で生成する音声クロックを元に、位相同期ループにより再生する、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 1,
In the second mode, the second device reproduces the video clock 2 by a phase-locked loop based on an audio clock generated by the second device.
A data transmission / reception system.
請求項1に記載のデータ送信・受信システムにおいて、
前記第1の機器は、該第1の機器の制御手段により、前記第2の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、自身の動作モードを第2のモードに切り換えるとともに、該第2のモードに切り換えたことを第2の機器に通知する、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 1,
The first device inquires whether or not the second device has the function of the second mode by the control unit of the first device, and determines that the first device has the function when the first device has the function of the second mode. Switch to the second mode and notify the second device that the mode has been switched to the second mode.
A data transmission / reception system.
請求項1に記載のデータ送信・受信システムにおいて、
前記第2の機器は、該第2の機器の制御手段により、前記第1の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、自身の動作モードを第2のモードに切り換えるとともに、該第2のモードに切り換えたことを第1の機器に通知する、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 1,
The second device inquires whether or not the first device has the function of the second mode by the control unit of the second device, and determines that the second device has the function when the second device has the function of the second mode. Switch to the second mode and notify the first device that the mode has been switched to the second mode.
A data transmission / reception system.
請求項1に記載のデータ送信・受信システムにおいて、
前記第1の機器は、該第1の機器の制御手段により、前記第2の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、該第1の機器で選択したコンテンツデータがそのデータレートを変更できない場合、動作モードを基本モードのままとする、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 1,
The first device inquires whether or not the second device has the function of the second mode by the control unit of the first device, and determines that the first device has the function when the first device has the function. If the content data selected on the device cannot change its data rate, leave the operation mode in the basic mode.
A data transmission / reception system.
第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、
第2の機器から第1の機器へ、付加データ2、および映像クロック2を伝送する伝送手段を備え、第2の機器から映像クロック2を第1の機器へ伝送する第2のモードを、さらに有し、
第2の機器は、前記第2のモードにおいて、第1の機器から伝送される映像クロック1を第1の機器にそのまま折り返す形で映像クロック2として伝送し、
第1の機器は、第2の機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該第2のモードにおいて、前記映像クロック用PLLで再生した映像クロックで該第1の機器の内部を動作させ、
前記第1の機器は、前記映像クロック2を利用した場合、前記映像クロック2に基づいて導出された付加データを前記第2の機器に送信し、
前記第2の機器は、前記第1の機器から送信される音声クロックであって、前記付加データから生成される音声クロックに代えて、前記第2の機器内で発生した音声クロックを用いて音声データを出力するデータ送信・受信システム。
A transmission means for transmitting video data 1, audio data 1, additional data 1, and video clock 1 from the first device to the second device, wherein the video clock 1 generated by the first device is the second device And has a basic mode to transmit to
A transmission means for transmitting the additional data 2 and the video clock 2 from the second device to the first device, and a second mode for transmitting the video clock 2 from the second device to the first device; Have
In the second mode, the second device transmits the video clock 1 transmitted from the first device to the first device as the video clock 2 as it is,
The first device reproduces the video clock based on the audio clock PLL that reproduces the audio clock using the additional data 2 transmitted from the second device, and the audio clock reproduced by the audio clock PLL. A video clock PLL, and in the second mode, operating the first device with the video clock reproduced by the video clock PLL;
When the first device uses the video clock 2, the first device transmits additional data derived based on the video clock 2 to the second device,
The second device is an audio clock transmitted from the first device, and uses an audio clock generated in the second device instead of an audio clock generated from the additional data. A data transmission / reception system that outputs data.
請求項7に記載のデータ送信・受信システムにおいて、
第2の機器は、前記第2のモードにおいて、該第2の機器で生成する音声クロックを用いて音声データをアナログに変換するDAコンバータを、備えた、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 7,
The second device includes a DA converter that converts audio data to analog using an audio clock generated by the second device in the second mode.
A data transmission / reception system.
請求項7に記載のデータ送信・受信システムにおいて、
前記第1の機器は、該第1の機器の制御手段により、前記第2の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、自身の動作モードを第2のモードに切り換えるとともに、第2のモードに切り換えたことを第2の機器に通知する、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 7,
The first device inquires whether or not the second device has the function of the second mode by the control unit of the first device, and determines that the first device has the function when the first device has the function of the second mode. Switch to the second mode, and notify the second device that the mode has been switched to the second mode.
A data transmission / reception system.
請求項7に記載のデータ送信・受信システムにおいて、
前記第2の機器は、該第2の機器の制御手段により、前記第1の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、自身の動作モードを第2のモードに切り換えるとともに、第2のモードに切り換えたことを第1の機器に通知する、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 7,
The second device inquires whether or not the first device has the function of the second mode by the control unit of the second device, and determines that the second device has the function when the second device has the function of the second mode. Switch to the second mode and notify the first device that the mode has been switched to the second mode.
A data transmission / reception system.
請求項7に記載のデータ送信・受信システムにおいて、
前記第1の機器は、該第1の機器の制御手段により、前記第2の機器が第2のモードの機能を有するか否かを問い合わせ、該機能を有すると判断したとき、該第1の機器で選択したコンテンツデータがそのデータレートを変更できない場合、動作モードを基本モードのままとする、
ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 7,
The first device inquires whether or not the second device has the function of the second mode by the control unit of the first device, and determines that the first device has the function when the first device has the function. If the content data selected on the device cannot change its data rate, leave the operation mode in the basic mode.
A data transmission / reception system.
第1の機器から第2の機器へ、映像データ1、音声データ1、付加データ1、および映像クロック1を伝送する伝送手段を備え、第1の機器で生成する映像クロック1を第2の機器へ伝送する基本モードを有するとともに、
第2の機器から第1の機器へ、付加データ2を伝送する伝送手段を備え、第2の機器で生成する付加データ2を第1の機器へ伝送する第2のモードを、さらに有し、
第2の機器は、前記第2のモードにおいて、該第2の機器で生成する音声クロックを用いて、該第2の機器に備えたDAコンバータにより、音声データをアナログに変換するとともに、前記第2の機器で生成する音声クロックを、前記基本モードで使用するのと同じ所定の分周比Nで分周した周期を映像クロック1でカウントしたデータを、前記付加データ2として伝送し、
第1の機器は、第2の機器から伝送された付加データ2を用いて音声クロックを再生する音声クロック用PLL、及び、該音声クロック用PLLで再生した音声クロックを元に映像クロックを再生する映像クロック用PLLを備え、該第2のモードにおいて、前記映像クロック用PLLで再生した映像クロックで該第1の機器の内部を動作させ、
前記第2の機器は、前記第1の機器が前記付加データ2を利用した場合、前記第1の機器から送信される音声クロックであって、前記付加データ2に基づいて生成される音声クロックに代えて、前記第2の機器内で発生した音声クロックを用いて音声データを出力するデータ送信・受信システム。
A transmission means for transmitting video data 1, audio data 1, additional data 1, and video clock 1 from the first device to the second device, wherein the video clock 1 generated by the first device is the second device And has a basic mode to transmit to
A transmission means for transmitting the additional data 2 from the second device to the first device, further comprising a second mode for transmitting the additional data 2 generated by the second device to the first device;
In the second mode, the second device uses the audio clock generated by the second device to convert the audio data into analog by the DA converter provided in the second device, and The data obtained by dividing the audio clock generated by the device 2 with the same predetermined frequency dividing ratio N used in the basic mode and counting with the video clock 1 is transmitted as the additional data 2.
The first device reproduces the video clock based on the audio clock PLL that reproduces the audio clock using the additional data 2 transmitted from the second device, and the audio clock reproduced by the audio clock PLL. A video clock PLL, and in the second mode, operating the first device with the video clock reproduced by the video clock PLL;
When the first device uses the additional data 2, the second device is an audio clock transmitted from the first device and is generated based on the additional data 2. Instead, a data transmission / reception system that outputs audio data using an audio clock generated in the second device .
請求項12に記載のデータ送信・受信システムにおいて、
前記付加データ2は、第2の機器で生成する音声クロックを、基本モードで使用するのと同じ所定の分周比NのさらにM倍(Mは2以上の整数)で分周してより長周期とした、ことを特徴とするデータ送信・受信システム。
The data transmission / reception system according to claim 12,
The additional data 2 is longer when the audio clock generated by the second device is further divided by M times (M is an integer of 2 or more) the same predetermined frequency division ratio N used in the basic mode. A data transmission / reception system characterized by a period.
JP2007020678A 2007-01-31 2007-01-31 Data transmission / reception system Expired - Fee Related JP4962024B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007020678A JP4962024B2 (en) 2007-01-31 2007-01-31 Data transmission / reception system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007020678A JP4962024B2 (en) 2007-01-31 2007-01-31 Data transmission / reception system

Publications (2)

Publication Number Publication Date
JP2008187586A JP2008187586A (en) 2008-08-14
JP4962024B2 true JP4962024B2 (en) 2012-06-27

Family

ID=39730308

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007020678A Expired - Fee Related JP4962024B2 (en) 2007-01-31 2007-01-31 Data transmission / reception system

Country Status (1)

Country Link
JP (1) JP4962024B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011172156A (en) 2010-02-22 2011-09-01 Sony Corp Content reproduction system, content receiving apparatus, audio reproduction apparatus, content reproduction method and program
JP2012039260A (en) * 2010-08-04 2012-02-23 Panasonic Corp Transmission and reception system, transmitter, and receiver
JP2013085224A (en) * 2011-07-29 2013-05-09 D & M Holdings Inc Content data transmission system and content data transmission method
JP2013031087A (en) * 2011-07-29 2013-02-07 D & M Holdings Inc Content data transmission system and content data transmission method
JP5857588B2 (en) * 2011-09-28 2016-02-10 ソニー株式会社 Transmission device, transmission method, reception device, reception method, and transmission / reception system
JP5857840B2 (en) * 2012-03-29 2016-02-10 株式会社Jvcケンウッド Encoder and control method
TWI720153B (en) * 2016-03-29 2021-03-01 日商新力股份有限公司 Transmission device, transmission method, reception device, reception method and transmission and transmission system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4625350B2 (en) * 2005-03-15 2011-02-02 株式会社ディーアンドエムホールディングス Data transmission device, data reception device, and data transmission / reception system
CN101171838B (en) * 2005-04-28 2011-06-01 松下电器产业株式会社 Lip-sync correcting device and lip-sync correcting method

Also Published As

Publication number Publication date
JP2008187586A (en) 2008-08-14

Similar Documents

Publication Publication Date Title
JP4962024B2 (en) Data transmission / reception system
JP4625863B2 (en) Transmitting apparatus and transmitting / receiving apparatus
JP3800337B2 (en) Digital transmission system and clock recovery device
KR101291933B1 (en) Device and method for synchronizing different parts of a digital service
JP4880068B2 (en) Transmission device, reception device, and content reproduction system
WO2013018701A1 (en) Content data transmission system and content data transmission method
US20070286245A1 (en) Digital signal processing apparatus and data stream processing method
KR101545318B1 (en) Clock generating method and data transmitting method in multimedia source
JP5194110B2 (en) Transmitter and receiver
US7558462B2 (en) Reproduction device and content information reproduction method
JP5254376B2 (en) Playback device
US8005338B2 (en) Recording and reproducing device
JP2007235519A (en) Method and system for video sound synchronization
JP2007295514A (en) Data receiver
US20060092983A1 (en) Clock generating apparatus
JP4519746B2 (en) Clock generation circuit and electronic device equipped with the same
JP2006180398A (en) Clock-generating device and method
JP2006101029A (en) Data receiver
WO2012017573A1 (en) Transmission/reception system, transmission device, and receiving device
JP2004088442A (en) System and device for transmitting sound and video and sound receiver
JP2013026992A (en) Reproducing device
EP2739042B1 (en) Content data transmission system and content data transmission method
JP2007280584A (en) Data receiver
US20080219645A1 (en) Reproducing Apparatus
JP2011239096A (en) Transmission apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091023

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20110613

RD05 Notification of revocation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7425

Effective date: 20110613

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111213

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120228

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120312

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150406

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees