JP7285204B2

JP7285204B2 - audio processor

Info

Publication number: JP7285204B2
Application number: JP2019221767A
Authority: JP
Inventors: 貴昭小林
Original assignee: オンキヨーテクノロジー株式会社
Priority date: 2019-12-09
Filing date: 2019-12-09
Publication date: 2023-06-01
Anticipated expiration: 2039-12-09
Also published as: JP2021093578A

Description

本発明は、音声信号に増幅等の音声信号処理を行う音声処理装置に関する。 The present invention relates to an audio processing apparatus that performs audio signal processing such as amplification on an audio signal.

音声信号に増幅等の音声信号処理を行う音声処理装置として、例えば、テレビ（シンク機器）から入力される音声信号をスピーカーに出力するＡＲＣ（Audio Return Channel）機能を有するＡＶレシーバーがある（例えば、特許文献１参照。）。テレビとＡＶレシーバーとは、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）ケーブルで接続される。また、テレビからＨＤＭＩ（登録商標）ケーブルを介して、デジタル音声信号が、ＡＶレシーバーに入力される。ＡＶレシーバーは、デジタル音声信号をアナログ音声信号にＤ／Ａ変換し、スピーカーに出力する。 As an audio processing device that performs audio signal processing such as amplification on an audio signal, for example, there is an AV receiver having an ARC (Audio Return Channel) function that outputs an audio signal input from a television (sink device) to a speaker (for example, See Patent Document 1.). The television and the AV receiver are connected by an HDMI (registered trademark) (High-Definition Multimedia Interface) cable. Also, a digital audio signal is input from the television to the AV receiver via an HDMI (registered trademark) cable. The AV receiver D/A converts a digital audio signal into an analog audio signal and outputs it to a speaker.

上記ＡＲＣ機能を拡張した機能として、ＨＤＭＩ（登録商標）２．１規格で追加されたｅＡＲＣ（Enhanced Audio Return Channel）機能がある。ｅＡＲＣ機能に対応した機器は、イーサネット（登録商標）対応ＨＤＭＩ（登録商標）ケーブルで接続される。ｅＡＲＣ機能に対応したＡＶレシーバーは、ＡＲＣ機能同様、テレビから入力される音声信号をスピーカーに出力する。ｅＡＲＣ機能では、ビットレートの高い音声信号（High Bit Rate Audio）を伝送可能である。 As an extension of the ARC function, there is an eARC (Enhanced Audio Return Channel) function added in the HDMI (registered trademark) 2.1 standard. A device compatible with the eARC function is connected with an Ethernet (registered trademark) compatible HDMI (registered trademark) cable. An AV receiver that supports the eARC function outputs the audio signal input from the TV to the speaker, just like the ARC function. The eARC function can transmit a high bit rate audio signal (High Bit Rate Audio).

ｅＡＲＣ機能では、シンク機器の映像出力とＡＶレシーバーからの音声出力との遅延（latency）のずれが生じないように、ｅＡＲＣ対応のシンク機器から、ｅＡＲＣ対応のＡＶレシーバーに対して、ｅＡＲＣの遅延設定の要求が通知される。ｅＡＲＣ対応のＡＶレシーバーは、遅延設定要求に対して、スピーカー出力を遅延させるか、又は、シンク機器側からＡＶレシーバーまでの音声出力を遅らせるために、遅延設定要求の返値を通知する。 With the eARC function, the eARC delay setting is performed from the eARC compatible sink device to the eARC compatible AV receiver so that there is no lag between the video output of the sink device and the audio output from the AV receiver. is notified of the request for In response to the delay setting request, the eARC-compatible AV receiver notifies the return value of the delay setting request in order to delay the speaker output or delay the audio output from the sink device side to the AV receiver.

以下では、ＨＤＭＩ（登録商標）２．１の仕様書に記載されている一例を説明するが、詳細は、仕様書を参照されたい。仕様書のFigure9-34においては、テレビ側が、ＡＶレシーバーの遅延（delay）を考慮し、音声出力の遅延（delay）を調整している。この例では、テレビが映像を出力するまでに、１４０ｍｓかかるため、ＡＶレシーバーからの出力までの時間を、１４０ｍｓに調整する場合について説明する。 An example described in the HDMI (registered trademark) 2.1 specification will be described below, but please refer to the specification for details. In Figure 9-34 of the specification, the TV side adjusts the audio output delay considering the delay of the AV receiver. In this example, since it takes 140 ms for the television to output video, a case will be described in which the time until output from the AV receiver is adjusted to 140 ms.

（１）テレビは、映像出力の遅延（latency）時間をＡＶレシーバーに通知するために、ERX_LATENCY_REQで１４０をＡＶレシーバーに通知する。
（２）ＡＶレシーバーは、スピーカーに音声を出力するまでに、１００ｍｓかかるとした場合、ERX_LATECY値を、１００として、ＡＶレシーバーに返す。
（３）テレビは、その値を受けて、１４０－１００＝４０ｍｓだけ、ＡＶレシーバーに対して、音声出力を遅らせる。 (1) The TV notifies the AV receiver of 140 with ERX_LATENCY_REQ in order to notify the AV receiver of the video output latency time.
(2) If the AV receiver takes 100 ms to output sound to the speaker, the ERX_LATECY value is set to 100 and returned to the AV receiver.
(3) The TV receives the value and delays the audio output to the AV receiver by 140-100=40ms.

以上により、テレビ→ＡＶレシーバー→スピーカーまでの遅延の値が、４０（ＡＶレシーバーへの出力遅延（delay））＋１００（ＡＶレシーバーからスピーカー出力までの遅延（delay））＝１４０となる。その結果、テレビから見れば、映像と音声との出力の同期がとれることになる。この例では、テレビ側で、ＡＶレシーバーへの音声出力を、４０ｍｓ遅らせるように調整する。 As a result, the value of the delay from TV→AV receiver→speaker is 40 (output delay (delay) to AV receiver)+100 (delay (delay) from AV receiver to speaker output)=140. As a result, when viewed from the television, the output of video and audio can be synchronized. In this example, the TV side adjusts the audio output to the AV receiver so as to delay it by 40 ms.

これに対し、ＡＶレシーバー側でスピーカー出力までの遅延（delay）を１４０ｍｓに調整する場合、
（１）ＡＶレシーバーは、テレビからのERX_LATENCY_REQで１４０を受ける。
（２）ＡＶレシーバーは、スピーカー出力までの遅延（delay）の値を１４０ｍｓに調整し、ERX_LATENCYの値を、１４０として、テレビに返す。
（３）テレビは、ＡＶレシーバーからの通知を受けて、ＡＶレシーバーからスピーカー出力までの時間が１４０ｍｓかかるということであれば、テレビ→ＡＶレシーバーへの音声を、遅延（delay）なしの０ｍｓで出力すればよい。 On the other hand, when adjusting the delay (delay) to speaker output on the AV receiver side to 140ms,
(1) AV receiver receives 140 in ERX_LATENCY_REQ from TV.
(2) The AV receiver adjusts the delay value to speaker output to 140 ms, and returns the value of ERX_LATENCY as 140 to the TV.
(3) If the TV receives a notification from the AV receiver and says that it takes 140 ms from the AV receiver to the speaker output, the TV → AV receiver audio will be output at 0 ms with no delay. do it.

ＡＶレシーバーは、シンク機器（テレビ）側から通知されたERX_LATENCY_REQの値に従って、ＡＶレシーバー側で遅延（latency）を調整するのか、テレビ側でＡＶレシーバーまでに出力する音声を遅延するかを判断し、ERX_LATENCY通知を行わなければならない。 The AV receiver determines whether to adjust the latency on the AV receiver side or delay the audio output to the AV receiver on the TV side according to the value of ERX_LATENCY_REQ notified from the sink device (TV) side, ERX_LATENCY notification MUST be done.

ＡＶアンプは、実際に、ＤＳＰ（Digital Signal Processor）でデコード（復号）する時間を考慮して、ERX_LATECY値をシンク機器側に通知することとなる。実際にＤＳＰでデコードする時間は、音声出力する音声フォーマットによって、変わる。従って、常に同じERX_LATENCY値を、シンク機器に通知した場合、映像と音声との同期がとれないため、シンク機器側から出力される音声フォーマット毎に、ERX_LATENCYを返す必要がある。 The AV amplifier actually notifies the ERX_LATECY value to the sink device side in consideration of the time for decoding (decoding) by a DSP (Digital Signal Processor). The actual DSP decoding time varies depending on the audio output format. Therefore, if the sink device is always notified of the same ERX_LATENCY value, the video and audio cannot be synchronized, so it is necessary to return ERX_LATENCY for each audio format output from the sink device.

特開２０１１－１９９６９３号公報JP 2011-199693 A

上述のように、従来装置では、音声出力と映像出力との同期をとることができないという問題があった。 As described above, the conventional device has a problem that it is impossible to synchronize the audio output and the video output.

本発明の目的は、音声出力と映像出力との同期を可能とする手段を提供することである。 SUMMARY OF THE INVENTION It is an object of the present invention to provide a means to enable synchronization of audio and video outputs.

第１の発明の音声処理装置は、シンク機器から入力される音声信号をスピーカーに出力するｅＡＲＣ機能を有する音声処理装置であって、音声信号にデコード処理を行う信号処理部と、音声信号のフォーマットと、音声信号のフォーマットに対する前記信号処理部によるデコード処理時間と、を対応付けて記憶する記憶部と、制御部と、を備え、前記制御部は、前記シンク機器からの映像出力遅延時間を受信し、受信した映像出力遅延時間と、前記記憶部に記憶されている、前記シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間と、に基づいて、自装置の音声出力遅延時間を、前記シンク機器に通知することを特徴とする。 An audio processing device according to a first aspect of the invention is an audio processing device having an eARC function for outputting an audio signal input from a sink device to a speaker, comprising a signal processing unit that performs decoding processing on the audio signal, and a format of the audio signal. and a decoding processing time by the signal processing unit for the format of the audio signal in association with each other, and a control unit, wherein the control unit receives the video output delay time from the sink device. Then, based on the received video output delay time and the decode processing time corresponding to the format of the audio signal received from the sink device stored in the storage unit, the audio output delay time of the device itself is It is characterized by notifying the sink device.

本発明では、制御部は、受信したシンク機器の映像出力遅延時間と、記憶部に記憶されている、シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間と、に基づいて、自装置の音声出力遅延時間を、シンク機器に通知する。このため、音声信号のフォーマットによって異なる、信号処理部によるデコード時間が考慮され、音声処理装置の音声出力遅延時間が決定されるため、映像出力と音声出力との同期をとることができる。 In the present invention, the control unit, based on the received video output delay time of the sink device and the decoding processing time corresponding to the format of the audio signal received from the sink device, stored in the storage unit, notifies the sink device of the audio output delay time of Therefore, the decoding time by the signal processing unit, which varies depending on the format of the audio signal, is taken into consideration and the audio output delay time of the audio processing device is determined, so that the video output and the audio output can be synchronized.

第２の発明の音声処理装置は、第１の発明の音声処理装置において、前記制御部は、受信した映像出力遅延時間が、前記記憶部に記憶されている、前記シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間よりも、長い場合、自装置の音声出力遅延時間を、受信した映像出力遅延時間と同じ値として、前記シンク機器に通知することを特徴とする。 An audio processing apparatus according to a second aspect of the invention is the audio processing apparatus according to the first aspect of the invention, wherein the received video output delay time of the audio signal received from the sink device is stored in the storage unit. format, the audio output delay time of the device is notified to the sink device as the same value as the received video output delay time.

例えば、シンク機器の映像出力遅延時間が１４０ｍｓ、シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間が１０７ｍｓであったとする。この場合、映像出力遅延時間＝１４０ｍｓ＞デコード処理時間＝１０７ｍｓであるため、制御部は、音声処理装置による音声出力遅延時間を、受信した映像出力遅延時間と同じ値、すなわち、１４０ｍｓとして、シンク機器に通知する。これにより、シンク機器は、自装置の映像出力遅延時間と、音声処理装置側の音声出力遅延時間と、が一致していることから、音声出力を遅延しないため、音声処理装置側で、１４０－１０７＝３３ｍｓ、スピーカーへの音声出力を遅延させることで、映像出力と音声出力とを同期させることができる。 For example, assume that the video output delay time of the sink device is 140 ms, and the decoding processing time corresponding to the format of the audio signal received from the sink device is 107 ms. In this case, since video output delay time=140 ms>decoding processing time=107 ms, the control unit sets the audio output delay time of the audio processing device to the same value as the received video output delay time, i.e., 140 ms, to the sink device. to notify. As a result, since the video output delay time of the sink device matches the audio output delay time of the audio processing device, the sink device does not delay the audio output. By delaying the audio output to the speaker by 107=33 ms, the video output and the audio output can be synchronized.

第３の発明の音声処理装置は、第２の発明の音声処理装置において、前記制御部は、受信した映像出力遅延時間と、前記記憶部に記憶されている、前記シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間との差、音声出力が遅延するように制御することを特徴とする。 An audio processing apparatus according to a third aspect of the invention is the audio processing apparatus according to the second aspect of the invention, wherein the control unit stores the received video output delay time and the audio signal received from the sink device stored in the storage unit. It is characterized by controlling so that the audio output is delayed by the difference from the decoding processing time corresponding to the format of .

第４の発明の音声処理装置は、第１の発明の音声処理装置において、前記制御部は、受信した映像出力遅延時間が、前記記憶部に記憶されている、前記シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間以下である場合、自装置の音声出力遅延時間を、デコード処理時間と同じ値として、前記シンク機器に通知することを特徴とする。 An audio processing apparatus according to a fourth aspect of the invention is the audio processing apparatus according to the first aspect of the invention, wherein the received video output delay time of the audio signal received from the sink device is stored in the storage unit. format, the audio output delay time of the device itself is notified to the sink device as the same value as the decoding processing time.

例えば、シンク機器の映像出力遅延時間が５０ｍｓ、シンク機器から受信する音声信号のフォーマットに対応するデコード処理時間が１０７ｍｓであったとする。この場合、映像出力遅延時間＝５０ｍｓ≦デコード処理時間＝１０７ｍｓであるため、制御部は、音声処理装置による音声出力遅延時間を、デコード処理時間と同じ値、すなわち、１０７ｍｓとして、シンク機器に通知する。これにより、シンク機器は、自装置の映像出力遅延時間を１０７ｍｓに調整するため、音声処理装置側で、スピーカーへの音声出力を遅延させないことで、映像出力と音声出力とを同期させることができる。 For example, assume that the video output delay time of the sink device is 50 ms, and the decoding processing time corresponding to the format of the audio signal received from the sink device is 107 ms. In this case, video output delay time=50 ms≦decoding processing time=107 ms, so the control unit notifies the sink device of the audio output delay time of the audio processing device as the same value as the decoding processing time, that is, 107 ms. . As a result, the sink device adjusts the video output delay time of its own device to 107 ms, so that the audio processing device does not delay the audio output to the speaker, thereby synchronizing the video output and the audio output. .

第５の発明の音声処理装置は、第４の発明の音声処理装置において、前記制御部は、スピーカーへの音声出力を遅延させないように制御する特徴とする。 According to a fifth aspect of the invention, there is provided the audio processing device of the fourth aspect, wherein the control section controls the audio output to the speaker so as not to delay.

本発明によれば、映像出力と音声出力との同期をとることができる。 According to the present invention, video output and audio output can be synchronized.

本発明の実施形態に係るＡＶレシーバーの構成を示すブロック図である。1 is a block diagram showing the configuration of an AV receiver according to an embodiment of the invention; FIG. ｅＡＲＣ機能を実行する場合のＡＶレシーバーの処理動作を示すフローチャートである。4 is a flow chart showing the processing operation of the AV receiver when executing the eARC function;

以下、本発明の実施形態について説明する。図１は、本実施形態に係るＡＶレシーバー１の構成を示すブロック図である。ＡＶレシーバー１（音声処理装置）は、テレビ１００（シンク機器）とイーサネット（登録商標）対応ＨＤＭＩ（登録商標）ケーブルにより接続されている。ＡＶレシーバー１は、テレビ１００から入力される音声信号をスピーカー２００に出力するｅＡＲＣ機能を有する。また、ＡＶレシーバー１は、ＣＥＣ（Consumer Electronics Control）規格に従った通信を行う機能を有する。 Embodiments of the present invention will be described below. FIG. 1 is a block diagram showing the configuration of an AV receiver 1 according to this embodiment. The AV receiver 1 (audio processing device) is connected to the television 100 (sink device) via an Ethernet (registered trademark) compatible HDMI (registered trademark) cable. AV receiver 1 has an eARC function that outputs an audio signal input from television 100 to speaker 200 . The AV receiver 1 also has a function of performing communication according to the CEC (Consumer Electronics Control) standard.

図１に示すように、ＡＶレシーバー１は、制御部２、記憶部３、表示部４、操作部５、
デジタル信号入力端子６、ＤＩＲ（Digital Audio Interface Receiver）７、ＤＳＰ（Di
gital Signal Processor）８、Ｄ／Ａコンバーター（以下、「ＤＡＣ」という。）９、ボ
リューム調整部１０、増幅部１１、スピーカー端子１２を備える。 As shown in FIG. 1, the AV receiver 1 includes a control unit 2, a storage unit 3, a display unit 4, an operation unit 5,
Digital signal input terminal 6, DIR (Digital Audio Interface Receiver) 7, DSP (Di
digital signal processor) 8 , a D/A converter (hereinafter referred to as “DAC”) 9 , a volume adjustment section 10 , an amplification section 11 and a speaker terminal 12 .

制御部２は、記憶部３に記憶されたプログラムに従って、ＡＶレシーバー１を構成する各部を制御する。記憶部３は、制御部２の主メモリとして機能するＲＡＭ（Random Access Memory）、プログラムを記憶するＲＯＭ（Read Only Memory）から構成されている。なお、記憶部３は、例示する構成に限られず、フラッシュメモリやＨＤＤ（Hard Disk Drive）等を含んでいてもよい。 The control section 2 controls each section forming the AV receiver 1 according to a program stored in the storage section 3 . The storage unit 3 is composed of a RAM (Random Access Memory) that functions as a main memory of the control unit 2 and a ROM (Read Only Memory) that stores programs. Note that the storage unit 3 is not limited to the illustrated configuration, and may include a flash memory, a HDD (Hard Disk Drive), or the like.

表示部４は、設定画面等を表示するものであり、ＬＣＤ（液晶ディスプレイ）や蛍光表示管等である。操作部５は、ユーザー操作を受け付けるためのものであり、ＡＶレシーバー１の筐体に設けられた操作ボタンやリモートコントローラーである。ユーザーは、操作部５を操作することにより、例えば、音声信号のボリューム値を指示することができる。 The display unit 4 displays a setting screen and the like, and is an LCD (liquid crystal display), a fluorescent display tube, or the like. The operation unit 5 is for accepting user operations, and includes operation buttons and a remote controller provided on the housing of the AV receiver 1 . By operating the operation unit 5, the user can specify, for example, the volume value of the audio signal.

デジタル信号入力端子６には、イーサネット（登録商標）対応ＨＤＭＩ（登録商標）ケーブルを介して、テレビ１００が接続されている。デジタル信号入力端子６には、テレビ１００からＳＰＤＩＦ信号が入力される。ＤＩＲ７は、テレビ１００から入力されるＳＰＤＩＦ信号を、Ｉ２Ｓ信号に変換する。変換されたＩ２Ｓ信号は、ＤＳＰ８に出力される。ＤＳＰ８は、Ｉ２Ｓ信号に、イコライザー処理等のデジタル信号処理、デコード処理を行う。デコード処理等が行われたＩ２Ｓ信号は、ＤＡＣ９に出力される。ＤＡＣ９は、Ｉ２Ｓ信号をアナログ音声信号にＤ／Ａ変換する。Ｄ／Ａ変換されたアナログ音声信号は、ボリューム調整部１０に出力される。 A television 100 is connected to the digital signal input terminal 6 via an HDMI (registered trademark) cable compatible with Ethernet (registered trademark). An SPDIF signal is input from the television 100 to the digital signal input terminal 6 . DIR 7 converts the SPDIF signal input from television 100 into an I2S signal. The converted I2S signal is output to DSP8. The DSP 8 performs digital signal processing such as equalizer processing and decoding processing on the I2S signal. The I2S signal that has undergone decoding processing and the like is output to the DAC 9 . The DAC 9 D/A converts the I2S signal into an analog audio signal. The D/A converted analog audio signal is output to the volume adjustment section 10 .

ボリューム調整部１０は、アナログ音声信号のボリューム値を調整する。ボリューム値が調整されたアナログ音声信号は、増幅部１１に出力される。増幅部１１は、ボリューム値が調整されたアナログ音声信号を増幅する。増幅されたアナログ音声信号は、スピーカー端子１２に出力される。スピーカー端子１２には、スピーカー２００が接続されている。スピーカー２００は、アナログ音声信号に基づいて、音声を出力する。 The volume adjuster 10 adjusts the volume value of the analog audio signal. The analog audio signal whose volume value has been adjusted is output to the amplifier 11 . The amplifier 11 amplifies the analog audio signal whose volume value has been adjusted. The amplified analog audio signal is output to speaker terminal 12 . A speaker 200 is connected to the speaker terminal 12 . Speaker 200 outputs sound based on the analog audio signal.

ＡＶレシーバー１とテレビ１００とにおいて、ｅＡＲＣ機能が実行される場合、［背景技術］で示されている「ERX_LATENCY」（音声信号がＡＶレシーバー１からスピーカー１００に出力されるまでの遅延時間）の設定に関して、ＡＶレシーバー１のＤＳＰ８のデコード時間を考慮する必要がある。なお、以下の処理は、ＡＶレシーバー１の制御部２によって実行されるが、簡単のため、「制御部２」の文言を省略して、「ＡＶレシーバー１は、～する。」と表現する場合がある。 When the eARC function is executed in the AV receiver 1 and the television 100, the setting of "ERX_LATENCY" (delay time until the audio signal is output from the AV receiver 1 to the speaker 100) shown in [Background Art] , the decoding time of the DSP 8 of the AV receiver 1 must be considered. Note that the following processing is executed by the control unit 2 of the AV receiver 1, but for the sake of simplicity, the phrase "control unit 2" is omitted and expressed as "the AV receiver 1 performs." There is

ある音声信号フォーマットのＤＳＰ８によるデコード時間が１０７ｍｓであり、テレビ１００側からのERX_LATENCY_REQが１０７より大きい場合（例１）、ＡＶレシーバー１は、ERX_LATENCY_REQの値－１０７の値だけ、遅延（latency）を調整する。ＡＶレシーバー１は、ERX_LATENCYとして、ERX_LATECY_REQの値を、テレビ１００側に返す。 When the decoding time of a certain audio signal format by the DSP 8 is 107 ms and the ERX_LATENCY_REQ from the television 100 is greater than 107 (example 1), the AV receiver 1 adjusts the latency by the value of ERX_LATENCY_REQ - 107. do. The AV receiver 1 returns the value of ERX_LATECY_REQ as ERX_LATENCY to the television 100 side.

例えば、ERX_LATENCY_REQ＝１４０のとき、遅延（delay）の値として、１４０－１０７＝３３ｍｓだけ、ＡＶレシーバー１側で、遅延（latency）を調整する。ＡＶレシーバー１は、テレビ１００に対して、ERX_LATENCY＝１４０で通知すれば、ＡＶレシーバー１としては、テレビ１００から音声を受けて、スピーカー２００に出力するまでに、１４０ｍｓかかるということをテレビ１００に通知している。このため、テレビ１００は、遅延（delay）なしで、ＡＶレシーバー１へ音声出力をすればよい。 For example, when ERX_LATENCY_REQ=140, the delay (latency) is adjusted on the AV receiver 1 side by 140−107=33 ms as the delay value. When the AV receiver 1 notifies the television 100 with ERX_LATENCY=140, the AV receiver 1 notifies the television 100 that it takes 140 ms to receive the sound from the television 100 and output it to the speaker 200. are doing. Therefore, the television 100 may output audio to the AV receiver 1 without delay.

ある音声信号フォーマットのＤＳＰ８によるデコード時間が１０７ｍｓであり、ERX_LATENCY_REQが１０７以下の場合（例２）、ＡＶレシーバー１側での遅延（latency）調整は、行われない。ＡＶレシーバー１は、ERX_LATENCYとして、１０７の値を、テレビ１００側へ返す。ＡＶレシーバー１が音声出力するまでに１０７ｍｓかかるため、テレビ１００は、映像出力の遅延（delay）を１０７ｍｓに調整し、音声出力の遅延（delay）なしで出力する。 When the decoding time of a certain audio signal format by the DSP 8 is 107 ms and ERX_LATENCY_REQ is 107 or less (example 2), no latency adjustment is performed on the AV receiver 1 side. The AV receiver 1 returns a value of 107 as ERX_LATENCY to the television 100 side. Since it takes 107 ms for the AV receiver 1 to output audio, the television 100 adjusts the video output delay to 107 ms and outputs the audio output without any delay.

例えば、ERX_LATENCY_REQ＝５０の場合、ＡＶレシーバー１は、ERX_LATENCY＝１０７でテレビ１００に通知すれば、ＡＶレシーバー１としては、テレビ１００から音声出力を受けて、スピーカー２００に出力するまでに、１０７ｍｓかかるということをテレビ１００に通知している。このため、テレビ１００は、映像の遅延（delay）を１０７ｍｓに調整する。 For example, when ERX_LATENCY_REQ = 50, if the AV receiver 1 notifies the TV 100 with ERX_LATENCY = 107, it takes 107 ms for the AV receiver 1 to receive the audio output from the TV 100 and output it to the speaker 200. This is notified to the television 100. Therefore, the television 100 adjusts the video delay to 107 ms.

ここで、ＡＶレシーバー１のＤＳＰ８のデコード時間は、音声（Audio）フォーマットによって一定でないことを考慮する必要がある。本実施形態では、予め、音声フォーマット毎に、ＤＳＰ８のデコードにかかる時間を計測したテーブルをＡＶレシーバー１の記憶部３に記憶しておく。すなわち、記憶部３は、音声信号のフォーマットと、音声信号のフォーマットに対するＤＳＰ８によるデコード処理時間と、を対応付けて記憶している。 Here, it is necessary to consider that the decoding time of the DSP 8 of the AV receiver 1 is not constant depending on the audio format. In this embodiment, a table that measures the time required for decoding by the DSP 8 is stored in advance in the storage unit 3 of the AV receiver 1 for each audio format. That is, the storage unit 3 associates and stores the audio signal format and the decoding processing time of the DSP 8 with respect to the audio signal format.

制御部２は、テレビ１００（シンク機器）からの映像出力遅延時間（ERX_LATENCY_REQ）を受信する。そして、制御部２は、受信した映像出力遅延時間（ERX_LATENCY）と、記憶部３に記憶されている、テレビ１００（シンク機器）から受信する音声信号のフォーマットに対応するデコード処理時間と、に基づいて、ＡＶレシーバー１の音声出力遅延時間（ERX_LATENCY）を、テレビ１００（シンク機器）に通知する。ＡＶレシーバー１からテレビ１００に通知される、ＡＶレシーバー１の出力遅延時間（ERX_LATENCY）は、上記例１、例２のとおりであるが、これらの説明を含めて、本実施形態でｅＡＲＣ機能が実行される場合の処理について説明する。 The control unit 2 receives the video output delay time (ERX_LATENCY_REQ) from the television 100 (sink device). Based on the received video output delay time (ERX_LATENCY) and the decoding processing time corresponding to the format of the audio signal received from the television 100 (sink device) stored in the storage unit 3, the control unit 2 Then, the audio output delay time (ERX_LATENCY) of the AV receiver 1 is notified to the television 100 (sink device). The output delay time (ERX_LATENCY) of the AV receiver 1, which is notified from the AV receiver 1 to the television 100, is as described in Examples 1 and 2 above. A description will be given of the processing when the

制御部２は、テレビ１００側から出力される音声信号のフォーマットが、どのフォーマットか判断できたときに、記憶部３に記憶されているテーブルに基づいて、ＤＳＰ８によるデコード処理時間を導き出す。例えば、制御部２は、テレビ１００の映像出力遅延時間（ERX_LATENCY_REQ）＝１４０ｍｓを受信し、導き出したＤＳＰ８によるデコード処理時間が１０７ｍｓであったとする。この場合、映像出力遅延時間（ERX_LATENCY_REQ）＝１４０ｍｓ＞デコード処理時間＝１０７ｍｓであるため、制御部２は、ＡＶレシーバー１による音声出力遅延時間（ERX_LATENCY）を、受信した映像出力遅延時間（ERX_LATENCY_REQ）と同じ値、すなわち、１４０ｍｓとして、テレビ１００に通知する。 The control unit 2 derives the decoding processing time by the DSP 8 based on the table stored in the storage unit 3 when the format of the audio signal output from the television 100 side can be determined. For example, it is assumed that the control unit 2 receives the video output delay time (ERX_LATENCY_REQ) of the television 100=140 ms, and derives the decode processing time by the DSP 8 to be 107 ms. In this case, video output delay time (ERX_LATENCY_REQ)=140 ms>decoding processing time=107 ms, so control unit 2 regards audio output delay time (ERX_LATENCY) by AV receiver 1 as received video output delay time (ERX_LATENCY_REQ). The same value, namely 140 ms, is notified to the television 100 .

言い換えれば、制御部２は、受信した映像出力遅延時間が、記憶部３に記憶されている、テレビ１００から受信する音声信号のフォーマットに対応するデコード処理時間よりも、長い場合、ＡＶレシーバー１の音声出力遅延時間を、受信した映像出力遅延時間と同じ値として、テレビ１００に通知する In other words, if the received video output delay time is longer than the decoding processing time corresponding to the format of the audio signal received from the television 100 stored in the storage unit 3, the control unit 2 The audio output delay time is notified to the television 100 as the same value as the received video output delay time.

これにより、テレビ１００は、自装置の映像出力遅延時間（ERE_LATENCY_REQ）と、ＡＶレシーバー１側の音声出力遅延時間（ERX_LATENCY）と、が一致していることから、音声出力を遅延しない。制御部２は、１４０－１０７＝３３ｍｓ（受信した映像出力遅延時間と、記憶部３に記憶されている、テレビ１００から受信する音声信号のフォーマットに対応するデコード処理時間との差）、スピーカー２００への音声出力が遅延すように制御する。これにより、映像出力と音声出力とを同期させることができる。 As a result, since the video output delay time (ERE_LATENCY_REQ) of the television 100 matches the audio output delay time (ERX_LATENCY) of the AV receiver 1, the television 100 does not delay the audio output. The control unit 2 determines 140-107=33 ms (difference between the received video output delay time and the decoding processing time corresponding to the format of the audio signal received from the television 100, stored in the storage unit 3), the speaker 200 delays the audio output to Thereby, the video output and the audio output can be synchronized.

また、例えば、制御部２は、テレビ１００の映像出力遅延時間（ERX_LATENCY_REQ）＝５０ｍｓを受信し、導き出したＤＳＰ８によるデコード処理時間が１０７ｍｓであったとする。この場合、映像出力遅延時間（ERX_LATENCY_REQ）＝５０ｍｓ≦デコード処理時間＝１０７ｍｓであるため、制御部２は、ＡＶレシーバー１による音声出力遅延時間（ERX_LATENCY）を、デコード処理時間と同じ値、すなわち、１０７ｍｓとして、テレビ１００に通知する。言い換えれば、制御部２は、受信した映像出力遅延時間が、記憶部３に記憶されている、テレビ１００から受信する音声信号のフォーマットに対応するデコード処理時間以下である場合、ＡＶレシーバー１の音声出力遅延時間を、デコード処理時間と同じ値として、テレビ１００に通知する。 Also, for example, it is assumed that the control unit 2 receives the video output delay time (ERX_LATENCY_REQ) of the television 100=50 ms and derives the decode processing time by the DSP 8 to be 107 ms. In this case, since video output delay time (ERX_LATENCY_REQ)=50 ms≦decoding processing time=107 ms, control unit 2 sets audio output delay time (ERX_LATENCY) by AV receiver 1 to the same value as decoding processing time, that is, 107 ms. , the television 100 is notified. In other words, if the received video output delay time is equal to or less than the decoding processing time corresponding to the format of the audio signal received from the television 100, which is stored in the storage unit 3, the control unit 2 outputs the audio signal of the AV receiver 1. The television 100 is notified of the output delay time as the same value as the decoding processing time.

これにより、テレビ１００は、自装置の映像出力遅延時間を１０７ｍｓに調整する。制御部２は、スピーカー２００への音声出力を遅延させないように制御する。これにより、映像出力と音声出力とを同期させることができる。 Thereby, the television 100 adjusts the video output delay time of its own device to 107 ms. The control unit 2 controls so as not to delay the audio output to the speaker 200 . Thereby, the video output and the audio output can be synchronized.

以下、ｅＡＲＣ機能を実行する場合のＡＶレシーバー１の処理動作を、図２に示すフローチャートに基づいて、説明する。制御部２は、ｅＡＲＣ対応のテレビ１００との接続を完了させる（Ｓ１）。次に、制御部２は、ｅＡＲＣ対応のテレビ１００からの音声信号を受信する（Ｓ２）。次に、制御部２は、ｅＡＲＣ対応のテレビ１００から、「ERX_LATENCY_REQ」コマンドを受信する（Ｓ３）。次に、制御部２は、受信している音声フォーマットから、記憶部３内のテーブルから、ＤＳＰ８によるデコード処理時間を導き出し、導き出したデコード処理時間を、AMP_DSP_TIMEに設定する（Ｓ４）。 The processing operation of the AV receiver 1 when executing the eARC function will be described below based on the flowchart shown in FIG. The control unit 2 completes connection with the eARC-compatible television 100 (S1). Next, the control unit 2 receives an audio signal from the eARC-compatible television 100 (S2). Next, the control unit 2 receives an "ERX_LATENCY_REQ" command from the eARC-compatible television 100 (S3). Next, the control unit 2 derives the decoding processing time by the DSP 8 from the table in the storage unit 3 from the received audio format, and sets the derived decoding processing time to AMP_DSP_TIME (S4).

次に、制御部２は、ERX_LATENCY_REQ > AMP_DSP_TIMEであるか否かを判断する（Ｓ５）。制御部２は、ERX_LATENCY_REQ > AMP_DSP_TIMEであると判断した場合（Ｓ５：Ｙｅｓ）、AMP_LATENCY（ＡＶレシーバー１での音声出力遅延時間） = ERX_LATENCY_REQ - AMP_DSP_TIMEに設定する（Ｓ６）。次に、制御部２は、ERX_LATENCY = ERX_LATENCY_REQに設定する（Ｓ７）。 Next, the control unit 2 determines whether ERX_LATENCY_REQ > AMP_DSP_TIME (S5). When determining that ERX_LATENCY_REQ > AMP_DSP_TIME (S5: Yes), the control unit 2 sets AMP_LATENCY (audio output delay time in the AV receiver 1) = ERX_LATENCY_REQ - AMP_DSP_TIME (S6). Next, the control unit 2 sets ERX_LATENCY=ERX_LATENCY_REQ (S7).

一方で、制御部２は、ERX_LATENCY_REQ > AMP_DSP_TIMEでない、すなわち、ERX_LATENCY_REQ <= AMP_DSP_TIMEであると判断した場合（Ｓ５：Ｎｏ）、AMP_LATENCY = 0に設定する（Ｓ８）。次に、制御部２は、ERX_LATENCY = AMP_DSP_TIMEに設定する（Ｓ９）。 On the other hand, if the control unit 2 determines that ERX_LATENCY_REQ > AMP_DSP_TIME is not true, that is, ERX_LATENCY_REQ <= AMP_DSP_TIME (S5: No), it sets AMP_LATENCY = 0 (S8). Next, the control unit 2 sets ERX_LATENCY=AMP_DSP_TIME (S9).

制御部２は、Ｓ７又はＳ９の処理の後、ERX_LATENCY値をｅＡＲＣ対応のテレビ１００に通知する（Ｓ１０）。次に、制御部２は、AMP_LATECYの時間、スピーカー２００への出力のLATENCY（遅延）を調整する（Ｓ１１）。 After the process of S7 or S9, the control unit 2 notifies the eARC-compatible television 100 of the ERX_LATENCY value (S10). Next, the control unit 2 adjusts the LATENCY (delay) of the output to the speaker 200 for the time of AMP_LATECY (S11).

以上説明したように、本実施形態では、制御部２は、受信したテレビ１００（シンク機器）の映像出力遅延時間と、記憶部３に記憶されている、テレビ１００（シンク機器）から受信する音声信号のフォーマットに対応するデコード処理時間と、に基づいて、ＡＶレシーバー１（自装置）の音声出力遅延時間を、テレビ１００（シンク機器）に通知する。このため、音声信号のフォーマットによって異なる、ＤＳＰ８（信号処理部）によるデコード時間が考慮され、ＡＶレシーバー１（音声処理装置）の音声出力遅延時間が決定されるため、映像出力と音声出力との同期をとることができる。 As described above, in the present embodiment, the control unit 2 controls the received video output delay time of the television 100 (sink device) and the audio received from the television 100 (sink device) stored in the storage unit 3. The audio output delay time of the AV receiver 1 (own device) is notified to the television 100 (sink device) based on the decode processing time corresponding to the signal format. For this reason, the decoding time by the DSP 8 (signal processing unit), which varies depending on the format of the audio signal, is taken into consideration, and the audio output delay time of the AV receiver 1 (audio processing device) is determined. can take

以上、本発明の実施形態について説明したが、本発明を適用可能な形態は、上述の実施形態には限られるものではなく、以下に例示するように、本発明の趣旨を逸脱しない範囲で適宜変更を加えることが可能である。 Although the embodiments of the present invention have been described above, the forms to which the present invention can be applied are not limited to the above-described embodiments. Changes are possible.

上述の実施形態においては、ｅＡＲＣ機能を有する音声処理装置として、ＡＶレシーバーを例示した。これに限らず、ｅＡＲＣ機能を有していれば、音声処理装置は、例えば、増幅器とスピーカーとが一体となったバータイプのスピーカーであってもよい。 In the above-described embodiments, the AV receiver was exemplified as the audio processing device having the eARC function. Without being limited to this, the audio processing device may be, for example, a bar-type speaker in which an amplifier and a speaker are integrated as long as it has an eARC function.

本発明は、音声信号に増幅等の音声信号処理を行う音声処理装置に好適に採用され得る。 INDUSTRIAL APPLICABILITY The present invention can be suitably applied to an audio processing device that performs audio signal processing such as amplification on an audio signal.

１ＡＶレシーバー（音声処理装置）
２制御部
３記憶部
８ＤＳＰ（信号処理部）
１００テレビ（シンク機器）
２００スピーカー 1 AV receiver (sound processing device)
2 control unit 3 storage unit 8 DSP (signal processing unit)
100 TV (sink device)
200 speakers

Claims

An audio processing device having an eARC function that outputs an audio signal input from a sink device to a speaker,
a signal processing unit that performs decoding processing on an audio signal;
a storage unit that associates and stores an audio signal format and a decoding processing time of the signal processing unit with respect to the audio signal format;
a control unit;
The control unit
receiving a video output delay time from the sink device;
Based on the received video output delay time and the decode processing time corresponding to the format of the audio signal received from the sink device stored in the storage unit, the audio output delay time of the device is set to the sink device. A voice processing device characterized by notifying a device.

When the received video output delay time is longer than the decode processing time stored in the storage unit corresponding to the format of the audio signal received from the sink device, the control unit delays the audio output of the device itself. 2. The audio processing apparatus according to claim 1, wherein the time is notified to the sink device as the same value as the received video output delay time.

The control unit controls the difference between the received video output delay time and the decoding processing time corresponding to the format of the audio signal received from the sink device stored in the storage unit so that the audio output is delayed. 3. The speech processing device according to claim 2, wherein:

When the received video output delay time is equal to or less than the decode processing time stored in the storage unit and corresponding to the format of the audio signal received from the sink device, the control unit determines the audio output delay time of the local device. is notified to the sink device as the same value as the decoding processing time.

5. The audio processing apparatus according to claim 4, wherein the control unit controls so as not to delay the audio output to the speaker.