JP2008131589A - Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program - Google Patents
Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program Download PDFInfo
- Publication number
- JP2008131589A JP2008131589A JP2006317500A JP2006317500A JP2008131589A JP 2008131589 A JP2008131589 A JP 2008131589A JP 2006317500 A JP2006317500 A JP 2006317500A JP 2006317500 A JP2006317500 A JP 2006317500A JP 2008131589 A JP2008131589 A JP 2008131589A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- unit
- video
- delay
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Stereophonic System (AREA)
Abstract
Description
本発明は、コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム及び当該コンテンツ再生プログラムが記録された記録媒体に関する。 The present invention relates to a content reproduction apparatus, a content reproduction method, a content reproduction program, and a recording medium on which the content reproduction program is recorded.
近年におけるＤＶＤ（Digital Versatile Disk）等の記録媒体を利用したコンテンツ収納技術及びコンテンツ再生技術の進展に伴い、音声と映像とを含む映画等のコンテンツを再生するコンテンツ再生装置が普及してきている。こうしたコンテンツ再生装置を利用することにより、利用者は、コンテンツの再生結果である音声と映像とを楽しむことができる。 With the progress of content storage technology and content playback technology using recording media such as DVD (Digital Versatile Disk) in recent years, content playback devices that play back content such as movies including audio and video have become widespread. By using such a content playback device, the user can enjoy the audio and video that are the playback results of the content.
かかるコンテンツ再生装置では、一般に、音声の再生に際して行われる音響調整にＩＩＲ（Infinite Impulse Response）フィルタ又はアナログトーンコントロール回路を用いている（特許文献１等参照：以下、従来例という）。このため、記録媒体等からの音声コンテンツデータ及び映像コンテンツデータをそのままデコードして再生しても、再生音声のスピーカからの出力タイミングと再生映像の表示デバイスにおける表示タイミングとの間において時間ズレは殆ど発生しない。この結果、利用者は、感覚的に大きな違和感を生じさせずに、再生音声や再生画像を視聴することができていた。
In such a content reproduction apparatus, generally, an IIR (Infinite Impulse Response) filter or an analog tone control circuit is used for acoustic adjustment performed at the time of audio reproduction (see
上述した従来例の再生技術では、音響調整にＩＩＲフィルタ又はアナログトーンコントロール回路を用いているので、オリジナルの音声コンテンツを忠実に再生した場合から位相周波数特性に乱れを生じる。また、音声を出力するスピーカには、コイルやキャパシタを用いたマルチウエイスピーカを用い、時にはクロスオーバ周波数が異なるものが使用されている。 In the conventional reproduction technique described above, an IIR filter or an analog tone control circuit is used for sound adjustment. Therefore, the phase frequency characteristics are disturbed from the case where the original audio content is reproduced faithfully. As a speaker for outputting sound, a multiway speaker using a coil or a capacitor is used, and sometimes speakers having different crossover frequencies are used.
さらに、マルチチャンネルサラウンド方式を採用する場合には、複数のスピーカを使用することになるが、これらの複数のスピーカを聴取位置から等距離に配置することが、コンテンツ再生装置を設置する室の環境面から困難である場合があった。特に車両にコンテンツ再生装置を搭載する場合には、複数のスピーカを車室内の聴取位置から等距離に配置することができない場合がしばしば発生する。このため、各スピーカから聴取位置までの音声伝達特性である振幅特性や位相特性を同一とすることは、一般には困難である。 Furthermore, when a multi-channel surround system is adopted, a plurality of speakers are used. However, it is necessary to arrange these speakers at an equal distance from the listening position so that the environment of the room in which the content reproduction apparatus is installed In some cases, it was difficult. In particular, when a content reproduction apparatus is mounted on a vehicle, there are often cases where a plurality of speakers cannot be arranged at an equal distance from the listening position in the passenger compartment. For this reason, it is generally difficult to make the amplitude characteristics and phase characteristics, which are sound transmission characteristics from each speaker to the listening position, the same.
ＩＩＲフィルタ又はアナログトーンコントロール回路を採用する音響調整装置では、振幅特性を補正することは可能であるが、位相特性までを補正することはできない。さらに、複数のスピーカを採用する場合には、各スピーカが固有の位相伝達特性を有することが一般的である。 An acoustic adjustment device employing an IIR filter or an analog tone control circuit can correct the amplitude characteristic, but cannot correct the phase characteristic. Further, when a plurality of speakers are employed, each speaker generally has a unique phase transfer characteristic.
このため、マルチチャンネルサラウンド方式を採用した場合においても、視聴位置における高品質な音声の再生と、当該音声との関係で視聴位置において違和感を発生させることがない映像の再生が可能な技術が待望されている。かかる要請に応えることが、本発明が解決するべき課題の一つとして挙げられる。 For this reason, even when the multi-channel surround system is adopted, there is a long-awaited technology capable of reproducing high-quality audio at the viewing position and reproducing video that does not cause a sense of incongruity at the viewing position in relation to the audio. Has been. Meeting this requirement is one of the problems to be solved by the present invention.
本発明は、上記の事情を鑑みてなされたものであり、高品位な音声及び映像を再生することができるコンテンツ再生装置及びコンテンツ再生方法を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object thereof is to provide a content reproduction apparatus and a content reproduction method capable of reproducing high-quality audio and video.
請求項１に記載の発明は、音声コンテンツ及び映像コンテンツを含むコンテンツを再生するコンテンツ再生装置であって、前記音声コンテンツに由来する音声信号の周波数分離調整及び周波数特性調整の少なくとも一方を、直線位相型の有限インパルス応答フィルタを利用して行う音響調整手段と；前記音声信号を音声遅延時間だけ遅延させる音声遅延手段と；前記音響調整手段により調整され、かつ、前記音声遅延手段により遅延された信号に基づいて音声を再生し、所定の音場空間へ向けて出力する音声出力手段と；前記音場空間の視聴位置における前記音声出力手段から出力された音声との同期用に定められた映像遅延時間だけ、前記映像コンテンツに由来する映像信号を遅延させる映像遅延手段と；前記映像遅延手段により遅延された映像信号に基づいて、映像を再生表示する表示手段と；を備えることを特徴とするコンテンツ再生装置である。
The invention according to
請求項８に記載の発明は、音声コンテンツ及び映像コンテンツを含むコンテンツを再生するコンテンツ再生方法であって、前記音声コンテンツに由来する音声信号に関する音響特性を、直線位相型の有限インパルス応答フィルタを利用して調整する音響特性調整工程と；前記音声信号を音声遅延時間だけ遅延させる音声遅延工程と；前記音響特性調整工程において音響特性が調整され、かつ、前記音声遅延工程において遅延された音声信号に基づいて再生された音声を、所定の音場空間へ向けて出力させる音声出力工程と；前記音場空間における視聴位置において前記音声出力工程で出力された音声との同期用に定められた映像遅延時間だけ、前記映像コンテンツに由来する映像信号を遅延させる映像遅延工程と；前記映像遅延工程において遅延された映像信号に基づいて再生された映像を表示させる表示工程と；を備えることを特徴とするコンテンツ再生方法である。 The invention according to claim 8 is a content reproduction method for reproducing content including audio content and video content, and uses a linear phase type finite impulse response filter for the acoustic characteristics related to the audio signal derived from the audio content. An audio characteristic adjustment step for adjusting the audio signal; an audio delay step for delaying the audio signal by an audio delay time; and an audio signal whose audio characteristic is adjusted in the audio characteristic adjustment step and delayed in the audio delay step. A sound output step for outputting sound reproduced based on a predetermined sound field space; and a video delay determined for synchronization with the sound output in the sound output step at a viewing position in the sound field space. A video delay step of delaying a video signal derived from the video content by time; A content playback method characterized by comprising a; and a display step of displaying the image reproduced on the basis of the cast video signal.
請求項９に記載の発明は、請求項７に記載のコンテンツ再生方法を演算手段に実行させる、ことを特徴とするコンテンツ再生プログラムである。 A ninth aspect of the present invention is a content reproduction program characterized by causing a calculation means to execute the content reproduction method according to the seventh aspect.
請求項１０に記載の発明は、請求項８に記載のコンテンツ再生プログラムが、演算手段により読み取り可能に記録された記録媒体である。 A tenth aspect of the present invention is a recording medium on which the content reproduction program according to the eighth aspect of the present invention is recorded so as to be readable by the calculation means.
以下、本発明の実施形態を、図１〜図１８を参照して説明する。なお、以下の説明及び図面においては、同一又は同等の要素には同一の符号を付し、重複する説明を省略する。 Hereinafter, embodiments of the present invention will be described with reference to FIGS. In the following description and drawings, the same or equivalent elements are denoted by the same reference numerals, and redundant description is omitted.
［第１実施形態］
まず、本発明の第１実施形態を、図１〜図１３を参照して説明する。
［構成］
図１には、第１実施形態に係るコンテンツ再生装置１００Ａの概略的な構成がブロック図にて示されている。なお、以下の説明においては、コンテンツ再生装置１００Ａは、車両ＣＲ（図９参照）に搭載される装置であるものとする。
[First Embodiment]
First, a first embodiment of the present invention will be described with reference to FIGS.
[Constitution]
FIG. 1 is a block diagram showing a schematic configuration of a
図１に示されるように、コンテンツ再生装置１００Ａは、ＤＶＤドライブユニット１１０と、ドライブ制御ユニット１２０Ａとを備えている。また、コンテンツ再生装置１００Ａは、テスト音声検出手段の一部としての集音ユニット１３０と、オーディオプリアンプユニット１４０Ａと、オーディオメインアンプユニット１５０と、音声出力手段としてのスピーカユニット１６０1〜１６０7とを備えている。
As shown in FIG. 1, the
また、コンテンツ再生装置１００Ａは、表示制御ユニット１７０Ａと、表示手段としての表示ユニット１８０Ａとを備えている。さらに、コンテンツ再生装置１００Ａは、操作入力手段としての操作入力ユニット１９０を備えている。
The
なお、ドライブ制御ユニット１２０Ａ、オーディオプリアンプユニット１４０Ａ及び表示制御ユニット１７０Ａは、例えばＩＥＥＥ１３９４で規定されるバス３００を介して、相互に接続されている。
The
ＤＶＤドライブユニット１１０は、ドライブ制御指令ＤＣＴとしてデータ読出指令をドライブ制御ユニット１２０Ａから受けた場合には、装填されたＤＶＤに記録された音声コンテンツ及び映像コンテンツを含むコンテンツのデータ等を読み取って、読取データ信号ＲＤＤとしてドライブ制御ユニット１２０Ａへ送る。また、ＤＶＤドライブユニット１１０は、ドライブ制御指令ＤＣＴとして指定データを含むデータ書込指令をドライブ制御ユニット１２０Ａから受けた場合には、装填されたＤＶＤに指定データを記録する。
When the
なお、ＤＶＤには、音声コンテンツが、マルチチャンネルサラウンド方式の一つである６．１ｃｈサラウンド方式で記録されている。かかる６．１ｃｈサラウンド方式では、音声チャンネルとして、フロントセンタチャンネル（以下、「ＦＣチャンネル」とも記す）、フロントレフトチャンネル（以下、「ＦＬチャンネル」とも記す）、フロントライトチャンネル（以下、「ＦＲチャンネル」とも記す）、リアセンタチャンネル（以下、「ＲＣチャンネル」とも記す）、リアレフトチャンネル（以下、「ＲＬチャンネル」とも記す）、リアライトチャンネル（以下、「ＲＲチャンネル」とも記す）、サブウーハチャンネル（以下、「ＳＷチャンネル」とも記す）が用意されている。 Note that audio content is recorded on the DVD in the 6.1ch surround system, which is one of the multi-channel surround systems. In the 6.1ch surround system, as a sound channel, a front center channel (hereinafter also referred to as “FC channel”), a front left channel (hereinafter also referred to as “FL channel”), a front right channel (hereinafter referred to as “FR channel”). ), Rear center channel (hereinafter also referred to as “RC channel”), rear left channel (hereinafter also referred to as “RL channel”), rear right channel (hereinafter also referred to as “RR channel”), subwoofer channel (hereinafter referred to as “RC channel”). , Also referred to as “SW channel”).
また、ＤＶＤには、映像コンテンツがＭＰＥＧ形式でコード化されて記録されているものとする。 In addition, it is assumed that video content is encoded and recorded in the MPEG format on the DVD.
ドライブ制御ユニット１２０Ａは、図２に示されるように、ドライブ制御部１２１Ａと、バスインターフェース部１２２とを備えている。また、ドライブ制御ユニット１２０Ａは、データ出力選択部１２３と、音声／映像分離部１２４Ａとを備えている。さらに、ドライブ制御ユニット１２０Ａは、テスト信号生成手段としての同期調整信号発生部１２５を備えている。
The
ドライブ制御部１２１Ａは、操作入力ユニット１９０から報告された利用者による指令入力ＩＰＤに従って、ＤＶＤドライブユニット１１０に対してドライブ制御指令ＤＣＴを発行することにより、ＤＶＤに記録されたデータの読取、及び、ＤＶＤへのデータ書込をＤＶＤドライブユニット１１０に行わせる。また、ドライブ制御部１２１Ａは、オーディオプリアンプユニット１４０Ａ及び表示制御ユニット１７０Ａとの間で通信を行い、動作協調を図る。
The
さらに、ドライブ制御部１２１Ａは、ドライブ制御ユニット１２０Ａの他の構成要素１２２〜１２５を制御する。かかる制御を行うことにより、ＤＶＤに記録されたコンテンツにおける音声コンテンツのデータのオーディオプリアンプユニット１４０Ａへの送信、及び、ＤＶＤに記録されたコンテンツにおける映像コンテンツのデータの表示制御ユニット１７０Ａへの送信を制御する。
Furthermore, the
バスインターフェース部１２２は、ドライブ制御部１２１Ａによる制御のもとで、ドライブ制御ユニット１２０Ａの内部回路とバス３００とのインターフェーシングを行う。このバスインターフェース部１２２を利用することにより、ドライブ制御ユニット１２０Ａと、オーディオプリアンプユニット１４０Ａ及び表示制御ユニット１７０Ａとの間で、バス３００を介した通信が可能となっている。
The
データ出力選択部１２３は、ドライブ制御部１２１Ａからの出力選択指令ＤＯＳに従って、ＤＶＤドライブユニット１１０からの読取データ信号ＲＤＤを、音声／映像分離部１２４Ａ又はドライブ制御部１２１Ａのいずれかへ向けて出力する。すなわち、読取データ信号ＲＤＤがコンテンツのデータ信号であることから、出力選択指令ＤＯＳにより音声／映像分離部１２４Ａへ向けて出力すべきことがドライブ制御部１２１Ａから指令された場合には、データ出力選択部１２３は、読取データ信号ＲＤＤをコンテンツデータ信号ＣＴＤとして、音声／映像分離部１２４Ａへ送る。一方、読取データ信号ＲＤＤがコンテンツのデータ信号ではないことから、出力選択指令ＤＯＳによりドライブ制御部１２１Ａへ向けて出力すべきことがドライブ制御部１２１Ａから指令された場合には、データ出力選択部１２３は、読取データ信号ＲＤＤを非コンテンツデータ信号ＥＣＤとして、ドライブ制御部１２１Ａへ送る。
The data
音声／映像分離部１２４Ａは、ドライブ制御部１２１Ａからのデータ選択指令ＳＬＤに従って、データ出力選択部１２３からのコンテンツデータ信号ＣＴＤ、及び、後述する同期調整信号発生部１２５からの同期調整用データ信号ＳＪＤのいずれかを選択し、選択されたデータ信号に含まれる音声データ成分と映像データ成分とを分離する。こうして分離された音声データ成分が音声データ信号ＡＤＤとしてバスインターフェース部１２２へ向けて出力されるとともに、分離された映像データ成分が映像データ信号ＩＤＤとしてバスインターフェース部１２２へ向けて出力される。この結果、バス３００を介して、音声データ信号ＡＤＤがオーディオプリアンプユニット１４０Ａへ送られるとともに、映像データ信号ＩＤＤが表示制御ユニット１７０Ａへ送られる。
The audio /
同期調整信号発生部１２５は、ドライブ制御部１２１Ａからの信号発生指令ＳＪＧに従って、予め定められた同期調整用データ信号ＳＪＤを発生して、音声／映像分離部１２４Ａへ向けて送る。ここで、同期調整用データ信号ＳＪＤは、テスト音声データ信号とテスト映像データ信号から構成されている。なお、同期調整信号発生部１２５は、テスト音声データ信号として、後述するＦＣチャンネルのデータ信号及びＲＣチャンネルのデータ信号のいずれかを発生するようになっている。かかるＦＣチャンネル及びＲＣチャンネルのいずれのチャンネルのデータ信号を発生するかは、操作入力ユニット１９０への利用者による操作入力に従って、ドライブ制御部１２１Ａが、信号発生指令ＳＪＧにおけるパラメータ値によって指定するようになっている。
The synchronization
ここで、視聴想定位置（後述する集音ユニット１３０のマイクロフォンの設置位置）における音声と映像との同期ズレの発生原因の要素になると考えられる、ドライブ制御ユニット１２０Ａにおける音声関連信号の主な遅延と、映像関連信号の主な遅延とについて考察すると、次の通りとなる。なお、音声／映像分離部１２４Ａが受けるコンテンツデータ信号ＣＴＤ及び同期調整用データ信号ＳＪＤの段階では、音声と映像とが完全に同期しているものとし、この段階における遅延を０であるとして、以下の説明を行う。
Here, the main delay of the audio-related signal in the
まず、音声関連信号の遅延について考察する。ドライブ制御ユニット１２０Ａでは、音声関連信号の遅延は、最初に、音声／映像分離部１２４Ａにおけるコンテンツデータ信号ＣＴＤから音声データ信号ＡＤＤの分離処理の際に発生する（遅延時間ＤＡ１1）。また、バスインターフェース部１２２における音声データ信号ＡＤＤのオーディオプリアンプユニット１４０Ａへの送信処理の際においても遅延が発生する（遅延時間ＤＡ１2）。
First, let us consider the delay of audio-related signals. In the
この結果、ドライブ制御ユニット１２０Ａにおける音声関連の遅延時間ＤＡ１は、遅延時間ＤＡ１1と遅延時間ＤＡ１2との和と評価できる。ここで、遅延時間ＤＡ１1と遅延時間ＤＡ１2とは、ドライブ制御ユニット１２０Ａの設計段階において推定可能であることから、ドライブ制御ユニット１２０Ａにおける音声関連信号の遅延時間ＤＡ１は、事前に推定可能なものとなっている。
As a result, the audio-related delay time DA1 in the
次に、映像関連信号の遅延について考察する。ドライブ制御ユニット１２０Ａにおける映像関連信号の遅延は、上記の音声関連信号の遅延と同様に、音声／映像分離部１２４Ａにおけるコンテンツデータ信号ＣＴＤから映像データ信号ＩＤＤの分離処理の際（遅延時間ＤＩ１1）、及び、バスインターフェース部１２２における映像データ信号ＩＤＤの表示制御ユニット１７０Ａへの送信処理の際に遅延が発生する（遅延時間ＤＩ１2）。この結果、ドライブ制御ユニット１２０Ａにおける映像関連信号の遅延時間ＤＩ１は、遅延時間ＤＩ１1と遅延時間ＤI１2との和となると評価される。ここで、遅延時間ＤＩ１1と遅延時間ＤＩ１2とは、ドライブ制御ユニット１２０Ａの設計段階において推定可能であることから、ドライブ制御ユニット１２０Ａにおける映像関連信号の遅延時間ＤＩ１は、事前に推定可能なものとなっている。
Next, the delay of video related signals will be considered. The delay of the video-related signal in the
図１に戻り、集音ユニット１３０は、（ｉ）周囲の音を収集して電気的なアナログ音声信号とするマイクロフォン、（ii）マイクロフォンから出力されたアナログ音声信号を増幅する増幅器、（iii）増幅されたアナログ音声信号をデジタル音声信号に変換するＡＤ変換器（Analog to Digital Converter）とを備えて構成されている。ここで、マイクロフォンは、音場空間ＡＳＰ（後述する図９参照）における所定位置（例えば、運転席に視聴者が着席した場合における視聴者の耳の位置と想定される位置の近傍）に配置されている。集音ユニット１３０による集音結果は、集音結果情報ＡＡＤとしてオーディオプリアンプユニット１４０Ａに報告される。
Returning to FIG. 1, the
オーディオプリアンプユニット１４０Ａは、図３に示されるように、遅延制御手段の一部及びテスト音声検出手段の一部としてのオーディオ制御部１４１Ａと、バスインターフェース部１４２とを備えている。また、オーディオプリアンプユニット１４０Ａは、フロー制御バッファ１４３と、チャンネル処理部１４４とを備えている。さらに、オーディオプリアンプユニット１４０Ａは、アナログ変換部１４５と、音量調整部１４６とを備えている。
As shown in FIG. 3, the
オーディオ制御部１４１Ａは、ドライブ制御ユニット１２０Ａ及び表示制御ユニット１７０Ａとの間で通信を行い、動作協調を図る。また、オーディオ制御部１４１Ａは、オーディオプリアンプユニット１４０Ａの他の構成要素１４２〜１４４，１４６を制御する。かかる制御には、フロー制御バッファ１４３を利用したデータフロー制御、チャンネル処理部１４４を利用したチャンネル信号調整制御及び音声遅延制御、並びに音量調整部１４６を利用した音量調整制御が含まれている。
The
データフロー制御に際して、オーディオ制御部１４１Ａは、データ読出クロックＤＲＣを生成する。そして、オーディオ制御部１４１Ａは、データ読出クロックＤＲＣをフロー制御バッファ１４３へ送る。
In the data flow control, the
チャンネル信号調整制御には、周波数分離制御と音響特性調整制御が含まれる。このうちの周波数分離制御に際して、オーディオ制御部１４１Ａは、予め定められた周波数分離情報に従って、チャンネル分離制御指令ＣＳＣ及びチャンネル処理制御指令ＣＰＣを生成する。ここで、チャンネル処理制御指令ＣＰＣの生成に際しては、オーディオ制御部１４１Ａは、後述のようにして行われる音響特性調整制御も更に考慮するようになっている。
The channel signal adjustment control includes frequency separation control and acoustic characteristic adjustment control. In the frequency separation control, the
音響特性調整制御に際して、オーディオ制御部１４１Ａは、集音ユニット１３０による集音結果ＡＡＤに基づく雑音レベルの推定結果を参照する。かかる雑音レベルの推定に際して、オーディオ制御部１４１Ａは、スピーカユニット１６０1〜１６０7から出力される音には通常は含まれないか、含まれたとしてもパワーの小さな周波数帯域（例えば、１０Ｈｚ程度の可聴域外）の音の集音結果におけるパワーに基づいて、集音位置の騒音レベルを推定するようになっている。そして、集音位置における騒音レベルと、音場空間ＡＳＰ内の全般における騒音レベルとは相関があることから、集音位置の騒音レベルを推定することにより、音場空間ＡＳＰ内の全般における騒音レベルを推定する。なお、集音位置における騒音レベルと、音場空間ＡＳＰ内の全般における騒音レベルとの相関は、音場空間ＡＳＰを車内空間として有する車種によって異なるが、事前に実験、シミュレーション等によって求められており、オーディオ制御部１４１Ａに登録されている。
In the acoustic characteristic adjustment control, the
音声遅延制御に際して、オーディオ制御部１４１Ａは、３種類の音声遅延制御を行う。第１の音声遅延制御では、オーディオ制御部１４１Ａは、コンテンツ再生装置１００Ａにおける音声再生に関連する各部における処理による推定遅延時間、及び、後述する映像再生に関連する各部における処理による推定遅延時間に基づいて、スピーカユニット１６０1〜１６０7の各スピーカからの音声出力タイミングを同期させるとともに、当該音声出力タイミングと表示ユニット１８０Ａにおける映像表示タイミングとを同期させるべく、遅延制御指令ＤＬＣを生成して、後述する信号遅延部２３０へ送る。なお、コンテンツ再生装置１００Ａにおける音声再生及び映像再生に関連する各部における処理による推定遅延時間は設計段階において既知のものであることから、当該推定遅延時間に基づいて定められる初期音声遅延時間は、予め定められ、オーディオ制御部１４１Ａ内に登録されている。
In the audio delay control, the
第２の音声遅延制御では、オーディオ制御部１４１Ａは、オーディオ制御部１４１Ａ内部のテスト音源を用い、各スピーカから順次パルス状のテスト音声を出力させる。そして、集音ユニット１３０によるテスト音声の集音結果ＡＡＤに基づいて、各スピーカからの出力音声の集音位置における同期を図るべく、遅延制御指令ＤＬＣを生成して、信号遅延部２３０へ送る。
In the second audio delay control, the
第３の音声遅延制御では、オーディオ制御部１４１Ａは、上述した同期調整信号発生部１２５が発生したテスト音声データ信号に基づく出力音声の集音ユニット１３０による集音結果ＡＡＤを検出する。この検出結果と、表示制御ユニット１７０Ａから報告された、同期調整信号発生部１２５が発生したテスト映像データ信号に基づく表示ユニット１８０Ａにおける表示タイミングの検出結果とに基づいて、オーディオ制御部１４１Ａは、リップシンクを図るべく、遅延制御指令ＤＬＣを生成して、信号遅延部２３０へ送る。なお、第３の音声遅延制御に際して信号遅延部２３０に対する遅延時間の設定のみではリップシンクを図れない場合には、オーディオ制御部１４１Ａは、リップシンクのために必要となる表示制御ユニット１７０Ａにおける付加遅延時間を算出して、表示制御ユニット１７０Ａへ送る。
In the third sound delay control, the
音量調整制御に際して、オーディオ制御部１４１Ａは、操作入力ユニット１９０に入力され、ドライブ制御部１２１Ａからバス３００を介して報告された音量調整指令に従って、音量調整制御指令ＶＬＣを生成する。生成された音量調整制御指令ＶＬＣは、オーディオ制御部１４１Ａから、音量調整部１４６へ送られる。
In the volume adjustment control, the
バスインターフェース部１４２は、オーディオ制御部１４１Ａによる制御のもとで、オーディオプリアンプユニット１４０Ａの内部回路とバス３００とのインターフェーシングを行う。このバスインターフェース部１４２を利用することにより、オーディオプリアンプユニット１４０Ａと、ドライブ制御ユニット１２０Ａ及び表示制御ユニット１７０Ａとの間で、バス３００を介した通信が可能となっている。
The
フロー制御バッファ１４３は、ＦＩＦＯ（First-In First-Out）として構成されており、ドライブ制御ユニット１２０Ａから送られた音声データ信号ＡＤＤを、バス３００及びバスインターフェース部１４２を介して受け、順次格納する。そして、フロー制御バッファ１４３は、オーディオ制御部１４１Ａからのデータ読出クロックＤＲＣに従って、格納されたデータをデータ信号ＦＣＤとしてチャンネル処理部１４４へ向けて順次送られる。
The
チャンネル処理部１４４は、オーディオ制御部１４１Ａからのチャンネル処理制御指令ＣＰＣに従って、フロー制御バッファ１４３からのデータ信号ＦＣＤに基づいて、６．１ｃｈサラウンド方式における各チャンネルに対応するチャンネルデータ信号ＰＣＤ1〜ＰＣＤ7を生成し、アナログ変換部１４５へ送られる。このチャンネル処理部１４４は、図４に示されるように、個別チャンネル信号生成手段としてのチャンネル分離部２１０と、音響調整手段としてのチャンネル信号調整部２２０と、音声遅延手段としての信号遅延部２３０とを備えている。
The
チャンネル分離部２１０は、チャンネル処理指令ＣＰＣの一部であるチャンネル分離制御指令ＣＳＣに従って、データ信号ＦＣＤからＦＣ〜ＳＷチャンネル用のスピーカユニット１６０1〜１６０7に対応する分離チャンネルデータ信号ＳＣＤ1〜ＳＣＤ7を生成する。このチャンネル分離部２１０は、図５に示されるように、前段分離手段としての前段分離部２１１と、後段分離手段としての後段分離部２１２とを備えている。
前段分離部２１１は、データ信号ＦＣＤに含まれるチャンネル指定情報に従って、データ信号ＦＣＤを、上述したＦＣチャンネル、ＦＬチャンネル、ＦＲチャンネル、ＲＣチャンネル、ＲＬチャンネル、ＲＲチャンネル及びＳＷチャンネルに対応するデータ信号ＦＳＤ1〜ＦＳＤ7に分離する。こうして生成されたデータ信号ＦＳＤ1〜ＦＳＤ7は、後段分離部２１２へ送られる。
The
後段分離部２１２は、チャンネル分離制御指令ＣＳＣに従って、前段分離部２１１からのデータ信号ＦＳＤ1〜ＦＳＤ7を再構成して、分離チャンネルデータ信号ＳＣＤ1〜ＳＣＤ7を生成する。この後段分離部２１２は、図６に示されるように、フィルタセット２１５1〜２１５6と、ローパスフィルタ（ＬＰＦ）２１７7と、加算手段としての加算器２１８とを備えている。ここで、フィルタセット２１５k（ｋ＝１〜６）のそれぞれは、高周波成分抽出手段としてのハイパスフィルタ（ＨＰＦ）２１６kと、低周波成分抽出手段としてのＬＰＦ２１７kとを含んでいる。
The rear
ＨＰＦ２１６kのそれぞれは、ＮＨ1タップのＦＩＲ直線位相型フィルタとして構成され、所定周波数ｆ1よりも高い周波数成分に対応するデータ信号を選択的に通過させる。このＨＰＦ２１６kのタップ係数は、オーディオ制御部１４１Ａにより、チャンネル分離制御指令ＣＳＣの一部である高域分離制御指令ＣＳＨkとして指定される。ＨＰＦ２１６kから出力されたデータ信号は、分離チャンネルデータ信号ＳＣＤkとしてチャンネル信号調整部２２０へ送られる。
Each of the
なお、所定周波数ｆ1は、ＳＷチャンネルの音としてのみスピーカユニット１６０7から出力させるべきサブウーハ音の予め定められた周波数帯域の上限周波数となるように定められる。
The predetermined frequency f 1 is determined only as the upper limit frequency of the predetermined frequency band of the subwoofer sound to be output from the
ＬＰＦ２１７j（ｊ＝１〜７）のそれぞれは、ＮＬ1タップのＦＩＲ直線位相型フィルタとして構成され、所定周波数ｆ1よりも低い周波数成分を選択的に通過させる。このＬＰＦ２１６jのタップ係数は、オーディオ制御部１４１Ａにより、チャンネル分離制御指令ＣＳＣの一部である低域分離制御指令ＣＳＬkとして指定される。ＬＰＦ２１７jから出力されたデータ信号は、加算器２１８へ送られる。
Each of the LPFs 217 j (j = 1 to 7) is configured as an NL 1- tap FIR linear phase filter and selectively passes a frequency component lower than the predetermined frequency f 1 . The tap coefficient of the
加算器２１８は、ＬＰＦ２１７j（ｊ＝１〜７）から出力されたデータ信号の和を算出する。この算出結果は、分離チャンネルデータ信号ＳＣＤ7としてチャンネル信号調整部２２０へ送られる。
The
図４に戻り、チャンネル信号調整部２２０は、チャンネル処理指令ＣＰＣの一部であるチャンネル信号調整指令ＡＣＣに従って、チャンネル分離部２１０からの分離チャンネルデータ信号ＳＣＤ1〜ＳＣＤ7から調整チャンネルデータ信号ＡＣＤ1〜ＡＣＤ7を生成する。このチャンネル信号調整部２２０は、図７に示されるように、個別音響特性調整手段としてのフィルタセット２２１1〜２２１6を備えている。ここで、フィルタセット２２１k（ｋ＝１〜６）のそれぞれは、ハイパスフィルタ（ＨＰＦ）２２２kと、ＬＰＦ２２３kとを含んでいる。
Returning to FIG. 4, the channel
ＨＰＦ２２２kのそれぞれは、ＮＨ2タップのＦＩＲ直線位相型フィルタとして構成され、所定周波数ｆ2（＞ｆ1）よりも高い周波数成分に対応するデータ信号を選択するとともに、そのデータ信号に関する音響調整を行う。このＨＰＦ２２２kのタップ係数は、オーディオ制御部１４１Ａにより、チャンネル信号調整指令ＡＣＣの一部である高域調整制御指令ＡＣＨkとして指定される。ＨＰＦ２２２kから出力された高域調整チャンネルデータ信号ＡＣＤＨkは、調整チャンネルデータ信号ＡＣＤkの一部して信号遅延部２３０へ送られる。
Each of the HPFs 222 k is configured as an NH 2 tap FIR linear phase filter, selects a data signal corresponding to a frequency component higher than a predetermined frequency f 2 (> f 1 ), and performs acoustic adjustment on the data signal. Do. The tap coefficient of the HPF 222 k is designated by the
なお、所定周波数ｆ2は、後述するスピーカユニット１６０kにおける高音域スピーカ１６０Ｈkと低音域スピーカ１６０Ｌkとの出力音声周波数の棲み分けに従って、予め定められる。
The predetermined frequency f 2 in accordance with the segregation of the output sound frequency of the high frequency range speaker 160H k and
ＬＰＦ２２３kのそれぞれは、ＮＬ2タップのＦＩＲ直線位相型フィルタとして構成され、所定周波数ｆ2よりも低い周波数成分を選択的に通過させる。このＬＰＦ２２３kのタップ係数は、オーディオ制御部１４１Ａにより、チャンネル信号調整指令ＡＣＣの一部である低域分離制御指令ＡＣＬkとして指定される。ＬＰＦ２２３kから出力された低域調整チャンネルデータ信号ＡＣＤＬkは、調整チャンネルデータ信号ＡＣＤkの一部として信号遅延部２３０へ送られる。
Each of the
なお、分離チャンネルデータ信号ＳＣＤ7は、チャンネル信号調整部２２０においては何等の調整処理が施されずに、そのまま調整チャンネルデータ信号ＡＣＤ7のとして信号遅延部２３０へ送られる。
The separated channel data signal SCD 7 is sent to the
図４に戻り、信号遅延部２３０は、オーディオ制御部１４１Ａからの遅延制御指令ＤＬＣに従って、調整チャンネルデータ信号ＡＣＤj（ｊ＝１〜７）のそれぞれを遅延させて、チャンネルデータ信号ＰＣＤjを生成する。ここで、調整チャンネルデータ信号ＡＣＤk（ｋ＝１〜６）は、高域調整チャンネルデータ信号ＡＣＤＨkと低域調整チャンネルデータ信号ＡＣＤＬkとから構成されているが、これらの信号ＡＣＤＨk，ＡＣＤＬkについても、信号遅延部２３０は、個別に遅延を付与する。
Returning to FIG. 4, the
この信号遅延部２３０は、図８に示されるように、個別音声遅延手段としての遅延器セット２３１1〜２３１6と遅延器２３３7とを備えている。ここで、遅延器セット２３１k（ｋ＝１〜６）のそれぞれは、遅延器２３２kと遅延器２３３kとを備えている。
The
遅延器２３２kは、遅延制御指令ＤＬＣの一部である高域遅延指定ＤＣＨkで指定された遅延時間ＤＨkだけ高域調整チャンネルデータ信号ＡＣＤＨkを遅延させる。遅延器２３２kによる遅延結果である高域チャンネルデータ信号ＰＣＤＨkは、チャンネルデータ信号ＰＣＤkの一部としてアナログ変換部１４５へ送られる。
The
遅延器２３３kは、遅延制御指令ＤＬＣの一部である低域遅延指定ＤＣＬkで指定された遅延時間ＤＬkだけ低域調整チャンネルデータ信号ＡＣＤＬkを遅延させる。遅延器２３３kによる遅延結果である低域チャンネルデータ信号ＰＣＤＬkは、チャンネルデータ信号ＰＣＤkの一部としてアナログ変換部１４５へ送られる。
The
遅延器２３３7は、遅延制御指令ＤＬＣの一部であるサブウーハ域遅延指定ＤＣＬ7で指定された遅延時間ＤＬ7だけ調整チャンネルデータ信号ＡＣＤ7を遅延させる。遅延器２３３7による遅延結果であるチャンネルデータ信号ＰＣＤ7は、アナログ変換部１４５へ送られる。
The
図３に戻り、アナログ変換部１４５は、チャンネル信号処理部１４４からのチャンネルデータ信号ＰＣＤ1〜ＰＣＤ7に含まれる１３種のデジタルデータ信号を、それぞれアナログ信号に変換する。このアナログ変換部１４５は、当該１３種のデジタルデータ信号に対応して、互いに同様に構成された１３個のＤＡ（Digital to Analogue）変換器を備えている。
Returning to FIG. 3, the
アナログ変換部１４５によるアナログ変換結果であるアナログ信号ＰＢＳ1〜ＰＢＳ7は、音量調整部１４６へ送られる。なお、アナログ信号ＰＢＳk（ｋ＝１〜６）のそれぞれには、高域チャンネルデータ信号ＰＣＤＨkのアナロク変換信号及び低域チャンネルデータ信号ＰＣＤＬkのアナロク変換信号の２種のアナロク信号が含まれている。
Analog signals PBS 1 to PBS 7 that are analog conversion results by the
音量調整部１４６は、オーディオ制御部１４１Ａからの音量調整制御指令ＶＬＣに従って、アナログ変換部１４５からのアナログ信号ＰＢＳ1〜ＰＢＳ7に含まれる１３種のアナログ信号のレベルのそれぞれを、互いに同様に構成された増幅器により調整する。この調整の結果は、プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7としてオーディオメインアンプユニット１５０へ送られる。
The
ここで、視聴想定位置における音声と映像との同期ズレの発生原因に要素になると考えられる、オーディオプリアンプユニット１４０Ａにおける音声関連信号の主な遅延を、信号遅延部２３０以外について考察すると、次の通りとなる。
Here, the main delay of the audio-related signal in the
オーディオプリアンプユニット１４０Ａでは、バスインターフェース部１４２における音声データ信号ＡＤＤのオーディオプリアンプユニット１４０Ａ内部への出力処理の際に遅延が発生する（遅延時間ＤＡ２1）。引き続き、フロー制御バッファ１４３への音声データＡＤＤの入力から、データ読出クロックＤＲＣによるデータ読み出しまでの遅延（平均遅延時間ＤＡ２2）が発生する。
In the
次に、前段分離部２１１におけるデータ信号ＦＣＤからデータ信号ＦＳＤ1〜ＦＳＤ7への分離処理に際して遅延（遅延時間ＤＡ２3）が発生する。引き続き、後段分離部２１２におけるデータ信号ＦＳＤ1〜ＦＳＤ7基づく分離チャンネルデータ信号ＳＣＤ1〜ＳＣＤ7の生成処理に際して遅延が発生する。
Next, a delay (delay time DA2 3 ) occurs during the separation process from the data signal FCD to the data signals FSD 1 to FSD 7 in the
ここで、分離チャンネルデータ信号ＳＣＤk（ｋ＝１〜６）のそれぞれの生成に際しては、ＮＨ1タップの直線位相型のＦＩＲフィルタである２１６kによる遅延（遅延時間ＤＡ２4H（＝ＮＨ1／（２ｆS）；ｆSは、音声データ信号におけるサンプリング周波数））が発生する。一方、分離チャンネルデータ信号ＳＣＤ7の生成に際しては、ＮＬ1タップの直線位相型のＦＩＡフィルタである２１７kによる遅延（遅延時間ＤＡ２4L（＝ＮＬ1／（２ｆS））、及び、加算器２１８における加算処理による遅延（遅延時間ＤＡ２4A）が発生する。
Here, in each generation of the separation channel data signal SCD k (k = 1~6) is delayed by 216 k is linear phase FIR filter of NH 1 tap (delay time DA2 4H (= NH 1 / ( 2f S ); f S is the sampling frequency in the audio data signal)). On the other hand, when the separated channel data signal SCD 7 is generated, a delay (delay time DA2 4L (= NL 1 / (2f S )) due to 217 k which is an NL 1- tap linear phase type FIA filter, and an
次いで、チャンネル信号処理部２２０における分離チャンネルデータ信号ＳＣＤ1〜ＳＣＤ7に基づく調整チャンネルデータ信号ＡＣＤ1〜ＡＣＤ7の生成処理に際して遅延が発生する。ここで、高域調整チャンネルデータ信号ＡＣＤＨkのそれぞれの生成に際しては、ＮＨ2タップの直線位相型のＦＩＲフィルタである２２２kによる遅延（遅延時間ＤＡ２5H（＝ＮＨ2／（２ｆS））が発生する。一方、低域調整チャンネルデータ信号ＡＣＤＬkのそれぞれの生成に際しては、ＮＬ2タップの直線位相型のＦＩＡフィルタである２２３kによる遅延（遅延時間ＤＡ２5L（＝ＮＬ2／（２ｆS））が発生する。
Then, delay occurs in generating processing for adjusting channel data signal ACD 1 ~ACD 7 based on the separation channel data signal SCD 1 ~SCD 7 in the
信号遅延部２３０を介した後は、アナログ変換部１４５におけるアナログ変換処理に際して、チャンネルデータ信号ＰＣＤ1〜ＰＣＤ7における１３種の信号に共通した遅延（遅延時間ＤＡ２6）が発生する。引き続き、音量調整部１４６における音量調整処理に際して、プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7における１３種の信号にほぼ共通した遅延（遅延時間ＤＡ２7）が発生する。
After passing through the
以上より、オーディオプリアンプユニット１４０Ａにおいては、プリアンプ出力信号ＰＡＳＨk（ｋ＝１〜６）の生成に際して、次の（１）で表される遅延時間ＤＡ２Ｈkの遅延が発生すると評価される。
DA2Hk＝(DA21＋DA22＋DA23＋DA24H＋DA25H＋DA26＋DA27)＋DHk＝DA2H＋DHk …（１）
From the above, in the
DA2H k = (DA2 1 + DA2 2 + DA2 3 + DA2 4H + DA2 5H + DA2 6 + DA2 7 ) + DH k = DA2 H + DH k (1)
また、オーディオプリアンプユニット１４０Ａにおいては、プリアンプ出力信号ＰＡＳＬk（ｋ＝１〜６）の生成に際して、次の（２）で表される遅延時間ＤＡ２Ｌkの遅延が発生すると評価される。
DA2Lk＝(DA21＋DA22＋DA23＋DA24L＋DA25L＋DA26＋DA27)＋DLk＝DA2L＋DLk …（２）
In the
DA2L k = (DA2 1 + DA2 2 + DA2 3 + DA2 4L + DA2 5L + DA2 6 + DA2 7 ) + DL k = DA2 L + DL k (2)
また、オーディオプリアンプユニット１４０Ａにおいては、プリアンプ出力信号ＰＡＳＬ7の生成に際して、次の（３）で表される遅延時間ＤＡ２Ｌ7の遅延が発生すると評価される。
DA2L7＝(DA21＋DA22＋DA23＋DA24L＋DA24A＋DA26＋DA27)＋DL7＝DA2SW＋DL7 …（３）
Further, in the
DA2L 7 = (DA2 1 + DA2 2 + DA2 3 + DA2 4L + DA2 4A + DA2 6 + DA2 7 ) + DL 7 = DA2 SW + DL 7 (3)
図１に戻り、オーディオメインアンプユニット１５０は、オーディオプリアンプユニット１４０Ａからのプリアンプ出力信号ＰＡＳ1〜ＰＡＳ7における１３種のアナログ信号をそれぞれ増幅し、出力音声信号ＡＯＳ1〜ＡＯＳ7を生成する。ここで、出力音声信号ＡＯＳk（ｋ＝１〜６）のそれぞれには、高域出力音声信号ＡＯＳＨk及び低域出力音声信号ＡＯＳＬkの２種のアナログ信号が含まれている（図１０参照）。このオーディオメインアンプユニット１５０は、プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7における１３種のアナログ信号のそれぞれに対応して配設され、互いに同様に構成された増幅器を備えて構成されている。オーディオメインアンプユニット１５０においては、出力音声信号ＡＯＳ1〜ＡＯＳ7における１３種のアナログ信号にほぼ共通した遅延（遅延時間ＤＡ３）が発生すると評価される。
Returning to FIG. 1, the audio
スピーカユニット１６０1〜１６０7は、オーディオメインアンプユニット１５０からの出力音声信号ＡＯＳ1〜ＡＯＳ7に従って、音声を音場空間ＡＳＰへ向けて出力する。ここで、スピーカユニット１６０k（ｋ＝１〜６）のそれぞれは、図１０に示されるように、高域スピーカ１６０Ｈk及び低域スピーカ１６０Ｌkを含んでいる。ここで、高域スピーカ１６０Ｈkは、互いに同様に構成されている。また、低域スピーカ１６０Ｌkは、互いに同様に構成されている。そして、高域スピーカ１６０Ｈkは、高域出力音声信号ＡＯＳＨkに従って音声出力を行う。また、低域スピーカ１６０Ｌkは、低域出力音声信号ＡＯＳＬkに従って音声出力を行う。
The
また、スピーカユニット１６０7は、図１１に示されるように、サブウーハ音声用の低域スピーカ１６０Ｌ7を含んでいる。そして、低域スピーカ１６０Ｌ7は、低域出力音声信号ＡＯＳＬ7に従って音声出力を行う。
The
スピーカユニット１６０1〜１６０7においては、高域スピーカ１６０Ｈkのそれぞれからの音声出力に際して遅延時間ＤＡ４Hの遅延が発生し、低域スピーカ１６０Ｌkからの音声出力に際して遅延時間ＤＡ４Lの遅延が発生する。また、低域スピーカ１６０Ｌ7からの音声出力に際して遅延時間ＤＡ４7の遅延が発生すると評価される。
In the
以上のドライブ制御ユニット１２０Ａ、オーディオプリアンプユニット１４０Ａ、オーディオメインアンプユニット１５０及びスピーカユニット１６０1〜１６０7における音声信号関連信号の遅延をまとめると、次の通りとなる。
The drives control
高域スピーカ１６０Ｈk（ｋ＝１〜６）からの音声出力については、音声／映像分離部１２４Ａが受けるコンテンツデータ信号ＣＴＤ及び同期調整用データ信号ＳＪＤの段階から、次の（４）式で表される遅延時間ＤＡＴHの遅延が発生する。
DATH＝DA1＋DA2H＋DHk＋DA3＋DA4H …（４）
The audio output from the high frequency speaker 160H k (k = 1 to 6) is expressed by the following equation (4) from the stage of the content data signal CTD and the synchronization adjustment data signal SJD received by the audio /
DAT H = DA 1 + DA2 H + DH k + DA3 + DA4 H (4)
また、低域スピーカ１６０Ｌkからの音声出力については、音声／映像分離部１２４Ａが受けるコンテンツデータ信号ＣＴＤ及び同期調整用データ信号ＳＪＤの段階から、次の（５）式で表される遅延時間ＤＡＴLの遅延が発生する。
DATL＝DA1＋DA2L＋DLk＋DA3＋DA4L …（５）
For audio output from the low-
DAT L = DA 1 + DA2 L + DL k + DA3 + DA4 L (5)
また、低域スピーカ１６０Ｌ7からの音声出力については、音声／映像分離部１２４Ａが受けるコンテンツデータ信号ＣＴＤ及び同期調整用データ信号ＳＪＤの段階から、次の（６）式で表される遅延時間ＤＡＴ7の遅延が発生する。
DAT7＝DA1＋DA2SW＋DLk＋DA3＋DA47 …（６）
Also, the audio output from the low-
DAT 7 = DA 1 + DA2 SW + DL k + DA3 + DA4 7 (6)
図１の表示制御ユニット１７０Ａは、図１２に示されるように、遅延制御手段の一部としての表示制御部１７１Ａと、バスインターフェース部１７２とを備えている。また、表示制御ユニット１７０は、映像遅延手段としての映像遅延部１７３と、デコード部１７４とを備えている。
As shown in FIG. 12, the
表示制御部１７１Ａは、ドライブ制御ユニット１２０Ａ及びオーディオプリアンプユニット１４０Ａとの間で通信を行い、動作協調を図る。また、表示制御部１７１Ａは、表示制御ユニット１７０Ａの他の構成要素１７２〜１７４を制御する。かかる制御には、映像遅延部１７３を利用した映像遅延制御、デコード部１７４を利用したデコード制御、及び表示デバイス制御が含まれている。
The
映像遅延制御に際して、表示制御部１７１Ａは、２種類の遅延制御を行う。第１の映像遅延制御では、表示制御部１７１Ａは、コンテンツ再生装置１００Ａにおける映像再生に関連する各部における処理による推定遅延時間、及び、上述した音声再生に関する各部における処理による推定遅延時間に基づいて、スピーカユニット１６０1〜１６０7の各スピーカからの音声出力タイミングと表示ユニット１８０Ａにおける映像表示タイミングとを同期させるべく、遅延制御指令ＤＲＣを生成して、映像遅延部１７３へ送る。なお、上述したように、コンテンツ再生装置１００Ａにおける音声再生及び映像再生に関連する各部における処理による推定遅延時間は設計段階において既知のものであることから、当該推定遅延時間に基づいて定められる初期映像遅延時間は、予め定められ、表示制御部１７１Ａ内に登録されている。
In the video delay control, the
第２の映像遅延制御では、表示制御部１７１Ａは、オーディオプリアンプユニット１４０Ａから受信した付加遅延時間を初期映像遅延時間に加算した補正映像遅延時間を算出する。そして、表示制御部１７１Ａは、補正映像遅延時間の設定指令を、遅延制御指令ＤＲＣとして映像遅延部１７３へ送る。
In the second video delay control, the
表示デバイス制御では、表示制御部１７１Ａは、表示ユニット１８０Ａにおける表示デバイスが例えば液晶ディスプレイの場合には、例えばバックライトの点灯又は滅灯を制御するための表示デバイス制御指令ＤＰＣを生成する。生成された表示デバイス制御指令ＤＰＣは、表示ユニット１８０Ａへ送られる。
In the display device control, when the display device in the
また、表示制御部１７１Ａは、表示ユニット１８０Ａから上述したテスト映像データ信号を検出した旨をテスト映像データ検出結果ＳＤＤとして受けると、直ちにその旨をオーディオプリアンプユニット１４０Ａへ報告する。
Further, when the
バスインターフェース部１７２は、表示制御部１７１Ａによる制御のもとで、表示制御ユニット１７０Ａの内部回路とバス３００とのインターフェーシングを行う。このバスインターフェース部１７２を利用することにより、表示制御ユニット１７０Ａと、ドライブ制御ユニット１２０Ａ及びオーディオプリアンプユニット１４０Ａとの間で、バス３００を介した通信が可能となっている。
The
映像遅延部１７３は、ドライブ制御ユニット１２０Ａから送られた映像データ信号ＩＤＤを、バス３００及びバスインターフェース部１７２を介して受け、表示制御部１７１Ａからの遅延制御指令ＤＲＣに従って遅延をさせる（遅延時間ＤＭ）。この遅延結果は、遅延映像信号Ｄ１Ｄとして、デコード部１７４へ送られる。
The
デコード部１７４は、デコード制御指令ＤＣＣによる表示制御部１７１Ａの制御のもとで、ＭＰＥＧコード化されている遅延映像信号ＤＩＤをデコードして、出力映像データ信号ＤＭＤを生成する。生成された出力映像データ信号ＤＭＤは、表示ユニット１８０Ａへ送られる。
The
ここで、視聴想定位置における音声と映像との同期ズレの発生原因に要素になると考えられる、表示制御ユニット１７０Ａにおける映像関連信号の主な遅延を、映像遅延部１７３以外について考察すると、次の通りとなる。
Here, considering the main delay of the video-related signal in the
表示制御ユニット１７０Ａでは、バスインターフェース部１７２における映像データ信号ＩＤＤのオーディオプリアンプユニット１４０Ａ内部への出力処理の際に遅延（遅延時間ＤＩ２1）が発生する。そして、映像遅延部１７３を介した後には、デコード部１７４におけるデコード処理の際に遅延（遅延時間ＤＩ２2）が発生する。
In the
したがって、表示制御ユニット１７０Ａでは、映像関連信号について、次の（７）式で表される遅延時間ＤＩ２Ｔの遅延が発生すると評価される。
DI2T＝(DI21＋DI22)＋DM＝DI2＋DM …（７）
Therefore, the
DI2T = (DI2 1 + DI2 2 ) + DM = DI2 + DM (7)
図１の表示ユニット１８０Ａは、図１３に示されるように、アナログ変換部１８１と、表示デバイス１８２とを備えている。さらに、表示ユニット１８０Ａは、テスト映像検出手段としてのテスト映像データ信号検出部１８３を備えている。
The
アナログ変換部１８１は、表示制御ユニット１７０Ａからの出力映像データ信号ＤＭＤを出力映像アナログ信号ＭＯＳに変換する。このアナログ変換部１８１は、同様に構成された必要な数のＤＡ変換器を備えて構成される。出力映像アナログ信号ＭＯＳは、表示デバイスへ送られる。
The
表示デバイス１８２は、アナログ変換部１８１からの出力映像アナログ信号ＭＯＳに従って、映像表示を行う。この表示デバイス１８２は、液晶表示パネル等から構成されている。
The
テスト映像データ信号検出部１８３は、出力映像アナログ信号ＭＯＳにおけるテスト映像データ信号に由来する信号を検出する。テスト映像データ信号検出部１８３は、検出結果を、テスト映像データ検出結果ＳＤＤとして表示制御ユニット１７０Ａへ送る。
The test video data signal detector 183 detects a signal derived from the test video data signal in the output video analog signal MOS. The test video data signal detection unit 183 sends the detection result as the test video data detection result SDD to the
ここで、視聴想定位置における音声と映像との同期ズレの発生原因に要素になると考えられる、表示ユニット１８０Ａにおける映像関連信号の主な遅延を考察すると、次の通りとなる。
Here, the main delay of the video-related signal in the
表示ユニット１８０Ａでは、まず、アナログ変換部１８１におけるアナログ変換処理に際して、遅延（遅延時間ＤＡ３1）が発生する。引き続き、表示デバイス１８２における
映像表示に際して遅延（遅延時間ＤＡ３2）の遅延が発生する。
In the
したがって、表示制御ユニット１７０Ａでは、映像関連信号について、次の（８）式で表される遅延時間ＤＩ３の遅延が発生すると評価される。
DI3＝(DI31＋DI32) …（８）
Therefore, the
DI3 = (DI3 1 + DI3 2 ) (8)
以上のドライブ制御ユニット１２０Ａ、表示制御ユニット１７０Ａ及び表示ユニット１８０Ａにおける映像信号関連信号の遅延をまとめると、表示デバイス１８２における表示出力については、音声／映像分離部１２４Ａが受けるコンテンツデータ信号ＣＴＤ及び同期調整用データ信号ＳＪＤの段階から、次の（９）式で表される遅延時間ＤＭＴの遅延が発生する。
DMT＝DI1＋DI2＋DM＋DI3 …（９）
When the delays of the video signal related signals in the
DMT = DI1 + DI2 + DM + DI3 (9)
なお、オーディオプリアンプユニット１４０Ａのオーディオ制御部１４１Ａに登録される遅延時間（ＤＨk，ＤＬk,ＤＬ7）の初期値である上述した初期音声遅延時間（ＦＤＨk，ＦＤＬk,ＦＤＬ7）、及び、表示制御ユニット１７０Ａの表示制御部１７１Ａに登録される遅延時間ＤＭの初期値である上述した初期映像遅延時間ＦＤＭは、次の（１０）式を満たすように、予め定められる。
DATH＝DATL＝DAT7＝DMT …（１０）
The initial voice delay time (FDH k , FDL k , FDL 7 ), which is the initial value of the delay time (DH k , DL k , DL 7 ) registered in the
DAT H = DAT L = DAT 7 = DMT (10)
図１の操作入力ユニット１９０は、コンテンツ再生装置１００Ａの本体部に設けられたキー部、あるいはキー部を備えるリモート入力装置等により構成される。ここで、本体部に設けられたキー部としては、表示ユニット１８０Ａの表示デバイス１８２に設けられたタッチパネルを用いることができる。なお、キー部を有する構成に代えて、音声入力する構成を採用することもできる。
The
この操作入力ユニット１９０を利用者が操作することにより、コンテンツ再生装置１００Ａの動作内容の設定が行われる。例えば、再生コンテンツの設定、コンテンツの検索設定等を、利用者が操作入力ユニット１９０を利用して行う。こうした入力内容は、操作入力ユニット１９０からドライブ制御ユニット１２０Ａのドライブ制御部１２１Ａへ送られる。
When the user operates the
＜動作＞
次に、上記のように構成されたコンテンツ再生装置１００Ａの動作について、主に、オーディオ制御部１４１Ａによる信号遅延部２３０に対する遅延時間（ＤＨk（ｋ＝１〜６），ＤＬk,ＤＬ7）の設定処理、及び、表示制御部１７１Ａによる遅延時間ＤＭの設定処理に主に着目して説明する。
<Operation>
Next, with respect to the operation of the
コンテンツ再生装置１００Ａの電源が投入される等して、コンテンツ再生装置１００Ａが動作を開始すると、初期化処理が行われる。かかる初期化処理においては、後述する補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が登録されていない場合には、上述した第１の音声遅延制御が行われる。すなわち、オーディオ制御部１４１Ａが、信号遅延部２３０に対して、遅延時間（ＤＨk，ＤＬk,ＤＬ7）として初期音声遅延時間（ＦＤＨk，ＦＤＬk,ＦＤＬ7）を設定する遅延制御指令ＤＬＣを発行する。
When the
また、後述する補正映像遅延時間ＣＤＭが登録されていない場合には、上述した第１の映像遅延制御が行われる。すなわち、表示制御部１７１Ａが、映像遅延部１７３に対して、遅延時間ＤＭとして初期映像遅延時間ＦＤＭを設定する遅延制御指令ＤＲＣを発行する。
Further, when a corrected video delay time CDM described later is not registered, the first video delay control described above is performed. That is, the
初期音声遅延時間（ＦＤＨk，ＦＤＬk,ＦＤＬ7）の設定が行われると、信号遅延部２３０における遅延器２３２kにおいて、高域調整チャンネルデータ信号ＡＣＤＨkに対して初期音声遅延時間ＦＤＨkの遅延が付与され、高域チャンネルデータ信号ＰＣＤＨkが生成されるようになる。また、信号遅延部２３０における遅延器２３３j（ｊ＝１〜７）において、低域調整チャンネルデータ信号ＡＣＤＬjに対して初期音声遅延時間ＦＤＬjの遅延が付与され、低域チャンネルデータ信号ＰＣＤＬkが生成されるようになる。
When the initial audio delay times (FDH k , FDL k , FDL 7 ) are set, the
一方、初期映像遅延時間ＦＤＭの設定が行われると、映像遅延部１７３において、映像データ信号ＩＤＤに対して初期映像遅延時間ＦＤＭの遅延が付与され、遅延映像信号ＤＩＤが生成されるようになる。
On the other hand, when the initial video delay time FDM is set, the
この結果、音声コンテンツ及び映像コンテンツを含むコンテンツをＤＶＤから読み取って再生を行った場合において、スピーカユニット１６０1〜１６０7からの音声コンテンツの再生音声の出力タイミングと、表示ユニット１８０Ａにおける映像コンテンツの再生映像の表示タイミングとが同期するようになる。
As a result, in the case of performing reading and reproducing content including audio content and video content from DVD, the output timing of the reproduced sound of the audio content from the
上記のような初期化処理の後、スピーカユニット１６０1〜１６０7における１３種のスピーカ１６０Ｈ1〜１６１Ｈ6，１６０Ｌ1〜１６１Ｌ7から出力された音声の想定視聴位置における到達タイミングの同期制御実行指令が、利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ａに報告される。この報告を受けたドライブ制御部１２１Ａは、バス３００を介して、音声同期指令をオーディオ制御部１４１Ａへ送る。
After the initialization process as described above, the synchronization control command of the arrival timing of supposition viewing position of the audio output from the
音声同期指令を受けたオーディオ制御部１４１Ａは、上述した第２の音声遅延制御を行う。この第２の音声遅延制御では、まず、オーディオ制御部１４１Ａ内部のテスト音源を用い、各スピーカから順次パルス状のテスト音声を出力させる。このテスト音声は、想定視聴位置に配置されたマイクロフォンを有する集音ユニット１３０により集音され、その結果が集音結果ＡＡＤとしてオーディオ制御部１４１Ａに報告される。
The
集音結果ＡＡＤを受けたオーディオ制御部１４１Ａは、集音結果ＡＡＤを解析して、各スピーカからの出力音声が想定視聴位置に到達するまでの時間の相違を求める。引き続き、求められた時間の相違に基づいて、オーディオ制御部１４１Ａは、信号遅延部２３０で現在設定されている遅延時間の補正値である補正音声遅延時間を算出する。そして、オーディオ制御部１４１Ａは、算出された補正音声遅延時間を補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）を内部に登録するとともに、遅延時間（ＤＨk，ＤＬk,ＤＬ7）として設定する遅延制御指令ＤＬＣを発行する。
Upon receiving the sound collection result AAD, the
この結果、音声コンテンツ及び映像コンテンツを含むコンテンツをＤＶＤから読み取って再生を行った場合において、スピーカユニット１６０1〜１６０7からの音声コンテンツの再生音声の想定視聴位置への到達タイミングの同期が図られるようになる。
As a result, in the case of performing reading and reproducing content including audio content and video content from DVD, the synchronization is achieved in the arrival timing of the assumed viewing position of the reproduced sound of the audio content from the
この後、再生音声と再生映像との同期制御実行指令が利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ａに報告される。この報告を受けたドライブ制御部１２１Ａは、バス３００を介して、リップシンク指令をオーディオ制御部１４１Ａ及び表示制御部１７１Ａへ送る。また、ドライブ制御部１２１Ａは、同期調整信号発生部１２５に対して信号発生指令ＳＪＧを発行するとともに、信号発生指令ＳＪＧを選択して処理すべきことを音声／映像分離部１２４Ａにデータ選択指令ＳＬＤにより通知する。
Thereafter, when a user inputs a synchronization control execution command between the reproduced audio and the reproduced video to the
信号発生指令ＳＪＧを受けた同期調整信号発生部１２５は、同期調整用データ信号ＳＪＤを発生し、音声／映像分離部１２４Ａへ向けて送る。音声／映像分離部１２４Ａは、同期調整用データ信号ＳＪＤをテスト音声データ信号とテスト映像データ信号とに分離し、テスト音声データ信号を音声データ信号ＡＤＤとしてバスインターフェース部１２２へ送るとともに、テスト映像データ信号を映像データ信号ＩＤＤとしてバスインターフェース部１２２へ送る。そして、バスインターフェース部１２２からは、ドライブ制御部１２１Ａによる制御のもとで、音声データ信号ＡＤＤがバス３００を介してオーディオプリアンプユニット１４０Ａへ送られるとともに、映像データ信号ＩＤＤがバス３００を介して表示制御ユニット１７０Ａへ送られる
Upon receiving the signal generation command SJG, the synchronization adjustment
リップシンク指令を受けたオーディオ制御部１４１Ａは、上述した第３の音声遅延制御を行う。この第３の音声遅延制御では、テスト音声データ信号である音声データ信号ＡＤＤに基づく音声をスピーカユニット１６０1又はスピーカユニット１６０4から音声を出力させる。この音声は、想定視聴位置に配置されたマイクロフォンを有する集音ユニット１３０により集音され、その結果が集音結果ＡＡＤとしてオーディオ制御部１４１Ａに報告される。
Upon receiving the lip sync command, the
集音結果ＡＡＤを受けたオーディオ制御部１４１Ａは、集音結果ＡＡＤを解析して、テスト音声データ信号に基づく出力音声が想定視聴位置に到達したタイミングを求める。一方、表示ユニット１８０Ａのテスト映像データ信号検出部１８３は、出力映像アナログ信号ＭＯＳにおけるテスト映像データ信号に由来する信号を検出する。テスト映像データ信号検出部１８３は、検出結果を、テスト映像データ検出結果ＳＤＤとして表示制御ユニット１７０Ａへ送る。
Upon receiving the sound collection result AAD, the
テスト映像データ検出結果ＳＤＤを受けたオーディオ制御部１４１Ａは、上述したようにして求めたテスト音声データ信号に基づく出力音声が想定視聴位置に到達したタイミングと、テスト映像データ信号検出部１８３によるテスト映像データ信号に由来する信号の検出タイミングとの差を求める。引き続き、求められたタイミング差に基づいて、オーディオ制御部１４１Ａは、現在信号遅延部２３０で設定されている遅延時間の補正値である補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）を新たに算出する。そして、オーディオ制御部１４１Ａは、新たに算出された補正音声遅延時間を補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）として内部に登録するとともに、遅延時間（ＤＨk，ＤＬk,ＤＬ7）として設定する遅延制御指令ＤＬＣを発行する。
The
なお、第２又は第３の映像遅延制御の処理の実行により補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が登録された場合には、上述した初期化処理においては、補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が信号遅延部２３０に設定されるようになっている。
If the corrected audio delay time (CDH k , CDL k , CDL 7 ) is registered by executing the second or third video delay control process, the corrected audio delay time is used in the initialization process described above. (CDH k , CDL k , CDL 7 ) is set in the
第３の音声遅延制御に際して信号遅延部２３０に対する遅延時間の設定のみではリップシンクを図れない場合には、オーディオ制御部１４１Ａは、リップシンクのために必要となる表示制御ユニット１７０Ａにおける付加遅延時間を算出して、表示制御部１７１Ａへバス３００を介して送る。この付加遅延時間を受けた表示制御部１７１Ａは、上述した第２の映像遅延制御を行う。この第２の映像遅延制御では、表示制御部１７１Ａは、映像遅延部１７３で現在設定されている遅延時間に付加遅延時間を加算又は減算したものを新たな補正映像遅延時間として算出する。そして、表示制御部１７１Ａは、算出された新たな補正映像遅延時間を補正映像遅延時間ＣＤＭとして内部に登録するとともに、遅延時間ＤＭを設定する遅延制御指令ＤＲＣを発行する。
When the lip sync cannot be achieved only by setting the delay time for the
この結果、音声コンテンツ及び映像コンテンツを含むコンテンツをＤＶＤから読み取って再生を行った場合において、スピーカユニット１６０1〜１６０7からの音声コンテンツの再生音声の想定視聴位置への到達タイミングと、映像コンテンツの再生映像の表示タイミングとの同期が図られるようになる。
As a result, in the case of performing reading and reproducing content including audio content and video content from DVD, the arrival timing of the assumed viewing position of the reproduced sound of the audio content from the
なお、第２の映像遅延制御の処理の実行により補正映像遅延時間ＣＤＭが登録された場合には、上述した初期化処理においては、補正映像遅延時間ＣＤＭが映像遅延部１７３に設定されるようになっている。
When the corrected video delay time CDM is registered by executing the second video delay control process, the corrected video delay time CDM is set in the
以上のようなリップシンクが実現される状態で、ＤＶＤに記録されたコンテンツの再生指令が利用者により操作入力ユニットに入力されると、その旨がドライブ制御部１２１Ａに報告される。この報告を受けたドライブ制御部１２１Ａは、バス３００を介して、コンテンツ再生指令をオーディオ制御部１４１Ａ及び表示制御部１７１Ａへ送る。また、ドライブ制御部１２１Ａは、ＤＶＤドライブユニット１１０からの読取データ信号ＲＤＤを音声／映像分離部１２４Ａへ向けて出力すべきことをデータ出力選択部１２３に出力選択指令ＤＯＳにより通知するとともに、コンテンツデータ信号ＤＴＤを選択して処理すべきことを音声／映像分離部１２４Ａにデータ選択指令ＳＬＤにより通知する。
When a playback command for content recorded on a DVD is input to the operation input unit by the user in a state where the lip sync as described above is realized, a message to that effect is reported to the
引き続き、ドライブ制御部１２１Ａは、ＤＶＤドライブユニット１１０を制御して、ＤＶＤからコンテンツデータを読み取る。こうして読み取られたコンテンツデータは、データ出力選択部１２３から出力されるコンテンツデータ信号ＣＴＤとして、音声／映像分離部１２４Ａへ送られる。
Subsequently, the
コンテンツデータ信号ＣＴＤを受けた音声／映像分離部１２４Ａは、コンテンツデータ信号ＣＴＤを音声コンテンツデータ信号と映像コンテンツデータ信号とに分離し、音声コンテンツデータ信号を音声データ信号ＡＤＤとしてバスインターフェース部１２２へ送るとともに、映像コンテンツデータ信号を映像データ信号ＩＤＤとしてバスインターフェース部１２２へ送る。そして、バスインターフェース部１２２からは、ドライブ制御部１２１Ａによる制御のもとで、音声データ信号ＡＤＤがバス３００を介してオーディオプリアンプユニット１４０Ａへ送られるとともに、映像データ信号ＩＤＤがバス３００を介して表示制御ユニット１７０Ａへ送られる
Upon receiving the content data signal CTD, the audio /
音声コンテンツデータ信号である音声データ信号ＡＤＤを受けたオーディオプリアンプユニット１４０Ａでは、オーディオ制御部１４１Ａによる制御のもとで、上述したフロー制御処理、前段チャンネル分離処理、後段チャンネル分離処理、周波数分離処理、集音ユニット１３０における集音結果に含まれる雑音レベルに基づく音響特性調整処理、音声遅延処理、アナログ変換処理及び音量調整処理が施される。ここで、後段チャンネル分離処理、周波数分離処理及び音響特性調整処理に際してはＦＩＲ直線位相型フィルタが用いられるので、ＩＩＲフィルタを用いた場合等における位相特性の劣化が発生しないようになっている。オーディオプリアンプユニット１４０Ａにおける処理結果は、プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7としてオーディオメインアンプユニット１５０へ送られる。
In the
プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7を受けたオーディオメインアンプユニット１５０は、予め定められた増幅処理を行い、出力音声信号ＡＯＳ1〜ＡＯＳ7として、スピーカユニット１６０1〜１６０7へ送る。そして、スピーカユニット１６０1〜１６０7は、オーディオメインアンプユニット１５０からの出力音声信号ＡＯＳ1〜ＡＯＳ7に従って、音声コンテンツの再生音声を音場空間ＡＳＰへ向けて出力する。
The audio
一方、映像コンテンツデータ信号である映像データ信号ＩＤＤを受けた表示制御ユニット１７０Ａでは、表示制御部１７１Ａによる制御のもとで、上述した映像遅延処理及びデコード処理が施される。表示制御ユニット１７０Ａにおける処理結果は、出力映像データ信号ＤＭＤとして、表示ユニット１８０Ａへ送られる。
On the other hand, in the
出力映像データ信号ＤＭＤを受けた表示ユニット１８０Ａでは、まず、アナログ変換処理が施される。この後、映像コンテンツの再生映像が表示される。
In the
こうした再生音声と再生映像については、上述のようにしてリップシンクが図られている。このため、少なくとも想定視聴位置の近傍の利用者には、高品位な音声及び映像が提供される。 For such reproduced audio and reproduced video, lip sync is achieved as described above. For this reason, at least a user near the assumed viewing position is provided with high-quality audio and video.
以上説明したように、本実施形態では、オーディオプリアンプユニット１４０Ａにおける後段チャンネル分離処理、周波数分離処理及び音響特性調整処理に際してはＦＩＲ直線位相型フィルタが用いられる。このため、これらの処理において位相特性の劣化が発生しない。また、オーディオプリアンプユニット１４０Ａにおける遅延制御及び表示制御ユニット１７０Ａにおける遅延制御により、リップシンクを図ることができる。したがって、本実施形態によれば、高品位な音声及び映像を再生することができる。
As described above, in the present embodiment, the FIR linear phase filter is used in the subsequent channel separation processing, frequency separation processing, and acoustic characteristic adjustment processing in the
また、本実施形態では、利用者からの再生音声と再生映像との同期制御実行指令に応答して、同期調整信号発生部１２５がテスト音声データ信号とテスト映像データ信号を含む信号発生指令ＳＪＧを発生する。そして、テスト音声データ信号に基づく出力音声の集音ユニット１３０による検出結果と、テスト映像データ信号に基づく表示ユニット１８０Ａにおける表示タイミングの検出結果とに基づいて、リップシンクを図るべく、遅延制御を行う。このため、リップシンクのための遅延制御を自動的に行うことができ、利用者の利便性を向上することができる。
Further, in this embodiment, in response to the synchronization control execution command between the playback audio and playback video from the user, the synchronization
［第２実施形態］
次に、本発明の第２実施形態を、図１４〜図１８を主に参照し、他の図面を適宜参照して説明する。なお、本実施形態においても、第１実施形態の場合と同様に、車両に搭載されるコンテンツ再生装置を例示して説明する。
[Second Embodiment]
Next, a second embodiment of the present invention will be described with reference mainly to FIGS. 14 to 18 and other drawings as appropriate. In the present embodiment, as in the case of the first embodiment, a content playback device mounted on a vehicle will be described as an example.
［構成］
図１４には、第２実施形態に係るコンテンツ再生装置１００Ｂの概略的な構成がブロック図にて示されている。この図１４に示されるように、コンテンツ再生装置１００Ｂは、第１実施形態のコンテンツ再生装置と比べて、ドライブ制御ユニット１２０Ａ、オーディオプリアンプユニット１４０Ａ、表示制御ユニット１７０Ａ及び表示ユニット１８０Ａに代えて、ドライブ制御ユニット１２０Ｂ、オーディオプリアンプユニット１４０Ｂ、表示制御ユニット１７０Ｂ及び表示ユニット１８０Ｂを備える点が異なっている。以下、この相違点に主に着目して説明する。
[Constitution]
FIG. 14 is a block diagram illustrating a schematic configuration of a
ドライブ制御ユニット１２０Ｂは、図１５に示されるように、ドライブ制御ユニット１２０Ａと比べて、ドライブ制御部１２１Ａ及び音声／映像分離部１２４Ａに代えて、ドライブ制御部１２１Ｂ及び音声／映像分離部１２４Ｂを備える点、及び、同期調整信号発生部１２５を備えていない点が異なる。
As shown in FIG. 15, the
ドライブ制御部１２１Ｂは、ドライブ制御部１２１Ａと比べて、信号発生指令ＳＪＧの発行を行わない点、及び、データ選択指令ＳＬＤに代えて、音声／映像分離処理の実行及び非実行を制御する分離処理制御指令ＳＰＣを音声／映像分離部１２４Ｂに対して発行する点が異なっている。また、ドライブ制御部１２１Ｂは、ドライブ制御部１２１Ａと比べて、音声コンテンツの再生音声及び映像コンテンツの再生映像を視聴している利用者が操作入力ユニット１９０に入力した同期調整指令で指定された補正時間をオーディオプリアンプユニット１４０Ｂへバス３００を介して送る点、及び、最終的な補正時間を遅延補正時間として、ＤＶＤの識別情報又はコンテンツの識別情報に関連付けて記憶する点が異なっている。
Compared to the
音声／映像分離部１２４Ｂは、音声／映像分離部１２４Ａと比べて、コンテンツデータＣＴＤについてのみ音声／映像分離処理を行う点が異なっている。
The audio / video separation unit 124B is different from the audio /
図１４のオーディオプリアンプユニット１４０Ｂは、図１６に示されるように、オーディオプリアンプユニット１４０Ａと比べて、オーディオ制御部１４１Ａに代えて、オーディオ制御部１４１Ｂを備える点が異なっている。このオーディオ制御部１４１Ｂは、オーディオ制御部１４１Ａと比べて、上述した第３の音声遅延処理に代えて、オーディオ制御部１４１Ｂからの補正時間に従った第４の音声遅延処理を行う点が異なっている。
As shown in FIG. 16, the
第４の音声遅延処理では、オーディオ制御部１４１Ｂは、信号遅延部２３０で現在設定されている遅延時間のそれぞれに補正時間を加算又は減算したものを新たな補正音声遅延時間として算出する。そして、オーディオ制御部１４１Ｂは、算出された新たな補正音声遅延時間を設定する遅延制御指令ＤＬＣを発行する。
In the fourth audio delay process, the audio control unit 141B calculates a new corrected audio delay time by adding or subtracting the correction time to each of the delay times currently set by the
なお、オーディオ制御部１４１Ｂは、第４の音声遅延処理において算出された新たな補正音声遅延時間の登録は行わない。また、第４の音声遅延制御に際して信号遅延部２３０に対する遅延時間の設定のみでは補正時間分の遅延補正ができない場合には、オーディオ制御部１４１Ｂは、付加遅延時間を算出して、後述する表示制御部１７１Ｂへバス３００を介して送る。
Note that the audio control unit 141B does not register the new corrected audio delay time calculated in the fourth audio delay process. If the delay correction for the correction time cannot be performed only by setting the delay time for the
図１４の表示制御ユニット１７０Ｂは、図１７に示されるように、表示制御ユニット１７０Ａと比べて、表示制御部１７１Ａに代えて、表示制御部１７１Ｂを備える点が異なっている。この表示制御部１７１Ｂは、表示制御部１７１Ａと比べて、テスト映像データ信号を検出した旨の受信を行わない点、及び、上述した第２の映像遅延処理において算出された新たな補正映像遅延時間の登録を行わない点が異なっている。
As shown in FIG. 17, the
図１４の表示ユニット１８０Ｂは、図１８に示されるように、表示ユニット１８０Ａと比べて、テスト映像データ信号検出部１８３を備えていない点が異なっている。
As shown in FIG. 18, the
＜動作＞
次に、上記のように構成されたコンテンツ再生装置１００Ｂの動作について、主に、オーディオ制御部１４１Ｂによる信号遅延部２３０に対する遅延時間（ＤＨk，（ｋ＝１〜６）ＤＬk,ＤＬ7）の設定処理、及び、表示制御部１７１Ｂによる遅延時間ＤＭの設定処理に主に着目して説明する。
<Operation>
Next, with respect to the operation of the
コンテンツ再生装置１００Ｂの電源が投入される等して、コンテンツ再生装置１００Ｂが動作を開始すると、初期化処理が行われる。かかる初期化処理においては、第１実施形態の場合と同様に、補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が登録されていない場合には、上述した第１の音声遅延制御の設定が行われる。また、上述した第１の映像遅延制御が行われる。
When the
この結果、音声コンテンツ及び映像コンテンツを含むコンテンツをＤＶＤから読み取って再生を行った場合において、スピーカユニット１６０1〜１６０7からの音声コンテンツの再生音声の出力タイミングと、表示ユニット１８０Ｂにおける映像コンテンツの再生映像の表示タイミングとが同期するようになる。
As a result, in the case of performing reading and reproducing content including audio content and video content from DVD, the output timing of the reproduced sound of the audio content from the
上記のような初期化処理の後、スピーカユニット１６０1〜１６０7における１３種のスピーカ１６０Ｈ1〜１６１Ｈ6，１６０Ｌ1〜１６１Ｌ7から出力された音声の想定視聴位置における到達タイミングの同期制御実行指令が、利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ｂに報告される。この報告を受けたドライブ制御部１２１Ｂは、バス３００を介して、音声同期指令をオーディオ制御部１４１Ｂへ送る。そして、音声同期指令を受けたオーディオ制御部１４１Ｂが、第１実施形態の場合と同様に、上述した第２の音声遅延制御を行う。
After the initialization process as described above, the synchronization control command of the arrival timing of supposition viewing position of the audio output from the
この結果、音声コンテンツ及び映像コンテンツを含むコンテンツをＤＶＤから読み取って再生を行った場合において、スピーカユニット１６０1〜１６０7からの音声コンテンツの再生音声の想定視聴位置への到達タイミングの同期が図られるようになる。
As a result, in the case of performing reading and reproducing content including audio content and video content from DVD, the synchronization is achieved in the arrival timing of the assumed viewing position of the reproduced sound of the audio content from the
なお、第２の映像遅延制御の処理の実行により補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が登録された場合には、上述した初期化処理においては、補正音声遅延時間（ＣＤＨk，ＣＤＬk,ＣＤＬ7）が信号遅延部２３０に設定されるようになっている。
Incidentally, by executing the processing of the second image delay control adjustment sound delay time (CDH k, CDL k, CDL 7) when is registered, in the initialization processing described above, correction sound delay time (CDH k , CDL k , CDL 7 ) are set in the
この後、ＤＶＤに記録されたコンテンツの再生指令が利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ｂに報告される。この報告を受けたドライブ制御部１２１Ｂは、ＤＶＤドライブユニット１１０からの読取データ信号ＲＤＤをドライブ制御ユニット１２１Ｂへ向けて出力すべきことをデータ出力選択部１２３に出力選択指令ＤＯＳにより通知する
Thereafter, when a reproduction command for the content recorded on the DVD is input to the
引き続き、ドライブ制御部１２１Ｂは、ＤＶＤドライブユニット１１０を制御して、ＤＶＤから識別情報を読み取る。そして、読み取られたＤＶＤの識別情報に関連付けられている補正遅延時間が登録されているか否かを判定する。この判定の結果が否定的であった場合には、ドライブ制御部１２１Ｂは、補正遅延時間をオーディオ制御部１４１Ｂへ送ることなく、読取データ信号ＲＤＤを音声／映像分離部１２４Ｂへ向けて出力すべきことをデータ出力選択部１２３に出力選択指令ＤＯＳにより通知するとともに、音声／映像分離部１２４Ｂに対して音声／映像分離処理の開始を分離処理制御指令ＳＰＣにより通知する。
Subsequently, the
次に、ドライブ制御部１２１Ｂは、ＤＶＤドライブユニット１１０を制御して、ＤＶＤからコンテンツデータを読み取る。こうして読み取られたコンテンツデータは、データ出力選択部１２３から出力されるコンテンツデータ信号ＣＴＤとして、音声／映像分離部１２４Ｂへ送られる。
Next, the
コンテンツデータ信号ＣＴＤを受けた音声／映像分離部１２４Ｂは、第１実施形態の場合と同様に、コンテンツデータ信号ＣＴＤを音声コンテンツデータ信号と映像コンテンツデータ信号とに分離し、音声コンテンツデータ信号を音声データ信号ＡＤＤとしてバスインターフェース部１２２へ送るとともに、映像コンテンツデータ信号を映像データ信号ＩＤＤとしてバスインターフェース部１２２へ送る。そして、バスインターフェース部１２２からは、ドライブ制御部１２１Ｂによる制御のもとで、音声データ信号ＡＤＤがバス３００を介してオーディオプリアンプユニット１４０Ｂへ送られるとともに、映像データ信号ＩＤＤがバス３００を介して表示制御ユニット１７０Ｂへ送られる
The audio / video separation unit 124B that has received the content data signal CTD separates the content data signal CTD into an audio content data signal and a video content data signal, and converts the audio content data signal into audio, as in the first embodiment. A data signal ADD is sent to the
音声コンテンツデータ信号である音声データ信号ＡＤＤを受けたオーディオプリアンプユニット１４０Ｂでは、第１実施形態の場合と同様に、オーディオ制御部１４１Ｂによる制御のもとで、上述したフロー制御処理、前段チャンネル分離処理、後段チャンネル分離処理、周波数分離処理、集音ユニット１３０における集音結果に含まれる雑音レベルに基づく音響特性調整処理、音声遅延処理、アナログ変換処理及び音量調整処理が施される。オーディオプリアンプユニット１４０Ｂにおける処理結果は、プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7としてオーディオメインアンプユニット１５０へ送られる。
In the
プリアンプ出力信号ＰＡＳ1〜ＰＡＳ7を受けたオーディオメインアンプユニット１５０は、第１実施形態の場合と同様に、予め定められた増幅処理を行い、出力音声信号ＡＯＳ1〜ＡＯＳ7として、スピーカユニット１６０1〜１６０7へ送る。そして、スピーカユニット１６０1〜１６０7は、オーディオメインアンプユニット１５０からの出力音声信号ＡＯＳ1〜ＡＯＳ7に従って、音声コンテンツの再生音声を音場空間ＡＳＰへ向けて出力する。
The audio
一方、映像コンテンツデータ信号である映像データ信号ＩＤＤを受けた表示制御ユニット１７０Ｂでは、第１実施形態の場合とどうように、表示制御部１７１Ｂによる制御のもとで、上述した映像遅延処理及びデコード処理が施される。表示制御ユニット１７０Ｂにおける処理結果は、出力映像データ信号ＤＭＤとして、表示ユニット１８０Ｂへ送られる。
On the other hand, in the
出力映像データ信号ＤＭＤを受けた表示ユニット１８０Ｂでは、第１実施形態の場合と同様に、アナログ変換処理が施される。この後、映像コンテンツの再生映像が表示される。
In the
こうした音声コンテンツ及び映像コンテンツの再生中に、再生音声と再生映像との同期補正制御実行指令が利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ｂに報告される。この報告を受けたドライブ制御部１２１Ｂは、バス３００を介して、補正制御実行指令に対応する補正遅延時間をオーディオ制御部１４１Ｂへ送る。
When a user issues a synchronization correction control execution command for playback audio and playback video to the
補正遅延時間を受けたオーディオ制御部１４１Ｂは、上述した第４の音声遅延制御を行う。すなわち、オーディオ制御部１４１Ｂは、信号遅延部２３０で現在設定されている遅延時間のそれぞれに補正時間を加算又は減算したものを新たな補正音声遅延時間として算出する。そして、表示制御部１７１Ｂは、算出された新たな補正音声遅延時間を設定する遅延制御指令ＤＲＣを発行する。
The audio control unit 141B that has received the correction delay time performs the above-described fourth audio delay control. That is, the audio control unit 141B calculates a new corrected audio delay time by adding or subtracting the correction time to each of the delay times currently set by the
なお、オーディオ制御部１４１Ｂは、第４の音声遅延処理において算出された新たな補正音声遅延時間の登録は行わない。また、第４の音声遅延制御に際して信号遅延部２３０に対する遅延時間の設定のみでは補正時間分の遅延補正ができない場合には、オーディオ制御部１４１Ｂは、付加遅延時間を算出して、表示制御部１７１Ｂへバス３００を介して送る。この付加遅延時間を受けた表示制御部１７１Ｂは、第１実施形態の場合と同様に、上述した第２の映像遅延制御を行う。
Note that the audio control unit 141B does not register the new corrected audio delay time calculated in the fourth audio delay process. If the delay correction for the correction time cannot be performed only by setting the delay time for the
以上のようなリップリンクのための遅延制御は、視聴位置における利用者が満足するリップシンクが実現するまで繰り返される。そして、リップシンクのための遅延時間調整が終了したことが利用者により操作入力ユニット１９０に入力されると、その旨がドライブ制御部１２１Ｂに報告される。この報告を受けたドライブ制御部１２１Ｂは、ＤＶＤドライブユニット１１０を制御して、その時点における最終補正遅延時間をＤＶＤの識別情報に関連付けて、内部に登録する。
The delay control for the lip link as described above is repeated until a lip sync satisfying the user at the viewing position is realized. Then, when the user inputs to the
この結果、音声コンテンツ及び映像コンテンツの再生音声と再生とのリップシンクが、利用者の視聴位置において図られるようになる。 As a result, the lip sync between the playback audio and playback of the audio content and video content is achieved at the viewing position of the user.
なお、以上のようにして補正遅延時間が内部に登録されると、ドライブ制御部１２１Ｂは、コンテンツの再生指令が利用者により操作入力ユニットに入力され、その旨の報告を受けると、内部に登録された補正遅延時間を読み取って、読み取られた補正遅延時間をオーディオ制御部１４１Ｂへ送るようになっている。
When the correction delay time is registered inside as described above, the
以上説明したように、本実施形態では、オーディオプリアンプユニット１４０Ｂにおける後段チャンネル分離処理、周波数分離処理及び音響特性調整処理に際してはＦＩＲ直線位相型フィルタが用いられる。このため、これらの処理において位相特性の劣化が発生しない。また、オーディオプリアンプユニット１４０Ｂにおける遅延制御及び表示制御ユニット１７０Ｂにおける遅延制御により、リップシンクを図ることができる。したがって、本実施形態によれば、高品位な音声及び映像を再生することができる。
As described above, in the present embodiment, the FIR linear phase filter is used in the subsequent channel separation processing, frequency separation processing, and acoustic characteristic adjustment processing in the
また、本実施形態では、音声コンテンツの再生音声と映像コンテンツの再生映像を視聴する利用者による同期補正制御実行指令に従って、リップシンクのための遅延制御を行う。このため、コンテンツデータ信号ＣＴＤの段階で再生音声と再生映像との同期が図られていない場合であっても、視聴位置におけるリップシンクを実現することができる。 In this embodiment, delay control for lip sync is performed in accordance with a synchronization correction control execution command by a user who views the playback audio of the audio content and the playback video of the video content. Therefore, even when the playback audio and playback video are not synchronized at the stage of the content data signal CTD, lip sync at the viewing position can be realized.
［実施形態の変形］
本発明は、上記の実施形態に限定されるものではなく、様々な変形が可能である。
[Modification of Embodiment]
The present invention is not limited to the above-described embodiment, and various modifications are possible.
例えば、上記の第１実施形態に、第２実施形態で採用したリップシンクの手動調整機能を更に実装することもできる。 For example, the manual adjustment function of the lip sync adopted in the second embodiment can be further mounted on the first embodiment.
また、上記の第１及び第２実施形態では、ドライブ制御ユニット、オーディオプリアンプユニット及び表示制御ユニットごとに制御部を設けるようにした。これに対し、これらの制御ユニットについて、任意の２つの制御部を１つの制御部として構成することもできるし、２つの制御部を１つの制御部として構成することもできる。 In the first and second embodiments, a control unit is provided for each drive control unit, audio preamplifier unit, and display control unit. On the other hand, about these control units, arbitrary two control parts can also be constituted as one control part, and two control parts can also be constituted as one control part.
また、上記の第１及び第２実施形態では、６．１ｃｈサラウンド方式について例示したが、５．１サラウンド方式等の他の方式を採用することもできる。 In the first and second embodiments described above, the 6.1 channel surround system has been exemplified. However, other systems such as the 5.1 surround system may be employed.
また、上記の第１及び第２実施形態では、６．１ｃｈサラウンド方式における各チャンネルに対応して、１３個のスピーカを備えることがしたが、各チャンネルに対応する音を適宜混合し、１２個以下又は１４個以上のスピーカから音出力をさせるようにすることもできる。 In the first and second embodiments described above, 13 speakers are provided corresponding to each channel in the 6.1ch surround system, but the sound corresponding to each channel is appropriately mixed to obtain 12 speakers. It is also possible to output sound from the following or 14 or more speakers.
また、車両に搭載され、コンテテンツ再生装置としても機能するナビゲーション装置等が、本実施形態のコンテンツ再生装置１００Ａ又は１００Ｂの機能を有するようにしてもよい。
Further, a navigation device or the like that is mounted on a vehicle and also functions as a content playback device may have the function of the
また、上記の第１及び第２実施形態では、ＤＶＤに格納されたコンテンツデータを再生するコンテンツ再生装置に本発明を適用したが、地上デジタルテレビ放送等の放送波の受信装置であって、音声信号を、例えば２チャンネル構成から６．１チャンネル構成に変換して利用者に提供する装置に本発明を適用することもできる。 In the first and second embodiments described above, the present invention is applied to a content playback device that plays back content data stored on a DVD. The present invention can also be applied to an apparatus that converts a signal from, for example, a 2-channel configuration to a 6.1-channel configuration and provides it to the user.
また、上記の実施形態においては、車両に搭載されるコンテンツ再生装置に本発明を適用したが、車両以外の他の移動体に搭載される音響再生機能を有する装置に本発明を適用することもできるし、移動体に搭載されない音響再生機能を有する装置に本発明を適用することもできる。 In the above embodiment, the present invention is applied to a content playback apparatus mounted on a vehicle. However, the present invention may be applied to an apparatus having an acoustic playback function mounted on a mobile body other than the vehicle. In addition, the present invention can be applied to an apparatus having a sound reproduction function that is not mounted on a moving body.
なお、上記の第１及び第２実施形態におけるドライブ制御ユニット１２０Ａ，１２０Ｂ、オーディオプリアンプユニット１４０Ａ，１４０Ｂ及び表示制御ユニット１７０Ａ，１７０Ｂを中央処理装置（ＣＰＵ：Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、読出専用メモリ（ＲＯＭ：Read Only Memory）、ランダムアクセスメモリ（ＲＡＭ：Random Access Memory）等を備えて構成し、予め用意されたプログラムを当該コンピュータで実行することにより、上記の実施形態における処理を行うようにしてもよい。このプログラムはハードディスク、ＣＤ−ＲＯＭ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、当該コンピュータによって記録媒体から読み出されて実行される。また、このプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ等の可搬型記録媒体に記録された形態で取得されるようにしてもよいし、インターネットなどのネットワークを介した配送の形態で取得されるようにしてもよい。
The
１００Ａ，１００Ｂ … コンテンツ再生装置
１２５ … 同期調整信号発生部（テスト信号生成手段）
１３０ … 集音ユニット（テスト音声検出手段の一部）
１４０Ａ … オーディオプリアンプユニット（遅延制御手段の一部及びテ
テスト手段の一部）
１４０Ｂ … オーディオプリアンプユニット（遅延制御手段の一部）
１６０1〜１６０7 … スピーカユニット（音声出力手段）
１７１Ａ，１７１Ｂ … 表示制御部（遅延制御手段の一部）
１７３ … 映像遅延部（映像遅延手段）
１８０Ａ，１８０Ｂ … 表示ユニット（表示手段）
１８３ … テスト映像データ信号検出部（テスト映像検出手段）
２１０ … チャンネル分離部（個別チャンネル信号生成手段）
２１１ … 前段分離部（前段分離手段）
２１２ … 後段分離部（後段分離手段）
２１６1〜２１６6 … ハイパスフィルタ（高周波成分抽出手段）
２１７1〜２１７6 … ローパスフィルタ（低周波成分抽出手段）
２１８ … 加算器（加算手段）
２２０ … チャンネル信号調整部（音響調整手段）
２２１1〜２２１6 … フィルタセット（個別音響特性調整手段）
２３０ … 信号遅延部（音声遅延手段）
２３１1〜２３１6 … 遅延器セット（個別音声遅延手段の一部）
２３３7 … 遅延器（個別音声遅延手段の一部）
100A, 100B ...
130 ... Sound collecting unit (part of test sound detection means)
140A: Audio preamplifier unit (part of delay control means and
Part of the test method)
140B: Audio preamplifier unit (part of delay control means)
160 1 to 160 7 ... Speaker unit (audio output means)
171A, 171B ... Display control unit (part of delay control means)
173 ... Video delay unit (video delay means)
180A, 180B ... display unit (display means)
183 ... Test video data signal detector (test video detector)
210 ... Channel separation section (individual channel signal generation means)
211 ... Pre-stage separation section (pre-stage separation means)
212 ... latter stage separation part (second stage separation means)
216 1 to 216 6 ... High pass filter (high frequency component extracting means)
217 1 to 217 6 ... Low-pass filter (low frequency component extraction means)
218 ... Adder (addition means)
220 ... Channel signal adjustment unit (acoustic adjustment means)
221 1 to 221 6 ... Filter set (individual acoustic characteristic adjusting means)
230 ... Signal delay unit (voice delay means)
231 1 to 231 6 ... Delayer set (part of individual audio delay means)
233 7 ... Delay device (part of individual audio delay means)
Claims (10)
前記音声コンテンツに由来する音声信号の周波数分離調整及び周波数特性調整の少なくとも一方を、直線位相型の有限インパルス応答フィルタを利用して行う音響調整手段と；
前記音声信号を音声遅延時間だけ遅延させる音声遅延手段と；
前記音響調整手段により調整され、かつ、前記音声遅延手段により遅延された信号に基づいて音声を再生し、所定の音場空間へ向けて出力する音声出力手段と；
前記音場空間の視聴位置における前記音声出力手段から出力された音声との同期用に定められた映像遅延時間だけ、前記映像コンテンツに由来する映像信号を遅延させる映像遅延手段と；
前記映像遅延手段により遅延された映像信号に基づいて、映像を再生表示する表示手段と；
を備えることを特徴とするコンテンツ再生装置。 A content playback device for playing back content including audio content and video content,
Acoustic adjustment means for performing at least one of frequency separation adjustment and frequency characteristic adjustment of an audio signal derived from the audio content using a linear phase type finite impulse response filter;
Audio delay means for delaying the audio signal by an audio delay time;
Sound output means for reproducing sound based on the signal adjusted by the sound adjusting means and delayed by the sound delay means, and outputting the sound toward a predetermined sound field space;
Video delay means for delaying the video signal derived from the video content by a video delay time determined for synchronization with the audio output from the audio output means at the viewing position in the sound field space;
Display means for reproducing and displaying video based on the video signal delayed by the video delay means;
A content playback apparatus comprising:
前記テスト音声信号に基づいて前記音声出力手段により出力された音声の前記視聴位置への到達タイミングを検出するテスト音声検出手段と；
前記テスト映像信号に基づく前記表示手段における表示タイミングを検出するテスト映像検出手段と；を更に備え、
前記遅延制御手段は、前記テスト音声検出手段及び前記テスト映像検出手段による検出結果に基づいて、前記音声遅延時間及び前記映像遅延時間の少なくとも一方の調整を行う、ことを特徴とする請求項２に記載のコンテンツ再生装置。 Test signal generating means for generating a test audio signal in place of the audio signal and generating a test video signal having a predetermined time relationship with the test audio signal in place of the video signal;
Test voice detection means for detecting the arrival timing of the voice output by the voice output means based on the test voice signal to the viewing position;
Test video detection means for detecting display timing on the display means based on the test video signal;
The delay control unit adjusts at least one of the audio delay time and the video delay time based on detection results of the test audio detection unit and the test video detection unit. The content reproduction device described.
前記遅延制御手段は、前記操作入力手段に前記音声出力手段による音声出力のタイミングと前記表示手段による映像表示タイミングとの調整指令が入力された場合に、前記音声遅延時間及び前記映像遅延時間の少なくとも一方の調整を行う、ことを特徴とする請求項２又は３に記載のコンテンツ再生装置。 It further comprises operation input means for inputting an operation command,
The delay control unit is configured to input at least one of the audio delay time and the video delay time when an instruction to adjust the audio output timing by the audio output unit and the video display timing by the display unit is input to the operation input unit. 4. The content reproduction apparatus according to claim 2, wherein one adjustment is performed.
前記調整の結果である最終調整値を前記記録媒体の識別情報と関連付けて記録する遅延調整値記録手段を更に備え、
前記遅延制御手段は、前記最終調整値が記録されていた場合には、前記記録媒体に記録された前記最終調整値に基づいて、前記音声遅延時間及び前記映像遅延時間の少なくとも一方の調整を行う、
ことを特徴とする請求項４に記載のコンテンツ再生装置。 The content is recorded on a recording medium,
A delay adjustment value recording means for recording the final adjustment value as a result of the adjustment in association with the identification information of the recording medium;
When the final adjustment value is recorded, the delay control unit adjusts at least one of the audio delay time and the video delay time based on the final adjustment value recorded on the recording medium. ,
The content reproduction apparatus according to claim 4, wherein
前記音響調整手段は、前記個別チャンネル信号のそれぞれに対応して設けられ、直線位相型の有限インパルス応答フィルタを利用して、前記個別チャンネル信号に関する音響特性を調整する複数の個別音響特性調整手段を備え、
前記音声遅延手段は、前記個別チャンネル信号のそれぞれに対応して設けられ、前記個別チャンネル信号に対応する個別音声遅延時間だけ前記個別チャンネル信号を遅延させる複数の個別音声遅延手段を備える、
ことを特徴とする請求項１〜５のいずれか一項に記載のコンテンツ再生装置。 Further comprising individual channel signal generation means for generating an individual channel signal for each of a plurality of types of channels as the audio signal based on the audio content;
The acoustic adjustment means is provided corresponding to each of the individual channel signals, and uses a linear phase type finite impulse response filter to adjust a plurality of individual acoustic characteristic adjustment means for adjusting the acoustic characteristics of the individual channel signals. Prepared,
The audio delay means is provided corresponding to each of the individual channel signals, and includes a plurality of individual audio delay means for delaying the individual channel signal by an individual audio delay time corresponding to the individual channel signal.
The content reproduction device according to claim 1, wherein the content reproduction device is a content reproduction device.
前記音声コンテンツにおけるチャンネル指定に基づき、複数の信号に分離する前段分離手段と；
前記前段分離手段で分離された信号に基づいて、前記個別チャンネル信号を生成する後段分離手段と；を備え、
前記後段分離手段は、
前記前段分離手段で分離された信号のそれぞれにおける所定周波数未満の成分を、直線位相型の有限インパルス応答フィルタを利用して抽出する低周波成分抽出手段と；
前記低周波成分抽出手段により抽出された複数の信号の和を算出することにより、前記個別チャンネル信号における特定個別チャンネルの信号を生成する加算手段と；
前記特定個別チャンネル以外のチャンネルに対応して前記前段分離手段から出力された信号における所定周波数以上の成分を、直線位相型の有限インパルス応答フィルタを利用して抽出することにより、前記個別チャンネル信号における前記特定個別チャンネルの信号以外の信号を生成する高周波成分抽出手段と；を備える
ことを特徴とする請求項６に記載のコンテンツ再生装置。 The individual channel signal generating means includes
Pre-separation means for separating into a plurality of signals based on channel designation in the audio content;
A post-separation unit that generates the individual channel signal based on the signal separated by the pre-separation unit;
The latter stage separation means includes
Low frequency component extraction means for extracting a component having a frequency less than a predetermined frequency in each of the signals separated by the preceding separation means using a linear phase type finite impulse response filter;
Adding means for generating a signal of a specific individual channel in the individual channel signal by calculating a sum of a plurality of signals extracted by the low frequency component extracting means;
By extracting a component having a frequency equal to or higher than a predetermined frequency in a signal output from the preceding stage separation unit corresponding to a channel other than the specific individual channel by using a linear phase type finite impulse response filter, The content reproduction apparatus according to claim 6, further comprising: a high frequency component extraction unit that generates a signal other than the signal of the specific individual channel.
前記音声コンテンツに由来する音声信号に関する音響特性を、直線位相型の有限インパルス応答フィルタを利用して調整する音響特性調整工程と；
前記音声信号を音声遅延時間だけ遅延させる音声遅延工程と；
前記音響特性調整工程において音響特性が調整され、かつ、前記音声遅延工程において遅延された音声信号に基づいて再生された音声を、所定の音場空間へ向けて出力させる音声出力工程と；
前記音場空間における視聴位置において前記音声出力工程で出力された音声との同期用に定められた映像遅延時間だけ、前記映像コンテンツに由来する映像信号を遅延させる映像遅延工程と；
前記映像遅延工程において遅延された映像信号に基づいて再生された映像を表示させる表示工程と；
を備えることを特徴とするコンテンツ再生方法。 A content playback method for playing back content including audio content and video content,
An acoustic characteristic adjustment step of adjusting an acoustic characteristic related to an audio signal derived from the audio content using a linear phase type finite impulse response filter;
An audio delay step of delaying the audio signal by an audio delay time;
A sound output step of outputting a sound reproduced based on the sound signal delayed in the sound delay step and having a sound property adjusted in the sound property adjustment step toward a predetermined sound field space;
A video delay step of delaying a video signal derived from the video content by a video delay time determined for synchronization with the audio output in the audio output step at a viewing position in the sound field space;
A display step of displaying the video reproduced based on the video signal delayed in the video delay step;
A content reproduction method comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006317500A JP2008131589A (en) | 2006-11-24 | 2006-11-24 | Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006317500A JP2008131589A (en) | 2006-11-24 | 2006-11-24 | Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008131589A true JP2008131589A (en) | 2008-06-05 |
Family
ID=39556960
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006317500A Pending JP2008131589A (en) | 2006-11-24 | 2006-11-24 | Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2008131589A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017221407A1 (en) * | 2016-06-24 | 2017-12-28 | ヤマハ株式会社 | Synchronization setting device, distribution system, synchronization setting method, and program |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04326274A (en) * | 1991-04-25 | 1992-11-16 | Toshiba Corp | Magnetic recording and reproducing device |
| JP2001045600A (en) * | 1999-07-29 | 2001-02-16 | Kenwood Corp | Audio reproduction system and balance adjustment device |
| JP2002315099A (en) * | 2001-04-12 | 2002-10-25 | Alpine Electronics Inc | On-vehicle audio visual system |
| JP2002369300A (en) * | 2001-06-12 | 2002-12-20 | Pioneer Electronic Corp | Method and apparatus for reproducing audio signal |
| WO2005004537A2 (en) * | 2003-06-25 | 2005-01-13 | Harman International Industries, Incorporated | Bass management systems |
| JP2005027163A (en) * | 2003-07-04 | 2005-01-27 | Pioneer Electronic Corp | Audio data processing device, audio data processing method, its program, and recording medium recording program thereon |
| JP2005303967A (en) * | 2004-03-17 | 2005-10-27 | Sony Corp | Measuring apparatus, measuring method, and program |
| JP2005303945A (en) * | 2004-04-16 | 2005-10-27 | Sharp Corp | Surround-sound system |
| JP2006129372A (en) * | 2004-11-01 | 2006-05-18 | Kenwood Corp | Signal processor and sound reproduction system |
| JP2006310930A (en) * | 2005-04-26 | 2006-11-09 | Sony Corp | Acoustic apparatus, time delay calculation method, and time delay calculation program |
-
2006
- 2006-11-24 JP JP2006317500A patent/JP2008131589A/en active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04326274A (en) * | 1991-04-25 | 1992-11-16 | Toshiba Corp | Magnetic recording and reproducing device |
| JP2001045600A (en) * | 1999-07-29 | 2001-02-16 | Kenwood Corp | Audio reproduction system and balance adjustment device |
| JP2002315099A (en) * | 2001-04-12 | 2002-10-25 | Alpine Electronics Inc | On-vehicle audio visual system |
| JP2002369300A (en) * | 2001-06-12 | 2002-12-20 | Pioneer Electronic Corp | Method and apparatus for reproducing audio signal |
| WO2005004537A2 (en) * | 2003-06-25 | 2005-01-13 | Harman International Industries, Incorporated | Bass management systems |
| JP2007525075A (en) * | 2003-06-25 | 2007-08-30 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Bus management system |
| JP2005027163A (en) * | 2003-07-04 | 2005-01-27 | Pioneer Electronic Corp | Audio data processing device, audio data processing method, its program, and recording medium recording program thereon |
| JP2005303967A (en) * | 2004-03-17 | 2005-10-27 | Sony Corp | Measuring apparatus, measuring method, and program |
| JP2005303945A (en) * | 2004-04-16 | 2005-10-27 | Sharp Corp | Surround-sound system |
| JP2006129372A (en) * | 2004-11-01 | 2006-05-18 | Kenwood Corp | Signal processor and sound reproduction system |
| JP2006310930A (en) * | 2005-04-26 | 2006-11-09 | Sony Corp | Acoustic apparatus, time delay calculation method, and time delay calculation program |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017221407A1 (en) * | 2016-06-24 | 2017-12-28 | ヤマハ株式会社 | Synchronization setting device, distribution system, synchronization setting method, and program |
| JPWO2017221433A1 (en) * | 2016-06-24 | 2019-01-31 | ヤマハ株式会社 | Synchronization setting device, distribution system, synchronization setting method, and program |
| US10917465B2 (en) | 2016-06-24 | 2021-02-09 | Yamaha Corporation | Synchronization setting device and distribution system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104604254B (en) | Sound processing apparatus, method | |
| JP4327886B1 (en) | SOUND QUALITY CORRECTION DEVICE, SOUND QUALITY CORRECTION METHOD, AND SOUND QUALITY CORRECTION PROGRAM | |
| JP4679647B2 (en) | Video / audio playback apparatus and video / audio playback method | |
| WO2009107202A1 (en) | Acoustic signal processing device and acoustic signal processing method | |
| JP4844622B2 (en) | Volume correction apparatus, volume correction method, volume correction program, electronic device, and audio apparatus | |
| JP2008227595A (en) | Signal processing apparatus, signal processing method and program | |
| JP2005027163A (en) | Audio data processing device, audio data processing method, its program, and recording medium recording program thereon | |
| WO2006008865A1 (en) | Acoustic characteristic adjuster | |
| JP2007318604A (en) | Digital audio signal processor | |
| JP5931182B2 (en) | Apparatus, method and computer program for generating a stereo output signal for providing additional output channels | |
| JP4002548B2 (en) | Equalization circuit | |
| JP2001231090A (en) | Sub-woofer system | |
| JP2007158873A (en) | Voice correcting device | |
| JP2008131589A (en) | Content reproducing apparatus, method thereof, program thereof, and recording medium recorded with the program | |
| JP5032463B2 (en) | Stereo sound reproduction device and stereo sound reproduction program | |
| JP5316560B2 (en) | Volume correction device, volume correction method, and volume correction program | |
| US20130245798A1 (en) | Method and apparatus for signal processing based upon characteristics of music | |
| JP7004627B2 (en) | Video / audio playback system, video display device and video display method | |
| JP2008225474A (en) | Device and method for shaping a digital audio signal | |
| JP4943806B2 (en) | AUDIO DEVICE, ITS METHOD, PROGRAM, AND RECORDING MEDIUM | |
| JP2009206612A (en) | Audio apparatus, sound reproduction method, sound reproduction program and recording medium thereof | |
| JP2012027101A (en) | Sound playback apparatus, sound playback method, program, and recording medium | |
| JPH1141699A (en) | Acoustic processing circuit | |
| JP2006339694A5 (en) | ||
| KR100808201B1 (en) | Method for synchronizing audio/video data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090304 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110526 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110615 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111102 |