JPWO2011118135A1 - 送信装置、受信装置、送信方法および受信方法 - Google Patents

Abstract

本発明に係る送信装置（１００）は、３２ビット精度の音声データを取得し、取得した音声データの特徴を示す付加情報を音声データに付加することで、３２ビット精度の音声データと付加情報とを含む出力音声データを生成する音声入力部（１２０）と、音声入力部（１２０）によって生成された出力音声データに、当該出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、映像データの水平ブランク期間に、オーディオサンプルパケットを多重化する映像音声合成部（１３０）とを備える。

Description

本発明は、映像データおよび音声データを送信または受信する送信装置および受信装置に関し、特に、映像データの水平ブランク期間に音声データを送信する送信装置および送信方法、ならびに、映像データの水平ブランク期間に送信される音声データを受信する受信装置および受信方法に関する。

近年、高音質な音声データを送受信する装置および方法の開発が進められている。

例えば、ＢＤ（Ｂｌｕ−ｒａｙ Ｄｉｓｃ）などに記録された１サンプル当たり最大２４ビットの精度を持った音声データを、高音質化などを目的にした音声データの演算処理に伴い、最大３２ビットの精度でアナログ出力する装置の開発が進められている。例えば、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）規格に従った映像データおよび音声データの伝送技術の開発が進められている。

また、特許文献１には、複数チャンネルの音声データを送受信するデータ送信装置およびデータ受信装置が開示されている。特許文献１に記載のデータ送信装置は、ｎチャンネルで構成されるデータを、ｍ（ｎ≦ｍ）チャンネルのデータを格納可能なブロックに配するブロック化処理を行う。さらに、特許文献１に記載のデータ送信装置は、各ブロック内において、有効データが配されていないチャンネルを判別できる判別情報が含まれているようにして、所定の伝送フォーマットに合致した送信データストリームを生成し、送出する。これにより、複数チャンネルの音声データを送信することができるので、高音質な音声データの送受信が可能となる。

特開２００２−３３０１３３号公報

しかしながら、上記従来技術には、以下のような課題がある。

ＨＤＭＩなどの画像と音声の伝送規格においては、最大２４ビット精度までの伝送しか対応できず、例えば、ＨＤＭＩにおけるソース機器において３２ビット精度の音声データを生成する能力があっても、下位８ビットを削って伝送しなければならなかった。

また、特許文献１には、複数チャンネルの音声データを送受信する技術については記載されているが、音声データのビット精度については言及されていない。

そこで、本発明は、上記課題を解決するためになされたものであって、音声データのビット精度を低下させることなく、高い精度の音声データの送受信を行うことができる送信装置、受信装置、送信方法および受信方法を提供することを目的とする。

上記課題を解決するために、本願発明の一態様における送信装置は、音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを受信装置に送信する送信装置であって、３２ビット精度の音声データである第１音声データを取得し、取得した第１音声データの特徴を示す付加情報を前記第１音声データに付加することで、前記第１音声データと前記付加情報とを含む第１出力音声データを生成する音声入力部と、前記音声入力部によって生成された第１出力音声データに、前記第１出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する合成部とを備える。

本発明に係る送信装置、受信装置、送信方法および受信方法によれば、音声データのビット精度を低下させることなく、高い精度の音声データの送受信を行うことができる。

図１は、本発明の実施の形態に係る伝送システムの構成の一例を示すブロック図である。 図２は、本発明の実施の形態に係る送信装置が備える処理部に入出力されるデータの一例を示す図である。 図３は、本発明の実施の形態に係る受信装置が備える処理部に入出力されるデータの一例を示す図である。 図４Ａは、本発明の実施の形態に係る音声入力部に入力される入力音声信号の一例を示すタイミングチャートである。 図４Ｂは、本発明の実施の形態に係る音声入力部から出力される出力音声信号の一例を示すタイミングチャートである。 図５Ａは、本発明の実施の形態に係る映像音声合成部に入力される入力映像信号の一例を示すタイミングチャートである。 図５Ｂは、本発明の実施の形態に係る映像音声合成部に入力される入力映像信号の水平ブランク期間を示すタイミングチャートである。 図６Ａは、本発明の実施の形態に係る映像音声合成部から出力される映像音声信号の一例を示すタイミングチャートである。 図６Ｂは、本発明の実施の形態に係る映像音声合成部から出力される映像音声信号の水平ブランク期間を示すタイミングチャートである。 図７Ａは、従来のオーディオサンプルパケットのフォーマットの一例を示す図である。 図７Ｂは、従来のオーディオサンプルパケットの出力タイミングの一例を示すタイミングチャートである。 図８は、オーディオサンプルパケットの割り当ての一例を示す図である。 図９Ａは、本発明の実施の形態に係るオーディオサンプルパケットのフォーマットの一例を示す図である。 図９Ｂは、本発明の実施の形態に係るオーディオサンプルパケットの出力タイミングの一例を示すタイミングチャートである。 図１０は、本発明の実施の形態に係る送信装置の動作の一例を示すフローチャートである。 図１１は、本発明の実施の形態に係る受信装置の動作の一例を示すフローチャートである。 図１２Ａは、本発明の実施の形態の変形例に係るオーディオサンプルパケットのフォーマットの一例を示す図である。 図１２Ｂは、本発明の実施の形態の変形例に係るオーディオサンプルパケットの出力タイミングを示すタイミングチャートである。 図１３は、本発明の実施の形態の変形例に係るオーディオサンプルパケットの割り当ての一例を示す図である。

以下、本発明の実施の形態について、図面に基づいて詳細に説明する。

本発明の実施の形態に係る送信装置は、音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを送信する送信装置であって、３２ビット精度の音声データと付加情報とを含む出力音声データに、当該出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、映像データの水平ブランク期間に、生成したオーディオサンプルパケットを多重化する合成部を備えることを特徴とする。

また、本発明の実施の形態に係る受信装置は、音声データがパケット化されて生成されたオーディオサンプルパケットが、映像データの水平ブランク期間に多重化された映像音声データを送信装置から受信する受信装置であって、映像音声データからオーディオサンプルパケットと映像データとを分離し、分離したオーディオサンプルパケットから、３２ビット精度の音声データと付加情報とを含む入力音声データを復元する分離部を備え、当該分離部は、分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を読み出し、読み出したパケット種別情報が、オーディオサンプルパケットが３２ビット精度の音声データを含むことを示す場合に、３２ビット精度の入力音声データを復元することを特徴とする。

以下では、まず、本発明の実施の形態に係る送信装置と受信装置とを備える伝送システムの構成について説明する。

図１は、本発明の実施の形態に係る伝送システムの構成の一例を示すブロック図である。本発明の実施の形態に係る伝送システムは、ＨＤＭＩ規格に従って、映像データおよび音声データを伝送するシステムであり、具体的には、映像データの水平ブランク期間を利用して、音声データの伝送を行う。

図１に示すように、伝送システムは、送信装置１００と、受信装置２００とを備える。また、送信装置１００と受信装置２００とは、ＤＤＣ（Ｄｉｓｐｌａｙ Ｄａｔａ Ｃｈａｎｎｅｌ）信号線３００と、ＴＭＤＳ（Ｔｒａｎｓｉｔｉｏｎ Ｍｉｎｉｍｉｚｅｄ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌｉｎｇ）信号線３１０とによって接続されている。

図１に示すように、送信装置１００は、送信制御部１１０と、音声入力部１２０と、映像音声合成部１３０と、ＴＭＤＳ送信部１４０とを備える。

送信制御部１１０は、受信装置２００が３２ビット精度の音声データを処理することができるか否かを示す機器情報を取得する。そして、送信制御部１１０は、取得した機器情報に基づいて、音声入力部１２０と、映像音声合成部１３０と、ＴＭＤＳ送信部１４０との処理を制御する。

具体的には、送信制御部１１０は、受信装置２００の機器情報であるＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ）を、ＤＤＣ信号線３００を通じて取得する。ＥＤＩＤは、受信装置２００が何ビット精度の音声データを処理することができるかを示す情報が含まれる。例えば、ＥＤＩＤは、受信装置２００が３２ビット精度の音声データを処理することができるか否かを示す情報が含まれる。

したがって、この機器情報であるＥＤＩＤから、送信制御部１１０は、受信装置２００が３２ビット精度の音声データを受信する機能があるかないかを判定し、判定結果に基づいて、音声入力部１２０、映像音声合成部１３０およびＴＭＤＳ送信部１４０に対し、最適な制御を行う。具体的には、送信制御部１１０は、受信装置２００へ送信する音声データのビット精度、および、サンプリング周波数などを決定する。

音声入力部１２０は、３２ビット精度の音声データを取得し、取得した音声データの付加情報を音声データに付加することで、３２ビット精度の音声データと付加情報とを含む出力音声データを生成する。生成した出力音声データは、映像音声合成部１３０へ出力される。

具体的には、図２に示すように、音声入力部１２０は、ＳＣＬＫと、ＷＳと、ＳＤ［３：０］とを含む入力音声信号３２０を取得し、ＡＤＥＮと、ＡＤ［３９：０］とを含む出力音声信号３２１を出力する。

ＳＣＬＫは、音声信号のクロックを示す信号である。ＷＳは、サンプリング周波数を示す信号である。ＳＤ［３：０］は、入力音声データを示す信号である。ＡＤＥＮは、音声データが有効であるか無効であるかを示す信号である。ＡＤ［３９：０］は、付加情報が付加された音声データである出力音声データを示す信号である。

音声入力部１２０は、入力音声信号３２０として、ｎチャンネルの３２ビット精度の音声データを取得する。ここで、ｎは、１以上８以下である。つまり、音声入力部１２０は、１サンプリング期間（ＷＳの１周期）に３２ｂｉｔ×８ｃｈの音声データを取得することができる。

そして、音声入力部１２０は、１サンプリング期間に３２ビットの１チャンネル分の音声データに、８ビットの付加情報を加えることで、４０ビットの１チャンネル分の出力音声データを生成する。なお、ここでいう付加情報とは、Ｐｒｅａｍｂｌｅ情報、パリティ情報、サンプリングクロック情報、ユーザデータビット情報など、受信装置２００側で音声データ再生時に必要となる情報である。

音声入力部１２０は、同様にして８チャンネル分の出力音声データを生成し、出力音声信号３２１として、映像音声合成部１３０に出力する。なお、入力音声信号３２０および出力音声信号３２１の具体例については、後で説明する。

映像音声合成部１３０は、出力音声データに、当該出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成する。そして、映像音声合成部１３０は、映像データの水平ブランク期間に、生成したオーディオサンプルパケットを多重化する。

例えば、映像音声合成部１３０は、出力音声データをパケット化することでオーディオサンプルパケットを生成し、生成したオーディオサンプルパケットを、映像データの水平ブランク期間に出力することで、映像データとオーディオサンプルパケットとを多重化する。例えば、映像音声合成部１３０は、ｎチャンネルの出力音声データをｍチャンネルの出力音声データ毎にパケット化することで、少なくとも１つのオーディオサンプルパケットを生成し、生成した少なくとも１つのオーディオサンプルパケットを映像データの水平ブランク期間に出力する。ここで、ｍは、１以上６以下である。

さらに、映像音声合成部１３０は、オーディオサンプルパケットのヘッダに、当該オーディオサンプルパケットが３２ビット精度の音声データを含むことを示すパケット種別情報を書き込む。

このように、映像音声合成部１３０は、映像データの水平ブランク期間にオーディオサンプルパケットを多重化する。なお、オーディオサンプルパケットの構成の具体例については、後で説明する。

なお、映像音声合成部１３０には、入力映像信号３３０が入力される。図２に示すように、入力映像信号３３０は、ＰＣＬＫと、ＨＳＹＮＣと、ＶＳＹＮＣと、ＶＤ［２３：０］と、ＶＤＥＮとを含む。

ＰＣＬＫは、映像データの画素クロックを示す信号である。ＨＳＹＮＣは、映像データの水平同期信号である。ＶＳＹＮＣは、映像データの垂直同期信号である。ＶＤ［２３：０］は、映像データを示す信号である。ＶＤＥＮは、映像データが有効であるか無効であるかを示す信号である。

また、映像音声合成部１３０からは、多重化により生成された映像音声信号３３１が出力される。図２に示すように、映像音声信号３３１は、Ｔ＿ＰＣＬＫと、Ｔ＿ＨＳＹＮＣと、Ｔ＿ＶＳＹＮＣと、Ｔ＿ＶＤ［２３：０］と、Ｔ＿ＶＤＥＮとを含む。

Ｔ＿ＰＣＬＫは、映像データの画素クロックを示す信号である。Ｔ＿ＨＳＹＮＣは、映像データの水平同期信号である。Ｔ＿ＶＳＹＮＣは、映像データの垂直同期信号である。Ｔ＿ＶＤ［２３：０］は、映像データを示す信号である。Ｔ＿ＶＤＥＮは、映像データが有効であるか無効であるかを示す信号である。なお、後述するように、Ｔ＿ＶＤ［２３：０］は、映像データの水平ブランク期間では、映像データの代わりに出力音声データを示す信号になる。

ＴＭＤＳ送信部１４０は、映像音声合成部１３０によって生成された映像音声信号３３１を、差動アナログ信号に変換して、変換された差動アナログ信号を、ＴＭＤＳ信号線３１０を介して受信装置２００へ送信する。具体的には、ＴＭＤＳ送信部１４０は、映像音声信号３３１を８ビット毎にＴＭＤＳエンコードすることで、２ビット追加し、８ビットのデータを１０ビットのデータに変換する。ここでは、ＴＭＤＳ送信部１４０は、変換後のデータに含まれる０と１との個数が同じになるように、ビットを追加する。そして、ＴＭＤＳ信号線３１０は、ビット追加後の映像音声信号をシリアルデータに変換するとともに、差動アナログ信号に変換し、変換後の映像音声信号を送信する。

受信装置２００は、図１に示すように、受信制御部２１０と、音声出力部２２０と、映像音声分離部２３０と、ＴＭＤＳ受信部２４０とを備える。

受信制御部２１０は、映像音声分離部２３０によってオーディオサンプルパケットのヘッダから読み出されたパケット識別情報を取得し、取得したパケット識別情報が、オーディオサンプルパケットが３２ビット精度の音声データを含むことを示すか否かを判定する。そして、受信制御部２１０は、判定結果に基づいて、音声出力部２２０および映像音声分離部２３０の動作を制御する。

音声出力部２２０は、映像音声分離部２３０によって復元された入力音声データから付加情報を除くことで、３２ビット精度の音声データを出力する。具体的には、図３に示すように、音声出力部２２０は、ＡＤＥＮと、ＡＤ［３９：０］とを含む入力音声信号３４１を取得し、ＳＣＬＫと、ＷＳと、ＳＤ［３：０］とを含む出力音声信号３４０を出力する。なお、入力音声信号３４１は、送信装置１００の音声入力部１２０が出力する出力音声信号３２１と同じであり、出力音声信号３４０は、送信装置１００の音声入力部１２０が取得する入力音声信号３２０と同じである。

映像音声分離部２３０は、映像音声データからオーディオサンプルパケットと映像データとを分離し、分離したオーディオサンプルパケットから、３２ビット精度の音声データと付加情報とを含む入力音声データを復元する。例えば、映像音声分離部２３０は、映像音声データから、ｍ（１≦ｍ≦６）チャンネルの音声データがパケット化された少なくとも１つのオーディオサンプルパケットと、映像データとを分離し、分離した少なくとも１つのオーディオサンプルパケットから、ｎ（１≦ｎ≦８）チャンネルの入力音声データを復元する。

具体的には、映像音声分離部２３０は、図３に示すように、ＴＭＤＳ受信部２４０によって生成される映像音声信号３５１を取得する。映像音声信号３５１は、Ｔ＿ＰＣＬＫと、Ｔ＿ＨＳＹＮＣと、Ｔ＿ＶＳＹＮＣと、Ｔ＿ＶＤ［２３：０］と、Ｔ＿ＶＤＥＮとを含む。なお、映像音声信号３５１は、送信装置１００の映像音声合成部１３０が出力する映像音声信号３３１と同じである。

また、映像音声分離部２３０は、映像音声信号３５１の水平ブランク期間からオーディオサンプルパケットを読み出すことで、映像音声信号３５１をオーディオサンプルパケットと出力映像信号３５０とに分離する。出力映像信号３５０は、ＰＣＬＫと、ＨＳＹＮＣと、ＶＳＹＮＣと、ＶＤ［２３：０］と、ＶＤＥＮとを含む。なお、出力映像信号３５０は、送信装置１００の映像音声合成部１３０が取得する入力映像信号３３０と同じである。

ＴＭＤＳ受信部２４０は、ＴＭＤＳ信号線３１０を介して送信装置１００から送信される差動アナログ信号を受信し、受信した差動アナログ信号を映像音声信号３５１に変換する。具体的には、ＴＭＤＳ受信部２４０は、ＴＭＤＳ送信部１４０が行う処理と反対の処理を行う。つまり、ＴＭＤＳ受信部２４０は、受信した差動アナログ信号をパラレルデータに変換し、変換後のパラレルデータから１０ビット毎にＴＭＤＳデコードすることで、２ビットを除去し、映像音声信号３５１を復元する。したがって、映像音声信号３５１は、送信装置１００の映像音声合成部１３０によって生成された映像音声信号３３１と同じ信号である。

続いて、音声入力部１２０に入力される入力音声信号３２０および音声入力部１２０から出力される出力音声信号３２１について、図４Ａおよび図４Ｂを用いて説明する。なお、図４Ａは、本発明の実施の形態に係る音声入力部１２０に入力される入力音声信号３２０の一例を示すタイミングチャートである。また、図４Ｂは、本発明の実施の形態に係る音声入力部１２０から出力される出力音声信号３２１の一例を示すタイミングチャートである。

図４Ａに示すように、音声入力部１２０には、ＳＣＬＫと、ＷＳと、ＳＤ［０］〜ＳＤ［３］（図２に示すＳＤ［３：０］）とが入力される（３線式）。なお、ＳＤ［３：０］は、ＳＤ［０］〜ＳＤ［３］の４本のデータ線を意味し、音声入力部１２０には、１サンプリングクロックあたり、パラレルに４ビットのデータが入力される。

ＳＣＬＫは、音声データを示すＳＤ［３：０］に同期したクロックである。ＷＳは、ＳＣＬＫの６４クロック分を１周期とし、音声データのサンプリングクロックに相当する。

ＳＤ［０］〜ＳＤ［３］は、音声データを示す信号であり、ＳＣＬＫのクロックに同期し、ＷＳの１周期あたりに３２ｂｉｔ×８ｃｈのデータを伝送することができる。図４Ａに示すように、ＳＤ［０］は、第１チャンネル（Ｃｈ１）の３２ビットの音声データと、第２チャンネル（Ｃｈ２）の３２ビットの音声データとを示す音声信号である。なお、図４Ａに示す“１Ｄ０”は、第１チャンネルの０番目のビットを示し、“２Ｄ３１”は、第２チャンネルの３１番目のビットを示す。つまり、“ｐＤｑ”は、第ｐチャンネルのｑ番目のビットを示している。なお、本実施の形態において、ビットは、０番から数えるものとする。

同様に、ＳＤ［１］は、第３チャンネル（Ｃｈ３）の３２ビットの音声データと、第４チャンネル（Ｃｈ４）の３２ビットの音声データとを示す音声信号である。ＳＤ［２］は、第５チャンネル（Ｃｈ５）の３２ビットの音声データと、第６チャンネル（Ｃｈ６）の３２ビットの音声データとを示す音声信号である。ＳＤ［３］は、第７チャンネル（Ｃｈ７）の３２ビットの音声データと、第８チャンネル（Ｃｈ８）の３２ビットの音声データとを示す音声信号である。

音声入力部１２０は、図４Ａに示すような入力音声信号３２０を、図４Ｂに示すような出力音声信号３２１に変換して出力する。具体的には、音声入力部１２０は、１サンプリング期間に３２ビットのデータを含む音声データに、８ビットの付加情報を付加することで、４０ビットの出力音声データを生成する。

図４Ｂに示すように、ＡＤＥＮは、出力音声データの有効／無効を識別するための信号である。ＡＤ［３９：０］は、出力音声データを示す信号であり、８チャンネル分の３２ビット精度の音声データと、それぞれに付加された８ビットの付加情報とを含む８チャンネル分の４０ビット精度の出力音声データを示す信号である。ＡＤ［３９：０］は、ＡＤ［０］〜ＡＤ［３９］の４０本のデータ線を意味し、音声入力部１２０は、１サンプリングクロックあたり、パラレルに４０ビットのデータを出力することができる。

図４Ｂに示すように、音声入力部１２０は、４０ビットをパラレルに出力することができる。したがって、ＷＳ１周期あたりに、８ｃｈ分の出力音声データを多重化することができる。

なお、図４Ａに示すＳＣＬＫと、ＷＳと、ＳＤ［３：０］とは、図３に示す受信装置２００が備える音声出力部２２０から出力される出力音声信号３４０と同じである。また、図４Ｂに示すＡＤＥＮと、ＡＤ［３９：０］とは、図３に示す受信装置２００が備える音声出力部２２０に入力される入力音声信号３４１と同じである。

続いて、映像音声合成部１３０に入力される入力映像信号３３０について、図５Ａおよび図５Ｂを用いて説明する。なお、図５Ａは、本発明の実施の形態に係る映像音声合成部１３０に入力される入力映像信号３３０の一例を示すタイミングチャートである。また、図５Ｂは、図５Ａに示す入力映像信号３３０の水平ブランク期間を示すタイミングチャートである。

なお、本実施の形態では、一例として、入力映像信号３３０が、１フレームの周期が６０Ｈｚであり、１フレームあたりの有効映像データが縦１０８０ライン、横１９２０ラインである１０８０ｐと呼ばれるフォーマットに従った映像信号である場合について、説明する。

図５Ａに示すＨＳＹＮＣは、画像データに同期したＰＣＬＫの２２００周期分で、有効データとブランクデータとを合わせた１ライン分の周期を表す水平同期信号である。ＶＳＹＮＣは、有効ラインとブランクラインとを合わせた１１２５ライン分の周期を表す垂直同期信号である。

ＶＤＥＮは、画像データが有効データであるかどうかを示す信号であり、図５Ａおよび図５Ｂに示す例では、ＶＳＹＮＣの立下りを始点として、ＨＳＹＮＣの３７周期目から１１１６周期目までの間で、かつ、ＨＳＹＮＣの立下りを始点として、ＰＣＬＫの１４９周期目から２０６８周期目までの間で画像データが有効であることを示す。

すなわち、入力映像信号には、図５Ａに示すように、４５ライン分の垂直ブランク期間と、１０８０ライン分の有効画像期間とがあり、有効画像期間に映像データが含まれている。さらに具体的には、有効画像期間においても、図５Ｂに示すように、２８０画素クロック分の水平ブランク期間と、１９２０画素クロック分の有効画素期間とがあり、有効画素期間に映像データが含まれている。

なお、図５Ａに示すＶＤＥＮと、ＨＳＹＮＣと、ＶＳＹＮＣとは、図３に示す受信装置２００が備える映像音声分離部２３０から出力される出力映像信号３５０と同じである。

続いて、映像音声合成部１３０から出力される映像音声信号３３１について、図６Ａおよび図６Ｂを用いて説明する。なお、図６Ａは、本発明の実施の形態に係る映像音声合成部１３０から出力される映像音声信号３３１の一例を示すタイミングチャートである。また、図６Ｂは、図６Ａに示す映像音声信号３３１の水平ブランク期間を示すタイミングチャートである。

本実施の形態に係る送信装置１００は、映像データの水平ブランク期間に音声データを多重化する。つまり、映像音声合成部１３０は、入力された映像データを処理することなく、そのままＴＭＤＳ送信部１４０へ出力する。

したがって、図６Ａおよび図６Ｂに示すように、Ｔ＿ＰＣＬＫ、Ｔ＿ＨＳＹＮＣ、Ｔ＿ＶＳＹＮＣ、Ｔ＿ＶＤＥＮはそれぞれ、図５Ａおよび図５Ｂに示すＰＣＬＫ、ＨＳＹＮＣ、ＶＳＹＮＣ、ＶＤＥＮと同様のタイミングである。映像音声合成部１３０は、図６Ｂに示す水平ブランク期間に、２４本のデータ線（Ｔ＿ＶＤ［２３：０］）を利用して、映像データの代わりに音声データを出力する。

なお、図６Ａに示すＴ＿ＶＤＥＮと、Ｔ＿ＨＳＹＮＣと、Ｔ＿ＶＳＹＮＣとは、図３に示す受信装置２００が備える映像音声分離部２３０に入力される映像音声信号３５１と同じである。

ここで、従来の音声データを水平ブランク期間に多重化する方法について図７Ａ、図７Ｂおよび図８を用いて説明する。

図７Ａは、従来のオーディオサンプルパケットのフォーマットの一例を示す図である。オーディオサンプルパケットは、ヘッダ部とデータ部とを含む。

図７Ａに示すように、ヘッダ部は、ＨＢ０、ＨＢ１およびＨＢ２の３バイトのデータから構成される。なお、“ＨＢｎ”は、ヘッダのｎ番目を示している。従来のオーディオサンプルパケットでは、“ＨＢ０”には、“０ｘ０２”（１０進数で“２”）が書き込まれている。“０ｘ０２”は、オーディオサンプルパケットのデータが図７Ａに示すように構成されていることを示す値である。具体的には、“０ｘ０２”は、オーディオサンプルパケットのデータ部には、２４ビット精度の最大８チャンネル分の音声データが含まれていることを示す。

データ部は、ＰＢ０〜ＰＢ２７の２８バイトのデータから構成される。なお、“ＰＢｎ”は、パケットのｎ番目のデータであることを示している。また、“ＳＢｎ”は、サブパケットのｎ番目のデータであることを示している。つまり、図７Ａに示す例では、２８バイトのデータが、７バイト毎の４つのサブパケットから構成されている。

図７Ａに示すように、ＰＢ０〜ＰＢ６には、第１チャンネルの２４ビット精度の音声データと、第２チャンネルの２４ビット精度の音声データと、第１および第２チャンネルの音声データのそれぞれの付加データとが含まれる。具体的には、ＰＢ０〜ＰＢ２には、第１チャンネルの２４ビットのデータ（Ｌ．２７−Ｌ．４）が含まれ、ＰＢ３〜ＰＢ５には、第２チャンネルの２４ビットのデータ（Ｒ．２７−Ｒ．４）が含まれる。そして、ＰＢ６には、第１チャンネルの付加情報であるＰＬ、ＣＬ、ＵＬおよびＶＬと、第２チャンネルの付加情報であるＰＲ、ＣＲ、ＵＲおよびＶＲとが含まれる。

同様にして、ＰＢ７〜ＰＢ１３には、第３チャンネルおよび第４チャンネルの音声データと付加情報とが、ＰＢ１４〜ＰＢ２０には、第５チャンネルおよび第６チャンネルの音声データ付加情報とが、ＰＢ２１〜ＰＢ２７には、第７チャンネルおよび第８チャンネルの音声データ付加情報とがそれぞれ含まれる。

なお、ＰＬおよびＰＲは、チャンネル毎のパリティビット（Ｐｂｉｔ：ＰａｒｉｔｙＢｉｔ）、つまり、エラー訂正用に用いる誤り検出符号の一例である。具体的には、ＰＢ６に含まれるＰＬは、第１チャンネルの２４ビットのデータとＣＬ、ＵＬおよびＶＬとのためのパリティビットである。ＰＢ６に含まれるＰＲは、第２チャンネルの２４ビットのデータとＣＲ、ＵＲおよびＶＲとのためのパリティビットである。

ＣＬおよびＣＲは、オーディオサンプルパケットのデータ属性を示すチャンネルステイタスビット（Ｃｂｉｔ：ＣｈａｎｎｅｌＳｔａｔｕｓＢｉｔ）である。具体的には、ＣＬおよびＣＲは、１９２チャンネル分のＣｂｉｔを１セットとして、オーディオサンプルパケットがＬＰＣＭ（Ｌｉｎｅａｒ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）であるかどうか、サンプリング周波数およびビット精度などのデータ属性を示す。

ＵＬおよびＵＲは、ユーザデータビット（Ｕｂｉｔ：ＵｓｅｒＤａｔａＢｉｔ）である。本実施の形態に示すように３線式の場合、Ｕｂｉｔは、０である。

ＶＬおよびＶＲは、チャンネル毎のデータが有効であるか否かを示すバリッドビット（Ｖｂｉｔ：ＶａｌｉｄＢｉｔ）である。データが有効である場合、Ｖｂｉｔは、０である。

以上の図７Ａに示すような最大８チャンネルのデータ構造から構成されるオーディオサンプルパケットを、映像音声合成部１３０は、図７Ｂに示すように、映像データの水平ブランク期間（２８０画素クロックの期間）に多重化する。なお、水平ブランク期間は、Ｔ＿ＶＤＥＮがローレベルである期間である。

図７Ｂに示すように、映像音声合成部１３０は、水平ブランク期間の最初の５８画素クロックの期間には、音声データを出力しない。映像音声合成部１３０は、水平ブランク期間の画素クロック周期で５９クロック目からオーディオサンプルパケットを多重化する。具体的には、映像音声合成部１３０は、図８に示すような割り当て方法に基づいてオーディオサンプルパケットを多重化する。

図８は、オーディオサンプルパケットの割り当ての一例を示す図である。

Ｔ＿ＶＤ［２３：０］は、２４本のデータ線（Ｔ＿ＶＤ［０］〜Ｔ＿ＶＤ［２３］）を意味し、映像音声合成部１３０は、１サンプリングクロックあたり、パラレルに２４ビットのデータを出力することができる。例えば、映像音声合成部１３０が映像データを出力する場合は、すなわち、有効画素期間（Ｔ＿ＶＤＥＮがハイレベルである期間）では、ＲＧＢデータを８ビットずつパラレルに出力することができる。図８では、映像音声合成部１３０が音声データを出力する場合、すなわち、水平ブランク期間でオーディオサンプルパケットを多重化する場合について、説明する。

Ｔ＿ＶＤ［２］では、それぞれ８ビットのＨＢ０、ＨＢ１、ＨＢ２と、これらのエラー訂正用に用いる８ビットのパリティビット（ｐａｒｉｔｙｂｉｔｓ）とを合わせた３２ビットを、最下位ビット（ＬＳＢ：Ｌｅａｓｔ Ｓｉｇｎｉｆｉｃａｎｔ Ｂｉｔ）から順番に伝送する。

Ｔ＿ＶＤ［８］では、ＰＢ０［０］、ＰＢ０［２］、ＰＢ０［４］、ＰＢ０［６］という順番でＰＢ０からＰＢ６までを伝送する。つまり、Ｔ＿ＶＤ［８］では、ＰＢ０〜ＰＢ６の偶数ビットを伝送する。さらに、Ｔ＿ＶＤ［８］では、ＰＢ０〜ＰＢ６の偶数ビットの最後に、これらのエラー訂正用に用いるパリティビットを伝送する。なお、ＰＢ０［０］は、ＰＢ０の０番目のビットを、ＰＢ０［２］は、ＰＢ０の２番目のビットを示す。

Ｔ＿ＶＤ［１６］では、ＰＢ０［１］、ＰＢ０［３］、ＰＢ０［５］、ＰＢ０［７］という順番でＰＢ０からＰＢ６までを伝送する。つまり、Ｔ＿ＶＤ［１６］では、ＰＢ０〜ＰＢ６の奇数ビットを伝送する。さらに、Ｔ＿ＶＤ［１６］では、ＰＢ０〜ＰＢ６の奇数ビットの最後に、これらのエラー訂正用に用いるパリティビットを伝送する。

同様にして、Ｔ＿ＶＤ［９］とＴ＿ＶＤ［１７］とでは、ＰＢ７〜ＰＢ１３とこれらのパリティビットとを伝送する。Ｔ＿ＶＤ［１０］とＴ＿ＶＤ［１８］とでは、ＰＢ１４〜ＰＢ２０とこれらのパリティビットとを伝送する。Ｔ＿ＶＤ［１１］とＴ＿ＶＤ［１９］とでは、ＰＢ２１〜ＰＢ２７とこれらのパリティビットとを伝送する。

以上のようにして、図７Ａに示す従来のオーディオサンプルパケットは、映像データの水平ブランク期間に出力される。

本実施の形態では、オーディオサンプルパケットに含まれる音声データが３２ビット精度である。したがって、図９Ａに示すように、映像音声合成部１３０は、オーディオサンプルパケットのフォーマットを変更する。つまり、映像音声合成部１３０は、オーディオサンプルパケットが３２ビット精度の音声データを含むことを示すパケット種別情報を、オーディオサンプルパケットのヘッダに書き込む。

なお、本実施の形態では、音声データが３２ビット精度であっても、オーディオサンプルパケットのデータの枠組み（パケットの大きさ）は、従来のオーディオサンプルパケットと同じである。つまり、図９Ａに示すように、本実施の形態に係るオーディオサンプルパケットは、従来と同様に、ＨＢ０〜ＨＢ２から構成されるヘッダ部と、ＰＢ０〜ＰＢ２７から構成されるデータ部とから構成される。本実施の形態に係るオーディオサンプルパケットは、従来と比べて、ヘッダ部に書き込む情報と、データ部に書き込む音声データの割り当て方法とが異なっている。

具体的には、映像音声合成部１３０は、ＨＢ０に、新たなパケットタイプであることを示すＮｅｗ ＰａｃｋｅｔＴｙｐｅＶａｌｕｅを書き込む。より具体的には、映像音声合成部１３０は、従来、“０ｘ０２”（１０進数の“２”）を書き込んでいたＨＢ０に対し、新たなＨＢ０として、例えば、“０ｘ０Ｂ”（１０進数の“１１”）を書き込む。“０ｘ０Ｂ”は、Ｎｅｗ ＰａｃｋｅｔＴｙｐｅＶａｌｕｅの一例であり、オーディオサンプルパケットのデータ部には、３２ビット精度の６チャンネル分の音声データが含まれていることを示す。

また、図９Ａに示すように、ＰＢ０〜ＰＢ８には、第１チャンネルの３２ビット精度の音声データと、第２チャンネルの３２ビット精度の音声データと、第１および第２チャンネルの音声データのそれぞれの付加データとが含まれる。具体的には、ＰＢ０〜ＰＢ３には、第１チャンネルの３２ビットのデータ（Ｌ．０−Ｌ．３１）が含まれ、ＰＢ４〜ＰＢ７には、第２チャンネルの３２ビットのデータ（Ｒ．０−Ｒ．３１）が含まれる。そして、ＰＢ８には、第１チャンネルの付加情報であるＰＬ、ＣＬ、ＵＬおよびＶＬと、第２チャンネルの付加情報であるＰＲ、ＣＲ、ＵＲおよびＶＲとが含まれる。

同様にして、ＰＢ９〜ＰＢ１７には、第３チャンネルおよび第４チャンネルの音声データと付加情報とが、ＰＢ１８〜ＰＢ２６には、第５チャンネルおよび第６チャンネルの音声データと付加情報とがそれぞれ含まれる。なお、ＰＢ２７は、空きであり、他の情報を含んでもよい。

以上の図９Ａに示すような最大６ｃｈのデータから構成されるオーディオサンプルパケットを、映像音声合成部１３０は、図９Ｂに示すように、映像データの水平ブランク期間（２８０画素クロックの期間）に多重化する。

なお、８チャンネルの３２ビット精度の音声データが入力された場合、映像音声合成部１３０は、図９Ａに示すように、１つのオーディオサンプルパケットに３２ビット精度の音声データを６チャンネル分しか含めることができない。そこで、図９Ｂに示すように、映像音声合成部１３０は、３サンプル分の８チャンネルの音声信号をパケット化することで、４つのオーディオサンプルパケットを生成する。

つまり、映像音声合成部１３０は、第１サンプル（サンプルＮ）の第１〜第６チャンネルの出力音声データをパケット化することで、第１オーディオサンプルパケットを生成する。また、映像音声合成部１３０は、第１サンプルの第７および第８チャンネルと第２サンプル（サンプルＮ＋１）の第１〜第４チャンネルとの出力音声データをパケット化することで、第２オーディオサンプルパケットを生成する。さらに、映像音声合成部１３０は、第２サンプルの第５〜第８チャンネルと第３サンプル（サンプルＮ＋２）の第１および第２チャンネルとの出力音声データをパケット化することで、第３オーディオサンプルパケットを生成する。そして、映像音声合成部１３０は、第３サンプルの第３〜第８チャンネルの出力音声データをパケット化することで、第４オーディオサンプルパケットを生成する。

映像音声合成部１３０は、以上のようにして生成した第１〜第４オーディオサンプルパケットを、水平ブランク期間の画素クロック周期で５９クロック目から３２クロック毎に多重化する。なお、図９Ａに示すオーディオサンプルパケットは、音声データが２４ビット精度の場合と同様にして、図８に示すような割り当て方法を用いて、映像データの水平ブランク期間に多重化することができる。

なお、受信装置２００では、映像音声分離部２３０は、第１オーディオサンプルパケットから第１サンプル（サンプルＮ）の第１〜第６チャンネルの入力音声データを復元する。また、映像音声分離部２３０は、第２オーディオサンプルパケットから第１サンプルの第７およぶ第８チャンネルと第２サンプル（サンプルＮ＋１）の第１〜第４チャンネルとの入力音声データを復元する。さらに、映像音声分離部２３０は、第３オーディオサンプルパケットから第２サンプルの第５〜第８チャンネルと第３サンプル（サンプルＮ＋２）第１および第２チャンネルとの入力音声データを復元する。そして、映像音声分離部２３０は、第４オーディオサンプルパケットから第３サンプルの第３〜第８チャンネルの入力音声データを復元する。

ここで、本発明の実施の形態に係る送信装置１００および受信装置２００の動作について説明する。

図１０は、本発明の実施の形態に係る送信装置１００の動作の一例を示すフローチャートである。

まず、送信制御部１１０は、受信装置２００からＤＤＣ信号線３００を介して機器情報としてＥＤＩＤを取得する（Ｓ１０１）。そして、送信制御部１１０は、取得した機器情報が、受信装置２００が３２ビット精度の音声データを処理することができることを示しているか否かを判定する（Ｓ１０２）。

受信装置２００が３２ビット精度の音声データを処理することができる場合（Ｓ１０２でＹｅｓ）、映像音声合成部１３０は、３２ビット精度の音声データを含むオーディオサンプルパケットを生成する（Ｓ１０３）。そして、映像音声合成部１３０は、オーディオサンプルパケットのヘッダ部に、３２ビット精度の音声データを含むことを示すパケット種別情報（例えば、“０ｘ０Ｂ”）を書き込む（Ｓ１０４）。

例えば、まず、音声入力部１２０は、入力された８チャンネルの３２ビット精度の音声データに付加情報を付加することで、３２ビット精度の音声データと付加情報とを含む８チャンネルの出力音声データを生成し、映像音声合成部１３０へ出力する。映像音声合成部１３０は、３サンプル分の８チャンネルの出力音声データを６チャンネル毎にパケット化することで、４つのオーディオサンプルパケットを生成する。４つのオーディオサンプルパケットのヘッダ部にはそれぞれ、図９Ａに示すように、３２ビット精度であることを示すパケット種別情報が書き込まれている。

最後に、映像音声合成部１３０は、生成したオーディオサンプルパケットを映像データの水平ブランク期間に多重化する（Ｓ１０５）。例えば、図９Ｂに示すように、映像音声合成部１３０は、水平ブランク期間の５９クロック目から３２クロック毎に４つのオーディオサンプルパケットを多重化する。

また、受信装置２００が３２ビット精度の音声データを処理することができない場合（Ｓ１０２でＮｏ）、映像音声合成部１３０は、従来の精度（例えば、２４ビット精度）の音声データを含むオーディオサンプルパケットを生成する（Ｓ１０６）。そして、映像音声合成部１３０は、オーディオサンプルパケットのヘッダ部に、従来の精度の音声データを含むことを示すパケット種別情報（例えば、“０ｘ０２”）を書き込む（Ｓ１０７）。

なお、図１０には示していないが、多重化により生成された映像音声データは、ＴＭＤＳ送信部１４０によって差動アナログ信号に変換され、ＴＭＤＳ信号線３１０を介して受信装置２００に送信される。

図１１は、本発明の実施の形態に係る受信装置２００の動作の一例を示すフローチャートである。なお、図１１には示していないが、まず、送信装置１００から受信された差動アナログ信号は、ＴＭＤＳ受信部２４０によって映像音声データに変換される。

まず、映像音声分離部２３０は、映像音声データを映像データとオーディオサンプルパケットとに分離する（Ｓ２０１）。具体的には、映像音声分離部２３０は、映像音声データの水平ブランク期間からオーディオサンプルパケットを読み出すことで、映像データとオーディオサンプルパケットとを分離する。

次に、映像音声分離部２３０は、オーディオサンプルパケットに含まれる音声データが３２ビット精度であるか否かを判定する（Ｓ２０２）。具体的には、映像音声分離部２３０は、オーディオサンプルパケットのヘッダを解析することで、パケット種別情報を読み出し、読み出したパケット種別情報が、オーディオサンプルパケットが３２ビット精度の音声データを含むか否かを判定する。

音声データが３２ビット精度である場合（Ｓ２０２でＹｅｓ）、映像音声分離部２３０は、オーディオサンプルパケットから、３２ビット精度の音声データと付加情報とを含む入力音声データを復元する（Ｓ２０３）。そして、音声出力部２２０は、復元された入力音声データから付加情報を除くことで、３２ビット精度の音声データを出力する（Ｓ２０５）。

また、音声データが３２ビット精度でない場合（Ｓ２０２でＮｏ）、映像音声分離部２３０は、オーディオサンプルパケットから、従来のビット精度（例えば、２４ビット精度）の音声データと付加情報とを含む入力音声データを復元する（Ｓ２０４）。そして、音声出力部２２０は、復元された入力音声データから付加情報を除くことで、従来のビット精度の音声データを出力する（Ｓ２０５）。

以上のようにして、本発明の実施の形態に係る送信装置１００は、３２ビット精度の音声データをパケット化することでオーディオサンプルパケットを生成し、生成したオーディオサンプルパケットを映像データの水平ブランク期間に多重化する。このとき、送信装置１００は、オーディオサンプルパケットが、従来の２４ビット精度ではなく、３２ビット精度の音声データを含むことを示す新たなパケット種別情報を、オーディオサンプルパケットのヘッダ部に書き込む。

これにより、本発明の実施の形態に係る送信装置１００によれば、音声データのビット精度を低下させることなく、高い精度の音声データの送信を行うことができる。

また、送信装置１００は、受信装置２００から機器情報（例えば、ＥＤＩＤ）を取得し、取得した機器情報が、受信装置２００が３２ビット精度の音声データを処理することができることを示すか否かを判定し、受信装置２００が３２ビット精度の音声データを処理することができる場合に、３２ビット精度の音声データを含むオーディオサンプルパケットを生成する。受信装置２００が３２ビット精度の音声データを処理することができず、従来の２４ビット精度の音声データを処理することができる場合には、送信装置１００は、従来と同様にして２４ビット精度の音声データを含むオーディオサンプルパケットを生成する。

これにより、本発明の実施の形態に係る送信装置１００によれば、受信装置２００の処理性能に応じて、オーディオサンプルパケットに含める音声データのビット精度を決定することができるので、受信装置２００が確実に処理することのできるビット精度の音声データを受信装置２００へ送信することができる。

また、具体的には、送信装置１００は、最大８チャンネル分の３２ビット精度の音声データとそれぞれの付加情報とのうち、最大６チャンネル分の３２ビット精度の音声データとそれぞれの付加情報とをパケット化することで、従来のオーディオサンプルパケットと同じデータサイズのオーディオサンプルパケットを生成する。そして、送信装置１００は、映像データの水平ブランク期間を利用して、生成したオーディオサンプルパケットを多重化する。

より具体的には、送信装置１００は、３サンプル分の最大８チャンネルの３２ビット精度の音声データをパケット化することで、４つのオーディオサンプルパケットを生成する。そして、送信装置１００は、水平ブランク期間の５９画素クロック目から３２画素クロック毎に、生成したオーディオサンプルパケットを多重化する。

これにより、本発明の実施の形態に係る送信装置１００によれば、水平ブランク期間の最初の５８画素クロック期間を利用して他の情報を送信することができ、残りの水平ブランク期間を有効に利用してオーディオサンプルパケットを送信することができる。

また、本発明の実施の形態に係る受信装置２００は、映像音声データから、オーディオサンプルパケットと映像データとを分離し、分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を判定することで、オーディオサンプルパケットが３２ビット精度の音声データを含むか否かを判定する。そして、受信装置２００は、３２ビット精度の音声データを含む場合に、オーディオサンプルパケットから３２ビット精度の音声データと付加情報とを含む入力音声データを復元する。

これにより、本発明の実施の形態に係る受信装置２００によれば、音声データのビット精度を低下させることなく、高い精度の音声データの受信を行うことができる。

また、具体的には、受信装置２００は、最大６チャンネル分の３２ビット精度の音声データとそれぞれの付加情報とがパケット化されて生成されたオーディオサンプルパケットから、最大８チャンネル分の３２ビット精度の音声データとそれぞれの付加情報とを含む入力音声データを復元する。より具体的には、受信装置２００は、４つのオーディオサンプルパケットから、３サンプル分の最大８チャンネルの３２ビット精度の音声データを復元する。また、受信装置２００は、水平ブランク期間の５９画素クロック目から３２画素クロック毎に、オーディオサンプルパケットを読み出すことで、映像音声データから映像データと音声データとを分離する。

これにより、本発明の実施の形態に係る受信装置２００によれば、水平ブランク期間の最初の５８画素クロック期間を利用して他の情報を受信することができ、残りの水平ブランク期間を有効に利用してオーディオサンプルパケットを受信することができる。

以上、本発明に係る送信装置、受信装置、送信方法および受信方法について、実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を当該実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。

例えば、上記の実施の形態では、３２ビット精度の音声データを映像データの水平ブランク期間に多重化する例について説明したが、３２ビット精度より高いＮビット精度の音声データを映像データの水平ブランク期間に多重化してもよい。ここで、Ｎは、３２より大きく５３より小さい自然数である。以下では、一例として、Ｎ＝５２の場合について説明する。

図１２Ａは、本発明の実施の形態の変形例に係るオーディオサンプルパケットのフォーマットの一例を示す図である。

図１２Ａに示すように、映像音声合成部１３０は、ＨＢ０に、新たなパケットタイプであることを示すＮｅｗ ＰａｃｋｅｔＴｙｐｅＶａｌｕｅを書き込む。より具体的には、映像音声合成部１３０は、従来、“０ｘ０２”（１０進数の“２”）を書き込んでいたＨＢ０に対し、新たなＨＢ０として、例えば、“０ｘ０Ｃ”（１０進数の“１２”）を書き込む。“０ｘ０Ｃ”は、Ｎｅｗ ＰａｃｋｅｔＴｙｐｅＶａｌｕｅの一例であり、オーディオサンプルパケットのデータ部には、５２ビット精度の４チャンネル分の音声データが含まれていることを示す。

また、図１２Ａに示すように、ＰＢ０〜ＰＢ１３には、第１チャンネルの５２ビット精度の音声データと、第２チャンネルの５２ビット精度の音声データと、第１および第２チャンネルの音声データのそれぞれの付加データとが含まれる。具体的には、ＰＢ０〜ＰＢ６には、第１チャンネルの５２ビットのデータ（Ｌ．０−Ｌ．５１）が含まれ、ＰＢ６〜ＰＢ１２には、第２チャンネルの５２ビットのデータ（Ｒ．０−Ｒ．５１）が含まれる。そして、ＰＢ１３には、第１チャンネルの付加情報であるＰＬ、ＣＬ、ＵＬおよびＶＬと、第２チャンネルの付加情報であるＰＲ、ＣＲ、ＵＲおよびＶＲとが含まれる。

同様にして、ＰＢ１４〜ＰＢ２７には、第３チャンネルおよび第４チャンネルの音声データと付加情報とが含まれる。

以上の図１２Ａに示すような最大４ｃｈのデータから構成されるオーディオサンプルパケットを、映像音声合成部１３０は、図１２Ｂに示すように、映像データの水平ブランク期間（２８０画素クロックの期間）に多重化する。なお、図１２Ｂは、本発明の実施の形態の変形例に係るオーディオサンプルパケットの出力タイミングの一例を示すタイミングチャートである。

なお、８チャンネルの５２ビット精度の音声データが入力された場合、映像音声合成部１３０は、図１２Ａに示すように、１つのオーディオサンプルパケットに５２ビット精度の音声データを４チャンネル分しか含めることができない。そこで、図１２Ｂに示すように、映像音声合成部１３０は、３サンプル分の８チャンネルの音声信号をパケット化することで、６つのオーディオサンプルパケットを生成する。

つまり、映像音声合成部１３０は、第１サンプル（サンプルＮ）の第１〜第４チャンネルの出力音声データをパケット化することで、第１オーディオサンプルパケットを生成し、第１サンプルの第５〜第８チャンネルの出力音声データをパケット化することで、第２オーディオサンプルパケットを生成する。また、映像音声合成部１３０は、第２サンプル（サンプルＮ＋１）の第１〜第４チャンネルの出力音声データをパケット化することで、第３オーディオサンプルパケットを生成し、第２サンプルの第５〜第８チャンネルの出力音声データをパケット化することで、第４オーディオサンプルパケットを生成する。さらに、映像音声合成部１３０は、第３サンプル（サンプルＮ＋２）の第１〜第４チャンネルの出力音声データをパケット化することで、第５オーディオサンプルパケットを生成し、第３サンプルの第５〜第８チャンネルの出力音声データをパケット化することで、第６オーディオサンプルパケットを生成する。

なお、図１２Ａに示すオーディオサンプルパケットは、音声データが２４ビット精度の場合と同様にして、図８に示すような割り当て方法を用いて、映像データの水平ブランク期間に多重化することができる。

また、本発明の実施の形態の変形例に係る受信装置２００では、映像音声分離部２３０は、第１オーディオサンプルパケットから第１サンプル（サンプルＮ）の第１〜第４チャンネルの入力音声データを復元し、第２オーディオサンプルパケットから第１サンプルの第５〜第８チャンネルの入力音声データを復元する。また、映像音声分離部２３０は、第３オーディオサンプルパケットから第２サンプル（サンプルＮ＋１）の第１〜第４チャンネルの入力音声データを復元し、第２オーディオサンプルパケットから第２サンプルの第５〜第８チャンネルの入力音声データを復元する。また、映像音声分離部２３０は、第５オーディオサンプルパケットから第３サンプル（サンプルＮ＋２）の第１〜第４チャンネルの入力音声データを復元し、第６オーディオサンプルパケットから第３サンプルの第５〜第８チャンネルの入力音声データを復元する。

これにより、本発明の実施の形態の変形例に係る送信装置および受信装置によれば、３２ビット精度以上の高い精度の音声データの送受信を行うことができる。

また、上記の実施の形態では、映像データの水平ブランク期間においてオーディオサンプルパケットを多重化する際に、図８に示すように、２４本あるデータ線のうち９本のデータ線を用いている。つまり、残りの１５本のデータ線を利用し、同じ期間に複数のオーディオサンプルパケットを多重化してもよい。

図１３は、本発明の実施の形態の変形例に係るオーディオサンプルパケットの割り当ての一例を示す図である。図１３は、同一の期間に２つのオーディオサンプルパケットを多重化する例について示している。

図１３に示すように、映像音声合成部１３０は、Ｔ＿ＶＤ［２］、Ｔ＿ＶＤ［８］〜Ｔ＿ＶＤ［１１］およびＴ＿ＶＤ［１６］〜Ｔ＿ＶＤ［１９］を用いて第１オーディオサンプルパケットを出力し、Ｔ＿ＶＤ［３］、Ｔ＿ＶＤ［１２］〜Ｔ＿ＶＤ［１５］およびＴ＿ＶＤ［２０］〜Ｔ＿ＶＤ［２３］を用いて第２オーディオサンプルパケットを出力する。なお、オーディオサンプルパケットの出力に利用するデータ線は、この例に限られない。

また、映像音声合成部１３０は、水平ブランク期間の５９クロック目ではなく、他のクロックを最初のクロックとしてオーディオサンプルパケットを出力してもよい。また、複数のオーディオサンプルパケットを連続して出力せずに、パケットとパケットとの間にブランク期間を設けてもよく、あるいは、他のデータを送信してもよい。

また、水平ブランク期間に３サンプル分の音声データを多重化する構成について説明したが、４サンプル以上の音声データを多重化してもよい。

また、本発明の実施の形態に係る送信装置１００は、２４ビット精度の音声信号を取得し、取得した２４ビット精度の音声信号に、高音質化などの演算処理を行うことで、３２ビット精度の入力音声信号を生成してもよい。そして、音声入力部１２０は、生成した３２ビット精度の入力音声信号を取得してもよい。

また、本発明に係る送信装置および受信装置は、ＨＤＭＩ規格に従う必要はない。つまり、本発明に係る送信装置は、映像データを送信する際に、映像データの水平ブランク期間が存在すれば、当該水平ブランク期間を利用して、上述のようにして音声データを送信することができる。例えば、本発明に係る送信装置および受信装置は、ＤｉｓｐｌａｙＰｏｒｔ規格に従ってもよい。

また、本発明は、上述したように、送信装置、受信装置、送信方法および受信方法として実現できるだけではなく、本実施の形態の送信方法および受信方法をコンピュータに実行させるためのプログラムとして実現してもよい。また、当該プログラムを記録するコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体として実現してもよい。さらに、当該プログラムを示す情報、データまたは信号として実現してもよい。そして、これらプログラム、情報、データおよび信号は、インターネットなどの通信ネットワークを介して配信されてもよい。

また、本発明は、送信装置および受信装置を構成する構成要素の一部または全部を、１個のシステムＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）から構成してもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭおよびＲＡＭなどを含んで構成されるコンピュータシステムである。

例えば、本発明に係る送信機能を備える集積回路は、図１に示す送信制御部１１０と、音声入力部１２０と、映像音声合成部１３０と、ＴＭＤＳ送信部１４０とを備える。また、本発明に係る受信機能を備える集積回路は、図１に示す受信制御部２１０と、音声出力部２２０と、映像音声分離部２３０と、ＴＭＤＳ受信部２４０とを備える。

また、本発明は、音声入力部１２０と、映像音声合成部１３０とを備える映像音声合成装置、または、当該映像音声合成装置が備える処理部が実行する処理をステップとして含む映像音声合成方法として実現することもできる。あるいは、本発明は、音声出力部２２０と、映像音声分離部２３０とを備える映像音声分離装置、または、当該映像音声分離装置が備える処理部が実行する処理をステップとして含む映像音声分離方法として実現することもできる。

また、上記で用いた数字は、全て本発明を具体的に説明するために例示するものであり、本発明は例示された数字に制限されない。また、構成要素間の接続関係は、本発明を具体的に説明するために例示するものであり、本発明の機能を実現する接続関係はこれに限定されない。

さらに、上記の実施の形態は、ハードウェア及び／又はソフトウェアを用いて構成されるが、ハードウェアを用いる構成は、ソフトウェアを用いても構成可能であり、ソフトウェアを用いる構成は、ハードウェアを用いても構成可能である。

本発明に係る送信装置および受信装置は、例えば、ＨＤＭＩまたはＤｉｓｐｌａｙＰｏｒｔなど規格に基づくデジタルテレビ、デジタルビデオレコーダなどの家電機器に利用することができる。

１００ 送信装置
１１０ 送信制御部
１２０ 音声入力部
１３０ 映像音声合成部
１４０ ＴＭＤＳ送信部
２００ 受信装置
２１０ 受信制御部
２２０ 音声出力部
２３０ 映像音声分離部
２４０ ＴＭＤＳ受信部
３００ ＤＤＣ信号線
３１０ ＴＭＤＳ信号線
３２０、３４１ 入力音声信号
３２１、３４０ 出力音声信号
３３０ 入力映像信号
３３１、３５１ 映像音声信号
３５０ 出力映像信号

Claims (20)

1. 音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを受信装置に送信する送信装置であって、
   ３２ビット精度の音声データである第１音声データを取得し、取得した第１音声データの特徴を示す付加情報を前記第１音声データに付加することで、前記第１音声データと前記付加情報とを含む第１出力音声データを生成する音声入力部と、
   前記音声入力部によって生成された第１出力音声データに、前記第１出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する合成部とを備える
   送信装置。
2. 前記送信装置は、さらに、
   前記受信装置が３２ビット精度の音声データを処理することができるか否かを示す機器情報を取得する制御部を備え、
   前記音声入力部は、前記制御部が取得した機器情報が、前記受信装置が３２ビット精度の音声データを処理することができることを示す場合に、前記第１出力音声データを生成する
   請求項１記載の送信装置。
3. 前記送信装置は、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）規格に従って、前記受信装置と通信を行い、
   前記制御部は、ＤＤＣ（Ｄｉｓｐｌａｙ Ｄａｔａ Ｃｈａｎｎｅｌ）信号線を介して、前記受信装置から、ＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ）を前記機器情報として取得する
   請求項２記載の送信装置。
4. 前記音声入力部は、ｎ（１≦ｎ≦８）チャンネルの前記第１音声データを取得し、取得した第１音声データの特徴を示す付加情報を、対応する前記第１音声データに付加することで、ｎチャンネルの前記第１出力音声データを生成し、
   前記合成部は、ｎチャンネルの前記第１出力音声データをｍ（１≦ｍ≦６）チャンネルの前記第１出力音声データ毎にパケット化することで少なくとも１つの前記オーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記少なくとも１つのオーディオサンプルパケットを多重化する
   請求項１記載の送信装置。
5. 前記合成部は、前記映像データの水平ブランク期間の画素クロック周期で５９クロック目から、３２クロック毎に前記オーディオサンプルパケットを多重化する
   請求項４記載の送信装置。
6. 前記ｎ＝８、かつ、前記ｍ＝６であり、
   前記合成部は、３サンプル分の８チャンネルの前記第１出力音声データから４つの前記オーディオサンプルパケットを生成する
   請求項４記載の送信装置。
7. ３サンプル分の８チャンネルの前記第１出力音声データは、第１〜第３サンプルの第１〜第８チャンネルの前記第１出力音声データであり、
   ４つの前記オーディオサンプルパケットは、第１〜第４オーディオサンプルパケットであり、
   前記合成部は、前記第１サンプルの第１〜第６チャンネルの前記第１出力音声データをパケット化することで、前記第１オーディオサンプルパケットを生成し、前記第１サンプルの第７および第８チャンネルと前記第２サンプルの第１〜第４チャンネルとの前記第１出力音声データをパケット化することで、前記第２オーディオサンプルパケットを生成し、前記第２サンプルの第５〜第８チャンネルと前記第３サンプルの第１および第２チャンネルとの前記第１出力音声データをパケット化することで、前記第３オーディオサンプルパケットを生成し、前記第３サンプルの第３〜第８チャンネルの前記第１出力音声データをパケット化することで、前記第４オーディオサンプルパケットを生成する
   請求項６記載の送信装置。
8. 前記制御部が取得した機器情報が、前記受信装置が２４ビット精度の音声データを処理することができることを示す場合に、
   （ｉ）前記音声入力部は、取得した前記第１音声データの一部を取り除くことで２４ビット精度の音声データである第２音声データを生成し、生成した第２音声データの特徴を示す付加情報を前記第２音声データに付加することで、前記第２音声データと前記付加情報とを含む第２出力音声データを生成し、
   （ｉｉ）前記合成部は、前記音声入力部によって生成された第２出力音声データをパケット化することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する
   請求項２記載の送信装置。
9. 音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを受信装置に送信する送信装置であって、
   Ｎ（Ｎは、３２＜Ｎ＜５３を満たす自然数）ビット精度の前記音声データを取得し、取得した音声データの特徴を示す付加情報を前記音声データに付加することで、Ｎビット精度の前記音声データと前記付加情報とを含む出力音声データを生成する音声入力部と、
   前記音声入力部によって生成された出力音声データに、前記出力音声データがＮビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する合成部とを備える
   送信装置。
10. 音声データがパケット化されて生成されたオーディオサンプルパケットが、映像データの水平ブランク期間に多重化された映像音声データを送信装置から受信する受信装置であって、
    前記映像音声データから、前記オーディオサンプルパケットと前記映像データとを分離し、分離したオーディオサンプルパケットから、３２ビット精度の音声データである第１音声データと当該第１音声データの特徴を示す付加情報とを含む第１入力音声データを復元する分離部と、
    前記分離部によって復元された第１入力音声データから前記付加情報を除くことで、前記第１音声データを出力する音声出力部とを備え、
    前記分離部は、
    分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を読み出し、読み出したパケット種別情報が、前記オーディオサンプルパケットが３２ビット精度の音声データを含むことを示す場合に、前記第１入力音声データを復元する
    受信装置。
11. 前記分離部は、前記映像音声データから、ｍ（１≦ｍ≦６）チャンネルの前記第１音声データがパケット化された少なくとも１つの前記オーディオサンプルパケットと、前記映像データとを分離し、分離した少なくとも１つの前記オーディオサンプルパケットから、ｎ（１≦ｎ≦８）チャンネルの前記第１入力音声データを復元し、
    前記音声出力部は、ｎチャンネルの前記第１入力音声データから前記付加情報を除くことで、ｎチャンネルの前記第１音声データを出力する
    請求項１０記載の受信装置。
12. 前記分離部は、前記映像音声データの水平ブランク期間の画素クロック周期で５９クロック目から、３２クロック毎に前記オーディオサンプルパケットを読み出すことで、前記映像データと前記オーディオサンプルパケットとを分離する
    請求項１１記載の受信装置。
13. 前記ｎ＝８、かつ、前記ｍ＝６であり、
    前記分離部は、前記映像音声データから、４つの前記オーディオサンプルパケットと、前記映像データとを分離し、４つの前記オーディオサンプルパケットから３サンプル分の８チャンネルの前記第１入力音声データを復元する
    請求項１１記載の受信装置。
14. ４つの前記オーディオサンプルパケットは、第１〜第４オーディオサンプルパケットであり、
    ３サンプル分の８チャンネルの前記第１入力音声データは、第１〜第３サンプルの第１〜第８チャンネルの前記第１入力音声データであり、
    前記分離部は、前記第１オーディオサンプルパケットから前記第１サンプルの第１〜第６チャンネルの前記第１入力音声データを復元し、前記第２オーディオサンプルパケットから前記第１サンプルの第７および第８チャンネルと前記第２サンプルの第１〜第４チャンネルとの前記第１入力音声データを復元し、前記第３オーディオサンプルパケットから前記第２サンプルの第５〜第８チャンネルと前記第３サンプルの第１および第２チャンネルとの前記第１入力音声データを復元し、前記第４オーディオサンプルパケットから前記第３サンプルの第３〜第８チャンネルの前記第１入力音声データを復元する
    請求項１３記載の受信装置。
15. 前記パケット種別情報が、前記オーディオサンプルパケットが２４ビット精度の音声データを含むことを示す場合に、
    （ｉ）前記分離部は、前記オーディオサンプルパケットと前記映像データとを分離し、分離したオーディオサンプルパケットから、２４ビット精度の音声データである第２音声データと当該第２音声データの特徴を示す付加情報とを含む第２入力音声データを復元し、
    （ｉｉ）前記音声出力部は、前記合成部によって復元された第２入力音声データから前記付加情報を除くことで、前記第２音声データを出力する
    請求項１０記載の受信装置。
16. 音声データがパケット化されて生成されたオーディオサンプルパケットが、映像データの水平ブランク期間に多重化された映像音声データを送信装置から受信する受信装置であって、
    前記映像音声データから、前記オーディオサンプルパケットと前記映像データとを分離し、分離したオーディオサンプルパケットから、Ｎ（Ｎは、３２＜Ｎ＜５３を満たす自然数）ビット精度の音声データと当該音声データの特徴を示す付加情報とを含む入力音声データを復元する分離部と、
    前記分離部によって復元された入力音声データから前記付加情報を除くことで、Ｎビット精度の音声データを出力する音声出力部とを備え、
    前記分離部は、
    分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を読み出し、読み出したパケット種別情報が、前記オーディオサンプルパケットがＮビット精度の音声データを含むことを示す場合に、前記入力音声データを復元する
    受信装置。
17. 音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを受信装置に送信する送信方法であって、
    前記受信装置から機器情報を取得し、取得した機器情報が、前記受信装置が３２ビット精度の音声データを処理することができることを示すか否かを判定する判定ステップと、
    ３２ビット精度の音声データである第１音声データを取得し、前記判定ステップにおいて、前記受信装置が３２ビット精度の音声データを処理することができると判定した場合に、前記第１音声データの特徴を示す付加情報を前記第１音声データに付加することで、前記第１音声データと前記付加情報とを含む第１出力音声データを生成する音声入力ステップと、
    前記音声入力ステップにおいて生成された第１出力音声データに、前記第１出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する合成ステップとを含む
    送信方法。
18. 音声データがパケット化されて生成されたオーディオサンプルパケットが、映像データの水平ブランク期間に多重化された映像音声データを送信装置から受信する受信方法であって、
    前記映像音声データから、前記オーディオサンプルパケットと前記映像データとを分離し、分離したオーディオサンプルパケットから、３２ビット精度の音声データである第１音声データと当該第１音声データの特徴を示す付加情報とを含む第１入力音声データを復元する分離ステップと、
    前記分離ステップにおいて復元された第１入力音声データから前記付加情報を除くことで、前記第１音声データを出力する音声出力ステップとを含み、
    前記分離ステップでは、
    分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を読み出し、読み出したパケット種別情報が、前記オーディオサンプルパケットが３２ビット精度の音声データを含むことを示す場合に、前記第１入力音声データを復元する
    受信方法。
19. 音声データを映像データの水平ブランク期間に多重化することで生成した映像音声データを受信装置に送信する集積回路であって、
    ３２ビット精度の音声データである第１音声データを取得し、取得した第１音声データの特徴を示す付加情報を前記第１音声データに付加することで、前記第１音声データと前記付加情報とを含む第１出力音声データを生成する音声入力部と、
    前記音声入力部によって生成された第１出力音声データに、前記第１出力音声データが３２ビット精度の音声データを含むことを示すパケット種別情報を付加することでオーディオサンプルパケットを生成し、前記映像データの水平ブランク期間に、前記オーディオサンプルパケットを多重化する合成部とを備える
    集積回路。
20. 音声データがパケット化されて生成されたオーディオサンプルパケットが、映像データの水平ブランク期間に多重化された映像音声データを送信装置から受信する集積回路であって、
    前記映像音声データから、前記オーディオサンプルパケットと前記映像データとを分離し、分離したオーディオサンプルパケットから、３２ビット精度の音声データである第１音声データと当該第１音声データの特徴を示す付加情報とを含む第１入力音声データを復元する分離部と、
    前記分離部によって復元された第１入力音声データから前記付加情報を除くことで、前記第１音声データを出力する音声出力部とを備え、
    前記分離部は、
    分離したオーディオサンプルパケットのヘッダに含まれるパケット種別情報を読み出し、読み出したパケット種別情報が、前記オーディオサンプルパケットが３２ビット精度の音声データを含むことを示す場合に、前記第１入力音声データを復元する
    集積回路。

Images