JP6514649B2 - Data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method - Google Patents
Data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method Download PDFInfo
- Publication number
- JP6514649B2 JP6514649B2 JP2015562939A JP2015562939A JP6514649B2 JP 6514649 B2 JP6514649 B2 JP 6514649B2 JP 2015562939 A JP2015562939 A JP 2015562939A JP 2015562939 A JP2015562939 A JP 2015562939A JP 6514649 B2 JP6514649 B2 JP 6514649B2
- Authority
- JP
- Japan
- Prior art keywords
- audio
- field
- data
- subpacket
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000005540 biological transmission Effects 0.000 title claims description 103
- 238000000034 method Methods 0.000 title claims description 41
- 230000000153 supplemental effect Effects 0.000 claims description 38
- 230000001771 impaired effect Effects 0.000 claims description 17
- 238000004458 analytical method Methods 0.000 claims description 2
- UHZZMRAGKVHANO-UHFFFAOYSA-M chlormequat chloride Chemical compound [Cl-].C[N+](C)(C)CCCl UHZZMRAGKVHANO-UHFFFAOYSA-M 0.000 claims 2
- 230000005236 sound signal Effects 0.000 description 33
- 238000010586 diagram Methods 0.000 description 21
- 238000000926 separation method Methods 0.000 description 18
- 230000009977 dual effect Effects 0.000 description 10
- 208000029257 vision disease Diseases 0.000 description 6
- 206010047571 Visual impairment Diseases 0.000 description 5
- 230000004393 visual impairment Effects 0.000 description 5
- 208000016354 hearing loss disease Diseases 0.000 description 4
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000032041 Hearing impaired Diseases 0.000 description 1
- GJWAPAVRQYYSTK-UHFFFAOYSA-N [(dimethyl-$l^{3}-silanyl)amino]-dimethylsilicon Chemical compound C[Si](C)N[Si](C)C GJWAPAVRQYYSTK-UHFFFAOYSA-N 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/233—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4343—Extraction or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
本発明は、データ送受信方法及び装置に関し、さらに詳細には、同じコンテンツに関する複数のオーディオデータを送受信する、データ送信装置、データ受信装置、データ送受信システム、データ送信方法及びデータ受信方法に関する。 The present invention relates to a data transmission / reception method and apparatus, and more particularly to a data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method for transmitting and receiving a plurality of audio data relating to the same content.
最近、マルチメディア環境が駆逐されながら多様なデータ送信のための高速有線インタフェース規格が提案されている。例えば、ＨＤＭＩ（登録商標）、ＭＨＬは、多様なフォーマットの映像データ、オーディオ信号、制御信号の送信規格を規定する。 Recently, high-speed wired interface standards for various data transmissions have been proposed while the multimedia environment is being overwhelmed. For example, HDMI (registered trademark) and MHL define transmission standards of video data, audio signals, and control signals of various formats.
しかしながら、従来のオーディオ信号送信規格は、視覚障害者のためのオーディオデータや、コンテンツに対する多国語からなるオーディオデータを送信するなどのインタフェース規格を提示できなかった。 However, conventional audio signal transmission standards have not been able to present interface standards such as transmitting audio data for visually impaired persons or audio data composed of multiple languages for content.
そのため、ソース装置とシンク装置との間に同じコンテンツと関連した複数のオーディオデータを送受信できるインタフェース規格の必要性が提起される。 This raises the need for an interface standard that can transmit and receive multiple audio data associated with the same content between the source device and the sink device.
本発明は、上述した必要性によって案出されたものであって、本発明の目的は、ソース装置とシンク装置との間に同じコンテンツに関連した複数のオーディオデータを送受信できるインタフェース規格を提供することにある。 The present invention is devised by the above-mentioned needs, and an object of the present invention is to provide an interface standard capable of transmitting and receiving a plurality of audio data related to the same content between a source device and a sink device. It is.
上記の目的を達成すべく、本発明の一実施の形態にかかる、データ送信装置は、第１サブパケット及び第２サブパケットを含むパケットを生成するパケット生成部と、前記生成されたパケットをデータ受信装置に送信する送信部とを備え、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 In order to achieve the above object, a data transmission apparatus according to an embodiment of the present invention includes a packet generation unit that generates a packet including a first subpacket and a second subpacket, and data of the generated packet. And a transmitter for transmitting data to the receiver, wherein the first subpacket and the second subpacket include different audio data for the first content.
このとき、前記第１サブパケットは、非障害者のためのオーディオデータを含み、前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことができる。 At this time, the first subpacket may include audio data for a non-disabled person, and the second subpacket may include audio data for a visually impaired person.
また、前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 Also, the first subpacket and the second subpacket may include audio data of different languages.
また、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 The first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータでありうる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in the packet may be common audio data for the first content and the second content.
また、前記パケットは、前記第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含み、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 Also, the packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
上記の目的を達成すべく、本発明の一実施の形態にかかる、データ受信装置は、データ送信装置から第１サブパケット及び第２サブパケットを含むパケットを受信する受信部と、前記受信された第１サブパケット及び前記第２サブパケットをパーシングするパーシング部とを備え、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 In order to achieve the above object, a data receiving apparatus according to an embodiment of the present invention includes a receiving unit for receiving a packet including a first subpacket and a second subpacket from a data transmitting apparatus; And a parsing unit that parses a first subpacket and the second subpacket, wherein the first subpacket and the second subpacket include different audio data for the first content.
また、前記第１サブパケットは、非障害者のためのオーディオデータを含み、前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことができる。 Also, the first subpacket may include audio data for a non-disabled person, and the second subpacket may include audio data for a visually impaired person.
また、前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 Also, the first subpacket and the second subpacket may include audio data of different languages.
このとき、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 At this time, the first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータでありうる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in the packet may be common audio data for the first content and the second content.
また、前記パケットは、前記第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含み、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 Also, the packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
上記の目的を達成すべく、本発明の一実施の形態にかかる、データ送受信システムは、第１サブパケット及び第２サブパケットを含むパケットを生成してデータ受信装置に送信するデータ送信装置と、前記データ送信装置から前記パケットを受信するデータ受信装置とを備え、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 In order to achieve the above object, a data transmitting and receiving system according to an embodiment of the present invention generates a packet including a first subpacket and a second subpacket and transmits the packet to a data receiving device; And a data receiving device for receiving the packet from the data transmitting device, wherein the first subpacket and the second subpacket include different audio data for the first content.
上記の目的を達成すべく、本発明の他の一実施の形態にかかる、データ送信装置は、オーディオメタデータパケットを生成するパケット生成部と、
前記生成されたオーディオメタデータパケットをデータ受信装置に送信する送信部とを備え、前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。
In order to achieve the above object, according to another embodiment of the present invention, a data transmission apparatus includes a packet generation unit that generates an audio metadata packet;
And a transmitter configured to transmit the generated audio metadata packet to the data receiving apparatus, wherein a header of the generated audio metadata packet is a 3D audio field (3D) indicating whether or not the 3D audio sample packet is transmitted. Audio Field).
また、前記生成されたオーディオメタデータパケットのヘッダは、送信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the generated audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) representing number information of the audio stream to be transmitted.
また、前記生成されたオーディオメタデータパケットのヘッダは、送信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 In addition, the header of the generated audio metadata packet may further include a number of views field indicating number information of different contents to be transmitted.
また、前記生成されたオーディオメタデータパケットのペイロード（ｐａｙｌｏａｄ）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the generated audio metadata packet may be a sub-stream of a multi-stream audio sample packet or a sub-stream of a multi-stream one bit audio sample packet. An audio metadata descriptor field may be included that represents metadata for the packet.
また、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and a multiview indicating whether audio data corresponding to left eye or right eye image in multiview is included. Field (Multivew Field), Language Code Valid Field representing the presence or absence of language identification for audio data (Language Code Valid Field), Auxiliary Audio Valid Field representing the presence or absence of auxiliary audio data (Supplemental Audio Valid Field), Main audio data and the above auxiliary audio Premix auxiliary audio field (pre-indicates presence or absence of premix with data) at least one of an ixed Supplemental Audio Field), a Supplemental Audio Type Field representing a type of the supplemental audio data, and a language code field representing a language code for the audio data Can.
上記の目的を達成すべく、本発明の他の一実施の形態にかかる、データ受信装置は、データ送信装置からオーディオメタデータパケットを受信する受信部と、前記受信されたオーディオメタデータパケットをパーシングするパーシング部とを備え、前記受信されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 To achieve the above object, a data receiving apparatus according to another embodiment of the present invention includes a receiving unit that receives an audio metadata packet from a data transmitting apparatus, and parsing the received audio metadata packet. And a header of the received audio metadata packet includes a 3D audio field indicating presence or absence of transmission of the 3D audio sample packet.
また、前記オーディオメタデータパケットのヘッダは、受信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) indicating number information of the audio stream to be received.
また、前記オーディオメタデータパケットのヘッダは、受信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include a number of views field indicating number information of different contents to be received.
また、前記オーディオメタデータパケットのペイロード（ｐａｙｌｏａｄ）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the audio metadata packet may be a meta for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. It may include an audio metadata descriptor field representing data.
また、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and a multiview indicating whether audio data corresponding to left eye or right eye image in multiview is included. Field (Multivew Field), Language Code Valid Field representing the presence or absence of language identification for audio data (Language Code Valid Field), Auxiliary Audio Valid Field representing the presence or absence of auxiliary audio data (Supplemental Audio Valid Field), Main audio data and the above auxiliary audio Premix auxiliary audio field (pre-indicates presence or absence of premix with data) at least one of an ixed Supplemental Audio Field), a Supplemental Audio Type Field representing a type of the supplemental audio data, and a language code field representing a language code for the audio data Can.
上記の目的を達成すべく、本発明の他の一実施の形態にかかる、データ送受信システムは、オーディオメタデータパケットを生成してデータ受信装置に送信するデータ送信装置と、前記データ送信装置から前記オーディオメタデータパケットを受信するデータ受信装置とを備え、前記オーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 In order to achieve the above object, according to another embodiment of the present invention, there is provided a data transmitting / receiving system for generating an audio metadata packet and transmitting it to a data receiving apparatus; And a data receiving apparatus for receiving an audio metadata packet, wherein a header of the audio metadata packet includes a 3D audio field indicating presence / absence of transmission of the 3D audio sample packet.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ送信装置は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成する生成部と、データ受信装置に前記ディスプレイ識別情報を送信する送信部とを備え、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 According to still another embodiment of the present invention, there is provided a data transmission device including: a generation unit generating display identification information including feature information supported by a sink device with respect to audio data; And a transmitter for transmitting the display identification information to the receiving device, the display identification information including a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
また、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports combining of the main audio and the supplementary audio, whether the sink device supports the supplementary audio A supplemental audio support field representing the language, a language support field representing whether the sink device supports audio data of a plurality of languages, the sink device for multi-view content Multiview audio support field indicating whether to support multistream audio data At least at least among a field), a maximum stream count field representing the number of maximum audio streams that can be handled by the sink device, and an audio descriptor number field representing the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can contain one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ受信装置は、データ送信装置から、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を受信する受信部と、前記受信されたディスプレイ識別情報を分析する分析部とを備え、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 To achieve the above object, a data receiving apparatus according to still another embodiment of the present invention receives, from a data transmitting apparatus, display identification information including feature information supported by a sink apparatus with respect to audio data. A receiver and an analyzer for analyzing the received display identification information, wherein the display identification information is a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device. Including.
また、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports combining of the main audio and the supplementary audio, whether the sink device supports the supplementary audio A supplemental audio support field representing the language, a language support field representing whether the sink device supports audio data of a plurality of languages, the sink device for multi-view content Multiview audio support field indicating whether to support multistream audio data At least at least among a field), a maximum stream count field representing the number of maximum audio streams that can be handled by the sink device, and an audio descriptor number field representing the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can contain one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ送受信システムは、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成して、データ受信装置に送信するデータ送信装置と、前記データ送信装置から前記ディスプレイ識別情報を受信して分析するデータ受信装置とを備え、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 To achieve the above object, a data transmitting and receiving system according to still another embodiment of the present invention generates display identification information including feature information supported by a sink device for audio data, and receives the data receiving device. And a data receiving device for receiving and analyzing the display identification information from the data transmitting device, wherein the display identification information is for characteristics of main audio and auxiliary audio supported by the sink device. Includes main / auxiliary audio feature fields that represent information.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ送信方法は、第１サブパケット及び第２サブパケットを含むパケットを生成するステップと、前記生成されたパケットをデータ受信装置に送信するステップとを含み、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 According to still another embodiment of the present invention, there is provided a data transmission method comprising: generating a packet including a first subpacket and a second subpacket; and generating the generated packet. Transmitting to a data receiving apparatus, wherein the first subpacket and the second subpacket contain different audio data for the first content.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ受信方法は、データ送信装置から第１サブパケット及び第２サブパケットを含むパケットを受信するステップと、前記受信された第１サブパケット及び前記第２サブパケットをパーシングするステップとを含み、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 In order to achieve the above object, according to still another embodiment of the present invention, there is provided a data reception method comprising: receiving a packet including a first subpacket and a second subpacket from a data transmitting device; Parsing the first subpacket and the second subpacket, wherein the first subpacket and the second subpacket include different audio data for the first content.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ送信方法は、オーディオメタデータパケットを生成するステップと、前記生成されたオーディオメタデータパケットをデータ受信装置に送信するステップとを含み、前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 According to still another embodiment of the present invention, there is provided a data transmission method comprising: generating an audio metadata packet; and transmitting the generated audio metadata packet to a data receiving apparatus. And the header of the generated audio metadata packet includes a 3D audio field representing the presence or absence of transmission of the 3D audio sample packet.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ受信方法は、データ送信装置からオーディオメタデータパケットを受信するステップと、前記受信されたオーディオメタデータパケットをパーシングするステップとを含み、前記受信されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 According to still another embodiment of the present invention, there is provided a data receiving method comprising: receiving an audio metadata packet from a data transmitting apparatus; and parsing the received audio metadata packet. And a header of the received audio metadata packet includes a 3D audio field indicating presence or absence of transmission of the 3D audio sample packet.
上記の目的を達成すべく、本発明のさらに他の一実施の形態にかかる、データ送信方法は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成するステップと、データ受信装置に前記ディスプレイ識別情報を送信するステップとを含み、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 According to still another embodiment of the present invention, there is provided a data transmission method comprising: generating display identification information including feature information supported by a sink device for audio data; and receiving data Transmitting the display identification information to a device, the display identification information including main / auxiliary audio characteristic fields representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
上記の目的を達成すべく、本発明の一実施の形態にかかる、データ受信方法は、データ送信装置から、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を受信するステップと、前記受信されたディスプレイ識別情報を分析するステップとを含み、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 In order to achieve the above object, a data receiving method according to an embodiment of the present invention comprises the steps of: receiving, from a data transmitting device, display identification information including feature information supported by a sink device for audio data; Analyzing the received display identification information, the display identification information including main / auxiliary audio characteristic fields representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
以上のような本発明の多様な実施の形態によれば、本発明は、ソース装置とシンク装置との間に同じコンテンツに関連した複数のオーディオデータを送受信できるインタフェース規格を提供する。 According to various embodiments of the present invention as described above, the present invention provides an interface standard capable of transmitting and receiving a plurality of audio data related to the same content between a source device and a sink device.
以下、本発明の好ましい実施の形態を添付した図面を参照して詳細に説明する。本発明を説明するに当たって、関連した公知の機能又は構成についての具体的な説明が本発明の要旨を不明確にする恐れがあると判断される場合には、その詳細な説明を省略する。そして、後述する用語は、本発明での機能を考慮して定義された用語であり、これは、ユーザ、操作者の意図又は慣例などによって変わりうる。したがって、その定義は、本明細書全般にわたる内容に基づいて行わなければならない。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the description of the present invention, when it is determined that specific descriptions of related known functions or configurations may obscure the gist of the present invention, the detailed description will be omitted. And, the terms described below are terms defined in consideration of the function of the present invention, which may be changed according to the intention or practice of the user or the operator. Therefore, the definition should be made based on the contents throughout the present specification.
本発明は、本発明の技術的思想と均等な範囲でＨＤＭＩ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）、ＭＨＬ（Ｍｏｂｉｌｅ Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｌｉｎｋ）規格のような多様な有線インタフェース送信規格に採用されることができるので、本発明の権利範囲は、これと類似の有線インタフェース送信規格までに及ぼす。 The present invention can be adopted in various wired interface transmission standards such as High Definition Multimedia Interface (HDMI) and Mobile High-Definition Link (MHL) standards within the scope equivalent to the technical idea of the present invention. The scope of the present invention extends to a wired interface transmission standard similar to this.
本明細書は、下記の文献を参照する。 The present specification refers to the following documents.
ＩＴＵ−Ｒ ＢＳ．２１５９−４（０５／２０１２）、家庭内多チャンネルサウンド技術と放送アプリケーション（Ｍｕｌｔｉ ｃｈａｎｎｅｌ ｓｏｕｎｄ ｔｅｃｈｎｏｌｏｇｙ ｉｎ ｈｏｍｅ ａｎｄ ｂｒｏａｄｃａｓｔｉｎｇ ａｐｐｌｉｃａｔｉｏｎｓ）
ＳＭＰＴＥ、ＳＭＰＴＥ ２０３６−２：２００８、「ＵＨＤＴＶ−音声特徴とプログラム製作のための音声チャネルマッピング（ＵＨＤＴＶ−Ａｕｄｉｏ ｃｈａｒａｃｔｅｒｉｓｔｉｃｓ ａｎｄ ａｕｄｉｏ ｃｈａｎｎｅｌ ｍａｐｐｉｎｇ ｆｏｒ ｐｒｏｇｒａｍ ｐｒｏｄｕｃｔｉｏｎ）」、２００８
ＩＥＣ，ＩＥＣ ６２５７４ ｅｄ １．０、「音声、ビデオそしてマルチメディアシステム−多チャンネル音声の一般的チャネル割り当て（Ａｕｄｉｏ，ｖｉｄｅｏ ａｎｄ ｍｕｌｔｉｍｅｄｉａ ｓｙｓｔｅｍｓ−Ｇｅｎｅｒａｌ ｃｈａｎｎｅｌ ａｓｓｉｇｎｍｅｎｔ ｏｆ ｍｕｌｔｉｃｈａｎｎｅｌ ａｕｄｉｏ）」、２０１１年４月７日
ITU-R BS. 2159-4 (05/2012), Multi-channel sound technology in home and broadcasting applications
SMPTE, SMPTE 2036-2: 2008, "UHDTV-Audio characteristics and audio channel mapping for program production", 2008
IEC, IEC 62574 ed 1.0, "Audio, video and multimedia systems-General channel assignment of multichannel audio", 7 April 2011
次の表１は、本明細書において使用する用語を簡略に説明している。
図１は、シングルオーディオストリームとマルチオーディオストリームを示す図である。 FIG. 1 is a diagram showing a single audio stream and a multi audio stream.
図１（Ａ）に示すように、シングルオーディオストリームは、少なくとも一つのビデオデータに対して複数のオーディオデータが存在し、これらのオーディオデータが一つのシングルストリームとして送信される場合である。シングルストリームでは、すべてのストリームデータが同じパケットストリームＩＤを共有するようにパケット化される。 As shown in FIG. 1A, in a single audio stream, a plurality of audio data exists for at least one video data, and these audio data are transmitted as one single stream. In single stream, all stream data is packetized so as to share the same packet stream ID.
図１（Ｂ）に示すように、マルチオーディオストリームは、多数のシングルＡＶストリームが送信される場合である。マルチオーディオストリームでは、唯一のパケットストリームＩＤが各シングルＡＶストリームに割り当てられる多数のシングル−ＡＶストリーム集合が存在する。多数のシングルＡＶストリームのビデオデータは、互いに独立である。 As shown in FIG. 1B, the multi audio stream is a case where a large number of single AV streams are transmitted. In multi-audio streams, there are multiple single-AV stream sets in which only one packet stream ID is assigned to each single AV stream. The video data of many single AV streams are independent of each other.
マルチオーディオストリームの各オーディオストリームは、最大２個のオーディオチャネルを送信する。そして、シングルオーディオストリームと関連する。例えば、シングルビューモードにおいて各オーディオは、デフォルトビデオストリームに接続され、デュアルビューモードにおいてオーディオは、左側のイメージや右側のイメージ（または両方とも）に接続されることができる。また、次のような一つ以上の補助オーディオオプションを送信できる。すなわち、画面分離タギング（Ｓｐｌｉｔ−ｓｃｒｅｅｎ ｔａｇｇｉｎｇ）、言語表示（Ｌａｎｇｕａｇｅ ｉｎｄｉｃａｔｉｏｎ）、視覚／聴覚障害者のためのオーディオ表示（ｉｎｄｉｃａｔｉｏｎ ｏｆ ａｕｄｉｏ ｆｏｒ ｖｉｓｕａｌｌｙ／ｈｅａｒｉｎｇ ｉｍｐａｉｒｅｄ）がそれである。 Each audio stream of the multi-audio stream transmits up to two audio channels. And associated with a single audio stream. For example, in the single view mode, each audio may be connected to the default video stream, and in the dual view mode audio may be connected to the left image and / or the right image. You can also send one or more auxiliary audio options, such as: That is, Split-screen tagging, Language indication, and Indication of audio for visual / hearing impaired.
画面分離（Ｓｐｌｉｔ Ｓｃｒｅｅｎ）とは、二つ以上のウィンドウに対してソース装置により互いに異なるオーディオデータがタギングされ識別される視聴オプション（ｖｉｅｗｉｎｇ ｏｐｔｉｏｎ）を意味する。画面分離は、ＰＩＰ視聴方式（ｐｉｃｔｕｒｅ−ｉｎ−ｐｕｃｔｕｒｅ ｖｉｅｗｉｎｇ）、クイックプレビュー視聴方式（ｑｕｉｃｋ−ｐｒｅｖｉｅｗ）、マルチスクリーンゲーム（ｍｕｌｔｉ−ｓｃｒｅｅｎ ｇａｍｅ）などで使用される。ここで、ウィンドウとは、シンク装置のスクリーンの一領域上にディスプレイされる、区別されるディスプレイイメージを意味する。 Split Screen refers to a viewing option in which different audio data are tagged and identified by the source device for two or more windows. Screen separation is used in PIP viewing method (picture-in-pucture viewing), quick preview viewing method (quick-preview), multi-screen game (multi-screen game), and the like. Here, the window means a distinguished display image displayed on an area of the screen of the sink device.
画面分離（またはマルチウィンドウも同じ用語として使用されることができる）は、マルチオーディオと共に使用される選択的な構成になることができる。画面分離モードは、シンク装置で画面が分離される構成を意味し、オーディオストリームをタギングし、特定のウィンドウにマッピングする。 Screen separation (or multi-window can also be used as the same term) can be a selective configuration used with multi-audio. The screen separation mode refers to a configuration in which the screen is separated by the sink device, and an audio stream is tagged and mapped to a specific window.
図２は、ソース装置がシンク装置にデュアルウィンドウ及び画面分離に対するマルチオーディオを送信する示す図である。 FIG. 2 shows that the source device sends multi-audio for dual window and screen separation to the sink device.
図２の（Ａ）は、マルチスクリーンに各々に対するオーディオデータを送信する実施の形態であり、図２の（Ｂ）は、クイックプレビュー視聴またはＰＩＰ視聴による複数のオーディオデータを送信する実施の形態であり、図２の（Ｃ）は、マルチスクリーンゲームによる複数のオーディオデータを送信する実施の形態を示す。シンク装置のユーザは、望みのオーディオを選択して聴取できる。 FIG. 2A shows an embodiment of transmitting audio data for each of multiple screens, and FIG. 2B shows an embodiment of transmitting a plurality of audio data by quick preview viewing or PIP viewing. FIG. 2C shows an embodiment of transmitting a plurality of audio data in a multi-screen game. The user of the sink device can select and listen to the desired audio.
図３は、前記画面分離支援情報を表示するためのシンク装置とソース装置との間のデータ送受信を概括的に示した図である。 FIG. 3 is a diagram schematically showing data transmission and reception between the sink device and the source device for displaying the screen separation support information.
ソース装置３１０は、ベンダー−特定インフォフレーム（Ｖｅｎｄｏｒ−Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｆｒａｍｅ）、マルチオーディオサンプルパケット（Ｍｕｌｔｉ−Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）、マルチオーディオメタデータパケット（Ｍｕｌｔｉ−Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）をシンク装置に送信する。
The
マルチオーディオサンプルパケットは、複数のオーディオストリームを含む。マルチオーディオメタデータパケットは、各オーディオストリームに対する設定を表示する。これは、ビデオストリームと関連し、補助オーディオ情報を運搬できる。ベンダー−特定インフォフレームは、送信されるコンテンツのマルチビュータイプを表示する。具体的な実施の形態については後述する。 The multi audio sample packet includes a plurality of audio streams. The multi-audio metadata packet displays the settings for each audio stream. It is associated with the video stream and can carry auxiliary audio information. The vendor-specific info frame indicates the multiview type of the content to be transmitted. Specific embodiments will be described later.
シンク装置３２０は、拡張されたデバイス性能レジスタ（Ｅｘｔｅｎｄｅｄ Ｄｅｖｉｃｅ Ｃａｐａｂｉｌｉｔｙ Ｒｅｇｉｓｔｅｒ）をソース装置に送信して、シンク装置が支援するマルチオーディオモード情報を知らせる。具体的な実施の形態については後述する。
The
一方、マルチオーディオは、補助オーディオトラック（例えば、多数言語、視覚的障害のためのオーディオ説明、または聴覚的障害のためのクリーンオーディオ）の送信を支援する。この場合に、最大１６個のオーディオストリームが同時に送信されることができる。これについても具体的な説明は後述する。 Multi-audio, on the other hand, supports the transmission of auxiliary audio tracks (e.g., multiple languages, audio descriptions for visual impairment, or clean audio for auditory impairment). In this case, up to 16 audio streams can be transmitted simultaneously. A specific description of this will be described later.
ＴＭＤＳシグナリングとエンコーディング
データプラットホームパケット
３Ｄオーディオサンプルパケット
３Ｄオーディオは、スピーカーが３Ｄ空間上において３Ｄオーディオ規格（ｅ．ｇ．１０．２ｃｈ、２２．２ｃｈ、３０．２ｃｈ等）別に決まった位置に配置されることのできるオーディオとして定義される。３Ｄオーディオサンプルパケットは、９個から３２個のオーディオチャネルを有する一つのオーディオサンプルから構成されている。
3D
３Ｄオーディオストリームは、３２オーディオチャネル（またはそれ以上）までを含み、データ島区間で連続的なパケットを介して送信される。各パケットは、８オーディオチャネルまで含む。サブパケットの構成は、シーケンス番号とヘッダにあるサンプルプレゼントビット（ｓａｍｐｌｅ＿ｐｒｅｓｅｎｔ ｂｉｔｓ）により判断される。 The 3D audio stream includes up to 32 audio channels (or more) and is transmitted via continuous packets in data islands. Each packet contains up to 8 audio channels. The configuration of the subpacket is determined by the sequence number and the sample present bits (sample_present bits) in the header.
シーケンス番号フィールド（ｓｅｑｕｅｎｃｅ＿ｎｕｍｂｅｒ）：現在パケットの順序を表す。多数３Ｄオーディオサンプルパケットがシングル３Ｄオーディオサンプルを含むから、このフィールドは、パケット順序を正確に識別するために必要である。 Sequence number field (sequence_number): Indicates the order of the current packet. This field is necessary to correctly identify the packet order, since many 3D audio sample packets contain a single 3D audio sample.
他のヘッダフィールドとサブパケット構造は、ＭＨＬ２．０明細書において表されるオーディオサンプルパケットと一致する。
マルチオーディオサンプルパケット
マルチオーディオサンプルパケットは、各オーディオサンプルが独立的にオーディオストリームと関連した４個のオーディオサンプルを含むことができる。ソース装置が４個以上の独立的オーディオストリームを同時に送信するとき、こういう連続的なオーディオストリームは、続くマルチオーディオサンプルパケットシリーズにより送信される。パケットヘッダで定義されたシーケンス番号（ｓｅｑｕｅｎｃｅ＿ｎｕｍｂｅｒ）は、各々のマルチオーディオサンプルパケットを識別し、パケットの整列内で現在パケットの順序を示す。サブパケットの構成は、シーケンス番号とヘッダにあるサンプルプレゼントビット（ｓａｍｐｌｅ ｐｒｅｓｅｎｔ ｂｉｔｓ）により判断される。これについては、マルチオーディオデータパケット化で詳細に説明される。
Multi-Audio Sample Packets Multi-audio sample packets may include four audio samples, each audio sample being independently associated with an audio stream. When the source device transmits four or more independent audio streams simultaneously, these continuous audio streams are transmitted by the following multi audio sample packet series. The sequence number (sequence_number) defined in the packet header identifies each multi-audio sample packet and indicates the current packet order within the packet order. The configuration of the subpacket is determined by the sequence number and sample present bits in the header. This is described in detail in Multi-Audio Data Packetization.
各々のサブパケット（またはオーディオストリーム）のために、マルチオーディオメタデータパケット（Ｍｕｌｔｉ−Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）にあるディスクリプタフィールド（ｄｅｓｃｒｉｐｔｏｒ ｆｉｅｌｄ）は、ビューモード（すなわち、シングル−ビューまたはマルチ−ビュー）、及び選択的情報（例えば、画面分離タギング、言語コード、視覚的障害のためのオーディオ等）を説明する。これらは、後で詳細に説明される。 For each subpacket (or audio stream), the descriptor field in the Multi-Audio Metadata Packet is in view mode (ie single-view or multi-view), and Describe selective information (eg, screen separation tagging, language code, audio for visual impairment, etc.). These will be described in detail later.
シーケンス番号フィールド（ｓｅｑｕｅｎｃｅ＿ｎｕｍｂｅｒ）：ソース装置からシンク装置に送信するための４個以上のオーディオストリームがあるとき、現在マルチオーディオサンプルパケットのシーケンス番号を表す。仮に、このフィールドが０に設定されると、そのパケットは、該当サブパケットにおいて各々第１番目の４個のオーディオストリームを含むことができる。仮に、このフィールドが１に設定されると、そのパケットは、該当サブパケットにおいて各々第２番目の４個のオーディオストリームセットを含むことができる。類似の方法で、パケットは、このフィールドが２または３に設定されるとき、第３番目または第４番目の４個のオーディオストリームセットを各々含む。シーケンス番号が０であるサブパケット０で処理されるオーディオストリームは、デフォルト（ｄｅｆａｕｌｔ）オーディオストリームとして指定される。
Sequence number field (sequence_number): Indicates the sequence number of the current multi-audio sample packet when there are four or more audio streams to be transmitted from the source device to the sink device. If this field is set to 0, the packet may include the first four audio streams in the corresponding subpacket. If this field is set to 1, the packet may include the second four audio stream sets in the corresponding subpacket. In a similar manner, when the field is set to 2 or 3, the packet contains the third or fourth set of four audio streams respectively. The audio stream processed by
ストリームプレゼントフィールド（ｓｔｒｅａｍ＿ｐｒｅｓｎｔ．ｓｐＸ）：サブパケットＸがストリームＸのオーディオサンプルを含んでいるかどうかを示す。 Stream present field (stream_presnt.spX): Indicates whether subpacket X contains stream X audio samples.
ストリームフラットフィールド（ｓｔｒｅａｍ＿ｆｌａｔ．ｓｐＸ）：サブパケットＸがストリームＸの「フラットライン（ｆｌａｔｌｉｎｅ）」サンプルを表しているかどうかを示す。ｓｔｒｅａｍ＿ｐｒｅｓｅｎｔ．ｓｐＸが設定されるときだけ有効である。 Stream flat field (stream_flat.spX): Indicates whether subpacket X represents a "flatline" sample of stream X. stream_present. It is valid only when spX is set.
他のヘッダフィールドとサブパケット構造は、ＭＨＬ２．０スペックにおいて表されるオーディオサンプルパケットと一致する。
図４は、前記マルチオーディオサンプルパケットのペイロードが送信される状況を示す図である。 FIG. 4 is a view showing a state in which the payload of the multi audio sample packet is transmitted.
図４に示すように、４個のマルチオーディオサンプルパケットが送信される場合、１６個のオーディオストリームを運搬できる。シーケンス番号は、２ビットからなっているので、最大１６個のオーディオストリームが運搬されることができる。 As shown in FIG. 4, 16 audio streams can be carried when 4 multi-audio sample packets are transmitted. Since the sequence number consists of 2 bits, up to 16 audio streams can be carried.
３Ｄオーディオメタデータパケット
アクティブ（ａｃｔｉｖｅ）３Ｄオーディオデータを説明する補助データ（Ａｎｃｉｌｌａｒｙ ｄａｔａ）は、３Ｄオーディオメタデータパケットを使用して送信される。ソース装置が３Ｄオーディオサンプルパケットを送信できる場合、ソース装置は、常に正確な３Ｄオーディオメタデータパケットを、少なくとも二つのビデオフィールドごとに一回送信する。
3D Audio Metadata Packets Ancillary data describing active 3D audio data is transmitted using 3D audio metadata packets. If the source device can send 3D audio sample packets, the source device always sends an accurate 3D audio metadata packet once every at least two video fields.
次は、３Ｄオーディオメタデータパケットを示す。
マルチオーディオメタデータパケット（Ｍｕｌｔｉ−Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）
アクティブマルチオーディオストリームを説明する補助データ（ｓｕｐｐｌｅｍｅｎｔａｒｙ ｄａｔａ）は、マルチオーディオメタデータパケットを使用して送信される。このパケットは、ビュー種類とマルチオーディオサンプルパケットから移される各々のオーディオストリームのための補助的オーディオ選択事項を説明するために使用される。
Multi-Audio Metadata Packet
Supplementary data describing the active multi-audio stream is sent using multi-audio metadata packets. This packet is used to describe view types and ancillary audio choices for each audio stream transferred from the multi audio sample packet.
ソース装置がマルチオーディオサンプルパケットを送信できる場合、ソース装置は、常に正確なマルチストリームオーディオメタデータパケットを、少なくとも二つのビデオフィールド当たりの一回ずつ送信する。 If the source device can send multi-audio sample packets, the source device always sends accurate multi-stream audio metadata packets once per at least two video fields.
次は、マルチオーディオメタデータパケットを示す。
ビュー種類フィールド（ＭＡ＿Ｖｉｅｗ＿Ｔｙｐｅ）：シングルビューまたはマルチビューのようなマルチオーディオストリームの関連したビューモードを示す。下記の表を参考にしてほしい。 View type field (MA_View_Type): Indicates an associated view mode of a multi audio stream such as single view or multi view. Please refer to the following table.
シーケンス番号フィールド（Ｓｅｑｕｅｎｃｅ＿Ｎｕｍｂｅｒ）：パケット、または現在マルチオーディオメタデータパケットのシーケンス番号を表す。このフィールドは、最高４個の互いに異なるマルチオーディオメタデータパケットを識別するために使用される。このフィールドは、各マルチオーディオメタデータパケットを同じシーケンス番号を有するマルチオーディオサンプルパケットに接続する。 Sequence Number Field (Sequence_Number): Indicates the sequence number of a packet or a current multi-audio metadata packet. This field is used to identify up to four different multi-audio metadata packets. This field connects each multi-audio metadata packet to multi-audio sample packets having the same sequence number.
オーディオストリーム個数フィールド（Ｎｕｍ＿Ａｕｄｉｏ＿Ｓｔｒｅａｍｓ：マルチオーディオサンプルパケットにより送信されたオーディオストリームの総個数を表す。 Audio stream number field (Num_Audio_Streams: Indicates the total number of audio streams transmitted by multi-audio sample packets.
画面分離有効フィールド（ＳＣ＿Ｖａｌｉｄ）：仮に、１に設定される場合、画面分離タギングは支援を受け、画面分離構成フィールドは、次の７ビットで詳細化される。仮に、０に設定される場合、画面分離タギングは支援を受けないか、または詳細化されず、次の７ビットは、他の使用のために残される。 Screen separation valid field (SC_Valid): If set to 1, the screen separation tagging is assisted and the screen separation configuration field is refined with the next 7 bits. If set to 0, screen separation tagging is not assisted or refined and the next 7 bits are left for other use.
画面分離種類フィールド（Ｓｐｌｉｔ＿Ｓｃｒｅｅｎ＿Ｃｏｎｆｉｇ）：現在ディスクリプタにより表されるオーディオストリームに関連した画面分離種類を示す。選択可能な画面分離種類は、下記の表１３に羅列されている。このフィールドは、ＳＣ＿有効＝１のときだけ有効である。 Screen separation type field (Split_Screen_Config): Indicates the screen separation type associated with the audio stream currently represented by the descriptor. The selectable screen separation types are listed in Table 13 below. This field is valid only when SC_valid = 1.
マルチオーディオディスクリプタフィールド（ＭＡ＿Ｄｅｓｃｒｉｐｔｏｒ＿Ｘ）：該当マルチオーディオサンプルパケットのサブパケットＸにより送信されるオーディオストリームの特性を表す。表１３は、マルチオーディオディスクリプタの詳細な構造を示す。
以下記の表は、マルチオーディオディスクリプタを示す。
画面分離タグフィールド（Ｓｐｌｉｔ＿Ｓｃｒｅｅｎ＿Ｔａｇ）：現在マルチオーディオディスクリプタにより表されるオーディオストリームに関連した特定ウィンドウ（分離画面構成により定義されたように）を表す。詳細な説明は、下記の表１６に表される。このフィールドは、ＳＣ＿有効＝１のときだけ有効で、それともシンク装置は、このフィールドを無視する。 Screen Split Tag Field (Split_Screen_Tag): Represents a specific window (as defined by the split screen configuration) associated with the audio stream currently represented by the multi-audio descriptor. A detailed description is presented in Table 16 below. This field is valid only when SC_valid = 1, or the sink device ignores this field.
関連ビュー識別フィールド（Ａｓｓｏｃｉａｔｅｄ＿Ｖｉｅｗ＿ＩＤ）：現在マルチオーディオディスクリプタにより表されるオーディオストリームに関連した特定ビューを表す。このフィールドの意味は、ビュー種類フィールド（ＭＡ＿Ｖｉｅｗ＿Ｔｙｐｅ）の値に拠る。詳細な説明は、下記の表１５に示す。 Associated View Identification Field (Associated_View_ID): Represents a specific view associated with the audio stream currently represented by the multi-audio descriptor. The meaning of this field depends on the value of the view type field (MA_View_Type). A detailed description is given in Table 15 below.
有効言語コードフィールド（ＬＣ＿ｐｒｅｓｅｎｔ）：仮に、このフィールドが１に設定されると、現在ディスクリプタは、次のバイトにおいて有効な言語コードフィールド（Ｌａｎｇｕａｇｅ＿Ｃｏｄｅ）を含む。 Valid language code field (LC_present): If this field is set to 1, then the current descriptor contains a valid language code field (Language_Code) in the next byte.
ミックスオーディオフィールド（Ｍｉｘｅｄ＿Ａｕｄｉｏ）：仮に、このフィールドが１に設定されると、該当オーディオストリームは、補助オーディオ種類フィールド（Ｓｕｐｐｌ＿Ａｕｄｉｏ＿Ｔｙｐｅ）により表れるように、一般オーディオと補助オーディオの予めミックスされたストリームを含む。 Mixed Audio Field (Mixed_Audio): If this field is set to 1, the corresponding audio stream contains a pre-mixed stream of general audio and auxiliary audio as represented by the auxiliary audio type field (Suppl_Audio_Type).
ＳＡＴプレゼントフィールド（ＳＡＴ＿ｐｒｅｓｅｎｔ）：仮に、このフィールドが１に設定されると、現在ディスクリプタは、次の４ビットにおいて有効な補助オーディオ種類フィールド（Ｓｕｐｐｌ＿Ａｕｄｉｏ＿Ｔｙｐｅ）を含む。 SAT present field (SAT_present): If this field is set to 1, then the current descriptor contains an auxiliary audio type field (Suppl_Audio_Type) valid in the next 4 bits.
補助オーディオ種類フィールド（Ｓｕｐｐｌ＿Ａｕｄｉｏ＿Ｔｙｐｅ）：該当オーディオストリームのための補助オーディオの種類を表す。詳細な説明は、表１７を参考してほしい。このフィールドは、ＳＡＴプレゼントフィールド（ＳＡＴ＿ｐｒｅｓｅｎｔ）＝１であるときだけ有効で、それとも、シンク装置は、このフィールドを無視する。 Auxiliary Audio Type field (Suppl_Audio_Type): Indicates an auxiliary audio type for the corresponding audio stream. Please refer to Table 17 for a detailed explanation. This field is valid only when the SAT present field (SAT_present) = 1, or the sink device ignores this field.
言語コードフィールド（Ｌａｎｇｕａｇｅ＿Ｃｏｄｅ）：該当オーディオストリームのＩＳＯ６３９と定義された言語コードを表す。このフィールドは、有効言語コードフィールド（ＬＣ＿ｐｒｅｓｅｎｔ）が１に設定されるときだけ有効で、それともシンク装置は、このフィールドを無視する。
アクティブマルチオーディオモードインジケーター(Active Multi-Audio Mode Indicator)
ソース装置は、シンク装置に、送信される正確なビューモードを表すためにＶｅｎｄｏｒ−Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｆｒａｍｅ（ＶＳＩＦ）を使用する。ＶＳＩＦは、表１８にて示されるように構造化される。
The source device uses the Vendor-Specific Infoframe (VSIF) to indicate to the sink device the exact view mode to be sent. VSIF is structured as shown in Table 18.
ＭＨＬマルチビューフィールド（ＭＨＬ＿ＭＵＬＴＩ＿ＶＩＥＷ）：どんなマルチビューモードが送信されるかを表す。詳細な説明は、表１９に示す。
ビデオ
３Ｄ支援のための３Ｄビデオディスクリプタ
各々の支援される３Ｄビデオモードは、一つの３Ｄビデオディスクリプタで表される。 Each supported 3D video mode is represented by one 3D video descriptor.
ＭＶ＿ＳＵＰＰ：仮に「１」に設定されると、装置は、マルチビュービデオストリーミングのための３Ｄビデオフォーマットを使用して支援する。 MV_SUPP: If set to '1', the device supports using 3D video format for multiview video streaming.
オーディオ
チャネル／スピーカー割り当て
シンク装置が３Ｄオーディオを受信する能力がある場合に、表３８から表４０に説明された３Ｄチャネルスピーカー割り当てディスクリプタは、付着されたスピーカーの構成を表すために使用される。ソース装置から送信される３Ｄオーディオのための現在スピーカー割り当ての指標が３Ｄオーディオメタデータパケットの３Ｄ ＣＡフィールドで取り扱われる。３Ｄ ＣＡフィールドの詳細な説明は、表２７から表２９を参考にする。
Audio Channel / Speaker Assignment When the sink device is capable of receiving 3D audio, the 3D channel speaker assignment descriptors described in Tables 38 to 40 are used to represent the attached speaker configuration. An indication of the current speaker assignment for 3D audio transmitted from the source device is handled in the 3D CA field of the 3D audio metadata packet. For a detailed description of the 3D CA field, reference is made to Tables 27-29.
３Ｄオーディオデータパケット化(3D Audio Data Packetization)
３Ｄオーディオサンプルパケットの各サブパケットは、０または一つのＩＥＣ ６０９５８フレームを含む。仮に、ソース装置が３Ｄオーディオストリームをダウンミックスする必要があり、そのダウンミックスされたオーディオストリームがまた３Ｄオーディオストリームであるとき、それらは、３Ｄオーディオサンプルパケットを使用して処理される。仮に、シンク装置が３Ｄオーディオ特徴を支援しない場合、ソース装置は、３Ｄオーディオメタデータパケットとともに３Ｄオーディオサンプルパケットを送信しない。
3D Audio Data Packetization
Each subpacket of the 3D audio sample packet contains zero or one IEC 60958 frame. If the source device needs to downmix the 3D audio stream, and the downmixed audio stream is also a 3D audio stream, they are processed using 3D audio sample packets. If the sink device does not support the 3D audio feature, the source device does not send the 3D audio sample packet with the 3D audio metadata packet.
チャネルの数に依存して、他のサブパケットレイアウトの数が存在する。下記の表２１から表２３は、１２、２４、または３２チャネルのそれぞれを送信する時における３Ｄオーディオパケットレイアウトを示す。
各々のサブパケットのための一つの、３Ｄオーディオサンプルパケットヘッダに４個のサンプルプレゼントビット（Ｓａｍｐｌｅ＿ｐｒｅｓｅｎｔ ｂｉｔ）がある。各々は、一つのサブパケットが３Ｄオーディオサンプルを含むということを表す。付け加えて、サンプルにより代表される時間期間の間にソース装置で利用可能である有用なオーディオデータがない場合に、設定される４個のサンプルフラット（ｓａｍｐｌｅ＿ｆｌａｔ．ｓｐＸ）ビットがある。これは、サンプル比率の変化または一時的なストリーム妨害の間に発生できる。 There are 4 Sample Present bits in the 3D audio sample packet header, one for each subpacket. Each represents that one subpacket contains 3D audio samples. In addition, there are four sample flat (sample_flat.spX) bits set in the absence of useful audio data available to the source device during the time period represented by the sample. This can occur during sample rate changes or temporary stream jamming.
続く３Ｄオーディオサンプルパケットは、Ｌ−ＰＣＭオーディオ（すなわち、５から１６ ＩＥＣ ６０９５８フレーム）の９からで３２個の間のチャネルを含む一つの３Ｄオーディオサンプルを処理するように使用されることができる。 The following 3D audio sample packets can be used to process one 3D audio sample comprising between 9 and 32 channels of L-PCM audio (i.e. 5 to 16 IEC 60958 frames).
３Ｄオーディオサンプルの第１番目のパケットは、８個のオーディオチャネルでぎっしり積まれており、０に設定されたシーケンス番号フィールドを有する。シーケンス番号は、同じ３Ｄオーディオサンプル内で各追加パケットに対して一つずつ増加する。最後のパケットは、３Ｄオーディオサンプルの全体チャネル数に依存する８個またはそれより少ないオーディオチャネル数を含む。 The first packet of 3D audio samples is tightly packed with eight audio channels and has a sequence number field set to zero. The sequence number is incremented by one for each additional packet within the same 3D audio sample. The last packet contains eight or less audio channel numbers depending on the total channel number of 3D audio samples.
３Ｄオーディオサンプルパケットのためのただ５個の有効なサンプルプレゼント（ｓａｍｐｌｅ＿ｐｒｅｓｅｎｔ）ビットがある。
図５及び図６は、３Ｄオーディオ信号の送信タイミングを示す図である。 5 and 6 are diagrams showing transmission timings of 3D audio signals.
図５と図６において水平ブランク区間（ｈｏｒｉｚｏｎｔａｌ Ｂｌａｎｋｉｎｇ Ｉｎｔｅｒｖａｌ）において３個の８チャネル２Ｄオーディオ信号サンプルを送信することが分かる。２４チャネルの３Ｄオーディオ信号は、同じ期間中に一つのサンプルが送信される。
It can be seen in FIGS. 5 and 6 that three 8-channel 2D audio signal samples are transmitted in a horizontal blanking interval. In 24
マルチオーディオデータパケット化(Multi-Audio Data Packetization)
ＭＨＬは、ＭＨＬソース装置がシングル−ＡＶストリーミングのためにオーディオストリームを同時に送信するようにする。多数オーディオストリームは、シングルビューまたはマルチビュービデオストリーミング（例えば、ビューごとに異なるオーディオを有するデュアルビューゲーミング）のうちの一つと関連する。補助オーディオモードは、画面分離タギング（すなわち、画面の他の部分がタグされ、それ自身のオーディオストリームと関連する）、言語コード、または視覚的／聴覚的障害者のためのオーディオを表すことができる。各々のオーディオストリームは、一つのビューモードと関連し、最大２個のオーディオチャネルを含む。
Multi-Audio Data Packetization
MHL causes the MHL source device to simultaneously transmit an audio stream for single-AV streaming. Multiple audio streams are associated with one of single view or multi view video streaming (eg, dual view gaming with different audio per view). The auxiliary audio mode can represent screen separation tagging (i.e., other parts of the screen are tagged and associated with its own audio stream), language code, or audio for visually / heard persons. . Each audio stream is associated with one view mode and includes up to two audio channels.
マルチストリームオーディオサンプルパケットの各々のサブパケットは、０または一つのＩＥＣ６０９５８で定義されたＩＥＣ ６０９５８またはＩＥＣ６１９３７「ブロック」の「フレーム」を含むことができる。 Each subpacket of the multi-stream audio sample packet may contain zero or one IEC 60958 or IEC 61937 "block" "frame" as defined in IEC 60958.
送信されるための４個以上のオーディオストリームがあるとき、二つまたはそれ以上の連続するマルチオーディオサンプルパケットは、多数のオーディオストリームを送信するために使用される。パケット整列内の各パケットの順序は、シーケンス番号フィールドにより識別される。ＭＨＬソース装置は、シングルＡＶストリーム内で最大１６個の独立オーディオストリームを同時に送信できる。 When there are four or more audio streams to be transmitted, two or more consecutive multi-audio sample packets are used to transmit multiple audio streams. The order of each packet in the packet order is identified by the sequence number field. The MHL source device can transmit up to 16 independent audio streams simultaneously in a single AV stream.
表２５と表２６は、ＭＨＬソース装置がシングルビュービデオストリーミングで４個のオーディオストリームを送信するときにおいて、マルチオーディオサンプルパケットとマルチオーディオメタデータパケットレイアウトの例を示す。マルチオーディオメタデータパケットは、各々のオーディオストリームの特徴（補助情報、言語）を説明する。 Tables 25 and 26 show examples of multi-audio sample packets and multi-audio metadata packet layouts when the MHL source device transmits four audio streams in single-view video streaming. Multi-audio metadata packets describe the features (auxiliary information, language) of each audio stream.
表２７と表２８は、ＭＨＬソース装置がデュアルビュービデオストリーミングで８個のオーディオストリームを送信するときにおいて、マルチオーディオサンプルパケットとマルチオーディオメタデータパケットレイアウトの例を示す。マルチオーディオメタデータパケットは、各々のオーディオストリームの特徴（関連ビュー、補助情報、言語）を説明する。 Tables 27 and 28 show examples of multi-audio sample packets and multi-audio metadata packet layouts when the MHL source device transmits eight audio streams in dual view video streaming. Multi-audio metadata packets describe the features (related views, side information, language) of each audio stream.
表２９と表３０は、ＭＨＬソース装置がシングルビュービデオストリーミングを可能にする画面分離タギングオプションを有して６個のオーディオストリームを送信するときにおいて、マルチオーディオサンプルパケットとマルチオーディオメタデータパケットレイアウトの例を示す。
ＨＩのためのオーディオ：聴覚的障害のためのオーディオストリーム
ＶＩのためのオーディオ：視覚的障害のためのオーディオストリーム
ＨＩのためのオーディオ：聴覚的障害のためのオーディオストリーム
ＶＩのためのオーディオ：視覚的障害のためのオーディオストリーム
ＨＩのためのオーディオ：聴覚的障害のためのオーディオストリーム
ＶＩのためのオーディオ：視覚的障害のためのオーディオストリーム
Audio for HI: Audio Stream for Hearing Impairment Audio for VI: Audio Stream for Visual Impairment
３Ｄオーディオメタデータパケット化
アクティブ３Ｄオーディオストリームが送信されるごとに、正確な３Ｄオーディオメタデータパケットが少なくとも二つのビデオフィールドごとに一回送信される。
3D Audio Metadata Packetization Each time an active 3D audio stream is transmitted, an accurate 3D audio metadata packet is transmitted once every at least two video fields.
新しい３Ｄオーディオストリームが始まる際、または３Ｄオーディオメタデータパケットとオーディオインフォフレームにより表すことのできる３Ｄオーディオストリームに変化がある際、修正された正確な３Ｄオーディオメタデータパケットは、初めて影響を受けたノンサイレント（ｎｏｎ−ｓｉｌｅｎｔ）オーディオサンプルに従う一つのビデオフレームの以前に送信される。優先的に、これは、初めて影響を受けたオーディオサンプルが送信される直前に発生する。 The modified exact 3D audio metadata packet is the first non-affected nonce when the new 3D audio stream starts or when there is a change in the 3D audio stream that can be represented by the 3D audio metadata packet and the audio info frame Sent before one video frame according to non-silent audio samples. Preferentially, this occurs just before the first affected audio sample is transmitted.
３Ｄオーディオメタデータパケット送信は、水平的／垂直的ブラキング区間を含むデータプラットホーム区間以内でいつでも発生できる。 3D audio metadata packet transmission can occur anytime within the data platform interval including horizontal / vertical blanking intervals.
３Ｄオーディオがストリーミングされるとき、ＭＨＬシンク装置は、オーディオインフォフレームでＣＣとＣＡフィールドを無視し、その代りに３Ｄオーディオメタデータパケットで３Ｄ＿ＣＣと３Ｄ＿ＣＡを参考にする。 When 3D audio is streamed, the MHL sink ignores the CC and CA fields in the audio info frame, and instead references 3D_CC and 3D_CA in 3D audio metadata packets.
マルチオーディオメタデータパケット化
アクティブマルチ−オーディオストリームが送信されるごとに、正確なマルチ−オーディオメタデータパケットが少なくとも二つビデオフィールドごとに一回送信される。
Multi-Audio Metadata Packetization Each time an active multi-audio stream is sent, an accurate multi-audio metadata packet is sent at least once every two video fields.
新しいマルチ−オーディオストリームが始まるとき、またはマルチ−オーディオメタデータパケットとオーディオインフォフレームにより表すことのできるマルチ−オーディオストリームに変化があるとき、修正された正確なマルチ−オーディオメタデータパケットは、初めて影響を受けたノンサイレント（ｎｏｎ−ｓｉｌｅｎｔ）オーディオサンプルに従う一つのビデオフレームの以前に送信される。優先的に、これは、初めて影響を受けたオーディオサンプルが送信される直前に発生する。 The correct modified multi-audio metadata packet is affected for the first time when a new multi-audio stream starts or when there is a change in the multi-audio stream that can be represented by the multi-audio metadata packet and the audio info frame Prior to one video frame according to the received non-silent audio samples. Preferentially, this occurs just before the first affected audio sample is transmitted.
マルチ−オーディオメタデータパケット送信は、水平的／垂直的ブラキング区間を含むデータプラットホーム区間以内でいつでも発生できる。 Multi-audio metadata packet transmission can occur anytime within the data platform interval including horizontal / vertical blanking intervals.
３Ｄ／マルチ−オーディオ支援のためのＷＲＩＴＥ＿ＢＵＲＳＴ使用
３Ｄオーディオモードに対する支援は、表３０と表３１に示したように、フォーマットされた一連のＷＲＩＴＥ＿ＢＵＲＳＴ移動を使用して示す。
リンク制御バス（Ｌｉｎｋ Ｃｏｎｔｒｏｌ Ｂｕｓ）
デバイスレジスタ変更割込み（Ｄｅｖｉｃｅ Ｒｅｇｉｓｔｅｒ Ｃｈａｎｇｅ Ｉｎｔｅｒｒｕｐｔ）
Device Register Change Interrupt
３Ｄ＿ＡＵＤ＿ＲＥＱは、ＭＨＬシンク装置から３Ｄオーディオ支援情報を要請するために、ＭＨＬソース装置により使用される。ＭＨＬスペック６．１４参照。 The 3D_AUD_REQ is used by the MHL source device to request 3D audio assistance information from the MHL sink device. See MHL spec 6.14.
Ｂｕｒｓｔ＿ＩＤ Ｃｏｄｅ
３Ｄ＿ＡＤと３Ｄ＿ＣＳＡＤは、オーディオ延長の支援を表すことにおいて、ＭＨＬシンク装置により使用される。ＭＨＬスペック７．ＸＸを参照。
3D_AD and 3D_CSAD are used by the MHL sink device in representing audio extension assistance.
制御と構成（Ｃｏｎｔｒｏｌ ａｎｄ Ｃｏｎｆｉｇｕｒａｔｉｏｎ）
拡張されたデバイス性能レジスタ（Ｅｘｔｅｎｄｅｄ Ｄｅｖｉｃｅ Ｃａｐａｂｉｌｉｔｙ Ｒｅｇｉｓｔｅｒ）
シンク装置は、ソース装置に拡張されたデバイス性能レジスタを提供できる。換言すれば、ソース装置は、シンク装置の拡張されたデバイス性能レジスタを読み出すことができる。
Control and Configuration
Extended Device Capability Register
The sink device can provide extended device performance registers to the source device. In other words, the source device can read the extended device performance register of the sink device.
下記の表のように、ＭＨＬスペックで拡張されたデバイス性能レジスタのアドレス０ｘ８５を、シンク装置が支援するマルチオーディオモードを表すのに使用することができる。
マルチオーディオモード（Ｍｕｌｔｉ−Ａｕｄｉｏ Ｍｏｄｅ）
各シンク装置は、支援する特定マルチオーディオモードを登録するマルチオーディオモード（ＭＵＬＴＩ＿ＡＵＤ＿ＭＯＤＥ）に表示できる。
Multi-Audio Mode
Each sink device can display in a multi audio mode (MULTI_AUD_MODE) registering a specific multi audio mode to support.
マルチオーディオモードレジスタは、シンク装置が画面分離と関連したマルチオーディオ受信及び処理を支援するかどうかを表す画面分離オーディオフィールド（Ｓｐｌｉｔ Ｓｃｒｅｅｎ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。
装置がマルチビュービデオストリーミングを支援する能力がない場合、このフィールドは０に設定される。 This field is set to 0 if the device is not capable of supporting multiview video streaming.
マルチストリームオーディオ（Ｍｕｌｔｉ−ＳｔｒｅａｍＡｕｄｉｏ）
以下、本発明の多様な実施の形態にかかるマルチストリームオーディオを説明する。以下で説明するマルチストリームオーディオ送信スペックは、ＨＤＭＩ、ＭＨＬを含む多様な有無線送信インタフェースで適用されることができる。
Multi-stream audio (Multi-Stream Audio)
Hereinafter, multi-stream audio according to various embodiments of the present invention will be described. The multi-stream audio transmission specification described below may be applied to various wired / wireless transmission interfaces including HDMI and MHL.
本発明のソース装置は、同時に４個のオーディオストリームを送信できる。マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）に対して、すべてのオーディオストリームは、一つのオーディオインフォフレーム（Ｉｎｆｏｆｒａｍｅ）を共有する。 The source device of the present invention can transmit four audio streams simultaneously. For multi-stream audio sample packets, all audio streams share one audio info frame (Infoframe).
本発明の多様な実施の形態にかかる有線インタフェースは、シングルビュービデオストリーミングに対する支援（例えば、多数の言語（ｍｕｌｔｉ−ｌｉｎｇｕａｌ）を支援するか、または視覚／聴覚障害者のためのオーディオ等）を追加できる。これは、オーディオメタデータパケット（Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）を修正するか、またはＨＤＭＩオーディオデータブロック（ＨＤＭＩ Ａｕｄｉｏ Ｄａｔａ Ｂｌｏｃｋ）を修正して可能である。 The wired interface according to various embodiments of the present invention supports single-view video streaming (eg, supports multiple languages, or adds audio for people with visual or hearing impairments, etc.) it can. This is possible by modifying an audio metadata packet (Audio Metadata Packet) or modifying an HDMI audio data block (HDMI Audio Data Block).
例えば、下記の表４６のように、マルチストリームオーディオは、多数の言語を支援し、オーディオは、２チャネルで支援されることができる。
シナリオ
下記の表は、可能なシナリオを示す。
４個のサブパケットを有するマルチストリームオーディオサンプルパケットの場合、
１）シングルビューのためのオーディオディスクリプション（ａｕｄｉｏ ｄｅｓｃｒｉｐｔｉｏｎ）と共にシングルＴＶプログラムが送信される場合、ストリーム０は、ノーマル（ｎｏｒｍａｌ）オーディオ信号を含み、ストリーム１は、視覚障害者のためのオーディオディスクリプション信号を含むことができる。
For a multistream audio sample packet with 4 subpackets:
1) If a single TV program is transmitted with an audio description (audio description) for single view,
２）前記シングルビューで２個国語を支援する場合、支援される言語からなるオーディオ信号ストリーム２個と、各々に対応するオーディオディスクリプションが共に送信される。例えば、英語と韓国語とが支援される場合、ストリーム０は、韓国語ノーマルオーディオ信号、ストリーム１は、視覚障害者のための韓国語オーディオディスクリプション信号、ストリーム２は、英語ノーマルオーディオ信号、ストリーム３は、視覚障害者のための英語オーディオディスクリプション信号をそれぞれ含むことができる。
2) When supporting two languages in the single view, two audio signal streams consisting of the supported languages and audio descriptions corresponding to each are transmitted together. For example, if English and Korean are supported,
３）シングルビューで一つの言語からなるオーディオ信号ストリームの一つとこれに対する異なる言語で支援される視覚障害者のためのオーディオディスクリプション信号が二つ送信されることができる。例えば、ストリーム０は、韓国語または英語ノーマルオーディオ信号、ストリーム１は、視覚障害者のための韓国語オーディオディスクリプション信号、ストリーム２は、視覚障害者のための英語オーディオディスクリプション信号をそれぞれ含むことができる。
3) A single view can transmit one audio signal stream consisting of one language and two audio description signals for the visually impaired who are supported by different languages. For example,
４）ソース装置がマルチビューのためのオーディオ信号を送信することができる。デュアルビューが支援される場合、最も基本的な形態は、各ビューに対するオーディオ信号を一つの送信ストリームに送信することである。デュアルビューの場合、独立的な第１ビューと第２ビューを含み、各ビューは、独立的なコンテンツを提供する。 4) The source device can transmit an audio signal for multiview. When dual views are supported, the most basic form is to transmit the audio signal for each view into one transmit stream. In the dual view case, which includes independent first and second views, each view provides independent content.
５）各ビューに対して２個国語が支援されることができる。この場合、第１ビューに対する第１言語からなるオーディオ信号ストリーム、第１ビューに対する第２言語からなるオーディオ信号ストリーム、第２ビューに対する第１言語からなるオーディオ信号ストリーム、第２ビューに対する第２言語からなるオーディオ信号ストリームがそれぞれ送信されることができる。例えば、英語と韓国語とが支援される場合、ストリーム０は、第１ビューに対する韓国語オーディオ信号、ストリーム１は、第１ビューに対する英語オーディオ信号、ストリーム２は、第２ビューに対する韓国語オーディオ信号、ストリーム３は、第２ビューに対する英語オーディオ信号を含むことができる。
5) Two languages can be supported for each view. In this case, an audio signal stream consisting of the first language for the first view, an audio signal stream consisting of the second language for the first view, an audio signal stream consisting of the first language for the second view, a second language from the second language Audio signal streams can be transmitted respectively. For example, if English and Korean are supported,
６）デュアルビューの場合、何れか一つのビューは、視覚障害者のためのオーディオディスクリプション信号をさらに送信できる。すなわち、第１ビューに対するオーディオ信号ストリーム、第２ビューに対するノーマルオーディオ信号ストリーム、第２ビューに対する視覚障害者のためのオーディオディスクリプション信号ストリームが各々送信されることができる。例えば、ストリーム０は、第１ビューに対するオーディオ信号、ストリーム１は、第２ビューに対するオーディオ信号、ストリーム３は、第２ビューに対するオーディオディスクリプション信号を含むことができる。
6) In the case of dual view, any one view can additionally transmit an audio description signal for the visually impaired. That is, an audio signal stream for the first view, a normal audio signal stream for the second view, and an audio description signal stream for the visually impaired for the second view may be respectively transmitted. For example,
７）一つのストリームは、共通オーディオ信号を送信するのに使用することができる。すなわち、第１ビューと第２ビューに対する共通オーディオ信号ストリーム、第１ビュー専用オーディオストリーム、第２ビュー専用オーディオストリームがそれぞれ送信されることができる。この場合、受信端では、共通オーディオストリームと専用オーディオストリームをマルチプレックス（Ｍｕｘｉｎｇ）して出力する。このようなシナリオは、ゲームの場合に適用されることができる。例えば、ストリーム０は、第１ビューと第２ビューに対する共通オーディオ信号（例えば、背景音響、進行案内ボイス等）、ストリーム１は、第１ビューに対する専用オーディオ信号、ストリーム２は、第２ビューに対する専用オーディオ信号を含むことができる。
7) One stream can be used to transmit common audio signals. That is, a common audio signal stream for the first view and the second view, a first view-dedicated audio stream, and a second view-dedicated audio stream may be respectively transmitted. In this case, at the receiving end, the common audio stream and the dedicated audio stream are multiplexed (Muxing) and output. Such a scenario can be applied in the case of a game. For example,
図７は、本発明の一実施の形態にかかるデータ送受信システム１０００−１の構成を示すブロック図である。 FIG. 7 is a block diagram showing the configuration of a data transmission / reception system 1000-1 according to an embodiment of the present invention.
図７に示すように、本発明の一実施の形態にかかるデータ送受信システム１０００−１は、データ送信装置１００−１とデータ受信装置２００−１とを備える。 As shown in FIG. 7, a data transmission / reception system 1000-1 according to an embodiment of the present invention includes a data transmission device 100-1 and a data reception device 200-1.
データ送信装置１００−１は、第１サブパケット及び第２サブパケットを含むパケットをデータ受信装置２００−１に送信する。 The data transmission device 100-1 transmits a packet including the first subpacket and the second subpacket to the data reception device 200-1.
データ受信装置２００−１は、前記データ送信装置１００−１から第１サブパケット及び第２サブパケットを含む前記パケットを受信する。 The data receiving apparatus 200-1 receives the packet including the first subpacket and the second subpacket from the data transmitting apparatus 100-1.
このとき、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 At this time, the first subpacket and the second subpacket include different audio data for the first content.
以下、データ送信装置１００−１とデータ受信装置２００−１の構成をさらに詳細に説明する。 Hereinafter, the configurations of the data transmission apparatus 100-1 and the data reception apparatus 200-1 will be described in more detail.
図８は、本発明の一実施の形態にかかるデータ送信装置１００−１の構成を示すブロック図である。 FIG. 8 is a block diagram showing the configuration of the data transmission apparatus 100-1 according to the embodiment of the present invention.
図８に示すように、本発明の一実施の形態にかかるデータ送信装置１００−１は、パケット生成部１１０と送信部１２０とを備える。
As shown in FIG. 8, the data transmission apparatus 100-1 according to the embodiment of the present invention includes a
パケット生成部１１０は、第１サブパケット及び第２サブパケットを含むパケットを生成する。このとき、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。
The
送信部１２０は、前記生成されたパケットをデータ受信装置２００−１に送信する。
The transmitting
このとき、前記第１サブパケットは、非障害者のためのオーディオデータを含み、前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことができる。 At this time, the first subpacket may include audio data for a non-disabled person, and the second subpacket may include audio data for a visually impaired person.
また、前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 Also, the first subpacket and the second subpacket may include audio data of different languages.
また、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 The first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータになることができる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in a packet may be common audio data for the first content and the second content.
また、前記パケットは、第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含むことができ、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 The packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
図９は、本発明の一実施の形態にかかるデータ受信装置２００−１の構成を示すブロック図である。 FIG. 9 is a block diagram showing the configuration of a data receiving apparatus 200-1 according to an embodiment of the present invention.
図９に示すように、本発明の一実施の形態にかかるデータ受信装置２００−１は、受信部２１０及びパーシング部２２０を備える。
As shown in FIG. 9, the data receiving apparatus 200-1 according to the embodiment of the present invention includes a receiving
受信部２１０は、データ送信装置１００−１から第１サブパケット及び第２サブパケットを含むパケットを受信する。このとき、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含むことができる。
The receiving
パーシング部２２０は、前記受信された第１サブパケット及び前記第２サブパケットをパーシングする構成である。
The
前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 The first subpacket and the second subpacket may include audio data of different languages.
これとは異なり、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 Unlike this, the first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータになることができる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in a packet may be common audio data for the first content and the second content.
また、前記パケットは、第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含むことができ、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 The packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
オーディオメタデータパケット（Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）
ソース装置は、オーディオメタデータパケットをシンク装置に送信して、送信されるオーディオスペックを知らせる。このとき、オーディオメタデータパケットのヘッダは、下記のような構造を有する。
The source device sends audio metadata packets to the sink device to indicate the audio specs to be sent. At this time, the header of the audio metadata packet has the following structure.
各フィールドを説明すれば、次の通りである。 The respective fields are as follows.
３Ｄオーディオフィールド（３Ｄ＿ＡＵＤＩＯ）［１ｂｉｔ］：３Ｄ＿ＡＵＤＩＯ＝１であると、オーディオメタデータパケット（Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）は、３Ｄオーディオチャネルカウント（３Ｄ Ａｕｄｉｏ Ｃｈａｎｎｅｌ ｃｏｕｎｔ：３Ｄ＿ＣＣフィールド。下記の表を参照）とチャネル／スピーカー割り当て情報（ＡＣＡＳＴ：Ａｕｄｉｏ Ｃｈａｎｎｅｌ Ａｌｌｏｃａｔｉｏｎ Ｓｔａｎｄａｒｄ Ｔｙｐｅ）フィールド（下記の表を参照）を含む。ソースが３Ｄオーディオパケットを送信するとき、このようなフィールドは、１に設定される。 If the 3D audio field (3D_AUDIO) [1 bit]: 3D_AUDIO = 1, then the audio metadata packet (Audio Metadata Packet) has a 3D audio channel count (3D Audio Channel count: 3D_CC field; see table below) and channel / It includes a speaker assignment information (ACAST: Audio Channel Allocation Standard Type) field (see the table below). Such field is set to 1 when the source sends 3D audio packets.
ビュー個数フィールド（ＮＵＭ＿ＶＩＥＷＳ）［２ｂｉｔｓ］：ビューの個数を表す。ＮＵＭ＿ＶＩＥＷＳ＝００であると、シングルビュービデオストリーミングが支援される。ＮＵＭ＿ＶＩＥＷＳ＝０１であると、デュアルビュービデオストリーミングが支援される。このモードは、ＶＳＩＦでの３Ｄ＿ＤｕａｌＶｉｅｗ＝１の場合のみに許容される。残りのＮＵＭ＿ＶＩＥＷＳ値に対しては、未来の使用のためにリザーブされている。 View count field (NUM_VIEWS) [2 bits]: Indicates the number of views. When NUM_VIEWS = 00, single view video streaming is supported. When NUM_VIEWS = 01, dual view video streaming is supported. This mode is only allowed when 3D_DualView = 1 in VSIF. The remaining NUM_VIEWS values are reserved for future use.
オーディオストリーム個数フィールド（ＮＵＭ＿ＡＵＤＩＯ＿ＳＴＲ）［２ｂｉｔｓ］：オーディオストリームの個数−１を表す。ＮＵＭ＿ＡＵＤＩＯ＿ＳＴＲ＝０１、１０、または１１の場合、オーディオメタデータパケット（Ａｕｄｉｏ Ｍｅｔａｄａｔａ Ｐａｃｋｅｔ）は、最大４個までオーディオメタデータディスクリプタ（ａｕｄｉｏ ｍｅｔａｄａｔａ ｄｅｓｃｒｉｐｔｏｒ）を含み、各々は、オーディオストリームに対応する。
下記の表は、３Ｄオーディオのためのオーディオメタデータパケットのペイロードを表す。３Ｄ＿Ａｕｄｉｏ＝１の場合、メタデータパケットペイロードは、以下の構造を有する。
すなわち、３Ｄオーディオチャネルカウント情報を表す３Ｄ＿ＣＣフィールドと、ソースにより提供されるオーディオチャネル割り当て標準タイプを表示するＡＣＡＳＴフィールドを含む。 That is, it includes a 3D CC field representing 3D audio channel count information and an ACAST field representing an audio channel assignment standard type provided by the source.
表５１は、３Ｄ＿ＣＣ値に応じるオーディオチャネルを示しており、表５２は、ＡＣＡＳＴフィールド値に応じるオーディオチャネル割り当て標準タイプを示す。
下記の表は、マルチストリームオーディオのためのオーディオメタデータパケットのペイロードを示す。３Ｄ＿Ａｕｄｉｏ＝０の場合、メタデータパケットペイロードは、下記の構造を有する。
前記表５３に示すように、オーディオメタデータパケットのペイロードは、それぞれ５バイトのオーディオメタデータディスクリプタ（Ａｕｄｉｏ＿Ｍｅｔａｄａｔａ＿Ｄｅｓｃｒｉｐｔｏｒ）を含む。オーディオメタデータディスクリプタ（４フィールド、各５バイト）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）においてサブパケットＸに対したオーディオメタデータまたはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）においてサブパケットＸに対したオーディオメタデータを表現する。オーディオメタデータディスクリプタは、下記で構造が説明される。
各フィールドを説明すれば、以下のとおりである。 It will be as follows if each field is explained.
緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ＿Ｃｈａｎｎｅｌ）［１ｂｉｔ］：Ｅｍｅｒｇｅｎｃｙ＿Ｃｈａｎｎｅｌ＝１であると、対応するオーディオストリームは、緊急警告オーディオデータを送信する。受信装置は、スクリプトなどを介して緊急放送があることを知らせることができ、ユーザは、オーディオ選択を介して受信した緊急警告オーディオ信号を出力させることができる。 When the emergency channel field (Emergency_Channel) [1 bit]: Emergency_Channel = 1, the corresponding audio stream transmits emergency alert audio data. The receiving device can notify that there is an emergency broadcast via a script or the like, and the user can output the emergency alert audio signal received via the audio selection.
マルチビューフィールド（左側）（Ｍｕｌｔｉｖｉｅｗ＿Ｌｅｆｔ）［１ｂｉｔ］：Ｍｕｌｔｉｖｉｅｗ＿Ｌｅｆｔ＝１であると、対応するオーディオストリームが３Ｄビデオフォーマットにおいて左側立体映像にマッピングされる。もしＭｕｌｔｉｖｉｅｗ＿Ｌｅｆｔ＝０であると、このフィールドは、ＮＵＭ＿ＶＩＥＷＳ＝０１の場合のみに有効である。 Multiview field (left side) (Multiview_Left) [1 bit]: When Multiview_Left = 1, the corresponding audio stream is mapped to the left stereo image in the 3D video format. If Multiview_Left = 0, this field is valid only if NUM_VIEWS = 01.
マルチビューフィールド（右側）（Ｍｕｌｔｉｖｉｅｗ＿Ｒｉｇｈｔ［１ｂｉｔ］：Ｍｕｌｔｉｖｉｅｗ＿Ｒｉｇｈｔ＝１であると、対応するオーディオストリームが３Ｄビデオフォーマットにおいて右側の立体映像にマッピングされる。もしＭｕｌｔｉｖｉｅｗ＿Ｒｉｇｈｔ＝０であると、このフィールドは、ＮＵＭ＿ＶＩＥＷＳ＝０１の場合のみに有効である。 Multiview field (right side) (Multiview_Right [1 bit]: Multiview_Right = 1 will map the corresponding audio stream to the 3D video format on the right in 3D video format. If Multiview_Right = 0, this field will be NUM_VIEWS It is effective only when = 01.
言語コード有効フィールド（ＬＣ＿Ｖａｌｉｄ）［１ｂｉｔ］：ＬＣ＿Ｖａｌｉｄ＝１であると、言語コード（Ｌａｎｇｕａｇｅ＿Ｃｏｄｅ）が有効で、対応するオーディオストリームの言語を正確に識別する。それとも、対応するオーディオストリームの言語は、明示されないことになる。 Language Code Valid Field (LC_Valid) [1 bit]: When LC_Valid = 1, the language code (Language_Code) is valid, and the language of the corresponding audio stream is correctly identified. Or, the language of the corresponding audio stream will not be specified.
補助オーディオ有効フィールド（Ｓｕｐｐｌ＿Ａ＿Ｖａｌｉｄ）［１ｂｉｔ］：Ｓｕｐｐｌ＿Ａ＿Ｖａｌｉｄ＝１であると、対応するオーディオストリームは、Ｓｕｐｐｌ＿Ａ＿Ｔｙｐｅにより現れた補助オーディオトラック（ｓｕｐｐｌｅｍｅｎｔａｌ ａｕｄｉｏ ｔｒａｃｋ）を含む。 If the auxiliary audio valid field (Suppl_A_Valid) [1 bit]: Suppl_A_Valid = 1, the corresponding audio stream includes an auxiliary audio track (supplemental audio track) that appears by Suppl_A_Type.
プレミックス補助オーディオフィールド（Ｓｕｐｐｌ＿Ａ＿Ｍｉｘｅｄ［１ｂｉｔ］：Ｓｕｐｐｌ＿Ａ＿Ｍｉｘｅｄ＝１であると、対応するオーディオストリームは、メインオーディオコンポーネントとＳｕｐｐｌ＿Ａ＿Ｔｙｐｅにより現れたプレミックス補助オーディオトラック（ｐｒｅ−ｍｉｘｅｄ ｓｕｐｐｌｅｍｅｎｔａｌ ａｕｄｉｏ ｔｒａｃｋ）を含むことができる。このビットは、Ｓｕｐｐｌ＿Ａ＿Ｖａｌｉｄ＝１の場合のみに有効である。 If Premix Auxiliary Audio Field (Suppl_A_Mixed [1 bit]: Suppl_A_Mixed = 1), the corresponding audio stream can include the main audio component and the pre-mixed supplemental audio track that appeared by Suppl_A_Type This bit is valid only if Suppl_A_Valid = 1.
補助オーディオタイプフィールド（Ｓｕｐｐｌ＿Ａ＿Ｔｙｐｅ）［３ｂｉｔｓ］：下記の表で定義される補助オーディオタイプを表す。このフィールドは、Ｓｕｐｐｌ＿Ａ＿Ｖａｌｉｄ＝１の場合のみに有効である。表５５は、補助オーディオタイプフィールド値のディスクリプションを示す。 Auxiliary Audio Type Field (Suppl_A_Type) [3 bits]: Indicates an auxiliary audio type defined in the following table. This field is valid only if Suppl_A_Valid = 1. Table 55 shows the description of the Auxiliary Audio Type field values.
言語コード（Ｌａｎｇｕａｇｅ＿Ｃｏｄｅ）［３Ｂｙｔｅｓ］：対応するオーディオストリームの言語を識別する。言語コードは、ＩＳＯ６３９で定義される。そして、３キャラクターコードが位置するが、最後のキャラクターコードは、オーディオメタデータディスクリプタＸ（Ａｕｄｉｏ＿Ｍｅｔａｄａｔａ＿Ｄｅｓｃｒｉｐｔｏｒ＿Ｘ）の最後のバイトと一致する。このフィールドは、ＬＣ＿Ｖａｌｉｄ＝１の場合のみに有効である。
図１０は、本発明の他の実施の形態にかかるデータ送受信システム１０００−２の構成を示すブロック図である。 FIG. 10 is a block diagram showing the configuration of a data transmission / reception system 1000-2 according to another embodiment of the present invention.
図１０に示すように、本発明の他の実施の形態にかかるデータ送受信システム１０００−２は、データ送信装置１００−２及びデータ受信装置２００−２を備える。 As shown in FIG. 10, a data transmission / reception system 1000-2 according to another embodiment of the present invention includes a data transmission device 100-2 and a data reception device 200-2.
データ送信装置１００−２は、オーディオメタデータパケットを生成してデータ受信装置２００−２に送信する。 The data transmission device 100-2 generates an audio metadata packet and transmits it to the data reception device 200-2.
データ受信装置２００−２は、前記データ送信装置１００−２から前記オーディオメタデータパケットを受信する。 The data reception device 200-2 receives the audio metadata packet from the data transmission device 100-2.
このとき、前記オーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 At this time, the header of the audio metadata packet includes a 3D audio field indicating whether the 3D audio sample packet is transmitted.
以下、データ送信装置１００−２とデータ受信装置２００−２の構成と、オーディオメタデータパケットの構成とをさらに詳細に説明する。 Hereinafter, the configurations of the data transmission device 100-2 and the data reception device 200-2 and the configuration of the audio metadata packet will be described in more detail.
図１１は、本発明の他の実施の形態にかかるデータ送信装置１００−２は、パケット生成部１１０及び送信部１２０を備える。
Referring to FIG. 11, a data transmission apparatus 100-2 according to another embodiment of the present invention includes a
パケット生成部１１０は、オーディオメタデータパケットを生成する。前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含むことができる。
The
送信部１２０は、前記生成されたオーディオメタデータパケットをデータ受信装置２００−２に送信する。
The transmitting
また、前記生成されたオーディオメタデータパケットのヘッダは、送信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the generated audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) representing number information of the audio stream to be transmitted.
また、前記生成されたオーディオメタデータパケットのヘッダは、送信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 In addition, the header of the generated audio metadata packet may further include a number of views field indicating number information of different contents to be transmitted.
また、前記生成されたオーディオメタデータパケットのペイロードは、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the generated audio metadata packet may be a meta for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. It may include an audio metadata descriptor field representing data.
また、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and a multiview indicating whether audio data corresponding to left eye or right eye image in multiview is included. Field (Multivew Field), Language Code Valid Field representing the presence or absence of language identification for audio data (Language Code Valid Field), Auxiliary Audio Valid Field representing the presence or absence of auxiliary audio data (Supplemental Audio Valid Field), Main audio data and the above auxiliary audio Premix auxiliary audio field (pre-indicates presence or absence of premix with data) at least one of an ixed Supplemental Audio Field), a Supplemental Audio Type Field representing a type of the supplemental audio data, and a language code field representing a language code for the audio data Can.
図１２は、本発明の他の実施の形態にかかるデータ受信装置２００−２の構成を示すブロック図である。 FIG. 12 is a block diagram showing the configuration of a data receiving apparatus 200-2 according to another embodiment of the present invention.
図１２に示すように、本発明の他の実施の形態にかかるデータ受信装置２００−２は、受信部２１０及びパーシング部２２０を有する。
As shown in FIG. 12, a data receiving apparatus 200-2 according to another embodiment of the present invention has a receiving
受信部２１０は、データ送信装置１００−２からオーディオメタデータパケットを受信する構成である。前記オーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。
The receiving
パーシング部２２０は、前記受信されたオーディオメタデータパケットをパーシングする構成である。
The
また、前記オーディオメタデータパケットのヘッダは、受信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) indicating number information of the audio stream to be received.
また、前記オーディオメタデータパケットのヘッダは、受信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include a number of views field indicating number information of different contents to be received.
また、前記オーディオメタデータパケットのペイロード（ｐａｙｌｏａｄ）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the audio metadata packet may be a meta for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. It may include an audio metadata descriptor field representing data.
このとき、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 At this time, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and multi indicating whether audio data corresponding to left eye or right eye image in multi view is included. View field (Multivew Field), language code valid field representing language identification status for audio data (Language Code Valid Field), auxiliary audio valid field representing auxiliary audio data presence (Supplemental Audio Valid Field), main audio data and the above auxiliary Premix auxiliary audio field (pr) indicating presence or absence of premix with audio data Mixed Supplemental Audio Field, at least one of Supplemental Audio Type Field representing a type of the auxiliary audio data, and a language code field representing a language code for audio data be able to.
オーディオデータブロック（Ａｕｄｉｏ Ｄａｔａ Ｂｌｏｃｋ）
以下は、ＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ）のオーディオデータブロックを示す表である。下記の表において３−４バイト部分は、下記の表で再定義する。
Audio Data Block
The following is a table showing audio data blocks of Extended Display Identification Data (EDID). The 3-4 byte portion in the following table is redefined in the following table.
また、マルチストリームオーディオのための新しい短縮オーディオディスクリプタ（Ｓｈｏｒｔ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ：ＳＡＤ）は削除し、その代りに、ＥＤＩＤで定義されたノーマル（ｎｏｒｍａｌ）ＳＡＤを使用する。追加された内容によれば、２個のチャネルまで送信されることができる。
下記の表は、前記オーディオデータブロックの３−４バイトを取り替えるブロック構成を示す。
各フィールドを説明すれば、次の通りである。 The respective fields are as follows.
緊急チャネルフィールド（Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｅｍｅｒｇｅｎｃｙ［１ｂｉｔ］：Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｅｍｅｒｇｅｎｃｙ＝１であると、シンク装置は、緊急警告オーディオチャネルを受信し、処理することを支援する。Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｅｍｅｒｇｅｎｃｙ＝０であると、シンク装置は、このような特徴を支援しない。 When the emergency channel field (Supports_MS_Emergency [1 bit]: Supports_MS_Emergency = 1, the sink device assists in receiving and processing the emergency alert audio channel. When Supports_MS_Emergency = 0, the sink device has such a feature Do not support
オーディオミックスフィールド（Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｍｉｘ）［１ｂｉｔ］：Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｍｉｘ＝１であると、シンク装置は、メインオーディオと補助オーディオ（ｓｕｐｐｌｅｍｅｎｔａｒｙ ａｕｄｉｏ）とを合成することを支援する。Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｍｉｘ＝０であるとシンク装置は、このような合成を支援せず、ミックスされたオーディオを再生することだけを支援する。 When the audio mix field (Supports_MS_Mix) [1 bit]: Supports_MS_Mix = 1, the sink device assists in combining the main audio and the supplementary audio. If Supports_MS_Mix = 0, the sink device does not support such synthesis but only supports playing the mixed audio.
補助オーディオ支援フィールド（Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｓｕｐｐｌｅ）［１ｂｉｔ］：Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｓｕｐｐｌｅ＝１であると、シンク装置は、視覚／聴覚障害者のための補助オーディオトラックを有するマルチストリームオーディオを支援する。Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｓｕｐｐｌｅ＝０であると、何も表さないか、またはシンク装置が視覚／聴覚障害者のための補助オーディオトラックを支援しないことを表す。 The Auxiliary Audio Support Field (Supports_MS_Supple) [1 bit]: Supports_MS_Supple = 1, the sink device supports multi-stream audio with an auxiliary audio track for the visually / impaired person. If Supports_MS_Supple = 0, it represents nothing or indicates that the sink device does not support an auxiliary audio track for the visually impaired / heard person.
言語支援フィールド（Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｌａｎｇ）［１ｂｉｔ］：Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｌａｎｇ＝１であると、シンク装置は、多数の言語オーディオストリームを有するマルチストリームオーディオを支援する。Ｓｕｐｐｏｒｔｓ＿ＭＳ＿Ｌａｎｇ＝０であると、何も表さないか、またはシンク装置が多数の言語オーディオストリームを支援しないことを表す。 When the language support field (Supports_MS_Lang) [1 bit]: Supports_MS_Lang = 1, the sink device supports multi-stream audio having a large number of language audio streams. Supports_MS_Lang = 0 indicates that nothing is represented or the sink device does not support multiple language audio streams.
マルチビューオーディオ支援フィールド（Ｓｕｐｐｏｒｔｓ＿ＭＳ＿ＭｕｌｔｉＶｉｅｗ）［１ｂｉｔ］：Ｓｕｐｐｏｒｔｓ＿ＭＳ＿ＭｕｌｔｉＶｉｅｗ＝１であると、シンク装置は、マルチビュービデオストリーミングのためのマルチストリームオーディオを支援する。Ｓｕｐｐｏｒｔｓ＿ＭＳ＿ＭｕｌｔｉＶｉｅｗ＝０であると、何も表さないか、またはシンク装置がマルチビュービデオストリーミングのためのマルチストリームオーディオを支援しないことを表す。 When the multi-view audio support field (Supports_MS_MultiView) [1 bit]: Supports_MS_MultiView = 1, the sink device supports multi-stream audio for multi-view video streaming. Supports_MS_MultiView = 0 indicates that nothing is represented or the sink device does not support multi-stream audio for multi-view video streaming.
最大ストリームカウントフィールド（Ｍａｘ＿Ｓｔｒｅａｍ＿Ｃｏｕｎｔ−１［２ｂｉｔｓ］：シンク装置がハンドリングできる最大オーディオストリームの個数を表す。Ｍａｘ＿Ｓｔｒｅａｍ＿Ｃｏｕｎｔ−１値が下記の表に示される。 Maximum Stream Count Field (Max_Stream_Count-1 [2 bits]: Indicates the number of maximum audio streams that the sink device can handle. The Max_Stream_Count-1 value is shown in the following table.
オーディオディスクリプタ個数フィールド（ＮＵＭ＿ＨＤＭＩ＿３Ｄ＿ＡＤ）［３ｂｉｔｓ］：３Ｄオーディオディスクリプタの個数を表す。
図１３は、本発明のさらに他の実施の形態にかかるデータ送受信システム１０００−３の構成を示すブロック図である。 FIG. 13 is a block diagram showing the configuration of a data transmission and reception system 1000-3 according to still another embodiment of the present invention.
図１３に示すように、本発明のさらに他の実施の形態にかかるデータ送受信システム１０００−３は、データ送信装置１００−３及びデータ受信装置２００−３を備える。 As shown in FIG. 13, a data transmitting and receiving system 1000-3 according to still another embodiment of the present invention includes a data transmitting apparatus 100-3 and a data receiving apparatus 200-3.
データ送信装置１００−３は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成して、データ受信装置２００−３に送信する。 The data transmission device 100-3 generates display identification information including feature information supported by the sink device for audio data, and transmits the display identification information to the data reception device 200-3.
データ受信装置２００−３は、前記データ送信装置１００−３から前記ディスプレイ識別情報を受信して分析する。このとき、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 The data receiving apparatus 200-3 receives and analyzes the display identification information from the data transmitting apparatus 100-3. At this time, the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
以下、データ送信装置１００−３とデータ受信装置２００−３をさらに詳細に説明する。 Hereinafter, the data transmission device 100-3 and the data reception device 200-3 will be described in more detail.
図１４は、本発明のさらに他の実施の形態にかかるデータ送信装置１００−３の構成を示すブロック図である。 FIG. 14 is a block diagram showing a configuration of a data transmission apparatus 100-3 according to still another embodiment of the present invention.
図１４に示すように、本発明のさらに他の実施の形態にかかるデータ送信装置１００−３は、生成部１３０と送信部１２０を備える。
As shown in FIG. 14, a data transmitting apparatus 100-3 according to another embodiment of the present invention includes a
生成部１３０は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成する構成である。
The
送信部１２０は、データ受信装置２００−３に前記ディスプレイ識別情報を送信する。
The transmitting
このとき、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 At this time, the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
このとき、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 At this time, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports the combination of the main audio and the supplementary audio, and whether the sink device supports the supplementary audio A supplemental audio support field indicating whether the sink device supports language audio data in a plurality of languages, a language support field indicating whether the sink device supports audio data in a plurality of languages, and the sink device serving for multiview content Multiview audio support field indicating whether to support multistream audio data of rt Field), a Maximum Stream Count Field indicating the number of maximum audio streams that the sink device can handle, and an Audio Descriptor Number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can include at least one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
図１５は、本発明のさらに他の実施の形態にかかるデータ受信装置２００−３の構成を示すブロック図である。 FIG. 15 is a block diagram showing a configuration of a data receiving apparatus 200-3 according to still another embodiment of the present invention.
図１５に示すように、本発明のさらに他の実施の形態にかかるデータ受信装置２００−３は、受信部２１０及び分析部２３０を備える。
As shown in FIG. 15, a data receiving apparatus 200-3 according to another embodiment of the present invention includes a receiving
受信部２１０は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報をデータ送信装置１００−３から受信する構成である。
The receiving
分析部２３０は、前記受信されたディスプレイ識別情報を分析する。
The
このとき、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 At this time, the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
また、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports combining of the main audio and the supplementary audio, whether the sink device supports the supplementary audio A supplemental audio support field representing the language, a language support field representing whether the sink device supports audio data of a plurality of languages, the sink device for multi-view content Multiview audio support field indicating whether to support multistream audio data At least at least among a field), a maximum stream count field representing the number of maximum audio streams that can be handled by the sink device, and an audio descriptor number field representing the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can contain one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
一方、本発明の多様な実施の形態にかかる有線インタフェースは、クアッドビューコンテンツ送信を支援できる。クアッドビュー送信のために、ＨＤＭＩ有線インタフェース規格の３Ｄビデオフォーマット規格を活用できる。 Meanwhile, the wired interface according to various embodiments of the present invention can support quad view content transmission. The 3D video format standard of the HDMI wired interface standard can be utilized for quad view transmission.
図１６Ａないし図１６Ｃは、クアッドビュービデオコンテンツを３Ｄインターレースフォーマットで送信する場合、多様なデータ送信フォーマットを示す図である。 16A through 16C illustrate various data transmission formats when transmitting quad view video content in a 3D interlaced format.
また、この場合、ベンダー特定インフォフレーム（Ｖｅｎｄｏｒ−Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｆｒａｍｅ）とベンダー特定データブロック（Ｖｅｎｄｏｒ−ｓｐｅｃｉｆｉｃ Ｄａｔａ Ｂｌｏｃｋ）を修正できる。具体的に従来の３Ｄデュアルビューを定義するフィールドをリザーブ領域まで拡張する。
以下では、本発明の多様な実施の形態にかかる、データ送受信方法を説明する。 Hereinafter, a method of transmitting and receiving data according to various embodiments of the present invention will be described.
図１７は、本発明の一実施の形態にかかるデータ送信方法のフローチャートである。 FIG. 17 is a flowchart of a data transmission method according to an embodiment of the present invention.
図１７に示すように、本発明の一実施の形態にかかるデータ送信方法は、第１サブパケット及び第２サブパケットを含むパケットを生成するステップ（Ｓ１７１０）と、前記生成されたパケットをデータ受信装置に送信するステップ（Ｓ１７２０）とを含み、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 As shown in FIG. 17, in the data transmission method according to one embodiment of the present invention, a step of generating a packet including a first subpacket and a second subpacket (S1710); and data reception of the generated packet And (S1720) transmitting to the device, wherein the first subpacket and the second subpacket include different audio data for the first content.
このとき、前記第１サブパケットは、非障害者のためのオーディオデータを含み、前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことができる。 At this time, the first subpacket may include audio data for a non-disabled person, and the second subpacket may include audio data for a visually impaired person.
また、前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 Also, the first subpacket and the second subpacket may include audio data of different languages.
また、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 The first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータでありうる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in the packet may be common audio data for the first content and the second content.
また、前記パケットは、前記第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含み、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 Also, the packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
図１８は、本発明の一実施の形態にかかるデータ受信方法のフローチャートである。 FIG. 18 is a flowchart of a data receiving method according to an embodiment of the present invention.
図１８に示すように、本発明の他の一実施の形態にかかる、データ受信方法は、データ送信装置から第１サブパケット及び第２サブパケットを含むパケットを受信するステップ（Ｓ１８１０）と、前記受信された第１サブパケット及び前記第２サブパケットをパーシングするステップ（Ｓ１８２０）とを含み、前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含む。 As shown in FIG. 18, according to another embodiment of the present invention, there is provided a data receiving method comprising the steps of: receiving a packet including a first subpacket and a second subpacket from a data transmitting apparatus (S1810); Parsing the received first subpacket and the second subpacket (S1820), wherein the first subpacket and the second subpacket include different audio data for the first content.
また、前記第１サブパケットは、非障害者のためのオーディオデータを含み、前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことができる。 Also, the first subpacket may include audio data for a non-disabled person, and the second subpacket may include audio data for a visually impaired person.
また、前記第１サブパケット及び前記第２サブパケットは、相異なる言語からなるオーディオデータを含むことができる。 Also, the first subpacket and the second subpacket may include audio data of different languages.
このとき、前記第１サブパケットは、前記第２サブパケットに対するオーディオディスクリプションに該当するオーディオデータを含むことができる。 At this time, the first subpacket may include audio data corresponding to an audio description for the second subpacket.
また、前記パケットは、前記第１コンテンツと相異なる第２コンテンツに対するオーディオデータを含む第３サブパケットをさらに含むことができる。 Also, the packet may further include a third subpacket including audio data for a second content different from the first content.
このとき、前記第１サブパケットが含むオーディオデータは、前記第１コンテンツに対する専用オーディオデータで、前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータでありうる。 At this time, audio data included in the first subpacket is dedicated audio data for the first content, audio data included in the third subpacket is dedicated audio data for the second content, and the second sub Audio data included in the packet may be common audio data for the first content and the second content.
また、前記パケットは、前記第２コンテンツに対するオーディオデータを含む第４サブパケットをさらに含み、前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含むことができる。 Also, the packet may further include a fourth subpacket including audio data for the second content, and the third subpacket and the fourth subpacket may include different audio data.
図１９は、本発明の他の実施の形態にかかるデータ送信方法のフローチャートである。 FIG. 19 is a flowchart of a data transmission method according to another embodiment of the present invention.
図１９に示すように、本発明の他の実施の形態にかかる、オーディオメタデータパケットを生成するステップ（Ｓ１９１０）と、前記生成されたオーディオメタデータパケットをデータ受信装置に送信するステップ（Ｓ１９２０）とを含み、前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 As shown in FIG. 19, according to another embodiment of the present invention, the step of generating an audio metadata packet (S1910) and the step of transmitting the generated audio metadata packet to a data receiving apparatus (S1920) And a header of the generated audio metadata packet includes a 3D audio field indicating presence or absence of transmission of the 3D audio sample packet.
また、前記生成されたオーディオメタデータパケットのヘッダは、送信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the generated audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) representing number information of the audio stream to be transmitted.
また、前記生成されたオーディオメタデータパケットのヘッダは、送信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 In addition, the header of the generated audio metadata packet may further include a number of views field indicating number information of different contents to be transmitted.
また、前記生成されたオーディオメタデータパケットのペイロード（ｐａｙｌｏａｄ）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the generated audio metadata packet may be a sub-stream of a multi-stream audio sample packet or a sub-stream of a multi-stream one bit audio sample packet. An audio metadata descriptor field may be included that represents metadata for the packet.
また、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and a multiview indicating whether audio data corresponding to left eye or right eye image in multiview is included. Field (Multivew Field), Language Code Valid Field representing the presence or absence of language identification for audio data (Language Code Valid Field), Auxiliary Audio Valid Field representing the presence or absence of auxiliary audio data (Supplemental Audio Valid Field), Main audio data and the above auxiliary audio Premix auxiliary audio field (pre-indicates presence or absence of premix with data) at least one of an ixed Supplemental Audio Field), a Supplemental Audio Type Field representing a type of the supplemental audio data, and a language code field representing a language code for the audio data Can.
図２０は、本発明の他の実施の形態にかかるデータ受信方法のフローチャートである。 FIG. 20 is a flowchart of a data receiving method according to another embodiment of the present invention.
図２０に示すように、本発明の他の実施の形態にかかる、データ受信方法は、データ送信装置からオーディオメタデータパケットを受信するステップ（Ｓ２０１０）と、前記受信されたオーディオメタデータパケットをパーシングするステップ（Ｓ２０２０）とを含み、前記受信されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を含む。 As shown in FIG. 20, according to another embodiment of the present invention, there is provided a data receiving method comprising the steps of: receiving an audio metadata packet from a data transmitting apparatus (S2010); and parsing the received audio metadata packet. And (S2020), wherein the header of the received audio metadata packet includes a 3D audio field indicating presence or absence of transmission of the 3D audio sample packet.
また、前記オーディオメタデータパケットのヘッダは、受信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include an audio stream number field (Number Of Audio Stream Field) indicating number information of the audio stream to be received.
また、前記オーディオメタデータパケットのヘッダは、受信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the header of the audio metadata packet may further include a number of views field indicating number information of different contents to be received.
また、前記オーディオメタデータパケットのペイロード（ｐａｙｌｏａｄ）は、マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことができる。 Also, the payload of the audio metadata packet may be a meta for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. It may include an audio metadata descriptor field representing data.
また、前記オーディオメタデータディスクリプタフィールドは、緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータ有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, the audio metadata descriptor field is an emergency channel field indicating whether there is an emergency situation broadcast, and a multiview indicating whether audio data corresponding to left eye or right eye image in multiview is included. Field (Multivew Field), Language Code Valid Field representing the presence or absence of language identification for audio data (Language Code Valid Field), Auxiliary Audio Valid Field representing the presence or absence of auxiliary audio data (Supplemental Audio Valid Field), Main audio data and the above auxiliary audio Premix auxiliary audio field (pre-indicates presence or absence of premix with data) at least one of an ixed Supplemental Audio Field), a Supplemental Audio Type Field representing a type of the supplemental audio data, and a language code field representing a language code for the audio data Can.
図２１は、本発明のさらに他の実施の形態にかかるデータ送信方法のフローチャートである。 FIG. 21 is a flowchart of a data transmission method according to another embodiment of the present invention.
図２１に示すように、本発明のさらに他の実施の形態にかかる、データ送信方法は、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を生成するステップ（Ｓ２１１０）と、データ受信装置に前記ディスプレイ識別情報を送信するステップ（Ｓ２１２０）とを含み、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 As shown in FIG. 21, according to still another embodiment of the present invention, a data transmission method comprises: (S2110) generating display identification information including feature information supported by a sink device for audio data; Transmitting the display identification information to a receiving device (S2120), wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
また、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports combining of the main audio and the supplementary audio, whether the sink device supports the supplementary audio A supplemental audio support field representing the language, a language support field representing whether the sink device supports audio data of a plurality of languages, the sink device for multi-view content Multiview audio support field indicating whether to support multistream audio data At least at least among a field), a maximum stream count field representing the number of maximum audio streams that can be handled by the sink device, and an audio descriptor number field representing the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can contain one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
図２２は、本発明のさらに他の実施の形態にかかるデータ受信方法のフローチャートである。 FIG. 22 is a flowchart of a data receiving method according to another embodiment of the present invention.
図２２に示すように、本発明のさらに他の実施の形態にかかるデータ受信方法は、データ送信装置から、オーディオデータに関してシンク装置により支援される特徴情報を含むディスプレイ識別情報を受信するステップ（Ｓ２２１０）と、前記受信されたディスプレイ識別情報を分析するステップ（Ｓ２２２０）とを含み、前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む。 As shown in FIG. 22, the data receiving method according to another embodiment of the present invention receives the display identification information including the feature information supported by the sink device regarding the audio data from the data transmitting device (S2210). And analyzing the received display identification information (S2220), wherein the display identification information represents information on characteristics of the main audio and auxiliary audio supported by the sink device. including.
また、前記メイン／補助オーディオ特性フィールドは、前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことができる。 Also, an audio mix field indicating whether the main / auxiliary audio characteristic field indicates that the sink device supports combining of the main audio and the supplementary audio, whether the sink device supports the supplementary audio A supplemental audio support field representing the language, a language support field representing whether the sink device supports audio data of a plurality of languages, the sink device for multi-view content Multiview audio support field indicating whether to support multistream audio data At least at least among a field), a maximum stream count field representing the number of maximum audio streams that can be handled by the sink device, and an audio descriptor number field representing the number of 3D audio descriptors (Number Of Audio Descriptor Field) It can contain one.
また、前記ディスプレイ識別情報は、前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことができる。 Also, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency situation broadcast reception and processing.
以上では、本発明の実施の形態について図示し説明したが、本発明は、上述した特定の実施の形態に限定されるものではなく、請求の範囲で請求する本発明の要旨から逸脱せずに当該発明が属する技術分野における通常の知識を有した者によって多様な変形実施が可能なことはもちろんで、このような変形実施は、本発明の技術的思想や展望から個別的に理解されてはならない。 Although the embodiment of the present invention has been illustrated and described above, the present invention is not limited to the specific embodiment described above, and does not deviate from the scope of the present invention claimed in the claims. It goes without saying that various modifications can be made by those skilled in the art to which the present invention belongs, and such modifications can be individually understood from the technical idea and perspective of the present invention. It does not.
Claims (39)
第１サブパケット及び第２サブパケットを少なくとも含むパケットを、オーディオストリーム毎に生成するパケット生成部と、
前記生成されたパケットをデータ受信装置に送信する送信部とを備え、
前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含み、
前記パケットはヘッダ及びペイロードを含み、
前記ヘッダは、
前記オーディオストリームに含まれるパケットの順番を示すシーケンス番号フィールドと、サブパケットの有無を示すプレゼントフィールドとを含み、
前記ペイロードは、オーディオタイプ情報フィールドを含み、
前記オーディオタイプ情報フィールドは、サブオーディオタイププレゼントフィールド、サブオーディオタイプフィールド、ミックスオーディオフィールド、及び言語コード有効フィールドを含み、
前記サブオーディオタイププレゼントフィールドは、オーディオデータのサブオーディオが存在するか否かを表し、
前記サブオーディオタイプフィールドは、前記複数のサブパケットのそれぞれに含まれたオーディオデータに対するサブオーディオタイプを表し、
前記ミックスオーディオフィールドは、メインオーディオデータと前記サブオーディオデータとがプレミックスされるか否かを示す１ビットのフィールドであり、
前記言語コード有効フィールドは、前記オーディオデータの有効な言語があるか否かを示す１ビットのフィールドであり、
前記サブオーディオタイププレゼントフィールドが予め設定された第１値に設定されると、前記サブオーディオタイププレゼントフィールドはサブオーディオタイプフィールドを含み、前記サブオーディオタイププレゼントフィールドが予め設定された第２値に設定されると、前記サブオーディオタイプフィールドは無視され、
前記ミックスオーディオフィールドが予め設定された第１値に設定されると、前記オーディオデータは前記メインオーディオ及び前記サブオーディオがプレミックスされたストリームを含み、
前記言語コード有効フィールドが予め設定された第１値に設定されると、前記オーディオデータは言語コードフィールドを含む、データ送信装置。 A data transmission device,
A packet generation unit that generates, for each audio stream, a packet including at least the first subpacket and the second subpacket;
And a transmitter configured to transmit the generated packet to the data receiver.
The first subpacket and the second subpacket include different audio data for the first content,
The packet includes a header and a payload
The header is
Seen including a sequence number field indicating the order of the packets included in the audio stream, and a gift field indicating the presence or absence of sub-packets,
The payload includes an audio type information field,
The audio type information field includes a sub audio type present field, a sub audio type field, a mixed audio field, and a language code valid field.
The sub audio type present field indicates whether sub audio of audio data exists or not.
The sub audio type field indicates a sub audio type for audio data included in each of the plurality of sub packets,
The mixed audio field is a 1-bit field indicating whether main audio data and the sub audio data are premixed or not.
The language code valid field is a 1-bit field indicating whether there is a valid language of the audio data,
When the sub audio type present field is set to a preset first value, the sub audio type present field includes a sub audio type field, and the sub audio type present field is set to a preset second value. And the sub audio type field is ignored.
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the sub audio are premixed,
If the language code valid field is set to the first value previously set, the audio data including a language code field, the data transmission device.
前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことを特徴とする請求項１に記載のデータ送信装置。 The first subpacket includes audio data for a non-disabled person,
The data transmitting apparatus according to claim 1, wherein the second subpacket includes audio data for a visually impaired person.
前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、
前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータであることを特徴とする請求項５に記載のデータ送信装置。 The audio data included in the first subpacket is dedicated audio data for the first content,
Audio data included in the third subpacket is dedicated audio data for the second content,
The data transmission apparatus according to claim 5, wherein audio data included in the second subpacket is common audio data for the first content and the second content.
前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含む、請求項５に記載のデータ送信装置。 The packet further includes a fourth subpacket including audio data for the second content,
The data transmitting apparatus according to claim 5, wherein the third subpacket and the fourth subpacket include different audio data.
データ送信装置から、第１サブパケット及び第２サブパケットを少なくとも含むパケットを、オーディオストリーム毎に受信する受信部と、
前記受信された第１サブパケット及び前記第２サブパケットをパーシングするパーシング部とを備え、
前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含み、
前記パケットはヘッダ及びペイロードを含み、
前記ヘッダは、
前記オーディオストリームに含まれるパケットの順番を示すシーケンス番号フィールドと、サブパケットの有無を示すプレゼントフィールドとを含み、
前記ペイロードは、オーディオタイプ情報フィールドを含み、
前記オーディオタイプ情報フィールドは、サブオーディオタイププレゼントフィールド、サブオーディオタイプフィールド、ミックスオーディオフィールド、及び言語コード有効フィールドを含み、
前記サブオーディオタイププレゼントフィールドは、オーディオデータのサブオーディオが存在するか否かを表し、
前記サブオーディオタイプフィールドは、前記複数のサブパケットのそれぞれに含まれたオーディオデータに対するサブオーディオタイプを表し、
前記ミックスオーディオフィールドは、メインオーディオデータと前記サブオーディオデータとがプレミックスされるか否かを示す１ビットのフィールドであり、
前記言語コード有効フィールドは、前記オーディオデータの有効な言語があるか否かを示す１ビットのフィールドであり、
前記サブオーディオタイププレゼントフィールドが予め設定された第１値に設定されると、前記サブオーディオタイププレゼントフィールドはサブオーディオタイプフィールドを含み、前記サブオーディオタイププレゼントフィールドが予め設定された第２値に設定されると、前記サブオーディオタイプフィールドは無視され、
前記ミックスオーディオフィールドが予め設定された第１値に設定されると、前記オーディオデータは前記メインオーディオ及び前記サブオーディオがプレミックスされたストリームを含み、
前記言語コード有効フィールドが予め設定された第１値に設定されると、前記オーディオデータは言語コードフィールドを含む、データ受信装置。 A data receiving device,
A receiving unit for receiving, for each audio stream, a packet including at least a first subpacket and a second subpacket from the data transmitting apparatus;
And a parsing unit configured to parse the received first subpacket and the second subpacket.
The first subpacket and the second subpacket include different audio data for the first content,
The packet includes a header and a payload
The header is
Seen including a sequence number field indicating the order of the packets included in the audio stream, and a gift field indicating the presence or absence of sub-packets,
The payload includes an audio type information field,
The audio type information field includes a sub audio type present field, a sub audio type field, a mixed audio field, and a language code valid field.
The sub audio type present field indicates whether sub audio of audio data exists or not.
The sub audio type field indicates a sub audio type for audio data included in each of the plurality of sub packets,
The mixed audio field is a 1-bit field indicating whether main audio data and the sub audio data are premixed or not.
The language code valid field is a 1-bit field indicating whether there is a valid language of the audio data,
When the sub audio type present field is set to a preset first value, the sub audio type present field includes a sub audio type field, and the sub audio type present field is set to a preset second value. And the sub audio type field is ignored.
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the sub audio are premixed,
If the language code valid field is set to the first value previously set, the audio data including a language code field, the data receiving apparatus.
前記第２サブパケットは、視覚障害者のためのオーディオデータを含むことを特徴とする請求項８に記載のデータ受信装置。 The first subpacket includes audio data for a non-disabled person,
The data receiving apparatus according to claim 8, wherein the second subpacket includes audio data for a visually impaired person.
前記第３サブパケットが含むオーディオデータは、前記第２コンテンツに対する専用オーディオデータであり、
前記第２サブパケットが含むオーディオデータは、前記第１コンテンツ及び前記第２コンテンツに対する共通オーディオデータであることを特徴とする請求項１２に記載のデータ受信装置。 The audio data included in the first subpacket is dedicated audio data for the first content,
Audio data included in the third subpacket is dedicated audio data for the second content,
The data receiving apparatus according to claim 12, wherein the audio data included in the second subpacket is common audio data for the first content and the second content.
前記第３サブパケットと前記第４サブパケットとは、相異なるオーディオデータを含む、請求項１２に記載のデータ受信装置。 The packet further includes a fourth subpacket including audio data for the second content,
The data receiving apparatus according to claim 12, wherein the third subpacket and the fourth subpacket include different audio data.
第１サブパケット及び第２サブパケットを少なくとも含むパケットを、オーディオストリーム毎に生成してデータ受信装置に送信するデータ送信装置と、
前記データ送信装置から前記パケットを受信するデータ受信装置とを備え、
前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含み、
前記パケットはヘッダ及びペイロードを含み、
前記ヘッダは、
前記オーディオストリームに含まれるパケットの順番を示すシーケンス番号フィールドと、サブパケットの有無を示すプレゼントフィールドとを含み、
前記ペイロードは、オーディオタイプ情報フィールドを含み、
前記オーディオタイプ情報フィールドは、サブオーディオタイププレゼントフィールド、サブオーディオタイプフィールド、ミックスオーディオフィールド、及び言語コード有効フィールドを含み、
前記サブオーディオタイププレゼントフィールドは、オーディオデータのサブオーディオが存在するか否かを表し、
前記サブオーディオタイプフィールドは、前記複数のサブパケットのそれぞれに含まれたオーディオデータに対するサブオーディオタイプを表し、
前記ミックスオーディオフィールドは、メインオーディオデータと前記サブオーディオデータとがプレミックスされるか否かを示す１ビットのフィールドであり、
前記言語コード有効フィールドは、前記オーディオデータの有効な言語があるか否かを示す１ビットのフィールドであり、
前記サブオーディオタイププレゼントフィールドが予め設定された第１値に設定されると、前記サブオーディオタイププレゼントフィールドはサブオーディオタイプフィールドを含み、前記サブオーディオタイププレゼントフィールドが予め設定された第２値に設定されると、前記サブオーディオタイプフィールドは無視され、
前記ミックスオーディオフィールドが予め設定された第１値に設定されると、前記オーディオデータは前記メインオーディオ及び前記サブオーディオがプレミックスされたストリームを含み、
前記言語コード有効フィールドが予め設定された第１値に設定されると、前記オーディオデータは言語コードフィールドを含む、データ送受信システム。 A data transmission / reception system,
A data transmitting apparatus that generates a packet including at least the first subpacket and the second subpacket for each audio stream and transmits the packet to the data receiving apparatus;
A data receiving device for receiving the packet from the data transmitting device;
The first subpacket and the second subpacket include different audio data for the first content,
The packet includes a header and a payload
The header is
Seen including a sequence number field indicating the order of the packets included in the audio stream, and a gift field indicating the presence or absence of sub-packets,
The payload includes an audio type information field,
The audio type information field includes a sub audio type present field, a sub audio type field, a mixed audio field, and a language code valid field.
The sub audio type present field indicates whether sub audio of audio data exists or not.
The sub audio type field indicates a sub audio type for audio data included in each of the plurality of sub packets,
The mixed audio field is a 1-bit field indicating whether main audio data and the sub audio data are premixed or not.
The language code valid field is a 1-bit field indicating whether there is a valid language of the audio data,
When the sub audio type present field is set to a preset first value, the sub audio type present field includes a sub audio type field, and the sub audio type present field is set to a preset second value. And the sub audio type field is ignored.
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the sub audio are premixed,
Wherein the language code valid field is set to the first value previously set, the audio data including a language code field, the data transmission and reception system.
前記生成されたオーディオメタデータパケットをデータ受信装置に送信する送信部とを備え、
前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を、前記プレゼントフィールドとして含む、請求項１に記載のデータ送信装置。 A packet generator for generating audio metadata packets;
A transmitter configured to transmit the generated audio metadata packet to a data receiver;
The data transmitting apparatus according to claim 1, wherein a header of the generated audio metadata packet includes a 3D audio field indicating presence / absence of transmission of a 3D audio sample packet as the present field.
送信されるオーディオストリームの個数情報を表すオーディオストリーム個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｓｔｒｅａｍ Ｆｉｅｌｄ）をさらに含むことを特徴とする請求項１６に記載のデータ送信装置。 The header of the generated audio metadata packet is
The data transmitting apparatus according to claim 16, further comprising an audio stream number field (Number Of Audio Stream Field) indicating number information of audio streams to be transmitted.
送信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことを特徴とする請求項１６に記載のデータ送信装置。 The header of the generated audio metadata packet is
The data transmitting apparatus according to claim 16, further comprising a number of views field (Number Of Views Field) indicating number information of different contents to be transmitted.
マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことを特徴とする請求項１６に記載のデータ送信装置。 The payload of the generated audio metadata packet is
Characterized by including an audio metadata descriptor field representing metadata for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. The data transmission apparatus according to claim 16.
緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータの有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことを特徴とする請求項１９に記載のデータ送信装置。 The audio metadata descriptor field is
Emergency Channel Field, which indicates whether there is an emergency situation broadcast, Multivew Field, which indicates whether audio data corresponding to the left eye or right eye image in multiview is included, language for audio data Language code valid field indicating presence / absence of identification of a language, supplemental audio valid field indicating presence / absence of auxiliary audio data (prescriptive presence / absence of pre-mix between main audio data and the auxiliary audio data) Mixed auxiliary audio field, front The method may further include at least one of a supplemental audio type field representing a type of auxiliary audio data and a language code field representing a language code for audio data. The data transmission device according to.
前記受信されたオーディオメタデータパケットをパーシングするパーシング部とを備え、
前記受信されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ ＡｕｄｉｏＦｉｅｌｄ）を、前記プレゼントフィールドとして含む、請求項８に記載のデータ受信装置。 A receiver for receiving audio metadata packets from the data transmitter;
And a parsing unit that parses the received audio metadata packet.
The data receiving apparatus according to claim 8, wherein a header of the received audio metadata packet includes a 3D audio field (3D AudioField) indicating presence or absence of transmission of a 3D audio sample packet as the present field.
受信される相異なるコンテンツの個数情報を表すビュー個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ｖｉｅｗｓ Ｆｉｅｌｄ）をさらに含むことを特徴とする請求項２１に記載のデータ受信装置。 The header of the audio metadata packet is
The data receiving apparatus according to claim 21, further comprising a number of views field (Number Of Views Field) indicating number information of different contents to be received.
マルチストリームオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）またはマルチストリームワンビットオーディオサンプルパケット（Ｍｕｌｔｉ−ｓｔｒｅａｍ Ｏｎｅ Ｂｉｔ Ａｕｄｉｏ Ｓａｍｐｌｅ Ｐａｃｋｅｔ）のサブパケットに対するメタデータを表すオーディオメタデータディスクリプタフィールドを含むことを特徴とする請求項２１に記載のデータ受信装置。 The payload of the audio metadata packet is
Characterized by including an audio metadata descriptor field representing metadata for a sub-packet of Multi-stream Audio Sample Packet or Multi-stream One Bit Audio Sample Packet. The data receiving apparatus according to claim 21.
緊急状況放送があるかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）、マルチビューにおいて左眼または右眼映像に対応するオーディオデータを含むかどうかを表すマルチビューフィールド（Ｍｕｌｔｉｖｅｗ Ｆｉｅｌｄ）、オーディオデータに対する言語の識別有無を表す言語コード有効フィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｖａｌｉｄ Ｆｉｅｌｄ）、補助オーディオデータの有無を表す補助オーディオ有効フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｖａｌｉｄ Ｆｉｅｌｄ）、メインオーディオデータと前記補助オーディオデータとのプレミックス有無を表すプレミックス補助オーディオフィールド（ｐｒｅ−ｍｉｘｅｄ Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｆｉｅｌｄ）、前記補助オーディオデータのタイプを表す補助オーディオタイプフィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｔｙｐｅ Ｆｉｅｌｄ）、及びオーディオデータに対する言語コードを表す言語コードフィールド（Ｌａｎｇｕａｇｅ Ｃｏｄｅ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことを特徴とする請求項２４に記載のデータ受信装置。 The audio metadata descriptor field is
Emergency Channel Field, which indicates whether there is an emergency situation broadcast, Multivew Field, which indicates whether audio data corresponding to the left eye or right eye image in multiview is included, language for audio data Language code valid field indicating presence / absence of identification of a language, supplemental audio valid field indicating presence / absence of auxiliary audio data (prescriptive presence / absence of pre-mix between main audio data and the auxiliary audio data) Mixed auxiliary audio field, front The method may include at least one of a supplemental audio type field representing a type of supplemental audio data and a language code field representing a language code for audio data. The data receiving device according to.
オーディオメタデータパケットを生成してデータ受信装置に送信するデータ送信装置と、
前記データ送信装置から前記オーディオメタデータパケットを受信するデータ受信装置とを備え、
前記オーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を、前記プレゼントフィールドとして含む、請求項１５に記載のデータ送受信システム。 A data transmission / reception system,
A data transmitting device that generates audio metadata packets and transmits them to the data receiving device;
A data receiving device for receiving the audio metadata packet from the data transmitting device;
The data transmission and reception system according to claim 15, wherein a header of the audio metadata packet includes a 3D audio field indicating presence or absence of transmission of a 3D audio sample packet as the present field.
前記送信部は、データ受信装置に前記ディスプレイ識別情報を送信し、
前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む、請求項１に記載のデータ送信装置。 A generator configured to generate display identification information including feature information supported by the sink device with respect to audio data;
The transmitting unit transmits the display identification information to a data receiving apparatus.
The data transmission device according to claim 1, wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことを特徴とする請求項２７に記載のデータ送信装置。 The main / auxiliary audio characteristic field is
Audio Mix Field, which indicates whether the sink device supports combining of main audio and auxiliary audio, Supplemental Audio Support Field, which indicates whether the sink device supports auxiliary audio A language support field (Language Support Field) indicating whether the sink device supports audio data of multiple languages, indicating whether the sink device supports multi-stream audio data for multi-view content Multiview Audio Support Field, the maximum size that the sink device can handle At least one of a maximum stream count field (Maximum Stream Count Field) indicating the number of audio streams and an audio descriptor number field (Number Of Audio Descriptor Field) indicating the number of 3D audio descriptors The data transmission apparatus according to claim 27.
前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことを特徴とする請求項２７に記載のデータ送信装置。 The display identification information is
The data transmission apparatus of claim 27, further comprising an Emergency Channel Field indicating whether the sink apparatus supports emergency situation broadcast reception and processing.
前記データ受信装置は、前記受信されたディスプレイ識別情報を分析する分析部を備え、
前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む、請求項８に記載のデータ受信装置。 The receiving unit receives, from the data transmission device, display identification information including feature information supported by the sink device regarding audio data.
The data receiving apparatus includes an analysis unit that analyzes the received display identification information.
The data receiving apparatus according to claim 8, wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
前記シンク装置がメインオーディオと補助オーディオとの合成を支援するかどうかを表すオーディオミックスフィールド（Ａｕｄｉｏ Ｍｉｘ Ｆｉｅｌｄ）、前記シンク装置が補助オーディオを支援するかどうかを表す補助オーディオ支援フィールド（Ｓｕｐｐｌｅｍｅｎｔａｌ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置が複数の言語からなるオーディオデータを支援するかどうかを表す言語支援フィールド（Ｌａｎｇｕａｇｅ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がマルチビューコンテンツのためのマルチストリームオーディオデータを支援するかどうかを表すマルチビューオーディオ支援フィールド（Ｍｕｌｔｉｖｉｅｗ Ａｕｄｉｏ Ｓｕｐｐｏｒｔ Ｆｉｅｌｄ）、前記シンク装置がハンドリングできる最大オーディオストリームの個数を表す最大ストリームカウントフィールド（Ｍａｘｉｍｕｍ Ｓｔｒｅａｍ Ｃｏｕｎｔ Ｆｉｅｌｄ）、及び３Ｄオーディオディスクリプタの個数を表すオーディオディスクリプタ個数フィールド（Ｎｕｍｂｅｒ Ｏｆ Ａｕｄｉｏ Ｄｅｓｃｒｉｐｔｏｒ Ｆｉｅｌｄ）のうち、少なくとも一つを含むことを特徴とする請求項３０に記載のデータ受信装置。 The main / auxiliary audio characteristic field is
Audio Mix Field, which indicates whether the sink device supports combining of main audio and auxiliary audio, Supplemental Audio Support Field, which indicates whether the sink device supports auxiliary audio A language support field (Language Support Field) indicating whether the sink device supports audio data of multiple languages, indicating whether the sink device supports multi-stream audio data for multi-view content Multiview Audio Support Field, the maximum size that the sink device can handle At least one of a maximum stream count field (Maximum Stream Count Field) indicating the number of audio streams and an audio descriptor number field (Number Of Audio Descriptor Field) indicating the number of 3D audio descriptors 31. A data receiving apparatus according to claim 30.
前記シンク装置が緊急状況放送受信及び処理を支援するかどうかを表す緊急チャネルフィールド（Ｅｍｅｒｇｅｎｃｙ Ｃｈａｎｎｅｌ Ｆｉｅｌｄ）をさらに含むことを特徴とする請求項３０に記載のデータ受信装置。 The display identification information is
The data receiving apparatus of claim 30, further comprising an Emergency Channel Field indicating whether the sink apparatus supports emergency situation broadcast reception and processing.
前記データ受信装置は、前記データ送信装置から前記ディスプレイ識別情報を受信して分析し、
前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む、請求項１５に記載のデータ送受信システム。 The data transmission apparatus generates display identification information including feature information supported by the sink apparatus for audio data, and transmits the display identification information to the data reception apparatus.
The data receiving apparatus receives and analyzes the display identification information from the data transmitting apparatus.
The data transmission and reception system according to claim 15, wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
第１サブパケット及び第２サブパケットを少なくとも含むパケットを、オーディオストリーム毎に生成するステップと、
前記生成されたパケットをデータ受信装置に送信するステップとを含み、
前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含み、前記パケットはヘッダ及びペイロードを含み、
前記ヘッダは、
前記オーディオストリームに含まれるパケットの順番を示すシーケンス番号フィールドと、サブパケットの有無を示すプレゼントフィールドとを含み、
前記ペイロードは、オーディオタイプ情報フィールドを含み、
前記オーディオタイプ情報フィールドは、サブオーディオタイププレゼントフィールド、サブオーディオタイプフィールド、ミックスオーディオフィールド、及び言語コード有効フィールドを含み、
前記サブオーディオタイププレゼントフィールドは、オーディオデータのサブオーディオが存在するか否かを表し、
前記サブオーディオタイプフィールドは、前記複数のサブパケットのそれぞれに含まれたオーディオデータに対するサブオーディオタイプを表し、
前記ミックスオーディオフィールドは、メインオーディオデータと前記サブオーディオデータとがプレミックスされるか否かを示す１ビットのフィールドであり、
前記言語コード有効フィールドは、前記オーディオデータの有効な言語があるか否かを示す１ビットのフィールドであり、
前記サブオーディオタイププレゼントフィールドが予め設定された第１値に設定されると、前記サブオーディオタイププレゼントフィールドはサブオーディオタイプフィールドを含み、前記サブオーディオタイププレゼントフィールドが予め設定された第２値に設定されると、前記サブオーディオタイプフィールドは無視され、
前記ミックスオーディオフィールドが予め設定された第１値に設定されると、前記オーディオデータは前記メインオーディオ及び前記サブオーディオがプレミックスされたストリームを含み、
前記言語コード有効フィールドが予め設定された第１値に設定されると、前記オーディオデータは言語コードフィールドを含む、データ送信方法。 It is a data transmission method, and
Generating, for each audio stream, a packet including at least the first subpacket and the second subpacket;
Sending the generated packet to a data receiver.
The first subpacket and the second subpacket include different audio data for the first content, and the packet includes a header and a payload,
The header is
Seen including a sequence number field indicating the order of the packets included in the audio stream, and a gift field indicating the presence or absence of sub-packets,
The payload includes an audio type information field,
The audio type information field includes a sub audio type present field, a sub audio type field, a mixed audio field, and a language code valid field.
The sub audio type present field indicates whether sub audio of audio data exists or not.
The sub audio type field indicates a sub audio type for audio data included in each of the plurality of sub packets,
The mixed audio field is a 1-bit field indicating whether main audio data and the sub audio data are premixed or not.
The language code valid field is a 1-bit field indicating whether there is a valid language of the audio data,
When the sub audio type present field is set to a preset first value, the sub audio type present field includes a sub audio type field, and the sub audio type present field is set to a preset second value. And the sub audio type field is ignored.
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the sub audio are premixed,
If the language code valid field is set to the first value previously set, the audio data including a language code field, the data transmission method.
データ送信装置から、第１サブパケット及び第２サブパケットを少なくとも含むパケットを、オーディオストリーム毎に受信するステップと、
前記受信された第１サブパケット及び前記第２サブパケットをパーシングするステップとを含み、
前記第１サブパケット及び前記第２サブパケットは、第１コンテンツに対する相異なるオーディオデータを含み、
前記パケットはヘッダ及びペイロードを含み、
前記ヘッダは、
前記オーディオストリームに含まれるパケットの順番を示すシーケンス番号フィールドと、サブパケットの有無を示すプレゼントフィールドとを含み、
前記ペイロードは、オーディオタイプ情報フィールドを含み、
前記オーディオタイプ情報フィールドは、サブオーディオタイププレゼントフィールド、サブオーディオタイプフィールド、ミックスオーディオフィールド、及び言語コード有効フィールドを含み、
前記サブオーディオタイププレゼントフィールドは、オーディオデータのサブオーディオが存在するか否かを表し、
前記サブオーディオタイプフィールドは、前記複数のサブパケットのそれぞれに含まれたオーディオデータに対するサブオーディオタイプを表し、
前記ミックスオーディオフィールドは、メインオーディオデータと前記サブオーディオデータとがプレミックスされるか否かを示す１ビットのフィールドであり、
前記言語コード有効フィールドは、前記オーディオデータの有効な言語があるか否かを示す１ビットのフィールドであり、
前記サブオーディオタイププレゼントフィールドが予め設定された第１値に設定されると、前記サブオーディオタイププレゼントフィールドはサブオーディオタイプフィールドを含み、前記サブオーディオタイププレゼントフィールドが予め設定された第２値に設定されると、前記サブオーディオタイプフィールドは無視され、
前記ミックスオーディオフィールドが予め設定された第１値に設定されると、前記オーディオデータは前記メインオーディオ及び前記サブオーディオがプレミックスされたストリームを含み、
前記言語コード有効フィールドが予め設定された第１値に設定されると、前記オーディオデータは言語コードフィールドを含む、データ受信方法。 A method of receiving data,
Receiving, for each audio stream, a packet including at least a first subpacket and a second subpacket from the data transmitting apparatus;
Parsing the received first subpacket and the second subpacket.
The first subpacket and the second subpacket include different audio data for the first content,
The packet includes a header and a payload
The header is
Seen including a sequence number field indicating the order of the packets included in the audio stream, and a gift field indicating the presence or absence of sub-packets,
The payload includes an audio type information field,
The audio type information field includes a sub audio type present field, a sub audio type field, a mixed audio field, and a language code valid field.
The sub audio type present field indicates whether sub audio of audio data exists or not.
The sub audio type field indicates a sub audio type for audio data included in each of the plurality of sub packets,
The mixed audio field is a 1-bit field indicating whether main audio data and the sub audio data are premixed or not.
The language code valid field is a 1-bit field indicating whether there is a valid language of the audio data,
When the sub audio type present field is set to a preset first value, the sub audio type present field includes a sub audio type field, and the sub audio type present field is set to a preset second value. And the sub audio type field is ignored.
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the sub audio are premixed,
If the language code valid field is set to the first value previously set, the audio data including a language code field, the data receiving method.
前記生成されたオーディオメタデータパケットをデータ受信装置に送信するステップとを含み、
前記生成されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を、前記プレゼントフィールドとして含む、請求項３４に記載のデータ送信方法。 Generating audio metadata packets;
Sending the generated audio metadata packet to a data receiver.
The data transmission method according to claim 34, wherein a header of the generated audio metadata packet includes a 3D audio field indicating presence or absence of transmission of a 3D audio sample packet as the present field.
前記受信されたオーディオメタデータパケットをパーシングするステップとを含み、
前記受信されたオーディオメタデータパケットのヘッダ（ｈｅａｄｅｒ）は、３Ｄオーディオサンプルパケットの送信有無を表す３Ｄオーディオフィールド（３Ｄ Ａｕｄｉｏ Ｆｉｅｌｄ）を、前記プレゼントフィールドとして含む、請求項３５に記載のデータ受信方法。 Receiving audio metadata packets from a data transmitting device;
Parsing the received audio metadata packet.
The data reception method according to claim 35, wherein a header of the received audio metadata packet includes a 3D audio field indicating presence or absence of transmission of a 3D audio sample packet as the present field.
データ受信装置に前記ディスプレイ識別情報を送信するステップとを含み、
前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む、請求項３４に記載のデータ送信方法。 Generating display identification information including feature information supported by the sink device for audio data;
Sending the display identification information to a data receiver.
The data transmission method according to claim 34, wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
前記データ受信装置は、前記データ送信装置から前記ディスプレイ識別情報を受信して分析し、
前記ディスプレイ識別情報は、前記シンク装置が支援するメインオーディオ及び補助オーディオの特性に対する情報を表すメイン／補助オーディオ特性フィールドを含む、請求項１５に記載のデータ送受信システム。 From the data transmission device, feature information supported by the sink device regarding audio data The data transmission device generates display identification information including feature information supported by the sink device regarding audio data, and transmits it to the data reception device.
The data receiving apparatus receives and analyzes the display identification information from the data transmitting apparatus.
The data transmission and reception system according to claim 15, wherein the display identification information includes a main / auxiliary audio characteristic field representing information on characteristics of the main audio and auxiliary audio supported by the sink device.
Applications Claiming Priority (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201361789803P | 2013-03-15 | 2013-03-15 | |
| US61/789,803 | 2013-03-15 | ||
| US201361802807P | 2013-03-18 | 2013-03-18 | |
| US61/802,807 | 2013-03-18 | ||
| KR1020140025653A KR102180826B1 (en) | 2013-03-15 | 2014-03-04 | Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data |
| KR10-2014-0025653 | 2014-03-04 | ||
| PCT/KR2014/002230 WO2014142627A1 (en) | 2013-03-15 | 2014-03-17 | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016513930A JP2016513930A (en) | 2016-05-16 |
| JP6514649B2 true JP6514649B2 (en) | 2019-05-22 |
Family
ID=51758637
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015562939A Expired - Fee Related JP6514649B2 (en) | 2013-03-15 | 2014-03-17 | Data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method |
| JP2015562938A Expired - Fee Related JP6514648B2 (en) | 2013-03-15 | 2014-03-17 | Data transmission device, data reception device, and data transmission / reception system |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015562938A Expired - Fee Related JP6514648B2 (en) | 2013-03-15 | 2014-03-17 | Data transmission device, data reception device, and data transmission / reception system |
Country Status (3)
| Country | Link |
|---|---|
| JP (2) | JP6514649B2 (en) |
| KR (2) | KR102201826B1 (en) |
| TW (2) | TWI666931B (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10341036B2 (en) | 2015-02-10 | 2019-07-02 | Lg Electronics Inc. | Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method, and broadcast signal reception method |
Family Cites Families (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08331552A (en) * | 1995-05-31 | 1996-12-13 | Alpine Electron Inc | Voice signal processing unit for bs tuner |
| JPH09149399A (en) * | 1995-11-21 | 1997-06-06 | Matsushita Electric Ind Co Ltd | Data transmission system |
| JP3437371B2 (en) * | 1996-03-22 | 2003-08-18 | パイオニア株式会社 | Information recording device and information reproducing device |
| JP4486291B2 (en) * | 1999-07-14 | 2010-06-23 | パナソニック株式会社 | Information providing apparatus, information receiving apparatus, and storage medium |
| US8046792B2 (en) * | 2002-03-20 | 2011-10-25 | Tvworks, Llc | Multi-channel audio enhancement for television |
| US7227899B2 (en) * | 2003-08-13 | 2007-06-05 | Skystream Networks Inc. | Method and system for re-multiplexing of content-modified MPEG-2 transport streams using interpolation of packet arrival times |
| CN101702319B (en) * | 2005-08-09 | 2013-06-12 | 松下电器产业株式会社 | Playback apparatus |
| KR100750143B1 (en) * | 2005-12-05 | 2007-08-21 | 삼성전자주식회사 | Method and apparatus for storing digital broadcasting Signal |
| JP2007281716A (en) * | 2006-04-04 | 2007-10-25 | Sony Corp | Wireless moving picture transmission system, wireless moving picture transmission method, wireless moving picture transmission apparatus, wireless moving picture transmission method, and computer program thereof, wireless moving picture receiving apparatus, wireless moving picture receiving method, and computer program thereof |
| JP2008005112A (en) * | 2006-06-21 | 2008-01-10 | Matsushita Electric Ind Co Ltd | Stream encoder and stream decoder |
| TWI420504B (en) * | 2007-03-19 | 2013-12-21 | Cyberlink Corp | Method and related system capable of multiple displays |
| US8744337B2 (en) * | 2007-06-18 | 2014-06-03 | Qualcomm Incorporated | Apparatus and methods of enhancing radio programming |
| KR100942142B1 (en) * | 2007-10-11 | 2010-02-16 | 한국전자통신연구원 | Method and apparatus for transmitting and receiving of the object based audio contents |
| JP4874284B2 (en) * | 2008-03-27 | 2012-02-15 | パナソニック株式会社 | Digital broadcast receiver |
| JP2009253414A (en) * | 2008-04-02 | 2009-10-29 | Nec Corp | Content delivery system, repeater, terminal device, content delivery method, program and recording medium |
| EP2359599A1 (en) * | 2008-10-31 | 2011-08-24 | Thomson Licensing | Method, apparatus and system for providing supplemental audio/video content |
| JP2010200087A (en) * | 2009-02-26 | 2010-09-09 | Funai Electric Co Ltd | Video apparatus |
| JP2012010311A (en) * | 2010-05-26 | 2012-01-12 | Sony Corp | Transmitter, transmission method, receiver, reception method and transmission/reception system |
| KR20120016407A (en) * | 2010-08-16 | 2012-02-24 | 엘지전자 주식회사 | Operating method of display system outputting audio description for the visually impaired and display system enabling of the method |
| JP2012049934A (en) * | 2010-08-30 | 2012-03-08 | Hitachi Consumer Electronics Co Ltd | Transmission system |
| JP2012060205A (en) * | 2010-09-06 | 2012-03-22 | Hitachi Consumer Electronics Co Ltd | Display system, display device, and repeating device |
| EP2451196A1 (en) * | 2010-11-05 | 2012-05-09 | Thomson Licensing | Method and apparatus for generating and for decoding sound field data including ambisonics sound field data of an order higher than three |
| JP2012151688A (en) * | 2011-01-19 | 2012-08-09 | Canon Inc | Video reproduction device and method of controlling the same, program, and storage medium |
| US9398322B2 (en) * | 2011-04-27 | 2016-07-19 | Time Warner Cable Enterprises Llc | Multi-lingual audio streaming |
| JP2012253439A (en) * | 2011-05-31 | 2012-12-20 | Kddi Corp | Multimedia device |
| US20140118616A1 (en) * | 2012-10-26 | 2014-05-01 | Cox Communications, Inc. | Systems and Methods of Video Delivery to a Multilingual Audience |
-
2014
- 2014-03-03 KR KR1020140025030A patent/KR102201826B1/en active IP Right Grant
- 2014-03-04 KR KR1020140025653A patent/KR102180826B1/en active IP Right Grant
- 2014-03-14 TW TW103109537A patent/TWI666931B/en not_active IP Right Cessation
- 2014-03-14 TW TW103109532A patent/TWI625056B/en not_active IP Right Cessation
- 2014-03-17 JP JP2015562939A patent/JP6514649B2/en not_active Expired - Fee Related
- 2014-03-17 JP JP2015562938A patent/JP6514648B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP6514648B2 (en) | 2019-05-15 |
| TWI625056B (en) | 2018-05-21 |
| TWI666931B (en) | 2019-07-21 |
| TW201438460A (en) | 2014-10-01 |
| KR102201826B1 (en) | 2021-01-12 |
| TW201442494A (en) | 2014-11-01 |
| JP2016513930A (en) | 2016-05-16 |
| JP2016515352A (en) | 2016-05-26 |
| KR20140115245A (en) | 2014-09-30 |
| KR102180826B1 (en) | 2020-11-20 |
| KR20140115247A (en) | 2014-09-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104053039B (en) | Data transmitter-receiver set, data receiving-transmitting system and data receiving-transmitting method | |
| US9723245B2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data | |
| US9313576B2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, data transmitting method, and data receiving method | |
| CN102655584A (en) | Media data transmitting and playing method and system in tele-presence technology | |
| US20130222690A1 (en) | Data transmission apparatus, data receiving apparatus, data transceiving system, data transmission method and data receiving method | |
| US20150319405A1 (en) | Method for Synchronizing A/V Streams | |
| JP6449318B2 (en) | Transmitter, receiver and system for synchronous transmission of auxiliary data frames via HDMI interface | |
| JP6514649B2 (en) | Data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method | |
| WO2020137767A1 (en) | Transmission device, transmission method, reception device and reception method | |
| CN111107282A (en) | Video switching method, video switcher, electronic device and storage medium | |
| KR102012231B1 (en) | Data transmitting apparatus, data receiving apparatus, data transreceiving system, data transmitting method, data receiving method and data transreceiving method | |
| KR20210011916A (en) | Transmission device, transmission method, reception device and reception method | |
| US12003886B2 (en) | Transmission device, transmission method, reception device, and reception method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170307 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171221 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180426 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180821 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181221 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20190109 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190319 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190412 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6514649 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |