JP2021105735A - 受信装置および受信方法 - Google Patents

受信装置および受信方法 Download PDF

Info

Publication number
JP2021105735A
JP2021105735A JP2021063962A JP2021063962A JP2021105735A JP 2021105735 A JP2021105735 A JP 2021105735A JP 2021063962 A JP2021063962 A JP 2021063962A JP 2021063962 A JP2021063962 A JP 2021063962A JP 2021105735 A JP2021105735 A JP 2021105735A
Authority
JP
Japan
Prior art keywords
stream
audio
coded data
information
groups
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021063962A
Other languages
English (en)
Other versions
JP7310849B2 (ja
Inventor
塚越　郁夫
Ikuo Tsukagoshi
郁夫 塚越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Publication of JP2021105735A publication Critical patent/JP2021105735A/ja
Priority to JP2023031397A priority Critical patent/JP2023081933A/ja
Application granted granted Critical
Publication of JP7310849B2 publication Critical patent/JP7310849B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Stereophonic System (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Television Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

【課題】複数種類のオーディデータを送信する場合にあって受信側の処理負荷を軽減する。【解決手段】複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する。例えば、複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる。コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する。例えば、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報をさらに挿入する。【選択図】図１４

Description

本技術は、送信装置、送信方法、受信装置および受信方法に関し、特に、複数種類のオーディオデータを送信する送信装置等に関する。
従来、立体（３Ｄ）音響技術として、符号化サンプルデータをメタデータに基づいて任意の位置に存在するスピーカにマッピングさせてレンダリングする技術が提案されている（例えば、特許文献１参照）。
特表２０１４−５２０４９１号公報
５．１チャネル、７．１チャネルなどのチャネル符号化データと共に、符号化サンプルデータおよびメタデータからなるオブジェクト符号化データを送信し、受信側において臨場感を高めた音響再生を可能とすることが考えられる。
本技術の目的は、複数種類のオーディデータを送信する場合にあって受信側の処理負荷を軽減することにある。
本技術の概念は、
複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する送信部と、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する情報挿入部を備える
送信装置にある。
本技術において、送信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナが送信される。例えば、複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる、ようにされてもよい。
情報挿入部により、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入される。例えば、コンテナは、デジタル放送規格で採用されているトランスポートストリーム（ＭＰＥＧ−２ ＴＳ）であってもよい。また、例えば、コンテナは、インターネットの配信などで用いられるＭＰ４、あるいはそれ以外のフォーマットのコンテナであってもよい。
このように本技術においては、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、所定数のオーディオストリームに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入される。そのため、受信側では、複数のグループの符号化データのそれぞれの属性を当該符号化データのデコード前に容易に認識でき、必要なグループの符号化データのみを選択的にデコードして用いることができ、処理負荷を軽減することが可能となる。
なお、本技術において、例えば、情報挿入部は、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報をさらに挿入する、ようにされてもよい。これにより、受信側では、必要なグループの符号化データが含まれるオーディオストリームを容易に認識でき、処理負荷を軽減することが可能となる。
この場合、例えば、コンテナは、ＭＰＥＧ２−ＴＳであり、情報挿入部は、属性情報およびストリーム対応関係情報をコンテナに挿入する場合、この属性情報およびストリーム対応関係情報を、プログラムマップテーブルの配下に存在する所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームに対応したオーディオエレメンタリストリームループ内に挿入する、ようにされてもよい。
また、この場合、例えば、情報挿入部は、属性情報およびストリーム対応関係情報をオーディオストリームのレイヤに挿入する場合、この属性情報およびストリーム対応関係情報を、所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームのＰＥＳパケットのＰＥＳペイロード内に挿入する、ようにされてもよい。
例えば、ストリーム対応関係情報は、複数のグループの符号化データのそれぞれを識別するグループ識別子と所定数のオーディオストリームのそれぞれのストリームを識別するストリーム識別子との対応関係を示す情報である、ようにされてもよい。この場合、例えば、情報挿入部は、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報をさらに挿入する、ようにされてもよい。
例えば、コンテナは、ＭＰＥＧ２−ＴＳであり、情報挿入部は、ストリーム識別子情報をコンテナに挿入する場合、このストリーム識別子情報をプログラムマップテーブルの配下に存在する所定数のオーディオストリームのそれぞれに対応したオーディオエレメンタリストリームループ内に挿入する、ようにされてもよい。また、例えば、情報挿入部は、ストリーム識別子情報をオーディオストリームに挿入する場合、このストリーム識別子情報を所定数のオーディオストリームのそれぞれのＰＥＳパケットのＰＥＳペイロード内に挿入する、ようにされてもよい。
また、例えば、ストリーム対応関係情報は、複数のグループの符号化データのそれぞれを識別するグループ識別子と所定数のオーディオストリームのそれぞれをパケット化する際に付されるパケット識別子との対応関係を示す情報である、ようにされてもよい。また、例えば、ストリーム対応関係情報は、複数のグループの符号化データのそれぞれを識別するグループ識別子と所定数のオーディオストリームのそれぞれのストリームタイプを示すタイプ情報との対応関係を示す情報である、ようにされてもよい。
また、本技術の他の概念は、
複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームを、上記属性情報に基づいて処理する処理部をさらに備える
受信装置にある。
本技術において、受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナが受信される。例えば、複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる、ようにされてもよい。コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されている。処理部により、受信されたコンテナが有する所定数のオーディオストリームが、その属性情報に基づいて処理される。
このように本技術においては、コンテナのレイヤおよび/またはオーディオストリームのレイヤに挿入されている複数のグループの符号化データのそれぞれの属性を示す属性情報に基づいて、受信されたコンテナが有する所定数のオーディオストリームの処理が行われる。そのため、必要なグループの符号化データのみを選択的に復号化して用いることができ、処理負荷を軽減することが可能となる。
なお、本技術において、例えば、コンテナのレイヤおよび/またはオーディオストリームのレイヤには、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、処理部は、属性情報の他に、ストリーム対応関係情報に基づいて所定数のオーディオストリームを処理する、ようにされてもよい。この場合、必要なグループの符号化データが含まれるオーディオストリームを容易に認識でき、処理負荷を軽減することが可能となる。
また、本技術において、例えば、処理部は、属性情報およびストリーム対応関係情報に基づいて、スピーカ構成およびユーザ選択情報に適合する属性を持つグループの符号化データを含むオーディオストリームに対して選択的にデコード処理を施す、ようにされてもよい。
また、本技術のさらに他の概念は、
複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームから上記属性情報に基づいて所定のグループの符号化データを選択的に取得し、該所定のグループの符号化データを含むオーディオストリームを再構成する処理部と、
上記処理部で再構成されたオーディオストリームを外部機器に送信するストリーム送信部をさらに備える
受信装置にある。
本技術において、受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナが受信される。コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されている。処理部により、所定数のオーディオストリームから属性情報に基づいて所定のグループの符号化データが選択的に取得され、この所定のグループの符号化データを含むオーディオストリームが再構成される。そして、ストリーム送信部により、再構成されたオーディオストリームが外部機器に送信される。
このように本技術においては、コンテナのレイヤおよび/またはオーディオストリームのレイヤに挿入されている複数のグループの符号化データのそれぞれの属性を示す属性情報に基づいて、所定数のオーディオストリームから所定のグループの符号化データが選択的に取得されて、外部機器に送信すべきオーディオストリームが再構成される。必要なグループの符号化データの取得を容易に行うことができ、処理負荷を軽減することが可能となる。
なお、本技術において、例えば、コンテナのレイヤおよび/またはオーディオストリームのレイヤには、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、処理部は、属性情報の他に、ストリーム対応関係情報に基づいて、所定数のオーディオストリームから所定のグループの符号化データを選択的に取得する、ようにされてもよい。この場合、所定グループの符号化データが含まれるオーディオストリームを容易に認識でき、処理負荷を軽減することが可能となる。
本技術によれば、複数種類のオーディデータを送信する場合にあって受信側の処理負荷を軽減することが可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としての送受信システムの構成例を示すブロック図である。 ３Ｄオーディオの伝送データにおけるオーディオフレーム（１０２４サンプル）の構造を示す図である。 ３Ｄオーディオの伝送データの構成例を示す図である。 ３Ｄオーディオの伝送データを１ストリームで送信する場合および複数ストリームで送信する場合におけるオーディオフレームの構成例を概略的に示す図である。 ３Ｄオーディオの伝送データの構成例において、２ストリームで送信する場合のグループ分割例を示す図である。 グループ分割例（２分割）におけるグループとストリームの対応関係などを示す図である。 ３Ｄオーディオの伝送データの構成例において、２ストリームで送信する場合のグループ分割例を示す図である。 グループ分割例（２分割）におけるグループとストリームの対応関係などを示す図である。 サービス送信機が備えるストリーム生成部の構成例を示すブロック図である。 ３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタの構造例を示す図である。 ３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタの構造例における主要な情報の内容を示している。 「contentKind」に定義されているコンテンツの種類を示す図である。 ３Ｄオーディオ・ストリームＩＤ・デスクリプタの構造例と、その構造例における主要な情報の内容を示す図である。 トランスポートストリームの構成例を示す図である。 サービス受信機の構成例を示すブロック図である。 受信オーディオストリームの一例を示す図である。 デスクリプタ情報がオーディオストリーム中に存在しない場合におけるデコード処理を概略的に示す図である。 デスクリプタ情報がオーディオストリーム中に存在しない場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の構成例を示す図である。 デスクリプタ情報がオーディオストリーム中に存在する場合におけるデコード処理を概略的に示す図である。 デスクリプタ情報がオーディオストリーム中に存在する場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の構成例を示す図である。 デスクリプタ情報がオーディオストリーム中に存在する場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の他の構成例を示す図である。 サービス受信機におけるＣＰＵのオーディオデコード制御処理の一例を示すフローチャート（１/２）である。 サービス受信機におけるＣＰＵのオーディオデコード制御処理の一例を示すフローチャート（２/２）である。 サービス受信機の他の構成例を示すブロック図である。
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例
＜１．実施の形態＞
［送受信システムの構成例］
図１は、実施の形態としての送受信システム１０の構成例を示している。この送受信システム１０は、サービス送信機１００とサービス受信機２００により構成されている。サービス送信機１００は、トランスポートストリームＴＳを、放送波あるいはネットのパケットに載せて送信する。このトランスポートストリームＴＳは、ビデオストリームと、複数のグループの符号化データを含む所定数、つまり一つまたは複数のオーディオストリームを有している。
図２は、この実施の形態で取り扱う３Ｄオーディオの伝送データにおけるオーディオフレーム（１０２４サンプル）の構造を示している。このオーディオフレームは、複数のＭＰＥＧオーディオストリームパケット（mpeg Audio Stream Packet）からなっている。各ＭＰＥＧオーディオストリームパケットは、ヘッダ（Header）とペイロード（Payload）により構成されている。
ヘッダは、パケットタイプ（Packet Type）、パケットラベル（Packet Label）、パケットレングス（Packet Length）などの情報を持つ。ペイロードには、ヘッダのパケットタイプで定義された情報が配置される。このペイロード情報には、同期スタートコードに相当する“ＳＹＮＣ”と、３Ｄオーディオの伝送データの実際のデータである“Ｆｒａｍｅ”と、この“Ｆｒａｍｅ”の構成を示す“Ｃｏｎｆｉｇ”が存在する。
“Ｆｒａｍｅ”には、３Ｄオーディオの伝送データを構成するチャネル符号化データとオブジェクト符号化データが含まれる。ここで、チャネル符号化データは、ＳＣＥ（Single Channel Element）、ＣＰＥ（Channel Pair Element）、ＬＦＥ（Low Frequency Element）などの符号化サンプルデータで構成される。また、オブジェクト符号化データは、ＳＣＥ（Single Channel Element）の符号化サンプルデータと、それを任意の位置に存在するスピーカにマッピングさせてレンダリングするためのメタデータにより構成される。このメタデータは、エクステンションエレメント（Ext_element）として含まれる。
図３は、３Ｄオーディオの伝送データの構成例を示している。この例では、１つのチャネル符号化データと２つのオブジェクト符号化データとからなっている。１つのチャネル符号化データは、５．１チャネルのチャネル符号化データ（ＣＤ）であり、ＳＣＥ１，ＣＰＥ１．１，ＣＰＥ１．２，ＬＦＥ１の各符号化サンプルデータからなっている。
２つのオブジェクト符号化データは、イマーシブオーディオオブジェクト（ＩＡＯ：Immersive audio object）およびスピーチダイアログオブジェクト（ＳＤＯ：Speech Dialog object）の符号化データである。イマーシブオーディオオブジェクト符号化データは、イマーシブサウンドのためのオブジェクト符号化データであり、符号化サンプルデータＳＣＥ２と、それを任意の位置に存在するスピーカにマッピングさせてレンダリングするためのメタデータＥＸＥ＿Ｅｌ（Object metadata）２とからなっている。
スピーチダイアログオブジェクト符号化データは、スピーチランゲージのためのオブジェクト符号化データである。この例では、第１、第２の言語のそれぞれに対応したスピーチダイアログオブジェクト符号化データが存在する。第１の言語に対応したスピーチダイアログオブジェクト符号化データは、符号化サンプルデータＳＣＥ３と、それを任意の位置に存在するスピーカにマッピングさせてレンダリングするためのメタデータＥＸＥ＿Ｅｌ（Object metadata）３とからなっている。また、第２の言語に対応したスピーチダイアログオブジェクト符号化データは、符号化サンプルデータＳＣＥ４と、それを任意の位置に存在するスピーカにマッピングさせてレンダリングするためのメタデータＥＸＥ＿Ｅｌ（Object metadata）４とからなっている。
符号化データは、種類別にグループ（Group）という概念で区別される。図示の例では、５．１チャネルの符号化チャネルデータはグループ１とされ、イマーシブオーディオオブジェクト符号化データはグループ２とされ、第１の言語に係るスピーチダイアログオブジェクト符号化データはグループ３とされ、第２の言語に係るスピーチダイアログオブジェクト符号化データはグループ４とされている。
また、受信側においてグループ間で選択できるものはスイッチグループ（SW Group）に登録されて符号化される。また、グループを束ねてプリセットグループ（preset Group）とされ、ユースケースに応じた再生が可能とされる。図示の例では、グループ１、グループ２およびグループ３が束ねられてプリセットグループ１とされ、グループ１、グループ２およびグループ４が束ねられてプリセットグループ２とされている。
図１に戻って、サービス送信機１００は、上述したように複数のグループの符号化データを含む３Ｄオーディオの伝送データを、１ストリーム、あるいは複数ストリーム（Multiple stream）で送信する。
図４（ａ）は、図３の３Ｄオーディオの伝送データの構成例において、１ストリーム（メインストリーム）で送信する場合におけるオーディオフレームの構成例を概略的に示している。この場合、この１ストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、チャネル符号化データ（ＣＤ）、イマーシブオーディオオブジェクト符号化データ（ＩＡＯ）、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。
図４（ｂ）は、図３の３Ｄオーディオの伝送データの構成例において、複数ストリームここでは２ストリームで送信する場合におけるオーディオフレームの構成例を概略的に示している。この場合、メインストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、チャネル符号化データ（ＣＤ）とイマーシブオーディオオブジェクト符号化データ（ＩＡＯ）が含まれる。また、サブストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。
図５は、図３の３Ｄオーディオの伝送データの構成例において、２ストリームで送信する場合のグループ分割例を示している。この場合、メインストリームには、グループ１として区別されるチャネル符号化データ（ＣＤ）と、グループ２として区別されるイマーシブオーディオオブジェクト符号化データ（ＩＡＯ）が含まれる。また、サブストリームには、グループ３として区別される第１の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）と、グループ４として区別される第２の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。
図６は、図５のグループ分割例（２分割）におけるグループとストリームの対応関係などを示している。ここで、グループＩＤ（group ID）は、グループを識別するための識別子である。アトリビュート（attribute）は、各グループの符号化データの属性を示している。スイッチグループＩＤ（switch Group ID）は、スイッチンググループを識別するための識別子である。リセットグループＩＤ（preset Group ID）は、プリセットグループを識別するための識別子である。ストリームＩＤ（sub Stream ID）は、サブストリームを識別するための識別子である。カインド（Kind）は、各グループのコンテンツの種類を示している。
図示の対応関係は、グループ１に属する符号化データは、チャネル符号化データであって、スイッチグループを構成しておらず、ストリーム１に含まれている、ことを示している。また、図示の対応関係は、グループ２に属する符号化データは、イマーシブサウンドのためのオブジェクト符号化データ（イマーシブオーディオオブジェクト符号化データ）であって、スイッチグループを構成しておらず、ストリーム１に含まれている、ことを示している。
また、図示の対応関係は、グループ３に属する符号化データは、第１の言語のスピーチランゲージのためのオブジェクト符号化データ（スピーチダイアログオブジェクト符号化データ）であって、スイッチグループ１を構成しており、ストリーム２に含まれている、ことを示している。また、図示の対応関係は、グループ４に属する符号化データは、第２の言語のスピーチランゲージのためのオブジェクト符号化データ（スピーチダイアログオブジェクト符号化データ）であって、スイッチグループ１を構成しており、ストリーム２に含まれている、ことを示している。
また、図示の対応関係は、プリセットグループ１は、グループ１、グループ２およびグループ３を含む、ことが示されている。さらに、図示の対応関係は、プリセットグループ２は、グループ１、グループ２およびグループ４を含む、ことが示されている。
図７は、３Ｄオーディオの伝送データの構成例において、２ストリームで送信する場合のグループ分割例を示している。この場合、メインストリームには、グループ１として区別されるチャネル符号化データ（ＣＤ）と、グループ２として区別されるイマーシブオーディオオブジェクト符号化データ（ＩＡＯ）が含まれる。
また、このメインストリームには、グループ５として区別されるＳＡＯＣ（Spatial Audio Object Coding）オブジェクト符号化データと、グループ６として区別されるＨＯＡ（Higher Order Ambisonics）オブジェクト符号化データが含まれる。ＳＡＯＣオブジェクト符号化データは、オブジェクトデータの特性を利用して、オブジェクト符号化のより高圧縮を行うためのデータである。ＨＯＡオブジェクト符号化データは、３Ｄサウンドを音場全体として扱う技術で、マイクへの音の到来方向から聴覚位置に音の方向の再現を目指すためのデータである。
サブストリームには、グループ３として区別される第１の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）と、グループ４として区別される第２の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。また、このサブストリームには、グループ７として区別される第１のオーディオデスクリプション符号化データと、グループ８として区別される第２のオーディオデスクリプション符号化データが含まれる。オーディオデスクリプション符号化データは、コンテンツ（主に映像）の解説を音声で行うためのデータで、主に視覚障害者向けに通常の音声とは別に伝送するためのデータである。
図８は、図７のグループ分割例（２分割）におけるグループとサブストリームの対応関係などを示している。図示の対応関係は、グループ１に属する符号化データは、チャネル符号化データであって、スイッチグループを構成しておらず、ストリーム１に含まれている、ことを示している。また、図示の対応関係は、グループ２に属する符号化データは、イマーシブサウンドのためのオブジェクト符号化データ（イマーシブオーディオオブジェクト符号化データ）であって、スイッチグループを構成しておらず、ストリーム１に含まれている、ことを示している。
また、図示の対応関係は、グループ３に属する符号化データは、第１の言語のスピーチランゲージのためのオブジェクト符号化データ（スピーチダイアログオブジェクト符号化データ）であって、スイッチグループ１を構成しており、ストリーム２に含まれている、ことを示している。また、図示の対応関係は、グループ４に属する符号化データは、第２の言語のスピーチランゲージのためのオブジェクト符号化データ（スピーチダイアログオブジェクト符号化データ）であって、スイッチグループ１を構成しており、ストリーム２に含まれている、ことを示している。
また、図示の対応関係は、グループ５に属する符号化データは、ＳＡＯＣオブジェクト符号化データであって、スイッチグループ２を構成しており、ストリーム１に含まれている、ことを示している。また、図示の対応関係は、グループ６に属する符号化データは、ＨＯＡオブジェクト符号化データであって、スイッチグループ２を構成しており、ストリーム１に含まれている、ことを示している。
また、図示の対応関係は、グループ７に属する符号化データは、第１のオーディオデスクリプションのオブジェクト符号化データであって、スイッチグループ３を構成しており、ストリーム２に含まれている、ことを示している。また、図示の対応関係は、グループ８に属する符号化データは、第２のオーディオデスクリプションのオブジェクト符号化データであって、スイッチグループ３を構成しており、ストリーム２に含まれている、ことを示している。
また、図示の対応関係は、プリセットグループ１は、グループ１、グループ２、グループ３およびグループ７を含む、ことが示されている。さらに、図示の対応関係は、プリセットグループ２は、グループ１、グループ２、グループ４およびグループ８を含む、ことが示されている。
図１に戻って、サービス送信機１００は、コンテナのレイヤに、３Ｄオーディオの伝送データに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する。また、サービス送信機１００は、コンテナのレイヤに、この複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報を挿入する。この実施の形態において、このストリーム対応関係情報は、例えば、グループＩＤとストリーム識別子との対応関係を示す情報とされる。
サービス送信機１００は、これらの属性情報およびストリーム対応関係情報を、例えば、プログラムマップテーブル（ＰＭＴ：Program Map Table）の配下に存在する所定数のオーディオストリームのうち１つ以上のオーディオストリームに対応したオーディオエレメンタリストリームループ内にデスクリプタとして挿入する。
また、サービス送信機１００は、コンテナのレイヤに、所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報を挿入する。サービス送信機１００は、このストリーム識別子情報を、例えば、プログラムマップテーブル（ＰＭＴ：Program Map Table）の配下に存在する所定数のオーディオストリームのそれぞれに対応したオーディオエレメンタリストリームループ内にデスクリプタとして挿入する。
また、サービス送信機１００は、オーディオストリームのレイヤに、３Ｄオーディオの伝送データに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する。また、サービス送信機１００は、オーディオストリームのレイヤに、この複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報を挿入する。サービス送信機１００は、これらの属性情報およびストリーム対応関係情報を、例えば、所定数のオーディオストリームのうち１つ以上のオーディオストリームのＰＥＳパケットのＰＥＳペイロードに挿入する。
また、サービス送信機１００は、オーディオストリームのレイヤに、所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報を挿入する。サービス送信機１００は、このストリーム識別子情報を、例えば、所定数のオーディオストリームのそれぞれのＰＥＳパケットのＰＥＳペイロードに挿入する。
サービス送信機１００は、これらのオーディオストリームのレイヤへの情報挿入を、図４（ａ），（ｂ）に示すように、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、“Ｄｅｓｃ”、つまりデスクリプタ情報を挿入することで行う。
なお、この実施の形態においては、コンテナのレイヤおよびオーディオストリームのレイヤの双方に、上述したように各情報（属性情報、ストリーム対応関係情報、ストリーム識別子情報）を挿入する例を示したが、コンテナのレイヤのみ、あるいはオーディオストリームのレイヤのみに各情報を挿入することも考えられる。
サービス受信機２００は、サービス送信機１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳを受信する。このトランスポートストリームＴＳは、上述したように、ビデオストリームの他に、３Ｄオーディオの伝送データを構成する複数のグループの符号化データを含む所定数のオーディオストリームを有している。
そして、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、３Ｄオーディオの伝送データに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されていると共に、この複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報が挿入されている。
サービス受信機２００は、属性情報およびストリーム対応関係情報に基づいて、スピーカ構成およびユーザ選択情報に適合する属性を持つグループの符号化データを含むオーディオストリームに対して選択的にデコード処理を行って、３Ｄオーディオのオーディオ出力を得る。
［サービス送信機のストリーム生成部］
図９は、サービス送信機１００が備えるストリーム生成部１１０の構成例を示している。このストリーム生成部１１０は、ビデオエンコーダ１１２と、オーディオエンコーダ１１３と、マルチプレクサ１１４を有している。ここでは、オーディオの伝送データが、図３に示すように、１つの符号化チャネルデータと２つのオブジェクト符号化データとからなる例とする。
ビデオエンコーダ１１２は、ビデオデータＳＶを入力し、このビデオデータＳＶに対して符号化を施し、ビデオストリーム（ビデオエレメンタリストリーム）を生成する。オーディオエンコーダ１１３は、オーディオデータＳＡとして、チャネルデータと共に、イマーシブオーディオおよびスピーチダイアログのオブジェクトデータを入力する。
オーディオエンコーダ１１３は、オーディオデータＳＡに対して符号化を施し、３Ｄオーディオの伝送データを得る。この３Ｄオーディオの伝送データには、図３に示すように、チャネル符号化データ（ＣＤ）と、イマーシブオーディオオブジェクト符号化データ（ＩＡＯ）と、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。
オーディオエンコーダ１１３は、複数のグループ、ここでは４つのグループの符号化データ含む１つまたは複数のオーディオストリーム（オーディオエレメンタリストリーム）を生成する（図４（ａ），（ｂ）参照）。このとき、オーディオエンコーダ１１３は、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、上述したように属性情報、ストリーム対応関係情報、さらにはストリーム識別子情報を含むデスクリプタ情報（“Ｄｅｓｃ”）を挿入する。
マルチプレクサ１１４は、ビデオエンコーダ１１２から出力されるビデオストリームおよびオーディオエンコーダ１１３から出力される所定数のオーディオストリームを、それぞれ、ＰＥＳパケット化し、さらにトランスポートパケット化して多重し、多重化ストリームとしてのトランスポートストリームＴＳを得る。
また、マルチプレクサ１１４は、プログラムマップテーブル（ＰＭＴ）の配下に、複数のグループの符号化データのそれぞれの属性を示す属性情報と、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報を挿入する。マルチプレクサ１１４は、これらの情報を、所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームに対応したオーディオ・エレメンタリストリームループ内に、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタ（3Daudio_stream_config_descriptor）を用いて挿入する。このデスクリプタの詳細については後述する。
また、マルチプレクサ１１４は、プログラムマップテーブル（ＰＭＴ）の配下に、所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報を挿入する。マルチプレクサ１１４は、この情報を、所定数のオーディオストリームのそれぞれに対応したオーディオ・エレメンタリストリームループ内に、３Ｄオーディオ・ストリームＩＤ・デスクリプタ（3Daudio_substreamID_descriptor）を用いて挿入する。このデスクリプタの詳細については後述する。
図９に示すストリーム生成部１１０の動作を簡単に説明する。ビデオデータは、ビデオエンコーダ１１２に供給される。このビデオエンコーダ１１２では、ビデオデータＳＶに対して符号化が施され、符号化ビデオデータを含むビデオストリームが生成される。このビデオストリームは、マルチプレクサ１１４に供給される。
オーディオデータＳＡは、オーディオエンコーダ１１３に供給される。このオーディオデータＳＡには、チャネルデータと、イマーシブオーディオおよびスピーチダイアログのオブジェクトデータが含まれる。オーディオエンコーダ１１３では、オーディオデータＳＡに対して符号化が施され、３Ｄオーディオの伝送データが得られる。
この３Ｄオーディオの伝送データには、チャネル符号化データ（ＣＤ）の他に、イマーシブオーディオオブジェクト符号化データ（ＩＡＯ）と、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる（図３参照）。そして、このオーディオエンコーダ１１３では、４つのグループの符号化データ含む１つまたは複数のオーディオストリームが生成される（図４（ａ），（ｂ）参照）。
このとき、オーディオエンコーダ１１３では、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、上述した属性情報、ストリーム対応関係情報およびストリーム識別子情報などを含むデスクリプタ情報（“Ｄｅｓｃ”）が挿入される。
ビデオエンコーダ１１２で生成されたビデオストリームは、マルチプレクサ１１４に供給される。また、オーディオエンコーダ１１３で生成されたオーディオストリームは、マルチプレクサ１１４に供給される。マルチプレクサ１１４では、各エンコーダから供給されるストリームがＰＥＳパケット化され、さらにトランスポートパケット化されて多重され、多重化ストリームとしてのトランスポートストリームＴＳが得られる。
また、マルチプレクサ１１４では、例えば所定のオーディオストリームのうち少なくとも１つ以上のオーディオストリームに対応したオーディオエレメンタリストリームループ内に、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタが挿入される。このデスクリプタには、複数のグループの符号化データのそれぞれの属性を示す属性情報と、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報が含まれている。
また、デスクリプタ１１４では、所定数のオーディオストリームのそれぞれに対応したオーディオエレメンタリストリームループ内に、３Ｄオーディオ・ストリームＩＤ・デスクリプタが挿入される。このデスクリプタには、所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報が含まれている。
［３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタの詳細］
図１０は、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタ（3Daudio_stream_config_descriptor）の構造例（Syntax）を示している。また、図１１は、その構造例における主要な情報の内容（Semantics）を示している。
「descriptor_tag」の８ビットフィールドは、デスクリプタタイプを示す。ここでは、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタであることを示す。「descriptor_length」の８ビットフィールドは、デスクリプタの長さ（サイズ）を示し、デスクリプタの長さとして、以降のバイト数を示す。
「NumOfGroups, N」の８ビットフィールドは、グループの数を示す。「NumOfPresetGroups, P」の８ビットフィールドは、プリセットグループの数を示す。グループの数だけ、「groupID」の８ビットフィールド、「attribute_of_groupID」の８ビットフィールド、「SwitchGroupID」の８ビットフィールドおよび「audio_streamID」の８ビットフィールドが、繰り返えされる。
「groupID」のフィールドは、グループの識別子を示す。「attribute_of_groupID」のフィールドは、該当グループの符号化データの属性を示す。「SwitchGroupID」のフィールドは、該当グループがどのスイッチグループに属すかを示す識別子である。“０”は、いずれのスイッチグループにも属さないことを示す。“０”以外は、配属するスイッチグループを示す。「contentKind」の８ビットフィールドは、グループのコンテンツの種類を示す。「audio_streamID」は、該当グループが含まれるオーディオストリームを示す識別子である。図１２は、「contentKind」に定義されているコンテンツの種類を示している。
また、プリセットグループの数だけ、「presetGroupID」の８ビットフィールドおよび「NumOfGroups_in_preset, R」の８ビットフィールドが、繰り返される。「presetGroupID」のフィールドは、グループをプリセットした束を示す識別子である。「NumOfGroups_in_preset, R」のフィールドは、プリセットグループに属するグループの数を示す。そして、プリセットグループ毎に、それに属するグループの数だけ、「groupID」の８ビットフィールドが繰り返され、プリセットグループに属するグループが示される。本デスクリプタは、拡張デスクリプタの配下に配置されてもよい。
［３Ｄオーディオ・ストリームＩＤ・デスクリプタの詳細］
図１３（ａ）は、３Ｄオーディオ・ストリームＩＤ・デスクリプタ（3Daudio_substreamID_descriptor）の構造例（Syntax）を示している。また、図１３（ｂ）は、その構造例における主要な情報の内容（Semantics）を示している。
「descriptor_tag」の８ビットフィールドは、デスクリプタタイプを示す。ここでは、３Ｄオーディオ・ストリームＩＤ・デスクリプタであることを示す。「descriptor_length」の８ビットフィールドは、デスクリプタの長さ（サイズ）を示し、デスクリプタの長さとして、以降のバイト数を示す。「audio_streamID」の８ビットフィールドは、オーディオストリームの識別子を示す。本デスクリプタは、拡張デスクリプタの配下に配置されてもよい。
[トランスポートストリームＴＳの構成]
図１４は、トランスポートストリームＴＳの構成例を示している。この構成例は、３Ｄオーディオの伝送データを２ストリームで送信する場合に対応している（図５参照）。この構成例では、ＰＩＤ１で識別されるビデオストリームのＰＥＳパケット「video PES」が存在する。また、この構成例では、ＰＩＤ２，ＰＩＤ３でそれぞれ識別される２つのオーディオストリームのＰＥＳパケット「audio PES」が存在する。ＰＥＳパケットは、ＰＥＳヘッダ（PES_header）とＰＥＳペイロード（PES_payload）からなっている。ＰＥＳヘッダには、ＤＴＳ，ＰＴＳのタイムスタンプが挿入されている。多重化の際にＰＩＤ２とＰＩＤ３のタイムスタンプを合致させるなど、的確に付すことで両者の間の同期をシステム全体で確保することが可能である。
ここで、ＰＩＤ２で識別されるオーディオストリームのＰＥＳパケット「audio PES」には、グループ１として区別されるチャネル符号化データ（ＣＤ）とグループ２として区別されるイマーシブオーディオオブジェクト符号化データ（ＩＡＯ）が含まれる。また、ＰＩＤ３で識別されるオーディオストリームのＰＥＳパケット「audio PES」には、グループ３として区別される第１の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）と、グループ４として区別される第２の言語のスピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれる。
また、トランスポートストリームＴＳには、ＰＳＩ（Program Specific Information）として、ＰＭＴ（Program Map Table）が含まれている。ＰＳＩは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。ＰＭＴには、プログラム全体に関連する情報を記述するプログラム・ループ（Program loop）が存在する。
また、ＰＭＴには、各エレメンタリストリームに関連した情報を持つエレメンタリストリームループが存在する。この構成例では、ビデオストリームに対応したビデオエレメンタリストリームループ（video ES loop）が存在すると共に、２つのオーディオストリームに対応したオーディオエレメンタリストリームループ（audio ES loop）が存在する
ビデオエレメンタリストリームループ（video ES loop）には、ビデオストリームに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのビデオストリームに関連する情報を記述するデスクリプタも配置される。このビデオストリームの「Stream_type」の値は「０ｘ２４」に設定され、ＰＩＤ情報は、上述したようにビデオストリームのＰＥＳパケット「video PES」に付与されるＰＩＤ１を示すものとされる。デスクリプタの一つして、ＨＥＶＣ デスクリプタが配置される。
各オーディオエレメンタリストリームループ（audio ES loop）には、オーディオストリームに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのオーディオストリームに関連する情報を記述するデスクリプタも配置される。ＰＩＤ２はメインのオーディオストリームで、「Stream_type」の値は「０ｘ２Ｃ」に設定され、ＰＩＤ情報は、上述したようにオーディオストリームのＰＥＳパケット「audio PES」に付与されるＰＩＤを示すものとされる。また、ＰＩＤ３はサブのオーディオストリームで、「Stream_type」の値は「０ｘ２Ｄ」に設定され、ＰＩＤ情報は、上述したようにオーディオストリームのＰＥＳパケット「audio PES」に付与されるＰＩＤを示すものとされる。
また、各オーディオエレメンタリストリームループ（audio ES loop）には、上述した３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタおよび３Ｄオーディオ・ストリームＩＤ・デスクリプタの双方が配置される。
また、各オーディオエレメンタリストリームのＰＥＳパケットのＰＥＳペイロード内にはデスクリプタ情報が挿入される。このデスクリプタ情報は、上述したように、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に挿入される“Ｄｅｓｃ”である（図４参照）。このデスクリプタ情報は、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタに含まれる情報をＤ１とし、３Ｄオーディオ・ストリームＩＤ・デスクリプタに含まれる情報をＤ２とすると、「Ｄ１＋Ｄ２」の情報を持つ。
［サービス受信機の構成例］
図１５は、サービス受信機２００の構成例を示している。このサービス受信機２００は、受信部２０１と、デマルチプレクサ２０２と、ビデオデコーダ２０３と、映像処理回路２０４と、パネル駆動回路２０５と、表示パネル２０６を有している。また、このサービス受信機２００は、多重化バッファ２１１-1〜２１１-Nと、コンバイナ２１２と、３Ｄオーディオデコーダ２１３と、音声出力処理回路２１４と、スピーカシステム２１５を有している。また、このサービス受信機２００は、ＣＰＵ２２１と、フラッシュＲＯＭ２２２と、ＤＲＡＭ２２３と、内部バス２２４と、リモコン受信部２２５と、リモコン送信機２２６を有している。
ＣＰＵ２２１は、サービス受信機２００の各部の動作を制御する。フラッシュＲＯＭ２２２は、制御ソフトウェアの格納およびデータの保管を行う。ＤＲＡＭ２２３は、ＣＰＵ２２１のワークエリアを構成する。ＣＰＵ２２１は、フラッシュＲＯＭ２２２から読み出したソフトウェアやデータをＤＲＡＭ２２３上に展開してソフトウェアを起動させ、サービス受信機２００の各部を制御する。
リモコン受信部２２５は、リモコン送信機２２６から送信されたリモートコントロール信号（リモコンコード）を受信し、ＣＰＵ２２１に供給する。ＣＰＵ２２１は、このリモコンコードに基づいて、サービス受信機２００の各部を制御する。ＣＰＵ２２１、フラッシュＲＯＭ２２２およびＤＲＡＭ２２３は、内部バス２２４に接続されている。
受信部２０１は、サービス送信機１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳを受信する。このトランスポートストリームＴＳは、ビデオストリームの他に、３Ｄオーディオの伝送データを構成する複数のグループの符号化データを含む所定数のオーディオストリームを有している。
図１６は、受信されるオーディオストリームの一例を示している。図１６（ａ）は、１ストリーム（メインストリーム）の例を示している。このストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、チャネル符号化データ（ＣＤ）、イマーシブオーディオオブジェクト符号化データ（ＩＡＯ）、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれている。このストリームは、ＰＩＤ２で識別される。
また、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、デスクリプタ情報（“Ｄｅｓｃ”）が含まれている。このデスクリプタ情報には、複数のグループの符号化データのそれぞれの属性を示す属性情報と、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれているかを示すストリーム対応関係情報と、自身のストリーム識別子を示すストリーム識別子情報が挿入されている。
図１６（ｂ）は、２ストリームの例を示している。ＰＩＤ２で識別されるメインストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、チャネル符号化データ（ＣＤ）およびイマーシブオーディオオブジェクト符号化データ（ＩＡＯ）が含まれている。また、ＰＩＤ３で識別されるサブストリームに、“ＳＹＮＣ”および“Ｃｏｎｆｉｇ”と共に、スピーチダイアログオブジェクト符号化データ（ＳＤＯ）が含まれている。
また、各ストリームにおいて、ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、デスクリプタ情報（“Ｄｅｓｃ”）が含まれている。このデスクリプタ情報には、複数のグループの符号化データのそれぞれの属性を示す属性情報と、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれているかを示すストリーム対応関係情報と、自身のストリーム識別子を示すストリーム識別子情報が挿入されている。
デマルチプレクサ２０２は、トランスポートストリームＴＳからビデオストリームのパケットを抽出し、ビデオデコーダ２０３に送る。ビデオデコーダ２０３は、デマルチプレクサ２０２で抽出されたビデオのパケットからビデオストリームを再構成し、デコード処理を行って非圧縮のビデオデータを得る。
映像処理回路２０４は、ビデオデコーダ２０３で得られたビデオデータに対してスケーリング処理、画質調整処理などを行って、表示用のビデオデータを得る。パネル駆動回路２０５は、映像処理回路２０４で得られる表示用の画像データに基づいて、表示パネル２０６を駆動する。表示パネル２０６は、例えば、ＬＣＤ(Liquid Crystal Display)、有機ＥＬディスプレイ（organic electroluminescence display）などで構成されている。
また、デマルチプレクサ２０２は、トランスポートストリームＴＳからデスクリプタ情報などの各種情報を抽出し、ＣＰＵ２２１に送る。この各種情報には、上述した３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタ（3Daudio_stream_config_descriptor）や３Ｄオーディオ・ストリームＩＤ・デスクリプタ（3Daudio_substreamID_descriptor）の情報も含まれる（図１４参照）。
ＣＰＵ２２１は、これらのデスクリプタ情報に含まれている、各グループの符号化データの属性を示す属性情報、各グループがどのオーディオストリームに含まれるかを示すストリーム関係情報などに基づいて、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが含まれるオーディオストリームを認識する。
また、デマルチプレクサ２０２は、ＣＰＵ２２１の制御のもと、トランスポートストリームＴＳが有する所定数のオーディオストリームのうち、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データを含む一つまたは複数のオーディオストリームのパケットをＰＩＤフィルタで選択的に取り出す。
多重化バッファ２１１-1〜２１１-Nは、それぞれ、デマルチプレクサ２０２で取り出される各オーディオストリームを取り込む。ここで、多重化バッファ２１１-1〜２１１-Nの個数Ｎとしては必要十分な個数とされるが、実際の動作では、デマルチプレクサ２０２で取り出されるオーディオストリームの数だけ用いられることになる。
コンバイナ２１２は、多重化バッファ２１１-1〜２１１-Nのうちデマルチプレクサ２０２で取り出される各オーディオストリームがそれぞれ取り込まれた多重化バッファから、オーディオフレーム毎に、オーディオストリームを読み出し、３Ｄオーディオデコーダ２１３に送る。
３Ｄオーディオデコーダ２１３は、コンバイナ２１２から供給されるオーディオストリームにデスクリプタ情報（“Ｄｅｓｃ”）が含まれている場合には、そのデスクリプタ情報をＣＰＵ２２１に送る。３Ｄオーディオデコーダ２１３は、ＣＰＵ２２１の制御のもと、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データを選択的に取り出して、デコード処理を施し、スピーカシステム２１５の各スピーカを駆動するためのオーディオデータを得る。
ここで、デコード処理される符号化データは、チャネル符号化データのみを含む場合、オブジェクト符号化データのみを含む場合、さらにはチャネル符号化データおよびオブジェクト符号化データの双方を含む場合の３通りが考えられる。
３Ｄオーディオデコーダ２１３は、チャネル符号化データをデコードするときは、スピーカシステム２１５のスピーカ構成へのダウンミックスやアップミックスの処理を行って、各スピーカを駆動するためのオーディオデータを得る。また、３Ｄオーディオデコーダ２１３は、オブジェクト符号化データをデコードするときは、オブジェクト情報（メタデータ）に基づきスピーカレンダリング（各スピーカへのミキシング割合）を計算し、その計算結果に応じて、オブジェクトのオーディオデータを、各スピーカを駆動するためのオーディオデータにミキシングする。
音声出力処理回路２１４は、３Ｄオーディオデコーダ２１３で得られた各スピーカを駆動するためのオーディオデータに対して、Ｄ／Ａ変換や増幅等の必要な処理を行って、スピーカシステム２１５に供給する。スピーカシステム２１５は、複数チャネル、例えば２チャネル、５．１チャネル、７．１チャネル、２２．２チャネルなどの複数のスピーカを備える。
図１５に示すサービス受信機２００の動作を簡単に説明する。受信部２０１では、サービス送信機１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳが受信される。このトランスポートストリームＴＳは、ビデオストリームの他に、３Ｄオーディオの伝送データを構成する複数のグループの符号化データを含む所定数のオーディオストリームを有している。このトランスポートストリームＴＳは、デマルチプレクサ２０２に供給される。
デマルチプレクサ２０２では、トランスポートストリームＴＳからビデオストリームのパケットが抽出され、ビデオデコーダ２０３に供給される。ビデオデコーダ２０３では、デマルチプレクサ２０２で抽出されたビデオのパケットからビデオストリームが再構成され、デコード処理が行われて、非圧縮のビデオデータが得られる。このビデオデータは、映像処理回路２０４に供給される。
映像処理回路２０４では、ビデオデコーダ２０３で得られたビデオデータに対してスケーリング処理、画質調整処理などが行われて、表示用のビデオデータが得られる。この表示用のビデオデータはパネル駆動回路２０５に供給される。パネル駆動回路２０５では、表示用のビデオデータに基づいて、表示パネル２０６を駆動することが行われる。これにより、表示パネル２０６には、表示用のビデオデータに対応した画像が表示される。
また、デマルチプレクサ２０２では、トランスポートストリームＴＳからデスクリプタ情報などの各種情報が抽出され、ＣＰＵ２２１に送られる。この各種情報には、３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタや３Ｄオーディオ・ストリームＩＤ・デスクリプタの情報も含まれる。ＣＰＵ２２１では、これらのデスクリプタ情報に含まれている属性情報、ストリーム関係情報などに基づいて、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが含まれるオーディオストリームが認識される。
また、デマルチプレクサ２０２では、ＣＰＵ２２１の制御のもと、トランスポートストリームＴＳが有する所定数のオーディオストリームのうち、スピーカ構成および視聴者選択情報に適合する属性を持つグループの符号化データを含む１つまたは複数のオーディオストリームのパケットがＰＩＤフィルタで選択的に取り出される。
デマルチプレクサ２０２で取り出されたオーディオストリームは、多重化バッファ２１１-1〜２１１-Nのうち対応する多重化バッファに取り込まれる。コンバイナ２１２では、オーディオストリームが取り込まれた各多重化バッファから、オーディオフレーム毎に、オーディオストリームが読み出され、３Ｄオーディオデコーダ２１３に供給される。
３Ｄオーディオデコーダ２１３では、コンバイナ２１２から供給されるオーディオストリームにデスクリプタ情報（“Ｄｅｓｃ”）が含まれている場合には、そのデスクリプタ情報が抽出され、ＣＰＵ２２１に送られる。３Ｄオーディオデコーダ２１３では、ＣＰＵ２２１の制御のもと、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが選択的に取り出され、デコード処理が施されて、スピーカシステム２１５の各スピーカを駆動するためのオーディオデータが得られる。
ここで、チャネル符号化データがデコードされるときは、スピーカシステム２１５のスピーカ構成へのダウンミックスやアップミックスの処理が行われて、各スピーカを駆動するためのオーディオデータが得られる。また、オブジェクト符号化データがデコードされるときは、オブジェクト情報（メタデータ）に基づきスピーカレンダリング（各スピーカへのミキシング割合）が計算され、その計算結果に応じて、オブジェクトのオーディオデータが各スピーカを駆動するためのオーディオデータにミキシングされる。
３Ｄオーディオデコーダ２１３で得られた各スピーカを駆動するためのオーディオデータは、音声出力処理回路２１４に供給される。この音声出力処理回路２１４では、各スピーカを駆動するためのオーディオデータに対して、Ｄ／Ａ変換や増幅等の必要な処理が行われる。そして、処理後のオーディオデータはスピーカシステム２１５に供給される。これにより、スピーカシステム２１５からは表示パネル２０６の表示画像に対応した音響出力が得られる。
図１７は、デスクリプタ情報がオーディオストリーム中に存在しない場合におけるデコード処理を概略的に示している。多重化ストリームであるトランスポートストリームＴＳがデマルチプレクサ２０２に入力される。デマルチプレクサ２０２では、システムレイヤの解析が行われ、デスクリプタ情報１（３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタや３Ｄオーディオ・ストリームＩＤ・デスクリプタの情報）がＣＰＵ２２１に供給される。
ＣＰＵ２２１では、このデスクリプタ情報１に基づいて、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが含まれるオーディオストリームが認識される。デマルチプレクサ２０２では、ＣＰＵ２２１の制御のもと、ストリーム間の選択が行われる。
すなわち、デマルチプレクサ２０２では、トランスポートストリームＴＳが有する所定数のオーディオストリームのうち、スピーカ構成および視聴者選択情報に適合する属性を持つグループの符号化データを含む１つまたは複数のオーディオストリームのパケットがＰＩＤフィルタで選択的に取り出される。このように取り出されるオーディオストリームは多重化バッファ２１１（２１１-1〜２１１-N）に取り込まれる。
３Ｄオーディオデコーダ２１３では、多重化バッファ２１１に取り込まれた各オーディオストリームのパケットタイプ解析が行われる。そして、デマルチプレクサ２０２では、上述のデスクリプタ情報１に基づくＣＰＵ２２１の制御のもと、ストリーム内の選択が行われる。
すなわち、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが、各オーディオストリームから、デコード対象として選択的に取り出され、デコード処理が施され、ミキシングレンダリング等の処理が施されて、各スピーカを駆動するためのオーディオデータ（非圧縮オーディオ）が得られる。
図１８は、デスクリプタ情報がオーディオストリーム中に存在しない場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の構成例を示している。ここでは、２ストリームの例を示している。
ＰＩＤ２で識別されるオーディオストリームに関しては、“Ｃｏｎｆｉｇ”に含まれる「FrWork #ch=2, #obj=1」の情報で、２チャネルのチャネル符号化データと、１つのオブジェクト符号化データを持つ“Ｆｒａｍｅ”の存在が示されている。そして、“Ｃｏｎｆｉｇ”に含まれる「AudioSceneInfo()」内に順に登録された”GroupID[0]=1, GroupID[1]=2 ”の情報で、グループ１の符号化データを持つ“Ｆｒａｍｅ”と、グループ２の符号化データを持つ“Ｆｒａｍｅ”とが、この順に配置されていることが示されている。なお、パケットラベル（ＰＬ）の値は、“Ｃｏｎｆｉｇ”とそれに対応した各“Ｆｒａｍｅ”とで同じ値とされる。
ここでは、グループ１の符号化データを持つ“Ｆｒａｍｅ”には、ＣＰＥ（Channel Pair Element）の符号化サンプルデータが含まれている。また、グループ２の符号化データを持つ“Ｆｒａｍｅ”は、エクステンションエレメント（Ext_element）としてメタデータを含む“Ｆｒａｍｅ”と、ＳＣＥ（Single Channel Element）の符号化サンプルデータを含む“Ｆｒａｍｅ”とからなっている。
ＰＩＤ３で識別されるオーディオストリームに関しては、“Ｃｏｎｆｉｇ”に含まれる「FrWork #ch=0, #obj=2」の情報で、２つのオブジェクト符号化データを持つ“Ｆｒａｍｅ”の存在が示されている。そして、“Ｃｏｎｆｉｇ”に含まれる「AudioSceneInfo()」内に順に登録された”GroupID[2]=3, GroupID[3]=4, SW_GRPID[0]=1 ”の情報で、グループ３の符号化データを持つ“Ｆｒａｍｅ”と、グループ４の符号化データを持つ“Ｆｒａｍｅ”とが、この順に配置されており、これらのグループはスイッチグループ１を構成していることが示されている。なお、パケットラベル（ＰＬ）の値は、“Ｃｏｎｆｉｇ”とそれに対応した各“Ｆｒａｍｅ”とで同じ値とされる。
ここでは、グループ３の符号化データを持つ“Ｆｒａｍｅ”は、エクステンションエレメント（Ext_element）としてメタデータを含む“Ｆｒａｍｅ”と、ＳＣＥ（Single Channel Element）の符号化サンプルデータを含む“Ｆｒａｍｅ”とからなっている。同様に、グループ４の符号化データを持つ“Ｆｒａｍｅ”は、エクステンションエレメント（Ext_element）としてメタデータを含む“Ｆｒａｍｅ”と、ＳＣＥ（Single Channel Element）の符号化サンプルデータを含む“Ｆｒａｍｅ”とからなっている。
図１９は、デスクリプタ情報がオーディオストリーム中に存在する場合におけるデコード処理を概略的に示している。多重化ストリームであるトランスポートストリームＴＳがデマルチプレクサ２０２に入力される。デマルチプレクサ２０２では、システムレイヤの解析が行われ、デスクリプタ情報１（３Ｄオーディオ・ストリーム・コンフィグ・デスクリプタや３Ｄオーディオ・ストリームＩＤ・デスクリプタの情報）がＣＰＵ２２１に送られる。
ＣＰＵ２２１では、このデスクリプタ情報１に基づいて、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが含まれるオーディオストリームが認識される。デマルチプレクサ２０２では、ＣＰＵ２２１の制御のもと、ストリーム間の選択が行われる。
すなわち、デマルチプレクサ２０２では、トランスポートストリームＴＳが有する所定数のオーディオストリームのうち、スピーカ構成および視聴者選択情報に適合する属性を持つグループの符号化データを含む１つまたは複数のオーディオストリームのパケットがＰＩＤフィルタで選択的に取り出される。このように取り出されるオーディオストリームは多重化バッファ２１１（２１１-1〜２１１-N）に取り込まれる。
３Ｄオーディオデコーダ２１３では、多重化バッファ２１１に取り込まれた各オーディオストリームのパケットタイプ解析が行われ、オーディオストリーム中に存在するデスクリプタ情報２がＣＰＵ２２１に送られる。このデスクリプタ情報２に基づいて、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データの存在が認識される。そして、デマルチプレクサ２０２では、このデスクリプタ情報２に基づくＣＰＵ２２１の制御のもと、ストリーム内の選択が行われる。
すなわち、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが、各オーディオストリームから、デコード対象として選択的に取り出され、デコード処理が施され、ミキシングレンダリング等の処理が施されて、各スピーカを駆動するためのオーディオデータ（非圧縮オーディオ）が得られる。
図２０は、デスクリプタ情報がオーディオストリーム中に存在する場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の構成例を示している。ここでは、２ストリームの例を示している。この図２０は、“ＳＹＮＣ”と“Ｃｏｎｆｉｇ”の間に、“Ｄｅｓｃ”、つまりデスクリプタ情報を挿入されていることを除き、図１８と同様である。
ＰＩＤ２で識別されるオーディオストリームに関しては、“Ｄｅｓｃ”に含まれる「GroupID[0]=1, channeldata」の情報で、グループ１の符号化データは、チャネル符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「GroupID[1]=2, object sound」の情報で、グループ２の符号化データは、イマーシブサウンドのためのオブジェクト符号化データであることが示されている。さらに、「Stream_ID」の情報で、当該オーディオストリームのストリーム識別子が示されている。
ＰＩＤ３で識別されるオーディオストリームに関しては、“Ｄｅｓｃ”に含まれる「GroupID[2]=3, object lang1」の情報で、グループ３の符号化データは、第１の言語のスピーチランゲージのためのオブジェクト符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「GroupID[3]=4, object lang2」の情報で、グループ４の符号化データは、第２の言語のスピーチランゲージのためのオブジェクト符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「SW_GRPID[0]=1」の情報で、グループ３，４はスイッチグループ１を構成していることが示されている。さらに、「Stream_ID」の情報で、当該オーディオストリームのストリーム識別子が示されている。
図２１は、デスクリプタ情報がオーディオストリーム中に存在する場合におけるオーディオストリームのオーディオアクセスユニット（オーディオフレーム）の構成例を示している。ここでは、１ストリームの例を示している。
“Ｃｏｎｆｉｇ”に含まれる「FrWork #ch=2, #obj=3」の情報で、２チャネルのチャネル符号化データと、３つのオブジェクト符号化データを持つ“Ｆｒａｍｅ”の存在が示されている。そして、“Ｃｏｎｆｉｇ”に含まれる「AudioSceneInfo()」内に順に登録された“GroupID[0]=1, GroupID[1]=2, GroupID[2]=3, GroupID[3]=4, SW_GRPID[0]=1 ”の情報で、グループ１の符号化データを持つ“Ｆｒａｍｅ”と、グループ２の符号化データを持つ“Ｆｒａｍｅ”と、グループ３の符号化データを持つ“Ｆｒａｍｅ”と、グループ４の符号化データを持つ“Ｆｒａｍｅ”とが、この順に配置されており、グループ３，４はスイッチグループ１を構成していることが示されている。なお、パケットラベル（ＰＬ）の値は、“Ｃｏｎｆｉｇ”とそれに対応した各“Ｆｒａｍｅ”とで同じ値とされる。
ここでは、グループ１の符号化データを持つ“Ｆｒａｍｅ”には、ＣＰＥ（Channel Pair Element）の符号化サンプルデータが含まれている。また、グループ２〜４の符号化データを持つ“Ｆｒａｍｅ”は、それぞれ、エクステンションエレメント（Ext_element）としてメタデータを含む“Ｆｒａｍｅ”と、ＳＣＥ（Single Channel Element）の符号化サンプルデータを含む“Ｆｒａｍｅ”とからなっている。
“Ｄｅｓｃ”に含まれる「GroupID[0]=1, channeldata」の情報で、グループ１の符号化データは、チャネル符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「GroupID[1]=2, object sound」の情報で、グループ２の符号化データは、イマーシブサウンドのためのオブジェクト符号化データであることが示されている。
また、“Ｄｅｓｃ”に含まれる「GroupID[2]=3, object lang1」の情報で、グループ３の符号化データは、第１の言語のスピーチランゲージのためのオブジェクト符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「GroupID[3]=4, object lang2」の情報で、グループ４の符号化データは、第２の言語のスピーチランゲージのためのオブジェクト符号化データであることが示されている。また、“Ｄｅｓｃ”に含まれる「SW_GRPID[0]=1」の情報で、グループ３，４はスイッチグループ１を構成していることが示されている。さらに、「Stream_ID」の情報で、当該オーディオストリームのストリーム識別子が示されている。
図２２、図２３のフローチャートは、図１５に示すサービス受信機２００におけるＣＰＵ２２１のオーディオデコード制御処理の一例を示している。ＣＰＵ２２１は、ステップＳＴ１において、処理を開始する。そして、ＣＰＵ２２１は、ステップＳＴ２において、受信機スピーカ構成、つまりスピーカシステム２１５のスピーカ構成を検知する。次に、ＣＰＵ２２１は、ステップＳＴ３において、視聴者（ユーザ）によるオーディオ出力に関する選択情報を得る。
次に、ＣＰＵ２２１は、ステップＳＴ４において、ＰＭＴの中のメインストリームに関するデスクリプタの情報を読み、スピーカ構成、視聴者選択情報に適合する属性を持つグループが属するオーディオストリームを選択してバッファに取り込む。そして、ＣＰＵ２２１は、ステップＳＴ５において、オーディオストリームに、デスクリプタタイプのパケットが存在するか否かをチェックする。
次に、ＣＰＵ２２１は、ステップＳＴ６おいて、デスクリプタタイプのパケットが存在するか否かを判断する。存在するとき、ＣＰＵ２２１は、ステップＳＴ７において、該当パケットのデスクリプタ情報を読み、「groupID」、「attribute」、「switchGroupID」、「presetGroupID」の情報を検知し、その後、ステップＳＴ９の処理に進む。一方、存在しないとき、ＣＰＵ２２１は、ステップＳＴ８において、ＰＭＴのデスクリプタ情報から、「groupID」、「attribute」、「switchGroupID」、「presetGroupID」の情報を検知し、その後、ステップＳＴ９の処理に進む。なお、ステップＳＴ８を実行せず、対象のオーディオストリーム全体をデコードするような処理も行うことは可能である。
ステップＳＴ９において、ＣＰＵ２２１は、オブジェクト符号化データをデコードするか否かを判断する。デコードするとき、ＣＰＵ２２１は、ステップＳＴ１０において、オブジェクト符号化データをデコードし、その後、ステップＳＴ１１の処理に進む。一方、デコードしないとき、ＣＰＵ２２１は、直ちに、ステップＳＴ１１の処理に進む。
ステップＳＴ１１において、ＣＰＵ２２１は、チャネル符号化データをデコードするか否かを判断する。デコードするとき、ＣＰＵ２２１は、ステップＳＴ１２において、チャネル符号化データをデコードし、必要に応じて、スピーカシステム２１５のスピーカ構成へのダウンミックスやアップミックスの処理を行って、各スピーカを駆動するためのオーディオデータを得る。その後、ＣＰＵ２２１は、ステップＳＴ１３の処理に進む。一方、デコードしないとき、ＣＰＵ２２１は、直ちに、ステップＳＴ１３の処理に進む。
ステップＳＴ１３において、ＣＰＵ２２１は、オブジェクト符号化データをデコードした場合は、その情報に基づき、チャネルデータとの混合あるいはスピーカレンダリングを計算する。スピーカレンダリングの計算では、アジマス（方位情報）とエレベーション（仰角情報）によりスピーカレンダリング（各スピーカへのミキシング割合）を計算し、その計算結果に応じて、オブジェクトのオーディオデータを、各スピーカを駆動するためのチャネルオデータに混合する。
次に、ＣＰＵ２２１は、ステップＳＴ１４において、各スピーカを駆動するためのオーディオデータのダイナミックレンジ制御を行って、出力する。その後、ＣＰＵ２２１はステップＳＴ１５において、処理を終了する。
上述したように、図１に示す送受信システム１０において、サービス送信機１００は、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、所定数のオーディオストリームに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する。そのため、受信側では、複数のグループの符号化データのそれぞれの属性を当該符号化データのデコード前に容易に認識でき、必要なグループの符号化データのみを選択的にデコードして用いることができ、処理負荷を軽減することが可能となる。
また、図１に示す送受信システム１０において、サービス送信機１００は、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報を挿入する。そのため、受信側では、必要なグループの符号化データが含まれるオーディオストリームを容易に認識でき、処理負荷を軽減することが可能となる。
＜２．変形例＞
なお、上述実施の形態において、サービス受信機２００は、サービス送信機１００から送信されてくる複数のオーディオストリームから、スピーカ構成、視聴者選択情報に適合する属性を持つグループの符号化データが含まれるオーディオストリームを選択的に取り出し、デコード処理を行って所定数のスピーカ駆動用のオーディオデータを得る構成となっている。
しかし、サービス受信機として、サービス送信機１００から送信されてくる複数のオーディオストリームから、スピーカ構成、視聴者選択情報に適合する属性を持つグループの符号化データを持つ１つまたは複数のオーディオストリームを選択的に取り出し、スピーカ構成、視聴者選択情報に適合する属性を持つグループの符号化データを持つオーディオストリームを再構成し、その再構成オーディオストリームを、構内ネットワーク接続されたデバイス（ＤＬＮＡ機器も含む）に配信することも考えられる。
図２４は、上述したように再構成オーディオストリームを構内ネットワーク接続されたデバイスに配信するサービス受信機２００Ａの構成例を示している。この図２４において、図１５と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。
デマルチプレクサ２０２では、ＣＰＵ２２１の制御のもと、トランスポートストリームＴＳが有する所定数のオーディオストリームのうち、スピーカ構成および視聴者選択情報に適合する属性を持つグループの符号化データを含む１つまたは複数のオーディオストリームのパケットがＰＩＤフィルタで選択的に取り出される。
デマルチプレクサ２０２で取り出されたオーディオストリームは、多重化バッファ２１１-1〜２１１-Nのうち対応する多重化バッファに取り込まれる。コンバイナ２１２では、オーディオストリームが取り込まれた各多重化バッファから、オーディオフレーム毎に、オーディオストリームが読み出され、ストリーム再構成部２３１に供給される。
ストリーム再構成部２３１では、コンバイナ２１２から供給されるオーディオストリームにデスクリプタ情報（“Ｄｅｓｃ”）が含まれている場合には、そのデスクリプタ情報が抽出され、ＣＰＵ２２１に送られる。ストリーム再構成部２３１では、ＣＰＵ２２１の制御のもと、スピーカ構成および視聴者（ユーザ）選択情報に適合する属性を持つグループの符号化データが選択的に取得され、その符号化データを持つオーディオストリームが再構成される。この再構成オーディオストリームは配信インタフェース２３２に供給される。そして、この配信インタフェース２３２から、構内ネットワーク接続されたデバイス３００に配信（送信）される。
この構内ネットワーク接続には、イーサネット接続、“ＷｉＦｉ”あるいは“Ｂｌｕｅｔｏｏｔｈ”などのワイヤレス接続が含まれる。なお、「ＷｉＦｉ」、「Ｂｌｕｅｔｏｏｔｈ」は、登録商標である。
また、デバイス３００には、サラウンドスピーカ、セカンドディスプレイ、ネットワーク端末に付属のオーディオ出力装置が含まれる。再構成オーディオストリームの配信を受けるデバイス２００は、図１５のサービス受信機２００における３Ｄオーディオデコーダ２１３と同様のデコード処理を行って、所定数のスピーカを駆動するためのオーディオデータを得ることになる。
また、サービス受信機としては、上述した再構成オーディオストリームを、“ＨＤＭＩ（High-Definition Multimedia Interface）”、“ＭＨＬ（Mobile High definition Link）”、“ＤｉｓｐｌａｙＰｏｒｔ”などのデジタルインタフェースで接続されたデバイスに送信する構成も考えられる。なお、「ＨＤＭＩ」、「ＭＨＬ」は、登録商標である。
また、上述実施の形態において、コンテナのレイヤなどに挿入されるストリーム対応関係情報は、グループＩＤとサブストリームＩＤとの対応関係を示す情報であった。すなわち、グループとオーディオストリームを関連付けるためにサブストリームＩＤを用いたものである。しかし、グループとオーディオストリームを関連付けるためにパケット識別子（ＰＩＤ：Packet ID）あるいはストリームタイプ（stream_type）を用いることも考えられる。なお、ストリームタイプを用いる場合には、各オーディオストリームのストリームタイプを変える必要がある。
また、上述実施の形態においては、各グループの符号化データの属性情報を「attribute_of_groupID」のフィールドを設けて送信する例を示した（図１０参照）。しかし、本技術は、送受信機間でグループＩＤ（GroupID）の値自体に特別な意味を定義することで、特定のグループＩＤを認識すれば符号化データの種類（属性）が認識できるような方法も含むものである。この場合、グループＩＤは、グループの識別子として機能する他に、そのグループの符号化データの属性情報として機能することとなり、「attribute_of_groupID」のフィールドは不要となる。
また、上述実施の形態においては、複数のグループの符号化データに、チャネル符号化データおよびオブジェクト符号化データの双方が含まれる例を示した（図３参照）。しかし、本技術は、複数のグループの符号化データに、チャネル符号化データのみ、あるいはオブジェクト符号化データのみが含まれる場合にも同様に適用できる。
また、上述実施の形態においては、コンテナがトランスポートストリーム（ＭＰＥＧ−２ ＴＳ）である例を示した。しかし、本技術は、ＭＰ４やそれ以外のフォーマットのコンテナで配信されるシステムにも同様に適用できる。例えば、ＭＰＥＧ−ＤＡＳＨベースのストリーム配信システム、あるいは、ＭＭＴ（MPEG Media Transport）構造伝送ストリームを扱う送受信システムなどである。
なお、本技術は、以下のような構成もとることができる。
（１）複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する送信部と、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する情報挿入部を備える
送信装置。
（２）上記情報挿入部は、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報をさらに挿入する
前記（１）に記載の送信装置。
（３）上記ストリーム対応関係情報は、
上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれを識別するストリーム識別子との対応関係を示す情報である
前記（２）に記載の送信装置。
（４）上記情報挿入部は、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報をさらに挿入する
前記（３）に記載の送信装置。
（５）上記コンテナは、ＭＰＥＧ２−ＴＳであり、
上記情報挿入部は、
上記ストリーム識別子情報を上記コンテナに挿入する場合、該ストリーム識別子情報をプログラムマップテーブルの配下に存在する上記所定数のオーディオストリームのそれぞれに対応したオーディオエレメンタリストリームループ内に挿入する
前記（４）に記載の送信装置。
（６）上記情報挿入部は、
上記ストリーム識別子情報を上記オーディオストリームに挿入する場合、該ストリーム識別子情報を上記所定数のオーディオストリームのそれぞれのＰＥＳパケットのＰＥＳペイロード内に挿入する
前記（４）または（５）に記載の送信装置。
（７）上記ストリーム対応関係情報は、
上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれをパケット化する際に付されるパケット識別子との対応関係を示す情報である
前記（２）に記載の送信装置。
（８）上記ストリーム対応関係情報は、
上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれのストリームタイプを示すタイプ情報との対応関係を示す情報である
前記（２）に記載の送信装置。
（９）上記コンテナは、ＭＰＥＧ２−ＴＳであり、
上記情報挿入部は、
上記属性情報およびストリーム対応関係情報を上記コンテナに挿入する場合、該属性情報およびストリーム対応関係情報を、プログラムマップテーブルの配下に存在する上記所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームに対応したオーディオエレメンタリストリームループ内に挿入する
前記（２）から（８）のいずれかに記載の送信装置。
（１０）上記情報挿入部は、
上記属性情報およびストリーム対応関係情報を上記オーディオストリームに挿入する場合、該属性情報およびストリーム対応関係情報を、上記所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームのＰＥＳパケットのＰＥＳペイロード内に挿入する
前記（２）から（８）のいずれかに記載の送信装置。
（１１）上記複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる
前記（１）から（１０）のいずれかに記載の送信装置。
（１２）送信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する送信ステップと、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する情報挿入ステップを有する
送信方法。
（１３）複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームを、上記属性情報に基づいて処理する処理部をさらに備える
受信装置。
（１４）上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、
上記処理部は、
上記属性情報の他に、上記ストリーム対応関係情報に基づいて、上記所定数のオーディオストリームを処理する
前記（１３）に記載の受信装置。
（１５）上記処理部は、
上記属性情報および上記ストリーム対応関係情報に基づいて、スピーカ構成およびユーザ選択情報に適合する属性を持つグループの符号化データを含むオーディオストリームに対して選択的にデコード処理を施す
前記（１４）に記載の受信装置。
（１６）上記複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる
前記（１３）から（１５）のいずれかに記載の受信装置。
（１７）受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信ステップを有し、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームを、上記属性情報に基づいて処理する処理ステップをさらに有する
受信方法。
（１８）複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームから上記属性情報に基づいて所定のグループの符号化データを選択的に取得し、該所定のグループの符号化データを含むオーディオストリームを再構成する処理部と、
上記処理部で再構成されたオーディオストリームを外部機器に送信するストリーム送信部をさらに備える
受信装置。
（１９）上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、
上記処理部は、
上記属性情報の他に、上記ストリーム対応関係情報に基づいて、上記所定数のオーディオストリームから上記所定のグループの符号化データを選択的に取得する
前記（１８）に記載の受信装置。
（２０）受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信ステップを有し、
上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
上記受信されたコンテナが有する上記所定数のオーディオストリームから上記属性情報に基づいて所定のグループの符号化データを選択的に取得し、該所定のグループの符号化データを含むオーディオストリームを再構成する処理ステップと、
上記処理ステップで再構成されたオーディオストリームを外部機器に送信するストリーム送信ステップをさらに有する
受信方法。
本技術の主な特徴は、コンテナのレイヤおよび/またはオーディオストリームのレイヤに、所定数のオーディオストリームに含まれる複数のグループの符号化データのそれぞれの属性を示す属性情報や複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報を挿入することで、受信側の処理負荷を軽減可能としたことである（図１４参照）。
１０・・・送受信システム
１００・・・サービス送信機
１１０・・・ストリーム生成部
１１２・・・ビデオエンコーダ
１１３・・・オーディオエンコーダ
１１４・・・マルチプレクサ
２００，２００Ａ・・・サービス受信機
２０１・・・受信部
２０２・・・デマルチプレクサ
２０３・・・ビデオデコーダ
２０４・・・映像処理回路
２０５・・・パネル駆動回路
２０６・・・表示パネル
２１１-1〜２１１-N・・・多重化バッファ
２１２・・・コンバイナ
２１３・・・３Ｄオーディオデコーダ
２１４・・・音声出力処理回路
２１５・・・スピーカシステム
２２１・・・ＣＰＵ
２２２・・・フラッシュＲＯＭ
２２３・・・ＤＲＡＭ
２２４・・・内部バス
２２５・・・リモコン受信部
２２６・・・リモコン送信機
２３１・・・ストリーム再構成部
２３２・・・配信インタフェース
３００・・・デバイス
本技術は、受信装置および受信方法に関する。

Claims (20)

  1. 複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する送信部と、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する情報挿入部を備える
    送信装置。
  2. 上記情報挿入部は、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報をさらに挿入する
    請求項１に記載の送信装置。
  3. 上記ストリーム対応関係情報は、
    上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれを識別するストリーム識別子との対応関係を示す情報である
    請求項２に記載の送信装置。
  4. 上記情報挿入部は、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記所定数のオーディオストリームのそれぞれのストリーム識別子を示すストリーム識別子情報をさらに挿入する
    請求項３に記載の送信装置。
  5. 上記コンテナは、ＭＰＥＧ２−ＴＳであり、
    上記情報挿入部は、
    上記ストリーム識別子情報を上記コンテナに挿入する場合、該ストリーム識別子情報をプログラムマップテーブルの配下に存在する上記所定数のオーディオストリームのそれぞれに対応したオーディオエレメンタリストリームループ内に挿入する
    請求項４に記載の送信装置。
  6. 上記情報挿入部は、
    上記ストリーム識別子情報を上記オーディオストリームに挿入する場合、該ストリーム識別子情報を上記所定数のオーディオストリームのそれぞれのＰＥＳパケットのＰＥＳペイロード内に挿入する
    請求項４に記載の送信装置。
  7. 上記ストリーム対応関係情報は、
    上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれをパケット化する際に付されるパケット識別子との対応関係を示す情報である
    請求項２に記載の送信装置。
  8. 上記ストリーム対応関係情報は、
    上記複数のグループの符号化データのそれぞれを識別するグループ識別子と上記所定数のオーディオストリームのそれぞれのストリームタイプを示すタイプ情報との対応関係を示す情報である
    請求項２に記載の送信装置。
  9. 上記コンテナは、ＭＰＥＧ２−ＴＳであり、
    上記情報挿入部は、
    上記属性情報およびストリーム対応関係情報を上記コンテナに挿入する場合、該属性情報およびストリーム対応関係情報を、プログラムマップテーブルの配下に存在する上記所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームに対応したオーディオエレメンタリストリームループ内に挿入する
    請求項２に記載の送信装置。
  10. 上記情報挿入部は、
    上記属性情報およびストリーム対応関係情報を上記オーディオストリームに挿入する場合、該属性情報およびストリーム対応関係情報を、上記所定数のオーディオストリームのうち少なくとも１つ以上のオーディオストリームのＰＥＳパケットのＰＥＳペイロード内に挿入する
    請求項２に記載の送信装置。
  11. 上記複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる
    請求項１に記載の送信装置。
  12. 送信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを送信する送信ステップと、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報を挿入する情報挿入ステップを有する
    送信方法。
  13. 複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
    上記受信されたコンテナが有する上記所定数のオーディオストリームを、上記属性情報に基づいて処理する処理部をさらに備える
    受信装置。
  14. 上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、
    上記処理部は、
    上記属性情報の他に、上記ストリーム対応関係情報に基づいて、上記所定数のオーディオストリームを処理する
    請求項１３に記載の受信装置。
  15. 上記処理部は、
    上記属性情報および上記ストリーム対応関係情報に基づいて、スピーカ構成およびユーザ選択情報に適合する属性を持つグループの符号化データを含むオーディオストリームに対して選択的にデコード処理を施す
    請求項１４に記載の受信装置。
  16. 上記複数のグループの符号化データには、チャネル符号化データおよびオブジェクト符号化データのいずれかまたは双方が含まれる
    請求項１３に記載の受信装置。
  17. 受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信ステップを有し、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
    上記受信されたコンテナが有する上記所定数のオーディオストリームを、上記属性情報に基づいて処理する処理ステップをさらに有する
    受信方法。
  18. 複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信部を備え、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
    上記受信されたコンテナが有する上記所定数のオーディオストリームから上記属性情報に基づいて所定のグループの符号化データを選択的に取得し、該所定のグループの符号化データを含むオーディオストリームを再構成する処理部と、
    上記処理部で再構成されたオーディオストリームを外部機器に送信するストリーム送信部をさらに備える
    受信装置。
  19. 上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データがそれぞれどのオーディオストリームに含まれるかを示すストリーム対応関係情報がさらに挿入されており、
    上記処理部は、
    上記属性情報の他に、上記ストリーム対応関係情報に基づいて、上記所定数のオーディオストリームから上記所定のグループの符号化データを選択的に取得する
    請求項１８に記載の受信装置。
  20. 受信部により、複数のグループの符号化データを含む所定数のオーディオストリームを有する所定フォーマットのコンテナを受信する受信ステップを有し、
    上記コンテナのレイヤおよび/またはオーディオストリームのレイヤに、上記複数のグループの符号化データのそれぞれの属性を示す属性情報が挿入されており、
    上記受信されたコンテナが有する上記所定数のオーディオストリームから上記属性情報に基づいて所定のグループの符号化データを選択的に取得し、該所定のグループの符号化データを含むオーディオストリームを再構成する処理ステップと、
    上記処理ステップで再構成されたオーディオストリームを外部機器に送信するストリーム送信ステップをさらに有する
    受信方法。
JP2021063962A 2014-09-30 2021-04-05 受信装置および受信方法 Active JP7310849B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023031397A JP2023081933A (ja) 2014-09-30 2023-03-01 送信装置、送信方法、受信装置および受信方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014202354 2014-09-30
JP2014202354 2014-09-30
JP2016551907A JPWO2016052191A1 (ja) 2014-09-30 2015-09-16 送信装置、送信方法、受信装置および受信方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016551907A Division JPWO2016052191A1 (ja) 2014-09-30 2015-09-16 送信装置、送信方法、受信装置および受信方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023031397A Division JP2023081933A (ja) 2014-09-30 2023-03-01 送信装置、送信方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
JP2021105735A true JP2021105735A (ja) 2021-07-26
JP7310849B2 JP7310849B2 (ja) 2023-07-19

Family

ID=55630233

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2016551907A Pending JPWO2016052191A1 (ja) 2014-09-30 2015-09-16 送信装置、送信方法、受信装置および受信方法
JP2021063962A Active JP7310849B2 (ja) 2014-09-30 2021-04-05 受信装置および受信方法
JP2023031397A Pending JP2023081933A (ja) 2014-09-30 2023-03-01 送信装置、送信方法、受信装置および受信方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2016551907A Pending JPWO2016052191A1 (ja) 2014-09-30 2015-09-16 送信装置、送信方法、受信装置および受信方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023031397A Pending JP2023081933A (ja) 2014-09-30 2023-03-01 送信装置、送信方法、受信装置および受信方法

Country Status (6)

Country Link
US (4) US10856042B2 (ja)
EP (3) EP3203469A4 (ja)
JP (3) JPWO2016052191A1 (ja)
CN (3) CN113921020A (ja)
RU (1) RU2701060C2 (ja)
WO (1) WO2016052191A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107210041B (zh) * 2015-02-10 2020-11-17 索尼公司 发送装置、发送方法、接收装置以及接收方法
EP3664395B1 (en) * 2017-08-03 2023-07-19 Aptpod, Inc. Client device, data collection system, data transmission method, and program
GB202002900D0 (en) * 2020-02-28 2020-04-15 Nokia Technologies Oy Audio repersentation and associated rendering

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004077406A1 (ja) * 2003-02-28 2004-09-10 Matsushita Electric Industrial Co., Ltd. 再生装置および再生方法
KR101021831B1 (ko) * 2006-08-24 2011-03-17 노키아 코포레이션 미디어 파일에서 트랙 관계를 표시하는 시스템 및 방법
JP2012033243A (ja) * 2010-08-02 2012-02-16 Sony Corp データ生成装置およびデータ生成方法、データ処理装置およびデータ処理方法
JP2012523746A (ja) * 2009-04-09 2012-10-04 テレフオンアクチーボラゲット エル エム エリクソン（パブル） メディア・コンテナ・ファイル管理
WO2013006338A2 (en) * 2011-07-01 2013-01-10 Dolby Laboratories Licensing Corporation System and method for adaptive audio signal generation, coding and rendering
JP2014013400A (ja) * 2006-05-19 2014-01-23 Electronics And Telecommunications Research Institute オブジェクトベースのオーディオサービスシステム及びその方法
WO2014058275A1 (ko) * 2012-10-11 2014-04-17 한국전자통신연구원 오디오 데이터 생성 장치 및 방법, 오디오 데이터 재생 장치 및 방법
WO2014088328A1 (ko) * 2012-12-04 2014-06-12 삼성전자 주식회사 오디오 제공 장치 및 오디오 제공 방법

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2439467C (en) * 2001-11-30 2015-01-27 Matsushita Electric Industrial Co., Ltd. A method and an apparatus for stream conversion, a method and an apparatus for data recording, and data recording medium
US7574113B2 (en) * 2002-05-06 2009-08-11 Sony Corporation Video and audio data recording apparatus, video and audio data recording method, video and audio data reproducing apparatus, and video and audio data reproducing method
JP3859168B2 (ja) 2003-01-20 2006-12-20 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
WO2005064936A1 (en) * 2003-12-26 2005-07-14 Electronics And Telecommunications Research Institute Apparatus and method for transforming a digital tv broadcasting signal to a digital radio broadcasting signal
JP4872253B2 (ja) * 2004-10-12 2012-02-08 ソニー株式会社 多重化装置、多重化方法、プログラム、および記録媒体
WO2006095742A1 (ja) * 2005-03-08 2006-09-14 Matsushita Electric Industrial Co., Ltd. パケット送信装置
JP2008047962A (ja) * 2006-08-10 2008-02-28 Sony Corp 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
CN101572087B (zh) * 2008-04-30 2012-02-29 北京工业大学 嵌入式语音或音频信号编解码方法和装置
PL3246918T3 (pl) * 2008-07-11 2023-11-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Dekoder audio, sposób dekodowania sygnału audio oraz program komputerowy
JP5555707B2 (ja) * 2008-10-08 2014-07-23 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン マルチ分解能切替型のオーディオ符号化及び復号化スキーム
JP5541488B2 (ja) * 2009-02-09 2014-07-09 ソニー株式会社 コンテンツ受信装置および方法
WO2011049278A1 (en) * 2009-10-25 2011-04-28 Lg Electronics Inc. Method for processing broadcast program information and broadcast receiver
CN102081927B (zh) * 2009-11-27 2012-07-18 中兴通讯股份有限公司 一种可分层音频编码、解码方法及系统
EP2541927B1 (en) * 2010-02-23 2018-10-17 LG Electronics Inc. Broadcasting signal transmission device, broadcasting signal reception device, and method for transmitting/receiving broadcasting signal using same
EP2362653A1 (en) * 2010-02-26 2011-08-31 Panasonic Corporation Transport stream packet header compression
CN102222505B (zh) * 2010-04-13 2012-12-19 中兴通讯股份有限公司 可分层音频编解码方法系统及瞬态信号可分层编解码方法
EP2418792A1 (de) * 2010-05-19 2012-02-15 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Digital Multimedia Broadcast (DMB) mit effizienter Übertragung der Daten zur Zugangsbeschränkung im Transportstrom-Packet mit der Programmzuordnungstabelle (Program Association Table = PAT)
US9348691B2 (en) * 2010-09-14 2016-05-24 Lg Electronics Inc. Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, and method for transmitting/receiving broadcast signal through apparatus for transmitting/receiving broadcasting signal
EP2652958B1 (en) * 2010-12-15 2019-10-23 Telefonaktiebolaget LM Ericsson (publ) Methods, a client and a server for handling an mpeg transport stream
WO2012122397A1 (en) * 2011-03-09 2012-09-13 Srs Labs, Inc. System for dynamically creating and rendering audio objects
BR112013033835B1 (pt) * 2011-07-01 2021-09-08 Dolby Laboratories Licensing Corporation Método, aparelho e meio não transitório para autoria e renderização aperfeiçoadas de áudio em 3d
JP2013090016A (ja) 2011-10-13 2013-05-13 Sony Corp 送信装置、送信方法、受信装置および受信方法
WO2013122388A1 (en) * 2012-02-15 2013-08-22 Samsung Electronics Co., Ltd. Data transmission apparatus, data receiving apparatus, data transceiving system, data transmission method and data receiving method
WO2013122385A1 (en) * 2012-02-15 2013-08-22 Samsung Electronics Co., Ltd. Data transmitting apparatus, data receiving apparatus, data transreceiving system, data transmitting method, data receiving method and data transreceiving method
WO2013192111A1 (en) * 2012-06-19 2013-12-27 Dolby Laboratories Licensing Corporation Rendering and playback of spatial audio using channel-based audio systems
WO2014052049A2 (en) 2012-09-28 2014-04-03 Abb Research Ltd. Rotors for rotating machines
CN109166587B (zh) * 2013-01-15 2023-02-03 韩国电子通信研究院 处理信道信号的编码/解码装置及方法
JP6174326B2 (ja) * 2013-01-23 2017-08-02 日本放送協会 音響信号作成装置及び音響信号再生装置
TWI530941B (zh) * 2013-04-03 2016-04-21 杜比實驗室特許公司 用於基於物件音頻之互動成像的方法與系統
ES2640815T3 (es) * 2013-05-24 2017-11-06 Dolby International Ab Codificación eficiente de escenas de audio que comprenden objetos de audio
CN117767898A (zh) * 2013-09-12 2024-03-26 杜比实验室特许公司 用于各种回放环境的动态范围控制
CN110675884B (zh) * 2013-09-12 2023-08-08 杜比实验室特许公司 用于下混合音频内容的响度调整
EP3039845B1 (en) * 2014-01-14 2019-06-26 LG Electronics Inc. Apparatus for transmitting broadcast signals, apparatus for receiving broadcast signals, method for transmitting broadcast signals and method for receiving broadcast signals
CN106165454B (zh) * 2014-04-02 2018-04-24 韦勒斯标准与技术协会公司 音频信号处理方法和设备
US10694259B2 (en) * 2014-04-09 2020-06-23 Lg Electronics Inc. Broadcast transmission device, broadcast reception device, operating method of broadcast transmission device, and operating method of broadcast reception device
RU2653858C1 (ru) * 2014-05-28 2018-05-15 Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф. Процессор данных и транспорт данных пользовательского управления на устройства декодирования и воспроизведения аудио
CN111951814A (zh) * 2014-09-04 2020-11-17 索尼公司 传输设备、传输方法、接收设备以及接收方法
CN106796797B (zh) * 2014-10-16 2021-04-16 索尼公司 发送设备、发送方法、接收设备和接收方法
CN106798793A (zh) 2017-02-17 2017-06-06 四川双鑫生物科技有限公司 一种可有效治疗牙痛的散剂药物及其制备方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004077406A1 (ja) * 2003-02-28 2004-09-10 Matsushita Electric Industrial Co., Ltd. 再生装置および再生方法
JP2014013400A (ja) * 2006-05-19 2014-01-23 Electronics And Telecommunications Research Institute オブジェクトベースのオーディオサービスシステム及びその方法
KR101021831B1 (ko) * 2006-08-24 2011-03-17 노키아 코포레이션 미디어 파일에서 트랙 관계를 표시하는 시스템 및 방법
JP2012523746A (ja) * 2009-04-09 2012-10-04 テレフオンアクチーボラゲット エル エム エリクソン（パブル） メディア・コンテナ・ファイル管理
JP2012033243A (ja) * 2010-08-02 2012-02-16 Sony Corp データ生成装置およびデータ生成方法、データ処理装置およびデータ処理方法
WO2013006338A2 (en) * 2011-07-01 2013-01-10 Dolby Laboratories Licensing Corporation System and method for adaptive audio signal generation, coding and rendering
WO2014058275A1 (ko) * 2012-10-11 2014-04-17 한국전자통신연구원 오디오 데이터 생성 장치 및 방법, 오디오 데이터 재생 장치 및 방법
WO2014088328A1 (ko) * 2012-12-04 2014-06-12 삼성전자 주식회사 오디오 제공 장치 및 오디오 제공 방법

Also Published As

Publication number Publication date
US20170302995A1 (en) 2017-10-19
US20240089534A1 (en) 2024-03-14
US11871078B2 (en) 2024-01-09
CN106716524B (zh) 2021-10-22
RU2017109625A3 (ja) 2019-04-04
JP7310849B2 (ja) 2023-07-19
US20240114202A1 (en) 2024-04-04
EP3203469A4 (en) 2018-06-27
RU2017109625A (ru) 2018-09-24
JP2023081933A (ja) 2023-06-13
CN106716524A (zh) 2017-05-24
CN113921020A (zh) 2022-01-11
CN113921019A (zh) 2022-01-11
EP4254405A3 (en) 2023-12-13
EP3203469A1 (en) 2017-08-09
US10856042B2 (en) 2020-12-01
JPWO2016052191A1 (ja) 2017-07-20
US20210058669A1 (en) 2021-02-25
EP4092670A1 (en) 2022-11-23
WO2016052191A1 (ja) 2016-04-07
RU2701060C2 (ru) 2019-09-24
EP4254405A2 (en) 2023-10-04

Similar Documents

Publication Publication Date Title
JP6908168B2 (ja) 受信装置、受信方法、送信装置および送信方法
JP6729382B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP7310849B2 (ja) 受信装置および受信方法
US20230230601A1 (en) Transmission device, transmission method, reception device, and reception method
JP7218772B2 (ja) 受信装置および受信方法
JPWO2017104519A1 (ja) 送信装置、送信方法、受信装置および受信方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210428

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220805

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230301

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20230301

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20230309

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20230314

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230606

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230619

R151 Written notification of patent or utility model registration

Ref document number: 7310849

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151