CN107431834A - 传输设备、传输方法、接收设备、以及接收方法 - Google Patents

传输设备、传输方法、接收设备、以及接收方法 Download PDF

Info

Publication number
CN107431834A
CN107431834A CN201680019316.2A CN201680019316A CN107431834A CN 107431834 A CN107431834 A CN 107431834A CN 201680019316 A CN201680019316 A CN 201680019316A CN 107431834 A CN107431834 A CN 107431834A
Authority
CN
China
Prior art keywords
information
predetermined
voice data
audio
data stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680019316.2A
Other languages
English (en)
Other versions
CN107431834B (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107431834A publication Critical patent/CN107431834A/zh
Application granted granted Critical
Publication of CN107431834B publication Critical patent/CN107431834B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

本发明的目的是在将规定信息划分为规定数目的音频帧并传输所述音频帧时，可以在接收侧简单且适当地执行规定信息的获取处理。对音频数据进行编码处理，以生成包括音频压缩数据的一系列音频帧的音频压缩数据流。将规定信息插入传输的音频压缩数据流中。将规定的信息划分并插入到音频压缩数据流的规定数目的音频帧中，并且向每个划分的信息段附加表示信息是否为初始信息的第一信息，以及表示划分位置的作为下降计数器的第二信息。

Description

传输设备、传输方法、接收设备、以及接收方法
技术领域
本技术涉及传输设备、传输方法、接收设备、及接收方法，且更具体地涉及将预定信息插入压缩音频数据流并且传输压缩音频数据流的传输设备。
背景技术
通过专利文献1中公开的技术，例如，从广播电台、分发服务器等传输插入到压缩音频数据流中的预定信息，接收侧的机顶盒将压缩音频数据流照现在的样子通过HDMI数字接口传输至电视接收器，并且电视接收器使用预定信息执行信息处理。
引用列表
专利文献
专利文献1：日本专利申请公开号2012-010311
发明内容
本发明解决的问题
本技术的目的是使接收侧能够在预定信息划分为预定数目的音频帧并且传输时容易地并且适当地获得预定信息。
问题的解决方案
本技术的概念在于一种传输设备，其包括：
流生成单元，对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流；
信息插入单元，将预定信息插入压缩音频数据流；以及
流传输单元，传输插入预定信息的压缩音频数据流，
其中，信息插入单元将预定信息划分并插入压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条预定信息，第一信息指示当前条是否是划分的第一条预定信息，第二信息是以降序指示划分位置的计数数目。
在本技术中，流生成单元对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流。信息插入单元将预定信息插入压缩音频数据流中。预定信息例如可以是网络访问信息或者媒体文件。
在此，当预定信息划分并插入到压缩音频数据流的预定数目的音频帧中时，将指示当前条是否是第一条划分信息的第一信息和作为以降序指示划分位置的计数数目的第二信息添加至划分的每条信息中。
如上所述，在本技术中，对预定信息进行划分和插入，并将指示当前条是否是第一条划分信息的第一信息和作为以降序指示划分位置的计数数目的第二信息添加至每条划分信息。因此，接收侧可以从第一信息识别第一条划分信息，从第二信息识别与第一条划分信息对应的划分数，并进一步从第二信息识别剩余条划分信息的数目。因此，接收侧可以容易并且适当地获得预定信息。
应当注意的是，在本技术中，当将预定信息插入压缩音频数据流中时，信息插入单元例如可以将用于管理时间同步的基于UTC的时间信息添加至预定信息。在该情况下，时间信息可以是绝对时间或与预定参考时间的差值。利用这种基于UTC的时间信息，能够实现与通用系统的亲和度。
本技术的另一概念在于一种接收设备，包括：
流接收单元，经由数字接口接收来自外部设备的压缩音频数据流，预定信息插入压缩音频数据流中，
将通过划分预定信息获得的各条划分信息插入压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条信息中，第一信息指示当前条是否是划分的第一条信息，第二信息是以降序指示划分位置的计数数目；
解码处理单元，通过对压缩音频数据流进行解码处理来获得音频数据，并且根据第一信息和第二信息，从预定数目的音频帧中获得形成预定信息的每条划分信息；以及
信息处理单元，使用通过解码处理单元获得的预定信息执行信息处理。
在本技术中，接收单元例如经由符合高分辨率多媒体接口(HDMI)的数字接口，从外部设备接收具有插入其中的预定信息的压缩音频数据流。在此，将通过划分预定信息获得的各条划分信息插入压缩音频数据流的预定数目的音频帧中，将指示当前条是否是第一条划分信息的第一信息和作为以降序指示划分位置的计数数目的第二信息添加至划分的每条信息中。
解码处理单元通过对压缩音频数据流执行解码处理来获得音频数据，并且根据第一信息和第二信息，还从预定数目的音频帧中获得形成预定信息的每条划分信息。信息处理单元然后使用通过解码处理单元获得的预定信息执行信息处理。
预定信息可以是例如网络访问信息，并且信息处理单元可以通过使用网络访问信息访问网络中的预定服务器来获得预定的媒体信息。可替代地，预定信息可以是例如媒体文件，并且信息处理单元可以对媒体文件执行再现处理。
如上所述，在本技术中，根据第一信息和第二信息执行从预定数目音频帧获取形成预定信息的每条划分信息的处理。在该情况下，能够从第一信息识别第一条划分信息，从第二信息识别与第一条划分信息对应的划分数，并进一步从第二信息识别剩余条划分信息的数目。因此，可以容易并且适当地获得预定信息。
应当注意的是，在本技术中，用于管理时间同步的基于UTC的时间信息可以添加至预定信息中，并且信息处理单元可以根据添加至预定信息的基于UTC的时间信息使用预定信息执行对信息处理的时间管理。
本发明的效果
根据本技术，当传输被分成预定数目的音频帧的预定信息时，接收端可以容易并且适当地获得预定信息。应注意，在本说明书内描述的有益效果仅仅是实例，并且本技术的有益效果不限于此，并且可以包括其他效果。
附图说明
图1是示出了作为实施方式的传输/接收系统的示例性配置的框图。
图2是示出了包括在广播传输设备中的流生成单元的示例性配置的框图。
图3是示出MPEG-H3D音频的传输数据中的音频帧(1024个样本)的示例性结构的图。
图4是表示扩展元素的类型与其值之间的对应关系的表。
图5是表示包括通用元数据作为扩展元素的通用元数据帧的示例性配置的表。
图6是示出通用元数据帧中的“time_information()”字段的示例性配置的表。
图7是表示通用元数据帧中的“time_information()”字段的示例性配置中的主要信息的内容的表。
图8是示出以通用元数据帧传输容器(container)目标数据的示例性情况的图。
图9是示出以一个通用元数据帧传输容器目标数据的示例性情况的图。
图10是示出以通用元数据帧传输容器目标数据集的示例性情况的图。
图11是示出根据添加到容器目标数据集的时间信息独立于音频PTS来管理容器目标数据集的执行的实例的图。
图12是示出可以在不依赖于任何音频时间戳的情况下进行在接收侧的容器目标数据(预定信息)的执行的图。
图13是示出根据添加到容器目标数据集的时间信息对其进行同步管理的具体实例的图。
图14是示出了机顶盒的示例性配置的框图。
图15是示出了音频放大器的示例性配置的框图。
图16是示出了电视接收器的示例性配置的框图。
图17是示出了HDMI传输单元和HDMI接收单元的示例性配置的框图。
图18是示出在通过TMDS信道传输图像数据的情况下各种类型的传输数据的周期的示图。
图19是示出了传输/接收系统的另一示例性配置的框图。
具体实施方式
以下是对实施本发明的模式的描述(在下文中模式将称为“实施方式”)。说明将按下面的顺序进行。
1、实施方式
2、变型
<1、实施方式>
[传输/接收系统的示例性配置]
图1作为实施方式示出了传输/接收系统10的示例性配置。传输/接收系统10包括广播传输设备100、机顶盒(STB)200、音频放大器(AMP)300、及电视接收器(TV)500。多信道扬声器系统400连接至音频放大器300。
机顶盒200和音频放大器300经由HDMI电缆610彼此连接。在该情况下，机顶盒200是源，及音频放大器300是目的地。音频放大器300和电视接收器500也经由HDMI电缆620彼此连接。在该情况下，音频放大器300是源，并且电视接收器500是目的地。应注意“HDMI”是注册商标。
广播传输设备100在广播波上传输传送流TS。传送流TS包括视频流和音频流(压缩音频数据流)。广播传输设备100将诸如网络访问信息或媒体文件的预定信息作为容器目标数据插入到音频流中。
例如，网络访问信息包括关于连接到链接服务器的URL，以及用于控制诸如“激活”或“停用”的链接服务器的控制代码组的信息。媒体文件包括例如字符数据等的一般数据文件、音频数据文件和音频/视觉数据文件。
广播传输设备100将预定信息划分并插入音频流的预定数目的音频帧。此时，广播传输设备100将表示当前条是否是第一条划分信息的第一信息和作为以降序表示划分位置的计数数目的第二信息添加至各条划分信息。应注意，预定数目可以是“1”。当预定数目为1时，预定信息未被实际划分，而是将整个信息插入到一个音频帧中。
此外，当将预定信息插入到音频流中时，广播传输设备100将基于用于管理时间同步的协调世界时(UTC)的时间信息添加到预定信息。例如，时间信息是绝对时间或与预定参考时间的差值。
机顶盒200接收在广播波上从广播传输设备100传输的传送流TS。如上所述，传送流TS包括视频流和音频流，并将预定信息插入音频流中。
机顶盒200经由HDMI电缆610将接收到的音频流以及通过对视频流执行解码处理而获得的未压缩视频数据传输至音频放大器300。因此，插入音频流中的预定信息也发送至音频放大器300。
音频放大器300经由HDMI电缆610从机顶盒200接收插入预定信息的音频流以及未压缩的视频数据。音频放大器300通过对音频流执行解码处理来获得多信道音频数据，并将音频数据提供至扬声器系统400。
音频放大器300也经由HDMI电缆620将所接收的未压缩的视频数据和音频流传输至电视接收器500。因此，将插入音频流中的预定信息也发送至电视接收器500。
电视接收器500经由HDMI电缆620从音频放大器300接收插入预定信息的音频流以及未压缩的视频数据。电视接收器500基于未压缩的视频数据显示图像。电视接收器500还执行对音频流的解码处理，并且获取预定信息。
将预定信息划分并插入到音频流的预定数目的音频帧中，并将表示当前条是否是第一条划分信息的第一信息和作为以降序表示划分位置的计数数目的第二信息添加至划分的每条信息中。根据第一信息和第二信息，电视接收器500从预定数目的音频帧获取形成预定信息的每条划分信息。
在这种情况下，电视接收器500可以从第一信息识别第一条划分信息，从第二信息识别与第一条划分信息对应的划分数，并进一步从第二信息识别划分信息的剩余条的数目。因此，电视接收器500可以容易且适当地从预定数目的音频帧中获得形成预定信息的各条划分信息。
电视接收器500使用预定信息执行信息处理。当预定信息是网络访问信息时，例如，电视接收器500访问网络中的预定服务器，并且获取预定媒体信息。此外，当预定信息是媒体文件时，例如，电视接收器500对媒体文件进行再现处理。
将用于管理时间同步的基于UTC的时间信息添加至预定信息。电视接收器500使用根据添加的时间信息的预定信息对信息处理执行时间管理。
[广播传输设备的流生成单元]
图2示出广播传输设备100中的流生成单元110的示例性配置。流生成单元110包括控制单元111、视频编码器112、音频编码器113、及多路复用器114。
控制单元111包括CPU 111a，并且控制流生成单元110的各个部件。视频编码器112对视频数据(图像数据)SV执行诸如MPEG2、H.264/AVC或H.265/HEVC的编码，以生成视频流(视频基本流)。例如，视频数据SV是从诸如HDD的记录介质再现的视频数据，或者通过摄像机获得的实时视频数据。
音频编码器113依照MPEG-H3D音频的压缩格式对音频数据(声音数据)SA执行编码，以生成音频流(音频基本流)。音频数据SA对应于上述视频数据SV。音频数据SA是从诸如HDD的记录介质再现的音频数据，通过麦克风获得的实时音频数据等。
音频编码器113包括音频编码块单元113a和音频帧单元113b。编码块在音频编码块单元113a处生成，并且在音频帧单元113b处执行成帧。
在控制单元111的控制下，音频编码器113将预定信息插入音频流。在这个实施方式中，例如，预定信息是网络访问信息或者媒体文件。
音频编码器113将预定信息划分并插入到音频流的预定数目(可以是“1”)的音频帧中。此时，音频编码器113将表示当前条是否是第一条划分信息的第一信息和作为以降序表示划分位置的计数数目的第二信息添加至各条划分信息。另外，此时，音频编码器113将用于管理时间同步的基于UTC的时间信息(表示执行时间的时间信息)添加至预定信息。
图3示出MPEG-H3D音频的传输数据中的音频帧(1024个样本)的示例性结构。该音频帧利用MPEG音频流分组(mpeg音频流分组)形成。每个MPEG音频流分组利用报头(Header)和有效载荷(Payload)形成。
报头包含诸如分组类型(Packet Type)、分组标签(Packet Label)、及分组长度(Packet Length)的信息。有效载荷包含由报头中的分组类型定义的信息。该有效载荷信息包括等于同步起始码的“SYNC”、作为3D音频传输数据的真实数据的“帧”及表示该“帧”配置的“Config”。
“帧”包括组成3D音频传输数据的目标编码数据和信道编码数据。在此，信道编码数据利用编码样本数据，诸如单信道元素(SCE)、信道对元素(CPE)、及低频元素(LFE)形成。同时，通过将编码的样本数据映射到位于任何适当位置的扬声器，利用单信道元素(SCE)的编码样本数据和用于呈现编码样本数据的元数据形成目标编码数据。该元数据作为扩展元素(Ext_element)包含。
在本实施方式中，将具有诸如网络访问信息的预定信息或作为通用元数据(universal_metadata)的媒体文件的元素(Ext_userdata)新定义为扩展元素(Ext_element)。与此同时，在“Config”中新定义关于元素(Ext_universal_metadata)的配置信息(universal_metadataConfig)。
图4示出扩展元素(Ext_element)的类型(ExElementType)与其值(Value)之间的对应关系。目前，定义0至7。由于可以在128以外的外部扩展MPEG，因此例如将新定义128为“ID_EXT_ELE_universal_metadata”类型的值。在诸如MPEG的标准的情况下，也可以定义8至127的范围。
图5示出包括通用元数据作为扩展元素的通用元数据帧(universal_metadata_frame())的示例性配置(语法)。图6示出通用元数据帧中的“time_information()”字段的示例性配置(语法)。图7示出了各示例性配置中的主要信息的内容(语义)。
8位字段“metadata_type”表示容器目标数据的类型。例如，“0x10”表示容器目标数据是网络访问信息，并且“0x11”表示容器目标数据是媒体文件。1位字段“start_flag”表示当前信息条是否是容器目标数据的开始。在此，“1”表示开始，而“0”不表示开始。7位字段“dcounter”表示以降序计数数目划分元数据的划分位置。在此，“0”表示最后条划分元数据。在“start_flag”是“1”并且“dcounter”是“0”的情况下，不划分容器目标数据。
6位字段“dt_id”表示数据的ID。使用应用来引用数据的ID，并且进行与ID的关联。1位字段“timing_control_flag”表示同步管理信息是否插入。在此，“1”表示同步管理信息被插入，而“0”表示同步管理信息未插入。8位字段“长度”表示具有字节计数值的随后数据的尺寸。
容器目标数据(网络访问信息、媒体文件等)放在“data_byte”字段中。另外，当“timing_control_flag”是“1”时，存在字段“time_information()”。
1位字段“absolute_time_flag”表示执行时间是否是UTC绝对时间或者执行时间是否是与参考时间的差值。在此，“1”表示执行时间是UTC绝对时间。同时，“0”表示执行时间是与参考时间的差值。
当“absolute_time_flag”是“1”时，存在32位字段的“exec_time_msw”和32位字段的“exec_time_1sw”。字段“exec_time_msw”表示作为数据执行时间的UTC绝对时间的高32位，并且字段“exec_time_1sw”表示其低32位。
当“absolute_time_flag”是“0”时，存在32位字段的“reference_UTC_msw”、32位字段的“reference_UTC_lsw”、32位字段的“offset_exec_time_msw”、及32位字段的“offset_exec_time_1sw”。字段“reference_UTC_msw”表示参考时间的高32位，而字段“reference_UTC_lsw”表示参考时间的低32位。字段“offset_exec_time_msw”表示作为数据执行时间的参考时间值的差值的高32位，并且字段“offset_exec_time_1sw”表示其低32位。
返回参考图2，多路复用器114将从视频编码器112输出的视频流和从音频编码器113输出的音频流转换为PES分组，进一步将PES分组转换和复用为传输分组，并且因此获取传送流TS作为多路复用流。
现在简要地描述在图2中示出的流生成单元110的操作。将视频数据SV提供至视频编码器112。在视频编码器112中，对视频数据SV执行诸如H.264/AVC或者H.265/HEVC的编码，使得生成包括编码的视频数据的视频流。
同时，将音频数据SA提供至音频编码器113。在音频编码器113中，依照MPEG-H3D音频的压缩格式编码音频数据SA，使得生成音频流(压缩音频数据流)。
此时，将要插入音频流的预定信息(网络访问信息、媒体文件等)，或者容器目标数据从控制单元111提供至音频编码器113。在音频编码器113中，将容器目标数据(预定信息)划分并插入音频流的预定数目(可以是“1”)的音频帧中。此时，在音频编码器113中，将表示当前条是否是第一条划分信息的第一信息和作为以降序表示划分位置的计数数目的第二信息添加至各条划分信息。另外，此时在音频编码器113中，将用于管理时间同步的基于UTC的时间信息(表示执行时间的时间信息)添加至预定信息。
将由视频编码器112生成的视频流提供至多路复用器114。同时，将通过音频编码器113生成的音频流提供至多路复用器114。然后，在多路复用器114中，对从各编码器提供的流进行打包和多路复用，因此，作为传输数据获得传送流TS。
[容器目标数据(预定信息)的插入]
现在更详细地描述将容器目标数据插入音频流。图8示出以通用元数据帧传输容器目标数据的示例性情况。
在该情况下，将容器目标数据划分成条。将各条划分信息分配至通用元数据帧，并且插入到字段“data_byte”中(参见图5)。在此，将对应于第一条划分信息的“start_flag”设置为“1”，表示这是第一条划分信息。同时，将对应于第一条划分信息的“dcounter”设置为“n-1”，并且将“1”添加至“dcounter”的值，以表示划分的数目“n”。
在此，将对应于第二条和随后的划分信息的“start_flag”设置为“0”，表示不是第一条划分信息。同时，对应于第二条和随后的划分信息的“dcounter”是从“n-1”顺次递减的计数，并表示划分位置以及划分信息的剩余条数。此外，将对应于最后条划分信息的“dcounter”设置为“0”，表示这是最后条划分信息。
可替代地，可以将对应于第一条划分信息的“dcounter”设置为“n”，对应于第二条和随后的划分信息的“dcounter”可以是从“n”顺次递减的计数数目，可以将对应于最后条划分信息的“dcounter”设置为“1”。在此，对应于第一条划分信息的“dcounter”的“n”表示划分数目，并且作为“1”的“dcounter”表示最后条划分信息。
图9示出以一个通用元数据帧传输容器目标数据的示例性情况。在该情况下，容器目标数据未划分但是以一个通用元数据帧插入字段“data_byte”中(参见图5)。在此，“start_flag”设置为“1”，表示这第一条划分信息。同时，将“dcounter”设置为“0”，表示这是最后条划分信息。从这些条信息可以看出，容器目标数据未划分。
图10示出以通用元数据帧传输容器目标数据集的示例性情况。在图中所示的实例中，传输了作为具有作为“dt_id”的“0”的容器目标数据A和具有作为“dt_id”的“1”的容器目标数据B的两组容器目标数据。
在该情况下，将容器目标数据A划分成三条。将三条划分信息分配至三个通用元数据帧，并且插入字段“data_byte”(参见图5)。在此，将对应于第一条划分信息的“start_flag”设置为“1”，其表示是这第一条划分信息。同时，将对应于第一条划分信息的“dcounter”设置为“2”，并且将“1”添加至“dcounter”的值，以表示划分的数目“3”。
在此，将对应于第二条划分信息的“start_flag”设置为“0”，表示不是第一条划分信息。同时，将对应于第二条划分信息的“dcounter”设置为“1”，以表示划分位置，并且剩余条划分信息的数目为“1”。此外，将对应于最后条划分信息的“start_flag”设置为“0”，表示不是最后条划分信息。同时，将对应于最后条划分信息的“dcounter”设置为“0”，表示是最后条划分信息。
同时，容器目标数据B未划分但是以一个通用元数据帧插入字段“data_byte”中(参见图5)。在此，“start_flag”设置为“1”，表示是第一条划分信息。同时，将“dcounter”设置为“0”，表示是最后条划分信息。从这些条信息可以看出，容器目标数据B未划分。
[容器目标数据(预定信息)的同步管理]
现在描述容器目标数据(预定信息)的同步管理。图11示出根据添加到容器目标数据集的时间信息独立于音频PTS来管理容器目标数据集的执行的实例。
在该实例中，在对应的执行时间(exec_time)开始执行具有作为“dt_id”的“1”的容器目标数据，在对应的执行时间开始执行具有作为“dt_id”的“2”的容器目标数据，并且此外，在对应的执行时间开始执行具有作为“dt_id”的“3”的容器目标数据。
图12示出可以在不依赖于任何音频时间戳的情况下进行在接收侧的容器目标数据(预定信息)的执行。在该实例中，将容器目标数据划分为三条(Data_0-1、Data_0-2、及Data_0-3)，并且将三条分配并且插入三个音频帧中。
该实例还示出了容器目标数据的执行时间由与参考时间的差值OFS表示，并且该参考时间等于“音频时间戳(n)”的情况。该“音频时间戳(n)”表示开始通过对音频帧0(帧0)进行解码而获得的音频数据(音频样本)的输出的定时。该“音频时间戳(n)”对应于“UTC值”。
传输划分并插入到三个音频帧中的容器目标数据，并且在执行时间(exec time)开始容器目标数据的执行，该执行时间是通过将差值OFS添加到参考时间而计算的时间。即，在不依赖于任何音频时间戳的情况下来进行容器目标数据的执行。
这里，在容器目标数据中具有相关类型戳的情况下，基于执行时间在相关时间执行同步管理。例如，在容器目标数据是没有时间概念的媒体文件，诸如MP3的情况下，在执行时间立即开始再现。此外，在当前容器是具有相关时间戳的诸如MP4的媒体文件的情况下，例如，进行再现同步管理，其中，执行时间是基点。
在图12中示出的实例中，容器目标数据的执行时间由与参考时间的差值OFS表示。然而，在该容器目标数据的执行时间由表示执行时间(exec time)的UTC绝对时间“UTC'值”表示的情况下，可以进行类似的操作。即，如上所述，表示要添加到容器目标数据的执行时间的时间信息可以是UTC绝对时间或与参考时间的差值。
图13示出根据添加到容器目标数据集的时间信息对容器目标数据集进行同步管理的具体实例。在该实例中，作为具有作为“dt_id”的“1”的容器目标数据传输关于用于连接到链接服务器的URL和用于执行诸如链接服务器上的“激活”或“停用”的控制的控制代码组的信息。
在该情况下，在执行时间“exec time 1”，使用URL执行与链接服务器的连接。之后，从执行时间“exec time 3”起，在具有控制代码组的链接服务器上执行诸如“激活”或“停用”的控制，使得从链接服务器开始和结束媒体再现。
此外，在该实例中，还作为具有作为“dt_id”的“2”的容器目标数据传输关于用于连接到链接服务器的URL和用于执行诸如链接服务器上的“激活”或“停用”的控制的控制代码组的信息。
在该情况下，在执行时间“exec time 2”，使用URL执行与链接服务器的连接。之后，从执行时间“exec time 4”起，在具有控制代码组的链接服务器上执行诸如“激活”或“停用”的控制，使得从链接服务器开始和结束媒体再现。
此外，在该实例中，作为具有作为“dt_id”的“3”的容器目标数据传输媒体文件。从执行时间“exec time 5”起，开始媒体文件的再现。
[机顶盒的示例性配置]
图14示出机顶盒200的示例性配置。机顶盒200包括CPU 201、闪存ROM 202、DRAM203、内部总线204、远程控制接收单元205和远程控制传输器(发射器)206。机顶盒200还包括天线端子211、数字调谐器212、多路分解器(demultiplexer)213、视频解码器214、音频成帧单元215、HDMI传输单元216和HDMI端子217。
CPU 201控制机顶盒200的每个部件的操作。闪存ROM 202存储控制软件和数据。DRAM 203形成用于CPU 201的工作区。CPU 201将从闪存ROM 202读取的软件和数据加载到DRAM 203中，并激活软件，以控制机顶盒200的各个部件。
远程控制接收单元205接收从远程控制传输器206传输的远程控制信号(远程控制码)，并将远程控制信号提供至CPU 201。根据该远程控制码，CPU 201控制机顶盒200的各个部件。CPU 201、闪存ROM 202、及DRAM 203连接至内部总线204。
天线端子211是输入由接收天线(现在示出)接收的电视广播信号的端子。数字调谐器212处理输入至天线端子211的电视广播信号，并输出对应于用户选择的信道的传送流TS。
多路分解器213从传送流TS提取视频流分组(packet)，并将分组发送至视频解码器214。视频解码器214重构来自通过多路分解器213提取的视频分组的视频流，并且执行解码过程，以获得未压缩的视频数据(图像数据)。
多路分解器213也从传送流TS提取音频流分组，并且重构该音频流。音频成帧单元215对以这种方式重构的音频流执行成帧。在该音频流中，如在流生成单元110(参见图2)的描述中所说明的那样插入诸如网络访问信息或媒体文件的预定信息(容器目标数据)。
HDMI传输单元216通过执行HDMI兼容通信，从HDMI端子217传输由视频解码器214获得的未压缩视频数据和由音频成帧单元215进行成帧的音频流。为了通过符合HDMI的TMDS信道进行传输，HDMI传输单元216对视频数据和音频流进行打包，然后将视频数据和音频流输出到HDMI端子217。随后将详细地描述HDMI传输单元216。
现在简要描述机顶盒200的操作。将输入至天线端子211的电视广播信号提供至数字调谐器212。在数字调谐器212中，处理电视广播信号，并输出对应于用户选择的信道的传送流TS。
从数字调谐器212输出的传送流TS提供至多路分解器213。在多路分解器213中，从传送流TS提取视频基本流分组，并将该视频基本流分组发送至视频解码器214。
在视频解码器214中，在根据多路分解器213提取的视频分组重构视频流之后，对视频流执行解码处理，从而获得未压缩的视频数据。将未压缩的视频数据提供至HDMI传输单元216。
在多路分解器213中，还从传送流TS中提取音频流分组，并且重构具有诸如网络访问信息或插入其中的媒体文件的预定信息(容器目标数据)的音频流。该音频流由音频成帧单元215进行成帧，然后提供至HDMI传输单元216。然后，在HDMI传输单元216中，对未压缩视频数据和音频流进行打包，并且经由HDMI电缆610从HDMI端子217传输至音频放大器300。
[音频放大器的示例性配置]
图15示出音频放大器300的示例性配置。音频放大器300包括CPU 301、闪存ROM302、DRAM 303、内部总线304、远程控制接收单元305和远程控制传输器306。音频放大器300还包括HDMI端子311、HDMI接收单元312、音频解码器313、音频处理电路314、音频放大器电路315、音频输出端子316、HDMI传输单元317、及HDMI端子318。
CPU301控制音频放大器300的每个部件的操作。闪存ROM 302存储控制软件和数据。DRAM 303形成用于CPU 301的工作区。CPU 301将从闪存ROM 302读取的软件和数据加载到DRAM 303中，并激活软件，以控制音频放大器300的各个部件。
远程控制接收单元305接收从远程控制传输器306传输的远程控制信号(远程控制代码)，并将远程控制信号提供至CPU 301。根据该远程控制码，CPU 301控制音频放大器300的各个部件。CPU 301、闪存ROM 302、及DRAM 303连接至内部总线304。
HDMI接收单元312通过执行HDMI兼容通信接收经由HDMI电缆610提供至HDMI端子311的未压缩视频数据和音频流。在该音频流中，如在机顶盒200(参见图14)的以上描述中所说明的那样插入诸如网络访问信息或媒体文件的预定信息(容器目标数据)。随后将详细地描述HDMI接收单元312。
音频解码器313对由HDMI接收单元212接收的音频流执行解码处理，以获得预定数目信道的未压缩音频数据(声音数据)。音频处理电路314对预定数目的信道的未压缩音频数据执行根据扬声器系统400(参见图1)的配置需要的必要的上混合/下混合处理。通过这样做，音频处理电路314获得必要数目的信道的音频数据，并执行诸如D/A转换的必要的处理。
音频放大器电路315放大由音频处理电路314获得的每个信道的音频信号，并将放大的音频信号输出到音频输出端子316。应注意，扬声器系统400连接至音频输出端子316。
HDMI传输单元317通过执行HDMI兼容通信从HDMI端子318传输由HDMI接收单元212接收的未压缩的视频数据和音频流。为了通过符合HDMI的TMDS信道进行传输，HDMI传输单元317对未压缩的视频数据和音频流进行打包，然后将未压缩的视频数据和音频流输出到HDMI端子318。随后将详细地描述HDMI传输单元317。
现在简要地描述在图15中示出的音频放大器200的操作。在HDMI接收单元312中，接收经由HDMI电缆610从机顶盒200传输至HDMI端子311的未压缩的视频数据和音频流。
将由HDMI接收单元312接收的音频流提供至音频解码器313。在音频解码器313中，对音频流执行解码处理，因此获得预定数目信道的未压缩的音频数据。将该音频数据提供至音频处理电路314。
在音频处理电路314中，对预定数目信道的未压缩音频数据执行根据扬声器系统400(参见图1)的配置需要的上混合/下混合处理。因此，获得必要数目信道的音频数据，并且执行诸如D/A转换的必要处理。从音频处理电路314输出的各个信道的音频数据通过音频放大器电路315放大，然后输出到音频输出端316。因此，从连接至音频输出端子316的扬声器系统400获得预定数目信道的音频输出。
还将由HDMI接收单元312接收的未压缩的视频数据和音频流提供至HDMI传输单元317。应当注意，代替由HDMI接收单元312接收的未压缩视频数据，可以将通过执行诸如图形数据叠加在未压缩视频数据上的处理获得的视频数据提供至HDMI传输单元317。在HDMI传输单元317中，对未压缩视频数据和音频流进行打包，并且经由HDMI电缆620从HDMI端子318传输至电视接收器500。
[电视接收器的示例性配置]
图16示出电视接收器500的示例性配置。电视接收器500包括CPU 501、闪存ROM502、DRAM 503、内部总线504、远程控制接收单元505、远程控制传输器506、及通信接口507。
此外，电视接收器500包括天线端子511、数字调谐器512、多路分解器513、视频解码器514、HDMI端子515、及HDMI接收单元516。电视接收器500进一步包括视频处理电路517、面板驱动电路518、显示面板519、音频解码器520、音频处理电路521、音频放大器电路522、及扬声器523。
CPU 501控制电视接收器500的各个部件的操作。闪存ROM 502存储控制软件和数据。DRAM 503形成用于CPU 501的工作区。CPU 501将从闪存ROM 502读取的软件和数据加载到DRAM 503中，并激活软件，以控制电视接收器500的各个部件。
远程控制接收单元505接收从远程控制传输器506传输的远程控制信号(远程控制代码)，并将远程控制信号提供至CPU 501。根据该远程控制码，CPU 501控制电视接收器500的各个部件。CPU 501、闪存ROM 502、及DRAM 503连接至内部总线504。
在CPU 501的控制下，通信接口507与诸如互联网的网络中存在的服务器通信。通信接口507连接至内部总线504。
天线端子511是输入由接收天线(现在示出)接收的电视广播信号的端子。数字调谐器512处理输入至天线端子511的电视广播信号，并输出对应于用户选择的信道的传送流TS。
多路分解器513从传送流TS提取视频流分组，并将分组发送至视频解码器514。视频解码器514重构来自通过多路分解器513提取的视频分组的视频流，并且执行解码过程，以获得未压缩的视频数据(图像数据)。
多路分解器513也从传送流TS提取音频流分组，并且重构该音频流。在该音频流中，如在流生成单元110(参见图2)的描述中所说明的那样插入诸如网络访问信息或媒体文件的预定信息(容器目标数据)。
HDMI接收单元516通过执行HDMI兼容通信接收经由HDMI电缆620提供至HDMI端子515的未压缩视频数据和音频流。在该音频流中，如在音频放大器300(参见图15)的描述中所说明的那样插入诸如网络访问信息或媒体文件的预定信息(容器目标数据)。随后将详细地描述HDMI接收单元516。
视频处理电路517对由视频解码器514获得的视频数据或者由HDMI接收单元516获得的视频数据，由通信接口507从网络中的服务器接收的视频数据等执行缩放处理、组合处理等。通过这样做，视频处理电路517获取显示视频数据。
面板驱动电路518根据通过视频处理电路517获得的显示图像数据驱动显示面板519。显示面板519例如利用液晶显示器(LCD)或者有机电致发光(EL)显示器形成。
音频解码器520对通过多路分解器513获得的音频流或者通过HDMI接收单元516获得的音频流执行解码处理。通过这样做，音频解码器520获取未压缩的音频数据(声音数据)。音频解码器520还提取诸如插入音频流中的网络访问信息或者媒体文件的预定信息(容器目标数据)，并将预定信息传输至CPU 501。CPU 501使电视接收器500的每个部件根据需要使用该预定信息执行信息处理。
在此，将预定信息划分并插入到音频流的预定数目(可以是“1”)的音频帧中，并将表示当前条是否是第一条划分信息的第一信息和作为以降序表示划分位置的计数数目的第二信息添加至划分的每条信息中。根据第一信息和第二信息，音频解码器520从预定数目的音频帧获取形成预定信息的每条划分信息。
在这种情况下，音频解码器520可以从第一信息识别第一条划分信息，从第二信息识别与第一条划分信息对应的划分数，并进一步从第二信息识别剩余条划分信息的数目。因此，音频解码器520可以容易且适当地从预定数目的音频帧中获得形成预定信息的每条划分信息。此外，利用第二信息(计数器信息)，(1)当传输分组中出现错误时，接收侧有可能在中间检测传输分组中的这种错误，以及(2)接收侧也可以识别划分信息的最后分组到达接收侧所需的适当时间。
CPU 501使电视接收器500的每个部件根据需要使用该预定信息执行信息处理。例如，当预定信息是网络访问信息时，电视接收器500访问网络中的预定服务器，并且获取预定媒体信息。此外，当预定信息是媒体文件时，例如，电视接收器500对媒体文件进行再现处理。应当注意，如果将基于UTC的时间信息添加到预定信息，则根据添加的时间信息来管理使用预定信息的信息处理的时间同步。
音频处理电路521对通过音频解码器520获得的音频数据执行诸如D/A转换的必要的处理。音频放大器电路522放大从音频处理电路521输出的声音信号，并将放大的声音信号提供至扬声器523。
现在简要地描述在图16中示出的电视接收器500的操作。将输入至天线端子511的电视广播信号提供至数字调谐器512。在数字调谐器512中，处理电视广播信号，并获得对应于用户选择的信道的传送流TS。
将通过数字调谐器512获得的传送流TS提供至多路分解器513。多路分解器513从传送流TS提取视频流分组，并将分组提供至视频解码器514。在视频解码器514中，根据通过多路分解器513提取的视频分组重构视频流，并执行解码处理，从而获得未压缩的视频数据。将未压缩的视频数据提供至视频处理电路517。
在多路分解器513中，还从传送流TS提取音频流分组，并且重构音频流。将该音频流提供至音频解码器520。
在HDMI接收单元516中，通过HDMI兼容通信接收经由HDMI电缆620提供至HDMI端子515的未压缩视频数据和音频流。将未压缩的视频数据提供至视频处理电路517。同时，将音频流提供至音频解码器520。
在视频处理电路517中，对由视频解码器514获得的视频数据或者由HDMI接收单元516获得的视频数据、由通信接口507从网络中的服务器接收的视频数据等执行缩放处理、组合处理等。因此，获得显示视频数据。
将通过视频处理电路517获得的显示视频数据提供至面板驱动电路518。根据显示视频数据，面板驱动电路518驱动显示面板519。因此，在显示面板519上显示对应于显示视频数据的图像。
在音频解码器520中，对通过多路分解器513获得的音频流或者通过HDMI接收单元516获得的音频流执行解码处理，因此获得未压缩的音频数据。将通过音频解码器520获得的音频数据提供至音频处理电路521。在音频处理电路521中，对音频数据执行诸如D/A转换的必要处理。该音频数据通过音频放大器电路522放大，然后提供至扬声器523。因此，从扬声器523输出对应于显示在显示面板519上的图像的声音。
另外，在音频解码器520中，提取诸如插入音频流中的网络访问信息或者媒体文件的预定信息(容器目标数据)。如上所述通过音频解码器520提取的预定信息发送至CPU501。在CPU 501的控制下，根据需要，然后在电视接收器500的每个部件处执行使用预定信息的信息处理。
[HDMI传输单元和HDMI接收单元的示例性配置]
图17示出了图1中示出的传输/接收系统10中的机顶盒200的HDMI传输单元216(参见图14)和音频放大器300的HDMI接收单元312(参见图15)的示例性配置。应当注意，音频放大器300的HDMI传输单元317和电视接收器500的HDMI接收单元516的示例性配置类似于HDMI传输单元216和HDMI接收单元312的示例性配置，因此，下文不再对其进行说明。
HDMI传输单元216通过有源图像周期21(在适当的情况下，以下也称为“有源视频周期”)中的信道将对应于一个屏幕的未压缩图像的像素数据的差分信号单向地传输到HDMI接收单元312(参见图18)，该有源图像周期21是通过从从一个垂直同步信号到下一个垂直同步信号的周期中减去水平消隐周期22和垂直消隐周期23所获得的周期。在水平消隐周期22或垂直消隐周期23中，HDMI传输单元216还通过信道将至少对应于伴随图像的声音数据、控制数据、其他辅助数据等的差分信号单向传输到HDMI接收单元312。
即，HDMI传输单元216包括HDMI传输器31。例如，传输器31将未压缩图像的像素数据转换为对应的差分信号，并通过作为信道的三个转换最小化的差分信号(TMDS)信道#0、#1及#2将该差分信号单向并串行传输到HDMI接收单元312。
传输器31还将伴随未压缩图像的声音数据以及必要的控制数据、其他辅助数据等转换为对应的差分信号，并通过三个TMDS信道#0、#1及#2将差分信号单向并串行传输到HDMI接收单元312。
在有源视频周期21(参见图18)中，HDMI接收单元312通过信道接收对应于从HDMI传输单元216单向传输的像素数据的差分信号。在水平消隐周期22(参见图18)或者垂直消隐周期23(参见图18)中，HDMI接收单元312还通过信道接收对应于从HDMI传输单元216单向传输的声音数据和控制数据的差分信号。
利用HDMI传输单元216和HDMI接收单元312形成的HDMI系统中的传输信道包括诸如显示数据信道(DDC)33和消费电子产品控制(CEC)线34的传输信道，以及用作用于传输像素数据和声音数据的传输信道的三个TMDS信道#0至#2，以及用作用于传输像素时钟的传输信道的TMDS时钟信道。
DDC 33由HDMI电缆610中包括的两个信号线形成，并且由HDMI传输单元216用于经由HDMI电缆610从连接于其的HDMI接收单元312读取扩展显示标识数据(EDID)。即，HDMI接收单元312不仅包括HDMI接收器32而且包括存储EDID的EDID只读存储器(ROM)，EDID为关于其性能(配置和能力)的性能信息。当HDMI传输单元216读取EDID时，将关于接收侧的解码能力信息发送至传输侧。
HDMI传输单元216经由DDC 33从经由HDMI电缆610与其连接的HDMI接收单元312读取EDID。机顶盒200的CPU 201从EDID识别包括HDMI接收单元312的音频放大器300的性能。
CEC线34由HDMI电缆610中包含的一个信号线形成，并且用于在HDMI传输单元216与HDMI接收单元312之间进行控制数据的双向通信。HDMI电缆610还包括连接至称为热插拔检测(HPD)的插脚的HPD线35。
使用HPD线35，源设备可以检测宿设备(目标设备)与DC偏置电位的连接。在该情况下，从源设备的观点出发，HPD线35具有通过DC偏置电位从宿设备接收连接状态的通知的功能。另一方面，从宿设备侧的观点出发，HPD线具有通过DC偏置电位通知连接状态的源设备的功能。HDMI电缆610还包括用于从源设备提供电力至宿设备的电源线36。
HDMI电缆610进一步包括备用线37。存在使用HPD线35和备用线37传输以太网信号的HDMI以太网信道(HEC)。还存在音频返回信道(ARC)，该音频返回信道使用HPD线35和备用线37，或仅使用HPD线35将音频数据从目的地设备(宿设备)传输到源设备。应注意“以太网”是注册商标。
图18示出在通过TMDS信道传输1920像素×1080行的图像数据的情况下各种类型的传输数据的周期。在通过符合HDMI的三个TMDS信道传送传输数据的视频场(VideoField)中，存在三种周期：视频数据周期24(视频数据周期)、数据岛周期25(数据岛周期)，及控制周期26(控制周期)。
这里，视场周期是从垂直同步信号的上升沿(有效沿)到下一个垂直同步信号的上升沿的周期，并划分为水平消隐周期22(水平消隐)，垂直消隐周期23(垂直消隐)和作为通过从视频场周期中减去水平消隐周期和垂直消隐周期而获得的周期的有源像素周期21(有效视频)。
将视频数据周期24分配至有源像素周期21。在视频数据周期24中，传输组成一个屏幕的未压缩图像数据的相当于1920像素×1080行的有源像素(Active Pixels)的数据。同时，将数据岛周期25和控制周期26分配给水平消隐周期22和垂直消隐周期23。在数据岛周期25和控制周期26中，传输辅助数据(Auxiliary Data)。
具体地，将数据岛周期25分配给水平消隐周期22和垂直消隐周期23的一部分。在数据岛周期25中，传输与诸如声音数据包的辅助数据中与控制无关的数据。将控制周期26分配给水平消隐周期22和垂直消隐周期23的剩余部分。在控制周期26中，传输与辅助数据中与控制有关的数据，诸如垂直同步信号、水平同步信号和控制分组。
如上所述，在图1所示的传输/接收系统10中，广播传输设备100将预定信息(容器目标数据)划分并插入到音频流的音频帧中，并将表示当前条是否是第一条划分信息的第一信息，以及以降序表示划分位置的计数数目的第二信息添加至划分信息的每个中。因此，接收侧可以从第一信息识别第一条划分信息，从第二信息识别与第一条划分信息对应的划分数，并进一步从第二信息识别剩余条划分信息的数目。因此，可以容易并且适当地获得预定信息。
此外，在图1所示的传输/接收系统10中，广播传输设备100将基于UTC的时间信息(一般时间信息)作为用于管理时间同步的时间信息添加到插入音频流中的预定信息(容器目标数据)。因此，可以实现与通用系统的亲和度。
<2、变型>
在上述实施方式中，已描述音频压缩格式是MPEG-H3D音频的实例。然而，本技术也可以应用于音频压缩格式是其他音频压缩格式，例如AAC、AC3或AC4的情况。
此外，在上述实施方式中，将机顶盒200设计为从广播传输设备100传输的广播信号接收视频流和音频流。然而，机顶盒200还可以经由网络从分发服务器(流式传输服务器)接收视频流和音频流。
另外，在上述实施方式中，已描述容器是传输流(MPEG-2TS)的实例。然而，本技术也可以应用于使用MP4或除此之外的容器进行分配的系统。例如，本技术可以应用于基于MPEG-DASH的流分发系统或处理MPEG媒体传输(MMT)结构传输流的传输/接收系统。
此外，在上述实施方式中，已经描述了音频放大器300插入在机顶盒200和电视接收器500之间的实例。然而，如图19所示，还可以形成其中机顶盒200直接连接到电视接收器500的传输/接收系统10A。
在该传输/接收系统10A中，机顶盒200和电视接收器500经由HDMI电缆610彼此连接。在该情况下，机顶盒200是源，及电视接收器500是目的地。音频放大器300和电视接收器500经由HDMI电缆620彼此连接。在该情况下，音频放大器300是源，并且电视接收器500是目的地。
在这种情况下，未压缩视频数据和其中插入有诸如网络访问信息或媒体文件的预定信息(容器目标数据)的音频流通过HDMI数字接口从机顶盒200传输到电视接收器500。音频流或解码的音频数据也通过HDMI音频返回信道从电视接收器500传输至音频放大器300。
此外，在上述实施方式中，已经描述了包括机顶盒200和电视接收器500的传输/接收系统10。然而，可以采用监控设备、投影仪等代替电视接收器500。另外，可以采用具有接收功能的记录器、个人电脑等代替机顶盒200。
此外，在上述实施方式中，接收侧上的各个设备通过HDMI数字接口有线地连接。然而，在各个设备通过类似于符合HDMI的数字接口的数字接口有线地连接时，或者甚至可以无线连接的情况下，当然可以应用本发明。
也可在下面描述的配置中体现本技术。
(1)一种传输设备，包括：
流生成单元，对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流；
信息插入单元，将预定信息插入压缩音频数据流；以及
流传输单元，传输插入了预定信息的压缩音频数据流，
其中，信息插入单元将预定信息划分并插入到压缩音频数据流的预定数目的音频帧，并将第一信息和第二信息添加至划分的每条预定信息中，第一信息表示当前条是否是划分的第一条预定信息，第二信息是以降序表示划分位置的计数数目。
(2)根据(1)的传输设备，其中，当将预定信息插入压缩音频数据流时，信息插入单元将用于管理时间同步的基于UTC的时间信息添加至预定信息。
(3)根据(2)的传输设备，其中，时间信息是绝对时间或与预定参考时间的差值。
(4)根据(1)至(3)中任意一个所述的传输设备，其中，预定信息是网络访问信息或者媒体文件。
(5)一种传输方法，包括：
流生成步骤，对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流；
信息插入步骤，将预定信息插入压缩音频数据流；以及
流传输步骤，传输其中插入有预定信息的压缩音频数据流，压缩音频数据流通过传输单元传输，
其中，信息插入步骤包括将预定信息划分为预定数目并将预定信息插入压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条预定信息，第一信息表示当前条是否是划分的第一条预定信息，第二信息是以降序表示划分位置的计数数目。
(6)一种接收设备，包括：
流接收单元，经由数字接口接收来自外部设备的压缩音频数据流，预定信息插入压缩音频数据流中，
通过划分预定信息获得的各条划分信息插入压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条信息中，第一信息表示当前条是否是划分的第一条信息，第二信息是以降序表示划分位置的计数数目；
解码处理单元，通过对压缩音频数据流进行解码处理来获得音频数据，并且根据第一信息和第二信息，从预定数目的音频帧中获得形成预定信息的每条划分信息；以及
信息处理单元，使用通过解码处理单元获得的预定信息执行信息处理。
(7)根据(6)的接收设备，其中
预定信息是网络访问信息，并且
信息处理单元通过使用网络访问信息访问网络中的预定服务器获取预定媒体信息。
(8)根据(6)的接收设备，其中
预定信息是媒体文件，以及
信息处理单元对媒体文件执行再现处理。
(9)根据(6)至(8)中的任一项所述的接收设备，其中
将用于管理时间同步的基于UTC的时间信息添加至预定信息，并且
信息处理单元根据添加到预定信息的基于UTC的时间信息，使用预定信息对信息处理执行时间管理。
(10)一种接收方法，包括：
流接收步骤，经由数字接口从外部设备接收压缩音频数据流，将预定信息插入压缩音频数据流中，由接收单元接收压缩音频数据流，
将通过划分预定信息获得的各条划分信息插入压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条信息中，第一信息表示当前条是否是划分的第一条信息，第二信息是以降序表示划分位置的计数数目；
解码处理步骤，通过对压缩音频数据流进行解码处理来获得音频数据，并且根据第一信息和第二信息，从预定数目的音频帧中获得形成预定信息的每条划分信息；以及
信息处理步骤，使用在解码处理步骤中获得的预定信息执行信息处理。
本技术的主要特征是当预定信息(容器目标数据)划分并插入到音频流的音频帧中时，将表示当前条是否是第一条划分信息的第一信息“start_flag”和作为以降序表示划分位置的计数数目的第二信息“dcounter”添加至每条划分信息中。以这种方式，在接收侧可以容易地并且适当地获得预定信息(参见图5)。
参考符号列表
10、10A 传输/接收系统
21 有源像素周期
22 水平消隐周期
23 垂直消隐周期
24 视频数据周期
25 数据岛周期
26 控制周期
31 HDMI传输器
32 HDMI接收器
33 DDC
34 CEC线
35 HPD线
36 电源线
37 备用线
100 广播传输设备
110 流生成单元
111 控制单元
111a CPU
112 视频编码器
113 音频编码器
113a 音频编码块单元
113b 音频成帧单元
114 多路复用器
200 机顶盒(STB)
201 CPU
202 闪存ROM
203 DRAM
204 内部总线
205 远程控制接收单元
206 远程控制传输器
211 天线端子
212 数字调谐器
213 多路分解器
214 视频解码器
215 音频成帧单元
216 HDMI传输单元
217 HDMI端子
300 音频放大器(AMP)
301 CPU
302 闪存ROM
303 DRAM
304 内部总线
305 远程控制接收单元
306 远程控制传输器
311 HDMI端子
312 HDMI接收单元
313 音频解码器
314 音频处理电路
315 音频放大器电路
316 音频输出端子
400 扬声器系统(SP)
500 电视接收器(TV)
501 CPU
502 闪存ROM
503 DRAM
504 内部总线
505 远程控制接收单元
506 远程控制传输器
507 通信接口
511 天线端子
512 数字调谐器
513 多路分解器
514 视频解码器
515 HDMI端子
516 HDMI接收单元
517 视频处理电路
518 面板驱动电路
519 显示面板
520 音频解码器
521 音频处理电路
522 音频放大器电路
523 扬声器
610、620 HDMI电缆

Claims (10)

1.一种传输设备，包括：
流生成单元，被配置为对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流；
信息插入单元，被配置为将预定信息插入所述压缩音频数据流；以及
流传输单元，被配置为传输其中插入有所述预定信息的所述压缩音频数据流，
其中，所述信息插入单元将所述预定信息划分并且插入所述压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至所划分的每条预定信息中，所述第一信息指示当前条是否是所划分的第一条预定信息，所述第二信息是以降序指示划分位置的计数数目。
2.根据权利要求1所述的传输设备，其中，当将所述预定信息插入所述压缩音频数据流时，所述信息插入单元将用于管理时间同步的基于UTC的时间信息添加至所述预定信息。
3.根据权利要求2所述的传输设备，其中，所述时间信息是绝对时间和与预定参考时间的差值中的一个。
4.根据权利要求1所述的传输设备，其中，所述预定信息是网络访问信息或者媒体文件。
5.一种传输方法，包括：
流生成步骤，对音频数据执行编码处理，并且生成利用包括压缩音频数据的连续的音频帧形成的压缩音频数据流；
信息插入步骤，将预定信息插入所述压缩音频数据流；以及
流传输步骤，传输其中插入有所述预定信息的所述压缩音频数据流，所述压缩音频数据流通过传输单元传输，
其中，所述信息插入步骤包括将所述预定信息划分为预定数目并且将所述预定信息插入所述压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至所划分的每条预定信息中，所述第一信息指示当前条是否是所划分的第一条预定信息，所述第二信息是以降序指示划分位置的计数数目。
6.一种接收设备，包括：
流接收单元，被配置为经由数字接口接收来自外部设备的压缩音频数据流，预定信息被插入所述压缩音频数据流中，
将通过划分所述预定信息获得的各条划分信息插入所述压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条信息中，所述第一信息指示当前条是否是所划分的第一条信息，所述第二信息是以降序指示划分位置的计数数目；
解码处理单元，被配置为通过对所述压缩音频数据流执行解码处理来获得音频数据，并且根据所述第一信息和所述第二信息，从预定数目的音频帧中获得形成所述预定信息的每条划分信息；以及
信息处理单元，被配置为使用通过所述解码处理单元获得的所述预定信息执行信息处理。
7.根据权利要求6所述的接收设备，其中，
所述预定信息是网络访问信息，并且
所述信息处理单元通过使用所述网络访问信息访问网络中的预定服务器获取预定媒体信息。
8.根据权利要求6所述的接收设备，其中，
所述预定信息是媒体文件，以及
所述信息处理单元对所述媒体文件执行再现处理。
9.根据权利要求6所述的接收设备，其中，
将用于管理时间同步的基于UTC的时间信息添加至所述预定信息，并且
所述信息处理单元根据添加至所述预定信息的时间信息，使用所述预定信息对所述信息处理执行时间管理。
10.一种接收方法，包括：
流接收步骤，经由数字接口从外部设备接收插入有预定信息的压缩音频数据流，由接收单元接收所述压缩音频数据流，
将通过划分所述预定信息获得的各条划分信息插入所述压缩音频数据流的预定数目的音频帧中，并将第一信息和第二信息添加至划分的每条信息中，所述第一信息指示当前条是否是所划分的第一条信息，所述第二信息是以降序指示划分位置的计数数目；
解码处理步骤，通过对所述压缩音频数据流执行解码处理来获得音频数据，并且根据所述第一信息和所述第二信息，从预定数目的音频帧中获得形成所述预定信息的每条划分信息；以及
信息处理步骤，使用在所述解码处理步骤中获得的所述预定信息执行信息处理。
CN201680019316.2A 2015-04-07 2016-04-01 传输设备、传输方法、接收设备、以及接收方法 Active CN107431834B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015078807 2015-04-07
JP2015-078807 2015-04-07
PCT/JP2016/060978 WO2016163325A1 (ja) 2015-04-07 2016-04-01 送信装置、送信方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
CN107431834A true CN107431834A (zh) 2017-12-01
CN107431834B CN107431834B (zh) 2020-10-09

Family

ID=57072593

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680019316.2A Active CN107431834B (zh) 2015-04-07 2016-04-01 传输设备、传输方法、接收设备、以及接收方法

Country Status (6)

Country Link
US (1) US11039182B2 (zh)
EP (1) EP3282709A4 (zh)
JP (1) JP6809450B2 (zh)
KR (1) KR20170134367A (zh)
CN (1) CN107431834B (zh)
WO (1) WO2016163325A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112020015531A2 (pt) * 2018-02-22 2021-02-02 Dolby International Ab método e aparelho para processamento de fluxos de mídias auxiliares integrados em um fluxo de áudio mpeg-h 3d
EP3799042A4 (en) * 2018-05-23 2021-07-14 Sony Corporation TRANSMISSION DEVICE, TRANSMISSION PROCESS, RECEPTION DEVICE AND RECEPTION PROCESS
CN112073789B (zh) * 2019-06-10 2023-04-14 海信视像科技股份有限公司 一种声音处理法及显示设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1764967A (zh) * 2003-07-23 2006-04-26 松下电器产业株式会社 数据处理装置
US20090219282A1 (en) * 2008-02-29 2009-09-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
CN103430560A (zh) * 2011-03-31 2013-12-04 索尼公司 发送装置、发送方法、接收装置、接收方法、程序和广播系统
CN103891301A (zh) * 2011-09-21 2014-06-25 三星电子株式会社 用于同步多媒体广播服务的媒体数据的方法和装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4530083B2 (ja) * 2002-06-07 2010-08-25 セイコーエプソン株式会社 電気光学装置及び電子機器
US7512278B2 (en) * 2003-04-07 2009-03-31 Modulus Video Inc. Scalable array encoding system and method
EP1662793B1 (en) * 2003-09-02 2020-01-15 Sony Corporation Content reception device, video/audio output timing control method, and content providing system
US20110177774A1 (en) * 2010-01-13 2011-07-21 Qualcomm Incorporated Dynamic generation, delivery, and execution of interactive applications over a mobile broadcast network
JP2012010311A (ja) * 2010-05-26 2012-01-12 Sony Corp 送信装置、送信方法、受信装置、受信方法および送受信システム
US9930409B2 (en) * 2014-02-10 2018-03-27 Lg Electronics Inc. Apparatus for transmitting broadcast signals, apparatus for receiving broadcast signals, method for transmitting broadcast signals and method for receiving broadcast signals
KR20170007261A (ko) * 2014-05-15 2017-01-18 소니 주식회사 통신 장치 및 통신 방법과 컴퓨터 프로그램

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1764967A (zh) * 2003-07-23 2006-04-26 松下电器产业株式会社 数据处理装置
US20090219282A1 (en) * 2008-02-29 2009-09-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
CN103430560A (zh) * 2011-03-31 2013-12-04 索尼公司 发送装置、发送方法、接收装置、接收方法、程序和广播系统
CN103891301A (zh) * 2011-09-21 2014-06-25 三星电子株式会社 用于同步多媒体广播服务的媒体数据的方法和装置

Also Published As

Publication number Publication date
KR20170134367A (ko) 2017-12-06
EP3282709A4 (en) 2018-11-21
EP3282709A1 (en) 2018-02-14
JPWO2016163325A1 (ja) 2018-02-08
US20180054634A1 (en) 2018-02-22
JP6809450B2 (ja) 2021-01-06
US11039182B2 (en) 2021-06-15
CN107431834B (zh) 2020-10-09
WO2016163325A1 (ja) 2016-10-13

Similar Documents

Publication Publication Date Title
JP4668515B2 (ja) マルチメディアコンテンツに同期化されたメタデータ伝送装置及び方法
CN102171750B (zh) 用于输送对齐的多通道音频的方法和设备
JP7099510B2 (ja) 受信装置および受信方法
CN105532009B (zh) 发送设备、发送方法、接收设备和接收方法
CN107431834A (zh) 传输设备、传输方法、接收设备、以及接收方法
CN103177725A (zh) 用于输送对齐的多通道音频的方法和设备
CN107615768A (zh) 发送装置、发送方法、接收装置和接收方法
CN103474076A (zh) 用于输送对齐的多通道音频的方法和设备
CN108702533A (zh) 发送装置、发送方法、接收装置和接收方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant